文:物聯(lián)網(wǎng)智庫(kù)
這些年的兩會(huì),“黑科技”逐漸成為新聞報(bào)道中的一道獨(dú)特風(fēng)景線。無(wú)論是2019年中央廣播電視總臺(tái)首次啟用機(jī)器人記者,還是2020年新華社聯(lián)合谷歌打造的首款3D版AI合成主播“新小微”,亦或是2021年人民日?qǐng)?bào)社亮相的“智能創(chuàng)作機(jī)器人”,都成為當(dāng)年媒體圈的“網(wǎng)紅”。而近兩年,又有一款5G產(chǎn)品出了圈,它不光成為了兩會(huì)新聞?dòng)浾叩臉?biāo)配,還被新華網(wǎng)、人民日?qǐng)?bào)等主流媒體點(diǎn)贊,它就是TVU One 5G直播背包。
圖:人民日?qǐng)?bào)報(bào)道截圖
事實(shí)上,作為全球IP視頻專家,TVU Networks已經(jīng)打造出包括TVU One 5G直播背包、TVU Rack 5G多網(wǎng)聚合路由器、TVU Glink雙向IP視頻傳輸器在內(nèi)的5G系列產(chǎn)品矩陣,致力于提升新聞采制的響應(yīng)速度和各類現(xiàn)場(chǎng)活動(dòng)的直播制作水平。
5G助力廣電采編輕量化
據(jù)TVU Networks CEO Paul Shen介紹,直播背包類似一臺(tái)小型電腦,由可調(diào)節(jié)式背包和直播設(shè)備組成,內(nèi)置電池、設(shè)備主機(jī)、音視頻處理終端、遠(yuǎn)程通訊服務(wù)器和一些軟件系統(tǒng)。一般情況下,搭配一臺(tái)外接攝像機(jī),直播背包就可完成直播的采集、處理、傳輸?shù)日琢鞒獭?/p>
在工信部正式發(fā)放5G商用牌照不久,TVU Networks就與模組廠商移遠(yuǎn)通信就5G+4K超高清直播背包研發(fā)達(dá)成了首份合作框架協(xié)議,并于2020年5月宣布TVU One 5G直播背包正式商用。
在兩會(huì)報(bào)道中,記者利用TVU One 5G直播背包便于移動(dòng)行走直播,還能解決傳統(tǒng)通過(guò)視頻連線的網(wǎng)絡(luò)直播痛點(diǎn),實(shí)現(xiàn)更低時(shí)延、更清晰畫面,從而提高節(jié)目質(zhì)量。
在進(jìn)博會(huì)上,存在展會(huì)現(xiàn)場(chǎng)人群密集、信號(hào)環(huán)境復(fù)雜,容易造成信道擁堵以及信號(hào)覆蓋死角等問(wèn)題?;诖?,TVU One 5G直播背包經(jīng)過(guò)數(shù)月的技術(shù)方案討論、驗(yàn)證和實(shí)地部署測(cè)試后,成功在展館內(nèi)實(shí)現(xiàn)視頻快速、穩(wěn)定回傳。
在“開(kāi)往春天的列車”慢直播活動(dòng)中,50名攝影師分赴全球五地,利用TVU One 5G直播背包等產(chǎn)品實(shí)現(xiàn)了12小時(shí)以上超長(zhǎng)直播、區(qū)域復(fù)雜環(huán)境下的高質(zhì)量回傳以及長(zhǎng)時(shí)穩(wěn)定內(nèi)部通訊保障等苛刻挑戰(zhàn),并最終將現(xiàn)場(chǎng)的直播信號(hào)統(tǒng)一采集回傳至位于北京的TVU收發(fā)服務(wù)器。
而在這些場(chǎng)景中,5G是保證TVU One 5G直播背包達(dá)到預(yù)期效果的重要影響因素。據(jù)了解,TVU One 5G背包內(nèi)置基于高通驍龍X55平臺(tái)的移遠(yuǎn)5G模組RM500Q,集成國(guó)際先進(jìn)的動(dòng)態(tài)智能編碼技術(shù)和多路復(fù)用技術(shù),實(shí)現(xiàn)了穩(wěn)定可靠的高畫質(zhì)視頻圖像實(shí)時(shí)直播,并在珠峰等極端條件下成功使用,完成了惡劣條件下的全程直播助力。
值得一提的是,從3G時(shí)代開(kāi)始,TVU直播背包系列產(chǎn)品就使用了高通的芯片解決方案,從實(shí)際體驗(yàn)來(lái)看,高通的芯片也能帶來(lái)更高的產(chǎn)品適應(yīng)性。更重要的是,得益于高通從基帶到射頻再到天線等的5G整體解決方案,和其在世界范圍內(nèi)構(gòu)建的良好生態(tài),TVU Networks能夠更加高效的拓展全球市場(chǎng)。
5G帶來(lái)8K+VR增強(qiáng)體驗(yàn)
當(dāng)然,TVU One 5G直播背包作為外場(chǎng)連線的重要產(chǎn)品,在實(shí)際應(yīng)用過(guò)程中離不開(kāi)可靠的5G網(wǎng)絡(luò)環(huán)境,這就需要TVU Rack Router 5G多網(wǎng)聚合路由器的支持。
與TVU One 5G直播背包相比,TVU Rack Router 5G多網(wǎng)聚合路由器可放大5G多網(wǎng)聚合功能,通過(guò)有線或Wi-Fi等形式,為用戶提供能力更強(qiáng)的5G網(wǎng)絡(luò)服務(wù)?;诟咄?G技術(shù),TVU Rack Router 5G多網(wǎng)聚合路由器是目前全球第一款可聚合多達(dá)6個(gè)5G網(wǎng)絡(luò)的路由器產(chǎn)品,可為各類高帶寬接入應(yīng)用場(chǎng)景提供可靠的技術(shù)保障,上下行帶寬理論可達(dá)3-4Gbps。
事實(shí)上,TVU Rack Router 5G多網(wǎng)聚合路由器還可應(yīng)用至應(yīng)急通訊領(lǐng)域,幫助應(yīng)急通訊部門解決一些臨時(shí)性網(wǎng)絡(luò)接入難題。
不僅如此,借助高通5G技術(shù),TVU Rack Router 5G多網(wǎng)聚合路由器還為8K及VR提供了更多可能。與一般報(bào)道方式不同,全景VR需要對(duì)所有畫面進(jìn)行360度縫合,然而用戶在觀看時(shí)卻只會(huì)聚焦于其中的一小部分,這就造成盡管VR提供的是高清分辨率畫面,但用戶的實(shí)際體驗(yàn)可能連標(biāo)清都達(dá)不到。如今,隨著VR與4K/8K相結(jié)合,終于可為VR用戶帶來(lái)更好體驗(yàn)。
圖:8K信號(hào)傳輸解決方案拓?fù)鋱D
在今年MWC上海展中,TVU Networks就攜手高通等合作伙伴,將兩個(gè)TVU Rack Router終端連接到同一臺(tái)Router 5G多網(wǎng)聚合路由器服務(wù)器上,通過(guò)捆綁多路5G信號(hào),可提供遠(yuǎn)高于單路5G鏈路的帶寬,在5G網(wǎng)絡(luò)云端服務(wù)上構(gòu)建了一條專屬的私有網(wǎng)絡(luò)保障通道,從而實(shí)現(xiàn)高碼率的8K UHD或 8K VR全景信號(hào)的廣播級(jí)質(zhì)量遠(yuǎn)程傳輸。
在高通5G技術(shù)賦能下,TVU Rack Router 5G多網(wǎng)聚合路由器的另一大亮點(diǎn)在于對(duì)5G毫米波的支持。相對(duì)于6 GHz以下的頻段,毫米波段具有更大帶寬、更低空口時(shí)延和靈活彈性空口配置等獨(dú)特的優(yōu)勢(shì),可以有效滿足未來(lái)無(wú)線通信系統(tǒng)容量、傳輸速率和差異化應(yīng)用等需求。
而借助搭載高性能的高通X55 5G芯片產(chǎn)品,TVU Rack Router 5G多網(wǎng)聚合路由器能夠同步兼容Sub-6和毫米波兩大5G波段,極大拓展了該產(chǎn)品在全球各地多種類型業(yè)務(wù)的適應(yīng)性。
5G重構(gòu)融媒體體系
正所謂5G改變社會(huì),除了利用高帶寬特性帶來(lái)更高質(zhì)量的視頻效果外,5G低時(shí)延特性或還將對(duì)傳統(tǒng)融媒體制作形式產(chǎn)生重大影響。
去年年底,在國(guó)家廣播電視總局辦公廳印發(fā)的《廣播電視技術(shù)迭代實(shí)施方案(2020-2022年)》中,就重點(diǎn)提及要推動(dòng)廣播電視和網(wǎng)絡(luò)視聽(tīng)流程再造、體系重構(gòu)。目前,包括遠(yuǎn)程制作和云端制作在內(nèi)的制作形式正逐步成為市場(chǎng)主流。
在傳統(tǒng)的制作流程中,幾乎所有的信號(hào)都集中在本地,這就要求報(bào)道現(xiàn)場(chǎng)搭建演播室或機(jī)房。而一旦碰到大型轉(zhuǎn)播活動(dòng)或稍具規(guī)模的節(jié)目,所使用的機(jī)位就多達(dá)數(shù)十臺(tái),現(xiàn)場(chǎng)搭建、團(tuán)隊(duì)維護(hù)所需投入的資金更是高昂。
這就需要通過(guò)遠(yuǎn)程和云端的方式去解決。遠(yuǎn)程制作能幫助將大量分散機(jī)位的采編內(nèi)容傳輸至同一個(gè)制作中心,并在制作中心完成統(tǒng)一制作,從而減少制作間的重復(fù)建設(shè),降本增效;而云端制作,指將這些采編信號(hào)發(fā)送至云端,利用云端的虛擬化平臺(tái)完成制作。相對(duì)于遠(yuǎn)程制作,云端制作的靈活性更高,在疫情期間,甚至有海外電視臺(tái)利用云端制作實(shí)現(xiàn)了不同區(qū)域人員的節(jié)目協(xié)同制作。
當(dāng)然,無(wú)論是遠(yuǎn)程還是云端,其對(duì)傳輸帶寬的要求都會(huì)成倍上升,同時(shí)也對(duì)時(shí)延要求更為嚴(yán)格,這就更有賴于5G技術(shù)提供支持。在4G時(shí)代,空口時(shí)延一般在100ms以上,外加一些視音頻的編解碼和數(shù)據(jù)處理,可能導(dǎo)致最終500ms時(shí)延甚至更高,但500ms時(shí)延對(duì)于廣電直播而言意味著很多業(yè)務(wù)無(wú)法完成,比如在新聞制作中,如果要達(dá)到類似面對(duì)面交流的強(qiáng)互動(dòng)模式,一般時(shí)延不能超過(guò)300ms。而在5G時(shí)代,空口時(shí)延的理論值將驟減至最低1ms,再加上視音頻編解碼延時(shí)的也大幅度優(yōu)化,這意味著遠(yuǎn)程互動(dòng)新聞直播過(guò)程可以達(dá)到類似本地互動(dòng)的效果。
可見(jiàn),5G正在重構(gòu)融媒體。4月初,浙江日?qǐng)?bào)報(bào)業(yè)集團(tuán)的5G直播車順利驗(yàn)收并交付。該直播車就采用了包括TVU One 5G+4K直播背包、TVU Rack Router 5G聚合路由器、TVU Glink 5G雙向IP視頻傳輸器等在內(nèi)的5G技術(shù)產(chǎn)品和方案,組成了一套5G網(wǎng)絡(luò)下的移動(dòng)制播間,涵蓋了從現(xiàn)場(chǎng)采集,實(shí)時(shí)回傳,直播制作到平臺(tái)播出的端到端制播全業(yè)務(wù)流程,可實(shí)現(xiàn)5G公網(wǎng)環(huán)境下的車/臺(tái)之間的直播連線以及網(wǎng)絡(luò)直播互動(dòng)。
圖:5G直播車全貌
毫無(wú)疑問(wèn),5G對(duì)于融媒體可能帶來(lái)的改變遠(yuǎn)不止于此。4G時(shí)代,互聯(lián)網(wǎng)直播行業(yè)逐步興起,讓一大批直播場(chǎng)景涌現(xiàn)成為新的流量入口。而到了5G時(shí)代,隨著視頻質(zhì)量、制作形式等的變革,廣電直播可能落地的場(chǎng)景也會(huì)更加豐富,或?qū)⒛芙影艋ヂ?lián)網(wǎng)直播,成為時(shí)代的新風(fēng)口。
好文章,需要你的鼓勵(lì)
浙江大學(xué)團(tuán)隊(duì)提出動(dòng)態(tài)專家搜索方法,讓AI能根據(jù)不同問(wèn)題靈活調(diào)整內(nèi)部專家配置。該方法在數(shù)學(xué)、編程等任務(wù)上顯著提升推理準(zhǔn)確率,且不增加計(jì)算成本。研究發(fā)現(xiàn)不同類型問(wèn)題偏愛(ài)不同專家配置,為AI推理優(yōu)化開(kāi)辟新路徑。
清華大學(xué)研究團(tuán)隊(duì)提出SIRI方法,通過(guò)"壓縮-擴(kuò)張"交替訓(xùn)練策略,成功解決了大型推理模型"話多且準(zhǔn)確率低"的問(wèn)題。實(shí)驗(yàn)顯示,該方法在數(shù)學(xué)競(jìng)賽題上將模型準(zhǔn)確率提升43.2%的同時(shí),輸出長(zhǎng)度減少46.9%,真正實(shí)現(xiàn)了效率與性能的雙重優(yōu)化,為AI模型訓(xùn)練提供了新思路。
南洋理工大學(xué)與騰訊聯(lián)合研究團(tuán)隊(duì)開(kāi)發(fā)出Rolling Forcing技術(shù),實(shí)現(xiàn)AI視頻實(shí)時(shí)流式生成的重大突破。該技術(shù)通過(guò)滾動(dòng)窗口聯(lián)合去噪、注意力錨點(diǎn)機(jī)制和高效訓(xùn)練算法三項(xiàng)創(chuàng)新,解決了長(zhǎng)視頻生成中的錯(cuò)誤累積問(wèn)題,可在單GPU上以16fps速度生成多分鐘高質(zhì)量視頻,延遲僅0.76秒,質(zhì)量漂移指標(biāo)從傳統(tǒng)方法的1.66降至0.01,為交互式媒體和內(nèi)容創(chuàng)作開(kāi)辟新可能。
華中科技大學(xué)研究團(tuán)隊(duì)發(fā)現(xiàn),通過(guò)讓AI模型學(xué)習(xí)解決幾何問(wèn)題,能夠顯著提升其空間理解能力。他們構(gòu)建了包含約30000個(gè)幾何題目的Euclid30K數(shù)據(jù)集,使用強(qiáng)化學(xué)習(xí)方法訓(xùn)練多個(gè)AI模型。實(shí)驗(yàn)結(jié)果顯示,幾何訓(xùn)練在四個(gè)空間智能測(cè)試基準(zhǔn)上都帶來(lái)顯著提升,其中最佳模型達(dá)到49.6%準(zhǔn)確率,超越此前最好成績(jī)。這項(xiàng)研究揭示了基礎(chǔ)幾何知識(shí)對(duì)培養(yǎng)AI空間智能的重要價(jià)值。