近日,第二十九屆中國國際廣播電視信息網(wǎng)絡(luò)展覽會(CCBN2023)在北京舉行。快手StreamLake展示一站式音視頻+AI能力,攜StreamLake硬件編碼器首次亮相本次大會??焓諷treamLake專注于成為視頻化升級助推器,致力于助力各行業(yè)客戶實現(xiàn)視頻化業(yè)務(wù)轉(zhuǎn)型與升級,在視頻化大趨勢下,助推視聽領(lǐng)域共同蓬勃發(fā)展。
作為業(yè)界知名的廣播電視和網(wǎng)絡(luò)視聽技術(shù)設(shè)備行業(yè)盛會,本屆CCBN以“大視聽,向未來”為主題,展會聚焦高新技術(shù)在視聽行業(yè)的廣泛深度融合應(yīng)用,促進科技自立自強和產(chǎn)業(yè)高質(zhì)量發(fā)展,助力構(gòu)建現(xiàn)代化大視聽發(fā)展格局。
在快手StreamLake展臺上,首次亮相的StreamLake硬件編碼器引發(fā)行業(yè)人士和參展觀眾的高度關(guān)注。據(jù)悉,該產(chǎn)品集成了快手自研SL200編碼卡及質(zhì)臻影音算法,利用快手領(lǐng)先的視頻編解碼及增強和修復(fù)算法,提升多媒體處理環(huán)節(jié)的質(zhì)量與效率,可應(yīng)用于IPTV、OTT、互聯(lián)網(wǎng)視頻直播等多個領(lǐng)域的超高清直播平臺建設(shè)及視頻壓縮編碼。
StreamLake硬件編碼器具有三大產(chǎn)品核心能力——極致的編碼質(zhì)量、領(lǐng)先的AI畫質(zhì)增強算法、超高清實時編碼。展會現(xiàn)場,視頻畫面對比中可明顯看到在StreamLake硬件編碼器驅(qū)動下,視頻畫面中呈現(xiàn)出的每一處細節(jié)清晰細膩,色彩飽和豐富,動態(tài)影像高清流暢,帶來極致的視頻體驗。
搭載快手StreamLake首款自研芯片,帶來卓越編碼質(zhì)量與性能
作為產(chǎn)品的核心技術(shù)之一,StreamLake硬件編碼器內(nèi)置首款自研智能視頻處理芯片StreamLake - 200(后文簡稱SL200芯片)。該芯片具有業(yè)界極佳的編碼性能和廣泛的適用范圍,集成了快手領(lǐng)先的視頻編解碼、圖像處理、AI推理、內(nèi)容自適應(yīng)編碼等關(guān)鍵技術(shù),具備高質(zhì)量、高密度、智能化的特點。
在質(zhì)量方面,SL200芯片可提供行業(yè)領(lǐng)先的壓縮效率,相比x265 medium節(jié)省約30%碼率;密度方面,單卡可支持8路4K@60fps轉(zhuǎn)碼,達到業(yè)界領(lǐng)先水平。其低功耗設(shè)計可在高密度視頻處理的同時節(jié)省大量能耗,可應(yīng)用于短視頻、長視頻、視頻直播、視頻會議、云游戲以及廣電等多種場景下的智能轉(zhuǎn)碼需求。
業(yè)界領(lǐng)先的AI畫質(zhì)增強算法,打造極致視聽體驗
為了呈現(xiàn)超高清的極致視聽體驗,在視頻處理方向上,StreamLake硬件編碼器支持質(zhì)臻影音算法以及豐富的轉(zhuǎn)碼參數(shù)配置,通過畫質(zhì)增強、AI超分等核心算法能力,支持對視頻中的模糊、塊效應(yīng)、偽紋理等失真進行針對性修復(fù),以及將低分辨率視頻重建為高分辨率視頻等方式,從而整體提升視頻主觀質(zhì)量。
支持4K/8K 10bit HDR實時轉(zhuǎn)碼,助力超高清直播平臺建設(shè)
在國家產(chǎn)業(yè)政策的大力支持以及超高清、5G、AI、VR、大數(shù)據(jù)等技術(shù)的融合應(yīng)用推動下,超高清產(chǎn)業(yè)高速發(fā)展。面對用戶對超高清視頻和直播觀看日益增長的需求,廣播電視和網(wǎng)絡(luò)視聽領(lǐng)域的超高清技術(shù)全面升級。StreamLake硬件編碼器可支持4K/8K 10bit HDR實時轉(zhuǎn)碼,為超高清直播平臺的建設(shè)提供有力的技術(shù)支持和保障,推動超高清產(chǎn)業(yè)在編碼技術(shù)方向上的發(fā)展。
在國家廣播電視總局科技創(chuàng)新和傳輸覆蓋成果展上,快手StreamLake六自由度在互動視聽板塊進行了相關(guān)內(nèi)容展示。該技術(shù)通過多攝像頭同步采集、3D重建、壓縮傳輸和實時渲染技術(shù),可以實現(xiàn)子彈時間、虛擬運鏡、自由視角交互等效果并支持3D空間剪輯創(chuàng)作,為用戶帶來沉浸式體驗。伴隨視聽內(nèi)容呈現(xiàn)多樣化形態(tài),未來六自由度技術(shù)在體育賽事、影視娛樂、智慧場館等場景的落地應(yīng)用具有廣闊空間。
基于開放的產(chǎn)品能力,快手StreamLake已攜手知乎、中國聯(lián)通、央視頻、浙江廣播電視集團、蒙牛、小米等眾多合作伙伴,在視頻化、智能化領(lǐng)域展開深入合作。未來,快手StreamLake也將繼續(xù)以開放的心態(tài),基于前沿的技術(shù)和產(chǎn)品優(yōu)勢,為電商、廣電傳媒、泛娛樂等各行業(yè)合作伙伴提供一站式音視頻+AI解決方案,助推視聽產(chǎn)業(yè)和數(shù)字經(jīng)濟的高質(zhì)量發(fā)展。
好文章,需要你的鼓勵
這項研究提出了"高效探測"方法,解決了掩碼圖像建模AI難以有效評估的問題。通過創(chuàng)新的多查詢交叉注意力機制,該方法在減少90%參數(shù)的同時實現(xiàn)10倍速度提升,在七個基準(zhǔn)測試中均超越傳統(tǒng)方法。研究還發(fā)現(xiàn)注意力質(zhì)量與分類性能的強相關(guān)性,生成可解釋的注意力圖譜,展現(xiàn)出優(yōu)異的跨域適應(yīng)性。團隊承諾開源全部代碼,推動技術(shù)普及應(yīng)用。
伊利諾伊大學(xué)研究團隊開發(fā)了CLAIMSPECT系統(tǒng),通過層次化分解復(fù)雜爭議、智能檢索相關(guān)文獻、多角度收集觀點的方法,將傳統(tǒng)的"真假"判斷轉(zhuǎn)變?yōu)槎嗑S度分析。該系統(tǒng)能夠自動構(gòu)建爭議話題的分析框架,識別不同觀點及其支撐證據(jù),為科學(xué)和政治爭議提供更全面客觀的分析,已在生物醫(yī)學(xué)和國際關(guān)系領(lǐng)域驗證有效性。
清華大學(xué)研究團隊首次提出情感認知融合網(wǎng)絡(luò)(ECFN),讓AI能像人類一樣理解和表達情感。該系統(tǒng)通過多層次情感處理架構(gòu),在情感識別準(zhǔn)確率上比現(xiàn)有最佳系統(tǒng)提升32%,情感表達自然度提升45%。研究突破了傳統(tǒng)AI情感理解的局限,實現(xiàn)了跨模態(tài)情感融合、動態(tài)情感追蹤和個性化情感建模,為醫(yī)療、教育、客服等領(lǐng)域帶來革命性應(yīng)用前景。
哈佛大學(xué)研究團隊通過創(chuàng)新的多智能體強化學(xué)習(xí)方法,讓AI在戰(zhàn)略游戲中學(xué)會復(fù)雜推理。研究發(fā)現(xiàn)AI通過游戲競爭能發(fā)展出類人思維能力,在邏輯推理、創(chuàng)造性解決問題等方面表現(xiàn)顯著提升。這項突破性成果為未來AI在醫(yī)療、教育、城市管理等領(lǐng)域的應(yīng)用奠定基礎(chǔ),展現(xiàn)了通過模擬人類學(xué)習(xí)過程培養(yǎng)真正智能AI的新路徑。