7月5日,由莫斯科國(guó)立大學(xué)舉辦的MSU2022世界編碼器大賽硬件編碼器成績(jī)?nèi)拷視?。快手StreamLake首款自研智能視頻處理芯片StreamLake-200(SL200)奪得4K和1080P賽道24項(xiàng)指標(biāo)中的16項(xiàng)第一。
據(jù)悉,這是快手StreamLake首次參加MSU世界編碼器大賽,在全部6個(gè)子賽道中斬獲5個(gè)“最佳ASIC編碼器”稱號(hào),標(biāo)志著SL200芯片在高密度、高質(zhì)量及超高質(zhì)量下均達(dá)到業(yè)界領(lǐng)先水平。
MSU大賽在視頻壓縮領(lǐng)域極具影響力,至今已連續(xù)舉辦了十七屆,吸引了國(guó)內(nèi)外多家知名科技企業(yè)和組織參賽。本次MSU2022世界編碼器大賽硬件編碼器賽道共有14個(gè)國(guó)內(nèi)外企業(yè)參賽,包括騰訊、字節(jié)跳動(dòng)、Intel、英偉達(dá)、AMD等。比賽分為4K30fps、4K60fps、4K120fps、1080P60fps、1080P120fps、1080P240fps共6個(gè)子賽道,快手StreamLake參加了全部硬件賽道比賽。
隨著視頻行業(yè)的發(fā)展,4K超高清在短視頻、長(zhǎng)視頻、廣電、高質(zhì)量監(jiān)控等領(lǐng)域的應(yīng)用越來(lái)越廣泛。在多年積累的基礎(chǔ)上,SL200芯片采用了多項(xiàng)快手自主創(chuàng)新技術(shù),對(duì)4K/8K超高清視頻進(jìn)行了針對(duì)性的優(yōu)化,實(shí)現(xiàn)了業(yè)界領(lǐng)先的清晰度和流暢度,并達(dá)到極高的編解碼密度。本屆MSU比賽中,SL200芯片在1080P和4K兩個(gè)賽道都斬獲佳績(jī),顯示了該芯片廣泛的實(shí)用范圍,將對(duì)我國(guó)未來(lái)智能視頻行業(yè)的發(fā)展起到基石的作用。
該SoC芯片集成了快手領(lǐng)先的視頻編解碼、圖像處理、AI推理、內(nèi)容自適應(yīng)編碼等關(guān)鍵技術(shù),具備高質(zhì)量、高密度、智能化的特點(diǎn)。SL200芯片于2022年6月流片成功之后,快手團(tuán)隊(duì)設(shè)計(jì)研發(fā)了基于該芯片的板卡和服務(wù)器系統(tǒng),并完成了數(shù)月的大規(guī)?;叶群蛪毫y(cè)試,目前正逐步全面應(yīng)用于快手短視頻和直播業(yè)務(wù),并已對(duì)外開(kāi)放測(cè)試,聯(lián)合多家合作伙伴共同探索更為廣闊的應(yīng)用場(chǎng)景。
目前,直播和短視頻已經(jīng)成為了視頻消費(fèi)中的重要部分,意味著視頻流量迎來(lái)快速增長(zhǎng)以及帶寬成本不斷增加。SL200芯片具有“高編碼質(zhì)量+高密度”的特性,可極大限度降低帶寬成本,同時(shí)提供行業(yè)領(lǐng)先的編碼質(zhì)量。其中,高編碼質(zhì)量相比x265 medium節(jié)省約30%碼率,另外支持畫(huà)質(zhì)增強(qiáng);高轉(zhuǎn)碼密度方面,單卡(2顆芯片)支持8路4K60fps編碼,還支持“一進(jìn)多出”的轉(zhuǎn)碼模式。
隨著4K/8K超高清視頻被廣泛應(yīng)用于大型賽事、重要活動(dòng)的直播/轉(zhuǎn)播之中,為了提供更好的用戶體驗(yàn),廣電行業(yè)在質(zhì)量、穩(wěn)定性、密度方面都對(duì)視頻轉(zhuǎn)碼方案提出了更高的要求。SL200芯片憑借"AI+高質(zhì)量視頻編碼"特性,相比國(guó)內(nèi)某頭部廣電編碼器廠商可以節(jié)省約40%的碼率。另外SL200芯片提供了ABR、CBR、CRF三種碼控方案以應(yīng)對(duì)有線電視、IPTV、OTT和新媒體場(chǎng)景對(duì)于碼率控制的訴求。
而在云游戲場(chǎng)景下,對(duì)延時(shí)有著極高要求,例如射擊類(lèi)游戲,對(duì)操作精準(zhǔn)度有很高要求,通常需要將游戲響應(yīng)延遲控制在50ms以內(nèi);VR等肢體配合類(lèi)游戲,整個(gè)游戲鏈路延遲需要低于25ms。在整個(gè)云游戲的延遲通路中,通常對(duì)視頻編碼延遲的要求是控制在6ms內(nèi)。SL200芯片具有“低延遲+更好的編碼質(zhì)量”的特性,在4ms的超低延時(shí)下,可以獲得1080P超清畫(huà)質(zhì),并且相比某主流GPU在可節(jié)省約14%的碼率。
此外,快手StreamLake搭建了基于SL200芯片的視頻基礎(chǔ)設(shè)施,正式發(fā)布StreamLake硬件編碼器產(chǎn)品,利用快手領(lǐng)先的視頻編解碼及增強(qiáng)和修復(fù)算法,幫助客戶提升多媒體處理環(huán)節(jié)的質(zhì)量與效率,可應(yīng)用于IPTV、OTT、廣電、智能監(jiān)控、互聯(lián)網(wǎng)視頻直播等多個(gè)領(lǐng)域的超高清直播平臺(tái)建設(shè)及視頻壓縮編碼。
好文章,需要你的鼓勵(lì)
這項(xiàng)研究提出了"高效探測(cè)"方法,解決了掩碼圖像建模AI難以有效評(píng)估的問(wèn)題。通過(guò)創(chuàng)新的多查詢交叉注意力機(jī)制,該方法在減少90%參數(shù)的同時(shí)實(shí)現(xiàn)10倍速度提升,在七個(gè)基準(zhǔn)測(cè)試中均超越傳統(tǒng)方法。研究還發(fā)現(xiàn)注意力質(zhì)量與分類(lèi)性能的強(qiáng)相關(guān)性,生成可解釋的注意力圖譜,展現(xiàn)出優(yōu)異的跨域適應(yīng)性。團(tuán)隊(duì)承諾開(kāi)源全部代碼,推動(dòng)技術(shù)普及應(yīng)用。
伊利諾伊大學(xué)研究團(tuán)隊(duì)開(kāi)發(fā)了CLAIMSPECT系統(tǒng),通過(guò)層次化分解復(fù)雜爭(zhēng)議、智能檢索相關(guān)文獻(xiàn)、多角度收集觀點(diǎn)的方法,將傳統(tǒng)的"真假"判斷轉(zhuǎn)變?yōu)槎嗑S度分析。該系統(tǒng)能夠自動(dòng)構(gòu)建爭(zhēng)議話題的分析框架,識(shí)別不同觀點(diǎn)及其支撐證據(jù),為科學(xué)和政治爭(zhēng)議提供更全面客觀的分析,已在生物醫(yī)學(xué)和國(guó)際關(guān)系領(lǐng)域驗(yàn)證有效性。
清華大學(xué)研究團(tuán)隊(duì)首次提出情感認(rèn)知融合網(wǎng)絡(luò)(ECFN),讓AI能像人類(lèi)一樣理解和表達(dá)情感。該系統(tǒng)通過(guò)多層次情感處理架構(gòu),在情感識(shí)別準(zhǔn)確率上比現(xiàn)有最佳系統(tǒng)提升32%,情感表達(dá)自然度提升45%。研究突破了傳統(tǒng)AI情感理解的局限,實(shí)現(xiàn)了跨模態(tài)情感融合、動(dòng)態(tài)情感追蹤和個(gè)性化情感建模,為醫(yī)療、教育、客服等領(lǐng)域帶來(lái)革命性應(yīng)用前景。
哈佛大學(xué)研究團(tuán)隊(duì)通過(guò)創(chuàng)新的多智能體強(qiáng)化學(xué)習(xí)方法,讓AI在戰(zhàn)略游戲中學(xué)會(huì)復(fù)雜推理。研究發(fā)現(xiàn)AI通過(guò)游戲競(jìng)爭(zhēng)能發(fā)展出類(lèi)人思維能力,在邏輯推理、創(chuàng)造性解決問(wèn)題等方面表現(xiàn)顯著提升。這項(xiàng)突破性成果為未來(lái)AI在醫(yī)療、教育、城市管理等領(lǐng)域的應(yīng)用奠定基礎(chǔ),展現(xiàn)了通過(guò)模擬人類(lèi)學(xué)習(xí)過(guò)程培養(yǎng)真正智能AI的新路徑。