《紙牌屋》有一句話我挺喜歡:“每個(gè)人都無法拒絕自己真實(shí)的快樂。你會(huì)情不自禁地在自己喜歡的事情上花時(shí)間,不知不覺地放一萬個(gè)小時(shí)在那里。時(shí)間久了,你就會(huì)與眾不同。”
當(dāng)我腦中浮現(xiàn)這句話的時(shí)候,我正在聽一場VR(虛擬現(xiàn)實(shí))音樂會(huì)。
今天下午,在華為VR音樂媒體溝通會(huì)上,郎朗首部VR音樂作品正式上線華為視頻VR專區(qū)和華為VR視頻。在現(xiàn)場的體驗(yàn)區(qū),坐上座艙,戴上VR眼鏡,就開始了個(gè)人專屬的音樂會(huì),仿佛郎朗在面前彈奏,不知不覺放松下來聽了一會(huì)。
說到底,感官所帶來的體驗(yàn)雖然短暫,然而我們依然愿意花時(shí)間聽一首歌,看一場演唱會(huì),看一部電影,或許是因?yàn)檫@些體驗(yàn)真實(shí)且豐富。而在華為看來,通過VR音樂,把傳統(tǒng)音樂會(huì)變成具備3D空間的音樂效果和VR視覺體驗(yàn),同樣也是想用技術(shù)營造出一種「現(xiàn)場感」和「沉浸感」。
VR音樂:一場讓更多人沉浸的潮流狂歡
借助5G、云計(jì)算與AI技術(shù),VR產(chǎn)業(yè)正進(jìn)入快速發(fā)展期。隨著硬件設(shè)備的不斷完善,豐富的內(nèi)容和應(yīng)用場景,成了推動(dòng)VR更廣泛落地的關(guān)鍵要素。而在數(shù)字化時(shí)代,人們對(duì)文娛生活方式的體驗(yàn)要求不斷升級(jí)。這兩者結(jié)合產(chǎn)生的「VR音樂」成為音樂產(chǎn)業(yè)的一個(gè)潮流走向。
華為消費(fèi)者云服務(wù)副總裁譚東暉在溝通會(huì)上指出:“VR會(huì)成為5G時(shí)代第一波創(chuàng)新應(yīng)用。”一方面,VR技術(shù)走向成熟期、VR硬件設(shè)備出貨量猛增,2020年全球VR頭戴設(shè)備的出貨量達(dá)到670萬臺(tái),相比2019年增長了72%,基本翻翻。
另一方面去年的特殊情況改變了人們的生活習(xí)慣,2020年對(duì)在線視頻的需求大幅增長,觀看時(shí)長同比增長40%。消費(fèi)者需要更多形式、更高品質(zhì)的優(yōu)秀內(nèi)容。
圖:華為消費(fèi)者云服務(wù)副總裁譚東暉
華為去年在開發(fā)者大會(huì)正式發(fā)布「VR音視頻平臺(tái)」,經(jīng)過一年時(shí)間,該平臺(tái)已經(jīng)取得商用成果,即本次與郎朗發(fā)布的VR音樂作品以及其他藝人的共24首曲目。華為VR音視頻產(chǎn)品總監(jiān)Xinxin現(xiàn)場介紹,「華為VR音視頻平臺(tái)」是華為終端云服務(wù)推出的全新內(nèi)容平臺(tái),在全球各地,華為的用戶都可以借助該平臺(tái)隨時(shí)隨地進(jìn)入表演現(xiàn)場,體驗(yàn)到最領(lǐng)先的音視聽內(nèi)容。
與VR音樂的立意相似,有一種職業(yè),也是“一直在更具有臨場感的聲音之路不斷探索”,那就是錄音師。中國古典錄音師制作人馮漢英在溝通會(huì)上談到:“錄音師最愿意做的事,就是把現(xiàn)場的沉浸感,無縫讓大家在各種各樣音箱設(shè)備中重放。”
聲音的重放主要通過「音箱」和「耳機(jī)」實(shí)現(xiàn)。在音箱的重放部分,隨著音頻技術(shù)的不斷發(fā)展,重放格式發(fā)生了巨大迭代,由單聲道、立體聲、平面環(huán)繞聲,直到最近才逐漸興起的沉浸式環(huán)繞聲以及更加創(chuàng)新的VR音視頻;而耳機(jī)的重放部分一直很不理想,因?yàn)橹皇峭ㄟ^音箱的信號(hào)來實(shí)現(xiàn)。
“華為VR音樂很大程度解決了傳統(tǒng)音樂制作的痛點(diǎn)。”馮漢英說,比如與古典音樂結(jié)合,讓更多人能感受到現(xiàn)場演奏的能量和生命力,這讓音樂宮殿中的明珠再次綻放光彩。面對(duì)這一新的領(lǐng)域,音樂制作人也在探索新的音樂表現(xiàn)形式。
VR音視頻平臺(tái):一個(gè)讓更多人參與創(chuàng)作的連接平臺(tái)
除了讓更多人感受音樂現(xiàn)場,華為VR音樂還能為音樂公司、獨(dú)立音樂人提供技術(shù)平臺(tái),包括高清VR視頻采集與輸出方案、VR攝影機(jī)、后期視頻編解碼及播放,為提升VR音樂創(chuàng)作的便利性、降低門檻。為了讓更多人參與到VR音樂的創(chuàng)作生態(tài)中,華為計(jì)劃未來把這種技術(shù)能力開放給內(nèi)容開發(fā)者,共同推進(jìn)VR行業(yè)的繁榮發(fā)展。
Xinxin介紹,VR音樂最獨(dú)特優(yōu)勢即是沉浸感,還原現(xiàn)場的聲音和物理特性,這對(duì)于建立沉浸感是極其重要的。華為在音頻視頻方面擁有自己的核心能力,除了還原現(xiàn)場的各種參數(shù)外;還通過13K*9K業(yè)界最高分辨率的3D VR視頻,能同時(shí)保留高光細(xì)節(jié)和暗部色彩。
本次與嚴(yán)雯君等多位藝人的合作,都基于華為VR音視頻平臺(tái),該平臺(tái)為音樂產(chǎn)業(yè)人士提供了技術(shù)平臺(tái)和一站式端到端的制作發(fā)行解決方案,包括前端播放能力、視頻點(diǎn)播VOD服務(wù)、音樂開發(fā)工具及VR內(nèi)容的制作與發(fā)行等?;谶@樣一個(gè)便捷高效、充滿激勵(lì)和創(chuàng)作活力的開放平臺(tái),內(nèi)容創(chuàng)作者解決了從創(chuàng)作到制作輸出的技術(shù)難題,能輸出低成本、高質(zhì)量、規(guī)?;膬?yōu)質(zhì)VR音樂內(nèi)容,制作好的內(nèi)容還可以直接登錄華為云服務(wù)來發(fā)行,提供給全球用戶來體驗(yàn)。
華為VR音視頻平臺(tái)的背后,源于華為很早提出的“以消費(fèi)者為中心”、“軟硬件雙輪驅(qū)動(dòng)”的全場景智慧生態(tài)戰(zhàn)略。所謂“軟硬件雙輪驅(qū)動(dòng)”,即一邊不斷落地“1+8+N”的硬件生態(tài);另一邊不斷打磨操作系統(tǒng)、應(yīng)用和服務(wù)生態(tài)。據(jù)悉,華為終端云服務(wù)(HMS-Huawei Mobils Services)已經(jīng)為全球170多個(gè)國家和地區(qū)的7億多用戶提供數(shù)字服務(wù)。
2022年國內(nèi)VR/AR市場規(guī)模將超千億元,VR之勢不可阻擋,華為VR音視頻平臺(tái)之勢同樣不容小覷。
好文章,需要你的鼓勵(lì)
浙江大學(xué)團(tuán)隊(duì)提出動(dòng)態(tài)專家搜索方法,讓AI能根據(jù)不同問題靈活調(diào)整內(nèi)部專家配置。該方法在數(shù)學(xué)、編程等任務(wù)上顯著提升推理準(zhǔn)確率,且不增加計(jì)算成本。研究發(fā)現(xiàn)不同類型問題偏愛不同專家配置,為AI推理優(yōu)化開辟新路徑。
清華大學(xué)研究團(tuán)隊(duì)提出SIRI方法,通過"壓縮-擴(kuò)張"交替訓(xùn)練策略,成功解決了大型推理模型"話多且準(zhǔn)確率低"的問題。實(shí)驗(yàn)顯示,該方法在數(shù)學(xué)競賽題上將模型準(zhǔn)確率提升43.2%的同時(shí),輸出長度減少46.9%,真正實(shí)現(xiàn)了效率與性能的雙重優(yōu)化,為AI模型訓(xùn)練提供了新思路。
南洋理工大學(xué)與騰訊聯(lián)合研究團(tuán)隊(duì)開發(fā)出Rolling Forcing技術(shù),實(shí)現(xiàn)AI視頻實(shí)時(shí)流式生成的重大突破。該技術(shù)通過滾動(dòng)窗口聯(lián)合去噪、注意力錨點(diǎn)機(jī)制和高效訓(xùn)練算法三項(xiàng)創(chuàng)新,解決了長視頻生成中的錯(cuò)誤累積問題,可在單GPU上以16fps速度生成多分鐘高質(zhì)量視頻,延遲僅0.76秒,質(zhì)量漂移指標(biāo)從傳統(tǒng)方法的1.66降至0.01,為交互式媒體和內(nèi)容創(chuàng)作開辟新可能。
華中科技大學(xué)研究團(tuán)隊(duì)發(fā)現(xiàn),通過讓AI模型學(xué)習(xí)解決幾何問題,能夠顯著提升其空間理解能力。他們構(gòu)建了包含約30000個(gè)幾何題目的Euclid30K數(shù)據(jù)集,使用強(qiáng)化學(xué)習(xí)方法訓(xùn)練多個(gè)AI模型。實(shí)驗(yàn)結(jié)果顯示,幾何訓(xùn)練在四個(gè)空間智能測試基準(zhǔn)上都帶來顯著提升,其中最佳模型達(dá)到49.6%準(zhǔn)確率,超越此前最好成績。這項(xiàng)研究揭示了基礎(chǔ)幾何知識(shí)對(duì)培養(yǎng)AI空間智能的重要價(jià)值。
關(guān)注科技創(chuàng)新、技術(shù)投資。
以文會(huì)友,左手硬核科技,右手浪漫主義。