12月28日,小米推出了小米12系列手機(jī),在國(guó)產(chǎn)品牌中率先升級(jí)了新一代驍龍8平臺(tái),現(xiàn)場(chǎng)展示的跑分性能高達(dá)107萬,也是目前最高水平的,性能很好很強(qiáng)大。
使用新驍龍8的小米12系列手機(jī)不僅可以穩(wěn)定流暢跑120幀《王者榮耀》,這一次重點(diǎn)升級(jí)的還有全新的影像系統(tǒng),最高配備了5000萬像素三大超清主攝,主攝、人像及超廣角都是5000萬像素,合計(jì)超過1.5億像素,帶動(dòng)這么多鏡頭實(shí)現(xiàn)高畫質(zhì)拍攝也是新驍龍8的重點(diǎn)。
這一次,新驍龍8從ISP到算法,再到與索尼等傳感器廠商的深度合作,高通將計(jì)算攝影的能力提升到了新高度。
新驍龍8影像性能大升級(jí):首創(chuàng)3+1 ISP單元、4096倍數(shù)據(jù)量提升
對(duì)于新驍龍8,大家對(duì)它的CPU、GPU、AI性能已經(jīng)很熟悉了,與拍照、視頻相關(guān)的ISP圖像處理單元了解不多,但這部分其實(shí)也是驍龍8系旗艦的精華所在,每年拍照最好的安卓旗艦無一例外選擇驍龍8就是因?yàn)楦咄↖SP在這方面的實(shí)力更強(qiáng)大。
去年的驍龍888平臺(tái)上,高通首次帶來了Triple ISP,也就是三ISP單元,每個(gè)都支持14bit數(shù)據(jù),而今年的新驍龍8進(jìn)一步升級(jí),帶來了全新的18-bit三ISP設(shè)計(jì),相比驍龍888的14-bit三ISP提升了4096倍數(shù)據(jù)采集量。
數(shù)據(jù)量越多,動(dòng)態(tài)范圍就更高,用戶看到的細(xì)節(jié)也就越多,特別是暗光下表現(xiàn)會(huì)強(qiáng)大很多,拍出來的照片畫質(zhì)也更高,暗部細(xì)節(jié)保留的更多。
18bit三ISP單元也極大地提升了新驍龍8的計(jì)算能力,它每秒可以處理32億像素,相比驍龍888的27億像素/秒的性能提升將近20%,單攝下可以每秒30幀速度處理1億像素,三攝同開的情況下則能夠以 30 幀每秒處理3600 萬像素,這也是新驍龍8能同時(shí)支持多個(gè)高像素鏡頭的關(guān)鍵。
除了更強(qiáng)大的多攝能力,新驍龍8也重點(diǎn)提升了弱光下的拍攝能力,它的3路ISP支持超級(jí)多幀引擎(Mega Multi-Frame Engine),能夠捕捉多達(dá)30張畫面并進(jìn)行采樣堆棧,從而得到畫面亮度更高,畫質(zhì)更加純凈的照片。
作為對(duì)比,上一代驍888僅能支持6張畫面采樣堆棧,新驍龍8這點(diǎn)上提升高5倍。
除了ISP單元自身的能力,新驍龍8其他單元也同樣會(huì)輔助拍照,比如AI能力,以人臉識(shí)別為例,驍龍888只能支持115個(gè)點(diǎn),新驍龍8提升到了300個(gè)點(diǎn)檢測(cè),識(shí)別速度也由24ms下降到6ms,提升高達(dá)300%。
在視頻方面,新驍龍8也全面升級(jí)了,之前的4K HDR已經(jīng)是小兒科了,這次首次支持8K HDR視頻拍攝,同時(shí)功耗降低了50%,甚至強(qiáng)大到可以8K HDR視頻的同時(shí)進(jìn)行6400萬像素的拍照,這為內(nèi)容創(chuàng)作者提供了更多豐富的玩法。
在新驍龍8身上,有關(guān)拍照/視頻還有個(gè)One More Thing,那就是除了18bit三ISP之外,高通這次還首創(chuàng)了另外1個(gè)ISP,也就是全新的低功耗智慧感知ISP。
它的功耗很低,主要用于實(shí)時(shí)在線鏡頭,可以解鎖很多新功能,比如檢測(cè)用戶是否在鏡頭前,是否有人在后面偷窺你的屏幕,還可以隱藏應(yīng)用通知消息等等。
這第四個(gè)ISP單元并不追求拍照或者視頻性能,而且設(shè)計(jì)之初就非常注重安全性,它僅用于向系統(tǒng)發(fā)送元數(shù)據(jù)進(jìn)行識(shí)別,因此所有數(shù)據(jù)均安全地獨(dú)立保存在高通傳感器中樞內(nèi)存中,不會(huì)泄露。
只要利用得當(dāng),可以實(shí)現(xiàn)很多新功能,特別是關(guān)系到隱私及安全方面的,這個(gè)就要看手機(jī)廠商接下來如何發(fā)揮了。
與索尼成立聯(lián)合實(shí)驗(yàn)室 高通打通移動(dòng)影像上下游合作
除了新驍龍8在拍照及視頻上的技術(shù)升級(jí),高通這一次還有一點(diǎn)跟以往不同——驍龍技術(shù)峰會(huì)上,高通宣布與索尼合作成立聯(lián)合實(shí)驗(yàn)室推動(dòng)移動(dòng)影像發(fā)展。
這個(gè)實(shí)驗(yàn)室主要用于提升移動(dòng)影像體驗(yàn),高通表示,聯(lián)合實(shí)驗(yàn)將為基于驍龍8移動(dòng)平臺(tái)開發(fā)的設(shè)備,來提供優(yōu)化,在短時(shí)間獲得畫質(zhì)的提升。
此外,雙方還將在這里進(jìn)行高通和索尼對(duì)于最新影像技術(shù)的測(cè)試,同時(shí)也將于索尼傳感器合作,為驍龍8移動(dòng)平臺(tái)定制圖像傳感器,提升影像能力。
這個(gè)舉動(dòng)意味著高通開始打通移動(dòng)影像的上下游,以往手機(jī)廠商提升拍照及視頻體驗(yàn)主要是單向合作——自己找高通或者自己找索尼定制傳感器,現(xiàn)在是高通就跟索尼打通合作,針對(duì)驍龍8平臺(tái)定制傳感器及拍攝體驗(yàn),減少了中間環(huán)節(jié),傳感器-芯片-手機(jī)可以三位一體,減少優(yōu)化流程及時(shí)間,用最快的速度改善手機(jī)用戶的拍照感知。
一句話來說就是,高通這次打通上下游,新驍龍8在影像上的護(hù)城河更深了,其他對(duì)手要想在這方面追趕就更難了。
隨著小米12系列手機(jī)的上市,2022年新驍龍8旗艦機(jī)的戰(zhàn)斗已經(jīng)全面打響,接下來還有很多品牌的新機(jī)問世,影像性能也會(huì)是升級(jí)的重點(diǎn),新驍龍8的Spectra ISP帶來了更好的拍照及視頻體驗(yàn),這一點(diǎn)上已經(jīng)得到了廠商及消費(fèi)者的認(rèn)可。
正如高通技術(shù)公司高級(jí)副總裁兼移動(dòng)、計(jì)算及基礎(chǔ)設(shè)施業(yè)務(wù)總經(jīng)理阿力克斯·卡圖贊所說:“作為全球最先進(jìn)的移動(dòng)平臺(tái),驍龍是頂級(jí)安卓體驗(yàn)的代名詞,全新一代驍龍8移動(dòng)平臺(tái)將為下一代旗艦移動(dòng)終端樹立新標(biāo)桿,并為智能手機(jī)帶來前所未有的連接、影像、AI、游戲、音頻和安全體驗(yàn)。”
好文章,需要你的鼓勵(lì)
浙江大學(xué)團(tuán)隊(duì)提出動(dòng)態(tài)專家搜索方法,讓AI能根據(jù)不同問題靈活調(diào)整內(nèi)部專家配置。該方法在數(shù)學(xué)、編程等任務(wù)上顯著提升推理準(zhǔn)確率,且不增加計(jì)算成本。研究發(fā)現(xiàn)不同類型問題偏愛不同專家配置,為AI推理優(yōu)化開辟新路徑。
清華大學(xué)研究團(tuán)隊(duì)提出SIRI方法,通過"壓縮-擴(kuò)張"交替訓(xùn)練策略,成功解決了大型推理模型"話多且準(zhǔn)確率低"的問題。實(shí)驗(yàn)顯示,該方法在數(shù)學(xué)競(jìng)賽題上將模型準(zhǔn)確率提升43.2%的同時(shí),輸出長(zhǎng)度減少46.9%,真正實(shí)現(xiàn)了效率與性能的雙重優(yōu)化,為AI模型訓(xùn)練提供了新思路。
南洋理工大學(xué)與騰訊聯(lián)合研究團(tuán)隊(duì)開發(fā)出Rolling Forcing技術(shù),實(shí)現(xiàn)AI視頻實(shí)時(shí)流式生成的重大突破。該技術(shù)通過滾動(dòng)窗口聯(lián)合去噪、注意力錨點(diǎn)機(jī)制和高效訓(xùn)練算法三項(xiàng)創(chuàng)新,解決了長(zhǎng)視頻生成中的錯(cuò)誤累積問題,可在單GPU上以16fps速度生成多分鐘高質(zhì)量視頻,延遲僅0.76秒,質(zhì)量漂移指標(biāo)從傳統(tǒng)方法的1.66降至0.01,為交互式媒體和內(nèi)容創(chuàng)作開辟新可能。
華中科技大學(xué)研究團(tuán)隊(duì)發(fā)現(xiàn),通過讓AI模型學(xué)習(xí)解決幾何問題,能夠顯著提升其空間理解能力。他們構(gòu)建了包含約30000個(gè)幾何題目的Euclid30K數(shù)據(jù)集,使用強(qiáng)化學(xué)習(xí)方法訓(xùn)練多個(gè)AI模型。實(shí)驗(yàn)結(jié)果顯示,幾何訓(xùn)練在四個(gè)空間智能測(cè)試基準(zhǔn)上都帶來顯著提升,其中最佳模型達(dá)到49.6%準(zhǔn)確率,超越此前最好成績(jī)。這項(xiàng)研究揭示了基礎(chǔ)幾何知識(shí)對(duì)培養(yǎng)AI空間智能的重要價(jià)值。