高通日前發(fā)布全新虛擬現(xiàn)實(VR)軟件開發(fā)包(SDK)。
820處理器這樣的先進異構處理器可支持沉浸式VR體驗,但如果沒有合適的開發(fā)者工具包,開發(fā)者們也難以充分利用其性能。
開始提供。
驍龍VR SDK將首次支持多項針對最佳VR用戶體驗的、至關重要的新技術。它們包括:
• DSP傳感器融合:利用驍龍820中包含的全套技術,該SDK讓開發(fā)者能夠通過驍龍傳感器內(nèi)核,輕松獲取來自高頻陀螺儀和加速計的感應數(shù)據(jù),并利用Qualcomm® Hexagon™ DSP進行預測性的頭部位置處理,打造具備更佳響應性的沉浸式體驗
• 快速光子移動:通過異步時間扭曲及單顯示緩存,提供快速的3D畫面渲染,與不使用該SDK相比,減少高達50%的延遲
• 支持鏡頭校正的立體渲染:支持3D雙眼畫面的色彩校正和桶形畸變,提高圖形和視頻的視覺質(zhì)量,增強整體VR體驗
• VR圖層:生成菜單、文字和其他覆蓋圖層,在虛擬世界中實現(xiàn)正確渲染,減少失真可能造成的視覺不適感
• 功耗管理:集成Qualcomm® Symphony System Manager SDK,提供整體的CPU、GPU和DSP功率與性能管理,讓VR能夠在低功耗、低散熱的嚴格要求下,以穩(wěn)定的幀數(shù)率運行——與不使用該SDK相比,提高電源效率
Qualcomm Technologies, Inc. 工程高級總監(jiān)Dave Durnil表示,“我們正提供先進的工具和技術幫助開發(fā)者顯著改善諸多應用程序的虛擬現(xiàn)實體驗,包括游戲、360度VR視頻和各種交互式教育與娛樂應用等。VR是我們與世界互動的全新方式,我們很高興能幫助移動VR開發(fā)者在即將面市的、可支持VR的驍龍820安卓智能手機和頭盔上,更高效地提供引人矚目的高品質(zhì)體驗。”
好文章,需要你的鼓勵
新加坡國立大學研究團隊開發(fā)了SPIRAL框架,通過讓AI與自己對弈零和游戲來提升推理能力。實驗顯示,僅訓練AI玩簡單撲克游戲就能讓其數(shù)學推理能力提升8.6%,通用推理提升8.4%,且無需任何數(shù)學題目作為訓練材料。研究發(fā)現(xiàn)游戲中的三種推理模式能成功轉(zhuǎn)移到數(shù)學解題中,為AI訓練提供了新思路。
同濟大學團隊開發(fā)的GIGA-ToF技術通過融合多幀圖像的"圖結構"信息,創(chuàng)新性地解決了3D相機噪聲問題。該技術利用圖像間的不變幾何關系,結合深度學習和數(shù)學優(yōu)化方法,在合成數(shù)據(jù)集上實現(xiàn)37.9%的精度提升,并在真實設備上展現(xiàn)出色泛化能力,為機器人、AR和自動駕駛等領域提供更可靠的3D視覺解決方案。
伊利諾伊大學研究團隊通過對比實驗發(fā)現(xiàn),經(jīng)過強化學習訓練的視覺語言模型雖然表現(xiàn)出"頓悟時刻"現(xiàn)象,但這些自我糾錯行為并不能實際提升推理準確率。研究揭示了AI模型存在"生成-驗證差距",即生成答案的能力強于驗證答案質(zhì)量的能力,且模型在自我驗證時無法有效利用視覺信息,為AI多模態(tài)推理發(fā)展提供了重要啟示。
MIT等頂尖機構聯(lián)合提出SparseLoRA技術,通過動態(tài)稀疏性實現(xiàn)大語言模型訓練加速1.6倍,計算成本降低2.2倍。該方法使用SVD稀疏性估計器智能選擇重要計算部分,在保持模型性能的同時顯著提升訓練效率,已在多個任務上驗證有效性。