| 科技行者編者按:CNET總部記者親身體驗了微軟剛剛在巴塞羅那發(fā)布的Hololens2,他的感受是這一次雖然沒有《太空蜘蛛》或者《我的世界》作為演示,但使用舒適度確實得到提升。而按照科技行者記者在微軟昨天發(fā)布會得到的官方說法,舒適度提高了300%。盡管舒適度是一個很難量化評估的指標(biāo),但是從臺上嘉賓(沒錯,是一位戴眼鏡的嘉賓)的外部穿戴感受來看,確實是頗為輕盈的。
自2016年HoloLens發(fā)布以來,幾乎每一次微軟的大型會議,Hololens總會成為最引發(fā)全場觀眾目光的東西之一。相比其他公司,微軟確實非常重視混合現(xiàn)實這種媒介表達,并正在將這項技術(shù)推向建筑工地、工廠車間、手術(shù)室和教室。HoloLens正在為人類提供一種新的工作、學(xué)習(xí)、交流和做事的方式。
昨天發(fā)布會的主題是——計算的新紀(jì)元。根據(jù)微軟的描述,這個新紀(jì)元的重要載體之一是數(shù)字世界,Hololens為代表的技術(shù)則將把這個數(shù)字世界從二維屏幕帶到三維世界。
某種程度,你會認(rèn)為微軟正在做一系列打通現(xiàn)實世界和數(shù)字世界的工作。Hololens2不是微軟在MWC的唯一發(fā)布,另外一款產(chǎn)品是Azure Kinect DK,這是一款開發(fā)者工具包,它將諸多人工智能傳感器集成于一個設(shè)備中。其核心是為HoloLens 2開發(fā)的TOF深度傳感器、高清RGB攝像頭,以及一個七麥克風(fēng)圓形陣列。如果說Hololens2是將數(shù)字世界呈現(xiàn)給真實世界的設(shè)備,這個Azure則是將真實世界數(shù)字化的工具平臺。微軟的目標(biāo)是做到感知世界、理解世界,無論是人、地點還是事物。
微軟CEO薩提亞也現(xiàn)身了昨天的發(fā)布會,他再一次強調(diào)了微軟在智能云和智能邊緣兩個維度的作用,而Hololens2和Azure Kinect DK就是微軟在智能邊緣的最新成果,也是連接數(shù)字世界和真實世界的橋梁。
作者現(xiàn)在正處微軟公司總部,親身體驗HoloLens 2的演示項目。通過位于地下的長長走廊,穿過一扇沉重的金屬側(cè)拉門,我在微軟員工的引導(dǎo)下進入了這個如汽車生產(chǎn)車間般的項目所在地。這里彌漫著一股橡膠輪胎的味道。在我面前的底座上,擺有一輛ATV全地形車。另外,房間各處都堆放著工具與零件。
這時候,工作人員將一部HoloLens 2交到我手中,并提醒我如何用它學(xué)習(xí)修車。
▲ HoloLens 2產(chǎn)品設(shè)計發(fā)生了很大的變化,而且仍然自成一體
微軟公司的HoloLens終于回來了。3年前,該公司發(fā)布了這款混合現(xiàn)實頭戴設(shè)備的初代版本,而如今的新版本已經(jīng)開始接受預(yù)訂,價格為3500美元,計劃于今年晚些時候全面出貨。通過試戴,我發(fā)現(xiàn)不用摘眼鏡就能很輕松地將它套在頭上。這種感覺有點像配戴一臺工業(yè)工具,或者焊工面具。設(shè)備顯示內(nèi)容非常清晰,我進行了眼動追蹤設(shè)置,眼前出現(xiàn)了一個網(wǎng)格點。我跟隨著該點從一個角落看向另一個角落,又從一側(cè)望向另一側(cè)。整個過程完全沒問題,效果也很好。據(jù)了解,接下來微軟最新打造的Dynamics 365 Guides還將引導(dǎo)應(yīng)用正式啟動,負(fù)責(zé)為使用者提供使用指令集。
更確切地說,這臺設(shè)備就像是擁有了實際轉(zhuǎn)向指示的谷歌地圖,或者是能夠直接顯示拼裝手冊的樂高產(chǎn)品。當(dāng)我把目光移向漂浮在面前空中的一張張指示卡片時,系統(tǒng)就會提醒我首先要讓車子保持穩(wěn)定?,F(xiàn)在,一個浮動的箭頭從3D空間中延伸向前,提醒我車子上的換檔部位以及我應(yīng)該如何對其進行切換。完成之后,我眨了眨眼睛并進行下一步。接下來,我開始調(diào)整車子底部已經(jīng)松掉的鏈條。一個長長的虛線箭頭指向靠近墻壁的一只工具箱,并進一步提示使用其中的棘輪。在這一步操作中我差一點抓錯了,好在及時意識到箭頭指向的是另一個工具。我把目光投向下一張卡片,有一條弧線向我展示了前往螺絲盒的路徑,并將其擰進正確的孔位。
有時候,箭頭的排列會出現(xiàn)一些問題。同時,我也很好奇,我會不會抓到錯誤的工具?如果我犯了錯誤,程序會及時加以糾正嗎?我真的應(yīng)該試著抓起錯誤的工具,看看設(shè)備會有什么反應(yīng)——有點后悔。而且必須承認(rèn),在空間當(dāng)中放置指向箭頭有點像構(gòu)建一個大型3D導(dǎo)航器,感覺上有點奇怪。在試用過程中,我不禁想到任天堂產(chǎn)品特別是Labo的使用經(jīng)驗——這是一款任天堂專門為其Nintendo Switch開發(fā)的游戲,能夠指導(dǎo)玩家通過屏幕上的指示利用精美的紙板進行創(chuàng)作小玩具。想象一下,配合HoloLens 2,這款游戲可能會到處彈出指導(dǎo)信息,并指向玩家面前的真實物體,而且整個系統(tǒng)完全以3D方式呈現(xiàn)。這樣,世界一下子變會成樂高主題套裝的模樣!
值得一提的是,這次試用沒有出現(xiàn)蜘蛛織網(wǎng)游戲,我也沒有玩到《我的世界》或者《光環(huán)》。四年之前,微軟公司一直在強調(diào)HoloLens當(dāng)中的游戲載體屬性,但如今微軟的整體態(tài)度也發(fā)生了轉(zhuǎn)變,更多地展示其在企業(yè)應(yīng)用場景下的巨大潛能。HoloLens 2是一臺能夠切實幫助企業(yè)員工的實用性設(shè)備,這意味著AR技術(shù)開始成為員工完成工作的重要助力。這臺頭戴式設(shè)備非常舒適,能夠提供更好的視頻以及更出色的眼睛與手部追蹤體驗。另外,它還與更多微軟云服務(wù)相關(guān)聯(lián),而這些服務(wù)又能夠進一步對接各類iOS與Android應(yīng)用。
我還記得去年曾在Magic Leap上體驗過《查理的巧克力工廠》,而微軟HoloLens 2在使用感受上就像是Magic Leap的終極追求。當(dāng)然,雙方可能還需要溝通以確定這項技術(shù)的下一步發(fā)展方向。
另外需要強調(diào)一點,這款HoloLens并不適合大眾消費市場。其主要面向工廠中的工人,因為只有他們才可能為了工作而花費數(shù)千美元去購買一個工具。事實上,微軟公司多年以來一直都不真正關(guān)注消費級AR頭戴設(shè)備。目前,微軟正致力于以實用性的方式提供更好的混合現(xiàn)實體驗,同時耐心地等待相關(guān)應(yīng)用程序、開發(fā)人員以及其它關(guān)聯(lián)行業(yè)的持續(xù)發(fā)展。
▲ 在新的版本中,顯示部分能夠像焊接頭盔一樣掀起
顯然,增強現(xiàn)實技術(shù)不再只是癡人說夢。蘋果與谷歌公司一直在手機領(lǐng)域中探索這一技術(shù),而包括Magic Leap在內(nèi)的不少頭戴設(shè)備廠商也在努力設(shè)計出一種舒適、功能性強且能夠隨身攜帶的全息顯示解決方案。
第一款HoloLens的問世更像是一項成就或者一種標(biāo)志,因為它可以自成一體、不需要電線甚至完全無需接入任何設(shè)備。而微軟如今推出的新一代HoloLens 2也并沒有引入什么全新概念,但卻確立了一款頭戴式設(shè)備必須具備的三大核心要素:眼動追蹤、更大的視野以及更出色的手部追蹤能力。當(dāng)然,它也更加舒適,而且對需要佩戴眼鏡的用戶非常友好(包括我本人以及我的同事們),能夠讓我們輕輕松松罩在眼鏡之上,帶來非常好的體驗。另外,HoloLens當(dāng)中使用了一塊高通850移動處理器負(fù)責(zé)運算執(zhí)行,同時還配合微軟自己的AI引擎以替換上一代HoloLens所使用的英特爾處理器。
對于沒有實際比較的朋友們來說,這一次的新設(shè)計在觀感上似乎與上代產(chǎn)品沒什么區(qū)別。但我得告訴大家,新一代版本明顯沒那么笨重,份量也確實輕了一點。通過咨詢,我們確定本代版本的重量減少至566克,折合1.25磅。雖然相較于初代版本的579克,折合1.28磅,減去的重量似乎非常有限,但之所以使用感受得到極大提升,主要歸功于其重心分布的大幅調(diào)整。這一次的新版本加厚了用戶后腦部位的護墊,而前部布置則相對較小。如今產(chǎn)品的整體重心位于耳朵再靠后一點的地方,這意味著使用感受有點像“戴上一頂棒球帽”。我松開頭帶,將設(shè)備戴在眼鏡之上,仍然沒有任何問題。新的重心轉(zhuǎn)換意味著我們再也不用花整整5分鐘時間才找到舒服的配戴的位置。通過試用,我們覺得新版本更像是背上一個背帶設(shè)計更出色的背包。
另外,新版本甚至還提供了翻蓋式的顯示部分設(shè)計。顯示鏡處能夠向上掀起,用戶可以輕松回歸真實視覺或者更輕松地執(zhí)行常規(guī)工作——此前由合作伙伴開發(fā)的微軟Windows Mixed Reality品牌VR設(shè)備就一直采用這樣的設(shè)計。我很喜歡這種自在的感覺,現(xiàn)在我可以在演示當(dāng)中隨時擦擦自己的眼鏡,或者撓撓額頭。
HoloLens 2的硬件仍然自成一體,與前代設(shè)計一樣,它不需要任何額外的腰部配戴裝置(Magic Leap One就使用了這樣的設(shè)計)。當(dāng)然,這同時意味著HoloLens的頭戴本體部分要比Magic Leap One更大(后者價格為2295美元),售價也比其貴上1000多美元。這樣的差價無可厚非,因為Magic Leap One逼迫我戴上隱形眼鏡,或者再配一副能夠與其槽位匹配的鏡片——目前,Magic Leap還不支持我的這種鏡片。相比之下,HoloLens 2能夠直接容納我的眼鏡,我非常喜歡這樣的設(shè)計。
眼動追蹤并不是VR及AR當(dāng)中最重要的因素,至少目前還不是。第一款HooLens并不提供眼動追蹤功能。當(dāng)然,Magic Leap One已經(jīng)支持這項功能,HTC Vive Pro Eye以及Varjo VR-1等高端企業(yè)級VR設(shè)備也開始引入。眼動追蹤功能可以識別出用戶使用內(nèi)置攝像頭時的位置,這意味著大家不再需要移動頭部。
HoloLens 2的眼動追蹤主要用于兩大場景:它能夠測量眼球運動并借此與虛擬物體進行交互。另外,微軟也開始利用新的眼動追蹤攝像頭進行生物識別以保障安全。HoloLens 2通過Windows Hello進行虹膜掃描,因此用戶可以立即登錄Windows并啟動個人賬戶,或者借此保存自己的個人設(shè)置選項。
更令人印象深刻的是,我之前體驗過的大部分眼動追蹤技術(shù)都會因為配戴眼鏡而受到一定影響。比如,必須把帶子調(diào)松一些,才能避免HTC Vive Pro Eye早期版本的演示無法正常起效。使用Tobii的眼動追蹤VR技術(shù)時,也曾經(jīng)發(fā)生過類似的情況。好消息是,在進行幾輪HoloLens 2演示體驗的過程中,這種問題一次也沒有出現(xiàn)。
在此次體驗當(dāng)中,我試用過的唯一一項眼動追蹤實際用途,就是利用自己的快速眼動在無需移動頭部的情況下選定某個虛擬物體。我可以直接盯著這些物體并通過指令使其爆開,從而制造出大量虛擬水晶碎片。當(dāng)然,這項功能還有更多實際用途:以Tobii為代表的眾多企業(yè)軟件廠商正在利用眼部追蹤技術(shù)為用戶創(chuàng)建所需要的分析結(jié)果與熱圖,從而改進培訓(xùn)效果。
但在談到其它眼動追蹤技術(shù)的應(yīng)用方向時,似乎出現(xiàn)了一點偏差。微軟公司技術(shù)研究員Alex Kipman表示,HoloLens 2的眼動追蹤攝像頭能夠通過微小的眼部變化以及用戶的注視位置來測量相應(yīng)情緒。
但是,如果HoloLens都開始預(yù)測用戶的感受,甚至是腦中的想法了,那接下來又會怎樣?我不太確定。
▲ Human Factors實驗室中的一套腦電圖傳感器
在微軟的Human Factors實驗室當(dāng)中,這款硬件經(jīng)歷了舒適性與可訪問性測試。我們走進一個擺放著無數(shù)原型設(shè)備模型的房間,里面還有一張放著大量不同橡膠耳朵的桌子。微軟公司高級設(shè)計總監(jiān)Carl Ledbetter向我們展示了如何針對各種頭型與耳廓特征對這款新設(shè)備進行舒適度、疲勞感以及眼部觀看效果測試。另外,在某個角落的桌子上,還擺著一個嵌有傳感器網(wǎng)的人體模型頭部,這是一個腦電感應(yīng)頭盔。一眼望過去,我還以為自己來到了《少數(shù)派報告》電影里的場景。
Ledbetter介紹稱:“我們用它來測量腦波活動,甚至可以測量對象的思維負(fù)荷有多大。當(dāng)然,我們并沒有把所有成果都真正引入HoloLens。不過我們覺得這是個好機會,相關(guān)的結(jié)論可以被應(yīng)用到其它一些項目當(dāng)中。”
跟我一起參加這次體驗的同事Ian SHerr問道,“HoloLens 3是不是就能讀心了?”
“這個嘛……有可能吧”,我猜Ledbetter是在半開玩笑。當(dāng)然,他沒準(zhǔn)是說真的。
▲ HoloLens 2能夠更好地識別手部動作
全息顯示就像一場魔術(shù),而如果栩栩如生的顯示效果在用戶的視野之內(nèi)就被硬生生切斷,那么觀感體驗必然要大打折扣。第一代HoloLens的縱向可視角度約為30度,這種感覺就像是通過一扇窗戶觀看虛擬物體,而窗戶的大小則是一張距離用戶的臉只有幾英寸的撲克牌。
HoloLens 2將視野擴展到了52度,微軟公司表示這意味著新一代產(chǎn)品的有效可視區(qū)域達到了上代產(chǎn)品的兩倍。這感覺就像是通過一扇與課本差不多大的窗戶觀看全息圖像,縱向觀察空間提升了不少。具體來看,如今的虛擬顯示空間類似于使用臺式機上的大號顯示器,而上代HoloLens的使用感受則像是使用筆記本上的小屏幕。雖然HoloLens 2上仍然存在著某些3D效果被攔腰截斷的情況,畢竟我的余光視覺沒有受到任何遮擋,因此上下左右都存在著顯示斷層。但是,它的視野仍然要比Magic Leap One好得多,而Magic Leap One又比初代HoloLens好得多。
除此之外,HoloLens 2的有效分辨率也得到有效提升,如今它能夠?qū)崿F(xiàn)單眼顯示內(nèi)容的2K分辨率——遠高于初代HoloLens的單眼720p分辨率。然而,圖像顯示的密度仍然相同,為每度47像素(單位為PPD)。PPD是一種用于測量光學(xué)顯示中像素密度的方法,類似于手機或者平板電腦上的每英寸像素數(shù)。Kipman將其稱為等同于蘋果“視網(wǎng)膜顯示”效果的分辨率。但老實說,雖然觀感上已經(jīng)非常接近,我仍然能夠從中看到像素,這與我的日常視覺體驗有所不同。不過,這已經(jīng)比許多傳統(tǒng)的VR設(shè)備好上太多了。(Varjo的全新VR頭戴設(shè)備在視覺中心位置提供更高的PPD分辨率,但周邊區(qū)域的分辨率則有所下降。)另外,其中的全息圖視覺效果仍然比較怪異,這一點與Magic Leap以及初代HoloLens差不多。畫面很明亮,足以讓我在室內(nèi)空間中清晰識別并遵從指引。而微軟同時也表示,在戶外環(huán)境下的顯示效果也一樣出色。
新版本的圖形處理效果與上一代HoloLens并沒有太大的差別,最顯著的應(yīng)該就是以上提到的觀看區(qū)域的大幅擴展。另外,考慮到處理器配置,Magic Leap提供的圖形效果可能仍然優(yōu)于HoloLens 2——至少在雙方都不依賴云計算資源時是這樣。
簡單說一下其中的工作原理:HoloLens的基本目標(biāo)就是讓用戶出現(xiàn)“對眼”。微軟公司光學(xué)工程總經(jīng)理Zulfi Alam解釋了顯示內(nèi)容如何配合多份圖表及放大鏡功能共同起效。與初代HoloLens一樣,新版本的顯示鏡處同樣擁有波導(dǎo)管,可以利用LCOS(片上液晶)通過MEMS(微電子機械系統(tǒng))彎曲光線以使其投射至眼部。
下面來看HoloLens 2中的新特性:初代HoloLens采用的是一塊尺寸較小的顯示屏,因此視野相對比較有限。如今,HoloLens 2上的顯示屏采用了基于鏡面的激光系統(tǒng)進行蝕刻。該系統(tǒng)能夠生成每秒120幀的圖像與三道激光速,如同老式顯示器一樣,只是響應(yīng)速度更快。另外,它還支持超寬視野,這意味著我們觀看暗光區(qū)域時鏡片將完全透明。從體驗上來看,我只能說,雖然原理聽起來非常復(fù)雜,但最終結(jié)果看起來確實不錯。
▲ 體驗Shell演示
HoloLens 2并不提供任何物理控制器:微軟公司決定完全依賴于手部追蹤加語音控制。值得一提的是,手部追蹤技術(shù)同樣向前邁出了一大步。傳感器如今可以通過手腕與手指在一只手上識別最多25個關(guān)節(jié)點。此外,其還能夠識別手掌的方向,這意味著手指彎曲、手部動作以及拾取物體等功能全部可以直接實現(xiàn)。初代HoloLens只能基于手勢支持手指點擊與其它一些簡單的動作。這一次,HoloLens 2已經(jīng)能夠支持捏、拉、按等操作。這感覺要比Magic Leap One的手部追蹤更加先進。
此外,我們還嘗試了微軟公司提供的“Shell演示”全體驗。在一個類似于起居室的園區(qū)大房間,我看到一張擺著大量全息虛擬物體的桌子,其中包括一部引擎以及一架風(fēng)車。我走到旁邊,并看到它們被納入一個框體輪廓。系統(tǒng)提示我抓住框體的一角然后向外拉,依樣操作之后整個全息圖即可快速縮放,類似于拖動Windows中窗口的一角。
這就是HoloLens 2上提供的3D窗口。為了移動物體,我需要將手伸進物體的中心,握拳,而后移動自己的拳頭。我也可以把兩只拳頭一起放進去,然后把拳頭分開,這樣物體就會放大。整個操作過程有點奇怪,因為沒有觸覺反饋會讓人覺得操作很“假”。但這一切都能夠正常起效。
接下來,我觀察了整個房間,并發(fā)現(xiàn)沙發(fā)那邊放著一個發(fā)光的水晶狀物體。這里也有自己的框體,只是附帶的是一個三角形的播放按鈕。我用手指按下按鈕,隨之開啟了眼動追蹤的演示。
我望著四塊水晶,目光掠過時對應(yīng)的水晶就會閃閃發(fā)光。這種感覺很好,輕松愉快。當(dāng)我說出“爆炸”這個詞時,我望著的水晶就會立刻炸裂。微軟隨后展示了另一個眼動追蹤的示例:一只飄逸的蜂鳥以全息圖的形式懸停在一個類似維基百科的文本框旁邊,上面有一篇關(guān)于蜂鳥的文章。我讀了一會,并在眼睛向下望時觸發(fā)了文本框滾動操作。有時候滾動速度可能太快或者太慢,但我很快學(xué)會了如何用眼睛控制滾動速度。而且最重要的是,我也可以用眼部控制的方式移動物體,這讓我的雙手能夠休息一下。
說回引導(dǎo)程序中包含的虛擬修車環(huán)節(jié)。讓我好奇的是——我以后還會記得這些操作說明嗎?是繼續(xù)上一次未結(jié)束的引導(dǎo)培訓(xùn),還是依賴一步步的后續(xù)提示?幾周之后,在撰寫這篇文章時,我真的完全想不起自己當(dāng)時在那個房間里進行過哪些操作。有人提醒我,現(xiàn)在的人在開車的時候,也經(jīng)常會變成“導(dǎo)航地圖依賴癥患者”——完全依靠導(dǎo)航指引,而忘記了自己到底想去哪。有一些出租車司機喜歡背下地圖從而實現(xiàn)知識內(nèi)化。我想知道的是,這種導(dǎo)航式的分步教學(xué)是否會降低學(xué)習(xí)或者幫助效果?對此,微軟方面回應(yīng),這確實是個很好的問題,值得他們認(rèn)真研究。
很明顯,這個問題還沒有確定的答案,但HoloLens 2確實展現(xiàn)出了一種可能性。分步指引與PowerPoint deck一樣易于開發(fā)。也許在未來的某個時間點上,人們將會在現(xiàn)實世界當(dāng)中留下指引,以便其他人稍后發(fā)現(xiàn)并借此“導(dǎo)航”——這有點像賽車游戲中的“幽靈對手”,以幻影的形式存在提示玩家對方的先進軌跡與當(dāng)前成績。此前,谷歌公司在手機版本的谷歌地圖上就曾經(jīng)發(fā)布過類似的AR功能。
微軟公司這一次反復(fù)強調(diào)了多用戶混合現(xiàn)實的重要意義,也就是通過微軟Azure提供云服務(wù)。這些服務(wù)使得人們能夠在HoloLens甚至是自己的手機上體驗混合現(xiàn)實。谷歌公司去年發(fā)布了自己的多用戶AR項目,而蘋果也推出了iOS平臺上的ARKit。
想象一下,如果能夠共享同一個3D對象,進而在同一3D模型之上協(xié)同工作,那么未來的辦公場景會是怎樣。微軟公司的Dynamics 365 Layout應(yīng)用可以通過云端存儲對象,以確保這些對象始終被綁定在某一位置以供他人查找。另外,其提供的“云錨點”機制也可以確保每一位用戶都共享同樣的顯示內(nèi)容,甚至可以在iPhone上利用相同的AR工具通過微軟應(yīng)用程序在iPad與Android設(shè)備之間建立AR體驗。
在這一次的演示當(dāng)中,我們得以體驗大房間、圓桌子以及一套面向合作小組的簡短操作展示。我頭戴著HoloLens 2,坐在身邊的是我的同事Ian Sherr與Gabriel Sama——他們同樣戴著HoloLens 2。整個場景就像是星際代表團的成員們圍坐在一起。桌面上顯示的是微軟園區(qū)的一份發(fā)光3D虛擬地圖,由HoloLens 2設(shè)備創(chuàng)建而成。一位女士從桌上的圖形中出現(xiàn),向我們介紹微軟公司的未來園區(qū)擴展計劃。Ian與Gabriel也在觀看。我們從三個不同的角度觀看著同樣的內(nèi)容。有趣的是,他們頭頂彈出了自己的姓名。如果能望向自己,相信我的頭頂也浮現(xiàn)出了自己的名字。微軟公司明顯希望借此展示混合現(xiàn)實的未來發(fā)展方向:協(xié)作與多用戶。為了展示這一切是如何跨平臺實現(xiàn)的,幾位手持手機的助理來到我們身旁,并向我們示范如何通過手機屏幕看到同樣的全息圖。是的,我們所看到的都是相同的內(nèi)容。
我立刻注意到視野在這種情況下得到了極大的改善。我在桌子上看到的一切對象,都不存在被硬生生切斷的情況。
當(dāng)然,這一切還遠達不到完美。微軟方面提醒,我們使用的只是早期工程模型。果然,當(dāng)我轉(zhuǎn)向觀察自己所處的房間時,以半透明3D形式呈現(xiàn)在桌面上的微軟園區(qū)圖出現(xiàn)了一次傾斜。雖然其隨后自動完成了調(diào)整,但這不禁讓我好奇——如果企業(yè)客戶需要利用空間計算以精確渲染現(xiàn)實,那么他們對于這樣的小問題又有怎樣的容忍度?
微軟公司的云服務(wù)旨在進一步提升混合現(xiàn)實質(zhì)量。如果現(xiàn)有HoloLens設(shè)備能夠?qū)崿F(xiàn)厘米級別的精度,那么在云計算的加持之下,其精度將提升至毫米級別。同樣的,3D渲染的質(zhì)量也將大幅提高。Kipman通過幾張幻燈片向我們展示了當(dāng)前混合現(xiàn)實圖形只支持觀看,但還無法實現(xiàn)創(chuàng)建。他展示了一個引擎對象,介紹如何通過添加Azure云渲染向其中添加更多細節(jié)。
據(jù)透露,微軟還計劃利用Azure服務(wù)渲染HoloLens中所顯示的更多對象,從而改善設(shè)備上的圖形展示效果——具體來講,單憑HoloLens能夠渲染3D對象上的10萬個多邊形,但對接云端后多邊形數(shù)量可提升至1億個。微軟公司的最終目標(biāo)是縮小頭戴設(shè)備的尺寸并盡可能將資源負(fù)擔(dān)轉(zhuǎn)移至云端。就目前來看,這意味著HoloLens 2應(yīng)該能夠更多地使用云賬戶與云文檔,但我還沒想明白這一切將如何被結(jié)合在一起。
當(dāng)前,HoloLens 2設(shè)備的設(shè)計基本上能夠自給自足。如前文所說,它自成一體,能夠?qū)崿F(xiàn)脫機工作,它通過Wi-Fi接入網(wǎng)絡(luò),但不支持蜂窩網(wǎng)絡(luò)連接。根據(jù)微軟方面的說法,這主要是考慮到HoloLens 2的設(shè)計使用方式。但最終,當(dāng)5G網(wǎng)絡(luò)將高速數(shù)據(jù)覆蓋至全球之后,HoloLens也一定會迎頭趕上,成為一款高度依賴云端資源且更為強大的設(shè)備。
▲ 尚不提供物理控制器或者觸覺支持
值得注意的是,HoloLens 2當(dāng)中仍然沒有提供任何物理控制器。與初代HoloLens一樣,這款頭戴設(shè)備是專門針對手勢與語音控制而設(shè)計。雖然使用手感已經(jīng)大大改善,但觸覺控制器或者力反饋功能的缺失仍令人非常失望,甚至讓我覺得有些不安。相比之下。Magic Leap One就提供一個單手物理控制器——雖然有限但卻能夠增加一點與事物互動時的真實感,而且通過振動反饋提供觸覺響應(yīng)。
微軟公司表示正在考慮控制與觸覺問題,但目前還未提供相關(guān)解決方案。
Alex Kipman告訴我:“我們當(dāng)然很喜歡觸覺。我可以先朝你扔一份全息圖,然后你接住它再推回來,這種沉浸感確實要好得多。我在抓住全息圖時,應(yīng)該能夠感受到它的溫度——是冷、是暖、還是溫度適中。這將徹底改變渲染感與體驗可信度的水平。”
然而,Kipman補充稱這樣的觸覺“顯然只存在于夢想當(dāng)中,”而且微軟并沒有使用Windows VR頭戴設(shè)備中出現(xiàn)過的那些控制器。“我們認(rèn)為手上沒有實物或者觸覺回饋,并不代表著用戶就無法做出操作的行動。事實上,在我們的Windows VR頭戴設(shè)備中,我們有著一些相當(dāng)不錯的方案,可以用到與HoloLens相同的傳感器套件。”遺憾的是,雖然微軟已經(jīng)決定為這些周邊產(chǎn)品冠以“混合現(xiàn)實”品牌的名號,但Kipman到目前還沒有見過任何能夠?qū)嶋H體驗的Windows VR控制器。
也許這一切會在HoloLens 3當(dāng)中成為現(xiàn)實?“在我們的發(fā)展路線圖當(dāng)中,自然也會考慮到物體交互時的觸覺需求,讓用戶不僅僅能夠拿起我們創(chuàng)造的東西,還能與虛擬對象交互。例如,如果我手里拿著一把真實世界中的錘子,那么該如何進行虛擬對象交互?如果我的手沒有閑著,比如端著一個咖啡杯,但仍想操作自己的全息圖,又該怎么辦?”
我也好奇隨著時間推移,新的控制機制會帶來怎樣的使用變化?,F(xiàn)在抓取物體與按下按鈕的感覺已經(jīng)更加真實,但這究竟是我真正想要的真實感,還是僅僅只屬于一種剛剛上手的新鮮感以及心理安慰?這些將如何在HoloLens 2上發(fā)揮作用?
在談到隨時間推移而引發(fā)的測試疲勞時,Ledbetter表示,“我們也在認(rèn)真考慮這個問題。比如用戶正在嘗試進行某些操作,但當(dāng)時其手上拿著東西,而且正在與某人交談……在這種情況下,哪種交互方式最為理想?關(guān)于這一點,我認(rèn)為答案存在于軟件領(lǐng)域當(dāng)中……但您提到的這個問題確實非常重要,這也是我們關(guān)注的方向。”
▲ Kinect開發(fā)部門負(fù)責(zé)人Alex Kipman,目前正在管理HoloLens與HoloLens 2項目
顯而易見,微軟公司正在利用其Azure云計算為HoloLens 2持續(xù)注入能量。這意味著HoloLens 2將能夠在3D空間中更準(zhǔn)確地放置物體,同時提供更為詳細的圖形顯示與繪圖能力。Kipman還強調(diào)稱,像HoloLens這樣的產(chǎn)品將成為未來大規(guī)模連續(xù)性體驗中的組成部分。支持計算機視覺功能的HoloLens 2能夠?qū)崿F(xiàn)真實世界追蹤,這意味著這款頭戴設(shè)備能夠像自動駕駛汽車與無人機安裝的導(dǎo)航攝像頭傳感器一樣起效,并在一定程度上趨近于家庭、工廠以及家用電器中的掃描攝像頭。(如今,微軟公司正在銷售一款采用HoloLens傳感器的新型云連接版Kinect。)
聽起來,整個世界似乎都將被大量邊緣計算設(shè)備所占據(jù),并依靠云環(huán)境帶來越來越快的執(zhí)行速度。也許在5G技術(shù)的支持下,一切未來推出的HoloLens設(shè)備乃至其它VR頭戴設(shè)備都將高度依賴于云端。雖然HoloLens 2還不支持蜂窩網(wǎng)絡(luò)——其僅提供Wi-Fi與藍牙,但這只是因為LTE領(lǐng)域尚未做好準(zhǔn)備。
就連Kipman本人也承認(rèn),HoloLens 2并不適合每一位用戶,也不適合一切使用場景。雖然Kipman自己每天都會花上幾個小時來使用HoloLens,“但只要待在辦公室里,我大多數(shù)情況下還是寧愿使用鍵盤、鼠標(biāo)加上PC顯示屏來完成工作。”
但是,如果5G成為現(xiàn)實,觸覺技術(shù)也成為現(xiàn)實,結(jié)果會如何?正如AR/VR/MR領(lǐng)域的所有參與廠商一樣,微軟公司顯然也有著自己的大棋。畢竟下一代HoloLens距離我們可能并不遙遠。Kipman本人甚至也無法斷言接下來五年當(dāng)中這方面技術(shù)會發(fā)生怎樣的變化:“老實說,我沒法面向未來五年做出預(yù)期。我只能談?wù)勥@款產(chǎn)品生命周期之內(nèi)的趨勢,而且只能專注于其中的一到兩個發(fā)展方向。我認(rèn)為一切成功的產(chǎn)品都將圍繞企業(yè)使用場景進行設(shè)計。”
也許到那個時候,新的產(chǎn)品將真正成為我個人長久以來所期待的5G超級裝備!
好文章,需要你的鼓勵
這項研究提出了"高效探測"方法,解決了掩碼圖像建模AI難以有效評估的問題。通過創(chuàng)新的多查詢交叉注意力機制,該方法在減少90%參數(shù)的同時實現(xiàn)10倍速度提升,在七個基準(zhǔn)測試中均超越傳統(tǒng)方法。研究還發(fā)現(xiàn)注意力質(zhì)量與分類性能的強相關(guān)性,生成可解釋的注意力圖譜,展現(xiàn)出優(yōu)異的跨域適應(yīng)性。團隊承諾開源全部代碼,推動技術(shù)普及應(yīng)用。
伊利諾伊大學(xué)研究團隊開發(fā)了CLAIMSPECT系統(tǒng),通過層次化分解復(fù)雜爭議、智能檢索相關(guān)文獻、多角度收集觀點的方法,將傳統(tǒng)的"真假"判斷轉(zhuǎn)變?yōu)槎嗑S度分析。該系統(tǒng)能夠自動構(gòu)建爭議話題的分析框架,識別不同觀點及其支撐證據(jù),為科學(xué)和政治爭議提供更全面客觀的分析,已在生物醫(yī)學(xué)和國際關(guān)系領(lǐng)域驗證有效性。
清華大學(xué)研究團隊首次提出情感認(rèn)知融合網(wǎng)絡(luò)(ECFN),讓AI能像人類一樣理解和表達情感。該系統(tǒng)通過多層次情感處理架構(gòu),在情感識別準(zhǔn)確率上比現(xiàn)有最佳系統(tǒng)提升32%,情感表達自然度提升45%。研究突破了傳統(tǒng)AI情感理解的局限,實現(xiàn)了跨模態(tài)情感融合、動態(tài)情感追蹤和個性化情感建模,為醫(yī)療、教育、客服等領(lǐng)域帶來革命性應(yīng)用前景。
哈佛大學(xué)研究團隊通過創(chuàng)新的多智能體強化學(xué)習(xí)方法,讓AI在戰(zhàn)略游戲中學(xué)會復(fù)雜推理。研究發(fā)現(xiàn)AI通過游戲競爭能發(fā)展出類人思維能力,在邏輯推理、創(chuàng)造性解決問題等方面表現(xiàn)顯著提升。這項突破性成果為未來AI在醫(yī)療、教育、城市管理等領(lǐng)域的應(yīng)用奠定基礎(chǔ),展現(xiàn)了通過模擬人類學(xué)習(xí)過程培養(yǎng)真正智能AI的新路徑。