將AR技術(shù)與工作結(jié)合，你自己就是操作系統(tǒng)…

所謂的虛擬現(xiàn)實(shí)(VR)擁有一個(gè)環(huán)繞頭戴式設(shè)備用戶視野的完整環(huán)境，整個(gè)世界的呈現(xiàn)以及讓人沉浸的方式，讓觀看者能以第一人稱或是旁觀者的角度參與其中；而擴(kuò)增實(shí)境(AR)則是呈現(xiàn)頭戴式設(shè)備用戶所在之真實(shí)世界場(chǎng)景，但添加、或說擴(kuò)增了計(jì)算機(jī)產(chǎn)生的影像，讓觀看者感覺那好像是現(xiàn)實(shí)世界場(chǎng)景的一部分。

無論是VR或AR，帶給觀看者的感官體驗(yàn)都很難形容；只有2D平面的文字或是屏幕，無法傳達(dá)3D空間的運(yùn)動(dòng)。為此，頭戴式設(shè)備業(yè)者M(jìn)eta的創(chuàng)辦人暨首席執(zhí)行官M(fèi)eron Gribetz在他去年2月發(fā)表的TED專題演說中(參考下方Y(jié)ouTube視頻)，讓聽眾能充分欣賞AR的藝術(shù)并展示了利用該技術(shù)助力醫(yī)療研究的方案。

Gribetz描述他在2011年冬天美國(guó)紐約市的某個(gè)酒吧里經(jīng)歷的靈機(jī)一動(dòng)，當(dāng)時(shí)他坐在一個(gè)同事對(duì)面討論事情，突然那個(gè)同事的手機(jī)響了、他接起電話，于是那支手機(jī)打斷他們的對(duì)話分散了注意力；但在房間的另一邊，有人是拿著手機(jī)分享Instagram照片給旁邊的朋友看。所以只是因?yàn)槭謾C(jī)顯示屏幕朝著不同的方向，Gribetz與他的同事是被隔開，酒吧另一邊的小團(tuán)體則是更為貼近。

從這里他想到，我們應(yīng)該利用機(jī)器把我們的工作、甚至是概念性的工作在現(xiàn)實(shí)世界呈現(xiàn)，而不只是將它們緊緊捂在自己手里，無論是用智能手機(jī)或是臺(tái)式機(jī)；也就是說，我們可以環(huán)繞著以全像(holographic)方式虛擬出的營(yíng)火，與眾人會(huì)面、分享與合作。

在Gribetz的TED專題演說視頻里，顯示美國(guó)加州大學(xué)舊金山分校(UCSF)的Adam Gazzaley博士，在他的實(shí)驗(yàn)室里以直觀的自然手勢(shì)存取、操作并分享3D數(shù)字全像信息；他是利用Meta的Meta 2頭戴式設(shè)備開發(fā)工具包之神經(jīng)科學(xué)驅(qū)動(dòng)接口(neuroscience-driven interface)，進(jìn)行“玻璃大腦(glass brain)”研究項(xiàng)目。 最近于美國(guó)舊金山舉行的穿戴式科技大會(huì)(Wearable Tech Conference)上，筆者有機(jī)會(huì)從Meta首席技術(shù)官Soren Harner那里更進(jìn)一步了解這種簡(jiǎn)單直觀接口背后的辛苦工作；他表示：“我們的任務(wù)是透過將顯示器、嵌入式系統(tǒng)、光學(xué)組件、傳感器、計(jì)算機(jī)視覺以及同步定位與建圖(simultaneous location and mapping，SLAN)整合在一起，把AR推向下一個(gè)階段，然后將有所這些先進(jìn)技術(shù)裝進(jìn)手機(jī)或頭戴式設(shè)備。”

光學(xué)技術(shù)的突破

在光學(xué)技術(shù)方面的突破，包括完整的90度視野以及2,560 x 1,440高dpi顯示。在可看透的頭帶顯示器的上方區(qū)域分辨率較高，讓用戶能更清楚看到信息；下方的工作區(qū)域則是較寬廣，以適應(yīng)人們?cè)诠ぷ鲿r(shí)用雙手操作物體的方式，而這部分的顯示器也是透明的，好讓使用者能與同事對(duì)視。

Meta 2擴(kuò)增實(shí)境(AR)頭戴式設(shè)備 （來源：Meta）

Meta 2的較寬廣視野以及傳感器數(shù)組，讓用戶能像是對(duì)待實(shí)體物品一般，看見、抓取以及移動(dòng)全像物品，就像是上面的視頻中Gazzaley博士所做的；與全像互動(dòng)的直接手勢(shì)，完全是自然而且直觀，不需要任何學(xué)習(xí)曲線。

Harner表示，在工程技術(shù)這端：“我們積極建立自己的電子工程師團(tuán)隊(duì)，他們需要在集合傳感器、光學(xué)組件、成像、追蹤技術(shù)與計(jì)算機(jī)視覺的嵌入式系統(tǒng)領(lǐng)域有豐富背景；”他在專題演說中并指出，使用Meta的系統(tǒng)：“用戶自己就是操作系統(tǒng)。”

他進(jìn)一步解釋：“這意味著我們透過將內(nèi)容空間化(spatializing)于使用者面前，降低了復(fù)雜度；而不是將內(nèi)容以層層套迭的方式來放置，像是傳統(tǒng)操作系統(tǒng)里的文件管理器那樣。這改善了工作內(nèi)存，并減輕了機(jī)器的負(fù)擔(dān)。”

這也是一直以來人類在3D空間中使用實(shí)體工具的模式，我們會(huì)伸手拿取而且將那些工具到處移動(dòng)；換句話說，要讓處理過程更快、更精確且有效率，輸入與輸出──也就是思考/行動(dòng)以及導(dǎo)致的結(jié)果/反應(yīng)──必須要最大化。

傳統(tǒng)2D空間的操作系統(tǒng)采用一條抽象鏈(a chain of abstraction)，使得思考與行動(dòng)之間脫節(jié)(disconnect)，也為工作內(nèi)存帶來難以承受的負(fù)擔(dān)。因此Meta的技術(shù)能允許在用戶實(shí)體工作空間的實(shí)體工具旁邊，建立AR工具以組織數(shù)字內(nèi)容。

Harner表示：“借由讓用戶有機(jī)會(huì)能讓實(shí)體與數(shù)字工具在身體周遭相同的3D、實(shí)體環(huán)境中共存，而不是以抽象語(yǔ)意架構(gòu)的形式呈現(xiàn)，我們能實(shí)現(xiàn)在該空間中更自然的組織工具方式，降低認(rèn)知循環(huán)以及系統(tǒng)負(fù)擔(dān)，因此將用戶體驗(yàn)推向一個(gè)全新層次。”

允許直觀運(yùn)動(dòng)為運(yùn)算建立了一個(gè)阻力最小的神經(jīng)通路，以及全新的零學(xué)習(xí)曲線方法，用戶現(xiàn)在能用數(shù)字設(shè)備將自己的肢體向?qū)嶓w世界伸展；因?yàn)槟蔷褪俏覀円恢币詠碜鍪虑榈姆椒ǎ圆恍枰獙W(xué)習(xí)。

傳統(tǒng)的計(jì)算機(jī)接口要求我們?cè)谟龅矫恳环N新操作系統(tǒng)時(shí)，就得學(xué)習(xí)新的抽象概念以及階層式的架構(gòu)，或許這是在2D平面我們能做到的最佳方法；但透過利用我們周遭的3D區(qū)域，以空間花方式來安排內(nèi)容，就具備能降低存取信息以及與之互動(dòng)的復(fù)雜性。總而言之，AR技術(shù)具備能讓所有使用者朝著更強(qiáng)、更直觀生產(chǎn)力發(fā)展的龐大潛力。