AR的殺手級設備是什么？蘋(píng)果：沒(méi)眼鏡啥事 就是iPhone

11月22日，很多傳言宣稱(chēng)，在不久的將來(lái)，蘋(píng)果將推出一款增強現實(shí)（AR）或混合現實(shí)（MR）設備。盡管蘋(píng)果還沒(méi)有詳細討論過(guò)這款設備，但AR功能在iPhone上已經(jīng)變得十分活躍，而且正在迅速變得越來(lái)越好。

蘋(píng)果從2017年開(kāi)始了AR之旅，憑借虛擬宜家家具和外觀(guān)逼真的戶(hù)外Pokemon Go大戰引起轟動(dòng)。今年，美國資深科技編輯斯科特?斯泰恩(Scott Stein)利用蘋(píng)果新款iPhone 12 Pro掃描消防栓、繪制其住宅的內部地圖，并在屋內地板上導航如何渡過(guò)熔巖河。在許多方面，蘋(píng)果最新款iPhone和iPad上的深度傳感激光雷達傳感器，憑借其先進(jìn)的3D掃描功能，正成為未來(lái)蘋(píng)果AR設備的支柱。

Facebook、微軟和Magic Leap已經(jīng)在探索旨在融合虛擬和現實(shí)的護目鏡和眼鏡，未來(lái)將有更多使用高通芯片的VR設備問(wèn)世。但蘋(píng)果AR主管邁克·羅克韋爾(Mike Rockwell)和AR高級產(chǎn)品經(jīng)理阿莉珊德拉·麥金尼斯(Alless Andra McGinnis)表示，蘋(píng)果目前的AR使命是讓人們口袋里已有的設備更好地運行。從長(cháng)遠來(lái)看，將AR與真實(shí)世界的位置分層，自動(dòng)彈出體驗，同時(shí)基于A(yíng)R的能力開(kāi)發(fā)創(chuàng )意工具和開(kāi)發(fā)輔助技術(shù)，可能成為最大的殺手級應用。

羅克韋爾說(shuō)：“AR技術(shù)具有巨大的潛力，可以通過(guò)今天已有的設備和未來(lái)可能推出的設備來(lái)幫助人們，但我們必須確保它的成功。對我們來(lái)說(shuō)，最好的辦法就是塑造我們的設備生態(tài)系統，讓人們投入自己的時(shí)間和精力，這是個(gè)健康而有利可圖的領(lǐng)域?！绷_克韋爾和麥金尼斯還談到了現在和三年前有什么不同，以及為什么手機對未來(lái)如此重要。

蘋(píng)果殺手級AR應用：智能手機

像Oculus Quest 2這樣的虛擬現實(shí)設備，雖然質(zhì)量不斷提高，但與智能手機相比，仍然沒(méi)有多少人使用。Moor Insights高級消費芯片分析師安謝爾·薩格（Anshel Sag）表示，除了索尼，沒(méi)有人真正談?wù)揤R頭盔的銷(xiāo)量。到目前為止，索尼已經(jīng)售出了500萬(wàn)臺PlayStation VR頭盔，盡管Oculus Quest 2很有可能在第一年賣(mài)出500萬(wàn)至600萬(wàn)臺。但即便如此，這些VR頭盔使用的應用程序通常會(huì )讓人感覺(jué)與我們日常使用的手機和電腦相去甚遠。即使在Magic Leap和微軟HoloLens承諾即將呈現MR幾年后，AR設備仍然沒(méi)有大量存在。

羅克韋爾指出：“對于那些只使用VR技術(shù)，或者想要只使用AR技術(shù)體驗的開(kāi)發(fā)者來(lái)說(shuō)，這是一條非常艱難的道路。市場(chǎng)上并沒(méi)有那么多設備可用。但與此同時(shí)，蘋(píng)果自2017年以來(lái)?yè)碛蠥R功能的iPhone和iPad數量高達數億部。即使你只吸引了相對較小比例的用戶(hù)，這仍然是個(gè)巨大的數字?！?/p>

蘋(píng)果表示，已經(jīng)有來(lái)自7000名開(kāi)發(fā)者提供的1萬(wàn)款支持AR的iOS應用程序，其中許多應用程序專(zhuān)注于購物或家居裝修，以此作為在家中實(shí)際使用AR的一種方式。實(shí)用性正是蘋(píng)果目前似乎最看重的。羅克韋爾說(shuō)：“我們想為開(kāi)發(fā)者提供一個(gè)平臺和生態(tài)系統，他們可以在那里謀生?！?/p>

雖然新冠肺炎疫情已經(jīng)導致許多實(shí)體企業(yè)關(guān)閉，減緩了大多數人的出行速度，但使用AR工具進(jìn)行家居購物仍是蘋(píng)果目前關(guān)注的主要問(wèn)題。就像谷歌和微軟正在尋求的方法一樣，使用基于手機的AR工具，你可能會(huì )在家里的手機上以3D掃描形式查看你可能想要購買(mǎi)的東西。蘋(píng)果與Safari瀏覽器的連接使彈出式AR購物看起來(lái)像是去商店購物的完美替身。

麥金尼斯援引Shopify and Build.com的數據指出：“家得寶發(fā)現，人們在A(yíng)R上看到某款產(chǎn)品時(shí)，改用AR的可能性是其他人的兩到三倍。購買(mǎi)的可能性更大(94%)，回報率也更低（22%）?！?/p>

包括Adobe在內的應用開(kāi)發(fā)商似乎對基于手機的AR也持同樣的看法。Adobe為蘋(píng)果iOS開(kāi)發(fā)了AR創(chuàng )意應用Aero。Adobe AR主管斯特凡諾·科拉扎(Stefano Corrazza)在談到公司為何除了從Oculus收購Medium之外還沒(méi)有探索頭盔創(chuàng )意工具時(shí)說(shuō)：“頭盔已經(jīng)在我們的路線(xiàn)圖上了，它們還沒(méi)有達到讓我們有理由部署的臨界點(diǎn)。在蘋(píng)果或谷歌大規模推出產(chǎn)品之前，我們推出它沒(méi)有太大意義?！?/p>

與此同時(shí)，像售價(jià)999美元的新款iPhone 12 Pro這樣的智能手機可以成為主要的創(chuàng )意工具，為未來(lái)的AR設備添磚加瓦?？评f(shuō)：“即使有了AR頭盔，所有的計算都會(huì )在手機上進(jìn)行，而且也可以流式傳輸的方式連接到眼鏡上?！?/p>

這也是高通已經(jīng)在為未來(lái)的AR/VR設備打造的相同模式，但這可能需要數年時(shí)間。與此同時(shí)，智能手機將發(fā)揮更大作用?？评谡劦絠Phone 12 Pro時(shí)說(shuō)：“在一段時(shí)間內，它將是主要的消費設備，但也可以3D掃描內容，它是一臺非常強大的機器?！盇dobe還沒(méi)有在A(yíng)ero上使用3D掃描工具，但未來(lái)可能會(huì )探索加入這些功能的方法。

激光雷達作為創(chuàng )意工具向AR領(lǐng)域邁進(jìn)

蘋(píng)果進(jìn)軍AR領(lǐng)域的第一步，只是使用手機的運動(dòng)傳感器、陀螺儀和內置攝像頭來(lái)識別樓層，然后它識別墻和人。具備激光雷達功能的iPhone和iPad則更進(jìn)一步，從后置攝像頭附近的一個(gè)小黑色圓圈隱形地噴射出一系列紅外激光，可以快速網(wǎng)格化(以3D方式繪制)房間的全景。

這也包括空間中的3D掃描對象和人。這是谷歌多年前通過(guò)一系列深度感應Tango手機探索的技術(shù)的演變，但技術(shù)更先進(jìn)、范圍更廣泛。許多早期的激光雷達應用，如Polycam、3D掃描儀和Record 3D都非常有創(chuàng )意，以3D捕捉為重點(diǎn)，與2017年令人驚嘆的、玩游戲的AR應用相比，這是一個(gè)巨大的轉變。

羅克韋爾說(shuō)：“這就是我們在設備上安裝掃描儀的部分原因。我們覺(jué)得這是一項關(guān)鍵技術(shù)，可以開(kāi)啟3D掃描技術(shù)的爆炸式增長(cháng)，可以用于各種用途。它還開(kāi)啟了以某種方式開(kāi)始掃描環(huán)境的可能性，并且能夠使創(chuàng )建3D對象變得更容易?！?/p>

互聯(lián)網(wǎng)上最大的3D對象存儲庫之一Sketchfab已經(jīng)看到了增長(cháng)，盡管在此之前，它已經(jīng)在3D掃描方面進(jìn)行了多年的探索。Sketchfab的訂戶(hù)剛剛達到400萬(wàn)，自2012年開(kāi)始提供這項服務(wù)以來(lái)，它迎來(lái)了第一個(gè)盈利月份。

但正如Sketchfab首席執行官阿爾班·德諾伊爾（Alban Denoyel）所說(shuō)的那樣，他已經(jīng)經(jīng)歷了之前自己預計3D掃描物體會(huì )蓬勃發(fā)展的時(shí)期。2016年，當VR頭盔和幾款谷歌3D掃描Tango手機首次亮相時(shí)，大肆炒作。然而，市場(chǎng)的采用并沒(méi)有發(fā)生，導致了德諾伊爾所說(shuō)的“VR冬天”到來(lái)?，F在，這種情況可能開(kāi)始好轉了。

Snapchat已經(jīng)在探索使用激光雷達實(shí)現AR效果，可以將虛擬物體放入現實(shí)世界，甚至還進(jìn)行了掃描整個(gè)城市街區的更大規模實(shí)驗。Snapchat攝像頭平臺副總裁埃坦·皮利普斯基(Eitan Pilipski)表示：“我們認為深度是非常重要的?！?/p>

不過(guò)，即使有了這些可能性，學(xué)習使用這些新工具可能也會(huì )令人望而生畏。蘋(píng)果自己的AR創(chuàng )作工具Reality Composer和Adobe的3D AR創(chuàng )作工具包Aero，并不一定是人們馬上就能下載的應用，甚至是他們回避的應用。到目前為止，3D掃描應用很吸引人，但也是實(shí)驗性的，而且并不總是直觀(guān)的。蘋(píng)果在很大程度上將3D掃描應用程序的世界交到了開(kāi)發(fā)者手中，而蘋(píng)果日常的核心iOS工具完全沒(méi)有整合這些功能。

蘋(píng)果在iOS范圍內對3D掃描對象的支持確實(shí)表明，3D掃描對象最終可能會(huì )像PDF或照片一樣被分享。但在某些方面，未來(lái)的創(chuàng )造性工具還沒(méi)有完全存在。

拍照效果也可能帶來(lái)令人驚嘆的改進(jìn)，蘋(píng)果自己的攝像頭應用程序使用iPhone 12 Pro的激光雷達來(lái)提高夜間拍照和肖像的對焦能力。但蘋(píng)果目前還沒(méi)有將AR技術(shù)集成到攝像頭應用中，也不允許進(jìn)行任何3D掃描。這些想法留給開(kāi)發(fā)者去探索。有些應用程序，如DSLR Camera，已經(jīng)使用iPhone的激光雷達在照片數據上創(chuàng )建自定義的3D信息層，將3D文本分層到照片中。

DSLR Camera的創(chuàng )建者弗爾維奧·?；鍍龋‵ulvio Scichilone）說(shuō)：“這款應用能夠計算出人和背景物體之間的分割，AR肖像畫(huà)的未來(lái)計劃是用陀螺儀或手指移動(dòng)畫(huà)框?！?/p>

作為擴展感官的AR以及可訪(fǎng)問(wèn)性工具

蘋(píng)果認為AR的殺手級應用是可發(fā)現性，但在可訪(fǎng)問(wèn)性方面還有另一個(gè)巨大的機遇。AR可以擴展一個(gè)人的感官。在音頻領(lǐng)域，蘋(píng)果已經(jīng)將AirPods用作助聽(tīng)器，Facebook也在探索用于輔助聽(tīng)力的空間音頻技術(shù)。

同樣的情況也可能發(fā)生在輔助視力上。未來(lái)的助視產(chǎn)品，如Mojo Lens承諾的增強型隱形眼鏡，正致力于成為對視力受損的人有用的工具。蘋(píng)果可能會(huì )在iPhone上的AR以及未來(lái)的設備作為輔助工具的工作方式上走類(lèi)似的道路。IOS 14.2中已經(jīng)有了新的人類(lèi)檢測功能，它使用蘋(píng)果的AR和激光雷達來(lái)識別人與人之間的距離，并在新款iPhone上用它來(lái)輔助視覺(jué)。

這可能只是個(gè)開(kāi)始。羅克韋爾說(shuō)：“我們可以做的事情還有很多，特別是與我們對周?chē)h(huán)境的理解有關(guān)。我們可以辨認人，但如果你想一想，人類(lèi)對環(huán)境的理解程度，沒(méi)有理由不能讓一臺設備最終也具備這種程度的理解，并將其提供給開(kāi)發(fā)者?！丙溄鹉崴寡a充說(shuō)：“我們將與盲人和弱視社區合作，特別是在人類(lèi)的探測方面進(jìn)行改進(jìn)?！?/p>

AR未來(lái)的殺手級優(yōu)勢：即時(shí)性

盡管有些人始終在使用AR，但在日常生活中使用iPhone或iPad時(shí)，他們經(jīng)常會(huì )忘記尋找新的AR應用。當我們在現實(shí)世界中忙碌時(shí)，發(fā)現虛擬世界中的新事物并不是一個(gè)無(wú)縫的過(guò)程。

羅克韋爾認為iPhone AR的未來(lái)不是應用程序，而是快速瀏覽功能。他解釋說(shuō)：“你每天要打開(kāi)手機多次來(lái)做各種事情，這些都是輕量級的體驗。真正的殺手級應用是，它將一直以這些微妙的方式被定期使用，幫助你做你現在做的事情，讓你的工作變得更容易、更快?！?/p>

實(shí)現這一目標的途徑包括App Clips，這是蘋(píng)果在iOS 14中推出小型微應用的新方式，無(wú)需下載任何東西就能在iPhone上運行。App Clips可以由現實(shí)世界中放置的NFC標簽或可掃描代碼觸發(fā)，它還涉及蘋(píng)果的地圖繪制工作。蘋(píng)果新推出的Location Anchors意味著(zhù)虛擬AR對象可以存在于現實(shí)生活中的地點(diǎn)，比如在時(shí)代廣場(chǎng)看到一件虛擬藝術(shù)品，并與多人同時(shí)共享。

羅克韋爾在談到Location Anchors時(shí)說(shuō)：“如果它位于我們擁有高分辨率地圖的地區之一，這在美國是相當多的。如果它在一米之內，你就可以體驗到這一點(diǎn)?！彼兄Z，Location Anchors的精確度將高于全球定位系統(GPS)。同時(shí)，在現實(shí)世界中，由特定二維碼或Location Anchors觸發(fā)的App Clips精確度可以達到厘米級。

對于蘋(píng)果的AR技術(shù)來(lái)說(shuō)，這兩項工作仍在進(jìn)行中：在疫情導致封鎖期間，人們可能不太可能出現這種基于位置的AR技術(shù)出現在公共場(chǎng)所、商店或博物館。但蘋(píng)果認為，對于每天使用AR的人來(lái)說(shuō)，它們是至關(guān)重要的。羅克韋爾說(shuō)：“我們知道我們必須解決這些問(wèn)題，才能讓AR成為主流體驗，我認為我們正處在讓AR成為人們日常生活一部分的邊緣?！?/p>

Acute Art公司首席執行官雅各布·德蓋爾（Jacob De Geer）說(shuō)：“我的看法是，App Clips和Location Anchors將產(chǎn)生巨大的不同?！盇cute Art是一款已經(jīng)在現實(shí)世界舉辦AR展覽的應用程序，但目前人們找到這件藝術(shù)品的挑戰之一是需要知道它的存在。德蓋爾稱(chēng)：“現在的主要問(wèn)題是：你怎么才能讓人們下載你的應用呢？這不僅是AR領(lǐng)域的問(wèn)題，也是現在所有科技領(lǐng)域的問(wèn)題?！?/p>

麥金尼斯說(shuō)：“我們經(jīng)常聽(tīng)說(shuō)人們在使用AR應用，卻不知道它們是什么?！彼傅氖俏直取づ量?Warby Parker)的即時(shí)AR眼鏡試戴等流行iPhone工具。他稱(chēng)：“隨著(zhù)AR變得越來(lái)越主流，你是否知道它是AR并不重要。重要的是你在你的設備上有一種令人驚嘆的體驗?！?/p>

現在為將來(lái)打好基礎

結合蘋(píng)果基于激光雷達的3D掃描功能，越來(lái)越強大視覺(jué)效果的AR工具，再加上AirPod Pro引入的空間音頻技術(shù)（可以讓你正在聽(tīng)的東西聽(tīng)起來(lái)就像在3D空間中移動(dòng)一樣），不難想象未來(lái)蘋(píng)果AR頭盔的樣子。

蘋(píng)果對此不予置評。但與此同時(shí)，該公司正在努力鼓勵大批開(kāi)發(fā)者開(kāi)發(fā)支持AR的應用程序。無(wú)論其AR設備是否會(huì )在短期內面世，更具空間意識的iPhone和iPad都將把手機轉變?yōu)槭澜鐠呙柙O備?；蛘呱踔量赡苡糜跈C器人技術(shù)，或者在意想不到的地方用作計算機視覺(jué)攝像頭。

羅克韋爾說(shuō):“這些東西最初是很微妙的，你必須具備所有的元素才能讓它們成功。幾年之后，它將成為一種你會(huì )記不起沒(méi)有它的生活方式，就像互聯(lián)網(wǎng)一樣。你會(huì )覺(jué)得：‘哇，我經(jīng)常用這個(gè)’，它最終將融入我們的生活?！?/p>