起底蘋(píng)果的AR布局 已經(jīng)萬(wàn)事俱備?

“帶有攝像頭的可穿戴信息系統”專(zhuān)利描述圖
同時(shí),蘋(píng)果也沒(méi)有放松對專(zhuān)利的申請,如下:
·2015 年 5 月 申請柔性屏幕專(zhuān)利
這是一種在固體發(fā)光像素周?chē)O計許多小孔的屏幕,可將屏幕變得又薄又柔軟,以幫助 AR 應用。通過(guò)像素現實(shí)虛擬圖像,同時(shí)透過(guò)小孔查看屏幕另一邊的現實(shí)圖像。
·2016 年 7 月 申請 AR 顯示使用到的類(lèi)似光波導技術(shù)
這項技術(shù)是讓圖像從離軸源文件中投射出來(lái),通過(guò)透明物質(zhì)(護目鏡或薄片)進(jìn)入視線(xiàn)。
·9 月 申請 AR 映射系統
這套 AR 映射系統能夠利用 iPhone 的硬件將增強現實(shí)功能疊加到直播視頻上。用戶(hù)通過(guò)手機應用可以在一些現實(shí)場(chǎng)景中標記數字信息,比如街道名稱(chēng)、興趣點(diǎn)等等,并用攝像頭進(jìn)行掃描。
·11 月 申請 AR 頭盔專(zhuān)利
這項專(zhuān)利描述的是一種保留移動(dòng)電子設備屏幕的頭盔式顯示屏儀器,頭盔式屏幕系統以及操作方案可以讓用戶(hù)“配對”或“解除”。
·2017 年 2 月 申請帶有攝像頭的可穿戴信息系統
這項技術(shù)可能會(huì )用在一款頭戴顯示器中,而顯示器上搭載的攝像頭可以接收與顯示器相同視角的信息。該系統可下載有趣的內容,并用 AR 展示出來(lái)。
·3 月 申請專(zhuān)利名為“利用景深加強人臉檢測”
這項專(zhuān)利是通過(guò)計算機視覺(jué)系統,利用專(zhuān)門(mén)的硬件和軟件進(jìn)行人臉識別,尤其是已經(jīng)保存到數據庫中的人臉數據。
2016 年 11 月,蘋(píng)果被爆與 LG 聯(lián)合開(kāi)發(fā) 3D 攝像頭模組,研究如何將自家的3D攝像頭技術(shù)應用于 LG Innotek 生產(chǎn)的智能手機攝像頭模組。
從上述種種來(lái)看,我們可以確定,蘋(píng)果規劃了兩條 AR 產(chǎn)品路線(xiàn),一是讓新迭代的 iPhone 具有 AR 功能,二是打造一款 AR 眼鏡。
AR手機的難度在哪?
先來(lái)說(shuō)說(shuō), AR 手機。要打造這樣一款手機,到底有什么難度?

此前,雷鋒網(wǎng)采訪(fǎng)三維建模公司積木易撘時(shí),CTO 鄒圣兵曾解釋三維建模掃描的成像原理:
兩臺工業(yè)相機和一個(gè)投影儀可組成最小的掃描儀單元。攝像機得到深度信息,投影儀能投射已知編碼影像,通過(guò)前方交會(huì )計算得出點(diǎn)云,每幅投影儀得到的點(diǎn)云之間實(shí)時(shí)匹配,再進(jìn)行全局優(yōu)化,實(shí)現表面三維點(diǎn)云重建,點(diǎn)云三角網(wǎng)格化,也就是得到了投影儀投影對象的三維模型。
“手機要搭載 AR 技術(shù),不只要包含投影儀、攝像頭、還需要鏡子、手機?!编u圣兵向雷鋒網(wǎng)近一步解釋了手機實(shí)現 AR 功能的原理。
傳統的 AR 設備通過(guò)手柄、眼球跟追、手勢識別等,實(shí)現與投影儀交互,讓投影儀投影已知彩色編碼,通過(guò)攝像機和鏡子拍攝的圖片,計算出深度信息,然后再將計算出的深度信息結合slam算法(建模只是點(diǎn)云信息,不進(jìn)行后續),與真實(shí)世界進(jìn)行融合、對齊。接著(zhù),在對齊的虛擬場(chǎng)景中進(jìn)行渲染,渲染出接近真實(shí)場(chǎng)景的效果,這就是 AR。
手機如果集成了投影儀、兩個(gè)攝像頭、一面鏡子,手機在用戶(hù)手中,操作投影儀所對的方向,投影已知彩色編碼圖像到前方對象上,產(chǎn)生畸變的彩色編碼圖像被兩個(gè)攝像頭拍攝,拍攝的兩張圖片在手機處理器進(jìn)行計算,得到前方對象的點(diǎn)云信息。鏡子能得到廣角圖像不像攝像頭有景深限制,鏡子得到的廣角圖像,范圍較大,不只是包含了投影儀的投影對象,也包含前方的場(chǎng)景圖片。
該圖片傳入手機處理器進(jìn)行計算,結合 slam 算法,計算出場(chǎng)景的輪廓等信息,再結合手機在場(chǎng)景中的相對位置和視野等信息,這樣就能實(shí)現掃描的點(diǎn)云信息與虛擬場(chǎng)景的融合,在虛擬場(chǎng)景中渲染,得出接近真實(shí)世界的效果。

Phab2 Pro 的 AR 效果演示
而當前市場(chǎng)上真正推出的 AR 手機是 Phab2 Pro,它是由聯(lián)想和谷歌合作的產(chǎn)品,采用了谷歌 Project Tango 技術(shù),內置三顆攝像頭,包括一顆魚(yú)眼鏡頭和一顆紅外傳感器,可實(shí)現空間定位。
鄒圣兵表示,“Tango 手機中攝像機、兩個(gè)攝像頭、一面鏡子和對應的處理器是一個(gè)整體,是由一個(gè)獨立廠(chǎng)家提供,沒(méi)有與手機主板真正集成,而且由于三維重建需要很強的處理器和較大內存,這都不是獨立模塊能達到的。
如果蘋(píng)果要支持 AR,并且直接集成在主板,AR 處理與手機其他處理是一個(gè)處理器,就要觀(guān)察蘋(píng)果是否完成相關(guān)生態(tài)鏈的收購整合。目前來(lái)說(shuō),還沒(méi)見(jiàn)到樣機,不好評判?!?/p>
由此可見(jiàn),蘋(píng)果要成功做出一部 AR 手機,技術(shù)是一方面,各技術(shù)的集成也十分關(guān)鍵。不久前,蘋(píng)果宣布自己將獨立研發(fā) GPU,可能會(huì )將CPU 和 GPU 更好結合,從而針對 AR、AI 提升移動(dòng)設備計算能力。至于iPhone 8 或是后續產(chǎn)品是否會(huì )有驚艷的表現,我們可以保持期待。
此外,AR 眼鏡方面最具代表性的便是微軟 HoloLens,以及 Meta。而今年一月有蔡司員工向國外科技博客作者確認,蘋(píng)果正與蔡司合作研發(fā) AR 眼鏡。
綜上,不得不說(shuō),蘋(píng)果對 AR 的野心可不止一點(diǎn)點(diǎn)。當然,我們也希望蘋(píng)果能讓 AR 技術(shù)更加成熟,并走向更多的消費者。
評論