Meta與高通簽署XR平臺開(kāi)發(fā)協(xié)議：欲在元宇宙領(lǐng)域拔得頭籌
加入技術(shù)交流群
9月2日，2022年柏林國際電子消費品展覽會(huì )（IFA 2022）首日，高通公司總裁兼CEO安蒙和Meta創(chuàng )始人兼CEO馬克·扎克伯格在主題演講中宣布雙方達成合作。
本文引用地址：http://dyxdggzs.com/article/202209/437996.htm了解到，協(xié)議內容覆蓋范圍廣泛，承諾將合作開(kāi)發(fā)高通驍龍XR芯片的定制版本，以制定“未來(lái)Quest產(chǎn)品的路線(xiàn)圖”。雙方的戰略合作伙伴關(guān)系將持續數年，并將專(zhuān)注于對驍龍XR平臺的開(kāi)發(fā)。
XR（擴展現實(shí)）技術(shù)涵蓋AR（增強現實(shí)）、VR（虛擬現實(shí)）與MR（混合現實(shí)），高通驍龍XR平臺是專(zhuān)用擴展現實(shí)平臺，集成了高通異構計算架構，包括基于A(yíng)RM的多核CPU（Kryo）、向量處理器、圖形處理器（Adreno）和高通人工智能引擎AI Engine。
簡(jiǎn)單而言，驍龍XR平臺元宇宙的需求設計，融合了連接和AI性能，以及空間音頻、圖形處理和影像功能，幫助VR設備廠(chǎng)商打造沉浸式的體驗。
在XR芯片市場(chǎng)，高通統治力也初現。除Meta Quest 2之外，微軟HoloLens 2、Pico Neo 3、奇遇Dream等主流產(chǎn)品均采用了驍龍芯。目前，已有超過(guò)50款采用驍龍平臺的XR商用設備發(fā)布，其中還包括手機廠(chǎng)商聯(lián)想、Motorola、OPPO和小米等。
此次高通和Meta的合作并不意外
據高通方面透露，通過(guò)此次合作生產(chǎn)的芯片并非Meta獨占，但它專(zhuān)門(mén)針對Quest的系統規格進(jìn)行了優(yōu)化，這也意味著(zhù)它們同樣可以用于其他廠(chǎng)商的產(chǎn)品。如同手機廠(chǎng)商搭載高通驍龍芯片一樣，下游廠(chǎng)商既可以選擇直接搭載相關(guān)產(chǎn)品，也可以選擇定制驍龍XR平臺。此次雙方合作，正是基于定制化需求。
Meta創(chuàng )始人兼CEO馬克·扎克伯格（Mark Zuckerberg）表示：“我們正針對Quest系列的未來(lái)產(chǎn)品路線(xiàn)圖，與高通技術(shù)公司一起打造基于驍龍XR平臺和技術(shù)，去定制化VR芯片組。與手機不同，打造VR設備在空間計算、成本和產(chǎn)品形態(tài)方面都面臨著(zhù)多維度的全新挑戰。定制化的芯片組將幫助我們不斷突破虛擬現實(shí)的邊界，大幅提升體驗?！?/p>
此次合作僅涵蓋虛擬現實(shí)設備，而Meta將繼續致力于開(kāi)發(fā)自己的芯片解決方案。并稱(chēng)可能的情況是，使用現成的芯片，或是與行業(yè)伙伴合作進(jìn)行訂制，同時(shí)探索自己的新型芯片解決方案；也有可能會(huì )在同一款產(chǎn)品中同時(shí)使用合作伙伴的產(chǎn)品和訂制的解決方案。
此前，為了創(chuàng )造優(yōu)異XR體驗，高通已與Meta合作超過(guò)7年。據悉，Meta此前就已與高通在VR領(lǐng)域有著(zhù)多年的合作基礎，其Quest系列頭顯、第一代智能眼鏡Ray Ban Stories、視頻聊天設備Portal等產(chǎn)品均由后者提供芯片。
所以從某種程度上來(lái)說(shuō)，雙方的合作是比較常規的，畢竟Quest 2也采用高通的驍龍XR2芯片。但此次是在更深層次的工程方面進(jìn)行合作，而這對兩家公司而言都是第一次。
在驍龍XR平臺與Meta Quest平臺的技術(shù)驅動(dòng)下，雙方將針對元宇宙所需的空間運算展開(kāi)合作，但未進(jìn)一步對外披露協(xié)議細節與財務(wù)條款。
扎克伯格表示，公司仍處于元宇宙的早期階段，這種深度的技術(shù)集成將有助于VR朝著(zhù)多功能計算平臺的方向發(fā)展。
那么，元宇宙的定義是什么？它是一個(gè)由實(shí)時(shí)渲染的3D虛擬虛擬世界組成的大規模、可互操作的互聯(lián)網(wǎng)，支持無(wú)限的用戶(hù)同步、持續體驗，每個(gè)用戶(hù)都可以在元宇宙上找到存在感（Presence）。對于普通人來(lái)講，元宇宙的誕生意味著(zhù)我們的時(shí)間、勞動(dòng)、休閑、財富、娛樂(lè )等活動(dòng)都將存在于虛擬空間中。元宇宙具有跨越虛擬世界和物理世界的技術(shù)、能力和標準。
元宇宙的關(guān)鍵是實(shí)時(shí)渲染，意味著(zhù)內容可共享，且清晰易讀、可實(shí)時(shí)更改，并以圖形計算的形式出現。元宇宙不一定是游戲，游戲只是一種表現形式。
元宇宙真正在描述一種統一、持久的體驗，而不是單一的表達方式。如果只是互聯(lián)網(wǎng)上某個(gè)應用（比如Roblox、堡壘之夜、AOL等），并不能算作是元宇宙。簡(jiǎn)單來(lái)講，如果互聯(lián)網(wǎng)是在網(wǎng)絡(luò )之間建立聯(lián)系，那么元宇宙就像是在多個(gè)3D世界之間建立聯(lián)系。
Meta欲在元宇宙領(lǐng)域拔得頭籌
在2021年底，Meta方面曾宣布全面進(jìn)軍元宇宙，以擺脫社交媒體平臺這一標簽，全力拓展新的發(fā)展空間。早在2015年，扎克伯格就一直在關(guān)注，這促使他首先收購了Oculus，以在新興的XR領(lǐng)域領(lǐng)先。
據IDC數據顯示，2022年第一季度全球VR頭顯市場(chǎng)出貨量較去年第一季度相比增長(cháng)了241.6%， Meta最新產(chǎn)品Q(chēng)uest 2頭顯占據了VR頭顯市場(chǎng)90%的份額。字節跳動(dòng)的Pico占4.5%的份額，其他廠(chǎng)商份額不到4%。
9月2日，Meta確認已收購柏林初創(chuàng )公司Lofelt。此次收購于數周前完成，但Meta在上周五回應《華爾街日報》的問(wèn)題時(shí)才公開(kāi)。借助Lofelt的觸覺(jué)技術(shù)，Meta可以為VR控制器、EMG腕帶和觸覺(jué)手套開(kāi)發(fā)硬件和軟件。
據了解，Lofelt成立于2014年，此后發(fā)布了多款產(chǎn)品。第一個(gè)也可能是最有名的是名為“Basslet”的腕帶，其被宣傳為“可穿戴低音炮”，可提供與用戶(hù)正在聽(tīng)的音樂(lè )相匹配的觸覺(jué)效果。后來(lái)，這家初創(chuàng )公司開(kāi)發(fā)了Lofelt Studio，該軟件允許開(kāi)發(fā)人員為智能手機應用程序和游戲控制器創(chuàng )建精細的觸覺(jué)效果。
所有這一切的背景在于，Meta正面臨巨大的壓力。由于蘋(píng)果對iOS系統隱私設置的調整影響了精準廣告投放，Meta的收入今年首次出現下滑。
跡象表明Meta的虛擬現實(shí)和增強現實(shí)業(yè)務(wù)已有所收縮。Meta在元宇宙戰略上押下重注，每年為這方面項目，包括增強現實(shí)和虛擬現實(shí)頭顯，花費數十億美元，但遭遇了巨額虧損。
從選擇和高通合作中也可以看出，Meta正在營(yíng)收下滑和積極探索元宇宙之間做出平衡，通過(guò)合作降低成本以推進(jìn)元宇宙業(yè)務(wù)。
從表面上看，本次合作可能代表高通公司承諾在未來(lái)幾年內將Meta設為首要客戶(hù)，為公司投入更多時(shí)間，并為其提供對高通公司未來(lái)驍龍XR芯片的更大影響力。而對于Meta，將需要對典型的計算架構進(jìn)行徹底的重新思考，才能使XR的愿景成為現實(shí)，兩家公司可能也會(huì )在這方面共同進(jìn)行原型設計。
但這種伙伴關(guān)系可能還有另一個(gè)主要原因，即將兩個(gè)盟友聯(lián)合起來(lái)對抗一個(gè)共同的威脅：蘋(píng)果。
彭博社的記者M(jìn)ark Gurman稱(chēng)，蘋(píng)果正在開(kāi)發(fā)至少三款VR/AR設備。在最新一期的“Power On”中，Gurman解釋道蘋(píng)果至少有三款VR/AR設備處于正在開(kāi)發(fā)的階段，代碼為“N301”、“N602”和“N421”。
Gurman認為這些設備中的第一款“N301”被稱(chēng)為“Apple Reality Pro”。據悉，這款頭顯是Meta即將推出的Quest Pro的“高端競爭對手”。
盡管蘋(píng)果尚未正式宣布任何XR產(chǎn)品，但所有跡象都表明其擁有悠久的研發(fā)歷史以及在該領(lǐng)域占據主導地位的愿望。對于本身想要占據XR制高點(diǎn)的Meta來(lái)說(shuō)，這是個(gè)問(wèn)題。
相比于Meta，蘋(píng)果更擅長(cháng)開(kāi)發(fā)硬件產(chǎn)品，并在包括研發(fā)高性能芯片、延長(cháng)續航等、用戶(hù)體驗和UI設計上擁有很多經(jīng)驗。如果XR有望成功，蘋(píng)果將至少是其中一個(gè)競爭者，并很可能提供市面上性能最好、外觀(guān)設計最成熟、重量最輕的XR產(chǎn)品。
在過(guò)去幾年中，蘋(píng)果開(kāi)始逐步淘汰第三方芯片，轉而在其MacBook產(chǎn)品中使用自己的芯片，這標志著(zhù)該公司微芯片設計和制造能力的成熟。不難預測，蘋(píng)果必定會(huì )在其XR產(chǎn)品中使用自己的定制芯片。如果蘋(píng)果在XR領(lǐng)域的市場(chǎng)份額逐步增大，那么不可避免會(huì )和高通銷(xiāo)售的驍龍芯片產(chǎn)生競爭關(guān)系。
與此同時(shí)，谷歌作為全球第二大移動(dòng)平臺供應商，多年來(lái)也在嘗試AR/VR業(yè)務(wù)，不過(guò)不管是在游戲還是硬件方面，都并未得到長(cháng)足發(fā)展。其內部孵化的項目如Niantic，也大多被分拆、剝離。直到去年底，谷歌又開(kāi)始重組實(shí)驗室業(yè)務(wù)，發(fā)力研發(fā)AR/VR設備。
對于高通來(lái)說(shuō)，與Meta的合作是為了確保蘋(píng)果不會(huì )輕易主導XR市場(chǎng)，并扼殺該公司向各種非蘋(píng)果XR設備制造商銷(xiāo)售芯片的機會(huì )。對于Meta而言，與高通的合作通過(guò)為該公司提供一個(gè)可以制造高度專(zhuān)業(yè)化用于XR設備的芯片的堅定盟友來(lái)支持戰略漏洞。
從2015年到現在，扎克伯格對于XR的預期一直在調整，幾乎推遲了三次。如果說(shuō)，XR硬件和操作系統集成的虛擬平臺是Meta接下來(lái)最大的機會(huì )，它在這個(gè)方向上并沒(méi)有領(lǐng)先太多，同時(shí)其核心業(yè)務(wù)也在經(jīng)歷短期衰退，接下來(lái)Meta時(shí)間緊迫。
尤其是面對當前的經(jīng)濟形勢，以及蘋(píng)果隱私功能調整（約損失100億美元現金流），Meta在XR領(lǐng)域的投資也將受影響。Meta面臨的最大一個(gè)挑戰，就是擺脫蘋(píng)果和谷歌約束、搶灘新市場(chǎng)這件事需要的時(shí)間遠超出預期，這一點(diǎn)可能被馬克·扎克伯格低估了。
目前，Meta在Quest頭顯中使用Android系統，但有報道稱(chēng)，該公司正在為虛擬現實(shí)和增強現實(shí)設備開(kāi)發(fā)自主操作系統。據悉，Meta暫停了一個(gè)名為XROS、可能涉及操作系統的項目。對此Meta回應到，該公司“仍在為設備開(kāi)發(fā)高度專(zhuān)業(yè)化的操作系統”。
但需要注意的是，在自研操作系統和芯片方面，雖然Meta很早就開(kāi)始積極組建相關(guān)團隊，但其目前遇到了一些困難和挑戰。隨著(zhù)相關(guān)負責人馬克·盧科夫斯基的離職，目前該公司已暫停開(kāi)發(fā)面向VR、AR的操作系統，成立于2017年的300人團隊也將轉崗至其他不同部門(mén)。此外，該公司的定制芯片項目“Barsilia”也同樣遭遇了挫折。
為了解決構建元宇宙面臨的挑戰，高通、Epic、Meta等28家公司加入了科納斯組織牽頭的元宇宙標準聯(lián)盟。只有企業(yè)之間建立合作，才能更容易構建元宇宙。不過(guò)，構建元宇宙是一個(gè)試錯的過(guò)程，可能需要一邊開(kāi)發(fā)一邊從反饋中吸取經(jīng)驗。一開(kāi)始也許可以從3D和社交來(lái)切入，然后延伸至其他的領(lǐng)域。
當然，不同公司之間也可以通過(guò)互聯(lián)來(lái)實(shí)現共贏(yíng)，就像是《紐約時(shí)報》入駐Facebook來(lái)獲得更多流量?；蛘?，就像是獨立開(kāi)發(fā)者使用Unreal統一的頭像和用戶(hù)系統去開(kāi)發(fā)游戲那樣，未來(lái)元宇宙也會(huì )有大規模的統一開(kāi)發(fā)標準、慣例、文件類(lèi)型和引擎。
Meta可以看做是VR頭顯市場(chǎng)的領(lǐng)導者，盡管Quest 2還不是一個(gè)開(kāi)放的生態(tài)，但Meta在元宇宙領(lǐng)域的探索是領(lǐng)先的。
Oculus平臺實(shí)際上相當開(kāi)放，除了官方應用外，它還支持本地下載安裝/側載，并且不需要中央身份系統，應用購買(mǎi)支付也可以在第三方平臺進(jìn)行。值得注意的是，Oculus幾乎是唯一使用開(kāi)放標準渲染集合（WebGL、OpenGL、WebXR）的主流游戲主機。這很重要，因為幾乎沒(méi)有其他品牌這樣做。即使是索尼，也僅在PS3上做到對開(kāi)放標準的支持。
不管在游戲領(lǐng)域還是在B端，通用的標準和互操作性已經(jīng)在逐漸形成。不過(guò)，目前Unreal等游戲引擎也在企業(yè)及仿真場(chǎng)景（比如醫療保健、軍事、教育、汽車(chē)等）得到應用，盡管目前還處于早期嘗試階段，未來(lái)隨著(zhù)保真性、復雜性越來(lái)越好，游戲引擎也可以在企業(yè)級元宇宙市場(chǎng)創(chuàng )收。
不過(guò)，元宇宙不是一定非要在A(yíng)R/VR平臺發(fā)生，它可以有多種表達方式。Meta研發(fā)AR/VR頭顯，不僅是為了與蘋(píng)果競爭，更重要的是擺脫蘋(píng)果、谷歌的限制。尤其是在未來(lái)元宇宙領(lǐng)域，如果Meta不搶灘AR/VR，那么在移動(dòng)端、PC端打造元宇宙的優(yōu)勢將落后蘋(píng)果、谷歌。
另一方面，元宇宙技術(shù)在工業(yè)領(lǐng)域的應用，也反映出這項技術(shù)的發(fā)展。目前，AR/VR、元宇宙方案在工業(yè)領(lǐng)域的交付時(shí)間較長(cháng)，說(shuō)服企業(yè)采用這些新技術(shù)也需要時(shí)間。當企業(yè)看到了新技術(shù)對于工作效率、信息共享的優(yōu)勢，不得不部署元宇宙相關(guān)的技術(shù)，并與其他合作伙伴分享時(shí)，將有望看到元宇宙在工業(yè)領(lǐng)域的高速發(fā)展。
評論