文/ VR陀螺 萬裏
4月23日，Meta宣布開放Quest系統Meta Horizon OS，華碩、聯想已經與Meta達成合作，未來將會推出基于Meta Horizon OS的MR頭顯産品。
這對于VR/AR從業者而言無疑是一項重磅信息，也有不少人好奇，Meta Horizon OS究竟是處于一個什麽樣的水平？它與谷歌即將發布的系統XROS相比是否具備足夠的競爭力？
本文將複盤近期Meta頭顯的系統更新，並進一步細化闡述Meta的操作系統究竟強在哪裏。
交互：無燈環手柄推出，手勢技術處于領先地位率先搭載無燈環手柄目前絕大多數頭顯仍以手柄交互爲主，在這其中，紅外追蹤方案又是絕對的主流。
現如今，很多頭顯産品的手柄仍然保留了用于放置紅外傳感器的追蹤環，而Quest 3的手柄（Touch Plus）則率先實現了無追蹤燈環的手柄解決方案。
實現原理方面，Touch Plus將多顆紅外燈珠隱藏在手柄的黑色面板之內，並在靠近無名指和小拇指握持的區域額外新增一枚燈珠，系統借助LED、IMU數據以及AI算法，便能准確檢測手柄所在的位置。
Quest 3手柄，圖源：Meta
手柄去除燈環，好處在于能讓手柄變得更爲緊湊，並且操作時能進一步避免因手柄體積過大而發生的碰撞問題。
此外，Touch Plus還引入了二級觸發器的概念：手指按下按鍵有一個反饋，如果用戶繼續按壓，系統則會識別爲另一種力度，這能用于構建更多精細的交互場景，比如識別握持雞蛋、捏碎雞蛋兩種不同動作。
圖源：Meta
對于其他廠商而言，去年9月PICO也曾發布了一個無追蹤燈環手柄解決方案，並表示新手柄整體減輕了15g，高度降低了50%，猜測這套手柄方案將會出現在PICO今年所發布的頭顯新品當中。
右爲網上曝出的PICO新手柄，圖源：網絡
值得一提的是，2022年所發布的Quest Pro的手柄（Touch Pro）同樣沒有配備燈環，不過它采取的是Inside-Out技術，手柄通過內置的攝像頭、IMU等傳感器實現自追蹤。
Inside-Out手柄優勢在于可以進一步減少頭顯攝像頭覆蓋不到的操作盲區，不過代價是售價高昂，一對Touch Pro手柄售價高達300美元，它並不算一項經濟型技術解決方案，因而沒有被推廣開來。
Quest Pro手柄，圖源：網絡
手勢深耕多年，手勢→direct touch→多模態交互早在2019年底，Meta便在v12系統測試版中推出了手勢追蹤功能，頭顯僅憑自身的四顆灰度攝像頭便能檢測用戶的手部動作進而實現相應的交互。
去年2月，在v50系統版本中，Meta在裸手交互的基礎之上進一步引入了直接觸摸（Direct Touch）功能，它允許用戶在主頁、設置欄、浏覽器等頁面實現用手指點擊、滑動等操作，體驗非常類似于平板電腦設備。
當然Vision Pro也配有與Meta Quest類似的解決方案：遠處界面欄通過手勢+眼睛交互，近處界面如輸入密碼、敲擊鍵盤等則可以通過直接觸摸實現。
圖源：Meta
去年7月所發布的Horizon OS v56系統版本進一步集成手勢識別Hands 2.2套件，在日常使用過程中，手勢識別延遲減少了40%，而在快速移動場景中延遲甚至能減少高達75%。這能夠有效提升手勢識別的交互體驗，並爲音遊、拳擊等快節奏遊戲引入手勢功能奠定了基礎。
圖源：Meta
如今隨著v64系統版本的發布，Quest 3又進一步支持了多模態交互能力，即用戶可以同時使用手勢以及手柄進行操作，而早些時候只能二選一。多模態交互能讓用戶在使用頭顯時省去不同交互的切換過程，並覆蓋更多使用場景。
圖源：網絡
雖然相較于Vision Pro的眼+手交互，Quest 3的手柄+手勢交互看起來要遜色不少，不過有外媒測試發現Quest 3的手勢延遲表現甚至要優于Vision Pro。前者約70ms，後者約127ms。
（ 關于手勢時延差異，不排除是爲了照顧不同使用場景所做的考量，Quest 3主要用于遊戲，它對于手勢時延更敏感，爲了降低時延可以舍棄一定准確性。）
手勢交互是Quest系統的一項重要領先能力，作爲對比，至今仍有不少頭顯産品的手勢交互功能還停留在“實驗測試功能”階段。
上爲Vision Pro，下爲Quest 3，圖源：Threads
MR：全彩透視效果出色，進一步實現空間理解能力全彩透視效果已經基本可用現如今，全彩透視功能基本上已經成爲了頭顯産品的標配，Meta旗下共有兩款産品支持全彩透視：Quest Pro以及Quest 3。
無可否認，在消費級頭顯産品中，Vision Pro的全彩透視是標杆級別的存在，相比之下，Quest 3略遜一籌，不過很多方面仍然可圈可點。
Quest 3配備了雙RGB攝像頭以及深度傳感器，透視分辨率可達到18PPD，而VST時延約40ms。
早些時候，陀螺君上手體驗發現Quest 3在透視畫面下基本能夠看清手機屏幕畫面，不過近距離觀察物體時具有明顯的畫面畸變問題。伴隨著近期發布的v64系統版本，Quest 3的VST畫面畸變問題得到了一定程度的改善，並且色彩、曝光、動態範圍等也進一步趨近于真實肉眼所見。如下圖所示，新系統版本的畫面過曝問題有所減輕，手機文本也更利于閱讀。
圖源：Meta
除Quest 3以外，HTC Vive XR Elite、PICO 4等産品同樣支持全彩透視功能，陀螺君主觀體驗認爲，Quest 3的透視效果大體上可以處于中上遊水平，一方面是畫質基本夠用，此外由于深度傳感器的引入，透視畫面的物體比例更協調，不會出現其他頭顯産品所存在的畫面過分拉伸放大的情況。
領先的MR構建能力早些時候，用戶在使用頭顯産品前需要經曆一個設置安全邊界的過程，而Quest系統正試圖一步步淡化這一流程。
Quest 3出來後，系統可實現自動掃描空間並完成三維重建；v60系統中，Meta進一步推出了VPS雲存儲功能，它能上傳已有的空間點雲信息，避免重複掃描；Quest 3支持在透視模式下直接運行網頁等應用......
在Vision Pro的評測中，有不少人抱怨設備缺乏MR功能體驗，實際上，在透視模式下運行APP就是一項典型的MR功能，雖然看似平平無奇，實則頗爲考驗頭顯的處理器性能以及SLAM標定能力，目前仍有很多頭顯産品不支持這一功能特性。
關于MR體驗，Meta曾在v60系統版本中面向開發者推出了Mesh API和Depth API，前者可以讓開發者訪問頭顯掃描的場景網格信息，並基于此構建可信的MR體驗，如虛擬彈珠在桌面上彈跳、防止虛擬物體穿過真實物品等；而Depth API則可以進一步提供深度信息，從而構建更爲逼真的虛實遮擋效果。
基于Mesh API和Depth API的MR效果，圖源：Meta
在最近的v64系統更新中，Quest 3進一步配備了空間理解能力：頭顯掃描環境結束後，會自動爲房間物品打標記，如可以識別門、窗戶、床、桌子、沙發、櫃子、電視等元素，具體可以參考下圖。
當頭顯具備空間理解能力後，它能讓開發者在此基礎之上構建更爲真實的體驗，如准確在桌面放置虛擬棋盤等。
圖源：X
去年Meta Connect大會期間，Meta也預告了Quest 3未來將推出的一項名爲“Augments”的全新功能，未來用戶可以將虛擬時鍾、相冊、虛擬獎章等物體放在家裏面，當用戶戴上頭顯後便能看到這些虛擬裝飾。
總而言之，無論是MR API的開發，又或者是SLAM以及對于環境的理解，Horizon OS均具有不錯的表現。
圖源：網絡
生態：基于AI的全身追蹤，應用商店投入龐大不引入追蹤環的情況下實現Avatar全身追蹤2016年，Meta發布了Oculus Avatars，玩家可以在預設庫裏面進行捏臉以設置不同的Avatar角色，同年Meta面向開發者推出了Oculus Avatars SDK。
近年來，Meta Avatar也在經曆著各種叠代，如新增更多服裝以及配飾、通過AI算法預測用戶肩膀和肘部位置、新增臉部以及眼球追蹤等。
去年V57系統更新中，Quest系統進一步實現了通過頭顯朝下的攝像頭追蹤用戶上半身的運動，此外，系統還能基于AI模型預測用戶下半身的運動姿勢。而作爲對比，很多頭顯産品想要實現該功能則需要額外引入外部追蹤環以實現全身追蹤。
圖源：Meta
除了“捏臉”型Avatar外，Meta團隊還有一個名爲“Codec Avatars”高逼真Avatar項目，該項目最早于2019年對外公布，目前仍處于研究階段，Meta CTO Andrew Bosworth表示它有望在數年後推出。
紮克伯格使用Codec Avatars出鏡，圖源：YouTube
自建應用商店，投入不菲在近些年發展中，Meta絲毫不吝啬于在內容生態方面進行投入，根據不完全統計，Meta累計收購了10家VR獨立工作室。
其中比較知名的有2019年收購《Beat Saber》背後的開發商Beat Games；2023年收購VR健身應用《Supernatural》背後的工作室Within，傳收購價格爲4億美元。
此外，Meta Quest Store近年來還在積極引入各類優質的VR遊戲應用，目前平台上的獨占遊戲有《生化危機4 VR》、《阿斯加德之怒 2》、《刺客信條VR》等。
圖源：Meta
優質內容的引入背後其實也是一筆不菲的開支，這裏有個例子，去年Meta曾試圖在Connect大會期間展示一款名爲《AEI Fitness》的VR健身應用，應用爲獨占，Meta已經爲這款應用支付了數百萬美元。不過最終合作破裂，因爲Meta發現開發者還試圖對接PICO以及蘋果以將應用引入更多平台。
（鑒于Meta在自建內容生態方面投入了巨大精力，因而當Meta宣布開放Meta Horizon OS之後，這部分給人“花錢打水漂”的感覺也是最爲濃烈的。）
再來回顧Meta的應用商店Horizon Store，無可否認它已經是最爲優質的VR內容平台之一，一方面，Meta Quest系列産品出貨量超過了2000萬，用戶基數足夠大；另一方面，VR陀螺數據顯示，應用商店應用數量已經達到615款，商店營收已經超過了20億美元。
Meta Horizon Store，圖源：網絡
其他方面，Horizon OS在內置APP開發方面也投入了不少精力，比較典型的有 Quest的自帶浏覽器Quest Browser，該應用近期多有更新，現已實現了網頁多開、在遊戲運行時打開網頁、引入浏覽器插件、支持WebCPU等功能。
綜合對比來看，Quest Browser的體驗其實也會明顯優于除了Vision Pro Safari以外的絕大多數頭顯自帶浏覽器應用。
圖源：Meta
結語在VR/AR市場，Meta絕對是最堅定的投入者之一。根據Meta財報顯示，其VR/AR背後的部門Reality Labs 2023年虧損達到161.2億美元，並且虧損還在呈現逐年增加趨勢。
不過，Meta對于這麽高的虧損卻似乎不以爲意，今年2月份Meta在年度財報會議上表示，今年Reality Labs的支出還將繼續擴大，原因是用于“AR/VR 領域正在進行的産品開發工作以及我們爲進一步擴大生態系統而進行的投資。”而Meta也曾提到，類似的研發投入可能需要到2030年才能獲得回報。
雖然Meta的高投入有時候會被人指責團隊運作低效而浪費（比如卡馬克），不過，它也的確爲Quest産品打造了較強的壁壘。對于Horizon OS而言，它保持了每月一次的高頻更新，並且在交互、SLAM、生態、MR等方面均可圈可點。
假如以回應文章開篇的話爲閉環，陀螺君認爲Horizon OS具有很強的競爭力，並且對于很多VR硬件廠商而言也具有足夠的吸引力。
參考資料：
Horizon OS各大發行版本
https://www.meta.com/zh-cn/help/quest/articles/whats-new/release-notes/
Quest 3技術亮點解析
https://medium.com/@xreality.zone/breaking-down-the-details-of-meta-quest-3s-upgrades-to-mr-technology-376fac19ddf9
