驚艷眾人的Vision Pro居然偷裝了「電腦接口」？

蘋果Vision Pro的橫空出世，一夜之間在全球引來軒然大波。

正如庫克所稱，這將開啟「空間計算」時代，足見 Vision Pro 對所有人來說意義非凡。

(相關資料圖)

戴上Vision Pro，只需要削眉眼，捏合手指，甚至動嘴，「頭號玩家」的科幻便成可能。

但是，蘋果 Vision Pro 的科學幻覺，不僅如此。

頭顯發布后，蘋果前研究員Sterling Crispin在推特考慮自己的工作中，透漏了不少關于Vision Pro的「黑科技」。

最讓人驚艷的是，Vision Pro其實現還暗藏著一種「腦機接口」技術。

不需要芯片植入，它就能預測你的大腦運行為，妙妙的「讀心術」。

此外，蘋果頭顯還能根據個人身體和大腦的數據，來檢測心理狀態。

看起來篇幅不長的推文中，其實際上給了很多人對蘋果 Vision Pro 帶來無限的暢想。

Vision Pro暗藏「腦機接口」？

2018年，Sterling Crispin加入蘋果技術開發小組，承擔“神經技術原型”的研究人員。

3年前，他開始參與與Vision Pro的研究開發工作。

正像他在推特上所說的，自己花費人生10%的時間為Vision Pro的開發做貢獻，這是我做過的最長的一次努力。

Crispin 在蘋果的大部分工作中都受到保護協議的約束，設計廣泛的主題和方法。

但實際上，這些工作，有些蘋果已經申請了專利，可以拿出來講。

Crispin稱，“要使特定預測成為可能，觸及很多技巧，我提到的少數專利對這樣進行了詳細說明。”

最酷的能力就是能夠預測用戶，會在他們現實點擊之前，點擊某東西。

而這項技術背后的主要原理是，每個人在做每件事之前，眼睛會做出來反應，其中部分原因是你預計在你點擊之后會發生一些事情情。

因此，蘋果可以通過算法來監視你的眼睛行事。

并實時重新設計UI，以創建更多這種預期的眼睛響應，從創建個人大腦的生物響應。

這其實就是通過眼睛現實的初級「腦機接口」。

Crispin表示，“這是一項出色的工作，也是我引以為豪的事情。隨時都會接受輸入性腦部技術。”

從中可見，蘋果頭顯利用大量神經科學技術來開發其中的一些關鍵功能，完全可以確定一個人要做的事。

此外，Crispin稱自己的工作很大一部分，滲及通過用戶在沉浸式體驗中的身體和大腦數據，來檢測用戶的心理狀態。

畢竟沉浸在虛擬世界中的人們，真的很需要有一個健康測試的能力。

當你處在混合現實中，或者虛擬現實體驗中，AI模型嘗試預測你是否感到好奇、思維漫游、恐慌、注意力量集中、記起過去的歷史或其他認知狀態。

而這些都可以通過眼動追蹤、腦部電流運動、心臟跳動和節奏、肌肉活動、大腦中的血液密度、血壓、皮膚電流等測量數據來推測。

除了以上提到的技術，預測認知狀態還包括你可能察覺不到的方式。

比如，向你快速閃光視覺效果，或者聲音，然后測量你對這個的反應。

還有一項專利介紹了，如何使用機器學習，以及來自身體和大腦的信號來預測你的注意力、釋放度或學習情況。

然后，頭顯會自動更新虛擬環境，以增強這些狀態。

因此，你可以想像一個適合沉沒式環境，它可以通過改變你在背景中看到和聽到的內容，來幫助每個人學習、工作或釋放松。

Sterling Crispin 介紹的這些和科技，或者我們可能足夠在 VisionPro 未來升級中看到。

背面部分專利一覽

支持發布會上魔幻表演的效果的，是蘋果在默認開發VR設備這么多年中自己的技術積累。

5000多項VR專利，是發布會上驚艷人群產品和基石和護城河。

現在就來看看表演中涉及到的專業技術。

雙手+意念控制一切

市面上幾乎所有的VR設備都配備了手柄。

但蘋果卻膽大的在自己的第一款VR產品中就完全靠手追蹤和眼球追蹤實現了絲滑的控制效果。

后面的技術在2023年獲得了專利。

根據專利圖顯示，圖1是3D操作環境的框架圖，展示了用戶UI實現的整體框架。

圖4是捕捉用戶的手勢輸入的頭顯計算系統的手部跟隨單元的框架圖。

圖5是用戶的眼睛跟蹤數據輸入的頭顯計算系統的眼睛跟蹤單元的框架圖。

這個專利圖例展示了眼球反光輔助眼球追蹤的流程圖。

除了提供和技術的基礎基礎基礎基礎之外基礎之外之外還了了用戶用戶用戶用戶如何如何如何如何在如何如何在如何如何環境環境中環境更有效有效的

強大的手勢追蹤體驗，還源于今年5月，蘋果又獲得了一項專利。

此項專欄描述了頭顯中的攝像頭如何使用深度投影來區分不同的手勢。

圖注：FIG.7E/F/H/I 說明了相對于三維環境，基于用戶在一個系列用戶輸入期間保持的手握力從并且可選擇地面移動虛擬模擬對象或相對于三維環境（以及三維環境中的所有虛擬對象）移動視點維數環境。

一鍵生成3D圖形

還記得之前被全網傳輸的小扎在地平線世界里的3D造型嗎？

蘋果給出的方案也可能部分解析了為什么一樣是做VR設備，蘋果能夠引爆全網，Meta卻讓自己的股票「跌跌不休」。

后面的技術專利也在上個星期被公開出來。

這個專欄描述了未來的 Apple Watch 和 XR 頭顯將允許用戶使用設備上的相機設置自己的 3D 頭像的技術。

在專利的展示意圖中，蘋果展示了未來的 Apple Watch 允許用戶使用 Apple Watch 背面的傳感器拍攝自己的 Face ID 圖像。

該傳感器技術同樣可用于 XR 環境。

無限畫布

蘋果發布會上展示的 Vision Pro 可以將一周的空間作為無限畫布。

用戶不僅可以隨意使用任何APP，而且可以把它調成喜歡的任意寸。

蘋果在2018年就申請了和這個功能相關的專項，這項技術讓未來的XR頭顯提供用戶在3D環境中編輯文檔的功能。

如下圖 Apple 的專利圖所示。

另外一個相關專利是2021年獲得的讓佩戴XR頭顯設備（HMD）的用戶可以查看顯示器（Mac、MacBook或電視機）并根據需要進行虛擬擴展的技術。

收購AR初創公司Mira

其實，從申請多項專利可見，蘋果在AR/VR領域的探索，計劃已久。

最早可以回到2010年，蘋果就收購了來自瑞典的面部識別技術公司Polar Rose。

在Vision Pro推出的后一天，就傳出了蘋果近期收購了Mira。這是一家構建輕量級AR頭顯的初創公司，還為美國軍隊提供服務。

根據Mira首席執行官Ben Taft在Ins上的帖子顯示，作為收購的一部分，蘋果已經聘請了至少11名Mira的員工。為Mira在蘋果的下一篇文章感到興奮。從宿舍到收購的7年旅行。

目前，具體收購金額未知，也不清楚Mira在蘋果的增強現實路線圖中扮演怎樣的角色。

據2名前員工透露，蘋果前設計主管Jony Ive曾一度承擔這家初創公司的顧慮。

Mira于2016年由Ben Taft創作，總部位于洛杉磯，一直在為全球客戶制作AR頭顯，包括任天堂在日本環球影城中的主題公園。

本家初創公司已籌備了約1700萬美元的資金，包括藍熊資金、幸運投資和紅杉資金在內的投資人。

而蘋果在Vision Pro中展示出來的很多技術，也源于一次成功的收購。

比起一些手勢和空間定位的專長，就是通過收購了總位置在蒙特利爾的VRvana獲得的。

頭顯「iPhone時刻」到，還需要5年

蘋果推出的 Vision Pro，預示著它的下一個時代即將到來。

這款頭顯標志著蘋果首創了一個全新的計算平臺，可取現擁有的大部分主要產品。

雖然管iPhone蠶食了iPod，iPad威嚇了Mac。但是，還有哪個蘋果產品類別能同時擊垮前3個主要細分市場。

彭博報道稱，想讓Vision Pro成為iPhone的替代品，至少需要5年的時間。若要成為殺手級產品，可能需要付出更多的時間。

比如今天，Vision Pro售價3499美元，價格高且不說，不能與手機互聯互通，甚至不能打電話。

而設計還是太過重，而且必須隨身安裝一個外置電池組，只有2小時電量，無法長時間使用。

但在接下來的幾年里，蘋果能夠解決這些問題，并推出一款“無法”的設備。

表面來看，Vision Pro看起來就像是一個為有錢人，或者那些對科技新品有無限需求的人而定制的「高價玩具」。

但是，蘋果在WWDC上也竭力表現，這是每個人的設備，從辦公室、到娛樂、視頻、出行等方面。

不過，這并不太可能。

蘋果在 iPhone、MacBook 等產品的更新向世人展示了自身的潛力。

進而，Vision Pro及其更先進的后續產品的發展價值，也將變得更加清晰。

其實還有一點是，Vision Pro并不像iPad或iPhone一樣容易上手。而且每個人戴上頭顯還可能會有沉沒體驗的不適感。

不過，隨著時間的推移，人們便會喜歡這種全新的「空間計算機」，就像戴副眼鏡一樣。

通過Vision Pro，蘋果展示了自己正朝著將計算設備體積縮小到最小、最輕便的未來努力。

但這可能是一條漫長，而崎嶇的道路。

不過，至少在一周的2個小時里，對數百萬果粉來說，這款頭顯讓他們終于見證了Vision Pro的到來。

或者也許有一天，我們可能會戴上 Vision Pro，觀看 WWDC 2030。

編輯/lambor