每臺23個傳感器！蘋果首款頭顯發(fā)布，這些傳感器將迎來新機遇！

今日，或許大家都被蘋果的WWDC23新品發(fā)布會刷屏，除了例行的iOS 17系統(tǒng)和Macbook電腦更新外，最令人期待的“One more thing”當屬蘋果的首款頭顯Vision Pro。

秘密研發(fā)七年、“延期發(fā)布”三次、庫克時代最重磅的創(chuàng)新產(chǎn)品、傳奇設(shè)計師Ive主導的最后一款蘋果硬件......層層buff讓蘋果首款MR頭顯的發(fā)布更添幾分傳奇色彩。

蘋果首款頭顯的介紹已經(jīng)很多，本文主要著眼于蘋果Vision Pro的新型人機交互，以及背后多達23個的感知傳感器。

在蘋果首款頭顯上，我們可以看到這樣一個趨勢：在新的消費電子設(shè)備中，傳感器所占的比例越來越重，顛覆性的人機交互依賴于傳感器的實現(xiàn)。

23個傳感器！眼動跟蹤+面部跟蹤+虹膜識別+手勢控制，蘋果首款頭顯Vision Pro將帶動這些賽道！

北京時間6月6日凌晨1點的WWDC23蘋果新品發(fā)布會，成為今日早上的熱搜事件，相信大家已經(jīng)被蘋果新品相關(guān)信息刷屏了。

在本次新品發(fā)布會中，最令人矚目的“One more thing”當屬蘋果的首款頭顯Vision Pro。

這款AR設(shè)備被業(yè)界寄予厚望，蘋果曾引爆了智能手機、平板、TWS無線耳機、智能手表等眾多萬億級消費電子新市場，引領(lǐng)了一個又一個浪潮，多年來AR/VR產(chǎn)業(yè)不溫不火，大家都在期待蘋果的入場來引爆市場。

在現(xiàn)場的Vision Pro展示區(qū)人滿為患，據(jù)悉蘋果不允許媒體上手體驗，只能外觀拍攝。從外觀上來看，跟此前爆料的“類似滑雪護目鏡”的設(shè)計類似。

雖然被定位為AR設(shè)備，但在蘋果看來，Vision Pro完全可以看作一個無縫融合現(xiàn)實世界和電子世界的新型計算機。庫克直接放話：正如iPhone帶我們進入移動計算時代，Apple Vision Pro將帶我們進入空間計算時代。

在蘋果官網(wǎng)上，對Vision Pro的定義是——Apple的首個空間計算設(shè)備。

正如之前外界預測，設(shè)備上類似“表冠”的按鈕可進行AR/VR模式切換。外框由特質(zhì)的鋁合金制成。其中囊括了包括顯示屏、攝像頭、傳感器、高性能計算機、高效散熱設(shè)計等組成部分。

眼罩有一系列不同的形狀和尺寸選擇，還打造了能夠通過磁力吸附的定制光學插片。插電時能全天候使用，接到外置高性能電池最長可用兩個小時，分離式電池設(shè)計。

售價方面Vision Pro定價3499美元，約24850人民幣。售價及配置與同期其他AR設(shè)備對比如下圖：

作為一款AR設(shè)備，除了顯示之外，最重要的一點就是人機交互的便捷混和高效。對于Vision Pro的人機交互特性，蘋果在發(fā)布會及官網(wǎng)介紹上，也好不吝嗇詞語。

Apple 今日發(fā)布Apple Vision Pro，一臺革命性的空間計算設(shè)備，將數(shù)字內(nèi)容無縫融入真實世界，讓用戶處在當下并與他人保持連接。Vision Pro打造無邊際畫布，讓app突破傳統(tǒng)顯示屏的限制，為用戶帶來全新的3D交互體驗，以最自然、最直觀的輸入方式來控制——眼睛、雙手與語音。Vision Pro搭載全球首創(chuàng)的空間操作系統(tǒng) visionOS，通過用戶與數(shù)字內(nèi)容互動的模式，讓數(shù)字內(nèi)容如同存在于真實世界。Vision Pro的突破性設(shè)計，搭載超高分辨率顯示系統(tǒng)，將 2300 萬像素置于兩個顯示屏中，定制的 Apple芯片為獨特的雙芯片設(shè)計，確保用戶每次的體驗如同在眼前即時發(fā)生。

從介紹中，我們看到蘋果希望人們以最自然、最直觀的輸入方式來控制Vision Pro，并為此開發(fā)了全球首創(chuàng)的空間操作系統(tǒng) visionOS。

那么，我們怎么通過眼睛、雙手與語音來控制Vision Pro？答案就藏在Vision Pro配置的23顆傳感器中。

據(jù)官網(wǎng)介紹，Vision Pro至少配置了12個攝像頭、5個傳感器和6個麥克風等共計23個傳感器——這甚至比此前分析師們預測的都要多。

這些傳感器分布在整個設(shè)備的外側(cè)、四周以及內(nèi)框處，這樣就可以監(jiān)測手勢、眼球、聲音等各種信息。

人類生物研究表明，人類頭部運動和視野回傳的延遲須低于20ms，否則將產(chǎn)生視覺拖影感從而導致強烈眩暈。為了處理這些傳感器帶來的龐大數(shù)據(jù)，快速輸出圖像反饋，Vision Pro采用了雙芯片設(shè)計——M2主芯片負責計算，此外R1芯片則專門用來處理來自這些23個傳感器輸入的數(shù)據(jù)，據(jù)蘋果介紹，R1可在12 毫秒內(nèi)將新影像串流至顯示器，比眨眼還要快 8 倍，從而避免眩暈的發(fā)生。

Vision Pro的手勢識別

因為手部在于眼睛下方，因此Vision Pro的手勢識別通過位于設(shè)備下方的兩個高分辨率圖像傳感器來識別。

據(jù)悉，該圖像傳感器可以每秒向設(shè)備傳輸超過10 億像素，提供精確的頭部和手部跟蹤以及實時3D映射，之后通過算法分析，讓Vision Pro從各種位置理解用戶的手勢控制指令。

Vision Pro的眼動識別

由LED和紅外攝像頭組成的眼動追蹤系統(tǒng)，可以將不可見光圖案投射到每只眼睛上，能夠判斷用戶當前注視的位置。這使得用戶無需使用手柄控制，只需通過注視來瀏覽應用圖標，輕點選擇，輕掃滾動，或者發(fā)出語音指令即可操控。

蘋果強調(diào)，用戶在顯示屏上觀看的區(qū)域和眼球追蹤數(shù)據(jù)不會與蘋果或網(wǎng)站共享。相反，來自傳感器和攝像頭的數(shù)據(jù)在系統(tǒng)級別進行處理，因此應用程序也不一定需要“看到”用戶或他們的周圍環(huán)境來提供空間體驗。

Vision Pro的虹膜識別與蘋果的第一款 3D 相機

作為一款私人設(shè)備，如iPhone一樣，蘋果也為Vision Pro添加了安全識別功能——Optic ID，Optic ID是一款虹膜識別系統(tǒng)。

據(jù)蘋果介紹，Optic ID使用不可見的LED光源傳感器來分析虹膜，然后將其與存儲在Secure Enclave上的注冊數(shù)據(jù)進行比較，這與Face ID和觸控ID使用的過程類似。并且光學ID數(shù)據(jù)是完全加密的，不會提供給其他應用程序，也不會離開設(shè)備本身，用戶不必擔心生物信息被泄露到網(wǎng)上。

用戶可以將常用、熟悉的App放置在空間中的任何位置，也可以將它們放大、縮小到適合的尺寸，包括從消息線程中把物體拉出來放到真實世界中。比如，Vision Pro 上的 FaceTime 可以在視頻通話時顯示真人大小的人物，還優(yōu)化了查看照片和視頻的體驗。

Vision Pro的Eyesight功能

為了讓你戴上眼鏡后不與現(xiàn)實徹底脫節(jié)，當有人進入視野范圍時，Vision Pro屏幕的透明度會隨時變化。如果用戶處于全 VR 模式，一個發(fā)光的屏幕會遮擋住他們的眼睛，以示他們不想被打擾。

而監(jiān)測是否有人在附近的功能，則來自于設(shè)備前面的圖像傳感器。

中國第一MEMS企業(yè)歌爾股份不是麥克風供應商？Vision Pro供應鏈曝光

此前，中金公司、民生證券等多家分析機構(gòu)，貼出了Vision Pro的供應鏈和BOM零部件成本價格，合計成本大概在1200~1500美金左右。

其中，Vision Pro使用的圖像傳感器來自索尼，傳感器由我國中國臺灣企業(yè)、全球最大砷化鎵晶圓代工服務公司穩(wěn)懋半導體制造，此前穩(wěn)懋半導體一位蘋果iPhone 手機生產(chǎn)ToF 傳感器、LiDAR（激光雷達）等傳感器。

聲學部件由歌爾股份提供，值得注意的是，據(jù)證券商提供的BOM清單顯示，MEMS麥克風由美特聲學供應，美特科技隸屬于中國臺灣美律實業(yè)，2016年立訊精密通過入股取得蘇州美特 51%股權(quán)，從而進入聲學領(lǐng)域。

當然，本清單由證券商根據(jù)渠道信息匯總，Vision Pro的具體零部件可能需要半年后正式上市后拆解才可得知。

結(jié)語

從以上Vision Pro的各種人機交互中，使用到了圖像傳感器（可見光/紅外線）、MEMS麥克風、3D飛行時間(ToF)傳感器、激光雷達，以及用于姿態(tài)檢測的慣性傳感器（陀螺儀、加速度計、IMU)等各種傳感器。

同時，我們可以看到這樣一個趨勢：在新的消費電子設(shè)備中，傳感器所占的比例越來越重，顛覆性的人機交互模式，往往通過新的傳感器來實現(xiàn)。譬如，大家都在期待的柔性傳感器，將為未來帶來更多的人機交互體驗。

隨著蘋果進入AR/VR賽道，后期憑借其強大的開發(fā)能力以及原蘋果軟件生態(tài)數(shù)以千萬級的開發(fā)者，是否會給AR/VR賽道帶來爆炸性的發(fā)展？我們拭目以待。

您對本文有什么看法？歡迎在傳感器專家網(wǎng)本內(nèi)容底下留言討論，或在中國最大的傳感社區(qū)：傳感交流圈中進行交流。