今日,或許大家都被蘋果的WWDC23新品發(fā)布會(huì)刷屏,除了例行的iOS 17系統(tǒng)和Macbook電腦更新外,最令人期待的“One more thing”當(dāng)屬蘋果的首款頭顯Vision Pro。
秘密研發(fā)七年、“延期發(fā)布”三次、庫(kù)克時(shí)代最重磅的創(chuàng)新產(chǎn)品、傳奇設(shè)計(jì)師Ive主導(dǎo)的最后一款蘋果硬件......層層buff讓蘋果首款MR頭顯的發(fā)布更添幾分傳奇色彩。
蘋果首款頭顯的介紹已經(jīng)很多,本文主要著眼于蘋果Vision Pro的新型人機(jī)交互,以及背后多達(dá)23個(gè)的感知傳感器。
在蘋果首款頭顯上,我們可以看到這樣一個(gè)趨勢(shì):在新的消費(fèi)電子設(shè)備中,傳感器所占的比例越來越重,顛覆性的人機(jī)交互依賴于傳感器的實(shí)現(xiàn)。
23個(gè)傳感器!眼動(dòng)跟蹤+面部跟蹤+虹膜識(shí)別+手勢(shì)控制,蘋果首款頭顯Vision Pro將帶動(dòng)這些賽道!
北京時(shí)間6月6日凌晨1點(diǎn)的WWDC23蘋果新品發(fā)布會(huì),成為今日早上的熱搜事件,相信大家已經(jīng)被蘋果新品相關(guān)信息刷屏了。
在本次新品發(fā)布會(huì)中,最令人矚目的“One more thing”當(dāng)屬蘋果的首款頭顯Vision Pro。
這款A(yù)R設(shè)備被業(yè)界寄予厚望,蘋果曾引爆了智能手機(jī)、平板、TWS無線耳機(jī)、智能手表等眾多萬億級(jí)消費(fèi)電子新市場(chǎng),引領(lǐng)了一個(gè)又一個(gè)浪潮,多年來AR/VR產(chǎn)業(yè)不溫不火,大家都在期待蘋果的入場(chǎng)來引爆市場(chǎng)。
在現(xiàn)場(chǎng)的Vision Pro展示區(qū)人滿為患,據(jù)悉蘋果不允許媒體上手體驗(yàn),只能外觀拍攝。從外觀上來看,跟此前爆料的“類似滑雪護(hù)目鏡”的設(shè)計(jì)類似。
雖然被定位為AR設(shè)備,但在蘋果看來,Vision Pro完全可以看作一個(gè)無縫融合現(xiàn)實(shí)世界和電子世界的新型計(jì)算機(jī)。庫(kù)克直接放話:正如iPhone帶我們進(jìn)入移動(dòng)計(jì)算時(shí)代,Apple Vision Pro將帶我們進(jìn)入空間計(jì)算時(shí)代。
在蘋果官網(wǎng)上,對(duì)Vision Pro的定義是——Apple的首個(gè)空間計(jì)算設(shè)備。
正如之前外界預(yù)測(cè),設(shè)備上類似“表冠”的按鈕可進(jìn)行AR/VR模式切換。外框由特質(zhì)的鋁合金制成。其中囊括了包括顯示屏、攝像頭、傳感器、高性能計(jì)算機(jī)、高效散熱設(shè)計(jì)等組成部分。
眼罩有一系列不同的形狀和尺寸選擇,還打造了能夠通過磁力吸附的定制光學(xué)插片。插電時(shí)能全天候使用,接到外置高性能電池最長(zhǎng)可用兩個(gè)小時(shí),分離式電池設(shè)計(jì)。
售價(jià)方面Vision Pro定價(jià)3499美元,約24850人民幣。售價(jià)及配置與同期其他AR設(shè)備對(duì)比如下圖:
作為一款A(yù)R設(shè)備,除了顯示之外,最重要的一點(diǎn)就是人機(jī)交互的便捷混和高效。對(duì)于Vision Pro的人機(jī)交互特性,蘋果在發(fā)布會(huì)及官網(wǎng)介紹上,也好不吝嗇詞語(yǔ)。
Apple 今日發(fā)布Apple Vision Pro,一臺(tái)革命性的空間計(jì)算設(shè)備,將數(shù)字內(nèi)容無縫融入真實(shí)世界,讓用戶處在當(dāng)下并與他人保持連接。Vision Pro打造無邊際畫布,讓app突破傳統(tǒng)顯示屏的限制,為用戶帶來全新的3D交互體驗(yàn),以最自然、最直觀的輸入方式來控制——眼睛、雙手與語(yǔ)音。Vision Pro搭載全球首創(chuàng)的空間操作系統(tǒng) visionOS,通過用戶與數(shù)字內(nèi)容互動(dòng)的模式,讓數(shù)字內(nèi)容如同存在于真實(shí)世界。Vision Pro的突破性設(shè)計(jì),搭載超高分辨率顯示系統(tǒng),將 2300 萬像素置于兩個(gè)顯示屏中,定制的 Apple芯片為獨(dú)特的雙芯片設(shè)計(jì),確保用戶每次的體驗(yàn)如同在眼前即時(shí)發(fā)生。
從介紹中,我們看到蘋果希望人們以最自然、最直觀的輸入方式來控制Vision Pro,并為此開發(fā)了全球首創(chuàng)的空間操作系統(tǒng) visionOS。
那么,我們?cè)趺赐ㄟ^眼睛、雙手與語(yǔ)音來控制Vision Pro?答案就藏在Vision Pro配置的23顆傳感器中。
據(jù)官網(wǎng)介紹,Vision Pro至少配置了12個(gè)攝像頭、5個(gè)傳感器和6個(gè)麥克風(fēng)等共計(jì)23個(gè)傳感器——這甚至比此前分析師們預(yù)測(cè)的都要多。
這些傳感器分布在整個(gè)設(shè)備的外側(cè)、四周以及內(nèi)框處,這樣就可以監(jiān)測(cè)手勢(shì)、眼球、聲音等各種信息。
人類生物研究表明,人類頭部運(yùn)動(dòng)和視野回傳的延遲須低于20ms,否則將產(chǎn)生視覺拖影感從而導(dǎo)致強(qiáng)烈眩暈。為了處理這些傳感器帶來的龐大數(shù)據(jù),快速輸出圖像反饋,Vision Pro采用了雙芯片設(shè)計(jì)——M2主芯片負(fù)責(zé)計(jì)算,此外R1芯片則專門用來處理來自這些23個(gè)傳感器輸入的數(shù)據(jù),據(jù)蘋果介紹,R1可在12 毫秒內(nèi)將新影像串流至顯示器,比眨眼還要快 8 倍,從而避免眩暈的發(fā)生。
Vision Pro的手勢(shì)識(shí)別
因?yàn)槭植吭谟谘劬ο路?,因此Vision Pro的手勢(shì)識(shí)別通過位于設(shè)備下方的兩個(gè)高分辨率圖像傳感器來識(shí)別。
據(jù)悉,該圖像傳感器可以每秒向設(shè)備傳輸超過10 億像素,提供精確的頭部和手部跟蹤以及實(shí)時(shí)3D映射,之后通過算法分析,讓Vision Pro從各種位置理解用戶的手勢(shì)控制指令。
Vision Pro的眼動(dòng)識(shí)別
由LED和紅外攝像頭組成的眼動(dòng)追蹤系統(tǒng),可以將不可見光圖案投射到每只眼睛上,能夠判斷用戶當(dāng)前注視的位置。這使得用戶無需使用手柄控制,只需通過注視來瀏覽應(yīng)用圖標(biāo),輕點(diǎn)選擇,輕掃滾動(dòng),或者發(fā)出語(yǔ)音指令即可操控。
蘋果強(qiáng)調(diào),用戶在顯示屏上觀看的區(qū)域和眼球追蹤數(shù)據(jù)不會(huì)與蘋果或網(wǎng)站共享。相反,來自傳感器和攝像頭的數(shù)據(jù)在系統(tǒng)級(jí)別進(jìn)行處理,因此應(yīng)用程序也不一定需要“看到”用戶或他們的周圍環(huán)境來提供空間體驗(yàn)。
Vision Pro的虹膜識(shí)別與蘋果的第一款 3D 相機(jī)
作為一款私人設(shè)備,如iPhone一樣,蘋果也為Vision Pro添加了安全識(shí)別功能——Optic ID,Optic ID是一款虹膜識(shí)別系統(tǒng)。
據(jù)蘋果介紹,Optic ID使用不可見的LED光源傳感器來分析虹膜,然后將其與存儲(chǔ)在Secure Enclave上的注冊(cè)數(shù)據(jù)進(jìn)行比較,這與Face ID和觸控ID使用的過程類似。并且光學(xué)ID數(shù)據(jù)是完全加密的,不會(huì)提供給其他應(yīng)用程序,也不會(huì)離開設(shè)備本身,用戶不必?fù)?dān)心生物信息被泄露到網(wǎng)上。
用戶可以將常用、熟悉的App放置在空間中的任何位置,也可以將它們放大、縮小到適合的尺寸,包括從消息線程中把物體拉出來放到真實(shí)世界中。比如,Vision Pro 上的 FaceTime 可以在視頻通話時(shí)顯示真人大小的人物,還優(yōu)化了查看照片和視頻的體驗(yàn)。
Vision Pro的Eyesight功能
為了讓你戴上眼鏡后不與現(xiàn)實(shí)徹底脫節(jié),當(dāng)有人進(jìn)入視野范圍時(shí),Vision Pro屏幕的透明度會(huì)隨時(shí)變化。如果用戶處于全 VR 模式,一個(gè)發(fā)光的屏幕會(huì)遮擋住他們的眼睛,以示他們不想被打擾。
而監(jiān)測(cè)是否有人在附近的功能,則來自于設(shè)備前面的圖像傳感器。
中國(guó)第一MEMS企業(yè)歌爾股份不是麥克風(fēng)供應(yīng)商?Vision Pro供應(yīng)鏈曝光
此前,中金公司、民生證券等多家分析機(jī)構(gòu),貼出了Vision Pro的供應(yīng)鏈和BOM零部件成本價(jià)格,合計(jì)成本大概在1200~1500美金左右。
其中,Vision Pro使用的圖像傳感器來自索尼,傳感器由我國(guó)中國(guó)臺(tái)灣企業(yè)、全球最大砷化鎵晶圓代工服務(wù)公司穩(wěn)懋半導(dǎo)體制造,此前穩(wěn)懋半導(dǎo)體一位蘋果iPhone 手機(jī)生產(chǎn)ToF 傳感器、LiDAR(激光雷達(dá))等傳感器。
聲學(xué)部件由歌爾股份提供,值得注意的是,據(jù)證券商提供的BOM清單顯示,MEMS麥克風(fēng)由美特聲學(xué)供應(yīng),美特科技隸屬于中國(guó)臺(tái)灣美律實(shí)業(yè),2016年立訊精密通過入股取得蘇州美特 51%股權(quán),從而進(jìn)入聲學(xué)領(lǐng)域。
當(dāng)然,本清單由證券商根據(jù)渠道信息匯總,Vision Pro的具體零部件可能需要半年后正式上市后拆解才可得知。
結(jié)語(yǔ)
從以上Vision Pro的各種人機(jī)交互中,使用到了圖像傳感器(可見光/紅外線)、MEMS麥克風(fēng)、3D飛行時(shí)間(ToF)傳感器、激光雷達(dá),以及用于姿態(tài)檢測(cè)的慣性傳感器(陀螺儀、加速度計(jì)、IMU)等各種傳感器。
同時(shí),我們可以看到這樣一個(gè)趨勢(shì):在新的消費(fèi)電子設(shè)備中,傳感器所占的比例越來越重,顛覆性的人機(jī)交互模式,往往通過新的傳感器來實(shí)現(xiàn)。譬如,大家都在期待的柔性傳感器,將為未來帶來更多的人機(jī)交互體驗(yàn)。
隨著蘋果進(jìn)入AR/VR賽道,后期憑借其強(qiáng)大的開發(fā)能力以及原蘋果軟件生態(tài)數(shù)以千萬級(jí)的開發(fā)者,是否會(huì)給AR/VR賽道帶來爆炸性的發(fā)展?我們拭目以待。
您對(duì)本文有什么看法?歡迎在傳感器專家網(wǎng)本內(nèi)容底下留言討論,或在中國(guó)最大的傳感社區(qū):傳感交流圈中進(jìn)行交流。