還能這么玩?蘋果MR頭顯玩法大揭秘。
蘋果MR頭顯要來了——緊跟而來的,會是MR內(nèi)容生態(tài)爆發(fā)嗎?8K顯示屏、64顆攝像頭、雙芯片設(shè)計(jì)......除了這些耳熟能詳?shù)奶O果MR頭顯硬件爆料信息外,近日彭博社和科技媒體The Information接連爆料蘋果在MR內(nèi)容生態(tài)的布局,并且揭露了其多個(gè)內(nèi)容“殺手锏”。據(jù)悉,蘋果MR內(nèi)容開發(fā)項(xiàng)目主要由?個(gè)內(nèi)部代號為Z50的秘密團(tuán)隊(duì)承擔(dān),該團(tuán)隊(duì)大約有幾十人,其員工主要來?視頻、游戲等?業(yè)。并且,蘋果還在打造一款內(nèi)容開發(fā)工具,希望讓不懂編程的人也能通過Siri語音助手,構(gòu)建自己的MR軟件,并上線App Store。
此外,據(jù)知名蘋果記者馬克·古曼(Mark Gurman)透露,蘋果不但將MR頭顯稱為“Reality Pro”,定價(jià)約為3000美元,而且還訂下了一百萬銷量的目標(biāo)。作為消費(fèi)電子行業(yè)的領(lǐng)頭羊之一,蘋果常?!爸匦露x”一款產(chǎn)品。蘋果將MR頭顯定價(jià)3000美元的底氣從何而來?蘋果將如何補(bǔ)上MR頭顯內(nèi)容的不足,令其在“元宇宙”賽道中能夠脫穎而出?蘋果又將如何達(dá)成百萬銷量目標(biāo)?從最新爆料中,我們挖到了蘋果MR頭顯除硬件參數(shù)之外,又一大秘密武器:MR內(nèi)容生態(tài)布局。在這里,蘋果將用一些新的玩法和技術(shù)創(chuàng)新,試圖重新帶動(dòng)整個(gè)VR/AR行業(yè)。
01.打造“空氣鍵盤”?蘋果MR頭顯四大功能秀翻全場
在蘋果MR頭顯登場之前,市面上已有不少頭顯類產(chǎn)品嶄露頭角。這其中有拿下千萬臺出貨量的Quest 2,有針對高端市場的Quest Pro,更不用提國內(nèi)PICO 4、奇遇MIX等各類新品頭顯接連亮相。這意味著如果要和現(xiàn)有的頭顯產(chǎn)品拉開差距,蘋果勢必要打出自己的產(chǎn)品特色,又或是拿出更好的體驗(yàn)吸引用戶。
近期的爆料信息,正好揭曉了蘋果MR頭顯的四大看點(diǎn):一鍵切換VR/AR模式、眼動(dòng)追蹤及手部追蹤功能、視頻會議功能以及作為外接生產(chǎn)力工具。
1、一鍵切換VR/AR模式:簡潔操作、平滑切換
據(jù)知情人士透露,蘋果MR頭顯將會有兩種模式:完全沉浸在虛擬世界(VR模式)和將虛擬世界疊加到現(xiàn)實(shí)世界兩種模式(AR模式)。而用戶想要切換從VR模式切換到AR模式時(shí),只需要“轉(zhuǎn)動(dòng)”特定按鍵,沉浸式的數(shù)字世界將會逐漸淡出,用戶將會逐漸被真實(shí)環(huán)境包圍,就像轉(zhuǎn)動(dòng)手表表冠按鍵一樣。此前,蘋果分析師郭明錤曾在推特上分析該功能將成為蘋果MR頭顯的關(guān)鍵亮點(diǎn)之一。他認(rèn)為一個(gè)真正的MR頭顯不但能支持AR和VR的硬件,而且還應(yīng)該支持整合AR和VR兩種模式,并可以在兩個(gè)不同的場景中順利切換。
▲郭明錤推特原文
同時(shí),他也說道:“可能很多人都比較難想象在AR和VR之間的平滑切換能提供什么樣的體驗(yàn),因此在AR和VR之間干凈、簡潔的切換可能是蘋果頭顯的關(guān)鍵賣點(diǎn)之一。”來自彭博社的多位消息人士也證實(shí)了這一點(diǎn),提到蘋果同樣希望該功能成為該產(chǎn)品的一個(gè)亮點(diǎn)。但這能否成為蘋果MR頭顯的“殺手锏”功能嗎?這可能需要看蘋果在此基礎(chǔ)上還存在哪些其他的新玩法。畢竟,目前市面上多數(shù)新品頭顯都能夠通過RGB攝像頭與SLAM的配合完成彩色透視功能,也就是AR模式下的顯示場景。像是剛剛發(fā)布的奇遇MIX可以通過雙目RGB透視方案,實(shí)現(xiàn)了一鍵切換VR/AR場景。如果說蘋果僅是簡單地完成了一鍵切換VR/AR場景,切換方式從現(xiàn)有的虛擬按鍵改成了物理按鍵,可能并不能為蘋果的MR頭顯帶來太大的優(yōu)勢。但如果正如爆料所說,蘋果能夠通過滾動(dòng)按鍵,調(diào)整數(shù)字信息逐漸淡出視野,更好地與現(xiàn)實(shí)世界直接結(jié)合,或許能夠?yàn)镸R內(nèi)容交互提供更多地空間。
2、眼動(dòng)、手動(dòng)追蹤功能:突破性交互方式或成關(guān)鍵
彭博社認(rèn)為蘋果MR頭顯的眼動(dòng)追蹤功能和手動(dòng)追蹤功能可以與競爭對手的產(chǎn)品拉開差距。據(jù)介紹,蘋果MR頭顯將會有通過外部攝像頭追蹤手部定位,以及通過內(nèi)部傳感器讀取眼睛的相關(guān)數(shù)據(jù)。用戶可以通過眼動(dòng)交互來選擇某個(gè)按鈕、應(yīng)用程序或者是列表項(xiàng)目,然后通過拇指和食指捏在一起的動(dòng)作激活某個(gè)特定的任務(wù)。眼動(dòng)追蹤和手部追蹤確實(shí)是近年來MR頭顯新品的重要功能亮點(diǎn)之一,各大頭顯廠商也在此方向上做出不少探索。從目前行業(yè)情況來看,盡管硬件已經(jīng)開始支持眼動(dòng)追蹤和手部追蹤功能,但其具體應(yīng)用還少有動(dòng)作。
但不要忘記,蘋果一向喜歡打造一個(gè)突破性的交互界面,使其產(chǎn)品和競爭對手拉開差距。在iPod時(shí)代,是點(diǎn)擊輪;在iPhone和iPad時(shí)代是多點(diǎn)觸控;在Apple Watch時(shí)代是數(shù)字皇冠(Digital Crown)。而在MR頭顯產(chǎn)品上,則很有可能是眼動(dòng)交互或者手部交互。
目前,蘋果已經(jīng)有至少3項(xiàng)專利涉及到眼動(dòng)追蹤技術(shù),比如說通過3顆眼動(dòng)攝像頭完成眼動(dòng)分析、如何處理眼動(dòng)追蹤中的數(shù)據(jù)過濾等。同時(shí),蘋果也有多項(xiàng)專利探索智能戒指、手指傳感器、裸手交互等方向??雌饋?,蘋果已經(jīng)在交互領(lǐng)域用專利搭起自己的技術(shù)護(hù)城河,這也側(cè)面印證了蘋果在新的交互領(lǐng)域頗下功夫。
3、視頻會議功能:用戶將擁有全身渲染
還記得當(dāng)Quest Pro發(fā)布時(shí),大家都對小扎“長腿”了頗感驚喜。但隨后Meta卻表示該功能仍處在研發(fā)階段,尚未上線。而這次蘋果真的要帶著“長腿”的虛擬人形象來了。
據(jù)彭博社介紹,蘋果將重點(diǎn)打造基于FaceTime的高級視頻會議功能。頭顯內(nèi)的FaceTime軟件將在虛擬世界中逼真地渲染用戶的面部和全身。用戶將會感覺自己和其同伴都處在同一個(gè)“房間”。這可能比只有”上半身”或者頭部形象的Meta的Horizon平臺要更先一步。當(dāng)然,蘋果也考慮到全身渲染所需要的數(shù)據(jù)處理能力,因此全身渲染功能僅在一對一視頻聊天中所支持。如果要是多人進(jìn)行FaceTime通話,其他用戶仍以圖標(biāo)或者M(jìn)emoji(Apple的自定義表情符號)的形象出現(xiàn)。
4、生產(chǎn)力工具:作為Mac外接顯示器,或打造“空氣鍵盤”
外媒此前曾爆料,蘋果一直希望將這款MR頭顯打造成工作頭顯,并且希望開發(fā)者成為其主要用戶群體。因此,蘋果MR頭顯成為生產(chǎn)力工具也成為其亮點(diǎn)之一。
據(jù)悉,蘋果MR頭顯不但能夠作為連接Mac的外部顯示器,被當(dāng)作“大號”的iPhone和iPad一樣使用,而且還能在用戶戴上頭顯之后,使用觸控板或者鼠標(biāo)、物理按鍵控制設(shè)備。盡管目前不少頭顯同樣能支持無線投屏顯示,又或是通過串流方式實(shí)現(xiàn)擴(kuò)屏,但是蘋果MR頭顯以數(shù)據(jù)線的方式連接設(shè)備,并能和其他物理鍵盤等配件產(chǎn)生聯(lián)動(dòng),也是其亮點(diǎn)之一。
也因此,當(dāng)用戶需要輸入某些文本信息時(shí),蘋果MR頭顯至少支持語音輸入和按鍵輸入兩種輸入方式。語音輸入時(shí),設(shè)備將直接識別相關(guān)文本信息、借助iPhone、Mac或iPad等第三方設(shè)備的鍵盤,通過物理按鍵輸入文本信息。不僅如此,蘋果還在開發(fā)“空氣鍵盤”,讓用戶可以用手在半空中打字。但據(jù)悉,該功能不會在蘋果首次發(fā)布頭顯時(shí)上線。此前,Meta也曾展示在該方向嘗試探索??梢钥闯觯壳疤O果MR頭顯在顯示、交互、用途以及具體應(yīng)用上均做出了相關(guān)新的嘗試。盡管這其中不少功能此前業(yè)內(nèi)的MR頭顯都曾涉及,但是蘋果在此基礎(chǔ)上又增添了一些不同的思路,創(chuàng)造了新的玩法。
02.主攻教育、健康等四大場景,AppleTV+團(tuán)隊(duì)或成內(nèi)容研發(fā)主力
當(dāng)硬件上難以拉開明顯差距時(shí),內(nèi)容則正為了產(chǎn)品制勝的關(guān)鍵要素之一。除了硬件之外,蘋果已經(jīng)在健康、教育、游戲、視聽四大場景對其MR內(nèi)容有所布局。而打造這些內(nèi)容的則是一個(gè)秘密團(tuán)隊(duì)。據(jù)五位知情人士透露,蘋果自己的內(nèi)容團(tuán)隊(duì)由一個(gè)代號為Z50的團(tuán)隊(duì)研發(fā),規(guī)模約為幾十人,其主要辦公地點(diǎn)實(shí)在加利佛尼亞州卡爾弗城一座建筑內(nèi)。該團(tuán)隊(duì)成員多數(shù)都是來自視頻、游戲等領(lǐng)域,其主要任務(wù)為根據(jù)自身過去的流媒體服務(wù)Apple TV+中的經(jīng)驗(yàn),為MR頭顯打造內(nèi)容。
首先是健康場景。一位熟悉蘋果MR頭顯內(nèi)容策略的消息人士透露,蘋果的高管一直強(qiáng)調(diào)蘋果在健康場景發(fā)力,并提及他們正在開發(fā)有助于冥想和鍛煉的AR應(yīng)用程序。比如說早期蘋果曾開發(fā)過一個(gè)讓用戶在充滿禪意的花園中打坐的軟件。其次在教育領(lǐng)域,蘋果則希望用戶可以通過MR頭顯打造沉浸式MR閱讀。一位前蘋果高管希望用戶可以通過瀏覽書籍,讓用戶在看書的過程中,能夠體驗(yàn)到奇幻的環(huán)境與現(xiàn)實(shí)世界融為一體的感受。2021年11月,蘋果曾公開發(fā)布了一款應(yīng)用程序。該程序是蘋果Apple TV+ 系列電視劇“For All Mankind”的衍生產(chǎn)品,可以讓劇迷們直接參與到一些字幕的制作,或者直接與劇中的一些物品,如老舊的Apple II電腦等物體進(jìn)行交互。這樣的方式可以讓用戶如同置身于電視劇的場景中,親眼見證故事的發(fā)展。
再次,視聽領(lǐng)域也是蘋果MR頭顯的核心內(nèi)容之一。蘋果將為MR頭顯打造專用的視頻觀看功能,可以讓觀眾處于一個(gè)新的觀看環(huán)境,如沙漠或者太空場景中觀看視頻。不過,該類場景構(gòu)建早已在現(xiàn)有的頭顯產(chǎn)品中上線。
音頻方面,用戶通過佩戴AirPods,可以獲得完整的空間音頻體驗(yàn),感受環(huán)繞立體聲。但這是否意味著僅通過佩戴AirPods,用戶才能獲得空間音頻體驗(yàn),我們尚不明晰。在內(nèi)容上,蘋果已經(jīng)與包括華特迪士尼公司(Walt Disney)和杜比實(shí)驗(yàn)室(Dolby Laboratories)在內(nèi)的大約六家合作伙伴討論了為該平臺開發(fā)MR內(nèi)容相關(guān)事宜。豐富的內(nèi)容加持,或成為蘋果在視聽領(lǐng)域制勝的關(guān)鍵。
最后,游戲一直是蘋果鮮少涉及的領(lǐng)域,在MR頭顯上也不例外。蘋果已經(jīng)創(chuàng)建了自己的底層引擎為MR游戲提供支持,但游戲內(nèi)容仍然是交付給第三方開發(fā)。在內(nèi)容方面,蘋果高管一直秉持著一個(gè)觀點(diǎn),蘋果將專注于AR。他們希望將數(shù)字信息帶入現(xiàn)實(shí),像是將Apple TV+的內(nèi)容遷移到頭顯內(nèi)。Apple TV+已經(jīng)在短短時(shí)間內(nèi)迅速成為了蘋果的重要項(xiàng)目之一,蘋果此前積累的內(nèi)容優(yōu)勢也在其推出新的產(chǎn)品品類時(shí),從研發(fā)硬件到內(nèi)容支持等各方面均帶來不小的助力。
03.讓Siri幫你做AR軟件,蘋果試圖降低內(nèi)容準(zhǔn)入門檻
如果僅僅只有蘋果自己打造的MR內(nèi)容,是遠(yuǎn)遠(yuǎn)不能夠滿足用戶豐富且多樣內(nèi)容需求的。這也是MR頭顯目前在內(nèi)容領(lǐng)域的不足之處——應(yīng)用數(shù)量太少,內(nèi)容難以吸引更多的用戶。但現(xiàn)有的MR內(nèi)容開發(fā)難度較高,十分具有挑戰(zhàn)性,尤其是為AR模式開發(fā)相關(guān)軟件。因?yàn)閂R模式下,開發(fā)者僅需要打造一個(gè)完整的虛擬世界。而在AR模式中,虛擬對象將要附在現(xiàn)實(shí)世界上,用戶突然運(yùn)動(dòng)或者現(xiàn)實(shí)世界和虛擬世界之間沒有精準(zhǔn)覆蓋,都會破壞用戶體驗(yàn)。針對這些難題,蘋果正在打造了一款內(nèi)容開發(fā)工具,可以讓用戶輕松構(gòu)建自己的AR軟件,并能夠上線App Store,提供給他人下載。
該軟件可以幫助用戶構(gòu)建一個(gè)新的應(yīng)用程序,比如說讓虛擬動(dòng)物在現(xiàn)實(shí)世界的房間里開始移動(dòng),還可以圍繞在部分現(xiàn)實(shí)物體旁。借助該軟件,用戶無需從頭開始設(shè)計(jì)動(dòng)物模型,也無需計(jì)算該動(dòng)物將如何在有障礙物的3D空間中移動(dòng)。一位前蘋果工程師將這項(xiàng)內(nèi)容創(chuàng)建工具比作“我的世界”和“Roblox”兩款游戲。
這些游戲中,用戶可以通過簡單的界面輕松構(gòu)建自己的3D世界和對象,與Meta的游戲創(chuàng)建應(yīng)用程序Horizon Worlds相類似。The Information透露,該內(nèi)容開發(fā)工具所涉及的技術(shù)是從蘋果2017年收購蒙特利爾初創(chuàng)公司Fabric Software時(shí)繼承的。在收購Fabric Software不久后,蘋果就發(fā)布了視頻游戲引擎Fabric Engine。開發(fā)人員通過該引擎使用可視化編程系統(tǒng)來操縱數(shù)字對象、角色和環(huán)境的外觀。這意味著他們不需要使用計(jì)算機(jī)代碼,可以大量節(jié)省構(gòu)建計(jì)算機(jī)生成圖像的時(shí)間和金錢。該內(nèi)容創(chuàng)作軟件將主要面向軟件開發(fā)人員,蘋果同樣希望消費(fèi)者也可以使用它,就像其Final Cut Pro視頻編輯工具。
據(jù)三位知情人士透露,F(xiàn)abric Software的聯(lián)合創(chuàng)始人之一彼得·錫安(Peter Zion)在公司被收購后留在了蘋果公司,目前正在領(lǐng)導(dǎo)該內(nèi)容開發(fā)工具的項(xiàng)目。有關(guān)該項(xiàng)目的最新進(jìn)展目前尚不知曉,但有部分人透露他們最近看到了一些演示。他們提到如果項(xiàng)目研發(fā)進(jìn)度落后,那么該軟件可能會推遲研發(fā)。除了Z50團(tuán)隊(duì),蘋果還有一個(gè)團(tuán)隊(duì),主要攻克“如何掃描現(xiàn)實(shí)世界的物體并且將其以3D的形式導(dǎo)入到頭顯中”。這一技術(shù)將為蘋果及其用戶節(jié)省一定的時(shí)間和金錢。這樣一來,蘋果可以邀請數(shù)字藝術(shù)家來構(gòu)建龐大的虛擬對象數(shù)據(jù)庫。此前,蘋果從2017年的ARKit開始,就曾在AR應(yīng)用程序開發(fā)方向中做出不少探索。
2021年,蘋果還曾宣布推出Object Capture,根據(jù)iPhone或iPad拍攝的照片自動(dòng)構(gòu)建物體的3D模型。2022年,蘋果還推出RoomPlan,它使用新款iPhone和iPad的攝像頭和激光雷達(dá)傳感器掃描并生成房間的虛擬平面圖。而這些打造MR內(nèi)容開發(fā)技術(shù)團(tuán)隊(duì)背后,是蘋果過去多年時(shí)間里多次引進(jìn)技術(shù)人才的成果。
據(jù)不完全統(tǒng)計(jì),自2015年以來,蘋果已經(jīng)在過去7年時(shí)間里收購了超過7家創(chuàng)企,為其MR內(nèi)容服務(wù)。2015年,蘋果收購了位于慕尼黑的Metaio,此前該公司主要為AR應(yīng)用程序制作工具。同年,蘋果還收購了專門從事面部動(dòng)畫和動(dòng)作捕捉的Faceshift。2017年,蘋果收購的初創(chuàng)公司Fabric Software,也正是目前研發(fā)內(nèi)容開發(fā)工具團(tuán)隊(duì)的前身。2020年,蘋果收購了兩家位于南加州的初創(chuàng)公司,分別是提供VR體育直播的NextVR和提供VR視頻會議的Spaces。
▲蘋果歷年收購涉及MR內(nèi)容的初創(chuàng)企業(yè)名單(不完全統(tǒng)計(jì))
從這些收購歷史中可以看出,蘋果從未放棄在AR內(nèi)容領(lǐng)域不斷擴(kuò)張,不斷汲取優(yōu)秀的技術(shù)人才,這也讓大家對蘋果的MR內(nèi)容更加期待。
04.定下百萬銷量目標(biāo),蘋果MR頭顯將于2月開始生產(chǎn)
隨著蘋果MR頭顯發(fā)布在即,越來越多有關(guān)蘋果MR頭顯“Reality Pro”的消息浮出水面。據(jù)知情人士爆料,今年2月,蘋果MR頭顯將在中國開始生產(chǎn);6月,蘋果將在WWDC全球開發(fā)者大會上宣布該產(chǎn)品,然后在今年晚些時(shí)候發(fā)布該產(chǎn)品。他還透露到蘋果可能會先在美國推出該產(chǎn)品。對于這款頭顯,蘋果持有較高的期待。據(jù)悉,蘋果將第一年的MR頭顯出貨量定在100萬臺。
盡管相對于每年銷量超2億臺的iPhone來說,其規(guī)模還尚小,但對一款售價(jià)約3000美元、已經(jīng)成為頭顯類產(chǎn)品價(jià)格天花板的新設(shè)備來說,完成這樣的銷售目標(biāo),仍然是不小的挑戰(zhàn)。畢竟,“Reality Pro”的競爭產(chǎn)品Meta?Quest?Pro,在發(fā)布三個(gè)月時(shí)間后,就迅速調(diào)整了產(chǎn)品售價(jià),從1500美元(約人民幣13000元)降至1100美元(約人民幣7790元),售價(jià)降低近三分之一。曾有調(diào)研機(jī)構(gòu)預(yù)估,Meta Quest Pro在2022年,也就是三個(gè)月時(shí)間內(nèi),出貨量不超過25萬臺。
在此行業(yè)背景下,蘋果想要發(fā)布一款約人民幣2萬元的頭顯新品,以比此前Meta定價(jià)約人民幣13000元的Quest Pro高出近一倍的價(jià)格,還期待達(dá)到百萬臺的銷量,這意味著蘋果就需要給消費(fèi)者帶來一款足夠驚艷的產(chǎn)品。為此,蘋果也需要用自己的方式解答一些行業(yè)共同的難題,比如說如何處理散熱。據(jù)爆料,蘋果將通過安裝冷風(fēng)扇,解決頭顯散熱難題,就像部分高端Mac電腦一樣。此外,蘋果將采用分體式設(shè)計(jì),將頭顯的電池從頭顯上轉(zhuǎn)移至用戶的口袋里,用一根數(shù)據(jù)線連接頭顯和電池。消息人士透露,這個(gè)電池大概外觀會像兩個(gè)iPhone 14 Pro Max堆疊在一起的樣子,一塊電池組的續(xù)航時(shí)間大約是2個(gè)小時(shí),與目前市場上大多數(shù)的頭顯續(xù)航時(shí)間相差無幾。不過,距離蘋果的MR頭顯發(fā)布還有幾個(gè)月時(shí)間,蘋果還可能仍然對部分功能和設(shè)計(jì)做出調(diào)整。此外,有消息稱,蘋果已經(jīng)在開發(fā)更便宜版本的MR頭顯,發(fā)布價(jià)格將為1500美元左右,將于2024年底或2025年初發(fā)布。蘋果發(fā)言人對此次爆料信息均不予置評。
05.結(jié)語:內(nèi)容或成蘋果MR頭顯制勝關(guān)鍵
蘋果MR頭顯,是蘋果投入了千人團(tuán)隊(duì),研發(fā)近7年左右的新項(xiàng)目,這也是蘋果自2015年發(fā)布智能手表以來,打造的第一個(gè)主要新產(chǎn)品系列,更有人稱其將成為“庫克時(shí)代”的標(biāo)志。除了硬件參數(shù)一直備受矚目,蘋果在MR內(nèi)容生態(tài)上的布局也初露端倪。教育、視聽、游戲、健康四大場景成為了蘋果主攻的四大內(nèi)容場景,蘋果也先后在此領(lǐng)域展開不少布局,Apple TV+團(tuán)隊(duì)在其中承擔(dān)了主要力量。從現(xiàn)有的產(chǎn)品特性來看,蘋果MR頭顯能夠一鍵切換VR/AR模式,或成為其最大的看點(diǎn)之一。而像眼動(dòng)追蹤、手部交互、外接設(shè)備等功能亮點(diǎn),蘋果早已不是先行者。不過在創(chuàng)新的加持下,蘋果還能夠帶來哪些不一樣的體驗(yàn),我們也將持續(xù)關(guān)注。
編譯?|??徐珊
編輯?|??云鵬