蘋(píng)果頭顯拆機(jī) 澎湃新聞編輯 趙子易(03:58)
Vision Pro的一小步，是MR（混合現(xiàn)實(shí)）產(chǎn)業(yè)的一大步。
2月2日，隨著首批用戶陸續(xù)拿到Vision Pro，秀出的花式體驗(yàn)以及網(wǎng)絡(luò)上圍觀人群的好奇，未來(lái)虛擬世界和現(xiàn)實(shí)世界的交融多了一絲實(shí)感。
Vision Pro作為蘋(píng)果公司研發(fā)多年的產(chǎn)品，集中了顯示、芯片、交互領(lǐng)域大量的核心技術(shù)，打造出一個(gè)超能力的MR產(chǎn)品。這款產(chǎn)品在諸多技術(shù)上走在前列，蘋(píng)果也盡其所能為消費(fèi)者帶來(lái)更好的體驗(yàn)。
在Vision Pro上市之前，各方對(duì)它從硬件到軟件都有全方位的研究，隨著Vision Pro上市各路拆機(jī)，業(yè)界更是清晰看到了Vision Pro采用的新技術(shù)。如果說(shuō)之前各類VR（虛擬現(xiàn)實(shí)）產(chǎn)品更多是側(cè)重于游戲類的“玩具”，那么Vision Pro有極大可能開(kāi)啟MR作為通用計(jì)算工具的時(shí)代。
Vision Pro主要部件拆機(jī)圖 來(lái)源 iFixit
Vision Pro顯示輸出做到虛擬和現(xiàn)實(shí)的無(wú)縫銜接
Vision Pro在光學(xué)顯示上的技術(shù)突破這次備受關(guān)注，其帶來(lái)的高清晰度可以做到讓視頻或圖片有真實(shí)現(xiàn)場(chǎng)感，從而讓眼睛信以為真，混淆虛擬和現(xiàn)實(shí)世界的邊界。
從拆機(jī)視頻看，為了更好的顯示效果，Vision Pro用了兩塊4K清晰度的Micro OLED屏加上玉晶光電的3P Pancake方案，帶來(lái)了難以置信的銳度和清晰度。
4K是二維顯示的清晰度，如果放在三維顯示領(lǐng)域，虛擬屏幕清晰度也差不多接近于人眼的極限，這在顯示上突破了一個(gè)閾值。
在三維顯示里，分辨率的單位用PPD（Pixels Per Degree），意思是視野的每一度里面有多少像素。
XR天使投資人、貓眼電影創(chuàng)始人、真格基金投資合伙人徐梧表示，Meta Quest2的分辨率是20PPD，就是指每一度里面有20個(gè)像素。20PPD，用戶會(huì)明確分辨出現(xiàn)實(shí)和虛擬世界的差異，再加上機(jī)器性能的限制，一體機(jī)通過(guò)卡通渲染帶給用戶視覺(jué)沖擊也相對(duì)有限，用戶會(huì)覺(jué)得挺有趣，但并不會(huì)很震撼。他對(duì)這個(gè)階段的顯示效果定義為立體感。
“人眼的極限是60PPD。而Vision Pro 是40PPD，一定程度已經(jīng)接近人眼極限。同時(shí)，Vision Pro采用的是OLED屏幕，這意味著更豐富的色彩和亮度。此時(shí)將會(huì)發(fā)生一個(gè)巨大的質(zhì)變，用戶可能無(wú)法區(qū)分現(xiàn)實(shí)和虛擬。”徐梧表示，在40PPD下，虛擬屏幕的顯示質(zhì)量已經(jīng)幾乎相當(dāng)于4K顯示器的效果，這意味著虛擬屏幕頭一次可以和實(shí)體平面顯示器正面PK。
Vision Pro 4K清晰度的Micro OLED顯示屏，兩塊價(jià)格700美元
為了達(dá)到這個(gè)效果，蘋(píng)果也花費(fèi)了巨資。據(jù)第三方評(píng)估，Micro OLED屏價(jià)格昂貴，兩塊屏價(jià)格在700美元，在 Vision Pro的零部件成本中占比超40%，也是最大的成本。Micro OLED屏交給臺(tái)積電代工，索尼公司供應(yīng)材料。
AR眼鏡創(chuàng)業(yè)公司奇點(diǎn)臨近在Vision Pro發(fā)布后就對(duì)其進(jìn)行了全面的技術(shù)評(píng)估。奇點(diǎn)臨近CTO萬(wàn)美君（Paul Wan）接受澎湃新聞?dòng)浾卟稍L時(shí)表示：“蘋(píng)果沉浸式顯示這塊是花了大力氣的，為了更好的效果，雙目4K的沉浸式顯示，是蘋(píng)果耗費(fèi)巨資打造，沉浸感超出目前行業(yè)一大截。”
這次Micro OLED屏相當(dāng)于蘋(píng)果定制的，且良率不高，因此在產(chǎn)能上還有諸多限制。曾有外媒報(bào)道稱，索尼在提供產(chǎn)能上有些吃力，蘋(píng)果曾經(jīng)提出希望提供一百萬(wàn)Micro OLED屏，但索尼表示做不到。
不過(guò)，蘋(píng)果Micro OLED屏走在前面，中國(guó)多家Micro OLED屏供應(yīng)鏈緊跟在后面。京東方、視科技等屏幕供應(yīng)商在技術(shù)上有突破。
PICO也是MR一線大廠，其技術(shù)路線與蘋(píng)果非常接近。PICO OS產(chǎn)品負(fù)責(zé)人馬杰思接受澎湃新聞?dòng)浾卟稍L時(shí)表示，蘋(píng)果通過(guò)Micro OLED屏解決了MR屏幕輸出問(wèn)題，過(guò)去VR產(chǎn)品作為游戲工具是成功的，但作為更通用的工具其顯示質(zhì)量是不過(guò)關(guān)的。
當(dāng)一臺(tái)MR可以帶來(lái)如此高的清晰度，虛擬屏幕融入現(xiàn)實(shí)世界已經(jīng)不那么“違和”，變得“絲滑”，可以達(dá)到亦幻亦真的交融感。
空間建模以及強(qiáng)大芯片處理能力
作為一名CTO， 萬(wàn)美君非常關(guān)注并且推崇這次Vision Pro空間建模這塊的突破。
“空間建模，3D建模這塊以及這個(gè)位置感知蘋(píng)果也是花了大力氣的，主要體現(xiàn)在兩個(gè)方面，空間3D建模及空間定位。”萬(wàn)美君表示，空間位置和環(huán)境感知上這次蘋(píng)果做了非常多的工作。
為了捕捉這些信息，Vision Pro用了整整12個(gè)攝像頭。
“你的攝像頭需要做到軟硬件同步，你的拿到數(shù)據(jù)是完全同一時(shí)刻的，那么拿了這些數(shù)據(jù)需要做拼接，因?yàn)槊總�(gè)攝像頭的畫(huà)幅是有限的，而且需要一個(gè)高幀率的情況下去完成運(yùn)算，至少要保證120幀甚至更高，這為了防止在佩戴時(shí)出現(xiàn)眩暈感，所以這個(gè)對(duì)它的硬件處理芯片提出了更高的要求，這次蘋(píng)果出了R1芯片專門去處理攝像頭相關(guān)的運(yùn)算和定位。”萬(wàn)美君說(shuō)到。
這次Vision Pro用了兩塊蘋(píng)果自研的芯片M2和R1，M2芯片是蘋(píng)果用在筆記本電腦上的芯片，其性能強(qiáng)悍不用多介紹。M2處理器主要負(fù)責(zé)運(yùn)行visionOS，執(zhí)行先進(jìn)的計(jì)算機(jī)視覺(jué)算法等。蘋(píng)果R1協(xié)同處理器則主要負(fù)責(zé)處理來(lái)自12個(gè)攝像頭，5個(gè)其他類型傳感器，6個(gè)麥克風(fēng)的數(shù)據(jù)信號(hào)，加速對(duì)于傳感器數(shù)據(jù)的處理，降低延遲，以保證內(nèi)容呈現(xiàn)實(shí)時(shí)性，并降低主CPU的負(fù)載，降低功耗。
PICO產(chǎn)品經(jīng)理胡熙坤接受澎湃新聞?dòng)浾卟稍L時(shí)也談到了芯片芯片處理能力對(duì)產(chǎn)品性能的重要性。
“這個(gè)芯片它保證了低延時(shí)和低帶寬的運(yùn)行，這其實(shí)是非常重要的一個(gè)指標(biāo)了，蘋(píng)果官方宣稱是12毫秒，那這個(gè)12毫秒你就能夠帶著那個(gè)東西全天使用，并且不妨礙你去做日常生活中其他事情，這個(gè)是非常重要的。”胡熙坤表示，今天Vision Pro帶來(lái)諸多的體驗(yàn)都是蘋(píng)果長(zhǎng)期在消費(fèi)電子領(lǐng)域的積累沉淀，有些技術(shù)當(dāng)初并不是專門為Vision Pro儲(chǔ)備，而且用在其他產(chǎn)品線上，這次拿到了Vision Pro上來(lái)使用。
胡熙坤認(rèn)為，在空間建模這塊其他廠商與蘋(píng)果還有一定距離，這次看了Vision Pro效果后，大家應(yīng)該都會(huì)在這一領(lǐng)域加大力氣去做。
萬(wàn)美君對(duì)其他廠商跟進(jìn)空間建模上展現(xiàn)了自己的樂(lè)觀判斷，“中國(guó)廠商在算法上其實(shí)并不比蘋(píng)果差多少，比如很多自動(dòng)駕駛領(lǐng)域也用了大量類似的技術(shù)。”
扔掉手柄改用手勢(shì)識(shí)別和眼球追蹤
如果說(shuō)這次Vision Pro是帶來(lái)了一場(chǎng)顯示輸出的重大革新，那么輸入端的創(chuàng)新同樣值得稱贊。
以往VR產(chǎn)品的手柄被扔掉了，而是采用了眼球追蹤、手勢(shì)、語(yǔ)音等多種融合式交互方式。由LED和紅外攝像頭組成的眼動(dòng)追蹤系統(tǒng)，可以將不可見(jiàn)光圖案投射到每只眼睛上，能夠判斷用戶當(dāng)前注視的位置。這使得用戶無(wú)需使用手柄控制，只需通過(guò)注視來(lái)瀏覽應(yīng)用圖標(biāo)，輕點(diǎn)選擇，輕掃滾動(dòng)，或者發(fā)出語(yǔ)音指令即可操控。
胡熙坤表示，PICO 4 Pro上也用了眼球追蹤和手勢(shì)識(shí)別技術(shù)，對(duì)技術(shù)方向的認(rèn)定大家都沒(méi)有分歧。
“蘋(píng)果的技術(shù)都是長(zhǎng)期積累的效果，蘋(píng)果2017年收購(gòu)德國(guó)SensoMotoric Instruments（SMI），這次把領(lǐng)先的眼球追蹤技術(shù)儲(chǔ)備給了VR產(chǎn)品線。”胡熙坤表示，PICO也堅(jiān)定看好這一技術(shù)，會(huì)持續(xù)投入。
有些事情交給蘋(píng)果來(lái)說(shuō)更為合適，強(qiáng)大的品牌號(hào)召力加上高凈值用戶，使得蘋(píng)果在推廣新技術(shù)應(yīng)用時(shí)相對(duì)容易。
“手勢(shì)交互這件事情要做得很好，也是要有條件的，其他品牌可能不具備這樣的定價(jià)能力，手勢(shì)交互需要的硬件周邊都相對(duì)較貴。我們更加傾向于用一個(gè)親民的成本去完成一件事情，所以更多以攝像頭算法的迭代，但對(duì)蘋(píng)果來(lái)說(shuō)，不止是算法，它的攝像頭陣列針對(duì)手勢(shì)都做了很多增強(qiáng)的，這導(dǎo)致它成本非常貴。”胡熙坤說(shuō)，蘋(píng)果這樣做把業(yè)界未來(lái)三四年想要的東西提前呈現(xiàn)了出來(lái)。
扔掉手柄的好處是非常明顯，這拓展了MR產(chǎn)品的邊界，從以往主要在特定場(chǎng)景中使用，到現(xiàn)在走出特定場(chǎng)景，到更多日常生活中場(chǎng)景去佩戴和體驗(yàn)。
這幾天，不少用戶分享了花式Vision Pro體驗(yàn)，例如地鐵公交上使用，之所以能夠這樣公眾場(chǎng)所佩戴是因?yàn)楫a(chǎn)品還有另一功能，與虛擬現(xiàn)實(shí)暢游時(shí)隨時(shí)可以回到現(xiàn)實(shí)世界與周邊的人交流。
Vision Pro外屏EyeSight外屏內(nèi)部
一旦有其他人對(duì)你對(duì)視，你瞬間就可以看到對(duì)方，Vision Pro外屏EyeSight顯示屏也看到你的臉和眼睛。當(dāng)然，看到的臉是虛擬的，空間建模虛擬出來(lái)的人臉。
Vision Pro會(huì)通過(guò)內(nèi)部攝像頭和傳感器生成你的人臉，然后VisionOS會(huì)將人臉“切片并插值”，接著渲染在EyeSight顯示屏上，圖像通過(guò)一層透鏡再通過(guò)一層鏡片，最終實(shí)現(xiàn)3D人臉圖像的視覺(jué)效果。
“這就很蘋(píng)果，其他廠商可能不會(huì)這樣做，但蘋(píng)果產(chǎn)品往往為了人性化的體驗(yàn)，去做這些事情。”胡熙坤表示。
胡熙坤表示，對(duì)MR來(lái)說(shuō)，通過(guò)攝像頭VST（視頻透視）而非光學(xué)鏡片來(lái)捕捉外部現(xiàn)實(shí)世界信息這個(gè)技術(shù)方向也是確定的，“我們也看到佩戴Vision Pro的用戶在把球拋向空中接球游戲體驗(yàn)跟現(xiàn)實(shí)世界玩這個(gè)游戲效果差不多，這也意味著通過(guò)攝像頭視頻傳出的時(shí)延是可以接受的。”
在馬杰思看來(lái)，蘋(píng)果Vision Pro完成了輸出、輸入以及交互的重大革新，這也意味著MR產(chǎn)品形態(tài)完成了一次蛻變，躋身通用算力工具的行列，與筆記本電腦、手機(jī)、平板電腦等相提并論，可以成為人們的生產(chǎn)力工具，當(dāng)然這是一個(gè)長(zhǎng)期的過(guò)程，并不是說(shuō)馬上就能完成這一蛻變。
當(dāng)然，所有的硬件實(shí)現(xiàn)都是為了消費(fèi)者最終的體驗(yàn)，而消費(fèi)者體驗(yàn)是依靠各類應(yīng)用來(lái)作為媒介。所以，生態(tài)非常重要，甚至比技術(shù)還要重要得多。
馬杰思認(rèn)為，Vision Pro推出后，諸多非游戲類的開(kāi)發(fā)者加入應(yīng)用開(kāi)發(fā)的行業(yè)，此外，其他的iOS應(yīng)用開(kāi)發(fā)者很容易把應(yīng)用放在Vision OS上，移植成本非常低，這極大豐富了生態(tài)。以2013年算起，差不多十年時(shí)間，XR驗(yàn)證了在娛樂(lè)領(lǐng)域能夠做到一個(gè)什么樣的狀態(tài)，算是一個(gè)里程碑，“Meta實(shí)際上在娛樂(lè)領(lǐng)域出貨量與任天堂差不多了”。
“下一步是把XR變成一個(gè)通用計(jì)算平臺(tái)，也就是通用計(jì)算機(jī)。Vision Pro代表行業(yè)的下一個(gè)十年，未來(lái)十年大家探討怎么樣把XR變成一個(gè)更好的計(jì)算機(jī)，從一個(gè)移動(dòng)計(jì)算機(jī)，到空間計(jì)算機(jī)。”馬杰思表示。
