蘋果哭暈在廁所,開發(fā)者用 Quest Pro 復(fù)刻了 Vision Pro 的 EyeSight
蘋果哭暈在廁所,開發(fā)者用 Quest Pro 復(fù)刻了 Vision Pro 的 EyeSight
高貴的 EyeSight 有了平替方案
(相關(guān)資料圖)
精致有料的科技報(bào)道
- shenzhenware-
盡管 2023 年剛剛過半,但是要提及 2023 年全球最具影響力的產(chǎn)品,蘋果上個(gè)月發(fā)布的 Vision Pro 絕對占有一席之地。
強(qiáng)大的硬件、豐富的生態(tài)和應(yīng)用以及人性化的人機(jī)交互,讓人印象深刻。而其中最為人津津樂道的功能之一,則是被蘋果稱為有別于市面上其他 VR 頭顯的功能——EyeSight。
在此,我們先簡單地對 EyeSight 做一下回顧:
當(dāng)有人靠近正配戴 Apple Vision Pro 的使用者時(shí),設(shè)備的視區(qū)會變透明,讓用戶可以看見這個(gè)人,同時(shí)走近的人也會看到用戶的眼睛。
當(dāng)用戶沉浸于空間環(huán)境或者使用 app 的時(shí)候,EyeSight 會提供視覺線索,讓他人知道用戶在專注做什么。
這項(xiàng)突破性的功能旨在打破傳統(tǒng) VR 設(shè)備的「隔離」屬性,讓佩戴者與周遭的用戶保持連接。
然而,蘋果這個(gè)美好的愿景在 Vision Pro 高昂的售價(jià)和相對遙遠(yuǎn)的上市日期面前,注定會讓不少用戶無法在第一時(shí)間享受到原生的體驗(yàn)。
好消息是,高貴的 EyeSight 現(xiàn)在有了一個(gè)平替的方案。
國內(nèi)開發(fā)者「放學(xué)臻」利用 iPhone、Meta Quest Pro 和自主研發(fā)的應(yīng)用,「實(shí)現(xiàn)了」蘋果的 EyeSight 功能。甚至在某種程度上,其體驗(yàn)超越了蘋果的 EyeSight。
這套組合方案被稱為——Quision Pro。
從演示視頻中,我們可以看到,放學(xué)臻將一臺 iPhone 作為外部顯示屏,通過一個(gè)物理連接支架與 Meta Quest Pro 進(jìn)行連接,使用時(shí),即可將佩戴者眼部運(yùn)動和表情在 iPhone 上呈現(xiàn)出來。
與 Vision Pro 展示的是佩戴者本身的數(shù)字化身不同,Quision Pro 可以自定義顯示的圖像,通過簡單地左右滑動即可進(jìn)行切換。
而蘋果強(qiáng)調(diào)的「使用視覺線索來保護(hù)隱私」,Quision Pro 也能夠通過在 iPhone 屏幕上劃來進(jìn)行狀態(tài)的切換。
甚至,Vision Pro 中當(dāng)人物靠近自動切換成透視狀態(tài)也有對應(yīng)的實(shí)現(xiàn)。盡管過渡動畫遠(yuǎn)不如 Vision Pro 精細(xì),但是這些都可以通過后期優(yōu)化來解決。
不僅如此,Quision Pro 還做了兩款小游戲。佩戴者可以通過改變頭部的位置來讓空間里的籃球和貓咪朝著某一方向運(yùn)動,讓我們看到了 EyeSight 這一功能的趣味玩法。
通過各個(gè)渠道的信息匯總,我們對 Quision Pro 背后的實(shí)現(xiàn)原理也做了一番梳理:
Quision Pro 通過使用 Meta Quest Pro 來進(jìn)行面部表情跟蹤,然后通過本地?zé)o線網(wǎng)絡(luò)將數(shù)據(jù)發(fā)送至 iPhone。
iPhone 在獲取到數(shù)據(jù)之后,渲染出用戶的 3D 視角,借助于 iPhone 的 LiDAR 和 ARKit,將渲染出的眼球視線指向觀看者的眼睛,從而實(shí)現(xiàn)在外部看起來無論觀看者在哪個(gè)角度都能「被注視」著的效果。
這里還有一個(gè)小插曲,盡管 iPhone 在放置于 Meta Quest Pro 前面時(shí)遮擋了 Quest Pro 的前置攝像頭,但是 Quest Pro 側(cè)面的攝像頭也依然能夠保證其工作時(shí)的效果不受影響。
最后還必須介紹一條利好。放學(xué)臻表示,這個(gè)項(xiàng)目里的 EyeSight 效果利用 Android 的 ARCore 也完全可以實(shí)現(xiàn),并且 Quision Pro 項(xiàng)目在完成調(diào)試后將會開源。這意味著如果不考慮侵權(quán)的問題,蘋果的 EyeSight 完全是有可能在其他一眾 VR 頭顯上得以實(shí)現(xiàn)。
灣里小結(jié)
放學(xué)臻用簡單的演示向我們還原了蘋果 Vision Pro 的 EyeSight,但是理性來講,這一技術(shù)背后的實(shí)現(xiàn)還有很多難題需要解決,這也是為何蘋果在 WWDC 會后并沒有提供這項(xiàng)功能的現(xiàn)場體驗(yàn)——一個(gè)成熟的商品需要考慮到各種意外條件下產(chǎn)生的不良影響。
但是我們很高興看到已經(jīng)開發(fā)者已經(jīng)走出了第一步,并且為行業(yè)其他的產(chǎn)品實(shí)現(xiàn)提供了有價(jià)值的思路。相信隨著蘋果 Vision Pro 開發(fā)工具包的發(fā)布,我們會看到越來越多有趣和有價(jià)值的應(yīng)用。■
主筆:陳述 / 深圳灣
編輯:曉月 / 深圳灣
關(guān)鍵詞: