蘋果前員工披露 Vision Pro 頭顯開發(fā)細(xì)節(jié)：它像“讀心術(shù)”會預(yù)測你的行為|當(dāng)前快報
(資料圖)
IT之家 6 月 7 日消息，昨日蘋果在 WWDC2023 上發(fā)布了全新頭顯 Vision Pro，一位曾負(fù)責(zé)開發(fā) Vision Pro 蘋果前員工 Sterling Crispin 昨日在推特上對外表示，Vision Pro 使用了大量神經(jīng)科學(xué)來開發(fā)其一些關(guān)鍵功能。
Crispin 表示，“我在蘋果公司的技術(shù)開發(fā)組擔(dān)任神經(jīng)技術(shù)原型研究員期間，用了我生命中的 10％時間來為 VisionPro 的開發(fā)做出貢獻(xiàn)。這是我做過的單一項目中歷時最長的一次。我為它的最終揭曉感到自豪和寬慰。我已經(jīng)從事 AR 和 VR 的研究十年之久，從很多方面來說，這是整個行業(yè)的一個結(jié)晶?！?/p>
由于保密協(xié)議的限制，Crispin 不能透露太多細(xì)節(jié)，但有些內(nèi)容已經(jīng)通過專利公開。他介紹說，他在蘋果的工作主要涉及到根據(jù)用戶身體和大腦的數(shù)據(jù)，判斷他們在沉浸式模式下的心理狀態(tài)?！耙簿褪钦f，當(dāng)用戶處于混合現(xiàn)實或虛擬現(xiàn)實的體驗中，人工智能模型會嘗試預(yù)測你是感到好奇、走神、害怕、專注、回憶過去的經(jīng)歷，還是其他一些認(rèn)知狀態(tài)。而這些狀態(tài)可能通過眼動追蹤、大腦電活動、心跳和節(jié)律、肌肉活動、大腦血液密度、血壓、皮膚電導(dǎo)等測量得到。”他解釋說。
為了實現(xiàn)這些具體的預(yù)測，他們使用了很多技巧，這些技巧都在幾項提到他的專利中有所描述。例如他說，最酷的成果之一就是在用戶點擊某個東西之前就能預(yù)測出來，“你的瞳孔在你點擊之前就會有反應(yīng)，部分原因是你預(yù)期點擊后會發(fā)生什么事情。所以你可以通過監(jiān)測用戶的眼睛行為，和實時調(diào)整用戶界面，來創(chuàng)造更多這種預(yù)期性的瞳孔反應(yīng)，從而通過眼睛創(chuàng)建一個粗略的腦機接口。這很酷，我寧愿選擇這種方式，而不是進(jìn)行侵入性的腦部手術(shù)?！彼€將這個技術(shù)比作“讀心術(shù)”。
此外，為了確定用戶認(rèn)知狀態(tài)，系統(tǒng)還會向用戶快速展示一些他們無法感知的視覺或聲音信號?！傲硪豁棇＠敿?xì)介紹了如何使用機器學(xué)習(xí)和身體和大腦的信號來預(yù)測你有多專注、放松或?qū)W習(xí)效果如何。然后根據(jù)這些狀態(tài)更新虛擬環(huán)境。所以，想象一下一個能夠根據(jù)你看到和聽到的背景變化來幫助你學(xué)習(xí)、工作或放松的自適應(yīng)沉浸式環(huán)境。”Sterling Crispin 說。
IT之家注意到，蘋果稱在開發(fā)這款頭戴設(shè)備的過程中，創(chuàng)造了 5000 項新專利。蘋果 Vision Pro 的主要目標(biāo)不是讓用戶完全沉浸在虛擬現(xiàn)實中，而是通過將真實世界和數(shù)字世界結(jié)合起來擴展用戶的可能性。
標(biāo)簽：
