蘋果公司最新獲批的Vision Pro相關專利,為頭顯設備中的FaceTime通話虛擬頭像技術揭開了神秘面紗。這項專利不僅展示了高度逼真的虛擬形象如何在FaceTime通話中實現,還詳細闡述了其背后的工作原理。
據科技媒體報道,Brian Tong在2024年的演示中,向公眾展示了Vision Pro頭顯設備的FaceTime通話體驗。與以往的卡通化虛擬頭像不同,Vision Pro采用了高度逼真的虛擬形象,為用戶帶來了全新的通話體驗。
最新獲批的專利揭示了這一功能的核心技術。該專利描述了一種利用射頻(RF)信號和低調天線系統的方法,能夠精準地區分用戶的面部變形和手部姿態。這一系統通過頭戴設備底部集成的天線,利用自諧振頻率和性能變化,捕捉用戶面部和手部的細微動作。
為了確保信號的準確性和穩定性,系統還采用了定向輻射模式來優化信號強度。這一設計能夠減少手部、面部遮擋物(如胡須、口罩)或環境干擾對信號的影響,從而提供更可靠的面部和手部姿態捕捉。
專利中提到的槽形天線(Slot Antenna)設計,因其低調且結構簡單,非常適合用于頭戴設備。部分天線甚至采用了折疊設計,為次級天線提供了放置空間,從而進一步提升了信號的分辨率和捕捉精度。
除了精準的面部和手部姿態捕捉外,這項技術還可以用于創建個性化的虛擬形象(Persona)。這些虛擬形象不僅具有逼真的照片級表現,還可以呈現為抽象化的動畫形象,為用戶提供更多的選擇和個性化空間。
為了實現這一目標,系統結合了機器學習(ML)模型和規則算法,以及運動傳感器的輸入。這一組合能夠適應用戶不同的頭部和手部朝向,確保精準捕捉嘴部動作(如閉嘴、微笑露齒)及手部動作(如手指關節移動)。
值得注意的是,雖然面部和手部表情捕捉不需要高幀率,但需要高分辨率掃描來區分不同的姿態。而對于語音時的嘴部快速動作,系統則可以通過較低分辨率捕捉整體形態,從而實現高效且準確的捕捉。