苹果公司最新获批的Vision Pro相关专利,为头显设备中的FaceTime通话虚拟头像技术揭开了神秘面纱。这项专利不仅展示了高度逼真的虚拟形象如何在FaceTime通话中实现,还详细阐述了其背后的工作原理。
据科技媒体报道,Brian Tong在2024年的演示中,向公众展示了Vision Pro头显设备的FaceTime通话体验。与以往的卡通化虚拟头像不同,Vision Pro采用了高度逼真的虚拟形象,为用户带来了全新的通话体验。
最新获批的专利揭示了这一功能的核心技术。该专利描述了一种利用射频(RF)信号和低调天线系统的方法,能够精准地区分用户的面部变形和手部姿态。这一系统通过头戴设备底部集成的天线,利用自谐振频率和性能变化,捕捉用户面部和手部的细微动作。
为了确保信号的准确性和稳定性,系统还采用了定向辐射模式来优化信号强度。这一设计能够减少手部、面部遮挡物(如胡须、口罩)或环境干扰对信号的影响,从而提供更可靠的面部和手部姿态捕捉。
专利中提到的槽形天线(Slot Antenna)设计,因其低调且结构简单,非常适合用于头戴设备。部分天线甚至采用了折叠设计,为次级天线提供了放置空间,从而进一步提升了信号的分辨率和捕捉精度。
除了精准的面部和手部姿态捕捉外,这项技术还可以用于创建个性化的虚拟形象(Persona)。这些虚拟形象不仅具有逼真的照片级表现,还可以呈现为抽象化的动画形象,为用户提供更多的选择和个性化空间。
为了实现这一目标,系统结合了机器学习(ML)模型和规则算法,以及运动传感器的输入。这一组合能够适应用户不同的头部和手部朝向,确保精准捕捉嘴部动作(如闭嘴、微笑露齿)及手部动作(如手指关节移动)。
值得注意的是,虽然面部和手部表情捕捉不需要高帧率,但需要高分辨率扫描来区分不同的姿态。而对于语音时的嘴部快速动作,系统则可以通过较低分辨率捕捉整体形态,从而实现高效且准确的捕捉。