Meta申请新专利 将优化虚拟现实中的口型同步

投稿 · 2025-05-09 17:48:41

通过这些更逼真的面部动作创建NPC 和为玩家化身提供更逼真和身临其境的体验,使开发人员可以灵活地选择使用该系统的方式,Meta 提交的一项新专利展示了可以为视频游戏和VR 应用程序带来更逼真的口型同步和面部动画的技术,通过跟踪个人在阅读每个句子时的面部和嘴巴如何移动, 除了能够基于现有数据集生成面部动画和口型同步之外,此功能可以让VR 用户拥有能够准确模仿自己面部表情的头像。

该专利还描述了该系统如何使用集成到VR 耳机中的摄像头来做同样的事情,系统可以从这些动作中提取并将它们混合在一起用来让角色的动画更加逼真,系统在他们阅读每个句子时跟踪他们的面部表情,包括在VR 游戏中,从而在多人游戏和《VRchat》等社交 VR 体验中获得更加逼真和沉浸的体验, 该专利详细介绍了将用户语音转换为逼真的口型同步和面部动画的多种方法。

专利中概述的一种方法涉及使用多人在阅读50 个不同的语音平衡句子时的音频和视频记录数据集,甚至包括眨眼和眉毛抬起等细微动作。

文章推荐:

Meta申请新专利 将优化虚拟现实中的口型同步

《混沌之脑:诺亚》无法登陆Steam 开发商正在寻求其他平台

V社员工称日本PC市场规模大 SteamDeck能大卖

《Mirror 2: Project X》仅16+误导玩家 工作室致歉

索尼泄露文档显示《地平线:西之绝境》将登陆PC