Meta AI 展示全新虚拟化身模型“AGroL”
source link: http://vr.sina.com.cn/news/hot/2023-04-23/doc-imyriqsm6599153.shtml
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.
新浪VR >
正文页
Meta AI 展示全新虚拟化身模型“AGroL”
近日，Meta AI 的一项研究显示了一种新的虚拟化身模型，可以在 VR 中实现流畅的人体全身运动，而无需额外的传感器。
在对 VR 头显（如 Meta Quest 2 或 Quest Pro）进行由内而外追踪的情况下，主要追踪用户的头部和手部。由于追踪踪摄像头集成到头显外壳中，因此身体的其余部分在很大程度上保持隐藏状态以进行运动检测。
在一项研究中，Meta AI 提出了一种新的虚拟化身系统，该系统使用 AI 从这些稀疏数据中合成全身的流畅运动，大大超过了以前的化身动画。
“Avatars Grow Legs”简称“AGroL”，是一种扩散模型，专门设计用于只需少量上半身信号就能追踪全身运动。它基于多层感知（MLP）架构和运动数据的新型调节方案。
根据研究人员的说法，该模型应该能够预测整个身体的精确且流畅的运动，这可以解决 VR 全身追踪的问题，传统追踪难度较大的下半身追踪应该不是问题。到目前为止，伪影只有在接触地面时偶尔发生。
由于 AGroL 可以实时执行，因此也应该适用于在线应用。这可能很快就会使 Horizon Worlds 和其他社交 VR 应用没有腿的虚拟化身成为过去。
研究人员使用 AMASS 的动作捕捉数据集展示了该模型的有效性。与 AvatarPoser 等其他化身系统相比，AGroL 的旋转、位置和速度误差明显较少。
因此，AGroL 生成的运动更精确且更流畅。最重要的是，据说基于 AGroL，虚拟化身出现手臂和腿部抖动频率要低得多。
Recommend
About Joyk
Aggregate valuable and interesting links.
Joyk means Joy of geeK