Skip to content
Artwork for 每日AI
每日AI · Monday · 25 min

4DAnyone:基于单目视频的4D人体生成与重建 手机随手拍出4D数字人

4DAnyone 是一个能够从普通单目视频中重建高保真 4D 动态人物的研究项目。该框架利用 3D 骨架作为鲁棒的几何引导,能够生成多视角一致的高质量视频,从而支持后续的 4D 高斯泼溅 (4DGS) 重建。为了解决大规模视角下的不一致性问题,研究者提出了参考上下文打包 (RCP) 技术以提供可扩展的特征指导,并设计了目标上下文路由 (TCR) 机制来减少视角间的结构漂移。实验证明,该方法在生成质量和重建精度上均优于现有技术,且在真实场景中具有出色的泛化能力。这一突破使得用户仅凭单台手机拍摄的视频,即可创建出可在任意视角下流畅观看的数字人 4D 资产。

0:00-25:08

transcript

No transcript — this publisher did not publish one.

show notes

4DAnyone 是一个能够从普通单目视频中重建高保真 4D 动态人物的研究项目。该框架利用 3D 骨架作为鲁棒的几何引导,能够生成多视角一致的高质量视频,从而支持后续的 4D 高斯泼溅 (4DGS) 重建。为了解决大规模视角下的不一致性问题,研究者提出了参考上下文打包 (RCP) 技术以提供可扩展的特征指导,并设计了目标上下文路由 (TCR) 机制来减少视角间的结构漂移。实验证明,该方法在生成质量和重建精度上均优于现有技术,且在真实场景中具有出色的泛化能力。这一突破使得用户仅凭单台手机拍摄的视频,即可创建出可在任意视角下流畅观看的数字人 4D 资产