一键让你的照片动起来！UC伯克利大学发布 3D 动作迁移模型3DHM

AIGC动态欢迎阅读

原标题：一键让你的照片动起来！UC伯克利大学发布 3D 动作迁移模型3DHM
关键字：纹理,人物,模型,照片,动作
文章来源：夕小瑶科技说
内容字数：5402字

内容摘要：

夕小瑶科技说原创作者 | 智商掉了一地、Python小时候看动画片时，总是震撼于动画梦工厂里能让一幅画动起来的操作。也幻想过有朝一日成为神笔马良，能够让照片的人物动起来，而现在已经有了让照片面部表情动态化的成熟产品。
那么给定一个人的照片，能不能让这个人模仿规定的动作动起来呢？与照片面部表情的动态生成相比，这个挑战更为复杂，因为它涉及对人体姿势随时间变化的理解，以及学习有关人类外观和服装细节的先验知识。
近期，加州大学伯克利分校的研究团队提出了 3DHM，这是一个基于扩散模型的两阶段框架，可以利用单张照片生物动画。首先，通过学习关于人体和服装的先验知识，以及单张照片中服装和纹理与动作的映射，然后渲染 3D 人物，从而合成一系列与目标动作相符，且与输入照片人物外观一致的人物视频。
论文题目: Synthesizing Moving People with 3D Control
论文链接: https://arxiv.org/abs/2401.10889
博客地址: https://boyiliee.github.io/3DHM.github.io/
如何合成移动的人物？如图 1

原文链接：一键让你的照片动起来！UC伯克利大学发布 3D 动作迁移模型3DHM