一键让你的照片动起来！UC伯克利大学发布 3D 动作迁移模型3DHM

AIGC动态欢迎阅读

原标题：一键让你的照片动起来！UC伯克利大学发布 3D 动作迁移模型3DHM
关键字：纹理,人物,模型,照片,动作
文章来源：夕小瑶科技说
内容字数：5402字

内容摘要：

夕小瑶科技说 原创作者 | 智商掉了一地、Python小时候看动画片时，总是震撼于动画梦工厂里能让一幅画动起来的操作。也幻想过有朝一日成为神笔马良，能够让照片的人物动起来，而现在已经有了让照片面部表情动态化的成熟产品。
那么给定一个人的照片，能不能让这个人模仿规定的动作动起来呢？与照片面部表情的动态生成相比，这个挑战更为复杂，因为它涉及对人体姿势随时间变化的理解，以及学习有关人类外观和服装细节的先验知识。
近期，加州大学伯克利分校的研究团队提出了 3DHM，这是一个基于扩散模型的两阶段框架，可以利用单张照片生成人物动画。首先，通过学习关于人体和服装的先验知识，以及单张照片中服装和纹理与动作的映射，然后渲染 3D 人物，从而合成一系列与目标动作相符，且与输入照片人物外观一致的人物运动视频。
论文题目: Synthesizing Moving People with 3D Control
论文链接: https://arxiv.org/abs/2401.10889
博客地址: https://boyiliee.github.io/3DHM.github.io/
如何合成移动的人物？如图 1

原文链接：一键让你的照片动起来！UC伯克利大学发布 3D 动作迁移模型3DHM

联系作者

文章来源：夕小瑶科技说
作者微信：xixiaoyaoQAQ
作者简介：更快的AI前沿，更深的行业洞见。聚集25万AI应用开发者、算法工程师和研究人员。一线作者均来自清北、国外顶级AI实验室和互联网大厂，兼备媒体sense与技术深度。