AIGC动态欢迎阅读
内容摘要:
大数据文摘受权转载自Jack Cui
推荐三个AI工具。
一、Champ
三维参数导引下可控一致的人体图像动画生成项目。只需要一张照片,就能让照片里的人物动起来。
给出一个动作视频,Champ 可以让不同的人像复刻出相同的动作。
我们先来看看真实人物照片的效果:而在虚拟人物和不同风格的照片下,Champ 也有不错的表现:项目主要依靠于人体网格恢复模型,从输入视频中提取参数化三维人体网格模型 SMPL 序列,渲染不同的信息控制视频的生成。
项目框架
在项目的框架图中,我们可以看到,Champ 采用了一个多层融合模块(MLMF),通过深度、骨骼、蒙版、法线、语义几项信息控制视频的细节生成,使其更加真实灵动。这五项信息,也可以通过 comfy 节点的示例工作流生成。
另外,Champ 利用 SMPL 保持了生成视频中人物体型的一致。通过对齐体型参数,Champ 在保持人物的体态和动作方面超过了其他 SOTA 工作。效果比较
项目提供了体验 demo,如果需要本地部署,会根据所生成的分辨率占用显存,分辨率越高,显存占用越大,需要一定硬件支持,感兴趣的小伙伴也可以试试分段生成。
项目地址:
原文链接:该死,这糟糕的心动感,AI杀疯了!
联系作者
文章来源:大数据文摘
作者微信:BigDataDigest
作者简介:普及数据思维,传播数据文化
© 版权声明
文章版权归作者所有,未经允许请勿转载。
相关文章
暂无评论...