CVPR 2024 | 跳舞时飞扬的裙摆，AI也能高度还原了，南洋理工提出动态人体渲染新范式

AIGC动态欢迎阅读

原标题：CVPR 2024 | 跳舞时飞扬的裙摆，AI也能高度还原了，南洋理工提出动态人体渲染新范式
关键字：建模,人体,衣服,范式,动态
文章来源：机器之心
内容字数：5015字

内容摘要：

AIxiv专栏是机器之心发布学术、技术内容的栏目。过去数年，机器之心AIxiv专栏接收报道了2000多篇内容，覆盖全球各大高校与企业的顶级实验室，有效促进了学术交流与传播。如果您有优秀的工作想要分享，欢迎投稿或者联系报道。投稿邮箱：liyazhou@jiqizhixin.com；zhaoyunfeng@jiqizhixin.com。在日常活动中，人的经常引起衣服的附属 (secondary motion of clothes) 并因此产生不同的衣服褶皱，而这需要对人体及衣服的几何、（人体姿态及速度动力学等）及外观同时进行动态建模。由于此过程涉及复杂的人与衣服的非刚体物理交互，导致传统三维表征往往难以应对。
近年从视频序列中学习动态数字人渲染已取得了极大的进展，现有方法往往把渲染视为从人体姿态到图像的神经映射，采用「编码器—特征—外观解码器」的范式。而该范式基于图像损失做监督，过于关注每一帧图像重建而缺少对连续性的建模，因此对复杂如「人体及衣服附属」难以有效建模。
为解决这一问题，来自新加坡南洋理工大学 S-Lab 团队提出—外观联合学习的动态

原文链接：CVPR 2024 | 跳舞时飞扬的裙摆，AI也能高度还原了，南洋理工提出动态人体渲染新范式