李飞飞团队实现“隔空建模”,透过遮挡物还原完整3D人体模型

AIGC动态12个月前发布 量子位
6 0 0

李飞飞团队实现“隔空建模”,透过遮挡物还原完整3D人体模型

AIGC动态欢迎阅读

原标题:李飞飞团队实现“隔空建模”,透过遮挡物还原完整3D人体模型
关键字:遮挡,部分,人体,人物,建模
文章来源:量子位
内容字数:2976字

内容摘要:


克雷西 发自 凹非寺量子位 | 公众号 QbitAI注意看,这个男人搬着一个长长的柜子,画面中半个人都被遮挡住了。
但即使有这样的遮挡,男人的整个身体在AI面前依然是无所遁形。
哪怕是蹲在椅子背后只露出头,依然可以被模型完整还原。
从遮挡物背后把人“揪”出来的,是李飞飞团队推出的人体建模新工具Wild2Avatar(本文简称W2A)。
只要一段4秒左右的的单角度视频,就能构建出完整的3D模型,有遮挡也不怕。
相比此前的SOTA方法,Wild2Avatar在人体建模上可谓是实现了质的飞跃。
建模效果完胜Vid2Avatar从下面的对比图中(从左到右依次为带遮挡原图、Vid2Avatar提取结果和W2A提取结果)可以看到,作为baseline的Vid2Avatar方法只能大概描绘出人的轮廓,遮挡物直接被“拍扁”到了人物身上,而且轮廓看上去也不够准确。
而W2A提取出的任务不仅轮廓更加精确,看上去也更具立体感,关键是遮挡物被完美地去除,显现出了完整的人物结构。
对遮挡物的去除,W2A操作得也更为彻底,没有留下多余的痕迹。
而baseline中部分结构缺失的现象,在W2A中也没有发生,人物的结


原文链接:李飞飞团队实现“隔空建模”,透过遮挡物还原完整3D人体模型

联系作者

文章来源:量子位
作者微信:QbitAI
作者简介:追踪人工智能新趋势,关注科技行业新突破

阅读原文
© 版权声明

相关文章

暂无评论

暂无评论...