李飞飞团队新作:AI透视眼,穿越障碍看清你,渲染遮挡人体有新突破了

AIGC动态12个月前发布 机器之心
11 0 0

李飞飞团队新作:AI透视眼,穿越障碍看清你,渲染遮挡人体有新突破了

AIGC动态欢迎阅读

原标题:李飞飞团队新作:AI透视眼,穿越障碍看清你,渲染遮挡人体有新突破了
关键字:遮挡,人体,报告,场景,方法
文章来源:机器之心
内容字数:4743字

内容摘要:


机器之心报道
编辑:大盘鸡、小舟即使遮挡,也能渲染出高保真的 3D 人体。AR/VR 、电影和医疗等领域都在广泛地应用视频渲染人类形象。由于单目摄像头的视频获取较为容易,因此从单目摄像头中渲染人体一直是研究的主要方式。Vid2Avatar、MonoHuman 和 NeuMan 等方法都取得了令人瞩目的成绩。尽管只有一个摄像头视角,这些方法仍能从新的视角准确地渲染人体。
不过,大多数现有的方法在渲染人体时都是针对较为理想的实验场景进行设计的。在这些场景中,障碍物几乎不存在,人的各个身体部分在每一帧中也都能全部展示出来。可这与现实场景大为不同。现实场景中常有多个障碍物,人体也会在移动过程中被障碍物遮挡。
大多数的神经渲染方法在处理现实世界的场景时都会因为遮挡而困难重重,其中一大原因就是缺乏监督。实际场景往往无法提供有关人体外观、形状和姿态的真实监督数据,因此模型需要根据现有的少量证据来推断其他信息,而这十分具有挑战性,尤其是大部分人体被遮挡的情况。
由于许多神经方法采用的基于点的渲染方案,当一个被遮挡和一个未被遮挡时,两个非常接近的坐标会在渲染输出上产生巨大差异。因此,那些未适应被遮挡场景


原文链接:李飞飞团队新作:AI透视眼,穿越障碍看清你,渲染遮挡人体有新突破了

联系作者

文章来源:机器之心
作者微信:almosthuman2014
作者简介:专业的人工智能媒体和产业服务平台

阅读原文
© 版权声明

相关文章

暂无评论

暂无评论...