后期狂喜！一张照片丝滑替换视频主角，动作幅度再大也OK｜Meta&新加坡国立大学

AIGC动态欢迎阅读

原标题：后期狂喜！一张照片丝滑替换视频主角，动作幅度再大也OK｜Meta&新加坡国立大学

关键字：语义,视频,轨迹,模型,机头

文章来源：量子位

内容字数：3553字

内容摘要：丰色 发自 凹非寺量子位 | 公众号 QbitAI后期狂喜了家人们～现在，只需一张图片就能替换视频主角，效果还是如此的丝滑！且看这个叫做“VideoSwap”的新视频编辑模型——小猫一键变小狗，基操～如果原物体本身扭动幅度大一些？也完全没问题：细看俩者之间的轨迹，给你保持得是一毛一样：再如果，替换前后的物体形状差别较大呢？例如车身较高的SUV换更长的超跑，大邮轮换小白船。呐，也是一整个完美替换，基本看不出任何破绽：对比谷歌今年2月发的同类视频替换模型Dreamix：不得不说，现在这技术进步真是肉眼可见啊～那么，它是如何做到的呢？方法也很有意思。只需几个语义点，拽一拽就OK不管是风格转换还是主题/背景转换，这种视频编辑任务的主要挑战都是如何从源视频中提取轨迹传输到新视频、覆盖到新元素上，同时确保时间一致性。此前的模型（原理包括编码源、使用注意力图、光流等）大多数顾此失彼，要么在时…

原文链接：点此阅读原文：后期狂喜！一张照片丝滑替换视频主角，动作幅度再大也OK｜Meta&新加坡国立大学

联系作者

文章来源：量子位

作者微信：QbitAI

作者简介：追踪人工智能新趋势，关注科技行业新突破