开发者复盘:首个登上央视春晚的 AI 视频制作过程踩坑&技术分享
AIGC动态欢迎阅读
原标题:开发者复盘:首个登上央视春晚的 AI 视频制作过程踩坑&技术分享
关键字:视频,模型,工作流,项目,产品
文章来源:Founder Park
内容字数:4636字
内容摘要:
央视春晚任素汐演唱的《枕着光的她》的现场伴奏视频中,首次使用了AI生成的视频。作者海辛和Simon阿文在文章中详细讲解了背后制作过程&用到开源技术的全面复盘,以及现阶段制作AI生成视频会遇到的问题。
文章转自公众号「全民熊猫计划」,Founder Park授权转载。23 年年底,数字栩生的宋震老师邀请我和 @Simon阿文 ,加入春晚节目组一起制作了央视春晚任素汐演唱的《枕着光的她》中的 AI 视频,以下是 AI 视频完整段落。
舞者:王圣哲、高贾雪
在这个 AI 视频项目中,我们使用到了开源社区中最新的技术:ControlNet, AnimateDiff, LCM, IPAdapter.
我们相信我们的实践经历对 AI 视频技术开源社区有正向的参考价值,所以决定将项目经验复盘分享给大家。项目本身的需求是将一段真人双人舞用 AI 的风格转绘成陶瓷的舞蹈,基于此需求,我们在项目开始时,对工作流进行了如下设计:
搭载在 ComfyUI 上,工作流高度自定义、省显存。
使用 ControlNet Lineart + OpenPose 模型,参考拍摄视频的线条及骨骼,生成新的 AI 动画。
使
原文链接:开发者复盘:首个登上央视春晚的 AI 视频制作过程踩坑&技术分享
联系作者
文章来源:Founder Park
作者微信:Founder-Park
作者简介:来自极客公园,专注与科技创业者聊「真问题」。
© 版权声明
文章版权归作者所有,未经允许请勿转载。
相关文章
暂无评论...