1
原标题:最强开源短剧创作模型来了!超160种表情、400种肢体动作,好莱坞级AI导演监制
文章来源:智东西
内容字数:10228字
昆仑万维开源首个AI短剧创作模型SkyReels:开启全民短剧时代
本文总结了智东西对昆仑万维开源的AI短剧创作模型SkyReels的报道要点。昆仑万维发布了中国首个面向AI短剧创作的视频生成模型SkyReels-V1和SOT别基于视频基座模型的表情动作可控算法SkyReels-A1,标志着视频生成模型竞争进入全新高度。
1. SkyReels-V1:一键生成好莱坞级短剧
SkyReels-V1基于昆仑万维的混元大模型训练,支持文生视频和图生视频,性能可对标快手可灵、MiniMax海螺AI等闭源模型。其核心能力在于:精准的微表情还原、专业的运镜技巧和好莱坞级的画面构图,这些都能够一键完成。用户可在SkyReels平台体验,该平台已展示众多复杂任务的生成实例,用户可在几分钟内创作出好莱坞大片即视感的视频。
2. 技术突破:精准、快速、可控
SkyReels-V1的突破在于生成精准、速度更快以及结果可控三个方面。首先,它支持162种细腻人物表情和400多种自然动作组合,并基于好莱坞级影视数据训练,确保画面构图和人物站位更具电影质感。其次,它利用自研的推理优化框架SkyReels-Infer,在单台4090上只需80秒即可生成544p分辨率视频,并支持分布式多卡并行,显著提升生成速度。最后,它通过自研的人物智能解析系统,实现对人物表情、动作和场景的精准理解和控制,确保生成视频的准确性和可控性。
3. SkyReels-A1:电影级表情捕捉
SkyReels-A1是一个SOT别的基于视频基座模型的表情动作可控算法,对标Runway的Act-One,实现电影级的表情捕捉。它能够精准地捕捉和还原人物在不同角度和动作下的表情变化,使生成视频更加生动逼真。
4. 全栈AI布局与开源策略
昆仑万维采用“All in AGI和AIGC”战略,构建了AI大模型、AI搜索、AI音乐、AI社交、AI游戏、AI视频六大业务矩阵。其SkyReels平台集成了多个自研大模型,涵盖剧本生成、分镜、人物对白和BGM等环节,实现从剧本创作到最终视频生成的全流程自动化。昆仑万维坚持开源策略,开源了SkyReels-V1和SkyReels-A1,以及其他一系列AI模型和工具,加速推动大模型生态发展。
5. 结语:开启全民AI短剧创作时代
SkyReels的出现降低了短剧创作门槛,让“一个人拍爽剧”成为现实。随着视频生成模型性能的提升,以及SkyReels等产品的不断完善,AI短剧创作生态将日趋成熟,推动行业技术创新和内容创新,最终开启全民AI短剧创作时代。
联系作者
文章来源:智东西
作者微信:
作者简介:智能产业新媒体!智东西专注报道人工智能主导的前沿技术发展,和技术应用带来的千行百业产业升级。聚焦智能变革,服务产业升级。