Ai工具箱Ai开源项目

LumenX Studio

阿里巴巴开源的AI短漫剧一站式生产平台,它能够将小说文本转化为动态视频,打通了从剧本分析、角色定制、分镜绘制到视频合成的完整创作链路。LumenX Studio官网入口网址

标签: OpenIAPI,一站式大模型API聚合平台
一站式AI创作平台

LumenX Studio官网

阿里巴巴开源的AI短漫剧一站式生产平台,它能够将小说文本转化为动态视频,打通了从剧本分析、角色定制、分镜绘制到视频合成的完整创作链路。

网站提供:Ai工具箱,Ai开源项目,LumenX Studio,AI短剧,AI漫剧。

LumenX Studio

LumenX Studio简介

LumenX Studio,AI 短漫剧一站式生产平台。它能够将小说文本转化为动态视频,打通了从剧本分析、角色定制、分镜绘制到视频合成的完整创作链路。 – alibaba/lumenx

LumenX Studio 简介

LumenX Studio 是阿里巴巴开源的一个 ai 短漫剧生产平台,由星莲(StarLotus)主导开发与维护。它能把小说文本转化为动态视频,覆盖从剧本分析、角色定制、分镜绘制到视频合成的完整创作链路。支持本地部署,采用 MIT 协议开源。

LumenX Studio

LumenX Studio界面截图

核心功能

  • 剧本分析:基于 LLM 自动提取角色、场景、道具,生成专业分镜脚本

  • 美术指导:支持自定义视觉风格,保持全片画风统一

  • 可视化分镜:拖拽式分镜编辑器,所见即所得地组合人物、背景与特效

  • 多模态生成:集成通义万相(Wanx)等模型,支持文生图、图生视频

  • 智能视听合成:自动生成角色配音(TTS)、音效(SFX)并合成最终视频

LumenX Studio完整创作链路

平台集成了以下完整流程:

资产提取 → 风格定调 → 资产生成 → 分镜脚本构造 → 分镜图生成 → 分镜视频生成

具体流程:

  1. 剧本编辑与实体提取:在左侧剧本编辑器中点击“提取实体”,由 Qwen-Plus 自动提取角色、场景、道具

  2. 风格定调:用 Qwen-Plus 分析剧本适合的风格,或使用预设风格(由正向/负向提示词组成)

  3. 资产生成:为角色生成无背景全身图、三视图、头像特写;为场景和道具生成参考图或参考视频

  4. 分镜图故事版:基于脚本提取分镜脚本,支持二次编辑,并可融入 AI 提示词润色

  5. 分镜视频生成:支持首帧驱动(i2v)和角色动作驱动(r2v)两种模式,支持多 Batch 抽卡

  6. 分镜视频拼接:审查并选取最佳分镜视频,一键拼接成片

LumenX Studio技术架构

  • 前端:Next.js 14 + React 18 + TypeScript + Tailwind CSS

  • 后端:FastAPI + Python 3.11+

  • AI 核心:阿里云 Qwen(逻辑)+ Wanx(视觉)

  • 渲染:Three.js(Canvas)+ FFmpeg(视频处理)

模型接入与运行模式

内置了模型接入的工作流,支持接入新模型、更新版本、调整参数。采用本地优先(local-first)的媒体存储逻辑。支持四种运行模式:

  • DashScope-only(无 OSS)

  • DashScope + OSS

  • DashScope + Kling 原厂

  • DashScope + Vidu 原厂

LumenX Studio

LumenX Studio vs Toonflow vs火宝短剧

对比维度LumenX StudioToonflow火宝短剧 (Drama)
开发方阿里巴巴 / 星莲(StarLotus)HBAI-Ltdchatfire-AI
GitHubalibaba/lumenxHBAI-Ltd/Toonflow-appchatfire-AI/huobao-drama
核心定位AI 短漫剧一站式生产平台面向短剧生产的 AI 工作台全栈 AI 短剧自动化生产平台
技术栈Next.js + FastAPI + Python + Qwen/WanxNode.js + Express + ElectronGo + Vue3 + Gin
开源协议MITApache-2.0开源
核心工作流资产提取 → 风格定调 → 资产生成 → 分镜脚本 → 分镜图 → 分镜视频策划 → 编剧 → 分镜 → 出片(无限画布)角色生成 → 分镜设计 → 视频生成
角色一致性生成无背景全身图、三视图、头像特写作为资产锁定章节图谱 + 持久化 Agent 记忆AI 绘画统一风格生成角色形象
剧本/分镜处理LLM 自动提取实体 + 可视化拖拽分镜编辑器三层 Agent 协作(决策/执行/监督)+ 图谱驱动智能分镜设计(场景描述、镜头设计、配套图片)
视频生成首帧驱动(i2v) + 角色动作驱动(r2v),支持多 Batch 抽卡接入 GPT-4o、Sora、豆包视频、Nano Banana Pro 等文生视频 + 图生视频
音频处理自动生成 TTS 配音 + SFX 音效未明确未明确
部署方式本地部署(前端3008/后端8000),支持 DockerWindows/Linux/macOS 安装包、Docker、云端Docker Compose(推荐)、开发模式、传统部署
部署难度中等
特色亮点本地优先媒体存储;仓库级模型接入;DashScope/Kling/Vidu 多模式可选无限画布生产工作台;可编程供应商系统;Skill 文件化配置;批量百集生产DDD 领域驱动架构;一句话生成短剧;素材库+任务追踪
适用场景阿里生态用户、需多模型灵活切换、本地优先存储批量小说推文生产、需 Agent 智能协作、跨平台部署快速入门、全栈自动化、国内友好轻量部署

开源信息

GitHub 仓库:https://github.com/alibaba/lumenx

许可证:MIT License

开发端口:前端默认 3008,后端 8000

联系方式:GitHub Issues / Discussions,邮件 zhangjunhe.zjh@alibaba-inc.com

相关资讯:

AI短剧创作平台

AI漫剧制作工具

AI漫剧制作流程及工具全解析

LumenX Studio官网入口网址

https://github.com/alibaba/lumenx

OpenI小编发现LumenX Studio网站非常受用户欢迎,请访问LumenX Studio网址入口试用。

数据评估

LumenX Studio浏览人数已经达到3,如你需要查询该站的相关权重信息,可以点击"5118数据""爱站数据""Chinaz数据"进入;以目前的网站数据参考,建议大家请以爱站数据为准,更多网站价值评估因素如:LumenX Studio的访问速度、搜索引擎收录以及索引量、用户体验等;当然要评估一个站的价值,最主要还是需要根据您自身的需求以及需要,一些确切的数据则需要找LumenX Studio的站长进行洽谈提供。如该站的IP、PV、跳出率等!

关于LumenX Studio特别声明

本站OpenI提供的LumenX Studio都来源于网络,不保证外部链接的准确性和完整性,同时,对于该外部链接的指向,不由OpenI实际控制,在2026年 5月 7日 上午9:01收录时,该网页上的内容,都属于合规合法,后期网页的内容如出现违规,可以直接联系网站管理员进行删除,OpenI不承担任何责任。

相关导航

AI聚合视觉工厂

暂无评论

暂无评论...