AI视频ChatGPT时刻到来,昆仑万维发布全球首款AI短剧平台
2024/08/19 14:27AI云资讯17753

8月19日,昆仑万维发布全球首个集成视频大模型与3D大模型的AI短剧平台SkyReels。SkyReels平台集剧本生成、角色定制、分镜、剧情、对白/BGM及影片合成于一体,让创作者“一键成剧”,轻松制作高质量AI视频。奇幻大片、凄美虐恋、爆笑喜剧……只要输入一个简单创意,SkyReels就能完成从剧本到成品短剧制作全流程,AI视频ChatGPT时刻到来。
SkyReels平台集成了昆仑万维自研剧本大模型SkyScript、自研分镜大模型StoryboardGen、自研3D生成大模型Sky3DGen、以及业界首个将AI 3D引擎与视频大模型深度融合的创新平台WorldEngine。



SkyReels在剧本质量、分镜质量、人物表演等各维度质量评估上均领先于GPT-4o等大模型
SkyReels能够通过AI一键生成完整剧本、分镜、人物对白与BGM,支持角色形象、音色与分镜的自定义调整,并能够自动将内容转换为1080P60帧的高清视频,单次可生成视频长度达180秒,相比Sora单次可生成60秒视频、可灵单次可生成10秒视频,有显著突破。一键整合所有创作成果,极大提高视频的创作效率,降低创作成本,推动“一人一剧”时代加速来临。
同时,WorldEngine结合了引擎的精确可控能力(如光照模拟、物理模拟、3D空间、实时交互等) 以及AI视频大模型的幻想生成能力,提供了全新的线上混合视频创作模式,让视频创作从模糊生成迈向更加精确可控。
SkyReels的AI剧本生成功能基于昆仑万维自研剧本大模型SkyScript打造。为了让AI生成的剧本具备短剧的高密集爽点剧情,昆仑万维首先构建了亿级的高质量短剧结构化数据集SkyScript-100M,该数据集针对海量精彩短剧的剧情节奏、爽点、情绪变化进行了高质量标注;
其次算法团队设计了渐进式生成的剧本生成框架,实现了模型能够输出高度结构化的精彩剧本,无论是新手作者还是资深剧作家,都能通过它激发创意,轻松创作出引人入胜的短剧剧本。

SkyScript剧本大模型技术原理图
短剧创作的另一重要环节——分镜生成,则由昆仑万维自研分镜生成大模型StoryboardGen提供底层技术。StoryboardGen是昆仑万维首创的的基于DiT-MoE架构(基于DiffusionTransformer技术的Mixed-of-Experts混合专家架构)的分镜生成模型,能够实现高密度分镜信息生成,大幅增强视觉叙事表达能力。
输入剧本后,StoryboardGen模型会将剧本拆解成全局与主体两部分,全局部分包括场景、景别、构图等对分镜的整体描述,主体部分包括角色形象、动作人物角色的定制,最终汇集至故事板(Storyboard)智能体生成完整分镜。StoryboardGen的专项多智能体架构,能够有效保证人物与场景的可控性和一致性,创造出高质量的工业级分镜。

昆仑万维StoryboardGen分镜大模型技术原理图
在最终的影像生成环节,WorldEngine是业界首个将AI 3D引擎与视频大模型深度融合的创新平台。这是一项划时代的技术创新,WorldEngine以图层融合技术为桥梁,打造出前所未有的3D与视频混合创作模式。
用户使用SkyReels生成AI视频时,可以对任意元素自由选择使用3D AI引擎生成或者视频大模型生成,该创新模式突破了当前AI视频大模型时常出现的“穿模”、“反地心引力”等反物理规律现象,最大程度实现了物理模拟的精细度与视频大模型的幻想创造力的完美融合。自此,AI视频生成大模型将从“模糊控制”时代走向“精确可控”时代。
在3D AI引擎方面,昆仑万维自研的Sky3DGen大模型能够生成多样化的3D元素和场景,从自然景观到未来都市,从静态物体到动态角色,并提供了实时的3D场景交互能力,使得用户可以即时看到调整和编辑的效果,加快创作流程。在WorldEngine的加持下,用户还可以轻松构建3D虚拟影棚,实现虚拟拍摄的梦幻体验。
人物表演是短剧画面呈现的核心环节之一。因此,在AI人物表演方面,昆仑万维SkyReels团队专门研发了ActorShow人物生成模型,使得SkyReels所生成的AI人物有着更强的口型表情和肢体动作的可控生成能力,角色呈现更自然。
而针对视频后期合成中遇到的光照差异、风格差异等需求,昆仑万维SkyReels团队单独训练了专门的融合生成模型,使得图层融合后的视频呈现良好的一致性。
昆仑万维AI短剧平台SkyReels的推出,标志着全球AI短剧创作的一次技术飞跃,它将对视频内容创作流程进行全面颠覆,让创作者从繁琐、复杂的制作流程中解放出来,专注于创意实现与灵感表达,让“一人一剧”的梦想成为现实。
SkyReels AI短剧平台不仅为专业内容创作者提供了强大的创作工具,更极大地降低了AI短剧创作的门槛,使得非专业用户也能轻松上手。这一革命性的工具有望带来AI短剧用户生成内容(UGC)与专业用户生成内容(PUGC)的爆发式增长,为短剧内容生态注入前所未有的活力,推动短剧内容创作与消费市场的进一步快速增长。一个由AI技术驱动的短剧创作与消费的时代,正在到来。
昆仑万维始终致力于通过先进的AIGC技术,为全球内容创作者提供更加智能、高效、个性化的工具。在“All in AGI与AIGC”战略的推动下,昆仑万维始终以“实现通用人工智能,让每个人更好地塑造和表达自我”为使命。未来,昆仑万维将持续创新,通过对全球市场的深入开拓,为用户提供优质的AIGC产品与服务。
相关文章
- 阿里云发布AI视频创作平台“万镜一刻”,打通短漫剧和营销视频生成全流程
- AI协同重塑创作逻辑,灵狐AI视频平台解锁电商营销高效增长密码
- a16z最新分析:AI图像、AI视频领域,不存在“统治一切”的模型
- QQ新功能脑洞秀上线元宝,支持用Q版虚拟形象创作AI视频
- Seedance 2.0引爆AI视频革命,微盟集团“营销+短剧”板块有望双双受益
- 明芒北京智能全球上线AI视频网站,核心功能赋能短剧等内容创作
- 国产之光Vidu Q3刷新全球纪录,16秒音视频直出领跑AI视频工业化下半场
- 录咖AI视频去字幕功能全新上线:一键无痕去字幕,支持长视频处理
- 爱诗科技与阿里云达成全栈AI合作 AI视频服务全球化再启航
- 趣丸千音作为AI视频翻译官,亮相36氪WISE 2025商业之王大会
- 可灵2.6模型上线!语音、音效与画面一键直出 重构AI视频创作工作流
- 2025 AI视频大模型排行:可灵登顶,创作革命来袭
- 中国电信 TeleStudio 全链路AI视频创作平台正式上线
- 火星时代教育发布AI影视广告职业课程,聚焦AI视频全流程人才培养
- 中国电信生成式AI视频彩铃升级音视频创作体验
- 新手体验热门AI视频生成双雄即梦与万兴天幕AI,天幕性价比友好度拉满!
AI企业
更多>>AI硬件
更多>>- 华硕 ProArt 创梦 27 OLED:以 4K QD-OLED 与专业色彩表现,支持精细化创作
- 芯展速 Gen 6 Retimer 正式上市,副总裁李蓁 ODCC大会演讲官宣 获媒体热议
- 行业首款60℃热雾巨无霸滚筒扫拖旗舰!iRobot Roomba 875发布,重新定义扫地机器人清洁力
- 华硕主板助国产颗粒内存达成四槽满插6000C30与双条8000C36双重突破
- 首日销量突破600台!8888元的元点机器人Bridge正在赢得开发者
- 三星半导体亮相2026首届算博会,以创新存储方案赋能智能体AI
- 开学季提升成绩 入手三星Galaxy Tab S10 FE|Tab S10 FE+正合适
- 骁龙本阵营再添新成员,华硕灵耀 14 骁龙版打造新锐 AI PC 轻薄本首选
AI产业
更多>>AI技术
更多>>- 全球最强开源模型 Kimi K3 发布,参数规模 3 万亿,真的是强!
- 范式变革!东软发布AI原生软件工程白皮书,重构软件产业底层逻辑
- KAT-Coder-Pro V2.5正式发布:从“写代码”迈向“做工程”,Agentic能力全面升级
- 自变量机器人王昊:训练世界模型需付出“时间税”,解决模态对齐是当务之急
- 腾讯发布CodeBuddy Security,用AI Agent实现更高效的代码审计
- Twinkle x昇腾,率先实现Deepseek-V4系列模型高效训练
- 高德发布鸿蒙首个生成式 UI 开源框架 AGenUI,告别传统 UI 开发模式
- 发布即适配| 天数智芯全力支持腾讯混元Hy3 preview 开源落地,共推国内大模型产业普惠









