在2024年8月19日,中国人工智能科技企业昆仑万维,宣布了一项重大创新成果——全球首款集成视频大模型与3D大模型的AI短剧平台SkyReels。这一平台集成了剧本生成、角色定制、分镜设计、剧情编排、对白/BGM以及影片合成等全流程功能,让创作者能够一键生成高质量AI视频,标志着“一人一剧”时代的到来。

AI短剧的崛起

近年来,短剧市场以其快速、高效、娱乐性强的特点在全球范围内迅速崛起。短剧的单集时长多在几分钟到十几分钟之间,快节奏剧情和强烈娱乐性使其成为用户的新宠。据统计,到2023年,中国短剧市场的年度票房已经达到院线电影票房的七成。同时,多家短剧独立APP在全球范围内上线,并取得了显著的市场表现,如中文在线的ReelShort在美国iOS排行榜上甚至超越了TikTok。

AI技术的引入更是为短剧创作带来了革命性的变化。以往需要数月的制作时间,现在借助AI工具可以缩短到半个月甚至更短。然而,尽管AI在短视频片段的生成上已经取得显著成果,但全流程AI短剧的制作仍面临诸多挑战,如创作者需要在多个AI工具间切换,作品效果往往差强人意。

以下视频来源于:昆仑万维集团。这是一个2分半时长的短剧作品。

SkyReels邀请注册现已开启!直接输入你的手机号获得一个验证码即可!(稀缺资源,上车要快!)

SkyReels平台介绍

正是在这样的背景下,昆仑万维推出了SkyReels平台。SkyReels不仅集成了剧本生成、角色定制、分镜设计、视频拍摄与合成等全流程功能,还通过自研剧本大模型SkyScript、分镜大模型StoryboardGen以及创新平台WorldEngine,实现了AI短剧制作的全面升级。

剧本生成

SkyReels的剧本大模型SkyScript经过了专业训练,能够生成结构完整、情节丰富的剧本。用户只需输入一个概念或故事创意,系统便能自动生成符合要求的剧本,并支持用户上传现成剧本进行润色和优化。SkyScript通过学习高质量短剧的数据集,掌握了观众偏好的“爽点”,从而生成更具吸引力和流量的剧本。

角色定制与分镜设计

在角色定制环节,SkyReels支持用户输入相应要求(包括角色配音),一键生成角色形象。同时,系统还会根据剧本内容自动生成分镜图片和对应的文字脚本,大大提高了制作效率。分镜大模型StoryboardGen能够确保角色、场景在不同分镜中的一致性和连续性,解决了传统AI生成短剧中常见的角色形象不一致问题。

视频拍摄与合成

SkyReels通过将AI 3D引擎与视频大模型深度融合,实现了从分镜到连续视频的自动转换。生成的场景和人物更加生动、一致,并支持1080P 60帧视频输出,确保观众能够享受到高质量的观影体验。此外,SkyReels还提供了丰富的背景音乐和音效选项,用户可以一键添加,让作品更加完美。

技术创新支撑

SkyReels的成功离不开其背后的三层技术创新:

  1. 剧本大模型SkyScript:通过亿级的高质量短剧结构化数据集训练,确保生成剧本的专业度和可控性。
  2. 分镜大模型StoryboardGen:基于多智能体框架,将分镜的不同元素分解为多个智能体处理,增强分镜制作过程中的可控性和一致性。
  3. 创新平台WorldEngine:业界首个将AI 3D引擎与视频大模型深度融合的平台,为创作者提供强大的“摄影机”和“影棚”,实现线上混合视频创作模式。

前景展望

SkyReels的推出不仅标志着国产大模型在短剧领域的成功落地,更预示着“一键成剧”、“一人一剧”时代的到来。这一革命性的工具有望带来AI短剧用户生成内容(UGC)与专业用户生成内容(PUGC)的爆发式增长,推动短剧内容创作与消费市场的进一步快速增长。

作为昆仑万维AI应用层产品矩阵中的最新成员,SkyReels的推出也体现了昆仑万维在AI领域的深厚积累和前瞻布局。未来,随着技术的不断迭代和市场的不断拓展,SkyReels有望成为AI短剧创作领域的佼佼者,引领整个行业的发展方向。

SkyReels邀请注册现已开启!直接输入你的手机号获得一个验证码即可!(稀缺资源,上车要快!)


声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,请联系我们快速处理。