SkyReels:创新的AI短剧创作平台
一、SkyReels的定义与概述
SkyReels是昆仑万维于2024年8月19日推出的全球首个集成AI视频生成和3D引擎的系统,是一个AI短剧创作平台1。它将脚本创作、角色定制、故事板设计与电影合成无缝集成,提供一站式解决方案,让创作者能够轻松打造出高质量的AI视频作品。该平台支持从史诗奇幻到现代家庭喜剧等各种题材,能够将创作者的初步想法转化为完整的视觉故事。
SkyReels集成了昆仑万维自研剧本大模型SkyScript、自研分镜大模型StoryboardGen、自研3D生成大模型Sky3DGen,以及将AI3D引擎与视频大模型深度融合的创新平台WorldEngine。WorldEngine平台注重细节的精确控制,如灯光和物理模拟,使视频创作不再局限于简单的内容生成,而是进入了更为精细的视觉表达领域,这种在线混合视频创作模式将AI的想象力与精确的技术控制完美结合1。
二、SkyReels的用途
(一)创作流程一体化
SkyReels的主要用途在于它能够使视频创作的各个环节一体化。从剧本创作开始,它可以全自动脚本生成,用户只需输入一个概念,系统就能自动输出结构完整、情节丰富的剧本。而且,如果用户已有剧本,还可进行自动整理与润色。在角色定制方面,它能根据剧本自动推荐合适角色,用户也可自定义角色形象、音色等。分镜生成上,根据剧本内容一键生成分镜图片和对应的文字脚本,并且用户可以自由调整分镜、镜头角度、运镜方式等参数。最后,它还能自动将分镜转换为连续高清视频(1080P60帧),单次可生成视频长度达180秒,并且自动整合所有创作成果,一键导出和分享,支持多种格式下载,方便后期编辑7。
(二)满足不同创作者需求
- 对于专业创作者
- 它是一个强大的创作工具。专业的编剧、导演等可以利用SkyReels的各种功能提高创作效率。例如,在剧本创作环节,通过SkyScript – 100M数据集和StoryboardGen的DiT – MoE架构,能够生成高质量、具备行业级视觉叙事能力的剧本。在分镜制作方面,StoryboardGen模型能够将剧本拆解并汇集至故事板智能体生成完整分镜,保证人物与场景的可控性和一致性,创造出高质量的工业级分镜。对于3D场景的创作,Sky3DGen大模型能够生成多样化的3D元素和场景,还提供实时的3D场景交互能力,方便专业创作者构建3D虚拟影棚进行虚拟拍摄15。
- 对于非专业创作者
- 极大地降低了AI视频创作的门槛。非专业用户无需具备专业的编剧、导演、剪辑等技能,就能轻松制作出自己的短剧。例如,普通用户想要创作一个小短剧,只需输入一个简单的创意概念,如“一个年轻人在奇幻森林中的冒险”,SkyReels就能自动生成剧本、分镜、人物对白与BGM,用户再根据自己的喜好调整角色形象、音色等,就能生成一部属于自己的短剧,让更多人能够参与到视频创作中来,推动一人一剧时代的到来1。
(三)拓展创作题材与风格
SkyReels支持多种视觉风格和声音选择,无论是动漫风格、现实主义、吉卜力风格等都能实现,并且能够满足不同题材的创作需求,从奇幻大片、凄美虐恋到爆笑喜剧等各种类型的短剧都可以通过这个平台创作出来。这使得创作者能够在不同的风格和题材之间自由切换,激发更多的创意灵感,创作出更加多样化的作品20。
三、SkyReels相关案例
(一)官方示例
昆仑万维官方分享了一段AI短剧DEMO,故事是关于一天,敏感内向的男孩小杰独自走在街头,却意外偶遇了一只不属于地球的灵动小生物——它那一身亮橙色皮毛在阳光下闪闪发亮。可小杰不知道的是,这只毛茸茸的小生物,竟是实验室里逃走的424试验品。这个案例展示了SkyReels从剧本创作到角色设定,再到分镜和视频合成等全流程的创作能力,通过输入简单的创意概念,SkyReels能够生成完整的短剧内容,包括情节、人物对白、背景音乐等元素都可以自动生成,并且可以将内容转换为1080P60帧的高清视频13。
(二)潜在的商业应用案例
- 广告宣传领域
- 企业可以利用SkyReels创作吸引人的广告短剧。传统的广告制作往往需要投入大量的人力、物力和时间成本,从策划创意、拍摄到后期制作。而SkyReels可以根据企业的产品特点和宣传需求,快速生成广告短剧的剧本,定制角色形象来展示产品,选择合适的分镜和视觉风格,并且自动添加适合的背景音乐和音效。例如,一家新的科技公司想要推广一款智能手表,SkyReels可以生成一个短剧,主角戴着这款智能手表在各种场景下使用其功能,如运动时监测心率、接收信息等,以生动有趣的方式展示产品优势,而且制作周期短、成本低,可以快速推向市场,吸引消费者的关注。
- 游戏开发领域
- 游戏开发者可以用SkyReels快速生成游戏剧情动画或角色介绍视频。在游戏开发过程中,需要制作大量的宣传视频、剧情动画等内容来吸引玩家。SkyReels可以根据游戏的世界观、角色设定等信息快速生成高质量的视频内容。比如一款角色扮演游戏,SkyReels可以生成各个角色的介绍视频,展示角色的外貌、技能、性格特点等,还能制作游戏中的剧情动画片段,如游戏中的重要任务情节、过场动画等,增强游戏体验,提高游戏的吸引力和宣传效果。
四、如何使用SkyReels
(一)访问与准备
- 首先需要访问SkyReels的官网,申请内测提交表单后才能使用平台的功能。这是进入SkyReels创作世界的第一步,通过申请内测,用户能够提前体验平台的各种功能,并且为平台的完善提供反馈意见20。
(二)创作流程操作
- 选择创作类型
- 根据自己想要创作的短剧类型,如情感剧、喜剧等,选择合适的创作类型。这一步是确定创作方向的重要环节,不同的类型会影响后续的剧本创作、角色设计等环节的风格走向。例如,如果选择情感剧类型,SkyReels在生成剧本时会更多地倾向于构建情感冲突、人物关系等符合情感剧特点的内容。
- 剧本生成
- 利用SkyReels的剧本生成功能,AI将根据用户输入的概念或故事创意自动创建一个结构完整、情节丰富的剧本。用户也可以上传现成的剧本,让AI进行润色优化。在输入创意时,可以是一个简单的主题,如“校园中的友情故事”,SkyReels就会基于这个主题生成包含人物、情节、矛盾冲突等元素的剧本20。
- 角色设计
- 输入角色的描述和要求,使用AI一键生成角色形象及配音。例如,如果想要一个勇敢、乐观的少年角色,并且希望他的声音富有活力,就可以将这些要求输入到SkyReels中,平台会根据用户的要求生成相应的角色形象和合适的配音,提升制作效率,并且还可以根据需要进一步调整角色的外观、音色等细节。
- 分镜设计
- AI根据剧本内容生成分镜图片和对应的文字脚本。这一过程是将剧本中的情节以分镜的形式可视化,每个分镜都有对应的文字描述,清晰地展示出场景、人物动作、镜头角度等信息。如果在生成的分镜中有不符合预期的地方,用户还可以修改文字描述来调整分镜效果,比如改变场景的地点、人物的动作姿态等,以确保分镜能够准确地表达剧本的情节内容20。
- 视频合成
- 使用AI3D引擎与视频大模型,将分镜自动转换为连续视频。在这个过程中,SkyReels会利用其技术优势,将分镜按照顺序组合起来,并添加必要的转场效果等,使视频流畅自然,同时还能自动将视频转换为1080P60帧的高清格式,确保视频的质量和观看体验。
- 背景音乐和音效
- 可以选择让AI根据剧本题材和场景自动推荐背景音乐和音效,然后一键添加到视频中。例如,对于一个悬疑题材的短剧,SkyReels可能会推荐一些节奏紧张、神秘氛围的背景音乐,用户可以直接采用推荐的音乐,也可以从平台提供的音频素材库中选择其他合适的音乐,为视频增添氛围和情感色彩。
- 最终编辑
- 对生成的视频进行最后的编辑和调整,确保满足自己的创作要求。这一步可能包括对视频的细节进行检查,如检查画面是否有瑕疵、音频是否与视频同步等,还可以对视频进行一些个性化的调整,如调整视频的色彩、亮度等参数,使视频更加完美。
- 导出和分享
- 完成编辑后,一键导出视频,并可分享至抖音等社交媒体平台。SkyReels支持多种格式的导出,方便用户根据不同的需求保存视频,然后可以将自己创作的短剧分享到各个社交平台上,与更多的人分享自己的创意成果。
五、SkyReels的评价
(一)积极评价
- 功能强大且全面
- SkyReels集成了多个强大的功能模块,从剧本生成、角色定制、分镜设计到视频合成等全流程都能涵盖。例如,它的全自动脚本生成功能,用户只需一个概念就能得到完整剧本,这对于创作者来说是非常便捷的。在分镜生成方面,能够根据剧本一键生成分镜图片和文字脚本,并且还能进行灵活调整。同时,它还支持角色形象、音色与分镜的自定义调整,满足了创作者多样化的需求。与市场上其他类似的创作工具相比,SkyReels的功能更加全面,能够提供一站式的创作解决方案,无需创作者在多个工具之间切换来完成一个作品的创作7。
- 降低创作门槛
- 极大地降低了AI短剧创作的门槛,无论是专业内容创作者还是非专业用户都能轻松上手。对于非专业用户来说,不需要具备专业的编剧、剪辑等技能,就能创作出自己的短剧。例如,普通的短视频爱好者可以利用SkyReels将自己的创意快速转化为视频作品,这有助于激发更多人的创作热情,推动AI短剧用户生成内容(UGC)与专业用户生成内容(PUGC)的大幅增长,有望带来短剧内容创作与消费市场的进一步快速增长。而且,它的操作流程相对简单,按照步骤进行操作,即使是没有经验的新手也能在较短时间内掌握并制作出自己满意的作品1。
- 技术创新
- SkyReels在技术上有很多创新之处。它集成了AI3D引擎与视频大模型深度融合的WorldEngine平台,这个平台注重细节的精确控制,如灯光和物理模拟,使视频创作进入更为精细的视觉表达领域。例如,在3D场景创作中,可以实现更真实的光照效果和物理模拟效果,提升了视频的质量和视觉效果。同时,它的剧本大模型SkyScript构建了亿级的高质量短剧结构化数据集SkyScript – 100M,能够生成高质量的故事情节,这在剧本创作方面是一个很大的技术优势。另外,分镜生成大模型StoryboardGen的专项多智能体架构,能够有效保证人物与场景的可控性和一致性,创造出高质量的工业级分镜,这些技术创新使得SkyReels在AI短剧创作领域处于领先地位15。
- 创作效率提升
- 显著提高了创作效率。创作者可以在较短时间内完成从剧本创作到最终影片合成的整个视频制作流程。例如,传统的短剧制作可能需要数天甚至数周的时间,而使用SkyReels,从输入创意到生成完整的短剧可能只需要几个小时甚至更短的时间。它的单次可生成视频长度达180秒,相比其他同类产品有显著突破,这也为创作者提供了更多的创作空间,能够在一个视频中展示更丰富的内容,而且自动将分镜转换为连续高清视频,减少了创作者手动剪辑的时间和工作量,一键整合所有创作成果并快速导出和分享,也进一步提升了创作效率7。
(二)消极评价
- 生成结果不完全符合预期
- 在使用过程中,存在生成的视频可能并不完全符合用户预期的情况,需要进行一定的修改和调整。例如,虽然剧本生成是基于一定的算法和数据,但可能在情节的连贯性、故事的逻辑性等方面存在一些小问题,或者在角色形象的生成上与用户心中的想象存在偏差。这可能需要用户花费额外的时间来对生成的内容进行修改完善,在一定程度上影响了创作的流畅性26。
- 自定义选项有限
- 虽然SkyReels提供了丰富的素材和插件,但有时候用户还是希望能有更多的自定义选项来满足特定需求。比如在角色定制方面,可能对于一些非常特殊的角色外貌或性格特征的定制还不够灵活,或者在视频的特效添加方面,现有的特效种类可能无法满足一些用户对于独特视觉效果的追求,这可能会限制一些创意独特的创作者的发挥空间26。
数据评估
本站i For AI – 人工智能AI工具,一站式导航提供的SkyReels都来源于网络,不保证外部链接的准确性和完整性,同时,对于该外部链接的指向,不由i For AI – 人工智能AI工具,一站式导航实际控制,在2024年11月20日 下午1:50收录时,该网页上的内容,都属于合规合法,后期网页的内容如出现违规,可以直接联系网站管理员进行删除,i For AI – 人工智能AI工具,一站式导航不承担任何责任。