短剧生态的迅猛增长,已逐渐成为视听新势力。8月19日,昆仑万维发布全球首个集成视频大模型与3D大模型的AI短剧平台SkyReels。平台搭载了昆仑万维自研剧本大模型SkyScript、自研分镜大模型StoryboardGen以及业界首个将AI 3D引擎与视频大模型深度融合的创新平台WorldEngine,实现“一人一剧”创作自由,让每个人更好地塑造和表达自我。据介绍,作为一款集剧本生成、角色定制、分镜设计、视频拍摄与合成于一体的AI驱动全流程短剧创作平台,SkyReels彻底颠覆了传统短剧创作模式,为用户提供了前所未有的便捷与高效,让高质量短剧的创作与分享变得触手可及。有评论指出,SkyReels的发布不仅标志着国产大模型在短剧领域的成功应用与落地,更预示着全球短剧创作生态即将迎来一场由AI引领的深刻变革。从高效创作到沉浸式体验 SkyReels引领短剧革新在国家政策的引导下,短剧领域迎来高速发展,数据显示,截止2023年11月,国内已备案的微短剧数量超过4000部,日均流水高达8000万元。与此同时,国海证券《中国短剧出海深度报告:掘金蓝海新赛道》进一步指出,短剧出海仍处蓝海,长期空间有望达360亿美元。短剧之所以能够实现如此迅猛的增长,离不开其独特的创作模式。这些短剧主要依托现成的网络小说进行改编,编剧只需选取小说中的部分章节,根据短剧特点进行流水线式改编,因此短剧的研发具有模板化、时间短的特点。然而传统编剧创作往往受限于产能,难以保证短剧产出效率和爆款率。rame class="video_iframe rich_pages" data-vidtype="2" data-mpvid="wxv_3597946060599148555" data-cover="http%3A%2F%2Fmmbiz.qpic.cn%2Fmmbiz_jpg%2FCQobkVCtyvGtrjGhvTAUyp0JIcJLjM0JCfk3yuEsaO521gyALfIHqWu5icPdaHKLc7qEGWRQdS9SE65yPYvPbDw%2F0%3Fwx_fmt%3Djpeg" allowfullscreen="" frameborder="0" data-ratio="2.096296296296296" data-w="2264" style="border-radius: 4px;" data-src="https://mp.weixin.qq.com/mp/readtemplate?t=pages/video_player_tmpl&action=mpvideo&auto=0&vid=wxv_3597946060599148555">rame>SkyReels产品操作界面Demo
为解决这一问题,SkyReels平台引入SkyScript自研剧本大模型,不仅汇集了无数精彩的短剧剧本,还针对短剧爽点和情绪变化做了精心的标注。此外,短剧题材的多样化是大势所趋,昆仑万维还创新性地构建了内容重复检测的智能体系统,确保SkyScript生成的剧本将具有高度的原创性和艺术性。SkyScript剧本大模型技术原理图
记者通过申请内测体验SkyReels发现,SkyReels极大地降低了用户创作门槛。用户只需通过输入想要创造的故事概念,AI大模型便能通过快速读取大量小说一键生成完整剧本,并且支持自动整理与润色,操作简便快捷。系统会根据创意提示自动生成一份符合要求的剧本,还会摘要出所涉人物小传,为后面的角色设计做准备。
更令人惊喜的是,SkyReels还满足了用户的个性化定制的需求,允许用户自由调整角色设定、音色选择及分镜布局。通过剧本内容,平台可以一键生成分镜图片和对应的文字脚本,用户仅需等待1-2分钟即可查看每个镜头的效果。昆仑万维StoryboardGen分镜大模型技术原理图
这一技术革新的背后,得益于昆仑万维自研分镜大模型StoryboardGen强力支持。该模型将影视动画等素材逆向处理,得到高质量工业级分镜数据集,并设计了分镜多智能体框架,实现了场景、镜头、角色、角色动作等的高质量可控生成。特别是基于DiT的渐进式生成框架,有效提升了分镜信息的密度和视觉叙事表达能力。尽管短剧在前期投入、制作门槛及周期上具有显著优势,但高水平的制作与叙事能力依然是其核心竞争力所在。为此,昆仑万维将业界首个AI 3D引擎与视频大模型深度融合的创新平台WorldEngine植入其中,为用户提供了从3D生成、视频生成到3D与视频混合创作的全方位解决方案。在WorldEngine的加持下,用户可以轻松构建3D虚拟影棚,实现虚拟拍摄的梦幻体验。同时,平台支持视频中的任意元素自由选择使用3D AI引擎或视频大模型生成,自动推演角色表演,确保人物表情、动作、台词的协调一致,极大地提升了故事的表现力与观众的代入感。rame class="video_iframe rich_pages" data-vidtype="2" data-mpvid="wxv_3597944083353911298" data-cover="http%3A%2F%2Fmmbiz.qpic.cn%2Fmmbiz_jpg%2FCQobkVCtyvGtrjGhvTAUyp0JIcJLjM0JlEaZJe2vO6lbDZzd6L5UwRcTriaCVytkpibaKrdMWlgebafAc6VsheNg%2F0%3Fwx_fmt%3Djpeg" allowfullscreen="" frameborder="0" data-ratio="1.7777777777777777" data-w="1920" style="border-radius: 4px;" data-src="https://mp.weixin.qq.com/mp/readtemplate?t=pages/video_player_tmpl&action=mpvideo&auto=0&vid=wxv_3597944083353911298">rame>除了内容制作,SkyReels还在后期和内容推广与反馈等环节为短剧制作方提供帮助。平台在生成速度、图文一致性等方面均表现出色,最终输出的视频支持1080P 60帧高清画质,单次可生成视频长度达180秒,相比Sora单次可生成60秒视频、可灵单次可生成10秒视频,有显著突破。同时,SkyReels支持用户将作品一键发布至抖音等社交媒体平台,让短剧的“创意-创作-分享”全流程变得更加便捷高效。据悉,SkyReels的发布不仅极大地简化了短剧视频的制作流程,还显著降低了技术门槛,激发更多的人参与到短剧创作中来。据国海证券研究报告,相对于传统的短剧拍摄,对剧本专业性、演员演技、拍摄设备和技术、服道化等都有要求,且拍摄周期耗时一周,单部投资约30万元。SkyReels平台在成本上实现了革命性的降低,同时内容生成速度也提升了数个量级。作为一站式短剧智能创作平台,SkyReels将原本以周为单位计算的制作周期大幅缩短至小时级,极大地提高了创作效率,即便是一个人也能独立完成从创意构思到成品输出的全过程。正如昆仑万维创始人周亚辉此前所言:“我们要用AI把人类创作的门槛降得足够低,让人们更充分地实现自我表达。”这一理念在SkyReels平台上得到了生动体现。事实上,昆仑万维近年来一直在AGI与AIGC领域的深耕布局,构建了一个涵盖AI大模型、AI搜索、AI音乐、AI视频、AI社交、AI游戏等多元业务的强大矩阵,已成为国内多模态与工程能力领先、布局最全面的人工智能科技企业之一。自2020年起,昆仑万维便紧跟AI浪潮,组建专业团队致力于GPT-3大模型研发,重点发展AGI和AIGC业务。2023年4月17日,公司发布了自主研发的“天工1.0”大模型,并持续迭代升级。今年4月17日,全球首个多模态“超级模型”“天工3.0”问世,采用4000亿参数MoE混合专家模型架构。值得一提的是,今年4月2日,昆仑万维还发布了国内唯一公开可用的AI音乐生成大模型「天工SkyMusic」,标志着中国自研大模型技术在AIGC领域的全球领先地位。不止于此,AI技术的兴起不仅消除了语言障碍,更让不同公司在国际市场上的竞争聚焦于执行效率。从过往的经验中,昆仑万维推出的Opera News和StarMaker等产品,不仅验证了昆仑万维在全球市场的影响力,也为其在AI内容创作领域的布局提供了宝贵的经验。而今,SkyReels的横空出世,更是以其广泛的适用性和强大的灵活性,在有声小说、微短剧、广告制作等多个创作场景中展现出卓越的表现,满足了全球用户日益多样化的创作需求,将成为推动AI内容创作领域发展的重要力量。“我们的机会一是做可以泛化的垂类,二还是做全球市场,这个垂类可能是偏网文、短剧、动画的 IP 创作,相比to B,这类娱乐性的C 端方向更容易成为巨头。”昆仑万维董事长兼CEO方汉层曾提到,“不管小说、音乐、视频还是漫画,都需要本土化的产品,所以AI出海存在巨大的红利。”内测申请地址:https://skyreels.ai/beta
来源:中国网科技
新媒体编辑:徐铮