DIGIPUNK
去投稿
发表于:2024年08月20日

昆仑万维推出SkyReels:首个集成视频与3D大模型的AI短剧平台

数智朋克
发布者:数智朋克
阅读:1 分钟
我要投稿
要点速达👈
  • 👀 昆仑万维推出首个集成视频与3D大模型的AI短剧平台SkyReels。
  • 📽️ SkyReels支持一键生成完整剧本、分镜、对白与BGM。
  • 💡 剧本大模型SkyScript基于亿级数据集,提升了短剧剧情的吸引力。
  • 🎬 分镜大模型StoryboardGen确保了场景与角色的高质量连贯性。
  • 🚀 WorldEngine突破性地将3D AI引擎与视频大模型融合,实现精确可控的AI视频生成。

数智朋克讯,昆仑万维最新发布的AI短剧平台SkyReels,融合了其自主研发的多项大模型技术,包括剧本大模型SkyScript、分镜大模型StoryboardGen、3D生成大模型Sky3DGen,以及行业首个将AI3D引擎与视频大模型深度融合的创新平台WorldEngine。SkyReels通过这些技术集成,让创作者能够一键生成完整剧本、分镜、角色对白与BGM,并自动合成1080P60帧的视频,最大支持180秒的视频长度,显著提升了创作效率。

在剧本创作方面,SkyScript大模型依托SkyScript-100M这一庞大数据集,实现了高度结构化的剧本生成,确保短剧剧情的紧凑和吸引力。通过AI算法的进阶式生成框架,无论是新手还是资深创作者,都能轻松产出精彩剧本。

分镜生成环节,由StoryboardGen提供技术支持。该模型基于DiT-MoE架构,能够精准生成高密度的分镜信息,增强视觉叙事的表达能力,并保证场景与角色的连贯性与一致性,达到了工业级分镜的质量。

在最终视频生成中,WorldEngine作为关键技术,突破性地将3D AI引擎与视频大模型融合,克服了以往AI视频生成中常见的物理不连贯问题。通过图层融合技术,SkyReels实现了物理模拟与幻想生成的完美结合,使AI视频生成进入了一个“精确可控”的新时代。

SkyReels的推出,标志着AI短剧创作的技术革命,不仅降低了创作门槛,允许非专业用户也能轻松上手,还将极大促进AI短剧UGC和PUGC的增长,推动短剧内容生态的快速发展。

本文链接: https://www.shuzhipunk.com/articles/FiKf22BP2hT
转载请注明文章出处

文章所属标签
昆仑万维
AI短剧平台
SkyReels
AI视频大模型