观看记录
  • 我的观影记录
  • 暂无观看影片的记录
  • 清空

昆仑万维:AI短剧平台SkyReels将于12月在美上线,10分钟生成2分钟短剧

2024-11-14 03:02:40 589阅读

昆仑万维宣布,旗下AI短剧平台SkyReels将于12月10日正式在美国上线。

SkyReels于今年8月19日推出,官方称是全球首个集成视频大模型与3D大模型的AI短剧平台。

SkyReels平台集成了昆仑万维自研剧本大模型SkyScript、自研分镜大模型StoryboardGen、自研3D生成大模型Sky3DGen,以及业界首个将AI 3D引擎与视频大模型深度融合的创新平台WorldEngine。

昆仑万维自称,在过去的几个月中,SkyReels取得了多项突破性的进展。

在剧本生成方面,SkyReels丰富了海量的爆款创意模板。其中剧本大模型生成能力大幅提升,尤其是优化了短剧的爽点生成能力,当前生成效果平均在人工剧本评级中可达到A甚至S的评级。

在角色生成方面,研发团队增加了海量的AI演员库,写实逼真。同时构建了细粒度的演员属性标签,基于多模态大模型能力,智能帮助用户找到最适合剧本人物的形象。

在分镜生成方面,SkyReels AI 称将分镜师的专业经验输入至分镜生成大模型,大幅提升了分镜连贯性和故事呈现能力。此外,也基于上下文增强的分镜图像生成,提高了分镜人物一致性。

在视频生成方面,SkyReels基于对分镜内容的精细化理解,构建了更加智能的视频生成智能体,不同镜头类别调度使用不同参数量级的视频生成模型,视频生成成功率大幅提升21%;5s 30fps的视频生成时长从平均5分钟降至平均2分钟级别;精准运镜控制能力得到了大幅增强。

在BGM和TTS匹配方面,SkyReels AI 称构建了海量带情感的演员音色库以及短剧BGM库,并基于多模态大模型和构建的细粒度标签体系,让匹配精准度提升了35%。

在视频内容创作过程中,据SkyReels团队介绍,他们已经实现了在10分钟内完成从剧本到角色、再到分镜生成和完整的两分钟短剧生成的全流程。

此外,还新增了3D交互编辑、AI全身动辅、演员教学库、演员衣橱、人物定制能力等特色功能。昆仑万维表示,SkyReels AI 短剧平台计划在未来几个月内,通过与北美当地的内容创作者和制作团队合作,进一步丰富内容,提升用户体验。同时,平台也将积极探索与北美各大媒体平台的合作机会,以实现更广泛的市场覆盖。