AI视频生成在过去两年经历了从模糊动图到高清短片的快速进步,但始终面临一个核心瓶颈:生成的视频只能停留在单镜头、短时长的层面,无法实现真正的叙事级长视频创作。2026年7月,香港中文大学与快手可灵团队联合发布的ShotStream框架,有望打破这一僵局。该研究首次实现了实时流式多镜头长视频生成,已被计算机视觉顶级会议ECCV 2026接收,训练和测试代码以及模型均已开源。
ShotStream的核心创新在于它将多镜头合成重新定义为一个基于历史上下文的下一镜头生成任务。传统的视频生成模型每次生成都是独立的,镜头与镜头之间没有任何连贯性。ShotStream引入了镜头级上下文编码器,能够在生成下一个镜头时参考之前所有镜头的视觉内容和叙事走向,从而保证多镜头之间的风格一致性和叙事连贯性。
在技术实现上,ShotStream包含三个关键模块:全局叙事状态跟踪器负责维护整个故事的语义状态,包括角色、场景、时间线等信息;镜头转换预测器根据当前叙事状态和用户输入的流式提示词,预测下一个镜头应该聚焦的内容和视角;内容生成器则基于预测结果生成具体的视频帧。这种"先想后做"的架构设计确保了长视频生成的有序性和可控性。
ShotStream还支持用户动态流式提示词指导。在视频生成过程中,用户可以通过自然语言实时调整叙事走向,就像和一位导演在片场对话一样。这一交互方式大幅提升了AI视频创作的可操作性,使创作者能够在生成过程中不断调整故事方向,而不像传统方式那样需要生成完整视频后再从头修改。
ShotStream的出现标志着AI视频生成从"片段级"向"叙事级"的关键跨越。当前市面上主流的AI视频工具如可灵AI、Runway、Pika等都聚焦于单镜头视频生成,用户需要手动拼接多个片段来完成一个叙事视频。ShotStream的实时流式多镜头能力有望消除这一拼接环节,使创作者能够直接描述一个故事,AI自动将其拆解为多个连贯镜头的叙事视频。
AI视频在影视制作中的应用将因此迈上一个新台阶。目前AI视频在影视行业主要用于概念预览和特效辅助,ShotStream的多镜头叙事能力使其在短视频创作、广告制作和自媒体内容生产等场景中具备了更加完整的可用性。对于不想学习专业剪辑软件的创作者来说,描述故事的需求就能直接生成叙事视频,门槛降低了几个量级。
值得注意的是,ShotStream是在可灵AI的技术生态基础上开发的,这意味着其研究成果可以相对平滑地迁移到可灵的生产环境中。快手可灵团队已在可灵AI的产品中集成了多项AI视频前沿研究成果,ShotStream有望在不久的将来出现在可灵AI的产品线中,为可灵的数亿用户提供多镜头叙事视频的生成能力。
2026年下半年,AI视频赛道的主旋律之一是4K画质的全面竞速。在ShotStream发布前后,Runway推出了原生4K输出能力,Pika升级了高清模式,国产的Seedance也实现了4K分辨率的支持。ShotStream选择在这个时间节点切入多镜头叙事赛道,而非单纯追求画质提升,体现了一个差异化的产品策略。
对于AI视频创作而言,单纯的高清画质如果没有叙事内容的支撑,价值是有限的。ShotStream的定位是在提供合理画质的基础上,重点攻克视频内容的叙事连贯性问题。这一策略选择与可灵AI的产品理念一脉相承:可灵AI一直强调AI视频工具应该服务于内容创作本身,而非单纯炫技。
从更大的视角来看,ShotStream和同期发布的Pika Director's Suite、Runway Agent 2.0等产品一起,构成了AI视频从生成工具向创作平台的系统性进化。如果说2025年是AI视频"能生成"的元年,2026年就是AI视频"能创作"的元年。ShotStream的多镜头叙事能力将为这一转变提供关键的技术支撑。
ShotStream的另一个重要贡献在于它选择将训练代码、测试代码和模型权重全部开源。这在整个AI视频研究社区中引起了广泛关注。在AI视频领域,开源的做法并不普遍,大多数主流视频生成模型都是闭源的。ShotStream的开源策略为学术研究者和独立开发者提供了可复现的实验基准,降低了多镜头视频生成研究的入门门槛,有望加速整个领域的研究进度。
对于可灵AI而言,开源ShotStream也有着更深层的战略考量。通过开放核心技术,可灵AI正在构建一个围绕其技术生态的开发者社区。当更多的研究者和开发者基于ShotStream进行二次开发和应用创新时,这些创新成果最终有可能反哺到可灵AI的商业产品中。这种"开源建立生态、闭源赚取收入"的模式在AI行业中已有成功先例,ShotStream有可能成为可灵AI通往这一模式的关键跳板。