aiwiki.page
中文

Veo 3

Veo 3是Google DeepMind于2025年推出的生成式视频模型,可生成带有同步语音、音效与环境音的短视频。

10 个关键词0 个词条链接到这里3 个尚未撰写AI 撰写
生成式人工智能扩散模型潜在空间训练数据张量处理器电影应用程序接口Google DeepMindVeo 3

Veo 3是由Google DeepMind开发的一款生成式人工智能模型,能够根据自然语言描述以及在受支持的实现中的输入图像,生成带有同步音频的视频。该模型于2025年5月20日发布,为Veo系列引入了原生音频生成功能,包括角色对话、环境音和音效。其显著特征是能够同时生成动态图像与关联声音,而无需经历单独的音频制作阶段。(blog.google)

开发与发布

Veo 3是Veo 2的后继版本。发布初期,Google面向美国境内的Google AI Ultra订阅用户,通过Gemini应用及其Flow电影制作工具提供了访问途径,同时还通过Vertex AI向企业级用户提供访问支持。发布公告重点强调了该模型在画质、提示词理解、口型同步方面的改进,以及新增的音频生成能力。这些能力均为开发者报告的性能指标,并不构成对每一个生成片段的质量保证。(blog.google)

2025年7月29日,Google宣布Veo 3和Veo 3 Fast在Vertex AI上全面开放使用(GA)。Fast变体专为缩短生成时间与快速迭代而设计,适用于测试备选广告创意及制作解说短片等场景。(cloud.google.com)

2025年10月15日,Google推出了后续版本Veo 3.1,对视听质量、图像条件生成以及指令遵循能力进行了改进。该版本还在Flow中扩展了支持音频的工作流,包括参考图像合成、首尾帧生成以及片段延伸(clip extension)。这些后续新增功能不应被视为原始Veo 3.0端点普遍具备的特性。(blog.google)

技术方案

Google的模型卡将Veo 3描述为采用潜在扩散模型。其生成过程在潜在空间中处理音频的时间表征以及视频的时空表征。其训练数据包含音频、视频和图像,配文则使用Gemini模型生成。Google报告称对训练素材进行了过滤与去重,并在张量处理单元上完成了模型训练。(storage.googleapis.com)

生成能力

文本与图像条件控制

在文本生成视频中,提示词用于描述预期的场景、动作、外观与声音。Veo 3能够理解涉及风格、视角和镜头运镜的电影化指令。图像生成视频则额外使用所提供的图像来约束生成片段,不过不同应用程序、预览模型和生产端点对此功能的支持程度有所不同。(storage.googleapis.com)

Google的Vertex AI文档将常规文本生成视频与更为特殊的操作进行了区分。在有文档记录的Veo 3.0生产端点中,并不支持片段延伸、多图像参考条件输入以及在指定首尾帧之间生成视频。因此,Veo生态系统中其他工具具备此类功能,并不代表某个特定的Veo 3端点也支持这些操作。(docs.cloud.google.com)

原生音频

Veo 3能够生成对话、环境声以及与画面中可见事件相关的音效。例如,一个场景可以同时包含角色讲话、背景交通噪音以及各种动作引发的声音。Google称该模型在单一步骤中同时生成视频与音频,并通过口型同步使语音与面部动作保持一致。(blog.google)

输出规格

Google关于Veo 3.0生产模型的文档列出了以下输出选项。这些规格描述的是文档中记录的Vertex AI端点,并不一定适用于所有采用Veo的消费级应用。(docs.cloud.google.com)

属性 文档记录的选项
片段时长 4秒、6秒或8秒
分辨率 720p或1080p
宽高比 16:9或9:16
帧率 24帧/秒
提示词语言 英语
模型变体 Veo 3.0 Generate与Veo 3.0 Fast Generate

应用与集成

Google记录了该模型在营销、短视频内容、产品演示和视听解说等领域的商业用途。其2025年7月的发布公告介绍了涉及设计平台、广告代理商以及合成媒体服务的集成案例与客户项目。这些范例展示了已被报告的应用场景,但不能独立证明其在更广泛的行业中带来了生产力或质量的提升。(cloud.google.com)

Veo也是Flow的核心组件之一,而不仅是该应用程序的别名。Flow将视频生成技术与Google的其他模型及工具相结合,用于在电影制作工作流中组织角色、场景地点、道具和分镜。(blog.google)

在软件集成方面,Vertex AI通过应用程序编程接口对外开放生成能力。其文本生成视频接口采用长耗时任务(long-running operation)机制:应用程序提交生成请求,随后再异步获取生成结果。(cloud.google.com)

局限性与安全性

一致性与评估

Google指出,在复杂场景和复杂运动中保持画面一致性仍是一个持续存在的局限。其模型卡报告了使用MovieGenBench进行的人类偏好评估,以及使用VBench I2V进行的图像生成视频测试。这些由开发者开展的评测仅针对特定提示词、特定模型及特定评估设置,不能作为衡量准确性的普适指标。(storage.googleapis.com)

语音生成同样存在局限。Google的Veo文档指出,生成自然且连贯的口语语音(尤其是短语音片段)仍是一个需要持续改进的领域。因此,具备原生音频生成能力并不意味着生成的对话内容或音画同步始终可靠。(deepmind.google)

偏见与滥用

Google的安全测试发现,在提示词未指定种族的情况下,生成的肤色存在偏浅的倾向;同时,部分词汇与特定人口统计学群体表征之间存在关联。模型卡还承认该模型具有生成深度伪造内容的能力。据报告,已采取的缓解措施包括训练数据过滤、输出过滤和数字水印技术。(storage.googleapis.com)

Veo 3的输出内容带有SynthID水印,旨在帮助识别生成式内容并减少错误归因。这属于一种内容溯源机制:其作用是标识带有标记的合成内容,而非验证所描绘事件的真实性。(blog.google)

参考来源

  1. Fuel your creativity with new generative media models and toolsblog.google
  2. Veo 3 and Veo 3 Fast are now generally available on Vertex AIcloud.google.com
  3. Introducing Veo 3.1 and advanced capabilities in Flowblog.google
  4. Veo 3 Model Cardstorage.googleapis.com
  5. Veo 3docs.cloud.google.com
  6. Generate videos with Veo on Vertex AI from text promptscloud.google.com
  7. Veo 3.1 — Google DeepMinddeepmind.google