Google DeepMind 发布 Gemini Omni Flash,支持对话式视频编辑
Introducing Gemini Omni
Google DeepMind 发布 Omni 家族首个模型 Gemini Omni Flash,可组合图像、音频、视频和文本作为输入生成高质量视频,并通过自然语言多轮对话编辑视频。
Gemini Omni Flash 是一款能够从任意输入创造任何内容的模型——从视频开始。
去年,Nano Banana 将 Gemini 的智能带入了图像生成与编辑领域。自那以后,它已帮助数百万人修复老照片、根据草图进行设计,并以过去无法实现的方式将想法可视化。从一开始,我们就将 Gemini 打造为原生多模态模型,而现在,我们正迈出下一步。
我们推出 Gemini Omni,让 Gemini 的推理能力与创作能力相结合。Omni 是我们的新模型,能够从任意输入创造任何内容——从视频开始。借助 Omni,你可以将图像、音频、视频和文本作为输入组合起来,并生成以 Gemini 的现实世界知识为基础的高质量视频。你还可以通过对话轻松编辑视频。
今天,我们推出 Omni 家族的首个模型:Gemini Omni Flash,登陆 Gemini 应用、Google Flow 和 YouTube Shorts。未来我们将支持图像和音频等输出模态。以下是 Omni 的特别之处:
通过对话编辑你的视频
Gemini Omni 为你提供了一种更轻松的视频编辑方式——使用自然语言。每条指令都建立在上一条之上。你的角色保持一致,物理规律依然成立,场景也记得之前发生的一切。
改变你周围的世界。 改变特定的事物,或者改变一切。你的视频成为你原本无法亲自拍摄之物的起点。
提示词:把雕塑变成由泡泡构成的。
重新构想动作。 拿一段你拍摄的视频,只需让 Omni 改变正在发生的事情。编辑动作、添加新角色或物体,或将某个瞬间变成意想不到的东西。
在多轮编辑中不断完善你的视频。 改变环境、角度、风格甚至具体细节,同时始终不丢失原始场景的脉络。滑动轮播图,看看这些编辑如何层层叠加。
将想法变为现实,以 Gemini 的世界知识为基础
Gemini Omni 不仅能构建看起来真实的场景,它还会推理接下来应该发生什么。它将直观的物理理解与 Gemini 在历史、科学和文化背景方面的知识相结合,弥合了从照片级真实感到有意义叙事之间的差距。
创建物理效果更准确的视觉内容。 Omni 对重力、动能和流体动力学等力有了更直观的理解,让你能够创建更逼真的场景。
提示词:一颗弹珠在连锁反应式轨道上快速滚动,连续平滑镜头。
融合知识与创造力。 Omni 借助 Gemini 的知识,以远超模式匹配的方式将语言、图像和意义连接起来。
提示词:视频展示字母表中的物品。每个字母对应一件不寻常的物品,摆放在桌子上(比如 C 对应水豚 Capybara,D 对应迪斯科球 disco globe,L 对应熔岩灯 Lava Lamp)。全部 26 个字母必须由 26 件物品呈现,并配有显示该字母的对应下三分之一字幕条。同一时间只出现一件物品和一个下三分之一字幕条。每个下三分之一字幕条都必须看起来像是用黑色马克笔写在纸条上,位于左下角。快速切换,24FPS 下每件物品约 9 帧。最后一帧是一张写着“THE END”的纸条。整个视频配以平静流畅的音乐。
让复杂想法可视化。 Omni 可以根据简短提示词创作引人入胜的讲解内容,生成能够拆解更复杂想法的视觉画面。
提示词:黏土动画风格的蛋白质折叠讲解,所有东西都由黏土制成,没有手,定格动画,准确
从任意组合的输入创建视频
引用任何内容。 Omni 可将任何参考——图像、文本、视频或音频——转化为单一、连贯的输出。虽然音频最初仅支持语音参考,但我们很快会推出其他类型的音频输入。
从你已有的内容开始。 借助输入参考,你可以使用角色、场景或绘画的图像,以符合你构想的方式进行创作。
应用风格、动态或效果。 通过输入参考来定义视觉语言,或直接用自然语言描述。Omni 会融合输入参考,生成连贯的片段。
用你自己的数字虚拟形象创建视频
我们致力于负责任地开发 AI,并制定了明确的政策来保护用户免受伤害,并规范我们 AI 工具的使用。首先,你可以使用虚拟形象用自己的声音创建视频,虚拟形象会创建你的数字版本,让你能够生成外观和声音都像你的视频。除了虚拟形象功能外,在通过编辑视频来更改音频和语音方面,我们仍在努力测试,并更好地了解如何负责任地将这一能力带给用户。
所有使用 Omni 创建的视频都包含我们不可感知的 SynthID 数字水印。你可以通过 Gemini 应用、Chrome 中的 Gemini 和 Google 搜索轻松验证视频是否由 Gemini Omni 生成。你可以在我们的博文中进一步了解我们如何扩展内容透明度和验证工具,帮助你了解网络上的内容是如何创建和编辑的。
立即试用 Gemini Omni
今天,我们推出 Omni 家族的首个模型——Gemini Omni Flash。Gemini Omni Flash 今天起通过 Gemini 应用和 Google Flow 面向全球所有 Google AI Plus、Pro 和 Ultra 订阅用户推出。从本周开始,它还将免费向 YouTube Shorts 和 YouTube Create 应用上的用户推出。
未来几周,我们还将通过 API 将其推广给开发者和企业客户。
合集
I/O 2026
以下是我们在 Google I/O 2026 上宣布的全部内容。
查看更多
在收件箱中获取 Google 的最新消息
订阅我们的新闻通讯,获取产品更新、活动信息、特别优惠等。
你的信息将按照Google 隐私政策使用。你可以随时选择退出。
来源:Google DeepMind · deepmind.google