Gemini Omni
gamedev pkg add aigd.cloud-gemini-omni概览
Gemini Omni Flash 1.2 云端视频:可由文本、起始图像或起始与结束帧生成片段,始终带声音,时长 5 至 10 秒,分辨率 360p 至 1080p,适合游戏预告片和氛围镜头。会消耗你的配额。
Google 的 Gemini Omni Flash 1.2 视频模型,由 AI Game Dev 智能体在云端运行。它能从文本、起始图像或起始与结束帧生成片段,每个片段都自带原生声音。适合预告片节拍、氛围镜头和动态主视觉图,这类场景中声音需要与画面匹配。会消耗你的 AI Game Dev 方案配额;无需 Google 账号或 API 密钥。
你可以做什么
- 制作带匹配声音的短镜头:环境音、脚步声、人群、天气。
- 让一张截图或概念美术动起来(图像生成视频)。
- 从一帧过渡到另一帧(起始帧与结束帧),例如从白天到夜晚的转场。
- 渲染用于预告片的宽屏(16:9)镜头和用于社交帖子的竖屏(9:16)镜头,从 360p 预览到 1080p。
示例请求
- “用 Gemini Omni 做一段 5 秒的片段:雨落在霓虹灯照亮的城市街道上,带雨声和远处的车流声。”
- “用 Gemini Omni 让
Assets/Art/campfire.png动起来:噼啪作响的火焰、蟋蟀声,8 秒。” - “用 Gemini Omni 做一段城堡大门打开的 360p 预览,然后把同一个镜头做成 1080p。”
变体
| 变体 | 名称 | 模式 | 时长 | 分辨率 | 声音 |
|---|---|---|---|---|---|
gemini-omni-flash-1-2 | Flash 1.2 | txt2vid, img2vid, first_last_frame | 5, 8, 10 s | 360p, 720p, 1080p | 始终开启 |
宽高比为 16:9 和 9:16,24 fps,默认时长 5 秒,默认分辨率 720p。声音无法关闭。它既不接受负向提示词,也不接受种子。
模式:txt2vid 从文本生成片段,img2vid 从你的图像开始,first_last_frame 从起始图像过渡到结束图像。
运行方式
通过 Cloud generation(aigd.cloud-media,在每次聊天中默认开启)运行:当任务合适或你点名要用时,智能体会选择这个模型。在聊天的生成预算内的任务会直接运行,不再询问(Ask before each operation 会逐个询问)。估算值是按视频每秒占你配额的百分比计算的,失败的任务不计入你的配额。你的方案能否使用它来自你的账号(Models 标签页,video_list_models);你的方案无法使用的变体会显示为锁定状态。片段会以 MP4 保存到你的项目中,绝不会覆盖已有文件。
服务器 id(/api/media 的 package_id,即其媒体模型 id):aigd.cloud.gemini-omni。
这些变体、模式和限制都来自服务器的目录(capabilities v2 中的 aigd.cloud.gemini-omni;packages/core/test/cloud-media-manifests.test.ts 会让这个包与它保持一致)。服务器只有在某个变体的提供方路由和配额用量都经过验证后才会运行它;尚在计划中的变体会列为“Coming soon”。
许可证
模型:专有。生成的片段归你所有,可按提供方针对该变体的条款使用。本包仅包含数据(不含代码),采用 Apache-2.0。
版本
| 版本 | 发布时间 | 需要应用 |
|---|---|---|
| 0.1.4最新 | 0.25.11 或更高版本 | |
| 0.1.3 | 0.25.11 或更高版本 | |
| 0.1.2 | 0.25.11 或更高版本 | |
| 0.1.1 | 0.25.11 或更高版本 |
安装
在桌面应用中安装
打开包窗口(状态栏中的包图标),选择浏览,搜索 aigd.cloud-gemini-omni,然后点击添加到项目。
还没安装应用?免费下载 AI Game Dev,支持 Windows、macOS 和 Linux。
从终端安装
在项目文件夹中使用 gamedev CLI:
gamedev pkg add aigd.cloud-gemini-omni环境要求
- AI Game Dev 0.25.11 或更高版本
gamedev pkg add aigd.cloud-gemini-omni