Grok Imagine Video 1.5 Prompt 指南:音画同步、公式与示例 (2026)

日期: 2026年6月4日(更新版)
作者: Jsam(Klingaio 技术团队)

Grok Imagine Video 1.5(在 xAI API 中标识为 grok-imagine-video-1.5-preview)的预览版发布标志着生成式媒体领域一个令人瞩目的里程碑。与输出静默帧的传统图像转视频(Image-to-Video)管线不同,Grok Imagine 1.5 在单个统一 Transformer 通道中联合处理视频令牌和音频波形。拟音(Foley)、环境氛围和视觉动作在生成时间线上实现内在同步。

为了帮助你充分利用创作工具,本技术指南将解析如何优化模型物理效果,使用最清晰的音画提示语法,并在每次渲染中获得卓越成果。你可以直接通过我们的 Grok Imagine 1.5 视频生成器 门户测试这些技巧。

展示 Grok Imagine Video 1.5 功能的示意图

性能与动作优势:理解模型

Grok Imagine Video 1.5 Preview 是一款 图像转视频(Image-to-Video,I2V)引擎。通过使用静态参考图像建立场景几何结构、纹理和角色身份,该模型能够生成流畅、高保真的动作,并集成高度协调的音频。

我们的亲测和社区反馈凸显了几个关键优势:

  • 一次通过同步拟音: 音效和环境声学根据视觉运动合成。当屏幕发生物理撞击时,相关音频直接绑定到特定的生成步骤。
  • 宽高比多样性: 模型原生支持多种画布输出,包括标准电影 16:9、社交优先 9:16 以及 1:1,并以高质量分辨率渲染。
  • 时间灵活性:找到最佳点(5 秒 vs. 15 秒): Grok Imagine Video 1.5 原生支持最长 15 秒的生成内容,整体输出质量在整个时长内保持相当稳健。虽然 15 秒全时长功能适用于宽幅电影摇镜和环境镜头,但 5 到 8 秒 的渲染时长是高动态动作编排和微表情口型同步的最佳甜区。在较长片段中超过 8 秒后,你可能会偶尔注意到极细微的音画同步偏差(例如嘴唇动作略微延迟),但这些情况通常几乎不可察觉,不会影响整体观看体验。

排行榜备注: Grok Imagine Video 1.5 Preview 目前位列 Arena AI 图像转视频排行榜 第一,凭借其原生音频能力获得了极高的用户偏好评分。

Grok-Imagine-Video-1.5-Preview (720p) 在图像转视频排行榜上排名第一,Elo 评分大幅跃升

构建提示:语法流程

一个常见的技术误解是 Grok Imagine 1.5 需要单独的 API 参数来处理音频。实际上,统一模型处理的是单一的连续文本序列。

然而,由于 Transformer 注意力机制根据令牌位置分配权重,使用清晰的文本分隔符将视觉编排与音频提示分开,可以防止模型将物理描述与声音生成混为一谈。

我们建议使用以下语法层级来清晰组织你的提示:

[主体动作 + 强度修饰词] + [镜头运动与景别] + [光照与氛围变化] + AUDIO:[环境噪音、动作拟音、对话指令]

提示效率对比

使用模糊形容词(如“电影级音效”)会导致引擎退回到通用背景音乐。准确的音效-动作映射对于精确同步至关重要:

提示元素标准模糊提示音画优化提示
视觉动作
(主体动作 + 强度)
铁匠在打铁。铁匠用重锤猛击发光的橙色金属,火花四溅。
镜头控制
(镜头运动与景别)
放大。微距推镜,聚焦于撞击点。
光照与氛围
(光照与氛围变化)
工作间背景。昏暗的工作环境,炽热的火光投下深邃摇曳的影子。
音频提示
AUDIO: (环境、拟音、对话)
AUDIO: workshop sounds, epic noiseAUDIO: a heavy metallic clang of a hammer, followed immediately by sizzling iron and the low hum of a forge fire, all echoing deeply within a brick-walled workshop.

5 个高级 Grok Imagine Video 1.5 提示示例(即用型)

要测试这些设置,请先用高级图像生成器(如 Nano Banana Pro 或 GPT Image 2)生成高度详细的起始帧,然后将图像和对应提示结构输入 Grok Imagine 1.5 Web App

1. 微距拟音与机械物理

适用场景:物理撞击的帧精确音画同步。

Slow-motion, macro tracking shot of water droplets dripping from a rusty pipe onto a puddle of water. Each droplet impacts the water surface, creating concentric ripples. 
AUDIO: deep hollow drip sounds, water splashing softly with high-pitched drops, distant low rumble of a thunder storm echoing outside.
  • 成功原因: 将物理撞击动词(“droplet impacts”)与特定的拟声形容词(“hollow drip”,“splashing softly”)对齐,引导模型将声波直接绑定到涟漪开始的视觉帧。

输入图像: Grok Imagine 1.5 起始图像:水管上水滴的微距镜头

生成视频:

2. 对话与口型协调

适用场景:基础语音合成与匹配的面部动画。

The detective slowly turns his head to the right and speaks directly to the camera, a subtle handheld camera shake adds tension.
AUDIO: a quiet, gravelly whisper: 'We made it. But the clock is ticking.' Faint background paper rustling, low ticking clock.
  • 成功原因: 将对话行用引号括起来,紧跟在 AUDIO: 前缀之后,有助于 Transformer 区分口语对话与环境音效,从而实现更清晰的口型同步。

3. 产品运动与环境氛围

适用场景:带有空间声学的工作室级商业美学。

The espresso cup rotates smoothly on the pedestal, camera orbiting at eye level, a warm golden hour light sweeping across the surface of the marble countertop.
AUDIO: high-pressure hiss of steam, hot espresso dripping steadily into the cup, gentle clinking of porcelain, soft background jazz.
  • 成功原因: 提示将平稳的视觉运动(旋转基座)与间歇性环境音(蒸汽嘶嘶声、浓缩咖啡滴落声)形成对比,建立起令人信服的商业级声学空间。

输入图像: Grok Imagine 1.5 输入图像:大理石操作台上奢华咖啡机,咖啡流出

生成视频:

4. 动态第一人称动作(速度物理)

适用场景:强制高速运动及对应的重低音撞击。

FPV drone shot weaving through a narrow, dark metal corridor of a starship. Red emergency warning lights flash rhythmically. A heavy steel blast door slowly slides shut.
AUDIO: loud, deep mechanical grinding of the heavy steel door sliding, warning sirens blaring, a low-frequency hum of a spaceship reactor core.
  • 成功原因: 重型环境交互(滑动金属门)与低频音频标签(“low-frequency hum”,“mechanical grinding”)配对,迫使模型渲染出沉重的、有重量感的视觉运动。

5. 多镜头序列连续性(15秒序列控制)

适用场景:将15秒生成内容分割成离散节拍。

(0-3s) Wide establishing shot of a quiet cabin in a snowy pine forest during a soft winter blizzard. 
(3-7s) Cut to an interior close-up shot of a rustic stone fireplace with crackling firewood; then, a hand slowly pours steaming hot tea into a wooden mug. 
(7-12s) Cut to an over-the-shoulder shot of a person looking out of the cozy cabin window at the falling snow, smiling gently. Glossy, warm, cinematic.
AUDIO: (0-3s) muffled howling winter wind outside, (3-7s) crisp crackling of a fireplace and a soft liquid pouring hiss, (7-12s) gentle acoustic guitar melody and a soft contented sigh.
  • 成功原因: 在视觉和音频片段内部使用严格的时间戳标签(如 (0-3s)(3-7s)),引导模型的时间窗口触发突然的转场剪辑,从而减轻多秒生成中常见的“形变”伪影。

输入图像: Grok Imagine 1.5 参考帧:冬雪中松树林里的舒适木屋

生成视频:

专业技巧:优化视频输出

1. 增强动态动作

  • 机会: 模型的默认物理擅长电影级稳态运动。
  • 优化方法: 要注入更高速度或戏剧性动作,请使用高速动词和描述性反应。例如,不要提示“一辆车驶过”,而尝试“一辆赛车高速掠过镜头,扬起一片尘雾。”

2. 保持文字和标志稳定性

  • 机会: 模型的流畅物理生成器自然优先考虑电影级运动和有机环境变化。
  • 优化方法: 如果起始帧包含复杂的品牌标识、标签或文字,配合线性镜头运动(如慢推镜或静态变焦)有助于在整个片段中保持文字的最大稳定性。

3. 专注正向提示

  • 机会: Grok Imagine 1.5 的统一 Transformer 架构专为直接的视觉和音频合成而优化。
  • 优化方法: 与其将令牌花费在负面提示列表上(如“不要糟糕的人体结构”),不如将输入完全集中于丰富的正向指令。描述你希望看到的精确视觉状态,会产生更清晰、更稳定的结果。

常见问题解答 (FAQ)

问:Grok Imagine Video 1.5 Preview 支持文本转视频(Text-to-Video)生成吗?

答: 不支持。当前的 1.5 Preview(grok-imagine-video-1.5-preview)严格是一款 图像转视频(Image-to-Video,I2V) 模型。这意味着每次生成都需要上传一张静态起始图像,作为场景几何、颜色和主体的参考。如果仅通过文本提示生成视频,你可以考虑使用专门的文本转视频(Text-to-Video,T2V)模型。

问:如何在提示中更好地引导或控制背景音效?

答: 由于该模型在同一个 Transformer 网络中联合处理视觉帧和音频波形,你只需在提示中描述声音即可影响配乐。为实现最佳同步,我们建议在提示末尾附加一个清晰的分隔符(如 AUDIO:),后跟所需背景音乐、环境噪音(如风声或人群嘈杂声)、特定动作音效(如玻璃破碎或引擎轰鸣)或简短对话行的描述。

问:该模型支持哪些图像格式、分辨率和宽高比?

答:

  • 支持的输入格式: JPG、JPEG、PNG、WEBP。
  • 支持的输出分辨率: 480p 和 720p。
  • 宽高比: 支持多种构图,包括 16:9(宽屏)、9:16(竖屏移动格式)、1:1(方形),以及 4:3、3:4、3:2 和 2:3。如果选择“auto”,系统将自动匹配上传源图像的原生尺寸。

问:如何降低生成过程中视觉失真或音画不同步的风险?

答: 根据我们的多维测试,以下调整有助于改善输出质量:

  1. 控制时长: 虽然模型支持 1 到 15 秒的渲染长度,但物理运动和音频节奏在 5 到 8 秒范围内最为稳定。较长的片段(如 12 到 15 秒)在后半部分更容易出现轻微视觉形变或细微音画漂移。
  2. 简化提示: 避免堆叠通用质量标签(如“8K”或“高度细节化”)。相反,专注于简洁的结构:“一个主要运动主体 + 一条镜头路径 + 特定动作动词”。
  3. 避免负面提示: 模型无法可靠识别负面指令(如不要包含什么)。负面提示通常被忽略,因此最好只描述你想要看到的内容。