RUNWAY AI
CREATIVE MASTERCLASS

从入门到精通：探索 AI 视频生成的无限可能

开始学习 ↓

01. 初识 Runway

Runway 由 Cristóbal Valenzuela 等人于 2018 年创立，是 AI 生成式视频领域的先驱。它不仅是视频生成工具，更是面向创作者的云端 AI 创意套件，从 Gen-1 到 Gen-3 Alpha 持续推动着 AI 影像生成的边界。

🎬

Text to Video

输入一段文字描述，即可生成具有电影质感的视频片段。支持风格化控制与多种运镜方式。

🖼️

Image to Video

上传一张静态图片让它"动起来"。这是控制画面构图和角色一致性最稳定可靠的方法。

🎞️

Video to Video

上传实拍视频，通过提示词将其转换为动漫、粘土、油画等任意艺术风格，即"视频风格迁移"。

模型演进

模型发布时间核心升级最大时长
Gen-12023 年初首个 Video-to-Video 模型，开创视频风格迁移先河4s
Gen-22023 年中支持 Text-to-Video，画质与一致性大幅提升16s
Gen-3 Alpha2024 年更高分辨率、更强动态一致性、更丰富运镜控制10s+
Runway AI 核心架构 Runway Core Engine T2V I2V Edit V2V
Runway 核心引擎驱动四种生成模式：文生视频 (T2V)、图生视频 (I2V)、视频编辑 (Edit)、视频风格迁移 (V2V)

02. 上手准备

  • 注册与登录

    访问 runwayml.com，使用 Google 账号或邮箱注册。新用户会获得免费的初始积分 (Credits)。

  • 理解积分系统

    积分 (Credits) 是 Runway 的核心消费单位，分辨率和时长直接影响消耗量。免费版积分有限且不可累积，订阅版每月重置。

  • 熟悉工作台

    左侧为导航栏（Home、Assets、Custom Models），中间为工具推荐区和项目列表。点击对应工具即可开始创作。

  • 选择订阅计划

    根据创作频率和质量需求选择计划。建议从 Standard 起步体验，熟练后按需升级。

Preview Window Enter prompt here... Generate
界面概览：左侧导航，中间预览窗口，下方输入控制区

订阅计划对比

计划月费 (USD)每月积分视频分辨率适合人群
Free$0125720p初次体验、学习试用
Standard$126251080p个人创作者、轻度使用
Pro$2822504K专业创作者、高频使用
Unlimited$76无限4K团队 / 商业用途
⚠️ 以上价格和积分信息可能随 Runway 官方调整而变化，请以官网最新公告为准。

03. 核心功能详解

Gen-3 Alpha: Text / Image to Video

Gen-3 Alpha 是 Runway 当前旗舰模型，在写实度、动态一致性和光影处理上相比 Gen-2 有质的飞跃。

  1. 上传参考图（推荐）：强烈建议使用 Image + Text 模式，以上传的图片作为首帧，保证构图可控。
  2. 输入提示词：描述画面内容、风格、光影。例如：Cinematic shot, cyberpunk city street, rain, neon lights, 8k
  3. 设置参数：调整 Seed 值（固定随机性）、选择分辨率、设定生成时长。
  4. 生成与迭代：点击 Generate 生成短片段，满意后可延长或拼接多段。
💡 Image + Text 模式的画面可控性远高于纯文本模式，强烈推荐作为首选工作方式。

Motion Brush: 精准控制局部运动

Runway 的杀手级功能，可通过涂抹画面特定区域来单独控制其运动方向和幅度。

操作步骤

  • 在 Image to Video 模式下，点击 "Motion Brush" 图标
  • 使用画笔涂抹想移动的物体（如云朵、流水、车辆）
  • 在参数面板设置 Horizontal（水平）、Vertical（垂直）、Proximity（远近）数值
  • 数值范围 -10 到 +10，绝对值越大运动越剧烈
💡 可创建多个笔刷区域，分别控制不同物体运动，实现复杂的多层动态效果。
涂抹区域独立运动

Camera Control: 导演级运镜

无需复杂提示词，直接通过参数控制摄像机的推拉摇移，实现专业级运镜效果。

Zoom（变焦）
控制镜头推进或拉远，营造紧张感或全景感
Pan（平移）
镜头左右水平平移，适合场景横向展示
Tilt（倾斜）
镜头仰视或俯视，制造压迫感或宏大感
Roll（旋转）
镜头绕轴旋转（荷兰角），增强不安或梦幻氛围

运镜组合建议

  • 史诗感开场：Zoom In (2.0) + 低角度仰拍，适合宏大场景
  • 悬疑推进：缓慢 Pan Left + 微弱 Zoom In，营造紧张氛围
  • 梦境效果：Roll (1.5) + 柔焦风格提示词，营造超现实感

视频编辑工具集

除了生成功能，Runway 还提供丰富的 AI 视频编辑工具，覆盖后期制作全流程。

✂️

Inpainting（局部修复）

涂抹视频中的区域并替换内容，适合移除水印、替换背景元素。

🎭

Remove Background

一键移除视频背景，生成透明通道视频，便于后期合成。

🔇

Clean Audio

AI 驱动的音频降噪，去除背景杂音，保留清晰人声。

04. 提示词工程

提示词 (Prompt) 的质量直接决定生成效果，掌握其撰写技巧是用好 Runway 的核心能力。

提示词结构公式

一条高质量提示词通常由以下要素构成：

📷

镜头类型

如 Close-up shot、Wide angle、Aerial view、Tracking shot

🎨

画面描述

主体 + 动作 + 环境。如 A woman walking through a neon-lit alley

✨

风格与品质

如 Cinematic, film grain, 8K, shallow depth of field, golden hour lighting

示例对比

❌ 低质量提示词

a cat walking

过于简单，缺乏风格、光影、画质等关键描述，生成结果随机性大。

✅ 高质量提示词

Cinematic close-up shot, a fluffy orange cat walking gracefully on a wet cobblestone street, soft rain, warm street lamp lighting, shallow depth of field, film grain, 4K

明确镜头、主体、环境、光影、风格，生成结果精准可控。

负向提示词 (Negative Prompt)

Runway 提供独立的"Exclude from generation"输入框，填写不希望出现的元素。注意与 Midjourney 的 --no 参数不同，这是独立文本框而非命令行参数。

blur, distortion, watermark, text overlay, low quality, deformed

常用风格关键词速查

风格类别关键词示例
电影感Cinematic, film grain, anamorphic lens, color grading, bokeh
动漫Anime style, cel shading, vibrant colors, Studio Ghibli inspired
写实Photorealistic, hyperrealistic, natural lighting, RAW photo
赛博朋克Cyberpunk, neon lights, futuristic, dystopian, holographic
水彩 / 油画Watercolor painting, oil painting, brushstrokes, canvas texture
光影控制Golden hour, blue hour, dramatic lighting, rim lighting, volumetric fog

05. 创意工作流实例

以"制作赛博朋克风格视频片头"为例，串联所学功能展示完整创作流程。

Step 1构图 Step 2动效 Step 3增强 Step 4剪辑 Midjourney 绘图 Runway I2V Topaz 4K 增强 CapCut 配乐
全流程：MJ 绘图 → Runway 动效 → Topaz 增强 → 剪辑输出
🎨

1. 构思与绘图

使用 Midjourney 等工具生成赛博朋克风格的底图。提示词：cyberpunk street, neon lights, wet floor, futuristic, 8k

🎬

2. 赋予动态

导入 Runway Image to Video，使用 Motion Brush 涂抹霓虹灯牌和地面反光区域，分别设置不同运动参数。

📹

3. 运镜增强

开启 Camera Control，设置 Zoom In (2.0)，让镜头缓慢推进，增加沉浸感和叙事张力。

💡 工作流优化建议

  • 生成多段 4s 短片段，在剪辑软件中拼接，比直接生成长视频效果更可控
  • 每段视频的最后一帧可截图作为下一段的首帧参考图，保证画面连贯
  • 使用 Topaz Video AI 或类似工具进行 4K 超分辨率增强和补帧处理
  • 最终在 CapCut / DaVinci Resolve 中完成剪辑、调色、配乐和字幕

06. 进阶技巧

🔗

多片段一致性

固定 Seed 值，使用同一张参考图作为起点，通过微调 Motion Brush 参数生成多段素材。"尾帧截图法"（每段最后一帧作为下段首帧）是保持角色和场景连贯的关键技巧。

⚡

积分优化策略

先用低分辨率快速迭代构图和运镜方案，确定满意方案后再以高分辨率生成最终版本，可节省 50% 以上的积分消耗。

🎵

音画同步

Runway 生成的视频默认无音频。推荐使用 Suno、Udio 等 AI 音乐工具生成配乐，在剪辑软件中通过节拍对齐实现音画同步。

🧠

自定义模型训练

Pro 及以上用户可训练 Custom Models。上传 10-20 张特定风格/角色图片，训练专属模型以保持系列作品的视觉统一性。

🖥️

超分辨率流程

Runway 原生输出通常为 720p-1080p。使用 Topaz Video AI 或 Real-ESRGAN 进行后期超分至 4K，并利用光流插帧提升帧率至 60fps。

🎭

风格混搭

在提示词中组合多种风格关键词，如 Cyberpunk + Watercolor，可创造独特的混合美学效果，让作品脱颖而出。

07. 常见问题

生成的视频画面模糊或变形怎么办？

这通常是提示词不够精确导致的。解决方法：① 在提示词中加入 sharp focus, high detail, 8K 等画质关键词；② 在排除项中加入 blur, distortion, deformed；③ 使用参考图（Image to Video）模式以锁定构图；④ 尝试不同的 Seed 值。

角色在视频中突然变形或"崩坏"？

AI 视频生成目前在长时间维持角色一致性方面仍有局限。建议：① 缩短单次生成时长（4s 最稳定）；② 使用 Motion Brush 局部控制运动，减少全局形变；③ 避免复杂的多人物场景；④ 选择较新的模型版本（Gen-3 Alpha 一致性显著优于 Gen-2）。

如何让多段视频之间保持风格一致？

核心方法：固定 Seed 值 + 尾帧截图法（上段末帧作下段首帧）+ 保持核心提示词不变。有条件可训练 Custom Model 锁定风格。详见「06. 进阶技巧」。

积分消耗太快，如何更高效地使用？

低分辨率先测试再出终稿，善用 Image to Video 减少返工，4s 片段拼接优于 16s 一次生成，合理规划月度创作节奏。详见「06. 进阶技巧」。

Runway 生成的视频可以商用吗？

根据 Runway 的条款，付费订阅用户（Standard 及以上）生成的内容可用于商业用途。但建议：① 仔细阅读最新版用户协议；② 避免生成涉及特定人物肖像权的内容；③ 注意输入素材本身的版权归属问题。

Runway 与 Sora、Pika、Kling 等工具有什么区别？

各平台各有侧重：Runway 在 Motion Brush 精细控制和编辑工具链方面领先；Sora 在长视频和场景理解方面表现突出；Pika 以快速轻量生成见长；Kling（快手可灵）在中文场景和人物一致性上有优势。建议根据具体创作需求选择最适合的工具。

08. 最佳实践与资源

💡 专家级实践清单

  • 先构图后运镜：先用参考图确定构图，再用 Camera Control 和 Motion Brush 添加运动，分步迭代更高效。
  • 善用排除项：在"Exclude from generation"中填写 blur, distortion, watermark 等，有效提升画面质量。
  • 拆解长视频：10s 以上视频拆为多个 4s 片段独立生成再拼接，质量远高于一次性长生成。
  • 建立素材库：将满意的参考图、成功的提示词、Seed 值归档管理，形成可复用的创作资产。
  • 后期增强：生成视频通常 24fps / 720p-1080p，可通过 Topaz 等工具超分至 4K 并补帧至 60fps。

推荐学习资源

🌐

Runway 官方文档

最权威的功能说明和参数指南，持续更新。访问 docs.runwayml.com

🎥

Runway YouTube 频道

官方教程视频，涵盖从入门到高级的完整教学系列。

💬

Runway Discord 社区

全球创作者交流平台，可获取灵感、提示词分享和技术答疑。