Runway
Runway 是一家应用人工智能研究公司，致力于构建生成视频工具，将文本和图像转换为移动镜头。
概述
Its Gen-series models helped kick off the modern AI video era and are increasingly used in real film, advertising, and music-video production.
深入探讨
Runway 由 Cristobal Valenzuela、Alejandro Matamala 和 Anastasis Germanidis 于 2018 年创立，最初是一个基于浏览器的平台，将机器学习工具交到创作者手中。在大力转向视频之前，它与人共同撰写了最初的稳定扩散研究。其 Gen-1（视频到视频）和 Gen-2（文本到视频）模型将于 2023 年推出，随后是更清晰的 Gen-3 Alpha 和 Gen-4 系统，让用户可以生成短片、延长镜头并在场景中保持一致的角色。 Runway 还提供实用的编辑功能，如运动画笔、修复和绿屏删除。它通过推动视觉效果工作（包括电影《一切都同时发生》）赢得了与奥斯卡相邻的声誉，并举办了人工智能电影节来关注这一媒体。
技术洞察
Runway 的视频模型是基于扩散的，但可以跨时间扩展：它们必须生成不仅单独真实而且在时间上连贯的帧，因此对象移动平滑而不是闪烁。该系统通常使用跨空间和帧的注意力来学习时空模式，并且可以以文本提示、起始图像或驾驶视频为条件。在许多帧中保持一致的角色或对象是他们解决的最难的问题之一。
战略影响
供应商策略
供应商路线图会影响您的团队接下来可以构建的功能。
成本与预算
商业条款和部署选项会影响长期成本和风险。
风险与安全
公司激励措施塑造了产品默认、安全态势和开放性。
跑道的未来
Runway 正在推动更长、更可控、更高分辨率的剪辑，并更紧密地集成到专业编辑流程中，将其模型视为模拟物理场景的“通用世界模型”。期待更精细的导演控制（镜头移动、灯光、角色连续性）、更快的生成和更深入的工作室采用，以及关于劳工、肖像权和真实性的争论。随着质量的提高，捕获的镜头和合成的镜头之间的界限将不断模糊，这对新闻业和信任提出了新的问题。
现实世界的实施
音乐艺术家使用 Gen-3 文本到视频提示而不是昂贵的视觉特效拍摄来为音乐视频生成超现实、梦幻般的序列。
视觉特效团队使用 Runway 的绿屏和修复工具，在几分钟而不是几小时内移除吊杆麦克风并对主题进行旋转观察。
一家广告公司快速迭代多个视频概念以进行宣传，在任何现场拍摄之前生成草稿镜头。
电影制作人使用运动画笔为静态图像的特定元素（例如飘动的云彩或流水）制作动画，以实现定格镜头。
风险与防护栏
发布公告可能会超过实际生产工作流程的稳定性。
API 定价或政策转变可能会在一夜之间打破假设。
单一供应商依赖性增加了锁定和迁移成本。
实施路线图
使用您自己的任务和数据集评估提供商。
在集成之前查看隐私、安全和法律条款。
维护跨模型或供应商的后备计划。
监控发行说明，以便路线图的更改不会让团队感到意外。
不断探索
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the Runway quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
常见问题
What is Runway?
Runway 是一家应用人工智能研究公司，致力于构建生成视频工具，将文本和图像转换为移动镜头。其Gen系列模型帮助开启了现代人工智能视频时代，并越来越多地应用于真实电影、广告和音乐视频制作。
Runway 主要以哪类人工智能工具而闻名？
Runway 构建生成视频工具，包括 Gen 系列文本到视频和视频到视频模型。
哪款 Runway 型号首先在其 Gen 系列中引入了文本到视频生成功能？
Gen-1 处理视频到视频，而 Gen-2 在 2023 年引入直接根据文本提示生成视频。
AI视频与AI图像独特的核心技术挑战是什么？
视频模型必须使帧随着时间的推移保持一致，以便对象平滑移动而不是闪烁，而图像则不存在闪烁问题。
哪部广受好评的电影与 Runway 在视觉效果中使用的工具有关？
Runway 的工具被用于《Everything Everywhere All at Once》的视觉特效工作，提升了其在电影界的声誉。
Runway 的“运动画笔”功能可以让用户做什么？
运动画笔可让创作者在图像的选定部分上绘制运动，例如使云朵飘移或水流流动。