Runway
Runway là một công ty nghiên cứu ứng dụng AI, xây dựng các công cụ video tổng hợp giúp biến văn bản và hình ảnh thành các cảnh quay chuyển động.
Tổng quan
Its Gen-series models helped kick off the modern AI video era and are increasingly used in real film, advertising, and music-video production.
Lặn sâu
Được thành lập vào năm 2018 bởi Cristobal Valenzuela, Alejandro Matamala và Anastocation Germanidis, Runway khởi đầu là một nền tảng dựa trên trình duyệt đưa các công cụ học máy vào tay người sáng tạo. Nó là đồng tác giả của nghiên cứu Khuếch tán ổn định ban đầu trước khi chuyển mạnh sang video. Các mô hình Gen-1 (chuyển video thành video) và Gen-2 (chuyển văn bản thành video) vào năm 2023, tiếp theo là các hệ thống Gen-3 Alpha và Gen-4 sắc nét hơn đáng kể, cho phép người dùng tạo các clip ngắn, mở rộng cảnh quay và duy trì các ký tự nhất quán trong các cảnh. Runway cũng cung cấp các tính năng chỉnh sửa thực tế như Motion Brush, inpainting và loại bỏ màn hình xanh. Nó đã đạt được danh tiếng ngang bằng với giải Oscar nhờ hỗ trợ hiệu ứng hình ảnh, bao gồm cả trên bộ phim 'Mọi thứ ở mọi nơi cùng một lúc' và điều hành Liên hoan phim AI để làm nổi bật phương tiện này.
Hiểu biết kỹ thuật
Các mô hình video của Runway dựa trên sự khuếch tán nhưng được mở rộng theo thời gian: chúng phải tạo ra các khung hình không chỉ thực tế riêng lẻ mà còn mạch lạc về mặt thời gian, để các vật thể chuyển động mượt mà thay vì nhấp nháy. Hệ thống tìm hiểu các mô hình không gian, thời gian, thường sử dụng sự chú ý trên cả không gian và khung hình, đồng thời có thể được điều chỉnh dựa trên lời nhắc văn bản, hình ảnh bắt đầu hoặc video lái xe. Duy trì một nhân vật hoặc đối tượng nhất quán trên nhiều khung hình là một trong những vấn đề khó khăn nhất mà họ giải quyết.
Tác động chiến lược
Chiến lược nhà cung cấp
Lộ trình của nhà cung cấp ảnh hưởng đến những tính năng mà nhóm của bạn có thể xây dựng tiếp theo.
Chi phí và ngân sách
Các điều khoản thương mại và các lựa chọn triển khai ảnh hưởng đến chi phí và rủi ro dài hạn.
Rủi ro và an toàn
Các biện pháp khuyến khích của công ty định hình các tình trạng vỡ nợ của sản phẩm, trạng thái an toàn và tính cởi mở.
Tương lai của đường băng
Runway đang hướng tới các clip dài hơn, dễ điều khiển hơn, độ phân giải cao hơn và tích hợp chặt chẽ hơn vào các quy trình chỉnh sửa chuyên nghiệp, coi các mô hình của nó là 'mô hình thế giới chung' mô phỏng các cảnh vật lý. Mong đợi các điều khiển đạo diễn tốt hơn (di chuyển máy ảnh, ánh sáng, tính liên tục của nhân vật), tạo nhanh hơn và áp dụng studio sâu hơn cùng với các cuộc tranh luận về lao động, quyền giống và tính xác thực. Khi chất lượng tăng lên, ranh giới giữa cảnh quay được ghi lại và cảnh quay tổng hợp sẽ ngày càng mờ đi, đặt ra những câu hỏi mới cho báo chí và sự tin cậy.
Triển khai trong thế giới thực
Một nghệ sĩ âm nhạc tạo ra các chuỗi siêu thực, đẹp như mơ cho video âm nhạc bằng cách sử dụng lời nhắc chuyển văn bản thành video thế hệ thứ 3 thay vì quay VFX tốn kém.
Nhóm VFX sử dụng các công cụ in và màn hình xanh của Runway để loại bỏ cần mic và kính quay đối tượng trong vài phút thay vì hàng giờ.
Một công ty quảng cáo nhanh chóng lặp lại nhiều ý tưởng video cho một quảng cáo chiêu hàng, tạo ra các cảnh quay nháp trước khi quay phim trực tiếp.
Nhà làm phim sử dụng Motion Brush để tạo hoạt ảnh cho các phần tử cụ thể của ảnh tĩnh, chẳng hạn như đám mây trôi hoặc dòng nước chảy, để tạo cảnh quay.
Rủi ro & lan can
Thông báo ra mắt có thể vượt xa sự ổn định trong quy trình sản xuất thực tế.
Việc định giá API hoặc thay đổi chính sách có thể phá vỡ các giả định chỉ sau một đêm.
Sự phụ thuộc vào một nhà cung cấp làm tăng chi phí khóa và di chuyển.
Lộ trình thực hiện
Đánh giá các nhà cung cấp bằng cách sử dụng các nhiệm vụ và bộ dữ liệu của riêng bạn.
Xem lại các điều khoản về quyền riêng tư, bảo mật và pháp lý trước khi tích hợp.
Duy trì kế hoạch dự phòng giữa các mô hình hoặc nhà cung cấp.
Theo dõi ghi chú phát hành để những thay đổi về lộ trình không gây ngạc nhiên cho các nhóm.
Tiếp tục khám phá
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the Runway quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Hướng dẫn tiếp theo
OpenAI
Câu hỏi thường gặp
What is Runway?
Runway là một công ty nghiên cứu ứng dụng AI, xây dựng các công cụ video tổng hợp giúp biến văn bản và hình ảnh thành các cảnh quay chuyển động. Các mẫu thuộc dòng Gen đã giúp khởi đầu kỷ nguyên video AI hiện đại và ngày càng được sử dụng nhiều hơn trong sản xuất phim, quảng cáo và video ca nhạc thực tế.
Runway chủ yếu được biết đến với loại công cụ AI nào?
Runway xây dựng các công cụ video tổng quát, bao gồm các mô hình chuyển văn bản thành video và video thành video thuộc dòng Gen.
Mô hình Runway nào lần đầu tiên giới thiệu tính năng chuyển văn bản thành video trong dòng Gen của nó?
Gen-1 xử lý chuyển video thành video, trong khi Gen-2 giới thiệu tính năng tạo video trực tiếp từ lời nhắc văn bản vào năm 2023.
Thử thách kỹ thuật cốt lõi duy nhất đối với video AI so với hình ảnh AI là gì?
Các mô hình video phải tạo ra các khung hình nhất quán theo thời gian để các vật thể chuyển động mượt mà thay vì nhấp nháy, một vấn đề mà hình ảnh không gặp phải.
Bộ phim nổi tiếng nào có liên quan đến việc sử dụng các công cụ của Runway trong hiệu ứng hình ảnh?
Các công cụ của Runway đã được sử dụng trong tác phẩm VFX trên 'Mọi thứ ở mọi nơi cùng một lúc', nâng cao danh tiếng của nó trong phim.
Tính năng 'Motion Brush' của Runway cho phép người dùng làm gì?
Motion Brush cho phép người sáng tạo vẽ chuyển động lên các phần đã chọn của hình ảnh, chẳng hạn như làm mây trôi hoặc nước chảy.