Компанія Runway представила п’ять оновлень у сфері ШІ під час Research Demo Day. Найближчим часом користувачі отримають доступ до можливості одночасно генерувати та редагувати аудіо у моделі Gen-4.5, а також редагувати відео будь-якої довжини завдяки функції багатокадрового монтажу.
Runway анонсувала першу модель для взаємодії з реальним світом General World — GWM-1. Вона працює на основі Gen-4.5, але є авторегресивною і прогнозує відео покадрово з урахуванням попередніх дій. Можна змінювати хід подій через інтерактивні дії, наприклад переміщення у просторі або керування роботом.
Модель GWM Worlds дозволяє створювати реалістичні середовища у реальному часі. Користувач задає статичну сцену, а ШІ формує нескінченний простір з геометрією, освітленням і фізикою. Можна обирати різні ролі — від людини у місті до дрона над горами чи робота на складі.
Модель GWM Avatars генерує відео персонажів з природними рухами та мімікою, якими можна керувати через аудіо. Вона підтримує як фотореалістичних, так і стилізованих героїв.
Останнє оновлення — GWM Robotics. Це симулятор, який створює синтетичні дані для навчання роботів і тестування політик, що допомагає обійти обмеження фізичного обладнання.
