Runway показала генеративную оболочку ОС с видео в реальном времени

Runway анонсировала Project Continuum — экспериментальную оболочку операционной системы, где отдельные области экрана генерирует видеомодель в реальном времени и откликаются на клики и перетаскивание. Концепт демонстрирует четыре сценария использования: интерактивные порталы поверх страниц, адаптивные видеоинтерфейсы, интерактивные миры для навигации и визуализацию работы ИИ-агентов. В основе лежит модель Solaris, которая предсказывает следующий кадр на основе действий пользователя и видеомодели Gen-4.5.

Runway признаёт нерешённые проблемы: отрисовка текста, связность в длинных сессиях и совместимость со средствами доступа. Project Continuum пока существует только в виде демонстрации без API, SDK и сроков выпуска.