OpenAI представила Sora 2 — обновлённую модель генерации видео с реалистичной физикой и синхронизированным звуком

OpenAI выпустила Sora 2, новую версию своей модели для генерации видео и аудио, которая значительно превосходит предыдущие системы по реалистичности.

Модель умеет создавать длинные видеоклипы с плавным переходом сцен, включая сложные движения, соответствующие законам физики, такие как гимнастические трюки. В отличие от предыдущих моделей, в Sora 2 объекты не деформируются и не телепортируются — физика взаимодействий соблюдается точно, что имеет большое значение для создания правдоподобных видеороликов.

Особенностью Sora 2 является возможность синхронизировать диалог, звуковые эффекты и окружающий шум, создавая аудиовизуальные сцены. Модель способна интегрировать реальные объекты и людей в сгенерированное окружение с высокой точностью, при этом сохраняя естественный облик и голос. Для этого достаточно записать короткий видео- и аудиофрагмент с персонажем, который затем становится «камео» внутри любой сцены.

Новое приложение Sora для iOS позволяет пользователям создавать и смешивать видеогенерации, а также делиться ими. В приложении предусмотрены инструменты для контроля рекомендаций контента, ограничений для подростков и защиты от насилия.

OpenAI ставит цель сделать Sora 2 платформой для творческого взаимодействия и развлечений, при этом уделяя внимание безопасности. Приложение будет развиваться с учётом обратной связи.

 Источник: openai