Такое качество — это вообще законно?
OpenAI анонсировала Sora 2 — новую версию своей модели генерации видео.
В отличие от предыдущей версии, Sora 2 симулирует физический мир и может создавать сцены, где соблюдаются законы движения, массы, инерции и причинности.
В OpenAI заявили, что новинка — это скачок уровня GPT-3.5, но для видео.
Что умеет Sora 2
Новая модель компании впитала в себя целую кучу нововведений. Теперь модель:
- Соблюдает физику: если мяч летит в корзину и не попадает, он отскакивает от щита, а не телепортируется внутрь.
- Обрабатывает ошибки: модель может «показать», как кто-то оступился или упал — это уже не фейковый успех, а реалистичное моделирование.
- Следит за объектами: запоминает позиции объектов в кадре и их поведение, даже если они временно исчезают.
- Генерирует звук: добавляет реалистичные фоны, речь и эффекты.
- Поддерживает стиль: умеет генерировать видео в аниме, киношном или реалистичном стиле.
- Поддерживает «камео»: можно загрузить свое видео и голос, чтобы ИИ вставил вас в любую сцену — от романтической комедии до фантастического эпика.
Промт: «два альпиниста в ярких штормовых куртках, с обледеневшими лицами и прищуренными от напряжения глазами, по очереди перекрикиваются сквозь метель»
Новый формат общения — Sora.app
Одновременно с моделью запущено iOS-приложение Sora, которое:
- позволяет создавать и ремиксить видео на базе генераций других пользователей;
- поддерживает встраивание себя или друзей в сцены (после короткой видео-идентификации);
- работает по инвайтам, чтобы заходить в приложение вместе с друзьями;
- использует рекомендации на основе LLM, которые можно настраивать через обычный текст.
Контроль пользователя находится в центре философии модели: можно удалять свои «камео» из чужих видео, ограничивать, кто может ими пользоваться, и управлять персонализацией ленты.
Промт: «мастер боевых искусств отрабатывает ката с бо-стиком, стоя по пояс в воде в пруду с карпами кои»
Важные ограничения
- Sora 2 пока доступна только в США и Канаде через приложение или sora.com.
- ChatGPT Pro-пользователи получат доступ к улучшенной версии модели — Sora 2 Pro.
- Подписка не требуется — генерации пока бесплатны, но с ограничениями по доступным вычислениям.
- Sora 1 Turbo остается доступной и весь ваш контент сохранится.
В ближайшее время планируется запуск API для Sora 2.