Sora от OpenAI научилась повторять компьютерные игры ⛏

Первая видеомодель от OpenAI может стать отличным конкурентом для Pika. Но уже очевидно, что благодаря ресурсам OpenAI, Sora обучена на огромном количестве информации. Например, Sora умеет генерировать видео вплоть до 1080p. 😊

При этом одной из интригующих особенностей Sora является генерация цифровых миров. OpenAI уже продемонстрировал, что Sora знает про Minecraft и сразу понимает, что мы хотим создать. При этом AI не забывает про физику и управление персонажем в игре.

Как же Sora может это делать? 🦦

По словам старшего научного сотрудника Nvidia Джима Фана, Sora — это скорее "физический движок, управляемый данными", чем креативный инструмент. Она не просто генерирует отдельную фотографию или видео, а определяет физику каждого объекта в окружении — и на основе этих расчетов рендерит фотографию или видео (или интерактивный 3D-мир, в зависимости от ситуации).

Похоже что Sora может помочь в создании игр, возможно из-за этого пока что OpenAI ограничивает время генерации минутой. А вы как думаете, будут ли AI игры в будущем? 🤔

Видео: сравнение реального Minecraft с результатом Sora

🔍 Sora, многофункциональный AI-инструмент для генерации видео от OpenAI 📼
#обзоры_AI #картинки

Компания OpenAI создала генеративную нейросеть под названием Sora, которая может с помощью короткого текстовое описания превратить его в подробный видеоролик высокой четкости, но с ограничением длительностью до минуты. 😱

"Мы считаем, что создание модели, способной понимать очень сложные физические взаимодействия в нашем мире, — важный шаг для будущего развития ИИ"

Тим Брукс, исследователь OpenAI.

Интересные факты: Sora с японского означает "Небо". Компания работала над созданием нейросети в абсолютной секретности. 🌑

Сферы применения Sora:

Среди основных вариантов использования Sora — создание сложных сцен. Нейросеть способна реализовать самые смелые идеи из промптов. AI уже умеет создавать сцены с несколькими персонажами, точной детализацией фона и воссоздавая физику реального мира. Инструмент найдёт применение при создании рекламных роликов, катсцен для игр или для развлечения.

Возможности модели:

🔹 Создание 3D сцен
🔹 Нейросеть не замыливает фон и концентрируется на постобработке объектов.
🔹 Взаимодействие с миром. Люди или животные на видео могут оставлять физические изменения в сцене, такие как мазки кистью или следы на земле.
🔹 Симуляция цифровых миров (Minecraft).

Вывод:
Пока что по демонстрационным материалам можно отчётливо увидеть разницу между Sora и Runway. Возможно, это пиар-ход, но OpenAI уверяет в честности промо-роликов. Будем ждать открытия доступа для всех. 🙌