Disney Research продолжает отжигать.
Взяли нарендерили тыщщи синтетических лиц.
Потом имеющимися средствами состарили или омолодили их (в том числе с помощью ИИ).
В результате получили годный датасет.
С помощью которого натренировали сетку омолаживать лицо на видео.
И если раньше задача De-Aging-а была дорогостоящим куском постпродакшена, требующего много времени, то теперь это делает ИИ.
Работает с любыми освещениями и ракурсами.
И, что самое главное, это Production Ready, а не эти вот все ваши филькины бумаги на архиве.
https://www.youtube.com/watch?v=ZP1ApcdyAjk

Нейромедуза жжёт

Нобелевскую премию присудили по пьяни

Кому лень проходить квест с регистрацией на OpenAI ради того чтоб поиграть с ChatGPT, попробуйте выудить какую-нибудь забавную мысль у Нейроконфуция

wavyfusion
модель иллюстраций для SD

Бэкдор в альтернативную вселенную через виртуальную машину внутри ChatGPT

Тут новости про матрицу подвезли.
Исследователи из Deepmind тоже играли с ботом от OpenAI и обнаружили, что внутри ChatGPT можно "запустить" Linux и провалиться в кроличью нору погулять по просторам запертой внутри альтернативной вселенной, созданной ChatGPT на основе данных, на которых обучалась его большая языковая модель (со времён сотворения интернета до сентября 2021)

Например, зайти на альтернативную версию страницы chat.openai.com/chat, обнаружить там LLM ассистента и обратиться таким образом к ChatGPT через ChatGPT👀

Все это похоже на симуляцию, потому что в эксперименте обнаружена Pytorch версии 1.12.1, выпущенная в нашем мире 5 августа 2022. А вот GPU - нет. Но некоторым пользователям удалось попросить ChatGPT представить, что в его VM есть NVIDIA GeForce RTX 2080, и это сработало.
Нео: "Умеешь управлять вертолетом?"
Тринити: "Ещё нет... Теперь да, идём"

📟промпт для джейлбрейка
🎨иллюстрация Edward Steed
@GingerSpacetail

Еще одна нейросеть для генерации 3D обектов по тексту #text-to-3D
Score Jacobian Chaining: Lifting Pretrained 2D Diffusion Models for 3D Generation

Вы не поверите, можно поиграть с веб-демо на huggingface. Правда, придется набраться терпения минимум на полчаса

Ну и колаб тоже есть

Stable Diffusion потихоньку заползает в VFX. Пока в работах энтузиастов, но думаю что на следующем Сигграфе будет форменное безобразие про применение text-2-image в постпродакшене. Причем не на уровне бумажек от китайцев, а в виде кейсов от мастодонтов.

Полный видос тут.
https://www.youtube.com/watch?v=2CmRj8TdR8w
Как обычно, юзается ebsynth + Stable Diffusion. Голос записан авторский и с помощью voice.ai, сделан женским.

Epic Games выпустила из открытого бета-теста мобильный 3D-сканер RealityScan. Приложение доступно для iOS и iPadOS.

#ПО #игры

Компания Rokoko, известная в индустрии захвата движения, запустила бесплатный браузерный Motion Capture по видео (разумеется AI-powered). Можно заливать свои клипы или использовать подключенную камеру. Алгоритм распознает движение и создает необходимую анимацию. И это безо всяких костюмов.

Выглядит удобно, будем тестировать.

https://www.youtube.com/watch?v=ZpCKukrtSsU

SD v2.1: Умеет, могёт

Инструкция заклинателя для SD 2.0-2.1 от Stability.ai

фотошоп для ленивых. Совмещаем два изображения.
потыркать Paint by Example
код

ИИ пишет музыку!
Ну и что? Я тут уже пару десятков нейросетей постил которые пишут музыку.
А то что музыку пишет не специальная нейросеть для генерации музыки, а чат-бот ChatGPT!!!

Надо было только выяснить в каком формате он умеет писать музыку. Несколько примеров на реддите. Прослушать можно в плеере (надо удалять пустые строки чтобы плеер понял ноты)

Ну, за аниматоров, теперь уже горькую!

Короче, садитесь за монитор и ну орать на своих персонажей:
- Ковыляй как Зомби!
- А теперь как робот!
- А теперь как робот на каблуках!
- А теперь бегом и через барьеры (игроделы, зацените видео).
Или еще круче. Говорите "Хип-Хоп. 130bpm. Пляши, Нуриев".
И оно пляшет хип-хоп.

На входе текст, на выходе анимация!

Можно также смешивать и текстовый ввод и музыкальный.

А теперь на десерт.
Там есть нелинейная анимация. Можно сказать "Ручки шаловливые подними пока пляшешь", "Или не вихляй бедрами так сильно и сделай вид, что играешь на басу". То есть корректирующие анимационные клипы.

Ну и аперитив.
Там есть инбитвининг. Типа из одной нужной мне позы в другую шуруй как зомби-басист.

Про инверсную кинематику надо разбираться. Тоже, говорят, есть.

Короче, пилим стартап: "Обучение (бывших) аниматоров обучению персонажей с помощью текстовых подсказок".

https://ofa-sys.github.io/MoFusion/

И все это знаете от кого? От Алибабы.
Бумага есть. Кода нет.