такс, ну это уже ни в какие ворота! скоро приделают официально и можно будет ручками настраивать позу персонажа в аутоматике. о времена!

пост в твиттере

в комменты загляни, там еще скелеты припрятаны)

@тоже_моушн

Жаль у них нет подходящих позиций вроде average colab enjoyer

Jump in hypetrain.

Следующим на oчереди идёт Roblox, который на самом деле, не очевидно, но пытается конкурировать с Epic Games в сфере UGC.

В ближайшее время нам обещают Generative AI driven content просто по запросу голосом, что и показывают в видосе выше.

Но в то же время говорят, что процесс потребует времени, а к концу десятилетия мы не будем даже задумываться о том, имеет что-либо ИИ или нет.

https://www.wired.com/story/roblox-generative-ai-gaming-universe/

Когда AI уже никого не удивишь

🔥FlexGen: как запустить OPT-175B на своём ноутбуке

Просто восторг! Самую большую открытую языковую модель теперь можно запустить на одной 16GB GPU и при этом не ждать генерацию целую вечность — скорость 1 токен в секунду!

Причём ускорение и сжатие модели делается очень просто:
model = OptLM(model)

P.S. В их репозитории даже есть пример чатбота на основе OPT-66B

Статья, GitHub

Who's your Venus, who's your fire?
#warp

🔥 Lion: EvoLved Sign Momentum - новый оптимайзер от Гугла

Google нашел новый алгоритм оптимизации при помощи Symbolic Search (завтра объясню, что это такое). Новый оптимайзер тупо мониторит momentum, а размер финального апдейта весов считается как sign(grad (1-β1) + β1 momentum). То есть апдейт для каждого элемента весов равен либо -1 * LR либо +1 * LR!

train(weight, gradient, momentum, lr):
update = interp(gradient, momentum, β1)
update = sign(update)
momentum = interp(gradient, momentum, β2)
// Тут я пропустил weight decay для простоты
update = update * lr
return update, momentum

Просто волосы дыбом от тупости, но Lion дает серьезные улучшения в скорости сходимости, да и в найденных локальных минимумах. Рвет и обычную классификацию и языковые модели и диффузионные.

Чем больше батч, тем лучше работает Lion. Еще он более устойчив к различным выборам гиперпараметров по сравнению с AdamW.

Уже попробовал на свои задачах, вроде работает!

❱❱ Код на PyTorch, JAX и TF

@ai_newz

Эксперименты с новым warpfusion v0.7.0 с ControlNet

Видео от танц-театра Звон

😎Avaturn: полный 3D аватар по трем селфи лица.

Мои кенты из стартапа in3D запустили новый продукт https://avaturn.me. Я участвовал в стартапе на его ранних порах в 2019, поэтому плотно слежу за его успехами. Disclaimer: это не реклама, потому что у меня нет никаких акций.

По трем селфи фоткам строят реалистичный аватар головы, далее вы можете выбрать себе тело, одежду и стиль причёски. На выходе получаем fully-rigged 3D аватар, который можно анимировать и экспортировать хоть куда. Круто, что всё работает в вебе и не нужно ставить никакую аппку.

Я протестил на себе, результат вы можете видеть на видео 😁.

Анонс в Твиттере: ссылка.
Лайк/репост приветствуется!

@ai_newz

💠 ComfyUI 🏞

Я тут колаб принес, пользовательский интерфейс которого позволит вам проектировать пайплайн стабильной диффузии, используя интерфейс на основе нод (да да, прям в колабе). Если это кажется сложным, то предлагаю ознакомиться с этими примерами. Может работать асинхронно, куча оптимизаций, поддержка ckpt и safetensors, эмбэды, контролнеты и кучу всего другого. Контролнеты, к слову, можно миксовать друг с другом.

https://colab.research.google.com/github/tg-bomze/collection-of-notebooks/blob/master/SDNode_v_1_0.ipynb

ControlNET прекрасно работает с текстом

Генерация от @too_motion

Подробный урок на его канале

А я пока сильно ударился в код, и кайфую с этого, особенно с помощниками нейронками, потому посты редкие сейчас