LGM: Large Multi-View Gaussian Model for High-Resolution 3D Content Creation

В полку генераторов 3D на гауссианах по картинкеи по тексту прибыло.

Ключевые фишки - высокое разрешение и скорость - 5 секунд на один объект.

Есть экспорт меша, примеры можно интерактивно покрутить на сайте.

Код
Демо

#textto3D #imageto3D #gaussian

Suno втихаря запустили сервис по созданию песен ко дню святого Валентина. Там нужно вписать, кому эта песня посвящена, где вы встретились и что делает этого человека уникальным. Сервис генерирует стихи и песню, которую можно послать вместо валентинки. Дешево и сердито.

Эта новость не стоила бы выеденного яйца, если бы не слухи, что там под капотом третья версия Чирпа, которой пока нет в открытом доступе. И на мой слух генерации действительно получаются лучше. Микс чуть более внятный, нет такой каши в низах, эффект автотюна на голосе сильно ослабился. Всё ещё не идеально, но лучше, чем было раньше.

https://vdaysong.com/yzet6p2y

Попробовать самому можно вот тут: https://v-day.suno.ai/

Дата выхода третьей версии на основной платформе пока хранится в секрете. Но вроде как скоро.

#suno

Кто хотел Depth Anything для видео?
У нас есть его

Демо

#image2depth #video2depth

DynamiCrafter: Animating Open-domain Images with Video Diffusion Priors

Генерация видео с акцентом на реалистичность движения

- контроль частоты кадров
- зацикливание видео
- управление движением через текст
- генерация по исходной картинке и тексту

Код
Демо
Колаб

#text2video #image2video

ComfyUI-3D-Pack

Набор инструментов ComfyUI для работы с 3D-входными данными и генерации 3D, на основе #nerf #gaussian и т д.

Уже интегрирован LGM

Набор еще в процессе разработки

Гитхаб

#imageto3D #image2image

Elevenlabs открыли возможность зарабатывать на своем голосе. Загружаете 30-минутный образец своей речи и вперед. Есть возможность контролировать категории контента, для которых ваш голос можно использовать.

Можно ли выводить гонорары на российские счета - сильно сомневаюсь.

Попробовать

#voicecloning #text2speech

DreaMoving: A Human Video Generation Frameworkbased on Diffusion Models

Неужели я об этом еще не писал?
Говорят вот этот котэ, захвативший интернет, сделан в DreaMoving от Alibaba. Но это неточно.

Гитхаб (кода нет)
Демо

#video2video #humananimation

свежая китайская моделька I2VGEN-XL теперь доступна в комфи

в отличие от SVD не так пафосно и красиво двигает камерой, зато гораздо лучше анимирует объекты в кадре. по скорости генерации тоже немного проигрывает и к сожалению прожорлива до VRAM. в теории лучше держит внешность (у меня пока не получилось, фейлы в комментах)

посмотреть как работает можно тут. у меня нормально установилась только на свежую версию комфи

гитхаб
кастом ноды для I2VGEN-XL
гайд на ютубе
демо на replicate

@тоже_моушн