Visual Style Prompting with Swapping Self-Attention

Визульный промптинг - управление генерацией изображений референсными картинками.

Работает без лишних моделей, на голом коде

Код
Демо
Демо + Controlnet

#image2image #text2image #reference #conditioning

ResAdapter for ComfyUI

Вроде ComyUI ноду ResAdapter можно уже установить, но код ноды пока не открывают. Как это вообще? объясните кто-нибудь

#text2image

А вы знали что у Haiper есть мобильное приложение? Его iOS разработчик отметился у нас в чате. Если есть ссылка на плеймаркет, киньте - добавлю в пост.

Haiper iOS

#tetx2video #image2video

StyleGaussian: Instant 3D Style Transferwith Gaussian Splatting

Стилизация сцены на гауссианах по референсной картинке. Интерполяция стиля с четырех изображений.
10 кадров в секунду на NVIDIA RTX A5000 24GB

Код

#gaussian #stylization #styletransfer #realtime

Адобченко не унимается и тизерит все новые продукты.
Мы ждем обновы Firefly, но пока видим лишь интеграцию этой модели в разные продукты Адобченко, что в общем-то правильно.

Две новых фишки для Substance 3D Sampler 4.4 и Stager 3.0 соответственно.

Первая, это генерация текстур из текста. Это уже делает Юнити, плюс я писал про похожие проекты. Но все это идеально интегрировано в Substance.

Вторая, это генерация фонов для Stager. Задников в общем. Чем это отличается от просто генерации картинок по промпту?
Сгенерированные задники матчатся по свету с остальной трехмерной сценой, информация забирается оттуда.

В общем Адобченко молодцы, но давайте уже свой видеогенератор!

https://news.adobe.com/news/news-details/2024/Adobe-Brings-Firefly-Generative-AI-Into-Substance-3D-Workflows/default.aspx

Stable Video 3D: Quality Novel View Synthesis and 3D Generation from Single Images

Stability AI разродились очередным релизом.
Новая модель SV3D на базе SVD генерирует тернтейблы по одному изображению.

Есть коммерческая и некоммерческая версии.

Гитхаб
Huggingface

#imageto3D #image2video #novelview