RichDreamer: A Generalizable Normal-Depth Diffusion Model for Detail Richness in Text-to-3D

Генератор 3D объектов по тексту от авторов modelscope. Короче, они обучили диффузионную модель нормалей-глубины на LAION-2B, причем глубину им генерил Midas. Далее сверху еще одна модель по альбедо. И получается красота. Демка есть, но зайти туда я не смог, там все по-китайски.

Код
Демо

#textto3D

Это самое смешное что я видел в уходящем году.
Хочу чтобы и вы посмеялись
https://youtu.be/C6EiBioOHIA

#оффтоп

Итоги-шмитоги. Их кто-то читает?
Нас стало больше и нам интересно, вот и все что хочу написать.
С наступющим, нейраны!

Если у вас накопились праздничные картинки, объявляю выставку в комментариях

Civit.ai вводит пейволл - Clubs

Собсно, то, чего боялись после ввода их внутриигровой валюты Buzz, свершилось.
В ближайшее время на платформе появится местный аналог patreon. Обещают, в принципе, все то же самое - подписки с тирами за Buzz.

За пейволл можно прятать все типы контента, то есть модели, Лоры, картинки и их настройки, посты. Родной генератор картинок платные модели без подписки потрогать тоже не даст.

Обещают и возможность "пробных" версий одного и того же контента: недообученные модели, менее подробная мета для генераций.

С одной стороны это, конечно, прекрасно - создатели контента для взрослых, коих там субъективно 99%, наконец смогут выйти из своих подвалов и купить еды. С другой - манчкины, скрейпившие терабайтами контент, легко заменят сайт одним торрентом.
К тому же валюту buzz нельзя вывести с платформы, а можно потратить собсно на подписки, чаевые, и генерации картинок. (надеюсь, потом исправят)

Отдельно встаёт юридический и моральный вопрос, так как данные для моделей и лор вряд ли были собраны с соблюдением всех лицензий. Пока это было для всех даром - вопросов было мало. Как только в этом появятся деньги - появятся и вопросы, а, может, и первые робкие иски.

В общем, будем посмотреть. Один скандал с генерацией цп у них недавно был, реддит уже полыхает, поэтому приготовим попкорн для следующих скандалов и будем надеяться, что это не будет для них юнити-моментом.

UPD: они уже немного дали заднюю и завели тред с обсуждением возможных вариантов монетизации

reddit срач
анонс clubs
faq clubs
обсуждение монетизации

@derplearning

Не прошло и полгода!
Приехал бета-доступ к генератору игр FRVR.
Кто записывался в бету - проверяйте почту

#text2game

AGG: Amortized Generative 3D Gaussians for Single Image to 3D

Работа от NVIDIA по генерации 3D объектов по изображению на основе гауссиан. Кода нет. Интересно куда они это внедрят

#imageto3D #gaussain