Автор DiscoDiffusionTurbo добавил сглаживание кадров.

Теперь ключевые кадры не выскакивают из ниоткуда, а постепенно проявляются, смешиваясь с предыдущими необработанными кадрами.

Обновленный Колаб

случайно раскопал свои тесты для одного памятного проекта из 2013 года. по сути это реалтайм создание абстрактной анимации из заготовленных бумажных шаблонов на стеклянном столе подсвеченном снизу. при этом часть анимаций делалалсь всякими неожиданными методами, например крутящийся волчок становился живым зрачком. а полупрозрачная калька давала эффект размытия. а если еще инвертировать картинку и смешать хитро слои, можно создавать довольно сложные сцены

НЕТ ВОЙНЕ!

15 летний художник в Blender сделал эту прекрасную работу.

Мы так редко вспоминаем тот снимок с вояджера "pale blue dot"

сегодня этому каналу исполняется год. 1 апреля 2021 года мне надоело пересылать свои эксперименты в личку друзьям, так появился тоже моушн. год оказался насыщенным. я познакомился с множеством крутых людей, которые тоже погружены в нейро-арт и генеративный дизайн, оброс полезными связями. потом оказалось что я могу не только производить контент но и создавать простые и полезные инструменты на основе google colab и дарить другим людям возможность тоже прикоснуться к будущему. потом наступил интересный период когда мне удалось познакомиться с теми людьми на которых я равнялся и у которых учился и даже получить от них фидбек. преодолел планку в 1к подписчиков, огромное вам спасибо за это!

а потом началась война. и как будто сломалось что то внутри - зачем заниматься просветительской деятельностью, приближать светлое будущее, когда в настоящем на головы людей падают бомбы, гибнут дети и взрослые?
сейчас, уже будучи в безопасности за пределами РФ, я до сих пор не уверен что будет дальше с этим каналом

и так как ничего нового я не генерю уже больше месяца, в честь др решил собрать в один пост ссылки на прошлые работы, некоторые из которых имеют незаслуженно мало просмотров)

мой первый нейро эксперимент
хитрый фрактал простыми средствами
АИГЕЛ Чудовище
кислый стайл трансфер
подборка стайл трансферов
несуществующие снимки земли под музыку
урок о работе с Lusid Sonic Dreams
нейротизер интерстеллар
SG3 + Lusic Sonic Dreams

чтобы отвлечься от ужасных новостей о войне и ввиду не лучшего финансового положения, готов предложить персональные консультации по теме генерации картинок и анимаций, стайл трансферам, увеличению разрешения и фреймрейта видео с помощью нейросетевой магии - за разумные деньги.

если у тебя есть вопросы о том как сделать красивое в disco diffusion, pytti, zooming vqgan, real-esrgan, stylegan, lucid sonic dreams, как привязать анимацию к музыке или как допилить картинку до 8к и 60fps - пиши в комменты

и спасибо за репост!

p.s. для украинцев консультации бесплатные. знания нынче ценный ресурс, хоть так смогу вам помочь

не хотел я постить про далли2 пока не увижу перспектив его применения в анимации или хотя бы работающих публичных сборок (а учитывая опыт первой версии вряд ли мы их увидим), но то что сейчас появляется в инфополе, это просто чума. опен аи без сомнения всех уделали

🥑 DALL-E 2 позволяет не только генерировать новые изображение, но и создавать интерполяцию между реальными!

DALL-E 2 сочетает лучшее из двух миров:
▪️Zero-Shot способность генерации изображений практически во всех доменах
▪️И способность интерполяции между изображениями (между векторами их эмбедингов)

На gif'ке — DALL-E 2 вариации между двумя изображениями: логотипом OpenAI и картиной "Изучение цвета квадратов и кругов" Кандинского; путем интерполяции их CLIP эмбедингов, а затем декодирования с помощью диффузионной модели unСLIP (декодер части модели DALL-E 2).

Так что все прелести StyleGAN-интерполяции поставляются в DALL-E 2 "из коробки"

Классный параллакс от автора #discodiffusion turbo

налетай, торопись!
свежий колаб для создания анимации методом диффузии. пока что только 2д (но вангую, что по наработанной схеме скоро добавят 3д и turbo режим). интересно что генерируемые формы консистентны от кадра к кадру, а вот текстура на них заметно играет. и еще в отличие от того же DD здесь доступен приличный список диффузионных моделей

твиттер автора
колаб

держите новое видео от Сергея Пирогова. хорошая новость в том что Сергей наконец то завел свой канал, где будет делать обзоры последних новинок в нейро генерации контента, рекомендую подписаться! уверен что нас ждет много годного материала.

канал Нейросети и Блендер
дайджест по нейросетям на ютуб

кому порцию отборной нейро психоделятины? просьба убрать от экранов детей, беременных женщин и впечатлительных личностей!
перед нами 17 минутное музыкальное видео, для создания которого помимо 3д софта были использованы zooming VQGAN+CLIP, EbSynth, нейро-ротоскопинг, фотограмметрия и возможно автоматическая анимация мимики по входящему звуку (но это не точно). за объем проделанной работы и количество использованных инструментов - авторам мое уважение. вот только результат спорный)

вопрос к читателям - какие вы знаете успешные коммерческие кейсы применения новомодных нейро-генеративных технологий? кроме создания цифрового искусства или музыкальных видео

Самураи-2 - Я никому не верю

DiscoDiffusion-warp

С лицами явно проблемы, в остальном вполне сносно.
Возможно, прикручивание стайлгана или модельки для лиц решит проблему.

Колаб

"Безусловная генерация человеческого изображения является важной задачей в области зрения и графики, которая позволяет использовать различные приложения в творческой индустрии." - это первая строчка представления StyleGAN Human.

Новый ГАН позволяет генерировать не только лица, но и людей с различной одеждой. В отличие от других схожих ганов, авторы выделяют основные преимущества - 40 тысяч изображений, еще и в разных позах, центрирования в телах и упор на положение лиц и глаз.

А как изюминка, мы с @too_motion сделали тест в старом колабе LSD, и да, с костылями, но работает!

Танцуем! 💃