Я заметил, что напилили уже несколько плагинов Стейбла для Афтера 😎

Видимо, этот самый толковый
(но у меня пока не получается дотянуть его до результатов дефорума):
https://aenoscripts.com/diffusae/

Есть еще:
https://aenoscripts.com/local-diffusion/

А этот, видимо, на основе СтайлГАН:
https://aenoscripts.com/i-ate-mushrooms/

Video-LLaMA
Мультимодальная система, понимает и может описать содержимое видео, в том числе и аудио. Криво написал, да? Но надеюсь, все поняли)

Код

Демо

Модель

#audio2text #video2text #LLM

На HuggingChat прикрутили доступ в интернет

#LLM #Chatbot

Много галлюцинирует и сочиняет. Я ему скормил кусочек рикролла, там были и кадры с девушкой. А он ее прогнорил, только парня заметил.

MusicGen прикрутили в демку для генерации музыки по изображению. Можно также добавить в качестве затравки кусочек музыки. Следющим постом прикреплю как он себе представляет рикролл

А вообще у этого автора много интересных спейсов на HF

#image2music #text2music #music2music #audio

ATT3D: Amortized Text-To-3D Object Synthesis

Совместная разработка NVIDIA с парой университетов.
Новая модель генерации 3D объектов по тексту.
При очевидной кривизне результата и практической неприменимости, она на порядки быстрее предыдущих методов, да и результаты чуть лучше. Прогресс налицо, дождемся годного #textto3D

Более подробное видео на сайте

Кода нет и не нужен

Video-ChatGPT: Towards Detailed Video Understanding via Large Vision and Language Models

Еще одна модель недопонимания видео. Ну эта хоты бы заметила на рикролле женщину

Код

Демо

#audio2text #video2text #LLM

Выложили код и веса HQ-SAM.

Гитхаб

Колаб

Спасибо за наводку @tech_wizard

Скоро верующие не будут знать человек им читает проповедь или ИИ.

В немецком городе Фюрт местные прихожане собрались на проповедь, которую провёл искусственный интеллект.
Текст составил местный богослов с помощью запросов для чат-бота. А «прочитали» проповедь сгенерированные аватары.

"To the moon" 🌝

А вот как реагирует рынок на всю эту мышиную возню с AI.

Я как-то зассал, когда всё начало падать в 2022 и на некоторое время перестал покупать тех стоки, если не считать, что я по уши в Мете сижу. Сейчас буду потихоньку возобновлять регулярные покупки избранных компаний.

@ai_newz

aiNodes

Нодовый генератор изображений/анимации от авторов Deforum. На базе SD, разумеется.

фичи:
- Deforum
- Stable Diffusion 1.5 / 2.0 / 2.1
- Upscalers
- Kandinsky
- ControlNet
- LORAs
- Ti Embeddings
- Hypernetworks
- Background Separation
- Human matting / masking
- Compositing
- Drag and Drop (from discord too)
- Subgraphs
- Graph saving as metadata in the image file
- Graph loading from image metadata

#tools

https://app.songr.ai/

Генератор песен с вокалом в четырех жанрах. Музыка звучит как midi. Вокал тоже звезд с неба не хватает, но звучит чисто. С фразировкой беда. Но можно попробовать пихнуть туда свои собственные сочинения с качественной ритмикой, возможно, на качественном тексте будет качественная фразировка.

#music #text2music

Kandinsky

Расширение для automatic1111 для поддержки Kandinsky

Работает через скрипт (после установки выберите скрипт Kandinsky в поле выбора скриптов).
не поддерживает ControlNet и прочие расширения.
Более полное описание возможностей и ограничений на гитхабе