Там придумали ELITE - новый способ дообучения SD по одной фотке меньше чем за секунду.

В репозитории пока пусто, ждем

твит
#stablediffusion #finetuning #text2image #image2image

UnClip Image Interpolation
Еще один миксер изображений
Насколько далеко зайдет ваша фантазия в скрещивании картинок?

Ссылок на код не завезли

#image2image

Израильский стартап D-ID, разработавший ранее технологию Deep Nostalgia, объявил о выходе бета-версии нового веб-приложения chat.D-ID, которое позволяет пользователям общаться с «живым» ИИ.
Продукт совмещает в себе технологию потоковой передачи текста в видео D-ID с чат-ботом ChatGPT от OpenAI, чтобы сделать общение с ИИ более «живым».
Приложение находится в бета тесте, бесплатно, поддерживает только англ язык.

• Попробовать

О скором релизе GPT-4

Тут какой-то менеджер в Microsoft Berlin на митапе сказал что на следующей неделе будет анонс модели. Это звучит очень круто и консистентно со слухами. Давайте суммаризируем что мы слышали о модели:

1. Выйдет в феврале (почти)
2. Такой же скачок в числе параметров как и GPT-2 к GPT-3 - trillion is the new billion
3. Sparse, скорее всего MoE (сам не шарю)
4. Такой же скачок в качестве как и GPT-2 к GPT-3
5. Мультимодальность: текст, картинки, аудио
6. На выходе тоже мультимодальность
7. Обучали на 10-20 тысячах A100 в течении нескольких месяцев
8. Длина контекста: 32 тысячи токенов

#nlp #llm

StableDiffusion теперь можно запустить в браузере на GPU. Никаких танцев с гитхабом и установкой локального сервера (привет автоматик). Хотя, подозреваю, все равно какие-то танцы будут.

Но вроде пока только для Мака.

Премьер министр Румынии назначил чат-бота ION своим почетным советником.

Заместитель будет анализировать трафик в соцсетях на предмет выявления наиболее острых тем, которые обсуждают граждане страны, в частности, социальной и политической направленности. Нейросеть будет собирать сведения о настроениях в обществе, проблемах, запросах, потребностях и претензиях.

Video-P2P
Нейросеть для редактирования видео по тексту от Adobe и Гонконгского китайского Университета. Информации мало.
Код обещают позже с намеками на публичный доступ к модели.

[UPDATE]
Код
Демо

#text2video #video2video #videop2p

ODISE: Open-vocabulary DIffusion-based panoptic SEgmentation

Сегментатор изображений от NVIDIA и Университета Калифорнии.
Что-то пишут про объединение дискриминаторных и диффузионных генераторов изображений по тексту для неограниченной сегментации. Обычно сегментаторы знают ограниченное количество объектов которые они могут выделить масками на изображении. Судя по всему, ODISE сегментирует все что угодно что попадалось в обучающем датасете генераторов tex2image.

Это похоже на следующий шаг к точной генерации text2image, ведь обычно их обучают на картинках с текстовым описанием, но без сегментных масок. А тут вот скрестили.

Код обещают позже

Зато уже можно потыркать демо

#segmentation #text2image

VideoLoop3D: 3D Video Loops from Asynchronous Input

Генератор зацикленного видео с новых ракурсов.
На вход нужно несколько видео

Код
Демка (покрутите мышкой)

#video2video #videoto3D