DiffIR2VR-Zero: Zero-Shot Video Restoration with Diffusion-based Image Restoration Models

Денойзер-апскейлер видео. В качестве бонуса умеет сглаживать генеративную карту глубины.

В апскейле детали на фоне кипят. Но алгоритм интересный, надеюсь усовершествуют.

В некоторых местах презентации пишут "Ours (DiffBIR)" - вероятно, забыли заменить в шаблоне.

Код ждем
Демо

#denoise #upscale #video2video

Paint by Inpaint: Learning to Add Image Objects by Removing Them First

Модель для добавления объектов на изображение.
Обучена на парах с удаленными с изображения объектами. Ну логично.

Код
Демо

#inpainting

свершилося!

Gen-3 Alpha открыли для всех (кто оплатит подписку).
Закидывайте генерации в комменты

#text2video

Suno iOS

Пока только для US
Если у вас есть аккаунт в американском AppStore, попробуйте установить мобильную версию Suno

#mobile #ios #text2music

MimicMotion : High-Quality Human Motion Video Generation with Confidence-aware Pose Guidance

Очередной аниматор персонажа по фото и образцу движения от Tencent.
Под капотом #SVD, DWpose и своя модель.

Код

#humananimation #characteranimation #image2video #pose2video

HunyuanDiT-v1.2 / HunyuanCaptioner

Новая версия китайского генератора картинок. Лично меня он не впечатляет.
Но выкатили еще и генератор описаний, который может описывать картинки по английски

Репозиторий
Демо HunyuanCaptioner

#text2image #image2text #captioning

Mojo

Аниматор появления логотипа.
Всего 4 пресета, никакого контроля.
Закинул картинку, выбрал пресет, ждешь.

#image2video #logoanimation

Voice isolator

Изоляция голоса от Elevenlabs

#audio2audio #voice #unmix #audio2stem

ComfyUI-MimicMotion

#ComfyUI нода для MimicMotion

воркфлоу

#humananimation #characteranimation #image2video #pose2video

Magic Insert: Style-Aware Drag-and-Drop

Перетаскиваем объект с изображения в произвольном стиле на другое целевое изображение, выполненное в совершенно ином стиле, и получаем реалистичную вставку объекта в целевое изображение с учетом стиля

Демо (свою картинку загрузить нельзя)

#image2image #imageinsert

Moshi

Голосовой ассистент от французской компании Kyutai.
Вся фишка в акцентах и инотнациях.
Русского не знает.
Попробовал. туповат.

Код ждем
Демо

#assistant

А чтение мысленных образов тоже не стоит на месте.
Ученые из Нидерландов добились вот такого результата реконструкции изображений по сигналам активности мозга макаки.

верхний ряд - картинки, показанные макаке.
второй ряд - реконструкция по результатам нового исследования
нижний ряд - результат предыдущего исследования

В этот раз сигналы считывали через имплант. До этого исследования проводили на людях, считывая активность с помощью МРТ

Новость

#science #brain #mindreading #news