OmniHuman-1: Rethinking the Scaling-Up of One-Stage Conditioned Human Animation Models

ByteDance снова что-то анимируют

Оживлятор человеческих (и не только) портретов любой крупности (лицо, поясной, полный рост) и соотношения сторон. Анимирует как фото, так и рисунки.

На вход помимо собственно портрета нужен сигнал для извлечения движения: звук, видео или их комбинация

Выглядит круто,
Кода нет

#portraitanimation #audio2video #audio2motion #motion2video #talkinghead #lipsync

MatAnyone: Stable Video Matting with Consistent Memory Propagation

Создает маску на заданного человека на видео
На вход принимает маску в первом кадре. Но потеть не придется, целевая маска создается в несколько кликов.

Пока еще далеко от идеала, но надеюсь станет подспорьем в композе

Код и демо ждем на следующей неделе

#segmentation #matting #video2matte #video2mask

MVGD: Zero-Shot Novel View and Depth Synthesis with Multi-View Geometric Diffusion

Диффузный генератор новых консистентных ракурсов с картой глубины заданной сцены. На вход - любое количество ракурсов сцены.

Код ждем

#image2depth #novelview

Qwen Video

Я писал про генерацию видео в Qwen2.5-1M, но она была недоступна. А на днях ее таки подключили видимо для всех

Если еще не пробовали, даю отмашку

#text2video #image2video

Leapfusion Hunyuan Image-to-Video V2

Обновка опенсорсного генератора видео по картинке, разрешение 544p

воркфлоу

#image2video #ComfyUI