AniSora V3

Китайцы тизерят V3 модели для генерации аниме.
V2 лицензировали под Apache 2.0

Гитхаб
HF (там V2, основная модель 65Гб)
Воркфлоу V2 - это патреон но там бесплатно

#anime #text2video #motioncontrol #image2video #image2anime

Runway Act-Two вышел из закрытого доступа

На днях RanwayML представилми новую модель переноса действия с видео на картинку

Теперь она доступна платным подписчикам

#motion2video #image2video #characteranimation

MirageLSD

Стилизация видеопотока

Попробовал - устаревшая шляпа какая-то на уровне SD. Зато на деньги Андрея Карпаты.
На вход принимает текстом описание стиля. Но кладет болт на ваш текст в 70% случаев.

Попробовать - ждете очереди играете минут 5. Можно стилизовать видео с вебки, видеофайл

#stylize #video2video #realtime #online

Я, бывает, тут упоминаю, что сейчас оптимизировать свою работу становится суперважной историей. Если у вас в работе или на студии нет инструментов для оптимизации и увеличения скорости проверки, то стоит об этом задуматься.

Инструментов для этого стало в разы больше, и один из таких — это Squid Validator.
По сути, это большой набор решений для разных случаев проверки вашей работы перед тем, как она пойдёт либо в другие отделы, либо в движок.

Мои друзьяшки из Entangled написали такой комбайн и подогнали мне какое-то время назад. Без него я уже не представляю проверку большого количества входящей работы от художников. Да и мои лиды каждый день фильтруют через него весь поток контента.

Суть в том, что вы сами можете сделать проверку на разные случаи. Он автоматом проверяет сцены и фиксит все ошибки нажатием одной кнопки — без свитчей между разными тулзами, всё в одном месте. Автоматически он находит более 90 видов косяков: неправильно стоящие пивоты, UV-ошибки, мусор в сцене, дубликаты ассетов и т. д.

Это бесплатная бета-версия. Качайте с сайта под вашу версию софта.
Если понравится или захотите что-то добавить — можете писать им на почту с фидбеком: validator@entgld.com.

Опубликован код и веса видеогенератора PUSA V1.0

Гитхаб
Веса

Спасибо @MaxKhtv

#text2video #image2video #videoediting

Русский F5‑TTS

Голосовая модель дообученная на русский язык на 5000+ часов.
Есть сравнение с X‑TTS и FishSpeech

для изменения ударения поставьте символ + перед ударной гласной (молок+о → молокó).
Для автоматической расстановки ударений можно использовать модель RUAccent

веса

#tts #russian #text2speech

Ускоритель видеогенерации Radial Attention теперь совместим с SageAttention version 1

А также поддерживает Wan2.1_14B_FusionX LoRA

Это означает генерацию за 8 шагов (90 секунд на H100)

Гитхаб

#optimization #text2video

RUaccent портативная сборка от подписчика @muxastarikov

#tts #russian #text2speech

FantasyPortrait: Enhancing Multi-Character Portrait Animation with Expression-Augmented Diffusion Transformers

Мультиперсонажный оживлятор портретов по звуку или видео от Alibaba

Код ждем

#portrainanimation #image2video #speech2video

Diffuman4D: 4D Consistent Human View Synthesis from Sparse-View Videos with Spatio-Temporal Diffusion Models

Реконструкция 4D сцен, снятых с ограниченного количества ракурсов. Недостающие данные дорисует, выдаст видео с нужного ракурса

Код ждем
Интерактивный вьюер

#4D #videoto4D #gaussian #novelview #rendering

InScene: Flux.1-Kontext.dev LoRA

Лора под #kontext для сохранения контекста исходного изображения

#lora

Открываю рубрику для ваших работ, пока без названия. Будет определенный субъективный порог качества.
Дальше текст автора