В трекере точек на видео TAPTR реализовали потоковый режим, позволяющий обрабатывать видео любой длины на RTX 3090

Демо TAPTRv3

#tracking

SynCamMaster: Synchronizing Multi-Camera Video Generation from Diverse Viewpoints

Метод заставить видеогенераторы делать одно и то же видео с двух и более ракурсов.
Ждем во всех видеогенрилках планеты

Код

#text2image #multiview

nlf: Neural Localizer Fields for Continuous 3D Human Pose and Shape Estimation

Реконструкция позы человека по видео с одного ракурса, с фигурой но без одежды

Код

#poseestimation #video2pose #videoto3d #video2mesh #humanreconstruction

Krea.ai Edit

Редактор изображений Krea.ai теперь доступен всем.

Инпейнтинг, аутпейнтинг, выделение/замена/удаление объектов. Все это удобно как в фотошопе и бесплатно (ограниченно)

#imageediting #inpainting #outpainting

Короткометражка созданная при помощи опенсорсных нейросеток.

Твиттер
Youtube - там подробная инструкция, в описании ссылки на бесплатный воркфлоу и более продвинутый платный

#video2video #tutorial

У Heygen генерилка подкастов, бета версия "для всех"

#text2poscast #speech2video

Ну, за подкасты.
Не очень понятно зачем теперь нужны кожаные блогеры, влогеры, инфлюматьихенсеры.

Я тут смотрел, как народ упарывается в NotebokLM, создавая аудио-подкаст из текста, потом вырезает в аудасити звук для каждого голоса, потом огородит с хейгеном и звуком, и тд.

Все.

Одна кнопка.
Сделать красиво.
Тупо, но красиво.
А зачем еще это все?

Хейген, похоже, сами не понимают, как они троллят интернет.

@cgevent

GigaChat песни

Вы не поверите, но GigaChat теперь умеет создавать песни подобно Suno/Udio.
Правда, пока только в ВК. в телеграм завезут позже

Качество как всегда отстает от мировых лидеров. Но это вопрос времени.
Длина трека - полторы минуты, а текст пишет на целую песню

#text2music

Pika 2.0

Обновился генератор видео Pika.
"Хорошее выравнивание текста" (???)
Можно загружать изображения себя, людей, мест и вещей

#text2video #image2video #personalization

CCSR-v2.0

Обновился апскейлер CCSR

- Теперь пользователи могут сами выбирать, сколько степов нужно сделать, чтобы восстановить изображение, без необходимости заново обучать алгоритм.
- работает очень быстро и может восстановить изображение всего за 1-2 шага.
- восстанавливает изображение с более четкими деталями, сохраняя при этом точность воспроизведения.
- Теперь алгоритм работает проще, потому что результат первого шага сразу передается на второй шаг

Спасибо @asleephidden

#upscale

Бывший сотрудник OpenAI, обладавший сведениями о нарушении OpenAI закона об авторском праве, найден дома мертвым

Сучир Баладжи ранее помогал тренировать ChatGPT. Позже он стал информатором в ряде исков о нарушении авторского права против OpenAI. Предварительная версия - самоубийство

#news

Субботняя проверка мемов.
Сдаем мемы про ИИ и роботов на проверку.
Кто не сдаст на того настучу деду морозу

#humor

Появились ноды для генератора звука MMAudio
Спасибо @p0lygon

ComfyUI-MMAudio

#ComfyUI

Наслаждаюсь.
Оказалось она музыку шикарно пишет.

Кстати, всех поздравляю, вчера мы преодолели отметку 6666.
Запечатлел @UMsupportTG

#оффтоп