3DTrajMaster: Mastering 3D Trajectory for Multi-Entity Motion in Video Generation

Контроль траектории движения нескольких объектов при генерации видео по тексту.

6 степеней свободы на каждый контролируемый объект

Код прикручен к CogVideoX-5B

Код

#trajectory #motioncontrol

GSTAR: Gaussian Surface Tracking and Reconstruction

Реконструкция динамичных 3D сцен на гауссианах по видео, с фотореалистичным рендером и 3D-трекином

GSTAR адаптируется к изменениям топологии с помощью двух механизмов: последовательного отслеживания стабильных поверхностей (красные кружочки) и динамической генерации поверхности для вновь появляющейся геометрии (оранжевые кружочки).

Код ждем

#video2scene #video2gaussian #videoto3d #videoto4D #video2mesh #gaussian

Goku: Flow Based Video Generative Foundation Models

Новый генератор видео и картинок от ByteDance

И на основе Goku они еще сделали Goku+ - семейство моделей для оптимизации рекламных сценариев с участием людей и продуктов

гитхаб (кода нет)

#text2video #image2video #text2image

OpenAI: платит за рекламу для Superboul 14 лямов
Прямые руки: ChatGPT ad Maker

#news #stylization

Lumina-Video-f24R960

Новая модель убийцы всего
Генератор видео со звуком (без звука тоже может) по тексту

#text2video #text2audio #multimodal