Следующий драйвер NVIDIA будет выпущен с открытым исходным кодом. Похоже, отныне драйвера NVIDIA будут в опенсорсе. Почему? И почему не сделали этого раньше?

#news

Ultralytics upscaler

Tile-upscaler завезли на бесплатный сервис tost.ai
Здесь он называется Ultralytics upscaler
А чтобы им воспользоваться, надо выбрать в меню Upscaler 2.0
Да, вот так 🤷‍♂️

#upscale

Опубликован код генератора звуковых эффектов FoleyCrafter

Код

#video2audio

Shape of Motion: 4D Reconstruction from a Single Video

Вам понравится.
Реконструкция динамической 3D сцены по видео с одного ракурса. Реконструкция построена на объединении точек в жесткие группы по векторам движения, трекинге, оценке глубины.

Код

#videoto3d #video2scene #video2video #novelview

Streetscapes: Large-scale Consistent Street View Generation Using Autoregressive Video Diffusion

Шикарный проект студентов-исследователей Google Research.
Генератор видео проездов по улицам по входным картам.
Может интерполировать набор картинок Google Street (или просто набор фото локации) в длинное видео. Автор еще по видео собирает #nerf - на видео справа
Текстовым промптом можно задать нужные погодные условия, время суток, антураж города.

Представьте, у вас есть сцена проезда на автомобиле, снятая на хромаке, а подходящего задника не хватает. Расчехляете Streetscapes и вперед собирать идеальный задник (пустой улицы)

К сожалению без кода

#map2video #map2scene #image2video

StyleSplat: 3D Object Style Transfer with Gaussian Splatting

Стилизация 3D объектов на гауссианах по референсу стиля.

Код ждем

#styletrasfer #gaussian

PowerPaint v2

Обновка прошлогоднего инпейнтера/оуатпейнтера.
Обновили веса, код и веса полностью в аутсорсе, что-то допили по UI в gradio.

#inpainting #outpainting

Follow-Your-Emoji: Fine-Controllable and Expressive Freestyle Portrait Animation

Портретный оживлятор обзавелся кодом и колаб ноутбуком с WebUI

Код
Колаб

#image2video #humananimation #pose2video