Нейронавт | Нейросети в творчестве – Telegram
Нейронавт | Нейросети в творчестве
10.6K subscribers
4.43K photos
3.7K videos
41 files
4.74K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках не участвую

для связи @Neuronauticus

Заявка на регистрацию в РКН № 6309426111
Download Telegram
Ray 3

Lumalabs обновили свой видеогенератор. Новая версия - рассуждающая

Она способна генерировать видео студийного качества в 16-bit HDR (примеры на сайте), поддерживает новый режим Draft Mode для быстрой итерации идей в творческих рабочих процессах. Понимает визуальные аннотации. Есть экспорт в .EXR

Предлагают попробовать бесплатно - но это будет Draft Mode. Полный платно

Полюбуйтесь на моего Рыба. Сделано за минуту. Я впечатлен если не смотреть на фон

#text2video #image2video #reasoning #hdr #exr
10👎3🔥3
Wan-Animate: Unified Character Animation and Replacement with Holistic Replication

Анимация и замена персонажей на видео затюненным #wan22 !

Под капотом совет экспертов

Создает видео 720p, 24fps с фокусом на кинематографичное качество

Воспроизводит оригинальное освещение и цветовую гамму для интеграции анимированного персонажа в сцену. Включает вспомогательный модуль Relighting LoRA для улучшения интеграции персонажа с новой средой.

Использует скелетные сигналы для управления движениями тела и скрытые черты лица, извлечённые из исходных изображений, для воспроизведения выражений. Короче, контролнет. Интересно чем отличается от Fun / VACE

Кванты сегодня будут, полагаю?

Гитхаб
HF
Демо

#moe #image2video #video2video #characteranimation #chracterswap #faceswap
1🔥98🤯2👀1
This media is not supported in your browser
VIEW IN TELEGRAM
Lucy Edit

Редактор видео по тексту от Decart.ai
Опенсорсный Nano-Banana для видео

В основе - архитектура Wan2.2 5B. Унаследовал VAE + DiT, что должно упростить адаптацию существующих скриптов и воркфлоу WAN.

Модель доступна в двух версиях: Dev — открытая версия для сообщества, и Pro — более детализированная и надёжная версия для создателей контента. Обе версии доступны через API и платформу, поддерживают редактирование видео в разрешении 480p и 720p

Недавно Decart показали быстрый видеогенератор Lucy, который доступен только на платных сервисах. Интересно, коммерческая модель у них тоже на базе открытого WAN?

Теперь же открытая редактирующая модель. Выглядит слабее WAN, шакально. Но может окажется быстрее или умнее?

Попробовать - на страте дают 2000 кредитов
HF - всего около 32Гб
ComfyUI - зато уже можно пользоваться

#videoediting #video2video #videoinpainting
7😁2👍1🔥1🥴1
Media is too big
VIEW IN TELEGRAM
Tencent's Hunyuan 3D Studio

ИИ-платформа для создания 3D-контента. Собрали наработки по 3D в кучу

Может:

- создавать 3D-модели из текста и картинок

- разбивать модели на редактируемые части

- автоматически создавать UV-развертку

- настраивать PBR текстуры

- добавлять скелетную анимацию персонажам.

Записаться в вейтлист

#3d #3dediting #texture #pbr #uvmpping #characteranimation #animation
👍81
This media is not supported in your browser
VIEW IN TELEGRAM
Stable Part Diffusion 4D: Multi-View RGB and Kinematic Parts Video Generation (SP4D)

Сегментатор кинематических частей на картинках и видео. Stability AI выступают одним из двух соавторов

В отличие от методов, которые генерируют только внешний вид, SP4D фиксирует как визуальную структуру, так и сочлененную геометрию, создавая 3D-объекты, готовые к ригу с учетом частей и анимации

Код ждем

#segmentation #segmentation3D #3d #imageto3d #videoto3d
👍6
ComfyUI-VoxCPM

Кастом нода контекстной бестокеновой думающей говорилки VoxCPM

#comfyui #tts #text2speech #realtime #voicecloning
🔥9
Moondream 3 Preview

Превью 3 версии VLM для описания (и не только) изображений

— может отвечать на открытые вопросы об изображениях

— создаёт описания изображений разной длины: короткие, стандартные и длинные

— определяет координаты конкретных объектов на изображении

— предоставляет bounding boxes (ограничивающие рамки) для объектов на изображении

— поддерживает предварительное кодирование изображений для ускорения многократных запросов

— работает как с изображениями, так и как универсальная текстовая модель

Плейграунд попробовать
Демо HF
API

#vlm #captioning #detection #moe #cv #image2text
👍73🔥1
ARC-Qwen-Video

Версия ARC-Hunyuan-Video-7B с Qwen2.5-VL-7B-Instruct в качестве базовой модели.

Мультимодальная модель для понимания коротких видеороликов из реального мира. Обрабатывает визуальные, аудио- и текстовые сигналы

Синхронизирует визуальные и аудиосигналы, что позволяет отвечать на сложные вопросы, которые невозможно решить, используя только один тип данных

Определяет не только, что происходит в видео, но и когда это происходит, поддерживает детализированную временную разметку и обобщение событий

Знает китайский и английский

На скриншоте транскрибация демонстрационного видео (перевод с китайского)

ARC-Qwen-Video-7B

ARC-Qwen-Video-7B-Narrator - выдает описания видео с таймкодами, определяет личности говорящих в видео, распознаёт и транскрибирует речь

Гитхаб
Демо - вход по китайскому телефону

#vlm #assistant #video2text #asr #speech2text #stt
👍10
Media is too big
VIEW IN TELEGRAM
Vidu Q1 Reference to Image

Давно не заглядывали в Vidu?

Они прокачали генерацию видео по референсам. Чего-то там больше, что-то там лучше

Функция доступна на сайте и в мобильном приложении

#referencing #image2video #text2video
👍9🍾1
This media is not supported in your browser
VIEW IN TELEGRAM
Давно не заглядывали в Morphic?

А у них теперь есть генерация видео по аннотациям на картинке

#annotate2video #image2video #sketch2video
👍14😁1
Вот куда вы точно давно не заглядывали так это на Artbreeder

Они там конечно наплодили инструментов похожих один на другой для смешивания персонажей

Даже какой-то оживлятор персонажей есть

#referencing #inage2image #characteranimation
👀64