В Modelscope добавили Image2Video и Video2Video
Теперь можно делать видео из картинки и стилизовать видео. Есть колаб ноутбук, который, видимо, запустится только на платном аккаунте.
Есть демо, для которого нужна рега на modelscope.
Колаб
Демо
#Image2Video #Video2Video
Теперь можно делать видео из картинки и стилизовать видео. Есть колаб ноутбук, который, видимо, запустится только на платном аккаунте.
Есть демо, для которого нужна рега на modelscope.
Колаб
Демо
#Image2Video #Video2Video
Telegram
Нейронавт | Нейросети в творчестве
Ответочка Гуглу от китайского опен сорса: text2video.
Много ограничений - "модель не была обучена реалистичному представлению людей или событий, поэтому ее использование для создания такого контента выходит за рамки возможностей модели."
С text2video будет…
Много ограничений - "модель не была обучена реалистичному представлению людей или событий, поэтому ее использование для создания такого контента выходит за рамки возможностей модели."
С text2video будет…
Ideogram
Новый генератор картинок по тексту от Google.
Из сильных сторон - умеет генерировать текст на картинках, но не русский.
записаться в вейтлист (сейчас доступ дают сразу)
#text2image
Новый генератор картинок по тексту от Google.
Из сильных сторон - умеет генерировать текст на картинках, но не русский.
записаться в вейтлист (сейчас доступ дают сразу)
#text2image
👍5🔥1😁1
This media is not supported in your browser
VIEW IN TELEGRAM
Code Llama
Новый ассистент программиста от Meta AI, на базе Llama 2. По тестам бьет всех известных конкурентов.
Code Llama выпустили в трех версиях: основная, для Python и с акцентом на исполнение инструкций.
Гитхаб
Блог (у меня открывается только через VPN)
Колаб
#coding #llm
Новый ассистент программиста от Meta AI, на базе Llama 2. По тестам бьет всех известных конкурентов.
Code Llama выпустили в трех версиях: основная, для Python и с акцентом на исполнение инструкций.
Гитхаб
Блог (у меня открывается только через VPN)
Колаб
#coding #llm
🔥4👍1
This media is not supported in your browser
VIEW IN TELEGRAM
🔥 Ученые сделали нейропротез для расшифровки речи парализованного человека с анартрией.
Считанный с мозга пациента сигнал отправляется на вход цифрового аватара, который генерирует речь.
Nature
Ютуб (5 минут)
#brain2speech #mindreading
Считанный с мозга пациента сигнал отправляется на вход цифрового аватара, который генерирует речь.
Nature
Ютуб (5 минут)
#brain2speech #mindreading
🔥13❤1
Авторы AudioLDM 2 выложили чекпойнт для генерации звука 48 КГц. До сих пор был доступен только 16КГц
Гитхаб
#text2music #text2audio #text2speech #TTS
Гитхаб
#text2music #text2audio #text2speech #TTS
Telegram
Нейронавт | Нейросети в творчестве
AudioLDM 2: A General Framework for Audio, Music, and Speech Generation
Следующее поколение генератора звуков AudioLDM
Умеет по тексту или изображению генерировать музыку, речь и прочее.
Код обещают выложить
Демо будет
Твиттер
#text2music #text2audio…
Следующее поколение генератора звуков AudioLDM
Умеет по тексту или изображению генерировать музыку, речь и прочее.
Код обещают выложить
Демо будет
Твиттер
#text2music #text2audio…
👍5
This media is not supported in your browser
VIEW IN TELEGRAM
WavJourney: Compositional Audio Creation withLarge Language Models
Еще один интересный генератор звука, который я почему-то забыл запостить на прошлой неделе.
Интересен он тем что генерирует полную звуковую последовательность по сценарию. Скармиливаете ему сценарий с таймкодами (можно и без них) - на выходе получаете полноценную радиопрограмму или подкаст. Сценарий, кстати, тоже можете не писать, в демо реализован генератор сценария по текстовому запросу.
На видео генерация по запросу
Демо
#text2audio
Еще один интересный генератор звука, который я почему-то забыл запостить на прошлой неделе.
Интересен он тем что генерирует полную звуковую последовательность по сценарию. Скармиливаете ему сценарий с таймкодами (можно и без них) - на выходе получаете полноценную радиопрограмму или подкаст. Сценарий, кстати, тоже можете не писать, в демо реализован генератор сценария по текстовому запросу.
На видео генерация по запросу
Марсианские новости о запуске зонда к Альфа Центавра
КодДемо
#text2audio
👍6
NRHints: Relighting Neural Radiance Fields with Shadow and Highlight Hints
Релайтинг (изменение освещения) #nerf'ов
Выступление на SIGGRAPH23
Код
#relighting
Релайтинг (изменение освещения) #nerf'ов
Выступление на SIGGRAPH23
Код
#relighting
👍3
Forwarded from Код Дурова
This media is not supported in your browser
VIEW IN TELEGRAM
⛵️ Живой шедевр //
Яндекс запустил возможность генерировать короткие видео с помощью ИИ в Шедевруме. За генерацию отвечает фирменная нейросеть на основе каскадной диффузии.
Для генерации достаточно ввести текстовый запрос, затем выбрать первый кадр видео из предложенных вариантов. Нейросеть возьмёт за основу изображение и делает из него 4-х секундное видео по заданному шаблону. Сейчас их 7 — зум, таймлапс, полёт, панорама, вращение, подъём и морфинг.
@d_code
Яндекс запустил возможность генерировать короткие видео с помощью ИИ в Шедевруме. За генерацию отвечает фирменная нейросеть на основе каскадной диффузии.
Для генерации достаточно ввести текстовый запрос, затем выбрать первый кадр видео из предложенных вариантов. Нейросеть возьмёт за основу изображение и делает из него 4-х секундное видео по заданному шаблону. Сейчас их 7 — зум, таймлапс, полёт, панорама, вращение, подъём и морфинг.
@d_code
👍6🔥1😁1
This media is not supported in your browser
VIEW IN TELEGRAM
Vispunk
Новый ИИ-редактор изображений.
Под капотом, видимо, Stable Diffusion.
Есть онлайн версия, только мне не удалось получить от нее результата. Генерит не то что пишешь а то что и было чуть в другой вариации
Онлайн-редактор
Код обещают выложить
Сабреддит проекта, там пачка туториалов
#text2image #image2image #tools
Новый ИИ-редактор изображений.
Под капотом, видимо, Stable Diffusion.
Есть онлайн версия, только мне не удалось получить от нее результата. Генерит не то что пишешь а то что и было чуть в другой вариации
Онлайн-редактор
Код обещают выложить
Сабреддит проекта, там пачка туториалов
#text2image #image2image #tools
This media is not supported in your browser
VIEW IN TELEGRAM
VALL-E X: Multilingual Text-to-Speech Synthesis and Voice Cloning
Мультиязычный генератор речи по тексту и клонировщик голоса. Английский, Японский, Китайский. Для клонирования голоса достаточно 3-7 секунд образца. Контроль акцента, эмоций, акустики.
Примеры
Код
Демо
Колаб
#text2speech #tts #voicecloning
Мультиязычный генератор речи по тексту и клонировщик голоса. Английский, Японский, Китайский. Для клонирования голоса достаточно 3-7 секунд образца. Контроль акцента, эмоций, акустики.
Примеры
Код
Демо
Колаб
#text2speech #tts #voicecloning
This media is not supported in your browser
VIEW IN TELEGRAM
MagicEdit:High-Fidelity Temporally Coherent Video Editing
Редактирование видео: стилизация, локальное редактирование, смешивание разных видео, аутпейнтинг
Код будет позже
#video2video
Редактирование видео: стилизация, локальное редактирование, смешивание разных видео, аутпейнтинг
Код будет позже
#video2video
🔥6
AI Text-To-Image Prompt Generating Software
Генератор промптов для генераторов картинок.
Gradio, javanoscript.
Туповат, вырвиглазный дизайн. Но довольно удобный и быстрый
#tools #text2text
Генератор промптов для генераторов картинок.
Gradio, javanoscript.
Туповат, вырвиглазный дизайн. Но довольно удобный и быстрый
#tools #text2text
👍1
Dysen-VDM:Empowering Dynamics-aware Text-to-VideoDiffusion with Large Language Models
Новый генератор видео по тексту. Авторы утверждают, что превосходит аналоги, особенно на сценах со сложным действием
Код (пока нету)
Демо (пока нету)
#text2video
Новый генератор видео по тексту. Авторы утверждают, что превосходит аналоги, особенно на сценах со сложным действием
Код (пока нету)
Демо (пока нету)
#text2video
❤1