Forwarded from Градиентное погружение
🔥 IMAGEN уже в коде
— Пока все мусолят тему крутости новой модельки над DALLE 2, а разрабы создают чатики для реализации архитектуры, один из админов за ночь справился с задачей.
📎 Прикрепили генерации модельки, обученной с нуля за пару часов на P100 и небольшом сете.
Градиентное погружение
👉 Лайк, Шер, Звёздочка
Гитхаб
Попробовать ❤️
Про IMAGEN
— Пока все мусолят тему крутости новой модельки над DALLE 2, а разрабы создают чатики для реализации архитектуры, один из админов за ночь справился с задачей.
📎 Прикрепили генерации модельки, обученной с нуля за пару часов на P100 и небольшом сете.
Градиентное погружение
👉 Лайк, Шер, Звёздочка
Гитхаб
Попробовать ❤️
Про IMAGEN
🔥14👍2
Forwarded from Love. Death. Transformers.
#чтивонаночь
Очень крутая штука от huggingface - accelerate, позволяет встраивать multi gpu tensor parallel training в обычные torch скрипты и не думать.
Blogpost
Очень крутая штука от huggingface - accelerate, позволяет встраивать multi gpu tensor parallel training в обычные torch скрипты и не думать.
Blogpost
Digitalocean
Multi-GPU on raw PyTorch with Hugging Face’s Accelerate library | DigitalOcean
In this article, we examine HuggingFace’s Accelerate library for multi-GPU deep learning. We apply Accelerate with PyTorch and show how it can be used to sim…
🔥8👍1
This media is not supported in your browser
VIEW IN TELEGRAM
Stranger Things vibe, anyone? :D
Warp Turbo SmoothUltra Premium HD
Warp Turbo Smooth
🔥13❤3
Forwarded from Градиентное погружение
Вот несколько примеров того, что я сегодня сгенерировал с помощью imagen. Сейчас ещё тренирую.
@gradientdip
@gradientdip
Finally, trending on artstation для текстовых задач!
Когда бустил результаты добавлением рандомных ключевых фраз в запрос ещё до того, как это стало мейнстримом 😎🤣
https://news.1rj.ru/str/def_model_train/831
Когда бустил результаты добавлением рандомных ключевых фраз в запрос ещё до того, как это стало мейнстримом 😎🤣
https://news.1rj.ru/str/def_model_train/831
Telegram
я обучала одну модель
Forwarded from Мишин Лернинг
🐨 Все уже знают: Imagen превзошёл DALL•E 2. Но что настолько?!
Я просто хочу сказать, что языковые модели — рулят. Особенно хорошо обученные энкодеры.
DALL•E 2, чтобы понять текст, должен сначала съесть его текстовой частью нейросети CLIP, потом отобразить в картиночный манифолд при помощи prior модели, и только потом отдиффузить это представление через unCLIP (который только на унимодально с изображениями работал) и через все апскейл каскады (которые уже совсем оторваны от текста) в пространство пикселей.
Давайте просто посмотрим, наладимся и вдумаемся — насколько глубокое понимание текста у нейросети Imagen! Все гениальное — просто.
Картинка слева: «Коала в костюме стоит за кафедрой перед доской, на которой мелом написано ‘Variational bayesian methods is all you need’, внизу в растерянности стоят несколько котят»
Картинка справа: «Коала в костюме стоит за кафедрой перед доской, на которой мелом написано ‘Variational bayesian methods’, внизу в растерянности стоят несколько котят»
Я просто хочу сказать, что языковые модели — рулят. Особенно хорошо обученные энкодеры.
DALL•E 2, чтобы понять текст, должен сначала съесть его текстовой частью нейросети CLIP, потом отобразить в картиночный манифолд при помощи prior модели, и только потом отдиффузить это представление через unCLIP (который только на унимодально с изображениями работал) и через все апскейл каскады (которые уже совсем оторваны от текста) в пространство пикселей.
Давайте просто посмотрим, наладимся и вдумаемся — насколько глубокое понимание текста у нейросети Imagen! Все гениальное — просто.
Картинка слева: «Коала в костюме стоит за кафедрой перед доской, на которой мелом написано ‘Variational bayesian methods is all you need’, внизу в растерянности стоят несколько котят»
Картинка справа: «Коала в костюме стоит за кафедрой перед доской, на которой мелом написано ‘Variational bayesian methods’, внизу в растерянности стоят несколько котят»
❤14🔥5👍3🎉1
Forwarded from Denis Sexy IT 🤖
This media is not supported in your browser
VIEW IN TELEGRAM
Задачу генерации картинок из текста можно считать решенной — поэтому исследователи постепенно переходят к задаче «А давайте генерировать целые гифки по текстовому описанию».
Вчера выложили пример работы алгоритма CogVideo — суть у него такая же как у Dalle, вы пишите текст, а он выдает вам видео в 4 секунды длинной.
Кода пока нет, но по видимому будет тут.
У меня две мысли:
1) Лев который пьет — офигенный
2) Исследователи так порно индустрию без денег оставят своими нейронками
@Denis
Вчера выложили пример работы алгоритма CogVideo — суть у него такая же как у Dalle, вы пишите текст, а он выдает вам видео в 4 секунды длинной.
Кода пока нет, но по видимому будет тут.
У меня две мысли:
1) Лев который пьет — офигенный
2) Исследователи так порно индустрию без денег оставят своими нейронками
@Denis
❤13🔥4😁1