Interpolating between Images with Diffusion Models

Интерполяция изображений диффузионными моделями через латентное пространство с использованием ControlNet. Проще говоря, плавный переход от одного изображения к другому.

Код

#image2image #image2video #frameinterpolation

Появился официальный код Drag Diffusion

Код

#image2image

ChatGPT доступен для Android в США, Индии, Бангладеш и Бразилии. На следующей неделе список стран будет расширен.

Google Play

🤯Там Андрей Карпатый уже вовсю запускает LLaMa-2 на рисоварке

Андрей вдохновился известным репозиторием llama.cpp для инференса LLM моделей на С++ и написал 500 строк кода на чистом C, которые прогоняют инференес модели LLaMa2.

llama2.c - тупо 500 строк... и без всяких внешник зависимостей. Шикарный код! Запускается хоть на чайнике, хоть на калькуляторе, если там есть CPU.

Из-за минималистичности, в коде реализована только точность fp32 и инференс на CPU с паралелизацией через OpenMP. Однако, можно гонять даже LLaMa-2 7B c адекватной скоростью.

Код llama2.c и модели

@ai_newz

#оффтоп
А руки-то вот они

Секс-игрушка с ИИ

Как работает: пользователь должен быть подключен к ЭЭГ, которая измеряет активность мозга и контролирует действие Autoblow AI+ через Wi-Fi. Игрушка следует сигналам мозга и может ускорять или замедлять поглаживающие движения.

А самое главное — это функция для получения удовольствия, когда сигналы мозга показывают желание достичь кульминации.

В дискорде StabilityAI начинается презентация #SDXL

https://discord.gg/stablediffusion

Говорят, чтобы запустить рефайнер, нужно 16 гигов vram или хитрости с перегоном в RAM которые реализованы в ComfyUI. И придётся раздуть своп файл и закрыть все остальные приложения

Можно будет использовать несколько GPU сразу

Похоже, на ControlNet с домашним железом и надеяться не стоит

Я в зоне плохого интернета и уже минут 10 ничего не слышу. Из чата понятно что sdxl зацензурирована

​​«Глубокая фальшивая любовь» - развлечение на базе технологической пытки.
За что платят $900К продукт-менеджерам на удаленке.
«Вероятно, вы доживете до того дня, когда сможете увидеть рукотворные ужасы, выходящие за рамки вашего понимания» - сказал великий Никола Тесла на первой выставке электротехники в сентябре 1898 года. Спустя 125 лет мы дожили до этого.

Мир шоу-бизнеса креативен и прагматичен. Пока исследователи ИИ, политики и общественность спорят о моральных аспектах начавшейся революции генеративного ИИ, шоу-бизнес уже вовсю зарабатывает на нем.

О том, много ли уже зарабатывает, - можно судить по зарплатам в объявлениях о найме китами этого бизнеса Netflix и Disney:
• технарь по генеративному ИИ - до $650K
• продукт-менеджер платформы машинного обучения (можно на удаленке) - до $900K.

О том, на чем зарабатывают, можно сказать по-разному. Например (ссылки не привожу, дабы не перегружать) на:
• «рукотворном ужасе» и «самом жестком шоу на ТВ»
• «глубокой фальшивой науке, стирающей грань между правдой и ложью»
• «развлечении в форме технологической пытки»
• «антиутопическом кошмаре, где Бога не существует»
• «абсурдном оскорбительном развлечении на основе мошенничества и дезинформации»
• «встраивании реальных людей в порно без их согласия».

Речь о новом реалити-шоу Netflix «Глубокая фальшивая любовь» - «Deep Fake Love») – восьмисерийной психологической пытке пяти пар, находящихся в серьезных отношениях (некоторые из них помолвлены, а другие вместе уже много лет). У каждой пары есть две общие черты: их партнерские отношения несколько натянуты, и они не знают, во что ввязываются, решив принять участие в откровенно ужасающем шоу.

✔️ В первом эпизоде пары разделяют и отправляют в разные пансионаты под названием «Марс» и «Венера», полные одиноких людей, многие их которых готовы на все за свои 15 минут позора.
✔️ В конце каждого дня участнику показывают видео измены его/ее партнера, которые могут быть правдой или дипфейком.
✔️ По ходу сериала, дипфейки становятся все более непристойными, а ИИ используется для создания иллюзии полноценного секса.
✔️ Наживкой для зрителей становится наблюдение за реакцией людей, которые видят, как их партнеры им изменяют, разрушая их и без того хрупкое доверие. В отличие от участников, зрители в курсе дипфейков. Им даже показывают подоплеку фальшивых замен участников на актеров: на половине экрана - ведущего себя невинно участника, а на второй – беснующегося актера, на внешность которого «натягивается» внешность участника.
✔️ На кону приз в размере 100 000 евро, о котором участники не знают. Он присуждается вовсе не на основе верности или доверия. Вместо этого, победителями станет пара, которая сможет расшифровать наибольшее количество видео как настоящие или фейковые.

Реакция медиа на это шоу довольно однозначная.
• «Deep Fake Love — это не просто эксперимент по нанесению абсолютно ненужного психологического ущерба личной жизни участников, но и создание мрачного прецедента для будущего ИИ»
• «Если мусорный телевизор — это пол, то Deep Fake Love — в подвале»
• «Deep Fake Love - душераздирающий и крайне интересный тест использования технологий, но его видео следовало оставить в монтажной и никогда не показывать на ТВ»

Зато какая реклама от всей этой шумихи!
Так что ожидайте. Полагаю, что скоро и у нас подобный концентрат мусора появится, и не на одном канале. Лицензию ведь теперь покупать не нужно. А шоу о суровой повседневности и приветов от Андреев давно пора разбавлять высокотехнологичной «генеративной клубничкой».

Ох и не зря я свой первый пост этого года назвал «Человечество на пути к пропасти AICG, и не видно способа отвернуть». Всё к тому и идет 🥹
#AICG

А вот и ссылки на официальные модели #SDXL 1.0

Базовая
Refiner
VAE

Гитхаб

Tracking Anything in High Quality

сегментация/отслеживание объектов на видео на основе HQ-SAM

Код

#segmentation #image2mask #video2mask #tracking

Подробнее о том о чем я коротко вчера говорил

Также Stability выпустили StableSwarmUI

Это модульный веб-интерфейс для SD заточенный под работу в распределёнке с множеством GPU. Swarm (рой) подразумевает, что большое количество машин будут работать вместе, чтобы сгенерировать для пользователя картинку.

В StableSwarm есть несколько слоёв, которые работают независимо и их можно кастомизировать: бэкенд, мидл, и фронтенд. Например, установленное расширение может заменить источник генерации на бэкенде, без необходимости менять что-либо ещё. Фронт сделан на HTML/JS для полной кастомизации и, чтобы не упираться в ограничения Gradio. Бэкенд написан на C# для максимальной производительности, минимизации сложности кода, а также многопоточности, которой нет в Python.

При установке можно выбрать подход к генерации (локально или через API), интерфейс (ComfyUI, A1111, DreamStudio, или другой), загрузить модели (SD 1.5/ 2.1/ SDXL 1.0) и ещё пару вещей. Позже подъедет возможность редактировать изображение, ControlNet и работа с LoRA.

Можно погонять в колабе

Нельзя просто взять и заставить мемы ожить

Поиграл тут немного с #Gen2, почти без черрипика

#Neuronaut_art

Pika Labs открылся для всех!

Генерить видео можно в ветках #generate как просто по тексту, так на основе картинки. Чтобы вкинуть изображение, нажимаете рядом с вбитым промтом на +1, затем жмёте на Upload и добавляете его.

Пример промта: /create prompt:a cat is walking in the forest, sunset, 4K -neg "bad anatomy, lowres" -ar 1:1

Какие параметры у промтов:
-gs xx (guidance scale, чем выше чифра, тем ближе визуал к промту)
-neg "xxx" (негативный промт, задаём чего не должно быть в кадре)
-hide (скрыть промт)
-ar xx:xx (соотношение сторон, 16:9, 9:16, 1:1, 4:5)
-seed xxx (ставим одно число для консистентной генерации, чтобы увидеть сид надо скачать видео он в названии файла)
-motion xx (насколько подвижной нужна картинка, задаётся числами 0, 1, или 2)

Чтобы быстро генерить по тому же промту жмите значок "Повторить". Генерации ограничены 10 штуками в 5 минут.

Дискорд
Сайт