Хотите действительно стать специалистом в искусственном интеллекте? 🤩

Вчера у меня не получилось найти для Вас интересную новость в научной сфере ИИ, зато сегодня "у меня есть для вас".

МТС и ВШЭ открыли набор на обучение в магистратуре "исследования и предпринимательство с ИИ"

Кстати, 30 мест будут бюджетными, их оплачивает МТС.

Подробнее тут.

А здесь можно оставить предварительную заявку. Документы будут приниматься с 19 июня по 25 июля.

Биржи NFT 🌈

Итак, что такое вообще NFT мы обсудили в прошлый раз.

Как за них получить деньги? Тут вообще, как я вижу, начинается долгая история с созданием крипто-кошельков, которые поддерживают определенные монеты, покупкой самих монет, регистрации на биржах и т.д.

И путь не самый легкий, с большим количеством нюансов, но мы его пройдем.

Думаю, из названия Вы уже поняли, что для торговли NFT нужно зарегистрироваться на бирже и выставить его на продажу там. Скорее всего можно и напрямую, но мне кажется, это еще сложнее.

Существуют биржи с совершенно разными условиями и назначением.

Где-то нужно будет заплатить сразу за регистрацию или за размещение NFT и иногда порядка 20-30$, где-то комиссию во время проведения первой сделки(продажи) токена, и дальше процент за перепродажу.

Какие-то биржи созданы в поддержку компаний, спортивных клубов или сотрудничают с благотворительными фондами и отчисляют в них процент от сделок.

Завтра расскажу про самые популярные биржи на этом рынке.

Лучшие NFT-биржи 👮

OpenSea
Маркетплейс OpenSea – одна из крупнейших и старейших платформ для торговли NFT. Основанная в 2017 году в Нью-Йорке, она ежедневно обрабатывает от 3 до 5 миллионов долларов продаж. На OpenSea можно найти разнообразные цифровые активы, включая картины современных художников, доменные имена, игровые и спортивные карточки, утилиты и виртуальные территории. Для использования платформы достаточно войти с помощью криптокошелька, такого как MetaMask, Coinbase Wallet или Opera Touch, и оплачивать транзакции криптовалютой Ethereum.

OpenSea взимает комиссию за «газ» при чеканке токенов и 2,5% за каждую транзакцию. Общая стоимость для продавца может достигать 70-100 долларов США в зависимости от спроса и времени суток.

Rarible
Rarible – первая российская NFT-биржа, получившая мировое признание. Основанная в 2020 году в Москве, она ежедневно обрабатывает около 1,5 миллионов долларов торговых операций. Платформа использует собственный токен RARI и специализируется на цифровом искусстве, предлагая около 20 тысяч различных коллекций. Rarible взимает комиссию 2,5% с каждой транзакции плюс плату за «газ», что в сумме составляет 70-100 долларов США. Платформа также имеет партнерство с OpenSea, что позволяет художникам использовать обе платформы.


SuperRare
SuperRare – платформа для продажи уникальных цифровых предметов коллекционирования. Хотя объем продаж составляет около полмиллиона долларов в сутки, организаторы недавно получили значительные инвестиции для развития проекта. Платформа взимает 3% с покупателя и 15% с продавца за каждую транзакцию, плюс традиционная комиссия за «газ». Авторы получают 10% от стоимости работы при каждой перепродаже.


Nifty Gateway
Nifty Gateway – платформа для торговли NFT, которая была основана в 2018 году и позже куплена Gemini LLC. Платформа позволяет использовать банковские карты для транзакций (только в США) и берет 15% комиссии за каждую сделку плюс «газ». Авторы получают 10% от стоимости при перепродаже их работ.


Foundation
Foundation – платформа с высокой кураторской политикой, ориентированная на художников и дизайнеров. Для продажи на платформе необходимо пройти кураторский экзамен и получить одобрение. Foundation взимает комиссию за транзакции, но точные ставки не указаны.


Mintable
Mintable – платформа для создания и продажи NFT, основанная в 2018 году. Платформа предлагает интуитивно понятный интерфейс и множество инструментов для кастомизации метаданных NFT. Комиссия за продажу составляет 2,5%. Mintable интегрирована с различными криптокошельками, что упрощает использование платформы.


Sorare
Sorare – платформа для коллекционирования и игры в виртуальный футбол с использованием NFT-карт, основанная в 2018 году. Каждая карта представляет собой уникальный цифровой актив на блокчейне Ethereum. Платформа поддерживает многопользовательскую систему и сотрудничает с крупными футбольными лигами. Sorare уже получила поддержку от крупных инвесторов, таких как Benchmark и Sony Music.

Генерируем видео и оживляем картинки 🟡

Конечно же, я не мог обойти стороной проверку нового видеогенератора от DreamMachine - Lumalabs. Кстати, именно эти ребята были встроены в Canva, и благодаря им я создавал липсинк для аватара.

И, что могу сказать - это лучший продукт на рынке, который можно использовать прямо сейчас всем кто захочет, в отличие от Sora или Kling.

Разработчики решили не грузить сайт обширным конструктором. Оставили всё самое нужное:
- кнопку "начать";
- поле для ввода промпта;
- подсказку с рандомным запросом для генерации (я попробовал использовать и его);
- и иконку загрузки фото, которое Вы хотите анимировать.

А ну и страницу оплаты подписки 😊 Кстати, в бесплатной версии Вам доступно 30 генераций в месяц. Следующий тариф стоит 24$ в месяц и даёт +120 генераций, приоритетную очередь и право использовать созданные видео в коммерческих целях.

Приоритетная очередь действительно имеет смысл, потому что на бесплатном тарифе ждать приходится ооочень долго. Это понятно, сервис только недавно начал работать - все балуются. Что интересно, с нуля видео сгенерировалось намного быстрее, чем анимировалось изображение.

Ниже отправляю свои результаты.

Какие существуют модели Stable Diffusion 🏳️‍🌈

Сегодня вторник, а значит мы с Вами разбираем техническую составляющую нейросетей или узнаем, как можно запустить ту или иную программу.

Сегодня на разборе, как я недавно обещал, Stable Diffusion.

Для начала быстро пробежимся по его версиям:

🔤Stable Diffusion 1.5. - именно эта модель принесла популярность компании. Она самая нетребовательная по железу и на нее создано очень много кастомных обновлений.

🔤 Stable Diffusion 2.1. - не очень популярная версия. Хоть работает и лучше, чем предыдущая, но тут добавили цензуру, поэтому она не встретила популярности.

🔤 Stable Diffusion XL. Вышла летом 2023 года. Генерирует в разрешении 1024 × 1024, создает текст, лучше работает с композицией. На ее основе появилось много пользовательских моделей. И по сей день является, наверно, самой популярной из версий.

🔤 Stable Cascade. Вышла в феврале 2024 года. Работает хорошо, но только по подписке.

🔤 Stable Diffusion 3 - есть "голая" версия тройки, а есть недавно вышедшая Medium, которая вообще не должна была выходить и была неудачным экспериментом. Но руководство компании настояло на том, чтобы выпустили даже то, что вышло, и вышло не очень.

Про сайты, где им можно воспользоваться, расскажу чуть позже. Или уже завтра.

🖌Сервисы для использования Stable Diffusion онлайн

▶️ClipDrop 
Официальный сайт Stability AI, использующий Stable Diffusion XL. Генерирует четыре изображения, одно из которых можно увеличить. Доступны стили: аниме, оригами, цифровой арт, комикс и другие. Сайт собирает фидбэк пользователей, выбирающих лучшие изображения, как и Midjourney при тестировании.

Раньше был бесплатным, теперь генерация изображений доступна только по подписке, но есть другие интересные инструменты, доступные бесплатно.

▶️Dream Studio 
Облегченная версия Stable Diffusion с двумя моделями. Бесплатно можно сгенерировать около 400 изображений. Тысяча кредитов стоит $10 (893 ₽), чего хватает на 4000 картинок. Требуется регистрация или вход через Google/Discord. В интерфейсе можно выбрать размер, степень соответствия запросу и количество шагов до 150. Генерируются сразу четыре изображения.

▶️Google Collab 
Сервис Google для запуска кода на удаленных мощностях. Есть ограничения: при каждом запуске нужно ждать загрузки библиотек и моделей (5-10 минут). Откройте блокнот с моделью SDXL, нажмите «Подключиться», затем «Выполнить все». После загрузки перейдите в Fooocus. Настройки включают разрешение, стили и скорость генерации. Встроен плагин ControlNet для генерации по контуру. Сервис бесплатный, количество генераций ограничено временем доступа к нейросети.

▶️HuggingFace 
Платформа для публикации и тестирования моделей Stable Diffusion. Выбираете модель, вводите запрос и нажимаете Generate. Сервис бесплатный и неограниченный, но настройки обычно недоступны.

▶️Mage.Space 
Простой в использовании сервис без регистрации. Работает на версии SDXL, генерирует качественно. Бесплатный и безлимитный с ограничением в 25-50 шагов. После регистрации картинки сохраняются в галерею. Есть продвинутый режим с дополнительными настройками.

▶️PlaygroundAi 
Похож на соцсеть: можно подписываться на пользователей и смотреть их изображения. Бесплатный и безлимитный, без цензуры. Доступны версии 1.5, 2.1 и SDXL. Требуется авторизация через Google. Максимум 150 шагов генерации, выбор размера, фильтры и генерация по тексту или изображению.

Заработок на дипфеках 🤑

Я пропал немного с виду. Но не просто так, эти два дня я разбирался и выполнял заказ на синхронизацию движений губ в видео с рекламным текстом.

Сложность в том, что нужно было не просто оживить статичное фото и наложить звук - с выходом Hedra это сделать можно за пару минут - а заменить озвучку и синхронизировать рот на уже готовом видео с достаточно активной динамикой и сменой планов.

Такие сервисы тоже есть, но чаще всего платные, и не особо дешевые. Например, в Di-D водяной знак убирают только если заплатишь 100$)

И я пошел шерстить просторы интернета в поисках подходящей программы. Потом вспомнил, что я уже упоминал такую, но не разобрался как она тогда работает - Wav2Lip.

Это программа с открытым исходным кодом и с большим количеством вариантов запуска ее - очень много людей сделали на ее основе блокноты в Google Colab, но почти все они уже не работают.

Многие платные сервисы под капотом у себя имеют именно эту программу, кто-то улучшенную, а кто-то чистую. Где-то, в пробном варианте платной нейросети результат у меня получался даже хуже, чем в итоге в этой бесплатной.

В итоге я нашел работающий блокнот, сделал тесты и приступил к работе. Почти весь день сегодня шаманил над роликом. Дополнительно у меня еще попросили еще движения рук персонажа состыковать со смыслом текста, поэтому пришлось делать дополнительный монтаж.

Само видео не буду сюда загружать, потому что его собираются использовать в рекламе, но завтра сделаю для Вас демонстрацию. Пока что можете сами попробовать разобраться в блокноте этой программы - по этой ссылочке.

Доброй ночи всем)

P.S. Пойду себе макарошки с сыром приготовлю.

Действительно годный контент 🤩

Перехожу к рассказу о том, как пользоваться сервисом Wav2Lip.

К сожалению, среди работающих блокнотов в Google Colab, я нашел очень ранний, поэтому он плохо адаптирован под вариативность, и чтобы в принципе получить результат, нужно придерживаться очень четких правил, о которых попрой забываешь и 10 минут ожидания превращаются в просто неудачную попытку.

А, и да, программа, по этим же причинам работает не очень быстро. Бывает, для синхронизации одного видео в полминуты приходится подождать 10-15 минут, но это цена за бесплатность и неограниченность в использовании. Причем, платные сервисы даже не всегда показывают такое же качество.

Ну и чтобы не нагромождать пост полотном текста, инструкцию я сделал в статье по ссылке.

Пример смотрите на видео.

И еще раз ссылочки для Вас:

Код на GitHub.

Работающая модель GoogleColab.

А вообще, смотря на все это, возникает желание самому разобраться, чтобы доработать и оптимизировать программу, сделав из нее приложение. И, думаю, через месяц-два я это реализую.

Наблюдайте за прогрессом)

А китайцы не останавливаются 🤩

Я бы даже сказал, не сбавляют обороты, они уже выкатили обновление для своей нейросети с генерацией видео.

Теперь она может оживлять изображения (я как-то упустил что раньше не могла), и делает это получше, чем сервисы, доступные нам. Да, Kling до сих пор только для избранных жителей поднебесной.

А ещё программа натренировали на то, что видео можно продлевать до трех минут, разбитый на куски, и каждый кусок контролируется отдельным промптом.

Да, обновление вышло уже пару дней назад, но я заметил только сейчас и решил поделиться.

🔆 Конференция по Искусственному интеллекту и что там с голосовым интерфейсом от ChatGPT

Решил напомнить Вам, что завтра пройдет одно из главных AI-событий - GigaConf 2024. Сразу даю ссылку, где можно будет смотреть трансляцию.

На конференции выступят более 50 специалистов, которые расскажут об инновациях в области ИИ, машинном обучении, DevOps, инженерии и аналитики данных и еще очень многом другом. Парочку блоков я хочу осветить в следующих постах тут.

Участие бесплатное, поэтому кому интересна тема, не пропускайте.

А что там с OpenAI?

Продвинутый голосовой интерфейс, который они анонсировали на презентации, будет доступен для премиум пользователей только осенью, а не как они говорили, через пару недель.

Сейчас им могут пользоваться только ограниченное количество альфа-тестеров.

Но выпустили приложение для пользователей MacOS.

Как думаете, выпустит ли кто-то из конкурентов фичу с голосовым интерфейсом раньше?

🧪 Новый стандарт тестирования на COVID-19: опыт KCL TEST

Колледж Кингс в Лондоне (King's College London) запустил инновационную программу KCL TEST для асимптоматического тестирования на SARS-CoV-2. Эта программа, проведенная с декабря 2020 по июль 2022 года, включала 158,277 ПЦР-тестов для сотрудников, студентов и их семей. Программа показала высокую эффективность, предоставляя результаты в среднем за 16 часов 37 минут. Тестирование проводилось бесплатно, что позволило обеспечить безопасность на кампусе и снизить распространение вируса.

🔬 Особенности и достижения:

- Использование слюны для тестирования позволило упростить процесс сбора образцов.

- Программа базировалась на открытых исходных кодах и нерекламных реагентах, что сделало ее доступной и легко адаптируемой.

- KCL TEST получил аккредитацию ISO15189, что подтверждает высокое качество диагностики.
- Программа продемонстрировала низкий процент положительных результатов и практически отсутствие волны дельта-варианта.

💻 Выводы и рекомендации:

- Регулярное асимптоматическое тестирование является ключевым для предотвращения вспышек и поддержания безопасных условий работы.

- Академические учреждения могут играть важную роль в подготовке к пандемиям, предоставляя высококвалифицированный персонал и разрабатывая эффективные и экономически выгодные методы тестирования.

- Власти должны активно привлекать университеты для создания и реализации тестовых программ, чтобы облегчить нагрузку на здравоохранение.

KCL TEST показал, что университеты могут быстро адаптироваться и вносить значительный вклад в общественное здоровье, особенно в условиях ограниченных ресурсов. Их опыт может служить примером для других образовательных и научных учреждений по всему миру.

Ссылка на статью.