Принес вам ИИ-магию!

Assets Scout - image-to-3D!
https://scout.asseter.ai/

Берете картинку, а ИИ вам находит 3Д-ассет (настоящее 3Д, без читов) максимально похожий на вашу картинку.

Он анализирует картинку и потом ловко роется во всех известных крупных стоках типа 3dsky, cgtrader, quixel megascans и находит там максимально похожую 3Д-модель.

Отличный data-driven подход, вместо того, чтобы пытаться генерить 3Д на основе картинки, можно просто токенизировать картинку и сделать умный поиск.

Причем это не бумага, не спейс на хаггингфейс, а вотпрямщас работающий проект.

Я вгрузил туда игровой 2Д-ассет(картинку в изометрии), получил похожие домики и объекты, но уже в честном 3Д.

Более того, там есть функция Picture Assembler - если ваша картинка сложная, то ИИ детектит индивидуальные объекты, текстуры, материалы, и предлагает ассеты, из которых картинку можно собрать(!).

Помните, что это поиск по ассетам, а не генератор 3Д - если грузить туда лица, то он (довольно осмысленно) выдает 3Д-модели знаменитостей, как-то похожие на вашу картинку. Ибо на стоки люди грузят Бредов Питов и Николасов Кейджей в зибраше.

Го тестить, только не повалите сервера.

Крутизна еще в том, что это работает прям на мобилке в браузере, без приложения. Увидел магическую пепяку на улице, вынул скаут из кармана, навел, щелкнул - вот тебе 3Д-пепяки со стоков, максимально похожие на реальную.

И это я еще про Asseter.ai не рассказал, который там под капотом - вот там уже совсем все по-взрослому.

Tune-A-Video: One-Shot Tuning of Image Diffusion Models for Text-to-Video Generation

Нейросетка генерит видео по тексту. Но надо ее предварительно обучить. Но всего на одном видео.
Слева тренировочные видео, справа - генерации.

Сайт проекта
Код
Демо на huggingface
С демкой я еще не разбирался, что-то там замороченный интерфейс

#text2video

Крутой сервис #text2speech
Иначе говоря, нейродиктор.
https://beta.elevenlabs.io/

Увы, на бесплатном тарифе только английский язык. На одном из платных обещают разные языки. Но какие - не нашел. Тайна покрытая мраком.

Ну ладно, пока заценим как оно умеет выражать в речи эмоции, вот пример смеха,

А вообще у них есть демо кусочки аудиокниг

#TTS

Там моя работа (№5) участвует в конкурсе на аватарку бота. Завтра подводят итог.
Приглашаю проголосовать за любую понравившуюся

Добро пожаловать в будущее: на Twitch уже больше суток идёт шоу, генерирующееся на лету с помощью ИИ и сделанное в стиле Seinfeld.

Генерится всё: видео, сценарий, реплики персонажей, озвучка текста. Пока просто любопытно за этим наблюдать как за арт-проектом. Но задумано как комедийное шоу.

Вот ссылка на сам стрим.

У админа днюшка. Случайно наткнулся на эту картинку в соседнем чате

Мобильное приложение для chatGPT?

"OpenAI также планирует запустить мобильное приложение ChatGPT и протестировать новую функцию в своем программном обеспечении для создания изображений Dall-E, которое будет создавать видео с помощью искусственного интеллекта."

https://www.semafor.com/article/02/01/2023/chatgpt-is-about-to-get-even-better-and-microsofts-bing-could-win-big

Ну, за матте-пайнтеров и художников по фонам.
Если уж Нетфликс вошла во вкус использования ИИ для генерации бэкграундов для своих сериалов, то художникам точно пора начать беспокоиться.
Пока это были шуточки и забивание телеграм каналов генеративными картинками типа "сматритечо".
А сейчас подтянулись взрослые мальчики.

Вчера постил про клип Паши Мунтяна, а сегодня пришли новости из японского Нетфликса.

«В качестве эксперимента, чтобы помочь аниме-индустрии, испытывающей нехватку рабочей силы, мы использовали технологию генерации изображений для фоновых иллюстраций во всех трехминутных видеороликах», — говорит Deepl, переводя Netflix Japan.
Пример в шапке поста. Полная версия тут:
https://twitter.com/NetflixJP/status/1620357552025538561
Если посмотрите до конца, там есть титр "AI (+ Human)"

В сети уже приподгорает, проклинают и Нетфликс и ИИ:
https://twitter.com/BriHardGaming/status/1620779003547381760
Говорят, что уже вместо кожаных фамилий можно просто писать Human

Text-To-Video на подходе!

Смотрите, что вытворяют ребятки из Гугла!
На входе референс в виде видео или картинки или даже набора из 10-20 картинок и текстовое описание, что вы хотите сотворить с этим референсами, под какую дудку вы хотите заставить их плясать.
ИИ извлекает из референсов "смыслы" и потом анимирует их в соответствии с тем, что вы насочиняли в текстовом промпте.
И это вам не дефорумный бурлеж, это гладкое видео. Оцените примеры с животными.

Посмотрите полное видео - это прототип вселенской монтажки, где вы просто орете на свои картинки-референсы: "а ну ка, поддали эмоций в кадре и весело побежали в закат!".
И все бегут...

https://www.youtube.com/watch?v=xcvnHhfDSGM

Не зря авторы именуют проект Video Editing Tool

А картиночки-то на входе можно генерить с помощью ИИ. И персонажей, и фоны...

Скрипач не нужен, куда катится мир!

Полная информация тут: https://dreamix-video-editing.github.io/

Спасибо за утреннюю наводку CGIT_Vines.

Microsoft встроили ChatGPT в Microsoft Teams. Задача нейросети — во время звонка в реалтайме подмечать главные тезисы встречи и суммаризовать их в текст. Короче, генерить meeting notes.

Прочие фичи:
- на основе выделенных тезисов предлагать новые таски;
- автоматически делить митинг на важные куски по смыслу (правда, только если митинг был с презентацией);
- запоминать, какие люди говорили в какие моменты митинга и в какие моменты упоминалось ваше имя. Это чтобы после было проще вернуться к нужным деталям звонка;
- автоматически переводить содержание звонка на 40+ языков.

Это все добро будет платно.

ChatGPT теперь можно встроить в ваш iPhone и задавать вопросы голосом.

Сам не пробовал, подтвердить не могу.

Как её запустить: сначала заходим на сайт OpenAI под своим аккаунтом и с включённым VPN, нажимаем на значок аккаунта и выбираем View API keys, кликаем на Create new secret key, копируем ключ.

Затем нужно скачать быструю командy SiriGPT, устанавливаем, нажимаем на три точки, вставляем ключ от OpenAI в поле «Отправить сообщение» и добавляем русский язык в поле «Продиктовать текст».

Далее нажимаем на «Готово», включаем быструю команду, разрешаем распознавание речи и задаём свой вопрос. Вуаля, ChatGPT теперь в вашем телефоне.