Forwarded from эйай ньюз
This media is not supported in your browser
VIEW IN TELEGRAM
🔥Authentic Volumetric Avatars from a Phone Scan
SIGGRAPH 2022
Коллеги из Meta Reality Labs выпустили новый метод по созданию реалистичных 3D аватаров c помощью телефона!
Грубо говоря, работает это так:
Человек берет айфон и сканирует свое лицо, корча разные гримасы. С помощью трекинга ключевых точек и multi-view геометрии строится мешь головы и соответствующая ей текстура. Так делают много раз, для разных гримас. Далее тренируется энкодер, который переводит текстуру и карту глубины определенной гримасы в скрытый код. Этот код подается на вход декодеру, который генерит уже отрендереный аватар головы.
Самое сложное здесь - это натренировать декодер. Он тренировался в лабе на очень качественных данных от 255 человек. Каждого из участников садили в сферу обвешанную сотней камер, которые синхронно снимают видео, и заставляли гримасничать. Самое крутое, что этот декодер получился универсальным и может рендерить лица, на которых он не был изначально натренирован.
❱❱ Полное видео о методе
❱❱ Папира
@ai_newz
SIGGRAPH 2022
Коллеги из Meta Reality Labs выпустили новый метод по созданию реалистичных 3D аватаров c помощью телефона!
Грубо говоря, работает это так:
Человек берет айфон и сканирует свое лицо, корча разные гримасы. С помощью трекинга ключевых точек и multi-view геометрии строится мешь головы и соответствующая ей текстура. Так делают много раз, для разных гримас. Далее тренируется энкодер, который переводит текстуру и карту глубины определенной гримасы в скрытый код. Этот код подается на вход декодеру, который генерит уже отрендереный аватар головы.
Самое сложное здесь - это натренировать декодер. Он тренировался в лабе на очень качественных данных от 255 человек. Каждого из участников садили в сферу обвешанную сотней камер, которые синхронно снимают видео, и заставляли гримасничать. Самое крутое, что этот декодер получился универсальным и может рендерить лица, на которых он не был изначально натренирован.
❱❱ Полное видео о методе
❱❱ Папира
@ai_newz
👍20🔥8
🤔 Опрос дня: Некоторые картинки на CAPTCHA’ах защищены adversarial attack’ами. Человеку достаточно легко распознать обьекты на таких шумных картинка. Но почему такой шум должен защищать CAPTCHA от нейронных сетей? Выберите истинные высказывания.
Anonymous Poll
23%
Любой рандомный шум — адверсариал атака. В train сете не было шума, а тут вдруг шум.
29%
Адверсариал атака выбивает сэмпл за Decision Boundary, так как сети слишком оверфитнуты на трейне
4%
Адверсариал атака выбивает сэмпл за Decision Boundary, так как современные сети слишком андерфитнуты
11%
Адверсариал атаки более вероятны при использовании ReLU и ReLU-подобных функций активации
22%
Адверсариал атака работает из-за того, что большинство сетей сверточные, а свертки локальные
18%
Даже слабый рандомным шум мешает сетям, с большой вероятностью выбивая сэмпл за Decision Boundary
17%
Адверсариал атака подобранная для одной сети никогда не будет работать для другой
39%
Можно создать успешную адверсариал атаку на сеть, доступа к весам которой у Вас нет
9%
Адверсариал атаки более вероятны в случае, если в сети есть residual блоки или конкатенации
39%
Адверсариал атаку можно совершить методом «градиентного подъема»
🔥16👍4
Forwarded from DL in NLP (Vlad Lialin)
Пара интересных новых фишек в 🤗 Transformers 4.20
1. Big model inference🔥 — позволяет очень просто инферить большие модели (10B+) на каком угодно железе. По возможности распараллелит по всем GPU, если не их хватает — кусок модели будет держаться в памяти процессора и подгружаться в GPU когда надо. Если даже CPU памяти не хватает, будет подгружать веса с диска кусками.
1. Добавили BLOOM 🌸 от BigScience — одновремено с этим выложены чекпоинты от 0.3B до 6B. Главная модель в 176B должна подоспеть через месяц.
1. Добавили GPT-NeoX-20B, Wav2Vec2-Conformer, Trajectory Transformer, LongT5 (кстати его надо бы на днях разобрать) и ещё несколько интереных моделей.
1. Big model inference🔥 — позволяет очень просто инферить большие модели (10B+) на каком угодно железе. По возможности распараллелит по всем GPU, если не их хватает — кусок модели будет держаться в памяти процессора и подгружаться в GPU когда надо. Если даже CPU памяти не хватает, будет подгружать веса с диска кусками.
1. Добавили BLOOM 🌸 от BigScience — одновремено с этим выложены чекпоинты от 0.3B до 6B. Главная модель в 176B должна подоспеть через месяц.
1. Добавили GPT-NeoX-20B, Wav2Vec2-Conformer, Trajectory Transformer, LongT5 (кстати его надо бы на днях разобрать) и ещё несколько интереных моделей.
🔥26👍1
Forwarded from Denis Sexy IT 🤖
Мне тоже пришел инвайт в Dalle 2, и я как по настоящему упоротый на технологиях чел, сразу сгенерировал себе эскиз по запросу «Руки робота, Божественное прикосновение», и пошел набил его в тату салон 🌚
Пока обсуждали с тату-мастером технологию, он рассказал что это очень крутой продукут – потому что очень сложно от клиента получить эскиз который ему нравится, и постоянно перерисовать приходится. Интересно сколько на самом индустрий заденет Dalle
Буду теперь на этой руке только ИИ-сгенерированное набивать 🗿
Пока обсуждали с тату-мастером технологию, он рассказал что это очень крутой продукут – потому что очень сложно от клиента получить эскиз который ему нравится, и постоянно перерисовать приходится. Интересно сколько на самом индустрий заденет Dalle
Буду теперь на этой руке только ИИ-сгенерированное набивать 🗿
🔥86👍12👎2
Forwarded from AI для Всех
Прощай TensorFlow
Google практически официально признал, что TensorFlow безвозвратно проиграл конкуренцию PyTorch. С этого момента все исследования и продукты гугла потихоньку переезжают на JAX.
Уже начали изучать?
Google практически официально признал, что TensorFlow безвозвратно проиграл конкуренцию PyTorch. С этого момента все исследования и продукты гугла потихоньку переезжают на JAX.
Уже начали изучать?
🔥62👍5👎3
Ⓘ Данное сообщение доступно только пользователям Telegram 𝙋𝙧𝙚𝙢𝙞𝙪𝙢.
👎121😢36🔥10👍9❤4
🧸 Тут кое-что готовится!!.. Но пока много сказать не могу.
У админа сейчас сложное время. Да и к интеренету доступа почти нет. Но это ничего, зато скоро будет что-то очень-очень крутое..
Вы можете помочь "этому чему-то " стать еще лучше. Если вам нравится генеративный арт, то плиз напишите в комментариях запросы на английском языке, например:
▫️Coffee house in old Vienna, watercolor art
▫️Impressionism, spring garden and lake
▫️Cubism portrait of teapot with mustaches
▫️Gaudi style houses on Mars, sunset
▫️Photo of an owl ride on a skating rink on ice
Я буду очень-очень признателен. Обещаю, что эти комментарии будут прочитаны с огромным удовольствием 😉
У админа сейчас сложное время. Да и к интеренету доступа почти нет. Но это ничего, зато скоро будет что-то очень-очень крутое..
Вы можете помочь "
▫️Coffee house in old Vienna, watercolor art
▫️Impressionism, spring garden and lake
▫️Cubism portrait of teapot with mustaches
▫️Gaudi style houses on Mars, sunset
▫️Photo of an owl ride on a skating rink on ice
Я буду очень-очень признателен. Обещаю, что эти комментарии будут прочитаны с огромным удовольствием 😉
❤26👎4👍3