Нейронавт | Нейросети в творчестве – Telegram
Нейронавт | Нейросети в творчестве
10.6K subscribers
4.43K photos
3.7K videos
41 files
4.74K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках не участвую

для связи @Neuronauticus

Заявка на регистрацию в РКН № 6309426111
Download Telegram
This media is not supported in your browser
VIEW IN TELEGRAM
Music ControlNet:Multiple Time-varying Controls for Music Generation

Мощная музыкальная нейронка.
- генерация музыки по образцу мелодии и текстовлму описанию
- контроль динамики
- контроль ритма

На сайте много примеров всевозможных комбинаций входных параметров. Кода, к сожалению, нет

Полное видео, 2 минуты

#music2music #text2music
🔥8
LLaVA-Plus: Large Language and Vision Assistants that Plug and Learn to Use Skills

Мультимодальная система агентов на базе LLaVA и пачки других нейронок:

Grounding DINO
Grounded-Segment-Anything
Recognize Anythging
Segment-Anything.
SEEM: Segment Everything Everywhere All at Once
Semantic-SAM
Segment-Anything

Гихаб
Демо

#VLM #multimodal #assistant
👍2
This media is not supported in your browser
VIEW IN TELEGRAM
Nova2 теперь поддерживает много языков, в том числе русский

Доступ здесь

#speech2text
1
Forwarded from AI для Всех (Artemii)
Ранний доступ к Fabrika

Друзья, мы начинаем программу раннего доступа к нашему новому проекту - Fabrika. Fabrika - это новая плафторма для совместной разработки AI ассистентов (агентов/GPTs).

Попасть в waitlist
Ученые из Калифорнийского технологического института и Сиднейского университета создали нейроморфный процессор. Вместо традиционных транзисторов он использует сплетение тысяч серебряных нанопроводников.

Эти нанонити были случайным образом расположены на чипе и подключены ко входам и выходам, тем самым сформировав искусственную нейронную сеть. В местах их соединения происходят электрохимические реакции, благодаря чему устройство приобретает свойства памяти.
Для обучения процессора использовали датасет MNIST, содержащий образцы рукописных цифр. В результате искусственный "мозг" смог распознавать цифры с точностью 93,4%. Хотя он не обладает сложной памятью, он способен обрабатывать и распознавать информацию в реальном времени.

Такая конструкция является более дешевой и энергоэффективной альтернативой дорогим ускорителям искусственного интеллекта. Исследование находится на начальной стадии, но, учитывая простоту производства, оно обещает стать прорывом в области нейроморфных вычислений.

#neuromorph #science
👏8🔥6
Forwarded from Psy Eyes (Andrey Bezryadin)
3D генератор/редактор Spline добавил поддержку гауссианов.

* Снимаем объект в Luma или Polycam
* Кидаем в Spline в формате .ply
* Вырезаем нужное
* Используем с другими 3D объектами или локацией
* Анимируем и меняем освещение
* Экспортируем + вставляем в сайт, итд.

Сырой гауссиан с девушкой
Финальный результат
Как сделать самому
3D карточка + как с ней работать
🔥2🤯1
This media is not supported in your browser
VIEW IN TELEGRAM
RAPIDS

Штука, которой смогут самостоятельно воспользоваться только умельцы в код.
Есть такая библиотека в Python для работы с данными - Pandas. Её активно используют аналитики данных и дата-сайентисты, в том числе она используется и в нейросетках. Но! Она до сих пор работала только на CPU.

Так вот. Nvidia выпустили новую библиотеку RAPIDS, которая делает Pandas в 150 раз быстрее. Она автоматически определяет, работаете ли вы на GPU или CPU, и ускоряет код. При этом нет абсолютно никаких изменений в синтаксисе, просто перед импортом пандаса запускаем эту команду:

%load_ext cudf.pandas

Ждем обновок с ускорением всех наших любимых нейросеток.

Код

#coding #tools
🔥5👏1
Media is too big
VIEW IN TELEGRAM
D3GA - Drivable 3D Gaussian Avatars

Первая управляемая 3D-модель человеков с использованием гауссиан.

Благодаря гауссианам аватары рендерятся в реальном времени

Деформация аватаров основана на объемных каркасных деформациях и ключевых точках.

На вход нужны видео с нескольких ракурсов, далее получаем модель в виде композиции из 3D-гауссиан, встроенных в четырехгранные клетки. Гауссианы преобразуются этими клетками, раскрашиваются с помощью MLP (не спрашивайте что это такое, я не понял, но на видео его работа объяснена) и растеризуются в виде пятен. Аватар представлен в виде многослойного набора трехмерных гауссиан, что позволяет разложить аватар на различные слои ткани.

Среди авторов - Meta Reality Labs Research. Так что вы знаете, что разработка не из праздного интереса

Код обещают выложить

#humanavatar #humananimation #gaussian #video2avatar
😱4🔥3
Human-SGD: Single-Image 3D Human Digitization with Shape-Guided Diffusion

Реконструкция 3D модели человека по одному изображению.

Генерируют недостающие ракурсы 2D диффузией, потом собирают по ним 3D модель - текстурированную сетку.

Код обещают выложить

#imageto3D #image2avatar #humanavatar
👍2
Microsoft переименовала Bing Chat в Copilot, объединяя все ИИ-продукты под одним названием. Copilot доступен в поиске Bing, браузере Edge, Windows 11 и как часть Microsoft 365

The Verge

Попробовать MIcrosoft Copilot

#assiastant #chatbot
👍3
krea.ai

Здесь помимо прочих инструментов можно создавать изображения по цветным пятнам, можно даже как-то подавать на вход картинку с вебки.

Если вы еще ждете доступ, держите инвайт-код от UXlive:
KREA-FRIENDS

#image2image
👍3🤔2
Emu Video и Emu Edit

Парочка от Meta
Emu Video — высококачественный генератор видео.
Emu Edit — редактор фото текстом.

Кросивое, но пока только показывают.

#text2video #image2image #text2image
👍1