Derp Learning – Telegram
Derp Learning
13K subscribers
3.17K photos
916 videos
9 files
1.32K links
Используем ИИ строго не по назначению.
Заметки про ИИ, IT, компьютерные игры, и всякие инженерные интересности.
Download Telegram
This media is not supported in your browser
VIEW IN TELEGRAM
Немножко пафоса, господа! 🐳
Судя по всему, перемножение матриц скоро отберет хлеб и у пейзажистов, и у художников по концептам :D
Forwarded from Denis Sexy IT 🤖
Media is too big
VIEW IN TELEGRAM
Ученые показали новый вид алгоритма который автономно управляет дроном в сложных условиях, вроде леса, руин и тп. А самое главное, эта штука уже сейчас спокойно летает на скорости 40 км/ч сквозь лес.

А, ну еще прикольно что данные для обучения нейронки которая управляет дроном собирали с помощью "симуляции", то есть условно сделав виртуальный лес и летая по нему в 3D.

Чтож, хорошо что оно пока само не охотится 🌚
Представлен алгоритм, позволяющий ускорить работу нейросетей в 100 раз.

О да, детка.
Как известно, в deep learning львиная доля вычислений - перемножение матриц (да-да, именно оно и отбирает у кожаных мешков работу). И вот выкатили алгоритм аппроксимации этой операции, который обещает х10 прирост по сравнению с остальными алгоритмами аппроксимации, и х100 по сравнению с "честным" перемножением. Х100, Карл.

Все пока очень сырое, кое-как завернуто в питон, не работает нормально на cuda и так далее, но даже в таком виде очень круто.
Подробнее Доклад Гитхаб
Forwarded from Reddit
This media is not supported in your browser
VIEW IN TELEGRAM
r/ #nextfuckinglevel
Итальянские математики сделали невозможное: они изучили два миллиона мемов с Reddit и выяснили, что с годами они становятся всё сложнее

Согласно публикации Scientific Reports, учёные выгрузили мемы с четырёх сообществ реддита: r/AdviceAnimals, r/memes, r/CemeteryComed, r/dankmemes. На первом этапе учёные с помощью нейросети поделили все мемы на четыре больших группы: два набора с животными, один с людьми и всё остальное. После этого другой алгоритм сгруппировал мемы в кластеры: изображения в пределах одного кластера похожи на исходный шаблон. Благодаря этому математики смогли увидеть, как появляются новые шаблоны и новые мемы в пределах каждого кластера.

В итоге выяснилось, что число новых шаблонов для мемов со временем экспоненциально растёт два раза за каждые полгода. Среднегодовая сложность мемов также значительно увеличивается из-за формирования диалектов, понятных только внутри отдельных сообществ.
Новая модель от Google бьет все рекорды GPT-3

Совсем недавно умные товарищи из Гугла выкатили свою новую языковую модель FLAN (Fine-tuned LAnguage Net), которая превосходит GPT-3 во всех Zero-shot задачах (без тюна под конкретную задачу), а где-то даже бьет few-shot GPT-3 (т.е. которую тюнили на эту задачу пару итераций).

Новый подход назвали Instruction Tuning. В отличие от сырой GPT-3, которая генерит предсказание из текстового ввода в свободной форме, в Instruction Tuning модель дообучают на наборе инструкций в четкой форме:
Задача - аргументы - варианты ответов (если есть)

Это позволяет модели превосходить сырые языковые модели вроде GPT-3 на типах задача, с которыми они обе до этого не сталкивались.

Претрейна нет, но ничего не мешает дообучить таким же способом GPT-3, и получить такие же или лучшие результаты.

🐈 Код
📜 Публикация
📒 Подробнее
CLIP Guided Diffusion 512 Russian Edition

По просьбам трудящихся запилил ру верcию колаба для CLIP Guided Diffusion 512x512
Прикрепил результаты с теми настройками, что сейчас стоят в блокноте.
Картинка скачается автоматически, либо можно сохранить по правой кнопке из блокнота.

Развлекайтесь на здоровье! :D
-> Колаб <-
Абстракционисты, не расслабляемся. Перемножение матриц скоро доберется и до вас :D
VQGAN + CLIP
Кот с банкой сметаны на складе амазона.
холст Колаб, VQGAN+CLIP, 2021.
В третьяковку меня, быстро, решительно!
x4.zip
43.7 MB
Хайрезы из этого поста на обои
Forwarded from Denis Sexy IT 🤖
Наткнулся на интересную нейронку, которая, исходя из типа помещения и плана этажа, правдоподобно расставляет в ней мебель.

Модель последовательно генерирует стулья, шкафы, кровати в различных помещениях, при этом сохраняет свойства объектов (не поставит шкафчик так, чтобы ящики в нём открывались в рядом стоящую кровать).

Начинается всё с пустой комнаты, в которую добавляется какая-нибудь тумбочка. Далее, учитывая что на этой тумбочке может стоять телек, модель добавляет напротив неё кровать (на гифке видно), к кровати уже логично добавляются прикроватные тумбочки, шкаф и т.д. со множеством вариаций. Еще классный редим – предложение объектов: пользователь говорит, мол хочу поместить в этой области объект, а модель предлагает объекты, которые в ней могут поместиться и лаконично вписаться.

В общем даже полезная штука для дизайнеров интерьеров, быстро накидать вариации и дальше с ними работать.
Принес вам Смауга, чахнущего над златом, лол.