Кто ставит дизлайки??? За что?

Кстати. Всем очень советую песню "Нексюша - Итшник". Мне очень понравилось и думаю вам понравится. Ссылка в комментах

Чтобы мотивировать себя писать этот движок, теперь каждое воскресенье я буду выделять по два часа на это, и дальше писать пост об этом и о том что зарисерчил

#поисковыйдвижок
Итак, сегодня второй день, когда я его переписываю. В первый день столкнулся с проблемой медленной лемматизации текстов, поэтому вместо лемм решил использовать все слово, но с доп.эвристиками. Сейчас я написал на питоне Бор(префиксное дерево), куда можно добавлять слова/тексты, и искать, в каких текстах какой кусок этого слова встречается. Также я придумал, что можно сделать дальше. Планы на следующий раз: 1) сделать ассоциатор - штуку для эффективного получения синонимов слов, также без лемматизации. Оно будет тоже бором, но с другой метадатой к вершинам. 2) попробовать лемматизацию от наташи - когда я давно её брал, она работала быстро, но не очень качественно. 3) возможно, успею сделать сжатие моего бора, так как очевидно, что там будет крайне много вершин, где у вершины ровно 1 сын

Админ...

#поисковыйдвижок
Сегодня ещё дорабатывал поиск без нейронок. Очень элегантно выразил поиск синонимов в боре через бор, сделанный для обычного поиска. Мне нравится. Много думал, как и что можно повзвешивать и добавить в оценку. Скоро придётся использовать оптимизационные пакеты для безград.оптимизации, чтобы параметры подбирать нужные (с каким весом брать разные эвристики при ранжировании), но это позже. Пока что все и так работает оч быстро, поэтому сжимать бор не буду, подожду. Проверил Наташу - быстро лемматизирует. Кайф. А неточности я поправлю с помощью боров как раз)

Определился с темой проекта на Сириус: многорукие бандиты с тяжёлыми хвостами. Сначала буду прорабатывать, когда мы имеем неограниченную дисперсию у потерь, а потом (как хочет Гасников), если все будет получаться, займёмся вопросами клипирования стох.градиента, когда многорукий бандит решается зеркальным спуском. Как же кайфово изучать матешу самому

Что я пишу в беседу смены в Сириусе, после своего предложения пойти в бар..

Как увеличить аудиторию канала? А то идёт уже некоторая стагнация. Я удивлён, что столько людей читают мой щитпостинг, но все же

Неужели большая часть прикладной математики в компьютер саенсе это комбинаторика (кодирование, дискропт и прочее) и теорвер (обычный опт, матстат и вот это все)? Даже удивительно. Я сейчас делаю условно "рисерч" по оптимизации, и большую часть времени я просто делаю какой-то теорвер. И все доказательства в оптах это теорвер процентов на 95%

Ещё я случайно подслушал, что Гасников говорил дедушке, с которым я в Сириусе работаю в основном (т.к. у него многорукие бандиты). И он меня достаточно хвалил. Сказал, что я проверенный человек, очень круто ему помогал в Сириусе, и что хорошо погружаюсь. Сказал, что небольшая проблема в том, что я лишь на 2ом курсе, но для 2ого курса у меня все очень неплохо и если я все пройду и изучу, то перспектива ему видится хорошей. И что конкретно в моем случае он планирует довести то, что тут будет на Сириусе, до статьи, так что это будет не просто проект. Гасников лучший

Ура, я смог вывести очень тупую, но хотя бы какую-то оценку сходимости метода в рамках больших отклонений (т.е. Что сходится не матожидание с такой оценкой, а сам результат, но с некоторой вероятностью)

Я все ещё не смог найти нормального инструмента, чтобы на питончике делать разбор слов по составу. Может плохо искал... Сделаю свою библиотеку, даже если такая уже есть. Попробую сделать удобно и быстро. Да и надо оформлять гитхабчик

Яндекс такая крутая компания. Что может быть лучше, чем автобус, который телепортировался несколько раз на базу, пока ехал?
Upd. Поехал на автобусе, который не показывал яндекс в итоге. Спасибо) Сочи это волшебный город

Справедливости ради мне кажется что у меня ничего не получится)))) Потому что как-то это очень тяжело. Мне сейчас обычная стох.оптимизация, которая жёстко пугала, кажется детским лепетом в сравнении с Онлайн оптимизацией

Я тут задумался... Наверняка многие знают что в питоне есть фрактальные списки. Но с помощью них же можно моделировать марковские процессы вы представляете???

Разговор двух душных (в хорошем смысле) геев-айтишников о своём айтишном(жизни не в России, конечных автоматах и человеке-бензопиле), волею судьбы живущих вместе, это so aesthetically 💅💅💅💅

#лягушкаобразовательный
Раньше, когда мне надо было спарсить много ссылок, я писал свой кастомный класс, наследуемый от threading.thread, и в нем прописывал все что мне нужно (либо можно было использовать map, но там свои тонкости). Но даже это не работало так быстро... Сейчас у меня 200 веб-страниц спарсилось за секунду. Рассказываю магию:
import concurrent.futures

MAX_THREADS = 30
with concurrent.futures.ThreadPoolExecutor(max_workers=MAX_THREADS) as executor:
executor.map(download_url, story_urls)

Примерно так это должно выглядеть, и все. Это какое-то очень мощное ускорение

Кстати, интерактивчик: что вы думаете про кадетские классы в школах? Типо что это, зачем и почему

Почему SURF + удобная розетка это такая редкая комбинация в Сочи :( Я заходил в 4, и вот в одном была розетка но не удобная, в другом удобная но неудобный для ноута низкий стол. Чо за фигня