А ещё что линейная регрессия на стакане это хороший бейзлайн

История одного звездочета, или самый полный обзор на Сириус для студентов и миллениалов.
Что ж, Сириус, если кто не знал - образовательный центр для одаренных детей, а также университет, проводящий образовательные программы и конференции для школьников и студентов.
Мои отношения с Сириусом начались ровно два года назад - тогда я впервые здесь очутился, и сразу как преподаватель, только окончив первый курс физтеха. И я сразу влюбился в это место - до этого я жил в захламленной маленькой двушке с мамой, а потом в небольшой однушке с соседом, а тут... Прекрасный номер в отеле, а в отеле я был впервые. Причем это не просто отель - мечта! Прямо внутри образовательного центра. Море, о котором я так мечтал всю жизнь, и где до этого не был около 8 лет. Свежий воздух, очень крутое окружение из преподавателей, ученых и методистов - определенно, я хотел стать таким же крутым, когда вырасту. Смена прошла отлично - очень приятное общение (и не только :), плотное погружение в оптимизацию, работа над первым проектом с претензией на научность в моей жизни. Эта смена стала моей путевкой в оптимизацию, за что я ей очень благодарен.
Я мечтал попасть в Сириус далее, и мечты сбывались. Я три раза был на студенческих сменах, и еще два раза (включая текущий) как преподаватель и ментор. И мне все нравилось - изучение новых научных знаний, крутой нетворкинг, качественный отдых и приятные условия. Но... Не в этот раз.
Переезд в квартиру, где ты живешь полностью один, изменил мою жизнь всего за месяц, и я честно не знаю почему. Теперь отель - скорее помеха, потому что тут не ты устанавливаешь правила, а также тут нельзя готовить и в целом ты не чувствуешь себя как дома. Работа над проектом - все еще интересно, ты получаешь новые знания, новый опыт, учишься управлять командой, пусть и школьников, зато каких! Но теперь вставать на пары и сидеть там весь день вызывает скорее раздражение, чем положительные эмоции. Когда я был здесь в прошлые разы, у меня была привычка работать "по правилам" - днем синки, днем основное общение с командой, днем ты делаешь немалую часть работы, и такой режим - норма. Но не теперь. В последние несколько месяцев все мои созвоны были не раньше 7 вечера, и до этого часа я мог делать все, что душе угодно - главное выполняй задачи в срок. И я привык к работе в такой парадигме, из-за чего стандартная работа по правилам стала более выматывающей. Тем более в аудитории, на не самом удобном стуле (я зачастую работаю полулежа, чтобы меньше нагружать спину и шею), в аудитории, где не ты устанавливаешь правила. Может, это все из-за моей увлеченности анархизмом в последнее время? Или взыграл инфантилизм? Кто знает :D
Но это все лирика, мои личные истории. Что же я могу сказать вам, кто хочет поехать в Сириус как преподаватель либо как студент?
Сначала разберемся со студентами (и школьниками).
Вам, мои дорогие искатели знаний, я советую ехать в Сириус. Если это не приведет к вашему отчислению из вуза или типо того - езжайте. Пробуйте отобраться, отбирайтесь, и приезжайте. Это будет одним из лучших решений, которые вы можете сделать для своей карьеры, если вы не гениальный гений. Тут вы найдете все - знакомства, обстановку, нетворкинг, в некоторых случаях - крутую работу. На студенческих сменах все не так строго по правилам - посещать стоит, но можно не все пары, во время работы над проектом - тем более, если договоритесь с руководителем вашего проекта - сидите хоть на пуфиках под солнышком. Для школьников верно то же самое, но все же у вас будет много ограничений - для детей Сириус кажется самым тоталитарным лагерем, что я видел в своей жизни. Вы скорее всего будете очень довольны, но и в бочке меда должна быть ложка дегтя.
А теперь к вам, преподаватели.
Для вас у меня есть простая схема. Каждый случай индивидуален, схема - мое личное субъективное мнение.

Первый вопрос - вам нравится преподавать, руководить и много общаться, причем одновременно? Если нет, то не советую ехать - на детские смены точно (а ментором я был лишь на них, поэтому и разговор ведем только о них). Вы, конечно, круто почиллите в Сочи, хоть немалая часть сил и будет уходить на проект, но задумайтесь - какой опыт вы подарите детям? Какой пример вы им подадите? Что ж, если вы любите работать с детьми, то идем дальше.
Второй вопрос - есть ли у вас нормальная работа? Не сидеть писать ноутбучки парттайм, а прям 40 часов по контракту с созвонами. Если нет - поезжайте, это будет одна из лучших поездок за вашу жизнь, я уверен. В случае, когда работа есть, и вы не берете отпуск (а если вы не дебил как я, то вы не возьмете отпуск, так как вряд ли хотите провести его не отдыхая от тяжелых трудовых будней, а каждый день по 6+ часов взаимодействуя с детьми и выполняя свою работу в лайт-режиме), переходим к следующему вопросу.
Вы поедете один? Если формально вас даже двое, то де-факто бывают ситуации, когда основную работу над проектом выполняет кто-то один. Я очень люблю А.В.Гасникова, это буквально мой кумир, но на проектах он выполняет свою роль - консультирует и ведет лекции по методам оптимизации. Что, конечно, критически важно в его проектах, и играет одну из ключевых ролей, но основная работа ложится на плечи ассистента (в текущем случае - меня). Если вы в такой ситуации, то я не рекомендую вам ехать в Сириус. Вы потратите много нервов, проект может получиться не таким крутым, ваша работа также пострадает. В случае, если на проекте есть хотя бы два полноценных специалиста, кто может сесть вместе с ребенком и дебажить его код, параллельно организуя командную работу - добро пожаловать в образовательный центр Сириус! Вы сделаете крайне доброе дело для будущего ваших учеников, для будущего IT-отрасли и для будущего России.
Надеюсь, меня не добавят в черный список Сириуса после этого поста, и не перестанут приглашать на детские смены - просто в следующий раз я к ним лучше подготовлюсь :)
И немного о других плюсах и минусах.
+ вас кормят - еда бесплатная (для студентов - раздача в столовой университета, для преподавателей - карточка на 1000р/день для питания в столовых Сириуса), на мой взгляд - достаточно вкусная и разнообразная, хоть и столовская. Я столовые люблю, но опять же - вкусовщина
+ номер - в целом мне нравится, тут достаточно приятно, если повезет - балкон будет с видом на море
+ погода - это же Сочи :)
+ много вкусной еды вне университета, примерно по московским ценам
+ море - все любят море
+ есть мини-кофейни в университете и отеле, где можно также платить картой на питание
- интернет - какая-то беда. В отеле ловит хорошо мобильный, есть WiFi, он в целом пойдет - данные не покачаешь локально, но для серфинга вполне сойдет. В ПНиИ и корпусе Школа - просто трэш. Много разных вайфаев, мобильный интернет работает плохо, от них если идешь постоянно отключает, логинишься через номер телефона - а связь-то почти не ловит!))) Скорость низкая - и это критично при работе с данными, особенно когда кроме вашего проекта еще штук 5 должны что-то качать
- скорее всего вы будете жить вместе с кем-то. Это и минус и плюс. Возможно, для преподавателей политика меняется, и теперь они всегда живут по-одному
- готовить негде, что лично меня крайне расстроило
Всем добра и позитива, пост достаточно сумбурный, хоть я и хотел его давно написать, про опечатки пишите, дискуссия приветствуется, комментарии открыты.
Я все еще люблю Сириус, хоть в данный момент и не так сильно, как когда-то :)
Ну и можете порепостить при желании, думаю много кому будет полезно :D

С каких пор бамбл на фреше в серфе стоит 600 рублей??????????

Я не знаю, зачем вам эта информация, но параметр температуры у CLIP-vit-base-patch32 на хаггингфейсе равен 4.605. Вы спросите - зачем там температура, если она обычно при генерации?
В клипе она используется для того, чтобы растянуть множество возможных значений скалярного произведения векторов фичей текстов и изображений, потому что, как мы все очевидно знаем, скалярное произведение двух векторов единичной длины по модулю не превосходит 1, однако в таком случае максимальное значение софтмакса - 0.88, причем даже такое значение скорее недостижимо.
Знаете что самое смешное? Я подобрал это значение почти руками. В статье про Clip есть несколько вариантов обучения этого параметра, однако какой конкретно стоит в опенсорс имплементации я не нашел. Конечно, можно было бы почитать код модельки, но это для слабых. Выбор сильных - перебрать параметры модели через model.parameters(), увидеть что нулевой параметр - скаляр, и догадаться что это оно. Смешно не это - данный параметр не подошел, то есть результаты были ооочень близки, но не идеально воспроизводились, видимо дело в приколах с точностью. Значение параметра было 4.602
Для чего это мне было нужно? Я делаю классификацию видео по кадрам, данных нет, соответственно нужен zero-shot, решил взять Clip как базовое решение. Время не очень критично, но если тупо обрабатывать раз в пару кадров + батчинг, то это будет достаточно долго. Больше времени занимает обработка текста, соответственно я решил закэшировать его эмбеддинги и переиспользовать. Но для этого мне нужно их самому умножать между собой и домножать на температуру

Исследователи Model Interpretability be like

Меня позвали на организацию нейрошколы!!
Я очень рад, ибо думал что не позовут, потому что мне один раз дали задачи, там с ML, а у меня в ней чёт ничего не вышло и потом связь подпропала.

GenAI это просто развод гоев на доллары

Цензура LLM это один из важных технологических и регуляторных барьеров на человеческом пути к свободе

"Одной из главных задач нашего проекта является разработка системы антискуфинга"

Как программисту правильно входить в офис?
Лид: кем будешь?
Стажер: айтишник простой, программист
Лид: программист? татухи покажи
Стажер: татухи? да, конечно
*показывает*
Лид: человек ты я вижу не простой. Татухи сеньорские. Где били?
Стажер: в бухгалтерии!
Лид: татуировку где били?
Стажер: а... в бухгалтерии. Там остались чернила для принтера
@
Лид: ауе
Стажер: что это?
Лид: ассемблер унылая едкость
Стажер: а.. ауе!
@
Лид: есть два стула: на одном баги нефикшенные, на другом вирусы промышленные. Куда сам сядешь, а куда комп посадишь?
Стажер: сам в кофейню сяду, а комп на коленки посажу
@
Лид: пофикси баг
*ничего не происходит*
Лид: почему не фиксишь?
Стажер: я жду когда ты мне дашь дедлайн
Лид: хорошо, программист ты я вижу опытный. С тестировщиками не водись и будет тебе счастье
Стажер: да я знаю этих ребят, сам когда-то давно работал
Лид: тестировщиком?
Стажер: ну да
Ну и уволили его. А этим стажером был Стив Джобс

Кто в себе не носит хаоса, тот никогда не породит звезду

Мне за последние 36 часов написало уже 4 HR... Или 5... Почему..
А за все время в сириусе около 8..