Ща буду собесить chatGPT по Data Science.
Как видите, секцию классического ML'а она проходит успешно.
А что по программированию и SQL?
Как видите, секцию классического ML'а она проходит успешно.
А что по программированию и SQL?
🔥25😁6❤1👎1
🏆 Data Feeling | AI
Photo
Ого, да я сам бы завалил этот вопрос. А сетка еще и тесты накидала.
Если вам надо пройти лайф-кодинг, просто кидайте свои вопросы в chatGPT.
Live coding на python пройдент.
Если вам надо пройти лайф-кодинг, просто кидайте свои вопросы в chatGPT.
Live coding на python пройдент.
😁28🔥4👍2🏆2
🏆 Data Feeling | AI
Ого, да я сам бы завалил этот вопрос. А сетка еще и тесты накидала. Если вам надо пройти лайф-кодинг, просто кидайте свои вопросы в chatGPT. Live coding на python пройдент.
Засчитывать ей SQL или нет? Отвечает мгновенно.
Революция наступила.
Революция наступила.
👍19🔥4😁1
🏆 Data Feeling | AI
Устал видеть длинные "сопли" в чужих ноутбуках. Поэтому вот вам лайфхак как сделать установку либ в Jupyter Notebook'ах аккуратнее, если вы стеснялись спросить. Способ не единственный, но мне этого хватает.
Кажется, gpt решила и меня заменить.
Теперь она будет с вами лайф-хаками делиться. Ждем, когда она выиграет первую медаль на Kaggle.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍15🔥9😁1
🏆 Data Feeling | AI
Когда собесишь джуна и в конце спрашиваешь его, какими задачами он хотел бы заниматься. А он такой:
Все-таки GPT джун еще!
И денег платить не надо)
В общем, даже если вы не шарите за Data Science так же блестяще как GPT, все равно не надо говорить, что хотите работать за еду. Всегда называйте вилку.
Ту часть, где GPT задает вопросы мне и я их валю - выкладывать не стал, чтоб не ронять марку😂
На сегодня все. Успехов!
И денег платить не надо)
В общем, даже если вы не шарите за Data Science так же блестяще как GPT, все равно не надо говорить, что хотите работать за еду. Всегда называйте вилку.
Ту часть, где GPT задает вопросы мне и я их валю - выкладывать не стал, чтоб не ронять марку😂
На сегодня все. Успехов!
😁38👍12
Вы просили, я организовал.
Инсайдерский вебинар по текущей задаче на Kaggle.
Залетайте, расскажу пару идей и немного за биологию поболтаем. Подниму ваши шансы на фоне остальный.
https://us02web.zoom.us/j/84090762014?pwd=TFl5cUk4MGkzUzhmOTdZNWJJRzRoUT09
Meeting Passcode: 772480
Update:
Если этот пост наберет 50 огоньков, то я выложу запись.
Update 2:
👨🔬 Алерон Миленькин "Introduction to Kaggle competition Novozymes Enzyme Stability Prediction"
📹 Video: https://youtu.be/-rRosSQtP7Y
✔️ Abstract: https://news.1rj.ru/str/sberlogabig/206
Инсайдерский вебинар по текущей задаче на Kaggle.
Залетайте, расскажу пару идей и немного за биологию поболтаем. Подниму ваши шансы на фоне остальный.
https://us02web.zoom.us/j/84090762014?pwd=TFl5cUk4MGkzUzhmOTdZNWJJRzRoUT09
Meeting Passcode: 772480
Update:
Если этот пост наберет 50 огоньков, то я выложу запись.
Update 2:
👨🔬 Алерон Миленькин "Introduction to Kaggle competition Novozymes Enzyme Stability Prediction"
📹 Video: https://youtu.be/-rRosSQtP7Y
✔️ Abstract: https://news.1rj.ru/str/sberlogabig/206
🔥98👍4❤3👎2😁2
🏆 Data Feeling | AI
Вы просили, я организовал. Инсайдерский вебинар по текущей задаче на Kaggle. Залетайте, расскажу пару идей и немного за биологию поболтаем. Подниму ваши шансы на фоне остальный. https://us02web.zoom.us/j/84090762014?pwd=TFl5cUk4MGkzUzhmOTdZNWJJRzRoUT09…
А вот вам на сладкое.
Дошли руки дописать статью про решение с American Express. Как и обещал. Делюсь.
Дошли руки дописать статью про решение с American Express. Как и обещал. Делюсь.
Хабр
Мое первое серебро на Kaggle или как стабилизировать ML модель и подпрыгнуть на 700 мест вверх
Привет, чемпион! Летом прошел очередной чемпионат на Kaggle - " American Express - Default Prediction ", где требовалось предсказывать - выйдет ли пользователь в дефолт или нет. Табличное соревнование...
👍26🔥13👎2
🏆 Data Feeling | AI
А вот вам на сладкое. Дошли руки дописать статью про решение с American Express. Как и обещал. Делюсь.
This media is not supported in your browser
VIEW IN TELEGRAM
👎11😁4🔥2
Кого только не встретишь в Таиланде?!
🏄♀️ С аппетитом посерфили с Женей и кайфово поболтали за мир DS/ML с высоты тим-лида.
☝️ Кстати, Женя матерый competitive data scientist. Заметил его когда-то в топе соревнований на Boosters. (Хотя на Kaggle его так и не уговорил) А еще у Жени есть классный канал, где он делится опытом решаемых задач в Альфе с помощью ML’я.
Канал прикольный, но не помню ссылку. Подскажите?
🎙Если в Бангкоке встретимся на новый год, то запишем подкаст. 🎥📝
#физтехи_повсюду
🏄♀️ С аппетитом посерфили с Женей и кайфово поболтали за мир DS/ML с высоты тим-лида.
Канал прикольный, но не помню ссылку. Подскажите?
🎙Если в Бангкоке встретимся на новый год, то запишем подкаст. 🎥📝
#физтехи_повсюду
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥32👍12🎉4👎1
Раздаю свои долги перед наступающим годом.
📢 Разбор kaggle-соревнования "American Express" в гостях у MISIS AI Lab
Вместе с ребятами из MISIS AI Lab, у которых сейчас идет открытый курс по ML, решили провести онлайн разбор решения kaggle-задачи на предсказанию дефолтов по кредиту, о чем кстати недавно выходила статья на хабре
Поговорим о том, какие методы и техники обычно хороши при решении, казалось бы, обычных табличных соревнований. Обсудим методы стабилизации ML моделей. Возможно разберем что-то из текущих соревнований на Kaggle.
Так же разберемся, что за опенсорс курсы делают эти ребята из МИСИС.
Сегодня, 12 декабря, в 18:00 встречаемся на занятии. Подключение к лекции по ссылке → link
Вместе с ребятами из MISIS AI Lab, у которых сейчас идет открытый курс по ML, решили провести онлайн разбор решения kaggle-задачи на предсказанию дефолтов по кредиту, о чем кстати недавно выходила статья на хабре
Поговорим о том, какие методы и техники обычно хороши при решении, казалось бы, обычных табличных соревнований. Обсудим методы стабилизации ML моделей. Возможно разберем что-то из текущих соревнований на Kaggle.
Так же разберемся, что за опенсорс курсы делают эти ребята из МИСИС.
Сегодня, 12 декабря, в 18:00 встречаемся на занятии. Подключение к лекции по ссылке → link
Please open Telegram to view this post
VIEW IN TELEGRAM
👍24🔥9👎5
🏆 Data Feeling | AI
👨🏻🌾Как помните, 40 марафонцев фармят сейчас текущую сореву на Kaggle. Финиш уже завтра. 🌊Все было гладко пока масло в огонь не подлили публичные решения, одно из которых занимает сейчас топ-5 на лидерборде. Это какие-то лютые блендинги из решений, опубликованных…
This media is not supported in your browser
VIEW IN TELEGRAM
Придумал очень простую интуитивную аналогию, чтоб объяснить почему смешивание (блендинг) моделей работает.
Есть у вас две модели. Пусть это не модели, а две аудитории двух блогеров. Решено сделать блендинг (кросс-постинг), чтоб максимально увеличить суммарную аудиторию (точность).
😵💫 Если это две полностью совпадающие аудитории (одни и те же люди), то от такой взаимной рекламы у вас не будет прироста ни в одном канале. В этом вообще нет смысла.
🤔 А вот если аудитории вообще никак не пересекаются (диверсифицированные модели), но тематики схожие, то при смешивании, вероятность, что уникальные люди из одного канала перейдут в другой будет сильно выше.
🍽 При смешивании ответов нескольких моделей механика полностью аналогична. Это и снижении одновременной ошибки объясняет и баес от допущений каждой из моделей и так далее.
🎓 Это я недавно так объяснял, в чем понт смешивать модели и какие модели вообще полезно смешивать. Быстро дошло.
Есть у вас две модели. Пусть это не модели, а две аудитории двух блогеров. Решено сделать блендинг (кросс-постинг), чтоб максимально увеличить суммарную аудиторию (точность).
🎓 Это я недавно так объяснял, в чем понт смешивать модели и какие модели вообще полезно смешивать. Быстро дошло.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍29👎15❤4🔥4
Решил, что весь год усердно трудился и в качестве подарка накуплю себе разных тренингов и мини-курсов на 100к.
Технические навыки подразгоню, англ подкачаю и без физ нагрузки не останусь. Коучей и психологов всяких не хочу, хочу больше во что-нибудь прикладное. Аля «Интенсив по ML System Design» или «Недельное нон-стоп аудирование на английском». Что-то похожее у меня уже было в этом году по MLOps. А еще я успел пройти курс по «Съемке с коптера»
🎅🎄В общем, надо уметь себя порадовать хотя бы на НГ. Поэтому пишу это сюда, чтоб точно не смог потом отмазаться перед самим собой, да и с вами поделиться потом полным чеклистом ништяков.
И вообще, скоро буду подводить итоги года. Сейчас все силы бросил на борьбу за золото на Kaggle. Ензимы оказались невероятно интересными. Это тянет на несколько сочных статей на Хабре. Осталось только подняться еще ~40 мест 😅
Ждите вестей и напишите в комменты, что вы себе подарили? Хочу варианты поизучать
Технические навыки подразгоню, англ подкачаю и без физ нагрузки не останусь. Коучей и психологов всяких не хочу, хочу больше во что-нибудь прикладное. Аля «Интенсив по ML System Design» или «Недельное нон-стоп аудирование на английском». Что-то похожее у меня уже было в этом году по MLOps. А еще я успел пройти курс по «Съемке с коптера»
🎅🎄В общем, надо уметь себя порадовать хотя бы на НГ. Поэтому пишу это сюда, чтоб точно не смог потом отмазаться перед самим собой, да и с вами поделиться потом полным чеклистом ништяков.
И вообще, скоро буду подводить итоги года. Сейчас все силы бросил на борьбу за золото на Kaggle. Ензимы оказались невероятно интересными. Это тянет на несколько сочных статей на Хабре. Осталось только подняться еще ~40 мест 😅
Ждите вестей и напишите в комменты, что вы себе подарили? Хочу варианты поизучать
👍57🔥11
Встретился сегодня с земляком из Сочи. Тот сказал интересную фразу: "Я твой канал почитал, на ютубе тебя послушал. Вообще ни слова не понял, но понял, что ты чем-то из IT сферы занимаешься"
Не знаю почему, но мне было очень смешно. А еще приятно, что Вы меня все понимаете) Хотя бы иногда!
Ладно родители крестились, когда мои рабочие разговоры слышали, но от ровесников из digital мира все равно похожее забавляет. Живете в разных мирах и разных информационных пузырях.
Кстати, с людьми не из IT, как правилоя не разговариваю, ибо зачем при разговоре я не использую терминологию совсем. Четко слежу за тем, чтоб собеседнику было легко меня понимать. Душнил в мире и без того хватает, таких, кто не может от профессиональных деформаций оправиться, когда в мир "обычных смертных" спускается.
Не знаю почему, но мне было очень смешно. А еще приятно, что Вы меня все понимаете) Хотя бы иногда!
Ладно родители крестились, когда мои рабочие разговоры слышали, но от ровесников из digital мира все равно похожее забавляет. Живете в разных мирах и разных информационных пузырях.
Кстати, с людьми не из IT, как правило
👍54🔥14👎5😁3❤2
Меня периодически спрашивают, а что нужно, чтоб выигрывать на Kaggle и прочих DS чемпионатах?!
🎰 Вопрос не однозначный, но вот недавно увидел критерии молодых ребят, чтоб попасть к ним в команду по фармингу Kaggle и тп.
👨🔧 Проверьте себя. Интересный чек-лит.
На пункте про "медвежонка" прям орнул. Не хватает еще фрикаделек на Lingualeo 1k+
🎰 Вопрос не однозначный, но вот недавно увидел критерии молодых ребят, чтоб попасть к ним в команду по фармингу Kaggle и тп.
👨🔧 Проверьте себя. Интересный чек-лит.
На пункте про "медвежонка" прям орнул. Не хватает еще фрикаделек на Lingualeo 1k+
😁63🔥28👍5👎2🤔1
Уперлись с командой в очень необычный кейс ...
Вот у нас есть три предобученные модели, на тесте эти модели дают метрику 0.90, 0.80 и 0.70. (чем больше, тем лучше)
Мы решили построить и отвалидировать ансамбль из трех моделей на трейне. Подали прогнозы моделей как фичи + дополнительные фичи в бустинг. Как итог, бустинг отранжировал выходы моделей по важности абсолютно противоположно тесту. Более того, на тесте ансамбль дал значение метрики r ~ 0.75😳 Хотя если тупо усреднить с весами, дает >0.9
Вот думаем, что делать) Как смешивать? Как выбить мета моделью больше 0.9? Метрика на тесте - корреляция Спирмена.
Из идей, навесить на фичи веса, чтоб бустинг через "не хочу" ранжировал фичи в соответствии с информацией с теста.
#Kaggle
Вот у нас есть три предобученные модели, на тесте эти модели дают метрику 0.90, 0.80 и 0.70. (чем больше, тем лучше)
Мы решили построить и отвалидировать ансамбль из трех моделей на трейне. Подали прогнозы моделей как фичи + дополнительные фичи в бустинг. Как итог, бустинг отранжировал выходы моделей по важности абсолютно противоположно тесту. Более того, на тесте ансамбль дал значение метрики r ~ 0.75
Вот думаем, что делать) Как смешивать? Как выбить мета моделью больше 0.9? Метрика на тесте - корреляция Спирмена.
Из идей, навесить на фичи веса, чтоб бустинг через "не хочу" ранжировал фичи в соответствии с информацией с теста.
#Kaggle
Please open Telegram to view this post
VIEW IN TELEGRAM
👍7🏆5
👆В целом, это верный путь почти в любой сфере. Если сильно надо - бьешь в одну точку, пока не треснет.
😳 Кстати, спасибо за ваши ответы вчера. Мы все внимательно прочитали и нашли пару идей для себя. Мне понравились варианты с Adversarial Validation и со смешиванием моделей заранее в единую фичу с весами пропорционально известной точности (корреляции) на тесте. Последнее, кажется, может докинуть. Надеюсь, вам тоже было полезно подумать над кейсом.
💪 Аудитория у меня, конечно, заряженная
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥38
А пока на борде идет неразбериха, мы продолжаем с тиммейтами валидировать модели в текущем чемпионате. Радует, что локальная валидация коррелирует с бордом.
✅ Еще один, но уже нормальный трюк, который внезапно помог - это учить ансамбль моделей на тех данных, на которых базовые модели имеют такую же точность как и на тесте. То есть выбираете «легкие» для модели объекты. Это аля такой мета-лернинг.
#kaggle
#Novozymes
Please open Telegram to view this post
VIEW IN TELEGRAM
👍16😁5🔥4