#competitions : MadCars / MailRu Mini AI Cup #3
Бой автомобилей в замкнутом пространстве, вдохновленный игрой Drive AHEAD.
Необходимо реализовать/обучить алгоритм управления автомобилем с целью выведения из строя автомобиля соперника.
Реализация применяется на большинстве популярных языков (даже php есть 👻).
Взаимодействие осуществляется через систему ввода-вывода: на вход поступают данные окружающего мира, на выходе ожидаются ваши действия.

Дедлайны:
по 06/09 - бета-тест (возможность проникнуться механикой, сделать первые решения)
по 20/09 - рейтинговые игры
24/09 — финал между топовыми игроками
Призы: 1st - MacBook Air, 2-3 - Apple iPad, 4-6 - Samsung Gear S3 (или их ценовой эквивалент)
Финалисты конкурса получат фирменные футболки чемпионата, а TOP-10 участников скидку на 250 рублей на 20 поездок в сервисе такси Ситимобиль (в течение месяца)
Страница конкурса: http://xxtt.ru/9975

#python #tips : Распараллеливание и progress bar
Как контролировать многопоточное применение функции к массиву данных?
- С появлением tqdm стало проще контролировать процесс прохода по циклу (про tqdm: http://xxtt.ru/60c8)
- Также мало для кого секрет, что функции map проста для распараллеливания с помощью встроенной библиотеки multiprocessing (хорошая статья про это: http://xxtt.ru/c6c6)
Но что, если вы хотите следить за процессом распараллеленного выполнения с помощью multiprocessing?
Есть решение! Вот пример:

from multiprocessing import Pool
from tqdm import tqdm_notebook

def pow_2(n):
    import time
    sq_n = n ** 2
    time.sleep(0.1) # slow function 🙂
    return (n, sq_n)

def imap_unordered_bar(func, args, n_jobs):
    p = Pool(n_jobs)
    res_list = [x for x in tqdm_notebook(
        p.imap_unordered(func, args),
        total=len(args)
    )]
    p.close()
    p.join()
    return res_list

result = imap_unordered_bar(pow_2, range(100), n_jobs=10)

где args - массив данных к которому вы хотите параллельно применить функцию func
❗️`imap_unordered` возвращает результаты не обязательно в порядке входных данных. Потому, если вам важно понимать, результатом каких входных значений является выходное значение, возвращайте идентификатор, по которому восстановите к чему относился результат.
Код примера на github: http://xxtt.ru/6b4d

Пример синхронного применения функции и распараллеливание этой же функции
t.me/powerofdata/32

#python #tips #libs : tqdm в телефоне
tqdm - сделала жизнь проще. Но как следить за долгим процессом итерации? Да так, чтобы можно было оторваться от компьютера, поиграть с детьми, провести время с женой, но при этом держать руку на пульсе.
Есть hyperdash, но придется ставить приложение и огромную либу, при этом будут сыпаться логи, а мы то хотим ProgressBar.
А что, если tqdm можно засунуть в telegram?
Да так, что в один чат будут приходить ProgressBar с разных скриптов или даже серверов.
Достаточно установить легковесную либу. Как это сделать и как ее использовать, смотрите в репозитории http://xxtt.ru/5098

#education #courses : Неделю назад Университета Карнеги - Меллона начал новую сессию курса по Deep Learning.
С программой и описанием курса можно познакомиться тут: http://deeplearning.cs.cmu.edu (курс на английском).
К сожалению, в отрытом доступе будут появляться только лекции и слайды.

Я связался с профессором курса и спросил о возможности присоединиться к тестам и домашним работам на Kaggle. Профессор отозвался на просьбу и на текущий момент готов предоставить доступы к учебным материалам. От нас требуется набрать учебную группу, так что если вы хотите пройти курс - заполните, пожалуйста, форму ниже.

Тем не менее, действовать надо быстро, потому что мы пойдем синхронно с текущим запуском курса, а на данный момент прошло уже 3 лекции.

Так же мы хотим создать свою площадку для обсуждения и взаимопомощи на курсе (piazza/slack/telegram).
Все успешно завершившие (над метрикой успешности еще работаем) курс получат электронные сертификаты от ODS.

Ну и как вы понимаете: все бесплатно, держится на полном энтузиазме и требовать чего-то от сообщества вы не можете 🙂

Форма: http://xxtt.ru/fa9d

В эту субботу (10.11) в Москве пройдет одно из крупнейших Data Science событий осени - Sberbank Data Science Day. 5 потоков, 20 секций, >50 спикеров.
Секции: AutoML, CV, NLP, DS/AI в ритейле, DS/AI в промышленности, DS/AI в телекоме и медиа, DS/AI в банковской и финансовой сфере, DS/AI в медицине и биоинформатике и другие.
Все действие развернется в Киноцентре "Октябрь" (Новый Арбат)
В этот день так же разберутся решения победителей двух соревнований: AutoML (написание мета-алгоритма, решающую любую ML задачу), КлассикAI (алгоритм по написанию стихов)
Регистрация обязательна. Основные места закончились, но если вы не успели зарегистрироваться, то по промокоду AutoML регистрируйтесь как Участник соревнования.

Подробнее про событие: http://xxtt.ru/0eca
Ссылка на регистрацию: http://xxtt.ru/d13e

Очень рекомендую!
Увидимся 😉

#events : Тренировка по машинному обучению 24 ноября
В эту субботу (24 ноября, 12:00) пройдет очередная тренировка по машинному обучению.
Место: Яндекс, зал Мулен Руж
Сбор в 11:30, начало в 12:00
Программа:
- Антон Кленицкий — Построение системы автоматического машинного обучения (SDSJ AutoML 2018)
- Павел Остяков — Классификация изображений с применением на новый географический регион (Kaggle Inclusive Images Challenge)
- Константин Гаврильчик, Евгений Кононенко — Детектирование кораблей на спутниковых снимках (Kaggle Airbus Ship Detection Challenge)
Регистрация обязательна: http://xxtt.ru/5134

#events : Data Ёлки в Санкт-Петербурге и Москве
Когда: 15 декабря в 15:00 в Санкт-Петербурге
и 22 декабря в 12:00 в Москве
Место: в Санкт-Петербурге (Wargaming, пл. Карла Фаберже, 8)
и в Москве (Mail.Ru, Ленинградский пр-т, д. 39, стр.7)

Data Ёлка - ежегодное мероприятие, которое в этом году, помимо Москвы, пройдет и в Санкт-Петербурге.
Но если в Санкт-Петербурге формат будет походить на митап, то в Москве Вас ожидает data-трэш (с интересными обзорами и впечатлениями от конференции NIPS)
Программа мероприятий доступна по ссылкам:
Санкт-Петербург: http://xxtt.ru/080e
Москва: http://xxtt.ru/f766
Поторопитесь, число мест ограничено.
И с Наступающим! ;)

#events : CCCV18 Четвертый рождественский коллоквиум по компьютерному зрению от Skoltech
Когда: 26 (среда) декабря 2018, 15:30 - 19:00
Место: Samsung AI Center, Москва, Лесная 5
Язык докладов - английский.

На коллоквиуме исследователи из России и зарубежья представят свои работы, связанные с компьютерным зрением:
(15:30 — 16:00) Alexander Vakhitov (Samsung AI Center and Skoltech, Moscow), “Improving Robustness and Accuracy of Point+Line Visual SLAM”
(16:00 — 16:30) Eldar Insafutdinov (Max Planck Institute for Informatics, Saarbruecken), “Unsupervised Learning of 3D Object Shape and Camera Pose”
(16:30 — 17:00) Natalia Neverova (Facebook AI Research, Paris), “DensePose++”
(17:30 — 18:00) Yaroslav Ganin (DeepMind, London), “Synthesizing Programs for Images using Reinforced Adversarial Learning”
(18:00 — 19:00) Alexey Dosovitskiy (Intel Labs, Munich), “Learning to drive, fly, and walk”
Ссылка на страницу мероприятия: http://xxtt.ru/cccv18

☝️🎄Регистрация на CCCV18 возобновилась, а в программе появился 6-ой доклад: 19:00 — 19:30 Sergey Tulyakov (Snap Inc, California), “Learning representations for video generation, prediction and retargeting”

#education #courses : Начался весенний запуск курса по Deep Learning от Университета Карнеги - Меллона
Мы решили организовать группу людей, которые хотят самостоятельно проходить этот курс параллельно.
В открытом доступе выходят только видеолекции, но нам удалось связаться с профессором и он пообещал дать доступы к тестам, коду и конкурсам на Kaggle In-Class. Мы уже подняли всю необходимую инфраструктуру и набираем народ в ожидании первых лабораторных от профессора.
Это вторая попытка, первая (полгода назад) не увенчалась успехом. Но профессор уверил, что у нас все получится.
Регистрация на курс происходит по адресу https://dlcourse.ru (бесплатно и без смс 🙂 )
Регистрация обязательна - вскоре зарегистрированным откроются:
1) видео; 2) тесты; 3) задание на написание кода; 4) конкурсы Kaggle In-Class; 5) платформа для коммуникации, вопросов и взаимовыручки
У регистрации нет дедлайна, присоединиться можно когда угодно, но дедлайн будет у тестов и домашних работ.
После регистрации вы также получите доступ к чату, где будут появляться все анонсы.
Язык лекций: английский, язык чата: русский и английский.

#events : Яндекс изнутри: рекомендательные системы Музыки и Дзена
Когда: 16 (суббота) февраля 2018, 12:00 - 18:00 (сбор гостей с 11:30)
Место: Яндекс, ул. Льва Толстого, д.16, зал Экстрополис
Язык докладов - русский.

Митап от сотрудников Яндекса, посвященный рекомендательным системам Яндекс.Музыки и Яндекс.Дзена.
Также в рамках митапа пройдет воркшоп.

(12:20 - 12:50) Даниил Бурлаков "Как рекомендовать музыку, которую почти никто не слушал"
(12:50 - 13:20) Антон Фролов "Дзен — рекомендательная система с несколькими игроками"
(13:40 - 14:10) Дмитрий Ушанов "Устройство рекомендательной системы сервиса Яндекс.Дзен"
(14:10 - 14:40) Евгений Крофто "Секретный доклад"

А в 15:00 начнется воркшоп по рекомендательным системам для музыки и текстов.
Воркшоп проведут Даниил Бурлаков (руководитель группы рекомендательных продуктов Медиасервисов Яндекса) и Евгений Соколов (руководитель группы качества рекомендаций и анализа контента Яндекс.Дзена, заместитель руководителя ФКН НИУ ВШЭ)
Но обратите внимание, что при регистрации необходимо отметить "Я хочу принять участие в воркшопе" и пройти небольшой тест.

Обязательна регистрация, число мест ограничено, поэтому поторопитесь: http://xxtt.ru/4c1f

#events : Data&Science: цифровые методы в гуманитарных науках
Когда: 2 (суббота) марта 2019, 12:00 - 16:00 (сбор гостей с 11:00)
Место: Яндекс, ул. Льва Толстого, д.16, залы Экстрополис и Мулен Руж
Язык докладов - русский и английский
По мере оцифровки культурного наследия человечества цифровые методы приносят всё большую пользу историкам, литературоведам, социологам. Например:
- Как проанализировали тысячи стенограмм первого французского парламента и что получили.
- Как компьютер помогает читать китайские стихи и хороши ли его собственные.
- Как на данных Твиттера проводят глобальные исследования здоровья, а на данных мобильных операторов — исследования бедности.

В этот раз собрана большая программа про цифровые методы в гуманитарных науках – истории, литературоведении, культурологии, социологии:
- Даниил Скоринкин "Цифровые методы в гуманитарных науках"
- Frank Fischer "Digital Humanities Between Research and Infrastructure"
- Динара Гагарина "Истории о Data Science в истории"
- Лев Манович "Наука о данных в анализе современной культуры"
- Даниил Александров "Data Science в социальных науках"
- Борис Орехов "Чем может и чем не может наука о данных помочь науке о литературе"
- Илья Гусев "Как научить нейросеть генерировать стихи"
- Мариана Зорькина "Компьютеры читают: как статистика и нейросети помогают лучше понять поэзию средневекового Китая"

Это последняя встреча в формате Data&Science в Яндексе. Все хорошее когда нибудь заканчивается 😔
Обязательна регистрация: http://xxtt.ru/ad96

#competitions : Rekko Challenge 2019
#реклама : появление данного поста проспонсировано

Соревнование по машинному обучению от онлайн-кинотеатра Okko. В рамках соревнования необходимо построить рекомендательную систему для предсказания контента, который потребит пользователь.

Элементов контента (фильмы и серии сериалов): 10.200
Число пользователей, для которых нужно сделать предсказания: 50.000
Всего пользователей: ~ 500.000
Сумарный размер данных: ~430MB
Для каждого пользователя предсказать 20 элементов контента, которые он потребит за тестовые 60 дней.
Дедлайн: 18/04/2019 (почти 2 месяца)
Призовой фонд: 600.000 руб (1st - 300.000 руб, 2nd - 200.000 руб, 3rd - 100.000 руб)

Большинство данных анонимизированы (даже время потребления контента выражено в абстрактных единицах), но использование внешних данных организаторами не запрещено, что делает из задачи дополнительный квест =)
Ссылка на соревнование http://xxtt.ru/a846
Ссылка на чат обсуждения в телеграмме: http://xxtt.ru/586a

#events : Yandex.Taxi Data Driven: Митап аналитиков в Яндекс.Такси
Когда: 23 (суббота) марта 2019, 11:00 - 17:00
Место: Яндекс, ул. Льва Толстого, д.16
Язык докладов - русский

Пройдет очередная встреча аналитиков Data Driven в Яндексе.
Встреча будет состоять из двух блоков: блок докладов и блок кейсов.
Блок докладов:
- "Как доставлять больше заказов меньшими силами"
Владислав Лукьянов, аналитик Яндекс.Еды
- "Как продать больше билетов, чем мест в самолёте"
Глеб Сологуб, директор по аналитике Skyeng
- "Рекомендации удобных точек посадки в Яндекс.Такси"
Сергей Тильга, разработчик ML Яндекс.Такси
Блок кейсов пройдет в формате брейншторма, где слушателям, поделившись на группы, предстоит решать реальные рабочие аналитические задачи вместе с сотрудниками Яндекс.Такси.

Регистрация открыта до 13 марта, но количество мест ограничено (150 мест).
Так как желающих обычно в 6-10 раз больше, в форме регистрации организаторы просят решить пару аналитических задачек, чтобы на мероприятии были только те, кому не будет сложно или скучно.
Страница мероприятия: http://xxtt.ru/3183
Обязательна регистрация: http://xxtt.ru/86ea

#education #school : Начался набор в международную летнюю школу по машинному обучению: “Machine Learning Summer School” (MLSS)
В этот раз школа пройдет в Москве на территории Skoltech (Сколково)
Даты летней школы: 26 (понедельник) августа 2019 - 6 (пятница) сентября 2019
Подачи заявок: до 6 (понедельник) мая 2019
Место: Skoltech, Сколково, Москва
Язык обучения - английский

Основная аудитория: аспиранты. но рассматривают как мастеров так и окончивших образование
Сборы: 400/550/1000 евро для студентов/постдоков и преподавателей/остальных (в том числе работающих в индустрии)
Возможны спонсорское стипендиальное покрытие (полное или частичное (25%))
Организаторы: Фернандо Перес Круз, Евгений Бурнаев, Родриго Ривера Кастро

Предварительные темы:
Kernels - Arthur Gretton
Fairness & Interpretability - Isabel Valera
Causality - Joris Mooij
3D Deep Learning - Justin Solomon
Optimal Transport - Marco Cuturi
To be confirmed - Mark Girolami
Graph Neural Networks - Michael Bronstein
ML for Magnetic Resonance Imaging - Michel Besserve
Online Learning - Nicolò Cesa-Bianchi
Reinforcement Learning - Shimon Whiteson
Topological Data Analysis - Ulrich Bauer
Bayesian Deep Learning - Yarin Gal

Сайт школы: http://xxtt.ru/mlss2019