Как data science помогает угадывать цены на рынке
Считается, что практически все технологические инновации в области инвестиций появляются именно в хедж-фондах.
Будущее хедж-фондов зависит от data science и искусственного интеллекта, но без человека все равно не обойтись, уверен аналитик банка MUFG в Лондоне и выпускник «Школы анализа данных» «Яндекса» Артур Мешковский.
Читать...
Считается, что практически все технологические инновации в области инвестиций появляются именно в хедж-фондах.
Будущее хедж-фондов зависит от data science и искусственного интеллекта, но без человека все равно не обойтись, уверен аналитик банка MUFG в Лондоне и выпускник «Школы анализа данных» «Яндекса» Артур Мешковский.
Читать...
Интересные проекты искусственного интеллекта
Искусственный интеллект используют для создания интересных проектов, развлекаясь с которыми можно пропасть на долгое время.
Например, вы можете играть с ИИ в ассоциации или же рассматривать изображения котов, созданные нейронной сетью. Или же, если вы любите рисовать, но не умеете, то к вашим услугам сервис AutoDraw, где любые ваши каракули Искусственный интеллект превратит в более-менее ровную и приятную картинку.
Читать...
Искусственный интеллект используют для создания интересных проектов, развлекаясь с которыми можно пропасть на долгое время.
Например, вы можете играть с ИИ в ассоциации или же рассматривать изображения котов, созданные нейронной сетью. Или же, если вы любите рисовать, но не умеете, то к вашим услугам сервис AutoDraw, где любые ваши каракули Искусственный интеллект превратит в более-менее ровную и приятную картинку.
Читать...
Вакансия Архитектора по ML-платформе в МегаФон
Мы ищем архитектора в команду BigData, который будет разрабатывать архитектуру одной из крупнейших в России ML-платформ. Готовы рассмотреть продвинутого Data-инженера, который хочет двигаться дальше.
Нам важно:
экспертные знания Hadoop, Spark, системное мышление, четкое понимание процесса разработки.
Подробнее о вакансии
Мы ищем архитектора в команду BigData, который будет разрабатывать архитектуру одной из крупнейших в России ML-платформ. Готовы рассмотреть продвинутого Data-инженера, который хочет двигаться дальше.
Нам важно:
экспертные знания Hadoop, Spark, системное мышление, четкое понимание процесса разработки.
Подробнее о вакансии
Вы уверенны в безопасности своих данных?
Solar JSOC заявили о беспрецедентных по масштабу кибератаках за последние недели. Многие владельцы бизнеса также объявили о краже данных. Юристам компаний придется столкнуться с рисками, вызванными кибератаками. Но многие ли из них знают и умеют работать с данными? На фоне последних событий остро встает вопрос о должном уровне защиты данных, и о юристах, работающих с ними.
На курсе Moscow Digital School «Юрист по работе с данными» вы узнаете, как правильно и эффективно осуществлять юридическую защиту данных. Рассмотрите нормативные требования и правоприменительную практику в области сбора, хранения и обработки всех видов данных (персональные данные, Big Data, IоT, ноу-хау, коммерческая тайна и др.). Узнаете, как безопасно продавать и покупать, а также зарабатывать на их использовании.
Старт обучения: 24 марта 2022.
Скидка на обучение 10% по промокоду: DATASCIENCE. Акция действует 3 дня.
Solar JSOC заявили о беспрецедентных по масштабу кибератаках за последние недели. Многие владельцы бизнеса также объявили о краже данных. Юристам компаний придется столкнуться с рисками, вызванными кибератаками. Но многие ли из них знают и умеют работать с данными? На фоне последних событий остро встает вопрос о должном уровне защиты данных, и о юристах, работающих с ними.
На курсе Moscow Digital School «Юрист по работе с данными» вы узнаете, как правильно и эффективно осуществлять юридическую защиту данных. Рассмотрите нормативные требования и правоприменительную практику в области сбора, хранения и обработки всех видов данных (персональные данные, Big Data, IоT, ноу-хау, коммерческая тайна и др.). Узнаете, как безопасно продавать и покупать, а также зарабатывать на их использовании.
Старт обучения: 24 марта 2022.
Скидка на обучение 10% по промокоду: DATASCIENCE. Акция действует 3 дня.
Корпоративный мессенджер Slack стер рабочие пространства российских компаний. Кризис облачных решений и что делать бизнесу?
В субботу 12 марта Slack удалил проекты и рабочие пространства некоторых компаний из России. Пострадали в том числе и разработчики Сбера. Никаких предупреждений и возможности сделать резервную копию данных не было: пользователи узнали о произошедшем, зайдя в приложение и не обнаружив своих переписок. Инцидент вызвал шок и шквал негатива, а также окончательно подорвал доверие к облачным решениям для корпоративных коммуникаций. Самый актуальный на сегодня вопрос - что делать всем тем, кто использует зарубежные облачные решения или задумывается об этом?
Инцидент окончательно дал понять, что в сложившейся ситуации SaaS решения – не вариант. Информация, которая хранится и обрабатывается за пределами ИТ-инфраструктуры компании, принадлежит вам только формально: в любой момент в доступе к вашим данным могут отказать или вообще их уничтожить. Единственно безопасным и надежным на сегодня решением для бизнеса являются корпоративные мессенджеры российских разработчиков, которые (это важно!) размещаются на собственном сервере заказчика. Мессенджер eXpress, который до недавнего времени был в арсенале только крупных отечественных корпораций, готов предоставить всему российскому бизнесу стабильный и защищенный инструмент коммуникации.
https://clck.ru/dxixN
В субботу 12 марта Slack удалил проекты и рабочие пространства некоторых компаний из России. Пострадали в том числе и разработчики Сбера. Никаких предупреждений и возможности сделать резервную копию данных не было: пользователи узнали о произошедшем, зайдя в приложение и не обнаружив своих переписок. Инцидент вызвал шок и шквал негатива, а также окончательно подорвал доверие к облачным решениям для корпоративных коммуникаций. Самый актуальный на сегодня вопрос - что делать всем тем, кто использует зарубежные облачные решения или задумывается об этом?
Инцидент окончательно дал понять, что в сложившейся ситуации SaaS решения – не вариант. Информация, которая хранится и обрабатывается за пределами ИТ-инфраструктуры компании, принадлежит вам только формально: в любой момент в доступе к вашим данным могут отказать или вообще их уничтожить. Единственно безопасным и надежным на сегодня решением для бизнеса являются корпоративные мессенджеры российских разработчиков, которые (это важно!) размещаются на собственном сервере заказчика. Мессенджер eXpress, который до недавнего времени был в арсенале только крупных отечественных корпораций, готов предоставить всему российскому бизнесу стабильный и защищенный инструмент коммуникации.
https://clck.ru/dxixN
express.ms
eXpress: Платформа корпоративных коммуникаций
Корпоративный мессенджер, видеоконференции, Smart Apps. Все инструменты для общения и работы в одном приложении. Безопасность класса Enterprise, Сертификат ФСТЭК
На курсе «Инженер данных» мы учим проектировать хранилища и пайплайны данных, а ещё — помогаем сменить профессию.
→ Приходите учиться, если вы хотите развить свои компетенции или перейти на должность Data Engineer. Курс подойдет разработчикам, аналитикам и специалистам по Data Science, начинающим инженерам данных.
Выпускники смогут работать с полным циклом данных и использовать нужные инструменты, создавая пайплайны.
В Практикуме мы обучаем в уникальной образовательной среде, которая объединяет технологии и людей. Вот, что будет на учёбе:
⬛️Теория в интерактивном тренажёре, который доступен 24/7.
⬛️Упражнения на написание кода с быстрой обратной связью.
⬛️ Обучение на реальных рабочих задачах из исследования JMF и на командных проектах.
⬛️ Код-ревью и персональные советы от действующих инженеров данных.
⬛️ Чат с преподавателями в слаке, где можно задать вопрос по сложной теме.
⬛️ Вебинары и продакшн-опыт от экспертов в инженерии данных.
⬛️ Кураторы, команда поддержки и дедлайны, которые не дадут прокрастинировать.
Мы помогаем выпускникам сменить работу, если они этого хотят. 71,1% наших выпускников начинают карьеру в новой сфере.
После курса в вашем арсенале будут: резюме, сопроводительное письмо, портфолио, пробное интервью, практика по нетворкингу с работодателями.
→ Старт потока — 21 марта. Учёба длится шесть с половиной месяцев.
→ Спроектируйте свой первый процесс обработки данных с помощью Python — это бесплатно.
→ Приходите учиться, если вы хотите развить свои компетенции или перейти на должность Data Engineer. Курс подойдет разработчикам, аналитикам и специалистам по Data Science, начинающим инженерам данных.
Выпускники смогут работать с полным циклом данных и использовать нужные инструменты, создавая пайплайны.
В Практикуме мы обучаем в уникальной образовательной среде, которая объединяет технологии и людей. Вот, что будет на учёбе:
⬛️Теория в интерактивном тренажёре, который доступен 24/7.
⬛️Упражнения на написание кода с быстрой обратной связью.
⬛️ Обучение на реальных рабочих задачах из исследования JMF и на командных проектах.
⬛️ Код-ревью и персональные советы от действующих инженеров данных.
⬛️ Чат с преподавателями в слаке, где можно задать вопрос по сложной теме.
⬛️ Вебинары и продакшн-опыт от экспертов в инженерии данных.
⬛️ Кураторы, команда поддержки и дедлайны, которые не дадут прокрастинировать.
Мы помогаем выпускникам сменить работу, если они этого хотят. 71,1% наших выпускников начинают карьеру в новой сфере.
После курса в вашем арсенале будут: резюме, сопроводительное письмо, портфолио, пробное интервью, практика по нетворкингу с работодателями.
→ Старт потока — 21 марта. Учёба длится шесть с половиной месяцев.
→ Спроектируйте свой первый процесс обработки данных с помощью Python — это бесплатно.
Что в глубинах Data Lake?
На Хабр вышел отличный текст от технического руководителя Core Data Lake центра Big Data МТС о том, какие слои находятся внутри Data Lake, как построить архитектуру базы данных и чем распределенный Data Mesh-подход отличается от монолитного хранения данных.
В статье автор рассказал о задачах, архитектуре и проблемах развития Data lake, а также представил способы решения возникающих проблем, специфику процессов и перспективы развития.
Читать тут.
На Хабр вышел отличный текст от технического руководителя Core Data Lake центра Big Data МТС о том, какие слои находятся внутри Data Lake, как построить архитектуру базы данных и чем распределенный Data Mesh-подход отличается от монолитного хранения данных.
В статье автор рассказал о задачах, архитектуре и проблемах развития Data lake, а также представил способы решения возникающих проблем, специфику процессов и перспективы развития.
Читать тут.
Настройка Data Science окружения на вашем компьютере
После прохождения различных курсов и обучения на различных образовательных платформах, вроде Datacamp, вашим следующим шагом станет использование полученных знаний о Python, R, Git или Unix Shell на персональном компьютере. Однако, многие из нас затрудняются с тем, какие пакеты и программное обеспечение нужно установить, чтобы начать работу с различными технологиями. Именно об этом эта статья
Читать...
После прохождения различных курсов и обучения на различных образовательных платформах, вроде Datacamp, вашим следующим шагом станет использование полученных знаний о Python, R, Git или Unix Shell на персональном компьютере. Однако, многие из нас затрудняются с тем, какие пакеты и программное обеспечение нужно установить, чтобы начать работу с различными технологиями. Именно об этом эта статья
Читать...
МТС проведет онлайн-митап для дата-саентистов, дата-инженеров и специалистов, интересующихся машинным обучением
Виртуальная встреча состоится 24 марта в 18:00 по московскому времени. Участие бесплатное. Зарегистрироваться можно тут.
Спикеры из МТС и ivi.ru расскажут про PU Learning и разберут принципы сортировки блоков с фильмами на главной странице IVI. После этого Виктор Кантор, Валерий Бабушкин и Павел Мягких поделятся опытом использования Data Science в разных сферах бизнеса.
Виртуальная встреча состоится 24 марта в 18:00 по московскому времени. Участие бесплатное. Зарегистрироваться можно тут.
Спикеры из МТС и ivi.ru расскажут про PU Learning и разберут принципы сортировки блоков с фильмами на главной странице IVI. После этого Виктор Кантор, Валерий Бабушкин и Павел Мягких поделятся опытом использования Data Science в разных сферах бизнеса.
Путеводитель по основным трендам 2021 года в области обработки естественного языка и не только
Число исследований в области машинного обучения с каждым годом растет. Конечно, приятно было бы прогуляться по каждой статье или ветке исследований отдельно, но времени на это просто может не хватить, а «посетить» 2021 год еще раз, увы, не удастся. Следовательно, необходимо также искать «путеводители» - статьи, подсвечивающие некоторые тренды, понимание которых важно для будущих направлений исследований. В начале года одна из таких статей «гуляла» по различным каналам и чатам. Мне захотелось перевести ее на русский и поделиться с вами. Далее приведу перевод этой статьи с моими комментариями.
Читать...
Число исследований в области машинного обучения с каждым годом растет. Конечно, приятно было бы прогуляться по каждой статье или ветке исследований отдельно, но времени на это просто может не хватить, а «посетить» 2021 год еще раз, увы, не удастся. Следовательно, необходимо также искать «путеводители» - статьи, подсвечивающие некоторые тренды, понимание которых важно для будущих направлений исследований. В начале года одна из таких статей «гуляла» по различным каналам и чатам. Мне захотелось перевести ее на русский и поделиться с вами. Далее приведу перевод этой статьи с моими комментариями.
Читать...
В открытом море можно ориентироваться по звёздам, но лучше — иметь навигатор.
Бесплатный курс Нетологии — и есть такой навигатор в море Data Science. Вместе с преподавателями-энтузиастами вы на простых примерах разберёте, как алгоритмы принимают решения, и напишите первый код на языке SQL. Всё, чтобы вы могли погрузиться в данные и вынырнуть с понимаем, куда плыть дальше.
Регистрируйтесь → https://netolo.gy/hLD
Бесплатный курс Нетологии — и есть такой навигатор в море Data Science. Вместе с преподавателями-энтузиастами вы на простых примерах разберёте, как алгоритмы принимают решения, и напишите первый код на языке SQL. Всё, чтобы вы могли погрузиться в данные и вынырнуть с понимаем, куда плыть дальше.
Регистрируйтесь → https://netolo.gy/hLD
Структуры данных: двусвязный (двунаправленный) список
Двусвязный (двунаправленный) список — это разновидность связного списка, при которой переход по элементам возможен в обоих направлениях (как вперед, так и назад), в отличие от односвязного (однонаправленного) списка.
Читать...
Предыдущая статья: Структуры данных: связный список
Двусвязный (двунаправленный) список — это разновидность связного списка, при которой переход по элементам возможен в обоих направлениях (как вперед, так и назад), в отличие от односвязного (однонаправленного) списка.
Читать...
Предыдущая статья: Структуры данных: связный список
NOP::Nuances of programming
Структуры данных: двусвязный (двунаправленный) список
Уникальные статьи и переводы — настольная книга программиста.
Бесплатный сервис видеоконференций без ограничений на замену покидающим российский рынок
В прошлом году Сбер запустил сервис для проведения видеовстреч Jazz by Sber, и он стремительно развивается и обрастает все новыми полезными умениями. Например, появилась опция текстовой расшифровки видеовстречи – можно читать ее в реальном времени, если отвлеклись от звонка, или скачать полный текст в конце.
Jazz by Sber подходит и для общения с близкими, и для корпоративного использования. Конференции не ограничены по времени. Число участников — до 200 человек. Запустить звонок можно в один клик в мобильном приложении Салют, браузерах, через приложение для компьютера Jazz Desktop, на смарт-дисплее SberPortal и умном ТВ-медиацентре SberBox Top.
В сервисе есть умное шумоподавление, режим администратора, возможность видеозаписи. Сейчас сервис работает бесплатно.
Создайте свою первую видеоконференцию по ссылке
В прошлом году Сбер запустил сервис для проведения видеовстреч Jazz by Sber, и он стремительно развивается и обрастает все новыми полезными умениями. Например, появилась опция текстовой расшифровки видеовстречи – можно читать ее в реальном времени, если отвлеклись от звонка, или скачать полный текст в конце.
Jazz by Sber подходит и для общения с близкими, и для корпоративного использования. Конференции не ограничены по времени. Число участников — до 200 человек. Запустить звонок можно в один клик в мобильном приложении Салют, браузерах, через приложение для компьютера Jazz Desktop, на смарт-дисплее SberPortal и умном ТВ-медиацентре SberBox Top.
В сервисе есть умное шумоподавление, режим администратора, возможность видеозаписи. Сейчас сервис работает бесплатно.
Создайте свою первую видеоконференцию по ссылке
Оптимальный маршрут доставки, скидки от срока годности и подбор одежды онлайн: 3 примера машинного обучения в e-com
Дата-сайентист из команды СберМаркета Дмитрий Руденко рассмотрел три научных статьи, посвященных применению машинного обучения для доставки товаров в международной компании Zalando и в двух китайских компаниях Meituan и Alibaba.
Читать...
Дата-сайентист из команды СберМаркета Дмитрий Руденко рассмотрел три научных статьи, посвященных применению машинного обучения для доставки товаров в международной компании Zalando и в двух китайских компаниях Meituan и Alibaba.
Читать...
РАБОТА для QA Data Engineer & Backend Go Engineer в международной компании в Москве, которая продолжает свою работу на российском рынке в полном объеме!
Международный проект и интересные задачи, работа в команде европейских лидов
Используемый стек технологий:
👉 Java, JavaScript, Selenium
👉 Golang, Perl/Python
👉 Database: Couchbase, ElasticSearch, Hadoop, MariaDB
👉 Cloud: Google Cloud Platform
👉 Versionning: Git/Gitlab/Jenkins
👉 Other: RabbitMQ/Kafka, Kubernetes, CouchBase, ClickHouse, Prometheus/Grafana, Docker
👉 Linux/GNU, Debian
👉 MySQL
Обязанности:
• Backend Go Engineer - in WAM Team, working on the backend systems of the DMP
• QA Data Engineer - mission is to implement automated tests for validating data streams in the company’s applications
Мы ищем специалистов для данной компании - пожалуйста, пишите / присылайте резюме в Telegram @olganikolova или на почту: olga.nikolova@hpims.ru
Международный проект и интересные задачи, работа в команде европейских лидов
Используемый стек технологий:
👉 Java, JavaScript, Selenium
👉 Golang, Perl/Python
👉 Database: Couchbase, ElasticSearch, Hadoop, MariaDB
👉 Cloud: Google Cloud Platform
👉 Versionning: Git/Gitlab/Jenkins
👉 Other: RabbitMQ/Kafka, Kubernetes, CouchBase, ClickHouse, Prometheus/Grafana, Docker
👉 Linux/GNU, Debian
👉 MySQL
Обязанности:
• Backend Go Engineer - in WAM Team, working on the backend systems of the DMP
• QA Data Engineer - mission is to implement automated tests for validating data streams in the company’s applications
Мы ищем специалистов для данной компании - пожалуйста, пишите / присылайте резюме в Telegram @olganikolova или на почту: olga.nikolova@hpims.ru
Основные тренды ЦОД в 2022 году и примеры проектов
Компания Acer снова с вами! Мы планируем рассказывать об интересных продуктах: как своих, так и других участников рынка. В первую очередь речь пойдет о серверах и соответствующих корпоративных решениях. Впоследствии мы, возможно, расширим тематику и будем рассказывать о ноутбуках, а также обо всем, что с ними связано.
Читать...
Компания Acer снова с вами! Мы планируем рассказывать об интересных продуктах: как своих, так и других участников рынка. В первую очередь речь пойдет о серверах и соответствующих корпоративных решениях. Впоследствии мы, возможно, расширим тематику и будем рассказывать о ноутбуках, а также обо всем, что с ними связано.
Читать...
Хотите попробовать силы в Data Science? Пройдите бесплатный онлайн-интенсив по обработке и анализу данных с 4 по 6 апреля! Начало прямых трансляций — в 21:00 по московскому времени.
Записывайтесь: 👉 https://clc.to/8D-N7A.
Кому полезен интенсив:
📌 Интересующимся новичкам. Узнаете, с чем сталкиваются в работе специалисты по данным. Решите несколько реальных задач и оцените, интересна ли вам эта профессия.
📌 Начинающим специалистам. Научитесь применять Python для построения статистических моделей. Поработаете с библиотеками Pandas и Matplotlib. Разберёте несколько практических заданий и повысите свой уровень.
💬 Спикер интенсива — руководитель направления по исследованию данных в Сбере с семилетним опытом в программировании Анастасия Борнева.
🎁 Каждый участник, сдавший практическую работу, получит сертификат на 10 тысяч рублей на любой курс Skillbox.
Присоединяйтесь!
Записывайтесь: 👉 https://clc.to/8D-N7A.
Кому полезен интенсив:
📌 Интересующимся новичкам. Узнаете, с чем сталкиваются в работе специалисты по данным. Решите несколько реальных задач и оцените, интересна ли вам эта профессия.
📌 Начинающим специалистам. Научитесь применять Python для построения статистических моделей. Поработаете с библиотеками Pandas и Matplotlib. Разберёте несколько практических заданий и повысите свой уровень.
💬 Спикер интенсива — руководитель направления по исследованию данных в Сбере с семилетним опытом в программировании Анастасия Борнева.
🎁 Каждый участник, сдавший практическую работу, получит сертификат на 10 тысяч рублей на любой курс Skillbox.
Присоединяйтесь!
Чистый AutoML для “грязных” данных: как и зачем автоматизировать предобработку таблиц в машинном обучении
В данном посте хотелось бы затронуть такую очень известную и много где описанную тему как предобработка табличных данных в Data Science. Вы можете задать вопрос: “А зачем нам это нужно, ничего нового то тут не скажешь?”. Действительно, что может быть банальнее обработки табличных данных для моделей машинного обучения. Но мы постараемся собрать как можно больше информации в одном ультимативном, если так угодно, гайде, и подадим его через призму автоматического машинного обучения (AutoML).
Читать...
В данном посте хотелось бы затронуть такую очень известную и много где описанную тему как предобработка табличных данных в Data Science. Вы можете задать вопрос: “А зачем нам это нужно, ничего нового то тут не скажешь?”. Действительно, что может быть банальнее обработки табличных данных для моделей машинного обучения. Но мы постараемся собрать как можно больше информации в одном ультимативном, если так угодно, гайде, и подадим его через призму автоматического машинного обучения (AutoML).
Читать...