Data-Science-процессы: Jupyter Notebook для продакшена
Jovian Blues by ShootingStarLogBook
Рефакторинг написанного в Notebook кода для запуска в продакшене — трудная и ресурсоемкая задача. Команда VK Cloud Solutions перевела материал о том, как с помощью MLOps-инструментов и приемов сократить время от исследования до запуска решения. Описанное в статье — результат структурированного опыта дата-сайентистов и ML-разработчиков из сотен компаний.
Читать: https://habr.com/ru/post/662734/
Jovian Blues by ShootingStarLogBook
Рефакторинг написанного в Notebook кода для запуска в продакшене — трудная и ресурсоемкая задача. Команда VK Cloud Solutions перевела материал о том, как с помощью MLOps-инструментов и приемов сократить время от исследования до запуска решения. Описанное в статье — результат структурированного опыта дата-сайентистов и ML-разработчиков из сотен компаний.
Читать: https://habr.com/ru/post/662734/
Какой у вас профессиональный уровень в IT?
Anonymous Poll
7%
Не имею профессионального/учебного интереса в IT
34%
Ещё не работаю в IT
11%
Intern / Стажер-разработчик или т.п.
10%
Junior / Младший разработчик или т.п.
7%
Middle / «Миддл»
5%
Senior / Старший разработчик или т.п.
5%
(Team) Lead / Руководитель команды, группы и т.п. или ведущий разработчик
3%
Руководитель разработки, департамента, топ-менеджер
15%
Связан с IT, но не занимаюсь и не руковожу разработкой (дизайнер, аналитик, продакт, ...)
3%
Другое (пожалуйста, укажите в комментариях ваш вариант)
Use Amazon Kinesis Data Firehose to extract data insights with Coralogix
Read: https://aws.amazon.com/blogs/big-data/use-amazon-kinesis-data-firehose-to-extract-data-insights-with-coralogix/
Read: https://aws.amazon.com/blogs/big-data/use-amazon-kinesis-data-firehose-to-extract-data-insights-with-coralogix/
👍1
«Божественная комедия», или Девять кругов прогнозирования промо спроса в «Магните»
Привет, Хабр! На связи команда направления прогнозирования промо в «Магните». В предыдущей статье «Магнитная аномалия: как предсказать продажи промо в ритейле» мы дали читателю общее представление о том, чем занимается наша команда. Теперь поговорим о конкретных сложностях и методах их решения, с которыми нам приходится сталкиваться в работе.
Чтобы лучше разобраться во внутренней кухне, предлагаем читателю вместе прогуляться по нашим «девяти кругам прогнозирования промо спроса».
Читать: https://habr.com/ru/post/664358/
Привет, Хабр! На связи команда направления прогнозирования промо в «Магните». В предыдущей статье «Магнитная аномалия: как предсказать продажи промо в ритейле» мы дали читателю общее представление о том, чем занимается наша команда. Теперь поговорим о конкретных сложностях и методах их решения, с которыми нам приходится сталкиваться в работе.
Чтобы лучше разобраться во внутренней кухне, предлагаем читателю вместе прогуляться по нашим «девяти кругам прогнозирования промо спроса».
Читать: https://habr.com/ru/post/664358/
👍4
Simplify your ETL and ML pipelines using the Amazon Athena UNLOAD feature
Read: https://aws.amazon.com/blogs/big-data/simplify-your-etl-and-ml-pipelines-using-the-amazon-athena-unload-feature/
Read: https://aws.amazon.com/blogs/big-data/simplify-your-etl-and-ml-pipelines-using-the-amazon-athena-unload-feature/
Know your data 32: location data from mobile apps
Read: https://junkcharts.typepad.com/numbersruleyourworld/2022/05/know-your-data-32-location-data-from-mobile-apps.html
Read: https://junkcharts.typepad.com/numbersruleyourworld/2022/05/know-your-data-32-location-data-from-mobile-apps.html
Single Sign-On Configuration for Oracle Analytics Server on OCI Marketplace with Oracle Identity Cloud Service using Apache HTTP Server and OpenIDC Module
Single Sign-On Configuration for Oracle Analytics Server on OCI Marketplace with Oracle Identity Cloud Service using Apache HTTP Server and OpenIDC Module
Read: https://blogs.oracle.com/analytics/post/oas-mp-sso-idcs-apache-openidc
Single Sign-On Configuration for Oracle Analytics Server on OCI Marketplace with Oracle Identity Cloud Service using Apache HTTP Server and OpenIDC Module
Read: https://blogs.oracle.com/analytics/post/oas-mp-sso-idcs-apache-openidc
Oracle
Single Sign-On Configuration for Oracle Analytics Server on OCI Marketplace with Oracle Identity Cloud Service using Apache HTTP…
Single Sign-On Configuration for Oracle Analytics Server on OCI Marketplace with Oracle Identity Cloud Service using Oracle HTTP Server and WebGate
Single Sign-On Configuration for Oracle Analytics Server on OCI Marketplace with Oracle Identity Cloud Service using Oracle HTTP Server and WebGate (OAuth/OpenID)
Read: https://blogs.oracle.com/analytics/post/oas-mp-sso-idcs-ohs-webgate
Single Sign-On Configuration for Oracle Analytics Server on OCI Marketplace with Oracle Identity Cloud Service using Oracle HTTP Server and WebGate (OAuth/OpenID)
Read: https://blogs.oracle.com/analytics/post/oas-mp-sso-idcs-ohs-webgate
Oracle
Single Sign-On Configuration for Oracle Analytics Server on OCI Marketplace with Oracle Identity Cloud Service using Oracle HTTP…
Single Sign-On Configuration for Oracle Analytics Server on OCI Marketplace with Oracle Identity Cloud Service using Oracle HTTP Server and WebGate (OAuth/OpenID)
Использование Kudu для решения задач в реальном времени в окружении Hadoop
В предыдущей статье я поделился нашим опытом создания аналитического хранилища полного цикла на базе экосистемы Hadoop. Одним из тезисов той статьи стало утверждение о том, что аналитическую систему можно спроектировать, не прибегая к федерализации разных технологических платформ, предназначенных для решения локальных задач.
В этом материале я попробую подробнее раскрыть, как в нашей системе реализован подход обработки и загрузки данных в реальном времени с использованием технологии Kudu, при котором эти данные сразу доступны для анализа.
Читать: https://habr.com/ru/post/664698/
В предыдущей статье я поделился нашим опытом создания аналитического хранилища полного цикла на базе экосистемы Hadoop. Одним из тезисов той статьи стало утверждение о том, что аналитическую систему можно спроектировать, не прибегая к федерализации разных технологических платформ, предназначенных для решения локальных задач.
В этом материале я попробую подробнее раскрыть, как в нашей системе реализован подход обработки и загрузки данных в реальном времени с использованием технологии Kudu, при котором эти данные сразу доступны для анализа.
Читать: https://habr.com/ru/post/664698/
Securing Oracle Analytics Server on Oracle Cloud by Enforcing OCI WAF on Flexible Load Balancers
Securing Oracle Analytics Server on Oracle Cloud by Enforcing OCI WAF on Flexible Load Balancers
Read: https://blogs.oracle.com/analytics/post/oas-oci-waf
Securing Oracle Analytics Server on Oracle Cloud by Enforcing OCI WAF on Flexible Load Balancers
Read: https://blogs.oracle.com/analytics/post/oas-oci-waf
В каком направлении анализа данных вы развиваетесь?
Anonymous Poll
38%
Ещё только начинаю, не выбрал конкретное направление
9%
BI-аналитика
5%
Продуктовая аналитика
1%
Маркетинговая аналитика
18%
Работа с большими данными
28%
ИИ, нейронные сети, машинное обучение
1%
Управление командами / проектами
2%
Другое / не IT (пожалуйста, напишите в комментариях ваш вариант)
Настройка в OpenSearch аутентификации и авторизации пользователей через Active Directory по протоколу LDAP
В этой статье я расскажу о том, как я настраивал аутентификацию и авторизацию доменных пользователей Active Directory в OpenSearch. В домене я не обладаю правами администратора домена и не могу влиять на структуру каталогов Active Directory. А сценарий настройки Active Directory в OpenSearch, предлагаемый на официальном сайте, применить к домену с разветвленной структурой каталогов оказалось не так просто, как хотелось бы.
Читать: https://habr.com/ru/post/664874/
В этой статье я расскажу о том, как я настраивал аутентификацию и авторизацию доменных пользователей Active Directory в OpenSearch. В домене я не обладаю правами администратора домена и не могу влиять на структуру каталогов Active Directory. А сценарий настройки Active Directory в OpenSearch, предлагаемый на официальном сайте, применить к домену с разветвленной структурой каталогов оказалось не так просто, как хотелось бы.
Читать: https://habr.com/ru/post/664874/
Проведение совместных экспериментов c DVC
Вы можете использовать удаленные хранилища DVC для совместного использования экспериментов и их данных через машины.
Читать: https://habr.com/ru/post/664946/
Вы можете использовать удаленные хранилища DVC для совместного использования экспериментов и их данных через машины.
Читать: https://habr.com/ru/post/664946/
Build a big data Lambda architecture for batch and real-time analytics using Amazon Redshift
Read: https://aws.amazon.com/blogs/big-data/build-a-big-data-lambda-architecture-for-batch-and-real-time-analytics-using-amazon-redshift/
Read: https://aws.amazon.com/blogs/big-data/build-a-big-data-lambda-architecture-for-batch-and-real-time-analytics-using-amazon-redshift/
Top tips for enhancing performance of Oracle® Analytics Server (OAS)
The following white paper describes techniques for monitoring and optimizing the performance of Oracle Analytics Server (OAS) components.
Read: https://blogs.oracle.com/analytics/post/oracle-analytics-server-infrastructure-tuning-guide
The following white paper describes techniques for monitoring and optimizing the performance of Oracle Analytics Server (OAS) components.
Read: https://blogs.oracle.com/analytics/post/oracle-analytics-server-infrastructure-tuning-guide
Oracle
Top tips for enhancing performance of Oracle Analytics Server (OAS)
Read this short post to learn about our updated white paper, attached, which describes techniques for monitoring and optimizing the performance of Oracle Analytics Server (OAS) components.
More case-counting puzzles
Read: https://junkcharts.typepad.com/numbersruleyourworld/2022/05/more-case-counting-puzzles.html
Read: https://junkcharts.typepad.com/numbersruleyourworld/2022/05/more-case-counting-puzzles.html
Analyze Amazon SES events at scale using Amazon Redshift
Read: https://aws.amazon.com/blogs/big-data/analyze-amazon-ses-events-at-scale-using-amazon-redshift/
Read: https://aws.amazon.com/blogs/big-data/analyze-amazon-ses-events-at-scale-using-amazon-redshift/
Power your data applications with a Semantic Model using Oracle Analytics Cloud
With Oracle Analytics Cloud (OAC) and our new Semantic Modeling Markup Language (SMML), you can now create a powerful semantic model which acts as a translation layer between your application and your underlying data structures. This semantic model exposes a metrics-oriented data layer that can be used directly in your application via APIs, with embedded visualizations, or in other analytics tools.
Read: https://blogs.oracle.com/analytics/post/power-your-data-applications-with-a-semantic-model-using-oracle-analytics-cloud
With Oracle Analytics Cloud (OAC) and our new Semantic Modeling Markup Language (SMML), you can now create a powerful semantic model which acts as a translation layer between your application and your underlying data structures. This semantic model exposes a metrics-oriented data layer that can be used directly in your application via APIs, with embedded visualizations, or in other analytics tools.
Read: https://blogs.oracle.com/analytics/post/power-your-data-applications-with-a-semantic-model-using-oracle-analytics-cloud
Oracle
Power your data applications with a semantic model using Oracle Analytics Cloud
With Oracle Analytics Cloud and our new Semantic Modeling Markup Language, you can now create a powerful semantic model which acts as a translation layer between your application and your underlying data structures. This semantic model exposes a metrics-oriented…
👍2
Data Engineering Project for Beginners - Batch edition
Read: https://www.startdataengineering.com/post/data-engineering-project-for-beginners-batch-edition/
Read: https://www.startdataengineering.com/post/data-engineering-project-for-beginners-batch-edition/
Orchestrate big data jobs on on-premises clusters with AWS Step Functions
Read: https://aws.amazon.com/blogs/big-data/orchestrate-big-data-jobs-on-on-premises-clusters-with-aws-step-functions/
Read: https://aws.amazon.com/blogs/big-data/orchestrate-big-data-jobs-on-on-premises-clusters-with-aws-step-functions/
Explore Data with Filters (Part 1)
Filters are a powerful interaction paradigm for users to explore data and perform analysis. Filters enable users to get from data to insights, reduce noise in the data, and slice and dice data by different dimensions. This article explains the different filter capabilities available in Oracle Analytics along with best practices.
Read: https://blogs.oracle.com/analytics/post/explore-data-using-filters
Filters are a powerful interaction paradigm for users to explore data and perform analysis. Filters enable users to get from data to insights, reduce noise in the data, and slice and dice data by different dimensions. This article explains the different filter capabilities available in Oracle Analytics along with best practices.
Read: https://blogs.oracle.com/analytics/post/explore-data-using-filters