10-Signs-Time-To-Modernize-Your-Data-Warehouse-Ebook.pdf
296.9 KB
10 признаков, что вам пора модернизировать Хранилище данных. Правда не учитывает суровую реальность Российский законов с облаком и хранением данных.
Многие уже приметили, что Amazon хочет, что-то делать на Россйиском рынке с AWS. К сожалению, я не знаю никаких подробностей. Но мне очень интересно, будет ли Amazon строить дата центр или нет. С точки зрения своего развития, вам бы было хорошо сертифицироваться по AWS Solution Architect Assosiate - это такой сертификат, который говорит, что вы знакомы с AWS, понимаете принципы построения облачных решений. Дальше есть специализации - BigData, Systems, Security и так далее. Я свой экзамен попробую сдать 27 февраля. Я прошел курсы Architecting on AWS, AWS Technical Essentials, Security on AWS. Еще записался на ML on AWS и Migration to AWS.
Для экзамена достаточно только Architecting on AWS. https://aws.amazon.com/training/course-denoscriptions/architect/ но есть и другой вариант, прочитать книжку https://www.amazon.ca/Certified-Solutions-Architect-Official-Study/dp/1119138558/ref=sr_1_1?ie=UTF8&qid=1550600523&sr=8-1&keywords=aws+solution+architect
Я обязательно напишу про AWS экзамен в блоге (на англ) и еще там же напишу по (Табло Desktop/Server). Затем планирую Azure и GCP (на курсере есть все курсы). За облаками будущее и сейчас получить эти экзамены особенно у GCP/Azure проще, поэтому вы можете заложить отличный фундамент на будущее.
Для экзамена достаточно только Architecting on AWS. https://aws.amazon.com/training/course-denoscriptions/architect/ но есть и другой вариант, прочитать книжку https://www.amazon.ca/Certified-Solutions-Architect-Official-Study/dp/1119138558/ref=sr_1_1?ie=UTF8&qid=1550600523&sr=8-1&keywords=aws+solution+architect
Я обязательно напишу про AWS экзамен в блоге (на англ) и еще там же напишу по (Табло Desktop/Server). Затем планирую Azure и GCP (на курсере есть все курсы). За облаками будущее и сейчас получить эти экзамены особенно у GCP/Azure проще, поэтому вы можете заложить отличный фундамент на будущее.
Amazon
Architecting on AWS | Classroom Training | AWS
Learn the fundamentals of building IT infrastructure on AWS. Explore AWS Cloud best practices and design patterns for architecting optimal IT solutions on AWS, and build a variety of infrastructures in guided, hands-on activities.
#dataengineering
Отличная статья про роль и задачи Инженера Данных, этот перевод статьи сделан SkyEng. Кстати они используют Redshift и Matillion. И тут у меня возник вопрос, возможно вам будет полезно.
Если вы используете Google BigQuery или Amazon Redshift и у вас стоят задачи автоматицазии потоков данных, можно просто назвать ETL, или вам нужна автоматизации маркетинга, или интеграции ETL с BI инструментом, то вам следует посмотреть на Matillion ETL, уже несколько компаний в России используют его,и с одними я недавно общался и показывал, что можно делать. SkyEng уже использует год и очень довольны.
Если вам интересно и у вас есть такие задачи, то напишите мне, я смогу вам показать, как я использовал Matillion и какие задачи можно решать без кодинга и другого гемороя. Или у вас сложности с текущим иснтрументом (Talend, Pentaho, Informatica, и тп).
Возможно весной сделаю вебинар по Аналитическим Решениям на русском минут на 60 (бесплатно😎).
Отличная статья про роль и задачи Инженера Данных, этот перевод статьи сделан SkyEng. Кстати они используют Redshift и Matillion. И тут у меня возник вопрос, возможно вам будет полезно.
Если вы используете Google BigQuery или Amazon Redshift и у вас стоят задачи автоматицазии потоков данных, можно просто назвать ETL, или вам нужна автоматизации маркетинга, или интеграции ETL с BI инструментом, то вам следует посмотреть на Matillion ETL, уже несколько компаний в России используют его,и с одними я недавно общался и показывал, что можно делать. SkyEng уже использует год и очень довольны.
Если вам интересно и у вас есть такие задачи, то напишите мне, я смогу вам показать, как я использовал Matillion и какие задачи можно решать без кодинга и другого гемороя. Или у вас сложности с текущим иснтрументом (Talend, Pentaho, Informatica, и тп).
Возможно весной сделаю вебинар по Аналитическим Решениям на русском минут на 60 (бесплатно😎).
Хабр
Нужен ли вашей команде Data Engineer?
Мы часто находим классные англоязычные статьи, которые кажутся полезными нашей команде, и решили, что было бы здорово делиться с читателями Хабры их переводом. Сегодня мы подготовили перевод статьи...
Отличный эвент про современные аналитические решения, посути, все то, о чем я часто здесь пишу https://tdwi.org/webcasts/2019/03/adv-all-modern-data-analytics-in-the-cloud-achieving-an-end-to-end-strategy.aspx
TDWI
Modern Data Analytics in the Cloud: Achieving an End-to-End Strategy | TDWI
Learn how your organization can create an end-to-end strategy that aligns analytics in the cloud with data management. We’ll discuss key issues in supporting today’s analytics workloads, including cloud data warehousing, data preparation and transformation…
Написал новый пост по Deep Learning. Если честно сам не очень понял, но выглядит внушительно: https://medium.com/@RockYourData/getting-started-with-aws-deep-lerning-using-a-multi-layer-perceptron-neural-network-model-afc39c71f53e
Medium
Getting started with AWS Deep Learning using A Multi-Layer Perceptron Neural Network Model
Introduction
Я всегда хотел что-нибудь делать в университете, особенно в Северно Американском. Мне нравиться находиться в стенах университета, что-то в этом есть для меня.
После долгих попыток как-нибудь наладить контакт с университетами BC, а тут их 2 University of Victoria и University of British Columbia, наконец получилось. Я присоединился к nonprofit организации HighTechU, это инициатива департамента Computer Science Uvic, в качестве Mentor and Program Owner, и теперь по субботам, пока мои дети учат русский в Uvic (и такое тоже есть у нас тут для маленьких детей), я помогаю студантам строить их маленькие проекты, используя Agile, coding, collaboration and team work. Ну и конечно, я их посвящаю в полезность данных, вот презентация - "Hey, what is about Data?", которую я им рассказывал.
А сегодня, всей толпой учавствовали в Battle Snake - это местное мероприятие, где учавствуют все тех компании (было больше 1000 человек). Вам нужно запрограмировать змейку, и потом запускают по 4 змейки и смотрят, кто выигрывает. Можно скачать и запустить, может получится неплохой задачей для собеседования, у кого змейка победит:)
После долгих попыток как-нибудь наладить контакт с университетами BC, а тут их 2 University of Victoria и University of British Columbia, наконец получилось. Я присоединился к nonprofit организации HighTechU, это инициатива департамента Computer Science Uvic, в качестве Mentor and Program Owner, и теперь по субботам, пока мои дети учат русский в Uvic (и такое тоже есть у нас тут для маленьких детей), я помогаю студантам строить их маленькие проекты, используя Agile, coding, collaboration and team work. Ну и конечно, я их посвящаю в полезность данных, вот презентация - "Hey, what is about Data?", которую я им рассказывал.
А сегодня, всей толпой учавствовали в Battle Snake - это местное мероприятие, где учавствуют все тех компании (было больше 1000 человек). Вам нужно запрограмировать змейку, и потом запускают по 4 змейки и смотрят, кто выигрывает. Можно скачать и запустить, может получится неплохой задачей для собеседования, у кого змейка победит:)