Инжиниринг Данных – Telegram
Инжиниринг Данных
23.5K subscribers
1.98K photos
56 videos
192 files
3.2K links
Делюсь новостями из мира аналитики и карьерными советами.

15 лет в Аналитике и Инжиниринге Данных, 10 лет в MAANG

🛠️ dataengineer.ru | 🏄‍♂️ Surfalytics.com

№5017813306

Реклама:
https://almond-rule-130.notion.site/1199f595f76a8030ba1be1e607c9a8ce
Download Telegram
Всем привет, я тут подумал и придумал=)

Давайте использовать это канал более эффективно. Мой контент не всегда актуален для Российского рынка, поэтому я хочу в него добавить больше информации и новостей связанных с данными и аналитикой, но в России.

Что было бы интересно:
1️⃣Use cases - то есть описание проектов, связанных с BI/DW/BigData. Можно по схеме STAR - Situation (ситуация, как было, какая боль у бизнеса/заказчика), Task (какая задача, скоуп), Action - действия (что было сделано, какая архитектура решения, инструменты аналитик), Result - результат (какой результат, и это наверно самое главное, чтобы понять как аналитическое решение помогло приносить больше ценности бизнесу). Таким образом, мы сможем не просто постить информацию о бездушных тулзах, но показать как на практике они решили бизнес проблему.
2️⃣Обзоры - например, вы прочитали статья, и краткой описали о чем она, какие выводы
3️⃣Новости аналитического рынка в РФ
4️⃣Вакансии по теме (ссылку, список инструментов и навыков и зарплата)

Если есть желание присылайте мне в телеграм, а я буду выкладывать и вас указывать как автора новости. Со своей стороны буду выкладывать все, что происходит в Северной Америке.
10-Signs-Time-To-Modernize-Your-Data-Warehouse-Ebook.pdf
296.9 KB
10 признаков, что вам пора модернизировать Хранилище данных. Правда не учитывает суровую реальность Российский законов с облаком и хранением данных.
Многие уже приметили, что Amazon хочет, что-то делать на Россйиском рынке с AWS. К сожалению, я не знаю никаких подробностей. Но мне очень интересно, будет ли Amazon строить дата центр или нет. С точки зрения своего развития, вам бы было хорошо сертифицироваться по AWS Solution Architect Assosiate - это такой сертификат, который говорит, что вы знакомы с AWS, понимаете принципы построения облачных решений. Дальше есть специализации - BigData, Systems, Security и так далее. Я свой экзамен попробую сдать 27 февраля. Я прошел курсы Architecting on AWS, AWS Technical Essentials, Security on AWS. Еще записался на ML on AWS и Migration to AWS.

Для экзамена достаточно только Architecting on AWS. https://aws.amazon.com/training/course-denoscriptions/architect/ но есть и другой вариант, прочитать книжку https://www.amazon.ca/Certified-Solutions-Architect-Official-Study/dp/1119138558/ref=sr_1_1?ie=UTF8&qid=1550600523&sr=8-1&keywords=aws+solution+architect

Я обязательно напишу про AWS экзамен в блоге (на англ) и еще там же напишу по (Табло Desktop/Server). Затем планирую Azure и GCP (на курсере есть все курсы). За облаками будущее и сейчас получить эти экзамены особенно у GCP/Azure проще, поэтому вы можете заложить отличный фундамент на будущее.
#dataengineering

Отличная статья про роль и задачи Инженера Данных, этот перевод статьи сделан SkyEng. Кстати они используют Redshift и Matillion. И тут у меня возник вопрос, возможно вам будет полезно.

Если вы используете Google BigQuery или Amazon Redshift и у вас стоят задачи автоматицазии потоков данных, можно просто назвать ETL, или вам нужна автоматизации маркетинга, или интеграции ETL с BI инструментом, то вам следует посмотреть на Matillion ETL, уже несколько компаний в России используют его,и с одними я недавно общался и показывал, что можно делать. SkyEng уже использует год и очень довольны.

Если вам интересно и у вас есть такие задачи, то напишите мне, я смогу вам показать, как я использовал Matillion и какие задачи можно решать без кодинга и другого гемороя. Или у вас сложности с текущим иснтрументом (Talend, Pentaho, Informatica, и тп).

Возможно весной сделаю вебинар по Аналитическим Решениям на русском минут на 60 (бесплатно😎).
Для любителей усреднять:)
Looker White Paper - Analytics-Drive Marketing for Action