Инжиниринг Данных – Telegram
Инжиниринг Данных
23.5K subscribers
1.98K photos
56 videos
192 files
3.2K links
Делюсь новостями из мира аналитики и карьерными советами.

15 лет в Аналитике и Инжиниринге Данных, 10 лет в MAANG

🛠️ dataengineer.ru | 🏄‍♂️ Surfalytics.com

№5017813306

Реклама:
https://almond-rule-130.notion.site/1199f595f76a8030ba1be1e607c9a8ce
Download Telegram
Tableu выпустила новый релиз, и теперь у них есть NLP, хотя у Power BI это было еще год назад наверно. Но в любом случае, Tableau это Self-Service, а это значит любой может загрузить что угодно на сервер, и толку от Ask Data будет не много, но если это правильно настроить, убрать весь мусор, то будет круто! Кстати вот описание новых features https://medium.com/@RockYourData/meet-the-new-tableau-2019-1-70c8dfb127a2
Интересная статья про культуры работы в Амазон, я уже 3 года работаю и согласен со всем выше сказанным. Несомненно есть и много преимуществ (часто езжу в Сиэтл с семьей на машине за счет компании, могу учиться сколько захочу, безлимитный доступ к AWS ресурсам, интересные и сложные проекты, легко попасть на конференцию в качестве спикера - Enterprise Data Worlds, Data Summit, Data Architecture Summit, могу себя успокаивать, что я работаю в топ компании и по зп все ок).

Поэтому всегда хорошо знать обе стороны ситуации. И если вы иммигрант (как я) или планируете им стать, то работа в такой компании это как счастливый билет к быстрой и успешной адаптации в новой стране.
Всем привет, я тут подумал и придумал=)

Давайте использовать это канал более эффективно. Мой контент не всегда актуален для Российского рынка, поэтому я хочу в него добавить больше информации и новостей связанных с данными и аналитикой, но в России.

Что было бы интересно:
1️⃣Use cases - то есть описание проектов, связанных с BI/DW/BigData. Можно по схеме STAR - Situation (ситуация, как было, какая боль у бизнеса/заказчика), Task (какая задача, скоуп), Action - действия (что было сделано, какая архитектура решения, инструменты аналитик), Result - результат (какой результат, и это наверно самое главное, чтобы понять как аналитическое решение помогло приносить больше ценности бизнесу). Таким образом, мы сможем не просто постить информацию о бездушных тулзах, но показать как на практике они решили бизнес проблему.
2️⃣Обзоры - например, вы прочитали статья, и краткой описали о чем она, какие выводы
3️⃣Новости аналитического рынка в РФ
4️⃣Вакансии по теме (ссылку, список инструментов и навыков и зарплата)

Если есть желание присылайте мне в телеграм, а я буду выкладывать и вас указывать как автора новости. Со своей стороны буду выкладывать все, что происходит в Северной Америке.
10-Signs-Time-To-Modernize-Your-Data-Warehouse-Ebook.pdf
296.9 KB
10 признаков, что вам пора модернизировать Хранилище данных. Правда не учитывает суровую реальность Российский законов с облаком и хранением данных.
Многие уже приметили, что Amazon хочет, что-то делать на Россйиском рынке с AWS. К сожалению, я не знаю никаких подробностей. Но мне очень интересно, будет ли Amazon строить дата центр или нет. С точки зрения своего развития, вам бы было хорошо сертифицироваться по AWS Solution Architect Assosiate - это такой сертификат, который говорит, что вы знакомы с AWS, понимаете принципы построения облачных решений. Дальше есть специализации - BigData, Systems, Security и так далее. Я свой экзамен попробую сдать 27 февраля. Я прошел курсы Architecting on AWS, AWS Technical Essentials, Security on AWS. Еще записался на ML on AWS и Migration to AWS.

Для экзамена достаточно только Architecting on AWS. https://aws.amazon.com/training/course-denoscriptions/architect/ но есть и другой вариант, прочитать книжку https://www.amazon.ca/Certified-Solutions-Architect-Official-Study/dp/1119138558/ref=sr_1_1?ie=UTF8&qid=1550600523&sr=8-1&keywords=aws+solution+architect

Я обязательно напишу про AWS экзамен в блоге (на англ) и еще там же напишу по (Табло Desktop/Server). Затем планирую Azure и GCP (на курсере есть все курсы). За облаками будущее и сейчас получить эти экзамены особенно у GCP/Azure проще, поэтому вы можете заложить отличный фундамент на будущее.
#dataengineering

Отличная статья про роль и задачи Инженера Данных, этот перевод статьи сделан SkyEng. Кстати они используют Redshift и Matillion. И тут у меня возник вопрос, возможно вам будет полезно.

Если вы используете Google BigQuery или Amazon Redshift и у вас стоят задачи автоматицазии потоков данных, можно просто назвать ETL, или вам нужна автоматизации маркетинга, или интеграции ETL с BI инструментом, то вам следует посмотреть на Matillion ETL, уже несколько компаний в России используют его,и с одними я недавно общался и показывал, что можно делать. SkyEng уже использует год и очень довольны.

Если вам интересно и у вас есть такие задачи, то напишите мне, я смогу вам показать, как я использовал Matillion и какие задачи можно решать без кодинга и другого гемороя. Или у вас сложности с текущим иснтрументом (Talend, Pentaho, Informatica, и тп).

Возможно весной сделаю вебинар по Аналитическим Решениям на русском минут на 60 (бесплатно😎).
Для любителей усреднять:)