Инжиниринг Данных – Telegram
Инжиниринг Данных
23.5K subscribers
1.98K photos
56 videos
192 files
3.2K links
Делюсь новостями из мира аналитики и карьерными советами.

15 лет в Аналитике и Инжиниринге Данных, 10 лет в MAANG

🛠️ dataengineer.ru | 🏄‍♂️ Surfalytics.com

№5017813306

Реклама:
https://almond-rule-130.notion.site/1199f595f76a8030ba1be1e607c9a8ce
Download Telegram
Почему компании соглашаются тратить 90% своего времени на обработку данных и только 10% на аналитику? Ответ в статье.
В последнее время Бил Инмон частенько пишет статьи в Linkedin. Именно он написал книгу по дизайну хранилищ данных, которая лосих пор актуальна. В своей книге он писал про дизайн хранилища данных с использованием 3й нормальной формы. Противоположная теория была у Кимбала, который предлагал использовать dimensional modelling. Что до сих пор популярно и спрашивают на всех собеседованиях, но по факту никто не использует, эти методологии, и часто быстренько на коленке что-то собирают.

Так вот, в своей статье Бил, говорит что ИТ уже не то, департаменты ИТ стал придатком бизнеса и занимается по факту Help Desk, а все остальные интересные процессы перешли в бизнес подразделения. И правда, грань между ИТ и бизнесом пропадает. Так же он рекомендует все начинающих избегать ИТ департаментов, и идти в консалтинг или стартап. Если вспомнить коллег из ИТ департаментов, то действительно, часто они занимаются суппортом и работа не интересна. Так у меня было на проектах в Сбербанке.
На курсере столько всего нового и интересного по аналитике! (бесплатно в режиме Audit) Вот например:
Data-driven Decision Making with PWC
Data Analysis and Presentation Skills: the PwC Approach Specialization
Strategic Business Analytics Specialization
Business Analytics Specialization
Business Analytics Executive Overview
Excel to MySQL: Analytic Techniques for Business Specialization
Building High-Performing Teams
Doing Business in China Capstone

Даже Яндекс предлагает свой курс Big Data for Data Engineers Specialization
Как там говориться? Ученье свет, а неученье тьма! Да будет свет💡
В прошлом посту скинул ссылку на курс от Yandex, оказывается он на английском. Теперь вы понимаете, что когда мы что-то презентуем иностранцам, для них наш английский часто не понятен, даже ужасен. И язык не возможно улучшить находясь в русско говорящей среде;
Canada Analytics trends.pdf
1.3 MB
#whitepaper конечно сыроват, что есть-то есть. Пусть будет такой вот MVP, как маркетинговый эксперимент, через Linkedin
18 Июля будет онлайн конференция AWS innovate https://aws.amazon.com/events/aws-innovate
Выступление - Пример Data Science проекта с использованием Athena (SQL интерфейс для озера данных на AWS и Quicksight, BI продукт на AWS) https://www.infoq.com/presentations/athena-quicksight-dashboard/
Одна из лучших аналитических компаний Северной Америки Quantum Black (дочернее предприятие McKinsey), создала open source решение на Python для инжиниринга данных, вот более подробная информация про Kedro.
Я ранее писал про вакансии в Amazon Alexa в Boston. Вакансии есть, кандидатов нет. Кучу индусов которые откликаются, и которых мы собеседуем, ни разу не вариант.

Вот, какой ответ дал нам HR: Как обычно все сложно. Всеми любимая виза H1b не будет доступна до начала следующего года. Так как они провтыкали срок подачи заявок на 2019 году. Если у вас есть виза в США, (наверно рабочая), то они могут вас собеседовать. Обычно это занимает 3-4 недели.

Так что единственный рабочий вариант для гражданина, не являющегося гражданином США, который в настоящее время не имеет действительной визы в США, является O1-A. Эта виза может быть получена, если кандидат отвечает определенным критериям - таким как докторская степень, публикации, цитаты ученых из Google, рецензии, высокие награды, полученные в своей области, и т. Д. Процесс O1-A занимает 3-8 месяцев.

Так что не смотря на то, что в Бостоне есть вакансии к нам в команду для Data Engineers, BI Engineers, Data Scientists/ML engineers, и кандидатов нет, и я пытался продать идею про крутых специалистов за океаном (и идея им понравилась и бизнес готов был рассмотреть кандидатов), то все обломалось из-за отсутствия квоты на H1B. Поэтому если у вас есть Кандидатская и вы крутой специалист, то можно попробовать пройти процесс.
Интересное интервью с CEO QuantumBlack о начале их пути, о аналитики и ценности для бизнеса. QB начинали с F1, собирали данные и оптимизировали траекторию машин, время на пит стопе и тп. Стали экспертами в этой области. Их приобрел McKinsey, и теперь они работают вместе, MK выступает как subject matter expert в бизнес процессах, QB выполняет работу связанную с аналитикой и инжинирингом данных. Много хороших идей в статье, про роль аналитики для организации.
Google Cloud Platform | list of products