Инжиниринг Данных – Telegram
Инжиниринг Данных
23.5K subscribers
1.98K photos
56 videos
192 files
3.2K links
Делюсь новостями из мира аналитики и карьерными советами.

15 лет в Аналитике и Инжиниринге Данных, 10 лет в MAANG

🛠️ dataengineer.ru | 🏄‍♂️ Surfalytics.com

№5017813306

Реклама:
https://almond-rule-130.notion.site/1199f595f76a8030ba1be1e607c9a8ce
Download Telegram
fair ml.pdf
2.4 MB
Building Fair and Transparent Machine Learning via Operationalized Risk Management: Towards an Open-Access Standard Protocol by QuantumBlack (McKinsey&Co)
Список компаний, который были куплены недавно:
-Stitch. Acquired by Talend on 11/7/2018 for $60m.
-Qlik. Acquired by Attunity on 02/2019 for $560m.
-Alooma. Acquired by Google on 2/19/19 for an undisclosed amount.
-Periscope. Acquired by Sisense on 5/14/19 for an undisclosed amount.
-Looker. Acquired by Google on 6/6/19 for $2.6b.
-Tableau. Acquired by Salesforce on 6/10/19 for $15.7b.
Одно из самых популярных решений для интеграции данных это Open source продукт Apache Airflow. Достаточно популярен в Amazon. Я еще до него не добрался, вот отличный пример как Lyft его использует. Ближайший сосед Airflow, это Apache SuperSet, BI решение.
Обзор решений хранилищ данных от G2, Snowflake и Redshift лидируют. Я думаю Redshift лидирует по кол-ву клиентов и популярности, а Snowflake на хайпе. https://www.g2.com/categories/data-warehouse
А еще недавно, компании Teradata исполнилось 40 лет. Это мое самое любимое место работы в Москве. Несмотря на то, что менеджмент там все похерил, все равно это замечательная компания, которая кстати первая создала аналитическое хранилище данных и внедрила его в массы. https://www.datanami.com/2019/06/14/teradata-turns-40-takes-off-gloves-readies-for-a-fight
18 июля Онлайн Конференция AWS, где вы можету послушать и поучиться про иснтрументы для работы с данными https://aws.amazon.com/events/aws-innovate/
поддерживает московское время
«Иногда для решения самых сложных задач требуется меньше усилий».

Если вы любите выполнять работу быстро, но часто так же быстро страдаете от ограничений процесса - то книга Спринт Джейка Кнаппа, в которой описан усовершенствованный инновационный подход, используемый в Google Ventures будет вам интересна. Это книга будеи интересна руководителям, владельцам цифровых продуктов, а также дизайнерам / разработчикам - редко можно отнести одну книгу к категории всех этих профессий.

Одна из замечательных особенностей этой книги заключается в том, что в ней рассматриваются некоторые основные аспекты гибкой / бережливой методологии, но она объединяет их в прагматичную и полезную структуру. Сосредоточение внимания на небольшой автономной команде с четкими целями и небольшими размерами партий звучит как основа для гибкой команды разработчиков, но в этом случае эти концепции используются для быстрых целенаправленных инноваций.