через 5 минут начинаем
https://youtu.be/2Z325XKRpfw

Herman Miller делает лучшие стулья! На канале мы про них говорили. А вот небольшой press release, что они используют для data stack - Astronomer (коммерческий Airflow), Snowflake https://www.astronomer.io/blog/herman-miller-case-study

Еще один хороший кейс AI - в Белгии все заседания политиков стриятся в ютуб, с помощью модели и ПО можно смотреть, сколько политиков откликаются на телефон

'The Flemish Scrollers' is software automatically tagging distracted Belgian politicians when they use their phone on the daily live streams. https://driesdepoorter.be/theflemishscrollers/

Заключительное видео по модулю 5 - Python в Облаке AWS на базе AWS Python Workshop. Так же Сергей перевел весь воркшоп на русский, я сам его прошел и остался очень довольный, все как мы любим - от простого к сложному.

Python является самым популярным языком программирования и используются абсолютно для любых задач. В будующих модулях 07. Spark, 08. Big Data и 09. Data Lake мы начнем использовать Python для аналитики, трансформации и инжиниринга данных, поэтому мы решили вв конце модуля про облычные вычисления провести Workshop по Python на AWS. Воркшоп доступен на английском и русском языках. Из него вы на парктики узнаете основы работы с Python:

📌 Переменные
📌 Типы данных
📌 Пакеты
📌 Функции
📌 Аргументы и параметры
📌 Циклы и Условия
📌 Логирование и Ошибки
📌 Python библиотека boto3 для работы с AWS
📌 Cloud9 - AWS IDE

Модуль 5 оффициально окончен. Все материалы по нему - в git, включая сертификат для linkedin и значок открытка для социальных сетей.

Далее я начну модуль 6, а Рома портирует модуль про облачные вычисления как отдельный самостоятельный курс на степик. Мы явно опережаем время с облаками, но это был важный элемент в современной аналитике.

Интересный пример, мужик решился вдохновиться историей успеха другого мужика и за 1,5 года упороться в java. И потом написал развернутый ответ как он ненавидит этого человека и что все его советы лажа

Вчера провёл вебинар для Data Learn, где подробно разобрали сервисы Google Cloud и в каких кейсах их можно применять. Получилась целая лекция о Cloud Computing)

Презентация с выступления: https://docs.google.com/presentation/d/141TXFvCSl7tYaw1ODzYdlDxcWLJsHMM0roCj0YbbfYc/edit?usp=sharing

Полезные ссылки, которыми просили поделиться после вебинара:

Решение на GitHub для стриминга данных Google Analytics на базе App Engine и Google BigQuery (решение опубликовано давно и использует Python 2, поэтому при использовании его нужно будет обновить и причесать)

Пример того, как захостить ваш R-скрипт на Cloud Run

На этой неделе Netflix взял на работу Mike Verdu на позицию vice president of game development. Нетфликс лидер в видео стриминге и подписке и теперь они хотят двигаться в gaming.

The idea is to offer video games on Netflix’s streaming platform within the next year, according to a person familiar with the situation.

Недавно я заметил интересный формат мультиков - интерактивные. Дети смотрели сериал Minecraft и там зрителю дают возможность выбрать сценарий (один из двух возможных), очень необычный формат и детям очень понравилось.

В автороской заметке The Information, автор пишет совсем смелые мысли:
Here’s one idea that might jumpstart Netflix in the market: It could buy a well-established gaming business, perhaps Microsoft’s. That would give Netflix a portfolio of gaming studios—including Bethesda, which Microsoft recently acquired—that would give Netflix an edge in original game production, in addition to Microsoft’s nascent Game Pass subnoscription service. Microsoft might be happy to unload the business in exchange for a stake in Netflix, particularly if it kept the cloud business and captured Netflix’s cloud business from AWS. The only fly in the ointment might be Microsoft’s Xbox hardware business, which we now know is a money-loser. Maybe Netflix could sell that to Roku, which knows how to translate low-margin hardware into a robust business.

Не думаю, что это случится, так как у Microsoft все хорошо с Gaming и сервисом game pass. А то что консоли продаются в убыток это ивестный факт, главное продать подписку, так же и с Amazon Alexa и другими гаджетами. Тем более, консоли уже и не нужны, чтобы играть, благодаря сервисам стриминга можного играть полноценно через streaming app.

Факт остается фактом - gaming развивается и все больше людей готовы платить за это, ну значит и работы в game индустрии будет больше и будет нужно делать больше аналитики. Я так то рад, если Netflix будет делать игры, так как у них самые высокие зарплаты))

PS А вот свежее исследование рынка игр by Accenture:
Gaming has always been a social experience, but never more so than it is today. Accenture surveyed 4,000 gamers and made in-depth interviews with industry leaders from game developers and platforms. Learn what gamers want today and how can gaming companies up their game here.

Компания Dbt Labs анонсировала - The Foundry Program:

What exactly is the Foundry Program?
It is a 6-month program designed to give:
- aspiring software engineers training and experience in writing code in production at a software company, and
- aspiring analytics engineers experience working with the modern data stack including, of course, dbt.

Классный метод продвижения продукта и его внедрения в массы. Уверен будет интересный контент, вы можете попробовать записаться, не знаю как у них там по географии и по лимитам. Они ищут новичков.

Теперь вы можете увидеть все каналы в одном месте - Ребята из @it_resume собрали большую подборку авторских телеграмм-каналов для аналитиков. Там более 20 каналов на любой вкус - анализ данных, программирование, data engineering, data science и многое другое 👍

Теперь вам точно будет, что почитать на предстоящих выходных 🙃
Подробнее - в статье

Создание дата команды в стартапе https://erikbern.com/2021/07/07/the-data-team-a-short-story.html

Уже завтра Виктория Олейник, расскажет о работе в Quantum Black(это дочка McKinsey с фокусом на DE и DS, это самая моя любимая компания вместе с McKinsey) и McKinsey в своем докладе Pipelines and Deadlines. Виктория закончила Высшую Школу Экономики и у нее крутой опыт работы в топовых консалтинг компаниях! Готовьте свои вопросы и не пропустите ивент!

https://youtu.be/v1CR4GotN-w

погнали:
https://youtu.be/v1CR4GotN-w

Dremio будет проводить панель по озерам данных с топовыми спикерами онлайн https://www.dremio.com/subsurface/live?_ga=2.203573072.1949877702.1626636985-1007574036.1626636985

Когда мы создаем аналитическое решение, часто нам нужно сделать те или иные решения связанные с дизайном и архитектурой аналитического решения, вот ключевые моменты design decisions:
- Verbosity
- Latency
- Completeness
- Access Frequency
- Compliance and Privacy
- Security
- Developer Efficiency
- Retention
- Cost
- Developer Satisfaction and End User Friendliness

В процессе создания решения возникают следующие challenges:
- Documentations
- Scale
- SLA
- GDPR and Privacy
- Consistency

Если в первый год жизни вы не начали изучать темы из книг на картинке, возможно уже поздно!🤣

Следующий этап - Neural Network для беременных и потом для Бабушек и Дедушек.

Я всегда говорил - надо 20-30 собеседований завалить, чтобы пройти одно заветное. И уж точно, компании мечты должны быть в конце списка, а не наоборот)) Если что, есть план Б - 80 собеседований провалить - я бы разделил на 40 собеседований в РФ, 20 в Украине и по 10 в Казахстане и Беларусии. И тогда будет вам счастья. Но это для СНГ. А вот для Европы и Северной Америке другая пропорция;)

Все так😔 Если вы не смотрели на Netflix - Social Dilemma, очень интересно про нашу зависимость к социальным сетямhttps://www.thesocialdilemma.com/