Сегодня выступал в школе, у них была ярмарка вакансий и я рассказывал про работу в Amazon и Alexa, взял даже сына (ему 7 лет), он показывал как он взаимодойствует с Alexa. 2 счастливчиков выиграли новые устройства, которых еще нет в Канаде. Сын пропустил школу, но явно узнал много нового и теперь сидит рисуют Alexa разные устройства, я его кстати везде беру на все мероприятия, это такое у нас детский MBA:)

В Штатах говорят про сильный спад Hadoop: Цитата CEO Snowflake "Slootman: "I've never seen something crater as fast as Hadoop in all my years in the business. We see whole companies like Cloudera, MapR just falling off a damn cliff. We haven't seen that in technology, it's usually a gradual decline. This is rapid decline."

И правда, Snowflake в себе совмещает озеро данных и хранилище. В Azure есть DataBricks (Spark) вместо HDInsight (Hadoop), в AWS есть Athena, Spectrum, Glue (with Spark), которое можно использовать вместо Elastic Map Reduce (Hadoop), и так же и в Google Cloud Platform. До этого я писал, что компания Datameer, тоже уходит от Hadoop как основы своего продукта.

Поэтому хорошо знать, что такое Hadoop и основные принципы, но лучше детально изучать Spark.

А говорят, что китайцы все копируют))

Всем привет, Валерий (@HardKorr) ведет в Москве несколько митапов, в том числе Moscow School of Business Analysis. Так как скоро я буду в Москве, хотелось собрать митап по аналитике и облакам, где я хотел выступить, заодно про Канаду рассказать и про эмиграцию, работу в Амазоне и тп. И только Валерий согласился все организовать, за что ему большое спасибо!

Так что, если 20 Ноября будете свободны, приходите! Обязательная регистрация.

Работаете с данными? Одна из самых популярных библиотек в Python это Pandas. В приложении ebook про Pandas. Так же это поможет освоить PySpark.

Linkedin это отличный инструмент маркетинга и самопиара. Как говорится, встречают по одежке, вом вам примеры, сегодня попались:

Enabling Large Enterprises to Unlock Innovation through Cloud Computing
Partnering To Unlock The Power Of Your Data
I help leaders and teams define and accelerate their journey from now to next.
Empowering HR professionals to transform their business through better people decisions
Driving and managing apocalyptic transformation
"Talent wins games, but teamwork and intelligence win championships." Michael Jordan
We help unlock the potential of your business, through financial insights, strategy
Helping Customers Unlock their Data Assets
Driving sustainable, value based infrastructure planning and decision making.
Helping my clients Select, Deploy and Manage Technology
Helping enterprise organizations to increase collaboration
Enabling Data Driven Organizations
Solving the issues of modern day analytics
Helping businesses become data-driven.
Working with the Enterprise to address data challenges that yesterday’s technology cannot solve.
Enabling every organization to be data driven...let's talk!
Creating more profitable streams of revenue through modern day analytics

Выбирайте любой! Уверен есть и русские аналоги, и еще много английский вариантов, мне последний понравился.

Google BigQuery - воркшоп, на котором можно узнать основы BigQuery и Облачного Хранилища данных.

Только я воодушевился подъемом Терадата, созданием облачной аналитики, новому CEO, как его убрали https://www.teradata.com/Press-Releases/2019/Victor-L-Lund-Appointed-Interim-CEO-Succeeding-Oliver-Ratzesberger?mod=article_inline

И конечно стоимость Teradata очень сильно упала. Я застал время, когда акции были нам максимуме, но так и не купил их. Из акций у меня только был/есть Amazon, и он вырос с 600 до 2000 и потом упал до 1600. Много коллег покупают сток продуктов Tableau, Microstrategy. Коллега, скупал сток продуктовых сетей и строительных магазинов в Канаде. Медленный, но верный рост. Я бы купил бы акции Snowflake.

Рейтинг облачных хранилищ данных.

Про зарплаты: How much do programmers make in FANG companies? Starting engineers start at about $200K total compensation, reaching $400-600K for senior engineers." Это про Software Development Engineer (SDE) позиции и это про силиконовоую долину. Но в целом, это относиться и к Data Engineer/ML Engineer. Как и везде, в Северной Америке, запрлата зависит от места работы и среднего уровня жизни. В Канаде зарплаты меньше, в Европе еще меньше. Идеальная ситуация, это получать зарплату в Северной Америке и жить где-нибудь в Южной Америке (часовой пояс совпадает).

Меня спросили, где лучше всего смотреть за стоком? Мне кажется это самое лучшее место.

Интересная книга под названием Machine Learning God написана Machine Learning Angel.

Чувак очень правильно заметил, каждый должен занимать своим делом! Я бы добавил еще, что каждый дольже обязательно понимать всю картину целиком end-to-end хотя бы верхнеуровне. Но не нужно тратить время не на свои задачи. Я недавно потрали 2 недели времени на работу SDE, в итоге не сделал задачу. SDE смог бы это сделать за 2 дня. А я пытался понять основы и найти документацию. В итоге я передал задачу SDE.

Приходите 20го на митап, привезу стикеров https://www.meetup.com/Moscow-Business-Analysis-School/events/265849525/.