Star7 мне прислали на следующий день анкету опросник, я ее заполнил кое-как (и зря, так как в середине процесса, пришлось править много) и отправил им обратно. Они мне быстро ответили, у тебя хороший IETLS и профессия, можно ехать по Провинциальной программе Манитобы (Манитоба это как Сибирь, но это самая рабочая программа). Цена вопроса 3к сейчас и 3к после. На форумы были хорошие отзывы про них.

Меня останавливал только один факт, неужели я откажусь от мечты с Австралией? Я что слабачек, не могу дело до конца довести…В итоге мы долго обсуждали за и против с женой. Пока я не удел домашнюю футболку, на которой было написано Vancouver Olympic Games 2010, откуда-то родители притащили давным давно, я даже особе не читал раньше, что на ней написано. Ну это судьба, подумали мы, и заплатили в феврале 2015 кому-то 3к$ (еще курсы был 1$=30р).

А дальше, все было довольно быстро, в мае 2015, я встретился в Польше на интервью с иммиграционным офицерами. Это была самая сложная часть. Программа работает так, что раз в год, они прилетает в Европу, где на вас смотрят и вы должны сказать почему вы так мечтаете в Сибирь Манитобу. Роль агентства здесь была решающей, они знают дату еще до официального объявления и относят ваши документы к ним в офис.

В октябре 2015, я получил номинацию от провинции, и это значит, что я могу уже получить рабочую визу в Канаду, просто нужно работу найти. Я так и сделал, в мае 2016 нашел работу в Канаде (используя свою схему, больше из разряда hack marketing). Но в это же время, я нашел работу в Черногории, и мы решили погреться на солнышке, пока наши документы делаются. Черногория — это круто, это волшебно! Но там с работой туго, при мне уволил 25 человек (Форекс Клаб), просто ради оптимизации, и никому ты там не нужен без работы.

В Сентябре 2016, Канадская виза на руках. (по этой схеме еще 2 знакомых уже получили документы). То есть заняло меньше 2х лет. Быстрей не бывает.

В Виннипеге (именно оттуда пришел Винни пух, можете загуглить), я пробыл 6 месяц в Страховой Компании, пока начались проблемы, связанные с моей производительностью и это всех напрягало, что я работал много и особо ни перед кем не отчитывался. Так что в Канаде оргструктура это важно, вообще тут отношения с людьми намного важней, чем ваши знания и опыт. Однажды, меня отправили в обед домой, переодевать джинсы на штаны!! Суровые будни эмигранта). В общем я стал искать работу в Ванкувере и Торонто, откликнулся на 40 вакансий, 3-4 собеседования, и устроился в Амазон в самом теплом и красивом городе Канады – Виктория. Так что ВСЕ ЧТО НЕ ДЕЛАЕТСЯ, ВСЕ К ЛУЧШЕМУ, ну вы знаете). И вот я уже 3 года с Амазоном. Но я начал разочаровываться, об этом тоже как-нибудь напишу.

Поэтому вывод простой, я уехал не потому, что в России жизнь плохая или президент плохой, мне было скучно прожить жизнь на одном месте, фраза «где родился, там и пригодился» меня убивает, это какой-то самообман. Мир огромный и интересный, нельзя себя ограничивать. 3 года в Канаде и у вас гражданство – безвизовый въезд в 180+ стран, возможность работать по всему миру. Из плюсов, мои дети растут на Тихом океане, пляж — это их детская площадка, выходные мы проводим на хайкинге или кемпинге, а не в Икеа или торговом центре (кстати в Виннипеге мы проводили время зимой в Икеа и ТЦ). Родину я люблю, так как на расстоянии я помню только хорошее и у нас даже есть самовар на дровах. А приезжать туристом в Москву и ни в чем себе не отказывать, это была моя давняя мечта.

Poll text

Из Книжки про Улитку и Кита: ...Вот скала / Где над морем улитка жила / И вздыхала она то и дело: / - Как мне все надоело! / Мир огромен, а я тут сижу на скале, / А могла бы уплыть на большом корабле... /...Или...или, может быть, на хвосте синего кита-великана

Только у нас на канале👌🏼

Слайды из Бостона про создание Хранилища данных на AWS, так же включает в себя добавление озера данных (Data Lake на Redshift Spectrum), и Big Data (EMR + Spark), и стриминг с помощью Kinesis Firehose.

Интресный факт, что все задачи были решены сначало с помощью Redshift и Matillion ETL и уже потом были заменены на более подходящие решения.

Написал пост про стратегии миграции для облачной аналитики https://medium.com/rock-your-data/cloud-analytics-migration-strategies-74af248de066

Мы все тут говорим про роботов, автоматизацию, большие данные, аналитику и все в этом духе. А вот Амазон выпустил свою линию Beauty продуктов.

Опять же без данных не обошлось. Все банально просто. Amazon это marketplace. У вас есть уникальный продукт и вы его продаете на Amazon, данные собираются, а потом, раз и Amazon выпускает свой бренд. Если вы знакомы с AmazonBasics, то это другой бренд, там батарейки, коврики, посуда. Все, что там есть, это тоже не просто так, значит эти товары пользовались большим спросом, кто-то неплохо зарабатывал на этих категориях.

Вот так вот Amazon, забирает все самое лучше, и становиться еще богаче.

Вот вам простой пример ценности информации.

Все знают про формат TXT, CSV. Но для большых данных лучше всего подходит Parquet. (Это связано с проектами по болишим данным, Hadoop, Spark, Data Lake)

А вот резльтаты сравнения Netflix, они запускали Hive и Presto (SQL движок для Hadoop) на базе Amazon S3 и HDFS (локальный сторадж Hadoop). Они сравнивали производительность TXT, ORC и Parquet.

Dive into Deep Learning
An interactive deep learning book with code, math, and discussions http://d2l.ai/

Привет, вот есть вакансия Data Engineer:

Data engineer в частный российский банк, которому предстоит погружение в классные проекты (не скоринг) по продуктам банка.
Обязанности:
• Развитие хранилища данных на базе Hadoop. Ответственность за построение data lake.
• Помощь аналитикам данных (data scientist) с загрузкой, обработкой и обогащением данных
• Обеспечение соответствия систем требованиям бизнеса и отраслевым практикам
• Разработка новых инструментов и сервисов

Требования:
• Минимум 2 года опыта на аналогичной позиции
• Практические знания стека Hadoop (Spark, Flink, Kafka, Hive, Scoop итд).
• Уверенное владение одним из языков программирования: Java, Scala, Python
• Опыт работы с промышленными SQL и NoSQL базами данных
• Фокус на бизнес-ориентированность в сочетании с аналитическим мышлением.
• Инновационное мышление, открытость к переменам и стремление к совершенству.

Зарплатная вилка 250000 рублей гросс/нетт

писать Варваре Матиссен-Рожковой в телеграм @heinin или на почту varvaram@marksmans.ru

Пример использования snowflake и matillion с инструкцией https://community.snowflake.com/s/article/Getting-Started-with-Snowflake-and-Matillion

“Life is pretty simple: You do some stuff. Most fails. Some works. You do more of what works. If it works big, others quickly copy it. Then you do something else. The trick is the doing something else.”
― Tom Peters