Решил напомнить про свои конспекты, так как там начался розыгрыш от Tribute за подписки на каналы.

Планирую чуть позже добавить конспект по Airflow, а пока что так.

Ссылки и стоимость ниже.
Просьба перед покупкой ознакомиться с постами о материалах.

Конспекты:
1. Apache Spark
2. Clickhouse
3. Greenplum
4. DWH+Hadoop+Kubernetes
5. Задачки с собесов
6. Lakehouse Conspects
7. How to Get Offer


Так же контент за звезды:
Сколько получил от канала (обновлю в декабре)
Офферы в DE:
Первый
Второй
Третий

*При покупке нескольких скидка в PM @noelsethink

Вы вроде любите посты про то как экономить в облаках:

Вот вам пример:
Есть AWS S3, у него есть несколько вариантов Storage Class'ов, которые стоят по разному.

Допустим, у нас 70 TB данных в S3 Standard без версионирования.
Это примерно, 1600$.

Вот примерная тарификация:
Первые 50 ТБ в месяц - 0,0245 USD за 1 ГБ
Последующие 450 ТБ в месяц - 0,0235 USD за 1 ГБ
Свыше 500 ТБ в месяц - 0,0225 USD за 1 ГБ

Многие скажут, всего лишь 1600 баксов, а что если я скажу что можно сэкономить в несколько раз?

Тогда мы просто создаем правила для перемещения lifecycle, которые будут переносить ваши файлы в холодное хранилище.

Вот пример несколько архивных Storage class'ов для холодного хранения данных, которые могут потребоваться раз в квартал/год и тд c разным временем доступности от миллисекундной до 12 часов. Более подробно можете почитать на сайте AWS в ценообразовании.
S3 Glacier Instant Retrieval - 0,005 USD за 1 ГБ
S3 Glacier Flexible Retrieval 0,00405 USD за 1 ГБ
S3 Glacier Deep Archive - 0,0018 USD за 1 ГБ

Итого:
Настроив одно правило перехода данных старше 90 дней в холодное хранилище S3 Glacier Instant Retrieval мы сможем понизить счет до 350$.
Получается 1600$ -> 350$. Экономия ~1250$

Можно конечно еще больше заморочиться и настроить несколько правил для перехода данных спустя 180 дней в Deep Archive и так далее, но это уже у кого больше 400 ТБ данных мне кажется будет играть значительную роль. Важно еще учесть что файлы должны быть больше чем 128 КВ, так как перенос более мелких файлов может быть стоить гораздо больше чем держать их в Standart Class. (это тоже можно настроить и переносить только те что больше чем 128 КВ)

!!!Дисклеймер Осторожно пост может содержать осуждение других людей!
Пост можно читать без скрытых фрагментов.
Приятного прочтения!

Знаете я перестал понимать логику у некоторых людей в некоторых действиях, касающиеся карьеры.
Представим что есть у нас специалист, у него зарплата x (на 2024 год), он хочет получить больше денег, возможно хочет даже получить работу в валюте, так как считается что работа в валюте престижнее. Человек выходит на рынок и требует x*1,4, но на самом деле хочет x2-2,5. (Для справки зарплата x - примерна равна моей зарплате в 2021-22 году, когда у меня было 2 года опыта) )

Пошли собеседования, специалисту предложили оффер с зарплатой x*1,9, отказывается, дали еще один оффер x2,2-2,3 отказ, еще один такой же, отказ. Ставим поиск на паузу, после снова получаем x*2,3-2,4, отказ. Идет время прошло уже полгода, получаем оффер в валюте и релокацией x2,4-2,5, отказ. Получаем оффер в валюте без релокации - отказ. Но почему?
Это были реально хорошие места (НЕ СБЕР И ИННОТЕХ), а крупные хорошие игроки рынка!!!

Я так же не понимаю. Во-первых, я не понимаю почему нельзя принять любой из этих офферов и заработать больше денег в моменте, а в случае чего уйти из места куда пришел спустя 3 месяца, если не понравится, так как офферы получаем легко и нужны деньги. Так же я не понимаю зачем занижать изначальные свои амбиции и если тянешь. Если скажут что много, то просто можно переспросить диапозон и тебе предложат прособеседоваться на меньшие. Не понимаю почему многие этого боятся.
Во-вторых, почему мы продолжаем сидеть на текущей зарплате? Таких примеров очень много кто сидит и не имеет какой-то своей инициативы посмотрите на тех же сотрудников СБЕРА. Но уйдешь, то получишь две зарплаты за 2 месяца своей текущей работы, уволят, за месяц найдешь новое место, но такое наверное тяжело представить когда на поиске специалиста тратят минимум по 3 месяца и тысячи человеко-часов.

Но может здесь что-то другое, может специалиста ценят на текущем месте работы? Нет, пересмотр через ассесменты, техлиду по словам специалиста пофигу, за год повысили зарплату на 6%, вопрос возникает один зачем это терпеть? Непонятно.

Но допустим приняли мы окончательное решение точно валим, спустя n месяцев поисков(12 МЕСЯЦЕВ!!!!!). Куда собираемся? В компании куда был оффер и не согласились — не позовут, в другие - окей. НО мы уже разочаровались в поиске, считаем что рынок мертв. Решил подкинуть вакансию, ответ: Туда ходил, не сделал их тестовое, потому что не было времени!!!! Был занят. КОГДА Я ЧИТАЛ ФИДБЭК РЕКРУТЕРА И ИХ ЖЕЛАНИЯ КАНДИДАТА, я был в шоке, что они его до сих пор ждут!!! ПОДУМАЛ Я НУ НЕ МОЖЕТ БЫТЬ ТАК ЧТО ЖДУТ НЕДЕЛЯМИ!!
Я решил сходить туда и узнать что за тестовое и актуальна ли вообще вакансия, так как прошел МЕСЯЦ! P.S. Тестовое есть в группе.
P.S.
Открыв тестовое я понял, ДА ЭТО НЕ ТЕСТОВОЕ ДАЖЕ, там задание на 20 минут!!! ДУМАЮ МОЖНО ДАЖЕ БЫСТРЕЕ СДЕЛАТЬ!!! МИНУТ за 5!!!! А ОНИ ЗАКЛАДЫВАЮТ НА НЕГО 2-4 ДНЯ!!!! ПО СЛОВАМ РЕКРУТЕРА!!!! А ВИЛКА ТАМ ПОД 500 000 НА РУКИ. Я В ШОКЕ!!!! Неужели нельзя потратить 20 минут своего времени чтобы написать пару строчек на python'е? У меня прошлые тестовые были больше и я тратил на них от 2 до 4 ЧАСОВ!!!

Я считаю что если вы выходите на рынок с реальными амбициями найти работу, зная что сейчас на рынке специалистам платят x2 от вашей текущей зарплаты можно забить на вашу работу и даже если сократят, уволят, вы получите 2-4 оклада при увольнении и отпускные, а на новой работе получите две зарплаты за месяц!!! ПОТРАТИТЬ 20 МИНУТ ВМЕСТО РАБОТЫ ЗВУЧИТ РЕАЛЬНО КЛАССНО НЕ ПРАВДА ЛИ?

Я не знаю что тут добавить, надеюсь кому то этот текст понравился и я жду в комментариях, где я не прав

Ладно, реально стало сложно искать работу

Причина отказа:
Лайкнул на Twinby и не написал.

Sponsored by: Get loved

Так что я должен убрать из Linkedin чтобы мне перестали писать такое?


Вітаю!
Наші партнери в пошуках Data Engineer.
- це швидкозростаюча -компанія, що прагне створити найкраще програмне забезпечення для партнерського маркетингу. Яка вже має тисячі користувачів та обробляє мільйони запитів щодня.

Детальніше тут:


Обговоримо?


Мне уже второй раз пишут с этой вакансией и начинают с текста, который я не понимаю. Это прикол какой-то? А когда предлагаю пойти созвонитьcя, то молчат. Дело во мне или в чем?

Пробую в этот раз перейти на русский.

P.S. Разрешены только нейтральные комментарии. GIF'ки будут удалены

Я не мог пройти мимо и никто не сказал сколько зарабатывает 😢

Продолжение.

Видимо было корректно перейти на русский язык, так как они хотя бы начали отвечать, но все равно ничего непонятно. Честно, что первый раз, что второй является неуважением к кандидату.

Вітаю)
так, дякую що повернулися.

Чи маєте резюме щоб поділитися, будь ласка.


Вот это вообще непонятно
Дякую за ваше резюме, передаю хайринг команді.
В разу позитивного рішення повернуся до вас протягом тижня.

Гарного дня!


Понял что надо быть ласковым.
P.S. Разрешены только нейтральные комментарии.

Не, если я раньше понимал что нужно быть ласковым, то сейчас просто 0 понимание. Это Oффер или что?

вітаю.
Ще раз дякую за ваш час та спілкування.

Проте, компанія зараз не готова запропонувати рухатися далі.

Та буду рада залишатися на звʼязку.

На такое сообщение я отправил ответ:

Компания связывается со мной второй раз, хотел бы узнать почему после процесса скрининга отказ.
Навыки отличные, опыт в DE и проектировании архитектуры под ML имеется.

Ответа не последовало.