#linux #cli #chmod

Один из лучших курcов по BigData

Как соединить фактовую и SCD2-таблицу

https://www.startdataengineering.com/post/how-to-join-fact-scd2-tables/

Аналитические функции для SCD2

https://www.clearpeaks.com/analytic-functions-using-lag-for-scd-type-2/

Postgres.app — это полнофункциональная установка PostgreSQL, упакованная как стандартное приложение для Mac. Оно включает в себя всë, что нужно для начала работы, и даже включено популярное расширение PostGIS для геоданных.

Postgres.app имеет красивый пользовательский интерфейс и удобное меню. Нет необходимости прикасаться к командной строке, чтобы использовать еë, но, конечно же, включены все необходимые инструменты командной строки и заголовочные файлы для опытных пользователей.

#macos #apple #postgres #database #db #psql #postgis

Бесплатный курс по Docker

https://karpov.courses/docker

#docker

Возможности Heap Table в PostgreSQL

https://www.youtube.com/watch?v=s5f8U-fk-D8&list=PLp1ZRQgqjW_zWfGhZHpXsAEWp-zcpEO74&index=1

#postgres #database #db #psql

Песочница для ClicHhouse: https://fiddle.clickhouse.com/

Документация к ней: https://clickhouse.com/blog/clickhouse-fiddle-sql-playground

#clickhouse #db #sql #database

Чужой код⁠⁠

Разработчика спросили, почему программисты ненавидят работать с чужим кодом. Он долго думал, как донести до обычного пользователя всю суть пиздеца и решил привести небольшую аналогию:



Вот представь, что тебе доверили достроить за другим прорабом лабораторию на острове. Ты приходишь на объект, а там кроме недостроенного здания: огромный вентилятор (размером со здание), большой воздушный шар и комната набитая швабрами. Почесав голову, ты разбираешь этот хлам и доделываешь лабораторию. Сдаешь объект ученным, но через 5 минут они выбегают с криком: "УТЕЧКА ЯДОВИТОГО ГАЗА!!!".

- “Как так-то, блять! Должно же работать!” - в отчаянии кричишь ты и звонишь прошлому прорабу:
- Вася, у нас ядовитый газ потёк! В чем проблема?
- Не знаю, должно было все работать. Что-то в проекте менял?
- Немного, швабры вынес...
- Швабры потолок держали!
- Что??? Что, блять, извините???
- Говорю, швабры потолок держали. Над ними цистерны с газом были. Очень тяжелые, пришлось в комнату снизу швабры напихать.
- Ты хотя бы записку на двери повесил бы, что швабры для держания потолка! У нас тут ядовитый газ течет! Что нам делать?
- Включай вентилятор. Он сдует газ с острова.
- Я его, блять, демонтировал сразу же!
- Зачем?
- Зачем ты построил 120 тонный вентилятор? Ты не мог положить ящик блядских ПРОТИВОГАЗОВ?
- Ящик противогазов искать нужно, а вентилятор у меня с прошлого заказа оставался.
- Вася, я убрал твой вентилятор! Мы тут задыхаемся!
- Херли вы тогда там делаете? Садитесь на воздушный шар и уебывайте!

Типы таблиц в PostgreSQL

https://youtu.be/fU6mMDNdpxo

#postgres #database #db #psql

Почему Data Engineering считается привлекательной профессией.

Инжиниринг данных является важной частью конвейера обработки данных, поскольку он включает в себя проектирование, создание и обслуживание инфраструктуры, которая позволяет организациям превращать данные в идеи и информировать их о принятии решений. Инженеры данных работают с большими объемами сложных данных, следя за тем, чтобы они были точными, непротиворечивыми и пригодными для использования в различных целях.

Инжиниринг данных — это высокотехнологичная и сложная область, требующая сочетания навыков программирования, проектирования систем и опыта управления данными. Способность обрабатывать огромные объемы данных и превращать их в полезные идеи — очень востребованный навык в современном мире, управляемом данными.

Спрос на квалифицированных инженеров данных продолжает расти, что делает эту карьеру прибыльной и увлекательной. Работа дата-инженеров является неотъемлемой частью многих отраслей, включая финансы, здравоохранение и технологии, предоставляя возможность работать над интересными и эффективными проектами.

Data Engineering, безусловно, является сложной и полезной областью, которая предлагает отличные перспективы трудоустройства и возможность реально изменить мир.