🔥 Вывод


Утопии данных не существует, не существует мифической зрелой организации, в которой хранилище данных было бы идеальным, и всегда будут возникать проблемы с данными. Но мы, инженеры данных, имеем возможность и несём ответственность за устранение неполадок, создание отличного хранилища данных и обеспечение доступности данных для компании.

Напомню, что рассмотрели:

1. Понять суть бизнеса

2. Сделать данные удобными для использования с помощью правильной модели данных

3. Хорошие входные данные необходимы для хорошего хранилища данных

4. Определить источник истины (SOT) и проследить его использование

5. Держать заинтересованные стороны в курсе событий для достижения большего эффекта

6. Следить за "красными флагами" на уровне организации 🚩

В следующий раз, когда ты будешь создавать/совершенствовать хранилище данных, используй приведённые выше концепции в качестве отправной точки для создания хранилища данных, которое будет работать без сбоев и с удовольствием. 🚀

⏩Как объяснить 5-тилетней девочке работу DDL под капотом:

Представь, что ты построила из лего большую замечательную коробку для хранения своих игрушек. Эта коробка упорядочивает твои игрушки: куклы в одном углу, машинки в другом, кубики в третьем и так далее. В SQL (языке запросов для баз данных) такие "коробочки" называются таблицами.


Теперь, чтобы что-то изменить в конструкции этой коробки, например, добавить еще один отсек или разделитель, тебе нужно использовать специальные блоки и инструменты. В мире баз данных это называется DDL, что означает "язык описания данных".


Давай разберемся, как работает DDL:


1️⃣ Создание новой "коробочки" (таблицы): Это как если бы ты взяла лего и построила совершенно новую коробку для других игрушек. В SQL ты бы написала команду "CREATE TABLE", чтобы создать новую таблицу.

2️⃣ Добавление или удаление отсеков (столбцов) в "коробочке": Если ты захочешь разделить один из углов на меньшие части, чтобы там можно было хранить, скажем, твои мелкие фигурки, это как добавление новых столбцов в таблицу. В SQL ты бы использовала команду "ALTER TABLE ADD COLUMN" или "ALTER TABLE DROP COLUMN" для удаления столбца.

3️⃣ Изменение разделителей (изменение структуры столбцов): Если ты решишь, что отделение для машинок должно быть больше, чтобы поместить еще больше машинок, это как изменение свойств столбца в таблице. В SQL для этого тоже используется команда "ALTER TABLE".

4️⃣ Удаление "коробочки": Если решила, что больше не нужна тебе эта коробка, ты просто разбираешь ее на части и убираешь блоки обратно в коробку с лего. В SQL для удаления таблицы есть команда "DROP TABLE".


Каждое действие с DDL, это как специальное волшебное заклинание, которое изменяет структуру твоей "коробочки" точно и аккуратно, точно как тебе нужно. Все эти изменения помогают лучше упорядочивать информацию (твои игрушки), чтобы ты могла легко найти то, что тебе нужно.