DATABASE DESIGN – Telegram
DATABASE DESIGN
1.41K subscribers
2.08K photos
3 videos
5.32K links
Лучшие материалы по работе с хранилищами данных на русском и английском языке

Разместить рекламу: @tproger_sales_bot

Правила общения: https://tprg.ru/rules

Другие каналы: @tproger_channels

Другие наши проекты: https://tprg.ru/media
Download Telegram
How Shinsegae International enhances customer experience and prevents counterfeiting with Amazon QLDB

Read: https://aws.amazon.com/blogs/database/how-shinsegae-international-enhances-customer-experience-and-prevents-counterfeiting-with-amazon-qldb/
Introducing the Ability to Independently Scale Analytics Node Tiers for MongoDB Atlas

Read: https://www.mongodb.com/blog/post/introducing-ability-independently-scale-atlas-analytics-node-tiers
Great mistake of data.

Wanted to train data (images) from kaggle and make model for dog 🐶 breed identification. So imported data on google drive than.

file was zip so try to unzip from colab. But it was stopping at 5000 instance was not showing all folders and 40 thous...

Read: https://vinayaks.hashnode.dev/great-mistake-of-data
Navigating the Future of Data Sovereignty With MongoDB

Read: https://www.mongodb.com/blog/post/navigating-future-data-sovereignty-mongodb
What I’m looking forward to at Oracle CloudWorld

There are only 77 days to go until Oracle CloudWorld in Las Vegas, the largest gathering of Oracle customers, partners, developers, and technology enthusiasts of the year! That’s right, folks; we are finally back in person.

Read: https://blogs.oracle.com/database/post/ocw-database-what-im-looking-forward-to
MongoDB schema design best practices

MongoDB has been a popular database among all NoSQL databases used these days for storing big data. Unlike relational databases, it may not provide techniques for defining good relationships but it provides flexibility in defining the schema of our c...

Read: https://blog.commclassroom.org/mongodb-schema-design-best-practices
What is Schema, 3 schema architecture and data independence in DBMS?

What you will get from this blog post ?
If you are struggling to understand what is a schema, 3 schema architecture ( 3 layers of data abstraction), and data independence, then you are at the right place because after this blog post you will be clear...

Read: https://yuvraj01.hashnode.dev/what-is-schema-3-schema-architecture-and-data-independence-in-dbms
SDS vs традиционные СХД: почему мы редко применяем программно-определяемые хранилища?

Хранение данных — непростая задача, особенно когда к ним нужно обеспечить бесперебойный доступ. И сегодня мне хотелось бы поговорить о гиперконвергентных системах и связанных с ними программно-определяемых хранилищах, позволяющих использовать накопители в стандартных серверах х86 из того же кластера, что и вычислительные узлы. Чтобы не разводить холивара, сразу скажу, что в этом посте не будет глубокого технического разбора той или иной системы. Мы поговорим об архитектуре и особенностях ее применения в ЦОДе.

Итак, используем ли мы гиперконвергенцию в ЦОД Oxygen? Да, конечно. Будем ли мы рекомендовать ее для широкого спектра задач? Нет, не будем. Почему — подробнее разбираемся под катом.
Узнать, кто победил в неравном бою

Читать: https://habr.com/ru/post/680782/
Аналитические дашборды не помогают принимать решения, или Где на самом деле брать инсайты из данных

Привет! Меня зовут Ольга Татаринова, я руковожу отделом аналитики в Agima.ai. Один из самых частых запросов, с которым к нам приходят клиенты, такой: «Сделайте нам дашборд c бизнес-KPI. Мы хотим найти какие-то инсайты в наших данных, чтобы понять точки роста». Проблема с такой постановкой задачи в том, что дашборды хорошо помогают следить за бизнес-kpi. Но напрямую мешают находить инсайты в данных.


Читать: https://habr.com/ru/post/680866/
MariaDB Java Connector 3.0.7 now available

Read: https://mariadb.com/?p=32378
Top 5 Google Cloud Database Services - Part 1 (SQL)

Google Cloud Platform offers various cloud database tools and services based on what a company needs to accomplish with them. Thus, the different tools have different purposes.
In this article, we’ll be looking at the top 5 Google Cloud Database Ser...

Read: https://arctype.hashnode.dev/top-5-google-cloud-database-services-part-1-sql
Top 5 websites where obtain DataSets for your Data Science projects

In the life cycle of any Data science project, it begins by understanding the requirements and objectives of the business problem, in this phase, it is essential to have knowledge about the problem to be solved, ask the right questions and define the...

Read: https://dofdata.hashnode.dev/top-5-websites-where-obtain-datasets-for-your-data-science-projects
Migrate your Sybase ASE database to Amazon RDS for SQL Server in near-real time

Read: https://aws.amazon.com/blogs/database/migrate-your-sybase-ase-database-to-amazon-rds-for-sql-server-in-near-real-time/
ETL, ELT and Data Pipelines, Data Integration

ETL has historically been used for batch workloads on a large scale. They're being used for real-time streaming as well.
popular ETL tools: IBM Infosphere information server, AWS Glue, Improvado, Skyvia, Hevo, Informatica.
ETL ( Extract Load Transfo...

Read: https://pooj124.hashnode.dev/etl-elt-and-data-pipelines-data-integration
Рецепт готовки Apache Kafka: как создавался Data Lake на 80 Тb

Kafka позволит вам грамотно организовать работу с большим массивом данных, но в процессе может подкинуть проблем. Иногда придется устроить танцы с бубном, чтобы программа продолжила работать, а не рухнула в момент запуска.

О не очень стандартном использовании Apache Kafka и лайфхаках по созданию Data Lake на его основе нам рассказал Михаил Кобик, директор департамента инфраструктурных решений в SMART Technologies SOFT. В 2017 году перед командой Михаила встала непростая задачка - создать хранилище данных на 80 Tb. В распоряжении был спек, примерные нагрузки и абсолютное непонимание, что с этим делать со стороны заказчика.


Читать: https://habr.com/ru/post/681070/
Легально ли брать контент из базы данных?

Далеко не все компании и пользователи задумываются о легальности использования чужой базы данных без согласия его владельца. А зря, это может привести к штрафам и судебным разбирательствам. Давайте попробуем разобраться, когда брать информацию из базы данных легально, а когда это является нарушением.


Читать: https://habr.com/ru/post/681090/
Creating Polymorphic Relationships using Node.js and Sequelize

In my last article, I explained what are polymorphic relationships. This blogs is a continuation of the same where I will demonstrate how to create a polymorphic relationship in node.js using the popular ORM sequelize.
Sequelize is one of the most po...

Read: https://blogs.aayushkurup.dev/creating-polymorphic-relationships
Everything you can learn about Data Analytics

In the last few years, Data analysis has become one of the most demanded skills in the job market. Let's discuss the several applications of data analytics, and the rate of skill development one has to deal with to have a better understanding and car...

Read: https://saffronclouds.hashnode.dev/everything-you-can-learn-about-data-analytics
SQL Server & Powershell: быстро, просто, параллельно. И больше не нужно выбирать 2 из 3-х

В настоящей статье описывается процесс параллельного выполнения операций над объектами базы данных Microsoft SQL Server (таблицы, индексы и т.д.) с использованием инструментария Powershell. Наиболее часто используемый сценарий - обслуживание таблиц в базе, но возможно исполнение любых ваших запросов в параллельном режиме. Если для вас это интересно, то...
...добро пожаловать

Читать: https://habr.com/ru/post/681166/
👍1
Data Engineering Lifecycle

Architecting the Data Platform

Layers of a data platform architecture, A layer represents functional components that perform a specific set of tasks in the data

Data Ingestion or Data Collection layer
Data Storage and Integration Layer
Data Proces...

Read: https://pooj124.hashnode.dev/data-engineering-lifecycle
Case Study: Danny's Dinner

Introduction
Danny seriously loves Japanese food so, at the beginning of 2021, he decides to embark upon a risky venture and opens up a cute little restaurant that sells his 3 favourite foods: sushi, curry and ramen.
Danny’s Diner is in need of your ...

Read: https://itsadityagupta.hashnode.dev/case-study-dannys-dinner