DATABASE DESIGN – Telegram
DATABASE DESIGN
1.41K subscribers
2.09K photos
3 videos
5.31K links
Лучшие материалы по работе с хранилищами данных на русском и английском языке

Разместить рекламу: @tproger_sales_bot

Правила общения: https://tprg.ru/rules

Другие каналы: @tproger_channels

Другие наши проекты: https://tprg.ru/media
Download Telegram
Cloud-Based Analytics With SingleStoreDB

The advent of cloud computing has provided the means to develop a wide range of new products and services. We can build and run applications and perform analytics in the cloud without installing local software. This article will look at two examples of modern systems that can seamlessly integrate with SingleStoreDB for in-cloud analytics: Apache Spark™️ and MindsDB.

The notebook file used in this article is available on GitHub.

Read: https://db-engines.com/en/blog_post/98
Как заменить Qlik и PowerBI с минимальными потерями: Visiology+Loginom+PostgreSQL

"Что делать, когда ТОПовые BI-системы стали недоступны и перспективы работы с ними оказались сильно ограничены?". Эта дилемма встает сегодня перед многими компаниями. Меня часто спрашивают, можем ли мы взять и перенести уже наработанные практики на другие платформы, доступные в России на сегодняшний день? К счастью, ответ на этот вопрос положительный, и об одном из вариантов его решения я расскажу сегодня.


Читать: https://habr.com/ru/post/692876/
Backup and restore strategies for large databases on Amazon RDS for SQL Server

Read: https://aws.amazon.com/blogs/database/backup-and-restore-strategies-for-large-databases-on-amazon-rds-for-sql-server/
Ten years of DB-Engines.com

DB-Engines.com was launched ten year ago. Quite a few things have changed since then in our portal and in the DBMS industry.

Read: https://db-engines.com/en/blog_post/99
How the Atlas Search Team Empowers Engineers: Meet Nolan Lum

Read: https://www.mongodb.com/blog/post/how-atlas-search-team-empowers-engineers-meet-nolan-lum
Configure a performance testing framework for Amazon Aurora PostgreSQL

Read: https://aws.amazon.com/blogs/database/configure-a-performance-testing-framework-for-amazon-aurora-postgresql/
Стадо русских слонов

Тема импортозамещения всё более и более актуальна и уже даже можно сравнивать некоторые продукты между собой. Сегодня хотелось бы собрать в один строй и взглянуть на имеющиеся решения по СУБД семейства PostgreSQL. Кому интересно узнать про "русские" PostgreSQL - добро пожаловать под кат.
..

Читать: https://habr.com/ru/post/693908/
Adding real-time machine learning predictions to Amazon Aurora: Part 1

Read: https://aws.amazon.com/blogs/database/part-1-adding-real-time-machine-learning-predictions-to-amazon-aurora/
Build resilient applications with Amazon DynamoDB global tables: Part 1

Read: https://aws.amazon.com/blogs/database/part-1-build-resilient-applications-with-amazon-dynamodb-global-tables/
Build resilient applications with Amazon DynamoDB global tables: Part 2

Read: https://aws.amazon.com/blogs/database/part-2-build-resilient-applications-with-amazon-dynamodb-global-tables/
Build resilient applications with Amazon DynamoDB global tables: Part 3

Read: https://aws.amazon.com/blogs/database/part-3-build-resilient-applications-with-amazon-dynamodb-global-tables/
Build resilient applications with Amazon DynamoDB global tables: Part 4

Read: https://aws.amazon.com/blogs/database/part-4-build-resilient-applications-with-amazon-dynamodb-global-tables/
Introducing Pay-As-You-Go MongoDB Atlas on Azure Marketplace

Read: https://www.mongodb.com/blog/post/introducing-pay-as-you-go-atlas-azure-marketplace
How to Model Data in Document Databases for Read and Write Performance

Read: https://www.mongodb.com/blog/post/how-model-data-document-databases-read-write-performance
Как мы используем Greenplum в платформе данных Тинькофф

Меня зовут Дмитрий Немчин, я руковожу отделом, который отвечает за движки хранения и обработки данных в платформе данных Тинькофф. Несколько лет назад мы поняли, что продукты, на которых работало хранилище, перестали нас устраивать. Объемы росли, понадобилось масштабируемое решение. В этом тексте я расскажу, как мы пришли к Greenplum в качестве ядра хранилища данных и как используем его.


Читать: https://habr.com/ru/post/694652/
Собираем мобильный и энергоэффективный NAS

Есть идея построить NAS. Основную функцию которого можно описать как "черный ящик" - собрать все свои данные, собранные годами и разместить в относительно компактном устройстве. Предлагаю ознакомиться с идеей, которая, возможно найдёт отклик у сообщества.


Читать: https://habr.com/ru/post/694684/
Как мы делали МЦОД для самого холодного региона России

Привет, Хабр! Меня зовут Федор Клименко, я СЕО компании GreenMDC – мы занимаемся разработкой и производством модульных дата-центров. И иногда доставляем и собираем наши МЦОДы в экзотических регионах. Например, в марте запустили МЦОД в Якутске, где зимой столбик термометра опускается до -60 градусов. Сегодня расскажу о том, как мы везли дата-центр за 9 000 км и собирали его при -30, сколько слоев одежды было на монтажниках, как мы нашли работающий при такой погоде кран и избежали пайки фреонопроводов на морозе.

Предыстория

Для начала скажу, что хоть и являюсь гендиром компании, но в душе остаюсь инженером и люблю путешествовать. А потому часто работаю «в полях» и лично принимаю участие в монтаже и запуске МЦОДов, особенно, если проект интересный – такой как в Якутске.

Этот модульный ЦОД мы разработали по заказу «Республиканского центра информационных технологий» Республики Саха (Якутия) и сделали это в рамках проекта по цифровизации региональных госуслуг. Соответственно, МЦОД хранит и обрабатывает информацию, которая касается таких сфер жизни, как здравоохранение, образование, служба МЧС, банковские услуги, сельское хозяйство и др. Здесь, например, разместился портал госуслуг, мониторинг обстановки при ЧС, в том числе лесных пожаров, колл-центр 122, интеллектуальная транспортная система региона и единая система электронного документооборота.


Читать: https://habr.com/ru/post/694694/
👍1
Как оценить размер данных: краткий гайд

Оценка размера данных — это относительно простой навык, который одновременно: а) легко никогда не освоить; б) весьма полезен после того, как вы им овладели. Он может пригодиться при проектировании систем, в отладке сложной проблемы распределенной системы и, разумеется, при обсуждении архитектурных задач на собеседовании.

Автор Уилл Ларсон*, технический директор компании Calm, в своей статье признается, что никогда не был особенно хорош в «оценке». Поэтому он решил потратить несколько часов на развитие этого навыка, что со временем вылилось в текстовые заметки на эту тему. Под катом автор делится полезными правилами для оценки требуемого дискового пространства, а затем собирает фрагмент кода на SQLite3, чтобы продемонстрировать, как можно проверить результаты вашей «оценки».

*Обращаем ваше внимание, что позиция автора не всегда может совпадать с мнением МойОфис.


Читать: https://habr.com/ru/post/694728/
Импорт данных с MSSQL на PostgreSQL

В наличии была база данных MSSQL (с которой забираем данные), а также PostgreSQL Pro Enterprise 10.3, развернутая на CentOS 7 (на которую импортируем). Ну и полное отсутствие интернета.


Читать: https://habr.com/ru/post/694766/