Есть специалисты по dwh?
Развейте мои сомнения.

Mssql, таблица на 240гиг, 1,3 млрд строк, одно из полей с типом int(4), в этом поле максимум 2 значения 1 или 0.

Собственно, как я предполагаю, нужно использовать тип данных для такого поля - bit, что в свою очередь уменьшит размер данных, по этому полю раз в 30. Верно?

Не прошло и пары недель, как 1Сники выложили некоторые данные, можно смотреть

Видео курс(2021) по clickhouse, взято из открытых источников. Скачиваем пока не удалили.

#курс #clickhouse

Я тут подумал, канал будет немного переформатирован в более внятное направление - больших данных и около этой тематики.

Привет! Я тут вам шпаргалку принёс, собрал с разных источников ссылки на различные чаты по базам данных, смотрим, добавляем в избранное, лайкаем, дизлайкаем :)
З.Ы. Если есть что добавить - пишите в личку, скорректирую.

# 📚 Базы Данных
Большая подборка telegram-чатов по базам данных
Формат: [ссылка на чат] (количество участников на дату - 2022-07-17) - описание
Сортировка внутри разделов - по количеству участников, по-убыванию.

# 📕 Общие чаты:
@dba_ru (3434) — Общаемся и обсуждаем темы, посвященные DBA, PostgreSQL, Redis, MongoDB, MySQL, neo4j, riak и т.д.
https://news.1rj.ru/str/joinchat/VxiIJbNfZWNy3k-h (3023) - Обучение SQL
@dbgeeks (798) - Чат про базы данных, их устройство и приемы работы с ними. Разрешаются любые адеватные дискуссии в рамках тематики чата.
@dbmsdev (158) — Это чат о разработке СУБД - реляционных, распределенных, и вообще каких угодно. Здесь обсуждаются пейперы, архитектура, доклады, и т.д. Если у вас вопросы по использованию какой-то СУБД, это не сюда.
@dev_dbms_ru (33) — Чат разработчиков СУБД. Рассуждаем о подходах к организации систем управления базами данных.

# 📔 Узконаправленные:
- MongoDB:
@mongodb_ru (2556) - Чат про Mongo DB
@MongoDBRussian (304) — Чат про MongoDB

- Mysql/MariaDB:
@mysql_db (2569) — Чат про MySQL
@mysql_en (1643) — Чат про MySQL - english
@ru_mysql (1229) - По-русски о MySQL/Percona/MariaDB

- PostgreSQL:
@pgsql (8548) — Чат русскоязычного сообщества PostgreSQL, здесь мы обсуждаем технические вопросы
@PostgreSQL_1C_Linux (2232) — Чат про особенности работы PostgreSQL и 1С на Linux
@pg_sql (2081) — Чат про PostgreSQL - english
@postgreschat (1055) — Чат про PostgreSQL - english
@postgis (493) — Обсуждения PostGIS (поддержка географических объектов в PostgreSQL) russian + english
@pgcodekeeper (112) — Чат поддержки проекта https://pgcodekeeper.org, утилита для postgresql

- MSSQL:
@sqlcom (3491) — Чат про Microsoft SQL Server
@sql_ninja (2204) — Флудильня SqlCom
@mssql_ru (320) - Чат про MS SQL

- Clickhouse:
@clickhouse_ru (6599) — Чат про СУБД от Яндекс ClickHouse

- Yandex database:
@yandexdatabase_ru (689) — Чат по Yandex Database

- Tarantool:
@tarantoolru (1437) — Русский чат про Tarantool

- Orace:
@oracle_ru (1139) — Чат про Oracle
@oracle_dba_ru (714) - Вы можете добавлять свои знания на сайтах: oracle-dba.ru plsql.ru . Лучше потратить какое-то количество времени, чтобы записать успешный опыт, чем потом повторно воспроизводить по памяти. Друг познается в БД

- ScyllaDB
@ru_scylladb (203) — Чат про ScyllaDB russian + english

- Teradata
@teradata_ru (30) — Чат по Терадате. Разговоры о Терадате и все такое.

- Elastic Search:
@elasticsearch_ru (2828) - Чат про Elasctic Search. Обсуждение, грабли, размер хипа
@elk_ru (203) - Обсуждаем вопросы, посвященные Elastic / Logstash / Kibana и всей экосистеме. Обмениваемся идеями, новостями и решаем проблемы.



# 📰 Прочее

@victoriametrics_ru1 (922) - Обсуждаем VictoriaMetrics (https://victoriametrics.com)
@ponyorm (380) — Чат про Pony ORM
@reindexer (191) - Чат про reindexer (NoSQL in-memory db)
@access_chat (214) - Чат про MS Access


#чаты
Автор: @chernovdev @Chernov

Awesome Database Tools

Курируемый проект по утилитам для Администраторов БД, ДевОпсов, разработчиков ... смотрим

#awesome #dbtools

#qliksense #whatsnew
Qlik Sense August 2022:
- what's new
- dataviz changes

#qvf #qliksense

марафон qlik sense dataroad.kz: день 1, что такое qlik sense?
----------------
from: #qlik_cis | by: qlik cis
date: 2022-07-18 | link
tags: #www_youtube_com
Bi News

Утилита для тюнинга конфигурации PostgreSQL, в зависимости от типа использования БД, в закладки

#postgresql #tool #tools

Я тут ковырнул внутренности QS 2022 august, и нашёл 5 новых функций, которых нет в QS 2022 may:

Судя по всему, эти две функции для работы с гиперкубом:
- HCNoRows
- HCValue
А эти для работы с JSON:
- IsJson
- JsonGet
- JsonSet

https://help.qlik.com/ru-RU/cloud-services/Subsystems/Hub/Content/Sense_Hub/ChartLevelScripting/chart-level-noscripting.htm

#qliksense
@chernovdev

марафон qlik sense dataroad.kz: день 2, понимаем виды данных
----------------
from: #qlik_cis | by: qlik cis
date: 2022-07-19 | link
tags: #www_youtube_com
Bi News

марафон qlik sense dataroad.kz: день 3, зачем нужны master items и как их создавать
----------------
from: #qlik_cis | by: qlik cis
date: 2022-07-20 | link
tags: #www_youtube_com
Bi News

Через 30 минут начинается вебинар от Яндекса - ссылка

Для анализа данных в облаке не достаточно СУБД и средств визуализации — нужен ещё и понятный инструмент, который автоматизирует сбор, подготовку и обработку данных. На вебинаре мы расскажем о таком сервисе — Apache Airflow.

Эксперты Yandex Cloud обсудят:

- как спроектировать инфраструктуру для Apache Airflow;
- как собирать данные в облако для анализа и визуализации на основе Python и Spark;
- как автоматизировать обогащение данных и подготовку витрин в аналитическом хранилище на основе PostgreSQL, Greenplum и Clickhouse;
- как обеспечивать отказоустойчивость и непрерывность конвейеров данных.

Вебинар будет интересен и тем, кто только собирается попробовать аналитику данных в облаке, и тем, кто строит такую платформу или хочет масштабировать уже работающую среду. CDO и CTO смогут разобраться, чем инструмент будет полезен бизнесу, а дата-инженеры — получить практические рекомендации для его использования.

Полезные ссылки:
Репозиторий с примерами из вебинара
https://www.clck.ru/sKSn4
Образ Apache Airflowв Marketplace
https://www.clck.ru/sKSmC
Провайдеры Yandex Cloud для Apache Airflow
https://www.clck.ru/sKSmo
Запись митапаDataOps Community Meetup
https://www.clck.ru/sGtpE
Запись митапа Greenplum Community Meetup
https://www.clck.ru/sGtpd
Другие вебинары Yandex Cloud Data Platform
https://www.clck.ru/sKSYA
Спросить в комьюнити - чат Yandex Cloud Data Platform
https://www.clck.ru/arTSm
Следить за новостями - чат Yandex Cloud Data Platform
https://www.clck.ru/sKS2Q

SQL for Beginners:
Learn Sql Programming Very Easy

ISBN: 978-1-4842-1955-3 | info

#sql #ebook #book

Data Warehouse Systems - Design and Implementation. Second Edition (revision 2022)

Alejandro Vaisman, Esteban Zimányi

#книги #dwh #book

Database System Concepts (2020)
Автор: Abraham SilberschatzHenry F. KorthS. Sudarshan
Количество страниц: 1373

Книга представляет фундаментальные концепции управления базами данных в интуитивно понятной форме, направленной на то, чтобы позволить учащимся как можно быстрее начать работать с базами данных. Знакомство с базовыми структурами данных, организацией компьютера и языком программирования высокого уровня являются единственными необходимыми условиями. Освещаются важные теоретические результаты, теория и доказательства в книге практически не обсуждаются. Вместо доказательств используются цифры и примеры, чтобы объяснить, почему результат верен

Скачать книгу