развитие импортозамещающего решения infovizion. бизнес-аналитика на платформе clickhouse
----------------
from: #infovizion_youtube | by: infovizion youtube
date: 2022-10-03 | link
tags: #www_youtube_com
Bi News

По заголовку понятно что за вебинар, рекомендую к просмотру!

https://www.youtube.com/watch?v=CzgjfAZbcO8&

Подписаться на канал

Привет!
На днях выйдет:

- как развернуть у себя posgresql или mssql с тестовой базой AdventureWorks в докере за 10 минут
- qlik. универсальная функция для заливки таблиц из qlik скрипта напрямую в БД, с разделением на потоки (например не заливать за 1 раз 1млн строк, а сделать 10 раз по 100к строк) ...

P.s. некоторые читатели уже получили инсайдерскую статью )))

Интересно, анонсированный недавно синтаксис в сет-анализе, работает в том числе в QS May 2022 SR4. Может кто проверить февраль 2022 ?

UPD. QS 2022 feb - такое не работает.

#qlik

Подписаться на канал

​Привет!
Написал краткую инструкцию по запуску в docker-контейнерах баз данных : postresql или mssql с тестовыми данными из БД AdventureWorks

Читаем

Подписаться на канал

✅ Написал второй вариант отправки сообщений в telegram из Qlik Sense с помощью REST, прочитать можно тут

#qliklib #qlik

Подписаться на канал

❗️ В 21:00 начинаем вебинар по вопросам отсрочки и аккредитации ИТ-компаний

На вопросы отрасли ответит министр Максут Шадаев. Трансляция будет доступна в нашем телеграм-канале и по ссылке. Подключайтесь!

Самые важные заявления продублируем в текстовом виде.

@mintsifry

SQL INSERT INTO ....

Ух... сложно было победить PostgreSQL, с MSSQL намного проще

P.S. Скоро выложу исходники

#qlik

Привет!
✅ Дописал функцию выгрузки данных из Qlik в PostgreSQL, для MS SQL - в процессе..

Читаем

#qlik #qliklib

Подписаться на канал

Секреты создания каталога данных от Тинькофф. Дмитрий Пичугин. От 5.10.2022

Смотрим тут

P.S. еще видео про Data Detective (open source, python):

Под капотом каталога данных — Анастасия Ожигина, Тинькофф
https://www.youtube.com/watch?v=puH3uBNoDXk

Как мы в Тинькофф Data Catalog создавали / Дмитрий Пичугин, Роман Митасов (Тинькофф)
https://www.youtube.com/watch?v=jMATH538qsA

А еще ссылка на git репозиторий

Подписаться на канал

Всем привет!
Если вам совсем нечем заняться, то что нужно сделать? Правильно! Нужно изучить что-то новое, тем более сегодня я нашёл на мой взгляд отличный видео-урок по Python, с громким названием:

Учим python за 7 часов! Уроки Python Полный курс обучения программированию на python с нуля

Забираем в копилку.

Видео можно смотреть на youtube, там же в описании есть доп.информация к видео, а вот навигация:
00:00 Вступление в курс уроков по python
00:45 Установка python, первая программа
10:47 Переменные
20:56 Типы данных в python
30:02 Условные операторы if, elif, else
39:03 Условные операторы 2
45:53 Условные операторы Практика
56:44 Цикл while
1:12:37 Цикл for
1:21:23 Цикл for, цикл в цикле
1:29:34 Списки, тип данных list
1:41:29 Списки, методы типа данных list
1:53:21 Кортежи, тип данных tuple
2:08:42 Практика python, модуль os, функция walk
2:21:16 Функции def, определение и вызов
2:30:07 Функции def, параметры и аргументы
2:43:49 Функции переменное количество аргументов, параметр *args
2:56:28 Функции, область видимости переменных
3:08:49 Функции и структура кода
3:22:07 Словари, тип данных dict
3:37:22 Словари, методы dict
3:49:21 Чтение и запись файлов
4:05:29 Множества, тип данных set
4:22:30 Строки, экранированные символы
4:30:17 Строки, методы str
4:43:13 f-строка, форматирование строк
4:50:10 Обработка исключений, try, except
5:09:59 Менеджер контекста with as
5:16:19 Импорт модулей, if name == 'main''
5:34:58 Игра в кости на python tkinter
5:56:53 Декораторы
6:10:36 Генераторы списков, словарей, множеств
6:30:56 Выражение генератор
6:43:03 Функция генератор, оператор yield
6:51:51 lambda функция

#python

Подписаться на канал

Я тут подумал, вот я пишу про Qlik, пишу.. и иногда кажется что немного не то. У меня вопрос к читателям такой, про Qlik:

Какой функции вам не хватает или какую тему вам хотелось бы раскрыть более детально?

Напишите в комментариях, а я потом подготовлю ответ на ваш вопрос

Tableau Strategies: Solving Real, Practical Problems with Data Analytics
Авторы: Ann Jackson, Luke Stanke (2021)

Ответ на вопрос из комментариев:

- Гайд по установке и настройке Apache airflow с твоим пакетом qlikflow!

> ссылку уже кинул в комментариях, но я скоро буду дорабатывать этот модуль, не факт что он будет в пакете qlikflow,
есть над чем там поработать, и как раз мне это будет нужно для работы.
Да и ко всему, Airflow уже версии 2.4.4 вышел.

Пока все карты открывать не буду, но всё в процессе...

Подписаться на канал

Ответ на вопрос из комментариев:

- Качественный гайдлайн по css

> ну например:
раз два три
и закрепить

+ один из моих любимых сайтов (там не только css): https://www.w3schools.com/cssref/default.asp

Подписаться на канал

Ответ на вопрос из комментариев:

- Ещё почитал бы АПИ. Какие-то кейсы. Что это такое и какой функционал может решать на примитивном уровне (какие-то частые задачи).

> у меня например есть скрипт(python) выгрузки всех мастер-мер и измерений из всех приложений и сохранение их в csv, скрипт работает ~5 секунд(для всего сервера), удобно смотреть где и какие формулы прописаны, можно выявлять проблемные участки...

+ скоро будем готовить некий "бэкап" модуль на python, который будет при запуске выгружать все скрипты и визуальную часть из всех приложений, складывать в гит-репозиторий и коммитить. Таким образом получаем авто-бэкап всего Qlik Sense слоя...

Можно поискать в github "qrspy", там описано очень много функций на python, адаптировать и дописать своё - не сложно...

Если нужно что-то конкретное - пишите, думаю могу запилить вам что-нибудь нужное ..

Подписаться на канал

Ответ на вопрос из комментариев:

- Мне не хватает инструкции как на виртуальной машине, разработчику развернуть клик сервер для экспериментов, чтобы не было заморочек с лицензией и можно было поэкспериментировать с расширениями, nprinting попробовать и пр.фичи.

> с этим проблема, раньше, до 2021 года QlikTech поддерживал Qlik Sense в кластере kubernetes, но сейчас он остался только у тех кто его купил
я сам иногда задаюсь этим же вопросом и даже пробовал через docker это сделать, но пока ни как. Надежд я не оставляю, и если получится - обязательно напишу

Подписаться на канал

Ответ на вопрос из комментариев:

Объединил вопросы в один:
- Я бы прочитал про правила формирования оптимизированной загрузки. Вроде общими словами есть инфа, но структуры нет вроде.
- Про оптимизацию, Вот хотелось бы подробностей) Ещё интересно оптимизации скрипта, Какие-то практики.
- Но ещё в интернете мало информации по ETL! Вот как вот взять описание, что бы было для людей написано - нигде нет

> а давайте просто проведём вебинар с вопросами/ответами

пишите в комментариях ваши кейсы, и на вебинаре обсудим вживую...
Дату и время напишу позже ...

Подписаться на канал

Ответ на вопрос из комментариев:

- Ещё интересно как сторить таблицу из модели в базу данных Оракл. Как раз буква L в слове EFL вопроса выше

> а зачем? ну можно написать(дописать то что я недавно выложил) функцию, какой в этом будет профит?
гораздо удобнее, как мне кажется будет сохранение в csv, а потом уже этот csv грузить в oracledb, нет?

Подписаться на канал