❗️ В 21:00 начинаем вебинар по вопросам отсрочки и аккредитации ИТ-компаний

На вопросы отрасли ответит министр Максут Шадаев. Трансляция будет доступна в нашем телеграм-канале и по ссылке. Подключайтесь!

Самые важные заявления продублируем в текстовом виде.

@mintsifry

SQL INSERT INTO ....

Ух... сложно было победить PostgreSQL, с MSSQL намного проще

P.S. Скоро выложу исходники

#qlik

Привет!
✅ Дописал функцию выгрузки данных из Qlik в PostgreSQL, для MS SQL - в процессе..

Читаем

#qlik #qliklib

Подписаться на канал

Секреты создания каталога данных от Тинькофф. Дмитрий Пичугин. От 5.10.2022

Смотрим тут

P.S. еще видео про Data Detective (open source, python):

Под капотом каталога данных — Анастасия Ожигина, Тинькофф
https://www.youtube.com/watch?v=puH3uBNoDXk

Как мы в Тинькофф Data Catalog создавали / Дмитрий Пичугин, Роман Митасов (Тинькофф)
https://www.youtube.com/watch?v=jMATH538qsA

А еще ссылка на git репозиторий

Подписаться на канал

Всем привет!
Если вам совсем нечем заняться, то что нужно сделать? Правильно! Нужно изучить что-то новое, тем более сегодня я нашёл на мой взгляд отличный видео-урок по Python, с громким названием:

Учим python за 7 часов! Уроки Python Полный курс обучения программированию на python с нуля

Забираем в копилку.

Видео можно смотреть на youtube, там же в описании есть доп.информация к видео, а вот навигация:
00:00 Вступление в курс уроков по python
00:45 Установка python, первая программа
10:47 Переменные
20:56 Типы данных в python
30:02 Условные операторы if, elif, else
39:03 Условные операторы 2
45:53 Условные операторы Практика
56:44 Цикл while
1:12:37 Цикл for
1:21:23 Цикл for, цикл в цикле
1:29:34 Списки, тип данных list
1:41:29 Списки, методы типа данных list
1:53:21 Кортежи, тип данных tuple
2:08:42 Практика python, модуль os, функция walk
2:21:16 Функции def, определение и вызов
2:30:07 Функции def, параметры и аргументы
2:43:49 Функции переменное количество аргументов, параметр *args
2:56:28 Функции, область видимости переменных
3:08:49 Функции и структура кода
3:22:07 Словари, тип данных dict
3:37:22 Словари, методы dict
3:49:21 Чтение и запись файлов
4:05:29 Множества, тип данных set
4:22:30 Строки, экранированные символы
4:30:17 Строки, методы str
4:43:13 f-строка, форматирование строк
4:50:10 Обработка исключений, try, except
5:09:59 Менеджер контекста with as
5:16:19 Импорт модулей, if name == 'main''
5:34:58 Игра в кости на python tkinter
5:56:53 Декораторы
6:10:36 Генераторы списков, словарей, множеств
6:30:56 Выражение генератор
6:43:03 Функция генератор, оператор yield
6:51:51 lambda функция

#python

Подписаться на канал

Я тут подумал, вот я пишу про Qlik, пишу.. и иногда кажется что немного не то. У меня вопрос к читателям такой, про Qlik:

Какой функции вам не хватает или какую тему вам хотелось бы раскрыть более детально?

Напишите в комментариях, а я потом подготовлю ответ на ваш вопрос

Tableau Strategies: Solving Real, Practical Problems with Data Analytics
Авторы: Ann Jackson, Luke Stanke (2021)

Ответ на вопрос из комментариев:

- Гайд по установке и настройке Apache airflow с твоим пакетом qlikflow!

> ссылку уже кинул в комментариях, но я скоро буду дорабатывать этот модуль, не факт что он будет в пакете qlikflow,
есть над чем там поработать, и как раз мне это будет нужно для работы.
Да и ко всему, Airflow уже версии 2.4.4 вышел.

Пока все карты открывать не буду, но всё в процессе...

Подписаться на канал

Ответ на вопрос из комментариев:

- Качественный гайдлайн по css

> ну например:
раз два три
и закрепить

+ один из моих любимых сайтов (там не только css): https://www.w3schools.com/cssref/default.asp

Подписаться на канал

Ответ на вопрос из комментариев:

- Ещё почитал бы АПИ. Какие-то кейсы. Что это такое и какой функционал может решать на примитивном уровне (какие-то частые задачи).

> у меня например есть скрипт(python) выгрузки всех мастер-мер и измерений из всех приложений и сохранение их в csv, скрипт работает ~5 секунд(для всего сервера), удобно смотреть где и какие формулы прописаны, можно выявлять проблемные участки...

+ скоро будем готовить некий "бэкап" модуль на python, который будет при запуске выгружать все скрипты и визуальную часть из всех приложений, складывать в гит-репозиторий и коммитить. Таким образом получаем авто-бэкап всего Qlik Sense слоя...

Можно поискать в github "qrspy", там описано очень много функций на python, адаптировать и дописать своё - не сложно...

Если нужно что-то конкретное - пишите, думаю могу запилить вам что-нибудь нужное ..

Подписаться на канал

Ответ на вопрос из комментариев:

- Мне не хватает инструкции как на виртуальной машине, разработчику развернуть клик сервер для экспериментов, чтобы не было заморочек с лицензией и можно было поэкспериментировать с расширениями, nprinting попробовать и пр.фичи.

> с этим проблема, раньше, до 2021 года QlikTech поддерживал Qlik Sense в кластере kubernetes, но сейчас он остался только у тех кто его купил
я сам иногда задаюсь этим же вопросом и даже пробовал через docker это сделать, но пока ни как. Надежд я не оставляю, и если получится - обязательно напишу

Подписаться на канал

Ответ на вопрос из комментариев:

Объединил вопросы в один:
- Я бы прочитал про правила формирования оптимизированной загрузки. Вроде общими словами есть инфа, но структуры нет вроде.
- Про оптимизацию, Вот хотелось бы подробностей) Ещё интересно оптимизации скрипта, Какие-то практики.
- Но ещё в интернете мало информации по ETL! Вот как вот взять описание, что бы было для людей написано - нигде нет

> а давайте просто проведём вебинар с вопросами/ответами

пишите в комментариях ваши кейсы, и на вебинаре обсудим вживую...
Дату и время напишу позже ...

Подписаться на канал

Ответ на вопрос из комментариев:

- Ещё интересно как сторить таблицу из модели в базу данных Оракл. Как раз буква L в слове EFL вопроса выше

> а зачем? ну можно написать(дописать то что я недавно выложил) функцию, какой в этом будет профит?
гораздо удобнее, как мне кажется будет сохранение в csv, а потом уже этот csv грузить в oracledb, нет?

Подписаться на канал

Qlik Explorer for Developers обновили до версии 2.2.0, почитать можно тут

UPD: обновили до версии 2.2.1

#qlik

Ответ на вопрос из комментариев:

- Побольше бы полезных хранимых процедур) те что уже есть просто потрясающие)

> это всегда в процессе...

Подписаться на канал

В России появится национальный репозиторий открытого кода

Сегодня правительство приняло соответствующее постановление.

Документ предусматривает проведение эксперимента:

🔹 создание национального репозитория ПО с открытым кодом;
🔹 размещение в нем программного обеспечения, созданного, в том числе, за бюджетные средства, для переиспользования в других проектах;
🔹 формирование нормативной базы для публикации ПО с открытым кодом.

Все это будет сделано до 30 апреля 2024 года. Работы начнутся 1 ноября 2022 года.

Кроме того, постановление содержит форму открытой лицензии, на условиях которой программное обеспечение будут публиковать государственные органы и корпорации.

@mintsifry

Extension для qlik sense >= 2022 feb.
Для работы с мастер мерами и измерениями

https://github.com/GINQO/Master-Item-Manager

#qlik #extension

Подписаться на канал

Привет! Рады объявить о выходе нового релиза YDB 22.4!

Новые возможности:

• Топики YDB и Change Data Capture (CDC)
• Новый Query Processor 2.0
• Поддержка консистентного снапшота для read-only транзакций
• Поддержка топиков YDB и драйвера database/sql для работы с YDB в Golang
• Улучшения производительности
• Ограничения NOT NULL для первичных ключей в YDB во время создания таблиц
• Audit log для DDL statements
• Поддержка BulkUpsert и TTL для таблиц с асинхронными вторичными индексами
• Оптимизированный Embedded UI на основе UX-исследований
• И другие улучшения

Узнать подробнее
#ydb224

Добавил простую функцию для генерации distinct таблицы из исходной.

Смотрим

#qlik #qliklib

Подписаться на канал