Также прохожу курс по оптимизации запросов в GreenPlum. Также держите полезной ботвы))

https://habr.com/ru/post/657021/
https://habr.com/ru/post/656113/
https://cn.greenplum.org/wp-content/uploads/2020/08/Hashjoin-yandong-milan-2019.pptx.pdf

Интересный обзор, мысль про то, что наше общество раздельно на группы по интересам. И что сложно из него вырваться, мы получаем ту информацию, которая нам нравится, я услышал первый раз от топ менеджмента сбера в Сириусе лет 7 назад(а он явно от Грефа ), к сожалению не нашел той красивой презентации. Недавно увидел похожие мысли у товарища Курпатова (тоже спорный чувак). А потом увидел его выступление в сбере и кажется понял))

https://youtu.be/7uqPYsZbFcQ

Курпатов в сбере — https://youtu.be/g-9i9SXh8_I

Курпатов сейчас— https://youtu.be/wq6S_pRFqC8

Греф недавно — https://youtu.be/4Chsponr53E 28:17

Ps не реклама грефа или Курпатова, но забавно смотреть на все это спустя 6 лет. И кажется, что действительно их мысли про разные информационно-социальные группы оказалось правдой

Pss очень забавно смотреть старые видосы грефа, где он говорит что ИИ захватить мир, big data очень круто и надо знать всем, а Watson скоро подчинит людей…

В общем надоело оптимизировать запросы, решил покодить и написать для наших продажников генератор документов,в вузе делал на latex (http://eosrei.net/articles/2015/11/latex-templates-python-and-jinja2-generate-pdfs)

весело было, а тут просто ворд (дока https://docxtpl.readthedocs.io/en/latest/).

Потом подумал, а как они будут данные передавать. Надо чтобы записывали в таблицу в облаке. А что если данные изменяться, надо нормализовать, разложить по таблицам…
в общем кажется пора в отпуск)) (нет)

Оптимизация запросов в GP (GreenPlum)

1. Джоиним по ключу дистрибуции
2. Уменьшаем, где можем используемые данные
3. Уменьшаем, где можем используемые колонки
4. При использовании партицированных таблиц не используй функции в фильтрах
5. Не использовать в джоинах or, in, like (будет не hash join)
6. Не используем сортировку (делаем на приемнике)
7. Боремся с дубликатами, как можно раньше
8. Не используем distinct и union
9. Не используем where in (subquery) меняем на join
10. Разбиваем сложные запросы на временные таблицы (with), не забываем про ключ дистрибуции

#аналитика #нужно

В общем никто ничего не видел)

А пока посмотрите классного Андрея Дороничева (который был у дудя)

Вот https://youtu.be/y8be-fjXSb4

И вот https://youtu.be/pxVrjVMz7zw

Что делать в 12 часов ночи, правильно emoji с вилкой, так что если теперь увидите вакансию без вилки вам есть что поставить

https://news.1rj.ru/str/addemoji/phystech_career_emoji

Ребята из нашего маркетинга сделали фильм про будущее российского рынка авто. Рекомендую

https://youtu.be/sMsn3lSYw8Y

Ps. Выводы грустные….

Привет, тут пришло много ребят, продублирую материалы, для тех, кто хочет погрузиться в тематику аб тестов

https://www.youtube.com/c/EXPF_1

https://habr.com/ru/company/avito/blog/571094/

+ книжка в комментах

Спасибо, что мфти не забывает меня, но мне уже лет 6, как поздновато (а для детей рановато)

Ps не реклама) все эти школы обычно Овер дорогие) настоящие пацаны решают Савченко в одиночестве

Бомбическая статья про то, как в Китае купить машину.
Спойлер почти как у нас заказать ДоДо пиццу

https://pikabu.ru/story/kak_myi_yelektromobil_v_kitae_pokupali_gac_aion_lx_8380647

P.s Кажется они живут в 22 веке...

Запуск… продаем машины 🚘

Давно не писал), в общем вроде мы запусти наш проект. Ближайшее время будет пресс-релиз. 2,5 месяца упорной работы позади…

Будем продавать автомобили. Пока одна марка (Haval) и в южных регионах. Но однажды будем учить Илона продавать теслы))

Сайтик

Почти попал в Forbes)))

https://www.forbes.ru/biznes/480493-tin-koff-zapustit-servis-dla-pokupki-avtomobilej

Когда утром шел на работу осенью, а возвращаешься с нее зимой) физтехов с началом бота

Много новых ребят прилетело, а времени у меня подумать надо новым постом нет). Так что, пишите, про что вам было бы интересно узнать...

Классный материал про статистику (которую я к своему стыду не заботал)

Ну и у Юли много классного про машинку и это все

https://news.1rj.ru/str/julia_and_ko/1246

Возвращаемся с рабочего запоя

Как вы поняли, у нас произошел запуск. Естественно возникло много проблем. Одна из них, проблема с аналитикой.

Устроим, небольшой интерактив) (голосовалка выше)

В следующем посту расскажу, что сделали мы)

Задача:
1. У вас есть один аналитик.
2. Базовая аналитика в CRM (статус лидов)
3. Выборка для маркетинга на 1 месяц работы
4. Результат маркетинга за прошедший месяц

Вопрос: на что вы потратите 1 месяц работы аналитика:

1/ новые выборки для маркетинга
2/ результат прошедшего месяца маркетинга
3/ операционная аналитика (дополнительная аналитика CRM)

Пока пишу вторую часть про аналитику.

Рубрика Паша и шаблонизаторы.
На этот раз Power Point

1. Ставим python-pptx
2 ставим python-pptx-text-replace (можно без него)
3. Готовим шаблон: текст пишем типо: $price_1$, записываем куда надо вставить картинки и их размер

Что еще умеет, кроме смены текста и вставки картинок?

1. Выбрать нужные слайды из одной презентации
2. Заменить/создать ссылку для текста (мб и для любого shape, но я не изучал это)
3. Создать слайд (можно использовать layout)

Что нельзя:
Использовать несколько презентаций (потомучто под капотом манипуляции с xml)

Если нужны будут куски кода, пишите)