== Бином Ньютона
https://youtu.be/YXYQmxLDtMw

на примере куба сыра

== PID Controller Explained
https://realpars.com/pid-controller/
Learn why PID Controllers are used in industrial processes instead of simple ON/OFF Controllers?

наконец абсолютно шикарный ман, что хоть падаванам скидывай

== WHAT ARE PID TUNING PARAMETERS?
https://realpars.com/pid-tuning-parameters/
In this article, you will learn about PID Tuning Parameters through a few practical examples.

== How to Tune a PID Controller
https://realpars.com/pid-tuning/
Let’s discuss what the PID parameters are and how they are used.

- Series
- Ideal
- Parallel

y = kP * P + kI * I + kD *D
kP = Gain
process slow — kP -> HIGH
process fast — kP -> LOW

== Курс лекций «Основы цифровой обработки сигналов»
https://habr.com/ru/post/460445/
https://github.com/hukenovs/dsp-theory

- Сигналы: аналоговые, дискретные, цифровые. Z-преобразование,
- Преобразование Фурье: амплитудный и фазовый сигнала, ДПФ и БПФ,
- Свертка и корреляция. Линейная и циклическая свертка. Быстрая свёртка
- Случайные процессы. Белый шум. Функция плотности вероятностей
- Детерминированные сигналы. Модуляция: АМ, ЧМ, ФМ, ЛЧМ. Манипуляция
- Фильтрация сигналов: БИХ, КИХ фильтры
- Оконная фильтрация. Детектирование слабых сигналов с помощью наложения окна,
- Ресемплинг: децимация и интерполяция. CIC-фильтры, фильтры скользящего среднего
- Непараметрические методы спектрального анализа
- Полифазные схемы преобразования Фурье - усреднение по частоте и по времени

== Цифровая обработка сигналов
https://www.youtube.com/playlist?list=PLmu_y3-DV2_kpP8oX_Uug0IbgH2T4hRPL

хороший вполне адекватный плейлист для изучения ЦОС

Система = среда прохождения сигнала: атмосфера, эл. цепь, цифровой вычислитель, все что изменяет входной сигнал

основные задачи ЦОС:
- эквализация (задача поиска сигнала, при известных параметрах системы)
- фильтрация сигнала (отделение сигнала от шума)
- идентификация системы (нужно определить параметры среды)
- анализ и оценка параметров сигнала (спектр, огибающая, частоты, и тп)
- сжатие сигнала

== Микросервисы. Проектирование API
https://youtu.be/iH1fHaBNZvw

немного про CQRS паттерн

== Микросервисная архитектура, подходы и технологии
https://youtu.be/FF-GZ7iipwc
- апи гэйтвей
- брокер сообщений (rabbitMQ)
- иденпотентность
- версионирование
- переиспользуемые сервисы
- секреты
- общий код - в библиотеки и пакеты
- без девопсов нет микросервисов

короч если много проектов финтех и неистовое количество сервисов яндекса, мэйлру и много дргих вендоров до сих пор на кролике - не вижу смысла сомневаться больше. выдохнул

== забавный сервис сравнения баз данных по времени процессинг. как собирается стата - оставим за скобками. но посмотреть интересно
https://clickhouse.com/benchmark/dbms/#[100000000,[%22MySQL%22,%22PostgreSQL%22],[%221%22,%222%22]]

== A new approach to DataFrames and pipelines
https://youtu.be/2Tt0i823-ec?t=562

ВАУ. ПРОСТО ВАУ
короч пандас на дрожжах. умеет и в мультикор цпу и в гпу и хз во что еще.
и совмещается с оригинальным пандасом на раз
и апи с пандасом оч схоже много где

https://towardsdatascience.com/how-to-analyse-100s-of-gbs-of-data-on-your-laptop-with-python-f83363dda94

https://vaex.io/docs/index.html#

Ой, а что это тут у нас? Новая либа от автора FastAPI - tiangolo released 0.0.1 at tiangolo/asyncer

#github #newrepo #nothabr #pydaily

== Python vs C/C++ vs Assembly side-by-side comparison
https://youtu.be/3PcIJKd1PKU

забавный видос сравнение скорости разработки и перформанса на выходе для ASM, Python и C/C++

== Знакомство с микросервисами
https://www.youtube.com/playlist?list=PLTeQxFEPAJixjNVcuwmrUbTcO-SD2YEIR

нашел забавный простой плейлист небольшого курса по микросервисам. на фоне звучит норм

== Разработка приложений, устойчивых к кратковременным отказам
https://youtu.be/CvRQXat_Ub8
И вновь немного про теорию массового обслуживания и очередей

🛠 Ещё один рантайм для контейнеров, на этот раз, написанный на Rust - youki.

#containers #runtime #youki

== БИНОМ НЬЮТОНА ДЛЯ ЧАЙНИКОВ
https://youtu.be/VDW_E_zyd8M

== Шаблоны проектирования микросервисов на примере Авито
https://youtu.be/5_9x7czHJOM
- Null Object Pattern (создание заглушки в случае если пришло чтото не то)
- Circuit Breaker ()
- Health Check (для базового случая и для случая под нагрузкой)

мало. скорей про опыт компании по переходу на микросервисы рассказал, чем про паттерны

нарвался на шикарный доклад

== Успехи и провалы с Redis
https://youtu.be/JBIm4sglyQU
- ttl занимает дополнительную память
- удаление ключей происходит при обращении и случайным образом
- ОБЯЗАТЕЛЬНО задать max-memory и max-memory-policy

Persistence & replication
- diskless
- disk-based (default)
- in-memory (for enterprise)

- откличать надо TRANSPARENT_HUGE_PAGES
- vm.overcommmit = 1

не забываем про mem-Fragmentation

не забываем про дополнительные буфферы

Используйте структуру HASH

Используйте Sorted Set (ZSET)
- ограничитель скорости (rate-limiter)
- планировщик задач (scheduler)
- очередь повторов (retry)

не забываем про Транзакции

не забываем что есть LUA-скрипты
- Скрипты кэшируются на конкретных нодах при LOAD и EVAL
- есть проблема со сменой мастера

HA redis:
1) перегрузка мастера
- надо что бы было задержка рестарта ноды была меньше больше чем время фэйловера
- Sentiel динамически обновляют конфигурацию
- Sentiel не забывает реплики

Persistence
- RDB - снапшоты, компактный размер
- AOF - лог операций
- AOF + RDB = гарантии почти как Постгресе
- нужен свой backup noscript + check
- на мастере МОЖНО отклучить персистанс (но надо понимать что делаешь) - ЛУЧШЕ оставить только AOF

Sentinels
- мониторить снаружи (ОПАСНО, так как может резануть сеть от вотчеров)
- мониторить изнутри

Multi-az/rack cluster

Решение с двумя ДЦ
- Есть свой Active-Active без CRDT
- НЕ ДОВЕРЯЙТЕ НАДЕЖНОСТИ СЕТИ !!!!

Не забываем про Шардирование

Pub/Sub
- AT MOST ONCE !
- получат только активные клиенты
- нет гарантий когда произойдет событие

Streams
- Append only
- Body Hash-like
- Consumer Groups

Monitoring & redis_exporter
- сбор метрик = доп нагрузка !
- большинство можно получить из INFO
- Аккуратней с -check-keys = ПРОВЕРЯЕТ ВСЕ
- можно создать LUA скрипт и проверять только то чтонужно (ШИКАРНО!!!)

Редис уже не такой уж и однопоточный

== Карьера в IT: должность CTO
https://dou.ua/lenta/articles/cto-position/

в круг обязанностей CTO могут входить:
— Определение общих стратегий технического развития;
— Принятие глобальных технических решений;
— Внутренний технический арбитраж;
— Выбор технологий, которые будут использоваться в том или ином проекте;
— Оценка этих технологий в плане финансовых и временных затрат;
— Оценка длительности и трудоемкости проектов;
— Планирование и построение процессов разработки;
— Формирование команд разработчиков;
— Распределение задач между командами;
— Отслеживание продвижения проектов;
— Обеспечение темпа и качество разработки на максимально высоком уровне;
— Выбор и внедрение вспомогательных систем для разработки и администрации;
— Экспертные предложения по архитектуре или конкретным техническим решениям;
— Написание кода, обзоры кода, рефакторинг;
— Технический pre-sale ключевых проектов;
— Управление техническими рисками на проектах;
— Общение с другими отделами и топ-менеджерами компании (CEO, COO, CIO и др.);
— Координация работы департаментов;
— Технические собеседования с новыми сотрудниками;
— Оценка продуктивности сотрудников и решение об уровне их зарплат;
— Обучение сотрудников;
— Формирование рабочей атмосферы в коллективе, мотивация сотрудников;
— Разборы полетов с тимлидами:)

Короч шикарный ридЛист для понимания своих обязанностей

Карьера в IT
- должность CTO
- должность Software Architect
- должность Project Manager
- Должность QA
- Должность QA Automation
- Должность BA
- Должность SYS-Admin
- Должность DS/ML Engineer
- Должность Delivery Manager
- Должность Product Manager
- Должность Fullstack Developer
- Должность Embedded Dev
- Должность Happiness Manager
- Должность UI/UX
- Должность Team Lead
- должность BizDev
- должность Sales Manager
- Должность Site Reliability Engineer
- должность Support Engineer
- должности HR-менеджер & рекрутер
- роль Scrum Master
- Должность NLP Engineer и NLP Researcher
- должность Technical Writer
- должность Program Manager
- специалист по кибербезопасности
- Должность AdOps Engineer
- должность Blockchain-разработчик
- Должность Продуктовый Аналитик
- Должность Program Manager
- Должность Верстальщик
- Должность DevOps engineer

== Про Kafka
https://youtu.be/-AZOi3kP9Js
- topic
- partition
- partition balancing
- storage: simple log files, segment
- DELETE NOT PERMITTED !
- ttl удаляет по сегментно
- partition replication
- partition Leader of replicas
- in-sync-replicas (ISR) - надежно! min.insync.replicas = 3
- producer: ack (0,1,-1) -1 означает что ждет подтверждения от всех ISR
- fetch metadata = SYNC operation
- Delivery semantics: AT MOST ONCE, AT LEAST ONCE, EXACTLY ONCE
- consumer: offset, re-balancing

why is it so fast:
- scalable arch
- sequential write and read
- no random read
- zero copy
- several semantics
- fine tuning !

короч можно было книгу не читать. просто посмотрев вовремя этот доклад 😂

== Безграничная память. Как запоминать информацию
https://youtu.be/diEkFaHklJ0

== распространенные ошибки изменения схемы данных в postgres
https://youtu.be/RDWz8_xuoWE