В общем я ушел с этого странного тренинга по недоOpenSource стораджам.

SoundCloud использовали раньше графит.

Но в какой то момент подумали что запилить новое свое проще чем допиливать графит

Взамен немного пообщался про Prometheus с одним из разработчиков.
В целом я на этот момент знал мало.

Так появился прометеус

Разрабатывать начали на Го потому что посчитали его оптимальным с точки зрения скорость разработки/скорость кода

Они гордятся тем что у них размер одного сэмпдэла (data point) в среднем всего 1.3 байта за счет специально оптимизированной double Delta компрессии. Оптимизировано оно еще на базе того что они шлют time stamp + value

В целом это примерно то же что делает фб горилла

Только с заточкой под их данные

Они еще очень гордятся своим языком запросов.

Тем что он быстро позволяет делать запросы по методикам с высокой кординальностью

Еще у них не так давно появилась high availabile версия alert manager

Но документация по ней хромает, есть только самая базовая

Они намеренно не делают passive check

Это нужно редко на самом деле, и там где нужно они рисуют exit code

сообщения, если нужно, предлагают слать как еще один tag

А с active check все веселее

Для этого есть специальная прокся

Которая работает и может делать произвольные проверки

Включая http с status code и пр

На вопрос что думают про совместимый вариант от digitalocean - сказали что он слегка о другом. Прометей это алертинг. Очень хороший алертинг. А do делает систему рисования бизнес метрик