1. Как забирать данные из контейнеров?

ssh? Может быть сложным, очень сложным.

Более того, хочется иметь детальные запросы

статистику по конкретным тредам JVM, например, по конкретным запросам в базу и т.п.

2. Как проводить кореляцию между событиями - это не тривиально

К тому же система мониторинга должна быть изолированной от контейнеров, автоматической (сама находить контейнеры и софт в них)

еще бы неплохо интегрироваться с системами оркестрации

И еще и масштабируемой

Есть уже готовые методы для инструментирования. Например подход Amazon CloudWatch

Они работают на уровне гипервизора и собирают метрики там

но при этом они теряют возможность получить детали

второй подход - агент в каждой машине

но это сложнее масштабировать

хотя и даст возможность уйти глубже в детали

Более того, контейнеры обычно - single application

и поэтому дают весомый оверхед

Т.е. масштабирование страдает

страдают размеры образов и проблемы с зависимостеями

и т.п.

(телеграм опять не хочет грузить фотки :( )

Поэтому sysdig решил применить подход Monitoring Container'ов