feat(monitoring): собраны дашборды «Кластер» и «Запросы»
- Зачем:
- ADR 0002 обещает три дашборда; собран был один, а симптом инфраструктуры
как следствие решения человека показать было негде.
- Что:
- cluster.json — семь панелей: процессор, память с пределом коробки, диски,
части по таблицам, слияния, keeper, очередь распределённых DDL.
- queries.json — четыре панели поверх system.query_log: тяжёлые запросы,
поток запросов, аппетит по пользователям, ошибки.
- системные таблицы читаются через clusterAllReplicas; очередь DDL — без
обёртки, она живёт в keeper и у обеих нод одна.
- устройство обоих дашбордов записано в docs/architecture/monitoring/,
правило про пороги поднято из data.md в README набора.
- Проверка:
- make config-test; make smoke 21/21; make check-clickhouse 10/10.
- все одиннадцать панелей отвечают через /api/ds/query.
This commit is contained in:
1 parent
272660ff66
commit
7ffb4606f1
7 files changed
+708
-6
No files matched your search
@@ -9,9 +9,9 @@ Prometheus, какие источники данных подготовлены
|
||||
|
||||
**Что здесь есть и чего ещё нет.** Собран пол: свой образ Grafana с плагином
|
||||
ClickHouse, два подготовленных источника данных, экспортёр метрик Kafka и цель
|
||||
для него у Prometheus. Поверх пола стоят дашборды из каталога ниже; «Кластер»
|
||||
и «Запросы» приносят отдельные тикеты. Правил оповещения и серверного журнала
|
||||
`system.text_log` тоже пока нет.
|
||||
для него у Prometheus. Поверх пола стоят все три дашборда ADR 0002, они
|
||||
перечислены ниже. Правил оповещения и серверного журнала `system.text_log`
|
||||
пока нет.
|
||||
|
||||
## Состав
|
||||
|
||||
@@ -69,11 +69,20 @@ Grafana ходит пользователем `grafana` с ролью `monitorin
|
||||
Файлы каталога разбирает `make config-test`, рядом с файлами дагов и по тому же
|
||||
доводу ([testing.md](../testing.md)).
|
||||
|
||||
Порогов и цветовых вердиктов на панелях нет ни на одном дашборде: на них
|
||||
смотрят глазами, красное и зелёное живёт в проверках и дагах DQ.
|
||||
|
||||
Собранные дашборды:
|
||||
|
||||
- **«Данные»** (`data.json`) — с потоком всё в порядке: свежесть, поток, брак,
|
||||
сходимость Kafka с ClickHouse, отставание чтения и дневной слепок заказов.
|
||||
Устройство и разбор панелей — [data.md](data.md).
|
||||
- **«Кластер»** (`cluster.json`) — что с машиной: процессор, память и диски
|
||||
обеих нод, части и слияния, keeper, очередь распределённых DDL. Устройство и
|
||||
разбор панелей — [cluster.md](cluster.md).
|
||||
- **«Запросы»** (`queries.json`) — что выполнялось и во что обошлось: тяжёлые
|
||||
запросы, поток запросов, аппетит по пользователям, ошибки. Устройство и
|
||||
разбор панелей — [queries.md](queries.md).
|
||||
|
||||
## Что проверено
|
||||
|
||||
|
||||
Reference in new issue
Block a user