Наблюдение: OOM хоста прибил Airflow, перезапуск dag-processor #190

New Issue

2026-08-28T21:22:24+03:00

ddmitry commented

2026-08-28 21:22:24 +03:00

Наблюдение для трека мониторинга (этап 9, #11).

2026-08-28 в 06:21 по времени хоста ядро прибило процесс Airflow
(oom-killer; след — journalctl -k --since "...", запись
«airflow invoked oom-killer»). Docker перезапустил
airflow-dag-processor, дальше контейнер работал здоровым, но счетчик
перезапусков сделал make smoke красным.

Что уже сделано: при приемке #184 контейнер пересоздан — счетчик
обнулен, все три стендовые цели зеленые. След события остался в журнале
ядра, контейнерные логи прежнего экземпляра потеряны при пересоздании.

Вопросы треку:

хватает ли служб Airflow текущих лимитов памяти (ADR 0004 — пороги не
назначаем, но наблюдение стоит панели);
должен ли перезапуск службы быть виден на дашборде «кластер» раньше,
чем его поймает смоук.

Наблюдение для трека мониторинга (этап 9, #11). 2026-08-28 в 06:21 по времени хоста ядро прибило процесс Airflow (oom-killer; след — `journalctl -k --since "..."`, запись «airflow invoked oom-killer»). Docker перезапустил `airflow-dag-processor`, дальше контейнер работал здоровым, но счетчик перезапусков сделал `make smoke` красным. Что уже сделано: при приемке #184 контейнер пересоздан — счетчик обнулен, все три стендовые цели зеленые. След события остался в журнале ядра, контейнерные логи прежнего экземпляра потеряны при пересоздании. Вопросы треку: - хватает ли служб Airflow текущих лимитов памяти (ADR 0004 — пороги не назначаем, но наблюдение стоит панели); - должен ли перезапуск службы быть виден на дашборде «кластер» раньше, чем его поймает смоук.

ddmitry added the needs-triage label 2026-08-28 21:22:28 +03:00

Sign in to join this conversation.

1 Participants

Notifications

Due Date

No due date set.

Dependencies

No dependencies set.

Reference: ddmitry/clickstream-data-platform#190