airflow-greenplum

Files

T

ddadmin a06b52c38d feat(dm): добавлена витрина passenger_loyalty и внедрен паттерн HWM по ключу

- Зачем:
  - необходимо продемонстрировать студентам метод инкрементального пересчета "затронутых ключей" для больших справочных витрин.
- Что:
  - созданы DDL, Load и DQ скрипты для витрины dm.passenger_loyalty (лояльность пассажиров).
  - реализован расчет моды (самый частый тариф) через PostgreSQL-специфику DISTINCT ON.
  - внедрена корректная агрегация SCD2-измерений (unique_routes) по бизнес-ключу route_bk.
  - настроено Heap-хранилище (WITH appendonly=false) для эффективного выполнения UPSERT.
  - обновлены DAGи bookings_dm_ddl и bookings_to_gp_dm для включения новой витрины в конвейер.
- Проверка:
  - визуальный аудит SQL на предмет использования p.passenger_id (BK) и r.route_bk.
  - наличие учебной DQ-проверки ссылочной целостности и инварианта дат (first <= last).
  - проверка параллельности задач в Airflow DAG.

2026-03-04 22:03:26 +03:00

helpers

docs(dds): добавлены комментарии и исправлены ошибки в DWH

2026-03-01 17:50:53 +03:00

bookings_dds_ddl.py

test(e2e): протокол сквозного тестирования и инструменты очистки DWH

2026-03-01 20:08:01 +03:00

bookings_dm_ddl.py

feat(dm): добавлена витрина passenger_loyalty и внедрен паттерн HWM по ключу

2026-03-04 22:03:26 +03:00

bookings_ods_ddl.py

test(e2e): протокол сквозного тестирования и инструменты очистки DWH