feat(main): заглушки студенческих файлов, ослабление DQ, адаптация тестов
- fact_flight_sales_dq: student SK (passenger/route/airplane) → NOTICE, airport_sk → порог 1% (эталон через ods.routes) - routes_dq: закомментирован RI airplane_code → ods.airplanes - ODS DAG: убрана зависимость dq_ods_airplanes → load_ods_routes - 18 студенческих файлов заменены заглушками (ODS/DDS/DM load+dq) - test_ods_sql_contract: SNAPSHOT_ENTITIES без airplanes/seats - test_dags_smoke: убран assert dq_ods_airplanes → dq_ods_routes Co-Authored-By: Claude Opus 4.6 <noreply@anthropic.com>
This commit is contained in:
+4
-36
@@ -1,36 +1,4 @@
|
||||
-- Загрузка ODS по seats: Полная перезагрузка (TRUNCATE + INSERT).
|
||||
-- Почему: для справочников-снимков в Greenplum на AO-таблицах
|
||||
-- эффективнее перетереть данные целиком, чем делать медленный UPDATE.
|
||||
|
||||
TRUNCATE TABLE ods.seats;
|
||||
|
||||
INSERT INTO ods.seats (
|
||||
airplane_code,
|
||||
seat_no,
|
||||
fare_conditions,
|
||||
_load_id,
|
||||
_load_ts
|
||||
)
|
||||
WITH src AS (
|
||||
-- Выбираем последний снимок из STG для текущего батча
|
||||
SELECT
|
||||
s.airplane_code,
|
||||
s.seat_no,
|
||||
s.fare_conditions,
|
||||
ROW_NUMBER() OVER (
|
||||
PARTITION BY s.airplane_code, s.seat_no
|
||||
ORDER BY s._load_ts DESC, s.event_ts DESC NULLS LAST
|
||||
) AS rn
|
||||
FROM stg.seats AS s
|
||||
WHERE s._load_id = '{{ ti.xcom_pull(task_ids="resolve_stg_batch_id") }}'::text
|
||||
)
|
||||
SELECT
|
||||
s.airplane_code,
|
||||
s.seat_no,
|
||||
s.fare_conditions,
|
||||
'{{ ti.xcom_pull(task_ids="resolve_stg_batch_id") }}'::text,
|
||||
now()
|
||||
FROM src AS s
|
||||
WHERE s.rn = 1;
|
||||
|
||||
ANALYZE ods.seats;
|
||||
-- TODO: реализуйте загрузку ods.seats (см. ТЗ в docs/assignment/analyst_spec.md)
|
||||
-- Паттерн: TRUNCATE + INSERT (snapshot-справочник на AO-таблице).
|
||||
-- Эталонную реализацию можно найти в ветке solution.
|
||||
SELECT 1;
|
||||
|
||||
Reference in New Issue
Block a user