Генерация dds слоя по ТЗ - без тестов

2026-02-28 22:12:22 +03:00
parent 9b8a6f3ce4
commit 7abeb67fba
26 changed files with 1566 additions and 5 deletions
@@ -0,0 +1,41 @@
+-- Загрузка всех строк из stg.routes_ext в stg.routes (full load).
+-- Используем batch_id для отслеживания загрузки.
+
+INSERT INTO stg.routes (
+    route_no,
+    validity,
+    departure_airport,
+    arrival_airport,
+    airplane_code,
+    days_of_week,
+    scheduled_time,
+    duration,
+    src_created_at_ts,
+    load_dttm,
+    batch_id
+)
+SELECT
+    ext.route_no::text,
+    ext.validity::text,
+    ext.departure_airport::text,
+    ext.arrival_airport::text,
+    ext.airplane_code::text,
+    ext.days_of_week::text,
+    ext.scheduled_time::text,
+    ext.duration::text,
+    now()::timestamp,
+    now()::timestamp,
+    '{{ run_id }}'::text
+FROM stg.routes_ext AS ext
+WHERE NOT EXISTS (
+    -- Защита от дублей в рамках одного batch_id по составному ключу (route_no, validity)
+    SELECT 1
+    FROM stg.routes AS r
+    WHERE r.batch_id = '{{ run_id }}'::text
+        AND r.route_no = ext.route_no::text
+        AND r.validity = ext.validity::text
+);
+
+-- Обновляем статистику для оптимизатора Greenplum
+-- Это критично для корректной работы оптимизатора и выбора оптимального плана выполнения
+ANALYZE stg.routes;