Генерация dds слоя по ТЗ - без тестов

sql/stg/airplanes_ddl.sql

@@ -0,0 +1,37 @@
+-- DDL для слоя STG по таблице airplanes (справочник).
+-- Используется как из общего скрипта ddl_gp.sql (через \i),
+-- так и может выполняться отдельно при изменении схемы.
+
+-- Схема stg для сырого слоя DWH.
+CREATE SCHEMA IF NOT EXISTS stg;
+
+-- Внешняя таблица в схеме stg для чтения данных из bookings.airplanes_data через PXF.
+DROP EXTERNAL TABLE IF EXISTS stg.airplanes_ext;
+CREATE EXTERNAL TABLE stg.airplanes_ext (
+    airplane_code TEXT,
+    model         JSONB,
+    range         INTEGER,
+    speed         INTEGER
+)
+LOCATION ('pxf://bookings.airplanes_data?PROFILE=JDBC&SERVER=bookings-db')
+FORMAT 'CUSTOM' (formatter='pxfwritable_import');
+
+-- Внутренняя таблица stg.airplanes — сырой слой, все бизнес-колонки как TEXT.
+CREATE TABLE IF NOT EXISTS stg.airplanes (
+    airplane_code      TEXT,
+    model             TEXT,
+    range             TEXT,
+    speed             TEXT,
+    src_created_at_ts TIMESTAMP,
+    load_dttm         TIMESTAMP NOT NULL DEFAULT now(),
+    batch_id          TEXT
+)
+WITH (appendonly=true, orientation=row, compresstype=zlib, compresslevel=1)
+-- Ключ распределения: airplane_code
+-- Обоснование: airplane_code — это уникальный идентификатор самолёта.
+-- Использование airplane_code обеспечивает:
+-- 1. Равномерное распределение данных по сегментам (airplane_code имеет высокую кардинальность)
+-- 2. Co-location данных airplanes и routes при JOIN по airplane_code
+-- 3. Co-location данных airplanes и seats при JOIN по airplane_code
+-- 4. Оптимизацию запросов, которые фильтруют или группируют по airplane_code
+DISTRIBUTED BY (airplane_code);