Модель заказа в DDS: зерно, связи, материализация #130

New Issue

2026-08-22T10:26:21+03:00

ddmitry commented

2026-08-22 10:26:21 +03:00

Part of #127.

Вопрос

Каким объектом заказ живёт в DDS: зерно (заказ, версия заказа,
позиция?), состав атрибутов и связи (события purchase,
identity_map), движок, ключи и шардирование, как читается версионный
ods.order_v — и судьба служебных колонок: _load_id выше ODS
решается здесь, при названном читателе (наследство #85, закрыт wontfix).

Спека отложила это сюда явно: «зерно, связи и материализация
проектируются на этапе DDS» (§7); читатели модели — витрина выручки и
сверка A+C (§4).

Сначала прочитать

docs/architecture/orders/ (README и ingestion);
docs/architecture/storage.md, раздел «Версии заказов»;
ADR 0010 (версии заказов в ODS), резолюция #85;
мастер-спека, разделы 2, 4 и 7.

Part of #127. ## Вопрос Каким объектом заказ живёт в DDS: зерно (заказ, версия заказа, позиция?), состав атрибутов и связи (события `purchase`, `identity_map`), движок, ключи и шардирование, как читается версионный `ods.order_v` — и судьба служебных колонок: `_load_id` выше ODS решается здесь, при названном читателе (наследство #85, закрыт wontfix). Спека отложила это сюда явно: «зерно, связи и материализация проектируются на этапе DDS» (§7); читатели модели — витрина выручки и сверка A+C (§4). ## Сначала прочитать - `docs/architecture/orders/` (README и ingestion); - `docs/architecture/storage.md`, раздел «Версии заказов»; - ADR 0010 (версии заказов в ODS), резолюция #85; - мастер-спека, разделы 2, 4 и 7.

ddmitry added the wayfinder:grilling label 2026-08-22 10:26:24 +03:00

ddmitry added a new dependency 2026-08-22 10:27:09 +03:00

#134 Запуск трансформаций до etl_pipeline

ddmitry added a new dependency 2026-08-22 10:27:11 +03:00

#135 Витрины DM: форма и состав

ddmitry referenced this issue

2026-08-22 10:27:31 +03:00

Карта: проектирование трансформаций и витрин (этап 4) #127

ddmitry referenced this issue

2026-08-22 10:40:53 +03:00

Ко-локация заказов в ODS сломана: заказы задвоены по шардам #137

ddmitry self-assigned this 2026-08-24 15:05:54 +03:00

ddmitry referenced this issue from a commit

2026-08-24 19:03:34 +03:00

docs(dds): спроектирована модель заказа в DDS и заведён набор доков слоя

ddmitry commented

2026-08-24 19:03:51 +03:00

Резолюция развилки #130 карты #127.

Спроектирована модель заказа в DDS и заведён дом architecture-доков этапа 4 — набор docs/architecture/dds/ по ADR 0011 (README — карта модели и правила слоя, файл на сущность).

Решение коротко:

зерно — заказ в текущем состоянии, ключ order_id; истории версий нет (читателя нет, ODS её не обещает);
позиции — типизированные массивы в строке заказа, разбор items один раз на границе ODS → DDS; ARRAY JOIN остаётся витрине;
времена — в поясе счётчика, день заказа — колонка order_date;
движок — MergeTree без версий, партиция по order_date, ORDER BY order_id, шардирование cityHash64(order_id); идемпотентность — замена партиции (Replacing менти уже отыграл в ODS);
служебные колонки — свои _load_id/_load_ts запуска трансформации; ярлыки ODS не переезжают (произвол ярлыков, замер #137) — этим закрыто наследство #85;
механика запуска и замены на кластере — #134, контур DQ — отдельный разговор этапа 4.

Дока: docs/architecture/dds/order.md. Отклонённые варианты — там же.

Резолюция развилки #130 карты #127. Спроектирована модель заказа в DDS и заведён дом architecture-доков этапа 4 — набор `docs/architecture/dds/` по ADR 0011 (README — карта модели и правила слоя, файл на сущность). Решение коротко: - зерно — заказ в текущем состоянии, ключ `order_id`; истории версий нет (читателя нет, ODS её не обещает); - позиции — типизированные массивы в строке заказа, разбор `items` один раз на границе ODS → DDS; `ARRAY JOIN` остаётся витрине; - времена — в поясе счётчика, день заказа — колонка `order_date`; - движок — `MergeTree` без версий, партиция по `order_date`, `ORDER BY order_id`, шардирование `cityHash64(order_id)`; идемпотентность — замена партиции (Replacing менти уже отыграл в ODS); - служебные колонки — свои `_load_id`/`_load_ts` запуска трансформации; ярлыки ODS не переезжают (произвол ярлыков, замер #137) — этим закрыто наследство #85; - механика запуска и замены на кластере — #134, контур DQ — отдельный разговор этапа 4. Дока: `docs/architecture/dds/order.md`. Отклонённые варианты — там же.

ddmitry referenced a pull request that will close this issue

2026-08-24 19:03:52 +03:00

Модель заказа в DDS: зерно, массивы позиций, замена партиций #141

ddmitry referenced this issue from a commit

2026-08-24 19:07:00 +03:00

docs(dds): вычитаны модель заказа и карта слоя

ddmitry closed this issue

2026-08-24 19:09:32 +03:00

Sign in to join this conversation.