docs(etl): спроектирован дневной конвейер трансформаций
Зачем: развилка #134 карты #127 — чем и когда гоняются трансформации DDS и витрины-таблицы, пока спека числила etl_pipeline за этапом 5. Что: дока docs/architecture/etl.md — даг etl_pipeline рождается этапом 4: дёргает dds_transform и dm_transform последовательно (DQ — будущее звено); живой день зовёт его с ожиданием после установки позиции, после разгона пачкой менти запускает рукой, world_initialize — последним шагом; параметров нет, объём выводится из world_position и состояния слоёв; первый шаг — ожидание хвоста hits; механика REPLACE PARTITION — этап 4, этапу 5 — партиционная переобработка. Указатели в доках заказа, сессии, README слоя и ретро-пометки в ADR 0008/0009 переведены на новую доку. Проверка: вычитка; резолюция и доводы — в тикете #134. Co-Authored-By: Claude Fable 5 <noreply@anthropic.com>
This commit is contained in:
1 parent
f0c4b4c627
commit
ebe3de4ae8
6 files changed
+117
-10
No files matched your search
@@ -141,7 +141,10 @@
|
||||
|
||||
Этап 3 забирает у этапа 5 первый настоящий даг. Раздел 9 мастер-спеки отдавал
|
||||
даги этапу 5 целиком; приём заказов без дага не существует, поэтому порядок
|
||||
меняется. `etl_pipeline` остаётся за этапом 5.
|
||||
меняется. `etl_pipeline` остаётся за этапом 5. Позднее сдвинулся и он:
|
||||
резолюция #134 родила его этапом 4 — [дневным конвейером
|
||||
трансформаций](../architecture/etl.md), — а этапу 5 оставила партиционную
|
||||
переобработку.
|
||||
|
||||
Расхождения с мастер-спекой, внесённые тем же коммитом: раздел 6 (чтец заказов
|
||||
живёт на одной ноде и без матвью), раздел 7 (развилка закрыта, у `orders` одна
|
||||
|
||||
Reference in new issue
Block a user