- Зачем: - старая инструкция была неполной (без ODS/DDS/DM) и содержала избыточные требования. - Что: - переписан docs/agent-dag-testing.md с фокусом на итеративную разработку и Airflow REST API. - добавлены шаги по отладке упавших задач (логгирование через CLI) и проверке DWH слоев. - Проверка: - визуальная проверка текста руководства на соответствие актуальному пайплайну.
Документация
Этот каталог содержит дополнительные материалы к учебному стенду.
Быстрый путь (для менти)
- Быстрый старт и команды
- Учебные задания
- План тестирования и проверки
- Главный учебный DAG: bookings → stg
- Учебный DAG: stg -> ods
- Учебный DAG: ods -> dds
Технические детали (опционально)
- Как устроен Docker-стенд (образы, Connections, переменные окружения)
- Единые конвенции нейминга DWH (служебные поля и SCD)
- PXF в этом проекте (проектная реализация)
- Дизайн stg для bookings (черновик)
- Дизайн ods для bookings (черновик)
- Дизайн dds для bookings (черновик)
- Про время/UTC в bookings (черновик)