ddadmin
ffd9585ef4
fix(bookings): добавлено явное ограничение генератора на jobs=1
...
- Зачем:
- исключить нестабильные режимы генератора, в которых bookings может перестать пополняться.
- сделать причину ошибки понятной студенту сразу при запуске команд и SQL-скриптов.
- Что:
- добавлен precheck `bookings-check-jobs` в Makefile и подключён к `bookings-init` и `bookings-generate-day`.
- добавлены явные проверки `bookings.jobs = 1` в `bookings/generate_next_day.sql` и `sql/src/bookings_generate_day_if_missing.sql`.
- обновлена документация и `.env.example`: зафиксировано, что в стенде поддерживается только `BOOKINGS_JOBS=1`.
- Проверка:
- uv run make fmt.
- uv run make test.
- env BOOKINGS_JOBS=2 make bookings-init.
- env BOOKINGS_JOBS=2 make bookings-generate-day.
- make bookings-init.
- make bookings-generate-day.
2026-02-28 22:00:27 +03:00
ddadmin
61103847aa
Полировка документации
2026-01-09 20:48:05 +03:00
ddadmin
2d76789050
мелкие правки
2026-01-09 19:39:42 +03:00
ddadmin
5f3e32c031
Глубокая переработка документации
2026-01-09 18:48:18 +03:00
ddadmin
16da5d0aae
Улучшение документации - подчистили старые задачи
2026-01-09 18:04:29 +03:00
ddadmin
ff831b6bb2
Фикс DAG загрузки данных - построение дельты
2026-01-09 14:51:21 +03:00
ddadmin
272013774b
Сохранение логов airflow между перезапусками
2026-01-09 13:37:14 +03:00
ddadmin
c3b2050cc4
еще баги и документирование сделанного
2026-01-09 12:41:36 +03:00
ddadmin
573c853f15
фикс pxf
2026-01-08 23:34:26 +03:00
ddadmin
dfcc456120
Документирование решения
2026-01-08 22:24:24 +03:00
ddadmin
5778ad6601
фикс бага pxf
2026-01-08 22:02:57 +03:00
ddadmin
e27476fa5f
Раздел "Благодарности"
2026-01-06 15:01:26 +03:00
ddadmin
9f028d0728
Доработки по full smoke тесту
2025-12-11 11:09:05 +03:00
ddadmin
0d81096ded
полный smoke тест стенда
2025-12-11 10:51:39 +03:00
ddadmin
31171f84bc
Баг генерации bookings
2025-12-11 10:34:16 +03:00
ddadmin
dfd6eca760
Удобная команда остановки стенда без удаления
2025-12-10 23:04:45 +03:00
ddadmin
daed2313e7
Фикс создания connections
2025-12-10 22:58:19 +03:00
ddadmin
8fb78f9086
fix: добавленны airflow connections и обновлена структура запуска
2025-12-10 22:52:08 +03:00
ddadmin
fbf9b118e6
фикс вфп инициализации ddl в gp
2025-12-10 22:31:12 +03:00
ddadmin
29490828f4
Уход от запуска DAG за конкретную дату.
...
Теперь новый запуск генерирует и переливает новый, следующий день
2025-12-10 21:53:17 +03:00
ddadmin
c865fa282e
feat(dags): add ddl dag for gp and rename csv dq
2025-12-10 18:41:00 +03:00
ddadmin
c63084be09
ДОравботка структуры readme для лучшей читабильности
2025-12-10 17:33:55 +03:00
ddadmin
fe4bb4606f
Как сделать новый день
2025-12-10 17:13:08 +03:00
ddadmin
cacf989a9c
вынесли sql из dag в папку sql
2025-12-10 16:59:50 +03:00
ddadmin
c3d7759e6b
Переименование БД GP в gp_dwh
2025-12-09 10:09:46 +03:00
ddadmin
4515577b4a
Смена внешнего порта GreenPlum
2025-12-09 09:57:52 +03:00
ddadmin
8bc8e5cb3a
Улучшение документации по bookings
2025-12-08 23:34:39 +03:00
ddadmin
b56ea952e7
Подключение bookings db заработало
2025-12-08 23:31:13 +03:00
ddadmin
c17baf447d
bookings debug
2025-12-08 22:08:07 +03:00
ddadmin
c95dab6478
Доработки по генерации БД - в процессе
2025-12-08 18:26:10 +03:00
ddadmin
7f97654f0a
сгенерирована bookings db
2025-12-06 23:25:28 +03:00
ddadmin
ce6255f2cd
переименование стенда
2025-12-06 22:31:19 +03:00
ddadmin
aa31d4b9bb
Отладка доступа к /opt/airflow/data
2025-11-03 20:55:54 +03:00
ddadmin
42d5fcbc8a
Перекомпоновка документации
2025-10-19 00:00:37 +03:00
ddadmin
0dffd5df20
Первая публикация кода
2025-10-17 19:16:15 +03:00
ddadmin