- Зачем: - необходимо дать студенту практический инструмент для понимания разделения storage, catalog и compute. - Что: - создан notebooks/02_lakehouse_mental_model.ipynb с демонстрацией записи в Spark и инспекцией в PostgreSQL и MinIO. - в ноутбук добавлена таблица сравнения Lakehouse vs классические СУБД. - реализованы механизмы идемпотентности (CREATE OR REPLACE TABLE) и автоматической очистки ресурсов. - обновлен статус Модуля 2 в планах на "Ready for validation". - Проверка: - проверена структура JSON ноутбука, наличие всех демонстрационных и самостоятельных ячеек, а также корректность путей к MinIO (prefix warehouse/).
1.2 KiB
1.2 KiB
Планы работ
Этот каталог хранит внутренние рабочие планы по развитию учебного курса.
Правила хранения
- Формат:
living docs. - История изменений хранится в git.
- Именование файлов:
module-NN-<english-slug-from-module-title>.md. - В каждом плане фиксируются
СтатусиПоследнее обновление.
Оглавление
| Модуль | План | Статус | Целевые артефакты | Обновлён |
|---|---|---|---|---|
| 1. Вход в стенд и базовая диагностика | module-01-environment-and-basic-diagnostics.md | Ready for validation | START_HERE.md, notebooks/01_environment_and_smoke_test.ipynb, src/spark/cluster_smoke.py |
2026-03-06 |
| 2. Ментальная модель Lakehouse: storage, catalog, compute | module-02-lakehouse-mental-model.md | Ready for validation | notebooks/02_lakehouse_mental_model.ipynb |
2026-03-07 |