ddmitry/mini-lakehouse-lab
1
0 Fork 0
Code Issues Pull Requests 1 Actions Packages Projects Releases Wiki Activity

docs(course): record Spark session fix completion

Browse Source
This commit is contained in:
ddadmin committed 2026-09-15 08:41:06 -04:00
1 parent a5244f8a0b
commit 2cdecd82f8
1 file changed
+6 -7
Download Patch File Download Diff File Expand all files Collapse all files
plans/course-roadmap.md
+6 -7
View File
@@ -1,6 +1,6 @@
# План развития курса «Lakehouse без магии» # План развития курса «Lakehouse без магии»
Статус: исправление подключения Spark готово к проверке; остальные работы запланированы. Статус: подключение Spark исправлено; следующая работа — практика настройки сессии.
Последнее обновление: 2026-09-15. Последнее обновление: 2026-09-15.
Здесь собираем отзывы студентов, выбираем следующие улучшения и объясняем их порядок. Подробные задания, критерии приёмки и актуальный статус исполнения хранятся в [Gitea Issues](https://git.dementev.space/ddmitry/mini-lakehouse-lab/issues). Здесь собираем отзывы студентов, выбираем следующие улучшения и объясняем их порядок. Подробные задания, критерии приёмки и актуальный статус исполнения хранятся в [Gitea Issues](https://git.dementev.space/ddmitry/mini-lakehouse-lab/issues).
@@ -22,7 +22,7 @@
### 1. Проверить и исправить создание Spark-сессий ### 1. Проверить и исправить создание Spark-сессий
**Статус:** исправление проверено в ветке `1-spark-session-master`, ожидает слияния. **Статус:** выполнено, [MR #3](https://git.dementev.space/ddmitry/mini-lakehouse-lab/pulls/3).
**Задача:** [#1 — подключение Spark-сессий в новом ядре](https://git.dementev.space/ddmitry/mini-lakehouse-lab/issues/1). **Задача:** [#1 — подключение Spark-сессий в новом ядре](https://git.dementev.space/ddmitry/mini-lakehouse-lab/issues/1).
@@ -32,14 +32,13 @@
**Проверено:** инициализация каждого ноутбука в отдельном процессе, **Проверено:** инициализация каждого ноутбука в отдельном процессе,
вычисление на кластере, повторный `getOrCreate()`, запись и чтение тестовой вычисление на кластере, повторный `getOrCreate()`, запись и чтение тестовой
Iceberg-таблицы. Перед закрытием #1 нужно опубликовать в задаче результаты Iceberg-таблицы. Результаты проверок и их ограничения приведены в комментарии к #1.
проверок и их ограничения.
### 2. Добавить практику «Как настроен Spark в нашем стенде» ### 2. Добавить практику «Как настроен Spark в нашем стенде»
**Статус:** запланировано; зависит от результата работы 1. **Статус:** запланировано; можно приступать после завершения #1.
**Задача:** [#2 — практика базовой настройки SparkSession](https://git.dementev.space/ddmitry/mini-lakehouse-lab/issues/2), заблокирована задачей #1. **Задача:** [#2 — практика базовой настройки SparkSession](https://git.dementev.space/ddmitry/mini-lakehouse-lab/issues/2).
Практику разместить в начале модуля 3. Ориентир — 20–30 минут; фактическую длительность проверить при прохождении. Практику разместить в начале модуля 3. Ориентир — 20–30 минут; фактическую длительность проверить при прохождении.
@@ -81,4 +80,4 @@ Iceberg-таблицы. Перед закрытием #1 нужно опубли
## Выпущенные улучшения ## Выпущенные улучшения
Доработки из этого плана ещё не выпущены. - [#1](https://git.dementev.space/ddmitry/mini-lakehouse-lab/issues/1): все восемь ноутбуков подключаются к Spark-кластеру при создании сессии в новом процессе; настройки собраны в `spark/spark-defaults.conf`.