feat(superset): подача дашборда «Бизнес-сюжеты»
- Зачем:
- экран отвечал только графиками: итога за период не было, доли категорий
читались по высоте столбиков, а известные пользователи лежали на нуле
рядом с посетителями.
- Что:
- добавлены ряд крупных чисел (выручка, заказы, средний чек, посетители),
кольцо долей категорий и линия доли известных пользователей;
- средний чек и доля известных заведены метриками датасетов, знаменатель
через `nullIf`: на пустом периоде деление Decimal на ноль в ClickHouse
роняет панель;
- фильтр «Период» сужает все панели, включая сверку по `order_day`;
- `label_colors` закрепляет цвет за категорией и за рядами трафика;
- деньги без копеек, единица в названии панели; подписи дат читаются как
даты; сводная сверки развернута классами по строкам и уместилась без
прокрутки;
- обновлены справочник Superset и глава путеводителя.
- Проверка:
- `make lint`;
- `superset import-directory /app/import --overwrite` на живом стенде, экран
снят в браузере: девять панелей отрисованы, цвет категории одинаков на
столбиках и в кольце;
- период 03.06–06.06 сузил все панели, включая сводную по `order_day`;
- `SUM(revenue) / nullIf(SUM(orders), 0)` на периоде без заказов возвращает
NULL, без `nullIf` — исключение 153.
Co-Authored-By: Claude Opus 5 (1M context) <noreply@anthropic.com>
This commit is contained in:
1 parent
3ad377e02e
commit
b6c10ecf21
14 files changed
+378
-32
No files matched your search
@@ -36,7 +36,7 @@ Airflow. В ClickHouse он не пишет ничего.
|
||||
| `metadata.yaml` | версия формата, `1.0.0`; больше в нем ничего нет |
|
||||
| `databases/clickhouse.yaml` | подключение к ClickHouse: URI без пароля и постоянный uuid |
|
||||
| `datasets/ClickHouse/*.yaml` | три витрины: `revenue_daily_v`, `purchase_vs_orders_v`, `daily_traffic_v` |
|
||||
| `charts/*.yaml` | три графика: столбики выручки, сводная таблица сверки, линии трафика |
|
||||
| `charts/*.yaml` | девять графиков: четыре крупных числа, столбики выручки и кольцо долей, сводная таблица сверки, линии трафика и доля известных |
|
||||
| `dashboards/business_stories.yaml` | дашборд «Бизнес-сюжеты» и раскладка панелей |
|
||||
|
||||
Связаны файлы не путями, а uuid. Датасет называет `database_uuid`, график —
|
||||
@@ -46,20 +46,51 @@ Airflow. В ClickHouse он не пишет ничего.
|
||||
|
||||
Uuid у стенда розданы рукой: общее начало
|
||||
`19600000-0000-4000-8000-`, дальше номер объекта в последнем блоке — `1`–`3`
|
||||
у датасетов, `101`–`103` у графиков, `201` у дашборда
|
||||
у датасетов, `101`–`109` у графиков, `201` у дашборда
|
||||
(`…-000000000101`). Экспорт из интерфейса приносит свои, сгенерированные;
|
||||
их заменяют на эти, иначе повторный импорт заведет вторую копию объекта вместо
|
||||
обновления первой.
|
||||
|
||||
Датасет несет русские имена колонок, формат денег и метрику — а график только
|
||||
Датасет несет русские имена колонок, формат чисел и метрики — а график только
|
||||
ссылается на них по имени. Значит, подпись или формат правятся в одном месте, а
|
||||
не в каждом графике.
|
||||
не в каждом графике. Два исключения проверены на живом стенде, Superset 6.1.
|
||||
Подписи оси график берет не из датасета, а из своего `y_axis_format`: без него
|
||||
ось выручки уходит в «1.2M». И разрез сводной таблицы подписан именем колонки
|
||||
(`mismatch_class`), хотя колонке даты в той же таблице русское имя достается.
|
||||
|
||||
Датасеты объявлены физическими (`schema: dm`, `sql: null`), хотя за именем стоит
|
||||
представление ClickHouse. Импорт в источник не ходит и разницы между таблицей и
|
||||
представлением не знает, а виртуальный датасет со своим SQL просто повторил бы
|
||||
запрос, который уже живет в `sql/ddl/60-dm-views.sql`.
|
||||
|
||||
## Из чего собран экран
|
||||
|
||||
Четыре строки панелей:
|
||||
|
||||
- ряд крупных чисел — выручка, заказы, средний чек, посетители;
|
||||
- выручка по дням и категориям, рядом доля категорий кольцом;
|
||||
- сводная сверки purchase и заказов;
|
||||
- посетители и известные пользователи, рядом доля известных.
|
||||
|
||||
Правая панель пары отвечает на вопрос «сколько из целого» и берет цвета левой:
|
||||
категория окрашена одинаково на столбиках и в кольце, доля известных — как
|
||||
линия известных пользователей рядом. Цвет закрепляет `label_colors` в
|
||||
`metadata` дашборда. Шесть категорий выписаны в него руками по каталогу
|
||||
генератора (`generator/src/clickstream_generator/catalog.py`): седьмая
|
||||
останется без закрепленного цвета, пока файл не поправят.
|
||||
|
||||
Средний чек и доля известных считаются метриками датасета —
|
||||
`SUM(revenue) / nullIf(SUM(orders), 0)` и то же для доли известных. Знаменатель
|
||||
обернут не зря: на периоде без заказов деление Decimal на ноль в ClickHouse —
|
||||
не `nan`, а исключение, и панель показала бы ошибку вместо пустоты. У витрины
|
||||
выручки есть готовая колонка `aov`, но среднее по ней дало бы другое число:
|
||||
день с тремя заказами получил бы тот же вес, что день с тремя сотнями.
|
||||
|
||||
«Период» — единственный фильтр дашборда, тип `filter_time` с пустой целью
|
||||
(`targets: [{}]`). Такой фильтр колонку не называет: он подставляет выбранный
|
||||
период в то временное условие, которое уже стоит у каждого графика. Поэтому
|
||||
сверка сужается по `order_day`, а остальные панели — по `report_date`.
|
||||
|
||||
## Импорт при каждой инициализации
|
||||
|
||||
Последняя строка `infra/superset/init.sh`:
|
||||
@@ -152,6 +183,17 @@ superset import-directory /app/import --overwrite
|
||||
завершается нулем в любом случае. Поэтому импорт проверяют глазами или
|
||||
запросом к API — но не тем, что команда отработала.
|
||||
|
||||
**Знак рубля приходит не из формата валюты.** Символ Superset берет у
|
||||
`Intl.NumberFormat` по коду валюты и английской локали стенда: код `RUB`
|
||||
печатается как «RUB», а знак «₽» вызов роняет, и форматирование молча
|
||||
откатывается к числу без валюты. Поэтому единица стоит в названии панели —
|
||||
«Выручка, ₽», — а метрика несет обычный формат `,d`.
|
||||
|
||||
**`label_colors` знает имя ряда, а не подпись.** Для разреза имя ряда — это
|
||||
значение колонки («Бытовая техника»), для графика без разреза — имя метрики
|
||||
(`known_share`), а не ее русская подпись. Цвет, закрепленный за подписью
|
||||
«Доля известных», не применяется.
|
||||
|
||||
**`--overwrite` синхронизирует датасет разрушительно.** Колонки и метрики
|
||||
берутся из YAML целиком: добавленная в интерфейсе метрика или подпись колонки
|
||||
исчезнет при следующем старте контейнера. Правка датасета — это правка файла.
|
||||
@@ -196,6 +238,13 @@ superset import-directory /app/import --overwrite
|
||||
каждой витрины, — поэтому фильтр периода дашборду разрешен, а кросс-фильтрация
|
||||
нет.
|
||||
|
||||
**Вкладки и блоки «что смотреть».** Вкладки были условным вариантом: их
|
||||
заводят, когда экран перестает читаться одним взглядом. Четыре строки панелей
|
||||
читаются сразу, поэтому вкладки спрятали бы половину экрана за щелчком без
|
||||
выигрыша. Блок с текстом «что смотреть» рядом с панелью означал
|
||||
бы, что панель сама себя не объясняет: тогда чинить надо название и подписи, а
|
||||
не дописывать к ним пояснение.
|
||||
|
||||
**Пороги и раскраска панелей.** Правило
|
||||
[спеки](../specs/2026-07-30-stand-v2-realism.md), раздел 9: на дашборд смотрят
|
||||
глазами, красное и зеленое живет в проверках.
|
||||
|
||||
@@ -1,21 +1,23 @@
|
||||
# Немного Superset
|
||||
|
||||
Superset показывает витрины слоя DM в виде графиков. К ClickHouse он
|
||||
подключается пользователем `bi`. На дашборде стенда «Бизнес-сюжеты» три
|
||||
графика:
|
||||
подключается пользователем `bi`. Дашборд стенда «Бизнес-сюжеты» собран из трех
|
||||
витрин:
|
||||
|
||||
| График | Витрина |
|
||||
| Витрина | Что показывает |
|
||||
|---|---|
|
||||
| «Выручка по дням и категориям» | `dm.revenue_daily_v` |
|
||||
| «Сверка purchase и заказов» | `dm.purchase_vs_orders_v` |
|
||||
| «Посетители и известные пользователи» | `dm.daily_traffic_v` |
|
||||
| `dm.revenue_daily_v` | выручку, заказы и средний чек крупными числами, выручку по дням и категориям столбиками, доли категорий кольцом |
|
||||
| `dm.purchase_vs_orders_v` | сводную сверки: сколько заказов дня попало в каждый класс расхождения |
|
||||
| `dm.daily_traffic_v` | число посетителей крупно, посетителей и известных пользователей по дням, отдельно — долю известных |
|
||||
|
||||
Слева от панелей стоит фильтр «Период». Он задает даты сразу для всех панелей.
|
||||
|
||||
## Как витрина становится графиком
|
||||
|
||||
От витрины до экрана три объекта Superset: датасет → график → дашборд. Датасет
|
||||
описывает витрину: задает русские имена колонок и формат денег. График
|
||||
ссылается на эти имена и задает способ показа. Дашборд собирает готовые графики
|
||||
на одном экране.
|
||||
описывает витрину: задает русские имена колонок, формат чисел и показатели —
|
||||
например, средний чек. График ссылается на эти имена и задает способ показа.
|
||||
Дашборд собирает готовые графики на одном экране.
|
||||
|
||||
## Стендовые объекты и ваши
|
||||
|
||||
|
||||
Reference in new issue
Block a user