Сигналы качества данных и инцидентов на дашбордах: модалка инцидента и шторки на графиках

Контекст

Почему это важно

Когда дата-платформа сообщает об активном инциденте на любом датасете, от которого зависит дашборд, при открытии дашборда автоматически всплывает модалка «Примечание о качестве данных». Это не общий варнинг: модалка явно указывает дату инцидента и перечисляет по именам каждый график на дашборде, который тянет данные из заафекченного датасета — аналитик видит точный «битый периметр» ещё до того, как взял в руки первое число. Модалку можно закрыть (крестик в углу), но сам сигнал — нет: в шапке дашборда остаётся оранжевый бейдж «Невалидные данные: N графиков», по которому модалка снова открывается одним кликом, и аналитик не забудет, что дашборд работает в degraded-режиме.

После закрытия модалки источником истины о «рисковом срезе» становится сам дашборд. Каждый заафекченный график рендерится со шторкой: на большинстве плиток это тонкое предупреждение «Данные могут быть неточными» с кнопкой «Просмотреть все равно», на более критичных тайлах — расширенный вариант «Этот график может содержать неверные данные, поскольку датасет имеет активный инцидент». Шторка действует на уровне «график × пользователь»: закрытие на одном графике открывает данные под ним только текущему аналитику и не отключает молча предупреждение для остальных, а при следующем заходе на дашборд полный сигнал возвращается. Графики, чьи датасеты не попали в инцидент, рендерятся как обычно — никакого глобального блэкаута дашборда и никакого «всё или ничего».

Вся эта поверхность завязана на модель инцидентов нашей внутренней системы качества данных и observability — Superset слушает активные инциденты по датасетам, от которых зависит дашборд, и режим модалки + шторок включается только пока хотя бы один из этих датасетов в открытом инциденте. Когда инцидент закрылся апстримом, бейдж и шторки уходят при следующем открытии дашборда. В базовом Apache Superset нет ни модели инцидентов, ни DQ-сигнала на уровне датасета, ни оверлея на уровне графика — у аналитика нет внутри продукта способа понять, что сегодняшние числа собраны на заведомо битом прогоне пайплайна.