От сырых данных к визуализации. Как превратить данные о 50 млн госконтрактов в понятные дашборды
Выступление посвящено демонстрации дашбордов, созданных на основе данных госконтрактов проекта «Госзатраты». В основе дашбордов — база данных о госконтрактах по 44 и 223-ФЗ, охватывающая 2014-2024 годы. Всего около 50 млн записей.
Дашборды разработаны с помощью инструмента мониторинга и визуализации данных — Grafana. В этой презентации мы разберем, что требуется для разработки интерактивных дашбордов. Подробно рассмотрим следующие этапы работы над дашбордом:
- Написание SQL-запросов к БД для формирования таблиц, необходимых для создания визуализаций.
- ETL-процесс для формирования аналитической витрины данных с предрассчитанными показателями.
- Создание и настройка графиков и диаграмм.
- Настройка фильтров и элементов управления, которые позволяют пользователям менять данные на дашборде в реальном времени, выбирая нужные параметры и срезы данных.