Внедрение единой BI-платформы на базе PIX BI

Целью проекта является создание единой аналитической платформы для сбора, верификации, обработки и визуализации данных, позволяющей бизнесу принимать обоснованные решения на основе актуальной, достоверной и проверенной информации. Проект решает задачи централизации аналитики, обеспечения доверия к данным, автоматизации подготовки отчётности и бесшовной интеграции аналитики в бизнес-процессы в качестве self-service инструмента для бизнес-юитов.

Экономия времени аналитиков: Экономия 20% времени за счёт ухода от файловых источников, оперативного обновления данных и техподдержки. Высвобождено 4224 часов в год (для 11 аналитиков).

РОИ за два года владения платформой  171,8%

• BI-платформа: PIX BI

• Оркестратор данных: Apache Airflow

• No-code слой для работы с данными: NocoDB

• СУБД: Postgres, ClickHouse

Проект был сопряжён с рядом вызовов: большой объём данных и низкая культура работы с ними, необходимость выстраивать потоки данных с нуля, а также формирование self-service-подхода — от анализа данных до построения отчётности. Это требует не только технических решений, но и изменения процессов работы и развития компетенций пользователей.

До начала проекта аналитика в компании велась в разрозненных системах: использовались Power BI и Apache Superset, при этом отсутствовал единый подход к источникам данных, визуализации и верификации. Учёт велся в разрозненных системах, значительная часть данных обрабатывалась вручную через файловые выгрузки, что создавало риски дублирования, расхождений и ошибок. Отсутствовала прозрачная родословная данных и автоматизированный контроль качества. Техническая поддержка используемых решений не оказывалась, что создавало операционные и инфраструктурные риски.

В рамках проекта была создана единая верифицированная аналитическая платформа, включающая несколько ключевых компонентов:

PIX BI — основная BI-платформа для визуализации и анализа данных. Развёрнута on-premise, что обеспечило полный контроль над данными и соответствие требованиям 152-ФЗ и 649-ФЗ.

Apache Airflow — развёрнут как оркестратор всех процессов загрузки, трансформации и верификации данных. Обеспечивает управление пайплайнами, мониторинг, повторные запуски при сбоях и полную наблюдаемость.

NocoDB — развёрнут как no-code слой для работы с данными, позволяющий бизнес-пользователям самостоятельно управлять справочниками и неквалифицированными данными.

Интеграция: Настроены прямые подключения к базам данных (Postgres, ClickHouse) и корпоративным системам (1С, Битрикс24, GLPI).

Централизация и верификация: Создан единый источник данных с многоуровневой верификацией: контроль целостности на этапе ETL

Публикация через iframe: Отчёты и дашборды встраиваются в корпоративные порталы и CRM через iframe, обеспечивая бесшовную интеграцию аналитики в бизнес-процессы. Это позволяет сотрудникам получать актуальную аналитику в привычном интерфейсе без переключения между системами, а также обеспечивает единообразие визуализации и исключает расхождения в трактовке данных между подразделениями.

Перенос данных: Осуществлён перенос исторических данных и дашбордов ряда направлений из старых систем, с пересмотром источников и повышением автоматизации сбора данных.

Процессы: инструмент стал централизованным, аналитика работает в режиме self-service. Бизнес-процессы работы с данными вышли на более квалифицированный уровень: файловый обмен сведён к минимуму в пользу прямой интеграции с базами данных, а доступность данных обеспечена благодаря Iframe.

Проект является первым этапом построения единого дата-хаба: внедрённая BI-платформа, Airflow и NocoDB стали основой для будущего централизованного хранилища- КХД, что обеспечит бесшовную интеграцию, масштабируемость и единое пространство для сбора, верификации, хранения и анализа всех данных Компании.

Свердловская область