Разработка хранилища данных для СИБУР: вклад ITFB Group в развитие аналитической платформы

Для СИБУРа, как для высокотехнологичной производственной компании, оперативный доступ к достоверным данным — одно из ключевых условий эффективного управления. Однако до начала проекта внутри организации отсутствовал единый источник актуальной информации о производственных показателях. Это ограничивало возможности для быстрой реакции на отклонения и затрудняло принятие управленческих решений на ежедневной основе.

Чтобы выстроить системный подход к анализу данных и повысить прозрачность производственных процессов, в компании было принято решение о создании централизованного хранилища данных. Для реализации этой задачи СИБУР привлёк внешних подрядчиков под управлением собственной ИТ-службы. Команда ITFB Group стала частью этого важного и масштабного проекта.

До начала проекта в структуре СИБУРа отсутствовала единая оперативная отчётность по эффективности процессов на производственных площадках. Данные с оборудования собирались, но не консолидировались должным образом, что не позволяло использовать их для быстрой и точной оценки текущей ситуации.

Руководству требовался инструмент, который позволил бы:

• визуализировать ключевые метрики в понятном виде;
• получать их своевременно для ежедневного использования на планёрках;
• формировать единую аналитическую базу для управленческих решений.

В рамках проекта под руководством ИТ-службы СИБУР была сформирована объединенная команда из специалистов СИБУРа и экспертов ITFB Group и других подрядчиков. Команда предложила поэтапный подход к разработке хранилища данных: проект велся по предметным областям и по отдельным заводам, с унификацией структуры данных на уровне витрин для всех производственных площадок. Это решение позволило учесть специфику каждого предприятия и при этом сохранить масштабируемость системы.

Что было сделано:

• Разработаны дашборды для 13 различных предприятий.
• Устранены устаревшие скрипты и процессы, реализован переход на промышленную эксплуатацию с применением CI/CD.
• Применен поэтапный подход к построению витрин по предметным областям и заводам с унифицированной структурой данных.
• Обеспечена миграция с Tableau на FineBI, с учетом особенности функционала и ограничений использования.
• Проведено обучение сотрудников СИБУРа по настройке маппингов бизнес-метрик.

Технологический стек включал СУБД Vertica для хранения и обработки данных, Apache Airflow — для организации пайплайнов, Tableau и FineBI — для визуализации и аналитики. Одной из особенностей проекта стала миграция отчетности с Tableau на FineBI, с учетом ограничений функционала по разметке и объёму использования данных.

Особое внимание было уделено обучению пользователей — объединенные команды разработчиков, включая ITFB Group провели обучение по настройке маппингов бизнес-метрик и корректному отображению показателей, получаемых из разных источников. Несмотря на сложность технической архитектуры, проект был реализован практически без отклонений от графика — благодаря четкой координации и активному участию со стороны СИБУРа.

Результат внедрения уже заметен в повседневной работе: данные с производств выводятся на дашборды и используются на утренних совещаниях для анализа KPI, что существенно увеличило скорость реакции на проблемы и улучшило общее качество управленческих решений.

• Построены продуктовые витрины общим объёмом 4 ТБ.
• Обработано 40 ТБ сырых данных.
• В дашбордах отображается 200 подметрик и 10 ключевых метрик.
• Сокращено время на подготовку аналитики.
• Повышена прозрачность процессов и управляемость производством.
• Существенно увеличена скорость реакции на производственные отклонения.

Для ITFB Group этот проект стал ярким примером того, как инженерная точность, грамотная архитектура и ориентация на потребности бизнеса позволяют создавать действительно полезные и живые решения.