Создание системы непрерывной обработки больших данных с оборудования сети связи

ЗАДАЧА
Автоматизация процесса сбора данных с целью поиска события в течение 30 минут в потоке информации более миллиарда сообщений, поступающих со скоростью 600 Гб/день. А также в течение 2 часов в 3х летнем архиве объемом более 600 Тб.

РЕШЕНИЕ

Команда ITFB разработала набор микросервисов для онлайн-индексирования больших данных, выделения метаинформации и полнотекстового поиска. В рамках проекта реализованы подсистемы, функционирующие 24х7 и позволяющие автоматизировать процессы сбора, предварительной обработки, хранения, отображения и предоставления (скачивания и отправки) информации с оборудования средств связи:

• Система учета действий персонала, обслуживающего средства связи
• Система учета сведений об иностранных исполнителях работ по обслуживанию средств связи
• Система защиты персональных данных и безопасности, используемые в рамках автоматизированных бизнес-процессов
• Система взаимодействия с ИТ-ландшафтом оператора
• Сервисные системы и сервисы, обеспечивающие мониторинг и непрерывную работу систем учета.