Развитие проекта Big Data

  • Продолжительность
    9 месяцев
  • Команда
    10 специалистов
  • Технологии
    Apache Hadoop, HDFS, HBase, Solr, Apache Oozie, MapReduce, Apache Spark, Pig!, Python, Hive, Vue.js, nginx, Java, Spring Boot, web, Apache Tomcat, PostgreSQL

задача

Разработать систему обмена и обработки данных для Правительства Москвы, которая должна анализировать обезличенные большие данные о населении, собираемые со всех ИТ-систем города, а также приобретаемые у операторов «большой четверки». На основе полученных данных система должна позволять руководству прорабатывать новые инициативы в сфере транспортной логистики, демографии, социальных услуг и статистических данных.

Решение

В результате система, разработанная специалистами ITFB Group, обеспечивает:
  • Консолидацию, унификацию и хранение данных объект-событие, полученных из информационных систем Правительства Москвы
  • Упорядочивание Больших данных, расчет достоверности значений атрибутов, оценку полноты их состава, дообогащение готовой и синтетической информацией
  • Предоставление актуальных данных в различных срезах для машинного обучения и анализа
  • Удобный пользовательский интерфейс с возможностью управления метаданными, выполнения поиска и навигации по данным, формирования отчетов и управления статистическими и аналитическими витринами
  • Все необходимые методы аутентификации, авторизации и идентификации для повышения уровня информационной безопасности
  • Унифицированный API для внешних систем.
У вас похожая задача?
Свяжитесь с нами