Проектирование архитектуры хранилища данных

  • Продолжительность
    13 месяцев
  • Команда
    4 специалиста
  • Технологии
    Apache Spark, Apache Airflow, Python, Teradata, Greenplum, Hadoop

Задача

Мигрировать данные с нецелевых систем и разработать ETL-процессы с использованием фреймворков клиента

Решение

Команда ITFB Group полностью адаптировала и переписала ETL-процессы на другой язык программирования, а также разработала механизмы загрузки данных из всех источников

Результат

  • Оптимизация процессов загрузки и запросов позволили клиенту расширить возможности анализа данных
  • на 50% сократилось время выполнения различных процессов после оптимизации
У вас похожая задача?
Свяжитесь с нами