Технологии Apache Spark, Apache Airflow, Python, Teradata, Greenplum, Hadoop
Задача
Мигрировать данные с нецелевых систем и разработать ETL-процессы с использованием фреймворков клиента
Решение
Команда ITFB Group полностью адаптировала и переписала ETL-процессы на другой язык программирования, а также разработала механизмы загрузки данных из всех источников
Результат
Оптимизация процессов загрузки и запросов позволили клиенту расширить возможности анализа данных
на 50% сократилось время выполнения различных процессов после оптимизации