Интеграция данных на базе решения Talend
АудитО проекте
Провели аудит существующего интеграционного решения на базе Talend Data Integration, разработав предложения по его модернизации
Срок 3 месяца
Клиент Leroy Merlin
# Java, Talend, Интеграция, ETL, Аудит
Задача и решение
Задача
Для передачи данных из магазинов в финансовую систему (Oracle ERP) российское подразделение Леруа Мерлен использует ETL решение на базе джобов (jobs), созданных в Talend Open Studio. Внесение рутинных изменений в интеграционные потоки занимает продолжительное время по причине необходимости обращаться в головную компанию во Франции. Необходим выбор между модернизацией существующего решения или его заменой.
Устаревшая версия Talend Open Studio (v.5.1.1) не позволяет применять современные компоненты ETL.
Дополнительные проблемы создает отсутствие документации (имеются только комментарии разработчика на французском языке).
Решение
Совместно с командой Леруа Мерлен проведен аудит исходного кода и ревью ETL-джобов Talend, использующихся для передачи данных из магазинов в Oracle ERP.
Подготовлено заключение, содержащее описание логики интеграционных потоков AS IS.
Совместно с вендором (компанией Talend) предложены меры по модернизации системы, включающие в себя переход на платформу Talend Data Fabric.