
Оптимизация пайплайна с Apache Iceberg и S3: как ускорить обработку Parquet в 60 раз | Кейс Data Engineering

Цели:
- Единая платформа анализа эффективности организации
- Мониторинг активности менеджеров по продажам
- Анализ поступлений и НДС
- Мониторинговая панель контрагентов
- Прозрачность данных: представляем новый портал для анализа коммерческой деятельности,
- Автоматизация бизнеса
Результаты:

Аналитический портал объединил в себе данные из различных систем учета, а также был дополнен прочими источниками. Система позволяет автоматически отслеживать выполнение плана продаж, рассчитывать премии менеджерам отдела продаж, оперативно получать очищенные данные по поступлениям в разрезе контрагента, проекта, временных промежутков с помощью BI-интрументов, а также формировать выгрузки из системы по целевым наборам данных.