01 Zakres zadań
- Projektowanie, budowa i utrzymanie pipeline’ów danych z systemów (SAP, MES, systemy zewnętrzne) do warstwy analitycznej
- Implementacja procesów ingestion oraz transformacji danych (bronze/silver) z wykorzystaniem PySpark, Spark SQL i Python
- Administracja i rozwój środowiska Microsoft Fabric / Azure (workspace’y, zasoby, bezpieczeństwo, monitoring kosztów)
- Monitoring pipeline’ów, obsługa alertów i reagowanie na incydenty
- Współpraca z analitykami przy budowie modeli danych (warstwa gold)
- Zapewnienie jakości danych oraz optymalizacja wydajności procesów przetwarzania
