01 Zakres zadań
- Długofalowa współpraca z międzynarodową, topową firmą consultingową, świadczącą usługi IT dla dużych i średnich firm z różnorodnych sektorów.
- Projektowanie, rozwój i wdrażanie zautomatyzowanych rozwiązań testowych dla procesów ETL oraz integracji danych.
- Przeprowadzanie testów funkcjonalnych i niefunkcjonalnych w środowiskach Azure Databricks oraz Azure Data Factory.
- Weryfikacja i walidacja procesów pobierania, transformacji oraz ładowania danych (ingestion, transformation, loading) z wielu źródeł.
- Tworzenie i utrzymywanie frameworków automatyzacji testów dedykowanych dla platform danych.
- Pisanie złożonych zaptań SQL w celu analizy danych, ich walidacji oraz badania defektów.
- Wykorzystanie języka Python do automatyzacji testów danych, ich porównywania, walidacji oraz generowania raportów.
- Przeprowadzanie walidacji danych typu source-to-target oraz dbanie o spójność danych pomiędzy systemami.
- Tworzenie i wykonywanie przypadków testowych dla pipeline w Azure Databricks i Azure Data Factory.
- Tworzenie syntetycznych danych testowych oraz ich maskowanie (data masking).
- Wsparcie inicjatyw CI/CD oraz automatyzacji w obszarze testowania platform danych.
- Tworzenie przejrzystej, dokładnej i kompleksowej dokumentacji testowej.
