Senior DevOps Engineer (AWS)

Charakterystyka:

• Miejsce pracy: 100% zdalnie
• Start: ASAP (max. 30 dni kalendarzowych wypowiedzenia)
• Współpraca: B2B z ITFS (bez płatnych urlopów)
• Wynagrodzenie: 130-150 zł/h + VAT
• Branża: ubezpieczeniowa (w UK)
• Projekt: budowa, utrzymanie i optymalizacja całej platformy danych w chmurze tak, aby wspierała analitykę, przetwarzanie dużych danych i pipeline’y ETL/ELT
• Proces rekrutacyjny: krótka rozmowa z ITFS (ok. 15 min) ➡ 2 rozmowy techniczno-projektowe z Klientem ➡ decyzja

Zadania:

• Tworzenie i utrzymanie skalowalnej infrastruktury danych w AWS z wykorzystaniem Terraform i najlepszych praktyk IaC
• Budowa i zarządzanie pipeline’ami CI/CD dla infrastruktury i procesów danych
• Wdrażanie i utrzymanie usług danych w kontenerach Docker i zarządzaniu klastrami Kubernetes (EKS)
• Monitoring i obserwowalność pipeline’ów i systemów danych w celu niezawodności i wydajności
• Orkiestracja i utrzymanie workflow danych, wsparcie transformacji danych w dbt
• Współpraca z zespołami DE w zakresie optymalizacji środowisk lakehouse/data warehouse i procesów ETL/ELT
• Wdrożenie dobrych praktyk DevOps i DataOps, aby zmniejszyć koszty utrzymania i zwiększyć stabilność platformy

Wymagania:

• Min. 6-7 lat doświadczenia na stanowisku DevOpsa
• Silne doświadczenie DevOps w AWS z wykorzystaniem Infrastructure as Code (Terraform), wspierające skalowalne platformy danych (preferowany Databricks, dopuszczalny Snowflake)
• Praktyczne doświadczenie w budowaniu i zarządzaniu pipeline’ami CI/CD przy użyciu Jenkins i/lub GitHub Actions dla infrastruktury oraz obciążeń danych
• Praktyczna znajomość Kubernetes (EKS) oraz konteneryzacji (Docker)
• Monitoring i obserwowalność z użyciem CloudWatch i Grafana w celu zapewnienia niezawodności oraz wydajności pipeline’ów danych
• Doświadczenie we wspieraniu pipeline’ów dbt oraz orkiestracji workflow przy użyciu Airflow (lub podobnych narzędzi jak Prefect/Dagster)
• Przynajmniej podstawowe umiejętności w Python oraz SQL, umożliwiające współpracę z zespołami DE
• Doświadczenie we współpracy z zespołami danych w zakresie zarządzania i optymalizacji infrastruktury danych, środowisk lakehouse/warehouse oraz procesów ETL/ELT
• Znajomość j. angielskiego na poziomie min. B2 (praca w środowisku międzynarodowym)