Data Engineer (Google Cloud)
DCG sp. z o.o.
23500-25200 PLN miesięcznie (B2B)
Czym będziesz się zajmować?
- Budowanie rozwiązań klasy Data Lake i DWH oraz procesów zasilania danych zarówno on-line, jak i off-line
- Projektowanie i realizacja rozwiązań informatycznych w obszarze zasilania danych
- Analizowanie danych oraz przygotowywanie modeli logicznych i fizycznych
- Strojenie zapytań SQL na bazach relacyjnych i hurtownianych w środowiskach on-prem oraz GCP
- Tworzenie przepływów off-line i on-line w narzędziach on-prem oraz GCP
- Tworzenie rozwiązań do ładowania danych w językach Python i Rust dla danych strukturalnych i niestrukturalnych
- Przygotowywanie datamartów tematycznych na bazach relacyjnych i kolumnowych
- Opracowywanie koncepcji oraz implementowanie rozwiązań w oparciu o wymagania i potrzeby biznesowe
- Usuwanie incydentów oraz udział w rozwiązywaniu problemów
- Wspieranie testów i wdrożeń zmian w zakresie procesów zasilania danych
- Wspieranie serwisowania wdrożonego oprogramowania
- Praca zgodnie z modelem DevSecOps
Kogo poszukujemy?
- Znajomość aspektów związanych z budową pipeline-ów zasilających ETL/ELT
- Doświadczenie w budowaniu i projektowaniu rozwiązań Data Lake i DWH
- Znajomość technologii wykorzystywanych w ramach architektury sterowanej zdarzeniami takich jak np. Kafka, Pub/Sub
- Znajomość aspektów związanych z budową rozwiązań BigData wykorzystujących możliwości GenAI
- Znajomość Google BigQuery
- Znajomość Kubernetes (najlepiej Google Kubernetes Engine i OpenShift)
- Znajomość relacyjnych baz danych Oracle i PostgreSQL (projektowanie, budowa i tuning baz danych)
- Biegła znajomość Python i/lub Rust
- Dobrze znasz Apache AirFlow
Mile widziane:
- Wiedza z zakresu: koncepcji data mesh, baz wektorowych i grafowych
- Znajomosć Apache Spark - najlepiej GCP Data Proc; Apache Beam – najlepiej GCP DataFlow; AutomateNow; Informatica Power Center
Czego wymagamy?
Znajomości:
Mile widziane:
Języki:
- Polski
- Angielski
Jakie warunki i benefity otrzymasz?
- 140-150 PLN godzinowo (B2B)
- B2B - Stałe godziny pracy (100%)
- Praca zdalna: Możliwa częściowo
- Pakiet sportowy
Gdzie będziesz pracował?
Centrum, Warszawa lub hybrydowo
Kim jesteśmy? – DCG sp. z o.o.
DCG to przestrzeń, w której spotykają się potrzeby biznesu i ambicje ludzi. Znamy wartość dobrze dopasowanej współpracy, dlatego pomagamy kandydatom znaleźć środowisko, w którym będą mogli rozwinąć skrzydła, a firmom - zbudować zespoły, które naprawdę działają. Pracujemy blisko ludzi i organizacji, uważnie słuchając i reagując na to, co dla nich ważne. Dzięki temu wspólnie tworzymy trwałe i wartościowe relacje, które procentują na lata.