W skrócie
- Zadania: Buduj i utrzymuj potoki danych oraz optymalizuj wydajność BigQuery.
- Firma: Dynamiczny zespół w branży finansowej i ubezpieczeniowej.
- Benefity: Pakiet benefitów, w tym opieka medyczna i ubezpieczenie na życie.
- Pozostałe informacje: Możliwości rozwoju osobistego i zawodowego w wysokowydajnym środowisku.
- Dlaczego ta praca: Pracuj z nowoczesnymi technologiami i wpływaj na rozwój branży.
- Kwalifikacje: 5+ lat doświadczenia w inżynierii danych i znajomość GCP.
Przewidywane wynagrodzenie mieści się w przedziale 123750 - 151250 zł za rok.
Dla naszego klienta poszukujemy kandydatów na stanowisko Data Architect GCP (M/K).
Co będziesz robić:
- Budować i utrzymywać potoki danych przy użyciu dbt oraz orkiestrację workflow z Apache Airflow / Cloud Composer
- Rozwijać komponenty przetwarzania danych w Pythonie i PySpark
- Projektować i rozwijać warstwy Gold i Platinum architektury medalionowej w BigQuery
- Optymalizować wydajność i koszty BigQuery poprzez partycjonowanie, klastrowanie i praktyki FinOps
- Budować i utrzymywać potoki CI/CD przy użyciu GitHub Actions oraz zarządzać infrastrukturą jako kodem z Terraform
- Implementować model bezpieczeństwa danych, w tym IAM, RBAC/ABAC, tagi polityki i DLP
- Przyczyniać się do standardów zarządzania danymi, w tym Dataplex, zarządzanie metadanymi i ślad danych
- Przeprowadzać przeglądy kodu i pomagać w definiowaniu standardów inżynieryjnych zespołu oraz najlepszych praktyk
- Zapewniać wsparcie techniczne dla zespołów domenowych w modelu Hub & Spoke oraz promować najlepsze praktyki inżynierii danych na GCP
Czego szukamy:
- 5+ lat doświadczenia w inżynierii danych, w tym praktyczne doświadczenie produkcyjne z GCP
- Silne, udokumentowane doświadczenie projektowe z następującymi technologiami i obszarami:
- BigQuery – modelowanie warstwy danych, partycjonowanie, klastrowanie i optymalizacja kosztów
- dbt – modele, testy i dokumentacja
- Apache Airflow / Cloud Composer
- Python i PySpark
- SQL
- Terraform
- Doświadczenie w budowaniu rozwiązań lakehouse / hurtowni danych (DWH) przy użyciu architektury medalionowej
- Doświadczenie z CI/CD (najlepiej GitHub Actions), Git oraz testowaniem i monitorowaniem potoków
- Praktyczna wiedza o bezpieczeństwie danych na GCP, w tym IAM, tagi polityki / bezpieczeństwo na poziomie kolumny oraz bezpieczeństwo na poziomie wiersza
- Bardzo dobra znajomość języka angielskiego
Miłe do posiadania:
- Doświadczenie z Dataplex / Data Catalog, ślad danych i zarządzanie metadanymi
- Znajomość Cloud DLP / Ochrona danych wrażliwych
- Doświadczenie z Dataproc i Pub/Sub
- Doświadczenie w sektorze bankowym lub innym regulowanym przemyśle
- Doświadczenie w pracy w modelu zorientowanym na platformę, takim jak Hub & Spoke, data mesh lub produkty danych
- Ważna certyfikacja Google Professional Data Engineer
Co oferujemy:
- Pakiet benefitów (medyczne, sportowe, subsydia na lunch, ubezpieczenie na życie)
- Możliwość bycia częścią dynamicznego i szybko rozwijającego się zespołu, który koncentruje się na przekształcaniu krajobrazu usług finansowych i ubezpieczeniowych w Polsce
- Praca w środowisku wysokiej wydajności z możliwościami osobistego i zawodowego rozwoju
- Współpraca z seniorami i ekspertami branżowymi w celu wywarcia realnego wpływu
- Konkurencyjny pakiet wynagrodzeń, w tym premie oparte na wynikach i benefity
- Oferta dotyczy pracy na stałe.
Data Architect GCP (M/K) in Warsaw – pracodawca: Experis
Jako pracodawca oferujemy wyjątkowe możliwości rozwoju w dynamicznym środowisku pracy, które sprzyja innowacjom i współpracy. Nasza kultura opiera się na zaufaniu i wsparciu, co pozwala pracownikom na realizację ambitnych projektów w międzynarodowym zespole. Dodatkowo, elastyczność pracy zdalnej oraz dostęp do najnowszych narzędzi technologicznych sprawiają, że praca w naszej firmie jest nie tylko satysfakcjonująca, ale także inspirująca.
Naszym zdaniem te umiejętności pozwolą ci błyszczeć jako Data Architect GCP (M/K) in Warsaw
GCP
Data Engineering
BigQuery
dbt
Apache Airflow
Cloud Composer
Python
