W skrócie
- Zadania: Twórz niezawodne potoki danych i modele raportowania w Snowflake.
- Firma: Innowacyjna firma technologiczna z dynamiczną kulturą pracy.
- Benefity: Konkurencyjne wynagrodzenie, elastyczny grafik, ubezpieczenie zdrowotne i rozwój zawodowy.
- Pozostałe informacje: Możliwości rozwoju kariery w dynamicznym środowisku.
- Dlaczego ta praca: Pracuj nad nowoczesnymi projektami i kształtuj nowy zespół od podstaw.
- Kwalifikacje: Doświadczenie w inżynierii danych oraz umiejętności współpracy w zespole.
Przewidywane wynagrodzenie mieści się w przedziale 63000 - 77000 zł za rok.
Poszukujemy Senior Data Engineer (Kafka & Snowflake) do nowo tworzonego zespołu ds. raportowania regulacyjnego w globalnej firmie technologii płatniczych. W tej roli będziesz pracować z małą grupą inżynierów oraz zespołem klienta, aby budować niezawodne potoki danych na Kafka oraz modele raportowania w Snowflake, zapewniając dokładność, audytowalność i zgodność danych w raportach regulacyjnych.
Obowiązki:
- Potoki strumieniowe: Projektowanie i budowanie przepływów danych opartych na Kafka z użyciem Kafka Streams i/lub Kafka Connect, wybierając odpowiednie gwarancje dostawy.
- Odporne przetwarzanie zdarzeń: Implementacja obsługi błędów z powtórzeniami, kolejkami martwych wiadomości oraz ponownym przetwarzaniem.
- Raportowanie danych w Snowflake: Modelowanie faktów, wymiarów i SCD dla raportowania regulacyjnego.
- Dokładność danych i rekonsyliacja: Implementacja rekonsyliacji, walidacji i deduplikacji.
- Wydajność i monitorowanie: Monitorowanie i dostrajanie opóźnienia konsumentów oraz optymalizacja zapytań w Snowflake.
- Tworzenie nowego zespołu: Pomoc w definiowaniu procesów i architektury od podstaw w nowo utworzonym zespole.
Wymagania:
- Doświadczenie komercyjne jako inżynier danych lub oprogramowania w budowaniu produkcyjnych potoków danych.
- Ekspertyza w Kafka: Silna znajomość architektury Kafka.
- Zaawansowane SQL w Snowflake: Złożone zapytania oraz optymalizacja zapytań.
- Platforma Snowflake: Praktyczne doświadczenie z Streams & Tasks, Snowpipe i Time Travel.
- Modelowanie danych i jakość raportowania: Doświadczenie w modelowaniu danych dla raportowania.
- Własność i komunikacja: Niezależność i proaktywność w nowo utworzonym zespole.
Miło widziane:
- Apache Flink: Doświadczenie z API DataStream lub Flink SQL.
- Ecosystem Java: Java 11/17+, Spring Boot i Spring Kafka.
- Platforma i dostarczanie: Kubernetes, CI/CD, Git i doświadczenie w chmurze.
- Regulacyjne i finansowe raportowanie: Doświadczenie w raportowaniu bankowym lub płatniczym.
Oferujemy:
- Możliwość pracy nad nowatorskimi projektami.
- Pracę w wysoko zmotywowanym i zaangażowanym zespole.
- Konkurencyjne wynagrodzenie.
- Elastyczny grafik.
- Pakiet benefitów - ubezpieczenie zdrowotne, sport.
- Wydarzenia integracyjne.
- Możliwości rozwoju zawodowego.
- Biuro dobrze wyposażone.
O nas: Grid Dynamics (NASDAQ: GDYN) jest wiodącym dostawcą usług doradztwa technologicznego, inżynierii platform i produktów, AI oraz zaawansowanej analityki. Łącząc wizję techniczną z umiejętnościami biznesowymi, rozwiązujemy najważniejsze wyzwania techniczne i umożliwiamy pozytywne wyniki biznesowe dla przedsiębiorstw przechodzących transformację biznesową.
Senior Data Engineer in Warsaw – pracodawca: Grid Dynamics
Grid Dynamics w Warszawie to doskonały pracodawca, który oferuje elastyczne godziny pracy oraz dynamiczne środowisko sprzyjające rozwojowi zawodowemu. Pracując z nami jako Senior Big Data Engineer, będziesz miał okazję współpracować z utalentowanym zespołem, rozwijając swoje umiejętności w zakresie technologii big data, takich jak Spark i Scala, w inspirującej atmosferze innowacji i współpracy.
