W skrócie
- Zadania: Twórz i rozwijaj skalowalne pipeline'y danych oraz automatyzuj procesy związane z danymi.
- Firma: Zalando, wiodący europejski detalista mody online.
- Benefity: Atrakcyjne wynagrodzenie, elastyczne godziny pracy i możliwości rozwoju zawodowego.
- Pozostałe informacje: Dynamiczne środowisko z szansami na rozwój kariery w nowym zespole.
- Dlaczego ta praca: Pracuj z AI i wpływaj na doświadczenia klientów w branży mody.
- Kwalifikacje: 5+ lat doświadczenia jako inżynier danych oraz umiejętności w PySpark i SQL.
Przewidywane wynagrodzenie mieści się w przedziale 56250 - 68750 zł za rok.
Wraz z naszym partnerem, wiodącym europejskim detalistą internetowym w branży mody i urody, poszukujemy Senior Data Engineer do nowej inicjatywy skoncentrowanej na tożsamości klientów i interoperacyjności danych. Klienci wchodzą w interakcję z platformą za pośrednictwem sieci, aplikacji, CRM i kanałów marketingowych, a każdy system identyfikuje ich inaczej. Będziesz pomagać w projektowaniu i budowaniu fundamentów danych, które łączą i uzgadniają te identyfikatory. To umożliwia niezawodną analizę ścieżki klienta, personalizację oraz zgodne z przepisami o ochronie prywatności wykorzystanie danych na dużą skalę.
Częścią roli jest zastosowanie AI do samych danych. Będziesz korzystać z narzędzi opartych na LLM i automatyzacji, aby przyspieszyć powtarzalne prace, takie jak czyszczenie danych, usuwanie duplikatów, wykrywanie anomalii i walidacja jakości danych w dużych zbiorach danych klientów.
Obowiązki:
- Projektowanie i budowanie skalowalnych potoków, które pobierają, normalizują i uzgadniają identyfikatory klientów z wielu źródeł
- Opracowywanie logiki mapowania i łączenia tożsamości, na przykład anonimowej do zalogowanej i między urządzeniami
- Prowadzenie czyszczenia danych i migracji danych identyfikacyjnych z przeszłości, korzystając z automatyzacji wspomaganej AI, aby zredukować wysiłek manualny
- Definiowanie i wdrażanie kontroli jakości danych, reguł walidacji i monitorowania dla danych tożsamości
- Wbudowywanie wymagań dotyczących prywatności, zgody i przechowywania danych (RODO) od samego początku
- Ścisła współpraca z inżynierami backendowymi, analitykami i konsumentami danych w celu definiowania kontraktów danych i użyteczności downstream
- Wkład w projektowanie techniczne, dokumentację i standardy inżynieryjne w nowo formującym się zespole
Wymagania:
Must-have:
- 5+ lat doświadczenia jako Data Engineer lub w podobnej roli
- Silne praktyczne doświadczenie z PySpark/Apache Spark i SQL
- Doświadczenie produkcyjne z Databricks lub podobnymi systemami
- Doświadczenie z orkiestracją potoków (np. Airflow)
- Solidne zrozumienie modelowania danych, jakości danych i przetwarzania danych rozproszonych na dużą skalę
- Praktyczne doświadczenie w korzystaniu z narzędzi AI/LLM do automatyzacji zadań inżynieryjnych związanych z danymi, takich jak czyszczenie, klasyfikacja, walidacja czy generowanie kodu
- Doświadczenie z przesyłaniem zdarzeń (Kafka lub podobne)
- Angielski na poziomie średniozaawansowanym lub wyższym
Nice-to-have:
- Doświadczenie z rozwiązaniami tożsamości, platformami danych klientów (CDP) lub zarządzaniem danymi głównymi
- Doświadczenie z danymi wrażliwymi na prywatność (pseudonimizacja, haszowanie, zarządzanie zgodą)
- Doświadczenie w e-commerce lub analizie śledzenia/analizy w handlu detalicznym
Senior Data Engineer in Wrocław – pracodawca: Zoolatech
Zoolatech to doskonały pracodawca, który oferuje wyjątkowe możliwości rozwoju zawodowego w dynamicznym środowisku technologicznym w Polsce. Nasza kultura pracy opiera się na innowacyjności i współpracy, co pozwala inżynierom AI na realizację ambitnych projektów oraz mentoring młodszych kolegów. Oferujemy konkurencyjne wynagrodzenie, elastyczne godziny pracy oraz dostęp do najnowszych technologii, co czyni nas idealnym miejscem dla tych, którzy pragną mieć realny wpływ na rozwój inteligentnych systemów.