Senior Data Engineer in Warsaw

Opis firmy: Budujemy scale-up w InPost, a AI będzie jego integralną częścią. Będziesz kluczowym pracownikiem zespołu inżynierii danych: techniczną autorytetą, na której decyzjach projektowych opiera się każdy inny inżynier. Będziesz pracować bezpośrednio z Kierownikiem Inżynierii Danych oraz Kierownikiem ML, z zespołem wykonawczym InPost wspierającym budowę. To rola indywidualnego wkładu z zakresem organizacyjnym. Twoja wpływowość pochodzi z twojej wiarygodności technicznej, a nie liczby podległych pracowników.

Opis stanowiska: Twoja rola:

• Projektowanie, budowanie i obsługa wsadowych i strumieniowych potoków danych na lakehouse (Databricks / Spark), które pobierają, walidują i modelują dane dla origination kredytów, underwriting i raportowania portfela.
• Budowanie i utrzymywanie feature store, z którego korzystają BNPL Origination i MCA Underwriting, gwarantując poprawność punktu w czasie, świeżość SLA i powtarzalność dla każdej dostarczonej cechy.
• Budowanie i obsługa procesów AI-first / agentic dla potoków zespołu — projektowanie pętli agenta (kontekst, narzędzia, ewaluacje, zabezpieczenia), aby dostarczanie agentowe było niezawodne, obserwowalne i kontrolowane kosztowo.
• Modelowanie danych finansowych i behawioralnych w zarządzanych, udokumentowanych zbiorach danych z wyraźnym właścicielstwem, linią i kontrolami dostępu zgodnymi z RODO i wewnętrzną polityką zarządzania danymi.
• Wbudowywanie jakości danych i obserwowalności jako pierwszorzędnych produktów: świeżość, kompletność, rozkład i kontrole zmiany schematu z alertami.
• Utrzymywanie odpowiedzialności po produkcji za posiadane potoki — monitorowanie, reakcja na incydenty, analiza przyczyn źródłowych i iteracyjne doskonalenie.
• Praca z feature store z danymi poprawnymi w punkcie w czasie, używając Databricks i Spark, z śledzeniem dla obserwowalności potoków.
• Posiadanie agentowych harnessów oraz pętli i przepływów pracy opartych na grafach wokół feature store. Projektujesz pętlę agenta (kontekst, narzędzia, stan, ewaluacje, zabezpieczenia) dla tworzenia cech, świeżości i monitorowania jakości danych.

Wymagania:

• 5+ lat doświadczenia w inżynierii danych (potoki, modelowanie).
• 3+ lata doświadczenia z Spark / Databricks lub równoważnym lakehouse.
• 5+ lat doświadczenia w SQL, modelowaniu danych i Pythonie w inżynierii danych.
• 2+ lata doświadczenia z zaawansowanymi narzędziami kodowania agentowego i inżynierią pętli — projektowanie kontekstu/narzędzi, ewaluacje, zabezpieczenia, iteracja.
• Projektowanie potoków wsadowych i strumieniowych na architekturze lakehouse.
• Modelowanie danych wymiarowych i zdarzeniowych do analizy i konsumpcji ML.
• Optymalizacja wydajności SQL i partycjonowanie dużych tabel.
• Python i Spark; orkiestracja (np. Airflow / Workflows).
• Ciekawość do zaawansowanego narzędziowania agentowego oraz inżynierii pętli i grafów.
• Projektowanie ewaluacji i zabezpieczeń.
• Solidna wiedza o LLM.
• Myślenie o linii danych, katalogowaniu i zarządzaniu (świadomość RODO).
• Znajomość języka angielskiego na poziomie B2 lub wyższym.
• Wykształcenie wyższe w dziedzinie informatyki, inżynierii danych, matematyki lub pokrewnej dziedziny.

Preferencje:

• 1+ rok doświadczenia z feature store / ML data serving.
• 1+ rok doświadczenia z danymi płatności / fintech lub danymi kredytowymi.
• 1+ rok doświadczenia z przetwarzaniem strumieniowym (Kafka / Structured Streaming).
• Dane z obszaru płatności / kredytów (autoryzacja, księgowanie, spłata, zaległości).
• Projektowanie cech ryzyka kredytowego i dane potoku scoringowego.
• Wzorce strumieniowe w czasie rzeczywistym i CDC.
• dbt lub równoważne ramy transformacji.
• Optymalizacja kosztów i wydajności na Databricks.

Dodatkowe informacje: Możliwość pracy w różnorodnym, międzynarodowym i międzyfunkcyjnym środowisku, wraz z wiodącymi ekspertami. Pracujesz i uczysz się od starszego lidera i jego zespołu kierowniczego, poszerzając swoje doświadczenie i ekspozycję w branży e-commerce i logistyki. InPost to rozwijająca się firma, która oferuje swoim pracownikom coraz więcej możliwości w kilku lokalizacjach w Europie. Satysfakcjonujące kariery z szeregiem korzyści dla ludzi oraz inwestowanie w zapewnienie możliwości szkoleniowych dla ich rozwoju. Poczujesz się częścią społeczności InPost, która codziennie ma wpływ na zrównoważony rozwój, wygodne dostawy i gospodarkę cyrkularną. Doskonałe środowisko pracy i elastyczne godziny. Oferujemy umowę typu B2B.