Senior/Lead Data Engineer in Kraków

W Jacobs wyzwalamy dzisiaj, aby zrewolucjonizować jutro, rozwiązując najważniejsze problemy świata dla rozwijających się miast, odpornych środowisk, krytycznych wyników misji, postępu operacyjnego, odkryć naukowych i nowoczesnej produkcji, przekształcając abstrakcyjne pomysły w rzeczywistość, która zmienia świat na lepsze.

Poszukujemy doświadczonego Lead Data Engineera, który odegra kluczową rolę w projektowaniu, budowaniu i obsłudze platform danych opartych na Snowflake oraz rozwiązań integracji danych na poziomie przedsiębiorstwa. Głównym celem tej roli jest prowadzenie modernizacji i rozwoju hurtowni danych, z naciskiem na integrację między systemami źródłowymi a konsumentami danych, procesami ETL/ELT oraz potokami danych. Jest to praktyczna rola przywódcza w zakresie technologii z silnym zaangażowaniem w standardy inżynieryjne, architekturę i jakość dostarczania, a nie czysta rola zarządzająca lub badawcza.

Kluczowe obowiązki:

• Projektowanie, rozwijanie i obsługa platform danych opartych na Snowflake wspierających analizy i raportowanie.
• Prowadzenie migracji infrastruktury danych od początku do końca, w tym integracji źródeł, procesów ETL/ELT, orkiestracji i połączeń z konsumentami danych, z platformy legacy do nowoczesnych.
• Prowadzenie projektowania wysoko odseparowanych, skalowalnych architektur i wielokrotnego użytku wzorców integracji.
• Budowanie i utrzymywanie skalowalnych, niezawodnych potoków danych (wsadowych i rzeczywistych) przy użyciu nowoczesnych technologii danych w chmurze.
• Integracja i zarządzanie dużymi, złożonymi zestawami danych z wielu wewnętrznych i zewnętrznych systemów źródłowych.
• Automatyzacja potoków danych od początku do końca w celu zmniejszenia wysiłku manualnego oraz poprawy stabilności i łatwości utrzymania.
• Projektowanie i wdrażanie monitorowania, powiadamiania i ram obsługi błędów dla potoków danych.
• Realizacja inicjatyw proof of concept i kierowanie ich ewolucją w pełnoskalowe wdrożenia produkcyjne.
• Planowanie i realizacja migracji, w tym równoległe uruchomienia, rekonsyliacja danych i strategie wycofania.
• Projektowanie i optymalizacja architektur danych pod kątem wydajności, skalowalności i efektywności kosztowej.
• Definiowanie i stosowanie praktyk zarządzania danymi, w tym jakości danych, śladu, zgodności i bezpieczeństwa.
• Wdrażanie i doskonalenie praktyk CI/CD, testowania, jakości danych i obserwowalności (DataOps).
• Ścisła współpraca z architektami, właścicielami produktów i interesariuszami biznesowymi w celu przetłumaczenia wymagań na rozwiązania techniczne.
• Mentorowanie i prowadzenie inżynierów danych, przeprowadzanie przeglądów kodu i projektów oraz przyczynianie się do wzrostu zespołu.
• Wkład w standardy platformy, najlepsze praktyki i technologiczną ewolucję w całej organizacji.

Wymagania:

• 7+ lat doświadczenia w inżynierii danych lub rolach inżynierii platform, w tym doświadczenie na stanowisku lidera technicznego lub seniora.
• Udokumentowane, praktyczne doświadczenie w prowadzeniu migracji infrastruktury danych od początku do końca (np. z legacy data warehouse lub platformy ETL do nowoczesnej platformy chmurowej), obejmujące pełny zakres od integracji źródeł po stabilizację produkcji.
• Praktyczne doświadczenie z Snowflake, w tym modelowanie danych, wzorce ELT i optymalizacja wydajności.
• Silne umiejętności programowania w Pythonie i zaawansowany SQL.
• Doświadczenie w pracy z danymi i obciążeniami w chmurze w środowisku MS Azure.
• Solidne doświadczenie z narzędziami do orkiestracji danych (Apache Airflow lub równoważne) oraz projektowaniem ETL/ELT.
• Doświadczenie z architekturami opartymi na strumieniach i zdarzeniach (Kafka lub równoważne).
• Doświadczenie z relacyjnymi bazami danych, takimi jak SQL Server i PostgreSQL.
• Udokumentowane doświadczenie w projektowaniu odseparowanych, skalowalnych architektur danych i wielokrotnego użytku wzorców integracji.
• Praktyczne zrozumienie zarządzania danymi, w tym jakości danych, śladu i bezpieczeństwa danych.
• Silne umiejętności analityczne, postawa odpowiedzialności i zdolność do projektowania rozwiązań na poziomie przedsiębiorstwa.
• Doskonale umiejętności komunikacyjne i zdolność do pracy z architektami klientów i interesariuszami.

Miło widziane:

• Doświadczenie z Apache Spark, Databricks oraz nowoczesnymi architekturami Lakehouse lub hybrydowymi.
• Znajomość architektur multi-cloud lub hybrydowych.
• Doświadczenie w konsultingu, środowiskach zorientowanych na produkt lub wieloprojektowych.
• Doświadczenie w bankowości lub usługach finansowych.

Oferujemy:

• Pełnoetatowe zatrudnienie/kontrakt b2b z wynagrodzeniem odpowiadającym Twoim kwalifikacjom.
• Model pracy hybrydowej - ciesz się elastycznością pracy głównie zdalnie.
• Elastyczne godziny - rozpocznij dzień o dowolnej porze między 7:30 a 10:00.
• Kompleksowe świadczenia, w tym opiekę medyczną Lux Med, wsparcie psychologiczne, ubezpieczenie na życie, system kafeteryjny My Benefit, współfinansowanie karty Multisport oraz system współdzielenia parkingu dla samochodów/rowerów.
• Możliwość okazjonalnych podróży.
• Współfinansowane wakacje - ciesz się "Wczasy pod Gruszą" na zasłużony wypoczynek (tylko w ramach CoE).
• Globalne projekty - angażuj się w ekscytujące międzynarodowe projekty.
• Inkluzywne sieci - dołącz do naszych różnorodnych sieci pracowniczych, takich jak Women's Network, OneWorld, PRISM, Careers Network, Green Team, SpeakUp, Collectively i inne.
• Ciągłe uczenie się - uczestnicz w naszym Programie Rozwoju Absolwentów, Społeczności Uczniów i platformach samokształcenia.
• Kursy językowe - rozwijaj swoje umiejętności dzięki kursom w języku angielskim, niemieckim i polskim.

Wiemy, że jeśli jesteśmy inkluzywni, jesteśmy bardziej połączeni i bardziej kreatywni. Akceptujemy ludzi takimi, jakimi są. Dowiedz się więcej o życiu w Jacobs.

Jako pracodawca świadomy niepełnosprawności, przeprowadzimy rozmowy kwalifikacyjne ze wszystkimi osobami niepełnosprawnymi, które spełniają kryteria na dane stanowisko.

Jeśli potrzebujesz dalszego wsparcia lub rozsądnych dostosowań w związku z procesem rekrutacji (na przykład potrzebujesz formularza aplikacyjnego w innym formacie), skontaktuj się z zespołem pod adresem recruitmentpoland@jacobs.com.

Twoje doświadczenie aplikacyjne jest dla nas ważne i chcemy dostosować się, aby każda interakcja była jeszcze lepsza. Jeśli potrzebujesz dalszego wsparcia lub rozsądnych dostosowań w związku z procesem rekrutacji (na przykład potrzebujesz formularza aplikacyjnego w innym formacie), skontaktuj się z zespołem za pośrednictwem wsparcia kariery.