Senior Data Engineer – Warsaw in Katowice

Xebia jest globalnym partnerem w zakresie transformacji cyfrowej i inżynierii, skoncentrowanym na sztucznej inteligencji. Z ponad 25-letnim doświadczeniem i zespołem 5000 profesjonalistów w 16 krajach, pomagamy organizacjom projektować i budować skalowalne produkty, platformy oraz rozwiązania oparte na danych. Specjalizujemy się w sztucznej inteligencji, danych i chmurze, inteligentnej automatyzacji oraz produktach cyfrowych, łącząc głęboką wiedzę techniczną z silnym naciskiem na doskonałość inżynieryjną oraz kulturę skoncentrowaną na ludziach.

W regionie CEE jesteśmy zespołem prawie 1000 ekspertów dostarczających nowoczesne aplikacje, platformy danych oraz rozwiązania AI dla klientów takich jak Millennium, ING, Play, Edenred, Arabian Drilling, FedEx, Leroy Merlin, Truecaller, Volotea, Schmitz Cargobull i wielu innych.

Pracujemy z wiodącymi technologiami, w tym AWS, Azure, GCP, Databricks i Snowflake, łącząc silną kulturę inżynieryjną z podejściem doradczym oraz ciągłym naciskiem na rozwój i dzielenie się wiedzą.

Twoje zadania:

• Projektowanie, rozwijanie i utrzymywanie skalowalnych procesów pobierania i transformacji danych.
• Budowanie frameworków przetwarzania danych opartych na metadanych oraz komponentów inżynieryjnych do ponownego wykorzystania.
• Rozwijanie i utrzymywanie przepływów danych od warstw landing, Bronze i Silver do warstw analitycznych.
• Tworzenie i optymalizacja procesów ETL/ELT wspierających produkty danych przedsiębiorstwa.
• Implementacja procesów rekonsyliacji, walidacji danych oraz automatyzacji testów.
• Wsparcie rozwoju frameworków dostarczania produktów danych oraz szablonów inżynieryjnych.
• Udział w zespołach dostarczających skoncentrowanych na źródle i domenie.
• Współpraca z modelarzami danych, inżynierami BI, inżynierami platform, architektami oraz interesariuszami klientów.
• Wsparcie migracji obciążeń przetwarzania danych i aktywów analitycznych.
• Rozwijanie mechanizmów monitorowania, logowania i wsparcia operacyjnego dla procesów danych.
• Wkład w praktyki inżynieryjne oparte na CI/CD oraz inicjatywy automatyzacyjne.
• Wsparcie transferu wiedzy i działań przekazania do zespołów inżynieryjnych klientów.
• Udział w działaniach związanych z jakością danych, rozwiązywaniem problemów oraz optymalizacją wydajności.

Twój profil:

• Silne doświadczenie w budowaniu procesów pobierania danych i rozwiązań transformacyjnych.
• Praktyczne doświadczenie z Databricks.
• Silne umiejętności SQL oraz doświadczenie w pracy z dużymi zbiorami danych.
• Doświadczenie w implementacji procesów ETL/ELT w środowiskach chmurowych.
• Doświadczenie w rozwijaniu frameworków integracji i transformacji danych.
• Znajomość nowoczesnych koncepcji architektury danych, w tym warstw Bronze, Silver i Gold.
• Doświadczenie w automatyzacji testów, rekonsyliacji oraz procesach zapewnienia jakości danych.
• Znajomość najlepszych praktyk inżynieryjnych, kontroli wersji oraz zasad CI/CD.
• Umiejętność pracy w zespołach dostarczających o różnych funkcjach.
• Silne umiejętności analityczne, rozwiązywania problemów oraz umiejętności komunikacyjne.
• Doświadczenie w dostarczaniu rozwiązań w środowiskach na dużą skalę.

Wymagane jest posiadanie pozwolenia na pracę w regionie Unii Europejskiej.

Miło widziane:

• Doświadczenie z frameworkami przetwarzania opartymi na metadanych.
• Znajomość architektur zorientowanych na produkty danych.
• Znajomość dbt lub nowoczesnych praktyk inżynierii analitycznej.
• Doświadczenie w pracy z pakietami zasobów Databricks (DAB) oraz automatyzacją wdrożeń.
• Doświadczenie z Infrastructure as Code oraz chmurowymi platformami danych.
• Znajomość środowisk regulowanych przez GxP.
• Doświadczenie w wsparciu programów modernizacji lub migracji danych na dużą skalę.
• Znajomość automatyzacji rekonsyliacji oraz praktyk zarządzania danymi przedsiębiorstwa.
• Doświadczenie w mentorowaniu młodszych inżynierów oraz wkład w standardy inżynieryjne.

Proces rekrutacji:

• Przegląd CV – rozmowa z HR – rozmowa kwalifikacyjna – rozmowa z klientem – decyzja