W skrócie
- Zadania: Twórz i rozwijaj architekturę dużej platformy danych oraz zarządzaj potokami danych.
- Firma: Webellian - firma konsultingowa IT z pasją do technologii.
- Benefity: Umowa B2B lub Umowa o Pracę, prywatna opieka medyczna, karta Multisport.
- Pozostałe informacje: Dynamiczne środowisko pracy z możliwościami rozwoju kariery.
- Dlaczego ta praca: Pracuj nad innowacyjnymi projektami w międzynarodowym zespole specjalistów.
- Kwalifikacje: Doświadczenie w inżynierii danych i znajomość Databricks oraz Pythona.
Przewidywane wynagrodzenie mieści się w przedziale 54000 - 66000 zł za rok.
Webellian to dobrze ugruntowana firma zajmująca się transformacją cyfrową i doradztwem IT, która dąży do wywarcia pozytywnego wpływu na naszych klientów. Dążymy do wprowadzenia znaczącej różnicy w różnych sektorach, takich jak ubezpieczenia, bankowość, opieka zdrowotna, handel detaliczny i produkcja. Nasza pasja do nowoczesnych i przełomowych technologii oraz wspólne wartości i silne zasady motywują nas. Jesteśmy społecznością inżynierów i starszych doradców, którzy współpracują z naszymi klientami w różnych branżach, odgrywając głęboką i znaczącą rolę w przyspieszaniu i realizacji ich wizji i strategii.
Poszukujemy Starszego Inżyniera Danych, który dołączy do projektu transformacji danych na dużą skalę dla jednej z wiodących firm ubezpieczeniowych na świecie. Projekt koncentruje się na budowie Centralnej Platformy Danych, która integruje dane z wielu źródeł i umożliwia zaawansowaną analitykę, raportowanie oraz głębsze wnioski biznesowe. Dołączysz do międzynarodowego projektu, w którym bierze udział ponad 80 specjalistów z różnych zespołów inżynieryjnych, danych, analityki i biznesu. Przyczynisz się do skalowalnej architektury danych, niezawodnych potoków danych i wysokiej jakości modeli danych. Stos technologiczny obejmuje Databricks, dbt, dltHub, Power BI, GitHub i Terraform, a cała platforma jest hostowana w Microsoft Azure.
Kluczowe obowiązki:
- Projektowanie i rozwijanie architektury dużej Centralnej Platformy Danych.
- Budowanie i utrzymywanie end-to-end potoków danych obejmujących pobieranie, transformację, przechowywanie i konsumpcję.
- Integracja danych z wielu systemów w spójną platformę danych.
- Projektowanie skalowalnych modeli danych zgodnych z wymaganiami biznesowymi i analitycznymi.
- Rozwój i optymalizacja procesów ETL i ELT przy użyciu Databricks, Pythona, PySpark i dbt.
- Przygotowywanie wiarygodnych zbiorów danych do analityki, raportowania i inteligencji biznesowej.
- Zapewnienie jakości danych, spójności, pochodzenia, bezpieczeństwa i wydajności.
- Rozwój wielokrotnego użytku komponentów danych i standaryzacja przepływów danych.
- Wsparcie zautomatyzowanego wdrażania i procesów infrastrukturalnych przy użyciu GitHub i Terraform.
- Współpraca z inżynierami danych, architektami, analitykami, deweloperami Power BI i interesariuszami biznesowymi.
- Tłumaczenie skomplikowanych wymagań na skalowalne rozwiązania techniczne.
- Ciągłe doskonalenie niezawodności, automatyzacji i łatwości utrzymania platformy.
Wymagane doświadczenie i umiejętności:
- Udokumentowane doświadczenie na poziomie seniora w zakresie inżynierii danych, architektury danych lub podobnej roli.
- Silne doświadczenie praktyczne z Databricks.
- Zaawansowana znajomość Pythona i praktyczne doświadczenie z PySpark.
- Silne doświadczenie w projektowaniu i optymalizacji potoków ETL i ELT.
- Bardzo dobra znajomość SQL i baz danych relacyjnych.
- Doświadczenie w architekturze danych, modelowaniu danych i projektowaniu skalowalnych platform danych.
- Praktyczne doświadczenie z dbt.
- Doświadczenie z Microsoft Azure lub innymi chmurowymi platformami danych.
- Znajomość praktyk i narzędzi CI/CD, szczególnie GitHub.
- Zrozumienie infrastruktury chmurowej, orkiestracji, wdrażania i bezpieczeństwa danych.
- Umiejętność tłumaczenia skomplikowanych wymagań na skalowalne rozwiązania techniczne.
- Doświadczenie w pracy w dużych, rozproszonych lub wielozespołowych środowiskach.
- Znajomość języka angielskiego i silne umiejętności komunikacyjne.
- Proaktywne podejście, odpowiedzialność i mentalność DevOps.
Miłe do posiadania:
- Doświadczenie z bazami danych Oracle.
- Doświadczenie z dltHub.
- Doświadczenie z usługami danych Azure.
- Doświadczenie w wspieraniu środowisk raportowania Power BI.
- Znajomość zarządzania danymi, pochodzenia i zarządzania metadanymi.
- Doświadczenie w budowaniu platform danych na poziomie przedsiębiorstwa lub jezior danych.
- Doświadczenie w branży ubezpieczeniowej lub usług finansowych.
- Dyplom licencjata lub magistra w dziedzinie technicznej.
Co oferujemy:
- Umowa na podstawie polskiego prawa: B2B lub Umowa o Pracę.
- Benefity takie jak prywatna opieka medyczna, ubezpieczenie grupowe, karta Multisport.
- Dostępne są lekcje języka angielskiego.
- Praca hybrydowa (przynajmniej 1 dzień co 2-3 miesiące na miejscu) w Warszawie (Mokotów).
- Możliwość pracy z doskonałymi profesjonalistami.
- Wysokie standardy pracy i skupienie na jakości kodu.
- Nowe technologie w użyciu.
- Ciągłe uczenie się i rozwój.
- Międzynarodowy zespół.
- Pinball, PlayStation i wiele więcej (na miejscu).
Dołącz do rosnącego zespołu oddanych profesjonalistów! Uwielbiamy przekazywać wiedzę, aby rozwijać doskonałość, mówić to, co myślimy, bez polityki i po prostu cieszyć się wspólnym czasem. Jeśli podzielasz nasze pasje - chcemy Cię poznać!
Senior Data Engineer in Warsaw – pracodawca: Webellian Sp.z o o
Webellian Sp.z o o oferuje pracownikom możliwość rozwoju zawodowego w dynamicznym środowisku, gdzie innowacyjne technologie są na porządku dziennym. Pracownicy mają szansę uczestniczyć w dużych projektach transformacji danych, co pozwala na zdobycie cennego doświadczenia w pracy z nowoczesnymi narzędziami i technologiami chmurowymi. Firma promuje kulturę współpracy i ciągłego uczenia się, co sprzyja osobistemu i zawodowemu rozwojowi.