W skrócie
- Zadania: Twórz i utrzymuj potoki danych oraz rozwiązania przetwarzania danych z użyciem Hadoop i Spark.
- Firma: Dynamiczna firma rekrutacyjna z partnerskim podejściem do klientów.
- Benefity: Prywatna opieka medyczna, dofinansowanie karty sportowej i stałe wsparcie konsultanta.
- Pozostałe informacje: Możliwość pracy w zespole z pasjonatami technologii.
- Dlaczego ta praca: Pracuj z nowoczesnymi technologiami i wpływaj na rozwój systemów danych.
- Kwalifikacje: Silne doświadczenie w inżynierii danych i przetwarzaniu rozproszonym.
Przewidywane wynagrodzenie mieści się w przedziale 123750 - 151250 zł za rok.
DCG rozumie, że każda firma jest napędzana przez doświadczonych profesjonalistów. Nasz styl zarządzania i podejście partnerskie pozwalają nam spełniać Twoje potrzeby i zapewniać ciągłe wsparcie. W związku z naszym ciągłym rozwojem oraz dużą liczbą projektów rekrutacyjnych, obecnie poszukujemy:
Obowiązki:
- Rozwój i utrzymanie potoków danych wspierających raportowanie regulacyjne dla inicjatywy
- Projektowanie i wdrażanie rozproszonych rozwiązań przetwarzania danych przy użyciu Hadoop i Spark
- Tłumaczenie skomplikowanych wymagań biznesowych na efektywne i wykonalne transformacje SQL
- Budowanie i utrzymywanie transformacji danych opartych na SQL dla przetwarzania danych regulacyjnych
- Zarządzanie i monitorowanie orkiestracji workflow przy użyciu Oozie i Airflow
- Praca z architekturami opartymi na zdarzeniach, w tym Kafka
- Zapewnienie wsparcia L3 dla systemów produkcyjnych, w tym analiza i rozwiązywanie incydentów
- Współpraca z zespołami zapewnienia produkcji w celu zapewnienia stabilności systemu
- Jasna komunikacja problemów technicznych i logiki SQL do interesariuszy biznesowych
- Udział w procesach CI/CD, w tym w przepływach pracy Git, pull requestach i pipeline'ach Jenkins
- Zapewnienie wysokiej jakości danych, niezawodności i zgodności z wymaganiami regulacyjnymi
Wymagania:
- Silne doświadczenie w inżynierii danych i rozproszonym przetwarzaniu danych
- Silna znajomość transformacji danych opartych na SQL
- Praktyczne doświadczenie z Apache Hadoop, Apache Spark, Oozie, Apache Airflow, Kafka / architekturami opartymi na zdarzeniach oraz narzędziami CI/CD (Git, PR workflows, Jenkins)
- Umiejętność tłumaczenia wymagań biznesowych na logikę SQL
- Doświadczenie w zapewnianiu wsparcia produkcyjnego L3
- Umiejętność współpracy z zespołami zapewnienia produkcji
- Silne umiejętności analityczne i rozwiązywania problemów
- Silne umiejętności komunikacyjne, w tym umiejętność wyjaśniania problemów związanych z SQL interesariuszom biznesowym
- Bardzo dobra znajomość języka angielskiego, zarówno w mowie, jak i piśmie
Miło widziane:
- Doświadczenie z konteneryzacją i orkiestracją (Kubernetes)
- Doświadczenie z Apache Flink
Oferta:
- Prywatna opieka medyczna
- Współfinansowanie karty sportowej
- Stałe wsparcie dedykowanego konsultanta
Senior Data Engineer – Gdańsk – pracodawca: DCG Poland
DCG to doskonały pracodawca, który stawia na rozwój swoich pracowników i wspiera ich w osiąganiu sukcesów w dynamicznym środowisku finansowym. Oferujemy atrakcyjne benefity, takie jak prywatna opieka medyczna oraz dofinansowanie do karty sportowej, a także przyjazną kulturę pracy, która sprzyja współpracy i innowacjom. Nasza lokalizacja umożliwia łatwy dostęp do międzynarodowych rynków, co stwarza unikalne możliwości rozwoju kariery w obszarze analizy roszczeń i regulacji.
