Big Data Engineer (Spark/Scala) in Gdynia

Big Data Engineer (Spark/Scala) in Gdynia

Gdynia Pełny etat 90000 - 110000 zł / rok (szac.) Stacjonarnie
D

W skrócie

  • Zadania: Buduj potężne pipeline'y Big Data, przetwarzaj ogromne ilości danych w czasie rzeczywistym.
  • Firma: Dynamiczna firma rekrutacyjna z partnerskim podejściem do klientów.
  • Benefity: Prywatna opieka medyczna, dofinansowanie karty sportowej, stałe wsparcie konsultanta.
  • Pozostałe informacje: Możliwość rozwoju kariery w dynamicznym środowisku.
  • Dlaczego ta praca: Pracuj z najnowszymi technologiami i wpływaj na rozwój innowacyjnych projektów.
  • Kwalifikacje: Doświadczenie w Spark, Scala, Python oraz umiejętności współpracy w zespole.

Przewidywane wynagrodzenie mieści się w przedziale 90000 - 110000 zł za rok.

DCG rozumie, że każda firma jest napędzana przez doświadczonych profesjonalistów. Nasz styl zarządzania i podejście partnerskie pozwalają nam spełniać Twoje potrzeby i zapewniać ciągłe wsparcie. W związku z naszym ciągłym rozwojem oraz dużą liczbą projektów rekrutacyjnych, które realizujemy dla naszych partnerów, obecnie poszukujemy:

Obowiązki:

  • Budowanie rozproszonych i wysoko równoległych procesów przetwarzania Big Data, które przetwarzają ogromne ilości danych (zarówno strukturalnych, jak i niestrukturalnych) w czasie rzeczywistym.
  • Wykorzystanie Sparka do wzbogacania i transformacji danych korporacyjnych w celu umożliwienia wyszukiwania, wizualizacji danych i zaawansowanej analityki.
  • Analiza wymagań i zadawanie pytań, gdy nie są one jasne.
  • Ścisła współpraca z zespołami DevOps, QA i zarządzania produktem w środowisku Continuous Delivery.

Wymagania:

  • 7+ lat doświadczenia w Spark i Scala.
  • 5+ lat doświadczenia w programowaniu w Pythonie.
  • 3+ lata doświadczenia z Robot Framework.
  • 3+ lata doświadczenia z narzędziami CI/CD, takimi jak Jenkins.
  • Doświadczenie z rozproszonymi silnikami przetwarzania danych, takimi jak Spark.
  • Doświadczenie z Hadoop (Hive, Oozie, map reduce itp.).
  • Silne umiejętności SQL z wcześniejszym doświadczeniem w tworzeniu przepływów danych.
  • Ekspert w BitBucket i GIT.
  • Znajomość komponentów architektonicznych AWS (Lambda, step functions, state machine itp.).
  • Doświadczenie w testowaniu jednostkowym (JUnit 5, Mockito, testowanie Sparka).
  • Strategia wersjonowania kodu i strategia gałęzi.
  • Zaawansowane umiejętności językowe w języku angielskim.
  • Silne doświadczenie w pracy z systemem Linux i bash.
  • Doświadczenie w korzystaniu z następujących narzędzi: Jenkins lub Bamboo, Jira, Bitbucket.
  • Wykazywanie współpracy, osiąganie celów poprzez skuteczną komunikację i pracę zespołową w środowisku Agile (SAFe).
  • Okazywanie ciekawości i elastyczności, z umiejętnością rozumienia potrzeb innych w celu zapewnienia dostarczenia oczekiwanych wyników.
  • Utrzymywanie silnego nacisku na jakość, ciągłe dążenie do poprawy sposobów pracy i dostarczanych rozwiązań.
  • Wykazywanie wysokiego poziomu samomotywacji i odpowiedzialności w codziennej pracy.

Miło widziane:

  • Doświadczenie z konteneryzacją przy użyciu Dockera.
  • Znajomość technologii strumieniowych i kolejek, np. KAFKA, IBM MQ itp.
  • Znajomość DevOps.

Oferta:

  • Prywatna opieka medyczna.
  • Współfinansowanie karty sportowej.
  • Ciągłe wsparcie dedykowanego konsultanta.
  • Osobista agencja konsultingowa (Licencja nr 4642).

Big Data Engineer (Spark/Scala) in Gdynia – pracodawca: DCG Poland

DCG to doskonały pracodawca, który stawia na rozwój swoich pracowników i wspiera ich w osiąganiu sukcesów w dynamicznym środowisku finansowym. Oferujemy atrakcyjne benefity, takie jak prywatna opieka medyczna oraz dofinansowanie do karty sportowej, a także przyjazną kulturę pracy, która sprzyja współpracy i innowacjom. Nasza lokalizacja umożliwia łatwy dostęp do międzynarodowych rynków, co stwarza unikalne możliwości rozwoju kariery w obszarze analizy roszczeń i regulacji.

D

Dane kontaktowe:

Zespół rekrutacyjny DCG Poland

Naszym zdaniem te umiejętności pozwolą ci błyszczeć jako Big Data Engineer (Spark/Scala) in Gdynia

Spark
Scala
Python
Hadoop
SQL
AWS
Robot Framework