Mid/Senior Data Engineer – Kraków

Oferujemy elastyczny model współpracy oparty na umowie B2B, z możliwością pracy nad innowacyjnymi inicjatywami AI i automatyzacji dla wiodących instytucji finansowych. W Capco Polska nie jesteśmy tylko kolejną firmą doradczą - jesteśmy iskrą za cyfrową transformacją w świecie finansów. Jako globalny lider w technologii i doradztwie zarządczym, pomagamy naszym klientom stawić czoła złożonym wyzwaniom w obszarze bankowości, płatności, rynków kapitałowych, zarządzania majątkiem i aktywami. Nasza tajemnica? Kultura, która jest szybka, elastyczna i niezwykle przedsiębiorcza. Działamy szybko, myślimy kreatywnie i zawsze stawiamy naszych ludzi na pierwszym miejscu. Jesteśmy pasjonatami wzrostu - zarówno dla naszych klientów, jak i dla siebie - co oznacza przyciąganie utalentowanych profesjonalistów, którzy chcą rozwijać swoje umiejętności, brać odpowiedzialność i mieć realny wpływ.

Jesteśmy dumnymi:

• Prekursory w bankowości, płatnościach, rynkach kapitałowych, zarządzaniu majątkiem i aktywami
• Mistrzami zwinnego, zwinnego i innowacyjnego środowiska pracy
• Zaangażowanymi w budowanie zespołu utalentowanych profesjonalistów, którzy podzielają naszą motywację i wizję

ROLĄ jest dołączenie do naszego rosnącego zespołu inżynierów danych jako Mid Data Engineer i wniesienie wkładu w budowanie skalowalnych, niezawodnych rozwiązań danych dla naszych klientów z sektora usług finansowych. Będziesz pracować z nowoczesnymi technologiami danych i platformami chmurowymi, rozwijając i utrzymując potoki danych, przetwarzając duże zestawy danych oraz wspierając dostarczanie rozwiązań danych na poziomie przedsiębiorstwa. To doskonała okazja dla inżyniera danych, który ma już praktyczne doświadczenie komercyjne i chce dalej rozwijać swoją wiedzę w zakresie Pythona, Apache Spark, Hadoop, Linux i Google Cloud Platform (GCP), pracując nad złożonymi projektami międzynarodowymi.

CO BĘDZIESZ ROBIĆ:

• Projektować, rozwijać i utrzymywać skalowalne potoki danych oraz rozwiązania przetwarzania danych.
• Rozwijać procesy transformacji i przetwarzania danych przy użyciu Pythona i Apache Spark.
• Pracować z dużymi zestawami danych w rozproszonych środowiskach przy użyciu Hadoop i pokrewnych technologii.
• Budować i wspierać rozwiązania danych w chmurze na Google Cloud Platform (GCP).
• Rozwijać niezawodne procesy pobierania danych integrujące dane z wielu systemów źródłowych.
• Implementować transformacje danych, zasady walidacji i kontrole jakości danych.
• Rozwiązywać problemy z potokami danych i wspierać optymalizację wydajności.
• Pracować w środowiskach opartych na Linuxie, w tym skrypty, wdrożenia i działania operacyjne.
• Współpracować z inżynierami danych, architektami, analitykami i innymi interesariuszami projektu, aby przekształcać wymagania biznesowe w rozwiązania techniczne.
• Uczestniczyć w przeglądach kodu i stosować najlepsze praktyki inżynierii oprogramowania i inżynierii danych.
• Tworzyć i utrzymywać dokumentację techniczną obejmującą przepływy danych, zależności, konfiguracje i procedury operacyjne.
• Wspierać wdrażanie, testowanie, stabilizację i bieżące utrzymanie rozwiązań danych.

CO SZUKAMY:

• 2-4+ lata doświadczenia komercyjnego w inżynierii danych lub podobnej roli.
• Dobre umiejętności programowania w Pythonie.
• Praktyczne doświadczenie z Apache Spark, w tym budowanie i utrzymywanie zadań przetwarzania danych.
• Doświadczenie w pracy z Hadoop lub rozproszonymi ekosystemami przetwarzania danych.
• Dobra znajomość Linuxa i środowisk wiersza poleceń.
• Doświadczenie komercyjne z Google Cloud Platform (GCP) i odpowiednimi usługami danych.
• Dobre zrozumienie procesów ETL/ELT, potoków danych i koncepcji transformacji danych.
• Znajomość SQL i koncepcji danych relacyjnych.
• Zrozumienie jakości danych, monitorowania i praktyk rozwiązywania problemów.
• Znajomość Gita i nowoczesnych praktyk rozwoju oprogramowania.
• Umiejętność efektywnej pracy w zwinnej atmosferze i współpracy z rozproszonymi zespołami.
• Dobre umiejętności komunikacyjne i znajomość języka angielskiego na poziomie co najmniej B2.

MIŁE DO POSIADANIA:

• Doświadczenie z usługami GCP, takimi jak BigQuery, Cloud Storage, Dataproc, Dataflow lub Pub/Sub.
• Doświadczenie w obszarze finansowym/bankowym.
• Doświadczenie z narzędziami orkiestracyjnymi, takimi jak Apache Airflow.
• Znajomość procesów CI/CD dla rozwiązań danych.
• Znajomość modelowania danych i koncepcji hurtowni danych.
• Doświadczenie w pracy z klientami z sektora usług finansowych lub bankowości.
• Znajomość technologii konteneryzacji, takich jak Docker lub Kubernetes.

PROCES REKRUTACJI ONLINE:

• Rozmowa wstępna z rekruterem
• Rozmowa z menedżerem ds. zatrudnienia
• Wywiad techniczny
• Rozmowa z klientem
• Informacja zwrotna / oferta