W skrócie
- Zadania: Projektuj i rozwijaj skalowalne potoki danych przy użyciu Databricks.
- Firma: Dynamiczna firma w branży usług finansowych z innowacyjnym podejściem.
- Benefity: Atrakcyjne wynagrodzenie, możliwość pracy zdalnej oraz rozwój zawodowy.
- Pozostałe informacje: Możliwość pracy nad długoterminowym projektem w dynamicznym środowisku.
- Dlaczego ta praca: Pracuj z nowoczesnymi technologiami i wpływaj na rozwiązania w branży finansowej.
- Kwalifikacje: 5+ lat doświadczenia w inżynierii danych oraz umiejętności w Databricks.
Przewidywane wynagrodzenie mieści się w przedziale 60750 - 74250 zł za rok.
Nasze wymagania:
- 5+ lat doświadczenia w inżynierii danych.
- Minimum 3 lata praktycznego doświadczenia z Databricks.
- Silna wiedza praktyczna na temat Apache Spark i PySpark.
- Zaawansowane umiejętności programowania w SQL i Pythonie.
- Doświadczenie w projektowaniu i wdrażaniu procesów ETL/ELT.
- Solidne zrozumienie architektury Delta Lake i Lakehouse.
- Doświadczenie w pracy z platformami chmurowymi (Azure, AWS lub GCP).
- Znajomość modelowania danych, hurtowni danych i integracji danych.
- Doświadczenie w optymalizacji wydajności przetwarzania danych i zarządzaniu dużymi zbiorami danych.
- Znajomość języka angielskiego na poziomie C1.
Mile widziane:
- Poprzednie doświadczenie w bankowości, ubezpieczeniach lub usługach finansowych.
- Doświadczenie z Azure Databricks i Azure Data Factory.
- Znajomość Unity Catalog i Databricks Workflows.
- Doświadczenie z CI/CD i Infrastructure as Code.
- Certyfikaty Databricks.
- Zrozumienie zarządzania danymi, bezpieczeństwa i wymogów regulacyjnych w środowiskach finansowych.
O projekcie:
Szukamy doświadczonego Senior Data Engineer, który dołączy do długoterminowego projektu dla klienta w branży usług finansowych. Idealny kandydat ma silne praktyczne doświadczenie z Databricks, nowoczesnymi technologiami inżynierii danych oraz budowaniem skalowalnych rozwiązań danych w środowiskach przedsiębiorstw.
Zakres obowiązków:
- Projektowanie, rozwijanie i utrzymywanie skalowalnych procesów danych przy użyciu Databricks.
- Budowanie i optymalizacja procesów ETL/ELT dla przetwarzania dużych zbiorów danych.
- Rozwój rozwiązań transformacji danych przy użyciu PySpark, Pythona i SQL.
- Implementacja i optymalizacja architektur Delta Lake.
- Projektowanie i utrzymywanie niezawodnych procesów pobierania i integracji danych.
- Poprawa jakości danych, wydajności i niezawodności na platformach danych.
- Współpraca z architektami danych, analitykami i interesariuszami biznesowymi w celu dostarczania rozwiązań danych.
- Zapewnienie bezpieczeństwa danych, zarządzania i zgodności z normami branży finansowej.
- Rozwiązywanie problemów i optymalizacja istniejących procesów inżynierii danych.
Senior Data Engineer in Warsaw – pracodawca: REMODEVS SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄ
REMODEVS SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄ oferuje pracownikom możliwość rozwoju zawodowego w dynamicznym środowisku finansowym, gdzie można zdobywać doświadczenie w nowoczesnych technologiach takich jak Databricks i Delta Lake. Firma stawia na jakość danych oraz bezpieczeństwo, co sprzyja stabilności zatrudnienia i długoterminowym projektom. Pracownicy mogą liczyć na atrakcyjne wynagrodzenie oraz wsparcie w zdobywaniu certyfikatów branżowych.
Dane kontaktowe:
Zespół rekrutacyjny REMODEVS SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄ
