W skrócie
- Zadania: Twórz i rozwijaj skalowalne potoki ETL/ELT oraz modele danych w środowisku e-commerce.
- Firma: OBI Smart Technologies - innowacyjna firma łącząca technologię z wizją detaliczną.
- Benefity: Atrakcyjne wynagrodzenie, elastyczne godziny pracy i możliwości rozwoju zawodowego.
- Pozostałe informacje: Dynamiczne środowisko z możliwościami szybkiego rozwoju kariery.
- Dlaczego ta praca: Pracuj z nowoczesnymi technologiami i wpływaj na rozwój cyfrowych platform.
- Kwalifikacje: Wykształcenie w dziedzinie informatyki oraz doświadczenie w inżynierii danych.
Przewidywane wynagrodzenie mieści się w przedziale 49500 - 60500 zł za rok.
Responsibilities:
- Projektowanie, rozwijanie i utrzymywanie skalowalnych, produkcyjnych pipeline'ów ETL/ELT oraz modeli danych przetwarzających dane e-commerce, marketplace, detaliczne i dane śledzenia.
- Budowanie i optymalizacja rozwiązań inżynierii danych na platformie Databricks i Apache Spark, używając Pythona, PySpark, Scali i SQL w odpowiednich przypadkach.
- Implementacja i utrzymanie pipeline'ów Delta Lake oraz nowoczesnych możliwości Databricks, w tym Unity Catalog, Databricks Workflows i Structured Streaming.
- Rozwój solidnych modeli danych integrujących dane z marketplace i detaliczne, zapewniając spójność, jakość i dostępność danych w różnych obszarach biznesowych.
- Automatyzacja złożonych procesów przygotowania i transformacji danych, aby umożliwić niezawodne dostarczanie danych i analizy samoobsługowe.
- Optymalizacja, monitorowanie i rozwiązywanie problemów z rozproszonymi zadaniami danych, zapewniając wydajność, niezawodność i skalowalność pipeline'ów.
- Integracja pipeline'ów danych z rozwiązaniami analitycznymi i BI, w tym Looker, współpracując z interesariuszami biznesowymi i technicznymi w celu przetłumaczenia wymagań na skuteczne rozwiązania danych.
Qualifications:
- Ukończone studia wyższe w dziedzinie informatyki, inżynierii oprogramowania, informatyki biznesowej, inżynierii danych lub pokrewnej dziedziny ilościowej.
- Kilkuletnie doświadczenie zawodowe w inżynierii danych lub rozwoju platform danych, najlepiej w środowiskach e-commerce lub handlu cyfrowego.
- Silne umiejętności praktyczne w zakresie Databricks, Apache Spark i Delta Lake, w tym budowanie i utrzymywanie skalowalnych batchowych i strumieniowych pipeline'ów danych.
- Doskonała znajomość Pythona i SQL, z doświadczeniem w transformacji danych, modelowaniu danych i przetwarzaniu dużych zbiorów danych.
- Praktyczne doświadczenie z narzędziami do orkiestracji workflow, takimi jak Databricks Workflows lub Apache Airflow, a także praktykami CI/CD dla inżynierii danych.
- Zrozumienie jakości danych, zarządzania, monitorowania i optymalizacji wydajności w rozproszonych platformach danych.
- Silne umiejętności komunikacyjne w języku angielskim i polskim, gotowość do pracy w modelu hybrydowym w Katowicach.
Nice to Have:
- Doświadczenie z Unity Catalog i Structured Streaming w Databricks.
- Znajomość integracji pipeline'ów danych w ekosystemach BI i analityki, szczególnie Looker.
- Doświadczenie z integracjami AI/ML w Databricks.
- Wiedza na temat wyzwań inżynierii danych w międzynarodowych środowiskach marketplace i detalicznych.
O OBI Smart Technologies:
Jesteśmy wspólnym przedsięwzięciem OBI i Reply Group, odpowiedzialnym za współprojektowanie, budowanie i obsługę krytycznych platform cyfrowych dla handlu, obsługi klienta i detalicznego handlu wielokanałowego.
NASZA MISJA: "Łączymy przywództwo technologiczne z głęboką wizją detaliczną, aby wdrażać ustandaryzowane procesy i skalowalne produkty cyfrowe, które wspierają efektywne wsparcie dla jednego z największych detalistów DIY w Europie. Wykorzystując sprawdzone najlepsze praktyki, wspieramy internacjonalizację produktów i cyfrowe myślenie naszych partnerów, dostarczając spójne i krytyczne dla biznesu rozwiązania wspierające cele naszego klienta."
Databricks Data Developer in Katowice – pracodawca: OBI Smart Technologies Poland
OBI Smart Technologies Poland oferuje dynamiczne środowisko pracy, w którym pracownicy mają możliwość rozwijania swoich umiejętności w obszarze inżynierii danych i technologii chmurowych. Firma stawia na współpracę między zespołami, co sprzyja innowacyjności i efektywności w realizacji projektów. Pracownicy mogą liczyć na wsparcie w automatyzacji procesów oraz dostęp do nowoczesnych narzędzi, co przekłada się na wysoką jakość dostarczanych rozwiązań.
Dane kontaktowe:
Zespół rekrutacyjny OBI Smart Technologies Poland