W skrócie
- Zadania: Projektuj i rozwijaj aplikacje ETL/ELT w Databricks oraz optymalizuj wydajność przetwarzania danych.
- Firma: Dynamiczna firma technologiczna z możliwością pracy zdalnej.
- Benefity: Stawka 120-150 zł/h netto, elastyczne godziny pracy i możliwość rozwoju zawodowego.
- Pozostałe informacje: Możliwość pracy z biura i uczestnictwa w spotkaniach zespołowych.
- Dlaczego ta praca: Pracuj z nowoczesnymi technologiami i wpływaj na innowacyjne rozwiązania w branży danych.
- Kwalifikacje: Minimum 3 lata doświadczenia w Data Engineering oraz znajomość Databricks i Apache Spark.
Przewidywane wynagrodzenie mieści się w przedziale 51750 - 63250 zł za rok.
Oferujemy
- Model współpracy: 100% zdalna (z możliwością pracy z biura i okazjonalnymi spotkaniami zespołu)
- Stawka: 120-150 zł/h netto
Obowiązki
- Projektowanie i rozwój aplikacji oraz procesów ETL/ELT w środowisku Databricks.
- Implementacja rozwiązań w językach wykorzystywanych na platformie Databricks (np. PySpark, Spark SQL).
- Optymalizacja wydajności przetwarzania danych i tuning zapytań oraz zadań.
- Integracja Databricks z innymi usługami chmurowymi i narzędziami analitycznymi.
- Tworzenie i utrzymanie dokumentacji technicznej oraz standardów kodowania.
- Współpraca z zespołami analitycznymi, DevOps i biznesowymi w celu dostarczenia stabilnych rozwiązań.
- Udział w przeglądach architektury, kodu i wdrożeń oraz proponowanie usprawnień technicznych.
Wymagania
- Minimum 3 lata doświadczenia w obszarze Data Engineering / Big Data
- Praktycznego, projektowego doświadczenia z Databricks i Apache Spark (preferowane min. 3 lata)
- Znajomości przynajmniej jednego z języków używanych w Databricks: Python, Scala lub SQL
- Praktycznej wiedzy z projektowania procesów ETL/ELT oraz pracy z danymi w formatach Parquet, Avro, CSV i innych
- Umiejętności optymalizacji zapytań i zadań Spark oraz zarządzania zasobami klastra
- Dobrych praktyk w zakresie kontroli wersji (Git) i automatyzacji wdrożeń
- Samodzielności w działaniu
- Znajomości języka angielskiego na poziomie C1
Mile widziane
- Doświadczenie z usługami chmurowymi zintegrowanymi z Databricks (Azure, AWS lub GCP)
Data Engineer Databricks Developer in Warsaw – pracodawca: RITS
Nasz klient to jedna z wiodących firm ubezpieczeniowych w Polsce, która stawia na nowoczesne technologie i rozwój swoich pracowników. Oferuje elastyczny model pracy, gdzie tylko jeden dzień w miesiącu wymagana jest obecność w biurze w Łodzi, co sprzyja równowadze między życiem zawodowym a prywatnym. Pracownicy mają możliwość uczestniczenia w innowacyjnych projektach oraz korzystania z zaawansowanych narzędzi, co sprzyja ich rozwojowi zawodowemu i osobistemu.
Naszym zdaniem te umiejętności pozwolą ci błyszczeć jako Data Engineer Databricks Developer in Warsaw
ETL/ELT
Databricks
Apache Spark
PySpark
Spark SQL
Optymalizacja wydajności
Integracja z usługami chmurowymi
