W skrócie
- Zadania: Rozwijaj nowoczesne rozwiązania Data Engineeringowe w zespole Data Platform.
- Firma: Dynamiczna firma technologiczna z innowacyjną kulturą pracy.
- Benefity: Możliwość rozwoju, praca z nowoczesnym stackiem i ciekawe projekty.
- Pozostałe informacje: Współpraca z doświadczonym zespołem w dynamicznym środowisku.
- Dlaczego ta praca: Pracuj z dużymi zbiorami danych i wpływaj na nowoczesne technologie.
- Kwalifikacje: 4 lata doświadczenia w Apache Spark i umiejętności analityczne.
Przewidywane wynagrodzenie mieści się w przedziale 121500 - 148500 zł za rok.
Kogo szukamy? Do zespołu Data Platform szukamy doświadczonego Spark / Data Lakehouse Developera, który będzie rozwijał rozwiązania Data Engineeringowe związane z rekoncyliacją danych, MongoDB oraz architekturą Data Lakehouse.
Oczekiwaniamin:
- 4 lata doświadczenia z Apache Spark
- Bardzo dobra znajomość PySpark i Spark SQL
- Doświadczenie z MongoDB i MongoDB Spark Connector
- Praktyczna znajomość Apache Iceberg
- Doświadczenie w budowie warstw Data Lakehouse: raw/bronze/silver/gold
- Znajomość CI/CD i Jenkins
- Znajomość Prometheus i Grafana
- Doświadczenie w Scrum/Kanban oraz pracy z Jira/Confluence
Wymagania:
- Umiejętność optymalizacji procesów Spark
- Doświadczenie w rekoncyliacji i kontroli jakości danych
- Znajomość partitioningu, caching, broadcast joins i AQE
- Doświadczenie w pracy z dużymi zbiorami danych
- Samodzielność i analityczne podejście do rozwiązywania problemów
- Umiejętność współpracy z zespołami Data, QA i DevOps
Oferujemy:
- Pracę przy nowoczesnej platformie Data Lakehouse
- Udział w ciekawych projektach związanych z dużymi zbiorami danych
- Pracę z nowoczesnym stackiem: Spark, MongoDB, Iceberg, Kubernetes, Prometheus, Grafana
- Możliwość rozwoju i wpływu na rozwiązania technologiczne
- Współpracę z doświadczonym zespołem
Spark / Data Lakehouse Developer in Wrocław – pracodawca: Upvanta sp. z o.o.
Upvanta sp. z o.o. to doskonały pracodawca, który oferuje wyjątkowe możliwości rozwoju zawodowego w międzynarodowym środowisku. Pracując nad innowacyjnymi projektami w obszarze bioekonomii, będziesz miał okazję współpracować z ekspertami oraz korzystać z nowoczesnych narzędzi analitycznych, co sprzyja kreatywności i efektywności. Nasza kultura pracy opiera się na współpracy, otwartości i ciągłym doskonaleniu, co czyni nas idealnym miejscem dla osób poszukujących satysfakcjonującej kariery.