W skrócie
- Zadania: Projektuj i implementuj skalowalne potoki danych w Azure oraz przetwarzaj dane w czasie rzeczywistym.
- Firma: Dynamiczna firma technologiczna z innowacyjną kulturą pracy.
- Benefity: Atrakcyjne wynagrodzenie, prywatna opieka medyczna, dofinansowanie szkoleń i kursów.
- Pozostałe informacje: Możliwość rozwoju kariery w dynamicznym środowisku z regularnym feedbackiem.
- Dlaczego ta praca: Pracuj z najnowszymi technologiami i wpływaj na rozwój projektów w branży danych.
- Kwalifikacje: Min. 3 lata doświadczenia w Data Engineering oraz dobra znajomość Pythona i SQL.
Przewidywane wynagrodzenie mieści się w przedziale 56250 - 68750 zł za rok.
Twój zakres obowiązków:
- Projektowanie i implementacja skalowalnych potoków danych w Azure, orkiestrowanych w Dagster.
- Przetwarzanie danych na platformie Databricks: optymalizacja zadań Spark, zarządzanie klastrami, rozwiązania oparte na Delta Lake.
- Budowa rozwiązań przetwarzania danych w czasie rzeczywistym w architekturze zdarzeniowej (Apache Kafka, Debezium).
- Tworzenie reużywalnych komponentów i bibliotek w Pythonie, które standaryzują procesy ETL/ELT.
- Zarządzanie infrastrukturą Azure w Terraform, w tym AKS, zasobami Databricks, bazami danych i siecią.
- Konteneryzacja aplikacji i procesów danych (Docker) oraz ich orkiestracja i skalowanie na Kubernetes.
- Budowa w pełni zautomatyzowanych procesów CI/CD (Azure DevOps / GitHub Actions) dla Kubernetes i Databricks.
- Wdrażanie podejścia „Everything as Code”: kod, testy, Dockerfile, manifesty K8s i Terraform wersjonowane w Git.
- Projektowanie systemów monitorowania, logowania i alertowania oraz observability (np. OpenMetadata).
- Optymalizacja wydajności i kosztów procesów na Azure i Databricks.
- Współpraca z zespołami Data Engineering, Data Science i BI oraz mentoring w zakresie praktyk DataOps.
Nasze wymagania:
- Min. 3 lata doświadczenia w obszarze Data Engineering, DataOps lub DevOps dla danych.
- Bardzo dobra znajomość Pythona (kod produkcyjny, tworzenie bibliotek) oraz SQL.
- Praktyczne doświadczenie z Databricks i PySpark, w tym Delta Lake.
- Doświadczenie z usługami chmury Azure.
- Znajomość Terraform i podejścia Infrastructure as Code.
- Praktyczna znajomość Dockera i Kubernetes (mile widziane AKS).
- Doświadczenie w budowie pipeline’ów CI/CD (Azure DevOps lub GitHub Actions) oraz biegła praca z Git.
- Doświadczenie z narzędziami do orkiestracji (Dagster, Airflow lub podobne).
- Znajomość języka angielskiego na poziomie umożliwiającym pracę z dokumentacją techniczną.
Mile widziane:
- Doświadczenie z Apache Kafka i Change Data Capture (Debezium).
- Znajomość narzędzi observability i katalogowania danych (OpenMetadata, Prometheus, Grafana).
- Doświadczenie z Unity Catalog.
- Certyfikaty Databricks lub Microsoft Azure.
- Doświadczenie w branży retail lub e-commerce.
To oferujemy:
- Ambitną pracę, w której nie sposób się nudzić.
- Możliwość dołączenia do dobrego ubezpieczenia grupowego na preferencyjnych warunkach.
- Prywatną opiekę medyczną.
- Akcje profilaktyczne.
- Pyszną kawę w miłym towarzystwie współpracowników.
- Zniżki oraz karty rabatowe na wybrane produkty.
- Karty sportowe.
- Udział w akcjach CSR.
- Regularny feedback, który pomoże rozwijać Twoje kompetencje.
Benefity:
- Dofinansowanie zajęć sportowych.
- Prywatna opieka medyczna.
- Dofinansowanie szkoleń i kursów.
- Ubezpieczenie na życie.
- Zniżki na firmowe produkty i usługi.
- Brak dress code’u.
- Wyprawka dla dziecka.
- Wyprawka szkolna.
- Umowa o pracę.
- Atrakcyjny system premiowy.
- Dofinansowanie do karty sportowej.
- Akcje profilaktyczne, programy prozdrowotne.
Analytics Engineer (m/k/os) in Warsaw – pracodawca: DOZ S.A.
Pracując jako Technik Farmaceutyczny w Krakowie, dołączysz do zespołu, który stawia na profesjonalizm i wysoką jakość obsługi pacjenta. Oferujemy stabilne zatrudnienie, atrakcyjny system premiowy oraz możliwość rozwoju zawodowego poprzez dostęp do platformy e-learningowej. Nasza firma zapewnia komfortowe warunki pracy oraz wsparcie w postaci prywatnej opieki medycznej, ubezpieczenia na życie i programów prozdrowotnych, co czyni nas doskonałym pracodawcą dla osób poszukujących satysfakcjonującej kariery w branży farmaceutycznej.
Naszym zdaniem te umiejętności pozwolą ci błyszczeć jako Analytics Engineer (m/k/os) in Warsaw
Projektowanie potoków danych
Azure
Dagster
Databricks
Spark
Delta Lake
Python