W skrócie
- Zadania: Twórz i dostarczaj rozwiązania danych na dużą skalę z użyciem Databricks i Spark.
- Firma: MDW to wiodąca firma konsultingowa specjalizująca się w danych i AI.
- Benefity: Umowa o pracę, konkurencyjne wynagrodzenie, 25 dni urlopu, budżet na szkolenia.
- Pozostałe informacje: Dynamiczne środowisko z możliwościami rozwoju kariery.
- Dlaczego ta praca: Pracuj nad innowacyjnymi projektami i rozwijaj swoje umiejętności w międzynarodowym zespole.
- Kwalifikacje: Doświadczenie w projektach Databricks i umiejętności w Pythonie oraz PySpark.
Przewidywane wynagrodzenie mieści się w przedziale 123750 - 151250 zł za rok.
MDW jest wiodącą firmą konsultingową specjalizującą się w danych, AI i BizApps, z biurami w Genewie i Madrycie. Jako uznany partner Microsoftu roku z wieloma nagrodami, pomagamy dużym organizacjom przekształcać ich działalność za pomocą technologii Azure, Microsoft Fabric, Databricks i AI.
Twoja rola
Szukamy Senior Data Engineera Databricks / Spark, który dołączy do naszego zespołu i będzie pracować nad nowoczesnymi projektami danych na dużą skalę. Ze względu na krytyczność fazy produkcji, w którą wchodzimy, potrzebujemy głębokiej wiedzy w zakresie Databricks i ekosystemu big data, udowodnionej zdolności do dostarczania przy bardzo dużych wolumenach danych oraz senioralności do samodzielnego i pewnego rozwiązywania złożonych wyzwań.
Co będziesz robić
- Projektować i dostarczać rozwiązania danych Databricks i Spark na dużą skalę, obsługując bardzo wysokie wolumeny danych z równoległym wykonaniem w różnych krajach i rynkach.
- Budować i rozwijać rozwiązania danych na platformie Azure i Microsoft Fabric.
- Przejmować pełną odpowiedzialność za potoki danych, od przetwarzania danych po zestawy danych gotowe do BI, z silnym naciskiem na optymalizację wydajności i skalowalność.
- Dostarczać rzeczywiste projekty konsultingowe w różnych branżach, szybko reagując na zmieniające się wymagania.
- Zapewniać spersonalizowane wsparcie dla klientów, ściśle współpracując z nimi na miejscu w modelu hybrydowym, zapewniając skuteczną współpracę i rozwiązania zgodne z ich celami biznesowymi.
- Wzmacniać senioralność, autonomię i pewność dostarczania w zespole.
- Współpracować z międzynarodowym zespołem ekspertów w MDW, aby wspólnie się rozwijać.
Co cenimy
Wymagania podstawowe – Databricks i Big Data
- Udokumentowane doświadczenie w realizacji projektów Databricks przy bardzo dużych wolumenach danych, z równoległym wykonaniem w różnych krajach lub rynkach.
- Silna znajomość Pythona i PySpark, z głęboką wiedzą na temat optymalizacji wydajności Spark.
- Doświadczenie praktyczne z Deklaratywnymi Pakietami Automatyzacji i CI/CD (Azure DevOps).
- Doświadczenie w dostarczaniu end-to-end: od przetwarzania danych po zestawy danych gotowe do BI.
- Doświadczenie w projektowaniu przepływów pracy Batch Data, w tym Architektura Medallion.
- Doświadczenie w modelowaniu danych: schematy gwiazdy, schematy śnieżynki.
- Znajomość platformy Azure Data: Data Factory, Synapse, Data Lake Gen2, Azure Functions, Logic Apps itp.
Doświadczenie w infrastrukturze i DevOps
- Doświadczenie z CI/CD z Azure DevOps.
- Znajomość IaC z Terraform, Bicep, ARM lub Pulumi.
Umiejętności miękkie i językowe
- Umiejętność pracy z dużą autonomią i szybkiego dostarczania w dynamicznym, ewoluującym środowisku projektowym.
- Silne umiejętności komunikacji z klientem, zapewniające skuteczne zarządzanie i pozytywne doświadczenia w trakcie projektu.
Certyfikaty (cenione)
- Certyfikaty Databricks (silnie cenione).
- Doświadczenie w pracy w środowisku Agile.
Miłe do posiadania
- Projektowanie przepływów pracy w czasie rzeczywistym (Kafka, strumieniowanie strukturalne, Delta Live Tables, Fabric Eventhouse itp.).
- Narzędzia do zarządzania danymi głównymi i zarządzania (Profisee, Purview).
- Znajomość platformy Microsoft Fabric.
Co oferujemy / Nasze korzyści
- Stała umowa o pracę (polski system płac).
- Konkurencyjne wynagrodzenie w zależności od doświadczenia.
- 25 dni płatnego urlopu.
- 3 wydarzenia integracyjne rocznie.
- Dedykowany budżet na szkolenia i certyfikaty.
- Odpowiedzialność za pełny cykl życia rozwiązań danych w chmurze.
Senior Data Engineer in Katowice – pracodawca: MDW
MDW to wiodąca firma konsultingowa specjalizująca się w danych, AI i BizApps, oferująca wyjątkowe możliwości rozwoju zawodowego w międzynarodowym środowisku. Pracując z zespołem ekspertów w Genewie lub Madrycie, będziesz miał dostęp do innowacyjnych projektów oraz szkoleń, które pozwolą Ci rozwijać swoje umiejętności w obszarze technologii Azure i Databricks. Oferujemy konkurencyjne wynagrodzenie, 25 dni płatnego urlopu oraz możliwość pracy w elastycznym modelu hybrydowym, co sprzyja równowadze między życiem zawodowym a prywatnym.
