W skrócie
- Zadania: Twórz skalowalne platformy danych i optymalizuj procesy przetwarzania.
- Firma: Dynamiczna firma technologiczna z zespołem ekspertów.
- Benefity: Konkurencyjne wynagrodzenie, wsparcie zawodowe i elastyczne godziny pracy.
- Pozostałe informacje: Możliwości rozwoju kariery w innowacyjnym zespole.
- Dlaczego ta praca: Pracuj nad ekscytującymi projektami i rozwijaj swoje umiejętności w przyjaznym środowisku.
- Kwalifikacje: 4+ lata doświadczenia w inżynierii danych i umiejętności SQL oraz Python.
Przewidywane wynagrodzenie mieści się w przedziale 123750 - 151250 zł za rok.
Jesteś pasjonatem budowania skalowalnych, wydajnych rozwiązań danych? Szukamy Inżyniera Danych, który dołączy do naszego zespołu i pomoże w projektowaniu oraz rozwijaniu solidnych platform danych, które wspierają analitykę, raportowanie i podejmowanie decyzji opartych na danych.
Dlaczego warto do nas dołączyć? Będziesz pracować nad wymagającymi projektami, współpracować z utalentowanymi ekspertami oraz mieć dostęp do możliwości rozwoju zawodowego, wspierającego środowiska i konkurencyjnych benefitów.
Opis stanowiska:
- Projektowanie i rozwijanie skalowalnych, niezawodnych platform i potoków danych dla analityki i operacji
- Implementacja procesów przetwarzania danych przy użyciu rozproszonych frameworków (Apache Spark/pySpark, Databricks)
- Ewolucja chmurowej platformy danych organizacji z wykorzystaniem technologii Azure (Data Factory, Synapse, Event Hub, Azure Data Lake Storage)
- Modelowanie danych w celu wsparcia analityki, raportowania i konsumpcji downstream
- Integracja i przetwarzanie danych z wielu źródeł, zapewniając jakość i spójność
- Monitorowanie i optymalizacja wydajności potoków, zapewniając niezawodność i skalowalność
- Współpraca z analitykami, naukowcami i inżynierami w celu przekształcenia wymagań w rozwiązania
- Poprawa standardów inżynierii danych, testowania i niezawodności operacyjnej
- Ocena i wprowadzanie nowych narzędzi i technologii w ekosystemie inżynierii danych
Wymagania:
- 4+ lata praktycznego doświadczenia w inżynierii danych lub budowaniu platform przetwarzania danych
- Silne umiejętności SQL i solidne doświadczenie w Pythonie w zakresie rozwoju potoków
- Doświadczenie z rozproszonymi frameworkami przetwarzania (preferowane Apache Spark/pySpark, Databricks)
- Praktyczne doświadczenie w projektowaniu i implementacji potoków w środowiskach chmurowych (preferowane Azure)
- Doświadczenie z systemami analitycznymi na dużą skalę i modelowaniem danych
- Zrozumienie zasad projektowania ETL/ELT, modelowania wymiarowego i hurtowni danych
- Doświadczenie z nowoczesnymi architekturami jezior danych i formatami (Parquet, JSON)
- Znajomość narzędzi do orkiestracji workflow (Airflow)
- Doświadczenie w rozwoju i optymalizacji baz danych
- Umiejętność projektowania skalowalnych rozwiązań z minimalnym nadzorem
- Silne umiejętności współpracy i komunikacji
- Profesjonalna znajomość języka angielskiego
Strong Middle Data Engineer in Warsaw – pracodawca: Sigma Software
Sigma Software to doskonały pracodawca, który oferuje dynamiczne środowisko pracy w branży technologii budowlanej. Pracownicy mają możliwość rozwoju zawodowego poprzez udział w architekturze aplikacji oraz współpracę z zespołami iOS, QA i backend, co sprzyja innowacyjności i kreatywności. Dodatkowo, firma stawia na nowoczesne narzędzia i metodyki, co sprawia, że praca tutaj jest nie tylko satysfakcjonująca, ale także pełna wyzwań.