W skrócie
- Zadania: Twórz nowoczesne rozwiązania danych z użyciem Databricks i Azure.
- Firma: Dynamiczna firma finansowa z kulturą współpracy.
- Benefity: Atrakcyjne wynagrodzenie, opieka zdrowotna, programy rozwoju zawodowego.
- Pozostałe informacje: Możliwości rozwoju kariery w inspirującym środowisku.
- Dlaczego ta praca: Pracuj z nowoczesnymi technologiami i twórz wpływowe rozwiązania danych.
- Kwalifikacje: 5-letnie doświadczenie w inżynierii danych oraz umiejętności w Pythonie i PySpark.
Przewidywane wynagrodzenie mieści się w przedziale 90000 - 110000 zł za rok.
Opis
Szukamy starszego programisty Big Data, który dołączy do naszego zespołu w budowaniu nowoczesnej platformy danych przy użyciu Databricks i ekosystemu Microsoft Azure. W tej roli będziesz odpowiedzialny za projektowanie i rozwijanie skalowalnych rozwiązań danych, wdrażanie i optymalizację procesów ETL/ELT oraz integrację danych z wielu źródeł. Jeśli pasjonujesz się nowoczesnym inżynierią danych, rozwojem wspomaganym przez AI oraz tworzeniem wpływowych rozwiązań danych.
Zadania
- Projektowanie i rozwijanie rozwiązań danych przy użyciu Databricks, Pythona i PySpark
- Budowanie i optymalizacja procesów ETL/ELT dla przetwarzania danych wsadowych i strumieniowych
- Wdrażanie i utrzymywanie architektury medalionowej przy użyciu tabel Delta
- Integracja danych z wielu źródeł, w tym plików SFTP, tabel Delta i Azure Event Hub
- Praca z usługami Azure, takimi jak Azure Data Factory, aby wspierać kompleksowe przepływy danych
- Wykorzystanie narzędzi wspomaganych przez AI do poprawy jakości kodu, testowania, dokumentacji i produktywności
Wymagania
- Co najmniej 5-letnie doświadczenie na stanowisku inżyniera danych, inżyniera Big Data lub podobnym
- Silne doświadczenie praktyczne z Pythonem i PySpark
- Udokumentowane doświadczenie z Databricks, tabelami Delta i nowoczesnymi architekturami danych
- Praktyczna znajomość ekosystemu Microsoft Azure, w tym Azure Data Factory i Azure Event Hub
- Doświadczenie w budowaniu i utrzymywaniu skalowalnych procesów ETL/ELT
- Zaawansowany poziom języka angielskiego
- Interesowanie się nowoczesnymi technologiami i doświadczenie w korzystaniu z narzędzi wspomaganych przez AI w codziennej pracy
Bedzie plusem:
- Znajomość Elasticsearch
- Silne umiejętności analityczne i proaktywne podejście do rozwiązywania złożonych wyzwań związanych z danymi
Warunki
- Świetne miejsce do pracy
- Stabilna sytuacja finansowa
- Umowy z największymi markami
- Centrum szkoleń wewnętrznych
- Wielu ekspertów, od których można się uczyć
- Otwarte i dostępne kierownictwo
- Podział zysków
- Program sponsorowania pasji
- Regularne wydarzenia integracyjne i wyjazdy
- Komfortowe i dobrze wyposażone biura
- Aplikacja MySii
- Opieka medyczna
Data Engineer in Financial Industry in Warsaw – pracodawca: Sii Poland
Sii Poland to doskonały pracodawca, który oferuje dynamiczne środowisko pracy w Wrocławiu, sprzyjające innowacjom i rozwojowi zawodowemu. Nasza kultura opiera się na współpracy i ciągłym doskonaleniu, a pracownicy mają dostęp do licznych szkoleń oraz możliwości awansu. Dodatkowo, praca w regulowanych środowiskach zapewnia unikalne doświadczenia, które wzbogacają umiejętności i wiedzę w obszarze ITSM.
