W skrócie
- Zadania: Projektuj i rozwijaj skalowalne procesy transformacji danych oraz optymalizuj wydajność projektów dbt.
- Firma: Międzynarodowa firma technologiczna z siedzibą w Brukseli, oferująca innowacyjne rozwiązania IT.
- Benefity: Konkurencyjne wynagrodzenie, pełen pakiet świadczeń oraz możliwość pracy zdalnej.
- Pozostałe informacje: Dynamiczne środowisko z możliwościami rozwoju kariery w międzynarodowym zespole.
- Dlaczego ta praca: Pracuj z nowoczesnymi technologiami i wpływaj na rozwój projektów analitycznych.
- Kwalifikacje: Doświadczenie w inżynierii analitycznej oraz umiejętności programowania w SQL i PySpark.
Przewidywane wynagrodzenie mieści się w przedziale 123750 - 151250 zł za rok.
Obecnie mamy wakat na stanowisko inżyniera analityki baz danych, biegłego w języku angielskim, który będzie pracował w Brukseli, Belgia. Praca będzie wykonywana w siedzibie firmy lub u klienta. W kontekście pierwszego zadania, wybrany kandydat zostanie zintegrowany z zespołem rozwoju firmy, który będzie ściśle współpracować z zespołem IT głównego klienta na miejscu.
Zadania:
- Projektowanie i rozwijanie skalowalnych, niezawodnych potoków transformacji danych oraz przepływów pracy;
- Optymalizacja wydajności i czasów wykonania projektów dbt;
- Projektowanie, wdrażanie i dokumentowanie kontroli jakości danych oraz testów kontrolnych przy użyciu możliwości dbt;
- Ustanawianie zautomatyzowanego testowania regresyjnego i procedur walidacyjnych w celu zapewnienia jakości i spójności wyników potoków;
- Promowanie i dzielenie się najlepszymi praktykami w zakresie utrzymywania, zarządzania i rozwijania projektów dbt w zespole;
- Analiza wymagań biznesowych i tłumaczenie dokumentacji analizy biznesowej na solidne, operacyjne potoki transformacji danych.
Wymagania:
- Wykształcenie wyższe w dziedzinie informatyki, technologii informacyjnej, inżynierii systemów lub pokrewnej, połączone z minimum 12-letnim doświadczeniem zawodowym w IT;
- Praktyczne doświadczenie z dbt, najlepiej dbt Core, w zakresie projektowania, utrzymywania, testowania, dokumentowania i rozszerzania projektów transformacji analitycznej klasy produkcyjnej;
- Doświadczenie w inżynierii analitycznej i nowoczesnym modelowaniu danych, w tym architekturach warstwowych, wielokrotnego użytku makr, kontrolach jakości danych oraz praktykach CI/CD;
- Doświadczenie w opracowywaniu skryptów transformacji PySpark do przetwarzania danych w dużej skali, optymalizacja zadań Spark będzie atutem;
- Praktyczne doświadczenie z Apache Iceberg, w tym ewolucja partycji i schematów, zarządzanie migawkami i podróż w czasie;
- Doświadczenie z narzędziami do orkiestracji i harmonogramowania zadań, takimi jak Dagster, do zarządzania obciążeniami dbt i Spark;
- Silna znajomość ETL opartych na SAS i starych baz kodu; doświadczenie w migracji przepływów pracy SAS do dbt jest dużym atutem;
- Doskonale umiejętności SQL, w tym złożone transformacje, optymalizacja wydajności i przetwarzanie inkrementalne;
- Dobre zrozumienie wykonania Apache Spark, strategii partycjonowania, optymalizacji układu plików i strojenia wydajności;
- Silna wiedza na temat walidacji danych, uzgadniania i testowania w celu zapewnienia funkcjonalnej równoważności podczas migracji systemów legacy do dbt i PySpark;
- Znajomość kontroli wersji i praktyk współpracy w rozwoju, w tym Git, przeglądów kodu, zarządzania wydaniami i zautomatyzowanych potoków wdrożeniowych;
- Doskonała znajomość języka angielskiego.
Korzyści:
Oferujemy konkurencyjne wynagrodzenie (na podstawie umowy lub wynagrodzenia z pełnym pakietem świadczeń), w zależności od kwalifikacji i doświadczenia. Wszystkie aplikacje będą traktowane jako poufne.
Database Analytics Engineer in Katowice – pracodawca: EUROPEAN DYNAMICS Group
EUROPEAN DYNAMICS to doskonały pracodawca, oferujący dynamiczne środowisko pracy w sercu Brukseli. Nasza kultura pracy opiera się na współpracy i innowacyjności, co sprzyja rozwojowi zawodowemu pracowników. Oferujemy atrakcyjne możliwości szkoleń oraz wsparcie w realizacji ambitnych projektów, co czyni nas idealnym miejscem dla specjalistów pragnących rozwijać swoje umiejętności w obszarze analityki danych.
