W skrócie
- Zadania: Projektuj i rozwijaj potoki Azure Data Factory oraz zarządzaj ich wydajnością.
- Firma: Addepto - wiodąca firma konsultingowa AI z globalnym zasięgiem.
- Benefity: Elastyczne godziny pracy, wsparcie zdrowotne i możliwości rozwoju zawodowego.
- Pozostałe informacje: Możliwość uczestnictwa w konferencjach i wydarzeniach zespołowych.
- Dlaczego ta praca: Pracuj z czołowymi firmami i innowacyjnymi startupami w dynamicznym środowisku.
- Kwalifikacje: Doświadczenie w Azure Data Factory, Pythonie i SQL.
Przewidywane wynagrodzenie mieści się w przedziale 90000 - 110000 zł za rok.
O projekcie: Addepto to wiodąca firma konsultingowa w dziedzinie AI oraz inżynierii danych, która buduje skalowalne rozwiązania AI skoncentrowane na ROI dla największych światowych przedsiębiorstw i innowacyjnych startupów. Addepto pomaga organizacjom odblokować pełny potencjał ich danych poprzez systemy zaprojektowane dla mierzalnego wpływu na biznes i długoterminowego wzrostu.
Jako Senior Data Engineer będziesz miał okazję wspierać i rozwijać rozwiązanie integracji danych oparte na Azure, głównie wokół Azure Data Factory i Databricks. Obecne środowisko obejmuje Azure Functions i komponenty do pobierania danych, ale codzienna dostawa koncentruje się na projektowaniu pipeline'ów ADF, orkiestracji, monitorowaniu i ciągłym doskonaleniu.
Wymagania:
- Silne doświadczenie praktyczne z Azure Data Factory i Databricks (must-have), w tym: projektowanie pipeline'ów i orkiestracji, usługi powiązane, zestawy danych, wyzwalacze i parametryzacja, monitorowanie operacyjne, rozwiązywanie problemów i optymalizacja wydajności.
- Doskonała znajomość Pythona (Azure Functions, REST APIs, automatyzacja).
- Silne umiejętności SQL i solidne zrozumienie modelowania danych dla ETL/ELT i obciążeń magazynowych.
- Doświadczenie z procesami CI/CD w Azure DevOps (pipeline'y, wydania, wdrożenia w wielu środowiskach).
- Solidne zrozumienie usług Azure i rozwiązań danych w chmurze (np. Azure SQL Database, Azure Key Vault).
- Doświadczenie z Power BI do okazjonalnego raportowania i tworzenia dashboardów.
- Umiejętność współpracy z Product Ownerem i Architektem podczas planowania i dostarczania rozwiązań.
- Samodzielne i odpowiedzialne podejście do dostarczania wysokiej jakości rozwiązań.
- Doskonała znajomość języka angielskiego (co najmniej poziom C1).
Codzienne zadania:
- Projektowanie, rozwijanie i utrzymywanie pipeline'ów Azure Data Factory, w tym orkiestracja, parametryzacja i zarządzanie wyzwalaczami.
- Monitorowanie, rozwiązywanie problemów i optymalizacja pipeline'ów ADF w celu zapewnienia wydajności i niezawodności.
- Przekładanie wymagań biznesowych na rozwiązania techniczne we współpracy z Product Ownerem i Architektem.
- Rozwój i utrzymanie komponentów opartych na Pythonie (np. Azure Functions, integracje API, skrypty automatyzacji).
- Wsparcie potrzeb raportowania i dashboardingu w Power BI.
Senior Data Engineer (Azure Data Factory) in Katowice – pracodawca: Addepto
Addepto to doskonały pracodawca, który oferuje wyjątkowe możliwości rozwoju zawodowego w dynamicznym środowisku pracy. Nasza kultura opiera się na współpracy i innowacyjności, co pozwala pracownikom na aktywne uczestnictwo w modernizacji kluczowych platform w branży lotniczej. Pracując z nami, zyskujesz dostęp do zaawansowanych technologii oraz możliwość pracy z doświadczonym zespołem, co sprzyja osobistemu i zawodowemu rozwojowi.
