W skrócie
- Zadania: Twórz i zarządzaj potokami danych w chmurze GCP oraz rozwiązaniami opartymi na Kafka.
- Firma: Wiodąca firma fintech z listy FTSE 100, oferująca globalne możliwości.
- Benefity: Atrakcyjne wynagrodzenie, możliwość pracy zdalnej i rozwój zawodowy.
- Pozostałe informacje: Dynamiczne środowisko z możliwościami rozwoju kariery w globalnej firmie.
- Dlaczego ta praca: Pracuj nad dużymi wyzwaniami inżynieryjnymi i wpływaj na przyszłość platformy danych.
- Kwalifikacje: Doświadczenie w budowaniu potoków danych na GCP oraz umiejętności w Pythonie i SQL.
Przewidywane wynagrodzenie mieści się w przedziale 121500 - 148500 zł za rok.
Wiodąca firma fintech z listy FTSE 100 poszukuje Senior Data Engineera do swojego globalnego zespołu inżynierii danych, aby przyczynić się do dużej transformacji swojej platformy danych. Zespół konsoliduje złożoną strukturę danych na GCP, tworząc skalowalną i zaufaną platformę wspierającą analitykę, zgodność, naukę o danych oraz coraz bardziej zaawansowane przypadki użycia AI/ML.
To rola praktyczna, odpowiednia dla doświadczonego inżyniera, który lubi rozwiązywać złożone problemy związane z danymi i chce mieć znaczący wpływ na standardy inżynieryjne oraz projektowanie platformy.
Obowiązki:
- Projektowanie i budowanie skalowalnych potoków danych w trybie wsadowym i rzeczywistym
- Rozwój strumieni zdarzeń opartych na Kafka i workflow zorganizowanych przez Airflow
- Budowanie transformacji i modeli danych w BigQuery
- Rozwój i utrzymanie integracji i konektorów do pobierania danych
- Implementacja kontroli jakości danych, obserwowalności i monitorowania potoków
- Wkład w standardy inżynieryjne, przeglądy kodu i praktyki CI/CD
- Wsparcie inicjatyw związanych z danymi gotowymi do nauki o danych i AI
- Mentorowanie młodszych inżynierów i wkład w rozwój szerszego zespołu inżynieryjnego
Wymagania:
- Silne doświadczenie komercyjne w budowaniu i obsłudze produkcyjnych potoków danych na GCP
- Silne umiejętności w SQL i Pythonie
- Solidne doświadczenie z Apache Kafka lub porównywalnymi technologiami strumieniowymi
- Doświadczenie z BigQuery, Airflow/Cloud Composer i GCS
- Doświadczenie z dbt i nowoczesnymi podejściami do transformacji danych
- Zrozumienie architektury Medallion i najlepszych praktyk platformy danych
- Doświadczenie w zakresie kontraktów danych, genealogii, obserwowalności i SLO potoków
- Doświadczenie w pracy w ustrukturyzowanym lub regulowanym środowisku
To okazja do pracy nad dużymi wyzwaniami inżynierii danych w globalnym fintechu, z technicznym zakresem, aby mieć realny wpływ na platformę i sposób wykorzystania danych w całej organizacji.
Senior Data Engineer in Kraków – pracodawca: Talentedge
Nasza firma to wiodący pracodawca w branży fintech, oferujący wyjątkowe możliwości rozwoju zawodowego w dynamicznym środowisku. Pracując jako Senior Machine Learning Engineer, będziesz częścią zespołu, który kładzie duży nacisk na innowacje i współpracę, co sprzyja kreatywności i efektywności. Oferujemy konkurencyjne wynagrodzenie, elastyczne godziny pracy oraz dostęp do najnowszych technologii, co czyni nas idealnym miejscem dla specjalistów pragnących rozwijać swoje umiejętności w obszarze AI/ML.
