W skrócie
- Zadania: Projektuj, buduj i utrzymuj platformę analityczną danych w ING.
- Firma: ING Hubs Poland - innowacyjna firma z kulturą współpracy.
- Benefity: Atrakcyjne wynagrodzenie, benefity zdrowotne, praca zdalna i rozwój zawodowy.
- Pozostałe informacje: Dynamiczne środowisko z doskonałymi możliwościami rozwoju kariery.
- Dlaczego ta praca: Pracuj nad nowoczesnymi technologiami i wpływaj na kluczowe procesy biznesowe.
- Kwalifikacje: 4+ lata doświadczenia w inżynierii danych lub pokrewnych dziedzinach.
Przewidywane wynagrodzenie mieści się w przedziale 123750 - 151250 zł za rok.
Oczekiwana pensja dla stanowiska starszego specjalisty: 9600 - 22000 PLN, dla eksperta: 13000 - 28000 PLN. Zakres wynagrodzenia określony w ogłoszeniu może różnić się od zakresu określonego w regulaminie wynagradzania.
Wymagania:
- 4+ lata doświadczenia w inżynierii danych, inżynierii platform, inżynierii infrastruktury lub inżynierii niezawodności serwisów.
- Praktyczne doświadczenie w co najmniej jednej z następujących dziedzin oraz znajomość związanych technologii:
- Data Lake & Storage: Apache Iceberg, Hive Metastore, MinIO/S3‑kompatybilne przechowywanie obiektów, Google Cloud Storage.
- Niezawodność i operacje: monitorowanie, logowanie, alertowanie, replikacja danych, kopie zapasowe i przywracanie, odzyskiwanie po awarii.
- Doświadczenie w budowaniu, obsłudze lub wsparciu nowoczesnych platform danych i rozproszonych środowisk przetwarzania danych.
- Praktyczne doświadczenie z Google Cloud Platform (GCP) i technologiami chmurowymi.
- Doświadczenie w automatyzacji, CI/CD i praktykach infrastruktury jako kodu.
Twoje obowiązki będą obejmować:
- Projektowanie, budowanie i utrzymywanie platformy analitycznej Fallback ING.
- Tworzenie odpornych możliwości platformy danych wspierających krytyczne obciążenia biznesowe podczas odzyskiwania po awarii i scenariuszy fallback.
- Rozwój i obsługa rozwiązań opartych na Apache Spark, Apache Airflow, Apache Iceberg, Trino i technologiach przechowywania obiektów.
- Budowanie i utrzymywanie możliwości przetwarzania danych, orkiestracji, przechowywania i zarządzania metadanymi.
- Implementacja mechanizmów replikacji, synchronizacji, uzgadniania i odzyskiwania dla krytycznych zbiorów danych.
- Budowanie i optymalizacja analitycznych i wsadowych potoków przetwarzania przy użyciu nowoczesnych technologii chmurowych i danych.
- Poprawa widoczności platformy poprzez monitorowanie, logowanie, alertowanie i praktyki gotowości operacyjnej.
- Zabezpieczenie niezawodności, bezpieczeństwa, możliwości odzyskiwania i odporności operacyjnej platformy.
- Implementacja możliwości tworzenia kopii zapasowych, przywracania, odzyskiwania po awarii i ciągłości działania.
- Współpraca z zespołami platform, infrastruktury, bezpieczeństwa i inżynierii danych w ING.
- Udział w decyzjach architektonicznych, standardach inżynieryjnych, inicjatywach automatyzacyjnych i planach technicznych.
- Udział w działaniach wsparcia, gotowości operacyjnej i dyżurach, gdy będzie to wymagane.
Dodatkowe punkty za doświadczenie w:
- Platformach orkiestracyjnych opartych na Airflow.
- Keycloak, Ceph lub usługach platformowych na dużą skalę.
- Projektowaniu i obsłudze dużych platform danych.
- Odzyskiwaniu po awarii, ciągłości działania lub rozwiązaniach fallback.
- Nowoczesnych architekturach lakehouse opartych na Apache Iceberg.
- Replikacji i synchronizacji danych na dużą skalę.
- Migracji obciążeń między środowiskami chmurowymi a lokalnymi.
Informacje o zespole, do którego dołączysz: będziesz częścią zespołu budującego platformę VISTA (Data Analytics) Fallback, strategiczną inicjatywę skoncentrowaną na zapewnieniu odporności operacyjnej i ciągłości działania ekosystemu danych i analityki ING. Platforma zapewnia możliwości fallback dla krytycznych obciążeń analitycznych i raportowych, wykorzystując nowoczesne technologie lakehouse i platform danych. Rozwiązanie zostało zaprojektowane w celu umożliwienia szybkiego odzyskiwania i kontynuacji działania kluczowych procesów biznesowych w sytuacjach kryzysowych. Cenimy sobie odpowiedzialność, innowacyjność, współpracę i ciągłe doskonalenie. Będziesz miał okazję pracować nad jednym z najważniejszych inicjatyw inżynieryjnych ING i pomóc kształtować przyszłość odpornych platform danych.
Senior Data Platform Engineer in Warsaw – pracodawca: ING Hubs Poland
ING Hubs Poland to doskonały pracodawca, który oferuje dynamiczne środowisko pracy w obszarze technologii chmurowych i analityki. Pracownicy mają możliwość rozwoju zawodowego poprzez współpracę z ekspertami oraz dostęp do nowoczesnych narzędzi, co sprzyja innowacyjności i efektywności. Dodatkowo, firma promuje kulturę współpracy i otwartości, co czyni ją atrakcyjnym miejscem dla osób poszukujących satysfakcjonującej kariery.