W skrócie
- Zadania: Buduj platformę danych, przekształcając ogromne zbiory danych w wartościowe informacje.
- Firma: Międzynarodowa firma technologiczna z kulturą zdalnej współpracy.
- Benefity: Praca zdalna, elastyczne godziny, możliwość rozwoju zawodowego.
- Pozostałe informacje: Dynamiczne środowisko z możliwościami rozwoju kariery.
- Dlaczego ta praca: Rozwiązuj złożone wyzwania inżynieryjne i wpływaj na nowoczesne technologie danych.
- Kwalifikacje: Doświadczenie z Apache Druid, Kafka oraz optymalizacją baz danych.
Przewidywane wynagrodzenie mieści się w przedziale 56250 - 68750 zł za rok.
Buduj platformę danych, która przekształca ogromne zbiory danych w znaczące spostrzeżenia.
Model pracy: 100% zdalnie
Okres projektu: do grudnia 2026
Seniority: Senior / Principal
MOŻLIWOŚCI
Dane w skali wymagają więcej niż infrastruktury - wymagają przemyślanej inżynierii, wydajnych pipeline'ów i niezawodnej architektury. Szukamy inżynierów platform danych na poziomie Senior i Principal, którzy pomogą zbudować i rozwijać dużą platformę danych dla międzynarodowej firmy technologicznej działającej w obszarze zaangażowania klientów, automatyzacji i marketingu opartego na danych. Będziesz pracować nad fundamentami, które sprawiają, że dane są dostępne, wzbogacone, zabezpieczone i gotowe do analizy - od pipeline'ów do wczytywania danych Apache Druid i strumieniowania opartego na Kafka, po optymalizację baz danych i kontrolę dostępu.
CO BĘDZIESZ ROBIĆ
- Rozwijać i utrzymywać pipeline'y do wczytywania danych Apache Druid oraz niestandardowe rozszerzenia, w tym integracje z zewnętrznymi backendami wyszukiwania.
- Budować i wspierać pipeline'y danych oparte na Kafka, z potencjalnym udziałem w przetwarzaniu strumieniowym opartym na Flink.
- Projektować i wdrażać procesy wstępnej agregacji i wzbogacania danych.
- Optymalizować zapytania MySQL i wydajność baz danych w środowiskach o dużej skali.
- Rozwijać mechanizmy wzbogacania metadanych w różnych magazynach danych.
- Integracja i utrzymanie rozwiązań kontroli dostępu opartej na rolach (RBAC) w komponentach platformy.
- Pracować z usługami AWS, w tym S3, Aurora i IAM.
- Współpracować z zespołami inżynieryjnymi pracującymi nad szerszymi inicjatywami platformy danych i lakehouse.
- Przyczyniać się do skalowalności, wydajności i bezpieczeństwa nowoczesnego ekosystemu danych analitycznych.
CO PRZYNOSISZ
- Silne doświadczenie praktyczne z Apache Druid, szczególnie w zakresie pipeline'ów do wczytywania danych i rozwoju rozszerzeń.
- Doświadczenie w budowaniu i utrzymywaniu pipeline'ów danych opartych na Kafka.
- Znajomość Flink lub podobnych technologii przetwarzania strumieniowego.
- Silne zrozumienie optymalizacji zapytań MySQL i strojenia wydajności baz danych w skali.
- Doświadczenie w implementacji wzbogacania metadanych w różnych platformach danych.
- Praktyczne doświadczenie w integracji i utrzymywaniu rozwiązań RBAC w różnych magazynach danych.
- Doświadczenie z AWS, szczególnie S3, Aurora i IAM.
- Silne umiejętności rozwiązywania problemów i zdolność do współpracy przy złożonych wyzwaniach inżynieryjnych.
MILE WIDZIANE
- Doświadczenie z ClickHouse.
- Znajomość Apache Iceberg i architektur lakehouse.
- Znajomość technologii federacji zapytań, takich jak Trino i Amazon Athena.
- Doświadczenie z dużymi platformami analitycznymi i integracjami nowoczesnego ekosystemu danych.
DLACZEGO TEN PROJEKT?
- Współpraca zdalna - pracuj z dowolnego miejsca, w którym najlepiej wykonujesz swoją pracę inżynieryjną.
- Prawdziwe wyzwania platformy danych - pracuj z wczytywaniem, strumieniowaniem, wzbogacaniem, wydajnością i kontrolą dostępu w skali.
- Nowoczesne technologie danych - przyczyniaj się do ekosystemu opartego na Apache Druid, Kafka, AWS i pokrewnych technologiach.
- Wpływ techniczny - pomagaj rozwijać możliwości platformy, które wspierają produkty i analizy oparte na danych.
GOTOWY, ABY ZAPROJEKTOWAĆ COŚ NOWEGO?
Jeśli budowanie skalowalnych platform danych, optymalizacja złożonych pipeline'ów i rozwiązywanie trudnych problemów inżynieryjnych to to, co Cię napędza, chcielibyśmy usłyszeć od Ciebie.
Data Platform Engineer with Apache Druid in Kraków – pracodawca: DCV Technologies
Nasza firma to doskonały pracodawca, który oferuje dynamiczne środowisko pracy w Krakowie, sprzyjające innowacjom i współpracy. Oferujemy atrakcyjne benefity, takie jak elastyczne godziny pracy, możliwość rozwoju zawodowego oraz dostęp do najnowszych technologii w obszarze inżynierii danych. Nasza kultura pracy opiera się na zaufaniu i wsparciu, co pozwala naszym pracownikom na osiąganie sukcesów w ambitnych projektach.
