W skrócie
- Zadania: Buduj platformę danych, przetwarzaj ogromne zbiory danych i twórz wartościowe wnioski.
- Firma: Międzynarodowa firma technologiczna zdalnie współpracująca w obszarze marketingu i automatyzacji.
- Benefity: Praca zdalna, elastyczne godziny, możliwość rozwoju zawodowego i atrakcyjne wynagrodzenie.
- Pozostałe informacje: Praca w dynamicznym środowisku z możliwościami rozwoju kariery.
- Dlaczego ta praca: Rozwiązuj złożone wyzwania inżynieryjne i wpływaj na nowoczesne technologie danych.
- Kwalifikacje: Doświadczenie z Apache Druid, Kafka oraz umiejętności optymalizacji baz danych.
Przewidywane wynagrodzenie mieści się w przedziale 56250 - 68750 zł za rok.
Buduj platformę danych, która przekształca ogromne zbiory danych w znaczące spostrzeżenia.
Model pracy: 100% zdalnie
Okres projektu: do grudnia 2026
Seniority: Senior / Principal
MOŻLIWOŚCI
Dane w skali wymagają więcej niż infrastruktury - wymagają przemyślanej inżynierii, wydajnych potoków i niezawodnej architektury. Szukamy inżynierów platform danych na poziomie senior i principal, którzy pomogą zbudować i rozwijać dużą platformę danych dla międzynarodowej firmy technologicznej działającej w obszarze zaangażowania klientów, automatyzacji i marketingu opartego na danych. Będziesz pracować nad fundamentami, które sprawiają, że dane są dostępne, wzbogacone, zabezpieczone i gotowe do analizy - od potoków wprowadzania danych Apache Druid i strumieniowania opartego na Kafka po optymalizację baz danych i kontrolę dostępu.
CO BĘDZIESZ ROBIĆ
- Rozwijać i utrzymywać potoki wprowadzania danych Apache Druid oraz niestandardowe rozszerzenia, w tym integracje z zewnętrznymi backendami wyszukiwania.
- Budować i wspierać potoki danych oparte na Kafka, z potencjalnym udziałem w przetwarzaniu strumieniowym opartym na Flink.
- Projektować i wdrażać procesy wstępnej agregacji i wzbogacania danych.
- Optymalizować zapytania MySQL i wydajność baz danych w środowiskach o dużej skali.
- Rozwijać mechanizmy wzbogacania metadanych w różnych magazynach danych.
- Integracja i utrzymanie rozwiązań kontroli dostępu opartej na rolach (RBAC) w komponentach platformy.
- Pracować z usługami AWS, w tym S3, Aurora i IAM.
- Współpracować z zespołami inżynieryjnymi pracującymi nad szerszymi inicjatywami platformy danych i lakehouse.
- Przyczyniać się do skalowalności, wydajności i bezpieczeństwa nowoczesnego ekosystemu danych analitycznych.
CO PRZYNOSISZ
- Silne doświadczenie praktyczne z Apache Druid, szczególnie w zakresie potoków wprowadzania danych i rozwoju rozszerzeń.
- Doświadczenie w budowaniu i utrzymywaniu potoków danych opartych na Kafka.
- Znajomość Flink lub podobnych technologii przetwarzania strumieniowego.
- Silne zrozumienie optymalizacji zapytań MySQL i strojenia wydajności baz danych w skali.
- Doświadczenie w implementacji wzbogacania metadanych w różnych platformach danych.
- Praktyczne doświadczenie w integracji i utrzymywaniu rozwiązań RBAC w różnych magazynach danych.
- Doświadczenie z AWS, szczególnie S3, Aurora i IAM.
- Silne umiejętności rozwiązywania problemów oraz zdolność do współpracy przy złożonych wyzwaniach inżynieryjnych.
MILE WIDZIANE
- Doświadczenie z ClickHouse.
- Znajomość Apache Iceberg i architektur lakehouse.
- Znajomość technologii federacji zapytań, takich jak Trino i Amazon Athena.
- Doświadczenie z dużymi platformami analitycznymi i integracjami nowoczesnego ekosystemu danych.
DLACZEGO TEN PROJEKT?
- Współpraca w modelu zdalnym - pracuj z dowolnego miejsca, w którym najlepiej wykonujesz swoją pracę inżynieryjną.
- Prawdziwe wyzwania platformy danych - pracuj z wprowadzaniem, strumieniowaniem, wzbogacaniem, wydajnością i kontrolą dostępu w skali.
- Nowoczesne technologie danych - przyczyń się do ekosystemu opartego na Apache Druid, Kafka, AWS i pokrewnych technologiach.
- Wpływ techniczny - pomóż rozwijać możliwości platformy, które wspierają produkty i analizy oparte na danych.
GOTOWY NA INŻYNIEROWANIE TEGO, CO NASTĘPNE?
Jeśli budowanie skalowalnych platform danych, optymalizacja złożonych potoków i rozwiązywanie trudnych problemów inżynieryjnych to to, co Cię napędza, chcielibyśmy usłyszeć od Ciebie.
Data Platform Engineer with Apache Druid in Wrocław – pracodawca: DCV Technologies
Nasza firma to doskonały pracodawca, który oferuje dynamiczne środowisko pracy w Krakowie, sprzyjające innowacjom i współpracy. Oferujemy atrakcyjne benefity, takie jak elastyczne godziny pracy, możliwość rozwoju zawodowego oraz dostęp do najnowszych technologii w obszarze inżynierii danych. Nasza kultura pracy opiera się na zaufaniu i wsparciu, co pozwala naszym pracownikom na osiąganie sukcesów w ambitnych projektach.