W skrócie
- Zadania: Twórz nowoczesną platformę danych AI-first w dynamicznym środowisku AdTech.
- Firma: Innowacyjna firma AdTech z siedzibą w Szwecji, specjalizująca się w automatyzacji reklam.
- Benefity: Atrakcyjne wynagrodzenie, możliwość pracy zdalnej i rozwój zawodowy.
- Pozostałe informacje: Możliwość pracy nad międzynarodowymi projektami w ambitnym środowisku.
- Dlaczego ta praca: Wpływaj na strategię platformy i rozwiązuj złożone wyzwania systemowe.
- Kwalifikacje: 8+ lat doświadczenia w projektowaniu platform danych i silne umiejętności techniczne.
Przewidywane wynagrodzenie mieści się w przedziale 123750 - 151250 zł za rok.
Pełnoetatowa opis firmy: Dołącz do inicjatywy greenfield, skoncentrowanej na budowie nowej generacji platformy danych opartej na AI dla globalnego ekosystemu AdTech. Szukamy inżyniera Principal/Staff Data Platform, który podejmie decyzje architektoniczne, ustali standardy inżynieryjne i ukształtuje fundamenty dla skalowalnej analityki i możliwości AI.
Jako część Sigma Software, będziesz współpracować z doświadczonymi zespołami inżynieryjnymi i przyczyniać się do platformy zaprojektowanej wokół niezmiennych architektur opartych na zdarzeniach, regulowanych kontraktów danych oraz nowoczesnych zasad lakehouse. Ta rola jest idealna dla inżyniera na poziomie Principal, który lubi rozwiązywać złożone wyzwania systemów rozproszonych i wpływać na strategię platformy od pierwszego dnia.
Oferujemy możliwość pracy nad międzynarodowymi produktami na dużą skalę, współpracy z wysoko wykwalifikowanymi profesjonalistami oraz przyczyniania się do technicznie ambitnego środowiska z długoterminowym potencjałem wzrostu.
Projekt koncentruje się na budowie nowoczesnej platformy danych od podstaw, z naciskiem na niezmienne strumienie zdarzeń, regulowane modele kanoniczne, warstwy semantyczne oraz skalowalną infrastrukturę analityczną. Platforma będzie wspierać obciążenia analityczne, produkty danych operacyjnych, aplikacje AI oraz przyszłe doświadczenia z danymi skierowane do klientów.
Jako Principal / Staff Data Platform Engineer, będziesz odpowiedzialny za kluczowe decyzje architektoniczne, definiowanie skalowalnych standardów inżynieryjnych oraz pomoc w dostarczeniu pierwszej wersji produkcyjnej platformy w środowisku AdTech o wysokiej skali.
Kluczowe technologie: Apache Iceberg, Spark, Flink, Trino, AWS, Python, Scala, Java, CI/CD, Infrastructure as Code
Opis stanowiska:
- Prowadzenie projektowania technicznego i architektury nowoczesnej platformy danych na poziomie przedsiębiorstwa
- Definiowanie skalowalnych przepływów danych z przechowywania zdarzeń opartych na Iceberg do produktów danych analitycznych i operacyjnych
- Ocena i wybór technologii do orkiestracji, transformacji, zapytań, serwowania i przechowywania
- Projektowanie wielokrotnego użytku encji kanonicznych i modeli danych w obszarach reklamy, kampanii, zasobów, fakturowania i klientów
- Ustanawianie skalowalnych wzorców inżynieryjnych dla przetwarzania wsadowego i prawie rzeczywistego
- Budowanie niezawodnych i obserwowalnych potoków danych dla obciążeń AdTech o wysokiej objętości
- Implementacja jakości danych, śladów, obserwowalności i możliwości rekonsyliacji
- Współpraca z zespołami inżynieryjnymi platformy w celu wprowadzenia kontraktów danych i standardów zarządzania wymuszanych przez CI
- Definiowanie izolacji najemców, kontroli dostępu i strategii granic danych regionalnych
- Ustanawianie standardów dla testowania, automatyzacji wdrożeń, ewolucji schematów i wersjonowania
- Optymalizacja wydajności platformy, skalowalności i kosztów infrastruktury
- Mentorowanie inżynierów i przyczynianie się do doskonałości inżynieryjnej w zespole
- Ścisła współpraca z kierownictwem i interesariuszami międzyfunkcyjnymi
Kwalifikacje:
- 8+ lat doświadczenia w projektowaniu i obsłudze platform danych klasy produkcyjnej
- Silna wiedza na temat rozproszonych systemów danych i architektur opartych na zdarzeniach o wysokiej objętości
- Głęboka znajomość nowoczesnych architektur lakehouse i Apache Iceberg
- Zaawansowane umiejętności SQL i doświadczenie produkcyjne z Pythonem, Javą, Scalą lub podobnymi językami
- Doświadczenie z technologiami przetwarzania rozproszonego i zapytań, takimi jak Spark, Flink lub Trino
- Silna wiedza na temat modelowania danych, strategii partycjonowania i optymalizacji wydajności
- Udokumentowane doświadczenie w budowaniu potoków danych wsadowych i prawie rzeczywistych
- Praktyczne doświadczenie z infrastrukturą chmurową AWS
- Silne zrozumienie potoków CI/CD, Infrastructure as Code i obserwowalności produkcji
- Doświadczenie w implementacji kontraktów danych, ewolucji schematów i ram jakości danych
- Umiejętność podejmowania pragmatycznych decyzji architektonicznych w środowiskach greenfield
- Poziom angielskiego co najmniej średniozaawansowany
- Silne umiejętności komunikacyjne i techniczne umiejętności przywódcze
Będzie dodatkowym atutem:
- Doświadczenie w AdTech lub innych dziedzinach przetwarzania zdarzeń o wysokiej objętości
- Znajomość technologii warstwy semantycznej
- Doświadczenie w obsłudze zarówno obciążeń analitycznych, jak i ML/AI
- Zrozumienie przepisów dotyczących prywatności i wymagań dotyczących rezydencji danych
Co oznacza sukces w ciągu pierwszych sześciu miesięcy:
- Pierwsza produkcyjna baza danych działa.
- Wyraźne decyzje architektoniczne zostały podjęte i udokumentowane.
- Zdarzenia wchodzące do platformy danych mają egzekwowalne kontrakty.
- Podstawowe encje kanoniczne istnieją i są testowane.
- Jakość danych i ślady są obserwowalne.
- Inni inżynierowie mogą przyczyniać się bez potrzeby rozumienia każdego szczegółu implementacji.
Principal Data Platform Engineer in Kraków – pracodawca: Sigma Software
Sigma Software to doskonały pracodawca, który oferuje dynamiczne środowisko pracy w branży technologii budowlanej. Pracownicy mają możliwość rozwoju zawodowego poprzez udział w architekturze aplikacji oraz współpracę z zespołami iOS, QA i backend, co sprzyja innowacyjności i kreatywności. Dodatkowo, firma stawia na nowoczesne narzędzia i metodyki, co sprawia, że praca tutaj jest nie tylko satysfakcjonująca, ale także pełna wyzwań.
