Data Engineer, Communications Intelligence & Insights in Warsaw

O roli

Czy interesujesz się budowaniem systemów, które stanowią podstawę pomiaru, analizy i skalowania nowoczesnej inteligencji komunikacyjnej? Centrum Inteligencji i Wglądów EMEA Burson to zcentralizowana zdolność produkcyjna i inżynieryjna odpowiedzialna za rozwój infrastruktury danych, potoków i przepływów pracy, które napędzają monitorowanie, pomiar i raportowanie w regionie. Łącząc inżynierów i analityków, Centrum buduje skalowalne platformy, integruje wiele zewnętrznych źródeł danych i rozwija przepływy pracy wspierane przez AI, które zwiększają zarówno efektywność, jak i jakość dostarczania informacji.

Jako Inżynier Danych odegrasz kluczową rolę w rozwijaniu, utrzymywaniu i optymalizacji systemów inżynieryjnych, które znajdują się w sercu modelu dostarczania Centrum. Będziesz pracować nad inżynierią platformy, rozwiązaniami specyficznymi dla klientów oraz rozwojem przepływów pracy AI, pomagając w ewolucji The Fount i szerszego stosu technologii Danych i Inteligencji Burson.

Naszy ekosystem technologiczny oparty jest na nowoczesnej, wysoko zintegrowanej architekturze chmurowej i relacyjnej bazie danych. Podstawowe potoki przetwarzania danych są rozwijane przy użyciu obiektowego Pythona i uruchamiane przez skalowalną orkiestrację obliczeń w chmurze oraz narzędzia ETL. Zarządzane środowiska SQL zapewniają nasz relacyjny system rekordów, podczas gdy surowe i półstrukturalne zasoby są przechowywane w bezpiecznej chmurze. Zaawansowane modele językowe są integrowane bezpośrednio w naszych potokach przetwarzania, aby automatyzować wzbogacanie na dużą skalę, a szerszy ekosystem zarządzany jest przez GitHub, Azure DevOps i Infrastructure-as-Code.

To okazja dla inżyniera, który lubi rozwiązywać złożone wyzwania związane z danymi, budując niezawodne, skalowalne i wielokrotnego użytku systemy, które wspierają analityków, zespoły klientów i globalnych interesariuszy.

Co będziesz robić:

• Budować, rozwijać i utrzymywać podstawową platformę danych Burson oraz potoki, wspierając skalowalne wczytywanie, transformację, przechowywanie i dostarczanie danych inteligencyjnych w całym Centrum EMEA.
• Projektować i zarządzać solidnymi potokami wczytywania dla monitorowania mediów, słuchania społecznego, API, wewnętrznych zbiorów danych oraz zewnętrznych źródeł badań i analiz.
• Rozwijać warstwy transformacji i modelowania danych przy użyciu SQL i Pythona, tworząc zarówno standardowe centralne modele danych, jak i dostosowane zbiory danych klientów wspierające raportowanie downstream, w tym PowerBI.
• Projektować i dostarczać specyficzne dla klientów rozwiązania inżynieryjne, rozwijając niestandardowe potoki, integracje i zbiory danych tam, gdzie technologia gotowa nie spełnia złożonych lub specjalistycznych wymagań.
• Optymalizować wydajność, skalowalność i niezawodność systemów danych, identyfikując wąskie gardła, rozwiązując problemy z jakością danych i ciągle poprawiając efektywność potoków.
• Rozwijać wielokrotnego użytku ramy inżynieryjne, szablony i komponenty, które umożliwiają Centrum skalowanie rozwiązań konsekwentnie wśród klientów, rynków i przypadków użycia.
• Przyczyniać się do przepływów pracy wspieranych przez AI, wbudowując modele językowe w potoki danych, aby automatyzować analizę treści, klasyfikację, tagowanie, podsumowywanie, istotność, sentyment i inne procesy wzbogacania.
• Rozwijać i udoskonalać ramy podpowiedzi i przepływy pracy przetwarzania AI, w tym monitorowanie i optymalizację wykorzystania tokenów, aby zapewnić skuteczne, efektywne i komercyjnie zrównoważone wzbogacanie AI na dużą skalę.
• Współpracować z analitykami, zespołami produktowymi i specjalistami ds. komunikacji, aby przetłumaczyć zatwierdzone wymagania biznesowe i raportowe na jasno zdefiniowane rozwiązania techniczne oraz zidentyfikować odpowiednie możliwości dla AI i automatyzacji.
• Pracować w strukturalnym, zwinny i opartym na biletach środowisku inżynieryjnym, przyczyniając się do planowania sprintów, codziennych spotkań oraz dyskusji dotyczących projektowania technicznego, jednocześnie realizując uzgodnione specyfikacje funkcjonalne i standardy architektoniczne.
• Utrzymywać silne standardy zarządzania inżynieryjnego i bezpieczeństwa, w tym spójne praktyki kodowania, przepływy pracy Git, zarządzanie poświadczeniami w sposób bezpieczny, bezpieczeństwo baz danych oraz przestrzeganie uzgodnionych struktur katalogów i repozytoriów.
• Posiadać wysokiej jakości dokumentację techniczną, utrzymując jasne przewodniki techniczne, dokumentację markdown, schematy baz danych i zapisy systemowe, przyczyniając się do planowanego refaktoryzacji i redukcji długu technicznego bez zakłócania usług produkcyjnych.

Doświadczenie, które przyczynia się do sukcesu:

• Silne doświadczenie w inżynierii danych, z udokumentowanym doświadczeniem w projektowaniu, budowaniu i utrzymywaniu niezawodnych potoków i platform danych klasy produkcyjnej.
• Zaawansowane umiejętności SQL i silne doświadczenie w relacyjnych środowiskach baz danych, w tym transformacja danych, modelowanie, optymalizacja i tworzenie struktur danych do analizy i raportowania downstream.
• Silne umiejętności programowania w Pythonie, w tym pisanie czystego, czytelnego i obiektowego kodu, praca z pandas i rozwijanie równoległych lub skalowalnych przepływów pracy przetwarzania danych.
• Praktyczne doświadczenie z API, integracjami danych oraz architekturami ETL/ELT, z umiejętnością łączenia strukturalnych i półstrukturalnych danych z wielu źródeł.
• Doświadczenie w pracy w chmurowych środowiskach danych, najlepiej Microsoft Azure, w tym obliczenia w chmurze, zarządzane bazy danych, przechowywanie obiektów i usługi przetwarzania danych w przedsiębiorstwie.
• Silna dyscyplina inżynieryjna oprogramowania, w tym doświadczenie w projektowaniu i pisaniu zautomatyzowanych testów jednostkowych, integracyjnych i regresyjnych w Pythonie, najlepiej przy użyciu pytest.
• Silne zrozumienie praktyk inżynieryjnych związanych z bezpieczeństwem, w tym bezpieczeństwo baz danych, zapory ogniowe oraz zarządzanie bezpiecznymi sekretami i poświadczeniami przy użyciu narzędzi takich jak Azure Key Vault.
• Doświadczenie z opartymi na Git przepływami pracy inżynieryjnej i środowiskami CI/CD, najlepiej obejmującymi GitHub i Azure DevOps, z docenieniem dla strukturalnego branżowania, zarządzania kodem i środowisk wielodeweloperskich.
• Znajomość Infrastructure-as-Code, najlepiej Terraform lub Terragrunt, oraz umiejętność bezpiecznego zarządzania lub aktualizowania zmiennych środowiskowych, konfiguracji i kontroli dostępu w ramach ustalonych ram infrastrukturalnych.
• Doświadczenie lub silne zainteresowanie inżynierią danych wspieraną przez AI, w tym ekspozycja na duże modele językowe, przepływy pracy oparte na podpowiedziach, automatyzowane wzbogacanie lub integrację usług AI w produkcyjnych potokach danych.
• Silne umiejętności analityczne, rozwiązywania problemów i planowania technicznego, z umiejętnością diagnozowania złożonych problemów z danymi i wydajnością, skutecznego określania zakresu pracy inżynieryjnej oraz budowania skalowalnych rozwiązań zamiast krótkoterminowych poprawek.
• Współpraca i zdyscyplinowane podejście do inżynierii, komfortowe w pracy nad wieloma projektami z analitykami, inżynierami, zespołami produktowymi i interesariuszami biznesowymi, przy jednoczesnym utrzymywaniu silnej dokumentacji, ciągłego doskonalenia i przestrzegania uzgodnionych standardów technicznych.

Co oferujemy:

• Możliwość pracy w jednej z największych i najbardziej nagradzanych agencji PR w Polsce i na świecie.
• Model pracy hybrydowej.
• Dostęp do zestawu narzędzi generatywnej AI.
• W pełni finansowany pakiet prywatnej opieki zdrowotnej dla pracowników.
• Platforma benefitowa z elastycznym systemem kafeteryjnym (w tym Medicover Sport).
• Jasna ścieżka kariery i możliwości rozwoju zawodowego poprzez globalne i lokalne programy szkoleniowe.