W skrócie
- Zadania: Twórz i optymalizuj potoki danych w AWS, wspieraj codzienną operacyjność platformy.
- Firma: Cyclad - innowacyjna firma IT z dynamicznym zespołem.
- Benefity: Praca zdalna, konkurencyjne wynagrodzenie, opieka medyczna i karta Multisport.
- Pozostałe informacje: Możliwość rozwoju kariery w innowacyjnym środowisku.
- Dlaczego ta praca: Dołącz do zespołu i kształtuj przyszłość technologii danych.
- Kwalifikacje: 4+ lata doświadczenia w inżynierii danych, umiejętności SQL i Python.
Przewidywane wynagrodzenie mieści się w przedziale 49500 - 60500 zł za rok.
W Cyclad współpracujemy z czołowymi międzynarodowymi firmami IT, aby zwiększyć ich potencjał w dostarczaniu wyjątkowych, nowoczesnych technologii, które kształtują przyszłość. Szukamy doświadczonego inżyniera danych AWS, który dołączy do naszego rosnącego zespołu danych i pomoże kształtować przyszłość naszej platformy danych. Nasza platforma wykorzystuje AWS Step Functions, EMR (PySpark), Glue, Lambda, S3, Redshift, dbt, Airflow i Looker do dostarczania zaufanych, skalowalnych rozwiązań danych.
Jako część zespołu danych, odegrasz kluczową rolę w wspieraniu codziennej operacji platformy, jednocześnie wprowadzając strategiczne ulepszenia w zakresie niezawodności, skalowalności, optymalizacji kosztów i możliwości uczenia maszynowego.
Informacje o projekcie:
- Branża: Usługi IT
- Lokalizacja biura: Polska
- Praca zdalna: 100% zdalnie z Polski
- Budżet: b2b 140 – 170 PLN/h netto
- Poziom: Mid i Senior
- Długość projektu: do 06.2027, z możliwością przedłużenia
- Tylko kandydaci z obywatelstwem Unii Europejskiej i zamieszkali w Polsce
- Data rozpoczęcia: ASAP
Zakres projektu:
- Wsparcie codziennych operacji platformy, w tym awarie pipeline'ów, poprawki danych i nowe żądania danych
- Budowanie, utrzymywanie i optymalizacja pipeline'ów danych przy użyciu AWS, PySpark, SQL i dbt
- Rozwój i utrzymanie procesów pobierania danych (w tym nowych źródeł z baz danych usługi Rails na Aurora Postgres i SQS)
- Własność i rozwój śledzenia Segmentu, schematów zdarzeń i integracji danych downstream
- Zapewnienie spójności między Redshift a platformami takimi jak Braze, Amplitude, AppsFlyer i Looker
- Optymalizacja wydajności i kosztów Redshift
- Utrzymanie istniejących modeli ML, budowanie pipeline'ów cech i zbiorów danych do treningu nowych modeli oraz wdrażanie ich na SageMaker
- Wsparcie projektów AI, w tym narzędzi opartych na LLM (dostęp do danych, zbiory danych do oceny, kontrola kosztów) oraz umiejętności Claude Code, które analitycy wykorzystują do SQL i specyfikacji śledzenia
- Zarządzanie platformą jako kodem (AWS SAM i CloudFormation) oraz wkład w automatyzację CI/CD
- Uzgodnienie definicji metryk z analityką, finansami i produktem oraz utrzymanie ich spójności w magazynie i Looker
- Udoskonalenie projektu dbt z zespołem analitycznym: modele inkrementalne, kontrole świeżości źródeł i szersze testy
- Przegląd kodu i mentoring młodszego inżyniera
Wymagania kompetencyjne:
- 4+ lata doświadczenia w inżynierii danych, z odpowiedzialnością za produkcyjny magazyn danych
- Silne umiejętności SQL i Python, w tym PySpark
- Praktyczne doświadczenie z Redshift (optymalizacja wydajności, modelowanie wymiarowe, SCD)
- Silna znajomość dbt (modele, testy, źródła, przetwarzanie inkrementalne)
- Doświadczenie z Segmentem lub podobną platformą danych klientów
- Solidne doświadczenie w AWS, w tym S3, IAM, Glue, Lambda, Step Functions, EMR i Aurora/RDS
- Doświadczenie z Infrastructure as Code (CloudFormation, SAM lub Terraform) i CI/CD
- Udokumentowane osiągnięcia w budowaniu niezawodnych, skalowalnych pipeline'ów danych
- Praktyczne doświadczenie w przygotowywaniu danych do użycia w ML lub AI (inżynieria cech, dane treningowe lub serwowanie modeli), nawet jeśli nie byłeś odpowiedzialny za pełny system ML
- Angielski: min. B2
Mile widziane:
- Doświadczenie z Braze, Amplitude, AppsFlyer lub podobnymi narzędziami
- Znajomość atrybucji marketingowej i danych cyklu życia
- SageMaker lub platformy MLOps
- Ekspozycja na aplikacje LLM (Bedrock, OpenAI, API Anthropic) lub narzędzia wspomagające rozwój AI
- Looker/LookML
- Airflow, w tym migracja lub wycofywanie starych pipeline'ów
- Redshift Spectrum, udostępnianie danych i optymalizacja kosztów magazynu
- Doświadczenie w pracy z danymi subskrypcyjnymi, płatnościami, przychodami i danymi o churnie
- Integracja interfejsów API stron trzecich i eksportów danych od dostawców (limity szybkości, zmiany schematu, ponowne próby)
Oferujemy:
- Model pracy zdalnej
- Dynamiczne i innowacyjne środowisko inżynieryjne
- Umowa o pracę na pełny etat na podstawie b2b
- Prywatna opieka medyczna z opieką dentystyczną (pokrywająca 70% kosztów)
- Karta Multisport (również dla osoby towarzyszącej)
- Ubezpieczenie na życie
AWS Data Engineer in Warsaw – pracodawca: Cyclad
Cyclad to doskonały pracodawca, który oferuje elastyczne godziny pracy oraz możliwość pracy hybrydowej, co sprzyja równowadze między życiem zawodowym a prywatnym. Nasza kultura pracy opiera się na innowacyjności i współpracy, a pracownicy mają szansę na rozwój zawodowy w dynamicznie rozwijającym się obszarze IT/ICT, z dostępem do różnorodnych projektów w międzynarodowym środowisku. Dodatkowo, oferujemy atrakcyjny pakiet medyczny oraz sportowy, co czyni naszą ofertę jeszcze bardziej konkurencyjną na rynku pracy.
