W skrócie
- Zadania: Projektuj i wdrażaj automatyzację opartą na AI dla procesów inżynieryjnych.
- Firma: Innowacyjna firma technologiczna z siedzibą w Warszawie, Gdańsku i Gdyni.
- Benefity: Prywatna opieka medyczna, dofinansowanie karty sportowej oraz wsparcie konsultanta.
- Pozostałe informacje: Dynamiczne środowisko z możliwościami rozwoju kariery.
- Dlaczego ta praca: Pracuj z najnowszymi technologiami AI i wpływaj na rozwój procesów inżynieryjnych.
- Kwalifikacje: Doświadczenie w budowaniu automatyzacji z wykorzystaniem LLM oraz umiejętności inżynieryjne.
Przewidywane wynagrodzenie mieści się w przedziale 123750 - 151250 zł za rok.
Obowiązki:
- Projektowanie i wdrażanie workflowów wspomaganych przez LLM i agentów w celu poprawy wydajności programistów oraz niezawodności dostarczania pipeline'ów danych.
- Budowanie i ulepszanie automatyzacji napędzanej przez AI dla procesów inżynieryjnych, w tym: automatyzacja pull requestów, bramy jakości oraz narzędzia wspomagające rozwój.
- Implementacja przeglądów schematów wspieranych przez AI oraz bram zarządzania w ramach cyklu życia wiadomości kanonicznych.
- Wdrażanie automatyzacji testów napędzanej przez AI, w tym automatyczne generowanie testów E2E oraz walidacja jakości.
- Rozwój i utrzymanie pipeline'ów pakowania danych przekształcających dane źródłowe w kanoniczne formaty wiadomości zgodne z ramami pakowania danych i wzorcami warstwy dostępności.
- Budowanie i zarządzanie transformacjami danych opartymi na SQL oraz pipeline'ami sterowanymi konfiguracją.
- Wsparcie cyklu życia wiadomości kanonicznych, w tym: walidacja schematów, wersjonowanie, kontrole zgodności oraz workflow publikacji.
- Wkład w wydania frameworków, stabilność operacyjną oraz dokumentację.
- Utrzymywanie i aktualizacja Rekordów Decyzji Architektonicznych (ADR).
Wymagania:
- Praktyczne doświadczenie w budowaniu automatyzacji napędzanej przez LLM dla workflowów inżynieryjnych (np. bramy przeglądowe, kontrole jakości, narzędzia asystujące dla dev/test/docs).
- Doświadczenie z procesami przeglądu/akceptacji wspomaganymi przez AI oraz integracją kroków AI w pipeline'ach CI/CD.
- Doświadczenie z koncepcjami generowania testów wspomaganymi przez AI / automatyzacji testów.
- Silna dyscyplina inżynieryjna dotycząca jakości i bezpieczeństwa wyników AI (myślenie oceniające, powtarzalność, śledzenie).
- Silne doświadczenie w inżynierii danych i przetwarzaniu rozproszonym; praktyczne podejście do dostarczania.
- Praktyczne doświadczenie z transformacjami opartymi na Kafka i SQL.
- Doświadczenie z frameworkami przetwarzania wsadowego/strumieniowego (np. Flink lub Spark).
- Znajomość formatów schematów i cyklu życia (np. JSON/Avro/XSD) oraz koncepcji wersjonowania/zgodności.
- Doświadczenie w pracy z workflowami Git i środowiskami Kubernetes.
- Doświadczenie z CI/CD i pipeline'ami budowlanymi (Bazel + Tekton).
Miłe widziane:
- Doświadczenie z architekturą odniesienia danych / modelem produktu danych.
- Znajomość Airflow, Snowflake, Iceberg lub podobnych platform danych.
- Ekspozycja na koncepcje zarządzania danymi, metadanymi i liniowością.
- Doświadczenie w bankowości lub innych regulowanych środowiskach.
Oferta:
- Prywatna opieka medyczna.
- Współfinansowanie karty sportowej.
- Stałe wsparcie dedykowanego konsultanta.
Senior Data Engineer in Warsaw – pracodawca: Diverse CG Sp. z o.o. Sp.k.
DCG to doskonały pracodawca, który stawia na rozwój swoich pracowników i elastyczność w pracy. Oferujemy atrakcyjne benefity, takie jak prywatna opieka medyczna oraz dofinansowanie do karty sportowej, a także przyjazną kulturę pracy, która sprzyja współpracy i wsparciu ze strony dedykowanych konsultantów. Pracując z nami w Gdańsku, Gdyni, Warszawie lub Łodzi, masz szansę na rozwój zawodowy w dynamicznym środowisku rekrutacyjnym.
Dane kontaktowe:
Zespół rekrutacyjny Diverse CG Sp. z o.o. Sp.k.
Naszym zdaniem te umiejętności pozwolą ci błyszczeć jako Senior Data Engineer in Warsaw
LLM-powered automation
AI-assisted review/approval flows
CI/CD integration
Test generation and automation
Data engineering
Distributed processing
Kafka