Senior Data Engineer in Warsaw

Senior Data Engineer in Warsaw

Warsaw Pełny etat 123750 - 151250 zł / rok (szac.) Stacjonarnie
D

W skrócie

  • Zadania: Projektuj i wdrażaj automatyzację opartą na AI dla procesów inżynieryjnych.
  • Firma: Innowacyjna firma technologiczna z siedzibą w Warszawie, Gdańsku i Gdyni.
  • Benefity: Prywatna opieka medyczna, dofinansowanie karty sportowej oraz wsparcie konsultanta.
  • Pozostałe informacje: Dynamiczne środowisko z możliwościami rozwoju kariery.
  • Dlaczego ta praca: Pracuj z najnowszymi technologiami AI i wpływaj na rozwój procesów inżynieryjnych.
  • Kwalifikacje: Doświadczenie w budowaniu automatyzacji z wykorzystaniem LLM oraz umiejętności inżynieryjne.

Przewidywane wynagrodzenie mieści się w przedziale 123750 - 151250 zł za rok.

Obowiązki:

  • Projektowanie i wdrażanie workflowów wspomaganych przez LLM i agentów w celu poprawy wydajności programistów oraz niezawodności dostarczania pipeline'ów danych.
  • Budowanie i ulepszanie automatyzacji napędzanej przez AI dla procesów inżynieryjnych, w tym: automatyzacja pull requestów, bramy jakości oraz narzędzia wspomagające rozwój.
  • Implementacja przeglądów schematów wspieranych przez AI oraz bram zarządzania w ramach cyklu życia wiadomości kanonicznych.
  • Wdrażanie automatyzacji testów napędzanej przez AI, w tym automatyczne generowanie testów E2E oraz walidacja jakości.
  • Rozwój i utrzymanie pipeline'ów pakowania danych przekształcających dane źródłowe w kanoniczne formaty wiadomości zgodne z ramami pakowania danych i wzorcami warstwy dostępności.
  • Budowanie i zarządzanie transformacjami danych opartymi na SQL oraz pipeline'ami sterowanymi konfiguracją.
  • Wsparcie cyklu życia wiadomości kanonicznych, w tym: walidacja schematów, wersjonowanie, kontrole zgodności oraz workflow publikacji.
  • Wkład w wydania frameworków, stabilność operacyjną oraz dokumentację.
  • Utrzymywanie i aktualizacja Rekordów Decyzji Architektonicznych (ADR).

Wymagania:

  • Praktyczne doświadczenie w budowaniu automatyzacji napędzanej przez LLM dla workflowów inżynieryjnych (np. bramy przeglądowe, kontrole jakości, narzędzia asystujące dla dev/test/docs).
  • Doświadczenie z procesami przeglądu/akceptacji wspomaganymi przez AI oraz integracją kroków AI w pipeline'ach CI/CD.
  • Doświadczenie z koncepcjami generowania testów wspomaganymi przez AI / automatyzacji testów.
  • Silna dyscyplina inżynieryjna dotycząca jakości i bezpieczeństwa wyników AI (myślenie oceniające, powtarzalność, śledzenie).
  • Silne doświadczenie w inżynierii danych i przetwarzaniu rozproszonym; praktyczne podejście do dostarczania.
  • Praktyczne doświadczenie z transformacjami opartymi na Kafka i SQL.
  • Doświadczenie z frameworkami przetwarzania wsadowego/strumieniowego (np. Flink lub Spark).
  • Znajomość formatów schematów i cyklu życia (np. JSON/Avro/XSD) oraz koncepcji wersjonowania/zgodności.
  • Doświadczenie w pracy z workflowami Git i środowiskami Kubernetes.
  • Doświadczenie z CI/CD i pipeline'ami budowlanymi (Bazel + Tekton).

Miłe widziane:

  • Doświadczenie z architekturą odniesienia danych / modelem produktu danych.
  • Znajomość Airflow, Snowflake, Iceberg lub podobnych platform danych.
  • Ekspozycja na koncepcje zarządzania danymi, metadanymi i liniowością.
  • Doświadczenie w bankowości lub innych regulowanych środowiskach.

Oferta:

  • Prywatna opieka medyczna.
  • Współfinansowanie karty sportowej.
  • Stałe wsparcie dedykowanego konsultanta.

Senior Data Engineer in Warsaw – pracodawca: Diverse CG Sp. z o.o. Sp.k.

DCG to doskonały pracodawca, który stawia na rozwój swoich pracowników i elastyczność w pracy. Oferujemy atrakcyjne benefity, takie jak prywatna opieka medyczna oraz dofinansowanie do karty sportowej, a także przyjazną kulturę pracy, która sprzyja współpracy i wsparciu ze strony dedykowanych konsultantów. Pracując z nami w Gdańsku, Gdyni, Warszawie lub Łodzi, masz szansę na rozwój zawodowy w dynamicznym środowisku rekrutacyjnym.

D

Dane kontaktowe:

Zespół rekrutacyjny Diverse CG Sp. z o.o. Sp.k.

Naszym zdaniem te umiejętności pozwolą ci błyszczeć jako Senior Data Engineer in Warsaw

LLM-powered automation
AI-assisted review/approval flows
CI/CD integration
Test generation and automation
Data engineering
Distributed processing
Kafka