W skrócie
- Zadania: Projektuj i buduj pipeline'y danych, integrując różne źródła.
- Firma: Dynamiczna firma technologiczna z innowacyjnym podejściem.
- Benefity: Atrakcyjne wynagrodzenie, elastyczne godziny pracy i możliwości rozwoju.
- Pozostałe informacje: Świetna atmosfera pracy i możliwość nauki od ekspertów.
- Dlaczego ta praca: Pracuj z danymi w chmurze i wpływaj na rozwój AI/ML.
- Kwalifikacje: Minimum 4 lata doświadczenia w roli Data Engineera oraz znajomość Pythona i SQL.
Przewidywane wynagrodzenie mieści się w przedziale 72000 - 88000 zł za rok.
WYMAGANIA:
- Minimum 4 lata doświadczenia na stanowisku Data Engineera lub w pokrewnej roli
- Bardzo dobra znajomość Python oraz SQL
- Doświadczenie w budowie i utrzymaniu pipeline’ów danych (ETL/ELT)
- Praktyczna znajomość pracy z danymi ustrukturyzowanymi i nieustrukturyzowanymi (transformacje, normalizacja, przygotowanie)
- Umiejętność modelowania danych oraz pracy z różnymi schematami baz danych
- Doświadczenie z relacyjnymi bazami danych (np. PostgreSQL, MySQL, MS SQL, Oracle)
- Znajomość wektorowych baz danych i ich zastosowań w kontekście AI
- Doświadczenie w integracji z API
- Znajomość rozwiązań chmurowych (AWS, GCP lub Azure)
- Doświadczenie w przetwarzaniu dużych wolumenów danych z wykorzystaniem technologii Big Data
- Mile widziane: Doświadczenie w projektach wykorzystujących LLM (np. RAG)
- Znajomość narzędzi do orkiestracji danych (np. Airflow)
- Współpraca z zespołami ML / AI
- Doświadczenie w migracjach i znajomość architektury rozwiązań CRM (Pega, Salesforce, SAS, Adobe)
ZADANIA:
- Projektowanie, budowa i utrzymanie pipeline’ów danych (ETL/ELT)
- Integracja danych z różnych źródeł oraz zapewnienie ich jakości i spójności
- Modelowanie danych i projektowanie struktur bazodanowych
- Zarządzanie oraz optymalizacja baz danych (relacyjnych i wektorowych)
- Przygotowywanie danych na potrzeby systemów AI/ML (w tym LLM)
- Współpraca z zespołami AI/ML w zakresie dostarczania i przetwarzania danych
- Implementacja rozwiązań w chmurze (AWS, GCP, Azure) związanych z przetwarzaniem danych
- Monitorowanie i optymalizacja wydajności pipeline’ów oraz procesów danych
- Wdrażanie dobrych praktyk w zakresie zarządzania danymi i ich bezpieczeństwa
Data Engineer (K/M) in Warsaw – pracodawca: Soflab Technology Sp. z o.o.
Nasza firma to doskonały pracodawca, który stawia na rozwój swoich pracowników oraz innowacyjne podejście do technologii. Oferujemy elastyczne godziny pracy, możliwość pracy zdalnej oraz dostęp do szkoleń, które wspierają rozwój kariery w obszarze inżynierii danych. Pracując w naszym zespole, będziesz miał okazję współpracować z ekspertami w dziedzinie AI i Big Data w dynamicznym i przyjaznym środowisku.
Dane kontaktowe:
Zespół rekrutacyjny Soflab Technology Sp. z o.o.
Naszym zdaniem te umiejętności pozwolą ci błyszczeć jako Data Engineer (K/M) in Warsaw
Python
SQL
ETL/ELT
Praca z danymi ustrukturyzowanymi i nieustrukturyzowanymi
Modelowanie danych
Relacyjne bazy danych (PostgreSQL, MySQL, MS SQL, Oracle)
Wektorowe bazy danych
