W skrócie
- Zadania: Projektuj i buduj pipeline'y danych, integrując różne źródła.
- Firma: Dynamiczna firma technologiczna z innowacyjnym podejściem.
- Benefity: Atrakcyjne wynagrodzenie, elastyczne godziny pracy i możliwości rozwoju.
- Pozostałe informacje: Świetna atmosfera pracy i możliwości szybkiego rozwoju kariery.
- Dlaczego ta praca: Pracuj z danymi i technologiami AI, mając realny wpływ na projekty.
- Kwalifikacje: Minimum 4 lata doświadczenia w roli Data Engineera oraz znajomość Pythona i SQL.
Przewidywane wynagrodzenie mieści się w przedziale 56250 - 68750 zł za rok.
Wymagania
- Minimum 4 lata doświadczenia na stanowisku Data Engineera lub w pokrewnej roli
- Bardzo dobra znajomość Python oraz SQL
- Doświadczenie w budowie i utrzymaniu pipeline’ów danych (ETL/ELT)
- Praktyczna znajomość pracy z danymi ustrukturyzowanymi i nieustrukturyzowanymi (transformacje, normalizacja, przygotowanie)
- Umiejętność modelowania danych oraz pracy z różnymi schematami baz danych
- Doświadczenie z relacyjnymi bazami danych (np. PostgreSQL, MySQL, MS SQL, Oracle)
- Znajomość wektorowych baz danych i ich zastosowań w kontekście AI
- Doświadczenie w integracji z API
- Znajomość rozwiązań chmurowych (AWS, GCP lub Azure)
- Doświadczenie w przetwarzaniu dużych wolumenów danych z wykorzystaniem technologii Big Data
- Mile widziane: Doświadczenie w projektach wykorzystujących LLM (np. RAG)
- Znajomość narzędzi do orkiestracji danych (np. Airflow)
- Współpraca z zespołami ML / AI
- Doświadczenie w migracjach i znajomość architektury rozwiązań CRM (Pega, Salesforce, SAS, Adobe)
Zadania
- Projektowanie, budowa i utrzymanie pipeline’ów danych (ETL/ELT)
- Integracja danych z różnych źródeł oraz zapewnienie ich jakości i spójności
- Modelowanie danych i projektowanie struktur bazodanowych
- Zarządzanie oraz optymalizacja baz danych (relacyjnych i wektorowych)
- Przygotowywanie danych na potrzeby systemów AI/ML (w tym LLM)
- Współpraca z zespołami AI/ML w zakresie dostarczania i przetwarzania danych
- Implementacja rozwiązań w chmurze (AWS, GCP, Azure) związanych z przetwarzaniem danych
- Monitorowanie i optymalizacja wydajności pipeline’ów oraz procesów danych
- Wdrażanie dobrych praktyk w zakresie zarządzania danymi i ich bezpieczeństwa
Data Engineer (K/M) in Warsaw – pracodawca: Soflab
Soflab to doskonały pracodawca, który oferuje dynamiczne środowisko pracy w Warszawie, sprzyjające innowacjom i rozwojowi zawodowemu. Nasza kultura pracy opiera się na współpracy i kreatywności, a pracownicy mają możliwość uczestniczenia w interesujących projektach związanych z AI i ML, co pozwala na ciągłe doskonalenie umiejętności. Oferujemy elastyczne godziny pracy oraz konkurencyjne wynagrodzenie, co czyni nas idealnym miejscem dla osób poszukujących satysfakcjonującej kariery w branży technologicznej.
Naszym zdaniem te umiejętności pozwolą ci błyszczeć jako Data Engineer (K/M) in Warsaw
Python
SQL
ETL/ELT
Praca z danymi ustrukturyzowanymi i nieustrukturyzowanymi
Modelowanie danych
Relacyjne bazy danych (PostgreSQL, MySQL, MS SQL, Oracle)
Wektorowe bazy danych
