W skrócie
- Zadania: Pracuj nad platformą ML-ready, optymalizując przepływy danych i poprawiając jakość danych.
- Firma: Globalny lider w inżynierii transformacji AI z ponad 30-letnim doświadczeniem.
- Benefity: Stabilne wynagrodzenie, pakiet benefitów, możliwość pracy zdalnej i programy rozwoju kariery.
- Pozostałe informacje: Dynamiczne środowisko z możliwościami rozwoju kariery i wsparciem dla pracowników.
- Dlaczego ta praca: Dołącz do zespołu innowatorów i wpływaj na rozwój technologii AI w realnym świecie.
- Kwalifikacje: Doświadczenie w Pythonie, Spark oraz Azure Databricks, umiejętności współpracy w zespole.
Przewidywane wynagrodzenie mieści się w przedziale 123750 - 151250 zł za rok.
Poszukujemy Senior/Lead Data Software Engineer, który dołączy do naszego zespołu pracującego nad skalowalną platformą gotową do ML, która wspiera rozwój i wdrażanie modeli portfelowych z zaawansowanymi możliwościami zarządzania danymi i AI. Będziesz odgrywać kluczową rolę w migracji z platformy Big Data IaaS do natywnego Azure Databricks, optymalizując przepływy danych i poprawiając jakość danych. Dołącz do nas, aby przyczynić się do innowacyjnych rozwiązań, które zwiększają usługi dla klientów i zgodność z regulacjami.
Obowiązki:
- Migracja i optymalizacja ponad 500 zadań danych przy użyciu technik optymalizacji Azure Databricks
- Zarządzanie i przetwarzanie 12 TB danych efektywnie na różnych platformach
- Dostosowywanie modeli uczenia maszynowego do środowisk Azure przy użyciu Java Spark i tabel Delta
- Aktualizacja i utrzymanie bibliotek w celu rozwiązania problemów z bezpieczeństwem
- Rozwój i utrzymanie procesów ETL/ELT przy użyciu PySpark i pokrewnych technologii
- Współpraca z zespołami międzyfunkcyjnymi w celu integracji możliwości GenAI w przepływach danych
- Monitorowanie jakości danych i wdrażanie ulepszeń w celu zapewnienia dokładności i niezawodności
- Automatyzacja zadań wdrożeniowych i operacyjnych przy użyciu Terraform i GitLab CI/CD
- Wsparcie inicjatyw związanych z zarządzaniem danymi w celu przestrzegania standardów regulacyjnych
- Rozwiązywanie problemów i usuwanie usterek w systemach przetwarzania danych
- Dokumentowanie procesów systemowych i udzielanie wsparcia technicznego młodszym inżynierom
- Wdrażanie najlepszych praktyk dotyczących jakości kodu i bezpieczeństwa danych
- Udział w przeglądach kodu i sesjach dzielenia się wiedzą
- Optymalizacja kosztów związanych z przechowywaniem i przetwarzaniem danych
Wymagania:
- Biegłość w Pythonie i Sparku z co najmniej 3-letnim doświadczeniem w rolach inżynierii danych
- Silne doświadczenie z Azure Databricks i PySpark
- Udokumentowane umiejętności w projektowaniu i wdrażaniu rozwiązań ETL/ELT
- Doświadczenie w migracji platform big data do usług natywnych Azure
- Biegłość w tabelach Delta do dostosowywania modeli
- Znajomość ram zarządzania danymi i zgodności regulacyjnej
- Znajomość Docker, Kubernetes (AKS) i Terraform do automatyzacji infrastruktury
- Umiejętność zarządzania dużymi wolumenami danych z wysoką efektywnością
- Doskonale rozwinięte umiejętności analityczne i rozwiązywania problemów
- Silne umiejętności komunikacyjne i współpracy
- Biegłość w języku angielskim na poziomie B2 lub wyższym
Oferujemy:
- Wsparcie zespołu i kultura pracy przypominająca startup
- Możliwość pracy zdalnej w Polsce
- Możliwość pracy za granicą przez maksymalnie 60 dni rocznie
- Programy rozwoju kariery
- Stabilne wynagrodzenie
- Pakiet benefitów (ubezpieczenie zdrowotne, multisport, bony zakupowe)
- Bonusy za polecenia do 2000 USD
Prosimy zauważyć: Wymienione powyżej benefity są dostępne tylko dla pracowników. Jesteśmy otwarci na współpracę z kontrahentami. Warunki umów współpracy B2B są ustalane indywidualnie.
Senior/Lead Data Software Engineer in Wrocław – pracodawca: EPAM Systems
EPAM Systems Poland to doskonały pracodawca, który oferuje dynamiczne środowisko pracy w obszarze nowoczesnych technologii AI i automatyzacji. Nasza kultura pracy opiera się na innowacyjności i współpracy, co sprzyja rozwojowi zawodowemu pracowników poprzez różnorodne projekty oraz możliwość pracy z klientami na najwyższym szczeblu. Dodatkowo, lokalizacja w Polsce zapewnia dostęp do talentów oraz inspirującego otoczenia, które wspiera kreatywność i efektywność zespołu.
