Lead Pyspark Developer in Kraków

Lead Pyspark Developer in Kraków

Kraków Pełny etat 81000 - 99000 zł / rok (szac.) Hybrydowo
L

W skrócie

  • Zadania: Twórz i rozwijaj aplikacje Pyspark, prowadź zespół i wprowadzaj innowacje.
  • Firma: Dynamiczna firma zajmująca się technologią z możliwością rozwoju kariery.
  • Benefity: Prywatna opieka medyczna, ubezpieczenie na życie oraz program mobilności wewnętrznej.
  • Pozostałe informacje: Elastyczna praca w Krakowie, Gdańsku, Warszawie lub Wrocławiu.
  • Dlaczego ta praca: Pracuj nad projektami, które mają realny wpływ na rynek i regulacje.
  • Kwalifikacje: 10+ lat doświadczenia w Pyspark, umiejętności przywódcze i znajomość Python.

Przewidywane wynagrodzenie mieści się w przedziale 81000 - 99000 zł za rok.

Private Medical & Dental care & Life Insurance

Internal Mobility program - możliwość rotacji między projektami, lokalizacjami, kontami

Opis projektu

Program Udoskonalenia Nadzoru (SEP) to wieloletnia inicjatywa mająca na celu rozwój i poprawę platformy nadzoru w celu identyfikacji potencjalnych nadużyć rynkowych, manipulacji i oszustw. Nasz klient zrealizował swoje zobowiązanie wobec Urzędu ds. Zachowań Finansowych (FCA), spełniając wymagania Rozporządzenia o Nadużyciach Rynkowych (MAR) dla krytycznych źródeł danych we wrześniu 2017 roku. Kolejne projekty zostały uruchomione w celu dalszego ulepszania, rozszerzania i uzupełniania istniejącej zautomatyzowanej platformy nadzoru. Ten projekt skupi się na ulepszeniach alertów, strategicznym pozyskiwaniu danych z jezior zamówień i transakcji FM oraz poprawie interfejsu użytkownika i przepływu pracy w celu spełnienia obowiązków regulacyjnych, takich jak Rozporządzenie o Nadużyciach Rynkowych i Dodd-Frank. Dodatkowo zakres obejmuje ulepszenia związane z danymi z Kontroli i Monitorowania Odpowiedniości, interfejsami i scenariuszami.

Obowiązki

  • Rozwój aplikacji programowych na podstawie wymagań biznesowych
  • Utrzymanie aplikacji programowych i wprowadzanie ulepszeń zgodnie ze specyfikacjami projektu
  • Udział w analizie wymagań, projektowaniu, rozwoju, testowaniu i wdrażaniu
  • Proponowanie nowych technik i technologii do rozwoju oprogramowania
  • Przeprowadzanie testów jednostkowych i testów akceptacyjnych użytkownika w celu oceny funkcjonalności aplikacji
  • Zapewnienie terminowego wykonania przypisanych zadań rozwojowych
  • Praca zgodnie z standardami kodowania i najlepszymi praktykami
  • Udzielanie wsparcia Młodszym Programistom w razie potrzeby
  • Przeprowadzanie przeglądów kodu i rekomendowanie ulepszeń
  • Przegląd wymagań biznesowych i rekomendowanie zmian w celu opracowania niezawodnych aplikacji
  • Opracowywanie dokumentacji kodu i innych specyfikacji technicznych dla przypisanych projektów
  • Działanie jako główny kontakt w sprawach dotyczących rozwoju
  • Analiza i dokładne rozwiązywanie problemów rozwojowych

Wymagane umiejętności

  • 10+ lat doświadczenia w intensywnym rozwoju Pyspark, Funkcje okien, Optymalizacja wydajności, Architektura Spark, Salting, Pruning kolumn
  • Doświadczenie w prowadzeniu zespołu deweloperskiego
  • Udokumentowane doświadczenie jako programista Core Python
  • Dobre zrozumienie Gen AI
  • Silna wiedza o łączności z bazą danych, ładowaniu danych, transformacji, obliczeniach
  • Rozległe doświadczenie w Pandas/Numpy, krojeniu, przetwarzaniu danych, agregacjach
  • Operacje wektorowe na dataframach/seriach Pandas
  • Zastosowanie funkcji apply map, apply, map
  • Obsługa współbieżności i błędów w potokach danych o wielkości wsadu [1-10 GB]
  • Umiejętność zrozumienia wymagań biznesowych i przetłumaczenia ich na wymagania techniczne
  • Umiejętność projektowania architektury potoku danych do równoległego przetwarzania danych
  • Praca z kontrolą źródła Git
  • Architektura zorientowana na usługi, w tym zdolność do rozważania integracji z innymi aplikacjami i usługami

Co jest mile widziane

  • Znajomość technologii backendowych - Django, Python, PostgreSQL

Senior hybrid w Krakowie, Gdańsku, Warszawie lub Wrocławiu

Lead Pyspark Developer in Kraków – pracodawca: Luxoft Poland

Nasza firma to doskonały pracodawca, który oferuje stabilne zatrudnienie oraz bogaty pakiet benefitów, w tym prywatną opiekę medyczną i programy rozwoju zawodowego. Pracując jako DevOps/Cloud Engineer w dynamicznym środowisku, będziesz miał możliwość pracy z nowoczesnymi technologiami, takimi jak Azure i Kubernetes, a także korzystania z programów wewnętrznych, które wspierają rozwój kariery i mobilność między projektami. Nasza kultura pracy sprzyja innowacyjności i współpracy, co czyni nas idealnym miejscem dla osób poszukujących satysfakcjonującej i znaczącej kariery.

L

Dane kontaktowe:

Zespół rekrutacyjny Luxoft Poland

Naszym zdaniem te umiejętności pozwolą ci błyszczeć jako Lead Pyspark Developer in Kraków

Pyspark Development
Window Functions
Performance Optimization
Spark Architecture
Salting
Column Pruning
Core Python Development