Lead Pyspark Developer in Kraków

Lead Pyspark Developer in Kraków

Kraków Pełny etat 72000 - 88000 zł / rok (szac.) Hybrydowo
L

W skrócie

  • Zadania: Twórz i rozwijaj aplikacje Pyspark, prowadź zespół i wprowadzaj innowacje.
  • Firma: Dynamiczna firma technologiczna z misją poprawy platformy nadzoru.
  • Benefity: Atrakcyjne wynagrodzenie, elastyczne godziny pracy i możliwości rozwoju zawodowego.
  • Pozostałe informacje: Świetne możliwości kariery w dynamicznym środowisku.
  • Dlaczego ta praca: Pracuj nad projektami, które mają realny wpływ na rynek finansowy.
  • Kwalifikacje: 10+ lat doświadczenia w Pyspark oraz umiejętności przywódcze.

Przewidywane wynagrodzenie mieści się w przedziale 72000 - 88000 zł za rok.

Opis projektu: Program Udoskonalenia Nadzoru (SEP) to wieloletnia inicjatywa mająca na celu rozwój i poprawę platformy nadzoru w celu identyfikacji potencjalnych nadużyć rynkowych, manipulacji i oszustw. Nasz klient zrealizował swoje zobowiązanie wobec Urzędu ds. Postępowania Finansowego (FCA), spełniając wymagania Rozporządzenia o Nadużyciach Rynkowych (MAR) dla krytycznych źródeł danych we wrześniu 2017 roku. Kolejne projekty zostały uruchomione w celu dalszego ulepszania, rozszerzania i uzupełniania istniejącej zautomatyzowanej platformy nadzoru. Ten projekt skupi się na ulepszeniach alertów, strategicznym pozyskiwaniu danych z jezior zamówień i transakcji FM oraz poprawie interfejsu użytkownika i przepływu pracy w celu spełnienia obowiązków regulacyjnych, takich jak Rozporządzenie o Nadużyciach Rynkowych i Dodd-Frank. Dodatkowo zakres obejmuje ulepszenia związane z danymi z Kontroli i Monitorowania Odpowiedniości, interfejsami i scenariuszami.

Obowiązki:

  • Rozwój aplikacji programowych na podstawie wymagań biznesowych
  • Utrzymanie aplikacji programowych i wprowadzanie ulepszeń zgodnie ze specyfikacjami projektu
  • Udział w analizie wymagań, projektowaniu, rozwoju, testowaniu i wdrażaniu
  • Proponowanie nowych technik i technologii do rozwoju oprogramowania
  • Przeprowadzanie testów jednostkowych i testów akceptacyjnych użytkownika w celu oceny funkcjonalności aplikacji
  • Zapewnienie terminowego wykonania przypisanych zadań rozwojowych
  • Praca zgodnie z standardami kodowania i najlepszymi praktykami
  • Wsparcie dla Młodszych Programistów w razie potrzeby
  • Przeprowadzanie przeglądów kodu i rekomendowanie ulepszeń
  • Przegląd wymagań biznesowych i rekomendowanie zmian w celu opracowania niezawodnych aplikacji
  • Opracowywanie dokumentacji kodu i innych specyfikacji technicznych dla przypisanych projektów
  • Działanie jako główny kontakt w sprawach dotyczących rozwoju
  • Analiza i dokładne rozwiązywanie problemów rozwojowych

Wymagania:

  • 10+ lat doświadczenia w intensywnym rozwoju Pyspark, funkcje okienkowe, optymalizacja wydajności, architektura Spark, solenie, przycinanie kolumn
  • Doświadczenie w prowadzeniu zespołu deweloperskiego
  • Udokumentowane doświadczenie jako programista Core Python
  • Dobre zrozumienie Gen AI
  • Doświadczenie w tworzeniu klas, OOPS, obsługa wyjątków, przetwarzanie równoległe
  • Silna wiedza o połączeniach z bazą danych, ładowaniu danych, transformacji, obliczeniach
  • Rozległe doświadczenie w Pandas/Numpy, krojenie, przetwarzanie danych, agregacje
  • Funkcje Lambda, dekoratory
  • Operacje wektorowe na ramkach danych/seriach Pandas
  • Zastosowanie funkcji apply map, apply, map
  • Obsługa współbieżności i błędów w potoku danych o wielkości wsadu [1-10 GB]
  • Umiejętność zrozumienia wymagań biznesowych i przetłumaczenia ich na wymagania techniczne
  • Umiejętność projektowania architektury potoku danych do równoległego przetwarzania danych
  • Praca z kontrolą wersji Git
  • Architektura zorientowana na usługi, w tym umiejętność rozważania integracji z innymi aplikacjami i usługami
  • Debugowanie aplikacji

Miło widziane:

  • Znajomość technologii backendowych - Django, Python, PostgreSQL
  • Apache Airflow

Lead Pyspark Developer in Kraków – pracodawca: Luxoft

Nasza firma to doskonały pracodawca, który oferuje dynamiczne środowisko pracy w sercu innowacji technologicznych. Wspieramy rozwój zawodowy naszych pracowników poprzez mentoring oraz dostęp do najnowszych technologii, a także promujemy kulturę współpracy i otwartości. Pracując z nami, będziesz miał okazję uczestniczyć w projektach, które mają realny wpływ na branżę, a lokalizacja w centrum miasta zapewnia wygodny dostęp do licznych udogodnień.

L

Dane kontaktowe:

Zespół rekrutacyjny Luxoft

Naszym zdaniem te umiejętności pozwolą ci błyszczeć jako Lead Pyspark Developer in Kraków

Pyspark Development
Window Functions
Performance Optimization
Spark Architecture
Salting
Column Pruning
Core Python Development