Lead Pyspark Developer in Wrocław

Lead Pyspark Developer in Wrocław

Wrocław Pełny etat 81000 - 99000 zł / rok (szac.) Stacjonarnie
L

W skrócie

  • Zadania: Twórz i rozwijaj aplikacje Pyspark, prowadź zespół i wprowadzaj innowacje.
  • Firma: Dynamiczna firma technologiczna z misją poprawy platformy nadzoru.
  • Benefity: Atrakcyjne wynagrodzenie, elastyczne godziny pracy i możliwości rozwoju zawodowego.
  • Pozostałe informacje: Świetne możliwości kariery w dynamicznym środowisku.
  • Dlaczego ta praca: Pracuj nad projektami, które mają realny wpływ na rynek finansowy.
  • Kwalifikacje: 10+ lat doświadczenia w Pyspark oraz umiejętności przywódcze.

Przewidywane wynagrodzenie mieści się w przedziale 81000 - 99000 zł za rok.

Opis projektu: Program Udoskonalenia Nadzoru (SEP) to wieloletnia inicjatywa mająca na celu rozwój i poprawę platformy nadzoru w celu identyfikacji potencjalnych nadużyć rynkowych, manipulacji i nadużyć. Nasz klient zrealizował swoje zobowiązanie wobec Urzędu ds. Zachowań Finansowych (FCA), spełniając wymagania Rozporządzenia o Nadużyciach Rynkowych (MAR) dla krytycznych źródeł danych we wrześniu 2017 roku. Kolejne projekty zostały uruchomione w celu dalszego ulepszania, rozszerzania i uzupełniania istniejącej zautomatyzowanej platformy nadzoru. Ten projekt skupi się na ulepszeniach alertów, strategicznym pozyskiwaniu danych z jezior zamówień i transakcji FM oraz poprawie interfejsu użytkownika i przepływu pracy w celu spełnienia obowiązków regulacyjnych, takich jak Rozporządzenie o Nadużyciach Rynkowych i Dodd-Frank. Dodatkowo zakres obejmuje ulepszenia związane z danymi z Kontroli i Monitorowania Odpowiedniości, interfejsami i scenariuszami.

Obowiązki:

  • Rozwój aplikacji programowych na podstawie wymagań biznesowych
  • Utrzymanie aplikacji programowych i wprowadzanie ulepszeń zgodnie ze specyfikacjami projektu
  • Udział w analizie wymagań, projektowaniu, rozwoju, testowaniu i wdrażaniu
  • Proponowanie nowych technik i technologii do rozwoju oprogramowania
  • Przeprowadzanie testów jednostkowych i testów akceptacyjnych użytkownika w celu oceny funkcjonalności aplikacji
  • Zapewnienie terminowego wykonania przypisanych zadań rozwojowych
  • Praca zgodnie z standardami kodowania i najlepszymi praktykami
  • Wsparcie dla Młodszych Programistów w razie potrzeby
  • Przeprowadzanie przeglądów kodu i rekomendowanie ulepszeń
  • Przegląd wymagań biznesowych i rekomendowanie zmian w celu opracowania niezawodnych aplikacji
  • Opracowywanie dokumentacji kodu i innych specyfikacji technicznych dla przypisanych projektów
  • Działanie jako główny kontakt w sprawach dotyczących rozwoju
  • Analiza i rozwiązywanie problemów rozwojowych dokładnie

Wymagania:

  • 10+ lat doświadczenia w intensywnym rozwoju Pyspark, funkcje okienkowe, optymalizacja wydajności, architektura Spark, solenie, przycinanie kolumn
  • Doświadczenie w prowadzeniu zespołu deweloperskiego
  • Udokumentowane doświadczenie jako programista Core Python
  • Dobre zrozumienie Gen AI
  • Doświadczenie w tworzeniu klas, OOPS, obsługa wyjątków, przetwarzanie równoległe
  • Silna wiedza o połączeniach z bazą danych, ładowaniu danych, transformacji, obliczeniach
  • Rozległe doświadczenie w Pandas/Numpy, krojenie, przetwarzanie danych, agregacje
  • Funkcje Lambda, dekoratory
  • Operacje wektorowe na ramkach danych/seriach Pandas
  • Zastosowanie funkcji apply map, apply, map
  • Obsługa współbieżności i błędów w potoku danych o wielkości wsadu [1-10 GB]
  • Umiejętność zrozumienia wymagań biznesowych i przetłumaczenia ich na wymagania techniczne
  • Umiejętność projektowania architektury potoku danych do równoległego przetwarzania danych
  • Praca z kontrolą źródła Git
  • Architektura zorientowana na usługi, w tym umiejętność rozważania integracji z innymi aplikacjami i usługami
  • Debugowanie aplikacji

Miło widziane:

  • Znajomość technologii backendowych - Django, Python, PostgreSQL
  • Apache Airflow

Lead Pyspark Developer in Wrocław – pracodawca: Luxoft

Nasza firma to doskonały pracodawca, który oferuje dynamiczne środowisko pracy w sercu innowacji technologicznych. Wspieramy rozwój zawodowy naszych pracowników poprzez mentoring oraz dostęp do najnowszych technologii, a także promujemy kulturę współpracy i otwartości. Pracując z nami, będziesz miał okazję uczestniczyć w projektach, które mają realny wpływ na branżę, a lokalizacja w centrum miasta zapewnia wygodny dostęp do licznych udogodnień.

L

Dane kontaktowe:

Zespół rekrutacyjny Luxoft

Naszym zdaniem te umiejętności pozwolą ci błyszczeć jako Lead Pyspark Developer in Wrocław

Pyspark Development
Window Functions
Performance Optimization
Spark Architecture
Salting
Column Pruning
Core Python Development