W skrócie
- Zadania: Twórz i rozwijaj aplikacje Pyspark, prowadź zespół i wprowadzaj innowacje.
- Firma: Dynamiczna firma technologiczna z misją poprawy platformy nadzoru.
- Benefity: Atrakcyjne wynagrodzenie, elastyczne godziny pracy i możliwości rozwoju zawodowego.
- Pozostałe informacje: Świetne możliwości kariery w dynamicznym środowisku.
- Dlaczego ta praca: Pracuj nad projektami, które mają realny wpływ na rynek finansowy.
- Kwalifikacje: 10+ lat doświadczenia w Pyspark oraz umiejętności przywódcze.
Przewidywane wynagrodzenie mieści się w przedziale 72000 - 88000 zł za rok.
Opis projektu: Program Udoskonalenia Nadzoru (SEP) to wieloletnia inicjatywa mająca na celu rozwój i poprawę platformy nadzoru w celu identyfikacji potencjalnych nadużyć rynkowych, manipulacji i nadużyć. Nasz klient zrealizował swoje zobowiązanie wobec Urzędu ds. Zachowań Finansowych (FCA), spełniając wymagania Rozporządzenia o Nadużyciach Rynkowych (MAR) dla krytycznych źródeł danych we wrześniu 2017 roku. Kolejne projekty zostały uruchomione w celu dalszego ulepszania, rozszerzania i uzupełniania istniejącej zautomatyzowanej platformy nadzoru. Ten projekt skupi się na ulepszeniach alertów, strategicznym pozyskiwaniu danych z jezior zamówień i transakcji FM oraz poprawie interfejsu użytkownika i przepływu pracy w celu spełnienia obowiązków regulacyjnych, takich jak Rozporządzenie o Nadużyciach Rynkowych i Dodd-Frank. Dodatkowo zakres obejmuje ulepszenia związane z danymi z Kontroli i Monitorowania Odpowiedniości, interfejsami i scenariuszami.
Obowiązki:
- Rozwój aplikacji programowych na podstawie wymagań biznesowych
- Utrzymanie aplikacji programowych i wprowadzanie ulepszeń zgodnie ze specyfikacjami projektu
- Udział w analizie wymagań, projektowaniu, rozwoju, testowaniu i wdrażaniu
- Proponowanie nowych technik i technologii do rozwoju oprogramowania
- Przeprowadzanie testów jednostkowych i testów akceptacyjnych użytkownika w celu oceny funkcjonalności aplikacji
- Zapewnienie terminowego wykonania przypisanych zadań rozwojowych
- Praca zgodnie z standardami kodowania i najlepszymi praktykami
- Wsparcie dla Młodszych Programistów w razie potrzeby
- Przeprowadzanie przeglądów kodu i rekomendowanie ulepszeń
- Przegląd wymagań biznesowych i rekomendowanie zmian w celu opracowania niezawodnych aplikacji
- Opracowywanie dokumentacji kodu i innych specyfikacji technicznych dla przypisanych projektów
- Działanie jako główny kontakt w sprawach dotyczących rozwoju
- Analiza i rozwiązywanie problemów rozwojowych w sposób dokładny
Wymagania:
- 10+ lat doświadczenia w intensywnym rozwoju Pyspark, funkcje okienkowe, optymalizacja wydajności, architektura Spark, solenie, przycinanie kolumn
- Doświadczenie w prowadzeniu zespołu deweloperskiego
- Udokumentowane doświadczenie jako programista Core Python
- Dobre zrozumienie Gen AI
- Doświadczenie w tworzeniu klas, OOPS, obsługa wyjątków, przetwarzanie równoległe
- Silna wiedza o połączeniach z bazą danych, ładowaniu danych, transformacji, obliczeniach
- Rozległe doświadczenie w Pandas/Numpy, krojenie, przetwarzanie danych, agregacje
- Funkcje Lambda, dekoratory
- Operacje wektorowe na ramkach danych/seriach Pandas
- Zastosowanie funkcji apply map, apply, map
- Obsługa współbieżności i błędów w potoku danych o wielkości wsadu [1-10 GB]
- Umiejętność zrozumienia wymagań biznesowych i przetłumaczenia ich na wymagania techniczne
- Umiejętność projektowania architektury potoku danych do równoległego przetwarzania danych
- Praca z kontrolą wersji Git
- Architektura zorientowana na usługi, w tym umiejętność rozważania integracji z innymi aplikacjami i usługami
- Debugowanie aplikacji
Miło widziane:
- Znajomość technologii backendowych - Django, Python, PostgreSQL
- Apache Airflow
Lead Pyspark Developer in Warsaw – pracodawca: Luxoft
Nasza firma to doskonały pracodawca, który oferuje dynamiczne środowisko pracy w sercu innowacji technologicznych. Wspieramy rozwój zawodowy naszych pracowników poprzez mentoring oraz dostęp do najnowszych technologii, a także promujemy kulturę współpracy i otwartości. Pracując z nami, będziesz miał okazję uczestniczyć w projektach, które mają realny wpływ na branżę, a lokalizacja w centrum miasta zapewnia wygodny dostęp do licznych udogodnień.
