W skrócie
- Zadania: Projektuj i rozwijaj skalowalne potoki danych oraz procesy ETL/ELT.
- Firma: ImproveIT Solutions - innowacyjna firma technologiczna z międzynarodowymi projektami.
- Benefity: Praca zdalna, konkurencyjne wynagrodzenie i możliwości rozwoju zawodowego.
- Pozostałe informacje: Dynamiczne środowisko z doskonałymi możliwościami rozwoju kariery.
- Dlaczego ta praca: Pracuj z najnowszymi technologiami i wpływaj na międzynarodowe projekty.
- Kwalifikacje: 5+ lat doświadczenia w inżynierii danych oraz umiejętności w AWS i Spark.
Przewidywane wynagrodzenie mieści się w przedziale 123750 - 151250 zł za rok.
Dołącz do ImproveIT Solutions jako Senior Data Engineer pracujący z AWS, Spark i danymi strumieniowymi w międzynarodowych projektach. Praca zdalna.
Lokalizacja: Zdalnie
Rodzaj zatrudnienia: Pełny etat
Poziom: Senior
Poszukujemy silnych inżynierów z solidnym doświadczeniem w AWS, Spark/PySpark, potokach danych i przetwarzaniu danych rozproszonych, którzy są otwarci na nowe możliwości i przyszłe zaangażowania projektowe.
Obowiązki:
- Projektowanie, rozwijanie i utrzymywanie skalowalnych potoków danych oraz procesów ETL/ELT
- Praca z dużymi zbiorami danych i systemami przetwarzania danych rozproszonych
- Budowanie i optymalizacja przepływów pracy przetwarzania danych przy użyciu Spark / PySpark
- Rozwój i utrzymanie rozwiązań do pobierania danych i strumieniowania przy użyciu Kafka, Kinesis lub podobnych technologii
- Praca z usługami danych AWS i infrastrukturą danych w chmurze
- Analiza i optymalizacja potoków danych pod kątem wydajności, skalowalności i niezawodności
- Przyjmowanie odpowiedzialności za zadania techniczne od analizy wymagań po wdrożenie
- Współpraca z inżynierami, analitykami i innymi interesariuszami w międzynarodowych projektach
- Wkład w decyzje techniczne i poprawę architektury danych
- Praca nad różnymi międzynarodowymi projektami w zależności od doświadczenia i ekspertyzy
Miło widziane:
- AWS Glue
- Amazon EMR
- AWS Batch
- AWS Step Functions
- Apache Flink
- Apache Beam
- Cassandra / ScyllaDB
- Doświadczenie w przetwarzaniu danych w czasie rzeczywistym
- Doświadczenie z platformami danych w chmurze
Czego szukamy:
- 5+ lat doświadczenia komercyjnego w inżynierii danych
- Silne praktyczne doświadczenie z AWS
- Silne doświadczenie z Apache Spark / PySpark
- Doświadczenie w budowaniu i utrzymywaniu potoków danych oraz procesów ETL/ELT
- Praktyczne doświadczenie z AWS S3
- Doświadczenie z Kafka, Kinesis lub podobnymi technologiami strumieniowymi
- Silne umiejętności SQL i doświadczenie z PostgreSQL, MySQL, Redshift lub podobnymi bazami danych
- Doświadczenie z DynamoDB lub innymi bazami danych NoSQL
- Doświadczenie w pracy z aplikacjami konteneryzowanymi, najlepiej AWS ECS / Fargate
- Silne zrozumienie przetwarzania danych rozproszonych i skalowalnych architektur danych
- Dobre umiejętności komunikacyjne w języku angielskim
- Silne umiejętności rozwiązywania problemów i analityczne
- Umiejętność pracy samodzielnej i przejmowania odpowiedzialności za zadania techniczne
- Dobre umiejętności komunikacji i współpracy
Myślisz, że to Ty? Wyślij wszystko, co najlepiej pokazuje Twoją pracę — CV, repozytorium lub akapit o czymś, co zbudowałeś. Pierwsza rozmowa jest z inżynierem, z którym będziesz pracować, a nie z rekruterem.
Senior Data Engineer in Katowice – pracodawca: Improveit Solutions
Dołącz do ImproveIT Solutions jako Senior Data Engineer i rozwijaj swoje umiejętności w pracy z AWS, Spark oraz danymi strumieniowymi w międzynarodowych projektach. Oferujemy elastyczne warunki pracy zdalnej, przyjazną kulturę pracy oraz możliwości rozwoju zawodowego w dynamicznym zespole. Nasze projekty dają szansę na pracę z nowoczesnymi technologiami oraz wpływ na architekturę danych, co czyni nas doskonałym miejscem dla inżynierów poszukujących znaczącej i satysfakcjonującej kariery.