Distillery is seeking a hands-on Senior Data Engineer to join the data engineering team for a US‑based client. You will migrate Spark batch and MapReduce pipelines from Cloudera to AWS EMR, upgrade CDP versions, and move orchestration from Airflow 2 to Airflow 3, validating results along the way. You’ll work with a small, experienced team and AI-assisted development tools, ensuring each pipeline is migrated, tested, and running reliably in production with overlap to US Pacific Time.
Senior Data Engineer: Cloud Migrations & Spark Expert in Katowice – pracodawca: Distillery: A Software Development Company
Distillery to doskonały pracodawca, oferujący elastyczne warunki pracy w 100% zdalnym środowisku, co pozwala na zachowanie równowagi między życiem zawodowym a prywatnym. Nasza kultura pracy opiera się na współpracy i innowacyjności, a pracownicy mają możliwość ciągłego rozwoju poprzez udział w projektach związanych z nowoczesnymi technologiami, takimi jak AWS i EKS. Dodatkowo, oferujemy atrakcyjne benefity oraz wsparcie w budowaniu kariery w dynamicznie rozwijającym się zespole.
Dane kontaktowe:
Zespół rekrutacyjny Distillery: A Software Development Company
