Distillery is seeking a hands-on Senior Data Engineer to join the data engineering team for a US‑based client. You will migrate Spark batch and MapReduce pipelines from Cloudera to AWS EMR, upgrade CDP versions, and move orchestration from Airflow 2 to Airflow 3, validating results along the way. You’ll work with a small, experienced team and AI-assisted development tools, ensuring each pipeline is migrated, tested, and running reliably in production with overlap to US Pacific Time.
Senior Data Engineer: Cloud Migrations & Spark Expert in Katowice – pracodawca: Distillery
Distillery to doskonały pracodawca, który oferuje elastyczne godziny pracy oraz możliwość pracy zdalnej, co pozwala na dostosowanie harmonogramu do indywidualnych potrzeb. Nasza kultura opiera się na różnorodności i inkluzji, a także na ciągłym rozwoju zawodowym, co sprawia, że każdy pracownik ma szansę na rozwój swoich umiejętności w dynamicznym i innowacyjnym środowisku. Dodatkowo, oferujemy konkurencyjne wynagrodzenie oraz kompleksowy pakiet benefitów, co czyni nas atrakcyjnym miejscem pracy dla utalentowanych specjalistów.
