Data Engineer in Katowice

About Us

People Data Labs (PDL) jest dostawcą danych o ludziach i firmach. Zajmujemy się zbieraniem i standaryzacją danych, aby nasi klienci mogli skupić się na budowaniu i skalowaniu innowacyjnych, zgodnych rozwiązań danych. Naszym celem jest stworzenie najlepszych dostępnych danych poprzez integrację tysięcy zgodnie pozyskanych zestawów danych w jedno, przyjazne dla deweloperów źródło prawdy.

Wiodące firmy na całym świecie korzystają z danych PDL, aby wzbogacać platformy rekrutacyjne, zasilać modele AI, tworzyć niestandardowe grupy odbiorców i nie tylko.

Poszukujemy osób, które potrafią łączyć ekstremalną odpowiedzialność z mentalnością „jeden zespół, jeden cel”. Nasi klienci starają się rozwiązać złożone problemy, a my pomagamy im osiągnąć cele jako zespół. Nasz zespół inżynierii danych jest tajnym składnikiem tego, co robimy, i szukamy najlepszych z najlepszych.

Jeśli chcesz być częścią zespołu odkrywającego nową granicę danych jako usługi (DaaS) z wysokim poziomem autonomii i możliwościami bezpośrednich wkładów, to może być rola dla Ciebie. Lubimy, gdy nasi inżynierowie są przemyślani, ekscentryczni i gotowi do odważnego wypróbowania nowych rzeczy. W PDL akceptujemy porażki, o ile nadal uczymy się i rozwijamy z nich.

Co będziesz robić:

• Budować infrastrukturę do pobierania, transformacji i ładowania rosnącej objętości danych z różnych źródeł przy użyciu Spark, SQL, AWS i Databricks.
• Budować organiczny framework rozwiązywania problemów związanych z podmiotami, zdolny do poprawnego łączenia setek miliardów indywidualnych podmiotów w liczne czyste, nadające się do użytku zestawy danych.
• Rozwijać pipeline CI/CD i systemy wykrywania anomalii, które będą ciągle poprawiać jakość danych, które wprowadzamy do produkcji.
• Wymyślać rozwiązania dla w dużej mierze nieokreślonych problemów inżynierii danych i nauki o danych.

Wymagania techniczne:

• 3-5+ lat doświadczenia w branży z wyraźnymi przykładami strategicznego rozwiązywania problemów technicznych i wdrażania.
• Silne podstawy w zakresie rozwoju oprogramowania.
• Doświadczenie z Pythonem.
• Znajomość Apache Spark (Java, Scala i/lub Python).
• Doświadczenie z SQL.
• Doświadczenie w budowaniu skalowalnych systemów przetwarzania danych (np. czyszczenie, transformacja) od podstaw.
• Doświadczenie w korzystaniu z narzędzi do orkiestracji pipeline'ów danych i workflow (np. Airflow (preferowane), dbt, dagster lub podobne).
• Znajomość nowoczesnych wzorców projektowania i przechowywania danych (np. inkrementalne aktualizacje, partycjonowanie i segmentacja, odbudowy i backfille).
• Doświadczenie w pracy z Databricks (w tym delta live tables, wzorce data lakehouse itp.).
• Doświadczenie z usługami chmurowymi (AWS (preferowane), GCP, Azure lub podobne).
• Doświadczenie z hurtowniami danych (np. Databricks, Snowflake, Redshift, BigQuery lub podobne).
• Zrozumienie nowoczesnych formatów i narzędzi przechowywania danych (np. parquet, ORC, Avro, Delta Lake).

Osoby, które odnajdują się w naszej kulturze:

• Potrafią łączyć wysoką odpowiedzialność i autonomię z silną zdolnością do współpracy.
• Skutecznie pracują zdalnie (potrafią proaktywnie zarządzać przeszkodami, aktywnie kontaktować się i zadawać pytania oraz uczestniczyć w działaniach zespołowych).
• Demonstrują silne umiejętności komunikacji pisemnej na Slacku/Czacie i w dokumentach.
• Maję doświadczenie w pisaniu dokumentów projektowych dotyczących danych (projekt pipeline'u, przepływ danych, projekt schematu).
• Potrafią określać zakres i dzielić projekty, skutecznie komunikować i współpracować w zakresie postępów i przeszkód z menedżerem, zespołem i interesariuszami.

Niektóre dodatkowe atuty:

• Dyplom w dziedzinie ilościowej, takiej jak informatyka, matematyka, statystyka lub inżynieria.
• Doświadczenie w pracy z danymi podmiotowymi (rozwiązywanie problemów z podmiotami / łączenie rekordów).
• Doświadczenie w pozyskiwaniu danych / integracji danych.
• Ekspertyza w Pythonie i stosie danych Pythona (np. numpy, pandas).
• Doświadczenie z platformami strumieniowymi (np. Kafka).
• Doświadczenie w ocenie jakości danych i utrzymywaniu wysokich standardów jakości danych w nowych wydaniach funkcji (np. spójność, dokładność, ważność, kompletność).

Nasze korzyści:

• Akcje.
• Konkurencyjne wynagrodzenia.
• Nielimitowany urlop płatny.
• Ubezpieczenie zdrowotne, dentystyczne i wzrokowe.
• Stypendia na zdrowie, fitness i biuro.
• Trwała możliwość pracy gdziekolwiek i w jakikolwiek sposób chcesz.
• Wynagrodzenie: $180,000-220,000.

People Data Labs nie dyskryminuje na podstawie rasy, płci, koloru skóry, religii, wieku, pochodzenia narodowego, stanu cywilnego, niepełnosprawności, statusu weterana, informacji genetycznych, orientacji seksualnej, tożsamości płciowej ani żadnego innego powodu zabronionego przez prawo w zakresie możliwości zatrudnienia i świadczeń.

Kwalifikowani kandydaci z zapisami aresztów lub skazania będą brani pod uwagę do zatrudnienia zgodnie z Los Angeles County Fair Chance Ordinance for Employers oraz California Fair Chance Act.