W skrócie
- Zadania: Projektuj i wdrażaj nowoczesną platformę lakehouse w chmurze.
- Firma: Innowacyjna firma technologiczna z dynamiczną kulturą pracy.
- Benefity: Atrakcyjne wynagrodzenie, benefity zdrowotne, praca zdalna i rozwój zawodowy.
- Pozostałe informacje: Świetne możliwości rozwoju kariery w dynamicznym środowisku.
- Dlaczego ta praca: Pracuj z najnowszymi technologiami i wpływaj na innowacyjne projekty.
- Kwalifikacje: 8+ lat doświadczenia w inżynierii danych i umiejętności współpracy w zespole.
Przewidywane wynagrodzenie mieści się w przedziale 123750 - 151250 zł za rok.
Poszukujemy doświadczonego inżyniera platformy danych, który zaprojektuje i wdroży opartą na chmurze platformę lakehouse, która przetwarza dane z narzędzi inżynieryjnych i zabezpieczeń, transformuje je przez wiele warstw i udostępnia zarówno w pulpitach analitycznych, jak i agentach AI.
Doświadczenie:
- 8+ lat w rolach inżynierii danych, z co najmniej 2-letnim doświadczeniem w budowaniu architektur lakehouse (wzorce medali: Brązowy/Srebrny/Złoty lub równoważne)
- Udokumentowane osiągnięcia w dostarczaniu platform danych o wysokiej wydajności
- Doświadczenie z bazami danych grafowymi (Neo4j, Amazon Neptune, TigerGraph) do modelowania relacji
- Praktyczna znajomość przetwarzania strumieniowego (Kafka, Flink, Spark Streaming, Kinesis)
Umiejętności techniczne (podstawowe):
- Platformy chmurowe: Głęboka wiedza w AWS (S3/Blob, RDS/Baza SQL, zarządzany Kafka, obliczenia bezserwerowe)
- SQL i modelowanie danych: Ekspert w SQL, modelowanie wymiarowe, SCD2, kompromisy między normalizacją a denormalizacją
- Narzędzia transformacyjne: dbt, Databricks SQL, Dataform lub niestandardowe ramy SQL/Python
- Programowanie: Python lub Scala do przetwarzania danych, skryptów i automatyzacji
- Orkiestracja: Airflow, Prefect, Dagster, Step Functions lub Azure Data Factory
- IaC: Terraform, CloudFormation, Pulumi lub szablony ARM
Umiejętności techniczne (preferowane):
- Wyszukiwanie: OpenSearch, Elasticsearch lub Solr do indeksowania i wyszukiwania tekstu
- Graf: Neo4j Cypher, SPARQL lub Gremlin do zapytań grafowych; doświadczenie z ETL grafowym
- Jakość danych: Great Expectations, testy dbt lub niestandardowe ramy walidacji
- W czasie rzeczywistym: Flink, Spark Streaming lub przetwarzanie zdarzeń bezserwerowych (Lambda, Cloud Functions)
- Monitorowanie: Grafana, Datadog lub CloudWatch do obserwowalności potoków danych
Umiejętności zawodowe:
- Komunikacja: Wyjaśnianie technicznych kompromisów (koszt, wydajność, złożoność) osobom nietechnicznym
- Rozwiązywanie problemów: Debugowanie problemów z jakością danych, optymalizacja wolnych zapytań, rozwiązywanie konfliktów schematów
- Współpraca: Praca z naukowcami danych, inżynierami DevOps i zespołami ds. zgodności
- Autonomia: Zarządzanie niepewnością; proponowanie rozwiązań, gdy wymagania są niekompletne
Data Platform Engineer/Lakehouse Architecture in Kraków – pracodawca: Infotree Global Solutions Inc.
Infotree Global Solutions Inc. to doskonały pracodawca, oferujący dynamiczne środowisko pracy w sercu innowacji technologicznych. Pracownicy mają możliwość rozwoju zawodowego poprzez udział w zaawansowanych projektach związanych z architekturą lakehouse oraz przetwarzaniem danych w czasie rzeczywistym, co sprzyja zdobywaniu cennych umiejętności. Dodatkowo, firma promuje kulturę współpracy i otwartości, co sprawia, że każdy członek zespołu czuje się doceniony i ma realny wpływ na rozwój organizacji.
Dane kontaktowe:
Zespół rekrutacyjny Infotree Global Solutions Inc.
