Azure Data Engineer in Warsaw

Software Mind develops solutions that make an impact for companies around the globe. Tech giants & unicorns, transformative projects, emerging technologies and limitless opportunities – these are a few words that describe an average day for us. Building cross-functional engineering teams that take ownership and crave more means we’re always on the lookout for talented people who bring passion and creativity to every project. Nasza kultura obejmuje otwartość, szacunek, determinację i odwagę oraz łączy współpracę z przyjemnością.

Opis projektu – cel, który będziesz miał

Dołącz do dużego programu migracji danych prowadzonego przez międzynarodowego dostawcę oprogramowania działającego w regulowanym, audytowanym sektorze. Będziesz pracować w małym, senioralnym zespole dostawczym obok własnych zespołów inżynieryjnych klienta, przenosząc miliony rekordów z systemu dziedziczonego do nowoczesnego środowiska Azure. Ścisłe standardy uzgadniania, prawdziwa odpowiedzialność za integralność danych oraz bezpośredni kontakt z technicznym kierownictwem klienta.

Rola – jak będziesz wnosić wkład

• Projektowanie, budowanie i uruchamianie potoków ETL przenoszących dane z dziedzicznych baz danych SQL Server do Azure SQL.
• Profilowanie i inżynieria odwrotna schematów źródłowych, gdzie dokumentacja jest niekompletna, oraz dokumentowanie modelu, który rekonstruujesz.
• Budowanie logiki walidacji i uzgadniania, która udowadnia kompletność i poprawność przed początkowym załadunkiem i każdym załadunkiem delta.
• Współpraca z analitykiem biznesowym w zakresie mapowania danych, reguł transformacji i uzgodnionego słownika danych.
• Wykonywanie próbnych migracji i wspieranie przejścia.
• Przestrzeganie zarządzania zmianami i wydaniami zgodnie z ITIL dla każdej zmiany produkcyjnej.
• Diagnozowanie i rozwiązywanie incydentów danych w produkcji oraz przyczynianie się do analizy przyczyn źródłowych i trwałych poprawek.
• Utrzymywanie dokumentacji technicznej dla komponentów migracji i przekazywanie jej na koniec zaangażowania.

Oczekiwania – doświadczenie, którego potrzebujesz

• 3+ lata doświadczenia w migracji danych lub rozwoju ETL w systemach przedsiębiorstw lub o wysokim ryzyku.
• Silne umiejętności T-SQL i praktyczne doświadczenie z Microsoft SQL Server, w tym SSIS.
• Praktyczne doświadczenie z Azure SQL Database i otaczającymi usługami danych Azure (Data Factory, Azure DevOps).
• Udokumentowane doświadczenie w walidacji danych i uzgadnianiu: możesz wyjaśnić, jak udowodniłeś, że migracja była poprawna, a nie tylko, że się odbyła.
• Komfort pracy z niekompletną dokumentacją, wykorzystując odkrywanie schematów i profilowanie danych jako pierwszy krok.
• Doświadczenie w obsłudze ładunków JSON i XML przechowywanych w strukturach relacyjnych.
• Znajomość języka angielskiego na poziomie C1 lub wyższym, z codziennym kontaktem z międzynarodowymi interesariuszami.

Dodatkowe umiejętności – przewaga, którą masz

• Certyfikacja Microsoft, najlepiej DP-203 Azure Data Engineer Associate.
• ITIL Foundation v4 lub chęć do certyfikacji (na nasz koszt).
• Doświadczenie w regulowanym, audytowanym sektorze, takim jak usługi finansowe, sektor publiczny lub opieka zdrowotna.
• Doświadczenie z przechwytywaniem danych zmian i utrzymywaniem systemów w synchronizacji podczas okresu równoległego.
• Znajomość Databricks, Snowflake lub dbt.

Dodatkowe informacje

Co oferujemy: elastyczne i zdalne opcje współpracy, międzynarodowe projekty z wiodącymi globalnymi klientami, podróże związane z projektami międzynarodowymi, niekorporacyjną atmosferę, dostęp do zajęć językowych, inicjatyw dzielenia się wiedzą, prywatnej opieki zdrowotnej i ubezpieczenia na życie, karty multisport. Dostępność i warunki indywidualnych świadczeń mogą się różnić w zależności od wybranej formy współpracy.