Research Engineer, Data Infrastructure

O Mistral

Mistral dostarcza kompleksowe rozwiązania AI: od modeli frontier po narzędzia dla deweloperów, aplikacje i obliczenia. Współpracujemy z przedsiębiorstwami, które stawiają czoła najtrudniejszym problemom - w branżach o wysokim ryzyku, takich jak finanse, produkcja, obrona, opieka zdrowotna i sektor publiczny - współtworząc dostosowane systemy AI, które mogą działać na ich warunkach.

Podsumowanie roli

Zespół Data Infrastructure w Mistral AI projektuje fundamenty naszego ekosystemu szkolenia i dostrajania modeli frontier. Budujemy specjalistyczne zasoby obliczeniowe i struktury danych wymagane do zasilania rozwoju światowej klasy AI. Nasza wizja to obsługa jednych z największych flot obliczeniowych w produkcji oraz budowa jezior danych i systemów metadanych z planem rozwoju w kierunku architektury na poziomie eksabajtów. Obecnie budujemy platformę szkoleniową o wysokiej wydajności, zaprojektowaną do pracy na dużą skalę zarówno w środowiskach lokalnych, jak i chmurowych opartych na Kubernetes. Prowadzimy strategiczną transformację z tradycyjnego harmonogramowania do nowoczesnej orkiestracji, wdrażając zaawansowane możliwości orkiestracji wieloklastra i cloud-bursting, aby lepiej wykorzystać nasze globalne zasoby i zapewnić naszym badaczom płynny dostęp do obliczeń, gdziekolwiek się znajdują.

O roli

Ta rola koncentruje się na budowaniu i obsłudze nowej generacji infrastruktury danych w Mistral AI. Będziesz kluczowym współpracownikiem w naszej ewolucji, pomagając nam projektować i skalować ogromne floty obliczeniowe i systemy przechowywania zaprojektowane z myślą o wysokiej wydajności i skalowalności. Pomożesz nam przejść w kierunku przyszłości z oddzielonymi płaszczyznami kontroli i danych, skalując platformy obliczeniowe i przechowywania dużych danych, zapewniając jednocześnie bezpieczny i kontrolowany dostęp do danych dla MLOps i badań. Weźmiesz pełną odpowiedzialność za cykl życia: od projektowania migracji z tradycyjnych orkiestratorów do wdrażania potoków produkcyjnych i uczestniczenia w rotacjach dyżurów dla krytycznych zadań szkoleniowych.

W tej roli będziesz:

• Budować i skalować: Osiągnąć cel operowania ogromnymi rozproszonymi systemami obliczeniowymi i przechowywania.
• Globalna orkiestracja: Projektować i utrzymywać warstwy orkiestracji wieloklastra, aby optymalizować rozmieszczenie obciążenia roboczego na różnorodnym sprzęcie i w różnych regionach.
• Projektowanie przyszłościowych systemów przechowywania: Prowadzić przejście do nowoczesnych formatów przechowywania, aby obsługiwać zestawy danych do dostrajania w skali przewidującej wzrost eksabajtów.
• Inżynieria platformy: Wnosić wkład w rozwój naszej wewnętrznej platformy szkoleniowej, zapewniając płynne szkolenie modeli i dostrajanie w środowiskach opartych na Kubernetes i SLURM.
• Metadane i linia: Wdrażać i zarządzać systemami, aby zapewnić wyraźną widoczność i liniowość, gdy nasze dane i potoki modeli rosną w złożoności.
• Doskonalenie operacyjne: Używać nowoczesnych przepływów pracy wdrożeniowych do zarządzania wdrożeniami w chmurze, zapewniając, że nasza platforma danych może skalować się o rzędy wielkości, pozostając jednocześnie niezawodna i efektywna.

Możesz odnaleźć się w tej roli, jeśli:

• Masz ponad 4-letnie doświadczenie w Infrastruktura Danych, MLOps lub Inżynierii Infrastruktury.
• Masz doświadczenie lub silne zainteresowanie wspieraniem podstawowych platform obliczeniowych i przechowywania.
• Jesteś biegły w Pythonie i lubisz rozwiązywać problem kruchych jezior danych z nowoczesnymi standardami przechowywania kolumnowego.
• Znajomość narzędzi natywnych dla Kubernetes i chęć debugowania rozproszonych systemów na dużą skalę w środowiskach wieloklastra.
• Jesteś dumny z budowania i obsługi skalowalnych, niezawodnych i bezpiecznych systemów od podstaw.
• Jesteś komfortowy z niepewnością i wyzwaniami związanymi z budowaniem infrastruktury o dużej skali w szybko rozwijającym się środowisku AI.

Lokalizacja i zdalnie

Ta rola jest głównie oparta w jednym z naszych biur europejskich (Paryż, Londyn, Warszawa i Zurych). Priorytetowo traktujemy kandydatów, którzy tam mieszkają lub są otwarci na relokację. Mocno wierzymy w wartość współpracy osobistej, aby wspierać silne relacje i płynną komunikację w naszym zespole. W pewnych specyficznych sytuacjach rozważymy również kandydatów zdalnych z jednego z krajów wymienionych w tym ogłoszeniu - obecnie Francji, Wielkiej Brytanii, Polski i Szwajcarii. W takim przypadku prosimy wszystkich nowych pracowników o odwiedzenie lokalnego hubu: przez pierwszy tydzień ich onboardingu (zakwaterowanie i podróż pokryte), a następnie przynajmniej 3 dni w miesiącu.

Co oferujemy

Oferujemy kompleksowy pakiet świadczeń zaprojektowany w celu wsparcia Twojego dobrostanu, rozwoju i równowagi między życiem zawodowym a prywatnym. Świadczenia różnią się w zależności od kraju i mogą obejmować ubezpieczenie zdrowotne, urlop rodzicielski, plany emerytalne, wsparcie w relokacji, programy wellness, dodatki na posiłki i transport oraz inne korzyści specyficzne dla lokalizacji. Aby uzyskać najbardziej aktualne szczegóły dotyczące dostępnych świadczeń w Twojej lokalizacji, zapraszamy do zapoznania się z naszą stroną z benefitami.