Senior RAG Engineer in Warsaw

Newcode.ai to szybko rozwijająca się firma zajmująca się technologią prawniczą i agentowym AI, która przekształca sposób wykonywania pracy prawnej. Z zespołami w Norwegii, Szwecji, Irlandii i USA, działamy na styku prawa, technologii i inteligencji. Pracujemy szybko, myślimy ambitnie i jesteśmy dumni z tego, że robimy rzeczy w odpowiedni sposób.

Wierzymy w przejrzystość tego, jak wygląda praca w Newcode. Jako szybko rozwijający się startup, codziennie budujemy i ewoluujemy. Oznacza to, że nie każdy proces, podręcznik czy ramy są już ustalone, a priorytety mogą szybko się zmieniać. Osoby, które odnajdują się w tym środowisku, czują się komfortowo w obliczu niepewności, biorą odpowiedzialność i nie czekają na idealne wskazówki. Są pomysłowe, proaktywne i potrafią „rozwiązywać problemy”, tworzyć struktury tam, gdzie są potrzebne, i pomagać w budowaniu firmy.

W tej roli będziesz odpowiedzialny za retrieval. Kiedy ktoś zadaje pytanie naszemu produktowi, coś musi znaleźć odpowiedni fragment w dużych zbiorach poufnych dokumentów, zdecydować, że to rzeczywiście właściwy fragment, i przekazać go modelowi językowemu, którego odpowiedź kończy się w profesjonalnej poradzie. Cała ta ścieżka należy do Ciebie: jak dokumenty są analizowane, dzielone na fragmenty i osadzane, jak wyszukiwanie łączy znaczenie z dokładnymi terminami, jak wyniki są ponownie klasyfikowane oraz jak agent decyduje, co przeczytać następnie i kiedy wystarczająco przeczytał.

Wymagania:

• Posiadanie pełnej kontroli nad pipeline'em retrieval od początku do końca: analiza i dzielenie dokumentów, osadzanie, indeksowanie oraz utrzymywanie wszystkiego aktualnym, gdy klienci dodają i zmieniają materiały.
• Projektowanie sposobu wyszukiwania, łączenie semantycznego i słownikowego retrieval w Qdrant, fuzja list rankingowych, filtrowanie na podstawie metadanych i ponowne klasyfikowanie wyników.
• Budowanie agentowego retrieval: dekompozycja zapytań, narzędzia, które model używa do wyszukiwania i nawigacji po dokumentach, wieloetapowe pętle, które wiedzą, kiedy się zatrzymać, oraz budżety kosztów i opóźnień.
• Budowanie warstwy oceny, która informuje nas, czy to działa: zestawy złote, metryki retrieval, testy regresji na realistycznych danych klientów.
• Wysyłanie szybkich, niezawodnych usług w Pythonie i FastAPI, z ciężką pracą - wchłanianiem, osadzaniem, reindeksowaniem - działającą jako zadania w tle.
• Poważne podejście do bezpieczeństwa danych i izolacji.
• Utrzymywanie retrieval w różnych językach klientów.

Kogo szukamy:

• Co najmniej pięć lat doświadczenia w budowaniu systemów backendowych działających w produkcji, w tym przynajmniej dwa lata w dostarczaniu systemów retrieval lub RAG.
• Doświadczenie w diagnozowaniu regresji retrieval w produkcji i naprawianiu jej.
• Silna znajomość Pythona oraz komfort w pracy z FastAPI, PostgreSQL i Redis pod obciążeniem.
• Śledzenie nowinek w bazach danych wektorowych i LLM, ponieważ jesteś ciekawy.
• Doświadczenie z AI coding assistants i umiejętność oceny ich przydatności.

Proces rekrutacji:

• Etap 1: Online coding challenge
• Etap 2: Screening Call
• Etap 3: Techniczna ocena w domu
• Etap 4: Wyzwanie na tablicy i prezentacja oceny w domu
• Etap 5: Rozmowa z CEO

Korzyści:

• W pełni zdalna praca w EEA, w tym Norwegia.
• Możliwość bycia motorem innowacji w jednym z najbardziej ekscytujących przedsięwzięć AI.
• Praca z utalentowanymi współpracownikami w współpracy w wysokiej energii.
• Elastyczne, anglojęzyczne środowisko.