Senior AI Product Analyst in Warsaw

W zespole Automatyzacji w MEDvidi budujemy i obsługujemy mieszankę funkcji produktowych opartych na AI i konwencjonalnych, które automatyzują procesy kliniczne i operacyjne - od dokumentacji medycznej tworzonej przez AI po automatyczne rozwiązywanie problemów pacjentów, weryfikację przyjęć, narzędzia dla dostawców oraz zaplecze technologiczne. Uwalniamy klinicystów i operacje od manualnej pracy, którą maszyna może wykonać niezawodnie i bezpiecznie, w dziedzinie, gdzie błędy mają realne konsekwencje kliniczne i zgodności.

Jesteśmy zespołem produktowym pełnego stosu, a nie laboratorium AI: dostarczamy interfejsy użytkownika, procesy zaplecza, integracje i funkcje AI równolegle, a ich efektywność mierzymy w ten sam sposób. Zespół ściśle współpracuje z działami Produktu, Inżynierii, MedOps oraz Klinicznymi. Poszukujemy Analityka Produktu, który przejmie odpowiedzialność za analitykę dla zespołu od początku do końca, w miarę jak nasza powierzchnia automatyzacji rośnie.

Rola

Będziesz Analitykiem Produktu dla zespołu - we wszystkich aspektach, które dostarczamy, zarówno klasycznych funkcji produktowych, jak i tych opartych na AI. Przekujesz zachowanie produkcyjne naszych systemów w dowody, na podstawie których zespół może działać: które części działają, gdzie występują ciche awarie i co należy naprawić następnie. Praca łączy analitykę produktu, ocenę AI oraz analizę operacyjną.

Obowiązki

• Posiadać pełny stos analityki produktu dla funkcji, które zespół dostarcza - odkrywanie i szacowanie, projektowanie i analizę eksperymentów, analizę lejków i adopcji, ocenę wpływu po wydaniu - zarówno dla funkcji opartych na AI, jak i konwencjonalnych.
• Analizować zachowanie produkcyjne procesów AI i automatyzacji w ramach podróży klinicznych i operacyjnych.
• Badanie halucynacji, cichych awarii i degradacji jakości w wynikach generowanych przez AI.
• Bezpośrednia praca z logami, transkryptami, generowanymi artefaktami i danymi operacyjnymi w celu znalezienia wzorców, które umykają dashboardom.
• Projektowanie ocen jakości AI - zarówno automatycznych, jak i przeglądów ludzkich - oraz zamykanie pętli w zmiany w promptach i produktach.
• Budowanie monitorowania i dashboardów dla zdrowia AI i automatyzacji oraz metryk operacyjnych, które się do nich odnoszą.
• Mierzenie wpływu biznesowego i operacyjnego inicjatyw automatyzacyjnych oraz ujawnianie ryzyk, które wprowadzają.
• Ścisła współpraca z działami Produktu, Inżynierii, Klinicznymi, MedOps oraz Prawnym w celu wspierania szybkich decyzji w warunkach niepewności.

Wymagania

• 5+ lat doświadczenia w analityce produktu/analizie operacyjnej/analityce danych lub rolach analitycznych w złożonych systemach produkcyjnych.
• Zrozumienie AI, ML i systemów LLM.
• Praktyczne doświadczenie w ocenie wyników LLM lub AI - iteracja promptów, ramy ewaluacyjne i procesy przeglądów ludzkich to duży plus.
• Skuteczna, strukturalna komunikacja pisemna i werbalna - zdolność do przekształcania analizy w zwięzłe, gotowe do podjęcia decyzji dokumenty, na podstawie których mogą działać osoby nieanalityczne.
• Komfort w niejednoznacznych, szybko zmieniających się środowiskach, gdzie prawda często musi być skonstruowana.
• Silne tło analityki produktu/operacyjnej, komfort w posiadaniu metryk od początku do końca oraz pisaniu kodu SQL i Python w oparciu o chaotyczne dane produkcyjne.
• Znajomość języka rosyjskiego; poziom angielskiego B2 lub wyższy.
• Możliwość pracy w godzinach pokrywających CET w formacie B2B.

Miłe widziane

• Doświadczenie w ocenie wyników LLM lub systemów AI.
• Poprzednie doświadczenie w nauce danych lub uczeniu maszynowym.

Co oferujemy

• Środowisko o wysokim wpływie: Szansa na wpływanie na to, jak AI jest wykorzystywane w rzeczywistych interakcjach z pacjentami.
• Rozwój i wynagrodzenie: Konkurencyjne wynagrodzenie i jasne możliwości rozwoju.
• Praca zdalna: W pełni zdalna, długoterminowa współpraca B2B.
• Zdrowie i dobre samopoczucie: Ubezpieczenie zdrowotne po okresie próbnym, a także rekompensata za sport i wellness.
• Rozwój kariery: Rozwój kariery, w tym spersonalizowane lekcje angielskiego przez Preply.
• Czas wolny: 19 dni roboczych urlopu rocznie, 4 dodatkowe dni wellness oraz płatny urlop chorobowy przez pierwsze 5 dni roboczych.
• Kultura: Przemyślane prezenty na ważne wydarzenia życiowe.

MEDvidi jest pracodawcą równych szans. Celebrujemy różnorodność i zobowiązujemy się do stworzenia inkluzywnego środowiska dla wszystkich pracowników i kontrahentów. Wszyscy kwalifikowani kandydaci będą brani pod uwagę bez względu na rasę, kolor skóry, religię, płeć, orientację seksualną, tożsamość płciową, pochodzenie narodowe, niepełnosprawność lub status weterana.