LLM Agent Evaluation Engineer in Warsaw

LLM Agent Evaluation Engineer in Warsaw

Warsaw Stacjonarnie
O

On The Spot seeks a dedicated specialist to own and improve our evaluation suite for an AI agent serving local service businesses. You’ll define scenarios, graders, and quality gates, and ensure every change passes rigorous tests before production. You’ll run hill-climb experiments on the agent’s skills, diagnose failures, form hypotheses, adjust prompts or tools, and verify fixes without unintended side effects. You’ll also judge conversation quality and task success to keep users satisfied.

LLM Agent Evaluation Engineer in Warsaw – pracodawca: On The Spot Development

Orca Security w Warszawie to doskonały pracodawca, który oferuje wyjątkowe możliwości rozwoju zawodowego w dynamicznym środowisku technologicznym. Pracując w zespole Sensor, będziesz miał szansę na bezpośredni wpływ na kierunek techniczny projektu, a także korzystać z kultury współpracy i innowacji, która sprzyja kreatywności i zaangażowaniu. Dodatkowo, firma zapewnia elastyczne godziny pracy oraz wsparcie w nauce i rozwoju umiejętności, co czyni ją idealnym miejscem dla ambitnych inżynierów oprogramowania.

O

Dane kontaktowe:

Zespół rekrutacyjny On The Spot Development