AI Evaluation Engineer (Testing oraz Development)
⚲ Kraków
Do uzgodnienia
Wymagania
- doświadczenie w testowaniu systemów AI, Machine Learning lub Generative AI
- znajomość LLM, agentów AI i architektur RAG
- doświadczenie w tworzeniu scenariuszy testowych, zbiorów ewaluacyjnych i frameworków walidacji
- znajomość testowania API i narzędzi automatyzacji
- doświadczenie z Azure lub Google Cloud Platform
- gotowość do pracy hybrydowej — 6 dni w miesiącu z biura w Krakowie
Opis stanowiska
Rola łącząca testowanie i rozwój w obszarze AI: będziesz budować frameworki ewaluacji agentów AI i aplikacji GenAI, definiować metryki jakości, analizować halucynacje i przypadki błędów oraz walidować systemy RAG. Część pracy to rozwój usług w Pythonie wspierających ewaluację i monitoring. To oferta dla osoby z doświadczeniem w testowaniu systemów ML/GenAI, która rozumie LLM-y i architektury RAG.
🔍 Dekoder Ogłoszenia
✓ Ogłoszenie wygląda transparentnie — brak typowych czerwonych flag.