AI Quality Engineering Team Lead
Aviva Services Excellence Centre
⚲ Warszawa
Do uzgodnienia
Wymagania
- kilka lat doświadczenia w quality engineering, testowaniu, inżynierii oprogramowania lub data science
- praktyczne doświadczenie w ewaluacji aplikacji AI, LLM, RAG lub agentowych
- praktyczna znajomość Pythona oraz pracy z API, logami, traces i SQL
- umiejętność projektowania powtarzalnych ewaluacji i automatyzacji, nie tylko testów manualnych
- doświadczenie w coachingu lub prowadzeniu inżynierów w nowej, niejednoznacznej dziedzinie
Mile widziane
- doświadczenie w prowadzeniu projektów lub zarządzaniu ludźmi
- znajomość narzędzi ewaluacji/obserwowalności AI, np. DeepEval, Arize
- doświadczenie w finansach, ubezpieczeniach lub innej regulowanej branży
Opis stanowiska
Aviva szuka osoby, która pokieruje jakością rozwiązań AI — od oceny ryzyka, przez ewaluację modeli i aplikacji RAG/agentowych, po monitorowanie po wdrożeniu. Rola łączy pracę techniczną (projektowanie powtarzalnych ewaluacji, automatyzacja, integracja z CI/CD) z wpływem na decyzje biznesowe i zespoły. Dobra dla kogoś z doświadczeniem w quality engineering lub data science, kto rozumie niedeterministyczne zachowanie systemów i potrafi przekładać wyniki techniczne na argumenty dla interesariuszy.
🔍 Dekoder Ogłoszenia
🟡
Ability to turn technical findings into decision-quality evidence for business, risk and engineering stakeholders
Wymagana umiejętność raportowania do biznesu i zarządu — realnie dużo pracy analityczno-komunikacyjnej poza samym testowaniem.