Про тестування AI-асистента, роботу в InPost і нові компетенції QA
Епізод 211 год 3 хв
- AI
- Архітектура
- Кар'єра
У цьому епізоді
Michalina Graczyk пояснює, як тестувати AI-асистента, відповіді якого недетерміновані. На прикладі асистента для покупок InPost говоримо про evals, еталонні набори даних, безпеку та компетенції, які будуть потрібні QA-фахівцям.
Теми розмови
- Як тестувати AI-асистента, який повертає недетерміновані результати?
- Що таке evals, golden set, robustness, safety і guardrails?
- Як обмежити незаконні або небезпечні дії асистента?
- Які завдання тестувальника агенти AI можуть перебрати найшвидше?
- Які компетенції QA будуть потрібні в найближчі роки?
Слухати на
Гість
- Michalina GraczykEngineering Manager @ InPost
Про гостю
Engineering Manager в InPost і Quality Assurance Engineer продуктів, що використовують AI. Працювала над бета-тестуванням AI-асистента для покупок у застосунку InPost.
