Тема
метрики
2 материала по теме
Учебник · 5 июня 2026 г. · 9 мин
Как проверить, не врёт ли ваш ИИ-помощник, за вечер без программиста
Ваш ИИ-помощник может терять 38% нужных документов и выдумывать каждый третий факт. Вы этого не видите, а клиенты жалуются. Разбираем, как за 4 часа собрать тестовый набор вопросов и запустить автоматическую проверку качества. Никаких программистов - всё делается через готовые библиотеки, которые настраиваются за час.
Учебник · 5 июня 2026 г. · 8 мин
RAGAS и DeepEval: как измерить качество вашего AI-помощника
Ваш AI-чат-бот для клиентов или сотрудников начал галлюцинировать, а вы узнаёте об этом только по жалобам? Без системной оценки качества AI-приложения вы работаете вслепую. В статье разбираем, как за один вечер настроить тесты для AI-помощника: какие метрики смотреть (верность, релевантность), как собрать 50 тестовых примеров и какие бесплатные инструменты (Ragas, DeepEval) использовать, чтобы ловить проблемы до того, как их увидят пользователи. Без программиста и курсов.