Оценка качества ответов базы знаний

В новом релизе Jay Knowledge Hub добавлена возможность измерить, насколько хорошо база знаний отвечает на типичные запросы пользователей и как зависит качество ответа от настроек.

Для оценки качества используются тест-сеты, которые состоят из вопросов к базе знаний и ожидаемых ответов. Тест-сеты можно составить самостоятельно или сгенерировать с помощью LLM.

Предусмотрена возможность запускать измерения вручную или по расписанию.

Больше подробностей смотрите в документации.