Проверка на противоречия

Проверка на противоречия позволяет найти в базе знаний взаимоисключающие сведения. Исправьте выявленные противоречия в документах-источниках — это повысит достоверность ответов базы знаний.

Как это работает

Проверка запускается по выбранным источникам проекта. Система находит близкие по смыслу пары чанков, а затем LLM анализирует каждую пару на наличие противоречий. Результат — отчет со списком конфликтующих пар и пояснениями модели.

к сведению

Для запуска проверки и просмотра отчета необходима роль не ниже KHUB_OWNER.

Ограничения

• Анализируются только проиндексированные источники, которым не назначены группы доступа.
• Отчет формируется по данным на момент запуска. Если вы добавили или обновили источники, запустите новую проверку.
• В проекте одновременно выполняется только одна проверка. Пока она не завершилась, запустить следующую нельзя.
• На проверку отправляется не более 2 000 чанков из выбранных источников. Если чанков больше, остальные в проверку не попадут, и предупреждения об этом не будет — отчет окажется неполным. Чтобы охватить всю базу знаний, проверяйте источники небольшими группами.

Как запустить проверку

Проверку можно запустить двумя способами: из списка источников или из истории проверок.

Из раздела «Источники»

1. Перейдите в раздел Источники.
2. Выберите один или несколько источников со статусом Проиндексировано.
3. Нажмите Проверить на противоречия.
4. В открывшемся окне выберите модель для анализа.
5. Задайте порог схожести. Значение по умолчанию — 0,5; оно позволяет находить противоречия даже между текстами, которые не являются дубликатами.
6. Нажмите Запустить.

Из раздела «Контроль качества»

1. Перейдите в раздел Контроль качества на вкладку Противоречия.
2. Нажмите Проверить на противоречия.
3. В открывшемся окне выберите источники из списка проиндексированных и нажмите Далее.
4. В открывшемся окне выберите модель для анализа.
5. Задайте порог схожести. Значение по умолчанию — 0,5; оно позволяет находить противоречия даже между текстами, которые не являются дубликатами.
6. Нажмите Запустить.

Проверка выполняется асинхронно. После запуска вы будете перенаправлены в раздел с историей проверок.

Содержание отчета

Каждая строка отчета — это пара чанков, между которыми модель обнаружила противоречие. По каждой паре доступны:

• Тип противоречия:
  • Числовой — расходятся даты, количества, показатели;
  • Логический — утверждения взаимно исключают друг друга;
  • Временной — одна из сторон содержит устаревшую информацию;
  • Статусный — статус объекта описан по-разному.
• Краткое описание сути противоречия.
• Утверждения, которые модель вынесла из каждого чанка, с указанием документа-источника.
• Отметка Вероятно, верно у того утверждения, которое модель считает правильным.
• Коэффициент смысловой близости пары.
• Уверенность модели в наличии противоречия.
• Рассуждение модели, почему пара считается противоречивой.

История проверок

Список всех проверок находится в разделе Контроль качества на вкладке Противоречия. Нажмите на строку, чтобы открыть соответствующий отчет.

Нажмите , чтобы увидеть статус проверки и перейти к отчету.