Несоответствие охвата: контрольный параметр для ретриваля информации

arXiv:2610.37162v1 Вид уведомления: перекрестное резюме: контрольные показатели оценки охвата и охвата дают количественную оценку того, охватывают ли полученные доказательства различные элементы информации, необходимые для удовлетворения потребностей в информации. Существующие контрольные показатели в основном касаются фактических требований, которые уже могут быть известны как заранее подготовленные компоненты поиска, оставляя открытым вопрос о том, находят ли ретриверы доказательства корпусов, когда они противоречат этим приводам. Мы изучаем, как ведут себя ретриверы когда их параметрические знания и информация в корпусе расходятся. С этой целью мы разрабатываем процесс, позволяющий расширить базовый показатель охвата на основе нигета с учетом контролируемых противоречий. Для каждого нагжета мы создаём отрицаемого партнера и редактируем его вспомогательные документы, чтобы поддержать это отрицание при сохранении контекста. Применяя этот процесс в отношении охвата Bench, контрольного информационного охвата, мы создаём систему BriefingBench-Negate, охватывающую шесть наборов данных и примерно 63 000 оригинальных пар доказательств (по одному на ссылку с документами нигжета). Мы прикрепляем богатое строительство