Байес Судья: Неопределенность-сообщение баезианского метаанализа человеческих и ЛЛМ судебных решений

arXiv:2610.1116v1 Вид уведомления: новое резюме: трубопроводы для оценки АИ часто производят противоречивые суждения, а не чистую маркировку. В двух отношениях оценка УЗО особенно заметна: разногласия могут возникать из-за двусмысленных позиций, заниженных рубрик, разнородных или нестабильных показателей для человека или судьи УЗМ, чьи решения изменяются при замене приказа об ответе. Мы предлагаем Bayes Judges, онлайн-слой метаоценки Баесов для противоречивых потоков суждений человека и ЛЖЗ. Для каждого сопоставления Байес Судья оценивает распределение вердиктов, относящихся к группе, по сравнению с двумя ответами при наличии таких ярлыков или двусмысленности. В то же время в нем дается оценка матриц с путаницей для человека, характерных для конкретных показателей, а также погрешности в порядке представления данных. Этот метод предусматривает использование ярлыков с галстуком для сохранения двусмысленности, наблюдаемой и сложенной в паре судьёй требует отделить качество ответа от эффекта представления. Мы сформулируем точный онлайн-рекурсион и используем масштабируемый Rao-Bla