Резюме: ПРОПАЛИГН для оценки степени соответствия различных предложений

arXiv: 2610.19387v1 Annualce Type: New Brieft: Identification and rage of signative provisions in documents косвенно участвует во многих задачах МА, но лишь в нескольких документах четко определяются показатели значимости предложений, содержатся различные данные или оцениваются модели непосредственно по этой задаче. В настоящем документе предлагается PROPALIGN - многократный подход к оценке предполагаемой значимости, а также выпуск PRUPАЛИGNBANK - сопроводительного набора данных для данного метода с 138 K приведениями более 35К предложений. Мы сравниваем несколько подходов к выдерживанию на английском языке основных предложений по широкому кругу устных и письменных жанров, а также демонстрируем, что наивно расспрашивая модели для суждений ведет к несоответствиям. В отличие от этого, метрические показатели с разбивкой по классам являются более стабильными. Мы также отмечаем, что в то время как одиночные модели работают хуже людей, набор моделей с лингвистическими особенностями ручной работы по определению потолочных значений качества. Кроме того, анализ результатов модели показывает, что