Компьютерная наука > Расчет и язык [представлен 21 мая 2025 года (v1), последний пересмотренный вариант 11 сентября 2026 года (эта версия, v3)] Название: UrduFactCheck: An agentical Fact-chewing Framework for Urdo with Davising and Mategering View PDF HTML (экспериментальное) резюме: Быстрое принятие моделей большого языка (MLM) вызвало серьезную озабоченность по поводу фактической надежности их результатов, особенно на таких низкоресурсных языках, как Урду. Существующие автоматизированные системы проверки фактов разработаны главным образом для английского языка, в результате чего имеется значительный разрыв между более чем 200 млн. В этой работе мы представляем UrduFactBench и УрдуФактQA — два новых ручных контрольных показателя, призванных обеспечить возможность проверки фактов и фактической последовательности оценки в урду. В то время как Урду-Фактбенч уделяет основное внимание проверке претензий, UrduFactQA ставит под сомнение фактическую действительность ответов на эти вопросы. Эти ресурсы, первый в своем роде для Урду, были разработаны на основе многоэтапного процесса аннотации с участием местных урду. В дополнение к этим контрольным показателям мы внедряем модульную систему проверки фактов, которая включает как единоязычные, так и переводческие стратегии поиска доказательств для смягчения дефицита высококачественных урду. За счет использования этих ресурсов мы проводим обширную оценку 12 МЛМ и демонстрируем, что трубопроводы с переводческим оборудованием…
UrduFactCheck: агентическая основа для урду с подкреплением доказательств и установлением контрольных показателей
arXiv:2505.15063v3 Annuales Type: заменить резюме: Быстрое принятие моделей большого языка (МЖЛ) вызвало серьезную озабоченность по поводу фактической надежности их результатов, особенно на таких низкоресурсных языках, как Урду. Существующие автоматизированные системы проверки фактов разработаны главным образом для английского языка, в результате чего имеется значительный разрыв между более чем 200 млн. В этой работе мы представляем UrduFactBench и УрдуФактQA — два новых ручных контрольных показателя, призванных обеспечить возможность проверки фактов и фактической последовательности оценки в урду. В то время как Урду-Фактбенч уделяет основное внимание проверке претензий, UrduFactQA ставит под сомнение фактическую действительность ответов на эти вопросы. Эти ресурсы, первый в своем роде для Урду, были разработаны на основе многоэтапного процесса аннотации с участием местных урду. В дополнение к этим контрольным показателям мы внедряем модульный механизм проверки фактов, который включает как единоязычные, так и переводческие стратегии поиска доказательств