Площадь: имитационная среда для оценки интервьюеров АИ
arXiv: 2610.12023v1 Annualce Type: New Humber Brieft: все чаще проводятся опросы для получения открытых ответов в таких областях, как рыночные исследования, общественные опросы, выявление преференций и социальные научные исследования. Вместе с тем, оценка счетчиков АИ является сложной задачей, поскольку они работают в широких многооборотных взаимодействиях, где им необходимо адаптироваться к поведению участников. Для решения этой задачи мы разрабатываем программу интервью, имитирующую среду для оценки счетчиков АИ с использованием имитируемых участников исследования, поведение которых основано на социальной теории. В результате имитационных исследований, проведенных в рамках программы " DociewPlaygraphe > , был подготовлен доклад о результатах опроса, который позволяет оценить результаты работы счетчиков ИИ с использованием комплекса проверенных мер. Для проверки того, прогнозируют ли результаты наших имитационных оценок с участием людей, мы проводим 15 реальных качественных исследований с пятью интервьюерами ИИ, три темы собеседований и 450 участников из числа человека, а также сравниваем их с имитационными исследованиями в Ин.
