Оценка на основе семантики и семантики для поколения гаммов-боев

arXiv: 261.10.11669v1 Тип объявления: новое резюме: " Холистическое и семантическое жесты соподобного &qt; быстро развиваются, однако оценка по-прежнему отстает: объективные показатели не всегда отражают восприятие человека, а семантическая уместность остается трудной поддающейся количественной оценке. Мы представляем перцептурно обоснованную и семантику, которая сочетает стандартизованное сопоставление моделей, метрическую проверку в интересах человека и тонкую семантичную оценку. Сначала мы запишем список из 13 объективных показателей, охватывающих различные аспекты, включая распределительное сходство, геометрию, кинематическое качество, интермодальную синхронизацию и семантическое соответствие. Для категории семантического соответствия мы предлагаем новый метр, Semantic Gesture Cохранение (SGP), который измеряет то, как далеко семантические жесты в земле сохранены в генерируемых жестах. Для этого мы добавляем аннотации к набору данных BEAT2 с использованием мультимодального LLM. Затем мы проводим исследование восприятия, где 101 p