Скамейка по творчеству дизайна: измерение творческих способностей в UI LLM

arXiv: 261 010.11539v1 Тип уведомления: перекрестное резюме: поскольку ведущие МЛМ совершенствуют оценку потенциала, их ограничения в получении творческих результатов при выполнении проектных задач по-прежнему являются недостаточно характерными. Наша работа представляет собой Коллегию по творчеству дизайна, которая оценивает разнообразие и уместность в конструкции UI. Он измеряет отличительные особенности моделей на одном и том же быстроте (оригинальность), как сильно изменяется дизайн модели между двумя стимулами для одной цели всеобщего доступа в различных областях продукции (резервный диапазон) и долей критериев принятия краткости, которые отвечают каждой конструкции (соответствующость). Оригинальная величина - 0,592 для одновременных пар конструкции, взятых из различных моделей (95% CI [0,582, 0.602]), что намного ниже 0,764 для однотипных пар с использованием модели человека (95 % CI[0751, 0,778]. Креативный диапазон составляет 0,581 в моделях (95% CI [0,567, 0,597]) против 0,902 для человеческих конструкций (95 % CI[0.884, 0,919]. Приемлемость превышает 90% для каждой модели, а наилучшая модель достигает 99,2%, что несколько выше 98%.