Участие: исследовательская оценка адаптации моделей большого языка для государства-пользователя

arXiv: 261 020.23625v1 Тип уведомления: перекрестное резюме: Разведывательный аппарат, с помощью которого можно получить информацию о присутствии - это способность разведывательного слоя системы АИ соответствующим образом адаптироваться к функциональному состоянию обслуживаемого им лица (в данном случае готовность, поток и стабильность) при сохранении качества задач и безопасности. Мы введём FreectBench, инструмент для измерения. "FreeBench" оценивает, как интеллектуальный слой использует поставляемое состояние, а не то, каким образом это состояние воспринимается, и разбивает его способность на измеримые свойства. Двое тестированы здесь. Чувствительность: принимает ли модель состояние и дает ли она лучший ответ, чем отсутствие сигнала? Специфичность: зависит ли какое-либо улучшение от правильного состояния, а не от сверхструктурированного контекста? Третья - адаптация в различных штатах - является требуемой конечной точкой, не измеряемой при этом выпуске. В пятистороннем когнитивном проекте ответы на оба вопроса, в сравнении с исходным уровнем каждой модели и равноструктурным несоответствием со штатом, были оценены путем правильного сопоставления человеческих пар. В. Экономия