Реклама

Сбой, нанесенный трансформацией агентов для эволюции

#Сбой #Вместе #SkillMorph #Эксперименты #SWE-Skills-Bench

arXiv: 261 010.11858v1 Вид уведомления: перекрестное резюме: навыки агентов обеспечивают повторное руководство для кодовых агентов, но неполнота или неподходящее наставление может помешать выполнению задач. В целях сокращения ручного труда по совершенствованию навыков в рамках последних подходов используются МЛМ для подготовки изменений на основе обратной связи. Вместе с тем на основе этих изменений по-прежнему возникают проблемы, связанные с явными поведенческими доказательствами. Для устранения этого пробела мы предлагаем SkillMorph — подход, основанный на развитии навыков и основанных на траектории локализации неисправностей в агентских навыки. Его основная идея заключается в том, чтобы увязать данные об исполнении с конкретным содержанием навыков до внесения изменений. В частности, SkillMorph сопоставляет данные о неудачах и успехах в абстрактных траекториях с повторяющимися прогонами и задачами, включая изменения между циклами эволюции для выявления подозрительных действий. Затем она использует эти подозрительные действия для локализации сайтов в своих навыках и подготовки соответствующих изменений. Эксперименты на SWE-Skills-Bench и Cannbot показывают, что навыки развиваются