SQLMorph: Запрос о перемешивании и чётко-зернистые параметры для оценки от текстов до SQl

arXiv:2609.08950v1 Тип уведомления: перекрестное резюме: системы " текст-SQL &qt; переводят запросы на естественные языки в режим SQL, который может быть реализован, обеспечивая доступ к структурированным данным. Несмотря на последние достижения, обусловленные крупными языковыми моделями (МЛМ), оценка по-прежнему является одним из основных узких мест: государственные контрольные показатели не отражают сложность схемы предприятий, в то время как разработка частных наборов оценок сопряжена с большими затратами и не детерминизмом, что затрудняет воспроизведение результатов оценки. Для решения этой проблемы мы представляем SQLMorph, рамочную основу для оценки текстовых сообщений в СМКЛ с помощью мутации запросов. SQLMorph предлагает два метода для автоматического создания и расширения наборов оценок: Communication Query Exploduction (JQE), которые систематически повышают структурную сложность за счет действительных добавлений к слиянию, и TTQA Awsmentation (ТQA), что порождает контролируемые естественные языковые нарушения в целях оценки надежности лингвистических изменений. JQE и TQA создают целевые блоки для борьбы с конкретными компонентами системы. Когда