Структурированные карты для инструкций по маршруту наземной дороги с МЛМ

arXiv: 261 030.36582v 1 Annualce Type: New Human Brieflow: Для подготовки инструкций по маршруту на основе знаковых событий модели должны понимать геометрию карт и предпочтения человека. Хотя крупные языковые модели (ЛММ) демонстрируют большие способности в выполнении языковых задач, наилучший способ структурирования карт данных для этих моделей пока не установлен. В настоящем документе предлагается структурированное текстовое представление для выполнения веховых задач по отбору маршрутов навигации с использованием формата SVG для кодирования пространственных характеристик. Структурированный текст поддерживает геометрическую связь с переданными картографическими изображениями, что позволяет языковым моделям непосредственно получать доступ к пространственным и семантическим данным. Используя новый набор данных, созданный на основе описаний трассы человека и данных OpenStreetMap, мы оцениваем модели по двум задачам: выбор вех на поворотах и вокруг мест назначения. Эксперименты с использованием пяти МГБ показывают, что предлагаемые структурированные текстовые вводимые данные выполняют не только или даже лучше, чем входные данные PNG на основе изображений. Кроме того, с учетом конкретных задач более точная работа позволяет местным ПММ меньшего размера