Компьютерные науки > Роботы [представлен 21 сентября 2026 (v1), последний пересмотренный вариант от 8 октября 2026 года (эта версия, v2)) Название: RobotTalk: Обучение многороботной коммуникации и координации на основе мультимодальных демонстрационных представлений PDF HTML (экспериментальный) резюме: Многостороннее сотрудничество могло бы позволить более эффективные и масштабируемые решения сложных робо-задач, однако сотрудничество при частичной консервируемости остается проблематичным. Коммуникация на естественном языке предлагает многообещающий подход к координации роботов под частичным наблюдением. Вместе с тем в рамках децентрализованных манипуляций по-прежнему недостаточно изучен вопрос о совместном изучении явно выраженных межроботских связей и выбора навыков действий на основе мультимодальных демонстраций для небольших моделей языка зрения (МВУ), предназначенных для использования при помощи устройств. Для устранения этого пробела мы внедряем RoboTalk - трубопровод для получения синтетических данных и набор данных из 7950 мультимодальных траекторий, охватывающих 53 кухни мобильной манипуляции с целью обучения малых НДЖ связи и координации. Этот набор данных включает протокол планирования с участием лидеров-следователей, телефонные звонки (понимание, манипуляции, навигация и связь), логические следы и диверсифицированную естественноязычную коммуникацию. Отлаженные модели с открытыми исходными кодами на нашем наборе данных могут достичь 77% успеха в решении новых задач,…
РобоТальк: обучение мультироботной коммуникации и координации на смешанных демонстрациях
arXiv: 2609.23997v2 Annuales Type: заменить перекрестное резюме: многороботное сотрудничество могло бы обеспечить более эффективные и масштабируемые решения сложных роботизированных задач, но сотрудничество при частичной консервируемости остается сложным. Коммуникация на естественном языке предлагает многообещающий подход к координации роботов под частичным наблюдением. Вместе с тем в рамках децентрализованных манипуляций по-прежнему недостаточно изучен вопрос о совместном изучении явно выраженных межроботских связей и выбора навыков действий на основе мультимодальных демонстраций для небольших моделей языка зрения (МВУ), предназначенных для использования при помощи устройств. Для устранения этого пробела мы внедряем RoboTalk - трубопровод для получения синтетических данных и набор данных из 7950 мультимодальных траекторий, охватывающих 53 кухни мобильной манипуляции с целью обучения малых НДЖ связи и координации. Комплект данных включает протокол планирования лидер-следитель, набор инструментов (понимание, манипуляции, навигация и связь), логические следы и разносторонний естественный язык
