Син-Омни: Структурированная специализация и прогрессивное сотрудничество в области комплексного оборудования
arXiv:2610.12256v1 Вид уведомления: новое резюме: Обмодальные встроенные элементы, естественно, включают как общие представления, так и специфические особенности различных видов информации. Вместе с тем существующие методы интермодальной интеграции часто основываются на одном общем пространстве параметров по сравнению с данными о смешанном режиме, что ограничивает структурное разделение между универсальными и специфическими формами представления. Для решения этой проблемы мы предлагаем создать единую основу для структурированной всемерной адаптации, предусматривающей специализацию по видам транспорта и контролируемое сотрудничество в различных видах транспорта. В частности, мы введем Orthogonal Modality- Expert LORA (OME-Lora), которая размещает адаптацию в общий путь ЛоРА для универсальной семантики и модели-эксперта ЛОРА для специализации по технике. Кроме того, прогрессивное синергетическое взаимодействие (ПСР) позволяет экспертам сначала устанавливать конкретные процедуры, а затем постепенно взаимодействовать с другими механизмами-экспертами для обеспечения синергизма между различными видами транспорта. Оценена по 81 разнообразной задаче, охватывающей изображение, видео.
