Единые данные: трубопровод для получения универсальной смешанной инструкции
arXiv: 2610.11363v1 Вид уведомления: новое резюме: мультимодальные модели большого языка (MLMs) все чаще применяются в более широком диапазоне реальных сценариев. Однако ввиду значительных затрат на рабочую силу создание высококачественных наборов данных для мультимодальных инструкций по ММЛМ остается серьезной проблемой. Хотя некоторые методы предполагают получение данных о инструктаже, они часто сталкиваются с ограничениями в плане поддержки методов и борьбы за разработку многоплановых инструкций. Для решения этих проблем мы внедряем систему UniData, которая представляет собой универсальную программу подготовки инструкций и призвана преобразовать простые требования пользователей в многоплановые мультимодальные инструкции. В частности, UniData сначала расширяет потребности пользователей в многочисленных разнообразных событиях. Используя эти события, UniData затем интегрирует любую из крупных моделей для получения мультимодальных инструкций. И наконец, UniData повышает качество данных путем корректировки неактуальных и избыточных потоков выводов, обеспечивая корреляцию между циклами обучения. Чтобы тренировать эту трубку
