Разработка модели языка речи для баскского

arXiv: 261 030,369611v 1 Annuature Type: cross Brieft: Хотя недавнее развитие МЛМ открыло путь для мультимодального взаимодействия, языки меньшинств сталкиваются с трудностями при сохранении темпов. Эта работа представляет собой первую модель открытого языка для баскского языка, предназначенную для низкоширотного и конечных разговоров. Основываясь на архитектуре LLAMA-Omni, система интегрирует модель Латкса в качестве своей опоры и переводит свои баскские способности в режим разговора путем доработки нескольких модулей. Для решения проблемы дефицита данных на баскский язык был переведен английский Голос-помощник 400K corpus, и аудио было синтезировано с использованием Bask TTS. Результаты оценки подтверждают жизнеспособность системы, достигая 3,86/5 в качестве контента, 9,94% WER для устной информации и 3.07 UTMOS - качества звука. Эта работа свидетельствует о том, что передовые системы устного взаимодействия могут быть разработаны с использованием модульных архитектур и синтетических данных даже на низкоресурсных языках.