Компьютерная наука > Расчет и язык [представлен 6 августа 2026 (v1), последний раз пересматривался 14 сентября 2026 года (эта версия, v2)) Название: MameLoshnLM: Yidish Language Model and Assessment PDF HTML (экспериментальный) резюме: Мы представляем MaMELOS 8B-параметрическую модель языка, разработанную специально для Иддиша. Несмотря на богатую текстовую традицию Иддиша, его ограниченное цифровое присутствие и нехватка надежных ресурсов для оценки сдерживали прогресс в моделировании ииддов. Существующие многоязычные корпорации и контрольные показатели зачастую являются плохими поверхностями языка, содержащими значительное количество шумных, машинопереводовых и неправильно классифицированных текстов. Мы устраняем эти пробелы путем введения Oytser, высококачественного идишского предподготовительного корпуса, который сочетает современные веб-родовые источники с литературными материалами, а Kashes — многоцелевого контрольного показателя, охватывающего письменный перевод, лингвистический анализ, извлечение информации и языковое понимание. Используя эти ресурсы, мы продолжаем предварительную подготовку Ламы 3.1 8B для получения MameLosnLM. В рамках задач, поставленных в контрольном показателе, MameLoshnLM опережает открытые исходные уровни аналогичного масштаба. Проведенный нами анализ показывает, что эти достижения являются не только количественными: по сравнению с многоязыковыми моделями общего назначения MameLoshnLM лучше отражает языковые и морфологические модели,…
MameLoshnLM: Иддишская модель языка и контрольный параметр оценки
arXiv:2608.05850v2 Annuales Type: заменить резюме: Мы представляем MameLoshnLM, первую модель 8B-параметрического языка открытого источника, разработанную специально для Иддиша. Несмотря на богатую текстовую традицию Иддиша, его ограниченное цифровое присутствие и нехватка надежных ресурсов для оценки сдерживали прогресс в моделировании ииддов. Существующие многоязычные корпорации и контрольные показатели зачастую являются плохими поверхностями языка, содержащими значительное количество шумных, машинопереводовых и неправильно классифицированных текстов. Мы устраняем эти пробелы путем введения Oytser, высококачественного идишского предподготовительного корпуса, который сочетает современные веб-родовые источники с литературными материалами, а Kashes — многоцелевого контрольного показателя, охватывающего письменный перевод, лингвистический анализ, извлечение информации и языковое понимание. Используя эти ресурсы, мы продолжаем предварительную подготовку Ламы 3.1 8B для получения MameLosnLM. В рамках задач, поставленных в контрольном показателе, MameLoshnLM опережает открытые исходные уровни аналогичного масштаба. Наши анализы показывают, что эта га