Реклама

Отслеживание морфологии, семантики и дивергенции при приобретении языка

#Отслеживание #Pythia #OLMO #Наши

arXiv: 2610.10.19041v1 Тип уведомления: новое резюме: понимание динамики приобретения языков в крупных языковых моделях (LMS) имеет решающее значение для определения того, каким образом статистическое представление превращается в структурированные лингвистические возможности. Однако в большинстве существующих исследований основное внимание уделяется полностью подготовленным моделям, оставляя траекторию развития на всех этапах промежуточной подготовки в основном недостаточно изученной. В рамках этой работы мы используем промежуточные контрольно-пропускные пункты из моделей с открытыми исходными кодами (например, Pythia and OLMO) в ходе оценки наставнической деятельности учителей для проведения систематических исследований по вопросам приобретения языков в рамках различных этапов подготовки кадров и в масштабах их масштабов. Мы сосредоточим внимание на четырех основных характеристиках: приобретение морфологической структуры, внедрение дрейфа, повторение доминирующего положения и сопутствующее воздействие. Наши результаты показывают, что модели приобретают морфологические структуры задолго до стабилизации семантических встроек. Кроме того, мы показываем, что размер комплекта учебных данных оказывает позитивное воздействие на распознавание расхождений в процессе совместного использования durin