LoopSpec: Самосохранённое самоисправление для прозрачных трансформаторов

Компьютерные науки > Машинное обучение [представлено 15 сентября 2026 года] Название: LoopSpec: Подсоединенный само-спекулятивный декодирование для просмотра PDF HTML (экспериментальное) резюме: Лупеды трансформаторы достигают высоких показателей с компактными размерами параметров, неоднократно применяя общую стопку Трансформеров на глубинах. Вместе с тем они характеризуются более высокой степенью запоздалости декодирования по сравнению со стандартными моделями Трансформера сопоставимого размера параметров, поскольку общие веса доступны на каждой периодической глубине. Для повышения эффективности декодирования самоспекулятивная дешифровка особенно хорошо подходит для Трансформеров Loped, поскольку их промежуточные периодические состояния могут непосредственно представлять проекты прогнозов без вспомогательного проекта модели. Поэтому мы предлагаем LoopSpec, беспрофессиональную систему самоспекуляции, разработанную для Трансформеров. LoopSpec извлекает проекты знаков из ранних периодических государств и действует в режиме трубопровода, перекрывая проект будущих символов с целевой проверкой текущего символа. Для повышения точности проектов без чрезмерного расчета накладных расходов мы вносим избирательное второе предложение из более глубокой периодической глубины, обеспечивая при этом беспотерянное декодирование как в рамках жадных режимов, так и режима отбора проб. Кроме того, мы вычисляем оптимальную глубину предложения в закрытом виде и показываем результаты измерений,…