Компьютерная наука > Машинное обучение [представлено 10 мая 2026 (v1), последний пересмотренный вариант 7 сентября 2026 года (эта версия, v4)] Название: The Transformer как полярный государственный оценочный вид PDF HTML (экспериментальный) резюме: Мы продемонстрировали, что ключевые компоненты трансформатора - внимание, остаточные соединения и нормализация - естественным образом возникают из одной проблемы оценки геометрического состояния. Моделирование латентного состояния в полярных координатах естественным образом отделяет радиальную и гиперсферную динамику, обеспечивая процедуру фильтрации с точностью взвешивания, при которой нормализация обеспечивает соблюдение гиперсферных ограничений, агрегирование внимания позволяет получить данные о направлении движения, а остаточное соединение приводит к постепенному обновлению состояния. Стандартный трансформаторный блок с вращающимися позиционными кодами восстанавливается путем отказа от геометрических корректирующих условий производящегося в результате оценки состояния, показав, что его архитектура вытекает из основной проблемы оценки, а не из независимых вариантов проектирования. Предлагаемый текст {полярный трансформатор} сохраняет эти геометрические корректировки. История представления: Peter Racioppo [по электронной почте] [v1] Sun, 10 мая 2026 08:14 UTC (1 086 KB) [ v2] Thu, 2 Jul 2026 02:10:59 UTS (1 134 KB)] [v3] Sunt, 2 Aug 2026 03:28:25 UTK (1452 КБ) [v4] Mon, 7 Sep 2026 23:16:23 UTV (1 460 KB). Библиографические и…
Трансформатор как полярная оценка государства
arXiv: 2605.11007v4 Annualection Type: заменить резюме: мы показываем, что основные компоненты трансформатора - внимание, остаточные соединения и нормализация - естественным образом возникают из одной проблемы оценки геометрического состояния. Моделирование латентного состояния в полярных координатах естественным образом отделяет радиальную и гиперсферную динамику, обеспечивая процедуру фильтрации с точностью взвешивания, при которой нормализация обеспечивает соблюдение гиперсферных ограничений, агрегирование внимания позволяет получить данные о направлении движения, а остаточное соединение приводит к постепенному обновлению состояния. Стандартный трансформаторный блок с вращающимися позиционными кодами восстанавливается путем отказа от геометрических корректирующих условий производящегося в результате оценки состояния, показав, что его архитектура вытекает из основной проблемы оценки, а не из независимых вариантов проектирования. Предлагаемый текст {полярный трансформатор} сохраняет эти геометрические корректировки.
