#Speculative

20 статей
arXiv NLP
arXiv NLP

T2D: Проектирование и адаптация модели для эффективного спекуляции

arXiv:2610.34133v1 Annuate Type: New Express: Speculative decoding значительно ускоряет авторегрессивное формирование текстов в Больших Лингвистических моделях (LMM), но его эффективность во многом за...

arXiv NLP
3
Читать
arXiv Machine Learning
arXiv Machine Learning

Спектер: Быстрая подача МОС через Quantization-Impled Multi-Step Speculative Разгрузка

arXiv:2511.14102v3 Тип уведомления: заменить резюме: модели смеси экспертов (МОС) часто превышают память одного акселератора. Загрузка экспертов для размещения памяти создает серьёзный узкий пункт PCI...

arXiv Machine Learning
5
Читать
arXiv NLP
arXiv NLP

Понимание целевой вероятности повторного использования в спекулятивном декодировании

arXiv:2610.29210v1 Annuate Type: New Habstractive: Speculative decoding использует целевую модель для проверки дерева проектов символов параллельно. Мы изучим, поможет ли следующее дерево выбрать след...

arXiv NLP
5
Читать
arXiv NLP
arXiv NLP

Целевая регенерация сглаживает выгоды от проектных учебных целей в процессе спекуляции

arXiv: 261 020.29013v1 Annuate Type: New Habstractive: Speculative Decoding ускоряет большие языковые модели путем параллельной проверки разработанных символов. Новые цели в области подготовки кадров ...

arXiv NLP
5
Читать
arXiv Machine Learning
arXiv Machine Learning

Подготовка и заключение по вопросам диффузии - проект спекуляции

arXiv: 2610.23935v1 Annuate Type: New Humber: Speculative decoding ускоряет процесс вывода из большой языковой модели путем параллельной проверки жетонов, предложенных разработчиком. Составители диффу...

arXiv Machine Learning
3
Читать
arXiv Machine Learning
arXiv Machine Learning

SP$2 долл. СШАec: Адаптация самоспекулятивного декодирования моделей зрения и языка

arXiv: 261.10.18735v2 Annuate Type: заменить резюме: Speculative Decoding (SD) продемонстрировала свою эффективность в ускорении вывода о большой языковой модели, но для моделей зрения-лангуажа (VLM) ...

arXiv Machine Learning
3
Читать
arXiv NLP
arXiv NLP

FOLD: дальняя память без позиций с местным порядком для длинноконтактного декодирования

arXiv: 261 020.20392v 1 Annuales Type: New Humber: Speculative decoding ускоряет образование LLM посредством легкой разработки и параллельной проверки. Это особенно многообещающе для длительных вводим...

arXiv NLP
3
Читать
arXiv NLP
arXiv NLP

Контекстовая корректировка параллельных проектов для спекулятивного декодирования

arXiv: 261.10.12570v1 Annuate Type: New Humber: Speculative Decoding ускоряет процесс вывода большой языковой модели с помощью легкого составителя для предложения нескольких символов, которые впоследс...

arXiv NLP
2
Читать
arXiv Statistics
arXiv Statistics

Подготовка параллельных проектных моделей путем непосредственного сведения к минимуму ожидаемого декодирования раундов

arXiv: 2610.10.10411v1 Annuate Type: cross Brief: Speculative decoding ускоряет вывод о большой языковой модели с использованием недорогого проекта модели для предложения символов, которые полноразмер...

arXiv Statistics
2
Читать
arXiv NLP
arXiv NLP

Декодирование нуклеуса: проверка достоверности-потенциала вне точного распределения

arXiv: 261 07822v1 Annuate Type: New Humber: Speculative decoding ускоряет авторегрессивное поколение с помощью легкого проекта модели для предложения нескольких символов, которые проверяются целевой ...

arXiv NLP
2
Читать
arXiv Machine Learning
arXiv Machine Learning

SchemaFill: Эффективный набор инструментов LLM с помощью Slot-Parallel Speculative Decoding

arXiv: 2610,07086v 1 Annualce Type: новый резюме: агенты LLM взаимодействуют с внешними системами, генерируя структурированные звонки. С учетом запроса пользователя, контекста разговора и каталога схе...

arXiv Machine Learning
4
Читать
arXiv NLP
arXiv NLP

JetSpec: Преодоление потолка спекулятивного декодирования параллельной разработки деревьев

arXiv:2606.18394v5 Annualce Type: заменить резюме: Speculative decoding (SD) ускоряет авторегрессивные Большие Лингвистические модели (LMM) путем составления нескольких знаков и их проверки параллельн...

arXiv NLP
4
Читать
arXiv NLP
arXiv NLP

Подделка: итеративный проект редактирования для спекулятивного декодирования

arXiv: 26009.38510v1 Annuate Type: New Humber: Speculative decoding ускоряет авторегрессивные LMS, имея легкого составителя, предлагающего символы, которые целевая модель проверяется параллельно. Сост...

arXiv NLP
4
Читать
arXiv NLP
arXiv NLP

" Триспарк: калиброванный, адаптированный к нагрузке проект деревьев для полуавторезивной спекуляции

arXiv: 2609.22098v1 Annuate Type: New Humber: Speculative decoding ускоряет языковой вывод, позволяя дешевому составителю предложить символы, которые целевая модель проверяется параллельно. Недавние с...

arXiv NLP
1
Читать
arXiv Machine Learning
arXiv Machine Learning

Проект совместной онлайновой подготовки для спекулятивного декодирования в рамках крупногабаритного, длинноконтекстового RL после обучения

arXiv: 26009,071008v1 Annuate Type: New Humber: Speculative decoding ускоряет процесс внедрения, который доминирует в стоимости дополнительного обучения (RL) после прохождения подготовки. Онлайновая с...

arXiv Machine Learning
1
Читать
arXiv NLP
arXiv NLP

Повторное рассмотрение вопроса о проверке потерь в спекулятивном декодировании: механизмы, компромиссы и режимы отказа

arXiv:2607.26627v2 Annuales Type: заменить резюме: Speculative Decoding (SD) ускоряет вывод о большой языковой модели, позволяя легкому проекту модели предлагать символы, которые затем проверяются пар...

arXiv NLP
1
Читать
arXiv AI
arXiv AI

Видение не наводняется: разработка единого блока для беспомощного спекулятивного декодирования в модели зрения-лингвации

arXiv: 26009,00355v1 Annuate Type: New Humber: Speculative decoding ускоряет процесс формирования, не меняя при этом свой результат, но на модели языка зрения (VLM) он был пойман в цикле самопобеждени...

arXiv AI
3
Читать
arXiv NLP
arXiv NLP

Компьютерный токен отрицания для улучшения спекулятивного декодирования

arXiv: 2512.23765v2 Annualce Type: заменить резюме: Speculative decoding (SD) ускоряет вывод большой языковой модели (LLM), используя легкий проект модели для предложения символов и более мощную целев...

arXiv NLP
3
Читать
arXiv NLP
arXiv NLP

Подготовка по вопросам спекулятивного декодирования программы проверки

arXiv:2608.301335v1 Annuate Type: New Express: Speculative decoding ускоряет вывод о большой языковой модели с использованием проекта модели для создания потенциальных символов, которые проверяются це...

arXiv NLP
2
Читать