Риск представительства в заранее подготовленных кодерах изображений

arXiv:2609 35470v1 Annualce Type: кросс-бюллетень: Прикладные исследователи все чаще преобразуют изображения в элементы с заранее подготовленными кодерами, а затем используют их в модели прогнозирования ниже по течению. Кодёр часто рассматривается как деталь осуществления. Мы показываем, что вместо этого он может стать источником неопределенности модели. Мы называем этот риск представления неопределенности: вероятные заранее подготовленные кодеры картируют одни и те же изображения в различные объекты, и они могут давать совершенно разные выводы из выборки по сравнению с прогнозируемыми показателями. Мы сравниваем десять современных и старых замороженных кодировок по различным видам применения, включая цены на жилье, скаковые коньки, гистологию рака груди, радиографию грудной клетки, непрерывный возраст лица и болезни риса. При общем контроле размеров, разделении голов и групповой защите проверка позволяет выбрать SigLIP 2 для домов, увеличив показатель в размере 0,396 долл. США для ReSNet50 до 0,629, а также DINOv2 для лошадей, подняв от 0,029 до 0,105 долларов. Никакого закодера не бывает лучше во всех делах. Кандидат