Сотовая трасса: контрольный параметр микроскопических клеток для моделей зрения-лангуажа

arXiv: 261 030,31566v 1 Annuales Type: New Humber Brieflow: Большие языковые модели продемонстрировали выдающиеся результаты в работе над текстом первой задачи, такой как кодирование, математика и письменность. В последнее время в рамках учебных программ по моделям переключаются научные проблемы, которые часто встречаются не только в текстах, но и в высокоспециализированных областях, таких как структура белков и биологические изображения. Однако в этих сценариях их общая точность по сравнению со специализированными алгоритмами остается под вопросом. Одной из таких областей является отслеживание клеток, что требует спонтанного понимания динамики клеток. Для оценки этого мы создали новый контрольный параметр, CellTrack-Bench, в котором оценивается эффективность работы ячеек Vision - Language Models (VLM) по отношению к специализированным отслеживающим устройствам. Полный эталонный показатель основан на 15 стандартных наборах данных для отслеживания ячеек по четырем способам получения изображений и включает в себя 1 537 проблем, соответствующих 9 041 решению о подключении клеток. Мы выбрали тяжёлую подмножество, для чего требуются более активные усилия по обоснованию, идентифицируя ошибки, которые разделяются между собой.