Ukrmeme: мультимодальное объяснимое обнаружение стойкости в украинских мемах

arXiv: 261 010.13783v 1 Annualce Type: Cross Brieft: Memes играет центральную роль в современной онлайн-коммуникации, особенно в условиях политического конфликта, когда визуальные и текстовые сигналы объединяются для передачи убедительных сообщений. Мы изучаем убедительную технику обнаружения в украинских мемах с использованием моделей языка зрения (VLM). Мы представляем Ukrmeme, набор данных из 200 органически произведенных украинских военных мемов, аннотированных для убеждающих методов, и PTM-UA - перевод на Украину подмножества контрольных параметров Propaganda 950, который сохраняет оригинальное визуальное содержание при переводе текста meme. Мы оцениваем VLM в нулевом диапазоне, приводящем к созданию изображения, текста и мультимодальных входных данных с использованием иерархических параметров F1. Наконец, мы сравниваем сетевая оценка значимости (ППС) и генерируемые моделью символические атрибуции и анализируем семантические категории доказательств, подчеркнутых каждым методом объяснения.