I spy with my little eye a minimum cost multicut investigation of dataset frames


Prasse, Katharina ; Bravo, Isaac ; Walter, Stefanie ; Keuper, Margret



DOI: https://doi.org/10.1109/WACV61041.2025.00214
URL: https://ieeexplore.ieee.org/document/10943464
Weitere URL: https://openaccess.thecvf.com/content/WACV2025/pap...
Dokumenttyp: Konferenzveröffentlichung
Erscheinungsjahr: 2025
Buchtitel: Proceedings of the Winter Conference on Applications of Computer Vision (WACV)
Seitenbereich: 2134-2143
Veranstaltungstitel: WACV 2025, IEEE/CVF Winter Conference on Applications of Computer Vision (WACV)
Veranstaltungsort: Tucson, AZ
Veranstaltungsdatum: 28.02.-04.03.2025
Ort der Veröffentlichung: Online
Verlag: Computer Vision Foundation
Sprache der Veröffentlichung: Englisch
Einrichtung: Fakultät für Wirtschaftsinformatik und Wirtschaftsmathematik > Machine Learning (Keuper 2024-)
Fachgebiet: 004 Informatik
Abstract: Visual framing analysis is a key method in social sciences for determining common themes and concepts in a given discourse. To reduce manual effort, image clustering can significantly speed up the annotation process. In this work, we phrase the clustering task as a Minimum Cost Multicut Problem [MP]. Solutions to the MP have been shown to provide clusterings that maximize the posterior probability, solely from provided local, pairwise probabilities of two images belonging to the same cluster. We discuss the efficacy of numerous embedding spaces to detect visual frames and show its superiority over other clustering methods. To this end, we employ the climate change dataset ClimateTV which contains images commonly used for visual frame analysis. For broad visual frames, DINOv2 is a suitable embedding space, while ConvNeXt V2 returns a larger number of clusters which contain fine-grain differences, i.e. speech and protest. Our insights into embedding space differences in combination with the optimal clustering - by definition - advances automated visual frame detection. Our code can be found at https://github. com/KathPra/MP4VisualFrameDetection.




Dieser Eintrag ist Teil der Universitätsbibliographie.




Metadaten-Export


Zitation


+ Suche Autoren in

+ Aufruf-Statistik

Aufrufe im letzten Jahr

Detaillierte Angaben



Sie haben einen Fehler gefunden? Teilen Sie uns Ihren Korrekturwunsch bitte hier mit: E-Mail


Actions (login required)

Eintrag anzeigen Eintrag anzeigen