Wie sich ‚Big Visual Data‘ in einem digitalen Archiv explorieren und teilen lassen

Das Fotoarchiv der Empirischen Kulturwissenschaft Schweiz ist mit über 105.000 Bildern ein wichtiger Teil des kulturellen Gedächtnisses der Schweiz. Am Beispiel von drei Sammlungen entwickelt unser Forschungsprojekt ein neues „Participatory Image Archive“, das es ermöglicht, Bilder und Erzählungen von Zeitzeug:innen zu bewahren und weiterzugeben.

Das Forschungsprojekt „Partizipative Wissenspraktiken in analogen und digitalen Bildarchiven“ zielt darauf ab, eine partizipative Nutzung von Bildarchiven zu ermöglichen. [1] Am Beispiel von drei Sammlungen werden digitale Werkzeuge entwickelt, die es der Öffentlichkeit erlauben, Bilder zu kommentieren und zu kontextualisieren. Interessierte Gruppen können mittels selbst erstellter „User Collections” individuelle Geschichten erzählen und teilen, indem sie ihre Lieblingsbilder aus den Sammlungen auswählen und eigene Materialien hochladen. Die neue Plattform „Participatory Image Archives“ unterstützt die visuelle Exploration von rund 200.000 Fotografien, Fotoalben, Karten und anderen Materialien – von „Big Visual Data“. Dazu werden die Sammlungen z.B. in Form eines Rasters, einer Timeline, in Bezug zu Karten und in einem IIIF-Viewer präsentiert [2]. Wir verwenden Bildanalyseverfahren der Künstlichen Intelligenz (KI), die eine automatisierte Suche nach einfachen Bildattributen wie Farbe, Form und Lokalisierung von Bildelementen sowie die Erkennung von Texten und Objekttypen zur Extraktion von Metadaten ermöglichen.

Screenshot vom Interface I.

Das interdisziplinäre Team setzt sich aus 18 Forschenden – darunter sechs Doktorierende – zusammen, welche Expertisen aus der Kulturanthropologie, den digitalen Geisteswissenschaften und der Designforschung einbringen. Die Gesamtleitung hat Walter Leimgruber, Seminar für Kulturwissenschaft und Europäische Ethnologie, Universität Basel und Peter Fornaro, Digital Humanities Lab, Universität Basel. Das Designteam der Hochschule der Künste Bern unter der Leitung von Ulrike Felsing besteht aus Vera Chiquet, Lukas Zimmer [3] Daniel Schoeneck Stauffer [4] und Max Frischknecht [5].

Aktivitätstheorie und Workshops

In einer Reihe von Workshops und Interviews mit potentiellen Nutzenden wie Bildjournalist:innen, Historiker:innen, Archivar:innen und Datenbankspezialist:innen werden die neuen Anforderungen der digitalen und partizipativen Wissensproduktion sowie mögliche Nutzungsszenarien erarbeitet. Der methodische Ansatz des Activity-Centered Design Model von Norman und Cooper [6] unterstützt uns dabei, eine ganzheitliche Perspektive zu schaffen. Im Austausch mit den zukünftigen Nutzenden erarbeiten wir deren Motivationen für die Teilnahme an den digitalen Sammlungstätigkeiten, typische Aktivitäten/Szenarien und die dazugehörigen funktional-technischen Operationen.

Dem Projekt ging eine Studie zur digitalen Transformation der Schweizer Archive voraus, die in Zusammenarbeit mit dem Institut Innovation and Entrepreneurship der Berner Fachhochschule durchgeführt wurde. [7]

Von Interface bis Infrastruktur

Zu unseren Use Cases gehört einerseits das Projekt „Images of Swiss Commons“, geleitet von Martin Stuber und Rahel Wunderli (Universität Bern), das anhand von historischen und zeitgenössischen Fotografien den Wandel der Schweizer Allmenden und das kollektive Handeln der Bergbauern dokumentiert und erforscht. Zudem haben wir mit Forschenden des SNF-Forschungsprojekts „Mensch & Haus“ (BFH und Universität Basel) zusammengearbeitet, das die kulturelle Entwicklung historischer Bauernhäuser und ihrer Bewohner*innen in der Schweiz dokumentiert.

Screenshot vom Interface II.

Als gemeinsame Ergebnisse wird das Projekt nicht nur das graphische Interface und eine dynamische Speicherinfrastruktur, sondern auch einen Leitfaden für die zukünftige Entwicklung von partizipativen Bildarchiven in den Digital Humanities sowie sechs Dissertationen und mehrere wissenschaftliche Arbeiten in den verschiedenen Disziplinen hervorbringen. Alle technologischen Entwicklungen des Projekts, einschliesslich der Deep-Learning-Komponente für die bildbasierte Suche, basieren auf der Prämisse der Skalierbarkeit, d.h. die Methoden und Technologien sollen auf die Bestände anderer Sammlungen, insbesondere der Digital Humanities, übertragbar sein.

Fakten zum Projekt

Finanziert wird die Forschung für vier Jahre durch den Schweizerischen Nationalfonds (Sinergia), die Ernst Göhner Stiftung, Memoriav, die Stiftung für Kunst, Kultur und Geschichte und die Jacqueline Spengler Stiftung.

Zu den Partnerorganisationen gehören:

• Fotoarchiv der Empirischen Kulturwissenschaft Schweiz
• Memoriav, Verein zur Erhaltung des audiovisuellen Kulturgutes der Schweiz, Bern
• Fotostiftung Schweiz, Winterthur
• Infoclio, Bern
• Büro für Fotografiegeschichte Bern
• Ringier Fotoarchiv
• Schweizerisches Landesmuseum, Zürich
• Universität Basel Digital Humanities Lab, Departement Mathematik und Informatik und Seminar für Kulturwissenschaft und Europäische Ethnologie
• Universität Bern Digital Humanities

Referenzen

1. https://about.participatory-archives.ch
2. IIIF, das International Image Interoperability Framework (https://iiif.io), ist eine Reihe offener Standards für die hochwertige Online-Bereitstellung digitaler Objekte. Raemy, J. A., & Schneider, R. (2019). Suggested Measures for Deploying IIIF in Swiss cultural heritage institutions [White paper]. HES-SO University of Applied Sciences and Arts, Haute école de gestion de Genève. https://doi.org/10.5281/zenodo.2640415 [3] Astrom / Zimmer & Tereszkiewicz, https://azt.kleio.com
3. https://whiteroom.ch
4. https://maxfrischknecht.ch
5. Cooper, A. (2007). About face 3: The essentials of interaction design ([3rd ed.], Completely rev. & updated). Wiley Pub.
6. Finanzierung: BFH 2018, https://www.bfh.ch/de/forschung/forschungsprojekte/ 2018-595-959-589/

Linkverzeichnis

1. Felsing, U., Fornaro, P., Frischknecht, M., & Raemy, J. A. (2023, March 10). Community and Interoperability at the Core of Sustaining Image Archives. DHNB 2023 — Sustainability: Environment, Community, Data (DHNB 2023), Online. Zenodo. https://doi.org/10.5281/ zenodo.7690740
2. Felsing, U., & Frischknecht, M. (2021). Critical Map Visualizations. In C. Schranz (Ed.), Shifts in Mapping Maps as a tool of knowledge. Bielefeld: Transcript. https://www.degruyter.com/document/ doi/10.1515/9783839460412-008/html
3. Felsing, U. (2021). Reflexive Kataloge: Ein Medium der Übersetzung als Ausstellung, Film und Hypertext. Bielefeld: Transcript. https://www.transcript-verlag.de/978-3-8376-5628-2/reflexivekataloge/
4. Baur, R. & Felsing, U. (2020). Visual Coexistence: Informationdesign and Typography in the
5. Intercultural Field. Baden: Lars Müller. https://www.lars-mueller-publishers.com/visual-coexistence
6. Baur, R. & Felsing, U. (2019). On the Cultural Anchorings of Knowledge Visualization. Design
7. Issues – MIT Press Journals, 35(1), 52–66. https://doi.org/https://doi.org/10.1162/desi_a_00520