KI wird sich dank des neuen Projekts Saint George on a Bike, das vom Barcelona Supercomputing Center koordiniert wird, nun mit dem Kulturerbe auskennen. Das Projekt hat begonnen, Algorithmen für maschinelles Lernen in Kultur, Symbolen und historischen Kontexten zu trainieren, mit dem Ziel, automatisch reichhaltige Metadaten für Hunderttausende von Bildern aus verschiedenen Repositorien des europäischen Kulturerbes zu generieren.
Um den Zugang zu Sammlungen von Bildern des Kulturerbes zu ermöglichen, benötigen Plattformen wie Europeana hochwertige Metadaten. Menschliche Experten aus Bibliotheken, Archiven und Museen können jedoch einfach keine feinkörnigen Beschreibungen für alle Ressourcen erstellen, die sich aus massiven Digitalisierungsprogrammen ergeben. Um diesen Engpass zu verringern, suchen Forscher nach KI-Technologie, um zumindest einen Teil des Beschreibungsprozesses zu automatisieren.
Aber KI zu trainieren, sich der Kontexte des kulturellen Erbes bewusst zu sein, ist nicht so einfach wie ihr beizubringen, verschiedene Objekte in einem modernen Bild zu identifizieren. Saint George on a Bike passt die Algorithmen so an, dass sie in Kontext und Zeit "denken".
„Die KI, die wir entwickeln, wird erkennen können, ob ein Gemälde den Heiligen Georg auf einem Pferd oder einem Fahrrad zeigt“, sagte Maria Cristina Marinescu, Koordinatorin des Projekts und leitende Forscherin in der Abteilung Computer Applications in Science and Engineering (CASE) von BSC. „Das ist nicht so einfach, wie es klingt, weil die Formen ähnlich sind. Durch die Ausbildung in verschiedenen Elementen des Kulturerbes, einschließlich des ersten Erscheinens der abgebildeten Objekte und der Epoche, aus der das Gemälde stammt, würde der KI-Algorithmus zu dem Schluss kommen, dass ein Gemälde des Heiligen Georg aus dem 16. Jahrhundert logischerweise ein Pferd und nicht ein Fahrrad darstellen würde.“
Europeana wird als Hauptprüfstand für die durch das Projekt generierten Metadatenanreicherungen dienen. Antoine Isaac, R&D Manager bei der Europeana Foundation, sagt: "Bestehende KI-Tools sind in der Regel leistungsschwach, wenn sie auf Sammlungen des Kulturerbes angewendet werden, da sie auf modernen Dokumenten und Materialien trainiert werden, die nicht auf dem Kulturerbe basieren. Wenn es St. George on a Bike gelingt, Computer-Vision-Tools zu entwickeln, die unsere Kontexte richtig erkennen, wird Europeana in der Lage sein, ein reichhaltigeres Surf- und Entdeckungserlebnis für die kulturellen Sammlungen unserer Partner zu unterstützen.“
Erfahren Sie mehr
Das Projekt Saint George on a Bike veranstaltet vom 9. bis 10. September Webinare, um die Projektergebnisse und das Potenzial zu demonstrieren, automatisch erstellte Beschreibungen von Gemälden an den Entstehungszeitraum anzupassen. Forscherinnen und Forscher aus den Bereichen Data Mining und Data Science mit Interesse an Kunst und Kultur sind herzlich willkommen!