KI-gestützte Toolkits
SHIFT wird die öffentliche Erfahrung der Interaktion mit dem kulturellen Erbe durch eine Reihe von Tools bereichern, die in thematischen Toolkits zusammengefasst sind. Dazu gehören ein visuelles Toolkit, das Inhalte des Kulturerbes automatisch mithilfe von KI transkribiert, und ein auditives Toolkit, das eine emotionale Reaktion auf das Publikum liefert.
Was bedeutet das in der Praxis? Vor einigen Monaten hat das Team des auditorischen Toolkits (unter der Leitung von AUDEERING)ein Beispiel für diese Arbeit mit einem Text-to-Speech-Tool (TTS) geliefert. Die TTS transkribierte Heritage-Videos, die von Partnern auf Rumänisch und Serbisch zur Verfügung gestellt wurden, und sprach sie dann automatisch in Englisch mit emotionaler Affekt, weg von den gestelzten automatischen Stimmen der Vergangenheit. Es werden ständig Verbesserungen an diesem Tool vorgenommen, aber Sie können einen Vorgeschmack auf die Pilotversion auf dem SHIFT YouTube-Kanal sehen.
In Anerkennung des Bedarfs des Sektors an Inklusivität und Zugänglichkeit konzentriert sich SHIFT auf die Erstellung gezielter Textbeschreibungen für Kunstwerke, um sicherzustellen, dass ein vielfältiges Publikum – wie blinde und sehbehinderte Personen – sich mit Kulturgütern beschäftigen kann. Um dies zu erreichen, hat das Projekt ein Tool entwickelt, das es Kuratoren ermöglicht, Bilder und Metadaten hochzuladen und KI- und Vision Language-Modelle zu nutzen, um benutzerspezifische Erzählungen zu erstellen.
Ein Haptik-Toolkit, das von FORTH, dem größten Forschungszentrum Griechenlands, entwickelt wurde, wird es den Nutzern ermöglichen, auch mit ihrem Tastsinn zu interagieren, um 3D- und 2D-Objekte in Museen und anderen kulturellen Umgebungen zu erkunden. Ein haptischer Handschuh wird in diesem neuartigen Ansatz sensorisches Feedback ermöglichen. In diesem Video können Sie sich eine frühe Version des Haptik-Tools ansehen.
Die Projektergebnisse werden auch ein Toolkit für Rechte des geistigen Eigentums enthalten, mit dem native Inhalte geschützt werden sollen, indem internationale Urheberrechte und der digitale Schutz abgeleiteter Urheberrechte übernommen werden. Dies wird in den kommenden Monaten geteilt.
Die Rolle der Europeana-Initiative
Europeana hat mit ihren Instrumenten und Ressourcen eine zentrale Rolle bei der Unterstützung der Mission von SHIFT gespielt. Beispielsweise automatisiert das Projekt durch die Integration der Europeana-API den Abruf reichhaltiger Metadaten für Kunstwerke – wie z. B. Schöpferinformationen und Beschreibungen –, was den kontextbezogenen Input für die KI-Modelle bereichert. Diese Integration beschleunigt nicht nur die Erfassung von Metadaten, sondern verbessert auch die Fähigkeit des Tools, genaue Beschreibungen zu liefern.
Diese Zusammenarbeit veranschaulicht, wie die Ressourcen der Europeana-Initiative Innovation und Zugänglichkeit im kulturellen Erbe fördern können, und hebt das transformative Potenzial ihrer API zur Förderung der Inklusivität hervor. Gemeinsam gestalten wir eine Zukunft, in der kulturelle Schätze für alle zugänglich sind.
Kommt als nächstes
Um sicherzustellen, dass wir die richtigen Tools liefern, hat das Team SHIFT eine umfangreiche Reihe von Workshops, Fokusgruppen und Anwendungsfällen ins Leben gerufen, um Benutzeranforderungen zu bewerten und Lösungen an Partnerstandorten in den Museen und Bibliotheken Deutschlands, Griechenlands, Ungarns, Rumäniens und Serbiens zu testen. Das Projekt konzentriert sich nun darauf, dieses Feedback zu integrieren, um integrativere und zugänglichere Technologielösungen für alle Nutzer von Museen und Bibliotheken zu entwickeln. Bald werden die ersten Ergebnisse dieser Arbeit in einer Reihe von Ausstellungen an den Partnerstandorten erprobt.
Unterdessen wird derzeit ein von SHIFT und den anderen fünf Projekten (MuseIT, PERCEIVE, MEMORISE, PREMIERE und MEMENTOES), die das von der EU finanzierte Cluster für fortgeschrittene Technologien im Bereich des kulturellen Erbes bilden, erstellter Policy Brief fertiggestellt und in den kommenden Wochen veröffentlicht.
Beteiligen Sie sich
Besuchen Sie die Website des SHIFT-Projekts, um mehr zu erfahren, sich für unseren Newsletter anzumelden und Möglichkeiten zu entdecken, durch Abonnieren zur Entwicklung unserer Tools und Toolkits beizutragen. Wir freuen uns über Ihre Meinung und Ihr Feedback zu SHIFT, wenn die Ergebnisse auf unserer Website erscheinen!
Dieser Beitrag wurde am 9. Dezember 2024 bearbeitet, um Einzelheiten zu einem Tool hinzuzufügen, mit dem Kuratoren Bilder und Metadaten hochladen und KI- und Vision Language-Modelle nutzen können, um nutzerspezifische Narrative zu erstellen. und der Abschnitt über die Europeana-Initiative.