AI-drivna verktygslådor
SHIFT kommer att berika allmänhetens upplevelse av att interagera med kulturarvet med hjälp av en rad verktyg grupperade inom temaverktyg. Dessa omfattar en visuell verktygslåda som automatiskt kommer att transkribera kulturarvsinnehåll med hjälp av AI och en auditiv verktygslåda som kommer att ge ett känslomässigt svar till publiken.
Vad innebär detta i praktiken? För några månader sedan gav teamet för hörselverktyg (under ledning av AUDEERING)ett exempel på detta arbete med hjälp av ett text-till-tal-verktyg (TTS). TTS transkriberade arvsvideor som tillhandahålls av partners på rumänska och serbiska och sedan automatiskt revoiced dem på engelska med känslomässig påverkan, flyttar sig bort från de styltade automatiska rösterna från det förflutna. Förbättringar görs ständigt till det här verktyget, men du kan titta på en provsmakning av pilotversionen på SHIFT YouTube-kanalen.
SHIFT är medvetet om sektorns behov av inkludering och tillgänglighet och fokuserar på att skapa riktade textbeskrivningar för konstverk, så att olika målgrupper – såsom blinda och synskadade personer – kan engagera sig i kulturtillgångar. För att uppnå detta har projektet utvecklat ett verktyg som gör det möjligt för curatorer att ladda upp bilder och metadata, utnyttja AI- och Vision Language-modeller för att skapa användarspecifika berättelser.
En verktygslåda för haptik som utvecklats av FORTH, Greklands största forskningscentrum, kommer att göra det möjligt för användarna att interagera även med hjälp av sin känsla för beröring för att utforska 3D- och 2D-föremål i museer och andra kulturella miljöer. En haptisk handske kommer att möjliggöra sensorisk återkoppling i detta nya tillvägagångssätt. I den här videon kan du kolla in en tidig version av haptikverktyget.
Projektresultaten kommer också att omfatta en verktygslåda för immateriella rättigheter som utformats för att skydda inhemskt innehåll genom att anta internationell upphovsrätt och digitalt skydd av härledda upphovsrätter. Detta kommer att delas under de kommande månaderna.
Europeana-initiativets roll
Europeana har spelat en avgörande roll för att stödja Shifts uppdrag genom sina verktyg och resurser. Genom integrationen av Europeanas API automatiserar projektet till exempel hämtningen av rika metadata för konstverk – såsom information om och beskrivningar av upphovsmän – vilket berikar den kontextuella inmatningen för AI-modellerna. Denna integrering påskyndar inte bara insamlingen av metadata utan förbättrar också verktygets förmåga att tillhandahålla korrekta beskrivningar.
Detta samarbete är ett exempel på hur Europeanas initiativs resurser kan främja innovation och tillgänglighet i kulturarvet och belyser den omdanande potentialen hos dess API när det gäller att främja inkludering. Tillsammans skapar vi en framtid där kulturskatter är tillgängliga för alla.
Kommer upp härnäst
För att säkerställa att vi levererar rätt verktyg har team SHIFT lanserat en omfattande uppsättning workshops, fokusgrupper och användningsfall för att bedöma användarkrav och testlösningar på partnerwebbplatser i museer och bibliotek i Tyskland, Grekland, Ungern, Rumänien och Serbien. Projektet fokuserar nu på att integrera denna feedback för att utveckla mer inkluderande och tillgängliga tekniska lösningar för alla användare av museer och bibliotek. Snart kommer de första resultaten av detta arbete att testas i ett antal utställningar som är värd över partnerplatserna.
Under tiden håller ett policydokument från Shift och de övriga fem projekten (Museit, Perceive, Memories, Premeire och Mementos)som utgör det EU-finansierade klustret för avancerad teknik inom kulturarvet på att slutföras och kommer att offentliggöras under de kommande veckorna.
Engagera dig
Besök SHIFT-projektets webbplats för att ta reda på mer, prenumerera på vårt nyhetsbrev och upptäck möjligheter att bidra till utvecklingen av våra verktyg och verktygslådor genom att prenumerera. Vi välkomnar dina synpunkter och feedback på SKIFT som resultat visas på vår hemsida!
Detta inlägg redigerades den 9 december 2024 för att lägga till uppgifter om ett verktyg som gör det möjligt för kuratorer att ladda upp bilder och metadata och utnyttja AI- och Vision Language-modeller för att skapa användarspecifika berättelser. och avsnittet om Europeana-initiativet.