AI-drevne værktøjssæt
SHIFT vil berige offentlighedens oplevelse af at interagere med kulturarven ved hjælp af en række værktøjer, der er grupperet inden for tematiske værktøjssæt. Disse omfatter en visuel værktøjskasse, der automatisk transskriberer kulturarvsindhold ved hjælp af kunstig intelligens, og en auditiv værktøjskasse, der giver publikum et følelsesmæssigt svar.
Hvad betyder det i praksis? For et par måneder siden gav teamet bag det auditive værktøjssæt (under ledelse af AUDEERING)et eksempel på dette arbejde ved hjælp af et tekst-til-tale-værktøj (TTS). TTS transskriberede kulturarvsvideoer fra partnere på rumænsk og serbisk og derefter automatisk revoiced dem på engelsk med følelsesmæssig indflydelse og bevægede sig væk fra fortidens styltede automatiske stemmer. Der foretages konstant forbedringer af dette værktøj, men du kan se en smagsprøve på pilotversionen på SHIFT YouTube-kanalen.
I erkendelse af sektorens behov for inklusivitet og tilgængelighed fokuserer SHIFT på at generere målrettede tekstbeskrivelser af kunstværker og sikre, at forskellige målgrupper — såsom blinde og svagtseende — kan engagere sig i kulturelle aktiver. For at opnå dette har projektet udviklet et værktøj, der gør det muligt for kuratorer at uploade billeder og metadata og udnytte AI- og Vision Language-modeller til at udforme brugerspecifikke fortællinger.
En haptics-værktøjskasse, der er udviklet af FORTH, Grækenlands største forskningscenter, vil give brugerne mulighed for at interagere ved også at bruge deres berøringssans til at udforske 3D- og 2D-objekter i museer og andre kulturelle miljøer. En haptisk handske vil muliggøre sensorisk feedback i denne nye tilgang. I denne video kan du se en tidlig version af haptics-værktøjet.
Projektresultaterne vil også omfatte en værktøjskasse for intellektuelle ejendomsrettigheder, der er udformet med henblik på at beskytte naturligt indhold ved at indføre international ophavsret og digital beskyttelse af afledte ophavsrettigheder. Dette vil blive delt i de kommende måneder.
Europeana-initiativets rolle
Europeana har spillet en central rolle med hensyn til at støtte SHIFT's mission gennem sine værktøjer og ressourcer. Gennem integrationen af Europeana API automatiserer projektet f.eks. hentning af omfattende metadata for kunstværker — såsom oplysninger om skabere og beskrivelser — hvilket beriger det kontekstuelle input til AI-modellerne. Denne integration fremskynder ikke blot indsamlingen af metadata, men forbedrer også værktøjets evne til at levere nøjagtige beskrivelser.
Dette samarbejde er et eksempel på, hvordan Europeanas initiativs ressourcer kan fremme innovation og tilgængelighed inden for kulturarv, og fremhæver det transformative potentiale i dets aktive lægemiddelbestanddel med hensyn til at fremme inklusivitet. Sammen skaber vi en fremtid, hvor kulturskatte er tilgængelige for alle.
Kommer næste gang
For at sikre, at vi leverer de rigtige værktøjer, har team SHIFT lanceret et omfattende sæt workshops, fokusgrupper og use cases til vurdering af brugerkrav og testløsninger på tværs af partnersteder på museer og biblioteker i Tyskland, Grækenland, Ungarn, Rumænien og Serbien. Projektet fokuserer nu på at integrere denne feedback for at udvikle mere inkluderende og tilgængelige teknologiske løsninger for alle brugere af museer og biblioteker. Snart vil de første resultater af dette arbejde blive afprøvet på en række udstillinger, der afholdes på tværs af partnerwebstederne.
I mellemtiden er et politisk oplæg udarbejdet af SHIFT og de øvrige fem projekter (MuseIT, PERCEIVE, MEMORISE, PREMIERE, og MEMENTOES), der udgør den EU-finansierede klynge for avancerede teknologier inden for kulturarv, ved at blive færdiggjort og vil blive offentliggjort i de kommende uger.
Bliv involveret
Besøg webstedet for SHIFT-projektet for at få mere at vide, tilmelde dig vores nyhedsbrev og opdage muligheder for at bidrage til udviklingen af vores værktøjer og værktøjssæt ved at abonnere. Vi glæder os over dine synspunkter og feedback på SHIFT som resultater vises på vores hjemmeside!
Dette indlæg blev redigeret den 9. december 2024 for at tilføje detaljer om et værktøj, der gør det muligt for kuratorer at uploade billeder og metadata ved at udnytte AI- og Vision Language-modeller til at udarbejde brugerspecifikke fortællinger. og afsnittet om Europeana-initiativet.