Seturi de instrumente alimentate cu IA
SHIFT va îmbogăți experiența publică de interacțiune cu patrimoniul cultural folosind o serie de instrumente grupate în seturi de instrumente tematice. Printre acestea se numără un set de instrumente vizuale care va transcrie automat conținutul patrimoniului cultural utilizând IA și un set de instrumente auditive care va oferi un răspuns emoțional publicului.
Ce înseamnă acest lucru în practică? Cu câteva luni în urmă, echipa responsabilă de setul de instrumente auditive (condusă de AUDEERING)a oferit un exemplu al acestei activități utilizând un instrument Text-to-Speech (TTS). TTS a transcris videoclipuri de patrimoniu furnizate de parteneri în limbile română și sârbă și apoi le-a revocat automat în limba engleză cu afect emoțional, îndepărtându-se de vocile automate ale trecutului. Îmbunătățirile sunt făcute în mod constant la acest instrument, dar puteți viziona o degustare a versiunii pilot pe canalul YouTube SHIFT.
Recunoscând nevoia sectorului de incluziune și accesibilitate, SHIFT se axează pe generarea de descrieri textuale specifice pentru operele de artă, asigurându-se că un public divers – cum ar fi persoanele nevăzătoare și cu deficiențe de vedere – poate interacționa cu bunurile culturale. Pentru a realiza acest lucru, proiectul a dezvoltat un instrument care permite curatorilor să încarce imagini și metadate, valorificând modelele AI și Vision Language pentru a crea narațiuni specifice utilizatorilor.
Un set de instrumente haptice dezvoltat de FORTH, cel mai mare centru de cercetare din Grecia, va permite utilizatorilor să interacționeze utilizându-și, de asemenea, simțul tactil pentru a explora obiecte 3D și 2D în muzee și în alte medii culturale. O mănușă tactilă va permite feedback senzorial în această abordare nouă. În acest videoclip puteți verifica o versiune timpurie a instrumentului haptic.
Rezultatele proiectului vor include, de asemenea, un set de instrumente privind drepturile de proprietate intelectuală, conceput pentru a proteja conținutul nativ prin adoptarea drepturilor de autor internaționale și a protecției digitale a drepturilor de autor derivate. Acest lucru va fi împărtășit în lunile următoare.
Rolul inițiativei Europeana
Europeana a jucat un rol esențial în sprijinirea misiunii SHIFT prin instrumentele și resursele sale. De exemplu, prin integrarea API-ului Europeana, proiectul automatizează extragerea metadatelor bogate pentru operele de artă – cum ar fi informațiile și descrierile creatorilor – ceea ce îmbogățește contribuția contextuală pentru modelele de IA. Această integrare nu numai că accelerează colectarea metadatelor, ci îmbunătățește și capacitatea instrumentului de a furniza descrieri exacte.
Această colaborare exemplifică modul în care resursele inițiativei Europeana pot alimenta inovarea și accesibilitatea patrimoniului cultural și subliniază potențialul transformator al API în promovarea incluziunii. Împreună, construim un viitor în care comorile culturale sunt accesibile tuturor.
Urmează
Pentru a ne asigura că furnizăm instrumentele potrivite, echipa SHIFT a lansat un set extins de ateliere, focus grupuri și cazuri de utilizare pentru a evalua cerințele utilizatorilor și a testa soluții în cadrul site-urilor partenere din muzeele și bibliotecile din Germania, Grecia, Ungaria, România și Serbia. Proiectul se concentrează acum pe integrarea acestui feedback pentru a dezvolta soluții tehnologice mai incluzive și mai accesibile pentru toți utilizatorii muzeelor și bibliotecilor. În curând, primele rezultate ale acestei lucrări vor fi testate într-o serie de expoziții găzduite pe site-urile partenere.
Între timp, o sinteză politică elaborată de SHIFT și de celelalte cinci proiecte (MuseIT, PERCEIVE, MEMORISE, PREMIERE, și MEMENTOES) care alcătuiesc clusterul finanțat de UE pentru tehnologii avansate în domeniul patrimoniului cultural este în curs de finalizare și va fi publicată în următoarele săptămâni.
Implică-te
Vizitați site-ul proiectului SHIFT pentru a afla mai multe, abonați-vă la buletinul nostru informativ și descoperiți oportunități de a contribui la dezvoltarea instrumentelor și seturilor noastre de instrumente prin abonare. Salutăm opiniile și feedback-ul dvs. cu privire la SHIFT, deoarece rezultatele apar pe site-ul nostru!
Acest post a fost editat la 9 decembrie 2024 pentru a adăuga detalii cu privire la un instrument care le permite curatorilor să încarce imagini și metadate, valorificând modelele de IA și de limbaj vizual pentru a elabora discursuri specifice utilizatorilor; și secțiunea privind inițiativa Europeana.