Kunstig intelligens vil nu være velbevandret i kulturarven takket være det nye Saint George on a Bike-projekt, der koordineres af Barcelona Supercomputing Center. Projektet er begyndt at træne maskinlæringsalgoritmer i kultur, symboler og historiske sammenhænge med det formål automatisk at generere rige metadata til hundredtusindvis af billeder fra forskellige europæiske kulturarvsregistre.
For at give adgang til samlinger af kulturarvsbilleder kræver platforme som Europeana metadata af høj kvalitet. Men menneskelige eksperter fra biblioteker, arkiver og museer kan simpelthen ikke producere finkornede beskrivelser for alle de ressourcer, der følger af massive digitaliseringsprogrammer. For at afhjælpe denne flaskehals ser forskerne på at anvende AI-teknologi til at automatisere i det mindste en del af beskrivelsesprocessen.
Men at træne kunstig intelligens i at være opmærksom på kulturarvssammenhænge er ikke så simpelt som at lære den at identificere forskellige objekter i et moderne billede. Saint George on a Bike finjusterer algoritmerne, så de "tænker" i kontekst og tid.
"Den AI, vi udvikler, vil være i stand til at fortælle, om et maleri viser Saint George på en hest eller en cykel", sagde Maria Cristina Marinescu, koordinator for projektet og seniorforsker ved Computer Applications in Science and Engineering Department (CASE) i BSC. "Det er ikke så let, som det lyder, fordi formerne ligner hinanden. Ved at træne det i forskellige kulturarvselementer, herunder de afbildede genstandes første udseende og den periode, maleriet er fra, ville AI-algoritmen konkludere, at et maleri fra det 16. århundrede af Saint George logisk set ville skildre en hest snarere end en cykel."
Europeana vil fungere som det vigtigste testgrundlag for de metadataberigelser, der genereres af projektet. Antoine Isaac, R&D Manager hos Europeana Foundation, siger: "Eksisterende AI-værktøjer har en tendens til at underpræstere, når de anvendes på kulturarvssamlinger, fordi de er uddannet i moderne dokumenter og materiale, der ikke er baseret på kulturarv. Hvis Saint George on a Bike formår at skabe computer vision værktøjer, der korrekt genkender vores sammenhænge, Europeana vil være i stand til at støtte en rigere browsing og opdagelse oplevelse for de kulturelle samlinger af vores partnere."
Læs mere
Saint George on a Bike-projektet afholder webinarer den 9.-10. september for at demonstrere projektets resultater og potentiale til at tilpasse automatisk producerede beskrivelser af malerier til den tidsperiode, hvor de blev skabt. Forskere inden for data mining og data science med interesse for kunst og kultur er velkomne til at deltage!