L’IA connaîtra désormais bien le patrimoine culturel grâce au nouveau projet «Saint George on a Bike» coordonné par le Barcelona Supercomputing Center. Le projet a commencé à former des algorithmes d'apprentissage automatique dans la culture, les symboles et les contextes historiques dans le but de générer automatiquement des métadonnées riches pour des centaines de milliers d'images provenant de divers référentiels du patrimoine culturel européen.
Pour permettre l’accès aux collections d’images du patrimoine culturel, des plateformes telles qu’Europeana nécessitent des métadonnées de haute qualité. Cependant, les experts humains des bibliothèques, des archives et des musées ne peuvent tout simplement pas produire de descriptions précises pour toutes les ressources résultant de programmes de numérisation massifs. Pour atténuer ce goulot d'étranglement, les chercheurs envisagent d'utiliser la technologie de l'IA pour automatiser au moins une partie du processus de description.
Mais former l'IA à prendre conscience des contextes du patrimoine culturel n'est pas aussi simple que de lui apprendre à identifier différents objets dans une image moderne. Saint George on a Bike peaufine les algorithmes pour qu'ils «pensent» au contexte et au temps.
«L’IA que nous développons sera en mesure de dire si une peinture montre Saint-Georges à cheval ou à vélo», a déclaré Maria Cristina Marinescu, coordinatrice du projet et chercheuse principale au département des applications informatiques en sciences et en ingénierie (CASE) de BSC. «Ce n’est pas aussi facile qu’il n’y paraît, car les formes sont similaires. En l’entraînant à divers éléments du patrimoine culturel, y compris la première apparition des objets représentés et la période d’origine de la peinture, l’algorithme de l’IA conclurait qu’une peinture de Saint-Georges datant du XVIe siècle représenterait logiquement un cheval plutôt qu’un vélo.»
Europeana servira de banc d'essai principal pour les enrichissements de métadonnées générés par le projet. Antoine Isaac, responsable R&D à la Fondation Europeana, a déclaré: «Les outils d'IA existants ont tendance à sous-performer lorsqu'ils sont appliqués aux collections du patrimoine culturel, car ils sont formés sur des documents et du matériel modernes qui ne sont pas basés sur le patrimoine culturel. Si Saint George on a Bike parvient à créer des outils de vision par ordinateur qui reconnaissent correctement nos contextes, Europeana sera en mesure de soutenir une expérience de navigation et de découverte plus riche pour les collections culturelles de nos partenaires.»
En savoir plus
Le projet Saint George on a Bike organise des webinaires du 9 au 10 septembre pour démontrer les résultats du projet et le potentiel d'adaptation automatique des descriptions de peintures produites à la période où elles ont été créées. Les chercheurs en data mining et en data science qui s'intéressent à l'art et à la culture sont les bienvenus!