A IA será agora bem versada em património cultural graças ao novo projeto Saint George on a Bike coordenado pelo Centro de Supercomputação de Barcelona. O projeto começou a treinar algoritmos de aprendizagem automática em cultura, símbolos e contextos históricos com o objetivo de gerar automaticamente metadados ricos para centenas de milhares de imagens de vários repositórios do património cultural europeu.
Para permitir o acesso a coleções de imagens do património cultural, plataformas como a Europeana exigem metadados de elevada qualidade. No entanto, especialistas humanos de bibliotecas, arquivos e museus simplesmente não conseguem produzir descrições detalhadas para todos os recursos que resultam de programas de digitalização maciça. Para aliviar este estrangulamento, os investigadores estão a procurar utilizar a tecnologia de IA para automatizar pelo menos uma parte do processo de descrição.
Mas treinar a IA para estar ciente dos contextos do património cultural não é tão simples como ensiná-la a identificar diferentes objetos numa imagem moderna. Saint George on a Bike está a afinar os algoritmos para que eles "pensem" no contexto e no tempo.
«A IA que estamos a desenvolver será capaz de dizer se uma pintura mostra São Jorge num cavalo ou numa bicicleta», afirmou Maria Cristina Marinescu, coordenadora do projeto e investigadora sénior do Departamento de Aplicações Informáticas em Ciência e Engenharia (CASE) do BSC. «Isto não é tão fácil como parece porque as formas são semelhantes. Ao treiná-lo em vários elementos do património cultural, incluindo a primeira aparição dos objetos retratados e o período a partir do qual a pintura é feita, o algoritmo da IA concluiria que uma pintura do século XVI de São Jorge retrataria logicamente um cavalo em vez de uma bicicleta.»
A Europeana servirá de principal banco de ensaios para os enriquecimentos de metadados gerados pelo projeto. Antoine Isaac, R&D Manager da Europeana Foundation, afirma: "As ferramentas de IA existentes tendem a ter um desempenho inferior quando aplicadas a coleções de património cultural, porque são treinadas em documentos e materiais modernos que não se baseiam no património cultural. Se Saint George on a Bike conseguir criar ferramentas de visão computacional que reconheçam adequadamente os nossos contextos, a Europeana poderá apoiar uma experiência de navegação e descoberta mais rica para as coleções culturais dos nossos parceiros.»
Mais informações
O projeto Saint George on a Bike realiza webinars de 9 a 10 de setembro para demonstrar os resultados do projeto e o potencial para adaptar automaticamente as descrições de pinturas produzidas ao período de tempo em que foram criadas. Investigadores em mineração de dados e ciência de dados com interesse em arte e cultura são bem-vindos!