La IA ahora estará bien versada en el patrimonio cultural gracias al nuevo proyecto Saint George on a Bike coordinado por el Barcelona Supercomputing Center. El proyecto ha comenzado a entrenar algoritmos de aprendizaje automático en cultura, símbolos y contextos históricos con el objetivo de generar automáticamente metadatos ricos para cientos de miles de imágenes de varios repositorios del patrimonio cultural europeo.
Para permitir el acceso a colecciones de imágenes del patrimonio cultural, plataformas como Europeana requieren metadatos de alta calidad. Sin embargo, los expertos humanos de bibliotecas, archivos y museos simplemente no pueden producir descripciones detalladas de todos los recursos que resultan de los programas de digitalización masiva. Para aliviar este cuello de botella, los investigadores están buscando emplear tecnología de IA para automatizar al menos una parte del proceso de descripción.
Pero entrenar a la IA para que sea consciente de los contextos del patrimonio cultural no es tan simple como enseñarle a identificar diferentes objetos en una imagen moderna. Saint George on a Bike está ajustando los algoritmos para que "piensen" en contexto y tiempo.
«La IA que estamos desarrollando podrá determinar si una pintura muestra a San Jorge a caballo o en bicicleta», afirmó María Cristina Marinescu, coordinadora del proyecto e investigadora principal del Departamento de Aplicaciones Informáticas en Ciencia e Ingeniería (CASE) del BSC. «Esto no es tan fácil como parece porque las formas son similares. Al entrenarlo en diversos elementos del patrimonio cultural, incluida la primera aparición de los objetos representados y el período del que procede la pintura, el algoritmo de IA concluiría que una pintura de San Jorge del siglo XVI representaría lógicamente un caballo en lugar de una bicicleta».
Europeana será el principal banco de pruebas para los enriquecimientos de metadatos generados por el proyecto. Antoine Isaac, R&D Manager de la Fundación Europeana, dice: "Las herramientas de IA existentes tienden a tener un rendimiento inferior cuando se aplican a colecciones de patrimonio cultural, porque están capacitadas en documentos y materiales modernos que no se basan en el patrimonio cultural. Si Saint George on a Bike logra crear herramientas de visión artificial que reconozcan adecuadamente nuestros contextos, Europeana podrá apoyar una experiencia de navegación y descubrimiento más rica para las colecciones culturales de nuestros socios».
Descubre más
El proyecto Saint George on a Bike está organizando seminarios web del 9 al 10 de septiembre para demostrar los resultados del proyecto y el potencial para adaptar las descripciones de pinturas producidas automáticamente al período de tiempo en que fueron creadas. ¡Los investigadores en minería de datos y ciencia de datos con interés en el arte y la cultura son bienvenidos a asistir!