Kits de herramientas impulsados por IA
SHIFT enriquecerá la experiencia pública de interactuar con el patrimonio cultural utilizando una serie de herramientas agrupadas dentro de conjuntos de herramientas temáticas. Estos incluyen un conjunto de herramientas visuales que transcribirán el contenido del patrimonio cultural automáticamente utilizando IA y un conjunto de herramientas auditivas que brindarán una respuesta emocional a la audiencia.
¿Qué significa esto en la práctica? Hace unos meses, el equipo de herramientas auditivas (dirigido por AUDEERING)proporcionó un ejemplo de este trabajo utilizando una herramienta Text-to-Speech (TTS). El TTS transcribió videos patrimoniales proporcionados por socios en rumano y serbio y luego los revocó automáticamente en inglés con afecto emocional, alejándose de las voces automáticas del pasado. Constantemente se están haciendo mejoras en esta herramienta, pero puede ver un catador de la versión piloto en el canal de YouTube SHIFT.
Reconociendo la necesidad de inclusión y accesibilidad del sector, SHIFT se centra en generar descripciones textuales específicas para obras de arte, garantizando que diversos públicos —como personas ciegas y con visión parcial— puedan interactuar con activos culturales. Para lograr esto, el proyecto ha desarrollado una herramienta que permite a los curadores cargar imágenes y metadatos, aprovechando los modelos de AI y Vision Language para crear narrativas específicas para el usuario.
Un conjunto de herramientas hápticas desarrollado por FORTH, el mayor centro de investigación de Grecia, permitirá a los usuarios interactuar utilizando también su sentido del tacto para explorar objetos 3D y 2D en museos y otros entornos culturales. Un guante háptico permitirá la retroalimentación sensorial en este nuevo enfoque. En este video puedes ver una versión temprana de la herramienta háptica.
Los resultados del proyecto también incluirán un conjunto de herramientas de derechos de propiedad intelectual diseñado para proteger el contenido nativo mediante la adopción de los derechos de autor internacionales y la protección digital de los derechos de autor derivados. Esto se compartirá en los próximos meses.
El papel de la Iniciativa Europeana
Europeana ha desempeñado un papel fundamental en el apoyo a la misión de SHIFT a través de sus herramientas y recursos. Por ejemplo, mediante la integración de la API de Europeana, el proyecto automatiza la recuperación de metadatos enriquecidos para obras de arte —como información y descripciones del creador— que enriquecen la información contextual para los modelos de IA. Esta integración no solo acelera la recopilación de metadatos, sino que también mejora la capacidad de la herramienta para ofrecer descripciones precisas.
Esta colaboración ejemplifica cómo los recursos de la Iniciativa Europeana pueden impulsar la innovación y la accesibilidad en el patrimonio cultural y pone de relieve el potencial transformador de su API para fomentar la inclusión. Juntos, estamos dando forma a un futuro donde los tesoros culturales son accesibles para todos.
Próximamente
Para garantizar que ofrecemos las herramientas adecuadas, el equipo SHIFT ha lanzado un amplio conjunto de talleres, grupos focales y casos de uso para evaluar los requisitos de los usuarios y probar soluciones en los sitios asociados en los museos y bibliotecas de Alemania, Grecia, Hungría, Rumania y Serbia. El proyecto se centra ahora en integrar esta retroalimentación para desarrollar soluciones tecnológicas más inclusivas y accesibles para todos los usuarios de museos y bibliotecas. Pronto los primeros resultados de este trabajo se probarán en una serie de exposiciones organizadas en los sitios asociados.
Mientras tanto, se está ultimando un informe político elaborado por SHIFT y los otros cinco proyectos (MuseIT, PERCEIVE, MEMORISE, PREMIERE y MEMENTOES)que conforman el clúster financiado por la UE para tecnologías avanzadas en el patrimonio cultural, que se publicará en las próximas semanas.
Involúcrate
Visite el sitio web del proyecto SHIFT para obtener más información, suscríbase a nuestro boletín informativo y descubra oportunidades para contribuir al desarrollo de nuestras herramientas y kits de herramientas suscribiéndose. ¡Damos la bienvenida a sus opiniones y comentarios sobre SHIFT a medida que aparecen los resultados en nuestro sitio web!
Esta publicación se editó el 9 de diciembre de 2024 para añadir detalles sobre una herramienta que permite a los comisarios cargar imágenes y metadatos, aprovechando los modelos de IA y Visión Language para elaborar narrativas específicas para el usuario; y la sección sobre la Iniciativa Europeana.
