Boîtes à outils alimentées par l’IA
SHIFT enrichira l'expérience publique d'interaction avec le patrimoine culturel à l'aide d'une série d'outils regroupés dans des boîtes à outils thématiques. Il s’agit notamment d’une boîte à outils visuelle qui transcrira automatiquement le contenu du patrimoine culturel à l’aide de l’IA et d’une boîte à outils auditive qui apportera une réponse émotionnelle au public.
Qu'est-ce que cela signifie dans la pratique? Il y a quelques mois, l’équipe de la boîte à outils auditive (dirigée par AUDEERING) a fourni un exemple de ce travail à l’aide d’un outil de synthèse vocale (TTS). Le TTS a retranscrit des vidéos patrimoniales fournies par des partenaires en roumain et en serbe, puis les a automatiquement révoquées en anglais avec un effet émotionnel, s'éloignant des voix automatiques du passé. Des améliorations sont constamment apportées à cet outil, mais vous pouvez regarder un avant-goût de la version pilote sur la chaîne YouTube SHIFT.
Reconnaissant le besoin d’inclusivité et d’accessibilité du secteur, SHIFT se concentre sur la génération de descriptions textuelles ciblées pour les œuvres d’art, en veillant à ce que divers publics — tels que les aveugles et les malvoyants — puissent s’engager dans des actifs culturels. Pour ce faire, le projet a développé un outil qui permet aux conservateurs de télécharger des images et des métadonnées, en tirant parti des modèles AI et Vision Language pour élaborer des récits spécifiques à l'utilisateur.
Une boîte à outils haptics développée par FORTH, le plus grand centre de recherche de Grèce, permettra aux utilisateurs d’interagir en utilisant également leur sens du toucher pour explorer des objets 3D et 2D dans des musées et d’autres environnements culturels. Un gant haptique permettra une rétroaction sensorielle dans cette nouvelle approche. Dans cette vidéo, vous pouvez consulter une première version de l'outil haptics.
Les résultats du projet comprendront également une boîte à outils sur les droits de propriété intellectuelle conçue pour protéger le contenu natif en adoptant le droit d'auteur international et la protection numérique des droits d'auteur dérivés. Cela sera partagé dans les mois à venir.
Le rôle de l'initiative Europeana
Europeana a joué un rôle central dans le soutien à la mission de SHIFT au moyen de ses outils et de ses ressources. Par exemple, grâce à l’intégration de l’API Europeana, le projet automatise la récupération de métadonnées riches pour les œuvres d’art, telles que les informations et les descriptions des créateurs, ce qui enrichit l’entrée contextuelle des modèles d’IA. Cette intégration permet non seulement d’accélérer la collecte de métadonnées, mais aussi d’améliorer la capacité de l’outil à fournir des descriptions précises.
Cette collaboration illustre comment les ressources de l’initiative Europeana peuvent alimenter l’innovation et l’accessibilité du patrimoine culturel et met en évidence le potentiel de transformation de son API pour favoriser l’inclusivité. Ensemble, nous façonnons un avenir où les trésors culturels sont accessibles à tous.
Prochaine étape
Pour nous assurer de fournir les bons outils, l'équipe SHIFT a lancé un vaste ensemble d'ateliers, de groupes de discussion et de cas d'utilisation pour évaluer les besoins des utilisateurs et tester des solutions sur les sites partenaires des musées et bibliothèques d'Allemagne, de Grèce, de Hongrie, de Roumanie et de Serbie. Le projet est maintenant axé sur l'intégration de ces commentaires afin de développer des solutions technologiques plus inclusives et accessibles pour tous les utilisateurs des musées et des bibliothèques. Bientôt, les premiers résultats de ce travail seront testés dans un certain nombre d'expositions hébergées sur les sites partenaires.
Dans le même temps, une note d’orientation élaborée par SHIFT et les cinq autres projets (MuseIT, PERCEIVE, MEMORISE, PREMIERE, et MEMENTOES) qui constituent le pôle de technologies avancées dans le domaine du patrimoine culturel financé par l’UE est en cours de finalisation et sera publiée dans les prochaines semaines.
Impliquez-vous
Visitez le site web du projet SHIFT pour en savoir plus, inscrivez-vous à notre newsletter et découvrez les possibilités de contribuer au développement de nos outils et boîtes à outils en vous abonnant à . Nous nous félicitons de vos opinions et commentaires sur SHIFT que les résultats apparaissent sur notre site Web!
Cet article a été édité le 9 décembre 2024 afin d’ajouter des détails sur un outil qui permet aux conservateurs de télécharger des images et des métadonnées, en tirant parti des modèles d’IA et de Vision Language pour élaborer des récits spécifiques à l’utilisateur; et la section sur l'initiative Europeana.