De 2017 à 2021, le projet V4Design, financé dans le cadre du programme de recherche et d’innovation H2020, a contribué à réduire les obstacles à l’accès aux objets du patrimoine culturel numérique pour les architectes, les concepteurs créatifs et les créateurs de jeux vidéo. Ces communautés sont souvent négligées par le secteur du patrimoine culturel, mais constituent une force créative puissante lorsqu'il s'agit de réutiliser et de remixer le patrimoine culturel pour alimenter de nouveaux jeux audacieux, des conceptions architecturales ou d'autres projets créatifs.
Le projet V4Design a commencé par reconnaître les barrières entre la découverte d'un grand patrimoine culturel numérisé et la possibilité de réutiliser ce patrimoine culturel numérique dans des conceptions 3D. Bien qu'il s'agisse d'un processus simple pour télécharger, ouvrir et éditer des images 2D, le processus n'est pas aussi simple en trois dimensions. De nombreux contenus du patrimoine culturel n'ont pas été numérisés en objets 3D facilement réutilisables (voir la recommandation finale du contenu 3D dans Europeana Task Force), ce qui restreint considérablement les sources de données que les architectes, les créateurs de jeux vidéo et les concepteurs créatifs peuvent utiliser. V4Design a résolu ce problème en créant un pipeline qui prend en charge l'intégration d'objets du patrimoine culturel 3D dans les flux de travail créatifs quotidiens de ces professionnels, en facilitant la génération de modèles 3D à partir de l'entrée vidéo.
Grâce à V4design, Europeana visait à élargir la portée de ses publics pour la réutilisation du patrimoine culturel numérique, en donnant aux concepteurs créatifs les outils dont ils ont besoin pour réutiliser le passé dans leur propre travail innovant. Tout au long du projet, Europeana a fourni plus de 370 000 objets du patrimoine culturel numérique qui peuvent désormais être facilement découverts et réutilisés sur la plateforme V4Design. Découvrez d'autres innovations ci-dessous!
Plugins pour outils de conception 3D
Pour faciliter l'intégration du contenu du patrimoine culturel numérique 3D dans le flux de travail quotidien des concepteurs, le projet a examiné les outils de conception 3D les plus populaires et développé des plugins pour ces outils: Unity (plugin à publier prochainement) et Rhino3D. Les utilisateurs de ces outils ont désormais accès à un plugin qui rend la réutilisation du patrimoine culturel aussi simple que d'appuyer sur un bouton. Les plugins permettent aux utilisateurs de rechercher des milliers de modèles 3D disponibles dans la base de données V4Design et de les importer dans leur projet en un clic.
Pour Unity, le plugin est également implémenté dans Virtual Reality (VR), permettant à quiconque de sauter dans VR et de faire glisser des modèles du patrimoine culturel 3D directement dans leur environnement virtuel.
Extraire 3D du contenu vidéo
Grâce à V4Design, non seulement vous pouvez rechercher parmi les milliers de modèles 3D déjà disponibles créés à partir de contenus audiovisuels dans Europeana et d'autres sources, mais vous pouvez également utiliser vos propres fichiers vidéo en entrée. Si vous avez ou faites une vidéo d'un objet, en vous déplaçant autour de lui pour obtenir tous les angles, vous pouvez importer cette vidéo dans le pipeline V4Design qui en extraira des modèles 3D utilisables. Cela raccourcit le temps nécessaire pour passer d'un objet physique à un modèle 3D, ce qui permet à quiconque de prendre n'importe quoi de son environnement et de l'importer et de le réutiliser dans ses projets 3D. Un exemple de cela dans la pratique a été présenté par Herzog de Meuron, un cabinet d'architecture basé à Bâle, en Allemagne. Découvrez comment ils ont utilisé V4Design dans leur travail.
Analyser et enrichir les données et les métadonnées
Pour aider avec le pipeline 3D, et pour savoir où transférer des textures, le projet a développé plusieurs algorithmes d'apprentissage automatique. Certains modèles regardent des images fixes pour extraire des textures et des motifs qui peuvent ensuite être transférés vers un modèle 3D ou une image 2D.
L'extraction et le transfert de motifs et de textures revêtent une importance particulière dans la conception 3D, car les modèles 3D n'ont, par défaut, ni texture ni couleur. Pour réutiliser de manière créative les modèles 3D gris et fades, vous devez y mettre des maillages de texture et de couleur. Avec le plugin V4Design, n'importe quel élément du patrimoine culturel peut désormais être réutilisé pour décorer des modèles 3D.
D'autres algorithmes d'apprentissage automatique identifient et localisent les caractéristiques architecturales du contenu vidéo. Cela permet d’extraire facilement uniquement ce bâtiment en tant que modèle 3D – voir un exemple ici. Les algorithmes balisent, reconnaissent et segmentent également les bâtiments en leurs parties constitutives, et toutes les métadonnées sont stockées dans l'actif et indexées dans la base de données V4Design.
Enfin, le pipeline V4Design enrichit les métadonnées textuelles provenant de fournisseurs de contenu comme Europeana pour faciliter la recherche du modèle 3D que vous recherchez. Pour en savoir plus sur les techniques de traitement du langage naturel utilisées dans V4Design, consultez cet article.
En savoir plus
Nous sommes impatients de voir comment vous réutilisez et remixez notre patrimoine culturel en quelque chose de complètement nouveau! Pour commencer à jouer avec les outils V4Design, vous pouvez télécharger Rhino et le plugin V4D4Rhino, ou télécharger Unity aujourd'hui. Vous pouvez également en savoir plus sur les résultats de V4Design sur la page du projet ou sur v4design.eu.