Von 2017 bis 2021 hat das V4Design-Projekt, das im Rahmen des Forschungs- und Innovationsprogramms Horizont 2020 finanziert wird, daran gearbeitet, Hindernisse für den Zugang von Architekten, Kreativdesignern und Entwicklern von Videospielen zu digitalen Kulturerbeobjekten abzubauen. Diese Gemeinschaften werden oft vom Kulturerbesektor übersehen, sind aber eine starke kreative Kraft, wenn es darum geht, kulturelles Erbe wiederzuverwenden und neu zu mischen, um mutige neue Spiele, architektonische Designs oder andere kreative Projekte voranzutreiben.
Das V4Design-Projekt begann damit, die Barrieren zwischen jemandem zu erkennen, der ein großes Stück digitalisiertes Kulturerbe entdeckt und in der Lage ist, dieses digitale Kulturerbe in 3D-Designs wiederzuverwenden. Während es ein einfacher Prozess ist, 2D-Bilder herunterzuladen, zu öffnen und zu bearbeiten, ist der Prozess in drei Dimensionen nicht so einfach. Viele Inhalte des Kulturerbes wurden nicht in leicht wiederverwendbare 3D-Objekte digitalisiert (siehe die endgültige Empfehlung der 3D-Inhalte in der Europeana Task Force), wodurch die Datenquellen, die Architekten, Videospielentwickler und kreative Designer verwenden können, stark eingeschränkt wurden. V4Design löste dieses Problem, indem es eine Pipeline erstellte, die die Integration von 3D-Kulturerbeobjekten in die täglichen kreativen Workflows dieser Fachleute unterstützt, indem es die Generierung von 3D-Modellen aus Videoeingabe vereinfachte.
Mit V4design wollte Europeana die Reichweite seines Publikums für die Wiederverwendung des digitalen Kulturerbes erweitern und kreativen Designern die Werkzeuge an die Hand geben, die sie benötigen, um die Vergangenheit in ihrer eigenen innovativen Arbeit wiederzuverwenden. Während des gesamten Projekts stellte Europeana mehr als 370.000 Objekte des digitalen Kulturerbes zur Verfügung, die nun leicht in der V4Design-Plattform entdeckt und wiederverwendet werden können. Entdecken Sie weitere Innovationen unten!
Plugins für 3D-Design-Tools
Um die Integration von 3D-Inhalten des digitalen Kulturerbes in den täglichen Workflow von Designern zu erleichtern, untersuchte das Projekt die beliebtesten 3D-Design-Tools und entwickelte Plugins für diese Tools: Unity (Plugin wird in Kürze veröffentlicht) und Rhino3D. Menschen, die diese Tools verwenden, haben jetzt Zugriff auf ein Plugin, das die Wiederverwendung von Kulturerbe so einfach macht wie das Drücken einer Taste. Mit den Plugins können Benutzer Tausende von verfügbaren 3D-Modellen in der V4Design-Datenbank durchsuchen und mit einem Klick in ihr Projekt importieren.
Für Unity ist das Plugin auch in Virtual Reality (VR) implementiert, so dass jeder in VR springen und 3D-Kulturerbemodelle direkt in seine virtuelle Umgebung ziehen kann.
Extrahieren Sie 3D aus Videoinhalten
Dank V4Design können Sie nicht nur die Tausenden von bereits verfügbaren 3D-Modellen durchsuchen, die aus audiovisuellen Inhalten in Europeana und anderen Quellen erstellt wurden, sondern auch Ihre eigenen Videodateien als Eingabe verwenden. Wenn Sie ein Video von einem Objekt haben oder erstellen und sich um es bewegen, um alle Winkel zu erhalten, können Sie dieses Video in die V4Design-Pipeline importieren, die nutzbare 3D-Modelle daraus extrahiert. Dies verkürzt die Zeit, die benötigt wird, um vom physischen Objekt zum 3D-Modell zu gelangen, und macht es jedem einfach, alles aus seiner Umgebung zu nehmen und es in seinen 3D-Projekten zu importieren und wiederzuverwenden. Ein Beispiel dafür in der Praxis zeigte Herzog de Meuron, ein Architekturbüro mit Sitz in Basel. Erfahren Sie, wie sie V4Design in ihrer Arbeit verwendet haben.
Analysieren und Anreichern von Daten und Metadaten
Um bei der 3D-Pipeline zu helfen und zu wissen, wo Texturen übertragen werden sollen, entwickelte das Projekt mehrere Algorithmen für maschinelles Lernen. Einige Modelle betrachten Standbilder, um Texturen und Muster zu extrahieren, die dann in ein 3D-Modell oder ein 2D-Bild übertragen werden können.
Die Extraktion und Übertragung von Mustern und Texturen ist im 3D-Design von besonderer Bedeutung, da 3D-Modelle standardmäßig keine Textur oder Farbe haben. Um ansonsten graue und fade 3D-Modelle kreativ wiederzuverwenden, müssen Sie Textur- und Farbnetze darauf setzen. Mit dem V4Design-Plugin kann nun jedes kulturelle Erbe wiederverwendet werden, um 3D-Modelle zu dekorieren.
Andere Algorithmen für maschinelles Lernen identifizieren und lokalisieren architektonische Merkmale in Videoinhalten. Dies macht es einfach, nur dieses Gebäude als 3D-Modell zu extrahieren - siehe ein Beispiel hier. Die Algorithmen markieren, erkennen und segmentieren die Gebäude in ihre Bestandteile, und alle Metadaten werden im Asset gespeichert und in der V4Design-Datenbank indexiert.
Schließlich bereichert die V4Design-Pipeline Textmetadaten, die von Content-Anbietern wie Europeana stammen, um die Suche nach dem gesuchten 3D-Modell zu erleichtern. Erfahren Sie in diesem Artikel mehr darüber, welche Techniken der Verarbeitung natürlicher Sprache in V4Design verwendet werden.
Erfahren Sie mehr
Wir freuen uns darauf, zu sehen, wie Sie unser kulturelles Erbe wiederverwenden und zu etwas völlig Neuem vermischen! Um mit den V4Design-Tools zu spielen, können Sie Rhino und das V4D4Rhino-Plugin herunterladen oder Unity noch heute herunterladen. Weitere Informationen zu den Ergebnissen von V4Design finden Sie auf der Projektseite oder auf v4design.eu.