Från 2017 till 2021 har V4Design-projektet, som finansieras inom ramen för Horisont 2020-programmet för forskning och innovation, arbetat för att minska hindren för tillgång till digitala kulturarvsföremål för arkitekter, kreativa formgivare och videospelsskapare. Dessa samhällen förbises ofta av kulturarvssektorn, men är en kraftfull kreativ kraft när man återanvänder och remixar kulturarv för att driva djärva nya spel, arkitektoniska mönster eller andra kreativa projekt.
V4Design-projektet började med att känna igen hindren mellan att upptäcka en stor del av det digitaliserade kulturarvet och att kunna återanvända det digitala kulturarvet i 3D-design. Även om det är en enkel process att ladda ner, öppna och redigera 2D-bilder, är processen inte lika enkel i tre dimensioner. Mycket av kulturarvsinnehållet har inte digitaliserats till lätt återanvändbara 3D-objekt (se den slutliga rekommendationen från 3D-innehållet i Europeana Task Force), vilket allvarligt begränsar de datakällor som arkitekter, videospelskapare och kreativa designers kan använda. V4Design löste detta problem genom att skapa en pipeline som stöder integreringen av 3D-kulturarvsobjekt i de dagliga kreativa arbetsflödena för dessa yrkesverksamma, genom att göra det lättare att generera 3D-modeller från videoinmatning.
Genom V4design ville Europeana bredda publikens möjligheter att återanvända det digitala kulturarvet och ge kreativa formgivare de verktyg de behöver för att återanvända det förflutna i sitt eget innovativa arbete. Under hela projektet tillhandahöll Europeana mer än 370 000 digitala kulturarvsobjekt som nu enkelt kan upptäckas och återanvändas i V4Design-plattformen. Utforska ytterligare innovationer nedan!
Plugins för 3D-designverktyg
För att underlätta integreringen av digitalt kulturarvsinnehåll i 3D i formgivarnas dagliga arbetsflöde tittade projektet på de mest populära 3D-designverktygen och utvecklade plugins för dessa verktyg: Unity (plugin kommer att släppas offentligt inom kort) och Rhino3D. Människor som använder dessa verktyg har nu tillgång till ett plugin som gör återanvändning av kulturarv lika enkelt som att trycka på en knapp. Insticksprogrammen gör det möjligt för användare att söka igenom tusentals tillgängliga 3D-modeller som finns i V4Design-databasen och importera dem till sitt projekt med ett klick.
För Unity implementeras pluginet också i Virtual Reality (VR), så att vem som helst kan hoppa in i VR och dra 3D-kulturarvsmodeller direkt in i sin virtuella miljö.
Extrahera 3D från videoinnehåll
Tack vare V4Design kan du inte bara söka igenom de tusentals redan tillgängliga 3D-modellerna som skapats från audiovisuellt innehåll i Europeana och andra källor, du kan också använda dina egna videofiler som inmatning. Om du har eller gör en video av något objekt, flytta runt det för att få alla vinklar, kan du importera den videon till V4Design pipeline som kommer att extrahera användbara 3D-modeller från den. Detta förkortar tiden som behövs för att gå från fysiskt objekt till 3D-modell, vilket gör det enkelt för alla att ta något från sin miljö och importera och återanvända det i sina 3D-projekt. Ett exempel på detta i praktiken presenterades av Herzog de Meuron, en arkitektfirma baserad i Basel, Tyskland. Ta reda på hur de använde V4Design i sitt arbete.
Analysera och berika data och metadata
För att hjälpa till med 3D-pipeline, och för att veta var man ska överföra texturer till, utvecklade projektet flera maskininlärningsalgoritmer. Vissa modeller tittar på stillbilder för att extrahera texturer och mönster som sedan kan överföras till en 3D-modell eller en 2D-bild.
Extraktion och överföring av mönster och texturer är av särskild betydelse i 3D-design eftersom 3D-modeller som standard inte har någon textur eller färg. För att kreativt återanvända annars grå och intetsägande 3D-modeller måste du lägga maskor av textur och färg på den. Med V4Design-pluginet kan alla delar av kulturarvet nu återanvändas för att dekorera 3D-modeller.
Andra maskininlärningsalgoritmer identifierar och lokaliserar arkitektoniska funktioner i videoinnehåll. Detta gör det enkelt att extrahera endast den byggnaden som en 3D-modell – se ett exempel här. Algoritmerna taggar, känner igen och segmenterar också byggnaderna i deras beståndsdelar, och alla metadata lagras i tillgången och indexeras i V4Design-databasen.
Slutligen berikar V4Design-pipeline textmetadata som kommer från innehållsleverantörer som Europeana för att göra det mycket enklare att hitta den 3D-modell du letar efter. Läs mer om exakt vilka tekniker för bearbetning av naturligt språk som används i V4Design i den här artikeln.
Läs mer
Vi ser fram emot att se hur du återanvänder och blandar vårt kulturarv till något helt nytt! För att börja spela med V4Design-verktygen kan du ladda ner Rhino och V4D4Rhino-pluginet, eller ladda ner Unity idag. Du kan också läsa mer om resultaten av V4Design på projektsidan eller på v4design.eu.