Entre 2017 e 2021, o projeto V4Design, financiado ao abrigo do programa de investigação e inovação H2020, trabalhou no sentido de reduzir os obstáculos ao acesso de arquitetos, criadores criativos e criadores de jogos de vídeo a objetos do património cultural digital. Estas comunidades são muitas vezes ignoradas pelo setor do património cultural, mas são uma poderosa força criativa ao reutilizar e remisturar o património cultural para impulsionar novos jogos ousados, projetos arquitetónicos ou outros projetos criativos.
O projeto V4Design começou por reconhecer as barreiras entre alguém descobrir uma grande parte do património cultural digitalizado e ser capaz de reutilizar esse património cultural digital em designs 3D. Embora seja um processo simples de baixar, abrir e editar imagens 2D, o processo não é tão simples em três dimensões. Muitos conteúdos do património cultural não foram digitalizados em objetos 3D facilmente reutilizáveis (ver a recomendação final do conteúdo 3D no Grupo de Trabalho Europeana), restringindo severamente as fontes de dados que os arquitetos, criadores de jogos de vídeo e criadores criativos podem utilizar. A V4Design resolveu este problema através da criação de um canal que suporta a integração de objetos do património cultural 3D nos fluxos de trabalho criativos diários destes profissionais, tornando mais fácil gerar modelos 3D a partir da entrada de vídeo.
Através da V4design, a Europeana pretendia alargar o âmbito dos seus públicos para a reutilização do património cultural digital, dando aos criadores criativos as ferramentas de que necessitam para reutilizar o passado no seu próprio trabalho inovador. Ao longo do projeto, a Europeana forneceu mais de 370 000 objetos do património cultural digital que podem agora ser facilmente descobertos e reutilizados na plataforma V4Design. Explore mais inovações abaixo!
Plugins para ferramentas de desenho 3D
Para facilitar a integração do conteúdo do património cultural digital 3D no fluxo de trabalho diário dos designers, o projeto analisou as ferramentas de design 3D mais populares e desenvolveu módulos para essas ferramentas: Unity (plugin a ser lançado em breve) e Rhino3D. As pessoas que utilizam estas ferramentas têm agora acesso a um plugin que torna a reutilização do património cultural tão fácil como premir um botão. Os plugins permitem aos utilizadores pesquisar através de milhares de modelos 3D disponíveis na base de dados V4Design e importá-los para o seu projecto com um clique.
Para a Unity, o plugin também é implementado em Realidade Virtual (VR), permitindo que qualquer pessoa entre em RV e arraste modelos de património cultural 3D para o seu ambiente virtual.
Extrair 3D do conteúdo de vídeo
Graças à V4Design, não só pode pesquisar através dos milhares de modelos 3D já disponíveis criados a partir de conteúdos audiovisuais na Europeana e noutras fontes, como também pode utilizar os seus próprios ficheiros de vídeo como entrada. Se tiver ou fizer um vídeo de qualquer objecto, movendo-se em torno dele para obter todos os ângulos, pode importar esse vídeo para o pipeline V4Design que irá extrair modelos 3D utilizáveis a partir dele. Isso reduz o tempo necessário para passar de objeto físico para o modelo 3D, tornando mais fácil para qualquer pessoa tirar qualquer coisa de seu ambiente e importá-lo e reutilizá-lo em seus projetos 3D. Um exemplo disso na prática foi apresentado por Herzog de Meuron, uma empresa de arquitetura com sede em Basileia, na Alemanha. Descubra como utilizaram o V4Design no seu trabalho.
Analisar e enriquecer dados e metadados
Para ajudar com o pipeline 3D e saber para onde transferir texturas, o projeto desenvolveu vários algoritmos de aprendizagem automática. Alguns modelos olham para imagens fixas para extrair texturas e padrões que podem ser transferidos para um modelo 3D ou uma imagem 2D.
A extração e transferência de padrões e texturas é de especial importância no design 3D porque os modelos 3D não têm, por padrão, textura ou cor. Para reutilizar criativamente os modelos 3D cinzentos e suaves, é necessário colocar-lhe malhas de textura e cor. Com o plugin V4Design, qualquer peça do património cultural pode agora ser reutilizada para decorar modelos 3D.
Outros algoritmos de aprendizagem automática identificam e localizam características arquitetónicas no conteúdo de vídeo. Isto torna mais fácil extrair apenas esse edifício como um modelo 3D - ver um exemplo aqui. Os algoritmos também marcam, reconhecem e segmentam os edifícios em suas partes constituintes, e todos os metadados são armazenados no ativo e indexados na base de dados V4Design.
Por último, o gasoduto V4Design enriquece os metadados textuais provenientes de fornecedores de conteúdos como a Europeana para tornar muito mais fácil encontrar o modelo 3D que procura. Saiba mais sobre exatamente quais técnicas de Processamento de Linguagem Natural são utilizadas no V4Design neste artigo.
Mais informações
Estamos ansiosos para ver como reutiliza e remistura o nosso património cultural em algo completamente novo! Para começar a jogar com as ferramentas V4Design, pode transferir o Rhino e o plugin V4D4Rhino ou transferir o Unity hoje mesmo. Pode também obter mais informações sobre os resultados do V4Design na página do projeto ou em v4design.eu.