Conjuntos de ferramentas alimentados por IA
O SHIFT enriquecerá a experiência pública de interação com o património cultural através de uma série de ferramentas agrupadas em conjuntos de ferramentas temáticos. Estes incluem um conjunto de ferramentas visuais que transcreverá automaticamente conteúdos do património cultural utilizando a IA e um conjunto de ferramentas auditivas que proporcionará uma resposta emocional ao público.
O que significa isto na prática? Há alguns meses, a equipa do conjunto de ferramentas auditivas (liderada pela AUDEERING)forneceu um exemplo deste trabalho utilizando uma ferramenta de texto para fala (TTS). O TTS transcreveu vídeos históricos fornecidos por parceiros em romeno e sérvio e, em seguida, revogou-os automaticamente em inglês com afeto emocional, afastando-se das vozes automáticas inclinadas do passado. Estão constantemente a ser feitas melhorias nesta ferramenta, mas pode ver um provador da versão piloto no canal SHIFT YouTube.
Reconhecendo a necessidade de inclusão e acessibilidade do setor, a SHIFT centra-se na geração de descrições textuais específicas para obras de arte, assegurando que diversos públicos — como pessoas cegas e com visão parcial — possam interagir com bens culturais. Para o efeito, o projeto desenvolveu uma ferramenta que permite aos curadores carregar imagens e metadados, tirando partido dos modelos de IA e Vision Language para elaborar narrativas específicas para o utilizador.
Um conjunto de ferramentas hápticas desenvolvido pela FORTH, o maior centro de investigação da Grécia, permitirá aos utilizadores interagir utilizando também o seu sentido de toque para explorar objetos 3D e 2D em museus e outros contextos culturais. Uma luva háptica permitirá o feedback sensorial nesta nova abordagem. Neste vídeo pode ver uma versão inicial da ferramenta háptica.
Os resultados do projeto também incluirão um conjunto de ferramentas de direitos de propriedade intelectual concebido para proteger o conteúdo nativo através da adoção de direitos de autor internacionais e proteção digital de direitos de autor derivados. Isto será partilhado nos próximos meses.
O papel da Iniciativa Europeana
A Europeana desempenhou um papel fundamental no apoio à missão da SHIFT através dos seus instrumentos e recursos. Por exemplo, através da integração da API Europeana, o projeto automatiza a recuperação de metadados ricos para obras de arte — como informações e descrições do criador —, o que enriquece o contributo contextual para os modelos de IA. Esta integração não só acelera a recolha de metadados, como também melhora a capacidade da ferramenta para fornecer descrições exatas.
Esta colaboração exemplifica a forma como os recursos da Iniciativa Europeana podem fomentar a inovação e a acessibilidade no património cultural e destaca o potencial transformador da sua API na promoção da inclusividade. Juntos, estamos a moldar um futuro onde os tesouros culturais são acessíveis a todos.
A seguir
Para garantir que fornecemos as ferramentas certas, a equipa SHIFT lançou um vasto conjunto de workshops, grupos focais e casos de utilização para avaliar os requisitos dos utilizadores e testar soluções em sites parceiros nos museus e bibliotecas da Alemanha, Grécia, Hungria, Roménia e Sérvia. O projeto centra-se agora na integração deste feedback para desenvolver soluções tecnológicas mais inclusivas e acessíveis para todos os utilizadores de museus e bibliotecas. Em breve, os primeiros resultados deste trabalho serão testados em uma série de exposições hospedadas em todos os locais parceiros.
Entretanto, está atualmente a ser finalizado um documento de orientação elaborado pela SHIFT e pelos outros cinco projetos (MuseIT, PERCEIVE, MEMORISE, PREMIERE, e MEMENTOES) que constituem o agregado financiado pela UE para tecnologias avançadas no domínio do património cultural, que será publicado nas próximas semanas.
Envolva-se
Visite o sítio Web do projeto SHIFT para mais informações, inscreva-se na nossa newsletter e descubra oportunidades de contribuir para o desenvolvimento das nossas ferramentas e conjuntos de ferramentas através da subscrição. Congratulamo-nos com suas opiniões e comentários sobre SHIFT como os resultados aparecem no nosso site!
Esta publicação foi editada em 9 de dezembro de 2024 para acrescentar pormenores sobre uma ferramenta que permite aos curadores carregar imagens e metadados, tirando partido dos modelos de IA e de linguagem de visão para elaborar narrativas específicas para o utilizador; e a secção sobre a Iniciativa Europeana.