Комплекти от инструменти, задвижвани с ИИ
SHIFT ще обогати обществения опит от взаимодействието с културното наследство, като използва поредица от инструменти, групирани в тематични набори от инструменти. Те включват визуален инструментариум, който автоматично ще транскрибира съдържанието на културното наследство с помощта на ИИ, и слухов инструментариум, който ще даде емоционален отговор на публиката.
Какво означава това на практика? Преди няколко месеца екипът от слухови инструментариуми (ръководен от AUDEERING) предостави пример за тази работа с помощта на инструмента Text-to-Speech (TTS). TTS транскрибира видеоклипове за наследство, предоставени от партньори на румънски и сръбски език, и след това автоматично ги преиздава на английски език с емоционален ефект, отдалечавайки се от закостенелите автоматични гласове от миналото. Постоянно се правят подобрения в този инструмент, но можете да гледате дегустатор на пилотната версия на канала SHIFT YouTube.
Като признава необходимостта на сектора от приобщаване и достъпност, SHIFT се съсредоточава върху генерирането на целеви текстови описания за произведения на изкуството, като гарантира, че различни аудитории — като например незрящи лица и лица с увредено зрение — могат да се ангажират с културни ценности. За да се постигне това, в рамките на проекта е разработен инструмент, който дава възможност на куратори да качват изображения и метаданни, като използват модели на ИИ и Vision Language за изготвяне на специфични за потребителя послания.
Наборът от тактики, разработен от FORTH, най-големият изследователски център в Гърция, ще позволи на потребителите да си взаимодействат, като използват и своето чувство за допир, за да изследват 3D и 2D предмети в музеи и други културни среди. Една хаптична ръкавица ще даде възможност за сензорна обратна връзка в този нов подход. В това видео можете да проверите ранна версия на инструмента haptics.
Резултатите от проекта ще включват и инструментариум за правата върху интелектуалната собственост, предназначен да защитава местното съдържание чрез приемане на международно авторско право и цифрова защита на производните авторски права. Това ще бъде споделено през следващите месеци.
Ролята на инициативата Europeana
Europeana изигра ключова роля в подкрепа на мисията на SHIFT чрез своите инструменти и ресурси. Например чрез интегрирането на API на Europeana проектът автоматизира извличането на богати метаданни за произведения на изкуството — като информация за създателите и описания — което обогатява контекстуалния принос за моделите на ИИ. Това интегриране не само ускорява събирането на метаданни, но и подобрява способността на инструмента да предоставя точни описания.
Това сътрудничество е пример за това как ресурсите на инициативата Europeana могат да стимулират иновациите и достъпността в областта на културното наследство и подчертава преобразуващия потенциал на нейната предварителна информация за пътниците за насърчаване на приобщаването. Заедно оформяме бъдеще, в което културните съкровища са достъпни за всички.
Следващ
За да гарантираме, че предоставяме правилните инструменти, екипът на SHIFT стартира обширен набор от семинари, фокус групи и случаи на употреба, за да оцени изискванията на потребителите и да тества решения в партньорските обекти в музеите и библиотеките на Германия, Гърция, Унгария, Румъния и Сърбия. Проектът сега е съсредоточен върху интегрирането на тази обратна връзка, за да се разработят по-приобщаващи и достъпни технологични решения за всички потребители на музеи и библиотеки. Скоро първите резултати от тази работа ще бъдат изпробвани в редица изложби, организирани в партньорските обекти.
Междувременно политическият обзор, изготвен от SHIFT и другите пет проекта (MuseIT, PERCEIVE, MEMORISE, PREMIERE и MEMENTOES),които съставляват финансирания от ЕС клъстер за авангардни технологии в областта на културното наследство, понастоящем е в процес на финализиране и ще бъде публикуван през следващите седмици.
Включете се
Посетете уебсайта на проекта SHIFT, за да научите повече, да се абонирате за нашия бюлетин и да откриете възможности да допринесете за разработването на нашите инструменти и набори от инструменти, като се абонирате . Приветстваме вашите мнения и обратна връзка за SHIFT, тъй като резултатите се появяват на нашия уебсайт!
Тази публикация беше редактирана на 9 декември 2024 г., за да се добавят подробности за инструмент, който дава възможност на куратори да качват изображения и метаданни, като използват модели на ИИ и Vision Language за изготвяне на специфични за потребителя послания; и раздела относно инициативата Europeana.