Sztuczna inteligencja będzie teraz dobrze zorientowana w dziedzictwie kulturowym dzięki nowemu projektowi Saint George on a Bike koordynowanemu przez Barcelona Supercomputing Center. Projekt rozpoczął szkolenie algorytmów uczenia maszynowego w kulturze, symbolach i kontekstach historycznych w celu automatycznego generowania bogatych metadanych dla setek tysięcy obrazów z różnych europejskich repozytoriów dziedzictwa kulturowego.
Aby umożliwić dostęp do zbiorów obrazów dziedzictwa kulturowego, platformy takie jak Europeana wymagają wysokiej jakości metadanych. Jednak eksperci z bibliotek, archiwów i muzeów po prostu nie mogą stworzyć drobnych opisów wszystkich zasobów wynikających z masowych programów digitalizacji. Aby złagodzić to wąskie gardło, naukowcy rozważają wykorzystanie technologii AI do zautomatyzowania co najmniej części procesu opisu.
Ale szkolenie sztucznej inteligencji, aby była świadoma kontekstów dziedzictwa kulturowego, nie jest tak proste, jak uczenie jej rozpoznawania różnych obiektów we współczesnym obrazie. Święty Jerzy na rowerze dostraja algorytmy tak, aby "myślały" w kontekście i czasie.
„Opracowywana przez nas sztuczna inteligencja będzie w stanie stwierdzić, czy obraz przedstawia świętego Jerzego na koniu czy na rowerze”, powiedziała Maria Cristina Marinescu, koordynatorka projektu i starsza badaczka w dziale aplikacji komputerowych w nauce i inżynierii (CASE) BSC. „To nie jest takie proste, jak się wydaje, ponieważ kształty są podobne. Dzięki szkoleniu go w różnych elementach dziedzictwa kulturowego, w tym w pierwszym pojawieniu się przedstawionych obiektów i okresie, z którego pochodzi obraz, algorytm sztucznej inteligencji doszedłby do wniosku, że XVI-wieczny obraz św. Jerzego logicznie przedstawiałby konia, a nie rower.
Europeana będzie głównym ośrodkiem testowym wzbogacania metadanych generowanych w ramach projektu. Antoine Isaac, R&D Manager w Europeana Foundation, mówi: "Istniejące narzędzia AI mają tendencję do osiągania gorszych wyników, gdy są stosowane do kolekcji dziedzictwa kulturowego, ponieważ są przeszkolone w zakresie nowoczesnych dokumentów i materiałów, które nie są oparte na dziedzictwie kulturowym. Jeżeli Saint George on a Bike zdoła stworzyć komputerowe narzędzia wizyjne, które odpowiednio rozpoznają nasze konteksty, Europeana będzie mogła wspierać bogatsze doświadczenie przeglądania i odkrywania kolekcji kulturowych naszych partnerów.
Dowiedz się więcej
Projekt Saint George on a Bike organizuje webinaria w dniach 9-10 września, aby zademonstrować wyniki projektu i potencjał do dostosowania automatycznie produkowanych opisów obrazów do okresu, w którym zostały stworzone. Zapraszamy naukowców zajmujących się eksploracją danych i nauką o danych zainteresowanych sztuką i kulturą!