Umelecké videnie a umelá inteligencia
Počas môjho päťročného pôsobenia vo výskume a vývoji v oblasti kultúrneho dedičstva a vo svete elektronickej hudby v spoločnosti Sound and Vision som mal tú česť žiť dvojitý život. S nohami na oboch stranách rieky pracujem na premostení kultúrneho dedičstva a akademického sektora prostredníctvom prevažne prosperujúcej európskej komunity elektronickej hudby.
RE:VIVE je iniciatíva, ktorá uľahčuje opätovné použitie materiálu kultúrneho dedičstva elektronickou hudobnou komunitou. EuropeanaTech je komunita Europeany v oblasti výskumu a vývoja, dlhotrvajúca a aktívna komunita, ktorá podporuje technické experimenty, vývoj a medzinárodnú interoperabilitu noriem a nástrojov.
Pre niektorých sa tieto dva svety môžu zdať ako zvláštny pár, ale v skutočnosti sa obaja navzájom potrebujú, ak dúfame, že skutočne posunieme hranice technológie, kreativity, prístupu a rozprávania príbehov. Preto som sa inšpiroval usporiadaním sympózia o inštrumentálnych zmenách na festivale Rewire. Byť dohadzovačom a otvoriť dvere pre obe strany. Je to príležitosť predviesť výskum a nástroje súvisiace s umelou inteligenciou a hudbou spolu s umelcami, ktorí časť tohto výskumu uvádzajú do praxe s príslovím „spolupracujme“.
Pridaná hodnota, ktorú vidíte prostredníctvom akademickej a tvorivej spolupráce, je, že umelci môžu zhodnocovať, šíriť a humanizovať výpočtovo intenzívny a starostlivý výskum a vývoj, ktorý vykonávajú univerzity alebo iné vedomostné inštitúty. To neznamená, že umelci nemôžu robiť ťažkú výpočtovú techniku alebo že univerzity nemôžu byť umelecké, ale keď jedna ruka umýva druhú, môžeme vytvoriť prúd špecializovaného prenosu vedomostí a zážitkových odborných znalostí.
Počas vzniku toho, čo dnes nazývame elektronickou hudbou, boli tí, ktorí kovali nové cesty, poloumelci, poloinžinierski majstri so sídlom v technologických inštitútoch alebo vo vyššom vzdelávaní. Od Radiodiffusion-Télévision Française, kde pracoval Pierre Schaeffer, až po Daphne Oram na Radiophonic Workshop BBC, tieto oddelenia R&D boli centrami hudobnej inovácie a tvorivosti. Ale ako sa výpočtová technika a nástroje stali kompaktnejšími, cenovo dostupnejšími a použiteľnejšími, kreativita sa presunula smerom k domácemu alebo osobnému štúdiu.
Ale teraz, keď hudba začína skúmať nové hranice strojového učenia, hlbokého učenia, spracovania prirodzeného jazyka a budúcich technológií, kde je potrebné veľké množstvo údajov, výpočtovej sily a rozpočtu, podmienky na primerané experimentovanie sa menia. Preto dúfam, že podporím návrat do záhybu so sympóziom o inštrumentálnych zmenách, na ktorom môže akademický svet R&D a praktizujúci hudobníci spolupracovať a expresívnejšie.
Inšpirácia zo sympózia o inštrumentálnych zmenách
Inštrumentálne sympózium Shifts na festivale Rewire bolo skvelým príkladom crossoverov, ktoré sa už odohrávajú medzi týmito svetmi. Deň sa začal tým, že Dr. Thor Magnusson predstavil svoju knihu Sonic Writing, ktorá skúma, ako súčasné hudobné technológie sledujú svoj pôvod k predchádzajúcim formám nástrojov a médií. Zatiaľ čo úloha hudby v spoločnosti sa možno nikdy nezmení, spôsob, akým ju konzumujeme a produkujeme, sa zmení, rovnako ako vždy. Pre inštitúty kultúrneho dedičstva nás hudba môže veľa naučiť o spoločnosti. Strojové počúvanie nás môže viesť k tomu, aby sme sa dozvedeli viac o hudbe, čo nám poskytne nové, hlbšie pochopenie európskeho kultúrneho dedičstva.
Výskum, ktorý vykonáva profesor Anja Volk na Utrechtskej univerzite, profesor Peter Bloem na VU Amsterdam, Hibiki Mukai z Haagu a Enrique Manjavacas, tiež naznačuje, ako materiály kultúrneho dedičstva môžu viesť k projektom, ktoré napredujú v našom chápaní hudby a spoločnosti, ako aj k vytváraniu nových spôsobov, ako umelci vytvárajú hudbu. Príklady siahajú od identifikácie akordov v reálnom čase, generatívnej hudby založenej na analýze archívnych filmov, generovania textu založeného na štúdiu Shakespeara a nových algoritmov na generovanie tradičnej japonskej hudby.
Pre RE:VIVE je základnou úlohou vidieť, ako sa kultúrne dedičstvo a elektronická hudba môžu zlúčiť a ponúknuť nové umelecké vnímanie minulosti. Na sympóziu Instrumental Shifts sa to uskutočnilo prostredníctvom spolupráce medzi Dr. Bobom Sturmom a saxofonistkou a producentkou Laurou Agnusdei. Sturm, vedúci projektu pre FolkRNN, platformu známu svojím masívnym korpusom generatívnej švédskej a írskej ľudovej hudby, predstavil, ako pokračuje v konzultáciách s ľudovou komunitou s cieľom nielen otestovať technické aspekty výstupov, ale aj sociálne aspekty, napr. ako je táto hudba, ktorú mnohí tak hlboko milujú, vnímaná, keď ju vytvára algoritmus. Pozvali sme Agnusdeiho, aby spolupracoval s FolkRNN a premenil vytvorené skladby na novú súčasnú skladbu. Spojila sa s violistom a skladateľom Lauge Dideriksenom a nová skladba dokonale zlúčila svet experimentálnej kompozície a tradičnej hudby.
Kamkoľvek ideme, poďme spolu
Partnerstvo medzi Agnusdei a Sturm je to, čo som chcel inšpirovať sympóziom Instrumental Shifts. Ako oddelenia R&D v kultúrnych a akademických inštitútoch začínajú skúmať nové hranice kreatívnej výpočtovej techniky a umelej inteligencie, nakoniec to bude umelecký dojem, ktorý umožní divákom skutočne sa s ním spojiť. Technické znalosti viedli k notovej hudbe a konštrukcii nástrojov, ale sú to umelci, ktorí do nej vdychujú život. A ako sme sa dozvedeli od profesora Micka Griersona a Roisina Loughrana, zatiaľ táto práca zostane u ľudí.
Zapojte sa do EuropeanaTech a dozviete sa viac o RE:VIVE