Forskarar frå Google og Osaka University i Japan har utvikla ein AI-drevet verktøy kalla Brain2Music som kan gjenopprette musikk basert på hjerneavbildingsdata. Dette banebrytande eksperimentet er det første i sitt slag.
AI-verktøyet analyserer hjerneaktiviteten til enkeltpersonar medan dei lyttar til musikk. Det produserer deretter ein song som samsvarar med sjangeren, rytmikken, humøret og instrumentasjonen til musikken som blir lytta til. Hjerneavbildingsdataene som blei brukt i studien, vart samla inn ved hjelp av ein teknikk kjent som funksjonell magnetresonanstomografi (fMRI), som lar forskarar identifisere regionale og tidsvarierande endringar i hjernen.
Under eksperimentet lytta deltakarane til 15 sekunders musikksnuttar frå ulike sjangrar som blues, klassisk, country, disco, hip-hop, jazz og pop. AI-programmet vart trent opp til å etablere samanhenger mellom elementa i musikken og deltakarane sine hjerne-signalar. Ved å legge inn desse dataene i ein AI-modell utvikla av Google kalla MusicLM, kunne forskarane konvertere hjerneavbildingsdataene til musikk som etterligner dei originale songklippa.
Ifølgje Timo Denk, ein programvareutviklar hos Google i Sveits og medforfattar av studien, var samstemminga i form av humør mellom den rekonstruerte musikken og den originale musikken omtrent 60%. Det eksperimentelle AI-verktøyet viste seg å være robust på tvers av dei fem individane som vart evaluerte under studien. Denk uttrykte også tillit til at verktøyet kunne bli trent opp til å fungere godt med nye individer.
Sjølv om funna enno ikkje har gjennomgått fagfellevurdering, opnar utviklinga av Brain2Music spennande moglegheiter for å forstå de nevrale korrelasjonane av musikkoppfatning og potensielt til og med gjere det mogleg for enkeltpersonar med visse tilstandar, som dei som har mista evnen til å høyre, å oppleve musikk igjen gjennom hjerne-datamaskin-grensesnitt.
The source of the article is from the blog enp.gr