AI-komponister lager musikk til videospill

Fremskritt av kunstig intelligens (AI) er ofte innvarslet som å gjøre livet enklere, tryggere og mer effektivt. Som sådan lover AI å transformere flere aspekter av dagliglivet, fra hvordan vi reiser til hvordan vi jobber og hvordan vi blir underholdt.

Det EU-finansierte AIVA-prosjektet har utviklet et AI-komposisjonsverktøy, en ‘musikkmotor’ kjent som AIVA, som kan integreres i eksisterende videospill, og gir skreddersydd musikk som kompletterer lekeaksjon.

AIVA er den første ‘virtuelle artisten’ som ble anerkjent av SACEM – den franske profesjonelle foreningen som representerer royaltyene og rettighetene til originale musikkspillere. Det var også den første AI-komponisten som fikk oppdraget for et stykke til nasjonaldagens feiringer i Luxembourg og en hymne for byen Dubai, begge ble fremført i 2017.

“Et favorittøyeblikk var da vi spilte inn et stykke komponert av AIVA på den legendariske Scoringscenen Newman i Los Angeles,” sier Pierre Barreau, AIVA-prosjektkoordinator og administrerende direktør i AIVA.

EU-finansiering tillot teamet å gjennomføre en mulighetsstudie, intervjue spillutviklere, samle inn og analysere markedsdata og spore bruksanalyser på deres eksisterende produkt, i forberedelse til videre utvikling.
Den akustiske algoritmen

Å score lydspor for underholdningsinnhold er fortsatt ofte basert på produksjonsmetoder som er over 100 år gamle, og går tilbake til de tidlige dagene med film og radio.

Komponister, arrangører, orkestratorer, musikere, studioingeniører, musikkveiledere og forleggere er ansatt for å lage originale lydspor. Dette kan føre til at et lydspor tar opptil 6 måneder og koster opptil 500 000 euro. Mens kvaliteten vanligvis er høy, er ikke slike profesjonelt scorede lydspor egnet til formål for raskt bevegelige medier, for eksempel spillmarkedet.

AIVA bygde et AI-system som bruker maskinlæring for å trene seg selv ved å lese over 30 000 klassiske musikkresultater fra verdens største komponister. AIs algoritmer ser etter mønstre i score, for å utlede et sett med matematiske regler som er vedtatt for å lage originale komposisjoner.

Det er en rekke fordeler. For det første er det raskt og skalerbart. Ettersom det kan ta noen sekunder å generere ett musikkstykke, kan brukerne raskt lage mange spor. Det er også billig, og åpner feltet for uavhengige spillskapere med små til ikke-eksisterende budsjetter. AIVA tilbyr tjenester til forskjellige prispunkter, tilpasset tilgjengelige budsjetter.

“Den virtuelle komponisten vår er i stand til å komponere musikk som er full av følelser, og når algoritmen reagerer på handlingen som utspiller seg i løpet av spillet, blir den også personalisert,” forklarer Barreau.

Betaversjonen av AIVA gjør at brukere som har logget seg inn, kan få tilgang til online-kontoene sine for å lage original musikk som digitale poengsummer, lagret som MIDI-filer. Brukere kan redigere brikkene sine ved å bruke AIVAs Digital Audio Workstation eller Notation Program. Avhengig av pakkenivå eies den intellektuelle eiendommen for komposisjoner enten av brukeren eller av AIVA.
Utvider kreativiteten

“Tilbakemeldingene har vært veldig positive. Vi fortsetter å forbedre produktet basert på kundebehov og vil tilby flere måter skaperne kan integrere AIVA i sine kreasjoner, ”legger Barreau til. “Vi tror at avanserte algoritmer brukt til kunstneriske formål har makt til å stimulere folk til å være mer kreative.”

For tiden er utviklingen fokusert på å øke kvaliteten og mangfoldet av komposisjonene generert av AIVA. Dette inkluderer et utvidet repertoar av subgenrer, som synthwave og hip-hop, sammen med musikk som er mer tilpasset brukernes smak basert på tidligere preferanser.

Oversetting og tilrettelegging av Michael Undseth-Gyllenberg. © Europa Unionen, 2020 – Kilde: CORDIS, cordis.europa.eu.