AI Songcontest: Creatieve Synergie met AI
Vincent Koops werkt als senior data scientist bij RTL en is mede-organisator en jurylid van dit bijzondere songfestival.
Transcript:
Ik ben Vincent Koops, projectleider bij de AI songcontest en senior datascientist bij RTL Nederland. Na mijn studie muziekcompositie aan de HKU, hoorde ik dat er aan de Universiteit van Utrecht onderzoek werd gedaan naar muziek en kunstmatige intelligentie. Dat leek me heel erg interessant dus dat ben ik daar gaan studeren. Ik ben uiteindelijk daar ook gepromoveerd op de combinatie tussen kunstmatig intelligentie en muziek. Het idee van de AI songcontest is dat mensen teams vormen. Die teams bestaan meestal uit AI wetenschappers en muzikanten, die samen gaan kijken of ze met kunstmatige intelligentie een nummer kunnen maken. Het uiteindelijke doel is dat ze een liedje inleveren, dus dat is gewoon een liedje wat je kan horen, en een document waarin ze beschrijven hoe ze kunstmatige intelligentie hebben gebruikt in het maken van hun nummer. De bedoeling daarvan is dat het liedje wordt beoordeeld door het publiek. Ze kunnen online stemmen op een aantal categorieën, en aangeven wat zij het leukste liedje vinden. Een professionele professionele jury van AI wetenschappers, die kijkt naar het document en kijkt in hoeverre de AI die gebruikt is geholpen heeft in het creatieve proces, en hoe hun creativiteit op een nieuw of hoger niveau is getild door het gebruiken van kunstmatige intelligentie. Uiteindelijk nemen we de punten van de jury, en die van het publiek samen en die tellen allebei voor 50% uiteindelijk voor wie als winnaar uit de bus komt. Een hele interessante is: In het eerste jaar was er een team dat bestond uit Duitse en Amerikaanse AI wetenschappers en een Amerikaanse zangeres. Dat zijn Dadabots, en Portrait XO. Die hebben samen een nummer gemaakt waarvan ik denk dat het heel goed weergeeft hoe je kunstmatige intelligentie kunt gebruiken om tot nieuwe ideeën te komen. Wat ze hebben geprobeerd is om met een hele grote dataset van liedjes een model te trainen dat automatisch vanuit het niks een nieuw liedje zou kunnen genereren. Specifiek het geluid van een liedje, dus ze hebben echt het geluid gepakt van bestaande liedjes en ze probeerden in één keer nieuw geluid te genereren. Dit is een proces wat we wel meer zien bij teams, dat ze een manier proberen te vinden om vanuit het niks een liedje te genereren en dat gaat altijd mis. Daar zijn ze altijd allemaal heel slecht in. Maar dit team had een heel interessant proces waarin ze wel de output gebruikten. Dus dat model genereerde eigenlijk best wel slechte melodieën en slechte teksten, maar ze gingen daar heel gedetailleerd naar luisteren, en ze hoorden daar een stem in, en ze hoorden daar teksten in, en ze hoorden daar een melodie in, en die hebben ze gebruikt als inspiratie om uiteindelijk een eigen nummer te schrijven waarin ze ook de output van die modellen hebben samengevoegd. Dus hebben ze eigenlijk voor mijn gevoel wel echt samengewerkt met AI. Deels als inspiratie, maar deels ook dat het terug komt in het uiteindelijke nummer dat ze geschreven hebben, en dat ze samen een heel gaaf nummer hebben gemaakt. Uiteindelijk werden ze tweede. Ze waren favoriet bij de jury, maar het publiek vond een ander nummer beter..