science >> Wetenschap >  >> Elektronica

Deep-learning systeem genereert specifieke op genres gebaseerde muziek

In het kader van het BertsoBot-project zijn twee nieuwe automatische methoden voor het genereren en classificeren van muziek ontstaan. Krediet:Universiteit van Baskenland

Izaro Goienetxea, een UPV/EHU-onderzoeker, heeft een methode ontwikkeld om automatisch nieuwe melodieën te genereren op basis van een verzameling of corpus bestaande uit melodieën die in bertso worden gebruikt - een vorm van extempore, gezongen, Baskische verzen maken. Ze heeft ook een nieuwe manier gepresenteerd om muziekstukken weer te geven, en ontwikkelde een nieuwe methode voor het automatisch classificeren van muziek. PLOS EEN heeft gerapporteerd over het onderzoek dat is uitgevoerd in de onderzoeksgroep Robotics and Autonomous Systems van de UPV/EHU.

Een van de onderzoekslijnen van de onderzoeksgroep Robotics and Autonomous Systems (RSAIT) van de faculteit Informatica van de UPV/EHU is het ontwikkelen van interactie tussen mens en machine of robots. Het BertsoBot-project wordt beschouwd als een groot project "waarin we robots verzen laten zingen, zei de leider van de groep, Basilio Sierra. De onderzoeksgroep werkt aan het begrijpen van spraaksignalen, computer visie, browsen, en het genereren van nieuwe muzikale melodieën.

Izaro Goienetxea, een onderzoeker in de groep en een Ph.D. student, houdt zich bezig met twee onderzoeksgebieden:het automatisch genereren van muziek en het automatisch classificeren van muziek. De onderzoeker zegt dat er veel methoden zijn ontwikkeld op basis van grammatica of statistische modellen voor het genereren van muziek, maar "de samenhang van de melodieën zal in overweging moeten worden genomen om melodieën te kunnen genereren die gemakkelijk te begrijpen zijn. We zouden er zeker van moeten zijn dat bepaalde segmenten worden herhaald binnen de nieuwe melodieën, niet alleen op nootniveau, maar ook op andere, meer abstracte melodische niveaus."

Hoewel het werk zijn oorsprong vond in de generatie van muziek, de resultaten hebben ertoe geleid dat ze manieren heeft onderzocht om muziek te classificeren. "We hebben steeds meer muziek beschikbaar op internet, en een aspect dat belangrijk wordt, is de mogelijkheid om automatische classificaties van muziek te produceren, zodat grote muziekcollecties kunnen worden geproduceerd, ' zei Goienetxea.

Vergelijkbare bertso-melodieën classificeren

In een artikel gepubliceerd in de PLOS EEN logboek, twee nieuwe methoden ontwikkeld als resultaat van dat onderzoek zijn gepresenteerd. Eerst, een muzikale classificatiemethode volgens genre, gebaseerd op een nieuwe manier om muziek weer te geven en werken door gelijkaardige bertso-melodieën te groeperen. Er doorheen, "we analyseren een deuntje, en we zeggen waar het op lijkt - met andere woorden, in welk genre we het kunnen indelen, ' zei Goienetxea.

Deze clusters worden ook gebruikt om nieuwe melodieën te genereren in de "stijl" van de melodieën in deze clusters. "Deze nieuwe melodieën zijn vergelijkbaar met de originele, ' zei Goienetxea.

"En door meer dan één muziekmodel op te nemen, een nieuwe melodie, een nieuwe versie, wat de vermenging van hen zal zijn, zal worden gegenereerd, ", voegde Siera eraan toe.

Om haar werk te ontwikkelen, de onderzoeker gebruikte een corpus of verzameling van bertso-melodieën. "We stellen een manier voor waarop bertso-melodieën kunnen worden weergegeven en vervolgens hoe deze melodieën kunnen worden geclassificeerd. We hebben een methode bedacht die vervolgens kan worden toegepast op een ander soort corpus, naar een ander soort muziek, " zei Goienetxea. Volgens de onderzoeker, ze zijn erin geslaagd om automatisch nieuwe bertso-melodieën te genereren, "maar de methode leent zich ook voor toepassingen in muziektherapie, muzikale compositieleer- of compositieprogramma's, onder andere."