science >> Wetenschap >  >> Elektronica

Instrumenten vertalen, stijlen, genres bij Facebook Artificial Intelligence Research

De architectuur van ons netwerk. Het verwarringsblok (stippellijn) wordt alleen tijdens de training gebruikt. Krediet:arXiv:1805.07848 [cs.SD]

Pompt Facebook het volume op over wat AI kan betekenen voor de toekomst van muziek? Je kunt beslissen nadat je hebt gekeken naar wat wetenschappers van Facebook AI Research hebben uitgespookt. Een aantal sites, waaronder: Het volgende web hebben gemeld dat ze een neuraal netwerk hebben onthuld dat in staat is om muziek van één stijl te vertalen, genre, en instrumentarium naar een ander.

Je kunt hun krant bekijken, "A Universal Music Translation Network" door auteurs Noam Mor, Leeuw Wolf, Adam Polyak, Yaniv Taigman, Facebook AI-onderzoek.

Het papier staat op arXiv.

Populaire wetenschap , een andere van de sites die interesse tonen, droeg een kop die suggereerde dat je je slechte fluittoon zou kunnen nemen en het als Mozart zou laten klinken.

Een video met de aanvullende audiosamples van de auteurs laat je horen wat ze deden met samples variërend van symfonie, strijkkwartet, naar geluiden van Afrika, Elvis en Rihanna samples en zelfs menselijk gefluit.

Tristan Groen, Het volgende web :"De AI neemt één invoer, zoals een symfonieorkest dat Bach speelt, en vertaalt het in iets anders, zoals hetzelfde lied gespeeld op een piano in de stijl van Beethoven, bijvoorbeeld."

In een voorbeeld, ze zeiden dat ze de audio van een symfonie van Mozart, uitgevoerd door een orkest, hadden omgezet in een audio in de stijl van een pianist die Beethoven speelt.

In principe, er is een neuraal netwerk aan het werk gezet om de muziekstijl te veranderen. Luisteren naar voorbeelden, men vraagt ​​zich af hoe het AI-proces eruit ziet om uit te zoeken hoe de muziek van het ene werk naar het andere kan worden overgebracht? Betreft het een matched pitch? Muzieknoten onthouden? Greene zei nee, hun benadering is een "niet-gesuperviseerde leermethode" met behulp van "semantische interpretatie op hoog niveau". Greene voegde eraan toe dat je zou kunnen zeggen "het speelt be ear". De methode is zonder toezicht, in die zin dat het niet afhankelijk is van toezicht in de vorm van gematchte samples tussen domeinen of muzikale transcripties, zei het team.

Noem het 'strategische verwarring'. De auteurs blogden hierover op de Facebook Research-site. Om het systeem in staat te stellen muziek op een ongecontroleerde, geïmproviseerde, manier te transformeren, ze "opzettelijk de muzikale input vervormd, met iets dat een domeinverwarringsnetwerk wordt genoemd. Dit voorkomt dat de AI domeinspecifieke informatie codeert. Met andere woorden, het systeem wordt gedwongen de unieke aspecten van de stijl van een opgenomen nummer te negeren, genre en instrumenten, en maak vertalingen op basis van de kernstructuur van de muziek."

Populaire wetenschap vertaalden hun methode, zeggen:"De AI leest geen muzieknoten - het verandert gewoon een bepaald audiobestand in code en decodeert het vervolgens in een nieuwe versie."

Greene vertaalde ook, uitleggend dat dit "een complexe methode van automatische codering was waarmee het netwerk audio kan verwerken van ingangen waarop het nooit is getraind." Populaire wetenschap citeerde Lior Wolf, een van de co-auteurs van een nieuwe studie. "We willen het menselijk vermogen om muziek te horen nabootsen, en herhaal het, hetzij door te fluiten of door een instrument te bespelen."

In een groter geheel, men kan de AI-poging om stijlen en instrumenten te vertalen markeren als een ander zeker teken van een kruising tussen AI en muziek die onze pejoratieve kijk op 'machinemuziek' kan veranderen als inferieur en ingeblikt.

Muziek Bondgenoot had eerder deze maand een interessant rapport en een van de mensen die in het artikel worden genoemd, was auteur, musicus en pedagoog, Marcus O'Dair van de Middlesex University. O'Dair noemde drie categorieën van deze technologie:AI's die muziek componeren; AI's werken samen met mensen om samen te componeren; en AI's die muziek kunnen remixen of aanpassen voor een specifiek doel.

Hij voegde eraan toe dat de categorie AI's die muziek componeerde verre van sciencefiction was. "Ik ben in de kamer geweest waar mensen twee nummers speelden:een van een AI en een van een mens. En mensen konden het verschil niet zien, "zei O'Dair. "Ik denk niet dat dat betekent dat een AI morgen Beethovens Vijfde gaat schrijven, maar voor zaken als bibliotheekmuziek... is dat zeker interessant."

Wat biedt Facebook de toekomst met dit AI-onderzoek naar muziek? De auteurs van het artikel hebben de vraag in de blog behandeld, namelijk:geen plannen voor een specifiek product of functie op basis van dit werk. Niettemin, ze zeiden dat het onderzoek een "sterke indicator was van hoe AI spoedig menselijke creativiteit zou kunnen stimuleren. Van het componeren van hele symfonieën met je stem tot het transformeren van een eenvoudige gitaarlick of MIDI-deuntje in gelaagde zang, deze benadering zou songwriting kunnen democratiseren, en muziekproductie toegankelijker te maken."

© 2018 Tech Xplore