Een team van onderzoekers van DeepMind, University College en Harvard University hebben ontdekt dat lessen die zijn geleerd bij het toepassen van leertechnieken op AI-systemen, kunnen helpen verklaren hoe beloningsroutes in de hersenen werken. In hun artikel gepubliceerd in het tijdschrift Natuur , de groep beschrijft het vergelijken van het leren van distributieversterking in een computer met de verwerking van dopamine in het muizenbrein, en wat ze ervan geleerd hebben.

Voorafgaand onderzoek heeft aangetoond dat dopamine dat in de hersenen wordt geproduceerd, betrokken is bij de verwerking van beloningen - het wordt geproduceerd wanneer er iets goeds gebeurt, en de uitdrukking ervan resulteert in gevoelens van plezier. Sommige onderzoeken hebben ook gesuggereerd dat de neuronen in de hersenen die reageren op de aanwezigheid van dopamine allemaal op dezelfde manier reageren:een gebeurtenis zorgt ervoor dat een persoon of een muis zich goed of slecht voelt. Andere studies hebben gesuggereerd dat de neuronale respons meer een gradiënt is. In deze nieuwe poging de onderzoekers hebben bewijs gevonden dat de laatste theorie ondersteunt.

Distributioneel versterkend leren is een vorm van machine learning op basis van versterking. Het wordt vaak gebruikt bij het ontwerpen van games zoals Starcraft II of Go. Het houdt goede zetten versus slechte zetten bij en leert het aantal slechte zetten te verminderen, het verbeteren van de prestaties naarmate het meer speelt. Maar dergelijke systemen behandelen niet alle goede en slechte zetten hetzelfde - elke zet wordt gewogen zoals deze wordt geregistreerd en de gewichten maken deel uit van de berekeningen die worden gebruikt bij het maken van toekomstige zetkeuzes.

Onderzoekers hebben opgemerkt dat mensen een vergelijkbare strategie lijken te gebruiken om hun spelniveau te verbeteren, ook. De onderzoekers in Londen vermoedden dat de overeenkomsten tussen de AI-systemen en de manier waarop de hersenen beloningsverwerking uitvoeren waarschijnlijk vergelijkbaar waren, ook. Om erachter te komen of ze juist waren, ze deden experimenten met muizen. Ze plaatsten apparaten in hun hersenen die in staat waren om reacties van individuele dopamine-neuronen te registreren. De muizen werden vervolgens getraind om een ​​taak uit te voeren waarbij ze beloningen ontvingen voor het reageren op een gewenste manier.

Uit de reacties van muisneuronen bleek dat ze niet allemaal op dezelfde manier reageerden, zoals eerdere theorie had voorspeld. In plaats daarvan, ze reageerden op betrouwbare verschillende manieren - een indicatie dat de niveaus van plezier die de muizen ervoeren meer een gradiënt waren, zoals het team had voorspeld.

© 2020 Wetenschap X Netwerk