Een Europees team van onderzoekers, waaronder Universidad Politécnica de Madrid, heeft een open source toolbox ontwikkeld om emoties in teksten te beoordelen, audio en video's.

MixedEmotions Toolkit is een set open-source tools die emoties analyseert. Deze toolbox is het resultaat van het onderzoeksproject MixedEmotions. Het doel van dit project is het automatisch herkennen van emoties door middel van tekst, audio- en videoverwerking.

Onze acties worden beïnvloed door zowel onze stemming als de manier waarop we anderen waarnemen. Er is een groeiende vraag naar automatische analyse van emoties op verschillende gebieden. De mogelijke toepassingen zijn breed, inclusief callcenters, slimme omgevingen, merkreputatieanalyse en ondersteunende technologie.

Eerst, analysetools kunnen zeer complex zijn. Emotiedetectie kan leeftijd vereisen, geslacht of gezichtsherkenning. Tweede, de analyse vereist ook zowel voorkennis als taalkundige bronnen die niet altijd openbaar zijn, en ten derde, deze tools zijn meestal ontworpen in één taal, algemeen in het Engels.

Het aanpassen van deze tool aan andere talen is een zware taak die specifieke bronnen voor elke taal vereist. De combinatie van deze zaken verkleint het aanbod aan vrij beschikbare tools.

Het doel van MixedEmotions was om het aantal van deze tools te vergroten. De ontwikkelde tools zijn aangepast aan verschillende Europese talen om de multiculturele en meertalige visie van de huidige technologie te herkennen.

Om het nut van deze tools aan te tonen, de onderzoekers testten ze in de context van drie concrete use-cases:een smart TV-applicatie die emotiegedreven aanbevelingen geeft, een callcenter-monitoringsysteem dat de stemming en de reactie van klanten bij elk gesprek beoordeelt, en een online merkreputatiesysteem voor bedrijven die meningen en reacties van klanten bestuderen.

De Intelligent System Group (GSI) van UPM droeg bij aan het project. Eerst, zij leidden de modellering van gekoppelde gegevens voor services en semantische woordenschat. Als resultaat, alle projecttools gebruiken dit type vocabulaire op basis van de principes van gekoppelde gegevens.

Dit vergemakkelijkt de interoperabiliteit, omdat analyses in verschillende modaliteiten worden uitgevoerd met behulp van fusietechnieken. Fernando Sanchez, een GSI-onderzoeker zegt, "Gezien de relevantie van dit probleem, we hebben een gemeenschapsgroep ontwikkeld op het World Wide Web-consortium (W3C), een internationale gemeenschap gericht op de ontwikkeling van standaarden om de webgroei op lange termijn te verzekeren, om deze modelleringssemantiek te bespreken en de resultaten over te dragen."

Tweede, de GSI-groep ontwikkelde Senpy, een softwarepakket voor het ontwikkelen en publiceren van diensten en hulpmiddelen voor emotieanalyse, voornamelijk gericht op tekstverwerking. Eindelijk, de groep verbeterde de emotieanalyse door middel van sociale context, dat is, aanvullende informatie over de gebruiker, de inhoud en verschillende relaties in de sociale netwerken.