Studentevaluatie van het onderwijs, of SET, wordt vaak gebruikt in het hoger onderwijs als feedback voor de prestaties van cursusleiders. Studenten beoordelen hun docenten kwantitatief, het scoren van hun prestaties op een numerieke schaal op vragen als "Leraar is voorbereid op de les" en "Ik heb veel geleerd van deze leraar."

Terwijl numerieke beoordelingen een tastbare meting zijn van de klasprestaties van een instructeur, ze meten alleen wat de vragen vragen. Open vragenlijsten zouden het grote geheel veel beter weergeven, maar ze worden relatief weinig gebruikt met betrekking tot het verkrijgen van feedback van studenten om manieren te identificeren om de manier waarop een cursus wordt gegeven te verbeteren.

Waarom is dat?

"Stel dat ik zo'n 300 studenten lesgeef, 400 studenten en deze studenten geven me feedback - het is een grote dataset en het handmatig verkrijgen van inzichten die belangrijk zijn voor het veranderen van mijn onderwijsproces of het verbeteren van mijn onderwijsproces is vervelend en nauwgezet, " legt Swapna Gottipati uit, Universitair Docent Informatiesystemen (Onderwijs) bij SMU. "Vandaar, Ik ben afhankelijk van een soort gereedschap of machine, en dit is zo'n poging om de data-inzichten zeer snel te genereren voor de faculteit om de inzichten uit kwalitatieve feedback te halen."

Aspecten van feedback

Professor Gottipati verwijst naar haar recent afgeronde project "Learning Analytics on Qualitative Student Feedback to Improve Teaching and Learning in Higher Education, " die werd ondersteund door het Tertiair Onderwijs Onderzoeksfonds van het Ministerie van Onderwijs (MOE). Gebruikmakend van het interne feedbacksysteem van SMU dat de evaluaties van studenten aan het einde van de cursus verzamelt, Professor Gottipati stelt een leeranalysesysteem voor genaamd het "Course Feedback Analytics System (CFAS)" om "faculteitsleden te helpen diepere inzichten te krijgen in hun onderwijspraktijken, curriculum en beoordelingsontwikkeling."

Gebruik maken van natuurlijke taalverwerking (NLP), Professor Gottipati onderzocht vijf hoofdaspecten van studentfeedback tussen kwantitatieve en kwalitatieve feedback, waaronder onderwerpen, gevoelens, Suggesties, Tijd, en Correlatie.

"Ten eerste, het is het onderwerp, wat zijn de onderwerpen waar de leerlingen over praten, ', vertelt ze aan het Office of Research and Tech Transfer. 'Ten tweede, het gaat om het rangschikken van de onderwerpen en problemen die het belangrijkst zijn omdat we ze willen prioriteren.

"De derde is om de percepties te begrijpen, zoals gevoelens of meningen van de studenten. Neem de manier van lesgeven van een faculteit als voorbeeld - misschien is hij of zij niet erg boeiend of spreekt hij of zij erg langzaam, of met een zeer lage stem. Dit zijn allemaal negatieve feedback. Dat heet sentiment.

"En de laatste zijn de snelle samenvattingen van de opmerkingen. Dit betekent een visualisatie of een soort gebruiksvriendelijke visuals of rapporten die ons kunnen helpen te identificeren wat moet worden aangepakt."

Professor Gottipati legt uit dat NLP-modellen gebaseerd zijn op regels en grammatica, en de regels die in een model zijn ingebouwd, kunnen bijvoeglijke naamwoorden extraheren en waarnaar deze bijvoeglijke naamwoorden verwijzen. Het kan ook de onderwerpen identificeren waarover studenten in hun feedback schrijven.

De informatie gebruiken

Alle gegevens die zijn geëxtraheerd uit open antwoorden, zouden weinig waard zijn als ze niet konden worden gebruikt. Daartoe, CFAS will feature what Professor Gottipati calls interactive 'doughnut' graphics that are not just basic bar graphs and pie charts but those that "expand and pop out the respective negative or positive feedback for the given topics and so on."

uiteindelijk, these will help not only the course instructor in fine-tuning their teaching, but will also help course managers and university administrators with macro-level management of the curriculum.

"During our performance evaluations, our reporting officers might give suggestions on how to improve the courses we teach, " says Professor Gottipati, who is also the Interim Associate Dean of Undergraduate Education at the School of Information Systems (SIS). "They should be able to know what happened both within the course, as well as about the course at a macro level. If they are aware of the positive comments provided for other courses, these can also be shared with other faculty for improvement in their teaching."