science >> Wetenschap >  >> Elektronica

Nieuwe tool pakt reproduceerbaarheidscrisis in de wetenschap aan

Onderzoekers van het Institute for Molecular Engineering en Argonne National Laboratory hebben een platform ontwikkeld om doorzoekbare gegevens van publicaties van wetenschappers te verstrekken om het probleem van reproduceerbaarheid aan te pakken. Krediet:shutterstock.com

De wetenschappelijke gemeenschap worstelt met het probleem van de reproduceerbaarheid van gegevens - een belangrijke stap in het proces dat richting geeft aan hoe de meeste wetenschappers kennis creëren in hun vakgebied.

Volgens een recent onderzoek, meer dan 70 procent van de onderzoekers heeft geprobeerd de gepubliceerde experimenten van een andere wetenschapper te reproduceren, maar dit is niet gelukt. Meer dan de helft slaagde er zelfs niet in om hun eigen onderzoek met succes te reproduceren. Dat roept de vraag op:als een experiment of simulatie niet kan worden gereproduceerd, was het in de eerste plaats succesvol?

Onderzoekers van het Institute for Molecular Engineering van de University of Chicago en het Argonne National Laboratory willen dit probleem helpen oplossen met een nieuw softwareplatform waarmee wetenschappers de gegevens van elk van hun publicaties op een doorzoekbare manier kunnen delen. In de afgelopen twee jaar hebben ze een tool ontwikkeld voor het cureren, het ontdekken en verkennen van reproduceerbare wetenschappelijke artikelen genaamd Qresp, die nu beschikbaar is voor openbaar gebruik.

"Ons doel is om het wetenschappelijke proces te versnellen en de tijd te verminderen die nodig is om kennis tussen onderzoekers te delen, " zei Giulia Galli, de Liew Family hoogleraar Molecular Engineering. "Door data beschikbaar en doorzoekbaar te maken, we hopen het voor onderzoekers gemakkelijker te maken om resultaten te reproduceren."

Het proces van het reproduceren van wetenschappelijke resultaten blijft een complexe kwestie. gepubliceerde artikelen, die als pdf online beschikbaar zijn, bevatten vaak niet genoeg informatie over de resulterende gegevens en processen zodat anderen de resultaten kunnen reproduceren, en gegevens worden vaak niet ter beschikking gesteld aan de wetenschappelijke gemeenschap.

"Veel papieren bevatten niet voldoende details om de gegevens te kunnen reproduceren, " zei Marco Govoni, assistent-wetenschapper bij Argonne en gastwetenschapper aan de Universiteit van Chicago. "En vaak zijn de meeste gegevens die in de krant zijn verkregen en gebruikt, helemaal niet beschikbaar. Om die gegevens te krijgen, soms moet je schrijven naar de auteurs van het papier. Het zou niet zo moeilijk moeten zijn, en het mag geen ad-hocproces zijn."

Met Qresp, onderzoekers hopen een aantal van de huidige problemen bij het open en reproduceerbaar maken van gegevens te helpen verlichten. De software leidt gebruikers door het proces van het organiseren en delen van hun gegevens, inclusief datasets en grafieken. Alle velden zijn aanpasbaar, onderzoekers hun gegevens op de beste manier laten beheren volgens het artikel dat ze hebben geschreven. Het platform is ook beschikbaar voor iedereen die gegevens wil verkennen die door andere onderzoekers zijn gedeeld.

Hoewel er verschillende pogingen zijn gedaan om grote datasets te beheren, de meeste van die inspanningen steunen op een centrale repository, terwijl Qresp vertrouwt op een gedistribueerd model. Binnen het platform, onderzoekers uploaden geen gegevens, maar hosten hun eigen samengestelde gegevens en beslissen wat ze willen delen. Op die manier, Qresp biedt een schaalbare oplossing voor het delen van data, zei Govoni.

Onderzoekers die deze extra stap niet willen zetten om hun gegevens direct na publicatie te delen, moeten nadenken over de voordelen van het organiseren en delen van gegevens voor hun eigen groep, zei Galli. Studenten in haar groep beheren nu automatisch hun data in Qresp als een extra stap in hun wetenschappelijk onderzoek. Qresp faciliteert de overdracht van informatie en kennis tussen projecten uitgevoerd door verschillende studenten, en tussen onderzoekers die blijven en degenen die de groep verlaten.

"Het hele proces van het delen van gegevens in de groep is veel efficiënter geworden, " zei Galli, die ook hoogleraar scheikunde is en senior wetenschapper bij Argonne.

Met het gebruik en de adoptie van Qresp door een brede gemeenschap van onderzoekers, gepubliceerde artikelen kunnen veel interactiever worden - een levende interface waar, door op een afbeelding te klikken, een onderzoeker kan de dataset achter de resultaten zien.

"We willen de lat hoger leggen voor het reproduceren van wetenschappelijke resultaten, en we willen verder gaan dan het publiceren van pdf's en naar het delen van onderzoek dat veel interactiever en nuttiger is, ' zei Govoni.