Onderzoekers hebben de beoordeling van consistentie in meta-analyse verbeterd. De verbeterde consistentiemaat houdt rekening met statistische power, en het heeft de potentie om de interpretatie van meta-analyses te veranderen. De nieuwe maatregel is gepubliceerd in de Europees tijdschrift voor wetenschapsfilosofie .

Meta-analyse verwijst naar het wiskundig combineren van resultaten van verschillende onderzoeken. Vooral, geneeskunde beschouwt meta-analyses als het hoogste niveau van bewijs. Als een meta-analyse een behandeling aanraadt, de behandeling wordt hoogstwaarschijnlijk ingeburgerd.

Meta-analyse moet op zich consistent zijn. Conventionele maatstaven voor consistentie zijn duidelijk voorstander van grote studies en beschouwen statistische kracht niet als een bron van inconsistentie. Statistische power geeft het vermogen van een onderzoek aan om statistisch significante resultaten te detecteren, zoals effecten van een behandeling.

"Het herhalen van een onderzoek met een hoog statistisch vermogen is moeilijker dan het herhalen van een onderzoek met een laag statistisch vermogen. Onze voorgestelde maat voor inconsistentie benadrukt dit aspect, " zegt datamanager Ari Voutilainen van de Universiteit van Oost-Finland, een van de vier ontwikkelaars van de maatregel.

"Als een meta-analyse studies combineert die qua statistische power van elkaar verschillen, de meta-analyse is inconsistent, zelfs als de variaties binnen de studie laag zijn. Bovendien, het is belangrijk dat studies met de hoogste statistische power het sterkste effect hebben op de resultaten van een meta-analyse. Onze voorgestelde maatregel accentueert ook vanuit dit oogpunt de betekenis van statistische power."

Wetenschappelijke tijdschriften publiceren jaarlijks ongeveer een half miljoen meta-analyses. Bijgevolg, de verbeterde consistentiemaat kan een substantieel effect hebben op het onderzoek in het algemeen.