De manier waarop peer review werkt in de sociale wetenschappen

Wat betekent het als een professioneel artikel peer-reviewed is?

Is peerreview blinde gerechtigheid?.

Markus Daams / Flickr / CC BY 2.0

Peer review, althans in opzet, is de manier waarop de redacteuren van wetenschappelijke tijdschriften proberen de kwaliteit van artikelen in hun publicaties hoog te houden en ervoor te zorgen (of proberen te verzekeren) dat slecht of misleidend onderzoek niet wordt gepubliceerd. Het proces is verbonden met politieke en economische kwesties met betrekking tot: dienstverband en loonschalen, in die zin dat een academicus die deelneemt aan het peer review-proces (hetzij als auteur, redacteur of recensent) wordt beloond voor die deelname aan een verhoging van de reputatie die kan leiden tot een verhoging van de loonschalen, in plaats van rechtstreekse betaling voor verleende diensten.

Met andere woorden, geen van de mensen die betrokken zijn bij het reviewproces wordt betaald door het tijdschrift in kwestie, met uitzondering (misschien) van een of meer redactiemedewerkers. De auteur, redacteur en recensenten doen dit allemaal voor het prestige dat bij het proces betrokken is; ze worden over het algemeen betaald door de universiteit of het bedrijf waar ze in dienst zijn, en in veel gevallen is die beloning afhankelijk van het verkrijgen van publicatie in peer-reviewed tijdschriften. De redactionele ondersteuning wordt doorgaans deels verzorgd door de universiteit van de redactie en deels door het tijdschrift.

Het beoordelingsproces

De manier waarop academische peer review werkt (althans in de sociale wetenschappen), is dat een wetenschapper een artikel schrijft en dit ter beoordeling voorlegt aan een tijdschrift. De editor leest het door en vindt tussen drie en zeven andere geleerden om het te herzien.

De recensenten die zijn geselecteerd om het artikel van de geleerde te lezen en te becommentariëren, worden door de redacteur gekozen op basis van hun reputatie op het specifieke gebied van het artikel, of dat ze worden genoemd in de bibliografie , of als ze persoonlijk bekend zijn bij de redactie. Soms stelt de auteur van een manuscript enkele recensenten voor. Zodra er een lijst van recensenten is opgesteld, verwijdert de redacteur de naam van de auteur uit het manuscript en stuurt een kopie door naar de gekozen stevige harten. Dan verstrijkt de tijd, veel tijd, in het algemeen tussen twee weken en enkele maanden.

Wanneer de reviewers allemaal hun opmerkingen hebben teruggestuurd (rechtstreeks op het manuscript of in een apart document), neemt de redacteur een voorlopige beslissing over het manuscript. Moet het worden geaccepteerd zoals het is? (Dit is zeer zeldzaam.) Moet het worden geaccepteerd met wijzigingen? (Dit is typisch.) Moet het worden afgewezen? (Dit laatste geval is ook vrij zeldzaam, afhankelijk van het tijdschrift.) De redacteur verwijdert de identiteit van de recensenten en stuurt de opmerkingen en haar voorlopige beslissing over het manuscript naar de auteur.

Als het manuscript met wijzigingen is geaccepteerd, is het aan de auteur om wijzigingen aan te brengen totdat de redacteur ervan overtuigd is dat aan het voorbehoud van de reviewers is voldaan. Uiteindelijk wordt het manuscript, na een aantal heen-en-weerrondes, gepubliceerd. De periode van indiening van een manuscript tot publicatie in een wetenschappelijk tijdschrift duurt over het algemeen van zes maanden tot meer dan een jaar.

Problemen met Peer Review

Problemen die inherent zijn aan het systeem zijn onder meer het tijdsverloop tussen indiening en publicatie, en de moeilijkheid om recensenten te vinden die de tijd en de neiging hebben om doordachte constructieve beoordelingen te geven. Kleine jaloezie en uitgesproken politieke meningsverschillen zijn moeilijk te bedwingen in een proces waarin niemand verantwoordelijk wordt gehouden voor een specifieke reeks opmerkingen over een bepaald manuscript, en waar de auteur niet in staat is om rechtstreeks met haar recensenten te corresponderen. Het moet echter gezegd worden dat velen beweren dat de anonimiteit van het blind review-proces een recensent in staat stelt vrijuit te zeggen wat hij of zij denkt over een bepaald artikel zonder angst voor represailles.

De ontluikende internetten in het eerste decennium van de 21e eeuw heeft een enorm verschil gemaakt in de manier waarop artikelen worden gepubliceerd en beschikbaar gesteld: het peer review-systeem is om een ​​aantal redenen vaak problematisch in deze tijdschriften. Open access publiceren - waarbij gratis concept- of voltooide artikelen worden gepubliceerd en voor iedereen beschikbaar worden gesteld - is een prachtig experiment dat wat problemen heeft gehad bij het opstarten. In een paper uit 2013 in Wetenschap , beschreef John Bohannon hoe hij 304 versies van een paper over een nep-wondermiddel inleverde bij open-accesstijdschriften, waarvan meer dan de helft werd geaccepteerd.

Recente bevindingen

In 2001 publiceerde het tijdschrift Gedragsecologie veranderde zijn peer-reviewsysteem van een systeem dat de auteur identificeerde in reviewers (maar reviewers bleven anoniem) in een volledig blind systeem, waarin zowel de auteur als reviewers anoniem zijn voor elkaar. In een artikel uit 2008 rapporteerden Amber Budden en collega's dat statistieken die de artikelen vergelijken die voor en na 2001 voor publicatie werden geaccepteerd, aangaven dat aanzienlijk meer vrouwen in BE zijn gepubliceerd sinds het dubbelblinde proces begon. Vergelijkbare ecologische tijdschriften die in dezelfde periode enkelblinde beoordelingen gebruiken, duiden niet op een vergelijkbare groei van het aantal door vrouwen geschreven artikelen, waardoor vooraanstaande onderzoekers geloven dat het proces van dubbelblinde beoordelingen zou kunnen helpen bij de 'glazen plafond' effect.

bronnen

• Bohannon, John. Wie is er bang voor peerreview? Wetenschap, vol. 342, nee. 6154, American Association for the Advancement of Science (AAAS), oktober 2013, blz. 60-65.
• BUDDEN, A., et al. Dubbelblinde recensie bevordert een grotere vertegenwoordiging van vrouwelijke auteurs . Trends in ecologie en evolutie, vol. 23, nee. 1, Elsevier BV, januari 2008, blz. 4-6.
• Carver, Maarten. Archeologische tijdschriften, academici en open access . European Journal of Archeology, vol. 10, nee. 2-3, Cambridge University Press (CUP), 2007, blz. 135-48.
• Chilidis, Konstantinos. Nieuwe kennis versus consensus - een kritische opmerking over hun relatie op basis van het debat over het gebruik van vatengewelven in Macedonische graven . European Journal of Archeology, vol. 11, nee. 1, Cambridge University Press (CUP), 2007, blz. 75-103.
• Actief, Adam. Een nieuwe methode en maatstaf om het peer review-proces van wetenschappelijke tijdschriften te evalueren . Publishing Research Quarterly, vol. 30, nee. 1, Springer Science and Business Media LLC, december 2013, blz. 23-38.
• Gould, Thomas H.P. De toekomst van peer review: vier mogelijke opties voor niets . Publishing Research Quarterly, vol. 28, nee. 4, Springer Science and Business Media LLC, oktober 2012, blz. 285–93.
• Vanlandingham SL. Buitengewone voorbeelden van misleiding in peer review: brouwsel van de Dorenberg Skull Hoax en gerelateerd wangedrag. 13e Wereld Multi-Conferentie over Systemica, Cybernetica en Informatica: Internationaal Symposium over Peer Reviewing. Orlando, Florida. 2009.
• Vesnic-Alujevic, Lucia. Peer Review en wetenschappelijke publicaties in Times of Web 2.0. Publishing Research Quarterly, vol. 30, nee. 1, Springer Science and Business Media LLC, februari 2014, blz. 39-49.
• Weiss, Brad. Toegang openen: publiek, publicatie en een pad naar inclusie . Culturele Antropologie, vol. 29, nee. 1, American Anthropological Association, februari 2014, blz. 1-2.