Raziskovanje "vrtenja" v znanstvenih revijah
Nedavna študija je raziskovala "spin" v raziskavah o psihiatriji in psihologiji. Avtorji študije so našli odmev v več kot polovici povzetkov, ki so jih analizirali.Kakšen vpliv bi to lahko imelo na odločitve zdravnikov?
Ko se novice in mediji borijo za poglede, lahko včasih pretiravajo z naslovi in vsebino, da bralca zvabijo vase.
Čeprav mnogi menijo, da so znanstvene revije eden najbolj zanesljivih virov informacij, pa niso imuni na željo po branju in skupni rabi.
Nedavna študija je bila namenjena oceni, koliko "spin" avtorji so uporabili v povzetkih raziskovalnih člankov, objavljenih v revijah za psihologijo in psihiatrijo.
Za izvlečke so se odločili, ker povzemajo celoten članek, zdravniki pa jih pogosto uporabljajo za informiranje o zdravniških odločitvah.
Kaj je spin?
V tej študiji avtorji opisujejo svojo definicijo spina na naslednji način:
"[Uporablja posebne strategije poročanja, ne glede na motiv, da poudari, da je eksperimentalno zdravljenje koristno, kljub statistično nepomembni razliki za primarni izid, ali da bralca odvrne od statistično nepomembnih rezultatov."
Avtorji so svoje ugotovitve objavili v reviji BMJ na dokazih temelječa medicina. Pregledali so članke iz šestih najboljših revij o psihiatriji in psihologiji za obdobje 2012–2017.
Vključene revije Psihiatrija JAMA, Ameriški časopis za psihiatrijo, in British Journal of Psychiatry.
Natančneje, raziskovalci so se osredotočili na randomizirana kontrolirana preskušanja z „nepomembnimi primarnimi končnimi točkami“. Primarni končni rezultat študije je glavni rezultat študije in "nepomembno" v tem okviru pomeni, da skupina statistično ni našla dovolj dokazov, da bi podprla svojo teorijo.
Spin je v številnih oblikah, med drugim:
- selektivno poročanje o izidih, pri čemer avtorji omenjajo le nekatere rezultate
- P-hecking, pri katerem raziskovalci izvajajo vrsto statističnih testov, vendar objavijo le podatke iz testov, ki dajejo pomembne rezultate
- neprimerna ali zavajajoča uporaba statističnih ukrepov
Kako pogost je spin?
Skupaj so analizirali povzetke 116 prispevkov. Od tega jih je 56% pokazalo dokaze o zavrtenju. To je vključevalo vrtenje v 2% naslovov, 21% odsekov z rezultati povzetka in 49% v zaključnih odsekih povzetka. V 15% prispevkov je bil spin prisoten tako v razdelkih z rezultati kot v zaključkih povzetkov.
Raziskovalci so tudi raziskali, ali je financiranje industrije povezano s spinom. Morda presenetljivo niso našli nobenega dokaza, da bi finančna podpora industrije povečala verjetnost vrtenja.
Ugotovitve so zaskrbljujoče. Čeprav je vrtenje v novičarskih medijih nasploh zaskrbljujoče, zdravniki z raziskovalnimi prispevki pomagajo usmerjati klinične odločitve. Kot pišejo avtorji:
"Raziskovalci imajo etično obveznost, da iskreno in jasno poročajo o rezultatih svojih raziskav." Vendar lahko avtorji v abstraktnem delu izberejo podrobnosti, ki jih vključujejo. Avtorji sedanje študije skrbijo, kaj bi to lahko pomenilo za zdravnike:
»Če povzamemo izvleček članka, lahko zdravnike, ki poskušajo sklepati o zdravljenju bolnikov, zavedejo. Večina zdravnikov večino časa prebere samo članek, ki je povzetek. "
Posledice
Čeprav raziskovalci niso toliko globoko preiskovali učinkov vrtenja, avtorji opozarjajo na eno študijo, v kateri kladiva pripomorejo k njihovi točki.
V njem so znanstveniki zbirali povzetke s področja raziskav raka. Vse so bile randomizirane kontrolirane raziskave s statistično nepomembnim primarnim izidom. Vsi povzetki vključujejo vrtenje.
Raziskovalci so ustvarili druge različice teh povzetkov, v katerih so odstranili vrtenje. Kot udeleženci so zaposlili 300 onkologov. Raziskovalci so polovico dali izvirni povzetek s spinom, drugi polovici pa povzetek brez vrtenja.
Zaskrbljujoče je, da so zdravniki, ki so povzetke brali z zavrtenjem, ocenili poseg v prispevku kot bolj koristen.
Kot pišejo avtorji nedavnega študijskega prispevka: »Tisti, ki pišejo rokopise za klinična preskušanja, vedo, da imajo omejen čas in prostor, da lahko pritegnejo pozornost bralca. Verjetneje bodo objavljeni pozitivni rezultati in mnogi avtorji rokopisov so se za polepšanje svojih rezultatov obrnili na vprašljive prakse poročanja. "
Druga študija, objavljena leta 2016, razširja področje uporabe te številke. Raziskovali so, kako so recenzenti - izkušeni znanstveniki, ki pred objavo preučujejo prispevke - vplivali na spin. Ugotovili so, da je v 15% primerov recenzent pozval avtorje, naj dodajo spin.
Trenutna študija ima nekatere omejitve. Na primer, te ugotovitve morda ne bodo veljale za druge revije ali raziskovalna področja. Ugotavljajo tudi, da je prepoznavanje vrtenja subjektivna naloga, in čeprav so uporabili dva neodvisna ekstraktorja podatkov, obstaja prostor za napake.
Natančna velikost izdaje v medicinskih raziskavah bo še treba videti, vendar avtorji zaključujejo, da bi morali biti [uredniki], uredniki revij in recenzenti še naprej pozorni na spin, da bi zmanjšali tveganje za pristransko poročanje o rezultatih preskušanj. "
