K5-K6

Evidensbaseret medicin · K5-K6 · Udgave 1

Formidling af klinisk forskning

En forskningshistorie skifter form fra manuskript til artikel, pressemeddelelse og opslag. Påstanden må ikke vokse undervejs.

GPT-6 Sol · Extra High 14-18 min
Detaljegrad
Dybde i hele kurset

Kort fortalt

Formidling af klinisk forskning

Følg klinisk forskning gennem tidsskrifter, presse og preprints. Skeln fagfællebedømmelse fra kvalitetsgaranti, open access fra tvivlsom publicering og et tidsskrifts citationsmål fra kvaliteten af et enkelt studie.

Kanaler

Spor påstanden tilbage til forskningen

Samme studie kan have flere versioner af sin historie

Dybde: Samme studie kan have flere versioner af sin historieStandard

Skeln forskningsrapporten fra abstract, pressemeddelelse og nyhedsopslag.

Find altid den fulde kilde, før du accepterer en klinisk påstand.

Kilden bestemmer, hvad du kan kontrollere

Et konferenceabstract kan være hurtigt, men giver ofte ikke plads til detaljer om metode og usikkerhed. En pressemeddelelse er skrevet til opmærksomhed og er ikke i sig selv fagfællebedømt. Den fulde artikel giver mere af det nødvendige spor: population, sammenligning, effektmål, tal og begrænsninger.

Platform er ikke det samme som evidensniveau

Et opslag kan gengive et solidt review korrekt, og en tidsskriftsartikel kan være metodisk svag. Bedøm derfor både kommunikationsleddet og undersøgelsen bag. En kendt afsender gør ikke en kort gengivelse til en erstatning for data.

Overdrivelse kan begynde før historien når pressen

Dybde: Overdrivelse kan begynde før historien når pressenStandard

Sammenlign pressemeddelelsens påstand med den fagfællebedømte artikel.

Vær især opmærksom på behandlingsråd, årsagsord og spring fra dyr til mennesker.

Et empirisk eksempel

Sumner og kolleger sammenlignede 462 sundhedsrelaterede pressemeddelelser fra 20 britiske universiteter i 2011 med artiklerne og 668 tilhørende nyheder. I 33 % af relevante pressemeddelelser fandt de en stærkere årsagspåstand end i artiklen. Når pressemeddelelsen overdrev, var overdrivelse i nyheden hyppigere. Det er en association i netop dette materiale, ikke en universel andel for alle pressemeddelelser.

Placér ændringen i kæden

Hold først artiklens formulering op mod pressemeddelelsen, derefter pressemeddelelsen mod nyheden. Hvis artiklen allerede overfortolker, afslører denne sammenligning ikke hele problemet. Kurset om rapporteringsbias og spin går dybere i overfortolkning inde i selve publikationen; her er fokus springet mellem kanaler.

Undersøg præcis hvor stærk påstanden må være

Dybde: Undersøg præcis hvor stærk påstanden må væreStandard

Observation er ikke uden videre årsag, og dyreforsøg er ikke dokumenteret klinisk effekt.

Et forskningsfund er ikke automatisk et råd til patienter.

Tre hyppige spring

Et observeret samvarierende forhold omtales som virkning. Et fund i dyr eller celler omtales som behandling til mennesker. Et statistisk resultat bliver til en anbefaling uden afvejning af gavn, skade og andre studier. Find det første led, hvor ordlyden går længere end dokumentationen.

Læs den konkrete undersøgelse

Spørg hvilket design der er brugt, hvem der var undersøgt, hvilket udfald der blev målt, og om absolut effekt og usikkerhed er oplyst. Et kort opslag kan sjældent besvare disse spørgsmål. Når fuldteksten mangler, er en proportional konklusion ofte, at påstanden endnu ikke kan vurderes.

Fagfællebedømmelse

Forstå hvad et tidsskrift har og ikke har kontrolleret

Fagfællebedømmelse er en proces, ikke en sandhedsetiket

Dybde: Fagfællebedømmelse er en proces, ikke en sandhedsetiketStandard

Redaktøren kan indhente faglige vurderinger før publicering.

At en artikel er bedømt, siger ikke, at alle analyser eller konklusioner er korrekte.

Hvad der typisk vurderes

Bedømmere kan kommentere spørgsmål, metode, rapportering og fortolkning. Redaktøren træffer publiceringsbeslutningen og kan bede om ændringer. Omfanget varierer mellem tidsskrifter, og en bedømmer gentager normalt ikke forsøget eller genanalyserer alle rådata.

Bedømmelse og læserkritik supplerer hinanden

Du må stadig sammenligne protokol og artikel, vurdere risiko for bias, se på absolut effekt og læse kritik og rettelser efter publicering. “Peer reviewed” er et relevant procesoplysning, ikke et kvalitetsstempel for hver enkelt klinisk påstand.

Evidensen om at forbedre fagfællebedømmelse er ikke et facit for hvert manuskript

Dybde: Evidensen om at forbedre fagfællebedømmelse er ikke et facit for hvert manuskriptStandard

Bedømmelse kan finde fejl og forbedre rapportering, men overser også problemer.

Forsøg med ændringer i bedømmelsesprocessen undersøger afgrænsede mål.

Hvad en oversigt faktisk testede

Bruce og kollegers systematiske oversigt fra 2016 samlede randomiserede forsøg med træning, statistikbedømmere, checklister og åben eller blindet bedømmelse. Tilføjelse af statistikbedømmelse forbedrede i de inkluderede forsøg kvaliteten af slutmanuskriptet; træning og checklister viste ikke tilsvarende sikker forbedring på de målte udfald. Det er ikke en test af, om fagfællebedømmelse samlet set gør alle artikler sande.

Spørg hvad kvalitet betyder her

En bedre bedømmelsesrapport, et mere komplet manuskript og et mere korrekt klinisk effektestimat er forskellige udfald. Ét kan forbedres uden at de andre er dokumenteret forbedret. Læs derfor hvilken proces og hvilket mål undersøgelsen faktisk evaluerede.

Journal Impact Factor beskriver et tidsskrift, ikke dit studie

Dybde: Journal Impact Factor beskriver et tidsskrift, ikke dit studieStandard

JIF bygger på citationer til tidsskriftets nylige indhold.

Brug ikke tallet som stedfortræder for artiklens metode eller relevans.

Hvad tallet opsummerer

Den almindelige toårige JIF relaterer citationer i et år til tidsskriftets indhold fra de to foregående år og antallet af citerbare publikationer. Et højt gennemsnit siger intet sikkert om, hvor ofte en bestemt artikel er citeret, og endnu mindre om dens bias eller kliniske nytte.

Hvorfor sammenligningen kan snyde

Citationsvaner varierer mellem fagområder, og få meget citerede artikler kan trække tidsskriftets tal op. Redaktionelle valg påvirker også hvad der tælles. DORA fraråder derfor at bruge tidsskriftsmål som erstatning for kvalitetsvurdering af et enkelt forskningsarbejde.

Åbenhed

Bedøm udgivelsesstedet uden genveje

Open access handler om adgang, ikke om fravær af kvalitetskontrol

Dybde: Open access handler om adgang, ikke om fravær af kvalitetskontrolStandard

Open access gør artiklen frit tilgængelig for læseren.

Legitime open access-tidsskrifter kan have reel redaktion og fagfællebedømmelse.

Hold adgang og proces adskilt

En artikel kan være frit læsbar eller ligge bag betaling; ingen af delene afgør alene forskningskvaliteten. Nogle open access-tidsskrifter tager en publiceringsafgift, andre gør ikke. En afgift er heller ikke i sig selv tegn på vildledende praksis; spørg hvad der leveres, og om vilkårene er åbne.

Se efter konkret transparens

Et troværdigt udgivelsessted bør forklare redaktion, fagfællebedømmelse, gebyrer, licens og håndtering af fejl. Directory of Open Access Journals kræver sådanne oplysninger af tidsskrifter, der vil optages. Optagelse er et nyttigt spor, men en enkelt liste kan ikke overtage den faglige læsning af artiklen.

Tvivlsomme tidsskrifter sælger ofte en proces, de ikke leverer

Dybde: Tvivlsomme tidsskrifter sælger ofte en proces, de ikke levererStandard

Problemet er vildledende løfter om fagfællebedømmelse, redaktion eller arkivering.

Open access, lave gebyrer og hurtig behandling er ikke hver for sig bevis.

Undersøg påstandene

Kontrollér om tidsskriftet beskriver en reel bedømmelsesproces, navngiver ansvarlige redaktører, oplyser alle betalinger og har troværdig arkivering og kontaktinformation. Garanteret accept, falske indeks eller uklare vilkår bør undersøges. En aggressiv invitationsmail er et signal til kontrol, ikke en endelig dom.

Undgå stereotyper

Den vedlagte Nature-analyse fra 2017 af artikler i tidsskrifter mistænkt for vildledende praksis fandt også mange forfattere fra højindkomstlande. Listen, som udvalget byggede på, var omstridt; tallene siger derfor noget om dette udvalg, ikke om alle tidsskrifter eller forskere i et land. Problemet er publiceringspraksis, ikke forfatternes geografi.

Vurder tidsskriftet med flere uafhængige spor

Dybde: Vurder tidsskriftet med flere uafhængige sporStandard

Tjek redaktion, bedømmelsesproces, gebyrer, licens og indeks direkte.

Brug ikke ét logo, én sortliste eller én metricscore som facit.

En kort kontrolrunde

Læs tidsskriftets egne forfattervejledninger og etikpolitik. Undersøg om redaktionsmedlemmer og indeksoplysninger kan verificeres hos de nævnte organisationer. Se om gebyrer og rettelsesprocedure er tydelige. Tjek til sidst om allerede publicerede artikler faktisk ligner den bedømmelse, tidsskriftet lover.

Hvorfor en liste ikke er nok

Tidsskrifter kan ændre praksis, og lister kan mangle nye eller lokale udgivelser. DOAJ, etablerede indeks og Think. Check. Submit. er nyttige hjælpemidler, men den konkrete proces skal stadig kontrolleres. En manglende optagelse er ikke alene bevis for vildledning, særligt for et nyt tidsskrift.

Preprints

Brug tidlig adgang uden at forveksle den med bekræftelse

Et preprint er offentligt, men endnu ikke certificeret ved fagfællebedømmelse

Dybde: Et preprint er offentligt, men endnu ikke certificeret ved fagfællebedømmelseStandard

Tidlig deling gør fund tilgængelige og giver mulighed for kritik.

Preprint-status skal være synlig, især når fund omtales i klinisk sammenhæng.

Hurtighed er den klare fordel

Et preprint kan deles før tidsskriftets bedømmelse og give forskere mulighed for hurtig feedback. En server som medRxiv laver visse indledende kontroller, men disse er ikke det samme som fagfællebedømmelse. Medicinske preprints bør ikke alene styre klinisk praksis.

Læs det som et levende dokument

Notér versionsnummer og dato, undersøg om der findes senere revision, fagfællebedømt publikation eller tilbagetrækning. Når et preprint citeres eller omtales, skal det fremgå, at status er foreløbig. Er der kommet en publiceret artikel, sammenlign den med den version, påstanden byggede på.

Mange senere publicerede preprints ligner slutartiklen, men udvalget er særligt

Dybde: Mange senere publicerede preprints ligner slutartiklen, men udvalget er særligtStandard

Et studie fandt høj overensstemmelse mellem preprints og deres senere artikler.

Resultatet gælder par, der faktisk blev publiceret, ikke alle preprints.

Sæt tal på med korrekt nævner

Janda og kolleger sammenlignede 547 medRxiv-preprints fra september 2020 med deres senere fagfællebedømte artikler. Blandt de par, der rapporterede tal for primære udfald, havde 81,1 % identiske numeriske resultater. Overordnede fortolkninger var ens i 96,2 % af de undersøgte par. Det viser stabilitet i et udvalgt sæt, ikke at et preprint på forhånd er rigtigt.

Hvor udvalget kommer fra

Undersøgelsen medtog kun preprints, som nåede frem til en artikel inden opgørelsesdatoen, og over halvdelen af de kliniske par handlede om COVID-19. Preprints, der aldrig blev publiceret, indgår ikke i sammenligningen. Ændringer kan desuden ske af flere grunde end fagfællebedømmelse alene.

Brug fire kontroller fra overskrift til evidens

Dybde: Brug fire kontroller fra overskrift til evidensStandard

Find den fulde kilde og dens status; læs design og tal; sammenlign påstanden.

Vær tydelig om det, der ikke kan verificeres.

Rækkefølgen

1. Hvilken original publikation eller version bygger påstanden på? 2. Er den et preprint, et abstract eller en fuld artikel, og findes rettelser? 3. Hvad viser design, population, sammenligning, absolut effekt og usikkerhed? 4. Ligger pressemeddelelse, nyhed eller SoMe-opslag inden for den dokumenterede konklusion?

Konkludér proportionalt

Et uklart tidsskrift eller et preprint er ikke nok til at kalde fundet forkert. Et kendt tidsskrift eller mange delinger er ikke nok til at kalde det sikkert. Skriv hvad kilden faktisk kan bære, og hvilke oplysninger du stadig mangler før klinisk anvendelse.

Afventer faglig gennemgang.