Evidensbaseret medicin · K5-K6 · Udgave 1

Rapporteringsbias og spin

Et publiceret resultat kan være korrekt gengivet og stadig give et skævt billede af den samlede evidens.

GPT-6 Sol · Extra High 15-19 min

Detaljegrad

Kort fortalt

Rapporteringsbias og spin

Skeln mellem studier, der aldrig bliver tilgængelige, resultater der udelades, og en konklusion der lover mere end data bærer. Lær at følge udfaldsmål fra registrering til artikel og at bedømme, hvad manglende resultater betyder for et review.

Problemet

Find det, der ikke kom med

Rapporteringsbias findes både mellem og inden for studier

Standard

Et helt studie kan mangle; enkelte resultater fra et publiceret studie kan også mangle.

Spørg først: Hvad blev undersøgt, og hvad kan jeg faktisk finde?

To forskellige huller

Hvis et gennemført forsøg slet ikke offentliggøres, mangler hele studiet i evidensgrundlaget. Hvis artiklen kun viser nogle af de planlagte udfald, mangler resultater inden for studiet. Begge dele kan afhænge af resultaternes retning eller statistiske signifikans og dermed give et skævt billede.

En tredje fejl

Spin er ikke nødvendigvis et manglende tal: De viste resultater kan blive omtalt mere positivt, end de berettiger til. Hold derfor adskilt, om data mangler, og om tilgængelige data fortolkes misvisende.

Publikationsbias handler om hvilke studier der bliver synlige

Standard

Positive eller statistisk signifikante forsøg kan have lettere ved at blive publiceret end negative forsøg.

Et review af kun publicerede artikler kan derfor overvurdere en effekt.

Mekanismen

Et forsøg kan være afsluttet uden en tidsskriftsartikel, eller det kan være sværere at finde end et positivt studie. Hvis sandsynligheden for at blive synlig afhænger af resultatet, er de tilgængelige studier ikke længere et neutralt udsnit af alle udførte forsøg.

Hvad du kan gøre

Søg ud over tidsskrifter: forsøgsregistre, resultatsider, protokoller og relevante myndighedsrapporter. Et registreret, afsluttet forsøg uden tilgængelige resultater er et spørgsmål, der skal undersøges, ikke automatisk bevis på tilbageholdelse.

Selektiv rapportering kan gemme det planlagte udfald inde i artiklen

Standard

Et studie kan være publiceret, mens primære, sekundære eller skadeudfald kun rapporteres delvist.

Sammenlign den daterede plan med det, der faktisk er analyseret og vist.

Typiske spor

Et planlagt udfald mangler helt, et sekundært mål optræder som hovedfund, eller kun et af flere måletidspunkter vises. Ændringer kan være legitime, men de skal kunne tidsfæstes og forklares. Ellers ved læseren ikke, om valget blev truffet før eller efter resultaterne var kendt.

Skadeudfald tæller også

Hvis gavn rapporteres mere fuldstændigt end bivirkninger, bliver afvejningen mellem effekt og skade skæv. Læs derfor både effekt- og sikkerhedsafsnit og spørg, om alle foruddefinerede udfald kan findes.

Kontrolsporet

Følg studiet fra plan til publikation

Registrering og protokol besvarer forskellige spørgsmål

Standard

Registreringen giver et offentligt, dateret overblik; protokollen beskriver planen mere detaljeret.

Ingen af delene må ukritisk læses som den oprindelige plan, hvis du kun ser seneste version.

Brug begge kilder

Et forsøgsregister angiver typisk population, intervention, udfaldsmål og status. Protokol og eventuel statistisk analyseplan kan præcisere definitioner, måletidspunkter, håndtering af manglende data og planlagte analyser. En kort registerpost er derfor ikke det samme som en fuld protokol.

Tidspunktet er en del af evidensen

Kontrollér hvornår forsøget blev registreret i forhold til første inkluderede deltager, og hvilke versioner der fandtes før data eller analyser var kendt. Prospektiv registrering giver et stærkere holdepunkt for, hvad der var planlagt på forhånd.

Dater ændringerne før du bedømmer dem

Standard

Et ændret udfaldsmål er et signal til at undersøge hvornår og hvorfor, ikke en dom i sig selv.

Sammenhold registreringshistorik, protokolændringer, inklusionsstart og analysetidspunkt.

Byg en enkel tidslinje

Notér dato for første registrering, første deltager, ændring af udfald eller analyseplan, afslutning og publikation. Hvis en ændring er foretaget før data kan have påvirket valget og er transparent beskrevet, vurderes den anderledes end en uforklaret ændring efter resultatkendskab.

Led efter en forklaring

Ændringer kan skyldes ny faglig viden, praktiske problemer eller en forbedret målemetode. Artiklen bør tydeligt beskrive væsentlige afvigelser fra den oprindelige plan og deres begrundelse. Mangler forklaringen, øges usikkerheden om selektiv rapportering.

Sammenlign mere end navnet på udfaldsmålet

Standard

Kontrollér definition, måletidspunkt, population og analyse for hvert centralt udfald.

Et enslydende udfald kan give et andet svar, hvis én af disse dele ændres.

Fire felter i din sammenligning

For det primære udfald: Hvad måles præcist? Hvornår måles det? Hvilke deltagere indgår? Hvilken analyse var planlagt? Gentag for vigtige sekundære og skadeudfald. Sæt registrering/protokol og artikel ved siden af hinanden, så fravær og omdøbninger bliver synlige.

Hvorfor et kompositmål kræver ekstra blik

Et samlet udfald som død, infarkt eller reintervention kan ændre betydning, hvis komponenter, opfølgningsperiode eller analysepopulation justeres. Læs både den samlede effekt og komponenterne; et positivt kompositmål betyder ikke automatisk effekt på alle dele.

Evidens

Vurdér hvad den manglende viden gør ved helheden

Flere led kan gøre positive resultater mere synlige

Standard

Forskere, sponsorer og tidsskrifter kan hver påvirke hvad der ender i den læsbare litteratur.

En skævhed kan opstå uden at du kan udpege én persons hensigt.

Tænk i mekanismer

Et interessant positivt fund kan være lettere at skrive, indsende, acceptere eller fremhæve. Finansiering og kommercielle interesser kan også påvirke spørgsmål, analyse og formidling. Vurder protokollens åbenhed, forfatterroller og fuldstændig resultatrapportering frem for at antage, at en bestemt finansieringskilde alene afgør kvaliteten.

Hvorfor registrering hjælper

Når et studie registreres før start og resultater rapporteres uanset udfald, bliver det lettere at opdage manglende studier og ændringer. Åben protokol, dokumenterede amendments og offentliggørelse af negative resultater reducerer rum for selektion, men fjerner ikke behovet for kritisk vurdering.

Et review kan ikke sammenfatte resultater, det aldrig ser

Standard

Hvis negative studier eller skadeudfald mangler, kan den samlede effekt og sikkerhed se bedre ud end den er.

Undersøg hvad der er registreret, men endnu ikke rapporteret.

Konsekvensen for et review

En metaanalyse beregner på de fundne tal. Mangler studier systematisk efter deres resultater, kan et præcist samlet estimat stadig være skævt. Mangler kun enkelte udfald, kan nogle analyser bygge på et selekteret udsnit af ellers inkluderede forsøg.

Læs reviewets søgespor

Se om forfatterne har søgt forsøgsregistre, forsøgt at indhente manglende udfald, vurderet risiko for selektiv rapportering og diskuteret betydningen af ufremkomne resultater. Manglende dokumentation kan ikke altid erstattes af en statistisk korrektion.

Et skævt funnel plot er et signal, ikke en diagnose

Standard

Asymmetri kan afspejle small-study effects, men beviser ikke publikationsbias.

Med få studier er plottet og formelle asymmetritest særlig usikre.

Læs mønstret forsigtigt

Et funnel plot sætter studiernes effekt op mod et mål for præcision eller størrelse. Hvis små studier med mindre gunstige resultater ser ud til at mangle, er selektiv tilgængelighed én mulig forklaring. Heterogenitet, metodiske forskelle og tilfældighed kan give lignende asymmetri.

Praktisk tommelfingerregel

Formelle test for asymmetri har typisk for ringe styrke ved færre end cirka ti studier og bør ikke bruges som et ja/nej-svar. Læs dem sammen med registrerede forsøg, søgestrategi og kliniske forskelle mellem studier.

Anvendelse

Læs konklusionen op imod data

Spin får fortolkningen til at løbe foran data

Standard

Et sekundært positivt fund må ikke skjule, at det planlagte primære udfald var usikkert eller ikke signifikant.

Sammenlign abstracts konklusion med primær analyse og bivirkninger.

Genkend mønstret

Et abstract kan fremhæve en gunstig subgruppe, et sekundært udfald eller en inden-for-gruppe-ændring, mens hovedsammenligningen er statistisk usikker. Det kan også kalde en behandling sikker uden tilstrækkelige skadedata. Problemet er ikke, at disse tal nævnes, men at deres status og begrænsninger udviskes.

En vigtig nuance

Et ikke-signifikant primært resultat er ikke bevis for ingen effekt. Se effektstørrelse, konfidensinterval og studiepræcision. Men et stærkt udsagn om dokumenteret effekt kræver mere end et eksplorativt positivt fund efter et usikkert hovedresultat.

IVUS-XPL-casen træner den konkrete sammenligning

Standard

Sammenlign registreringshistorik, protokol og publikation for forsøgets centrale udfald.

Den nyeste registerpost alene kan ikke fortælle, hvad der stod før inklusion.

Følg casens spørgsmål

Forelæsningens case bruger et randomiseret forsøg med IVUS-styret versus angiografistyret stentbehandling. Start med PICO og artiklens primære udfald. Find dernæst den første registreringsversion, dato for inklusionsstart, senere ændringer og den tilgængelige protokol. Sammenlign de præcise komponenter og måletidspunkter før du bedømmer konklusionen.

Hvad man ikke må slutte for hurtigt

At artikel og en opdateret registerpost stemmer overens, viser ikke nødvendigvis, at planen var den samme ved start. En forskel mellem tidlig registrering og artikel er omvendt ikke i sig selv bevis på bevidst vildledning. Datoer, protokolændringer og forklaringer afgør hvor stærk mistanken er.

En femtrinsrutine afslører de vigtigste afvigelser

Standard

Find planen, kontrollér datoer, sammenlign udfald, læs konklusionen mod resultaterne, og søg de manglende studier.

Skriv tydeligt hvad du ved, og hvad der stadig er uafklaret.

Brug rækkefølgen hver gang

1. Find registreringsnummer og protokol. 2. Kontrollér registreringens versioner og studiets tidslinje. 3. Sammenlign planlagte og rapporterede primære, sekundære og skadeudfald. 4. Hold abstract og konklusion op mod hovedanalysen. 5. Ved et review: se efter registrerede, afsluttede forsøg uden tilgængelige resultater.

Din konklusion skal være kalibreret

Skeln mellem en dokumenteret uoverensstemmelse, en mulig risiko for bias og en påvist skæv effekt på estimatet. Fravær af fuld protokol eller historik kan begrænse vurderingen; det er selv et relevant fund, men ikke licens til at gætte på motiv.

Afventer faglig gennemgang.