Evidensbaseret medicin · K5-K6 · Udgave 1

Kritisk vurdering af studier i en CAT

En tjekliste stiller spørgsmålene. Din vurdering skal vise, hvad studiet faktisk gør, og hvor langt svaret rækker.

GPT-6 Sol · Extra High 16-22 min

Detaljegrad

Kort fortalt

Kritisk vurdering af studier i en CAT

I en CAT vælger du en relevant artikel, undersøger dens metode og resultater med et redskab, der passer til studiedesignet, og omsætter fundene til et afgrænset svar på det kliniske spørgsmål. Her lærer du at begrunde hver vigtig vurdering frem for at tælle afkrydsninger.

CAT-kæden

Vælg den artikel, du faktisk kan bruge

En CAT er en kort vej fra klinisk tvivl til et begrundet svar

Standard

Formulér spørgsmålet, søg, vælg et relevant studie, vurder det og tag stilling til anvendelse.

En fokuseret CAT er ikke automatisk en udtømmende systematisk oversigt.

Hold leddene synlige

Skriv population, indsats eller eksponering, sammenligning og vigtigt udfald, hvor det passer til spørgsmålet. Beskriv derefter søgningen, inklusionsvalget og hvorfor netop den valgte artikel undersøges nærmere. Ellers kan en vellykket kritisk vurdering ende med at besvare et andet spørgsmål end det kliniske.

Hvad er produktet?

En CAT skal vise både, hvad det bedste fundne studie antyder, og hvor usikkert det er. Den ender i en afgrænset klinisk bundlinje, ikke i et referat af artiklens diskussion. Søgningens bredde og eventuelle huller hører med til forbeholdene.

Vælg ikke artiklen efter det pæneste resultat

Standard

Vælg efter spørgsmålets population, sammenligning, udfald og studiedesign.

Gør fravalg og valg forståelige, før du læser konklusionen som facit.

Relevans før effektstørrelse

Et stort eller statistisk signifikant fund gør ikke en artikel mere relevant. Undersøg først om deltagerne, interventionen eller eksponeringen, komparatoren og udfaldet svarer til CAT-spørgsmålet. Et studie med lidt mindre direkte relevans kan stadig bruges, men afstanden skal navngives.

Find den rette fuldtekst

Identificér studiedesign og hvilke data der faktisk analyseres. En protokol, et abstract og en sekundær analyse kan ikke behandles som samme rapport. Hvis der er flere artikler fra samme forsøg, undgå at tælle dem som uafhængige studier.

Tjeklisten skal passe til det spørgsmål, designet kan besvare

Standard

Brug ikke en RCT-tjekliste på et kohortestudie eller AMSTAR 2 på et enkelt RCT.

Lokalt tilpassede tjeklister er støtte til vurdering, ikke validerede facitark i sig selv.

Start med designet

Randomiserede forsøg, kohorter, case-control-studier, tværsnitsstudier og systematiske oversigter har forskellige typiske fejlkilder. Vælg et redskab, som stiller spørgsmål til netop dem. JBI har designspecifikke redskaber; RoB 2 handler om risiko for bias i et randomiseret forsøgs konkrete resultat, mens AMSTAR 2 vurderer metodisk kvalitet i en systematisk oversigt.

Læs originalen bag en lokal tilpasning

Forelæsningens undervisningstjeklister er bearbejdede til CAT-arbejdet. De kan organisere læsningen, men man bør ikke automatisk overtage et originalværktøjs dokumenterede egenskaber eller tærskler. Brug spørgsmålene til at begrunde en dom; læs originalvejledningen, hvis redskabets formelle vurdering er vigtig.

Intern validitet

Undersøg hvordan resultatet blev til

En afkrydsning uden belæg er ikke en kritisk vurdering

Standard

Skriv hvad artiklen oplyser, hvad der mangler, og hvorfor det betyder noget.

Manglende oplysninger er ikke bevis for, at metoden var god eller dårlig.

Tre led i en vurdering

Eksempel: “Allokeringen blev skjult med et centralt system; behandlere kunne ikke se næste tildeling; det mindsker risiko for selektionsbias.” Er metoden ikke beskrevet, skriv at risikoen ikke kan afgøres på det foreliggende grundlag. Søg eventuelt protokol eller supplement før du dømmer.

Dommene kan være forskellige

Et studie kan have lav bekymring for selektionsbias og høj bekymring for manglende udfaldsdata. Et udfald kan være målt blindet, et andet ikke. Undgå et mekanisk samlet pointtal, der skjuler hvilken fejl der kan ændre netop det resultat, du bruger.

I et RCT: følg forløbet fra tildeling til analyse

Standard

Se efter randomiseringsproces, skjult tildeling, afvigelser, manglende data og udfaldsmåling.

Spørg også om resultatet svarer til den planlagte analyse.

Før og efter randomisering

En tilfældig sekvens hjælper kun mod systematiske startforskelle, hvis næste tildeling ikke kan forudsiges eller påvirkes. Efter tildeling kan forskellig behandling ud over interventionen, stort eller skævt frafald og ublindet vurdering af subjektive udfald ændre resultatet. Vurder det konkrete udfald, ikke blot artiklens label “randomiseret”.

Præspecifikation og flere analyser

Sammenlign protokol eller register med de rapporterede primære udfald, tidspunkter og analyser. En uventet signifikant undergruppe eller et skiftet primært udfald kræver forsigtig fortolkning. Det beviser ikke snyd, men åbner for selektiv rapportering.

I observationsstudier: undersøg udvælgelse og confounding

Standard

I en kohorte: kom eksponeringen før udfaldet, og blev grupperne fulgt sammenligneligt?

I case-control: repræsenterer kontrollerne den population, der kunne være blevet cases?

Kohortens startpunkt

Undersøg om eksponering er målt før udfald, om sammenligningsgrupperne stammer fra en relevant kildepopulation, og om frafald eller forskellig opfølgning kan forklare forskellen. En association kan skyldes kendte eller ukendte faktorer, selv efter statistisk justering.

Kontroludvælgelse i case-control

Kontroller skal afspejle eksponeringsfordelingen i populationen, som gav ophav til cases. Se på, hvordan cases og kontroller blev identificeret, om eksponering blev målt ens, og hvilke confoundere der blev håndteret. En odds ratio beskriver en association og er ikke i sig selv et kausalt svar.

Et tværsnitsstudie kan beskrive, men tidsrækkefølgen er ofte uklar

Standard

Se på stikprøve, svarprocent og om eksponering og udfald er målt ensartet.

Samtidig måling kan sjældent vise, hvad der kom først.

Hvem blev faktisk undersøgt?

En snæver klinikpopulation eller lav svarprocent kan give et misvisende billede af hyppighed og sammenhæng. Sammenlign deltagere med målpopulationen, undersøg hvordan målingerne blev foretaget, og om ikke-deltagelse eller confounding kan forklare resultatet.

Hold konklusionen på designets niveau

Finder studiet, at to forhold forekommer sammen, kan det være nyttigt som beskrivelse eller hypotese. Det er ikke uden videre evidens for, at det ene forårsager det andet. Andre data eller et andet design kan være nødvendigt for et årsagsspørgsmål.

I en oversigt: vurder både syntesen og studierne bag

Standard

Se efter protokol, relevant søgning, udvælgelse, dataudtræk og biasvurdering.

Et samlet estimat er kun så brugbart som de data og valg, det bygger på.

Kan processen efterprøves?

Var spørgsmålet og inklusionskriterierne fastlagt? Dækkede søgningen relevante kilder? Er udvælgelse og dataudtræk beskrevet, gerne med uafhængig kontrol? Er risiko for bias i de inkluderede studier vurderet og brugt i fortolkningen? Det er centrale CAT-spørgsmål, også når abstractet virker overbevisende.

Giver samling mening?

Undersøg om populationer, interventioner og udfald ligner hinanden tilstrækkeligt til en meta-analyse. Se på variation mellem studier, følsomhed for metodevalg og tegn på manglende eller selektiv rapportering. Ingen enkelt heterogenitetsværdi afgør alene, om pooling er rimelig.

Resultat og rækkevidde

Gå fra et tal til et brugbart svar

Læs effektstørrelsen sammen med usikkerheden

Standard

En p-værdi alene fortæller hverken hvor stor effekten er eller om den er vigtig.

Se på estimat, konfidensinterval og gerne absolutte tal.

Hvad blev målt?

Angiv udfald, tidsramme og effektmål. For et binært udfald kan relative mål være nyttige, men en absolut risikoforskel afhænger af udgangsrisikoen og er ofte tættere på den kliniske beslutning. For et kontinuert mål: undersøg skalaens retning og hvad en forskel betyder i praksis.

Hvor præcist er svaret?

Et bredt konfidensinterval kan rumme både en klinisk vigtig gevinst og ingen vigtig gevinst eller skade. Læs intervallet op mod en på forhånd begrundet relevant forskel. Statistisk signifikans er ikke det samme som klinisk betydning, og manglende signifikans er ikke bevis for nul effekt.

Intern validitet er ikke det samme som anvendelighed

Standard

Sammenlign studiepopulation, indsats, komparator og udfald med CAT-spørgsmålet.

Et troværdigt resultat kan være svært at overføre til netop denne kontekst.

Find forskellen, der kan ændre beslutningen

Se på alder, sygdomsgrad, komorbiditet, setting, behandlingsintensitet, opfølgning og hvilket udfald der er vigtigt for patienten. Nævn de forskelle, der plausibelt kan ændre effekt eller skade, ikke enhver demografisk detalje.

Anvendelse kræver mere end en artikel

Selv et metodisk solidt studie kan have begrænset relevans, hvis sammenligningen er forældet eller udfaldet ikke svarer til beslutningen. Klinisk vurdering og patientpræferencer indgår, men de kan ikke redde en upålidelig effektmåling ved blot at blive nævnt.

Interessekonflikter og spin er signaler til nærmere kontrol

Standard

Undersøg finansiering, roller, protokol og om konklusionen svarer til resultaterne.

En interessekonflikt alene beviser ikke bias; fravær af deklaration beviser ikke uafhængighed.

Se efter konkrete mekanismer

Kunne nogen påvirke inklusion, analysens valg eller præsentationen af negative fund? Sammenlign planlagte og rapporterede udfald, og se om abstract og konklusion nedtoner usikkerhed eller skader. Forelæsningen bruger kvalitative eksempler på, hvordan pres kan påvirke forskellige trin i et studie.

Hold dokumentation og mistanke adskilt

Beskriv det, der faktisk kan ses i artiklen, registreringen eller protokollen. At et studie er industrifinansieret kan øge opmærksomheden på interessekonflikter, men det er ikke en automatisk dom om resultatet. Omvendt ophæver en erklæring om ingen konflikter ikke behovet for metodekritik.

Syntese

Skriv det, du kan stå inde for

Skriv en kort dom, der kan spores tilbage til studiet

Standard

Svar på spørgsmålet med effekt, vigtigste usikkerhed og relevans.

Gør ikke ét vurderet studie til et stærkere bevis end søgning og metode tillader.

Fire sætninger er ofte nok som skelet

1. Hvilket spørgsmål og hvilket studiedesign? 2. Hvilket centralt resultat med mål og præcision? 3. Hvilke metode- eller relevansproblemer kan ændre fortolkningen? 4. Hvad kan man foreløbigt konkludere for den konkrete beslutning, og hvad kræver mere evidens? Udbyg kun de led, der behøver forklaring.

Skriv ikke tjeklisten om

Udvælg de vurderinger, der betyder mest for resultatet. En kort vurdering bør stadig sige, hvilken oplysning fra artiklen der begrunder dommen. “Studiet er godt” eller “der er bias” er ikke en efterprøvbar CAT-konklusion.

Afventer faglig gennemgang.