du.sePublikationer
Ändra sökning
RefereraExporteraLänk till posten
Permanent länk

Direktlänk
Referera
Referensformat
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • chicago-author-date
  • chicago-note-bibliography
  • Annat format
Fler format
Språk
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Annat språk
Fler språk
Utmatningsformat
  • html
  • text
  • asciidoc
  • rtf
Elaborating on the assessment of the risk of bias in prognostic studies in pain rehabilitation using QUIPS-aspects of interrater agreement
Karolinska Institutet.ORCID-id: 0000-0002-8307-259x
Högskolan Dalarna, Akademin Utbildning, hälsa och samhälle, Medicinsk vetenskap. Karolinska institutet; Uppsala universitet.ORCID-id: 0000-0001-7767-4589
Visa övriga samt affilieringar
2019 (Engelska)Ingår i: Diagnostic and Prognostic Research, ISSN 2397-7523, Vol. 3, artikel-id 5Artikel i tidskrift (Refereegranskat) Published
Abstract [en]

Background: Many studies have been performed to identify important prognostic factors for outcomes after rehabilitation of patients with chronic pain, and there is a need to synthesize them through systematic review. In this process, it is important to assess the study quality and risk of bias. The "Quality In Prognosis Studies" (QUIPS) tool has been developed for this purpose and consists of several prompting items categorized into six domains, and each domain is judged on a three-grade scale (low, moderate or high risk of bias). The aim of the present study was to determine the interrater agreement of the risk of bias assessment in prognostic studies of patients with chronic pain using QUIPS and to elaborate on the use of this instrument.

Methods: We performed a systematic review and a meta-analysis of prognostic factors for long-term outcomes after multidisciplinary rehabilitation in patients with chronic pain. Two researchers rated the risk of bias in 43 published papers in two rounds (15 and 28 papers, respectively). The interrater agreement and Cohen's quadratic weighted kappa coefficient (κ) and 95% confidence interval (95%CI) were calculated in all domains and separately for the first and second rounds.

Results: The raters agreed in 61% of the domains (157 out of 258), with similar interrater agreement in the first (59%, 53/90) and second rounds (62%, 104/168). The overall weighted kappa coefficient (kappa for all domains and all papers) was weak: κ = 0.475 (95%CI = 0.358-0.601). A "minimal agreement" between the raters was found in the first round, κ = 0.323 (95%CI = 0.129-0.517), but increased to "weak agreement" in the second round, κ = 0.536 (95%CI = 0.390-0.682).

Conclusion: Despite a relatively low interrater agreement, QUIPS proved to be a useful tool in assessing the risk of bias when performing a meta-analysis of prognostic studies in pain rehabilitation, since it demands of raters to discuss and investigate important aspects of study quality. Some items were particularly hard to differentiate in-between, and a learning phase was required to increase the interrater agreement. This paper highlights several aspects of the tool that should be kept in mind when rating the risk of bias in prognostic studies, and provides some suggestions on common pitfalls to avoid during this process.

Trial registration: PROSPERO CRD42016025339; registered 05 February 2016.

Ort, förlag, år, upplaga, sidor
2019. Vol. 3, artikel-id 5
Nyckelord [en]
Chronic pain, Inter-rater agreement, Meta-analysis, Prognosis, Rehabilitation, Review, Risk of bias
Nationell ämneskategori
Övrig annan medicin och hälsovetenskap
Forskningsämne
Hälsa och välfärd
Identifikatorer
URN: urn:nbn:se:du-30087DOI: 10.1186/s41512-019-0050-0PubMedID: 31093575OAI: oai:DiVA.org:du-30087DiVA, id: diva2:1317180
Tillgänglig från: 2019-05-22 Skapad: 2019-05-22 Senast uppdaterad: 2020-01-28
Ingår i avhandling
1. Interdisciplinary rehabilitation in patients with chronic pain: prognostic factors and effectiveness
Öppna denna publikation i ny flik eller fönster >>Interdisciplinary rehabilitation in patients with chronic pain: prognostic factors and effectiveness
2019 (Engelska)Doktorsavhandling, sammanläggning (Övrigt vetenskapligt)
Abstract [en]

Interdisciplinary multimodal pain rehabilitation (IMPR) is currently considered best practice for combatting chronic pain. However, it is believed that health-related outcomes could be improved with more adequately tailored treatment programs, but consensus of what grounds these adaptations should be based on is yet to be reached. Well-powered evaluations of naturalistic, real-world practices provide an evidence base for the evaluation of important characteristics that may facilitate the informed development of IMPR. The aim of the present work was to meta-synthesize existing evidence and add new data to the body of published evidence on prognostic factors for a positive outcome in patients receiving rehabilitation for chronic pain. An additional aim was to evaluate the effectiveness of different IMPR program durations on health-related quality of life in this major patient group.

Methods: Published international evidence of prognostic factors for physical functioning after IMPR was evaluated through a systematic review and meta-analyses (Study I), followed by the investigation of the inter-rater reliability of the Quality in Prognostic Studies tool (QUIPS), used in the Risk of Bias assessment (Study II). Prognostic factors (Study III) and effectiveness (Study IV) of Swedish pain specialist IMPR on physical and mental functioning and related measures of disease impact were investigated using large-scale nationwide data obtained from the Swedish Quality Registry for Pain Rehabilitation.

Results: Meta analyses showed, with moderate to low levels of evidence, that better physical functioning at follow-up was predicted by high levels of self-reported functioning, low levels of emotional distress and cognitive-behavioral risk factors, and high levels of cognitive- behavioral protective factors. Pain-related factors (intensity and chronicity) were not associated. Weak to moderate inter-rater agreement emerged for QUIPS, and suggestions for improving the inter-rater agreement and functionality were presented. Swedish registry data showed the most important prognostic factors were retaining a connection with work, having high optimistic treatment expectations, sense of control, and less interference from pain. Pain itself was of secondary significance. Also for improvement of physical functioning, better initial mental wellbeing was of importance, while for mental functioning the opposite emerged. Results on within-group effectiveness showed improvements on all outcomes, while no between-group comparison emerged on short (4-9 wks) vs. moderate (10 wks) vs. long (11-18 wks) IMPR program duration.

In summary, evidence for prognostic factors was identified, providing suggestions for the targeting of modifiable factors in clinics and in future clinical trials. Clearly, the quality assessment of published results needs systematic consensus work between assessors. Work connection, treatment expectations, levels of physical and emotional health, and coping strategies played an important prognostic role but were not consistent for physical and emotional functioning, suggesting a complex prognostic picture for the overall understanding of improvement. Finally, IMPR is effective across a biopsychosocial specter, but treatment duration seems not to play an important role.

Abstract [sv]

Multimodal smärtrehabilitering (MMR) anses vara bästa praxis för behandling av kronisk smärta. De påvisade effekterna på olika (biopsykosociala) hälsorelaterade resultat är dock suboptimala. Det antas att rehabiliteringsresultat kan förbättras med mer adekvat anpassade behandlingsprogram, men fortfarande saknas konsensus om vilka faktorer dessa anpassningar bör grundas på. Effektiva utvärderingar av reell klinisk verksamhet kan ge en grund för utvärdering av viktiga egenskaper som kan bidra till utveckling av MMR. Syftet med detta avhandlingsarbete var därför att meta-syntetisera befintlig evidens, och att komplettera med nya primärdata till kunskapsunderlaget om prognostiska faktorer för ett positivt behandlingsutfall hos patienter med kronisk smärta som genomgått rehabilitering. Syftet var vidare att utvärdera effektiviteten av MMR som genomförs med olika behandlingslängd, med avseende på hälsorelaterad livskvalitet i denna omfattande patientgrupp med kronisk smärta.

Publicerade internationella resultat vad gäller prognostiska faktorer för fysisk funktion efter MMR utvärderades genom en systematisk litteraturgranskning och meta-analyser (Studie I). Denna studie följdes av en undersökning av inter-bedömarreliabilitet (tillförlitlighet) för ett nytt kvalitetsbedömnings-instrument avsett för prognostiska studier- ”QUIPS”, ett instrument som används vid bedömning av Risk för Bias (Studie II). Prognostiska faktorer (Studie III) och effektivitet (Studie IV) vid svensk MMR (specialistnivå) med avseende på fysisk och psykisk funktion, samt konsekvenser av smärta, utvärderades med hjälp av omfattande registerdata från Nationella Registret över Smärtrehabilitering, NRS.

Metaanalyser visade, med måttlig till låg evidens, att bättre fysisk funktion vid uppföljning förutspåddes av högre nivåer av självrapporterad funktion, låga nivåer av mental ohälsa, och kognitiva beteende-riskfaktorer samt höga nivåer av skyddande kognitiva beteende-faktorer. Smärtrelaterade faktorer (intensitet och duration) var inte associerade. Överenstämmelse vid Risk för Bias-bedömningar med QUIPS var svag till måttlig, och förslag till att förbättra överrensstämmelse och funktionaliteten presenterades. Svenska registerdata visade att de viktigaste prognostiska faktorerna generellt var att vara i arbete, ha optimistiska behandlingsförväntningar, känsla av kontroll och mindre funktionsstörningar från smärta. Smärta i sig var av sekundär betydelse. För fysisk funktion specifikt var ett gott mentalt välbefinnande av betydelse medan för mental funktion var ett lägre (dåligt) utgångsvärde av betydelse. MMR som helhet var effektiv vid behandlingsuppföljning för alla utfallsvariabler. Ingen skillnad framkom dock vid jämförelse mellan grupper med olika behandlingstid.

Sammanfattningsvis identifierades evidens för att det finns viktiga prognostiska markörer, vilket pekar på modifierbara faktorer användbara i såväl klinisk verksamhet som för framtida randomiserade kliniska studier. Det är tydligt att kvalitetsbedömning av publicerade resultat kräver systematiskt konsensusarbete mellan bedömare. Att vara i arbete, ha positiva behandlingsförväntningar, samt lägre ingångsvärden på de respektive utfallen, fysisk och emotionell hälsa, samt copingstrategier, spelade en viktig roll för det framtidabehandlingsresultatet. Resultaten var dock inte konsekventa för fysisk och emotionell funktion, vilket antyder en komplex prognostisk bild för förståelsen av klinisk förbättring som helhet. MMR är en effektiv behandlingsmetod från ett biopsykosocialt perspektiv, men dess behandlingslängd verkar inte ha någon betydande roll för det framtida behandlingsresultatet.

Ort, förlag, år, upplaga, sidor
Stockholm: Karolinska Institutet, 2019
Nationell ämneskategori
Klinisk medicin
Identifikatorer
urn:nbn:se:du-31740 (URN)978-91-7831-510-9 (ISBN)
Tillgänglig från: 2020-01-28 Skapad: 2020-01-28 Senast uppdaterad: 2020-01-28Bibliografiskt granskad

Open Access i DiVA

fulltext(654 kB)47 nedladdningar
Filinformation
Filnamn FULLTEXT01.pdfFilstorlek 654 kBChecksumma SHA-512
a6f6c03944dc17acaa82d922b695474e5f0e0fa82cde98415accd4f86202e2fc49fc741accf31276585b55945d074e32e5415918fd17df2ad4c6403ef7457537
Typ fulltextMimetyp application/pdf

Övriga länkar

Förlagets fulltextPubMed

Personposter BETA

Tseli, ElenaÄng, Björn

Sök vidare i DiVA

Av författaren/redaktören
Tseli, ElenaÄng, Björn
Av organisationen
Medicinsk vetenskap
Övrig annan medicin och hälsovetenskap

Sök vidare utanför DiVA

GoogleGoogle Scholar
Totalt: 47 nedladdningar
Antalet nedladdningar är summan av nedladdningar för alla fulltexter. Det kan inkludera t.ex tidigare versioner som nu inte längre är tillgängliga.

doi
pubmed
urn-nbn

Altmetricpoäng

doi
pubmed
urn-nbn
Totalt: 74 träffar
RefereraExporteraLänk till posten
Permanent länk

Direktlänk
Referera
Referensformat
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • chicago-author-date
  • chicago-note-bibliography
  • Annat format
Fler format
Språk
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Annat språk
Fler språk
Utmatningsformat
  • html
  • text
  • asciidoc
  • rtf