Validitets- og reliabilitetstesting av den elektroniske, norske versjonen av M-BACK spørreskjema til å vurdere ansatte i psykisk helsevern sine barrierer, holdninger, tillit og kunnskap knyttet til pasientenes metabolske helse
Abstract
Pasienter med psykiske lidelser har opp mot 60% høyere forekomst av metabolsk syndrom, og 10-25 års lavere forventet levealder enn resten av befolkningen. Det er i dag et gap mellom anbefalt, og tilbudt fysisk aktivitet i psykisk helsevern, og tidligere forskning har vist en sterk sammenheng mellom ansattes fysiske helse og pasientenes helse. Spørreskjemaet Metabolic-Barriers-Attitudes-Confidence and Knowledge-Questionnaire (M-BACK) ble utviklet som et verktøy til å måle barrierer, holdninger, trygghet og kunnskap blant ansatte i psykisk helsevern, knyttet til pasientenes metabolske helse.
Formålet med denne studien var å undersøke om en norsk, digital versjon av spørreskjemaet M-BACK var et valid og reliabelt verktøy til bruk blant i psykisk helsevern. 1200 ansatte i psykisk helsevern ble invitert til å svare på spørreskjemaet via link fra sin leder. Intern konsistens ble mål med Cronbachs alpha, og test-retest reliabilitet ble vurdert med intraklasse-korrelasjonskoeffisient (ICC) og paret t-test. Innholdsvaliditeten ble vurdert av et ekspertpanel i oversettelsesprosessen, og begrepsvaliditeten vurdert med eksplorerende faktoranalyse.
Totalt 69 ansatte deltok i førstegangbesvarelsen, og 16 ansatte gjennomførte retest 7-14 dager etter førstegangsbesvarelse. Cronbachs alpha score varierte fra 0.65 – 0.82. ICC varierte fra 0.25 til 0.99 i de ulike domenene, og ICC for totalscore var 0.93. Paret T-test viste ingen signifikant endring i score mellom testtidspunkt. Faktoranalysen bekreftet fire domener/faktorer, hvorav flere spørsmål kryss-korrelerte med flere domener.
På bakgrunn av resultat fra M-BACK NO sammenlignet med internasjonale studier av M-BACK ble den norske oversettelsen av spørreskjemaet vurdert som et reliabelt og valid måleinstrument til bruk på ansatte i psykisk helsevern sin opplevelse av barrierer, samt kunnskap holdninger og trygghet knyttet til pasientens metabolske helse. Studien oppnådde dog svært lav deltakelse blant de inviterte ansatte, og tiltak for å bedre svarprosenten bør vektlegges i videre forskning på området People living with mental illness die on average 10-25 years earlier than the general population and have up to 60% increased risk of metabolic syndrome. There is a gap in recommended and provided physical activity and lifestyle interventions for the patients, and studies have shown a strong correlation between staff physical health and the patients physical health. The Metabolic-Barriers, Attitudes, Confidence, and Knowledge Questionnaire (M-BACK) was developed as a tool to measure the barriers, attitudes, confidence, and knowledge of mental health staff regarding the metabolic health of patients, to determine the efficacy of targeted training interventions.
The aims of this study were to investigate the reliability and validity characteristics of the Norwegian translated version of M-BACK, M-BACK NO, among mental health staff in Norwegian health care. 1200 mental health staff were invited to participate in the study, with a link from their leader. Retest was conducted 7-14 days after the first survey. Internal consistency was measured with Cronbachs Alpha, and test-retest reliability was calculated using intraclass correlation coefficient (ICC) and paired t-test. Content validity was measured with an expert panel, and a factor analysis was used to evaluate concept validity.
Sixty-nine mental health staff participated in the first survey, and 16 mental health staff participated in the retest. Cronbachs alpha ranged from 0.65 – 0.82 within the domains. ICC ranged from 0.25 to 0.99 within the domains, and calculated ICC total was 0.93. Factor analysis confirmed four factors/dimensions. Several questions had cross-loadings with different dimensions.
Based on the findings in this study, and previously conducted reliability and validity studies of M-BACK, M-BACK NO is considered a valid and reliable measure of the key elements of practitioners’ perceptions of barriers, and their knowledge, attitudes, and confidence regarding metabolic monitoring in people with mental illness. Our study had low participation rate, which is an important aspect for future research in mental health care.