Development and Evaluation of a Recovery College Fidelity Measure

Can J Psychiatry. 2019 Jun;64(6):405-414. doi: 10.1177/0706743718815893. Epub 2018 Dec 30.

Abstract

Objective: Recovery Colleges are widespread, with little empirical research on their key components. This study aimed to characterize key components of Recovery Colleges and to develop and evaluate a developmental checklist and a quantitative fidelity measure.

Methods: Key components were identified through a systematized literature review, international expert consultation (n = 77), and semistructured interviews with Recovery College managers across England (n = 10). A checklist was developed and refined through semistructured interviews with Recovery College students, trainers, and managers (n = 44) in 3 sites. A fidelity measure was adapted from the checklist and evaluated with Recovery College managers (n = 39, 52%), clinicians providing psychoeducational courses (n = 11), and adult education lecturers (n = 10).

Results: Twelve components were identified, comprising 7 nonmodifiable components (Valuing Equality, Learning, Tailored to the Student, Coproduction of the Recovery College, Social Connectedness, Community Focus, and Commitment to Recovery) and 5 modifiable components (Available to All, Location, Distinctiveness of Course Content, Strengths Based, and Progressive). The checklist has service user student, peer trainer, and manager versions. The fidelity measure meets scaling assumptions and demonstrates adequate internal consistency (0.72), test-retest reliability (0.60), content validity, and discriminant validity.

Conclusions: Coproduction and an orientation to adult learning should be the highest priority in developing Recovery Colleges. The creation of the first theory-based empirically evaluated developmental checklist and fidelity measure (both downloadable at researchintorecovery.com/recollect ) for Recovery Colleges will help service users understand what Recovery Colleges offer, will inform decision making by clinicians and commissioners about Recovery Colleges, and will enable formal evaluation of their impact on students.

Objectif:: Les Collèges de rétablissement sont répandus et leurs principaux éléments n’ont pas fait l’objet d’une importante recherche empirique. Cette étude visait à caractériser les principaux éléments des Collèges de rétablissement, et à mettre au point et évaluer une liste de vérification développementale et une mesure de fidélité quantitative.

Méthodes:: Les principaux éléments ont été déterminés par une revue systématisée de la littérature, une consultation auprès d’experts internationaux (n = 77) et des entrevues semi-structurées menées auprès de gestionnaires de Collèges de rétablissement partout en Angleterre (n = 10). Une liste de vérification a été élaborée et perfectionnée lors d’entrevues semi-structurées menées auprès d’élèves, de formateurs et de gestionnaires (n = 44) de trois Collèges de rétablissement. Une mesure de fidélité a été adaptée de la liste de vérification et évaluée avec les gestionnaires des Collèges de rétablissement (n = 39, 52%), des cliniciens donnant les cours de psychoéducation (n = 11) et des chargés de cours pour la formation des adultes (n = 10).

Résultats:: Douze éléments ont été identifiés, y compris sept éléments non modifiables (valorisation de l’égalité; apprentissage; adapté à l’étudiant; co-production du Collège de rétablissement; liens sociaux; accent mis sur la communauté; et engagement au rétablissement) et cinq éléments modifiables (disponible pour tous; emplacement; spécificité du contenu des cours; basé sur les forces; et progressif). La liste de vérification compte des versions pour l’étudiant utilisateur de services, le pair formateur et le gestionnaire. La mesure de fidélité répond aux hypothèses d’échelle et montre une cohésion interne adéquate (0,72), une fiabilité test-retest (0,60), une validité du contenu et une validité discriminante.

Conclusions:: La co-production et l’orientation de la formation des adultes devraient être la priorité numéro un du développement des Collèges de rétablissement. La création de la première liste de vérification développementale, basée sur la théorie et évaluée empiriquement, et de la mesure de fidélité (toutes deux téléchargeables à l’adresse researchintorecovery.com/recollect) pour les Collèges de rétablissement sera utile aux utilisateurs de services pour comprendre ce qu’offrent les Collèges de rétablissement, éclairera la prise de décisions des cliniciens et des commissaires au sujet des Collèges de rétablissement, et permettra une évaluation officielle de leur effet sur les étudiants.

Keywords: coproduction; fidelity; health services research; recovery education; schizophrenia.

Publication types

  • Research Support, Non-U.S. Gov't

MeSH terms

  • Adult
  • Checklist / standards*
  • Education, Nonprofessional*
  • England
  • Health Services Research*
  • Humans
  • Mental Disorders / rehabilitation*
  • Mental Health Services / standards*
  • Patient Education as Topic / standards*
  • Reproducibility of Results
  • Schools / standards*