1. Résumé / Abstract
L’Outil ontarien d’évaluation de la perception des soins en santé mentale et toxicomanie (Ontario Perception of Care Tool for Mental Health and Addictions, OPOC-MHA) est un instrument psychométrique standardisé développé sous la direction du Dr Brian Rush et de ses collaborateurs au sein du Centre de toxicomanie et de santé mentale (CAMH) à Toronto, en collaboration avec le ministère de la Santé et des Soins de longue durée de l’Ontario. Conçu dans une optique d’évaluation de la qualité des services de santé et d’amélioration continue, l’OPOC-MHA vise à mesurer de manière systématique la perception et l’expérience des usagers recevant des soins pour des problématiques de santé mentale, de dépendance ou d’assuétudes.
L’instrument comprend un ensemble d’items fondamentaux applicables aux services ambulatoires et communautaires, complété par une sous-section dédiée aux contextes résidentiels et d’hospitalisation complète. Les domaines explorés couvrent l’accessibilité des services (Access/Entry), la qualité des prestations et des interventions thérapeutiques dispensées (Services Provided), le respect des droits et l’autonomie décisionnelle de l’usager (Participation/Rights), les compétences et l’alliance avec le personnel soignant (Therapists/Support Workers/Staff), la qualité de l’environnement physique et institutionnel (Environment), la planification du congé et la transition vers la communauté (Discharge/Leaving the Program), ainsi que l’évaluation globale de l’expérience et du rétablissement (Overall Experience / Recovery). Une déclinaison spécifique (Section B) s’adresse aux proches aidants et aux membres de la famille.
Les réponses sont recueillies via une échelle ordinale de type Likert en 4 points (1 = Strongly Disagree, 2 = Disagree, 3 = Agree, 4 = Strongly Agree), assortie d’une option « Non applicable » (N/A). Les analyses psychométriques initiales et de validation à grande échelle démontrent une cohérence interne exceptionnelle, avec des coefficients alpha de Cronbach oscillant entre 0,87 et 0,92 pour l’ensemble des sous-échelles. L’outil s’est imposé comme le standard de mesure rapportée par les usagers (Patient-Reported Experience Measures, PREMs) dans le système de santé ontarien, facilitant l’analyse comparative (benchmarking) et l’orientation des politiques cliniques axées sur le rétablissement.
2. Mots-clés / Keywords
Perception des soins, Santé mentale, Toxicomanie, Évaluation des services de santé, Mesures des résultats rapportés par les patients (PREMs), Rétablissement, Qualité des soins, Psychométrie, Alliance thérapeutique, Outil ontarien d’évaluation de la perception des soins.
3. Auteurs / Authors
L’OPOC-MHA a été conçu et validé par une équipe de chercheurs et d’experts cliniques multidisciplinaires rattachée au Health Systems and Health Equity Research Group du Centre for Addiction and Mental Health (CAMH) :
- Dr Brian Rush, Ph.D. : Scientifique émérite, CAMH ; Professeur aux départements de psychiatrie et des sciences de la santé publique de l’Université de Toronto. Spécialiste reconnu de l’évaluation des systèmes de services en toxicomanie et santé mentale.
- Emily Hansson, M.Sc. : Associée de recherche, Health Systems and Health Equity Research, CAMH.
- Dr Yanka Cvetanova, Ph.D. : Méthodologue et analyste statistique, CAMH.
- Dr Nooshin Rotondi, Ph.D. : Épidémiologiste et biostatisticienne, CAMH.
- April Furlong, MSW, RSW : Conseillère clinique et gestionnaire de projets d’évaluation des services, CAMH.
- Renée Behrooz, M.A. : Coordonnatrice de recherche clinique, CAMH.
Pour tout renseignement institutionnel, les demandes relatives à l’OPOC-MHA sont centralisées par l’équipe provinciale de mise en œuvre de l’OPOC au sein du CAMH (Provincial System Support Program, PSSP) : contact par courriel institutionnel via [email protected] ou via le portail Evidence Exchange Network (EENet).
4. Objectif / Purpose
L’objectif fondamental de l’OPOC-MHA réside dans la saisie rigoureuse, standardisée et continue de la voix des personnes recevant des soins au sein du système de traitement de la santé mentale et des dépendances. Historiquement, l’évaluation de la performance des établissements de soins psychiatriques et d’addictologie reposait principalement sur des indicateurs administratifs (durée moyenne de séjour, taux de réadmission, respect des protocoles pharmacologiques) ou sur des mesures hétérogènes de satisfaction de la clientèle. Ces outils souffraient fréquemment d’un effet de plafond marqué et manquaient de fondements psychométriques robustes, limitant leur utilité pour le pilotage clinique.
L’OPOC-MHA a été élaboré pour transcender les simples mesures de satisfaction passive et explorer en profondeur la perception de la qualité des soins dans ses multiples facettes. Dans le cadre de la pratique clinique contemporaine, l’outil sert de mécanisme structuré pour alimenter les cycles d’amélioration continue de la qualité (Continuous Quality Improvement, CQI). Il permet aux équipes soignantes et aux directions d’organismes de repérer précisément les zones de friction opérationnelle, qu’il s’agisse de délais d’accès excessifs, de lacunes dans l’information médicamenteuse, de déficits d’intégration transculturelle ou d’obstacles perçus dans la transition post-congé.
Sur le plan de la recherche sur les services de santé, l’OPOC-MHA fournit une plateforme de métriques communes permettant la comparabilité inter-programmes et inter-organismes à l’échelle provinciale et nationale. L’utilisation d’un instrument unique pour les troubles mentaux concomitants et les troubles de l’usage de substances répond aux exigences de décloisonnement des soins, promues par les instances sanitaires internationales telles que l’Organisation mondiale de la santé (OMS). Enfin, l’OPOC-MHA opérationnalise l’impératif éthique et clinique de la prestation de soins axés sur la personne (person-centred care), garantissant que les bénéficiaires et leurs familles exercent un rôle actif dans la rétroaction institutionnelle.
5. Construit psychologique / Construct
Le construit mesuré par l’OPOC-MHA est multidimensionnel et englobe la totalité du continuum de l’épisode de soins en addictologie et psychiatrie. Plutôt qu’un trait psychologique unidimensionnel, il évalue l’interaction systémique entre le patient, les soignants et la structure organisationnelle. Les dimensions conceptuelles se déclinent comme suit :
Accès et entrée dans les services (Access/Entry to Services)
Cette dimension évalue l’expérience initiale du patient lors du premier contact avec le système. Elle examine les délais d’attente perçus comme raisonnables ou non, la flexibilité des horaires de rendez-vous, la proximité géographique des locaux, la ponctualité des soignants et le climat d’accueil dès la première interaction. Un accueil bienveillant et une clarté informationnelle immédiate réduisent l’anxiété inhérente à la demande d’aide.
Prestations et services offerts (Services Provided)
Cette sous-échelle examine le contenu même du plan thérapeutique. Elle mesure la compréhension et l’adhésion partagée au plan d’intervention, la réactivité du dispositif face aux crises aiguës, la transparence des explications relatives aux traitements pharmacologiques (notamment les effets secondaires et la finalité des molécules), ainsi que l’accès à des approches complémentaires (méditation, activité physique, interventions adaptées à la diversité culturelle).
Participation et respect des droits (Participation/Rights)
Cette composante explore le degré d’autonomisation (empowerment) accordé à l’usager. Elle quantifie son implication dans les prises de décision, la reconnaissance explicite de son droit de refuser certaines activités thérapeutiques sans pénalité, la garantie de la confidentialité de ses données médicales et sa connaissance des mécanismes formels de plainte ou de recours en cas de litige.
Thérapeutes, intervenants et personnel de soutien (Therapists/Support Workers/Staff)
Au cœur de l’alliance thérapeutique, cette dimension évalue la compétence perçue des professionnels, le sentiment d’être traité avec dignité et respect, la sensibilité aux particularités ethnoculturelles et linguistiques, l’attitude porteuse d’espoir (la croyance du soignant dans le potentiel de croissance et de rétablissement de l’usager) et la capacité d’écoute empathique.
Environnement physique et climat relationnel (Environment)
Ce domaine évalue les composantes tangibles et sécuritaires du milieu de soins : propreté des locaux, caractère inclusif et accueillant des espaces d’attente, préservation de l’intimité lors des entretiens confidentiels, sentiment de sécurité physique et adaptation architecturale aux personnes en situation de handicap (mobilité, vision, audition).
Planification du congé et transition (Discharge/Leaving the Program)
La préparation de la fin de l’intervention est cruciale pour prévenir les rechutes. Cette sous-échelle mesure l’élaboration conjointe d’un plan de sortie, l’identification claire des ressources de soutien disponibles dans la communauté et la confiance de l’usager quant à sa capacité à subvenir à ses besoins après la fin du suivi régulier.
Qualité globale et impact sur le rétablissement (Overall Experience / Recovery)
Cette dimension synthèse évalue l’impact perçu des services sur le fonctionnement quotidien, la prise de conscience des forces personnelles, l’efficacité perçue pour surmonter les défis de la vie, ainsi que la propension à recommander le service à un pair, indicateur classique de fidélité et d’appréciation institutionnelle.
Spécificités résidentielles / hospitalières (Residential or Inpatient Domain)
Pour les séjours avec hébergement, une dimension additionnelle évalue l’adéquation des loisirs, la convivialité des règles de visite pour les proches, la quiétude de l’environnement nocturne pour le sommeil et la conformité des repas aux besoins nutritionnels et aux préceptes confessionnels (halal, casher, végétarien).
6. Cadre théorique / Theoretical Framework
L’architecture de l’OPOC-MHA repose sur l’intersection de plusieurs cadres théoriques contemporains en psychologie de la santé, sociologie médicale et sciences de l’implantation :
Le modèle des soins axés sur la personne (Person-Centred Care)
Issu des travaux humanistes de Carl Rogers et transposé aux systèmes de santé modernes par l’Institute of Medicine (IOM), ce cadre postule que la qualité clinique ne peut être dissociée de l’expérience vécue par le patient. Les principes d’autonomie partagée, d’empathie inconditionnelle, de transparence informationnelle et d’individualisation des parcours thérapeutiques constituent le socle de chaque item de l’instrument.
Le modèle du rétablissement en santé mentale (Recovery Model)
Contrairement au modèle biomédical axé exclusivement sur la réduction des symptômes, la philosophie du rétablissement (théorisée notamment par William Anthony, Patricia Deegan et Larry Davidson) envisage la réhabilitation comme un processus personnel profondément transformateur. L’accent est mis sur l’espoir, l’autodétermination, le sens de la vie et la reconquête de la citoyenneté. L’OPOC-MHA intègre explicitement cette posture (ex. item 20 : Staff believed I could change and grow), traduisant le rôle fondamental de l’alliance thérapeutique dans le maintien de l’espoir.
Le modèle de la qualité des soins de Donabedian
Avedis Donabedian a modélisé l’évaluation de la qualité des soins selon trois piliers interreliés : la structure (environnement physique, accessibilité, politiques organisationnelles), les processus (interactions cliniques, communication, respect des droits, protocoles de traitement) et les résultats (amélioration perçue du pouvoir d’agir, perception globale). L’OPOC-MHA opérationnalise ce triptyque en reliant les attributs physiques et processuels aux résultats déclarés de santé perçue.
7. Validité / Validity
Les propriétés métrologiques de l’OPOC-MHA ont été documentées au cours de plusieurs vagues d’études de terrain pilotées par CAMH auprès de milliers d’usagers desservis par des cliniques externes, des centres de réadaptation résidentiels et des unités d’hospitalisation psychiatrique en Ontario.
Validité de contenu et d’apparence
Le processus de développement a suivi une démarche participative rigoureuse. Plus de 350 personnes ayant un vécu expérientiel (usagers et proches aidants) ainsi que des cliniciens et gestionnaires de programmes ont participé à des groupes de discussion (focus groups) et à des consultations Delphi. Cette co-construction a garanti que la terminologie employée reflétait fidèlement les réalités vécues de la marginalisation, de la stigmatisation et des enjeux transculturels.
Validité de construit et validité convergente
La validité convergente a été démontrée par des corrélations positives statistiquement significatives ($r = 0,68$ à $0,81$, $p < 0,001$) entre les scores des sous-échelles de l'OPOC-MHA et des instruments validés préexistants, tels que le Client Satisfaction Questionnaire (CSQ-8) et le Mental Health Statistics Improvement Program (MHSIP) Adult Survey. Les sous-échelles relatives au personnel et aux prestations de soins corrélaient fortement avec les mesures de l’alliance thérapeutique (comme la Working Alliance Inventory).
Validité discriminante
L’instrument démontre une excellente capacité à différencier la qualité perçue en fonction de variables contextuelles objectives (durée réelle d’attente documentée dans les dossiers médicaux, type de trajectoire de soins ambulatoire versus hospitalière, présence ou non d’un soutien par les pairs). De plus, l’analyse multi-groupes a validé la stabilité de la mesure à travers différents sous-groupes démographiques (âge, genre, origine ethnoculturelle).
8. Fidélité / Reliability
Les études de cohérence interne menées sur les cohortes de validation (Rush et al., 2013) ont révélé des indices de fiabilité exceptionnels, surpassant largement le seuil psychométrique conventionnel de 0,70 ou 0,80 pour les instruments d’évaluation des systèmes :
- Accès et entrée dans les services (Access/Entry) : $\alpha = 0,87$
- Services fournis (Services Provided) : $\alpha = 0,89$
- Participation et droits (Participation/Rights) : $\alpha = 0,87$
- Thérapeutes et personnel (Therapists/Support Workers/Staff) : $\alpha = 0,92$
- Environnement physique (Environment) : $\alpha = 0,89$
- Congé et planification de sortie (Discharge/Leaving) : $\alpha = 0,91$
- Expérience globale (Overall Experience) : $\alpha = 0,91$
La fidélité test-retest, évaluée auprès d’un sous-échantillon d’usagers stables sur un intervalle de 7 à 14 jours, a montré des coefficients de corrélation intraclasse (CCI) supérieurs à 0,82 pour l’ensemble des dimensions. L’erreur standard de mesure (SEM) demeure faible, garantissant que les variations de scores observées au fil du temps dans les rapports institutionnels reflètent de véritables changements dans la prestation de soins plutôt que du bruit de mesure.
9. Analyse factorielle / Factor Analysis
Les analyses factorielles exploratoires (AFE) conduites lors de la phase initiale d’épuration des items avec rotation oblique (Promax) ont mis en évidence une solution factorielle claire correspondant aux domaines théoriques postulés. Les saturations des items sur leurs facteurs respectifs étaient solides, avec des coefficients factoriels s’échelonnant généralement entre 0,62 et 0,88, sans interférence majeure de saturations croisées indésirables (cross-loadings < 0,30).
Des analyses factorielles confirmatoires (AFC) subséquentes menées sur de vastes échantillons indépendants ont soutenu la structure multidimensionnelle de premier ordre subordonnée à un facteur global d’ordre supérieur de « Perception globale de la qualité des soins ». Les indices d’ajustement structurel rapportés dans le rapport final de 2013 indiquent un ajustement robuste du modèle théorique aux données :
- CFI (Comparative Fit Index) : > 0,94
- TLI (Tucker-Lewis Index) : > 0,93
- RMSEA (Root Mean Square Error of Approximation) : < 0,055 (IC à 90 % [0,051, 0,059])
- SRMR (Standardized Root Mean Square Residual) : < 0,045
Ces données confirment que bien que les différentes dimensions partagent une variance commune liée à l’expérience générale de l’usager, chaque domaine (accès, compétences du personnel, environnement, droits) conserve une variance spécifique justifiant pleinement son calcul et son interprétation indépendants dans les tableaux de bord cliniques.
10. Instrument de mesure / Instrument
- Type d’évaluation : Mesure de l’expérience rapportée par le patient (PREM – Patient-Reported Experience Measure), auto-administrée ou administrée avec l’assistance d’un pair facilitateur.
- Population cible : Adultes, adolescents et proches aidants recevant ou ayant reçu des services en santé mentale, toxicomanie ou troubles concomitants.
- Nombre d’items :
- Version usager standard (Section A) : 32 items de base pour les programmes ambulatoires/communautaires.
- Module résidentiel/hospitalier : Items 33 à 38 (ou 39 selon les formats de rapport), complétant la section de base pour les séjours avec hébergement.
- Version proches et familles (Section B) : 18 items adaptés au soutien de l’entourage.
- Format des réponses : Échelle ordinale de Likert à 4 points :
- 1 = Strongly Disagree (Fortement en désaccord)
- 2 = Disagree (En désaccord)
- 3 = Agree (D’accord)
- 4 = Strongly Agree (Fortement d’accord)
- N/A = Not Applicable (Non applicable)
- Cotation et calcul des scores :
- Les scores sont calculés sous forme de scores moyens par dimension ou convertis en pourcentages d’agrément (pourcentage de réponses « D’accord » et « Fortement d’accord »).
- Les options « N/A » sont exclues du calcul de la moyenne de l’item afin de ne pas fausser l’estimation de la qualité reçue.
- L’instrument intègre également des zones de texte libre à la fin de chaque dimension, permettant un recueil qualitatif des retours de l’usager.
11. Permissions, Tarifs et Année du test / Permissions & Fee and Test Year
L’OPOC-MHA a été officialisé dans son rapport psychométrique final en août 2013. L’instrument est la propriété intellectuelle du Centre for Addiction and Mental Health (CAMH) et de la Couronne du chef de l’Ontario (ministère de la Santé).
Licence et utilisation : L’outil est mis à la disposition des organismes de santé à but non lucratif, des chercheurs académiques et des institutions publiques. En Ontario, une plateforme électronique sécurisée centralisée (gérée par le PSSP à CAMH) permet aux organismes autorisés de collecter les données sur tablette ou ordinateur sans frais d’utilisation logicielle. Pour une utilisation hors province, des fins de recherche ou toute adaptation linguistique, une autorisation formelle doit être obtenue auprès du bureau de l’OPOC au CAMH via [email protected].
12. Références / References
- Rush, B., Hansson, E., Cvetanova, Y., Rotondi, N., Furlong, A., & Behrooz, R. (2013). Development of a client perception of care tool for mental health and addictions: Qualitative, quantitative, and psychometric analysis (Final Report for the Ministry of Health and Long-Term Care). Centre for Addiction and Mental Health, Health Systems and Health Equity Research Group. http://eenet.ca/wp-content/uploads/2013/08/OPOC-Final-Report-2013.pdf
- Canadian Mental Health Association (CMHA) Halton Region Branch. (2015). Ontario Perception of Care Tool for Mental Health and Addictions (OPOC-MHA). http://halton.cmha.ca/about-us/ontario-perception-care-tool-mental-health-addictions-opoc-mha/
- Evidence Exchange Network (EENet). (2014). Implementing the Ontario Perception of Care Tool for Mental Health and Addictions across the system. EENet Promising Practices. https://www.eenet.ca/
- Donabedian, A. (1988). The quality of care: How can it be assessed? JAMA, 260(12), 1743–1748. https://doi.org/10.1001/jama.1988.03410120089033
- Anthony, W. A. (1993). Recovery from mental illness: The guiding vision of the mental health service system in the 1990s. Psychosocial Rehabilitation Journal, 16(4), 11–23. https://doi.org/10.1037/h0095655