1. Résumé
L’Échelle de satisfaction des étudiants envers l’enseignement (en anglais, Student Satisfaction with Teaching Scale – SSTS) est un instrument psychométrique multidimensionnel conçu pour évaluer la perception et la satisfaction des étudiants universitaires à l’égard de l’efficacité pédagogique de leurs enseignants. Dérivée des travaux fondamentaux d’Herbert W. Marsh sur le questionnaire Students’ Evaluations of Educational Quality (SEEQ, 1982), la SSTS opérationnalise l’évaluation de l’enseignement supérieur à travers 19 items standardisés regroupés en cinq dimensions cardinales : la valeur perçue des apprentissages (Learning/Academic Value), l’enthousiasme de l’enseignant (Instructor Enthusiasm), l’organisation et la clarté du cours (Organization/Clarity), la qualité des interactions de groupe (Group Interaction) et le rapport individuel avec l’enseignant (Individual Rapport).
Les réponses sont recueillies au moyen d’échelles d’évaluation en 5 ou 9 points, s’étendant généralement de « Très faible / Fortement en désaccord » à « Très bon / Fortement d’accord ». D’un point de vue psychométrique, l’instrument démontre une cohérence interne remarquable, avec des coefficients alpha de Cronbach oscillant habituellement entre 0,83 et 0,94 selon les sous-échelles, ainsi qu’une fidélité test-retest substantielle confirmant la stabilité temporelle des scores. La validité factorielle, éprouvée par des analyses factorielles exploratoires et confirmatoires, corrobore sans ambiguïté une structure à cinq facteurs corrélés distincts mais interdépendants. Utilisée massivement dans la recherche sur la pédagogie universitaire, l’assurance qualité institutionnelle et l’avancement professionnel des enseignants-chercheurs (Scholarship of Teaching and Learning, SoTL), la SSTS constitue une mesure standardisée, robuste et robuste contre les biais potentiels d’évaluation formative et sommative.
2. Mots-clés
Évaluation des enseignements par les étudiants, satisfaction étudiante, pédagogie universitaire, Herbert W. Marsh, SEEQ, psychométrie éducative, efficacité pédagogique, analyse factorielle confirmatoire, Scholarship of Teaching and Learning, qualité de l’enseignement supérieur.
3. Auteurs
La conceptualisation originelle des dimensions et des énoncés de cette échelle repose sur les travaux pionniers du professeur Herbert W. Marsh (Ph.D., FAPS, FAcSS). Herbert W. Marsh est professeur émérite à l’Université d’Oxford (Département d’éducation, Royaume-Uni) et professeur distingué de recherche à l’Université de Western Sydney (Institute for Positive Psychology and Education, Australie). Ses recherches portent principalement sur la psychométrie, le concept de soi académique, la modélisation par équations structurelles et l’évaluation de la qualité de l’enseignement universitaire.
Les adaptations et formalisations de la Student Satisfaction with Teaching Scale (SSTS) en tant qu’instrument ciblé ont été menées par divers chercheurs affiliés à des centres d’évaluation de l’enseignement supérieur en Australie, au Royaume-Uni et aux États-Unis, en collaboration avec les équipes de recherche psychométrique rattachées aux consortiums d’évaluation éducative.
4. Objectif
L’objectif principal de la SSTS est de quantifier rigoureusement la perception globale et multidimensionnelle qu’ont les apprenants de l’environnement pédagogique dispensé par un enseignant ou une équipe éducative. Dans le contexte de la massification et de la professionnalisation de l’enseignement supérieur, l’évaluation des enseignements ne peut se limiter à une mesure unidimensionnelle réductrice de la popularité d’un enseignant ou à un indice unique de sympathie. La SSTS a été explicitement conçue pour déconstruire l’acte pédagogique en composantes observables, tangibles et modifiables.
Sur le plan de la recherche, l’instrument fournit une base empirique pour examiner les prédicteurs de la réussite académique, de l’engagement cognitif, de l’apprentissage autorégulé et de la rétention des étudiants au sein des filières universitaires. Elle permet aux chercheurs en sciences de l’éducation et en psychologie cognitive d’investiguer comment des variables telles que l’enthousiasme manifesté par l’instructeur ou la clarté conceptuelle des supports de cours modulent la motivation intrinsèque et la persévérance face à des contenus académiques complexes.
Dans une perspective institutionnelle et appliquée, la SSTS remplit une double fonction :
- Une fonction formative : Fournir aux enseignants un retour diagnostique précis sur leurs pratiques. L’enseignant peut identifier si ses lacunes perçues résident dans l’organisation logistique du cours (ex. supports, structuration des notes) ou dans la gestion des dynamiques relationnelles (ex. disponibilité, encouragement au débat), permettant ainsi des interventions ciblées de développement pédagogique.
- Une fonction sommative : Contribuer aux processus décisionnels institutionnels concernant la titularisation, la promotion académique, l’attribution de prix d’excellence pédagogique et les audits d’accréditation des programmes universitaires.
5. Construit psychologique
Le construit mesuré par la SSTS est l’efficacité de l’enseignement universitaire perçue par les étudiants, opérationnalisée sous forme d’un modèle factoriel de premier ordre comprenant cinq dimensions distinctes mais synergiques :
1. Valeur académique et apprentissage (Learning/Academic Value – Items 1 à 4)
Cette composante évalue la valeur intellectuelle ajoutée attribuée au cours par l’étudiant. Elle mesure dans quelle mesure le cours est perçu comme stimulant, exigeant sur le plan cognitif, et générateur d’une compréhension profonde de la matière. Elle capte également l’émergence ou l’amplification de l’intérêt intrinsèque pour la discipline. Par exemple, l’étudiant évalue si les enseignements lui ont permis d’acquérir des compétences qu’il considère comme durables et substantielles.
2. Enthousiasme de l’enseignant (Instructor Enthusiasm – Items 5 à 8)
Cette dimension renvoie à l’expressivité émotionnelle, au dynamisme et à l’énergie communicative déployés par l’enseignant lors des séances. L’enthousiasme englobe l’usage pertinent de l’humour, la modulation vocale, la présence physique et la capacité à capter et maintenir l’attention des étudiants. Ce construit est étroitement lié aux théories de l’apprentissage par imitation et à la contagion émotionnelle en milieu académique.
3. Organisation et clarté (Organization/Clarity – Items 9 à 12)
Cette sous-échelle reflète l’architecture pédagogique et l’intelligibilité des contenus dispensés. Elle examine si les objectifs d’apprentissage sont clairement énoncés dès le début du cours, si le matériel didactique est méticuleusement préparé, si les explications sont limpides et si la cadence de la présentation facilite la prise de notes structurée et l’intégration cognitive.
4. Interaction de groupe (Group Interaction – Items 13 à 16)
Cette dimension évalue le climat participatif et sociocognitif instauré dans la salle de classe ou l’amphithéâtre. Elle mesure dans quelle mesure l’enseignant encourage l’expression des idées divergentes, stimule le questionnement actif, accueille les contributions étudiantes et intègre le dialogue interactif comme vecteur fondamental de la construction des connaissances.
5. Rapport individuel (Individual Rapport – Items 17 à 19)
Cette dernière composante quantifie l’accessibilité interpersonnelle, la bienveillance et l’intérêt authentique que l’enseignant porte à chaque étudiant en tant qu’individu. Elle évalue le sentiment de sécurité psychologique ressenti par les étudiants lorsqu’ils sollicitent de l’aide pédagogique, une orientation méthodologique ou des conseils personnalisés, que ce soit pendant les heures de cours ou lors des permanences de bureau.
6. Cadre théorique
La SSTS repose sur le cadre théorique développé par Herbert W. Marsh (1982, 1987) réfutant l’hypothèse d’une dimensionnalité globale indifférenciée (effet de halo pur) dans l’évaluation de l’enseignement. Ce cadre conceptuel postule que l’enseignement est une activité complexe, polyvalente et multidimensionnelle, nécessitant une conceptualisation psychométrique capable de distinguer les compétences didactiques, relationnelles et organisationnelles.
D’un point de vue psychologique plus large, l’échelle s’inscrit au confluent de trois grands paradigmes :
- La théorie de la charge cognitive (Sweller) : La dimension d’organisation et de clarté cible directement la minimisation de la charge cognitive extrinsèque, facilitant ainsi le traitement germane des contenus d’apprentissage.
- La théorie de l’autodétermination (Deci & Ryan) : Les dimensions d’interaction de groupe et de rapport individuel répondent directement aux besoins psychologiques fondamentaux d’appartenance sociale (relatedness) et d’autonomie, tandis que la valeur perçue renforce le sentiment de compétence.
- Le modèle d’expressivité pédagogique (effet Dr. Fox) : Les travaux de Ware et Williams (1975), réinterprétés par Marsh, démontrent que si l’enthousiasme de l’enseignant suscite une haute satisfaction immédiate, il ne remplace pas le contenu cognitif. La SSTS sépare donc méthodiquement l’expressivité (enthousiasme) de la rigueur conceptuelle (valeur académique), neutralisant ainsi l’illusion de complaisance évaluative.
7. Validité
Les preuves accumulées relatives à la validité de la SSTS et de sa matrice d’origine (le SEEQ) sont parmi les plus documentées de la littérature psychométrique en éducation :
Validité de construit
Les études de Marsh (1982, 1984) basées sur des échantillons cumulant plus de 50 000 évaluations de cours ont confirmé que les dimensions de l’échelle résistent à l’analyse multivariée et ne s’effondrent pas sous un facteur général de halo. Lorsque des modèles hiérarchiques de second ordre sont testés, les facteurs de premier ordre conservent une variance unique substantielle qui justifie leur interprétation diagnostique séparée.
Validité convergente et discriminante
La validité convergente est démontrée par des corrélations modérées à fortes entre les évaluations des étudiants et :
- Les auto-évaluations des enseignants sur les mêmes dimensions ($r = 0{,}45$ à $0{,}65$) ;
- Les évaluations par des pairs observateurs formés ($r = 0{,}50$ à $0{,}68$) ;
- Les évaluations rétrospectives d’anciens étudiants diplômés réévaluant leurs cours avec plusieurs années de recul ($r > 0{,}80$).
La validité discriminante est appuyée par la faible corrélation entre les scores de l’échelle et des variables parasites externes telles que la taille de la classe, le genre de l’enseignant, l’heure de programmation du cours ou la sévérité de notation anticipée par l’étudiant (les corrélations n’excédant généralement pas $r = 0{,}15$).
Validité prédictive
Des corrélations significatives ($r = 0{,}30$ à $0{,}45$) sont systématiquement observées entre les scores de la sous-échelle « Valeur académique et apprentissage » et les résultats objectifs obtenus par les étudiants aux examens standardisés de fin de semestre, démontrant que la perception de haute qualité didactique s’accompagne d’une acquisition effective de compétences.
8. Fidélité
La fidélité de la SSTS s’évalue traditionnellement à deux niveaux d’analyse : au niveau de l’étudiant individuel et au niveau agrégé de la classe (moyenne de groupe).
Cohérence interne
Les estimations de la cohérence interne calculées via le coefficient alpha de Cronbach révèlent une homogénéité élevée des items au sein de chaque sous-échelle :
- Valeur académique : $\alpha = 0{,}88$ à $0{,}92$
- Enthousiasme de l’enseignant : $\alpha = 0{,}89$ à $0{,}93$
- Organisation et clarté : $\alpha = 0{,}86$ à $0{,}91$
- Interaction de groupe : $\alpha = 0{,}84$ à $0{,}89$
- Rapport individuel : $\alpha = 0{,}83$ à $0{,}88$
Fidélité inter-évaluateurs et stabilité agrégée
Dans la mesure où l’unité d’analyse institutionnelle est souvent la classe, la fidélité de la moyenne de classe (calculée selon les formules de Spearman-Brown appliquées au coefficient de corrélation intraclasse, ICC) dépasse $0{,}90$ dès lors qu’un échantillon minimal de 15 à 20 étudiants par cours répond au questionnaire. Enfin, la fidélité test-retest à intervalle de plusieurs semaines démontre une remarquable stabilité temporelle ($r_{tt} > 0{,}85$).
9. Analyse factorielle
La confirmation de l’architecture factorielle de la SSTS a été établie par de nombreuses études factorielles exploratoires (AFE) utilisant des rotations obliques (Promax ou Oblimin), ainsi que par des analyses factorielles confirmatoires (AFC) multigroupes.
Modélisation confirmatoire (AFC)
Le modèle à cinq facteurs corrélés s’ajuste systématiquement de manière optimale aux données empiriques. Les indices d’ajustement couramment rapportés dans la littérature psychométrique (ex. Marsh, 1982 ; Marsh & Roche, 1997) respectent rigoureusement les critères méthodologiques conventionnels :
- $chi^2/dl < 2{,}5$
- Comparative Fit Index (CFI) : $ge 0{,}95$
- Tucker-Lewis Index (TLI) : $ge 0{,}94$
- Root Mean Square Error of Approximation (RMSEA) : $le 0{,}048$ (intervalle de confiance à 90 % : $[0{,}042 ; 0{,}054]$)
- Standardized Root Mean Square Residual (SRMR) : $le 0{,}035$
Saturations factorielles
Toutes les saturations standardisées ($lambda$) des items sur leurs facteurs respectifs sont hautement significatives ($p < 0{,}001$) et dépassent généralement le seuil de$0{,}70$, a\vec des valeurs oscillant entre$0{,}68$ et $0{,}89$. Les corrélations inter-facteurs sont positives et modérées ($r = 0{,}35$ à $0{,}65$), attestant que si ces dimensions partagent une composante d’appréciation générale du cours, elles mesurent des facets véritablement distinctes de l’environnement d’apprentissage.
10. Instrument de mesure
- Type d’instrument : Questionnaire d’auto-évaluation / Échelle d’évaluation par les étudiants (évaluation par les pairs/bénéficiaires).
- Format d’administration : Papier-crayon ou version dématérialisée en ligne (plateformes LMS, portails universitaires sécurisés).
- Nombre total d’items : 19 énoncés déclaratifs standardisés.
- Format de réponse : Échelle d’évaluation en 5 ou 9 points (communément ancrée de 1 = « Très faible / Fortement en désaccord » à 5 ou 9 = « Très bon / Fortement d’accord » ; en anglais : 5-point or 9-point rating scale (commonly 1 = Very Poor / Strongly Disagree to 5 or 9 = Very Good / Strongly Agree)).
- Durée de passation : Environ 5 à 10 minutes.
- Calcul des scores (Cotation) :
- Aucun item inversé (tous les énoncés sont formulés positivement).
- Le score de chaque sous-échelle correspond à la moyenne arithmétique des items qui la composent :
- Valeur académique (Learning/Academic Value) : moyenne des items 1 à 4.
- Enthousiasme de l’enseignant (Instructor Enthusiasm) : moyenne des items 5 à 8.
- Organisation et clarté (Organization/Clarity) : moyenne des items 9 à 12.
- Interaction de groupe (Group Interaction) : moyenne des items 13 à 16.
- Rapport individuel (Individual Rapport) : moyenne des items 17 à 19.
11. Permissions, Tarifs et Année du test
- Année de développement initial : 1982 (publication princeps du SEEQ par H. W. Marsh).
- Statut du droit d’auteur : Les items dérivés du SEEQ d’origine sont protégés par le droit d’auteur académique conventionnel. Herbert W. Marsh a traditionnellement autorisé l’utilisation libre des échelles à des fins de recherche non commerciale, de formation et d’évaluation pédagogique interne au sein des institutions universitaires.
- Tarification : Accès libre (gratuit) pour la recherche scientifique et l’enseignement supérieur sous réserve de citation adéquate des publications sources. Aucune redevance commerciale n’est requise pour l’évaluation institutionnelle standard.
- Contact institutionnel : Les demandes d’utilisation à grande échelle ou de commercialisation logicielle doivent être adressées aux détenteurs des droits de l’Université de Western Sydney ou d’Oxford.
12. Références
Marsh, H. W. (1982). SEEQ: A reliable, valid, and useful instrument for collecting students’ evaluations of university teaching. British Journal of Educational Psychology, 52(1), 77–95. https://doi.org/10.1111/j.2044-8279.1982.tb02505.x
Marsh, H. W. (1984). Students’ evaluations of university teaching: Dimensionality, reliability, validity, potential biases, and utility. Journal of Educational Psychology, 76(5), 707–754. https://doi.org/10.1037/0022-0663.76.5.707
Marsh, H. W. (1987). Students’ evaluations of university teaching: Research findings, methodological issues, and directions for future research. International Journal of Educational Research, 11(3), 253–388. https://doi.org/10.1016/0883-0355(87)90001-2
Marsh, H. W., & Hocevar, D. (1991). Students’ evaluations of teaching effectiveness: The stability of mean ratings of the same teachers over an 13-year period. Teaching and Teacher Education, 7(4), 303–314. https://doi.org/10.1016/0742-051X(91)90001-5
Marsh, H. W., & Roche, L. A. (1997). Making students’ evaluations of teaching effectiveness effective: The critical issues of validity, bias, and utility. American Psychologist, 52(11), 1187–1197. https://doi.org/10.1037/0003-066X.52.11.1187
13. Questions et items du questionnaire
Response Scale: 5-point or 9-point rating scale (commonly 1 = Very Poor / Strongly Disagree to 5 or 9 = Very Good / Strongly Agree)
- I found the course intellectually challenging and stimulating.
- I have learned something which I consider valuable.
- My interest in the subject has increased as a consequence of this course.
- I have learned and understood the subject materials of this course.
- Instructor was enthusiastic about teaching the course.
- Instructor was dynamic and energetic in conducting the course.
- Instructor enhanced presentations with the use of humor.
- Instructor’s style of presentation held my interest during class.
- Instructor’s explanations were clear.
- Course materials were well prepared and carefully explained.
- Proposed objectives of the course were clearly stated and agreed with what was actually taught.
- Instructor gave lectures that facilitated note taking.
- Students were encouraged to participate in class discussions.
- Students were invited to share their ideas and knowledge.
- Students were encouraged to ask questions and were given meaningful answers.
- Students were encouraged to express their own ideas and/or question the instructor.
- Instructor was friendly towards individual students.
- Instructor made students feel welcome in seeking help/advice in or outside of class.
- Instructor had a genuine interest in individual students.