Un EIAH au service de l'homogénéisation d'un Examen Clinique Objectif Structuré (Journées des ESPE d'Occitanie, Narbonne, 01/06/17-02/06/17)
Résumé
Dans le cadre de la réforme des études médicales, une nouvelle modalité d'évaluation sous forme d'un Examen Clinique Objectif Structuré (ECOS) a été mise en place pour les étudiants de 6ème année de l'UFR de médecine de Toulouse Purpan. L'examen a concerné 134 étudiants en Février 2017 qui sont passés successivement sur 7 stations pour être évalués notamment sur la réalisation d'une observation médicale avec examen clinique et formulation des hypothèses. La communication médecin / patient était également au centre des préoccupations avec 2 stations faisant intervenir des comédiens jouant le rôle de patients standardisés. L'EIAH mis en place a permis de collecter sous forme de traces brutes un ensemble d'observés définis pour chaque station. Les résultats sont saisis avec des équipements informatiques et des connexions réseaux très hétérogènes. Une fois collectées, les traces sont modélisées, puis des algorithmes de calculs sont mis en place pour produire des indicateurs (Djouad, 2013). La réussite à l'examen a ainsi pu être diffusée aux candidats beaucoup plus rapidement que l'année précédente en évitant un traitement manuel et potentiellement source d'erreurs. L'EIAH a également permis de collecter l'avis des étudiants, des enseignants ainsi que des acteurs au travers de questionnaires qui leur étaient dédiés. Ainsi, nous avons pu démontrer que la station dite « d'annonce » au cours duquel une pathologie doit être annoncée au patient standardisé était perçue comme étant la plus difficile par les étudiants. Le savoir être mis en jeu dans la relation soignant-patient est en effet un domaine encore peu enseigné au cours des études médicales, et qui est plus particulièrement mis à l'épreuve dans de tels contextes. L'EIAH permet également une analyse statistique et docimologique des résultats (Dessus, 2016) dans l'objectif d'améliorer le dispositif d'évaluation pour les futures sessions. Le but n'est pas ici de favoriser les critères discriminants (il ne s'agit pas de reproduire la logique « concours » du PACES ou de l'ECN) mais au contraire de veiller à l'homogénéité des grilles d'évaluation (coefficient d'homogénéité interne, alpha de Cronbach > 0.7). Les coefficients de corrélations calculés entre les résultats des grilles d'une station donnée et les résultats des grilles des autres stations restent faibles (entre 0.22 et 0.36) justifiant l'intérêt de chaque station. Le coefficient de corrélation entre les résultats à l'ECOS et les résultats de l'UE d'enseignements théoriques de 6ème année est également faible (0.40 en 2016 ; 0.39 en 2017) justifiant l'intérêt de l'ECOS par rapport aux modalités d'évaluation classiques existantes. En perspectives, les résultats calculés justifient le renforcement de la formation liée à la communication médicale avec la création prochaine d'un SPOC dédié à la relation médecin/patient. La réussite à l'ECOS permettant de valider le certificat de compétences cliniques, il s'agit également d'articuler de façon renforcée les modalités d'évaluation et les compétences génériques définies dans le BO du 16 Mai 2013. Dans un second temps, l'EIAH doit permettre de mesurer la progression des compétences acquises en cours de formation et de contribuer à la réingénierie pédagogique.