A D3M methodology for the integration of students' survey results with teachers' perspectives, based on objective, subjective and semantic measures

Résumé

Dans les milieux universitaires, il est commun d’évaluer la performance des enseignants en classe grâce à des questionnaires remplis par les étudiants. En général, les analystes utilisent des techniques de statistique descriptive pour énoncer des conclusions et générer des recommandations sur la base de la seule opinion des étudiants. Dans cette thèse, nous développons une méthodologie permettant d’incorporer à l’analyse les jugements et l’expertise des enseignants et des collègues qui partagent le même vécu académique. Pour ce faire, nous construisons des modèles prenant la forme d’un ensemble de règles d'association exprimant les patrons communs. Ces ensembles de patrons représentent ainsi le modèle personnalisé et complet de chaque enseignant. La représentation graphique que nous proposons intègre les modèles considérés comme judicieux à la fois par les étudiants et par les enseignants. Cette représentation est construite en utilisant les règles évaluées grâce à un ensemble de mesures objectives et subjectives et une méthodologie fondée sur l'exploration des données. De manière complémentaire, nous avons construit une mesure sémantique permettant d’évaluer les règles qui ne sont pas prises en compte au départ dans la représentation. Cette mesure d’utilité évalue l’effort nécessaire pour améliorer des attributs spécifiques de chaque nouvelle règle en combinant l’avis des étudiants, des enseignants et des collègues. La valeur obtenue permet ainsi de recommander l’application d’une règle d’association spécifique pour améliorer les performances d’un enseignant. En conséquence, la mesure permet d’identifier, pour chaque enseignant, ses forces et ses déficiences de manière plus fidèle. Finalement, nous identifions des thèmes d’évaluation importants qui ne sont pas considérés dans les questionnaires originaux que remplissent les étudiants. Notre analyse utilise un modèle de topique pour identifier ces thèmes pertinents dans les entrevues personnalisées réalisées auprès des enseignants. Sur l’ensemble des entrevues réalisées, les résultats de cette analyse ont révélé que dans l’ensemble les sentiments et la communication constituaient des éléments clefs qui affectent fortement l'apprentissage et la pensée critique des étudiants. Conséquemment, ils devraient donc être considérés comme des éléments essentiels lors de la conception des cours, mais aussi lors de la construction des questionnaires. En résumé, l'ajout de l'analyse subjective et d’une mesure d’utilité sémantique pourrait permettre d’améliorer l'efficacité des outils d’évaluation utilisés pour améliorer la performance de l'enseignant.

Date	13 juin 2016
langue originale	Anglais américain
Établissement diplômant	École de technologie supérieure
Superviseur	Sylvie Ratté (Directeur(-trice))