Conférence-midi du GRIÉMÉtic (en anglais): Response styles and aberrant responding in survey data

Par Carl Falk, professeur à l’Université McGill

28 novembre 2018, de 12h à 13h

Université de Montréal, Pavillon Marie-Victorin, local A-544

Ou

En ligne (en direct): https://zoom.us/j/692339850

 

Abstract: The use of Likert-type items is pervasive throughout the social and behavioral sciences (e.g., rate your agreement to a statement on a scale from 0 – Disagree to 4 – Agree). However, individuals sometimes perceive and use the scale in different ways. In this talk, I present an item response theory model capable of modeling multiple response styles across multiple constructs of interest. Some features of this model include the ability for researchers to: 1) Flexibly determine how response styles are defined, 2) Test whether modeling particular response styles improves model fit, 3) Obtain scores for participants on the constructs of interest and response styles, and 4) Test for group differences in the response styles or substantive constructs. Comparisons with sum score-based approaches, and recent extensions to multilevel data will be briefly presented. Time permitting, additional challenges in aberrant (atypical) responding to survey items will be discussed.

Biography: Carl F. Falk is an assistant professor of Quantitative Psychology and Modeling in the Department of Psychology at McGill University. His work focuses on the development, testing, and computer programming of advanced latent variable models with applications across the social sciences (e.g., psychology, education, health outcomes, sociology, etc.). This work spans across item response theory, structural equation modeling, and multilevel modeling. Recent applied work includes analysis of field test data and simulation based evaluations of item banks for the Smarter Balanced Assessment Consortium.

 

Toutes nos conférences sont gratuites et à entrée libre.

Pour plus d’information: iris.bourgault.bouthillier@umontreal.ca

École doctorale en méthodologies de recherche: l’analyse de discours

Quand: 22 novembre 2018

Résumé

L’analyse de discours renvoie à un large champ qui comporte, entre autres, un versant sémantique qui incite à examiner de manière moins naïve les différentes productions médiatiques, discursives, etc. En interrogeant le sens de ces productions, en relation avec leur contexte d’énonciation, l’analyse de discours a une plus-value par rapport à l’analyse de contenu. Deux spécialistes en communication présenteront certains de ses fondements, ainsi que son potentiel en recherche.

Programme de la journée

9h – Accueil

9h30 à 12h

L’analyse du discours en interaction : une introduction

François Cooren, Département de communication, UdeM

Le conférencier présentera les fondements tant ontologiques que méthodologiques de l’analyse du discours en interaction, tout en abordant l’histoire de ce courant né de la phénoménologie sociale de l’après-guerre. Des auteurs clés tels que Alfred Schütz, Erving Goffman, Harvey Sacks ou Harold Garfinkel seront abordés afin de présenter tout autant leurs convergences que leurs divergences théoriques. Dans un deuxième temps, le conférencier traitera du courant qui, quoiqu’issu de ces approches phénoménologiques, s’en distingue par une reconnaissance, inspiré de la sémiotique, du rôle que jouent les « autres-qu’humains » dans les interactions sociales, une approche associée aujourd’hui à ce qu’on appelle le courant constitutif des études en communication. Enfin, dans un troisième temps, les participants sont appelés à analyser une séquence vidéo en les invitant à mobiliser les notions et méthodes présentées durant les deux premières parties de cette présentation.

13h30 à 16h

L’analyse discursive foucaldienne, ou comment interroger les rapports de pouvoir à l’œuvre dans un contexte socio-culturel donné

Myriam Durocher, chargée de cours et doctorante, Département de communication, UdeM

L’analyse de discours est largement utilisée pour interroger les rapports de pouvoir qui informent toute forme de communication. Dans le cadre de cette présentation, la conférencière présentera plus spécifiquement l’analyse discursive telle qu’inspirée des théories foucaldiennes (Foucault, 1971). Cette méthode d’analyse permet de questionner les rapports de savoir/pouvoir qui délimitent ce qui peut être dit et compris dans un contexte socio-culturel donné. Afin d’en comprendre les tenants et aboutissants, elle contextualisera brièvement les fondements théoriques et épistémologiques qui sous-tendent cette approche pour en faire le contraste avec d’autres formes d’analyse de discours. Ensuite, seront présentées des exemples de méthodes d’analyse, issues de cette approche ainsi que les défis que pose une mise en application de cette méthodologie, de même que des solutions trouvées pour les contourner.

16h à 16h30 – Discussion générale

 

Activité gratuite – places limitées – Inscription obligatoire

Réservez votre place

 

À propos des conférenciers

François Cooren (PhD, UdeM) est professeur au Département de communication de l’Université de Montréal. Spécialiste de la communication organisationnelle, il a publié à ce jour une douzaine de livres, plus de 60 articles dans des revues internationales avec comité de lecture et plus de 40 chapitres de livre. Ancien rédacteur en chef de la revue Communication Theory, il a été élu président de l’International Communication Association, une fonction qu’il a occupée en 2010-2011. Il a par ailleurs été élu Fellow de cette même association en 2013 et distinguished scholar de la National Communication Association en 2017. François Cooren s’intéresse aux processus organisants, ainsi qu’aux phénomènes de créativité en situation d’interaction. Il est l’un des représentants principaux de l’École de Montréal, une école défendant une approche dite constitutive de la communication. Initiée dans les années 1990 au Département de communication de l’Université de Montréal, cette école est aujourd’hui reconnue internationalement tant dans le domaine de la communication organisationnelle, que dans ceux du management ou de l’analyse d’interaction.
Myriam Durocher est chargée de cours et étudiante au doctorat en communication, au Département de communication de l’Université de Montréal. Ses intérêts de recherche actuels s’inscrivent à l’intersection des études critiques sur l’alimentation et sur les corps et des études médiatiques et culturelles. Plus précisément, elle questionne les relations de savoir/pouvoir qui traversent la production et la circulation de connaissances sur la « saine » alimentation contemporaine, de façon à interroger les savoirs sur les corps qui y sont produits. Son projet de thèse vise à observer le développement d’une culture alimentaire biomédicalisée et les corps et normativités qu’elle participe à produire. Myriam est également la coordonnatrice du laboratoire du Culture Populaire, Connaissance et Critique (CPCC) à l’Université de Montréal. Elle est également assistante de recherche pour Ageing+Communication+Technologies (ACT) à Concordia.

Coordination de l’École doctorale :

Annie Malo et Joëlle Morrissette. Professeures agrégées, UdeM

40e session d’études de l’ADMÉÉ-Canada

Les théories et les pratiques de la mesure et de l’évaluation au coeur de l’action

En cette année de la 40e session d’études de l’Association pour le développement des méthodologies d’évaluation en éducation (ADMEE-Canada), c’est avec un grand plaisir que nous vous convions à Montréal les 14, 15 et 16 novembre 2018. Venez profiter de la métropole aux multiples visages pour célébrer avec nous l’évolution de ce regroupement emblématique et incontournable du paysage canadien de la mesure et de l’évaluation.

À travers ces 40 années de travaux, d’échanges, de débats et de réalisations, les sessions d’études ont abordé de multiples thématiques : des enjeux politiques à l’instrumentalisation en passant par les diverses théories et méthodologies. Afin de mettre en relief la richesse des aspects entourant la mesure et l’évaluation, mais surtout pour souligner le dynamisme collectif de ce domaine, le thème des théories et pratiques comme lieu d’action nous semble fédérateur. Les théories parce qu’elles sont un ensemble, un système, une vision qui observe et guide l’action. Les pratiques parce qu’elles supposent des processus de transformation de l’environnement tout autant que des personnes, et parce qu’elles sont singulières, complexes et changeantes. L’action parce qu’elle est synonyme d’agir, d’induire un changement, d’orienter, de progresser. Le thème « Les théories et les pratiques de la mesure et de l’évaluation au cœur de l’action » se veut une vision bien ancrée dans le terrain pour témoigner des avancées en mesure et en évaluation, en formation tout autant que dans les différents milieux d’application.

Par ailleurs, nous renouons cette année encore avec la tenue d’un précolloque qui aura lieu le mercredi 14 novembre à l’Université du Québec à Montréal. Plusieurs ateliers liés au thème orienteront votre regard sur les théories, les pratiques et l’action. D’autres nouveautés et surprises vous attendent à l’occasion de ce 40e anniversaire.

Chercheurs, praticiens, professionnels, étudiants et intervenants des différents milieux de la mesure et de l’évaluation et de différents domaines (santé, sciences, sciences humaines, arts, etc.) sont donc invités à exposer leurs réflexions théoriques, à témoigner de leurs pratiques, à échanger sur les actions qu’ils posent, en français et en anglais. En somme, à participer à l’évolution de l’ADMEE afin qu’elle puisse vivre encore longtemps.

Veuillez noter que les communications seront présentées dans la langue dans laquelle elles auront été soumises, sans traduction simultanée.

Le comité organisateur de l’UQAM
Carla Barroso da Costa
Diane Leduc
Pascal Ndinga
André-Sébastien Aubin

La présidente de l’ADMÉE-Canada
Isabelle Nizet

Voir le site web de l’événement

Conférence-midi du GRIÉMÉtic: Application et utilisation de l’analyse de médiation

Par Pier-Olivier Caron, professeur à la TÉLUQ

 

Le 24 octobre 2018, De 12h à 13h

Université de Montréal, Pavillon Marie-Victorin, local A-544

Ou

En ligne (en direct): https://zoom.us/j/943878913

 

Résumé: L’analyse de médiation est de plus en plus populaire en sciences de l’éducation ainsi que dans les autres branches des sciences sociales. L’analyse de médiation consiste à mesurer l’effet entre une variable indépendante (VI) et dépendante (VD) en tenant compte d’une variable médiatrice (VM), expliquant le lien indirect entre la VI et la VD. Devant l’augmentation substantielle de son utilisation par les chercheurs, il est dorénavant impossible de passer outre : elle fait partie de l’arsenal nécessaire à maîtriser. Conceptuellement assez simple, les détails de l’analyse de médiation échappent parfois à certains, notamment parce que les exégètes maintiennent (a) un certain ésotérisme sur ses détails statistiques fondamentaux, sans négliger, par ailleurs, (b) des recommandations parfois contradictoires. Dans le cadre de la présentation, l’analyse de médiation sera détaillée conceptuellement, puis de façon computationnelle. Les trois tests d’hypothèses de la médiation seront présentés ainsi que les recommandations sur leur utilisation. Des exemples en PROCESS (macro SPSS), Mplus et R seront présentés.

Présentation du conférencier: Pier-Olivier Caron a obtenu un doctorat en psychologie (Ph. D.) de l’Université du Québec à Montréal en 2017 et est maintenant professeur de psychologie à la TÉLUQ. Entre temps, il a réalisé un postdoctorat à la Chaire de recherche du Canada sur les traumas interpersonnels et la résilience. Il a aussi enseigné à l’Université de Moncton et à l’UQÀM. Pier-Olivier s’intéresse aux modèles quantitatifs issus de l’analyse quantitative du comportement, aux modèles d’équations structurelles et à la modélisation statistique et computationnelle. Il a publié plus d’une vingtaine d’articles sur ces sujets. Il vient de faire paraître un livre sur la modélisation par équations structurelle avec Mplus en 2018 avec les PUQ.

 

Prenez note que toutes nos conférences-midi sont gratuites et à entrée libre.

Pour plus d’information: iris.bourgault.bouthillier@umontreal.ca

Cliquez ici pour accéder au livre du conférencier: La modélisation par équations structurelles avec MPlus

Cliquez ici pour accéder à l’article du conférencier: A computational description of simple mediation analysis

Soutenance de thèse de Dan Thanh Duong Thi

Modélisation, élaboration et évaluation des rapports à visée diagnostique des données du PIRLS 2011

Soutenance de thèse de Dan Thanh Duong Thi, sous la direction de recherche de Nathalie Loye (Département d’administration et fondements de l’éducation.)

Le 26 septembre à 13h30

Université de Montréal – Pavillon Marie-Victorin
D-427
90, avenue Vincent-d’Indy
Montréal (QC) Canada  H2V 2S9

Résumé

Cette étude s’inscrit dans l’approche diagnostique cognitive (ADC) dont la finalité est de fournir aux enseignants des rétroactions fines et détaillées sur les forces et les faiblesses cognitives des élèves à travers des rapports diagnostiques compréhensibles et interprétables. Elle a été menée dans le but de répondre aux grands besoins des enseignants de recevoir des informations diagnostiques à partir des tests à grande échelle et de combler le manque des recherches empiriques sur l’élaboration et l’évaluation des rapports diagnostiques. Plus précisément, notre étude vise à : (1) modéliser des données de 4762 élèves canadiens ayant pris le test PIRLS 2011 et (2) élaborer et évaluer des rapports diagnostiques destinés aux enseignants à partir des résultats des modélisations.

Afin de répondre au premier objectif, des habiletés sous-jacentes jugées nécessaires pour répondre aux 35 items du PIRLS 2011 ont été identifiées à partir du cadre de référence de l’élaboration du PIRLS 2011 et avec un panel d’experts comprenant trois membres. Deux matrices Q1 et Q2, représentant les liens entre les items et ces habiletés, ont été ensuite élaborées. Avec ces deux matrices Q, nous avons modélisé des données avec les modèles DINA et G-DINA permettant d’évaluer l’ajustement des modèles aux données et d’estimer la qualité diagnostique des items ainsi que les profils de maitrise des habiletés des élèves.

Quant au deuxième objectif de l’étude, un panel d’experts de cinq membres ont élaboré trois formats de rapports à partir d’un profil-type. L’évaluation des rapports a été effectuée auprès de 98 enseignants au primaire, des conseillers pédagogiques et des orthopédagogues à l’aide d’un questionnaire administré en ligne portant sur la préférence, l’évaluation de la qualité et de la compréhension des rapports.

Les résultats obtenus nous suggèrent un format de rapport de préférence des participants, ce qui s’explique par la familiarité du type de graphique présenté. Cette préférence est constante peu importe des informations contextuelles. Les participants ont une évaluation très positive de la qualité des rapports, ce qui ne varie pas selon les variables contextuelles. Par contre, une différence significative se trouve entre l’évaluation de la qualité et la préférence des rapports. Les participants qui évaluent leur format préféré ont des perceptions plus positives. Quant à la compréhension, des participants ont une très bonne compréhension de trois formats de rapports. Le groupe comprennent mieux les rapports sont ceux dont l’évaluation de la qualité est plus positive.

Les résultats de l’étude mettent en évidence la possibilité de recevoir des rétroactions plus fines et détaillées sur les forces et les faiblesses des élèves des épreuves à grande échelle à travers des rapports accessibles, fiables et compréhensibles. Notre étude est la première qui applique un cadre de référence de l’élaboration et de l’évaluation des rapports dans une approche diagnostique cognitive et contribue donc à favoriser le soutien de l’apprentissage en lecture au primaire.

Soutenance de thèse de Angel Manuel Arias de Los Santos

Building a validity argument for the listening component of the Test de connaissance de français in the context of Quebec immigration

Soutenance de thèse de Angel Manuel Arias de Los Santos, au Département d’administration et fondements de l’éducation. Sous la direction de recherche de Jean-Guy Blais et la codirection de Michel D. Laurier.

Jeudi 14 juin à 14h00

Université de Montréal – Pavillon Roger-Gaudry

S-116
2900, chemin de la Tour
Montréal (QC) Canada  H3T 1J6

Résumé

L’évaluation linguistique est une pratique omniprésente dans les contextes d’immigration, utilisée comme une méthode de collecte de données pour évaluer la capacité des immigrants à communiquer dans la langue du pays d’accueil afin de promouvoir l’intégration sociale et économique ainsi que la productivité au travail (McNamara & Shohamy, 2008). Contrairement aux tests d’anglais, peu d’attention est accordée à l’interprétation et aux usages des scores aux tests en français, ce qui incite – et demande – de la validation des scores pour justifier les usages des tests. Cette étude, qui fait appel aux avancées de la théorie de la validité des tests (Kane, 2006, 2013), construit un argumentaire de validité pour la composante de la compréhension orale du Test de connaissance du français (TCF) dans le contexte de l’immigration au Québec. La théorie de la validité des tests a évolué considérablement depuis le modèle tripartite traditionnel de contenu, de prédiction et de construit (Cronbach et Meehl, 1955), a été conceptualisée comme un construit unitaire (Messick, 1989) et, plus récemment, a été théorisée en termes d’argumentation (Kane, 2006, 2013), empruntant des concepts de modèles d’inférence (Toulmin [1958], 2003), qui englobent des inférences de notation, de généralisation, d’explication, d’extrapolation et de décision, ayant des rôles importants dans un argumentaire de validité.

 

Dans une approche de validité fondée sur l’argumentation, les affirmations relatives aux instruments de mesure sont composées de garanties qui doivent être étayées par des études empiriques, qui sont fondamentales pour les affirmations, mais qui appuient également les inférences qui autorisent chacune des affirmations de l’argumentaire. Plus précisément, cette étude a analysé des données empiriques pour appuyer les inférences de notation, de généralisation et d’explication, en proposant trois questions de recherche portant sur la représentativité du construit du TCF, le fonctionnement différentiel d’items et l’utilité de la technique de collecte de données. Les questions ont porté sur les sous-compétences de compréhension orale dont le TCF évalue, le fonctionnement différentiel des items (FDI) selon le genre, la langue maternelle, l’âge et l’emplacement géographique des candidats ainsi que le fonctionnement des items à choix multiples (MC) dans l’évaluation de la compréhension orale en langue seconde.

 

L’approche de la validité fondée sur l’argumentation s’avère utile pour regrouper des études empiriques dans un ensemble cohérent permettant d’étayer et de justifier l’interprétation et les utilisations du TCF dans un contexte d’immigration, qui peut à son tour servir à remédier les points faibles constatés, en fournissant un moyen d’atténuer les réfutations potentielles qui menacent la validité de l’argumentaire. Certaines mises en garde dans le cadre de validation sont également soulignées et concernent l’accessibilité des données pour aborder les inférences d’extrapolation et de décision dans des contextes d’immigration, mais comme Newton et Shaw (2014, p. 142) le soulignent: « l’approche de validité fondée sur l’argumentation sous-tend le fait que la validation n’est pas simplement une étude isolée, mais un programme: potentiellement un programme très intensif ». Et ce programme peut inclure des parties prenantes importantes comme les représentants gouvernementaux qui peuvent aider à compléter l’argumentaire de validité du TCF en matière d’immigration au Québec.

Conférence: Reasoning About Knowledge from Learner Pathway Information

Date : lundi 28 mai, 10h30

Lieu : salle A-522, École Polytechnique de Montréal (édifice 1 sur le plan–http://www.polymtl.ca/renseignements-generaux/coordonnees-et-plans-dacces/plans-du-campus)

 

TITLE: Reasoning About Knowledge from Learner Pathway Information

Abstract. The aggregate behaviors of students in a learning environment can collectively encode information about the pedagogical objects with which they interact. In this presentation, I will demonstrate ways in which the synthesis of data from higher-ed can illuminate the terrain of the university and support students in their decision making and wayfinding. A novel application of recurrent neural networks and skip-grams, techniques popularized by their application to modeling language, are brought to bear on millions of historic student course enrollments to create vector representations of these objects. Analysis of the produced vector space reveals predictive information about students’ on-time graduation and a tremendous degree of semantic relational information about courses which can be visualized, reasoned about, and surfaced to students. Our course information platform, adopted by the UCB Office of the Registrar and two other public institutions, uses this automatically inferred semantic information to help students navigate the university’s offerings and provides personalized course suggestions based on topic preference, course history, and program requirements.

 

SPEAKER: Zachary Pardos, Berkely School of Information and Graduate School of Education

Dr. Pardos is an Assistant Professor at UC Berkeley in the School of Information and Graduate School of Education. His focal areas of study are knowledge representation and personalized supports leveraging big data in education. He earned his PhD in Computer Science at WPI and comes to UC Berkeley after a post-doc at MIT Computer Science Artificial Intelligence Lab (CSAIL). At UC Berkeley he directs the Computational Approaches to Human Learning (CAHL) research lab and teaches courses on data mining and analytics, digital learning environments, and machine learning in education.

Recherche de bénévoles pour le congrès de l’International Test Commission

Chers étudiants,

Mon équipe et moi-même sommes à la recherche de bénévoles pour le congrès de l’International Test Commission qui se tiendra au Sheraton Center du 2 au 5 juillet 2018.

Ce congrès international d’envergure regroupe des chercheurs du monde entier autour de problématiques liées au testing dans divers domaines (éducation, psychologie, santé). Notez que la langue du congrès est l’anglais, et que vous devez pouvoir communiquer dans cette langue.

Pour plus d’informations, vous pouvez consulter notre site web à https://www.itc-conference.com/

Merci de nous faire part de votre intérêt en écrivant à l’adresse support@itc-conference.com

Cordiales salutations.

Nathalie Loye

Conférence-midi du GRIÉMÉtic

Bibliométrie, impact de la recherche et perspectives pour les chercheurs en sciences de l’éducation

Par Jean-François Durnin, bibliothécaire à l’Université de Montréal

 

Le 23 mai 2018, De 12h à 13h

Université de Montréal, Pavillon Marie-Victorin, local A-544

Ou

En ligne (en direct): https://zoom.us/j/829426220

 

Résumé: La présentation vise à dresser un portrait de l’évolution des approches d’évaluation de la production scientifique. Nous tenterons de démystifier certaines notions clés comme les facteurs d’impact, l’indice h et les outils qui permettent d’obtenir ces mesures. Les avantages et limites de celles-ci seront abordés de même que les différents critères utilisés pour évaluer les revues. Nous soulignerons enfin les défis des chercheurs francophones et les dilemmes auxquels ils doivent faire face.

Présentation du conférencier: Jean-François Durnin est bibliothécaire en sciences de l’éducation à la bibliothèque ÉPC-Biologie de l’Université de Montréal depuis 2004. Il a enseigné deux ans au secondaire avant de compléter sa maîtrise en sciences de l’information (option bibliothéconomie). En plus de former les étudiants de tous les cycles d’enseignement à la maîtrise des compétences informationnelles, il accompagne les futurs doctorants dans leur parcours de recherche. Il s’intéresse aussi à toutes les questions relatives à la transformation de la communication savante et aux modèles de diffusion de la connaissance.

Pour plus d’information: iris.bourgault.bouthillier@umontreal.ca

10e colloque – Méthodes quantitatives en sciences humaines (MQSH)

Vendredi 8 juin 2018, Université de Sherbrooke

RAPPEL – INVITATION OFFICIELLE

Programme du Colloque MQSH 2018

Bonjour,

Nous vous rappelons qu’il est toujours possible de s’inscrire au 10e Colloque MQSH qui aura lieu le vendredi 8 juin 2018 à l’Université de Sherbrooke. Plusieurs chercheures et chercheurs provenant de l’Université du Québec à Trois-Rivières, l’Université du Québec à Montréal, l’Université de Montréal et l’Université d’Ottawa nous feront l’honneur de présenter leurs travaux de recherche sous l’angle de l’innovation. Vous trouverez le programme de la journée comportant l’horaire et le résumé des communications en pièce jointe.

La journée débutera dès 8h45 avec l’accueil des participants au local A1-128 du pavillon A1 de la Faculté d’éducation. Au terme de la journée, les participants intéressés pourront poursuivre leurs échanges dans le cadre d’un 5 à 7 prévu à l’extérieur du campus.

L’inscription au Colloque MQSH est gratuite. Il vous suffit d’écrire un courriel à l’adresse Sabruna.Dorceus@USherbrooke.ca pour confirmer votre présence en indiquant votre occupation (ex. professeur, étudiant au doctorat, statisticien, etc.) et votre institution d’appartenance.

Voici quelques informations pratiques pour votre séjour à Sherbrooke :

Comment se rendre à l’Université de Sherbrooke?

Pour connaître les accès routiers au campus principal de l’Université de Sherbrooke situé au 2500, boulevard de l’Université, Sherbrooke (Québec), J1K 2R1, cliquez ici.

Stationnement :

Vous pourrez vous stationner dans les parcs de stationnement jaunes au coût de 8$ pour la journée (payable aux horodateurs). Les parcs de stationnement jaunes les plus proches du pavillon A1 sont les suivants : P A-8, P J-2 et P K-1). Pour un plan du campus et des parcs de stationnement, cliquez ici.

Quoi faire et où dormir à Sherbrooke?

Pour des suggestions d’hébergements et d’activités diverses, vous pouvez visiter la page du site Destination Sherbrooke en cliquant ici.

Au plaisir de vous rencontrer,

Comité organisateur MQSH 2018

Yann Le Corff

Eric Yergeau

Sabruna Dorceus