2019-1 | L'évaluation au coeur des recherches actuelles (Evaluation at the heart of current researches) | |
Pinchar en el icono para leer un resumen | Este número se encuentra en línea en texto íntegro en el portal: Cairn.info |
-
Présentation(Presentation)pp. 5-6
-
Marie DURU-BELLAT (IEP Paris - Université de Bourgogne Franche Comté)Evaluations, mesures ou classements ? A propos des enquêtes PISA(Assessment, measurement or ranking? Debating about PISA Surveys)pp. 7-19
Lancées au seuil des années 2000, les enquêtes PISA (Programme international sur les acquisitions des élèves) s’inscrivent dans un contexte européen spécifique marqué par l’objectif d’instaurer une politique européenne en matière d’éducation, et caractérisé par la montée d’une gouvernance dite "douce" par le biais du benchmarking, i.e. une gouvernance se voulant suggestive, fondée sur des indicateurs comparatifs censés alimenter une saine émulation. Après avoir décrit brièvement ce contexte, le texte rappellera les principales caractéristiques techniques de ces enquêtes, avant de développer une discussion sur ce qu’elles apportent, ainsi que sur les dérives possibles : peuvent-elles prétendre constituer aujourd’hui un instrument sans faille pour des comparaisons internationales des systèmes éducatifs, et/ou un levier pour des transformations et des politiques visant ces systèmes ?
-
Christine BARATS (Université Paris Descartes)A propos de la médiatisation du classement de Shanghai : l'apport de l'analyse du discours(About the media coverage of the Shanghai ranking: the contribution of discourse analysis)pp. 21-36
L’importance accordée au classement ditde Shanghaipremier classement international issu du champ académique, invite à examiner les caractéristiques discursives de sa médiatisation. L’analyse de son traitement dans la presse française, menée grâce à la constitution d’un corpus de plus d’un million d’occurrences, a permis d’objectiver un des traits discursifs saillants de sa diffusion : l’importance de la concession qui neutralise les contre-discours. Dans un contexte de réformes dans l’enseignement supérieur et la recherche, et de discours sur l’évaluation et sur l'excellence académique, cette analyse du discours de presse montreque ce mouvement concessifa contribué à la légitimation et à la diffusion de cet instrument de jugement.
-
Annick FAGNANT & Isabelle DEMONTY (Université de Liège)L’évaluation : une question centrale à propos des connaissances pédagogiques de contenu(Assessment: a central issue in research on pedagogical content knowledge)pp. 37-51
Introduit dans les années 1980, le concept de connaissances pédagogique de contenu (PCK) a connu un essor important, dans le domaine des mathématiques, au cours des décennies qui ont suivi. D’emblée, la question de l’évaluation de ces PCK a retenu l’attention des chercheurs. Après une introduction rappelant l’origine du concept, deux approches d’évaluation (statique vs dynamique) de ces PCK sont mises en perspective. Etant donné les spécificités propres au préscolaire, la problématique de l’évaluation des PCK des enseignants exerçant à ce niveau fait l’objet du deuxième volet. Enfin, on verra que la question des PCK est intrinsèquement liée à celle du développement professionnel des enseignants. Dans ce champ, les recherches récentes ouvrent de nouvelles perspectives intéressantes, en matière d’évaluation notamment.
-
Aude SEURRAT (Université Paris 13)Evaluation de l'efficacité ou mesure de la satisfaction dans la formation professionnelle courte ?(Evaluating effectiveness or measuring satisfaction in short vocational training?)pp. 53-66
Cet article questionne les formes, les modalités et les enjeux de l'évaluation dans la formation professionnelle courte. L'évaluation apparaît à la fois comme l'aboutissement d'une formation et comme ce qui doit en amont en guider la mise en œuvre : elle est à la fois la finalité et la genèse de l'action. Présentée comme une modalité de rationalisation à des fins d'optimisation de la performance, l'évaluation est particulièrement aux prises avec les questions d'industrialisation. Injonction faite aux professionnels de la formation, l'évaluation oriente la manière dont les acteurs agissent et pensent leur action dans les organisations. Équipée, outillée, instrumentée, elle implique enfin une approche fine des médiations et, en premier lieu, celles des outils informatisés qui lui donnent corps.
-
Catherine BÉDUWÉ, Magali DANNER & Jean-François GIRET (TSM Research - Université de Toulouse Capitole / IREDU - Université de Bourgogne Franche Comté)L’évaluation des formations professionnelles de l'enseignement supérieur à l’aune de leurs résultats d’insertion(The evaluation of vocational training in higher education in the light of their results of insertion)pp. 67-80
Les formations professionnelles dans l’enseignement supérieur sont évaluées à l’aune de leurs performances d’insertion professionnelle, qui seraient garantes du caractère opérationnel de ces formations sur le marché du travail. Cet article se propose d’interroger le lien entre le caractère professionnel d’une formation et la qualité de l’insertion en explorant trois directions. D’abord, les compétences professionnelles, générales et mêmes spécifiques, qui peuvent s’acquérir tout au long du parcours des jeunes. Ensuite, le caractère sélectif des formations professionnelles dans l’enseignement supérieur qui rend complexe leur évaluation via la performance de leurs diplômés. Enfin, le type de marché du travail auquel s’adressent ces formations, et qui permet à certaines formations d’être assurées quant au recrutement de leurs diplômés alors que d’autres sont plus sensibles aux évolutions de la conjoncture ou à la concurrences d’autres diplômés.
-
Yves BESTGEN (Université Catholique de Louvain)Evaluation de textes en anglais langue étrangère et séries phraséologiques : comparaison de deux procédures automatiques librement accessibles(Evaluation of texts in English as a foreign language and phraseological series: comparison of two freely accessible automatic procedures)pp. 81-94
Lors de l'évaluation automatique de la qualité d'un texte rédigé en langue étrangère, les séries phraséologiques sont fréquemment négligées alors que leur maîtrise est une composante majeure de l'apprentissage. Récemment, deux systèmes automatiques capables de les prendre en compte en anglais ont été mis librement à disposition : le COCA Parser et TAALES. L'étude évalue l'efficacité et l'utilité de ces systèmes en les appliquant à deux ensembles de textes d'apprenants. Si les deux systèmes se sont révélés relativement efficaces, seul le COCA Parser s'est montré capable d'apprendre un modèle prédictif sur un ensemble de données et de l'appliquer avec succès à un autre. C'est également le seul des deux systèmes qui produit un fichier permettant une analyse qualitative des textes évalués.
-
Patrick PAROUBEK & Joseph MARIANI (LIMSI-CNRS)De l’évaluation et ses ressources en traitement automatique des langues(On evaluation and dedicated resources in natural langage processing)pp. 95-109
Le traitement informatique du langage a privilégié depuis trente ans les méthodes d’apprentissage automatique qui ont permis des avancées technologiques opérationnelles dans un nombre croissant d’applications. Celles-ci ont été rendues possibles par la disponibilité de corpus d’apprentissage, par le développement du paradigme d’évaluation (shared tasks) et par la création d’infrastructures d’évaluation de technologie. Mais les corpus doivent être de taille suffisante pour représenter la réalité linguistique et toutes les langues ne disposent pas des ressources appropriées ni des moyens pour les produire. Les expériences ont montré que la taille des données d’apprentissage peut remplacer la complexité algorithmique ou les connaissances expertes, mais a-t-on atteint les limites de ce type d’approche ?
-
Yann MATHET & Antoine WIDLÖCHER (GREYC / Université de Caen Normandie)Annotation, évaluation et mesure d’accord en linguistique de corpus(Annotation, evaluation and agreement measures in corpus linguistics)pp. 111-129
La constitution et l’évaluation de ressources annotées ainsi que des systèmes automatiques d’annotation revêtent une importance grandissante en linguistique et en TAL. Pour autant, les méthodes d’évaluation ne sont pas toujours maîtrisées ni utilisées à bon escient, notamment en linguistique où la nature séquentielle des données textuelles nécessite des méthodes spécifiques. Dans cet article, nous analysons tout d’abord les notions de corpus et d’annotation dans leurs multiples formes, puis nous nous focalisons sur les questions d’évaluation qui en résultent. Nous insistons en particulier sur la différence de nature qui existe entre l’évaluation d’un système d’annotation et l’évaluation de ressources multi-annotées manuellement, et nous donnons un aperçu des outils d’évaluation existants et leur usage possible dans chacun de ces deux cas.