Index de mots clés

Evaluation

  • Yves BESTGEN (Université Catholique de Louvain)
    Evaluation de textes en anglais langue étrangère et séries phraséologiques : comparaison de deux procédures automatiques librement accessibles
    (Evaluation of texts in English as a foreign language and phraseological series: comparison of two freely accessible automatic procedures)
    2019, Vol. XXIV-1, pp. 81-94

    Lors de l'évaluation automatique de la qualité d'un texte rédigé en langue étrangère, les séries phraséologiques sont fréquemment négligées alors que leur maîtrise est une composante majeure de l'apprentissage. Récemment, deux systèmes automatiques capables de les prendre en compte en anglais ont été mis librement à disposition : le COCA Parser et TAALES. L'étude évalue l'efficacité et l'utilité de ces systèmes en les appliquant à deux ensembles de textes d'apprenants. Si les deux systèmes se sont révélés relativement efficaces, seul le COCA Parser s'est montré capable d'apprendre un modèle prédictif sur un ensemble de données et de l'appliquer avec succès à un autre. C'est également le seul des deux systèmes qui produit un fichier permettant une analyse qualitative des textes évalués.


  • Galina BOUBNOVA (Moscou, Russie)
    L'Olympiade fédérale de français en Russie : un terrain d'expérimentation et de réflexion pédagogique
    (The Federal Olympiad for French in Russia: a field for pedagogical reflection and experiment)
    2010, Vol. XV-1, pp. 75-88

    Si l'on observe la façon dont est faite en Russie l'évaluation FLE (Français Langue Etrangère), un constat s'impose : d'une part, les diplômes DELF-DALF (Diplôme d'Etudes en Langue Française - Diplôme Approfondi de Langue Française) et TCF (Test de Connaissance du Français) ne sont pas officiellement reconnus en Russie, d'autre part, le Ministère de l'éducation et de la science de la Fédération de Russie propose deux types de certifications : l'Examen d'Etat Unique et l'Olympiade scolaire fédérale. Les concepteurs des épreuves de l'Olympiade fédérale se sont donné pour objectif d'en faire un pont entre les programmes et critères d'évaluation retenus en Russie et ceux pris en compte pour les épreuves des examens français et européens. Autrement dit, il s'agit de concevoir un dispositif d'évaluation qui corresponde aux critères retenus pour le DELF-DALF et qui intègre les recommandations du CECR (Cadre Européen Commun de Référence pour les langues). L'article présente l'Olympiade fédérale de français (concours annuel organisé par le Ministère de l'éducation et de la science de la Fédération de Russie) sous son aspect procédural mais surtout comme un terrain de réflexion pédagogique et d'expérimentation - l'objectif étant de créer en Russie un dispositif d'évaluation FLE qui s'inscrive dans une conception commune de l'évaluation déjà adoptée en Europe.


    Mots-clés: 
  • Jean-Marie DE KETELE (Louvain-la-Neuve, Belgique)
    L’évaluation de la production écrite
    (The evaluation of writing)
    2013, Vol. XVIII-1, pp. 59-74

    Derrière l’expression « évaluer la production écrite » se cachent des concepts polysémiques que cette contribution veille à clarifier au départ. Sur cette base seront abordées successivement l’évaluation certificative, puis l’évaluation formative de la production écrite. La première est institutionnelle en un double sens : elle sert à orienter et à planifier les apprentissages de la production écrite ; elle fonde la décision finale en termes de réussite ou d’échec. La seconde, si souvent invoquée et si peu pratiquée réellement, sert à améliorer l’apprentissage en cours de la production écrite et s’appuie sur des raisonnements diagnostiques et, en cohérence avec ceux-ci, la mise en place de dispositifs d’action permettant de faire progresser les élèves. Ces aspects sont concrètement illustrés. 


  • Jean-Marie DE KETELE (Louvain-la-Neuve, Belgique)
    Ne pas se tromper d'évaluation
    (Choosing the right evaluation method)
    2010, Vol. XV-1, pp. 25-37

    Cet article part du constat curieux que, dans un monde où les métiers du complexe se professionnalisent, l'évaluation scolaire se résume encore trop souvent à l'attribution d'une note. Conduite professionnellement, l'évaluation suppose que l'évaluateur se pose avant tout les questions relatives aux types de fonctions à viser et aux types de démarches à mettre en œuvre. Plus spécifiquement, l'article aborde deux aspects importants de la professionnalisation : l'évaluation des compétences langagières et le renforcement des fonctions d'orientation et de régulation.


    Mots-clés: 
  • Marie DURU-BELLAT (IEP Paris - Université de Bourgogne Franche Comté)
    Evaluations, mesures ou classements ? A propos des enquêtes PISA
    (Assessment, measurement or ranking? Debating about PISA Surveys)
    2019, Vol. XXIV-1, pp. 7-19

    Lancées au seuil des années 2000, les enquêtes PISA (Programme international sur les acquisitions des élèves) s’inscrivent dans un contexte européen spécifique marqué par l’objectif d’instaurer une politique européenne en matière d’éducation, et caractérisé par la montée d’une gouvernance dite "douce" par le biais du benchmarking, i.e. une gouvernance se voulant suggestive, fondée sur des indicateurs comparatifs censés alimenter une saine émulation. Après avoir décrit brièvement ce contexte, le texte rappellera les principales caractéristiques techniques de ces enquêtes, avant de développer une discussion sur ce qu’elles apportent, ainsi que sur les dérives possibles : peuvent-elles prétendre constituer aujourd’hui un instrument sans faille pour des comparaisons internationales des systèmes éducatifs, et/ou un levier pour des transformations et des politiques visant ces systèmes ?


  • Jean ECALLE (Lyon 2)
    L'évaluation de la lecture et des compétences associées
    (Assessment of reading and related skills)
    2010, Vol. XV-1, pp. 105-120

    Une évaluation complète de la lecture doit être accompagnée de celle des compétences cognitives (capacités mnésiques et de dénomination rapide) et langagières (phonologiques notamment) associées à la lecture et son apprentissage. Dans cette revue de questions, on présentera d'une part, les enjeux de l'évaluation en général et d'autre part, un certain nombre d'outils sous l'angle du dépistage et du diagnostic en insistant sur leur diversité. En termes de dépistage, sont présentés des outils de détection d'enfants susceptibles d'être en difficultés ultérieures à partir du développement du langage oral et de leurs compétences phonologiques. Pour la lecture, on distinguera les tests classiques papier-crayon et des tests plus récents utilisant la technologie informatisée. L'évaluation de la lecture de mots et celle de la compréhension en lecture est illustrée à travers différents tests utilisés actuellement par les professionnels. En conclusion, l'évaluation ne peut être dissociée d'interventions de prévention ou de remédiation.


    Mots-clés: 
  • Annick FAGNANT & Isabelle DEMONTY (Université de Liège)
    L’évaluation : une question centrale à propos des connaissances pédagogiques de contenu
    (Assessment: a central issue in research on pedagogical content knowledge)
    2019, Vol. XXIV-1, pp. 37-51

    Introduit dans les années 1980, le concept de connaissances pédagogique de contenu (PCK) a connu un essor important, dans le domaine des mathématiques, au cours des décennies qui ont suivi. D’emblée, la question de l’évaluation de ces PCK a retenu l’attention des chercheurs. Après une introduction rappelant l’origine du concept, deux approches d’évaluation (statique vs dynamique) de ces PCK sont mises en perspective. Etant donné les spécificités propres au préscolaire, la problématique de l’évaluation des PCK des enseignants exerçant à ce niveau fait l’objet du deuxième volet. Enfin, on verra que la question des PCK est intrinsèquement liée à celle du développement professionnel des enseignants. Dans ce champ, les recherches récentes ouvrent de nouvelles perspectives intéressantes, en matière d’évaluation notamment.


  • Sébastien GEORGES (Centre international d’études pédagogiques, Sèvres)
    Evaluer la production orale au travers d’une démarche scientifique
    (Evaluate oral production by means of a scientific proocedure)
    2013, Vol. XVIII-1, pp. 47-58

    Dans cet article nous proposons une approche qui permet d’accorder les qualités de conception, d’élaboration et d’administration d’une épreuve de mesure des compétences en expression orale à une situation de fort enjeu. En s’appuyant sur des exemples de certifications où la production orale n’est pas l’unique compétence évaluée, nous montrerons que les bénéfices de la mise en œuvre d’une démarche rigoureuse et d’une approche scientifique, qui confère à l’outil de mesure des compétences des qualités de validité, de fidélité, de sensibilité et d’équité, sont des garanties pour répondre de façon appropriée à la demande initiale du commanditaire et aux attentes des utilisateurs finaux. Nous examinerons également les avantages de cette démarche pour les candidats.


  • François-Marie GERARD (BIEF, Louvain-la-Neuve, Belgique)
    L’évaluation au service de la régulation des apprentissages : enjeux, nécessités et difficultés
    (Evaluation as a tool for regulating learning : challenges, necessities and difficulties)
    2013, Vol. XVIII-1, pp. 75-92

    L’évaluation scolaire est une démarche systématique pour faire émerger la « valeur » des apprentissages des élèves et leur donner sens. Un premier enjeu est de distinguer d’une part l’évaluation certificative qui vise à sanctionner la réussite des apprentissages et d’autre part l’évaluation formative qui cherche à améliorer les apprentissages. Cette « évaluation pour les apprentissages » peut prendre des formes diverses, à travers différentes postures des enseignants. Un deuxième enjeu est de cerner les objets de l’évaluation : d’une part les savoirs et savoir-faire, et d’autre part les compétences qui permettront de mobiliser ces savoirs et savoir-faire pour résoudre une situation complexe.


  • Antony John KUNNAN (Los Angeles, Etats-Unis)
    Statistical analyses for test fairness
    2010, Vol. XV-1, pp. 39-48

    L'équité dans le domaine des tests de langue a été discutée par les chercheurs depuis une bonne dizaine d'années, sans que les méthodes statistiques sous-jacentes à l'analyse de cette équité aient été clairement exposées. Dans cet article, je décris brièvement le cadre de mon test d'équité, les principes sur lesquels il est basé, et les qualités requises pour atteindre cette équité. Ensuite je décris les analyses statistiques qu'on peut utiliser pour analyser les tests en théorie et dans la pratique, telles l'analyse factorielle, l'équation structurelle, et le fonctionnement différentiel de l'item.


    Mots-clés: 
  • Yann MATHET & Antoine WIDLÖCHER (GREYC / Université de Caen Normandie)
    Annotation, évaluation et mesure d’accord en linguistique de corpus
    (Annotation, evaluation and agreement measures in corpus linguistics)
    2019, Vol. XXIV-1, pp. 111-129

    La constitution et l’évaluation de ressources annotées ainsi que des systèmes automatiques d’annotation revêtent une importance grandissante en linguistique et en TAL. Pour autant, les méthodes d’évaluation ne sont pas toujours maîtrisées ni utilisées à bon escient, notamment en linguistique où la nature séquentielle des données textuelles nécessite des méthodes spécifiques. Dans cet article, nous analysons tout d’abord les notions de corpus et d’annotation dans leurs multiples formes, puis nous nous focalisons sur les questions d’évaluation qui en résultent. Nous insistons en particulier sur la différence de nature qui existe entre l’évaluation d’un système d’annotation et l’évaluation de ressources multi-annotées manuellement, et nous donnons un aperçu des outils d’évaluation existants et leur usage possible dans chacun de ces deux cas.


  • Tim MCNAMARA (Melbourne, Australie)
    The use of language tests in the service of policy: issues of validity
    2010, Vol. XV-1, pp. 7-23

    On examine dans cet article le rôle des tests de langue en tant qu'instruments politiques dans la société contemporaine, et les questions de validité qui en découlent. Sont abordées en contraste les approches uniquement centrées sur l'impartialité des tests dans une optique de validité plus large qui soulève des questions d'équité dans l'utilisation des tests. Le propos est illustré en référence au Cadre Européen Commun de Référence pour les Langues, et aux tests utilisés dans les procédures d'accréditation à un poste de travail, tels les tests de langue pour les pilotes et les contrôleurs aériens et pour les professionnels de santé.


    Mots-clés: 
  • Jean-Philippe RIVIÈRE, Fanny DE LA HAYE, Jean-Emile GOMBERT & Thierry ROCHER (IUFM de Bretagne)
    Les jeunes Français face à la lecture : nouvelles pistes méthodologiques pour l'évaluation massive des performances cognitives
    (Reading skills of French youngsters: new ways of large-scale assessing of cognitive performance)
    2010, Vol. XV-1, pp. 121-144

    Le dispositif du Ministère de la Défense (JAPD, Journée d'Appel de Préparation à la Défense) permet d'évaluer chaque année les performances en lecture d'environ 700 000 jeunes. Les contraintes de passation et l'observation des résultats des années précédentes ont conduit à faire encore évoluer les épreuves. Il s'agit ici de proposer de nouvelles pistes méthodologiques pour l'évaluation massive de la lecture à travers la présentation des résultats collectés sur les années 2004-2008. Cette enquête est une nouvelle occasion de nuancer les oppositions binaires entre lettrés et illettrés pour montrer que des modalités de lecture diverses, plus ou moins efficaces, caractérisent le savoir-lire des jeunes Français. Pour certains jeunes, la fin de la scolarité approchant, le basculement prochain dans la vie active va engendrer un nouveau rapport à l'écrit. L'école comme lieu de sollicitation d'actes de lecture et d'écriture va disparaître au profit du monde du travail. Pour ces jeunes, le rapport à l'écrit sera définitivement distendu.


  • Aude SEURRAT (Université Paris 13)
    Evaluation de l'efficacité ou mesure de la satisfaction dans la formation professionnelle courte ?
    (Evaluating effectiveness or measuring satisfaction in short vocational training?)
    2019, Vol. XXIV-1, pp. 53-66

    Cet article questionne les formes, les modalités et les enjeux de l'évaluation dans la formation professionnelle courte. L'évaluation apparaît à la fois comme l'aboutissement d'une formation et comme ce qui doit en amont en guider la mise en œuvre : elle est à la fois la finalité et la genèse de l'action. Présentée comme une modalité de rationalisation à des fins d'optimisation de la performance, l'évaluation est particulièrement aux prises avec les questions d'industrialisation. Injonction faite aux professionnels de la formation, l'évaluation oriente la manière dont les acteurs agissent et pensent leur action dans les organisations. Équipée, outillée, instrumentée, elle implique enfin une approche fine des médiations et, en premier lieu, celles des outils informatisés qui lui donnent corps.


  • Elwys STEFANI (DE) & Anne-Sylvie HORLACHER (Bâle, Suisse / Université de Bâle & Université de Neuchâtel)
    Une étude interactionnelle de la grammaire : la dislocation à droite évaluative dans la parole-en-interaction
    (An interactional approach to grammar: evaluative right-dislocations in talk-in-interaction)
    2017, Vol. XXII-2, pp. 15-32

    Dans cet article, nous offrons une introduction à la linguistique interactionnelle, avant de revisiter – au moyen de ses outils – une structure largement décrite par les grammaires : la dislocation à droite (DD). À partir de conversations filmées (séances de coiffure et repas entre amis), nous examinons plusieurs cas de DD évaluatives en distinguant a) celles qui portent sur un objet de narration et que les locuteurs font intervenir comme dispositif de clôture, b) celles qui portent sur un objet matériel présent dans le contexte physique immédiat et à travers lesquelles les participants initient un nouveau cours d’action. Les analyses multimodales menées nous font conclure que le type d’activités dans lequel les participants sont engagés est primordial pour comprendre la mobilisation des ressources de la grammaire et leur rendement interactif.


  • Jacques TARDIF & Bruno DUBOIS (Faculté d’éducation, Université de Sherbrooke / Faculté de pharmacie, Université Laval)
    De la nature des compétences transversales jusqu’à leur évaluation : une course à obstacles, souvent infranchissables
    (On the nature of transversal competencies until their evaluation : a race with sometimes impossible obstacles)
    2013, Vol. XVIII-1, pp. 29-45

    Les compétences transversales délimitent et ciblent des savoir-agir que tout être humain devrait développer en milieu scolaire afin d’être en mesure de comprendre la complexité des situations de la vie courante et de mettre en œuvre des actions judicieuses. Toutefois, sans ancrage dans des réalités concrètes, le parcours de développement de ces compétences et son évaluation paraissent impalpables. Après avoir défini le concept de compétence et esquissé les grandes lignes de l’évaluation des compétences, l’article illustre, à l’aide d’un contre-exemple, la difficulté d’influer sur les apprentissages critiques inhérents à toute compétence dite transversale et, forcément, de les évaluer. La dernière partie propose, dans une logique de professionnalisation, de privilégier l’idée de posture professionnelle et des exemples sont décrits dans ce sens.


  • Sylviane VALDOIS (Grenoble 2)
    Evaluation des difficultés d'apprentissage de la lecture
    (Assessing difficulties in the acquisition of reading)
    2010, Vol. XV-1, pp. 89-103

    L'étude des opérations mentales impliquées dans la lecture et son apprentissage a permis de proposer de nouveaux outils d'évaluation des difficultés d'apprentissage de la lecture. La première étape de l'évaluation consiste à estimer l'efficacité des deux procédures de lecture, globale et analytique. Un développement dysharmonieux de ces procédures conduit à rechercher les mécanismes cognitifs sous-jacents potentiellement déficitaires. On évalue alors classiquement les capacités de traitement phonologique des enfants dont on connaît l'impact sur la lecture. Des études récentes montrent la nécessité d'estimer également l'intégrité d'un second facteur, l'empan visuo-attentionnel, dont le rôle dans la lecture normale, son apprentissage et les dyslexies développementales est à présent démontré.