« Outils d'évaluation dans Moodle » : différence entre les versions

De EduTech Wiki
Aller à la navigation Aller à la recherche
Ligne 24 : Ligne 24 :
# Autres (par exemple  l'activité "atelier", les sondages, les instruments de sondages standardisés pour mesurer l'expérience d'apprentissage)
# Autres (par exemple  l'activité "atelier", les sondages, les instruments de sondages standardisés pour mesurer l'expérience d'apprentissage)


Ces outils peuvent aussi être considérés des outils de suivi (il faut compléter la liste de ces derniers par les rapports du cours et autres "analytics".
Dans une perspective formative, on peut considérer que ces outils servent d'instruments de suivi (il faut compléter la liste de ces derniers par les rapports du cours et autres "analytics", les notifications. etc.).


Au-delà de ces outils de base on peut:
Au-delà de ces outils de base on peut:

Version du 20 mars 2018 à 11:38

Cet article est une ébauche à compléter. Une ébauche est une entrée ayant un contenu (très) maigre et qui a donc besoin d'un auteur.

Introduction

Il existe différentes acceptions de la notion d'évaluation. Selon Stéphane Jacquemet (exposé oral, EPFL Mars 2018):

  • La mesure: évaluation chiffrée (approche quantitative) qui cherche à comparer une grandeur par rapport à une autre
  • le contrôle: évaluation de vérification par rapport à une norme ou à un standard attendu, notamment un référentiel
  • Le suivi: action de soutien intervenant à la suite de la formation dans le but de documenter (administration) ou de renforcer (transfert) les acquisitions
  • L'évaluation au sens plus large du terme: ensemble des actions engagées dans le cadre d’un processus formel afin d’exprimer soit la qualité d’une action ou d’un projet, soit les effets d’une formation sur les apprenants (impact), soit l’efficacité durable sur un système.

L'évaluation des apprentissages a plusieurs facettes (ou étapes) dont les plus importantes sont l’évaluation préventive (avant la formation) formative (pendant, pour donner du feedback) et l'évaluation sommative (à la fin de la formation).

Les outils de Moodle

Moodle 3.x contient plusieurs outils liés à l'évaluation et soutiennent plusieurs types d'évaluation. On peut distinguer plusieurs groupes d'outils qui servent à évaluer les apprenants (c-a-d leurs productions et/ou leur apprentissages) et qu'on peut utiliser à des fin d'évaluation divers (diagnostic, formatif, sommatif, ...)

  1. Les barèmes: Définir des échelles qui résument une évaluation.
  2. Outils de quizzing: Évaluation par ordinateur. Le plus connu est l'activité "test", mais on peut aussi déployer des "objets e-learning" qui contiennent des quiz (SCORM 1.2)
  3. Grilles d'évaluation ("rubrics" en Anglais): Disponibles pour évaluer des devoirs (Angl. assignments)
  4. Suivi et de progression de compétences: A utiliser avec le système de création de référentiels. Alternativement, on peut aussi utiliser le système plus ancien des objectives
  5. Pistage: Est-ce qu'un utilisateur a terminé une activité ?
  6. Achèvement de cours: Est-ce qu'un apprenant a réussi (ou terminé) le cours ?
  7. Badges: On peut décerner manuellement au automatiquement des badges électroniques
  8. Evaluation non formelle: Utilisation de forums, annotations dans un wiki, etc.
  9. Autres (par exemple l'activité "atelier", les sondages, les instruments de sondages standardisés pour mesurer l'expérience d'apprentissage)

Dans une perspective formative, on peut considérer que ces outils servent d'instruments de suivi (il faut compléter la liste de ces derniers par les rapports du cours et autres "analytics", les notifications. etc.).

Au-delà de ces outils de base on peut:

  1. Installer ou faire installer d'autres outils
  2. Évaluer des portfolios crées dans Mahara
  3. Utiliser des outils en ligne via le mécanisme LTI (IMS Learning Tools Interoperability)

Presque chaque activité autorise au moins une forme d'évaluation ou est elle-même une évaluation (comme les tests). Il existe peu d'outils que l'on peut utiliser pour évaluer des cours.

Voir aussi:

Les scores et les barèmes

Moodle distingue entre les points qu'on pourrait aussi appeler scores (Angl. grade points) et les barèmes (Angl. Grading scales). Les points chiffrent la valeur d'une production. Un barème soutient une façon d'évaluer, par exemple: classer les apprenants, évaluer par objectifs, évaluer la progression, etc. Utiliser un barème (donner une note) permet de communiquer et aussi d'orienter l'apprenant.

Les scores (Angl. grade points)

(1) Dans Moodle, un point (score) est un chiffre sur une échelle numérique allant de 0 à une limite supérieure que vous pouvez définir. Dans le système américain, on note souvent une performance sur une échelle de 100 qui indique le % de choses maîtrisés. Ces pourcentages peuvent aussi représenter la position d'un apprenant par rapport aux autres. La note (Angl. grade) est ensuite calculée à l'aide d'une grille de correspondance entre ce score et un barème (une échelle de notation).

Exemple simple: non-acquis, acquis, excellent

<60 points = non acquis
 60 points = acquis
 90 points = excellent

Exemple Américain:

A+	Excellent           100.00
A	Very good	     92.00
A-	Almost very good     89.00
B+	Pretty good	     85.00
B	Good	             82.00
B-	Reasonably good	     79.00
C+	Fair	             75.00
C	Rather weak / minim. 72.00
C-	Minimalist / Weak    69.00
D+	Very weak            65.00
D	Pass	             62.00
F	Fail	             61.00

(2) Un barème (échelle de notation) permet de noter une production étudiante (quiz, devoir, participations, etc.). Soit on passe via un score comme les Américains, soit on donne directement une note. Un échelle de notation peut être qualitative ou quantitative. Par défaut, Moodle inclut quelques échelles qualitatives (à vérifier). Avant d'utiliser les outils d'évaluation, il faut s'assurer que les échelles que vous aimeriez utiliser soient présentes dans le système.

Notice: Si on a bien compris, chaque nombre entre 1 et 100 correspond aussi à un barème. Si vous déclarez que vous allez utiliser un barème qui va à 6, vous allez pouvoir utiliser les notes 1,2,3,4,5,6 mais pas des demis ou de quarts de notes.

Si vous désirez directement utiliser des barèmes Suisse, Allemands ou Français, il est impératif de rentrer toute l'échelle qui va de 0 à la note maximale (y compris les quarts de notes). Par exemple un Français qui aime utiliser le barème de 0 à 20 avec des quarts de notes, doit rentrer 80 chiffres que vous pouvez copier depuis ci-dessous et coller. Sinon, le résultat de certaines opérations de Moodle devient imprévisible pour des raisons qu'on expliquera pas ici. Un enseignant peut créer un barème pour un cours, un administrateur peut le faire au niveau du système.

  • Cliquer sur Notes (dans le menu en haut à gauche), ensuite sélectionner le TAB "Barèmes"

Exemples de barèmes divers.

Acquisition
Pas fait-0, pas acquis-1, en route d'acquisition-2, acquis-3
Barème Satisfaisant
Insatisfaisant, Satisfaisant, Excellent
Barème Suisse
0.0, 0.25, 0.5, 0.75, 1.0, 1.25, 1.5, 1.75, 2.0, 2.25, 2.5, 2.75, 3.0, 3.25, 3.5, 3.75, 4.0, 4.25, 4.5, 4.75, 5.0, 5.25, 5.5, 5.75, 6.0
Barème Français
0, 0.25, 0.5, 0.75, 1, 1.25, 1.5, 1.75, 2, 2.25, 2.5, 2.75, 3, 3.25, 3.5, 3.75, 4, 4.25, 4.5, 4.75, 5, 5.25, 5.5, 5.75, 6, 6.25, 6.5, 6.75, 7, 7.25, 7.5, 7.75, 8, 8.25, 8.5, 8.75, 9, 9.25, 9.5, 9.75, 10, 10.25, 10.5, 10.75, 11, 11.25, 11.5, 11.75, 12, 12.25, 12.5, 12.75, 13, 13.25, 13.5, 13.75, 14, 14.25, 14.5, 14.75, 15, 15.25, 15.5, 15.75, 16, 16.25, 16.5, 16.75, 17, 17.25, 17.5, 17.75, 18, 18.25, 18.5, 18.75, 19, 19.25, 19.5, 19.75, 20

On est gentils, voilà le programme JavaScript qui génère cela (copier coller dans une console javascript, SHIFT-F4 dans Firefox)

text = '';
for (i = 0; i < 20.0; i = i + 0.25) {
  text += i + ', ';
}
document.write(text+"20");

Malheureusement, il existe pas mal de confusion autour du système de points et de notes:

  • Il y a déjà un problème de traduction. Par exemple les tests n'autorisent pas le calcul direct d'une note faisant partie d'une barème (ce qui est compatible avec le système Américain). Par contre au lieu d'appeler cela "points", les traducteurs ont mis "note" (une traduction tout à fait juste, mais frustrante pour qqn. qui aurait aimé coller une des quarts de points selon le système suisse)
  • Certains outils (comme les grilles d'évaluation) essayent de normaliser le calcul de notes utilisant des barèmes quantitatives en fonction de la dispersion des résultats. Cette logique a du sens pour les gens qui maîtrisent les théories avancées du testing et qui ont du temps pour calibrer un outil, c-a-d à peu près personne.

La plupart des activités qui amènent à des productions peuvent être évalués:

  • soit avec une note qui est un simple score,
  • soit avec une note qui fait partie d'un barème de notes.

On peut aussi décider de ne pas évaluer. Donc vous avez trois choix.

Pour finir on donne un conseil:

  • Soit vous travaillez toujours avec une simple échelle de 0 à 100 et vous calculez vos notes plus tard.
  • Soit vous définissez des barèmes qui vont de 0 à 6 (suisses) ou de 0 à 20 (français). Il faut absolument entrer tous les quarts de notes !

Outils de quizzing

Moodle 3.4 de base contient le support pour au moins trois types de quizzing. Pour explorer leurs fonctionnalités, il faut se mettre en mode édition (par la "roue action" en haut à droite) et ensuite Ajouter une activité ou une ressource

Le module test

Le module Test (appelé Quiz en Anglais) permet de créer des quiz en format propriétaire de Moodle. Il se trouve dans liste des activités que l'on peut ajouter.

D'après la documentation Moodle (ci-dessus), le démarche conseillée est la suivante (suivez les liens)

(1) Créer une (ou plusieurs) catégories dans une banque de questions

  • Menu Administration -> Plus -> Banques de question -> Catégories
Si vous affichez le bloc administration, il y un accès plus direct

(2) Créer des questions (dans le même outil banques de question).

(3) Créer un test qui utilise des questions définies dans une banque de données. Cela se fait en deux étapes

  • Créer et paramétrer un test: Pour commencer, ajoutez une activité test sans paramétrer grand chose et enregistrez.
  • Construire un test: Cliquez sur l'activité test pour ajouter des questions. Plus tard, il va falloir utiliser le menu déroulant à droite.

Malheureusement Moodle n'implémente pas la norme QTI. Autrement dit, le format de Moodle est propriétaire et ne permet pas l'exportation vers une autre plateforme. Il semble possible par contrer d'exporter/importer vers un autre Moodle de la même famille de version.

Le quiz Scorm 1.2

SCORM (Sharable Content Object Reference Model) est une collection de spécifications qui permettent l'interopérabilité, l'accessibilité et la réutilisation de contenu d'apprentissage basé sur le Web. (Paquetage SCORM).

Un paquetage SCORM est une ressource sous form de fichier *.zip qui peut contenir des quiz interactifs.

Moodle ne soutien que la version la plus simple, en:SCORM 1.2 (en Anglais).

Le paquetage IMS

Le paquetage IMS, disponible comme "Ressource" dans le menu Ajouter une activité ou une ressource une fois que vous êtes en mode édition, permet de déployer des quiz d'auto-évaluation que l'on peut intégrer dans une paquetage. Les résultats ne sont pas communiqués à Moodle.

Devoirs, critères et grilles d'évaluation

L'activité Devoir (Angl. Assignment) permet aux apprenants de déposer des devoirs en téléversant un ou plusieurs fichiers. On peut aussi leur demander de taper un texte dans une formulaire simple. Vous pouvez évaluer le devoir de trois façons:

  • Avec des points ou avec une note (échelle qualitative ou quantitative)
  • Avec un guide d'évaluation, c-a-d une liste de critères (Angl. marking guide)
  • Avec une grille d'évaluation, c-a-d une liste de critères avec des indicateurs de performance (Angl. rubric)

Evaluer des dévoirs avec des grilles d'évaluation présente un certain nombre d'avantage. Une fois la grille créée, la procédure sera plus rapide. Le feedback critérié peut être plus clair et il y a (en tout cas en surface) une meilleure homogénéité de la correction.

Moodle ne permet pas la création de ces grilles par un menu d'administration. Il faut d'abord créer un devoir et ensuite créer ou reparamétrer la grille d'évaluation.

Les compétences

Parallèlement à un système d'évaluation classique par activité et par cours on peut installer un système qui mesure l'achèvement de compétences. Ce système existe seulement dans les versions de Moodle 3.2 et supérieur.

L’administrateur ou d'autres personnes ayant obtenu le droit peuvent définir des grilles sophistiqués de compétence. Les enseignants peuvent associer l'achèvement de certaines activités à l'achèvement d'une compétence. Ils peuvent aussi faire manuellement des "attestations".

Les badges

Moodle permet de discerner automatiquement ou manuellement des badges pédagogiques, c'est-à-dire des représentations numériques d'une compétence ou encore de réussites d'apprentissage ou d'expériences. D'après la documentation officielle (Mars 2018), «Les badges sont un bon moyen de conclure le passage d'une étape, par exemple l'achèvement d'un cours, et marquer ainsi une progression par une récompense. Les badges peuvent être décernés selon un ensemble varié de critères. Ils sont entièrement compatibles avec Open Badges (Mozilla). Les badges peuvent être créés dans Moodle et seront visibles dans le profil de l'utilisateur ou poussés vers leur sac de badges Open Badges. Les collections Open Badge publiques qu'ils détiennent dans leur sac à badges Open Badges seront également publiées sur leur profil.»

Lire:

Achèvement d'activités et de cours

Pour que cela fonctionne, l'administrateur doit autoriser les enseignants-concepteurs à utiliser le suivi d'achèvement (voir la documentation).

Pour chaque activité on peut définir un critère d'achèvement. Par exemple on peut décider que le simple fait de l'afficher suffit ou au contraire, exiger qu'une certaine note soit atteinte.

Un enseignant concepteur peut ajouter des conditions qui définissent si un apprenant a terminé un cours. Selon la documentation officielle, «L'achèvement du cours montre si un cours est terminé. Il peut montrer le progrès d'un étudiant dans le cours par rapport à des critères spécifiques. Les critères peuvent inclure d'atteindre un certain résultat à une activité ou de cocher manuellement « Terminé » (par l'enseignant ou l'étudiant). Le rapport peut aussi montrer si l'étudiant a terminé d'autres cours ayant un impact sur la complétion de ce cours (par exemple, si la réussite de ce cours est conditionnelle à la réussite d'un autre cours). »

Ensuite, dans le "menu actions" (ou le bloc administration du cours s'il est affiché) on peut déterminer selon quels critères le cours est achevé (par exemple après obtention de l'achèvement de certaines activités ou encore après une auto-évaluation).

Lire:

Liens

Documentation officielle en français

La documentation de Moodle en français est incomplète car Moodle est un système gratuit. La documentation repose sur la (pas si) bonne volonté des utilisateurs francophones.

Documentation de modules:

  • Test permet de créer des quiz en format propriétaire de Moodle
  • Paquetage SCORM permet d'importer des paquetages Scorm 1.2 (pas Scorm 2004) et qui peuvent contenir des simples quiz dont le résultat sera ensuite communiqué à Moodle.
  • Atelier permet d'implémenter une forme spécifique d'une stratégie "tutorat par des pairs".

Des extensions permettent d'ajouter d'autres fonctionalités, par exemple Présence permet de pister la présence des étudiants à des séances présentielles.

Tutoriels Moodle

  • A faire