Notes de l'atelier par les pairs

Notes de l'atelier par les pairs

par Lucie Lebeau,
Nombre de réponses : 7

Bonjour à tous,


j'ai une petite interrogation concernant l'atelier par les pairs.

Sur un exercice les étudiants pouvaient donner une note maximale de 66 pts et pouvaient recevoir 4 pts max en évaluation.

Seulement au regard du détail de leur note, il y a une incohérence.
Exemple : il m'est indiqué qu'une étudiante a donné 63 pts à un camarade. Mais quand je regarde dans le détail les points attribués, le total donne 60 pt et non 63 pts...

Auriez-une idée d'où cette différence viendrait ?

Merci !

Moyenne des évaluations  -
En réponse à Lucie Lebeau

Re: Notes de l'atelier par les pairs

par Christian Bocquet,
Avatar Moodleurs particulièrement utiles

Bonjour Lucie,

Pourriez-vous préciser ? Combien de participants évaluaient le travail de ce camarade ? Si seule cette étudiante (aucun autre participant, professeur y compris)  a donné 63 points la note finale pour le travail remis devrait être 63. Mais comme vous écrivez "quand je regarde dans le détail les points attribués", on peut donc penser qu'il y a d'autres participants qui ont évalué le travail.

Serait-il possible d'avoir une copie d'écran, en masquant les noms, de la partie du rapport d'évaluation de l'atelier, comme celle en annexe, concernant seulement ce camarade

Christian

Annexe rapport.PNG
Moyenne des évaluations  -
En réponse à Christian Bocquet

Re: Notes de l'atelier par les pairs

par Lucie Lebeau,

Bonjour,

merci pour votre réponse.
Suite à ma question, j'ai fait une recherche un peu plus poussée et j'ai trouvé un élément de réponse.

Je vais essayé d'expliquer par écrit, mais cela ne va pas être simple.

Rappel  du problème constaté :
sur un atelier, avec une évaluation cumulative, j'ai défini 66 pts comme points max. pouvant être donnés.

Il a été constaté, pour plusieurs étudiants une différence entre la note donnée par les évaluateurs et la note affichée.
Ex. il est affiché à l'étudiant qu'il a 37 pts, mais lorsqu'on clique pour accéder au détail de la notation des aspects, on remarque au final qu'il aurait dû avoir 38 pts, cf. image ci-dessous.
Atelier - Phase de notation

Toutefois en regardant le tutoriel sur l'atelier réalisé par l'INSA de Rouen, j'ai pu constater qu'un algorithme entre en jeu dans la phase de notation du travail remis (et non pas seulement dans la phase d'évaluation des évaluateurs), comme expliqué sur cette page : https://insa-rouen.scenari-community.org/doc/ateliermoodle/co/3-ens.html

Aussi, si je reprends la notation précédente, à noter que pour les aspect 1 et 3 la pondération est de 16 et pour les aspects 2 et 4 la pondération est de 1, et en appliquant le calcul, cela donne :

formule 1

formule 2

Je multiplie le tout par 2,941, pour mettre le tout sur 100.
formule 3

formule 4

Le calcul m'indique que l'étudiant a obtenu 56,67% de 66pts => 37,40 (arrondi = 37).
Les écarts peuvent être parfois beaucoup plus important.

Il faut donc bien prendre en compte cette modalité. La note affichée à l'étudiant n'est pas vraiment celle donnée par l'évaluateur.

Bonne journée,

Lucie


Moyenne des évaluations Utile (3)
En réponse à Lucie Lebeau

Re: Notes de l'atelier par les pairs

par Christian Bocquet,
Avatar Moodleurs particulièrement utiles

Bonjour Lucie,

Merci pour toutes ces précisions.

Si vous souhaitez que que la note affichée soit celle donnée par l'évaluateur, le coefficient de pondération des aspects 1 et 3 doit être celui des aspects 2 et 4 multiplié par 10.

Par exemple, mettez pour les aspects 1 et 3 la pondération égale à 10 et gardez pour les aspects 2 et 4 la pondération égale à 1, et la note remise sera alors 38 (correspondant au total des points).

Ou alors pour que l'élève ne soit pas surpris de cette différence avec le total des points remis par l'évaluateur, il faut indiquer dans les "Instructions pour l'évaluation" que les notes des aspects (en réalité les pourcentages des points obtenus par rapport à la note maximale)  subissent une pondération, que ce n'est pas parce qu'un aspect est noté sur 30 qu'il comptera 10 fois plus que l'aspect noté sur 3.

Christian


Moyenne des évaluations  -
En réponse à Christian Bocquet

Re: Notes de l'atelier par les pairs

par Lucie Lebeau,

Christian,


merci pour ce retour. Effectivement, le rapport de 10 fonctionne très bien (et est logique) et la noté affichée est donc la même que la note donnée.
Il est intéressant de prendre cela en compte pour éviter toute interrogation des étudiants, ou du moins pour pouvoir leur apporter une réponse.

Je vous remercie encore pour votre aide précieuse.

Cordialement,

Lucie

Moyenne des évaluations  -
En réponse à Lucie Lebeau

Re: Notes de l'atelier par les pairs

par Masha P,
Bonjour,

il semble que je rencontre le même problème de notes. J'essaie d'expliquer, en espérant que ça sera suffisamment clair.

Le formulaire d'évaluation contient 6 aspects:
Aspect 1 sur 24 points; Aspect 2 sur 26 points; Aspect 3 sur 22 points;  Aspect 4 sur 16 points; Aspect 5 sur 10 points; Aspect 6 sur 10 points.

Les aspects 5 et 6 ont été introduits dans le formulaire par erreur, les étudiants n'ont jamais attribué de points pour ces aspects mais je n'ai pas réussi à les enlever du formulaire (l'atelier était déjà en cours quand on s'est aperçu de ce problème).

La somme des points donnés par les correcteurs (qui est la vraie note pour la copie) diffère de la valeur affichée dans le rapport de l'atelier. Je viens de constater que la même somme de points donnés dans deux corrections différentes peut correspondre à deux valeurs différentes dans le rapport de l'atelier, voilà un exemple:

Copie 1, les points attribués : 22/24/16/11 -> total de 73 -> note affichée 71,6
Copie 2, les points attribués : 21/25/19/8 -> total de 73 -> note affichée 70,4

Il s'agit d'un nombre important d'étudiant et d'un contrôle continu dans la situation de confinement... vous connaissez tous l'actualité.

Est-ce qu'il y a une possibilité de faire quelque chose pour que les "vraies" notes s'affichent dans le rapport de l'atelier sans que nous soyons obligés d'ouvrir chaque évaluation une par une, de compter les sommes de points attribués à la main et de rentrer ces valeurs dans le fichier excel?

Merci d'avance pour toute aide
Masha
Moyenne des évaluations  -
En réponse à Masha P

Re: Notes de l'atelier par les pairs

par Christian Bocquet,
Avatar Moodleurs particulièrement utiles

Bonjour,

La formule de calcul de la note du travail dans la phase d'évaluation est donnée dans la documentation: Accumulative grading strategy
avec un exemple de calcul.

Ainsi, si vous avez choisi la même pondération égale à 1, pour chaque aspect, les notes des deux étudiants seront:

$$ \dfrac{ \dfrac{22}{24} \times 1 + \dfrac{24}{26} \times 1+ \dfrac{16}{22} \times 1+ \dfrac{11}{16} \times 1}{1+1+1+1} \times 88 = 71,6 $$

et

$$ \dfrac{ \dfrac{21}{24} \times 1 + \dfrac{25}{26} \times 1+ \dfrac{19}{22} \times 1+ \dfrac{8}{16} \times 1}{1+1+1+1} \times 88 = 70,4 $$

On aurait pu obtenir 73 en choisissant au départ, lors de la préparation du formulaire d'évaluation, dans la première phase de configuration, des pondérations proportionnelles aux maxima 24, 26,22, 16.

Christian
Moyenne des évaluations Utile (2)
En réponse à Christian Bocquet

Re: Notes de l'atelier par les pairs

par Masha P,

Bonsoir,

oui, c'est logique. Merci beaucoup! Finalement j'ai pu changé les pondérations proportionnelles aux maxima de telle sorte que la note calculée correspond aux points obtenus. Et de plus, j'ai réussi à neutralisé les aspects "intrus" avec votre aide dans mon autre poste.

On demandera les étudiants d'appuyer sur "recalcul" et de sauvegarder la fenêtre qui s'ouvre. C'est le seul moyen que j'ai trouvé pour l'instant pour recalculer les notes.

Merci merci!

Masha
Moyenne des évaluations  -