Was ist die robusteste Methode für Peer-Grading?

Ich beabsichtige, eine Gruppenaufgabe für 30 Personen bereitzustellen, die in 5 oder 6 Gruppen aufgeteilt werden.

Letztendlich möchte ich, dass sie beurteilen, welche Gruppe das beste Ergebnis erzielt hat (nachdem sie die Ergebnisse vor anderen Gruppen präsentiert haben) und sich innerhalb der Gruppen basierend auf ihrem Beitrag zur Teamleistung selbst benoten.

Nun, sowohl die Spieltheorie als auch meine einfache Erfahrung, Menschen zu beobachten, die unsachlich sind, würden darauf hindeuten, dass dies auf viele Arten schief gehen kann, wenn ich nicht ein robustes System einführe, das zumindest mit Problemen wie den folgenden umgehen würde:

  • Gruppe, die wahrscheinlich Zweiter wird, wird der Gruppe, die sie objektiv als die beste ansehen, die niedrigste Note geben, um ihre Gewinnchancen zu erhöhen

  • Gruppe, die wahrscheinlich die letzte ist, wird der vorletzten Gruppe die schlechtesten Noten geben, damit sie ihre Chancen erhöhen, sie zu ersetzen und nicht Letzter zu werden

  • Gruppenmitglieder werden mir sagen, dass jede Person im gleichen Maße beigetragen hat, aber das wird in den meisten Szenarien nicht wahr sein. Besonders die beste Gruppe hat keinen Grund, die Note ihres Kollegen abzuwerten, egal wie gering sein Beitrag war. Andererseits ist ein System, in dem sie sich gegenseitig mit prozentualen Beiträgen bewerten, ebenfalls falsch, da manchmal tatsächlich alle Gruppenmitglieder auf demselben, hohen Niveau zusammengearbeitet haben und es nicht erforderlich ist, die besten oder schlechtesten Mitglieder zu benennen und ihre Noten zu senken, also selbst wenn Sie alle arbeiteten hart, um die gleiche Durchschnittsnote für ihre Leistung zu erhalten.

Gibt es ein solches Abstimmungs-/Bewertungssystem?

Antworten (1)

Um das gewünschte Verhalten für Ihren ersten Punkt anzuregen, können Sie Folgendes tun.

  • Wenn die Gruppe, die als Zweiter herausgekommen ist, der Gruppe, die zuerst herausgekommen ist, die niedrigste (mögliche) Note gegeben hat, ist die Strafe wie folgt <specify punishment here>. Eine alternative Bedingung wäre: Wenn die erste Gruppe von der zweiten Gruppe die schlechteste Note erhalten hat. Das ist strenger, aber auch gerechter. Fügen Sie vielleicht etwas Toleranz hinzu (z. B. 1 Grad Abweichung ist in Ordnung).

Sie könnten die gleiche Strategie für den zweiten Punkt ausprobieren, aber das wird nicht funktionieren. Wenn die Gruppen nicht für sich selbst (als Gruppe) stimmen können und wir davon ausgehen, dass das Endergebnis eine einigermaßen objektive Darstellung der Leistung ist, würde die letzte Gruppe der vorletzten Gruppe die schlechteste Note geben. Sie könnten jedoch die Alternative des ersten Ansatzes ausprobieren:

  • Hat die letzte Gruppe die schlechteste Note der vorletzten Gruppe erhalten und weicht diese Note um mehr als 1 ab, dann <specify punishment here>.

Tatsächlich könntest du diese Regel für alle Ränge einführen. Erster und zweiter Platz, zweiter und dritter usw. Aber dann bräuchten die Gruppen mehr Zeit, auch das setzt voraus, dass die Leistungen der Gruppen so unterschiedlich sind, dass eine subjektive Einstufung tatsächlich möglich ist.

Damit sich die Gruppen selbst einschätzen können, könnten Sie eine endliche Anzahl von Noten oder Klassifikationen (z. B. Top-Performer, Mittel-Performer) einführen. Wenn die Noten/Klassifizierung nur eine festgelegte Anzahl von Malen vergeben werden kann, erhält jeder Teilnehmer einen eindeutigen Rang (relativ zu dieser Gruppe). Die Note wird wahrscheinlich nicht mit Gruppenmitgliedern anderer Gruppen verglichen (vielleicht wenn Sie es mit der Gruppennote gewichten). Es ist möglich, die Anzahl der möglichen Bewertungen auf die Anzahl der Gruppenmitglieder zu begrenzen oder sie auf 2 oder 3 (oben, mittel, unten) zu begrenzen und mehrere Bewertungsrunden durchzuführen.