Read, Critique, or Sketch? Investigating Alternative Visualization Literacy Assessment Modalities
Diese Arbeit befasst sich mit den Einschränkungen traditioneller Multiple-Choice-Tests zur Visualisierungskompetenz, indem sie webbasierte qualitative Kritik- und Skizzieraufgaben einführt und validiert, die höhere kognitive Fähigkeiten besser differenzieren und Personen unterschiedlicher Erfahrungsstufen besser voneinander unterscheiden.
Originalarbeit lizenziert unter CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dies ist eine KI-generierte Erklärung des untenstehenden Papers. Sie wurde nicht von den Autoren verfasst oder gebilligt. Für technische Genauigkeit konsultieren Sie das Originalpaper. Vollständigen Haftungsausschluss lesen
Stellen Sie sich vor, Sie wollten beurteilen, wie gut jemand ein Buch lesen kann. Sie könnten ihm eine Reihe von Multiple-Choice-Fragen stellen wie: „Welche Farbe hatte der Hund?“ oder „Hat der Held gewonnen?“ Diese Tests sind schnell und einfach zu korrigieren, aber sie sagen Ihnen nur, ob jemand in der Lage ist, Fakten zu erkennen. Sie sagen nicht aus, ob die Person tatsächlich eine Geschichte schreiben, die tiefere Bedeutung verstehen oder erklären kann, warum eine Logiklücke das gesamte Buch ruiniert. Genau das ist das Problem, mit dem Forscher auf dem Gebiet der Datenvisualisierung konfrontiert sind. Visualisierungskompetenz bedeutet nicht nur, einen Blick auf ein Diagramm zu werfen und eine Zahl abzulesen; es geht um das gesamte Werkzeugset: zu verstehen, was die Daten bedeuten, zu bemerken, wenn ein Diagramm einen anlügt, und sogar in der Lage zu sein, sein eigenes Diagramm von Grund auf zu zeichnen. Lange Zeit haben Wissenschaftler hauptsächlich diese Art von „Multiple-Choice“-Tests verwendet, um diese Fähigkeit zu messen. Aber genau wie ein Schreibtest, der nur verlangt, das richtige Wort einzukreisen, könnten diese alten Tests für kluge Köpfe zu einfach sein (jeder bekommt eine Eins) und sie übersehen die wirklich schwierigen, kreativen Fähigkeiten, die Experten jeden Tag anwenden.
Ein Team von Forschern beschloss daher, etwas anders zu machen. Anstatt die Leute nur zu fragen, das richtige Antwort aus einer Liste auszuwählen, baten sie sie zu zeichnen und zu sprechen. In ihrer Studie gaben sie den Teilnehmern drei Arten von Aufgaben: Einige mussten eine Grafik basierend auf einer ungeordneten Liste von Zahlen skizzieren, andere mussten sich ein seltsames Diagramm ansehen und laut darüber sprechen, was daran falsch war, und eine dritte Gruppe musste die klassische Multiple-Choice-Tests absolvieren. Sie testeten drei Gruppen von Menschen: normale Internetnutzer (die wahrscheinlich nichts über Diagramme studiert haben), College-Studenten, die einen Kurs zu diesem Thema belegt hatten, und tatsächliche Experten, die Visualisierung beruflich erforschen.
Die Ergebnisse waren wie beim Beobachten eines Spitzenkochs, eines Kochstudenten und eines Hobbykochs beim Versuch, eine Mahlzeit zuzubereiten. Die alten Multiple-Choice-Tests waren wie die Frage: „Ist Salz salzig?“ Jeder hatte es richtig, also konnten die Tests keinen Unterschied zwischen dem Meister und dem Anfänger feststellen. Aber als die Forscher die Leute baten, ein Diagramm zu skizzieren oder ein schlechtes zu kritisieren, wurden die Unterschiede kristallklar. Die Experten zeichneten komplexe, durchdachte Designs und entdeckten subtile Fehler in den Diagrammen, während die Anfänger damit kämpften, selbst die Grundlagen richtig zu machen, oder versuchten, verzweifelt, von Hand zu zeichnen. Die Studie legt nahe, dass diese „Zeichen- und Sprech-Tests“ viel besser darin sind, zu erkennen, wer wirklich geschickt ist, insbesondere wenn man den Unterschied zwischen einem Studenten und einem Profi feststellen muss. Obwohl diese neuen Tests länger zu korrigieren und schwieriger einzurichten sind, glauben die Forscher, dass sie ein notwendiges Upgrade sind, um reale Fähigkeiten zu messen, ganz so, wie Schulen Aufsätze anstelle von bloßen Antwortbögen verwenden, um die Schreibfähigkeit zu beurteilen.
Ertrinken Sie in Arbeiten in Ihrem Fachgebiet?
Erhalten Sie tägliche Digests der neuesten Arbeiten passend zu Ihren Forschungsbegriffen — mit technischen Zusammenfassungen, in Ihrer Sprache.