Sollten Prüfungsaufgaben sprachlich optimiert sein?

„Wenn etwas leicht zu lesen ist, dann war es schwer zu schreiben“. Dieses Zitat, das verschiedenen Autoren zugeschrieben wird, passt laut Dr. Susanne Wagner, Geschäftsführerin des Instituts für Textoptimierung (IFTO) auch zum Thema Prüfungsaufgaben. „Die Textoptimierung ist so ein bisschen wie ein Handwerk, das man lernen muss“, betont die Sprachwissenschaftlerin. Wenn man sich als Ausbilderin oder Lehrer ein- bis zweimal im Jahr damit beschäftige, Prüfungsaufgaben zu erstellen, sei es sehr schwierig, das so hinzubekommen, dass die Aufgaben leicht zu verstehen sind.

Ein großer Teil der Prüfungsaufgaben, die zwecks Textoptimierung auf Dr. Susanne Wagners Schreibtisch landen, wird für Prüflinge aufbereitet, die Anspruch auf einen Nachteilsausgleich haben. „Dieser Nachteilsausgleich wird individuell für Menschen mit behinderungsbedingten Einschränkungen der Sprache gewährt, wie etwa Personen mit angeborener Hörschädigung oder Menschen im Autismus-Spektrum“, erklärt Wagner. Neben der sprachlichen Vereinfachung können bei diesen Zielgruppen individuell weitere Aspekte hinzukommen. So könne zum Beispiel ein Rahmen um jede Aufgabe dem Prüfling helfen, Anfang und Ende der Aufgabe klar zu erkennen.

Textoptimierte Aufgaben eignen sich für alle Prüflinge

Aus Wagners Sicht spricht jedoch sehr viel dafür, alle Prüfungsaufgaben textoptimiert zu gestalten. „Eine sprachliche Hürde ist methodisch unsauber, weil sie das Prüfungsergebnis  verfälscht“, begründet Wagner. „Wenn ich eine Aufgabe nicht beantworten kann, weil ich die Frage nicht verstehe, wird am Ende auch das Sprachwissen benotet.“ Die Gütekriterien, Objektivität, Validität, Reliabilität seien durch sprachlich suboptimal formulierte Prüfungen schlechter zu erfüllen. 

Eine sprachliche Hürde ist methodisch unsauber, weil sie das Ergebnis verfälscht.

Dr. Susanne Wagner

Hinzu kommen die besonderen Herausforderungen der Gegenwart: „Etwa 30 % der Auszubildenden ist nicht mit Deutsch als erster Muttersprache aufgewachsen“, gibt Wagner zu bedenken. Hinzu käme, dass die Sprachverwendung sich insgesamt extrem verändert habe. Durch die starke Smartphone-Nutzung seien die Menschen zunehmend mehr im Hören und Sehen denn im Lesen und Schreiben geübt. „Die Vertrautheit mit Schriftsprache nimmt immer mehr ab.“

Neu ist das Thema Textoptimierung von Prüfungsaufgaben nicht. „Vor 20 Jahren haben wir Untersuchungen dazu gemacht, wie effizient Textoptimierung ist“, blickt Wagner zurück. „Neben den Auszubildenden mit Hörbehinderung profitierten auch diejenigen, die im Hauptschulbildungsgang waren. Sie haben statistisch signifikant weniger Fehler gemacht, wenn sie textoptimierte Aufgaben erhielten, und alle miteinander waren 20 Prozent schneller.“ 1

Aufgabenerstellungseinrichtungen haben das Thema im Blick

Es gibt also sehr gute Gründe dafür, auf breiter Ebene Prüfungsaufgaben sprachlich möglichst einfach zu formulieren. Als Pionier in dieser Sache nennt Wagner den Zentral-Fachausschuss Berufsbildung Druck und Medien (ZFA). Seit 2014 arbeitet er mit einem Spezialausschuss, der zentral textoptimierte Prüfungen erstellt. Dieser kommt während des Prozesses der Aufgabenerstellung an zwei Tagen hinzu, um mit Blick auf behinderungsbedingte Einschränkungen der Sprache die Prüfungen sprachlich noch einmal barriereärmer zu machen, beschreibt Wagner. Hierdurch und durch Schulungen für Aufgabenerstellende sind diese für das Thema besonders sensibilisiert und gut aufgestellt.

Berufliche Fachbegriffe sind Teil der Ausbildung, die müssen bleiben.

Dr. Susanne Wagner

Eines bleibt für Wagner klar: „Berufliche Fachbegriffe sind Teil der Ausbildung, die müssen bleiben.“ Das Team schaut sich eher Fremdwörter an, die für die berufliche Handlungsfähigkeit nicht relevant sind. Ein Wort wie „adäquat“ käme in Prüfungen oft vor, habe aber mit der Fachbegrifflichkeit nichts zu tun. Natürlich gebe es hier auch Zweifelsfälle, die diskutiert würden.

„Trotz unserer hohen Expertise brauchen wir immer die Rückkopplung zu Fachleuten aus dem Beruf, die sicherstellen, dass die fachsprachlichen Elemente nach der Textoptimierung erhalten geblieben sind.“

Dilemma: Aufforderungsverben und Antworterwartung passen nicht zusammen

Ein weiteres wichtiges Thema in diesem Zusammenhang seien auch die Operatoren, sagt Wagner, also Aufforderungsverben, die in Prüfungen verwendet werden, um die Aufgabe entsprechend der Taxonomie-Stufen zu erstellen. Beispiel: Wird der Prüfling dazu aufgefordert, Wissen wiederzugeben („nennen Sie“) oder soll er sich selbst ein Urteil über etwas bilden („beurteilen Sie“)? Hier sieht Susanne Wagner Aufklärungsbedarf. „Zum einen sehen wir bei vielen Prüfungsaufgaben, dass die Operatoren nicht passgenau verwendet werden. Das heißt, die Antworterwartung passt oft nicht zu den Aufforderungsverben.“ Aus ästhetischen Gründen und um ein bisschen Varianz hinein zu bringen, fingen Aufgabenerstellende dann zum Beispiel mit dem Verb „Nennen“ an und machten dann mit „Beschreiben“ und „Erklären“ weiter, obwohl „Nennen“ die Antworterwartung sei.

Wenn Prüfungsaufgaben durch ihr Institut kurzfristig sprachlich optimiert werden , führt dies zu einem Dilemma: „Die Aufforderungsverben dürfen wir nicht ändern, aber wenn sie nicht zur Antworterwartung passen, sollten sie eigentlich geändert werden“. Im direkten Austausch mit den Fachausschüssen könnten solche Probleme direkt angesprochen werden, sagt Wagner. Bei größeren Erstellungseinrichtungen sei ihr Institut eher mit Schulungen eingebunden, um die Aufgabenerstellenden zu sensibilisieren und ihnen das Handwerkszeug mitzugeben.

KI soll Textoptimierung künftig unterstützen: Prototyp ist entwickelt

In Richtung Handwerkszeug geht auch das Projekt TOP-KI: „Wir versuchen unsere Erfahrung mit Textoptimierung computerisiert mit in den Aufgabenerstellungsprozess zu geben“, fasst Susanne Wagner zusammen. „An der Entwicklung des Tools ist der ZFA direkt beteiligt und auch andere Aufgabenerstellungseinrichtungen wie die AkA und die Prüfungsaufgaben- und Lehrmittelentwicklungsstelle (PAL) sind sehr interessiert.“ So habe die PAL etwa Daten zum Trainieren des Tools beigesteuert. „Wir haben darin jeweils Original- und textoptimierte Aufgaben, so dass die KI an diesen Vorher-Nachher-Beispielen lernen kann.“ Mittlerweile seien mehrere Zehntausend Aufgaben eingespeist. Ein Prototyp ist entwickelt und kann hier ausprobiert werden:

TOP Assist: Textoptimierungs-Assistent für Prüfungsaufgaben

Mehr Informationen zu TOP.KI – Inklusive berufliche Prüfungen ohne Sprachbarrieren durch Textoptimierung mit Hilfe von Künstlicher Intelligenz