Prompt-Kompetenz zeigen statt nur einschätzen

· KI eingeordnet · · KI und Bildung · Einordnung

In diesem Beitrag

Eine Studie mit angehenden Informatiklehrpersonen zeigt Grenzen der Kompetenzmessung. Für Programmierkurse stellt sich die Frage: Was belegen Selbsteinschätzung, Codeprüfung und selbstständiges Können jeweils?

Inhaltliche Quellenbasis: mehrere Herkunftsgruppen. Das allein belegt keine unabhängige Bestätigung jeder Aussage.

Neben einem Laptop überarbeitet eine Person mit dem Stift eine Skizze auf einem Übungsblatt.

Ein Student beschreibt sich als sicher im Umgang mit ChatGPT. Sein abgegebenes Programm funktioniert. Kann er deshalb beurteilen, ob ein KI-Vorschlag fachlich trägt? Für die Ausbildung künftiger Informatiklehrpersonen ist diese Frage entscheidend: Welche Belege braucht es, um Prompt-Kompetenz zu erkennen?

Eine neue Untersuchung gibt darauf keine fertige Prüfungsform vor. Ihr Wert liegt für die Lehrerinnen- und Lehrerbildung vor allem darin, die Aussagekraft verschiedener Daten auseinanderzuhalten.

Was die Studie tatsächlich untersucht

Rakhmetov und sein Team untersuchten 113 angehende Informatiklehrpersonen in einem 16-wöchigen Programmierkurs. Sie kombinierten Fragebogen, Abgaben, Angaben zur ChatGPT-Nutzung, Reflexionen, Code-Ähnlichkeitsprüfungen und Kursnoten. Das Design beschreibt eine einzelne Kohorte; kausale Wirkungen wurden nicht getestet. Beim Abruf am 17. November 2026 war das Abstract bei Frontiers zugänglich, die endgültig formatierte Fassung noch angekündigt. Das Alter der Teilnehmenden wird im Abstract nicht genannt.

Der Fragebogen mit 20 Aussagen zeigte eine hohe interne Konsistenz. Dennoch interpretieren die Forschenden seine Werte ausdrücklich als Selbsteinschätzung: Eine Validierung anhand von Verhalten und eine faktoranalytische Prüfung fehlen. Auch ähnliche Durchschnittsnoten bei praktischen Abgaben und unabhängigen Kontrollaufgaben belegen keine gleichwertigen Lernergebnisse, weil Prüfungsbedingungen und Bewertungskriterien verschieden waren. Wenig Ähnlichkeit zwischen Abgaben wiederum klärt nicht, ob einzelne Studierende KI-Code verändert haben. Diese Einschränkungen stehen bereits im Abstract der Studie.

Damit bleibt offen, wie sicher die Studierenden tatsächlich ohne Unterstützung programmieren konnten. Aus dieser Untersuchung lässt sich ebenso wenig ableiten, dass ein bestimmtes Prompt-Training das Lernen verbessert.

Drei Fragen an dieselbe Leistung

Für die eigene Kursgestaltung lohnt es sich, drei Fragen getrennt zu stellen: Was traut sich jemand zu? Wie begründet jemand eine Entscheidung während der Arbeit? Was gelingt bei einer veränderten Aufgabe ohne KI-Hilfe? Das sind unterschiedliche Ansprüche an einen Nachweis. Eine Selbsteinschätzung kann ein Gespräch eröffnen. Für eine fachliche Beurteilung braucht es zusätzliche Beobachtungen.

Die folgende Übersicht fasst diese redaktionelle Einordnung zusammen. Sie ist kein in der Studie validiertes Kompetenzmodell.

Drei unterschiedliche Beurteilungsfragen: Selbsteinschätzung fragt nach dem eigenen Zutrauen, fachliches Prüfen nach der Begründung am Code und selbstständiges Können nach einer neuen Aufgabe ohne KI-Hilfe. Redaktionelle Übersicht, kein validiertes Kompetenzmodell.
Redaktionelle Übersicht. Quellen und Grenzen sind im Artikel erläutert.

Daraus lässt sich ein überschaubarer Vorschlag für die Lehrerinnen- und Lehrerbildung entwickeln: An einer ausgewählten Programmieraufgabe werden eine relevante Prompt-Überarbeitung, die begründete Prüfung des erhaltenen Codes und eine kurze selbstständige Anschlussleistung sichtbar gemacht. Ein vollständiges Chatprotokoll wäre dafür aus meiner Sicht nicht nötig. Entscheidend wäre, ob sich an einer konkreten Stelle nachvollziehen lässt, weshalb eine Lösung akzeptiert, korrigiert oder verworfen wurde.

Ein Testfall sagt mehr als «kritisch geprüft»

Ein gedachtes Beispiel: ChatGPT liefert eine Funktion, die den Durchschnitt einer Zahlenliste berechnen soll. Die Studentin testet gewöhnliche Eingaben. Danach prüft sie eine leere Liste und erklärt, welche Behandlung dieses Falls zur Aufgabenstellung passt. Für die Beurteilung wäre interessant, warum sie gerade diesen Test gewählt hat und welche Änderung daraus folgt. Der Satz «Ich habe den Code kritisch geprüft» würde diese Begründung noch nicht ersetzen.

Eine kurze Anschlussaufgabe könnte dieselbe Idee mit einer veränderten Bedingung aufgreifen, ohne ChatGPT zu verwenden. So wäre zumindest eine konkrete selbstständige Leistung beobachtbar. Auch sie wäre noch kein Nachweis für langfristiges Behalten oder umfassende Programmierkompetenz. Anspruch, erlaubte Hilfsmittel und Bewertung müssten vorab klar sein. Der Vorschlag dient einer präziseren Beurteilung; seine Lernwirksamkeit wurde in der besprochenen Studie nicht untersucht.

Eine systematische Literaturübersicht über 40 empirische Studien liefert dazu den breiteren Kontext. Nathaniel und ihr Team betonen gezielte Lehrstrategien, passende Prüfungsformen und eine strukturierte Einbettung generativer KI in die Programmierbildung. Sie benennen auch das Risiko einer übermässigen Abhängigkeit. Der Review untersucht unterschiedliche Kontexte und bestätigt damit keine Einzelergebnisse der neuen Kohorte.

Die Begründung gehört zur Abgabe

Die bestehende Infografik «KI genutzt. Aber wofür?» stellt den Zweck der KI-Nutzung in den Mittelpunkt. Für einen Programmierkurs führt die Frage weiter: Welche fachliche Entscheidung hat die angehende Lehrperson selbst getroffen? Der Beitrag «Braucht Lernen mit KI noch einen Master-Prompt?» unterscheidet bereits zwischen Unterstützung beim Bearbeiten und Können danach. Hier wird diese Unterscheidung zur konkreten Beurteilungsfrage in der Informatikausbildung.

Die Konsequenz für Lehrende wäre, fachliche Begründungen gezielt einzufordern und ihren Aussagebereich klar zu benennen. Eine gute Erklärung eines Testfalls zeigt etwas anderes als ein gelungenes Programm; eine selbstständig gelöste Anschlussaufgabe wieder etwas anderes. Prompt-Kompetenz sollte dort sichtbar werden, wo jemand die Verantwortung für die Prüfung einer KI-Antwort übernimmt und sein Urteil am Code erklären kann.