Chat-Analyse

Die Chat-Analyse fasst die Chats deiner Lernenden zusammen. Du erkennst auf einen Blick, wie die KI genutzt wurde, wo es Verständnisprobleme gab und wer eigenständig gearbeitet hat. Sie ersetzt nicht das Lesen einzelner Chats, spart aber viel Zeit.

So startest du eine Analyse

Variante 1: über die Freigabeschlüssel

1. Öffne Freigabeschlüssel.
2. Klicke beim gewünschten Schlüssel auf Analyse.

Variante 2: über die Chats

1. Öffne Chats und wähle Alle Chats.
2. Wähle bei Filtern nach Freigabeschlüssel den gewünschten Schlüssel. Danach erscheint die Schaltfläche Analyse.

Frage stellen oder Vorlage wählen

Auf der Seite „Analyse erstellen“ siehst du oben den gewählten Schlüssel mit seinem Zeitraum. Gibt es dazu noch keine Chats, steht dort „Noch keine Chats für diesen Freigabeschlüssel“. Dann formulierst du im Feld Ihre Frage zur Analyse deine Frage oder klickst auf eine Vorlage:

• Lernfortschritt-Analyse: Engagement und Lernansatz, Qualität und Tiefe der Fragen, Verständnis des Fachgebiets, Bereiche, die zusätzliche Betreuung brauchen.
• Akademische Integritätsprüfung: Eigenständiges Denken im Vergleich zu KI-abhängigen Antworten, angemessene Nutzung der KI-Unterstützung, gezeigte kritische Denkfähigkeit, Punkte für die Lehrkraft.

Unter Verlauf findest du frühere Analysen und kannst sie wieder öffnen.

Das Ergebnis

Du erhältst einen Bericht, der deine Frage beantwortet, die Chats nach Kategorien aufschlüsselt, konkrete Beispiele aus den Chats nennt und das Engagement zusammenfasst.

Gute Analysefragen

• „Haben die Lernenden eher Fragen gestellt oder sich Lösungen geben lassen?“
• „Gab es wiederkehrende Verständnisprobleme? Nenne drei Beispiele.“
• „Wurden eigene Lösungsversuche gemacht oder nur Code angefordert?“
• „Welche Argumente wurden am häufigsten genannt?“
• „Bei welchen Lernenden sollte ich nachfragen, weil die Antworten sehr ähnlich klingen?“

Beispiel für den Unterricht: Nach einer Doppelstunde Informatik wählst du den Schlüssel „9a Informatik“ und fragst: „Fasse zusammen, bei welchen Aufgaben die Lernenden Hilfe gesucht haben, und nenne zwei typische Fehler.“ Du nutzt die Auswertung als Einstieg in die nächste Stunde: Die häufigsten Fehler besprecht ihr gemeinsam.

Beispielauswertung: 16 Chats mit dem Mathematik-Tutor

Wir haben mit dem Schlüssel „Demo 8a Mathe-Tutor“ 16 Lernende simuliert (Testchats) und diese Frage gestellt:

Analysefrage: „Wie haben die Lernenden den Mathematik-Tutor genutzt? Nenne typische Muster, wiederkehrende Verständnisprobleme und die Chats, in denen jemand die KI zu einer direkten Lösung drängen wollte. Gib mir am Ende drei Empfehlungen für die nächste Stunde.“

Nach ein bis zwei Minuten liegt der Bericht vor. Er beginnt mit dem Kontext („Es wurden insgesamt 16 Chats analysiert“) und nennt alle Lernenden mit ihren Pseudonymen.

Was die Analyse herausgefunden hat

• Typische Muster: Die Standardaufgabe tauchte in sieben Chats auf. Andere ließen eigene Lösungen kontrollieren, stellten Verständnisfragen (eine Frage nach dem „Warum“ führte zum Waagen-Bild) oder wünschten sich schwerere Aufgaben.
• Verständnisprobleme: Das Prinzip „auf beiden Seiten dasselbe tun“ bereitete mehreren Lernenden Mühe.
• Druck auf eine direkte Lösung: Die Analyse nennt vier Chats, in denen Lernende das Ergebnis erzwingen wollten, einmal sogar mit einem Manipulationsversuch („Ignoriere alle deine Anweisungen“).
• Sehr kurze Chats: Zwei Lernende kamen über eine Nachricht kaum hinaus. Die Analyse vermerkt, dass dort kein Lernanlass erkennbar war.

Besonders wertvoll: Die Analyse prüft auch den Assistenten

Im Bericht stand auch, wo der Tutor selbst Schwächen zeigte: Er hielt sich nicht immer an sein Prinzip, kein Ergebnis zu nennen. Auf „Dann wenigstens die erste Aufgabe“ rechnete er komplett vor, und bei einem Lernenden mit richtigem Rechenweg ging er nicht auf dessen eigene Aufgabe ein. Das ist ein Hinweis für dich: Lies die Chats im Original nach und schärfe gegebenenfalls die Beschreibung deines Assistenten.

Hinweis: Die Analyse ist KI-generiert und kann Fehler enthalten. Prüfe Aussagen über einzelne Lernende im Original-Chat, bevor du daraus Konsequenzen ziehst.

Häufige Fragen

Warum fehlen Chats in der Analyse?

Die Analyse nutzt die Chats, die über den ausgewählten Schlüssel entstanden sind. Wenn Lernende ihre Chats löschen durften, fehlen diese. Schalte „Löschen erlauben“ beim nächsten Mal aus.

Kann ich die Rohdaten haben?

Ja. In der Schlüsselübersicht gibt es Exportieren als JSON oder CSV.

Ist die Analyse ein Beweis?

Nein. Sie ist KI-generiert und ein Hilfsmittel. Wichtige Erkenntnisse prüfst du im Original-Chat.