Konzepte
Human-in-the-Loop-KI
Dies ist eine automatische Übersetzung der englischen Seite; sie wurde noch nicht von einer muttersprachlichen Person geprüft.
Human-in-the-loop-KI – das Designmuster, in dem pädagogische KI-Systeme strategisch automatisierte Generierung mit menschlichem Fachurteil verschränken und dabei pädagogische Qualität und Sicherheit bewahren, während sie die Produktion skalieren. Statt Assessment, Feedback oder Instruktion vollständig zu automatisieren, hält HITL einen Menschen (Lehrkraft, Fachexpertin bzw. Fachexperten oder Lernenden) in der Entscheidungsschleife, wo sein Urteil den höchsten Grenznutzen hat – bei der Bewertung von Qualität, der Schlichtung von Grenzfällen und dem Schutz von Lernendenhandlungsfähigkeit und Sicherheit. Die zentrale Designfrage ist nicht ob Menschen einbezogen werden, sondern wo in der Pipeline ihre Aufsicht am wertvollsten und am wenigsten ersetzbar ist.
Fragen zum Nachdenken
- Die zentrale HITL-Designfrage ist nicht, ob Menschen einbezogen werden, sondern wo in der Pipeline ihr Urteil am wertvollsten ist. An welchem Punkt eines KI-Assessment- oder Feedbacksystems würden Sie darauf bestehen, dass ein Mensch in der Schleife bleibt?
- Studien zu KI-Aufgengenerierung fanden, dass Computer Klarheit und Validität gut handhaben, aber Menschen noch für sinnvolle Distraktoren und gutes Feedback nötig sind. Warum könnten einige Teile pädagogischen Urteils sich der Automatisierung widersetzen?
- Eine Evaluation fand, dass drei LLMs inkonsistente, unsensible Empfehlungen zur Studierendenunterstützung gaben – mit dem Schluss, menschliches Urteil sei noch nötig, bevor KI Ratschläge zu Studierenden gibt. Wenn eine KI „empfiehlt“, einer schwachen Studierenden bzw. einem schwachen Studierenden zu helfen: Was kann schiefgehen, wenn kein Mensch das prüft?
- Die Seite legt nahe, Menschen und Algorithmen fingen unterschiedliche Arten von Problemen – automatisieren Sie, was präzise verifizierbar ist, bewahren Sie Urteil, wo Nuance unersetzbar ist. Wo liegt in Ihrer eigenen Praxis die Grenze zwischen beidem?
- Einen Menschen in der Schleife zu halten wird als Schutz der Handlungsfähigkeit und Sicherheit der Lernenden gerahmt, nicht nur der Qualität. Wie könnte volle Automatisierung subtil verändern, wer sich bei den Studierenden für ihr Lernen verantwortlich fühlt?
- Wenn KI autonomer wird, wird HITL-Aufsicht als zentrale Sicherheitsleitplanke beschrieben. Ab welchem Niveau der KI-Autonomie würden Sie sich unwohl fühlen –, und was sagt dieses Unwohlsein darüber, wo Aufsicht hingehört?
Einführung
HITL ist eine Antwort auf die Grenzen und Risiken vollständig autonomer KI in der Bildung: Automatisierte Systeme können im großen Maßstab generieren, ermangeln aber des kontextuellen, ethischen und pädagogischen Urteils, das Lehrende und Fachleute mitbringen. Zwei aktuelle Implementierungen illustrieren klar unterscheidbare Architekturen:
Vorschreibende Unterstützung ist eine Domäne, in der menschliche Aufsicht zunehmend als nicht optional argumentiert wird. López-Pernas et al. (2026) testeten, ob drei LLMs Pläne zur Studierendenunterstützung aus Learning-Analytics-Indikatoren empfehlen können, und fanden begrenzte Sensibilität für Bedarf und scharfe modellübergreifende Inkonsistenz –, mit dem Schluss, dass Human-in-the-Loop-Urteil noch nötig sei, bevor vorschreibende Beratung sicher und ethisch eingesetzt werden könne.
Eine dritte Architektur platziert menschliches Urteil vorgelagert des Modells statt an seinem Output. In der Studie zu Lee, Atif & Kang (2026) zur Klassifikation von Lernendenfragen steuerten drei doktoratsnahe Expertinnen und Experten die gesamte Pipeline: Sie verfeinerten die operationalen Definitionen für jede Konstruktivismus-Rolle, markierten unabhängig, bis Fleiss' Kappa von 0,60 auf 0,83 stieg, nachdem Diskrepanzen aufgelöst waren, und validierten die rückübersetzten und paraphrasierten Items, die genutzt wurden, um das Trainingsset zu balancieren.
CODE-GEN: Human-in-the-Loop-MCQ-Generierung
Duan et al. (2026) bauten ein RAG (retrieval-augmented generation / abrufgesteuerte Generierung)-basiertes agentisches System mit zwei Agenten:
- Generator-Agent – erzeugt Multiple-Choice-Coding-Fragen, ausgerichtet an den Lernzielen des Kurses
- Validator-Agent – bewertet Qualität über sieben pädagogische Dimensionen
Evaluation: 6 SMEs beurteilten 288 KI-generierte Fragen. Menschen-validierte Erfolgsraten: 79.9%–98.6% über Dimensionen hinweg.
KI-starke Dimensionen (niedrige menschliche Last):
- Fragenklarheit, Code-Gültigkeit, Konzeptausrichtung, Gültigkeit der richtigen Antwort
Menschenerforderliche Dimensionen (hohe menschliche Last):
- Pädagogisch sinnvolles Distraktordesign
- Hochwertiges erklärendes Feedback
Strategische Einsicht: Menschliche Anstrengung sollte konzentriert werden, wo Instruktionsurteil unersetzbar ist; rechnerische Verifikation kann vollständig automatisiert werden.
MAIC: Human-in-the-Loop-Skript-Generierung
Yu et al. (2024) setzten ein Multi-Agent-Klassenzimmer (Teacher-Agent, TA-Agent, Kommilitoninnen- und Kommilitonen-Archetypen) an der Tsinghua-Universität mit >500 Studierenden und >100.000 Lernaufzeichnungen ein. Menschliche Lehrende wirken an Skriptgenerierung und Aufsicht mit und stellen sicher, dass KI-Verstärkung im großen Maßstab pädagogische Expertise nicht verdrängt.
PedaCo: Doppelte Kontrolle für KI-Videogenerierung
Kim, Baek und Kwak (2026) erweitern HITL auf KI-generiertes Unterrichtsvideo über PedaCo (Pedagogical Co-creation), eine Pipeline mit zwei komplementären Kontrollschichten, die prinzipiellen Widerstand instanziieren, verankert in Mayers Kognitiver Theorie multimedialen Lernens (CTML). Die erste Schicht platziert den Menschen im Skriptstadium: Ein LLM entwirft ein Skript, ein KI-Reviewer markiert potenzielle CTML-Verstöße (z. B. „Szene 3 führt technische Begriffe ohne vorherige Erklärung ein“), und die bzw. der Pädagogin bzw. Pädagoge entscheidet, anzunehmen, zu überarbeiten oder neu zu generieren. Die zweite Schicht führt automatisierte Metriken nach der Synthese über Kohärenz, Redundanz, zeitliche Kontiguität, Modalität und Bildqualität aus, die die bzw. der Pädagogin bzw. Pädagoge prüft. In einer Within-Subject-Studie (23 Pädagoginnen und Pädagogen) verbesserte der reviewbasierte Ansatz jedes CTML-Prinzip (mittlere Bewertung 3,07→3,86, p<0,01), wobei Pädagoginnen und Pädagogen die Produktionseffizienz mit 4,26/5 bewerteten – Reibung als produktiv wahrgenommen, nicht als belastend. Das Designprinzip wiederholt die HITL-Synthese der Wissensbasis: Menschen und Algorithmen fangen unterschiedliche Arten von Problemen, daher automatisieren die wirksamsten Systeme dort, wo rechnerische Verifikation präzise ist (zeitliche Synchronisation), und bewahren menschliches Urteil, wo pädagogische Nuance unersetzbar ist (Ton, Publikumsfit).
Platzierung kann mehr zählen als Präsenz: Praktikerinnen und Praktiker bewerteten ein Autorenwerkzeug für Social Storys als hoch nutzbar (SUS 86,8), berichteten aber, das Review komme zu spät, weil kulturelle und klinische Einschränkungen, die vor der Generierung gesetzt werden – ein Abaya statt westlicher Straßenkleidung –, schwerer durch nachträgliches Bearbeiten der Ausgabe zu korrigieren sind (Enkhjargal et al. (2026)).
Warum HITL im KI-Zeitalter zählt
Human-in-the-Loop-Design ist aus mehreren konvergierenden Gründen für die Diskussionen der Wissensbasis zu agentischer KI und verantwortungsvoller KI-Nutzung zentral geworden:
-
Pädagogische Sicherheit. Pädagogische Sicherheit erfordert, dass KI mit echter Instruktionsautorität menschliche Aufsicht behält, damit Fehler, Biases oder schädliche Ausgaben gefangen werden, bevor sie Lernende erreichen. Das ist besonders wichtig für autonome Agenten, die proaktiv Ziele verfolgen.
-
Aufsicht ist selten in der Praxis, nicht nur in der Theorie. Wang et al. (2026) fanden, dass robuste eingebettete Governance und Human-in-the-Loop-Aufsicht über 474 pädagogische agentische KI-Systeme hinweg selten ausgeprägt waren, selbst als Einzelaufgaben-Autonomie und Multi-Agent-Kollaboration wuchsen – die Lücke zwischen dem Designprinzip und der eingesetzten Praxis.
-
Die kritische Frage ist, wie die Schleife handlungsleitend gemacht wird, nicht wie sehr Menschen teilnehmen. Eine lernwissenschaftliche Sicht argumentiert, dass die Organisation von Lernen um Datenerfassung, rechnerische Interpretation und wahrscheinliche Antwort herum pädagogisches Handeln davon abhängig macht, was Systeme erkennen und worauf sie reagieren können, und dass Alerts und Engagement-Klassifikationen die lernende Person deuten, bevor eine Lehrkraft oder eine studierende Person handelt (Pande (2026)).
-
Validität und Qualitätskontrolle. HITL ist ein Qualitätstor für automatisiertes Assessment und Generierung – Menschen schlichten dort, wo automatisierte Bewertung unverlässlich ist (siehe LLM-Essaybenotung-Forschung), und validieren generierte Items. Ein PRISMA-geleiteter systematischer Review von 42 Studien zu Benotung und Feedback (2023–2025) kommt ausdrücklich zum selben Schluss: LLMs erreichen die Übereinstimmung mit menschlichen Beurteilenden bei kurzen, wohlstrukturierten Aufgaben, können aber menschliches Urteil bei komplexer, offener oder subjektiver Arbeit nicht vollständig ersetzen, und die höchste Effektivität der Benotung wird in hybriden Systemen erreicht, die KI-getriebene Benotung mit Aufsicht und Verifikation durch Lehrende kombinieren (Can ChatGPT Replace the Teacher in Assessment? A Review of Research on the Use of Large Language Models in Grading and Providing Feedback). Falahat et al. (2026) zeigen konkret, wo jene Grenze fällt: ChatGPT-5 passte bei objektiven Items der Pharmazieprüfung zur Fakultät (CCC 0,935–1,000), war aber bei Kurzantwort- und Essay-Items unverlässlich, selbst wenn eine Rubrik geliefert wurde, was die Autoren zu der Empfehlung führt, bei komplexem, subjektivem oder folgenreichem Assessment hybrid zu benoten mit menschlicher Prüfung. Wiederholung ist kein Ersatz für jene Aufsicht: Bei Neubenotung identischer Einsendungen an fünf verschiedenen Tagen reproduzierte dasselbe Modell seine eigenen Ergebnisse nur bei Krippendorffs Alpha 0,625, mit Variation, die in den mittleren Noten konzentriert war, während A und F in den Fünf-Sitzungs-Zählungen fehlten (Brevik et al. (2026)).
-
Handlungsfähigkeit der Lernenden. Einen Menschen in der Schleife zu halten bewahrt Handlungsfähigkeit der Lernenden und stützt Selbstreguliertes Lernen, und wirkt der übermäßigen Abhängigkeit entgegen, die vollständig autonome Assistenz induzieren kann.
-
Studierende setzen selbst den Menschen an das folgenreiche Ende. Unter 93 Undergraduates bevorzugten 81,7% menschliche Benotung für eine Abschlussarbeit, die 40% der Note zählte, wollten 75 von 93, dass KI unterstützt statt Bewerter ersetzt, und 69 wollten KI-Benotung immer menschlich geprüft (Yildirim-Erbasli et al. (2026)).
-
Vertrauen und Kalibrierung. Transparente menschliche Aufsicht stützt Vertrauenskalibrierung – Lernende und Lehrende wissen, dass ein qualifizierter Mensch hinter dem System steht.
-
Vor dem Review sichtbare Kriterien heben die Übereinstimmung. Coscia et al. (2026) fanden, dass das Sichtbarmachen von Vertrauenswürdigkeitsmetriken für Prüfende, während sie LLM-Antworten verglichen, die Inter-Rater-Übereinstimmung von Krippendorffs Alpha 0,3987 auf 0,4931 hob, während das Hinzufügen weiterer Maße kognitive Überlast ohne Ertrag ergab.
-
Begrenzte Handlungsfähigkeit als Architektur, nicht als Disclaimer. Ilieva et al. (2026) bauen in ihrem AGAI-HE-Rahmenwerk für agentische Lernunterstützung Aufsicht in das Modell selbst ein, als dritte Schicht neben den Schichten des pädagogischen Arbeitsablaufs und der agentischen Unterstützung: Sie definiert akzeptable KI-Nutzung, pädagogische Grenzen, Datenschutz-Regeln, Offenlegungsanforderungen, Quellenverifikation, Lehrenden-Checkpoints, Integritätmechanismen und letztmenschliche Verantwortung, und verlangt, dass jede agentische Funktion auf eine Lernanforderung, einen Assessmentzweck oder eine Governance-Kontrolle zurückführbar ist. Es ist eine konkrete Instanziierung des Prinzips, dass HITL eine System-Design-Eigenschaft ist statt eine Richtlinienaussage –, und die 130-Studierende-Wahrnehmungsstudie der Autoren ist eine Erinnerung, dass das Hinzufügen agentischer Orchestrierung unter jener Aufsicht sich für sich genommen nicht als bessere Lernunterstützung registrierte als ein Chatbot.
-
Wie oft der Mensch schaut, ist selbst eine Designentscheidung. Venetsanos (2026) trennt die Frequenz der Aufsicht von ihrer Platzierung: Hochfrequentes HITL, das jede KI-Ausgabe prüft, bevor sie Studierende erreicht, kauft Qualitätskontrolle, schnelle Fehlererkennung, Verantwortlichkeit und laufende Kalibrierung, kann aber die Effizienz zunichtemachen, die die Automatisierung motivierte, und Spitzenbenotungszeiten zum Engpass machen; niederfrequentes HITL, das Stichproben prüft und nur markierte Fälle reviewt, skaliert und verkürzt die Bearbeitungszeit, riskiert aber, dass sich Fehler über Einsendungen hinweg unentdeckt ausbreiten, schwächt die Verantwortlichkeit und erzeugt ein Gerechtigkeitsproblem, wenn einige Studierende gründlichere menschliche Prüfung erhalten als andere. Statt eine universelle Antwort vorzuschreiben, verlangt das Rahmenwerk, den Trade-off explizit gegen disziplinäre Fehlertoleranzen zu treffen, dagegen, ob das Assessment formativ oder summativ ist, gegen Kohortengröße und institutionelle Ressourcen –, und setzt eine Voreinstellung in die entgegengesetzte Richtung des üblichen Effizienzarguments: Beginnen Sie mit hochfrequenter Aufsicht und skalieren Sie sie nur zurück, wenn substanzielle Evidenz akzeptable Verlässlichkeit, Sicherheit und Fairness demonstriert, sodass die Beweislast darauf ruht, zu zeigen, dass weniger Aufsicht sicher ist. Das Papier warnt auch, dass die Prinzipien hinter solcher Aufsicht den Personalaufwand eher verlagern als senken können, was Nettoeffizienzgewinne zu einer offenen empirischen Frage lässt.
-
Eingesetzte menschliche Aufsicht kann Annahme-Routing statt Qualitätsurteil bedeuten: In einem hybriden Anfragesystem kodierte das Annahmefeld nur, ob die bzw. der Bearbeitende von der bzw. dem Fragenden verschieden war, und kein Maß bewertete die Antwortqualität Gupta et al. (2026).
Wo HITL in der Forschung der Wissensbasis auftritt
-
Automatisiertes Assessment und Benotung: HITL-Systeme kombinieren KI-Generierung/-Bewertung mit menschlicher Validierung über Kurzantwort-Benotung (Confidence Estimation in Automatic Short Answer Grading with LLMs), Selbsterklärungs-Assessment (Exploring the Effectiveness of Using LLMs for Automated Assessment of Student Self Explanations in Programming Education) und Essaybewertung (PsyScore: A Psychometrically-Aware Framework for Trait-Adaptive Essay Scoring and ZPD-Scaffolded Feedback). Cvengros & Kortemeyer instanziieren dies bei folgenreicher Benotung handschriftlicher allgemeiner Chemie: Weil die Verlässlichkeit eines Multimodale KI-LLMs nach Antwortformat variiert (textuelle und chemische Reaktionsantworten sind verlässlich, während Zeichnen und Diagrammerstellung schlechter als zufällig abschneiden) und falsche Positive von Studierenden unentdeckt bleiben, konvertieren sie rohe KI-Scores in eine selektive Annehmen/Rückverweis-Politik unter Nutzung von Konfidenzfiltern – Teilpunktschwellen, eine IRT-basierte Risikoschwelle und Ausschluss nach Aufgabentyp –, wobei sie unsichere und grafische Items an Menschen zurückverweisen, ein Ansatz, den die Autoren an regulatorische Rahmenwerke binden, die KI im Bildungsassessment als hochriskant bezeichnen und dokumentierte menschliche Aufsicht verlangen.
-
Feedbacksysteme: Sie verlangen dokumentierte menschliche Aufsicht.
-
Operatives HITL-Scoring in einem nationalen Assessment (2026): Curi et al. (2026) instanziieren HITL auf institutionellem Maßstab in der Acredita-EB-Prüfung Uruguays. Weil die Fehler des LLM-Bewerters systematisch konservativ sind (Unterbenotung), nutzt der Arbeitsablauf eine Entscheidungspunkt-Logik, die menschliche Prüfung genau zu den Kandidatinnen und Kandidaten leitet, deren Bestanden-/Durchgefallen-Ergebnis vom Writing-Abschnitt abhängt – KI-benotete Bestanden-Antworten werden mit Vertrauen angenommen, während KI-benotete Durchgefallen-Antworten (15,3–16,5% der Fälle) von Experten-Beurteilenden verifiziert werden, was den Aufwand für vollständige Benotung um ≥50% senkt bei einem Restrisiko eines Bestehens durch KI-Fehler von nur 0,2–0,6%. Das ist HITL als Ressourcenzuteilungsstrategie: Menschen schlichten genau dort, wo der konservative Bias der KI ansonsten folgenreiche Ergebnisse verändern würde.
-
Die Rückverweisschwelle aus der eigenen Auflösung der Rubrik ableiten (2026). Cruz et al. (2026) setzten die Toleranz zwischen KI und Lehrendem auf 0,5 Punkte – die größte Diskrepanz, die eine Einsendung nicht über ein Ankerband bewegen kann – und eskalierten Ausreißer bei 0,8 Punkten, wobei sie 11 von 362 Einsendungen (3,0%) zur menschlichen Prüfung schickten, bevor das Feedback freigegeben wurde.
-
Übereinstimmung zwischen Annotierenden ist keine menschliche Ground Truth. Bernado et al. (2026) schieben Modellannotation in die Auditschicht, ohne sie jemals gegen menschliche Gold-Labels zu validieren, wodurch modellübergreifende Übereinstimmung (Median 0,401) ein Stellvertreter für Behauptungsqualität bleibt, den geteilte Modellfehler überleben können. Ihr Design hält die Aufsicht diagnostisch statt dekorativ: Weil die Zwischenurteile explizit sind, kann eine Prüfende sehen, welche Verhaltensweisen ausgelöst wurden, und ein fehlgelesenes Verhalten von einer Regel trennen, die das Konstrukt schlecht kodiert.
-
Feedbacksysteme: Human-in-the-Loop-Feedbackdesign erscheint in kollaborativen Feedbacksystemen und konfidenzbewusster Kurzantwort-Benotung.
-
Unterstützung von Klassenzimmerzusammenarbeit. CoBi behält die Lehrkraft als prüfenden Menschen in einem KI-System, das erhebenden Diskurs in Kleingruppen erkennt: Lehrende bevorzugten explizit Review vor/nach Aktionen statt Live-Echtzeitanzeige, die sie „auf der Stelle“ gestellt hätte, und das auf Klassenebene (statt individuelle Ebene) aggregierte Feedback des Systems ist genau das, was es ihm ermöglicht, die Spannung zwischen Datenschutz, Überwachung und StudierendenHandlungsfähigkeit der Lernenden zu navigieren.
-
Fragen- und Inhaltsgenerierung: Jenseits von CODE-GEN leitet HITL Aufgengenerierung für Assessment und Scaffolding (Gerüstbildung) (CODE-GEN: A Human-in-the-Loop RAG-Based Agentic AI System for Multiple-Choice Question Generation, From Evaluated Models to Evaluation Aids: A Multi-Evidence Study of LLM-Based Difficulty Calibration for Programming Examinations).
-
Agentische und Multi-Agent-Systeme: Wenn KI autonomer wird, ist HITL-Aufsicht eine zentrale Designleitplanke (Agentic AI and Pedagogical Best Practice: The Tension Between Automation and Learning, Beyond Access: Guided LLM Scaffolding for Independent Learning in Undergraduate Statistics).
-
Routing nach Entscheidungskonsequenz, nicht nach Modellunsicherheit (2026). Eine operative Studie aus dem Jahr 2026 zum nationalen Acredita-EB-Akkreditierungstest Uruguays (zwei Ausgaben, jeweils etwa 5.000-6.000 Kandidatinnen und Kandidaten) zeigt, wie Human-in-the-Loop-Design aussieht, wenn es von Entscheidungskonsequenzen statt von Modellunsicherheit getrieben ist. Ein GPT-5-Bewerter stimmte bei 60-80% der 15 Rubrikitems mit Experten-Beurteilenden überein, war aber systematisch konservativ und erzeugte Diskrepanzen zwischen Mensch-Bestanden/KI-Durchgefallen in 15,3% (2024) und 16,5% (2025) der Bestanden-/Durchgefallen-Vergleiche und fast nie das Gegenteil. Das Rahmenwerk nimmt daher KI-bestehende Ergebnisse unverändert an und leitet jedes KI-durchgefallene Ergebnis, das das Ergebnis einer Kandidatin bzw. eines Kandidaten ändern könnte, zur Expertenprüfung –, nachdem es zunächst Kandidatinnen und Kandidaten überspringt, deren Bestehen/Durchfallen nicht vom Writing-Abschnitt abhängen kann –, wodurch die einer vollständigen menschlichen Benotung bedürfenden Antworten um mindestens 50% sinken. Ein zweites Design aus dem Jahr 2026 zieht die Grenze von der anderen Seite: In einer Multi-Agent-KI-Plattform für standardisierte Patienten (Yang et al.) ist menschliche Aufsicht dem vorbehalten, was KI als unfähig zu entscheiden beurteilt wird, wobei Fakultät und menschliche standardisierte Patienten kontextuelle Interpretation, Nachhilfe und Bereitschaftsurteile liefern, und es dem System explizit nicht erlaubt ist, klinische Kompetenz autonom zu bestimmen.
Synthese
Human-in-the-Loop-Design ist nicht bloß eine Sicherheitsmaßnahme – er ist eine Ressourcenzuteilungsstrategie. Die Grenzfrage ist nicht ob Menschen einbezogen werden, sondern wo in der Pipeline ihr Urteil den höchsten Grenznutzen hat. Die wirksamsten HITL-Systeme konzentrieren knappe menschliche Expertise dort, wo automatisierte Systeme am schwächsten sind (Distraktordesign, erklärendes Feedback, Schlichtung von Grenzfällen, ethisches Urteil) und automatisieren den Rest – und bewahren dabei Qualität, Sicherheit und Vertrauen, während sie die Produktion skalieren.
- Menschliche Aufsicht besteht fort in KI-assistierter Arbeit. Forschung zu systematischen Reviews fand, dass KI-Automatisierungswerkzeuge prozedurale Lasten senkten (z. B. Screening), interpretative Entscheidungen aber weiterhin substanzieller menschlicher Aufsicht bedurften; Andragogie-Forschung macht Human-in-the-loop (geteilte mentale Modelle, Ko-Kreation) zu einem zentralen KI-Designprinzip.
- Human-in-the-loop auf institutionellem Maßstab. Qin (2026) beschreibt, wie die Lingnan-Universität ein Human-in-the-Loop-Bildungsmodell entwickelte, das ethisches Nachdenken, kritisches Urteil und soziale Verantwortung in den Vordergrund stellt und gleichzeitig den Zugang zu GenAI demokratisiert. Das Modell positioniert Menschen als den Ort von Urteil und Werten, selbst wenn KI über das Curriculum hinweg eingebettet wird – eine konkrete institutionelle Instanziierung von Human-in-the-Loop-Prinzipien in der Hochschulbildung.
- Lernende als Human-in-the-Loop ihres eigenen Tutorings. Value Sensitive Design mit Community-College-Studierenden produzierte eine vollständige Familie Lernenden zugewandter HITL-Merkmale für ein ITS (Kontrolle über Neubewertung und Review, personalisierte Ziele/Tempo, Lesezeichen für Review, Bestätigen von Vertrauen über Meisterschaft und eine Steuerung des Beteiligungsniveaus der KI-Assistenz), was die bzw. den Studierende als aktive Steuernden der Tutoringschleife positioniert statt als passive Konsumierende adaptiver Entscheidungen. Die Studie fand auch Lehrende gespalten darüber, ob solche Lernendenkontrolle die Integrität des systemgesteuerten Lernpfads untergraben könnte – ein Beispiel für die breitere Ressourcenzuteilungsfrage, wo menschliches Urteil (Lernende gegenüber Lehrende) am meisten Wert hinzufügt.
- Eskalation von KI zu Experte ist ein Human-in-the-Loop-Zug. Das SCAN-Rahmenwerk weist Aufgaben vier generative-KI-Modi nach Lernendendistanz zu und liest passives Engagement innerhalb einer korrekt zugewiesenen KI-Aufgabe als Fehlqualifizierungssignal, die bzw. den Lernende von KI zu Expertenhilfe zu verschieben, mit einem Menschen als epistemischem Prüfer (Tsim et al. (2026)).
- Aufsicht über Ratschläge zur KI-Übernahme. Weil konversationelle KI-Systeme, die von skeptischen Nutzenden konsultiert werden, dafür prädisponiert sein können, die Übernahme zu befördern, sind menschliche Aufsicht und unabhängige Evaluation unverzichtbar. Ein Audit, das zeigt, dass die meisten Grenzmodellmodelle skeptisches K-12 (Primar- und Sekundarstufe)-Personal zu Engagement umlenken, unterstreicht das Erfordernis transparenter, prüfbarer KI-Ratschläge statt unkritischen Vertrauens.
Verbundene Konzepte
- Pädagogische Muster — Wo menschliches Review in erprobten Sequenzen sitzt, und was nie isoliert getestet wurde
- Leitplanken
- Formatives Assessment
- Automatisiertes Assessment
- Scaffolding (Gerüstbildung)
- Lehre
- KI-Kompetenz
- Intelligentes Tutoring
- Rückmeldung
- Erleben der Studierenden
- Selbstreguliertes Lernen
- Metakognition
- Lehr- und Curriculumsentwicklung
- Generative KI
- Handlungsfähigkeit der Lernenden
- Pädagogische Sicherheit
- Vertrauenskalibrierung
- Agentische KI
- Kognitive Auslagerung
- Kognitive Kapitulation
- Unterstützung und Erfolg von Studierenden — menschliches Urteil in einem automatisierten Unterstützungsfluss
Verbundene Artikel
-
Analysing AI utilisation in education through learner question types: A constructivist approach — Expert-labeled question classification: humans govern labeling, augmentation, and error analysis (Lee, Atif & Kang 2026)
-
Agentic Generative AI in Higher Education: Perceived Benefits, Risks, and Implications for Learning — Human supervision and governance as the third layer of agentic GAI course design (Ilieva et al. 2026)
-
Value-Sensitive Design in Action: Designing Student-Centered Intelligent Tutoring Systems with Community College Students and Instructors — Value-sensitive design of student-centered ITS (learners in the tutoring loop)
-
A Human-in-the-Loop Framework for AI-Assisted Scoring in Large-Scale Writing Assessment — HITL AI-assisted scoring in a large-scale national writing assessment (Curi et al. 2026)
-
AI as Teammate: Rethinking Task Distribution in Medical Training — SCAN framework: rethinking AI task distribution in medical training (Tsim et al. 2026)
-
CODE-GEN: A Human-in-the-Loop RAG-Based Agentic AI System for Multiple-Choice Question Generation
-
Confidence Estimation in Automatic Short Answer Grading with LLMs
-
TeachArena: Are Language Agents Ready for Realistic Teaching Work?
-
LLMs Do Not Grade Essays Like Humans — LLMs do not grade essays like humans (Mathew et al. 2026)
-
Adult Learners' Perspectives of AI Applications in Supporting Andragogy — AI Applications in Supporting Andragogy (Kim et al. 2026)
-
Scaffolding Systematic Reviews in Learning Design and Technology Through Mentoring and AI Integration — Scaffolding Systematic Reviews with Mentoring and AI (Wang 2026)
-
AI-assisted, instructor-supervised grading and feedback in higher education: Design and evaluation of an end-to-end pipeline — AI-assisted instructor-supervised grading and feedback
-
Can AI deliver appropriate support for diverse student profiles? A large-scale evaluation — Can AI deliver appropriate support for diverse student profiles? A large-scale evaluation
-
Assisting the grading of a handwritten general chemistry exam with artificial intelligence
-
Bridging technology and education: The use of ChatGPT in grading pharmacy student exams
-
Evaluating Scaffolding-Oriented Multi-Agent Large Language Model System for Clinical Interview Training — Evaluating Scaffolding-Oriented Multi-Agent Large Language Model System for Clinical Interview Training
-
A Tripartite Feedback Framework for AI-Assisted Assessment of Complex Reports in Higher Education — Tripartite framework: sorting feedback by epistemic status and the five boundary principles for AI involvement (Venetsanos 2026)
-
AI-Assisted Social Story Intervention for Special Education: The Design of AdaptED Stories — AI-Assisted Social Story Intervention for Special Education: The Design of AdaptED Stories
-
EduBehaviors: Assertion-based Schemas for Auditable Coding of Educational Dialogues — EduBehaviors: Assertion-based Schemas for Auditable Coding of Educational Dialogues
-
From Sentiment Classification to Actionable and Responsible Feedback: A Scoping Review and Evidence Map of NLP in Student Evaluation of Teaching, 2015–2026 — From Sentiment Classification to Actionable and Responsible Feedback: A Scoping Review and Evidence Map of NLP in Student Evaluation of Teaching, 2015–2026
-
Large language models as grading assistants in public health education: a method-comparison study of essay-style exam assessment — Identical LLM grading reruns on different days reproduce at only Krippendorff's alpha 0.625
-
When Do Undergraduate Students Prefer AI? Insights into AI Scoring and Feedback — Undergraduates prefer human scoring for high-stakes work and AI as an assistant, not a replacement
-
What Students Actually Ask: Demand Structure and Automation Potential in a Hybrid Support System — What Students Actually Ask: Demand Structure and Automation Potential in a Hybrid Support System
-
Rethinking "In-The-Loop" Approaches in Educational AI: A Learning Sciences Perspective — Rethinking "In-The-Loop" Approaches in Educational AI: A Learning Sciences Perspective