Konsep
Human-in-the-Loop
Terjemahan mesin otomatis halaman berbahasa Inggris ini, yang belum ditinjau oleh penutur asli.
Human-in-the-loop — pola desain ketika sistem AI pendidikan secara strategis menyelang-selingkan generasi otomatis dengan pertimbangan ahli manusia, mempertahankan kualitas dan keselamatan pedagogis sekaligus menskalakan produksi. Alih-alih mengotomatiskan sepenuhnya penilaian, umpan balik, atau pengajaran, HITL menjaga manusia (instruktur, pakar bidang, atau pembelajar) tetap berada dalam lingkaran keputusan di tempat pertimbangannya memiliki nilai marginal tertinggi — untuk mengevaluasi kualitas, memutuskan kasus tepi, dan melindungi agensi pembelajar serta keselamatan. Pertanyaan desain sentralnya bukanlah apakah menyertakan manusia, melainkan di mana dalam pipeline pengawasan mereka paling bernilai dan paling sulit digantikan.
Pertanyaan yang Perlu Dipertimbangkan
- Pertanyaan desain HITL yang sentral bukanlah apakah menyertakan manusia, melainkan di mana dalam pipeline pertimbangan mereka paling bernilai. Dalam sebuah sistem penilaian atau umpan balik AI, pada titik mana Anda akan bersikeras agar manusia tetap berada dalam lingkaran?
- Studi tentang pembuatan soal oleh AI menemukan bahwa komputer menangani kejelasan dan validitas dengan baik, tetapi manusia masih dibutuhkan untuk pengecoh yang bermakna dan umpan balik yang baik. Mengapa sebagian pertimbangan pendidikan mungkin menolak otomatisasi?
- Satu evaluasi menemukan tiga LLM memberikan rekomendasi dukungan siswa yang tidak konsisten dan tidak peka — dan menyimpulkan bahwa pertimbangan manusia masih dibutuhkan sebelum AI menasihati tentang siswa. Ketika sebuah AI 'merekomendasikan' dukungan bagi siswa yang kesulitan, apa yang bisa salah jika tidak ada manusia yang meninjaunya?
- Halaman ini mengusulkan bahwa manusia dan algoritma menangkap jenis masalah yang berbeda — otomatiskan apa yang dapat diverifikasi secara presisi, pertahankan pertimbangan di tempat nuansa tak tergantikan. Di mana batas antara keduanya dalam praktik Anda sendiri?
- Menjaga manusia dalam lingkaran dibingkai sebagai perlindungan atas agensi dan keselamatan pembelajar, bukan hanya kualitas. Bagaimana otomatisasi penuh dapat secara halus mengubah kesadaran siswa tentang siapa yang bertanggung jawab atas pembelajaran mereka?
- Jika AI menjadi lebih otonom, pengawasan HITL digambarkan sebagai pagar pengaman inti. Pada tingkat otonomi AI yang mana Anda akan merasa tidak nyaman — dan apa yang dikatakan ketidaknyamanan itu tentang di mana pengawasan seharusnya berada?
Pendahuluan
HITL adalah respons terhadap batas dan risiko AI dalam pendidikan yang sepenuhnya otonom: sistem otomatis dapat menghasilkan dalam skala besar tetapi tidak memiliki pertimbangan kontekstual, etis, dan pedagogis yang dibawa instruktur dan pakar. Dua implementasi terkini menggambarkan arsitektur yang berbeda:
- Human-in-the-loop tidak memadai jika manusia hanya menyetujui. Rienties, Divjak dan Law (2026) berargumen bahwa agensi yang bermakna menuntut kapasitas untuk memahami, mempersoalkan, merancang ulang, dan kadang menolak rekomendasi yang didukung AI, bukan sekadar menyetujui keputusan yang dibentuk di tempat lain.
Dukungan preskriptif adalah domain ketika pengawasan manusia semakin sering diargumentasikan sebagai tidak opsional. López-Pernas et al. (2026) menguji apakah tiga LLM dapat merekomendasikan rencana dukungan siswa dari indikator Analitik Pembelajaran dan menemukan sensitivitas yang terbatas terhadap kebutuhan serta ketidakkonsistenan antar-model yang tajam — dan menyimpulkan bahwa pertimbangan human-in-the-loop masih diperlukan sebelum penasihatan preskriptif Model Bahasa Besar (LLM) dapat diterapkan secara aman dan etis.
Menahan jawaban yang disukai sebuah sistem bersifat protektif alih-alih korektif: dalam sebuah debat multiagen yang tidak pernah mengungkap posisi yang direkomendasikan, peralihan yang merugikan ke jawaban AI yang salah turun dari 42.0–60.5% menjadi 5.7–8.2%, sementara adopsi nasihat yang benar juga menurun (Tuo et al., 2026).
Arsitektur ketiga menempatkan pertimbangan manusia di hulu model alih-alih pada luarannya. Dalam studi Lee, Atif & Kang (2026) tentang klasifikasi pertanyaan pembelajar, tiga pakar tingkat doktoral mengendalikan seluruh pipeline: mereka menyempurnakan definisi operasional untuk setiap peran Konstruktivisme, melakukan pelabelan secara independen hingga kappa Fleiss naik dari 0.60 menjadi 0.83 setelah penyelesaian ketidaksesuaian, dan memvalidasi butir-butir yang diterjemahkan balik dan diparafrasekan yang digunakan untuk menyeimbangkan kumpulan data pelatihan.
CODE-GEN: Pembuatan Soal Pilihan Ganda dengan Human-in-the-Loop
Duan et al. (2026) membangun sistem berbasis RAG (Pembangkitan yang Diperkaya dengan Pengambilan) yang agentik dengan dua agen:
- Generator Agent — Menghasilkan soal pemrograman pilihan ganda yang selaras dengan tujuan pembelajaran mata kuliah
- Validator Agent — Menilai kualitas di tujuh dimensi pedagogis
Evaluasi: 6 SME menilai 288 soal yang dihasilkan AI. Tingkat keberhasilan yang divalidasi manusia: 79.9%–98.6% di seluruh dimensi.
Dimensi yang kuat pada AI (beban manusia rendah):
- Kejelasan soal, validitas kode, keselarasan konsep, validitas jawaban benar
Dimensi yang menuntut manusia (beban manusia tinggi):
- Desain pengecoh yang bermakna secara pedagogis
- Umpan Balik penjelas yang berkualitas tinggi
Wawasan strategis: usaha manusia harus dipusatkan di tempat pertimbangan instruksional tak tergantikan; verifikasi komputasional dapat diotomatiskan sepenuhnya.
MAIC: Pembuatan Skrip dengan Human-in-the-Loop
Yu et al. (2024) menerapkan ruang kelas multiagen (Teacher Agent, TA Agent, dan arketipe teman sekelas) di Universitas Tsinghua dengan lebih dari 500 siswa dan lebih dari 100,000 catatan pembelajaran. Instruktur manusia berpartisipasi dalam pembuatan skrip dan pengawasan, memastikan bahwa penguatan AI berskala massa tidak menggusur keahlian pedagogis.
PedaCo: Gerbang Ganda untuk Pembuatan Video AI
Kim, Baek, dan Kwak (2026) memperluas HITL ke video instruksional yang dihasilkan AI melalui PedaCo (Pedagogical Co-creation), sebuah pipeline dengan dua lapis gerbang yang saling melengkapi yang mewujudkan resistensi berprinsip yang berakar pada Teori Kognitif Pembelajaran Multimedia (CTML) Mayer. Lapisan pertama menempatkan manusia pada tahap skrip: sebuah LLM menyusun draf skrip, seorang peninjau AI menandai potensi pelanggaran CTML (misalnya, "Adegan 3 memperkenalkan istilah teknis tanpa penjelasan sebelumnya"), dan pendidik memutuskan untuk menerima, merevisi, atau menghasilkan ulang. Lapisan kedua menjalankan metrik otomatis pascasintesis atas koherensi, redundansi, kontiguitas temporal, modalitas, dan kualitas gambar, yang ditinjau pendidik. Dalam studi within-subject (23 pendidik), pendekatan berbasis tinjauan meningkatkan setiap prinsip CTML (rata-rata penilaian 3.07→3.86, p<.01), dengan pendidik menilai efisiensi produksi 4.26/5 — gesekan yang dipersepsikan produktif, bukan membebani. Prinsip desainnya menggemakan sintesis HITL basis pengetahuan ini: manusia dan algoritma menangkap jenis masalah yang berbeda, sehingga sistem yang paling efektif mengotomatiskan di tempat verifikasi komputasional bersifat presisi (sinkronisasi temporal) dan mempertahankan pertimbangan manusia di tempat nuansa pedagogis tak tergantikan (nada, kesesuaian dengan audiens).
Penempatan dapat lebih penting daripada kehadiran: praktisi menilai alat penulisan Social Story sebagai sangat mudah digunakan (SUS 86.8) tetapi melaporkan bahwa tinjauan datang terlalu terlambat, karena kendala kultural dan klinis yang ditetapkan sebelum generasi — abaya alih-alih pakaian jalanan Barat — lebih sulit dipulihkan dengan menyunting keluaran sesudahnya (Enkhjargal et al. (2026)).
Mengapa HITL penting di era AI
Desain human-in-the-loop menjadi sentral dalam diskusi basis pengetahuan tentang AI agentik dan penggunaan AI yang bertanggung jawab karena beberapa alasan yang bertemu:
-
Keselamatan pedagogis. Keselamatan Pedagogis menuntut agar AI yang memiliki otoritas instruksional nyata mempertahankan pengawasan manusia, sehingga kesalahan, bias, atau keluaran berbahaya tertangkap sebelum mencapai pembelajar. Ini sangat penting bagi agen otonom yang secara proaktif mengejar tujuan.
-
Pengawasan jarang terjadi dalam praktik, bukan hanya dalam teori. Wang et al. (2026) menemukan bahwa tata kelola tertanam yang kokoh dan pengawasan human-in-the-loop jarang ditunjukkan pada 474 sistem AI agentik pendidikan, bahkan ketika otonomi tugas tunggal dan kolaborasi multiagen tumbuh — kesenjangan antara prinsip desain dan praktik yang diterapkan.
-
Pertanyaan kritisnya adalah bagaimana lingkaran itu dibuat dapat ditindaklanjuti, bukan berapa banyak manusia yang berpartisipasi. Pandangan ilmu pembelajaran berargumen bahwa menata pembelajaran di sekitar penangkapan data, interpretasi komputasional, dan respons probabilistik membuat tindakan pedagogis bergantung pada apa yang dapat dideteksi dan ditindaklanjuti sistem, dan bahwa peringatan serta klasifikasi keterlibatan menginterpretasikan pembelajar sebelum guru atau siswa mana pun bertindak (Pande (2026)).
-
Validitas dan kendali mutu. HITL adalah gerbang kualitas bagi penilaian otomatis dan pembuatan konten — manusia memutuskan di tempat penilaian otomatis tidak dapat diandalkan (lihat penilaian esai oleh LLM penelitian) dan memvalidasi butir yang dihasilkan. Sebuah tinjauan sistematis terpandu PRISMA atas 42 studi penilaian dan umpan balik (2023–2025) mencapai kesimpulan yang sama secara eksplisit: LLM menyamai penilai manusia pada tugas pendek yang terstruktur baik tetapi tidak dapat sepenuhnya menggantikan pertimbangan manusia pada pekerjaan kompleks, terbuka, atau subjektif, dan efektivitas penilaian tertinggi dicapai dalam sistem hibrida yang menggabungkan penilaian berbantuan AI dengan pengawasan dan verifikasi guru (Can ChatGPT Replace the Teacher in Assessment? A Review of Research on the Use of Large Language Models in Grading and Providing Feedback). Falahat et al. (2026) menunjukkan secara konkret di mana batas itu jatuh: ChatGPT-5 menyamai fakultas pada butir ujian farmasi objektif (CCC 0.935–1.000) tetapi tidak dapat diandalkan pada butir jawaban singkat dan esai bahkan ketika diberi rubrik, sehingga para penulis merekomendasikan penilaian hibrida dengan tinjauan manusia untuk penilaian yang kompleks, subjektif, atau berisiko tinggi.
-
Pengulangan bukan pengganti pengawasan itu: dengan menilai ulang kiriman yang identik pada lima hari berbeda, model yang sama mereproduksi hasilnya sendiri hanya pada alpha Krippendorff 0.625, dengan variasi terkonsentrasi pada nilai menengah dan nilai A serta F absen dari hitungan lima sesi (Brevik et al. (2026)).
-
Agensi pembelajar. Menjaga manusia dalam lingkaran mempertahankan Agensi Pembelajar dan mendukung Regulasi Diri dalam Belajar, melawan ketergantungan berlebih yang dapat diinduksi bantuan yang sepenuhnya otonom.
-
Siswa sendiri menempatkan manusia di ujung berisiko tinggi. Di antara 93 mahasiswa, 81.7% lebih memilih penilaian manusia untuk makalah akhir yang bernilai 40% dari nilai, 75 dari 93 menginginkan AI membantu alih-alih menggantikan penilai, dan 69 menginginkan penilaian AI selalu ditinjau manusia (Yildirim-Erbasli et al. (2026)).
-
Kepercayaan dan kalibrasi. Pengawasan manusia yang transparan mendukung Kalibrasi Kepercayaan — pembelajar dan instruktur tahu bahwa manusia yang berkualifikasi berdiri di belakang sistem itu.
-
Kriteria yang terlihat sebelum tinjauan menaikkan kesepakatan. Coscia et al. (2026) menemukan bahwa memunculkan metrik keterpercayaan kepada peninjau saat mereka membandingkan respons LLM menaikkan kesepakatan antar-penilai dari alpha Krippendorff 0.3987 menjadi 0.4931, sementara menambahkan lebih banyak ukuran menambah beban kognitif tanpa imbal hasil.
-
Agensi terbatas sebagai arsitektur, bukan penyangkalan. Kerangka AGAI-HE Ilieva et al. (2026) untuk dukungan belajar agentik membangun supervisi ke dalam model itu sendiri, sebagai lapisan ketiga bersama lapisan alur kerja pedagogis dan dukungan agentik: kerangka itu mendefinisikan penggunaan AI yang dapat diterima, batas pedagogis, aturan Privasi, persyaratan pengungkapan, verifikasi sumber, titik pemeriksaan instruktur, mekanisme integritas, dan akuntabilitas manusia final, dan menuntut setiap fungsi agentik dapat dilacak ke persyaratan pembelajaran, tujuan penilaian, atau kendali tata kelola. Ini adalah perwujudan konkret dari prinsip bahwa HITL adalah properti desain sistem alih-alih pernyataan kebijakan — dan studi persepsi 130 siswa oleh para penulis menjadi pengingat bahwa menambahkan orkestrasi agentik di bawah pengawasan itu tidak, dengan sendirinya, tercatat sebagai dukungan belajar yang lebih baik daripada chatbot.
-
Seberapa sering manusia melihat itu sendiri merupakan keputusan desain. Venetsanos (2026) memisahkan frekuensi pengawasan dari penempatannya: HITL frekuensi tinggi, yang meninjau setiap keluaran AI sebelum mencapai siswa, membeli kendali mutu, deteksi kesalahan cepat, akuntabilitas, dan kalibrasi berkelanjutan tetapi dapat membatalkan efisiensi yang memotivasi otomatisasi dan menyumbat periode penilaian puncak; HITL frekuensi rendah, yang memeriksa sampel secara acak dan hanya meninjau kasus yang ditandai, berskala dan mempersingkat waktu penyelesaian tetapi berisiko membuat kesalahan menyebar tanpa terdeteksi di seluruh kiriman, melemahkan akuntabilitas, dan menciptakan masalah keadilan jika sebagian siswa menerima tinjauan manusia yang lebih menyeluruh daripada yang lain. Alih-alih menetapkan jawaban universal, kerangka itu menuntut pertukaran tersebut dibuat secara eksplisit terhadap toleransi kesalahan disipliner, apakah penilaian bersifat formatif atau sumatif, ukuran kohort, dan sumber daya institusi — dan menetapkan default pada arah yang berlawanan dari argumen efisiensi yang lazim: mulai dengan pengawasan frekuensi tinggi dan kurangi hanya ketika bukti substansial menunjukkan keandalan, keamanan, dan keadilan yang dapat diterima, sehingga beban pembuktian berada pada pihak yang harus menunjukkan bahwa pengawasan yang lebih sedikit itu aman. Makalah itu juga memperingatkan bahwa prinsip-prinsip di balik pengawasan semacam itu dapat memindahkan usaha staf alih-alih menguranginya, sehingga keuntungan efisiensi bersih tetap menjadi pertanyaan empiris yang terbuka.
-
Pengawasan manusia yang diterapkan dapat berarti perutean persetujuan alih-alih pertimbangan kualitas: dalam sebuah sistem kueri hibrida, kolom penerimaan hanya mengodekan apakah penyelesai berbeda dari penanya, dan tidak ada ukuran yang menilai kualitas jawaban Gupta et al. (2026).
Di mana HITL muncul dalam penelitian basis pengetahuan
-
Penilaian dan penilaian otomatis: sistem HITL menggabungkan generasi/penilaian AI dengan validasi manusia pada penilaian jawaban singkat (Confidence Estimation in Automatic Short Answer Grading with LLMs), penilaian penjelasan diri (Exploring the Effectiveness of Using LLMs for Automated Assessment of Student Self Explanations in Programming Education), dan penilaian esai (PsyScore: A Psychometrically-Aware Framework for Trait-Adaptive Essay Scoring and ZPD-Scaffolded Feedback). Cvengros & Kortemeyer mewujudkannya dalam penilaian kimia umum tulisan tangan yang berisiko tinggi: karena keandalan LLM AI Multimodal bervariasi menurut format respons (jawaban tekstual dan reaksi kimia dapat diandalkan sementara gambar dan grafik bernilai lebih buruk daripada acak) dan positif palsu tidak terdeteksi oleh siswa, mereka mengubah skor AI mentah menjadi kebijakan terima/tunda yang selektif menggunakan filter keyakinan — ambang kredit parsial, ambang risiko berbasis IRT, dan pengecualian jenis soal — menunda butir yang tidak pasti dan bergambar kepada manusia, sebuah pendekatan yang dikaitkan penulisnya dengan kerangka regulasi yang menetapkan AI dalam penilaian pendidikan sebagai berisiko tinggi dan mewajibkan pengawasan manusia yang terdokumentasi.
-
Sistem umpan balik: mewajibkan pengawasan manusia yang terdokumentasi.
-
Penilaian HITL operasional dalam sebuah asesmen nasional (2026): Curi et al. (2026) mewujudkan HITL pada skala institusional dalam ujian Acredita EB di Uruguay. Karena kesalahan penilai LLM secara sistematis konservatif (menilai terlalu rendah), alur kerja itu menggunakan logika titik keputusan yang mengarahkan tinjauan manusia tepat kepada kandidat yang hasil lulus/tidaknya bergantung pada bagian Writing — respons lulus yang ditandai AI diterima dengan keyakinan, sementara kegagalan yang ditandai AI (15.3–16.5% kasus) diverifikasi oleh penilai ahli, memangkas beban penilaian penuh setidaknya 50% dengan risiko residu lolosnya kesalahan AI hanya 0.2–0.6%. Ini adalah HITL sebagai strategi alokasi sumber daya: manusia memutuskan secara presisi di tempat bias konservatif AI jika tidak akan mengubah hasil berisiko tinggi.
-
Menurunkan ambang penundaan dari resolusi rubrik itu sendiri (2026). Cruz et al. (2026) menetapkan toleransi AI–instruktur sebesar 0.5 poin — selisih terbesar yang tidak dapat memindahkan sebuah kiriman melewati satu pita jangkar — dan mengeskalasi pencilan pada 0.8 poin, mengirim 11 dari 362 kiriman (3.0%) ke tinjauan manusia sebelum umpan balik dirilis.
-
Kesepakatan antar-anotator bukanlah kebenaran dasar manusia. Bernado et al. (2026) mendorong anotasi model ke lapisan audit tanpa pernah memvalidasinya terhadap label emas manusia, sehingga kesepakatan antar-model (median 0.401) menjadi proksi bagi kualitas asersi yang dapat dilalui oleh kesalahan model yang sama. Desain mereka menjaga pengawasan tetap diagnostik alih-alih dekoratif: karena pertimbangan antara dibuat eksplisit, seorang peninjau dapat melihat perilaku mana yang terpicu dan memisahkan perilaku yang salah baca dari aturan yang mengodekan konstruk dengan buruk.
-
Sistem umpan balik: desain umpan balik human-in-the-loop muncul dalam sistem umpan balik kolaboratif dan penilaian jawaban singkat yang sadar keyakinan.
-
Dukungan kolaborasi kelas. CoBi menjaga guru sebagai manusia peninjau dalam sebuah sistem AI yang mendeteksi wacana kelompok kecil yang mengangkat: guru secara eksplisit lebih memilih tinjauan pra/pasca-tindakan daripada tampilan langsung real time yang akan menempatkan mereka "di bawah sorotan," dan umpan balik teragregasi pada tingkat kelas (bukan individual) dari sistem itu justru yang memungkinkannya menavigasi ketegangan antara Privasi, pengawasan, dan Agensi Pembelajar siswa.
-
Pembuatan soal dan konten: selain CODE-GEN, HITL memandu pembuatan soal untuk penilaian dan Perancah (CODE-GEN: A Human-in-the-Loop RAG-Based Agentic AI System for Multiple-Choice Question Generation, From Evaluated Models to Evaluation Aids: A Multi-Evidence Study of LLM-Based Difficulty Calibration for Programming Examinations).
-
Sistem agentik dan multiagen: ketika AI menjadi lebih otonom, pengawasan HITL adalah pagar pengaman desain inti (Agentic AI and Pedagogical Best Practice: The Tension Between Automation and Learning, Beyond Access: Guided LLM Scaffolding for Independent Learning in Undergraduate Statistics).
-
Perutean berdasarkan konsekuensi keputusan, bukan ketidakpastian model (2026). Sebuah studi operasional 2026 atas ujian akreditasi nasional Acredita EB Uruguay (dua edisi, masing-masing sekitar 5,000-6,000 kandidat) menunjukkan bagaimana desain human-in-the-loop tampak ketika didorong oleh konsekuensi keputusan alih-alih oleh ketidakpastian model. Sebuah penilai GPT-5 sepakat dengan penilai ahli pada 60-80% dari 15 butir rubrik tetapi secara sistematis konservatif, menghasilkan ketidaksesuaian manusia-lulus/AI-gagal pada 15.3% (2024) dan 16.5% (2025) perbandingan lulus/gagal dan hampir tidak pernah sebaliknya. Kerangka itu karena itu menerima hasil yang lulus menurut AI apa adanya dan mengarahkan setiap hasil yang gagal menurut AI yang dapat mengubah hasil kandidat ke tinjauan ahli — setelah lebih dulu melewati kandidat yang kelulusannya tidak dapat bergantung pada bagian menulis — sehingga memangkas respons yang membutuhkan penilaian manusia penuh setidaknya 50%. Desain 2026 kedua menarik batasnya dari sisi lain: dalam platform pasien terstandar AI multiagen (Yang et al.), pengawasan manusia disediakan bagi apa yang dinilai tidak layak diputuskan AI, dengan fakultas dan pasien terstandar manusia menyediakan interpretasi kontekstual, remediasi, dan penilaian kesiapan, dan sistem itu secara eksplisit tidak diizinkan menentukan kompetensi klinis secara otonom.
-
Instrumentasi penelitian: manusia memvalidasi label alih-alih skor. Pengode ilmu pembelajaran dan ilmu komputer menilai segmen perilaku yang dihasilkan LLM pada lini masa tersinkronisasi pada κ = 0.703, dan ketidaksepakatan mereka menjadi analisis kesalahan studi itu sendiri (Fonteles et al., 2026).
-
Model merangkum dan peneliti memberi label. Sebuah studi pemodelan kolaboratif menggunakan GPT-3.5-Turbo untuk menulis ringkasan yang sadar konteks tugas atas masing-masing 394 segmen wacana, meminta peneliti memverifikasi setiap ringkasan dan mengodekannya hingga κ ≥ 0.7, dan melatih detektor pada label tersebut, sehingga model tidak pernah membuat pertimbangan itu sendiri. Pengawasan kemudian bergerak ke luar: empat guru berpengalaman meninjau satu segmen berlabel, tiga mengenali perilaku tersebut, dan satu berargumen bahwa dua label pada satu segmen mengaburkan apa yang dilakukan siswa, sebuah keberatan kegunaan yang dicatat para penulis alih-alih diselesaikan (Zhang et al., 2026).
-
HITL sebagai arsitektur bagi seluruh disiplin, bukan satu alur kerja. Zhai et al. (2026) menetapkan empat lapisan yang saling mengunci, yaitu infrastruktur data, pengembangan model, antarmuka pedagogis, dan tata kelola manusia, yang disatukan oleh tiga prinsip: pengawasan dan agensi manusia, kecerdasan yang berko-adaptasi, dan daya tanggap kontekstual.
Sintesis
Desain human-in-the-loop bukan sekadar tindakan keselamatan—ia adalah strategi alokasi sumber daya. Pertanyaan di garis depan bukanlah apakah menyertakan manusia, melainkan di mana dalam pipeline pertimbangan mereka memiliki nilai marginal tertinggi. Sistem HITL yang paling efektif memusatkan keahlian manusia yang langka di tempat sistem otomatis paling lemah (desain pengecoh, umpan balik penjelas, keputusan kasus tepi, pertimbangan etis) dan mengotomatiskan sisanya — mempertahankan kualitas, keselamatan, dan kepercayaan sekaligus menskalakan produksi.
- Pengawasan manusia tetap ada dalam kerja berbantuan AI. Penelitian tinjauan sistematis menemukan alat otomatisasi AI mengurangi beban prosedural (misalnya penyaringan) tetapi keputusan interpretatif masih membutuhkan pengawasan manusia yang substansial; penelitian andragogi menjadikan human-in-the-loop (model mental bersama, ko-kreasi) sebagai prinsip desain AI yang inti.
- Human-in-the-loop pada skala institusional. Qin (2026) menggambarkan bagaimana Universitas Lingnan mengembangkan model pendidikan human-in-the-loop yang mengedepankan penalaran etis, pertimbangan kritis, dan tanggung jawab sosial sekaligus mendemokratisasi akses GenAI. Model itu memosisikan manusia sebagai lokus pertimbangan dan nilai bahkan ketika AI tertanam di seluruh kurikulum — perwujudan institusional konkret dari prinsip-prinsip human-in-the-loop dalam pendidikan tinggi.
- Pembelajar sebagai human-in-the-loop bagi tutoring mereka sendiri. Value Sensitive Design bersama mahasiswa community college menghasilkan keluarga fitur HITL yang menghadap pembelajar secara lengkap untuk sebuah ITS (kendali atas penilaian ulang dan tinjauan, tujuan/kecepatan yang dipersonalisasi, penandaan untuk ditinjau, konfirmasi keyakinan alih-alih penguasaan, dan kendali tingkat keterlibatan bantuan AI), memosisikan siswa sebagai pengendali aktif lingkaran tutoring alih-alih konsumen pasif keputusan adaptif. Studi itu juga menemukan instruktur terbelah mengenai apakah kendali pembelajar semacam itu dapat melemahkan integritas jalur pembelajaran yang dipandu sistem — sebuah contoh dari pertanyaan alokasi sumber daya yang lebih luas tentang di mana pertimbangan manusia (pembelajar vs. guru) menambah nilai paling besar.
- Eskalasi dari AI ke ahli adalah langkah human-in-the-loop. Kerangka SCAN menetapkan tugas ke empat mode AI generatif berdasarkan jarak pembelajar, dan membaca keterlibatan pasif di dalam tugas AI yang ditetapkan dengan benar sebagai sinyal salah-pengembangan keterampilan untuk memindahkan pembelajar dari bantuan AI ke bantuan ahli, dengan manusia sebagai auditor epistemik (Tsim et al. (2026)).
- Pengawasan atas nasihat adopsi AI. Karena sistem AI percakapan yang dikonsultasikan oleh pengguna yang skeptis mungkin cenderung mendorong adopsi, pengawasan manusia dan evaluasi independen sangat penting. Sebuah audit yang menunjukkan sebagian besar model terdepan mengarahkan staf K-12 pedesaan yang skeptis menuju keterlibatan menggarisbawahi kebutuhan akan nasihat AI yang transparan dan dapat diaudit alih-alih ketergantungan tanpa kritik.
Miskonsepsi Umum
- "Menampilkan rekomendasi sistem membantu manusia mengawasinya." Menahan jawaban yang disukai sebuah sistem bersifat protektif alih-alih korektif: dalam sebuah debat multiagen yang tidak pernah mengungkap posisi yang direkomendasikan, peralihan yang merugikan ke jawaban AI menurun. Pengungkapan mengundang kepatuhan; penahanan mendukung pertimbangan.
- "Human-in-the-loop harus berarti satu manusia, satu keputusan." Sebuah ruang kelas multiagen dengan Teacher Agent, TA Agent, dan arketipe teman sekelas diterapkan di Universitas Tsinghua dengan lebih dari 500 siswa dan lebih dari 100,000 catatan pembelajaran. Supervisi berskala melalui pengaturan itu, bukan dengan memperbanyak supervisor.
- "Meninjau keluaran AI itu intuitif." Dalam sebuah studi within-subject dengan 23 pendidik, pendekatan berbasis tinjauan meningkatkan setiap prinsip CTML (rata-rata penilaian 3.07 menjadi 3.86, p < .01), dengan pendidik menilai efisiensi produksi secara positif. Tinjauan adalah keterampilan yang meningkat di bawah metode yang terstruktur.
Konsep terkait
- Pola Pedagogis — Di mana tinjauan manusia berada dalam urutan yang telah diuji, dan apa yang belum pernah diuji secara terpisah
- Pagar Pengaman
- Penilaian Formatif
- Penilaian Otomatis
- Perancah
- Pengajaran
- Literasi AI
- Tutoring Cerdas
- Umpan Balik
- Pengalaman Siswa
- Regulasi Diri dalam Belajar
- Metakognisi
- Pengembangan Pendidikan
- AI Generatif
- Agensi Pembelajar
- Keselamatan Pedagogis
- Kalibrasi Kepercayaan
- AI Agensik
- Offloading Kognitif
- Penyerahan Kognitif
- Dukungan dan Keberhasilan Siswa — pertimbangan manusia di dalam alur dukungan otomatis
Artikel terkait
-
Science Literacy: Generative AI as Enabler of Coherence in the Teaching, Learning, and Assessment of Scientific Knowledge and Reasoning — Arsitektur HITL empat lapis untuk AI generatif dalam pendidikan sains (Zhai et al. 2026)
-
Analyzing embodied learning in classroom settings: A human-in-the-loop AI approach for multimodal learning analytics — Pengode yang memvalidasi segmen perilaku LLM sebagai instrumentasi penelitian (Fonteles et al. 2026)
-
Analysing AI utilisation in education through learner question types: A constructivist approach — Klasifikasi pertanyaan berlabel pakar: manusia mengendalikan pelabelan, augmentasi, dan analisis kesalahan (Lee, Atif & Kang 2026)
-
Agentic Generative AI in Higher Education: Perceived Benefits, Risks, and Implications for Learning — Supervisi dan tata kelola manusia sebagai lapisan ketiga desain mata kuliah GAI agentik (Ilieva et al. 2026)
-
Value-Sensitive Design in Action: Designing Student-Centered Intelligent Tutoring Systems with Community College Students and Instructors — Desain peka nilai untuk ITS yang berpusat pada siswa (pembelajar dalam lingkaran tutoring)
-
A Human-in-the-Loop Framework for AI-Assisted Scoring in Large-Scale Writing Assessment — Penilaian berbantuan AI HITL dalam asesmen menulis nasional berskala besar (Curi et al. 2026)
-
AI as Teammate: Rethinking Task Distribution in Medical Training — Kerangka SCAN: memikirkan ulang distribusi tugas AI dalam pelatihan medis (Tsim et al. 2026)
-
CODE-GEN: A Human-in-the-Loop RAG-Based Agentic AI System for Multiple-Choice Question Generation
-
Confidence Estimation in Automatic Short Answer Grading with LLMs
-
TeachArena: Are Language Agents Ready for Realistic Teaching Work?
-
LLMs Do Not Grade Essays Like Humans — LLM tidak menilai esai seperti manusia (Mathew et al. 2026)
-
Adult Learners' Perspectives of AI Applications in Supporting Andragogy — Aplikasi AI dalam Mendukung Andragogi (Kim et al. 2026)
-
Scaffolding Systematic Reviews in Learning Design and Technology Through Mentoring and AI Integration — Merancang Perancah bagi Tinjauan Sistematis dengan Mentoring dan AI (Wang 2026)
-
AI-assisted, instructor-supervised grading and feedback in higher education: Design and evaluation of an end-to-end pipeline — Penilaian dan umpan balik berbantuan AI yang disupervisi instruktur
-
Can AI deliver appropriate support for diverse student profiles? A large-scale evaluation — Dapatkah AI memberikan dukungan yang tepat bagi profil siswa yang beragam? Sebuah evaluasi berskala besar
-
Assisting the grading of a handwritten general chemistry exam with artificial intelligence
-
Bridging technology and education: The use of ChatGPT in grading pharmacy student exams
-
Evaluating Scaffolding-Oriented Multi-Agent Large Language Model System for Clinical Interview Training — Mengevaluasi Sistem Model Bahasa Besar Multiagen Berorientasi Perancah untuk Pelatihan Wawancara Klinis
-
A Tripartite Feedback Framework for AI-Assisted Assessment of Complex Reports in Higher Education — Kerangka tripartit: memilah umpan balik menurut status epistemik dan lima prinsip batas bagi keterlibatan AI (Venetsanos 2026)
-
AI-Assisted Social Story Intervention for Special Education: The Design of AdaptED Stories — Intervensi Social Story Berbantuan AI untuk Pendidikan Khusus: Desain AdaptED Stories
-
EduBehaviors: Assertion-based Schemas for Auditable Coding of Educational Dialogues — EduBehaviors: Skema Berbasis Asersi untuk Pengodean Wacana Pendidikan yang Dapat Diaudit
-
From Sentiment Classification to Actionable and Responsible Feedback: A Scoping Review and Evidence Map of NLP in Student Evaluation of Teaching, 2015–2026 — Dari Klasifikasi Sentimen ke Umpan Balik yang Dapat Ditindaklanjuti dan Bertanggung Jawab: Tinjauan Pelingkupan dan Peta Bukti NLP dalam Evaluasi Pengajaran oleh Siswa, 2015–2026
-
Large language models as grading assistants in public health education: a method-comparison study of essay-style exam assessment — Pengulangan penilaian LLM yang identik pada hari berbeda mereproduksi hanya pada alpha Krippendorff 0.625
-
When Do Undergraduate Students Prefer AI? Insights into AI Scoring and Feedback — Mahasiswa lebih memilih penilaian manusia untuk pekerjaan berisiko tinggi dan AI sebagai asisten, bukan pengganti
-
What Students Actually Ask: Demand Structure and Automation Potential in a Hybrid Support System — Apa yang Sebenarnya Ditanyakan Siswa: Struktur Permintaan dan Potensi Otomatisasi dalam Sistem Dukungan Hibrida
-
Rethinking "In-The-Loop" Approaches in Educational AI: A Learning Sciences Perspective — Memikirkan Ulang Pendekatan "In-The-Loop" dalam AI Pendidikan: Perspektif Ilmu Pembelajaran
-
Countering the Risks of AI Overreliance: Leveraging Multi-Agent Debate for Complementary Human–AI Decision-Making in Legal Contexts — Menahan jawaban yang disukai sistem memangkas penyerahan diri pada nasihat AI yang salah, secara protektif alih-alih korektif