Ako mi AI môže ušetriť čas ako učiteľovi?

Automatický strojový preklad tejto anglickej stránky, ktorý ešte nebol skontrolovaný rodeným hovorcom.

Je štvrtok večer ôsmeho týždňa. Tri osnovy hodín sú na pondelok, protokoly z laboratória sú napoly opravené a piatkové stretnutie katedry má bod o tom, čo ktosi od augustového školenia s AI urobil. Kolegyňa hovorí, že jej nástroj skrátil čas na prípravu o polovicu. Vy ste to skúsili dvakrát, strávili ste štyridsať minút opravou pracovného listu a odišli s pocitom, že celá vec je predražená.

Obaja opisujete ten istý nástroj. Šetrí čas pri písaní materiálu, ktorý by ste aj tak upravovali, a stojí čas, keď ho namierite na úsudok o konkrétnom študentovi. Či sa úspora stane vašou, závisí od rozhodnutia, ktoré väčšina učiteľov nikdy neurobí: na čo sú získané hodiny.

Záver pre poradu: odovzdajte prvý koncept a podržte si úsudok. Osnovy hodín, riešené príklady, diskusné otázky, položky formatívneho kvízu, alternatívne vysvetlenia, formulácie kritérií a rutinný administratívny text sú práca, ktorú dokážete špecifikovať, skontrolovať a opraviť. Ciele, záverečné známky a akékoľvek rozhodnutie o konkrétnom študentovi zostávajú na vás. Pomenujte, čo uvoľnená hodina kupuje, pretože dôkazy o šetrení času sú dôkazmi o tom, kam ten čas ide.

Stručná verzia

1. Spíšte úlohy z minulého týždňa, ktoré vyprodukovali dokument, ktorý ste potom upravovali. To sú vaši kandidáti.

2. Začnite štruktúrovaným materiálom, ktorý dokážete skontrolovať podľa vlastnej špecifikácie: výstupné lístky, položky kvízu, riešené príklady, druhé vysvetlenie ťažkého pojmu.

3. Napíšte, kam sa uvoľnená hodina vráti, skôr než ju uvoľníte.

4. Dva týždne merajte čas pri troch opakujúcich sa úlohách. Váš pocit o úspore je nespoľahlivý konkrétnym, zdokumentovaným spôsobom.

5. Stanovovanie cieľov, sumatívne známky a individuálne rozhodnutia o študentoch nechajte na svojej strane čiary.

Začnite prácou, ktorú ste aj tak chceli prepísať

Najsilnejšie číslo v tejto znalostnej báze pochádza z randomizovaného testu, ktorý zhrňuje Ako AI mení pracovné postupy vo výučbe. Dvesto päťdesiatdeväť učiteľov prírodovedných predmetov pracujúcich s ChatGPT strávilo prípravou hodín približne 69 % času kontrolnej skupiny, teda zníženie zhruba o 31 %, a slepí expertní posudzovatelia nenašli zistiteľnú stratu kvality. Učitelia ten čas prealokovali, nie uložili, a presunuli ho do plánovania, opravovania a práce so študentmi.

Druhý dátový súbor v tej istej práci, viac než 104 000 správ od vyše 15 000 vzdelávateľov, ukazuje, prečo úspora pristáva na zvláštnych miestach. Priemerný prompt sa dotkne 1,7 kategórií naraz, takže jediná žiadosť o plán hodiny sa vráti s diferenciáciou a kvízom, o ktorý učiteľ ani nežiadal.

To je prealokácia, nie redukcia: to, čo získate z generatívnej AI, je rozdiel medzi prázdnou stránkou a konceptom natoľko konkrétnym, že sa s ním dá hádať.

Priraďte úlohu k tomu, čo nástroj robí dobre

Kvalita je nerovnomerná vo vzorci dosť stabilnom na to, aby sa dal plánovať. Slepí posudzovatelia uprednostnili AI verzie záverov hodín a výstupných lístkov v 59,7 % prípadov pred materiálmi od profesionálov a AI materiál pre obsah strednej školy uprednostnili v 59,2 % prípadov. Úspora rastie aj tam, kde vaše sebavedomie je najnižšie: výučba mimo vlastného predmetu je prípad s najširšou medzerou medzi tým, čo vám nástroj podá, a tým, čo by ste napísali sami.

Dve kategórie idú opačným smerom. Pri materiáli pre prvý stupeň dostali ľudia prednosť v približne 65 % prípadov kvôli vývojovej primeranosti. Cielené lešenie pre viacjazyčných študujúcich a študentov v špeciálnom vzdelávaní sa vrátilo ako neutrálne, nie ako nesprávne, čo je horšie, než to znie, pretože neutrálne lešenie je také, ktoré postavíte od začiatku znova.

Test, ktorý to predpovie skôr, než na to strávite večer: dokážete špecifikáciu vysloviť dosť presne na to, aby ste výstup skontrolovali? Výstupný lístok k jednému cieľu, áno. Či sa odsek hodí konkrétnemu deväťročnému dieťaťu, ktoré číta o dva roky za svojou triedou, nie.

Dajte uvoľnenej hodine cieľ

Najjasnejší dôkaz, že úspora je skutočná a že sama o sebe nič nerobí, pochádza z veľkého experimentu v 178 školách s približne 19 000 maturantmi o automatizovanej spätnej väzbe k esejam. Študenti, ktorých spätná väzba prišla zo systému, získali toľko ako študenti hodnotení ľuďmi. Ľudskí hodnotitelia stáli zhruba 0,85 dolára na esej a nepriniesli navyše žiadny merateľný prínos.

V triedach s AI mali študenti približne o 35 % viac rozhovorov jeden na jedného s učiteľmi o písaní a napísali o 30 % viac esejí. Pracovné hodiny učiteľov doma klesli o 20 % a podiel tých, ktorí svoj čas označovali ako „veľmi nedostatočný“, klesol z 23 % na 9 %. Najväčšie zisky v učení pristáli pri najkomplexnejšej písacej úlohe, teda pri tej, ktorú AI dokáže hodnotiť najmenej, pretože učiteľ mal teraz na ňu hodiny.

Výhrada je veta, ktorú si treba vziať na poradu. Najslabší kvartil nevykázal žiadne zlepšenie. Študenti, ktorí boli najďalej pozadu, nezískali nič od učiteľa, ktorý mal len viac priestoru v dni, takže kam hodiny idú, je celý argument, a spravodlivá prealokácia patrí do plánu od začiatku, nie do revízie na konci.

Úsporu merajte, nie odhadujte pocitom

Šetrenie času je tvrdenie, v ktorom sa učitelia o sebe najspoľahlivejšie mýlia. V troch predregistrovaných štúdiách s 2 691 účastníkmi ľudia podceňovali, ako často AI používajú, a preceňovali čas a úsilie, ktoré im ušetrila, pričom úlohy uvádzali ako rýchlejšie a ľahšie, kým objektívne merania neukázali rozdiel. Použitie nástroja skôr v relácii predpovedalo jeho častejšie používanie neskôr, takže chyba sa v rámci jedného popoludnia kumuluje (The efficiency-gain illusion: People underestimate the rate of AI use and overestimate its benefits on simple tasks).

Pomáha metakognitívna kalibrácia a jej lacnou verziou je záznam. Dva týždne si pri troch opakujúcich sa úlohách poznačte časy začiatku a konca, jednu s nástrojom a dve bez neho. Očakávajte jednu úlohu s veľkou skutočnou úsporou, niekoľko bez a pár takých, kde nástroj pridal krok kontroly, ktorý úsporu zjedol.

Úsilie a schopnosť sa tiež rozchádzajú. Štúdia v rámci subjektov s 13 učiteľmi vysokých škôl zistila, že prístup k AI znížil vnímané kognitívne úsilie pri navrhovaní učenia z mediánu 6,33 na 3,33 (p = 0,004), kým tréning promptovania pridaný navrch kvalitu návrhov nezlepšil (When Teachers Use AI Chatbots and Are Trained for It: Impact on Learning Design Quality and Cognitive Effort). Menšie vypätie vo štvrtok večer je skutočný prínos. Nie je dôkazom, že sa návrhy zlepšili.

Ciele a záverečné známky nechajte na svojej strane

Participatívny dizajn so šiestimi učiteľmi stredných škôl priniesol hranicu, ktorá sa oplatí kopírovať. Systém navrhli ako ohraničeného experta: schopného vnútri úzkej domény, pracujúceho pod dohľadom. Chceli pomoc s prezentovaním obsahu, generovaním cvičných príkladov a poskytovaním formatívnej spätnej väzby a odmietli odovzdať stanovovanie cieľov alebo sumatívne hodnotenie a trvali na možnosti zásahu v nejasných prípadoch. To, čo chránili, je jadrom roly učiteľa: rozhodovať, čo sa oplatí naučiť, a posúdiť, či sa to naučilo.

Hodnotenie je úloha s najväčším zdanlivým výnosom a najslabšou prenositeľnosťou. Benchmark OpRaise prehnal tri špičkové modely cez 761 autentických esejí z bakalárskej psychológie od 125 študentov z troch britských univerzít, s 27 konfiguráciami promptov na model. Zhoda s ľudskými známkovými pásmami sa pohybovala od 35 % do 65 % podľa inštitúcie. Známky sa stlačili k stredu, takže najsilnejšie a najslabšie eseje boli ohodnotené najmenej presne, a modely sa zhodovali medzi sebou oveľa viac než s ľudskými hodnotiteľmi. Hlavným zistením autorov je, že dôkazy získané v jednom kontexte sa neprenášajú do iného.

Automatizované skórovanie esejí môžete použiť, ak ho validujete na vlastnom predmete a vlastných študentoch a rozhodnutie necháte na človeku. Kvalita spätnej väzby od AI hovorí, čo kontrolovať: rýchlosť a objem nie sú to isté ako užitočnosť a pedagogický úsudok o tom, ktorý komentár študent potrebuje ako ďalší, zostáva na vás.

V čom sa učitelia mýlia

„Tých 31 % je moje číslo.“ Je to 259 učiteľov prírodovedných predmetov v regionálnom školstve pri príprave hodín. Smer sa prenáša; veľkosť nie. Seminár postavený na diskusii môže ušetriť menej a laboratórny kurz s bezpečnostnými obmedzeniami nemusí ušetriť nič na tej časti, pri ktorej ste pomoc chceli najviac.

„Cieľom je ušetriť čas.“ Experiment v Brazílii je protipríklad. Hodiny prišli zadarmo a najslabší kvartil nezískal nič. Cieľom je to, čo hodiny kupujú.

„Dobrý koncept znamená, že môžem odovzdať aj ďalší krok.“ Šiesti učitelia nakreslili svoju čiaru pri cieľoch a sumatívnom úsudku z dobrého dôvodu. Kvalita výstupného lístka nehovorí nič o tom, či nástroj dokáže rozhodnúť, čo má výstupný lístok hodnotiť.

Čo vám na to povedia

„Skúsil som to a výstup bol všeobecný.“ Väčšina učiteľov vo výskume vzala prvý výsledok a upravila ho ručne, namiesto iterovania s ďalšími promptmi. Druhé a tretie kolo, ktoré dodá váš ročník, vaše texty, vaše posledné tri položky kvízu a príklad toho, ako vyzerá dobrý výsledok, zmení výstup viac než prepnutie nástroja. AI gramotnosť je lacná investícia a spresňovanie promptov je miesto, kde sa vypláca.

„Ak budem rýchlejší, čas sa zaplní poradami.“ Pravdepodobne, a je to najčastejší spôsob, akým úspora zmizne. Dajte cieľ písomne tam, kde ho vedúci katedry uvidí, skôr než sa priestor zaplní.

„Spätná väzba od AI ukracuje študentov, ktorí majú najväčšie ťažkosti.“ Najslabší kvartil v Brazílii nezískal nič, a to je najsilnejšie varovanie na tejto stránke. Spojte úsporu s úmyselným použitím. Nárast rozhovorov jeden na jedného o 35 % je to, čo tie triedy s hodinami urobili, a bolo to rozhodnutie učiteľa.

„Hodnotenie je miesto, kde moje hodiny naozaj sú.“ Je, a je to aj miesto, kde je nástroj najmenej prenositeľný medzi inštitúciami. Validujte lokálne, alebo na to nesiahnite.

„Toto zbavuje profesiu zručností.“ Výsledok Pishtariho je tá poctivá verzia: vnímané úsilie kleslo a pridaný tréning kvalitu návrhu nezlepšil. Ušetrené úsilie nie je získaná schopnosť a hranica šiestich učiteľov je rozumné miesto, kde držať líniu, kým zistíte, ktorá z vašich úloh je ktorá.

Čo urobiť tento týždeň

1. Napíšte päť úloh, ktoré ste robili minulý týždeň a ktoré skončili dokumentom, ktorý ste potom upravovali.

2. Vyberte tú s najjasnejšou špecifikáciou a napíšte ju s nástrojom, pričom merajte čas oboch verzií.

3. Vložte uvoľnený čas do pomenovaného miesta v kalendári: rozhovor so študentom, druhé kolo spätnej väzby alebo poriadne prečítanie sady konceptov.

4. Napíšte svoj zoznam zákazov a majte ho na očiach: ciele, záverečné známky, čokoľvek, čo závisí od potrieb jedného študenta.

5. Veďte záznam dva týždne a potom rozhodnite, ktoré dve úlohy odovzdáte natrvalo.

Kam ďalej

Spätná väzba od AI vo veľkom posúva otázku spätnej väzby ďalej a AI kompetencie učiteľov spolu s rozvojom učiteľov pre AI pokrývajú, čo môže katedra vybudovať, aby to prestalo závisieť od individuálneho experimentovania. Prerobenie hodnotenia v ére AI a zníženie podvádzania s AI riešia dôsledky pre hodnotenie. Ako AI mení pracovné postupy vo výučbe je článok za číslami o príprave a ľudský dohľad je princíp, na ktorom táto stránka stojí.