Vedecká databáza AIEdAIEd KB
Na tejto stránke

Všetky čísla

Týždenný prehľad výskumu AI vo vzdelávaní #3

Automatický strojový preklad tejto anglickej stránky, ktorý ešte nebol skontrolovaný rodeným hovorcom.

Týždenný prehľad bázy poznatkov o AI vo vzdelávaní o tom, čo výskum publikovaný za posledný týždeň znamená pre vyučujúcich, vývojárov, výskumníkov a administrátorov.

Od posledného čísla pribudlo do bázy poznatkov 159 nových štúdií, osem nových stránok konceptov, dve nové FAQ a tri nové zdroje; báza teraz obsahuje 2 085 zhrnutí článkov, 230 stránok konceptov, 44 FAQ a 40 zdrojov. Hľadajte alebo využite AI na rozhovor s bázou poznatkov.

Obsah

Hlavné zistenia a otázky

Nové FAQ

Tento týždeň sa k FAQ pridali dve nové odpovede.

Ako môže AI pomôcť študentom s čítaním a porozumením textu?

Odpoveď o čítaní berie označenia čítacej úrovne ako hrubé odhady: hodnotenie niekoľkých skutočných čitateľov prekoná vzorec a AI, ktorej sa povie, aby predstierala študenta, vám nepovie, ako ťažký sa text bude zdať. Použite AI na hľadanie, zjednodušovanie a dopĺňanie glos k čítaniu, potom výsledok vyskúšajte so študentmi a originál nechajte vedľa.

Ako sa skreslenie a nespravodlivosť AI prejavujú vo vzdelávaní a čo s tým môžeme urobiť?

Odpoveď o skreslení žiada miery chýb pre skupiny, ktoré učíte, pretože priemer môže skryť medzeru a zlyhanie môže sedieť v známkovaní, doučovaní, dashboardoch alebo detekcii. Dajte reportovanie po skupinách a cestu odvolania do obstarávania a opravte samotnú pipeline.

Nové koncepty

Do bázy poznatkov tento týždeň pribudlo osem stránok konceptov.

Vzdelávanie v čítaní

Vzdelávanie v čítaní má teraz stránku, ktorá oddeľuje štyri veci, ktoré často zdieľajú jeden názov: pomoc čitateľovi, hodnotenie čítania, prispôsobenie textu a meranie náročnosti. Cituje štúdiu, v ktorej 193 študentov hodnotilo 3 954 viet; 72,8 % ich pociťovalo ako ľahké alebo veľmi ľahké, aj keď Fleschove skóre hovorilo inak, takže označenie ročníka je slabý sprievodca tým, ako konkrétny čitateľ text zažije.

Reflexia

Reflexia má novú stránku, ktorá ju oddeľuje od monitorovania v okamihu, ktoré sa nazýva metakognícia. Prvou otázkou dizajnu je, či reflexiu napísal študent. V experimente s 302 dospelými výzvy na reflexiu zdvojnásobili čas so spätnou väzbou a znížili prax o 40 %, čo nechalo nižšie zvládnutie, 65 % oproti 79 %, takže načasovanie záleží rovnako ako samotná výzva.

Skreslenie automatizácie

Skreslenie automatizácie menuje ľudský zvyk, ktorý môže premeniť správne odporúčanie AI na nesprávne rozhodnutie: prijatie odpovede, ktorú by ste spochybnili, keby ste na ňu prišli sami. Zhromažďuje miesta, kde sa to vo vzdelávaní deje, od skóre esejí a včasných upozornení až po proktoring, a ukazuje, ako krok recenzie, ktorý existuje iba na papieri, to nezachytí.

Občianske a politické vzdelávanie

Občianske a politické vzdelávanie mapuje medzeru v dôkazoch a syntetizuje odbor. Analýza 310 plánov hodín generovaných AI zistila, že 90 % aktivít žiadalo iba vybavenie, porozumenie alebo základnú aplikáciu; 94 % malo takmer žiadny multikultúrny obsah; a žiadna štúdia v korpuse nemerala občianske učenie vôbec.

Knižnice

Knižnice chápu knižnicu ako miesto, službu a skupinu profesionálov. Prehľad 29 štúdií zisťuje, že prijatie sa sústreďuje na referenčné služby a katalogizáciu, kým pilot Public AI Libraries robí zdieľaný, personálne zabezpečený prístup argumentom rovnosti.

AI avatary a syntetickí vyučujúci

AI avatary mapujú roly, ktoré môže syntetický človek zastávať, od nahratého prednášajúceho a doučovateľa až po simulovaného pacienta a skúšajúceho. Dôkazy sú nerovnomerné a realistická tvár vám o učení povie málo; zverejnenie a dôvera záležia rovnako ako model.

Analytika senzorov a pohľadu

Analytika senzorov a pohľadu pokrýva sledovanie očí, signály mozgu a srdca a držanie tela z kamery ako spôsoby usudzovania pozornosti a zapojenia a kognitívnej záťaže. Odbor je lepší v pozorovaní študentov než v zmene výučby a stránka chápe súkromie, skreslenie a medzeru medzi telesným signálom a duševným stavom ako ústredné.

Informačná a mediálna gramotnosť

Informačná a mediálna gramotnosť chápe obe ako jeden výučbový problém: informačná gramotnosť sa pýta, či si zdroj zaslúži vieru, kým mediálna gramotnosť sa pýta, kto správu vytvoril a prečo. Generatívna AI zrúca obe otázky, pretože plynulý text skrýva svoj pôvod; stránka nachádza málo dôkazov o kombinovanom kurikule.

Nové zdroje

Do knižnice zdrojov tento týždeň pribudli tri zdroje.

LearnHarness

LearnHarness je bezplatná open-source desktopová aplikácia, v ktorej agenti AI zisťujú, čo študent už vie, mapujú myšlienky potrebné na dosiahnutie cieľa, učia jeden krok uvažovania naraz a prispôsobujú prax.

Learning Commons

Learning Commons publikuje otvorené stavebné bloky pre produkty kurikula: mapu štandardov a kurikúl, nástroje na skórovanie generovaného textu a hotové pracovné postupy AI pre učiteľov.

Public AI Libraries

Public AI Libraries je pilot, ktorý umiestňuje zdieľanú pracovnú stanicu AI do amerických verejných knižníc, s chatom, generovaním obrázkov a videa, programátorským prostredím, vzdelávacím sprievodcom a súkromným účtom pre každého návštevníka.

Pre vyučujúcich

Spätná väzba AI sa pri úpravách vyrovná učiteľovi, kým motivácia zaostáva

AI a spätná väzba učiteľa zlepšili tie isté eseje približne rovnako v randomizovanej štúdii s 312 pisateľmi. Spätná väzba učiteľa urobila viac pre motiváciu, pretože študent cítil spojenie s človekom, ktorý ju dával.

Nechajte okolo spätnej väzby ľudský hlas. Spojte generovaný komentár s krátkou odpoveďou vyučujúceho alebo použite AI na prvé kolo a učiteľa na rozhovor o práci.

Súvisiace: Spätná väzba AI vo veľkom rozsahu

Jednu z piatich esejí napísal celú chatbot

Štúdia 77 vysokoškolských pisateľov zaznamenala každú výzvu, odpoveď a vloženie. Pätnásť, teda jeden z piatich, odovzdalo eseje napísané chatbotom, a väčšina z nich stále cítila, že esej je ich.

Žiadajte medzikrokovú prácu: výzvy, úpravy a krátku poznámku o tom, čo sa zmenilo a prečo. Urobte odovzdanie viditeľným, kým je ešte čas učiť.

Súvisiace: Prepracovanie hodnotenia pre éru AI

Stredoškoláci používajú AI takmer univerzálne a slabší žiaci ju používajú viac

Ročná štúdia 4 062 nemeckých stredoškolákov zistila takmer univerzálne používanie AI: 95 % ju používalo a slabší žiaci ju používali viac na dokončenie úloh. Tento vzorec predpovedal neskôr menšie úsilie.

To robí z rámcovania používania AI a sebaregulovaného učenia súčasť kurikula, ktoré sa počas roka znovu navštevuje. Pýtajte sa študentov, na čo je nástroj pri tejto úlohe, a dajte slabším študentom podporovanú cestu, ktorá začína porozumením práci.

Súvisiace: Znižovanie nadmerného spoliehania sa na AI

Podporný chatbot sa vyrovnal denníku, kým rovesník osamelosť znížil

V dvojtýždňovej randomizovanej štúdii s 296 prváckymi študentmi dopadol podporný chatbot rovnako ako písanie denníka pri znižovaní osamelosti, kým náhodne pridelený rovesník ju znížil. Bot prejavil viac empatie, kým študenti dávali späť menej.

Bot môže slúžiť ako užitočný prvý kontakt, kým rovesník alebo poradca zostáva dostupný. Zabudujte túto ľudskú cestu do každej služby podpory študentov, ktorú odporúčate, a merajte samotnú osamelosť.

Súvisiace: AI, úzkosť a duševná pohoda

Berte simuláciu AI ako supervidovanú skúšku

Prehľad 14 štúdií zistil, že študenti ošetrovateľstva si cenili opakovateľnú simuláciu AI s nízkym tlakom a uvádzali väčšiu istotu, najmä v komunikácii a klinickom uvažovaní. Realizmus, reč tela a oneskorenie odpovede zostali slabé.

Oboznámte študentov s obmedzeniami, žiadajte, aby overovali generovaný obsah, a urobte po tom rozbor. Nechajte ľudskú interakciu tam, kde je neverbálna komunikácia alebo trvalá empatia zmyslom cvičenia.

Súvisiace: Vzdelávanie v ošetrovateľstve

Kód záverečných projektov sa strojnásobil, kým komentáre zostali rovnaké

Desať semestrov 260 záverečných projektov v vzdelávaní v informatike ukazuje, že mediánový kód stúpol z približne 3 400 riadkov na 10 000, kým komentáre zostali okolo 8 %. Počet commitov stúpol; jednotlivé commity sa sotva zmenili.

Hodnoťte dizajnové rozhodnutia, vysvetlenie kódu a schopnosť študenta ho zmeniť. Artefakt teraz môže rásť rýchlejšie než učenie, ktoré má ukazovať.

Súvisiace: Prepracovanie hodnotenia pre éru AI

Pre vývojárov

Bez obrázka by mal doučovateľ AI odmietnuť

Šesť modelov AI so schopnosťou obrazu riešilo 376 stredoškolských matematických položiek, ktorých obrázky niesli kľúčové informácie. S obrázkom vyriešil najlepší o niečo viac než polovicu; bez neho odmietli takmer vždy.

Berte odmietnutie ako signál chýbajúceho kontextu. Skóre alebo aktualizácia profilu vytvorená bez obrázka meria inú úlohu.

Súvisiace: Matematické vzdelávanie

Pisateľský doučovateľ, ktorý kladie otázky a písanie necháva študentom

MAIKE kladie otázky a diagnostikuje argumenty, kým text eseje necháva študentovi. Medzi 65 stredoškolákmi sa zlepšenie vyrovnalo kontrolnému chatbotu, 40 % oproti 41 %, a používatelia MAIKE strávili viac ťahov na myšlienkach; nikto sa nezhoršil.

Merajte, či sa myšlienka predebátovaná v chate stane úpravou. Nástroj na vzdelávanie v písaní, ktorý zlepšuje iba finálny text, môže obísť uvažovanie, ktoré má zadanie budovať.

Súvisiace: Výučba písania s AI

Priblížte a zvýraznite snímku, kým beží komentár

GuideSlide komentuje prezentáciu a pomocou vizualizácie priblíži časť, o ktorej sa hovorí. V štúdii s 24 ľuďmi, ktorí sa pozerali na telefónoch, záťaž klesla, porozumenie stúplo z 5,5 na 6,5 z 9 a 21 z 22 ho uprednostnilo.

Výhoda o deň neskôr nebola štatisticky významná, takže štúdia podporuje pozornosť pri sledovaní; trvalé učenie zostáva netestované. Zabudujte navádzanie do samotného rozprávania.

Súvisiace: Navrhovanie AI do učenia

Doladený detektor dokáže deidentifikovať text študenta bez skreslenia mien

Päť nástrojov bolo testovaných na 13 613 súboroch textov študentov. Doladený GPT-4o-mini našiel asi 96 % identifikujúcich údajov za približne jednu šestinu ceny Azure za token; nástroje Microsoftu vynechávali africké a ázijské mená častejšie.

Tréning na desiatich prepisoch fungoval na novej sade, takže prístup sa prenáša. Rozpočítajte druhú kontrolu, keď záleží na presnosti, a uveďte skupiny, ktoré váš nástroj vynecháva.

Súvisiace: Inštitucionálna politika AI

Analýza videa dosiahla zhodu na úrovni človeka, s človekom stále v slučke

GAIVA prepisuje, označuje a interpretuje video z triedy pre učebnú analytiku. Na piatich nahrávkach sa jej označenia zhodovali s ľudskými recenzentmi približne tak tesne ako dvaja recenzenti navzájom a odhalila druh účasti, ktorý pôvodná teória nemenovala.

Berte model ako kódovacieho partnera so sledovateľnou výzvou a ľudským rozhodnutím v každej fáze. Model tiež odhaľuje vzorce, ktoré by ľudský recenzent nemusel hľadať.

Súvisiace: Výskum vzdelávania s podporou AI

Pre výskumníkov

Veľký priemerný efekt môže stále znamenať žiadny spoľahlivý prínos

Prehľad štyroch kontrolovaných štúdií so 420 študentmi informatiky a inžinierstva zistil veľké priemerné zlepšenie, kým štúdie sa ostro nezhodovali a pravdepodobný rozsah zahŕňal žiadny prínos. Dôkazy boli hodnotené ako veľmi neisté.

Berte veľký priemer zo štyroch nepodobných štúdií ako hypotézu o svojom kurze. Pilotujte personalizované učenie tam, kde bude bežať, a jasne povedzte, ako neisté dôkazy sú.

Súvisiace: Čo personalizované učenie znamená

AI známkovač, ktorý pozná záznam študenta, označí tú istú prácu inak

Šesť modelov AI známkovalo tých istých 300 krátkych odpovedí so skutočnou a vymenenou poznámkou o predchádzajúcich výsledkoch. Každý model označil identickú prácu vyššie pod vysokým označením, o 0,28 až 0,75 bodu na desaťbodovej škále.

Kontext študenta tu pôsobí ako skreslenie. Uveďte efekt kontextu vedľa čísla zhody a predtým, než model nazvete spoľahlivým, otestujte známkovanie bez záznamu študenta.

Súvisiace: Spravodlivosť a spoľahlivosť známkovania AI

Spravodlivo vyzerajúci doučovateľ môže skryť 26 % medzeru v zručnostiach

Dva roky záznamov od 8 549 študentov používajúcich MATHia, adaptívneho matematického doučovateľa, ukázali, že študenti, ktorí sa ešte učia čítať, zvládli zručnosti na 68,7 % oproti 77,6 %, kým celková miera spravodlivosti vyzerala takmer neutrálne. Jedna zručnosť skrývala 26 % medzeru v predpovedanom zvládnutí.

Doučovateľ nemal komponent čítacej zručnosti, takže vzdelávanie v čítaní bol chýbajúci faktor v matematickom systéme. Modelujte tú zručnosť a uveďte medzery na úrovni, kde by učiteľ zasiahol.

Súvisiace: Skreslenie a spravodlivosť AI vo vzdelávaní

Falošné pozitívy detekcie sú problém správy a riadenia

Prehľad 90 štúdií zistil, že detektory AI označujú legitímne písanie v mierach, ktoré nemožno spojiť, pretože nástroje, prahy, datasety a jazyky sa líšia. Abstrakty, prehľady literatúry, odpovede na skúške, preložený text a upravená próza sa označovali ďalej.

Riešenie je procedurálne: transparentné používanie, ľudská recenzia, AI gramotnosť, výslovná inštitucionálna politika a cesta odvolania. To patrí do správy a riadenia, s nastaveniami detektora ako jednou časťou.

Súvisiace: Máme používať detektory AI?

Zhoda s ľudskými hodnotiteľmi môže stále minúť prácu

Dvadsaťdva modelov AI známkovalo 100 položiek na úlohu naprieč krátkymi odpoveďami, kódom a esejami. Väčšina sa zhodla s ľuďmi pri krátkych odpovediach, štyri sa zhodli alebo prekonali ich pri kóde a žiadny nedosiahol ľudskú úroveň pri esejach.

Vysoké číslo zhody môže koexistovať s AI známkovačom, ktorý známkuje poznámku a minie odpoveď. Pridajte do hodnotenia zmenené odpovede a uveďte, kde sa model odchyľuje od práce.

Súvisiace: Spravodlivosť a spoľahlivosť známkovania AI

Pre administrátorov

Dôkazy o edtech pre neurodivergentných sú koncentrované a vedené výskumníkmi

Prehľad 93 štúdií zistil, že autizmus dominoval dôkazom o edtech pre neurodivergentných študentov s 39,8 %, pred intelektovým postihnutím, ADHD a dyslexiou. Najviac sa skúmala rozšírená realita (VR a AR); sociálnym a rovesníckym výsledkom sa venovalo menej pozornosti a deti mali málo slov.

Pýtajte sa na výsledok, na ktorom záleží triede, a na študentov, ktorí boli do hodnotenia zahrnutí. Tvrdenie overené iba výskumníkmi sa môže vzdialiť od ľudí, ktorým má slúžiť.

Súvisiace: AI pre študentov so zdravotným postihnutím a neurodivergentných

Študenti chceli inštitucionálneho asistenta na spätnú väzbu

Trinásťmesačný program spoločného dizajnu s 315 študentmi a 20 zamestnancami zistil, že 73 % si cenilo nepretržitú spätnú väzbu spojenú s ich štúdiom. Kartičky a kvízy získali viac pozitívnych komentárov než otvorený chat a 16 z 18 beta testerov asistenta chcelo.

Tých 10 % až 15 %, ktorí odmietali z hodnotových dôvodov, predstavuje riziko prijatia. Berte ich obavy vážne. Vysvetlite, ako sa nakladá s údajmi študentov a čo asistent nevie, skôr než pilot, a dajte študentom cestu, ako sa odhlásiť.

Súvisiace: Navrhovanie AI do učenia

Proktoring chytá podvádzanie a presúva náklady na tých najmenej zvýhodnených

Prehľad 32 štúdií zistil, že AI proktoring chytá vydávanie sa za iného a podvádzanie, kým falošné pozitívy, zlyhania osvetlenia a šírky pásma, úzkosť a škody na súkromí dopadajú najtvrdšie na najmenej zvýhodnených. Automatizovaný proktoring tvoril 59 % štúdií.

Recenzenti odporúčajú alternatívne hodnotenie a mix ľudského a automatizovaného monitorovania. Znížte podiel online skúšky s vysokými stávkami skôr, než pridáte ďalší detektor.

Súvisiace: Inštitucionálna politika AI

Správa z dashboardu zvýšila dokončenie, kým testové skóre zostalo rovnaké

Učitelia noví v online matematickom doučovaní boli náhodne vyzvaní, aby otvorili správu učebnej analytiky o výkone študentov pri prvom zadaní. Nezmenilo to podiel tých, ktorí začali ďalšie zadanie, ani prírastky testových skóre študentov, hoci dokončenie stúplo v menších triedach.

Otestujte, či učitelia správu otvoria, konajú podľa nej a vidia učebný prínos, skôr než kúpite analytiku; samotné zvýšenie dokončenia nestačí.

Súvisiace: Overovanie, či vzdelávacia AI funguje

Takmer žiadna inštitúcia nevie menovať, kto vlastní správu AI

Prieskum 387 študentov a zamestnancov v 13 krajinách zistil, že iba 17 % poznalo určenú rolu správy a riadenia AI. Zo zvyšku 71 % myslelo, že je potrebná, a 76 % očakávalo, že zlepší ich skúsenosť.

Respondenti opisovali rolu s mandátom; výbor bez mandátu tú rolu necháva neobsadenú. Dajte vlastníkovi právomoc nad školením, bezpečnosťou dát, etickou revíziou a stratégiou a zverejnite, kto ju zastáva.

Súvisiace: Inštitucionálna politika AI

Tento týždeň pribudlo

Na stránke časopisu sú uvedené všetky štúdie pridané tento týždeň, vrátane tých, ktoré tu nie sú zhrnuté.

Poznámky k stránke

Newsletter a jeho RSS kanál sú teraz dostupné aj v španielčine: navštívte španielsku stránku noviniek alebo odoberajte španielsky RSS kanál noviniek. Ak chcete požiadať o ďalšiu lokalizáciu, vytvorte issue alebo kontaktujte vývojára stránky.

Stránka je oveľa ľahšia. Celý strom konceptov a FAQ zostáva mimo každej stránky: bočný panel zobrazuje desať tematických skupín a celý zoznam načíta iba vtedy, keď čitateľ jednu otvorí, a pravý panel uvádza osem nedávnych stránok namiesto tridsiatich. Naprieč celou zostavou klesol HTML z 1,80 GB na 1,26 GB a značkovanie bočného panela z 604 MB na 87 MB.

Preklady boli obnovené vo všetkých 33 nakonfigurovaných jazykoch vrátane arabského, hebrejského a urdského vydania písaného sprava doľava. Zhrnutia článkov zostávajú iba v angličtine.

Offline vydania sa presunuli na nové miesto vydaní na GitHube, takže staré odkazy na EPUB a PDF už nefungujú. Každá jazyková stránka si zachováva obvyklú adresu. Súbory EPUB a PDF existujú pre 19 jazykov s odkazmi nižšie; ostatných 14 je iba na stránke.

Zdroj je verejný na github.com/edtechdev/aied.

Sledujte prehľad

Každé číslo dostanete cez kanál noviniek v čítačke kanálov, vložením toho istého kanála do Blogtrottr, aby vám nové čísla chodili e-mailom podľa vami zvoleného harmonogramu, alebo sledovaním na LinkedIn, kde každé číslo vychádza ako newsletter na LinkedIn.

Týždenný prehľad výskumu AIEd pochádza z bázy poznatkov o AI vo vzdelávaní, ktorú generuje agent AI. Toto číslo navrhol ten istý agent AI s redakčným vedením vývojára stránky a každé tvrdenie vyššie odkazuje na stránku, z ktorej vzišlo.

Báza poznatkov je venovaná verejnej doméne pod licenciou CC0 1.0. Žiadne práva vyhradené.

Našli ste problém s obsahom? Nahláste ho na GitHube alebo kontaktujte vývojára stránky, Doug Holton.

ZdrojHistóriaUpraviťChat

Vložiť túto stránku

Skopírujte kód nižšie a vložte túto stránku do systému správy výučby alebo iného webu. Vložená verzia zobrazuje len obsah stránky — skrýva hlavičku webu, navigáciu a pätu.