Na této stránce

Všechna čísla

Týdenní přehled výzkumu AI ve vzdělávání #3

Automatický strojový překlad této anglické stránky, který ještě nebyl zkontrolován rodilým mluvčím.

Týdenní přehled ze znalostní báze o AI ve vzdělávání o tom, co výzkum publikovaný v uplynulém týdnu znamená pro vyučující, vývojáře, výzkumníky a administrátory.

Od minulého čísla do znalostní báze přibylo 159 nových studií, osm nových koncepčních stránek, dvě nové FAQ a tři nové zdroje. Báze nyní obsahuje 2 085 shrnutí článků, 230 koncepčních stránek, 44 FAQ a 40 zdrojů. Hledejte nebo využijte AI k rozhovoru se znalostní bází.

Obsah

Hlavní zjištění a otázky

Nové FAQ

Tento týden k FAQ přibyly dvě nové odpovědi.

Jak může AI pomoci studentům se čtením a porozuměním textu?

Odpověď o čtení považuje značky čtecí úrovně za hrubé odhady: hodnocení několika skutečných čtenářů porazí vzorec a AI, které se řekne, aby předstírala studenta, vám neřekne, jak obtížný text bude působit. Použijte AI k nalezení, zjednodušení a vysvětlení četby, poté výsledek vyzkoušejte se studenty a originál nechte vedle něj.

Jak se zkreslení a nespravedlnost AI projevují ve vzdělávání a co s tím můžeme dělat?

Odpověď o zkreslení žádá míry chyb pro skupiny, které učíte, protože průměr může skrýt mezeru a selhání může být ve skórování, doučování, dashboardech nebo detekci. Zařaďte reporting podle skupin a cestu odvolání do nákupu a opravte samotnou pipeline.

Nové koncepty

Tento týden do znalostní báze přibylo osm koncepčních stránek.

Výuka čtení

Výuka čtení má nyní stránku, která odděluje čtyři věci, jež často sdílejí jeden název: pomoc čtenáři, hodnocení čtení, přizpůsobení textu a měření obtížnosti. Cituje studii, v níž 193 studentů hodnotilo 3 954 vět; 72,8 % připadalo snadných nebo velmi snadných, i když skóre Flesch říkalo něco jiného, takže značka ročníkové úrovně je slabým vodítkem k tomu, jak konkrétní čtenář text prožije.

Reflexe

Reflexe má novou stránku, která ji odděluje od průběžného monitorování zvaného metakognice. První otázkou designu je, zda reflexi napsal student. V experimentu se 302 dospělými podněty k reflexi zdvojnásobily čas se zpětnou vazbou a snížily procvičování o 40 %, což nechalo nižší zvládnutí, 65 % proti 79 %, takže načasování je stejně důležité jako podnět sám.

Automatizační zkreslení

Automatizační zkreslení pojmenovává lidský návyk, který může proměnit správné doporučení AI ve špatné rozhodnutí: přijmout odpověď, kterou byste zpochybnili, kdybyste k ní dospěli sami. Shromažďuje místa, kde se to ve vzdělávání děje, od skóre esejí a včasných upozornění po dohled při zkouškách, a ukazuje, jak krok revize, který existuje jen na papíře, selhává, když má zkreslení zachytit.

Občanské a politické vzdělávání

Občanské a politické vzdělávání mapuje mezeru v evidenci a syntetizuje obor. Analýza 310 plánů výuky generovaných AI zjistila, že 90 % aktivit žádalo jen vybavení z paměti, porozumění nebo základní aplikaci; 94 % mělo téměř žádný multikulturní obsah; a žádná studie v korpusu občanské učení vůbec neměřila.

Knihovny

Knihovny berou knihovnu jako místo, službu a skupinu profesionálů. Přehled 29 studií nachází adopci soustředěnou v referenčních službách a katalogizaci, zatímco pilot Public AI Libraries dělá ze sdíleného přístupu s personálem argument pro rovnost.

AI avatary a syntetičtí vyučující

AI avatary mapují role, které může syntetický člověk zastávat, od nahraného přednášejícího a doučovatele po simulovaného pacienta a zkoušejícího. Evidence je nerovnoměrná a realistická tvář vám o učení řekne málo; zveřejnění a důvěra jsou stejně důležité jako model.

Analytika senzorů a pohledu

Analytika senzorů a pohledu pokrývá sledování očí, mozkové a srdeční signály a postoj z kamery jako způsoby, jak odvozovat pozornost a zapojení a kognitivní zátěž. Obor je lepší ve sledování studentů než ve změně výuky a stránka považuje soukromí, zkreslení a mezeru mezi tělesným signálem a duševním stavem za ústřední.

Informační a mediální gramotnost

Informační a mediální gramotnost bere obě jako jeden výukový problém: informační gramotnost se ptá, zda si zdroj zaslouží víru, zatímco mediální gramotnost se ptá, kdo zprávu vytvořil a proč. Generativní AI obě otázky slučuje, protože plynulý text skrývá svůj původ; stránka nachází jen málo evidence o kombinovaném kurikulu.

Nové zdroje

Do knihovny zdrojů tento týden přibyly tři zdroje.

LearnHarness

LearnHarness je volná open-source desktopová aplikace, v níž agent AI zjišťuje, co student už zná, mapuje myšlenky potřebné k dosažení cíle, učí jeden krok uvažování po druhém a přizpůsobuje procvičování.

Learning Commons

Learning Commons publikuje otevřené stavební bloky pro produkty kurikula: mapu standardů a kurikul, nástroje pro skórování generovaného textu a hotové pracovní postupy AI pro učitele.

Public AI Libraries

Public AI Libraries je pilot, který umisťuje sdílenou pracovní stanici s AI do amerických veřejných knihoven, s chatem, generováním obrázků a videa, kódovacím pracovním prostředím, vzdělávacím průvodcem a soukromým účtem pro každého návštěvníka.

Pro vyučující

Zpětná vazba od AI se u revizí vyrovná učiteli, zatímco motivace zaostává

AI a zpětná vazba učitele zlepšily tytéž eseje přibližně stejně v randomizované studii s 312 studenty, kteří psali eseje. Zpětná vazba učitele udělala více pro motivaci, protože student cítil spojení s člověkem, který ji dával.

Nechte kolem zpětné vazby lidský hlas. Spojte generovaný komentář s krátkou odpovědí vyučujícího, nebo použijte AI na první kolo a učitele na rozhovor o práci.

Viz také: Zpětná vazba od AI ve velkém měřítku

Jeden z pěti esejů napsal celý chatbot

Studie 77 vysokoškolských studentů píšících eseje zaznamenala každý prompt, odpověď a vložení. Patnáct, tedy jeden z pěti, odevzdalo esej napsaný chatbotem, a většina z nich stále měla pocit, že esej je jejich.

Žádejte mezivýsledky: prompty, revize a krátkou poznámku o tom, co se změnilo a proč. Udělejte předání práce viditelným, dokud je ještě čas učit.

Viz také: Přenastavení hodnocení pro éru AI

Studenti středních škol používají AI téměř všichni a slabší studenti ji používají víc

Roční studie 4 062 německých studentů středních škol zjistila téměř univerzální používání AI: 95 % ji používalo a slabší studenti ji používali více k dokončení úkolů. Tento vzorec předpovídal menší úsilí později.

To dělá z rámování používání AI a samoregulovaného učení součást kurikula, k níž se vracíte celý rok. Ptejte se studentů, k čemu nástroj u této úlohy slouží, a dejte slabším studentům podporovanou cestu, která začíná porozuměním práci.

Viz také: Omezování nadměrné závislosti na AI

Podpůrný chatbot se vyrovnal deníku, zatímco vrstevník osamělost snížil

V dvoutýdenní randomizované studii s 296 studenty prvního ročníku si podpůrný chatbot vedl při snižování osamělosti stejně jako psaní deníku, zatímco náhodně přidělený vrstevník ji snížil. Bot projevoval více empatie, zatímco studenti dávali méně zpět.

Bot může sloužit jako užitečný první kontakt, dokud zůstává dostupný vrstevník nebo poradce. Zabudujte tuto lidskou cestu do každé služby podpory studentů, kterou doporučujete, a měřte osamělost samotnou.

Viz také: AI, úzkost a well-being

Berte simulaci s AI jako dohlíženou zkoušku nanečisto

Přehled 14 studií zjistil, že studenti ošetřovatelství oceňovali opakovatelnou simulaci s AI bez tlaku a uváděli větší jistotu, zejména v komunikaci a klinickém uvažování. Realismus, řeč těla a zpoždění odpovědi zůstaly slabé.

Informujte studenty o omezeních, vyžadujte, aby generovaný obsah kontrolovali, a po simulaci veďte debriefing. Lidskou interakci nechte tam, kde je neverbální komunikace nebo trvalá empatie smyslem cvičení.

Viz také: Vzdělávání v ošetřovatelství

Kód závěrečných projektů se ztrojnásobil, zatímco komentáře zůstaly stejné

Deset semestrů 260 závěrečných projektů ve výuce informatiky ukazuje, že medián kódu vzrostl z přibližně 3 400 řádků na 10 000, zatímco komentáře zůstaly kolem 8 %. Počet commitů vzrostl; jednotlivé commity se sotva změnily.

Hodnoťte rozhodnutí o designu, vysvětlení kódu a schopnost studenta ho změnit. Artefakt nyní může růst rychleji než učení, které má ukazovat.

Viz také: Přenastavení hodnocení pro éru AI

Pro vývojáře

Bez obrázku by měl doučovací nástroj s AI odmítnout

Šest modelů AI schopných pracovat s obrázkem řešilo 376 úloh matematiky pro střední školy, jejichž obrázky nesly klíčové informace. S obrázkem jich nejlepší vyřešil něco přes polovinu; bez něj odmítly téměř pokaždé.

Berte odmítnutí jako signál chybějícího kontextu. Skóre nebo aktualizace profilu vytvořené bez obrázku měří jinou úlohu.

Viz také: Výuka matematiky

Doučovací nástroj pro psaní, který klade otázky a psaní nechává studentům

MAIKE klade otázky a diagnostikuje argumenty, zatímco text eseje nechává studentovi. Mezi 65 studenty středních škol se zlepšení vyrovnalo kontrolnímu chatbotovi, 40 % proti 41 %, a uživatelé MAIKE strávili více tahů u myšlenek; nikdo se nezhoršil.

Měřte, zda se myšlenka probraná v chatu stane revizí. Nástroj pro výuku psaní, který zlepšuje jen finální text, může obejít uvažování, které má zadání budovat.

Viz také: Výuka psaní s AI

Přibližujte a zvýrazňujte snímek, zatímco běží komentář

GuideSlide komentuje prezentaci a pomocí vizualizace přibližuje část, o které se mluví. Ve studii s 24 lidmi sledujícími na telefonech klesla pracovní zátěž, porozumění vzrostlo z 5,5 na 6,5 z 9 a 21 z 22 dalo přednost této verzi.

Výhoda o den později nebyla statisticky významná, takže studie podporuje pozornost při sledování; trvalé učení zůstává neotestované. Zabudujte navádění do samotného komentáře.

Viz také: Navrhování AI do výuky

Doladěný detektor umí anonymizovat studentský text bez zkreslení podle jmen

Pět nástrojů bylo testováno na 13 613 souborech studentského textu. Doladěný GPT-4o-mini našel asi 96 % identifikujících údajů za zhruba jednu šestinu ceny Azure za token; nástroje Microsoftu častěji minuly africká a asijská jména.

Trénink na deseti přepisech fungoval na nové sadě, takže přístup se přenáší. Počítejte s druhou kontrolou, když záleží na přesnosti, a uvádějte skupiny, které váš nástroj míjí.

Viz také: Institucionální politika AI

Analýza videa dosáhla shody na lidské úrovni, s člověkem stále ve smyčce

GAIVA přepisuje, označuje a interpretuje video z výuky pro analytiku učení. Na pěti nahrávkách se její popisky shodovaly s lidskými hodnotiteli přibližně tak těsně jako dva hodnotitelé mezi sebou a odhalila druh participace, který původní teorie nepojmenovala.

Berte model jako partnera pro kódování s dohledatelným promptem a lidským rozhodnutím v každé fázi. Model také odhaluje vzorce, které by lidský hodnotitel nemusel hledat.

Viz také: Výzkum vzdělávání s podporou AI

Pro výzkumníky

Velký průměrný efekt může stále znamenat žádný spolehlivý přínos

Přehled čtyř kontrolovaných studií se 420 studenty výpočetní techniky a inženýrství našel velké průměrné zlepšení, zatímco studie se ostře rozcházely a pravděpodobný rozsah zahrnoval i žádný přínos. Evidence byla hodnocena jako velmi nejistá.

Berte velký průměr ze čtyř nepodobných studií jako hypotézu o svém kurzu. Vyzkoušejte personalizované učení tam, kde bude běžet, a řekněte přímo, jak nejistá evidence je.

Viz také: Co personalizované učení znamená

AI známkující, který zná záznam studenta, hodnotí stejnou práci jinak

Šest modelů AI známkovalo stejných 300 krátkých odpovědí s pravdivou a vyměněnou poznámkou o předchozím výkonu. Každý model oznámkoval identickou práci výše pod vysokou značkou, o 0,28 až 0,75 bodu na desetibodové škále.

Kontext studenta zde působí jako zkreslení. Uvádějte efekt kontextu vedle čísla o shodě a testujte známkování bez záznamu studenta, než model nazvete spolehlivým.

Viz také: Férovost a spolehlivost známkování s AI

Férově vypadající doučovací nástroj může skrývat 26% mezeru v dovednosti

Dva roky logů od 8 549 studentů používajících MATHia, adaptivní doučovací nástroj na matematiku, ukázaly, že studenti, kteří se ještě učí číst, zvládli dovednosti na 68,7 % proti 77,6 %, zatímco celkové měření férovosti vypadalo téměř neutrálně. Jedna dovednost skrývala 26% mezeru v predikovaném zvládnutí.

Doučovací nástroj neměl složku čtenářské dovednosti, takže výuka čtení byla chybějícím faktorem v matematickém systému. Modelujte dovednost a uvádějte mezery na úrovni, kde by učitel zasáhl.

Viz také: Zkreslení a férovost AI ve vzdělávání

Falešné poplachy detekce jsou problém správy a řízení

Přehled 90 studií zjistil, že detektory AI označují legitimní psaní v míře, kterou nelze sloučit, protože nástroje, prahy, datasety a jazyky se liší. Abstrakty, přehledy literatury, odpovědi u zkoušek, přeložený text a upravená próza byly označovány dál.

Náprava je procedurální: transparentní používání, lidská revize, gramotnost v oblasti AI, výslovná institucionální politika a cesta odvolání. To patří do správy a řízení, kde je nastavení detektoru jednou částí.

Viz také: Máme používat detektory AI?

Shoda s lidskými hodnotiteli může stále minout práci

Dvaadvacet modelů AI známkovalo 100 položek na úlohu napříč krátkými odpověďmi, kódem a esejemi. Většina se u krátkých odpovědí shodla s lidmi, čtyři se u kódu shodly nebo je předčily a u esejí lidské úrovně nedosáhl žádný.

Vysoké číslo shody může koexistovat s AI známkujícím, který známkuje poznámku a míjí odpověď. Přidejte do hodnocení pozměněné odpovědi a uvádějte, kde se model odchyluje od práce.

Viz také: Férovost a spolehlivost známkování s AI

Pro administrátory

Evidence o edtech pro neurodivergentní studenty je soustředěná a vedená výzkumníky

Přehled 93 studií zjistil, že autismus dominoval evidenci o edtech pro neurodivergentní studenty s 39,8 %, před intelektuálním postižením, ADHD a dyslexií. Nejvíce studované byly rozšířená realita (VR a AR); sociálním a vrstevnickým výsledkům se dostalo méně pozornosti a děti měly málo co říct.

Ptejte se na výsledek, na kterém třídě záleží, a na studenty, kteří byli do hodnocení zahrnuti. Tvrzení validované jen výzkumníky se může vzdálit lidem, kterým má sloužit.

Viz také: AI pro studenty se zdravotním postižením a neurodivergentní studenty

Studenti chtěli institucionálního asistenta pro zpětnou vazbu

Třináctiměsíční program společného návrhu s 315 studenty a 20 zaměstnanci zjistil, že 73 % oceňovalo zpětnou vazbu vázanou na jejich studium a dostupnou nonstop. Kartičky a kvízy získaly více pozitivních komentářů než otevřený chat a 16 z 18 beta testerů asistenta chtělo.

Riziko adopce představuje 10 % až 15 % těch, kdo ho odmítli z hodnotových důvodů. Berte jejich obavy vážně. Před pilotem vysvětlete, jak se nakládá se studentskými daty a co asistent neumí, a dejte studentům možnost odhlásit se.

Viz také: Navrhování AI do výuky

Dohled při zkouškách chytá podvádění a přesouvá náklady na nejméně zvýhodněné

Přehled 32 studií zjistil, že dohled s AI chytá vydávání se za jiného a podvádění, zatímco falešné poplachy, selhání osvětlení a připojení, úzkost a újmy na soukromí dopadají nejtvrději na nejméně zvýhodněné. Automatizovaný dohled tvořil 59 % studií.

Autoři doporučují alternativní hodnocení a kombinaci lidského a automatizovaného monitorování. Omezte rizikovou online zkoušku dřív, než přidáte další detektor.

Viz také: Institucionální politika AI

Report z dashboardu zvedl dokončení, zatímco skóre testů zůstalo stejné

Učitelé noví v online doučovacím nástroji na matematiku byli náhodně vyzváni, aby otevřeli report dashboardu analytiky učení o výkonu studentů u prvního zadání. Nezměnil se podíl těch, kdo začali další zadání, ani přírůstky ve skóre testů studentů, i když dokončení vzrostlo v menších třídách.

Než koupíte analytiku, otestujte, zda učitelé report otevřou, jednají podle něj a vidí přírůstek v učení; samotné zvednutí dokončení nestačí.

Viz také: Ověřování, zda vzdělávací AI funguje

Téměř žádná instituce nedokáže pojmenovat, kdo vlastní správu AI

Průzkum mezi 387 studenty a zaměstnanci ve 13 zemích zjistil, že jen 17 % vědělo o určené roli pro správu a řízení AI. Ze zbývajících 71 % považovalo takovou roli za potřebnou a 76 % očekávalo, že zlepší jejich zkušenost.

Respondenti popisovali roli s mandátem; výbor bez mandátu nechává tuto roli neobsazenou. Dejte vlastníkovi pravomoc nad školením, bezpečností dat, etickou revizí a strategií a zveřejněte, kdo ji má.

Viz také: Institucionální politika AI

Také přidáno tento týden

Stránka deníku uvádí každou studii přidanou v uplynulém týdnu, včetně těch, které zde nejsou shrnuty.

Poznámky k webu

Newsletter a jeho RSS kanál jsou nyní k dispozici také ve španělštině: navštivte španělský web newsletteru nebo odebírejte španělský RSS kanál newsletteru. Chcete-li požádat o další lokalizaci, založte issue nebo kontaktujte vývojáře webu.

Web je mnohem lehčí. Celý strom konceptů a FAQ zůstává mimo každou stránku: postranní panel ukazuje deset tematických skupin a kompletní seznam načte jen tehdy, když čtenář jednu otevře, a pravý sloupec uvádí osm nedávných stránek místo třiceti. V celém buildu klesl HTML z 1,80 GB na 1,26 GB a značkování postranního panelu ze 604 MB na 87 MB.

Překlady byly obnoveny ve všech 33 nakonfigurovaných jazycích, včetně arabského, hebrejského a urdského vydání psaného zprava doleva. Shrnutí článků zůstávají pouze v angličtině.

Offline vydání se přesunula na nové místo vydání na GitHubu, takže staré odkazy na EPUB a PDF už nefungují. Každý jazykový web si ponechává svou obvyklou adresu. Soubory EPUB a PDF existují pro 19 jazyků s odkazy níže; ostatních 14 je pouze na webu.

Zdroj je veřejný na github.com/edtechdev/aied.

Sledujte přehled

Každé číslo dostanete přes kanál newsletteru ve čtečce kanálů, vložením téhož kanálu do Blogtrottr, abyste nová čísla dostávali e-mailem podle vlastního rozvrhu, nebo sledováním na LinkedIn, kde každé číslo vychází jako newsletter LinkedIn.


Týdenní přehled výzkumu AI ve vzdělávání pochází ze znalostní báze o AI ve vzdělávání, kterou generuje agent AI. Toto číslo připravil tentýž agent AI s redakčním vedením vývojáře webu a každé tvrzení výše odkazuje na stránku, ze které vzešlo.

Znalostní báze je věnována veřejné doméně pod licencí CC0 1.0. Žádná práva vyhrazena.

Našli jste v obsahu chybu? Nahlaste ji na GitHubu nebo kontaktujte vývojáře webu, Doug Holton.

Vložit tuto stránku

Zkopírujte níže uvedený kód a vložte tuto stránku do systému pro správu výuky nebo jiného webu. Vložená verze zobrazuje pouze obsah stránky — skrývá záhlaví, navigaci a zápatí webu.