Hogyan támogathatják a MI-ágensek a hallgatókat és az oktatókat?

Ennek az angol oldalnak a gépi fordítása, amelyet még nem ellenőrzött anyanyelvi beszélő.

Egy szállítói bemutató negyven percig tart. Az ágens elolvassa a tantárgyi tematikát, megírja a jövő heti kvízt, megjelöl három hallgatót, akik nem nyitották meg az olvasmányt, és felajánlja, hogy ír nekik. A rektorhelyettese a hónap végére licencdöntést akar.

Egy ágens tervez, eszközöket hív, kontextust tart, részfeladatokra bontja a munkát, és fordulók között alkalmazkodik, ami több, mint amit egy csevegőbot tesz. A hallgatói és oktatói szerepek, amelyeket ez megnyit, valósak. A bizonyíték nem mutatja, hogy a nagyobb autonómia több tanulást eredményez: az itteni egyetlen közvetlen összehasonlításban az ágens és a csevegőbot döntetlent ért el. Tegye az autonómiát oda, ahol egy ember ellenőrzi a kimenetet, tartsa a tervezést a tanulónál, és a tanítás minőségét a saját rubrikájával pontozza.

A rövid változat

1. Nevezze meg a feladatot a termék előtt.

2. Az oktatói oldalon kezdjen, ahol a tanár már úgyis átnézi a munkát.

3. A hozzáadott autonómiát kezelje költségként, amíg a bizonyíték mást nem mond.

4. A tervezés és az ítélkezés maradjon a tanulónál, mert ezeket hivatott a feladat kiépíteni.

5. Pontozza az ágenst a saját rubrikájával, és ütemezzen támogatás nélküli ellenőrzést a pilot vége előtt.

Válassza ki a feladatot, mielőtt az ágenst választja

Ágens munkafolyamatok az oktatásban négy visszatérő képességet nevez meg: reflexió, tervezés, eszközhasználat és többágenses együttműködés. Mindegyik költséget ad a lehetőség mellé, az értelmezhetőségben, a koordinációban, a bizalomban, a késleltetésben és a felügyeletben.

A hallgatói oldali szerepek az adaptív tutorálástól és tanulástervezéstől a formatív visszajelzésen, az irányított problémamegoldáson és gyakorlatgeneráláson át az előfeltétel-ajánlásokig és a reflektív metakognitív promptolásig terjednek. Az oktatói oldali szerepek lefedik az anyagfejlesztést, a kérdésgenerálást és érvényesítést, a visszajelzés triázsát, a kurzus analitikáját, a tanítási tervezést, az erőforrás-visszakeresést és a specializált alágensek orchestrálását.

Ezek közül kettő korábban biztonságosabb, mert mindkettő olyan artefaktumot állít elő, amelyet egy ember olvas el a hallgatók előtt: egy érvényesítővel párosított kérdésgenerátor és egy vázlat, amelyet a tanár szerkeszt.

Ott kezdje, ahol egy ember már ellenőrzi a munkát

A Tutor CoPilot, egy ember-MI rendszer első randomizált kontrollált vizsgálata élő tutorálásban, valós idejű útmutatást adott kezdő tutoroknak tapasztalt tutorok következtetéseiből merítve, 900 tutort és megközelítőleg 1 800 hallgatót átfogva. A hozzáféréssel rendelkező tutorok hallgatói 4 százalékponttal nagyobb valószínűséggel sajátítottak el témákat, ami a legrosszabb értékelésű tutoroknál 9 pontra emelkedett; az ő hallgatóik utolérték a kontrollcsoport jobban értékelt tutorainak hallgatóit. Ez tutoronként évente mintegy 20 dollárba került, és több mint 550 000 tutorálási üzenet elemzése azt mutatta, hogy a tutorok a válaszadásról a vezető kérdésekre váltottak. Ez az MI, amely a tanárt támogatja.

Az ágens nem a hallgatót tanította. Egy embert látott el a beszélgetés közben, és az ember döntötte el, mit mond. A ciklusban lévő ember és a munkához közeli kimenet az, ami átvihetővé teszi az eredményt egy másik kurzusra.

Ne feltételezze, hogy a nagyobb autonómia több tanulást vásárol

Egy 130 hallgatót érintő vizsgálat egy e-kereskedelmi kurzuson azt találta, hogy a generatív MI csevegőbotokat és az ágenseket egyaránt a hagyományos e-tanulás fölé értékelték a tanulás és a személyre szabás tekintetében, anélkül hogy szignifikáns különbség lett volna a csevegőbot és az ágens között. Hozzáadott autonómia, hozzáadott érték nélkül azokon a mérőszámokon.

A vizsgálat keretrendszere az ágenseket korlátozott, emberi felügyelet melletti tanulási partnerekként kezeli, a célokat, ellenőrzőpontokat és végső döntéseket emberekre hagyva. Az ágenscímkén túl ezt irányítási szabállyá teszi: az autonómia nem haladhatja meg a bizonyíték érettségét vagy az elszámoltatható emberi kontroll erejét, és a bizonyíték a legerősebb az artefaktumszintű kimeneteknél, a leggyengébb a tartós tanulásnál és az esélyegyenlőségnél.

A tanulói oldali kockázat ugyanabba az irányba fut. Egy ágens, amely a hallgató helyett tervez és figyel, eltávolítja azt a gyakorlást, amely az önszabályozást kiépíti, és tehermentesítésre csábít. A bevált gyakorlatokra vonatkozó útmutatás szándékos súrlódást, elhalványuló állványozást és emberi felügyeletet kér. A produktív súrlódásnak vannak működő példái. A konstruktív konfliktust kereső ágensek, amelyek vitatkoznak egy gyenge tervezéssel, javították a tervezési kimeneteket az áttekintett kutatásban. A szimulált társak támogatják a együttműködő tanulást és a szókratészi kérdezést, a klinikai szimulációk pedig lehetővé teszik a tanulóknak a gyakorlást ott, ahol a hiba olcsó.

A teszt bármelyikükre: az ülés után mit tud a hallgató megtenni, amit korábban az ágens tett? Az ítélkezés átadása megfosztja a hallgatót az önállóság gyakorlásától.

Ellenőrizze az ágenst a saját ítéletével szemben

Nyolc MI-tanítási ágenst telepítettek egy orvosi tantervben, és a platform által generált pontszámok és egy független szakértői rubrika eltérően rangsorolták őket. A platform által harmadiknak rangsorolt ágens a tanítási minőségben az utolsó lett. A platformpontszámok a hallgatói teljesítményt indexelik, amely olyan okok miatt mozdul, amelyeknek semmi közük a tanításhoz.

Kérdezze meg, mit számol egy irányítópult-szám, ki írta a mögötte álló rubrikát, és hogyan nézne ki egy alacsony pontszám a hallgatói munkában. A pedagógiai biztonság ugyanabba az áttekintésbe tartozik, mert a ágensek lánca megnehezíti annak megmondását, melyik komponens elszámoltatható, amikor egy válasz helytelen.

Tervezze meg a kikapcsolást

Randomizált vizsgálatok azt mutatják, hogy a rövid MI-segítség lefojthatja a későbbi támogatás nélküli teljesítményt, és a kivonás utáni időszak, a kognitív kimosódás, szinte teljesen méretlen. Az oldal mögötti szintézis egy 474 vizsgálatot átfogó áttekintő tanulmányra támaszkodik, és azt találja, hogy a munka a felsőoktatásra, a STEM-re, rövid távú tervekre és szövegalapú tutorálásra összpontosul, és csak kisebbségük alapul kifejezetten oktatáselméleten. Egy pilot, amely akkor ér véget, amikor a licenc lejár, rossz ablakot mért.

Amit az adminisztrátorok elrontanak ebben

Az ágens egy továbbfejlesztett csevegőbot, tehát a többletnek meg kell látszania a kimenetekben. A 130 hallgatót érintő összehasonlításban mindkét MI-feltétel legyőzte az e-tanulást, és egyik sem győzte le a másikat.

Az irányítópult a tanítás minőségét rangsorolja. A hallgatói teljesítményt rangsorolja, és nyolc ágens olyan rangsort adott, amely a harmadik és az utolsó helyet megfordította egy szakértői rubrikához képest.

Az autonómia a megvásárolandó funkció. Az arányossági szabály az ellenkező irányba fut, és a bizonyíték ott a legvékonyabb, ahol az autonómia a legnagyobb.

A hozzáférés bezárja az esélyegyenlőségi szakadékot. A képességes ágensrendszerekhez való egyenlőtlen hozzáférés szélesítheti azt, és egy ágens nagy léptékben reprodukálja a tanítóadatainak elfogultságát.

Mi jön vissza Önre

„A hallgatók egyszerűen hagyni fogják, hogy elvégezze a munkát.” Néhányan igen, és az architektúra dönti el, milyen könnyen. Az ágensek, amelyek a hallgató helyett terveznek és vázlatot írnak, erre csábítanak. Azok, amelyek próbálkozást követelnek, majd kérdést tesznek fel, nem.

„A szállító értékelése szerint működik.” Kérdezze meg, mit számol a szám. Ha a platform által mért hallgatói teljesítmény, akkor a hallgatókat méri legalább annyira, mint az ágenst.

„Senki nem tudja megmondani, melyik ágens elszámoltatható egy láncban.” Ez igaz a legtöbb jelenlegi telepítésre. Nevezzen meg egy felelőst a láncra, naplózza, melyik komponens melyik kimenetet állította elő, és tartson emberi ellenőrzőpontot, mielőtt bármi eljut egy hallgatói nyilvántartásba.

Mit tegyen ezen a héten

1. Írja le a feladatot és a kimenetet, amely alapján megítéli, egy-egy mondatban, a következő szállítói hívás előtt.

2. Pontozza egy ágens kimenetét a rubrikájával tíz valós hallgatói munkán, és tartsa meg a pontszámokat.

3. Adjon hozzá egy dátumozott, felelőssel ellátott támogatás nélküli feladatot a pilot tervéhez.

Hová tovább

A hatékony MI-tutor fejlesztése a hallgatói oldali felépítést tárgyalja a célkitűzéstől a súgylétráig, az MI-beavatkozások értékelésének módszerei pedig azt, hogy működött-e a dolog. Az intelligens tutorálás és a MI-írástudás adja azt a tervezési szótárt, amelyet ez az oldal feltételez.