Melyek az írásoktatás bevált gyakorlatai a MI kontextusában?

Ennek az angol oldalnak a gépi fordítása, amelyet még nem ellenőrzött anyanyelvi beszélő.

Éppen egy feladatkiírást ír át, és a szeme előtti mondat azt mondja, hogy a MI hivatkozás feltüntetésével megengedett, ami semmit nem mond meg a hallgatónak arról, hogy az eszköz szolgáltathatja-e magát az érvet. Egy kollégája kurzus szintű tiltást javasolt, és Ön gyanítja, hogy ez a legkeményebben azokat a többnyelvű szerzőket sújtja, akik a teremben vannak. Vagy egy köteg esszé simábban jött vissza, mint a mögötte álló szemináriumi vita, és Önnek olyan szabályra van szüksége, amelyet meg tud védeni a következő tantervi értekezleten.

A lényeg: nevezze meg azt a szellemi munkát, amelynek létrehozásáért a feladat létezik, tartsa annál a lépésnél a hallgatót, és adjon az eszköznek olyan feladatokat, amelyek olyasmit adnak vissza, amit a hallgatónak meg kell ítélnie. Az így megírt szabály megmondja a hallgatónak, melyik lépést védi.

A rövid változat

1. Írjon egy mondatot, amely megnevezi azt a gondolkodást, amit a feladat osztályoz, és tegye oda, ahol a hallgatók el fogják olvasni.

2. Késztesse a hallgatót arra, hogy elkötelezze magát egy állítás, egy értelmezés vagy egy durva vázlat mellett, mielőtt az eszköz látja a feladatot.

3. Lépésenként állítsa be a határt. Engedje a MI-t ott, ahol a lépés nem az, amit osztályoz, korlátozza ott, ahol az.

4. Adja a MI-nek a kritikus székét, majd osztályozza azt, amit a hallgató a válasszal tesz.

5. Tartson meg egy írásdarabot, amelyhez az eszköz soha nem nyúl, és olvassa össze a támogatott munkát azzal.

6. Mondja meg előre, mit tesz a hivatkozás feltüntetése az osztályzattal.

Nevezze meg a gondolkodást, amiért a feladat van

A MI határa a második kérdés, és a legtöbb feladatkiírás elsőként válaszol rá. Mielőtt eldönti, mi megengedett, fejezze be ezt a mondatot: ez a feladat azért létezik, hogy megmutassa, a hallgató képes X-re. Ha X az érvelés, a hallgatónak meg kell fogalmaznia és meg kell védenie az állítást. Ha X a szakterületi értelmezés, a hallgatónak meg kell hoznia az értelmezői ítéletet. Ha X a tudományos gondolkodás, a hallgatónak össze kell kapcsolnia a bizonyítékot a következtetéssel. Az a MI, amely ezt a munkát elvégzi, megtöri azt a következtetést, amelyet az esszéből le akar vonni, és a kiváló próza nem javítja meg. Az Értékelési érvényesség ezt érvényességi, nem magatartási problémaként kezeli, ezért érvel mind az írásoktatás, mind az akadémiai integritás a feladatszintű szabályok mellett, a kurzus szintű tilalmakkal szemben.

Nash és Burriss megmutatja, milyen könnyen megy félre ez a mondat. Huszonhét tanárképzésben részt vevő angoltanár tantermi MI-szabályzata közül 22 engedélyezte a MI-t ötleteléshez és ötletrohamhoz, 22 megtiltotta vagy tisztázatlanul hagyta a MI használatát mondatok, bekezdések vagy dolgozatok megírásához, és 22 egyáltalán nem mondott semmit az olvasásról. Ugyanezek a tanárok az ötletelést és az átdolgozást „gondolkodásnak” nevezték, miközben az igazi gondolkodást a végső írott szövegbe helyezték. Ha a gondolkodás végigfut a tervezésen, a vázlatíráson, az átdolgozáson és az értékelésen, akkor az a szabályzat, amely csak az utolsó produktumot védi, a rossz lépést védi, és az olvasásnak ugyanolyan kifejezett szabályra van szüksége, mint az írásnak.

Fogalmazza meg a szabályt lépésről szóló mondatként: „A MI-t arra használhatja, hogy tesztelje az ellenvetéseket egy állítással szemben, amelyet már megfogalmazott. Arra nem használhatja, hogy megfogalmazza az állítást vagy az ahhoz tartozó bizonyítékot.” A hallgató tud mit kezdeni ezzel. Az „MI megengedett hivatkozás feltüntetésével” nem ad semmit, amivel kezdeni lehetne.

Késztesse a hallgatót elköteleződésre, mielőtt az eszköz válaszol

A műveletek sorrendje a leghasznosabb tervezési döntés ebben az irodalomban. Chen rétegspecifikus vizsgálata 168 egyetemi hallgatót vizsgált hat érintetlen osztályban, és négyféle delegálást különített el: felszíni, szerkezeti, ötlet- és érvelési tehermentesítést. A nyílt MI-együttműködés hozta a legerősebb MI-támogatott írást és a leggyengébb későbbi önálló teljesítményt. Az érvelés delegálása volt a réteg, amely a leginkább negatívan kapcsolódott az önálló magasabb rendű gondolkodáshoz. A korlátozott feltétel, amely megszabta, mit delegálhatnak a hallgatók, és megkövetelte, hogy elmagyarázzák, hogyan fogadták el, módosították vagy vetették el az egyes MI-javaslatokat, jobban teljesített az önálló írásban, az érvelés mélységében és az átdolgozásban.

Az oksági állítást óvatosan kezelje. A vizsgálat kvázi-kísérleti, hat érintetlen osztállyal és a hallgatók randomizált besorolása nélkül, így az osztályok közötti különbségek összekuszálódnak a kezeléssel. Az irány illeszkedik a szélesebb kognitív tehermentesítés irodalomhoz, ezért érdemes cselekedni rá, a hatás nagysága pedig nem olyasmi, amit egy bizottság előtt idézni kellene.

A kiíráson ez egy sort jelent: a hallgató egy értelmezést, egy hipotézist, egy érvet vagy egy elemzést hoz, és a MI-t arra kérik, hogy támadja meg. Az „Íme három ellenvetés az érvelésemmel szemben” a szerzőnél tartja a gondolkodást. Az „Írd meg az érvelésemet” nem, bármit tesz is a hallgató utána a kimenettel.

Tekintse az első vázlatot a drága lépésnek

A különböző szakaszokban nyújtott segítség különböző kárt okoz. 253 szerző vizsgálatában bármilyen MI-segítség csökkentette a munka érzékelt szerzőségét, a vázlatírási segítség csökkentette a legjobban, a tervezési segítség a legkevésbé. A nagyobb mennyiségű, MI által hozzáadott szöveg és ötlet jobb esszémonysággal és alacsonyabb szerzőségérzettel járt ugyanabban a beadandóban (a tervezéstől az átdolgozásig tartó szerzőségvizsgálat). Ez az a kombináció, amelyre tervezni kell: az erősebb esszé és a gyengébb szerzőségérzet együtt érkezik, és az utóbbi az, amin az írásban a cselekvőképesség nyugszik.

Ha a szerzőség számít a kurzusán, ossza meg az engedélyeket. Az a MI, amely a tervezésre kérdez rá, megkérdezi, milyen bizonyítéka van már a hallgatónak, vagy megnevez egy ellenérvet, amelyet a hallgató kihagyott, szinte bárhol védhető. Az a MI, amely bekezdéseket generál, nehezen védhető ott, ahol a szövegalkotás a célkészség. Ahol a szövegalkotás nem cél, ott a számítás megváltozik.

Lépésenként állítsa be a szabályt

Egy érdemes sorozat a MI-t tanácsadói szerepben tartja, és az érvelést a hallgatónál hagyja:

Szakasz	A hallgató teszi	Mit tehet a MI	Gyűjthető produktum
1. Találkozás a bizonyítékkal	Olvas, megfigyel, jegyzetel, számol, lefuttatja a kísérletet	Semmit, vagy csak tisztázást	Jegyzetek, annotációk, megfigyelések
2. Álláspont kialakítása	Értelmezést, kérdést, hipotézist, állítást generál	Kérdéseket tesz fel, feltevéseket kérdőjelez meg	Állítás- vagy hipotézisjegyzet
3. Tervezés	Eldönti a bizonyítékot, a sorrendet, a közönséget, a műfajt	Bírál egy vázlatot, alternatívákat javasol	Vázlat indoklással
4. Vázlatírás	Tartalmi prózát és érvelést állít elő	A tanulási célnak megfelelően korlátozott	Vázlat és verziótörténet
5. Emberi válasz	Társ- vagy oktatói visszajelzést ad és kap	Semmi szükséges	Társak megjegyzései
6. MI-visszajelzés	Kritériumhoz kötött kritikát kér	Kritikus, olvasó, ellenérv-generátor, érthetőség-ellenőrző	A MI-visszajelzés átirata
7. A visszajelzés értékelése	Összeveti a társ, az oktató és a MI javaslatait, indoklással elfogad vagy elutasít	A kimenete most az értékelés tárgya	Visszajelzési döntési jegyzet
8. Átdolgozás	Tartalmi változtatásokat tesz és indokol	Teszteli az érthetőséget, alternatívákat kínál	Átdolgozás
9. Ellenőrzés	Minden ténybeli vagy forrásfüggő állítást ellenőriz	Nem tudja ellenőrizni a saját kimenetét	Források és bizonyítékok
10. Reflektálás és közzététel	Elmagyarázza a MI szerepét és azt, mi változott a gondolkodásában	Semmit	Rövid folyamatreflexió
11. Független ellenőrzés	Elmagyarázza vagy alkalmazza az érvelést MI nélkül	Semmit	Szóbeli védés, rövid írás, új eset

Ez a PAIRR kiterjesztése: vázlat, humán visszajelzés, MI-visszajelzés, összehasonlítás, átdolgozás, reflexió, egy független kiindulóponttal és az érvelés körül szorosabb határral. A középső oszlopot használja feladatként, a jobb oldali oszlopot pedig azként, amire az osztályzat támaszkodhat.

Tizenegy sor több, mint amennyire a legtöbb feladatnak szüksége van. Szűkítse a táblázatot azokra a lépésekre, amelyeket a tanórán ténylegesen meg tud különböztetni: a bizonyítékkal való találkozás, az álláspont kialakítása, a vázlatírás és az átdolgozás. Ebben a rövidebb változatban a találkozás és az álláspont az, ahol a konstruktum él, a vázlatírás a vitatott lépés, a formázás vagy a hivatkozásellenőrzés pedig egyértelműen megengedhető. A táblázat megírása az, ahogyan megtalálja azt a két vagy három helyet, ahol a szabályának mondania kell valamit, így a három záradékból álló, követhető szabály jobb, mint egy mátrix, amelyet senki nem olvas el.

Tartsa a humán visszajelzést a körben

A legnagyobb tantermi vizsgálat itt a PAIRR: 654 hallgató tíz íráskurzuson és három írásintenzív STEM-kurzuson. Vázlatot írtak, társértékelést végeztek, rubrikaalapú MI-visszajelzést kaptak, összevetették és értékelték mindkét forrást, átdolgozási terveket írtak, átdolgoztak és reflektáltak. Ötvennyolc százalékuk a társ- és a MI-visszajelzés kombinációját részesítette előnyben. Hat százalékuk kizárólag a MI-visszajelzést. A hallgatók hasznosnak találták a MI-t a széles, rubrikaorientált átdolgozási tanácsokhoz, a társak pedig kontextuális tudást és hiteles közönségválaszt szolgáltattak.

Legyen pontos az állításban. A PAIRR a hallgatók visszajelzéssel kapcsolatos tapasztalatát és értékelését mérte, nem hosszú távú tanulási nyereséget, így erős bizonyíték egy visszajelzési terv mellett, és gyengébb bizonyíték arra, hogy az írás hónapokkal később javul. Tartsa meg a társ-lépést akkor is, ha a MI-lépés gyorsabb. A visszajelzés munka nagy része a két forrás összehasonlításában történik, és ennek elhagyása kiveszi azt a részt, amelyet a hallgatók szerint értékeltek.

Osztályozza azt, amit a hallgató a visszajelzéssel tett

A visszajelzés-írástudás az a képesség, hogy valaki visszajelzést kérjen, megítélje annak minőségét, kezelje a rá adott reakcióját, és átdolgozássá alakítsa. Azok a hallgatók, akikben több van ebből, sokkal többet profitálnak a MI-visszajelzésből. Azok, akik a kimenetet mérvadónak tekintik, kevesebbet nyernek (MI-visszajelzés minősége).

Egy rövid döntési táblázat láthatóvá teszi ezt a képességet, javaslatonként egy sorral: a MI javaslata, elfogadás / elutasítás / módosítás, az indok, és a döntés mögötti rubrikakritérium vagy bizonyíték. Négy oszlop, esszé nem szükséges. Ez a modell kimenetét az értékelő ítélőképesség anyagává teszi, és ad valamit, ami osztályozható, és nem a próza.

Írjon le egy erős sort olyan gondosan, ahogy egy tézismondatot ír le: megnevezi a rubrikakritériumot, rámutat egy szöveghelyre vagy egy bizonyítékra, és elmagyaráz egy változtatást, amelyet a hallgató ténylegesen végrehajtott. Egy „jó pont, egyetértek” sor semmit nem ér. A hallgatók az előttük álló példához írnak, tehát a példa maga az utasítás.

Tegye olcsóvá és konkrétissá a közzétételt

A hallgatók elrejtik a MI-használatot, amikor a szabályzatok kétértelműek, büntető jellegűek vagy megbélyegzők, és az őszinteség gyanút vonhat magára (MI-használat és közzétételi nyilatkozatok; a hallgatói racionalizálás kutatása). A közzétételt pedagógiailag az teszi hasznossá, hogy döntéseket rögzít: mire használták az eszközt, mit adott neki a hallgató, mely javaslatok számítottak, mit fogadott el vagy vetett el a hallgató.

Mohamed és Temimi szolgáltatja a mechanizmust. A közzététel csak akkor lesz vonzó választás, ha az őszinteség ára alacsony marad. A detektorok őszinte hallgatókkal szemben is téves pozitívokat termelnek, így a szigorúbb megfigyelés viszonylag vonzóbbá teheti a rejtőzködést. Tanácsuk az, hogy arra a hallgatóra tervezzen, akit a leginkább kísért a rejtőzködés, és a bevallott használatot kontextusként olvassa, ne vallomásként.

Két részlet végzi a munka nagy részét az űrlapon. Konkrét használatokat kérjen kategória helyett, és mondja meg, hogyan hat a nyilatkozat az osztályzatra. Aki nem tudja, a legrosszabbra fog gondolni.

Négy kérdés elegendő a legtöbb feladathoz: a munka melyik lépésénél használták az eszközt, mit adott neki a hallgató, mely javaslatok változtatták meg a vázlatot, és melyeket vetették el és miért. Ez utóbbi kérdés a leginformatívabb, mert az indokolt elutasítás az ítélőképesség bizonyítéka, az elfogadott javaslatok listája pedig nem.

Igazítsa a szabályt ahhoz, amit a szakterülete írásnak nevez

Fogalmazás és írástanfolyamok

A fogalmazástanároknak van a legerősebb okuk a folyamat védelmére, mert a vázlatírás, a retorikai döntések, az átdolgozás, a közönségtudat és a hang a tanulási cél, nem pedig ezek bemutatása. Gyűjtsön több független mintát a félév elején, hogy Ön és a hallgató is tudja, mit tud most a szerző. Vezesse be a MI-t közönségként, kritikusként és átdolgozási partnerként: kérdezze meg, hol veszíti el a fonalat az olvasó, generáljon ellenvetéseket egy tézissel szemben, hasonlítson össze egy vázlatot a rubrikával, jelölje meg a nem támogatott állításokat, magyarázza el, miért tűnik egy bekezdés következetlennek. A hallgató ítél meg minden javaslatot.

Tartsa a társértékelést a MI-visszajelzés mellett, mert a társak olyan kontextuális és közönségtudást adnak, amely hiányzik a modellből, és a kettő közötti különbség értékelése önmagában is szerzői képzés. Legyen óvatos, ha a MI hosszú szakaszokat generál az első vázlatból, amikor a szövegalkotás megtanulása a cél, a fentebb tárgyalt szerzőségi és tehermentesítési okok miatt. Kerülje a nyelvtanra, a megfogalmazásra vagy a nyelvi segítségre vonatkozó átfogó tilalmakat, amelyek szükségtelen akadályokat állítanak a többnyelvű szerzők elé. Válassza külön a nyelvi támogatást a szellemi szerzőségtől: a kifejezésben nyújtott segítség rendben van, és a hallgató marad felelős az ötletekért, a bizonyítékokért, a retorikai döntésekért és a jelentésért. Auditálja magát a visszajelzést is, mert Tan és mtsai azt találták, hogy az azonos írás több dicséretet és kevesebb tartalmi kritikát kapott, amikor a hallgató demográfiai vagy képzési jellemzőit beleírták a promptba, ami a elfogultság mérséklését a visszajelzés tervezésébe helyezi.

Bölcsészettudományi és társadalomtudományi kurzusok

Az értelmezés általában a célképesség, ezért a forrással való találkozást tegye meg a MI-vel való találkozás elé. A hallgatók annotálják az elsődleges szöveget, a történeti forrást, a műalkotást, az archív tételt, az interjút vagy az elméleti szöveghelyet, és kialakítanak egy kezdeti olvasatot, mielőtt bármit megkérdeznének. Utána a modell ellenpontként működik: kínáljon alternatív olvasatot, mondja meg, milyen bizonyíték cáfolná ezt az értelmezést, nevezze meg az érvelés feltevéseit, generáljon olvasatot egy ellentétes elméleti perspektívából. A hallgató dönti el, melyik olvasatot támogatja ténylegesen a szöveg.

A modell kritikáját szakterületi munkaként adja ki. Adjon a hallgatóknak egy MI-értelmezést egy versről, eseményről, érvelésről vagy társadalmi jelenségről, és kérdezze meg, mit vesz észre, mit hagy ki, milyen bizonyíték támogatja az állításait, kinek a perspektívája hiányzik, és hol omlasztja össze a kétértelműséget sima válasszá. Ez megtartja az értelmezői ítéletet annak, aminek megtanításáért a bölcsészettudományi kurzus létezik. Értékelje az értelmezői döntéseket és azok bizonyítéki igazolását, és használjon rövid konzultációs kérdést, például: „Miért olvasta ezt a szöveghelyet így, és nem a másik olvasat szerint, amelyet elutasított?” Annak találgatása, hogy egy mondat gépi írásúnak tűnik-e, gyengébb mérőszám, amint azt az MI-detektálás kifejti.

STEM-kurzusok és laborjegyzőkönyvek

Először egy pontosítás: ez a tudásbázis sokkal erősebb bizonyítékokkal rendelkezik az MI-támogatott akadémiai írásról általában, mint a laborjegyzőkönyv-írásról konkrétan. A gyakorlati és laboratóriumi pedagógia továbbra is alulkutatott, a mérnöki oktatás irodalmában is, így a következők az írásról, a tehermentesítésről, az érvényességről és a mérnöki eredményekről szóló megállapításokat olyan környezetre alkalmazzák, amelyet ezek a vizsgálatok nem teszteltek.

A határt a tudományos gondolkodás körül húzza meg, nem a próza egésze körül. A hallgatók maradnak felelősek a megfigyelésekért, a nyers adatokért, a számításokért, a bizonytalanságért, az ábrákért, az elemzési döntésekért, az eredményekért és az állítás-bizonyíték érvelésért. Ha ezek megvannak, a MI ésszerűen segíthet a szervezésben, az olvashatóságban, az átmenetekben és a szakterületi konvenciókban, ami ugyanaz a felszín és érvelés közötti felosztás, mint Chen vizsgálatában.

Egy MI-korszakbeli laborkurzus jelentéscsomagja tartalmazza a jegyzőkönyvet, valamint kiválasztott nyers adatokat, számításokat vagy jegyzetfüzet-kimenetet, egy ábrát hallgatói értelmezéssel, és egy rövid nyilatkozatot arról, hogyan következik a központi következtetés a bizonyítékokból. Nagy tétű jegyzőkönyveknél tegyen fel egy vagy két egyénített utókérdést egy grafikonról, egy anomális eredményről, egy módszertani döntésről vagy egy korlátról. Ne engedje, hogy az írásbeli folyékonyság a fogalmi megértés helyébe lépjen: az automatizált fizika pontozás alulbecsülheti a fogalmi megértést, amikor a nyelvi kifejezés gyengébb, és ez a többnyelvű hallgatókat sújtja a legjobban (Automatizált esszéértékelés). Ha az érvelés és az írás is cél, pontozza őket külön.

Mérnöki kurzusok

A szakmai elszámoltathatóság megváltoztatja a megfogalmazást. 99 empirikus mérnöki oktatási vizsgálat áttekintése az átláthatóságot, a emberi felügyeletet, a hallgatói függetlenséget, a magánszférát, a szerzőséget, a méltányosságot és a jótékonyságot azonosította visszatérő etikai aggályként, és amellett érvelt, hogy a MI etikája a szakmai formálódásba tartozik, nem csupán a szabálykövetésbe. Egy labor- vagy tervezési jegyzőkönyvben kérje meg a hallgatókat, hogy tüntessék fel a segítséget, és igazolják, hogy ellenőrizték a számításokat, a forrásokat, a feltevéseket és a biztonság szempontjából releváns állításokat.

Tartson meg egy mintát, amelyhez az eszköz soha nem nyúl

A támogatott teljesítmény nem önálló képesség, és szüksége van legalább egy olvasatra a másodikból. Az alkalmi visszavonási feltételek elegendőek: rövid MI nélküli írás, tantermi értelmezés, szóbeli magyarázat, konzultáció, spontán átdolgozás vagy egy utófeladat, amely ugyanazt az érvelést viszi át egy új esetre. Ez a legfontosabb akkor, amikor a záródolgozat jelentős súlyt visel az osztályzatban. Ez nem jelenti minden feladat felügyeletét. Néhány elhelyezett minta kiindulópontot ad Önnek és a hallgatónak a támogatott munka értelmezéséhez, ami az Hogyan tervezzem újra az értékelést, hogy a jegy még mindig védhető bizonyítékot adjon arról, mit tud vagy mit képes megtenni a diák? oldalon kifejtett érv írásspecifikus esete.

Olvassa össze a két darabot, és kérdezze meg, hogy a támogatott darab érvelése látható-e a támogatás nélküliben is. Ahol látható, az esszé betölti a bizonyítéki szerepét. Ahol nem, a támogatott osztályzat azt méri, amit az eszköz szolgáltatott. Ez az összehasonlítás az is, amit fel kell mutatnia annak a hallgatónak, aki vitatja a jegyét, mert egy konkrét gondolkodási mozzanatra mutat, nem a prózáról alkotott benyomásra.

Döntse el, mit osztályozhat a MI

Két látszólag ellentmondó eredmény összeegyeztethető. A gondosan kalibrált, részletes rubrikákkal és példákkal dolgozó rendszerek bizonyos feladatokat jól pontozhatnak, a kész, beállítás nélküli LLM-osztályozás pedig jelentősen eltér az emberi ítélettől. Mathew és mtsai gyenge ember-MI egyezést találtak, amely szisztematikusan változik az esszé minőségével: a modellek túljutalmazzák a rövid, felszínen olvasható esszéket, aluljutalmazzák a hosszabb és erősebb esszéket kisebb felszíni hibákkal, és a skála közepe felé csoportosulnak. Ez a minta a MI-t az alacsony tétű formatív visszajelzéshez, a megjegyzések megfogalmazásához és az előszűréshez támogatja sokkal inkább, mint az önálló szummatív osztályozáshoz (Automatizált esszéértékelés).

A hallgatók maguk is hasonló határt húznak. Egy egyetemi műszaki kommunikációs kurzuson, ahol a ChatGPT pontozta a kézzel írt dolgozatokat, és ezt meg is mondták a hallgatóknak, mind a 13 résztvevő világosnak és hasznosnak találta a visszajelzést a felszíni szintű átdolgozáshoz. A legtöbben elválasztották a visszajelzés hasznosságát az értékelési felhatalmazástól: elfogadták a kritikát, és ragaszkodtak ahhoz, hogy az oktató döntse el az osztályzatot (Who Should Grade My Work? Student Perspectives on Transparent AI-Assisted Writing Assessment in Higher Education). Az emberi felügyeletet arra a pontra tervezze, ahol a MI kimenete osztályzattá válik, nem pedig olyan udvariasságként, amelyet kényelem szerint nyújtanak.

Mérje fel a bizonyítékokat, mielőtt átírja a tanmenetet

Ezeknek a terveknek az érve ígéretes, és még nem elég erős ahhoz, hogy egyetlen általános MI-írási szabályzatot igazoljon. A legjobb bizonyítékok egy része jelentős tantermi vizsgálatokból származik, mint a PAIRR a maga 654 hallgatójával. A többi nagy része kvázi-kísérleteken, kis kísérleti mintákon, fogalmi elemzéseken és még új, 2025-2026-os munkákon nyugszik: Chen korlátozott írási vizsgálata 168 hallgatót vizsgált, de csak hat érintetlen osztályt, a szerzőségvizsgálat rövid kísérleti írásfeladatot használt, és egy vizsgálat, amely azonnali minőségjavulást jelentett ChatGPT-gyakorlás után, mindössze 21 elsőéves nemzetközi hallgatót vont be, és nem igazolt hosszú távú transzfert (Leveraging ChatGPT in academic writing: ChatGPT enhances students' writing quality, writing experience, and ownership). Amit az MI az oktatásban tudásbázisa alátámaszt, az tervezési elvek együttese, és a legmegbízhatóbb, vizsgálatokon átívelő megállapítás az, hogy meg kell őrizni a hallgató cselekvőképességét, értékelő ítélőképességét, önálló kompetenciáját, szakterületi érvelését és a humán visszajelzést, miközben a MI-t arra használjuk, hogy szélesítse a hozzáférést a kritikához, a gyakorláshoz, az átdolgozási támogatáshoz és a nyelvi segítséghez.

Ennek a keveréknek gyakorlati következménye van. Változtasson meg egy feladatot, tartsa meg a produktumot, és hasonlítsa össze a következő évfolyamot a mostanival ugyanazon a mérőszámon. Egy szabály, amelyet egy félév után át tud írni, többet ér, mint egy szabályzat, amelyet nem tud tesztelni, és a fenti kis vizsgálatok nem mondják meg, mi történik az Ön kurzusán.

Amit az oktatók ebben elrontanak

Egy detektor eldönti, hogy az írás a hallgatóé-e. Nem fogja eldönteni. Egy rejtett terepvizsgálatban a MI által generált vizsgabeadandók 94%-a észrevétlen maradt, és jobb pontszámot kapott valódi hallgatóknál, egy kontrollált vizsgálat pedig azt találta, hogy a detektorok a szabálykövető, könnyű MI-szerkesztést 38-80%-ban megjelölték, miközben az emberiesített átiratok több mint 96%-át elvétették (Detecting the Undetectable? Reassessing Academic Misconduct Procedures in the Era of Generative AI; Why AI Detection Fails for Academic Integrity). A detektálás detektálási kérdésre válaszol, az érvényesség pedig más kérdés.

A kurzus szintű szabályzat világosabb, mint a feladatonkénti szabály. A Nash és Burriss szabályzatai kurzus szintű dokumentumok voltak, és 27-ből 22 engedte az ötletrohamot, 22 korlátozta vagy mosta el a szövegalkotást, 22 pedig hallgatott az olvasásról. Egy mindent lefedő dokumentum hajlamos konkrét lenni abban a lépésben, amely miatt az oktató aggódik, a többiről pedig homályos maradni.

A jobb próza azt jelenti, hogy az írásoktatás működött. A szerzőségvizsgálat jobb esszémonyságot és alacsonyabb szerzőségérzetet talált ugyanabban a beadandóban, Chen nyílt együttműködési feltétele pedig a legerősebb támogatott írást hozta a leggyengébb későbbi önálló teljesítménnyel. A próza minősége termékmérőszám. Az, amiért a kurzus létezik, képességmérőszám.

A korlátlan hozzáférés és egy jó prompt elég. Azok a hallgatók, akik a MI-visszajelzést mérvadónak tekintik, kevesebbet nyernek belőle, mint a fejlett visszajelzés-írástudással rendelkező hallgatók. A kritikához való hozzáférés és a kritika használatának képessége külön vagyon.

A MI betiltása védi az írás folyamatát. A tiltás olyan kérdésre válaszol, amely lépésenként különbözik, és akadályokat állít azoknak a többnyelvű szerzőknek, akiknek olyan nyelvi támogatásra van szükségük, amelynek semmi köze a szerzőséghez. Egy működőképes felosztás a kifejezés és a szellemi felelősség között húzódik.

Mi jön vissza Önre

„Nincs időm még egy produktumot elolvasni.” Akkor tegye kicsivé a produktumot: négy oszlop döntési táblázat, vagy öt perc tantermi írás független mintaként. A korpusz nem közöl javítási időre vonatkozó adatot ezekhez a tervekhez, így a munkaterhelés érvet egyetlen feladaton kell kipróbálni, nem ebből az oldalból feltételezni.

„A hallgatóim akkor is használni fogják a MI-t, bármit mond a szabály.” Használni fogják, és a tervezési kérdés az, melyik választ teszi a feladata a legkönnyebbé. A semmibe nem kerülő nyilatkozat és a folyamatért fizető rubrika teszi a közzétételt az olcsóbb úttá. Ez a mechanizmus modellezésből származik, nem egy közzétételi szabályzat kipróbálásából, ezért tekintse az előrejelzést ésszerűnek és megerősítetlennek.

„A tiltás egyszerűbb, és védi a folyamatot.” Egyszerűbb, igen. A fenti szabályzatok megmutatják, hogyan csúszik egyetlen kurzus szintű szabály hallgatásba azokban a lépésekben, amelyek számítanak, az átfogó nyelvi korlátozások pedig azokat a hallgatókat sújtják, akiknek a leginkább szükségük van rájuk.

„A társértékelés most felesleges, hogy a MI másodpercek alatt válaszol.” A PAIRR hallgatóinak ötvennyolc százaléka a kombinációt részesítette előnyben, 6% pedig kizárólag a MI-t, és az ok, amit megadtak, a társak által szolgáltatott kontextuális és közönségtudás volt. Ez tapasztalatot mér, így kevésbé visz messzire, mint egy tanulási nyereségről szóló eredmény tenne.

„A modell olyan jól osztályozza ezt a feladatot, mint én.” A kalibrált, részletes rubrikákkal és kidolgozott példákkal dolgozó rendszerek bizonyos feladatokat jól pontozhatnak. Az általános osztályozás nem, és Mathew és mtsai megmutatják, hogy az egyet nem értés az esszé minőségét követi, nem pedig véletlenszerűen szóródik, ami a nehezebben észrevehető hibatípus. Tesztelje az eszközt a saját javított készletén, mielőtt az osztályzathoz nyúl.

„Ez bünteti azokat a hallgatókat, akiknek gyengébb az akadémiai angoljuk.” Megteheti, ha a szabály a kifejezést és a szerzőséget egy dologként kezeli. Válassza szét őket, és auditálja a MI-visszajelzést arra a mintára, amelyet Tan és mtsai találtak, ahol az azonos írás több dicséretet és kevesebb tartalmi kritikát kapott, amint demográfiai vagy képzési jellemzők kerültek a promptba. A korpusz dokumentálja ezt az elfogultságot. Nem közöl kipróbált orvoslást, így a saját összehasonlítása az ellenőrzés.

Mit tegyen ezen a héten

1. Írja meg a képességmondatot a következő nagy feladatához, és tegye rá a kiírásra.

2. Adjon hozzá egy sort, amely megköveteli a hallgató állítását, értelmezését vagy durva vázlatát bármilyen MI-használat előtt, és mondja meg, mit fog gyűjteni.

3. Jelölje meg a feladat minden lépését konstruktumhordozóként vagy annak nem, és írja át a MI-szabályt úgy, hogy engedje az eszközt ott, ahol a lépést nem osztályozza.

4. Adjon a rubrikához négyoszlopos visszajelzési döntési táblázatot, pontokkal.

5. Ütemezzen be egy rövid írásdarabot, amelyhez semmilyen eszköz nem nyúl, és most döntse el, melyik feladathoz tartozik.

Hová tovább

Az érv értékelési oldala, beleértve a hitelesített lépések tervezését, a Hogyan tervezzem újra az értékelést, hogy a jegy még mindig védhető bizonyítékot adjon arról, mit tud vagy mit képes megtenni a diák? oldalon van. Azt a szabályzati dokumentumot, amelyet a hallgatók ténylegesen olvasnak, lásd a Hogyan írjak kurzusszabályzatot a MI-ről, és hogyan kommunikáljam a diákok felé? oldalon, magukat a visszajelző eszközöket pedig az AI Feedback Quality oldalon. A Hogyan tanítsam meg a hallgatóknak a MI-kimenet ellenőrzését? azt tárgyalja, mit kellene a hallgatóknak ellenőrizniük, amikor a modell állítást vagy forrást szolgáltat, a Coach not crutch: Evidence that AI can improve writing skill despite reducing effort fogalmi oldal pedig megfogalmazza azt a határt, amelyre ez az oldal újra meg újra visszatér.