Jakie są najlepsze praktyki w nauczaniu pisania w kontekście SI?

Tłumaczenie automatyczne tej strony z języka angielskiego, jeszcze nie sprawdzone przez rodzimego użytkownika języka.

Trzeba przepisać kartę zadania, a zdanie, które leży przed oczyma, mówi, że SI jest dozwolona za podaniem informacji, co nie mówi studentowi nic o tym, czy narzędzie może dostarczyć sam argument. Kolega proponuje zakaz na cały kurs i można podejrzewać, że uderzy on najmocniej w osoby piszące w kilku językach, obecne w sali. Albo partia esejów wróciła gładsza niż dyskusja seminaryjna, która za nimi stała, i potrzebna jest reguła, której można bronić na następnym posiedzeniu komisji programowej.

Najważniejsze: należy nazwać pracę intelektualną, dla której istnieje zadanie, zatrzymać ten krok przy studencie i dawać narzędziu zadania, których wynik student musi ocenić. Reguła zapisana w ten sposób mówi studentowi, którego kroku broni.

W skrócie

1. Napisz jedno zdanie nazywające myślenie, które ocenia zadanie, i umieść je tam, gdzie studenci je przeczytają.

2. Spraw, aby student zadeklarował tezę, interpretację lub wstępny szkic, zanim narzędzie zobaczy zadanie.

3. Wyznacz granicę dla każdego kroku. Dopuść SI tam, gdzie krok nie jest tym, co oceniasz, ogranicz ją tam, gdzie jest.

4. Oddaj SI fotel krytyka, a następnie oceń, co student zrobi z odpowiedzią.

5. Zachowaj jeden tekst, którego narzędzie nigdy nie dotknie, i czytaj pracę wspomaganą w odniesieniu do niego.

6. Powiedz z góry, jak ujawnienie wpłynie na ocenę.

Nazwij myślenie, dla którego istnieje zadanie

Granica dotycząca SI jest pytaniem drugim, a większość kart zadań odpowiada najpierw na nie. Zanim zostanie ustalone, co jest dozwolone, należy dokończyć to zdanie: to zadanie istnieje po to, aby pokazać, że student potrafi X. Jeśli X oznacza argumentację, student musi sformułować i obronić tezę. Jeśli X oznacza interpretację dyscyplinową, student musi dokonać osądu interpretacyjnego. Jeśli X oznacza rozumowanie naukowe, student musi połączyć dowody z wnioskiem. SI, która wykonuje tę pracę, psuje wnioskowanie, które ma wynikać z eseju, a doskonała proza tego nie naprawi. Trafność oceniania ujmuje to jako problem trafności, a nie jako problem zachowania, dlatego kształcenie w pisaniu i rzetelność akademicka argumentują za regułami na poziomie zadania, a nie za zakazami na poziomie kursu.

Nash i Burriss pokazują, jak łatwo to zdanie się rozjeżdża. Wśród 27 przyszłych nauczycieli języka angielskiego, których klasowe polityki dotyczące SI analizowano, 22 dopuszczały SI do generowania pomysłów i burzy mózgów, 22 zabraniały używania SI do komponowania zdań, akapitów lub prac albo pozostawiały tę kwestię niejasną, a 22 nie mówiły nic o czytaniu. Ci sami nauczyciele opisywali generowanie pomysłów i rewizję jako „myślenie”, lokując prawdziwe myślenie w finalnym tekście pisanym. Jeśli myślenie przebiega przez planowanie, szkicowanie, rewizję i ocenę, polityka, która chroni tylko ostatni produkt, chroni niewłaściwy krok, a czytanie wymaga tak samo wyraźnej reguły jak pisanie.

Regułę należy zapisać jako zdanie o kroku: „SI można używać do testowania zarzutów wobec tezy, która została już postawiona. Nie można jej używać do wygenerowania tezy ani dowodów na nią”. Na tej podstawie student może działać. „SI dozwolona za podaniem informacji” nie daje nic do działania.

Pozwól studentowi zobowiązać się, zanim narzędzie odpowie

Kolejność działań to najbardziej użyteczny wybór projektowy w tej literaturze. Badanie Chen nad odciążaniem warstwowym objęło 168 studentów studiów pierwszego stopnia w sześciu istniejących klasach i wyodrębniło cztery warstwy delegowania: powierzchnię, strukturę, pomysły i rozumowanie. Otwarta współpraca z SI dawała najlepsze pisanie wspierane przez SI i najsłabsze późniejsze wyniki samodzielne. Delegowanie rozumowania było warstwą najsilniej negatywnie związaną z samodzielnym myśleniem wyższego rzędu. Warunek ograniczony, który zawężał to, co studenci mogli delegować, i wymagał wyjaśnienia, jak przyjęli, zmodyfikowali lub odrzucili każdą sugestię SI, wypadł lepiej w samodzielnym pisaniu, głębi argumentacji i rewizji.

Do twierdzenia o przyczynowości należy podchodzić ostrożnie. Badanie jest quasi-eksperymentalne, obejmuje sześć istniejących klas i nie przypisuje studentów losowo, więc różnice między klasami pozostają splątane z interwencją. Kierunek wyniku pasuje do szerszej literatury o odciążaniu poznawczym, dlatego warto na nim działać, ale wielkości efektu nie należy cytować przed komisją.

Na karcie zadania kosztuje to jedną linię: student przynosi interpretację, hipotezę, argument lub analizę, a SI zostaje poproszona o ich atak. „Oto trzy zarzuty wobec mojego argumentu” zostawia myślenie przy piszącym. „Napisz mój argument” tego nie robi, niezależnie od tego, co student zrobi z wynikiem później.

Traktuj pierwszy szkic jako krok kosztowny

Wsparcie na różnych etapach wyrządza różne szkody. W badaniu 253 piszących każda pomoc SI obniżała poczucie autorstwa pracy, pomoc w szkicowaniu obniżała je najbardziej, a pomoc w planowaniu najmniej. Więcej tekstu i pomysłów wniesionych przez SI szło w parze z lepszą jakością eseju i niższym poczuciem autorstwa w tej samej pracy (badanie autorstwa na etapie od planowania do rewizji). To połączenie trzeba uwzględnić w planowaniu: mocniejszy esej i słabsze poczucie autorstwa pojawiają się razem, a to drugie jest podstawą sprawczości w pisaniu.

Jeśli autorstwo ma na kursie znaczenie, należy rozdzielić uprawnienia. SI, która pobudza planowanie, pyta, jakie dowody student już ma, lub wskazuje przeoczony kontrargument, jest do obrony niemal wszędzie. SI, która generuje akapity, trudno obronić tam, gdzie komponowanie jest umiejętnością docelową. Gdzie komponowanie nią nie jest, rachunek się zmienia.

Ustal regułę na każdym etapie

Sekwencja warta zapożyczenia utrzymuje SI w roli konsultanta, a rozumowanie zostawia studentowi:

Etap	Co robi student	Co może SI	Artefakt, który można zebrać
1. Zetknięcie z dowodami	Czytać, obserwować, robić adnotacje, liczyć, przeprowadzić eksperyment	Nic albo tylko wyjaśnienia	Notatki, adnotacje, obserwacje
2. Zajęcie stanowiska	Wygenerować interpretację, pytanie, hipotezę, tezę	Zadawać pytania, podważać założenia	Notatka z tezą lub hipotezą
3. Planowanie	Zdecydować o dowodach, kolejności, odbiorcy, gatunku	Krytykować konspekt, proponować alternatywy	Konspekt z uzasadnieniem
4. Szkicowanie	Wytworzyć merytoryczną prozę i rozumowanie	Ograniczona zgodnie z celem uczenia się	Szkic i historia wersji
5. Reakcja człowieka	Dać i otrzymać informację zwrotną od rówieśników lub prowadzącego	Nic koniecznego	Komentarze rówieśników
6. Informacja zwrotna od SI	Poprosić o krytykę według kryteriów	Krytyk, czytelnik, generator kontrargumentów, sprawdzanie jasności	Zapis informacji zwrotnej od SI
7. Ocena informacji zwrotnej	Porównać sugestie rówieśników, prowadzącego i SI, przyjąć lub odrzucić z uzasadnieniem	Jej wynik jest teraz przedmiotem oceny	Notatka z decyzjami o informacji zwrotnej
8. Rewizja	Wprowadzić i uzasadnić merytoryczne zmiany	Testować jasność, proponować alternatywy	Rewizja
9. Weryfikacja	Sprawdzić każde twierdzenie faktograficzne lub zależne od źródła	Nie może zweryfikować własnego wyniku	Źródła i dowody
10. Refleksja i ujawnienie	Wyjaśnić rolę SI i to, co zmieniło się w myśleniu studenta	Nic	Krótka refleksja o procesie
11. Kontrola samodzielna	Wyjaśnić lub zastosować rozumowanie bez SI	Nic	Obrona ustna, szybkie pisanie, nowy przypadek

To jest rozszerzenie PAIRR: szkic, informacja zwrotna od ludzi, informacja zwrotna od SI, porównanie, rewizja, refleksja, z samodzielnym punktem odniesienia i ciaśniejszą granicą wokół rozumowania. Środkową kolumnę należy traktować jako zadanie, a prawą jako to, na czym może opierać się ocena.

Jedenaście wierszy to więcej, niż potrzebuje większość zadań. Tabelę warto zwinąć do etapów, które da się faktycznie rozróżnić na zajęciach: zetknięcie z dowodami, zajęcie stanowiska, szkicowanie i rewizja. W tej krótszej wersji zetknięcie i stanowisko są miejscem, w którym żyje konstrukt, szkicowanie jest krokiem spornym, a formatowanie i sprawdzanie przypisów można dopuścić bez ograniczeń. Pisanie tabeli to sposób na znalezienie dwóch lub trzech miejsc, w których reguła musi coś powiedzieć, więc reguła z trzema klauzulami, której student może przestrzegać, bije matrycę, której nikt nie czyta.

Utrzymaj informację zwrotną od ludzi w obiegu

Największe badanie klasowe w tym materiale to PAIRR: 654 studentów na dziesięciu kursach pisania i trzech kursach STEM nastawionych na intensywne pisanie. Pisali szkice, przeprowadzali ocenianie rówieśnicze, otrzymywali informację zwrotną od SI opartą na rubryce, porównywali i oceniali oba źródła, pisali plany rewizji, dokonywali rewizji i prowadzili refleksję. 58% wolało połączoną informację zwrotną od rówieśników i od SI. 6% wolało wyłącznie informację zwrotną od SI. Studenci uznali SI za użyteczną przy ogólnych wskazówkach do rewizji zorientowanych na rubrykę, a rówieśnicy dostarczali wiedzę kontekstową i autentyczną reakcję odbiorcy.

Trzeba być precyzyjnym co do twierdzenia. PAIRR mierzył doświadczenie studentów i ich ocenę informacji zwrotnej, a nie długoterminowe przyrosty uczenia się, więc jest silnym dowodem na projekt informacji zwrotnej, a słabszym dowodem na to, że pisanie poprawia się miesiące później. Etap rówieśniczy warto zachować nawet wtedy, gdy etap SI jest szybszy. Duża część pracy nad informacją zwrotną dzieje się w porównaniu obu źródeł, a jego usunięcie zabiera tę część, którą studenci wskazywali jako wartościową.

Oceniaj, co student zrobił z informacją zwrotną

Kompetencja w korzystaniu z informacji zwrotnej to zdolność do jej poszukiwania, oceny jej jakości, radzenia sobie z własną reakcją na nią i zamieniania jej w rewizję. Studenci, którzy mają jej więcej, czerpią z informacji zwrotnej od SI znacznie więcej. Studenci, którzy traktują wynik jako autorytatywny, zyskują mniej (Jakość informacji zwrotnej od SI).

Krótka tabela decyzji czyni tę zdolność widoczną, po jednym wierszu na sugestię: sugestia SI, przyjmij / odrzuć / zmodyfikuj, dlaczego, oraz kryterium rubryki lub dowód stojący za decyzją. Cztery kolumny, żadnego eseju. Zamienia wynik modelu w materiał do osądu wartościującego i daje coś, co można ocenić, a co nie jest prozą.

Mocny wiersz należy opisać tak starannie, jak opisuje się tezę: nazywa kryterium rubryki, wskazuje fragment lub dowód i wyjaśnia zmianę, której student faktycznie dokonał. Wiersz „dobra uwaga, zgadzam się” nie zarabia nic. Studenci piszą według przykładu, który mają przed sobą, więc przykład jest instrukcją.

Uczyń ujawnienie tanim i konkretnym

Studenci ukrywają korzystanie z SI, gdy polityki są niejasne, karzące lub stygmatyzujące, a uczciwość może ściągać podejrzenia (Oświadczenia o korzystaniu z SI i jej ujawnianiu; badania nad racjonalizacją u studentów). To, co czyni ujawnienie pedagogicznie użytecznym, to zapis decyzji: do czego narzędzie służyło, co student mu dał, które sugestie miały znaczenie i co student przyjął lub odrzucił.

Mohamed i Temimi dostarczają mechanizmu. Ujawnienie staje się opcją atrakcyjną tylko wtedy, gdy koszt uczciwości pozostaje niski. Detektory generują fałszywe alarmy także wobec uczciwych studentów, więc cięższy nadzór może czynić ukrywanie relatywnie bardziej atrakcyjnym. Ich rada jest taka, by projektować z myślą o studencie najbardziej skłonnym do ukrywania i czytać zadeklarowane użycie jako kontekst, a nie jako przyznanie się.

Dwa szczegóły robią najwięcej pracy w formularzu. Należy prosić o konkretne zastosowania, a nie o kategorię, i stwierdzić, jak deklaracja wpłynie na ocenę. Student, który tego nie wie, założy najgorsze.

Cztery pytania wystarczą w większości zadań: na którym etapie pracy używano narzędzia, co student mu dostarczył, które sugestie zmieniły szkic, a które odrzucono i dlaczego. To ostatnie pytanie jest najbardziej informatywne, bo odrzucenie z uzasadnieniem jest dowodem osądu, a lista przyjętych sugestii nie jest.

Dostosuj regułę do tego, co w danej dziedzinie nazywa się pisaniem

Kursy kompozycji i pisania

Nauczyciele kompozycji mają najsilniejszy powód, by chronić proces, ponieważ szkicowanie, decyzje retoryczne, rewizja, świadomość odbiorcy i własny głos są celami uczenia się, a nie ich demonstracją. Warto zebrać kilka niezależnych próbek na początku semestru, aby i prowadzący, i student wiedzieli, co piszący potrafi teraz. SI należy wprowadzić jako odbiorcę, krytyka i partnera w rewizji: zapytać, gdzie czytelnik traci wątek, wygenerować zarzuty wobec tezy, porównać szkic z rubryką, oznaczyć twierdzenia bez dowodów, wyjaśnić, dlaczego akapit wydaje się niespójny. Student ocenia każdą sugestię.

Recenzję rówieśniczą warto utrzymać obok informacji zwrotnej od SI, ponieważ rówieśnicy dostarczają wiedzy kontekstowej i wiedzy o odbiorcy, której modelowi brakuje, a ocena różnicy między oboma źródłami sama w sobie jest treningiem pisarskim. Należy być zachowawczym wobec generowania przez SI długich fragmentów pierwszego szkicu, gdy celem jest nauka komponowania, z powodów dotyczących autorstwa i odciążania podanych wyżej. Trzeba unikać całkowitych zakazów pomocy w gramatyce, frazowaniu lub języku, które tworzą niepotrzebne bariery dla osób piszących w kilku językach. Wsparcie językowe należy oddzielić od autorstwa intelektualnego: pomoc w wyrażaniu myśli jest w porządku, a student pozostaje odpowiedzialny za pomysły, dowody, decyzje retoryczne i znaczenie. Samą informację zwrotną trzeba audytować, ponieważ Tan i in. stwierdzili, że identyczne prace zbierały więcej pochwał i mniej merytorycznej krytyki, gdy w promptcie zawarto cechy demograficzne lub edukacyjne studenta, co umieszcza ograniczanie uprzedzeń w obrębie projektu informacji zwrotnej.

Kursy humanistyczne i nauk społecznych

Interpretacja jest zwykle zdolnością docelową, więc zetknięcie ze źródłem powinno poprzedzać zetknięcie z SI. Studenci robią adnotacje w tekście pierwotnym, źródle historycznym, dziele sztuki, materiale archiwalnym, wywiadzie lub fragmencie teoretycznym i formułują wstępną lekturę, zanim cokolwiek skonsultują. Potem model działa jako kontrapunkt: proponuje alternatywną lekturę, mówi, jakie dowody podważyłyby tę interpretację, nazywa założenia argumentu, generuje odczytanie z przeciwstawnej perspektywy teoretycznej. Student decyduje, którą lekturę tekst faktycznie wspiera.

Krytykę modelu warto zadawać jako pracę dyscyplinową. Studenci otrzymują interpretację wiersza, wydarzenia, argumentu lub zjawiska społecznego wygenerowaną przez SI i odpowiadają, co ona zauważa, co pomija, jakie dowody wspierają jej twierdzenia, czyja perspektywa jest nieobecna i gdzie spłaszcza niejednoznaczność w gładką odpowiedź. To utrzymuje osąd interpretacyjny, którego kurs humanistyki istnieje, by go uczyć. Ocenie podlegają decyzje interpretacyjne i ich uzasadnienie dowodowe, a przydaje się krótkie pytanie na konsultacji, na przykład „Dlaczego ten fragment odczytano tak, a nie w odrzuconej alternatywie?”. Zgadywanie, czy zdanie wygląda na napisane maszynowo, jest słabszą miarą, co wyjaśnia wykrywanie SI.

Kursy STEM i raporty laboratoryjne

Najpierw zastrzeżenie: ta baza wiedzy zawiera znacznie silniejsze dowody dotyczące wspieranego przez SI pisania akademickiego w ogóle niż pisania raportów laboratoryjnych w szczególności. Nauczanie praktyczne i laboratoryjne oraz pedagogika pozostają słabiej opisane, także w literaturze kształcenia inżynierskiego, więc to, co następuje, przenosi ustalenia o pisaniu, odciążaniu, trafności i kształceniu inżynierskim na warunki, których te badania nie testowały.

Granicę należy wyznaczyć wokół rozumowania naukowego, a nie wokół prozy jako całości. Studenci pozostają odpowiedzialni za obserwacje, dane surowe, obliczenia, niepewność, wykresy, wybory analityczne, wyniki i rozumowanie łączące twierdzenia z dowodami. Gdy to istnieje, SI może rozsądnie pomagać w organizacji, czytelności, przejściach i konwencjach dyscyplinowych, co jest tym samym podziałem na powierzchnię i rozumowanie, co w badaniu Chen.

Pakiet raportu na kurs laboratoryjny w erze SI zawiera raport oraz wybrane dane surowe, obliczenia lub wydruk z notatnika, wykres z interpretacją napisaną przez studenta i krótkie stwierdzenie, jak główny wniosek wynika z dowodów. Przy raportach o dużej wadze dla oceny warto zadać jedno lub dwa zindywidualizowane pytania uzupełniające o wykres, wynik anomalny, metodologiczny wybór lub ograniczenie. Nie można pozwolić, by płynność pisania zastępowała rozumienie pojęć: zautomatyzowane ocenianie prac z fizyki może zaniżać rozumienie pojęć, gdy ekspresja językowa jest słabsza, a dotyka to najmocniej studentów wielojęzycznych (Automatyczne ocenianie esejów). Jeśli rozumowanie i pisanie są oba celami, należy oceniać je osobno.

Kursy inżynierskie

Odpowiedzialność zawodowa zmienia brzmienie reguły. Przegląd 99 badań empirycznych nad kształceniem inżynierskim wskazał przejrzystość, nadzór człowieka, samodzielność studenta, prywatność, autorstwo, sprawiedliwość i dobroczynność jako powracające kwestie etyczne i argumentował, że etyka SI należy do formacji zawodowej, a nie tylko do zgodności z przepisami. W raporcie laboratoryjnym lub projektowym warto poprosić studentów o ujawnienie pomocy i zaświadczenie, że zweryfikowali obliczenia, źródła, założenia i twierdzenia istotne dla bezpieczeństwa.

Zachowaj jedną próbkę, której narzędzie nigdy nie dotknie

Wynik wspomagany nie jest samodzielną umiejętnością, a potrzebny jest co najmniej jeden odczyt tej drugiej. Wystarczą okazjonalne warunki wycofania: krótkie pisanie bez SI, interpretacja na zajęciach, wyjaśnienie ustne, konsultacja, spontaniczna rewizja lub zadanie uzupełniające, które przenosi to samo rozumowanie na nowy przypadek. Ma to największe znaczenie, gdy praca końcowa ma dużą wagę w ocenie. Nie oznacza to nadzorowania każdego zadania. Kilka umieszczonych w semestrze próbek daje prowadzącemu i studentowi punkt odniesienia do interpretacji pracy wspomaganej, co jest pisarskim przypadkiem argumentu z Jak przeprojektować ocenianie, żeby ocena nadal mówiła coś obronnego o tym, co student wie lub potrafi?.

Obie prace warto czytać obok siebie i pytać, czy rozumowanie z pracy wspomaganej jest widoczne także w pracy samodzielnej. Tam, gdzie jest, esej spełnia swoją rolę jako dowód. Tam, gdzie go nie ma, ocena pracy wspomaganej mierzy to, co dostarczyło narzędzie. To porównanie jest też tym, co trzeba pokazać studentowi kwestionującemu ocenę, bo wskazuje konkretny fragment myślenia, a nie wrażenie o prozie.

Zdecyduj, co SI może oceniać

Dwa wyniki, które wyglądają sprzecznie, są zgodne. Starannie skalibrowane systemy ze szczegółowymi rubrykami i przykładami potrafią dobrze oceniać określone zadania, a ocenianie przez LLM prosto z pudełka znacznie odbiega od ludzkiego osądu. Mathew i in. stwierdzili słabą zgodność między ludźmi a LLM, która zmienia się systematycznie wraz z jakością eseju: modele nadmiernie nagradzają eseje krótkie i powierzchownie czytelne, zaniżają oceny esejów dłuższych i mocniejszych z drobnymi błędami powierzchniowymi oraz skupiają się w środku skali. Ten wzór przemawia za SI w kształtującej informacji zwrotnej o niskiej stawce, w redagowaniu komentarzy i we wstępnej segregacji, znacznie bardziej niż za autonomicznym ocenianiem sumującym (Automatyczne ocenianie esejów).

Studenci sami rysują podobną granicę. Na kursie komunikacji technicznej na studiach pierwszego stopnia, gdzie ChatGPT oceniał prace pisane odręcznie i studenci zostali o tym poinformowani, wszyscy 13 uczestników uznali informację zwrotną za jasną i użyteczną w rewizji powierzchniowej. Większość oddzieliła użyteczność informacji zwrotnej od władzy oceniającej: przyjmowali krytykę i nalegali, by ocenę ustalał prowadzący (Who Should Grade My Work? Student Perspectives on Transparent AI-Assisted Writing Assessment in Higher Education). Nadzór człowieka należy projektować jako punkt, w którym wynik SI staje się oceną, a nie jako uprzejmość oferowaną, gdy jest wygodnie.

Oceń dowody, zanim przepiszesz sylabus

Argument za tymi rozwiązaniami jest obiecujący i jeszcze nie dość silny, by uzasadniać jedną uniwersalną politykę pisania z SI. Część najlepszych dowodów pochodzi z dużych badań klasowych, takich jak PAIRR z 654 studentami. Reszta opiera się w dużej mierze na quasi-eksperymentach, małych próbach eksperymentalnych, analizach koncepcyjnych i pracach z lat 2025-2026, które są jeszcze nowe: badanie Chen nad pisaniem ograniczonym objęło 168 studentów, ale tylko sześć istniejących klas, badanie autorstwa użyło krótkiego eksperymentalnego zadania pisarskiego, a badanie donoszące o natychmiastowych przyrostach jakości po ćwiczeniach z ChatGPT objęło tylko 21 studentów pierwszego roku z zagranicy i nie ustaliło długoterminowego transferu (Leveraging ChatGPT in academic writing: ChatGPT enhances students' writing quality, writing experience, and ownership). To, co wspiera baza wiedzy o SI w edukacji, to zestaw zasad projektowych, a najpewniejsze ustalenie przekrojowe w niej to zachowanie sprawczości studenta, osądu wartościującego, samodzielnej kompetencji, rozumowania dyscyplinowego i informacji zwrotnej od ludzi przy jednoczesnym użyciu SI do poszerzania dostępu do krytyki, ćwiczenia, wsparcia w rewizji i pomocy językowej.

Ta mieszanka ma praktyczną konsekwencję. Zmień jedno zadanie, zachowaj artefakt i porównaj kolejny rocznik z obecnym na tej samej miarze. Reguła, którą można zmienić po jednym semestrze, jest warta więcej niż polityka, której nie da się przetestować, a małe badania przytoczone wyżej nie powiedzą, co dzieje się na konkretnym kursie.

Co nauczyciele akademiccy rozumieją tu błędnie

Detektor rozstrzygnie, czy tekst napisał student. Nie rozstrzygnie. W tajnym badaniu terenowym 94% prac egzaminacyjnych wygenerowanych przez SI pozostało niewykrytych i uzyskało wyższe wyniki niż prace prawdziwych studentów, a badanie kontrolowane wykazało, że detektory oznaczały zgodną z zasadami lekką redakcję z użyciem SI w 38-80% przypadków, pomijając ponad 96% przepisanych, „uczłowieczonych” wersji (Detecting the Undetectable? Reassessing Academic Misconduct Procedures in the Era of Generative AI; Why AI Detection Fails for Academic Integrity). Wykrywanie odpowiada na pytanie o wykrywanie, a trafność to inne pytanie.

Polityka na poziomie kursu jest jaśniejsza niż reguła na poziomie zadania. Polityki Nash i Burriss były dokumentami na poziomie kursu, a 22 z 27 dopuszczały burzę mózgów, 22 ograniczały komponowanie lub zaciemniały tę kwestię, a 22 milczały o czytaniu. Jeden dokument obejmujący wszystko ma zwykle być precyzyjny w kroku, o który prowadzący się martwi, i niejasny w pozostałych.

Lepsza proza znaczy, że nauka pisania zadziałała. Badanie autorstwa wykazało lepszą jakość eseju i niższe poczucie autorstwa w tej samej pracy, a warunek otwartej współpracy u Chen dał najlepsze pisanie wspomagane i najsłabsze późniejsze wyniki samodzielne. Jakość prozy jest miarą produktu. Tym, po co jest kurs, jest miara umiejętności.

Nieograniczony dostęp plus dobry prompt wystarczą. Studenci, którzy traktują informację zwrotną od SI jako autorytatywną, zyskują z niej mniej niż studenci z rozwiniętą kompetencją w korzystaniu z informacji zwrotnej. Dostęp do krytyki i zdolność korzystania z krytyki to osobne zasoby.

Zakaz SI chroni proces pisania. Zakaz odpowiada na pytanie, które różni się w zależności od etapu, i tworzy bariery dla osób piszących w kilku językach, które potrzebują wsparcia językowego niemającego nic wspólnego z autorstwem. Działający podział przebiega między ekspresją a odpowiedzialnością intelektualną.

Co się na Tobie odbije

„Nie mam czasu czytać kolejnego artefaktu”. Wtedy artefakt trzeba zmniejszyć: cztery kolumny tabeli decyzji albo pięć minut pisania na zajęciach jako próbka samodzielna. Korpus nie podaje danych o czasie oceniania dla tych rozwiązań, więc argument o obciążeniu pracą trzeba przetestować na jednym zadaniu, a nie zakładać na podstawie tej strony.

„Moi studenci będą używać SI niezależnie od reguły”. Będą, a pytanie projektowe brzmi, którą odpowiedź zadanie czyni najłatwiejszą. Deklaracja, która nic nie kosztuje, i rubryka, która płaci za proces, czynią ujawnienie tańszą ścieżką. Mechanizm pochodzi z modelowania, a nie z próby polityki ujawniania, więc predykcję należy traktować jako rozsądną i niepotwierdzoną.

„Zakaz jest prostszy i chroni proces”. Prostszy, tak. Polityki opisane wyżej pokazują, jak jedna reguła na poziomie kursu osuwa się w milczenie o krokach, które mają znaczenie, a ogólne ograniczenia językowe uderzają w studentów, którzy potrzebują ich najbardziej.

„Recenzja rówieśnicza jest zbędna, skoro SI odpowiada w sekundy”. 58% studentów PAIRR wolało połączenie obu źródeł, a 6% wolało samą SI, a powodem, który podali, była wiedza kontekstowa i wiedza o odbiorcy wnoszona przez rówieśników. To mierzy doświadczenie, więc niesie mniej niż wynik dotyczący przyrostu uczenia się.

„Model ocenia to zadanie tak dobrze jak ja”. Skalibrowane systemy ze szczegółowymi rubrykami i rozwiązanymi przykładami potrafią dobrze ocenić określone zadania. Ogólne ocenianie nie potrafi, a Mathew i in. pokazują, że niezgodność idzie za jakością eseju, a nie rozprasza się losowo, co jest trudniejszym rodzajem błędu do zauważenia. Narzędzie trzeba przetestować na własnym oznaczonym zbiorze, zanim dotknie oceny.

„To karze studentów ze słabszym angielskim akademickim”. Może karać, jeśli reguła traktuje ekspresję i autorstwo jako jedną rzecz. Oddziel je i przeaudytuj informację zwrotną od SI pod kątem wzoru, który znalazł Tan i in., gdzie identyczne prace zbierały więcej pochwał i mniej merytorycznej krytyki, gdy w promptcie były cechy demograficzne lub edukacyjne. Korpus dokumentuje to obciążenie. Nie podaje przetestowanego rozwiązania, więc własne porównanie jest sprawdzeniem.

Co zrobić w tym tygodniu

1. Napisz zdanie o umiejętności dla następnego dużego zadania i umieść je na karcie zadania.

2. Dodaj jedną linię wymagającą tezy, interpretacji lub wstępnego szkicu studenta przed jakimkolwiek użyciem SI i powiedz, co będziesz zbierać.

3. Oznacz każdy etap zadania jako noszący konstrukt lub nie, i przepisz regułę dotyczącą SI tak, by dopuszczała narzędzie tam, gdzie etap nie jest oceniany.

4. Dodaj do rubryki czterokolumnową tabelę decyzji o informacji zwrotnej, z przypisanymi punktami.

5. Zaplanuj jeden krótki tekst, którego żadne narzędzie nie dotknie, i zdecyduj teraz, do którego zadania należy.

Dokąd dalej

Strona oceniania tego argumentu, w tym projekt kroków uwierzytelnionych, jest w Jak przeprojektować ocenianie, żeby ocena nadal mówiła coś obronnego o tym, co student wie lub potrafi?. Dokument polityki, który studenci faktycznie czytają, opisuje Jak napisać politykę dotyczącą SI na kursie i zakomunikować ją studentom?, a same narzędzia informacji zwrotnej AI Feedback Quality. Jak uczyć studentów weryfikowania wyników SI? omawia, co studenci powinni sprawdzać, gdy model dostarcza twierdzenie lub źródło, a strona koncepcyjna Coach not crutch: Evidence that AI can improve writing skill despite reducing effort formułuje granicę, do której ta strona wraca.