Ποιες είναι οι βέλτιστες πρακτικές για την ανάπτυξη ενός αποτελεσματικού δασκάλου ΤΝ;

Αυτόματη μηχανική μετάφραση αυτής της αγγλικής σελίδας, που δεν έχει ακόμη ελεγχθεί από φυσικό ομιλητή.

Ο δάσκαλός σας απέχει τρεις εβδομάδες από την πιλοτική εφαρμογή. Η συνομιλία δουλεύει, το μοντέλο εξηγεί καθαρά μια παράγωγο και η εσωτερική επίδειξη κέρδισε χειροκρότημα. Μετά κάποιος από το κέντρο διδασκαλίας κάνει την ερώτηση για την οποία οι προδιαγραφές σας δεν έχουν πεδίο: ύστερα από ένα εξάμηνο με αυτό το εργαλείο, θα λύνουν οι φοιτητές ένα πρόβλημα όταν αυτό δεν είναι στην αίθουσα; Αυτό που έχετε είναι ένας κατάλογος λειτουργιών. Αυτό που δεν έχετε είναι μία πρόταση που λέει τι πρέπει να μπορεί να κάνει ο μαθητής μόνος στο τέλος.

Ένας δάσκαλος είναι μια πολιτική τυλιγμένη γύρω από ένα σύστημα συνομιλίας, και η πολιτική αποφασίζει αν θα συμβεί μάθηση. Ονομάστε τη γνωστική εργασία που πρέπει να κάνει ο μαθητής, κάντε το σύστημα να την απαιτεί (μια απόπειρα πριν από τη βοήθεια, μια κλίμακα υποδείξεων που υποχωρεί, έναν έλεγχο που το μοντέλο δεν μπορεί να προσποιηθεί) και αξιολογήστε με τον δάσκαλο απενεργοποιημένο. Η ποιότητα του μοντέλου καθορίζει πόσο καλή φαίνεται η συζήτηση. Η πολιτική καθορίζει τι θα μπορεί να κάνει ο φοιτητής τον Ιούνιο.

Η σύντομη εκδοχή

1. Γράψτε τον στόχο ως ισχυρισμό για την επίδοση χωρίς βοήθεια και μετά παράγετε κάθε λειτουργία από αυτόν. Αν μια λειτουργία δεν ανάγεται σε εκείνη την πρόταση, είναι λειτουργία επίδειξης.

2. Χτίστε το μοντέλο μαθητή από τεκμήρια που μπορείτε να καταγράψετε και αποθηκεύστε κάθε διάγνωση ως υπόθεση με τιμή βεβαιότητας και όχι ως γεγονός.

3. Καθορίστε την κλίμακα βοήθειας στον κώδικα, με ονομασμένες βαθμίδες, και κάντε τη διεπαφή να χρεώνει στον μαθητή κάτι για κάθε βήμα προς τα κάτω.

4. Θεμελιώστε το περιεχόμενο στο δικό σας υλικό και αναθέστε τον έλεγχο αριθμητικής, άλγεβρας και κώδικα σε ντετερμινιστικά εργαλεία που δεν μπορούν να παραγάγουν ψευδαισθήσεις.

5. Δοκιμάστε τις διδακτικές αποτυχίες σε ολόκληρες συνομιλίες: διαρροή απαντήσεων, κολακεία, ενίσχυση παρανοήσεων, διδακτική παρέκκλιση.

6. Μετρήστε με φάση απόσυρσης και καθυστερημένο τεστ, όχι με βαθμολογία ικανοποίησης.

Γράψτε τον στόχο ως ισχυρισμό για επίδοση χωρίς βοήθεια

Τρεις λίστες, γραμμένες πριν καν επιλέξει κάποιος μοντέλο:

• Τι πρέπει να γνωρίζουν ή να μπορούν να κάνουν οι μαθητές μετά.
• Ποια γνωστική εργασία πρέπει να εκτελέσουν οι ίδιοι.
• Τι επιτρέπεται να κάνει ο δάσκαλος γι' αυτούς.

Η βιβλιογραφία για την ευφυή διδασκαλία επισημαίνει ότι η αποτελεσματικότητα εξαρτάται από τον παιδαγωγικό σχεδιασμό και όχι μόνο από την ικανότητα του μοντέλου, και η αποτυχία είναι εύκολο να χτιστεί κατά λάθος. Ένας δάσκαλος βελτιστοποιημένος για το «ολοκλήρωσε το πρόβλημα» θα υπονομεύσει έναν δάσκαλο βελτιστοποιημένο για το «μάθε να λύνεις το πρόβλημα» ενώ περνά κάθε λειτουργικό τεστ που γράφετε, γιατί και οι δύο παράγουν σωστές τελικές απαντήσεις. Η διαφορά βρίσκεται σε αυτό που έκανε ο φοιτητής ανάμεσα στην ερώτηση και στην απάντηση.

Η δεύτερη λίστα είναι το σημείο όπου οι ομάδες ανάπτυξης γίνονται συγκεκριμένες. Πάρτε μια ετικέτα κατάκτησης όπως «κατάκτηση παραγώγου» και αρνηθείτε να της επιτρέψετε να σημαίνει την παραγωγή της σωστής παραγώγου. Σπάστε την στην αναγνώριση του πότε μια παράγωγος είναι κατάλληλη, στην ερμηνεία της ως στιγμιαίου ρυθμού μεταβολής, στην επιλογή του κανόνα, στην εκτέλεση της διαδικασίας, στην εξήγηση του γιατί η επιλογή ήταν σωστή, στον έλεγχο ευλογοφάνειας και στην εφαρμογή της σε ένα άγνωστο πρόβλημα. Κάθε ένα από αυτά είναι χωριστό πράγμα προς καταγραφή και κάθε ένα υπονοεί διαφορετική αντίδραση όταν λείπει. Αυτή η αποσύνθεση είναι και η άμυνα απέναντι στην παγίδα της σωστής απάντησης, όπου ο μαθητής φτάνει στη σωστή απάντηση μέσω ελαττωματικού συλλογισμού και τα αναλυτικά σας καταγράφουν επιτυχία. Πιάνοντας την παγίδα της σωστής απάντησης και Όταν η βοήθεια δεν βοηθά περιγράφουν και τα δύο εκδοχές αυτής της αποτυχίας σε συνθήκες παραγωγής.

Χτίστε το μοντέλο μαθητή πριν από τη συζήτηση

Το μοντέλο μαθητή κρατά δύο είδη κατάστασης: εκτιμήσεις ανά έννοια (όριο: υπό ανάπτυξη, κανόνας δύναμης: κατακτημένος, κανόνας γινομένου: υπό ανάπτυξη, κανόνας αλυσίδας: μη τεκμηριωμένος) και υποθέσεις παρανόησης με τα τεκμήρια και τη βεβαιότητα πίσω από καθεμία. Κρατήστε τα χωριστά. Η εκτίμηση της έννοιας είναι αυτή που οδηγεί την επιλογή δυσκολίας. Η υπόθεση είναι αυτή που οδηγεί την επόμενη ερώτηση.

Να προσέχετε να μην αφήνετε ένα μεγάλο γλωσσικό μοντέλο να κάνει τη διάγνωση μόνο του. Η συγκριτική αξιολόγηση βρήκε ότι οι δάσκαλοι βασισμένοι σε LLM αναγνώριζαν καθαρά σωστό συλλογισμό ενώ μερικές φορές απέρριπταν έγκυρες εναλλακτικές ή δέχονταν εσφαλμένο συλλογισμό. Ένα μοντέλο που εντοπίζει την καλή περίπτωση και παρερμηνεύει την αμφίσημη αποτυγχάνει ακριβώς στους μαθητές που χρειάζονται τη βοήθεια. Για τομείς με συνέπειες, η αρχιτεκτονική που αντέχει είναι η δομημένη διάγνωση μαζί με ευέλικτο διάλογο LLM, η διάταξη που περιγράφει το Επιβεβαιώνοντας το σωστό, χάνοντας τα υπόλοιπα: ο δικός σας ανιχνευτής διαπιστώνει τι πιθανότατα έκανε ο φοιτητής και το μοντέλο γράφει τη συζήτηση γύρω από αυτό το εύρημα.

Δώστε στη διάγνωση μια ρητή ακολουθία που το μοντέλο δεν μπορεί να παρακάμψει: ανίχνευση, επαλήθευση, απόκριση. Το μοντέλο μπορεί να προτείνει μια παρανόηση ως υπόθεση και μετά πρέπει να την επαληθεύσει απέναντι στην πραγματική εργασία του φοιτητή ή με μια στοχευμένη ερώτηση πριν ο δάσκαλος απαντήσει σε αυτήν. Χωρίς αυτό το βήμα, το σύστημα επινοεί τεκμήρια και μετά διδάσκει τον φοιτητή για ένα λάθος που δεν έκανε, κάτι που είναι ταυτόχρονα άχρηστο και ελαφρώς προσβλητικό.

Τεκμήρια που αξίζει να καταγράφονται, σε κατά προσέγγιση σειρά χρησιμότητας: πρόσφατες απόπειρες με τα ενδιάμεσα βήματά τους, τεκμηριωμένη γνώση ανά έννοια, συμπεριφορά αναζήτησης βοήθειας (που είναι και η ίδια σήμα για την αυτοπεποίθηση) και αυτοαναφερόμενη αυτοπεποίθηση όπου τη συλλέγετε. Προσαρμόστε τη δυσκολία και τη βοήθεια από αυτό το αρχείο και αντιμετωπίστε την τελευταία προτροπή του μαθητή ως μία μόνο είσοδο σε αυτό. Μια μεμονωμένη προτροπή είναι κακός εκτιμητής του τι ξέρει ένας φοιτητής, και ένας δάσκαλος που αντιδρά σε αυτήν θα ταλαντεύεται.

Καθορίστε την κλίμακα βοήθειας και μετά χρεώστε τη στη διεπαφή

Γράψτε τις βαθμίδες πριν γράψετε μια προτροπή, γιατί η κλίμακα είναι απόφαση προϊόντος με ονομασμένες καταστάσεις και μια ρύθμιση τόνου δεν μπορεί να την εκφράσει. Μια εφαρμόσιμη ακολουθία:

1. Ανεξάρτητη απόπειρα.
2. Μεταγνωστική ερώτηση για το τι έχει δοκιμάσει ο φοιτητής.
3. Εννοιολογική νύξη.
4. Εντοπισμός του σχετικού κανόνα.
5. Διατύπωση μέρους του προβλήματος.
6. Λυμένο ενδιάμεσο βήμα.
7. Λυμένη λύση.
8. Ο φοιτητής εξηγεί τη λύση.
9. Ο φοιτητής λύνει ένα συγκρίσιμο πρόβλημα χωρίς βοήθεια.

Η υποστήριξη υποχωρεί καθώς αυξάνεται η ικανότητα, και αυτός είναι ο μηχανισμός στο κέντρο της στηρικτικής υποστήριξης. Το να δει κάποιος μια λυμένη λύση δεν αποδεικνύει κατάκτηση, οπότε κάθε συνεδρία που φτάνει στην έβδομη βαθμίδα σας οφείλει την ένατη πριν μετρηθεί ως ολοκληρωμένη.

Τα αιτιώδη τεκμήρια για την κατασκευή της κλίμακας προέρχονται από ένα πείραμα πεδίου όπου μια αφύλακτη διεπαφή GPT αύξησε την επίδοση στα μαθηματικά με βοήθεια και μείωσε τη μεταγενέστερη επίδοση στις εξετάσεις χωρίς βοήθεια. Ένας δάσκαλος που έδινε υποδείξεις αφαίρεσε σε μεγάλο βαθμό αυτό το μαθησιακό κόστος (Η γενετική ΤΝ χωρίς προστατευτικά όρια μπορεί να βλάψει τη μάθηση). Ο περιορισμός είναι αρχιτεκτονικός. Το ίδιο μοντέλο, με διαφορετική συμπεριφορά βοήθειας, παρήγαγε αντίθετα αποτελέσματα στη μέτρηση που έχει σημασία.

Ένα μεγαλύτερο τυχαιοποιημένο πείραμα πεδίου με περισσότερους από 6.000 μαθητές γυμνασίου σε πλατφόρμα εξάσκησης βασισμένη στην κατάκτηση δείχνει πώς φαίνεται η κλίμακα στα αρχεία καταγραφής. Οι μαθητές που ορίστηκαν σε υποστήριξη ΤΝ προχώρησαν πιο αργά και επιχείρησαν λιγότερες ερωτήσεις, και απάντησαν με μεγαλύτερη ακρίβεια. Ο σαφέστερος μηχανισμός ήταν η ορθότητα της επόμενης απόπειρας μετά από ένα λάθος: χρειάστηκαν λιγότερες απόπειρες για να επιστρέψουν σε σωστή απάντηση. Αυτό το μοτίβο είναι μια παραγωγική επιβράδυνση και είναι το αποτύπωμα που υποτίθεται ότι αφήνει μια κλίμακα υποδείξεων (Κάνοντας τη διδασκαλία με ΤΝ παραγωγική).

Η ίδια μελέτη παρέχει μια προειδοποίηση για τους δικούς σας πίνακες ελέγχου. Η απαίτηση τριών σωστών απαντήσεων στη σειρά αύξησε απότομα την κατάκτηση όπως την ορίζει η πλατφόρμα χωρίς να παραγάγει ανιχνεύσιμα κέρδη σε καθυστερημένο τεστ μία εβδομάδα αργότερα. Τα ισχυρότερα τεκμήρια από το καθυστερημένο τεστ εμφανίστηκαν μόνο εκεί όπου η ΤΝ βρισκόταν μέσα στη ροή εργασίας κατάκτησης (συντελεστής 0,085) και όχι εκεί όπου ήταν διαθέσιμη ως αυτόνομη πρόσβαση. Αν η μέτρηση επιτυχίας σας είναι ένας μετρητής σερί, θα παραδώσετε ένα σύστημα που βελτιστοποιεί το σερί.

Η τριβή στη διεπαφή ανήκει στο ίδιο σχεδιαστικό πέρασμα. Οι απεριόριστες υποδείξεις πίσω από ένα ορατό κουμπί μετατρέπουν ολόκληρη την κλίμακα σε συντόμευση, και τα πρόωρα αιτήματα υπόδειξης με επιφανειακή ανάγνωση συνδέονται με χαμηλότερα μαθησιακά κέρδη. Η αντικατάσταση του [Hint][Hint][Hint][Show Answer] με τις ερωτήσεις «τι έχεις δοκιμάσει;» και «ποιο μέρος σε μπλοκάρει;» (επιλογή κανόνα, διατύπωση της εξίσωσης, εκτέλεση της άλγεβρας, κατανόηση της έννοιας) κοστίζει μία οθόνη και κατευθύνει τον φοιτητή στη βαθμίδα που πραγματικά χρειάζεται. Σας δίνει επίσης τα δεδομένα καταγραφής που λένε ποια βαθμίδα παραλείπουν συνήθως.

Αναθέστε τα ελέγξιμα μέρη σε έναν ελεγκτή

Θεμελιώστε την παραγωγή σε υλικό εγκεκριμένο από τον διδάσκοντα: ενότητες βιβλίου, σημειώσεις μαθήματος, λυμένα παραδείγματα, ορολογία, εγκεκριμένες μεθόδους, συμβολισμό, κανόνες εργασιών, πολιτικές και προγραμματειακούς πόρους. Η παραγωγή επαυξημένη με ανάκτηση πάνω σε αυτό το σώμα κειμένων μειώνει τον κίνδυνο ψευδαισθήσεων και δεν τον εξαλείφει, όπως εκθέτει το RAG. Εκθέστε παραπομπές ή προέλευση στη διεπαφή όπου ο φοιτητής θα μπορούσε να ελέγξει έναν ισχυρισμό, γιατί η παραπομπή είναι αυτό που κάνει τη θεμελίωση ελέγξιμη εκ των υστέρων.

Η θεμελίωση κάνει επίσης μια δουλειά που οι μετρήσεις ακρίβειας χάνουν. Ένα μάθημα έχει εγκεκριμένες μεθόδους, και ένας δάσκαλος που εισάγει μια μαθηματικά έγκυρη τεχνική που το μάθημα δεν χρησιμοποιεί έχει διδάξει στον φοιτητή κάτι για το οποίο θα του αφαιρεθούν μονάδες. Η ανάκτηση από το επίπεδο του μαθήματος είναι ο τρόπος με τον οποίο ο δάσκαλος μένει μέσα στο σύνολο των μεθόδων.

Για τομείς με απαντήσεις που ελέγχονται τυπικά, προσθέστε ντετερμινιστικά εργαλεία: αριθμομηχανές, συστήματα συμβολικών μαθηματικών, εκτέλεση κώδικα, γράφους γνώσης, ελεγκτές βασισμένους σε κανόνες και λύτες ειδικούς για το γνωστικό αντικείμενο. Η κατανομή εργασίας είναι το σημαντικό μέρος. Το LLM χειρίζεται την εξήγηση και τον διάλογο. Η συμβολική μηχανή επαληθεύει αλγεβρική ισοδυναμία, παραγώγους, ολοκληρώματα, λύσεις εξισώσεων, κρίσιμα σημεία και αριθμητικές προσεγγίσεις. Ένα λάθος ενδιάμεσο βήμα που ο επαληθευτής πιάνει γίνεται διδακτική στιγμή. Ένα λάθος ενδιάμεσο βήμα που δεν πιάνει τίποτε γίνεται παρανόηση που ο φοιτητής μεταφέρει στην εξέταση.

Απαιτήστε από τον μαθητή να δράσει πάνω στην ανατροφοδότηση

Η ανατροφοδότηση που λέει «Σωστό», «Λάθος» ή «Μπράβο» είναι γεγονός βαθμολόγησης που φορά τη διεπαφή της διδασκαλίας. Η βάση γνώσης αντιμετωπίζει την ανατροφοδότηση ως βρόχο παροχής και πρόσληψης: η ανατροφοδότηση στηρίζει τη μάθηση όταν οι μαθητές την καταλαβαίνουν και δρουν πάνω της, και το δεύτερο μισό είναι το μισό που συνήθως παραλείπουν τα συστήματα. Χτίστε τον δάσκαλο ώστε να ονομάζει το συλλογιστικό βήμα που εμπλέκεται, να λέει τι χρειάζεται επανεξέταση, να δίνει μία συγκεκριμένη επόμενη ενέργεια και να ζητά από τον μαθητή να προβλέψει ή να εξηγήσει πριν αποκαλυφθεί η ανατροφοδότηση.

Η ακολουθία που μεταφέρει αυτό είναι πρώτα ο μαθητής, μετά η ΤΝ, ξανά ο μαθητής. Ο φοιτητής παράγει, επιλέγει, δικαιολογεί, αξιολογεί ή στοχάζεται· ο δάσκαλος απαντά· ο φοιτητής κάνει κάτι με την απάντηση. Σχεδιάστε τη δομή των γύρων ώστε αυτό να μην είναι προαιρετικό. Ένα σύστημα όπου το μοντέλο μπορεί να παραγάγει τρεις παραγράφους ως απάντηση σε μία ερώτηση διδάσκει στον φοιτητή να ρωτά και να διαβάζει.

Ο μακροπρόθεσμος στόχος είναι η εσωτερίκευση. Οι μαθητές πρέπει να καταλήξουν να εκτελούν οι ίδιοι τις στρατηγικές ερωτήσεων και επίλυσης προβλημάτων του δασκάλου, κάτι που είναι το επιχείρημα της δράσης και ο λόγος που η κλίμακα έχει κορυφαία βαθμίδα όπου ο δάσκαλος σωπαίνει.

Σχεδιάστε για το τι συμβαίνει στον τεσσαρακοστό γύρο

Η παιδαγωγική ασφάλεια είναι ξεχωριστή σουίτα δοκιμών από τη συνηθισμένη ασφάλεια των chatbots, και οι περισσότερες ομάδες παραδίδουν με τη δεύτερη μόνο. Η τοξικότητα και η αντοχή σε jailbreak δεν σας λένε τίποτε για το αν ο δάσκαλος θα παραδώσει μια απάντηση σε έναν φοιτητή που ρωτά δύο φορές, θα συμφωνήσει με λάθος μέθοδο επειδή ο φοιτητής ακούστηκε σίγουρος, θα παρεκκλίνει από το σύνολο μεθόδων του μαθήματος σε μια μακρά συνεδρία ή θα σπρώξει έναν μαθητή στη γνωστική εκφόρτωση. Η κολακεία είναι αυτή που περνά πρώτη, γιατί η συμφωνία διαβάζεται ως καλοσύνη και τα δεδομένα προτιμήσεών σας την επιβραβεύουν.

Δοκιμάστε για διαρροή απαντήσεων, ενίσχυση παρανοήσεων, υπερβολική συμφωνία, ακατάλληλη δυσκολία, εκφόρτωση, μεροληπτική μεταχείριση, απώλεια δράσης του μαθητή, διδακτική παρέκκλιση και υπερβολική βεβαιότητα σε εσφαλμένες εξηγήσεις. Εκτελέστε τις δοκιμές σε εκτεταμένες συνομιλίες και όχι σε μεμονωμένους γύρους, γιατί οι παιδαγωγικές αποτυχίες συσσωρεύονται: οι πρώτοι δέκα γύροι μπορεί να είναι υποδειγματικοί και ο ενδέκατος να ακυρώσει τη συνεδρία. Ένας δάσκαλος πρέπει να είναι ευγενικός και σωστός ταυτόχρονα, ακόμη και όταν ο μαθητής επιμένει σε μια παρανόηση. Η παιδαγωγική ασφάλεια και το Η ασφάλεια των δασκάλων ΤΝ και οι παιδαγωγικές βλάβες εκθέτουν την ταξινομία των αποτυχιών.

Βάλτε την αρχιτεκτονική δεδομένων στο ίδιο σχεδιαστικό έγγραφο

Συλλέξτε μόνο δεδομένα μαθητών που είναι παιδαγωγικά αναγκαία και να μπορείτε να πείτε γιατί υπάρχει κάθε πεδίο. Όπου κρατάτε μόνιμη μνήμη ή μοντέλο μαθητή, κάντε τον σκοπό του ορατό στον μαθητή, δώστε του κατάλληλο έλεγχο πάνω σε αυτό, προστατέψτε ευαίσθητες πληροφορίες, ορίστε τη διατήρηση και δρομολογήστε αποφάσεις με συνέπειες σε έναν διδάσκοντα ή σε άλλο ανθρώπινο σημείο ελέγχου. Ένα μοντέλο μαθητή που συσσωρεύει σιωπηλά μια εκτίμηση βεβαιότητας που ο φοιτητής δεν βλέπει ποτέ είναι πρόβλημα προστασίας δεδομένων και παιδαγωγικό πρόβλημα.

Ελέγξτε τη συμπεριφορά σε γλωσσικά υπόβαθρα, επίπεδα ικανότητας, πολιτισμικά πλαίσια, ανάγκες προσβασιμότητας και επίπεδα προηγούμενης γνώσης και εμπειρίας με την ΤΝ. Η διαφορική επίδοση στον ίδιο στόχο είναι σφάλμα με έναν φοιτητή κολλημένο πάνω του, και δεν θα εμφανιστεί στον συνολικό αριθμό ακρίβειάς σας.

Μια απόφαση προσβασιμότητας αξίζει τη δική της γραμμή: μην κάνετε την εκλεπτυσμένη κατασκευή προτροπών προϋπόθεση για καλή διδασκαλία. Αν ο δάσκαλος διδάσκει καλά μόνο όταν ο φοιτητής γράφει προσεκτική προτροπή, έχετε χτίσει ένα σύστημα που ευνοεί φοιτητές που ξέρουν ήδη πώς να μιλούν στα μοντέλα. Ο δάσκαλος πρέπει να βοηθά τους μαθητές να διατυπώνουν παραγωγικές ερωτήσεις, κάτι που είναι και δεξιότητα μεταγνώσης που αξίζει να την έχει κανείς.

Οργανώστε τη μέτρηση του διαστήματος απόσυρσης

Οι μετρήσεις συνεδρίας δεν θα σας πουν αν το πράγμα δουλεύει. Η ακρίβεια απαντήσεων, η διάρκεια συνομιλίας, η προτίμηση των φοιτητών, η ικανοποίηση, η ολοκλήρωση εργασιών και η ενασχόληση όλα ανεβαίνουν για συστήματα που δεν διδάσκουν τίποτε, γιατί στους φοιτητές αρέσει η βοήθεια και η βοήθεια μετριέται εύκολα. Αξιολογήστε την επίδοση χωρίς βοήθεια, τη διατήρηση με καθυστέρηση, τη μεταφορά σε νέα προβλήματα, τη διόρθωση παρανοήσεων, την ανεξαρτησία του μαθητή, την πρόσληψη ανατροφοδότησης και τις διαφορικές επιδράσεις ανά ομάδα μαθητών. Η αξιολόγηση στην εκπαίδευση με ΤΝ έχει τις μεθόδους, και το Ο απούσα άξονας αξιολόγησης υποστηρίζει ότι η συμπεριφορά είναι το κατασκεύασμα.

Δύο μελέτες οξύνουν τον κανόνα ενάντια στην αυτοαναφορά και στους βραχείς ορίζοντες. Μια πιλοτική εφαρμογή με 38 αρχάριους φοιτητές προγραμματισμού βρήκε ισχυρή συσχέτιση ανάμεσα στη χρήση γενετικής ΤΝ και στην αντιλαμβανόμενη μάθηση (rs=0,802, p<0,001), ενώ οι δείκτες αυτόνομης προόδου χωρίς υποστήριξη διδασκόντων βαθμολογήθηκαν χαμηλότερα. Οι συγγραφείς ονομάζουν το χάσμα ψευδαίσθηση ικανότητας και επιστημικό χρέος, και είναι ακριβώς το χάσμα που επιβραβεύει μια μέτρηση ικανοποίησης (Η γενετική ΤΝ ως άτυπος γνωστικός δάσκαλος).

Πιο θεμελιωδώς, οι περισσότερες αξιολογήσεις σταματούν τη στιγμή που τελειώνει η βοήθεια. Οι δυναμικές γνωστικής έκπλυσης ονομάζουν το αμέτρητο διάστημα μετά την απόσυρση και τυποποιούν τέσσερα αποτελέσματα: ελαστική ανάκαμψη, μερικό πλατώ, λανθάνον στήριγμα και υπερανάκαμψη. Η καμπύλη έκπλυσης φέρει σταθερά χρόνου ανάκαμψης, όρο πληρότητας ανάκαμψης και δείκτη υστέρησης που συγκρίνει την προσπάθεια επανεκμάθησης με την αρχική προσπάθεια. Εφόσον η αντιστρεψιμότητα καθορίζει τη σοβαρότητα, το πλαίσιο υποστηρίζει ότι η προγραμματισμένη εξάσκηση χωρίς βοήθεια πρέπει να δοσολογείται με βάση την καμπύλη ανάκαμψης και όχι να συζητείται ως ζήτημα αρχής. Το σχέδιο αξιολόγησής σας χρειάζεται φάση απόσυρσης καθώς και άμεσο μετα-τεστ, και τα τυχαιοποιημένα τεκμήρια ότι η σύντομη βοήθεια καταπιέζει τη μεταγενέστερη επίδοση χωρίς βοήθεια είναι ο λόγος να το προγραμματίσετε νωρίς.

Δώστε στους εκπαιδευτικούς κάτι να επεξεργαστούν

Πριν από την ανάπτυξη, ζητήστε από εκπαιδευτικούς να δοκιμάσουν ρεαλιστικά προφίλ μαθητών, συνήθεις παρανοήσεις, ακραίες περιπτώσεις, ανταγωνιστικές προτροπές, αμφίσημες απαντήσεις και μακρές διδακτικές συνομιλίες. Καταγράψτε τις παιδαγωγικές αποτυχίες και τροφοδοτήστε τις πίσω στις προτροπές συστήματος, στις πολιτικές διδασκαλίας, στις πηγές γνώσης, στα προστατευτικά όρια, στους κανόνες του μοντέλου μαθητή και στην επιλογή μοντέλου. Μια εύρρυθμη απάντηση μπορεί να είναι παιδαγωγικά λάθος, και ο εκπαιδευτικός είναι ο μόνος κριτής που μπορεί να το δει.

Η συστηματική ανασκόπηση του Lee για 29 μελέτες K-12 περιγράφει από τι αποτελείται αυτή η εποπτεία και πού σπάει. Η παρέμβαση του εκπαιδευτικού είναι ένας επαναλαμβανόμενος τετραφασικός κύκλος παρακολούθησης, κρίσης, παρέμβασης και ενορχήστρωσης. Οι ειδοποιήσεις ΤΝ, οι πίνακες ελέγχου και οι αυτοματοποιημένες βαθμολογίες «δεν οδηγούν αυτόματα σε παιδαγωγική δράση». Η ισχυρότερη στρατηγική εκπαιδευτικού που βρίσκει η ανασκόπηση είναι η παιδαγωγική μετάφραση: επιλογή, αναθεώρηση, συμπλήρωση, σύνοψη ή διαγραφή της ανατροφοδότησης του chatbot αντί να περνά αυτούσια.

Δύο σχεδιαστικές προειδοποιήσεις ακολουθούν, και οι δύο αντιβαίνουν στον συνήθη οδικό χάρτη. Περισσότερη πληροφορία από την ΤΝ δεν είναι καλύτερη: τα συστήματα που εκπέμπουν συνεχώς διαγνώσεις υπερφόρτωναν τους εκπαιδευτικούς και τραβούσαν την προσοχή από τη δική τους παρατήρηση. Ιεραρχήστε τι αξίζει να αντιμετωπιστεί, κάντε το ερμηνεύσιμο και προσφέρετε συστάσεις σε μορφή που ο εκπαιδευτικός μπορεί να δεχτεί, να τροποποιήσει, να αναβάλει ή να απορρίψει. Ούτε περισσότερη υποστήριξη προς τον εκπαιδευτικό είναι καλύτερη: η καθυστέρηση της παρέμβασης ώστε οι μαθητές να δουλέψουν ανεξάρτητα είναι η ίδια εξειδίκευση. Δομικές συνθήκες, δηλαδή χρόνος για εξέταση δεδομένων, μέγεθος τάξης και δυνατότητα φυσικής προσέγγισης των ομάδων που χρειάζονται βοήθεια, είναι μέρος της παρέμβασης και όχι υπόβαθρο. Ένας πίνακας ελέγχου φτιαγμένος για εκπαιδευτικό χωρίς ελεύθερη ώρα δεν ανοίγεται.

Πρώτη περίπτωση: δάσκαλος απειροστικού λογισμού, όπου η επαλήθευση είναι φθηνή

Ένας δάσκαλος για το μάθημα απειροστικού λογισμού του πρώτου εξαμήνου σε κολέγιο πρέπει να αυξήσει αυτό που οι φοιτητές μπορούν να λύσουν και να εξηγήσουν ανεξάρτητα αφού αφαιρεθεί, και όχι να μεγιστοποιήσει τα σωστά ολοκληρωμένα προβλήματα. Η διδασκαλία μαθηματικών είναι ιδιαίτερα ευάλωτη στην υπερβολική στηρικτική υποστήριξη, στην πρόωρη χρήση υποδείξεων και στη λανθασμένη διάγνωση του συλλογισμού των φοιτητών, και τα τρία είναι ορατά στα αρχεία καταγραφής σας αν κοιτάξετε (εκπαίδευση στα μαθηματικά).

Θεμελίωση και επαλήθευση. Μια κατασκευή έξι επιπέδων: υλικά μαθήματος και πολιτικές του διδάσκοντα, μετά ένα επίπεδο ανάκτησης, μετά μια μηχανή προβλημάτων και ένα μοντέλο μαθητή δίπλα σε έναν συμβολικό επαληθευτή και μια μηχανή διάγνωσης, μετά ένα επίπεδο παιδαγωγικής πολιτικής, μετά συνομιλιακή παραγωγή, μετά ο φοιτητής, μετά πάλι πίσω στο μοντέλο μαθητή. Ο επαληθευτής είναι ο λόγος που αυτός ο σχεδιασμός είναι εφικτός. Αποφασίζει αν μια παράσταση είναι ισοδύναμη, αν μια παράγωγος είναι σωστή, αν ένα ολοκλήρωμα έχει υπολογιστεί, αν ένα κρίσιμο σημείο έχει βρεθεί, και το κάνει χωρίς να ζητά τη γνώμη του μοντέλου.

Μία αλληλεπίδραση. Για την παραγώγιση της $f(x)=(x^2+1)\sin x$, ένα συμβατικό chatbot αποκαλύπτει την απάντηση. Ένας δάσκαλος προσανατολισμένος στη μάθηση συλλογίζεται εσωτερικά ότι ο φοιτητής παραγώγισε και τις δύο συνιστώσες αλλά πολλαπλασίασε τα αποτελέσματα, μια πιθανή παρανόηση του κανόνα γινομένου ως $f'g'$, και θέτει πρώτα μια διαγνωστική ερώτηση: ποιος κανόνας ισχύει όταν πολλαπλασιάζονται δύο συναρτήσεις; Μετά ο φοιτητής γράφει τον κανόνα γινομένου συμβολικά, ορίζει τα $u$ και $v$, και μόνο τότε ο δάσκαλος επαληθεύει την τελική παράσταση. Προσέξτε πόση από τη διδασκαλία συνέβη πριν φτάσει οποιοδήποτε κείμενο του μοντέλου στον φοιτητή.

Πολλαπλές αναπαραστάσεις. Συνδέστε τις συμβολικές διαδικασίες με τον τύπο, τη γραφική παράσταση, τον πίνακα τιμών, μια λεκτική ερμηνεία και ένα φυσικό πλαίσιο ρυθμού μεταβολής. Η διαδικαστική ευχέρεια και η εννοιολογική κατανόηση φαίνονται ίδιες σε ένα φύλλο σωστών απαντήσεων και αποκλίνουν στο πρόβλημα μεταφοράς.

Ο πίνακας ελέγχου. Εκθέστε συγκεντρωτικά τεκμήρια αντί για αδιαφανείς κρίσεις: «κανόνας γινομένου, 62% τεκμηριωμένη κατάκτηση· συνήθη μοτίβα, 18% παραλείπουν έναν όρο, 11% πολλαπλασιάζουν τις παραγώγους». Οι ατομικές διαγνώσεις βγαίνουν ως υποθέσεις με τα τεκμήρια που τις στηρίζουν, κάτι που είναι και αυτό που τις κάνει αναθεωρήσιμες από έναν εκπαιδευτικό (η εξηγησιμότητα μετρά περισσότερο για τον εκπαιδευτικό παρά για τον φοιτητή εδώ).

Το σχέδιο αξιολόγησης. Επίδοση με τον δάσκαλο, επίδοση σε συγκρίσιμα προβλήματα χωρίς αυτόν, διατήρηση με καθυστέρηση, μεταφορά σε άγνωστα προβλήματα, ποιότητα εννοιολογικής εξήγησης, διόρθωση παρανοήσεων, κατάλληλη έναντι πρόωρης αναζήτησης βοήθειας, διαρροή απαντήσεων, ποσοστά ψευδώς θετικών και ψευδώς αρνητικών διαγνώσεων και διαφορικά αποτελέσματα. Η σύγκριση που αποφασίζει το έργο είναι η επίδοση με βοήθεια απέναντι στη μεταγενέστερη επίδοση χωρίς βοήθεια. Ένας φοιτητής που πηγαίνει από 60% σε 95% με τον δάσκαλο και μένει στο 60% μόνος δεν έχει διδαχθεί.

Δεύτερη περίπτωση: καθοδηγητής γραφής, όπου το στάδιο καθορίζει την άδεια

Η γραφή δεν έχει μία σωστή απάντηση, οπότε η επαλήθευση είναι κρίση και η σχεδιαστική δουλειά μετακινείται στη σταδιοποίηση. Η βάση γνώσης πλαισιώνει τη γραφή ως γνωστική, κοινωνική και ρητορική διαδικασία, που σημαίνει ότι ένα σύστημα γραφής με ΤΝ μπορεί να στηρίξει τη μάθηση και μπορεί επίσης να εξαλείψει ακριβώς τη σκέψη που υπήρχε για να αναπτύξει η εργασία (εκπαίδευση στη γραφή, καθοδηγητής και όχι πατερίτσα).

Μοντέλο ικανοτήτων. Παρακολουθήστε το επιχείρημα (ειδικότητα θέσης, ευθυγράμμιση ισχυρισμού και τεκμηρίου, αντεπιχείρημα), την οργάνωση (εστίαση παραγράφου, λογική πρόοδος, μεταβάσεις), τα τεκμήρια (συνάφεια πηγής, ενσωμάτωση, ερμηνεία), την αναθεώρηση (σφαιρική και σε επίπεδο πρότασης, αξιολόγηση ανατροφοδότησης) και το ύφος (σαφήνεια, γραμματική, φωνή). Κάθε ένα γίνεται ξεχωριστό σήμα στο μοντέλο μαθητή, κάτι που είναι αυτό που κάνει δυνατή την στοχευμένη ανατροφοδότηση.

Θεμελιώστε τον καθοδηγητή στην εργασία. Ανακτήστε τις οδηγίες, τη ρουμπρίκα του διδάσκοντα, τις αναγνώσεις του μαθήματος, τις απαιτήσεις παραπομπών, τις συμβάσεις του είδους, τα παραδείγματα του διδάσκοντα και την πολιτική χρήσης ΤΝ, ώστε η ανατροφοδότηση να μπορεί να πει «η ρουμπρίκα του διδάσκοντός σας ζητά να συνδέετε κάθε κύριο ισχυρισμό με τεκμήρια από τουλάχιστον δύο αναγνώσεις του μαθήματος» αντί να επινοεί γενικές προσδοκίες. Η γενική συμβουλή είναι η προεπιλεγμένη αποτυχία ενός μη θεμελιωμένου εργαλείου γραφής, και οι φοιτητές το καταλαβαίνουν μέσα σε δύο συνεδρίες.

Ορίστε άδειες ανά στάδιο. Η εμπλοκή της ΤΝ σε διαφορετικά στάδια επηρεάζει διαφορετικά την αντιλαμβανόμενη κυριότητα. Η υποστήριξη στον σχεδιασμό μειώνει λιγότερο την κυριότητα από την υποστήριξη στη σύνταξη πρώτου σχεδίου, και η παραγωγή πρώτου σχεδίου από την ΤΝ παράγει τη μεγαλύτερη μείωση (Από τον σχεδιασμό στην αναθεώρηση). Αυτό το εύρημα μετατρέπεται άμεσα σε πίνακα αδειών. Στον σχεδιασμό, ο καθοδηγητής θέτει ερωτήσεις, συγκρίνει θέσεις, αμφισβητεί υποθέσεις και κριτικάρει διαγράμματα, και δεν παράγει το επιχείρημα. Στη σύνταξη πρώτου σχεδίου, ο μαθητής παράγει πρώτα κείμενο και ο καθοδηγητής αναπτύσσει αντί να αναλαμβάνει. Στην αναθεώρηση, ο καθοδηγητής διαγιγνώσκει και σταματά εκεί: ασαφείς ισχυρισμοί, τεκμήρια που λείπουν, τεκμήρια που δεν στηρίζουν τον ισχυρισμό, οργανωτικά προβλήματα, το σχέδιο απέναντι στη ρουμπρίκα. Στην επιμέλεια, μετά την αναθεώρηση, χειρίζεται γραμματική, στίξη, συντομία και μορφοποίηση παραπομπών.

Μια λυμένη αλληλεπίδραση. Για ένα δοκίμιο σχετικά με την απαίτηση διαδικτυακών μαθημάτων, ένα γενικό σύστημα ξαναγράφει την παράγραφο του φοιτητή σε στιλβωμένο κείμενο και κάνει την πνευματική εργασία. Ένας καθοδηγητής λέει τι δουλεύει, ονομάζει το κύριο ζήτημα (η παράγραφος δίνει λόγους αλλά ποτέ δεν εξηγεί γιατί δικαιολογούν μια πανεπιστημιακή υποχρέωση για όλους) και ζητά από τον φοιτητή να ολοκληρώσει μια πρόταση με δικά του λόγια. Το επιχείρημα μένει εκεί που ανήκει.

Ιεραρχημένη ανατροφοδότηση. Ένα δυνατό σημείο προς διατήρηση, ένα ζήτημα υψηλού αντίκτυπου, μία ερώτηση που απαιτεί κρίση του συγγραφέα, ένας συγκεκριμένος στόχος αναθεώρησης. Όχι σαράντα σχόλια. Ένας φοιτητής που λαμβάνει σαράντα σχόλια τα ιεραρχεί κατά μήκος, και η ιεράρχηση δεν έχει καμία σχέση με το τι έχει σημασία.

Κάντε τον φοιτητή κριτή της ανατροφοδότησης. Η επάρκεια στην ανατροφοδότηση είναι μαθησιακός στόχος από μόνη της. Ρωτάτε περιοδικά αν ο μαθητής συμφωνεί με μια πρόταση και γιατί, και αφήστε τον να την απορρίψει. Το αποτέλεσμα είναι αξιολογική κρίση και όχι συμμόρφωση, και είναι και η μόνη άμυνα απέναντι σε έναν καθοδηγητή που κάνει λάθος με βεβαιότητα.

Διατηρήστε τη φωνή. Διακρίνετε τα λάθη, τα προβλήματα σαφήνειας, τις ρητορικές επιλογές και τις υφολογικές προτιμήσεις, και αφήστε τις δύο τελευταίες ήσυχες. Ένας καθοδηγητής που «διορθώνει» ρητορικές επιλογές ομογενοποιεί τη γραφή προς όποιο ύφος προτιμά το μοντέλο, και κάνει τη μεγαλύτερη ζημιά σε πολύγλωσσους συγγραφείς και σε μη τυπικές ρητορικές παραδόσεις (η ποιότητα της ανατροφοδότησης από ΤΝ είναι η γενική εκδοχή αυτού του προβλήματος).

Μάθετε από τις αναθεωρήσεις. Αποθηκεύστε το ιστορικό αναθεωρήσεων και όχι μόνο τα τελικά δοκίμια. Ένα επαναλαμβανόμενο μοτίβο «τεκμήριο που εισάγεται αλλά δεν ερμηνεύεται» που βελτιώνεται σε τρία δοκίμια είναι το πιο χρήσιμο σήμα που μπορεί να έχει ένα σύστημα γραφής, και είναι δωρεάν.

Αξιολόγηση. Ποιότητα της γραφής με ΤΝ και της μεταγενέστερης γραφής χωρίς ΤΝ, ικανότητα εντοπισμού αδυναμιών σε άγνωστο κείμενο, ποιότητα αναθεώρησης, πρόσληψη ανατροφοδότησης, ικανότητα εξήγησης των αναθεωρήσεων, κυριότητα, εξάρτηση από κείμενο ΤΝ, διατήρηση της φωνής, μεροληψία απέναντι σε διαλέκτους και πολύγλωσσους συγγραφείς, ευθυγράμμιση με την κρίση του διδάσκοντα και καθυστερημένη μεταφορά. Ο σχεδιασμός που το απαντά έχει τρεις βραχίονες: γραφή ανεξάρτητα, ΤΝ που παράγει το κείμενο, και καθοδηγητής. Και οι τρεις ομάδες γράφουν μετά ένα νέο δοκίμιο χωρίς ΤΝ. Αν η ομάδα της ΤΝ κερδίζει στην πράξη και χάνει χωρίς αυτήν, το σύστημα βελτίωσε την επίδοση και όχι τη μάθηση. Τα μοτίβα σε επίπεδο τάξης από τον πίνακα ελέγχου (41% χρειάζονται υποστήριξη στη σύνδεση ισχυρισμού και τεκμηρίου) είναι σήμα διαμορφωτικής αξιολόγησης για τον διδάσκοντα.

Σύγκριση των δύο κατασκευών

Ερώτημα σχεδιασμού	Δάσκαλος απειροστικού λογισμού	Καθοδηγητής γραφής
Κύριο μαθησιακό αντικείμενο	Μαθηματικές έννοιες και επίλυση προβλημάτων	Επιχειρηματολογία και διαδικασία γραφής
Επαλήθευση	Συχνά αντικειμενικά ελέγξιμη	Συνήθως απαιτεί κρίση με βάση το πλαίσιο
Ντετερμινιστικά εργαλεία	Μηχανή συμβολικών μαθηματικών, αριθμομηχανή	Έλεγχοι γραμματικής, παραπομπών, ρουμπρίκας
Κύριος ρόλος της ΤΝ	Διάγνωση και στηρικτική υποστήριξη του συλλογισμού	Διάγνωση και στηρικτική υποστήριξη της αναθεώρησης
Κύριος κίνδυνος	Να δοθεί η λύση	Να γραφτεί το κείμενο για τον μαθητή
Η μαθητική ενέργεια που μετρά	Λύση και εξήγηση	Σχέδιο, αξιολόγηση και αναθεώρηση
Μοντέλο μαθητή	Έννοιες, διαδικασίες, παρανοήσεις	Επιχείρημα, τεκμήρια, οργάνωση, αναθεώρηση
Βασικό προστατευτικό όριο	Απόπειρα πριν από τη λύση	Κείμενο του φοιτητή πριν από την αναδιατύπωση από την ΤΝ
Δοκιμή μεταφοράς	Νέα προβλήματα απειροστικού χωρίς ΤΝ	Νέα εργασία γραφής χωρίς ΤΝ
Κριτήριο επιτυχίας	Ανεξάρτητος μαθηματικός συλλογισμός	Ανεξάρτητη γραφή και αξιολογική κρίση

Και τα δύο συστήματα χρησιμοποιούν το ίδιο σύνολο τεχνολογιών ΤΝ και ενσωματώνουν διαφορετικές παιδαγωγικές πολιτικές, γιατί τα γνωστικά αντικείμενα απαιτούν διαφορετικά είδη σκέψης. Ο κανόνας που γενικεύεται είναι να εντοπίζετε τη γνωστική δραστηριότητα που παράγει τη μάθηση και να σχεδιάζετε την ΤΝ ώστε να στηρίζει αυτή τη δραστηριότητα χωρίς να την εκτελεί. Αυτός ο κανόνας υπερέχει κάθε συγκεκριμένου μοντέλου, προτροπής, πλαισίου πρακτόρων ή διεπαφής.

Πού κάνουν λάθος οι ομάδες ανάπτυξης

Η παιδαγωγική ζει στην προτροπή συστήματος, οπότε μια προσεκτική προτροπή είναι παιδαγωγικός σχεδιασμός. Μια προτροπή είναι ένα επίπεδο μιας πολιτικής που περιλαμβάνει επίσης ποια τεκμήρια συλλέγετε, ποια βαθμίδα προσφέρει η διεπαφή, τι ελέγχει ο επαληθευτής και τι δείχνει ο πίνακας ελέγχου. Μια καλογραμμένη προτροπή πάνω σε ένα μοντέλο μαθητή που δεν αποθηκεύει τίποτε θα παραγάγει έναν εύρρυθμο δάσκαλο χωρίς μνήμη του φοιτητή, και η κλίμακα θα ξεκινά από την αρχή σε κάθε συνεδρία.

Ένα καλύτερο μοντέλο θα διορθώσει τη διάγνωση. Το αποτέλεσμα της συγκριτικής αξιολόγησης παραπάνω βρήκε δασκάλους LLM να αναγνωρίζουν σωστό συλλογισμό ενώ απέρριπταν έγκυρες εναλλακτικές και δέχονταν εσφαλμένες, που είναι μοτίβο σφάλματος που η κλίμακα δεν προφανώς διορθώνει. Η δομημένη διάγνωση υπάρχει γιατί η κρίση του μοντέλου είναι το μέρος που δεν μπορείτε να ελέγξετε.

Η ικανοποίηση και η ολοκλήρωση αποδεικνύουν ότι ο σχεδιασμός δουλεύει. Αποδεικνύουν ότι οι φοιτητές πήραν βοήθεια. Η πιλοτική εφαρμογή με 38 φοιτητές προγραμματισμού βρήκε την αντιλαμβανόμενη μάθηση ισχυρά συνδεδεμένη με τη χρήση ενώ η αυτόνομη πρόοδος βαθμολογήθηκε χαμηλότερα, και η μελέτη κατάκτησης βρήκε μια απαίτηση σερί να ανεβάζει την κατάκτηση της πλατφόρμας χωρίς κέρδος στο καθυστερημένο τεστ. Χτίστε τη μέτρηση απόσυρσης μέσα στην πιλοτική εφαρμογή ή θα μάθετε το λάθος μάθημα αποδοτικά.

Η ανάκτηση κάνει τις απαντήσεις αξιόπιστες. Μειώνει τον κίνδυνο ψευδαισθήσεων και αφήνει την υπόλοιπη επιφάνεια αποτυχίας άθικτη: ένα ανακτημένο απόσπασμα μπορεί να παρερμηνευτεί, μια έγκυρη τεχνική μπορεί να είναι λάθος για το μάθημα και το μοντέλο μπορεί ακόμη να κάνει λάθος με βεβαιότητα για ένα βήμα που παρήγαγε μόνο του. Η ανάκτηση είναι ένα κατώφλι.

Το να περάσει η σουίτα ασφάλειας σημαίνει ότι είναι ασφαλές για τους φοιτητές. Η συνηθισμένη δοκιμή ασφάλειας καλύπτει τοξικότητα και jailbreak. Οι παιδαγωγικές αποτυχίες που μετρούν εδώ, η διαρροή απαντήσεων, η κολακεία και η παρέκκλιση, είναι αόρατες σε αυτήν, και συσσωρεύονται κατά τη διάρκεια μιας συνομιλίας αντί να εμφανίζονται σε έναν γύρο.

Η ενασχόληση είναι ο στόχος. Η διάρκεια συνομιλίας και ο αριθμός συνεδριών είναι οι φθηνότερες μετρήσεις προς οργάνωση, και γι' αυτό προάγονται σε στόχους. Το επιχείρημα της στηρικτικής υποστήριξης λέει ότι η ιδανική συνεδρία γίνεται συντομότερη όσο βελτιώνεται ο φοιτητής, οπότε μια άνοδος της ενασχόλησης είναι εξίσου πιθανό να είναι σύμπτωμα.

Τι θα σας φέρουν μπροστά σας

«Παραδίδουμε σε έξι εβδομάδες και αυτό είναι δουλειά ενός τριμήνου.» Το μεγαλύτερο μέρος της αρχιτεκτονικής είναι φθηνό. Μια πύλη απόπειρας, μια διαμορφωμένη κλίμακα, ανάκτηση πάνω σε σημειώσεις που ήδη έχετε και ένα σχήμα καταγραφής με πεδίο απόσυρσης είναι δουλειά ημερών. Τα ακριβά στοιχεία (μοντέλο μαθητή, επαληθευτής, πίνακας ελέγχου) μπορούν να ξεκινήσουν πίσω από μια σημαία λειτουργίας για ένα μάθημα, και η πιλοτική εφαρμογή είναι πιο κατατοπιστική με τα φθηνά μέρη ολοκληρωμένα.

«Στους φοιτητές αρέσει και η ολοκλήρωση ανέβηκε.» Και τα δύο γεγονότα είναι συμβατά με ένα σύστημα που απαντά καλά σε ερωτήσεις και δεν διδάσκει τίποτε. Η μελέτη των 6.000 φοιτητών βρήκε πιο αργή πρόοδο και λιγότερες επιχειρημένες ερωτήσεις μαζί με καλύτερη ακρίβεια, οπότε μια πτώση στην ολοκλήρωση δεν είναι αυτόματα κακό νέο. Αναφέρετε την επίδοση χωρίς βοήθεια δίπλα στους αριθμούς ενασχόλησης και αφήστε τους δύο να διαφωνήσουν δημόσια.

«Δεν μπορούμε να κάνουμε τυχαιοποιημένη δοκιμή.» Μπορείτε να κάνετε σύγκριση εντός του ίδιου φοιτητή χωρίς αυτήν: ο ίδιος στόχος, με βοήθεια κατά τη διάρκεια της ενότητας, ελεγμένος χωρίς βοήθεια δύο εβδομάδες αργότερα, με τη βαθμολογία με βοήθεια να αναφέρεται δίπλα. Αυτός ο σχεδιασμός απαντά στο ερώτημα του προϊόντος και δεν χρειάζεται ομάδα ελέγχου. Αυτό που δεν μπορεί να σας πει είναι το αντιγεγονός για τους φοιτητές που δεν χρησιμοποίησαν ποτέ τον δάσκαλο.

«Το μοντέλο είναι API προμηθευτή, οπότε η συμπεριφορά βοήθειας δεν είναι στο χέρι μας.» Οι βαθμίδες ζουν στο επίπεδο ενορχήστρωσής σας, και το αποτέλεσμα του πειράματος με τα προστατευτικά όρια προήλθε από την αλλαγή του τι επιτρεπόταν να πει ο δάσκαλος και όχι από αλλαγή μοντέλου. Περιμένετε ότι η μετα-εκπαίδευση του προμηθευτή θα τείνει προς την άμεση απάντηση, γιατί η χρησιμότητα είναι αυτό για το οποίο ρυθμίστηκε, και βάλτε τον περιορισμό στον δικό σας κώδικα.

«Οι εκπαιδευτικοί δεν θα χρησιμοποιήσουν άλλον πίνακα ελέγχου.» Δεν θα χρησιμοποιήσουν έναν που εκπέμπει συνεχείς διαγνώσεις, κάτι που η ανασκόπηση K-12 βρήκε ότι τραβά την προσοχή από τη δική τους παρατήρηση. Δώστε τους μικρό αριθμό ερμηνεύσιμων σημάτων, τρόπο να δέχονται ή να απορρίπτουν κάθε σύσταση και χρόνο μέσα στην εβδομάδα για να τα κοιτάξουν.

«Δεν έχουμε ειδικούς γνωστικών αντικειμένων στο προσωπικό.» Τότε ο δάσκαλος θα διδάσκει γενική μέθοδο και ο συμβολισμός του μαθήματος θα παρεκκλίνει μέσα σε ένα εξάμηνο. Ένας ειδικός του αντικειμένου για δύο ημέρες στον χρόνο σχεδιασμού, που γράφει τη λίστα παρανοήσεων και τη λίστα εγκεκριμένων μεθόδων, είναι το φθηνότερο κονδύλι του έργου και αυτό που οι ομάδες κόβουν πρώτο.

Τι να κάνετε αυτή την εβδομάδα

1. Γράψτε την πρόταση για την επίδοση χωρίς βοήθεια για την πιλοτική εφαρμογή και βάλτε την στις προδιαγραφές, πάνω από τον κατάλογο λειτουργιών.

2. Προσθέστε μια πύλη απόπειρας και καταγράψτε την. Καταγράψτε αν ο φοιτητής επιχείρησε πριν από την πρώτη υπόδειξη και σε ποια βαθμίδα έφτασε.

3. Αντικαταστήστε το κουμπί υπόδειξης με την ερώτηση του σημείου αποκλεισμού και καταγράψτε την απάντηση ως κατηγορία.

4. Προγραμματίστε έναν έλεγχο χωρίς βοήθεια δύο εβδομάδες μετά την ενότητα και βάλτε τον στο ημερολόγιο με υπεύθυνο.

5. Κλείστε δύο ημέρες με έναν εκπαιδευτικό του αντικειμένου για να γράψει τη λίστα παρανοήσεων και τη λίστα εγκεκριμένων μεθόδων.

Πού να πάτε μετά

Το Σχεδιασμός εκπαιδευτικού λογισμικού με ΤΝ καλύπτει τους κανόνες σε επίπεδο λογισμικού που πρέπει να ικανοποιεί ένας δάσκαλος, και το Ενσωμάτωση της ΤΝ στη μάθηση καλύπτει πού βρίσκεται ο δάσκαλος σε μια αλληλουχία μαθήματος. Το Αξιολόγηση παρεμβάσεων με ΤΝ: μέθοδοι και το Ελέγχοντας αν η εκπαιδευτική ΤΝ δουλεύει χειρίζονται το αν το πράγμα δουλεύει. Αν το πρόβλημά σας είναι ότι το μοντέλο απαντά πολύ πρόθυμα, το Κάνοντας την ΤΝ καλύτερη στη στήριξη της μάθησης και το Εκπαιδεύοντας δασκάλους ΤΝ να καθοδηγούν αντί να απαντούν δουλεύουν την πλευρά της εκπαίδευσης του ίδιου ερωτήματος.