Βοηθά πραγματικά η χρήση ΤΝ τους μαθητές μου να μάθουν;

Αυτόματη μηχανική μετάφραση αυτής της αγγλικής σελίδας, που δεν έχει ακόμη ελεγχθεί από φυσικό ομιλητή.

Ένας φοιτητής σάς λέει ότι ο δάσκαλος ΤΝ είναι ο λόγος που κατάλαβε επιτέλους το υλικό, και εσείς δεν έχετε τρόπο να ελέγξετε τον ισχυρισμό. Ή ένα πιλοτικό πρόγραμμα προσγειώνεται στο γραφείο σας με μια έρευνα ικανοποίησης και ένα στιγμιότυπο οθόνης με ανοδικούς βαθμούς εργασιών, και κάποιος θέλει απόφαση για την άδεια χρήσης μέχρι το τέλος του μήνα. Ή στέκεστε μπροστά σε μια τάξη και αναρωτιέστε αν το εργαλείο που μόλις τους είπατε να ανοίξουν τους βοηθά να εξασκηθούν ή τους βοηθά να αποφύγουν την εξάσκηση.

Η σύντομη απάντηση: ναι, η ΤΝ μπορεί να βοηθήσει τους μαθητές να μάθουν, και κανένα από τα πράγματα που είναι πιθανότερο να δείτε δεν αποδεικνύει ότι το έκανε: καλύτερες εργασίες, ταχύτερη ολοκλήρωση, ευχαριστημένοι μαθητές ή ένα προϊόν που ονομάζεται δάσκαλος. Αυτό που ξεχωρίζει τις περιπτώσεις όπου η μάθηση βελτιώνεται από εκείνες όπου δεν βελτιώνεται είναι ο σχεδιασμός της δραστηριότητας και το αποτέλεσμα που επιλέξατε να μετρήσετε.

Η σύντομη εκδοχή

1. Ονομάστε πρώτα την ικανότητα και μετά αποφασίστε ποια στοιχεία θα έδειχναν ότι άλλαξε.

2. Μετρήστε την ίδια ικανότητα αργότερα, με το εργαλείο να έχει αφαιρεθεί, γιατί αυτή είναι η μόνη μέτρηση που απαντά στην ερώτησή σας.

3. Βάλτε τη δική του προσπάθεια του μαθητή πριν από τη βοήθεια και απαιτήστε μια απάντηση στη βοήθεια μετά.

4. Βαθμολογήστε την επαλήθευση: τι έλεγξαν, τι απέρριψαν, τι άλλαξαν.

5. Δείτε τα αποτελέσματα ανά προηγούμενη γνώση, γιατί ο μέσος όρος κρύβει τους μαθητές τους οποίους ο σχεδιασμός αποτυγχάνει.

Αποφασίστε τι εννοείτε με μάθηση πριν κοιτάξετε οποιοδήποτε στοιχείο

Το ερώτημα «Βοηθά η ΤΝ τους μαθητές να μάθουν» δεν είναι μία ερώτηση. Συσκευάζει τουλάχιστον τρεις: αυξάνει το εργαλείο την επίδοση όσο είναι ανοιχτό, χτίζει ικανότητα που παραμένει όταν κλείσει, και αλλάζει ποιος καταλήγει με αυτή την ικανότητα. Μια έκθεση προμηθευτή, μια έρευνα πιλοτικού προγράμματος και μια τυχαιοποιημένη δοκιμή μπορεί όλες να είναι έντιμες και παρόλα αυτά να απαντούν σε διαφορετικές από αυτές.

Γράψτε την ικανότητα πριν από τη δραστηριότητα. Το «Παράγω μια καλογραμμένη έκθεση» είναι διαφορετικό αποτέλεσμα από το «επιλέγω κατάλληλα στοιχεία», το «εξηγώ μια αιτιακή σχέση» ή το «εντοπίζω ένα αβάσιμο συμπέρασμα». Η αξιολόγηση πρέπει να αποκαλύπτει την ικανότητα που σκοπεύετε να αναπτύξετε, που είναι το επιχείρημα στην εκπαιδευτική μέτρηση και το σημείο εκκίνησης της αξιολόγησης εκπαιδευτικών παρεμβάσεων ΤΝ.

Το σώμα τεκμηρίωσης υποστηρίζει δύο ισχυρισμούς ταυτόχρονα, και η συγκράτηση και των δύο είναι η πειθαρχία που ζητά αυτή η σελίδα. Μια σύνθεση της Παγκόσμιας Τράπεζας, Μπορεί η εκπαιδευτική τεχνολογία να κλείσει τα μαθησιακά χάσματα;, συγκέντρωσε 14 τυχαιοποιημένες μελέτες σε δέκα οικονομίες και εκτίμησε ένα θετικό μέσο μαθησιακό αποτέλεσμα 0,125 τυπικών αποκλίσεων για προσαρμοστική και υποστηριζόμενη από ΤΝ εκπαιδευτική τεχνολογία. Συνδύασε επίσης παλαιότερα προσαρμοστικά συστήματα με εργαλεία γενετικής ΤΝ, δεν βρήκε στατιστικά τεκμηριωμένο πλεονέκτημα για τα νεότερα γενετικά εργαλεία και αναγνώρισε σημαντική αβεβαιότητα σε αυτή τη σύγκριση. Το αποτέλεσμα υποστηρίζει τις δυνατότητες αυτών των παρεμβάσεων, όχι τον ισχυρισμό ότι οποιοδήποτε ρομπότ συνομιλίας θα βελτιώσει τη μάθηση. Ένας θετικός μέσος όρος, με άλλα λόγια, είναι συμβατός με μεγάλη διακύμανση και με κανένα αποδεδειγμένο πλεονέκτημα για αυτό που εξετάζετε στην πραγματικότητα.

Οι πιο χρήσιμες μελέτες είναι εκείνες που μεταβάλλουν τον σχεδιασμό μέσα σε ένα μόνο πείραμα. Μια τυχαιοποιημένη μελέτη σε πολλές τοποθεσίες με 1.176 πρωτοετείς προπτυχιακούς φοιτητές συνέκρινε ανατροφοδότηση από ομότιμους, άμεση ανατροφοδότηση από ΤΝ, αυτοαξιολόγηση ακολουθούμενη από ανατροφοδότηση ΤΝ και μια υβριδική ακολουθία αυτοαξιολόγησης, ανατροφοδότησης από ομότιμους και κριτικής από ΤΝ. Οι συνθήκες αναστοχασμού και η υβριδική παρήγαγαν ισχυρότερη καθυστερημένη μεταφορά χωρίς ΤΝ από την άμεση ανατροφοδότηση ΤΝ: οι φοιτητές τα πήγαν καλύτερα σε ένα νέο έργο επιστημονικής επιχειρηματολογίας, όχι μόνο στο δοκίμιο που αναθεωρούσαν. Αυτές οι συνθήκες απαιτούσαν επίσης περισσότερη αξιολογική εργασία και πιθανώς περισσότερο χρόνο, οπότε η μελέτη υποστηρίζει τον πλήρη σχεδιασμό ανατροφοδότησης και όχι ένα συστατικό του.

Ελέγξτε αν το κέρδος επιβιώνει όταν αφαιρεθεί το εργαλείο

Αυτός είναι ο πιο κατατοπιστικός έλεγχος που έχετε διαθέσιμο, και είναι εύκολο να τον παραλείψετε σε ένα πιλοτικό πρόγραμμα.

Η σαφέστερη προειδοποίηση στο σώμα τεκμηρίωσης είναι ένα τυχαιοποιημένο πείραμα πεδίου με σχεδόν 1.000 μαθητές λυκείου, Η γενετική ΤΝ χωρίς δικλείδες μπορεί να βλάψει τη μάθηση. Μια διεπαφή γενικής χρήσης αύξησε τις βαθμολογίες στην υποβοηθούμενη εξάσκηση κατά 48% σε σχέση με την ομάδα ελέγχου, και οι ίδιοι μαθητές στη συνέχεια βαθμολογήθηκαν 17% χαμηλότερα σε εξετάσεις χωρίς βοήθεια. Ένας δάσκαλος διαμορφωμένος με καθοδήγηση και υποδείξεις σχεδιασμένες από τον εκπαιδευτικό απέφυγε σε μεγάλο βαθμό αυτή την ποινή. Δεν παρήγαγε στατιστικά σημαντική βελτίωση στην επίδοση στις εξετάσεις χωρίς βοήθεια σε σχέση με την ομάδα ελέγχου. Το να αποφεύγεις τη βλάβη και το να αποδεικνύεις πρόσθετη μάθηση είναι διαφορετικά επιτεύγματα.

Σε εθνική κλίμακα η ίδια διάσπαση εμφανίζεται με χρονική υστέρηση. Το μαθησιακό κόστος της γενετικής ΤΝ παρακολούθησε 26.811 Κινέζους μαθητές δευτεροβάθμιας εκπαίδευσης στις τάξεις 7 έως 12 για 30 μήνες, χρησιμοποιώντας κλιμακωτή υιοθέτηση. Οι βαθμοί στις εργασίες στο σπίτι αυξήθηκαν κατά 18% και ο χρόνος ολοκλήρωσης έπεσε κατά 30%, από 64 σε 45 λεπτά. Οι βαθμοί στις μηνιαίες εξετάσεις κλειστού βιβλίου έπεσαν κατά 20% μέσα σε έξι μήνες, και οι βαθμοί στις κρίσιμες εισαγωγικές εξετάσεις έπεσαν κατά 18-24% της βάσης, αλλά μόνο μετά από περίπου δύο χρόνια. Οι απώλειες συγκεντρώθηκαν στο περίπου 81% των χρηστών των οποίων η συμπεριφορά υποδείκνυε ανάθεση της εργασίας σε άλλους, ενώ οι μαθητές που διατήρησαν χρόνο εργασίας συγκρίσιμο με τους μη χρήστες έμαθαν περίπου εξίσου αποδοτικά. Δύο πράγματα προκύπτουν για το μάθημά σας: η απόκλιση ανάμεσα στην επίδοση στις εργασίες και στις εξετάσεις είναι το χάσμα επίδοσης και μάθησης σε ένα εθνικό δείγμα, και η υστέρηση των δύο ετών σημαίνει ότι μια αξιολόγηση ενός εξαμήνου θα υποεκτιμήσει συστηματικά το κόστος.

Η εκπαίδευση στην πληροφορική δείχνει την ίδια δομή. Η συστηματική ανασκόπηση 72 μελετών βρήκε ότι η γενετική ΤΝ αύξησε αξιόπιστα τη βραχυπρόθεσμη ολοκλήρωση και μείωσε τον χρόνο στην εργασία σε 36 μελέτες, χωρίς ούτε μία μελέτη στο σώμα τεκμηρίωσης να τεκμηριώνει αρνητική επίδραση στην άμεση επίδοση, και αυτά τα κέρδη «δεν μεταφέρονται σε ανεξάρτητη επίδοση» σε 21 μελέτες. Μαθητές που υποστηρίχθηκαν από το Codex ολοκλήρωσαν διπλάσιο αριθμό έργων κατά τη διάρκεια της μάθησης και δεν τα πήγαν καλύτερα από την ομάδα ελέγχου σε μεταγενέστερες δοκιμασίες χωρίς ΤΝ.

Έπειτα υπάρχει το ερώτημα αν οι μαθητές χρησιμοποιούν καθόλου τη βοήθεια. Ένα διετές τυχαιοποιημένο σχολικό πείραμα σε 18 γυμνάσια, Ένα κλικ μακριά, βρήκε μέτρια κέρδη επίδοσης στα μαθηματικά, και οι μαθητές σπάνια συμμετείχαν σε ουσιαστικές συνομιλίες διδασκαλίας. Οι συγγραφείς σημείωσαν ότι τα κέρδη έμοιαζαν με τα κέρδη που αναφέρονται για δομημένη εξάσκηση χωρίς ΤΝ, και ο σχεδιασμός συνδύαζε εξατομικευμένη εξάσκηση με διδασκαλία από ΤΝ, οπότε δεν απομόνωσε τη συμβολή του συστατικού ΤΝ. Το ότι ένας ικανός δάσκαλος είναι διαθέσιμος είναι διαφορετικό γεγονός από το ότι οι μαθητές τον χρησιμοποιούν παραγωγικά.

Το Κάνοντας την καθοδήγηση από ΤΝ παραγωγική προσθέτει ένα οξύτερο μάθημα από περισσότερους από 6.000 μαθητές γυμνασίου που χρησιμοποιούν το NUMI. Η υποστήριξη ΤΝ βελτίωσε την ανάκαμψη μετά από λάθη και επιβράδυνε την πρόοδο μέσα στις ερωτήσεις. Ένας κανόνας κατάκτησης «τρεις σωστές απαντήσεις στη σειρά» αύξησε την επιτυχία όπως την ορίζει η πλατφόρμα, χωρίς όμως να βελτιώσει από μόνος του τη μάθηση μία εβδομάδα αργότερα. Το ισχυρότερο σήμα καθυστερημένης μάθησης εμφανίστηκε όταν η ΤΝ ενσωματώθηκε στη ροή εργασίας κατάκτησης, και αυτά τα κέρδη ήταν οριακά στατιστικά σημαντικά και συγκεντρωμένα σε συγκεκριμένο υλικό που είχε εξασκηθεί. Αυτό είναι ενδεικτική απόδειξη για μια δομημένη προσέγγιση, όχι δοκιμασμένη συνταγή.

Σχεδιάστε τη δραστηριότητα ώστε ο μαθητής να κάνει τη σκέψη που μετράει

Ο διδακτικός σχεδιασμός μετράει περισσότερο από το ποιο μοντέλο τρέχετε. Ο σχεδιασμός που επιβιώνει από αυτά τα αποτελέσματα έχει τέσσερις στροφές: μια προσπάθεια, βοήθεια στοχευμένη στη δυσκολία, κάτι που κάνει ο μαθητής με τη βοήθεια, και μια νέα εφαρμογή με την υποστήριξη αποσυρμένη.

1. Ζητήστε μια αρχική προσπάθεια, πρόβλεψη, προσχέδιο, εξήγηση ή ερμηνεία.

2. Προσφέρετε στοχευμένη βοήθεια: μια υπόδειξη, μια εξήγηση, ένα αντιθετικό παράδειγμα ή εστιασμένη ανατροφοδότηση στο σημείο όπου κόλλησαν.

3. Απαιτήστε μια απάντηση στη βοήθεια. Την εξηγούν, την αναθεωρούν με αυτήν, την επαληθεύουν ή αιτιολογούν την αποδοχή και την απόρριψή της.

4. Ελέγξτε ένα συγκρίσιμο πρόβλημα ή ένα διαφορετικό πλαίσιο με την υποστήριξη αποσυρμένη.

Αυτό είναι ένα διδακτικό σημείο εκκίνησης και όχι επικυρωμένη ακολουθία, και η σωστή ποσότητα και χρονική στιγμή της υποστήριξης εξαρτώνται από τους μαθητές και το έργο. Αντανακλά αυτό που τονίζουν οι συνθέσεις για τη στηρικτική υποστήριξη και τη ενεργητική μάθηση: υποστήριξη που βοηθά τους εκπαιδευόμενους να κατανοήσουν, να εξασκηθούν, να αξιολογήσουν και τελικά να εκτελέσουν με λιγότερη από αυτήν.

Εφαρμόστε την αρχή στον στόχο, όχι μηχανικά σε κάθε χαρακτηριστικό. Το «Στηρίξτε, μην υποκαταστήσετε» είναι ένας καλός κανόνας με μια παγίδα μέσα του. Ένα πλήρες λυμένο παράδειγμα μπορεί να είναι κάτι από το οποίο οι μαθητές μαθαίνουν, και μια ακολουθία υποδείξεων μπορεί παρόλα αυτά να γίνει κάτι στο οποίο κάνουν κλικ χωρίς να σκέφτονται. Αυτό που μετράει είναι τι κάνει ο εκπαιδευόμενος με τη βοήθεια, γι' αυτό η γνωστική εκφόρτωση και η αναζήτηση βοήθειας βρίσκονται στα αντίθετα άκρα αυτού που μπορεί να παράγει το ίδιο εργαλείο.

Το αντιπαράδειγμα αξίζει να το κρατήσετε στο οπτικό σας πεδίο, γιατί σας εμποδίζει να μετατρέψετε την προσπάθεια σε υποκατάστατο της μάθησης. Στα προεγγεγραμμένα πειράματα που αναφέρονται στο Προπονητής, όχι πατερίτσα, ενήλικες που εξασκήθηκαν στην αναθεώρηση συνοδευτικών επιστολών με ΤΝ παρήγαγαν καλύτερα κείμενα χωρίς ΤΝ στη συνέχεια από εκείνους που εξασκήθηκαν μόνοι, και κατέβαλαν λιγότερη προσπάθεια κάνοντάς το. Τα οφέλη διατηρήθηκαν σε επανέλεγχο μίας ημέρας, και ένα δεύτερο πείραμα βρήκε ότι η παρακολούθηση ενός παραδείγματος αναθεωρημένου από ΤΝ παρήγαγε συγκρίσιμα οφέλη με την εξάσκηση με το εργαλείο. Εκείνα ήταν σύντομα, περιορισμένα έργα γραφής, όχι απόδειξη διαρκούς βελτίωσης σε κάθε είδους γραφή. Δείχνουν όμως ότι λιγότερη προσπάθεια δεν σημαίνει αυτόματα λιγότερη μάθηση, και ότι ο στόχος είναι να διατηρηθεί η μαθησιακή δραστηριότητα, όχι να μεγιστοποιηθεί η δυσκολία.

Κάντε τη σκέψη που διατηρείται ορατή σε αυτό που βαθμολογείτε

Το πώς χρησιμοποιούν οι μαθητές το εργαλείο μετράει περισσότερο από το αν το έχουν. Σε μια ποιοτική μελέτη 38 προπτυχιακών φοιτητών σε αξιολογήσεις δοκιμίων χωρίς επιτήρηση, η εμπλοκή κυμάνθηκε από τη γνωστική ανάθεση σε άλλους έως τη γνωστική ανακατανομή, τη μετατόπιση της προσπάθειας από την επιφανειακή ανάκληση στην κριτική αξιολόγηση. Οι περισσότεροι φοιτητές, 31 από τους 38, σκόπευαν να χρησιμοποιήσουν τη γενετική ΤΝ ως βοηθό μάθησης. Στην πράξη το 76,32% βασίστηκε σε διάλογο ενός γύρου, ρώτησε, πήρε απάντηση, σταμάτησε, και το 78,94% χρησιμοποίησε το εργαλείο πριν ή μετά το προσχέδιο και όχι μέσα από το έργο. Μόνο 8 φοιτητές λειτούργησαν ως γνωστικοί εταίροι μέσα από παρατεταμένο, επαναληπτικό διάλογο. Αυτό το φάσμα, από την ανάθεση στην ανακατανομή, είναι αυτό που περιγράφει η αλληλεπίδραση μαθητή και ΤΝ. Ένας συμμετέχων περιέγραψε το αποτέλεσμα ως «ο ρυθμός με τον οποίο το ξεχνάς είναι επίσης πολύ γρήγορος».

Το παιδαγωγικό μάθημα είναι ότι οι γενικές άδειες και οι γενικές απαγορεύσεις αφήνουν και οι δύο τους μαθητές να μαντεύουν. Αυτό που άλλαξε τη συμπεριφορά, σύμφωνα με την αφήγηση εκείνης της μελέτης, ήταν η καθοδήγηση ειδική για το έργο σχετικά με το ποια γνωστική εργασία έπρεπε να διατηρήσουν οι μαθητές και ποια βοήθεια ήταν κατάλληλη, η κατεύθυνση σχεδιασμού που αναπτύσσεται στο Πώς μπορώ να μειώσω την εξαπάτηση με ΤΝ στο μάθημά μου; και στο Μείωση της κατάχρησης ΤΝ.

Έτσι κάντε τη διατηρούμενη σκέψη ένα τεκμήριο που μπορείτε να βαθμολογήσετε. Στα μαθηματικά, ζητήστε την επιχειρούμενη λύση πριν ζητηθεί βοήθεια, μετά βάλτε τους μαθητές να χρησιμοποιήσουν μια οδηγία όπως «προσδιόρισε το πρώτο βήμα που πρέπει να επανεξετάσω, δώσε μου μία χρήσιμη υπόδειξη και ζήτησέ μου να ξαναπροσπαθήσω», και απαιτήστε μια νέα λύση μαζί με μια εξήγηση αντί για αναπαραγωγή της απάντησης της ΤΝ. Στη γραφή, βάλτε τους μαθητές να αξιολογήσουν το προσχέδιό τους με βάση την κλίμακα αξιολόγησης πριν ζητήσουν κριτική, και μετά να εξηγήσουν ποιες προτάσεις δέχτηκαν, τροποποίησαν ή απέρριψαν. Αν η κατασκευή επιχειρήματος είναι ο στόχος, η πεζογραφία της ΤΝ δεν μπορεί να υποκαταστήσει στοιχεία που αποδεικνύουν ότι ο μαθητής μπορεί να χτίσει επιχείρημα. Αν η αξιολόγηση εναλλακτικών αναθεωρήσεων είναι ο στόχος, η σύγκριση πλήρων παραδειγμάτων είναι κατάλληλη. Οι σελίδες για τη διδασκαλία της γραφής και την επάρκεια στην ανατροφοδότηση φέρουν τη λεπτομέρεια.

Η απαίτηση σχεδιασμού της ανασκόπησης είναι η ίδια κίνηση σε επίπεδο μαθήματος: επαλήθευση, δηλαδή ανάγνωση, δοκιμή, τροποποίηση, εξήγηση και κριτική της εξόδου της ΤΝ, να γίνει βαθμολογημένο και παρατηρήσιμο συστατικό αντί για προσδοκία που αφήνεται στη διακριτική ευχέρεια του μαθητή. Και δεν χρειάζεται κάθε νόμιμο αποτέλεσμα να αποδεικνύεται χωρίς ΤΝ. Ένα μάθημα μπορεί σκόπιμα να διδάσκει αποτελεσματική εργασία με υποστήριξη ΤΝ, οπότε αξιολογείτε την ικανότητα του μαθητή να επιλέγει, να επαληθεύει, να αναθεωρεί και να υπερασπίζεται τη χρήση του εργαλείου παράλληλα με όποια ανεξάρτητα θεμέλια απαιτεί ο κλάδος. Το Ένα τεστ ανθρώπινης ικανότητας για τα μαθησιακά αποτελέσματα στην εποχή της ΤΝ προτείνει αυτή τη διάκριση τριών κατευθύνσεων ανάμεσα στην ανεξάρτητη ικανότητα, την επίδοση με υποστήριξη ΤΝ και την ευθύνη της επαλήθευσης. Είναι εννοιολογικό πλαίσιο, όχι επικυρωμένο εργαλείο.

Ελέγξτε ποιον βοηθά το εργαλείο και ποιον αφήνει ήσυχα πίσω

Μια μέση βελτίωση μπορεί να κρύψει μαθητές που δεν κέρδισαν τίποτα ή συνάντησαν ένα νέο εμπόδιο. Η σύνθεση για το ψηφιακό χάσμα διαχωρίζει την πρόσβαση σε ένα εργαλείο από τη δεξιότητα που απαιτείται για τη χρήση του και από το ποιος καταλήγει με ένα χρήσιμο αποτέλεσμα, και τα τρία μετράνε για ένα μάθημα.

Η προηγούμενη γνώση ρυθμίζει τα πάντα στην ανασκόπηση της πληροφορικής: καλά προετοιμασμένοι μαθητές μετατρέπουν τη βοήθεια σε διαρκή δεξιότητα, ενώ λιγότερο προετοιμασμένοι κινδυνεύουν να τη χρησιμοποιήσουν ως πατερίτσα που αφαιρεί την εξάσκηση που χρειάζονται. Η εθνική μελέτη κοόρτης δείχνει την ίδια συγκέντρωση με τον δικό της τρόπο, με τις μαθησιακές απώλειες να βρίσκονται στο 81% εκείνων των οποίων η συμπεριφορά στις εργασίες υποδείκνυε ανάθεση.

Για μια αξιολόγηση στην τάξη, αναλύστε τα αποτελέσματα ανά προηγούμενη γνώση, γλωσσικές ανάγκες και απαιτήσεις προσβασιμότητας αντί να αναφέρετε έναν μέσο όρο μαθήματος. Το να διδάσκετε στους μαθητές πώς να αποκτούν και να αξιολογούν χρήσιμη ανατροφοδότηση είναι μέρος της επάρκειας σε τεχνητή νοημοσύνη, και δεν έρχεται μαζί με την άδεια χρήσης. Όταν αξιολογείτε ανεξάρτητη μάθηση, αφαιρέστε τη βοήθεια που παρέχει τη στοχευμένη σκέψη και αφήστε τις προσαρμογές που παρέχουν πρόσβαση στο έργο, που είναι η διάκριση από την οποία εξαρτώνται τόσο η προσβασιμότητα όσο και η ισότητα στην εκπαίδευση με ΤΝ.

Εξετάστε επίσης την ανατροφοδότηση που λαμβάνουν πραγματικά οι μαθητές. Μια εύστοχη απάντηση μπορεί να διαγνώσει λάθος τη δυσκολία, να ενισχύσει ένα σφάλμα ή να παραδώσει μια απάντηση εκεί όπου χρειαζόταν διαφορετικό είδος υποστήριξης. Χρησιμοποιήστε υλικά ευθυγραμμισμένα με το μάθημα, κρατήστε μια διαδρομή προς ανθρώπινη βοήθεια και συλλέξτε όχι περισσότερες πληροφορίες μαθητών από όσες απαιτεί η δραστηριότητα. Η ποιότητα της ανατροφοδότησης από ΤΝ, η παιδαγωγική ασφάλεια και η ιδιωτικότητα καλύπτουν τις λεπτομέρειες.

Μην εμπιστεύεστε τον πίνακα ελέγχου, ούτε τον δικό σας

Οι μετρήσεις πλατφόρμας είναι τα ευκολότερα στοιχεία που μπορείτε να μεταφέρετε σε μια απόφαση προμήθειας, και τα ευκολότερα να υπερερμηνεύσετε. Σε μια αξιολόγηση οκτώ πρακτόρων διδασκαλίας με ΤΝ στην ιατρική εκπαίδευση, οι κατατάξεις με βάση τη βαθμολογία της ίδιας της πλατφόρμας απέκλιναν από μια κλίμακα ποιότητας διδασκαλίας επικυρωμένη από ειδικούς. Ο πράκτορας που κατατάχθηκε τρίτος από την πλατφόρμα κατατάχθηκε τελευταίος στην ποιότητα της κλίμακας, γιατί η βαθμολογία της πλατφόρμας παρακολουθούσε την επίδοση του μαθητή κατά την αλληλεπίδραση και όχι τη διδακτική συμπεριφορά του πράκτορα. Μια ενσωματωμένη μέτρηση είναι υπόθεση προς επικύρωση.

Ο ίδιος σκεπτικισμός ισχύει για τα στοιχεία που παράγετε εσείς. Μια έρευνα ικανοποίησης μετρά την ικανοποίηση, και η αντιλαμβανόμενη μάθηση είναι μέτρηση αυτοαναφοράς που το σώμα τεκμηρίωσης τεκμηριώνει ότι αποκλίνει πολύ από τη μετρημένη μάθηση. Οι βαθμοί εργασιών μετρούν την εργασία. Κανένα από τα δύο δεν σας λέει τι μπορεί να κάνει ένας μαθητής σε τρεις εβδομάδες με το εργαλείο κλειστό, και το Ποια μέτρα και ποιες ερευνητικές μέθοδοι μπορούν να χρησιμοποιήσουν οι διδάσκοντες για να αξιολογήσουν παρεμβάσεις που σχετίζονται με την ΤΝ; παρουσιάζει τους σχεδιασμούς σύγκρισης που σας φέρνουν πιο κοντά.

Τι κάνουν λάθος οι εκπαιδευτικοί σε αυτό

«Υψηλότεροι βαθμοί στην εργασία σημαίνουν ότι έμαθαν περισσότερα.» Τα δύο μπορούν να κινηθούν σε αντίθετες κατευθύνσεις. Το πείραμα με τις δικλείδες ασφαλείας αύξησε την υποβοηθούμενη εξάσκηση κατά 48% ενώ οι εξετάσεις χωρίς βοήθεια έπεσαν κατά 17%, και η εθνική κοόρτη είδε τους βαθμούς των εργασιών να αυξάνονται κατά 18% ενώ οι βαθμοί των εξετάσεων κλειστού βιβλίου έπεσαν κατά 20% μέσα σε έξι μήνες. Κανένα από τα δύο μοτίβα δεν θα εμφανιζόταν σε ένα βαθμολόγιο που καταγράφει μόνο την τελική υποβολή.

«Είναι δάσκαλος, άρα είναι ασφαλές.» Το «δάσκαλος» είναι ετικέτα, και τα αποτελέσματα πίσω από την ετικέτα είναι ανάμεικτα. Ο δάσκαλος που διαμόρφωσε ο εκπαιδευτικός απέφυγε την ποινή στις εξετάσεις και δεν ξεπέρασε την ομάδα ελέγχου στις εξετάσεις χωρίς βοήθεια. Το Khanmigo παρήγαγε μέτρια κέρδη που έμοιαζαν με δομημένη εξάσκηση, με λίγη ουσιαστική διδασκαλία να λαμβάνει χώρα. Η ΤΝ του NUMI επιβράδυνε την πρόοδο μέσα στις ερωτήσεις. Ένας δάσκαλος μπορεί να κρατήσει τις λύσεις και παρόλα αυτά να απορροφήσει την εξάσκηση.

«Αν φαίνεται ευκολότερο, δεν τους διδάσκει τίποτα.» Λάθος και προς τις δύο κατευθύνσεις, γι' αυτό η προσπάθεια είναι κακό υποκατάστατο. Το Coach not crutch βρήκε λιγότερη προσπάθεια με καλύτερη γραφή χωρίς ΤΝ μια μέρα αργότερα, οπότε η ευκολία δεν είναι το σημάδι. Αυτό που ξεχωρίζει τις περιπτώσεις είναι αν ο μαθητής έκανε τη σκέψη που ονομάζει ο στόχος, και αυτό είναι ερώτημα σχεδιασμού και όχι ρύθμιση δυσκολίας.

«Ένας γενικός κανόνας, ή μια καλύτερη οδηγία, διορθώνει το πώς το χρησιμοποιούν.» Η μελέτη των 38 φοιτητών βρήκε τους περισσότερους σε λειτουργία ερώτησης και διακοπής ενός γύρου ακριβώς στις συνθήκες όπου τους είχαν πει ότι η ΤΝ είναι βοηθός μάθησης. Αυτό που μετακίνησε τη συμπεριφορά ήταν καθοδήγηση ειδική για το έργο και μια βαθμολογημένη απαίτηση επαλήθευσης. Μια γραμμή πολιτικής και μια έξυπνη οδηγία είναι και οι δύο εισροές σε αυτό, και καμία δεν το υποκαθιστά.

«Η βαθμολογία της πλατφόρμας, ή η έρευνα ικανοποίησης, μου λέει ότι δουλεύει.» Η αξιολόγηση των οκτώ πρακτόρων βρήκε μια κατάταξη πλατφόρμας που αντιστράφηκε υπό κλίμακα ειδικών. Η ικανοποίηση και η αντιλαμβανόμενη μάθηση είναι αυτοαναφορές. Και οι δύο αξίζει να συλλέγονται ως πληροφορία διαδικασίας, και καμία δεν είναι μέτρηση μάθησης.

«Η πρόσβαση είναι το πρόβλημα ισότητας, και έχουμε λύσει την πρόσβαση.» Η πρόσβαση είναι μία από τρεις γραμμές, μαζί με τη δεξιότητα και το ποιος παίρνει ένα χρήσιμο αποτέλεσμα. Η προηγούμενη γνώση αποφασίζει αν η βοήθεια γίνεται δεξιότητα ή πατερίτσα, και οι απώλειες στην εθνική κοόρτη συγκεντρώθηκαν στην ομάδα της οποίας η συμπεριφορά υποδείκνυε υποκατάσταση και όχι στην ομάδα χωρίς συσκευές.

Τι θα σας αντιτάξουν

«Οι μαθητές μου λένε ότι βοηθά.» Πιθανώς βοηθά με την εργασία μπροστά τους, και αυτό είναι το εύρημα, όχι η αναίρεσή του. Ρωτήστε τι μπορούν να κάνουν σε ένα παρόμοιο έργο με το εργαλείο κλειστό, και παίρνετε την απάντηση που μετράει.

«Οι μελέτες αντιφάσκουν μεταξύ τους, άρα γιατί να βασιστώ σε κάποια;» Σπάνια αντιφάσκουν όταν ευθυγραμμίσετε το αποτέλεσμα που μέτρησε η καθεμία. Τα θετικά αποτελέσματα τείνουν να μετρούν υποβοηθούμενη επίδοση, ικανοποίηση ή μια καλά δομημένη δραστηριότητα με καθυστερημένους ελέγχους, ενώ τα αρνητικά μετρούν επίδοση χωρίς βοήθεια αργότερα. Η σύνθεση Burneo κάνει την αβεβαιότητα ρητή: 0,125 τυπικές αποκλίσεις κατά μέσο όρο σε 14 δοκιμές, κανένα τεκμηριωμένο πλεονέκτημα για τα νεότερα γενετικά εργαλεία. Μια βελτίωση πριν και μετά δεν μπορεί να δείξει ότι η ΤΝ προκάλεσε το κέρδος, αφού οι μαθητές βελτιώνονται μέσα από την υπόλοιπη διδασκαλία, και οι μέθοδοι έρευνας αποτελεσματικότητας παρουσιάζουν τους σχεδιασμούς σύγκρισης που σας φέρνουν πιο κοντά. Βασιστείτε στους ισχυρισμούς σχεδιασμού, που αναπαράγονται, και μείνετε ανοιχτοί ως προς το μέγεθος του αποτελέσματος, που δεν αναπαράγεται.

«Έχω 200 μαθητές. Δεν μπορώ να κάνω καθυστερημένες αξιολογήσεις.» Χρειάζεστε ένα σύντομο έργο βάσης και ένα καθυστερημένο στοιχείο, όχι μια μελέτη. Χρησιμοποιήστε τον ίδιο τύπο έργου τρεις εβδομάδες αργότερα χωρίς το εργαλείο, κρατήστε την περσινή εκδοχή της εξέτασης ως πρόχειρη σύγκριση και πάρτε δείγμα από την εργασία που φαίνεται ασυνεπής με προηγούμενες υποβολές. Αυτό αρκεί για να δείτε ένα υποβοηθούμενο κέρδος 48% δίπλα σε μια απώλεια 17% χωρίς βοήθεια, αν συμβαίνει στο μάθημά σας.

«Το Khanmigo πήρε θετικό αποτέλεσμα, άρα η διδασκαλία δουλεύει.» Πήρε μέτρια κέρδη στα μαθηματικά σε 18 γυμνάσια, σε έναν σχεδιασμό που συνδύαζε εξατομικευμένη εξάσκηση με διδασκαλία από ΤΝ, ενώ οι μαθητές σπάνια έκαναν ουσιαστικές συνομιλίες διδασκαλίας. Διαβάστε το ως απόδειξη ότι ένα καλά δομημένο περιβάλλον εξάσκησης μπορεί να παράγει μικρά κέρδη, όχι ως απόδειξη ότι το συστατικό ΤΝ τα προκάλεσε.

«Δεν μπορώ να το απαγορεύσω και δεν μπορώ να το αστυνομεύσω.» Σωστό και στα δύο, και κανένα από τα δύο δεν απαιτείται. Το ερώτημα σχεδιασμού είναι τι κάνει εύκολο η δραστηριότητά σας. Αν η επαλήθευση βαθμολογείται, η γνωστοποίηση δεν κοστίζει τίποτα και ο έλεγχος χωρίς βοήθεια υπάρχει, οι περισσότεροι μαθητές παίρνουν τον δρόμο που χτίσατε.

«Δεν διδάσκω ΤΝ. Δεν είναι το αντικείμενό μου.» Η παρεμβολή συμβαίνει μέσα στο αντικείμενό σας, στο βήμα όπου η ΤΝ εκτελεί την εξάσκηση που υπάρχει για να παρέχει το μάθημά σας. Γι' αυτό η διόρθωση είναι αλλαγή εργασίας και όχι νέα ενότητα.

Τι να κάνετε αυτή την εβδομάδα

1. Πάρτε μια δραστηριότητα που ήδη τρέχετε και γράψτε την πρόταση της ικανότητας: τι θα πρέπει να μπορεί να κάνει ένας μαθητής μετά, με το εργαλείο κλειστό.

2. Προσθέστε μια βάση δύο λεπτών στην αρχή και το ίδιο είδος στοιχείου τρεις εβδομάδες αργότερα. Βαθμολογήστε και τα δύο χωρίς ΤΝ στην αίθουσα.

3. Αλλάξτε μία οδηγία που δίνετε στους μαθητές από «εξήγησέ μου αυτό» σε «δώσε μου μία υπόδειξη και μετά κάνε μου μια ερώτηση», και απαιτήστε μια αναθεωρημένη προσπάθεια πριν προχωρήσουν.

4. Προσθέστε ένα βαθμολογημένο τεκμήριο επαλήθευσης: ένα σύντομο σημείωμα για το τι έλεγξαν, τι απέρριψαν και τι άλλαξαν.

5. Αναλύστε το αποτέλεσμα ανά προηγούμενη γνώση για τους μαθητές που ήδη ξέρετε ότι δυσκολεύονται, και διαβάστε την ανατροφοδότηση ΤΝ που έλαβε ένα δείγμα τους.

Πού να πάτε μετά

Το Ποια μέτρα και ποιες ερευνητικές μέθοδοι μπορούν να χρησιμοποιήσουν οι διδάσκοντες για να αξιολογήσουν παρεμβάσεις που σχετίζονται με την ΤΝ; καλύπτει τις μετρήσεις και τους σχεδιασμούς σύγκρισης πίσω από τους ελέγχους παραπάνω, και το AI Ed Evaluation είναι ο πρακτικός οδηγός αξιολόγησης. Το Πώς επηρεάζει η ΤΝ τους μαθητές; παίρνει την πλευρά της εμπειρίας των μαθητών, το Ποια είναι τα 10 κορυφαία ευρήματα της έρευνας για την ΤΝ στην εκπαίδευση που πρέπει να γνωρίζουν οι διδάσκοντες; συμπιέζει τα ίδια στοιχεία σε αποφάσεις για εκπαιδευτικούς, και το Limitations in AIEd Research είναι η έντιμη περιγραφή του τι δεν μπορεί ακόμη να σας πει αυτή η βιβλιογραφία. Αν η ερώτησή σας έχει γίνει ερώτηση αξιολόγησης, το Πώς μπορώ να μειώσω την εξαπάτηση με ΤΝ στο μάθημά μου; είναι η επόμενη σελίδα.