Концепції
Оцінювання, орієнтоване на процес
Автоматичний переклад цієї англійської сторінки, не перевірений носієм мови.
Оцінювання, орієнтоване на процес — це проєктування Оцінювання навколо того, як здобувач доходить висновку, а не лише навколо артефакту, який він здає: поетапні здачі, рефлексивне обґрунтування, діалогічний та усний обмін, історія чернеток і версій, а також критерії, які студенти можуть застосовувати до себе. Це не синонім реалістичності завдання і не твердження про те, хто оцінює роботу: реалістичне завдання, єдиною підставою якого є один непідконтрольний продукт, піддається тій самій проблемі підміни, що й твір, який він замінив. Генеративний ШІ саме те, що робить цю відмінність нагальною, оскільки вільний текст тепер можна створити за запитом, і готовий файл більше не несе інформації про те, чиє мислення його породило.
Питання для роздумів
- Якщо студент здає відшліфований твір, що цей артефакт насправді дозволяє стверджувати про його мислення — і які твердження він лише здається підтримує?
- Процесуальні докази потребують чернеток, обґрунтувань і діалогу. Хто у вашому контексті вільно володіє таким академічним самовираженням, і кого можуть судити за зручність користування ним, а не за розуміння?
- Виявлення ненадійне, а перепроєктування навколо процесу — дороге. Куди б ви спрямували обмежений інституційний бюджет, і які докази змінили б вашу відповідь?
Вступ
Оцінювання у вищій освіті давно виводило мислення з продукту. Зданий твір, доповідь чи відповідь на іспиті стояли на місці міркувань за ними, а оцінювання трактувало добре аргументований артефакт як доказ добре аргументованого процесу. Thapa and Lewis (2026) називають припущення, яке руйнує генеративний ШІ: відшліфована відповідь "може більше не представляти чий завгодно процес мислення", тому висновок від артефакту до розуміння перестає бути безпечним. Їхня відповідь — не кращий детектор, а інша база доказів. Оцінювання, орієнтоване на процес, збирає докази інтерпретації, обґрунтування та конструювання знань у міру їхнього розвитку, щоб міркування залишалися видимими, коли результат можна створити за запитом.
Корисно сказати, чим це поняття не є. Це не аутентичне оцінювання, яке запитує, чи віддзеркалює завдання вартісну реальну практику; Thapa and Lewis зберігають ці осі роздільно й наполягають, що аутентичне завдання з одним непідконтрольним продуктом усе одно вразливе. Це не виявлення ШІ, яке запитує, чи використовувався інструмент, а не як було прийнято рішення. І це не автоматизоване оцінювання, яке стосується того, хто або що виконує оцінювання: машинно оцінене поетапне портфоліо може бути орієнтованим на процес, а людський фінальний твір — не обов’язково. Поняття стосується того, які докази збираються, за який період і за яких умов вони створюються.
Ідея пройшла шлях від тези до повторюваної рекомендації в межах бази знань. Вона постає як названа пріоритетність в програмі AIED щодо суб’єктності та Мотивація здобувачів, як організовуюча дослідницька програма для проблеми збереження та перенесення в дослідженнях успішності проти навчання, як "Оцінювання чорної скриньки" в розвідці Brunnström and Palmqvist про саморегульоване навчання зі ШІ, і як прохання від практикуючих викладачів-методистів, які виявили, що їхня домашня письмова робота взагалі більше не може свідчити про навчання.
Як процесуальні докази виглядають на практиці
Найбільш явний словник проєктування походить від Thapa and Lewis, чиї чотири зобов’язання переносять аргумент у проєктування завдань: рефлексивне обґрунтування, поетапне проєктування завдання, діалогічну залученість та оцінну прозорість. На практиці студенти пояснюють інтерпретаційні рішення, а не лише подають висновки, здають роботу, що розвивається через контрольні точки, беруть участь в усних або діалогічних обмінах щодо своїх міркувань і працюють проти критеріїв, які можуть застосовувати самі, — на терені грамотності у роботі зі зворотним зв’язком та Самооцінювання. Пропозиція Boysen's (2026) щодо відкритих навчальних практик перекладає ту саму логіку в аудит-слід: спільний навчальний план, укладений до початку проєкту, план навчального аналізу, що називає дозволені та заборонені джерела, і задокументовані чернетки та історії версій, збережені через Track Changes і збережені версії файлів, які розкривають процес роботи й пояснюють, що інформувало кожну правку. Він оформлює це як саморегуляцію, зроблену видимою.
Канал, обраний для процесуальних доказів, змінює те, що можна підтвердити: в тому самому дослідженні генеративного ШІ на 79 студентів глибокіше моніторинг і планування частіше траплялися в блоках міркування вголос, тоді як глибокіша регуляція — частіше в журналах взаємодії, тому жоден єдиний запис не охоплює всього процесу (Li and Liu (2026)). Сліди також можуть прямо розходитися з оцінками: у 150 розмовах студентів зі ШІ 41% мала оцінку завдання рівно 1.00, тоді як спостережувана когнітивна участь варіювалася, тому збіжні оцінки можуть приховувати різні процеси (Fábrega, 2026). DraftTrace відповідає на ту саму проблему для письма з інтеграцією ШІ, узгоджуючи процесуальні показники на рівні натискань клавіш із фінальним продуктом та слідами взаємодії зі ШІ, показуючи, що переписування визначається лише тоді, коли продукт і процес читаються разом (Chandarana et al. (2026)) — конкретний приклад вимірювання поведінкових слідів, якого галузі усе ще бракує.
Практичні та рамкові розвідки доповнюють артефакти. Рамка LEARN Uden and Hwang's (2026), спрямована на навчання, засноване на проблемі Оцінювання, вимагає рубрик, зосереджених на процесі, усних обґрунтувань, поетапних здач і слідів міркувань із розкриттям використання ШІ, і трактує рефлексію через навчальні журнали та протоколи міркування вголос як метакогнітивний двигун послідовності. Moganadas and colleagues (2026) роблять прозоре для ШІ, орієнтоване на процес оцінювання однією з п'яти досліджуваних тез, вимагаючи документування, перевірки та рефлексивного обґрунтування, а не заборони чи використання детекторів. Padhy (2026) рекомендує фіксувати історію правок, патерни взаємодії та час на завдання в парі з прозорим розкриттям. Goldstein, Marae-Haj and Zidan (2026) повідомляють про ті самі артефакти, що виникають з практики після кризи Довіра: записи підказок, історію версій документів, контрольовані внески груп і рефлексивні "журнали подорожі", що ведуться у фізичних зошитах — порівняно з простим висновком, що домашня письмова робота більше не могла свідчити про навчання.
Конкретні інструменти вже з’являються: Kim et al. (2026) операціоналізують розв’язування задач як чотири етапи та вісім діагностичних піднавичок, щоб LLM могла генерувати питання та рубрики, специфічні для етапу; п’ять викладачів і 64 студенти використовували систему на 90 задачах і 720 підпитаннях із середнім балом шкали зручності використання 83,5.
Інша вісь, ніж автентичність, і ніж оцінювання
Розділяти ці осі важливо, бо змішування їх — це те, як перепроєктування виглядає завершеним, тоді як уразливість залишається. Sharma (2026) проводить доповнювальну відмінність між автентичністю та проєктуванням, орієнтованим на доброчесність: автентичність запитує, чи віддзеркалює завдання вартісну практику, тоді як проєктування, орієнтоване на доброчесність, запитує, чи можуть здобувачі обґрунтувати свої рішення й узяти на себе відповідальність щодо дисциплінарних стандартів, — і саме тому практики, які він пропонує: анотовані сліди рішень, перевірка тверджень, згенерованих GenAI, усний захист, розбіжності між чернетками з історією версій — відібрані заради судження, яке вони роблять видимим, а не заради їхнього реалізму. Десятирічний огляд Espino and Espino's (2026) бізнес-освіти приходить до того самого проєктувального висновку з боку літератури, знаходячи, що галузь сходиться на автентичних завданнях із видимим процесом, які вимагають інтерпретації, контекстуального застосування та ітеративного вдосконалення, і трактуючи ізольоване впровадження інструментів усередині незмінних структур оцінювання як її найстійкішу невдачу.
Конструкт також відрізняється від питання про те, як оцінюються докази. Валідність — це місце, де вони перетинаються: Brunnström and Palmqvist (2026) стверджують, що коли чат-бот може створити правдоподібну відповідь на іспиті, зданий продукт стає слабшим індикатором того, чого навчився студент, — проблемою валідності оцінювання, а не лише проблемою доброчесності. Це той самий висновок, що під ризиком в аргументі Yan, Greiff, Lodge and Gašević's успішності проти навчання, де приріст у навчанні, що зменшується, коли допомогу прибирають, показує приріст, який живе в інструменті, а не в здобувачі, і де запропонованим засобом є процесуальні показники, такі як тести збереження та перенесення, а не негайний успіх у завданні.
Чому виявлення не може нести це навантаження
Оцінювання, орієнтоване на процес, зазвичай пропонується як альтернатива виявленню, і саме докази про виявлення пояснюють чому. Література про виявлення знаходить рівні помилок, залежність від завдання та систематичне упередження проти неписьменних носіїв мови та письменників з інвалідністю, а найновіші роботи приходять до процедурного висновку: оцінка детектора може спонукати до пильнішого розгляду, але не є висновком. Munoz and colleagues (2026) показують, чого це коштує на практиці. Кодуючи 1,162 звинувачення в порушеннях із генеративним ШІ, вони знайшли, що найсильніші типи доказів генеруються розслідуванням або супервізією, що процесуальні докази, такі як чернетки, зустрічі супервізії та презентації, постають лише там, де ці практики вже існують, — тобто в неперепроєктованому оцінюванні їх просто немає, — і що вихід детектора отримав найнижчі оцінки доказовості серед усіх категорій. Проєктувальним наслідком є порядок: процесуальні докази мають існувати раніше, ніж справа їх потребує, і роздуми Weidlich's (2026) про те, який висновок під ризиком, роблять ту саму точку з боку валідності, оскільки спроби відновити безпеку оцінювання через виявлення вносять нерелевантну конструкту варіацію, а не докази про здобувача.
Витрати на проєктування та робоче навантаження
Джерела надзвичайно відверто стверджують, що це дорого. Thapa and Lewis прямо називають застереження щодо справедливості: рефлексивні та діалогічні завдання можуть привілейовувати студентів, які впевненіші в академічному самовираженні, якщо їх інклюзивно не проєктувати та не підтримати скаффолдингом, і реляційна робота, що вимагає багато зворотного зв'язку, посилює емоційну та професійну працю викладачів у великих або ресурсно обмежених контекстах — суперечність із інституційними очікуваннями щодо масштабованості, стандартизації та вимірної успішності. Sharma додає інтерпретаційну версію: вимога задокументованих міркувань привілейовує Здобувачі, які вільно володіють рефлексивним дискурсом, а судження як доказ "залишається реляційним і ситуативним, а не механічно перевірним".
Операційні витрати перелічено в іншому місці. Boysen перелічує нові технології, переглянуті завдання та програми, навчання студентів незнайомих навичок і додаткові матеріали для збирання та оцінювання, попереджає, що невисокі кредити за процес можуть роздути оцінки, і визнає, що модель набагато краще пасує великим проєктам розвитку навичок, ніж повсякденній роботі з набуття знань; він також зазначає, що відстеження процесу є тим, що деякі критики називають ШІ-спостереженням. Учасники Goldstein, Marae-Haj and Zidan's повідомляли, що створення процесуальної документації потребувало реальної роботи, що дев'ять з тринадцяти фінансованих просунутих інструментів оплачували з власної кишені у спосіб, який міг поглибити цифрову нерівність, і що кілька повернулися до контрольованих іспитів та очікуваних усних захистів. Турбота про справедливість має специфічну для ШІ грань у знахідці Brunnström and Palmqvist, що некероване використання інструменту вимагає навички управління взаємодією, яка нерівномірно розподілена, тому ШІ "може бути найбільш корисним для вже привілейованих студентів" — той самий дистрибутивний ризик, що супроводжує прохання студентів управляти задокументованим процесом. Lopez-López, Bru-Cordero and Correa-Álvarez (2026) знайшли, що студенти, які вкладали більше незалежного часу на навчання, судили використання ШІ суворіше, і рекомендують перевірити, чи зменшують шаблони розкриття, усні захисти та оцінювання, засноване на процесі, етичну невизначеність — дослідження, яке галузь усе ще потребує. Ризик прикріплюється до механізму, який робить процесуальні докази робочими: там, де співпраця, правки та рефлексія оцінюються, студенти мають причину створювати докази, що відповідають тому, чого, на їхню думку, хоче оцінювач, тому процесуальні записи можуть стати перформативними, а не доказовими (Alam & Jackson, 2026).
Що залишається невирішеним
Розвідка Thapa and Lewis's є концептуальною: жодних учасників, жодного збирання даних і жодного випробування впровадження, тому чотири принципи аргументовані, а не перевірені, і сама стаття закликає до емпіричної роботи над студентським досвідом, робочим навантаженням викладачів і довгостроковою життєздатністю. Оцінюваність залишена недиференційованою між контекстами — перенесення на великі лекції, лабораторії, студії чи клінічні практики не розглянуто. Позиційна стаття Lane's (2026) зазначає інституційну стелю: оцінювання, засноване на процесі, притуплюється структурами оцінювання та академічних записів, які винагороджують відшліфовані фінальні артефакти, тому перепроєктування однієї аудиторії не змінює стимулу. Вимірювання також тонке: огляд Jin and colleagues' (2026) інструментів ШІ-грамотності закликає до оцінювання, заснованого на успішності та орієнтованого на процес, і до вимірювання поведінкових слідів підказок та перевірки, але повідомляє, що наявні інструменти спираються на самозвіти. Жодне джерело тут не повідомляє про контрольоване випробування процесуально орієнтованого перепроєктування проти продуктно орієнтованого, що залишає центральне твердження — що процесуальні докази і важче підробити, і справедливіше судити — аргументованим із принципу, практичного звіту та доказів із файлів справ, а не продемонстрованим у масштабі.
Пов’язані поняття
- Педагогічні патерни — Поетапні контрольні точки та процесуальні докази як упорядковані проєкти
- Оцінювання
- Аутентичне оцінювання
- Виявлення ШІ
- Валідність оцінювання
- Оцінювальний розсуд
- Формативне оцінювання
- Підсумкове оцінювання
- Зворотний зв’язок
- Самооцінювання
- Усне оцінювання
- Електронне портфоліо
- Заяви про використання ШІ та розкриття інформації
- Саморегульоване навчання
- Академічна доброчесність
- Справедливість
Пов’язані статті
-
Process-Oriented Collaborative Essays: Empowering Undergraduate Students Through Assessment Redesign in the Age of Generative AI — Оцінюваний процесуальний твір, написаний спільно, в учнівстві першого курсу: ітерація та співпраця в рубриці, GenAI дозволено в межах заявлених кордонів (Alam & Jackson 2026)
-
Distinguishing performance gains from learning when using generative AI — успішність — це не навчання: дослідницька програма, побудована на процесуальних показниках (Yan et al. 2026)
-
Human-centered AI for teacher educators: Designing professional learning for critical AI literacy — викладачі-методисти, які просять завдання, стійкі до ШІ та засновані на обґрунтуванні й рефлексії (Baran et al. 2026)
-
Educational integrity in GenAI-augmented assessment: making judgment visible — анотовані сліди рішень, усний захист та розбіжності між чернетками, відібрані заради видимого судження
-
How strong is the evidence in generative AI-related academic misconduct allegations? A mixed-methods analysis — що містять файли справ про порушення та яких процесуальних доказів їм бракує
-
Which inference is at risk? Assessment validity reasoning and generative AI — який висновок під ризиком, коли докази оцінювання підміняються
-
Beyond Detection: Redesigning Authentic Assessment in an AI-Mediated World — автентичність потрібно перепроєктовувати, а не поліціювати
-
From authentic products to authenticated processes: a systematic conceptual review of authentic assessment in AI-rich — автентичні продукти та процеси, які їх породили
-
Reconsidering the Use of Oral Exams and Assessments: An Old Way to Move Into a New Future — усний іспит як формат, стійкий до ШІ, який оживляє міркування
-
Preserving epistemic authenticity: process-oriented assessment in the age of generative AI — епістемічна автентичність та чотири проєктувальні зобов’язання за оцінюванням, орієнтованим на процес (Thapa & Lewis 2026)
-
Mapping the Distribution and Depth of Metacognitive Processes in Generative AI-Assisted Learning: Evidence from Interaction Logs and Concurrent Think-Aloud Protocols — Процесуальні докази, залежні від каналу: журнали та міркування вголос розкривають різні процеси
-
DraftTrace: A Multi-View Analytics Environment for AI-Integrated Writing — DraftTrace: багатовіконне аналітичне середовище для письма з інтеграцією ШІ
-
Same Performance, Different Process: Epistemic Ownership in AI-Mediated Education — Та сама успішність, інший процес: епістемічна власність в освіті, опосередкованій ШІ
-
STEPwise: Supporting Teachers in Diagnosing Students' Mathematical Problem-Solving Skills through LLM-Generated Questions — STEPwise: підтримка викладачів у діагностиці навичок розв’язування математичних задач за допомогою згенерованих LLM питань
Пов’язані ресурси
- Process FeedbackA free, process-based alternative to AI detection: it records how a piece of writing was produced and turns that into a report for a conversation about learning rather than a verdict.