概念
质性研究
本页是英文页面的机器翻译,尚未经母语者审校。
质性研究(qualitative research) — 研究人们如何体验、解释并赋予现象意义的一族实证方法,通常通过语言、观察与制品而非数字进行。在 AI 教育中,质性方法揭示学生与教师实际如何体验 AI 工具——那些标准化测量所错过的意义、张力、伤害与机制。因为教育中的 AI 变化迅速,且其效应常由情境、感知以及 信任 与 学习者自主性 这类有争议的构念中介,质性工作与 定量设计并置不可或缺(见 教育人工智能的研究方法)。
值得思考的问题
- 一份调查告诉你 40% 的学生不信任一个 AI 导师;一个焦点小组告诉你为什么。哪个数字让你觉得更可行动,而"为什么"补充了什么百分比无法给出的东西?
- 质性发现在统计上通常不可推广,然而它们常常是"概念上可推广的"——机制与动态会转移到别处。阅读之前,"一项发现在概念上而非统计上可推广"意味着什么?
- 本页告诫,当人的共识不是真值时,人–LLM 编码的一致性与编码的质量不是一回事。你曾把"两位审阅者一致同意"当作某事正确的证明吗?一致性何时是真理的信号,何时只是共享的错误?
- 如果 AI 现在能协助规模化地做质性编码,这是威胁到使质性研究有价值的那种解释深度,还是仅仅自动化了它的苦工?你会如何判定一项具体研究中发生的是哪一种?
- 质性工作把代表性不足的声音——少数族裔学生、持怀疑的非使用者——置于中心,而大规模调查常错过这些。想一条你听过的关于教育中 AI 的主张。头条数字大概没有捕获到谁的体验?
- 选一个你在意的有争议构念——信任、能动性或伤害。阅读之前,勾画你会如何用语言与观察而非数字来研究它,并记下这样做你会失去什么。
引言
质性研究不是单一方法,而是一族按研究什么与证据如何收集与分析组织起来的方法。把它们联合起来的,是对意义建构、情境与深度的强调,优先于广度与因果控制。质性发现在统计意义上通常不可推广,但它们常常是概念上可推广的——揭示那些转移到其他情境的机制、类别与动态。在知识库的语料中,质性工作在研究 AI 接受、信任、伤害、教学实践与学习过程方面都很突出。
主要质性路径
主题分析
主题分析在质性数据中识别、编码并解释模式("主题")——通常是访谈或焦点小组的记录稿、开放式问卷回答或文件。它是知识库质性研究中使用最广的路径。访谈与开放式回答本身就是 自我报告数据,所以它们共享关于"能就行为主张什么"的限度——见那一页,了解自我报告证据在何处强、在何处失效。一项关于物理中信任–效用落差的研究用学生访谈数据的主题分析,浮现出 学科特定的怀疑与采纳偏好;一项 GenAI 与教师反馈的比较分析学生对有用性与可信度的感知;成人 AI 学习指南从对专家与学习者输入的主题编码中推导设计原则。AI 如何改变教学工作流依赖对教育者叙述的主题分析。
编码可靠性可以做成一项持续的程序,而非一次性检查。Galiç et al.(2026)以 Krippendorff's α = .803 编码 304 条注意陈述,在五个重叠案例上监控一致性(合并 κ = 0.937),并在恢复前每当一致性低于 0.85 的重新校准阈值就重新编码有争议的陈述;随后被编码的陈述进入一项认识网络分析,它建模哪些维度共现,而非一份扁平的主题清单。
扎根理论
扎根理论从数据建构理论,而非检验一个先验框架,用迭代编码(开放 → 主轴 → 选择性)直到理论饱和。它非常适合为涌现中的教育–AI 现象建构新理论。Liu et al.发展了工具、导师还是拐杖的扎根理论——学生在 编程教育中如何对 AI 做认知 脚手架或卸载的三模式类型学——直接对 认知外包 做理论化。一项关于批判性 AI 导师的扎根理论研究考察这类导师是赋权还是奴役学习者。以人为本的 GenAI 反馈设计在一项多地点研究中使用扎根分析。关于这类扎根理论如何喂养本领域的理论建构,另见 教育人工智能中的理论发展。
现象学与现象图析
现象学路径研究一个现象的活生生的经验——与 AI 一起学习是什么感觉——而现象图析研究人们体验与理解一个现象的质性上不同的方式(产出"描述范畴")。《缺失的认知基线》借助学生在 AI 下自我评估的活生生经验,理论化一个结构性缺口;一项现象学研究捕捉那种在明知不理解的情况下与 AI 一起完成工作的体验;一项社会文化的、解释性的研究分析 GenAI 如何在 数学学术实践中变成一匹"失控的野马"。
话语分析
话语分析考察语言使用如何建构意义、身份与权力——分析课堂话语、书面文本或互动序列。NSPA开展长视野的课堂话语分析(此处由计算辅助),以缓解理解课堂互动中的方言偏见;一项关于少数族裔预科学生的研究分析 提示工程 任务中的协作话语。话语分析与 教育NLP 结合时,在质性解释与计算方法之间架起桥梁。
Poudyal(2026)展示了话语编码如何被渲染为可数规则从而可审计:在 366 篇摘要与 91,405 个 token 上,一处关联只有当某个行为者位于某个谓词之前、中间隔着不超过六个词时才算成立,名词邻近被排除,于是"AI governance"永远不作为"AI 在治理"的证据——这是一种基于规则的近似,而非依存句法分析,其局限由设计本身声明。
观察与民族志
观察研究在情境中观看行为;民族志把这一点延伸为对一个场景持续、沉浸式的研究,研究者常以参与式观察者身份在场。一项三人民族志追踪 LLM 支持的编程教育中学生的解释如何演化;一项课堂案例研究观察 AI 素养 在 生物中的整合。观察方法捕捉实际行为(学习者拿 AI 做什么),而非被报告的行为——补充了那些主导态度的 定量测量的自我报告调查。
案例研究
案例研究是对一个有界个案(一门课、一所机构、单个学习者)用多种数据源所做的深入调查。一项商学院案例研究生成一个由学生知情的 GenAI 教与学框架;一项生物案例研究记录 AI 素养的整合。案例研究以深度换广度,强于理论生成与可迁移洞见,而非推广。Khlaif et al.(2026)提供了对三所巴勒斯坦大学 21 名视障本科生的质性案例研究,用半结构化访谈的主题分析展示 GenAI 如何充当 辅助技术以支持 融合学习——这是案例研究浮现出定量测量所错过之机制(个性化适配、教师增强、教育平权)的一个例子。
Swidan(2026)为一位教师和八名学生把视频、告警系统自身日志与刺激–回忆访谈做三角互证,显示一个情感信号只有通过教师的回应才获得意义;由一位作者所做的两阶段事件编码,没有独立编码也没有经过验证的情感检测,标志着单人编码案例分析所能支撑的限度。
访谈与焦点小组
半结构化访谈与焦点小组是上述所有路径中最主要的数据收集工具。它们引出丰富、带情境的叙述。知识库的质性语料在很大程度上建立在访谈(例如 专长路径)与焦点小组(例如 文生图能力悖论、Guidelines for Designing AI Technologies to Support Adult Learning)之上。质量取决于谨慎的问题设计、为变异而做的抽样,以及严谨的分析。
质性研究在知识库中如何出现
- **机制与过程。**质性工作揭示 AI 为何帮助或伤害。Same AI, different pathways: Unpacking mechanisms of AI-mediated learning across discipline-institution contexts 用质性脉络拆解跨情境的 AI-中介学习机制
- **信任、能动性与身份。**有争议的、主观的构念往往最好做质性研究。The Competence Paradox: Negotiating Ease, Risk, and Creative Identity in Text-to-Image Generative AI Use Among Art and Design Students 浮现出艺术与设计学生如何协商轻松、风险与创作身份;GenAI as a runaway object in higher education: A socio-cultural view on AI-influenced academic practice in mathematics 捕捉 AI 在重塑学术身份与实践中的角色。
- **公平与代表性不足的声音。**质性工作把大规模调查常排除的视角置于中心——少数族裔学生、持怀疑的非使用者。这连接到 公平性。
- 类型学与分类学建构。 一份 ChatGPT 采纳的质性类型学区分实用型使用者与怀疑型非使用者——这些类别为后续调查工具的设计提供信息。
- 跨文件的可比编码。 Poudyal(2026)把 15 个固定情境应用于 20 所大学的公开政策,得出 300 项可比分类,并报告一位独立的第二位编码者只匹配了其中 57.3%(κ = 0.395)——使编码方案的脆弱性可见,而非让一致性保持未言明。
AI 与质性分析
近期一个独特的发展是用 LLM 协助质性编码。知识库的证据是告诫性的:Comparing human and LLM ordered coding of qualitative data: How coding differences cascade through temporal analysis 显示 LLM 与人的编码分歧,误差在时间分析中级联放大;Agreement Is Not Quality 显示,当人的共识不是真值时,人–LLM 编码的一致性不等于编码的质量。LLM 辅助编码可以规模化并加速质性分析,但其产出需要对照 人的判断来验证——这是质性研究与 教育NLP 和 人工智能教育评价 的一个重要交点。
流畅产出问题与可辩护性(warrantability)。 Holster(2026)锐化了为何准确与披露对 AI 辅助的质性工作是不充分的标准。因为 LLM 能在几分钟内把语料重组成流畅的主题、引语与流行度主张,它们可以隐藏产出它们的分析路径——而人们倾向于把易于处理、流畅的产出评为更真实。Holster 提议把可辩护性作为准确与披露的补充:一项 AI 辅助的解释,当"从源数据到主张"的路径保持可检视、可争议、可修订时,就是可辩护的。其建设性机制是语义透镜(对一个语料跨抽象层级的有记录的重组)以及一套相对主张的可辩护性制品库——源链接的主题表、透镜栈与证据之流——被设计进工具中,使流畅的分析也产出一条可回溯的路径记录。这把本领域的审计轨迹传统延伸到生成式时代,并给审阅者一些具体的、除最终解释之外可以争议的东西。
- **在 多智能体 LLM 编码中,可靠性不是准确率。**一个文献驱动的流水线,由两个 AI 编码者独立编码、辩论并调和分歧,在每个数据集与每个标签上都产出高于 Cohen's kappa 0.85 的编码者间一致性,而判据 F1 从 0.31 到 0.89(均值 0.68,SD 0.16)——两者都错的智能体之间高度一致。更长的编码册(t = -11.702)与更相似的片段(t = -9.249)降低了初始准确率,而讨论轮数与准确率正相关(t = 7.997),被正确解决的冲突与协作模式则与准确率负相关(t = -9.720 与 -8.420),所以收敛是正确性的弱代理。其实际含义是:AI 辅助编码需要对照人类参考做清单层面的裁定,而非以智能体间一致性作为质量信号。(How AI Coders Discuss, Disagree, and Reach Consensus: Challenges and Opportunities for LLM-Based Qualitative Coding)
优势与局限
- **优势:**深刻的生态与概念洞见;浮现意料之外的现象、风险与机制;对理论建构至关重要(见 教育人工智能中的理论发展);捕捉意义、情境与有争议的构念;把代表性不足的视角置于中心;强于研究标准化测量尚未跟上的快变现象。
- **局限:**统计推广性有限;解释性且依赖研究者(可靠性关切);样本小;对因果主张的支撑较弱;发现难以跨研究综合;耗时费力。
定性与定量方法是互补而非对手——见 教育人工智能的研究方法 了解它们如何对比与三角互证,以及 混合方法 了解把两者结合起来的设计。
关联概念
- 教育人工智能的研究方法
- 混合方法研究
- 量化研究
- 教育人工智能中的理论发展
- AI 辅助的教育研究 — AI 辅助教育研究
- 教育测量
- 教育NLP
- 人工智能教育评价
- 公平性
- 信任
- 学习者自主性
- 认知外包
- 自我报告测量
关联文章
- The Chain Behind the Claim: Warrantability in AI-Assisted Qualitative Research — AI 辅助质性分析的可辩护性标准
- Tool, Tutor, or Crutch?: A Grounded Theory of Cognitive Scaffolding and Offloading in AI-Assisted Programming Education — 工具、导师还是拐杖:AI 辅助编程的扎根理论
- Beyond Perspectives: A Trio-Ethnography of Interpretation Evolution in LLM-Supported Programming Education — LLM 支持编程中解释演化的三人民族志
- The Absent Cognitive Baseline: Theorizing a Structural Gap in AI-Native College Students' Academic Self-Assessment — 理论化 AI 原生学生自我评估中的一个结构性缺口
- The Competence Paradox: Negotiating Ease, Risk, and Creative Identity in Text-to-Image Generative AI Use Among Art and Design Students — 文生图 GenAI 使用中的能力悖论
- Trust-utility gap in introductory physics education: Students' adoption, domain-specific skepticism, and preferences for AI integration — 物理教育中的信任–效用落差
- Comparing Generative AI and teacher feedback: student perceptions of usefulness and trustworthiness — 比较 GenAI 与教师反馈:学生感知
- SafeTutors: Benchmarking Pedagogical Safety in AI Tutoring Systems — AI 导师安全与教学伤害
- A Case Study of Integrating AI Literacy Education in a Biology Class — 生物课堂中 AI 素养整合的案例研究
- Pragmatic users and skeptical nonusers: A qualitative typology of ChatGPT adoption in physics education — 物理中 ChatGPT 采纳的质性类型学
- Scaffolding critical engagement with GenAI: Transforming ethnic minority preparatory students' collaborative discourse — 少数族裔学生在提示工程中的协作话语
- Comparing human and LLM ordered coding of qualitative data: How coding differences cascade through temporal analysis — 比较人与 LLM 对质性数据的有序编码
- Agreement Is Not Quality: Blind Expert Verification of Human and LLM Qualitative Coding When Human Consensus Is Not Ground Truth — LLM 质性编码中一致性不等于质量
- Same AI, different pathways: Unpacking mechanisms of AI-mediated learning across discipline-institution contexts — 跨情境拆解 AI 中介学习的机制
- Generating a Student-Informed Teaching and Learning Conceptual Framework for GenAI in Business Schools: A Case Study — 通过案例研究得出的由学生知情的 GenAI 框架
- Critical AI Tutors: Empower or Enslave? — 批判性 AI 导师:赋权还是奴役
- GenAI as a runaway object in higher education: A socio-cultural view on AI-influenced academic practice in mathematics — GenAI 作为高等教育数学中的一匹失控野马
- Assistive Generative AI for Visually Impaired Learners: Personalization and Inclusion in Higher Education — 面向视障学习者的辅助性 GenAI