Evaluating Conceptual Framing in AI-Generated Educational Writing: A Cognitive-Linguistic Analysis of Student Revision

技术摘要：评估人工智能生成式教育写作中的概念框架

问题陈述
虽然现有关于生成式人工智能在教育领域的研究主要集中在语言一致性、风格同质化和批判性参与度降低等方面，但在理解人工智能生成的散文中所嵌入的“概念结构”方面仍存在显著空白。具体而言，目前尚不清楚大语言模型（LLMs）如何通过认知隐喻来构建抽象社会问题的框架，以及学生（尤其是来自非西方文化背景的学生）在修订过程中如何参与、保留或修改这些框架。本研究针对缺乏对 AI 文本中“概念假设”进行探究的问题，提出人工智能输出可能反映了其训练数据中的偏差（通常是西方中心主义的），而这种隐喻框架会影响读者的理解，且学生可能会无意识地接受或积极地抵制这些偏差。

研究方法
本研究采用了一种定性的认知语言学设计，利用配对文本语料库分析法。

• 语料库： 数据集由 15 对匹配的论文组成（共 30 篇文本），由来自海湾科学技术大学（Gulf University for Science and Technology）的阿拉伯语本科生生成。每对文本包括一份 AI 生成的草稿（通过 ChatGPT-5.2 生成）和随后由学生修订的版本。
• 任务： 学生针对以下提示词进行创作：“父母在多大程度上应该影响子女的职业选择？”他们首先使用 AI 生成初稿，然后在 50 分钟的环节内进行修订，期间不得使用外部辅助工具。
• 分析框架： 分析整合了概念隐喻理论（CMT）和整合构建理论（BT）。
  • 隐喻识别： 使用隐喻识别程序（MIP）来识别上下文含义与基本含义相冲突的词汇单元。
  • 图式映射： 将隐喻表达归类为概念图式（源域-目标域映射）。
  • 整合分析： 利用整合理论的四空间模型对涉及多个源域的表达进行分析，以识别双重范畴网络（double-scope networks）。
• 程序： 研究从四个维度比较两个版本：隐喻表达的频率、源域的保留/消除、源域的一致性以及整合构建的产出。通过双人编码验证和讨论确保编码的可靠性。

主要结果
分析揭示了学生与人工智能生成的概念框架进行互动的不同模式：

1. 隐喻密度的降低： 学生修订导致隐喻表达的总量下降了 26.2%（从 AI 论文的平均每篇 30.8 个降至学生论文的平均每篇 22.7 个）。这种减少并非均匀分布；15 对样本中有 14 对显示出减少趋势，仅第 6 对没有变化。
2. 源域的差异化保留：
   • 保留项： 学生一致保留了常规领域，如职业是一段旅程（CAREER IS A JOURNEY）、父母的影响是一种物理力量（PARENTAL INFLUENCE IS A PHYSICAL FORCE）以及父母的建议是一种资源（PARENTAL ADVICE IS A RESOURCE）。
   • 减少/消除项： 学生系统性地减少或消除了更为复杂的 AI 生成领域，特别是儿童的发展是一株植物（THE CHILD'S DEVELOPMENT IS A PLANT）、职业路径是一座建筑（A CAREER PATH IS A BUILDING）、父母的影响是雕塑（PARENTAL INFLUENCE IS SCULPTING）以及父母的引导是一道保护屏障（PARENTAL GUIDANCE IS A PROTECTIVE BARRIER）。值得注意的是，**雕塑（SCULPTING）隐喻（将孩子定位为被动材料）和剧场（THEATRE）**隐喻（父母“扮演角色”）在学生修订版本中几乎完全消失。
   • 引入/扩展项： 学生引入或扩展了强调决策即所有权（DECISION-MAKING AS OWNERSHIP）（例如，“决定权属于孩子”）、动机即财产（MOTIVATION AS A POSSESSION）（例如，“失去激情”）以及**时间/精力即资源（TIME/EFFORT AS RESOURCES）的领域。一些学生还引入了企业/军事等级制度（CORPORATE/MILITARY HIERARCHY）**的框架（例如，“自上而下的规划”）。
3. 连贯性与整合： AI 生成的论文表现出高度的域内一致性和跨域连贯性，通常能构建复杂的双重范畴整合（例如，结合“剧场”与“雕塑”）。相比之下，学生修订版则表现出零散、整合程度较低的隐喻模式。虽然学生减少了复杂的整合构建，但他们保留了常规化的整合（如“力量 + 容器”）并偶尔产生新颖的、具有修辞动机的整合（如“助手/伤害”的对比）。
4. 权威与自主权的认知重构：
   • AI 框架： 将父母的权威描绘为合法的、具有塑造性的，且需要适度引导。自主权被框架化为通过引导性成长而发展出的能力（养育型父母模型）。
   • 学生框架： 将权威重构为有条件的和受限的。学生将焦点从“塑造”转向“引导”，强调父母的参与仅在特定限制内（如“仅在被询问时”、“明确的界限”）才是可以接受的。自主权不再被视为一种发展性的结果，而是一种现有的权利或财产，必须得到尊重。

意义与主张
本文主张，认知语言学分析可以有效地揭示嵌入在 AI 辅助写作中的概念假设，从而超越表层的风格分析。其主要贡献在于证明了学生修订不仅是语言上的精炼，更是一种概念协商。

• 文化与概念能动性： 研究结果表明，学生并非被动接受 AI 的概念框架。相反，他们积极地将父母的权威从“形成性塑造”（雕塑/园艺）重构为“有条件的引导”和“咨询资源”。这表明学生具备识别、评估并对抗 AI 训练数据中潜在的文化及概念偏差的能力。
• 教学启示： 本研究认为，AI 辅助写作教学应将修订视为一种概念活动。教师可以利用 AI 草稿与学生修订之间的对比来培养批判性的 AI 素养，鼓励学生识别、评估并为其隐喻选择提供辩护。
• 局限性： 作者谦逊地指出，研究结果具有特定性（针对特定高水平学生群体、单一机构、单一提示词及单一模型），并未建立起关于海湾地区社会中家庭权威与个人自由之间普遍存在的文化对立。本研究分析的是文本变化，而非学生的意图或深层文化信仰。

总之，本研究说明，尽管人工智能能够生成连贯且富有隐喻色彩的论证，但学生的修订过程起到了简化、本土化和设定条件的作用，通常将概念重心从父母的形成性权力转向了以孩子为中心的拥有权与边界设定。