Skip to main content
ai-detectionturnitinacademic-integrityguide

Turnitin AI写作指示器:分数的含义及应对方法

· 9 min read· NotGPT Team

Turnitin AI写作指示器是Turnitin文档分析工作流中的一项功能,用于估计提交的文档中有多大比例可能是由AI工具(如ChatGPT、Claude或Gemini)生成的。自2023年4月发布以来,turnitin ai写作指示器已被全球数千所高等教育机构采用,现已成为许多大学、学院和中学提交审查的常规部分。与对照已知来源数据库的剽窃检查不同,AI写作指示器使用统计模型来识别与语言模型输出相关的写作模式。本指南详细解释了该指示器的测量内容、百分比段如何工作、学生是否可以访问自己的结果、系统已知会产生错误的情况,以及如果您收到较高分数应该采取的步骤。

什么是Turnitin AI写作指示器?

AI写作指示器不是一个独立产品。它是Turnitin添加到其现有文档分析引擎中的一个检测层,于2023年4月向机构订阅者推出。当讲师为作业启用它时,每个学生提交的文件都会自动评分 — 学生或讲师都无需采取额外行动。该指示器出现在讲师已经用来审查原创性分数的同一Turnitin文档查看器中,这意味着它无需单独的产品登录或报告就可以集成到现有的评分工作流中。turnitin ai写作指示器生成0%至100%之间的顶级百分比,代表该模型分类为可能由AI生成的文档的份额。它还提供句子级别的视图,其中被分类为AI生成的段落被突出显示,因此讲师可以检查特定部分,而不仅仅依赖于汇总数字。Turnitin将该指示器营销为一个对话启动工具,而不是裁决。该公司的官方文档建议机构将分数视为一个数据点,与其他证据相结合 — 例如学生对其提交作品的理解程度和存档的以前写作样本。

"我们构建AI写作指示器是为了给教育工作者一个起点 — 一个可能需要对话的信号,而不是做出最终决定的工具。" — Turnitin首席执行官Chris Caren,2023年

AI写作指示器百分比是什么意思?

百分比代表该模型分类为可能由AI生成的已分析文本的比例。分数0%意味着Turnitin没有发现AI写作模式的统计学意义上的证据。分数100%意味着该模型将基本上所有已分析的文本都分类为AI生成的。大多数引发讲师后续行动的文件落在20%-80%范围内。Turnitin将分数分为三个非正式等级。低于20%:文件显示最少的AI写作指示器,通常不会被标记以供进一步审查。20%至40%之间:文件具有一些AI写作指示器。高于40%:更大比例的文本与AI写作模式相匹配,Turnitin将其分类为高指示器提交。学生和讲师经常忽略的一个细微差别是:百分比是根据文件的已分析部分计算的,而不是根据总字数计算的。Turnitin从AI分析中排除了格式正确的块引用和参考部分。一篇600字的文章,其中只有一段80字的AI生成段落,不一定会得分13% — 分数取决于该段落与周围文本的统计相互作用。少于300字的短文件由于文本不足以使模型建立有信心的模式,因此也会产生较不可靠的百分比。

AI写作指示器分数是如何计算的?

Turnitin的检测模型是一个基于转换器的分类器,在包括人类书写的文本和由主要语言模型(包括GPT-3、GPT-4及其同代产品)生成的文本的语料库上训练。该模型通过两个主要统计信号 — 困惑度和突发性 — 以及Turnitin未公开披露的其他信号来评估文本。困惑度衡量每个单词选择相对于前面单词的可预测性。大型语言模型被优化以产生高概率、连贯的输出,因此AI生成的文本始终具有低困惑度 — 每个单词几乎正是给定上下文中您所期望的。人类作者经常做出令人惊讶或特殊的单词选择,即使使用正式语气书写,也会提高困惑度。突发性衡量整个文件中句子长度和句法复杂性的变化。AI生成的段落产生相对均匀的句子 — 长度相似、结构相似、句法深度相似。人类书写在本质上是不均匀的:短的直接句子通常后跟长的复杂句子,段落的节奏随着作者思维的发展而变化。turnitin ai写作指示器将这些信号组合成对每个已分析文本段的概率估计。这些段级别的估计被汇总为提交报告中显示的最终百分比。由于计算基于模型而非数据库,同一文档提交两次将收到相同的分数,前提是底层模型在提交之间没有更新。

"困惑度和突发性一起捕捉了大多数区分当前AI散文和人类写作的特征 — AI文本始终是可预测的;人类文本始终是不可预测的。"

学生能否查看他们的AI写作指示器分数?

学生是否能够查看他们自己的turnitin ai写作指示器结果取决于两层配置:机构级默认值和讲师级覆盖。Turnitin允许机构为学生访问AI报告设置基准政策,然后各讲师可以在每个作业的设置内提高或降低该默认值。在机构层面,许多大学选择在初始推出期间限制学生对AI检测结果的访问,部分原因是为了防止学生根据检测阈值迭代提交,部分原因是为了控制AI分数在正式学术诚信流程中的传达方式。在讲师层面,有三种常见配置:学生看不到任何内容,在提交时也不会收到任何与AI相关的反馈;学生看到整体百分比,但看不到句子级别的细分;或学生看到完整报告,包括突出显示段落视图。如果您想检查您的机构是否已启用学生访问,请在您的课程平台(Canvas、Blackboard、Moodle或直接Turnitin访问)中打开您提交的作业 — 然后寻找指向您的Turnitin报告的链接。如果报告加载并在原创性分数旁边显示AI写作指示器图标,请单击它。如果该图标是可选择的,它会打开详细视图。如果没有出现AI图标,或仅显示原创性数据,则AI报告访问已在机构或讲师级别受到限制。

  1. 打开您的课程平台并导航到作业提交
  2. 如果可用,单击您的提交以打开Turnitin报告
  3. 寻找AI写作指示器图标 — 它与相似性百分比分开显示
  4. 如果该图标可点击,请选择它以打开句子级别的AI分析视图
  5. 如果没有出现AI图标或完整报告被锁定,您的讲师或机构已限制了对AI结果的学生访问

AI写作指示器有哪些已知的局限性?

Turnitin的官方文档承认了turnitin ai写作指示器会产生不太可靠结果的多个文档类别。短文件是最常引用的局限性。Turnitin建议最少300字以实现可靠的AI检测。低于该阈值的文档可能会因为文本不足以使模型有信心识别统计模式而返回极端高分或低分,无论它的书写方式如何。单独提交的文章摘要或简短讨论帖子,无论如何书写,都几乎总是会产生不可靠的分数。非英语母语的写作是已有充分文献记录的假阳性来源。学习者语言往往倾向于更安全、更可预测的词汇选择 — 正是AI写作指示器被校准来检测的低困惑度模式。以英语为非母语的学生可能会产生对人类讲师来说读起来流利的写作,同时在turnitin ai写作指示器上得分较高,因为词汇选择和句法结构在统计上比母语使用者同学的更可预测。正式的学术文体的平均分数高于对话或个人写作。实验报告、结构化文献综述、案例总结和技术报告在设计上施加了一致的、低突发性格式。正确遵循严格体裁模板的学生正在产生看起来统计上与AI输出相似的写作,即使每个单词都是他们自己的。其他有文献记录的局限性包括:大量使用格式正确的长引文的文件、翻译文本,以及被写作中心辅导员或人类校对者广泛编辑过的文件(大量编辑会减少初稿散文的自然不规则性,这增加了明显的AI信号)。

  1. 少于300字的文件会产生不可靠的分数 — Turnitin在其文档中明确标记了这一点
  2. 非英语母语的使用者由于学习者语言中的可预测词汇模式,面临较高的假阳性分数风险
  3. 技术性和结构化学术文体(实验报告、案例研究、文献综述)由于低突发性格式而平均得分较高
  4. 经过大量校对或编辑的草稿可能会减少自然句子变化,与同样工作的粗稿形式相比,AI分数会提高
  5. 如果带引号的文本格式不当作为块引号并从分析中排除,则有大量长引文的文件可能会产生扭曲的分数
"短文件和非英语母语的使用者是当前商业AI检测系统中两个最常见的文献记录的假阳性来源。"

如果您的AI写作指示器分数较高,应该怎么办?

当您收到较高的turnitin ai写作指示器结果时,第一步是访问句子级别的细分,如果您的机构提供这种功能。总体百分比告诉您有多少文件被标记;句子级别的视图告诉您哪些具体段落触发了检测,并帮助您理解原因。查看突出显示的段落,并确定它们是否共享一个共同的结构模式。AI生成的文本往往会产生非常清晰的主题句、平顺的段落过渡(这些过渡在不添加新信息的情况下连接想法)以及总结较早观点而不引入新思维的结论。如果您的标记段落遵循这些模式,检测器可能会响应您写作中的结构惯例,而不是AI生成的内容。在与讲师见面之前,记录您的写作过程。收集任何显示工作随时间发展的内容:在不同阶段保存的有日期的草稿文件、研究笔记和带注释的来源、研究会话的浏览器历史记录、大纲或头脑风暴文档,以及与作业主题相关的任何课堂笔记。这证据 — 表明您的工作在多个会话中发展 — 通常比任何关于turnitin ai写作指示器可能出错的原因的技术解释对讲师更具说服力。有些学生在提交给Turnitin之前会通过独立的AI检测器运行他们的草稿。NotGPT等工具按AI相似性概率突出显示单个句子,让您有机会确定哪些段落最可能被注册为机器生成的,并在讲师看到Turnitin结果之前修改以获得更自然的句子变化。这不是关于避免对真正AI使用的检测 — 这是关于确保您真实的声音在文本中清晰地呈现。

  1. 打开您的Turnitin报告并找到AI写作指示器部分
  2. 点击进入句子级别的视图并确定哪些特定段落被突出显示
  3. 注意标记的段落在结构上是否典型的AI输出:清晰的主题句、通用过渡、总结结论
  4. 收集有日期的草稿、研究笔记、大纲和来源注释作为您写作过程的证据
  5. 在任何正式学术诚信流程开始之前,请求与讲师会面讨论分数
  6. 如果有重新提交的机会,在重新提交之前修改突出显示的段落以获得更自然的句子长度变化

讲师如何访问和对AI写作指示器采取行动?

turnitin ai写作指示器出现在标准的Turnitin文档查看器中 — 讲师用来审查相似性报告的相同界面。AI百分比显示为原创性分数旁边的彩色指示器;无需单独的报告或其他工具。单击指示器会打开句子级别的突出显示视图,其中各个段落按其估计的AI概率进行颜色编码。想要对较高分数采取行动的讲师通常遵循以下三种路径之一。有些讲师将任何高于机构定义阈值的分数视为学术诚信转介的理由,遵循系或大学级别设定的政策。其他人则使用分数作为与学生直接对话的提示 — 要求他们阐述自己的论点、证明自己熟悉他们的来源,或在同一主题上完成一个简短的课堂写作样本。第三种方法关注句子级别的突出显示而不是汇总分数,确定要讨论的具体段落,而不是将百分比视为独立的裁决。Turnitin的官方指导强烈支持第二和第三种方法。该公司建议,无论分数有多高,都不应该在没有额外调查的情况下自动导致正式的学术诚信行动。这部分是因为对于正式学术写作和非英语母语使用者已有文献记录的假阳性风险,部分是因为该指示器是概率性的 — 90%的分数意味着90%的已分析文本在统计上类似于AI输出,而不是AI使用已确认。讲师无法在Turnitin内覆盖或上诉分数。如果讲师根据学生既定的写作历史确定较高分数是明确的假阳性,他们会在Turnitin系统之外处理该判断,并在他们的评分笔记中记录他们的推理。

"较高的AI指示器分数应该打开对话,而不是关闭对话。讲师在采取任何正式行动之前应该始终询问这个特定的学生是否可能写过这个特定的文本。"

使用NotGPT检测AI内容

87%

AI Detected

“The implementation of artificial intelligence in modern educational environments presents numerous compelling advantages that merit careful consideration…”

Humanize
12%

Looks Human

“AI in schools has real upsides worth thinking about — but the trade-offs are just as real and shouldn't be glossed over…”

即时检测AI生成的文本和图像。一键将内容人性化。