Originality.ai 过于敏感吗?如何理解边界分数
Originality.ai 过于敏感吗?这个问题在作者、编辑和教师中不断出现,他们收到一篇他们确信是一行一行手工写的段落的高 AI 可能性分数。诚实的答案在中间:该模型确实对某些写作模式的反应比其他模式更强,但许多看起来像过度标记的情况实际上是一个计分系统在做它被建造来做的事情——测量统计可能性,而不是意图。本指南将讲解为什么 Originality.ai 首先会标记人工写作,灵敏度设置和内容类型如何影响你看到的分数,以及在灰色地带中实际应该如何处理结果。
目录
Originality.ai 过于敏感,还是你误读了分数?
Originality.ai 是否过于敏感这个问题几乎总是以同样的方式开始:作者或编辑运行他们知道是从头开始输入的段落,该工具报告 AI 生成的高概率。现实体验和屏幕上数字之间的差距自然会被理解为该工具出了问题。但概率分数和评判不是同一回事,Originality.ai 的输出明确是前者——对段落的词汇选择和句子节奏与 AI 生成文本中常见的模式有多紧密相似的统计估计,而不是对谁输入它的主张。有些被称为过于敏感的情况确实是模型对某些类型的散文反应更强,这值得以其自己的方式来理解。但其中一些也是分数测量的内容和读者假设它意味着什么之间的不匹配,解开这两个原因会改变你实际上下一步应该做什么。
概率分数和评判不是同一回事。
Originality.ai 为什么首先会将人工写作标记为 AI?
Originality.ai 的模型与大多数 AI 检测器一样,主要根据困惑度和突发性来评分——给定周围的词语,每个词的可预测程度,以及句子长度和结构在段落中的变化程度。AI 生成的文本在两个指标上的分数都倾向于较低:词汇选择在统计上更容易预测,句子长度聚集得比人工写作通常更接近。问题是许多人工写作也具有相同的统计特性,与 AI 无关。
- 在 Grammarly、Hemingway 或类似工具中进行大量编辑可以平坦化句子长度的变化并平滑词汇选择,将突发性推向 AI 类型的范围
- 非英语第一语言的作者通常会产生更统一的句子结构和更常见的词汇选择,即使每个句子都是独立写作的,也可能得到低困惑度的分数
- 公式化格式——五段论文、求职信、商务邮件、法律样板——根据设计重复熟悉的措辞,看起来在统计上与 AI 输出相似
- 从另一种语言翻译的文本,即使由熟练的人工翻译,也经常失去来自用第一语言直接写作的不规则性
- 短段落给模型的上下文较少,因此两三句摘录更可能落在模糊分数上,而不是整篇论文
Originality.ai 的灵敏度设置实际上是如何工作的?
Originality.ai 向账户管理员提供了对扫描如何被解释的一些控制,而不是强制每个团队进入一个固定的阈值。根据计划,这可以包括选择扫描模型和调整边界结果在到达最终用户之前如何被分类。配置为捕捉尽可能多的 AI 内容必然会让更多人工写作被标记为可疑,而配置为最小化误报的配置将让更多 AI 辅助的文本不被标记通过——没有一个设置可以一次消除两种风险。以最激进的设置运行该工具然后将每个标记视为相等于确定性的团队通常是问那 Originality.ai 是否过于敏感的团队,更准确的描述是他们的配置在做它被设置要做的事情。
没有一个设置可以同时消除误报和漏报——每个配置都在两者之间进行权衡。
你写的内容类型是否改变分数的灵敏度感受?
是的,这在 AI 检测器中是一个一致的模式,不是 Originality.ai 特有的。技术文档、法律写作、学术文献综述和某些营销文案都依赖于固定的术语和常规的句子模式,这减少了自然变化——与检测器关联生成文本的相同统计指纹。创意写作、个人论文和会话式博客文章往往有更多地道的措辞和句子节奏,这通常得到更可信的人类评分。这就是为什么同一个作者可以在个人论文上获得清晰分数,在同一周提交的实验室报告上获得边界分数,即使两者都以相同的方式写作。
遇到 Originality.ai 的边界分数该怎么办?
边界分数是信息,不是结论,以这种方式对待它会改变什么是合理的下一步。
- 阅读句子级亮点而不是单一的顶级百分比——报告通常由两或三个被标记的句子驱动,而不是整个段落
- 检查被标记的句子是否与重度编辑、翻译或按照固定模板写作的部分重叠,因为这解释了许多边界结果而没有暗示 AI 使用
- 如果可用,在 Google Docs 或 Word 中拉起草稿历史——可见的、增量的写作时间表是有力的证据,表明段落不是整体生成的
- 在短时间后用不同的扫描设置重新扫描相同的段落(如果你的计划允许),因为单个边界运行本身不是稳定的测量
- 避免纯粹为了击败检测器而重写真正的原创段落——这将分数视为目标而不是写作本身
Originality.ai 对于评分或发布决策来说过于敏感而不可信吗?
不单独,这对任何 AI 检测器都是真实的,而不是对 Originality.ai 的具体批评。该工具在测量其设计要做的事情上相当有能力——统计可能性——但概率分数从未意图承载学术诚信决定或发布拒绝的全部重量。教师和编辑建立一个政策,其中被标记的分数触发对话而不是自动处罚,倾向于获得比那些对阈值上方的任何数字视为证明的人更好的结果。这个区别对于本文讨论的边界案例最重要——清晰的 AI 编写段落很少需要微妙的政策,但段落上 60% 的分数(作者坚持是原创的)正是刚性规则造成最大伤害的地方。
检测分数应该开启对话,而不是关闭对话。
在采取行动前如何交叉检查被标记的结果?
在得出 Originality.ai 对你的用例来说过于敏感的结论之前——或同样容易地,在假设被标记的分数必须是正确的之前——通过第二个镜头查看相同的段落会有所帮助。运行文本通过 NotGPT 的 AI 文本检测工具显示句子级别的细分而不是一个混合分数,这使得更容易看到相同的特定句子是否在两个独立模型中读起来像 AI 影响,或标记是否仅隔离到一个工具的特定灵敏度。如果一个句子确实是原创的但读起来足够生硬以触发两个检测器——通常是重度编辑或翻译写作的情况——Humanize 工具可以放松措辞而不改变基础论证,这是修订步骤,而不是隐瞒任何东西的方式。以这种方式交叉检查边界结果需要几分钟,并在成绩、拒绝或客户对话发生前用实际的第二个数据点替换猜测。
使用NotGPT检测AI内容
AI Detected
“The implementation of artificial intelligence in modern educational environments presents numerous compelling advantages that merit careful consideration…”
Looks Human
“AI in schools has real upsides worth thinking about — but the trade-offs are just as real and shouldn't be glossed over…”
即时检测AI生成的文本和图像。一键将内容人性化。
相关文章
检测功能
AI 文本检测
粘贴任何文本并接收 AI 相似性概率分数和突出显示的部分。
AI 图像检测
上传图像以检测它是否由 DALL-E 或 Midjourney 等 AI 工具生成。
人性化
重写 AI 生成的文本以听起来自然。选择轻、中或强强度。