AI 为企业提供了切实提升效率的机会,同时也带来了新的挑战,因此越来越多的企业开始考虑以 AI 制衡 AI 的一种特殊形式:AI 检测器。

使用 AI 检测器有其合理的原因:保护品牌调性、检测欺诈、发现抄袭、确保外包服务商物有所值等。

但 AI 检测器并非万无一失,对大多数企业而言,使用它们的风险大于收益。在使用之前,您需要了解以下内容。

AI 检测器是如何工作的?

AI 检测器是一种专门的软件,通过数学方式分析文本模式,估算文本由机器生成的概率。常用的检测器包括 GPTZero、Copyleaks、Originality.ai、Sapling、Turnitin 和 Grammarly AI Detector。

从技术角度来说,AI 检测器寻找的指标可归结为两项:

  • 困惑度 (Perplexity)衡量一个词序列的可预测程度。可预测性越低,文本出自 AI 的可能性越小,因为 AI 模型经过训练,会猜测并使用统计上最可能出现的词,而人类的用词选择更加多变且不拘一格。
  • 突发性 (Burstiness)衡量 句子长度和复杂度的变化。人类的写作在句式上“错落有致”,而一味追求概率的 AI 则倾向于以规整、平滑、近乎数学化的方式写作。突发性低的文本对检测器而言是 AI 参与创作的强烈信号。

一些 AI 检测器还会采用文体学分析,评估词汇选择和语法,搜寻可疑地僵化、正式的句式结构。

少数 AI 模型开始采用水印技术,即在生成文本时嵌入不可见但可检测的模式。但由于目前大多数模型不会留下痕迹,这一方案尚不可依赖。

AI 检测器可靠吗?

AI 检测器的可靠性永远达不到 100%,而且往往远低于这一水平。

准确率因工具、内容类型而有显著差异,更关键的是,还取决于(如果确实使用了 AI 的话)AI 究竟是如何被用来创作被分析内容的。

检测器有效的情况

将未经修改的(即“原始”的)AI 输出粘贴到任何 AI 检测器中,检测器都能检测出来。原始输出很容易被检测器识别,因为它寻找的统计概率模式尚未被打破。

例如,我们将直接由 Claude Sonnet 4.6 生成的文本粘贴到 Sapling 中。Sapling 以 99.5% 的置信度判定这段 AI 生成的文本确实是 AI 生成的。

Sapling 正确标记出了未经编辑的 AI 生成段落。

Originality(另一款领先的 AI 检测器)以更高的置信度将同一段落标记为 AI 生成:100%。

Originality 对这段原始 AI 文本出自 AI 生成的判断更加笃定。

当提交的文本并非 100% 由 AI 生成时,检测器也能识别出 AI 痕迹,但可靠性明显降低,尤其是当文本较短(少于 300 词)时,检测器寻找的模式还来不及充分显现。

检测器失效的情况

AI 检测器会产生误报,即在完全由人类撰写的文本中检出 AI 使用迹象,这一点已有大量记录。最近一项针对学术写作的同行评审研究(新窗口)显示,Originality 和 Turnitin 在识别 AI 生成的学术文本时,总体准确率分别仅为 69% 和 61%。

一个问题是,人类写作时常常自然地呈现出 AI 风格,尤其是非母语写作者,他们与 LLM 类似,会使用简单、语法规范的措辞。斯坦福大学的一项研究(新窗口)让七款主流 AI 检测器分析中国学生撰写的托福 (Test of English as a Foreign Language) 作文,平均误报率高达 61.22%。

此外,当人类刻意打乱检测器所寻找的统计模式时,检测器也很难识别。借助 AI 写作的作者只需稍加改动即可破坏这些模式:改写几个句子、变换句式结构、使用更难预测的词汇。

如果觉得这太费事,他们还可以借助层出不穷的“人性化”工具代劳——这些工具专为蒙骗检测器而生,出现得越来越多,也在意料之中。

他们也可以简单地继续使用所选的 LLM,并采用更巧妙的提示词。2025 年一项针对 12 款 AI 检测器的研究(新窗口)发现,“只需用 GPT-4o 稍加润色,检测率就会因检测器而异,在 10% 到 75% 之间浮动”。

我们让 Claude Sonnet 4.6 就 AI 检测器的准确率写一篇 300 词的短文,并要求它像人类一样写作,做到句长多变、观点直白、用词出人意料。Sapling 仅判定这段文本有 12% 的可能由 AI 生成。

Screenshot of an AI Detector tool showing a 360-token passage of text explaining why AI detectors are unreliable. Two sentences near the end are highlighted in red as flagged: "So does any prose that prioritizes precision over personality" and "Put plainly: these tools can catch lazy, unedited AI output with reasonable confidence. Everything else is guesswork dressed up as data." Below the text are a green "Check Again" button, a "Try a Sample" dropdown, a "Choose file" upload button, and a result reading "Fake: 12.0%".
Sapling fails to identify cleverly-prompted Claude text.

Originality 分析了同一段文本,并声称其有 100% 的把握断定该文本由 AI 生成。

Screenshot of Originality.ai's Docs Editor scanning the same passage about AI detectors' unreliability, with most paragraphs highlighted in red/pink indicating flagged text. The results panel on the right shows a gauge reading "100% Confident That's AI," a note that this reflects confidence the text is AI-generated (not that 100% of the text was AI-produced), a prompt to "Run Deep Scan" for detailed explanations, and a character count of 1,704 / 12,000.
Originality scores the same text 100% AI: the opposite verdict, with equal confidence.

从这次测试来看,Originality 似乎是更出色的工具,但需要注意的是,两款工具对各自的分析结果同样自信。如果被分析的文本是您写的,您会知道哪个检测器是正确的;如果不是您写的,那您永远无法确定。

AI 检测器如何危及您的数据

AI 检测器更大的问题在于许多企业完全忽视的一点:它们给数据隐私和安全带来的风险。这些风险与AI 总体上带来的风险类似:

  • 合规风险:检测模型会继承训练数据中的偏见,可能导致歧视性结果,违反机会均等法律。许多检测器都是“黑盒子”,而《欧盟人工智能法案》和 NIST 人工智能风险管理框架(新窗口)等监管框架要求组织必须为 AI 输出提供可解释的逻辑依据。
  • IP 和训练数据风险:许多 AI 检测器的服务条款(ToS)赋予服务提供商存储、分析并使用提交数据来训练未来模型的权利。这可能意味着,您的服务提供商在法律上有权使用您提交的任何产品路线图、财务预测和专有研究,且没有义务保证其隐私,也不必防止这些内容出现在竞争对手的输出中。
  • 数据安全风险:AI 检测器容易遭受网络攻击,将内容提交给第三方检测器会把攻击面扩展到您的服务提供商。如果服务提供商发生安全违规事件,您的数据也会被牵涉其中。免费且未经审核的工具——恰恰是员工可能忍不住去用的那类工具——不允许您事先审计服务提供商的安全措施。
  • 数据主权风险:将文档提交给检测器可能意味着把文本传输到境外服务器,这可能使其失去本地法律保护,并根据CLOUD 法案(新窗口)暴露于域外政府监控之下。

对大多数企业来说,问题不在于 AI 检测器是否有效,而在于使用它们的风险是否值得承担。如果您处理任何敏感、原创或机密数据,答案是否定的。


关于 AI 检测器的常见问题

AI 检测器是如何工作的?

AI 检测器会扫描文本,寻找其经训练后与 AI 生成文本相关联的模式。这些模式之所以存在,是因为 AI 通过算法预测并使用最可能出现的下一个词来生成文本。

AI 检测器寻找什么?

检测器寻找的 AI 生成文本的主要特征是低“困惑度” (perplexity,用词不可预测) 和低“突发性” (burstiness,句子长度和结构的变化)。

一些 AI 模型开始尝试水印技术,即在生成文本时嵌入不可见 (但可检测) 的模式。然而,由于目前只有少数模型开始这样做,水印技术尚不能作为检测 AI 生成文本的万无一失的方法。

AI 检测器有效吗?

准确率取决于所用的检测器、被分析文本的类型,以及(如果使用了的话)AI 是如何被用来生成文本的。检测器对未经编辑的原始 AI 输出表现良好。而面对更复杂的情况——经过编辑的内容、非母语者的人类写作、经过轻微改写的 AI 输出——准确率会显著下降。

撇开准确率不谈,AI 检测器更大的问题在于使用它们可能对您的数据安全构成威胁。将内容提交给第三方检测器意味着将其传输到外部服务器,可能使其面临网络攻击、数据收集和域外监控的风险,同时等于赋予服务提供商对您所提交内容的合法权利。

对大多数企业,尤其是处理任何敏感、原创或机密内容的企业来说,第三方 AI 检测带来的数据风险大于收益。