2024 年 8 月,Grammarly 推出了人工智能内容检测器,此前曾称人工智能检查器为 "不可靠"
Grammarly 受到全球 3000 多万人的信赖。
众所周知,它可以在许多设备和平台上帮助解决拼写、语法、风格和语气问题。
正因为如此,当 Grammarly 增加了一个检测人工智能撰写内容的工具时,人们都很兴奋。
现在,我们必须检查一下,Grammarly 的 AI Checker 是否解决了他们曾经批评过的问题?
Grammarly AI 检查器准确吗?
或者我们说具体点。
Grammarly AI 检查程序可靠吗?
在本博客中,我们将测试 Grammarly 的人工智能检查程序在六种不同内容类型中的实际效果。
我们将向您展示它的成功之处和失败之处,以及您是否可以信赖它来满足您的内容验证需求。
主要收获
- 在我们对 6 类内容的测试中,Grammarly 的人工智能检查器只达到了 33% 的准确率。
- 该工具正确识别了 100% 的人类内容,但未能检测到完全由人工智能生成的文本。
- Grammarly AI 检查器准确吗? 根据我们的测试,该检测器在处理人工智能内容的转述和人机混合写作时很吃力。
- 免费用户每次提交的字数限制为 1,000 字,而高级用户的字数限制更高。
- 更专业的工具,如 无法探测的人工智能探测器 (100% 精确度)比 Grammarly AI 检查器免费版可靠得多。
什么是 Grammarly AI 检查器?
Grammarly AI Checker 可帮助您识别文章是否由人工智能生成。
探测器内置在 Grammarly 的现有平台因此,它可以与语法、拼写和风格工具一起使用。
以下是 Grammarly AI 检查程序的推广过程:
再也不用担心人工智能检测到你的短信了 Undetectable AI 可以帮助您:
- 让人工智能辅助写作显现出来 像人一样
- 旁路 只需点击一下,就能使用所有主要的人工智能检测工具。
- 使用 人工智能 安全地 和 自信地 在学校和工作中。
- 2024 年 8 月 正式推出人工智能探测器
- 2024 年 9 月 谷歌文档测试版发布
- 2025 年初 即将推出更多功能,尤其是针对教育工作者的功能
该功能是 Grammarly 在更大范围内推动 "Grammarly作者"I在人工智能无处不在的时代,他们用这种方式为真实的人类写作表明立场。
这个工具是为谁准备的?
- 学生和教师。
- 内容创作者和营销人员。
- 专业作家。
由于检测器是 Grammarly 主平台的一部分,因此使用起来比单独的 人工智能检查工具。
如果你已经在使用 Grammarly,那么这项功能就可以直接融入你的工作流程--无需复制粘贴到另一个网站。
Grammarly 人工智能检测器的主要功能
以下是 Grammarly AI 检查工具的突出功能:
- 免费 Grammarly AI 检查器 计划最多可分析 1,000 个单词。高级版提供更高的限制和更多的工具。
- 完全嵌入 Grammarly 的网页、桌面和移动应用程序,无需额外工具。
- 显示人工智能生成内容的可能性百分比。
- 可在浏览器扩展、桌面应用程序和移动设备上运行。
- 在您书写时立即检测人工智能内容。
Grammarly 的人工智能检查器如何工作
Grammarly AI 检查程序的工作原理是发现人工智能编写的内容中常见的模式。
它考察的内容包括如何造句、写作风格以及重复的语言结构。
该工具使用机器学习。
这意味着它已经过大量实例的训练,能够识别人工智能写作通常是什么样子的。
Grammarly 表示,他们通过 "严格的测试 "来确保工具的准确性--即使不完美,也能很好地发现可能存在的人工智能。
但是,Grammarly AI 检查程序的实际性能有多可靠呢?它对较长的文本效果最好。
较短的段落无法提供足够的数据进行分析,因此结果可能不太准确。
因为它内置于 Grammarly 的平台中,所以也使用相同的语法和风格检查系统。
这有助于它理解您写作的整体流程。
但它也有一个缺点--由于它不是一个专门的人工智能检测器,它可能会漏掉一些专业工具更擅长捕捉的东西。
Grammarly AI 检查器准确吗?
为了评估 Grammarly AI 检查器是否准确,我们使用了 ZDNet 的框架.
该方法分析了六个不同的内容类别,以衡量真实世界的性能。
测试:6 类内容
我们针对六种类型的内容测试了 Grammarly 提供的人工智能检查器:
类别 | 内容类型 |
1 | 100% AI |
2 | 100% 人类 |
3 | 轻度编辑的人工智能 |
4 | 解析人工智能 |
5 | 人类 + 人工智能混合 |
6 | 人工智能与剽窃 |
让我们看看 Grammarly AI 检查程序在每个类别下的表现如何:
第 1 类:100% AI
现实 完全由人工智能生成
Grammarly 结果: 50% AI
结论 错误检测
本内容完全由 ChatGPT 生成,未经人工编辑。
人工智能语法检查程序本应将此标记为高度人工智能生成,但它只检测到 50% 人工智能概率。
类别 2: 100% 人类(经典广告)
现实 人写的
Grammarly 结果: 0% 人工智能(100% 人类)
结论 正确检测
这些内容是在人工智能工具出现之前几十年写成的。Grammarly 人工智能检查器正确识别出这完全是人工撰写的。
第 3 类:轻度编辑的人工智能
现实 主要是人工智能,人工编辑极少
Grammarly 结果: 25% AI
结论 错误检测
其中只有 20-25% 的内容经过人工编辑。人工智能检查程序 Grammarly 明显低估了人工智能的参与程度。
类别 4:转述人工智能内容
现实 人工智能的起源,为了听起来更人性化而转述
Grammarly 结果: 33% AI
结论 正确检测
该内容最初由人工智能生成,然后使用人性化工具进行转述。Grammarly AI 检查程序检测到了一些人工智能痕迹。
第 5 类:人类 + 人工智能混合内容
现实 50% 人工写作 + 50% 人工智能生成的短语
Grammarly 结果: 20% AI
结论 错误检测
在人类和人工智能内容各占一半的情况下,人工智能语法检查器应该检测到大约 50% 的人工智能参与,而不是 20%。
类别 6:人工智能与剽窃
现实 人工智能写作与历史事实重叠
Grammarly 结果: 25% AI
结论 错误检测
这是完全由人工智能生成的内容,恰好包含了一些历史上准确的信息。Grammarly AI 检查程序完全忽略了人工智能生成的内容。
最终记分卡
在总共 6 个测试用例中
- 正确检测: 2(第 2 类和部分第 4 类)
- 假阳性/阴性: 4(类别 1、3、5、6)
检测精度: 33%
Grammarly AI 检查器的可靠性有限,只有三分之一的时间能准确识别内容。
虽然它在识别纯人工内容方面表现出色,但在所有其他类别中,它始终低估了人工智能的参与程度。
这种表现凸显了一个关键问题:人工智能检查程序 Grammarly 不仅不可靠,而且会误导需要准确人工智能检测的用户。
因此,为了验证您自己的内容...
使用 无法检测的人工智能探测器 以获得 100% 的准确结果。在 ZDNet 自己的测试中,这款人工智能检测器正确识别了所有六个类别,没有误报和漏报。
您还可以使用我们的 无法察觉的人工智能人性化器 重写任何被标记的部分,直到它们看起来真正像人。
使用多个检测器重新测试,以确认您的内容可在不同平台上通过
Grammarly AI 检查器的弱点和局限性
以下是 Grammarly 的人工智能检查程序不尽如人意之处:
准确性问题
- 它有时会忽略明显由人工智能编写的内容。
- 当它给出的人工智能分数较低时,会让你觉得内容的原创性高于实际情况。
- 结果并不一致--准确性根据内容类型和创建内容的人工智能模型而变化。
技术限制
- 免费用户每次最多只能扫描 1,000 个单词。
- 它针对英语进行了优化,不能很好地处理其他语言。
- 随意性、创造性或非正式的写作可能会混淆它。
- 在分析较长文本时,速度往往会变慢。
实际缺点
- 您不能一次性上传或检查多个文件。
- 它不区分人工智能编辑的内容和人工智能编写的内容。
核心挑战
- 该工具正努力跟上人工智能的快速发展步伐。
- 较新的人工智能模型很容易通过检测。
- 混合内容--人类对人工智能的输出进行编辑或扩展--经常被忽视。
Grammarly AI 检测器与其他 AI 检测器的比较
说到人工智能检测的准确性,Grammarly 的人工智能检查程序很难赶上专门为此任务设计的工具。
以下是顶级探测器在我们测试中的表现:
工具 | 准确性 | 突出特点 | 弱点 | 价格/月 |
Grammarly | 33% | 与写作平台无缝集成 | 危险的低准确率 | $12 |
检测不到的人工智能 | 100% | 绕过探测器的人工智能人性化装置 | 有限的免费使用 | $19 |
泄密 | 50-80% | 支持多种语言(30 多种语言) | 新型人工智能的精确度较低 | $17 |
GPT 零 | 100% | 逐句人工智能概率评分 | 有限的免费级别 | $15 |
StealthWriter AI | 50% | 改写人工智能文本,使其看起来像人类撰写的文本 | 可能改变原意 | $20 |
请注意: 我们对以下两个方面进行了全面审查 泄密 和 StealthWriter AI 使用相同的测试方法。
Grammarly 能否检测人工智能编辑或转述的文本?
这就是人工智能检查程序 Grammarly 最大的弱点。
转述人工智能内容的性能
在我们的测试中,Grammarly AI Checker 仅检测到 33% AI,而这些内容最初是由 100% AI 生成的,但使用人性化工具进行了转述。
这意味着,任何使用人工智能转述工具或人工智能人性化软件的人都可以轻松绕过 Grammarly AI Checker 的检测。
人工智能编辑内容面临的挑战
人工智能语法检查程序在处理人工智能编辑的内容时更加吃力--这些内容开始时是人写的,但经过人工智能的增强或扩展。
我们的 "轻度编辑的人工智能" 当实际情况是有 75-80% AI 参与时,该类别只显示出 25% AI 检测。
工具,如 无法察觉的人工智能的人性化工具 和 AI 解析器 是专门为躲避检测而设计的。在 我们的上次审查我们测试了人性化工具的准确性,测试结果表明:
StealthWriter AI: 将多个探测器的人工智能检测量从 100% 减少到 5%。
检测不到的人工智能 人性化后实现 1% 人工智能检测
Quillbot 解析: 仍显示 76% AI 检测(效果较差)
底线 如果有人想绕过 Grammarly AI Checker,现成的工具会让这一切变得轻而易举。
通过下面的小工具直接访问我们的人工智能检测器和 Humanizer。
关于 Grammarly AI Checker 的常见问题
Grammarly 可以标记 GPT-4 内容吗?
不可靠。人工智能检查程序 Grammarly 经常说 GPT-4 内容的人工智能程度较低,而实际上它是完全人工智能的。
它很难识别来自 GPT-4 等高级工具的文本。
Grammarly 与 Turnitin 或 GPTZero 相比如何?
Grammarly 对用户更友好,但准确性却差得多。在我们的测试中,Grammarly 的得分仅为 33%。
GPTZero 的准确率为 99.8%,而 Turnitin 在其他独立测试中的准确率在 87-90% 之间。如果准确性是你的首要考虑因素,那么 Grammarly 的表现就差强人意了。
Grammarly 的检测结果会出错吗?
是--经常。Grammarly AI 检查器 对人工智能内容检测不足,可能会让用户误以为人工智能生成的文本是原创的。
它还会错误地标记一些人工编写的技术内容。
结论
Grammarly AI 检查器内置在 Grammarly 平台中,使用起来非常方便,但我们的测试表明,它的准确性并不高。
准确率为 33%。这意味着它经常错过人工智能生成的内容或给出错误的结果。
那么,Grammarly AI 检查器是否足够准确?
如果您只需要在 Grammarly 中进行快速、简单的检查,它可能会有用。
如果您真的需要确定某篇文章是否由人工智能撰写,仅靠这个工具是不够的,还有其他性能更好的选择。
免费版的 Grammarly AI 检查器可以检查短文,付费版则提供更多功能,但都无法解决准确性问题。
如果您需要信任结果,最好使用可靠的工具,如 无法检测的人工智能探测器 100% 的精度。