这个工具可以智能识别AI学术文本，准确率超99%！

【导读】

人工智能聊天机器人ChatGPT的首次亮相引起了全世界的热议，因为它具有强大的文本处理和对话能力。不过，6月7日，发表在Cell Reports Physical Science上的一项研究显示，许多线索可以帮助人们区分机器人和人类。基于此，研究人员开发了一种工具，可以识别人工智能生成的学术文本，准确率超过99%。

“我们努力创造一种易于使用的方法，解决辨别人工智能写作问题。如此一来，高中生也可以建立一个针对文本的人工智能探测器。”论文第一作者、堪萨斯大学教授Heather Desaire说。

“目前，人工智能写作存在一些明显的问题。”Desaire说，“最大的问题之一是，它汇集了许多来源的文本，却没有任何形式的准确性检查。”

尽管许多人工智能文本检测器在网上可用，并且表现相当好，但它们并不是专门为学术写作而构建的。为了填补这一空白，该团队希望构建一个具有更好性能的学术写作检测工具。他们关注的是观点文章——科学家撰写的特定研究主题的概述。该团队选择了64个主题，并在相同的研究主题上创建了128篇ChatGPT生成的文章来训练模型。当他们比较这些文章时，他们发现了人工智能写作的一个指标——可预测性。

与人工智能相反，人类写作的段落结构更复杂，每段的句子数量和总字数都不一样，句子长度也不稳定。此外，对标点符号和词汇的偏好也是一个线索。例如，科学家倾向于使用“然而”、“但是”和“尽管”这样的词，而ChatGPT在写作中经常使用“其他人”和“研究人员”。最终，该团队为新模型列出了20个指标。

经过测试，对于整篇观点文章，该模型在区分人类和人工智能作者的准确率达到了100%。对于识别单个段落，该模型的准确率为92%。该模型远远超过了市场上现有的人工智能文本检测器。

_

论文信息：

标题：Distinguishing academic science writing from humans or ChatGPT with over 99% accuracy using off-the-shelf machine learning tools

出版信息：Cell Reports Physical Science，21 June 2023

DOI：10.1016/j.xcrp.2023.101426

转自：“科研之友 ScholarMate”微信公众号

如有侵权，请联系本站删除！