斯坦福大学推出DetectGPT,以应对学生通过ChatGPT生成论文

品玩1月29日讯,日前,斯坦福大学的一个研究小组提出了一种名为 DetectGPT 的新方法,旨在成为打击高等教育中机器生成文本的首批工具之一。该方法基于的原理是:由 LLM 生成的文本通常在模型的对数概率函数的负曲率区域的特定区域徘徊。通过这个发现,该团队开发了一种新的指标,用于判断文本是否是机器生成的,并且不需要训练人工智能或收集大型数据集来比较文本。

这种方法被称为“零次学习(zero-shot)”,允许 DetectGPT 检测机器写的文本,而不需要了解用于生成文本的是什么人工智能工具。它的操作与其他需要训练“分类器”和真实及生成段落数据集的方法形成鲜明对比。

据了解,该团队在假新闻文章的数据集上测试了 DetectGPT,它在检测机器生成的文本方面的表现优于其他零次学习方法。该团队声称检测性能有了实质性的提高,并表明 DetectGPT 可能是一种有前途的方法,可以仔细检查机器生成的文本。