非英语母语者英文文章被误判为AI生成 61.3%被误判

斯坦福大学的研究者最近发现，如果非英语母语者的英文词汇量不足，他们撰写的英文文章很可能被GPT检测器误判为AI生成的内容。这项研究由斯坦福大学生物医学资料科学的助理教授James Zou主导，并在《Patterns》期刊上发表。研究表明，当前的GPT检测器存在一定的缺陷，难以准确判断文章是否由AI生成。 在这项研究中，研究者使用了7款热门的GPT检测器来检查共计179篇真人书写的文章，结果发现这些检测器将超过一半的非英语母语者撰写的文章误判为AI生成的内容。研究者并未公开用于实验的GPT检测器的名称，但研究结果显示，当前的GPT检测器在判断托福文章是否由AI撰写时，错误率高达61.3%，甚至有一款GPT检测器的错误率高达97.8%。所有的检测器都一致认为，这些由真人书写的文章中，有19.8%的内容“绝对是由AI生成的”。 进一步的分析发现，这种误判的主要原因是非英语母语者在语言的多样化和词语选择上较为有限，他们掌握的英文词汇相对更“正式”，在部分生活场景中并不常使用，因此产生了AI的错误判定现象。