|
楼主 唱歌好不唱歌说: AI与人类文本识别:你真的能分辨吗?
随着生成式人工智能(如ChatGPT)的飞速发展,我们被其创造力所震撼。然而,这也引发了一个新的问题:如何区分一段文字是AI生成的,还是人类创作的?
许多学术机构和公司开发了所谓的“AI文本检测工具”来识别AI创作的内容。但这些工具真的可靠吗?让我们通过一些最新的研究数据来探讨这个问题。
1 检测工具的准确性参差不齐
一项发表在《International Journal for Educational Integrity》上的研究表明,现有的AI文本检测工具并不像我们想象的那样准确。研究人员测试了几个广泛使用的检测工具,发现它们在判断文本来源时的准确率令人失望,某些检测器的准确率甚至低于50%,这意味着它们还不如抛硬币!
更具体的数据显示,这些工具错误地将25%-50%的人工文本标记为AI生成。这不仅让真正的作者感到冤枉,也暴露了这些工具在处理复杂语言时的局限性。
2 简单的修改就能骗过检测器
有趣的是,研究还发现,我们只需要稍加修改AI生成的文本,就能轻松骗过检测工具。例如,简单地用同义词替换、重写部分句子,甚至改变标点符号的使用方式,都可能让检测准确性大大降低。
另一个有趣的发现是,人类自己也很容易被迷惑。在一项实验中,研究人员让参与者猜测一段文字的来源,结果显示,普通人分辨AI和人类文本的准确率也并不高。
为什么这么难分辨?
我们之所以难以分辨AI和人类写的文字,原因之一在于AI模型已经学会模仿人类的写作风格。现如今,AI生成的内容不仅逻辑清晰,而且能很好地使用上下文信息。此外,AI还可以根据指令调整语气和风格,这进一步模糊了与人类创作的界限。
参考文献(见最后一张图片)
Kang, M., & Hashimoto, K. (2023)
Johnson, R., & Li, X. (2023)
来自:掌上乐园 |
|