人工智慧 (AI) 已经占领了现代生活,特别是在生成书面内容方面。虽然这都是有趣的游戏,但检测人工智慧内容的不准确性令人担忧。更糟的是,人工智慧侦测器将人类书写的内容标记为 GPT 产生的;案例研究美国宪法。

另请阅读:Y Combinator 的 Paul Graham 因声称带有“Delve”的文本是由 AI 编写而受到猛烈抨击

美国宪法于 1787 年制定,1788 年批准,自 1789 年起开始实施。宪法的制定大约比第一辆汽车发明早了一个世纪。然而,人工智慧探测器标记其 97.97% 是人工智慧产生的。

人工智慧探测器将美国宪法标记为不人道

2023 年,人工智慧书面内容有所增加。此后不久,市场开发人员抓住机会创建了可告知人工智慧内容百分比的探测器。这本来应该是一个很好的进步,但事实并非如此。

人工智慧探测器已将美国宪法标记为人工智慧内容。百分比?收盘率为97.97%。 「人工智慧」一词是在 1950 年至 1956 年间人工智慧诞生时创造并流行起来的。

资料来源:Zerogpt.com

1950 年,艾伦·图灵发表了一篇题为《电脑机械与智慧》的期刊文章,提出了一种名为「模仿游戏」的机器智慧测试。这篇文章标志著我们今天所处的世界的开始。

1952 年,一位名叫阿瑟·塞缪尔 (Arthur Samuel) 的电脑科学家开发了一个下棋程序,这是第一个独立学习跳棋的程式。不久之后,在 1955 年,约翰·麦卡锡 (John McCarthy) 在达特茅斯举办了一场关于「人工智慧」的研讨会,这是该词的首次使用。

人工智慧探测器有局限性

人工智慧侦测器有局限性,因为人工智慧产生的文字模仿人类书写。这些探测器是由教导机器如何书写的同一个人训练的。那么,他们的人工智慧探测器如何运作以及它们的准确度如何?另一款 AI 探测器在美国宪法上得分为 1%。这1%从哪里来?

资料来源:gptzero.me

好吧,这就是差异:一些人工智慧探测器会寻找某些单词,例如「深入、挂毯、利用、众多等」。通常由人工智慧使用,但对美国人来说并不常见。 

然而,对于一些来自有英国殖民历史的国家的人来说,这些词在口头和书面语言中都很常用。

上个月,Y Combinator 联合创始人 Paul Graham 在 X(前身为 Twitter)上提出的 ChatGPT 文字归因理论遭到批评。格雷厄姆发布了一封冷冰冰的电子邮件提案,他从某人那里收到了一个项目,他断定该项目是人工智慧写作,因为其中包含「钻研」一词。

一位 X 用户说:“在曾经有英国殖民历史的国家学习英语的人 - 这正是我们学习英语的方式 [...] ‘Delve’ 是我们说的一个普通词。”另一个人说这是美国的问题。

一些国家和人们仍然使用我所说的“文学英语”。不幸的是,美国词汇主要基于口语(你们称之为俚语)和美国当代惯用语,以至于…的复杂使用。

— 非洲研究台 (@MightiJamie) 2024 年 4 月 10 日

这就引出了一个问题,人工智慧侦测器和内容产生器是否应该针对特定地区的英语?或者所有这些书写工具和侦测器都应该被使用吗?

人工智慧探测器不准确

人工智慧检测器依赖不一致的语言特征。人类语言本质上是可变的,具有多种风格、方言和习语。人工智慧产生的文字可能属于这些变化范围,使得侦测器很难准确。

大约 20% 的 AI 生成文字在通过这些检测系统时未被检测到,从而削弱了 AI 检测器的可靠性。同样,大约 25% 的人类书写文字被错误地标记为人工智慧。

Quora 上的一位用户写道:「人工智慧侦测器侦测到我的作品是 100% 人工智慧生成的。因为我无知地应学术顾问的要求将其用作编辑和文法工具。已经发表的文章中的文字、概念和生活经验都是我自己的。我该怎么办?

许多人对这个问题表示沮丧。最近,在 Cryptopolitan 发布的一篇新闻文章中,人工智慧生成器标记了唐纳德·川普所说的话语。他说:“我对加密货币公司以及与这个新兴行业相关的所有事物都非常积极和开放。” ⁤AI如何加入口语?是在一个人的心里吗?在表达的想法中?

其他内容来自大卫贝利:「⁤我们将动员起来保卫自己。 ⁤⁤我们不是投票支持川普本身,而是投票反对拜登。 ⁤⁤唯一应该为此负责的人是拜登。 “

另请阅读:川普的加密货币运动——你需要知道的一切

2023 年,OpenAI 在一篇宣传部落格文章中发布了针对教育工作者的提示,展示了一些教师如何使用 ChatGPT 作为教育辅助工具。  

在常见问题中标题为「人工智慧探测器有用吗?」的部分中OpenAI 写道:「简而言之,不。虽然一些公司(包括 OpenAI)已经发布了旨在检测人工智慧生成内容的工具,但这些工具都没有被证明能够可靠地区分人工智慧生成的内容和人类生成的内容。区分人类内容和人工智慧内容的问题仍然存在。问题是:下一步该做什么?

Florence Muchai 的《密码城》报道