人工智慧 (AI) 已經佔領了現代生活,特別是在生成書面內容方面。雖然這都是有趣的遊戲,但檢測人工智慧內容的不準確性令人擔憂。更糟的是,人工智慧偵測器將人類書寫的內容標記為 GPT 產生的;案例研究美國憲法。

另請閱讀:Y Combinator 的 Paul Graham 因聲稱帶有“Delve”的文本是由 AI 編寫而受到猛烈抨擊

美國憲法於 1787 年制定,1788 年批准,自 1789 年起開始實施。憲法的製定大約比第一輛汽車發明早了一個世紀。然而,人工智慧探測器標記其 97.97% 是人工智慧產生的。

人工智慧探測器將美國憲法標記為不人道

2023 年,人工智慧書面內容有所增加。此後不久,市場開發人員抓住機會創建了可告知人工智慧內容百分比的探測器。這本來應該是一個很好的進步,但事實並非如此。

人工智慧探測器已將美國憲法標記為人工智慧內容。百分比?收盤率為97.97%。 「人工智慧」一詞是在 1950 年至 1956 年間人工智慧誕生時創造並流行起來的。

資料來源:Zerogpt.com

1950 年,艾倫·圖靈發表了一篇題為《電腦機械與智慧》的期刊文章,提出了一種名為「模仿遊戲」的機器智慧測試。這篇文章標誌著我們今天所處的世界的開始。

1952 年,一位名叫阿瑟·塞繆爾 (Arthur Samuel) 的電腦科學家開發了一個下棋程序,這是第一個獨立學習跳棋的程式。不久之後,在 1955 年,約翰·麥卡錫 (John McCarthy) 在達特茅斯舉辦了一場關於「人工智慧」的研討會,這是該詞的首次使用。

人工智慧探測器有局限性

人工智慧偵測器有局限性,因為人工智慧產生的文字模仿人類書寫。這些探測器是由教導機器如何書寫的同一個人訓練的。那麼,他們的人工智慧探測器如何運作以及它們的準確度如何?另一款 AI 探測器在美國憲法上得分為 1%。這1%從哪裡來?

資料來源:gptzero.me

好吧,這就是差異:一些人工智慧探測器會尋找某些單詞,例如「深入、掛毯、利用、眾多等」。通常由人工智慧使用,但對美國人來說並不常見。 

然而,對於一些來自有英國殖民歷史的國家的人來說,這些詞在口頭和書面語言中都很常用。

上個月,Y Combinator 聯合創始人 Paul Graham 在 X(前身為 Twitter)上提出的 ChatGPT 文字歸因理論遭到批評。格雷厄姆發布了一封冷冰冰的電子郵件提案,他從某人那裡收到了一個項目,他斷定該項目是人工智慧寫作,因為其中包含「鑽研」一詞。

一位 X 用戶說:“在曾經有英國殖民歷史的國家學習英語的人 - 這正是我們學習英語的方式 [...] ‘Delve’ 是我們說的一個普通詞。”另一個人說這是美國的問題。

一些國家和人們仍然使用我所說的“文學英語”。不幸的是,美國詞彙主要基於口語(你們稱之為俚語)和美國當代慣用語,以至於…的複雜使用。

— 非洲研究台 (@MightiJamie) 2024 年 4 月 10 日

這就引出了一個問題,人工智慧偵測器和內容產生器是否應該針對特定地區的英語?或者所有這些書寫工具和偵測器都應該被使用嗎?

人工智慧探測器不準確

人工智慧檢測器依賴不一致的語言特徵。人類語言本質上是可變的,具有多種風格、方言和習語。人工智慧產生的文字可能屬於這些變化範圍,使得偵測器很難準確。

大約 20% 的 AI 生成文字在通過這些檢測系統時未被檢測到,從而削弱了 AI 檢測器的可靠性。同樣,大約 25% 的人類書寫文字被錯誤地標記為人工智慧。

Quora 上的一位用戶寫道:「人工智慧偵測器偵測到我的作品是 100% 人工智慧生成的。因為我無知地應學術顧問的要求將其用作編輯和文法工具。已經發表的文章中的文字、概念和生活經驗都是我自己的。我該怎麼辦?

許多人對這個問題表示沮喪。最近,在 Cryptopolitan 發布的一篇新聞文章中,人工智慧生成器標記了唐納德·川普所說的話語。他說:“我對加密貨幣公司以及與這個新興行業相關的所有事物都非常積極和開放。” ⁤AI如何加入口語?是在一個人的心裡嗎?在表達的想法中?

其他內容來自大衛貝利:「⁤我們將動員起來保衛自己。 ⁤⁤我們不是投票支持川普本身,而是投票反對拜登。 ⁤⁤唯一應該為此負責的人是拜登。 “

另請閱讀:川普的加密貨幣運動——你需要知道的一切

2023 年,OpenAI 在一篇宣傳部落格文章中發布了針對教育工作者的提示,展示了一些教師如何使用 ChatGPT 作為教育輔助工具。  

在常見問題中標題為「人工智慧探測器有用嗎?」的部分中OpenAI 寫道:「簡而言之,不。雖然一些公司(包括 OpenAI)已經發布了旨在檢測人工智慧生成內容的工具,但這些工具都沒有被證明能夠可靠地區分人工智慧生成的內容和人類生成的內容。區分人類內容和人工智慧內容的問題仍然存在。問題是:下一步該做什麼?

Florence Muchai 的《密碼城》報道