Vitalik Buterin Says GPT-4 Has Passed the Turing Test

Cointelegraph · 2024-05-16T17:43:04.000Z

OpenAI’s GPT-4, a generative artificial intelligence (AI) model, has passed the Turing Test, according to Ethereum co-founder Vitalik Buterin. The Turing Test is a nebulous benchmark for AI systems purported to determine how human-like a conversational model is. The term was coined on account of famed mathematician Alan Turing who proposed the test in 1950. According to Turing, at the time, an AI system capable of generating text that fools humans into thinking they’re having a conversation with another human would demonstrate the capacity for “thought.” Nearly 75 years later, the person largely credited with conceiving the world’s second most popular cryptocurrency has interpreted recent preprint research out of UC San Diego as indicating that the Turing Test has finally been “passed” by a production model. Source: @Vitalik.eth on Farcaster. Researchers at the University of California San Diego recently published a preprint paper titled “People cannot distinguish GPT-4 from a human in a Turing test,” wherein they had approximately 500 human test subjects interact with humans and AI models in a blind test to determine whether the subjects could figure out which was which. According to the research, humans mistakenly determined that GPT-4 was a “human” 56% of the time. This means that machine fooled humans into thinking that it was one of them more often than not. Vitalik Buterin’s take According to Buterin, an AI system capable of fooling more than half of the humans it interacts with qualifies as passing the Turing test. Per a cast on Farcaster, discussing recent preprint research: “It means people's ability to tell if it's a human or a bot is basically a coin flip!” Buterin qualified his statement in a follow-up parenthetical, “ok not quite, because humans get guessed as humans 66% of the time vs 54% for bots, but a 12% difference is tiny; in any real-world setting that basically counts as passing.” He also later added, in response to commentary on his original cast, that the Turing Test is “by far the single most famous socially accepted milestone for "AI is serious shit now". So it's good to remind ourselves that the milestone has now been crossed.” Turing’s Test Artificial general intelligence (AGI) and the Turing Test are not necessarily related, despite the two terminologies often being conflated. Turing formulated his test based on his mathematical acumen and predicted a scenario where AI could fool humans into thinking it was one of them through conversation. It bears mention that the Turing Test is an ephemeral construct with no true benchmark or technical basis. There is no scientific consensus as to whether machines are capable of “thought” as living organisms are or as to how such a feat would be measured. Simply put, artificial general intelligence or an AI’s ability to “think” isn’t currently measurable or defined by the scientific or engineering communities. Turing made his conceptual predictions long before the advent of token-based artificial intelligence systems and the onset of generative adversarial networks (GANs), the precursor to today’s generative AI systems. Artificial general intelligence Complicating matters further is the idea of artificial general intelligence (AGI), which is often associated with the Turing Test. In scientific parlance, a “general intelligence” is one that should be capable of any intelligence-based feat. This precludes humans, as no person has shown “general” capabilities across the spectrum of human intellectual endeavor. Thus, it follows that a “general artificial intelligence” would feature thought capabilities far beyond that of any known human. That being said, it’s clear that GPT-4 doesn’t fit the bill of a true “general intelligence” in the strictly scientific sense. However, that hasn’t stopped denizens of the AI community from moving around goalposts and using the term “AGI” to indicate any AI system capable of fooling a significant number of humans. In the current culture, it’s typical to see terms and phrases such as “AGI,” “human-like,” and “passes the Turing test” as referring to any AI system that outputs content comparable to the content produced by humans. Related: ‘We’re just scratching the surface’ of crypto and AI — Microsoft exec

GPT-4 OpenAI, model kecerdasan buatan (AI) generatif, telah lulus Uji Turing, menurut salah satu pendiri Ethereum, Vitalik Buterin.
Tes Turing adalah tolok ukur samar-samar untuk sistem AI yang dimaksudkan untuk menentukan seberapa mirip model percakapan dengan manusia. Istilah ini diciptakan karena matematikawan terkenal Alan Turing yang mengusulkan tes ini pada tahun 1950.
Menurut Turing, pada saat itu, sistem AI yang mampu menghasilkan teks yang membodohi manusia sehingga mengira mereka sedang melakukan percakapan dengan manusia lain akan menunjukkan kapasitas “berpikir”.
Hampir 75 tahun kemudian, orang yang dianggap sebagai pencipta mata uang kripto terpopuler kedua di dunia telah menafsirkan penelitian pracetak terbaru dari UC San Diego sebagai indikasi bahwa Uji Turing akhirnya “lulus” oleh model produksi.
 Sumber: @Vitalik.eth di Farcaster.
Para peneliti di Universitas California San Diego baru-baru ini menerbitkan makalah pracetak berjudul “Orang tidak dapat membedakan GPT-4 dari manusia dalam uji Turing,” yang mana mereka meminta sekitar 500 subjek uji manusia berinteraksi dengan manusia dan model AI dalam uji buta untuk menentukan apakah subjek dapat mengetahui yang mana.
Menurut penelitian, 56% manusia secara keliru menentukan bahwa GPT-4 adalah “manusia”. Artinya, mesin lebih sering membodohi manusia dengan berpikir bahwa itu adalah salah satu dari mereka.
Pendapat Vitalik Buterin
Menurut Buterin, sistem AI yang mampu menipu lebih dari separuh manusia yang berinteraksi dengannya memenuhi syarat untuk lulus uji Turing.
Berdasarkan pemeran di Farcaster, mendiskusikan penelitian pracetak terbaru:
 “Artinya, kemampuan seseorang untuk mengetahui apakah itu manusia atau bot pada dasarnya adalah sebuah lemparan koin!”
Buterin memenuhi syarat pernyataannya dalam tanda kurung lanjutan, “ok kurang tepat, karena 66% manusia sering ditebak sebagai manusia vs 54% untuk bot, tetapi perbedaan 12% itu kecil; dalam situasi dunia nyata mana pun yang pada dasarnya dianggap lulus.”
Dia juga kemudian menambahkan, sebagai tanggapan terhadap komentar mengenai pemeran aslinya, bahwa Tes Turing adalah "sejauh ini merupakan tonggak sejarah paling terkenal yang diterima secara sosial untuk "AI adalah hal yang serius sekarang". Jadi ada baiknya untuk mengingatkan diri kita sendiri bahwa pencapaian tersebut kini telah terlampaui.”
Tes Turing
Kecerdasan umum buatan (AGI) dan Tes Turing belum tentu terkait, meskipun kedua terminologi tersebut sering kali digabungkan. Turing merumuskan tesnya berdasarkan kecerdasan matematisnya dan memperkirakan skenario di mana AI dapat membodohi manusia dengan berpikir bahwa itu adalah salah satunya melalui percakapan.
Perlu disebutkan bahwa Tes Turing adalah konstruksi sementara tanpa patokan atau dasar teknis yang sebenarnya. Tidak ada konsensus ilmiah mengenai apakah mesin mampu “berpikir” seperti organisme hidup atau bagaimana kemampuan tersebut diukur. Sederhananya, kecerdasan umum buatan atau kemampuan AI untuk “berpikir” saat ini tidak dapat diukur atau ditentukan oleh komunitas ilmiah atau teknik.
Turing membuat prediksi konseptualnya jauh sebelum munculnya sistem kecerdasan buatan berbasis token dan munculnya generative adversarial network (GAN), yang merupakan cikal bakal sistem AI generatif saat ini.
Kecerdasan umum buatan
Masalah yang lebih rumit adalah gagasan kecerdasan umum buatan (AGI), yang sering dikaitkan dengan Tes Turing. Dalam istilah ilmiah, “kecerdasan umum” adalah kecerdasan yang harus mampu melakukan segala hal yang berbasis kecerdasan. Hal ini menghalangi manusia, karena tidak ada orang yang menunjukkan kemampuan “umum” di seluruh spektrum upaya intelektual manusia. Oleh karena itu, “kecerdasan buatan umum” akan menampilkan kemampuan berpikir yang jauh melampaui kemampuan manusia mana pun.
Meskipun demikian, jelas bahwa GPT-4 tidak sesuai dengan “kecerdasan umum” yang sebenarnya dalam pengertian ilmiah. Namun, hal ini tidak menghentikan komunitas AI untuk bergerak di sekitar gawang dan menggunakan istilah “AGI” untuk menunjukkan sistem AI yang mampu menipu sejumlah besar manusia.
Dalam budaya saat ini, istilah dan frasa seperti “AGI”, “mirip manusia”, dan “lulus uji Turing” adalah hal yang umum untuk merujuk pada sistem AI yang menghasilkan konten yang sebanding dengan konten yang dihasilkan oleh manusia.
Terkait: 'Kami baru menggali permukaan' kripto dan AI — eksekutif Microsoft

Vitalik Buterin Mengatakan GPT-4 Telah Lulus Uji Turing

Jelajahi Konten Lainnya dari Kreator

Berita Terbaru