Sequoia Capital'in Eğitim Verileri podcast'inde yakın zamanda yapılan bir röportajda Microsoft CTO'su Kevin Scott, büyük dil modeli (LLM) ölçeklendirme yasalarının kalıcı değerine olan inancını yineledi.
Ayrıca Okuyun: Yapay zeka uygulamalarında riskleri ve testleri vurgulayan "güvenlik etiketleri" yer alacak
Microsoft ile OpenAI arasındaki 13 milyar dolarlık anlaşmada büyük rol oynayan Scott, devam eden ilerleme potansiyeli konusunda iyimserliğini koruyor. Devam eden tartışmaya, yasaları ölçeklendirme fikrinin hala yapay zeka alanıyla alakalı olduğunu belirterek yanıt verdi.
OpenAI araştırması ölçeklendirmenin faydalarını destekliyor
OpenAI araştırmacılarının 2020 yılında önerdiği LLM ölçeklendirme yasaları, dil modellerinin verimliliğinin, modelin boyutuyla orantılı bir şekilde arttığını belirtiyor. Scott, üstel büyümenin hâlâ mümkün olduğunu ancak gelecek nesil süper bilgisayarların bunu gerçekleştirmesinin gerekebileceğini söyleyerek, azalan getiriler yasasını geçersiz kıldı.
Bazı akademisyenler ölçeklendirme yasalarının sürdürülebilirliğini sorgularken OpenAI, yapay zeka planının önemli bir bileşeni olarak hâlâ bunlara güveniyor. Scott'ın sözleri Microsoft'un bu ilkelere yaklaşımıyla uyumlu; bu da teknoloji devinin daha büyük yapay zeka modellerinin geliştirilmesini durdurmaya niyeti olmadığını gösteriyor.
Yapay zeka topluluğu gelecekteki model iyileştirmelerini tartışıyor
Scott'ın duruşu, GPT-4 ve diğer benzer modellerde büyümenin durduğunu düşünen bazı yapay zeka eleştirmenlerinin tam tersi. Bazı eleştirmenler, Google'ın Gemini 1.5 Pro ve Anthropic'in Claude Opus'u da dahil olmak üzere en son modellerin önceki modellere göre önemli gelişmeler göstermediğini belirtti. Yapay Zeka Eleştirmeni Gary Marcus, Nisan ayında GPT-4'ün piyasaya sürülmesinden bu yana önemli ilerleme kaydedilmemesini sorgulayarak bu bakış açısına dikkat çekti.
Ancak yine de Scott yeni keşiflerin olasılığı konusunda iyimser. Ayrıca yapay zekada az sayıda veri noktası olduğu gerçeğini de kabul etti ancak bunun gelecekte artık bir sorun olmayacağını vurguladı.
"Bir sonraki örnek geliyor ve size ne zaman olacağını söyleyemem ve tam olarak ne kadar iyi olacağını da tahmin edemiyorum, ancak şu anda kırılgan olan şeylerde neredeyse kesinlikle daha iyi olacak."
Kevin Scott
Microsoft'un OpenAI'deki büyük finansmanı, Yüksek Lisans'ın gelecekteki ilerlemesine olan güveninin bir kanıtıdır. Yapay zeka özelliklerinden bazıları Microsoft Copilot'u içeriyor ve bu da şirketin yapay zeka kullanımını iyileştirme konusunda istekli olduğunu açıkça ortaya koyuyor. Yapay zeka eleştirmeni Ed Zitron, insanların yapay zekadan çok fazla şey beklemesi nedeniyle yapay zekanın bir dereceye kadar takılıp kalabileceğini söyledi.
