Menurut Cointelegraph, pengembang kecerdasan buatan OpenAI telah memperkenalkan beberapa pembaruan pada modelnya pada awal Oktober, yang bertujuan untuk meningkatkan kemampuan percakapan dan pengenalan gambar. Pada tanggal 1 Oktober, OpenAI mengumumkan empat alat baru yang dirancang untuk memudahkan pengembang dalam membangun model AI-nya.

Salah satu pembaruan yang signifikan adalah Realtime API, yang memungkinkan pengembang untuk membuat aplikasi suara yang dihasilkan AI menggunakan satu perintah. Alat ini mendukung pengalaman multimoda dengan latensi rendah dengan mengalirkan masukan dan keluaran audio, yang memungkinkan percakapan alami yang mirip dengan Mode Suara Lanjutan ChatGPT. Sebelumnya, pengembang harus menggabungkan beberapa model untuk mencapai pengalaman ini, yang menghasilkan latensi yang lebih tinggi untuk aplikasi waktu nyata seperti percakapan ucapan-ke-ucapan. Dengan kemampuan streaming Realtime API, pengembang kini dapat mengaktifkan interaksi langsung dan alami, seperti asisten suara. API beroperasi pada GPT-4, yang dirilis pada Mei 2024, yang dapat bernalar melalui audio, visual, dan teks secara real time.

Pembaruan lainnya mencakup alat penyempurnaan untuk pengembang, yang memungkinkan mereka untuk menyempurnakan respons AI yang dihasilkan dari gambar dan masukan teks. Penyetelan berbasis gambar meningkatkan kapasitas AI untuk memahami gambar, sehingga meningkatkan kemampuan pencarian visual dan deteksi objek. Proses ini melibatkan umpan balik manusia, di mana contoh respons yang baik dan buruk diberikan kepada AI. Selain itu, OpenAI telah memperkenalkan "distilasi model" dan "caching prompt", yang memungkinkan model yang lebih kecil untuk belajar dari model yang lebih besar dan mengurangi biaya dan waktu pengembangan dengan menggunakan kembali teks yang telah diproses.

Kemampuan canggih model OpenAI merupakan nilai jual yang signifikan, karena sebagian besar pendapatan perusahaan berasal dari bisnis yang membangun aplikasi mereka sendiri di atas teknologi OpenAI. Menurut Reuters, OpenAI memproyeksikan pendapatannya akan naik menjadi $11,6 miliar tahun depan, naik dari perkiraan $3,7 miliar pada tahun 2024.