Theo Cointelegraph, nhà phát triển trí tuệ nhân tạo OpenAI đã giới thiệu một số bản cập nhật cho các mô hình của mình vào đầu tháng 10, nhằm mục đích cải thiện khả năng giao tiếp và nhận dạng hình ảnh. Vào ngày 1 tháng 10, OpenAI đã công bố bốn công cụ mới được thiết kế để hỗ trợ các nhà phát triển xây dựng trên các mô hình AI của mình.

Một bản cập nhật quan trọng là Realtime API, cho phép các nhà phát triển tạo các ứng dụng giọng nói do AI tạo ra bằng một lời nhắc duy nhất. Công cụ này hỗ trợ các trải nghiệm đa phương thức, độ trễ thấp bằng cách truyền phát đầu vào và đầu ra âm thanh, cho phép các cuộc trò chuyện tự nhiên tương tự như Chế độ giọng nói nâng cao của ChatGPT. Trước đây, các nhà phát triển phải kết hợp nhiều mô hình để đạt được những trải nghiệm này, dẫn đến độ trễ cao hơn cho các ứng dụng thời gian thực như các cuộc trò chuyện giọng nói thành giọng nói. Với khả năng truyền phát của Realtime API, giờ đây các nhà phát triển có thể kích hoạt các tương tác tự nhiên, ngay lập tức, giống như trợ lý giọng nói. API hoạt động trên GPT-4, được phát hành vào tháng 5 năm 2024, có thể lý luận qua âm thanh, hình ảnh và văn bản theo thời gian thực.

Một bản cập nhật khác bao gồm một công cụ tinh chỉnh dành cho các nhà phát triển, cho phép họ cải thiện phản hồi AI được tạo ra từ hình ảnh và đầu vào văn bản. Các bộ tinh chỉnh dựa trên hình ảnh cải thiện khả năng hiểu hình ảnh của AI, do đó tăng cường khả năng tìm kiếm trực quan và phát hiện đối tượng. Quá trình này liên quan đến phản hồi của con người, trong đó các ví dụ về phản hồi tốt và xấu được cung cấp cho AI. Ngoài ra, OpenAI đã giới thiệu "chưng cất mô hình" và "lưu trữ tạm thời", cho phép các mô hình nhỏ hơn học hỏi từ các mô hình lớn hơn và giảm chi phí và thời gian phát triển bằng cách sử dụng lại văn bản đã xử lý.

Khả năng tiên tiến của các mô hình OpenAI là một điểm bán hàng quan trọng, vì một phần đáng kể doanh thu của công ty đến từ các doanh nghiệp xây dựng ứng dụng của riêng họ trên công nghệ của OpenAI. Theo Reuters, OpenAI dự kiến ​​doanh thu của mình sẽ tăng lên 11,6 tỷ đô la vào năm tới, tăng từ mức ước tính 3,7 tỷ đô la vào năm 2024.