Laut Cointelegraph hat der Entwickler künstlicher Intelligenz OpenAI Anfang Oktober mehrere Updates seiner Modelle vorgestellt, die darauf abzielen, die Konversationsfähigkeiten und die Bilderkennung zu verbessern. Am 1. Oktober kündigte OpenAI vier neue Tools an, die Entwicklern die Weiterentwicklung seiner KI-Modelle erleichtern sollen.

Ein wichtiges Update ist die Realtime API, mit der Entwickler KI-generierte Sprachanwendungen mit einer einzigen Eingabeaufforderung erstellen können. Dieses Tool unterstützt latenzarme, multimodale Erlebnisse durch Streaming von Audioein- und -ausgängen und ermöglicht so natürliche Gespräche ähnlich dem erweiterten Sprachmodus von ChatGPT. Bisher mussten Entwickler mehrere Modelle kombinieren, um diese Erlebnisse zu erzielen, was zu höheren Latenzen bei Echtzeitanwendungen wie Sprach-zu-Sprache-Gesprächen führte. Mit der Streaming-Funktion der Realtime API können Entwickler nun unmittelbare, natürliche Interaktionen ermöglichen, ähnlich wie bei Sprachassistenten. Die API läuft auf GPT-4, das im Mai 2024 veröffentlicht wird und in Echtzeit über Audio, Bild und Text hinweg argumentieren kann.

Ein weiteres Update enthält ein Feinabstimmungstool für Entwickler, mit dem sie KI-Reaktionen verbessern können, die aus Bildern und Texteingaben generiert werden. Die bildbasierten Feinabstimmungen verbessern die Fähigkeit der KI, Bilder zu verstehen, und verbessern so die visuellen Such- und Objekterkennungsfunktionen. Dieser Prozess beinhaltet menschliches Feedback, bei dem der KI Beispiele für gute und schlechte Reaktionen bereitgestellt werden. Darüber hinaus hat OpenAI „Modelldestillation“ und „Prompt-Caching“ eingeführt, die es kleineren Modellen ermöglichen, von größeren zu lernen und Entwicklungskosten und -zeit durch die Wiederverwendung bereits verarbeiteter Texte zu reduzieren.

Die fortschrittlichen Fähigkeiten der Modelle von OpenAI sind ein wichtiges Verkaufsargument, da ein erheblicher Teil des Umsatzes des Unternehmens von Unternehmen stammt, die ihre eigenen Anwendungen auf Basis der Technologie von OpenAI entwickeln. Laut Reuters erwartet OpenAI, dass sein Umsatz im nächsten Jahr auf 11,6 Milliarden Dollar steigen wird, gegenüber geschätzten 3,7 Milliarden Dollar im Jahr 2024.