OpenAI ma obecnie trudności z utrzymaniem tempa innowacji pomimo osiągnięć dzięki nowemu modelowi sztucznej inteligencji o nazwie Orion.
Według raportu The Information najnowszy model sztucznej inteligencji OpenAI – Orion – osiągnął poziom wydajności równy GPT-4 po ukończeniu zaledwie 20% procesu szkoleniowego. Oczekuje się jednak, że różnica w jakości pomiędzy Orionem i GPT-5 znacznie się zmniejszy w porównaniu z poprzednimi skokami z GPT-3 na GPT-4.
Pracownicy OpenAI podzielili się tym, że chociaż Orion radził sobie lepiej z zadaniami językowymi, nie wyróżniał się w zadaniach takich jak programowanie.
Duże ulepszenia zwykle pojawiają się na wczesnych etapach szkolenia AI, podczas gdy późniejsze etapy przynoszą mniejszy wzrost wydajności. Utrudnia to osiągnięcie oczekiwanych znaczących przełomów w pozostałych 80% procesu szkoleniowego.
Pojawienie się Oriona następuje w ważnym momencie, gdy w ostatniej rundzie finansowania OpenAI udało się zebrać 6,6 miliarda dolarów. Mając ten kapitał, OpenAI stawia czoła coraz większym oczekiwaniom inwestorów i poważnym wyzwaniom technicznym w zakresie skalowania technologii. Jeśli wczesne wersje nowego modelu nie spełnią oczekiwań, zdolność OpenAI do pozyskiwania kapitału w przyszłości może napotkać przeszkody.
Ilustracja prawa malejących przychodów przy opracowywaniu kolejnych wersji AI. Źródło: OpenAI
Obecne wyzwanie OpenAI odzwierciedla szerszy problem w całej branży AI: niedobór wysokiej jakości danych szkoleniowych i presję na utrzymanie swojej pozycji w coraz bardziej konkurencyjnej dziedzinie.
Badanie opublikowane w czerwcu przewidywało, że źródła danych tekstowych generowanych przez człowieka wyczerpią się w latach 2026–2032, co utrudni firmom zajmującym się sztuczną inteligencją wydobywanie większej ilości danych z publicznych źródeł danych. W The Information zauważono, że w ostatnim czasie programiści „głównie wykorzystywali” dane do tworzenia przełomowych rozwiązań w zakresie sztucznej inteligencji.
Aby rozwiązać te problemy, OpenAI rozważa zupełnie nową strategię rozwoju AI. W „Informacjach” zauważono, że branża sztucznej inteligencji skupia się na ulepszaniu modeli po wstępnej fazie szkolenia, potencjalnie tworząc inne podejście do skalowania.
Stawiając czoła tym wyzwaniom, OpenAI musi zrównoważyć innowacyjność i praktyczne zastosowania, aby sprostać oczekiwaniom inwestorów. Jednak fakt, że wielu starszych pracowników odchodzi z firmy, może spowodować dodatkowe trudności dla OpenAI na jej drodze do znalezienia stabilności i rozwoju w przyszłości.