イーロン・マスク氏は、人工知能企業xAIのチャットボットGrokのアップグレード版が来週リリースされる可能性があると発表した。
この啓示は、xAI のブログ投稿での Grok-1.5 の発表に続き、3 月 29 日のマスクのソーシャル メディア投稿を通じてもたらされました。強化された AI チャットボットは、当初は「初期のテスターとソーシャル メディア プラットフォーム上の既存の Grok ユーザー」がアクセスできるようになります。
さらにマスク氏は、Grok 2の開発が進行中であることをほのめかし、これはあらゆる面で現在のAI標準を上回ると予想している。
Grok-1.5
Grok-1.5 は Grok-1 AI モデルの高度なバージョンであり、推論機能が向上し、コンテキストの長さは 128,000 トークンです。
xAI の分析によると、同社の高度なチャットボットのパフォーマンスは、特にコーディングや数学関連のタスクにおいて大幅に向上している。しかし、Google の Gemini Pro 1.5 や OpenAI の GPT-4 と比べると劣っている。
同社によれば:
「Grok-1.5 は、小学校から高校までの幅広い競技問題をカバーする 2 つの数学ベンチマークである MATH ベンチマークで 50.6% のスコア、GSM8K ベンチマークで 90% のスコアを達成しました。さらに、コード生成と問題解決能力を評価する HumanEval ベンチマークでは 74.1% のスコアを達成しました。」
さらに、Grok-1.5 は大幅に長いドキュメントからの情報を利用することができ、モデルはコンテキスト ウィンドウが拡大しても指示に従う機能を維持しながら、より長く複雑なプロンプトを処理できます。
同社は次のように付け加えた。
「Grok-1.5 は、JAX、Rust、Kubernetes に基づくカスタム分散トレーニング フレームワーク上に構築されています。このトレーニング スタックにより、チームは最小限の労力でアイデアのプロトタイプを作成し、新しいアーキテクチャを大規模にトレーニングできます。」
Grok はオープンソースです
今月初め、xAI は Grok-1 の基本コードをオープンソース化することで大きな一歩を踏み出しました。
この決定は、マスク氏がかつて共同設立した組織であるOpenAIに対して起こした訴訟への対応として生じた。マスク氏は、OpenAIが株主の利益よりもオープンソースモデルの開発を優先するという当初の約束から逸脱したと主張した。
一方、xAIは、公開されたコードは「2023年10月に終了したGrok-1事前トレーニング段階の生の基本モデルチェックポイントです。つまり、このモデルは対話などの特定のアプリケーション向けに微調整されていません」と述べ、モデルはApache License 2.0に基づいてライセンスされていると付け加えた。