スタビリティAIは、コーディングのための最初のLLMジェネレーティブAI製品であるStableCodeのリリースを発表します

Stability AI announces the release of StableCode, the first LLM generative AI product for coding.

Stability AIは、AIによるコーディング支援でデビューを飾る画期的な製品「StableCode」を発表しました。経験豊富なプログラマーとスキルアップを目指す初心者の両方を支援するために設計されたStableCodeは、実用性と学習サポートをユニークに組み合わせています。

StableCodeの中核は、コーディングの世界を変える3つの異なるモデルにあります。まず、ベースモデルは、BigCodeのスタックデータセット(v1.2)からさまざまなプログラミング言語を使用して厳密なトレーニングを受けました。その後、Python、Go、Java、JavaScript、C、Markdown、C++などの人気のある言語で強化され、プログラミング知識の幅広いリソースが作成されました。このトレーニングプロセスは、高性能コンピューティング(HPC)クラスタによって駆動される5600億のコードトークンによって支えられました。

しかし、イノベーションはそこで止まりませんでした。StableCodeフレームワークの次のレイヤーであるインストラクションモデルは、特定のプログラミングの課題に対応するよう細心の注意を払って調整されました。アルパカ形式の約12万件のインストラクション/レスポンスペアが洗練されたベースモデルによって評価され、洗練されたソリューションが生まれました。このソリューションは、洗練されたプログラミングタスクに優れた対応力を持っています。

StableCodeの真の魅力は、オートコンプリートの提案を再定義するために設計された長いコンテキストウィンドウモデルにあります。16,000トークンのコンテキストウィンドウを持つ前のモデルとは異なり、このモデルはより高い容量を持ち、2〜4倍のコードを収容することができます。これにより、プログラマーは一度に複数の平均サイズのPythonファイル相当を簡単に管理できるようになりました。この拡張された機能は、より複雑なコーディング課題を探求したい初心者にとって大きな利点となります。

StableCodeは、同じスケールのモデルと比較して優れたパフォーマンスを発揮します。Pass@1およびPass@10のメトリックを使用して、確立されたHumanEvalベンチマークに対して評価された結果、StableCodeは実世界のシナリオでその実力を証明しています。

StableCodeのベンチマークスコア
同じサイズのモデル(3B)とのHumanEvalベンチマーク比較

Stability AIのビジョンは、技術をすべての人にアクセス可能にすることに着実に根ざしており、StableCodeはその方向に向けた重要な一歩です。AIによるコーディング支援を民主化することにより、Stability AIはさまざまなバックグラウンドを持つ個人がコーディングを通じて問題解決のための技術の力を活用する扉を開きます。このアプローチにより、グローバルな技術競争の場を均等にし、コーディングリソースへの平等なアクセスを提供することが可能となります。

技術とますます結びついている世界で、StableCodeはシンプルさとエンパワーメントのツールとして浮かび上がります。Cutting-edgeなAIの機能とアクセシビリティへの取り組みを融合させることで、Stability AIは次世代のソフトウェア開発者の道を開拓しています。これらの開発者は単にコーディングを学ぶだけでなく、技術が制約を持たない未来に貢献することになるでしょう。

We will continue to update VoAGI; if you have any questions or suggestions, please contact us!

Share:

Was this article helpful?

93 out of 132 found this helpful

Discover more

機械学習

このAI論文は、「パーシウス」という画期的なフレームワークを紹介していますこれにより、大規模な機械学習やAIモデルのトレーニング時のエネルギー浪費を最大30%削減することが可能です

大きな言語モデル(GPT-3など)は、トレーニングと推論中の計算ニーズにより、相当なエネルギーを必要とします。エネルギー使...

データサイエンス

ビジネス戦略において機械学習を使用する時と使用しない時の選択

それは明らかな質問ではありません初心者のデータサイエンティストにとっては、すぐに機械学習モデルを推進することは間違い...

機械学習

GLIP オブジェクト検出への言語-画像事前学習の導入

今日は、言語-画像の事前学習であるCLIPの素晴らしい成功を基に、物体検出のタスクに拡張した論文であるGLIPについて掘り下げ...

AIニュース

スタビリティAIのスタブルディフュージョンXL 1.0:AI画像生成の画期的なブレークスルー

先進的なAIスタートアップであるStability AIは、Stable Diffusion XL 1.0のローンチにより、再び生成型AIモデルの限界に挑戦...

AI研究

日本からの新しいAI研究は、人間の表情の機械的特性を調査し、アンドロイドが感情をより効果的に認識する方法を理解することを目指しています

人工知能が人間の感情を再現するにつれて、本物の人間の表情の機械的な複雑さを徹底的に調査することが浮かび上がりました。...

AIニュース

「OpenAIがユーザーエクスペリエンスを革新するために6つのエキサイティングなChatGPT機能を発表」

ChatGPTを開発した先進的な企業であるOpenAIは、6つのエキサイティングな新機能を追加し、ユーザーエクスペリエンスを向上さ...