「Jais アラビア語-英語の大規模言語モデルにおける大きな飛躍」

Jais Major Leap in Arabic-English Large-Scale Language Model

ニュース

Inception、MBZUAI、およびCerebrasによる画期的な共同プロジェクト

Roberto Iriondoによる

New York, NY — 2023年8月30日： Inception（G42の子会社）、Mohamed bin Zayed University of Artificial Intelligence（MBZUAI）（世界初の大学院レベルのAI研究大学）、およびCerebrasは、アラビア語と英語言語処理のタスクに特化した130億パラメータの生成事前トレーニングトランスフォーマ（GPT）モデルであるJaisを開発しました。このモデルは、G42とCerebrasが共同開発した高容量AIスーパーコンピュータであるCondor Galaxy 1（CG-1）プラットフォーム上で設計されました。CG-1は、マルチエクサFLOPの計算能力を提供し、Jaisのトレーニングインフラストラクチャとしての役割を果たしています。

この開発は、G42とCondor Galaxyの持続的なパートナーシップに実用的な影響を与えます。このモデルは専用のライブチャットインターフェースを通じてアクセス可能であり、Hugging Faceモデルリポジトリにも掲載予定です。Jaisは、アラビア語を話すユーザーベース（推定4億人以上）に対応し、この人口に対する高度な言語モデルの供給不足を解消することを目指しています。

アラビア語の大規模言語モデル（LLM）の必要性

Jaisの開発は、25カ国で4億人以上の人々が話すアラビア語に焦点を当て、AIの分野における長年のギャップに対処しています。多くの企業が「AIの民主化」という概念について議論していますが、Jaisプロジェクトは、アラビア語圏に対して具体的でデータに基づいた解決策を提供することで、言葉の生態系を促進することを目指しています。Apache 2.0ライセンスの下でモデルをオープンソース化することで、AIにおける言語的包括性の新基準を設定し、AIで十分に代表されていない他の言語のモデルにもモデルとしての役割を果たすことが期待されています。

• 「50以上の新しい最先端の人工知能（AI）ツール（2023年9月）」
• 「LLMガイド、パート1：BERT」 LLMガイド、パート1：BERTについてのガイドです
• 初めてのDeep Q学習ベースの強化学習エージェントをトレーニングする：ステップバイステップガイド

We will continue to update VoAGI; if you have any questions or suggestions, please contact us!