dm_control 連続制御のためのソフトウェアとタスク

'dm_control ソフトウェアとタスクは連続制御のために使用されます'

概要

dm_controlソフトウェアのチュートリアルを含むパブリックなColabノートブックはこちらで利用可能です。

インフラストラクチャ
  • 自動生成されたMuJoCo Pythonラッパーは、基礎となるエンジンへの完全なアクセスを提供します。
  • PyMJCFは、Pythonエンティティオブジェクトの階層がMuJoCoモデルの要素に対応するドキュメントオブジェクトモデルです。
  • Composerは、エンティティをシーンに組み合わせ、観測、報酬、終了条件、一般的なゲームロジックを定義するための高レベルの「ゲームエンジン」です。
  • Locomotionフレームワークは、アリーナやウォーカーなどの抽象的なComposerエンティティを導入し、ロコモーションに似たタスクを容易にします。
環境
  • Control Suiteには、新しい四足歩行ロボットや犬の環境が含まれています。
  • サッカーを含むいくつかのロコモーションタスク。
  • スナップトゥギャザーのブロックを使用した単腕ロボットの操作タスク。

ハイライト

名前付きインデックス

MuJoCoのすべてのモデル要素に対する名前のサポートを利用することで、文字列を使用して配列にインデックスやスライスすることができます。例えば、次のように書く代わりに:

“fingertip_height = physics.data.geom_xpos[7, 2]”

…わかりにくくて壊れやすい数値のインデックスを使用せずに、次のように書くことができます:

“fingertip_height = physics.named.data.geom_xpos[‘fingertip’, ‘z’]”

これにより、より堅牢で読みやすいコードベースが実現されます。

PyMJCF

PyMJCFライブラリは、MuJoCoモデルに1対1の対応関係を持つPythonオブジェクトの階層を作成します。これにより、モデル同士を接続するattach()メソッドが導入されます。例えば、チュートリアルでは、足をボディに接続し、クリーチャーをシーンに組み合わせて手続き的に多足クリーチャーを作成します。

Composer

Composerは「ゲームエンジン」フレームワークであり、ランタイム関数呼び出しの特定の順序を定義し、報酬、終了条件、観測の機能を抽象化します。これらの抽象化により、有用なサブモジュールを作成することができます:

composer.Observable: 任意のセンサにノイズ、遅延、バッファリング、フィルタリングを追加できる抽象的な観測ラッパー。

composer.Variation: シミュレーション量をランダム化するためのツールセットであり、エージェントの強化とモデルのバリエーションによるシム・トゥ・リアルが可能です。

コンポーザーコールバックのライフサイクルを示す図。丸い長方形は、タスクやエンティティが実装するコールバックを表しています。青い長方形は、組み込みのコンポーザー操作を表しています。

ロコモーション

ロコモーションフレームワークでは、以下の抽象化が導入されました:

Walker: エゴ中心フレームへのベクトルの射影など、共通のロコモーション関連メソッドを持つ制御可能なエンティティ。

Arena: ウォーカーを配置し、実行するタスクが与えられる自己スケーリングのランダムなシーン。

例えば、たった4つの関数呼び出しで、ヒューマノイドウォーカー、WallsCorridorアリーナをインスタンス化し、RunThroughCorridorタスクを組み合わせることができます。

新しいControl Suiteドメイン

四足歩行
  • 安定したボディを持つ汎用の四足歩行ドメイン。
  • いくつかの純粋なロコモーションタスク(例:歩行、走行)。
  • 粗い地形のナビゲーションを必要とするエスケープタスク。
  • ボールドリブリングを必要とするフェッチタスク。
  • leo3Dmodelsから依頼されたスケルトンを基にした緻密なモデル。
  • 口での精密な掴みを必要とする難しいボールフェッチタスク。
ショーケース

DeepMindのdm_controlを使用したタスクの高速なモンタージュ。

We will continue to update VoAGI; if you have any questions or suggestions, please contact us!

Share:

Was this article helpful?

93 out of 132 found this helpful

Discover more

AIテクノロジー

「カナダでウェブサイトを立ち上げる方法」

ウェブサイトを立ち上げることは、カナダでオンラインプレゼンスを確立しようとする個人、企業、組織にとって重要なステップ...

AIテクノロジー

「AIライティング革命のナビゲーション:ChatGPTの影響についての考察」

ChatGPT デジタル時代における文章作成の変革 今となっては、私はよく問われます「AI Time Journalの記事を書くためにChatGP...

AIテクノロジー

「プリントオンデマンドのドロップシッピング:芸術への情熱を収益化する」

需要に応じた印刷および配送は、電子商取引の領域で画期的なビジネスモデルとして現れましたこれにより、在庫や前払いの投資...

AIテクノロジー

「ジェネレーティブAI(2024)の10の重要ポイント」

「2023年、生成AIの世界に飛び込み、その応用、影響、そして将来の課題についての洞察を得ましょう」

AIテクノロジー

2023年のトップ5の建築学校

「新しい人生の章として学生としての生活を始める準備をする際、人々は申し込む学校を探します個人の基準があり、それぞれの...

AIテクノロジー

「GPTの進化を探る ChatGPT-4の新機能と、コンバーショナルAIの再定義」

以前のバージョンをベースに、多様性と倫理的考慮を特徴とするConversational AIのChatGPT-4の進化を探求し、新たな可能性を...