「NVIDIAは創造的AIの台頭に対応するため、ロボティクスプラットフォームを拡大する」

「NVIDIA、創造的AIに対応するためにロボティクスプラットフォームを拡大」

強力な生成型AIモデルとクラウドネイティブのAPIおよびマイクロサービスがエッジに導入されています。

生成型AIは、トランスフォーマーモデルと大規模な言語モデルの力をほぼすべての業界にもたらしています。その範囲は、エッジ、ロボット、物流システムなどの領域にも及んでおり、欠陥検出、リアルタイム資産追跡、自律計画とナビゲーション、人間とロボットの相互作用などに活用されています。

NVIDIAは本日、エッジAIとロボティクスのためのNVIDIA Jetsonプラットフォーム上の2つのフレームワークを大幅に拡張しました。NVIDIA Isaac ROSロボティクスフレームワークが一般提供開始され、次にJetson上でのNVIDIA Metropolisの拡張が控えています。

AIアプリケーションの開発と展開をエッジで加速するために、NVIDIAは最新のオープンソース生成型AIモデルを利用するためのJetson生成型AIラボを開設しました。

• 「AutoGen：次世代の大規模言語モデルアプリケーションの動力源」
• 「大型言語モデル（LLM）のマスターに至る7つのステップ」
• AIテクノロジーを使ってあなたの牛を見守る

Amazon Web Services、Cisco、John Deere、Medtronic、Pepsico、Siemensなど、120万人以上の開発者と1万以上の顧客がNVIDIA AIとJetsonプラットフォームを選んでいます。

急速に進化するAIの世界では、ますます複雑なシナリオに対応するため、開発者はエッジ向けのAIアプリケーションを構築するために長い開発サイクルに直面しています。環境、製造ライン、お客様の自動化ニーズの変化に対応するために、ロボットとAIシステムを素早く再プログラムすることは時間がかかり、専門的なスキルが必要です。

生成型AIは、トレーニング中に明示的に見たことのないものを特定するモデルのゼロショット学習を提供し、自然言語インターフェースによってエッジでのAIの開発、展開、管理を簡素化します。

AIの景色を変える

生成型AIは、ヒトの言語プロンプトを理解してモデルの変更を行うことで使いやすさを大幅に向上させます。これらのAIモデルは、検出、セグメンテーション、トラッキング、検索、さらには再プログラムなどにおいて、従来の畳み込みニューラルネットワークに基づくモデルを上回る柔軟性を持っています。

ABI Researchによると、生成型AIは2033年までに世界の製造業の収益に105億ドルを追加すると予測されています。

「生成型AIは、従来の方法では実現不可能であったよりも優れた汎化能力、使いやすさ、高い精度により、エッジでのAIの展開を大幅に加速させます」とNVIDIAのエンベデッド・エッジコンピューティング担当バイスプレジデントのDeepu Talla氏は述べています。「これはJetson上でMetropolisとIsaacのフレームワークの最大拡張ですが、トランスフォーマーモデルと生成型AIの力を組み合わせることで、このニーズに対応しています。」

エッジでの生成型AI開発

Jetson生成型AIラボでは、最適化されたツールとチュートリアルにアクセスして、オープンソースのLLMs、ディフュージョンモデルを展開するための支援を開発者に提供しています。それには、インタラクティブな見事な画像を生成するためのビジョン言語モデル（VLM）やビジョントランスフォーマー（ViTs）も含まれ、ビジョンAIと自然言語処理を組み合わせてシーンの包括的な理解が可能です。

開発者は、ViTやビジョン基盤モデルなどの基礎的なモデルのカスタマイズや微調整を行い、非常に少量のデータで高精度なビジョンAIモデルを作成することができる、NVIDIA NV-DINOv2やOpenCLIPなどのパブリックモデルのような基盤モデルをカスタマイズするためにNVIDIA TAO Toolkitを使用することもできます。また、新たなトランスフォーマーベースの欠陥検査モデルであるVisualChangeNetもTAOに追加されました。

新しいMetropolisとIsaacフレームワークの活用

NVIDIA Metropolisは、エンタープライズが世界クラスのビジョンAI対応ソリューションを採用し、重要なオペレーション効率と安全性の問題を改善するのをより簡単かつ費用効果的にします。このプラットフォームは、開発者が迅速に複雑なビジョンベースのアプリケーションを開発するための強力なアプリケーションプログラミングインターフェースとマイクロサービスのコレクションを提供しています。

1,000社以上の企業、BMWグループ、Pepsico、Kroger、Tyson Foods、Infosys、そしてSiemensなどを含む企業がNVIDIA Metropolisの開発者ツールを利用して、ビジョンAIによるインターネット・オブ・シングス、センサー処理、運用の課題を解決しており、採用率は加速しています。これらのツールは、ビジョンAIアプリケーションの構築を目指す人々によって、1,000,000回以上ダウンロードされています。

開発者が迅速にスケーラブルなビジョンAIアプリケーションを構築し展開するため、NVIDIA Jetson上で拡張されたMetropolis APIおよびマイクロサービスのセットが年末までに提供されます。

数百の顧客が、農業、倉庫自動化、最後の一マイル配送、サービスロボティクスなど、さまざまなドメインで高性能のロボティクスソリューションを開発するためにNVIDIA Isaacプラットフォームを使用しています。

ROSCon 2023では、NVIDIAはIsaac ROSとIsaac Simソフトウェアの新しいリリースにより、知覚（perception）とシミュレーション機能の大幅な改善を発表しました。広く採用されているオープンソースのロボットオペレーティングシステム（ROS）をベースにしたIsaac ROSは、自動化に知覚力をもたらし、物体に目と耳を与えます。視覚補正を含むGPUアクセラレーションされたGEM（Generalized Estimating Equations）のパワーを利用することで、視覚オドメトリ、深度知覚、3Dシーン再構築、位置推定、計画などのツールを使用することで、ロボティクス開発者は多様なアプリケーションに合わせた迅速なロボティクスソリューションのエンジニアリングが可能になります。

最新のIsaac ROS 2.0リリースにより、Isaac ROSは製品レベルまで到達し、開発者はJetsonを使用して高性能なロボティクスソリューションを市場に提供することができます。

「ROSは成長し、ロボットコミュニティ全体に対してオープンソースソフトウェアを提供し続けています」と、オープンソース・ロボティクス・ファウンデーションのCTOであるジェフ・ビッグス氏は述べています。「このリリースで導入されたNVIDIAの新しいプレビルドROS 2パッケージにより、ROS 2は広範なNVIDIA Jetson開発者コミュニティで簡単に利用できるようになり、その成長を加速させるでしょう。」

新たな参照AIワークフローを提供する

製品レベルのAIソリューションの開発には、特定のユースケースに合わせたAIモデルの開発とトレーニングの最適化、プラットフォーム上での堅牢なセキュリティ機能の実装、アプリケーションのオーケストレーション、フリートの管理、シームレスなエッジからクラウドへの通信の確立などが含まれます。

NVIDIAは、MetropolisとIsaacフレームワークに基づくAI参照ワークフローのカリキュレーションを発表しました。開発者はワークフロー全体をすばやく採用するか、個々のコンポーネントを選択的に統合することができ、開発時間とコストの大幅な削減が可能です。3つの異なるAIワークフローには、ネットワークビデオ録画、自動光学検査、自律型モバイルロボットが含まれています。

「広範で多様なユーザーベースとパートナーエコシステムを持つNVIDIA Jetsonは、エッジにおけるロボティクスとAIの革命を推進してきました」と、Tirias Researchの主任アナリストであるジム・マクレガー氏は述べています。「アプリケーション要件がますます複雑化するにつれ、エッジ展開の作成を簡素化し加速するプラットフォームへの基礎的なシフトが必要です。NVIDIAによるこの重要なソフトウェア拡張により、開発者は新しいマルチセンサーモデルと生成AI機能にアクセスできるようになります。」

さらなる展望

NVIDIAは、エッジAIソリューションの構築時にすべての開発者が必要とする基本的な機能であるシステムサービスのコレクションを発表しました。これらのサービスはワークフローへの統合を容易にし、開発者がゼロから作り上げる手間を省くことができます。

年末までに利用可能になると予想される新しいNVIDIA JetPack 6により、AI開発者はJetson Linux全体のアップグレードを必要とせずに、計算の最前線に位置することができます。これにより、開発タイムラインが大幅に短縮され、Jetson Linuxに依存することなく開発が進められます。JetPack 6は、Canonicalの最適化された認定Ubuntu、Wind River Linux、Concurrent Real-Time Redhawk Linux、およびさまざまなYoctoベースのディストリビューションとの共同の取り組みを活用して、Linuxベースのディストリビューションの選択肢を拡大します。

パートナーエコシステムはプラットフォームの拡大から恩恵を受ける

Jetsonパートナーエコシステムは、ハードウェア、AIソフトウェア、アプリケーション設計サービス、センサー、接続性、および開発者ツールなど、幅広いサポートを提供しています。これらのNVIDIAパートナーネットワークのイノベーターは、市場で販売されている多くの製品の構成要素やサブシステムを提供する重要な役割を果たしています。

最新のリリースにより、JetsonのパートナーはAIを採用することで市場参入までの時間を短縮し、パフォーマンスと機能性を向上させることができます。

また、独立したソフトウェアベンダーのパートナーは、Jetson向けの製品を拡充することも可能です。

NVIDIA Jetsonを使用した「Bringing Generative AI to Life with NVIDIA Jetson」ウェビナーには、11月7日（火）午前9時（米国太平洋標準時）に参加してください。ここで発表されるニュース、JetsonでLLMsおよびVLMsを展開するための高速APIや量子化メソッド、TensorRTを使用したビジョン・トランスフォーマーの最適化など、テクニカルエキスパートが詳細に解説します。

NVIDIA Metropolisの早期アクセスにはこちらからサインアップしてください。

 

 

 

 

 

 

 

We will continue to update VoAGI; if you have any questions or suggestions, please contact us!