フィジカルAI開発を加速するNVIDIA Agent Toolkit
NVIDIAが今回発表したフィジカルAIのスキルは、NVIDIA Agent Toolkitの一部として提供されます。このツールキットを使うと、エージェントがNVIDIAの豊富なライブラリ、モデル、フレームワークをフル活用できるようになるんです。これにより、ロボット、自動運転車、工場、研究室におけるデータ生成、シミュレーション、学習、評価、展開といったパイプラインが劇的に高速化されます。
NVIDIAの創業者兼CEOであるジェンスン・フアン氏は、この発表に際して「AIエージェントはソフトウェア開発に革命を起こしており、その影響は今やフィジカルAIにまで及び、輸送、製造、ヘルスケア、ロボットを変革するシステムに拡張しています。エージェントがNVIDIAライブラリ、モデル、フレームワークを直接使用できる場合、フィジカルAI開発は加速し、開発者は将来のロボット、自動運転車、産業用システムを驚異的なペースで構築できるようになります」と語っています。これは、フィジカルAIが私たちの生活や社会に与える影響がどれほど大きいかを示唆していますね。
エージェント対応の強力なツールとスキルたち
NVIDIAは、自社のライブラリ、モデル、フレームワークをエージェントが呼び出し可能なツールへと進化させることで、フィジカルAIスタック全体を最適化しています。具体的には、以下のような強力なツールが含まれています。
-
NVIDIA Cosmos™: 実世界におけるリーズニングと生成のための世界基盤モデル。AIが現実世界を理解し、推論し、新しいものを生み出すための土台となります。
-
NVIDIA Omniverse™ ライブラリ: シミュレーションとデジタルツイン構築のための中心的なプラットフォーム。現実世界を仮想空間に再現し、様々なシミュレーションを行うことができます。
-
NVIDIA Isaac™: ロボティクスシミュレーションとロボット学習に特化したフレームワーク。ロボットの動きをシミュレーションし、効率的な学習をサポートします。
-
NVIDIA Metropolis™: ビジョンAIのためのプラットフォーム。カメラ映像などの視覚情報を解析し、インテリジェントな行動を可能にします。
-
NVIDIA Alpamayo™: 自動運転車開発のためのソリューション。自動運転システムの設計、シミュレーション、検証を支援します。
-
NVIDIA Jetson™ プラットフォーム: エッジAI開発に最適な組み込みシステム。デバイス上で直接AI処理を行うことで、リアルタイム性と効率性を高めます。
これらのツールを開発者が効果的に活用できるよう、NVIDIA Agent Toolkitの一部として「新しいスキル」が発表されました。これは、フィジカルAI開発プロセスにおいて、コーディングエージェントが従うべき反復可能な指示に変換してくれるもの。どのツールを呼び出すべきか、どのような出力を生成すべきか、そして開発者が結果をどう検証できるかといったことを明確にします。
さらに、開発者は「NVIDIA NemoClaw™ ブループリント」と、ポリシーベースのセキュリティとプライバシーガバナンスを提供する「NVIDIA OpenShell™ ランタイム」を使って、これらのスキルを活用し、自律型エージェントを安全に構築し、展開することが可能になります。
NVIDIAのフィジカルAIスキルとツールは、様々な分野でのエージェント開発を加速させます。
ロボティクスとエッジAI
ロボット開発者は、知覚と移動に関する学習データの生成から、シミュレーション、ナビゲーショントレーニングの自動化、ロボット学習の高度化、そしてJetson搭載エッジシステムへの展開向けのチューニングに至るまで、ロボティクス開発パイプライン全体を高速化できます。これにより、より高度で自律的なロボットの開発が加速します。
自動運転車
自動運転車 (AV) 開発者向けには、エージェントに指示を出して、フリートで取得したデータをシミュレーション環境に再構築させたり、フォトリアリスティックな走行シナリオを大規模に生成させたりすることが可能です。さらに、閉ループの強化学習を実行してトレーニングと評価の範囲を拡大できるため、より安全で信頼性の高い自動運転システムの実現に貢献します。
リアルタイムビジョンAIエージェント
自動検査やビデオインテリジェンスの分野では、エージェントスキルが合成トレーニングデータの生成、モデルのファインチューニング、ラベル付けを自動化します。これにより、ライブまたは録画されたビデオを検索、要約、分析するビデオAIエージェントを効率的に構築できるようになります。
産業用AI
産業用ソフトウェア開発者は、これらのスキルを活用して、エンジニアリングデータをデジタルツインシミュレーション向けのコンピューター支援設計 (CAD) アセットに変換できます。手動設定を最小限に抑えながら、大規模なOpenUSDシーンを最適化することも可能になり、工場の効率化や品質向上に役立ちます。
ヘルスケア
臨床環境に自動化を導入する前に、ヘルスケアチームは、病院環境のデジタルツインを作成し、シミュレーションから実環境へのデータ生成、ソフトウェアインザループポリシーテストを通じてエージェントを指導できます。これにより、医療現場でのロボットやAIの導入がより安全かつスムーズに進められるでしょう。
これらのスキルは単独で使うだけでなく、複数組み合わせてより大規模なエージェントシステムに統合することも可能です。開発者は、データ生成、シミュレーション、最適化、推論チューニング、継続的な評価など、複雑なワークフローを調整し、自動化できるようになります。
業界をリードする企業がNVIDIAフィジカルAIテクノロジーを導入
製造、自動運転車、ヘルスケア、産業用ソフトウェアといった様々な分野の業界リーダーたちが、すでにNVIDIAのフィジカルAIライブラリを活用し、自律システムと産業用AIの開発を推進しています。これらのライブラリがエージェント対応になったことで、各社はNVIDIAのスキルをさらに活用し、エージェントが複雑なフィジカルAIワークフロー全体の設定、実行、反復を自動化できるよう支援しています。
電子機器製造分野での成功事例
-
TSMCとPegatronは、外観検査モデルのファインチューニングにNVIDIAの技術を活用。Pegatronでは、欠陥画像生成スキルから生成された合成データを使うことで、モデルのトレーニングと展開にかかる時間をなんと67%も短縮しました。これは驚異的な効率アップですね!
-
Delta Electronicsは、合成欠陥データを生成し、このスキルを活用して金属バスバーの過剰なはんだ付けを検出し、検出率を17%向上させました。品質管理の精度が格段に上がったわけです。
-
Inventecは、Defect Image Generationスキルを統合して、Observation Agentの視覚検査パイプラインを開発。ノートPCの筐体製造における欠陥データの収集作業を30%削減することに成功しました。
-
FoxconnはDeepHowと協力し、このスキルを活用してエラーを早期に検出し、初回合格率を約3%向上させました。製造ラインの歩留まり向上に大きく貢献しています。
自動運転車分野での進化
Li Auto、Afari、DeepRoute.aiといった企業は、ニューラルシーンの再構築とレンダリングにNVIDIA Omniverse NuRecモデルを積極的に活用しています。これにより、1日あたり1,000以上の再構築と30万以上のレンダリングとシミュレーションを生成しており、新しいエージェントスキルリポジトリを活用して、より安全で高性能な自動運転システムの開発を高速化、強化しています。
産業用AI分野での革新
-
Cadence、Dassault Systèmes、Siemens、Synopsysは、NVIDIA Omniverseライブラリとスキルを、エンジニアリングデータ検査、シミュレーション、インタラクティブなデジタルツインに活用しています。これにより、製品設計から製造までのプロセスがより効率的かつ高精度になっています。
-
PTC、MetAI、Lightwheelは、NVIDIA Isaac Sim™ フレームワークとOpenUSDベースのワークフローを活用し、CADデータをシミュレーション対応のアセットと環境に変換しています。これにより、設計段階での検証が強化され、開発期間の短縮が期待されます。
-
SK hynixは、Autonomous Fab 2030ロードマップの一環として、NVIDIA Omniverseを用いた半導体工場のデジタルツインを実装。NVIDIAおよびSK Telecomと協力して、製造業向けのフィジカルAIに特化したNVIDIA Agent Toolkitを検証しています。これは未来のスマートファクトリーの姿を予感させますね。
ロボティクス分野での躍進
1x、Agile Robots、Agility、FieldAI、Hexagon Robotics、NEURA Robotics、Skild AI、Universal Robotsといったロボティクス分野のリーダー企業は、NVIDIAのエージェント対応のフィジカルAIスタックを活用し、データ生成から展開に至るロボティクス開発の高速化を図っています。これにより、様々な分野で活躍するロボットが次々と生まれることでしょう。
ヘルスケア分野での導入
FoxconnとCompalは、病院向けのロボティクスの導入を加速するため、NVIDIA Isaac for Healthcareを活用しています。
-
Foxconnは、複数の病院や長期療養環境でNurabotの展開を拡大し、AI搭載のロボティクスを患者ケアの現場に導入。同時に、新しいスクラブナース協働ロボットを導入し、手術室のワークフローの最適化を支援しています。医療現場での負担軽減と効率化に貢献していますね。
-
Compalは、シミュレーション、AI、実環境での運用を統合し、病院全体のオーケストレーションプラットフォームに向けて、PolyMedXロボットの開発プロセスを推進しています。病院全体がAIとロボットによって最適化される未来が近づいています。
今すぐ試せる!NVIDIAフィジカルAIエージェントツールとスキル
NVIDIAのフィジカルAIエージェントツールとスキルは、すでに以下の場所で公開されており、あらゆるコーディングエージェントで使用できます。
また、合成データ生成向けのエージェントスキルとツールである「Neural Reconstruction」、「Video Augmentation」、「Defect Image Generation」は、NVIDIA Brev上で「Physical AI Launchables」としてすぐに試すことができます。これは、より迅速な合成データの生成と評価を実現するエージェントスキルとツールをあらかじめ構成済みの環境としてまとめたものです。
さらに、Microsoft、CoreWeave および Nebius は、これらのエージェントスキルとツールをクラウドサービスと統合し、開発者が合成データの生成と展開を効率化し、拡張できるようにしています。これは、より多くの開発者がフィジカルAIにアクセスしやすくなる大きな一歩ですね。
NVIDIA GTC Taipeiの基調講演や、フィジカルAIセッションで詳細を確認することもできます。
NVIDIAのフィジカルAIエージェントツールとスキルの登場は、ロボティクス、自動運転、産業用AI、ヘルスケアといった多様な分野でのAI開発を大きく加速させること間違いなしです。これからのフィジカルAIの進化に、ますます目が離せませんね!
より詳しい情報は、NVIDIA公式サイトをご覧ください。