NVIDIA、DGX SparkとReachy MiniでAIエージェントを実体化

NVIDIAはCES 2026で、AIエージェント構築のためのオープンモデル群(Nemotron LLM、Isaac GR00T VLA、Cosmosワールド財団モデル)を発表した。さらに、DGX SparkとReachy Miniを組み合わせることで、デスク上で動作し、プライベートにデータを処理できるパーソナルAIエージェントを構築するデモンストレーションを行った。このシステムは、NVIDIA Nemotron 3 Nano(推論)、NVIDIA Nemotron Nano 2 VL(ビジョン)、ElevenLabs(音声合成)といったオープンモデルと、Reachy Mini(またはそのシミュレーション)を連携させる。構築にはNVIDIA NeMo Agent Toolkitが使用され、ローカルまたはクラウドデプロイメントが可能。Reachy Miniはセンサー、アクチュエーター、APIへのアクセスを提供し、Pythonから直接制御できる。システムは、推論、ビジョン、ツール連携を担うコンポーネントで構成され、NeMo Agent Toolkitはモデル間の連携、ルーティング、プロファイリング、最適化を支援する。記事では、リポジトリのクローン、APIキーの設定、NeMo Agent ToolkitのAPIサーバー起動、curlコマンドによる動作確認、ツール呼び出し、ルーティングポリシーの設定、Pipecatフレームワークを用いたリアルタイム連携(カメラ映像、音声認識、音声合成、ロボット制御)の手順を解説している。最終的に、Pipecat Playgroundを通じて、テキストやビジョンに関するプロンプトでエージェントと対話できることを示している。このアプローチは、プライベートでカスタマイズ可能なAIシステム基盤を提供し、データフローやロボットの知覚・行動を可視化できる。