協働ロボットワークスペースにおける未知のアクション拒否機能を備えたオープンセットハイブリッドCNN-TCNネットワークによる人間のアクション認識
An open-set hybrid CNN-TCN network for human action recognition with unknown action rejection in collaborative robot workspaces
協働ロボットの安全性を高めるため、未知の人間行動を認識・拒否するオープンセット認識フレームワークが開発された。このフレームワークは、畳み込みニューラルネットワーク(CNN)エンコーダーと、テンポラル畳み込みネットワーク(TCN)ベースの時間集約モジュール、そしてオープンセットスコアリングに基づく未知アクション拒否ゲートを組み合わせている。NTU RGB+D 120データセットを用いた評価では、クロスサブジェクト評価でトップ1精度93.20%、クロスビュー評価で91.00%を達成した。オープンセット検出では、AUROC 0.938、AUPR 0.750を記録し、未知のアクションに対する偽陽性率5.00%、既知のアクションに対する真陽性率91.82%を実現した。システムはNVIDIA Jetson Orin NX 16 GB上で15.0 ms/window、66 fpsで動作し、モデルサイズは42 MBである。この結果は、キャリブレートされた未知アクション拒否が、協働ロボットワークスペースにおける実用的なリアルタイム性能を維持しつつ、安全性を考慮した人間のアクション認識を向上させることを示している。
- 協働ロボットワークスペース向けに、未知の人間行動を認識・拒否するオープンセット認識フレームワークが開発された。CNNエンコーダー、TCNベースの時間集約モジュール、オープンセットスコアリングによる未知アクション拒否ゲートを組み合わせた構成。
- NTU RGB+D 120データセットでの評価で、クロスサブジェクト評価トップ1精度93.20%、クロスビュー評価91.00%を達成。
- オープンセット検出でAUROC 0.938、AUPR 0.750、未知アクションに対する偽陽性率5.00%、既知アクションに対する真陽性率91.82%を記録。
- NVIDIA Jetson Orin NX 16 GB上で15.0 ms/window、66 fps、モデルサイズ42 MBという実用的なリアルタイム性能を確認。
協働ロボットの安全機能を「未知行動の拒否」というソフトウェア側で解決する研究。Jetson Orin NX上で66fps・モデル42MBという実用域の数値は、追加センサや専用ハードなしに既存のエッジAI基盤で安全性を底上げできることを示唆し、協働ロボットの導入障壁(人と同一空間で働く際の安全規制対応コスト)を下げる方向の技術進展として注目。ただし現段階はベンチマーク評価であり、製品化・採用企業の発表ではないため、投資判断には商用化の動きを待つ必要がある。