マルチモーダルフィードバックは、都市部でのドローン操作における人間の信念更新パフォーマンスを向上させ、認知負荷を低減する
Multimodal feedback enhances human belief updating performance and reduces cognitive load in urban drone operation
都市部での自律型ドローンの監視制御では、オペレーターは不完全で時間変化する手がかりから、局所的な風の変化などの動的な危険性に関する信念を更新する必要がある。インターフェース設計がこの信念更新プロセスをどのように形成するかを調べるため、4つのフィードバック条件(ベースライン情報パネル(Control)、拡張視覚キュー(Visual)、上半身触覚キュー(Haptic)、およびそれらの組み合わせ(Multimodal))が比較された。30人の参加者が、Unityベースの高忠実度VRシミュレーションで自律型ドローンを監視し、90Hzでサンプリングされたアイトラッキングにより客観的な認知負荷指数を導出した。信念更新は変更報告によって捉えられ、反応潜時と、時間分解された正確性を推定するベイジアンベータ二項分布「局所確率」メトリック、およびNASA-TLXで測定された主観的ワークロードを用いて定量化された。反応潜時は、Control(3.23秒)からVisual(2.61秒)、Haptic(1.67秒)、Multimodal(1.08秒)へと単調に減少した。MultimodalはControl(p < 0.001)およびHaptic(p = 0.045)よりも高速であった。時間分解された正確性も同様に向上し、平均局所確率はControl(0.17)からVisual(0.24)およびHaptic(0.22)へと上昇し、Multimodal下では0.43に達した。アイトラッキングの比較では、HapticはVisual(p = 0.0201)およびMultimodal(p = 0.0026)と比較して認知負荷が高いことが示された。これらの結果は、触覚のみのフィードバックで観察された認知負荷の増加なしに、信念更新の速度と信頼性の両方を向上させるマルチモーダルシナジーを示しており、都市部でのドローン運用におけるより安全で信頼性の高い人間と自律システムの連携のためのマルチモーダルインターフェース設計を支持するものである。
- 都市部ドローン監視制御において、マルチモーダル(視覚+触覚)フィードバックが信念更新速度をControl比約3倍(3.23秒→1.08秒)に向上させた。
- マルチモーダルフィードバック下での時間分解正確性(局所確率)がControl(0.17)から0.43に向上した。
- 触覚のみのフィードバックは認知負荷を増加させる一方、マルチモーダルでは認知負荷の増加なく性能向上が確認された。
本研究成果は、都市部ドローン運用の安全性・信頼性向上に直結するマルチモーダルインターフェース設計の有効性を実証しており、ドローンの自律制御・遠隔監視システムを手掛ける企業にとっては、差別化要因となるUI/UX技術の開発方向性を示している。特に、触覚+視覚のマルチモーダルフィードバックが信念更新速度を約3倍に向上させた点は、実運用での事故低減に寄与する可能性が高く、ドローン物流や都市空稜モビリティ(UAM)の商用化が進む中で、ヒューマン・オートメーション・インタラクション(HAI)技術へのニーズ拡大を示唆している。