すべての人に一次情報を
EgoThumbは、単一の手に追加の親指を装着することで、掴みやすさと操作精度を向上させるシステムです。機械設計は、前腕にアクチュエーターを配置したコンパクトな二腱式指を採用し、先端部の重さを抑えつつ関節の正確な制御を可能にしています。
視覚情報は、手の表面に設置された魚眼型カメラで取得します。このカメラは手と対象物を同時に映し、手の意図を認識するための入力データを供給します。
制御ポリシーは、視覚・関節情報を入力とし、拡散政策(diffusion policy)に基づく学習モデルで今後の関節動作を予測します。
実験では、デモンストレーターによるトライアルで、立方体の拾取、キャップのねじ切り、お茶のかき混ぜ、ボールの転送の4タスクで平均成功率0.90を達成しました。
参加者のうち、アプリケーション未経験者でも90%以上の成功率を示し、特に立方体とキャップで0.73以上の成功率を維持しました。
しかし、作業領域を拡大すると、かき混ぜタスクで0.53、ボール転送タスクで0.17と低下し、長期的計画を必要とする作業で性能が劣ることが確認されました。
高速手速ではカメラのモーションブラーが発生し、精度が低下する可能性があります。
また、カメラが手の表面から突出しているため装着感に影響があり、よりコンパクトなセンサー構成が必要と示唆されています。
総じて、EgoThumbは視覚誘導型の余分な親指を用いて人間手の操作拡張を実現しますが、長い計画が必要な作業や高速操作への対応に課題が残ります。