HyperAIHyperAI

Command Palette

Search for a command to run...

GesturePod:白杖利用者向けのデバイス内ジェスチャーによるインタラクションの実現

Vivek Seshadri Shishir G. Patil Nadeem Shaheer Manik Varma Don Dennis Prateek Jain Harsha Vardhan Simhadri Chirag Pabbaraju

概要

視覚障害を有する人々がナビゲーションにホワイトキャンパスを使用する際、スマートフォンなどのデバイスと同時に操作することは困難である。これまでの専用デバイスの使用放棄に関する先行研究を踏まえ、本研究では、視覚障害者が既に保有するホワイトキャンパスを用いてジェスチャーを実行することで、スマートフォン上でタスクをトリガーする、新しいタッチフリー型のインタラクション方式を提案する。本研究では、任意のホワイトキャンパスに簡単に取り付けられる「GesturePod」というデバイスを提示する。GesturePodは、キャンパスを用いたジェスチャーを検出する機能を備えており、ユーザーはスマートフォンを手に取らなくても、ポケットやバッグのまま、タッチなしで日常的な操作を実行できる。本研究では、このデバイスの開発における課題と設計上の選択について議論する。さらに、ジェスチャー認識モデルの学習とデプロイに適した新しい効率的な機械学習パイプラインを提案する。ラボ内での実験では、GesturePodが92%のジェスチャー認識精度を達成し、スマートフォンの一般的な操作をより迅速に行えることが示された。また、実際の屋外環境での実証実験(イン・ワイルドスタディ)から、GesturePodは特に制約のある屋外環境において、視覚障害者によるスマートフォンアクセスを改善する有望なツールであることが示唆された。


AIでAIを構築

アイデアからローンチまで — 無料のAIコーディング支援、すぐに使える環境、最高のGPU価格でAI開発を加速。

AI コーディング補助
すぐに使える GPU
最適な料金体系

HyperAI Newsletters

最新情報を購読する
北京時間 毎週月曜日の午前9時 に、その週の最新情報をメールでお届けします
メール配信サービスは MailChimp によって提供されています