視線方向推定による文字入力とウェブ検索システム

カテゴリ: 部門大会

論文No: OS5-3

グループ名: 【C】2022年電気学会電子・情報・システム部門大会

発行日: 2022/08/24

タイトル(英語): Japanese Text Input and Web Search System by using Eye-gaze Direction Estimation

著者名: 新倉 大希（東京電機大学）,阿部 清彦（東京電機大学）

著者名(英語): Daiki Niikura (Tokyo Denki University),Kiyohiko Abe (Tokyo Denki University)

キーワード: 畳み込みニューラルネットワーク|入力インタフェース|視線入力|瞬目検出|Convolutional neural network|Input interface|Eye-gaze input|Eye-blink detection

要約(日本語): 視線入力インタフェースは、視線のみでコンピュータを操作できることから入力手段としての有用性が示され、多くの研究が行われている。しかし、視線入力システムは導入障壁が高く、特殊なハードウェアを装着して視線方向を追跡しているものが多い。本研究では、ノートパソコンに備え付けられているカメラから取得したデータを、畳み込みニューラルネットワークを用いて識別する。推定された視線方向によってマウスカーソルを動作させることで文字入力アプリケーションを操作し、入力した文字で Google 検索を行う。筆者らが開発してきた上下左右正面の識別モデルと、新たに開発した瞬目の識別モデルを使用し、視線によりマウスカーソルの操作を、瞬目によって決定の操作を行う入力インタフェースを開発した。新たに作成した瞬目の識別モデルの分類精度と文字入力から検索までにかかった時間を報告する。