TOP
|
特許
|
意匠
|
商標
特許ウォッチ
Twitter
他の特許を見る
公開番号
2024103522
公報種別
公開特許公報(A)
公開日
2024-08-01
出願番号
2024079864,2021507159
出願日
2024-05-16,2020-03-03
発明の名称
情報処理装置、情報処理方法、及びコンピュータが読み取り可能な記録媒体
出願人
ソニーグループ株式会社
代理人
弁理士法人南青山国際特許事務所
主分類
G06F
3/0346 20130101AFI20240725BHJP(計算;計数)
要約
【課題】視線を用いた選択操作の操作性を向上すること。
【解決手段】情報処理装置は、眼球情報取得部と、視線推定部と、表示制御部と、ジェスチャー情報取得部と、モード切替部とを具備する。眼球情報取得部は、第1のセンサからユーザの眼球の位置姿勢情報を取得する。視線推定部は、眼球の位置姿勢情報に基づいて視線ベクトルを推定する。表示制御部は、視線ベクトルに基づいた注視状態を示すガイド画像を表示するよう表示装置を制御する。ジェスチャー情報取得部は、第2のセンサから眼球の位置姿勢情報とは異なるジェスチャー情報を取得する。モード切替部は、ガイド画像に関するユーザのモード切替入力に応じて、眼球の位置姿勢情報をガイド画像に反映する第1のモードと、ジェスチャー情報に基づいて注視状態を補正する第2のモードとを切り替える。
【選択図】図6
特許請求の範囲
【請求項1】
第1のセンサからユーザの眼球の位置姿勢情報を取得する眼球情報取得部と、
前記眼球の位置姿勢情報に基づいて前記ユーザの視線ベクトルを推定する視線推定部と、
前記推定された視線ベクトルに基づいた注視状態を示すガイド画像を表示するよう表示装置を制御する表示制御部と、
第2のセンサから前記眼球の位置姿勢情報とは異なる前記ユーザのジェスチャー情報を取得するジェスチャー情報取得部と、
前記ガイド画像に関する前記ユーザのモード切替入力に応じて、前記眼球の位置姿勢情報を前記ガイド画像に反映する第1のモードと、前記ジェスチャー情報に基づいて前記注視状態を補正する第2のモードとを切り替えるモード切替部と
を具備する情報処理装置。
続きを表示(約 1,200 文字)
【請求項2】
請求項1に記載の情報処理装置であって、
前記ガイド画像は、前記注視状態として、前記視線ベクトルに基づく注視位置または前記注視位置を含む注視オブジェクトの少なくとも一方を示す画像であり、
前記表示制御部は、前記第2のモードが実行された場合に、前記ジェスチャー情報に基づいて前記注視位置を補正する
情報処理装置。
【請求項3】
請求項2に記載の情報処理装置であって、
前記表示制御部は、前記第2のモードが実行された場合に、前記注視位置が補正された前記ガイド画像を表示するよう前記表示装置を制御する
情報処理装置。
【請求項4】
請求項2に記載の情報処理装置であって、
前記表示制御部は、前記ジェスチャー情報に基づいて前記視線ベクトルを補正することで前記注視位置を補正する
情報処理装置。
【請求項5】
請求項2に記載の情報処理装置であって、
前記ジェスチャー情報は、前記ユーザが頭部を回転させるヘッドジェスチャーに関する情報を含み、
前記表示制御部は、前記第2のモードが実行された場合に、前記ユーザの頭部の回転に応じて前記注視位置が補正された前記ガイド画像を表示するよう前記表示装置を制御する
情報処理装置。
【請求項6】
請求項5に記載の情報処理装置であって、
前記表示制御部は、前記ユーザの頭部の回転方向に前記視線ベクトルを回転させる
情報処理装置。
【請求項7】
請求項5に記載の情報処理装置であって、
前記表示制御部は、前記ユーザの頭部の回転角度に応じて、第1の範囲に収まるように前記視線ベクトルの回転角度を設定する
情報処理装置。
【請求項8】
請求項7に記載の情報処理装置であって、
前記表示制御部は、前記ユーザの頭部の回転角度が第2の範囲を超えた場合に、前記視線ベクトルの回転角度を前記第1の範囲の最大角度に設定する
情報処理装置。
【請求項9】
請求項8に記載の情報処理装置であって、
前記第2の範囲は、前記視線ベクトルの推定精度、前記視線ベクトルの較正データ、前記注視オブジェクトの候補となる候補オブジェクトの密集度、及び前記第2のモードが実行されたタイミングでの前記ユーザの頭部の姿勢の少なくとも1つに基づいて設定される
情報処理装置。
【請求項10】
請求項7に記載の情報処理装置であって、
前記ユーザの頭部の回転角度は、前記第2のモードが実行されたタイミングでの前記ユーザの頭部の回転位置を基準として算出される
情報処理装置。
(【請求項11】以降は省略されています)
発明の詳細な説明
【技術分野】
【0001】
本技術は、ユーザの視線を用いた操作等を行う情報処理装置、情報処理方法、及びコンピュータが読み取り可能な記録媒体に関する。
続きを表示(約 2,100 文字)
【背景技術】
【0002】
従来、ユーザの視線を検出する技術が開発されている。例えば、ユーザの視線の検出結果を用いることで、ユーザが見ている対象等を選択するといった、視線による選択操作等が可能となる。
【0003】
特許文献1には、ユーザの視線を用いてアイコンを選択することが可能な頭部装着型端末について記載されている。この頭部装着型端末には、ユーザの首の動きを検出するジャイロセンサが搭載される。例えばジャイロセンサにより検出されたユーザの首の動きに応じて、表示領域に表示されているアイコンの表示位置や間隔等が、視線で選択し易くなるように変更される。これにより、視線入力によるアイコンの選択等が容易になる(特許文献1の明細書段落[0021][0029][0024][0036]図2等)。
【先行技術文献】
【特許文献】
【0004】
国際公開第2015/170520号
【発明の概要】
【発明が解決しようとする課題】
【0005】
視線を用いて対象を選択する技術は、アミューズメント、教育、ショッピングといった様々な分野での応用が期待されており、視線を用いた選択操作の操作性を向上する技術が求められている。
【0006】
以上のような事情に鑑み、本技術の目的は、視線を用いた選択操作の操作性を向上することが可能な情報処理装置、情報処理方法、及びコンピュータが読み取り可能な記録媒体を提供することにある。
【課題を解決するための手段】
【0007】
上記目的を達成するため、本技術の一形態に係る情報処理装置は、眼球情報取得部と、視線推定部と、表示制御部と、ジェスチャー情報取得部と、モード切替部とを具備する。
前記眼球情報取得部は、第1のセンサからユーザの眼球の位置姿勢情報を取得する。
前記視線推定部は、前記眼球の位置姿勢情報に基づいて前記ユーザの視線ベクトルを推定する。
前記表示制御部は、前記推定された視線ベクトルに基づいた注視状態を示すガイド画像を表示するよう表示装置を制御する。
前記ジェスチャー情報取得部は、第2のセンサから前記眼球の位置姿勢情報とは異なる前記ユーザのジェスチャー情報を取得する。
前記モード切替部は、前記ガイド画像に関する前記ユーザのモード切替入力に応じて、前記眼球の位置姿勢情報を前記ガイド画像に反映する第1のモードと、前記ジェスチャー情報に基づいて前記注視状態を補正する第2のモードとを切り替える。
【0008】
この情報処理装置では、ユーザの眼球の位置姿勢情報が取得され、眼球の位置姿勢情報に基づいて視線ベクトルが推定される。この視線ベクトルに基づいた注視状態を示すガイド画像が表示装置に表示される。またガイド画像に関するモードを切り替えるモード切替入力に応じて、眼球の位置姿勢情報をガイド画像に反映する第1のモードと、眼球の位置姿勢情報とは異なるジェスチャー情報に基づいて注視状態を補正する第2のモードとが切り替えられる。これにより、視線を用いた選択操作の操作性を向上することが可能となる。
【0009】
本技術の一形態に係る情報処理方法は、コンピュータシステムにより実行される情報処理方法であって、第1のセンサからユーザの眼球の位置姿勢情報を取得することを含む。
前記眼球の位置姿勢情報に基づいて前記ユーザの視線ベクトルが推定される。
前記推定された視線ベクトルに基づいた注視状態を示すガイド画像を表示するよう表示装置が制御される。
第2のセンサから前記眼球の位置姿勢情報とは異なる前記ユーザのジェスチャー情報が取得される。
前記ガイド画像に関する前記ユーザのモード切替入力に応じて、前記眼球の位置姿勢情報を前記ガイド画像に反映する第1のモードと、前記ジェスチャー情報に基づいて前記注視状態を補正する第2のモードとが切り替えられる。
【0010】
本技術の一形態に係るコンピュータが読み取り可能な記録媒体は、コンピュータシステムに以下のステップを実行させるプログラムを記録する。
第1のセンサからユーザの眼球の位置姿勢情報を取得するステップ。
前記眼球の位置姿勢情報に基づいて前記ユーザの視線ベクトルを推定するステップ。
前記推定された視線ベクトルに基づいた注視状態を示すガイド画像を表示するよう表示装置を制御するステップ。
第2のセンサから前記眼球の位置姿勢情報とは異なる前記ユーザのジェスチャー情報を取得するステップと、
前記ガイド画像に関する前記ユーザのモード切替入力に応じて、前記眼球の位置姿勢情報を前記ガイド画像に反映する第1のモードと、前記ジェスチャー情報に基づいて前記注視状態を補正する第2のモードとを切り替えるステップと
を実行させるプログラムが記録されているコンピュータが読み取り可能な記録媒体。
【図面の簡単な説明】
(【0011】以降は省略されています)
この特許をJ-PlatPatで参照する
関連特許
個人
防災情報システム
18日前
個人
情報処理システム
5日前
個人
指先受の付いたマウス。
1日前
個人
介護者指名システム
12日前
コクヨ株式会社
収納ケース
1か月前
有限会社マイコム
制御盤のAI見積
25日前
キヤノン株式会社
情報処理装置
27日前
中国電力株式会社
販売支援方法
1か月前
株式会社Haul
採用支援方法
13日前
個人
施解錠制御システム
1か月前
個人
生活困窮者相談業務支援システム
1か月前
エムケー精工株式会社
洗車場システム
14日前
個人
災害情報表示システム
22日前
株式会社Asuka
本人認証方法
15日前
株式会社にしがき
会員権システム
19日前
トヨタ自動車株式会社
表認識方法
19日前
トヨタ自動車株式会社
画像処理装置
1か月前
トヨタ自動車株式会社
画像処理装置
18日前
トヨタ自動車株式会社
画像処理装置
14日前
トヨタ自動車株式会社
情報処理装置
19日前
株式会社JVCケンウッド
処理装置
18日前
個人
人流データ取得システム
1か月前
トヨタ自動車株式会社
画像処理装置
1か月前
株式会社mov
情報処理装置
12日前
株式会社野村総合研究所
提案推薦装置
1か月前
個人
オフラインバックアップシステム
7日前
セコム工業株式会社
物品管理具
1か月前
株式会社アイラボ
ICタグ広告
4日前
株式会社INFIY
情報処理システム
28日前
長屋印刷株式会社
思い出の品保管方法
18日前
個人
情報蓄積・検索利用システム
14日前
個人
画面ビルダ
26日前
株式会社ベルク
製品管理システム
1か月前
トヨタ自動車株式会社
電力供給システム
11日前
株式会社ラング
画像表示システム
26日前
個人
ネットワークコンピュータシステム
11日前
続きを見る
他の特許を見る