特許ウォッチ

公開番号2024056455
公報種別公開特許公報(A)
公開日2024-04-23
出願番号2022163334
出願日2022-10-11
発明の名称情報処理システム、情報処理方法、プログラム
出願人キヤノン株式会社
代理人弁理士法人秀和特許事務所
主分類G06F 3/01 20060101AFI20240416BHJP(計算;計数)
要約【課題】手の動きを検出して、仮想インターフェースを適切に操作可能にする技術を提供する。
【解決手段】情報処理システムは、ユーザの手に保持され、または、装着されたコントローラの慣性情報に基づき前記手の動きを判定する判定手段と、仮想インターフェースを現実空間に配置した仮想空間を表すように表示手段を制御する制御手段と、前記仮想空間において前記仮想インターフェースの位置と前記手の位置とが特定の関係にある場合には、前記判定手段により判定された前記手の動きに基づき前記仮想インターフェースを操作する操作手段と、を有する。
【選択図】図1
特許請求の範囲【請求項１】
ユーザの手に保持され、または、装着されたコントローラの慣性情報に基づき前記手の動きを判定する判定手段と、
仮想インターフェースを現実空間に配置した仮想空間を表すように表示手段を制御する制御手段と、
前記仮想空間において前記仮想インターフェースの位置と前記手の位置とが特定の関係にある場合には、前記判定手段により判定された前記手の動きに基づき前記仮想インターフェースを操作する操作手段と、
を有することを特徴とする情報処理システム。
続きを表示（約 1,200 文字）【請求項２】
前記特定の関係とは、前記仮想インターフェースの位置を含む操作受付範囲に前記手の位置が含まれている関係である、
ことを特徴とする請求項１に記載の情報処理システム。
【請求項３】
前記制御手段は、複数の仮想インターフェースを前記現実空間に配置する場合には、前記複数の仮想インターフェース間の距離に基づき、前記操作受付範囲の大きさを制御する、
ことを特徴とする請求項２に記載の情報処理システム。
【請求項４】
前記制御手段は、前記ユーザの手が撮像された撮像画像に基づき、前記仮想インターフェースの位置と前記手の位置とが前記特定の関係にあるか否かを判定する、
ことを特徴とする請求項１から３のいずれか１項に記載の情報処理システム。
【請求項５】
前記判定手段は、前記仮想インターフェースの位置と前記手の位置とが前記特定の関係にある特定の時点における前記手の位置を初期位置として、前記初期位置からの前記手の動きを前記慣性情報に基づき判定する、
ことを特徴とする請求項４に記載の情報処理システム。
【請求項６】
前記判定手段は、前記ユーザの手が撮像された撮像画像に基づかずに、前記慣性情報に基づき前記手の動きを判定する、
ことを特徴とする請求項１から３のいずれか１項に記載の情報処理システム。
【請求項７】
前記慣性情報は、加速度情報または角速度情報である、
ことを特徴とする請求項１から３のいずれか１項に記載の情報処理システム。
【請求項８】
前記慣性情報は、前記加速度情報であり、
前記判定手段は、前記加速度情報に基づき、前記手の動きを表す前記コントローラの移動情報を判定する、
ことを特徴とする請求項７に記載の情報処理システム。
【請求項９】
前記仮想インターフェースは、特定の平面における前記手の回転に応じて操作可能なダイヤルであり、
前記判定手段は、前記コントローラの移動情報に基づき、前記手の動きのうちの前記手の回転を判定し、
前記操作手段は、前記ダイヤルの位置と前記手の位置とが前記特定の関係にある場合には、前記判定手段により判定された前記手の回転に基づき前記ダイヤルを操作する、
ことを特徴とする請求項８に記載の情報処理システム。
【請求項１０】
前記判定手段は、
前記ダイヤルの位置と前記コントローラの位置と前記ユーザの特定の指の位置との関係に基づき、前記コントローラの移動情報のうちの、前記手の回転以外の前記特定の平面における手の動きに対応する移動情報であるシフト情報を判定して、
前記コントローラの移動情報および前記シフト情報に基づき前記手の回転を判定する、ことを特徴とする請求項９に記載の情報処理システム。
（【請求項１１】以降は省略されています）
発明の詳細な説明【技術分野】
【０００１】
本発明は、情報処理システム、情報処理方法、プログラムに関する。
続きを表示（約 1,700 文字）【背景技術】
【０００２】
従来より、複合現実感（ＭｉｘｅｄＲｅａｌｉｔｙ：ＭＲ）技術や、仮想空間（ＶｉｒｔｕａｌＲｅａｌｉｔｙ：ＶＲ）技術において、ユーザがＣＧモデルを操作する技術が検討されている。また、このような技術では、頭部装着型の表示装置であるＨＭＤ（ＨｅａｄＭｏｕｎｔｅｄＤｉｓｐｌａｙ）が利用されることが多い。
【０００３】
特許文献１では、撮像装置によって手を撮像した撮像画像を用いたモーションキャプチャやＳＬＡＭ（ＳｔｉｍｕｌｔａｎｅｏｕｓＬｏｃａｌｉｚａｔｉｏｎａｎｄＭａｐｐｉｎｇ）などによって、ＣＧモデルを移動させる方法などが記載されている。特許文献２では、ＨＭＤに搭載した装置によって手を撮像した撮像画像などを用いて、ユーザの手の動きをトラッキングして、ＣＧモデルのスイッチを操作する方法について記載されている。
【先行技術文献】
【特許文献】
【０００４】
特開２０２０－１２９１６７号公報
特開２０１８－２０６３４０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上述の技術では、撮像画像に手が写っていない場合には、適切に手の動きを検出して、仮想インターフェースを操作することができないという課題があった。
【０００６】
そこで、本発明は、手の動きを検出して、仮想インターフェースを適切に操作可能にする技術を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の１つの態様は、
ユーザの手に保持され、または、装着されたコントローラの慣性情報に基づき前記手の動きを判定する判定手段と、
仮想インターフェースを現実空間に配置した仮想空間を表すように表示手段を制御する制御手段と、
前記仮想空間において前記仮想インターフェースの位置と前記手の位置とが特定の関係にある場合には、前記判定手段により判定された前記手の動きに基づき前記仮想インターフェースを操作する操作手段と、
を有することを特徴とする情報処理システムである。
【０００８】
本発明の１つの態様は、
ユーザの手に保持され、または、装着されたコントローラの慣性情報に基づき前記手の動きを判定する判定ステップと、
仮想インターフェースを現実空間に配置した仮想空間を表すように表示手段を制御する制御ステップと、
前記仮想空間において前記仮想インターフェースの位置と前記手の位置とが特定の関係にある場合には、前記判定ステップにおいて判定された前記手の動きに基づき前記仮想イ
ンターフェースを操作する操作ステップと、
を有することを特徴とする情報処理方法である。
【発明の効果】
【０００９】
本発明によれば、手の動きを検出して、仮想インターフェースを適切に操作できる。
【図面の簡単な説明】
【００１０】
実施形態１に係る情報処理システムの外観図である。
実施形態１に係る情報処理システムの各構成を示す図である。
実施形態１に係る現実空間と合成画像の関係を示す図である。
実施形態１に係る仮想ダイヤルの操作を説明する図である。
実施形態１に係る仮想ダイヤルの操作処理のフローチャートである。
実施形態１に係る操作受付範囲を説明する図である。
実施形態１に係るシフト情報の計算を説明する図である。
実施形態１に係る仮想スライダーの操作を説明する図である。
実施形態１に係る仮想スライダーの操作処理のフローチャートである。
実施形態１に係る模型を用いたインターフェースを示す図である。
実施形態２に係る仮想ダイヤルの操作処理のフローチャートである。
実施形態３に係る仮想ダイヤルの操作を説明する図である。
実施形態３に係る仮想ダイヤルの操作処理のフローチャートである。
【発明を実施するための形態】
（【００１１】以降は省略されています）

関連特許