特許ウォッチ

公開番号2024090774
公報種別公開特許公報(A)
公開日2024-07-04
出願番号2022206873
出願日2022-12-23
発明の名称画像処理装置、画像処理装置の制御方法、及びプログラム
出願人キヤノン株式会社
代理人個人
主分類G06F 3/04845 20220101AFI20240627BHJP(計算;計数)
要約【課題】編集に関する操作の後の3次元仮想物体を操作者の意図する状態に移行させる可能性を高めることができる画像処理装置、画像処理装置の制御方法、及びプログラムを提供することを目的とする。
【解決手段】操作者によって3次元仮想物体201の編集に関する操作が行われるヘッドマウントディスプレイ100は、操作の後に第1経路209を表示する第1の表示手段302と、操作の後に第1経路209とは異なる第2経路210を表示する第2の表示手段303と、第1経路209上のいずれかの座標を操作者が選択することを可能とする第1の選択手段304と、第2経路210上のいずれかの座標を操作者が選択することを可能とする第2の選択手段305と、第1の選択手段304または第2の選択手段305で操作者が選択した座標に基づいて3次元仮想物体201の状態を決定する決定手段307と、を備える。
【選択図】図3
特許請求の範囲【請求項１】
操作者によって３次元仮想物体の編集に関する操作が行われる画像処理装置であって、
前記操作の後に第１経路を表示する第１の表示手段と、
前記操作の後に前記第１経路とは異なる第２経路を表示する第２の表示手段と、
前記第１経路上のいずれかの座標を操作者が選択することを可能とする第１の選択手段と、
前記第２経路上のいずれかの座標を操作者が選択することを可能とする第２の選択手段と、
前記第１の選択手段または前記第２の選択手段で操作者が選択した座標に基づいて前記３次元仮想物体の状態を決定する決定手段と、を備えることを特徴とする画像処理装置。
続きを表示（約 890 文字）【請求項２】
前記操作は、前記３次元仮想物体の編集を取り消す操作であることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記３次元仮想物体の編集は、ハンドインタラクションにおける操作者の手の軌跡を用いて行われることを特徴とする請求項１に記載の画像処理装置。
【請求項４】
前記第１の表示手段は、前記軌跡を前記第１経路として表示することを特徴とする請求項３に記載の画像処理装置。
【請求項５】
前記第２の表示手段は、前記軌跡の始点と終点を結んだ直線を前記第２経路として表示することを特徴とする請求項３に記載の画像処理装置。
【請求項６】
前記第２の表示手段は、関数で表された前記軌跡の始点から終点までの経路を前記第２経路として表示することを特徴とする請求項３に記載の画像処理装置。
【請求項７】
前記第２の表示手段は、異なる複数の関数が複合することで表された前記軌跡の始点から終点までの経路を前記第２経路として表示することを特徴とする請求項３に記載の画像処理装置。
【請求項８】
前記第１の表示手段は、前記第１経路の終点から前記第１経路が延長された線分を第１追加経路として表示し、
前記第１追加経路は、前記第１経路の始点から前記終点に前記第１経路に従って進行した際の前記終点における進行方向へ延びていることを特徴とする請求項１に記載の画像処理装置。
【請求項９】
前記第２の表示手段は、前記第２経路の終点から前記第２経路が延長された線分を第２追加経路として表示し、
前記第２追加経路は、前記第２経路の始点から前記終点に前記第２経路に従って進行した際の前記終点における進行方向へ延びていることを特徴とする請求項１に記載の画像処理装置。
【請求項１０】
操作者の手の移動速度に基づいて前記３次元仮想物体の画像を制御する画像制御手段を備えることを特徴とする請求項１に記載の画像処理装置。
（【請求項１１】以降は省略されています）
発明の詳細な説明【技術分野】
【０００１】
本発明は、画像処理装置、画像処理装置の制御方法、及びプログラムに関する。
続きを表示（約 2,500 文字）【背景技術】
【０００２】
近年、拡張現実（ＡＲ）や複合現実（ＭＲ）に代表されるように、現実と仮想を併せ持った環境での体験を操作者に提供する技術が発展している。そのような技術は、操作者に対して、例えば、頭部に装着したヘッドマウントディスプレイ（以下、「ＨＭＤ」という）により、現実世界のビデオ画像に仮想物体を重畳した複合世界を見せることができる。さらに、複合現実（ＭＲ）では、操作者は、各種センサによりとらえられた手の動きによって、あたかも自身の手で３次元仮想物体の移動、拡大・縮小、回転などを行っているような感覚で、３次元仮想物体の編集を行うことができる。とはいうものの、３次元仮想物体を操作者の思い通りに編集することは、一般的に難しい。なぜなら、操作者が手を精密に動かすのには訓練が必要で、また、センサの精度も編集結果に影響するからである。そこで、特許文献１には、操作者が編集の取り消しを望んだ場合に、その取り消し後に移行する編集状態の候補（以下、「候補」という）として、操作者の操作軌跡に基づく履歴の中間状態を表示する技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
特許第５８９８８３０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、操作者の操作軌跡に基づく履歴の中間状態の表示であっても、操作者の意図する候補の表示でない場合があるという問題があった。具体的に説明すると、例えば、３次元空間における操作方法のひとつとして、操作者の手を画像認識して、その手の動きから３次元仮想物体の編集を行うハンドインタラクションを考える。ハンドインタラクションによる編集においては、上述したように、操作者が手を精密に動かすのには訓練が必要であり、また、センサの精度によっては、操作者の手の揺れまでも忠実に再現する場合や、逆に操作者の手の軌跡を忠実に再現できない場合もある。このような状況下では、編集に関する操作の後に３次元仮想物体の状態を過去に遡って表示しても、操作者の意図する候補の表示とならない場合があった。
【０００５】
本発明は、上記の課題に鑑みてなされたものである。本発明は、編集に関する操作の後の３次元仮想物体を操作者の意図する状態に移行させる可能性を高めることができる画像処理装置、画像処理装置の制御方法、及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するために、本発明の画像処理装置は、操作者によって３次元仮想物体の編集に関する操作が行われる画像処理装置であって、前記操作の後に第１経路を表示する第１の表示手段と、前記操作の後に前記第１経路とは異なる第２経路を表示する第２の表示手段と、前記第１経路上のいずれかの座標を操作者が選択することを可能とする第１の選択手段と、前記第２経路上のいずれかの座標を操作者が選択することを可能とする第２の選択手段と、前記第１の選択手段または前記第２の選択手段で操作者が選択した座標に基づいて前記３次元仮想物体の状態を決定する決定手段と、を備えることを特徴とする。
【発明の効果】
【０００７】
本発明によれば、編集に関する操作の後の３次元仮想物体を操作者の意図する状態に移行させる可能性を高めることができる。
【図面の簡単な説明】
【０００８】
ＨＭＤ１００の構成を示す図である。
第１実施形態においてＨＭＤ１００が表示する画像の一例を示す図である。
ＨＭＤ１００のソフトウェア論理構成を示す図である。
第１実施形態における経路情報保持手段３０１の一例を示す図である。
第１実施形態において第１の表示手段３０２を実現するためのフローチャートである。
第１の選択手段３０４を実現するためのフローチャートである。
画像制御手段３０６を実現するためのフローチャートである。
決定手段３０７を実現するためのフローチャートである。
第２実施形態においてＨＭＤ１００が表示する画像の一例を示す図である。
第２実施形態における経路情報保持手段３０１の一例を示す図である。
第２実施形態において第１の表示手段３０２を実現するためのフローチャートである。
【発明を実施するための形態】
【０００９】
以下、本発明の各実施形態について図面を参照しながら詳細に説明する。ただし、以下の各実施形態に記載されている構成はあくまで例示に過ぎず、本発明の範囲は各実施形態に記載されている構成によって限定されることはない。例えば、本発明を構成する各部は、同様の機能を発揮し得る任意の構成のものと置換することができる。また、任意の構成物が付加されていてもよい。また、各実施形態のうちの、任意の２以上の構成（特徴）を組み合わせることもできる。さらに、添付図面においては、同一若しくは同様の構成に同一の参照番号を付し、重複した説明は省略する。
【００１０】
＜第１実施形態＞
以下、図１～図７を参照して、第１実施形態について説明する。図１は、本発明を適用可能な画像処理装置の一例としてのＨＭＤ１００の構成を示す図である。ＨＭＤ１００は、ＣＰＵ１０１、ＲＯＭ１０２、ＲＡＭ１０３、Ｉ／Ｆ１０４、およびバス１０５などを有している。ＣＰＵ１０１、ＲＯＭ１０２、ＲＡＭ１０３、およびＩ／Ｆ１０４のそれぞれは、バス１０５で接続されている。ＣＰＵ１０１はプロセッサ、ＲＯＭ１０２はリードオンリメモリ、ＲＡＭ１０３はランダムアクセスメモリ、Ｉ／Ｆ１０４は外部インタフェースを示している。ＨＭＤ１００の動作は、ＲＯＭ１０２やＲＡＭ１０３に記録されたプログラムの実行によって実現される。
（【００１１】以降は省略されています）

関連特許