特許ウォッチ

公開番号2025023402
公報種別公開特許公報(A)
公開日2025-02-17
出願番号2023127489
出願日2023-08-04
発明の名称映像合成装置、映像合成方法、及びプログラム
出願人株式会社計数技研
代理人個人,個人
主分類G09B 5/02 20060101AFI20250207BHJP(教育;暗号方法;表示;広告;シール)
要約【課題】ユーザが動作させる動作対象を、参照映像に含まれる模倣対象に追従させるための支援を行うことができる映像合成装置を提供する。
【解決手段】映像合成装置1は、ユーザが動作を模倣する対象である模倣対象の動作の映像である参照映像が記憶される記憶部11と、ユーザが動作させる対象である動作対象の動作の映像である自己映像を取得する映像取得部12と、参照映像と自己映像とを合成した合成映像を生成する合成部13と、参照映像に含まれる模倣対象、及び自己映像に含まれる動作対象に基づいて、動作対象を模倣対象に追従させるためのガイドを生成するガイド生成部14と、合成映像とガイドとを出力する出力部15とを備える。
【選択図】図1
特許請求の範囲【請求項１】
ユーザが動作を模倣する対象である模倣対象の動作の映像である参照映像が記憶される記憶部と、
前記ユーザが動作させる対象である動作対象の動作の映像である自己映像を取得する映像取得部と、
前記参照映像と前記自己映像とを合成した合成映像を生成する合成部と、
前記参照映像に含まれる前記模倣対象、及び前記自己映像に含まれる前記動作対象に基づいて、前記動作対象を前記模倣対象に追従させるためのガイドを生成するガイド生成部と、
前記合成映像と前記ガイドとを出力する出力部と、を備えた映像合成装置。
続きを表示（約 1,400 文字）【請求項２】
前記ガイド生成部は、前記参照映像における前記模倣対象の大きさと、前記自己映像における前記動作対象の大きさとの関係に応じて、ユーザを基準とした前後方向における追従方向を示すガイドを生成する、請求項１記載の映像合成装置。
【請求項３】
前記ガイド生成部は、前記参照映像における前記模倣対象の代表位置と、前記自己映像における前記動作対象の代表位置との位置関係に応じて、前記ユーザを基準とした上下方向及び左右方向における追従方向を示すガイドを生成する、請求項１記載の映像合成装置。
【請求項４】
前記ガイド生成部は、前記参照映像における前記模倣対象の複数の特徴点を用いて、前記模倣対象と前記参照映像を撮影したカメラとの第１の相対的な位置関係を取得し、前記自己映像における前記動作対象の複数の特徴点を用いて、前記動作対象と前記自己映像を撮影したカメラとの第２の相対的な位置関係を取得し、前記第１及び第２の相対的な位置関係を用いて、前記模倣対象と前記動作対象との第３の相対的な位置関係を取得し、当該第３の相対的な位置関係を用いてガイドを生成する、請求項１記載の映像合成装置。
【請求項５】
前記模倣対象及び前記動作対象は、形状が変化するものであり、
前記ガイド生成部は、前記参照映像に含まれる前記模倣対象の形状と、前記自己映像に含まれる前記動作対象の形状とを用いて、前記動作対象の形状を前記模倣対象の形状に追従させるためのガイドを生成する、請求項１記載の映像合成装置。
【請求項６】
前記ガイド生成部は、前記ガイドであるガイド図形を生成し、
前記合成部は、前記ガイド図形を含む合成映像を生成し、
前記出力部は、前記ガイド図形を含む前記合成映像を出力する、請求項１から請求項５のいずれか記載の映像合成装置。
【請求項７】
ユーザが動作を模倣する対象である模倣対象の動作の映像である参照映像が記憶される記憶部と、映像取得部と、合成部と、ガイド生成部と、出力部とを用いて処理される映像合成方法であって、
前記映像取得部が、前記ユーザが動作させる対象である動作対象の動作の映像である自己映像を取得するステップと、
前記合成部が、前記参照映像と前記自己映像とを合成した合成映像を生成するステップと、
前記ガイド生成部が、前記参照映像に含まれる前記模倣対象、及び前記自己映像に含まれる前記動作対象に基づいて、前記動作対象を前記模倣対象に追従させるためのガイドを生成するステップと、
前記出力部が、前記合成映像と前記ガイドとを出力するステップと、を備えた映像合成方法。
【請求項８】
ユーザが動作を模倣する対象である模倣対象の動作の映像である参照映像が記憶される記憶部にアクセス可能なコンピュータを、
前記ユーザが動作させる対象である動作対象の動作の映像である自己映像を取得する映像取得部、
前記参照映像と前記自己映像とを合成した合成映像を生成する合成部、
前記参照映像に含まれる前記模倣対象、及び前記自己映像に含まれる前記動作対象に基づいて、前記動作対象を前記模倣対象に追従させるためのガイドを生成するガイド生成部、
前記合成映像と前記ガイドとを出力する出力部として機能させるためのプログラム。

発明の詳細な説明【技術分野】
【０００１】
本発明は、模倣対象の映像である参照映像と、ユーザによって動作される動作対象の映像である自己映像とを合成して出力する映像合成装置等に関する。
続きを表示（約 1,300 文字）【背景技術】
【０００２】
従来、手術などの動きの学習のために、学習者が模倣する対象となる模倣対象の動作の映像である参照映像と、学習者の動作の映像である自己映像とを表示する学習支援装置が知られている（例えば、特許文献１参照）。このような表示を参照することにより、学習者は、模倣対象の動作と同じ動作を行うためのトレーニングを行うことができる。
【先行技術文献】
【特許文献】
【０００３】
特開２０１４－０７１４４３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、学習者が初心者である場合には、自分が動作させている動作対象を、参照映像に含まれる模倣対象の動作に適切に追従させることができず、学習の効果が低下することがあり得る。
【０００５】
本発明は、上記課題を解決するためになされたものであり、ユーザが動作させる動作対象を、参照映像に含まれる模倣対象に追従させるための支援を行うことができる映像合成装置等を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明の一態様による映像合成装置は、ユーザが動作を模倣する対象である模倣対象の動作の映像である参照映像が記憶される記憶部と、ユーザが動作させる対象である動作対象の動作の映像である自己映像を取得する映像取得部と、参照映像と自己映像とを合成した合成映像を生成する合成部と、参照映像に含まれる模倣対象、及び自己映像に含まれる動作対象に基づいて、動作対象を模倣対象に追従させるためのガイドを生成するガイド生成部と、合成映像とガイドとを出力する出力部と、を備えたものである。
【０００７】
このような構成により、動作対象を模倣対象に追従させるためのガイドを出力することによって、ユーザが動作させる動作対象を、参照映像に含まれる模倣対象に追従させるための支援を行うことができる。ユーザは、そのガイドを参考にすることによって、より容易に動作対象を模倣対象に追従させることができ、学習の効果を高めることができる。
【０００８】
また、本発明の一態様による映像合成装置では、ガイド生成部は、参照映像における模倣対象の大きさと、自己映像における動作対象の大きさとの関係に応じて、ユーザを基準とした前後方向における追従方向を示すガイドを生成してもよい。
【０００９】
このような構成により、ユーザは、ガイドを参考にすることによって、ユーザを基準とした前後方向について、動作対象を模倣対象に追従させることができるようになる。
【００１０】
また、本発明の一態様による映像合成装置では、ガイド生成部は、参照映像における模倣対象の代表位置と、自己映像における動作対象の代表位置との位置関係に応じて、ユーザを基準とした上下方向及び左右方向における追従方向を示すガイドを生成してもよい。
（【００１１】以降は省略されています）

関連特許