特許ウォッチ

公開番号2024107133
公報種別公開特許公報(A)
公開日2024-08-08
出願番号2024091591,2020140003
出願日2024-06-05,2020-02-07
発明の名称視聴端末、視聴方法、およびプログラム
出願人株式会社ドワンゴ,株式会社バーチャルキャスト
代理人個人,個人,個人,個人
主分類G06T 19/00 20110101AFI20240801BHJP(計算;計数)
要約【課題】HMDを装着したまま、現実空間の実体物を利用可能にする。
【解決手段】没入感のある仮想空間内で行われる授業を視聴するための生徒用端末30は、仮想空間情報に基づいて仮想空間を表示するVR機能部301と、授業を視聴する生徒の手の届く範囲の現実空間を撮影した映像を入力する入力部302を備える。VR機能部301は、映像から仮想空間内の机オブジェクトに対応する机の天板が写っている領域を抽出し、机オブジェクトの天板部分に領域内の映像をはめ込み合成する。
【選択図】図4
特許請求の範囲【請求項１】
仮想空間内のコンテンツを視聴するための視聴端末であって、
仮想空間情報に基づいて前記仮想空間を表示するヘッドマウントディスプレイと、
仮想空間内のアバターを制御するための制御情報を入力するコントローラと、
前記ヘッドマウントディスプレイが備えるカメラと、
前記カメラで撮影した現実空間映像を入力する入力部と、
前記ヘッドマウントディスプレイで検出した操作者の頭の動きと前記制御情報に基づいて前記アバターを制御する制御部と、を備え、
前記仮想空間内に前記アバターを配置し、前記カメラで撮影した現実空間映像を前記アバターの視点から見える仮想空間内にはめ込み合成する、
視聴端末。
続きを表示（約 810 文字）【請求項２】
請求項１に記載の視聴端末であって、
現実空間で検出された平面を前記操作者が選択し、選択された平面に対応する現実空間映像を仮想空間内にはめ込み合成する、
視聴端末。
【請求項３】
仮想空間内のコンテンツを視聴するための視聴端末による視聴方法であって、
前記視聴端末は、
仮想空間情報に基づいて前記仮想空間を表示するヘッドマウントディスプレイと、
仮想空間内のアバターを制御するための制御情報を入力するコントローラと、
前記ヘッドマウントディスプレイが備えるカメラと、を備え、
前記カメラで撮影した現実空間映像を入力し、
前記仮想空間内に前記アバターを配置し、前記ヘッドマウントディスプレイで検出した操作者の頭の動きと前記制御情報に基づいて前記アバターを制御し、
前記カメラで撮影した現実空間映像を前記アバターの視点から見える仮想空間内にはめ込み合成する、
視聴方法。
【請求項４】
コンピュータを、仮想空間内のコンテンツを視聴するための視聴端末として動作させるプログラムであって、
前記視聴端末は、
仮想空間情報に基づいて前記仮想空間を表示するヘッドマウントディスプレイと、
仮想空間内のアバターを制御するための制御情報を入力するコントローラと、
前記ヘッドマウントディスプレイが備えるカメラと、を備え、
前記カメラで撮影した現実空間映像を入力し、
前記仮想空間内に前記アバターを配置し、前記ヘッドマウントディスプレイで検出した操作者の頭の動きと前記制御情報に基づいて前記アバターを制御し、
前記カメラで撮影した現実空間映像を前記アバターの視点から見える仮想空間内にはめ込み合成する処理をコンピュータに実行させる、
プログラム。

発明の詳細な説明【技術分野】
【０００１】
本発明は、仮想空間内で行われる授業を視聴する技術に関する。
続きを表示（約 1,500 文字）【背景技術】
【０００２】
近年、テレビ・ラジオを用いた通信教育だけでなく、情報通信技術（ＩＣＴ）を利用した通信教育システムが広まっている。
【０００３】
ＩＣＴを利用した通信教育システムの一つとして、没入感のある仮想現実（ＶＲ）技術を用い、例えば生徒がヘッドマウントディスプレイ（ＨＭＤ）を装着し、仮想空間内で授業を行うことが考えられる。没入感のある仮想空間内での授業に参加することにより、外界の情報をシャットダウンでき、テレビやパーソナルコンピュータなどを用いたときに比べて授業に集中できる。
【先行技術文献】
【特許文献】
【０００４】
特開２０１２－２０３７８６号公報
特開２０１９－１０１９４５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、ＨＭＤなどにより視界を覆った没入感のある仮想空間では、現実空間の机上にある教科書、ノート、およびパソコンなどの実体物はＨＭＤを外さなければ利用することができない。仮想空間内で行われる授業中に、ＨＭＤを着けたり外したりする動作は面倒である。
【０００６】
ＨＭＤを装着したユーザが下方向を向いたことを検知した場合、ＨＭＤの備えるカメラで撮影した映像を仮想空間内に表示する技術が知られている。この技術を用いると、ＨＭＤを外すことなく現実空間の教科書やノートを使うことができる。しかしながら、従来の方法は、仮想空間内に配置されたオブジェクトを考慮せず、仮想空間の下部に現実空間の映像を表示するものであり、せっかくの没入感が阻害されてしまうという問題がある。
【０００７】
特許文献１には、キャラクタを描画した仮想の画像と現実の画像とを合成し、キャラクタに現実の画像に含まれるフィギュアに合わせたリアリティのある動作をさせる技術が開示されている。特許文献１の技術は、現実空間に仮想のキャラクタを合成するものであって、仮想空間内に現実空間の実体物の映像を合成するものではない。
【０００８】
特許文献２には、仮想空間において手書きの文字を入力する技術が開示されている。特許文献２の技術は、現実空間にある操作板（アクリル板）に対応するオブジェクトを仮想空間内に表示する。ユーザが現実空間において指で操作板に文字を書くと、書いた文字が認識されて仮想空間内のオブジェクトに表示される。ユーザは、現実空間の操作板を用いて手書き文字を仮想空間内に入力できるが、現実空間の操作板に書いた文字が残されるものではなく、現実空間でのノートの作成には利用できない。
【０００９】
本発明は、上記に鑑みてなされたものであり、ＨＭＤを装着したまま、現実空間の実体物を利用可能にすることを目的とする。
【課題を解決するための手段】
【００１０】
本発明の一態様の視聴端末は、仮想空間内のコンテンツを視聴するための視聴端末であって、仮想空間情報に基づいて前記仮想空間を表示するヘッドマウントディスプレイと、仮想空間内のアバターを制御するための制御情報を入力するコントローラと、前記ヘッドマウントディスプレイが備えるカメラと、前記カメラで撮影した現実空間映像を入力する入力部と、前記ヘッドマウントディスプレイで検出した操作者の頭の動きと前記制御情報に基づいて前記アバターを制御する制御部と、を備え、前記仮想空間内に前記アバターを配置し、前記カメラで撮影した現実空間映像を前記アバターの視点から見える仮想空間内にはめ込み合成する。
【発明の効果】
（【００１１】以降は省略されています）

関連特許