特許ウォッチ

公開番号2024079939
公報種別公開特許公報(A)
公開日2024-06-13
出願番号2022192646
出願日2022-12-01
発明の名称画像生成装置
出願人株式会社NTTドコモ
代理人弁理士法人旺知国際特許事務所
主分類G06T 15/20 20110101AFI20240606BHJP(計算;計数)
要約【課題】ボリュメトリックビデオの品質の低下を抑えしつつ、データ量を削減できる画像生成装置を提供する。
【解決手段】本開示の一態様の画像生成装置は、被写体Bを撮像することによって得られる1又は複数の撮像画像を取得する撮像画像取得部1030と、1又は複数の撮像画像に基づいて、被写体Bの3Dモデルを生成する3Dモデル生成部1032と、被写体Bにおける注目部分Kを決定する注目部分決定部1034と、3Dモデルに対し注目部分Kに対応する部分以外を圧縮する圧縮部1036と、圧縮部1036によって圧縮された3Dモデルに基づいて、ボリュメトリックビデオを構成する画像を生成するレンダリング部1038と、を備える。
【選択図】図2
特許請求の範囲【請求項１】
被写体を撮像することによって得られる１又は複数の撮像画像を取得する撮像画像取得部と、
前記１又は複数の撮像画像に基づいて、前記被写体の３Ｄモデルを生成する３Ｄモデル生成部と、
前記被写体における注目部分を決定する注目部分決定部と、
前記３Ｄモデルに対し、前記注目部分に対応する部分以外を圧縮する圧縮部と、
前記圧縮部によって圧縮された３Ｄモデルに基づいて、ボリュメトリックビデオを構成する画像を生成するレンダリング部と、
を備える、画像生成装置。
続きを表示（約 530 文字）【請求項２】
前記被写体が互いに独立した複数の物体を含み、
前記注目部分決定部は、
前記複数の物体の中から１以上の物体を前記注目部分に決定する
請求項１に記載の画像生成装置。
【請求項３】
前記注目部分決定部は、
前記ボリュメトリックビデオの画像を視た１又は複数のユーザの視線に基づいて、前記注目部分を決定する
請求項１に記載の画像生成装置。
【請求項４】
前記注目部分決定部は、
前記被写体の中の予め指定された部分を前記注目部分に決定する
請求項１に記載の画像生成装置。
【請求項５】
前記レンダリング部は、
前記ボリュメトリックビデオの画像を視るユーザの動きに応じた方向に基づいて、前記ボリュメトリックビデオを構成する画像を生成する
請求項１に記載の画像生成装置。
【請求項６】
仮想空間の画像を生成する仮想空間画像生成部と、
前記ボリュメトリックビデオを構成する画像を、前記仮想空間の画像に重畳した画像を含むコンテンツを生成するコンテンツ生成部と、
を備える請求項１に記載の画像生成装置。

発明の詳細な説明【技術分野】
【０００１】
本開示は、画像生成装置に関する。
続きを表示（約 1,600 文字）【背景技術】
【０００２】
立体映像の１つとして、視聴時の視点を任意に変更可能な映像であるボリュメトリックビデオが知られている（例えば、特許文献１参照）。近年では、スポーツ、及びコンサートなどの映像をボリュメトリックビデオによって配信するサービス、及び、仮想空間にボリュメトリックビデオを合成したＶＲ（Virtual Reality）コンテンツを配信するサービスなどが提供されている。
【０００３】
また、特許文献１には、ボリュメトリックビデオのデータをトランスコードすることにより、ボリュメトリックビデオのストリーミング配信におけるビットレートを低減することが示されている。
【先行技術文献】
【特許文献】
【０００４】
特開２０２１－１１１９６１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１のトランスコードなどの信号処理により、ボリュメトリックビデオの全体のデータ量を削減した場合、ボリュメトリックビデオの画質が劣化する。このため、ボリュメトリックビデオの品質が低下することになる。
【０００６】
本開示は、ボリュメトリックビデオの品質の低下を抑えしつつ、データ量を削減できる画像生成装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本開示の１つの態様に係る画像生成装置は、被写体を撮像することによって得られる１又は複数の撮像画像を取得する撮像画像取得部と、前記１又は複数の撮像画像に基づいて、前記被写体の３Ｄモデルを生成する３Ｄモデル生成部と、前記被写体における注目部分を決定する注目部分決定部と、前記３Ｄモデルに対し、前記注目部分に対応する部分以外を圧縮する圧縮部と、前記圧縮部によって圧縮された３Ｄモデルに基づいて、ボリュメトリックビデオを構成する画像を生成するレンダリング部と、を備える。
【発明の効果】
【０００８】
本開示の1つの態様によれば、ボリュメトリックビデオの品質の低下を抑えしつつ、データ量を削減できる。
【図面の簡単な説明】
【０００９】
本開示の実施形態に係る映像コンテンツ配信システムの構成の一例を示す図である。
配信サーバの電気的な構成の一例を示すブロック図である。
ユーザ装置の電気的な構成の一例を示すブロック図である。
配信サーバにおける映像コンテンツの配信処理の一例を示す図である。
配信サーバにおける３Ｄ画像生成処理の一例を示す図である。
３Ｄ画像生成処理によって得られる３Ｄ画像の一例を示す図である。
被写体が互いに独立して存在する複数の人物を含む場合の映像コンテンツの一例を示す図である。
被写体が互いに独立して存在する複数の人物を含む場合の３Ｄ画像の一例を示す図である。
【発明を実施するための形態】
【００１０】
１．実施形態
図１は、本実施形態に係る映像コンテンツ配信システム１の構成の一例を示す図である。
映像コンテンツ配信システム１は、ボリュメトリックビデオを含む映像コンテンツＡを、ネットワークＮＷを通じて配信するシステムであり、映像コンテンツＡを配信するための配信サーバシステム２と、映像コンテンツＡを表示するためのユーザ装置４と、を含む。
ボリュメトリックビデオは、観察者から立体的に視える立体映像によって構成された動画の一態様であり、かつ、観察者が視点を任意に変更できる自由視点映像によって構成された動画の一態様でもある。なお、立体映像は３Ｄ（three-dimensional）映像とも呼ばれる。
（【００１１】以降は省略されています）

関連特許