特許ウォッチ

公開番号2025109387
公報種別公開特許公報(A)
公開日2025-07-25
出願番号2024003243
出願日2024-01-12
発明の名称画像生成装置、画像生成方法及び、プログラム
出願人日本電気株式会社
代理人個人,個人
主分類G06T 19/00 20110101AFI20250717BHJP(計算;計数)
要約【課題】固定された照明環境下の教師画像の撮影後において、3次元シーンの自由視点の2次元画像を生成する際に、2次元画像上において照明環境及び光沢を制御することを可能とすることに貢献する、画像生成装置を提供する。
【解決手段】画像生成装置は、空間構造および光学情報を学習済みの、3次元シーンの自由視点の2次元画像を生成する画像生成装置であって、学習済みの光学学習推論部と反射方位演算器を含み、光学学習推論部は、方位情報を受け付け、少なくとも方位情報を利用して、光学的な情報を取り出し、反射方位演算器は、角度制御パラメータを入力として受け付け、学習済みの空間構造に基づく再構成空間内の少なくとも部分領域への観察方位と角度制御パラメータの演算を行って、方位情報を生成し、光学学習推論部へ方位情報を出力する。
【選択図】図1
特許請求の範囲【請求項１】
空間構造および光学情報を学習済みの、３次元シーンの自由視点の２次元画像を生成する画像生成装置であって、
前記学習済みの光学学習推論部と反射方位演算器を含み、
前記光学学習推論部は、
方位情報を受け付け、
少なくとも前記方位情報を利用して、光学的な情報を取り出し、
前記反射方位演算器は、
角度制御パラメータを入力として受け付け、
前記学習済みの前記空間構造に基づく再構成空間内の少なくとも部分領域への観察方位と前記角度制御パラメータの演算を行って、前記方位情報を生成し、
前記光学学習推論部へ前記方位情報を出力する、画像生成装置。
続きを表示（約 910 文字）【請求項２】
前記角度制御パラメータは、基準角度からの角度のずれ量を指定する、請求項１に記載の画像生成装置。
【請求項３】
前記角度制御パラメータは、外部から入力される、請求項１に記載の画像生成装置。
【請求項４】
前記角度制御パラメータは、外部からグラフィックユーザインタフェースを介して入力される、請求項１に記載の画像生成装置。
【請求項５】
前記部分領域を指定する有効領域指定は、外部から入力される、請求項１に記載の画像生成装置。
【請求項６】
前記有効領域指定に基づいて前記部分領域を判定する、領域判定部をさらに含む、請求項５に記載の画像生成装置。
【請求項７】
前記部分領域は、自動で決定される、請求項１に記載の画像生成装置。
【請求項８】
前記演算は、前記観察方位と前記角度制御パラメータの加算である、請求項１に記載の画像生成装置。
【請求項９】
空間構造および光学情報を学習済みの、３次元シーンの自由視点の２次元画像を生成する画像生成装置のコンピュータが、
方位情報を受け付け、
少なくとも前記方位情報を利用して、光学的な情報を取り出し、
角度制御パラメータを入力として受け付け、
前記学習済みの前記空間構造に基づく再構成空間内の少なくとも部分領域への観察方位と前記角度制御パラメータの演算を行って、前記方位情報を生成する、ことを含む画像生成方法。
【請求項１０】
空間構造および光学情報を学習済みの、３次元シーンの自由視点の２次元画像を生成する画像生成装置のコンピュータに、
方位情報を受け付ける処理と、
少なくとも前記方位情報を利用して、光学的な情報を取り出す処理と、
角度制御パラメータを入力として受け付ける処理と、
前記学習済みの前記空間構造に基づく再構成空間内の少なくとも部分領域への観察方位と前記角度制御パラメータの演算を行って、前記方位情報を生成する処理を、
実行させるプログラム。

発明の詳細な説明【技術分野】
【０００１】
本発明は、画像生成装置、画像生成方法及び、プログラムに関する。
続きを表示（約 1,300 文字）【背景技術】
【０００２】
３次元シーンの２次元画像を表示することに関しては、以下のような文献が挙げられる。
【０００３】
特許文献１は、機械学習により三次元モデリングを行う画像処理装置に関するものである。
【先行技術文献】
【特許文献】
【０００４】
特開２０２３－６６７０５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
以下の分析は、本発明者によって与えられたものである。
【０００６】
学習型３次元モデリング技術であるＮｅＲＦ（ＮｅｕｒａｌＲａｄｉａｎｃｅＦｉｅｌｄｓ）は、３次元（３Ｄ）形状を扱う広い分野で爆発的に広がりつつある。ＮｅＲＦでは、カメラを使用して撮影した３次元シーンの２次元画像を、教師画像として入力するが、通常は、例えば、撮影時の３次元空間の照明の位置のような教師画像の撮影環境は、固定されている。
【０００７】
また、撮影環境の設定、例えば、照明の設定や、カメラアングルの設定等には、時間がかかるので、撮影環境を再度設定して取り直すことが難しく、プロカメラマンのような専門家が必要となる場合も多い。
【０００８】
本発明は、固定された照明環境下の教師画像の撮影後において、３次元シーンの自由視点の２次元画像を生成する際に、２次元画像上において照明環境及び光沢を制御することを可能とすることに貢献する、画像生成装置、画像生成方法及び、プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明の第１の視点によれば、空間構造および光学情報を学習済みの、３次元シーンの自由視点の２次元画像を生成する画像生成装置であって、
前記学習済みの光学学習推論部と反射方位演算器を含み、
前記光学学習推論部は、
方位情報を受け付け、
少なくとも前記方位情報を利用して、光学的な情報を取り出し、
前記反射方位演算器は、
角度制御パラメータを入力として受け付け、
前記学習済みの前記空間構造に基づく再構成空間内の少なくとも部分領域への観察方位と前記角度制御パラメータの演算を行って、前記方位情報を生成し、
前記光学学習推論部へ前記方位情報を出力する、画像生成装置を、提供できる。
【００１０】
本発明の第２の視点によれば、空間構造および光学情報を学習済みの、３次元シーンの自由視点の２次元画像を生成する画像生成装置のコンピュータが、
方位情報を受け付け、
少なくとも前記方位情報を利用して、光学的な情報を取り出し、
角度制御パラメータを入力として受け付け、
前記学習済みの前記空間構造に基づく再構成空間内の少なくとも部分領域への観察方位と前記角度制御パラメータの演算を行って、前記方位情報を生成する、ことを含む画像生成方法を、提供できる。本方法は、上記の方法を実行するコンピュータという、特定の機械に結びつけられている。
（【００１１】以降は省略されています）

関連特許