TOP
|
特許
|
意匠
|
商標
特許ウォッチ
Twitter
他の特許を見る
公開番号
2024054604
公報種別
公開特許公報(A)
公開日
2024-04-17
出願番号
2022160926
出願日
2022-10-05
発明の名称
撮像装置及びその制御方法とプログラム
出願人
キヤノン株式会社
代理人
個人
主分類
H04N
23/71 20230101AFI20240410BHJP(電気通信技術)
要約
【課題】パノラマ合成される領域ごとに白飛びや黒潰れの発生を低減させた適切なコントラストを有するHDRパノラマ画像を得る。
【解決手段】1回の撮像で異なるゲインを掛けた複数の画像を出力可能な撮像素子102を備える撮像装置100をパンニングさせながら複数回の撮像を行い、複数回の撮像において直前の撮像により得られた画像から次の撮像での露出段数差を決定するための領域を検出し、検出された領域から次の撮像での露出段数差を決定し、決定された露出段数差となるように次の撮像でのゲインを制御し、複数回の撮像が終了した後、1回の撮像で出力される複数の画像を用いて複数回の撮像ごとにHDR合成を行い、HDR合成により得られた画像から所定の領域を切り出して繋げることによりパノラマ画像を生成する。
【選択図】図1
特許請求の範囲
【請求項1】
1回の撮像で異なるゲインを掛けた複数の画像を出力可能な撮像素子を備える撮像装置であって、
前記撮像装置をパンニングさせながら前記撮像素子による複数回の撮像を行うことで1回の撮像ごとに異なるゲインが掛けられた複数の画像を取得する取得手段と、
前記複数回の撮像において、直前の撮像により得られた画像から次の撮像での露出段数差を決定するための領域を検出する検出手段と、
前記検出手段により検出された領域から前記次の撮像での露出段数差を決定する決定手段と、
前記決定手段により決定された露出段数差となるように前記次の撮像での前記異なるゲインを制御する制御手段と、
前記撮像素子による1回の撮像で出力される複数の画像を前記複数回の撮像ごとにHDR合成を行う合成手段と、
前記HDR合成により得られた画像から所定の領域を切り出して繋げることによりパノラマ画像を生成する生成手段と、を備えることを特徴とする撮像装置。
続きを表示(約 1,100 文字)
【請求項2】
前記決定手段は、前記複数回の撮像のうちの最初の撮像での露出段数差を、前記最初の撮影前に前記撮像素子から得られる全撮像範囲の輝度情報に基づいて決定することを特徴とする請求項1に記載の撮像装置。
【請求項3】
前記制御手段は、前記複数回の撮像が1組の適正露出画像とオーバー露出画像を得る撮像となるように前記異なるゲインを制御することを特徴とする請求項1又は2に記載の撮像装置。
【請求項4】
前記制御手段は、前記複数回の撮像が1組の適正露出画像とアンダー露出画像を得る撮像となるように前記異なるゲインを制御することを特徴とする請求項1又は2に記載の撮像装置。
【請求項5】
前記検出手段は、前記パノラマ画像を生成するために切り出される所定の領域とは異なる領域を、前記次の撮像での異なるゲインを決定するための領域とすることを特徴とする請求項1又は2に記載の撮像装置。
【請求項6】
前記パンニングの速度を推定する推定手段を備え、
前記検出手段は、前記露出段数差を決定するための領域として、前記パンニングの速度が大きいほどパンニング方向側の広い領域を検出し、前記パンニングの速度が小さいほど撮像範囲の中心に近い狭い領域を検出することを特徴とする請求項5に記載の撮像装置。
【請求項7】
前記パノラマ画像は、前記複数の画像よりもダイナミックレンジが広いことを特徴する請求項1又は2に記載の撮像装置。
【請求項8】
1回の撮像で異なるゲインを掛けた複数の画像を出力可能な撮像素子を備える撮像装置の制御方法であって、
前記撮像装置をパンニングさせながら前記撮像素子による複数回の撮像を行うことで1回の撮像ごとに異なるゲインが掛けられた複数の画像を取得するステップと、
前記撮像素子による1回の撮像で出力される複数の画像を前記複数回の撮像ごとにHDR合成を行うステップと、
前記HDR合成により得られた画像から所定の領域を切り出して繋げることによりパノラマ画像を生成するステップと、を有し、
前記複数の画像を取得するステップは、
前記複数回の撮像において、直前の撮像により得られた画像から次の撮像での露出段数差を決定するための領域を検出するステップと、
前記検出された領域から前記次の撮像での露出段数差を決定するステップと、
前記決定された露出段数差となるように前記次の撮像での前記異なるゲインを制御するステップと、を有することを特徴とする撮像装置の制御方法。
【請求項9】
コンピュータを請求項1又は2に記載の撮像装置の各手段として機能させることを特徴とするプログラム。
発明の詳細な説明
【技術分野】
【0001】
本発明は、撮像装置及びその制御方法とプログラムに関し、特に、撮像装置をパンニングさせながら撮像を行うことにより得られた複数の静止画からダイナミックレンジを拡大させたパノラマ画像を生成する技術に関する。
続きを表示(約 1,900 文字)
【背景技術】
【0002】
画素単位の出力信号に対して列回路を2つ備えると共に列回路内にある増幅部のゲインを別に備えることにより、ゲインの異なる画像を出力することが可能な撮像素子(DGO(Dual Gain Output Sensor)センサ)が知られている。DGOセンサは、1度の撮像(露光)で異なるゲイン(例えば、HighゲインとLowゲイン)の2枚の画像を出力することができる。
【0003】
そのため、DGOセンサによる撮像で得られる2枚の画像の合成は、ダイナミックレンジを拡大させた画像を得る手法であるHDR合成に適している。また、DGOセンサによる撮像で得られる2枚の画像のHDR合成には、時分割露光によって得た2枚の画像を合成する場合と比較すると、位置合わせ処理が不要であり、また、移動体のぶれを低減させることができるという利点がある。
【0004】
HDR合成は、複数の画像からより広画角なパノラマ画像を生成する際に有用な技術である(例えば、特許文献1,2参照)。これは、パノラマ画像を生成する際には極めて広い領域を撮像する必要があるが、撮像領域が広い場合には撮像領域内での明暗差が大きくなりやすいからである。
【0005】
パノラマ撮影では、一般的に、撮像装置を一方向に動かしながら撮像範囲に重複領域を持たせて、連続して撮像が行われる。こうして得られた画像同士の重複領域で位置合わせを行いつつ、画像同士を連結させる(繋ぎ合わせる)こと(以下「パノラマ合成」という)を行うことによって、パノラマ画像を生成することができる。DGOセンサによる撮像を行って得られるゲインの異なる2枚の画像をHDR合成し、得られたHDR画像を従来手法でパノラマ合成することにより、ダイナミックレンジの広いパノラマ画像(以下「HDRパノラマ画像」という)を生成することができる。
【先行技術文献】
【特許文献】
【0006】
特開2021-90175号公報
特開2017-143390号公報
【発明の概要】
【発明が解決しようとする課題】
【0007】
パノラマ撮影の開始時点では撮像領域全体の明暗差はわからないことが多いため、HDR合成を伴うパノラマ撮影を行う際に、事前に適切な露出段数差を決定することは容易でない。例えば、露出段数差を事前に決定してパノラマ撮影を開始した場合、撮像中に事前に決定した露出段数差で収まらないレンジを撮像する事態となってしまうことで、結果として得られたHDR画像内に白飛び領域が発生してしまうことがある。これに対して、必要以上に露出段数差を大きく設定してHDR合成を伴うパノラマ撮影を実行した場合、HDR画像のコントラストが低下することで画質が低下してしまう。このように、HDR合成を伴うパノラマ撮影を行う際に、撮像開始前に最適な露出段数差を決定することは容易ではない。
【0008】
本発明は、このような事情に鑑みてなされたものであり、パノラマ合成される領域ごとに白飛びや黒潰れの発生を低減させた適切なコントラストを有するHDRパノラマ画像を得ることを可能とする技術を提供することを目的とする。
【課題を解決するための手段】
【0009】
本発明に係る撮像装置は、1回の撮像で異なるゲインを掛けた複数の画像を出力可能な撮像素子を備える撮像装置であって、前記撮像装置をパンニングさせながら前記撮像素子による複数回の撮像を行うことで1回の撮像ごとに異なるゲインが掛けられた複数の画像を取得する取得手段と、前記複数回の撮像において、直前の撮像により得られた画像から次の撮像での露出段数差を決定するための領域を検出する検出手段と、前記検出手段により検出された領域から前記次の撮像での露出段数差を決定する決定手段と、前記決定手段により決定された露出段数差となるように前記次の撮像での前記異なるゲインを制御する制御手段と、前記撮像素子による1回の撮像で出力される複数の画像を前記複数回の撮像ごとにHDR合成を行う合成手段と、前記HDR合成により得られた画像から所定の領域を切り出して繋げることによりパノラマ画像を生成する生成手段と、を備えることを特徴とする。
【発明の効果】
【0010】
本発明によれば、パノラマ合成される領域ごとに白飛びや黒潰れの発生を低減させた適切なコントラストを有するHDRパノラマ画像を得ることが可能となる。
【図面の簡単な説明】
(【0011】以降は省略されています)
この特許をJ-PlatPatで参照する
関連特許
キヤノン株式会社
通信装置
2日前
キヤノン株式会社
現像装置
9日前
キヤノン株式会社
撮像装置
5日前
キヤノン株式会社
現像装置
9日前
キヤノン株式会社
撮像装置
5日前
キヤノン株式会社
記録装置
5日前
キヤノン株式会社
撮像装置
11日前
キヤノン株式会社
撮像装置
11日前
キヤノン株式会社
レンズ鏡筒
12日前
キヤノン株式会社
画像形成装置
6日前
キヤノン株式会社
画像形成装置
2日前
キヤノン株式会社
画像形成装置
6日前
キヤノン株式会社
光電変換装置
3日前
キヤノン株式会社
画像形成装置
3日前
キヤノン株式会社
画像形成装置
5日前
キヤノン株式会社
有機発光素子
5日前
キヤノン株式会社
画像形成装置
10日前
キヤノン株式会社
光電変換装置
4日前
キヤノン株式会社
光電変換装置
2日前
キヤノン株式会社
画像形成装置
11日前
キヤノン株式会社
画像形成装置
2日前
キヤノン株式会社
画像読取装置
13日前
キヤノン株式会社
画像形成装置
12日前
キヤノン株式会社
現像剤補給容器
10日前
キヤノン株式会社
情報処理システム
4日前
キヤノン株式会社
タンパク質架橋剤
6日前
キヤノン株式会社
タンパク質の修飾剤
6日前
キヤノン株式会社
半導体装置及び機器
6日前
キヤノン株式会社
放射線撮影システム
3日前
キヤノン株式会社
発光装置および組立体
4日前
キヤノン株式会社
測距装置および電子機器
11日前
キヤノン株式会社
検出器及び検出システム
11日前
キヤノン株式会社
駆動装置および光学機器
13日前
キヤノン株式会社
光電変換装置および機器
13日前
キヤノン株式会社
レンズ装置及び撮像装置
9日前
キヤノン株式会社
記録装置とその制御方法
4日前
続きを見る
他の特許を見る