TOP
|
特許
|
意匠
|
商標
特許ウォッチ
Twitter
他の特許を見る
10個以上の画像は省略されています。
公開番号
2024102378
公報種別
公開特許公報(A)
公開日
2024-07-31
出願番号
2021039720
出願日
2021-03-11
発明の名称
動画像符号化装置、復号装置
出願人
シャープ株式会社
代理人
個人
主分類
H04N
19/117 20140101AFI20240724BHJP(電気通信技術)
要約
【課題】あらかじめ定められたモデルパラメータの集合から入力動画像に適したモデルパラメータを選択し、適用する解像度逆変換を行う場合、複数のモデルパラメータに適さない動画像は低品質になる可能性がある。
【解決手段】
解像度変換を行った画像と第1のモデルパラメータを導出するためのフィルタ情報を符
号化した符号化データを復号する画像復号装置を有し、
前記画像復号装置で復号された画像とフィルタ情報を使用し、入力画像信号と同じ解像度に変換する後処理装置を有する。
また、第1のモデルパラメータを導出するためのフィルタ情報を作成する合成情報作成
装置と、解像度変換などで前処理された画像及び前記合成情報作成装置で作成したフィルタ情報を符号化する画像符号化装置を有する。
【選択図】図13
特許請求の範囲
【請求項1】
第1のモデルパラメータを導出するためのフィルタ情報を復号するヘッダ復号部と、
復号した上記フィルタ情報からニューラルネットワークのモデルパラメータ(第1のモデルパラメータ)を導出するモデル統合部と、
導出された上記モデルパラメータを用いて、ループフィルタ処理もしくは後処理を行う後処理部を備え、
上記モデル統合部は、複数の重み係数と、ニューラルネットワークのモデルパラメータ(第2のモデルパラメータ)から上記第1のモデルパラメータを導出することを特徴とする画像復号装置。
続きを表示(約 890 文字)
【請求項2】
上記モデル統合部は、上記重み係数と上記第2のモデルパラメータとの重みづけ平均から、上記第1のモデルパラメータを導出することを特徴とする請求項1に記載の画像復号装置。
【請求項3】
上記ヘッダ復号部は、非ゼロであるか否かを示すフラグを復号し、上記フラグが非ゼロを示す場合には、重み係数の大きさを復号することにより、上記重み係数を復号し、上記フラグがゼロを示す場合には重み係数を0と導出することを特徴とする請求項1に記載の画像復号装置。
【請求項4】
上記ヘッダ復号部は、負値の上記重み係数を復号することを特徴とする請求項1に記載の画像復号装置。
【請求項5】
上記ヘッダ復号部は、上記ニューラルネットワークの入力画像サイズと出力画像サイズの比を示すスケールファクタを復号することを特徴とする請求項1に記載の画像復号装置。
【請求項6】
上記モデル統合部は、上記スケールファクタにより異なる第2のモデルパラメータを用いて、第1のモデルパラメータを導出する請求項5に記載の画像復号装置。
【請求項7】
上記後処理部は、上記スケールファクタが1倍以外を示す場合に、画像のサイズを変更するニューラルネットワーク処理を一部に含むニューラルネットワークを用いて後処理を行うことを特徴とする請求項5に記載の画像復号装置。
【請求項8】
上記ヘッダ復号部は、後処理で用いられる第1のモデルパラメータのうち、重みづけしないパラメータの数を示す情報を復号することを特徴とする請求項1に記載の画像復号装置。
【請求項9】
入力画像信号に対して解像度変換などの処理を行う前処理装置と、
入力画像信号から第1のモデルパラメータを導出するために必要なフィルタ情報を作成
するフィルタ情報作成装置と、
前記前処理装置で処理された画像と、前記フィルタ情報作成装置で作成したフィルタ情報を符号化する画像符号化装置を有することを特徴とする動画像符号化装置。
発明の詳細な説明
【技術分野】
【0001】
本発明の実施形態は、動画像符号化装置、復号装置に関する。
続きを表示(約 1,600 文字)
【背景技術】
【0002】
動画像を効率的に伝送または記録するために、動画像を符号化することによって符号化データを生成する動画像符号化装置、および、当該符号化データを復号することによって復号画像を生成する動画像復号装置が用いられている。
【0003】
具体的な動画像符号化方式としては、例えば、H.264/AVCやH.265/HEVC(High-Efficiency Video Coding)方式などが挙げられる。
【0004】
このような動画像符号化方式においては、動画像を構成する画像(ピクチャ)は、画像を分割することにより得られるスライス、スライスを分割することにより得られる符号化ツリーユニット(CTU:Coding Tree Unit)、符号化ツリーユニットを分割することで得
られる符号化単位(符号化ユニット(Coding Unit:CU)と呼ばれることもある)、及び
、符号化単位を分割することより得られる変換ユニット(TU:Transform Unit)からなる階層構造により管理され、CU毎に符号化/復号される。
【0005】
また、このような動画像符号化方式においては、通常、入力画像を符号化/復号することによって得られる局所復号画像に基づいて予測画像が生成され、当該予測画像を入力画像(原画像)から減算して得られる予測誤差(「差分画像」または「残差画像」と呼ぶこともある)が符号化される。予測画像の生成方法としては、画面間予測(インター予測)、および、画面内予測(イントラ予測)が挙げられる。
【0006】
また、近年の動画像符号化及び復号の技術として非特許文献1が挙げられる。
【0007】
非特許文献1においては、可変の画像解像度の符号化、復号を可能とするRPR(Reference Picture Re-sampling)技術が規定されている。さらに、非特許文献1のAnnex Dには、
画像の性質や、表示方法、タイミングなどを符号化データと同時に伝送するための付加拡張情報SEIが規定されている。
【0008】
非特許文献2においては、複数のモデルパラメータを用いて動画像を超解像する技術が提案されている。対象とするピクチャに適したモデルパラメータを選択、使用することで動画像の品質を向上させている。また、非特許文献2で使用されているモデルパラメータはニューラルネットワークを用いた高解像度化手法に用いられるニューラルネットワークの重みである。非特許文献2では、従来のアップサンプリングフィルタ、一つのニューラルネットワークを用いた処理と比較して、ボケが少なく、元画像に近い画像を出力することが出来る。
【先行技術文献】
【非特許文献】
【0009】
ITU-T Recommendation H.266 (08/20) 2020-08-29
T. Hori, Z. Gong, H. Watanabe, T. Ikai, T. Chujoh, E. Sasaki, and N. Ito,"CNN-based Super-Resolution Adapted to Quantization Parameters", International Workshop on Advanced Image Technology, IWAIT 2020, No.42, Jan. 2020.
【発明の概要】
【発明が解決しようとする課題】
【0010】
しかしながら、非特許文献1におけるRPRなどを用いて入力画像の少なくとも一部の画
像の解像度を落として符号化・復号し、元の(入力画像と同じ)解像度に戻す場合、ボケが発生しやすいという課題がある。
(【0011】以降は省略されています)
この特許をJ-PlatPatで参照する
関連特許
個人
スピーカーシステム
5日前
個人
デジタル放送受信装置
1か月前
ブラザー工業株式会社
複合機
2か月前
個人
スピーカーキャビネット
1か月前
オンキヨー株式会社
電子機器
2か月前
エムケー精工株式会社
音響装置
1か月前
日本精機株式会社
遠隔操作装置
18日前
日本精機株式会社
遠隔操作装置
25日前
キヤノン株式会社
撮像装置
4日前
キヤノン株式会社
撮像装置
20日前
キヤノン株式会社
操作機器
2か月前
個人
インターネット通信装置
28日前
個人
コメント荒らし判別プログラム
2か月前
個人
配信用音源制作システム
14日前
キヤノン株式会社
画像読取装置
22日前
キヤノン株式会社
画像読取装置
1か月前
富士通株式会社
光信号増幅
1か月前
キヤノン電子株式会社
画像読取システム
1か月前
三菱電機株式会社
中継装置
1か月前
キヤノン電子株式会社
画像読取システム
2か月前
キヤノン電子株式会社
画像読取システム
20日前
キヤノン電子株式会社
画像処理システム
1か月前
株式会社JVCケンウッド
管理装置
14日前
綜合警備保障株式会社
遠隔監視装置
1か月前
アイホン株式会社
インターホン機器
18日前
国立大学法人大阪大学
回路システム
1か月前
株式会社CT
顧客開発推進システム
2か月前
株式会社日立国際電気
無線システム
22日前
アイホン株式会社
インターホン機器
18日前
アイホン株式会社
インターホン機器
1日前
綜合警備保障株式会社
遠隔監視装置
1か月前
綜合警備保障株式会社
遠隔監視装置
1か月前
綜合警備保障株式会社
遠隔監視装置
1か月前
アイホン株式会社
インターホン機器
18日前
ブラザー工業株式会社
画像読取装置
5日前
株式会社日立国際電気
通信システム
1か月前
続きを見る
他の特許を見る