特許ウォッチ

公開番号2025161351
公報種別公開特許公報(A)
公開日2025-10-24
出願番号2024064464
出願日2024-04-12
発明の名称3Dデータ復号装置および3Dデータ符号化装置
出願人シャープ株式会社
代理人個人
主分類H04N 19/597 20140101AFI20251017BHJP(電気通信技術)
要約【課題】3Dデータの符号化・復号において、ベースメッシュの符号化効率を向上させ、3Dデータを高品質に符号化・復号することを目的とする。
【解決手段】
メッシュデータもしくは点群データを復号する3Dデータ復号装置において、メッシュデータもしくは点群データが符号化された符号化データからアトラス情報を復号するアトラス情報復号部と、上記符号化データと復号されたアトラス情報からベースメッシュを復号するベースメッシュ復号部と、上記符号化データと復号されたアトラス情報からメッシュ変位を復号するメッシュ変位復号部と、復号されたベースメッシュとメッシュ変位からメッシュを復号するメッシュ再構成部とを備え、上記メッシュ変位復号部において、上記アトラス情報復号部で復号されたアトラス情報を用いて上記符号化データからメッシュ変位を復号することを特徴とする3Dデータ復号装置。
【選択図】図3
特許請求の範囲【請求項１】
メッシュデータもしくは点群データを復号する3Dデータ復号装置において、メッシュデータもしくは点群データが符号化された符号化データからアトラス情報を復号するアトラス情報復号部と、上記符号化データと復号されたアトラス情報からベースメッシュを復号するベースメッシュ復号部と、上記符号化データと復号されたアトラス情報からメッシュ変位を復号するメッシュ変位復号部と、復号されたベースメッシュとメッシュ変位からメッシュを復号するメッシュ再構成部とを備え、上記メッシュ変位復号部において、上記アトラス情報復号部で復号されたアトラス情報を用いて上記符号化データからメッシュ変位を復号することを特徴とする3Dデータ復号装置。
続きを表示（約 2,300 文字）【請求項２】
上記メッシュ変位復号部は、上記符号化データのUnit TypeがV3C_GVDであるジオメトリ動画ストリームから復号されるメッシュ変位画像を復号する動画復号部と、位置x, yと成分d, submeshIdxを持つメッシュ変位画像dispQuantCoeffFrameから頂点v、成分d, submeshIdxごとのメッシュ変位dispQuantCoeffArrayを導出する変位アンマッピング部を備え、
上記変位アンマッピング部は、メッシュ変位のコンポーネント毎の高さ、またはメッシュ変位のコンポーネント毎の幅と、ジオメトリの次元数DisplacementDimを示す値-1の変数dとメッシュ変位のサブメッシュ分割数NumSubMeshesを示す値-1の変数submeshIdxから、ジオメトリ画像の座標を導出することにより、上記メッシュ変位を導出することを特徴とする請求項１に記載の3Dデータ復号装置。
【請求項３】
上記アトラス情報は、メッシュ変位をサブメッシュ分割するか否か示すフラグを含み、上記アトラス情報復号部は、メッシュ変位がサブメッシュ分割される場合にサブメッシュ分割されることを表す値を復号し、メッシュ変位がサブメッシュ分割されない場合にサブメッシュ分割されないことを表す値を復号することを特徴とする請求項２に記載の3Dデータ復号装置。
【請求項４】
上記アトラス情報は、サブメッシュ分割したメッシュ変位のサブメッシュ毎の各コンポーネントの高さを示すパラメータを含み、上記アトラス情報復号部は、メッシュ変位をサブメッシュ分割するか否か示すフラグの値に応じて（値が無い場合には常に）、サブメッシュ分割したメッシュ変位のサブメッシュ毎の各コンポーネントの高さを示すパラメータを復号し、上記変位アンマッピング部において、復号したサブメッシュ分割したメッシュ変位のサブメッシュ毎の各コンポーネントの高さから上記メッシュ変位のジオメトリ画像の座標を導出することを特徴とする請求項２または請求項３に記載の3Dデータ復号装置。
【請求項５】
上記アトラス情報は、サブメッシュ分割したメッシュ変位のサブメッシュ毎の各コンポーネントの幅を示すパラメータを含み、上記アトラス情報復号部は、メッシュ変位をサブメッシュ分割するか否か示すフラグの値に応じて（値が無い場合には常に）、サブメッシュ分割したメッシュ変位のサブメッシュ毎の各コンポーネントの幅を示すパラメータを復号し、上記変位アンマッピング部において、復号したサブメッシュ分割したメッシュ変位のサブメッシュ毎の各コンポーネントの幅から上記メッシュ変位のジオメトリ画像の座標を導出することを特徴とする請求項２または請求項３に記載の3Dデータ復号装置。
【請求項６】
メッシュデータもしくは点群データを符号化する3Dデータ符号化装置において、アトラス情報を符号化するアトラス情報符号化部と、アトラス情報を用いてベースメッシュを符号化するベースメッシュ符号化部と、アトラス情報を用いてメッシュ変位を符号化するメッシュ変位符号化部とを備え、上記メッシュ変位符号化部において、上記アトラス情報符号化部で符号化されるアトラス情報を用いてメッシュ変位を符号化することを特徴とする3Dデータ符号化装置。
【請求項７】
上記メッシュ変位符号化部は、頂点v、成分d, submeshIdxを持つメッシュ変位dispQuantCoeffArrayから位置x, yと成分d, submeshIdxを持つメッシュ変位画像dispQuantCoeffFrameを導出する変位マッピング部と、メッシュ変位画像をUnit TypeがV3C_GVDであるジオ
メトリ動画ストリームに符号化する画像符号化部を備え、上記変位マッピング部は、頂点v, 成分d, submeshIdxを持つメッシュ変位を、メッシュ変位のコンポーネント毎の高さ、またはメッシュ変位のコンポーネント毎の幅を用いて、ジオメトリ画像の座標x, yにマッピングすることを特徴とする請求項６に記載の3Dデータ符号化装置。
【請求項８】
上記アトラス情報は、メッシュ変位をサブメッシュ分割するか否か示すフラグを含み、上記アトラス情報符号化部は、メッシュ変位がサブメッシュ分割される場合にサブメッシュ分割されることを表す値を符号化し、メッシュ変位がサブメッシュ分割されない場合にサブメッシュ分割されないことを表す値を符号化することを特徴とする請求項７に記載の3Dデータ符号化装置。
【請求項９】
上記アトラス情報は、サブメッシュ分割したメッシュ変位のサブメッシュ毎の各コンポーネントの高さを示すパラメータを含み、上記アトラス情報符号化部は、メッシュ変位をサブメッシュ分割するか否か示すフラグの値に応じて（値が無い場合には常に）、サブメッシュ分割したメッシュ変位のサブメッシュ毎の各コンポーネントの高さを示すパラメータを符号化することを特徴とする請求項７または請求項８に記載の3Dデータ符号化装置。
【請求項１０】
上記アトラス情報は、サブメッシュ分割したメッシュ変位のサブメッシュ毎の各コンポーネントの幅を示すパラメータを含み、上記アトラス情報符号化部は、メッシュ変位をサブメッシュ分割するか否か示すフラグの値に応じて（値が無い場合には常に）、サブメッシュ分割したメッシュ変位のサブメッシュ毎の各コンポーネントの幅を示すパラメータを符号化することを特徴とする請求項７または請求項８に記載の3Dデータ符号化装置。

発明の詳細な説明【技術分野】
【０００１】
本発明の実施形態は、3Dデータ符号化装置および3Dデータ復号装置に関する。
続きを表示（約 1,800 文字）【背景技術】
【０００２】
3Dデータを効率的に伝送または記録するために、3Dデータを2次元画像に変換し、動画
像符号化方式で符号化し、符号化データを生成する3Dデータ符号化装置、および、当該符号化データから2次元画像を復号して、3Dデータを再構成する3Dデータ復号装置がある。
【０００３】
具体的な3Dデータ符号化方式としては、例えば、MPEG-IのISO/IEC 23090-5 V3C (Volumetric Video-based Coding) and V-PCC (Video-based Point Cloud Compression)が挙げ
られる。V3Cは、点の位置と属性情報から構成されるポイントクラウドを符号化、復号す
ることができる。さらに、ISO/IEC 23090-12 (MPEG Immersive Video、MIV)及び標準化中のISO/IEC 23090-29 (Video-based Dynamic Mesh Coding、V-DMC)により、多視点映像、
メッシュ映像の符号化、復号にも利用される。V-DMC方式は、非特許文献１に最新のドラ
フト文書が開示されている。
【０００４】
これら3Dデータ符号化方式では、3Dデータを構成するジオメトリやアトリビュートを画像としてH.265/HEVC (High Efficiency Video Coding)、H.266/VVC (Versatile Video Coding)のような動画像符号化方式を用いて符号化・復号する。
【０００５】
点群の場合には、ジオメトリ画像は投影面へのデプスであり、アトリビュート画像は、アトリビュートを投影面に投影された画像である。
【０００６】
非特許文献１のような3Dデータ（メッシュ）は、ベースメッシュ、メッシュ変位、テクスチャマッピング画像から構成される。ベースメッシュの符号化はDracoのような頂点符
号化方式が利用できる。メッシュ変位の符号化は、メッシュ変位を2次元化したメッシュ
変位画像を動画コーデックで符号化する方法のほか、算術符号化により直接符号化する方法がある。テクスチャマッピング画像は、アトリビュート画像として動画コーデックで符号化する。動画コーデックは上述のHEVC、VVCを用いることができる。
【先行技術文献】
【非特許文献】
【０００７】
WD 6.0 of V-DMC (MDS23617_WG07_N00822_clean), ISO/IEC JTC 1/SC 29/WG 7 N0822, January 2024
【発明の概要】
【発明が解決しようとする課題】
【０００８】
非特許文献１における3Dデータ符号化方式では、3Dデータ（メッシュ）を構成するメッシュ変位は映像符号化方式を用いてフレーム単位に符号化・復号することができるが、3Dデータ（メッシュ）の再構成単位であるサブメッシュ毎にメッシュ変位を符号化・復号することができないという課題がある。
【０００９】
本発明は、動画像符号化方式を用いた3Dデータの符号化・復号において、メッシュ変位をサブメッシュ毎に符号化・復号することにより、3Dデータを高効率に符号化・復号することを目的とする。
【課題を解決するための手段】
【００１０】
上記の課題を解決するために、本発明の一態様に係る3Dデータ復号装置は、メッシュデータもしくは点群データを復号する3Dデータ復号装置において、メッシュデータもしくは点群データが符号化された符号化データからアトラス情報を復号するアトラス情報復号部と、上記符号化データと復号されたアトラス情報からベースメッシュを復号するベースメッシュ復号部と、上記符号化データと復号されたアトラス情報からメッシュ変位を復号するメッシュ変位復号部と、復号されたベースメッシュとメッシュ変位からメッシュを復号するメッシュ再構成部とを備え、上記メッシュ変位復号部において、上記アトラス情報復号部で復号されたアトラス情報を用いて上記符号化データからメッシュ変位を復号することを特徴とする。
（【００１１】以降は省略されています）

関連特許