特許ウォッチ

公開番号2025165140
公報種別公開特許公報(A)
公開日2025-11-04
出願番号2024069064
出願日2024-04-22
発明の名称情報処理方法及び情報処理システム
出願人株式会社日立製作所
代理人弁理士法人サンネクスト国際特許事務所
主分類G06F 16/58 20190101AFI20251027BHJP(計算;計数)
要約【課題】複数の画像内の同一の対象物に同一のタグ情報を効率的に付与する。
【解決手段】情報処理方法では、複数の画像のうちの画像ペア毎に、タグの付与に必要な解像度に応じた画像間の画素の対応に係る対応情報を算出する。そして情報処理方法では、ユーザによって指定された画像の指定位置に対してタグを付与し、対応情報に基づいて、指定位置に含まれる画素に対応する他の画像の画素である対応点を特定し、特定した対応点に対して、指定位置に該当する画素に対して付与したタグと同一のタグを付与する。
【選択図】図3

特許請求の範囲【請求項１】
画像にタグを付与する情報処理システムが実行する情報処理方法であって、
前記情報処理システムは、プロセッサとメモリとを有し、
前記プロセッサが、
複数の視点から対象を撮影した複数の画像の入力を受付け、
前記複数の画像のうちの画像ペア毎に、前記タグの付与に必要な解像度に応じた前記画像間の画素の対応に係る対応情報を算出し、
ユーザによって指定された前記画像の指定位置に対して前記タグを付与し、
前記対応情報に基づいて、前記指定位置に含まれる画素に対応する他の前記画像の画素である対応点を特定し、
特定した前記対応点に対して、前記指定位置に該当する画素に対して付与した前記タグと同一のタグを付与する
各処理を有することを特徴とする情報処理方法。
続きを表示（約 2,100 文字）【請求項２】
請求項１に記載の情報処理方法であって、
前記画像に対して付与された前記タグに係るタグ情報を記憶する記憶部を有し、
前記プロセッサが、
前記対象を撮影した新たな前記画像の入力を受付け、
前記新たな画像と前記複数の画像のうちの何れかの画像との画像ペア毎に、前記対応情報を算出し、
前記対応情報に基づいて、前記新たな画像の画素に対応する前記複数の画像のうちの何れかの画像の画素を特定し、
前記タグ情報に基づいて、前記新たな画像の画素に対して、該新たな画像の画素に対応する前記複数の画像のうちの何れかの画像の画素に付与されている前記タグと同一のタグを付与する
各処理を有することを特徴とする情報処理方法。
【請求項３】
請求項１に記載の情報処理方法であって、
前記プロセッサが、
前記画像間の画素の前記対応情報毎に該対応情報の確からしさを示す信頼度を算出し、
前記画像の前記画素を、該画素毎の前記対応情報の前記信頼度に応じて表示画面に識別表示する
各処理を有することを特徴とする情報処理方法。
【請求項４】
請求項３に記載の情報処理方法であって、
前記プロセッサが、
前記対応点に係る前記対応情報の前記信頼度が閾値未満の前記画素の該信頼度が閾値未満である旨を前記表示画面に識別表示する
処理を有することを特徴とする情報処理方法。
【請求項５】
請求項４に記載の情報処理方法であって、
前記プロセッサが、
前記対応情報に基づいて、ユーザによって指定された前記画像の前記指定位置に対応する前記対応点を有する他の前記画像を検索し、
検索した他の前記画像の一覧を前記表示画面に表示する
各処理を有することを特徴とする情報処理方法。
【請求項６】
請求項５に記載の情報処理方法であって、
前記プロセッサが、
前記対応情報に基づいて、ユーザによって前記画像の一覧から選択された前記画像の前記指定位置に対応する他の前記画像の前記対応点を特定し、
特定した他の前記画像の前記対応点を前記表示画面に表示する
各処理を有することを特徴とする情報処理方法。
【請求項７】
請求項６に記載の情報処理方法であって、
前記プロセッサが、
ユーザによって指定された前記複数の画像のうちの画像群に対して付与されている前記タグに係るタグ情報を集計し、
集計した前記タグ情報の一覧を前記表示画面に表示し、
ユーザによって指定された前記タグ情報に係る前記タグが付与されている前記画像を検索し、
検索した前記タグと共に該タグが付与されている前記画像の一覧を前記表示画面に表示する
各処理を有することを特徴とする情報処理システム。
【請求項８】
請求項１に記載の情報処理方法であって、
前記プロセッサが、
所定の３次元再構成手法を用いて前記複数の画像のうちから選択された画像群から３次元画像を再構成し、
前記画像群における前記タグの２次元位置と、前記３次元画像における前記タグの３次元位置と、の対応に係る２次元－３次元対応情報を算出し、
前記２次元－３次元対応情報に基づいて、前記画像群における前記２次元位置に対応する前記３次元画像における前記３次元位置を特定し、
前記３次元画像と共に、特定した該３次元画像における前記３次元位置に前記タグを配置して表示画面に表示する
各処理を有することを特徴とする情報処理方法。
【請求項９】
請求項８に記載の情報処理方法であって、
前記プロセッサが、
前記画像群の前記２次元位置に対応する前記３次元画像における前記３次元位置が、前記表示画面における前記３次元画像の表示において遮蔽されている場合に、遮蔽されている旨を表示する
処理を有することを特徴とする情報処理方法。
【請求項１０】
画像にタグを付与する情報処理システムであって、
前記情報処理システムは、プロセッサとメモリとを有し、
前記プロセッサは、
複数の視点から対象を撮影した複数の画像の入力を受付け、
前記複数の画像のうちの画像ペア毎に、前記タグの付与に必要な解像度に応じた前記画像間の画素の対応に係る対応情報を算出し、
ユーザによって指定された前記画像の指定位置に対して前記タグを付与し、
前記対応情報に基づいて、前記指定位置に含まれる画素に対応する他の前記画像の画素である対応点を特定し、
特定した前記対応点に対して、前記指定位置に該当する画素に対して付与した前記タグと同一のタグを付与する
ことを特徴とする情報処理システム。

発明の詳細な説明【技術分野】
【０００１】
本発明は、情報処理方法及び情報処理システムに関する。
続きを表示（約 2,100 文字）【背景技術】
【０００２】
複数の視点から撮影した画像中の対象物やその付属物へのタグ情報の付与を支援する技術がある。例えば特許文献１には、複数の視点から撮影された画像に含まれる対象物から、アノテーションのタグ情報の付与対象を特定し、視点の変更に応じて画面内のタグ情報の付与対象の位置が変化した場合に、画面内のタグ情報の表示位置を変更する技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
特開２０２３－８５９９９号公報
【非特許文献】
【０００４】
Jiaming Sun, et al., “LoFTR:Detector-Free Local Feature Matching with Transformers,” ［online］, 20-25 June 2021, Conference on Computer Vision and Pattern Recognition(CVPR), ［令和６年３月２９日検索］, インターネット, <URL>https://openaccess.thecvf.com/content/CVPR2021/papers/Sun_LoFTR_Detector-Free_Local_Feature_Matching_With_Transformers_CVPR_2021_paper.pdf.
Johannes L. Schonberger, et al., “Structure-from-Motion Revisited,” ［online］, 27-30 June 2016, Conference on Computer Vision and Pattern Recognition(CVPR), ［令和６年３月２９日検索］, インターネット, <URL> https://demuc.de/papers/schoenberger2016sfm.pdf.
【発明の概要】
【発明が解決しようとする課題】
【０００５】
近年、設備保守、安全管理、状況把握等の様々な場面において、ＡＩ（Artificial Intelligence）を用いて画像から対象物を検出する物体検出を用いて、目視によって行われてきた対象物の確認作業を効率化するシステムの需要が高まっている。
【０００６】
しかしながら、ＡＩによる物体検出は、複数の画像に撮影されている同一の対象物を正しく識別できなかったり、未知の物体の識別ができなかったりする。このため、上述の特許文献１に開示の従来技術に、ＡＩによる物体検出の結果を用いても、複数の画像内の同一の対象物に同一のタグ情報を効率的に付与できないという課題があった。
【０００７】
本発明は、上述の課題を考慮してされたもので、複数の画像内の同一の対象物に同一のタグ情報を効率的に付与することを目的とする。
【課題を解決するための手段】
【０００８】
上記課題を解決するために、本発明は、画像にタグを付与する情報処理システムが実行する情報処理方法であって、前記情報処理システムは、プロセッサとメモリとを有し、前記プロセッサが、複数の視点から対象を撮影した複数の画像の入力を受付け、前記複数の画像のうちの画像ペア毎に、前記タグの付与に必要な解像度に応じた前記画像間の画素の対応に係る対応情報を算出し、ユーザによって指定された前記画像の指定位置に対して前記タグを付与し、前記対応情報に基づいて、前記指定位置に含まれる画素に対応する他の前記画像の画素である対応点を特定し、特定した前記対応点に対して、前記指定位置に該当する画素に対して付与した前記タグと同一のタグを付与する各処理を有することを特徴とする。
【発明の効果】
【０００９】
本発明によれば、複数の画像内の同一の対象物に同一のタグ情報を効率的に付与できる。
【図面の簡単な説明】
【００１０】
実施形態１に係る情報処理システムの構成を示す図。
実施形態１に係る対応情報テーブルの構成を示す図。
実施形態１に係るタグ情報テーブルの構成を示す図。
実施形態１に係るタグ付与処理を示すフローチャート。
実施形態１に係る入出力画面の構成を示す図。
実施形態２に係る対応点表示処理を示すフローチャート。
実施形態２に係る入出力画面の構成を示す図。
実施形態３に係るタグ検索処理を示すフローチャート。
実施形態３に係る入出力画面の構成を示す図。
実施形態４に係る情報処理装置の構成を示す図。
実施形態４に係る２Ｄ－３Ｄ対応情報テーブルの構成を示す図。
実施形態４に係る３次元表示処理を示すフローチャート。
実施形態４に係る入出力画面の構成を示す図。
実施形態４に係る入出力画面の構成を示す図。
コンピュータのハードウェア構成を示す図。
【発明を実施するための形態】
（【００１１】以降は省略されています）

関連特許