特許ウォッチ

公開番号2024103572
公報種別公開特許公報(A)
公開日2024-08-01
出願番号2024086244,2022522435
出願日2024-05-28,2020-05-14
発明の名称情報処理装置、情報処理方法、およびプログラム
出願人日本電気株式会社
代理人個人
主分類G06F 16/532 20190101AFI20240725BHJP(計算;計数)
要約【課題】人物を含む画像を当該人物の姿勢を基準に検索する場合において、検索対象となる画像の姿勢推定結果の信頼度が検索結果の妥当性に与える影響を、ユーザに認識させやすくする。
【解決手段】クエリ取得部は、クエリとなる情報であって、人物の姿勢を示す姿勢情報(以下、クエリ用姿勢情報と記載)を取得する。検索用情報取得部は、複数の検索用姿勢情報を取得する。検索用姿勢情報は、検索対象となる画像(以下、対象画像と記載)の姿勢情報であり、複数の対象画像別にデータベースに記憶されている。選択部は、複数の検索用姿勢情報のうちクエリ用姿勢情報に対する類似度が基準を満たす2つ以上の検索用姿勢情報を選択する。この選択処理は、実質的には、クエリ用姿勢情報に対応する画像(以下、クエリ画像と記載)に類似する対象画像を選択する処理になる。
【選択図】図40
特許請求の範囲【請求項１】
クエリとなる情報であって、人物の姿勢を示すクエリ用姿勢情報を取得するクエリ取得手段と、
検索対象となる複数の対象画像毎に生成された情報であって、当該対象画像に含まれる人物の姿勢を示す検索用姿勢情報を複数取得する検索用情報取得手段と、
前記複数の検索用姿勢情報のうち前記クエリ用姿勢情報に対する類似度が基準を満たす２つ以上の前記検索用姿勢情報を選択する選択手段と、
前記選択手段によって選択された前記２つ以上の検索用姿勢情報それぞれに対応する前記対象画像を表示手段に表示させるとともに、前記対象画像の表示位置を前記検索用姿勢情報の信頼度を用いて設定する表示制御手段と、
を備える画像選択装置。
続きを表示（約 1,200 文字）【請求項２】
請求項１に記載の画像選択装置において、
前記表示制御手段は、前記検索用姿勢情報の信頼度を当該検索用姿勢情報に対応する前記対象画像とともに表示手段に表示させる、画像選択装置。
【請求項３】
請求項１又は２に記載の画像選択装置において、
前記表示制御手段は、さらに前記類似度を用いて前記対象画像の表示位置を決める、画像選択装置。
【請求項４】
請求項１又は２に記載の画像選択装置において、
前記表示制御手段は、所定の条件を満たしたときに、前記対象画像の表示位置を決めるときに、前記検索用姿勢情報に代えて、又は前記検索用姿勢情報と共に、前記類似度を用いる画像選択装置。
【請求項５】
請求項１～４のいずれか一項に記載の画像選択装置において、
前記クエリ取得手段は、人物を含む画像であるクエリ画像を特定する情報を取得すると、当該クエリ画像に対応する姿勢情報を、前記クエリ用姿勢情報として取得する画像選択装置。
【請求項６】
請求項１～５のいずれか一項に記載の画像選択装置において、
前記検索用姿勢情報は複数の関節それぞれの位置を用いて設定されており、
前記信頼度は、当該検索用姿勢情報を設定する際に用いられた関節の数、及び当該関節の信頼度を用いて算出されている、画像選択装置。
【請求項７】
コンピュータが、
クエリとなる情報であって、人物の姿勢を示すクエリ用姿勢情報を取得し
検索対象となる複数の対象画像毎に生成された情報であって、当該対象画像に含まれる人物の姿勢を示す検索用姿勢情報を複数取得し、
前記複数の検索用姿勢情報のうち前記クエリ用姿勢情報に対する類似度が基準を満たす２つ以上の前記検索用姿勢情報を選択し、
前記選択された前記２つ以上の検索用姿勢情報それぞれに対応する前記対象画像を表示手段に表示させるとともに、前記対象画像の表示位置を前記検索用姿勢情報の信頼度を用いて設定する、画像選択方法。
【請求項８】
コンピュータに、
クエリとなる情報であって、人物の姿勢を示すクエリ用姿勢情報を取得するクエリ取得機能と、
検索対象となる複数の対象画像毎に生成された情報であって、当該対象画像に含まれる人物の姿勢を示す検索用姿勢情報を複数取得する検索用情報取得機能と、
前記複数の検索用姿勢情報のうち前記クエリ用姿勢情報に対する類似度が基準を満たす２つ以上の前記検索用姿勢情報を選択する選択機能と、
前記選択機能によって選択された前記２つ以上の検索用姿勢情報それぞれに対応する前記対象画像を表示手段に表示させるとともに、前記対象画像の表示位置を前記検索用姿勢情報の信頼度を用いて設定する表示制御機能と、
を持たせるプログラム。

発明の詳細な説明【技術分野】
【０００１】
本発明は、画像選択装置、画像選択方法、およびプログラムに関する。
続きを表示（約 2,100 文字）【背景技術】
【０００２】
近年、監視システム等において、監視カメラの画像から人物の姿勢や行動等の状態の検出や検索を行う技術が利用されている。関連する技術として、例えば、特許文献１及び２が知られている。特許文献１には、深さ映像に含まれる人物の頭や手足等のキージョイントに基づいて、類似する人物の姿勢を検索する技術が開示されている。特許文献２には、人物の姿勢と関連しないが、画像に付加された傾き等の姿勢情報を利用して類似画像を検索する技術が開示されている。なお、その他に、人物の骨格推定に関連する技術として、非特許文献１が知られている。
【０００３】
一方、クエリとなる画像に類似する画像を検索する場合、検索結果には複数の画像が含まれることが多い。特許文献３には、クエリとなる画像に対する類似の度合いが高い順に画像を表示することが記載されている。
【先行技術文献】
【特許文献】
【０００４】
特表２０１４－５２２０３５号公報
特開２００６－２６０４０５号公報
特開２０１２－００３６２３号公報
【非特許文献】
【０００５】
Zhe Cao, Tomas Simon, Shih-En Wei, Yaser Sheikh, "Realtime Multi-Person 2D Pose Estimation using Part Affinity Fields", The IEEE Conference on Computer Vision and Pattern Recognition (CVPR), 2017, P. 7291-7299
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本発明者は、人物を含む画像を当該人物の姿勢を基準に検索する場合、検索対象となる画像の姿勢推定結果の信頼度が検索結果の妥当性に影響を与えると考えた。本発明が解決しようとする課題の一つは、人物を含む画像を当該人物の姿勢を基準に検索する場合において、検索対象となる画像の姿勢推定結果の信頼度が検索結果の妥当性に与える影響を、ユーザに認識させやすくすることにある。
【課題を解決するための手段】
【０００７】
本発明によれば、クエリとなる情報であって、人物の姿勢を示すクエリ用姿勢情報を取得するクエリ取得手段と、
検索対象となる複数の対象画像毎に生成された情報であって、当該対象画像に含まれる人物の姿勢を示す検索用姿勢情報を複数取得する検索用情報取得手段と、
前記複数の検索用姿勢情報のうち前記クエリ用姿勢情報に対する類似度が基準を満たす２つ以上の前記検索用姿勢情報を選択する選択手段と、
前記選択手段によって選択された前記２つ以上の検索用姿勢情報それぞれに対応する前記対象画像を表示手段に表示させるとともに、前記対象画像の表示位置を前記検索用姿勢情報の信頼度を用いて設定する表示制御手段と、
を備える画像選択装置が提供される。
【０００８】
本発明によれば、コンピュータが、
クエリとなる情報であって、人物の姿勢を示すクエリ用姿勢情報を取得し
検索対象となる複数の対象画像毎に生成された情報であって、当該対象画像に含まれる人物の姿勢を示す検索用姿勢情報を複数取得し、
前記複数の検索用姿勢情報のうち前記クエリ用姿勢情報に対する類似度が基準を満たす２つ以上の前記検索用姿勢情報を選択し、
前記選択された前記２つ以上の検索用姿勢情報それぞれに対応する前記対象画像を表示手段に表示させるとともに、前記対象画像の表示位置を前記検索用姿勢情報の信頼度を用いて設定する、画像選択方法が提供される。
【０００９】
本発明によれば、コンピュータに、
クエリとなる情報であって、人物の姿勢を示すクエリ用姿勢情報を取得するクエリ取得機能と、
検索対象となる複数の対象画像毎に生成された情報であって、当該対象画像に含まれる人物の姿勢を示す検索用姿勢情報を複数取得する検索用情報取得機能と、
前記複数の検索用姿勢情報のうち前記クエリ用姿勢情報に対する類似度が基準を満たす２つ以上の前記検索用姿勢情報を選択する選択機能と、
前記選択機能によって選択された前記２つ以上の検索用姿勢情報それぞれに対応する前記対象画像を表示手段に表示させるとともに、前記対象画像の表示位置を前記検索用姿勢情報の信頼度を用いて設定する表示制御機能と、
を持たせるプログラムが提供される。
【発明の効果】
【００１０】
本発明によれば、人物を含む画像を当該人物の姿勢を基準に検索する場合において、検索対象となる画像の姿勢推定結果の信頼度が検索結果の妥当性に与える影響を、ユーザに認識させやすくなる。
【図面の簡単な説明】
（【００１１】以降は省略されています）

関連特許