特許ウォッチ

公開番号2025001350
公報種別公開特許公報(A)
公開日2025-01-08
出願番号2023100875
出願日2023-06-20
発明の名称サーバ装置、情報処理システム及び情報処理方法
出願人株式会社東芝,東芝デジタルソリューションズ株式会社
代理人弁理士法人酒井国際特許事務所
主分類G06T 7/00 20170101AFI20241225BHJP(計算;計数)
要約【課題】大量の顔画像の一括登録後またはシステムが自動登録した顔画像の確認作業をより効率よく行うことができるサーバ装置、情報処理システム及び情報処理方法を提供する。
【解決手段】実施形態のサーバ装置は、顔画像登録制御部と検出部と適正度算出部と表示制御部とを備える。顔画像登録制御部は、人物の顔を含む顔画像の登録を受け付ける。検出部は、前記顔画像の特徴点を検出し、前記特徴点に基づき、前記顔画像から人物の顔を示す領域を検出する。適正度算出部は、前記人物の顔を示す領域から検出される情報に基づき、顔辞書に登録される顔画像の適正度を算出する。表示制御部は、前記適正度が低い順に前記顔画像を確認する第1表示情報を、表示装置に表示する。
【選択図】図3
特許請求の範囲【請求項１】
人物の顔を含む顔画像の登録を受け付ける顔画像登録制御部と、
前記顔画像の特徴点を検出し、前記特徴点に基づき、前記顔画像から人物の顔を示す領域を検出する検出部と、
前記人物の顔を示す領域から検出される情報に基づき、顔辞書に登録される顔画像の適正度を算出する適正度算出部と、
前記適正度が低い順に前記顔画像を確認する第１表示情報を、表示装置に表示する表示制御部と、
を備えるサーバ装置。
続きを表示（約 1,200 文字）【請求項２】
前記顔画像登録制御部は、複数の顔画像を一括で受け付け、
前記表示制御部は、前記複数の顔画像を、前記適正度が低い順に前記表示装置に表示する、
請求項１に記載のサーバ装置。
【請求項３】
前記検出部は、前記顔画像が辞書登録条件を満たすか否かを判定し、
前記第１表示情報は、前記辞書登録条件を満たさない顔画像をエラー表示するエラー画像領域と、前記適正度が低い順に前記顔画像を確認する確認領域とを含み、
請求項１又は２に記載のサーバ装置。
【請求項４】
前記確認領域は、前記適正度が閾値以下の顔画像を表示する注意画像領域と、前記適正度が前記閾値より高い正常画像領域とを含み、
前記表示制御部は、前記注意画像領域の次に、前記正常画像領域を表示する、
請求項３に記載のサーバ装置。
【請求項５】
前記表示制御部は、前記エラー画像領域を、警告を促す第１表示色で表示し、前記注意画像領域を、要確認を促す第２表示色で表示し、前記正常画像領域を、正常な顔画像であることを示す第３表示色で表示する、
請求項４に記載のサーバ装置。
【請求項６】
前記顔辞書には、１名につき、少なくとも１枚の顔画像が登録され、
前記第１表示情報は、複数の顔画像が前記顔辞書に登録されている人物については、前記適正度がより低い代表顔画像を含む、
請求項１又は２に記載のサーバ装置。
【請求項７】
前記表示制御部は、前記代表顔画像が選択された場合、前記代表顔画像を含む同一人物の複数の顔画像を確認する第２表示情報を更に表示し、
前記第２表示情報は、前記同一人物の複数の顔画像を前記適正度が低い順に表示する、
請求項６に記載のサーバ装置。
【請求項８】
前記適正度算出部は、前記人物の顔を示す領域から検出される目、鼻及び口の特徴点に基づき、前記適正度を算出する、
請求項１又は２に記載のサーバ装置。
【請求項９】
前記顔辞書に登録された顔画像の特徴量と、コンテンツデータに含まれる人物の顔の特徴量とを照合し類似度を算出する類似度算出部と、
前記類似度を示す情報と、前記類似度により特定された人物を示す情報とを含む出力情報を出力する出力制御部と、
を更に備える請求項１又は２に記載のサーバ装置。
【請求項１０】
前記コンテンツデータは、リアルタイムに前記サーバ装置に入力される入力映像であり、
前記類似度算出部は、前記顔辞書に登録された顔画像の特徴量と、前記入力映像に含まれる人物の顔とを照合し類似度を算出する、
請求項９に記載のサーバ装置。
（【請求項１１】以降は省略されています）
発明の詳細な説明【技術分野】
【０００１】
本発明の実施形態はサーバ装置、情報処理システム及び情報処理方法に関する。
続きを表示（約 1,900 文字）【背景技術】
【０００２】
顔認識システムでは、対象人物の顔が映った顔画像と、当該顔画像から生成された特徴量と、名前等とをセットにして、事前に辞書として登録しておく必要がある。高い顔認識を実現するためには、顔認識のエンジンの特性に合致した顔画像を登録することが望ましいため、顔画像の登録条件を設定している。しかし、特に映像コンテンツのメタ情報生成などの用途では、認識したい人物の顔画像を事前に準備することに多くの時間を要し、また、その顔画像の品質も多種多様であるため登録する辞書の条件にある程度の余裕を持たせ、顔画像を登録できるよう設計されている。
【０００３】
顔画像に映る顔のサイズ、画質、及び、顔の検出ができないなどの辞書登録の条件を満たさない顔画像については、辞書登録失敗となり辞書登録ができないため顔認識の精度に影響を及ぼすことはないが、顔画像の条件に余裕を持たせたことにより、正常に登録できた顔画像の中に稀に、顔が傾いて映っていたり、画質が著しく悪い顔画像などが混在したり、顔以外の画像が登録されたりすることがある。これにより、当該人物本人の認識ができないことに加え、特に顔以外の画像が誤って登録された場合には過検出により背景を誤認識することが頻発するなど、当該辞書を利用して行った顔認識の全体としての精度に著しく影響を与えていた。このため、顔画像の登録後の確認作業は必須である。例えば、放送番組等の映像コンテンツの顔認識では、数百から数万に及ぶ顔画像を辞書登録する場合があるため、一括で辞書の登録を行うが、大量の画像の目視確認は作業者の負担が大きく時間を要するため、確認作業の負荷軽減が求められていた。
【先行技術文献】
【特許文献】
【０００４】
特開２０２１－１５７６４９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明が解決しようとする課題は、大量の顔画像の一括登録後またはシステムが自動登録した顔画像の確認作業をより効率よく行うことができるサーバ装置、情報処理システム及び情報処理方法を提供することである。
【課題を解決するための手段】
【０００６】
実施形態のサーバ装置は、顔画像登録制御部と検出部と適正度算出部と表示制御部とを備える。顔画像登録制御部は、人物の顔を含む顔画像の登録を受け付ける。検出部は、前記顔画像の特徴点を検出し、前記特徴点に基づき、前記顔画像から人物の顔を示す領域を検出する。適正度算出部は、前記人物の顔を示す領域から検出される情報に基づき、顔辞書に登録される顔画像の適正度を算出する。表示制御部は、前記適正度が低い順に前記顔画像を確認する第１表示情報を、表示装置に表示する。
【図面の簡単な説明】
【０００７】
図１は、第１実施形態の情報処理システムの装置構成の例を示す図である。
図２は、第１実施形態のクライアント装置の機能構成の例を示す図である。
図３は、第１実施形態のサーバ装置の機能構成の例を示す図である。
図４は、第１実施形態の顔辞書テーブルの例を示す図である。
図５は、第１実施形態の顔情報テーブルの例を示す図である。
図６は、第１実施形態の表示情報の例１を示す図である。
図７は、第１実施形態の表示情報の例２を示す図である。
図８は、第１実施形態の情報処理方法の例を示すシーケンス図である。
図９は、第１実施形態の情報処理方法の例を示すシーケンス図である。
図１０は、第１実施形態の効果を説明するための図である。
図１１は、第１実施形態の変形例の表示情報の例を示す図である。
図１２は、第１及び第２実施形態のサーバ装置のハードウェア構成の例を示す図である。
【発明を実施するための形態】
【０００８】
以下に添付図面を参照して、サーバ装置、情報処理システム及び情報処理方法の実施形態を詳細に説明する。
【０００９】
（第１実施形態）
はじめに、第１実施形態の情報処理システムの装置構成の例について説明する。
【００１０】
［装置構成の例］
図１は、第１実施形態の情報処理システム１００の装置構成の例を示す図である。第１実施形態の情報処理システム１００は、クライアント装置１とサーバ装置２とを備える。
（【００１１】以降は省略されています）

関連特許