特許ウォッチ

公開番号2024085336
公報種別公開特許公報(A)
公開日2024-06-26
出願番号2022199826
出願日2022-12-14
発明の名称情報処理プログラム、情報処理方法、および情報処理装置
出願人富士通株式会社
代理人弁理士法人酒井国際特許事務所
主分類G06Q 50/10 20120101AFI20240619BHJP(計算;計数)
要約【課題】小売店などに訪れた人物が商品を購入する際に示す行動、いわゆる購買行動を分析することにより、コンバージョン率を改善する取り組みがある。しかしながら、そもそも同一の商品であっても、商品が配置される棚などの場所によって顧客がとる行動が変わる場合がある。
【解決手段】情報処理プログラムは、店内を撮影した映像を取得し、取得した映像を分析することで、映像の中から、店内に配置された商品を含む第1の領域と、商品を購入する対象の顧客を含む第2の領域と、商品および顧客の相互作用を識別した関係性とを特定し、特定された関係性に基づいて、商品が配置される場所の注目度を示す注目情報を生成し、生成された注目情報を表示装置に出力させる処理をコンピュータに実行させる。
【選択図】図12
特許請求の範囲【請求項１】
店内を撮影した映像を取得し、
取得した前記映像を分析することで、前記映像の中から、前記店内に配置された商品を含む第１の領域と、前記商品を購入する対象の顧客を含む第２の領域と、前記商品および前記顧客の相互作用を識別した関係性とを特定し、
特定された前記関係性に基づいて、前記商品が配置される場所の注目度を示す注目情報を生成し、
生成された前記注目情報を表示装置に出力させる
処理をコンピュータに実行させることを特徴とする情報処理プログラム。
続きを表示（約 1,600 文字）【請求項２】
特定された前記関係性と、特定された前記関係性が示された場合の前記顧客の位置に基づいて、前記店内での前記商品が配置される所定の場所での、前記顧客のそれぞれが示した前記関係性の種類を特定し、
前記所定の場所での、前記顧客が示した前記関係性の種類ごとの実績数を計数し、
計数された前記実績数と前記所定の場所とを対応付けた前記注目情報を前記表示装置に出力させる
処理を前記コンピュータに実行させることを特徴とする請求項１に記載の情報処理プログラム。
【請求項３】
特定された前記関係性と、特定された前記関係性が示された場合の前記顧客の位置に基づいて、前記場所ごとに、前記顧客が前記商品を把持したことを示す前記関係性を特定し、
前記場所ごとに、前記顧客が前記商品を把持したことを示す前記関係性の実績数を計数し、
前記場所ごとに、計数された前記実績数を対応付けた前記注目情報を前記表示装置に出力させる
処理を前記コンピュータに実行させることを特徴とする請求項１に記載の情報処理プログラム。
【請求項４】
所定の関係性と、前記所定の関係性が示された場合の顧客の位置とに基づいて、前記顧客が商品を把持した店内での場所を特定し、
映像に含まれる前記顧客を追跡し、
前記映像を分析することで、追跡した前記顧客が利用した会計機を特定し、
特定した前記会計機から取得した登録情報に基づいて、前記顧客が前記所定の関係性を示した前記店内での場所に配置された前記商品の購入数を特定し、
前記店内での前記商品が配置された場所ごとに、前記購入数を対応付けた注目情報を表示装置に出力させる
処理を前記コンピュータに実行させることを特徴とする請求項１に記載の情報処理プログラム。
【請求項５】
前記第１の領域と、前記第２の領域と、前記関係性とを特定する処理は、
取得した前記映像を機械学習モデルに入力することで、前記第１の領域と、前記第２の領域と、前記関係性とを特定する
処理を含み、
前記機械学習モデルは、前記商品を含む物体を示す第１のクラスおよび前記物体が出現する領域を示す前記第１の領域の情報と、前記商品を購入する人物を示す第２のクラスおよび前記人物が出現する領域を示す前記第２の領域の情報と、前記第１のクラスと前記第２のクラスとの相互作用と、を識別するように訓練されたＨＯＩＤ（Human Object Interaction Detection）用のモデルである
ことを特徴とする請求項１に記載の情報処理プログラム。
【請求項６】
店内を撮影した映像を取得し、
取得した前記映像を分析することで、前記映像の中から、前記店内に配置された商品を含む第１の領域と、前記商品を購入する対象の顧客を含む第２の領域と、前記商品および前記顧客の相互作用を識別した関係性とを特定し、
特定された前記関係性に基づいて、前記商品が配置される場所の注目度を示す注目情報を生成し、
生成された前記注目情報を表示装置に出力させる
処理をコンピュータが実行することを特徴とする情報処理方法。
【請求項７】
店内を撮影した映像を取得し、
取得した前記映像を分析することで、前記映像の中から、前記店内に配置された商品を含む第１の領域と、前記商品を購入する対象の顧客を含む第２の領域と、前記商品および前記顧客の相互作用を識別した関係性とを特定し、
特定された前記関係性に基づいて、前記商品が配置される場所の注目度を示す注目情報を生成し、
生成された前記注目情報を表示装置に出力させる
処理を実行する制御部を有することを特徴とする情報処理装置。

発明の詳細な説明【技術分野】
【０００１】
本発明は、情報処理プログラム、情報処理方法、および情報処理装置に関する。
続きを表示（約 1,900 文字）【背景技術】
【０００２】
小売店などに訪れた人物が商品を購入する際に示す行動、いわゆる購買行動を分析することにより、コンバージョン率を改善する取り組みがある。例えば、衣類を販売する店舗で、商品比較が５回未満の人物は商品を購入する傾向が高く、逆に５回以上の人物は商品を購入せずに離脱する傾向が高い場合に、接客時に試着数を５点未満に誘導することで、コンバージョン率を向上させることができる可能性がある。
【先行技術文献】
【特許文献】
【０００３】
特開２０２２－１６５４８３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、そもそも同一の商品であっても、商品が配置される棚などの場所によって顧客がとる行動が変わる場合がある。換言すると、商品が配置される場所によって顧客が購買行動をとり易い場所と、とり難い場所とがあると考えられる。そのため、商品が配置される場所の違いによる顧客の購買行動を分析することが、コンバージョン率の改善に繋がると考えられる。
【０００５】
１つの側面では、商品が配置される場所の違いによる顧客の購買行動をより正確に分析できる情報処理プログラム、情報処理方法、および情報処理装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
１つの態様において、情報処理プログラムは、店内を撮影した映像を取得し、取得した映像を分析することで、映像の中から、店内に配置された商品を含む第１の領域と、商品を購入する対象の顧客を含む第２の領域と、商品および顧客の相互作用を識別した関係性とを特定し、特定された関係性に基づいて、商品が配置される場所の注目度を示す注目情報を生成し、生成された注目情報を表示装置に出力させる処理をコンピュータに実行させる。
【発明の効果】
【０００７】
１つの側面では、商品が配置される場所の違いによる顧客の購買行動をより正確に分析できる。
【図面の簡単な説明】
【０００８】
図１は、本実施形態にかかる情報処理システムの構成例を示す図である。
図２は、本実施形態にかかる情報処理装置１０の構成例を示す図である。
図３は、本実施形態にかかるカメラ設置ＤＢ１４に記憶される情報の例を示す図である。
図４は、本実施形態にかかる商品ＤＢ１５に記憶される情報の例を示す図である。
図５は、本実施形態にかかる商品配置場所の領域の例を示す図である。
図６は、本実施形態にかかる会計登録ＤＢ１６に記憶される情報の例を示す図である。
図７は、本実施形態にかかる注目ＤＢ１８に記憶される情報の例を示す図である。
図８は、ＨＯＩＤによる関係性の特定を説明する図である。
図９は、顧客の追跡を説明する図である。
図１０は、本実施形態にかかる店内画像からの人物抽出および追跡の例を示す図である。
図１１は、本実施形態にかかる店員／顧客判定の例を示す図である。
図１２は、本実施形態にかかる注目情報出力処理の流れを示すフローチャートである。
図１３は、情報処理装置１０のハードウェア構成例を説明する図である。
図１４は、会計機１００のハードウェア構成例を説明する図である。
【発明を実施するための形態】
【０００９】
以下に、本実施形態に係る情報処理プログラム、情報処理方法、および情報処理装置の実施例を図面に基づいて詳細に説明する。なお、この実施例により本実施形態が限定されるものではない。また、各実施例は、矛盾のない範囲内で適宜組み合わせることができる。
【００１０】
まず、本実施形態を実施するための情報処理システムについて説明する。図１は、本実施形態にかかる情報処理システムの構成例を示す図である。図１に示すように、情報処理システム１は、情報処理装置１０と、会計機１００－１～１００－ｍ、およびカメラ装置２００－１～２００－ｎとが、ネットワーク５０を介して相互に通信可能に接続されるシステムである。なお、ｍおよびｎは任意の自然数であり、会計機１００－１～１００－ｍ、およびカメラ装置２００－１～２００－ｎ、およびを、以下、それぞれ、まとめて「会計機１００」、および「カメラ装置２００」という場合がある。
（【００１１】以降は省略されています）

関連特許