特許ウォッチ

公開番号2024082106
公報種別公開特許公報(A)
公開日2024-06-19
出願番号2022195834
出願日2022-12-07
発明の名称情報処理プログラム、情報処理方法および情報処理装置
出願人富士通株式会社
代理人弁理士法人酒井国際特許事務所
主分類G06T 7/70 20170101AFI20240612BHJP(計算;計数)
要約【課題】会計機における、ユーザの誤りまたは不正を検出することを課題とする。
【解決手段】情報処理装置は、商品のコードを会計機にスキャンする人物の映像データを取得する。情報処理装置は、取得した映像データを分析することで、映像データの中から、商品の全体の領域と、商品が有するコードの位置とをそれぞれ識別する。情報処理装置は、識別された商品の全体の領域に対する商品が有するコードの位置に基づいて、会計機に商品を登録する行動の異常を示すアラートを生成する。
【選択図】図2
特許請求の範囲【請求項１】
コンピュータに、
商品のコードを会計機にスキャンする人物の映像データを取得し、
取得した前記映像データを分析することで、前記映像データの中から、商品の全体の領域と、商品が有するコードの位置とをそれぞれ識別し、
識別された前記商品の全体の領域に対する前記商品が有するコードの位置に基づいて、前記会計機に商品を登録する行動の異常を示すアラートを生成する、
処理を実行させることを特徴とする情報処理プログラム。
続きを表示（約 1,700 文字）【請求項２】
前記識別する処理は、
取得した前記映像データを分析することで、２次元画像における前記商品の面のパターンを認識し、
前記パターンに対するコードの位置を特定し、
前記生成する処理は、
特定された前記パターンに対するコードの位置が、パターンごとに予め設定された位置と異なるときには、前記会計機に商品を登録する行動の異常を示すアラートを生成する、
ことを特徴とする請求項１に記載の情報処理プログラム。
【請求項３】
前記識別する処理は、
取得した前記映像データを機械学習モデルに入力することで、商品の３次元モデルを生成し、
前記アラートを生成する処理は、
生成された前記３次元モデルでのコードの位置が、予め設定された位置と異なるときには、会計機に商品を登録する行動の異常を示すアラートを生成する、
ことを特徴とする請求項１に記載の情報処理プログラム。
【請求項４】
前記識別する処理は、
個々にコードを有する複数の商品を１つの商品として設定されるとともに前記１つの商品としてのコードを有するセット商品の全体の領域と、前記セット商品が有するコードの位置とをそれぞれ識別し、
前記生成する処理は、
前記会計機に商品を登録する位置に、前記セット商品内のいずれかの商品のコードが位置する場合に、前記アラートを生成する、
ことを特徴とする請求項１に記載の情報処理プログラム。
【請求項５】
前記識別する処理は、
商品毎にコードの位置が学習された機械学習モデルに対して、取得した前記映像データを入力することで、前記映像データ内の商品が有するコードの位置を推定し、
前記生成する処理は、
推定された前記商品が有するコードの位置と、前記会計機に商品を登録する位置に位置する商品のコードの位置とが一致しない場合に、前記アラートを生成する、
ことを特徴とする請求項１に記載の情報処理プログラム。
【請求項６】
前記アラートを生成する処理は、
前記会計機に商品を登録する行動の異常に関連するアラートとして、前記人物が前記会計機に登録していない商品があること、または、前記人物が前記会計機に登録した商品が異常であることを示すアラートを生成する、
ことを特徴とする請求項１に記載の情報処理プログラム。
【請求項７】
前記会計機に商品を登録する行動の異常に関するアラートが生成されたときに、店員の有する端末に対して、前記会計機の識別情報と生成された前記アラートとを対応づけて通知する、処理を前記コンピュータに実行させることを特徴とする請求項１に記載の情報処理プログラム。
【請求項８】
前記アラートを生成する処理は
前記会計機に商品を登録する行動の異常に関するアラートが生成された場合に、前記会計機に位置する前記人物に前記商品の登録漏れを促す音声または画面を、前記会計機から出力する、
ことを特徴とする請求項１に記載の情報処理プログラム。
【請求項９】
前記会計機に商品を登録する行動の異常に関するアラートが生成されたときに、前記会計機の有するカメラにて、人物を撮影させ、
撮影された前記人物の画像データと、前記アラートを対応づけて記憶部に記憶する、処理を前記コンピュータに実行させることを特徴とする請求項１に記載の情報処理プログラム。
【請求項１０】
前記セット商品は、複数の缶の集合を包装する包装材と、前記包装材に包装された缶とのそれぞれにバーコードが付されており、
前記生成する処理は、
前記包装材のバーコードではなく、前記缶のバーコードが前記会計機にスキャンされたときに、前記アラートを通知する、処理を前記コンピュータに実行させることを特徴とする請求項４に記載の情報処理プログラム。
（【請求項１１】以降は省略されています）
発明の詳細な説明【技術分野】
【０００１】
本発明は、情報処理プログラム、情報処理方法および情報処理装置に関する。
続きを表示（約 1,400 文字）【背景技術】
【０００２】
スーパーマーケットやコンビニエンスストア等の店舗において、セルフレジが普及している。セルフレジは、商品を購入するユーザ自身が、商品のバーコードの読み取りから精算までを行うＰＯＳ（Point Of Sale）レジシステムである。たとえば、セルフレジを導入することで、人口減少による人手不足の改善、人件費を抑制することができる。
【先行技術文献】
【特許文献】
【０００３】
特開２０２０－５３０１９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記技術では、不正を検出することが難しい。例えば、セルフレジなどの会計機では、ユーザによる不可抗力の誤りや故意の不正などがあり、未払い金などが発生する。
【０００５】
不可抗力の誤りとしては、商品のスキャンを忘れてカゴからレジ袋に商品を移動させてしまうスキャン漏れ、などがある。また、故意の不正としては、ユーザがバーコードだけを指で隠しながら商品をスキャンするフリをするバーコード隠しや、例えば６缶で１セットのビール箱にはビール箱と各缶にバーコードがついており誤って缶のバーコードを読み取らせる読み取り誤りなどがある。
【０００６】
なお、各セルフレジに重量センサなどを導入することで、自動で商品数を計数して不正を検出することも考えられるが、コストが過大であり、特に大型店舗や全国展開する店舗にとっては現実的ではない。
【０００７】
また、セルフレジでは、商品コードのスキャンや精算がユーザ自身に委ねられるので、不正行為を検出することが困難である側面がある。たとえば、上記の不正行為を検出する側面から画像認識ＡＩ（Artificial Intelligence）を適用しようにも、画像認識ＡＩの訓練には大量の訓練データが必要となる。ところが、スーパーマーケットやコンビニエンスストア等の店舗では、多数の種類の商品が存在する上、個々の商品のライフサイクルも短いので、商品の入れ替えが頻繁に起こる。このような商品のライフサイクルに合わせて画像認識ＡＩをチューニングしたり、あるいは新たな画像認識ＡＩを訓練したりすることは困難である。
【０００８】
一つの側面では、会計機における、ユーザの誤りまたは不正を検出することができる情報処理プログラム、情報処理方法および情報処理装置を提供することを目的とする。
【課題を解決するための手段】
【０００９】
第１の案では、情報処理プログラムは、コンピュータに、商品のコードを会計機にスキャンする人物の映像データを取得し、取得した前記映像データを分析することで、前記映像データの中から、商品の全体の領域と、商品が有するコードの位置とをそれぞれ識別し、識別された前記商品の全体の領域に対する前記商品が有するコードの位置に基づいて、前記会計機に商品を登録する行動の異常を示すアラートを生成する、処理を実行させることを特徴とする。
【発明の効果】
【００１０】
一実施形態によれば、会計機における、ユーザの誤りまたは不正を検出することができる。
【図面の簡単な説明】
（【００１１】以降は省略されています）

関連特許