特許ウォッチ

公開番号2025145010
公報種別公開特許公報(A)
公開日2025-10-03
出願番号2024044973
出願日2024-03-21
発明の名称表示制御プログラム、表示制御方法、及び、情報処理装置
出願人カシオ計算機株式会社
代理人インフォート弁理士法人
主分類G06V 10/74 20220101AFI20250926BHJP(計算;計数)
要約【課題】ユーザの判断を好適に補助する。
【解決手段】プログラムは、コンピュータに、複数種のクラスに分別される対象が写った画像に関する3次元以上の特徴量から2次元の特徴量をクラス毎にマッピングした2次元画像を表示部に表示させ、クエリ画像の2次元特徴量を導出し、2次元画像上に、クエリ画像の2次元特徴量を表示部にプロットさせる。2次元画像において、クエリ画像の2次元特徴量がプロットされた位置とクラス毎における特定の要素の2次元特徴量がマッピングされた位置との間の距離は、クエリ画像とクラス別の対象物との類似度を表す一方で、クラス間の特定の要素の位置の間の距離は、クラス間の類似度を表す。
【選択図】図5

特許請求の範囲【請求項１】
コンピュータに、
複数種のクラスに分別される対象が写った画像に関する３次元以上の特徴量から２次元の特徴量をクラス毎にマッピングした２次元画像を表示部に表示させ、
クエリ画像の２次元特徴量を導出し、
前記２次元画像上に、前記クエリ画像の２次元特徴量を前記表示部にプロットさせ、
前記２次元画像において、前記クエリ画像の２次元特徴量がプロットされた位置と前記クラス毎における特定の要素の２次元特徴量がマッピングされた位置との間の距離は、前記クエリ画像と前記クラス別の対象物との類似度を表す一方で、クラス間の特定の要素の位置の間の距離は、前記クラス間の類似度を表す、
表示制御プログラム。
続きを表示（約 1,700 文字）【請求項２】
請求項１に記載の表示制御プログラムにおいて、
前記２次元画像は、前記複数種のクラスの領域を示す一方で、前記クエリ画像の２次元特徴量が前記クラス外の領域にプロットされた場合、前記複数種のクラスのうち、前記クエリ画像の２次元特徴量に近接する少なくとも２つのクラスにおける前記クエリ画像の２次元特徴量と最も近接する要素が強調表示される、
表示制御プログラム。
【請求項３】
請求項１に記載の表示制御プログラムにおいて、
前記クエリ画像の２次元特徴量を導出することは、
前記クエリ画像をクラス識別器に入力して前記クラス識別器の中間層から出力された３次元以上の特徴量を取得することと、
次元削減前の特徴量空間で近い点が次元削減後の特徴量空間でも近くなるように特徴量の次元を削減する次元削減モデルを用いて、前記中間層から出力された３次元以上の特徴量を２次元に次元削減することと、を含む
表示制御プログラム。
【請求項４】
請求項３に記載の表示制御プログラムにおいて、
前記２次元画像を前記表示部に表示させることは、前記表示部に、前記２次元画像上に、前記クラス識別器の学習に使用された学習用画像の２次元特徴量の空間分布をクラス毎に区別可能に示す空間分布情報を表示させること、を含む
表示制御プログラム。
【請求項５】
請求項４に記載の表示制御プログラムにおいて、
前記空間分布情報は、前記２次元画像上のクラス毎の領域を画定するクラス領域情報であって、クラス毎の前記学習用画像の前記２次元特徴量の分布を近似した２次元ガウス分布に基づいて作成されたクラス領域情報、を含む
表示制御プログラム。
【請求項６】
請求項４に記載の表示制御プログラムにおいて、
前記空間分布情報は、前記学習用画像の２次元特徴量を含み、
前記空間分布情報を表示させることは、前記表示部に、前記２次元画像上に、前記学習用画像の２次元特徴量をプロットさせること、を含む
表示制御プログラム。
【請求項７】
請求項１に記載の表示制御プログラムにおいて、
前記コンピュータに、さらに、
前記表示部に、前記クエリ画像の２次元特徴量がプロットされた位置と前記クラス毎における特定の要素の２次元特徴量がマッピングされた位置との間の距離を示す距離情報を表示させる
表示制御プログラム。
【請求項８】
請求項１に記載の表示制御プログラムにおいて、
前記コンピュータに、さらに、
前記表示部に、前記クエリ画像と、前記クラス毎における特定の要素の２次元特徴量に対応する学習用画像と、を表示させる
表示制御プログラム。
【請求項９】
請求項１に記載の表示制御プログラムにおいて、
前記コンピュータに、さらに、
前記表示部に、前記クエリ画像と、前記クエリ画像の２次元特徴量と最も近接する要素に対応する学習用画像と、を表示させる
表示制御プログラム。
【請求項１０】
コンピュータが、
複数種のクラスに分別される対象が写った画像に関する３次元以上の特徴量から２次元の特徴量をクラス毎にマッピングした２次元画像を表示部に表示させることと、
クエリ画像の２次元特徴量を導出することと、
前記２次元画像上に、前記クエリ画像の２次元特徴量を前記表示部にプロットさせることと、を含み、
前記２次元画像において、前記クエリ画像の２次元特徴量がプロットされた位置と前記クラス毎における特定の要素の２次元特徴量がマッピングされた位置との間の距離は、前記クエリ画像と前記クラス別の対象物との類似度を表す一方で、クラス間の特定の要素の位置の間の距離は、前記クラス間の類似度を表す、
表示制御方法。
（【請求項１１】以降は省略されています）
発明の詳細な説明【技術分野】
【０００１】
本明細書の開示は、表示制御プログラム、表示制御方法、及び、情報処理装置に関する。
続きを表示（約 2,200 文字）【背景技術】
【０００２】
被検体の皮膚を撮像した画像に基づいて皮膚の状態（例えば、疾患名など）を判定する技術が知られている。このような技術は、例えば、特許文献１に記載されている。
【先行技術文献】
【特許文献】
【０００３】
特開２０２２－０３８６３９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、ユーザは、判定結果を鵜呑みにせず、判定結果から自ら判断をする必要がある場合がある。以上のような実情を踏まえ、本発明の一側面に係る目的は、ユーザの判断を好適に補助する技術を提供することである。
【課題を解決するための手段】
【０００５】
本発明の一態様に係る表示制御プログラムは、コンピュータに、複数種のクラスに分別される対象が写った画像に関する３次元以上の特徴量から２次元の特徴量をクラス毎にマッピングした２次元画像を表示部に表示させ、クエリ画像の２次元特徴量を導出し、前記２次元画像上に、前記クエリ画像の２次元特徴量を前記表示部にプロットさせ、前記２次元画像において、前記クエリ画像の２次元特徴量がプロットされた位置と前記クラス毎における特定の要素の２次元特徴量がマッピングされた位置との間の距離は、前記クエリ画像と前記クラス別の対象物との類似度を表す一方で、クラス間の特定の要素の位置の間の距離は、前記クラス間の類似度を表す。
【発明の効果】
【０００６】
上記の態様によれば、ユーザの判断を好適に補助ができる。
【図面の簡単な説明】
【０００７】
本発明の一実施形態に係るシステムの構成を例示した図である。
情報処理装置の機能的構成を例示した図である。
データベース作成処理の一例を示すフローチャートである。
データベース内の情報を可視化した図である。
診断支援処理の一例を示すフローチャートである。
診断支援処理でクエリ画像入力後に表示される画面の一例である。
画面上の任意の点を選択後に表示される画面の一例である。
診断支援処理でクエリ画像入力後に表示される画面の別の例である。
診断支援処理でクエリ画像入力後に表示される画面の更に別の例である。
画面上のクエリ画像に対応する点を選択後に表示される画面の一例である。
画面上のクエリ画像に対応する点を選択後に表示される画面の別の例である。
診断支援処理の別の例を示すフローチャートである。
診断支援処理でクエリ画像入力後に表示される画面の更に別の例である。
【発明を実施するための形態】
【０００８】
図１に示すシステム１のユーザは、例えば、悪性皮膚腫瘍の診断を行う医師であり、システム１は、医師による診断を支援する。システム１は、情報処理装置１００と、情報処理装置１００に接続された周辺機器（表示装置１０、入力装置２０、ダーモスコープ付き撮影装置３０）を含んでいる。
【０００９】
表示装置１０は、ユーザに情報を表示する表示部の一例である。表示装置１０は、例えば、液晶ディスプレイ、有機ＥＬディスプレイなどである。入力装置２０は、ユーザの操作を受け付ける入力部の一例である。入力装置２０は、例えば、キーボード、マウス、タッチパネルなどである。ダーモスコープは、悪性皮膚腫瘍を疑う対象を拡大して非侵襲的に観察可能な拡大鏡である。ダーモスコープ付き撮影装置３０は、対象を撮影する撮影装置であり、対象のダーモスコピー画像を生成する。対象は、例えば、被検体に生じた変異部分のため、病変の可能性がある部分であり、例えば、皮膚に生じたほくろやいぼなどである。ダーモスコピー画像は、偏光フィルムやジェルを利用して皮膚表面の反射を抑えて、対象を撮影した画像である。生成されたダーモスコピー画像は、情報処理装置１００へ出力される。
【００１０】
情報処理装置１００は、ＣＰＵ１１０と、ＧＰＵ１２０と、記憶装置１３０を備える、汎用若しくは専用のコンピュータである。ＣＰＵ１１０とＧＰＵ１２０は、プロセッサであり、記憶装置１３０に記憶されているプログラムＰＧを実行することで、図２に示す算出部１１１及び表示制御部１１２として動作して、各種処理を行う。なお、１つ以上のプロセッサが含まれていればよく、単一のプロセッサが処理を行っても良いし、複数のプロセッサが共同して処理を行っても良い。記憶装置１３０は、ＣＰＵ１１０やＧＰＵ１２０などのプロセッサが実行するプログラムＰＧ、プログラムＰＧを実行する際に利用するデータ（クエリ画像Ｄｑ、学習用画像Ｄ１、データベースＤＢ）等を記憶する。記憶装置１３０、例えば、ＲＡＭ（ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）やＲＯＭ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ）などの主記憶装置として動作する半導体メモリ、ＳＳＤ（ＳｏｌｉｄＳｔａｔｅＤｒｉｖｅ）やＨＤＤ（ＨａｒｄＤｉｓｋＤｒｉｖｅ）などの補助記憶装置として動作するストレージを含む。
（【００１１】以降は省略されています）

関連特許