特許ウォッチ

公開番号2025037816
公報種別公開特許公報(A)
公開日2025-03-18
出願番号2024135809
出願日2024-08-15
発明の名称画像処理のための方法及び電子機器
出願人日本電気株式会社
代理人個人
主分類A61B 1/045 20060101AFI20250311BHJP(医学または獣医学;衛生学)
要約【課題】画像処理のための方法及び機器を提供する。
【解決手段】プロセス400は、検査中に経時的に内視鏡によって採集される第1画像シーケンスにおける画像に対する対応の予測結果であって、対応の画像が採集された時点で内視鏡が被検査対象の体内に位置しているか否かを示す予測結果の監視を行うことと410、監視に基づいて、第1画像シーケンスから、内視鏡が被検査対象の体内に入ったことに対応する参照画像を決定することと420、参照画像の採集時間の後に内視鏡によって採集された第2画像シーケンスを取得することと430、第2画像シーケンスに基づいて、内視鏡によって検査される被検査対象のターゲット部位を決定することと440、を含む。外部入力に依存することなく自動的にターゲット部位の識別を完了するので、内視鏡検査の前段階動作の正確性と迅速性を確保できる。
【選択図】図4
特許請求の範囲【請求項１】
検査中に経時的に内視鏡によって採集される第１画像シーケンスにおける画像に対する対応の予測結果であって、対応の画像が採集された時点で前記内視鏡が被検査対象の体内に位置しているか否かを示す前記予測結果の監視を行うことと、
前記監視に基づいて、前記第１画像シーケンスから、前記内視鏡が前記被検査対象の体内に入ったことに対応する参照画像を決定することと、
前記参照画像の採集時間の後に前記内視鏡によって採集された第２画像シーケンスを取得することと、
前記第２画像シーケンスに基づいて、前記内視鏡によって検査される前記被検査対象のターゲット部位を決定することと、
を含む、画像処理方法。
続きを表示（約 1,900 文字）【請求項２】
前記第１画像シーケンスは第１画像を含み、前記対応の予測結果は前記第１画像に対する第１予測結果を含み、
前記方法は、トレーニングされた第１分類モデルに基づいて、前記第１画像が採集された時点で前記内視鏡が前記被検査対象の体内にあるか否かに関する第１予測結果を生成すること、をさらに含む、
請求項１に記載の方法。
【請求項３】
前記第１画像シーケンスは第２画像を含み、前記対応の予測結果は、前記第２画像に対する第２予測結果を含み、
前記方法は、
前記第２画像の画像特徴を抽出することと、
参照対象の体内を特徴付ける体内参照特徴に対する前記画像特徴の第１類似度、及び参照対象の体外を特徴付ける体外参照特徴に対する前記画像特徴の第２類似度を決定することと、
前記第１類似度と前記第２類似度とを比較することによって、前記第２画像が採集された時点で前記内視鏡が前記被検査対象の体内に位置しているか否かに関する第２予測結果を生成することと、
をさらに含む、請求項１に記載の方法。
【請求項４】
前記監視に基づいて前記参照画像を決定する前に、
前記第１画像シーケンスから第１数の隣接画像を決定することと、
前記第１数の隣接画像の対応の予測結果に基づいて、前記第１数の隣接画像のうちの中間画像に対する予測結果を設定することと、
をさらに含む、請求項１に記載の方法。
【請求項５】
前記第１数の隣接画像のうちの中間画像に対する予測結果を設定することは、
前記第１数の隣接画像から、前記内視鏡が前記被検査対象の体内に位置していることを対応の予測結果が示す画像を決定することと、
前記決定された画像の数が、前記第１数に関連する第１閾値数よりも大きい場合、前記中間画像に対する予測結果を、前記内視鏡が前記被検査対象の体内にあることを示すものとして設定することと、
前記決定された画像の数が前記第１閾値数よりも大きくない場合、前記中間画像に対する予測結果を、前記内視鏡が前記被検査対象の体内にないことを示すものとして設定することと、
を含む、請求項４に記載の方法。
【請求項６】
前記第１画像シーケンスから、前記内視鏡が前記被検査対象の体内に入ったことに対応する参照画像を決定することは、
前記第１画像シーケンスにおける第２数の連続画像の対応の予測結果が全て、前記内視鏡が前記被検査対象の体内に位置していることを示すか否かを決定することと、
前記第２数の連続画像の対応の予測結果が全て、前記内視鏡が前記被検査対象の体内に位置していることを示すと決定したことに応答して、前記第２数の連続画像に基づいて前記参照画像を決定することと、
を含む、請求項１に記載の方法。
【請求項７】
前記第２数の連続画像に対応する採集時間スパンは、前記内視鏡の画像採集頻度に関連する、請求項６に記載の方法。
【請求項８】
前記参照画像の採集時間の後に前記内視鏡によって採集された第２画像シーケンスを取得することは、
前記参照画像の採集時間の後に前記内視鏡によって採集された個々の画像の画質が閾値画質を超えるか否かを監視することと、
第３画像の画質が前記閾値画質を超えることを監視したことに応答して、前記第３画像の採集時間の後の一定時間内に前記内視鏡によって順次採集された画像を前記第２画像シーケンスとすることと、
を含む、請求項１に記載の方法。
【請求項９】
前記第２画像シーケンスは、前記第２画像シーケンスに対応する採集時間スパンが閾値スパンに等しいこと、又は、前記第２画像シーケンスにおける隣接画像間の画像距離の累積が閾値よりも大きいこと、のうちの少なくとも１つを満たし、
前記画像距離はオプティカルフローに基づいて決定される、請求項１に記載の方法。
【請求項１０】
前記内視鏡によって検査される前記被検査対象のターゲット部位を決定することは、
前記第２画像シーケンスにおける画像に対して、前記ターゲット部位に関する対応の識別結果であって、複数の所定部位のうちの１つを示す前記識別結果を生成することと、
前記対応の識別結果に基づいて前記ターゲット部位を決定することと、
を含む、請求項１に記載の方法。
（【請求項１１】以降は省略されています）
発明の詳細な説明【技術分野】
【０００１】
本開示の例示的な実施例は、一般的にコンピュータの分野に関し、特に画像処理のための方法及び機器に関する。
続きを表示（約 2,000 文字）【背景技術】
【０００２】
画像処理技術は様々な分野で広く利用されている。医療分野でも、大量の医用画像データを処理、分析する需要が高まっている。特に医療用内視鏡画像について、医師がより正確かつ迅速に診断を行うためのソリューションが求められている。
【発明の概要】
【０００３】
本開示の第１態様では、画像処理の方法が提供される。本方法は、検査中に経時的に内視鏡によって採集される第１画像シーケンスにおける画像に対する対応の予測結果であって、対応の画像が採集された時点で内視鏡が被検査対象の体内に位置しているか否かを示す予測結果の監視を行うことと、監視に基づいて、第１画像シーケンスから、内視鏡が被検査対象の体内に入ったことに対応する参照画像を決定することと、参照画像の採集時間の後に内視鏡によって採集された第２画像シーケンスを取得することと、第２画像シーケンスに基づいて、内視鏡によって検査される被検査対象のターゲット部位を決定することと、を含む。
【０００４】
本開示の第２態様では、電子機器が提供される。該電子機器は、少なくとも１つの処理回路を含む。少なくとも１つの処理回路は、検査中に経時的に内視鏡によって採集される第１画像シーケンスにおける画像に対する対応の予測結果であって、対応の画像が採集された時点で内視鏡が被検査対象の体内に位置しているか否かを示す予測結果の監視を行うことと、監視に基づいて、第１画像シーケンスから、内視鏡が被検査対象の体内に入ったことに対応する参照画像を決定することと、参照画像の採集時間の後に内視鏡によって採集された第２画像シーケンスを取得することと、第２画像シーケンスに基づいて、内視鏡によって検査される被検査対象のターゲット部位を決定することと、を実行するように構成される。
【０００５】
第２態様のいくつかの実施例において、第１画像シーケンスは第１画像を含み、対応の予測結果は第１画像に対する第１予測結果を含む。少なくとも１つの処理回路は、第１画像シーケンスにおける第１画像に対して、トレーニングされた第１分類モデルに基づいて、第１画像が採集された時点で内視鏡が被検査対象の体内にあるか否かに関する第１予測結果を生成するようにさらに構成される。
【０００６】
第２態様のいくつかの実施例では、第１画像シーケンスは第２画像を含み、対応の予測結果は第２画像に対する第２予測結果を含む。少なくとも１つの処理回路は、第１画像シーケンスにおける第２画像に対して、第２画像の画像特徴を抽出することと、参照対象の体内を特徴付ける体内参照特徴に対する画像特徴の第１類似度、及び参照対象の体外を特徴付ける体外参照特徴に対する画像特徴の第２類似度を決定することと、第１類似度と第２類似度とを比較することによって、第２画像が採集された時点で内視鏡が被検査対象の体内に位置しているか否かに関する第２予測結果を生成することと、を実行するようにさらに構成される。
【０００７】
第２態様のいくつかの実施例において、少なくとも１つの処理回路は、監視に基づいて参照画像を決定する前に、第１画像シーケンスから第１数の隣接画像を決定することと、第１数の隣接画像の対応の予測結果に基づいて、第１数の隣接画像のうちの中間画像に対する予測結果を設定することと、を実行するようにさらに構成される。
【０００８】
第２態様のいくつかの実施例において、少なくとも１つの処理回路は、第１数の隣接画像から、内視鏡が被検査対象の体内に位置していることを対応の予測結果が示す画像を決定することと、決定された画像の数が、第１数に関連する第１閾値数よりも大きい場合、中間画像に対する予測結果を、内視鏡が被検査対象の体内にあることを示すものとして設定することと、決定された画像の数が第１閾値数よりも大きくない場合、中間画像に対する予測結果を、内視鏡が被検査対象の体内にないことを示すものとして設定することと、を実行するようにさらに構成される。
【０００９】
第２態様のいくつかの実施例において、少なくとも１つの処理回路は、第１画像シーケンスにおける第２数の連続画像の対応の予測結果が全て、内視鏡が被検査対象の体内に位置していることを示すか否かを決定することと、第２数の連続画像の対応の予測結果が全て、内視鏡が被検査対象の体内に位置していることを示すと決定したことに応答して、第２数の連続画像に基づいて参照画像を決定することと、を実行するようにさらに構成される。
【００１０】
第２態様のいくつかの実施例において、第２数の連続画像に対応する採集時間スパンは、内視鏡の画像採集頻度に関連する。
（【００１１】以降は省略されています）

関連特許