特許ウォッチ

公開番号2025069349
公報種別公開特許公報(A)
公開日2025-04-30
出願番号2025016726,2023552478
出願日2025-02-04,2021-10-06
発明の名称監視装置、監視方法及びプログラム
出願人日本電気株式会社
代理人個人
主分類G06V 20/59 20220101AFI20250422BHJP(計算;計数)
要約【課題】運転手の所定行動を高精度に検出する監視装置、運転手監視方法及びプログラムを提供する。
【解決手段】運転手監視装置10は、画像取得部11と、第1の検出部12と、第2の検出部13と、第3の検出部14と、を有する。画像取得部11は、移動体に乗車している人物を撮影した画像を取得する。第1の検出部12は、画像に写る人物の身体の特徴データを抽出し、抽出した特徴データに基づいて、所定の姿勢及び動きの少なくとも一方を検出する。第2の検出部13は、画像の中から所定の物体を検出する。第3の検出部14は、所定の姿勢及び動きの少なくとも一方の検出結果と、所定の物体の検出結果とに基づき、人物の所定行動を検出する。
【選択図】図2
特許請求の範囲【請求項１】
移動体に乗車している人物を撮影した画像を取得する画像取得手段と、
前記画像に写る前記人物の身体の特徴データを抽出し、抽出した前記特徴データに基づいて、所定の姿勢及び動きの少なくとも一方を検出する第１の検出手段と、
前記画像の中から所定の物体を検出する第２の検出手段と、
前記所定の姿勢及び動きの少なくとも一方の検出結果と、前記所定の物体の検出結果とに基づき、前記人物の所定行動を検出する第３の検出手段と、
を有する監視装置。
続きを表示（約 1,100 文字）【請求項２】
前記第１の検出手段は、前記人物の身体のキーポイントを検出し、検出した前記キーポイントに基づき前記特徴データを抽出する請求項１に記載の監視装置。
【請求項３】
前記第３の検出手段は、複数の前記所定行動各々に、所定の姿勢及び動きの少なくとも一方と、前記所定の物体との組み合わせを紐付けた所定行動情報に基づき、前記人物による前記所定行動を検出する請求項１又は２に記載の監視装置。
【請求項４】
前記人物の前記所定行動が検出された場合、その旨を示す情報をユーザに向けて出力し、出力内容の正誤を示すユーザ入力を受付ける正誤入力受付手段と、
出力内容が正しいことを示す前記ユーザ入力を受付けた場合、当該所定行動の検出に用いた前記画像を、当該所定行動を示す画像として外部サーバに送信する送信手段と、
をさらに有する請求項１から３のいずれか１項に記載の監視装置。
【請求項５】
前記ユーザに向けて出力される情報は、前記人物の所定の行動が検出された後、最初に移動体の移動が停止したタイミングで出力される、請求項４に記載の監視装置。
【請求項６】
前記移動体に搭載されたセンサが生成したデータを取得するセンサデータ取得手段をさらに有し、
前記第３の検出手段は、前記所定の姿勢及び動きの少なくとも一方の検出結果と、前記所定の物体の検出結果と、前記センサが生成したデータとに基づき、前記人物の前記所定行動を検出する請求項１から５のいずれか１項に記載の監視装置。
【請求項７】
コンピュータが、
移動体に乗車している人物を撮影した画像を取得する画像取得工程と、
前記画像に写る前記人物の身体の特徴データを抽出し、抽出した前記特徴データに基づいて、所定の姿勢及び動きの少なくとも一方を検出する第１の検出工程と、
前記画像の中から所定の物体を検出する第２の検出工程と、
前記所定の姿勢及び動きの少なくとも一方の検出結果と、前記所定の物体の検出結果とに基づき、前記人物の所定行動を検出する第３の検出工程と、
を実行する監視方法。
【請求項８】
コンピュータを、
移動体に乗車している人物を撮影した画像を取得する画像取得手段、
前記画像に写る前記人物の身体の特徴データを抽出し、抽出した前記特徴データに基づいて、所定の姿勢及び動きの少なくとも一方を検出する第１の検出手段、
前記画像の中から所定の物体を検出する第２の検出手段、
前記所定の姿勢及び動きの少なくとも一方の検出結果と、前記所定の物体の検出結果とに基づき、前記人物の所定行動を検出する第３の検出手段、
として機能させるプログラム。

発明の詳細な説明【技術分野】
【０００１】
本発明は、運転手監視装置、運転手監視方法及びプログラムに関する。
続きを表示（約 1,500 文字）【背景技術】
【０００２】
特許文献１は、運転手による喫煙動作、水飲み動作、食事動作、電話かけ動作、娯楽動作等を検出する技術を開示している。非特許文献１は、人物の骨格推定に関連する技術を開示している。
【先行技術文献】
【特許文献】
【０００３】
特表２０１９－５３６６７３号公報
【非特許文献】
【０００４】
Zhe Cao, Tomas Simon, Shih-En Wei, Yaser Sheikh, "Realtime Multi-Person 2D Pose Estimation using Part Affinity Fields", The IEEE Conference on Computer Vision and Pattern Recognition (CVPR), 2017, P. 7291-7299
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明は、運転手の所定行動を高精度に検出することを課題とする。
【課題を解決するための手段】
【０００６】
本発明によれば、
移動体の運転手を撮影した画像を取得する画像取得手段と、
前記画像に写る前記運転手の身体の特徴データを抽出し、抽出した前記特徴データと参照データとを照合することにより、所定の姿勢及び動きの少なくとも一方を検出する第１の検出手段と、
前記画像の中から所定の物体を検出する第２の検出手段と、
前記所定の姿勢及び動きの少なくとも一方の検出結果と、前記所定の物体の検出結果とに基づき、前記運転手の所定行動を検出する第３の検出手段と、
を有する運転手監視装置が提供される。
【０００７】
また、本発明によれば、
コンピュータが、
移動体の運転手を撮影した画像を取得する画像取得工程と、
前記画像に写る前記運転手の身体の特徴データを抽出し、抽出した前記特徴データと参照データとを照合することにより、所定の姿勢及び動きの少なくとも一方を検出する第１の検出工程と、
前記画像の中から所定の物体を検出する第２の検出工程と、
前記所定の姿勢及び動きの少なくとも一方の検出結果と、前記所定の物体の検出結果とに基づき、前記運転手の所定行動を検出する第３の検出工程と、
を実行する運転手監視方法が提供される。
【０００８】
また、本発明によれば、
コンピュータを、
移動体の運転手を撮影した画像を取得する画像取得手段、
前記画像に写る前記運転手の身体の特徴データを抽出し、抽出した前記特徴データと参照データとを照合することにより、所定の姿勢及び動きの少なくとも一方を検出する第１の検出手段、
前記画像の中から所定の物体を検出する第２の検出手段、
前記所定の姿勢及び動きの少なくとも一方の検出結果と、前記所定の物体の検出結果とに基づき、前記運転手の所定行動を検出する第３の検出手段、
として機能させるプログラムが提供される。
【発明の効果】
【０００９】
本発明によれば、運転手の所定行動を高精度に検出することができる。
【図面の簡単な説明】
【００１０】
上述した目的、およびその他の目的、特徴および利点は、以下に述べる公的な実施の形態、およびそれに付随する以下の図面によってさらに明らかになる。
（【００１１】以降は省略されています）

関連特許