特許ウォッチ

公開番号2024130263
公報種別公開特許公報(A)
公開日2024-09-30
出願番号2023039890
出願日2023-03-14
発明の名称データ生成装置およびデータ生成方法
出願人オムロン株式会社
代理人個人
主分類G06Q 50/04 20120101AFI20240920BHJP(計算;計数)
要約【課題】動画解析モデルを作成するために必要な学習データの作成を効率的かつ正確に行う。
【解決手段】データ生成装置(1)は、生産作業が撮像された複数の動画データのそれぞれに対して作業内容情報を対応付けて表示する情報表示制御部(101)と、動画データを再生する再生表示制御部(102)と、動画データと作業内容情報との対応付けが確認済みである旨の指示入力を受け付ける入力受付部(103)と、動画データと作業内容情報との対応付けの情報を出力データとして出力するデータ出力制御部(104)と、を備える。情報表示制御部(101)は、指示入力を受け付けた動画データと作業内容情報との対応付けの表示を、指示入力を受け付けていない動画データと作業内容情報との対応付けの表示と異なる表示形式で表示する制御を行う。
【選択図】図4
特許請求の範囲【請求項１】
生産作業が撮像された複数の動画データのそれぞれに対して、作業内容情報を対応付けて表示する制御を行う情報表示制御部と、
前記動画データを再生表示する再生表示制御部と、
前記動画データと前記作業内容情報との対応付けが確認済みである旨の指示入力を受け付ける入力受付部と、
前記入力受付部によって入力が受け付けられた前記動画データと前記作業内容情報との対応付けの情報を出力データとして出力するデータ出力制御部と、を備え、
前記情報表示制御部は、前記入力受付部によって確認済みである旨の指示入力を受け付けた前記動画データと前記作業内容情報との対応付けの表示を、前記入力受付部によって確認済みである旨の指示入力を受け付けていない前記動画データと前記作業内容情報との対応付けの表示と異なる表示形式で表示する制御を行う、データ生成装置。
続きを表示（約 1,200 文字）【請求項２】
前記入力受付部は、さらに前記動画データに対応付けられている前記作業内容情報の入力および変更を受け付ける、請求項１記載のデータ生成装置。
【請求項３】
複数の前記動画データのそれぞれに対して、前記作業内容情報を対応付ける第１動画解析モデルによって出力された第１出力データを取得するデータ取得部をさらに備え、
前記情報表示制御部は、前記第１出力データに基づいて表示制御を行う、請求項１に記載のデータ生成装置。
【請求項４】
前記情報表示制御部は、前記動画データを特定する情報と、対応付けられた前記作業内容情報とを、リスト形式で表示する制御を行うとともに、前記入力受付部によって確認済みである旨の指示入力を受け付けた前記動画データと前記作業内容情報との対応付けの表示を、前記入力受付部によって確認済みである旨の指示入力を受け付けていない前記動画データと前記作業内容情報との対応付けの表示と異なる、背景色、文字色、およびフォント形式の少なくともいずれか１つの表示形式で表示する制御を行う、請求項１に記載のデータ生成装置。
【請求項５】
前記情報表示制御部は、前記動画データが撮像された時間を示す時間領域に、該動画データに対応付けられた前記作業内容情報の種類に対応する色を表示するタイムチャート形式で表示する制御を行うとともに、前記入力受付部によって確認済みである旨の指示入力を受け付けた前記時間領域の表示の色を、前記入力受付部によって確認済みである旨の指示入力を受け付けていない前記時間領域の表示の色とを異ならせて表示する制御を行う、請求項１に記載のデータ生成装置。
【請求項６】
前記データ出力制御部は、前記入力受付部によって確認済みである旨の指示入力を受け付けた前記動画データと前記作業内容情報との対応付けの情報のみを前記出力データとして出力する、請求項１に記載のデータ生成装置。
【請求項７】
生産作業が撮像された複数の動画データのそれぞれに対して、作業内容情報を対応付けて表示する制御を行う情報表示制御ステップと、
前記動画データを再生表示する再生表示制御ステップと、
前記動画データと前記作業内容情報との対応付けが確認済みである旨の指示入力を受け付ける入力受付ステップと、
前記入力受付ステップによって入力が受け付けられた前記動画データと前記作業内容情報との対応付けの情報を出力データとして出力するデータ出力制御ステップと、を有し、
前記情報表示制御ステップは、前記入力受付ステップによって確認済みである旨の指示入力を受け付けた前記動画データと前記作業内容情報との対応付けの表示を、前記入力受付ステップによって確認済みである旨の指示入力を受け付けていない前記動画データと前記作業内容情報との対応付けの表示と異なる表示形式で表示する制御を行う、データ生成方法。

発明の詳細な説明【技術分野】
【０００１】
本発明は、動画解析モデルを作成するために必要な学習データを生成するデータ生成装置等に関する。
続きを表示（約 1,600 文字）【背景技術】
【０００２】
従来、工場等の生産現場における作業工程の実施状況を動画として撮像し、動画データを解析することによって生産性および品質を向上させる取り組みが行われている。この動画データの解析において、昨今ではＡＩ(Artificial Intelligence)を用いて動画解析モデルを作成し、自動的に作業内容を判断することが行われている。
【０００３】
動画解析モデルを作成するためには、学習データ（教師データ）としての動画データを大量に用意する必要がある。この学習データを作成するために、各動画データに作業内容を対応付けるアノテーションという作業が必要となる。
【先行技術文献】
【特許文献】
【０００４】
特許第４２２１０１１号公報
特開２０１９－１５９８８４号公報
特開２００４－３６３８３１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
上記のように、学習データとしての大量の動画データに対してアノテーションを行う必要があるため、この作業にかかる時間が膨大となるという問題がある。また、作業内容の対応付けにミスがあると、学習データの正確性が低くなり、ひいては動画解析モデルの精度低下につながるという問題もある。
【０００６】
本発明の一態様は、動画解析モデルを作成するために必要な学習データの作成を効率的かつ正確に行うことが可能なデータ生成装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記の課題を解決するために、本発明の一側面に係るデータ生成装置は、生産作業が撮像された複数の動画データのそれぞれに対して、作業内容情報を対応付けて表示する制御を行う情報表示制御部と、前記動画データを再生表示する再生表示制御部と、前記動画データと前記作業内容情報との対応付けが確認済みである旨の指示入力を受け付ける入力受付部と、前記入力受付部によって入力が受け付けられた前記動画データと前記作業内容情報との対応付けの情報を出力データとして出力するデータ出力制御部と、を備え、前記情報表示制御部は、前記入力受付部によって確認済みである旨の指示入力を受け付けた前記動画データと前記作業内容情報との対応付けの表示を、前記入力受付部によって確認済みである旨の指示入力を受け付けていない前記動画データと前記作業内容情報との対応付けの表示と異なる表示形式で表示する制御を行う。
【０００８】
上記の構成によれば、動画データと作業内容情報との対応付けが表示されるとともに、動画データと作業内容情報との対応付けが確認済みである旨の指示入力が可能となっている。よって、利用者は動画データを再生表示して内容を確認して、確認した動画データに関しては、確認済みの指示入力を行う。ここで、確認済みである旨の指示入力を受け付けた動画データと作業内容情報との対応付けの表示が、確認済みである旨の指示入力を受け付けていない動画データと作業内容情報との対応付けの表示と異なる表示形式で表示されるので、利用者は、どの動画データを確認したかを容易に確認することができる。よって、動画解析モデルを作成するために必要な学習データの作成を効率的かつ正確に行うことが可能となる。
【０００９】
本発明の一側面に係るデータ生成装置においては、前記入力受付部は、さらに前記動画データに対応付けられている前記作業内容情報の入力および変更を受け付ける構成としてもよい。
【００１０】
上記の構成によれば、作業内容情報の入力および変更が可能となっている。よって、利用者は動画データを再生表示して内容を確認して、作業内容情報を入力および変更することが可能となっている。
（【００１１】以降は省略されています）

関連特許