特許ウォッチ

公開番号2025001600
公報種別公開特許公報(A)
公開日2025-01-08
出願番号2023101278
出願日2023-06-20
発明の名称行動制御システム
出願人ソフトバンクグループ株式会社
代理人弁理士法人太陽国際特許事務所
主分類G09B 21/00 20060101AFI20241225BHJP(教育;暗号方法;表示;広告;シール)
要約【課題】障害者を含めたユーザの生活の質を向上させる。
【解決手段】行動制御システムは、ユーザ入力を受け付ける入力部と、入力文章に応じた文章を生成する文章生成モデルを用いた特定処理を行う処理部と、前記特定処理の結果を出力するように、電子機器の行動を制御する出力部と、を含み、前記処理部は、予め定められたトリガ条件を満たすか否かを判定し、前記トリガ条件を満たした場合に、ユーザが装着するウェアラブル端末に備わるカメラから得られる情報と、前記ユーザ入力から得られる情報とを、前記入力文章としたときの前記文章生成モデルの出力を用いて、前記特定処理の結果として、視覚障害者に必要となる情報を取得し、前記出力部は、前記視覚障害者に必要となる情報を、音声により出力する。
【選択図】図2
特許請求の範囲【請求項１】
ユーザ入力を受け付ける入力部と、
入力文章に応じた文章を生成する文章生成モデルを用いた特定処理を行う処理部と、
前記特定処理の結果を出力するように、電子機器の行動を制御する出力部と、を含み、
前記処理部は、
予め定められたトリガ条件を満たすか否かを判定し、
前記トリガ条件を満たした場合に、ユーザが装着するウェアラブル端末に備わるカメラから得られる情報と、前記ユーザ入力から得られる情報とを、前記入力文章としたときの前記文章生成モデルの出力を用いて、前記特定処理の結果として、視覚障害者に必要となる情報を取得し、
前記出力部は、前記視覚障害者に必要となる情報を、音声により出力する
行動制御システム。
続きを表示（約 1,000 文字）【請求項２】
ユーザ入力を受け付ける入力部と、
入力文章に応じた文章を生成する文章生成モデルを用いた特定処理を行う処理部と、
前記特定処理の結果を出力するように、電子機器の行動を制御する出力部と、を含み、
前記処理部は、
予め定められたトリガ条件を満たすか否かを判定し、
前記トリガ条件を満たした場合に、ユーザが装着するウェアラブル端末に備わるマイクから得られる情報と、前記ユーザ入力から得られる情報とを、前記入力文章としたときの前記文章生成モデルの出力を用いて、前記特定処理の結果として、聴覚障害者に必要となる情報を取得し、
前記出力部は、前記聴覚障害者に必要となる情報を、視覚的表現により出力する
行動制御システム。
【請求項３】
ユーザ入力を受け付ける入力部と、
入力文章に応じた文章を生成する文章生成モデルを用いた特定処理を行う処理部と、
前記特定処理の結果を出力するように、電子機器の行動を制御する出力部と、を含み、
前記処理部は、
予め定められたトリガ条件を満たすか否かを判定し、
前記トリガ条件を満たした場合に、ユーザが装着するウェアラブル端末に備わるカメラから得られる情報と、前記ユーザ入力から得られる情報とを、前記入力文章としたときの前記文章生成モデルの出力を用いて、前記特定処理の結果として、手話をテキスト変換した情報を取得し、
前記出力部は、前記手話をテキスト変換した情報を、視覚的表現又は音声により出力する
行動制御システム。
【請求項４】
ユーザの行動を含むユーザ状態、及び電子機器の状態を認識する状態認識部を更に含み、
前記処理部は、前記ユーザ状態又は前記電子機器の状態と、前記文章生成モデルとを用いた前記特定処理を行う請求項１から請求項３のいずれか１項記載の行動制御システム。
【請求項５】
ユーザの感情又は電子機器の感情を判定する感情決定部と、
前記処理部は、前記ユーザの感情又は前記電子機器の感情と、前記文章生成モデルとを用いた前記特定処理を行う請求項１から請求項３のいずれか１項記載の行動制御システム。
【請求項６】
前記電子機器はウェアラブル端末である請求項１から請求項３のいずれか１項記載の行動制御システム。
【請求項７】
前記ウェアラブル端末は、眼鏡型端末である請求項６記載の行動制御システム。

発明の詳細な説明【技術分野】
【０００１】
本発明は、行動制御システムに関する。
続きを表示（約 2,700 文字）【背景技術】
【０００２】
特許文献１には、少なくとも一つのプロセッサにより遂行される、ペルソナチャットボット制御方法であって、ユーザ発話を受信するステップと、前記ユーザ発話を、チャットボットのキャラクターに関する説明と関連した指示文を含むプロンプトに追加するステップと前記プロンプトをエンコードするステップと、前記エンコードしたプロンプトを言語モデルに入力して、前記ユーザ発話に応答するチャットボット発話を生成するステップ、を含む、方法が開示されている。
【先行技術文献】
【特許文献】
【０００３】
特開２０２２－１８０２８２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら従来技術では、障害者を含めたユーザの生活の質を向上させる上で改善の余地がある。
【課題を解決するための手段】
【０００５】
本発明の第１の態様によれば、行動制御システムが提供される。当該行動制御システムは、ユーザ入力を受け付ける入力部と、入力文章に応じた文章を生成する文章生成モデルを用いた特定処理を行う処理部と、前記特定処理の結果を出力するように、電子機器の行動を制御する出力部と、を含み、前記処理部は、予め定められたトリガ条件を満たすか否かを判定し、前記トリガ条件を満たした場合に、ユーザが装着するウェアラブル端末に備わるカメラから得られる情報と、前記ユーザ入力から得られる情報とを、前記入力文章としたときの前記文章生成モデルの出力を用いて、前記特定処理の結果として、視覚障害者に必要となる情報を取得し、前記出力部は、前記視覚障害者に必要となる情報を、音声により出力する。
前記電子機器はロボットであってもよい。ここで、ロボットとは、物理的な動作を行う装置、物理的な動作を行わずに映像や音声を出力する装置、及びソフトウェア上で動作するエージェントを含む。
【図面の簡単な説明】
【０００６】
第１実施形態に係るシステム５の一例を概略的に示す。
第１実施形態に係るロボット１００の機能構成を概略的に示す。
第１実施形態に係るロボット１００による収集処理の動作フローの一例を概略的に示す。
第１実施形態に係るロボット１００による応答処理の動作フローの一例を概略的に示す。
第１実施形態に係るロボット１００による自律的処理の動作フローの一例を概略的に示す。
複数の感情がマッピングされる感情マップ４００を示す。
複数の感情がマッピングされる感情マップ９００を示す。
（Ａ）第２実施形態に係るぬいぐるみ１００Ｎの外観図、（Ｂ）ぬいぐるみ１００Ｎの内部構造図である。
第２実施形態に係るぬいぐるみ１００Ｎの背面正面図である。
第２実施形態に係るぬいぐるみ１００Ｎの機能構成を概略的に示す。
第３実施形態に係るエージェントシステム５００の機能構成を概略的に示す。
エージェントシステムの動作の一例を示す。
エージェントシステムの動作の一例を示す。
第４実施形態に係るスマート眼鏡７２０で用いるエージェントシステム７００の機能構成を概略的に示す。
第４実施形態に係るエージェントシステム７００の特定処理部の機能構成を概略的に示す。
スマート眼鏡によるエージェントシステムの利用態様の一例を示す。
第４実施形態に係るエージェントシステム７００による特定処理の動作フローの一例を概略的に示す。
コンピュータ１２００のハードウェア構成の一例を概略的に示す。
第１特定処理の概要を示す。
第２特定処理の概要を示す。
第３特定処理の概要を示す。
【発明を実施するための形態】
【０００７】
以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
【０００８】
［第１実施形態］
図１は、本実施形態に係るシステム５の一例を概略的に示す。システム５は、ロボット１００、ロボット１０１、ロボット１０２、及びサーバ３００を備える。ユーザ１０ａ、ユーザ１０ｂ、ユーザ１０ｃ、及びユーザ１０ｄは、ロボット１００のユーザである。ユーザ１１ａ、ユーザ１１ｂ及びユーザ１１ｃは、ロボット１０１のユーザである。ユーザ１２ａ及びユーザ１２ｂは、ロボット１０２のユーザである。なお、本実施形態の説明において、ユーザ１０ａ、ユーザ１０ｂ、ユーザ１０ｃ、及びユーザ１０ｄを、ユーザ１０と総称する場合がある。また、ユーザ１１ａ、ユーザ１１ｂ及びユーザ１１ｃを、ユーザ１１と総称する場合がある。また、ユーザ１２ａ及びユーザ１２ｂを、ユーザ１２と総称する場合がある。ロボット１０１及びロボット１０２は、ロボット１００と略同一の機能を有する。そのため、ロボット１００の機能を主として取り上げてシステム５を説明する。
【０００９】
ロボット１００は、ユーザ１０と会話を行ったり、ユーザ１０に映像を提供したりする。このとき、ロボット１００は、通信網２０を介して通信可能なサーバ３００等と連携して、ユーザ１０との会話や、ユーザ１０への映像等の提供を行う。例えば、ロボット１００は、自身で適切な会話を学習するだけでなく、サーバ３００と連携して、ユーザ１０とより適切に会話を進められるように学習を行う。また、ロボット１００は、撮影したユーザ１０の映像データ等をサーバ３００に記録させ、必要に応じて映像データ等をサーバ３００に要求して、ユーザ１０に提供する。
【００１０】
また、ロボット１００は、自身の感情の種類を表す感情値を持つ。例えば、ロボット１００は、「喜」、「怒」、「哀」、「楽」、「快」、「不快」、「安心」、「不安」、「悲しみ」、「興奮」、「心配」、「安堵」、「充実感」、「虚無感」及び「普通」のそれぞれの感情の強さを表す感情値を持つ。ロボット１００は、例えば興奮の感情値が大きい状態でユーザ１０と会話するときは、早いスピードで音声を発する。このように、ロボット１００は、自己の感情を行動で表現することができる。
（【００１１】以降は省略されています）

関連特許