特許ウォッチ

公開番号2025142067
公報種別公開特許公報(A)
公開日2025-09-29
出願番号2025120089
出願日2025-06-30
発明の名称体験支援型装着端末およびAIキャラクターによる対話支援システム
出願人個人
代理人
主分類G06N 3/006 20230101AFI20250919BHJP(計算;計数)
要約【課題】ユーザーの体験活動に対して適切な支援情報を提示することが困難であるという課題を解決する。
【解決手段】視線位置、注視対象または音声入力に基づいて対象シーンを自動識別し、該当する支援情報を対話型AIキャラクターが映像または音声で提示する体験支援システムを提供する。育児、職業体験、空間設計、感情応答、多言語ナビ、翻訳支援等にも対応可能であり、ユーザーの行動や感情に応じて内容を適応制御し、体験の質を高める。
【選択図】図1
特許請求の範囲【請求項１】
視覚情報の取得機能および音声入力機能を有する装着型の情報端末において、ユーザーの視線位置、注視対象又は音声入力に基づいて、ユーザーが注目する実空間又は仮想空間上の対象シーンを自動的に特定し、当該対象シーンに対応する支援情報を、対話型のＡＩキャラクターを介して、映像表示又は音声出力により提示することにより、ユーザーの体験活動を誘導又は補助する体験支援システム。
続きを表示（約 1,200 文字）【請求項２】
請求項１に記載の体験支援システムにおいて、前記支援情報が育児に関する仮想的又は疑似的な体験コンテンツを含み、前記ＡＩキャラクターが仮想的な子どもキャラクターを生成して制御し、ユーザーの発話、視線、行動又は感情反応に応じて、育児支援、育児提案又は共感的対話を動的に実行する機能を備える体験支援システム。
【請求項３】
請求項１又は２に記載の体験支援システムにおいて、前記体験活動が特定の職業を模擬した仮想環境又は拡張現実環境を含み、前記ＡＩキャラクターが業務手順、選択肢又は会話シナリオを提示し、ユーザーの行動又は選択結果に応じて体験シナリオを分岐及び変化させる機能を備える体験支援システム。
【請求項４】
請求項１から３のいずれかに記載の体験支援システムにおいて、ユーザーの視界上に仮想的な家具、建築部品、インテリア要素又は構造物を拡張現実として重畳表示し、前記ＡＩキャラクターが当該表示対象の配置、動線、景観又は導線設計に関して、提案、比較、シミュレーション又は感性的コメントを提示することにより、ユーザーによる空間設計及び感覚的選択を支援する体験支援システム。
【請求項５】
請求項１から４のいずれかに記載の体験支援システムにおいて、ユーザーの表情、音声の抑揚、発話の停滞、視線の動き又はジェスチャーに基づいて感情状態又は心理傾向を推定し、前記ＡＩキャラクターの発話テンポ、音声の種類、内容、口調、表情又は提示情報の難易度を適応的に調整することにより、ユーザーの心理状態に適合した共体験支援を実現する体験支援システム。
【請求項６】
請求項１から５のいずれかに記載の体験支援システムにおいて、ユーザーの体験内容、発言、選択、感情反応、視線履歴及び行動ログをクラウド上に時系列で記録し、当該記録データをユーザー本人、家族、教育機関又は第三者と共有可能とし、閲覧、再生、比較、分析又は編集履歴の確認を可能にする振り返り機能を備える体験支援システム。
【請求項７】
請求項１から６のいずれかに記載の体験支援システムにおいて、前記ＡＩキャラクターが複数言語に対応し、音声出力、画面表示、選択肢提示及び対話ナビゲーションを、ユーザーの選択又は使用状況に応じて言語切替して実行することにより、教育支援、旅行支援、面接支援又は異文化対応支援を多言語で実施可能とする体験支援システム。
【請求項８】
請求項１から７のいずれかに記載の体験支援システムにおいて、地図情報、位置情報及びルート案内情報を取得し、ユーザーの現在位置及び目的地に基づく経路を前記ＡＩキャラクターが提示し、視界内に仮想的な案内表示又はキャラクターの誘導動作を表示するとともに、音声により進行方向、到達予想時間又は注意点を通知し、外国語による会話が行われた場合には当該内容を翻訳し、ユーザーの入力又は反応に基づいて返答を行う通訳機能を備える体験支援システム。

発明の詳細な説明【技術分野】
【０００１】
本発明は、視線や音声入力に基づいてユーザーの注目対象を自動的に特定し、当該対象に対応する支援情報を対話型のＡＩキャラクターを介して提示する体験支援システムに関し、特に、装着型情報端末と連携して仮想空間や拡張現実環境を用いた育児体験、職業体験、空間設計支援、ナビゲーション、通訳、教育支援など多岐にわたる応用に対応可能な技術に関する。
続きを表示（約 1,400 文字）【背景技術】
【０００２】
近年、仮想現実（ＶＲ）や拡張現実（ＡＲ）技術の発展とともに、ユーザーの行動や心理状態に応じて支援を行うインタラクティブな体験環境のニーズが高まっている。また、自然言語による対話型のＡＩキャラクターを用いた案内やサポート技術も広く実用化が進められているが、従来の技術ではユーザーの注目する対象をリアルタイムに特定し、その状況に最適な支援情報を提供する機能が限定的である。
【発明の概要】
【発明が解決しようとする課題】
【０００３】
本発明は、視線位置、注視対象または音声入力に基づいてユーザーの関心対象を自動的に特定し、その対象に関連する支援情報をＡＩキャラクターによって提示することにより、ユーザーの体験活動を誘導または補助可能な体験支援システムに関する。
【０００４】
本発明に係る体験支援システムは、視覚情報の取得機能および音声入力機能を有する装着型の情報端末を含み、ユーザーの視線、注視方向、音声内容等に基づいて、実空間または仮想空間内の対象シーンを自動的に認識し、当該シーンに応じた支援情報を映像または音声により提示することを特徴とする。
【０００５】
本体験支援システムは、例えば育児に関する仮想的または疑似的な体験コンテンツを提供する構成としてもよい。ＡＩキャラクターは仮想の子どもキャラクターとして生成され、ユーザーの発話、視線、行動、または感情反応に基づいて、育児支援、提案、共感的対話を動的に実行する。
【０００６】
また、本体験支援システムは、特定の職業に関する模擬環境を提示する構成としてもよい。この場合、ＡＩキャラクターはユーザーの行動に応じた業務手順、選択肢、会話フロー等を提示し、ユーザーの選択によりシナリオの展開が変化する体験を提供する。
【０００７】
さらに、ユーザーの視界上に仮想的な家具、建築部品、インテリア要素、構造物等を拡張現実として重畳表示する構成としてもよい。ＡＩキャラクターは当該表示対象に関して、配置、動線、景観設計、感性的評価に基づいた提案やシミュレーションを行い、空間設計に関する選択支援を行う。
【０００８】
本体験支援システムにおいては、ユーザーの表情、声の抑揚、発話の停滞、視線の動き、ジェスチャー等の情報に基づいて感情状態または心理傾向を推定し、その状態に応じてＡＩキャラクターの発話テンポ、音声種別、内容、表情、出力タイミング等を動的に調整する構成とすることで、ユーザーの心理状態に適合した共体験支援を実現する。
【０００９】
さらに、ユーザーの体験内容、発言、選択、感情反応、視線履歴、行動ログ等をクラウド上に時系列で記録し、当該データをユーザー自身または保護者、教育機関、第三者と共有し、閲覧、再生、比較、分析または編集履歴の確認等が可能な振り返り機能を備える構成とすることもできる。
【００１０】
また、前記ＡＩキャラクターは複数言語に対応可能であり、音声出力、画面表示、選択肢提示、ナビゲーション等をユーザーの選択または利用状況に応じて言語を切替えて実行することにより、教育支援、旅行支援、面接支援または異文化対応支援を多言語で提供可能とする。
（【００１１】以降は省略されています）

関連特許