特許ウォッチ

公開番号2025056787
公報種別公開特許公報(A)
公開日2025-04-08
出願番号2024166036
出願日2024-09-25
発明の名称システム
出願人ソフトバンクグループ株式会社
代理人弁理士法人太陽国際特許事務所
主分類G09B 21/00 20060101AFI20250331BHJP(教育;暗号方法;表示;広告;シール)
要約【課題】視覚や聴覚障害者がスポーツ観戦をする際に、実況中継の情報を十分に享受することを可能とするシステムを提供する。
【解決手段】スポーツ観戦の実況中継の音声情報を取得する手段と、取得した音声情報のテキスト情報への変換を指示する第1のプロンプト文を生成する手段と、生成された前記第1のプロンプト文と、生成AIモデルとを用いて、取得した音声情報に対応するテキスト情報を生成する手段と、生成されたテキスト情報の手話データ又は点字データへの変換を指示する第2のプロンプト文を生成する手段と、生成された前記第2のプロンプト文と、前記生成AIモデルとを用いて、生成されたテキスト情報に対応する手話データ又は点字データを生成する手段と、手話アニメーションソフトウェアを用いて、生成された手話データを視覚的に表示する手段と、生成された点字データを点字ディスプレイに出力する手段と、を含むシステム。
【選択図】図1
特許請求の範囲【請求項１】
スポーツ観戦の実況中継の音声情報を取得する手段と、
取得した音声情報のテキスト情報への変換を指示する第１のプロンプト文を生成する手段と、
生成された前記第１のプロンプト文と、生成ＡＩモデルとを用いて、取得した音声情報に対応するテキスト情報を生成する手段と、
生成されたテキスト情報の手話データ又は点字データへの変換を指示する第２のプロンプト文を生成する手段と、
生成された前記第２のプロンプト文と、前記生成ＡＩモデルとを用いて、生成されたテキスト情報に対応する手話データ又は点字データを生成する手段と、
手話アニメーションソフトウェアを用いて、生成された手話データを視覚的に表示する手段と、
生成された点字データを点字ディスプレイに出力する手段と、
を含むシステム。
続きを表示（約 300 文字）【請求項２】
ユーザーの表情や声のトーン、言葉の選び方などから感情エンジンを用いてユーザーの感情状態を推定する手段をさらに含み、
生成されたテキスト情報に対応する手話データ又は点字データを生成する手段は、推定されたユーザーの感情状態に応じて、エキサイティングなシーンが強調された手話データ又は点字データを生成する、
請求項１記載のシステム。
【請求項３】
生成されたテキスト情報に基づいて、重要なハイライト場面や試合内容に関する統計情報を生成する手段と、
生成されたハイライト場面や統計情報を出力する手段と、
をさらに含む請求項１記載のシステム。

発明の詳細な説明【技術分野】
【０００１】
本開示の技術は、システムに関する。
続きを表示（約 2,200 文字）【背景技術】
【０００２】
特許文献１には、少なくとも一つのプロセッサにより遂行される、ペルソナチャットボット制御方法であって、ユーザ発話を受信するステップと、前記ユーザ発話を、チャットボットのキャラクターに関する説明と関連した指示文を含むプロンプトに追加するステップと前記プロンプトをエンコードするステップと、前記エンコードしたプロンプトを言語モデルに入力して、前記ユーザ発話に応答するチャットボット発話を生成するステップ、を含む、方法が開示されている。
【先行技術文献】
【特許文献】
【０００３】
特開２０２２－１８０２８２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
視覚や聴覚障害者がスポーツ観戦をする際に、実況中継の情報を十分に享受できないという課題が存在する。
【課題を解決するための手段】
【０００５】
この課題を解決するための手段として、実況中継音声データを取り込み、生成ＡＩにて解析し、リアルタイムで手話や点字に変換するシステムを提供する。さらに、生成ＡＩは実況中継音声データの情報を基に、視覚や聴覚障害者がスポーツ観戦を楽しむための情報を生成し、該情報をリアルタイムで出力する。
【図面の簡単な説明】
【０００６】
第１実施形態に係るデータ処理システムの構成の一例を示す概念図である。
第１実施形態に係るデータ処理装置及びスマートデバイスの要部機能の一例を示す概念図である。
第２実施形態に係るデータ処理システムの構成の一例を示す概念図である。
第２実施形態に係るデータ処理装置及びスマート眼鏡の要部機能の一例を示す概念図である。
第３実施形態に係るデータ処理システムの構成の一例を示す概念図である。
第３実施形態に係るデータ処理装置及びヘッドセット型端末の要部機能の一例を示す概念図である。
第４実施形態に係るデータ処理システムの構成の一例を示す概念図である。
第４実施形態に係るデータ処理装置及びロボットの要部機能の一例を示す概念図である。
複数の感情がマッピングされる感情マップを示す。
複数の感情がマッピングされる感情マップを示す。
形態例１の実施例１におけるデータ処理システムの処理の流れを示すシーケンス図である。
形態例１の応用例１におけるデータ処理システムの処理の流れを示すシーケンス図である。
形態例２の実施例２におけるデータ処理システムの処理の流れを示すシーケンス図である。
形態例２の応用例２におけるデータ処理システムの処理の流れを示すシーケンス図である。
形態例３の実施例３におけるデータ処理システムの処理の流れを示すシーケンス図である。
形態例３の応用例３におけるデータ処理システムの処理の流れを示すシーケンス図である。
感情エンジンを組み合わせた場合の形態例１の実施例１におけるデータ処理システムの処理の流れを示すシーケンス図である。
感情エンジンを組み合わせた場合の形態例１の応用例１におけるデータ処理システムの処理の流れを示すシーケンス図である。
感情エンジンを組み合わせた場合の形態例２の実施例２におけるデータ処理システムの処理の流れを示すシーケンス図である。
感情エンジンを組み合わせた場合の形態例２の応用例２におけるデータ処理システムの処理の流れを示すシーケンス図である。
感情エンジンを組み合わせた場合の形態例３の実施例３におけるデータ処理システムの処理の流れを示すシーケンス図である。
感情エンジンを組み合わせた場合の形態例３の応用例３におけるデータ処理システムの処理の流れを示すシーケンス図である。
【発明を実施するための形態】
【０００７】
以下、添付図面に従って本開示の技術に係るシステムの実施形態の一例について説明する。
【０００８】
先ず、以下の説明で使用される文言について説明する。
【０００９】
以下の実施形態において、符号付きのプロセッサ（以下、単に「プロセッサ」と称する）は、１つの演算装置であってもよいし、複数の演算装置の組み合わせであってもよい。また、プロセッサは、１種類の演算装置であってもよいし、複数種類の演算装置の組み合わせであってもよい。演算装置の一例としては、ＣＰＵ（Central Processing Unit）、ＧＰＵ（Graphics Processing Unit）、ＧＰＧＰＵ（General-Purpose computing on Graphics Processing Units）、ＡＰＵ（Accelerated Processing Unit）、又はＴＰＵ（ＴＥＮＳＯＲＰＲＯＣＥＳＳＩＮＧＵＮＩＴ（登録商標））等が挙げられる。
【００１０】
以下の実施形態において、符号付きのＲＡＭ（Random Access Memory）は、一時的に情報が格納されるメモリであり、プロセッサによってワークメモリとして用いられる。
（【００１１】以降は省略されています）

関連特許