JP7488625B1 - 情報処理システム、情報処理方法及びプログラム - Google Patents

Abstract

本発明の一態様によれば、情報処理システムが提供される。この情報処理システムは、複数の通信端末のうちの１の通信端末から複数の通信端末のうちの１の通信端末以外の他の通信端末への通信を制御する。他の通信端末における設定情報に基づき他の通信端末の通信時における表示画面を変更するよう制御する。設定情報には、録音機能を有効にするか否か、と、文字起こし機能を有効にするか否か、と、の情報が含まれる。【選択図】図１

Description

本発明は、情報処理システム、情報処理方法及びプログラムに関する。

特許文献１には、１対多のグループ一斉音声通信を実現するシステムにおいて、情報の伝達ミスを低減可能な信号処理装置について開示されている。

特開２０１９－４３９２号公報

１対多、又は１対１の通信を行うシステムにおいて、システムを構成する装置ごとに複数の機能を有している場合がある。このような場合において装置ごとに複数の機能それぞれの設定が異なる場合がある。このような場合において各装置のユーザーインターフェースを適切に制御することが求められる。

しかしながら、特許文献１では複数の機能それぞれの設定に応じた適切なユーザーインターフェースの制御についての開示はされていない。

本発明の一態様によれば、情報処理システムであって、複数の通信端末のうちの１の通信端末から前記複数の通信端末のうちの前記１の通信端末以外の他の通信端末への通信を制御し、前記他の通信端末は１以上の通信端末であり、前記他の通信端末における設定情報に基づき前記他の通信端末の通信時における表示画面を変更するよう制御し、前記設定情報には、録音機能を有効にするか否か、と、文字起こし機能を有効にするか否か、との情報が含まれ、前記１の通信端末のユーザーと通信中のユーザーの通信端末の前記設定情報が、録音機能を無効、文字起こし機能を無効を示していた場合、前記通信中のユーザーの通信端末の表示画面にはチャットの内容を示すテキスト情報が含まれるよう制御する情報処理システムが提供される。

また、本発明の他の態様によれば、前記情報処理システムにおいて、前記設定情報には更に、同時通訳設定を有効にするか否かの情報が含まれ、前記他の通信端末における前記設定情報に含まれる同時通訳設定を有効にするか否かの情報に応じて、前記他の通信端末における音声の出力を制御する情報処理システムが提供される。

また、本発明の他の態様によれば、前記情報処理システムにおいて、同時通訳設定を有効にする情報を含む設定情報の通信端末では、話者によるオリジナルの言語であるオリジナル言語での音声の出力に続いて前記通信端末において選択された言語で通訳された音声が出力されるよう制御する情報処理システムが提供される。

また、本発明の他の態様によれば、前記テキスト情報は、発信されたチャットの内容のテキスト情報か、受信されたチャットの内容のテキスト情報かを識別可能に前記表示画面に表示される情報処理システムが提供される。

また、本発明の他の態様によれば、前記１の通信端末のユーザーと通信中のユーザーの通信端末の前記設定情報が、録音機能を有効、文字起こし機能を無効、を示していた場合、前記通信中のユーザーの通信端末の表示画面にはチャットの内容を示すテキスト情報と音声を録音していることを示す波形グラフとが含まれるよう制御する、情報処理システムが提供される。

また、本発明の他の態様によれば、前記１の通信端末のユーザーと通信中のユーザーの通信端末の前記設定情報が、録音機能を有効、文字起こし機能を有効、を示していた場合、前記通信中のユーザーの通信端末の表示画面にはチャットの内容を示すテキスト情報と音声の文字起こしの結果である文字情報とが含まれるよう制御する、情報処理システムが提供される。

また、本発明の他の態様によれば、前記文字情報は、発信された音声の文字起こしの結果である文字情報か、受信された音声の文字起こしの結果である文字情報かを識別可能に前記表示画面に表示される、情報処理システムが提供される。

また、本発明の他の態様によれば、前記設定情報には更に、言語の情報である言語の情報が含まれ、前記文字情報は、前記設定情報に含まれる言語の情報で示される言語に翻訳された文字情報である、情報処理システムが提供される。

また、本発明の他の態様によれば、前記設定情報には更に、言語の情報である言語の情報が更に含まれ、前記テキスト情報は、前記設定情報に含まれる言語の情報で示される言語に翻訳されたチャットの内容を示すテキスト情報である、情報処理システムが提供される。

また、本発明の他の態様によれば、前記他の通信端末は複数の通信端末であり、前記他の複数の通信端末それぞれにおける設定情報に基づき前記他の複数の通信端末それぞれの通信時における表示画面を変更するよう制御する、情報処理システムが提供される。

情報処理システムが実行する情報処理方法であって、複数の通信端末のうちの１の通信端末から前記複数の通信端末のうちの前記１の通信端末以外の他の通信端末への通信を制御し、前記他の通信端末における設定情報に基づき前記他の通信端末の通信時における表示画面を変更するよう制御し、前記設定情報には、録音機能を有効にするか否か、と、文字起こし機能を有効にするか否か、と、の情報が含まれ、前記１の通信端末のユーザーと通信中のユーザーの通信端末の前記設定情報が、録音機能を無効、文字起こし機能を無効、を示していた場合、前記通信中のユーザーの通信端末の表示画面にはチャットの内容を示すテキスト情報が含まれるよう制御する情報処理方法が提供される。

また、本発明の他の態様によれば、コンピュータを、前記情報処理システムとして機能させるためのプログラムが提供される。

本発明に係る情報システムにあっては、システムを構成する複数の装置それぞれにおける設定情報に基づき複数の装置それぞれにおいて適切な表示画面を表示させるよう制御することができる。

図１は、本発明に係る情報処理システムのシステム構成の一例を示す図である。 図２は、本発明に係るサーバー装置のハードウェア構成の一例を示す図である。 図３は、本発明に係る通話デバイスのハードウェア構成の一例を示す図である。 図４は、本発明に係る設定情報を設定する設定画面の一例を示す図である。 図５は、本発明に係る通話制御等に関する情報処理の一例を示すシーケンス図である。 図６は、本発明に係る発信者の通話デバイスの画面遷移の一例を示す図である。 図７は、本発明に係る受信者の通話デバイスの画面の一例を示す図（その１）である。 図８は、本発明に係る受信者の通話デバイスの画面の一例を示す図（その２）である。 図９は、本発明に係る受信者の通話デバイスの画面の一例を示す図（その３）である。 図１０は、本発明に係る受信者の通話デバイスの画面の一例を示す図（その４）である。

以下、図面を用いて本発明の実施形態について説明する。以下に示す実施形態中で示した各種特徴事項は、互いに組み合わせ可能である。

＜実施形態１＞
１．システム構成図
図１は、情報処理システム１０００のシステム構成の一例を示す図である。図１に示されるように、情報処理システム１０００は、システム構成として、サーバー装置１００と、複数の通話デバイス１１０と複数の基地局１２０と、を含む。

通話デバイス１１０は基地局１２０を介してネットワーク１５０に接続される。サーバー装置１００と複数の通話デバイス１１０とは基地局１２０及びネットワーク１５０を介して通信可能に接続される。同様に複数の通話デバイス１１０は基地局１２０及びネットワーク１５０を介してそれぞれ通信可能に接続される。
通話デバイス１１０は通信端末の一例である。

サーバー装置１００は、通話デバイス１１０同士がプッシュ・トゥ・トーク（Ｐｕｓｈ ｔｏ Ｔａｌｋ）を行うための機能を提供するサーバーである。より具体的にはサーバー装置１００は、実施形態１に示す１対多の通話デバイス１１０における通話の制御、及び、通話デバイス１１０それぞれの表示画面の制御等を行う。

また後述するようにサーバー装置１００は、発話者の音声を複数の言語に通訳し、通訳された音声を複数の通話デバイス１１０それぞれに送受信する。またサーバー装置１００は、通話デバイス１１０において入力されたテキスト情報を複数の言語に翻訳し、翻訳されたテキスト情報を複数の通話デバイス１１０それぞれに送受信する。またサーバー装置１００は、複数の通話デバイス１１０それぞれの画面の表示を制御する。

実施形態１では通話デバイス１１０の画面表示及び画面遷移の制御は制御部２１０が行うものとして説明を行う。より具体的に説明すると、実施形態１ではサーバー装置１００が通話デバイス１１０の画面を生成し、通話デバイス１１０に送信する。通話デバイス１１０はサーバー装置１００より受信した画面を表示する。

通話デバイス１１０は、ユーザーが使用するＩＰ無線機である。ＩＰ無線機は携帯電話の電波を使用して、音声をパケットに変換し、データ通信を行う機器である。情報処理システム１０００には複数の通話デバイス１１０が含まれ、異なる言語を母国語として使用するユーザーがそれぞれの通話デバイス１１０を使用するものとして説明を行う。複数のユーザーそれぞれは通話デバイス１１０を介して音声及びテキスト情報を用いてコミュニケーションを取る。

特許請求の範囲に記載の情報処理システムは、複数の装置で構成されてもよいし、一つの装置で構成されてもよい。特許請求の範囲に記載の情報処理システムが一つの装置で構成される場合、その装置の一例はサーバー装置１００である。特許請求の範囲に記載の情報処理システムが複数の装置で構成される場合、複数の装置の例は、実施形態１のサーバー装置１００の複数の機能をそれぞれ割り当てた複数のサーバー装置、又はサーバー装置１００及び複数の通話デバイス１１０の内の少なくとも１以上の通話デバイス１１０である。
２．ハードウェア構成
（１）サーバー装置１００のハードウェア構成

図２は、サーバー装置１００のハードウェア構成の一例を示す図である。
図２に示されるように、サーバー装置１００は、ハードウェア構成として、制御部２１０と、記憶部２２０と、通信部２３０と、を含む。

制御部２１０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等であって、サーバー装置１００の全体を制御する。

記憶部２２０は、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＳＳＤ（Ｓｏｌｉｄ Ｓａｔｅ Ｄｒｉｖｅ）等の何れか、又はこれらの任意の組み合わせであって、プログラム、制御部２１０がプログラムに基づき処理を実行する際に利用するデータ（例えば、後述する設定情報、音声ファイル、文字起こしされたテキスト情報、翻訳されたテキスト情報）等を記憶する。

記憶部２２０は、記憶媒体の一例である。なお、明細書では制御部２１０がプログラムに基づき処理を実行する際に利用するデータは記憶部２２０に記憶されるものとして説明するが、サーバー装置１００と通信可能な他の装置の記憶部等に記憶されていてもよい。すなわち、データは、制御部２１０が参照可能であればどの装置の記憶部に記憶されていてもよい。

制御部２１０が、記憶部２２０に記憶されているプログラムに基づき、処理を実行することによって、サーバー装置１００の機能及び後述する図５に示されるシーケンス図におけるサーバー装置１００の処理等が実現される。

通信部２３０は、サーバー装置１００をネットワーク１５０に接続し、他の装置（複数の通話デバイス１１０）との通信を司る。

（２）通話デバイス１１０のハードウェア構成
図３は、通話デバイス１１０のハードウェア構成の一例を示す図である。通話デバイス１１０は、ハードウェア構成として、制御部３１０と、記憶部３２０と、音声入力部３３０と、音声出力部３４０と、入出力部３５０と、通信部３６０と、を含む。

制御部３１０は、ＣＰＵ等であって、通話デバイス１１０の全体を制御する。記憶部３２０は、ＲＯＭ、ＲＡＭ、ＳＳＤの何れか、又はこれらの任意の組み合わせであって、プログラム、制御部３１０がプログラムに基づき処理を実行する際に利用するデータ等を記憶させる。制御部３１０が、記憶部３２０に記憶されているプログラムに基づき、処理を実行することによって、通話デバイス１１０の機能が実現される。記憶部３２０は、記憶媒体の一例である。

音声入力部３３０は、マイク等であって操作者の音声を入力する。音声出力部３４０は、スピーカー等であって通信相手の音声を出力する。入出力部３５０は、タッチパネルディスプレイ等であって、ユーザー操作を制御部３１０に入力したり、制御部３１０の処理の結果等を表示したりする。

通信部３６０は、通話デバイス１１０を、基地局１２０を介してネットワーク１５０に接続し、他の装置（例えば、サーバー装置１００、他の通話デバイス１１０等）との通信を司る。
なお、以下では発信者の通話デバイス１１０を通話デバイス１１０Ａ、受信者の通話デバイス１１０を通話デバイス１１０Ｂともいうが、共にハードウェア構成は図３に示した構成と同様である。

３．情報処理
（１）設定情報
ユーザーは自身の通話デバイス１１０を介して設定情報を設定する。通話デバイス１１０の画面を介して設定された設定情報は、通話デバイス１１０からサーバー装置１００に送信され、サーバー装置１００の記憶部２２０等において保持、管理される。図４は、設定情報を設定する設定画面の一例を示す図である。

ユーザーは、図４に示されるような設定画面を介して設定情報を設定する。設定画面を介して設定情報が設定されると、通話デバイス１１０は、通話デバイス１１０を識別するＰＴＴ番号と、設定情報と、を関連付けてサーバー装置１００に送信する。サーバー装置１００は、通話デバイス１１０を識別するＰＴＴ番号と、設定情報と、を通話デバイス１１０より受信すると、ＰＴＴ番号と関連付けて設定情報を記憶部２２０等に記憶する。

図４に示されるように設定情報には録音、文字起こし（文字おこし）、同時通訳モード、言語の情報が含まれる。録音の情報には、録音機能がＯＮかＯＦＦかが設定される。ＯＮは有効を示す。ＯＦＦは無効を示す。以下においても同様である。

文字起こしの情報には、文字起こし機能がＯＮかＯＦＦかが設定される。同時通訳モードの情報には、同時通訳モードがＯＮかＯＦＦかが設定される。言語の情報には通訳及び翻訳の言語が設定される。ユーザーは、通話デバイス１１０の画面に提示される複数の言語から所望の言語を選択する。選択された言語の情報（例えば、日本語、タイ語、英語等）が設定情報に含まれる。

録音がＯＮの場合、通話デバイス１１０を介した会話がサーバー装置１００において録音される。録音がＯＦＦの場合、録音はされない。文字起こしがＯＮの場合、通話デバイス１１０を介した会話が文字起こしされる。文字起こしがＯＦＦの場合は、文字起こしはなされない。

同時通訳モードがＯＮの場合、通話デバイス１１０を介した会話が通訳され、通訳された音声が通話デバイス１１０から出力される。通訳は設定情報に含まれる言語の情報で示される言語でなされる。したがって同時通訳モードがＯＮの場合、会話相手のオリジナル言語での音声の後、続けて通訳された音声が通話デバイス１１０から出力される。

（２）シーケンス図
図５は、通話制御等に関する情報処理の一例を示すシーケンス図である。図５において通話デバイス１１０Ａは、発信者が使用する通話デバイス１１０である。通話デバイス１１０Ｂは、受信者が使用する通話デバイス１１０である。図５の通話デバイス１１０Ｂの後の・・・は通話デバイス１１０Ｂが複数存在することを示している。

なお、実施形態１では、制御部２１０が通話デバイス１１０の画面上の操作及び／又は設定情報等に基づき通話デバイス１１０に表示される画面を生成し、該当する通話デバイス１１０に送信するものとして説明を行う。制御部２１０が行うこのような処理は画面の表示制御の一例である。

発信者は、通話デバイス１１０Ａを操作し、通話相手となるグループを選択し、所定の操作を行う。するとコール要求が通話デバイス１１０Ａからサーバー装置１００に送信される。コール要求には、コールを識別するコールＩＤと選択されたグループに含まれる通話相手のＰＴＴ（Ｐｕｓｈ ｔｏ Ｔａｌｋ）番号とが含まれる。ＰＴＴ番号は個々の通話デバイス１１０を識別する情報である。発信者がグループを選択するとそのグループに含まれる通話相手のＰＴＴ番号が取得され、コール要求に含まれる。

なお、発信者はグループを選択するのではなく、連絡先から複数の通話相手を選択するようにしてもよいし、通話履歴から複数の通話相手を選択するようにしてもよい。ただし、以下では説明の簡略化のため発信者は通話デバイス１１０Ａの画面に表示されるグループのＧＵＩ部品を選択することで複数のグループを画面に表示させ、その中からグループを選択するものとして説明を行う。

図６は、発信者の通話デバイス１１０Ａの画面遷移の一例を示す図である。画面５１０は、ホーム画面、すなわち、通常時に表示されている画面である。発信者は画面５１０においてグループボタン５１１を選択すると、通話デバイス１１０Ａの画面は画面５１０から画面５２０に遷移する。画面５２０はグループの選択画面である。

発信者が画面５２０においてグループを選択（図６の例ではグループＡを選択）すると、通話デバイス１１０Ａの画面は画面５２０から画面５３０に遷移する。画面５３０は、選択されたグループに含まれるメンバーの一覧を含む画面である。メンバーが多く、一画面で収まらない場合はスクロールバーが表示される。発信者はスクロールバーを操作することによって一画面に収まらないメンバーを確認することができる。

ＰＴＴボタン５３１は発信者が会話をする際に選択する（又は押下する）ボタンである。発信者が会話をする間はＰＴＴボタン５３１が選択し続けられる。発信者の音声通話が終了した後は、グループに含まれる他のメンバーが自身の通話デバイス１１０に表示されているＰＴＴボタンを選択し、音声通話を行う。

画面５２０でグループが選択され、画面５３０でＰＴＴボタン５３１が選択されると、シーケンスＳＱ４０１において、通話デバイス１１０Ａの制御部３１０は、コール要求をサーバー装置１００に送信する。なお、コール要求にはコール要求を送信した発信者のＰＴＴ番号も含まれる。サーバー装置１００の制御部２１０は、通話デバイス１１０Ａよりコール要求を受信する。

コール要求を受信すると、シーケンスＳＱ４０２において、制御部２１０は、コール要求に含まれる発信者のＰＴＴ番号に基づき発信者を特定する。また制御部２１０は、コール要求に含まれる通話相手（すなわち受信者）の複数のＰＴＴ番号に基づき複数の受信者を特定する。

シーケンスＳＱ４０３において、制御部２１０は、コール要求に含まれる発信者のＰＴＴ番号に基づき発信者の設定情報を特定し、取得する。また制御部２１０は、コール要求に含まれる受信者の複数のＰＴＴ番号に基づき複数の受信者それぞれの設定情報を特定し、取得する。

シーケンスＳＱ４０４において、制御部２１０は、コール制御を実行する。より具体的に説明すると、制御部２１０は、複数の受信者それぞれのＰＴＴ番号に基づきそれぞれのＰＴＴ番号の通話デバイス１１０のトークンを取得する。トークンはそれぞれの通話デバイス１１０を識別する情報である。

シーケンスＳＱ４０５において、制御部２１０は、それぞれのトークンを用いてそれぞれの通話デバイス１１０に対してＰＴＴの呼び出しであるコール情報を送信する。
なお、本実施形態では説明の簡略化のためサーバー装置１００が複数の機能を提供するように説明を行う。ただし、複数のサーバー装置それぞれが実施形態１のサーバー装置１００が提供する複数の機能のそれぞれを分担し、実行するようにしてもよい。

通話デバイス１００が、コール情報を受信すると、制御部３１０は、音声出力部３４０を介して呼び出し音を出力する。呼び出し音を聞いたユーザーは、入出力部３５０に表示されている画面においてコールに出るマークを選択する等の所定の操作を行う。入出力部３５０に表示されている画面を介して所定の操作を受け付けると、シーケンスＳＱ４０６において、制御部３１０は、コールに参加し、コールに参加したことを示す情報をサーバー装置１００に送信する。

コールに参加したことを示す情報を受信すると、シーケンスＳＱ４０７において、サーバ装置１００の制御部２１０は、通話デバイス１１０Ａとコールに参加したことを示す情報を送信した通話デバイス１１０Ｂとの通信（例えば、音声データの送受信、テキスト情報の送受信、画面の表示等）を制御する。

例えば、制御部２１０は、複数の通話デバイスのうちの１の通話デバイス（例えば通話デバイス１１０Ａ）から複数の通話デイバスのうちの１の通話デバイス以外の他の複数の通話デバイス（例えば複数の通話デバイス１１０Ｂ）への１対多の通信を制御する。

図６の画面５４０は、発信者の通話中の画面の一例を示している。画面５４０ではグループ内で誰が喋っていて誰が聞いているかが示されている。また図６の画面５５０は、通話中の画面の一例を示している。グループ内の１ユーザーでも同時通訳モードがＯＮになっていた場合、グループ内の全ユーザーの画面に通訳中であることを示すステータス５５１が表示される。チャットアイコン５５２が選択されると、通話デバイス１１０Ａの画面は画面５５０から画面５６０に遷移する。画面５６０は詳細表示画面の一例を示している。

シーケンスＳＱ４０８において、制御部２１０は、グループに含まれるユーザーそれぞれの設定情報に基づき、通話の音声のデータを記憶部２２０等に記憶する。例えば、グループに含まれるユーザーのうち一人でも設定情報の録音の情報にＯＮが設定されていた場合、そのグループの通話の音声のデータは記憶部２２０等に記憶される。

シーケンスＳＱ４０９において、制御部２１０は、グループに含まれるユーザーそれぞれの設定情報に基づき、記録された音声のデータを文字起こしする。より具体的に説明すると、グループに含まれるユーザーのうち一人でも設定情報の文字起こしの情報にＯＮが設定されていた場合、そのグループの通話の音声のデータに基づき通話の内容を文字起こしする。

文字起こしとは音声データに基づき会話の内容を文章化することである。例えば、記録された音声のデータが英語の音声データであった場合、英語で文字起こしがなされる。記録された音声のデータが日本語の音声データであった場合、日本語で文字起こしがなされる。その後、制御部２１０は、文字起こしの情報がＯＮであった設定情報の言語の情報に基づき、文字起こしされた文章を言語の情報で示される言語に翻訳する。制御部２１０は、文字起こしし、翻訳したデータを記憶部２２０等に記憶する。

シーケンスＳＱ４１０において、制御部２１０は、グループに含まれるユーザーそれぞれの設定情報に基づき、文字起こしされた文章を音声データに変換する。文字起こしされた文章が日本語の場合、日本語の音声データに変換される。文字起こしされた文章がタイ語の場合、タイ語の音声データに変換される。

シーケンスＳＱ４１１において、制御部２１０は、変換した音声データを通訳の音声としてグループのうち、該当する通話デバイス１１０Ｂに送信する。その結果、設定情報が同時通訳モードＯＮの通話デバイス１１０Ｂではオリジナル言語の音声が出力された後、続いて、設定された言語で通訳された音声が出力される。この処理は、他の複数の通話デバイスそれぞれにおける設定情報に含まれる同時通訳設定を有効にするか否かの情報に応じて、他の複数の通話デバイスそれぞれにおける音声の出力を制御する処理の一例である。またこの処理は、同時通訳設定を有効にする情報を含む設定情報の通話デバイスでは、話者によるオリジナルの言語であるオリジナル言語での音声の出力に続いて通話デバイスにおいて選択された言語で翻訳された音声が出力されるよう制御する処理の一例でもある。

（３）表示画面の制御
制御部２１０は、複数の通話デバイス１１０Ｂそれぞれにおける設定情報に基づき複数の通話デバイス１１０Ｂそれぞれの通話時における表示画面の表示を制御する。この処理は、他の複数の通話デバイスそれぞれにおける設定情報に基づき他の複数の通話デバイスそれぞれの通信時における表示画面を変更するよう制御する処理の一例である。

以下、受信者側の画面を用いて制御部２１０による画面表示の制御について説明する。
図７は、受信者の通話デバイスの画面の一例を示す図（その１）である。
図７の画面６００は、設定情報として、録音がＯＦＦ、文字起こしがＯＦＦ、同時通訳モードがＯＦＦの受信側の画面の一例である。音声は、発信者のオリジナル言語で聞こえる。録音ＯＦＦのため、グループ内のユーザーによるチャットテキスト６１０以外は表示されていない。

制御部２１０が図７に示すような画面が表示されるように制御することは、１の通話デバイスのユーザーと通信中のユーザーの通話デバイスの設定情報が、録音機能を無効、文字起こし機能を無効、を示していた場合、通信中のユーザーの通話デバイスの表示画面にはチャットの内容を示すテキスト情報が含まれるよう制御する処理の一例である。テキスト情報は、設定情報に含まれる言語の情報で示される言語に翻訳されたチャットの内容を示すテキスト情報である。

図８は、受信者の通話デバイスの画面の一例を示す図（その２）である。
図８の画面７００は、設定情報として、録音がＯＮ、文字起こしがＯＦＦ、同時通訳モードがＯＦＦの受信側の画面の一例である。音声は、発信者のオリジナル言語で聞こえる。録音ＯＮのため音声を示す波形グラフ７１０が表示され、チャットテキスト７２０も表示されている。

波形グラフ７１０の背景画像７３０は、受信者による音声の波形グラフ７１０であることを示している。波形グラフの背景画像７４０は、発信者による音声の波形グラフであることを示している。チャットテキスト７２０の背景画像７５０は、チャットテキストが受信されたチャットテキストであることを示している。すなわち、制御部２１０は、背景画像によって音声の波形グラフが発信者による音声か、受信者による音声かを識別可能に画面に表示するようにしている。

同様に、制御部２１０は、背景画像によってチャットテキストが発信者によるチャットの内容か、受信者によるチャットの内容かを識別可能に画面に表示するようにしている。これは、テキスト情報が、発信されたチャットの内容のテキスト情報か、受信されたチャットの内容のテキスト情報かを識別可能に表示画面に表示されている一例である。

なお、制御部２１０は、背景画像の色によって発信者によるものか受信者によるものかを識別可能にしてもよいし、背景画像の模様、又は形等によって発信者によるものか受信者によるものかを識別可能にしてもよい。また、制御部２１０は、背景画像に限られず、波形グラフそのものの色、チャットテキストの文字列の色等によって発信者によるものか受信者によるものかを識別するようにしてもよい。すなわち、波形グラフやチャットテキストが発信者によるものか受信者によるものかを識別することができればどのような態様で波形グラフやチャットテキストを表示するようにしてもよい。

制御部２１０が図８に示すような画面が表示されるように制御することは、１の通話デバイスのユーザーと通信中のユーザーの通話デバイスの設定情報が、録音機能を有効、文字起こし機能を無効、を示していた場合、通信中のユーザーの通話デバイスの表示画面にはチャットの内容を示すテキスト情報と音声を録音していることを示す波形グラフとが含まれるよう制御する処理の一例である。

図９は、受信者の通話デバイスの画面の一例を示す図（その３）である。
図９の画面８００は、設定情報として、録音ＯＮ、文字起こしＯＮ、同時通訳モードＯＦＦ、言語の情報が日本語の受信側の画面の一例である。音声は、発信者のオリジナル言語で聞こえる。文字起こしＯＮのため言語の情報で設定された言語（図９の例では日本語）に翻訳された文字列８１０が表示される。

録音ＯＮのため音声を示す波形グラフが表示され、チャットテキストも表示されている。チャットテキストも言語の情報で設定された言語（図９の例では日本語）に翻訳された文字列８２０が表示される。制御部２１０は、背景画像によって翻訳された文字列が発信者による音声の文字起こしされたものか、受信者による音声の文字起こしされたものかを識別可能に画面に表示する。これは、文字情報が、発信された音声の文字起こしの結果である文字情報か、受信された音声の文字起こしの結果である文字情報かを識別可能に表示画面に表示されている一例である。

制御部２１０が図９に示すような画面が表示されるように制御することは、１の通話デバイスのユーザーと通信中のユーザーの通話デバイスの設定情報が、録音機能を有効、文字起こし機能を有効、を示していた場合、通信中のユーザーの通話デバイスの表示画面にはチャットの内容を示すテキスト情報と音声の文字起こしの結果である文字情報とが含まれるよう制御する処理の一例である。文字情報は、設定情報に含まれる言語の情報で示される言語に翻訳された文字情報である。

なお、設定情報として、録音ＯＮ、文字起こしＯＮ、同時通訳モードＯＮ、言語の情報が日本語の場合も通話デバイス１１０Ｂの画面例は図９と同様となる。ただし、この場合、オリジナル言語に続いて設定された言語（図９の例では日本語）に通訳された音声が通話デバイス１１０Ｂから出力される。

図１０は、受信者の通話デバイスの画面の一例を示す図（その４）である。
図１０の画面９００は、設定情報として、録音ＯＮ、文字起こしＯＮ、同時通訳モードＯＦＦ、言語の情報がタイ語の受信側の画面の一例である。音声は、発信者のオリジナル言語で聞こえる。

文字起こしＯＮのため言語の情報で設定された言語（図１０の例ではタイ語）に翻訳された文字列９１０が表示される。録音ＯＮのため音声を示す波形グラフが表示され、チャットテキストも表示されている。チャットテキストも言語の情報で設定された言語（図１０の例ではタイ語）に翻訳された文字列９２０が表示される。

なお、設定情報として、録音ＯＮ、文字起こしＯＮ、同時通訳モードＯＮ、言語の情報がタイ語の場合も通話デバイス１１０Ｂの画面例は図１０と同様となる。ただし、この場合、オリジナル言語に続いて設定された言語（図１０の例ではタイ語）に通訳された音声が通話デバイス１１０Ｂから出力される。

以上、実施形態１によれば、複数の通話デバイス１１０Ｂそれぞれにおける設定情報に基づき複数の通話デバイス１１０Ｂそれぞれにおいて適切な表示画面を表示させるよう制御することができる。
制御部２１０による通話デバイス１１０Ａの表示画面の制御も通話デバイス１１０Ｂの表示画面の制御と同様である。制御部２１０は、通話デバイス１１０Ａの設定情報に基づき通話デバイス１１０Ａの表示画面の制御を行う。

（変形例１）
実施形態１の変形例１を説明する。変形例１では実施形態１と異なる点について主に説明を行う。
実施形態１では、サーバー装置１００の制御部２１０が通話デバイス１１０の画面を生成し、通話デバイス１１０に送信するよう説明を行った。

しかし、これに限定されず、制御部２１０は設定情報や通話デバイス１１０の画面を介した操作等に基づいて画面に必要なデータを用意し、制御部２１０は用意したデータを適宜該当する通話デバイス１１０に送信するようにしてもよい。そして通話デバイス１１０はサーバー装置１００より受信したデータに基づき画面を生成し、表示するようにしてもよい。
変形例１によれば、実施形態１と同様の効果を奏することができる。

（変形例２）
実施形態１の変形例２を説明する。変形例２では実施形態１と異なる点について主に説明を行う。
実施形態１では制御部２１０による通話デバイス１１０Ａと複数の通話デバイス１１０Ｂとの通信、すなわち、１対多の通信、を例に説明を行った。

しかし、これに限定されず、制御部２１０による通話デバイス１１０Ａ対通話デバイス１１０Ｂの通信、すなわち、１対１の通信においても同様である。このような態様においても、制御部２１０は、通話デバイス１１０Ａの設定情報に基づき通話デバイス１１０Ａの表示画面の制御を行うと共に、通話デバイス１１０Ｂの設定情報に基づき通話デバイス１１０Ｂの表示画面の制御を行う。

変形例２によれば、通話デバイス１１０Ａ及び通話デバイス１１０Ｂそれぞれにおける設定情報に基づき通話デバイス１１０Ａ及び通話デバイス１１０Ｂそれぞれにおいて適切な表示画面を表示させるよう制御することができる。

（その他の変形例）
実施形態１のその他の変形例を説明する。その他の変形例においても実施形態１と異なる点について主に説明を行う。
実施形態１のサーバー装置１００による処理の一部を複数の通話デバイス１１０それぞれが実行するようにしてもよい。
また実施形態１では通話デバイス１１０間の通信としてIP無線を例に説明を行ったがこれらに限定されるものではない。通話デバイス１１０間及び通話デバイス１１０とサーバー装置１００との間で通信することができればどのような通信規格であってもよい。

また通話デバイス１１０もIP電話機のようなものに限られず、タブレット型コンピュータのようなものであってもよい。デバイス間で通話やテキスト情報のやり取り等することができればどのようなデバイスであってもよい。またデバイスは携帯可能なものであってもよいし、窓口等、所定の場所に据え置き可能なものであってもよい。

最後に、本開示に係る種々の実施形態を説明したが、これらは、例として提示したものであり、発明の範囲を限定することは意図していない。新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。実施形態やその変形例は、発明の範囲や要旨に含まれると共に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。実施形態１と上述した各変形例とは任意に組み合わせることができる。

１００ ：サーバー装置
１１０ ：通話デバイス
１２０ ：基地局
１５０ ：ネットワーク
２１０ ：制御部
２２０ ：記憶部
２３０ ：通信部

Claims (12)

1. 情報処理システムであって、
   複数の通信端末のうちの１の通信端末から前記複数の通信端末のうちの前記１の通信端末以外の他の通信端末への通信を制御し、
   前記他の通信端末は１以上の通信端末であり、
   前記他の通信端末における設定情報に基づき前記他の通信端末の通信時における表示画面を変更するよう制御し、
   前記設定情報には、
   録音機能を有効にするか否か、と、
   文字起こし機能を有効にするか否か、と、
   の情報が含まれ
   前記１の通信端末のユーザーと通信中のユーザーの通信端末の前記設定情報が、
   録音機能を無効、
   文字起こし機能を無効、
   を示していた場合、前記通信中のユーザーの通信端末の表示画面にはチャットの内容を示すテキスト情報が含まれるよう制御する、
   情報処理システム。
2. 請求項１に記載の情報処理システムにおいて、
   前記設定情報には更に、
   同時通訳設定を有効にするか否かの情報が含まれ、
   前記他の通信端末における前記設定情報に含まれる同時通訳設定を有効にするか否かの情報に応じて、前記他の通信端末における音声の出力を制御する、
   情報処理システム。
3. 請求項２に記載の情報処理システムにおいて、
   同時通訳設定を有効にする情報を含む設定情報の通信端末では、話者によるオリジナルの言語であるオリジナル言語での音声の出力に続いて前記通信端末において選択された言語で通訳された音声が出力されるよう制御する、
   情報処理システム。
4. 請求項１に記載の情報処理システムにおいて、
   前記テキスト情報は、発信されたチャットの内容のテキスト情報か、受信されたチャットの内容のテキスト情報かを識別可能に前記表示画面に表示される、
   情報処理システム。
5. 請求項１に記載の情報処理システムにおいて、
   前記１の通信端末のユーザーと通信中のユーザーの通信端末の前記設定情報が、
   録音機能を有効、
   文字起こし機能を無効、
   を示していた場合、前記通信中のユーザーの通信端末の表示画面にはチャットの内容を示すテキスト情報と音声を録音していることを示す波形グラフとが含まれるよう制御する、
   情報処理システム。
6. 請求項１に記載の情報処理システムにおいて、
   前記１の通信端末のユーザーと通信中のユーザーの通信端末の前記設定情報が、
   録音機能を有効、
   文字起こし機能を有効、
   を示していた場合、前記通信中のユーザーの通信端末の表示画面にはチャットの内容を示すテキスト情報と音声の文字起こしの結果である文字情報とが含まれるよう制御する、
   情報処理システム。
7. 請求項６に記載の情報処理システムにおいて、
   前記文字情報は、発信された音声の文字起こしの結果である文字情報か、受信された音声の文字起こしの結果である文字情報かを識別可能に前記表示画面に表示される、
   情報処理システム。
8. 請求項６に記載の情報処理システムにおいて、
   前記設定情報には更に、
   言語の情報である言語の情報が含まれ、
   前記文字情報は、前記設定情報に含まれる言語の情報で示される言語に翻訳された文字情報である、
   情報処理システム。
9. 請求項１に記載の情報処理システムにおいて、
   前記設定情報には更に、
   言語の情報である言語の情報が更に含まれ、
   前記テキスト情報は、前記設定情報に含まれる言語の情報で示される言語に翻訳されたチャットの内容を示すテキスト情報である、
   情報処理システム。
10. 請求項１に記載の情報処理システムにおいて、
    前記他の通信端末は複数の通信端末であり、
    前記他の複数の通信端末それぞれにおける設定情報に基づき前記他の複数の通信端末それぞれの通信時における表示画面を変更するよう制御する、
    情報処理システム。
11. 情報処理システムが実行する情報処理方法であって、
    複数の通信端末のうちの１の通信端末から前記複数の通信端末のうちの前記１の通信端末以外の他の通信端末への通信を制御し、
    前記他の通信端末における設定情報に基づき前記他の通信端末の通信時における表示画面を変更するよう制御し、
    前記設定情報には、
    録音機能を有効にするか否か、と、
    文字起こし機能を有効にするか否か、と、
    の情報が含まれ、
    前記１の通信端末のユーザーと通信中のユーザーの通信端末の前記設定情報が、
    録音機能を無効、
    文字起こし機能を無効、
    を示していた場合、前記通信中のユーザーの通信端末の表示画面にはチャットの内容を示すテキスト情報が含まれるよう制御する、
    情報処理方法。
12. プログラムであって、
    コンピュータを、
    請求項１から請求項１０までの何れか１項に記載の情報処理システムとして機能させるためのプログラム。