JP2023034965A

JP2023034965A - Online conference system, online conference server, online conference terminal, and chat control method of online conference system

Info

Publication number: JP2023034965A
Application number: JP2021141511A
Authority: JP
Inventors: 哲也土肥; Tetsuya Doi
Original assignee: Oki Electric Industry Co Ltd
Current assignee: Oki Electric Industry Co Ltd
Priority date: 2021-08-31
Filing date: 2021-08-31
Publication date: 2023-03-13

Abstract

To provide an online conference system configured to reliably notify specific participants in a conference about content of chat messages.SOLUTION: In an online conference system including a conference server and a plurality of conference terminals which are connected to communicate with each other, the conference server includes: a chat communication unit which receives chat information signals transmitted by a chat transmission unit of a transmitting conference terminal out of the multiple conference terminals; a character/voice conversion unit which converts character data in the chat information signals to voice data for output; and a voice communication unit which transmits the voice data output by the character/voice conversion unit, as voice information signals, to a conference terminal which is to receive the received chat information signals. The conference terminal includes: a voice transmitting/receiving unit which transmits/receives voice information signals via the conference server; and a voice reproducing unit which reproduces and outputs, as voice, the voice data in the voice information signals received by the voice transmitting/receiving unit.SELECTED DRAWING: Figure 5

Description

本発明は、チャット機能を有するオンライン会議システム、オンライン会議システムに用いられるオンライン会議サーバ及びオンライン会議端末、並びにオンライン会議システムのチャット制御方法に関する。 The present invention relates to an online conference system having a chat function, an online conference server and an online conference terminal used in the online conference system, and a chat control method for the online conference system.

近時、オンライン会議システムの利用が増加している。オンライン会議システムは、交換機やサーバに接続されたパソコン等の端末間で音声や画像を用いた会議を可能にするものであり、会議には１対１に限らず、多数の端末からの参加が可能となっている。このような会議システムでは、音声や画像を用いた会議以外に、パソコン等の端末の画面共有や各端末において動作するアプリケーションの共有、チャット機能等の付加機能の使用が可能であり、会議システムが多機能化している。 Recently, the use of online conference systems is increasing. The online conference system enables conferences using audio and images between terminals such as personal computers connected to exchanges and servers. It is possible. In such a conference system, in addition to conferencing using voice and images, it is possible to share screens of terminals such as personal computers, share applications running on each terminal, and use additional functions such as chat functions. Multifunctional.

会議システムの多機能化、及び参加可能者数の拡大により、近年、会議以外の用途として、企業のセミナーや学校の講義等にも活用されている。これらの利用シーンとしては、司会者、講義者、説明者等の特定の参加者が発言を行い、他の参加者がそれを聴取する形式が多い。この場合には、通常、聴取者は自身の端末のマイクはミュート状態にして、他の参加者との会話は行うことはない。ところが、このような運用においても、特定の参加者間での情報伝達が必要となる場合がある。そこで、そのような特定の参加者間での情報伝達のために、例えば、特許文献１に示されたように特定の操作により端末間で秘話通話を行う技術が提案されている。 In recent years, due to the multi-functionality of conference systems and the expansion of the number of participants, conference systems have been used for corporate seminars, school lectures, and the like as well. As for these usage scenes, there are many formats in which specific participants such as moderators, lecturers, and presenters make remarks and other participants listen to them. In this case, the listener normally mutes the microphone of his/her own terminal and does not talk with other participants. However, even in such an operation, it may be necessary to transmit information between specific participants. Therefore, in order to transmit information between such specific participants, for example, as shown in Japanese Patent Laid-Open No. 2002-200011, a technology has been proposed in which private communication is performed between terminals by a specific operation.

特開２０１５－２３４２７号公報JP 2015-23427 A

しかしながら、特許文献１に示されたような従来のオンライン会議システムでは、秘話通話先は特定の１名であり、１対１の通話しか出来なかった。そのため、セミナーや講義等の運用において、複数の会議参加者に通知をしたい場合には適用することができなかった。例えば、セミナーや講義中にマイクミュートし忘れた会議参加者に対して、マイクミュートするように促す際に、通知したい該当者が多数いるような場合である。また、このような場合の対処として、会議システムの機能であるチャットで通知する方法もあるが、セミナーや講義では、会議参加者は画面表示された説明資料を参照しているために、会議参加者の中にはチャットの通知が来ていることに気付かないことが多々ある。 However, in the conventional online conference system as disclosed in Patent Document 1, the secret call destination is one specific person, and only a one-to-one call can be made. Therefore, in the operation of seminars, lectures, etc., it was not possible to apply the notification to a plurality of conference participants. For example, when urging conference participants who forgot to mute their microphones during a seminar or lecture to mute their microphones, there are many people who want to be notified. In addition, as a countermeasure for such a case, there is a method of notifying by chat, which is a function of the conference system. People often don't realize they're getting chat notifications.

そこで、本発明の目的は、このような課題に着目し、特定の会議参加者に対してチャット内容を確実に通知することができるオンライン会議システム、オンライン会議サーバ、オンライン会議端末及びオンライン会議システムのチャット制御方法を提供することである。 Therefore, the object of the present invention is to focus on such problems and provide an online conference system, an online conference server, an online conference terminal, and an online conference system that can reliably notify specific conference participants of chat contents. To provide a chat control method.

本発明のオンライン会議システムは、互いに通信可能に接続された会議サーバ及び複数の会議端末を含むオンライン会議システムであって、前記複数の会議端末の各々は、音声を入力してその入力音声を示す音声データを出力する音声入力部と、前記音声データを含む音声情報信号を前記会議サーバを介して送受信する音声送受信部と、前記音声送受信部によって受信された前記音声情報信号中の前記音声データを音声として再生出力する音声再生部と、操作入力によって文字を示す文字データを出力する文字入力部と、前記文字データと、前記複数の会議端末のうちの送信先の会議端末を示す情報とを含むチャット情報信号を前記会議サーバを介して送受信するチャット送受信部と、を含み、前記会議サーバは、前記複数の会議端末のうちの送信元の会議端末の前記チャット送受信部によって送信された前記チャット情報信号を受信するチャット通信部と、前記チャット通信部によって受信された前記チャット情報信号中の前記文字データを前記音声データに変換してそれを出力する文字音声変換部と、前記文字音声変換部によって出力された前記音声データを前記音声情報信号として当該受信された前記チャット情報信号の前記送信先の会議端末に送信する音声通信部と、を含むことを特徴としている。 An online conference system of the present invention is an online conference system including a conference server and a plurality of conference terminals communicatively connected to each other, wherein each of the plurality of conference terminals inputs voice and indicates the input voice. an audio input unit that outputs audio data; an audio transmission/reception unit that transmits/receives an audio information signal including the audio data via the conference server; a voice reproducing unit for reproducing and outputting as voice; a character input unit for outputting character data representing characters by an operation input; a chat transmitting/receiving unit for transmitting/receiving a chat information signal via the conference server, wherein the conference server receives the chat information transmitted by the chat transmitting/receiving unit of the transmission source conference terminal among the plurality of conference terminals. a chat communication unit that receives a signal; a text-to-speech conversion unit that converts the character data in the chat information signal received by the chat communication unit into the voice data and outputs the voice data; an audio communication unit that transmits the output audio data as the audio information signal to the conference terminal that is the transmission destination of the received chat information signal.

本発明のオンライン会議システムは、互いに通信可能に接続された会議サーバ及び複数の会議端末を含むオンライン会議システムであって、前記複数の会議端末の各々は、音声を入力してその入力音声を示す音声データを出力する音声入力部と、前記音声データを含む音声情報信号を前記会議サーバを介して送受信する音声送受信部と、前記音声送受信部によって受信された前記音声情報信号中の前記音声データを音声として再生出力する音声再生部と、操作入力によって文字を示す文字データを出力する文字入力部と、前記文字データと、前記複数の会議端末のうちの送信先の会議端末を示す情報とを含むチャット情報信号を前記会議サーバを介して送受信するチャット送受信部と、前記チャット送受信部によって受信された前記チャット情報信号中の前記文字データを前記音声データに変換してそれを出力する文字音声変換部と、を含み、前記音声再生部は、前記文字音声変換部によって前記文字データから変換された前記音声データを音声として再生出力することを特徴としている。 An online conference system of the present invention is an online conference system including a conference server and a plurality of conference terminals communicatively connected to each other, wherein each of the plurality of conference terminals inputs voice and indicates the input voice. an audio input unit that outputs audio data; an audio transmission/reception unit that transmits/receives an audio information signal including the audio data via the conference server; a voice reproducing unit for reproducing and outputting as voice; a character input unit for outputting character data representing characters by an operation input; a chat transmitting/receiving unit for transmitting/receiving a chat information signal via the conference server; and a text/speech converting unit for converting the character data in the chat information signal received by the chat transmitting/receiving unit into the voice data and outputting the voice data. and wherein the voice reproduction unit reproduces and outputs the voice data converted from the character data by the text-to-speech conversion unit as voice.

本発明のオンライン会議サーバは、複数の会議端末に通信可能に接続されるオンライン会議サーバであって、前記複数の会議端末の各々は、音声を入力してその入力音声を示す音声データを出力する音声入力部と、前記音声データを含む音声情報信号を前記会議サーバを介して送受信する音声送受信部と、前記音声送受信部によって受信された前記音声情報信号中の前記音声データを音声として再生出力する音声再生部と、操作入力によって文字を示す文字データを出力する文字入力部と、前記文字データと、前記複数の会議端末のうちの送信先の会議端末を示す情報とを含むチャット情報信号を前記会議サーバを介して送受信するチャット送受信部と、を含み、前記オンライン会議サーバは、前記複数の会議端末のうちの送信元の会議端末の前記チャット送受信部によって送信された前記チャット情報信号を受信するチャット通信部と、前記チャット通信部によって受信された前記チャット情報信号中の前記文字データを前記音声データに変換してそれを出力する文字音声変換部と、前記文字音声変換部によって出力された前記音声データを前記音声情報信号として当該受信された前記チャット情報信号の前記送信先の会議端末に送信する音声通信部と、を含むことを特徴としている。 An online conference server of the present invention is an online conference server communicably connected to a plurality of conference terminals, wherein each of the plurality of conference terminals inputs voice and outputs voice data representing the input voice. an audio input unit, an audio transmission/reception unit for transmitting/receiving an audio information signal including the audio data via the conference server, and a reproduction output of the audio data in the audio information signal received by the audio transmission/reception unit as audio. a voice reproduction unit; a character input unit for outputting character data representing characters by an operation input; a chat transmitting/receiving unit for transmitting/receiving via a conference server, wherein the online conference server receives the chat information signal transmitted by the chat transmitting/receiving unit of the transmission source conference terminal among the plurality of conference terminals. a chat communication unit; a text-to-speech conversion unit that converts the character data in the chat information signal received by the chat communication unit into the voice data and outputs the voice data; an audio communication unit that transmits audio data as the audio information signal to the conference terminal of the transmission destination of the received chat information signal.

本発明のオンライン会議端末は、会議サーバと互いに通信可能に接続されるオンライン会議端末であって、音声を入力してその入力音声を示す音声データを出力する音声入力部と、前記音声データを含む音声情報信号を前記会議サーバを介して送受信する音声送受信部と、前記音声送受信部によって受信された前記音声情報信号中の前記音声データを音声として再生出力する音声再生部と、操作入力によって文字を示す文字データを出力する文字入力部と、前記文字データと、前記複数の会議端末のうちの送信先の会議端末を示す情報とを含むチャット情報信号を前記会議サーバを介して送受信するチャット送受信部と、前記チャット送受信部によって受信された前記チャット情報信号中の前記付加情報が音声変換処理を示すときに前記チャット情報信号中の前記文字データを前記音声データに変換する文字音声変換部と、を含み、前記音声再生部は、前記文字音声変換部によって前記文字データから変換された前記音声データを音声として再生出力することを特徴としている。 An online conference terminal of the present invention is an online conference terminal communicably connected to a conference server, and includes a voice input unit for inputting voice and outputting voice data representing the input voice, and the voice data. an audio transmitting/receiving unit for transmitting/receiving an audio information signal via the conference server; an audio reproducing unit for reproducing and outputting the audio data in the audio information signal received by the audio transmitting/receiving unit; and a chat transmitting/receiving unit configured to transmit/receive, via the conference server, a chat information signal including the character data and information indicating a destination conference terminal among the plurality of conference terminals. and a text-to-speech conversion unit for converting the character data in the chat information signal into the voice data when the additional information in the chat information signal received by the chat transmitting/receiving unit indicates voice conversion processing. The audio reproduction unit reproduces and outputs, as audio, the audio data converted from the character data by the text-to-speech conversion unit.

本発明のオンライン会議システムのチャット制御方法は、互いに通信可能に接続された会議サーバ及び複数の会議端末を含むオンライン会議システムのチャット制御方法であって、前記複数の会議端末の各々は、音声を入力してその入力音声を示す音声データを出力する音声入力ステップと、前記音声データを含む音声情報信号を前記会議サーバを介して送受信する音声送受信ステップと、前記音声送受信ステップにおいて受信された前記音声情報信号中の前記音声データを音声として再生出力する音声再生ステップと、操作入力によって文字を示す文字データを出力する文字入力ステップと、前記文字データと、前記複数の会議端末のうちの送信先の会議端末を示す情報とを含むチャット情報信号を前記会議サーバを介して送受信するチャット送受信ステップと、を含み、前記会議サーバは、前記複数の会議端末のうちの送信元の会議端末の前記チャット送受信部によって送信された前記チャット情報信号を受信するチャット通信ステップと、前記チャット通信ステップにおいて受信された前記チャット情報信号中の前記文字データを前記音声データに変換してそれを出力する文字音声変換ステップと、前記文字音声変換ステップにおいて出力された前記音声データを前記音声情報信号として当該受信された前記チャット情報信号の前記送信先の会議端末に送信する音声通信ステップと、を含むことを特徴としている。 A chat control method for an online conference system according to the present invention is a chat control method for an online conference system including a conference server and a plurality of conference terminals communicatively connected to each other, wherein each of the plurality of conference terminals is capable of transmitting voice. an audio input step of inputting and outputting audio data representing the input audio; an audio transmission/reception step of transmitting/receiving an audio information signal including the audio data via the conference server; and the audio received in the audio transmission/reception step. a voice reproduction step of reproducing and outputting the voice data in the information signal as voice; a character input step of outputting character data representing characters by an operation input; and a chat transmission/reception step of transmitting/receiving a chat information signal including information indicating a conference terminal via the conference server, wherein the conference server transmits/receives the chat transmission/reception of the transmission source conference terminal among the plurality of conference terminals. a chat communication step of receiving the chat information signal transmitted by the unit; and a text-to-speech conversion step of converting the character data in the chat information signal received in the chat communication step into the voice data and outputting the voice data. and a voice communication step of transmitting the voice data output in the text-to-speech conversion step as the voice information signal to the conference terminal of the transmission destination of the received chat information signal. .

本発明のオンライン会議システムのチャット制御方法は、互いに通信可能に接続された会議サーバ及び複数の会議端末を含むオンライン会議システムのチャット制御方法であって、前記複数の会議端末の各々は、音声を入力してその入力音声を示す音声データを出力する音声入力ステップと、前記音声データを含む音声情報信号を前記会議サーバを介して送受信する音声送受信ステップと、前記音声送受信ステップにおいて受信された前記音声情報信号中の前記音声データを音声として再生出力する音声再生ステップと、操作入力によって文字を示す文字データを出力する文字入力ステップと、前記文字データと、前記複数の会議端末のうちの送信先の会議端末を示す情報とを含むチャット情報信号を前記会議サーバを介して送受信するチャット送受信ステップと、前記チャット送受信ステップにおいて受信された前記チャット情報信号中の前記文字データを前記音声データに変換する文字音声変換ステップと、を含み、前記音声再生ステップは、前記文字音声変換部によって前記文字データから変換された前記音声データを音声として再生出力することを特徴としている。 A chat control method for an online conference system according to the present invention is a chat control method for an online conference system including a conference server and a plurality of conference terminals communicatively connected to each other, wherein each of the plurality of conference terminals is capable of transmitting voice. an audio input step of inputting and outputting audio data representing the input audio; an audio transmission/reception step of transmitting/receiving an audio information signal including the audio data via the conference server; and the audio received in the audio transmission/reception step. a voice reproduction step of reproducing and outputting the voice data in the information signal as voice; a character input step of outputting character data representing characters by an operation input; a chat transmitting/receiving step of transmitting/receiving a chat information signal including information indicating a conference terminal via the conference server; and characters for converting the character data in the chat information signal received in the chat transmitting/receiving step into the voice data. and a voice conversion step, wherein the voice reproduction step is characterized by reproducing and outputting the voice data converted from the character data by the text-to-speech conversion unit as voice.

本発明のオンライン会議システム、オンライン会議サーバ、オンライン会議端末及びオンライン会議システムのチャット制御方法によれば、送信先の会議端末の会議参加者は、送信元の会議端末の会議参加者が入力したチャット内容を音声で確認することができるので、送信先の会議端末の会議参加者がオンライン会議中に自身の会議端末の画面に表示されたチャットに気が付かずにいるというような状況を回避させることができる。 According to the online conference system, the online conference server, the online conference terminal, and the chat control method of the online conference system of the present invention, the conference participants at the destination conference terminal can Since the contents can be confirmed by voice, it is possible to avoid situations in which the participants of the destination conference terminal do not notice the chat displayed on the screen of their own conference terminal during the online conference. can.

本発明が適用されたオンライン会議システムの基本構成を示すブロック図である。1 is a block diagram showing the basic configuration of an online conference system to which the present invention is applied; FIG. 実施例１の会議システム中の会議サーバの構成を示すブロック図である。3 is a block diagram showing the configuration of a conference server in the conference system of Example 1; FIG. 実施例１の会議システム中の会議端末の構成を示すブロック図である。2 is a block diagram showing the configuration of a conference terminal in the conference system of Example 1; FIG. 実施例１の会議システムの動作例を示すシーケンス図である。4 is a sequence diagram showing an operation example of the conference system according to the first embodiment; FIG. 実施例１の会議システムの動作例を示すシーケンス図である。4 is a sequence diagram showing an operation example of the conference system according to the first embodiment; FIG. 実施例２の会議システム中の会議端末の構成を示すブロック図である。FIG. 9 is a block diagram showing the configuration of a conference terminal in the conference system of Example 2; 実施例２の会議システムの動作例を示すシーケンス図である。FIG. 11 is a sequence diagram showing an operation example of the conference system according to the second embodiment; 実施例２の会議システムの動作例を示すシーケンス図である。FIG. 11 is a sequence diagram showing an operation example of the conference system according to the second embodiment;

以下、本発明の実施例を、図面を参照しつつ詳細に説明する。
（実施例１）
図１は本発明が適用されたオンライン会議システムの基本構成を示している。この会議システムは、オンライン会議サーバ１００と、クライアントであるオンライン会議端末２０１～２１０とから構成されている。会議サーバ１００及び会議端末２０１～２１０の各々は、例えば、パーソナルコンピュータによって構成することができる。本実施例では会議端末２０１～２１０の数は１０となっているが、特に限定されない。会議サーバ１００と会議端末２０１～２１０とはインターネット回線を含む通信回線５０によって通信可能に互いに接続されているとする。各会議端末２０１～２１０は会議サーバ１００で開催されるオンライン会議に参加が可能となっている。会議サーバ１００が提供するオンライン会議は音声を使用した会議の他に、チャットによる文字メッセージの送受信が可能となっている。 BEST MODE FOR CARRYING OUT THE INVENTION Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
(Example 1)
FIG. 1 shows the basic configuration of an online conference system to which the present invention is applied. This conference system comprises an online conference server 100 and online conference terminals 201 to 210 as clients. Each of the conference server 100 and conference terminals 201 to 210 can be configured by, for example, a personal computer. Although the number of conference terminals 201 to 210 is 10 in this embodiment, the number is not particularly limited. It is assumed that the conference server 100 and the conference terminals 201 to 210 are communicably connected to each other through a communication line 50 including an Internet line. Each of the conference terminals 201-210 can participate in the online conference held by the conference server 100. FIG. The online conference provided by the conference server 100 is capable of sending and receiving character messages through chat in addition to the conference using voice.

図２に示すように、会議サーバ１００は、例えば、会議システム用のソフトウエアをサーバで処理することにより、チャット通信部１１１、チャット制御部１１２、音声通信部１２１、音声制御部１２２、文字音声変換部１３１、及び音声エンジン１３２を構成する。 As shown in FIG. 2, the conference server 100, for example, by processing software for a conference system on the server, has a chat communication unit 111, a chat control unit 112, a voice communication unit 121, a voice control unit 122, a text/audio A conversion unit 131 and a speech engine 132 are configured.

チャット通信部１１１及び音声通信部１２１は通信回線５０に接続される。チャット通信部１１１とチャット制御部１１２とは接続され、チャット制御部１１２と文字音声変換部１３１とは接続されている。音声通信部１２１と音声制御部１２２とは接続され、音声制御部１２２と文字音声変換部１３１とは接続されている。文字音声変換部１３１は音声エンジン１３２に接続されている。 Chat communication unit 111 and voice communication unit 121 are connected to communication line 50 . Chat communication unit 111 and chat control unit 112 are connected, and chat control unit 112 and text-to-speech conversion unit 131 are connected. The voice communication section 121 and the voice control section 122 are connected, and the voice control section 122 and the text-to-speech conversion section 131 are connected. The text-to-speech converter 131 is connected to the speech engine 132 .

チャット通信部１１１は、会議端末２０１～２１０の各々から送信されるチャット情報信号を受信し、受信したチャット情報信号をチャット制御部１１２に供給する。また、チャット通信部１１１は、チャット制御部１１２による制御によってチャット情報信号を会議端末２０１～２１０のうちの送信先の会議端末に対して送信する。チャット制御部１１２はチャット通信部１１１によって受信されたチャット情報信号の解析を行い、送信先への振り分けを行い、チャット通信部１１１に対してチャット情報信号の送信先の指示等の制御を行う。 The chat communication unit 111 receives chat information signals transmitted from each of the conference terminals 201 to 210 and supplies the received chat information signals to the chat control unit 112 . Further, the chat communication unit 111 transmits the chat information signal to the destination conference terminal among the conference terminals 201 to 210 under the control of the chat control unit 112 . The chat control unit 112 analyzes the chat information signal received by the chat communication unit 111, sorts it to a transmission destination, and controls the chat communication unit 111 such as instructing the transmission destination of the chat information signal.

音声通信部１２１は、会議端末２０１～２１０の各々から送信される音声情報信号を受信し、受信した音声情報信号を音声制御部１２２に供給する。また、音声通信部１２１は、音声制御部１２２による制御によって音声情報信号を会議端末２０１～２１０のうちの送信先の会議端末に対して送信する。音声制御部１２２は音声通信部１２１によって受信された音声情報信号を解析し、音声通信部１２１に対して音声情報信号の送信先の会議端末への送信を指示する。 The voice communication unit 121 receives voice information signals transmitted from each of the conference terminals 201 to 210 and supplies the received voice information signals to the voice control unit 122 . Also, the voice communication unit 121 transmits the voice information signal to the destination conference terminal among the conference terminals 201 to 210 under the control of the voice control unit 122 . The voice control unit 122 analyzes the voice information signal received by the voice communication unit 121 and instructs the voice communication unit 121 to transmit the voice information signal to the destination conference terminal.

文字音声変換部１３１はチャット情報信号に含まれる文字データを文字毎に解析し、音声エンジン１３２を使用して音声データを生成する。音声エンジン１３２は文字毎の音声データを記憶しており、文字単位で文字データを音声データに変換する。すなわち、音声エンジン１３２は文字音声変換部１３１から文字単位で供給される文字データを音声データに順次変換し、その音声データに文字音声変換部１３１に供給する。文字音声変換部１３１は音声エンジン１３２から供給される音声データを受けて、チャット情報信号に含まれる文字データ全てに対する音声データを生成する。なお、音声エンジン１３２は文字毎ではなく単語単位で文字データを音声データに変換しても良い。 The character-to-speech conversion unit 131 analyzes the character data included in the chat information signal for each character, and uses the speech engine 132 to generate speech data. The speech engine 132 stores speech data for each character, and converts the character data into speech data for each character. That is, the voice engine 132 sequentially converts the character data supplied from the text-to-speech conversion unit 131 character by character into voice data, and supplies the voice data to the text-to-speech conversion unit 131 . The text-to-speech converter 131 receives voice data supplied from the voice engine 132 and generates voice data for all the text data included in the chat information signal. Note that the speech engine 132 may convert character data into speech data on a word-by-word basis rather than on a character-by-character basis.

一方、会議端末２０１～２１０の各々は、例えば、上述した会議システム用のソフトウエアをクライアントで処理することにより、図３に示すように、チャット送受信部２１１、チャット制御部２１２、表示部２１３、文字入力部２１４、音声送受信部２２１、音声制御部２２２、音声再生部２２３、及び音声入力部２２４を構成する。 On the other hand, each of the conference terminals 201 to 210, for example, by processing the software for the conference system described above in the client, as shown in FIG. A character input unit 214, a voice transmission/reception unit 221, a voice control unit 222, a voice reproduction unit 223, and a voice input unit 224 are configured.

チャット送受信部２１１及び音声送受信部２２１は通信回線５０に接続される。チャット送受信部２１１とチャット制御部２１２とは接続され、チャット制御部２１２と表示部２１３及び文字入力部２１４の各々とは接続されている。音声送受信部２２１と音声制御部２２２とは接続され、音声制御部２２２と音声再生部２２３とは接続されている。 The chat transmitting/receiving section 211 and the voice transmitting/receiving section 221 are connected to the communication line 50 . Chat transmission/reception unit 211 and chat control unit 212 are connected, and chat control unit 212 is connected to each of display unit 213 and character input unit 214 . The audio transmission/reception unit 221 and the audio control unit 222 are connected, and the audio control unit 222 and the audio reproduction unit 223 are connected.

チャット送受信部２１１は、会議サーバ１００から送信されるチャット情報信号を受信し、受信したチャット情報信号をチャット制御部２１２に供給する。また、チャット送受信部２１１は、チャット制御部２１２による制御によってチャット情報信号を会議サーバ１００に対して送信する。チャット制御部２１２はチャット送受信部２１１によって受信されたチャット情報信号から文字データを抽出して表示部２１３に供給する。文字入力部２１４は会議参加者の操作によって入力された文字を示す文字データをチャット制御部２１２に出力する。チャット制御部２１２は、文字入力部２１４から出力された文字データを含むチャット情報信号を生成する。チャット通信部１１１に対してチャット情報信号の送信先の指示等の制御を行う。文字入力部２１４は例えば、キーボードやタッチペンからなる。 The chat transmitting/receiving section 211 receives a chat information signal transmitted from the conference server 100 and supplies the received chat information signal to the chat control section 212 . Also, the chat transmission/reception unit 211 transmits a chat information signal to the conference server 100 under the control of the chat control unit 212 . The chat control unit 212 extracts character data from the chat information signal received by the chat transmitting/receiving unit 211 and supplies the character data to the display unit 213 . The character input unit 214 outputs character data representing characters input by the operation of the conference participant to the chat control unit 212 . Chat control unit 212 generates a chat information signal including character data output from character input unit 214 . It controls the chat communication unit 111 such as instructing the transmission destination of the chat information signal. The character input unit 214 is composed of, for example, a keyboard and a touch pen.

音声送受信部２２１は、会議サーバ１００から送信される音声情報信号を受信し、受信した音声情報信号を音声制御部２２２に供給する。また、音声送受信部２２１は、音声制御部２２２による制御によって音声情報信号を会議サーバ１００に送信する。音声制御部２２２は音声送受信部２２１によって受信された音声情報信号から音声データを抽出して音声再生部２２３に供給する。音声再生部２２３は音声制御部２２２から供給された音声データをアナログのオーディオ信号に変換し、そのオーディオ信号に応じた音声出力を内蔵スピーカ（図示せず）を介して生成する。また、音声制御部２２２は音声入力部２２４から供給された音声データに基づいて音声情報信号を作成し、音声送受信部２２１に対して音声情報信号の送信先の端末への送信を指示する。音声入力部２２４は例えば、マイクロホンからなる。 The voice transmission/reception unit 221 receives voice information signals transmitted from the conference server 100 and supplies the received voice information signals to the voice control unit 222 . Also, the voice transmission/reception unit 221 transmits voice information signals to the conference server 100 under the control of the voice control unit 222 . The audio control unit 222 extracts audio data from the audio information signal received by the audio transmission/reception unit 221 and supplies the extracted audio data to the audio reproduction unit 223 . The audio reproduction unit 223 converts the audio data supplied from the audio control unit 222 into an analog audio signal, and generates audio output according to the audio signal via a built-in speaker (not shown). Also, the audio control unit 222 creates an audio information signal based on the audio data supplied from the audio input unit 224, and instructs the audio transmission/reception unit 221 to transmit the audio information signal to the destination terminal. The audio input unit 224 is composed of, for example, a microphone.

会議端末２０１～２１０の各々は上述したようにホスト設定された会議サーバ１００と通信回線５０を介して通信することができる。その通信状態では、会議端末２０１～２１０の各々と会議サーバ１００との間で、音声情報信号及びチャット情報信号の送受信が可能である。これにより、会議端末２０１～２１０のうちの少なくとも２つの端末間でチャットによる文字メッセージの送受信、及び音声による通話の送受信が可能となり、これらの送受信によりオンライン会議が実行される。ここで、会議端末２０１～２１０の各々は、会議サーバ１００に対して、チャット情報信号内に付加情報を付与することが可能である。付加情報の１つであるチャット種別は、チャット情報信号内の文字データの処理方法として通常チャットと音声変換チャットとのいずれか一方を示し、音声変換チャットの場合にはチャット情報信号を音声情報信号に変換することを指定する情報となる。通常チャットの場合にはチャット情報信号内の文字データを文字表示することを指定する情報となる。 Each of the conference terminals 201-210 can communicate with the hosted conference server 100 via the communication line 50 as described above. In this communication state, voice information signals and chat information signals can be transmitted and received between each of the conference terminals 201 to 210 and the conference server 100 . As a result, it becomes possible to transmit and receive text messages by chat and to transmit and receive calls by voice between at least two terminals among the conference terminals 201 to 210, and an online conference is executed by these transmissions and receptions. Here, each of the conference terminals 201 to 210 can give additional information to the conference server 100 within the chat information signal. The chat type, which is one of the additional information, indicates either normal chat or voice conversion chat as a method of processing character data in the chat information signal. It is information that specifies conversion to . In the case of a normal chat, it is information specifying that the character data in the chat information signal should be displayed in characters.

チャット情報信号には、例えば、情報の種別（チャット情報信号の場合には文字データであることを示す）、チャット本体の文字データ、付加情報としてのチャット種別の他に、送信元及び送信先の情報が含まれる。例えば、会議端末２０１が会議端末２１０に対してチャット情報を送信する場合には、チャット先は会議端末２１０、送信元は会議端末２０１を示し、送信先は会議サーバ１００を示す。音声情報信号には、同様に、例えば、情報データの種別（音声情報信号の場合には音声データであること示す）、音声本体を表す音声データ、付加情報としての会議音声とチャット変換音声とを区別する音声種別、送信元及び送信先の情報が含まれる。チャット情報信号や音声情報信号は通信回線５０を例えば、パケット形式で伝送される。 The chat information signal includes, for example, the type of information (in the case of the chat information signal, it indicates that it is character data), the character data of the main body of the chat, the chat type as additional information, as well as the source and destination Contains information. For example, when the conference terminal 201 transmits chat information to the conference terminal 210 , the chat destination indicates the conference terminal 210 , the transmission source indicates the conference terminal 201 , and the transmission destination indicates the conference server 100 . Similarly, the audio information signal includes, for example, the type of information data (in the case of an audio information signal, it indicates that it is audio data), the audio data representing the audio itself, and the conference audio and chat conversion audio as additional information. It includes information on the distinguishing audio type, source and destination. The chat information signal and the voice information signal are transmitted through the communication line 50 in packet format, for example.

なお、会議サーバ１００の会議参加者は、全ての会議参加者の氏名と共に、会議参加者各々が使用する会議サーバ１００及び会議端末２０１～２１０を特定することができるアドレス、ＩＤ等の識別情報を文字データとして含む上記したチャット情報信号を会議サーバ１００から会議端末２０１～２１０に送信しており、各会議参加者は会議開始までに当該識別情報を会議端末２０１～２１０各々の表示部２１３を介して得ているとする。会議サーバ１００及び会議端末２０１～２１０各々では、チャット情報信号及び音声情報信号の各々の送信の際には上記した送信元及び送信先として識別情報が使用される。また、後述するように、会議端末２０１～２１０各々から送信されるチャット情報信号や音声情報信号は送信先に係わらず、一旦、会議サーバ１００に送られるので、チャット情報信号や音声情報信号には送信先とは別に会議サーバ１００の識別情報がホスト情報として含まれても良い。 In addition, the conference participants of the conference server 100 provide identification information such as addresses and IDs that can identify the conference server 100 and the conference terminals 201 to 210 used by each of the conference participants together with the names of all the conference participants. The above-described chat information signal including character data is transmitted from the conference server 100 to the conference terminals 201 to 210, and each conference participant transmits the identification information through the display unit 213 of each of the conference terminals 201 to 210 before the conference starts. Suppose you are getting In each of the conference server 100 and the conference terminals 201 to 210, identification information is used as the above-described source and destination when transmitting the chat information signal and the voice information signal. Further, as will be described later, chat information signals and voice information signals transmitted from each of the conference terminals 201 to 210 are sent to the conference server 100 once regardless of the destination. The identification information of the conference server 100 may be included as the host information in addition to the destination.

次に、かかる構成の会議システムの動作例を図４及び図５のシーケンス図を用いて説明する。この動作例は、会議が開始された状態（ステップＳ１０）において、会議端末２０１が会議端末２１０に対してチャット情報を送信する場合である。 Next, an operation example of the conference system having such a configuration will be described with reference to the sequence diagrams of FIGS. 4 and 5. FIG. This operation example is a case where the conference terminal 201 transmits chat information to the conference terminal 210 when the conference has started (step S10).

図４に示すように、会議開始後に、先ず、会議端末２０１の会議参加者が文字入力部２１４に対してチャットの文字入力を行うと、その文字入力を文字データとして受けて文字制御部２１２はチャット種別を通常チャットとしたチャット情報信号を生成する（ステップＳ１１）。このチャット情報信号に含まれる送信先には会議端末２１０が指定される。チャット送受信部２１１は文字制御部２１２によって生成されたチャット情報信号を会議サーバ１００に向けて送信する（ステップＳ１２）。チャット情報信号は会議端末２０１から通信回線５０を介して会議サーバ１００に伝送される。 As shown in FIG. 4, after the conference starts, first, when the conference participants of the conference terminal 201 input chat characters to the character input unit 214, the character input is received as character data, and the character control unit 212 A chat information signal whose chat type is normal chat is generated (step S11). The conference terminal 210 is designated as the destination included in this chat information signal. The chat transmission/reception unit 211 transmits the chat information signal generated by the character control unit 212 toward the conference server 100 (step S12). A chat information signal is transmitted from the conference terminal 201 to the conference server 100 via the communication line 50 .

会議サーバ１００では、チャット通信部１１１が会議端末２０１から送信されたチャット情報信号を受信し、チャット情報信号をチャット制御部１１２に供給する（ステップＳ１３）。チャット制御部１１２はチャット情報信号内に含まれるチャット種別を判断する（ステップＳ１４）。この受信チャット情報信号のチャット種別は通常チャットであるので、チャット制御部１１２は、チャット情報信号の送信先を判断し、チャット通信部１１１を介して送信先の会議端末２１０に向けてチャット情報信号を送信する（ステップＳ１５）。 In the conference server 100, the chat communication unit 111 receives the chat information signal transmitted from the conference terminal 201 and supplies the chat information signal to the chat control unit 112 (step S13). Chat control unit 112 determines the type of chat included in the chat information signal (step S14). Since the chat type of this received chat information signal is a normal chat, the chat control section 112 determines the transmission destination of the chat information signal, and transmits the chat information signal to the conference terminal 210 of the transmission destination via the chat communication section 111. is transmitted (step S15).

会議端末２１０では、チャット送受信部２１１が会議サーバ１００からのチャット情報信号を受信し（ステップＳ１６）、チャット制御部２１２はチャット情報信号に含まれるチャット種別が通常チャットと音声変換チャットとのいずれであるかを判断し（ステップＳ１７）、通常チャットであるならば、チャット情報信号に含まれるチャット情報を表示部２１３に供給し、それにより表示部２１３がチャット情報の内容を文字によって表示する（ステップＳ１８）。 In the conference terminal 210, the chat transmission/reception unit 211 receives the chat information signal from the conference server 100 (step S16), and the chat control unit 212 determines whether the chat type included in the chat information signal is normal chat or voice conversion chat. If it is a normal chat, the chat information included in the chat information signal is supplied to the display unit 213, whereby the display unit 213 displays the content of the chat information in characters (step S17). S18).

この結果、会議端末２１０の会議参加者は、会議端末２０１の会議参加者が入力したチャット内容を表示部２１３に表示される文字で確認することができる。 As a result, the conference participants of the conference terminal 210 can confirm the chat contents input by the conference participants of the conference terminal 201 by the characters displayed on the display unit 213 .

次いで、図５に示すように、会議端末２０１において、会議参加者が文字入力部２１４を操作してチャットの文字入力を行い、また、音声変換指定を行うと、文字入力部２１４のチャットの文字データ及び音声変換指定を含む出力に応じてチャット制御部２１２がチャット種別を音声変換チャットとしたチャット情報信号を作成する（ステップＳ２１）。文字制御部２１２によって生成されたチャット情報信号は会議サーバ１００に向けて送信される（ステップＳ２２）。チャット情報信号は会議端末２０１から通信回線５０を介して会議サーバ１００に伝送される。 Next, as shown in FIG. 5, in the conference terminal 201, when the conference participant operates the character input unit 214 to input chat characters and designates voice conversion, the characters of the chat in the character input unit 214 are input. The chat control unit 212 creates a chat information signal with the chat type as voice conversion chat according to the output including data and voice conversion designation (step S21). The chat information signal generated by the character control unit 212 is transmitted to the conference server 100 (step S22). A chat information signal is transmitted from the conference terminal 201 to the conference server 100 via the communication line 50 .

会議サーバ１００では、チャット通信部１１１が会議端末２０１からチャット情報信号を受信し（ステップＳ２３）、チャット制御部１１２はチャット情報信号内に含まれるチャット種別を判断する（ステップＳ２４）。この受信チャット情報信号のチャット種別は音声変換チャットであるので、チャット制御部１１２は文字音声変換部１３１にチャット情報信号中の文字データを供給する（ステップＳ２５）。文字データが供給された文字音声変換部１３１は、音声エンジン１３２を使用して文字データを音声データに変換し（ステップＳ２６）、その音声データを音声制御部１２２に供給する（ステップＳ２７）。音声制御部１２２は音声データが供給されると、その音声データを含む音声情報信号を生成してそれを音声通信部１２１に供給してその音声情報信号の送信を指示する（ステップＳ２８）。音声通信部１２１は音声情報信号を送信先に向けて送信する（ステップＳ２９）。よって、音声情報信号は会議サーバ１００から通信回線５０を介して会議端末２１０に伝送される。 In the conference server 100, the chat communication section 111 receives the chat information signal from the conference terminal 201 (step S23), and the chat control section 112 determines the chat type included in the chat information signal (step S24). Since the chat type of the received chat information signal is voice conversion chat, the chat control unit 112 supplies the character data in the chat information signal to the text-to-speech conversion unit 131 (step S25). The text-to-speech converter 131 to which the character data is supplied converts the character data into speech data using the speech engine 132 (step S26), and supplies the speech data to the speech control unit 122 (step S27). When the audio data is supplied, the audio control section 122 generates an audio information signal including the audio data, supplies it to the audio communication section 121, and instructs transmission of the audio information signal (step S28). The voice communication unit 121 transmits the voice information signal to the destination (step S29). Accordingly, the audio information signal is transmitted from the conference server 100 to the conference terminal 210 via the communication line 50. FIG.

なお、ステップＳ２８の音声制御部１２２における音声情報信号の生成には、音声データを示すデータ種別、チャット変換音声の有無を示す種別の他に、送信元及び送信先の情報が必要であるので、音声制御部１２２は送信元及び送信先の情報を、チャット制御部１１２に供給されたチャット情報信号から直接、又は文字音声変換部１３１を介して得ることになる。 It should be noted that the generation of the voice information signal in the voice control unit 122 in step S28 requires information on the source and destination in addition to the data type indicating the voice data and the type indicating the presence or absence of the converted chat voice. The voice control unit 122 obtains the information of the transmission source and the transmission destination directly from the chat information signal supplied to the chat control unit 112 or via the text-to-speech conversion unit 131 .

会議端末２１０では、音声送受信部２２１が会議サーバ１００から送信された音声情報信号を受信し（ステップＳ３０）、受信した音声情報信号は音声制御部２２２に供給され、音声情報信号に含まれる音声データが音声制御部２２２から音声再生部２２３に供給され、音声再生部２２３によって音声出力される（ステップＳ３１）。 In the conference terminal 210, the audio transmission/reception unit 221 receives the audio information signal transmitted from the conference server 100 (step S30), the received audio information signal is supplied to the audio control unit 222, and the audio data included in the audio information signal is processed. is supplied from the audio control unit 222 to the audio reproducing unit 223, and is output as audio by the audio reproducing unit 223 (step S31).

この結果、会議端末２１０の会議参加者は、会議端末２０１の会議参加者が入力したチャット内容を音声再生部２２３から出力される音声で確認することができる。よって、会議参加者がオンライン会議中に自身の会議端末の画面に表示されたチャットに気が付かずにいるというような状況を回避させることができる。 As a result, the conference participants of the conference terminal 210 can confirm the chat contents input by the conference participants of the conference terminal 201 by the voice output from the voice reproduction unit 223 . Therefore, it is possible to avoid a situation in which the conference participants are unaware of the chat displayed on the screen of their own conference terminal during the online conference.

なお、上記した実施例１では、チャット情報信号及び音声情報信号の各々に含まれる送信先は１つの端末に限らず、複数の端末でも良い。送信先が複数の会議端末であるならば、例えば、音声情報信号を受信した複数の会議端末の会議参加者がチャット内容を音声再生部から出力される音声で同時に確認することができる。また、送信先は会議端末２０１～２１０に限らず、会議サーバ１００でも良いことは勿論である。
（実施例２）
実施例２のオンライン会議システムは図１に示した構成を有し、オンライン会議サーバ１００は図２に示した通りである。オンライン会議端末２０１～２１０は図６に示すように、既に図３に示した構成の他に文字音声変換部２３１と、音声エンジン２３２とを有している。 In the first embodiment described above, the destination included in each of the chat information signal and the voice information signal is not limited to one terminal, and may be a plurality of terminals. If the transmission destination is a plurality of conference terminals, for example, conference participants of the plurality of conference terminals that have received the voice information signal can simultaneously confirm the chat content by the voice output from the voice reproduction unit. Further, the transmission destination is not limited to the conference terminals 201 to 210, and the conference server 100 may be used as a matter of course.
(Example 2)
The online conference system of Example 2 has the configuration shown in FIG. 1, and the online conference server 100 is as shown in FIG. As shown in FIG. 6, the online conference terminals 201 to 210 have a text-to-speech converter 231 and a speech engine 232 in addition to the configuration already shown in FIG.

文字音声変換部２３１及び音声エンジン２３２は図２に示した文字音声変換部１３１及び音声エンジン１３２と同一である。文字音声変換部２３１はチャット制御部２１２から供給される文字データを文字毎に解析し、音声エンジン２３２を使用して音声データを生成してその音声データを音声制御部２２２に供給する。音声エンジン２３２は文字毎の音声データを記憶しており、文字単位で文字データを音声データに変換する。 The text-to-speech converter 231 and the speech engine 232 are the same as the text-to-speech converter 131 and the speech engine 132 shown in FIG. The text-to-speech conversion unit 231 analyzes the character data supplied from the chat control unit 212 for each character, generates voice data using the voice engine 232 , and supplies the voice data to the voice control unit 222 . The speech engine 232 stores speech data for each character, and converts the character data into speech data for each character.

その他の実施例２の会議システムの構成は実施例１の会議システムと同一であり、その同一部分には同一符号が付けられている。 The rest of the configuration of the conference system of Example 2 is the same as that of the conference system of Example 1, and the same parts are denoted by the same reference numerals.

次に、かかる構成の実施例２の会議システムの動作例を図７及び図８のシーケンス図を用いて説明する。この動作例は、会議が開始された状態（ステップＳ４０）で、会議端末２０１が会議端末２１０に対してチャット情報を送信する場合である。 Next, an operation example of the conference system of the second embodiment having such a configuration will be described with reference to the sequence diagrams of FIGS. 7 and 8. FIG. This operation example is a case where the conference terminal 201 transmits chat information to the conference terminal 210 when the conference has started (step S40).

図７に示すように、会議中において、先ず、会議端末２０１の会議参加者が文字入力部２１４に対してチャットの文字入力を行うと、その文字入力を受けて文字制御部２１２はチャット種別を通常チャットとしたチャット情報信号を生成する（ステップＳ４１）。このチャット情報信号に含まれる送信先には会議端末２１０が指定される。チャット送受信部２１１は文字制御部２１２によって生成されたチャット情報信号を会議サーバ１００に向けて送信する（ステップＳ４２）。チャット情報信号は会議端末２０１から通信回線５０を介して会議サーバ１００に伝送される。 As shown in FIG. 7, during a conference, first, when a conference participant of the conference terminal 201 inputs chat characters to the character input unit 214, the character control unit 212 receives the character input and selects the chat type. A chat information signal for normal chat is generated (step S41). The conference terminal 210 is designated as the destination included in this chat information signal. The chat transmission/reception unit 211 transmits the chat information signal generated by the character control unit 212 to the conference server 100 (step S42). A chat information signal is transmitted from the conference terminal 201 to the conference server 100 via the communication line 50 .

会議サーバ１００では、チャット通信部１１１が会議端末２０１から送信されたチャット情報信号を受信し（ステップＳ４３）、チャット情報信号をチャット制御部１１２に供給する。チャット制御部１１２はチャット情報信号の送信先を判断し、チャット通信部１１１を介して送信先の会議端末２１０に向けてチャット情報信号を送信する（ステップＳ４４）。 In the conference server 100 , the chat communication section 111 receives the chat information signal transmitted from the conference terminal 201 (step S 43 ) and supplies the chat information signal to the chat control section 112 . The chat control unit 112 determines the destination of the chat information signal, and transmits the chat information signal to the destination conference terminal 210 via the chat communication unit 111 (step S44).

会議端末２１０では、チャット送受信部２１１が会議サーバ１００からのチャット情報信号を受信し（ステップＳ４５）、チャット制御部２１２はチャット情報信号に含まれるチャット種別が通常チャットと音声変換チャットとのいずれであるかを判断し（ステップＳ４６）、通常チャットであるならば、チャット情報信号に含まれるチャット情報を表示部２１３に供給し、それにより表示部２１３がチャット情報の内容を文字によって表示する（ステップＳ４７）。 In the conference terminal 210, the chat transmission/reception unit 211 receives the chat information signal from the conference server 100 (step S45), and the chat control unit 212 determines whether the chat type included in the chat information signal is normal chat or voice conversion chat. If it is a normal chat, the chat information contained in the chat information signal is supplied to the display unit 213, whereby the display unit 213 displays the content of the chat information in characters (step S46). S47).

このようにチャット情報信号に含まれるチャット種別が通常チャットである場合のステップＳ４１～Ｓ４７は、図４に示したステップＳ１４の会議サーバ１００によるチャット種別の判断動作がない以外はステップＳ１１～Ｓ１８と同一である。 As described above, steps S41 to S47 when the chat type included in the chat information signal is normal chat are the same as steps S11 to S18 except that the operation of determining the chat type by the conference server 100 in step S14 shown in FIG. are identical.

次いで、図８に示すように、会議端末２０１において、会議参加者が文字入力部２１４を操作してチャットの文字入力を行い、また、音声変換指定を行うと、文字入力部２１４のチャットの文字データ及び音声変換指定を含む出力に応じてチャット制御部２１２がチャット種別を音声変換チャットとしたチャット情報信号を作成する（ステップＳ５１）。文字制御部２１２によって生成されたチャット情報信号は会議サーバ１００に向けて送信される（ステップＳ５２）。チャット情報信号は会議端末２０１から通信回線５０を介して会議サーバ１００に伝送される。 Next, as shown in FIG. 8, in the conference terminal 201, when the conference participant operates the character input unit 214 to input chat characters and designates voice conversion, the characters of the chat in the character input unit 214 are input. The chat control unit 212 creates a chat information signal with the chat type as voice conversion chat according to the output including data and voice conversion designation (step S51). The chat information signal generated by the character control unit 212 is transmitted to the conference server 100 (step S52). A chat information signal is transmitted from the conference terminal 201 to the conference server 100 via the communication line 50 .

会議サーバ１００では、チャット受信部１１１が会議端末２０１から送信されたチャット情報信号を受信し（ステップＳ５３）、チャット情報信号をチャット制御部１１２に供給する。チャット制御部１１２はチャット情報信号の送信先を判断し、チャット通信部１１１を介して送信先の会議端末２１０に向けてチャット情報信号を送信する（ステップＳ５４）。 In the conference server 100 , the chat reception section 111 receives the chat information signal transmitted from the conference terminal 201 (step S 53 ) and supplies the chat information signal to the chat control section 112 . The chat control unit 112 determines the destination of the chat information signal, and transmits the chat information signal to the destination conference terminal 210 via the chat communication unit 111 (step S54).

会議端末２１０では、チャット送受信部２１１が会議サーバ１００からチャット情報信号を受信し（ステップＳ５５）、チャット制御部２１２はチャット情報信号内に含まれるチャット種別を判断する（ステップＳ５６）。この受信チャット情報信号のチャット種別は音声変換チャットであるので、チャット制御部２１２は文字音声変換部２３１にチャット情報信号中の文字データを供給する（ステップＳ５７）。文字データが供給された文字音声変換部２３１は、音声エンジン２３２を使用して文字データを音声データに変換し（ステップＳ５８）、その音声データを音声再生指示と共に音声制御部２２２に供給する（ステップＳ５９）。音声制御部２２２は音声再生指示と共に音声データが供給されると、その音声データを音声再生部２２３に供給し、これにより、音声再生部２２３は音声データが示す音声を出力する（ステップＳ６０）。 In the conference terminal 210, the chat transmission/reception unit 211 receives the chat information signal from the conference server 100 (step S55), and the chat control unit 212 determines the chat type included in the chat information signal (step S56). Since the chat type of the received chat information signal is voice conversion chat, the chat control section 212 supplies the character data in the chat information signal to the text-to-speech conversion section 231 (step S57). The text-to-speech conversion unit 231 to which the text data is supplied converts the text data into voice data using the voice engine 232 (step S58), and supplies the voice data to the voice control unit 222 together with a voice reproduction instruction (step S58). S59). When audio data is supplied together with the audio reproduction instruction, the audio control section 222 supplies the audio data to the audio reproduction section 223, and the audio reproduction section 223 outputs the audio indicated by the audio data (step S60).

この結果、会議端末２１０の会議参加者は、会議端末２０１の会議参加者が文字入力したチャット内容を音声再生部２２３から出力される音声で確認することができる。よって、会議参加者がオンライン会議中に自身の会議端末の画面に表示されたチャットに気が付かずにいるというような状況を回避させることができる。 As a result, the conference participants of the conference terminal 210 can confirm the chat content entered by the conference participants of the conference terminal 201 by the voice output from the voice reproduction unit 223 . Therefore, it is possible to avoid a situation in which the conference participants are unaware of the chat displayed on the screen of their own conference terminal during the online conference.

また、送信先は複数の会議端末２０１～２１０に対しても可能であり、同時に複数の会議参加者に対してチャット内容を音声で聞かせることが可能となる。更に、実施例２では実施例１と異なり、会議サーバ１００ではチャット情報信号中の文字データを音声データに変換することなく、会議端末２０１～２１０で文字データを音声データに変換して音声再生を行うので、会議サーバ１００の負荷を低減させることが可能である。 Also, the transmission destination can be a plurality of conference terminals 201 to 210, and at the same time, a plurality of conference participants can listen to the chat contents by voice. Furthermore, in the second embodiment, unlike the first embodiment, the conference server 100 does not convert the character data in the chat information signal into voice data, and the conference terminals 201 to 210 convert the character data into voice data and reproduce the voice. Therefore, the load on the conference server 100 can be reduced.

なお、実施例１及び２のオンライン会議システムでは音声及びチャットによるオンライン会議であるが、映像、音声及びチャットを会議端末間で送受信するオンライン会議システムにおいても本発明を適用することができる。 Although the online conference system of the first and second embodiments is an online conference using voice and chat, the present invention can also be applied to an online conference system in which video, voice, and chat are transmitted and received between conference terminals.

５０通信回線
１００会議サーバ１００
１１１チャット通信部
１１２、２１２チャット制御部
１２１音声通信部
１２２、２２２音声制御部
１３１、２３１文字音声変換部
１３２、２３２音声エンジン
２０１～２１０会議端末
２１１チャット送受信部
２１３表示部
２１４文字入力部
２２１音声送受信部
２２３音声再生部
２２４音声入力部 50 communication line 100 conference server 100
111 chat communication units 112, 212 chat control unit 121 voice communication units 122, 222 voice control units 131, 231 text-to-speech conversion units 132, 232 voice engines 201 to 210 conference terminal 211 chat transmission/reception unit 213 display unit 214 character input unit 221 voice Transmission/reception unit 223 Audio playback unit 224 Audio input unit

Claims

An online conference system including a conference server and a plurality of conference terminals communicatively connected to each other,
each of the plurality of conference terminals,
a voice input unit for inputting voice and outputting voice data representing the input voice;
an audio transmission/reception unit that transmits/receives an audio information signal including the audio data via the conference server;
an audio reproducing unit that reproduces and outputs the audio data in the audio information signal received by the audio transmitting/receiving unit as audio;
a character input unit for outputting character data indicating characters by operation input;
a chat transmitting/receiving unit configured to transmit/receive, via the conference server, a chat information signal including the character data and information indicating a destination conference terminal among the plurality of conference terminals;
The conference server
a chat communication unit for receiving the chat information signal transmitted by the chat transmission/reception unit of the transmission source conference terminal among the plurality of conference terminals;
a text-to-speech conversion unit that converts the text data in the chat information signal received by the chat communication unit into the voice data and outputs the voice data;
an audio communication unit that transmits the audio data output by the text-to-speech conversion unit as the audio information signal to the conference terminal that is the transmission destination of the received chat information signal. system.

the chat information signal transmitted and received by the chat transmission/reception unit includes additional information indicating whether the character data processing method is normal processing or voice conversion processing;
the conference server includes a chat control unit that determines whether the additional information in the chat information signal received by the chat communication unit indicates either the normal processing or the voice conversion processing;
The chat communication unit transmits the received chat information signal to the destination conference terminal when the additional information in the chat information signal received by the chat communication unit indicates the normal processing,
The text-to-speech converter converts the character data in the chat information signal to convert the speech data when the additional information in the chat information signal received by the chat communication unit indicates the speech conversion process. 2. The online conference system according to claim 1, wherein said information is output.

When the additional information in the chat information signal received by the chat transmitting/receiving unit indicates the normal processing, each of the plurality of conference terminals receives characters indicated by the character data in the chat information signal. 3. The online conference system according to claim 2, further comprising a display unit for displaying .

An online conference system including a conference server and a plurality of conference terminals communicatively connected to each other,
each of the plurality of conference terminals,
a voice input unit for inputting voice and outputting voice data representing the input voice;
an audio transmission/reception unit that transmits/receives an audio information signal including the audio data via the conference server;
an audio reproducing unit that reproduces and outputs the audio data in the audio information signal received by the audio transmitting/receiving unit as audio;
a character input unit for outputting character data indicating characters by operation input;
a chat transmitting/receiving unit configured to transmit/receive, via the conference server, a chat information signal including the character data and information indicating a destination conference terminal among the plurality of conference terminals;
a text-to-speech converting unit for converting the character data in the chat information signal received by the chat transmitting/receiving unit into the voice data and outputting the voice data;
The online conference system, wherein the audio reproducing unit reproduces and outputs the audio data converted from the character data by the text-to-speech converting unit as audio.

the chat information signal transmitted and received by the chat transmission/reception unit includes additional information indicating whether the character data processing method is normal processing or voice conversion processing;
each of the plurality of conference terminals,
a chat control unit that determines whether the additional information in the chat information signal received by the chat transmitting/receiving unit indicates either the normal processing or the voice conversion processing;
A display for displaying the chat content in characters according to the character data in the received chat information signal when the additional information in the chat information signal received by the chat transmitting/receiving unit indicates the normal processing. including the part and
The text-to-speech converter converts the character data in the chat information signal and outputs the speech data when the additional information in the chat information signal received by the chat transmitting/receiving unit indicates the speech conversion processing. 5. The online conference system according to claim 4, wherein:

An online conference server communicably connected to a plurality of conference terminals,
each of the plurality of conference terminals,
a voice input unit for inputting voice and outputting voice data representing the input voice;
an audio transmission/reception unit that transmits/receives an audio information signal including the audio data via the conference server;
an audio reproducing unit that reproduces and outputs the audio data in the audio information signal received by the audio transmitting/receiving unit as audio;
a character input unit for outputting character data indicating characters by operation input;
a chat transmitting/receiving unit configured to transmit/receive, via the conference server, a chat information signal including the character data and information indicating a destination conference terminal among the plurality of conference terminals;
The online conference server,
a chat communication unit for receiving the chat information signal transmitted by the chat transmission/reception unit of the transmission source conference terminal among the plurality of conference terminals;
a text-to-speech conversion unit that converts the text data in the chat information signal received by the chat communication unit into the voice data and outputs the voice data;
an audio communication unit that transmits the audio data output by the text-to-speech conversion unit as the audio information signal to the conference terminal that is the transmission destination of the received chat information signal. server.

An online conference terminal communicably connected to a conference server,
a voice input unit for inputting voice and outputting voice data representing the input voice;
an audio transmission/reception unit that transmits/receives an audio information signal including the audio data via the conference server;
an audio reproducing unit that reproduces and outputs the audio data in the audio information signal received by the audio transmitting/receiving unit as audio;
a character input unit for outputting character data indicating characters by operation input;
a chat transmitting/receiving unit configured to transmit/receive, via the conference server, a chat information signal including the character data and information indicating a destination conference terminal among the plurality of conference terminals;
a text-to-speech converting unit for converting the character data in the chat information signal into the voice data when the additional information in the chat information signal received by the chat transmitting/receiving unit indicates voice conversion processing;
The online conference terminal, wherein the audio reproduction unit reproduces and outputs the audio data converted from the character data by the text-to-speech conversion unit as audio.

A chat control method for an online conference system including a conference server and a plurality of conference terminals communicatively connected to each other,
each of the plurality of conference terminals,
a speech input step of inputting speech and outputting speech data representing the input speech;
an audio transmission/reception step of transmitting/receiving an audio information signal including the audio data via the conference server;
an audio reproducing step of reproducing and outputting the audio data in the audio information signal received in the audio transmitting/receiving step as audio;
a character input step of outputting character data representing a character by operation input;
a chat transmitting/receiving step of transmitting/receiving, via the conference server, a chat information signal including the character data and information indicating a destination conference terminal among the plurality of conference terminals;
The conference server
a chat communication step of receiving the chat information signal transmitted by the chat transmission/reception unit of the transmission source conference terminal among the plurality of conference terminals;
a text-to-speech conversion step of converting the text data in the chat information signal received in the chat communication step into the voice data and outputting the voice data;
a voice communication step of transmitting the voice data output in the text-to-speech conversion step as the voice information signal to the conference terminal of the transmission destination of the received chat information signal. Method.

A chat control method for an online conference system including a conference server and a plurality of conference terminals communicatively connected to each other,
each of the plurality of conference terminals,
a speech input step of inputting speech and outputting speech data representing the input speech;
an audio transmission/reception step of transmitting/receiving an audio information signal including the audio data via the conference server;
an audio reproducing step of reproducing and outputting the audio data in the audio information signal received in the audio transmitting/receiving step as audio;
a character input step of outputting character data representing a character by operation input;
a chat transmitting/receiving step of transmitting/receiving, via the conference server, a chat information signal including the character data and information indicating a destination conference terminal among the plurality of conference terminals;
a text-to-speech conversion step of converting the text data in the chat information signal received in the chat transmitting/receiving step into the voice data;
The chat control method, wherein the voice reproduction step reproduces and outputs the voice data converted from the character data by the text-to-speech converter as voice.