JP2005260384A - Video conference system - Google Patents

Video conference system Download PDF

Info

Publication number
JP2005260384A
JP2005260384A JP2004066475A JP2004066475A JP2005260384A JP 2005260384 A JP2005260384 A JP 2005260384A JP 2004066475 A JP2004066475 A JP 2004066475A JP 2004066475 A JP2004066475 A JP 2004066475A JP 2005260384 A JP2005260384 A JP 2005260384A
Authority
JP
Japan
Prior art keywords
terminal
communication speed
terminals
video conference
mcu
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2004066475A
Other languages
Japanese (ja)
Inventor
Yoichi Matsumura
陽一 松村
Takaki Osawa
孝基 大澤
Hideomi Shiiki
秀臣 椎木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2004066475A priority Critical patent/JP2005260384A/en
Publication of JP2005260384A publication Critical patent/JP2005260384A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a user with a high quality service by controlling communication speed between terminals thereby utilizing system resources effectively while reducing the load. <P>SOLUTION: When the number of terminals participating a video conference is altered, a multi-point conference unit 10 calculates the communication speed to each terminal from the total number of terminals in video conference and its own processing capacity and then informs calculation results to the terminal by instructing alteration of communication speed. In this regard, resources used by all terminals participating the video conference are determined and a decision is made whether the resources exceed a threshold or not. If the threshold is exceeded, communication speed per terminal is recalculated to set a resource reservation ratio at the time of exceeding the threshold. Terminals 20-1 to 20-n recognize alteration of communication speed and alters communication speed of data. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

本発明はテレビ会議システムに関し、特に多地点でテレビ会議を行うテレビ会議システムに関する。   The present invention relates to a video conference system, and more particularly to a video conference system that performs a video conference at multiple points.

近年、IPネットワークの通信速度が急速に高速化してきたことにより、音声や映像を含むマルチメディア情報のやり取りへと、ネットワークの利用形態が変化しつつある。その利用形態のなかでも、企業を中心として今後広く普及しつつあるものの一つに、テレビ会議システムが挙げられる。   In recent years, as the communication speed of the IP network has been rapidly increased, the use form of the network is changing to the exchange of multimedia information including voice and video. Among the usage forms, one of the widespread use in the future centering on companies is a video conference system.

多地点テレビ会議システムは、サーバに該当するMCU(Multi Point Control Unit)により、多地点のテレビ会議の全体制御(映像の分配、音声のミキシング等)が行われるが、従来のMCUは、処理性能や管理機能制限により映像品質(通信速度)は固定で運用していた。また、処理速度が変更できるシステムの場合は、利用者がクライアント端末に対して手動で設定を行っていた。   The multipoint video conference system performs overall control (video distribution, audio mixing, etc.) of the multipoint video conference by means of an MCU (Multi Point Control Unit) corresponding to the server. And video quality (communication speed) was fixed due to management function restrictions. In the case of a system in which the processing speed can be changed, the user manually sets the client terminal.

従来のテレビ会議システムとして、クライアント端末側から接続要求時に付加される通信モードを検出して、MCU側で通信モードに対応した速度を設定する技術が提案されている(例えば、特許文献1)。
特開平4−298149号公報(段落番号〔0013〕〜〔0019〕,第1図)
As a conventional video conference system, a technique has been proposed in which a communication mode added at the time of a connection request is detected from the client terminal side and a speed corresponding to the communication mode is set on the MCU side (for example, Patent Document 1).
JP-A-4-298149 (paragraph numbers [0013] to [0019], FIG. 1)

多地点テレビ会議システムのサービスを提供する事業者は、従来のシステムにおいて通信速度が固定の場合、端末の接続台数によってはMCUにおける負荷、処理能力をもて余すこととなる。また通信速度の変更においては管理者のオペレーションが必要となる。さらに、通信速度が固定的であるため、加入者へより画質音質の良いサービスを提供できる能力がMCUにあってもそれを有効利用できない点がある。   When a communication speed is fixed in a conventional system, a provider that provides a multi-point video conference system service may have a load and processing capacity in the MCU depending on the number of connected terminals. In addition, an administrator operation is required to change the communication speed. Furthermore, since the communication speed is fixed, even if the MCU has the ability to provide a service with better image quality and sound quality to the subscriber, it cannot be effectively used.

また今後、サービスを受ける加入者が増加するにしたがって、IPネットワークにおいてMCUの制御負荷は増大し、資源が圧迫された状態となる。提供事業者は新たなシステムの増築、または通信速度の制御を行うオペレーションが必要となる問題がある。   In the future, as the number of subscribers receiving services increases, the control load of the MCU in the IP network increases, and resources are under pressure. There is a problem that the provider needs an operation for adding a new system or controlling the communication speed.

MCUにおける処理能力(bps:Bits Per Second:1秒間に1ビットのデータを転送する送通信速度の単位、pps:Packet Per Second:1秒間に処理可能なパケット数のこと)には限界があり、接続される端末が少なければ、その処理能力をもて余す。   There is a limit to the processing capacity in the MCU (bps: Bits Per Second: unit of transmission speed for transferring 1-bit data per second, pps: Packet Per Second: number of packets that can be processed per second) If there are few terminals connected, the processing capacity is left.

例として、MCUは1パケットが1500byteのデータを1秒間に10,000パケット処理できる性能とした場合、処理能力は10,000パケット×1500byte×88bit=120Mbps(10kpps)となる。   As an example, if the MCU has a performance capable of processing 10,000 packets of data of 1500 bytes per second, the processing capacity is 10,000 packets × 1500 bytes × 88 bits = 120 Mbps (10 kpps).

各端末間との通信速度を384Kbps(固定)とし、100台の端末が稼動している場合、MCUが端末に費やす処理能力は、384Kbps×100台=38.4Mbpsとなり、120Mbps−38.4Mbps=81.6Mbpsの処理能力を残すこととなる。MCUの処理能力をもて余すことなく使用した場合、120Mbps/100台=1.2Mbpsを各端末間の通信速度に設定でき、より画質音質の良いサービスを提供できる。   When the communication speed between the terminals is 384 Kbps (fixed) and 100 terminals are operating, the processing capacity that the MCU spends on the terminals is 384 Kbps × 100 units = 38.4 Mbps, and 120 Mbps−38.4 Mbps = This leaves a processing capacity of 81.6 Mbps. When the processing capacity of the MCU is used without surplus, 120 Mbps / 100 units = 1.2 Mbps can be set as the communication speed between the terminals, and a service with better image quality and sound quality can be provided.

このように、従来のテレビ会議システムでは、会議システム全体の処理性能/資源を有効に活用できておらず、多地点会議サービスを提供する場合は、最大限に資源の活用ができないまま、設備増設などのシステム拡張を行って来た。   In this way, the conventional video conference system cannot effectively use the processing performance / resources of the entire conference system, and when providing a multipoint conference service, it is not possible to make maximum use of the resources, but the facilities can be expanded. Etc. have been expanded.

また、従来技術(特開平4−298149号公報)では、クライアント端末が備えている通信モードをMCU側で選択する構成であり、MCUの処理能力を考慮しての通信速度設定はなされておらず、不特定多数の端末を管理・制御するMCUの処理負荷軽減は行われていない。   In the prior art (Japanese Patent Laid-Open No. 4-298149), the communication mode of the client terminal is selected on the MCU side, and the communication speed is not set in consideration of the processing capacity of the MCU. The processing load of the MCU that manages and controls a large number of unspecified terminals has not been reduced.

本発明はこのような点に鑑みてなされたものであり、クライアント端末間の通信速度を制御して、システム資源の有効利用と負荷軽減を図り、利用者に高品質なサービスを提供するテレビ会議システムを提供することを目的とする。   The present invention has been made in view of the above points, and is a video conference for controlling the communication speed between client terminals to effectively use system resources and reduce the load, and to provide high-quality services to users. The purpose is to provide a system.

本発明では上記課題を解決するために、図1に示すような、多地点でテレビ会議を行うテレビ会議システム1において、テレビ会議に参加する端末数の変更を契機に、テレビ会議中の総端末数と自己の処理能力とから各端末への通信速度を計算し、計算結果を通信速度変更指示により端末へ通知する主制御部12を含む多地点会議装置10と、通信速度の変更を認識して、データの通信速度を変更させる端末側制御部22を含む端末装置20−1〜20−nと、を有することを特徴とするテレビ会議システム1が提供される。   In the present invention, in order to solve the above-mentioned problem, in the video conference system 1 that performs a video conference at multiple points as shown in FIG. 1, the total number of terminals in the video conference is triggered by the change in the number of terminals participating in the video conference. The communication speed to each terminal is calculated from the number and its own processing capability, and the multipoint conference apparatus 10 including the main control unit 12 that notifies the terminal of the calculation result by a communication speed change instruction is recognized. Thus, there is provided a video conference system 1 including terminal devices 20-1 to 20-n including a terminal-side control unit 22 that changes a data communication speed.

ここで、多地点会議装置10は、テレビ会議に参加する端末数の変更を契機に、テレビ会議中の総端末数と自己の処理能力とから各端末への通信速度を計算し、計算結果を通信速度変更指示により端末へ通知する主制御部12を含み、テレビ会議を行っている全端末装置の使用リソースを求め、使用リソースがしきい値を超過するか否かを判定し、超過すると判定した場合には、しきい値超過時のリソース確保割合にするために1端末あたりの通信速度を再計算する。端末装置20−1〜20−nは、通信速度の変更を認識して、データの通信速度を変更させる端末側制御部22を含む。   Here, the multipoint conference device 10 calculates the communication speed to each terminal from the total number of terminals in the video conference and its own processing capacity in response to the change in the number of terminals participating in the video conference. It includes the main control unit 12 that notifies the terminal by a communication speed change instruction, obtains the usage resources of all the terminal devices that are conducting the video conference, determines whether the usage resources exceed the threshold value, and determines that they exceed In such a case, the communication speed per terminal is recalculated in order to obtain the resource securing ratio when the threshold is exceeded. The terminal devices 20-1 to 20-n include a terminal-side control unit 22 that recognizes a change in the communication speed and changes the data communication speed.

本発明のテレビ会議システムは、多地点会議装置では、テレビ会議に参加する端末数の変更を契機に、テレビ会議中の総端末数と自己の処理能力とから各端末への通信速度を計算し、端末装置では、通信速度の変更を認識して、データの通信速度を変更させる構成とした。これにより、端末間の通信速度を制御して、システム資源の有効利用と負荷軽減を図り、利用者に高品質なサービスを提供することが可能になる。   The video conference system of the present invention calculates the communication speed to each terminal from the total number of terminals during the video conference and its own processing capacity in the multi-point conference device when the number of terminals participating in the video conference changes. The terminal device is configured to recognize the change in the communication speed and change the data communication speed. As a result, the communication speed between terminals can be controlled to effectively use system resources and reduce the load, thereby providing a high-quality service to the user.

以下、本発明の実施の形態を図面を参照して説明する。図1は本発明のテレビ会議システムの原理図である。テレビ会議システム1は、多地点会議装置(以下、MCU)10と、端末装置(以下、端末)20−1〜20−nとから構成され、ネットワーク(IPネットワーク)30を用いて不特定多数の加入者に対して、多地点間で同時に複数のテレビ会議、またはテレビ電話を提供するシステムである。   Hereinafter, embodiments of the present invention will be described with reference to the drawings. FIG. 1 is a principle diagram of a video conference system according to the present invention. The video conference system 1 includes a multipoint conference device (hereinafter, MCU) 10 and terminal devices (hereinafter, terminals) 20-1 to 20-n, and uses an unspecified number of networks (IP network) 30. This is a system that provides a subscriber with a plurality of video conferences or videophones simultaneously at multiple points.

MCU10は、送受信部11、主制御部12、データ管理部13、ストリーム処理部14から構成される。送受信部11は、ネットワーク30を介して、端末20−1〜20−n側とのデータの送受信を行う。主制御部12は、テレビ会議に参加する端末数の変更を契機に、テレビ会議中の総端末数とMCU10自身の処理能力とから各端末への通信速度を計算し、計算結果を通信速度変更指示により端末へ通知する制御を行う。この場合、テレビ会議を行っている全端末装置の使用リソースを求め、使用リソースがしきい値を超過するか否かを判定し、超過すると判定した場合には、しきい値超過時のリソース確保割合にするために1端末あたりの通信速度を再計算する。詳細は図10〜図13で後述する。   The MCU 10 includes a transmission / reception unit 11, a main control unit 12, a data management unit 13, and a stream processing unit 14. The transmission / reception unit 11 transmits / receives data to / from the terminals 20-1 to 20-n via the network 30. The main control unit 12 calculates the communication speed to each terminal from the total number of terminals in the video conference and the processing capacity of the MCU 10 itself when the number of terminals participating in the video conference changes, and changes the calculation result to the communication speed. Control to notify the terminal by instructions. In this case, use resources of all the terminal devices that are conducting the video conference are obtained, and it is determined whether or not the use resources exceed the threshold value. The communication speed per terminal is recalculated to make the ratio. Details will be described later with reference to FIGS.

データ管理部13は、あらかじめシステムの設定時に登録された各加入者宅に設置される端末20−1〜20−nの情報が格納されるデータベースである。データ管理部13には、登録されているTV会議グループ、そのグループに属する端末のIPアドレス、TV会議中の総端末数、MCU10の処理限界通信速度などが管理されている。ストリーム処理部14は、端末20−1〜20−nから送信されるストリーム信号に対して、映像分配、音声ミキシングの処理を行う。   The data management unit 13 is a database that stores information on the terminals 20-1 to 20-n installed at the subscriber's homes registered in advance when the system is set up. The data management unit 13 manages the registered TV conference group, the IP addresses of the terminals belonging to the group, the total number of terminals during the TV conference, the processing limit communication speed of the MCU 10, and the like. The stream processing unit 14 performs video distribution and audio mixing processing on the stream signals transmitted from the terminals 20-1 to 20-n.

端末20−1〜20−n(総称する場合は端末20)は、送受信部21、端末側制御部22(以下、単に制御部22)、データ管理部23、エンコード処理部24、デコード処理部25、映像合成部26から構成される。   The terminals 20-1 to 20-n (terminals 20 in a collective manner) include a transmission / reception unit 21, a terminal-side control unit 22 (hereinafter simply referred to as a control unit 22), a data management unit 23, an encoding processing unit 24, and a decoding processing unit 25. The image composition unit 26 is configured.

送受信部21は、ネットワーク30を介してデータの送受信を行う。制御部22は、通信速度の変更があった場合はこれを認識して、データ(ストリーム信号)の通信速度を変更させる。データ管理部23は、会議参加時の通信速度等の端末内のデータを管理する。   The transmission / reception unit 21 transmits / receives data via the network 30. If there is a change in the communication speed, the control unit 22 recognizes this and changes the communication speed of the data (stream signal). The data management unit 23 manages data in the terminal such as a communication speed at the time of conference participation.

エンコード処理部24は、入力映像・音声をストリーム信号に形式変更を行うためのエンコード(符号化)処理を行う。デコード処理部25は、受信したストリーム信号を再生させる形式に変更するデコード(復号化)処理を行う。映像合成部26は、各地点の端末から送信された映像を合成し、音声とのリップシンク等の処理を行って映像・音声を出力する。   The encoding processing unit 24 performs an encoding process for changing the format of the input video / audio to a stream signal. The decoding processing unit 25 performs a decoding process for changing the received stream signal to a format for reproduction. The video synthesizing unit 26 synthesizes the video transmitted from the terminal at each point, performs a process such as lip sync with audio, and outputs the video / audio.

次に通信端末が増加した時の動作概要について説明する。図2はテレビ会議参加端末追加時のシステムの動作を説明するための図である。MCU10とネットワーク30を介し接続するTV会議グループGr1に属する端末20−1、端末20−2がある。   Next, an outline of the operation when the number of communication terminals increases will be described. FIG. 2 is a diagram for explaining the operation of the system when a video conference participation terminal is added. There are a terminal 20-1 and a terminal 20-2 belonging to the TV conference group Gr1 connected to the MCU 10 via the network 30.

ここで、TV会議中のTV会議グループGr1に新たに端末20−3が参加してきた時、端末20−3から制御メッセージ(参加メッセージ)m1が送受信部11に受信される。主制御部12は、会議参加を認識し、データ管理部13に格納されているTV会議中の総端末数を更新し、TV会議中の総端末数とMCU10の処理能力を元に、各端末に設定する通信速度を再計算する。   Here, when the terminal 20-3 newly joins the TV conference group Gr1 during the TV conference, a control message (participation message) m1 is received by the transmission / reception unit 11 from the terminal 20-3. The main control unit 12 recognizes the participation in the conference, updates the total number of terminals in the TV conference stored in the data management unit 13, and determines each terminal based on the total number of terminals in the TV conference and the processing capacity of the MCU 10. Recalculate the communication speed set to.

次に通信速度の再計算結果による設定変更の動作概要について説明する。図3は端末20の通信速度変更時の動作を説明するための図である。MCU10で通信速度の再計算された結果をネットワーク30を介し、制御メッセージm2(通信速度変更指示)にて端末20に設定変更を行う。   Next, an outline of the operation for changing the setting based on the recalculation result of the communication speed will be described. FIG. 3 is a diagram for explaining the operation of the terminal 20 when the communication speed is changed. The result of the communication speed recalculated by the MCU 10 is changed to the terminal 20 via the network 30 by the control message m2 (communication speed change instruction).

ここで、TV会議に端末が追加で参加した時、MCU10で通信速度の再計算した結果は、制御メッセージm2に乗り、端末20の送受信部21にて受信される。制御部22は通信速度の変更を認識し、エンコード処理部24に対し、データエンコードの処理速度の変更(映像ストリームの通信速度の変更)制御を実施する。   Here, when the terminal additionally participates in the TV conference, the result of recalculating the communication speed by the MCU 10 is received by the transmission / reception unit 21 of the terminal 20 on the control message m2. The control unit 22 recognizes the change in the communication speed, and controls the encoding processing unit 24 to change the data encoding processing speed (change the video stream communication speed).

次に端末3台でのTV会議中の映像ストリーム信号の流れについて説明する。図4は端末3台でのTV会議中の映像ストリーム信号の流れの一例を示す図である。端末20−1に入ってきた音声・映像信号は、端末20−1内のエンコード処理部24−1に入り、映像は映像ストリームに形式変更される。エンコード処理されたストリーム信号b1は、端末20−1の送受信部21−1から送られ、ネットワーク30を経由し、MCU10の送受信部11に届く。   Next, the flow of a video stream signal during a TV conference using three terminals will be described. FIG. 4 is a diagram illustrating an example of the flow of a video stream signal during a TV conference using three terminals. The audio / video signal that has entered the terminal 20-1 enters the encoding processing unit 24-1 in the terminal 20-1, and the format of the video is changed to a video stream. The encoded stream signal b1 is sent from the transmission / reception unit 21-1 of the terminal 20-1, and reaches the transmission / reception unit 11 of the MCU 10 via the network 30.

そして、ストリーム信号b1は、ストリーム処理部14に入る。ストリーム処理部14ではストリーム信号の映像信号を複写し、ストリーム信号b1−2とストリーム信号b1−3を生成し、それぞれを送受信部11からネットワーク30を経由し、端末20−2、20−3に送信する。   Then, the stream signal b1 enters the stream processing unit 14. The stream processing unit 14 copies the video signal of the stream signal, generates the stream signal b1-2 and the stream signal b1-3, and sends them to the terminals 20-2 and 20-3 from the transmission / reception unit 11 via the network 30. Send.

同様に、端末20−2に入ってきた音声・映像信号もエンコード処理され、ストリーム信号b2としてMCU10に送信され、ストリーム処理部14で複写されてストリーム信号b2−1、b2−3を生成し、それぞれを送受信部11からネットワーク30を経由し、端末20−1、20−3に送信する。また、端末20−3では、入ってきた映像・音声信号b3をエンコードせずに折り返して、映像合成部26−3へ入力している。   Similarly, an audio / video signal that has entered the terminal 20-2 is also encoded, transmitted to the MCU 10 as the stream signal b2, and copied by the stream processing unit 14 to generate stream signals b2-1 and b2-3, Each is transmitted from the transmission / reception unit 11 to the terminals 20-1 and 20-3 via the network 30. Further, the terminal 20-3 returns the incoming video / audio signal b3 without encoding and inputs it to the video synthesis unit 26-3.

端末20−3において、MCU10から届いた端末20−1のストリーム信号b1−3と、端末20−2のストリーム信号b2−3とを、端末20−3内の送受信部21−3にて受信し、デコード処理部25−3でストリームを再生させる形式に変更する。そして、映像合成部26−3は、ストリーム信号b1−3、b2−3及び自身の信号b3の合成を行い出力する。   In the terminal 20-3, the stream signal b1-3 of the terminal 20-1 and the stream signal b2-3 of the terminal 20-2 received from the MCU 10 are received by the transmission / reception unit 21-3 in the terminal 20-3. Then, the decoding processing unit 25-3 changes the format so that the stream is reproduced. Then, the video composition unit 26-3 synthesizes and outputs the stream signals b1-3 and b2-3 and its own signal b3.

同様にして、端末20−1では、端末20−2のストリーム信号b2−1をデコードして出力し、端末20−2では、端末20−1のストリーム信号b1−2をデコードして出力する。   Similarly, the terminal 20-1 decodes and outputs the stream signal b2-1 of the terminal 20-2, and the terminal 20-2 decodes and outputs the stream signal b1-2 of the terminal 20-1.

次に端末が退出した際の動作概要について説明する。図5は端末が退出した際の動作を説明するための図である。TV会議グループにて、TV会議中の端末20−1〜20−3の3台から、端末20−3がTV会議から退出した場合について示す。   Next, an outline of the operation when the terminal leaves will be described. FIG. 5 is a diagram for explaining the operation when the terminal leaves. A case where the terminal 20-3 leaves the TV conference from the three terminals 20-1 to 20-3 in the TV conference in the TV conference group will be described.

端末20−3の制御部22−3は、TV会議退出のメッセージを制御メッセージm3に乗せ、送受信部21−3を介して、ネットワーク30を経由してMCU10に送信する。MCU10の送受信部11は、制御メッセージm3を受信し、主制御部12は、端末20−3がTV会議から退出する旨を認識する。そして、データ管理部13に登録されているTV会議中の総端末数を3台から2台へ変更する。   The control unit 22-3 of the terminal 20-3 puts the TV conference leaving message on the control message m3, and transmits the message to the MCU 10 via the network 30 via the transmission / reception unit 21-3. The transmission / reception unit 11 of the MCU 10 receives the control message m3, and the main control unit 12 recognizes that the terminal 20-3 is leaving the TV conference. Then, the total number of terminals in the TV conference registered in the data management unit 13 is changed from three to two.

主制御部12は、TV会議グループ内のTV会議中の端末数が2台となったことを認識し、ストリーム処理部14に映像ストリームの複写・転送処理を停止させる。それと共に、送受信部11より2端末間による通信制御命令を制御メッセージm4に乗せ、端末20−1、20−2にそれぞれ送信する。   The main control unit 12 recognizes that the number of terminals in the TV conference in the TV conference group has become two, and causes the stream processing unit 14 to stop the video stream copying / transfer processing. At the same time, a communication control command between the two terminals is placed on the control message m4 from the transmission / reception unit 11 and transmitted to the terminals 20-1 and 20-2, respectively.

2端末間による通信制御命令の入った制御メッセージm4を端末20−1、20−2の送受信部21−1、21−2が受信すると、端末20−1、20−2の制御部22−1、22−2は、エンコード処理部24−1、24−2にてエンコード処理したストリーム信号を、MCU10に対してではなく、対向する端末20−1、端末20−2同士で通信するよう送信する。なお、2端末間の通信状態になった場合は、MCU10は、端末20−1、20−2に対して接続管理制御のみを行うことになる。   When the transmission / reception units 21-1 and 21-2 of the terminals 20-1 and 20-2 receive the control message m4 containing the communication control command between the two terminals, the control unit 22-1 of the terminals 20-1 and 20-2. , 22-2 transmits the stream signal encoded by the encoding processing units 24-1 and 24-2 so that the terminal 20-1 and the terminal 20-2 facing each other do not communicate with the MCU 10. . When the communication state between the two terminals is entered, the MCU 10 performs only connection management control on the terminals 20-1 and 20-2.

次に稼動端末が2台から複数台になった際の動作概要について説明する。図6は稼動端末が2台から3台になった際の動作を説明するための図である。TV会議中の稼動端末が端末20−1、20−2の2台から、新たに端末20−3が参加してきた場合を示す。   Next, an outline of the operation when the number of operating terminals is changed from two to a plurality will be described. FIG. 6 is a diagram for explaining the operation when the number of operating terminals is changed from two to three. The case where the terminal 20-3 newly participates from the two operating terminals 20-1 and 20-2 during the TV conference is shown.

TV会議中のTV会議グループに対し、新たに端末20−3が参加した時、端末20−3の制御部22−3は、会議参加を示す内容を制御メッセージm1に乗せ、送受信部21−3よりネットワーク30を経由してMCU10に送信する。   When the terminal 20-3 newly joins the TV conference group in the TV conference, the control unit 22-3 of the terminal 20-3 puts the content indicating the conference participation on the control message m1, and transmits / receives the transmission / reception unit 21-3. Then, the data is transmitted to the MCU 10 via the network 30.

MCU10内の送受信部11は、制御メッセージm1を受信し、主制御部12は会議参加を認識して、データ管理部13に登録されているTV会議中の総端末数を更新する。主制御部12は、送受信部11より多端末間による通信制御命令を制御メッセージm5に乗せ、端末20−1〜20−3にそれぞれ送信する。   The transmission / reception unit 11 in the MCU 10 receives the control message m1, and the main control unit 12 recognizes the participation in the conference and updates the total number of terminals in the TV conference registered in the data management unit 13. The main control unit 12 places a communication control command between multiple terminals from the transmission / reception unit 11 on the control message m5 and transmits the control message to the terminals 20-1 to 20-3.

多端末間による映像通信制御命令の入った制御メッセージm5を端末20−1〜20−3の送受信部21−1〜21−3が受信すると、端末20−1〜20−3の制御部22−1〜22−3は、エンコード処理部24−1〜24−3でエンコード処理したストリーム信号を、2端末間の相手端末に対してではなく、MCU10に対して送信するよう制御する。   When the transmission / reception units 21-1 to 21-3 of the terminals 20-1 to 20-3 receive the control message m5 containing the video communication control command between the multiple terminals, the control unit 22- of the terminals 20-1 to 20-3. 1-22-3 controls to transmit the stream signal encoded by the encoding processing units 24-1 to 24-3 to the MCU 10, not to the partner terminal between the two terminals.

また、MCU10内の主制御部12は、ストリーム処理部14に対し、受信している端末20−1〜20−3からのストリーム信号をそれぞれに複写・転送を開始する制御を行う。   The main control unit 12 in the MCU 10 controls the stream processing unit 14 to start copying / transferring the received stream signals from the terminals 20-1 to 20-3.

次にMCU10からTV会議グループ内の1台の端末20に対して通信速度の変更設定を行い、その後に端末間で通信速度が変更される動作概要について説明する。図7は1台の端末に対して通信速度の変更設定が行われて端末間で通信速度を変更する動作を説明するための図である。通信速度変更が発生した時、MCU10は、通信速度変更指示を制御メッセージm2に乗せ、TV会議グループ内の任意の1つの端末(端末20−1とする)に送信する。   Next, an outline of operation in which the communication speed change setting is performed from the MCU 10 to one terminal 20 in the TV conference group, and the communication speed is subsequently changed between the terminals will be described. FIG. 7 is a diagram for explaining the operation of changing the communication speed between the terminals by setting the change of the communication speed for one terminal. When the communication speed change occurs, the MCU 10 places a communication speed change instruction on the control message m2 and transmits it to any one terminal (referred to as the terminal 20-1) in the TV conference group.

端末20−1は、送受信部21−1で制御メッセージm2を受信し、制御部22−1は通信速度変更内容を認識し、エンコード処理部24−1に対し、速度制御を行う。
同TV会議グループに属する端末20−2、端末20−3は、MCU10にて複写送信されたストリーム信号を送受信部21−2、21−3を経由し、デコード処理部25−2、25−3で受信する。端末20−2、端末20−3内の制御部22−2、22−3は、デコード処理部25−2、25−3でのストリーム信号受信時に、受信通信速度の変化を認識し、端末20−1の通信速度になるように、エンコード処理部24−2、24−3の通信速度の変更制御を実施する。
The terminal 20-1 receives the control message m2 at the transmission / reception unit 21-1, the control unit 22-1 recognizes the communication speed change content, and performs speed control on the encoding processing unit 24-1.
The terminals 20-2 and 20-3 belonging to the TV conference group receive the stream signals copied and transmitted by the MCU 10 via the transmission / reception units 21-2 and 21-3, and decode processing units 25-2 and 25-3. Receive at. The control units 22-2 and 22-3 in the terminal 20-2 and the terminal 20-3 recognize the change in the reception communication speed when receiving the stream signal in the decoding processing units 25-2 and 25-3, and the terminal 20 The communication speed change control of the encoding processing units 24-2 and 24-3 is performed so that the communication speed becomes -1.

次に端末20側にてMCU10の性能を把握して通信速度制御を行う場合の動作概要について説明する。図8は端末20側にてMCU10の性能を把握して通信速度制御を行う動作を説明するための図である。端末20が新規にMCU10に接続した時に、MCU10は、接続中の全端末に対しMCU10の全リソース(処理能力)、接続中の端末台数を通知する。   Next, an outline of the operation when the terminal 20 side grasps the performance of the MCU 10 and performs communication speed control will be described. FIG. 8 is a diagram for explaining the operation of grasping the performance of the MCU 10 and performing communication speed control on the terminal 20 side. When the terminal 20 is newly connected to the MCU 10, the MCU 10 notifies all the connected terminals of all the resources (processing capacity) of the MCU 10 and the number of connected terminals.

ここで、TV会議グループに新たに端末20−3が接続したとすると、MCU10より接続中の全端末20−1〜20−3に対し、制御メッセージm6によってMCU10の全リソース、接続中の端末台数が通知される。   Here, if the terminal 20-3 is newly connected to the TV conference group, all resources of the MCU 10 and the number of connected terminals are transmitted to the all terminals 20-1 to 20-3 connected from the MCU 10 by the control message m6. Will be notified.

通知を受信した全端末20−1〜20−3は、端末内の制御部22−1〜22−3にて会議参加を認識し、TV会議中の総端末数とMCU10のリソースの処理限界通信速度を基に、各端末に設定する通信速度を再計算し、計算結果をエンコード処理部24−1〜24−3に設定する。   All the terminals 20-1 to 20-3 receiving the notification recognize the conference participation in the control units 22-1 to 22-3 in the terminals, and the processing limit communication of the total number of terminals and the resources of the MCU 10 during the video conference. Based on the speed, the communication speed set for each terminal is recalculated, and the calculation results are set in the encoding processing units 24-1 to 24-3.

次にMCU10を介さずに端末20の通信速度性能に合わせた通信速度設定の動作概要について説明する。図9は端末20の通信速度性能に合わせた通信速度設定の動作を説明するための図である。端末20−1、20−2は、通信速度xにてテレビ会議中、最大通信速度y(y<x)の端末20−3が新規にMCU10に接続した時、端末20−3は、映像・音声信号をエンコード処理部24−3にてエンコード処理し、最大通信速度yで通信する。   Next, an outline of the operation of communication speed setting that matches the communication speed performance of the terminal 20 without using the MCU 10 will be described. FIG. 9 is a diagram for explaining the operation of communication speed setting in accordance with the communication speed performance of the terminal 20. When terminals 20-1 and 20-2 are teleconferencing at a communication speed x and a terminal 20-3 having a maximum communication speed y (y <x) is newly connected to the MCU 10, the terminal 20-3 The audio signal is encoded by the encoding processing unit 24-3 and communicated at the maximum communication speed y.

MCU10にて分配・送信された端末20−3のストリーム信号は、端末20−1、20−2で受信され、端末20−1、20−2内の制御部22−1、22−2は、デコード処理時に端末20−3の通信速度を検出する。制御部22−1、22−2は、自端末の通信速度xより速度の低いことを判断すると、自端末のエンコード処理部24−1、24−2に対して、通信速度xに合わせた速度変更制御を実施する。   The stream signal of the terminal 20-3 distributed and transmitted by the MCU 10 is received by the terminals 20-1 and 20-2, and the control units 22-1 and 22-2 in the terminals 20-1 and 20-2 are The communication speed of the terminal 20-3 is detected during the decoding process. When the control units 22-1 and 22-2 determine that the communication speed x is lower than the communication speed x of the own terminal, the control units 22-1 and 22-2 send the speed matching the communication speed x to the encoding processing units 24-1 and 24-2 of the own terminal. Implement change control.

次に本発明の詳細動作についてシーケンス図を用いて説明する。図10〜図13は通信速度計算の動作を示すシーケンス及びMCUリソース変化を示す図である。なお、以降に説明する動作例では、以下の数値がシステムで定義されているものとする。
・MCU10が同時に処理可能な能力(リソース):120Mbps
・1端末あたりの最大通信速度:1.5Mbps
・MCUリソースしきい値:80%(96Mbps)
・しきい値超過時のリソース確保割合:50%(60Mbps)
〔S1〕グループG1(端末G1−1〜G1−4)の4台の端末がテレビ会議を行うため、MCU10と接続する(接続要求をMCU10へ送信する)。
Next, the detailed operation of the present invention will be described with reference to a sequence diagram. FIG. 10 to FIG. 13 are diagrams showing the sequence of the communication speed calculation and MCU resource change. In the operation examples described below, it is assumed that the following numerical values are defined in the system.
-Capability (resource) that MCU10 can process simultaneously: 120 Mbps
-Maximum communication speed per terminal: 1.5 Mbps
MCU resource threshold: 80% (96 Mbps)
-Resource allocation ratio when threshold is exceeded: 50% (60 Mbps)
[S1] Four terminals in group G1 (terminals G1-1 to G1-4) connect to the MCU 10 to transmit a video conference (transmit a connection request to the MCU 10).

〔S2〕MCU10と接続の際に、MCU10から端末G1−1〜G1−4に対し通信速度を最大値1.5Mbpsで送信するよう指示する。
〔S3〕ステップS2の指示を含む呼接続が完了した後、グループG1の各端末はMCU10を経由してテレビ会議を開始する。
[S2] When connecting to the MCU 10, the MCU 10 instructs the terminals G1-1 to G1-4 to transmit the communication speed at the maximum value of 1.5 Mbps.
[S3] After the call connection including the instruction in step S2 is completed, each terminal of the group G1 starts a video conference via the MCU 10.

〔S4a、S4b〕MCU10のリソース(120Mbps)は、グループG1が使用している分の6(=1.5×4)Mbpsを消費し、残リソースは114(=120−6)Mbpsとなる。   [S4a, S4b] The resource (120 Mbps) of the MCU 10 consumes 6 (= 1.5 × 4) Mbps used by the group G1, and the remaining resource is 114 (= 120-6) Mbps.

〔S5〕同様にして、その後グループG15まで順次接続する。合計15グループ分接続している時点で、MCU使用リソースは90(=1.5×60)Mbps、残リソースは30(=120−90)Mbpsとなる。   [S5] Similarly, after that, the connection is sequentially made up to the group G15. When a total of 15 groups are connected, the MCU use resource is 90 (= 1.5 × 60) Mbps, and the remaining resource is 30 (= 120−90) Mbps.

〔S6〕グループG16が上記同様手順でMCU10に接続する。
〔S7〕グループG16がMCU10に接続した時、使用リソースが下記の式(1)の計算により、システムしきい値である80%(96Mbps)に到達することを認識する。
[S6] Group G16 connects to MCU 10 in the same procedure as described above.
[S7] When the group G16 is connected to the MCU 10, it is recognized that the resource used reaches the system threshold of 80% (96 Mbps) by the calculation of the following equation (1).

使用リソース量(96Mbps)=接続端末台数(16グループ×4台)×端末1台あたりの通信速度(1.5Mbps) ・・・(1)
〔S8〕MCU10は、使用率をリソース確保割合である50%にするため、「現在の端末接続台数」と「使用率50%(60Mbps)」を元に、以下の式(2)により、端末1台あたりの通信速度を計算する。
Resource usage (96 Mbps) = number of connected terminals (16 groups × 4) × communication speed per terminal (1.5 Mbps) (1)
[S8] The MCU 10 uses the following equation (2) based on the “current number of connected terminals” and “use rate 50% (60 Mbps)” to set the use rate to 50%, which is the resource securing ratio. Calculate the communication speed per unit.

端末1台あたりの通信速度=使用率50%(60Mbps)/端末接続台数(16グループ×4台) ・・・(2)
〔S9〕上記の計算により、端末1台あたりの通信速度が約930Kbpsとなる。MCU10は、決定した通信速度を、接続している全端末に930Kbpsで転送するよう指示する。
Communication speed per terminal = use rate 50% (60 Mbps) / number of terminals connected (16 groups × 4 units) (2)
[S9] From the above calculation, the communication speed per terminal is about 930 Kbps. The MCU 10 instructs the determined communication speed to be transferred to all connected terminals at 930 Kbps.

〔S10〕通信速度変更指示を受けた各端末は、現在送信中のデータ通信速度を1.5Mbpsから930Kbpsへ減速する。
〔S11〕MCUリソース使用利用率が50%に抑えられ、さらに多くの端末を接続収容可能状態となる。
[S10] Receiving the communication speed change instruction, each terminal decelerates the data communication speed currently being transmitted from 1.5 Mbps to 930 Kbps.
[S11] The utilization rate of MCU resources is suppressed to 50%, and more terminals can be accommodated.

〔S12〕テレビ会議を利用していたグループG1が終了したとする。端末G1−1〜G1−4はMCU10へ切断要求を送信する。
〔S13〕MCU10は、切断が発生した時点でリソースの再計算を行う。上記と同様な計算を行うことで、端末1台あたりの最大通信速度1.5Mbpsでもリソースしきい値を超えないことが判る。
[S12] It is assumed that the group G1 that has used the video conference has ended. The terminals G1-1 to G1-4 transmit a disconnection request to the MCU10.
[S13] The MCU 10 recalculates resources when disconnection occurs. By performing the same calculation as described above, it is understood that the resource threshold value is not exceeded even at the maximum communication speed of 1.5 Mbps per terminal.

〔S14〕MCU10は、現在接続中の全端末に対し、1.5Mbpsで転送するよう指示する。
〔S15〕通信速度変更指示を受けた各端末は、現在送信中のデータ通信速度を930Kbpsから1.5Mbpsへ増速し、データ通信を再開する。
[S14] The MCU 10 instructs all currently connected terminals to transfer at 1.5 Mbps.
[S15] Receiving the communication speed change instruction, each terminal increases the data communication speed being currently transmitted from 930 Kbps to 1.5 Mbps, and resumes data communication.

図14は1台の端末に対して通信速度の変更設定が行われて、端末間で通信速度を変更する動作を示すシーケンス図である。
〔S21〕端末20−1〜20−3は、MCU10に対して接続要求を送信する。なお、端末20−1〜20−3は、同じ会議を行うものとする。
FIG. 14 is a sequence diagram showing an operation of changing the communication speed between terminals by setting the change of the communication speed for one terminal.
[S21] The terminals 20-1 to 20-3 transmit a connection request to the MCU 10. The terminals 20-1 to 20-3 are assumed to have the same conference.

〔S22〕MCU10から1.5Mbpsの通信速度が設定され、MCU10を経由してテレビ会議を開始する。
〔S23〕通信速度変更が発生した場合、MCU10は、端末20−1に対し通信速度変更指示(930Kbpsとする)を行う。
[S22] A communication speed of 1.5 Mbps is set from the MCU 10, and a video conference is started via the MCU 10.
[S23] When a communication speed change occurs, the MCU 10 issues a communication speed change instruction (set to 930 Kbps) to the terminal 20-1.

〔S24〕端末20−1は、通信速度変更指示を受信して、MCU10へデータを930Kbpsの通信速度で送信する(930Kbpsでデータ通信を行う)。
〔S25〕MCU10から930Kbpsのデータが端末20−2、20−3へ送信される。
[S24] The terminal 20-1 receives the communication speed change instruction, and transmits data to the MCU 10 at a communication speed of 930 Kbps (data communication is performed at 930 Kbps).
[S25] 930 Kbps data is transmitted from the MCU 10 to the terminals 20-2 and 20-3.

〔S26〕端末20−2、20−3は、端末20−1から送られるデータのデコード時に、通信速度が930Kbpsに減速したことを検出する。
〔S27〕端末20−2、20−3は、エンコード処理の通信速度を930Kbpsに減速し、通信を再開する。
[S26] The terminals 20-2 and 20-3 detect that the communication speed has decreased to 930 Kbps when decoding the data sent from the terminal 20-1.
[S27] The terminals 20-2 and 20-3 reduce the communication speed of the encoding process to 930 Kbps and resume communication.

図15、図16は端末側にてMCU10の性能を把握して通信速度制御を行う際の動作を示すシーケンス図である。
〔S31〕グループG1(端末G1−1〜G1−4)の4台の端末がテレビ会議を行うため、MCU10と接続する。
FIG. 15 and FIG. 16 are sequence diagrams showing the operation when the communication speed control is performed by grasping the performance of the MCU 10 on the terminal side.
[S31] The four terminals in group G1 (terminals G1-1 to G1-4) connect to the MCU 10 to perform a video conference.

〔S32〕MCU10から端末G1−1〜G1−4に対し、テレビ会議中の総端末数とMCU10の処理能力とを含む通信速度計算情報(以下、MCU情報)を通知する。
〔S33〕グループG1の各端末は、MCU情報を元に、図10〜図13で上述したようなMCUリソースを考慮した通信速度計算を行って、MCU10を経由してテレビ会議を開始する(1.5Mbpsで通信を行うとする)。
[S32] The MCU 10 notifies the terminals G1-1 to G1-4 of communication speed calculation information (hereinafter, MCU information) including the total number of terminals in the video conference and the processing capacity of the MCU 10.
[S33] Based on the MCU information, each terminal of the group G1 performs a communication speed calculation considering the MCU resources as described above with reference to FIGS. 10 to 13, and starts a video conference via the MCU 10 (1). Suppose that communication is performed at 5 Mbps).

ここで、MCU情報を以下の内容とする。
・MCUの全リソース量(120Mbps)
・システムしきい値(80%:96Mbps)
・接続中端末台数(1グループ=4台)
・しきい値超過時のリソース確保割合(50%:60Mbps)
これらの情報を受信した各接続中端末は、図10〜図13で上述したMCU10が実施していた計算(式(1))と同様の方法でしきい値超過有無を判定するが、グループG1のみ接続している状態ではしきい値は超過しない(使用リソース:6Mbps)。
Here, the MCU information has the following contents.
-Total resource amount of MCU (120 Mbps)
-System threshold (80%: 96 Mbps)
・ Number of connected terminals (1 group = 4)
-Resource allocation ratio when threshold is exceeded (50%: 60 Mbps)
Each connected terminal that has received these pieces of information determines whether or not the threshold value has been exceeded in the same manner as the calculation (equation (1)) performed by the MCU 10 described above with reference to FIGS. The threshold is not exceeded in the state where only the connection is made (resource used: 6 Mbps).

〔S34〕同様に、その後グループG16の端末G16−3まで順次接続していく。
〔S35〕端末G16−4がMCU10に接続した際に、MCU10が転送するMCU情報は以下の数値となる。
・MCUの全リソース量(120Mbps)
・システムしきい値(80%:96Mbps)
・接続中端末台数(64台=16グループ×4台)
・しきい値超過時のリソース確保割合(50%:60Mbps)
〔S36〕これらの情報を受信した各接続中端末は、再び式(1)を用いてしきい値超過有無を判定し、しきい値超過であること(しきい値96Mbpsに対し、使用量96Mbpsとなった)を認識する。
[S34] Similarly, the terminal G16-3 of the group G16 is connected sequentially thereafter.
[S35] The MCU information transferred by the MCU 10 when the terminal G16-4 is connected to the MCU 10 has the following numerical values.
-Total resource amount of MCU (120 Mbps)
-System threshold (80%: 96 Mbps)
・ Number of connected terminals (64 units = 16 groups x 4 units)
-Resource allocation ratio when threshold is exceeded (50%: 60 Mbps)
[S36] Each connected terminal that has received these pieces of information again determines whether or not the threshold has been exceeded using Equation (1), and indicates that the threshold has been exceeded (the amount used is 96 Mbps compared to the threshold 96 Mbps). ).

〔S37〕しきい値超過を認識した全端末にて、通信速度をMCU10が実施していた計算(式2)で求める(930Kbpsとなる)。
〔S38〕その後、端末G1−1〜G16−4は、エンコード速度(通信速度)を930Kbpsへ減速してデータ通信を再開する。なお、端末切断によりMCUリソースに余裕ができたら再び同様の方法で計算し、通信速度を増速する方向へ制御する。
[S37] The communication speed is obtained by the calculation performed by the MCU 10 (Equation 2) at all terminals that have recognized that the threshold value has been exceeded (becomes 930 Kbps).
[S38] Thereafter, the terminals G1-1 to G16-4 reduce the encoding speed (communication speed) to 930 Kbps and resume data communication. When there is a margin in MCU resources due to disconnection of the terminal, the calculation is performed again in the same manner, and the communication speed is controlled to increase.

図17は端末の通信速度性能に合わせて通信速度を設定する際の動作を示すシーケンス図である。端末20−2〜20−4が通信速度1.5Mbpsで、MCU10を経由してテレビ会議を行っているときに、処理能力(スペック)が低く、最大384Kbpsでしかテレビ会議アプリケーションが動作しない端末20−1が接続した場合を考える。   FIG. 17 is a sequence diagram showing an operation when setting the communication speed in accordance with the communication speed performance of the terminal. When the terminals 20-2 to 20-4 perform a video conference via the MCU 10 at a communication speed of 1.5 Mbps, the processing capability (spec) is low, and the video conference application only operates at a maximum of 384 Kbps. Consider the case where -1 is connected.

〔S41〕端末20−2〜20−4は、MCU10を介してテレビ会議を行っている(1.5Mbps)。
〔S42〕最大384Kbpsの端末20−1がMCU10に接続する。
[S41] The terminals 20-2 to 20-4 conduct a video conference via the MCU 10 (1.5 Mbps).
[S42] The terminal 20-1 having a maximum of 384 Kbps connects to the MCU 10.

〔S43〕MCU10と端末20−1は384Kbpsの通信速度でデータ通信を行う。
〔S44〕MCU10から384Kbpsのデータが端末20−2〜20−4へ送信される。
[S43] The MCU 10 and the terminal 20-1 perform data communication at a communication speed of 384 Kbps.
[S44] The data of 384 Kbps is transmitted from the MCU 10 to the terminals 20-2 to 20-4.

〔S45〕端末20−2〜20−4は、端末20−1から送られるデータのデコード時に、現在通信している1.5Mbpsより低い384Kbpsのデータが送られてくることを検出する。   [S45] When decoding the data sent from the terminal 20-1, the terminals 20-2 to 20-4 detect that 384 Kbps data lower than 1.5 Mbps currently being communicated is sent.

〔S46〕端末20−2〜20−4は、エンコード処理の通信速度を384Kbpsに減速し、MCU10を経由して通信を再開する。
図18は端末の通信速度性能に合わせて通信速度を設定する際の動作を示すフローチャートである。
[S46] The terminals 20-2 to 20-4 reduce the communication speed of the encoding process to 384 Kbps and resume communication via the MCU 10.
FIG. 18 is a flowchart showing an operation when the communication speed is set in accordance with the communication speed performance of the terminal.

〔S51〕端末20内のデコード処理部25は、受信ストリーム信号の速度が変更したことを制御部22へ通知する。
〔S52〕制御部22は、現在の通信速度とデコード処理部25から通知された速度とを比較する。
[S51] The decoding processing unit 25 in the terminal 20 notifies the control unit 22 that the speed of the received stream signal has changed.
[S52] The control unit 22 compares the current communication speed with the speed notified from the decoding processing unit 25.

〔S53〕現在速度≦通知速度なら通信速度は変更せず、現在速度>通知速度ならステップS54へいく。
〔S54〕制御部22は、エンコード処理部24に対して、通知速度でデータエンコードするように速度変更を指示する。
[S53] If the current speed ≤ the notification speed, the communication speed is not changed. If the current speed> the notification speed, the process proceeds to step S54.
[S54] The control unit 22 instructs the encoding processing unit 24 to change the speed so as to encode data at the notification speed.

以上説明したように、本発明によれば、多地点会議システムにおける最適な通信速度を自動的に利用端末数に応じて調整できる。これにより、MCU性能/資源を最大限に活かしたサービス提供が可能となり、より高画質な映像を利用者に提供できると共に、システム管理作業の軽減にも貢献する。   As described above, according to the present invention, the optimum communication speed in the multipoint conference system can be automatically adjusted according to the number of terminals used. This makes it possible to provide services that make the most of MCU performance / resources, providing users with higher-quality video and contributing to reducing system management work.

また、MCU10からの通信速度の調整指示を、通話グループの1端末にだけに通知するだけでグループ内の端末が自動的に速度を合わせる構成とし、またはMCU10から指示を出さずに、端末側にて判断して最適な通信速度に調整できる構成としたので、MCUの負荷軽減が図れる。さらに、端末側にて端末自身の処理性能を判断して通信速度を調整する構成としたので、様々な処理を行うMCU10への負荷を大幅に軽減することが可能になる。   Also, the communication speed adjustment instruction from the MCU 10 is notified to only one terminal in the call group, and the terminals in the group automatically adjust the speed, or the terminal does not issue an instruction from the MCU 10. Therefore, the load on the MCU can be reduced. Furthermore, since the terminal side determines the processing performance of the terminal itself and adjusts the communication speed, the load on the MCU 10 that performs various processes can be greatly reduced.

(付記1) 多地点でテレビ会議を行うテレビ会議システムにおいて、
テレビ会議に参加する端末数の変更を契機に、テレビ会議中の総端末数と自己の処理能力とから各端末への通信速度を計算し、計算結果を通信速度変更指示により端末へ通知する主制御部を含む多地点会議装置と、
通信速度の変更を認識して、データの通信速度を変更させる端末側制御部を含む端末装置と、
を有することを特徴とするテレビ会議システム。
(Supplementary note 1) In a video conference system that performs video conferences at multiple points,
When the number of terminals participating in a video conference is changed, the communication speed to each terminal is calculated from the total number of terminals in the video conference and its own processing capacity, and the calculation result is notified to the terminal by a communication speed change instruction. A multipoint conference device including a control unit;
A terminal device including a terminal-side control unit for recognizing a change in the communication speed and changing the data communication speed;
A video conference system comprising:

(付記2) 前記多地点会議装置は、テレビ会議を行っている全端末装置の使用リソースを求め、使用リソースがしきい値を超過するか否かを判定し、超過すると判定した場合には、しきい値超過時のリソース確保割合にするために1端末あたりの通信速度を再計算することを特徴とする付記1記載のテレビ会議システム。   (Additional remark 2) The said multipoint conference apparatus calculates | requires the usage resource of all the terminal devices which are carrying out a video conference, determines whether a usage resource exceeds a threshold value, and when it determines with exceeding, The video conference system according to appendix 1, wherein the communication speed per terminal is recalculated in order to obtain a resource securing ratio when the threshold value is exceeded.

(付記3) 前記多地点会議装置は、通信速度変更指示をテレビ会議グループ内の1台の端末のみに送信し、通信速度変更指示を受信した第1の端末装置は、通信速度を変更したデータを生成し、第2の端末装置は、前記第1の端末装置から送信されるデータから通信速度の変化を認識して、自端末の通信速度を変更させることを特徴とする付記1記載のテレビ会議システム。   (Additional remark 3) The said multipoint conference apparatus transmits the communication speed change instruction | indication only to one terminal in a video conference group, and the 1st terminal device which received the communication speed change instruction | indication is the data which changed communication speed. And the second terminal device recognizes a change in communication speed from the data transmitted from the first terminal device, and changes the communication speed of the terminal itself. Conference system.

(付記4) 多地点でテレビ会議を行うテレビ会議システムにおいて、
テレビ会議中の総端末数と自己の処理能力とを含む通信速度計算情報を全端末に通知する主制御部を含む多地点会議装置と、
通信速度計算情報を受信して、テレビ会議中の総端末数と前記多地点会議装置の処理能力とから自端末の通信速度を計算し、計算結果にもとづきデータの通信速度を変更させる端末側制御部を含む端末装置と、
を有することを特徴とするテレビ会議システム。
(Appendix 4) In a video conference system that performs video conferences at multiple points,
A multipoint conference device including a main control unit for notifying all terminals of communication speed calculation information including the total number of terminals during the video conference and its own processing capacity;
Terminal-side control that receives communication speed calculation information, calculates the communication speed of its own terminal from the total number of terminals during the video conference and the processing capability of the multipoint conference device, and changes the data communication speed based on the calculation result A terminal device including a unit;
A video conference system comprising:

(付記5) 前記端末装置は、テレビ会議を行っている全端末装置の制御を行っている前記多地点会議装置に関する使用リソースを求め、使用リソースがしきい値を超過するか否かを判定し、超過すると判定した場合には、しきい値超過時のリソース確保割合にするために自端末の通信速度を再計算することを特徴とする付記4記載のテレビ会議システム。   (Additional remark 5) The said terminal device calculates | requires the use resource regarding the said multipoint conference apparatus which is controlling all the terminal devices which are carrying out a video conference, and determines whether a use resource exceeds a threshold value. The video conference system according to supplementary note 4, wherein, when it is determined that the communication rate exceeds the threshold, the communication speed of the terminal itself is recalculated in order to obtain a resource securing ratio when the threshold value is exceeded.

(付記6) 多地点でテレビ会議を行うテレビ会議システムにおいて、
端末から送信されるデータに対して、映像分配、音声ミキシングの制御を行う多地点会議装置と、
テレビ会議の実行中、新規端末がシステムに接続した際、新規端末から送信されるデータの速度が自端末の通信速度より低速であると判断した場合には、自端末の通信速度を新規端末側の速度に合わせるように制御する端末側制御部を含む端末装置と、
を有することを特徴とするテレビ会議システム。
(Appendix 6) In a video conference system that performs video conferences at multiple points,
A multipoint conference device that controls video distribution and audio mixing for data transmitted from the terminal;
When a new terminal connects to the system during a video conference, if it is determined that the speed of data transmitted from the new terminal is lower than the communication speed of the own terminal, the communication speed of the own terminal is set to the new terminal side. A terminal device including a terminal-side control unit that controls to match the speed of
A video conference system comprising:

(付記7) 多地点テレビ会議の制御を行う多地点会議装置において、
ネットワークを介して、端末側とのデータの送受信を行う送受信部と、
テレビ会議に参加する端末数の変更を契機に、テレビ会議を行っている全端末装置の使用リソースを求め、使用リソースがしきい値を超過するか否かを判定し、超過すると判定した場合には、しきい値超過時のリソース確保割合にするために1端末あたりの通信速度を再計算し、計算結果を含む通信速度変更指示をテレビ会議グループ内の1台の端末のみに送信させる制御を行う主制御部と、
を有することを特徴とする多地点会議装置。
(Supplementary note 7) In the multipoint conference device that controls the multipoint video conference,
A transmission / reception unit that transmits / receives data to / from the terminal side via the network;
When the number of terminals participating in a video conference is changed, the usage resources of all the terminal devices that are conducting the video conference are obtained, it is determined whether the usage resources exceed the threshold, and Re-calculates the communication speed per terminal in order to obtain the resource allocation ratio when the threshold is exceeded, and controls to send a communication speed change instruction including the calculation result to only one terminal in the video conference group. A main control unit to perform,
A multipoint conference apparatus characterized by comprising:

(付記8) テレビ会議を行う端末装置において、
ネットワークを介してデータの送受信を行う送受信部と、
多地点会議装置から送信された通信速度変更指示を受信した場合、または他端末から送信されるデータから通信速度の変化を認識した場合は、自端末の通信速度を変更させる制御を行う端末側制御部と、
を有することを特徴とする端末装置。
(Supplementary note 8) In a terminal device for conducting a video conference,
A transmission / reception unit for transmitting / receiving data via a network;
When receiving a communication speed change instruction transmitted from a multipoint conference device or when recognizing a change in communication speed from data transmitted from another terminal, a terminal-side control that performs control to change the communication speed of its own terminal And
The terminal device characterized by having.

(付記9) 多地点テレビ会議の制御を行う多地点会議装置において、
ネットワークを介してデータの送受信を行う送受信部と、
テレビ会議に参加する端末数の変更を契機に、テレビ会議中の総端末数と自己の処理能力とを含む通信速度計算情報を接続している全端末に通知する主制御部と、
を有することを特徴とする多地点会議装置。
(Supplementary Note 9) In a multipoint conference device that controls a multipoint video conference,
A transmission / reception unit for transmitting / receiving data via a network;
In response to a change in the number of terminals participating in the video conference, a main control unit that notifies all connected terminals of communication speed calculation information including the total number of terminals in the video conference and its own processing capacity,
A multipoint conference apparatus characterized by comprising:

(付記10) テレビ会議を行う端末装置において、
ネットワークを介してデータの送受信を行う送受信部と、
多地点会議装置から送信された、テレビ会議中の総端末数と自己の処理能力とを含む通信速度計算情報を受信して、前記多地点会議装置に関する使用リソースを求め、使用リソースがしきい値を超過するか否かを判定し、超過すると判定した場合には、しきい値超過時のリソース確保割合にするために自端末の通信速度を再計算し、計算結果にもとづき自端末の通信速度を変更させる端末側制御部と、
を有することを特徴とする端末装置。
(Supplementary Note 10) In a terminal device that performs a video conference,
A transmission / reception unit for transmitting / receiving data via a network;
The communication speed calculation information including the total number of terminals in the video conference and its own processing capability transmitted from the multipoint conference device is received to determine the use resource related to the multipoint conference device, and the use resource is a threshold value If it exceeds, the communication speed of the terminal will be recalculated to obtain the resource allocation ratio when the threshold is exceeded, and the communication speed of the terminal will be based on the calculation result. A terminal-side control unit that changes
The terminal device characterized by having.

(付記11) テレビ会議を行う端末装置において、
ネットワークを介してデータの送受信を行う送受信部と、
テレビ会議の実行中、新規端末がシステムに接続した際、新規端末から送信されるデータの速度が自端末の通信速度より低速であると判断した場合には、自端末の通信速度を新規端末側の速度に合わせるように制御する端末側制御部と、
を有することを特徴とする端末装置。
(Supplementary Note 11) In a terminal device that performs a video conference,
A transmission / reception unit for transmitting / receiving data via a network;
When a new terminal connects to the system during a video conference, if it is determined that the speed of data transmitted from the new terminal is lower than the communication speed of the own terminal, the communication speed of the own terminal is set to the new terminal side. A terminal-side control unit that controls to match the speed of
The terminal device characterized by having.

本発明のテレビ会議システムの原理図である。It is a principle figure of the video conference system of this invention. テレビ会議参加端末追加時のシステムの動作を説明するための図である。It is a figure for demonstrating operation | movement of the system at the time of a video conference participation terminal addition. 端末の通信速度変更時の動作を説明するための図である。It is a figure for demonstrating the operation | movement at the time of the communication speed change of a terminal. 端末3台でのTV会議中の映像ストリーム信号の流れの一例を示す図である。It is a figure which shows an example of the flow of the video stream signal in a video conference with three terminals. 端末が退出した際の動作を説明するための図である。It is a figure for demonstrating the operation | movement when a terminal leaves. 稼動端末が2台から3台になった際の動作を説明するための図である。It is a figure for demonstrating operation | movement when an operation terminal changes from 2 units | sets to 3 units | sets. 1台の端末に対して通信速度の変更設定が行われて端末間で通信速度を変更する動作を説明するための図である。It is a figure for demonstrating the operation | movement which changes the communication speed with respect to one terminal, and changes a communication speed between terminals. 端末側にてMCUの性能を把握して通信速度制御を行う動作を説明するための図である。It is a figure for demonstrating the performance of MCU on the terminal side, and explaining the operation | movement which performs communication speed control. 端末の通信速度性能に合わせた通信速度設定の動作を説明するための図である。It is a figure for demonstrating the operation | movement of the communication speed setting according to the communication speed performance of the terminal. 通信速度計算の動作を示すシーケンス及びMCUリソース変化を示す図である。It is a figure which shows the sequence which shows the operation | movement of communication speed calculation, and MCU resource change. 通信速度計算の動作を示すシーケンス及びMCUリソース変化を示す図である。It is a figure which shows the sequence which shows the operation | movement of communication speed calculation, and MCU resource change. 通信速度計算の動作を示すシーケンス及びMCUリソース変化を示す図である。It is a figure which shows the sequence which shows the operation | movement of communication speed calculation, and MCU resource change. 通信速度計算の動作を示すシーケンス及びMCUリソース変化を示す図である。It is a figure which shows the sequence which shows the operation | movement of communication speed calculation, and MCU resource change. 1台の端末に対して通信速度の変更設定が行われて、端末間で通信速度を変更する動作を示すシーケンス図である。It is a sequence diagram which shows the operation | movement which changes the communication speed with respect to one terminal, and changes a communication speed between terminals. 端末側にてMCUの性能を把握して通信速度制御を行う際の動作を示すシーケンス図である。It is a sequence diagram which shows the operation | movement at the time of grasping | ascertaining the performance of MCU and performing communication speed control in the terminal side. 端末側にてMCUの性能を把握して通信速度制御を行う際の動作を示すシーケンス図である。It is a sequence diagram which shows the operation | movement at the time of grasping | ascertaining the performance of MCU and performing communication speed control in the terminal side. 端末の通信速度性能に合わせて通信速度を設定する際の動作を示すシーケンス図である。It is a sequence diagram which shows the operation | movement at the time of setting a communication speed according to the communication speed performance of a terminal. 端末の通信速度性能に合わせて通信速度を設定する際の動作を示すフローチャートである。It is a flowchart which shows the operation | movement at the time of setting a communication speed according to the communication speed performance of a terminal.

符号の説明Explanation of symbols

1 テレビ会議システム
10 多地点会議装置
11、21 送受信部
12 主制御部
13、23 データ管理部
14 ストリーム処理部
20−1〜20−n、20 端末装置
22 端末側制御部
24 エンコード処理部
25 デコード処理部
26 映像合成部
30 ネットワーク
DESCRIPTION OF SYMBOLS 1 Video conference system 10 Multipoint conference apparatus 11, 21 Transmission / reception part 12 Main control part 13, 23 Data management part 14 Stream processing part 20-1-20-n, 20 Terminal apparatus 22 Terminal side control part 24 Encoding process part 25 Decoding Processing unit 26 Video composition unit 30 Network

Claims (5)

多地点でテレビ会議を行うテレビ会議システムにおいて、
テレビ会議に参加する端末数の変更を契機に、テレビ会議中の総端末数と自己の処理能力とから各端末への通信速度を計算し、計算結果を通信速度変更指示により端末へ通知する主制御部を含む多地点会議装置と、
通信速度の変更を認識して、データの通信速度を変更させる端末側制御部を含む端末装置と、
を有することを特徴とするテレビ会議システム。
In a video conference system that performs multi-point video conferences,
When the number of terminals participating in a video conference is changed, the communication speed to each terminal is calculated from the total number of terminals in the video conference and its own processing capacity, and the calculation result is notified to the terminal by a communication speed change instruction. A multipoint conference device including a control unit;
A terminal device including a terminal-side control unit for recognizing a change in the communication speed and changing the data communication speed;
A video conference system comprising:
前記多地点会議装置は、テレビ会議を行っている全端末装置の使用リソースを求め、使用リソースがしきい値を超過するか否かを判定し、超過すると判定した場合には、しきい値超過時のリソース確保割合にするために1端末あたりの通信速度を再計算することを特徴とする請求項1記載のテレビ会議システム。   The multipoint conference device obtains the usage resources of all the terminal devices that are conducting the video conference, determines whether the usage resources exceed a threshold value, and determines that the usage resources exceed the threshold value. 2. The video conference system according to claim 1, wherein a communication speed per terminal is recalculated in order to obtain a resource securing ratio at the time. 前記多地点会議装置は、通信速度変更指示をテレビ会議グループ内の1台の端末のみに送信し、通信速度変更指示を受信した第1の端末装置は、通信速度を変更したデータを生成し、第2の端末装置は、前記第1の端末装置から送信されるデータから通信速度の変化を認識して、自端末の通信速度を変更させることを特徴とする請求項1記載のテレビ会議システム。   The multipoint conference device transmits a communication speed change instruction to only one terminal in the video conference group, and the first terminal device that has received the communication speed change instruction generates data in which the communication speed is changed, The video conference system according to claim 1, wherein the second terminal device recognizes a change in communication speed from data transmitted from the first terminal device and changes the communication speed of the terminal itself. 多地点でテレビ会議を行うテレビ会議システムにおいて、
テレビ会議中の総端末数と自己の処理能力とを含む通信速度計算情報を全端末に通知する主制御部を含む多地点会議装置と、
通信速度計算情報を受信して、テレビ会議中の総端末数と前記多地点会議装置の処理能力とから自端末の通信速度を計算し、計算結果にもとづきデータの通信速度を変更させる端末側制御部を含む端末装置と、
を有することを特徴とするテレビ会議システム。
In a video conference system that performs multi-point video conferences,
A multipoint conference device including a main control unit for notifying all terminals of communication speed calculation information including the total number of terminals during the video conference and its own processing capacity;
Terminal-side control that receives communication speed calculation information, calculates the communication speed of its own terminal from the total number of terminals during the video conference and the processing capability of the multipoint conference device, and changes the data communication speed based on the calculation result A terminal device including a unit;
A video conference system comprising:
多地点でテレビ会議を行うテレビ会議システムにおいて、
端末から送信されるデータに対して、映像分配、音声ミキシングの制御を行う多地点会議装置と、
テレビ会議の実行中、新規端末がシステムに接続した際、新規端末から送信されるデータの速度が自端末の通信速度より低速であると判断した場合には、自端末の通信速度を新規端末側の速度に合わせるように制御する端末側制御部を含む端末装置と、
を有することを特徴とするテレビ会議システム。

In a video conference system that performs multi-point video conferences,
A multipoint conference device that controls video distribution and audio mixing for data transmitted from the terminal;
When a new terminal connects to the system during a video conference, if it is determined that the speed of data transmitted from the new terminal is lower than the communication speed of the own terminal, the communication speed of the own terminal is set to the new terminal side. A terminal device including a terminal-side control unit that controls to match the speed of
A video conference system comprising:

JP2004066475A 2004-03-10 2004-03-10 Video conference system Pending JP2005260384A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004066475A JP2005260384A (en) 2004-03-10 2004-03-10 Video conference system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004066475A JP2005260384A (en) 2004-03-10 2004-03-10 Video conference system

Publications (1)

Publication Number Publication Date
JP2005260384A true JP2005260384A (en) 2005-09-22

Family

ID=35085716

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004066475A Pending JP2005260384A (en) 2004-03-10 2004-03-10 Video conference system

Country Status (1)

Country Link
JP (1) JP2005260384A (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2438017A (en) * 2006-05-02 2007-11-14 Skype Ltd Controlling communication quality by generating instructions providing a remedy to users to improve communication quality
JP2010510705A (en) * 2006-11-20 2010-04-02 コデイアン・リミテツド Video conferencing hardware architecture
JP2010118715A (en) * 2008-11-11 2010-05-27 Hitachi Ltd Conference system and data processing method
WO2012043290A1 (en) * 2010-09-30 2012-04-05 コクヨ株式会社 Video call system, main-side terminal, and subordinate-side terminals
US8245266B2 (en) 2007-09-27 2012-08-14 Skype User interface
US9588508B2 (en) 2012-06-26 2017-03-07 Fanuc Corporation Master device that changes data communication speed in accordance with the number of slave devices
CN111406419A (en) * 2017-11-27 2020-07-10 Nec平台株式会社 Wireless L AN system, communication speed upper limit setting method, and non-transitory computer-readable medium having communication speed upper limit setting program stored thereon

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2438017A (en) * 2006-05-02 2007-11-14 Skype Ltd Controlling communication quality by generating instructions providing a remedy to users to improve communication quality
AU2007245390B2 (en) * 2006-05-02 2011-09-29 Microsoft Technology Licensing, Llc User interface for handling call quality in a communication system
US8819216B2 (en) 2006-05-02 2014-08-26 Skype User interface
US9524088B2 (en) 2006-05-02 2016-12-20 Skype User interface
JP2010510705A (en) * 2006-11-20 2010-04-02 コデイアン・リミテツド Video conferencing hardware architecture
US8245266B2 (en) 2007-09-27 2012-08-14 Skype User interface
JP2010118715A (en) * 2008-11-11 2010-05-27 Hitachi Ltd Conference system and data processing method
WO2012043290A1 (en) * 2010-09-30 2012-04-05 コクヨ株式会社 Video call system, main-side terminal, and subordinate-side terminals
US9588508B2 (en) 2012-06-26 2017-03-07 Fanuc Corporation Master device that changes data communication speed in accordance with the number of slave devices
CN111406419A (en) * 2017-11-27 2020-07-10 Nec平台株式会社 Wireless L AN system, communication speed upper limit setting method, and non-transitory computer-readable medium having communication speed upper limit setting program stored thereon
US11252609B2 (en) 2017-11-27 2022-02-15 Nec Platforms, Ltd. Wireless LAN system, communication speed upper limit setting method, and non-transitory computer-readable medium having communication speed upper limit setting program stored thereon

Similar Documents

Publication Publication Date Title
US5963547A (en) Method and apparatus for centralized multipoint conferencing in a packet network
US7257641B1 (en) Multipoint processing unit
JP3658087B2 (en) Terminal device and method for controlling terminal device
US6986158B1 (en) System and method for distributing video information over network
EP1924025B1 (en) Connection establishment method for multi part communication service
US6606306B1 (en) System and method for supporting a plurality of media conferences
WO2012075951A1 (en) Method and device for adjusting bandwidth in conference place, conference terminal and media control server
CN101755454A (en) Method and apparatus for determining preferred image format between mobile video telephones
US9743043B2 (en) Method and system for handling content in videoconferencing
US9560096B2 (en) Local media rendering
CN101656864A (en) Method for realizing selection and watching of video and video session system
EP2936803B1 (en) Method and a device for optimizing large scaled video conferences
EP2704355B1 (en) Method, device and system for establishing multi-cascade channel
US20020057333A1 (en) Video conference and video telephone system, transmission apparatus, reception apparatus, image communication system, communication apparatus, communication method
JP2005260384A (en) Video conference system
CN102025973A (en) Video synthesizing method and video synthesizing system
EP2637404B1 (en) Method and device for controlling multiple auxiliary streams, and network system
WO2019128266A1 (en) Video conference transmission method and apparatus, and mcu
JP2002149316A (en) Data transmitter, data receiver, data transmission method, and program storage medium
JP3450298B2 (en) Communication network, signal transmission method, network connection unit, and method for adjusting bit rate of scaled data flow
JPH1056513A (en) Constructing method for a multipoint connecting network
CN101179691B (en) Method of extending multi-point control cell capability in session television system
CN101262359B (en) Conference rate matching method for multi-point conference system in pure ISDN network
WO2011076034A1 (en) Video telephone terminal, and method for adjusting calling effect of video telephone
JPH04129465A (en) Multi-medium communication terminal equipment

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070208

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090115

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090630

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20091110