JP5853502B2 - Transmission system - Google Patents
Transmission system Download PDFInfo
- Publication number
- JP5853502B2 JP5853502B2 JP2011189171A JP2011189171A JP5853502B2 JP 5853502 B2 JP5853502 B2 JP 5853502B2 JP 2011189171 A JP2011189171 A JP 2011189171A JP 2011189171 A JP2011189171 A JP 2011189171A JP 5853502 B2 JP5853502 B2 JP 5853502B2
- Authority
- JP
- Japan
- Prior art keywords
- terminal
- transmission
- relay device
- information
- reception
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Data Exchanges In Wide-Area Networks (AREA)
- Information Transfer Between Computers (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
本発明は、複数の伝送端末間で会話をするためのコンテンツデータを中継する発明に関する。 The present invention relates to an invention for relaying content data for conversation between a plurality of transmission terminals.
複数の伝送端末間でコンテンツデータを送受信する伝送システムの一例として、インターネット等の通信ネットワークを介してテレビ会議などを行うテレビ会議システムが挙げられる。このようなテレビ会議システムは、近年の出張経費及び出張時間の削減に伴い、必要性が向上している。このようなテレビ会議システムでは、伝送端末の一例であるテレビ会議端末が複数台用いられている。これらテレビ会議端末間で画像データ及び音声データの送受信が行われることにより、テレビ会議を実現することができる。 An example of a transmission system that transmits and receives content data between a plurality of transmission terminals is a video conference system that performs a video conference or the like via a communication network such as the Internet. The necessity of such a video conference system has been improved with the recent reduction in business trip expenses and business trip time. In such a video conference system, a plurality of video conference terminals, which are examples of transmission terminals, are used. A video conference can be realized by transmitting and receiving image data and audio data between these video conference terminals.
また、近年のブロードバンド環境の充実化により、高画質の画像データや高音質の音声データの送受信が可能となったため、テレビ会議の相手の状況を把握し易くなり、会話による意思疎通の充実度を向上することができるようになった。 In addition, with the recent enhancement of the broadband environment, it has become possible to send and receive high-quality image data and high-quality audio data, making it easier to understand the status of the other party in the video conference and enhancing the level of communication through conversation. It became possible to improve.
ところが、通信ネットワークを介して多数のテレビ会議が行われている場合や、通信ネットワーク上の狭帯域経路を使用して画像データや音声データを受信する場合には、画像データや音声データ等のコンテンツデータの受信に遅延が生じてしまうという問題が生じる。コンテンツデータの受信に0.5秒以上の遅延が生じると、テレビ会議システムの利用者は、会話中にストレスを感じてしまうと言われている。そのため、近年のブロードバンド環境の充実化においても、利用者が満足したテレビ会議を行うことができない事態が生じている。 However, when a large number of video conferences are held via a communication network, or when image data and audio data are received using a narrowband path on the communication network, contents such as image data and audio data are used. There is a problem that a delay occurs in data reception. It is said that a user of a video conference system feels stress during a conversation when a delay of 0.5 seconds or more occurs in receiving content data. For this reason, even in the recent enhancement of the broadband environment, there has been a situation in which users cannot perform a satisfactory video conference.
また、近年のテレビ会議システムでは、通信ネットワークにおけるLAN(Local Area Network)毎に、テレビ会議端末間で、画像データ及び音声データを中継するための複数の中継装置が設置されている。これらの中継装置により、テレビ会議の通信処理を分散して各中継装置の負荷を軽減すると共に、中継するコンテンツデータなどのデータ伝送量を分散することができる。 In recent video conference systems, a plurality of relay devices are installed for relaying image data and audio data between video conference terminals for each LAN (Local Area Network) in a communication network. With these relay apparatuses, it is possible to distribute the video conference communication processing to reduce the load on each relay apparatus and to distribute the amount of data transmission such as content data to be relayed.
従来は、複数の中継装置のうち、1つの中継装置を選択して使用するにあたり、テレビ会議を行うテレビ会議端末と同じLANに接続されている中継装置を使用していた。つまり、テレビ会議端末のIPアドレスに近いIPアドレスの中継装置を選択することで、この選択された中継装置を介して、高品質のコンテンツデータを送受信することができる(特許文献1参照)。 Conventionally, in selecting and using one relay device among a plurality of relay devices, a relay device connected to the same LAN as the video conference terminal that performs the video conference has been used. That is, by selecting a relay device having an IP address close to the IP address of the video conference terminal, high-quality content data can be transmitted / received via the selected relay device (see Patent Document 1).
しかしながら、従来のテレビ会議システムでは、テレビ会議端末のIPアドレスに近いIPアドレスの中継装置を使用すれば、高品質のコンテンツデータを送受信することができるという推測の下で中継装置を選択しているため、実際の通信ネットワーク環境には必ずしも即していない。即ち、たとえ、テレビ会議端末のIPアドレスや中継装置のIPアドレスを事前に入手していても、世界中に張り巡らされた通信ネットワークの接続状況を把握することが困難であるため、実際には切断された箇所がある等により、必ずしも推測通りになる訳ではない。そのため、実際の通信ネットワーク環境下では、最大限に高品質のコンテンツデータを中継する中継装置を必ずしも選択することができないという課題が生じる。 However, in a conventional video conference system, a relay device is selected on the assumption that high-quality content data can be transmitted and received if a relay device having an IP address close to the IP address of the video conference terminal is used. Therefore, it is not always suitable for an actual communication network environment. In other words, even if the IP address of the video conference terminal or the IP address of the relay device is obtained in advance, it is difficult to grasp the connection status of communication networks spread all over the world. It does not always follow the assumption due to the presence of cut parts. Therefore, in an actual communication network environment, there arises a problem that it is not always possible to select a relay device that relays the highest quality content data.
請求項1に係る発明は、複数の中継装置と、第1及び第2の伝送端末と、前記第1及び第2の伝送端末間で会話をするためのコンテンツデータを中継する複数の中継装置のうち実際に中継する中継装置を選択する伝送管理システムとを有する伝送システムであって、前記複数の中継装置は、それぞれ、前記第1及び第2の伝送端末間で前記コンテンツデータが送受信される前に、前記第1の伝送端末から送信された第1の事前送信情報を受信すると共に前記第2の伝送端末から送信された第2の事前送信情報を受信する受信手段と、前記受信手段によって第1の事前送信情報が受信される際の第1の受信時刻、及び前記受信手段によって第2の事前送信情報が受信される際の第2の受信時刻を計測する計測手段と、前記計測された第1の受信時刻を示す第1の受信時刻情報を前記第1の伝送端末に送信すると共に前記計測された第2の受信時刻を示す第2の受信時刻情報を前記第2の伝送端末に送信する中継装置送信手段と、を有し、前記第1の伝送端末は、受信された前記第1の受信時刻情報、及び前記第1の事前送信情報を送信する際の送信時刻を示す第1の送信時刻情報を、前記伝送管理システムに送信する第1の端末送信手段を有し、前記第2の伝送端末は、受信された前記第2の受信時刻情報、及び前記第2の事前送信情報を送信する際の送信時刻を示す第2の送信時刻情報を、前記伝送管理システムに送信する第2の端末送信手段を有し、前記伝送管理システムは、前記第1の受信時刻情報で示される受信時刻と前記第1の送信時刻情報で示される送信時刻との差に基づいて、前記第1の事前送信情報の送信から受信までの第1の所要時間を算出すると共に、前記第2の受信時刻情報で示される受信時刻と前記第2の送信時刻情報で示される送信時刻との差に基づいて、前記第2の事前送信情報の送信から受信までの第2の所要時間を算出し、更に、前記第1及び第2の所要時間を合計した合計所要時間を算出する算出手段と、前記複数の中継装置のうち、最短の合計所要時間に関わった中継装置を選択する選択手段とを有することを特徴とする伝送システムである。
The invention according to
以上説明したように本発明によれば、第1の事前送信情報が受信される際の第1の受信時刻及び受信手段によって第2の事前送信情報が受信される際の第2の受信時刻を計測し、この計測された第1の受信時刻を示す第1の受信時刻情報を第1の伝送端末に送信すると共に上記計測された第2の受信時刻を示す第2の受信時刻情報を第2の伝送端末に送信することができる。 As described above, according to the present invention, the first reception time when the first pre-transmission information is received and the second reception time when the second pre-transmission information is received by the receiving unit are set. The first reception time information indicating the measured first reception time is transmitted to the first transmission terminal, and the second reception time information indicating the measured second reception time is the second Can be transmitted to other transmission terminals.
これにより、次に示す処理への発展が可能となる。即ち、第1の受信時刻と第1の伝送端末で第1の事前送信情報を送信する際の第1の送信時刻との差に基づいて第1の所要時間が算出され、第2の受信時刻と第2の伝送端末で第2の事前送信情報を送信する際の第2の送信時刻との差に基づいて第2の所要時間が算出され、これら第1及び第2の所要時間が合計されることで、合計所要時間が算出可能となる。そして、複数の中継装置のうち、最短の合計所要時間に関わった中継装置が選択されることで、実際の通信ネットワーク環境下で最大限に高品質のコンテンツデータを中継する中継装置が選択されることが可能となる。 Thereby, development to the following processing becomes possible. That is, the first required time is calculated based on the difference between the first reception time and the first transmission time when the first pre-transmission information is transmitted by the first transmission terminal, and the second reception time. And the second required time are calculated based on the difference between the second transmission time and the second transmission time when the second transmission terminal transmits the second pre-transmission information, and the first and second required times are summed up. Thus, the total required time can be calculated. Then, by selecting the relay device related to the shortest total required time among the plurality of relay devices, the relay device that relays the highest quality content data under the actual communication network environment is selected. It becomes possible.
<<実施形態の全体構成>>
以下、図1乃至図27を用いて、本発明の一実施形態について説明する。図1は、本発明の本実施形態に係る伝送システム1の概略図である。図2は、伝送システムにおける画像データ、音声データ、及び各種管理情報の送受信の状態を示した概念図である。図3は、画像データの画質を説明する概念図である。
<< Overall Configuration of Embodiment >>
Hereinafter, an embodiment of the present invention will be described with reference to FIGS. FIG. 1 is a schematic diagram of a
なお、伝送システムには、伝送管理システムを介して一方の伝送端末から他方の伝送端末に一方向でコンテンツデータを伝送するデータ提供システムや、伝送管理システムを介して複数の伝送端末間で情報や感情等を相互に伝達するコミュニケーションシステムが含まれる。このコミュニケーションシステムは、コミュニケーション管理システムを介して複数のコミュニケーション端末間で情報や感情等を相互に伝達するためのシステムであり、テレビ会議システムやテレビ電話システム等が例として挙げられる。 The transmission system includes a data providing system that transmits content data in one direction from one transmission terminal to the other transmission terminal via the transmission management system, and information between a plurality of transmission terminals via the transmission management system. Includes a communication system that communicates emotions and the like. This communication system is a system for mutually transmitting information, emotions and the like between a plurality of communication terminals via a communication management system, and examples thereof include a video conference system and a video phone system.
本実施形態では、コミュニケーションシステムの一例としてのテレビ会議システム、コミュニケーション管理システムの一例としてのテレビ会議管理システム、及びコミュニケーション端末の一例としてのテレビ会議端末を想定した上で、伝送システム、伝送管理システム、及び伝送端末について説明する。即ち、本発明の伝送端末及び伝送管理システムは、テレビ会議システムに適用されるだけでなく、コミュニケーションシステム、又は伝送システムにも適用される。なお、本実施形態では、「テレビ会議」と説明しているが、「ビデオ会議」と言われることもあり、両者は同じ内容である。 In the present embodiment, assuming a video conference system as an example of a communication system, a video conference management system as an example of a communication management system, and a video conference terminal as an example of a communication terminal, a transmission system, a transmission management system, The transmission terminal will be described. That is, the transmission terminal and the transmission management system of the present invention are not only applied to a video conference system, but also applied to a communication system or a transmission system. In the present embodiment, “video conference” is described, but it may be called “video conference”, and both have the same content.
まず、図1に示されている伝送システム1は、複数の伝送端末(10aa,10ab,…)、各伝送端末(10aa,10ab,…)用のディスプレイ(120aa,120ab,…)、複数の中継装置(30a,30b,30c,30d)、伝送管理システム50、プログラム提供システム90、及びメンテナンスシステム100によって構築されている。
First, the
複数の端末10は、コンテンツデータの一例としての画像データ及び音声データの送受信による伝送を行う。
The plurality of
なお、以下では、「伝送端末」を単に「端末」として表し、「伝送管理システム」を単に「管理システム」として表す。また、複数の端末(10aa,10ab,…)のうち任意の端末を示す場合には「端末10」を用い、複数のディスプレイ(120aa,120ab,…)のうち任意のディスプレイを示す場合には「ディスプレイ120」を用い、複数の中継装置(30a,30b,30c,30d)のうち任意の中継装置を示す場合には「中継装置30」を用いる。更に、テレビ会議の開始を要求する要求元としての端末を「要求元端末」とし、要求先である宛先(中継先)としての端末を「宛先端末」として説明する。
In the following, “transmission terminal” is simply represented as “terminal”, and “transmission management system” is simply represented as “management system”. Further, “terminal 10” is used to indicate an arbitrary terminal among a plurality of terminals (10aa, 10ab,...), And “arbitrary display” is illustrated to indicate an arbitrary display among a plurality of displays (120aa, 120ab,. When the “
また、図2に示されているように、伝送システム1において、要求元端末と宛先端末との間では、管理システム50を介して、各種の管理情報を送受信するための管理情報用セッションseiが確立される。また、要求元端末と宛先端末との間では、中継装置30を介して、高解像度の画像データ、中解像度の画像データ、低解像度の画像データ、及び音声データの4つの各データを送受信するための4つのセッションが確立される。ここでは、これら4つのセッションをまとめて、画像・音声データ用セッションsedとして示している。
As shown in FIG. 2, in the
ここで、本実施形態で扱われる画像データの画像の解像度について説明する。図3(a)に示されているように、横が160画素、縦が120画素から成り、ベース画像となる低解像度の画像と、図3(b)に示されているように、横が320画素、縦が240画素から成る中解像度の画像と、図3(c)に示されているように、横が640画素、縦が480画素から成る高解像度の画像とがある。このうち、狭帯域経路を経由する場合には、ベース画像となる低解像度の画像データのみから成る低画質の画像データが中継される。帯域が比較的広い場合には、ベース画像となる低解像度の画像データ、及び中解像度の画像データから成る中画質の画像データが中継される。また、帯域が非常に広い場合には、ベース画質となる低解像度の画像データ、中画解像度の画像データ、及び高解像度の画像データから成る高画質の画像データが中継される。例えば、図10に示されている変更品質管理テーブルにおいて、中継装置30が、IPアドレス「1.3.2.4」の宛先端末10dbに対して画像データを中継する場合には、この中継される画像データの画質(画像の品質)は「高品質」である。
Here, the resolution of the image data handled in the present embodiment will be described. As shown in FIG. 3 (a), the horizontal image is composed of 160 pixels and the vertical image is 120 pixels, and a low resolution image as a base image, and as shown in FIG. There are a medium resolution image consisting of 320 pixels and 240 pixels vertically, and a high resolution image consisting of 640 pixels horizontally and 480 pixels vertically as shown in FIG. Among these, when passing through a narrow band route, low-quality image data consisting only of low-resolution image data serving as a base image is relayed. When the band is relatively wide, low-resolution image data serving as a base image and medium-quality image data composed of medium-resolution image data are relayed. When the bandwidth is very wide, high-resolution image data composed of low-resolution image data serving as base image quality, intermediate-resolution image data, and high-resolution image data is relayed. For example, in the modified quality management table shown in FIG. 10, when the
図1に示されている中継装置30は、複数の端末10の間で、コンテンツデータの中継を行う。管理システム50は、端末10からのログイン認証、端末10の通話状況の管理、宛先リストの管理等、及び中継装置30の通信状況等を一元的に管理する。画像データの画像は、動画であっても静止画であってもよく、動画と静止画の両方であってもよい。
The
複数のルータ(70a,70b,70c,70d,70ab,70cd)は、画像データ及び音声データの最適な経路の選択を行う。なお、本実施形態では、ルータ(70a,70b,70c,70d,70ab,70cd)のうち任意のルータを示す場合には「ルータ70」を用いる。 A plurality of routers (70a, 70b, 70c, 70d, 70ab, 70cd) select an optimum route for image data and audio data. In the present embodiment, “router 70” is used to indicate an arbitrary router among the routers (70a, 70b, 70c, 70d, 70ab, 70cd).
プログラム提供システム90は、後述のHD(Hard Disk)204を備えており、端末10に各種機能を実現させる(又は、端末10を各種手段として機能させる)ための端末用プログラムが記憶され、端末10に端末用プログラムを送信することができる。また、プログラム提供システム90のHD204には、中継装置30に各種機能を実現させる(又は、中継装置30を各種手段として機能させる)ための中継装置用プログラムも記憶されており、中継装置30に、中継装置用プログラムを送信することができる。更に、プログラム提供システム90のHD204には、管理システム50に各種機能を実現させる(又は、管理システム50を各種手段として機能させる)ための伝送管理用プログラムも記憶されており、管理システム50に、伝送管理用プログラムを送信することができる。
The
メンテナンスシステム100は、端末10、中継装置30、管理システム50、又はプログラム提供システム90の維持、管理、又は保守を行うためのコンピュータである。例えば、メンテナンスシステム100が国内に設置され、端末10、中継装置30、管理システム50、又はプログラム提供システム90が国外に設置されている場合、メンテナンスシステム100は、通信ネットワーク2を介して遠隔的に、端末10、中継装置30、管理システム50、又はプログラム提供システム90の維持、管理、保守等のメンテナンスを行う。また、メンテナンスシステム100は、通信ネットワーク2を介さずに、端末10、中継装置30、管理システム50、及びプログラム提供システム90のうちの少なくとも1つにおける機種番号、製造番号、販売先、保守点検、又は故障履歴の管理等のメンテナンスを行う。
The
ところで、端末(10aa,10ab,10ac,・・・)、中継装置30a、及びルータ70aは、LAN2aによって通信可能に接続されている。端末(10ba,10bb,10bc,・・・)、中継装置30b、及びルータ70bは、LAN2bによって通信可能に接続されている。また、LAN2a及びLAN2bは、ルータ70abが含まれた専用線2abによって通信可能に接続されており、所定の地域A内で構築されている。例えば、地域Aは日本であり、LAN2aは東京の事業所内で構築されており、LAN2bは大阪の事業所内で構築されている。
By the way, the terminals (10aa, 10ab, 10ac,...), The
一方、端末(10ca,10cb,10cc,・・・)、中継装置30c、及びルータ70cは、LAN2cによって通信可能に接続されている。端末10d(a,10db,10dc,・・・)、中継装置30d、及びルータ70dは、LAN2dによって通信可能に接続されている。また、LAN2c及びLAN2dは、ルータ70cdが含まれた専用線2cdによって通信可能に接続されており、所定の地域B内で構築されている。例えば、地域Bはアメリカ合衆国であり、LAN2cはニューヨークの事業所内で構築されており、LAN2dはワシントンD.C.の事業所内で構築されている。地域A及び地域Bは、それぞれルータ(70ab,70cd)からインターネット2iを介して通信可能に接続されている。
On the other hand, the terminals (10ca, 10cb, 10cc,...), The
また、管理システム50、及びプログラム提供システム90は、インターネット2iを介して、端末10、及び中継装置30と通信可能に接続されている。管理システム50、及びプログラム提供システム90は、地域A又は地域Bに設置されていてもよいし、これら以外の地域に設置されていてもよい。
In addition, the
なお、本実施形態では、LAN2a、LAN2b、専用線2ab、インターネット2i、専用線2cd、LAN2c、及びLAN2dによって、本実施形態の通信ネットワーク2が構築されている。この通信ネットワーク2には、有線だけでなく、WiFi(Wireless Fidelity)や、Bluetooth(登録商標)等の無線による通信が行われる箇所があってもよい。
In the present embodiment, the
また、図1において、各端末10、各中継装置30、管理システム50、各ルータ70、及びプログラム提供システム90の下に示されている4組の数字は、一般的なIPv4におけるIPアドレスを簡易的に示している。例えば、端末10aaのIPアドレスは「1.2.1.3」である。また、IPv4ではなく、IPv6を用いてもよいが、説明を簡略化するため、IPv4を用いて説明する。
Further, in FIG. 1, four sets of numbers shown below each terminal 10, each
なお、各端末10は、複数の事業所間での通話や、同じ事業所内の異なる部屋間での通話だけでなく、同じ部屋内での通話や、屋外と屋内又は屋外と屋外での通話で使われてもよい。各端末10が屋外で使われる場合には、携帯電話通信網等の無線による通信が行われる。
<<実施形態のハードウェア構成>>
次に、本実施形態のハードウェア構成を説明する。図4は、本実施形態に係る端末10の外観図である。以下、端末10の長手方向をX軸方向、水平面内でX軸方向に直交する方向をY軸方向、X軸方向及びY軸方向に直交する方向(鉛直方向)をZ軸方向として説明する。
In addition, each terminal 10 is not only a call between a plurality of business establishments or a call between different rooms in the same business establishment, but a call within the same room or a call between the outdoors and indoors or outdoors and outdoors. May be used. When each terminal 10 is used outdoors, wireless communication such as a cellular phone communication network is performed.
<< Hardware Configuration of Embodiment >>
Next, the hardware configuration of this embodiment will be described. FIG. 4 is an external view of the terminal 10 according to the present embodiment. Hereinafter, the longitudinal direction of the terminal 10 will be described as the X-axis direction, the direction orthogonal to the X-axis direction in the horizontal plane as the Y-axis direction, and the direction orthogonal to the X-axis direction and the Y-axis direction (vertical direction) will be described as the Z-axis direction.
図4に示されているように、端末10は、筐体1100、アーム1200、及びカメラハウジング1300を備えている。このうち、筐体1100の前側壁面1110には、複数の吸気孔によって形成された不図示の吸気面が設けられており、筐体1100の後側壁面1120には、複数の排気孔が形成された排気面1121が設けられている。これにより、筐体1100に内蔵された冷却ファンの駆動によって、不図示の吸気面を介して端末10の後方の外気を取り込み、排気面1121を介して端末10の後方へ排気することができる。筐体1100の右側壁面1130には、収音用孔1131が形成され、後述する内蔵型のマイク114によって音声、物音、雑音等の音が収音可能となっている。
As shown in FIG. 4, the terminal 10 includes a
筐体1100の右側壁面1130側には、操作パネル1150が形成されている。この操作パネル1150には、後述の複数の操作ボタン(108a〜108e)、後述の電源スイッチ109、及び後述のアラームランプ119が設けられていると共に、後述の内蔵型のスピーカ115からの出力音を通すための複数の音声出力孔によって形成された音出面1151が形成されている。また、筐体1100の左側壁面1140側には、アーム1200及びカメラハウジング1300を収容するための凹部としての収容部1160が形成されている。筐体1100の右側壁面1130には、後述の外部機器接続I/F118に対して電気的にケーブルを接続するための複数の接続口(1132a〜1132c)が設けられている。一方、筐体1100の左側壁面1140には、後述の外部機器接続I/F118に対して電気的にディスプレイ120用のケーブル120cを接続するための不図示の接続口が設けられている。
An
なお、以下では、操作ボタン(108a〜108e)のうち任意の操作ボタンを示す場合には「操作ボタン108」を用い、接続口(1132a〜1132c)のうち任意の接続口を示す場合には「接続口1132」を用いて説明する。
In the following description, “
次に、アーム1200は、トルクヒンジ1210を介して筐体1100に取り付けられており、アーム1200が筐体1100に対して、135度のチルト角θ1の範囲で、上下方向に回転可能に構成されている。図4は、チルト角θ1が90度の状態を示している。
Next, the
カメラハウジング1300には、後述の内蔵型のカメラ112が設けられており、利用者、書類、及び部屋等を撮像することができる。また、カメラハウジング1300には、トルクヒンジ1310が形成されている。カメラハウジング1300は、トルクヒンジ1310を介して、アーム1200に取り付けられている。そして、カメラハウジング1300は、トルクヒンジ1310を介してアーム1200に取り付けられており、カメラハウジング1300がアーム1200に対して、図4で示されている状態を0度として±180度のパン角θ2の範囲で、且つ、±45度のチルト角θ3の範囲で、上下左右方向に回転可能に構成されている。
The
なお、中継装置30、管理システム50、プログラム提供システム90、及びメンテナンスシステム100は、それぞれ一般のサーバ・コンピュータの外観と同じであるため、外観の説明を省略する。
Note that the
図5は、本実施形態に係る端末10のハードウェア構成図である。図5に示されているように、本実施形態の端末10は、端末10全体の動作を制御するCPU(Central Processing Unit)101、IPL(Initial Program Loader)等のCPU101の駆動に用いられるプログラムを記憶したROM(Read Only Memory)102、CPU101のワークエリアとして使用されるRAM(Random Access Memory)103、端末用プログラム、画像データ、及び音声データ等の各種データを記憶するフラッシュメモリ104、CPU101の制御にしたがってフラッシュメモリ104に対する各種データの読み出し又は書き込みを制御するSSD(Solid State Drive)105、フラッシュメモリ等の記録メディア106に対するデータの読み出し又は書き込み(記憶)を制御するメディアドライブ107、端末10の宛先を選択する場合などに操作される操作ボタン108、端末10の電源のオン/オフを切り換えるための電源スイッチ109、通信ネットワーク2を利用してデータ伝送をするためのネットワークI/F(Interface)111を備えている。
FIG. 5 is a hardware configuration diagram of the terminal 10 according to the present embodiment. As shown in FIG. 5, the
また、端末10は、CPU101の制御に従って被写体を撮像して画像データを得る内蔵型のカメラ112、このカメラ112の駆動を制御する撮像素子I/F113、音声を入力する内蔵型のマイク114、音声を出力する内蔵型のスピーカ115、CPU101の制御に従ってマイク114及びスピーカ115との間で音声信号の入出力を処理する音声入出力I/F116、CPU101の制御に従って外付けのディスプレイ120に画像データを伝送するディスプレイI/F117、各種の外部機器を接続するための外部機器接続I/F118、端末10の各種機能の異常を知らせるアラームランプ119、及び上記各構成要素を図5に示されているように電気的に接続するためのアドレスバスやデータバス等のバスライン110を備えている。
The terminal 10 also includes a built-in camera 112 that captures an image of a subject under the control of the
ディスプレイ120は、被写体の画像や操作用アイコン等を表示する液晶や有機ELによって構成された表示部である。また、ディスプレイ120は、ケーブル120cによってディスプレイI/F117に接続される。このケーブル120cは、アナログRGB(VGA)信号用のケーブルであってもよいし、コンポーネントビデオ用のケーブルであってもよいし、HDMI(High-Definition Multimedia Interface)やDVI(Digital Video Interactive)信号用のケーブルであってもよい。
The
カメラ112は、レンズや、光を電荷に変換して被写体の画像(映像)を電子化する固体撮像素子を含み、固体撮像素子として、CMOS(Complementary Metal Oxide Semiconductor)や、CCD(Charge Coupled Device)等が用いられる。 The camera 112 includes a lens and a solid-state image sensor that converts light into electric charges and digitizes a subject image (video). As the solid-state image sensor, a CMOS (Complementary Metal Oxide Semiconductor) or a CCD (Charge Coupled Device) is used. Etc. are used.
外部機器接続I/F118には、図4に示されている筐体1100の接続口1132に差し込まれたUSB(Universal Serial Bus)ケーブル等によって、外付けカメラ、外付けマイク、及び外付けスピーカ等の外部機器がそれぞれ電気的に接続可能である。外付けカメラが接続された場合には、CPU101の制御に従って、内蔵型のカメラ112に優先して、外付けカメラが駆動する。同じく、外付けマイクが接続された場合や、外付けスピーカが接続された場合には、CPU101の制御に従って、それぞれが内蔵型のマイク114や内蔵型のスピーカ115に優先して、外付けマイクや外付けスピーカが駆動する。
The external device connection I /
なお、記録メディア106は、端末10に対して着脱自在な構成となっている。また、CPU101の制御にしたがってデータの読み出し又は書き込みを行う不揮発性メモリであれば、フラッシュメモリ104に限らず、EEPROM(Electrically Erasable and Programmable ROM)等を用いてもよい。
The recording medium 106 is detachable from the terminal 10. Further, as long as it is a non-volatile memory that reads or writes data according to the control of the
更に、上記端末用プログラムは、インストール可能な形式又は実行可能な形式のファイルによって、コンピュータで読み取り可能な記録媒体(記録メディア106等)に記録されて流通されるようにしてもよい。また、上記端末用プログラムは、フラッシュメモリ104ではなくROM102に記憶させるようにしてもよい。
Furthermore, the terminal program may be recorded and distributed on a computer-readable recording medium (such as the recording medium 106) in a file in an installable or executable format. The terminal program may be stored in the
図6は、本発明の本実施形態に係る管理システムのハードウェア構成図である。管理システム50は、管理システム50全体の動作を制御するCPU201、IPL等のCPU201の駆動に用いられるプログラムを記憶したROM202、CPU201のワークエリアとして使用されるRAM203、伝送管理用プログラム等の各種データを記憶するHD204、CPU201の制御にしたがってHD204に対する各種データの読み出し又は書き込みを制御するHDD(Hard Disk Drive)205、フラッシュメモリ等の記録メディア206に対するデータの読み出し又は書き込み(記憶)を制御するメディアドライブ207、カーソル、メニュー、ウィンドウ、文字、又は画像などの各種情報を表示するディスプレイ208、通信ネットワーク2を利用してデータ伝送をするためのネットワークI/F209、文字、数値、各種指示などの入力のための複数のキーを備えたキーボード211、各種指示の選択や実行、処理対象の選択、カーソルの移動などを行うマウス212、着脱可能な記録媒体の一例としてのCD−ROM(Compact Disc Read Only Memory)213に対する各種データの読み出し又は書き込みを制御するCD−ROMドライブ214、及び、上記各構成要素を図6に示されているように電気的に接続するためのアドレスバスやデータバス等のバスライン210を備えている。
FIG. 6 is a hardware configuration diagram of the management system according to this embodiment of the present invention. The
なお、上記伝送管理用プログラムは、インストール可能な形式又は実行可能な形式のファイルで、上記記録メディア206やCD−ROM213等のコンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。また、上記伝送管理用プログラムは、HD204ではなくROM202に記憶されるようにしてもよい。
The transmission management program is a file in an installable or executable format, and may be recorded and distributed on a computer-readable recording medium such as the
また、中継装置30は、上記管理システム50と同様のハードウェア構成を有しているため、その説明を省略する。但し、HD204には、中継装置30を制御するための中継装置用プログラムが記録されている。この場合も、中継装置用プログラムは、インストール可能な形式又は実行可能な形式のファイルで、上記記録メディア206やCD−ROM213等のコンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。また、上記中継装置用プログラムは、HD204ではなくROM202に記憶されるようにしてもよい。
Further, since the
また、プログラム提供システム90及びメンテナンスシステム100は、上記管理システム50と同様のハードウェア構成を有しているため、その説明を省略する。但し、HD204には、プログラム提供システム90を制御するためのプログラム提供用プログラムが記録されている。この場合も、プログラム提供用プログラムは、インストール可能な形式又は実行可能な形式のファイルで、上記記録メディア206やCD−ROM213等のコンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。また、上記プログラム提供システム用プログラムは、HD204ではなくROM202に記憶されるようにしてもよい。
Further, since the
なお、上記着脱可能な記録媒体の他の例として、CD−R(Compact Disc Recordable)、DVD(Digital Versatile Disk)、ブルーレイディスク等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。
<<実施形態の機能構成>>
次に、本実施形態の機能構成について説明する。本実施形態では、宛先(中継先)としての端末10で画像データの受信に遅延が生じた場合に、中継装置30によって画像データの画像の解像度を変更してから、中継先としての端末10へ画像データを送信する場合について説明する。
As another example of the detachable recording medium, the recording medium is provided by being recorded on a computer-readable recording medium such as a CD-R (Compact Disc Recordable), a DVD (Digital Versatile Disk), or a Blu-ray Disc. May be.
<< Functional Configuration of Embodiment >>
Next, the functional configuration of this embodiment will be described. In the present embodiment, when a delay occurs in the reception of image data at the terminal 10 as the destination (relay destination), the image resolution of the image data is changed by the
図7は、本実施形態の伝送システム1を構成する各端末、装置及びシステムの機能ブロック図である。図7では、端末10、中継装置30、及び管理システム50が、通信ネットワーク2を介してデータ通信することができるように接続されている。また、図1に示されているプログラム提供システム90は、テレビ会議の通信において直接関係ないため、図7では省略されている。
FIG. 7 is a functional block diagram of each terminal, device, and system constituting the
<端末の機能構成>
端末10は、送受信部11、操作入力受付部12、ログイン要求部13、撮像部14、音声入力部15a、音声出力部15b、表示制御部17、遅延検出部18、及び記憶・読出処理部19を有している。これら各部は、図5に示されている各構成要素のいずれかが、フラッシュメモリ104からRAM103上に展開された端末用プログラムに従ったCPU101からの命令によって動作することで実現される機能、又は機能する手段である。また、端末10は、図5に示されているRAM103、及び図5に示されているフラッシュメモリ104によって構築される記憶部1000を有している。
<Functional configuration of terminal>
The terminal 10 includes a transmission / reception unit 11, an operation
(端末の各機能構成)
次に、端末10の各機能構成について詳細に説明する。なお、以下では、端末10の各機能構成を説明するにあたって、図5に示されている各構成要素のうち、端末10の各機能構成を実現させるための主な構成要素との関係も説明する。
(Functional configuration of terminal)
Next, each functional configuration of the terminal 10 will be described in detail. In the following, in describing each functional configuration of the terminal 10, among the components illustrated in FIG. 5, a relationship with main components for realizing each functional configuration of the terminal 10 will also be described. .
端末10の送受信部11は、図5に示されているCPU101からの命令、及び図5に示されているネットワークI/F111によって実現され、通信ネットワーク2を介して他の端末、装置又はシステムと各種データ(情報)の送受信を行う。この送受信部11は、所望の宛先端末と通話を開始する前から、管理システム50より、宛先候補としての各端末の状態を示す各状態情報の受信を開始する。なお、この状態情報は、各端末10の稼動状態(オンラインかオフラインかの状態)だけでなく、オンラインであっても更に通話可能であるか、通話中であるか、離席中であるか等の詳細な状態を示す。また、この状態情報は、各端末10の稼動状態だけでなく、端末10でケーブル(120c,130c,140c,150c)が端末10から外れていたり、音声を出力するが画像は出力させなかったり、音声を出力さないようにする(MUTE)等、様々な状態を示す。以下では、一例として、状態情報が稼動状態を示す場合について説明する。
The transmission / reception unit 11 of the terminal 10 is realized by a command from the
操作入力受付部12は、図5に示されているCPU101からの命令、並びに図5に示されている操作ボタン108及び電源スイッチ109によって実現され、利用者による各種入力を受け付ける。例えば、利用者が、図5に示されている電源スイッチ109をオンにすると、図7に示されている操作入力受付部12が電源オンを受け付けて、電源をオンにする。
The operation
ログイン要求部13は、図5に示されているCPU101からの命令によって実現され、上記電源オンの受け付けを契機として、送受信部11から通信ネットワーク2を介して管理システム50に、ログインを要求する旨を示すログイン要求情報、及び要求端末の現時点のIPアドレスを自動的に送信する。また、利用者が電源スイッチ109をオンの状態からオフにすると、送受信部11が管理システム50へ電源をオフする旨の状態情報を送信した後に、操作入力受付部12が電源を完全にオフにする。これにより、管理システム50側では、端末10が電源オンから電源オフになったことを把握することができる。
The
撮像部14は、図5に示されているCPU101からの命令、並びに図5に示されているカメラ112及び撮像素子I/F113によって実現され、被写体を撮像して、この撮像して得た画像データを出力する。
The
音声入力部15aは、図5に示されているCPU101からの命令、及び図5に示されている音声入出力I/F116によって実現され、マイク140によって利用者の音声が音声信号に変換された後、この音声信号に係る音声データを入力する。音声出力部15bは、図5に示されているCPU101からの命令、及び図5に示されている音声入出力I/F116によって実現され、音声データに係る音声信号をスピーカに出力し、スピーカ150から音声を出力させる。
The
表示制御部17は、図5に示されているCPU101からの命令、及び図5に示されているディスプレイI/F117によって実現され、後述のように、受信された解像度の異なる画像データを組み合わせ、この組み合わされた画像データをディスプレイ120に送信するための制御を行う。また、表示制御部17は、管理システム50から受信した宛先リストの情報をディスプレイ120に送信して、ディスプレイ120に宛先リストを表示させることができる。
The
遅延検出部18は、図5に示されているCPU101からの命令によって実現され、他の端末10から中継装置30を介して送られて来る画像データ又は音声データの遅延時間(ms)を検出する。
The
記憶・読出処理部19は、図5に示されているCPU101からの命令及び図5に示すSSD105によって実行され、又はCPU101からの命令によって実現され、記憶部1000に各種データを記憶したり、記憶部1000に記憶された各種データを読み出す処理を行う。この記憶部1000には、端末10を識別するための端末ID(Identification)、及びパスワード等が記憶される。更に、記憶部1000には、宛先端末との通話を行う際に受信される画像データ及び音声データが、受信される度に上書き記憶される。このうち、上書きされる前の画像データによってディスプレイ120に画像が表示され、上書きされる前の音声データによってスピーカ150から音声が出力される。
The storage /
なお、本実施形態の端末ID及び後述の中継装置IDは、それぞれ端末10及び中継装置30を一意に識別するために使われる言語、文字、記号、又は各種のしるし等の識別情報を示す。また、端末ID及び中継装置IDは、上記言語、文字、記号、及び各種のしるしのうち、少なくとも2つが組み合わされた識別情報であってもよい。
Note that the terminal ID of the present embodiment and a relay device ID described later indicate identification information such as a language, characters, symbols, or various signs used to uniquely identify the terminal 10 and the
<中継装置の機能構成>
中継装置30は、送受信部31、状態検知部32、データ品質確認部33、変更品質管理部34、データ品質変更部35、計測部36、及び記憶・読出処理部39を有している。これら各部は、図6に示されている各構成要素のいずれかが、HD204からRAM203上に展開された中継装置用プログラムに従ったCPU201からの命令によって動作することで実現される機能又は機能する手段である。また、中継装置30は、図6に示されているRAM203、及び/又は図6に示されているHD204によって構築される記憶部3000を有している。なお、図10は、変更品質管理テーブルを示す概念図である。
<Functional configuration of relay device>
The
(変更品質管理テーブル)
記憶部3000には、図10に示されているような変更品質管理テーブルによって構成されている変更品質管理DB(Data Base)3001が構築される。変更品質管理テーブルでは、画像データの中継先(宛先)としての端末30のIPアドレス、及びこの中継先に中継装置30が中継する画像データの画質が関連付けられて管理される。
(Change quality control table)
In the storage unit 3000, a change quality management DB (Data Base) 3001 configured by a change quality management table as shown in FIG. In the change quality management table, the IP address of the terminal 30 as the relay destination (destination) of the image data and the image quality of the image data relayed by the
(中継装置の各機能構成)
次に、中継装置30の各機能構成について詳細に説明する。なお、以下では、中継装置30の各機能構成を説明するにあたって、図6に示されている各構成要素のうち、中継装置30の各機能構成を実現させるための主な構成要素との関係も説明する。
(Each functional configuration of the relay device)
Next, each functional configuration of the
図7に示されている中継装置30の送受信部31は、図6に示されているCPU201からの命令、及び図6に示されているネットワークI/F209によって実現され、通信ネットワーク2を介して他の端末、装置、又はシステムと各種データ(情報)の送受信を行う。
The transmission /
状態検知部32は、図6に示されているCPU201からの命令によって実現され、この状態検知部32を有する中継装置30の稼動状態を検知する。稼動状態としては、「オンライン」、「オフライン」、「通話中」又は「一時中断」の状態がある。
The
データ品質確認部33は、図6に示されているCPU201からの命令によって実現され、宛先端末のIPアドレスを検索キーとして、変更品質管理DB3001(図10参照)を検索し、対応した中継される画像データの画質を抽出することで、中継される画像データの画質を確認する。なお、DB3001の後の括弧内の記載は、DB3001に構築されたテーブルを示す図面を表す。以下、その他の各DBについても同様である。
The data
変更品質管理部34は、図6に示されているCPU201からの命令によって実現され、管理システム50から送られて来る、後述の品質情報に基づいて、変更品質管理DB3001の内容を変更する。例えば、端末IDが「01aa」である要求元端末(端末10aa)と、端末IDが「01db」である宛先端末(端末10db)との間で高画質の画像データを送受信することによってテレビ会議を行っている最中に、他のテレビ会議を行う要求元端末(端末10bb)と宛先端末(端末10ca)が通信ネットワーク2を介してテレビ会議を開始すること等によって、宛先端末(端末10db)で画像データの受信の遅延が生じた場合には、中継装置30は今まで中継していた画像データの画質を、高画質から中画質に下げる。このような場合に、中画質を示す品質情報に基づいて、中継装置30が中継する画像データの画質を高画質から中画質に下げるように、変更品質管理DB3001の内容が変更される。
The change
データ品質変更部35は、図6に示されているCPU201からの命令によって実現され、送信元端末10から送られて来た画像データの画質を、上記変更された変更品質管理DB3001の内容に基づいて変更する。
The data
計測部36は、送受信部31によって第1の事前送信情報が受信される際の第1の受信時刻(tr1)、及び送受信部31によって第2の事前送信情報が受信される際の第2の受信時刻(tr2)を計測する。これら第1及び第2の事前送信情報には、これらの事前送信情報の送信元である端末10と中継装置30が通信可能に接続されていることを確認するためのping(Packet Internet Groper)が含まれている。また、第1の事前送信情報は、画像データ及び音声データの送信に先立って、これら画像データ及び音声データの代わりに中継装置30へ送信されることで、要求元端末での送信から中継装置30aでの受信までの所要時間を計測するために用いられる情報である。第2の事前送信情報は、画像データ及び音声データの送信に先立って、これら画像データ及び音声データの代わりに中継装置30へ送信されることで、宛先端末での送信から中継装置30aでの受信までの所要時間を計測するために用いられる情報である。
The
記憶・読出処理部39は、図6に示されているCPU201からの命令、及び図6に示されているHDD205によって実現され、記憶部3000に各種データを記憶したり、記憶部3000に記憶された各種データを読み出す処理を行う。
The storage /
<管理システムの機能構成>
管理システム50は、送受信部51、端末認証部52、状態管理部53、端末抽出部54、端末状態取得部55、一次絞込部56、セッション管理部57、品質決定部58、記憶・読出処理部59、遅延時間管理部60、及び最終絞込部61を有している。これら各部は、図6に示されている各構成要素のいずれかが、HD204からRAM203上に展開された管理システム用プログラムに従ったCPU201からの命令によって動作することで実現される機能又は機能する手段である。また、管理システム50は、図6に示されているHD204により構築される記憶部5000を有している。
<Functional configuration of management system>
The
なお、図8は、最終絞込部の機能構成図である。図9は、一次絞込部の機能構成図である。図11は、中継装置管理テーブルを示す概念図である。図12は、端末認証管理テーブルを示す概念図である。図13は、端末管理テーブルを示す概念図である。図14は、宛先リスト管理テーブルを示す概念図である。図15は、セッション管理テーブルを示す概念図である。図16は、アドレス優先度管理テーブルを示す概念図である。図17は、伝送速度優先度管理テーブルを示す概念図である。図18は、品質管理テーブルを示す概念図である。 FIG. 8 is a functional configuration diagram of the final narrowing unit. FIG. 9 is a functional configuration diagram of the primary narrowing-down unit. FIG. 11 is a conceptual diagram showing a relay device management table. FIG. 12 is a conceptual diagram showing a terminal authentication management table. FIG. 13 is a conceptual diagram showing a terminal management table. FIG. 14 is a conceptual diagram showing a destination list management table. FIG. 15 is a conceptual diagram showing a session management table. FIG. 16 is a conceptual diagram showing an address priority management table. FIG. 17 is a conceptual diagram showing a transmission rate priority management table. FIG. 18 is a conceptual diagram showing a quality management table.
(中継装置管理テーブル)
記憶部5000には、図11に示されているような中継装置管理テーブルによって構成されている中継装置管理DB5001が構築されている。この中継装置管理テーブルでは、各中継装置30の中継装置ID毎に、各中継装置30の稼動状態、稼動状態が示される状態情報が管理システム50で受信された受信日時、中継装置30のIPアドレス、及び中継装置30における最大データ伝送速度(Mbps)が関連付けられて管理される。例えば、図11に示されている中継装置管理テーブルにおいて、中継装置IDが「111a」の中継装置30aは、稼動状態が「オンライン」で、管理システム50で状態情報が受信された日時が「2009年11月10日の13時00分」で、この中継装置30aのIPアドレスが「1.2.1.2」で、この中継装置30aにおける最大データ伝送速度が100Mbpsであることが示されている。
(Relay device management table)
In the storage unit 5000, a relay device management DB 5001 configured by a relay device management table as shown in FIG. 11 is constructed. In this relay device management table, for each relay device ID of each
(端末認証管理テーブル)
更に、記憶部5000には、図12に示されているような端末認証管理テーブルによって構成されている端末認証管理DB5002が構築されている。この端末認証管理テーブルでは、管理システム50によって管理される全ての端末10の各端末IDに対して、各パスワードが関連付けられて管理される。例えば、図12に示されている端末認証管理テーブルにおいて、端末10aaの端末IDは「01aa」で、パスワードは「aaaa」であることが示されている。
(Terminal authentication management table)
Furthermore, in the storage unit 5000, a terminal authentication management DB 5002 configured by a terminal authentication management table as shown in FIG. In this terminal authentication management table, each password is associated with each terminal ID of all
(端末管理テーブル)
また、記憶部5000には、図13に示されているような端末管理テーブルによって構成されている端末管理DB5003が構築されている。この端末管理テーブルでは、各端末10の端末ID毎に、各端末10を宛先とした場合の宛先名、各端末10の稼動状態、後述のログイン要求情報が管理システム50で受信された受信日時、及び端末10のIPアドレスが関連付けられて管理される。例えば、図13に示されている端末管理テーブルにおいて、端末IDが「01aa」の端末10aaは、端末名が「日本 東京事業所 AA端末」で、稼動状態が「オンライン(通話可能)」で、管理システム50でログイン要求情報が受信された日時が「2009年11月10日の13時40分」で、この端末10aaのIPアドレスが「1.2.1.3」であることが示されている。
(Terminal management table)
Further, in the storage unit 5000, a terminal management DB 5003 configured by a terminal management table as shown in FIG. 13 is constructed. In this terminal management table, for each terminal ID of each terminal 10, a destination name when each terminal 10 is a destination, an operating state of each terminal 10, a reception date and time when login request information described later is received by the
(宛先リスト管理テーブル)
更に、記憶部5000には、図14に示されているような宛先リスト管理テーブルによって構成されている宛先リスト管理DB5004が構築されている。この宛先リスト管理テーブルでは、テレビ会議における通話の開始を要求する要求元端末の端末IDに対して、宛先端末の候補として登録されている宛先端末の端末IDが全て関連付けられて管理される。例えば、図14に示されている宛先リスト管理テーブルにおいて、端末IDが「01aa」である要求元端末(端末10aa)からテレビ会議における通話の開始を要求することができる宛先端末(端末10db)の候補は、端末IDが「01ab」の端末10ab、端末IDが「01ba」の端末10ba、及び端末IDが「01bb」の端末10bb等であることが示されている。この宛先端末の候補は、任意の要求元端末から管理システム50に対する追加又は削除の要請により、追加又は削除されることで更新される。
(Destination list management table)
Furthermore, in the storage unit 5000, a destination list management DB 5004 configured by a destination list management table as shown in FIG. 14 is constructed. In this destination list management table, all terminal IDs of destination terminals registered as destination terminal candidates are managed in association with terminal IDs of request source terminals that request the start of a call in a video conference. For example, in the destination list management table shown in FIG. 14, the requesting terminal (terminal 10aa) whose terminal ID is “01aa” is the destination terminal (terminal 10db) that can request the start of a video conference call. The candidates are indicated to be a terminal 10ab having a terminal ID “01ab”, a terminal 10ba having a terminal ID “01ba”, a terminal 10bb having a terminal ID “01bb”, and the like. This destination terminal candidate is updated by being added or deleted in response to a request for addition or deletion from an arbitrary request source terminal to the
(セッション管理テーブル)
また、この記憶部5000には、図15に示されているようなセッション管理テーブルによって構成されているセッション管理DB5005が構築されている。このセッション管理テーブルでは、中継装置30を選択するためのセッションの実行に用いられる選択用セッションID毎に、画像データ及び音声データの中継に使用される中継装置30の中継装置ID、要求元端末の端末ID、宛先端末の端末ID、宛先端末において画像データが受信される際の受信の遅延時間(ms)、及びこの遅延時間が示されている遅延情報を宛先端末から送られて来て管理システム50で受信された受信日時が関連付けられて管理される。例えば、図15に示されているセッション管理テーブルにおいて、選択用セッションID「se1」を用いて実行されたセッションで選択された中継装置30a(中継装置ID「111a」)は、端末IDが「01aa」の要求元端末(端末10aa)と、端末IDが「01db」の宛先端末(端末10db)との間で、画像データ及び音声データを中継しており、宛先端末(端末10db)において「2009年11月10日の14時00分」時点における画像データの遅延時間が200(ms)であることが示されている。なお、2つの端末10の間でテレビ会議を行う場合には、上記宛先端末ではなく要求元端末から送信されてきた遅延情報に基づいて、遅延情報の受信日時を管理してもよい。但し、3つ以上の端末10の間でテレビ会議を行う場合には、画像データ及び音声データの受信側の端末10から送信されてきた遅延情報に基づいて、遅延情報の受信日時を管理する。
(Session management table)
In the storage unit 5000, a session management DB 5005 configured by a session management table as shown in FIG. 15 is constructed. In this session management table, for each selection session ID used to execute a session for selecting the
(アドレス優先度管理テーブル)
更に、記憶部5000には、図16に示されているようなアドレス優先度管理テーブルによって構成されている優先度管理DB5006が構築されている。このアドレス優先度管理テーブルでは、一般的なIPv4におけるIPアドレスのうちの4組のドットアドレス(Dot Address)部分の「同」が多い程、アドレス優先度のポイントが高くなるように、ドットアドレスの同異とアドレス優先度とが関連付けられて管理される。この「同」は、ドットアドレス部分が同じであることを意味し、「異」は、ドットアドレス部分が異なることを意味する。例えば、図16に示されているアドレス優先度管理テーブルにおいて、ドットアドレスの上位から下位にかけて3つの値が同じIPアドレスの場合には、アドレス優先度のポイントが「5」である。ドットアドレスの上位から下位にかけて2つの値が同じIPアドレスの場合には、アドレス優先度のポイントが「3」である。この場合、最下位のドットアドレスの値が同じであるか否かは優先度に関係ない。ドットアドレスの最上位の値が同じで、上位から2番目の値が異なるIPアドレスの場合には、アドレス優先度のポイントが「1」である。この場合、上位から3番目及び最下位のドットアドレスの値が同じであるか否かは優先度には関係ない。ドットアドレスの最上位の値が異なるIPアドレスの場合には、アドレス優先度のポイントが「0」である。この場合、上位から2番目、3番目、及び最下位のドットアドレスの値が同じであるか否かは優先度には関係ない。
(Address priority management table)
Furthermore, in the storage unit 5000, a priority management DB 5006 configured by an address priority management table as shown in FIG. 16 is constructed. In this address priority management table, the dot priority of the dot address is set so that the point of the address priority becomes higher as the “same” of the four sets of dot addresses (Dot Address) of the general IPv4 IP addresses increases. The difference and the address priority are managed in association with each other. This “same” means that the dot address portions are the same, and “different” means that the dot address portions are different. For example, in the address priority management table shown in FIG. 16, when three values are the same IP address from the top to the bottom of the dot address, the address priority point is “5”. When the two values are the same IP address from the top to the bottom of the dot address, the address priority point is “3”. In this case, whether the value of the lowest dot address is the same or not is not related to the priority. In the case of IP addresses having the same highest value of dot addresses and different second values from the top, the address priority point is “1”. In this case, whether or not the values of the third and lowest dot addresses from the top are the same has no relation to the priority. In the case of IP addresses having different uppermost values of dot addresses, the address priority point is “0”. In this case, whether or not the values of the second, third, and lowest dot addresses from the top are the same has no relation to the priority.
(伝送速度優先度管理テーブル)
また、記憶部5000に構築されている優先度管理DB5006には、図17に示されているような伝送速度優先度管理テーブルも含まれている。この伝送速度優先度管理テーブルでは、中継装置30における最大データ伝送速度(Mbps)の値が大きくなる程、伝送速度優先度のポイントが高くなるように、最大テータ伝送速度と伝送速度優先度とが関連付けられて管理される。例えば、図17に示されている伝送速度優先度管理テーブルにおいて、中継装置30における最大データ伝送速度が1000Mbps以上の場合には、伝送速度優先度のポイントが「5」である。中継装置30における最大データ伝送速度が100Mbps以上1000Mbps未満の場合には、伝送速度優先度のポイントが「3」である。中継装置30における最大データ伝送速度が10Mbps以上100Mbps未満の場合には、伝送速度優先度のポイントが「1」である。中継装置30における最大データ伝送速度が10Mbps未満の場合には、伝送速度優先度のポイントが「0」である。
(Transmission speed priority management table)
The priority management DB 5006 built in the storage unit 5000 also includes a transmission speed priority management table as shown in FIG. In this transmission rate priority management table, the maximum data transmission rate and the transmission rate priority are set such that the higher the maximum data transmission rate (Mbps) value in the
(品質管理テーブル)
更に、記憶部5000には、図18に示されているような品質管理テーブルによって構成されている品質管理DB5007が構築されている。この品質管理テーブルでは、要求元端末又は宛先端末における画像データの遅延時間(ms)が長い程、中継装置30で中継させる画像データの画質を下げるように、画像データの遅延時間と画像データの画質(画像の品質)とが関連付けられて管理される。
(Quality control table)
Furthermore, in the storage unit 5000, a quality management DB 5007 configured by a quality management table as shown in FIG. In this quality management table, the longer the delay time (ms) of the image data at the requesting terminal or the destination terminal, the lower the image data delay time and the image data quality so that the image quality of the image data relayed by the
(管理システムの各機能構成)
次に、管理システム50の各機能構成について詳細に説明する。なお、以下では、管理システム50の各機能構成を説明するにあたって、図6に示されている各構成要素のうち、管理システム50の各機能構成を実現させるための主な構成要素との関係も説明する。
(Functional configuration of the management system)
Next, each functional configuration of the
送受信部51は、図6に示されているCPU201からの命令、及び図6に示されているネットワークI/F209によって実行され、通信ネットワーク2を介して他の端末、装置又はシステムと各種データ(情報)の送受信を行う。
The transmission /
端末認証部52は、図6に示されているCPU102からの命令によって実現され、送受信部51を介して受信されたログイン要求情報に含まれている端末ID及びパスワードを検索キーとして、記憶部5000の端末認証管理DB5002を検索し、端末認証管理DB5002に同一の端末ID及びパスワードが管理されているかを判断することによって端末認証を行う。
The
状態管理部53は、図6に示されているCPU102からの命令によって実現され、ログイン要求してきた要求元端末の稼動状態を管理すべく、端末管理DB5003(図13参照)に、この要求元端末の端末ID、要求元端末の稼動状態、管理システム50でログイン要求情報が受信された受信日時、及び要求元端末のIPアドレスを関連付けて記憶して管理する。また、状態管理部53は、利用者が端末10の電源スイッチ109の状態をオンからオフにすることで、端末10から送られてきた、電源をオフする旨の状態情報に基づいて、端末管理DB5003(図13参照)のオンラインを示す稼動状態をオフラインに変更する。
The
端末抽出部54は、図6に示されているCPU102からの命令によって実現され、ログイン要求した要求元端末の端末IDをキーとして、宛先リスト管理DB5004(図14参照)を検索し、要求元端末と通話することができる宛先端末の候補の端末IDを読み出すことで、端末IDを抽出する。また、端末抽出部54は、ログイン要求してきた要求元端末の端末IDをキーとして、宛先リスト管理DB5004(図14参照)を検索し、上記要求元端末の端末IDを宛先端末の候補として登録している他の要求元端末の端末IDも抽出する。
The terminal extraction unit 54 is realized by an instruction from the
端末状態取得部55は、図6に示されているCPU102からの命令によって実現され、上記端末抽出部54によって抽出された宛先端末の候補の端末IDを検索キーとして、端末管理DB5003(図13参照)を検索し、上記端末抽出部54によって抽出された端末ID毎に稼動状態を読み出す。これにより、端末状態取得部55は、ログイン要求してきた要求元端末と通話することができる宛先端末の候補の稼動状態を取得することができる。また、端末状態取得部55は、上記端末抽出部54によって抽出された端末IDを検索キーとして、端末管理DB5003を検索し、ログイン要求してきた要求元端末の稼動状態も取得する。
The terminal
一次絞込部56は、図6に示されているCPU102からの命令によって実現され、複数の中継装置30から最終的に1つの中継装置30に絞り込む最終絞り込み処理を支援するため、この最終絞り込み処理前の一次絞り込み処理を行う。そのために、一次絞込部56は、図5に示されているCPU201からの命令によって、選択用セッションID生成部56a、端末IPアドレス抽出部56b、一次選択部56c、及び優先度決定部56dを実現する。
The
このうち、選択用セッションID生成部56aは、中継装置30を選択するためのセッションの実行に用いられる選択用セッションIDを生成する。端末IPアドレス抽出部56bは、要求元端末から送られてきた開始要求情報に含まれている要求元端末の端末ID、及宛先端末の端末IDに基づいて、端末管理DB5003(図13参照)を検索することにより、対応するそれぞれの端末10のIPアドレスを抽出する。一次選択部56cは、中継装置管理DB5001(図11参照)で管理されている中継装置30のうち、稼動状態が「オンライン」となっている中継装置30の中継装置IDを選択することにより、中継装置30の選択を行う。
Among these, the selection session ID generation unit 56 a generates a selection session ID used for executing a session for selecting the
また、一次選択部56cは、上記端末IPアドレス抽出部56bによって抽出された、要求元端末のIPアドレス、及び宛先端末のIPアドレスに基づいて、中継装置管理DB5001(図11参照)を検索することにより、上記選択された中継装置30のIPアドレスのドットアドレス毎に、上記要求元端末及び宛先端末の各IPアドレスにおける各ドットアドレスと同じであるか異なるかを調査する。更に、一次選択部56cは、中継装置毎に、アドレス優先度のポイントにおいて端末10に対する高い方のポイントと、伝送速度優先度のポイントを統合した統合ポイントのうち、ポイントが高い上位2つの中継装置30を選択することにより、中継装置30の更なる選択を行う。なお、本実施形態では、ポイントが高い上位2つの中継装置30を選択することにしているが、これに限られるものではなく、中継装置30を1つでも多く絞り込むことができれば、ポイントが高い上位3つ以上の中継装置30を選択するようにしてもよい。
Further, the
優先度決定部56dは、優先度管理DB5006(図16参照)を参照して、上記一次選択部56cによって調査された中継装置30毎に、アドレス優先度のポイントを決定する。また、優先度決定部56dは、中継装置管理DB5001(図11参照)で管理されている各中継装置30の最大データ伝送速度に基づいて、優先度管理DB5006(図17参照)を検索することにより、上記一次選択部56cによる第1次の絞り込み処理によって絞り込まれた中継装置30毎に伝送速度優先度のポイントを決定する。
The
続いて、セッション管理部57は、図6に示されているCPU102からの命令によって実現され、記憶部5000のセッション管理DB5005(図15参照)に、選択用セッションID生成部56aで生成された選択用セッションID、要求元端末の端末ID、及び宛先端末の端末IDを関連付けて記憶して管理する。また、セッション管理部57は、セッション管理DB5005(図15参照)に対して、選択用セッションID毎に、端末10の最終選択部61bで最終的に1つに選択された中継装置30の中継装置IDを記憶して管理する。
Subsequently, the session management unit 57 is realized by an instruction from the
品質決定部58は、上記遅延時間を検索キーとして、品質管理DB5007(図18参照)を検索し、対応する画像データの画質を抽出することで、中継装置30に中継させる画像データの画質を決定する。
The
記憶・読出処理部59は、図6に示されているCPU102からの命令、及び図6に示されているHDD205によって実行され、記憶部5000に各種データを記憶したり、記憶部5000に記憶された各種データを読み出す処理を行う。
The storage /
遅延時間管理部60は、図6に示されているCPU102からの命令によって実現され、上記宛先端末のIPアドレスを検索キーとして、端末管理DB5003(図13参照)を検索することで、対応する端末IDを抽出し、更に、セッション管理DB5005(図15参照)のセッション管理テーブルにおいて、上記抽出した端末IDが含まれるレコードにおける遅延時間のフィールド部分に、上記遅延情報で示されている遅延時間を記憶して管理する。
The delay
最終絞込部61は、複数の中継装置30から最終的に1つの中継装置30に絞り込むため、図6に示されているCPU201からの命令によって、図8に示されるような算出部61a、及び最終選択部61bを実現する。
In order to finally narrow down the plurality of
このうち、算出部61aは、任意のセッションIDにおける任意の中継装置30のIPアドレス毎に、第1の受信日時情報で示される第1の受信日時(tr1)と第1の送信日時情報で示される第1の送信日時(tt1)との時間差に基づいて、各第1の事前送信情報の送信から受信までの第1の所要時間(t1)を算出する。同じく、算出部61aは、上記と同じセッションIDにおける中継装置30のIPアドレス毎に、第2の受信日時情報で示される第2の受信日時(tr2)と第2の送信日時情報で示される第2の送信日時(tt2)との時間差に基づいて、各第2の事前送信情報の送信から受信までの第2の所要時間(t2)を算出する。
Among these, the
また、算出部61aは、任意のセッションIDにおける任意の中継装置30のIPアドレス毎に、上記算出された第1の所要時間(t1) 及び第2の所要時間(t2)を合計した合計所要時間(T)を算出する。
The
最終選択部61bは、算出部61aによって算出された合計所要時間(T)の数が、セッションIDにおけるセッションの実行において、中継予定の中継装置30の数に相当するかを判断する。そして、全て算出されていない場合には、最終選択部61bは、合計所要時間(T)の算出を開始してから所定時間(ここでは1分間)経過したかを判断する。一方、最終選択部61bが全ての数の合計所要時間(T)を算出した場合、又は所定時間(ここでは1分間)経過した場合には、最終選択部61bは、これまでに算出部61aで算出された合計所要時間(T)のうちで最短の合計所要時間(T)に関わった中継装置30を1つ選択する。即ち、最終選択部61bは、これまでに算出部61aで算出された複数の合計所要時間(T)のうちで最短の合計所要時間(T)となった第1及び第2の事前送信情報を受信した中継装置30を1つ選択する。
<<実施形態の処理または動作>>
次に、図19乃至図27を用いて、本実施形態に係る伝送システム1における処理方法を説明する。なお、図19は、各中継装置30から管理システム50に送信された各中継装置30の状態を示す状態情報を管理する処理を示したシーケンス図である。図20は、複数の端末10の間で通話を開始する準備段階の処理を示したシーケンス図である。図21は、中継装置30を絞り込む処理を示したシーケンス図である。図22は、中継装置30を絞り込む処理を示した処理フロー図である。図23は、中継装置30の絞り込み処理を行う際の優先度のポイントの計算状態を示した図である。図24及び図25は、端末10が中継装置30を選択する処理を示したシーケンス図である。図26は、端末で中継装置30を選択する処理を示した処理フロー図である。図27は、端末間で画像データ及び音声データを送受信する処理を示したシーケンス図である。
The
<< Processing or Operation of Embodiment >>
Next, a processing method in the
まず、図19を用いて、各中継装置30から管理システム50に送信された各中継装置30の状態を示す状態情報を管理する処理を説明する。まず、各中継装置30では、図7に示されている状態検知部32が、自装置である中継装置30の稼動状態を定期的に検知している(ステップS1−1〜S1−4)。そして、管理システム50側で各中継装置30の稼動状態をリアルタイムで管理させるべく、各中継装置30の送受信部31は、定期的に通信ネットワーク2を介して管理システム50へ各状態情報を送信する(ステップS2−1〜S2−4)。これら各状態情報には、中継装置30毎の中継装置IDと、これら各中継装置IDに係る中継装置30の状態検知部32で検知された稼動状態とが含まれている。なお、本実施形態では、中継装置(30a,30b,30d)は、正常に稼動して「オンライン」となっている一方で、中継装置30cは稼働中ではあるが、中継装置30cの中継動作を実行するためのプログラムに何らかの不具合が生じて、「オフライン」となっている場合が示されている。
First, a process for managing state information indicating the state of each
次に、管理システム50では、各中継装置30から送られて来た各状態情報を送受信部51が受信し、記憶・読出処理部59を介して記憶部5000の中継装置管理DB5001(図11参照)に、中継装置ID毎に状態情報を記憶して管理する(ステップS3−1〜S3−4)。これにより、図11に示されるような中継装置管理テーブルに対して、中継装置ID毎に「オンライン」、「オフライン」、又は「故障中」のいずれかの稼動状態が記憶されて管理される。またこの際に、中継装置ID毎に、管理システム50で状態情報が受信された受信日時も記憶されて管理される。なお、中継装置30から状態情報が送られない場合には、図11に示されている中継装置管理テーブルの各レコードにおける稼動状態のフィールド部分及び受信日時のフィールド部分が空白になるか、又は、前回の受信時の稼動状態及び受信日時をそれぞれ示す。
Next, in the
次に、図20を用いて、端末10aaと端末10dbとの間で、通話を開始する前の準備段階における各管理情報の送受信処理について説明する。なお、図20では、全て管理情報用セッションseiによって、各種管理情報が送受信される処理が示されている。 Next, a transmission / reception process of each management information in a preparation stage before starting a call between the terminal 10aa and the terminal 10db will be described with reference to FIG. Note that FIG. 20 illustrates a process in which various types of management information are transmitted and received through the management information session sei.
まず、利用者が、図5に示されている電源スイッチ109をオンにすると、図7に示されている操作入力受付部12が電源オンを受け付けて、電源をオンにする(ステップS21)。そして、ログイン要求部13は、上記電源オンの受け付けを契機とし、送受信部11から通信ネットワーク2を介して管理システム50に、ログイン要求を示すログイン要求情報を自動的に送信する(ステップS22)。このログイン要求情報には、要求元としての自端末である端末10aaを識別するための端末ID及びパスワードが含まれている。これら端末ID及びパスワードは、記憶・読出処理部19を介して記憶部1000から読み出されて、送受信部11に送られたデータである。なお、端末10aaから管理システム50へログイン要求情報が送信される際は、受信側である管理システム50は、送信側である端末10abのIPアドレスを把握することができる。
First, when the user turns on the
次に、管理システム50の端末認証部52は、送受信部51を介して受信したログイン要求情報に含まれている端末ID及びパスワードを検索キーとして、記憶部5000の端末認証管理DB5002(図12参照)を検索し、端末認証管理DB5002に同一の端末ID及びパスワードが管理されているかを判断することによって端末認証を行う(ステップS23)。この端末認証部52によって、同一の端末ID及びパスワードが管理されているため、正当な利用権限を有する端末10からのログイン要求であると判断された場合には、状態管理部53は、端末管理DB5003(図13参照)に、端末10aaの端末ID、稼動状態、上記ログイン要求情報が受信された受信日時、及び端末10aaのIPアドレスを関連付けて記憶する(ステップS24)。これにより、図13に示されている端末管理テーブルには、端末ID「01aa」に、稼動状態「オンライン」、受信日時「2009.11.10.13:40」及び端末10aaのIPアドレス「1.2.1.3」が関連付けて管理されることになる。
Next, the
そして、管理システム50の送受信部51は、上記端末認証部52によって得られた認証結果が示された認証結果情報を、通信ネットワーク2を介して、上記ログイン要求してきた要求元端末(端末10aa)に送信する(ステップS25)。本実施形態では、端末認証部52によって正当な利用権限を有する端末であると判断された場合につき、以下続けて説明する。
Then, the transmission /
管理システム50の端末抽出部54は、ログイン要求した要求元端末(端末10aa)の端末ID「01aa」を検索キーとして、宛先リスト管理DB5004(図14参照)を検索し、要求元端末(端末10aa)と通信することができる宛先端末の候補の端末IDを読み出すことによって抽出する(ステップS26)。ここでは、要求元端末(端末10aa)の端末ID「01aa」に対応する宛先端末(端末10ab,10ba,10db)のそれぞれの端末ID(「01ab」、「01ba」、「01db」)が抽出されることになる。
The terminal extraction unit 54 of the
次に、端末状態取得部55は、上記端末抽出部54によって抽出された宛先端末の候補の端末ID(「01ab」、「01ba」、「01db」)を検索キーとして、端末管理DB5003(図13参照)を検索し、上記端末抽出部54によって抽出された端末ID毎に稼動状態(「オフライン」、「オンライン」、「オンライン」)を読み出すことにより、端末(10ab,10ba,10db)の各稼動状態を取得する(ステップ27)。
Next, the terminal
次に、送受信部51は、上記ステップ27で使用された検索キーとしての端末ID(「01ab」、「01ba」、「01db」)と、それぞれに対応する宛先端末(端末10ab,10ba,10db)のそれぞれの稼動状態(「オフライン」、「オンライン」、「オンライン」)とが含まれた宛先状態情報を、通信ネットワーク2を介して要求元端末(端末10aa)に送信する(ステップS28)。これにより、要求元端末(端末10aa)は、この要求元端末(端末10aa)と通信することができる宛先端末の候補である端末(10ab,10ba,10db)の現時点のそれぞれの稼動状態(「オフライン」、「オンライン」、「オンライン」)を把握することができる。
Next, the transmission /
更に、管理システム50の端末抽出部54は、ログイン要求してきた要求元端末(端末10aa)の端末ID「01aa」を検索キーとして、宛先リスト管理DB5004(図14参照)を検索し、上記要求元端末(端末10aa)の端末ID「01aa」を宛先端末の候補として登録している他の要求元端末の端末IDを抽出する(ステップS29)。図14に示されている宛先リスト管理テーブルでは、抽出される他の要求元端末の端末IDは、「01ab」、「01ba」、及び「01db」である。
Further, the terminal extraction unit 54 of the
次に、管理システム50の端末状態取得部55は、上記ログイン要求して来た要求元端末(端末10aa)の端末ID「01aa」を検索キーとして、端末管理DB5003(図13参照)を検索し、ログイン要求してきた要求元端末(端末10aa)の稼動状態を取得する(ステップS30)。
Next, the terminal
そして、送受信部51は、上記ステップS29で抽出された端末ID(「01ab」、「01ba」、「01db」)に係るそれぞれの端末(10ab,10ba,10db)のうち、端末管理DB5003(図13参照)で稼動状態が「オンライン」となっている端末(10ba,10db)に、上記ステップS30で取得された要求元端末(端末10aa)の端末ID「01aa」と稼動状態「オンライン」が含まれる宛先状態情報を送信する(ステップS31−1,S31−2)。なお、送受信部51が端末(10ba,10db)に宛先状態情報を送信する際に、各端末ID(「01ba」、「01db」)に基づいて、図13に示されている端末管理テーブルで管理されている端末のIPアドレスを参照する。これにより、ログイン要求した要求元端末(端末10aa)を宛先として通信することができる他の宛先端末(端末10db,10ba)のぞれぞれに、上記ログイン要求した要求元端末(端末10aa)の端末ID「01aa」、及び稼動状態「オンライン」を伝えることができる。
Then, the transmission /
一方、他の端末10でも、上記ステップ21と同様に、利用者が図6に示されている電源スイッチ109をオンにすると、図7に示されている操作入力受付部12が電源オンを受け付け、上記ステップS22〜S31−1,2の処理と同様の処理を行うため、その説明を省略する。
On the other hand, in the
続いて、図21を用いて、中継装置30を絞り込む処理を説明する。なお、図21では、全て管理情報用セッションseiによって、各種管理情報が送受信される処理が示されている。また、本実施形態においては、要求元端末(端末10aa)は、宛先の候補としての端末10のうち、上記ステップS32によって受信した端末の状態情報により、稼動状態がオンラインである端末(10ba,10db)の少なくとも一方と通話を行うことができる。そこで、以下では、要求元端末(端末10aa)の利用者が、宛先端末(端末10db)と通話を開始することを選択した場合について説明する。
Next, processing for narrowing down the
まず、利用者が図5に示されている操作ボタン108を押下して端末10dbを選択すると、図7に示されている操作入力受付部12は、宛先端末10dbとの通話を開始する要求を受け付ける(ステップS41)。そして、要求元端末(端末10aa)の送受信部11は、端末10aaの端末ID「01aa」、及び宛先端末(端末10db)の端末ID「01db」が含まれ、通話を開始したい旨を示す開始要求情報を、管理システム50へ送信する(ステップS42)。これにより、管理システム50の送受信部51は、上記開始要求情報を受信すると共に、送信元である要求元端末(端末10aa)のIPアドレス「1.2.1.3」を把握することができる。
First, when the user presses the
そして、状態管理部53は、開始要求情報に含まれる要求元端末(端末10aa)の端末ID「01aa」及び宛先端末(端末10db)の端末ID「01db」に基づき、端末管理DB5003(図13参照)の端末管理テーブルにおいて、上記端末ID「01aa」及び端末ID「01db」がそれぞれ含まれるレコードの稼動状態のフィールド部分を、ともに「通話中」に変更する(ステップS43)。なお、この状態では、要求元端末(端末10aa)と宛先端末(端末10db)は、通話を開始していないが、通話中状態となり、他の端末10が要求元端末(端末10aa)又は宛先端末(端末10db)と通話しようとすると、いわゆる通話中状態を示す旨の音声又は表示が出力される。
Then, based on the terminal ID “01aa” of the request source terminal (terminal 10aa) and the terminal ID “01db” of the destination terminal (terminal 10db) included in the start request information, the
次に、ステップS44〜S48、及びステップS61−1〜66により、中継装置30を選択するためのセッションを実行する処理を説明する。まず、選択用セッションID生成部56aは、中継装置30を選択するためのセッションの実行に用いられる選択用セッションIDを生成する(ステップS44)。そして、セッション管理部57は、記憶部5000のセッション管理DB5005(図15参照)に、上記ステップS44で生成された選択用セッションID「se1」、要求元端末(端末10aa)の端末ID「01aa」、及び宛先端末(端末10db)の端末ID「01db」を関連付けて記憶して管理する(ステップS45)。
Next, processing for executing a session for selecting the
次に、管理システム50の一次絞込部56は、中継装置管理DB5001、端末管理DB5003、及び優先度管理DB5006に基づいて、要求元端末(端末10aa)と、宛先端末(端末10db)との通話を中継するための中継装置30の一次絞り込みを行う(ステップS46)。
Next, the
ここで、図22を用いて、ステップS46における処理を更に詳細に説明する。まず、端末IPアドレス抽出部56bは、要求元端末(端末10aa)から送られてきた開始通信情報に含まれている要求元端末(端末10aa)の端末ID「01aa」、及宛先端末(端末10db)の端末ID「01db」に基づいて、端末管理DB5003(図13参照)を検索することにより、それぞれに対応する端末(10aa,10db)のIPアドレス(「1.2.1.3」,「1.3.2.4」)を抽出する(ステップS46−1)。
Here, the process in step S46 will be described in more detail with reference to FIG. First, the terminal IP
次に、一次選択部56cは、中継装置管理DB5001(図11参照)で管理されている中継装置30の稼動状態のうち、「オンライン」になっている中継装置(30a,30b,30d)の各中継装置ID(111a,111b,111d)を選択する(ステップS46−2)。また、一次選択部56cは、上記ステップS46−1で抽出された、要求元端末(端末10aa)のIPアドレス「1.2.1.3」、及び宛先端末(端末10db)のIPアドレス「1.3.2.4」に基づいて、中継装置管理DB5001(図11参照)を検索することにより、上記ステップS46−2によって選択された中継装置(30a,30b,30d)の各IPアドレス(「1.2.1.2.」,「1.2.2.2」,「1.3.2.2」)のドットアドレス毎に、上記要求元端末(端末10aa)及び宛先端末(端末10db)の各IPアドレス(「1.2.1.3」,「1.3.2.4」)における各ドットアドレスと同じであるか異なるかを調査する(ステップS46−3)。
Next, the
次に、優先度決定部56dは、優先度管理DB5006(図16参照)を参照して、上記ステップ46−3によって調査された中継装置(30a,30b,30d)毎に、アドレス優先度のポイントを決定する(ステップS46−4)。この決定処理の結果を表に表すと、図23に示されているような状態になる。なお、図23は、中継装置30の絞り込み処理を行う際の優先度のポイントの計算状態を示した図である。この図23では、中継装置ID毎に、アドレス優先度のポイント、伝送速度優先度のポイント、及び統合ポイントが示されている。また、アドレス優先度のポイントは、更に、各中継装置30の要求元端末(端末10aa)に対するポイント及び宛先端末(端末10db)に対するポイントが示されている。統合ポイントは、アドレス優先度の2つのポイントのうちの高い方のポイントと、伝送速度優先度のポイントの合計である。
Next, the
本実施形態では、中継装置30aのIPアドレス「1.2.1.2」は要求元端末(端末10aa)のIPアドレス「1.2.1.3」に対して、「同.同.同.異」であるため、図23に示されているように、アドレス優先度のポイントは「5」になる。また、図1に示されているように、中継装置30aのIPアドレス「1.2.1.2」は宛先端末(端末10db)のIPアドレス「1.3.2.4」に対して、図16に示されているように、「同.異.異.異」であるため、図23に示されているように、アドレス優先度のポイントは「1」になる。また、中継装置30bのIPアドレス「1.2.2.2」は要求元端末(端末10aa)のIPアドレス「1.2.1.3」に対して、「同.同.異.異」であるため、アドレス優先度のポイントは「3」になる。また、中継装置30bのIPアドレス「1.2.2.2」は宛先端末(端末10db)のIPアドレス「1.3.2.4」に対して、「同.異.同.異」であるため、アドレス優先度のポイントは「1」になる。更に、中継装置30dのIPアドレス「1.3.2.2」は要求元端末(端末10aa)のIPアドレス「1.2.1.3」に対して、「同.異.異.異」であるため、アドレス優先度のポイントは「1」になる。また、中継装置30dのIPアドレス「1.3.2.2」は宛先端末(端末10db)のIPアドレス「1.3.2.4」に対して、「同.同.同.異」であるため、アドレス優先度のポイントは「5」になる。
In the present embodiment, the IP address “1.2.1.2” of the
次に、図22に戻って、優先度決定部56dは、中継装置管理DB5001(図11参照)で管理されている各中継装置30の最大データ伝送速度に基づいて、優先度管理DB5006(図17参照)を検索することにより、上記ステップS46−2によって第1次絞り込み処理によって絞り込まれた中継装置(30a,30b,30d)毎に伝送速度優先度のポイントを決定する(ステップS46−5)。本実施形態では、図11に示されているように、中継装置30aの最大データ伝送速度が100(Mbps)であるため、図17に示されている伝送速度優先度を参照すると、伝送速度優先度が3ポイントになる。また、同様に、中継装置30bの最大データ伝送速度について計算すると1000(Mbps)であるため、伝送速度優先度が5ポイントになる。また同様に、中継装置30dの最大データ伝送速度について計算すると10(Mbps)であるため、伝送速度優先度が1ポイントになる。
Next, returning to FIG. 22, the
次に、一次選択部56cは、中継装置(30a,30b,30d)毎に、アドレス優先度のポイントにおいて端末(10aa,10db)のうち高い方のポイントと、伝送速度優先度のポイントを統合した統合ポイントのうち、ポイントが高い上位2つの中継装置30を選択する(ステップ46−6)。本実施形態では、図23に示されているように、中継装置ID(111a,111b,111d)は、それぞれ統合ポイントが「8」、「8」、「6」であるため、中継装置ID「111a」に係る中継装置30a、及び中継装置ID「111b」に係る中継装置30bが選択されることになる。
Next, for each relay device (30a, 30b, 30d), the
以上のステップS46における絞り込み処理が終了すると、図7に示されている送受信部51は、通信ネットワーク2を介して、宛先端末(端末10db)へ、上記絞り込まれた中継装置30の数を伝達するための中継装置絞込情報を送信する(ステップS47)。この中継装置絞込情報には、上記ステップ46によって絞り込まれた中継装置30の数「2」、要求元端末(端末10aa)の端末ID「01aa」、及び上記選択用セッションID「se1」が含まれている。これにより、端末10dbは、選択用セッションID「se1」におけるセッションの実行において、中継装置30の数がいくつで、どの端末10から通話を開始したいとの要求があったのかを把握することができると共に、中継装置絞込情報の送信元である管理システム50のIPアドレス「1.1.1.2」を把握することができる。
When the narrowing-down process in step S46 is completed, the transmission /
そして、端末10dbは、送受信部11から通信ネットワーク2を介して管理システム50へ、上記中継装置絞込情報の受信が完了した旨を示す受信完了情報を送信する(ステップS48)。この受信完了情報には、セッションID「se1」が含まれている。これにより、管理システム50は、セッションID「se1」で実行されている中継装置数の伝達が完了した旨と共に、送信元である宛先端末(端末10db)のIPアドレス「1.3.2.4」を把握することができる。
Then, the terminal 10db transmits reception completion information indicating that reception of the relay device narrowing information is completed from the transmission / reception unit 11 to the
次に、図24乃至図26を用いて、管理システム50が中継装置30を選択する処理を説明する。
Next, a process in which the
まず、テレビ会議の通話を開始する前に、要求元端末(端末10aa)及び宛先端末(端末10db)のそれぞれに、pingが含まれた事前送信情報を送信させるため、管理システム50は、送受信部51から通信ネットワーク2を介して要求元端末(端末10aa)及び宛先端末(端末10db)に、それぞれ事前送信要求情報を送信する(ステップS61−1,2)。この事前送信要求情報には、セッションID「se1」、上記ステップS46によって絞り込まれた中継装置(30a,30b)のそれぞれのIPアドレス(「1.2.1.2」,「1.2.2.2」)が含まれている。これにより、要求元端末(端末10aa)及び宛先端末(端末10db)は、セッションID「se1」で実行されている中継装置30の選択処理において、事前送信情報を中継させる中継装置(30a,30b)のIPアドレスを把握することができる。またこの際に、要求元端末(端末10aa)及び宛先端末(端末10db)は、事前送信要求情報の送信元である管理システムのIPアドレス「1.1.1.2」も把握することができる。
First, before starting a video conference call, in order to cause each of the request source terminal (terminal 10aa) and the destination terminal (terminal 10db) to transmit the pre-transmission information including ping, the
次に、要求元端末(端末10aa)は、送受信部11から通信ネットワーク2を介して中継装置30aへ第1の事前送信情報を送信する(ステップS62−1)。
Next, the request source terminal (terminal 10aa) transmits the first pre-transmission information from the transmission / reception unit 11 to the
また、要求元端末(端末10aa)は、送受信部11によって第1の事前送信情報が送信された送信日時を、第1の事前送信情報が送られた中継装置30aのIPアドレスに関連付けて、図7に示されている記憶部1000に記憶しておく(ステップS63−1)。
Further, the request source terminal (terminal 10aa) associates the transmission date and time when the first pre-transmission information is transmitted by the transmission / reception unit 11 with the IP address of the
一方、第1の事前送信情報には、セッションID「se1」、及びpingが含まれている。これにより、中継装置30aは、選択用セッションID「se1」におけるセッションの実行において、第1の事前送信情報が送られて来たことを把握できると共に、この第1の事前送信情報の送信元である要求元端末(端末10aa)のIPアドレス「1.2.1.3」を把握することができる。
On the other hand, the first pre-transmission information includes the session ID “se1” and ping. As a result, the
また、中継装置30aでは、計測部36が、送受信部31で第1の事前送信情報を受信した際の第1の受信日時を計測する(ステップS64−1)。そして、送受信部31は、上記ステップS62−1の送信によって受信した要求元端末(端末10aa)のIPアドレス「1.2.1.3」に対して、上記ステップS62−1によって送られてきた第1の事前送信情報を受信した旨を示す第1の受信結果情報を送信する(ステップS65−1)。なお、この第1の受信結果情報には、セッションID「se1」、及び上記ステップS64−1によって計測された第1の受信日時を示す第1の受信日時情報が含まれている。これにより、要求元端末(端末10aa)は、セッションID「se1」におけるセッションの実行において、第1の受信結果情報が送られて来たことを把握できると共に、この第1の受信結果情報の送信元である中継装置30aのIPアドレス「1.2.1.2」を把握することができる。
Moreover, in the
次に、要求元端末(端末10aa)では、記憶・読出処理部19が、第1の受信結果情報に含まれる第1の受信日時情報を、記憶部1000に記憶する(ステップS66−1)。なお、この記憶された第1の受信日時情報を後ほど特定するために、第1の受信日時情報にセッションID「se1」及び中継装置30aのIPアドレスを関連付けて記憶する。
Next, in the request source terminal (terminal 10aa), the storage /
また、要求元端末(端末10aa)と中継装置30bとの間においても、上記ステップS62−1〜S66−1と同様の処理が行われる(図24におけるステップS67−1〜S71−1)。
Also, the same processing as Steps S62-1 to S66-1 is performed between the request source terminal (terminal 10aa) and the
次に、要求元端末(端末10aa)の記憶・読出処理部19は、記憶部1000から、セッションID「se1」に基づいて、中継装置のIPアドレス毎に、このセッションIDに対応する第1の送信日時情報及び第1の受信日時情報を読み出す(ステップS72−1)。そして、送受信部11は、通信ネットワーク2を介して管理システム50へ、セッションID及び中継装置のIPアドレス毎に、第1の送受信結果情報を送信する(ステップS73−1)。なお、この第1の送受信結果情報には、セッションID「se1」、中継装置30aのIPアドレス(「1.2.1.2」,「1.2.2.1」)、上記ステップ(S63−1,S68−2)によって記憶された第1の送信日時情報、及び上記ステップ(S66−1,S71−1)によって記憶された第1の受信日時情報が含まれている。これにより、管理システム50は、この第1の送受信結果情報を受信すると共に、この第1の送受信結果情報の送信元である要求元端末(端末10aa)のIPアドレス「1.2.1.3」を把握することができる。
Next, the storage /
一方、図25に示されているように、宛先端末(端末10db)では、送受信部11から通信ネットワーク2を介して中継装置30aへ第2の事前送信情報を送信する(ステップS62−2)。
On the other hand, as illustrated in FIG. 25, the destination terminal (terminal 10db) transmits the second pre-transmission information from the transmission / reception unit 11 to the
また、宛先端末(端末10db)は、送受信部11によって第2の事前送信情報が送信された送信日時を、第2の事前送信情報が送られた中継装置30aのIPアドレスに関連付けて、図7に示されている記憶部1000に記憶しておく(ステップS63−2)。
Further, the destination terminal (terminal 10db) associates the transmission date and time when the second pre-transmission information is transmitted by the transmission / reception unit 11 with the IP address of the
一方、第2の事前送信情報には、セッションID「se1」、及びpingが含まれている。これにより、中継装置30aは、選択用セッションID「se1」におけるセッションの実行において、第2の事前送信情報が送られて来たことを把握できると共に、この第2の事前送信情報の送信元である宛先端末(端末10db)のIPアドレス「1.3.2.4」を把握することができる。
On the other hand, the second pre-transmission information includes the session ID “se1” and ping. Thereby, the
また、中継装置30aでは、計測部36が、送受信部31で第2の事前送信情報を受信した際の第2の受信日時を計測する(ステップS64−2)。そして、送受信部31は、上記ステップS62−2の送信によって受信した宛先端末(端末10db)のIPアドレス「1.3.2.4」に対して、上記ステップS62−2によって送られてきた第2の事前送信情報を受信した旨を示す第2の受信結果情報を送信する(ステップS65−2)。なお、この第2の受信結果情報には、セッションID「se1」、及び上記ステップS64−2によって計測された第2の受信日時を示す第2の受信日時情報が含まれている。これにより、宛先端末(端末10db)は、セッションID「se1」におけるセッションの実行において、第2の受信結果情報が送られて来たことを把握できると共に、この第2の受信結果情報の送信元である中継装置30aのIPアドレス「1.3.2.4」を把握することができる。
Further, in the
次に、宛先端末(端末10db)では、記憶・読出処理部19が、第2の受信結果情報に含まれる第2の受信日時情報を、記憶部1000に記憶する(ステップS66−2)。なお、この記憶された第2の受信日時情報を後ほど特定するために、第2の受信日時情報にセッションID「se1」及び中継装置30aのIPアドレスを関連付けて記憶する。
Next, in the destination terminal (terminal 10db), the storage /
また、宛先端末(端末10db)と中継装置30bとの間においても、上記ステップS62−2〜S66−2と同様の処理が行われる(図25におけるステップS67−2〜S71−2)。
In addition, processing similar to that in steps S62-2 to S66-2 is performed between the destination terminal (terminal 10db) and the
次に、宛先端末(端末10db)の記憶・読出処理部19は、記憶部1000から、セッションID「se1」に基づいて、中継装置のIPアドレス毎に、このセッションIDに対応する第2の送信日時情報及び第2の受信日時情報を読み出す(ステップS72−2)。そして、送受信部11は、通信ネットワーク2を介して管理システム50へ、セッションID及び中継装置のIPアドレス毎に、第2の送受信結果情報を送信する(ステップS73−2)。なお、この第2の送受信結果情報には、セッションID「se1」、中継装置30bのIPアドレス「1.2.2.2」、上記ステップ(S63−2,S68−2)によってそれぞれ記憶された第2の送信日時情報、及び上記ステップ(S66−2,S71−2)によってそれぞれ記憶された第2の受信日時情報が含まれている。これにより、管理システム50は、この第2の送受信結果情報を受信すると共に、この第2の送受信結果情報の送信元である宛先端末(端末10db)のIPアドレス「1.3.2.4」を把握することができる。
Next, the storage /
次に、管理システム50の最終絞込部61は、第1及び第2の送受信結果情報に基づいて、最終的にテレビ会議の通話で画像データ及び音声データを中継する1つの中継装置30に絞り込む(ステップS74)。
Next, the
ここで、図8及び図26を用いて、ステップS68における処理を更に詳細に説明する。まず、図8に示されている最終絞込部61の算出部61aは、セッションID「se1」における中継装置(30a,30b)のIPアドレス毎に、第1の受信日時情報で示される第1の受信日時(tr1)と第1の送信日時情報で示される第1の送信日時(tt1)との時間差に基づいて、各第1の事前送信情報の送信から受信までの第1の所要時間(t1)を算出する(ステップS74−1)。同じく、算出部61aは、セッションID「se1」における中継装置(30a,30b)のIPアドレス毎に、第2の受信日時情報で示される第2の受信日時(tr2)と第2の送信日時情報で示される第2の送信日時(tt2)との時間差に基づいて、各第2の事前送信情報の送信から受信までの第2の所要時間(t2)を算出する(ステップS74−1)。
Here, the process in step S68 will be described in more detail with reference to FIGS. First, the
次に、算出部61aは、セッションID「se1」における中継装置(30a,30b)のIPアドレス毎に、上記ステップS74−1によって算出された第1の所要時間(t1)及び第2の所要時間(t2)を合計した合計所要時間(T)を算出する(ステップS74−2)。
Next, for each IP address of the relay device (30a, 30b) in the session ID “se1,” the
次に、最終選択部61bは、上記ステップS74−2によって算出された合計所要時間(T)の数が、セッションID「se1」におけるセッションの実行において、中継予定の中継装置(30a,30b)の数(ここでは「2」)に相当するかを判断する(ステップS74−3)。そして、全て算出されていない場合には(NO)、最終選択部61bは、上記ステップS73−2による合計所要時間(T)の算出を開始してから所定時間(ここでは1分間)経過したかを判断する(ステップS74−4)。更に、所定時間経過していない場合には(NO)、上記ステップS74−1に戻る。一方、上記ステップ74−3において、全ての数の合計所要時間(T)を算出した場合(YES)、又は上記ステップS74−4において、所定時間経過した場合(YES)には、最終選択部61bは、これまでに算出部61aで算出された合計所要時間(T)のうちで最短の合計所要時間(T)に関わった中継装置30を1つ選択する(ステップS74−5)。即ち、最終選択部61bは、これまでに算出部61aで算出された合計所要時間(T)のうちで最短の合計所要時間(T)となった第1及び第2の事前送信情報を受信した中継装置30を1つ選択する。本実施形態では、中継装置30aによって受信された第1及び第2の事前送信情報の組による合計所要時間(T)が、中継装置30bによって受信された第1及び第2の事前送信情報の組による合計所要時間(T)よりも短かったものとして、中継装置30aが選択される例を示している。
Next, the
続いて、図25に戻り、管理システム50のセッション管理部57は、セッション管理DB5005(図15参照)のセッション管理テーブルにおいて、セッションID「se1」が含まれるレコードの中継装置IDのフィールド部分に、上記最終的に1つに選択された中継装置30aの中継装置ID「111a」を記憶して管理する(ステップS75)。そして、管理システム50の送受信部51は、通信ネットワーク2を介して中継装置30aへ、中継を開始する旨の要求が示された中継開始要求情報を送信する(ステップS76)。この中継開始要求情報には、中継される要求元端末(端末10aa)及び宛先端末(端末10db)の各IPアドレス(「1.2.1.3」,「1.3.2.4」)が含まれている。これにより、中継装置30aは、自装置である中継装置30aが選択されたことを把握できるため、端末(10aa,10db)の間で、低解像度、中解像度、及び高解像度の3つ画像データ、並びに、音声データを通話するためのセッションを確立する(ステップS77)。よって、端末(10aa,10db)は、テレビ会議の通話を開始することができる。
Subsequently, returning to FIG. 25, the session management unit 57 of the
続いて、図7及び図26を用いて、要求元端末と宛先端末との間で、テレビ会議の通話を行うために、画像データ及び音声データを送受信する処理を説明する。まず、要求元端末(端末10aa)は、画像・音声データ用セッションsedによって、撮像部14で撮像された被写体の画像データ、及び音声入力部15aで入力された音声の音声データを、送受信部11から通信ネットワーク2を介して中継装置30aへ送信する(ステップS81)。なお、本実施形態では、図3に示されている低解像度、中解像度、及び高解像度の3つから成る高画質の画像データ、並びに、音声データを送信している。これにより、中継装置30aでは、送受信部31で上記3つの解像度の画像データ及び音声データを受信する。そして、データ品質確認部33が、宛先端末(端末10db)のIPアドレス「1.3.2.4」を検索キーとして、変更品質管理DB3001(図10参照)を検索し、対応した中継する画像データの画質を抽出することで、中継する画像データの画像の品質を確認する(ステップS82)。本実施形態では、確認された画像データの画質が「高画質」であり、送受信部31で受信した画像データの画質と同じであるため、中継装置30aは、画像・音声データ用セッションsedによって、そのままの画質の画像データ、及びそのままの音質の音声データで、宛先端末(端末10db)に転送する(ステップS83)。これにより、宛先端末(端末10db)は、送受信部11で、低解像度、中解像度、高解像度の3つから成る高画質の画像データ、及び音声データを受信する。そして、表示制御部17が、3つの画質の画像データを組み合わせて、ディスプレイ120に画像を表示させると共に、音声出力部15bが音声データに基づく音声を出力させることができる。
Next, a process for transmitting and receiving image data and audio data to perform a video conference call between the request source terminal and the destination terminal will be described with reference to FIGS. 7 and 26. First, the request source terminal (terminal 10aa) transmits and receives the image data of the subject imaged by the
次に、端末10dbの遅延検出部18は、送受信部11で受信された画像データの受信の遅延時間を一定時間毎(例えば、1秒毎)に検出する(ステップS84)。なお、本実施形態では、遅延時間が200(ms)である場合について、以下説明を続ける。
Next, the
宛先端末(端末10db)の送受信部11は、管理情報用セッションseiによって、通信ネットワーク2を介して管理システム50へ、遅延時間「200(ms)」を示す遅延情報を送信する(ステップS85)。これにより、管理システム50は、遅延時間を把握すると共に、遅延情報の送信元である端末10dbのIPアドレス「1.3.2.4」を把握することができる。
The transmission / reception unit 11 of the destination terminal (terminal 10db) transmits delay information indicating the delay time “200 (ms)” to the
次に、管理システム50の遅延時間管理部60は、上記宛先端末(端末10db)のIPアドレス「1.3.2.4」を検索キーとして、端末管理DB5003(図13参照)を検索することで、対応する端末ID「01db」を抽出し、更に、セッション管理DB5005(図15参照)のセッション管理テーブルにおいて、上記端末ID「01db」のレコードにおける遅延時間のフィールド部分に、上記遅延情報で示されている遅延時間「200(ms)」を記憶して管理する(ステップS86)。
Next, the delay
次に、品質決定部58は、上記遅延時間「200(ms)」を検索キーとして、品質管理DB5007(図18参照)を検索し、対応する画像データの画質「中画質」を抽出することで、画質を「中画質」に決定する(ステップS87)。
Next, the
次に、送受信部51は、セッション管理DB(図15参照)のセッション管理テーブルにおいて、上記端末ID「01db」に関連付けられている中継装置ID「111a」を検索キーとして、中継装置管理DB5001(図11参照)を検索し、対応する中継装置30aのIPアドレス「1.2.1.2」を抽出する(ステップS88)。そして、送受信部51は、管理情報用セッションseiによって、通信ネットワーク2を介して中継装置30aへ、上記ステップ87によって決定された画像データの画質「中画質」を示す品質情報を送信する(ステップS89)。この品質情報には、上記ステップS86において検索キーとして用いた宛先端末(端末10db)のIPアドレス「1.3.2.4」が含まれている。これにより、中継装置30aでは、変更品質管理部34が、変更品質管理DB3001(図10参照)に、送信先の端末10(ここでは、端末10db)のIPアドレス「1.3.2.4」、及び中継される画像データの画質「中画質」を関連付けて記憶して管理する(ステップS90)。
Next, the transmitting / receiving
次に、端末10aaは、引き続き上記ステップS81と同様に、画像・音声データ用セッションsedによって、中継装置30aへ、低解像度、中解像度、高解像度の3つから成る高画質の画像データ、並びに、音声データを送信する(ステップS91)。これにより、中継装置30aでは、上記ステップS82と同様に、データ品質確認部33が、宛先端末(端末10db)のIPアドレス「1.3.2.4」を検索キーとして、変更品質管理DB3001(図10参照)を検索し、対応した中継する画像データの画質「中画質」を抽出することで、中継される画像データの画像の品質を確認する(ステップS92)。本実施形態では、確認された画像データの画質が「中画質」であり、送受信部31で受信された画像データの画質「高画質」よりも低くなるため、データ品質変更部35は、画像データの画質を「高画質」から「中画質」に抑制することで、画像データの画像の品質を変更する(ステップS93)。
Next, the terminal 10aa continues to the
そして、送受信部31は、画像・音声データ用セッションsedによって、通信ネットワーク2を介して端末10dbへ、上記画像データの画質が「中画質」に変更された画像データ、及び音声の音質が変更されていない音声データを送信する(ステップS94)。これにより、宛先端末(端末10db)は、送受信部11で、低解像度、中解像度の2つから成る中画質の画像データ、及び音声データを受信する。そして、表示制御部17が、2つの解像度の画像データを組み合わせて、ディスプレイ120に画像を表示させると共に、音声出力部15bが音声データに基づく音声を出力させることができる。
Then, the image / sound data session sed changes the image data in which the image quality of the image data is changed to “medium image quality” and the sound quality of the sound to the terminal 10 db via the
このように、画像データを受信する宛先端末(端末10db)で、受信の遅延が生じた場合には、中継装置30aは画像の品質を変更し、テレビ会議に参加している人に違和感を与えないようにすることができる。
<<本実施形態の主な効果>>
以上説明したように本実施形態によれば、通信ネットワーク2のうち、中継装置30のIPアドレス等のLAN2の環境を把握することができたとしても、インターネット2i全体の環境まで把握することは困難であるため、まずは把握できる環境の情報から、画像データ及び音声データを中継する複数の中継装置30うち2つ以上までに絞り込む。そして、次に複数の端末10の間で画像データ及び音声データを実際に送受信する前に、画像データ及び音声データに替えて、事前送信情報を送受信させてみることで、実際に最も早く事前送信情報を中継することができる1つの中継装置30に絞り込むことができるという効果を奏する。
As described above, when a reception delay occurs at the destination terminal (terminal 10db) that receives the image data, the
<< Main effects of this embodiment >>
As described above, according to the present embodiment, even if the environment of the
即ち、端末10のIPアドレスの何れかに近い上位2つ以上のIPアドレスがそれぞれ割り当てられている中継装置30を選択することで、最終的に使用される中継装置30の候補を2つ以上残すことができる。そして、中継装置30の計測部36が、第1の事前送信情報が受信される際の第1の受信時刻及び第2の事前送信情報が受信される際の第2の受信時刻を計測する。次に、送受信部31が、この計測された第1の受信時刻を示す第1の受信時刻情報を第1の伝送端末に送信すると共に、上記計測された第2の受信時刻を示す第2の受信時刻情報を第2の伝送端末に送信する。これにより、第1の伝送端末は、受信した第1の受信時刻と第1の伝送端末で第1の事前送信情報を送信する際の第1の送信時刻とを管理システム50に送信する。一方、第2の伝送端末は、受信した第2の受信時刻と第2の伝送端末で第2の事前送信情報を送信する際の第2の送信時刻とを管理システム50に送信する。よって、管理システム50では、第1の受信時刻と第1の送信時刻との差に基づいて第1の所要時間を算出し、第2の受信時刻と第2の送信時刻との差に基づいて第2の所要時間を算出し、これら第1及び第2の所要時間を合計することで、合計所用時間を算出する。このようにして、管理システム50は、中継装置毎に当該中継装置が関わった合計所要時間を算出することで、複数の中継装置のうち、最短の合計所要時間に関わった中継装置を選択する。この選択により、実際の通信ネットワーク環境下で最大限に高品質のコンテンツデータを中継する中継装置が選択されることが可能となるという効果を奏する。
That is, by selecting the
また、本実施形態では、中継装置30を絞り込む際に、テレビ会議を行う端末10のIPアドレスに近いIPアドレスの中継装置30を優先的に選択するだけでなく、各中継装置30における最大データ伝送速度も考慮して、2つ以上の中継装置30が選択されている。これにより、現実の通信ネットワーク2の環境に即した中継装置30の候補を絞り込むことができるという効果を奏する。
In the present embodiment, when narrowing down the
更に、本実施形態では、中継装置30を絞り込む際に、稼動状態がオンラインである中継装置30の中から絞り込むため、現実のネットワーク2の環境に更に即した中継装置30の候補を絞り込むことができる。
〔実施形態の補足〕
上記実施形態における中継装置30、管理システム50、プログラム提供システム90、及びメンテナンスシステム100は、単一のコンピュータによって構築されてもよいし、各部(機能又は手段)を分割して任意に割り当てられた複数のコンピュータによって構築されていてもよい。また、プログラム提供システム90が単一のコンピュータによって構築されている場合には、プログラム提供システム90によって送信されるプログラムは、複数のモジュールに分けて送信されるようにしてもよいし、分けないで送信されるようにしてもよい。更に、プログラム提供システム90が複数のコンピュータによって構築されている場合には、複数のモジュールが分けられた状態で、各コンピュータから送信されるようにしてもよい。
Furthermore, in this embodiment, when the
[Supplement of Embodiment]
The
また、上記各実施形態の端末用プログラム、中継装置用プログラム、及び伝送管理用プログラムが記憶された記録媒体、並びに、これらプログラムが記憶されたHD204、及びこのHD204を備えたプログラム提供システム90は、いずれもプログラム製品(Program Product)として、国内又は国外へ、上記端末用プログラム、中継装置用プログラム、及び伝送管理用プログラムが利用者等に提供される場合に用いられる。
Further, the terminal program, the relay device program, and the transmission management program of each of the above embodiments, the recording medium storing the program, the
更に、上記実施形態では、図10に示されている変更品質管理テーブル、及び図18に示されている品質管理テーブルによって、中継装置30で中継される画像データの画像の品質の一例として、画像データの画像の解像度に着目して管理したが、これに限られるものではなく、品質の他の例として、画像データの画質の深度、音声データの音声におけるサンプリング周波数、音声データの音声におけるビット長などに着目して管理してもよい。また、音声データが3種類の解像度(高解像度、中解像度、低解像度)のデータに分かれて送受信されるようにしてもよい。
Furthermore, in the above-described embodiment, as an example of the image quality of the image data relayed by the
また、図11、図13、及び図15では、受信日時について管理しているが、これに限るものではなく、受信日時のうち少なくとも受信時間を管理すればよい。 11, FIG. 13 and FIG. 15 manage the reception date and time, but the present invention is not limited to this, and at least the reception time of the reception date and time may be managed.
更に、上記実施形態では、図11で中継装置のIPアドレス、図13で端末のIPアドレスを管理することとしたが、これに限るものではなく、通信ネットワーク2上で中継装置30を特定するための中継装置特定情報、又は通信ネットワーク2上で端末10を特定するための端末特定情報であれば、それぞれのFQDN(Fully Qualified Domain Name)を管理してもよい。この場合、周知のDNS(Domain Name System)サーバによって、FQDNに対応するIPアドレスが取得されることになる。なお、「通信ネットワーク2で中継装置30を特定するための中継装置特定情報」だけでなく、「通信ネットワーク2上における中継装置30への接続先を示した中継装置接続先情報」、又は「通信ネットワーク2上における中継装置30への宛先を示した中継装置宛先情報」と表現してもよい。同じく、「通信ネットワーク2で端末10を特定するための端末特定情報」だけでなく、「通信ネットワーク2上における端末10への接続先を示した端末接続先情報」、又は「通信ネットワーク2上における端末10への宛先を示した端末宛先情報」と表現してもよい。
Further, in the above embodiment, the IP address of the relay device is managed in FIG. 11 and the IP address of the terminal in FIG. 13, but the present invention is not limited to this, and the
また、上記実施形態では、伝送システム1の一例として、テレビ会議システムの場合について説明したが、これに限るものではなく、IP(Internet Protocol)電話や、インターネット電話等の電話システムであってもよい。また、伝送システム1は、カーナビゲーションシステムであってもよい。この場合、例えば、端末30の一方が自動車に搭載されたカーナビゲーション装置に相当し、端末30の他方が、カーナビゲーションを管理する管理センターの管理端末若しくは管理サーバ、又は他の自動車に搭載されているカーナビゲーション装置に相当する。また、伝送システム1は、携帯電話機の通信システムであってもよい。この場合、例えば、端末10は携帯電話機に相当する。
In the above embodiment, a video conference system has been described as an example of the
また、上記実施形態では、コンテンツデータの一例として、画像データ及び音声データについて説明したが、これに限るものではなく、触覚(touch)データであってもよい。この場合、一方の端末側でユーザが接触した感覚が、他方の端末側に伝達される。更に、コンテンツデータは、嗅覚(smell)データであってもよい。この場合、一方の端末側の匂い(臭い)が、他の端末側に伝達される。また、コンテンツデータは、画像データ、音声データ、触覚データ、及び嗅覚データのうち、少なくとも1つのデータであればよい。 In the above embodiment, image data and audio data have been described as an example of content data. However, the present invention is not limited to this, and touch data may be used. In this case, the feeling that the user touched on one terminal side is transmitted to the other terminal side. Further, the content data may be smell data. In this case, the odor (odor) on one terminal side is transmitted to the other terminal side. The content data may be at least one of image data, audio data, tactile data, and olfactory data.
また、上記実施形態では、伝送システム1によってテレビ会議をする場合について説明したが、これに限るものではなく、打ち合わせ、家族間や友人間等の一般的な会話、又は、一方向での情報の提示に使用されても構わない。
Further, in the above embodiment, the case where a video conference is performed by the
1 伝送システム
10 伝送端末
11 送受信部(第1の端末送信手段の一例、第2の端末送信手段の一例)
17 表示制御部
18 遅延検出部
30 中継装置
31 送受信部(受信手段の一例、中継装置送信手段の一例)
32 状態検知部
33 データ品質確認部
34 変更品質管理部
35 データ品質変更部
36 計測部(計測手段の一例)
50 伝送管理システム
51 送受信部
52 端末認証部
53 状態管理部
54 端末抽出部
55 端末状態取得部
56 一次絞込部
56a 選択用セッションID生成部
56b 端末IPアドレス抽出部
56c 一次選択部56c
56d 優先度決定部
57 セッション管理部
58 品質決定部
60 遅延時間管理部
61 最終絞込部
61a 算出部(算出手段の一例)
61b 最終選択部(選択手段の一例)
70 ルータ
90 プログラム提供システム
100 メンテナンスシステム
1000 記憶部
3000 記憶部
3001 変更品質管理DB
5000 記憶部
5001 中継装置管理DB
5002 端末認証管理DB
5003 端末管理DB
5004 宛先リスト管理DB
5005 セッション管理DB
5006 優先度管理DB
5007 品質管理DB
DESCRIPTION OF
17
32
DESCRIPTION OF
56d priority determination unit 57
61b Final selection unit (an example of selection means)
70
5000 storage unit 5001 relay device management DB
5002 Terminal authentication management DB
5003 Terminal management DB
5004 Destination list management DB
5005 Session management DB
5006 Priority management DB
5007 Quality Management DB
Claims (2)
前記複数の中継装置は、それぞれ、
前記第1及び第2の伝送端末間で前記コンテンツデータが送受信される前に、前記第1の伝送端末から送信された第1の事前送信情報を受信すると共に前記第2の伝送端末から送信された第2の事前送信情報を受信する受信手段と、
前記受信手段によって第1の事前送信情報が受信される際の第1の受信時刻、及び前記受信手段によって第2の事前送信情報が受信される際の第2の受信時刻を計測する計測手段と、
前記計測された第1の受信時刻を示す第1の受信時刻情報を前記第1の伝送端末に送信すると共に前記計測された第2の受信時刻を示す第2の受信時刻情報を前記第2の伝送端末に送信する中継装置送信手段と、
を有し、
前記第1の伝送端末は、受信された前記第1の受信時刻情報、及び前記第1の事前送信情報を送信する際の送信時刻を示す第1の送信時刻情報を、前記伝送管理システムに送信する第1の端末送信手段を有し、
前記第2の伝送端末は、受信された前記第2の受信時刻情報、及び前記第2の事前送信情報を送信する際の送信時刻を示す第2の送信時刻情報を、前記伝送管理システムに送信する第2の端末送信手段を有し、
前記伝送管理システムは、
前記第1の受信時刻情報で示される受信時刻と前記第1の送信時刻情報で示される送信時刻との差に基づいて、前記第1の事前送信情報の送信から受信までの第1の所要時間を算出すると共に、前記第2の受信時刻情報で示される受信時刻と前記第2の送信時刻情報で示される送信時刻との差に基づいて、前記第2の事前送信情報の送信から受信までの第2の所要時間を算出し、更に、前記第1及び第2の所要時間を合計した合計所要時間を算出する算出手段と、
前記複数の中継装置のうち、最短の合計所要時間に関わった中継装置を選択する選択手段とを有する
ことを特徴とする伝送システム。 A relay device that actually relays among a plurality of relay devices, the first and second transmission terminals, and a plurality of relay devices that relay content data for conversation between the first and second transmission terminals. A transmission system having a transmission management system to select,
Each of the plurality of relay devices is
Before the content data is transmitted / received between the first and second transmission terminals, the first pre-transmission information transmitted from the first transmission terminal is received and transmitted from the second transmission terminal. Receiving means for receiving the second pre-transmission information;
Measuring means for measuring a first reception time when the first preliminary transmission information is received by the reception means, and a second reception time when the second preliminary transmission information is received by the reception means; ,
The first reception time information indicating the measured first reception time is transmitted to the first transmission terminal, and the second reception time information indicating the measured second reception time is transmitted to the second transmission terminal. Relay device transmitting means for transmitting to the transmission terminal;
I have a,
The first transmission terminal transmits the received first reception time information and first transmission time information indicating a transmission time when transmitting the first pre-transmission information to the transmission management system. First terminal transmitting means
The second transmission terminal transmits, to the transmission management system, the received second reception time information and second transmission time information indicating a transmission time when transmitting the second pre-transmission information. Second terminal transmitting means for
The transmission management system includes:
Based on the difference between the reception time indicated by the first reception time information and the transmission time indicated by the first transmission time information, the first required time from transmission to reception of the first prior transmission information And calculating the second pre-transmission information from transmission to reception based on the difference between the reception time indicated by the second reception time information and the transmission time indicated by the second transmission time information. Calculating means for calculating a second required time, and further calculating a total required time obtained by adding the first and second required times;
A transmission system comprising: a selecting unit that selects a relay device related to the shortest total required time among the plurality of relay devices .
複数の中継装置、第1の伝送端末、第2の伝送端末、又は伝送管理システムのメンテナンスを行うメンテナンスシステムを有することを特徴とする伝送システム。 A transmission system comprising a maintenance system that performs maintenance of a plurality of relay apparatuses, a first transmission terminal, a second transmission terminal, or a transmission management system.
Priority Applications (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011189171A JP5853502B2 (en) | 2011-03-25 | 2011-08-31 | Transmission system |
CA2830337A CA2830337A1 (en) | 2011-03-25 | 2012-03-26 | Transmission management system, transmission system, selection method, program product, program supply system, and maintenance system |
CN2012800147946A CN103460691A (en) | 2011-03-25 | 2012-03-26 | Transmission management system, transmission system, selection method, program product, program supply system, and maintenance system |
EP12764861.6A EP2689579A4 (en) | 2011-03-25 | 2012-03-26 | Transmission management system, transmission system, selection method, program product, program supply system, and maintenance system |
SG2013065990A SG193264A1 (en) | 2011-03-25 | 2012-03-26 | Transmission management system, transmission system, selection method, program product, program supply system, and maintenance system |
US14/006,985 US9350660B2 (en) | 2011-03-25 | 2012-03-26 | Transmission management system, transmission system, selection method, program product, program supply system, and maintenance system |
PCT/JP2012/058767 WO2012133863A1 (en) | 2011-03-25 | 2012-03-26 | Transmission management system, transmission system, selection method, program product, program supply system, and maintenance system |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011067768 | 2011-03-25 | ||
JP2011067768 | 2011-03-25 | ||
JP2011189171A JP5853502B2 (en) | 2011-03-25 | 2011-08-31 | Transmission system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012217122A JP2012217122A (en) | 2012-11-08 |
JP5853502B2 true JP5853502B2 (en) | 2016-02-09 |
Family
ID=47269458
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011189171A Active JP5853502B2 (en) | 2011-03-25 | 2011-08-31 | Transmission system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5853502B2 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6368157B2 (en) * | 2014-06-12 | 2018-08-01 | キヤノン株式会社 | Communication system and control method thereof |
JP2016012843A (en) | 2014-06-30 | 2016-01-21 | 株式会社リコー | Transmission management system, transmission system, transmission management method, transmission method, and program |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008131240A (en) * | 2006-11-20 | 2008-06-05 | Fujitsu Ltd | Network system, and device and method thereof |
JP2008131346A (en) * | 2006-11-21 | 2008-06-05 | Oki Electric Ind Co Ltd | Ip network system |
JP5732771B2 (en) * | 2009-08-11 | 2015-06-10 | 株式会社リコー | Video output device, video output system, video output method and program |
-
2011
- 2011-08-31 JP JP2011189171A patent/JP5853502B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2012217122A (en) | 2012-11-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5962098B2 (en) | Transmission terminal, transmission system, display control method, and program | |
JP6260596B2 (en) | Transmission terminal, data transmission method, and program | |
JP5655499B2 (en) | Transmission management system, transmission system, transmission management program, program providing system, and maintenance system | |
JP5793869B2 (en) | Transmission management system, transmission management method, and transmission management program | |
JP5811334B2 (en) | Transmission management system, transmission management method, program, and transmission system | |
JP5884964B2 (en) | Transmission system and transmission method | |
JP5870558B2 (en) | Transmission management system, transmission management method, and program | |
JP6171303B2 (en) | Transmission terminal, transmission method, and program | |
JP5942364B2 (en) | Transmission management system, transmission system, and program | |
JP5983792B2 (en) | Transmission system and transmission method | |
JP2012147416A (en) | Transmission management system, transmission system, and program for transmission management system | |
JP5397563B1 (en) | Transmission management system, transmission system, program for transmission management system, and control method | |
JP2022028798A (en) | Transmission management system, transmission system, program, program providing system, and maintenance system | |
JP5870557B2 (en) | Transmission management system and transmission management program | |
JP2014072703A (en) | Transmission management system, transmission system, transmission management method, and program | |
JP6327338B2 (en) | Destination terminal, transmission system, relay device selection method, and recording medium | |
JP5831050B2 (en) | Transmission terminal, transmission terminal program, program providing system, and maintenance system | |
JP5853502B2 (en) | Transmission system | |
JP5884965B2 (en) | Transmission management system, transmission system, and selection method | |
JP5899710B2 (en) | Transmission system | |
JP6593392B2 (en) | Transmission method, relay device, and program | |
JP6330320B2 (en) | Transmission system, transmission terminal, program, and communication method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140711 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150819 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20151019 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20151110 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20151123 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5853502 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |