CN103327285A - 传送终端、传送系统、显示控制方法 - Google Patents

传送终端、传送系统、显示控制方法 Download PDF

Info

Publication number
CN103327285A
CN103327285A CN2013100625249A CN201310062524A CN103327285A CN 103327285 A CN103327285 A CN 103327285A CN 2013100625249 A CN2013100625249 A CN 2013100625249A CN 201310062524 A CN201310062524 A CN 201310062524A CN 103327285 A CN103327285 A CN 103327285A
Authority
CN
China
Prior art keywords
terminal
relay
data
picture
letters
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2013100625249A
Other languages
English (en)
Other versions
CN103327285B (zh
Inventor
加藤喜永
浅井贵浩
石上正之
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Publication of CN103327285A publication Critical patent/CN103327285A/zh
Application granted granted Critical
Publication of CN103327285B publication Critical patent/CN103327285B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40Support for services or applications
    • H04L65/403Arrangements for multi-party communication, e.g. for conferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80Responding to QoS
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44209Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application

Abstract

本发明涉及传送终端、传送系统以及显示控制方法,其目的在于用传送管理系统发送的信息数据代替中继装置未能传送的图像数据,显示到传送终端上,以便在未收到图像数据的状态下对方终端停止发言时,用户能够根据信息获悉对方只是暂停发言而并未离开会场。本发明的传送终端具备接收对方传送终端发送、并经过中继装置中继的图像数据的收信部以及将收到的图像数据表示的图像显示到显示部上的显示控制部,收信部在未收到中继装置发送的图像数据时,转而接收传送管理系统发送的短信数据,显示控制部用该短信数据表示的短信取代图像数据表示的图像,显示到显示部上。

Description

传送终端、传送系统、显示控制方法
技术领域
本发明涉及传送终端、传送系统以及显示控制方法,具体涉及传送终端通过中继装置以及传送管理系统与对方传送终端之间通信。其中的中继装置用于中继多个传送终端之间收发的图像数据,传送管理系统用于管理该多个传送终端。
背景技术
近年来,为了节约出差经费和时间,用于举行远距离电视会议的电视会议系统逐渐普及。该电视会议系统通过在多个电视会议终端之间直接收发图像数据以及声音数据来进行通信。
此外,目前正在普及一种在多个电视会议终端之间设置用于中继图像数据和声音数据的中继装置的电视会议系统。设有该中继装置的电视会议系统中采用映像符号技术,能够在发生一时性通信网络故障或传送终端处理能力不足时尽可能将通信故障抑止到最小程度。该映像符号技术中使用一种被称之为H.264/SVC(Scalable Video Coding)的映像编码技术规格(参见专利文献1:JP特表2010-506461号公报)。
然而,在通信网络因拥挤等造成传送容量下降的环境中,位于收信一方的电视会议终端难免发生图像数据传送延迟。针对这类问题,目前的解决方法是在电视会议终端之间仅收发声音数据,而中断图像数据的收发,以此保持通信的持续进行(参见专利文献2:JP特开2004-32305号公报)。这样,接收图像数据一方的电视会议终端将不再显示大量延迟带来的不舒畅感觉。在此,接收图像数据一方的电视会议终端在发送用于通信的图像数据时成为图像数据发送一方的终端。
但是,收信一方的电视会议终端在没有对方即送信一方的图像显示的状态下,如果对方停止发言,则收信一方的输出既没有图像也没有声音。在这种情况下,收信一方用户因看不见对方的图像(如对方的姿态)而无法判断送信一方的用户是离开会场,还是只是暂停发言而并未离开会场。
发明内容
针对上述问题,本发明提供以下技术方案。
首先本发明提供一种一种传送终端,其通过中继装置以及传送管理系统与对方传送终端通信,该中继装置用于中继在多个传送终端之间通信的图像数据,该传送管理系统用于管理该多个传送终端,所述传送终端的特征在于,具备收信部和显示控制部,该受信部用于接收所述对方传送终端发送、并经过中继装置中继的图像数据,该显示控制部将收到的所述图像数据所表示的图像显示到规定的显示部上,所述收信部在未收到所述中继装置发送的图像数据时,转而接收所述传送管理系统发送的规定的短信数据,所述显示控制部用所述短信数据表示的短信取代所述图像数据表示的图像,显示到所述显示部上。
其次,本发明提供一种传送系统,具有上述传送终端、所述中继装置以及所述传送管理系统、用于实现多个传送终端之间的通信。
最后,本发明提供一种用于传送终端的显示控制方法,该传送终端通过中继装置以及传送管理系统与对方传送终端通信,该中继装置用于中继在多个传送终端之间通信的图像数据,该传送管理系统用于管理该多个传送终端,所述显示控制方法的特征在于,具备收信步骤和显示控制步骤,所述传送终端在该受信步骤中,接收所述对方传送终端发送、并经过中继装置中继的图像数据,并在该显示控制步骤中将收到的所述图像数所表示的图像显示到规定的显示部上,所述收信步骤中还在未收到所述中继装置发送的图像数据时,转而接收所述传送管理系统发送的规定的短信数据,所述显示控制步骤还用所述短信数据表示的短信取代所述图像数据表示的图像,显示到所述显示部上。
根据以上所述,本发明的效果在于,用传送管理系统发送的信息数据代替中继装置未能传送的图像数据,在传送终端上显示,以便在未收到图像数据的状态下,当对方停止发言时,用户能够根据信息获悉对方用户只是暂停发言而并未离开会场。
附图说明
图1是本发明第一实施方式的传送系统的示意图。
图2是在传送系统中图像数据、声音数据、以及各种管理信息的通信状态示意图。
图3A、图3B、图3C是用于说明图像数据画质概念的示意图。
图4是涉及本发明实施方式的终端的外观图。
图5是本发明实施方式的硬件结构模块图。
图6是本发明实施方式的管理系统、中继装置以及程序供给系统的功能模块图。
图7是构成本发明实施方式的传送系统的各终端、装置以及系统的功能模块图。
图8是画面管理表的示意图。
图9是最终筛选部的功能模块图。
图10是初步筛选部的功能模块图。
图11是改变图像状态管理表的示意图。
图12是中继装置管理表的示意图。
图13是终端认证管理表的示意图。
图14是终端管理表的示意图。
图15是收信名单管理表的示意图。
图16是时域管理表的示意图。
图17是地址优先度管理表的示意图。
图18是传送速度优先度管理表的示意图。
图19是图像状态管理表的示意图。
图20是管理表示各个中继装置运行状态的状态信息的处理时序图。
图21是在传送终端之间准备开始通话的准备阶段中的处理时序图。
图22是筛选中继装置的处理时序图。
图23是筛选中继装置的处理流程图。
图24是实行中继装置筛选时的优先度点数计算状态示意图。
图25A和图25B是本发明实施方式的传送终端选择中继装置的处理时序图。
图26是在传送终端中选择中继装置的处理流程图。
图27是在传送终端之间收发图像数据和声音数据的处理时序图。
图28是一例显示器显示的画面的示意图。
图29是改变显示器上显示的画面的处理流程。
图30是显示内容发生变化后的画面管理表的示意图。
图31是显示器上显示的改变后的画面的示意图。
图32是短信制作、发送以及显示的处理时序图。
图33是短信制作处理流程图。
图34是显示短信的流程图。
图35是显示器上显示的第一显示形态画面得示意图。
图36是显示器上显示的第二显示形态的画面的示意图。
图37是显示器上显示的第三显示形态的画面的示意图。
标记说明:1传送系统,10传送终端(终端),11传送终端的收发信部,16最终筛选部,16a计测部,16b计算部,16c最终选择部,17显示控制部,18延迟检测部,19传送终端的存储及读取处理部,30中继装置,31中继装置的收发信部,32状态检测部,33图像状态确认部,34改变图像质量管理部,35图像质量更改部,50传送管理系统,51传送管理系统的收发信部,52终端认证部,53状态管理部,54终端抽取部,55终端状态取得部,56初步筛选部,56a选择用时域ID生成部,56b终端IP地址抽取部,56c初步选择部,56d优先度决定部,57时域管理部,58图像状态决定部,60延迟时间管理部,61短信制作部,70路由器,90程序提供系统,100保守系统,120显示器(为一例显示部),1000、3000、5000存储部,1001图像管理数据库(为一例图像管理部),3001改变图像状态管理数据库,5001中继装置管理数据库,5002终端认证管理数据库,5003终端管理数据库(为一例终端管理部),5004收信名单管理数据库,5005时域管理数据库(为一例时域管理部),5006优先度管理数据库,5007图像状态管理数据库(为一例图像状态管理部)。
具体实施方式
以下利用图1~图37来说明本发明的实施方式。
《整体结构》
图1是本发明实施方式的传送系统的示意图,图2是传送系统中图像数据、声音数据、以及各种管理信息的通信状态示意图。图3A、图3B、图3C是用于说明图像数据画质概念的示意图。
本实施方式针对用户利用电视会议终端等传送终端与对方用户通信举行电视会议的情况进行说明。说明中采用电视会议一词,但在一般情况下也称之为“视频会议”,两者意义相同。
首先,图1所示的传送系统1包括多个传送终端(10aa、10ab、…)、各个传送终端(10aa、10ab、…)用的显示器(120aa、120ab、…)、多个中继装置(30a、30b、30c、30d)、传送管理系统50、程序提供系统90、以及保守系统100。
多个终端10之间传送内容数据如图像数据以及声音数据。
在以下的说明中,将传送终端简称为终端,将传送管理系统简称为管理系统。在表示多个终端(10aa、10ab、…)中的任意一个终端时,称之为终端10,在表示多个显示器(120aa、120ab、…)中任意一个显示器时,称之为显示器120,在表示多个中继装置(30a、30b、30c、30d)中任意一个中继装置时,称之为中继装置30。进而,将要求开始电视会议的一方的终端称为要求终端,同时将接受要求及接收中继数据一方的终端称为收信终端。
如图2所示,在传送系统1中,要求终端10A与收信终端10B之间构筑经由管理系统50且用于各种管理信息通信的管理信息用时域sei。同时,要求终端10A与收信终端10B之间还构筑经由中继装置30、分别用于高分辨率图像数据、中分辨率图像数据、低分辨率图像数据、以及声音图像数据的4个时域,在此将这4个时域统称为图像·声音数据用时域sed。
在此说明本实施方式涉及的图像数据的图像分辨率。图3A~图3C是用于说明图像数据的画质的概念图。图3A显示以横向160像素、纵向120像素构成的基础图像即低分辨率图像,图3B显示以横向320像素、纵向240像素构成的中分辨率图像,图3C显示以横向640像素、纵向480像素构成的高分辨率图像。在通过狭窄带域时,只有形成基础图像的低分辨率图像数据构成的低画质图像数据受到中继,而通过较宽的带域时,形成基础图像的低分辨率图像数据以及中分辨率的图像数据构成的中等画质图像数据受到中继,进而在通过宽带域时,形成基础图像的低分辨率图像数据、中分辨率的图像数据、以及高分辨率图像数据构成的高质量图像数据均受到中继。与图像数据相比,声音数据的数据量较小,为此,经过通信网络2中的带域时,无论带域是狭窄带域、还是较宽带域、或是非常宽的带域,声音数据均受到中继。
图1所示的中继装置30在多个终端10之间中继内容数据。管理系统50统一管理终端10的登录认证、终端10的传送(通信)状态、收信名单以及中继装置30的通信状况等。图像数据的图像既可是动画也可以是静画,进而可以同时包括动画和静画双方图像。
多个路由器(70a、70b、70c、70d、70ab、70cd)用于选择图像数据和声音数据的最佳传送路径。在以下的说明中,用路由器70表示路由器(70a、70b、70c、70d、70ab、70cd)中任意一个路由器。
程序提供系统90中具备下述硬磁盘(HD,Hard Disk)204,其中保存用于让终端10实现各项功能,或者说使终端10起各种作用的终端用程序,并能够向终端10发送该终端用程序。该终端用程序用于实现终端10的各项功能。此外,程序提供系统90的HD204中还保存用于实现中继装置30的各项功能,或者说让中继装置10起到各项作用的中继装置用程序,并向中继装置30发送该中继装置用程序。进而,程序提供系统90的HD204中还保存用于实现管理系统50各种功能,或者说让管理系统50起各项作用的传送管理用程序,并且向管理系统50发送该程序。
保守系统100是用于对管理终端10、中继装置30、管理系统50、以及程序提供系统90中至少一个系统进行维修、管理、保守的计算机。例如,当保守系统100设置在国内,而终端10、中继装置30、管理系统50、或者程序提供系统90设置在国外时,保守系统100经由通信网络2,对终端10、中继装置30、管理系统50、以及程序提供系统90中任意一个系统或装置进行远程维修、管理、保守等保守业务。另外,保守系统100不经由网络,对终端10、中继装置30、管理系统50、以及程序提供系统90中任意一个系统实行机型编号、制造编号、销售站、保修检点、或者故障历史的管理等的保守服务。
终端(10aa、10ab、10ac、···)、中继装置30a、以及路由器70a通过LAN2a连接进行通信。终端(10ba、10bb、10bc、···)、中继装置30b、以及路由器70b通过LAN2b连接进行通信。LAN2a和LAN2b由包含路由器70ab在内的专用线2ab连接进行通信,并被设置在预定区域A内。例如区域A为日本,LAN2a设置在东京事业所内,LAN2b设置在大阪事业所内。
另一方面,终端(10ca、10cb、10cc、···)、中继装置30c、以及路由器70c通过LAN2c连接进行通信。终端(10da、10db、10dc、···)、中继装置30d、以及路由器70d通过LAN2d连接进行通信。LAN2c和LAN2d由包含路由器70f在内的专用线2cd连接,可以通信,并被设置在预定区域B内。例如区域B为美国,LAN2c设置在纽约事业所内,LAN2b设置在华盛顿DC事业所内。区域A和区域B之间通过路由器70ab、70cd经由英特网2i连接进行通信。
管理系统50以及程序提供系统90通过英特网2i与终端10以及中继装置30连接进行通信。管理系统50以及程序提供系统90既可设置在区域A或区域B,也可设置在除此以外的其他区域。
本实施方式中以LAN2a、LAN2b、专用线2ab、英特网2i、专用线2cd、LAN2c、以及LAN2d构成通信网络2。该通信网络2中不但可以有线通信,有些部分还可以实行WiFi(Wireless Fidelity)或蓝牙(Bluetooth,登录商标)等无线通信。
图1中的各个终端10、中继装置30、管理系统50、各路由器70、程序提供系统90、以及保守系统100的下面显示的4个数字简易表示一般的IPv4中的IP地址。例如,终端10aa的IP地址为“1.2.1.3”。除了IPv4以外,还可以使用IPv6,在此为了方便,用IPv4进行说明。
终端10之间的通信不仅可以在多个地点(事业所)之间,或同一地点的不同办公室之间,还可以在室内或室内外或室外之间进行。在室外时,可以用手机通信网络等无线通信。
《硬件结构》
下面说明本实施方式的硬件结构。图4是本实施方式的终端10的外观图。在以下的说明中,设终端10的长度方向与X轴方向平行,Y轴在水平面内垂直于X轴,Z轴同时垂直于X轴和Y轴(平行于铅直方向)。
如图4所示,终端10具有筐体1100、臂1200、以及照相机框架1300。其中,筐体1100的后壁1110上设有未图示的吸气面,该吸气面上有多个吸气孔,筐体1100的前壁1120的表面上设有排气面1121,该排气面1121上有多个排气孔。随着筐体1100中内藏冷却扇的驱动,外部空气经由终端10后方的未图示吸气面吸入,而后经由排气面1121从终端10的前方排出。筐体1100右侧壁面1130中设有集音孔1131,用于收集下述内藏型麦克风114发出的声音、物音、以及各种杂音。
在筐体1100的右侧壁面1130一方设置操作面板1150。该操作面板1150上设有将在以下叙述的操作键108(108a~108e)、电源开关109、以及报警灯119,同时还设有多个声音输出孔构成的声音输出面1151,用于通过将在以下叙述的内藏型扬声器115输出的输出声音。筐体1100的左侧壁面一方设置收纳部1160,该收纳部1160被形成为凹部,用于收纳臂1200以及照相机框架1300。筐体1100的右侧壁面1130上设置多个接口(1132a~1132c),该接口用于以导线电连接将在以下叙述的外设I/F118。另外在筐体1100的左侧壁面1140上设置未图示接口,该接口用于以显示器120用的导线120c电连接显示器I/F118。
在以下的叙述中,用操作键108表示操作键108a~108e中的任意操作键,并用接口1132表示接口1132a~1132c中的任意接口。
用铰链1210将臂1200安装在筐体1100上,该臂1200可相对于筐体1100在转动角度θ1的范围135°以内上下转动。图4显示转动角度θ1为90°时的状态。
照相机筐体1300中设有下述内藏型照相机112,可拍摄用户、文件资料或室内等景色。该照相机筐体1300上设有铰链1310,通过该铰链1300照相机筐体1300被安装到臂1200上。照相机框体1300相对于臂1200可在水平转动角度θ2的范围±180°内以及垂直转动角度θ3的范围±45°内作上下左右转动。图4所示状态下θ2为0°。
中继装置30、传送管理系统50、程序提供系统90、以及保守系统100的外观均与普通服务器及电脑的外观相同,在此省略外观说明。
图5是本发明实施方式的终端10的硬件结构。如图5所示,本实施方式的终端10包括:中央处理器(CPU,Central Processing Unit)101,用于控制终端10整体动作;只读存储器(ROM,Read Only Memory)102,其中保存用于CPU101启动的初始程序安装器(IPL,Initial Program Loader)等程序;随机存取存储器(RAM,Random Access Memory)103,用于作为CPU101的工作区域;闪存104,用于存储终端程序以及图像和声音等各种数据;固态驱动器(SSD,Solid State Driver)105,按照CPU101的指令控制闪存104中各种数据的读取以及写入;介质驱动器107,用于控制闪存等存储介质106的数据读取或写入(存储);操作键108,用于终端10的收信终端等时的选择操作;电源开关109,用于终端10的电源的接通与切断之间的转换;以及网络接口(I/F,Interface)111,用于利用通信网络2进行数据传送。
此外,终端10还包括:内藏型照相机112,用于根据CPU101的控制来拍摄被摄体并获得图像数据;拍摄元件I/F113,用于控制该照相机112的驱动;内藏型麦克风114,用于输入声音;内藏型扬声器115,用于输出声音;声音输入输出I/F116,用于根据CPU101的控制来处理麦克风114以及扬声器115之间的声音信号的输入输出;显示器I/F117,用于根据CPU101的控制来向外设显示器120传送图像数据;外设I/F118,用于连接各种外设;报警灯119,用于通知终端10发生的各种功能异常;以及,总线110,为如图2所示的电连接上述各个结构元件的地址总线或数据总线等。
显示器120是用液晶或有机电致发光形成的显示部,用于显示被摄体图像或操作用图标等,其通过导线120c连接显示器I/F117。导线120c既可以是模拟RGB(VGA)信号用导线,也可以是分量视频用的导线,还可以用高清晰度多媒体(HDMI,High-Definition Multimedia Interface)接口或数字视频接口(DVI,Digital Video interactive)信号用的导线。
照相机112包括透镜以及固体摄像元件,该固体摄像元件用互补金属氧化半导体(CMOS)或电荷耦合器件(CCD)等元件,将光转换为电荷,使被摄体图像(映像)电子化。
外设I/F118可以分别通过图4所示的插入框体1100上的连接口1132中的USB(Universal Serial Bus)导线等,电连接外设照相机、外设麦克风、以及外设扬声器等外部设备。在连接外设照相机时,按照CPU101的控制,相对于内藏型照相机,优先驱动外设照相机。与此相同,在连接外设麦克风或外设扬声器时,按照CPU101的控制,相对于内藏型麦克风114或内藏型扬声器115,优先驱动外设麦克风或扬声器。
存储介质106可在终端10上装卸。而且,该存储介质106如果是能够根据CPU101的控制来进行数据读取或写入的非易失性存储器,则不仅可以使用闪存104,还可以使用电可擦可编程ROM(EEPROM,Electrically Erasable andProgrammable ROM)等。
本实施方式的终端10设有照相机112、麦克风114以及扬声器115,但是本发明并不受此限制,只要至少设置照相机112、麦克风114以及扬声器115的其中一种外设便可。在这种情况下,通过在外设I/F上设置外设来取代未设置的设备,起到照相机112、麦克风114以及扬声器115的作用。
进而,上述终端用程序为可安装格式或可实行格式的文件,可以存放到上述存储介质106等计算机可读存储介质中出售。该终端用程序既可存放在闪存104中,也可保存在ROM102中。
图6是本发明实施方式的管理系统50的硬件结构图。管理系统50包括:CPU201,用于控制整个管理系统50的动作;ROM202,用于保存IPL等CPU201驱动用程序;RAM203,为CPU201的工作区域;HD204,用于保存传送管理用程序等各种数据;硬磁盘驱动器(HDD,Hard Disk Drive)205,用于按照CPU201的指令来控制HD204中各种数据的读取或写入;介质驱动器207,按照CPU101的指令来控制闪存等存储介质206中各种数据的读取以及写入;显示器208,用于表示光标、菜单、窗口、文字或图像等各种信息;网络I/F209,用于利用通信网络2的数据传送;键盘211,具有多个键,用于输入文字、数据、各种指示等;鼠标212,用于进行各种指示的选择或实行、处理对象的选择、光标移动等;CD-ROM驱动器214,用于控制可装卸的存储介质如光盘驱动器即CD-ROM213中的各种数据的读取或写入;以及,总线210,为如图3所示的电连接上述各结构元件的地址总线或数据总线等。
上述传送管理用程序为可安装格式或可实行格式的文件,可以存放到上述存储介质206或CD-ROM213等计算机可读存储介质中出售。该传送管理用程序既可存放在HD204中,也可保存在ROM202中。
中继装置30的硬件结构与上述管理系统50的硬件结构相同,为此省略说明。但是,HD204中保存用于控制中继装置30的中继装置用程序。在此,中继装置用程序也是可安装格式或可实行格式的文件,可以存放到上述存储介质206或CD-ROM213等计算机可读存储介质中出售。除了HD204,该中继装置用程序也可保存在ROM202中。
程序提供系统90的硬件结构也与上述管理系统50的硬件结构相同,为此省略说明。但是,HD204中保存用于控制程序提供系统90的程序提供系统用程序。在此,程序提供系统用程序也是可安装格式或可实行格式的文件,还可以存放到上述存储介质206或CD-ROM213等计算机可读存储介质中出售。除了HD204以外,该程序提供系统用程序,也可保存在ROM202中。
关于上述可装卸存储介质,例如还可构成为,如存放到可录光盘(CompaceDisk Recordable,CD-R)、数字多功能盘(Digital Versatile Disk,DVD)、蓝光盘等计算机可读的存储介质中来提供。
《功能结构》
下面说明本实施方式的功能结构。图7是构成本实施方式的传送系统1的各终端、装置以及系统的功能模块图。在图7中,终端10、中继装置30以及管理系统50之间通过通信网络2连接,进行数据通信。另外,图1所示的程序提供系统90以及保守系统100与电视会议的通信没有直接关系,因此图7中省略表示。
<终端功能结构>
终端10包括收发信部11、操作输入接受部12、登录要求部13、摄像部14、声音输入部15a、声音输出部15b、最终筛选部16、显示控制部17、延迟检测部18、存储及读取处理部19、抽取部20、声音判断部21、以及更改部22。CPU遵循从闪存104下载并展开到RAM103上的终端用程序,这些功能部是通过图5所示的结构元件中的任意元件执行CPU101的指令动作而得以实现的功能或实现功能的装置。终端10还具备以图5所示的RAM103以及以图5所示的闪存104构成的存储部1000。
画面管理表
存储部1000中具有图8所示的画面管理表,该画面管理表构成画面管理数据库(DB,Data Base)1001。画面管理表中相关保存画面编号以及终端ID,该画面编号(为一例画面确认信息,用于确认显示在显示器120上的画面)是用于分别确认显示器120上显示的多个画面,终端ID(为一例终端10的识别信息)用于识别发送该多个画面上显示的图像的图像数据的送信终端即终端10。图8中的1~8是用于确认显示器120上显示的画面的画面编号。
画面管理表中还相关保存用于确认显示器120上未显示的假想画面的画面编号和用于识别分配给这些未显示画面的图像的图像数据的送信终端即终端10的终端ID。图8中的补1~补3以及此后的编号是用于确认显示器120上未显示画面的画面编号。
终端的各功能部
下面利用图5和图7详细说明终端10的各功能部。在以下的说明中还包含该终端10与图5所示的构成元件中实现终端10各项功能的主要构成元件之间的关系。
按照图5所示CPU101的指令并通过网络I/F111,实现图7所示的终端10的收发信部11的功能,该收发信部11经由通信网络2与其他终端、装置或系统之间进行各种数据或信息的通信。在与需要通信的收信终端开始通信之前,该受发信部11通过管理系统50接受表示作为收信候补的各终端的状态的状态信息。该状态信息不仅表示各终端10的运行状态(在线状态还是离线状态),而且还进一步表示详细状态,例如除了表示在线状态以外,还进一步表示是否可以通话、是否正在通话、是否离开座位等。进而该状态信息中不仅表示各终端10的运行状态,而且还表示,如连接线与终端10之间断开、输出声音但不输出图像、或不输出声音(MUTE)等其他各种状态。以下说明一例状态信息所表示的运行状态。
通过按照图5所示CPU101的指令并通过操作键108和电源开关109,实现操作输入接受部12的功能。该操作输入接受部12接受用户的各种输入。例如,当用户输入图5所示的电源开关109接通时,图7所示的操作输入接受部12便收到电源接通要求,接通电源。
按照图5所示的CPU101的指令,实现登录要求部13的功能。在收到上述电源接通要求后,收发信部11经由通信网络2自动向管理系统50发送表示要求登录的登录要求信息、以及要求终端的当前的IP地址。而且,当用户输入电源开关109从接通状态转为断开时,收发信部11向管理系统50发送表示切断电源的状态信息,而后,操作输入接受部12使电源完全断开。这样,管理系统50便能够掌握终端10电源从接通改变为断开的状况。
按照图5所示CPU101的指令并通过照相机112和摄像元件I/F113,实现摄像部14的功能。摄像部14拍摄被摄体后,输出拍摄的图像数据。
按照图5所示CPU的指令并通过声音输入I/F116,实现声音输入部15a的功能,在用麦克风114将用户的声音转换为声音信号后,输入有关该声音信号的声音数据。按照图5所示CPU101发出的指令并通过声音输入输出I/F116,实现声音输出部15b的功能,向扬声器115输出有关声音数据的声音信号后,用扬声器115输出声音。
最终筛选部16实行最终筛选处理,从多个中继装置30中最终选定一个中继装置30,按照图5所示CPU101发送的指令,该最终筛选部16实现图9所示的计测部16a、计算部16b以及最终选择部16c的功能。
其中,计测部16a用于计测收发信部11每次收到的下述事先送信信息的收信日期及时刻。每当计测部16a计测收信日期及时刻时,计算部16b根据该收信日期及时刻与该事先送信信息内包含的送信日期及时刻之间的差值,来计算事先送信信息从发送到收到所要的时间(T)。最终由最终选择部16c选定一台中继装置,该中继装置为能够以计算部16b算出的所要时间中的最短所要时间来中继事先送信信息。
按照图5所示CPU101发送的指令并通过显示器I/F117,实现显示控制部17的功能,该显示控制部17用于控制下述收到的具有不同分辨率的图像数据的结合,并将结合后的图像数据送往显示器120。
而且,显示控制部17能够将从管理系统50收到的收信名单的信息以及各种短信送往显示器120,并在显示器120上显示收信名单以及各种短信。
进而,显示控制部17能够在显示器120上显示多个画面,这些画面分别显示多个对方终端10发送的图像数据所表示的图像。在显示图像或短信时,显示控制部17根据与图像数据或短信一起发送的终端ID,用图像管理表(参见图8)的画面编号确定显示器120中的画面,并将图像或短信显示到画面编号所对应的画面上。但对于画面管理表中表示显示器120上未显示画面的“补1”等画面编号,显示控制部17将短信显示到显示器120中与上述多个画面不同的其他画面上。
按照图5所示的CPU101的指令实现延迟检测部18的功能。延迟检测部18检测从其他终端10经由中继装置30送至的图像数据或声音数据的延迟时间(单位:ms)。具体为,延迟检测部18从预定的帧率30fps(frames per second)中减去当前时刻收到的图像数据的帧率来计算延迟时间。
按照图5所示CPU101发送的指令、或者按照图5所示CPU101发送的指令并通过SSD105,实现存储及读取处理部19的功能。该存储及读取处理部19将各种数据保存存储部1000中,并读取保存在存储部1000中的各种数据。该存储部1000中保存用于识别终端10的终端ID以及密码等数据。进而在与收信终端通话期间,该存储及读取处理部19还将每次收到的图像数据和声音数据重写到存储部1100中。其中,重写之前的图像数据的图像被显示到显示器120上,重写之前的声音数据被从麦克风115输出。
按照图5所示CPU101发送的指令实现抽取部20的功能。该抽取部20收到与短信数据一起由收发信部11发送的该短信数据的送信终端即终端10的终端ID时,基于该收到的终端10的终端ID,检索画面管理表(参见图8),抽取对应的画面编号。
按照图5所示CPU101发送的指令,实现声音判断部21的功能。声音判断部21检测收到的各声音数据对应的声音区间,判断是否存在具有有声区间的声音数据。可以利用公知技术实行该声音区间的检测(参见非专利文献:新美,声音认识,共立出版社,68~72页,1979)。
按照图5所示CPU101发送的指令,实现更改部22的功能。如果判断存在具有上述有声区间的声音数据,则更改部22更改画面管理表的内容,重新对与上述具有有声区间的声音数据一起送至的终端10的终端ID和终端10的制造商或销售商预先设定的画面编号进行相关。根据更改后的画面管理表内容,显示控制部17在显示器120中的多个画面上分别显示对应的画面。
本实施方式的终端ID以及将要在以下叙述的中继装置ID均采用能够毫无疑问地识别的语言、文字、标记、以及各种符号等识别信息表示。终端ID和中继装置ID还可以用上述语言、文字、标记以及各种符号中至少两个以上的组合构成的识别信息。
<中继装置的功能结构>
下面说明中继装置30的功能。中继装置30包括收发信部31、状态检测部32、图像状态确认部33、改变图像质量管理部34、图像质量更改部35、以及存储及读取处理部39。通过图6所示的结构元件中的任意元件按照CPU201的指令动作,来实现这些功能部的功能,在此,CPU201执行被展开到RAM203上的保存在HD204中的中继装置用程序。中继装置30还包括以图6所示的RAM203,以及/或者图6所示的HD204构成的存储部3000。
改变图像状态管理表
存储部3000中保存以图11所示的改变图像状态管理表构成的改变图像状态管理数据库3001。改变图像状态管理表中,接收经过中继装置30中继后的图像数据的收信终端即终端10的IP地址与图像状态相关保存。该图像状态信息中表示收信终端改变中继装置30中继的图像数据的画质、或者中断图像数据的中继。
中继装置的各项功能部
下面详细说明中继装置30的各功能部。在以下关于中继装置30的各功能部的说明中,还包括各功能部与图6所示的构成元件中用于实现中继装置30各功能的主要元件与中继装置30之间的关系。
按照图6所示CPU201发送的指令并通过网络I/F209,实现图7所示的中继装置30的收发信部31的功能。该收发信部31经由通信网络2与其它终端、装置、或系统之间进行各种数据或信息的通信。
状态检测部32的功能通过按照图6所示的CPU201的指令实现。状态检测部32检测具备该状态检测部32的中继装置30的运行状态。运行状态包括“在线”、“离线”、“正在通信”、或“暂停通信”。
按照图6所示CPU201发送的指令,实现图像状态确认部33的功能。图像状态确认部33用收信终端的IP地址作为检索键,来检索改变图像状态管理表(参见图11),并通过抽取对应的图像状态信息,来确认将要中继的图像数据的画质或者将要中断中继的图像数据。
按照图6所示的CPU201的指令,实现改变图像质量管理部34的功能。改变图像质量管理部34基于来自管理系统50的下述质量信息,来更改改变图像状态管理数据库3001的内容。例如,在终端ID为“01aa”的要求终端即终端10aa、与终端ID为“01db”的收信终端即终端10db之间举行电视会议并收发高画质图像数据,举行电视会议的期间中,因另一电视会议的要求终端即终端bb与收信终端即终端10ca之间经由通信网络2召开电视会议,造成收信终端即终端10db中发生图像数据收信延迟,此时,需要中继装置30将正在中继的图像数据的画质从高画质降低到中画质。在这种情况下,根据表示中画质的质量信息来改变改变画质管理数据库3001的内容,将中继装置30中继的图像数据的质量从高画质降低到中画质。
按照图6所示CPU201发送的指令,实现图像质量更改部35的功能。图像质量更改部35基于上述经过更改的改变图像状态管理数据库3001的内容,改变送信终端10发送的图像数据的画质、或者中断图像数据的中继。
按照图6所示CPU201发送的指令并通过HDD205,实现存储及读取部39的功能。存储及读取部39实行存储部3000中各种数据的保存处理或读取处理。
<管理系统的功能结构>
管理系统50包括收发信部51、终端认证部52、状态管理部53、终端抽取部54、终端状态取得部55、初步筛选部56、时域管理部57、图像状态决定部58、存储及读取处理部59、延迟时间管理部60以及短信制作部61。CPU201执行被从HD204的保存中展开到ROM202上的管理系统用程序,通过图6所示各结构元件中的任意元件按照CPU的指令动作,实现这些功能部的功能。管理系统50包括以图6所示的HD204构成的存储部5000。
中继装置管理表
存储部5000中具有图12所示的以中继装置管理表构成的中继装置管理数据库5001。该中继装置管理表中,每个中继装置30的中继装置ID与各自的运行状态、管理系统50收到的表示运行状态的状态信息的收信日期及时间、中继装置30的IP地址、以及中继装置30中的最大数据传送速度(单位:Mbps)相关保存。例如,在图12所示的中继装置管理表中,中继装置ID为“111a”的中继装置30a的运行状态为“在线”,管理系统50收到状态信息的收信日期及时间为“2009年11月10日13点钟00分”,该中继装置30a的IP地址为“1.2.1.2”,该中继装置30a中的最大数据传送速度为“100Mbps”。
终端认证管理表
存储部5000中还具有如图13所示的以终端认证管理表构成的终端认证管理数据库5002。该终端认证管理表中将所有受管理系统50管理的终端10的终端ID分别与各自的密码相关保存。例如,图13所示的终端认证管理表中终端10aa的终端ID为“01aa”,密码为“aaaa”。
终端管理表
存储部5000中还具有如图13所示的以终端管理表构成的终端管理数据库5003。该终端管理表中将每个终端10的终端ID与该终端10作为收信终端时的终端名称、各个终端10的运行状态、与其他终端之间通信状态、管理系统50收到的下述登录要求信息的收信日期及时间、以及终端10的IP地址相关保存。例如,如图14所示的终端管理表中,终端ID为“01aa”的终端10aa的终端名称为“日本 东京事业所AA终端”,运行状态为“在线(可以通信)”,管理系统50收到登录要求信息的收信时间为“2009年11约10日13点40分”,该终端10aa的IP地址为“1.2.1.3”。
收信名单管理表
存储部5000中还具有如图15所示的以收信名单管理表构成的收信管理数据库5004。在该收信名单管理表中,将提出开始电视会议通信要求的要求终端的终端ID与所有作为收信候补终端登记的收信终端的终端ID相关保存。例如,图15所示的收信名单管理表中,可以接受终端ID为“01aa”的要求终端即终端10aa要求开始电视会议通信的收信候补终端有以下多个终端:终端ID为“01ab”的终端10ab、终端ID为“01ba”的终端10ba以及终端ID为“01bb”的终端10bb等终端。可以更新收信名单管理表,根据从任意要求终端送往管理系统50的要求,增加或删除收信终端的候补。
时域管理表
存储部5000中还具有如图16所示的以时域管理表构成的时域管理数据库5005。该时域管理表中将每个选择中继装置30时使用的选择用时域ID与中继图像数据以及声音数据的中继装置30的中继装置ID、要求终端的终端ID、收信终端的终端ID、收信终端收到图像数据时的收信延迟时间(单位:ms)、以及管理系统50收到由收信终端发送的表示该延迟时间的延迟信息的收信日期及时间相关保存。例如图16所示的时域管理表中显示,在以时域ID为“se1”的时域中,选择的中继装置30a的中继装置ID为“111a”,该中继装置30a在终端ID为“01aa”的要求终端10aa、与终端ID为“01db”的收信终端10db之间中继图像数据以及声音数据,收信终端10db在“2009年11月10日14点00分”收到图像数据,该图像数据收到时的延迟时间为200(ms)。如果是在两个终端之间举行电视会议,则除了上述收信终端以外还可以根据要求终端发送的延迟信息来管理延迟信息的收信日期及时间。但是,在三个以上的终端之间举行电视会议的情况下,则需要根据接收图像数据以及声音数据的收信终端发送的延迟信息来管理延迟信息的收信日期及时间。
地址优先度管理表
存储部5000中保存以图17所示的地址优先度管理表构成的地址优先度管理数据库5006。该地址优先度管理表中,将任意的终端10以及中继装置30的点地址的异同与地址优先度相关保存,即普通IPv4中的IP地址中的四组点地址(Dot Address)部分中的“同”越多,地址优先度的点数越高。例如,在图17所示的地址优先度管理表中,对于从点地址上位到下位之间有三个值相同的IP地址,其地址优先度的点数为“5”。而对于点地址从上位到下位之间有两个值相同的IP地址,其地址优先度的点数为“3”。此时,最下位的点地址的值是否相同与优先度无关。进而,对于点地址的最上位的值相同,而自最上位起第二个值不同的IP地址,其地址优先度的点数为“1”。此时,自最上位起第三个点地址以及最下位的点地址的值是否相同与优先度无关。对于点地址最上位的值不同的IP地址,其地址优先度的点数为“0”。此时,自最上位起第二、第三、以及最下位的点地址的值是否相同与优先度无关。
传送速度优选度管理表
存储部5000中的优先度管理数据库5006还具有如图18所示的传送速度优先度管理表。该传送速度优先度管理表中,将最大数据输送速度与输送优先度相关保存,即中继装置30中最大数据传送速度的值越大,其传送速度优先度的点数越高。例如,在图18所示的传送速度优先度管理表中,当中继装置30中最大数据传送速度为1000Mbps以上时,传送速度的优先度点数为“5”。而当中继装置30中最大数据传送速度为100Mbps以上且小于1000Mbps时,则传送速度的优先度点数为“3”。而当中继装置30中最大数据传送速度为10Mbps以上且小于100Mbps时,传送速度的优先度点数为“1”。中继装置30中最大数据传送速度为小于10Mbps时,传送速度的优先度点数为“0”。
图像状态管理表
存储部5000中还具有以图19所示的图像状态管理表构成的图像状态管理数据库5007。该图像状态管理表中将终端10收到图像数据的延迟时间(单位:ms)与图像状态信息相关保存。具体为,要求终端或收信终端收到图像数据的延迟时间(单位:ms)越长,中继装置30中继的图像数据的画质(图像质量)就越被降低。如果延迟时间十分长(如500ms以上),则将图像数据的收信延迟时间与表示中断图像数据中继的信息相关保存,以使得中继装置30中断图像数据的中继。
<管理系统的各项功能结构>
下面详细说明管理系统50的各个功能部。在以下关于管理系统50的各个功能部的说明中,还包括各个功能部与图6所示的各个构成元件中用于实现管理系统50的各功能部的主要构成元件之间的关系。
按照图6所示CPU201发送的指令并通过网络I/F209,实现收发信部51的功能,该收发信部51经由通信网络2与其他终端、装置或系统之间进行各种数据或信息的通信。
按照图6所示CPU201发送的指令,实现终端认证部52的功能。该终端认证部52以收发信部51收到的登录要求信息中包含的终端ID以及密码作为检索键,来检索存储部5000中的终端认证管理数据库5002,进行终端认证,判断终端认证管理表中是否保存相同的终端ID以及密码。
按照图6所示CPU201发送的指令,实现状态管理部53的功能。该状态管理部53为了管理要求登录的要求终端的运行状态,将该要求终端的终端ID、运行状态、管理系统50收到登录要求信息的日期及时间、以及该要求终端的IP地址相关后保存。当终端10的用户将终端10的电源开关109从接通转换到切断时,状态设定部53a根据该终端10发送的表示切断电源的状态信号,将终端管理表(参见图14)中表示该终端的运行状态从在线改为离线。
按照图6所示CPU201发送的指令,实现终端抽取部54的功能。该终端抽取部54以要求登录的要求终端的终端ID为检索键,来检索收信名单管理表(参见图15),并读取能够与要求终端通话的收信终端的候补的终端ID,抽取终端ID。终端抽取部54还以要求登录的要求终端的终端ID为检索键,检索收信名单管理表(参见图15),抽取以上述要求终端作为收信终端候补登录终端ID时的其他要求终端的终端ID。
按照图6所示CPU201发送的指令,实现终端状态取得部55的功能。该终端状态取得部55以上述终端抽取部54抽取的收信终端候补的终端ID为检索键,来检索终端管理表(参见图14),读取每个上述终端抽取部54抽取的终端ID所对应的终端的运行状态。这样,终端状态取得部55取得能够与要求登录的要求终端进行通话的收信终端候补的运行状态。终端状态取得部55还以上述终端抽取部54抽取的终端ID为检索键,来检索终端管理数据库5003,取得要求登录的要求终端的运行状态。
按照图6所示CPU201发送的指令,实现初步筛选部56的功能。初步筛选部56在中继装置30的最终选定之前进行初步选择处理,以帮助实行选定处理,从多个中继装置30中最终选定一个中继装置30。为此,初步筛选部56根据图5所示的CPU201发送的指令来实现图10所示的选择用时域ID生成部56a、终端IP地址抽取部56b、初步选择部56c以及优先度决定部56d的功能。
其中,选择用时域ID生成部56a生成用于中继装置30时域选择的时域ID。终端IP地址抽取部56b根据要求终端发送的开始要求信息中包含的要求终端的终端ID以及收信终端的终端ID,来检索终端管理表(参见图14),抽取分别与各终端10对应的IP地址。初步选择部56c从中继装置管理表(参见图12)中保存的中继装置30内,选择运行状态为“在线”的中继装置30的中继装置ID,从而选定中继装置30。
初步选择部56c根据上述终端IP地址抽取部56b抽取的要求终端以及收信终端的IP地址,检索中继装置管理表(参见图12),确认上述选择的每个中继装置30的IP地址的点地址对应的上述要求终端的IP地址的点地址是否与收信终端的IP地址的点地址相同。进而,初步选择部56c将每个中继装置30的地址优先度的点数中相比于终端10的地址优先度点数高的点数、与传送速度优选度的点数合计,并选择该合计点数较高的上位2个中继装置30,用以进一步选择中继装置30。在此,本实施方式选择了点数最高的两个中继装置30,但本发明并不受此限制,如果有利于中继装置30筛选,还可以选择三个以上点数最高的中继装置30。
优先度决定部56d对照优先度管理表(参见图17),决定上述初步选择部56c查找到的每个中继装置30的地址优先度的点数。此外,优先度决定部56d还根据中继装置管理表(参见图12)中保存的各中继装置30的最大数据传送速度,来检索优先度管理表(参见图18),决定上述初步选择部56c在第一次筛选处理中选中的各中继装置30的传送速度优先度的点数。
按照图6所示CPU201发送的指令,实现时域管理部57的功能。时域管理部57将时域ID生成部56a生成的时域ID、要求终端的终端ID、以及收信终端的终端ID相关保存到存储部5000的时域管理表(参见图16)。时域管理部57还在时域管理表中将每个时域ID与最终选定的终端10的一个中继装置30的中继装置ID。
图像状态决定部58以上述延迟时间为检索键,来检索图像状态管理表(参见图19),并抽取对应的图像数据的图像状态,用以决定由中继装置30中继的图像数据的画质,或者决定中断中继装置的图像数据中继。
按照图6所示CPU201发送的指令并通过HDD205,实现存储及读取处理部59的功能。存储及读取处理部59实行存储部5000中各种数据的保存处理或读取处理。
按照图6所示CPU201发送的指令并通过HDD205,实现延迟时间管理部60的功能。延迟时间管理部60以上述收信终端的IP地址为检索键,来检索终端管理表(参见图14),抽取对应终端ID。进而,将所述延迟信息表示的延迟日期及时间保存到时域管理数据库5005中的时域管理表(参见图16)中上述抽取的终端ID的记录项中的延迟时间区域部分上。
短信制作部61以收发信部51收到的延迟信息为检索键,检索图像状态管理表(参见图19),抽取对应的图像状态信息,当该图像状态信息所示的更改内容表示中断图像数据的中继时,制作表示没有收到图像数据或者仅收到声音数据的信息。具体来说,短信制作部61以收发信部51收到延迟信息时得到的收信终端为检索键,检索终端管理表(参见图14),抽取对应的终端10的终端ID(作为一例第二识别信息)。而后,短信制作部61以该终端ID为检索键,检索时域管理表(参见图16),抽取相同时域中的对应终端ID(作为一例第一识别信息)。进而,短信制作部61以对应终端ID为检索键,检索终端管理表(参见图14),抽取对应终端ID的终端名称信息。而后,短信制作部61将用该终端名称信息表示的终端名称包含到上述信息之中。
《处理和动作》
以上说明了本实施方式的传送系统1的结构以及功能,下面参考图20~图27来说明本实施方式的传送系统1的处理方法。图20是管理系统50收到来自中继装置并表示各个中继装置30状态的状态信息的管理处理时序图。图20是在多个终端10之间开始通信准备阶段的处理时序图。图21是中继装置的筛选处理时序图。图22是中继装置30的筛选处理流程图。图23是中继装置30选择处理时优先度点数计算状态的示意图。图24是终端10选择中继装置30的选择处理时序图。图25是终端选择中继装置30的选择处理流程图。图26是在终端之间图像数据以及声音数据的通信处理时序图。
首先利用图20说明管理系统50收到来自中继装置的表示各个中继装置30状态的状态信息的管理处理。首先,图7所示的各个中继装置30中的状态检测部32定期检测各自的中继装置的运行状态(S1-1至S1-4)。而后,为了管理系统50实时管理各中继装置30的运行状态,各中继装置30的收发信部31经由网络2向管理系统50定期发送各自的状态信息(S2-1至S2-4)。这些状态信息包含各中继装置30的中继装置ID、以及该中继装置ID所对应的中继装置30的状态检测部32检测到的运行状态。在本实施方式中,中继装置30a、30b、30d正常运行处于“在线”,而中继装置30c虽然在运行之中,但是由于实行中继装置30c的中继动作发生程序性故障,处于“离线”。
接着,管理系统50的收发信部51接收各个中继装置30发送的状态信息,并通过存储及读取处理部59将对应于每个中继装置ID的状态信息保存到存储部5000中的中继装置管理表(参见图12)中进行管理(步骤3-1至3-4)。这样,在如图12所示的中继装置管理表中,每个中继装置ID都保存“在线”、“离线”、或“故障”中任一运行状态。此外还保存每个中继装置ID对应的管理系统50收到状态信息的收信日期及时间。进而,如果中继装置30没有发送状态信息,则在图12所示的中继装置管理表的各条记录项中用于记录运行状态的区域部分以及记录收信日期及时间的区域部分为空白、或记录上一次收信时的运行状态以及收信日期及时间。
下面利用图21说明在终端10aa和终端10db之间在开始通话之前的准备阶段中收发各管理信息的通信处理。图21中所有管理信息的通信均通过图2所示的管理信息用时域sei。
首先,当用户指示图5所示的电源开关109接通后,图7所示操作输入接受部12收到电源接通指令,接通电源(步骤S21)。而后,登录要求部13在收到上述电源接通指令时,收发信部11经由通信网络2向管理系统50自动发送表示要求登录的登录要求信息(步骤S22)。该登录要求信息包含提出登录要求的终端10aa本身的终端ID以及密码。这些终端ID以及密码是通过存储及读取处理部19从存储部1000中读取并送往收发信部11的数据。在终端10aa向管理系统50发送登录要求信息时,作为收信一方的管理系统50可以掌握送信一方的终端10aa的IP地址。
接着,管理系统50的终端认证部52将经由收发信部51收到的登录要求信息中所包含的终端ID以及密码作为检索键进行终端认证(步骤S23),检索存储部5000中的终端认证管理表(参见图13),判断终端认证管理表中是否保存了相同的终端ID以及密码。当该终端认证部52确认到已经保存相同的终端ID以及密码,并判断登录要求出自具有正当利用权限的终端10时,状态管理部53将终端10aa的终端ID、运行状态、上述登录要求信息的收信日期及时刻以及终端10aa的IP地址相关保存到终端管理表(参见图14)中(步骤S24)。这样,在图14所示的终端管理表中便相关保存了终端1D“01aa”、运行状态“在线(可以通信)”、收信日期及时间“2009.11.10.13:40”以及终端10aa的IP地址“1.2.1.3”。
而后,管理系统50的收发信部51将表示上述终端认证部52的认证结果的认证结果信息经由通信网络2送往提出上述登录要求的要求终端即终端10aa(步骤S25)。以下继续说明终端认证部52判断终端具有正当利用权限时的情况。
管理系统50的终端抽取部54以发出登录要求的终端10aa的终端ID“01aa”作为检索键,检索收信名单管理表(参见图15),读取能够与要求终端10aa通信的收信终端候补的终端ID(步骤S26)。在此,与要求终端即终端10aa的终端ID“01aa”相对应的收信终端10ab、10ba、10db各自的终端ID分别为“01ab”、“01ba”、“01db”。
而后,终端状态取得部55以上述终端抽取部54抽取的收信终端后部的终端ID(01ab、01ba、01db)为检索键,检索终端管理表(参见图14),读取上述终端抽取部54抽取的每个终端ID的运行状态分别为“离线”、“在线(暂停)”、“在线(正在通信)”,从而取得作为收信候补的终端(10ab、10ba、10db)的运行状态(步骤S27)。
接着,收发信部51将包含上述步骤S27中作为检索键使用的终端ID“01ab”、“01ba”以及“01db”和各自与这些终端ID相对应的收信终端(10ab、10ba、10db的运行状态“离线”、“在线(暂停)”以及“在线(正在通信)”,通过通信网络2送往要求终端10aa(步骤S28)。这样,要求终端10aa便掌握了能够与其通信的收信终端候补10ab、10ba以及10db的现时运行状态分别为“离线”、“在线(暂停)”以及“在线(正在通信)”。
而后,管理系统50的终端抽取部54以要求登录的要求终端10aa的终端ID“01aa”为检索键,检索收信名单管理表(参见图15),抽取以上述要求终端10aa的终端ID“01aa”为收信终端候补来登记的其他要求终端的终端ID(步骤S29)。图15显示的收信终端名单管理表中被抽取的其他要求终端的终端ID为“01ab”、“01ba”以及“01db”。
而后,管理系统50的终端状态取得部55以上述要求登录的要求终端10aa的终端ID“01aa”为检索键,检索终端管理表(见图14),取得要求终端10aa的运行状态(步骤S30)。
而后,收发信部51向上述步骤S29中抽取的终端ID(01ab、01ba、01db)的终端(10ab、10ba、10db)中运行状态在终端管理表(见图14)中被表示为“在线”的终端10ba、10db发送收信终端状态信息(步骤S31-1、S31-2),该收信终端状态信息中包含步骤S30中取得要求终端10aa的终端ID“01aa”和运行状态“在线(可以通话)”。在向终端(10ba、10db)发送该终端的状态信息时,收发信部51基于各终端ID(01ba、01db),参考图14所示的终端管理表中记录的终端的IP地址。这样,便向以要求登录的要求终端10aa为收信终端进行通信的其他收信终端(10ba、10db)传送上述要求终端10aa的终端ID为“01aa”以及运行状态为“在线(可以通信)”。
关于其他终端10,与上述步骤S21相同,用户设定图6显示的电源开关109接通后,图7所示的操作输入接受部12收到电源接通指示,实行与上述步骤S22~S31-1、S31-2相同的处理,在此不再重复说明。
接着,利用图22说明中继装置30的筛选处理。图22中的各种管理信息均以图2所示的管理信息用时域sei来发送或接收。在本实施方式中,根据上述步骤32中收到的收信终端的状态信息获悉,作为收信终端候补的终端10中动作状态为在线的终端有终端10ba以及10db,要求终端10aa至少能够与该终端10ba以及终端10db的其中之一通信。以下说明要求终端10aa的用户选择开始与收信终端10db通信的情况。
首先,用户按动图5所示的操作键108并选择终端10db后,图7所示的操作输入接受部12便收到与收信终端10db开始通话的要求(步骤S41)。而后,要求终端10aa的收发信部11向管理系统50发送开始要求信息(步骤S42),该开始要求信息中包含要求终端10aa的终端ID“01aa”以及收信终端10db的终端ID“01db”,并且表示希望开始通信。由此,管理系统50的收发信部51在收到上述开始要求信息后,能够掌握发送信息的要求终端10aa的IP地址“1.2.1.3”。
而后,状态管理部53根据开始要求信息中包含的要求终端10aa的终端ID“01aa”以及收信终端10db的终端ID“01db”,改写终端管理数据库5003中的终端管理表(参见图14),将其中包含上述终端ID“01aa”和“01db”各自的记录中表示动作状态的区域部分均改为“正在通信”(步骤S43)。此时,要求终端10aa与收信终端10db之间虽然还未开始通信,但已处于通信状态,为此,如果出现其他终端10要求与要求终端10aa或者收信终端10db通话,将会输出表示处于正在通信状态的声音或显示。
以下说明实行选择中继装置30的时域的处理。首先,图10所示的选择用时域ID生成部56a生成选择用时域ID(步骤S44),该选择用时域ID用于识别实行选择中继装置30的时域。而后,时域管理部57将上述步骤S44中生成的时域ID“se1”、要求终端10aa的终端ID“01aa”、以及收信终端10db的终端ID“01db”相关保存到存储部5000的时域管理表(参见图16)中进行管理(步骤S45)。
而后,管理系统50的初步筛选部56根据中继装置管理数据库5001、终端管理数据库5003、以及优先度管理数据库5006,进行中继装置30的初步选择,选择用于在要求终端10aa与收信终端10db之间进行中继的中继装置30(步骤S46)。
在此利用图10以及图23进一步详细说明步骤S46中的处理。首先,图10所示的终端IP地址抽取部56b根据要求终端10aa发送的开始通信信息中包含的要求终端10aa的终端ID“01aa”、以及收信终端10db的终端ID“01db”,检索终端管理表(参见图14),抽取分别对应于终端10aa和终端10db的IP地址“1.2.1.3”和“1.3.2.4”(步骤S46-1)。
接着,初步选择部56c从中继装置管理表(参见图12)中选择动作状态为“在线”的中继装置30a、30b、30d的中继装置ID(111a、111b、111d(步骤S46-2)。初步选择部56c根据上述步骤S46-1中抽取的要求终端10aa的IP地址“1.2.1.3”以及收信终端“1.3.2.4”,检索中继装置管理表(参见图12),确认上述步骤S46-2中选择的每个中继装置30a、30b、30d的IP地址(1.2.1.2、1.2.2.2、1.3.2.2)的点地址是否与上述要求终端10aa以及收信终端10db的IP地址“1.2.1.3”和“1.3.2.4”的点地址相同(步骤S46-3)。
接着,优先度决定部56d参考优先度管理表(参见图17),决定被在上述步骤46-3中确认的每个中继装置30a、30b、30d的地址优先度点数(步骤S46-4)。图24显示以表格表示的该决定处理的结果。图24是显示在进行中继装置30筛选处理时的优先度的点数的计算状态的图。该图24中显示每个中继装置ID的地址优先度点数、传送速度优先度点数、以及综合点数。地址优先度点数被表示为相对于要求终端10aa的点数和相对于收信终端10db的点数。综合点数为两个地址优先度点数中较大一方点数与传送速度优先度点数的合计。
本实施方式中,对比中继装置30a的IP地址“1.2.1.2”和要求终端10aa的IP地址“1.2.1.3”,其结果为“同.同.同.异”,为此如图24所示,地址优先度点数为“5”。对比中继装置30a的IP地址“1.2.1.2”和收信终端10db的IP地址“1.3.2.4”,其结果为“同.异.异.异”,因此,地址优先度点数为“1”。对比中继装置30b的IP地址“1.2.2.2”和要求终端10aa的IP地址“1.2.1.3”,为“同.同.异.异”,因此,地址优先度点数为“3”。对比中继装置30b的IP地址“1.2.2.2”和收信终端10db的IP地址“1.3.2.4”,为“同.异.同.异”,因此,地址优先度点数为“1”。进而,对比中继装置30d的IP地址“1.3.2.2”和要求终端10aa的IP地址“1.2.1.3”,为“同.异.异.异”,因此,地址优先度点数为“1”。对比中继装置30d的IP地址“1.3.2.2”和收信终端10db的IP地址“1.3.2.4”,为“同.同.同.异”,因此,地址优先度点数为“5”。
下面返回图23。优先度决定部56d以中继装置管理表(参见图12)中保存的中继装置30的最大数据传送速度来检索优先度管理表(参见图16),决定每个上述步骤S46-2的第一次筛选处理中经过筛选得到的中继装置30a、30b、30d的传送速度优先度点数(步骤S46-5)。本实施方式中的中继装置30a的最大数据传送速度为图12所示的100(Mbps),因而参考图18所示的传送速度优先度可知,中继装置30a的传送速度优先度点数为3。与此相同,中继装置30b的最大数据传送速度的计算结果为1000(Mbps),因而其传送速度优先度点数为5。进而,中继装置30d的最大数据传送速度的计算结果为10(Mbps),其传送速度优先度点数为1。
而后,初步选择部56c选择中继装置30a、30b、30d中综合点数较高的两个上位中继装置30(步骤S46-6),该综合点数为相对于终端10aa以及10db的地址优先度点数之中较高一方的点数和传送速度优先度点数的合计。在本实施方式中如图24所示,各中继装置ID(111a、111b、111d)对应的综合点数分别为8、8、6,因此,选择中继装置ID分别为“111a”和“111b”的中继装置30a和30b。
上述步骤S46的筛选处理结束后,图7所示的收发信部51经由通信网络2向收信终端10db发送中继装置筛选信息(步骤S47),该信息用于传达上述被选中的中继装置30的数量,其中包括在上述步骤S46中被选中的中继装置30的数量“2”、要求终端10aa的终端ID“01aa”、以及上述时域ID“se1”。由此,终端10db在选择用时域ID“se1”的时域的实行过程中,管理系统50不但能够掌握中继装置30的数量、以及是哪一个终端10要求开始通话,而且还能够掌握发送中继装置筛选信息的管理系统50的IP地址“1.1.1.2”。
而后,终端10db从收发信部11经由通信网络2向管理系统50发送表示结束上述中继装置筛选信息接收的收信结束信息(步骤S48)。该收信结束信息中包含时域ID“se1”。由此,管理系统50不但能够掌握在时域ID为“se1”的时域中实行的中继装置数量的传达结束,而且还能够掌握发送信息的收信终端10db的IP地址“1.3.2.4”。
下面参考图25以及图26说明收信终端即终端10db选择中继装置30的处理。图25中各种管理信息均通过管理信息用时域sei1来收发。
首先,管理系统50在开始电视会议的通信之前分别向在上述步骤S46中选定的中继装置30a、30b发送事先中继要求信息(步骤S61-1、S61-2)。该事先中继要求信息表示要求中继,其中包括时域ID“se1”、要求终端10aa的IP地址“1.2.1.3”、以及送信终端即终端10db的IP地址“1.3.2.4”。这样,各个中继装置30a、30b便不但能够掌握是哪个时域的事先中继要求信息、以及是哪一个要求终端和哪一个收信终端,而且还能够掌握发送事先中继要求信息的管理系统50的IP地址“1.1.1.2”。
而后,各个中继装置30a、30b分别从收发信部31经由通信网络2向上述步骤S61-1、S61-2中掌握的要求终端即终端10aa发送事先送信要求信息(步骤S62-1、S62-2),该事先送信要求信息表示需要要求终端即终端10aa在开始通信之前向各个中继装置30a、30b即其自己发送包含下述的ping(PacketInternet Groper)的事先送信信息。该事先送信要求信息中包含时域ID“se1”。这样,在以时域“se1”实行的中继装置30选择处理中,要求终端即终端10aa不但能够掌握向各个中继装置30a、30b发送了事先送信信息,而且还掌握发送事先送信要求的各个中继装置30a、30b的IP地址“1.2.1.2”以及“1.2.2.2”。
至于为什么管理系统50不是直接将收信终端即终端10db的IP地址通知给要求终端,而是如上步骤S61-1中所述,将收信终端10db的IP地址通知给中继装置30a,而后如上步骤S61-2中所述,由中继装置30要求要求终端即终端10aa向其本身即中继装置30发送事先送信要求信息,其目的在于确保安全,避免各个终端10之间获悉其他终端10的IP地址。
接着,要求终端10aa的接收信部11经由通信网络2向各个中继装置30a、30b发送事先送信信息(步骤S63-1、S63-2)。该事先送信信息先于图像数据以及声音数据发送,并取代图像数据以及声音数据经由各个中继装置30a、30b被送往收信终端10db,用于测定从要求终端10aa发送开始、到收信终端10db接收为止的所要时间。该事先送信信息包括以下内容:用于确认要求终端10aa、中继装置30a、30b、以及收信终端10db之间已连接就绪可以进行通信的ping、从要求终端10aa发送的事先送信信息的发送日期及时间、以及时域ID“se1”。这样,各个中继装置30a、30b不但能够掌握在时域ID为“se1”的时域的实行中发送了事先送信信息,而且还掌握发送该事先送信信息的要求终端10aa的IP地址为“1.2.1.3”。
接着,各个中继装置30a、30b对上述步骤S61-1、S61-2收到的事先中继要求信息中所包含的收信终端10db的IP地址“1.3.2.4”进行上述事先送信信息的中继(步骤64-1、S64-2)。这样,收信终端10db在实行时域ID“se1”的时域中不但能够掌握事先送信信息,而且还能够掌握发送即中继该事先送信信息的中继装置30a、30b的IP地址“1.2.1.2”、“1.2.2.2”。
接着,收信终端即终端10db的最终筛选部16根据事先送信信息最终选定一个中继装置30,该中继装置30用于中继电视会议通话中的图像数据以及声音数据(步骤S65)。
在此,利用图9以及图26进一步详细说明步骤S65。首先,图9所示的最终筛选部16的计测部16a对每个经由中继装置30a、30b中继的事先送信信息被收信终端10db的收发信部11收到的收信日期及时间(步骤S65-1)进行计时。而后,计算部16b根据上述计时得到的收信日期及时间与上述事先送信信息中所包含的送信日期及时间之间的差,计算每个已完成收信日期及时间计测的事先送信信息从发出到收到所要时间(步骤S65-2)。接着,最终选择部16c在时域ID“se1”的时域的实行中,判断是否收到与预定进行中继的中继装置30的个数“2”数量相当的所有事先送信信息(步骤S65-3)。如果还未全部收到(否),则最终选择部16c判断收信终端10db在收到事先收信信息后经过的时间是否超过预定时间(在此为1分钟)(步骤S65-4)。如果没有超过预定时间(否),则返回上述步骤65-1。而如果在上述步骤S65-3中判断已收到所有事先送信信息(是),或者,上述S65-4中判断已超过了预定时间(是),则最终选择部16c选择一个中继装置30,在计算部16b算出的各中继装置中继事先送信信息所要时间中该中继装置30所要时间最短(步骤S65-5)。在本实施方式中,用中继装置30a中继事先送信信息所要的送信与收信之间的时间要短于用中继装置30b中继事先送信信息所要的时间,因此,选择中继装置30a。
而后,收信终端10db的收发信部11经由通信网络2向管理系统50发送选择信息,该选择信息表示已选定中继装置30a(步骤S66),其中包括时域ID“se1”、以及被选的中继装置30a的中继装置ID“111a”。这样,管理系统50在时域ID“se1”的时域的实行中,不但能够掌握已选定中继装置30a,而且还掌握发送选择信息的收信终端10db的IP地址“1.3.2.4”。
而后,管理系统50的时域管理部57在时域管理表(参见图16)的时域管理表中,将上述最终选定的一个中继装置30a的中继装置ID“111a”保存到含有选择用时域ID“se1”的记录项内的中继装置ID的区域部分上(步骤S67)。而后,管理系统50的收发信部51经由通信网络2向中继装置30a发送中继开始要求信息(步骤S68),该中继开始要求信息表示要求开始中继,其中包括被中继的要求终端10aa以及收信终端10db各自的IP地址“1.2.1.3”以及“1.3.2.4”。这样,中继装置30a能够掌握了自己本身被选定为进行中继的中继装置,构筑用于在终端10aa和10db之间以低分辨率、中分辨率、高分辨率的三个图像数据以及声音图像数据进行通信的时域(步骤S69),由此,可以在终端10aa和终端10db之间开始电视会议。
在以上的说明中,步骤S47中管理系统50向收信终端10db发送中继装置筛选信息,同时,通过步骤S48~S64-1、S64-2,在收信终端10db一方进行中继装置的选择处理(步骤S65)。但是,本发明并不受此限制。除此之外,还可以在上述步骤S47中,通过管理系统50向要求终端10aa发送中继装置筛选信息,并在其后的步骤S48到S64-1以及S64-2中,将发送各种信息的要求终端10aa与接收各种信息的收信终端10db互相交换。这样,便可以在上述步骤S65中由要求终端10aa来实行中继装置的选择处理,另外,还可以在S66中由要求终端10aa来发送选择信息。
以下利用图7和图27来说明在要求终端10aa和收信终端10db之间收发内容数据举行电视会议期间的处理。在图像数据和声音数据的通信以及下述延迟时间的检测等处理中,从终端10aa向终端10db方向发送图像数据和声音数据的处理、与反方向即从终端10db向终端10aa方向发送内容数据为相同处理,因此以下仅说明从终端10aa向终端10db方向的处理,而省略关于反方向处理的说明。
首先,要求终端10aa的收发信部11通过图2所示的图像及声音数据用时域sed,将摄像部14a拍摄的被摄体的图像数据以及从声音输入部15a输入的声音数据,经由通信网络2送往中继装置30a(步骤S81)。在本实施方式中输送图3所示的低分辨率、中分辨率、高分辨率三种数据构成的高质量图像数据以及声音数据。由此,中继装置30a的收发信部31便收到上述三个分辨率不同的图像数据以及声音数据。而后,图像状态确认部33用收信终端10db的IP地址“1.3.2.4”作为检索键,检索改变图像状态管理表(参见图11),并通过抽取对应的图像状态信息,来确认所要中继的图像数据的图像的质量或者中断图像数据的中继(步骤S82)。在本实施方式中,由于受到确认的图像数据的画质为“高画质”,并且与收发信部31收到的图像数据的画质相同,因此中继装置30a通过图像及声音数据用时域sed,将画质未经任何改动的图像数据以及未经任何改动的声音数据送往收信终端10db(步骤S83)。与此同时还还发送了要求终端即终端10aa的终端ID“01aa”。这样,收信终端10db的收发信部11收到低分辨率、中分辨率、高分辨率三种数据构成的高质量图像数据以及声音数据。而后,显示控制部17组合具有三组不同画质的图像数据,并在显示器120上显示基于上述图像数据的图像,同时,声音输出部15b输出基于上述声音数据的声音。
接着,终端10db的延迟检测部18每隔一定时间,如每隔1秒检测收发信部11收到的图像数据的收信延迟时间(步骤S84)。本实施方式在以下说明中设定延迟时间为200ms。
收信终端10db的收发信部11用图2所示的管理信息用时域sei并经由通信网络2将表示延迟时间为“200(ms)”的延迟信息送往管理系统50(步骤S85)。这样,管理系统50便能够在掌握延迟时间的同时,还掌握发送延迟信息的终端10db的IP地址“1.3.2.4”。
接着,管理系统50的延迟时间管理部60以上述收信终端10db的IP地址“1.3.2.4”为检索键,检索终端管理表(参见图14),抽取对应的终端ID“01db”,进而,将上述延迟信息中的延迟时间“200(ms)”保存到时域管理表(参见图16)中包含上述终端ID“01db”的记录项内用于记录延迟时间的区域部分中(步骤S86)。
接着,图像状态决定部58以上述延迟时间“200(ms)”为检索键,检索图像状态管理表(参见图19),抽取对应的图像状态信息,决定需要中继装置30a进行更改的图像数据的图像状态(步骤S87)。在此,图像状态决定部58抽取的图像状态信息为“中画质”,并将中继装置30将要中继的画质定为“中画质”。
而后,收发信部51在时域管理表(参见图16)中,以与上述终端ID“01db”相关的中继装置ID“111a”为检索键,检索中继装置管理表(参见图12),抽取对应的中继装置30a的IP地址“1.2.1.2”(步骤S88)。而后,收发信部51用图2所示的管理信息用时域sei并经由通信网络2,将上述步骤S87决定的表示图像数据的画质为“中画质”的图像状态信息送往中继装置30a(步骤S89)。该图像状态信息中包括在上述步骤S86中被当作检索键使用的收信终端10db的IP地址“1.3.2.4”。这样,中继装置30a的改变图像质量管理部34便将收信终端10db的IP地址“1.3.2.4”与被中继的图像数据的画质“中画质”相关保存到改变图像状态管理表(参见图11)中进行管理(步骤S90)。
而后,终端10aa继续进行与上述步骤S81相同的处理,即用图像及声音用时域sed向中继装置30a发送以低画质、中画质、高画质构成的高画质图像数据、声音数据以及终端10aa的终端ID“01aa”(步骤S91)。这样,与上述步骤S82相同,中继装置30a的图像状态确认部33以收信终端10db的IP地址“1.3.2.4”作为检索键,检索改变图像状态管理表(参见图11),并通过抽取对应的中继图像数据的画质“中画质”,来确认受到中继的图像数据的画质(步骤S92)。在本实施方式中,图像数据的画质被确认为“中画质”,该画质低于收发信部31收到的图像数据的画质“高画质”,为此,图像质量更改部35改变图像数据的图像状态,将“高画质”降低为“中画质”,更改图像数据的画质(步骤S93)。
而后,收发信部31用图像及声音数据用时域sed并经由通信网络2,向终端10db发送上述图像数据的画质被改变成“中画质”的图像数据以及音质未经改变的声音数据(步骤S94)。与此同时还发送要求终端即终端10aa的终端ID“01aa”。这样,收发信部11收到中分辨率和低分辨率2组数据构成的中画质图像数据以及声音数据。而后,显示控制部17结合两种分辨率的图像数据,并在显示器120上显示图像,同时基于声音数据从声音输出部15b输出声音。
这样,收信终端即终端10db接收图像数据时如果发生收信延迟,则可以通过中继装置30a改变图像的画质,以避免参加电视会议的人员有不协调感觉。
此外,在图像的质量降低后,如果通信网络2的拥挤得到解消,延迟检测部18检测到的延迟时间小于100(ms),则经由上述步骤S85~S92,并通过步骤S93,能够再更改为原来的画质即“高画质”。
以下利用图28~图37说明一例收信终端即终端10db的显示器120db所显示得画面。在以下的说明中针对终端10aa、终端10ca以及终端10db三个地点之间举行三者电视会议的情况进行说明。
图28是一例显示器显示的画面的示意图。该画面为终端10db的显示器120db显示的画面。如图28所示,显示器120db显示的电视会议用画面P0上显示以下画面:显示参加会议对方的主要成员图像的主画面P1、显示自身图像的副画面P2、以及显示参加会议对方的辅助性成员图像的副画面P3~P8。在显示器120中显示多个画面中主画面P1所占面积最大。
在电视会议用画面P0的最下方,左侧显示短信显示画面P10,中间显示“画面转换”键P11,在转换主画面和副画面时,可用鼠标等按动该键P11。
电视会议用画面P0的最下方的右侧中显示相机图标P12,用于表示该终端(终端10db)本身的相机112电源接通且从该终端本身进行图像通信,或该终端(终端10db)本身的相机112电源断开且从该终端本身未进行图像通信。相机图标为“×”时,表示终端本身的相机112电源处于接通状态,用户可在此后关闭电源。另一方面,如果相机图标不是“×”时,表示终端本身的相机112电源不是处于接通状态,用户可在此后接通电源。
以下用图29~图31说明在第一种显示形态中在主画面P1上显示正在发言的参加者的图像。图29是改变显示器上显示的画面的处理流程。图30是显示内容发生变化后的画面管理表的示意图。图31是显示器上显示的改变后的画面的示意图。
如图29所示,终端10(在此为收信终端即终端10db)的声音判断部21判断自己的收发信部11收到的多个声音数据中是否包含始终在规定值以上的声音信号值(步骤S101的否)。
其次,步骤S101的判断为包含始终在规定值以上的声音信号水准(步骤S101的是),则更改部22改变画面管理表的内容(步骤S102),如图30所示,在画面管理表30中,与包含规定值以上的声音信号水准的声音数据一起收到的终端10ca的终端ID“01ca”被改为与预定的画面编号“1”相关。此时,显示控制器17按照更改后的画面管理表的内容,如图31所示,在显示器120db上的多个画面(P1、P2、P3)中分别显示对应的画面。与图28相比,图31中终端10ca的图像与终端10aa的图像被互相交换。
这样,将开始发言的对方图像显示到主画面P1上,起到方便电视会议举行的效果。
上述步骤S87中针对延迟时间为200ms时的情况进行了说明,以下说明延迟时间为600ms时的情况。
在延迟时间为600ms时,在步骤S86中,延迟时间管理部60将延迟信息所表示的延迟时间600ms保存到时域管理表(参见图16)中终端ID为01db的记录项中的延迟时间区域部分中进行管理。而后,在步骤S87中,图像状态决定部58以延迟时间600ms为检索键,检索图像状态管理表(参见图19),抽取对应的图像状态信息“中断”,并决定中断中继装置30a的图像数据中继。这样,在步骤S94中,收发信部31停止中继上述图像数据,同时依然利用图像及声音数据用时域sed并经由通信网络2将上述声音数据送往终端10db。
另一方面,当上述步骤S87决定的图像状态为“中断”时,管理系统50同时实行步骤S88和步骤S89,进行短信制作处理,如图32所示,制作表示“图像数据的收信终端10db不接收图像数据”的信息(步骤S121)。图32是短信制作、发送以及显示的处理时序图。
在此用图33详细说明步骤S121中的处理。图33是短信制作处理流程图。
首先,短信制作部61以上述步骤85中收到的终端10db的IP地址作为检索键,检索终端管理数据库5003,抽取对应的终端ID(步骤S121-1)。
其次,短信制作部61以终端10db的终端ID“01db”为检索键,检索时域管理数据库5005,抽取处于相同时域(在此时域ID为se1)中的对应的终端10aa的终端ID“01aa”(步骤S121-2)。
而后,短信制作部61以终端10aa的终端ID“01aa”为检索键,检索终端管理数据库5003,抽取对应的终端名称信息(在此为“AA终端”,步骤S121-3)。在此抽取的终端名称信息除了“AA终端”以外,还可以是终端名称信息的其它部分,如“日本东京事业所AA终端”或“东京事业所AA终端”之类的全部或部分终端名称信息。
在此,例举了终端10db中终端10aa的图像信息时发生了接收延迟。而多个终端之间通信,图像信息收信延迟当然可能发生在其他终端之间,如终端10db与终端10ca之间,或终端aa与终端ca之间。由于对时域进行个别管理,因此当收信终端(如终端10db)中延迟收到图像数据时,便能够通过实行上述步骤S121-1~3,检索终端管理数据库以及时域管理数据库,确认是来自哪一个终端的图像数据发生延迟。
而后,短信制作部61制作表示没有收到图像数据的信息(步骤S121-4),例如,该信息是将上述步骤S121-3中抽取的终端名称信息“AA终端”放入“没有收到图像”的句子中组成内容为“没有收到AA终端的图像”的信息。
除上述以外,短信的内容还可以是“仅接收声音”。
此外,短信的内容并不局限于文字,也可以是图标等图像。在以图标等图像作为短信时,图像数据可预存在存储部5000中,在短信制作部61制作图像时,从存储部5000中读取图标等图像的数据。另外还可以将图标等图像数据预存在终端10的存储部1000中,根据管理系统发送的指令,从存储部1000中读取图像数据。
接着,如图32所示,管理系统50的收发信部51经由通信网络2向终端10db发送上述步骤S121中制作的短信以及发生延迟的图像数据的送信终端即终端10aa的终端ID“01aa”(步骤S122)。对此,终端10db的收发信部11接受短信以及终端ID。而后,终端10db的显示控制部17在显示器120db上显示短信(步骤S123)。短信的数据为text数据,其数据量相比于图像数据以及声音数据非常小,为此,即便通信网络2的带域十分狭窄,该数据也能够得到中继。
在此用图34和图35进一步详细说明步骤S123中的处理。图34是显示短信的流程图。图35是显示器上显示的一例第一显示形态画面得示意图。
首先,终端10db的收发信部11始终保持接收短信数据以及终端ID的准备(步骤S123-1的否)。如果收发信部11收到短信数据以及终端ID(步骤S123-1的是),则抽取部20根据收到的终端ID,检索图像管理表(参见图8),抽取对应的画面编号(步骤S123-2)。
而后,显示控制部17用图35的主画面P1上显示的短信来取代图28的主画面P1上显示的图像。即当终端10db的主画面P1上显示终端10aa的图像时,如果终端10db的图像数据接收延迟约600ms,则中继装置30a的图像质量更改部35终端图像数据的中继。同时,终端10db用上述步骤S122中收到的短信显示到主画面P1上,以此取代无法在上述步骤S83、S94中接收图像数据。
以下用图36和图37说明一例显示器120db上显示第二以及第三显示形态的画面。图36是显示器上显示的第二显示形态的画面的示意图。图37是显示器上显示的第三显示形态的画面的示意图。
图36所示的第二显示形态与第一显示形态相同,仍然显示三个地点之间举行三者电视会议的情况。首先,终端10db处于如图31所示的状态,终端10db的收发信部11始终保持接收短信数据以及终端ID的准备(步骤S123-1的否)。如果收发信部11收到短信数据以及终端ID(步骤S123-1的是),则抽取部20根据收到的终端ID,检索图像管理表(参见图8),抽取对应的画面编号(步骤S123-2)。此时,终端10db接收终端10aa发送的图像信息延迟600(ms),在这种情况下,终端10db因无法收到图像数据,转而如图36所示在画面上显示收到的短信用以代替。
进而说明如图37所示的第三显示形态显示九个以上地点之间举行九方电视会议的情况。这些地点中包含终端10cc,该终端10cc的图像数据表示的图像未被显示在显示器120的画面上。
终端10db起初处于类似图28所示画面的状态,而后发生终端10aa发送的图像数据收信延迟。对此,终端10db改为如图37所示地显示,即在主画面P1上显示虽然收到图像数据却未显示的由终端10cc发送的图像数据表示的图像,以此取代未能收到的终端10db的图像数据。另外,在短信显示画面P10上显示表示未能收到终端10aa的图像的短信。
此时,在图像数据发生收信延迟之前,图像管理表(参见图8)中画面编号“1”与终端10aa的终端ID相关,画面编号“补1”与终端10cc的终端ID相关。在终端10aa的图像数据接收中断后,将图像管理表(参见图8)中分别与画面编号“1”和“补1”相关的终端ID互相交换。在本显示方式中未显示的图像是与主画面的图像交换,但是本发明并不受此限制,该未显示的图像也可以与副画面的图像交换。
《本实施方式的主要效果》
上述本实施方式的效果在于,在收信终端10中因图像数据接收延迟而造成由中继装置30中继的图像数据的接收被中断的情况下,管理系统50向收信终端10发送未收到图像数据或只能接收声音数据的信息。据此,收信终端10在其显示器120上显示上述信息,使收信终端10的用户能够获悉没有收到图像数据的原因在于图像数据因延迟而未被中继,而不是由于电视会议中断。因此,收信一方的终端10的用户能够在整个电视会议期间安心地与送信一方的终端10的用户交流。
管理系统50将送信一方的终端10的名称包含在上述信息中,据此可知举行三方以上的电视会议中的哪个终端10未能收到图像数据。
《实施方式的补充》
上述各实施方式的中继装置30、管理系统50以及程序提供系统90以及保守系统100既可用单独的计算机构建,也可以将功能部拆开,用分别承担被拆开的各功能部的多台计算机来构建。而且,在用单独的计算机构建程序提供系统90时,既可将程序提供系统90发送的程序拆开形成多个模块来发送,也可发送整个程序。进而,在用多个计算机构建程序提供系统90时,多个模块可以拆开由各台计算机分别发送。
可以用CD-ROM等记录介质保存上述各个实施方式的终端用程序、中继装置用程序、以及传送管理用程序,该记录介质以及保存这些程序的HD204和具有该HD204的程序提供系统90均可以作为软件产品向国内外供应,向各方用户提供终端用程序、中继装置用程序、以及传输管理用程序。
在上述实施方式中,着眼于图像数据的图像分辨率,利用图11所示的改变图像状态管理表以及图19所示的图像状态管理表,来对图像状态进行管理,在此,图像分辨率仅仅是表示受到中继装置30中继的图像数据的图像质量的一例而已,本发明并不受此限制,还有其他可以用于表示图像质量的例子,如用图像数据的画质深度、声音数据的声音取样频率、声音数据的声音比特长等来进行管理。声音数据还可以与三种分辨率(高分辨率、中分辨率、低分辨率)的数据分开通信。
对于收信日期及时间的管理也不局限于图12、图14、图16所示,在这些收信日期及时间中至少需要管理收信时间。
上述实施方式用图12中管理中继装置的IP地址,用图14中管理终端的IP地址,但本发明并不受此限制。本发明只要是用于在通信网络2上确认中继装置30的中继装置确认信息、或者用于在通信网络2上确认终端10的终端确认信息,便可作为上述收信信息的其他例子,用来管理各自的全域名(FQDN,fullyqualified domain name)。此时,通过公知的域名系统(DNS,domain namesystem)服务器来取得对应于FQDN的IP地址。另外,不但可以表示为“用于确认通信网络2上的中继装置30的中继装置确定信息”,还可以表示为“表示连接通信网络2上的中继装置30的连接对象的中继装置连接对象信息”,或者“表示通信网络2上的中继装置30的收信对象的中继装置收信对象信息”。同样,不但可以表示为“用于在通信网络2上确定终端10的终端确认信息”,还可以表示为“表示连接通信网络2上的终端10的连接对象的终端连接对象信息”,或者“表示通信网络2上的终端10的收信对象的终端收信对象信息”。
在上述实施方式中以传送系统1为例对电视会议系统进行了说明,但是本发明并不受此限制,除了传送系统以外,本发明还适用于网协(IP,internetprotocol)电话、网络电话等电话系统。另外,传送系统1还可以用于汽车导航系统。在这种情况下,例如,终端10的一方相当于搭载于汽车中的导航装置,而另一方相当于管理导航的管理中心的管理终端或管理服务器、或者相当于搭载于其他汽车中的导航装置。进而,传送系统1还可以是手机的通信系统。在这种情况下,例如终端10相当于手机。
上述实施方式用图像数据以及声音数据作为一例内容数据来进行说明,但本发明并不受此限制。内容数据还可以是触觉数据,在这种情况下,一方终端的用户的触觉被传送到另一方终端。进而,内容数据还可以是嗅觉,此时,一方终端的用户的气味被传送到另一方终端。内容数据只要是图像数据、声音数据、触觉数据、以及嗅觉数据其中之一便可。
上述实施方式对利用传送系统1举行电视会议进行了说明。但是本发明并不受此限制,除此之外,本发明还可以用于讨论协商、亲友之间的交谈、或者单向信息提供。

Claims (10)

1.一种传送终端,其通过中继装置以及传送管理系统与对方传送终端通信,该中继装置用于中继在多个传送终端之间通信的图像数据,该传送管理系统用于管理该多个传送终端,所述传送终端的特征在于,
具备收信部和显示控制部,该受信部用于接收所述对方传送终端发送、并经过中继装置中继的图像数据,该显示控制部将收到的所述图像数据所表示的图像显示到规定的显示部上,
所述收信部在未收到所述中继装置发送的图像数据时,转而接收所述传送管理系统发送的规定的短信数据,
所述显示控制部用所述短信数据表示的短信取代所述图像数据表示的图像,显示到所述显示部上。
2.根据权利要求1所述的传送终端,其特征在于,所述显示控制部将多个对方传送终端发送的图像数据表示的图像分别显示到所述显示部上的多个画面上。
3.根据权利要求2所述的传送终端,其特征在于,
具备画面管理部和抽取部,所述画面管理部将用于确认所述显示部上显示的多个画面的画面确认信息、与用于识别发送显示在所述多个画面上的图像的图像数据的传送终端的识别信息相关管理,
所述收信部在收到所述短信数据的同时,还收到与该短信数据一起发送的发送该短信数据的传送终端的识别信息,
所述抽取部基于该收到的传送终端的识别信息,检索所述画面管理部,抽取对应的所述画面确认信息,
所述显示控制部将收到的所述短信数据所表示的短信显示到用被抽取的画面确认信息确认的画面上。
4.根据权利要求3所述的传送终端,其特征在于,
所述画面管理部进而将用于确认未显示在所述显示部上的画面的画面确认信息、与用于识别发送被分配到未显示在所述显示部上的画面的图像的图像数据的传送终端的识别信息相关保存,
当所述抽取部抽取的画面确认信息是用于确认所述未显示在所述显示部上的画面时,所述显示控制部在不同于所述多个画面的其他画面上显示所述短信。
5.根据权利要求1~4中任意一项所述的传送终端,其特征在于,所述短信表示未收到规定的对方传送终端发送的图像数据。
6.根据权利要求1~4中任意一项所述的传送终端,其特征在于,所述中继装置除了中继图像数据以外还中继声音数据,所述短信表示仅收到所述规定的对方传送终端发送的所述声音数据。
7.根据权利要求6所述的传送终端,其特征在于,
进一步具备声音判断部和更改部,所述声音判断部用于检测所述多个对方传送终端发送、并由所述收信部接收的多个声音数据的声音区间,并判断是否存在具有有声区间的声音数据,所述更改部用于在所述声音判断部判断存在具有有声区间的声音数据的情况下,更改所述画面管理部的内容,修改该画面管理部中该具有有声区间的声音数据一起收到的传送终端的识别信息、与的预定的画面确认信息之间的相关关系,
所述显示控制部基于经过更改的画面管理部的内容,在所述显示部的多个画面上分别显示规定的图像。
8.根据权利要求7所述的传送终端,其特征在于,所述预定的画面确认信息用于确认所述显示部中面积为最大的画面。
9.一种传送系统,其特征在于具有:根据权利要求1~8中任意一项所述的传送终端、所述中继装置、以及所述传送管理系统,用于实现多个传送终端之间的通信。
10.一种用于传送终端的显示控制方法,该传送终端通过中继装置以及传送管理系统与对方传送终端通信,该中继装置用于中继在多个传送终端之间通信的图像数据,该传送管理系统用于管理该多个传送终端,所述显示控制方法的特征在于,
具备收信步骤和显示控制步骤,在该收信步骤中,所述传送终端接收所述对方传送终端发送、并经过中继装置中继的图像数据,在该显示控制步骤中,所述传送终端将收到的所述图像数所表示的图像显示到规定的显示部上,
在所述收信步骤中还在未收到所述中继装置发送的图像数据时,转而接收所述传送管理系统发送的规定的短信数据,
所述显示控制步骤还用所述短信数据表示的短信取代所述图像数据表示的图像,显示到所述显示部上。
CN201310062524.9A 2012-03-19 2013-02-28 传送终端、传送系统、显示控制方法 Active CN103327285B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012061819A JP5962098B2 (ja) 2012-03-19 2012-03-19 伝送端末、伝送システム、表示制御方法、及びプログラム
JP2012-061819 2012-03-19

Publications (2)

Publication Number Publication Date
CN103327285A true CN103327285A (zh) 2013-09-25
CN103327285B CN103327285B (zh) 2016-10-05

Family

ID=48013714

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310062524.9A Active CN103327285B (zh) 2012-03-19 2013-02-28 传送终端、传送系统、显示控制方法

Country Status (4)

Country Link
US (1) US9077851B2 (zh)
EP (1) EP2642753B1 (zh)
JP (1) JP5962098B2 (zh)
CN (1) CN103327285B (zh)

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5884964B2 (ja) * 2010-10-22 2016-03-15 株式会社リコー 伝送システム、及び伝送方法
JP5760600B2 (ja) * 2011-03-31 2015-08-12 ソニー株式会社 通信装置、受信装置、通信方法、および通信システム
JP5903835B2 (ja) * 2011-04-28 2016-04-13 株式会社リコー 伝送端末、画像表示制御方法、画像表示制御プログラム、記録媒体、および伝送システム
JP2014003448A (ja) 2012-06-18 2014-01-09 Ricoh Co Ltd 伝送システム、外部入力装置、および表示解像度変換用プログラム
US9065811B2 (en) * 2013-04-04 2015-06-23 Ericsson Television Inc. Methods, apparatus, and computer program products for communicating content files based on destination priority
JP6364965B2 (ja) 2014-03-31 2018-08-01 株式会社リコー 伝送端末、プログラム、伝送方法、伝送システム
US10291597B2 (en) 2014-08-14 2019-05-14 Cisco Technology, Inc. Sharing resources across multiple devices in online meetings
JP6492460B2 (ja) * 2014-08-29 2019-04-03 株式会社リコー 伝送端末、伝送方法、及びプログラム
US10070429B2 (en) * 2014-11-14 2018-09-04 Electronics And Telecommunications Research Institute Method and apparatus for transmitting information in low latency mobile communication system
US10542126B2 (en) 2014-12-22 2020-01-21 Cisco Technology, Inc. Offline virtual participation in an online conference meeting
US9232190B1 (en) 2015-04-01 2016-01-05 Ringcentral, Inc. Systems and methods for managing multimedia conference calls
US9948786B2 (en) 2015-04-17 2018-04-17 Cisco Technology, Inc. Handling conferences using highly-distributed agents
US9497412B1 (en) * 2015-07-27 2016-11-15 Cisco Technology, Inc. Video conference audio/video verification
JP2017033291A (ja) * 2015-07-31 2017-02-09 キヤノン株式会社 情報処理装置及びその制御方法、情報処理システム、コンピュータプログラム
JP6661940B2 (ja) 2015-09-29 2020-03-11 株式会社リコー 通信端末、通信システム、制御方法、及びプログラム
KR101751620B1 (ko) * 2015-12-15 2017-07-11 라인 가부시키가이샤 시각적 또는 청각적 효과의 양방향 전달을 이용한 영상 통화 방법 및 시스템
US10511700B2 (en) 2016-02-25 2019-12-17 Ricoh Company, Ltd. Communication terminal with first application displaying status of second application
EP3247112A1 (en) 2016-05-20 2017-11-22 Ricoh Company, Ltd. Information processing apparatus, communication system, and information processing method
US10356361B2 (en) 2016-09-16 2019-07-16 Ricoh Company, Ltd. Communication terminal, communication system, and display method
US10592867B2 (en) 2016-11-11 2020-03-17 Cisco Technology, Inc. In-meeting graphical user interface display using calendar information and system
US10516707B2 (en) 2016-12-15 2019-12-24 Cisco Technology, Inc. Initiating a conferencing meeting using a conference room device
US9924136B1 (en) 2017-01-30 2018-03-20 Microsoft Technology Licensing, Llc Coordinated display transitions of people and content
US10038877B1 (en) * 2017-03-13 2018-07-31 Microsoft Technology Licensing, Llc Event conditioned views for teleconferencing sessions
US10440073B2 (en) 2017-04-11 2019-10-08 Cisco Technology, Inc. User interface for proximity based teleconference transfer
US10375125B2 (en) 2017-04-27 2019-08-06 Cisco Technology, Inc. Automatically joining devices to a video conference
US10375474B2 (en) 2017-06-12 2019-08-06 Cisco Technology, Inc. Hybrid horn microphone
US10477148B2 (en) 2017-06-23 2019-11-12 Cisco Technology, Inc. Speaker anticipation
US10516709B2 (en) 2017-06-29 2019-12-24 Cisco Technology, Inc. Files automatically shared at conference initiation
US10706391B2 (en) 2017-07-13 2020-07-07 Cisco Technology, Inc. Protecting scheduled meeting in physical room
US10091348B1 (en) 2017-07-25 2018-10-02 Cisco Technology, Inc. Predictive model for voice/video over IP calls
JP6977463B2 (ja) * 2017-10-06 2021-12-08 富士フイルムビジネスイノベーション株式会社 通信装置、通信システムおよびプログラム
TWI663868B (zh) * 2017-11-17 2019-06-21 宏碁股份有限公司 顯示系統、內容產生器、運算裝置,及其控制方法
CN110177241B (zh) * 2019-04-08 2021-06-01 广东小天才科技有限公司 一种可穿戴设备的姿态调整方法及可穿戴设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060132607A1 (en) * 2004-12-17 2006-06-22 Fuji Xerox Co., Ltd. Systems and methods for mediating teleconferences
US7701884B2 (en) * 2004-04-19 2010-04-20 Insors Integrated Communications Network communications bandwidth control
EP2421000A1 (en) * 2010-07-29 2012-02-22 Ricoh Company, Ltd. Communication terminal, communication system, communication method, and communication control program
CN102970511A (zh) * 2011-09-01 2013-03-13 株式会社理光 传送管理系统、传送管理方法、方法提供系统以及保守系统

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06233289A (ja) * 1993-02-02 1994-08-19 Nippon Telegr & Teleph Corp <Ntt> 画像通信端末
JPH0787471A (ja) * 1993-09-09 1995-03-31 Fujitsu Ltd 画面表示制御方式
JPH07336660A (ja) * 1994-06-14 1995-12-22 Matsushita Electric Ind Co Ltd テレビ会議システム
JPH08289274A (ja) * 1995-04-14 1996-11-01 Ricoh Co Ltd テレビ会議通信端末装置の制御方法
JP3703185B2 (ja) * 1995-12-28 2005-10-05 キヤノン株式会社 携帯端末装置及びその制御方法
JP2004032305A (ja) 2002-06-25 2004-01-29 Matsushita Electric Ind Co Ltd 画像通信携帯端末機
JP3819852B2 (ja) 2003-01-29 2006-09-13 富士通株式会社 通信支援方法、通信支援装置、通信支援プログラム及び通信支援プログラムを記録したコンピュータ読み取り可能な記録媒体
US7164435B2 (en) 2003-02-10 2007-01-16 D-Link Systems, Inc. Videoconferencing system
US20050099492A1 (en) 2003-10-30 2005-05-12 Ati Technologies Inc. Activity controlled multimedia conferencing
JP2006191283A (ja) * 2005-01-05 2006-07-20 Hitachi Communication Technologies Ltd 会議サーバ、テレビ会議用クライアント端末装置、速度調整方法およびプログラム
US20060248210A1 (en) 2005-05-02 2006-11-02 Lifesize Communications, Inc. Controlling video display mode in a video conferencing system
KR101240261B1 (ko) * 2006-02-07 2013-03-07 엘지전자 주식회사 이동통신 단말기의 영상 통화 장치 및 방법
CA2662812C (en) 2006-09-29 2014-02-11 Vidyo, Inc. System and method for multipoint conferencing with scalable video coding servers and multicast
US8154580B2 (en) * 2008-11-21 2012-04-10 Creative Technology Ltd System and method for facilitating user communication from a location
JP5153695B2 (ja) * 2009-03-17 2013-02-27 株式会社日立製作所 会議システム、管理サーバ、中継サーバ、クライアント端末、および会議方法
JP5332818B2 (ja) * 2009-03-31 2013-11-06 ブラザー工業株式会社 通信制御装置、通信制御方法、通信制御プログラム
NO331338B1 (no) 2009-06-24 2011-11-28 Cisco Systems Int Sarl Fremgangsmate og anordning for endring av en videokonferanse-layout
JP5541092B2 (ja) 2010-03-03 2014-07-09 株式会社リコー 伝送端末、伝送方法、及び伝送端末用プログラム
US20110271211A1 (en) 2010-04-30 2011-11-03 Jones Boland T Systems, methods, and computer programs for controlling presentation views in an online conference
JP2011254442A (ja) * 2010-05-06 2011-12-15 Ricoh Co Ltd 遠隔通信端末、遠隔通信方法、及び遠隔通信用プログラム
JP5708168B2 (ja) * 2010-06-16 2015-04-30 株式会社リコー 伝送端末、伝送システム、伝送方法、及び伝送端末用プログラム
JP2013051664A (ja) 2010-11-30 2013-03-14 Ricoh Co Ltd 通信端末、通信システム、及び通信用プログラム
US8665312B2 (en) 2010-12-06 2014-03-04 Ricoh Company, Ltd. Apparatus, system, and method of managing data transmission, and transmission management program

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7701884B2 (en) * 2004-04-19 2010-04-20 Insors Integrated Communications Network communications bandwidth control
US20060132607A1 (en) * 2004-12-17 2006-06-22 Fuji Xerox Co., Ltd. Systems and methods for mediating teleconferences
EP2421000A1 (en) * 2010-07-29 2012-02-22 Ricoh Company, Ltd. Communication terminal, communication system, communication method, and communication control program
CN102970511A (zh) * 2011-09-01 2013-03-13 株式会社理光 传送管理系统、传送管理方法、方法提供系统以及保守系统

Also Published As

Publication number Publication date
EP2642753B1 (en) 2017-09-13
EP2642753A1 (en) 2013-09-25
JP5962098B2 (ja) 2016-08-03
JP2013197800A (ja) 2013-09-30
CN103327285B (zh) 2016-10-05
US20130242030A1 (en) 2013-09-19
US9077851B2 (en) 2015-07-07

Similar Documents

Publication Publication Date Title
CN103327285A (zh) 传送终端、传送系统、显示控制方法
CN102196238B (zh) 传送管理系统、传送管理方法、以及传送系统
CN102196237B (zh) 传送终端、传送方法、传送系统
CN102208994B (zh) 日志管理系统、传送系统、以及日志管理方法
CN102970511A (zh) 传送管理系统、传送管理方法、方法提供系统以及保守系统
CN102291385B (zh) 传送终端、传送系统、以及传送方法
CN103731627A (zh) 传送终端和传送方法
CN102334335B (zh) 传输管理系统、传输系统、计算机程序产品、程序提供系统和维护系统
CN102972016B (zh) 传输终端和传输方法
CA2822860C (en) Transmission management system, transmission system, and transmission management system program
CN103329515B (zh) 外部输入装置、通信终端、显示数据共享系统
CN102651773A (zh) 终端连接控制系统、传送终端、传送系统以及终端连接控制方法
CN103348629A (zh) 传输管理系统、传输系统、用于传输管理系统的程序以及计算机可读信息记录介质
CN102164119B (zh) 认证系统、传送终端、以及传送系统
CN103354552A (zh) 通信系统、服务器和终端
CN102845058A (zh) 传输系统
CN103595952A (zh) 传输终端、通信方法和通信系统
CN103188478A (zh) 通信管理系统、通信系统、通信管理方法、维护系统
CN104137172A (zh) 电子装置以及用于控制电子装置的程序
CN103477632A (zh) 传输管理系统、传输系统、程序、程序供应系统和维护系统
CN104023198A (zh) 通信管理系统、通信终端、以及通信方法
EP3382936A1 (en) Transmission management system, transmission system, and recording medium
CN104010157A (zh) 通信管理系统和通信管理方法
CN103327286A (zh) 传送管理系统、传送系统以及传送管理方法
CN105934750A (zh) 数据传输系统、终端设备、计算机程序以及数据传输方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant