CN105580398A - 分发管理设备、终端和分发管理方法 - Google Patents
分发管理设备、终端和分发管理方法 Download PDFInfo
- Publication number
- CN105580398A CN105580398A CN201480052568.6A CN201480052568A CN105580398A CN 105580398 A CN105580398 A CN 105580398A CN 201480052568 A CN201480052568 A CN 201480052568A CN 105580398 A CN105580398 A CN 105580398A
- Authority
- CN
- China
- Prior art keywords
- information
- unit
- communication terminal
- data
- terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000009826 distribution Methods 0.000 title claims abstract description 204
- 238000007726 management method Methods 0.000 title claims description 220
- 238000006243 chemical reaction Methods 0.000 claims abstract description 5
- 238000000034 method Methods 0.000 claims description 83
- 238000012217 deletion Methods 0.000 claims description 7
- 230000037430 deletion Effects 0.000 claims description 7
- 230000008859 change Effects 0.000 claims description 6
- 238000004891 communication Methods 0.000 description 370
- 230000008569 process Effects 0.000 description 66
- 230000002123 temporal effect Effects 0.000 description 66
- 230000005540 biological transmission Effects 0.000 description 63
- 238000009877 rendering Methods 0.000 description 33
- 230000006978 adaptation Effects 0.000 description 32
- 230000006870 function Effects 0.000 description 14
- 238000009434 installation Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 12
- 230000004044 response Effects 0.000 description 10
- 230000003044 adaptive effect Effects 0.000 description 8
- 230000004913 activation Effects 0.000 description 7
- 238000005520 cutting process Methods 0.000 description 6
- 238000003825 pressing Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000011218 segmentation Effects 0.000 description 4
- 238000003860 storage Methods 0.000 description 4
- 230000003139 buffering effect Effects 0.000 description 3
- 230000004069 differentiation Effects 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 230000003068 static effect Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000006399 behavior Effects 0.000 description 2
- 238000007405 data analysis Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000011084 recovery Methods 0.000 description 2
- 238000000638 solvent extraction Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000004378 air conditioning Methods 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
- G06F21/6209—Protecting access to data via a platform, e.g. using keys or access control rules to a single file or object, e.g. in a secure envelope, encrypted and accessed using a key, or with access control rules appended to the object itself
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/40—Support for services or applications
- H04L65/403—Arrangements for multi-party communication, e.g. for conferences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/756—Media network packet handling adapting media to device capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
- H04W12/02—Protecting privacy or anonymity, e.g. protecting personally identifiable information [PII]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
- H04W12/08—Access security
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/18—Information format or content conversion, e.g. adaptation by the network of the transmitted or received information for the purpose of wireless delivery to users or terminals
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Security & Cryptography (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Bioethics (AREA)
- General Health & Medical Sciences (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Information Transfer Between Computers (AREA)
Abstract
一种分发管理设备,通过网络与多个终端连接,所述分发管理设备的特征在于配备有:生成单元,基于指示终端接受的操作输入的操作信息生成显示信息;转换单元,将显示信息转换为图像信息;以及分发单元,将图像信息分发至终端;并且当从终端接收指示不对另一终端公开的操作信息的私有操作信息时,所述分发单元将从不基于私有操作信息的显示信息转换的图像信息分发至所述另一终端。
Description
技术领域
本发明涉及分发(distribution)管理设备、终端和分发管理方法。
背景技术
近年来,随着因特网的流行,已经在各种领域中使用云计算。云计算是用户通过使用连接至因特网的通信终端在因特网上使用由服务器提供的服务(云服务)并为服务付费的服务使用形式。
然而,在因特网上处理的网络内容趋于丰富以满足各种要求。因此,存在以下问题:当通过使用通信终端使用丰富的内容以通过因特网使用服务时,通信终端上的负载很重。
此外,专利文献1公开了这样的技术,其中能够对其输入用于显示诸如字符和图片的绘制信息的操作的通信终端连接到网络,并且所述终端通过绘制信息而彼此通信。
发明内容
技术问题
然而,在传统技术中,不能以区分方式在终端上显示仅在自身终端处显示的绘制信息以及也在另一终端处显示的绘制信息。
有鉴于上述问题实现了本发明,并且本发明的目的在于提供一种分发管理设备、终端和分发管理方法,其使得能够以区分方式显示仅在自身终端处显示的绘制信息以及也在另一终端处显示的绘制信息。
解决问题的方案
为了解决上述问题,本发明提供了一种分发管理设备,通过网络与多个终端连接,所述分发管理设备包括:创建单元,基于指示终端接受的操作输入的操作信息创建显示信息;转换单元,将显示信息转换为视频信息;以及分发单元,将视频信息分发至终端;其中当从终端接收指示不对另一终端公开的操作信息的非公开操作信息时,所述分发单元将从不基于非公开操作信息的显示信息转换的视频信息分发至所述另一终端。
发明的有益效果
根据本发明,能够以区分方式在终端上显示仅在自身终端处显示的绘制信息以及也在另一终端处显示的绘制信息。
附图说明
图1是根据本实施例的分发系统的示意图。
图2是将硬件锁(dongle)安装到通信终端中时绘制的图像。
图3是示出基本分发方法的概念图。
图4是多显示器的概念图。
图5是示出当公开操作信息时的分发方法的概念图。
图6是示出当隐藏操作信息不公开时的分发方法的概念图。
图7是示出分发管理设备的硬件配置的一个示例的图。
图8是示出硬件锁的硬件配置的一个示例的图。
图9是示出分发管理设备主要的各个功能的功能框图。
图10是绘制信息表的概念图。
图11是编码器桥单元的详细图。
图12是示出转换单元的各个功能的功能框图。
图13是示出通信终端主要的各个功能的功能框图。
图14是示出终端管理设备的各个功能的功能框图。
图15是分发目的地选择菜单屏幕的概念图。
图16是终端管理表的概念图。
图17是可用终端管理表的概念图。
图18是示出分发管理设备的基本分发处理的序列图。
图19是示出在分发管理设备和通信终端之间执行的时间调整处理的序列图。
图20是示出用于从分发管理设备发送至通信终端的数据的线路适配(lineaccomodation)控制的处理的序列图。
图21是示出用于从通信终端发送至分发管理设备的数据的线路适配控制的处理的序列图。
图22是示出多显示器的处理的序列图。
图23是示出多显示器的处理的序列图。
图24是示出多显示器的处理的序列图。
图25是示出非公开操作数据的绘制处理的序列图。
图26是示出公开非公开操作数据的处理的序列图。
图27是对其操纵与操作数据的分发有关的设置信息的屏幕的概念图。
图28A是示出公开显示信息的显示示例的图。
图28B是示出非公开显示信息的显示示例的图。
具体实施方式
下面使用附图详细说明根据本实施例的分发系统。下面描述的实施例是作为这样的分发系统的应用示例,其中使用云计算,网络浏览器(以下,“浏览器”)和编码器都与其接口连接以便在云上操作,并且网络内容转换为视频数据、声音数据或视频数据和声音数据,以分发至诸如个人计算机和电子黑板的通信终端。注意,下面描述的“图像”包括静态图像和动态图像。此外,下面描述的“视频”基本表示运动图像,并且包括作为暂停运动图像的结果而处于静止图像状态的图像。此外,当指示静态图像和声音的至少一个时,其表示为“静态图像(声音)”。此外,当指示图像和声音的至少一个时,其表示为“图像(声音)”。当指示视频和声音的至少一个时,其表示为“视频(声音)”。
[实施例的概述]
首先,使用图1说明本实施例的概述。图1是根据本实施例的分发系统1的示意图。
<系统配置的概述>
首先,说明分发系统1的配置的概述。
如图1所示,本实施例的分发系统1包括分发管理设备2、多个通信终端5a至5f、终端管理设备7和网络服务器8。下面,当指示多个通信终端5a至5f中的任意通信终端时,其表示为“通信终端5”。分发管理设备2、终端管理设备7和网络服务器8的任一由服务器计算机构成。
通信终端5是由接收分发系统1的服务的用户使用的终端。这些当中的通信终端5a是膝上型个人计算机(PC)。通信终端5b是诸如智能电话和平板终端的移动终端。通信终端5c是组合复印、扫描、打印和传真的各个功能的多功能外围设备(MFP)打印机产品。通信终端5d是投影仪。通信终端5e是配备有相机、麦克风和扬声器的视频会议终端。通信终端5f是能够电子转换用户绘制的内容的电子黑板(白板)等。
注意,通信终端5不限于如图1所示的终端,而可以是可通过诸如因特网的通信网络执行通信的设备,即,手表、售货机、油表、车载导航系统、游戏机、空调、照明单元、单独的相机、单独的麦克风、单独的扬声器等。
此外,分发管理设备2、通信终端5、终端管理设备7和网络服务器8可通过诸如因特网和局域网(LAN)的通信网络9执行通信。此通信网络9包括通过诸如第三代(3d)、全球微波互联接入(WiMAX)、长期演进(LTE)的无线通信的网络。
取决于通信终端5,存在没有通过通信网络9与其他终端和系统通信的功能的终端,作为通信终端5d等。然而,如图2所示,通过将硬件锁99插入用户的通信终端5d的接口单元,诸如通用串行总线(USB)和高清晰度多媒体接口(HDMI)(注册商标),通信终端5d能够通过通信网络9与其他终端和系统执行通信。图2是当硬件锁99安装到通信终端中时绘制的图像。
分发管理设备2具有云端的浏览器20,并且获取通过浏览器20中的用于执行渲染(rendering)的渲染功能由预定描述语言表示的一条或多条内容数据,从而创建诸如按照RGB(红、绿、蓝)的位图数据的静态图像数据、以及作为声音数据的帧数据(即,静态图像(声音)数据),诸如脉冲编码调制(PCM)数据。注意,内容数据是从网络服务器8、任意通信终端等获取的数据,并包括按照超文本标记语言(HTML)或级联样式表(CSS)的图像(声音)数据、按照运动图像专家组4(MPEG-4,MP4)的图像(声音)数据、按照高级音频编码(AAC)的声音数据等。
此外,分发管理设备2具有云端的编码单元19,并且编码单元19用作编码器,从而将作为静态图像(声音)数据的各个帧数据以诸如H.264(MPEG-4(AVC))、H.265和运动联合图像专家组(JPEG)的压缩编码方案转换为视频(声音)数据。
另一方面,终端管理设备7执行通信终端5的登陆认证,并执行通信终端5的合同信息等的管理。此外,终端管理设备7具有用于发送电子邮件的简单邮件传输协议(SMTP)服务器功能。终端管理设备7例如可以实现为在云服务上展开的虚拟机(基础设施即服务,IaaS)。优选地,终端管理设备7以复用方式操作以连续提供服务,以为未期发生的情况做准备。
分发管理设备2的浏览器20使得能够进行实时通信(RTC/协作)。此外,其还具有分发管理设备2中包括的下述图11中的编码器桥单元30(编码单元19),并且此编码单元19对由浏览器20创建的视频(声音)数据执行实时编码,并能够基于例如H.264标准输出由转换创建的视频(声音)数据。因此,分发管理设备2的处理与通过例如由DVD播放器等读取记录在数字多功能盘(DVD)上的非实时视频(声音)数据而分发的情况不同。
注意,不仅分发管理设备2而且通信终端5也可以具有浏览器。在此情况下,通过更新分发管理设备2的浏览器20,变为不需要激活各个通信终端5的浏览器。
<各种分发方法的概述>
接下来,说明各种分发方法的概述。
(基本分发)
图3是示出本实施例的分发系统1的基本分发方法的概念图。在分发系统1中,如图3所示,分发管理设备2的浏览器20从网络服务器8获取网络内容数据[A],并执行渲染,从而创建视频(声音)数据[A]。编码器桥单元30然后执行视频(声音)数据[A]的编码等以分发至通信终端5。因此,即使由HTML、CSS等创建的网络内容丰富,因为其作为H.264、MPEG-4等的视频(声音)数据分发,所以变得即使用低规格的通信终端5也可以平滑地再现视频(声音)。此外,在本实施例的分发系统1中,通过更新分发管理设备2的浏览器20,变为可以在不更新向通信终端5提供内容的作为本地单元的浏览器的情况下,再现最近的丰富的网络内容。
此外,通过应用如图4至图6所示的上述分发方法,分发系统1也可以将作为视频(声音)数据的网络内容分发至位于同一地址或位于多个地址的通信终端5。这里说明图4至图6中示出的分发方法。
(多显示器)
图4是多显示器的概念图。如图4所示,分发管理设备2的单个浏览器20从网络服务器8获取网络内容数据[XYZ],并执行渲染,从而创建单条视频(声音)数据[XYZ]。编码器桥单元30然后将单条视频(声音)数据[XYZ]分为多条视频(声音)数据[X]、[Y]和[Z]然后执行编码。此后,分发管理设备2将分割的视频(声音)数据[X]分发至通信终端5f1。类似的,分发管理设备2将分割的视频(声音)数据[Y]分发至通信终端5f2,并将分割的视频(声音)数据[Z]分发至通信终端5f3。因此,例如,即使在水平方向长的网络内容数据[XYZ]的情况下,也以分割方式向通信终端5f1、5f2和5f3显示视频。因此,通过在一行中布置这些通信终端5f1、5f2和5f3,可以获得类似显示单个大视频的效果。在此情况下,通信终端(5f1、5f2和5f3)需要具有相同显示再现性能(相同分辨率等)。这样的分发方法例如称为“多显示器”。
(操作数据的分发的公开设置和非公开设置)
本实施例的分发系统1可以通过设置通信终端5切换是否将通信终端5的操作数据也分发至其他通信终端。例如通过操作在通信终端5的显示屏幕上显示的按钮来执行切换通信终端5的设置的方法。这里说明操作数据的分发方法的概述,并且下面描述详细说明。
首先,说明用于将自身通信终端5的操作数据也分发至其他通信终端5的公开设置。即,说明将用于操作数据的分发的设置设置为公开的情况。图5是示出当公开操作信息时的分发方法的概念图。如图5所示,在第一地址(图5中的右侧),通信终端5f1用作电子黑板,并且电子笔P1用作输入设备。此外,在第二地址(图5中的左侧),通信终端5f2用作电子黑板,并且电子笔P2用作输入设备。
通信终端5f1显示作为背景图像的内容A。从分发管理设备2接收背景图像的内容A。具体地,分发管理设备2从网络服务器8接收内容A,通过浏览器20渲染内容A,使其成为作为背景图像显示在通信终端5f1上的数据格式。编码器桥单元30-1将经历渲染的内容A编码以发送至通信终端5f1。在通信终端5f2上显示内容A作为背景图像的情况也是相同的。
通信终端5f1接受指示由电子笔P1进行的操作输入的操作数据。操作数据包括指示例如在通信终端5f1绘制的字符和图等的位置的坐标信息。通信终端5f1将终端发送信息发送至分发管理设备2,在所述终端发送信息中,指示所接受的操作输入的操作数据[p1]、指示操作数据设置为公开的信息、以及用于标识通信终端5f1的标识信息彼此相关联。
类似地,通信终端5f2接受指示由电子笔P2进行的操作输入的操作数据。通信终端5f2将终端发送信息发送至分发管理设备2,在所述终端发送信息中,指示所接受的操作输入的操作数据[p2]、指示操作数据设置为公开的信息、以及用于标识通信终端5f2的标识信息彼此相关联。
在从通信终端5f1接收操作数据[p1]之后,分发管理设备2将操作数据[p1]发送至浏览器20。类似的,在从通信终端5f2接收操作数据[p2]之后,分发管理设备2将操作数据[p2]发送至浏览器20。因为操作数据[p1]和操作数据[p2]的设置信息都设置为公开,所以浏览器20执行操作数据[p1]、操作数据[p2]和内容A的渲染以创建一条公开显示信息。
浏览器20将公开显示信息发送至编码器桥单元30-1和编码器桥单元30-2。编码器桥单元30-1编码公开显示信息并发送至通信终端5f1。编码器桥单元30-2编码公开显示信息并发送至通信终端5f2。通信终端5f1和通信终端5f2显示从分发管理设备2接收的公开显示信息(操作数据[p1]、操作数据[p2]和内容A)。
接下来,说明用于不将自身通信终端5的操作数据分发至其他通信终端5的非公开设置。即,说明将用于操作数据的分发的设置设置为非公开的情况。图6是示出当操作信息为非公开时的分发方法的概念图。如图6所示,在第一地址(图6中的右侧),通信终端5f1用作电子黑板,并且电子笔P1用作输入设备。此外,在第二地址(图6中的左侧),通信终端5f2用作电子黑板,并且电子笔P2用作输入设备。作为示例,说明通信终端5f1设置为非公开并且通信终端5f2设置为公开的情况。
通信终端5f1和通信终端5f2显示作为背景图像的内容A。通信终端5f1接受指示由电子笔P1进行的操作输入的操作数据。通信终端5f1将终端发送信息发送至分发管理设备2,在所述终端发送信息中,指示所接受的操作输入的操作数据[p1]、指示操作数据设置为非公开的信息、以及用于标识通信终端5f1的标识信息彼此相关联。
类似地,通信终端5f2接受指示由电子笔P2进行的操作输入的操作数据。通信终端5f2将终端发送信息发送至分发管理设备2,在所述终端发送信息中,指示所接受的操作输入的操作数据[p2]、指示操作数据设置为公开的信息、以及用于标识通信终端5f2的标识信息彼此相关联。
在从通信终端5f1接收操作数据[p1]之后,分发管理设备2将操作数据[p1]发送至浏览器20。类似的,在从通信终端5f2接收操作数据[p2]之后,分发管理设备2将操作数据[p2]发送至浏览器20。
因为操作数据[p1]的设置信息设置为非公开并且操作数据[p2]的设置信息设置为公开,所以浏览器20创建非公开显示信息和公开显示信息。具体地,浏览器20执行操作数据[p1]、操作数据[p2]和内容A的渲染以创建一条非公开显示信息,并将非公开显示信息发送至编码器桥单元30-1。浏览器20执行操作数据[p2]和内容A的渲染以创建一条公开显示信息,并将公开显示信息发送至编码器桥单元30-2。
编码器桥单元30-1编码非公开显示信息以发送至通信终端5f1。编码器桥单元30-2编码公开显示信息以发送至通信终端5f2。通信终端5f1显示从分发管理设备2接收的非公开显示信息(操作数据[p1]、操作数据[p2]和内容A)。通信终端5f2显示从分发管理设备2接收的公开显示信息(操作数据[p2]和内容A)。
如上所述,在第一地址和第二地址中,可以执行远程共享处理以在远程位置实时共享相同信息,因此,本实施例的分发系统1对于电话会议等是高效的。
[实施例的详细说明]
接下来,使用图7至图28B详细说明实施例。
<实施例的硬件配置>
首先,使用图7和图8说明本实施例的硬件配置。图7是示出分发管理设备2的逻辑硬件配置的一个示例的图。此外,图8是示出硬件锁99的逻辑硬件配置的一个示例的图。因为通信终端5、终端管理设备7和网络服务器8的硬件配置与分发管理设备2的硬件配置相同,所以省略其描述。
如图7所示,分发管理设备2包括:(主机)中央处理单元(CPU)201,其控制整个分发管理设备2的操作;只读存储器(ROM)202,其存储用于驱动CPU201的程序,诸如信息处理语言(IPL);随机存取存储器(RAM)203,其用作CPU201的工作区;硬盘驱动(HDD)204,其存储诸如程序的各种数据;硬盘控制器(HDC)205,其根据CPU201的控制控制从HDD204读取各种数据并将各种数据写入HDD204;介质驱动207,其控制从诸如闪存的记录介质206读取数据和将数据写入(存储)到记录介质206;显示器208,显示各种信息;接口(I/F)209,使用通信网络9发送数据或连接硬件锁99、键盘211、鼠标212、麦克风213、扬声器214、图形处理单元(GPU)215、存储用于驱动GPU215的程序的ROM216、用作GPU215的工作区的RAM217;以及诸如地址总线和数据总线的扩展总线220,以电连接上述各个组件。
注意,可通过以可安装格式或可执行格式的文件记录在诸如上述记录介质206的计算机可读记录介质上而分发用于各个通信终端、各个系统或各个服务器的程序。
接下来,使用图8说明硬件锁99的硬件配置。如图8所示,硬件锁99包括:CPU91,控制整体硬件锁99的操作;ROM92,存储基本输入/输出程序;RAM93,用作CPU91的工作区;电子可擦除可编程ROM(EEPROM)94,根据CPU91的控制读取和写入数据;GPU95;ROM96a,存储用于驱动GPU95的程序;RAM96b,用作GPU95的工作区;I/F97,连接至通信终端5的I/F209;天线98a;通信单元98,通过使用此天线98a通过短距离无线技术执行通信;以及总线90,诸如地址总线和数据总线,用于电连接上述各个组件。作为短距离无线技术,例如,存在近场通信(NFC)标准、蓝牙(注册商标)、无线保真(Wi-Fi)(注册商标)、ZigBee(注册商标)等。
<实施例的功能配置>
接下来,使用图9至图17说明本实施例的功能配置。图9是示出分发管理设备2主要的各个功能的功能框图。尽管图9中示出当分发管理设备2分发视频(声音)数据至通信终端5f1时的功能配置,但是当分发目的地是通信终端5f1以外时,功能配置也是相同的。尽管分发管理设备2具有多于一个分发引擎服务器,但是为了说明简单下面说明具有单个分发引擎服务器的情况。
(分发管理设备的功能配置)
分发管理设备2通过图7所示的硬件配置和程序实现图9所示的各个功能配置。具体地,分发管理设备2具有浏览器20、收发单元21、浏览器管理单元22、发送FIFO24、时间管理单元25、时间获取单元26、线路适配控制器27、编码器桥单元30、收发单元31、接收FIFO34、识别单元35、延迟信息获取单元37a、线路适配控制器37b和解码单元40。此外,分发管理设备2具有由图7所示的HDD204构成的存储单元2000。在此存储单元2000中,存储从识别单元35输出的后面描述的标识信息。注意,浏览器20获取的内容数据也可以临时存储在作为高速缓存的存储单元2000中。此外,存储单元2000存储绘制信息表7030。
图10是绘制信息表7030的概念图。绘制信息表7030以关联方式存储绘制命令信息、坐标信息、终端信息和设置信息。当浏览器20接收终端发送信息(操作数据、操作数据的设置信息和通信终端的标识信息)时通过浏览器20创建绘制信息表7030中的记录。绘制命令信息是指示用于绘制由电子笔的操作输入的诸如字符和图片的图片内容的命令的信息。绘制命令信息是例如表示“图A”的命令的信息。坐标信息是指示一个图片内容的绘制中的起始点的位置的坐标。一个图片内容是在从例如当电子笔与通信终端5f的显示屏开始接触(或接近)起直至从其离开的时段期间绘制的内容。坐标信息是例如(x1,y1)。终端信息是指示已经发送终端发送信息的终端的信息。终端信息是例如“5f1”。设置信息是在终端发送信息中包括的操作数据的设置信息(公开设置或非公开设置)。设置信息是例如“非公开”。
在上述各个功能组件中,浏览器20是在分发管理设备2中操作的网络浏览器。浏览器20通过执行诸如网络内容数据的内容数据的渲染创建作为RGB数据的视频(声音)数据(或脉冲编码调制(PCM)数据)。浏览器20总是更新为最新形式以便支持更丰富的网络内容。
此外,在本实施例的分发系统1中,在分发管理设备2中准备浏览器20的多个单元,并且从这些浏览器20中选择用于用户会话的云浏览器。为了说明简单,下面说明准备浏览器20的单个单元的情况。
浏览器20具有例如媒体播放器、flash播放器、JavaScript(注册商标)、级联样式表(CSS)和HTML渲染器。JavaScript(注册商标)包括标准的和对于分发系统1特定的。媒体播放器是用于再现浏览器20中的诸如视频(声音)文件的多媒体文件的浏览器插件。Flash播放器是用于再现浏览器20中的Flash内容的浏览器插件。特定JavaScript(注册商标)是提供对于分发系统1特定的服务的应用编程接口(API)的JavaScript(注册商标)组。CSS是用于有效定义HTML中描述的网页的外观和风格的技术。HTML渲染器是基于WebKit的HTML渲染引擎。
收发单元21与终端管理设备7和网络服务器8执行各种数据、请求等的发送和接收。例如,收发单元21从网络服务器8的内容地址获取网络内容数据。
浏览器管理单元22执行浏览器20和编码器桥单元30的管理。例如,浏览器管理单元22向浏览器20和编码器桥单元30指示其开始或结束,或对开始或结束时的编码器标识(ID)编号。编码器ID是被浏览器管理单元22编号以管理编码器桥单元30的处理的标识信息。此外,每次启动浏览器20时浏览器管理单元22编号浏览器ID以用于管理。浏览器ID是被编号以管理浏览器20的处理并标识浏览器20的标识信息。
此外,浏览器管理单元22通过收发单元31从通信终端5获取各种操作数据[p]以输出至浏览器20。操作数据[p]是由在通信终端5处的操作事件(由键盘211、鼠标212等的操作、以及用电子笔P的键击等)生成的数据。当在通信终端5中提供诸如温度传感器、湿度传感器和加速度传感器的各种传感器时,浏览器管理单元22从通信终端5获取作为每个传感器的输出信号的传感器信息以输出至浏览器20。
发送FIFO24是存储在浏览器20创建的视频(声音)数据[AEp]的缓冲器。
时间管理单元25管理分发管理设备2特定的时间T。时间获取单元26执行处理以调整时间与下述通信终端5中的时间控制单元56协调。具体地,时间获取单元26从时间管理单元25获取指示分发管理设备2处的时间T的时间信息(T),从下述时间控制单元56接收指示通信终端5处的时间t的时间信息(t),并将时间信息(t)和时间信息(T)发送至时间控制单元56。
线路适配控制器27基于发送延迟时间信息(D)计算再现延迟时间U,并计算操作条件,诸如编码器桥单元30中的下述转换单元10的数据的分辨率和帧率。此再现延迟时间U是用于通过缓冲再现前的数据而延迟再现的时间。即,线路适配控制器27基于发送延迟时间信息(D)和数据尺寸(比特数或字节数等)而改变编码器桥单元30的行为。此发送延迟时间信息(D)指示由通过通信终端5中的延迟信息获取单元57从再现控制单元53获取的多于一个发送延迟时间D1构成的频率分布信息。各个发送延迟时间D1指示从分发管理设备2发送视频(声音)数据时至其被通信终端5接收时的时间。
编码器桥单元30将浏览器20创建的作为静态图像(声音)数据的各个帧数据输出至下面描述的编码器桥单元30中的转换单元10。此时,转换单元10考虑线路适配控制器27计算的操作条件执行各种处理。使用图11和图12进一步详细说明编码器桥单元30。图11是编码器桥单元30的说明图。此外,图12是示出转换单元10的各个功能的功能框图。
如图11所示,编码器桥单元30包括创建选择传送单元310、选择单元320以及其间构建的转换单元10a、10b和10c。尽管在此示例中示出转换单元10a、10b和10c这三个单元,但是可以准备任何数目的转换单元。下面,将任意转换单元指示为“转换单元10”。
此外,如图12所示,转换单元10包括微调单元11、缩放单元12、分割单元13、和编码单元19。微调单元11、缩放单元12和分割单元13不执行声音数据的处理。
微调单元11执行仅切出视频(图像)的一部分的处理。缩放单元12改变视频(图像)的大小。分割单元13分割从如图4所示的网络服务器8获取的网络内容。
编码单元19编码在浏览器20处创建的视频(声音)数据,从而转换视频(声音)数据使得视频(声音)数据可以通过通信网络9分发到通信终端5。此外,如果视频不是运动的(如果在帧之间没有更新(改变)),则编码单元19插入跳过的帧(也称为“跳帧”)数据,直到视频运动,从而节约频带。当通过渲染将声音数据与静态图像数据一起创建时,编码两种数据。然而,当仅创建声音数据时,不执行微调、缩放和分割,并且仅执行编码以压缩数据。
创建选择传送单元310新创建转换单元10,或选择要输入到已经创建的转换单元10的视频(声音)数据。作为创建选择传送单元310新创建转换单元10的情况,例如,存在要创建能够执行满足通信终端5的视频(声音)数据的再现性能的转换的转换单元10等的情况。此外,在创建选择传送单元310选择要输入到转换单元10的视频(声音)数据的情况下,要选择已经创建的转换单元10。例如,当除了分发到通信终端5a之外开始至通信终端5的分发时,存在与正分发至通信终端5a的视频(声音)数据相同的视频(声音)数据被分发至通信终端5b的情况。在此情况下通信终端5b具有与通信终端5a中的视频(声音)数据的再现性能相同的再现性能的情况等与此对应。即,在此情况下,创建选择传送单元310不创建用于通信终端5b的新转换单元10b,而是使用已经为通信终端5a创建的转换单元10a。
选择单元320从已经创建的转换单元10选择期望的转换单元。通过创建选择传送单元310和选择单元320进行的选择使得能够进行各种模式的分发。
返回图9,收发单元31与通信终端5执行各种数据、请求等的发送和接收。例如,在通信终端5的登陆处理中,收发单元31将用于提示用户进行登陆请求的认证画面数据发送至下面描述的通信终端5的收发单元51。此外,收发单元31与在通信终端5中安装的应用程序(用户应用或设备应用)执行数据发送和数据接收,以通过安全套接层上的超文本传输协议(HTTPS)服务器由对分发系统1特定的协议接收分发系统1的服务。此特定协议是用于在分发管理设备2与通信终端5之间实时地、不中断地发送和接收数据的基于HTTPS的应用层协议。此外,收发单元31执行发送响应控制、实时数据创建、命令发送、接收响应控制、接收数据分析和手势转换的各种处理。
发送响应控制是管理通信终端5请求的用于下载的HTTPS会话、以从分发管理设备2将数据发送至通信终端5的处理。此用于下载的HTTPS会话的响应并不马上结束,而是维持预定时间(1至几分钟)。收发单元31动态地在响应主体中写入要发送至通信终端5的数据。此外,为了节省再连接的成本,在在先的会话结束之前,从通信终端5分发另一请求。通过保持收发单元31待机直到在先请求完成,即使执行再连接也可以消除开销。
实时数据创建是将特定报头添加到在图12中的编码单元19创建的压缩视频(和压缩声音)数据的数据(RTP数据)以写入至通信终端5的下行链路HTTPS的主体中的处理。
命令发送是创建要发送至通信终端5的命令数据以写入用于分发(下行链路)至通信终端5的HTTPS的主体中的处理。
接收响应控制是管理由通信终端5请求的用于发送(上行链路)的HTTPS会话以用于分发管理设备2从通信终端5接收数据的处理。此HTTPS会话的响应不马上结束,而是维持预定时间(1至几分钟)。通信终端5在响应的主体中动态写入要发送至收发单元31的数据。
接收数据分析是对于每种类型分析从通信终端5发送的数据和将数据传送至必要处理的处理。
手势转换是将用户用电子笔P或手输入至作为电子黑板的通信终端5f的手势事件转换为浏览器20可接收的格式的处理。
接收FIFO34是存储由解码单元40解码的视频(声音)数据的缓冲器。
识别单元35对从通信终端5接收的视频(声音)数据[E]执行处理。具体地,识别单元35从通过下述相机62对标记(signage)成像的视频识别例如人或动物的面部、年龄、性别等。此外,对于办公室,识别单元35通过从下述相机62成像的视频的人脸识别执行加姓名标签、背景图像替换处理等。识别单元35将指示所识别的信息的识别信息存储在存储单元2000中。此识别单元35可以通过用识别扩展板执行处理而实现高速处理。
延迟信息获取单元37a用于与通信终端5侧上用于下行链路线路适配协议的处理的延迟信息获取单元57对应的、上行链路线路适配协议的处理。具体地,延迟信息获取单元37a从解码单元40获取指示发送延迟时间d1的发送延迟时间信息(d1),并保持预定时间,并且当获取多条发送延迟时间信息(d1)时,将指示多条发送延迟时间d1的频率分布信息的发送延迟时间信息(d)输出至线路适配控制器37b。发送延迟时间信息(d1)指示从通信终端5发送视频(声音)数据时直到分发管理设备2接收到数据时的时间。
线路适配控制器37b用于与用于下行链路线路适配控制的处理的上述线路适配控制器27对应的、上行链路线路适配控制的处理。具体地,线路适配控制器37b基于发送延迟时间信息(d)计算通信终端5侧的编码单元60的操作条件。此外,线路适配控制器37b将指示诸如数据的分辨率和帧率的操作条件的线路适配控制信号通过收发单元31和下述收发单元51发送至通信终端5的编码单元60。
解码单元40解码已经从通信终端5发送的视频(声音)数据[E]。此外,解码单元40将指示发送延迟时间d1的发送延迟时间信息(d1)输出至延迟信息获取单元37a。
(通信终端的功能配置)
下面,使用图13说明通信终端5的功能配置。图13是示出通信终端5的主要的各个功能的功能框图。尽管通信终端5f1例示为图13中的通信终端5之一,但是通信终端5f1以外的通信终端5也具有相同功能配置。通信终端5中已经安装用户应用的通信终端5作为用户执行登陆到分发系统1、开始或停止视频(声音)数据的分发等的接口。另一方面,已经安装设备应用的通信终端5仅执行视频(声音)数据的发送和接收或操作数据的发送,并没有上述接口。下面,为了方便起见,给出假设在通信终端5中安装用户应用的说明。
通信终端5通过与图7类似的硬件配置和程序(用户应用)实现图13所示的各个功能配置。具体地,通信终端5具有解码单元50、收发单元51、操作单元52、再现控制单元53、渲染单元55、时间控制单元56、延迟信息获取单元57、显示单元58、编码单元60和绘制控制单元64。此外,通信终端5具有用图7所示的RAM203构造的存储单元5000。在此存储单元5000中,存储指示下述时间差Δ的时间差信息(Δ)、指示通信终端5处的时间t的时间信息(t)。
解码单元50解码已经由分发管理设备2分发并从再现控制单元53输出的视频(声音)数据[AEp]。
收发单元51与分发管理设备2的收发单元31、以及下述终端管理设备7的收发单元71a执行各种数据、请求等的发送和接收。例如,收发单元51在通信终端5的登陆处理中基于操作单元52对通信终端5的激活,执行对于终端管理设备7的收发单元71a的登陆请求。
操作单元52执行接受用户的操作输入的处理。例如,操作单元52接受用电源开关、键盘、鼠标、电子笔P等进行的输入、选择等,并将其作为操作数据[p]发送至分发管理设备2的浏览器管理单元22。此外,操作单元52将操作数据[p]发送至绘制控制单元64。
再现控制单元53执行从收发单元51接收的视频(声音)数据[AEp](实时数据分组)的缓冲,以考虑再现延迟时间U而向解码单元50输出。再现延迟时间U由收发单元51从分发管理设备2接收,并通知给再现控制单元53。再现控制单元53将再现延迟时间U存储在存储单元5000中。此外,再现控制单元53计算指示发送延迟时间D1的发送延迟时间信息(D1)以输出至延迟信息获取单元57。
渲染单元55执行由解码单元50已经解码的数据的渲染。
时间控制单元56执行与分发管理设备2的时间获取单元26协调的时间调整的处理。具体地,时间控制单元56从存储单元5000获取指示通信终端5处的时间t的时间信息(t)。此外,时间控制单元56通过收发单元51和收发单元31向分发管理设备2的时间获取单元26请求指示分发管理设备2处的时间T的时间信息(T)。在此情况下,时间信息(t)与对于时间信息(T)的请求一起发送。
延迟信息获取单元57从再现控制单元53获取指示发送延迟时间D1的发送延迟时间信息(D1)并保持预定时间,并且当获取多条发送延迟时间信息(D1)时,通过收发单元51和收发单元31将指示发送延迟时间D1的频率分布的发送延迟时间信息(D)发送至线路适配控制器27。注意,发送延迟时间信息(D)例如在100帧中发送一次。
显示单元58再现已经由渲染单元55渲染的数据。
编码单元60将从内部麦克风213(参照图7)或外部相机62和麦克风63获取然后编码的视频(声音)数据[E]、从存储单元5000获取的指示通信终端5在当前点的时间t0的时间信息(t0)、以及也是从存储单元5000获取的指示时间差Δ的时间差信息(Δ)通过收发单元51和收发单元31发送至分发管理设备2的解码单元40。时间差Δ是分发管理设备2管理的自身的时间T与通信终端5管理的自身的时间t之间的差。此外,编码单元60基于从线路适配控制器37b接收的线路适配控制信号指示的操作条件,改变编码单元60的操作条件。此外,当改变操作条件时,编码单元60根据新操作条件,将从相机62和麦克风63获取的视频(声音)数据[E]、从存储单元5000获取的指示在当前时间通信终端5处的时间t0的时间信息(t0)、以及从存储单元5000获取的指示时间差Δ的时间差信息(Δ)通过收发单元51和收发单元31发送至分发管理设备2的解码单元40。
注意,内部麦克风213和外部相机62以及麦克风63是输入单元的一个示例,并且是需要编码和解码的各种设备。输入单元能够输出视频(声音)数据以外的触摸数据或气味数据。
输入单元包括各种传感器,诸如温度传感器、方向传感器和加速度传感器。在图13中,示出作为视频会议终端的通信终端5e连接到作为电子黑板的通信终端5f1、并且通信终端5e的相机和麦克风用作通信终端5f1的外部相机62和麦克风63的示例。
绘制控制单元64从操作单元52接收操作数据[p]。绘制控制单元64基于操作数据[p]指示渲染单元55以执行渲染。因此,显示单元58基于操作数据[p]临时显示绘制信息,直至从分发管理设备2接收包括基于操作数据[p]的绘制信息的上述公开显示信息或非公开显示信息并将其显示在通信终端5f1上。以下,基于操作数据[p]临时绘制的绘制信息称为“本地绘制信息”。此外,绘制控制单元64从存储单元5000读取再现延迟时间U,并且当公开显示信息或非公开显示信息的显示调度时间来临时指示渲染单元55删除本地绘制信息。
(终端管理设备的功能配置)
接下来,使用图14说明终端管理设备7的功能配置。图14是示出终端管理设备7的各个功能的功能框图。
终端管理设备7通过与图7所示的相同硬件配置和程序实现图14所示的各个功能组件。具体地,终端管理设备7具有收发单元71a、收发单元71b和认证单元75。此外,终端管理设备7具有由图7所示的HDD204构成的存储单元7000。在此存储单元7000中,存储分发目的地选择菜单数据7040、终端管理表7010和可用终端管理表7020。
分发目的地选择菜单是示出如图15所示的分发目的地选择菜单屏幕的数据。图15是分发目的地选择菜单屏幕的概念图。在图15所示的此分发目的地选择菜单屏幕中,对于可选择为视频(声音)数据的分发目的地的通信终端5,以列表形式显示下述共享ID和显示器名称。在此分发目的地选择菜单屏幕上,通过检查期望成为视频(声音)数据的分发目的地的通信终端5的项目并按下“确定”按钮,用户可以使视频(声音)数据分发至期望通信终端5。
图16是终端管理表7010的概念图。在终端管理表7010中,如图16所示,以关联方式管理登记的通信终端5的终端ID、用户证书、当用户使用分发系统1的服务时的合同信息、通信终端5的终端类型、指示各个通信终端5的归属统一资源定位符(URL)的设置信息、各个通信终端5的操作环境信息、共享ID、安装位置信息和显示器名称信息。在这些中,在操作环境信息中,包括各个终端5的“喜好”、“之前浏览器缓存信息”和“高速缓存文件”,并且与各个通信终端5登陆之后的设置信息一起发送至分发管理设备2,以用于提供对各个通信终端5定制的服务。
此外,共享ID是当通过分发与分发至自身通信终端5的视频(声音)数据相同的视频(声音)数据至其他通信终端5而执行远程共享处理时使用的ID,并且是用于标识其他通信终端或其他通信终端组的标识信息。在图16所示的示例中,终端ID“t006”的共享ID是“v006”,并且终端ID“t007”的共享ID是“v006”,并且终端ID“t008”的共享ID是“v006”。此外,当从终端ID“t001”的通信终端5a进行用于与共享ID“v006”的通信终端5f1、5f2和5f3进行远程共享处理的请求时,分发管理设备2将与正分发至通信终端5a的视频(声音)数据相同的视频(声音)数据分发至通信终端5f1、5f2和5f3。然而,当通信终端5f1、5f2和5f3的显示单元58的分辨率彼此不同时,分发管理设备2据此管理视频(声音)数据。
安装位置信息指示例如以如图4所示的对齐方式布置通信终端5f1、5f2和5f3的多个单元时的安装位置。显示器名称信息是指示在如图15所示的分发目的地选择菜单屏幕中的显示器名称的信息。
图17是可用终端管理表7020的概念图。在可用终端管理表7020中,对于每个终端ID,以关联方式管理指示其他通信终端或其他通信终端组的共享ID,由终端ID指示的通信终端5能与所述其他通信终端或所述其他通信终端组执行远程共享处理。
接下来,返回图14,说明各个功能组件。
收发单元71a与通信终端5执行各种数据、请求等的发送和接收。例如,收发单元71a从通信终端5的收发单元51接收登陆请求,并且将用于登陆请求的认证结果发送至收发单元51。
收发单元71b与分发管理设备2执行各种数据、请求等的发送和接收。例如,收发单元71b从分发管理设备2的收发单元21接收对于分发目的地选择菜单的数据的请求,并且将分发目的地选择菜单的数据发送至收发单元21。
认证单元75基于从通信终端5的收发单元51接收的终端ID和用户证书,通过搜索终端管理表7010确定是否存在终端ID和用户证书的相同组合,从而执行通信终端5的认证。
[实施例的操作和处理]
下面,使用图18至图25说明本实施例的操作或处理。
<基本分发处理>
首先,使用图18说明在图13所示的基本分发方法中的特定分发处理。图18是示出分发管理设备2的基本分发处理的序列图。尽管这里说明使用通信终端5a进行登陆请求的情况,但是可以使用通信终端5a以外的通信终端5登陆。
如图18所示,当用户开启通信终端5时,通信终端5a的收发单元51将登陆请求发送至终端管理设备7的收发单元71a(步骤S21)。因此,终端管理设备7的收发单元71a接收登陆请求以输出至认证单元75。在此登陆请求中,包括通信终端5a的终端ID和用户证书。因此,认证单元75获取通信终端5a的终端ID和用户证书。
接下来,终端管理设备7的认证单元75基于从通信终端5a接收的终端ID和用户证书,通过搜索终端管理表7010确定是否存在终端ID和用户证书的相同组合,从而执行通信终端5a的认证(步骤S22)。这里,下面说明在终端管理表7010中存在终端ID和用户证书的相同组合,即,当通信终端5a被认证为分发系统1中的适当终端的情况。
接下来,终端管理设备7的收发单元71a将分发管理设备2的IP地址发送至通信终端5a的收发单元51(步骤S23)。分发管理设备2的IP地址是通过终端管理设备7从分发管理设备2获取的并提前存储在存储单元7000中。
接下来,终端管理设备7的收发单元71b向分发管理设备2的收发单元21做出浏览器20的激活请求(步骤S24)。因此,收发单元21接收浏览器20的激活请求。浏览器管理单元22基于由收发单元21接收的激活请求激活浏览器20(步骤S25)。接下来,编码器桥单元30的创建选择传送单元310根据通信终端5a的再现性能(显示分辨率等)和内容的类型创建转换单元10(步骤S26)。
接下来,收发单元21根据浏览器20的指示向网络服务器8请求内容数据[A](步骤S27)。响应于此,网络服务器8从其存储单元(未示出)读取所请求的内容数据[A](步骤S28)。网络服务器8将内容数据[A]发送至分发管理设备2的收发单元21(步骤S29)。
接下来,浏览器20通过执行由收发单元21接收的内容数据[A]的渲染而创建作为静态图像(声音)数据[A]的各个帧数据,以输出至发送FIFO24(步骤S30)。转换单元10然后编码存储在发送FIFO24中的帧数据,以转换为要分发至通信终端5a的视频(声音)数据[A](步骤S31)。
接下来,收发单元31将视频(声音)数据[A]发送至通信终端5a的收发单元51(步骤S32)。因此,通信终端5a的收发单元51接收视频(声音)数据[A]以输出至再现控制单元53。
接下来,在通信终端5a中,解码单元50从再现控制单元53获取视频(声音)数据[A]以执行解码(步骤S33)。然后,扬声器61基于解码的声音数据[A]再现声音,并且显示单元58基于已经从解码单元50获取并由渲染单元55渲染的视频数据[A]再现视频(步骤S34)。
<时间调整的处理>
下面,使用图19说明时间调整的处理。图19是示出在分发管理设备2与通信终端5之间执行的时间调整的处理的序列图。
首先,通信终端5的时间控制单元56从存储单元5000获取通信终端5处的时间信息(ts),以获取指示当收发单元51向分发管理设备2请求时间信息(T)时的时间点的时间(步骤S81)。收发单元51然后向收发单元31请求分发管理设备2处的时间信息(T)(步骤S82)。在此情况下,将时间信息(ts)与对于时间信息(T)的请求一起发送。
接下来,分发管理设备2的时间获取单元26从时间管理单元25获取分发管理设备2处的时间信息(Tr),以获取指示当收发单元31接收上述步骤S82处做出的请求时的时间点的时间(步骤S83)。此外,时间获取单元26从时间管理单元25获取分发管理设备2处的时间信息(Ts)以获取指示当收发单元31响应在上述步骤S82做出的请求时的时间点的时间(步骤S84)。收发单元31然后将时间信息(ts,Tr,Ts)发送至收发单元51(步骤S85)。
通信终端5的时间控制单元56从存储单元5000获取通信终端5处的时间信息(tr),以获取指示当收发单元51接收在上述步骤S85处做出的响应时的时间点的时间(步骤S86)。
通信终端5的时间控制单元56计算分发管理设备2与通信终端5之间的时间差Δ(步骤S87)。此时间差Δ通过下面的等式(1)表示。
Δ=((Tr+Ts)/2)-((tr+ts)/2)(1)
时间控制单元56然后将指示时间差数据Δ的时间差信息(Δ)存储在存储单元5000中(步骤S88)。例如每一分钟周期性地执行一系列时间调整处理。
<下行链路线路适配控制的处理>
然后,使用图20说明从分发管理设备2发送至通信终端5的(下行链路)数据的线路适配控制的处理。图20是示出从分发管理设备2发送至通信终端5的数据的线路适配控制的处理的序列图。
首先,线路适配控制器27计算指示再现延迟时间(U)的再现延迟时间信息(U),以输出至编码器桥单元30(步骤S101),所述再现延迟时间(U)用于通过在通信终端5的再现控制单元53再现视频(声音)数据之前执行缓冲而延迟再现。
接下来,收发单元31从编码器桥单元30获取再现延迟时间信息(U),并将再现延迟时间信息(U)发送至通信终端5的收发单元51(步骤S102)。因此,通信终端5的收发单元51接收再现延迟时间信息(U)。此外,编码器桥单元30将指示从时间管理单元25进行获取的时间点的时间T0的时间信息(T0)添加到已经从发送FIFO24获取并通过编码等处理的视频(声音)数据[A]作为时间戳(步骤S103)。收发单元31将视频(声音)数据和分发管理设备2的时间信息(T0)发送至通信终端5的收发单元51(步骤S104)。因此,通信终端5的收发单元51接收视频(声音)数据和分发管理设备2的时间信息(T0),并将视频(声音)数据和时间信息(T0)输出至再现控制单元53。
接下来,在通信终端5中,再现控制单元53等待直到基于在上述步骤S102获取的再现延迟时间信息(U)、在上述步骤S104获取的时间信息(T0)和在图19中的步骤S88处存储在存储单元5000中的时间差信息(Δ)的时间(T0+U-Δ)来临,以将视频(声音)数据输出至解码单元50,从而使得扬声器61再现声音并且显示器单元58通过渲染单元55再现视频(步骤S105)。因此,仅在下面等式(2)表示的再现时间U的范围内再现由通信终端5接收的视频(声音)数据,并且因为范围外的视频(声音)数据被延迟太多,所以其被删除而不再现。
U≥(t0+Δ)-T0(2)
此外,再现控制单元53从存储单元5000读取通信终端5中当前时间的时间t0(步骤S106)。此时间t0指示在当通过通信终端5从分发管理设备2接收视频(声音)数据时在通信终端5处的时间。此外,再现控制单元53从存储单元5000读取指示在图19中的步骤S88存储的指示时间差Δ的时间差信息(Δ)(步骤S107)。再现控制单元53然后计算指示视频(声音)数据从被分发管理设备2发送直到被通信终端5接收的时间的发送延迟时间D1(步骤S108)。此计算通过下面的等式(3)进行。当通信网络9繁忙时,发送延迟时间D1会很长。
D1=(t0+Δ)-T0(3)
接下来,延迟信息获取单元57从再现控制单元53获取指示发送延迟时间D1的发送延迟时间信息(D1)并保持预定时间,并且当获取多条发送延迟时间信息(D1)时将指示发送延迟时间D1的频率分布信息的发送延迟时间信息(D)输出至收发单元51(步骤S109)。收发单元51然后将发送延迟时间信息(D)发送至分发管理设备2的收发单元31(步骤S110)。因此,分发管理设备2的收发单元31接收发送延迟时间信息(D),并将发送延迟时间信息(D)输出至线路适配控制器27。
接下来,分发管理设备2的线路适配控制器27基于发送延迟时间信息(D)新计算再现延迟时间U’,并计算操作条件,诸如转换单元10的帧率和数据分辨率(步骤S111),以输出至编码器桥单元30。即,线路适配控制器27基于发送延迟时间信息(D)和数据尺寸(比特数,字节数)改变编码器桥单元30的行为。
接下来,收发单元31从编码器桥单元30获取指示在上述步骤S111新计算的再现延迟时间U’的再现延迟时间信息(U’),并将再现延迟时间信息(U’)发送至通信终端5的收发单元51(步骤S112)。因此,通信终端5的收发单元51接收再现延迟时间信息(U’)。
此外,编码器桥单元30中的转换单元10基于指示操作条件的线路适配控制信号,改变转换单元10的操作条件(步骤S113)。例如,当发送延迟时间D1过长时,因为如果根据发送延迟时间D1增加再现延迟时间U则扬声器61和显示单元58处的再现时间过长,所以对于增加再现延迟时间U存在限制。因此,线控制适配器27不仅通过使得编码器桥单元30将再现延迟时间U改变为再现延迟时间U’,而且通过使得转换单元10降低视频(声音)数据的帧率或降低视频(声音)数据的分辨率,而处理通信网络9的拥塞。因此,编码器桥单元30将当前时间的时间信息(T0)添加至视频(声音)数据[A]作为如上述步骤S103指示的时间戳(步骤S114)。收发单元31然后将视频(声音)数据和分发管理设备2的时间信息(T0)发送至通信终端5的收发单元51(步骤S115)。因此,通信终端5的收发单元51接收视频(声音)数据和分发管理设备2的时间信息(T0),并将视频(声音)数据和时间信息(T0)输出至再现控制单元53。
接下来,在通信终端5中,再现控制单元53等待直到基于在上述步骤S112获取的再现延迟时间信息(U’)、在上述步骤S115获取的时间信息(T0)和在图19中的步骤S88存储在存储单元5000中的时间差信息(Δ)的通信终端5处的时间(T0+U’-Δ)来临,然后将视频(声音)数据输出至解码单元50,从而使得扬声器61再现声音,并且显示单元通过渲染单元55再现视频(步骤S116)。以下,随后执行上述步骤S106及之后的处理。因此,接连执行下行链路线路适配控制的处理。
<上行链路线路适配控制的处理>
接下来,使用图21说明要从通信终端5发送至分发管理设备2的(上行链路)数据的线路适配控制的处理。图21是示出要从通信终端5发送至分发管理设备2的数据的线路适配控制的处理的序列图。
首先,通信终端5的编码单元60编码从相机62和麦克风63输入的作为视频(声音)数据[E]的内容数据(步骤S121)。此时,编码单元60从存储单元5000获取指示在当前时间在通信终端5处的时间t0的时间信息(t0)以及指示时间差Δ的时间差信息(Δ),但不执行其编码。收发单元51将视频(声音)数据[E]、时间信息(t0)和时间差信息(Δ)发送至分发管理设备2的收发单元31(步骤S122)。因此,分发管理设备2的收发单元31接收视频(声音)数据[E]、时间信息(t0)和时间差信息(Δ)。
接下来,在分发管理设备2中,解码单元40从时间管理单元25读取指示当在上述步骤S122接收的视频(声音)数据[E]等时的时间点的时间T0(步骤S123)。解码单元40然后计算指示从通信终端5发送视频(声音)数据直到在分发管理设备2接收视频(声音)数据的时间段的发送延迟时间d1(步骤S124)。此计算通过下面的等式(4)执行。当通信网络9繁忙时,发送延迟时间d1过长。
d1=T0-(t0+Δ)(4)
接下来,类似于通信终端5的延迟信息获取单元57,分发管理设备2的延迟信息获取单元37a从解码单元40获取指示发送延迟时间d1的发送延迟时间信息(d1),并将其保持预定时间,并且当获取多条发送延迟时间信息(d1)时将指示发送延迟时间d1的频率分布信息的发送延迟时间信息(d)输出至线路适配控制器37b(步骤S125)。
接下来,线路适配控制器37b基于发送延迟时间信息(d)计算通信终端5的编码单元60的操作条件(步骤S126)。收发单元31然后将指示操作条件(诸如数据的分辨率和帧率)的线路适配控制信号发送至通信终端5的收发单元51(步骤S127)。因此,通信终端5的收发单元51接收线路适配控制信号。即,虽然对于下行链路情况下的线路适配控制器37b线路适配控制信号输出到同一分发管理设备2中的编码器桥单元30,但是对于上行链路情况下的线路适配控制器37b,线路适配控制信号从分发管理设备2通过通信网络9发送至通信终端5。
接下来,通信终端5的编码单元60基于通过由收发单元51接收的线路适配控制信号指示的操作条件,改变编码单元60的操作条件(步骤S128)。编码单元60然后根据新操作条件执行与上述步骤S121类似的处理(步骤S129)。收发单元51将已经从相机62和麦克风63获取并已经编码的视频(声音)数据[E]、从存储单元5000获取的指示在当前时间在通信终端5的时间t0的时间信息(t0)和类似地从存储单元5000获取的指示时间差Δ的时间差信息(Δ)发送至分发管理设备2的收发单元31,如上面步骤S122指示的(步骤S130)。因此,分发管理设备2的收发单元31接收视频(声音)数据[E]、时间信息(t0)和时间差信息(Δ)。此后,接下来执行上面步骤S123及之后的处理。因此,接连执行上行链路线路适配控制的处理。
<多显示器的处理>
接下来,使用图22至图24说明多显示器的处理。图22至图24是示出图4所示的多显示器的处理的序列图。
这里,给出以分割方式将在通信终端5a再现的视频(声音)数据[XYZ]也再现在各个通信终端(5f1,5f2,5f3)上的示例。
此外,在此示例中,用于显示网络内容的浏览器20表示为“内容浏览器20a”,并且用于显示用于用户的设置屏幕的浏览器20表示为“设置浏览器20b”。首先说明对应于图18中的步骤S30的处理。
首先,如图22所示,分发管理设备2的内容浏览器20a通过执行从网络服务器8获取的网络内容[XYZ]的渲染创建作为静态图像(声音)数据的各个帧数据,并输出至发送FIFO24(步骤S201)。编码器桥单元30的转换单元10编码发送FIFO24中存储的视频(声音)数据以转换为能分发至通信终端5a的数据格式的视频(声音)数据[XYZ]。
接下来,分发管理设备2的收发单元31将通过上述转换单元10转换的视频(声音)数据[XYZ]发送至通信终端5a的收发单元51(步骤S203)。因此,通信终端5a的收发单元51接收视频(声音)数据[XYZ]以输出至再现控制单元53。
接下来,在通信终端5a中,解码单元50从再现控制单元53获取视频(声音)数据[XYZ]并执行其解码(步骤S204)。此后,扬声器61基于解码的声音数据[XYZ]再现声音,并且显示单元58基于从解码单元50获取并经历渲染单元55渲染的视频数据[XYZ]显示视频(步骤S205)。
接下来,显示在显示单元58上的屏幕由通信终端5a的用户切换为未示出的菜单请求屏幕,并且操作单元52接受菜单请求屏幕中未示出的“分发目的地选择菜单”的按下(步骤S206)。因此,收发单元51将用于切换至分发目的地选择菜单的请求发送至终端管理设备7的收发单元71a(步骤S207)。因此,终端管理设备7的收发单元71a接收用于切换至分发目的地选择菜单的请求。在此请求中,包括通信终端5a的终端ID。
接下来,收发单元71b将用于设置浏览器20b的激活请求发送至分发管理设备2的收发单元21(步骤S208)。因此,分发管理设备2的收发单元21接收用于设置浏览器20b的激活请求,并将用于设置浏览器20b的激活请求提供至浏览器管理单元22。
接下来,浏览器管理单元22激活设置浏览器20b(步骤S209)。编码器桥单元30的创建选择传送单元310将从内容浏览器20a至转换单元10(例如,转换单元10a)的输出切换至从设置浏览器20b至转换单元10(例如转换单元10b)的输出(步骤S210)。然而,当通信终端5a通过上述步骤S203接收与其他通信终端5(例如,通信终端5b)共享转换单元10(例如,转换单元10a)的视频(声音)数据时,所述其他通信终端5(例如,通信终端5b)正使用转换单元10(例如,转换单元10a)用于内容浏览器20。因此,编码器桥单元30的创建选择传送单元310新创建转换单元10(例如,转换单元10b)。
收发单元21然后根据来自设置浏览器20b的指示,将分发目的地选择菜单请求发送至终端管理设备7的收发单元71a(步骤S211)。此时,也发送通信终端5a的终端ID。因此,终端管理设备7的收发单元71b接收分发目的地选择菜单请求,并将通信终端5a的终端ID输出至存储单元7000。
为此,终端管理设备7的存储单元7000基于此终端ID搜索可用终端管理表7010,从而提取对应共享ID(步骤S212)。此共享ID指示可由通信终端5a用于执行远程共享处理的通信终端5。例如,当通信终端5a的终端ID是“t001”时,通过搜索可用终端管理表7020,提取共享ID“v003”和“v006”。
此外,存储单元7000通过基于所提取的共享ID搜索终端管理表7010,提取指示对应显示器名称的显示器名称信息(步骤S213)。在此示例中,如图16所示,对应于共享ID“v003”和“v006”的显示器名称分别是“东京总部10FMFP”和“大阪展厅1F多显示器”。
收发单元71b然后对于分发管理设备2的收发单元21将作为内容数据的分发目的地选择菜单数据[M]发送至分发管理设备2的设置浏览器20b(步骤S214)。因此,分发管理设备2的收发单元21接收分发目的地选择菜单数据[M]以输出至设置浏览器20b。此分发目的地选择菜单数据[M]是用于显示图15所示的分发目的地选择菜单屏幕的信息,并包括选择框、共享ID和显示器名称。
接下来,如图23所示,设置浏览器20b通过执行指示已经从终端管理设备7获取的分发目的地选择菜单数据[M]的内容数据的渲染而创建作为静态(声音)数据的各个帧数据,以输出至发送FIFO24(步骤S221)。然后,编码器桥单元30的转换单元10编码发送FIFO24中存储的各个帧数据,从而转换为能分发至通信终端5a的数据格式的视频(声音)数据[M](步骤S222)。
接下来,收发单元31将由上述转换单元10转换的视频(声音)数据[M]发送至通信终端5a的收发单元51(步骤S223)。因此,通信终端5a的收发单元51接收视频(声音)数据[M]以输出至再现控制单元53。
接下来,在通信终端5a中,解码单元50从再现控制单元53获取视频(声音)数据[M],以执行其解码(步骤S224)。此后,显示单元58基于已经从解码单元50获取并经历渲染单元55的渲染的视频数据[M],再现如图15所示的分发目的地选择菜单屏幕的视频(步骤S225)。
接下来,在图15所示的分发目的地选择菜单屏幕中,当选择共享ID“v006”的选择框并且用户按下“确定”按钮时,操作单元52接受用户做出的操作输入(步骤S226)。
接下来,收发单元51将作为操作数据[p]的选择结果发送至分发管理设备2的收发单元31(步骤S227)。因此,分发管理设备2的收发单元31接收作为操作数据[p]的选择结果以输出至设置浏览器20b。
接下来,设置浏览器20b从选择结果选择共享ID(步骤S228)。收发单元21然后根据来自设置浏览器20b的指示,将分发目的地添加请求发送至终端管理设备7的收发单元71b(步骤S229)。在此分发目的地添加请求中,包括在上述步骤S228选择的共享ID。因此,终端管理设备7的收发单元71b接收分发目的地添加请求,并将共享ID输出至存储单元7000。已经实现任务后,设置浏览器20b结束(步骤S230)。此后,编码器桥单元30的创建选择传送单元310将从设置浏览器20b至转换单元10的输出切换回从内容浏览器20a至转换单元10的输出(步骤S231)。
接下来,如图24所示,在终端管理设备7的存储单元7000中,通过基于已经在上面步骤S229接收的共享ID搜索终端管理表7010,提取对应终端ID和安装位置信息(步骤S241)。收发单元71b然后将分发目的地的添加请求发送至分发管理设备2的收发单元21(步骤S242)。在此分发目的地的添加请求中,包括在上面步骤S241提取的终端ID和安装位置信息。因此,分发管理设备2的收发单元21接收分发目的地的添加指示,并将分发目的地的添加指示输出至浏览器管理单元22。在此示例中,假设包括终端ID和安装位置信息的三个集合:终端ID“t006”和安装位置信息“左”、终端ID“t007”和安装位置信息“中”、以及终端ID“t008”和安装位置信息“右”。
接下来,编码器桥单元30的创建选择传送单元310创建用于多显示器的转换单元10(步骤S243)。在此情况下,创建选择传送单元310从浏览器管理单元22获取终端ID和安装位置信息。
然后,在上面步骤S243创建的转换单元10的分割单元13分割作为发送FIFO24中存储的静态图像(声音)数据的各个帧数据[XYZ],并且编码单元19编码分割的各个帧数据(步骤S244)。
收发单元31基于终端ID(“t006”)和安装位置信息(“左”),将编码器桥单元30编码的视频(声音)数据[X]发送至通信终端5f1的收发单元51(步骤S245_1)。因此,通信终端5f1的收发单元51接收视频(声音)数据[X]以输出至再现控制单元53。
接下来,在通信终端5f1中,解码单元50从再现控制单元53获取视频(声音)数据[X]并执行其解码(步骤S246_1)。此后,扬声器61基于解码的声音数据[X]再现声音,并且显示单元58基于已经从解码单元50获取并经历渲染单元55的渲染的视频数据[X]再现视频(步骤S247_1)。
此外,类似的,收发单元31基于终端ID(“t007”)和安装位置信息(“中”),将编码器桥单元30编码的视频(声音)数据[Y]发送至通信终端5f2的收发单元51(步骤S245_2)。因此,通信终端5f2的收发单元51接收视频(声音)数据[Y]以输出至再现控制单元53。
接下来,在通信终端5f2中,解码单元50从再现控制单元53获取视频(声音)数据[Y]并执行其解码(步骤S246_2)。此后,扬声器61基于解码的声音数据[Y]再现声音,并且显示单元58基于已经从解码单元50获取并经历渲染单元55的渲染的视频数据[Y]再现视频(步骤S247_2)。
此外,类似的,收发单元31基于终端ID(“t008”)和安装位置信息(“右”),将编码器桥单元30编码的视频(声音)数据[Z]发送至通信终端5f3的收发单元51(步骤S245_3)。因此,通信终端5f3的收发单元51接收视频(声音)数据[Z]以输出至再现控制单元53。
接下来,在通信终端5f3中,解码单元50从再现控制单元53获取视频(声音)数据[Z]并执行其解码(步骤S246_3)。此后,扬声器61基于解码的声音数据[Z]再现声音,并且显示单元58基于已经从解码单元50获取并经历渲染单元55的渲染的视频数据[Z]再现视频(步骤S247_3)。
<操作数据的分发的处理>
下面,使用图25至图28B说明操作数据的分发的处理。图25是示出非公开操作数据的绘制处理的序列图。分发管理设备2的浏览器20渲染作为通信终端5f1和通信终端5f2的背景图像的内容A以输出(步骤S301)。分发管理设备2的编码器桥单元30编码渲染的内容A以发送至通信终端5f1和通信终端5f2。
接下来,分发管理设备2的收发单元31将编码内容A发送至通信终端5f1(步骤S302)。通信终端5f1的收发单元51接收编码内容A。通信终端5f1的再现控制单元53将编码内容A发送至解码单元50。通信终端5f1的解码单元50解码编码内容A以发送至渲染单元55。通信终端5f1的渲染单元55渲染解码内容A以在显示单元58上显示为背景图像(步骤S303)。
类似的,分发管理设备2的收发单元31将编码内容A发送至通信终端5f2(步骤S304)。通信终端5f2的收发单元51接收编码内容A。通信终端5f2的再现控制单元53将编码内容A发送至解码单元50。通信终端5f2的解码单元50解码编码内容A以发送至渲染单元55。通信终端5f2的渲染单元55渲染解码内容A以在显示单元58上显示为背景图像(步骤S305)。
接下来,通信终端5f1的操作单元52接受操作数据的设置信息。在图25所示的示例中,通信终端5f1的操作单元52接受操作数据的非公开设置(步骤S306)。这里说明接受操作数据的设置信息的方法。
图27是用于操纵与操作数据的分发有关的设置信息的屏幕的概念图。图27示出在通信终端5f1的显示单元58的屏幕的右下部显示非公开设置按钮510、公开设置按钮511和非公开绘制信息删除按钮512的示例。操作单元52检测通过电子笔等对非公开设置按钮510、公开设置按钮511或非公开绘制信息删除按钮512的按压。操作单元52将在非公开设置按钮510按压之后做出的操作输入的操作数据处理为设置为非公开的操作数据。操作单元52将在公开设置按钮511按压之后做出的操作输入的操作数据处理为设置为公开的操作数据。此外,当按压非公开绘制信息删除按钮512时,操作单元52将用于删除设置为非公开的绘制信息的删除请求通过收发单元51发送至分发管理设备2。非公开设置按钮510是用于设置在自身终端(例如,在此示例中,通信终端5f1)中绘制的绘制信息要显示在自身终端上但不显示在其他终端(例如,在此示例中,通信终端5f2)上的按钮。此外,公开设置按钮511是用于设置在自身终端(例如,在此示例中,通信终端5f1)中绘制的绘制信息要显示在自身终端上并且也显示在其他终端(例如,在此示例中,通信终端5f2)上的按钮。此外,非公开绘制信息删除按钮512是用于设置将已经在自身终端(例如,在此示例中,通信终端5f1)中绘制和显示的绘制信息从自身终端删除的按钮。
返回图25,通信终端5f1的操作单元52接受指示通过电子笔等进行的操作输入的操作数据(步骤S307)。通信终端5f1的操作单元52将操作数据发送至绘制控制单元64。绘制控制单元64指示渲染单元55基于操作数据执行渲染。接下来,渲染单元55将基于操作数据的本地绘制信息显示在显示单元58上(步骤S308)。接下来,通信终端5f1的操作单元52将终端发送信息发送至分发管理设备2,在所述终端发送信息中,指示接受的操作输入的操作数据、指示非公开设置的设置信息和用于标识通信终端5f1的标识信息彼此相关联(步骤S309)。如上所述,绘制信息仅在作为自身终端的通信终端5f1上显示,并且通信终端5f1的绘制信息不在作为其他终端的通信终端5f2上显示。
分发管理设备2的浏览器管理单元22通过收发单元31接收包括通信终端5f1的操作数据的终端发送信息。浏览器管理单元22将包括通信终端5f1的操作数据的终端发送信息发送至浏览器20。浏览器20从自通信终端5f1接收的终端发送信息创建图10所示的绘制信息表7030的记录(步骤S310)。具体地,浏览器20基于终端发送信息的操作数据设置绘制命令信息字段和坐标信息字段,并基于终端发送信息的通信终端5f1的标识信息设置终端信息字段(5f1),并将终端发送信息的设置信息(非公开)设置为设置信息字段(非公开)。
当创建公开显示信息时,分发管理设备2的浏览器20不使用绘制信息表7030中具有设置为非公开的设置信息字段的记录。注意,绘制信息表7030中具有设置为非公开的设置信息字段的记录可以用作非公开绘制信息的备用。这使得即使通信终端5f1的非公开绘制信息由于电力中断而丢失,也能够恢复非公开绘制信息。
接下来,通信终端5f1的操作单元52通过图27所示的非公开绘制信息删除按钮512接受非公开绘制信息的删除(步骤S311)。接下来,绘制控制单元64指示渲染单元55删除在步骤S308显示的本地绘制信息。接下来,渲染单元55删除本地绘制信息(步骤S312)。如上所述,从自身终端删除已经在自身终端(在此示例中,例如,通信终端5f1)绘制和显示的绘制信息。
注意,可以省略步骤S309和S310的步骤。即,终端发送信息不需要发送至分发管理设备2。在此情况下,通过仅在通信终端5f1中保持终端发送信息,可以确保安全性。
接下来,说明将操作数据的分发的设置信息从非公开设置切换为公开设置的处理。图26是示出公开非公开操作数据的处理的序列图。因为步骤S321至S330与图25中的步骤S301至S310相同,所以省略其说明。
接下来,通信终端5f1的操作单元52检测图27中公开设置按钮511的按压(步骤S331)。然后,通信终端5f1的操作单元52将包括通信终端5f1的标识的设置信息的改变通知通过收发单元51发送至分发管理设备2(步骤S332)。
接下来,分发管理设备2的浏览器管理单元22通过收发单元31接收设置信息的改变通知。浏览器管理单元22将设置信息的改变通知发送至浏览器20。浏览器20搜索绘制信息表7030中包括与设置信息的改变通知中包括的标识信息对应的终端信息的记录,并将此记录的设置信息从非公开更新为公开(步骤S333)。然后,浏览器20从绘制信息表7030和背景图像(内容A)创建公开显示信息(步骤S334)。浏览器20将公开显示信息输出至发送FIFO24。编码器桥单元30从发送FIFO24读取公开显示信息并执行其编码。编码器桥单元30将编码的公开显示信息通过收发单元31发送至通信终端5f1和通信终端5f2(步骤S335和步骤S336)。
接下来,通信终端5f1的收发单元51接收编码的公开显示信息。通信终端5f1的再现控制单元53将编码的公开显示信息发送至解码单元50。通信终端5f1的解码单元50解码编码的公开显示信息以发送至渲染单元55。然后,绘制控制单元64从存储单元5000读取再现延迟时间U,并在公开显示信息的显示调度时间已经来临时指示渲染单元55删除在步骤S328显示的本地绘制信息。接下来,渲染单元55删除本地绘制信息(步骤S337)。然后,渲染单元55执行解码的公开显示信息的渲染以显示在显示单元58上(步骤S338)。
此外,通信终端5f2的收发单元51接收编码的公开显示信息。通信终端5f2的再现控制单元53将编码的公开显示信息发送至解码单元50。通信终端5f2的解码单元50解码编码的公开显示信息以发送至渲染单元55。然后,渲染单元55执行解码的公开显示信息的渲染以显示在显示单元58上(步骤S339)。如所示,在自身终端(例如,在此示例中,通信终端5f1)上显示已经在自身终端中绘制和显示的绘制信息,并且进一步地绘制信息也在其他终端(例如,在此示例中,通信终端5f2)上显示。
注意,步骤S329和步骤S330的步骤可以省略。即,终端发送信息不需要发送至分发管理设备2。在此情况下,通过仅在通信终端5f1中保持终端发送信息,并且通过控制为当在步骤S331接受非公开绘制信息的公开时将终端发送信息发送至分发管理设备2,可以确保安全性。
图28A是示出公开显示信息的显示示例的图。图28A示出包括来自通信终端5f2的书写520和来自通信终端5f2的书写521的情况。图28B是示出非公开显示信息的显示示例的图。图28B示出包括来自通信终端5f2的书写520、来自通信终端5f2的书写521和来自通信终端5f1的书写522(非公开)的情况。即使当如图28B所示存在来自通信终端5f1的书写522(非公开)时,在通信终端5f2处,也不显示来自通信终端5f1的书写522(非公开),并且显示图28A所示的屏幕。另一方面,在通信终端5f1处,显示包括来自通信终端5f1的书写522(非公开)的图28B所示的屏幕。
[实施例的主要效果]
如上面用特定示例详细说明的,在本实施例的分发系统1中,分发管理设备2具有浏览器20和在云端执行编码等的编码器桥单元30。因此,浏览器20从以预定描述语言描述的内容数据创建视频数据和声音数据,并且编码器桥单元30转换数据格式以便能够通过通信网络9分发以分发至通信终端5。因此,在通信终端5中,接收以预定描述语言描述的内容数据的负担和接收之后将数据转换为视频数据和声音数据的负担减小,因此,可以解决支持丰富内容的繁重负担的问题。
具体地,浏览器20使得能够实时通信,并且转换单元10对浏览器20生成的视频(声音)数据执行实时编码。因此,例如,与通过DVD播放器选择非实时的(即,预先编码的)视频(声音)数据以作为视频(声音)数据的按需分发而分发的情况不同,分发管理设备2的处理使得能够进行具有非常好的实时性质的视频(声音)数据的分发,因为渲染分发前正确获取的内容以创建视频(声音)数据然后编码。
根据本实施例的分发系统1,可以以区分方式在终端上显示仅在自身通信终端5处显示的绘制信息、以及也在其他通信终端5处显示的绘制信息。
在本实施例的分发系统1的说明中,已经说明了即使当通信终端5的操作数据的设置信息为非公开时也将包括操作数据的终端发送信息发送至分发管理设备2的通信终端5的操作(图25中的步骤S309)。然而,当通信终端5的操作数据的设置信息为非公开时,通信终端5可以操作以不将操作数据发送至分发管理设备2。即,当操作数据的设置信息为非公开时,通信终端5基于自身通信终端5上的操作数据显示绘制信息作为本地绘制信息。当操作数据的设置信息从非公开变为公开时,将包括已经作为本地绘制信息显示的操作数据的终端发送信息发送至分发管理设备2。因此,分发管理设备2将包括其设置信息从非公开变为公开的操作数据的公开显示信息分发至其他通信终端5。
[补充说明]
尽管在本实施例的分发系统1中终端管理设备7和分发管理设备2配置为彼此分开的独立设备,但是例如终端管理设备7和分发管理设备2可以例如通过使得分发管理设备2具有终端管理设备7的功能而配置为集成设备。
此外,上述实施例中的分发管理设备2和终端管理设备7可以由单个计算机构成,或可以由任意分配其各个分开的组件(功能、单元或存储单元)的多个计算机构成。
此外,诸如其中存储上述实施例的各个程序的致密盘(CD)-ROM和其中存储这些程序的HDD204的记录介质两者可在国内外提供为程序产品。
引用列表
专利文献
专利文献1:日本特开专利申请No.2005-204046
Claims (5)
1.一种分发管理设备,通过网络与多个终端连接,所述分发管理设备包括:
创建单元,基于指示终端接受的操作输入的操作信息创建显示信息;
转换单元,将显示信息转换为视频信息;以及
分发单元,将视频信息分发至终端;其中
当从终端接收指示不对另一终端公开的操作信息的非公开操作信息时,所述分发单元将从不基于非公开操作信息的显示信息转换的视频信息分发至所述另一终端。
2.如权利要求1所述的分发管理设备,其中
当从所述终端接收要对所述另一终端公开的公开操作信息时,所述分发单元将从基于所述公开操作信息的显示信息转换的视频信息分发至所述另一终端。
3.一种终端,连接至另一终端,所述终端包括:
接收单元,接收在所述终端中绘制的绘制信息;以及
显示控制单元,在显示单元上显示绘制信息;其中
当所述接收单元接收不对另一终端公开的非公开绘制信息时,使得所述非公开绘制信息不显示在所述另一终端上。
4.如权利要求3所述的终端,其中
当所述接收单元接收删除非公开绘制信息的删除信息时,所述显示控制单元删除在所述显示单元上正显示的非公开绘制信息。
5.一种用于分发管理设备的分发管理方法,所述分发管理设备通过网络与多个终端连接,所述方法包括:
基于指示终端接受的操作输入的操作信息创建显示信息;
将显示信息转换为视频信息;
将视频信息分发至终端;以及
当从终端接收指示不对另一终端公开的操作信息的非公开操作信息时,将从不基于非公开操作信息的显示信息转换的视频信息分发至所述另一终端。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013202425 | 2013-09-27 | ||
JP2013-202425 | 2013-09-27 | ||
PCT/JP2014/073402 WO2015045787A1 (ja) | 2013-09-27 | 2014-09-04 | 配信管理装置、端末及び配信管理方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105580398A true CN105580398A (zh) | 2016-05-11 |
Family
ID=52742934
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201480052568.6A Pending CN105580398A (zh) | 2013-09-27 | 2014-09-04 | 分发管理设备、终端和分发管理方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US9596282B2 (zh) |
EP (1) | EP3051422B1 (zh) |
JP (1) | JPWO2015045787A1 (zh) |
CN (1) | CN105580398A (zh) |
WO (1) | WO2015045787A1 (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6464755B2 (ja) * | 2014-03-18 | 2019-02-06 | 株式会社リコー | 情報処理装置、情報処理方法及びプログラム |
WO2016166955A1 (en) * | 2015-04-16 | 2016-10-20 | Ricoh Company, Ltd. | Image processing device, image distribution system, and image processing method |
US10171429B2 (en) * | 2015-06-12 | 2019-01-01 | Arris Enterprises Llc | Providing security to video frames |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101031063A (zh) * | 2006-03-02 | 2007-09-05 | 富士施乐株式会社 | 电子会议系统、电子会议支持方法和设备、会议服务器 |
WO2010045857A1 (zh) * | 2008-10-20 | 2010-04-29 | 华为终端有限公司 | 会议终端、会议服务器、会议系统及数据处理方法 |
CN202004894U (zh) * | 2011-03-23 | 2011-10-05 | 兰春波 | 一种具有文字交流功能的网络视频会议系统 |
Family Cites Families (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040158704A1 (en) * | 2003-02-12 | 2004-08-12 | Avaya Technology Corp. | Providing encrypted real time data transmissions on a network |
JP2005204046A (ja) | 2004-01-15 | 2005-07-28 | Data Place Inc | 高齢者向けコミュニケーションサービスとシステム |
JP2006128951A (ja) | 2004-10-27 | 2006-05-18 | Fuji Xerox Co Ltd | 遠隔描画装置、システムおよび遠隔描画方法 |
JP2006146415A (ja) | 2004-11-17 | 2006-06-08 | Ricoh Co Ltd | 会議支援システム |
JP4892653B2 (ja) * | 2005-05-18 | 2012-03-07 | 株式会社アドイン研究所 | 端末装置、サーバシステム、これらの制御方法及び制御プログラム、ならびに情報共有システム |
IL195884A0 (en) * | 2008-12-11 | 2009-12-24 | Eci Telecom Ltd | Technique for providing secured tunnels in a public network for telecommunication subscribers |
US9183557B2 (en) * | 2010-08-26 | 2015-11-10 | Microsoft Technology Licensing, Llc | Advertising targeting based on image-derived metrics |
JP6069898B2 (ja) | 2011-11-25 | 2017-02-01 | 株式会社リコー | 画像処理装置、画像処理システム、方法およびプログラム |
JP2014200076A (ja) | 2013-03-15 | 2014-10-23 | 株式会社リコー | 配信制御システム、配信制御方法、及びプログラム |
JP6337499B2 (ja) | 2013-03-15 | 2018-06-06 | 株式会社リコー | 配信制御システム、配信システム、配信制御方法、及びプログラム |
EP2793475A1 (en) | 2013-03-15 | 2014-10-22 | Ricoh Company, Ltd. | Distribution control system, distribution control method, and computer-readable storage medium |
JP6354195B2 (ja) | 2013-03-15 | 2018-07-11 | 株式会社リコー | 配信システム、配信方法、及びプログラム |
JP6354197B2 (ja) | 2013-03-15 | 2018-07-11 | 株式会社リコー | 配信制御システム、配信制御方法、及びプログラム |
JP6398215B2 (ja) | 2013-03-15 | 2018-10-03 | 株式会社リコー | 配信制御システム、配信システム、配信制御方法、及びプログラム |
AU2014230423A1 (en) | 2013-03-15 | 2015-09-24 | Ricoh Company, Limited | Distribution control system and distribution system |
JP2014200075A (ja) | 2013-03-15 | 2014-10-23 | 株式会社リコー | コンピュータシステム、配信制御システム、配信制御方法、及びプログラム |
JP6369043B2 (ja) | 2013-03-15 | 2018-08-08 | 株式会社リコー | 配信制御システム、配信システム、配信制御方法、及びプログラム |
JP2014199648A (ja) | 2013-03-15 | 2014-10-23 | 株式会社リコー | 配信制御システム、配信システム、配信制御方法、及びプログラム |
JP6326855B2 (ja) | 2013-03-15 | 2018-05-23 | 株式会社リコー | 配信制御システム、配信システム、配信制御方法、及びプログラム |
JP2014200074A (ja) | 2013-03-15 | 2014-10-23 | 株式会社リコー | 配信制御システム、配信制御方法、及びプログラム |
JP6323048B2 (ja) | 2013-03-15 | 2018-05-16 | 株式会社リコー | 配信システム、配信方法、及びプログラム |
-
2014
- 2014-09-04 US US15/022,026 patent/US9596282B2/en not_active Expired - Fee Related
- 2014-09-04 WO PCT/JP2014/073402 patent/WO2015045787A1/ja active Application Filing
- 2014-09-04 CN CN201480052568.6A patent/CN105580398A/zh active Pending
- 2014-09-04 EP EP14847620.3A patent/EP3051422B1/en active Active
- 2014-09-04 JP JP2015539058A patent/JPWO2015045787A1/ja active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101031063A (zh) * | 2006-03-02 | 2007-09-05 | 富士施乐株式会社 | 电子会议系统、电子会议支持方法和设备、会议服务器 |
WO2010045857A1 (zh) * | 2008-10-20 | 2010-04-29 | 华为终端有限公司 | 会议终端、会议服务器、会议系统及数据处理方法 |
CN202004894U (zh) * | 2011-03-23 | 2011-10-05 | 兰春波 | 一种具有文字交流功能的网络视频会议系统 |
Also Published As
Publication number | Publication date |
---|---|
US20160234275A1 (en) | 2016-08-11 |
EP3051422A4 (en) | 2016-10-05 |
US9596282B2 (en) | 2017-03-14 |
EP3051422B1 (en) | 2019-11-06 |
JPWO2015045787A1 (ja) | 2017-03-09 |
EP3051422A1 (en) | 2016-08-03 |
WO2015045787A1 (ja) | 2015-04-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6354197B2 (ja) | 配信制御システム、配信制御方法、及びプログラム | |
JP6398215B2 (ja) | 配信制御システム、配信システム、配信制御方法、及びプログラム | |
WO2014142358A1 (en) | Distribution control system, distribution control method, and computer-readable storage medium | |
JP6337499B2 (ja) | 配信制御システム、配信システム、配信制御方法、及びプログラム | |
CN105247875B (zh) | 分发控制系统和分发系统 | |
CN105122224A (zh) | 分发控制系统、分发控制方法和计算机可读存储介质 | |
EP2974317B1 (en) | Computer system, distribution control system, distribution control method, and computer-readable storage medium | |
CN104053073A (zh) | 分发控制系统、分发系统以及分发控制方法 | |
EP2779570A1 (en) | Distribution control system, distribution system, distribution control method, and computer-readable storage medium | |
CN104052797A (zh) | 分发控制系统、分发系统和分发控制方法 | |
CN104053071A (zh) | 分发控制系统、分发系统和分发控制方法 | |
CN105580398A (zh) | 分发管理设备、终端和分发管理方法 | |
JP6589261B2 (ja) | 配信制御システム、配信制御方法、及びプログラム | |
JP2016063247A (ja) | 配信システム及び配信方法 | |
JP6607298B2 (ja) | 配信制御システム、配信制御方法、及びプログラム | |
JP6387623B2 (ja) | 配信制御システム | |
JP2016058959A (ja) | 配信制御システム、配信システム、配信制御方法及びプログラム | |
JP2014200073A (ja) | 配信制御システム、配信システム、配信制御方法、及びプログラム | |
JP2015092322A (ja) | 配信制御システム、配信システム、配信制御方法、及びプログラム | |
JP2014199649A (ja) | 配信制御システム、配信システム、配信制御方法、及びプログラム | |
JP2016015648A (ja) | 配信制御システム、配信制御方法、及びプログラム | |
JP2015220741A (ja) | 配信制御システム、配信制御方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20160511 |
|
RJ01 | Rejection of invention patent application after publication |