CN105580378B - 分发管理设备和分发方法 - Google Patents
分发管理设备和分发方法 Download PDFInfo
- Publication number
- CN105580378B CN105580378B CN201480052695.6A CN201480052695A CN105580378B CN 105580378 B CN105580378 B CN 105580378B CN 201480052695 A CN201480052695 A CN 201480052695A CN 105580378 B CN105580378 B CN 105580378B
- Authority
- CN
- China
- Prior art keywords
- communication terminal
- data
- unit
- video
- frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234345—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2381—Adapting the multiplex stream to a specific network, e.g. an Internet Protocol [IP] network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2387—Stream processing in response to a playback request from an end-user, e.g. for trick-play
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
- H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/4363—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4782—Web browsing, e.g. WebTV
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
- H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection
Abstract
一种分发管理设备包括,产生器,被配置为从内容数据产生静态图片数据;转换器,被配置为将所述静态图片数据转换为视频数据;以及分发器,被配置为将所述视频数据分发到第一通信终端和第二通信终端的每一个,所述第一通信终端和第二通信终端的每一个能够回放和显示所述视频数据。当发送第一操作数据时,其中所述第一操作数据指示缩放到在所述第一通信终端上正被回放并且显示的所述视频数据的部分区域的操作,所述转换器产生表示被回放和显示在所述第一通信终端上的所述视频数据的部分区域的视频数据,其中该视频数据取决于第二通信终端的显示/回放能力,并且所述分发器将表示由所述转换器产生的部分区域的视频数据分发到所述第二通信终端。
Description
技术领域
本发明涉及用于经由通信网络将数据分发到通信终端的分发管理设备、分发方法、以及程序。
背景技术
传统上已知分割网页内容并且将其分发到多个终端的技术。例如,专利文献1描述了将内容的一页分割为菜单部分和内容部分,并且将菜单部分分发到具有小的显示/回放能力的终端,例如,PDA,并且将内容部分分发到具有大的显示/回放能力的终端,例如,互联网电视。
发明内容
技术问题
专利文献1中描述的技术允许当向其分发内容部分的终端的显示/回放能力(例如,分辨率)相对于内容部分的数据尺寸足够大时,以易于查看的方式显示内容部分。但是,当在内容部分的数据尺寸比终端的显示/回放能力 (例如,分辨率)更大的情况中显示整个内容部分时,视频被缩小并且不能以易于查看的方式显示。
鉴于以上作出了本发明并且主要目标在于提供能够使得通信终端显示内容的整个视频、并且同时以易于查看的方式显示内容的期望的部分的分发管理设备、分发方法和程序。
问题的解决方案
为解决以上问题并且实现目标,本发明包括,产生器,被配置为从内容数据产生静态图片数据;转换器,被配置为将所述静态图片数据转换为视频数据;以及分发器,被配置为将所述视频数据分发到第一通信终端和第二通信终端的每一个,所述第一通信终端和所述第二通信能够回放和显示所述视频数据。当发送第一操作数据时,其中,所述第一操作数据指示缩放到在所述第一通信终端上正被回放并且显示的所述视频数据的部分区域的操作:所述转换器产生表示在所述第一通信终端上正被回放并且显示的所述视频数据的部分区域的视频数据,所述部分区域取决于所述第二通信终端的显示/ 回放能力,并且所述分发器将表示由所述转换器产生的部分区域的视频数据分发到所述第二通信终端。
本发明的有益效果
根据本发明的方面,有利地可能使得通信终端显示内容的整个视频并且同时以易于查看的方式显示内容的期望的部分。
附图说明
图1是根据本实施例的分发系统的示意图。
图2是将适配器(dongle)附接到通信终端的概念视图。
图3是示出基本分发方法的概念图。
图4是多显示(multi-display)的概念图。
图5是利用多显示的放大显示的概念图。
图6是示出分发管理设备的硬件组件的示例的示意图。
图7是示出适配器的硬件组件的示例示意图。
图8是主要示出分发管理设备的功能的功能性框图。
图9是编码器桥单元的详细的示意图。
图10是示出转换单元的功能的功能性框图。
图11是主要示出通信终端的功能的功能性框图。
图12是示出终端管理设备的功能的功能性框图。
图13是分发-目的地选择菜单屏幕的概念图。
图14是终端管理表的概念图。
图15是可用的-终端管理表的概念图。
图16是示出分发管理设备的基本的分发过程的序列图。
图17是示出在分发管理设备和通信终端之间执行的时间调节过程的序列图。
图18是示出在从分发管理设备发送到通信终端的数据上进行的信道适应性控制过程的序列图。
图19是示出在从通信终端发送到分发管理设备的数据上进行的信道适应性控制过程的序列图。
图20是示出多显示过程的序列图。
图21是示出多显示过程的序列图。
图22是示出多显示过程的序列图。
图23是示出利用多显示的放大过程的序列图。
具体实施方式
在下面参考附图详细描述了根据本发明的分发管理设备、分发方法和程序的示例性实施例。在以下描述中的实施例是应用示例,其中本发明的方面被应用到分发系统,该分发系统被配置为由使用云计算使得网页浏览器(在下文中,“浏览器”)和编码器在云上相互结合执行,从而发送视频数据、音频数据等到通信终端。注意,这里使用的“图像”包含静态图片和动态图片。这里使用的“视频”基本上指动态图片并且也包含当动态图片被暂停时提供的静态图片。“静态图片(音频)”表示静态图片和音频中的至少一个。“图像(音频)”表示图像和音频中的至少一个。“视频(音频)”表示视频和音频的至少一个。
[实施例的概述]
首先参考图1描述本实施例的概述。图1是根据本实施例的分发系统1 的示意图。
<系统配置的概述>
首先描述分发系统1的配置的概述。如图1中所示,根据本实施例的分发系统1被构建为包括分发管理设备2、多个通信终端5a到5f、终端管理设备7和网页服务器8。在下文中,“通信终端5”表示多个通信终端5a到5f 中的任意一个。分发管理设备2、终端管理设备7和网页服务器8的每一个被实现在服务器计算机中。
通信终端5是由用户使用以接收由分发系统1提供的更多(一个或多个) 服务的终端。在其中,通信终端5a是笔记本PC(个人计算机)。通信终端 5b是移动终端,诸如智能电话或平板终端。通信终端5c是MFP(多功能外围/打印机/产品),其中结合了复印、扫描、打印和传真的功能。通信终端 5d是投影仪。通信终端5e是电视(视频)会议终端,包括相机、麦克风和扬声器。通信终端5f是能够将由用户等画出的字符、形状等电子转换的数字白板(交互式白板)。
通信终端5不限于如图1中所示的这样的终端并且可以可替换地为能够经由通信网络通信的装置,该通信网络例如,互联网。装置的示例包括手表、自动贩售机、气量计、汽车导航装置、视频游戏控制台、空调、照明器材、独立相机、独立麦克风以及独立扬声器。
分发管理设备2、通信终端5、终端管理设备7和网页服务器8可以经由通信网络9通信,该通信网络9例如,互联网和LAN(局域网)。通信网络9可以包括无线通信网络,包括3G(第三代)、WiMAX(微波存取全球互通)和LTE(长期演进)。
如在例如通信终端5d的情况中,一些通信终端5可能不具有经由通信网络9与其它终端和系统通信的功能。但是,由用户将适配器99插入到如图2中示出的通信终端5d的USB(通用串行总线)、HDMI(注册商标)(高清多媒体接口)等的接口部分,使得通信终端5d能够经由通信网络9与其它终端和系统通信。图2是适配器99附接到通信终端的概念视图。
分发管理设备2在云上包括浏览器20。浏览器20的渲染器功能允许获取以预定的描述语言描述的内容数据的单个或多个段,并且进行渲染,从而产生帧数据作为静态图片数据——诸如RGB(红、绿和蓝)位图数据、以及音频数据——诸如PCM(脉冲编码调制)数据(简称,如静态图片(音频)数据)。内容数据是从网页服务器8、任意的通信终端等获取的数据,并且包括以HTML(超文本标记语言)或CSS(联级样式表单)的图像(音频) 数据、以MP4(MPEG-4)的图像(音频)数据、以及以AAC(高级音频编码)的音频数据。
分发管理设备2在云上还包括编码单元19。编码单元19作为编码器执行其功能,从而将帧数据——其每段为静态图片(音频)数据——转换为包括H.264(MPEG-4 AVC)、H.265和动画JPEG的压缩编码格式的视频(音频)数据。
终端管理设备7进行通信终端5的登陆认证、通信终端5的合同信息的管理等。终端管理设备7还具有作为SMTP(简单邮件传送协议)服务器的功能以用于发送电子邮件。终端管理设备7例如可以实现在运行在云服务 (IaaS(基础架构即服务))上的虚拟机。所期望的是以多工的方式操作终端管理设备7以即使在意外的事件的情况中也不间断地提供服务。
分发管理设备2的浏览器20使能实时通信(RTC(实时通信/合作))。此外,分发管理设备2的编码单元19例如可以实时编码由浏览器20产生的视频(音频)数据,以输出通过转换产生的符合H.264标准的视频(音频) 数据。由于该原因,由分发管理设备2进行的处理与由例如读取记录在DVD 中的非实时视频(音频)数据并且分发其的DVD播放器进行的处理不同。
通信终端5如分发管理设备2一样可以包括浏览器。此时,可以由更新分发管理设备2的浏览器20来消除启动通信终端5的每一个的浏览器的需要。
<各种分发方法的概述>
在下面描述本实施例的分发系统1中的各种分发方法的概述。
基本分发
图3是示出在本实施例的分发系统1中的基本分发方法的概念图。如图 3中所示,在分发系统1中,分发管理设备2的浏览器20由从网页服务器8 获取网页内容数据[A]来产生视频(音频)数据[A]并且渲染其。编码器桥单元30在视频(音频)数据[A]上进行编码等,并且将其分发到通信终端5。因此,即使以HTML(超文本标记语言)、CSS(层叠样式表)等产生的网页内容丰富,网页内容也被作为以H.264、MPEG-4等的视频(音频)数据分发。由于该原因,即使通信终端5是低规格的通信终端,通信终端5也可以流畅地回放视频(音频)数据。此外,只要分发管理设备2的浏览器20 被更新,本实施例的分发系统1就使得能够流畅地回放最新的丰富的网页内容,而不需要更新将内容提供到本地的通信终端5的浏览器。
此外,通过应用上述分发方法,分发系统1可以将网页内容分发到多个通信终端5作为视频(音频)数据,如图4和图5中所示。图4和图5中所示的分发方法在下面描述。
多显示
图4是多显示的概念图。如图4中所示,单个分发管理设备2的浏览器 20通过从网页服务器8获取网页内容数据[XYZ]来产生视频(音频)数据 [XYZ]的单个段,并且渲染其。编码器桥单元30将视频(音频)数据[XYZ] 的单个段分割为视频(音频)数据[X]、[Y]和[Z]的多个段,并且在此之后将它们编码。此后,分发管理设备2将分割的结果的视频(音频)数据[X]分发到通信终端5f1。类似地,分发管理设备2将分割的结果的视频(音频) 数据[Y]分发到通信终端5f2,并且将分割的结果的视频(音频)数据[Z]分发到通信终端5f3。因此,因为即使网页内容数据[XYZ]为横摆格式,视频也由多个通信终端5f1、5f2和5f3显示为被分割的,与由显示大尺寸的单个视频获得的类似的效果可以通过将通信终端5f1、5f2和5f3布置在一行中来获得。此时,通信终端5f1、5f2和5f3在显示/回放能力(例如,分辨率相同) 上必须是相同的。如上所述的这样的分发方法例如被称为“多显示”。
利用多显示的放大显示
通过多显示,由分发管理设备2的浏览器20产生的视频数据的单个段可以被作为视频数据的不同的端分发到多个通信终端5。通过使用此,例如,能够使得多个通信终端5的一个通信终端显示整个视频,并且通信终端5中的另一个通信终端以放大(zoom in)的方式显示视频的一部分。例如,在视频数据是大尺寸的并且在显示整个视频的一个通信终端5上的视频的视频难以察看的情况中,可以由使得另一个通信终端5显示视频的期望的部分来提高察看的方便性,其中取决于通信终端5的显示/回放能力(例如,分辨率) 来放大该视频的期望的部分。
图5是利用多显示的放大显示的概念图。如图5中所示,单个分发管理设备2的浏览器20由从网页服务器8获取网页内容数据[A]产生视频数据[A] 的单个段并且渲染其。编码器桥单元30编码视频数据[A]。分发管理设备2 将编码的视频数据[A]分发到多个通信终端5f1、5f2和5f3。
此后,当由用户在通信终端5f1上进行放大为被显示的视频[A]的部分的操作,并且关从通信终端5f1发送于操作的操作数据[p](第一操作数据)到分发管理设备2时,编码器桥单元30进行剪出由浏览器20产生的视频数据 [A]的部分区域的过程。将被剪出的区域的尺寸取决于通信终端5f2、5f3的显示/回放能力(例如,分辨率)。例如,在视频数据[A]为大尺寸并且视频数据[A]被调整尺寸(resize)(缩小(zoom out))以显示整个视频的情况中,在通信终端5f2、5f3上可显示的而不需要尺寸改变的尺寸的区域可以被剪出。编码器桥单元30编码由浏览器20产生的视频数据[A]、表示取决于通信终端5f2的显示/回放能力(例如,分辨率)而从视频数据[A]剪出的部分区域的视频数据[A′]、以及表示取决于通信终端5f3的显示/回放能力(例如,分辨率)而从视频数据[A]剪出的部分区域的视频数据[A″]的每一个。分发管理设备2将编码的视频数据[A]分发到通信终端5f1,将编码的视频数据[A′]分发到通信终端5f2,并且将编码的视频数据[A″]分发到通信终端5f3。因此,可以实现使得通信终端5f1显示整个视频,而使得通信终端5f1和5f2显示在通信终端5f1上显示的视频的放大的部分。
提前确定从视频中剪出的区域的初始位置。分发管理设备2和通信终端 5f1两者外部地获取初始位置,并且贮存其。此外,通信终端5f1外部地获取通信终端5f2和5f3的显示/回放能力(例如,分辨率),并且贮存它们。当由用户进行放大为被显示的视频数据[A]的部分的操作时,通信终端5f1 通过将视频数据[A]上的引导框(guide frame)叠加到用于通信终端5f2的初始位置处来显示其尺寸取决于通信终端5f2的显示/回放能力的引导框。类似地,通信终端5f1由将视频数据[A]上的引导框叠加到用于通信终端5f3的初始位置处来显示其尺寸取决于通信终端5f3的显示/回放能力的引导框。在放大显示的早期阶段,由引导框围绕并且放大的区域的视频被分别显示在通信终端5f2和5f3上。
此后,当由用户在通信终端5f1上进行在被显示的视频[A]中移动引导框的操作,并且从通信终端5f1发送指示导向帧行进的距离和方向的操作数据 [p](第二操作数据)到分发管理设备2时,编码器桥单元30移动位置,其中将根据操作数据[p]从视频数据[A]剪出区域。例如,当由用户移动的引导框是与通信终端5f2相关联的引导框时,编码器桥单元30改变位置,其中将根据指示导向帧行进的距离和方向的操作数据[p]剪出将被分发到通信终端5f2的视频数据[A′]。编码器桥单元30编码新剪出的区域的视频数据[A′]。此后,分发管理设备2将新剪出的区域的视频数据[A′]分发到通信终端5f2。结果,由用户移动的引导框包围的区域的视频被以放大的方式显示在通信终端5f2上。因此,通过在显示在通信终端5f1上的视频数据[A]上将引导框移动到期望被放大的区域,用户可以使得由引导框围绕的区域的放大的视频显示在其它通信终端5f2、5f3上。
此时,通信终端5f1、5f2和5f3不必须在显示/回放能力(例如,分辨率相同)上相同。
[实施例的详细说明]
在下面参考图6到图23详细描述实施例。
<实施例的硬件组件>
在下面参考图6和图7描述本实施例的硬件组件。图6是分发管理设备 2的逻辑硬件组件的示意图。图7是适配器99的逻辑硬件组件的示意图。因为通信终端5、终端管理设备7和网页服务器8在硬件组件与图6所示的分发管理设备2相同,所以省略了对其的描述。
如图6所示,分发管理设备2包括用于控制整个分发管理设备2的操作的(主机)CPU201、在其中贮存用于驱动CPU 201的诸如IPL的程序的 ROM 202、用作CPU 201的工作区域的RAM 203、在其中贮存包括程序的各种数据的HDD 204、用于在CPU的控制之下控制从HDD204读取各种数据以及将各种数据写入到HDD 204的HDC(硬盘控制器)205、用于控制从记录介质206读取数据以及将数据写入到记录介质206的介质驱动(drive) 207(诸如闪速存储器)、用于显示各种信息的显示器208、用于使用通信网络9发送数据并且用于与适配器99连接的I/F 209、键盘211、鼠标212、麦克风213、扬声器214、GPU(图形处理单元)215、在其中贮存用于驱动 GPU 215的程序的ROM 216、用作GPU 215的工作区域的RAM 217、以及包含用于电连接上述元件的地址总线和数据总线的扩展总线220。
用于通信终端、系统和服务器的程序可以被配置为作为记录在计算机可读记录介质中的可安装的或可执行的格式文件而被分发,该计算机可读记录介质例如是记录介质206。
接着,参考图7描述了适配器99的硬件组件。如图7所示,适配器99 包括用于控制整个适配器99的操作的CPU 91、其中贮存基本的输入/输出程序的ROM 92、用作CPU 91的工作区域的RAM 93、在CPU91的控制之下从其读取数据或者向其写入数据的EEPROM(电可擦除可编程ROM)94、用于进行各种图像处理的GPU 95、在其中贮存用于驱动GPU 95的程序的ROM 96a、用作GPU 95的工作区域的RAM 96b、用于连接到通信终端5的 I/F 209的I/F 97、天线98a、用于使用天线98a使用短距离无线技术执行通信的通信单元98、以及包括用于电连接上述元件的地址总线和数据总线的总线90。短距离无线技术的示例包括NFC(近场通信)标准、蓝牙(注册商标)、WiFi(无线保真)和ZigBee(注册商标)。
<实施例的功能性组件>
接下来参考图8到图15描述本实施例的功能性组件。
分发管理设备的功能性组件
图8是主要示出分发管理设备2的功能的功能性框图。尽管图8示出了将视频(音频)数据分发到通信终端5f1的分发管理设备2的功能性组件,但是将数据分发到除了通信终端5f1以外的其它目的地的分发管理设备2具有类似的功能性组件。尽管分发管理设备2包括多个分发引擎服务器,但为了说明的简洁性,下面的说明以示例的方式作出,其中分发管理设备2包括单个分发引擎服务器。
分发管理设备2用在图6中示出的硬件组件和程序实现图8中示出的功能性组件。具体地,分发管理设备2包括浏览器20、收发单元21、浏览器管理单元22、发送FIFO 24、时间管理单元25、时间获取单元26、信道适应性控制单元27、编码器桥单元30、收发单元31、索引产生单元32、接收 FIFO 34、识别单元35、延迟-信息获取单元37a、信道适应性控制单元37b和译码单元40。分发管理设备2还包括由图6示出的HDD 204实现的贮存单元2000。贮存单元2000在其中贮存从识别单元35输出的识别信息(其在之后描述)。由浏览器20获取的内容数据可以暂时地贮存在作为缓存的贮存单元2000中。
浏览器20——其是功能性组件的一个——是在分发管理设备2中操作的网页浏览器。浏览器20通过渲染诸如网页内容数据的内容数据而产生 RGB数据(或PCM(脉冲编码调制)数据)。此外,浏览器20能够由使用插件(其在之后描述)回放视频(音频)文件来产生视频(音频)数据。本实施例基于由浏览器20产生的数据是视频(音频)数据的假设描述。浏览器20被不断地更新以适应于网页内容变得丰富。
在本实施例的分发系统1中,分发管理设备2包括多个浏览器20,从多个浏览器20中将选择用于建立用户对话的云浏览器。为了说明的简洁性,在下面描述其中提供单个浏览器20的示例。
浏览器20可以包括例如,介质播放器、闪速播放器、JavaScript(注册商标)、CSS(层叠样式表)和HTML(超文本标记语言)渲染器。JavaScript (注册商标)包括根据标准规格的JavaScript和特定于分发系统1的 JavaScript。媒体播放器是在浏览器20中用于回放多媒体文件(例如,视频 (音频)文件)的浏览器插件。闪速播放器是用于在浏览器20中回放闪速内容的浏览器插件。特定的JavaScript(注册商标)是提供用于对分发系统1 唯一的服务的API(应用程序接口)的JavaScript(注册商标)组。CSS是用于有效地定义以HTML描述的网页的出现和样式的机制。HTML渲染器是基于网页工具箱的HTML渲染引擎。
收发单元21将各种数据、请求等发送到终端管理设备7和网页服务器8,并且从终端管理设备7和网页服务器8接收各种数据、请求等。例如,收发单元21从网页服务器8的内容网站接收网页内容数据,并且将其传递给浏览器20。
浏览器管理单元22管理浏览器20和编码器桥单元30。例如,浏览器管理单元22指导浏览器20和编码器桥单元3开始或停止允许并且在开始或停止时分发编码器ID。编码器ID是由浏览器管理单元22分发的以用于编码器桥单元30的管理处理的标识信息。此外,浏览器管理单元22在每次浏览器20启动时分发浏览器ID并且管理其。浏览器ID是用于由浏览器管理单元22分发的浏览器20的标识的标识信息,该浏览器管理单元22用于浏览器20的管理处理。
此外,浏览器管理单元22经由收发单元31从通信终端5获取各种操作数据[p],并且将其输出到浏览器20。操作数据[p]是响应于操作事件(例如,使用键盘211、鼠标212等进行的操作以及用电子笔P作出的笔划)在通信终端5上产生的数据。当通信终端5包括各种传感器——例如,温度传感器、湿度传感器和加速度传感器时,浏览器管理单元22从通信终端5获取传感器信息(其是传感器的输出信号)并且将其输出到浏览器20。
发送FIFO 24是用于在其中贮存由浏览器20产生的视频(音频)数据 [AEp]的缓冲器。
时间管理单元25管理时间T,该时间T对于分发管理设备2是本地的。时间获取单元26结合通信终端5的时间控制单元56(其在之后描述)进行时间调节过程。具体地,时间获取单元26从时间管理单元25获取指示分发管理设备2中的时间T的时间信息(T),从时间控制单元56(其在之后描述)经由收发单元31和收发单元51接收指示通信终端5中的时间t的时间信息(t),并且将时间信息(t)和时间信息(T)发送到时间控制单元56。
信道适应性控制单元27基于发送-延迟-时间信息(D)、以及包括编码器桥单元30的转换单元10(其在之后描述)的帧率和数据分辨率的操作条件,计算回放延迟时间U(其在之后描述)。回放延迟时间U是由于缓冲数据直到回放而延迟回放数据的时间。具体地,信道适应性控制单元27基于发送-延迟-时间信息(D)和数据尺寸(例如,位的数量或字节的数量)改变编码器桥单元30的操作。如将在之后描述的,发送-延迟-时间信息(D) 指示从由通信终端5的延迟-信息获取单元57从回放控制单元53获取的多个段的发送延迟时间d1形成的频率分发信息。发送延迟时间D1的每段是从当视频(音频)数据从分发管理设备2被发送时到当由通信终端5接收该视频(音频)数据时的时间。
编码器桥单元30将帧数据输出到编码器桥单元30的转换单元10(其在之后描述),每个帧数据由浏览器20产生为静态图片(音频)数据。此时,转换单元10将由信道适应性控制单元27计算的操作条件考虑在内而进行处理。
更加相似地参考图9和图10描述编码器桥单元30。图9是编码器桥单元30的详细的图。图10是示出转换单元10的功能的功能性框图。
如图9所示,编码器桥单元30包括创建/选择/转移单元310、选择单元 320以及构造在其之间的多个转换单元10a、10b和10c。尽管在这里示出了三个转换单元10a、10b和10c,转换单元的数量可以是任何数量。在下文中,转换单元的任意一个被表示为“转换单元10”。
转换单元10将由浏览器20产生的视频(音频)数据的数据格式转换为允许经由通信网络9分发到通信终端5的数据格式。为了该目的,如图10 中所示,转换单元10包括修剪单元11、尺寸改变单元12、分割单元13和编码单元19。修剪单元11、尺寸改变单元12和分割单元13对音频数据不进行处理。
修剪单元11进行仅剪出视频的一部分的处理。例如,当进行上述利用多显示的放大显示时,修剪单元11从由浏览器20产生的视频数据剪出将以放大的方式显示的区域。当整个视频将被显示在多个通信终端5的一个上、而部分区域将以放大的方式显示在通信终端5的另外的一个(或多个)上时,根据上述第一操作数据提供与通信终端5相同数量的转换单元10。在作为分配到显示整个视频的通信终端5的转换单元10的一个的转换单元10中,不进行修剪单元11的处理。相反,在分配到显示放大的部分区域的(一个或多个)通信终端5的(一个或多个)转换单元10中,修剪单元11在由选择的坐标信息(其在之后描述)定义的初始位置处,根据上述第一操作数据,从由浏览器20产生的视频数据剪出尺寸由分辨率信息(其在之后描述)定义的区域。
在下面给出以具体示例方式的进一步描述。在图5示出的示例中,除了被使用的转换单元10以外,根据从通信终端5f1供给的第一操作数据新创建分发到通信终端5f2的转换单元10和分发到通信终端5f3的转换单元10。使用的转换单元10被分发到通信终端5f1。分发到通信终端5f2的转换单元 10的修剪单元11定义基于用于从终端管理设备7获取的通信终端5f2的分辨率信息和选择的坐标信息而将被剪出的区域的尺寸和初始位置,并且从由浏览器20产生的视频数据中剪出区域。类似地,分发到通信终端5f3的转换单元10的修剪单元11定义基于用于从终端管理设备7获取的通信终端5f3 的分辨率信息和选择的坐标信息而将被剪出的区域的尺寸和初始位置,并且从由浏览器20产生的视频数据中剪出区域。
当从通信终端5f1发送第二操作数据时,被分发到通信终端5f2的转换单元10的修剪单元11根据由第二操作数据指示的引导框行进的上述距离和方向来改变将被剪出的区域的位置,同时维持其尺寸。类似地,被分发到通信终端5f2的转换单元10的修剪单元11根据由第二操作数据指示的引导框行进的上述距离和方向来改变将被剪出的区域的位置,同时维持其尺寸。由修剪单元11进行的剪出视频的该过程实现上述利用多显示的放大显示。
尺寸改变单元12改变视频(图像)的缩放比例。例如,在图5示出的示例中,如果由浏览器20产生的视频数据的尺寸超过通信终端5f1的显示/ 回放能力(例如,分辨率),分发到通信终端5f2的转换单元10的尺寸改变单元12根据通信终端5的分辨率f1缩小由浏览器20产生的视频数据以将整个视频显示在通信终端5f1中。此时,由被分发到通信终端5f2的转换单元10或被分发到通信终端5f3的转换单元10的修剪单元11从由浏览器20 产生的视频数据中将要剪出的区域的尺寸可以被设置为例如,允许显示不被通信终端5f2或通信终端5f3上的尺寸改变单元12缩小的视频的尺寸。此时,将从由浏览器20产生的视频数据中剪出的区域的尺寸可以优选地是允许在通信终端5f2或通信终端5f3上显示表示该区域的视频数据而不需要由尺寸改变单元12缩小或放大(不需要由尺寸改变单元12处理)的尺寸。可替换地,将从由浏览器20产生的视频数据中剪出的区域的尺寸可以是允许显示表示由通信终端5f2或通信终端5f3上的尺寸改变单元12以预定的比率放大的区域的视频数据的尺寸。
分割单元13分割从如图4中所示的网页服务器8获取的网页内容。
编码单元19编码由浏览器20产生的图像(音频)数据,从而进行转换为可经由通信网络9分发到通信终端5的图像(音频)数据。当视频是静态的时(当没有帧到帧的变化(改变)发生时),编码单元19将跳帧(skip frame) (其可以被称为“帧跳(frame skip)”)数据插入到紧挨在视频中发生的运动之前,从而节省带宽。当通过渲染与静态图片数据同时产生的音频数据时,编码两者数据。当仅产生音频数据时,不进行修剪、尺寸改变和分割中的任何一个,而是仅进行编码以进行数据压缩。
创建/选择/转移单元310进行新创建转换单元10,选择将被供给到已经创建的转换单元10的视频(音频)数据等。创建/选择/转移单元310新创建转换单元10的情况的示例包括创建/选择/转移单元310创建能够如进行上述利用多显示的放大显示的情况一样取决于通信终端5的视频(音频)数据回放能力的转换单元10进行转换的情况。创建/选择/转移单元310选择将被供给到转换单元10的视频(音频)数据的情况的示例包括创建/选择/转移单元 310选择已经创建的转换单元10的情况。例如,当开始除了向通信终端5a 分发以外而向通信终端5b分发时,可以发生与被分发到通信终端5a的视频 (音频)数据相同的视频(音频)数据被分发到通信终端5b的场景。示例包括如下情况:在该场景中,通信终端5b具有与通信终端5a的回放能力相同的视频(音频)数据回放能力。具体地,在这种情况中,创建/选择/转移单元310使用已经为通信终端5a创建的转换单元10a,而不是为通信终端 5b新创建的转换单元10b。
选择单元320从已经创建的转换单元10选择期望的一个。由创建/选择/ 转移单元310和选择单元320作出的选择使能进行以各种模式的分发。
参考回图8,收发单元31将各种数据、请求等发送到通信终端5,并且从通信终端5接收各种数据、请求等。例如,在通信终端5的登陆过程中,收发单元31向通信终端5的收发单元51(其在之后描述)发送认证屏幕数据以用于提示用户提交登陆请求。此外,收发单元31经由HTTPS(安全套接层之上的超文本传输协议)服务器进行去往和来自安装在通信终端5上的应用程序(用户应用和装置应用)的数据发送和数据接收,以使用特定于分发系统1的协议接收由分发系统1提供的(一个或多个)服务。特定于分发系统1的协议是用于在分发管理设备2和通信终端5之间不间断地发送和接收实时数据的基于HTTPS的应用层协议。收发单元31还进行处理,包括响应发送控制、实时数据产生、客户命令发送、响应接收控制、接收的数据分析和手势(gesture)转换。
响应发送控制是管理HTTPS对话的过程,该HTTPS对话用于从通信终端5下载请求的(被请求的)以将数据从分发管理设备2发送到通信终端5。对用于下载的HTTPS对话的响应不立即结束,而是持续某个时间段(一到几分钟)。收发单元31将被发送到通信终端5的数据动态地写入到响应的主体部分。此外,为节省重新连接的成本,期望的是,在之前的对话结束之前从通信终端5接收另外的请求。即使连接被重新建立,也可以由将收发单元 31置于待机直到之前的请求完成,来缩减开销。
实时数据产生是将唯一的标头添加到由图10示出的编码单元19产生的压缩的视频(和压缩的音频)数据、并且将其写入到HTTPS的主体部分,以分发(下行链路)到通信终端5的过程。
客户命令发送是产生将被发送到通信终端5的命令数据、并且将其写入到HTTPS的主体部分以用于分发(下行链路)到通信终端5的过程。
响应接收控制是管理HTTPS对话以用于从通信终端5请求的发送(上行链路)、使得分发管理设备2可以从通信终端5接收数据的过程。该HTTPS 对话的响应不立即结束而是持续某个时间段(一到几分钟)。通信终端5把将要发送到分发管理设备2的收发单元31的数据动态地写入到请求的主体部分。
接收的数据分析是逐个类型地分析从通信终端5发送的数据、并且将数据传递到必要的处理的过程。
手势转换是将用户用电子笔P或者由笔迹输入到被配置为数字白板的通信终端5f的手势事件转换为可由浏览器20接受的形式的过程。
参考回图8,接收FIFO 34是用于贮存由译码单元40译码的视频(音频) 数据的缓冲器。
识别单元35进行对从通信终端5接收的视频(音频)数据[E]的处理。具体地,例如,识别单元35在由相机62(其在之后描述)捕捉的视频中识别人或动物的面部、年龄、性别等,以用于标志的目的。此外,识别单元35 在由相机62(其在之后描述)捕捉的视频上使用面部识别进行名称标记,替换背景视频等,以用于办公目的。识别单元35在贮存单元2000中贮存指示识别的事项的识别信息。识别单元35通过使用识别扩展板进行处理来实现加速。
延迟-信息获取单元37a被用在上行链路信道适应性控制过程中结合用在下行链路信道适应性控制过程中的通信终端5上的延迟-信息获取单元57。具体地,延迟-信息获取单元37a从译码单元40获取指示发送延迟时间d1 的发送-延迟-时间信息(d1),将其保持某个时间段,并且当已经获取多个段的发送-延迟-时间信息(d1)时,将指示从多个段的发送延迟时间d1形成的频率分发信息的发送-延迟-时间信息(d)输出到信道适应性控制单元37b。发送-延迟-时间信息(d1)指示从当视频(音频)数据从通信终端5发送时到当视频(音频)数据由分发管理设备2接收时的时间。
信道适应性控制单元37b被用在上行链路信道适应性控制过程中结合被用在下行链路信道适应性控制过程中的信道适应性控制单元27。具体地,信道适应性控制单元37b基于发送-延迟-时间信息(d)计算通信终端5上的编码单元60的操作条件。此外,信道适应性控制单元37b将指示包括帧率和数据分辨率的操作条件的信道适应性控制信号经由收发单元31和收发单元 51(其在之后描述)发送到通信终端5的编码单元60。
译码单元40译码从通信终端5发送的视频(音频)数据[E]。此外,译码单元40输出指示发送延迟时间d1的发送-延迟-时间信息(d1)到延迟- 信息获取单元37a。
通信终端的功能性组件
在下面参考图11描述通信终端5的功能性组件。图11是主要示出通信终端5的功能的功能性框图。尽管图11示出了通信终端5f1为通信终端5 的一个,但是除了通信终端5f1的通信终端5具有类似的功能性组件。在通信终端5之中,在其上安装用户应用的通信终端5用作接口,在该接口之上用户进行登陆到分发系统1、开始和停止视频(音频)数据的分发等。相反,在其上安装装置应用的通信终端5不具有上述接口,并且仅进行视频(音频) 数据的发送和接收和操作数据[p]的发送。为了方便,下面的描述在通信终端 5上安装用户应用的假设上作出。
通信终端5用类似于图6中示出的类似的硬件组件和程序(用户应用) 实现图11所示的功能性组件。具体地,通信终端5包括译码单元50、收发单元51、操作单元52、回放控制单元53、渲染单元55、时间控制单元56、延迟-信息获取单元57、显示单元58、编码单元60、终端-信息获取单元510 和选择的坐标产生单元(selected-coodinate generation unit)520。通信终端5 还包括由图11所示的RAM 203实现的贮存单元5000。贮存单元5000在其中贮存指示时间差Δ(其在之后描述)的时间差信息(Δ)、指示通信终端5 中的时间t的时间信息(t)、由终端-信息获取单元510(其在之后描述)从终端管理设备7获取的终端信息等。
译码单元50译码从分发管理设备2分发的并从回放控制单元53输出的视频(音频)数据[AEp]。
收发单元51将各种数据、请求等发送到分发管理设备2的收发单元31,以及从分发管理设备2的收发单元31接收各种数据、请求等,并且收发单元51将各种数据、请求等发送到终端管理设备7的收发单元71a(其在之后描述),以及从终端管理设备7的收发单元71a(其在之后描述)接收各种数据、请求等。例如,在通信终端5的登陆过程中,收发单元51响应于由通信终端5的操作单元52起始的启动,将登陆请求提交到终端管理设备7的收发单元71。
操作单元52进行接受由用户输入的操作的过程。例如,操作单元52接受使用电源开关、键盘、鼠标、电子笔P等作出的输入、选择等,并且将其作为操作数据[p]发送到分发管理设备2的浏览器管理单元22。
回放控制单元53缓冲从收发单元51接收的视频(音频)数据(实时数据包),并且将其输出到译码单元50,其中将回放延迟时间U考虑在内。此外,回放控制单元53计算指示发送延迟时间D1的发送-延迟-时间信息(D1),并且将其输出到延迟-信息获取单元57。
渲染单元55渲染由译码单元50译码的数据。
时间控制单元56结合分发管理设备2的时间获取单元26进行时间调节过程。具体地,时间控制单元56从贮存单元5000获取指示通信终端5中的时间t的时间信息(t)。此外,时间控制单元56将用于指示分发管理设备2 中的时间T的时间信息(T)的请求经由收发单元51和收发单元31提交到分发管理设备2的时间获取单元26。此时,时间信息(t)连同用于时间信息(T)的请求被一起发送。
延迟-信息获取单元57从回放控制单元53获取指示发送延迟时间D1的发送-延迟-时间信息(D1),将其保持某个时间段,并且当已经获取发送-延迟-时间信息(D1)的多个段时,将指示从多个段的发送延迟时间d1形成的频率分发信息的发送-延迟-时间信息(D)经由收发单元51和收发单元31 输出到信道适应性控制单元27。发送-延迟-时间信息(D)例如可以每100 帧发送一次。
显示单元58通过回放由渲染单元55渲染的数据来显示视频。当由用户使用操作单元52进行放大为被显示的视频的部分操作时,显示单元58基于在由终端-信息获取单元510(其在之后描述)从终端管理设备7获取的并且贮存在贮存单元5000中的终端信息中包含的、关于另外的(一个或多个) 通信终端5的分辨率信息,确定上述引导框的尺寸。此外,显示单元58基于在由终端-信息获取单元510(其在之后描述)从终端管理设备7获取的并且贮存在贮存单元5000中的终端信息中包含的关于另外的(一个或多个) 通信终端5的选择的坐标信息(初始位置),确定上述引导框将在被显示的视频上显示的位置。显示单元58通过将引导框叠加在被显示的视频上的确定的位置处而显示确定尺寸的引导框。当由用户使用操作单元52进行移动在视频上显示的叠加的引导框的操作时,显示单元58使得根据操作来移动在图像上显示的叠加的引导框。
编码单元60经由收发单元51和收发单元31向分发管理设备2的译码单元40发送由编码数据获得的视频(音频)数据[E],该编码数据从嵌入式麦克风213(见图6),或外部相机62和外部麦克风63获取;从贮存单元5000 获取的指示在通信终端5中的时间的当前的点处的时间t0的时间信息(t0);以及也是从贮存单元5000获取的指示时间差Δ的时间差信息(Δ)。时间差Δ是在分发管理设备2中本地管理的时间T和在通信终端5中本地管理的时间t之间的差。编码单元60基于由从信道适应性控制单元37b接收的信道适应性控制信号指示的操作条件,改变编码单元60的操作条件。此外,编码单元60根据改变的新的操作条件经由收发单元51和收发单元31向分发管理设备2的译码单元40发送由编码从相机62和麦克风63获取的数据获得的视频(音频)数据[E];指示从贮存单元5000获取的指示通信终端5中的时间的当前的点处的时间t0的时间信息(t0);以及指示从贮存单元5000获取的时间差Δ的时间差信息(Δ)。
嵌入式麦克风213和外部相机62以及外部麦克风63是输入手段的示例,并且是需要编码和译码的各种装置。输入手段可以被配置为能够输出除了视频(音频)数据以外的触觉(触摸)数据和嗅觉(气味)数据。图11示出了示例,其中被配置为电视会议终端的通信终端5e连接到被配置为数字白板的通信终端5f1,并且通信终端5e的相机和麦克风被用作通信终端5f1的外部相机62和外部麦克风63。
终端-信息获取单元510从终端管理设备7获取关于由终端管理设备7 管理的其它通信终端5的终端信息,并且将其贮存在贮存单元5000中。终端信息包含指示通信终端5的分辨率的分辨率信息,以及指示引导框将被显示为被叠加的初始位置的选择的坐标信息。将由终端-信息获取单元510在从终端管理设备7获取终端信息中使用的方法不被特别限制,而是可以是任何方法,通过该方法可以获取终端信息而没有外部泄漏。
选择的坐标产生单元520根据由用户使用操作单元52进行的移动引导框的操作产生指示显示单元58将在被显示的视频上显示并且叠加引导框的位置的坐标信息。显示单元58根据由选择的坐标产生单元520产生的坐标信息在视频上显示并且叠加引导框,从而根据用户的操作移动引导框的位置。
终端管理设备的功能性组件
在下面参考图12描述终端管理设备7的功能性组件。图12是示出终端管理设备7的功能的功能性框图。
终端管理设备7用于与图6中示出的那些类似的硬件组件和程序实现图 12中示出的功能性组件。具体地,终端管理设备7包括收发单元71a、收发单元71b和认证单元75。终端管理设备7还包括由图6示出的HDD 204实现的贮存单元7000。
收发单元71a将各种数据、请求等发送到通信终端5并且从通信终端5 接收各种数据、请求等。例如,收发单元71a从通信终端5的收发单元51 接收登陆请求并且将登陆请求的认证的结果发送到收发单元51。登陆请求是请求分发系统1认证通信终端5的请求。登陆请求包含用于通信终端5的唯一的标识的终端ID和用户证书。
收发单元71b将各种数据、请求等发送到分发管理设备2并且从分发管理设备2接收各种数据、请求等。例如,收发单元71b从分发管理设备2的收发单元21接收用于分发-目的地-选择-菜单数据7030(其在之后描述)的请求,并且将分发-目的地-选择-菜单数据7030发送到收发单元21。
认证单元75由终端ID和包含在从通信终端5接收的登陆请求中的用户证书来搜索终端管理表7010以确定是否包含终端ID和用户证书的相同的组合,从而认证通信终端5。
贮存单元7000在其中贮存分发-目的地-选择-菜单数据7030、终端管理表7010、以及可用的-终端管理表7020。
分发-目的地-选择-菜单数据7030是用于显示图13中示出的分发-目的地选择菜单屏幕的数据。图13是分发-目的地选择菜单屏幕的概念图。关于可被选择为分发目的地的通信终端5的共享ID和显示名称(其在之后描述) 的列表被显示在图13中示出的分发-目的地选择菜单屏幕上。用户可以通过在分发-目的地选择菜单屏幕上标记通信终端5的复选框(checkbox)、并且按下“OK”按钮而将如下视频(音频)数据分发到通信终端5的期望的一个,其中,用户期望向该通信终端5分发该视频(音频)数据。
图14是终端管理表7010的概念图。如图1中所示4,在终端管理表7010 中管理被登记的通信终端5的终端ID、用户证书、关于用户使用由分发系统1提供的(一个或多个)服务的合同信息、通信终端5的终端类型、指示通信终端5的首页URL(统一资源定位符)的设置信息、关于各个通信终端 5的执行环境信息、共享ID、布局位置信息和共同关联的显示名称信息。
用户证书是证明允许通信终端5连接到分发系统1的证书。用户证书被提前给予到被允许连接到分发系统1的通信终端5。合同信息指示用于由用户使用由终端ID识别的通信终端5而对由分发系统1提供的(一个或多个) 服务的使用的合同的细节。终端类型指示通信终端5的类型。设置信息指示由相应的终端ID识别的通信终端5的首页URL。
执行环境信息包括通信终端5的每一个的“收藏夹”、“之前的Cookie 信息”和“缓存文件”。执行环境信息在通信终端5的每一个登陆之后连同设置信息一起被发送到分发管理设备2,并且被用于单独向通信终端5提供 (一个或多个)服务。
共享ID是由使得与被分发到自身的通信终端5的视频(音频)数据相同的视频(音频)数据到另外的(一个或多个)通信终端5而用在由每个用户进行的远程共享等中的ID,并且是用于其它的通信终端或其它的通信终端的组的标识的标识信息。在图14示出的示例中,分发到终端ID“t006”的共享ID是“v006”,分发到终端ID“t007”的共享ID是“v006”,并且分发到终端ID“t008”的共享ID是“v006”。当从分发有终端ID“t001”通信终端5a提交用于与分发有共享ID“v006”的通信终端5f1、5f2和5f3的远程共享的请求时,分发管理设备2向通信终端5f1、5f2和5f3分发与被分发到通信终端5a的视频(音频)数据相同的视频(音频)数据。注意,当通信终端5a在显示单元58的分辨率上与通信终端5f1、5f2和5f3不相同时,分发管理设备2相应地分发视频(音频)数据。
如图4和图5中所示,布局位置信息例如指示在多个通信终端5f1、5f2 和5f3被布置在一行中的情况中的布局位置。显示名称信息是指示在图13 中示出的分发-目的地选择菜单屏幕上的显示名称的信息。
分辨率信息是指示通信终端5的每一个的分辨率的信息。分辨率是指示由包括在通信终端5中的显示单元58处理的视频(图像)的纯度的测量值,并且是通信终端5的显示/回放能力之一。如图1中所示6,例如,分辨率信息通过(行中的像素的数量)×(列中的像素的数量)指示通信终端5的分辨率。
选择的坐标信息是指示与通信终端5的每一个相关联的引导框将被显示在叠加在另一个通信终端5上的初始位置的信息。例如,假设,在图14示出的示例中,分发有终端ID“t006”的通信终端5是图5中示出的通信终端 5f1;分发有终端ID“t007”的通信终端5是图5中示出的通信终端5f2;分发有终端ID“t008”的通信终端5是图5中示出的通信终端5f3。此时,与终端ID“t007”相关联的选择的坐标信息“(600100)”指示引导框的开始地址,将被显示在叠加在通信终端5f1上显示的视频上,该引导框与通信终端 5f2相关联。与终端ID“t008”相关联的选择的坐标信息“(6002400)”指示引导框的开始地址,将被显示在叠加在通信终端5f1上显示的视频上,该引导框与通信终端5f3相关联。开始地址指示引导框的初始位置,并且例如可以是引导框的左上的坐标。
当利用上述多显示进行放大过程时,接受用户的放大操作的通信终端5 从终端管理设备7获取包含分辨率信息和选择的坐标信息的终端信息。例如,接受用户的操作的通信终端5的上述终端-信息获取单元501向终端管理设备7提交用于关于与自身的通信终端5具有相同的共享ID的其它(一个或多个)通信终端5的终端信息的请求。响应于来自通信终端5的请求,终端管理设备7从终端管理表7010读取关于具有与请求通信终端5相同的共享 ID的(一个或多个)通信终端5的分辨率信息和选择的坐标信息,并且将包含分辨率信息和选择的坐标信息终端信息发送到请求通信终端5作为对请求的响应。
图15是可用的-终端管理表7020的概念图。在可用的-终端管理表7020 中,终端ID被管理为使得每个终端ID与指示另外的通信终端或者其它的通信终端的组的共享的ID相关联,由终端ID指示的通信终端5可以与另外的通信终端或者其它的通信终端的组进行远程共享。
[实施例的操作或处理]
在下面参考图16到图23描述本实施例的操作或处理。
<基本的分发过程>
首先参考图16描述了使用分发管理设备2的基本分发方法的具体的分发过程。图16是示出分发管理设备2的基本的分发过程的序列图。尽管在这里描述了使用通信终端5a提交登陆请求的场景,但是可以使用除了通信终端5a以外的另一个通信终端5进行登陆。
如图1中所示6,当用户开启通信终端5a的电源时,通信终端5的收发单元51a将登陆请求发送到终端管理设备7的收发单元71a(步骤S21)。接着,终端管理设备7的收发单元71a接收登陆请求并且将其输出到认证单元 75。该登陆请求包含通信终端5a的终端ID和用户证书。因此,认证单元75 获取通信终端5a的终端ID和用户证书。
接着,认证单元75由终端ID和用户证书搜索图14示出的终端管理表 7010以确定是否包含终端ID和用户证书的相同组合,从而认证通信终端5a (步骤S22)。以下描述基于如下假设而作出:终端管理表7010包含终端ID 和用户证书的相同组合,或者换句话说,通信终端5a被认证为分发系统1 中授权的终端。
终端管理设备7的收发单元71a将分发管理设备2的IP地址发送到通信终端5a的收发单元51b(步骤S23)。分发管理设备2的IP地址由终端管理设备7从分发管理设备2获取并且提前贮存在贮存单元7000中。
接着,终端管理设备7的收发单元71b将用于启动浏览器20的请求提交到分发管理设备2的收发单元21(步骤S24)。接着,收发单元21接收用于启动浏览器20的请求。浏览器管理单元22根据由收发单元21接收的启动请求启动浏览器20(步骤S25)。
接着,编码器桥单元30的创建/选择/转移单元310根据通信终端5a的回放能力(例如,显示的分辨率)和内容类型创建转换单元10(步骤S26)。
接着,收发单元21如由浏览器20指导的将用于内容数据[A]的请求提交到网页服务器8(步骤S27)。响应于此,网页服务器8从其自身的贮存单元(未示出)读取请求的内容数据[A](步骤S28)。网页服务器8将内容数据[A]发送到分发管理设备2的收发单元21(步骤S29)。
接着,浏览器20渲染由收发单元21接收的内容数据[A],从而产生帧数据,每段帧数据是静态图片(音频)数据,并且将其输出到发送FIFO 24 (步骤S30)。转换单元10通过编码贮存在发送FIFO 24中的帧数据来进行转换为将被分发到通信终端5a的视频(音频)数据[A](步骤S31)。
接着,收发单元31将视频(音频)数据[A]发送到通信终端5的收发单元51a(步骤S32)。接着,通信终端5的收发单元51接收视频(音频)数据[A]并且将其输出到回放控制单元53。
接着,在通信终端5a中,译码单元50从回放控制单元53获取视频(音频)数据[A]并且将其译码(步骤S33)。此后,扬声器61从译码的音频数据 [A]回放音频,而显示单元58从由译码单元50获取的并且由渲染单元55渲染的视频数据[A]中回放视频(步骤S34)。
<时间调节过程>
在下面参考图17描述时间调节过程。图17是示出在分发管理设备2和通信终端5之间执行的时间调节过程的序列图。
如图1中所示7,首先,通信终端5的时间控制单元56从贮存单元5000 获取通信终端5中的时间信息(ts)以获取指示当收发单元51将用于时间信息(T)的请求提交到分发管理设备2时的时间点的时间(步骤S81)。收发单元51将用于分发管理设备2中的时间信息(T)的请求提交到收发单元 31(步骤S82)。此时,时间信息(ts)连同用于时间信息(T)的请求被发送。
接着,分发管理设备2的时间获取单元26从时间管理单元25获取分发管理设备2中的时间信息(Tr)以获取指示当收发单元31接收在上述步骤 S82处提交的请求时的时间点的时间(步骤S83)。此外,时间获取单元26 从时间管理单元25获取分发管理设备2中的时间信息(Ts)以获取指示当收发单元31响应于在上述步骤S82处提交的请求的时间点的时间(步骤 S84)。收发单元31将时间信息(ts、Tr和Ts)发送到收发单元51(步骤S85)。
接着,通信终端5的时间控制单元56从贮存单元5000获取通信终端5 中的时间信息(tr),以获取指示当收发单元51接收在上述步骤S85处作出的响应时的时间点的时间(步骤S86)。通信终端5的时间控制单元56计算分发管理设备2和通信终端5之间的时间差Δ(步骤S87)。时间差Δ由以下等式(1)表示。
Δ=((Tr+Ts)/2)-((tr+ts)/2) (1)
时间控制单元56贮存指示贮存单元5000中的时间差Δ的时间差信息 (Δ)(步骤S88)。例如每分钟规律地进行用于时间调节的处理的系列。
<下行链路信道适应性控制过程>
在下面参考图18描述对从分发管理设备2发送到通信终端5的(下行链路)数据进行的信道适应性控制过程。图18是示出对从分发管理设备2 发送到通信终端5的数据进行的信道适应性控制过程的序列图。
首先,分发管理设备2的信道适应性控制单元27计算指示回放延迟时间U的回放-延迟-时间信息(U),通信终端5的回放控制单元53通过将其缓冲直到回放而延迟回放视频(音频)数据持续该回放延迟时间U,并且将回放-延迟-时间信息(U)输出到编码器桥单元30(步骤S101)。
接着,收发单元31从编码器桥单元30获取回放-延迟-时间信息(U) 并且将回放-延迟-时间信息(U)发送到通信终端5的收发单元51(步骤 S102)。接着,通信终端5的收发单元51接收回放-延迟-时间信息(U)。编码器桥单元30向从发送FIFO 24获取的并且已经经历编码等的视频(音频) 数据[A]添加指示时间T0的时间信息(T0),该时间T0指示当进行从时间管理单元25的获取作为时间戳的时间点(步骤S103)。收发单元31将关于分发管理设备2的视频(音频)数据和时间信息(T0)发送到通信终端5的收发单元51(步骤S104)。接着,通信终端5的收发单元51接收关于分发管理设备2的视频(音频)数据和时间信息(T0)并且将视频(音频)数据和时间信息(T0)输出到回放控制单元53。
接着,在通信终端5中,回放控制单元53使用在上述步骤S102处获取的回放-延迟-时间信息(U)、在上述步骤S104处获取的时间信息(T0)以及在图17的步骤S88处贮存在贮存单元5000中的时间差信息(Δ),等待直到通信终端5中的时间达到时间(T0+U-Δ),并且然后将视频(音频)数据输出到译码单元50,从而使得扬声器61回放音频,并且使得显示单元58 通过渲染单元55显示视频(步骤S105)。接着,而仅回放在由以下表达式 (2)表达的回放延迟时间U期间由通信终端5接收的视频(音频)数据,并且在该期间没有被接收的视频(音频)数据被删除而不被回放,因为延迟太大。
U≥(t0+Δ)-T0 (2)
此外,回放控制单元53在时间的当前的点处从贮存单元5000读取通信终端5的时间t0(步骤S106)。时间t0指示在当通信终端5从分发管理设备 2接收视频(音频)数据的时间点时的在通信终端5中的时间。此外,回放控制单元53从贮存单元5000读取指示在图17的步骤S88处贮存的时间差Δ的时间差信息(Δ)(步骤S107)。回放控制单元53计算指示从当从分发管理设备2发送视频(音频)数据时到当视频(音频)数据由通信终端5接收时的时间的发送延迟时间D1(步骤S108)。该计算使用以下等式(3)进行。当通信网络9拥堵时,发送延迟时间D1较长。
D1=(t0+Δ)-T0 (3)
接着,延迟-信息获取单元57从回放控制单元53获取指示发送延迟时间D1的发送-延迟-时间信息(D1),将其保持某个时间段,并且当已经获取发送-延迟-时间信息(D1)的多个段时,将指示从多个段的发送延迟时间d1 形成的频率分发信息的发送-延迟-时间信息(D)输出到收发单元51(步骤 S109)。收发单元51将发送-延迟-时间信息(D)发送到分发管理设备2的收发单元31(步骤S110)。接着,分发管理设备2的收发单元31接收发送- 延迟-时间信息(D)并且将发送-延迟-时间信息(D)输出信道适应性控制单元27。
接着,基于发送-延迟-时间信息(D),分发管理设备2的信道适应性控制单元27新计算回放延迟时间U′,并且计算包括转换单元10的帧率和数据分辨率的操作条件,并且将它们输出到编码器桥单元30(步骤S111)。换句话说,信道适应性控制单元27基于发送-延迟-时间信息(D)和数据尺寸(例如,位的数量或字节的数量)改变编码器桥单元30的操作。
接着,收发单元31从编码器桥单元30获取指示在上述步骤S111处计算的新的回放延迟时间U′的回放-延迟-时间信息(U′),并将回放-延迟-时间信息(U′)发送到通信终端5的收发单元51(步骤S112)。接着,通信终端 5的收发单元51接收回放-延迟-时间信息(U′)。
此外,编码器桥单元30的转换单元10基于指示操作条件的信道适应性控制信号来改变转换单元10的操作条件(步骤S113)。例如,如果在发送延迟时间D1过分地长的情况中,根据发送延迟时间D1、当扬声器61和显示单元58的回放被过分地延迟时的时间,延长回放延迟时间U。因此,存在对延长回放延迟时间U的限制。在这种情况下,信道适应性控制单元27不仅由使得编码器桥单元30将回放延迟时间U改变为回放延迟时间U′,还由使得转换单元10降低视频(音频)数据的帧率或降低视频(音频)数据的分辨率来处理通信网络9的拥堵。用于该目的,如在上述步骤S103处,编码器桥单元30根据改变的操作条件,将指示时间的当前的点的时间信息(T0) 添加到视频(音频)数据[A]作为时间戳(步骤S114)。收发单元31将关于分发管理设备2的视频(音频)数据和时间信息(T0)发送到通信终端5的收发单元51(步骤S115)。接着,通信终端5的收发单元51接收关于分发管理设备2的视频(音频)数据和时间信息(T0),并且将视频(音频)数据和时间信息(T0)输出到回放控制单元53。
接着,如在上述步骤S105处,在通信终端5中,回放控制单元53使用在上述步骤S112处获取的回放-延迟-时间信息(U’)、在上述步骤S115处获取的时间信息(T0)以及在图17的步骤S88处贮存在贮存单元5000中的时间差信息(Δ),等待直到通信终端5中的时间达到时间(T0+U′-Δ),并且然后将视频(音频)数据输出到译码单元50,从而使得扬声器61回放音频,并且使得显示单元58通过渲染单元55显示视频(步骤S116)。接着此的是在步骤S106处的处理以及后续步骤。下行链路信道适应性控制过程不断地以此方式进行。
<上行链路信道适应性控制过程>
在下面参考图19描述对从通信终端5发送到分发管理设备2的(上行链路)数据进行的信道适应性控制过程。图19是示出对从通信终端5发送到分发管理设备2的数据进行的信道适应性控制过程的序列图。
首先,通信终端5的编码单元60编码从相机62和麦克风63输入的作为视频(音频)数据[E]的内容数据(步骤S121)。此时,编码单元60从贮存单元5000获取指示在通信终端5中的时间的当前的点处的时间t0的时间信息(t0)和指示时间差Δ的时间差信息(Δ),但是编码单元60不将其编码。收发单元51将视频(音频)数据[E]、时间信息(t0)和时间差信息(Δ) 发送到分发管理设备2的收发单元31(步骤S122)。接着,分发管理设备2 的收发单元31接收视频(音频)数据[E]、时间信息(t0)和时间差信息(Δ)。
接着,在分发管理设备2中,译码单元40从时间管理单元25读取指示当视频(音频)数据[E]等在步骤S122处被接收的时间点的时间T0(步骤 S123)。译码单元40计算指示从当从通信终端5发送视频(音频)数据时到当视频(音频)数据由分发管理设备2接收时的时间的发送延迟时间d1(步骤S124)。该计算使用以下等式(4)进行。当通信网络9拥堵时,发送延迟时间d1较长。
d1=T0-(t0+Δ) (4)
接着,如通信终端5的延迟-信息获取单元57一样,分发管理设备2的延迟-信息获取单元37a从译码单元40获取指示发送延迟时间D1的发送-延迟-时间信息(D1),将其保持某个时间段,并且当已经获取发送-延迟-时间信息(D1)的多个段时,将指示从多个段的发送延迟时间d1形成的频率分发信息的发送-延迟-时间信息(D)输出到信道适应性控制单元37b(步骤 S125)。
接着,信道适应性控制单元37b基于发送-延迟-时间信息(D)计算通信终端5的编码单元60的操作条件(步骤S126)。收发单元31将指示包括帧率和数据分辨率的操作条件的信道适应性控制信号发送到通信终端5的收发单元51(步骤S127)。接着,通信终端5的收发单元51接收信道适应性控制信号。因此,当在图18中示出的信道适应性控制(下行链路)中、信道适应性控制信号被输出到相同的分发管理设备2中的编码器桥单元30时,在图19中示出的信道适应性控制(上行链路)中,信道适应性控制信号从分发管理设备2经由通信网络9被发送到通信终端5。
接着,通信终端5的编码单元60基于通过由收发单元51接收的信道适应性控制信号指示的操作条件来改变编码单元60的操作条件(步骤S128)。编码单元60根据新的操作条件进行类似于步骤S121进行的处理(步骤 S129)。如在上述步骤S122处,收发单元51将由从相机62和麦克风63获取的编码数据获得的视频(音频)数据[E]、从贮存单元5000获取的指示在通信终端5中的时间的当前的点处的时间t0的时间信息(t0)、以及也是从贮存单元5000获取的指示时间差Δ的时间差信息(Δ)发送到分发管理设备2 的收发单元31(步骤S130)。接着,分发管理设备2的收发单元31接收视频(音频)数据[E]、时间信息(t0)和时间差信息(Δ)。接着此的是在步骤 S123处的处理以及后续步骤。上行链路信道适应性控制过程不断地以此方式进行。
<多显示过程>
在下面参考图20到图22描述多显示过程。图20到图22是示出用于图 4中示出的多显示的过程的序列图。在下面描述其中在通信终端5a上被回放的视频(音频)数据[XYZ]被分割并且也在通信终端5f1、5f2和5f3上被回放的示例。这里,用于显示网页内容的浏览器20被表示为“内容浏览器20a”;用于为用户显示设置屏幕的浏览器20被表示为“设置浏览器20b”。在下面描述相应于步骤S30的处理和后续步骤。
首先,如图20中所示,分发管理设备2的内容浏览器20a渲染从网页服务器8获取的网页内容数据[XYZ],从而产生帧数据,每段帧数据为静态图片(音频)数据,并且将其输出到发送FIFO 24(步骤S201)。编码器桥单元30的转换单元10编码贮存在发送FIFO 24中图像(音频)数据,从而进行转换为可分发到通信终端5a的数据格式的视频(音频)数据[XYZ](步骤S202)。
接着,分发管理设备2的收发单元31将由转换单元转换的视频(音频) 数据[XYZ]发送到通信终端5的收发单元51a(步骤S203)。接着,通信终端 5的收发单元51接收视频(音频)数据[XYZ]并且将其输出到回放控制单元 53。
接着,在通信终端5a中,译码单元50从回放控制单元53获取视频(音频)数据[XYZ]并且将其译码(步骤S204)。此后,扬声器61从译码的音频数据[XYZ]回放音频,而显示单元58从视频数据[XYZ]回放视频,该视频数据[XYZ]从译码单元50获取并且由渲染单元55渲染(步骤S205)。
接着,通信终端5a的用户将显示在显示单元58上的屏幕切换到菜单请求屏幕(未示出)。操作单元52接受菜单请求屏幕上的“分发-目的地选择菜单”按钮(未示出)的按压(步骤S206)。接着,收发单元51将用于切换到分发-目的地选择菜单的请求发送到终端管理设备7的收发单元71a(步骤 S207)。接着,终端管理设备7的收发单元71接收用于切换到分发-目的地选择菜单的请求。该请求包含通信终端5a的终端ID。
接着,收发单元71b将用于开始设置浏览器20b的请求发送到分发管理设备2的收发单元21(步骤S208)。接着,分发管理设备2的收发单元21 接收用于开始设置浏览器20b的请求,并且请求浏览器管理单元22开始设置浏览器20b。
接着,浏览器管理单元22开始设置浏览器20b(步骤S209)。编码器桥单元30的创建/选择/转移单元310进行切换,使得从内容浏览器20a得到的到转换单元10(例如,转换单元10a)的输出被切换到从设置浏览器20b得到的到转换单元10(例如,转换单元10b)的输出(步骤S210)。在通信终端5a和通信终端5的另一个(例如,通信终端5b)在上述步骤S203处在共享转换单元10(例如,转换单元10a)时接收视频(音频)数据的情况中,编码器桥单元30的创建/选择/转移单元310新创建转换单元10(例如,转换单元10b),因为其它通信终端5(例如,通信终端5b)正在使用转换单元 10(例如,转换单元10a)以用于内容浏览器20a。
收发单元21如由设置浏览器20b指导的,将用于分发-目的地选择菜单的请求发送到终端管理设备7的收发单元71b(步骤S211)。此时,通信终端5a的终端ID也被发送。接着,终端管理设备7的收发单元71b接收用于分发-目的地选择菜单的请求,并且将通信终端5a的终端ID输出到贮存单元7000。
响应于此,终端管理设备7的贮存单元7000由终端ID搜索可用的-终端管理表7020,从而提取相应的(一个或多个)共享ID(步骤S212)。共享ID指示可由通信终端5a在远程共享中使用的通信终端5。例如,当分发到通信终端5a的终端ID是“t001”时,共享ID“v003”和“v006”由搜索图15 中示出的可用的-终端管理表7020而被提取。
此外,贮存单元7000由提取的共享ID搜索终端管理表7010,从而提取指示相应的(一个或多个)显示名称的显示名称信息(步骤S213)。在该示例中,如图1中所示4,与提取的共享ID“v003”和“v006”相关联的显示名称分别是“东京总部,10F,MFP”和“大阪展览室,1F,多显示”。
收发单元71b向分发管理设备2的收发单元21发送分发-目的地-选择- 菜单数据[M]作为内容数据(步骤S214)。接着,分发管理设备2的收发单元21接收分发-目的地-选择-菜单数据[M]并且将其输出到设置浏览器20b。分发-目的地-选择-菜单数据[M]是用于使得显示图13中示出的分发-目的地选择菜单屏幕的信息,并且包含检验框、共享ID和显示名称。
接着,如图21中所示,设置浏览器20b渲染表示从终端管理设备7获取的分发-目的地-选择-菜单数据[M]的内容数据,从而产生帧数据,每段帧数据为静态图片(音频)数据,并且将其输出到发送FIFO 24(步骤S221)。编码器桥单元30的转换单元10编码贮存在发送FIFO 24中的每段帧数据,从而进行转换到可分发到通信终端5a的数据格式的视频(音频)数据[M] (步骤S222)。
接着,收发单元31向通信终端5的收发单元51a发送由转换单元10转换的视频(音频)数据[M](步骤S223)。接着,通信终端5的收发单元51 接收视频(音频)数据[M]并且将其输出到回放控制单元53。
接着,在通信终端5a中,译码单元50从回放控制单元53获取视频(音频)数据[M]并且将其译码(步骤S224)。此后,显示单元58从视频数据[M] 回放图13中示出的分发-目的地选择菜单屏幕的视频,该视频数据[M]从译码单元50获取并且由渲染单元55渲染(步骤S225)。
接着,当共享ID“v006”的检验框被标记并且由用户在图13中示出的分发-目的地选择菜单屏幕上按下“OK”按钮时,操作单元52接受由用户输入的操作(步骤S226)。
接着,收发单元51将标记为操作数据[p]的结果发送到分发管理设备2 的收发单元31(步骤S227)。接着,分发管理设备2的收发单元31接收标记结果作为操作数据[p]并且将其输出到设置浏览器20b。
接着,设置浏览器20b基于标记结果来选择(一个或多个)共享ID(步骤S228)。收发单元21如由设置浏览器20b指导的,将分发-目的地添加请求发送到终端管理设备7的收发单元71b(步骤S229)。该分发-目的地添加请求包含在步骤S228处选择的(一个或多个)共享ID。接着,终端管理设备7的收发单元71b接收分发-目的地添加请求并且将共享ID输出到贮存单元7000。已经完成其角色的设置浏览器20b退出(步骤S230)。此后,编码器桥单元30的创建/选择/转移单元310进行切换使得从设置浏览器20b得到的到转换单元10的输出返回到从内容浏览器20a得到的到转换单元10的输出(步骤S231)。
接着,如图22中所示,在终端管理设备7的贮存单元7000中,通过由在步骤S229处发送的共享ID搜索终端管理表7010,相关联的(一个或多个)终端ID和相关联的布局位置信息被提取(步骤S241)。收发单元71b 将分发-目的地添加命令发送到分发管理设备2的收发单元21(步骤S242)。该分发-目的地添加命令包含在上述步骤S241处提取的(一个或多个)终端 ID和布局位置信息。接着,分发管理设备2的收发单元21接收分发-目的地添加命,令并且将分发-目的地添加命令输出到浏览器管理单元22。在这里假设,包含三对终端ID和布局位置信息——其是终端ID“t006”和布局位置信息“左”、终端ID“t007”和布局位置信息“中”、以及终端ID“t008”和布局位置信息“右”。
接着,编码器桥单元30的创建/选择/转移单元310创建转换单元10以用于多显示(步骤S243)。此时,编码器桥单元30的创建/选择/转移单元310 从浏览器管理单元22获取(一个或多个)终端ID和布局位置信息。在上述步骤S243处创建的转换单元10的分割单元13分割帧数据[XYZ],每段帧数据为被贮存在发送FIFO 24中的静态图片(音频)数据。编码单元19编码帧数据的每个分割的段(步骤S244)。
收发单元31根据终端ID(“t006”)和布局位置信息(“左”)将由编码器桥单元30编码的视频(音频)数据[X]发送到通信终端5的收发单元51f1 (步骤S245_1)。接着,通信终端5的收发单元51f1接收视频(音频)数据 [X]并且将其输出到回放控制单元53。
接着,在通信终端5f1中,译码单元50从回放控制单元53获取视频(音频)数据[X]并且将其译码(步骤S246_1)。此后,扬声器61从译码的音频数据[X]回放音频,而显示单元58从视频数据[X]回放视频,该视频数据[X] 从译码单元50获取并且由渲染单元55渲染(步骤S247_1)。
类似地,收发单元31根据终端ID(“t007”)和布局位置信息(“中”) 将由编码器桥单元30编码的视频(音频)数据[Y]发送到通信终端5的收发单元51f2(步骤S245_2)。接着,通信终端5的收发单元51f2接收视频(音频)数据[Y]并且将其输出到回放控制单元53。
接着,在通信终端5f2中,译码单元50从回放控制单元53获取视频(音频)数据[Y]并且将其译码(步骤S246_2)。此后,扬声器61从译码的音频数据[Y]回放音频,而显示单元58从视频数据[Y]回放视频,该视频数据[Y] 从译码单元50获取并且由渲染单元55渲染(步骤S247_2)。
还类似地,收发单元31根据终端ID(“t008”)和布局位置信息(右”) 将由编码器桥单元30编码的视频(音频)数据[Z]发送到通信终端5的收发单元51f3(步骤S245_3)。接着,通信终端5的收发单元51f3接收视频(音频)数据[Z]并且将其输出到回放控制单元53。
接着,在通信终端5f3中,译码单元50从回放控制单元53获取视频(音频)数据[Z]并且将其译码(步骤S246_3)。此后,扬声器61从译码的音频数据[Z]回放音频,而显示单元58从视频数据[Z]回放视频,该视频数据[Z] 从译码单元50获取并且由渲染单元55渲染(步骤S247_3)。
<利用多显示的放大显示过程>
参考图23在下面描述利用多显示的放大显示过程。图23是示出图5中示出的利用多显示的放大显示过程的序列图。示出了一示例,其中,在正在通信终端5f1上回放的视频[A]也被分发到并且被回放在通信终端5f1、5f2 和5f3上的情况中,接受由用户进行的放大到并且显示被显示在通信终端5f1 上的视频[A]的部分区域的操作,并且区域的视频[A′]和[A″]被回放并且以放大的方式显示在通信终端5f2和5f3上。类似于图20到图22中示出的多显示过程的过程也在该示例中进行。省略关于类似于图20到图22中示出的多显示过程的过程的描述,并且描述处理图22的以下步骤S247_1、步骤S247_2 和步骤S247_3。注意,在该示例中,视频数据[A]不被分割,但是在图22 的步骤S244处经历编码等,并且视频数据[A]在步骤S245_1、步骤S245_2 和步骤S245_3处分别被发送到通信终端5f1、5f2和5f3。视频数据[A]在步骤S246_1、步骤S246_2和步骤S246_3的相应的一个处,由通信终端5f1、 5f2和5f3的每一个的译码单元50译码。视频[A]在步骤S247_1、步骤S247_2 和步骤S247_3的相应的一个处被显示在通信终端5f1、5f2和5f3的每一个的显示单元58上。假设,通信终端5f1从终端管理设备7获取关于通信终端5f2和5f3的终端信息,并且提前将其贮存在贮存单元7000中。下面的描述在图14示出的终端管理表7010贮存在贮存单元7000中的假设上作出。
首先,当由用户使用通信终端5f1的操作单元52进行旨在放大到并且显示,被显示在通信终端5f1的显示单元58上的视频[A]的部分的操作时,由操作单元52接受该操作。通信终端5的收发单元51f1将指示放大到并且显示视频[A]的部分的操作的第一操作数据发送到分发管理设备2的收发单元31(步骤S301)。接着,分发管理设备2的收发单元31接收第一操作数据并且将其输出到浏览器管理单元22。
接着,当浏览器管理单元22从收发单元31获取第一操作数据时,收发单元21向终端管理设备7的收发单元71b发送用于由通信终端5f2和5f3的终端ID指定的终端信息的请求(步骤S302)。接着,终端管理设备7的收发单元71b接收用于终端信息的请求,并且将通信终端5f2和5f3的终端ID 输出到贮存单元7000。贮存单元7000通过由通信终端5f2和5f3的终端ID 搜索终端管理表7010而读取与通信终端5f2和5f3的终端ID相关联的分辨率信息(1920*1080和1920*1080)以及选择的坐标信息((600100)和 (6002400))(步骤S303)。作为对在步骤S302处提交的请求的响应,终端管理设备7的收发单元71b将从终端管理表7010读取的包含分辨率信息和选择的坐标信息的终端信息(关于通信终端5f2和5f3的逐个终端的终端信息)发送到分发管理设备2的收发单元21(步骤S304)。接着,分发管理设备2的收发单元21接收包含分辨率信息和选择的坐标信息的终端信息(关于通信终端5f2和5f3的逐个终端的终端信息)并且将其输出到浏览器管理单元22。
接着,在图22的步骤S243处创建的用于多显示的转换单元10从浏览器管理单元22获取关于通信终端5f2和5f3的分辨率信息和选择的坐标信息,并且使用关于通信终端5f2和5f3的分辨率信息和选择的坐标信息对由浏览器20渲染的每段的帧数据[A]进行修剪、尺寸改变、编码等(步骤S305)。具体地,在分发到通信终端5f2的转换单元10中,修剪单元11根据选择的坐标信息从由浏览器20渲染的每段的帧数据[A]剪出取决于关于通信终端 5f2的分辨率信息的尺寸的区域[A′]。类似地,在分发到通信终端5f3的转换单元10中,修剪单元11根据选择的坐标信息,从由浏览器20渲染的每段的帧数据[A]剪出取决于关于通信终端5f3的分辨率信息的尺寸的区域[A″]。在每个转换单元10中,尺寸改变单元12如取决于通信终端5的分辨率所要求的,对每段的帧数据[A]、[A′]和[A″]进行尺寸改变等,并且编码单元19 编码每段的帧数据[A]、[A′]和[A″]。
收发单元31将视频数据[A]发送到通信终端5的收发单元51f1,对该视频数据[A]由分发到通信终端5f1的转换单元10进行编码等(步骤S306_1)。接着,通信终端5的收发单元51f1接收视频数据[A]并且将其输出到回放控制单元53。
接着,在通信终端5f1中,译码单元50从回放控制单元53获取视频数据[A]并且将其译码(步骤S307_1)。此后,显示单元58从视频数据[A]回放视频[A],该视频数据[A]从译码单元50获取并且由渲染单元55渲染(步骤 S308_1)。因此,通信终端5f1的显示单元58继续显示视频[A]。此时,通信终端5f1的显示单元58基于在从终端管理设备7获取的并且提前贮存在贮存单元5000中包含的、关于通信终端5f2和5f3的终端信息中的分辨率信息和选择的坐标信息,通过将引导框叠加在视频[A]上来显示指示将放大到并且显示在通信终端5f2和5f3上的区域的引导框。
分发管理设备2的收发单元31将视频数据[A′]发送到通信终端5的收发单元51f2,对该视频数据[A′]由分发到通信终端5f2的转换单元10进行编码等(步骤S306_2)。接着,通信终端5的收发单元51f2接收视频数据[A′]并且将其输出到回放控制单元53。
接着,在通信终端5f2中,译码单元50从回放控制单元53获取视频数据[A′]并且将其译码(步骤S307_2)。此后,显示单元58从视频数据[A′]回放视频[A′],该回放视频[A′]从译码单元50获取并且由渲染单元55渲染(步骤S308_2)。因此,通信终端5f2的显示单元58显示被显示在通信终端5f1 的显示单元58上的视频[A]的部分区域(由与通信终端5f2相关联的引导框围绕的区域)的放大的视频[A′]。
类似地,分发管理设备2的收发单元31将视频数据[A″]发送到通信终端5的收发单元51f3,对该视频数据[A″]由分发到通信终端5f3的转换单元 10进行编码等(步骤S306_3)。接着,通信终端5的收发单元51f3接收视频数据[A″]并且将其输出到回放控制单元53。
接着,在通信终端5f3中,译码单元50从回放控制单元53获取视频数据[A″]并且将其译码(步骤S307_3)。此后,显示单元58从视频数据[A″]回放视频[A″],该视频数据[A″]从译码单元50获取并且由渲染单元55渲染(步骤S308_3)。因此,通信终端5f3的显示单元58显示,显示在通信终端5f1 的显示单元58上的视频[A]的部分区域(由与通信终端5f3相关联的引导框围绕的区域)的放大的视频[A″]。
接着,当由用户使用通信终端5f1的操作单元52进行在被显示在通信终端5f1的显示单元58上的视频[A]上移动引导框(在该示例中,与通信终端5f2相关联的引导框)的操作时,由操作单元52接受该操作。通信终端5 的收发单元51f1将包含由引导框行进的距离和方向的第二操作数据发送到分发管理设备2的收发单元31(步骤S309)。接着,分发管理设备2的收发单元31接收第二操作数据并且将其输出到浏览器管理单元22。
接着,当浏览器管理单元22从收发单元31接收第二操作数据时,在图 22的步骤S243处创建的用于多显示的转换单元10从浏览器管理单元22获取,由从通信终端5f1发送的第二操作数据指示的由引导框行进的距离和方向。用于多显示的转换单元10对由浏览器20渲染的每段的帧数据[A]进行修剪、尺寸改变、编码等,同时使用由引导框行进的距离和方向改变将被剪出的区域(步骤S310)。具体地,在由用户在被显示在通信终端5f1的显示单元58上的视频[A]上移动的引导框与通信终端5f2相关联的情况中,被分发到通信终端5f2的转换单元10的修剪单元11根据由引导框行进的距离和方向,改变将从由浏览器20渲染的每段的帧数据[A]剪出的区域[A′]的位置,同时维持其尺寸。在每个转换单元10中,如取决于通信终端5的分辨率要求的,尺寸改变单元12对每段的视频数据[A]、[A′]和[A″]进行尺寸改变等,并且编码单元19编码每段的帧数据[A]、[A′]和[A″]。
收发单元31将视频数据[A]发送到通信终端5的收发单元51f1,对该视频数据[A]由分发到通信终端5f1的转换单元10进行编码等(步骤S311_1)。接着,通信终端5的收发单元51f1接收视频数据[A]并且将其输出到回放控制单元53。
接着,在通信终端5f1中,译码单元50从回放控制单元53获取视频数据[A]并且将其译码(步骤S312_1)。此后,显示单元58从视频数据[A]回放视频[A],该视频数据[A]从译码单元50获取并且由渲染单元55渲染(步骤 S313_1)。因此,通信终端5f1的显示单元58继续显示视频[A]。
分发管理设备2的收发单元31将视频数据[A′]发送到通信终端5的收发单元51f2,对该视频数据[A′]由分发到通信终端5f2的转换单元10进行编码等(步骤S311_2)。接着,通信终端5的收发单元51f2接收视频数据[A′]并且将其输出到回放控制单元53。
接着,在通信终端5f2中,译码单元50从回放控制单元53获取视频数据[A′]并且将其译码(步骤S312_2)。此后,显示单元58从视频数据[A′]回放视频[A′],该回放视频[A′]从译码单元50获取并且由渲染单元55渲染(步骤S313_2)。因此,通信终端5f2的显示单元58显示,在显示在通信终端 5f1的显示单元58上的视频[A]上由根据用户的操作已经移动的引导框围绕的区域的放大的视频[A′]。
类似地,分发管理设备2的收发单元31将视频数据[A″]发送到通信终端5的收发单元51f3,对该视频数据[A″]由分发到通信终端5f3的转换单元 10进行编码等(步骤S311_3)。接着,通信终端5的收发单元51f3接收视频数据[A″]并且将其输出到回放控制单元53。
接着,在通信终端5f3中,译码单元50从回放控制单元53获取视频数据[A″]并且将其译码(步骤S312_3)。此后,显示单元58从视频数据[A″]回放视频[A″],该视频数据[A″]从译码单元50获取并且由渲染单元55渲染(步骤S313_3)。因此,通信终端5f3的显示单元58继续显示被显示在通信终端 5f1的显示单元58上的视频[A]的部分区域(由与通信终端5f3相关联的引导框围绕的区域)的放大的视频[A″]。
在上述示例中,编码器桥单元30的创建/选择/转移单元310在用户进行放大到视频的部分的操作之前(在第一操作数据被发送到分发管理设备2之前),创建用于多显示的转换单元10。可替换地,可以采用其中在第一操作数据被发送到分发管理设备2之后创建用于多显示的转换单元10的配置。
[实施例的主要效果]
如以具体示例的方式在上面详细描述的,在本实施例的分发系统1中,云上的分发管理设备2包括浏览器20和编码器桥单元30,该编码器桥单元 30进行编码等。浏览器20通过渲染以预定的描述语言描述的内容数据而产生帧数据。编码器桥单元30对帧数据进行编码等,从而进行转换到可经由通信网络9分发到通信终端5的数据格式的视频(音频)数据。当从向其分发视频数据的多个通信终端5的一个(第一通信终端)接收指示放大到被回放的视频的部分区域的操作的第一操作数据时,编码器桥单元30剪出区域,该区域是由浏览器20渲染的帧数据的部分区域,并且该区域的尺寸取决于另一个通信终端5(第二通信终端)的显示/回放能力(例如,分辨率),编码器桥单元30将表示剪出区域的帧数据转换为视频数据,并且将视频数据分发到第二通信终端。
因此,在本实施例的分发系统1中,当进行放大到由内容数据产生的整个视频的部分区域的操作时,部分区域以取决于其它的通信终端5的一个的显示/回放能力的方式被显示在另一个通信终端5(第二通信终端)上,而不是显示整个视频的通信终端5(第一通信终端)。因此,能够使得通信终端5 显示内容的整个视频,并且同时以易于查看的方式显示内容的期望的部分。
此外,在本实施例的分发系统1中,显示整个视频的通信终端5(第一通信终端)显示引导框,该引导框指示将被放大并且通过将引导框叠加到视频上而显示在另一个通信终端5(第二通信终端)上的区域。根据在引导框上进行的操作而在整个视频中改变将被放大并且显示在另一个通信终端5 (第二通信终端)上的区域。因此,用户可以通过直观地操作指定内容的期望的部分,并且从而可以实现高水平的可操作性。
[修改]
在本实施例的分发系统1中,终端管理设备7和分发管理设备2被配置为单独的设备。可替换地,终端管理设备7和分发管理设备2可以例如通过将终端管理设备7的功能分给分发管理设备2而被配置在单个设备中。
以上实施例的分发管理设备2和终端管理设备7可以被实现在单个计算机中或者可以由如计算机所期望地分割单元(功能、手段或贮存单元)以及分发单元实现在多个计算机中。
其中贮存实施例的程序的记录介质——诸如CD-ROM,以及其中贮存程序的HDD204的每一个可以作为程序产品本国地或外国地提供。
引用列表
专利文献
专利文献1:日本公开专利申请No.2002-268969
Claims (6)
1.一种分发管理设备,经由网络与第一通信终端、第二通信终端、第三通信终端以及终端管理设备可通信地连接,所述第一通信终端被配置为显示叠加了第一引导框和第二引导框的视频,所述第二通信终端被配置为对所述第一通信终端正在显示的视频中的所述第一引导框所包围的区域进行放大,所述第三通信终端被配置为对所述第一通信终端正在显示的视频中的所述第二引导框所包围的区域进行放大,并且所述终端管理设备被配置为管理终端信息,其中,所述分发管理设备包括:
终端信息接收器,被配置为从所述终端管理设备接收终端信息,所述终端信息至少包括指示所述第一通信终端、第二通信终端和第三通信终端中的每个的分辨率的分辨率信息以及指示所述第一引导框和第二引导框的初始位置的选择的坐标信息;
产生器,被配置为通过渲染内容数据产生帧数据;
第一转换器,被配置为通过基于所述第一通信终端的分辨率对所述帧数据进行调整尺寸和编码,将所述帧数据转换为第一视频数据;
第二转换器,被配置为通过从所述帧数据剪出与所述选择的坐标信息所指定的所述第一引导框的初始位置相对应的区域并且通过对剪出区域进行编码,将所述帧数据转换为第二视频数据,其中所述剪出区域具有取决于所述第二通信终端的分辨率的尺寸;
第三转换器,被配置为通过从所述帧数据剪出与所述选择的坐标信息所指定的所述第二引导框的初始位置相对应的区域并且通过对剪出区域进行编码,将所述帧数据转换为第三视频数据,其中所述剪出区域具有取决于所述第三通信终端的分辨率的尺寸;以及
发送器,被配置为将所述第一视频数据发送到所述第一通信终端,将所述第二视频数据发送到所述第二通信终端,并且将所述第三视频数据发送到所述第三通信终端。
2.根据权利要求1所述的分发管理设备,其中
所述第二转换器根据对所述第一通信终端正在显示的视频上的所述第一引导框进行移动的操作,改变从所述帧数据剪出的区域,以及
所述第三转换器根据对所述第一通信终端正在显示的视频上的所述第二引导框进行移动的操作,改变从所述帧数据剪出的区域。
3.根据权利要求1或2所述的分发管理设备,其中所述产生器获取以预定的描述语言描述的所述内容数据以产生所述帧数据。
4.根据权利要求1或2所述的分发管理设备,其中
所述产生器是网页浏览器,以及
所述第一转换器、第二转换器和第三转换器中的每个包括被配置为编码由所述网页浏览器产生的所述帧数据的编码器。
5.一种在分发管理设备中进行的方法,所述分发管理设备经由网络与第一通信终端、第二通信终端、第三通信终端以及终端管理设备可通信地连接,所述第一通信终端被配置为显示叠加了第一引导框和第二引导框的视频,所述第二通信终端被配置为对所述第一通信终端正在显示的视频中的所述第一引导框所包围的区域进行放大,所述第三通信终端被配置为对所述第一通信终端正在显示的视频中的所述第二引导框所包围的区域进行放大,并且所述终端管理设备被配置为管理终端信息,其中,所述分发方法包括:
由所述分发管理设备的终端信息接收器从所述终端管理设备接收终端信息,所述终端信息至少包括指示所述第一通信终端、第二通信终端和第三通信终端中的每个的分辨率的分辨率信息以及指示所述第一引导框和第二引导框的初始位置的选择的坐标信息;
由所述分发管理设备的产生器通过渲染内容数据产生帧数据;
由所述分发管理设备的第一转换器通过基于所述第一通信终端的分辨率对所述帧数据进行调整尺寸和编码,将所述帧数据转换为第一视频数据;
由所述分发管理设备的第二转换器通过从所述帧数据剪出与所述选择的坐标信息所指定的所述第一引导框的初始位置相对应的区域并且通过对剪出区域进行编码,将所述帧数据转换为第二视频数据,其中所述剪出区域具有取决于所述第二通信终端的分辨率的尺寸;
由所述分发管理设备的第三转换器通过从所述帧数据剪出与所述选择的坐标信息所指定的所述第二引导框的初始位置相对应的区域并且通过对剪出区域进行编码,将所述帧数据转换为第三视频数据,其中所述剪出区域具有取决于所述第三通信终端的分辨率的尺寸;并且
由所述分发管理设备的发送器将所述第一视频数据发送到所述第一通信终端,将所述第二视频数据发送到所述第二通信终端,并且将所述第三通信数据发送到所述第三通信终端。
6.一种计算机可读记录介质,所述介质上存储有用于计算机的程序,所述计算机经由网络与第一通信终端、第二通信终端、第三通信终端以及终端管理设备可通信地连接,所述第一通信终端被配置为显示叠加了第一引导框和第二引导框的视频,所述第二通信终端被配置为对所述第一通信终端正在显示的视频中的所述第一引导框所包围的区域进行放大,所述第三通信终端被配置为对所述第一通信终端正在显示的视频中的所述第二引导框所包围的区域进行放大,并且所述终端管理设备被配置为管理终端信息,其中,所述程序使所述计算机执行以下功能:
终端信息接收器,被配置为从所述终端管理设备接收终端信息,所述终端信息至少包括指示所述第一通信终端、第二通信终端和第三通信终端中的每个的分辨率的分辨率信息以及指示所述第一引导框和第二引导框的初始位置的选择的坐标信息;
产生器,被配置为通过渲染内容数据产生帧数据;
第一转换器,被配置为通过基于所述第一通信终端的分辨率对所述帧数据进行调整尺寸和编码,将所述帧数据转换为第一视频数据;
第二转换器,被配置为通过从所述帧数据剪出与所述选择的坐标信息所指定的所述第一引导框的初始位置相对应的区域并且通过对剪出区域进行编码,将所述帧数据转换为第二视频数据,其中所述剪出区域具有取决于所述第二通信终端的分辨率的尺寸;
第三转换器,被配置为通过从所述帧数据剪出与所述选择的坐标信息所指定的所述第二引导框的初始位置相对应的区域并且通过对剪出区域进行编码,将所述帧数据转换为第三视频数据,其中所述剪出区域具有取决于所述第三通信终端的分辨率的尺寸;以及
发送器,被配置为将所述第一视频数据发送到所述第一通信终端,将所述第二视频数据发送到所述第二通信终端,并且将所述第三视频数据发送到所述第三通信终端。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013-200553 | 2013-09-26 | ||
JP2013200553 | 2013-09-26 | ||
PCT/JP2014/073403 WO2015045788A1 (ja) | 2013-09-26 | 2014-09-04 | 配信管理装置、配信方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105580378A CN105580378A (zh) | 2016-05-11 |
CN105580378B true CN105580378B (zh) | 2019-02-22 |
Family
ID=52742935
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201480052695.6A Active CN105580378B (zh) | 2013-09-26 | 2014-09-04 | 分发管理设备和分发方法 |
Country Status (7)
Country | Link |
---|---|
US (1) | US9894391B2 (zh) |
EP (1) | EP3051826A4 (zh) |
JP (1) | JP6354764B2 (zh) |
CN (1) | CN105580378B (zh) |
PH (1) | PH12016500542A1 (zh) |
SG (1) | SG11201602105WA (zh) |
WO (1) | WO2015045788A1 (zh) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6565382B2 (ja) * | 2015-06-30 | 2019-08-28 | ブラザー工業株式会社 | 情報処理方法及び動画データ送信システム |
JP6715464B2 (ja) * | 2015-11-06 | 2020-07-01 | パナソニックIpマネジメント株式会社 | 電力送信装置及び電力受信装置 |
JP2017111589A (ja) | 2015-12-16 | 2017-06-22 | 株式会社リコー | 座標検出装置、表示システム、投影システム及び座標検出方法 |
JP6798288B2 (ja) | 2016-12-02 | 2020-12-09 | 株式会社リコー | 通信端末、通信システム、映像出力方法、及びプログラム |
US11178118B2 (en) * | 2019-04-09 | 2021-11-16 | First Data Corporation | Network provisioning and tokenization using a remote terminal |
WO2021092756A1 (en) * | 2019-11-12 | 2021-05-20 | Kingstar Technologies, Inc. | Alerting a device that shares an identity with another device based on user configuration |
CN113055715A (zh) * | 2019-12-28 | 2021-06-29 | 中移(成都)信息通信科技有限公司 | 播放资源的处理方法、装置、设备及存储介质 |
CN111246147B (zh) * | 2020-01-15 | 2021-06-22 | 广州酷狗计算机科技有限公司 | 视频缓存方法、装置、终端及存储介质 |
US20210303330A1 (en) * | 2020-03-24 | 2021-09-30 | Euiogio Francisco Veliz Lucero, III | System for providing access to a virtual machine via a hub interface |
JP6748323B1 (ja) * | 2020-03-30 | 2020-08-26 | 株式会社ドワンゴ | 動画配信装置、動画配信方法、および、動画配信プログラム |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009049528A (ja) * | 2007-08-14 | 2009-03-05 | Canon Inc | 画像配信システム、画像配信方法、及びコンピュータプログラム |
Family Cites Families (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002268969A (ja) | 2001-03-14 | 2002-09-20 | Casio Comput Co Ltd | コンテンツ分配配信システム |
US9137497B2 (en) * | 2007-04-11 | 2015-09-15 | At&T Intellectual Property I, Lp | Method and system for video stream personalization |
JP2009200937A (ja) * | 2008-02-22 | 2009-09-03 | Toshiba Corp | デジタル放送受信機 |
JP4715886B2 (ja) * | 2008-08-29 | 2011-07-06 | ソニー株式会社 | 映像表示装置、映像表示システムおよび映像表示方法 |
US20110107238A1 (en) * | 2009-10-29 | 2011-05-05 | Dong Liu | Network-Based Collaborated Telestration on Video, Images or Other Shared Visual Content |
US9804727B2 (en) | 2010-03-09 | 2017-10-31 | Freedom Scientific, Inc. | Flexible display of visual content on multiple display devices |
US8331760B2 (en) * | 2010-06-02 | 2012-12-11 | Microsoft Corporation | Adaptive video zoom |
JP6069898B2 (ja) | 2011-11-25 | 2017-02-01 | 株式会社リコー | 画像処理装置、画像処理システム、方法およびプログラム |
KR101522399B1 (ko) * | 2011-12-23 | 2015-05-22 | 주식회사 케이티 | 휴대 단말에서 외부 디스플레이 기기로의 화면 표출 방법 및 그 휴대 단말 |
US20130162501A1 (en) * | 2011-12-27 | 2013-06-27 | Nitendo Co., Ltd. | Method for controlling multiple displays |
JP2014200074A (ja) | 2013-03-15 | 2014-10-23 | 株式会社リコー | 配信制御システム、配信制御方法、及びプログラム |
EP2974327A4 (en) | 2013-03-15 | 2016-03-09 | Ricoh Co Ltd | DISTRIBUTION CONTROL SYSTEM AND DISTRIBUTION SYSTEM |
JP6354195B2 (ja) | 2013-03-15 | 2018-07-11 | 株式会社リコー | 配信システム、配信方法、及びプログラム |
JP2014199648A (ja) | 2013-03-15 | 2014-10-23 | 株式会社リコー | 配信制御システム、配信システム、配信制御方法、及びプログラム |
JP6323048B2 (ja) | 2013-03-15 | 2018-05-16 | 株式会社リコー | 配信システム、配信方法、及びプログラム |
JP6337499B2 (ja) | 2013-03-15 | 2018-06-06 | 株式会社リコー | 配信制御システム、配信システム、配信制御方法、及びプログラム |
JP2014200076A (ja) | 2013-03-15 | 2014-10-23 | 株式会社リコー | 配信制御システム、配信制御方法、及びプログラム |
JP6398215B2 (ja) | 2013-03-15 | 2018-10-03 | 株式会社リコー | 配信制御システム、配信システム、配信制御方法、及びプログラム |
JP6369043B2 (ja) | 2013-03-15 | 2018-08-08 | 株式会社リコー | 配信制御システム、配信システム、配信制御方法、及びプログラム |
EP2793475A1 (en) | 2013-03-15 | 2014-10-22 | Ricoh Company, Ltd. | Distribution control system, distribution control method, and computer-readable storage medium |
JP6326855B2 (ja) | 2013-03-15 | 2018-05-23 | 株式会社リコー | 配信制御システム、配信システム、配信制御方法、及びプログラム |
JP6354197B2 (ja) | 2013-03-15 | 2018-07-11 | 株式会社リコー | 配信制御システム、配信制御方法、及びプログラム |
JP2014200075A (ja) | 2013-03-15 | 2014-10-23 | 株式会社リコー | コンピュータシステム、配信制御システム、配信制御方法、及びプログラム |
US9626084B2 (en) * | 2014-03-21 | 2017-04-18 | Amazon Technologies, Inc. | Object tracking in zoomed video |
-
2014
- 2014-09-04 US US15/024,577 patent/US9894391B2/en active Active
- 2014-09-04 EP EP14849323.2A patent/EP3051826A4/en not_active Withdrawn
- 2014-09-04 SG SG11201602105WA patent/SG11201602105WA/en unknown
- 2014-09-04 CN CN201480052695.6A patent/CN105580378B/zh active Active
- 2014-09-04 JP JP2015539059A patent/JP6354764B2/ja not_active Expired - Fee Related
- 2014-09-04 WO PCT/JP2014/073403 patent/WO2015045788A1/ja active Application Filing
-
2016
- 2016-03-21 PH PH12016500542A patent/PH12016500542A1/en unknown
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009049528A (ja) * | 2007-08-14 | 2009-03-05 | Canon Inc | 画像配信システム、画像配信方法、及びコンピュータプログラム |
Also Published As
Publication number | Publication date |
---|---|
PH12016500542A1 (en) | 2016-06-13 |
CN105580378A (zh) | 2016-05-11 |
WO2015045788A1 (ja) | 2015-04-02 |
JP6354764B2 (ja) | 2018-07-11 |
EP3051826A1 (en) | 2016-08-03 |
SG11201602105WA (en) | 2016-05-30 |
US20160241891A1 (en) | 2016-08-18 |
JPWO2015045788A1 (ja) | 2017-03-09 |
EP3051826A4 (en) | 2016-10-19 |
US9894391B2 (en) | 2018-02-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105580378B (zh) | 分发管理设备和分发方法 | |
CN104052798B (zh) | 分布式控制系统和分布式控制方法 | |
JP6326855B2 (ja) | 配信制御システム、配信システム、配信制御方法、及びプログラム | |
JP6337499B2 (ja) | 配信制御システム、配信システム、配信制御方法、及びプログラム | |
JP6398215B2 (ja) | 配信制御システム、配信システム、配信制御方法、及びプログラム | |
JP6369043B2 (ja) | 配信制御システム、配信システム、配信制御方法、及びプログラム | |
JP2014200076A (ja) | 配信制御システム、配信制御方法、及びプログラム | |
JP6323048B2 (ja) | 配信システム、配信方法、及びプログラム | |
CN105247875B (zh) | 分发控制系统和分发系统 | |
JP6354195B2 (ja) | 配信システム、配信方法、及びプログラム | |
JP2014200074A (ja) | 配信制御システム、配信制御方法、及びプログラム | |
JP2014199648A (ja) | 配信制御システム、配信システム、配信制御方法、及びプログラム | |
JP6589261B2 (ja) | 配信制御システム、配信制御方法、及びプログラム | |
WO2015045787A1 (ja) | 配信管理装置、端末及び配信管理方法 | |
JP2015069244A (ja) | 配信システム、配信方法、及びプログラム | |
JP2016063247A (ja) | 配信システム及び配信方法 | |
JP2015056046A (ja) | 配信管理システム、配信システム、配信管理方法、及びプログラム | |
JP6607298B2 (ja) | 配信制御システム、配信制御方法、及びプログラム | |
JP2016004352A (ja) | 端末管理システム、端末管理方法、及びプログラム | |
JP6442832B2 (ja) | 配信制御システム、配信システム、配信制御方法、及びプログラム | |
JP2016058812A (ja) | 配信制御システム、配信システム、配信制御システムの制御方法、及びプログラム | |
JP2015061107A (ja) | 配信管理装置、及び配信システム | |
JP6387623B2 (ja) | 配信制御システム | |
JP6197535B2 (ja) | 配信システム、配信方法、及びプログラム | |
JP6375638B2 (ja) | 配信制御システム、配信システム、配信制御方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |