CN103814578B - 接收器、显示控制方法、广播系统 - Google Patents

接收器、显示控制方法、广播系统 Download PDF

Info

Publication number
CN103814578B
CN103814578B CN201280036277.9A CN201280036277A CN103814578B CN 103814578 B CN103814578 B CN 103814578B CN 201280036277 A CN201280036277 A CN 201280036277A CN 103814578 B CN103814578 B CN 103814578B
Authority
CN
China
Prior art keywords
plane
data broadcasting
image signal
broadcast
motion image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201280036277.9A
Other languages
English (en)
Other versions
CN103814578A (zh
Inventor
出叶义治
A·K·阿尔巴鲁斯特罗
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Brasil Ltda
Sony Corp
Original Assignee
Sony Brasil Ltda
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Brasil Ltda, Sony Corp filed Critical Sony Brasil Ltda
Publication of CN103814578A publication Critical patent/CN103814578A/zh
Application granted granted Critical
Publication of CN103814578B publication Critical patent/CN103814578B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H20/00Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/18Arrangements for synchronising broadcast or distribution via plural systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H20/00Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/86Arrangements characterised by the broadcast information itself
    • H04H20/91Arrangements characterised by the broadcast information itself broadcasting computer programmes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H20/00Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/86Arrangements characterised by the broadcast information itself
    • H04H20/93Arrangements characterised by the broadcast information itself which locates resources of other pieces of information, e.g. URL [Uniform Resource Locator]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/09Arrangements for device control with a direct linkage to broadcast information or to broadcast space-time; Arrangements for control of broadcast-related services
    • H04H60/13Arrangements for device control affected by the broadcast information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/76Arrangements characterised by transmission systems other than for broadcast, e.g. the Internet
    • H04H60/81Arrangements characterised by transmission systems other than for broadcast, e.g. the Internet characterised by the transmission system itself
    • H04H60/82Arrangements characterised by transmission systems other than for broadcast, e.g. the Internet characterised by the transmission system itself the transmission system being the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42653Internal components of the client ; Characteristics thereof for processing graphics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432Content retrieval operation from a local storage medium, e.g. hard-disk
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348Demultiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44004Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/654Transmission by server directed to the client
    • H04N21/6547Transmission by server directed to the client comprising parameters, e.g. for client setup
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/858Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Computer Graphics (AREA)
  • General Engineering & Computer Science (AREA)
  • Marketing (AREA)
  • Business, Economics & Management (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Circuits Of Receivers In General (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Studio Circuits (AREA)
  • Digital Computer Display Output (AREA)

Abstract

本发明涉及接收器、显示控制方法、广播系统。使用数据广播服务合成广播内容和网络内容并且适当地同时再现这两种内容。例如,广播公司和应用提供商将与广播内容有关的AV内容上载到服务器,并且传送含有AV内容的URL链接的数据广播应用。马赛克型菜单的每个选择按钮包含一个AV内容的URL链接。广播公司和应用提供商可以控制用户与观看节目同时地再现的流运动图像应该是什么。

Description

接收器、显示控制方法、广播系统
技术领域
在本说明中公开的技术涉及接收广播信号并显示广播内容的接收器、显示控制方法、广播系统和计算机程序。更具体地说,在本说明中公开的技术涉及将从广播信号获得的广播内容与经由网络获取的网络内容合成并将这两个内容同时再现的接收器、显示控制方法、广播系统和计算机程序。
背景技术
当前,在世界上的各个国家中,数字化正在使用地面波、卫星波、线缆等的广播系统中被推进。数字信号在稳定性上优于模拟信号,并且具有高数据压缩率。这样,与使用模拟信号的广播相比,在数字广播中,在给定的带宽内可以确保更多的信道。另外,在数字广播中,还可以发送数据广播,这使得结合另一种服务来实现混合广播服务成为可能。
例如,对于2000年在日本开始的采用ISDB(Integrated Services DigitalBroadcasting,综合业务数字广播)方式的数字广播,数据广播是其特征之一。在该方式中,除了构成广播节目的主体的视频和音频数据(AV数据)以外,与广播节目相关联的数字传输数据(在下文中称为“用于数据广播的数据或数据广播数据”)与AV数据并行地由广播公司(broadcaster)等来传送。更具体地说,广播信号是以传输流的形式传送的,该传输流通过对通过诸如MPEG(运动图像专家组)2的某种压缩方法压缩的AV数据与用于以诸如BML(广播标记语言)的编码方法编码的数据广播的数据进行复用而构成。BML基于XML(可扩展标记语言)并且包括诸如以下的功能:用于指定多媒体数据的位置的功能、通过作为Java(注册商标)脚本的标准规格的ECMA 脚本进行的脚本执行功能、以及用于通过DOM(文档对象模型)来操作XML的功能。
例如,当观看电视节目(在下文中称为“广播内容”)的用户操作在遥控器上提供的“d”(数据连动)按钮时,针对电视的数据广播被显示。具体地说,当在广播内容正被完全地显示在电视屏幕上的时候“d”按钮被操作时,解释以BML格式书写的用于数据广播的数据的用于数据广播的浏览器被激活,并且屏幕的状态改变为数据广播显示。
例如,用于数据广播的数据包括媒体数据(诸如,静止图像、运动图像、声音、图片和文字),以及将这些数据统合并且控制其表现形式和操作的数据广播应用。例如,通过使用遥控器上的光标键、决定键、颜色按钮或数字键(数字小键盘),用户(数字广播的观看者)可以指示在数据广播显示屏幕上的每个媒体数据的操作。通过使用数据广播应用,诸如广播公司的公用事业公司可以实现与主广播节目相关联的数据广播服务。
例如,Java(注册商标)技术可以被应用于数据广播应用。在应用Java技术的情况下,数据广播应用由作为在Java(注册商标)虚拟机上操作的字节码的类文件构成。在接收器(例如,电视机)内的Java虚拟机运行接收到的类文件,从而向观看者提供数据广播服务。执行一个Java(注册商标)数据广播服务需要多个类文件。这样,Java(注册商标)数据广播服务直到所有的类文件都被获得才能被执行。还可以将某个Java(注册商标)数据广播服务被执行一次时曾使用的类文件累积在接收器中,并在之后将这些类文件用于类似的Java(注册商标)数据广播服务。另外,提出了一种程序文件获取设备,其通过选择的获取路径来获取执行由用户指定的广播服务所必需的必要程序文件中的缺少的一个或多个程序文件(例如,参考专利文献1)。
另一方面,随着宽带通信网络的普及,通过互联网发送大容量数据的运动图像等已经成为可能。例如,提出了一种信息处理器,其可以通过互联网下载并累积诸如电影的内容(在下文中称为“网络内容”),并且可以在任何时刻再现该网络内容(例如,参考专利文献2)。 另外,提出了一种接收器,其以无缝方式改变广播内容的显示状态和网络内容的显示状态(例如,参考专利文献3)。
根据后者的接收器,可以显示数据广播显示和伪数据广播显示两者(即,能够解释BML和HTML两者)的共享浏览器被事先运行。共享浏览器控制显示/不显示,从而能够以无缝方式在广播内容模式下的数据广播显示与在网络内容模式下的伪数据广播显示之间进行相互且直接的迁移。
尽管该接收器执行用于统合广播内容和网络内容的处理,但是,该接收器与现有技术并无不同,因为它通过解释HTML来显示网络内容。也就是说,该接收器不解释BML,即,不显示作为数据广播服务的网络内容。换句话说,广播公司等不能通过数据广播来提供其中组合了广播内容与网络内容的混合广播服务。
引用列表
专利文献
专利文献1:JP2010-166339A
专利文献2:JP2008-109606A
专利文献3:JP2009-296126A
发明内容
技术问题
在本说明中公开的技术的目的在于提供一种接收器、显示控制方法、广播系统和计算机程序,其能够将从广播信号获得的广播内容与经由网络获取的网络内容合成并适当地将这两个内容同时再现。
在本说明中公开的技术的另一个目的在于提供一种接收器、显示控制方法、广播系统和计算机程序,其能够将广播内容和网络内容合成,并使用数据广播服务来适当地将这两个内容同时再现。
问题的解决方案
鉴于上述问题而作出了本公开,并且如权利要求1所述的技术是一种接收器,该接收器包括:
广播接收部,接收广播信号;
网络通信部,经由网络发送和接收信息;
视频存储器,包括第一平面(plane)和第二平面,第一平面复制由广播接收部接收到的信息,第二平面复制由网络通信部接收到的信息;
显示部,显示视频存储器中的信息;以及
控制部,控制复制在视频存储器中的各平面上的信息到显示部的显示输出,其中,控制部运行由广播接收部和网络通信部的其中之一接收到的数据广播应用,执行将包括第一平面和第二平面的视频存储器中的多个平面合成的处理,并在显示部上显示得到的合成平面。
根据在本公开的权利要求2中所述的技术,在根据权利要求1的接收器中,第一平面和第二平面从后向前依次地布置在视频存储器内,并且所述多个平面中的其它平面以预定顺序布置在第二平面前方,并且,作为通过运行数据广播应用而实现的处理,控制部根据布置顺序执行合成平面的处理。
根据在本公开的权利要求3中所述的技术,在根据权利要求2的接收器中,作为通过运行数据广播应用而实现的处理,控制部将由广播接收部接收到的广播内容复制在第一平面上,将用来指示广播内容和由网络通信部接收到的网络内容的同时再现的用户界面复制在第二平面上,并合成第一平面和第二平面以产生其中所述用户界面被叠加在广播内容上的平面。
根据在本公开的权利要求4中所述的技术,在根据权利要求3的接收器中,与广播内容同时再现的网络内容是流运动图像,并且用户界面是菜单,在该菜单中,能够被同时再现的多个流运动图像的运动图像缩略图被作为选择按钮来布置。
根据在本公开的权利要求5中所述的技术,在根据权利要求3的接收器中,能够与广播内容同时再现的网络内容的位置由数据广播应用来指定,用户界面是菜单,在该菜单中布置有均包括到能够被同时再现的网络内容的位置的链接的选择按钮,并且响应于对任意选择按钮 的选择,控制部把由网络通信部根据在所选择的选择按钮中包含的链接而接收到的网络内容复制到第二平面上,合成第一平面和第二平面,并且同时再现广播内容和网络内容。
另外,在本公开的权利要求6中所述的技术是一种显示控制方法,包括:
第一复制步骤,通过第一复制部件将作为广播信号接收到的信息复制到视频存储器中的第一平面上,该第一复制部件是通过计算机运行数据广播应用来实现的;
第二复制步骤,通过第二复制部件将经由网络接收到的信息复制到视频存储器中的第二平面上,该第二复制部件是通过计算机运行数据广播应用来实现的;
合成步骤,通过合成部件合成视频存储器中的包括第一平面和第二平面的多个平面,该合成部件是通过计算机运行数据广播应用来实现的;以及
输出步骤,通过显示部件输出通过合成步骤产生的要显示的合成平面,该显示部件是通过计算机运行数据广播应用来实现的。
另外,在本公开的权利要求7中所述的技术是一种广播系统,包括:
广播站,提供包括广播内容与数据广播的组合的数据广播服务;
服务器,提供网络内容;以及
混合终端,接收从广播站传送的广播信号并经由网络发送和接收信息,其中,该混合终端包括视频存储器和显示部,该视频存储器包括复制作为广播信号接收到的信息的第一平面和复制从服务器接收到的信息的第二平面,该显示部显示视频存储器中的信息,并且该混合终端执行从广播站和服务器的其中之一接收到的数据广播应用,以执行合成包括第一平面和第二平面的多个平面的处理,从而将得到的合成平面显示在显示部上。
应当注意,在本文中所述的术语“系统”是指装置或设备(或者均实现特定功能的功能模块)的逻辑集合。这样,装置或设备或者功能 模块是否被组装在单个机壳中并不重要。
另外,在本公开的权利要求8中所述的技术是一种以计算机可读形式书写的计算机程序,该计算机程序用于使计算机充当:
第一复制部件,被配置为将作为广播信号接收到的信息复制到视频存储器中的第一平面上;
第二复制部件,被配置为将经由网络接收到的信息复制到视频存储器中的第二平面上;
合成部件,被配置为将视频存储器中的包括第一平面和第二平面的多个平面合成;以及
输出部件,被配置为输出由合成部件产生的要显示的得到的合成平面。
根据本公开的权利要求8所述的计算机程序使得定义以计算机可读形式书写的计算机程序以在计算机上实现预定处理。换句话说,将根据本公开的权利要求8所述的计算机程序安装在计算机中,在该计算机上发挥协同作用,由此可以获得由根据本公开的权利要求1所述的接收器所产生的相同的效果。
发明效果
根据在本说明中公开的技术,提供了一种接收器、显示控制方法、广播系统和计算机程序,其中可以将从广播信号获得的广播内容与经由网络获取的网络内容合成并以适合的方式同时再现。
另外,根据在本说明中公开的技术,可以提供一种接收器、显示控制方法、广播系统和计算机程序,其中可以使用数据广播服务将广播内容与网络内容合成并且以适合的方式同时再现。
通过在下文中描述的对实施例和附图的更详细的描述,在本说明中公开的技术的上述和其它的特征以及有利的效果将变得显而易见。
附图说明
[图1]图1是示意性地示出融合了广播与网络的混合广播系统100的基本配置的视图。
[图2]图2是示出混合终端103的内部配置的例子的框图。
[图3]图3是示出视频存储器213上配置的图形平面的模型的视图。
[图4]图4是解释用于合成运动图像平面的基本处理的图。
[图5]图5是解释用于将静止图像平面进一步合成到合成运动图像平面CVP上的基本处理的图。
[图6]图6是解释用于合成运动图像平面的替代处理的框图。
[图7]图7是解释用于将静止图像平面合成到合成运动图像平面CVP上的替代处理的框图。
[图8]图8是解释用于合成包括三维信号的运动图像平面的处理的框图。
[图9]图9示出指示通过改变施加的运动图像/静止图像切换平面CP而导致的运动图像和静止图像的合成平面SVP的变化的例子的图。
[图10A]图10A是解释构成马赛克型(mosaic-type)菜单的方法的图。
[图10B]图10B是解释构成马赛克型菜单的方法的图。
[图10C]图10C是解释构成马赛克型菜单的方法的图。
[图11]图11示出马赛克型菜单区域的位置的变化。
[图12]图12是示出通过在马赛克型菜单区域内进行的菜单选择操作来开始流运动图像的再现的情况的图。
[图13A]图13A是解释设置位置的方法的图,根据该位置,数据广播应用将调整了大小的流运动图像“ca”叠加到广播内容的全屏运动图像“cb”上。
[图13B]图13B是解释设置位置的方法的图,根据该位置,数据广播应用将调整了大小的流运动图像“ca”叠加到广播内容的全屏运动图像“cb”上。
[图14]图14是示出切换运动图像平面#1和运动图像平面#2的布置顺序的情况的图。
[图15]图15是示出混合终端103的显示部220中的画面转变的图。
[图16]图16是更详细地示出当屏幕处于数据广播应用正在运行的 “视频,运行app服务”状态下时的画面转变的图。
[图17]图17是示出通过用处理器211运行数据广播应用而实现的功能块的框图。
具体实施方式
在下文中将参考附图详细描述在本说明中公开的技术的实施例。
图1示意性地示出融合了广播和网络的混合广播系统100的基本配置。
广播卫星101在太空中围绕地球旋转。传送广播内容的广播公司将AV内容、主广播节目从诸如广播站102的上行链路发送到广播卫星101,提供数据广播应用的应用提供商将数据广播数据从诸如广播站102的上行链路发送到广播卫星101。广播卫星101将接收到的AV内容和数据广播数据重新发送到位于不同区域的地球上的接收站。
另外,AV内容和数据广播数据可以在不使用广播卫星101的情况下替代使用广播卫星101的卫星波通过地面波来传送。另外,接收站例如是诸如安装在普通家庭中的电视机的接收终端103。接收终端103还被连接到作为后备信道的诸如互联网104的宽带网,这样还可以获取诸如运动图像流的网络内容。可以处理广播内容和网络内容两者的接收终端103在下文中也可以被称为“混合终端”。
另外,广播公司和应用提供商可以将用于数据广播的数据和AV内容上载到在诸如互联网104的宽带网上建立的web服务器105。在这种情况下,混合终端103也可以在不使用广播波的情况下,经由诸如互联网104的后备信道来获取(下载)用于数据广播的数据和AV内容。
例如,广播公司和应用提供商通过使用广播信号或经由互联网104来上载与广播内容有关的AV内容,并且传送含有指示AV内容在web服务器105内的位置的URL(统一资源定位符)链接的数据广播应用。从而,广播公司和应用提供商可以控制使用广播节目的数据广播服务的用户与观看节目相关联地访问的流式运动图像。
图2示出混合终端103的内部配置。类似于普通电视机,混合终端 103可以接收地面数字广播和卫星数字广播。另外,混合终端103可以从互联网104上的预定服务器105下载网络内容。
作为用于处理广播内容的系统,混合终端103包括:调谐器201、解调器202、解复用器(DEMUX)203和广播解码器204。
调谐器201从通过天线或CATV线缆输入到调谐器201的广播信号提取对应于信道选择的频率分量,并且解调器202对提取的广播信号进行解调。
解复用器203将对应于信道调谐的广播信号的频率分量分离成诸如MPEG2传输流的编码AV数据和数据广播数据的信号。
广播解码器204对用诸如HE-AAC或H.264的标准编码的AV数据进行解码,并再现音频信号和视频信号。被再现的音频信号和视频信号以及含有PSI(Program SpecificInformation,节目特定信息)和AIT(Application Information Table,应用信息表格)的数据广播数据被供应到AV输出控制部210。
另外,作为用于处理网络内容的系统,混合终端103包括数据通信部205和宽带解码器206。
数据通信部205由例如以太网(注册商标)接口形成。数据通信部205通过互联网104等访问预定的服务器105,下载网络内容并将该内容供应到AV输出控制部210。下载的网络内容包含用于数据广播的数据和AV流内容。
例如,经由网络接收到的AV流数据为ASF、MOV或MP4格式。宽带解码器206包括IP音频解码器和IP视频解码器,并且宽带解码器206将这种AV流数据解码以再现音频信号和视频信号。
另外,用于数据广播的数据包括各种类型的媒体数据,诸如JPEG或PNG格式的静止图像数据和文本数据,并且还包括以BML或XML格式书写的数据广播应用。可以应用于数据广播应用的技术的例子是Java(注册商标)技术,但是可以应用于本说明的实施例中的技术绝对不限于Java技术。AV输出控制部210解释数据广播应用并控制在显示部22上广播内容、AV流数据等的画面显示形式。
AV输出控制部210包括:处理器211、系统存储器212和视频存储器213。
视频存储器213包括:运动图像平面#1、运动图像平面#2、图形平面和视频缓冲器。运动图像平面#1复制由广播解码器204再现的视频信号。运动图像平面#2复制经由互联网104下载的AV流数据。图形平面分别复制包含在用于数据广播的数据中的静止图像、图形和文字等。这些平面和视频缓冲器将在稍后详细描述。
处理器211运行载入到系统存储器212中的数据广播应用,并且从上述的视频存储器213内部的各平面存储器中复制的图形平面,组装要显示在显示部220上的画面。图17示出通过用处理器211运行数据广播应用而实现的功能块。例如,当Java(注册商标)技术被应用于数据广播应用时,这些功能块对应于类文件。这些功能块的细节将在稍后描述。
图3示出在视频存储器213上构成的图形平面的模型。在图中示出的情况下,按从后向前的次序排列有以下平面:运动图像平面#1(主要视频平面)、运动图像平面#2(次要视频平面)、静止图像平面、运动图像/静止图像切换平面(切换平面)、图形和文字平面(图形平面)、字幕平面。
如上所述,接收到的广播的运动图像(由广播解码器204再现的视频信号)被复制到运动图像平面#1上。另一方面,经由互联网104下载的流运动图像被复制到运动图像平面#2上。被复制到运动图像平面#1上的图像具有对应于显示部220的全屏分辨率的分辨率(例如,1920×1080像素)。被复制到运动图像平面#2上的图像具有低于全屏分辨率的默认分辨率(例如,528×384像素(DCIF))。在经由互联网104下载的流运动图像要被复制到运动图像平面#2上时,该图像可以根据需要调整大小。
另外,在用于数据广播的数据中包含的静止图像、运动图像/静止图像切换、图形和文字以及字幕被分别复制到静止图像平面、运动图像/静止图像切换平面、图形和文字平面以及字幕平面上。
例如,处理器211运行用于数据广播的应用,以实现将这些平面按照上述顺序叠加的处理,由此组装画面。通过组装获得的最终平面被保持在后备缓冲器(Back Buffer)中。要在显示部220上显示的画面被保持在主缓冲器(Primary Buffer)中。
在该实施例中,处理器211运行数据广播应用以执行用于合成上述各平面的处理,从而控制要输出到显示部220的画面的显示形式。接下来,将对通过运行数据广播应用而实现的显示形式给出描述。
图4示出用于合成运动图像平面的基本处理。图中示出的处理在处理器211中执行。在图中示出的情况下,接收到的广播的运动图像(广播视频)以全分辨率被复制到运动图像平面#1上。另一方面,经由互联网104接收到的流运动图像(宽带视频)被调整到低分辨率(DCIF),然后被复制到(上述的)运动图像平面#2上。基于例如Porter-Duff规则,叠加部将复制在运动图像平面#2上的运动图像“ca”叠加到复制在运动图像平面#1上的运动图像“cb”上,从而产生合成运动图像平面(合成视频平面,Composite Video Plane(CVP))。合成运动图像平面是画中画(Picture in Picture:PiP)图像,其中,运动图像“ca”被嵌入在运动图像“cb”中。
被应用于叠加部的平面合成规则由表达式(1)来表示。在前面的运动图像平面#2的阿尔法混合值(alpha blend value)αa被设置为1以成为100%不透明的像素位置处,被复制在运动图像平面#2上的运动图像“ca”成为合成运动图像平面CVP。另外,在前面的运动图像平面#2的阿尔法混合值αa被设置为0以成为100%透明的像素位置处,被复制在运动图像平面#1上的运动图像“cb”成为合成运动图像平面CVP。基本上,在被复制在运动图像平面#2上的运动图像的尺寸内部的像素位置的阿尔法混合值αa被设置为1,在该区域外部的像素位置的阿尔法混合值αa被设置为0。因此,在被复制在运动图像平面#2上的运动图像的尺寸内部的合成运动图像平面CVP显示“ca”,而在该区域外部的合成运动图像平面CVP显示“cb”。
[数学公式1]
图5示出用于进一步将静止图像平面SP合成到合成运动图像平面CVP上的基本处理。图中示出的处理在处理器211中执行。用于产生合成图像平面CVP的机制与上述的机制相同。
运动图像/静止图像切换平面CP是对静止图像平面SP进行掩蔽(mask)的1位掩码。要用静止图像平面SP掩蔽的像素位置由像素值CP来指定。如表达式(2)所示,对于要用静止图像平面SP掩蔽的像素位置,像素值CP被设置为0,对于不用静止图像平面SP掩蔽的像素位置,像素值CP被设置为1。
[数学公式2]
运动图像/静止图像合成部基于像素值CP来掩蔽静止图像平面SP的像素,并且基于例如Porter-Duff规则在合成运动图像平面CVP上叠加完成了掩蔽后的静止图像平面,从而产生运动图像和静止图像的合成平面(视频和静止图像平面的合成:SVP)。在图5中示出的情况下,由于像素值CP对于所有的像素位置都为0(黑色),因此静止图像平面的所有像素都被掩蔽,从而使得合成运动图像平面CVP被独自输出作为运动图像和静止图像的合成平面SVP。应用于运动图像/静止图像合成部的合成规则由表达式(3)来表达。在运动像素值CP为1(即,静止图像平面SP不被掩蔽)的像素位置处,对应的像素将静止图像平面SP作为合成平面SVP来显示。另一方面,在像素值CP为0(即,静止图像平面SP被掩蔽)的像素位置处,作为前面的静止图像平面SP被掩蔽的结果,对应的像素将在静止图像平面SP后面的合成运动图像平面CVP作为合成平面SVP来显示。
[数学公式3]
此外,图6示出用于合成运动图像平面的替代处理。图中示出的 处理在处理器211中执行。在图6中示出的情况下,接收到的广播的运动图像(广播视频)以及经由互联网104接收到的流图像(宽带视频)被以低于全屏分辨率的分辨率分别复制到运动图像平面#1和运动图像平面#2上。基于例如Porter-Duff规则,叠加部将复制在运动图像平面#2上的低分辨率运动图像“ca”叠加到复制在运动图像平面_#1上的低分辨率运动图像“cb”上,从而产生合成运动图像平面CVP。
另外,图7示出用于进一步将静止图像平面SP合成到合成运动图像平面CVP上的另一个替代处理。图中示出的处理在处理器211中执行。如图6所示,合成运动图像平面CVP是从调整大小到低分辨率的两个运动图像“cb”和“ca”产生的。另外,运动图像/静止图像切换平面CP仅在调整大小到低分辨率的两个运动图像“ca”和“cb”的显示区域上掩蔽静止图像平面SP。当根据像素值CP掩蔽静止图像平面SP的像素时,被调整大小到低分辨率的两个运动图像“ca”和“cb”的显示区域变成透明的。因此,当如图7所示基于例如Porter-Duff规则,被掩蔽后的静止图像平面被叠加在合成运动图像平面CVP上时,产生了运动图像和静止图像的合成平面SVP,其中,用使用静止图像平面SP掩蔽的框显示运动图像“ca”和“cb”。
另外,图8示出用于合成包括三维信号的运动图像平面的处理。图中示出的处理在处理器211中执行。接收到的广播的运动图像(广播视频)以及经由互联网104接收到的流运动图像(宽带视频)可能都是三维信号。但是,在根据本实施例的混合终端103中,当运动图像平面的其中之一由三维信号形成时,由于硬件的限制,另一运动图像的显示被停止。在图中示出的情况下,经由互联网104接收到的流运动图像(即,被复制到运动图像平面#2上的运动图像“ca”)由并列(side-by-side)型的三维信号构成,这样被复制到运动图像平面#1上的运动图像“cb”的显示被停止。因此,合成运动图像平面CVP将仅仅是运动图像平面#2上的三维运动图像。另外,静止图像平面SP和运动图像/静止图像切换平面CP都被禁用,并且这两个平面的所有像素都被设置为黑色。因此,三维运动图像被作为合成平面SVP以全分辨率 来显示。
图9示出一些例子,其中,要应用于相同的合成运动图像平面和静止图像平面的运动图像/静止图像切换平面CP被改变,由此获得的运动图像和静止图像的合成平面SVP被改变。在图9中的情况(a)中,使用不掩蔽静止图像平面SP的部分区域的运动图像/静止图像切换平面CP。因此,如图所示,获得了这样的运动图像/静止图像合成平面SVP,其在由运动图像/静止图像切换平面CP掩蔽的区域中显示合成运动图像平面CVP作为背景,并且在未被掩蔽的区域中将静止图像平面显示在最前面。另外,在图9中的情况(b)中,使用掩蔽整个区域的运动图像/静止图像切换平面CP(即,所有像素都是黑色的平面)。因此,如图所示,静止图像平面SP被全部掩蔽,并且获得了其中只有后面的合成运动图像平面CVP被显示的运动图像/静止图像合成平面SVP。另一方面,在图9中的情况(c)中,使用完全不掩蔽该区域的运动图像/静止图像切换平面CP(即,所有像素都是白色的平面)。因此,如图所示,获得了这样的运动图像/静止图像合成平面SVP,其中,只有最前面的静止图像平面SP被显示,而后面的合成运动图像平面CVP被完全遮盖。
在专利文献3中描述的技术中,解释用于显示网络内容的门户画面的HTML(超文本标记语言)的网络浏览器被执行,从而显示该门户画面,通过该门户画面输入再现网络内容的指示。也就是说,在专利文献3中描述的技术中,由于通过执行独立于用于数据广播的浏览器的处理来显示门户画面,因此可以说广播内容与网络内容没有融合在一起。
另一方面,在根据本说明中公开的技术的该实施例中,提供了以预定顺序布置的多个平面,包括用于广播内容的运动图像平面#1和用于诸如流运动图像的网络内容的运动图像平面#2(参考图3),并且用于合成上述这些平面的处理可以通过运行数据广播应用来执行。该实施例提供一画面,通过该画面,再现网络内容的指示以使广播内容与之融合的形式被输入。
图10A示出用于配置马赛克型菜单的方法,该马赛克型菜单是用来输入再现网络内容的指示的画面的例子。
接收到的广播内容的运动图像被复制到运动图像平面#1上。另一方面,在图形和文字平面上,用来发出同时再现广播内容和流运动图像的指示的用户界面仅被复制到屏幕的对应于用户界面区域的一部分上。该用户界面是马赛克型菜单,其中布置有可选择的多个网络内容的选择按钮MNG1、MNG2……。可选择的多个网络内容通常是从互联网104上的内容服务器等提供的流运动图像。
每个选择按钮MNG1、MNG2……是对应的流运动图像的运动图像缩略图。例如,运动图像缩略图由MNG(多重图像网络图形)文件形成,MNG文件由一组PNG(便携式网络图形)图像构成。但是,选择按钮MNG1、MNG2……不必是运动图像,替代地可以是象征对应的流运动图像的静止图像。此外,数据广播应用复制由上述的图形和文字平面上的多个单元构成的网格(参考图10B)。网格的每个单元具有表示对应的流运动图像在内容服务器上的位置的URL链接。要注意,该内容不限于网络上的流运动图像,例如,它可以是混合终端103的本地内容。在这种情况下,同样地,单元拥有URL形式的关于该内容的位置的信息就足够了。数据广播应用根据在图3中示出的布置顺序组合所有的平面,以获得包括用户界面的平面。
配置马赛克型菜单的另一种方法也是可用的。在该方法中,数据广播应用将运动图像平面#2的显示区域限定为用户界面区域,并且将马赛克型菜单与其组合以形成一个流运动图像,从而产生合成运动图像平面CVP(参考图10C)。
在这种情况下,数据广播应用还将由多个单元构成的网格(参考图10B)添加到上述的合成运动图像平面CVP。网格的位置与运动图像平面#2的受限的显示区域(即,马赛克型菜单区域)相匹配,并且所述单元与均由运动图像缩略图构成的选择按钮匹配。例如,数据广播应用复制图形和文字平面上的网格,以将这样的网格添加到合成运动图像平面CVP。另外,网格的每个单元具有表示对应的流运动图像 在内容服务器中的位置的URL链接。要注意,该内容不限于网络上的流运动图像,例如,它可以是混合终端103的本地内容。在这种情况下,同样地,单元具有URL形式的关于该内容的位置的信息就足够了。
例如,广播公司和应用提供商将与广播内容相关联的AV内容上载到服务器105,并且通过使用广播信号或经由互联网104来传送含有表示AV内容在web服务器105中的位置的URL链接的数据广播应用。然后,马赛克型菜单的每个选择按钮包含广播公司和应用提供商已经存储的AV内容的URL链接。因此,广播公司和应用提供商可以控制使用广播节目的数据广播服务的用户与观看该节目同时地再现的应该是什么流运动图像。
图11示出马赛克型的菜单区域的位置的变化。图10示出由网格构成的马赛克型菜单区域,该网格具有沿着平面的底边在水平方向上排列的单元。但是,替代地,如图11所示,还可以采用由具有沿着平面的左边在垂直方向上排列的单元的网格构成的马赛克型菜单区域、由具有沿着平面的右边在垂直方向上排列的单元的网格构成的马赛克型菜单区域、以及由具有沿着平面的顶边在水平方向上排列的单元的网格构成的马赛克型菜单区域。
图12示出通过在马赛克型菜单区域内进行的菜单选择操作开始流运动图像的再现的情况。
如上所述,叠加在马赛克型菜单区域上的网格的每个单元具有表示对应的流运动图像在内容服务器上的位置的URL链接。混合终端103的用户例如可以通过使用遥控器(未示出)的光标按钮在网格内移动光标,以将光标指向想要的缩略图的单元。在图12的左侧,光标所指向的单元由粗线框来表示。
于是,例如,如果用户按下遥控器的决定键以选择网格中的单元之一,那么数据广播应用开始显示相关联的流运动图像,即,与广播内容同时地再现相关联的流运动图像。
如上所述,数据广播应用将接收到的广播内容的图像复制到运动图像平面#1上。数据广播应用还将从互联网104下载的流运动图像调整 大小到低于屏幕分辨率的分辨率,并将调整大小后的图像复制到运动图像平面#2上。然后,基于例如Porter-Duff规则,数据广播应用将运动图像平面#1与运动图像平面#2叠加(参考图4),从而显示如在图12的右侧示出的合成运动图像平面CVP。
在合成运动图像平面CVP上显示从互联网104下载的流图像“ca”的位置(x,y)(换句话说,被调整大小的流运动图像“ca”被叠加在全屏运动图像“cb”上的位置)可以由数据广播应用来设置。
当数据广播应用未明确地设置流运动图像“ca”的显示位置(x,y)时,如图13A所示,流运动图像“ca”被显示在默认显示位置“默认(x,y)”处。
通过例如使用遥控器的光标按钮,用户可以为流运动图像“ca”指示新的显示位置“新(x,y)”。当数据广播应用设置该新的显示位置“新(x,y)”时,如图13B所示,流运动图像“ca”被显示在新的显示位置“新(x,y)”。
另外,数据广播应用可以改变运动图像平面的顺序。通过例如操纵遥控器上的绿色按钮,用户指示运动图像平面的顺序的切换。图14示出执行运动图像平面#1和运动图像平面#2的顺序的切换的情况。当切换顺序时,运动图像平面#2上的流运动图像的分辨率被设置为全分辨率,此外运动图像平面#1上的接收到的广播的运动图像被调整大小。然后,复制在运动图像平面#1上的接收到的广播的运动图像“ca”被叠加到复制在运动图像平面#2上的流运动图像“cb”上,从而产生合成运动图像平面CVP。
图15示出在混合终端103的显示部220上的屏幕转变。
当普通广播节目被接收时,屏幕状态处于“仅视频”状态,在该状态下,只有接收到的广播节目的运动图像被显示在屏幕上。用户例如操纵遥控器上的频道按钮或者+/-键以改变显示的广播节目。另外,在该状态下,检测在接收到的信号中是否含有AIT。AIT是为了控制数据广播应用的操作而记述的控制信息。
当AIT被检测到时,在处理由混合终端103接收到的AIT后,从AIT 获得的关于数据广播应用的信息被显示(显示来自AIT的app info(应用信息))。然后,屏幕状态转变到“视频,显示邀请图标”状态,在该状态下,广播节目的运动图像与邀请图标(invite icon)一起被显示。
这里,当用户指示针对数据广播应用的下载开始时,屏幕状态转移到“视频,app下载”状态,在该状态下,在显示广播节目的同时执行数据广播应用的下载。另一方面,当用户取消数据广播应用的下载时,屏幕状态转变到“仅视频”状态,在该状态下,只有接收到的广播节目的运动图像被显示。当用户操纵遥控器上的频道按钮或+/-键时,显示屏幕返回到原频道的画面。
在执行数据广播应用的下载的同时显示广播节目的“视频,app下载”状态下,遵从AIT的记述来执行数据广播应用的下载。例如,如果DSM-CC(Digital Storage Media-Command and Control,数字存储介质-命令与控制)在AIT中被指定,则混合终端103从广播信号下载数据广播应用(视频,从广播下载)。另一方面,当HTTP(Hyper Text TransferProtocol,超文本传输协议)在AIT中被指定时,混合终端103经由诸如互联网的通信网络来下载数据广播应用(视频,从宽带下载)。
当数据广播应用的下载完成时,混合终端103转变到“视频,运行app服务”状态,在该状态下数据广播应用在运行。
当在数据广播应用的下载期间由于从用户发出的指示或其它原因导致下载被取消时,屏幕状态转变到“仅视频”状态,在该状态下,只有接收到的广播节目的运动图像被显示。如果用户操纵遥控器上的频道按钮或+/-键,显示屏幕返回到原频道的画面。
另外,当在数据广播应用正在运行的“视频,运行app服务”状态下由于用户给出的指示或其它原因使该应用结束(关闭app)时,显示屏幕转变到“仅视频”状态,在该状态下,只有接收到的广播节目的运动图像被显示。如果用户操纵遥控器上的频道按钮或+/-键,显示屏幕返回到原频道的画面。
图16更详细地示出当屏幕状态处于“视频,运行app服务”状态(数 据广播应用正在运行的状态)时的屏幕转变。图16的中央部分示出数据广播应用的下载刚结束后的初始屏幕状态“视频,显示app”。此时,与图10中所示相同的马赛克型菜单区域被作为用于数据广播应用的用户界面(App UI)显示在屏幕上。
通过执行选择与马赛克型菜单区域大小相同的网格的单元的操作从而选择菜单(参考图12),用户可以请求想要的内容的流。
当已经通过马赛克型菜单区域请求了运动图像流(请求IP视频流)时,屏幕状态转变到如图4所示的“视频,显示IP流”状态,在该状态下,屏幕显示通过叠加被复制在运动图像平面#1上的广播节目的运动图像“cb”与被复制在运动图像平面#2上的流运动图像“ca”而获得的组合运动图像CVP。这里,当显示数据广播应用的用户界面的指示被发出(显示AppUI)时,屏幕状态转变到“视频,显示IP流+app”状态,在该状态下马赛克型菜单区域被显示。当不显示或隐藏用户界面的指示被发出(隐藏App UI)时,马赛克型菜单区域被隐藏,因此屏幕状态返回到上述的屏幕状态“视频,显示IP流”。此外,当通过马赛克型菜单区域发出结束运动图像流的指示(关闭IP流)时,屏幕状态返回到初始屏幕状态“视频,显示app”。
当通过马赛克型菜单区域请求了音乐流(请求IP音频流)时,屏幕转变到“视频,IP音频流”状态,在该状态下,运动图像平面#1上的广播节目的运动图像“cb”的显示与音乐流的播放同时地执行。这里,当显示数据广播应用的用户界面的指示被发出(显示App UI)时,屏幕状态转变到“视频,IP音频流+app”状态,在该状态下马赛克型菜单区域被显示。当不显示或隐藏用户界面的指示被发出(隐藏App UI)时,马赛克型菜单区域被隐藏,因此屏幕状态返回到上述的屏幕状态“视频,IP音频流”。此外,当通过马赛克型菜单区域发出结束音乐流的指示(关闭IP音频)时,屏幕状态返回到初始屏幕状态“视频,显示app”。
当通过马赛克型菜单区域请求了三维信号的运动图像流(请求IP 3D SbS视频流)时,屏幕状态转变到“显示IP3D流”状态,在该状态 下,屏幕显示如图8所示的通过叠加复制在运动图像平面#2上的三维流运动图像“ca”而获得的合成运动图像平面。由于硬件的限制(上面提到过),该实施例的混合终端103被配置为当要显示三维运动图像时停止其它运动图像平面的显示。
当在合成运动图像平面CVP被显示的屏幕状态“视频,显示IP流”下发出结束运动图像流的指示(关闭IP流)时;当在运动图像平面#1上的广播节目的运动图像“cb”的显示与音乐流的播放被同时执行的屏幕状态“视频,IP音频流”下发出结束音乐流的指示(关闭IP音频流)时;以及当在三维流运动图像被显示的屏幕状态“显示IP3D流”下发出结束三维运动图像流的指示(关闭IP3D视频)时,屏幕状态转变到屏幕状态“仅视频,app隐藏”,在该状态下,应用的用户界面(马赛克型菜单区域)被隐藏。之后,当发出显示数据广播应用的用户界面的指示(显示App UI)时,屏幕状态返回到初始屏幕状态“视频,显示app”。另外,当在初始屏幕状态“视频,显示app”下发出不显示或隐藏用户界面的指示(隐藏App UI)时,屏幕状态转变到屏幕状态“仅视频,app隐藏”。
图17示出通过处理器211执行处理而实现的功能块。例如,当Java(注册商标)技术被应用时,这些功能块对应于类文件。下面将聚焦于图15和图16中示出的与图像控制相关联的功能来描述在功能块中执行的处理。
处理TS执行用于接收从广播公司(Broadcaster)传送的MPEG2传输流的处理。在每一次调谐频道时,处理TS执行用于接收传输流的处理。另外,处理TS执行检测在从该传输流中分离出来的数据广播数据中的AIT的处理。
解码A/V通过使用解码器204来执行用于对从传输流分离出来的AV数据进行解码的处理。
解码AIT执行用于对由处理TS检测到的AIT进行解码的处理。当发出下载数据广播应用的指示时,下载App根据解码的AIT记述来执行下载处理。当在AIT中指定DSM-CC时,下载App从广播信号下载数 据广播应用。当在AIT中指定HTTP时,下载App经由互联网104从应用服务器下载数据广播应用。
当下载App完成数据广播应用的下载时,运行App启动数据广播应用。结果,混合终端103转变到状态“视频,运行app服务”,在该状态下,如以上参考图15所述,数据广播应用正被运行。
显示App执行用于数据广播应用的诸如马赛克型菜单区域的用户界面的显示/不显示。例如,在屏幕状态“视频,显示IP流”、“视频,IP音频流”和“仅视频,app隐藏”下,显示App执行用户界面的显示(显示App UI)/不显示(隐藏App UI)。
当屏幕处于初始状态“视频,显示app”时(参考图16),选择视频执行用于根据与用户通过用户界面进行的操作来选择运动图像的处理。请求A/V流请求对应的内容服务器(媒体服务器)执行由选择视频所选择的运动图像的流式传输。缓冲A/V流缓冲由请求A/V流接收到的运动图像流。解码A/V流通过使用宽带解码器206对缓冲的运动图像流进行解码。
启用PiP展示启用用于产生画中画图像的处理,诸如图4中所示的处理,在该画中画图像中运动图像被显示在运动图像内部。另外,选择PiP顺序根据由用户发出的指示等来选择构成画中画图像的各图像的布置顺序。例如,如图14所示,运动图像平面#1和运动图像平面#2的布置顺序被切换。显示PiP执行包括接收到的广播的运动图像和下载的流运动图像的画中画图像的显示。
但是,当由选择视频选择的运动图像流是三维信号时,显示3D执行三维运动图像流的显示,同时停止广播视频停止接收到的流的显示。当接收到的广播的运动图像流是三维信号时,下载的运动图像流的显示被停止。当运动图像流的其中之一是三维信号时不显示画中画图像的原因是基于混合终端103的硬件的限制(早先提到过)。
选择音频源执行音频或音乐源的选择。例如,当通过马赛克型菜单区域请求了音乐流时,被请求的音乐流被选择为音乐源并且被作为声音输出。另外,当在广播节目的运动图像“cb”的显示和音乐流被执 行的屏幕状态“视频,IP音频流”下发出结束音乐流的指示(关闭IP音频)时,广播节目被选择为音乐源并且被作为声音输出。
另外,当从付费运动图像站点(Storefront(店面))购买了运动图像流时,检查授权执行针对Storefront的授权处理。另外,请求内容列表向Storefront请求可用内容的列表,并且显示视频列表显示该列表。
本说明中公开的技术还可以采取下面的配置。
(1)一种接收器,包括:广播接收部,接收广播信号;网络通信部,经由网络发送和接收信息;视频存储器,包括第一平面和第二平面,该第一平面复制由广播接收部接收到的信息,第二平面复制由网络通信部接收到的信息;显示部,显示视频存储器中的信息;以及控制部,控制复制在视频存储器中的平面上的信息到显示部的显示输出,其中,控制部运行由广播接收部和网络通信部的其中之一接收到的数据广播应用,执行将包括第一平面和第二平面的视频存储器中的多个平面合成的处理,并在显示部上显示得到的合成平面。
(2)在上述(1)中描述的接收器,其中,第一平面和第二平面从后向前依次地布置在视频存储器内,并且所述多个平面中的其它平面以预定顺序布置在第二平面前面,并且,作为通过运行数据广播应用而实现的处理,控制部执行根据布置顺序来合成平面的处理。
(3)在上述(2)中描述的接收器,其中,作为通过运行数据广播应用而实现的处理,控制部将由广播接收部接收到的广播内容复制在第一平面上,将用来指示广播内容和由网络通信部接收到的网络内容的同时再现的用户界面复制在第二平面上,并合成第一平面和第二平面以产生其中用户界面被叠加在广播内容上的平面。
(4)在上述(3)中描述的接收器,其中,与广播内容同步再现的网络内容是流运动图像,并且用户界面是菜单,在该菜单中,能够被同时再现的多个流运动图像的运动图像缩略图被作为选择按钮来布置。
(5)在上述(3)中描述的接收器,其中,能够与广播内容同时 再现的网络内容的位置由数据广播应用来指定,用户界面是菜单,在该菜单中布置有均包括到能够被同时再现的网络内容的位置的链接的选择按钮,并且响应于对任意选择按钮的选择,控制部把由网络通信部根据在被选择的选择按钮中包含的链接而接收到的网络内容复制到第二平面上,合成第一平面和第二平面,并且同时再现广播内容和网络内容。
(6)一种显示控制方法,包括:第一复制步骤,通过第一复制部件将作为广播信号接收到的信息复制到视频存储器中的第一平面上,该第一复制部件是通过计算机运行数据广播应用来实现的;第二复制步骤,通过第二复制部件将经由网络接收到的信息复制到视频存储器中的第二平面上,该第二复制部件是通过计算机运行数据广播应用来实现的;合成步骤,通过合成部件合成包括第一平面和第二平面的视频存储器中的多个平面,该合成部件是通过计算机运行数据广播应用来实现的;以及输出步骤,通过显示部件输出通过合成步骤产生的要显示的合成平面,该显示部件将是通过计算机运行数据广播应用来实现的。
(7)一种广播系统,包括:广播站,提供包括广播内容与数据广播的组合的数据广播服务;服务器,提供网络内容;以及混合终端,接收从广播站传送的广播信号并经由网络发送和接收信息,其中,该混合终端包括视频存储器和显示部,该视频存储器包括复制作为广播信号接收到的信息的第一平面和复制从服务器接收到的信息的第二平面,显示部显示视频存储器中的信息,并且该混合终端执行从该广播站和该服务器的其中之一接收到的数据广播应用,以执行合成包括第一平面和第二平面的多个平面的处理,从而将得到的合成平面显示在显示部上。
(8)一种以计算机可读形式书写的计算机程序,其使得计算机充当:第一复制部件,被配置为将作为广播信号接收到的信息复制到视频存储器中的第一平面上;第二复制部件,被配置为将经由网络接收到的信息复制到视频存储器中的第二平面上;合成部件,被配置为 将包括第一平面和第二平面的视频存储器中的多个平面合成;以及输出部件,被配置为输出由合成部件产生的要显示的得到的合成平面。
[工业实用性]
至此已经参考本说明的具体实施例详细描述了在本说明中公开的技术。但是,很明显,在不脱离本说明中公开的技术的要旨的情况下,本领域技术人员可以对这些实施例进行修改、替换、改变和组合。
尽管在本说明中公开的技术可以通过例如应用Java(注册商标)技术来实现,但是在本说明中公开的技术的要旨绝不限于Java技术。另外,作为广播信号传送的AV内容、经由网络发送的AV内容、用于数据广播的数据等绝不限于特定的文件格式。
总之,已经使用例子描述了在本说明中公开的技术,并且在本说明中描述的内容不应当按限制性的意义来解释。为了判断在本说明中公开的技术的精神和范围,应当参考所附的权利要求。
附图标记列表
100 混合广播系统
101 广播卫星
102 广播站
103 接收终端(混合终端)
104 互联网(宽带网络)
105 服务器
201 调谐器
202 解调器
203 解复用器
204 广播解码器
205 数据通信部
206 宽带解码器
210 AV输出控制部
211 处理器
212 系统存储器
213 视频存储器

Claims (7)

1.一种接收器,包括:
广播接收部,接收广播信号;
网络通信部,经由互联网发送和接收信息;
视频存储器,包括第一平面和第二平面,所述第一平面复制由所述广播接收部接收到的运动图像信号,所述第二平面复制由所述网络通信部接收到的流运动图像信号;
显示部,显示所述视频存储器中的信息;以及
控制部,控制复制在所述视频存储器中的各平面上的信息到所述显示部的显示输出,
其中,所述控制部运行由所述广播接收部和所述网络通信部之一接收到的数据广播应用,执行将包括所述第一平面和所述第二平面的在所述视频存储器中的多个平面进行合成的处理,并在所述显示部上显示得到的合成平面,
其中,所述数据广播应用包括至所述流运动图像信号的位置的链接,并且
其中,基于在所接收的广播信号中指定的信息来确定是经由所述广播接收部还是经由所述网络通信部来下载所述数据广播应用。
2.根据权利要求1所述的接收器,其中,
在所述视频存储器内所述第一平面和所述第二平面从后向前依次地布置,并且所述多个平面中的其它平面以预定顺序布置在所述第二平面前方,并且,
作为通过运行数据广播应用而实现的处理,所述控制部执行根据布置顺序来合成各平面的处理。
3.根据权利要求2所述的接收器,其中,作为通过运行数据广播应用而实现的处理,所述控制部将由所述广播接收部接收到的运动图像信号复制在所述第一平面上,并且将用来指示所述运动图像信号和所述流运动图像信号的同时再现的用户界面复制在所述第二平面上,并且合成所述第一平面和所述第二平面以产生其中所述用户界面被叠加在所述运动图像信号上的平面。
4.根据权利要求3所述的接收器,其中,
所述用户界面是菜单,在该菜单中,能够被同时再现的所述流运动图像信号的运动图像缩略图被布置为选择按钮。
5.根据权利要求3所述的接收器,其中,
能够与该运动图像信号同时再现的流运动图像信号的位置由数据广播应用来指定,
所述用户界面是菜单,在该菜单中布置有均包括到所述流运动图像信号的位置的链接的选择按钮,并且
响应于对任何所述选择按钮的选择,所述控制部将根据在所选择的选择按钮中包含的链接的流运动图像信号复制到所述第二平面上,合成所述第一平面和所述第二平面,并且同时再现所述运动图像信号和所述流运动图像信号。
6.一种显示控制方法,包括:
使用广播接收部接收广播信号;
使用网络通信部经由互联网发送和接收信息;
通过第一复制部件将作为广播信号接收到的运动图像信号复制到视频存储器中的第一平面上,所述第一复制部件是通过计算机运行数据广播应用而实现的;
通过第二复制部件将经由互联网接收到的流运动图像信号复制到所述视频存储器中的第二平面上,所述第二复制部件是通过所述计算机运行所述数据广播应用而实现的;
通过合成部件合成所述视频存储器中的包括所述第一平面和所述第二平面的多个平面,所述合成部件是通过所述计算机运行所述数据广播应用而实现的;以及
通过显示部件显示输出通过所述合成产生的合成平面,所述显示部件是通过所述计算机运行所述数据广播应用而实现的,
其中,所述数据广播应用包括至所述流运动图像信号的位置的链接,并且
其中,基于在所接收的广播信号中指定的信息来确定是经由所述广播接收部还是经由所述网络通信部来下载所述数据广播应用。
7.一种广播系统,包括:
广播站,提供包括广播内容和数据广播的组合的数据广播服务;
服务器,提供网络内容;以及
混合终端,接收从所述广播站传送的广播信号并经由互联网发送和接收信息,
其中,所述混合终端包括视频存储器和显示部,所述视频存储器包括复制作为广播信号接收到的运动图像信号的第一平面和复制从所述服务器接收到的流运动图像信号的第二平面,所述显示部显示所述视频存储器中的信息,并且所述混合终端执行从所述广播站和所述服务器之一接收到的数据广播应用,以执行合成包括所述视频存储器中的所述第一平面和所述第二平面的多个平面的处理,从而将得到的合成平面显示在所述显示部上,
其中,所述数据广播应用包括至所述流运动图像信号的位置的链接,并且
其中,基于在所接收的广播信号中指定的信息来确定是经由所述广播接收部还是经由所述网络通信部来下载所述数据广播应用。
CN201280036277.9A 2011-07-29 2012-07-17 接收器、显示控制方法、广播系统 Active CN103814578B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2011-166503 2011-07-29
JP2011166503A JP6077200B2 (ja) 2011-07-29 2011-07-29 受信装置、表示制御方法、放送システム、並びにコンピューター・プログラム
PCT/JP2012/068055 WO2013018532A1 (ja) 2011-07-29 2012-07-17 受信装置、表示制御方法、放送システム、並びにコンピューター・プログラム

Publications (2)

Publication Number Publication Date
CN103814578A CN103814578A (zh) 2014-05-21
CN103814578B true CN103814578B (zh) 2017-07-11

Family

ID=47629061

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280036277.9A Active CN103814578B (zh) 2011-07-29 2012-07-17 接收器、显示控制方法、广播系统

Country Status (13)

Country Link
US (2) US9591351B2 (zh)
EP (2) EP2739048B1 (zh)
JP (1) JP6077200B2 (zh)
CN (1) CN103814578B (zh)
AR (1) AR087362A1 (zh)
BR (1) BR112014001572A2 (zh)
CA (1) CA2842579A1 (zh)
CL (1) CL2014000167A1 (zh)
IN (1) IN2014CN00514A (zh)
MX (1) MX350352B (zh)
PE (1) PE20141868A1 (zh)
WO (1) WO2013018532A1 (zh)
ZA (1) ZA201400298B (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2011220004C1 (en) 2010-02-25 2015-08-06 Sony Corporation Transmission apparatus and method for transmission of data in a multi-carrier broadcast system
US10129580B2 (en) 2013-11-13 2018-11-13 Maxell, Ltd. Broadcast receiver and broadcast receiving system
US10638189B2 (en) 2013-11-13 2020-04-28 Maxell, Ltd. Broadcast receiver
JP6178234B2 (ja) * 2013-12-27 2017-08-09 日立マクセル株式会社 放送受信装置及び映像表示方法
JP5791745B1 (ja) * 2014-03-18 2015-10-07 株式会社ドワンゴ 動画配信装置、動画配信方法、及びプログラム
JP6645439B2 (ja) * 2014-11-07 2020-02-14 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
KR20160065504A (ko) * 2014-12-01 2016-06-09 엘지전자 주식회사 멀티미디어 디바이스 및 그 제어 방법
KR102483702B1 (ko) * 2016-03-03 2023-01-02 삼성전자 주식회사 멀티 수용부를 갖는 커넥터 장치
WO2020031453A1 (ja) 2018-08-10 2020-02-13 ソニー株式会社 情報処理装置及び情報処理方法、並びに映像音声出力システム
WO2020031696A1 (ja) 2018-08-10 2020-02-13 ソニー株式会社 情報処理装置及び情報処理方法、並びに映像音声出力システム
JP6866407B2 (ja) * 2019-01-10 2021-04-28 マクセル株式会社 放送受信装置及び表示方法
JP7271756B2 (ja) * 2019-01-10 2023-05-11 マクセル株式会社 表示方法
JP2019195199A (ja) * 2019-06-12 2019-11-07 マクセル株式会社 表示方法
JP7142297B2 (ja) * 2019-07-09 2022-09-27 ソフトバンク株式会社 動画変換装置、動画変換装置の制御プログラムおよび放送番組生成方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1328114A1 (en) * 2002-01-10 2003-07-16 Canal+ Technologies Société Anonyme Image resolution management in a receiver/decoder
JP2007208340A (ja) * 2006-01-30 2007-08-16 Makani Networks Co Ltd コンテンツ管理システム、管理サーバ、コンテンツ管理方法、およびプログラム
JP2011023883A (ja) * 2009-07-14 2011-02-03 Sharp Corp コンテンツ再生装置、プログラム、および記録媒体

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5828421A (en) * 1994-10-11 1998-10-27 Hitachi America, Ltd. Implementation efficient digital picture-in-picture decoding methods and apparatus
JPH10174007A (ja) * 1996-10-11 1998-06-26 Toshiba Corp マルチ機能テレビジョン装置
US20020118296A1 (en) * 1999-05-06 2002-08-29 Schwab Barry H. Integrated multi-format audio/video production system
US6349410B1 (en) * 1999-08-04 2002-02-19 Intel Corporation Integrating broadcast television pause and web browsing
US6928468B2 (en) * 1999-10-29 2005-08-09 Koninklijke Philips Electronics N.V. System for broadcasting software applications and portable data communications device for use in such a system
US8205223B2 (en) * 2000-04-12 2012-06-19 Lg Electronics Inc. Method and video device for accessing information
JP4011949B2 (ja) * 2002-04-01 2007-11-21 キヤノン株式会社 マルチ画面合成装置及びデジタルテレビ受信装置
US8424034B2 (en) * 2002-05-03 2013-04-16 Disney Enterprises, Inc. System and method for displaying commercials in connection with an interactive television application
JP2008067223A (ja) * 2006-09-08 2008-03-21 Toshiba Corp データ放送コンテンツ再生装置及びデータ放送コンテンツ再生方法
JP2008109606A (ja) 2006-09-29 2008-05-08 Sony Corp 情報処理装置および方法、並びにプログラム
CN101162429A (zh) * 2006-10-11 2008-04-16 上海乐金广电电子有限公司 语言学习机的其它学习程序提供方法
EP1916598A1 (fr) * 2006-10-23 2008-04-30 Nagravision S.A. Méthode de chargement et de gestion d'une application dans un équipement mobile
US20090049409A1 (en) * 2007-08-15 2009-02-19 Archos Sa Method for generating thumbnails for selecting video objects
EP2243111A4 (en) * 2008-01-03 2011-09-14 Colin Simon METHOD, SYSTEM AND APPARATUS FOR CONTENT MANAGEMENT AND DISTRIBUTION
JP5417741B2 (ja) 2008-06-03 2014-02-19 ソニー株式会社 受信装置、表示制御方法、およびプログラム
JP2009303062A (ja) * 2008-06-16 2009-12-24 Panasonic Corp 放送受信端末、放送データ合成方法、プログラムおよび記録媒体
US8429299B2 (en) * 2008-10-03 2013-04-23 Advanced Micro Devices, Inc. Distributed audio and video processing
CN201298851Y (zh) * 2008-10-30 2009-08-26 吴治杰 播放装置
JP2010166339A (ja) 2009-01-15 2010-07-29 Nippon Hoso Kyokai <Nhk> プログラムファイル取得装置
US9479812B2 (en) * 2009-06-05 2016-10-25 Time Warner Cable Enterprises Llc User selection of software components in a television set-top box
JP5399211B2 (ja) * 2009-11-16 2014-01-29 ソニー株式会社 情報処理システム、サーバ装置、情報処理方法、およびプログラム
US9621954B2 (en) * 2011-02-17 2017-04-11 Verizon Patent And Licensing Inc. Program guide including online channels

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1328114A1 (en) * 2002-01-10 2003-07-16 Canal+ Technologies Société Anonyme Image resolution management in a receiver/decoder
JP2007208340A (ja) * 2006-01-30 2007-08-16 Makani Networks Co Ltd コンテンツ管理システム、管理サーバ、コンテンツ管理方法、およびプログラム
JP2011023883A (ja) * 2009-07-14 2011-02-03 Sharp Corp コンテンツ再生装置、プログラム、および記録媒体

Also Published As

Publication number Publication date
EP2739048A1 (en) 2014-06-04
IN2014CN00514A (zh) 2015-04-03
CN103814578A (zh) 2014-05-21
ZA201400298B (en) 2014-06-25
AR087362A1 (es) 2014-03-19
CL2014000167A1 (es) 2015-01-16
MX2014000884A (es) 2014-08-21
EP2739048A4 (en) 2015-03-25
EP3282693A1 (en) 2018-02-14
US20170272803A1 (en) 2017-09-21
EP3282693B1 (en) 2021-03-31
EP2739048B1 (en) 2017-06-07
JP2013031046A (ja) 2013-02-07
MX350352B (es) 2017-09-04
BR112014001572A2 (pt) 2017-06-13
CA2842579A1 (en) 2013-02-07
JP6077200B2 (ja) 2017-02-08
US20140250481A1 (en) 2014-09-04
WO2013018532A1 (ja) 2013-02-07
PE20141868A1 (es) 2014-11-24
US9591351B2 (en) 2017-03-07

Similar Documents

Publication Publication Date Title
CN103814578B (zh) 接收器、显示控制方法、广播系统
US10547880B2 (en) Information processor, information processing method and program
KR101517638B1 (ko) 콘텐츠 제공 방법 및 그를 이용한 디스플레이장치
EP0863669B1 (en) Broadcast receiver selectively using navigation information multiplexed on transport stream and recording medium recording the method of the same
KR100950111B1 (ko) Mpeg-4 원격 통신 장치
CN1127260C (zh) 与视频/音频播放协同的视频/音频及图形演示方法和系统
CN105830456B (zh) 传送和接收媒体数据的方法和装置
CN104902290B (zh) 管理多个时间源数据的显示装置及其控制方法
MXPA06009473A (es) Dispositivo de procesamiento de visualizacion.
EP2169951A1 (en) A channel selection method,a composite encoding device and a set-top-box for iptv
CN103945258B (zh) 一种频道切换方法及电视接收装置
CN107852531A (zh) 显示装置及其控制方法
WO2005013618A1 (ja) ライブストリーミング放送方法、ライブストリーミング放送装置、ライブストリーミング放送システム、プログラム、記録媒体、放送方法及び放送装置
CN105704399A (zh) 多画面电视节目的播出方法和系统
US7634779B2 (en) Interpretation of DVD assembly language programs in Java TV-based interactive digital television environments
CN101510968B (zh) 数字音像播放系统及其使用者操作界面设定修改方法
JP4880843B2 (ja) 受信装置およびその制御方法
US8990879B2 (en) Method for providing data application of digital broadcasting
JP6307182B2 (ja) 受信装置、表示制御方法、並びに放送システム
Pulles et al. A set top box combining MHP and MPEG-4 interactivity
JP2004521558A (ja) Tv番組のコンテンツを充実させるビデオ処理方法及びシステム
JP2007124700A (ja) 受信装置および受信方法、並びに送受信装置および送受信方法
Cosmas et al. Rapid prototyping and fast user trial of multimedia broadcast and cellular services
Series Integrated broadcast-broadband systems
JP2004219811A (ja) 画像表示装置および画像表示方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant