CN1806433A - Av流再现装置、解码器切换方法、方法程序、程序存储介质以及集成电路 - Google Patents

Av流再现装置、解码器切换方法、方法程序、程序存储介质以及集成电路 Download PDF

Info

Publication number
CN1806433A
CN1806433A CNA2005800004919A CN200580000491A CN1806433A CN 1806433 A CN1806433 A CN 1806433A CN A2005800004919 A CNA2005800004919 A CN A2005800004919A CN 200580000491 A CN200580000491 A CN 200580000491A CN 1806433 A CN1806433 A CN 1806433A
Authority
CN
China
Prior art keywords
decoder
stream
user
reproducing apparatus
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2005800004919A
Other languages
English (en)
Other versions
CN100576889C (zh
Inventor
森冈正朋
杉本国昭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN1806433A publication Critical patent/CN1806433A/zh
Application granted granted Critical
Publication of CN100576889C publication Critical patent/CN100576889C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H04N21/42607—Internal components of the client ; Characteristics thereof for processing the incoming bitstream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4314—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for fitting data in a restricted space on the screen, e.g. EPG data in a rectangular grid
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/4424—Monitoring of the internal components or processes of the client device, e.g. CPU or memory load, processing speed, timer, counter or percentage of the hard disk space used
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/633—Control signals issued by server directed to the network components or client
    • H04N21/6332—Control signals issued by server directed to the network components or client directed to client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/654—Transmission by server directed to the client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Circuits Of Receivers In General (AREA)

Abstract

用户从存储在模式设置部分(101)中的显示属性信息和解码器选择准则信息中选择和设置期望的解码器切换条件。解码器性能管理部分(104)管理在AV流再现装置(100)中提供的多个解码器的性能。显示部分(102)根据来自用户的指令改变在输出部分(110)的屏幕上的图像显示帧并且将其通知给解码器管理部分(103)。解码器管理部分(103)控制解码器切换部分(105)，使得能够基于来自显示改变部分(102)的通知适当地切换用于解码由通信部分(106)和TV接收部分(107)获取的AV流的解码器。

Description

AV流再现装置、解码器切换方法、方法程序、程序存储介质以及集成电路
技术领域
本发明涉及使用多个解码器再现多个AV流的AV流再现装置。本发明尤其涉及一种能够根据用户的观看/收听形式适当地切换用于解码的解码器的AV流再现装置、可由该装置执行的解码器切换方法、用于执行该方法的程序、用于存储该程序的介质以及集成电路。
背景技术
近来，手提电话已经可以支持进行音频视频通话的TV电话功能。而另一方面，因为TV播出的数字化，使得可在支持TV接收功能的手提电话上观看电视成为可能。为了实现这些功能，就需要为手提电话提供用于解码对应于各种实时服务的诸如视频和音频流数据的解码器。同样为了同时提供多种服务，就需要包括多种解码器。
另一方面，随着设备技术的发展，已经研发了对应于多种流数据编码解码器的解码器。通过包括这些解码器，就可以生产出不专门用于相应服务的通用手提电话，这样就具有了工业优势。
在下文中将描述一个包括了多种解码器并相应的能够提供多种服务的手提电话。图17是示出了手提电话系统大概配置以及手提电话屏幕的显示实例的图解。图18是示出了手提电话1700的硬件配置实例的图解。
参见图17，手提电话1700从广播天线1721接收由其它手提电话(未示出)发送的并经由通信网络1701和电话基站1702传播的TV电话数据。随后手提电话1700解码接收到的TV电话数据并且在LCD面板1751上显示该数据作为TV电话应用。在这里，用于TV电话应用的图像显示帧可以作为TV电话帧1720。
此外，手提电话1700用通信天线1721接收由广播台1703发送的TV广播数据。随后手提电话1700解码接收到的TV广播数据并且在LCD面板1751上显示该数据作为TV接收应用。在这里，用于显示TV接收应用的帧可以作为TV广播帧1720。
同样为手提电话1700提供可输出音频的扬声器1761以及用户可使用其控制上述TV电话应用和TV接收应用操作的键盘1731。在手提电话1700中，将省略不直接涉及本发明的其它功能的描述。
参见图18，提供的手提电话1700至少具有用于控制整个设备的CPU 1801、用于存储程序等等的ROM 1802和RAM 1803、总线1085、用于接收经由广播天线1711获取的TV广播数据的TV接收部分1810、用于经由通信天线1721发送和接收TV电话数据的通信部分1820、用于控制键盘1731开/关的键盘控制器1830、用于解码由TV接收部分1810和通信部分1820接收到的AV流的两个解码器A1841和B 1842、用于将解码结果显示在LCD面板1751上的图像显示帧1710和1720的LCD控制器1850、把解码器A 1841和解码器B 1842解码的音频数据转换成模拟信号并由扬声器1761输出的D/A转换器1860。
接下来将讨论传统技术中解码器和应用图像显示帧之间的关系。
图19示出了在通用的传统技术中解码器和应用图像显示帧之间的关系。在屏幕显示实例中，TV接收部分1810和通信部分1820分别以固定的方式连接至解码器A 1841和解码器B 1842。由解码器A 1841解码的数据作为用于TV广播应用的图像显示帧1710被显示在LCD面板1751上而由解码器B 1842解码的数据作为用于TV电话应用的图像显示帧1720也显示在LCD面板1751上。每种应用不仅通过图像显示帧而且还通过扬声器1761作为音频输出。在图18中的输出部分1880包括了LCD面板1751和扬声器1761。
此外，在存在一种作为方法的技术，用于在包括有连接至多个AV设备的显示装置并且具有解码功能的AV系统中连接解码器，根据将要处理的信号选择(可执行某种处理的)合适的解码器并且解码该信号。如图20所示在此技术中，例如在多种流数据在IEEE 1394接口2001处输入的情况下，所述流数据由数据划分开关2002分配给最佳解码器。
通常当手提电话包含多个解码器时，最好包括高性能解码器。然而需要在性能以及功耗和解码器生产成本之间寻求平衡。因此许多生产商都面临着基于手提电话提供的服务和它们的价格之间平衡而做出选择的情况。
所述选择是：若对服务质量的考虑优先于手提电话价格就应仅包括高性能解码器，或者手提电话价格的考虑优先于服务质量就应仅包括低性能解码器。不同于此，所述选择应该考虑包括具有不同性能的多个解码器以具有适中的手提电话价格和服务质量水平。更具体地，应该使用高性能解码器用于主要服务，而使用低性能解码器用于其它服务。
例如假设解码器A 1841是功耗大但图像质量好的高性能解码器而解码器B1842是功耗小但图像质量差的低性能解码器。还假设解码器A 1841和解码器B1842都可对应用于TV电话数据的编码解码器以及用于TV广播数据的编码解码器。
在这里，手提电话的传统配置中存在一个问题，就是解码器和其中输入数据的组合至少在服务开始的时候就以固定的形式被分配，这样所述解码器在服务期间就无法动态地切换。例如如下将描述当使用高性能解码器A 1841观看高质量图像TV时有TV电话打入的情况。在此情况下，虽然用户的兴趣已经转移到进入的TV电话上，但是高性能解码器A 1841已经被分配用于观看TV，这样所述TV电话就只好使用低性能解码器B 1842并且以低质量播出。
发明内容
因此本发明的一个目标在于提供一种AV流再现装置和解码器切换方法使得即便在提供了一种服务的情况下，也可以从多个解码器动态切换到最佳解码器用于AV流解码。
本发明直接涉及从多个AV流中再现图像并同时显示在屏幕上的AV流再现装置。为了实现所述目标，本发明所述的AV流再现装置被提供具有AV流获取部分、多个解码器、解码器性能管理部分、模式设置部分、解码器管理部分、解码器切换部分以及输出部分。
AV流获取部分获取多个AV流。多个解码器解码所述多个AV流。解码器性能管理部分管理与多个解码器相关的信息。模式设置部分设置用户观看/收听形式用于确定AV流将被优先分配给哪个特定的解码器。解码器管理部分基于模式设置部分的设置以及来自解码器性能管理部分的信息并且根据由用户指示或操作的用户观看/收听形式确定解码器将被分配给每个AV流。解码器切换部分根据解码器管理部分的决定在用于解码AV流的解码器之间进行切换。输出部分使用单独图像显示帧把由多个解码器解码的多个图像同时显示在屏幕上。
一种较佳用户的观看/收听形式是每次对应于每个AV流的图像显示帧被显示在输出部分的屏幕上时的屏幕显示状态。典型的屏幕显示状态实例包括所述图像显示帧的z轴位置(交迭顺序)、所述图像显示帧的大小、所述图像显示帧的显示位置或者所述图像显示帧的亮度。此外对于另一种较佳用户的观看/收听形式来说，所述AV流再现装置的装置形式是可变化的。所述AV流再现装置的装置形式是由屏幕显示状态确定的，或是被独立确定的。
上述AV流再现装置中每个组件执行的每个进程都可被认为是给出了一系列过程的解码器切换方法。该方法是以让计算机执行一系列过程的程序的形式提供的。所述程序以存储在计算机可读介质中的形式被引入计算机。组成了AV流再现装置的模式设置部分、解码器管理部分、解码器性能管理部分以及解码器切换部分的功能块可被实现为大规模集成电路LSI。
根据以上对本发明的描述，即使当提供一种服务时，也可以根据屏幕显示状态和装置形式(用户的观看/收听形式)的改变执行切换使得在图像显示帧内显示的吸引用户大部分注意力的AV流通常由高图像质量解码器解码。
附图说明
图1是根据本发明一个实施例的AV流再现装置配置实例的图示。
图2A是显示属性信息的一个实例。
图2B是解码器选择准则信息的一个实例。
图2C是解码器切换准则管理信息的一个实例。
图3是解码器特征管理信息的一个实例。
图4示出了根据本发明的一个实施例的解码器切换方法过程的流程图。
图5A到5C是实例1中显示属性管理表格的实例。
图6A到6C是实例1中显示屏幕的实例。
图7A到7C是实例2中显示属性管理表格的实例。
图8A到8C是实例2中显示屏幕的实例。
图9A和9B是实例3中显示属性管理表格的实例。
图10A和10B是实例3中显示屏幕的实例。
图11A和11B是实例4中显示属性管理表格的实例。
图12A和12B是实例4中显示屏幕的实例。
图13是实例5中显示属性管理表格的实例。
图14A到14C是实例5中显示屏幕的实例。
图15是示出了解码器切换时序图的实例。
图16是在图1中示出的AV流再现装置主要功能由集成电路实现的情况下配置实例的图示。
图17是示出了手提电话系统和手提电话屏幕显示实例的大致配置的图示。
图18是示出了手提电话硬件配置实例的图示。
图19和20是示出了传统技术中主要功能组件配置实例的图示。
具体实施方式
在下文中将就使用本发明应用于手提电话的实例来解释本发明的AV流再现装置以及解码器切换方法。使用本发明的AV流再现装置的系统配置和所述AV流再现装置的硬件配置如图17和18所述。
图1是根据本发明一个实施例的AV流再现装置100配置实例的图示。在图1中，为本发明的AV流再现装置100提供了模式设置部分101、显示改变部分102、解码器管理部分103、解码器性能管理部分104、解码器切换部分105、通信部分106、TV接收部分107、解码器A 108、解码器B 109以及输出部分110。通信部分106和TV接收部分107组成了AV流获取部分。首先，下面将解释AV流再现装置100的每个组件的梗概。
模式设置部分101存储的显示属性信息与在解码器之间切换时刻的屏幕显示状态以及涉及将被切换解码器优先级的解码器选择准则信息相关。图2A和图2B示出了由模式设置部分101存储并以表格形式给出的显示属性信息201和解码器选择准则信息202的实例。在图2A示出的实例中，在输出部分110的屏幕上显示的图像的图像显示帧的大小(值＝0)、图像显示帧的Z轴位置(值＝1)、图像显示帧的垂直位置(值＝2)以及图像显示帧内的亮度(值＝3)都作为显示属性被预先设置。至于所述图像显示帧的大小，解码器被优先分配给图像尺寸较大的图像。至于所述图像显示帧的Z轴位置，解码器被优先分配给Z轴方向(深度)较短的图像，即在前部的图像。至于所述图像显示帧的垂直位置，解码器通常被优先分配给其图像显示帧在上部的图像。至于所述图像显示帧内的亮度，解码器通常被优先分配给图像显示帧内的亮度较高的图像。在图2B示出的实例中，将优先权给予高图像质量的解码器(值＝0)以及将优先权给予低功耗有些的解码器(值＝1)作为解码器选择准则被预先设置。
用户在所述显示属性信息201和解码器选择准则信息202中选择期望的解码器切换条件，并且在模式设置部分101处将该条件设置为解码器切换准则管理表格203。图2C是解码器切换准则管理表格203的一个实例图示，在所述表格203中图像显示帧的Z轴位置(值＝1)被设置为显示属性而高图像质量(值＝0)被设置为解码器选择准则。
解码器性能管理部分104存储关于在AV流再现装置100内提供的多个解码器(除了由硬件构成的解码器A 108和解码器B 109之外还包括由软件构成的解码器)解码器特性管理信息301，这些信息与解码器的特性有关。图3示出了由解码器性能管理部分104存储的解码器特征管理信息301的一个实例。在图3所示的实例中，为每个解码器管理帧数(数字越大图像质量越高)、电源功耗以及硬件/软件类型(通过软件可以更有效地降低功耗)。示出了ID为1的硬件解码器具有最高图像质量(30帧)而ID为3的软件解码器消耗电源最少(200mWh)。
显示改变部分102根据来自用户的指令改变输出部分110的屏幕上图像显示帧的输出状态。显示改变部分102将这一改变的内容通知给解码器管理部分103。解码器管理部分103基于来自通信部分106、TV接收部分107以及显示改变部分102的通知而管理用于每个获取的AV流的与应用类型、显示属性和用于解码的解码器相关的信息。解码器管理部分103根据所述管理内容指令在解码器切换部分105处的切换控制。这一管理例如可通过使用图5A中示出的显示属性管理表格(随后描述)而得以实现。
通信部分106将TV电话信号发送给电话基站1702并且从所述电话基站1702处接收TV电话信号(参见图17)。TV接收部分107接收来自广播站1703的TV广播信号(参见图17)。解码器切换部分105根据来自解码器管理部分103的指令在解码器之间动态地切换用于处理AV流。解码器A 108是能够向图像提供高图像质量的高性能硬件解码器。解码器B 109是向图像提供低图像质量的低性能硬件解码器。由解码器A 108和/或解码器B 109解码的图像通过输出部分110输出至LCD面板1751和扬声器1761(参见图18)。
接下来，将描述用于每种显示属性的由本发明AV流再现装置100执行的解码器切换方法。图4是示出了根据本发明一个实施例由根据本发明一个实施例的AV流再现装置100执行的的解码器切换方法过程的流程图。
[实例1]
在实例1中，将解释在图2C的解码器切换准则管理表格203中图像显示帧的Z轴位置(值＝1)被设置为显示属性而高图像质量(值＝0)被设置为解码器选择准则的情况。图5A到5C是示出了显示属性管理表格501至503的实例的图示。图6A到6C是对应于图5A到5C示出了输出部分110的显示屏幕601至603实例的图示。
现在将要讨论的是根据图5A中示出的显示属性管理表格501在屏幕601上显示TV广播帧610和浏览器帧620的情况(图6A)。在此情况下，因为TV广播帧610的Z轴顺序具有最高优先权，所以高图像质量解码器(图3中ID为“1”的解码器)被分配用于TV广播进程。接下来假设在此情况下TV电话帧630是向上的。一启动后，所述TV电话帧630立即在Z轴方向上就是最前的(图6B)，这就改变了显示属性管理表格502使得高图像质量解码器被分配用于TV电话(图5B)。
随后，当来自用户的指令经由显示改变部分102在最前面显示TV广播帧610时，即当有一改变所述显示属性的指令时(步骤S401)，就改变显示属性管理表格503使得高图像质量解码器被分配用于TV广播(步骤S402和S403，图5C和图6C)。对于所有的图像显示帧，要确定所述新近被分配的解码器ID与分配前的前一解码器的ID是否匹配(步骤S404和S405)，并且仅当前一解码器与新解码器互相不匹配时由新解码器切换前一解码器(步骤S406)。随后就重置该新解码器ID(步骤S407)。而所述被重置的ID例如可以是“0”。当所有图像显示帧上的进程都完成时，所述解码器切换进程结束。
根据以上描述，即使当提供一种服务时，也可执行切换使得在图像显示帧内显示的在Z轴方向上的顺序放置在最前面从而吸引用户大部分注意力的AV流总是可由高图像质量解码器解码。
[实例2]
在实例2中，将解释在图2C中所示的解码器切换准则管理表格203中图像显示帧的大小(值＝0)被设置为显示属性而高图像质量(值＝0)被设置为解码器选择准则的情况。图7A到7C是示出了显示属性管理表格701至703的实例的图示。图8A到8C是对应于图7A到7C示出了输出部分110的显示屏幕801至803实例的图示。
现在将要讨论的仅是在屏幕801上显示TV广播帧810的情况(图7A和图8A)。接下来假设在此情况下TV电话帧820是向上的。一旦启动，所述TV电话帧820的大小(由左上座标和右下座标定义的区域)就立即小于TV广播帧810的大小(图8B)，这就改变了显示属性管理表格702使得高图像质量解码器被分配用于TV广播进程(图7B)。可以基于从左上坐标到右下坐标的对角线长度计算图像显示帧的大小。
随后，当来自用户的指令经由显示改变部分102以降低TV广播帧810的大小并且增加TV电话帧820的大小时(步骤S401)，就改变显示属性管理表格703使得高图像质量解码器被分配用于TV电话(步骤S402和S403，图7C和图8C)。后续的进程如上所述。
根据以上描述，即使当提供一种服务时，也可执行切换使得在图像显示帧内显示的尺寸最大从而吸引用户大部分注意的AV流总是可由高图像质量解码器解码。
[实例3]
在实例3中，将解释在图2C的解码器切换准则管理表格203中图像显示帧的垂直位置(值＝2)被设置为显示属性而高图像质量(值＝0)被设置为解码器选择准则的情况。图9A和9B是示出了显示属性管理表格901和902的实例的图示。图10A和10B是对应于图9A和9B示出了输出部分110的显示屏幕1001和1002实例的图示。
现在将要讨论的是TV广播帧1010被显示在屏幕1001上部而TV电话帧1020被显示在屏幕1001下部的情况(图10A)。在此情况下，高图像质量解码器(图3中ID为“1”的解码器)被分配用于TV广播进程(图9A)。
随后，当经由显示改变部分102从用户给出指令以将TV电话帧1020移动至上部而将TV广播帧1010移动至下部时(步骤S401)，就改变显示属性管理表格902使得高图像质量解码器被分配用于TV电话进程(步骤S402和S403，图9B和图10B)。后续进程如上所述。
根据以上的处理，即使当提供一种服务时，也可执行切换使得处于图像显示帧内最上处显示的切吸引用户大部分注意力的AV流总是可由高图像质量解码器解码。
[实例4]
在实例4中，将解释在图2C中所示的解码器切换准则管理表格203中图像显示帧内的亮度(值＝3)被设置为显示属性而高图像质量(值＝0)被设置为解码器选择准则的情况。图11A和11B是示出了显示属性管理表格1101和1102的实例的图示。图12A和12B是对应于图11A和11B示出了输出部分110的显示屏幕1201和1202实例的图示。
现在将要讨论的是分别以高亮度和低亮度在屏幕1201上显示TV广播帧1210(屏幕是亮的)和TV电话帧1220(屏幕是暗的)的情况(图12A)。在此情况下，高图像质量解码器(图3中ID为“1”的解码器)被分配用于TV广播进程(图11A)。
随后，当来自用户的指令经由显示改变部分102使得TV电话帧1220的亮度高于TV广播帧1210的亮度时(步骤S401)，就改变显示属性管理表格1102使得高图像质量解码器被分配用于TV电话进程(步骤S402和S403，图11B和图12B)。后续处理如上所述。
根据以上处理，即使当提供一种服务时，也可执行切换使得在图像显示帧内显示的其亮度最高从而吸引用户大部分注意力的AV流总是可由高图像质量解码器解码。
[实例5]
在实例1至4中，已经通过根据所述AV流再现装置100的输出部分110的屏幕显示状态切换解码器而描述了所述方法。在这里的实例5中，将要通过根据AV流再现装置100本身的操作形式(例如显示部分的折叠、旋转、翻动(弯曲)和滑动以及与耳机/麦克风的连接)，即根据装置形式来切换解码器以描述一种方法。应该认识到所述屏幕显示状态和装置形式可被解释作为用户的观看/收听形式。
在实例5中，将解释在图2C中所示的解码器切换准则管理表格203中装置形式被设置为显示属性而高图像质量(值＝0)被设置为解码器选择准则的情况。图13是示出了显示属性管理表格1301实例的图示。图14A至14C是AV流再现装置100的装置形式的实例。
现在将要讨论的是当AV流再现装置100处于折叠形式时，用户观看TV广播的情况(图14A)。在此情况下，高图像质量解码器(图3中ID为“1”的解码器)被分配用于TV广播进程(图13A)。接下来假定在此情况下有TV电话呼入。一旦被呼叫，就立即把低图像质量解码器分配给所述TV电话进程(图14B)。
随后，当用户执行操作以改变被定义为装置形式的AV流再现装置100形式时，就改变显示属性管理表格1302使得高图像质量解码器被分配用于TV电话进程并且其帧尺寸变大(步骤S402和S403，图14B、14C和图13)。后续进程如上所述。
根据以上处理，即使当提供一种服务时，也可执行切换使得根据用户改变AV流再现装置100形式的操作而在图像显示帧内显示的吸引用户大部分注意力的AV流总是可由高图像质量解码器解码。
应该注意到用于切换解码器的时序图被设置为如图15所示，使得当显示在T0时刻处改变时，解码器之间的切换进程在T1时刻结束。
在图1中示出的模式设置部分101、解码器管理部分103、解码器性能管理部分104以及解码器切换部分105的功能块典型地可由大规模集成电路LSI 1600来实现。它们中的每一个都可以在单芯片上被一个接着一个的形成，或者它们中的部分或全部可以在一片芯片上形成。图16示出了集成电路构造的实例。LSI 1600是在集成电路上形成的功能块范围的实例。虽然在此实施例中使用了LSI，但是根据集成程度的不同，该电路也可被称为IC、系统LSI、超大LSI或超超大规模LSI。
应该认识到用于形成集成电路的所述方法不限于使用LSI，并且电路集成可由专用电路或者通用处理器来实现。此外，可以使用在LSI被生产出之后还可被编程的FPGA(现场可编程门阵列)以及能够在LSI内重新配置连接并设置电路单元的可重新配置的处理器。
此外，如果由于半导体技术的发展或者另一种技术的派生出现了代替LSI的一种电路集成技术，那么所述功能块也可使用那种技术集成。同样也存在例如生物技术的应用可能。
工业应用
根据本发明的AV流再现装置和解码器切换方法可用于，例如有TV广播和TV电话图像显示在屏幕上的通信装置，并且尤其适于例如用于解码AV流的最佳解码器是从多个解码器中选择的情况下使用。

Claims (12)

1.一种其中将从多个AV流中再现的图像同时显示在屏幕上的AV流再现装置，所述装置包括：
用于获取多个AV流的AV流获取部分，
用于解码由所述AV流获取部分获取的所述多个AV流的多个解码器，
用于管理与多个解码器性能相关的信息的解码器性能管理部分，
用于设置用户观看/收听形式以确定将被优先分配到特定解码器的AV流的模式设置部分，
基于所述模式设置部分的设置以及来自所述解码器性能管理部分的信息并且根据由用户指令或操作的用户观看/收听形式，用于确定将被分配给每个AV流的解码器的解码器管理部分，
根据所述解码器管理部分的确定，用于在用于解码AV流的解码器之间进行切换的解码器切换部分，以及
用于使用单独图像显示帧使由多个解码器解码的多个图像同时显示在屏幕上的输出部分。
2.如权利要求1所述的AV流再现装置，其特征在于，所述用户的观看/收听形式是在对应于每个AV流的图像显示帧被显示在输出部分的屏幕上的时刻的屏幕显示状态。
3.如权利要求2所述的AV流再现装置，其特征在于，所述屏幕显示状态是所述图像显示帧的z轴位置。
4.如权利要求2所述的AV流再现装置，其特征在于，所述屏幕显示状态是所述图像显示帧的大小。
5.如权利要求2所述的AV流再现装置，其特征在于，所述屏幕显示状态是所述图像显示帧的显示位置。
6.如权利要求2所述的AV流再现装置，其特征在于，所述屏幕显示状态是所述图像显示帧内的亮度。
7.如权利要求1所述的AV流再现装置，其特征在于，所述用户的观看/收听形式是所述AV流再现装置的装置形式。
8.如权利要求2所述的AV流再现装置，其特征在于，所述用户的观看/收听形式是所述AV流再现装置的装置形式。
9.一种由AV流再现装置执行的解码器切换方法，其中从多个AV流再现的图像同时显示于一屏幕上，该方法包括如下步骤：
获取多个AV流，
解码所述多个AV流，
识别由用户指令或操作的用户的观看/收听形式，
基于关于多个解码器性能以及关于预先设置的用于确定将要被优先分配到特定解码器的AV流的用户观看/收听形式的信息并且根据被识别的用户的观看/收听形式，确定将被分配给每个AV流的解码器，以及
根据在确定步骤中的确定，在用于解码AV流的解码器之间进行切换。
10.一种使得由其中从多个AV流再现的图像被同时显示在屏幕上的AV流再现装置执行解码器切换方法的程序，引起如下步骤的执行：
获取多个AV流，
解码所述多个AV流，
识别由用户指令或操作的用户的观看/收听形式，
基于关于多个解码器性能以及关于被预先设置的用于确定将要被优先分配到特定解码器的AV流的用户观看/收听形式的信息并且根据被识别的用户的观看/收听形式，确定将被分配给每个AV流的解码器，以及
根据在确定步骤中的确定，在用于解码AV流的解码器之间进行切换。
11.一种其上记录有使得由其中从多个AV流再现的图像被同时显示在屏幕上的AV流再现装置执行解码器切换方法的程序的记录介质，所述程序引起执行如下步骤：
获取多个AV流，
解码所述多个AV流，
识别由用户指令或操作的用户的观看/收听形式，
基于关于多个解码器性能以及关于被预先设置的用于确定将要被优先分配到特定解码器的AV流的用户观看/收听形式的信息并且根据被识别的用户的观看/收听形式，确定将被分配给每个AV流的解码器，以及
根据在确定步骤中的确定，在用于解码AV流的解码器之间进行切换。
12.一种用于其中从多个AV流再现的图像被同时显示在屏幕上的AV流再现装置的集成电路，
其中所述集成电路构建在一种AV流再现装置之内，所述AV流再现装置具备用于获取多个AV流的AV流获取部分、用于解码所获取的所述多个AV流的多个解码器以及使用单独显示帧把由多个解码器解码的多个图像同时显示在屏幕上的输出部分，以及
其中电路被集成并作为：
用于管理与多个解码器的性能相关的信息的解码器性能管理部分，
用于设置用户的观看/收听形式以确定将要被优先分配到特定解码器的AV流的模式设置部分，
基于所述模式设置部分的设置以及来自所述解码器性能管理部分的信息并且根据由用户指令或操作的用户的观看/收听形式，用于确定将被分配给每个AV流的解码器的解码器管理部分，
根据所述解码器管理部分的确定，用于在用于解码AV流的解码器之间进行切换的解码器切换部分。
CN200580000491A 2004-07-02 2005-06-20 Av流再现装置、解码器切换方法以及集成电路 Expired - Fee Related CN100576889C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP196308/2004 2004-07-02
JP2004196308 2004-07-02

Publications (2)

Publication Number Publication Date
CN1806433A true CN1806433A (zh) 2006-07-19
CN100576889C CN100576889C (zh) 2009-12-30

Family

ID=34970940

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200580000491A Expired - Fee Related CN100576889C (zh) 2004-07-02 2005-06-20 Av流再现装置、解码器切换方法以及集成电路

Country Status (6)

Country Link
US (1) US7669217B2 (zh)
EP (1) EP1763952B1 (zh)
JP (1) JP4679515B2 (zh)
CN (1) CN100576889C (zh)
DE (1) DE602005017624D1 (zh)
WO (1) WO2006003852A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103124374A (zh) * 2011-11-17 2013-05-29 株式会社艾库塞尔 动态图像再现处理方法及采用该方法的便携式信息终端
CN103428570A (zh) * 2012-05-24 2013-12-04 三星电子株式会社 用于多重播放视频的方法和设备

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100531382C (zh) * 2006-01-18 2009-08-19 华为技术有限公司 一种用于可视电话视频音频信号传输的装置及方法
US7729381B2 (en) 2006-09-15 2010-06-01 At&T Intellectual Property I, L.P. In-band media performance monitoring
JP2008193654A (ja) * 2007-01-10 2008-08-21 Matsushita Electric Ind Co Ltd デジタル放送受信回路、これを備えたデジタル放送受信装置とその制御方法
US8238419B2 (en) * 2008-06-24 2012-08-07 Precoad Inc. Displaying video at multiple resolution levels
JP5326409B2 (ja) * 2008-08-01 2013-10-30 富士通モバイルコミュニケーションズ株式会社 携帯型電子機器および映像表示方法
US8375132B2 (en) * 2010-03-01 2013-02-12 Cisco Technology, Inc. Schedulable transport for contribution services
AU2011329767A1 (en) 2010-11-18 2013-05-30 Aereo, Inc. System and method for providing network access to antenna feeds
JP4960512B1 (ja) * 2011-01-31 2012-06-27 株式会社東芝 デジタル放送受信機
AU2012219371A1 (en) 2011-02-18 2013-08-29 Aereo, Inc. Cloud based location shifting service
US9148674B2 (en) 2011-10-26 2015-09-29 Rpx Corporation Method and system for assigning antennas in dense array
JP5802953B2 (ja) * 2012-03-31 2015-11-04 株式会社アクセル 動画再生処理方法及びその方法を採用した携帯情報端末
JP6037630B2 (ja) * 2012-03-16 2016-12-07 三菱電機株式会社 再生装置並びに再生装置の制御方法及び制御プログラム
WO2016166631A1 (en) 2015-04-13 2016-10-20 Semiconductor Energy Laboratory Co., Ltd. Decoder, receiver, and electronic device
JP6431814B2 (ja) * 2015-06-09 2018-11-28 マクセル株式会社 デジタル情報送受信装置
US9768174B2 (en) 2015-07-21 2017-09-19 Semiconductor Energy Laboratory Co., Ltd. Semiconductor device
KR20170061602A (ko) 2015-11-26 2017-06-05 가부시키가이샤 한도오따이 에네루기 켄큐쇼 반도체 장치 및 전자 기기
KR20180083132A (ko) * 2017-01-12 2018-07-20 삼성전자주식회사 전자 장치 및 그 동작방법
CN109640179B (zh) * 2018-11-27 2020-09-22 Oppo广东移动通信有限公司 视频解码控制方法、装置以及电子设备

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5887115A (en) * 1993-01-13 1999-03-23 Hitachi America, Ltd. Method and apparatus for implementing a video tape recorder for recording digital video signals having either a fixed or variable data transmission rate
US5481296A (en) * 1993-08-06 1996-01-02 International Business Machines Corporation Apparatus and method for selectively viewing video information
JP3669451B2 (ja) 1995-12-04 2005-07-06 ソニー株式会社 ディスプレイ装置
JPH1023375A (ja) * 1996-07-04 1998-01-23 Matsushita Electric Ind Co Ltd 順次ディジタルビデオ復号化装置
JP2000287215A (ja) * 1999-03-30 2000-10-13 Toshiba Corp 映像復号化装置
US7995896B1 (en) 1999-11-04 2011-08-09 Thomson Licensing System and user interface for a television receiver in a television program distribution system
US7089577B1 (en) * 2000-01-14 2006-08-08 Terayon Communication Systems, Inc. Process for supplying video-on-demand and other requested programs and services from a headend
JP2001309371A (ja) * 2000-04-27 2001-11-02 Fujitsu Ltd Ｍｐｅｇデコーダ
JP4672856B2 (ja) * 2000-12-01 2011-04-20 キヤノン株式会社 マルチ画面表示装置及びマルチ画面表示方法
CA2441819A1 (en) * 2001-03-20 2002-09-26 Intellocity Usa, Inc. Video combiner
TW557069U (en) 2001-07-13 2003-10-01 Winbond Electronics Corp Multi-media display device suitable for digital TV and capable of showing many kinds of program
US20040237104A1 (en) * 2001-11-10 2004-11-25 Cooper Jeffery Allen System and method for recording and displaying video programs and mobile hand held devices
JP2003153257A (ja) * 2001-11-12 2003-05-23 Sony Corp 画像処理装置および方法、記録媒体、並びにプログラム
US7042950B2 (en) 2001-11-14 2006-05-09 Matsushita Electric Industrial Co., Ltd. Multichannel video processing unit and method
US20040128694A1 (en) * 2002-12-30 2004-07-01 International Business Machines Corporation Fast selection of media streams
US20060193384A1 (en) * 2003-06-19 2006-08-31 Boyce Jill M Method and apparatus for low-complexity spatial scalable decoding

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103124374A (zh) * 2011-11-17 2013-05-29 株式会社艾库塞尔 动态图像再现处理方法及采用该方法的便携式信息终端
CN103124374B (zh) * 2011-11-17 2017-06-06 株式会社艾库塞尔 动态图像再现处理方法及采用该方法的便携式信息终端
CN103428570A (zh) * 2012-05-24 2013-12-04 三星电子株式会社 用于多重播放视频的方法和设备
CN103428570B (zh) * 2012-05-24 2018-06-05 三星电子株式会社 用于多重播放视频的方法和设备

Also Published As

Publication number Publication date
US20070040890A1 (en) 2007-02-22
US7669217B2 (en) 2010-02-23
JP2008505510A (ja) 2008-02-21
EP1763952A1 (en) 2007-03-21
CN100576889C (zh) 2009-12-30
DE602005017624D1 (de) 2009-12-24
WO2006003852A1 (en) 2006-01-12
JP4679515B2 (ja) 2011-04-27
EP1763952B1 (en) 2009-11-11

Similar Documents

Publication Publication Date Title
CN1806433A (zh) Av流再现装置、解码器切换方法、方法程序、程序存储介质以及集成电路
CN1240219C (zh) 接收装置
CN1320819C (zh) 允许内容接收和语音通讯的通讯终端设备
CN1189024C (zh) 信息处理设备
CN1992890A (zh) 提供媒体节目的装置及方法
CN1976443A (zh) 一种与电视系统交互的电话
CN1956578A (zh) 用于多媒体信息交换的通讯设备和系统
US20040179605A1 (en) Multimedia transcoding proxy server for wireless telecommunication system
CN1758755A (zh) 收发机系统、发送机和接收机以及信息处理方法
CN1893579A (zh) 用于接收数字多媒体广播频道的设备
CN101060595A (zh) 编辑数字广播服务的频道列表的装置和方法
CN101031065A (zh) 一种在视频业务中实现画面切换的方法、装置及系统
CN1736080A (zh) 多因素的应用程序选择
CN1722796A (zh) 显示设备及其控制方法
CN1518362A (zh) 用于支持多种编解码器的设备和方法
CN101031028A (zh) 一种支持多用户同时使用的机顶盒装置
CN101056439A (zh) 便携式电子装置、内容信息服务器、内容列表提供方法
CN1874205A (zh) 使用接收的地面数字广播数据提供用户界面的方法
CN104301782A (zh) 用于输出音频的方法、装置和终端
CN1689326A (zh) 包括便携式计算机、电视和蜂窝电话的多媒体系统
CN1901666A (zh) 移动通信终端及其视频通信方法
CN1842971A (zh) 内容提供系统和用于这种系统的移动通信终端
CN1881852A (zh) 用于接收数字广播的方法和设备
CN1489379A (zh) 一种具有电视接收功能的电子相框
CN1960450A (zh) 一种多媒体广播的频道切换方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20091230

Termination date: 20200620

CF01 Termination of patent right due to non-payment of annual fee