CN101188758A - 图像信息传输系统和图像信息传输方法 - Google Patents
图像信息传输系统和图像信息传输方法 Download PDFInfo
- Publication number
- CN101188758A CN101188758A CNA2007101693801A CN200710169380A CN101188758A CN 101188758 A CN101188758 A CN 101188758A CN A2007101693801 A CNA2007101693801 A CN A2007101693801A CN 200710169380 A CN200710169380 A CN 200710169380A CN 101188758 A CN101188758 A CN 101188758A
- Authority
- CN
- China
- Prior art keywords
- image
- picture
- data
- sub
- transmission data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000005540 biological transmission Effects 0.000 title claims description 163
- 238000000034 method Methods 0.000 title claims description 43
- 230000006835 compression Effects 0.000 claims abstract description 82
- 238000007906 compression Methods 0.000 claims abstract description 82
- 238000004891 communication Methods 0.000 claims abstract description 43
- 239000000463 material Substances 0.000 claims description 71
- 238000012545 processing Methods 0.000 claims description 56
- 230000015572 biosynthetic process Effects 0.000 claims 4
- 230000002441 reversible effect Effects 0.000 abstract 1
- 230000005236 sound signal Effects 0.000 description 55
- 230000008569 process Effects 0.000 description 27
- 230000001427 coherent effect Effects 0.000 description 24
- 230000004044 response Effects 0.000 description 19
- 230000008859 change Effects 0.000 description 11
- 230000006870 function Effects 0.000 description 10
- 230000008878 coupling Effects 0.000 description 4
- 238000010168 coupling process Methods 0.000 description 4
- 238000005859 coupling reaction Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 4
- 230000001360 synchronised effect Effects 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000003111 delayed effect Effects 0.000 description 2
- 239000002131 composite material Substances 0.000 description 1
- 230000008676 import Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
- H04N19/27—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding involving both synthetic and natural picture components, e.g. synthetic natural hybrid coding [SNHC]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/426—Internal components of the client ; Characteristics thereof
- H04N21/42607—Internal components of the client ; Characteristics thereof for processing the incoming bitstream
- H04N21/4263—Internal components of the client ; Characteristics thereof for processing the incoming bitstream involving specific tuning arrangements, e.g. two tuners
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
- H04N21/4314—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for fitting data in a restricted space on the screen, e.g. EPG data in a rectangular grid
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44012—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
- H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/631—Multimode Transmission, e.g. transmitting basic layers and enhancement layers of the content over different transmission paths or transmitting with different error corrections, different keys or with different transmission protocols
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- Discrete Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
一种图像信息传输系统包括图像信息发送装置和图像信息接收装置。该图像信息发送装置获取主图像传输数据,用于发送代表主图像的运动图像,该主图像传输数据经历了包括双向预测编码的预定的压缩编码,并且该图像信息发送装置生成副图像传输数据,用于发送将要在显示屏幕上与主图像一起显示的副图像。通过预定的网络通信链路将主图像传输数据和副图像传输数据发送到图像信息接收装置。在接收到主图像传输数据和副图像传输数据后,图像信息接收装置使用与编码处理对应的解码方案解码该主图像传输数据,并解码该副图像传输数据,以生成副图像视频信号。组合主图像视频信号和副图像视频信号,以显示图像。
Description
技术领域
本发明涉及图像信息传输系统、图像信息发送装置、图像信息接收装置、图像信息传输方法、图像信息发送方法和图像信息接收方法。更具体地,本发明涉及被构建用于在图像信息发送装置和图像信息接收装置之间传输图像信息的图像信息传输系统、组成该图像传输系统的图像信息发送装置和图像信息接收装置、以及该系统和装置中所采用的图像信息传输方法、图像信息发送方法和图像信息接收方法。
背景技术
已经有通过电缆将被配置为将视频和音频信号输出到诸如视频盒记录器的外部装置的AV(音频视觉)输出装置的视频信号输出端与诸如电视接收机的具有图像显示功能的图像显示装置的视频和音频输入/输出端连接而构建的可用的音频视觉(AV)系统。在这种AV系统中,将从视频输出装置输出的视频内容的视频和音频信号输入到图像显示装置,以再现图像和声音。
在许多AV输出装置中,也可以以与视频内容的视频信号的输出相似的方式从视频输出端输出为图形用户界面(GUI)生成的图形图像(GUI图像)的视频信号。可以在图像显示装置上显示用于视频输出装置的GUI图像。浏览所显示的GUI图像的用户可操作与视频输出装置一起使用的遥控器、安装在视频输出装置的主体上的处理机(handler)等等。
最近,已经使用并提出了通过网络来连接视频和音频装置而不是通过AV输入/输出端来连接装置而构建的AV系统。这种AV系统被设计用于家庭网络中的视频和音频应用,并且也称作AV家庭网络。
例如,通过网络连接组成上述AV系统的视频输出装置和图像显示装置,以建立AV家庭网络。与上述AV系统类似,用于将操作输入到视频输出装置的一种最常见类型的用户界面是:在图像显示装置上显示通过视频输出装置所生成的GUI图像,并且用户在该GUI图像上操作以控制视频装置。
在这种情况下,通过网络通信,将GUI图像的视频信号从视频输出装置发送到图像显示装置,并且图像显示装置显示所接收的视频信号(例如,见日本未审查专利申请公开No.2006-129103)。
发明内容
例如,将GUI图像的视频信号从第一装置发送到第二装置,并且在第二装置上显示视频信号,其中第一和第二装置通过网络相连。在这种情况下,期望实现流畅的GUI操作,而避免GUI图像中所包含的图像响应于操作的转换或变化的任何延迟,这可能是因为通过网络发送GUI图像的视频信号所用的协议而引起的。
根据本发明的实施例,提供了包括图像信息发送装置和图像信息接收装置的图像信息传输系统。
图像信息发送装置包括以下元件。图像数据获取部件获取经历了包括双向预测编码处理的预定压缩编码处理的主图像传输数据,作为用于发送主图像视频信号的传输数据,该主图像视频信号是具有代表主图像的内容的运动图像的视频信号。图像数据生成部件生成副图像传输数据,该副图像传输数据是用于发送在与显示主图像的屏幕相同的屏幕上将要显示的副图像的传输数据,并且该副图像传输数据由压缩静止图像数据和连续性指令信息形成,压缩静止图像数据具有代表用作图形用户界面的图形用户界面图像的图像内容,并且是与该图形用户界面图像的一帧对应的压缩编码的静止图像数据,连续性指令信息是指示这样一种时期的重要信息:在该时期中与压缩静止图像数据的图像内容相同的图像内容连续。发送部件通过预定的网络通信链路将主图像传输数据和副图像传输数据发送到图像信息接收装置。
图像信息接收装置包括以下元件。接收部件接收通过网络通信链路发送的主图像传输数据和副图像传输数据。第一解码部件在由接收部件接收的主图像传输数据上进行与压缩编码处理对应的解码处理,以获取主图像视频信号。第二解码部件使用形成由接收部件接收的副图像传输数据的压缩静止图像数据和连续性指令信息进行解码处理,以生成副图像视频信号,该副图像视频信号是副图像的视频信号。视频信号输出部件将由第一解码部件获取的主图像视频信号和由第二解码部件获取的副图像视频信号组合,以获取组合视频信号,并以可以被用于显示图像的形式输出该组合视频信号。
根据本发明的另一实施例,提供了包括以下元件的图像信息发送装置。图像数据获取部件获取经历了包括双向预测编码处理的预定压缩编码处理的主图像传输数据,作为用于发送主图像视频信号的传输数据,该主图像视频信号是具有代表主图像的内容的运动图像的视频信号。图像数据生成部件生成副图像传输数据,该副图像传输数据是用于发送在与显示主图像的屏幕相同的屏幕上将要显示的副图像的传输数据,并且该副图像传输数据由压缩静止图像数据和连续性指令信息形成,压缩静止图像数据具有代表用作图形用户界面的图形用户界面图像的图像内容,并且是与图形用户界面图像的一帧对应的压缩编码的静止图像数据,连续性指令信息是指示这样一种时期的重要信息:在该时期中与压缩静止图像数据的图像内容相同的图像内容连续。发送部件通过预定的网络通信链路将所述主图像传输数据和副图像传输数据发送到与该网络通信链路连接的图像信息接收装置,图像信息接收装置被配置为接收并解码主图像传输数据和副图像传输数据,以将解码的主图像传输数据和解码的副图像传输数据组合,以获取组合图像数据,并输出该组合图像数据。
根据本发明的另一实施例,提供了包括以下元件的图像信息接收装置。接收部件接收由图像信息发送装置生成并通过预定的网络通信链路发送的主图像传输数据和副图像传输数据,该主图像传输数据是用于发送主图像视频信号的传输数据,该主图像视频信号是具有代表主图像的内容的运动图像的视频信号,并且主图像传输数据是经历了包括双向预测编码处理的预定压缩编码处理的数据,副图像传输数据是用于发送在与显示主图像的屏幕相同的屏幕上将要显示的副图像的传输数据,并且该副图像传输数据由压缩静止图像数据和连续性指令信息形成,压缩静止图像数据具有代表用于图形用户界面的图形用户界面图像的图像内容,并且是与图形用户界面图像的一帧对应的压缩编码的静止图像数据,连续性指令信息是指示这样一种时期的重要信息:在该时期中与压缩静止图像数据的图像内容相同的图像内容连续。第一解码部件在由接收部件所接收的主图像传输数据上进行与压缩编码处理对应的解码处理,以获取主图像视频信号。第二解码部件使用形成由接收部件所接收的副图像传输数据的压缩静止图像数据和连续性指令信息来进行解码处理,以生成副图像视频信号,该副图像视频信号是所述副图像的视频信号。视频信号输出部件将由第一解码部件所获取的主图像视频信号和由第二解码部件所获取的副图像视频信号组合,以获取组合视频信号,并以可以被用于显示图像的形式输出该组合视频信号。
根据上述实施例,首先,图像信息发送装置被配置为生成代表GUI图像的副图像传输数据,其中要在与显示基于与主图像对应的主图像传输数据生成的主图像的屏幕相同的屏幕上显示该GUI图像,该主图像是运动图像。主图像传输数据经历了包括双向预测编码处理的压缩编码处理。副图像传输数据包括:压缩静止图像数据,其是与GUI图像的一帧对应的压缩编码的静止图像数据;以及指示这样一种时期的信息:在该时期中,与由压缩静止图像数据指定的图像相同的图像连续。通过网络通信链路将主图像传输数据和副图像传输数据发送到图像信息接收装置。
图像信息接收装置被配置为接收所发送的主图像传输数据和副图像传输数据,以将主图像传输数据和副图像传输数据解码成以可用于图像显示的形式的视频信号(主图像视频信号和副图像视频信号),以组合这些视频信号,并输出得到的组合视频信号。
采用这种结构,经历了包括双向预测编码处理的压缩编码处理的数据确保可以高质量再现作为主图像的运动图像。另一方面,按以下方式再现作为GUI图像的副图像。展开副图像传输数据中的压缩静止图像数据,以获取与一帧(帧画面)对应的视频信号,并且配置视频信号以使得帧画面在由连续性指令信息指定的时期内连续,由此生成副图像视频信号。与压缩编码以包括双向预测编码图像的视频信号的解码相比,将副图像传输数据解码成副图像视频信号可以显著降低用于解码的视频信号数据输入和输出的延迟时间。
从而,降低了在用于生成副图像的解码处理中的输入和输出阶段的延迟时间,由此降低了当响应于在GUI图像上所进行的操作来切换作为副图像而实际显示的GUI图像的内容时的时间延迟。因此,用户可以更容易操作GUI图像,并且可以改善使用的容易性。
附图说明
图1是示出根据本发明的实施例的AV家庭网络的示例结构的图;
图2是示意性示出通过网络发送GUI图像的典型内部处理过程的示例的图;
图3是示意性示出在从运动图像压缩编码处理到解码处理的时期期间、图2中所示的组合视频信号(通过组合源图形信号和源视频信号所获得的信号)的处理时序的示例的图;
图4是示意性示出根据实施例的通过网络从视频装置发送视频内容和GUI图像的内部处理过程的示例的图;
图5是示意性示出当电视接收机解码通过图4所示的过程而编码的GUI图像的数据时的处理时序的示例的图;
图6是示出根据实施例的视频装置的示例结构的图;以及
图7是示出根据实施例的电视接收机的示例结构的图。
具体实施方式
下面,将通过例子,在系统用作视频和音频应用的家庭网络(AV家庭网络)的情况下描述本发明的实施例。构建系统以便可以通过家庭网络发送和接收视频内容(和音频内容)。
图1示出根据本发明的AV家庭网络的示例结构。在图1所示的示例中,通过网络线路(网络通信链路)3连接视频装置1和电视接收机2。
例如,视频装置1包括能够接收预定广播载波(指示诸如陆地波、卫星广播波(例如,广播卫星(BS)波和通信卫星(CS)波)、和电缆电视(CATV)广播波之类的不同广播波(广播信号),或在相同的广播波上的不同载波服务或平台等等)的广播的调谐器和兼容预定介质(存储介质)的驱动器,并具有程序记录功能。也就是,调谐器接收并解调视频内容(广播内容),并且使用驱动器将经解调的内容写入并存储在介质中。例如,视频装置1可以具有预订记录功能以及程序记录功能等等。
视频装置1还具有网络通信功能,以响应于通过例如网络所发送的视频内容请求而再现被存储在介质中的视频内容的数据,并通过网络通信链路3将视频内容的数据发送到请求网络终端。也可按相似的方式,将由视频装置1的调谐器接收并解调的视频内容的数据发送到网络通信链路3上。
电视接收机2包括能够接收预定广播载波的广播的调谐器。调谐器接收并解调视频内容,并且将视频信号和与视频信号同步回放的音频信号再现为图像和声音。可以接收并获得通过网络线路3所发送的视频内容的数据,并且可按相似的方式将视频内容的数据再现为图像和声音。
图1示出了作为组成AV家庭网络的装置的视频装置1和电视接收机2,它们是用于描述本发明的最低要求。在实际的AV家庭网络中,除视频装置1和电视接收机2之外,还可以连接其他可兼容网络的AV装置。
根据本实施例的视频装置1可以进行图形处理,以生成用于操作视频装置1的GUI图像的图像数据,并且可将图像数据输出为视频信号。根据本实施例的视频装置1具有支持包括数据广播的电视广播的电视调谐器功能。因此,视频装置1可以进行图形处理,以再现通过接收数据广播而获得的内容数据,来生成图像数据,并且还可将图像数据输出为视频信号。
下文中将用于操作视频装置1的GUI图像称作“自生成GUI图像”,其来源于视频装置1本身的GUI图像的源信号的生成,并且在下文中将基于通过数据广播所发送的数据而显示的图像称作“数据广播GUI图像”。由于以诸如广播置标语言(BML)的置标语言来编写数据广播内容数据,所以可以配置数据广播内容,使得响应于在图像上所进行的操作而将预定变化施加到该内容中所包含的图像上。也就是,实现了作为GUI图像的功能。
在下文中,除非单独标识,将自生成GUI图像和数据广播GUI图像简称为GUI图像(副图像)。
在被发送到例如视频内容的相同的发送目的地的网络终端之前,由视频装置1生成的GUI图像的视频信号经历预定的压缩编码处理。
例如,在图1所示的系统配置中,电视接收机2用作向视频装置1请求视频内容的客户机。例如,当期望显示GUI图像时,视频装置1将GUI图像的视频信号发送到电视接收机2。电视接收机2解码所发送的GUI图像的视频信号,并显示图像。
例如,在电视接收机2上显示示出在视频装置1的介质中存储的视频内容项的列表的图像(视频内容列表图像),作为视频装置1的自生成GUI图像。在这种情况下,例如,如果用户操作以改变对来自列表的期望视频内容项的选择,则根据该操作,指示当前选择的视频内容项的加亮区在电视接收机2上所显示的视频内容列表图像上移动。
响应于上述操作的加亮区的移动(GUI图像的变化)是由视频装置1通过生成新的视频内容列表图像并通过网络通信链路3发送该视频内容列表图像的视频信号来实现的,其中在该新的视频内容列表图像中,加亮区根据响应于用户所进行的操作而发出的操作指令信号而变化到期望的位置。电视接收机2接收并显示该视频信号,使得在视觉上可感知到加亮区根据用户改变视频内容项的选择的操作而在电视接收机2上显示的视频内容列表图像(GUI图像)上移动。
当用户操作视频装置1以显示特定数据广播时,视频装置1再现由视频装置1接收并存储的数据广播内容的数据,以生成该数据广播的图像(数据广播GUI图像)的视频信号,并通过网络通信链路3将该视频信号发送到电视接收机2。然后,在电视接收机2上显示该数据广播内容的图像。例如,用户在对数据广播内容进行操作,并且视频装置1检测用户的操作。在这种情况下,响应于所检测到的操作,视频装置1从当前数据广播内容的视频信号的生成切换到将要显示的数据广播内容的图像的视频信号的生成,并将所生成的视频信号发送到电视接收机2。在电视接收机2上,根据用户的操作切换并显示该数据广播内容的图像。
图2示出了由视频装置1进行以通过网络通信链路3发送GUI图像的典型内部处理过程的示例。
在图2中,要发送的源信号包括源图形信号和一对源视频和音频信号。
源图形信号是由视频装置1所生成的GUI图像的数据的视频信号,并且是没被编码用于传输的基带信号。
源视频信号是形成由视频装置1从介质再现的视频内容的未压缩基带视频信号,并且源音频信号是要与视频信号同步回放的基带音频信号。
在处理中,首先,将都被分类为视频信号类型的源图形信号和源视频信号组合成单个基带视频信号,然后使得该基带视频信号经历用于编码运动图像的图像压缩编码处理(运动图像压缩编码处理)。
运动图像压缩编码处理使用基于预测编码(包括双向预测编码)的预定方案,以实现运动图像视频信号的高质量和高效率的压缩编码。运动图像压缩编码处理的现有示例包括MPEG-2(运动画面专家组阶段2)、MPEG-4、H.264和AVCHD(高级视频编码高清晰标准)等。在此实施例中,作为示例,使用MPEG-2。在MPEG-2中,将作为帧内编码画面的内画面(I-画面)、作为前向预测编码画面的预测画面(P-画面)、作为双向预测编码画面的双向预测画面(B-画面)定义为编码画面。
源音频信号经过音频压缩编码处理。例如,音频压缩编码处理使用在应用格式下定义的、与上述视频信号的运动图像压缩编码方案对应的方案。
因此,获得了基于源图形信号和源视频信号的经压缩编码的视频信号(压缩视频信号)和基于源音频信号的经压缩编码的音频信号(压缩音频信号)。例如,压缩视频信号和压缩音频信号经过时分复用处理,以生成其中复用了视频和音频信号的传输内容数据(传输数据)。根据网络通信链路3所支持的协议,将传输数据发送到客户机网络终端(电视接收机2)。
例如,作为客户机的电视接收机2通过网络通信链路3接收并获得以上述方式发送的传输数据,并将其分离成压缩音频信号和压缩视频信号。使用与运动图像压缩编码方案对应的解码方案来解码压缩音频信号,以获得基带视频信号,并基于该视频信号显示图像。因此,例如,在电视接收机2的显示屏幕上,显示由视频装置1再现的视频内容或通过使用视频装置1的调谐器接收电视广播而获得的视频内容的图像,并且,如果有必要,显示在其中GUI图像被叠加在视频内容的图像上的图像。
但是,图2中所示的视频装置1的内部处理过程可能具有关于GUI图像的操作容易度的问题。将参考图3讨论该问题。
图3示出了图2中所示的组合视频信号(通过将源图形信号和源视频信号组合而获得的信号)从运动图像压缩编码处理到解码处理的时序的示例。应注意的是,运动图像压缩编码处理使用MPEG-2。I-画面或P-画面的出现周期是三个画面。也就是,使用在I-画面和P-画面之间或在P-画面之间插入两个B-画面的画面模式。
首先,图3的部分(a)示出了视频装置1通过组合源图形信号和源视频信号而获得的基带组合视频信号。通过连续帧画面F1到F9的序列,示意性示出组合视频信号。图3的部分(b)示出了当对该组合视频信号进行运动图像压缩编码处理时与帧画面的数据单元对应的编码画面。即,帧画面F1、F2、F3、F4、F5、F6、F7、F8和F9分别对应于I-画面I1、B-画面B1、B-画面B2、P-画面P1、B-画面B3、B-画面B4、P-画面P2、B-画面B5和B-画面B6。
图3的部分(c)示出了在图3的部分(a)所示的帧画面和图3的部分(b)所示的画面之间的对应关系之下的运动图像压缩编码处理中的编码过程的示例。
首先,I-画面I1是通过仅编码帧画面F1而获得的画面。因此,如图3的部分(c)所示,在作为最早可能编码时间的、帧画面F1的时期之后的帧时期(帧画面F2的时期)中获得I-画面I1。
随后,在运动图像压缩编码过程中,通过编码帧画面F2到F4,生成B-画面B1和B2以及P-画面P1的编码画面。通过参考之前的I-画面I1和后面的P-画面P1,编码每个B-画面B1和B2。因此,在I-画面I1之后编码P-画面P1。由于P-画面P1对应于帧画面F4,所以在作为最早可能编码时间的帧画面F5的帧时期中生成P-画面P1,其中帧画面F5的帧时期是在帧画面F4之后的帧时期。通过使用I-画面I1进行前向预测编码生成P-画面P1。在以上述方式生成P-画面P1之后,通过使用P-画面P1和I-画面I1进行双向预测编码生成B-画面B1和B2。因此,与P-画面P1一样,获得B-画面B1和B2的最早时间也是帧画面F5的帧时期。
然后,编码B-画面B3和B4以及P-画面P2。通过使用P-画面P1进行前向预测编码而生成P-画面P2,并通过使用P-画面P1和P2进行双向预测编码而生成B-画面B3和B4。因此,在与帧画面F8对应的帧时期中获得B-画面B3和B4以及P-画面P2的图像,其中帧画面F8是跟随在获得了B-画面B1和B2以及P-画面P1的编码画面的帧时期之后的三帧。
通过根据上述过程进行编码处理,在图3的部分(c)所示的时间处获得了I-画面、P-画面和B-画面的编码画面。
当在图3的部分(c)所示的时间处获得了编码画面时,在图4的部分(d)所示的时间处发送该编码画面(压缩视频信号)。
例如,参考图3的部分(c),虽然在帧画面F2的时间处获得I-画面I1,但在帧画面F5的时间处生成要接下来发送的P-画面P1,该帧画面F5是I-画面I1之后的三帧。因此,在对应于帧画面F4的帧时期中发送I-画面I1的信号,其中帧画面F4是帧画面F5之前的一帧,接着在对应于帧画面F5的帧时期中发送P-画面P1。在与帧画面F6和F7对应的帧时期中,依次发送B-画面B1和B2。在与帧画面F8对应的随后的帧时期中,发送P-画面P2,并在随后的帧时期中依次发送B-画面B3和B4,其中,在每个帧时期中发送每个B-画面B3和B4。从而,根据解码处理,通过按照与图3的部分(a)和(b)中所示的帧画面相对应的画面的模式改变编码画面的顺序,发送编码画面。
为了易于说明,假定没有由于通过网络通信链路3发送和接收数据而引起的时间延迟。也就是,在图3所示的示例中,电视接收机2在图3的部分(d)所示的时间处接收并输入压缩视频信号作为传输数据。
如果电视接收机2在图3的部分(d)所示的时间处获得了压缩视频信号,即,编码画面,则对这些编码画面进行解码。图3的部分(e)示出了根据图3的部分(b)所示的编码画面的排列模式的、图3的部分(a)所示的帧画面的恢复(解调)时序。
如图3的部分(e)所示,解码后,根据类似于图3的部分(a)和(b)所示的、帧画面和编码画面之间的对应关系模式而生成帧画面。在这种情况下,例如,可通过参考之前发送的I-画面I1和P-画面P1来恢复B-画面B1。因此,在例如帧画面F7的帧时期中完成使用B-画面B1的帧画面解码处理,其中帧画面F7是接收并获得了B-画面B1的帧画面F6的帧时期之后的一帧。由于将对应于紧接在基于B-画面B1的帧画面之前的帧来解码I-画面I1,所以在帧画面F6的帧时期中输出通过解码I-画面I1而获得的帧画面,其中帧画面F6是紧接在帧画面F7之前的一帧。以此方式,对组合视频信号(通过组合源视频信号和源图形信号而获得的信号)进行运动图像压缩编码处理和解码处理。
再次参考图3,在生成基带帧画面F1的时间和完成帧画面F1的解码的时间之间出现了被表示为延迟时间td的时间延迟。从之前的描述中可以理解,由于B-画面的编码处理和B-画面的解码处理,不可避免地出现延迟时间。
这种延迟在以下情况下是可以接受的:例如,仅发送由视频装置1从介质中再现的视频内容或由调谐器接收的广播内容等的图像的视频信号(即,源视频信号)。
但是,如同此情况,如果将源视频信号和源图形信号组合为GUI图像,则延迟时间表现为对于在GUI图像上所进行的操作的延迟响应时间。
作为示例,假定视频装置1响应于检测到输入操作信号,在图3所述的帧画面F1的时间处生成与具有新的图像内容的GUI图像对应的图形信号。从之前的描述中可以理解,解码并在电视接收机上显示帧画面F1的最早时间是帧画面F6的时间。因此,如果用户在与帧画面F1对应的时间处在GUI图像上操作,那么由该操作引起的GUI图像的变化出现在与帧画面F6对应的时间处,其中帧画面F6是帧画面F1之后的五帧。因此,用户感觉GUI图像的变化对该操作的反应很慢,并且受到阻碍。不幸的是,这给用户带来了用户不友好的印象。
本实施例提供了如下文所述的结构,以克服可能由于通过网络发送GUI图像而引起的、对在GUI图像上所进行的操作的延迟响应。
首先,将参考图4描述根据本实施例的由视频装置1执行来通过网络发送视频内容和GUI图像的内部处理过程。
如在图2所示的情况下,要发送的源信号包括与GUI图像对应的基带源图形信号,以及与视频内容对应的一对基带源视频信号和源音频信号。在上述图2所示的示例中,对通过组合源视频信号与源图形信号而获得的组合视频信号进行运动图像压缩编码处理。根据本发明的实施例,另一方面,仅对源视频信号进行运动图像压缩编码处理。通过运动图像压缩编码处理而获得的压缩视频信号和通过对源音频信号进行音频压缩编码处理而获得的压缩音频信号经历基于时分复用的复用处理。得到的复用数据包括形成视频内容的视频信号和音频信号。与图2所示的示例不同,不包括GUI图像等的图形信号。通过网络通信链路3,将得到的数据作为传输数据而发送到电视接收机2。
源图形信号经历使用特定于图形信号的算法的编码处理,并通过网络通信链路3,将得到的编码图形数据作为与以上内容数据分离的传输数据而发送到电视接收机2。
因此,在本实施例中,对应于GUI图像(副图像)的图形信号不与对应于视频内容的图像的视频信号进行组合,并且该图形信号经历与用于传输的视频信号的编码处理不同的编码处理。
下面将参考图5描述用于编码图形数据的图形特定编码处理和解码处理的示例。
首先,在图5的部分(a)中,由帧画面示出具有代表GUI图像的图像内容的源图形信号。示出9个连续的帧作为帧画面F1到F9。在这种情况下,GUI图像的内容随时间而改变,因此使用三个连续帧(帧画面F1到F3)显示GUI图像1,之后是使用两个连续帧(图像F4和F5)显示的不同于GUI图像1的GUI图像2,然后使用四个连续帧(帧画面F6到F9)显示不同于GUI图像1和2的GUI图像3。
根据本实施例,在图5的部分(a)所示的源图形信号的帧画面结构中,以图5的部分(b)所示的方式进行图形特定编码处理。首先,图5的部分(a)所示的帧画面F1经历用于编码静止图像的预定压缩编码处理(静止图像压缩编码处理),以在例如帧画面F1之后的帧画面F2的时间处生成具有GUI图像的图像内容的压缩静止图像数据单元Gr1。
在帧画面F2之后的帧画面F3的时间处,确定帧画面F2的图像内容和帧画面F2之前的帧画面F1的图像内容之间是否存在匹配。帧画面F1和F2具有GUI图像1的图像内容,因此具有相同的图像内容。因此,确定帧画面F2和帧画面F1之间存在匹配。基于该确定结果,在压缩静止图像数据单元Gr1之后的帧时期(帧画面F3的时期)中,生成指示当前帧(对应于帧画面F2)的图像内容与压缩静止图像数据单元Gr1的图像内容一致的一致图像内容指令信息项Ds1-1。
在每个帧时期,进行上述的两个连续帧画面是否一致的比较。因此,在帧画面F4的随后的时间处,比较帧画面F2和F3,并作为结果,确定两帧具有相同的图像内容。生成指示帧画面F3的图像内容也与压缩静止图像数据单元Gr1的图像内容一致的一致图像内容指令信息项Ds1-2。
在随后的帧时期(帧画面F5的时期)中,确定在帧画面F3和帧画面F4之间是否存在匹配。由于帧画面F3形成GUI图像1并且帧画面F4形成GUI图像2,所以确定在它们之间没有发现匹配。以这种方式,在检测到帧画面的改变的帧时期中,生成代表改变的帧画面的压缩静止图像数据。也就是,代表帧画面F4的源图形信号(帧画面数据)经历静止图像压缩编码,以生成具有GUI图像2的图像内容的压缩静止图像数据单元Gr2。
在本实施例中,如上所述,在源图形信号的帧画面的图像内容发生改变的帧时期中,生成具有改变的帧画面的图像内容的压缩静止图像数据,并且在改变的帧画面的图像内容连续的时期内,在每个帧时期,生成指示与紧邻的前一帧的图像内容相同的一致图像内容指令信息Ds。采用这种编码过程,在图5所示的示例中,在每个帧时期中生成压缩静止图像数据或一致图像内容指令信息,因此按以下顺序生成:压缩静止图像数据单元Gr1、一致图像内容指令信息项Ds1-1、一致图像内容指令信息项Ds1-2、压缩静止图像数据单元Gr2、一致图像内容指令信息项Ds2-1(指示与压缩静止图像数据单元Gr2的图像内容相同)、压缩静止图像数据单元Gr3、一致图像内容指令信息项Ds3-1、一致图像内容指令信息项Ds3-2等。
根据本实施例的图形特定编码处理基于上述过程。
根据基于上述过程的图形特定编码处理,通过将与给定的帧时期(其中图形信号的内容发生改变)关联的压缩静止图像数据单元和指示与图形信号的前一帧的图像内容相同的一致图像内容指令信息项进行组合,来生成编码数据。此外,如果指示与压缩静止图像数据单元的内容相同的一个或多个一致图像内容指令信息项被当作是一段信息,那么可以把这段信息用作被配置为使得将与压缩静止图像数据单元的内容相同的内容连续的时期(时长)指定为连续帧时期的信息(连续性指令信息)。
作为编码数据的压缩静止图像数据和图5的部分(a)所示的一致图像内容指令信息的序列还示出了通过网络将编码数据从视频装置1发送到电视接收机2的时间。在这种情况下,根据本实施例的图形信号的编码数据用于在例如与帧时期对应的每个时间间隔处、顺序地发送压缩静止图像数据或一致图像内容指令信息。例如,一帧的压缩静止图像数据对应于运动图像压缩编码处理中的I-画面,并且一致图像内容指令信息仅仅指示与前一帧画面的图像内容相同,得到比编码画面等小得多的数据大小。也就是,根据本实施例的图形信号的编码数据(传输数据)的比特率相当低。因此,即使以图4所示的方式用高比特率在相同的时间发送图形信号的编码数据来作为视频内容的数据,也能为视频内容数据确保每单元时间的足够量的数据传递。相反,也为图形信号的编码数据确保了每单元时间的数据传递量。
图5的部分(c)示出了当在图5的部分(b)所示的时间处被发送到电视接收机2的编码图形数据也在图5的部分(b)所示的时间处由电视接收机2接收时的解码时序。
即,在解码处理中,首先,解码在图5的部分(b)中所获得的压缩静止图像数据单元Gr1,以获得图形信号,作为具有GUI图像1的图像内容的帧画面F1。在该示例中,解码压缩静止图像数据单元Gr1并获得作为帧画面F1的图形信号的时间是获得压缩静止图像数据单元Gr1的帧时期。
电视接收机2接收并获得压缩静止图像数据单元Gr1,之后是一致图像内容指令信息项Ds1-1,作为编码图形数据。由于获取了一致图像内容指令信息项Ds1-1,因而电视接收机2确定在帧画面F1之后的帧画面F2的图像内容与帧画面F1的图像内容相同。因此,电视接收机2生成GUI图像1的图形信号,作为帧画面F2,其与帧画面F1相同。在随后的帧时期中,由于获取了一致图像内容指令信息项Ds1-2,因而电视接收机2确定帧画面F3的图像内容也与帧画面F2的图像内容相同,并生成GUI图像1的图形信号,其与帧画面F1和F2相同。从而,连续生成具有GUI图像1的图像内容的帧画面数据单元(图形信号)作为帧画面F1、F2和F3。
在随后的帧时期中,接收并获得压缩静止图像数据单元Gr2。解码并输出该压缩静止图像数据单元Gr2,作为帧画面F4。与上述过程类似,在每个帧时期中,当获得了一致图像内容指令信息Ds时,生成具有与前一帧的图像内容相同的图像内容的帧画面数据,并解码和输出新的压缩静止图像数据作为帧画面数据。作为解码处理的结果,如图5的部分(c)所示,获得了解码的基带图形信号,因而使用帧画面F1到F3代表GUI图像1的图像内容,使用帧画面F4和F5代表GUI图像2的图像内容,并使用帧画面F6和其他帧画面代表GUI图像3的图像内容。
根据本实施例的电视接收机2组合以图5的部分(c)所示的方式获得的基带图形信号与由不同的解码处理系统解码的视频内容的基带视频信号。将得到的组合视频信号显示为图像。
由图5所示的图形信号的编码和解码处理引起的延迟时间td,即,在生成给定的帧画面作为源图形信号的时间和解码该给定的帧画面并输出的时间之间的时间差是对应于两帧的时期。图5所示的延迟时间td比图3所示的延迟时间td短得多。
由于延迟时间td的减少,响应于视频装置1的操作而迅速改变或切换GUI图像。因此,例如,消除或降低了对用户操作GUI图像的阻碍,得到了使用容易度的改善。
在图4所示的过程中,视频内容和GUI图像由不同的系统编码、然后发送。因此,GUI图像的图形信号不适合于与视频内容的视频信号进行同步回放。在数据广播中,可以根据与视频内容对应的主广播节目的进展来改变广播的内容。因此,如果通过图4所示的过程发送数据广播GUI图像,则相对于作为主节目的视频内容中的图像的进展,在电视接收机2上显示的图像上的数据广播GUI图像的显示时序可能发生移位。
但是,在当前条件下,在大多数情况中,可以不根据主节目图像的图像变化来改变数据广播内容。因此,在实际使用中,即使数据广播GUI图像的显示时序相对于主节目图像以上述方式发生移位,这也不阻碍用户且也不会出现问题。例如,如果根据参考图2所述的过程,将视频内容的源视频信号与源图形信号组合,则数据广播GUI图像的显示切换与所显示的主节目图像的进展同步。但是,如果要响应于对数据广播GUI图像进行的操作而进行显示切换,如参考图3所述,则对该操作的响应很慢。在实际使用中,用户对这种响应于操作的图像变化的延迟更敏感,在本实施例中首先克服了该延迟。
接下来,将参考图6和图7,描述根据参考图4和图5所描述的本实施例的、用于实现图形图像的编码传输和解码处理的视频装置1和电视接收机2的示例结构。图6示出了视频装置1的示例结构,并且图7示出了电视接收机2的示例结构。
首先,将描述图6所示的视频装置1的结构。
视频装置1具有用于接收预定广播载波的广播波并选择电视频道的电视调谐器功能。通过调谐器单元12等实现电视调谐器功能。将通过天线11接收预定广播载波的广播波而获得的信号(接收信号)输入到调谐器单元12。例如,调谐器单元12根据控制单元27的频道选择控制(频道指定)进行频道选择处理,以从接收信号中获得与指定的广播站(频道)对应的接收信号分量。例如,控制单元27通过选择响应于使用操作单元28进行的频道选择操作而指定的频道,来进行控制。
将调谐器单元12获得的指定频道的接收信号分量输入到解调器13。解调器13使用与在发送时使用的调制方案对应的解调方案来解调输入信号,以获得解调的接收信号。解调的接收信号形成了通过接收广播所获得的视频内容,包括使用预定方案压缩编码的视频信号和音频信号,并且解调的接收信号是复用了视频信号和音频信号的数据。当使用数据广播来广播广播视频内容时,还在解调的接收信号中复用数据广播的信号(数据广播内容数据)。
首先将解调的接收信号传递到视频存储单元14,作为广播的记录数据。
视频存储单元14能够将数据记录在诸如当前情况下的硬盘驱动器(HDD)或数字多用盘(DVD)或下一代DVD中的光盘介质的、具有相当大存储容量的存储介质中,并从中再现数据。视频存储单元14根据控制单元27的控制,将所传递的记录数据(解调的接收信号)写入存储介质中,并以例如以内容文件为单元来管理记录数据的预定形式存储该记录数据。因此,在本实施例的视频装置1中,以用于存储的文件格式来管理通过接收电视广播而获得的视频内容的数据。
视频存储单元14还响应于使用操作单元28等对内容文件进行的再现指令操作,根据控制单元27的控制,以上述方式读取存储介质中存储的内容文件的数据,并输出所读取的数据作为再现数据。再现数据输入到解复用器15。
解复用器15接收从解调器13输出的解调的接收信号,即,通过接收电视广播实时获得的视频内容的数据,或由视频存储单元14以上述方式读取的视频内容(内容文件)的数据。从之前的描述中可以理解,无论接收到哪些视频内容,形成视频内容的视频信号(以压缩编码的形式)和音频信号(以压缩编码的形式)都在所接收的视频内容的数据中复用,并且也可以复用数据广播内容数据。
因此,解复用器15解复用所接收的视频内容数据,以分别提取视频信号和音频信号、以及数据广播内容数据(如果还复用了数据广播内容数据)。将所提取的视频信号、音频信号和数据广播内容数据分别输出到视频解码单元16、音频解码单元17和图形生成单元18。
视频解码单元16进行与施加到输入视频信号上的压缩编码处理对应的解码(展开)处理,以获取未压缩的基带视频信号。
音频解码单元17也进行与施加到输入音频信号上的压缩编码处理对应的解码(展开)处理,以获取未压缩的基带音频信号。
图形生成单元18被配置为生成具有通过再现输入的数据广播内容数据而获得的图像内容的基带视频信号。即,图形生成单元18被配置为生成数据广播GUI图像的视频信号。
如前述,数据广播内容数据具有以诸如BML的置标语言来编写的内容形式。从而,图形生成单元18实现作为BML浏览器的功能,并且解译作为数据广播内容数据而输入的BML文件,以再现该数据广播内容数据。作为再现的结果,例如,获得了数据广播内容数据的图像数据(帧画面数据),并且基于该图像数据生成了视频信号。
图形生成单元18还被配置为生成自生成GUI图像的视频信号。即,图形生成单元18被配置为根据控制单元27的控制,生成具有期望的自生成GUI图像的图像内容的图像数据(帧画面数据)。基于该生成的帧画面数据生成视频信号。
如上所述,配置根据本实施例的视频装置1,使得可通过网络通信链路3或根据预定的视频和音频信号输入/输出标准,将视频和音频信号输出到外部装置。
当根据预定的视频和音频信号输入/输出标准来输出视频和音频信号时,将由视频解码单元16生成的基带视频信号(主图像视频信号)输出到组合单元22。如果图形生成单元18也生成了视频信号(GUI图像视频信号),则将该视频信号也输出到组合单元22。
当将来自图形生成单元18的GUI图像视频信号与来自视频解码单元16的主图像视频信号一起输入时,组合单元22将GUI图像视频信号与主图像视频信号组合,并将得到的组合视频信号输出到视频输出单元24。
将音频解码单元17获得的基带音频信号输出到音频输出单元25。
根据预定的视频和音频信号输入/输出标准,视频输出单元24和音频输出单元25彼此成对,并配有兼容该视频和音频信号输入/输出标准的输出端,其中输入的视频和音频信号被输出到该输出端。例如,视频输出单元24的输出端和音频输出单元25的输出端连接到兼容该视频和音频信号输入/输出标准的外部显示监视器的输入端。因此,在外部显示监视器的屏幕上显示从视频输出单元24输出的视频信号的图像,并通过与外部显示监视器连接的扬声器等输出从音频输出单元25输出的音频信号的声音,以便与输出图像同步地回放该声音。
当根据本实施例、通过网络通信链路3输出视频和音频信号时,由视频解码单元16和音频解码单元17获得的基带视频信号和音频信号、以及由图形生成单元18获得的GUI图像的视频信号(图形信号)分别被当作源视频信号、源音频信号和源图形信号,并根据图4所示的过程来处理。
在根据本实施例的视频装置1中,将视频解码单元16获得的视频信号输入到视频编码单元19,并将音频解码单元17获得的音频信号输入到音频编码单元20。将图形生成单元18获得的视频信号输入到图形编码单元21。
视频编码单元19对输入的视频信号进行预定的压缩编码处理。该压缩编码处理对应于对图4所示的源视频信号进行的运动图像压缩编码处理。
音频编码单元20对输入的音频信号进行与对图4所示的源音频信号进行的音频压缩编码处理对应的编码处理。
复用器23复用由视频编码单元19生成的压缩编码视频信号和由音频编码单元20生成的压缩编码音频信号,并将复用了视频信号和音频信号的视频内容数据输出到网络接口26。
图形编码单元21对输入的图形信号(形成GUI图像的基带视频信号)进行参考图5的部分(a)和(b)所述的编码处理,以获得编码图形数据。如上参考图5所述,该编码图形数据包括:帧画面数据,对应于GUI图像的内容改变的帧时间,具有改变的GUI图像的内容;以及一致图像内容指令信息,对应于GUI图像的内容不改变的每个帧。
将生成的编码图形数据作为与视频内容数据分离的传输数据输出到网络接口26,而不与形成视频内容数据的压缩视频信号和音频信号复用。
网络接口26由按照经由网络通信链路3的通信协议的硬件或软件实现,并且被配置为根据例如控制单元27(应用)的控制,通过网络通信链路3进行通信。
当以上述方式将视频内容数据和编码的图形数据(GUI图像数据)输入到网络接口26时,网络接口26对输入数据进行预定的判优处理等,例如,使得可对输入数据确保每单元时间内的期望数据传递量,并通过分组传输,经由网络通信链路3将结果发送到传输目标客户机(电视接收机2)。
例如,在实际的硬件实现中,控制单元27包括微型计算机,该微型计算机包括中央处理单元(CPU)、随机存取存储器(RAM)、只读存储器(ROM)等,并且控制单元27控制视频装置1的整体操作。
例如,操作单元28主要包括:安装在视频装置1的主体上的各种类型的处理机(handler);以及操作信号输出单元,其生成与对每个处理机进行的操作对应的操作信号,并将操作信号输出到控制单元27(CPU)。如果使用遥控器控制视频装置1的操作,则操作单元28还包括遥控器、以及在主体上接收从遥控器发送的操作代码信号并将其作为操作信号而输出到控制单元27的接收器。
接下来,将描述图7中所示的电视接收机2的结构。
同样在电视接收机2中,将通过天线31接收预定广播载波的广播波而获得的接收信号输入到调谐器单元32。例如,调谐器单元32根据控制单元43的频道选择控制(频道指定)进行频道选择处理,以从接收信号中获得与指定广播站(频道)对应的接收信号分量,并将该接收信号分量输出到解调器33。
解调器33使用与在发送时所使用的调制方案对应的解调方案,来解调输入信号,以获得解调的接收信号。
解调的接收信号具有以下形式:例如,其中复用了压缩编码的视频信号和音频信号。解复用器34从解调的接收信号中分开提取压缩编码视频信号和压缩编码音频信号,并将分离的视频信号和音频信号分别输出到视频解码单元35和音频解码单元39。
解复用器34还被配置为接收通过网络通信链路3从网络接口所接收的视频内容的数据,并将其分离为视频信号和音频信号。在下面描述该操作。
视频解码单元35对输入的视频信号进行解码(展开)处理,以生成未压缩的基带视频信号。将该基带视频信号输出到组合单元36。
当以下述方式将作为GUI图像的基带视频信号(图形信号)从图形解码单元42输入到组合单元36时,组合单元36将图形信号和与从视频解码单元35输入的主图像对应的视频信号进行组合,然后将得到的视频信号输出到显示驱动单元37。
显示驱动单元37使用从组合单元36输入的视频信号,控制显示单元38的显示驱动。在显示单元38的屏幕上显示被输入到显示驱动单元37的视频信号的图像。
将由解复用器34分开提取的音频信号输出到音频解码单元39,并解码(展开)成基带音频信号。将该基带音频信号输出到音频输出单元40。
音频输出单元40被配置为在放大输入的音频信号之前对其进行例如音质调整和其他信号处理,并使用放大的信号驱动扬声器以输出声音。
从之前的描述中可以理解,电视接收机2被配置为首先接收电视广播并选择电视频道、以及输出得到的视频信号和音频信号作为可以由用户观看和收听的图像和声音。
例如,控制单元43包括微型计算机,该微型计算机包括CPU、RAM、ROM等,并且控制单元43控制电视接收机2的整体操作。
例如,操作单元44主要包括:安装在电视接收机2的主体上的各种类型的处理机;以及操作信号输出单元,其生成与对每个处理机进行的操作对应的操作信号,并将该操作信号输出到控制单元43(CPU)。如果使用遥控器控制电视接收机2的操作,则操作单元44还包括遥控器、以及在主体上接收从遥控器发送的操作代码信号并将其作为操作信号输出到控制单元43的接收器。
下文中将讨论图7中所示的电视接收机2的结构,其中,通过网络通信链路3从根据图6所示的本实施例的视频装置1发送的视频内容数据和编码图形数据(GUI图像数据)由电视接收机2接收和获得,并作为图像和声音而输出。
电视接收机2配有网络接口41,以允许根据例如控制单元43(应用)的控制、通过网络通信链路3进行通信。当网络接口41接收到包含从视频装置1发送的视频内容数据的分组时,从接收到的分组中提取视频内容数据,并通过串联(concatenation)来恢复。将得到的数据输出到解复用器34。在接收到数据后,解复用器34以上述方式从输入的视频内容数据中分开提取视频信号和音频信号,并将提取的视频信号和音频信号分别输出到视频解码单元35和音频解码单元39。随后的处理以及相关信号和数据流与以上描述的类似。
当从视频装置1发送编码图形数据时,网络接口41接收包含该编码图形数据以及视频内容数据的分组。网络接口41从编码图形数据的分组中提取编码图形数据的基本部分用于恢复,并将结果输出到图形解码单元42。
图形解码单元42按以上参考图5所述的方式解码输入的编码图形数据,以生成指示GUI图像的基带视频信号(图形信号)。将生成的图形信号输出到组合单元36。
组合单元36将图形信号与从视频解码单元35输入的主图像视频信号进行组合,并将得到的组合信号输出到显示驱动单元37。
作为对电视接收机2的网络接口41接收和获得的视频内容数据和编码图形数据进行的上述处理的结果,在显示单元38上显示图像,其中由视频装置1生成的GUI图像(自生成GUI图像或数据广播GUI图像)被叠加在从视频装置1发送的视频内容的图像(主图像)上。注意,当用户以上述方式在所显示的GUI图像上操作时,响应于该操作,图像内容迅速发生改变。
根据本实施例,大概有两种允许通过网络与电视接收机2连接的视频装置1检测在从视频装置1发送并在电视接收机2上显示的GUI图像上进行的操作的技术。
在第一种技术中,用户使用与视频装置1关联的操作单元在GUI图像上操作。例如,用户使用与视频装置1一起提供的遥控器来在电视接收机2所显示的GUI图像上操作。在实际使用中,响应于在遥控器上进行的操作,操作指令信号从遥控器无线地发送,并由视频装置1接收。当接收到该操作指令信号,视频装置1检测在GUI图像上进行的操作。
在第二种技术中,将符合能够通过网络控制视频装置1的协议的程序(视频控制程序)加载到电视接收机2中。然后,用户使用与电视接收机2关联的操作单元在GUI图像上操作。在这种情况下,例如,用户操作安装与电视接收机2一起提供的遥控器上的预定处理机,以在电视接收机2所显示的GUI图像上操作。当响应于该操作而将操作指令信号从遥控器无线地发送并由电视接收机2接收时,电视接收机2根据视频控制程序将所接收的操作指令信号转换成预定命令,并通过网络通信链路3将该命令发送到视频装置1。当接收到该命令,视频装置1检测在GUI图像上所进行的操作。
由沿着信号处理流的功能块代表图6和图7中所示的视频装置1和电视接收机2的主要元件,并且在实际的硬件实现中,视频装置1和电视接收机2可以不必具有图6和图7所示的结构。可以使用不同于图6和图7所示的功能块,并且视频装置1和电视接收机2的元件不限于图示的元件。
作为示例,在图6所示的视频装置1(图像信息发送装置)的结构中,在由视频编码单元19和音频编码单元20进行压缩编码以进行网络传输之前,由视频解码单元16和音频解码单元17使用与压缩编码方案对应的解码方案等来解码由调谐器单元12接收和获得的视频和音频信息、以及从视频存储单元14读取的内容文件。但是,例如,如果用于由调谐器单元12接收和获得的视频和音频信息的压缩编码方案与电视接收机2中所采用的解码方案兼容,则可以配置视频装置1,使得通过网络发送由调谐器单元12接收和获得的视频和音频信息,而无需内部解码然后再编码。
在上述实施例中,要编码且与视频内容数据分开发送的图形信号包括由视频装置1自身生成的自生成GUI图像、以及基于与电视广播一起接收的数据广播数据的数据广播GUI图像。根据本发明的实施例,可编码和发送任一GUI图像。
在上述实施例中,生成压缩静止图像数据和一致图像内容指令信息(连续指令信息)作为编码图形数据,其中压缩静止图像数据代表在其中开始了具有新的图像内容的GUI图像的帧画面,一致图像内容指令信息指示对于每个帧时期的与GUI图像相同的内容。即,一致图像内容指令信息指示以帧为单位的相同的GUI图像。但是,该单位不限于帧,并且例如,一致图像内容指令信息可以基于预定的单位时间来指示相同的GUI图像。
此外,在根据上述实施例的图像传输系统中,视频装置用作发送主图像的视频信号和GUI图像的图形信号的装置(图像信息发送装置),电视接收机用作接收那些信号的装置(图像信息接收装置)。但是,装置的组合不限于视频装置和电视接收机。
本领域的技术人员应该理解,在所附权利要求或其等同物的范围内,依据设计要求和其他因素,可进行各种修改、组合、子组合和变更。
相关申请的交叉引用
本发明包含了与于2006年11月24日在日本特许厅提交的日本专利申请JP2006-317212相关的主题,其全部内容通过引用合并于此。
Claims (9)
1.一种图像信息传输系统,包括:
图像信息发送装置;以及
图像信息接收装置,
所述图像信息发送装置包括
图像数据获取部件,用于获取经历了包括双向预测编码处理的预定压缩编码处理的主图像传输数据,作为用于发送主图像视频信号的传输数据,该主图像视频信号是具有代表主图像的内容的运动图像的视频信号,
图像数据生成部件,用于生成副图像传输数据,所述副图像传输数据是用于发送将要在与显示主图像的屏幕相同的屏幕上显示的副图像的传输数据,并且所述副图像传输数据由压缩静止图像数据和连续性指令信息形成,所述压缩静止图像数据具有代表用作图形用户界面的图形用户界面图像的图像内容,并且是与所述图形用户界面图像的一帧相对应的压缩编码的静止图像数据,所述连续性指令信息是指示如下时期的重要信息:在该时期中与所述压缩静止图像数据的图像内容相同的图像内容连续,以及
发送部件,用于通过预定的网络通信链路,将所述主图像传输数据和副图像传输数据发送到所述图像信息接收装置,
所述图像信息接收装置包括
接收部件,用于接收通过所述网络通信链路所发送的所述主图像传输数据和副图像传输数据,
第一解码部件,用于对由所述接收部件所接收的主图像传输数据进行与压缩编码处理相对应的解码处理,以获取主图像视频信号,
第二解码部件,用于使用形成由所述接收部件所接收的副图像传输数据的所述压缩静止图像数据和所述连续性指令信息来进行解码处理,以生成副图像视频信号,该副图像视频信号是所述副图像的视频信号,以及
视频信号输出部件,用于组合由所述第一解码部件所获取的主图像视频信号和由所述第二解码部件所获取的副图像视频信号,以获取组合视频信号,并以可用于显示图像的形式来输出该组合视频信号。
2.一种图像信息发送装置,包括:
图像数据获取部件,用于获取经历了包括双向预测编码处理的预定压缩编码处理的主图像传输数据,作为用于发送主图像视频信号的传输数据,该主图像视频信号是具有代表主图像的内容的运动图像的视频信号;
图像数据生成部件,用于生成副图像传输数据,所述副图像传输数据是用于发送将要在与显示主图像的屏幕相同的屏幕上显示的副图像的传输数据,并且所述副图像传输数据由压缩静止图像数据和连续性指令信息形成,所述压缩静止图像数据具有代表用作图形用户界面的图形用户界面图像的图像内容,并且是与所述图形用户界面图像的一帧相对应的压缩编码的静止图像数据,所述连续性指令信息是指示如下时期的重要信息:在该时期中与所述压缩静止图像数据的图像内容相同的图像内容连续;以及
发送部件,用于通过预定的网络通信链路,将所述主图像传输数据和副图像传输数据发送到与所述网络通信链路连接的图像信息接收装置,所述图像信息接收装置被配置为接收和解码所述主图像传输数据和副图像传输数据,组合解码的主图像传输数据和解码的副图像传输数据以获取组合图像数据,并输出所述组合图像数据。
3.一种图像信息接收装置,包括:
接收部件,用于接收由图像信息发送装置生成并通过预定的网络通信链路发送的主图像传输数据和副图像传输数据,所述主图像传输数据是用于发送主图像视频信号的传输数据,该主图像视频信号是具有代表主图像的内容的运动图像的视频信号,并且所述主图像传输数据是经历了包括双向预测编码处理的预定压缩编码处理的数据,所述副图像传输数据是用于发送将要在与显示主图像的屏幕相同的屏幕上显示的副图像的传输数据,并且所述副图像传输数据由压缩静止图像数据和连续性指令信息形成,所述压缩静止图像数据具有代表用于图形用户界面的图形用户界面图像的图像内容,并且是与所述图形用户界面图像的一帧相对应的压缩编码的静止图像数据,所述连续性指令信息是指示如下时期的重要信息:在该时期中与所述压缩静止图像数据的图像内容相同的图像内容连续;
第一解码部件,用于对由所述接收部件所接收的主图像传输数据进行与压缩编码处理相对应的解码处理,以获取主图像视频信号,
第二解码部件,用于使用形成由所述接收部件所接收的副图像传输数据的所述压缩静止图像数据和连续性指令信息来进行解码处理,以生成副图像视频信号,该副图像视频信号是所述副图像的视频信号;以及
视频信号输出部件,用于组合由所述第一解码部件所获取的主图像视频信号和由所述第二解码部件所获取的副图像视频信号,以获取组合视频信号,并以可用于显示图像的形式来输出该组合视频信号。
4.一种图像信息传输系统中的图像信息传输方法,该图像传输系统包括图像信息发送装置和图像信息接收装置,所述方法包括步骤:
获取经历了包括双向预测编码处理的预定压缩编码处理的主图像传输数据,作为用于发送主图像视频信号的传输数据,该主图像视频信号是具有代表主图像的内容的运动图像的视频信号,
在所述图像信息发送装置中,生成副图像传输数据,所述副图像传输数据是用于发送将要在与显示主图像的屏幕相同的屏幕上显示的副图像的传输数据,并且由压缩静止图像数据和连续性指令信息形成,所述压缩静止图像数据具有代表用作图形用户界面的图形用户界面图像的图像内容,并且是与图形用户界面图像的一帧相对应的压缩编码的静止图像数据,所述连续性指令信息是指示如下时期的重要信息:在该时期中与所述压缩静止图像数据的图像内容相同的图像内容连续;
在所述图像信息发送装置中,通过预定的网络通信链路将所述主图像传输数据和副图像传输数据发送到所述图像信息接收装置;
在所述图像信息接收装置中,对所接收的主图像传输数据进行与压缩编码处理相对应的解码处理,以获取所述主图像视频信号;
在所述图像信息接收装置中,使用形成所接收的副图像传输数据的所述压缩静止图像数据和连续性指令信息进行解码处理,以生成副图像视频信号,该副图像视频信号是所述副图像的视频信号;以及
在所述图像信息接收装置中,组合所获取的主图像视频信号和所生成的副图像视频信号,以生成组合视频信号,并以可用于显示图像的形式来输出所述组合视频信号。
5.一种图像信息发送方法,包括步骤:
获取经历了包括双向预测编码处理的预定压缩编码处理的主图像传输数据,作为用于发送主图像视频信号的传输数据,该主图像视频信号是具有代表主图像的内容的运动图像的视频信号;
生成副图像传输数据,所述副图像传输数据是用于发送将要在与显示主图像的屏幕相同的屏幕上显示的副图像的传输数据,并且由压缩静止图像数据和连续性指令信息形成,所述压缩静止图像数据具有代表用作图形用户界面的图形用户界面图像的图像内容,并且是与图形用户界面图像的一帧相对应的压缩编码的静止图像数据,所述连续性指令信息是指示如下时期的重要信息:在该时期中与所述压缩静止图像数据的图像内容相同的图像内容连续;
通过预定的网络通信链路将所述主图像传输数据和副图像传输数据发送到与该网络通信链路连接的图像信息接收装置,所述图像信息接收装置被配置为接收和解码所述主图像传输数据和副图像传输数据,组合解码的主图像传输数据和解码的副图像传输数据以获取组合图像数据,并输出所述组合图像数据。
6.一种图像信息接收方法,包括步骤:
接收由图像信息发送装置生成并通过预定的网络通信链路发送的主图像传输数据和副图像传输数据,所述主图像传输数据是用于发送主图像视频信号的传输数据,该主图像视频信号是具有代表主图像的内容的运动图像的视频信号,并且所述主图像传输数据是经历了包括双向预测编码处理的预定压缩编码处理的数据,所述副图像传输数据是用于发送将要在与显示主图像的屏幕相同的屏幕上显示的副图像的传输数据,并且所述副图像传输数据由压缩静止图像数据和连续性指令信息形成,所述压缩静止图像数据具有代表用于图形用户界面的图形用户界面图像的图像内容,并且是与所述图形用户界面图像的一帧相对应的压缩编码的静止图像数据,所述连续性指令信息是指示如下时期的重要信息:在该时期中与所述压缩静止图像数据的图像内容相同的图像内容连续;
对所接收的主图像传输数据进行与压缩编码处理相对应的解码处理,以获取主图像视频信号;
使用形成所接收的副图像传输数据的所述压缩静止图像数据和连续性指令信息来进行解码处理,以生成副图像视频信号,该副图像视频信号是副图像的视频信号;以及
组合所获取的主图像视频信号和所生成的副图像视频信号,以获取组合视频信号,并以可用于显示图像的形式来输出该组合视频信号。
7.一种图像信息传输系统,包括:
图像信息发送装置;以及
图像信息接收装置,
所述图像信息发送装置包括
图像数据获取单元,被配置为获取经历了包括双向预测编码处理的预定压缩编码处理的主图像传输数据,作为用于发送主图像视频信号的传输数据,该主图像视频信号是具有代表主图像的内容的运动图像的视频信号,
图像数据生成单元,被配置为生成副图像传输数据,所述副图像传输数据是用于发送将要在与显示主图像的屏幕相同的屏幕上显示的副图像的传输数据,并且所述副图像传输数据由压缩静止图像数据和连续性指令信息形成,所述压缩静止图像数据具有代表用作图形用户界面的图形用户界面图像的图像内容,并且是与所述图形用户界面图像的一帧相对应的压缩编码的静止图像数据,所述连续性指令信息是指示如下时期的重要信息:在该时期中与所述压缩静止图像数据的图像内容相同的图像内容连续,以及
发送单元,被配置为通过预定的网络通信链路将所述主图像传输数据和副图像传输数据发送到所述图像信息接收装置,
所述图像信息接收装置包括
接收单元,被配置为接收通过预定的网络通信链路发送的主图像传输数据和副图像传输数据,
第一解码单元,被配置为对由所述接收单元所接收的主图像传输数据进行与压缩编码处理对应的解码处理,以获取主图像视频信号,
第二解码单元,被配置为使用形成由所述接收单元所接收的副图像传输数据的压缩静止图像数据和连续性指令信息来进行解码处理,以生成副图像视频信号,该副图像视频信号是所述副图像的视频信号,以及
视频信号输出单元,被配置为组合由所述第一解码单元所获取的主图像视频信号和由所述第二解码单元所获取的副图像视频信号,以获取组合视频信号,并以可用于显示图像的形式来输出该组合视频信号。
8.一种图像信息发送装置,包括:
图像数据获取单元,被配置为获取经历了包括双向预测编码处理的预定压缩编码处理的主图像传输数据,作为用于发送主图像视频信号的传输数据,该主图像视频信号是具有代表主图像的内容的运动图像的视频信号;
图像数据生成单元,被配置为生成副图像传输数据,所述副图像传输数据是用于发送将要在与显示主图像的屏幕相同的屏幕上显示的副图像的传输数据,并且所述副图像传输数据由压缩静止图像数据和连续性指令信息形成,所述压缩静止图像数据具有代表用作图形用户界面的图形用户界面图像的图像内容,并且是与所述图形用户界面图像的一帧相对应的压缩编码的静止图像数据,所述连续性指令信息是指示如下时期的重要信息:在该时期中与所述压缩静止图像数据的图像内容相同的图像内容连续;以及
发送单元,被配置为通过预定的网络通信链路将所述主图像传输数据和副图像传输数据发送到与所述网络通信链路连接的图像信息接收装置,所述图像信息接收装置被配置为接收和解码所述主图像传输数据和副图像传输数据,组合解码的主图像传输数据和解码的副图像传输数据以获取组合图像数据,并输出所述组合图像数据。
9.一种图像信息接收装置,包括:
接收单元,被配置为接收由图像信息发送装置生成并通过预定的网络通信链路发送的主图像传输数据和副图像传输数据,所述主图像传输数据是用于发送主图像视频信号的传输数据,该主图像视频信号是具有代表主图像的内容的运动图像的视频信号,并且所述主图像传输数据是经历了包括双向预测编码处理的预定压缩编码处理的数据,所述副图像传输数据是用于发送在与显示主图像的屏幕相同的屏幕上将要显示的副图像的传输数据,并且所述副图像传输数据由压缩静止图像数据和连续性指令信息形成,所述压缩静止图像数据具有代表用于图形用户界面的图形用户界面图像的图像内容,并且是与所述图形用户界面图像的一帧相对应的压缩编码的静止图像数据,所述连续性指令信息是指示如下时期的重要信息:在该时期中与所述压缩静止图像数据的图像内容相同的图像内容连续;
第一解码单元,被配置为对由所述接收单元所接收的主图像传输数据进行与压缩编码处理对应的解码处理,以获取主图像视频信号;
第二解码单元,被配置为使用形成由所述接收单元所接收的副图像传输数据的所述压缩静止图像数据和连续性指令信息来进行解码处理,以生成副图像视频信号,该副图像视频信号是所述副图像的视频信号;以及
视频信号输出单元,被配置为组合由所述第一解码单元所获取的主图像视频信号和由所述第二解码单元所获取的副图像视频信号,以获取组合视频信号,并以可用于显示图像的形式来输出该组合视频信号。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP317212/06 | 2006-11-24 | ||
JP2006317212A JP2008131569A (ja) | 2006-11-24 | 2006-11-24 | 画像情報伝送システム、画像情報送信装置、画像情報受信装置、画像情報伝送方法、画像情報送信方法、画像情報受信方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN101188758A true CN101188758A (zh) | 2008-05-28 |
Family
ID=39480908
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA2007101693801A Pending CN101188758A (zh) | 2006-11-24 | 2007-11-26 | 图像信息传输系统和图像信息传输方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20080198930A1 (zh) |
EP (1) | EP1956848A3 (zh) |
JP (1) | JP2008131569A (zh) |
CN (1) | CN101188758A (zh) |
TW (1) | TW200830874A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102474624A (zh) * | 2009-08-04 | 2012-05-23 | 阿沃森特公司 | 用于静态和视频图像的远程观看的方法和系统 |
CN103297202A (zh) * | 2012-02-29 | 2013-09-11 | 华为技术有限公司 | 信道状态信息的处理方法及装置 |
CN110650328A (zh) * | 2019-09-20 | 2020-01-03 | 北京三快在线科技有限公司 | 一种图像传输的方法及装置 |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4775432B2 (ja) * | 2008-12-11 | 2011-09-21 | ソニー株式会社 | 送信装置、受信装置、通信システム、通信方法、及びプログラム |
KR101484280B1 (ko) * | 2009-12-08 | 2015-01-20 | 삼성전자주식회사 | 임의적인 파티션을 이용한 움직임 예측에 따른 비디오 부호화 방법 및 장치, 임의적인 파티션을 이용한 움직임 보상에 따른 비디오 복호화 방법 및 장치 |
JP2011188244A (ja) * | 2010-03-09 | 2011-09-22 | Sharp Corp | 映像コンテンツ再生装置、その制御方法、プログラム、及び記録媒体 |
JP2013126185A (ja) * | 2011-12-15 | 2013-06-24 | Fujitsu Ltd | 情報処理装置、画像送信方法及び画像送信プログラム |
JP5761007B2 (ja) * | 2011-12-20 | 2015-08-12 | 富士通株式会社 | 情報処理装置、画像送信方法及び画像送信プログラム |
JPWO2014017003A1 (ja) * | 2012-07-25 | 2016-07-07 | 日本電気株式会社 | 更新領域検出装置 |
KR102284721B1 (ko) * | 2014-02-28 | 2021-08-03 | 삼성전자주식회사 | 무선 통신 시스템에서 어플리케이션 데이터를 디스플레이하기 위한 방법 및 장치 |
CN106028097A (zh) * | 2015-12-09 | 2016-10-12 | 展视网(北京)科技有限公司 | 一种车载终端影视播放设备 |
US10496335B2 (en) * | 2017-06-30 | 2019-12-03 | Intel Corporation | Method and apparatus for performing multi-object transformations on a storage device |
US10971161B1 (en) | 2018-12-12 | 2021-04-06 | Amazon Technologies, Inc. | Techniques for loss mitigation of audio streams |
US11336954B1 (en) | 2018-12-12 | 2022-05-17 | Amazon Technologies, Inc. | Method to determine the FPS on a client without instrumenting rendering layer |
US11368400B2 (en) | 2018-12-13 | 2022-06-21 | Amazon Technologies, Inc. | Continuously calibrated network system |
US11252097B2 (en) | 2018-12-13 | 2022-02-15 | Amazon Technologies, Inc. | Continuous calibration of network metrics |
US11356326B2 (en) | 2018-12-13 | 2022-06-07 | Amazon Technologies, Inc. | Continuously calibrated network system |
US11016792B1 (en) | 2019-03-07 | 2021-05-25 | Amazon Technologies, Inc. | Remote seamless windows |
US11461168B1 (en) * | 2019-03-29 | 2022-10-04 | Amazon Technologies, Inc. | Data loss protection with continuity |
US11245772B1 (en) | 2019-03-29 | 2022-02-08 | Amazon Technologies, Inc. | Dynamic representation of remote computing environment |
CN112188138A (zh) * | 2019-07-03 | 2021-01-05 | 西安诺瓦星云科技股份有限公司 | 数据传输方法、装置以及系统 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3612918B2 (ja) * | 1996-11-08 | 2005-01-26 | 松下電器産業株式会社 | 画像符号化装置および画像復号化装置 |
JP2000516427A (ja) * | 1997-06-03 | 2000-12-05 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | テレビジョン画像信号処理 |
FR2828054B1 (fr) * | 2001-07-27 | 2003-11-28 | Thomson Licensing Sa | Procede et dispositif de codage d'une scene |
JP4237129B2 (ja) * | 2004-10-29 | 2009-03-11 | 三菱電機株式会社 | ネットワーク対応映像機器及びネットワーク対応映像システム |
US20060104351A1 (en) * | 2004-11-15 | 2006-05-18 | Shu-Wen Teng | Video/image processing devices and methods |
-
2006
- 2006-11-24 JP JP2006317212A patent/JP2008131569A/ja not_active Ceased
-
2007
- 2007-11-13 US US11/985,079 patent/US20080198930A1/en not_active Abandoned
- 2007-11-14 EP EP20070120721 patent/EP1956848A3/en not_active Withdrawn
- 2007-11-19 TW TW96143677A patent/TW200830874A/zh unknown
- 2007-11-26 CN CNA2007101693801A patent/CN101188758A/zh active Pending
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102474624A (zh) * | 2009-08-04 | 2012-05-23 | 阿沃森特公司 | 用于静态和视频图像的远程观看的方法和系统 |
CN102474624B (zh) * | 2009-08-04 | 2016-01-20 | 阿沃森特公司 | 用于静态和视频图像的远程观看的方法和系统 |
CN103297202A (zh) * | 2012-02-29 | 2013-09-11 | 华为技术有限公司 | 信道状态信息的处理方法及装置 |
CN103297202B (zh) * | 2012-02-29 | 2016-10-05 | 华为技术有限公司 | 信道状态信息的处理方法及装置 |
CN110650328A (zh) * | 2019-09-20 | 2020-01-03 | 北京三快在线科技有限公司 | 一种图像传输的方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
US20080198930A1 (en) | 2008-08-21 |
TW200830874A (en) | 2008-07-16 |
EP1956848A2 (en) | 2008-08-13 |
EP1956848A3 (en) | 2008-12-10 |
JP2008131569A (ja) | 2008-06-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101188758A (zh) | 图像信息传输系统和图像信息传输方法 | |
CN100367792C (zh) | 鲁棒模式交错播送视频质量增强 | |
KR100511250B1 (ko) | 디지탈오디오/비디오(a/v)시스템 | |
CN1327697C (zh) | 接收装置、显示装置和记录装置 | |
CN1196332C (zh) | 用于传送数字通用盘片信息的装置和方法 | |
JPH11261978A (ja) | 情報処理装置および方法、並びに提供媒体 | |
WO1998039927A1 (en) | Digital broadcast receiver and display | |
TW201238360A (en) | Video stream composed of combined video frames and methods and systems for its generation, transmission, reception and reproduction | |
JP2006345169A (ja) | デジタルテレビ受信端末装置 | |
CN101366276A (zh) | 数字电视接收器中的快速频道改变 | |
CN101022548B (zh) | 在具有数字广播接收器的终端中处理数据的方法 | |
JP3272243B2 (ja) | 多重信号受信システム装置 | |
JPH09205638A (ja) | データ送信方式および受信装置 | |
US20100086284A1 (en) | Personal recording apparatus and control method thereof | |
WO2004034616A1 (ja) | 放送データ送受信システム及び放送データ送受信方法 | |
JP2006319998A (ja) | 送信装置及び送信方法 | |
JP2001145079A (ja) | 情報送受信システム、送出装置、受信装置、情報処理方法 | |
WO2008015753A1 (fr) | Appareil terminal de communication et procédé d'enregistrement | |
JP2001135024A (ja) | 画像/音声信号記録再生装置 | |
JP2013247663A (ja) | 映像再生装置、映像再生方法及び映像符号化方法 | |
KR20100107194A (ko) | 디지털 방송 수신 장치 및 그 영상 데이터 재생 방법 | |
JPH08102894A (ja) | デジタル方式テレビジョン放送受信機 | |
JP2008311703A (ja) | デジタルcatvシステム、送信装置および受信装置 | |
KR100775700B1 (ko) | 방송 수신 시스템의 파인 튜닝 방법 | |
JP2003143561A (ja) | 記録装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Open date: 20080528 |