CN1213935A - 分层图像编码解码、数字广播信号记录及图像音频的解码 - Google Patents

分层图像编码解码、数字广播信号记录及图像音频的解码 Download PDF

Info

Publication number
CN1213935A
CN1213935A CN98118596A CN98118596A CN1213935A CN 1213935 A CN1213935 A CN 1213935A CN 98118596 A CN98118596 A CN 98118596A CN 98118596 A CN98118596 A CN 98118596A CN 1213935 A CN1213935 A CN 1213935A
Authority
CN
China
Prior art keywords
picture signal
signal
coding
resolution
decoding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN98118596A
Other languages
English (en)
Inventor
竹内诚一
西野正一
藤原裕士
和气一博
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP23800897A external-priority patent/JPH1188876A/ja
Priority claimed from JP25961397A external-priority patent/JPH1198478A/ja
Priority claimed from JP26846897A external-priority patent/JPH11112998A/ja
Priority claimed from JP29448797A external-priority patent/JPH11136683A/ja
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN1213935A publication Critical patent/CN1213935A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2368—Multiplexing of audio and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4331—Caching operations, e.g. of an advertisement for later insertion during playback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4341—Demultiplexing of audio and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/152—Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明的图像信号分层编码装置由于至少具有判断输入图像信号中频率分布的频率分布器或判断输入图像信号活动的活动判断器,进行相应于输入图像信号特性的层间代码量控制,或者,利用选择编码方式及共有活动向量,能够削减帧间双向预测帧的编码数据,能够提高高分辨率信号的编码效率。本发明的数字广播信号解码装置,由于是容易处理的解码方式,因此利用简单电路或软件能够在接收数字广播时很容易地作为子画面显示几个其他的节目。本发明还揭示了一种数字广播信号存储装置。

Description

分层图像编码解码、数字广播信号记录 及图像音频的解码
本发明涉及根据图像信号压缩方式的国际标准化组织MPEG(Moving PictureExperts Group活动图像专家组)标准化的空间轴方向分层编码即空间标量轮廓(Spatial Scalability Profile)以及其他分层编码的代码量控制方式和图像信号编码装置，还涉及进行MPEG标准化压缩的图像信号记录及解码。
现有的图像信号分层编码装置是根据国际标准化组织MPEG(Moving PictureExperts Group)标准化(ISO/IEC13818-2)的空间轴方向分层编码即空间标量轮廓进行处理的编码装置。
下面，参照图22说明现有的图像信号分层编码装置的构成及动作。图22为现有的图像信号分层编码装置的构成图。
如图22所示，输入图像信号5000由分辨率变换器5001将输入图像信号5000变换为低分辨率的图像信号。
活动检出器5002将分辨率变换器5001输出的图像信号的编码帧存储于图像存储器5003，而且根据编码帧与已经编码解码的图像存储器5003中过去的参照帧，检出单位宏数据块的活动。活动补偿器5004将编码帧的图像信号与活动检出器5002检出的参照帧的回放图像信号的差分信号按单位宏数据块输出。DCT器5005将活动补偿器5004输出的差分信号逐块进行DCT(离散余弦变换)并输出。量化器5006以代码量控制器5007指定的量化级差(即量化用的除数)将DCT系数进行量化并输出。逆量化器5008以量化时的量化级差将量化器5006量化的系数进行逆量化并输出。IDCT器5009将逆量化器5008的输出进行逆DCT并输出。活动补偿器5010将IDCT器5009的输出与活动补偿器5004进行活动补偿的参照帧图像信号相加，生成回放图像信号并存储于图像存储器5003。变长编码器5011将量化器5006的输出及规定的标志进行变长编码并输出。缓冲器5012暂时存储经变长编码的图像信号，以调整输出数据的输出速度。也就是说，缓冲器5012输出的是经变长编码的低分辨率图像信号。
代码量控制器5007根据活动补偿器5004输出的差分信号、经编码的图像信号的代码长度及缓冲器5012的所剩容量信息，确定每一宏数据块编码帧的量化级差。
另外，分辨率变换器5013将活动补偿器5010输出的回放图像信号进行分辨率变换，也就是说，变换为与输入图像信号5000相同的分辨率，存储于图像存储器。活动检出器5014将输入图像信号5000的编码帧记录于图像存储器5015，而且根据编码帧、已经编码解码的图像存储器5015中过去的参照帧(高分辨率的图像信号)及分辨率变换器5013输出的为低分辨率信号中同一时刻图像信号的参照帧，检出单位宏数据块的活动。也就是说，活动检出器5014通过该活动的检出，在上述过去的参照帧、上述同一时刻的参照帧以及它们组合生成的参照帧当中与编码帧进行比较，按单位宏数据块检出相关性最高的参照帧，从图像存储器5015输出至活动补偿器5016。
活动补偿器5016将编码帧的图像信号与活动检出器5014检出的参照帧的图像信号的差分信号按单位宏数据块输出。DCT器5017将活动补偿器5016输出的差分信号逐块进行DCT并输出。量化器5018按代码量控制器5019指定的量化级差将DCT系数进行量化并输出。逆量化器5020按量化时的量化级差将量化器5018量化的系数进行逆量化并输出。IDCT器5012将逆量化器5020的输出进行逆DCT并输出。活动补偿器5022将IDCT器5021的输出与活动补偿器5016进行活动补偿的参照帧的回放图像信号相加，生成回放图像信号并存储于图像存储器5015。变长编码器5023将量化器5018的输出及规定的标志进行变长编码并输出。缓冲器5024暂时存储经变长编码的图像信号，以调整输出数据的输出速度。也就是说，缓冲器5024输出的是经变长编码的高分辨率图像信号。
代码量控制器5019根据活动补偿器5016输出的差分信号、经编码的图像信号的代码长度及缓冲器5024的所剩容量信息，确定每一宏数据块编码帧的量化级差。
但这种现有的图像信号分层编码装置中，两个代码量控制器5007及5019分别独立控制代码量，使得各输出的平均位速率分别恒定。为此，当输入图像信号5000含有大量高频成分时，或者几乎不含高频成分时，任何一种情况都同样进行代码量控制。也就是说，完全没有进行相应于输入图像信号5000的层间代码量控制。
另外，当对高分辨率的图像信号进行编码时，虽然由于活动向量检出的参照图像的增加使编码效率有所改善，但没有更有效利用低分辨率信号使编码效率改善。
下面，参照图23说明现有的数字广播解码装置。图23为现有数字广播解码装置的构成图。
该图所示的现有数字广播解码装置是基于采用MPEG标准的压缩进行编码的图像信号及声音信号的数字广播接收机。
如图23所示，解调单元6001将接收的数字广播信号6000进行规定的解调，生成MPEG流。分离单元6002从MPEG流分离出规定频道的图像信号压缩流及声音信号压缩流。声音信号解码单元6003将声音信号压缩流进行解码并输出声音信号6020。
图像信号解码单元6004中，(1)用变长解码器6005对图像信号压缩流进行变长解码，输出单位宏数据块的活动向量、量化级差(即量化用的除数)及DCT系数，(2)用逆量化器6006以解码得出的量化级差按单位宏数据块对DCT系数进行逆量化，(3)用IDCT器6007对DCT系数进行IDCT，(4)用活动补偿器6008按单位宏数据块根据用活动向量进行IDCT的信号及存储器6004内存储的信号回放图像信号，(5)用存储控制器6010将回放的图像信号存储于存储器、将存储于存储器的图像信号输出至活动补偿器6008、以及输出作为回放图像信号等进行控制，并输出经解码的图像信号6021。
这种现有的数字广播解码装置仅回放一个频道的图像信号，其问题在于不能将内部节目同时作为子画面加以监控。另外，为了实现这一功能，也可考虑将多个同样结构的装置组合构成，但这时的问题在于价格非常高。
下面，参照图24说明现有的数字广播信号存储装置。图24为现有数字广播信号存储装置的构成图。
该图所示的现有数字广播信号存储装置是对基于采用MPEG标准的压缩进行编码的图像信号及声音信号的数字广播进行记录的VTR(D-VHS)。
如图24所示，解调单元7001对所接收的数字广播信号进行规定的解调，生成MPEG流。分离单元7002从MPEG流分离出规定频道的传输流(TS)。记录单元7003将分离出的TS记录于记录媒体7004。
这种现有的数字广播信号存储装置，其问题在于，由于所存储的数据量大或所需的数据记录速度快等原因，因此记录媒体受到限制，另外记录媒体中混有各种格式(分辨率及帧频等)的图像信号，因而图像信号难以处理等。
本发明的目的在于提供一种能够进行相应于输入图像信号的层间代码量控制的图像信号分层编码装置和图像信号分层编码方法。
另外，本发明的目的在于提供一种与以往相比构成简单、且能够对多套节目(例如内部节目等)的画面进行监控的数字广播解码装置、数字广播解码方法和图像信号解码系统。
另外，本发明的目的在于提供一种能够解决由于存储的数据量大或所需的数据记录速度快等问题使记录媒体受到限制、或者因记录媒体中混有各种格式(分辨率及帧频等)的图像信号致使图像信号难以处理等上述问题的数字广播信号存储装置和数字广播信号存储方法。
〖权利要求1〗的图像信号分层编码方法，根据空间分辨率对所输入的图像信号进行分层编码，
其特征在于包括：
由所述输入的图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换步骤；
对所述第2图像信号进行编码的第1编码步骤；
对所述经过编码的第2图像信号进行解码的解码步骤；
根据所述第2图像信号经解码得到的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换步骤；
对根据所述第1图像信号和所述第3图像信号得到的与所述第1图像信号相同高分辨率的图像信号进行编码的第2编码步骤；
将所述第1图像信号包含的或所述第2图像信号包含的高频成分其有关信息输出的高频成分信息输出步骤；以及
根据所述输出的高频成分信息对所述第1编码步骤编码的所述第2图像信号的编码速率和所述第2编码步骤编码的所述第1图像信号的编码速率进行控制的代码量控制步骤。
〖权利要求2〗的图像信号分层编码装置，根据空间辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
根据所述第1图像信号的时间轴相关和作为预测图像信号的所述第3图像信号对该第1图像信号进行编码的第2编码手段；
对所述第1图像信号的频率分布进行测定的频率分布测定手段；以及
根据该频率分布测定结果对所述第1编码手段编码的第2图像信号的编码速率和所述第2编码手段编码的第1图像信号的编码速率进行控制的代码量控制手段。
由于具有例如频率分布判断器，因此能够层间进行与输入图像信号所含频率成分相应的代码量控制。
〖权利要求3〗的图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
生成为所述第1图像信号与所述第3图像信号的差分信号的第4图像信号的差分信号生成手段；
根据所述第1图像信号检出活动的活动检出手段；
用所述第1图像信号的活动检出结果对所述第4图像信号进行编码的第2编码手段；
对所述第1图像信号的频率分布进行测定的频率分布测定手段；以及
根据该频率分布测定结果对所述第1编码手段编码的第2图像信号的编码速率和所述第2编码手段编码的第4图像信号的编码速率进行控制的代码量控制手段。
由于具有例如频率分布判断器，因此在高分辨率成分中的编码信号是与低分辨率成分的回放图像信号之差分信号的分层编码过程中，能够层间进行与输入图像信号所含频率成分相应的代码量控制。
〖权利要求4〗的图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
根据所述第2图像信号检出活动的活动检出手段；
根据所述第1图像信号的时间轴相关和作为预测图像信号的所述第3图像信号对该第1图像信号进行编码的第2编码手段；以及
根据所述第2图像信号的所述活动检出结果对所述第1编码手段编码的第2图像信号的编码速率和所述第2编码手段编码的第1图像信号的编码速率进行控制的代码量控制手段。
〖权利要求5〗的图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与第1图像信号相同分辨率的第3图像信号的第2分辨变换手段；
根据所述第1图像信号检出活动的活动检出手段；
根据所述第1图像信号的时间轴相关和作为预测图像信号的所述第3图像信号对所述第1图像信号进行编码的第2编码手段；以及
根据所述第1图像信号的所述活动检出结果对所述第1编码手段编码的第2图像信号的编码速率和所述第2编码手段编码的第1图像信号的编码速率进行控制的代码量控制手段。
由于具有例如活动判断器，因此能够层间进行与输入图像信号的活动相应的代码量控制。
〖权利要求6〗的图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
生成为所述第1图像信号与所述第3图像信号的差分信号的第4图像信号的差分信号生成手段；
根据所述第1图像信号检出活动的活动检出手段；
用所述第1图像信号的活动检出结果对所述第4图像信号进行编码的第2编码手段；以及
根据所述第1图像信号的活动检出结果对所述第1编码手段编码的第2图像信号的编码速率和所述第2编码手段编码的第4图像信号的编码速率进行控制的代码量控制手段。
由于具有例如活动判断器，因此在高分辨率成分中的编码信号是与低分辨率成分的回放图像信号之差分信号的分层编码过程中，能够层间进行与输入图像信号的活动相应的代码量控制。
〖权利要求7〗的图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
根据所述第2图像信号检出活动的活动检出手段；
根据所述第1图像信号的时间轴相关和作为预测图像信号的所述第3图像信号对该第1图像信号进行编码的第2编码手段；
对所述第1图像信号的频率分布进行测定的频率分布测定手段；以及
根据该频率分布测定结果和所述第2图像信号的活动检出结果对所述第1编码手段编码的第2图像信号的编码速率和所述第2编码手段编码的第1图像信号的编码速率进行控制的代码量控制手段。
〖权利要求8〗的图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
根据所述第1图像信号检出活动的活动检出手段；
根据所述第1图像信号的时间相关和作为预测图像信号的所述第3图像信号对该第1图像信号进行编码的第2编码手段；
对所述第1图像信号的频率分布进行测定的频率分布测定手段；以及
根据该频率分布测定结果和所述第1图像信号的活动检出结果对所述第1编码手段编码的第2图像信号的编码速率和所述第2编码手段编码的第1图像信号的编码速率进行控制的代码量控制手段。
由于具有例如频率分布判断器，因此能够层间进行与输入图像信号所含频率成分相应的代码量控制，而且具有活动判断器，因此能够层间进行与输入图像信号相应的代码量控制。
〖权利要求9〗的图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
生成为所述第1图像信号与所述第3图像信号的差分信号的第4图像信号的差分信号生成手段；
根据所述第1图像信号检出活动的活动检出手段；
用所述第1图像信号的活动检出结果对所述第4图像信号进行编码的第2编码手段；
对所述第1图像信号的频率分布进行测定的频率分布测定手段；以及
根据该频率分布测定结果和所述第1图像信号的活动检出结果对所述第1编码手段编码的第2图像信号的编码速率和所述第2编码手段编码的第4图像信号的编码速率进行控制的代码量控制手段。
由于具有例如频率分布判断器，因此在高分辨率成分中的编码信号是与低分辨率的回放图像信号之差分信号的分层编码过程中，能够层间进行与输入图像信号所含频率成分相应的代码量控制，而且具有活动判断器，因此在高分辨率成分中的编码信号是与低分辨率成分的回放图像信号之差分信号的分层编码过程中，能够层间进行与输入图像信号的活动相应的代码量控制。
〖权利要求17〗的图像信号分层编码方法，根据空间分辨率对所输入的图像信号进行分层编码，
其特征在于包括：
由所述输入的图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换步骤；
将所述第2图像信号进行编码的第1编码步骤；
将所述经过编码的第2图像信号进行解码的解码步骤；
根据对所述第2图像信号解码得到的解码图像信号生成与所述第1图像信号相同高分辨率的第3图像信号的第2分辨率变换步骤；
根据多种编码方式对所述第1图像信号进行编码的第2编码步骤，
所述第2编码步骤中，所述多种编码方式中采用基于时间轴方向双向预测的编码方式进行所述编码时，仅将表明所述第1编码步骤中的编码或所述第2编码步骤中的编码所利用的是所述第1图像信号还是所述解码图像信号的信息作为编码对象。
〖权利要求18〗的图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
用下述编码方式中至少一种编码方式：(1)用所述第3图像信号中用到的空间轴方向预测的空间分辨率间预测编码；(2)仅用所述帧内数据的帧内编码；(3)用时间轴方向正向预测的帧间正向预测编码；(4)用时间轴方向双向预测的帧间双向预测编码，对所述第1图像信号的各帧进行编码的第2编码手段，
当所述第2编码手段进行所述帧间双向预测编码时，仅对帧间双向预测得到的活动向量进行编码。
由于仅对例如采用帧间双向预测的活动向量进行编码，因此能够削减代码量，提高高分辨率信号的编码效率。
〖权利要求19〗的图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
用下述编码方式中某一种编码方式：(1)仅用所述帧内数据的帧内编码；(2)用时间轴方向正向预测的帧间正向预测编码；(3)用时间轴方向双向预测的帧间双向预测编码，对所述第2图像信号的各帧进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
用下述编码方式中至少一种编码方式：(1)用所述第3图像信号中用到的空间轴方向预测的空间分辨率间预测编码；(2)仅用所述帧内数据的帧内编码；(3)用时间轴方向正向预测的帧间正向预测编码；(4)用时间轴方向双向预测的帧间双向预测编码，对所述第1图像信号的各帧进行编码的第2编码手段，
当所述第2编码手段进行所述帧间双向预测编码时，仅对帧间双向预测得到的活动向量进行编码。
除了前述发明效果，由于低分辨率信号和高分辨率信号进行编码时各帧的编码方式相同，因此高分辨率信号解码时能够利用低分辨率信号的活动向量，增加防止出错的能力。
〖权利要求25〗的图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
用下述编码方式中至少一种编码方式：(1)用所述第3图像信号中用到的空间轴方向预测的空间分辨率间预测编码；(2)仅用所述帧内数据的帧内编码；(3)用时间轴方向正向预测的帧间正向预测编码；(4)用时间轴方向双向预测的帧间双向预测编码，对所述第1图像信号的各帧进行编码的第2编码手段，
所述第2编码手段每隔所述第1图像信号的规定数帧，仅靠所述空间分辨率间预测编码对该帧进行编码。
由于例如高分辨率信号不进行帧内编码，因此能够削减代码量，提高高分辨率信号的编码效率。
〖权利要求26〗的图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
用下述编码方式中至少一种编码方式：(1)用所述第3图像信号中用到的空间轴方向预测的空间分辨率间预测编码；(2)仅用所述帧内数据的帧内编码；(3)用时间轴方向正向预测的帧间正向预测编码；(4)用时间轴方向双向预测的帧间双向预测编码，对所述第1图像信号的各帧进行编码的第2编码手段；以及
对所述第1图像信号各帧间的活动向量进行检测的活动向量检测手段，
所述第2编码手段用所述活动向量检测手段得出的活动向量进行编码，而所述第1编码手段用规定倍的所述活动向量检测手段得出的活动向量进行编码。
由于对例如高分辨率信号帧不进行活动向量检出，因此能够削减电路规模，同时不对活动向量进行编码，因此能够提高高分辨率信号的编码效率。
〖权利要求28〗的图像信号分层编码方法，根据空间分辨率对所输入的图像信号进行分层编码，
其特征在于包括：
由所述输入的图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换步骤；
根据所述第2图像信号进行编码的第1编码步骤；
对所述经过编码的第2图像信号进行解码的解码步骤；
根据对所述第2图像信号解码得到的解码图像信号生成与所述第1图像信号相同高分辨率的第3图像信号的第2分辨率变换步骤；
求得所述第1图像信号和第3图像信号互相对应的帧间数据的差分，生成差分信号的差分信号生成步骤；
将所述生成的差分信号分成多个规定的频带，生成频带分割信号的频带分割步骤；以及
对所述生成的频带分割信号进行编码的第2编码步骤。
〖权利要求29〗的图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
求得所述第1图像信号和第3图像信号互相对应的帧间数据的差分，制作差分信号的差分信号检出手段；
将所述差分信号检出手段得出的差分信号分成多个规定的频带，制作频带分割信号的频带分割手段；以及
对所述频带分割手段得出的频带分割信号进行编码的第2编码手段。
由于对于例如低分辨率信号与高分辨率信号采用不同的编码，因此一旦将两信号组合，就能够有效地对高分辨率信号编码，提高高分辨率信号的图像质量。
〖权利要求30〗的数字广播解码方法，对经过MPEG压缩及多路复用的广播信号进行解码，
其特征在于包括：
对所述广播信号进行规定的解调的解调步骤；
对所述经过解调的广播信号解多路复用、分离第1频道的图像信号压缩流和声音信号压缩流的分离步骤；
对所述分离的第1频道图像信号压缩流进行解码的第1图像信号解码步骤；
对所述分离的第1频道声音信号压缩流进行解码的第1声音信号解码步骤；以及
对与所述第1频道分开的第2频道图像信号压缩流进行解码的第2图像信号解码步骤，
所述第2图像信号解码步骤中，(1)对所述第2频道的图像信号压缩流进行解码，(2)提取活动向量与DCT系数中的DC成分，或活动向量与DC成分以及除了该DC成分剩下的DCT系数中的一部分，(3)根据该提取的内容对所述第2图像信号解码。
〖权利要求31〗的数字广播解码装置，对图像信号及声音信号经过MPEG压缩、规定的多路复用和调制所播送的数字广播信号进行解码，
其特征在于包括：
对所述广播信号进行规定的解调的解调单元；
对所述经过解调的广播信号解所述多路复用、分离至少1个频道的图像信号压缩流和声音信号压缩流的分离单元；
对所述分离的规定频道的图像信号压缩流进行解码的第1图像信号解码单元；
对所述分离的规定频道的声音信号压缩流进行解码的声音信号解码单元；
对所述规定频道以外的图像信号压缩流进行解码并输出的至少1个第2图像信号解码单元；以及
使所述第2图像信号解码单元输出的图像信号覆盖在所述第1图像信号解码单元输出的图像信号中规定位置输出的图像信号覆盖单元，
所述第2图像信号解码单元包括：
变长解码器，(1)对所述图像信号压缩流进行变长解码，(2)提取活动向量和DC成分，(3)所述DC成分量化时还提取为所述量化所用除数的量化级差；
仅在所述DC成分进行过DPCM时进行逆DPCM的逆DPCM器；
仅在所述DC成分进行过量化时进行逆量化的逆量化器；
存储所述经过解码的图像信号的存储器；
用所述活动向量经过规定变换后进行活动补偿并解码的图像信号和存储器内的图像信号进行活动补偿的活动补偿器；以及
控制向所述存储器和从所述存储器读出的存储控制器。
由此，在例如接收数字广播信号时，能够方便地将内部节目作为子画面显示。
〖权利要求33〗的数字广播解码装置，对图像信号及声音信号经过MPEG压缩、规定的多路复用和调制所播送的数字广播信号进行解码，
其特征在于包括：
对所述广播信号进行规定的解调的解调单元；
对所述经过解调的广播信号解所述多路复用，分离至少1个频道的图像信号压缩流和声音信号压缩流的分离单元；
对所述分离的规定频道的图像信号压缩流进行解码的第1图像信号解码单元；
对所述分离的规定频道的声音信号压缩流进行解码的声音信号解码单元；
对所述规定频道以外的图像信号压缩流进行解码并输出的至少1个第2图像信号解码单元；以及
使所述第2图像信号解码单元输出的图像信号覆兽在所述第1图像信号解码单元输出的图像信号中规定位置输出的图像信号覆盖单元，
所述第2图像信号解码单元包括：
变长解码器，(1)对所述图像信号压缩流进行变长解码，(2)提取活动向量、为量化所用除数的量化级差、和水平方向M个(M为1以上8以下的自然数)垂直方向N个(N为1以上8以下的自然数)合计M×N个DCT系数；
对所述M×N个DCT系数进行逆量化的逆量化器；
存储经过解码的图像信号的存储器；
用所述活动向量分别经过水平方向、垂直方向规定变换后进行活动补偿并解码的图像信号和存储器内的图像信号进行活动补偿的活动补偿器；以及
控制向所述存储器写入和从所述存储器读出的存储控制器。
由此，在例如接收数字广播信号时，能够方便地将内部节目作为子画面显示。
〖权利要求40〗的数字广播信号记录方法，接收并记录经过MPEG压缩及多路复用的广播信号，
其特征在于包括：
接收所述广播信号并进行规定解调的解调步骤；
从所述经解调的广播信号中分离出图像信号压缩流的分离步骤；
对所述分离的图像信号压缩流进行解码的解码步骤；
根据所述经过解码的流中规定标志和/或规定活动向量和规定DCT系数，(1)将所述经过解码的流的各种格式统一为规定格式，和/或，(2)削减所述经过解码的流的数据量，然后(3)进行编码的编码步骤；以及
将所述经过编码的图像信号数据记录于规定记录媒体的记录步骤。
〖权利要求41〗的数字广播信号存储装置，记录采用MPEG压缩的广播信号，
其特征在于包括：
对图像信号及声音信号经过MPEG压缩、规定的多路复用和调制所播送的数字广播信号进行规定解调的解调单元；
解所述规定的多路复用，分离规定频道的图像信号压缩流和声音信号压缩流的分离单元；
暂时存储所述分离的声音信号压缩流的存储器；
对所述分离的图像信号压缩流进行变长解码、选择各种标志、活动向量和规定数量(水平方向M个系数、垂直方向N个系数，M和N分别为1以上8以下的自然数)的DCT系数的变长解码器；
对于所述选定的各种标志进行规定的标志变换，对于所述活动向量进行活动向量变换，再进行变长编码的变长编码器；
对所述经变长编码的图像信号数据和所述声音信号压缩流进行多路复用的多路复用单元；以及
将所述多路复用的数据记录于规定记录媒体的记录单元。
由此，通过再编码时，例如靠提取DCT系数削减存储的数据量，或降低所需的数据记录速度，因此即便是输入各种格式(分辨率及帧频等)图像信号的场合，也能够在记录媒体中按照1种格式记录图像信号。
〖权利要求42〗的数字广播信号存储装置，记录采用MPEG压缩的广播信号，
其特征在于包括：
对图像信号及声音信号经过MPEG压缩、规定的多路复用和调制所播送的数字广播信号进行规定解调的解调单元；
解所述规定的多路复用，分离规定频道的图像信号压缩流和声音信号压缩流的分离单元；
暂时存储所述分离的声音信号压缩流的存储器；
变长解码器，对所述分离的图像信号压缩流进行变长解码，选择各种标志，(1)活动向量按单位帧确定时，进行规定的活动向量变换，(2)活动向量按单位场确定时、根据规定的近似方法变换为单位帧，(3)DCT按单位帧确定时、仅选择规定数量(水平方向M个系数、垂直方向N个系数，M、N分别为1以上8以下的自然数)的DCT系数，(4)DCT按单位场确定时，删除某一DCT系数，仅选择规定数量(水平方向M个系数、垂直方向K个系数，M、K分别为1以上8以下的自然数)的DCT系数；
对所述选定的各种标志、活动向量、DCT系数进行规定的标志变换，以进行变长编码的变长编码器；
对所述经变长编码的图像信号数据和所述声音信号压缩流进行多路复用的多路复用单元；以及
将所述经多路复用的数据记录于规定记录媒体的记录单元。
由此，通过再编码时，例如靠提取DCT系数削减存储的数据量，或降低所需的数据记录速度，因此即便是输入各种格式(分辨率及帧频等)图像信号的场合，也能够在记录媒体中按照1种格式记录图像信号。
〖权利要求43〗的图像声音信号回放装置，对图像信号及声音信号进行回放，
其特征在于包括：
对权利要求41或42所述的数字广播信号存储装置记录的数据进行回放的回放单元；
将所述回放的数据分离为图像信号压缩流和声音信号压缩流的分离单元；
对所述分离的图像信号压缩流进行解码的图像信号解码单元；以及
对所述分离的声音信号压缩流进行解码的声音信号解码单元，
所述图像信号解码单元包括：
对所述图像信号压缩流进行变长解码的变长解码器；
将所述经变长解码的数据进行逆量化的逆量化器；
将所述逆量化的数据进行规定的M×N或M×K逆DCT的IDCT器；
存储经过解码的图像信号的存储器；
用经活动向量解码的图像信号和存储器内的图像信号进行活动补偿的活动补偿器；以及
控制向所述存储器写入和从所述存储器读出的存储控制器。
由此，通过例如提取DCT系数，因此能够削减存储的数据量，或降低所需的数据速度。
〖权利要求44〗的数字广播信号存储装置，记录采用MPEG压缩的广播信号，
其特征在于包括：
对图像信号及声音信号经过MPEG压缩、规定的多路复用和调制所播送的数字广播信号进行规定解调的解调单元；
解所述规定的多路复用，分离规定频道的图像信号压缩流和声音信号压缩流的分离单元；
暂时存储所述分离的声音信号压缩流的存储器；
对所述分离的图像信号压缩流进行解码的图像信号解码单元；
对所述图像信号解码单元输出的图像信号进行压缩的图像信号压缩单元；
对所述图像信号压缩单元压缩的图像信号压缩流同所述声音信号压缩流进行多路复用的多路复用单元；以及
将所述经多路复用的数据记录于规定记录媒体的记录单元，
所述图像信号解码单元包括：
对所述图像信号压缩流进行变长解码的变长解码器；
对所述经变长解码的数据进行逆量化的逆量化器；
对所述逆量化的数据进行逆DCT的逆DCT器；
存储经过解码的图像信号的存储器；
用经活动向量解码的图像信号和存储器内的图像信号进行活动补偿的活动补偿器；以及
控制向所述存储器写入和从所述存储器读出的存储控制器，
所述图像信号压缩单元包括：
对所述图像信号解码单元输出的所述数字广播信号中图像信号压缩流的回放图像信号进行规定的滤波，改变图像信号分辨率的滤波器；
用所述图像信号解码单元输出的所述图像信号压缩流中的所述活动向量生成所述滤波后的回放图像信号的差分信号的差分信号生成器；
对所述差分信号进行DCT的DCT器；
用输入的所述各种标志对所述经过DCT的数据进行量化的量化器；以及
对所述量化器输出进行变长编码的变长编码器，
输出新的图像信号压缩流。
由此，通过再编码时，例如靠提取DCT系数削减存储的数据量，或降低所需的数据记录速度，因此即便是输入各种格式(分辨率及帧频等)图像信号的场合，也能够在记录媒体中按照1种格式记录图像信号。
附图简要说明
图1为本发明第1实施例图像信号分层编码装置的框图。
图2为本发明第2实施例图像信号分层编码装置的框图。
图3为本发明第3实施例图像信号分层编码装置的框图。
图4为本发明第4实施例图像信号分层编码装置的框图。
图5为本发明第5实施例图像信号分层编码装置的框图。
图6为本发明第6实施例图像信号分层编码装置的框图。
图7为本发明第7实施例图像信号分层编码装置的框图。
图8为本发明第8和第9实施例图像信号分层编码装置的框图。
图9为本发明第13实施例图像信号分层编码装置的框图。
图10为本发明第14实施例图像信号分层编码装置的框图。
图11为本发明第15实施例第1数字广播解码装置的框图。
图12为本发明第16实施例第1数字广播解码装置的框图。
图13为本发明第17实施例第2数字广播解码装置的框图。
图14为本发明第18实施例第2数字广播解码装置的框图。
图15为本发明第15实施例图像信号解码方式的流程图。
图16为本发明第16实施例图像信号解码方式的流程图。
图17为本发明第19和第20实施例第2数字广播信号存储装置的框图。
图18为本发明第19实施例变长解码单元和变长编码单元的框图。
图19为本发明第20实施例变长解码单元和变长编码单元的框图。
图20为本发明第21实施例图像信号回放装置的框图。
图21为本发明第22实施例数字广播信号存储装置的框图。
图22为现有图像信号分层编码装置的框图。
图23为现有数字广播解码装置的框图。
图24为现有数字广播信号存储装置的框图。
下面，利用附图说明本发明实施例。
实施例1
参照图1说明本发明图像信号分层编码装置一实施例的构成和动作。图1为本实施例图像信号分层编码装置的框图。
图1中，101为分辨率变换器，102为频率分布测定器，103为活动检出器，104为图像存储器，105为活动补偿器，106为DCT器，107为量化器，108为代码量控制器，109为逆量化器，110为IDCT器，111为活动补偿器，112为变长编码器，113为缓冲器，114为分辨率变换器，115为活动检出器，116为图像存储器，117为活动补偿器，118为DCT器，119为量化器，120为代码量控制器，121为逆量化器，122为IDCT器，123为活动补偿器，124为变长编码器，125为缓冲器。
本实施例构成的主要特点在于，具有频率分布测定器102，代码量控制器108向代码量控制器120发出规定的控制信号。
本实施例中，频率分布测定器102是采用高通滤波器的构成，该高通滤波器以比分辨率变换器101频带限制的频率高的频率作为通过频带。另外构成为，该高通滤波器输出信号成分比规定值少时，即其输出信号所含的高频成分少时，代码量控制器108就提高低分辨率图像信号的编码速率。一般，帧间活动较多时，由于图像本身模糊，因此该帧所含高频成分较少。
下面就以上构成说明本实施例图像信号分层编码装置的动作，同时说明本发明图像信号分层编码方法一实施例。
输入图像信号100由分辨率变换器101变换为分辨率比输入图像信号100低的图像信号。
频率分布测定器102对输入图像信号100中经分辨率变换器101变换的低分辨率图像信号中不包含的高频成分有多少进行测定并输出。
活动检出器103将分辨率变换器101输出的图像信号编码帧存储于图像存储器104中，并根据编码帧与已经编码解码的图像存储器104中过去的参照帧检出单位宏数据块的活动。
活动补偿器105将编码帧的图像信号与活动检出器103检出的参照帧回放图像信号之差分信号按单位宏数据块输出。
DCT器106对活动补偿器105输出的差分信号逐块进行DCT并输出。
量化器107按代码量控制器108指定的量化级差对DCT系数进行量化并输出。
逆量化器109按量化时的量化级差对量化器107量化的系数进行逆量化并输出。
IDCT器110对逆量化器109的输出进行逆DCT并输出。
活动补偿器111将IDCT器110的输出与经活动补偿器105活动补偿的参照帧图像信号相加，生成回放图像信号并存储于图像存储器104。变长编码器112将量化器107的输出及规定的标志进行变长编码并输出。
缓冲器113暂时存储经变长编码的图像信号，以调整输出数据的输出速度。也就是说，缓冲器113输出的是经变长编码的低分辨率图像信号。
代码量控制器108根据频率分布测定器102的输出、活动补偿器105输出的差分信号、经过编码的图像信号的代码长度和缓冲器113的所剩容量信息，确定每一宏数据块编码帧的量化级差。
也就是说，频率分布测定器102的输出信号所含高频成分少时，与多时相比，代码量控制器108提高低分辨率图像信号的编码速度。此外，代码量控制器108将低分辨率图像信号的编码速率信息送至代码量控制器120。
分辨率变换器114对活动补偿器111输出的回放图像信号进行分辨率变换，也就是说，变换为与输入图像信号100相同的分辨率，存储于图像存储器116。
活动检出器115将输入图像信号的编码帧存储于图像存储器116，并根据编码帧与已经编码解码的图像存储器116中过去的参照帧与分辨率变换器114输出的低分辨率信号中同一时刻图像信号的参照帧，检出单位宏数据块的活动。
也就是说，活动检出器115通过该活动检出，在上述过去的参照帧与上述同一时刻的参照帧和它们组合生成的参照帧当中与编码帧进行比较，按单位宏数据块检出相关性最高的参照帧，由图像存储器116输出至活动补偿器117。
如上文所述，一般帧间活动多时，由于图像本身模糊，因此该帧所含高频成分更少。因而，当活动多时，编码帧与同一时刻的参照帧的相关性高，图像存储器116将同一时刻的参照帧输出至活动补偿器117。
活动补偿器117将编码帧的图像信号与活动检出器115检出的参照帧的回放图像信号之差分信号按单位宏数据块输出。
因而，如上所述那样活动多时，活动补偿器117输出的差分信号量较少。这意味着，输入信号110所含的高频成分少时，即使降低高分辨率图像信号的编码速率，代码量控制器120对图像质量没有什么影响。关于这一点后面还要叙述。
DCT器118对活动补偿器117输出的差分信号逐块进行DCT并输出。
量化器119按代码量控制器120指定的量化级差对DCT系数进行量化并输出。
逆量化器121按量化时的量化级差对量化器119量化的系数进行逆量化并输出。
IDCT器122对逆量化器121的输出进行DCT并输出。
活动补偿器123将IDCT器122的输出与经活动补偿器117活动补偿的参照帧图像信号相加，生成回放图像信号并存储于图像存储器116。变长编码器124对量化器119的输出及规定的标志进行变长编码并输出。
缓冲器125暂时存储经变长编码的图像信号，以调整输出数据的输出速度。也就是说，缓冲器125输出的是经变长编码的高分辨率图像信号。
代码量控制器120根据代码量控制器108估计的低分辨率信号的编码状态(即编码速率值等)、活动补偿器117输出的差分信号、经过编码的图像信号的代码长度和缓冲器125的所剩容量信息，确定每一宏数据块编码帧的量化级差。
也就是说，代码量控制器120受理代码量控制器108送来的低分辨率图像信号的编码速率信息。然后，当来自代码量控制器108的编码速率信息表明编码速率高时，就降低高分辨率图像信号的编码速率，以便不超过总的编码速率。如上所述，这时，如上文所述，即使降低高分辨率图像信号的编码速率，对图像质量也没有什么影响。
这样，本实施例中，具体来说，输入信号100所含的高频成分少时，就提高低分辨率图像信号的编码速率，降低高分辨率图像信号的编码速率。
这样，能减小低分辨率图像信号的压缩失真，因此低分辨率图像信号的图像质量更好。由此也能够同时改善利用图像质量提高的低分辨率信号的高分辨率图像信号的图像质量。
实施例2
参照图2，就本发明图像信号分层编码装置之一实施例的构成及动作加以说明。图2为本实施例的图像信号分层编码装置框图。
在图2中，与图1相同的构成附以相同的标号，并省略其说明。
也就是说，在图2中，201为差分信号生成器，202为活动检出器，203为图像存储器。
从分辨率变换器101到缓冲器113的动作与图1所示内容相同，故省略说明。
分辨率变换器114将活动补偿器111输出的回放图像信号进行分辨率变换，以与输入图像信号相同的分辨率输出。
差分信号生成器201生成输入图像信号与分辨率变换器114输出的差分信号。
活动检出器202将输入图像信号的编码帧存储于图像存储器203中，而且根据编码帧与已经编码解码的图像存储器203中的过去的参照帧检测出单位宏数据块的活动。
活动补偿器117将差分信号生成器201的输出与活动检出器202检测的参照帧的同一位置回放信号的差分信号以单位宏数据块输出。
在本实施例中，除上述第1实施例所述的效果外，更能发挥下述的效果。
也就是说，由于具有频率分布判断器102及差分信号生成器201，因而在高分辨率成分中的编码信号是与低分辨率成分回放图像信号的差分信号的分层编码中，与输入图像信号100所含频率成分相应的代码量控制能够在层间进行。
另外，本实施例的活动检出器202在活动检出时也可以使用分辨率变换器114输出的图像信号。
实施例3
在图3中，与图1相同的部分附以相同的标号，并省略其说明。
也就是说，在图3中，301为活动判断器，302为代码量控制器。
如该图所示，活动判断器301根据活动检出器103的活动检出结果判断输入图像信号的活动并输出其结果。
代码量控制器302根据活动判断器301的输出、活动补偿器105输出的差分信号、编码的图像信号代码长度及缓冲器113的剩余量，决定每宏数据块的编码帧的量化级差。
在本实施例中，由于具有活动判断器301，因而与输入图像信号100的活动相应的代码量控制能够在层间进行。
另外，本实施例的活动判断器301可以不用活动检出器103，而利用活动检出器115仅用原图像信号中的编码帧与参照帧检出活动的结果来判断活动。
实施例4
在图4中，与图1及图2相同的部分附以相同的标号，并省略其说明。在该图中，401为活动判断器，402为代码量控制器。
活动判断器401根据活动检出器202的活动检出结果判断输入图像信号的活动并输出其结果。
这样，活动判断器401与根据变换为低分辨率图像信号判断活动的上述实施例的情况不同，能够更加提高判断活动的精度。
代码量控制器402根据活动判断器401的输出、活动补偿器105输出的差分信号、编码的图像信号代码长度及缓冲器113的剩余量，决定每宏数据块的编码帧的量化级差。
在本实施例中，由于具有差分信号生成器201及活动判断器401，因而在高分辨率成分的编码信号是与低分辨率成分回放图像信号的差分信号的分层编码中，与输入图像信号100的活动相应的代码量控制能够在层间进行。
另外，本实施例的活动判断器401也可以用活动检出器103检出活动的结果来判断活动。
实施例5
在图5中，与图1及图3相同的部分附以相同的标号，并省略其说明。在该图中，501为代码量控制器。
如图5所示，代码器控制器501根据频率分布测定器102的输出、活动判断器301的输出、活动补偿器105输出的差分信号、编码的图像信号代码长度及缓冲器113的剩余量，决定每宏数据块的编码帧的量化级差。
在本实施例中，由于具有频率分布判断器102，因而与输入图像信号100所含频率成分相应的代码量控制能够在层间进行，而且由于具有活动判断器301，因而与输入图像信号的活动相应的代码量控制能够在层间进行。
另外，本实施例的活动判断器301不是活动检出器103，也可以利用活动检出器115仅用原图像信号中的编码帧与参照帧检出活动的结果来判断活动。
实施例6
在图6中，与图1、图2及图4相同的部分附以相同的标号，并省略其说明。在该图中，601为代码量控制器。
如图6所示，代码量控制器601根据频率分布测定器102的输出、活动判断器401的输出、活动补偿器105输出的差分信号、编码的图像信号代码长度及缓冲器113的剩余量，决定每宏数据块的编码帧的量化级差。
另外，本实施例的活动判断器401也可以用活动检出器103检出活动的结果来判断活动。
另外，在上述各实施例中，作为本发明的频率分布测定手段，是采用通带高于分辨率变换器101限定的频率的高通滤波器，但不限于此，例如也可以如下构成。
也就是说，分辨率变换器101是根据低通滤波器的频带限制的，当其频率特性用F表示时，也可以用以1-F表示的高通滤波器构成。这时，当高通滤波器输出的信号成分小于规定值时，用代码量控制器108、501及601提高进行编码的编码速率。
另外，作为其他的方法也可以这样构成，即频率分布测定器102将输入图像信号与分辨率变换器101相同的操作变换为低分辨率的图像信号，再将用与分辨率变换器114相同的操作恢复为与输入图像信号相同分辨率的信号和输入图像信号的差分信号绝对值和相加。这时，当绝对值和较小时，用代码量控制器108、501及601提高进行编码的编码速率。
另外还有，作为其他的方法也可以这样构成，频率分布测定器102将输入图像信号用与分辨率变换器101相同的操作变换为低分辨率的图像信号，再用与分辨率变换器114相同的操作恢复为与输入图像信号相同分辨率的信号和输入图像信号的差分信号的绝对值只有大于规定值时进行相加。这时，当绝对值和较小时，用代码量控制器108、501及601提高进行编码的编码速率。
另外，上述实施例的活动判断器301与活动判断器401，当活动分别较大时，也可以是用代码量控制器108、501及601提高进行编码的编码速率。
另外，在上述实施例中，就缓冲器113及缓冲器125各自输出的编码的位流之和每单位时间总是一定的情况作了说明，但不限于此，即使位流之和随时间而变化，也能够适用于上述实施例的构成。
实施例7
参照图7，就本发明图像信号分层编码装置之一实施例的构成及动作加以说明。图7为本实施例的图像信号分层编码装置框图。
在图7中，701为输入图像信号的输入端，702为降低输入信号分辨率至规定分辨率的低分辨率化器，703为将输入信号进行高效编码的第1编码器，704为将输入信号进行高效解码的第2解码器，705为将输入信号的象素数进行插补成规定象素数的插补器，706为将输入信号进行高效编码的第2编码器。
下面，说明上述构成的动作。
由输入端701输入的高分辨率信号输出至第编码器706及低分辨率化器702。在低分辨率化器702将输入信号降低至规定分辨率，输出至第1编码器703。第1编码器703对输入信号进行高效编码，将编码数据输出至第2解码器704。在第2解码器704将输入信号进行高效解码并输出至插补器705。在插补器705输入图像信号插补成与高分辨率信号相同的象素数并输出至第2编码器706。
在第2编码器706，按照采用空间轴方向预测的空间分辨率预测编码(例如将插补的信号与分分辨率信号的差分进行编码)、采用高分辨率信号的帧内数据的帧内编码、采用高分辨率信号的时间轴方向正向预测的帧间正向预测编码或采用高分辨率信号的时间轴方向双向预测的帧间双向预测编码的任一种方式将高分辨率信号进行高效编码并输出。
在这里，当第2编码器706进行帧间双向预测编码时，预测后的差分数据不进行编码，仅将利用帧间双向预测检测的活动向量进行编码。
一般，双向预测帧多数情况为前后帧的插补，因此编码对象即使仅是活动向量，也对图像质量不产生大的影响。另外，当高分辨率信号解码时，也能够使用低分辨率信号的解码图像的插补图像，即使仅将活动向量编码，也不产生图像质量降低等问题。
如上所述，本发明的图像信号编码装置，其帧间双向预测编码的高分辨率信号，通过仅将利用帧间双向预测的活动向量进行编码，就能够削减代码量，因此能够提高高分辨率信号的编码效率。
实施例8
在图8中，801为输入图像信号的输入端，802为降低输入信号分辨率至规定分辨率的低分辨率化器，803为将输入信号进行高效编码的第1编码器，804为将输入信号进行高效解码的第2解码器，805为将输入信号的象素数据进行插补成规定象素数的插补器，806为按照输入信息所决定的规定控制将输入信号进行编码的第2编码器。
下面，说明上述构成的动作。
由输入端801输入的高分辨率信号输出至第2编码器806及低分辨率化器802。在低分辨率化器802将输入信号降低至规定分辨率，输出至第1编码器803。
第1编码器803按照(1)采用低分辨率信号的帧内数据的帧内编码、(2)采用低分辨率信号的时间轴方向正向预测的帧间正向预测编码、(3)采用低分辨率信号的时间轴方向双向预测的帧间双向预测编码的任一种方式将低分辨率信号进行高效编码，然后将编码数据输出至第2解码器804，同时将编码帧是按照帧内编码、帧间正向预测编码还是帧间双向预测编码的哪一种编码方式进行编码的输出给第2编码器806。在第2解码器804将输入信号高效解码并输出至插补器805。在插补器805，输入图像信号插补成与输入图像信号相同的象素数并输出至第2编码器806。
在第2编码器806按照(1)采用空间轴方向预测的空间分辨率预测编码(例如将插补信号与高分辨率信号的差分进行编码)、及(2)用第1编码器803将变换为低分辨率信号的各帧编码时的编码方式相同的编码方式进行编码，将高分辨率信号进行高效编码并输出。另外，如上所述，在第1编码器803使用的编码方式是什么编码方式的信息，从第1编码器803传送至第2编码器806。
另外，本发明的第2编码器806也与第7实施例相同，当进行帧间双向预测编码时，预测后的差分数据不进行编码，仅将利用帧间双向预测检测出的活动向量进行编码。
如上所述，本发明的图像信号编码装置，除与第7实施例相同的效果外，由于将低分辨率信号及高分辨率信号进行编码时的各帧编码方式相同，因此能够在高分辨率信号解码时使用低分辨率信号的活动向量，增强防止出错的能力。
另外，作为上述实施例的变形例，也可以这样构成，即当第1编码器803进行帧内编码时，上述第2编码器806按照上述帧内编码将与该帧对应的帧进行编码。由于采用本构成，增加了对于该帧出错的重要性，因此通过增强该帧防止出错的能力(出错容差)，就能够很容易地增强整个流的防止出错的能力。
实施例9
本实施例的构成与图8相同，仅第2编码器806的动作不同。
下面，说明本实施例中第2编码器806的动作。
在本实施例的第2编码器806，对于与第1编码器803进行帧内编码或帧间正向预测编码的帧相对应的帧，将采用帧间双向预测的活动向量进行编码，而对于与进行帧间双向预测编码的帧相对应的帧，则进行帧内编码或帧间正向预测编码。
在采用图像信号时间轴方向的编码中，为了提高图像质量，将代码量分配给帧内编码或帧间正向预测编码，而对于是前后帧插补的帧间双向编码，则不分配代码量，因此一般图像质量是帧内编码或帧间正向预测编码比帧间双向编码要好。
因此，通过设定上述的编码方式，高分辨率信号在帧间双向预测编码时，空间分辨率间预测编码的参照帧成为采用低分辨率信号帧内编码或帧间正向预测编码的某一方式。因而，由于参照帧比第8实施例的图像质量好，所以能够更有效地利用空间分辨率间预测编码，能够不需要活动向量编码，提高编码效率。
另外，不需要活动向量编码不限于第1编码器803进行帧间正向预测编码的情况。
如上所述，本发明的图像信号编码装置，除了与第7实施例相同的效果外，由于提高了帧间双向预测编码时空间分辨率间预测编码的参照帧的图像质量，因此能够改善高分辨率信号的编码效率。
实施例10
本实施例的构成与图8相同，仅第2编码器806的动作不同。
下面，说明本实施例中第2编码器806的动作。
在本实施例的第2编码器806，对于与第1编码器803进行帧间正向预测编码或帧间双向预测编码的帧相对应的帧进行相同方式的编码，而与第1编码器803进行帧内编码的帧相对应的帧仅用空间分辨率间预测编码进行高效编码。
如上所述，由于高分辨率信号不进行帧内编码，因此能够削减代码量，能够提高高分辨率信号的编码效率。
实施例11
本实施例的构成与图7相同，仅第2编码器706的动作不同。
下面，说明本实施例中第2编码器706的动作。
在本实施例的第2编码器706，每隔M帧(M≥1)仅用空间分辨率间预测编码进行编码。其他帧则进行帧间正向预测编码或帧间双向预测编码。
如上所述，与实施例10相同，由于高分辨率信号不进行帧内编码，因此能够削减代码量，能够提高高分辨率信号的编码效率。再有，由于每隔M帧将与插补图像的差分进行编码，因此能够每隔M帧停止时间轴方向出错传播，所以M越小，越能增加防止出错的能力(出错容差)，若M小于实施例10的GOP单位，则比实施例10的防止出错能力要强。
实施例12
本实施例的构成与图8相同，仅第1编码器803及第2编码器806的动作不同。
下面，说明本实施例中第1编码器803及第2编码器806的动作。
本实施例的第1编码器803对输入信号进行高效编码，并将编码数据输出至第2解码器804，同时将编码使用的活动向量及编码方式输出至第2编码器806。第2编码器806对于对第1编码器803按照帧间正向预测编码或帧间双向预测编码的编码方式进行编码的帧，将输入的活动向量的规定倍数作为活动向量使用，排除了活动向量的数据进行编码。
如上所述，本发明的图像信号编码装置，由于不进行高分辨率信号帧的活动向量检测，因此能够削减电路规模，同时由于活动向量不进行编码，因此能够提高高分辨率信号的编码效率。
实施例13
下面，参照图9，就本发明图像信号分层编码装置之一实施例的构成及动作加以说明。图9为本实施例的图像信号分层编码装置框图。
在图9中，901为输入图像信号的输入端，902为降低输入信号分辨率至规定分辨率的低分辨率化器，903为用输入信息将输入信号进行高效编码的第1编码器，904为将输入信号进行高效解码的第2解码器，905为将输入信号的象素数进行插补成规定象素数的插补器，906为利用输入信息将输入信息进行编码的第2编码器，907为检测输入信号间活动向量的活动向量检测器。
下面，说明上述构成的动作。
由输入端901输入的高分辨率信号输出至活动向量检测器907、第2编码器906及低分辨率化器902。在活动向量检测器907求得输入信号的活动向量，并输出至第2编码器906及第1编码器903。在低分辨率化器902，将输入信号降低至规定分辨率并输出至第1编码器903。第1编码器903将输入的活动向量的规定倍数作为活动向量使用，将低分辨率信号进行高效编码，并将编码数据输出至第2解码器904。在第2解码器904将输入信号进行高效解码并输出至插补器905。在插补器905，输入图像信号进行插补成与输入图像信号相同象素数，并输出至第2编码器906。
在第2编码器906，采用空间轴方向预测的空间分辨率预测编码(例如将插补的信号与高分辨率信号的差分进行编码)及使用输入的活动向量将高分辨率信号进行高效编码并输出。这时，活动向量也编码。
另外，在第1编码器903，由于与上述实施例的情况同样的理由，除活动向量外，将低分辨率信号进行高效编码并输出。
如上所述，本发明的图像信号编码装置，由于不进行低分辨率信号帧的活动向量检测，因此能够削减电路规模，同时由于活动向量不进行编码，因此能够提高高分辨率信号的编码效率。
另外，在本实施例中，由于其构成为检测高分辨率输入信号间的活动向量，因此提高了活动向量的精度。
实施例14
在图10中，1001为输入图像信号的输入端，1002为降低输入信号分辨率至规定分辨率的低分辨率化器，1003为将输入信号进行高效编码的第1编码器，1004为将输入信号进行高效解码的第2解码器，1005为将输入信号的象素数进行插补成规定象素数的插补器，1006为求得输入信号间的差分的差分器，1007为将输入信号进行频带分割的频带分割器，1008为将输入信号进行编码的第2编码器。
下面，说明上述构成的动作。
由输入端1001输入的高分辨率信号输出至低分辨率化器1002及差分器1006。在低分辨率化器1002，将输入信号降低至规定分辨率，并输出至第1编码器1003。第1编码器1003对输入信号进行高效编码，将编码数据输出至第2解码器1004。在第2解码器1004，将输入信号进行高效解码并输出至插补器1005。在插补器1005，输入图像信号插补成与输入图像信号相同象素数，并输出至差分器1006。在差分器1006，求得输入信号间同一帧的差分数据，并输出至频带分割器1007。频分割器1007将输入信号分割成具有规定频带的几个图像信号，并输出至第2编码器1008。第2编码器1008将输入信号进行高效编码并输出。
如上所述，本发明的图像信号编码装置，由于对低分辨率信号及高分辨率信号采用不同编码，因此能够将高分辨率信号进行编码，以便有效地将两信号组合，所以能够提高高分辨率信号的图像质量。
实施例15
在图11中，1101为解调单元，1102为分离单元，1103为声音信号解码单元，1104为图像信号解码单元，1105为变长解码器，1106为逆量化器，1107为IDCT器，1108为活动补偿器，1109为存储器，1110为存储控制器，1111为图像信号解码单元，1112为变长解码器，1113为逆量化器，1114为逆DPCM器，1115为活动补偿器，1116为存储器，1117为存储控制器，1118为覆盖单元。
下面，说明上述构成的动作。
解调单元1101将接收的数字广播信号进行规定的解调，生成MPEG流。
分离单元1102从MPEG流分离出规定频道的图像信号压缩流及声音信号压缩流。
声音信号解码单元1103将声音信号压缩流进行解码并输出声音信号。
图像信号解码单元1104，(1)用变长解码器1105，将图像信号压缩流进行变长解码，输出单位宏数据块的活动向量、量化级差及DCT系数，(2)用逆量化器1106，以单位宏数据块解码的量化级差将DCT系数进行逆量化，(3)用IDCT器1107，将DCT系数进行IDCT，(4)在活动补偿器1108，用单位宏数据块的活动向量由DCT的信号及存储器1109内存储的信号回放图像信号，(5)用存储控制器1110，对于回放图像信号存储于存储器1109、将存储于存储器1109的图像信号输出至活动补偿器1108及作为回放图像信号输出进行控制，并将解码的图像信号A输出。
另外，图像信号解码单元1111，(1)用变长解码器1112，将图像信号压缩流进行变长解码，输出单元宏数据块的活动向量、量化级差及DC系数，(2)用逆量化器1113以解码的量化级差仅将编码时量化的DC系数进行逆量化，(3)用逆DPCM器1114仅将编码时进行DPCM的DC系数进行逆DPCM，(4)用活动补偿器1115根据每单位宏数据块取活动向量的1/8倍回放的信号及存储器1116内存储的信号生成回放图像信号，(5)用存储控制器1117对回放图像信号存储于存储器1116、存储于存储器1116的图像信号输出至活动补偿器1115及作为回放图像信号的输出进行控制，并输出解码的图像信号B。
覆盖单元1118将图像信号解码单元1111回放的图像信号B(水平和垂直均为图像信号A的1/8)覆盖在图像信号解码单元1104回放的图像信号A中的规定位置处并输出。
另外，本实施例的图像信号解码单元1111，由于与图像信号解码单元1104相比能够以非常容易的信号处理及较小的存储器容量(具体来说，以存储器1109的1/64存储器容量即可)实现，因此也能够利用软件来实现。另外，在本实施例中取活动向量的1/8倍，也可以用规定的变换将向量进行变换而获得。
由此，本实施例的数字广播解码装置，由于是在以往的数字广播解码装置中具有简单构成的图像信号解码单元1111，因此在接收数字广播中能够容易接收其他频道的子画面。
下面，参照图15再进一步说明上述的图像信号解码单元1111的动作。
图15为说明算法的流程图。
在该图中，在步骤1，将根据MPEG标准压缩的图像信号压缩流进行变长解码，仅取出活动向量、量化级差及DC系数。
在步骤2，仅在DC系数被量化的情况下以解码的量化级差将DC系数进行逆量化。
在步骤3，仅在DC系数进行DPCM的情况下将解码DC系数进行逆DPCM。
在步骤4，将解码的活动向量在水平及垂直两个方向都取1/8倍，再利用由回放中的DC成分及已经回放的DC成分决定的图像信号进行活动补偿。
在步骤5，将活动补偿的DC成分相应的图像信号加以暂时存储，而且按显示顺序输出由DC成分相应的图像信号。
由于采用本算法，能够很容易地将根据MPEG标准压缩的图像信号压缩流在水平及垂直两个方向均按1/8倍的大小回放。
另外，由于本算法的处理简单，因此能够利用软件来实现，也能够进行并行处理。
另外，在本实施例中取活动向量的1/8倍，也可以用规定的变换将向量进行变换而获得。
实施例16
在图12中，与图11相同部分附以相同的标号，并省略其说明。
在图12中，1201为图像信号解码单元，1202为变长解码器，1203为逆量化器，1204为逆DPCM器，1205为活动补偿器，1206为存储器，1207为存储控制器。
下面，说明上述构成的动作。
解调单元1101将接收的数字广播信号进行规定的解调，生成MPEG流。
分离单元1102从MPEG流分离出规定频道的图像信号压缩流及声音信号压缩流。
声音信号压缩单元1103将声音信号压缩流进行解码并输出声音信号。
图像信号解码单元1104将解码的图像信号A输出。
图像信号解码单元1201,(1)用变长解码器1202，将图像信号压缩流进行变长解码，输出单位宏数据块的活动向量、量化级差、DCT系数即水平M(M为1以上8以下的自然数)垂直N(N为1以上8以下的自然数)系数的M×N系数，(2)用逆量化器1203，以编码时量化的量化级差进行逆量化，(3)用逆DCT器1204进行M×N系数的IDCT，并输出M×N信号，(4)用活动补偿器1115，根据以单位宏数据块将活动向量取水平方向M/8倍及垂直方向N/8倍回放的信号及存储器1206内存储的信号回放图像信号，(5)用存储控制器1207，对于回放图像信号存储于存储器1206、存储于存储器1206的图像信号输出至活动补偿器1205及作为回放图像信号输出进行控制，并将解码的图像信号B输出。
覆盖单元1118，将图像信号解码单元1201回放的图像信号B(水平方向为图像信号A的M/8，垂直方向为图像信号A的N/8)覆盖在图像信号解码单元1104回放的图像信号A中的规定位置并输出。
另外，本实施例的图像信号解码单元1201，由于与图像信号解码单元1104相比能够以非常容易的信号处理及较小的存储器容量实现，因此也能够利用软件来实现。另外，在本实施例中取活动向量的水平方向M/8倍、垂直方向N/8倍，也可以用规定的变换将向量进行变换来获得。
由此，本实施例的数字广播解码装置，由于是在以往的数字广播解码装置中具有图像信号解码单元1201，因此在接收数字广播中能够容易接收其他频道的子画面。
下面，参照图16再进一步说明上述的图像信号解码单元1201的动作。
图16为说明算法的流程图。
在该图中，在步骤1，将根据MPEG标准压缩的图像信号压缩流进行变长解码，仅取出活动向量、量化级差及水平方向M个(M为1以上8以下的自然数)、M×N个DCT系数。
在步骤2，以解码的量化级差将DCT系数进行逆量化。
在步骤3，将M×N的DCT系数进行逆DCT。
在步骤4，将解码的活动向量在水平方向取M/8倍、在垂直方向取N/8倍，用回放中的信号与已经回放的信号进行活动补偿。
在步骤5，将活动补偿的图像信号加以暂时存储，而且按显示顺序输出图像信号。
由于采用本算法，能够很容易地将根据MPEG标准压缩的图像信号压缩流以水平方向M/8倍、垂直方向N/8倍的大小回放。
另外，由于本算法的处理简单，因此能够利用软件来实现，也能够进行并行处理。
另外，在本实施例中将活动向量取水平方向M/8倍、垂直方向N/8倍，也可以用规定的变换将向量进行变换来获得。
实施例17
在图13中，与图11相同部分附以相同的标号，并省略其说明。
本实施例的构成，如图13所示，与图11的构成的主要不同点在于设置了K个图像信号解码单元1111。
下面，说明本实施例的动作。
解调单元1101将接收的数字广播信号进行规定的解调，生成MPEG流。
分离单元1102从MPEG流分离出规定频道的图像信号压缩流及声音信号压缩流。
声音信号解码单元1103将声音信号压缩流进行解码并输出声音信号。
图像信号解单元1104将图像信号压缩流进行解码并输出图像信号A。
K个(K为1以上的自然数)图像信号解码单元1111将图像信号压缩流进行解码并输出图像信号B。
覆盖单元1118将图像信号解码单元1111回放的K个图像信号B(水平及垂直都是图像信号A的1/8)覆盖在图像信号解码单元1104回放的图像信号A中的规定位置处并输出。
另外，本实施例的图像信号解码单元1111，由于与图像信号解码单元1104相比能够以非常容易的信号处理及较小的存储器容量实现，因此也能够利用软件来实现。
由此，本实施例的数字广播解码装置，由于是在以往的数字广播解码装置中具有K个图像信号解码单元1111，因此在接收广播中能够容易接收K种其他频道的子画面。
实施例18
在图14中，与图12相同部分附以相同的标号，并省略其说明。
本实施例的构成，如图14所示，与图12的构成的主要不同点在于设置了K个图像信号解码单元1201。
下面，说明本实施例的动作。
解调单元1101将接收的数字广播信号进行规定的解调，生成MPEG流。
分离单元1102从MPEG流分离出规定频道的图像信号压缩流及声音信号压缩流。
声音信号解码单元1103将声音信号压缩流进行解码并输出声音信号。
图像信号解码单元1104将图像信号压缩流进行解码并输出图像信号A。
K个(K为1以上的自然数)图像信号解码单元1201将图像信号压缩流进行解码并输出图像信号B。
覆盖单元1118将图像信号解码单元1111回放的K个图像信号B(水平方向图像信号A的M/8，垂直方向图像信号A的N/8)覆盖在图像信号解码单元1104回放的图像信号A中的规定位置处并输出。
另外，本实施例的图像信号解码单元1201，由于与图像信号解码单元1104相比能够以非常容易的信号处理及较小的存储器容量实现，因此也能够利用软件来实现。
由此，本实施例的数字广播解码装置，由于是在以往的数字广播解码装置中具有K个图像信号解码单元1201，因此在接收广播中能够容易接收K种其他频道的子画面。
实施例19
参照图17，就本发明数字广播信号存储装置之一实施例的构成及动作加以说明。图17为本实施例的数字广播信号存储装置框图。
在图17中，1701为解调单元，1702为分离单元，1703为存储器，1704为变长解码单元，1705为变长编码单元，1706为多路复用单元，1707为记录单元，1708为记录媒体。
在图18中，1801为流缓冲器，1802为标志检测器，1803为活动向量检测器，1804为DCT系数检测器，1805为标志变换器，1806为活动向量变换器，1807为DCT系数抽除器，1808为编码器。
解调单元1701将接收的数字广播信号进行规定的解调，生成MPEG流。
分离单元1702从MPEG流分离出规定频道的图像信号流及声音信号流。
存储器1703将声音信号压缩流加以暂时存储。
变长解码单元1704将图像信号压缩流进行变长解码，仅选择各种标志、活动向量及规定数量(水平方向M系数，垂直方向N系数，M及N分别为1以上8以下的自然数)的DCT系数并输出。
变长编码单元1705，对所选择的多种标志进行规定的标志变换(例如水平象素数及垂直象素数等的变更)，对活动向量进行活动向量变换。然后，将这些变换结果及规定数量的DCT系数进行变长编码。
这里，用图18说明变长解码单元1704及变长编码单元1705。
变长编码单元1704将输入的流暂时存储于流缓冲器1801。
标志检测器1802检测出流中的标志、进行规定的解码并输出。
活动向量检测器1803检测出流中的活动向量、进行向量解码并输出。
DCT系数检测器1804检测出流中的DCT系数、进行DCT系数解码并输出。
在变长编码单元1705中，标志变换器1805将各种标志进行规定的标志变换并输出。
活动向量变换器1806进行活动向量变换(例如，取水平方向M/8倍及垂直方向N/8倍，M及N分别为1以上8以下的自然数)，并输出活动向量。
DCT系数抽除器1807将规定数量(例如，仅仅水平M象素及垂直N象素的低频成分，M及N分别为1以上8以下的自然数)的DCT系数输出。
编码器1808以规定的编码代码将标志变换后的标志、活动向量变换后的向量及规定数量的DCT系数进行变长编码并输出。
另外，多路复用单元1706将存储器1703中的声音信号压缩流及变长编码器1705输出的图像信号压缩流进行多路复用处理。
记录单元1707将多路复用的数据记录于记录媒体1708。
另外，图18中的标志变换器1805、活动向量变换器1806及DCT系数抽除器1807也可以不在变长编码单元705而包含在变长解码单元1704中。
实施例20
在图19中，与图18相同部分附以相同的标号，并省略其说明。
在该图中，1809为场检测器，1810为标志变换器，1811为活动向量变换器，1812为DCT系数抽除器。
本实施例的变长解码单元1704将输入的流暂时存储于流缓冲器1801。
标志检测器1802检测出流中的标志、进行规定的解码并输出。
场检测器1809对该宏数据块是否具有场向量、是否进行场DCT进行检测并输出检测结果。
活动向量检测器1803检测出流中的活动向量、进行向量解码并输出。
DCT系数检测器1804检测出流中的DCT系数、进行DCT系数解码并输出。
另外，在本实施例的变长编码单元1705，标志变换器1810考虑场检测器1809的检测结果对各种标志进行规定的标志变换并输出。
活动向量变换器1811，当活动向量按帧单位决定时，进行规定的活动向量变换(例如，取水平方向M/8倍及垂直方向N/8倍，M及N分别为1以上8以下的自然数)。另外，当活动向量按场单位决定时，利用规定的近似方法变换为帧单位进行活动向量变换(例如，取水平方向M/8倍及垂直方向K/8倍，M及K分别为1以上8以下的自然数)并输出活动向量。
DCT系数抽除器1812，当DCT按帧单位决定时，仅选择规定数量(水平方向M系数及垂直方向N系数，M及N分别为1以上8以下的自然数)的DCT系数。另外，当DCT按场单位决定时，删除一方的DCT系数；并将规定数量(水平方向M系数及垂直方向K系数，M及K分别为1以上8以下的自然)的DCT系数输出。
编码器1808以规定的编码代码将标志变换后的标志、活动向量变换后的向量及规定数量的DCT系数进行变长编码并输出。
另外，图19中的标志变换器1810、活动向量变换器1811及DCT系数抽除器1812也可以不在变长编码单元1705而包含在变长解码单元1704中。
实施例21
在图20中，与图17相同部分附以相同的标号，并省略其说明。
在该图中，1901为回放单元，1902为分离单元，1903为声音信号解码单元，1904为图像信号解码单元。
1905为变长解码器，1906为逆量化器，1907为IDCT器，1908为活动补偿器，1909为存储器，1910为存储控制器。
下面，叙述上述构成的本实施例的动作。
回放单元1901将来自记录媒体1708的记录的多路复用数据进行回放。
分离单元1902将回放的多路复用数据分离成图像信号压缩流及声音信号压缩流并输出。
声音信号解码单元1903将声音信号压缩流进行解码并输出声音信号。
图像信号解码单元1904,(1)用变长解码器1905将图像信号压缩流进行变长解码，用逆量化器1906进行逆量化，(2)用IDCT器1907进行规定的M×N或M×K(M、N及K分别为1以上8以下的自然数)的逆DCT,(3)用活动补偿器1908根据利用活动向量回放的信号及存储器1909内存储的信号回放图像信号，(4)用存储控制器1910对回放图像信号存储于存储器1909、存储于存储器1909的图像信号输出至活动补偿器1908及回放图像信号的输出进行控制。
根据本实施例，由于抽除DCT系数，因此能够削减存储的数据量或降低必须的数据速度。
实施例22
在图21中，与图17相同部分附以相同的标号，并省略其说明。
在该图中，2001为图像信号解码单元，2002变长解码器，2003为逆量化器，2004为IDCT器，2005为活动补偿器，2006为存储器，2007为存储控制器，2008为图像信号编码单元，2009为滤波器，2010为存储器，2011为存储控制器，2012为差分信号生成器，2013为DCT器，2014为量化器，2015为变长编码器。
下面，叙述上述构成的本实施例的动作。
图像信号解码单元2001,(1)用变长解码器2002将图像信号压缩流进行变长解码，用逆量化量2003进行逆量化，(2)用IDCT器2004进行逆IDCT,(3)用活动补偿器2005根据利用活动向量回放的信号及存储器2006内存储的信号回放图像信号，(4)用存储控制器2007对回放图像信号存储于存储器2006、存储于存储器2006的图像信号输出至活动补偿器2005及回放图像信号的输出进行控制。
另一方面，图像信号编码单元2008，用滤波器2009对图像信号解码单元2001输出的图像信号进行规定的滤波，改变图像信号的分辨率。
存储控制器2011对滤波的图像信号存储于存储器2010、存储于存储器2010的图像信号输出至差分信号生成器2012及滤波后的图像信号的输出进行控制。
差分信号生成器2012将图像信号解码单元2001解码的活动向量进行变更以适合前述滤波后的回放图像信号，并生成前述滤波后的回放信号的差分信号。
DCT器2013将差分信号进行DCT。量化器2014将图像信号解码单元2001解码的量化级差进行变更以适合前述滤波后的回放图像信号及压缩后的数据速率并利用它进行量化。
变长编码器2015将量化后的数据及各种附属数据进行变长编码。
另外，从实施例19至22也能够利用软件实现。
由此，即使输入各种格式(分辨率及帧频等)的图像信号也能够很容易地将图像信号作为1种格式记录于记录媒体中并加以回放。

Claims (44)

1．一种图像信号分层编码方法，根据空间分辨率对所输入的图像信号进行分层编码，
其特征在于包括：
由所述输入的图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换步骤；
对所述第2图像信号进行编码的第1编码步骤；
对所述经过编码的第2图像信号进行解码的解码步骤；
根据所述第2图像信号经解码得到的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换步骤；
对根据所述第1图像信号和所述第3图像信号得到的与所述第1图像信号相同高分辨率的图像信号进行编码的第2编码步骤；
将所述第1图像信号包含的或所述第2图像信号包含的高频成分其有关信息输出的高频成分信息输出步骤；以及
根据所述输出的高频成分信息对所述第1编码步骤编码的所述第2图像信号的编码速率和所述第2编码步骤编码的所述第1图像信号的编码速率进行控制的代码量控制步骤。
2．一种图像信号分层编码装置，根据空间辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
根据所述第1图像信号的时间轴相关和作为预测图像信号的所述第3图像信号对该第1图像信号进行编码的第2编码手段；
对所述第1图像信号的频率分布进行测定的频率分布测定手段；以及
根据该频率分布测定结果对所述第1编码手段编码的第2图像信号的编码速率和所述第2编码手段编码的第1图像信号的编码速率进行控制的代码量控制手段。
3．一种图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
生成为所述第1图像信号与所述第3图像信号的差分信号的第4图像信号的差分信号生成手段；
根据所述第1图像信号检出活动的活动检出手段；
用所述第1图像信号的活动检出结果对所述第4图像信号进行编码的第2编码手段；
对所述第1图像信号的频率分布进行测定的频率分布测定手段；以及
根据该频率分布测定结果对所述第1编码手段编码的第2图像信号的编码速率和所述第2编码手段编码的第4图像信号的编码速率进行控制的代码量控制手段。
4．一种图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
根据所述第2图像信号检出活动的活动检出手段；
根据所述第1图像信号的时间轴相关和作为预测图像信号的所述第3图像信号对该第1图像信号进行编码的第2编码手段；以及
根据所述第2图像信号的所述活动检出结果对所述第1编码手段编码的第2图像信号的编码速率和所述第2编码手段编码的第1图像信号的编码速率进行控制的代码量控制手段。
5．一种图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与第1图像信号相同分辨率的第3图像信号的第2分辨变换手段；
根据所述第1图像信号检出活动的活动检出手段；
根据所述第1图像信号的时间轴相关和作为预测图像信号的所述第3图像信号对所述第1图像信号进行编码的第2编码手段；以及
根据所述第1图像信号的所述活动检出结果对所述第1编码手段编码的第2图像信号的编码速率和所述第2编码手段编码的第1图像信号的编码速率进行控制的代码量控制手段。
6．一种图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
生成为所述第1图像信号与所述第3图像信号的差分信号的第4图像信号的差分信号生成手段；
根据所述第1图像信号检出活动的活动检出手段；
用所述第1图像信号的活动检出结果对所述第4图像信号进行编码的第2编码手段；以及
根据所述第1图像信号的活动检出结果对所述第1编码手段编码的第2图像信号的编码速率和所述第2编码手段编码的第4图像信号的编码速率进行控制的代码量控制手段。
7．一种图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
根据所述第2图像信号检出活动的活动检出手段；
根据所述第1图像信号的时间轴相关和作为预测图像信号的所述第3图像信号对该第1图像信号进行编码的第2编码手段；
对所述第1图像信号的频率分布进行测定的频率分布测定手段；以及
根据该频率分布测定结果和所述第2图像信号的活动检出结果对所述第1编码手段编码的第2图像信号的编码速率和所述第2编码手段编码的第1图像信号的编码速率进行控制的代码量控制手段。
8．一种图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
根据所述第1图像信号检出活动的活动检出手段；
根据所述第1图像信号的时间相关和作为预测图像信号的所述第3图像信号对该第1图像信号进行编码的第2编码手段；
对所述第1图像信号的频率分布进行测定的频率分布测定手段；以及
根据该频率分布测定结果和所述第1图像信号的活动检出结果对所述第1编码手段编码的第2图像信号的编码速率和所述第2编码手段编码的第1图像信号的编码速率进行控制的代码量控制手段。
9．一种图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
生成为所述第1图像信号与所述第3图像信号的差分信号的第4图像信号的差分信号生成手段；
根据所述第1图像信号检出活动的活动检出手段；
用所述第1图像信号的活动检出结果对所述第4图像信号进行编码的第2编码手段；
对所述第1图像信号的频率分布进行测定的频率分布测定手段；以及
根据该频率分布测定结果和所述第1图像信号的活动检出结果对所述第1编码手段编码的第2图像信号的编码速率和所述第2编码手段编码的第4图像信号的编码速率进行控制的代码量控制手段。
10．如权利要求2、3、7、8和9中任一项所述的图像信号分层编码装置，其特征在于，
所述频率分布测定手段是采用高通滤波器的分布检测手段，
当所述频率分布的高频成分少时，所述代码量控制手段进行控制，以提高第2图像信号的编码速率。
11．如权利要求2、3、7、8和9中任一项所述的图像信号分层编码装置，其特征在于，
所述第1分辨率变换手段是采用频率特性用F表示的低通滤波器的分辨率变换手段，
所述频率分布测定手段是采用所述第1图像信号用频率特性1-F表示的高通滤波器的分布检测手段，
当所述频率分布的高频成分少时，所述代码量控制手段进行控制，以提高第2图像信号的编码速率。
12．如权利要求2、3、7、8和9中任一项所述的图像信号分层编码装置，其特征在于，
所述频率分布测定手段是对用所述第2分辨率变换手段生成所述第2图像信号的第5图像信号与所述第1图像信号之差分的绝对值和进行测定的手段，
当所述绝对值和成分少时，所述代码量控制手段进行控制，以提高所述第2图像信号的编码速率。
13．如权利要求2、3、7、8和9中任一项所述的图像信号分层编码装置，其特征在于，
所述频率分布测定手段是对用所述第2分辨率变换手段生成所述第2图像信号的第5图像信号与所述第1图像信号之差分的绝对值和进行测定的手段，在测定该绝对值和时，当所述差分的绝对值在规定阈值以下，则加0以代替该绝对值，
当所述绝对值和成分少时，所述代码量控制手段进行控制，以提高所述第2图像信号的编码速率。
14．如权利要求4、5、6、7、8和9中任一项所述的图像信号分层编码装置，其特征在于，所述第1活动检出结果中活动大时，提高所述第2图像信号的编码速率。
15．如权利要求2、4、5、7、8、10、11、12和13中任一项所述的图像信号分层编码装置，其特征在于，所述第1图像信号的编码速率与所述第2图像信号的编码速率之和为固定速率。
16．如权利要求3、6、9、10、11、12和13中任一项所述的图像信号分层编码装置，其特征在于，所述第1图像信号的编码速率与所述第4图像信号的编码速率之和为固定速率。
17．一种图像信号分层编码方法，根据空间分辨率对所输入的图像信号进行分层编码，
其特征在于包括：
由所述输入的图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换步骤；
将所述第2图像信号进行编码的第1编码步骤；
将所述经过编码的第2图像信号进行解码的解码步骤；
根据对所述第2图像信号解码得到的解码图像信号生成与所述第1图像信号相同高分辨率的第3图像信号的第2分辨率变换步骤；
根据多种编码方式对所述第1图像信号进行编码的第2编码步骤，
所述第2编码步骤中，所述多种编码方式中采用基于时间轴方向双向预测的编码方式进行所述编码时，仅将表明所述第1编码步骤中的编码或所述第2编码步骤中的编码所利用的是所述第1图像信号还是所述解码图像信号的信息作为编码对象。
18．一种图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
用下述编码方式中至少一种编码方式：(1)用所述第3图像信号中用到的空间轴方向预测的空间分辨率间预测编码；(2)仅用所述帧内数据的帧内编码；(3)用时间轴方向正向预测的帧间正向预测编码；(4)用时间轴方向双向预测的帧间双向预测编码，对所述第1图像信号的各帧进行编码的第2编码手段，
当所述第2编码手段进行所述帧间双向预测编码时，仅对帧间双向预测得到的活动向量进行编码。
19．一种图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
用下述编码方式中某一种编码方式：(1)仅用所述帧内数据的帧内编码；(2)用时间轴方向正向预测的帧间正向预测编码；(3)用时间轴方向双向预测的帧间双向预测编码，对所述第2图像信号的各帧进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
用下述编码方式中至少一种编码方式：(1)用所述第3图像信号中用到的空间轴方向预测的空间分辨率间预测编码；(2)仅用所述帧内数据的帧内编码；(3)用时间轴方向正向预测的帧间正向预测编码；(4)用时间轴方向双向预测的帧间双向预测编码，对所述第1图像信号的各帧进行编码的第2编码手段，
当所述第2编码手段进行所述帧间双向预测编码时，仅对帧间双向预测得到的活动向量进行编码。
20．如权利要求19所述的图像信号分层编码装置，其特征在于，所述第2编码手段在所述第1编码手段进行所述帧内编码时，靠所述帧内编码对与该帧对应的帧进行编码。
21．如权利要求19所述的图像信号分层编码装置，其特征在于，所述第2编码手段在所述第1编码手段进行所述帧间双向预测编码时，靠所述帧内编码或所述帧间正向预测编码对与该帧对应的帧进行编码。
22．如权利要求19所述的图像信号分层编码装置，其特征在于，所述第2编码手段在所述第1编码手段进行所述帧内编码时，仅靠所述空间分辨率间预测编码对与该帧对应的帧进行编码。
23．如权利要求19所述的图像信号分层编码装置，其特征在于，所述第1编码手段进行所述帧间正向预测编码或所述帧间双向预测编码时，所述第2编码手段将规定倍的所述第1编码手段检测出的活动向量用作活动向量，以与所述第1编码手段编码时的编码方式相同的编码方式，对与所述第1编码手段编码的帧对应的帧进行编码。
24．如权利要求23所述的图像信号分层编码装置，其特征在于，所述第2编码手段不对规定倍的所述第1编码手段检测出的活动向量进行编码。
25．一种图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
用下述编码方式中至少一种编码方式：(1)用所述第3图像信号中用到的空间轴方向预测的空间分辨率间预测编码；(2)仅用所述帧内数据的帧内编码；(3)用时间轴方向正向预测的帧间正向预测编码；(4)用时间轴方向双向预测的帧间双向预测编码，对所述第1图像信号的各帧进行编码的第2编码手段，
所述第2编码手段每隔所述第1图像信号的规定数帧，仅靠所述空间分辨率间预测编码对该帧进行编码。
26．一种图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
用下述编码方式中至少一种编码方式：(1)用所述第3图像信号中用到的空间轴方向预测的空间分辨率间预测编码；(2)仅用所述帧内数据的帧内编码；(3)用时间轴方向正向预测的帧间正向预测编码；(4)用时间轴方向双向预测的帧间双向预测编码，对所述第1图像信号的各帧进行编码的第2编码手段；以及
对所述第1图像信号各帧间的活动向量进行检测的活动向量检测手段，
所述第2编码手段用所述活动向量检测手段得出的活动向量进行编码，而所述第1编码手段用规定倍的所述活动向量检测手段得出的活动向量进行编码。
27．如权利要求26所述的图像信号分层编码装置，其特征在于，所述第2编码手段和所述第1编码手段中仅仅某一个对所述活动向量检测手段得出的活动向量或该活动向量的规定数分之一进行编码。
28．一种图像信号分层编码方法，根据空间分辨率对所输入的图像信号进行分层编码，
其特征在于包括：
由所述输入的图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换步骤；
根据所述第2图像信号进行编码的第1编码步骤；
对所述经过编码的第2图像信号进行解码的解码步骤；
根据对所述第2图像信号解码得到的解码图像信号生成与所述第1图像信号相同高分辨率的第3图像信号的第2分辨率变换步骤；
求得所述第1图像信号和第3图像信号互相对应的帧间数据的差分，生成差分信号的差分信号生成步骤；
将所述生成的差分信号分成多个规定的频带，生成频带分割信号的频带分割步骤；以及
对所述生成的频带分割信号进行编码的第2编码步骤。
29．一种图像信号分层编码装置，根据空间分辨率对图像信号进行分层编码，
其特征在于包括：
由输入图像信号即高分辨率的第1图像信号生成低分辨率的第2图像信号的第1分辨率变换手段；
对所述第2图像信号进行编码的第1编码手段；
对所述经过编码的第2图像信号进行解码的解码手段；
由所述第2图像信号的解码图像信号生成与所述第1图像信号相同分辨率的第3图像信号的第2分辨率变换手段；
求得所述第1图像信号和第3图像信号互相对应的帧间数据的差分，制作差分信号的差分信号检出手段；
将所述差分信号检出手段得出的差分信号分成多个规定的频带，制作频带分割信号的频带分割手段；以及
对所述频带分割手段得出的频带分割信号进行编码的第2编码手段。
30．一种数字广播解码方法，对经过MPEG压缩及多路复用的广播信号进行解码，
其特征在于包括：
对所述广播信号进行规定的解调的解调步骤；
对所述经过解调的广播信号解多路复用、分离第1频道的图像信号压缩流和声音信号压缩流的分离步骤；
对所述分离的第1频道图像信号压缩流进行解码的第1图像信号解码步骤；
对所述分离的第1频道声音信号压缩流进行解码的第1声音信号解码步骤；以及
对与所述第1频道分开的第2频道图像信号压缩流进行解码的第2图像信号解码步骤，
所述第2图像信号解码步骤中，(1)对所述第2频道的图像信号压缩流进行解码，(2)提取活动向量与DCT系数中的DC成分，或活动向量与DC成分以及除了该DC成分剩下的DCT系数中的一部分，(3)根据该提取的内容对所述第2图像信号解码。
31．一种数字广播解码装置，对图像信号及声音信号经过MPEG压缩、规定的多路复用和调制所播送的数字广播信号进行解码，
其特征在于包括：
对所述广播信号进行规定的解调的解调单元；
对所述经过解调的广播信号解所述多路复用、分离至少1个频道的图像信号压缩流和声音信号压缩流的分离单元；
对所述分离的规定频道的图像信号压缩流进行解码的第1图像信号解码单元；
对所述分离的规定频道的声音信号压缩流进行解码的声音信号解码单元；
对所述规定频道以外的图像信号压缩流进行解码并输出的至少1个第2图像信号解码单元；以及
使所述第2图像信号解码单元输出的图像信号覆盖在所述第1图像信号解码单元输出的图像信号中规定位置输出的图像信号覆盖单元，
所述第2图像信号解码单元包括：
变长解码器，(1)对所述图像信号压缩流进行变长解码，(2)提取活动向量和DC成分，(3)所述DC成分量化时还提取为所述量化所用除数的量化级差；
仅在所述DC成分进行过DPCM时进行逆DPCM的逆DPCM器；
仅在所述DC成分进行过量化时进行逆量化的逆量化器；
存储所述经过解码的图像信号的存储器；
用所述活动向量经过规定变换后进行活动补偿并解码的图像信号和存储器内的图像信号进行活动补偿的活动补偿器；以及
控制向所述存储器和从所述存储器读出的存储控制器。
32．如权利要求31所述的数字广播解码装置，其特征在于，所述规定变换是指，取所述活动向量的1/8倍。
33．一种数字广播解码装置，对图像信号及声音信号经过MPEG压缩、规定的多路复用和调制所播送的数字广播信号进行解码，
其特征在于包括：
对所述广播信号进行规定的解调的解调单元；
对所述经过解调的广播信号解所述多路复用，分离至少1个频道的图像信号压缩流和声音信号压缩流的分离单元；
对所述分离的规定频道的图像信号压缩流进行解码的第1图像信号解码单元；
对所述分离的规定频道的声音信号压缩流进行解码的声音信号解码单元；
对所述规定频道以外的图像信号压缩流进行解码并输出的至少1个第2图像信号解码单元；以及
使所述第2图像信号解码单元输出的图像信号覆兽在所述第1图像信号解码单元输出的图像信号中规定位置输出的图像信号覆盖单元，
所述第2图像信号解码单元包括：
变长解码器，(1)对所述图像信号压缩流进行变长解码，(2)提取活动向量、为量化所用除数的量化级差、和水平方向M个(M为1以上8以下的自然数)垂直方向N个(N为1以上8以下的自然数)合计M×N个DCT系数；
对所述M×N个DCT系数进行逆量化的逆量化器；
存储经过解码的图像信号的存储器；
用所述活动向量分别经过水平方向、垂直方向规定变换后进行活动补偿并解码的图像信号和存储器内的图像信号进行活动补偿的活动补偿器；以及
控制向所述存储器写入和从所述存储器读出的存储控制器。
34．如权利要求33所述的数字广播解码装置，其特征在于，所述规定变换是指，对所述活动向量在水平方向上取M/8倍，在垂直方向上取N/8倍。
35．如权利要求31或33所述的数字广播解码装置，其特征在于，
设置有K个(K为1以上的自然数)所述第2图像信号解码单元，
所述图像信号覆盖单元输出时将所述K个第2图像信号解码单元输出的图像信号覆盖在所述第1图像信号解码单元输出的图像信号中规定位置。
36．一种图像信号解码系统，对经过规定编码的图像信号进行解码，
其特征在于包括：
变长编码手段，(1)对所述图像信号压缩流进行变长解码，(2)提取活动向量和DC成分，(3)所述DC成分经过量化时，还提取为所述量化所用除数的量化级差；
仅在所述DC成分进行过DPCM时进行逆DPCM的逆DPCM手段；
仅在所述DC成分进行过量化时进行逆量化的逆量化手段；
存储经过解码的图像信号的存储手段；
用所述活动向量经过规定变换后进行活动补偿并解码的图像信号和存储器内的图像信号进行活动补偿的活动补偿手段；以及
控制向所述存储器写入和从所述存储器读出的存储控制手段。
37．如权利要求36所述的图像信号解码系统，其特征在于，所述规定变换是指，取所述活动向量的1/8倍。
38．一种图像信号解码系统，对经过规定编码的图像信号进行解码，
其特征在于包括：
对图像信号压缩流进行变长解码、并提取活动向量、为量化所用除数的量化级差、和水平方向M个(M为1以上8以下的自然数)垂直方向N个(N为1以上8以下的自然数)合计M×N个DCT系数的变长解码手段；
对所述M×N个DCT系数进行逆量化的逆量化手段；
存储经过解码的图像信号的存储手段；
用所述活动向量分别经过水平方向、垂直方向规定变换后进行活动补偿并解码的图像信号和存储器内的图像信号进行活动补偿的活动补偿手段；以及
控制向所述存储器写入和从所述存储器读出的存储控制手段。
39．如权利要求38所述的图像信号解码系统，其特征在于，所述规定变换是指，对所述活动向量在水平方向上取M/8倍，在垂直方向上取N/8倍。
40．一种数字广播信号记录方法，接收并记录经过MPEG压缩及多路复用的广播信号，
其特征在于包括：
接收所述广播信号并进行规定解调的解调步骤；
从所述经解调的广播信号中分离出图像信号压缩流的分离步骤；
对所述分离的图像信号压缩流进行解码的解码步骤；
根据所述经过解码的流中规定标志和/或规定活动向量和规定DCT系数，(1)将所述经过解码的流的各种格式统一为规定格式，和/或，(2)削减所述经过解码的流的数据量，然后(3)进行编码的编码步骤；以及
将所述经过编码的图像信号数据记录于规定记录媒体的记录步骤。
41．一种数字广播信号存储装置，记录采用MPEG压缩的广播信号，
其特征在于包括：
对图像信号及声音信号经过MPEG压缩、规定的多路复用和调制所播送的数字广播信号进行规定解调的解调单元；
解所述规定的多路复用，分离规定频道的图像信号压缩流和声音信号压缩流的分离单元；
暂时存储所述分离的声音信号压缩流的存储器；
对所述分离的图像信号压缩流进行变长解码、选择各种标志、活动向量和规定数量(水平方向M个系数、垂直方向N个系数，M和N分别为1以上8以下的自然数)的DCT系数的变长解码器；
对于所述选定的各种标志进行规定的标志变换，对于所述活动向量进行活动向量变换，再进行变长编码的变长编码器；
对所述经变长编码的图像信号数据和所述声音信号压缩流进行多路复用的多路复用单元；以及
将所述多路复用的数据记录于规定记录媒体的记录单元。
42．一种数字广播信号存储装置，记录采用MPEG压缩的广播信号，
其特征在于包括：
对图像信号及声音信号经过MPEG压缩、规定的多路复用和调制所播送的数字广播信号进行规定解调的解调单元；
解所述规定的多路复用，分离规定频道的图像信号压缩流和声音信号压缩流的分离单元；
暂时存储所述分离的声音信号压缩流的存储器；
变长解码器，对所述分离的图像信号压缩流进行变长解码，选择各种标志，(1)活动向量按单位帧确定时，进行规定的活动向量变换，(2)活动向量按单位场确定时、根据规定的近似方法变换为单位帧，(3)DCT按单位帧确定时、仅选择规定数量(水平方向M个系数、垂直方向N个系数，M、N分别为1以上8以下的自然数)的DCT系数，(4)DCT按单位场确定时，删除某一DCT系数，仅选择规定数量(水平方向M个系数、垂直方向K个系数，M、K分别为1以上8以下的自然数)的DCT系数；
对所述选定的各种标志、活动向量、DCT系数进行规定的标志变换，以进行变长编码的变长编码器；
对所述经变长编码的图像信号数据和所述声音信号压缩流进行多路复用的多路复用单元；以及
将所述经多路复用的数据记录于规定记录媒体的记录单元。
43．一种图像声音信号回放装置，对图像信号及声音信号进行回放，
其特征在于包括：
对权利要求41或42所述的数字广播信号存储装置记录的数据进行回放的回放单元；
将所述回放的数据分离为图像信号压缩流和声音信号压缩流的分离单元；
对所述分离的图像信号压缩流进行解码的图像信号解码单元；以及
对所述分离的声音信号压缩流进行解码的声音信号解码单元，
所述图像信号解码单元包括：
对所述图像信号压缩流进行变长解码的变长解码器；
将所述经变长解码的数据进行逆量化的逆量化器；
将所述逆量化的数据进行规定的M×N或M×K逆DCT的IDCT器；
存储经过解码的图像信号的存储器；
用经活动向量解码的图像信号和存储器内的图像信号进行活动补偿的活动补偿器；以及
控制向所述存储器写入和从所述存储器读出的存储控制器。
44．一种数字广播信号存储装置，记录采用MPEG压缩的广播信号，
其特征在于包括：
对图像信号及声音信号经过MPEG压缩、规定的多路复用和调制所播送的数字广播信号进行规定解调的解调单元；
解所述规定的多路复用，分离规定频道的图像信号压缩流和声音信号压缩流的分离单元；
暂时存储所述分离的声音信号压缩流的存储器；
对所述分离的图像信号压缩流进行解码的图像信号解码单元；
对所述图像信号解码单元输出的图像信号进行压缩的图像信号压缩单元；
对所述图像信号压缩单元压缩的图像信号压缩流同所述声音信号压缩流进行多路复用的多路复用单元；以及
将所述经多路复用的数据记录于规定记录媒体的记录单元，
所述图像信号解码单元包括：
对所述图像信号压缩流进行变长解码的变长解码器；
对所述经变长解码的数据进行逆量化的逆量化器；
对所述逆量化的数据进行逆DCT的逆DCT器；
存储经过解码的图像信号的存储器；
用经活动向量解码的图像信号和存储器内的图像信号进行活动补偿的活动补偿器；以及
控制向所述存储器写入和从所述存储器读出的存储控制器，
所述图像信号压缩单元包括：
对所述图像信号解码单元输出的所述数字广播信号中图像信号压缩流的回放图像信号进行规定的滤波，改变图像信号分辨率的滤波器；
用所述图像信号解码单元输出的所述图像信号压缩流中的所述活动向量生成所述滤波后的回放图像信号的差分信号的差分信号生成器；
对所述差分信号进行DCT的DCT器；
用输入的所述各种标志对所述经过DCT的数据进行量化的量化器；以及
对所述量化器输出进行变长编码的变长编码器，
输出新的图像信号压缩流。
CN98118596A 1997-09-03 1998-09-03 分层图像编码解码、数字广播信号记录及图像音频的解码 Pending CN1213935A (zh)

Applications Claiming Priority (8)

Application Number Priority Date Filing Date Title
JP23800897A JPH1188876A (ja) 1997-09-03 1997-09-03 デジタル放送復号化装置ならびに映像信号復号化方式
JP238008/97 1997-09-03
JP25961397A JPH1198478A (ja) 1997-09-25 1997-09-25 デジタル放送信号蓄積装置と映像音声信号再生装置
JP259613/97 1997-09-25
JP26846897A JPH11112998A (ja) 1997-10-01 1997-10-01 映像信号階層化符号化装置
JP268468/97 1997-10-01
JP29448797A JPH11136683A (ja) 1997-10-27 1997-10-27 映像信号符号化装置
JP294487/97 1997-10-27

Publications (1)

Publication Number Publication Date
CN1213935A true CN1213935A (zh) 1999-04-14

Family

ID=27477713

Family Applications (1)

Application Number Title Priority Date Filing Date
CN98118596A Pending CN1213935A (zh) 1997-09-03 1998-09-03 分层图像编码解码、数字广播信号记录及图像音频的解码

Country Status (3)

Country Link
US (2) US6477202B1 (zh)
EP (1) EP0901289A3 (zh)
CN (1) CN1213935A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005096508A1 (fr) * 2004-04-01 2005-10-13 Beijing Media Works Co., Ltd Equipement de codage et de decodage audio ameliore, procede associe
CN101018328B (zh) * 2003-05-19 2012-08-22 株式会社日立制作所 编码装置、使用它的摄像机装置及编码方法
CN103258552A (zh) * 2012-02-20 2013-08-21 扬智科技股份有限公司 调整播放速度的方法

Families Citing this family (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6477202B1 (en) * 1997-09-03 2002-11-05 Matsushita Electric Industrial Co., Ltd. Apparatus of layered picture coding, apparatus of picture decoding, methods of picture decoding, apparatus of recording for digital broadcasting signal, and apparatus of picture and audio decoding
FI109393B (fi) * 2000-07-14 2002-07-15 Nokia Corp Menetelmä mediavirran enkoodaamiseksi skaalautuvasti, skaalautuva enkooderi ja päätelaite
JP2002112257A (ja) * 2000-07-26 2002-04-12 Matsushita Electric Ind Co Ltd 映像圧縮伝送装置および方法
JP4769392B2 (ja) * 2001-09-25 2011-09-07 キヤノン株式会社 信号処理装置
US7003035B2 (en) 2002-01-25 2006-02-21 Microsoft Corporation Video coding methods and apparatuses
US20040001546A1 (en) 2002-06-03 2004-01-01 Alexandros Tourapis Spatiotemporal prediction for bidirectionally predictive (B) pictures and motion vector prediction for multi-picture reference motion compensation
US7289674B2 (en) * 2002-06-11 2007-10-30 Nokia Corporation Spatial prediction based intra coding
US7154952B2 (en) 2002-07-19 2006-12-26 Microsoft Corporation Timestamp-independent motion vector prediction for predictive (P) and bidirectionally predictive (B) pictures
KR100522595B1 (ko) * 2002-11-29 2005-10-19 삼성전자주식회사 엠펙 비디오 복호화방법 및 엠펙 비디오 복호화기
US7382937B2 (en) * 2003-03-07 2008-06-03 Hewlett-Packard Development Company, L.P. Method and apparatus for re-constructing high-resolution images
JP4113044B2 (ja) * 2003-05-23 2008-07-02 松下電器産業株式会社 画像符号化装置
KR100574523B1 (ko) * 2003-07-31 2006-04-27 삼성전자주식회사 움직임 타입 판단 장치 및 방법
US8064520B2 (en) 2003-09-07 2011-11-22 Microsoft Corporation Advanced bi-directional predictive coding of interlaced video
GB2415639B (en) * 2004-06-29 2008-09-17 Sony Comp Entertainment Europe Control of data processing
US20060004579A1 (en) * 2004-07-01 2006-01-05 Claudatos Christopher H Flexible video surveillance
US8081214B2 (en) * 2004-10-12 2011-12-20 Enforcement Video, Llc Method of and system for mobile surveillance and event recording
WO2006087319A2 (en) * 2005-02-18 2006-08-24 Thomson Licensing Method for deriving coding information for high resolution pictures from low resoluton pictures and coding and decoding devices implementing said method
JP2007096431A (ja) * 2005-09-27 2007-04-12 Matsushita Electric Ind Co Ltd 任意の変換比率を有するデジタル・ビデオ・フォーマット下方変換装置及び方法
US8477840B2 (en) 2005-09-29 2013-07-02 Thomson Research Funding Corporation Method and apparatus for constrained variable bit rate (VBR) video encoding
US8982944B2 (en) * 2005-10-12 2015-03-17 Enforcement Video, Llc Method and system for categorized event recording of images in multiple resolution levels
KR100746005B1 (ko) * 2005-10-17 2007-08-06 삼성전자주식회사 다중 목적의 비디오 스트림을 처리하는 장치 및 방법
KR101215615B1 (ko) * 2006-01-10 2012-12-26 삼성전자주식회사 동일 채널 내에서 서로 다른 코덱을 이용하여 부호화된 비디오 및 오디오 데이터 스트림의 재생을 위한 코덱 변경 방법 및 장치
JP4384130B2 (ja) * 2006-03-28 2009-12-16 株式会社東芝 動画像復号方法及び装置
JP4356777B2 (ja) * 2007-06-18 2009-11-04 ソニー株式会社 画像処理装置、画像処理方法、プログラム、及び記録媒体
US8254455B2 (en) 2007-06-30 2012-08-28 Microsoft Corporation Computing collocated macroblock information for direct mode macroblocks
JP2009033582A (ja) * 2007-07-30 2009-02-12 Hitachi Ltd 画像信号記録再生装置
US20090046157A1 (en) * 2007-08-13 2009-02-19 Andrew Cilia Combined wide-angle/zoom camera for license plate identification
US8599368B1 (en) 2008-01-29 2013-12-03 Enforcement Video, Llc Laser-based speed determination device for use in a moving vehicle
CA2714362A1 (en) 2008-01-29 2009-08-06 Enforcement Video, Llc Omnidirectional camera for use in police car event recording
WO2009102480A2 (en) * 2008-02-15 2009-08-20 Enforcement Video, Llc System and method for multi-resolution storage of images
JP5369893B2 (ja) * 2008-05-30 2013-12-18 株式会社Ｊｖｃケンウッド 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、動画像復号装置、動画像復号方法、動画像復号プログラム、動画像再符号化装置、動画像再符号化方法、動画像再符号化プログラム
US8189666B2 (en) 2009-02-02 2012-05-29 Microsoft Corporation Local picture identifier and computation of co-located information
US20100289904A1 (en) * 2009-05-15 2010-11-18 Microsoft Corporation Video capture device providing multiple resolution video feeds
DE102009046362A1 (de) * 2009-11-03 2011-05-05 Tesa Se Haftklebestoff aus einem vernetzbaren Polyolefin und einem Klebharz
US8736680B1 (en) 2010-05-18 2014-05-27 Enforcement Video, Llc Method and system for split-screen video display
US9602819B2 (en) * 2011-01-31 2017-03-21 Apple Inc. Display quality in a variable resolution video coder/decoder system
US20120275502A1 (en) * 2011-04-26 2012-11-01 Fang-Yi Hsieh Apparatus for dynamically adjusting video decoding complexity, and associated method
GB2544800A (en) * 2015-11-27 2017-05-31 V-Nova Ltd Adaptive bit rate ratio control
US10341605B1 (en) 2016-04-07 2019-07-02 WatchGuard, Inc. Systems and methods for multiple-resolution storage of media streams
JP6969559B2 (ja) * 2016-08-22 2021-11-24 ソニーグループ株式会社 送信装置、送信方法、受信装置および受信方法
CN110069744B (zh) * 2018-01-22 2020-11-03 北京航空航天大学 一种压力传感器阶跃响应信号稳定值的估计方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5227878A (en) * 1991-11-15 1993-07-13 At&T Bell Laboratories Adaptive coding and decoding of frames and fields of video
GB9206860D0 (en) * 1992-03-27 1992-05-13 British Telecomm Two-layer video coder
JP3545000B2 (ja) * 1992-11-02 2004-07-21 ソニー株式会社 画像信号符号化装置、画像信号復号化装置
CA2126467A1 (en) * 1993-07-13 1995-01-14 Barin Geoffry Haskell Scalable encoding and decoding of high-resolution progressive video
JP3170193B2 (ja) * 1995-03-16 2001-05-28 松下電器産業株式会社 画像信号の符号化装置及び復号装置
US6023301A (en) * 1995-07-14 2000-02-08 Sharp Kabushiki Kaisha Video coding device and video decoding device
JP3263807B2 (ja) * 1996-09-09 2002-03-11 ソニー株式会社 画像符号化装置および画像符号化方法
US6233017B1 (en) * 1996-09-16 2001-05-15 Microsoft Corporation Multimedia compression system with adaptive block sizes
US6173013B1 (en) * 1996-11-08 2001-01-09 Sony Corporation Method and apparatus for encoding enhancement and base layer image signals using a predicted image signal
US6477202B1 (en) * 1997-09-03 2002-11-05 Matsushita Electric Industrial Co., Ltd. Apparatus of layered picture coding, apparatus of picture decoding, methods of picture decoding, apparatus of recording for digital broadcasting signal, and apparatus of picture and audio decoding

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101018328B (zh) * 2003-05-19 2012-08-22 株式会社日立制作所 编码装置、使用它的摄像机装置及编码方法
WO2005096508A1 (fr) * 2004-04-01 2005-10-13 Beijing Media Works Co., Ltd Equipement de codage et de decodage audio ameliore, procede associe
CN103258552A (zh) * 2012-02-20 2013-08-21 扬智科技股份有限公司 调整播放速度的方法
CN103258552B (zh) * 2012-02-20 2015-12-16 扬智科技股份有限公司 调整播放速度的方法

Also Published As

Publication number Publication date
EP0901289A2 (en) 1999-03-10
US6477202B1 (en) 2002-11-05
EP0901289A3 (en) 2003-07-02
US6801574B2 (en) 2004-10-05
US20010048719A1 (en) 2001-12-06

Similar Documents

Publication Publication Date Title
CN1213935A (zh) 分层图像编码解码、数字广播信号记录及图像音频的解码
CN1172532C (zh) 图像预测编码/解码装置和方法以及记录媒体
CN1075321C (zh) 图像编码装置及方法
CN1175670C (zh) 图像信号转换方法和设备以及图像提供系统
CN1206864C (zh) 结合率失真优化的码率控制的方法及其装置
CN1320809C (zh) 图像处理装置与方法
CN1272967C (zh) 视频编码方法和装置
CN1169303C (zh) 数据处理装置和方法以及记录介质
CN1271862C (zh) 动画图象编码方法和动画图象译码方法
CN1204753C (zh) 基于相邻像素预测的帧内预测方法
CN1182518A (zh) 编码装置、译码装置和编码、译码方法以及图象处理装置
CN1229758C (zh) 正交变换图像的分辨率变换装置和方法
CN1893655A (zh) 图像预测编码/解码装置和方法以及记录媒体
CN1170437C (zh) 图像信号混洗装置和方法
CN1669329A (zh) 信息信号处理设备、信息信号处理方法、图像信号处理设备、图像显示设备、生成用在其中的校正数据的设备和方法、生成系数数据的设备和方法、执行这些方法的程序以及存储程序的计算机可读媒体
CN1265647C (zh) 块组编码结构及基于块组结构的自适应分阶段预测编码方法
CN101064852A (zh) 动画图象译码方法和动画图象译码装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
AD01 Patent right deemed abandoned
C20 Patent right or utility model deemed to be abandoned or is abandoned