JPH11196411A - 画像符号化装置、画像符号化方法、画像復号化装置、及び画像復号化方法 - Google Patents

画像符号化装置、画像符号化方法、画像復号化装置、及び画像復号化方法

Info

Publication number
JPH11196411A
JPH11196411A JP5469498A JP5469498A JPH11196411A JP H11196411 A JPH11196411 A JP H11196411A JP 5469498 A JP5469498 A JP 5469498A JP 5469498 A JP5469498 A JP 5469498A JP H11196411 A JPH11196411 A JP H11196411A
Authority
JP
Japan
Prior art keywords
vop
intra
image
information
decoding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP5469498A
Other languages
English (en)
Other versions
JP3860323B2 (ja
Inventor
Yuri Hasegawa
由里 長谷川
Shunichi Sekiguchi
俊一 関口
Shinichi Kuroda
慎一 黒田
Kotaro Asai
光太郎 浅井
Hirobumi Nishikawa
博文 西川
Yoshimi Isu
芳美 井須
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP05469498A priority Critical patent/JP3860323B2/ja
Priority to US09/530,136 priority patent/US7127110B1/en
Priority to TW87117418A priority patent/TW407431B/zh
Priority to EP20100000894 priority patent/EP2187641B1/en
Priority to EP20100011904 priority patent/EP2306723B1/en
Priority to AU96474/98A priority patent/AU9647498A/en
Priority to PCT/JP1998/004815 priority patent/WO1999022517A1/ja
Priority to EP20100011902 priority patent/EP2306721B1/en
Priority to KR10-2000-7004504A priority patent/KR100377286B1/ko
Priority to CA 2308460 priority patent/CA2308460C/en
Priority to EP20050008083 priority patent/EP1558038B1/en
Priority to CNB988127067A priority patent/CN1201586C/zh
Priority to EP20100011903 priority patent/EP2306722B1/en
Priority to EP98950368A priority patent/EP1026899B1/en
Priority to DE1998633443 priority patent/DE69833443T2/de
Priority to EP20100000893 priority patent/EP2200314B1/en
Priority to DE69841698T priority patent/DE69841698D1/de
Publication of JPH11196411A publication Critical patent/JPH11196411A/ja
Priority to HK01100809A priority patent/HK1030121A1/xx
Priority to HK05110863A priority patent/HK1079022A1/xx
Priority to US11/231,835 priority patent/US7197188B2/en
Application granted granted Critical
Publication of JP3860323B2 publication Critical patent/JP3860323B2/ja
Priority to US11/707,922 priority patent/US7362907B2/en
Priority to US12/068,200 priority patent/US7970217B2/en
Priority to HK10106604.3A priority patent/HK1140347A1/xx
Priority to HK10107855A priority patent/HK1141653A1/xx
Priority to HK11105762A priority patent/HK1151912A1/xx
Priority to HK11105829A priority patent/HK1152177A1/xx
Priority to HK11105905.0A priority patent/HK1151915A1/xx
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45504—Abstract machines for programme code execution, e.g. Java virtual machine [JVM], interpreters, emulators
    • G06F9/45516—Runtime code conversion or optimisation
    • G06F9/45525—Optimisation or modification within the same instruction set architecture, e.g. HP Dynamo
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
    • H04N19/21—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding with binary alpha-plane coding for video objects, e.g. context-based arithmetic encoding [CAE]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
    • H04N19/29—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding involving scalability at the object level, e.g. video object layer [VOL]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/31—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the temporal domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/39—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability involving multiple description coding [MDC], i.e. with separate layers being structured as independently decodable descriptions of input picture data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234318—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/633—Control signals issued by server directed to the network components or client
    • H04N21/6332—Control signals issued by server directed to the network components or client directed to client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/654—Transmission by server directed to the client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/654—Transmission by server directed to the client
    • H04N21/6547—Transmission by server directed to the client comprising parameters, e.g. for client setup

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

(57)【要約】 【課題】 符号化側でオブジェクトのＶＯＬ、ＧＯＶな
どに含まれる全てのＶＯＰをイントラのみで符号化した
場合には、復号処理を容易かつ簡単に行なう。 【解決手段】 符号化側で作成される符号化ビットスト
リーム３０は、ＶＯヘッダ３０ａ、ＶＯＬヘッダ３０
ｂ、ＧＯＶヘッダ３０ｃ、ＶＯＰヘッダ３０ｄ、ＶＯＰ
データ３０ｅから構成されているが、ＶＯＬヘッダ３０
ｂに、ＶＯＬまたはＧＯＶに含まれる全てのＶＯＰデー
タ３０ｅがイントラ符号化されていることを示すオブジ
ェクトイントラ符号化表示指示信号７’が多重化されて
いる。このため、復号側では、ＶＯＬヘッダ３０ｂのこ
のオブジェクトイントラ符号化表示指示信号７’を解析
するだけで、符号化ビットストリーム３０中のＶＯＬま
たはＧＯＶに含まれるＶＯＰデータ３０ｅ全てがイント
ラ符号化されているか否かが分かり、ＶＯＰの駒落し制
御やランダムアクセス等の処理が容易に行なえる。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、画像を符号化して
符号化ビットストリームを作成する画像符号化装置およ
び画像符号化方法、符号化ビットストリームを入力して
その符号化ビットストリームに含まれている画像信号を
復号する画像復号化装置および画像復号化方法に関し、
特に、オブジェクト単位に画像を符号化するＭＰＥＧ−
４対応の画像符号化装置および画像符号化方法、オブジ
ェクト単位に画像を符号化した符号化ビットストリーム
を復号するＭＰＥＧ−４対応の画像復号化装置および画
像復号化方法に関するものである。
【０００２】
【従来の技術】従来、画像信号を符号化または復号する
方式として、例えば、ISO/IEC JTC11/SC29/WG11にて標
準化作業が進められているＭＰＥＧ−４(Moving Pictur
e Experts Group Phase-4)がある。ＭＰＥＧ−４は、動
画像シーケンスを時間／空間的に任意の形状をとる動画
像オブジェクトの集合体としてとらえ、各動画像オブジ
ェクトを単位として符号化・復号化を行う方式である。
【０００３】図４２に、ＭＰＥＧ−４におけるビデオデ
ータ構造を示す。ＭＰＥＧ−４では時間軸を含めた動画
像オブジェクトをVideo Object(ＶＯ)と呼び、ＶＯの構
成要素をVideo Object Layer(ＶＯＬ)と呼び、ＶＯＬの
構成要素をGroup of Video Object Plane(ＧＯＶ)と呼
び、ＧＯＶの各時刻の状態を表し符号化の単位となる画
像データをVideo Object Plane(ＶＯＰ)と呼ぶ。ＶＯは
例えば、テレビ会議のシーンの中のそれぞれの話者や背
景などに相当し、ＶＯＬはそれら話者や背景などの固有
の時間・空間解像度をもつ単位であり、ＶＯＰはそれら
ＶＯＬの各時刻（＝フレームに相当）における画像デー
タである。ＧＯＶはＶＯＰを複数集めた編集やランダム
アクセスなどの単位として設けられているデータ構造
で、必ずしも符号化に用いられなくてもよい。
【０００４】図４３に、ＶＯＰの具体例を示す。同図
は、２つのＶＯＰ（ＶＯＰ1は人物、ＶＯＰ2は壁にかけ
られた絵画）を示している。各ＶＯＰはカラー濃淡レベ
ルを表すテクスチャデータと、ＶＯＰの形状を表す形状
データとからなる。テクスチャデータは画素あたり８ビ
ットの輝度信号、色差信号（輝度信号に対して水平・垂
直方向に１／２にサブサンプルされたサイズ）からな
り、形状データはＶＯＰ内部を１、ＶＯＰ外部を０とす
る輝度信号の画像サイズと同じ２値のマトリクスデータ
である（実際には、形状データは画素あたり8ビット幅
を持ち、ＶＯＰ内部を２５５、ＶＯＰ外部を０とする
が、以下では便宜上、二値、すなわち０および１で表記
するものとする）。ＶＯＰによる動画像表現において
は、従来のフレーム画像は複数のＶＯＰを画面中に配置
することによって得られる。ただし、ＶＯＰの形状が矩
形で、かつＶＯＬ内で時刻によらず変化しない場合、Ｖ
ＯＰはフレームと同義となる。この場合は形状データは
存在せず、テクスチャデータだけが符号化される。
【０００５】図４４に、従来の符号化ビットストリーム
の例を示す。ＶＯ、ＶＯＬ、ＧＯＶ、ＶＯＰそれぞれの
ヘッダ及びＶＯＰデータの先頭部分には、スタートコー
ドと呼ばれるビット列を含む。スタートコードは、ユニ
ークワード（１通りの解釈しかできないビット列）であ
り、各ヘッダ情報およびＶＯＰデータ情報の始まりを示
す役割がある。各ヘッダ情報には、そのレイヤ以下のデ
ータを復号するのに必要な情報やレイヤの属性を表現す
る情報などが含まれる。例えばＶＯＬヘッダ情報には、
ＶＯＬを構成する各ＶＯＰを復号する際に必要となる情
報が含まれる。ＶＯＰデータは、被符号化領域の単位で
あるマクロブロック毎に分けられた画像データで構成さ
れる。通常、図４４におけるＶＯＰデータの中にはスタ
ートコードを含まないが、場合によっては、マクロブロ
ックを複数個集めた単位でスタートコードを付加するこ
とも許される。ＶＯＰヘッダ情報には、当該ＶＯＰがイ
ントラ符号化されているか、インター符号化されている
かを示す符号化タイプの情報が含まれている。ここで、
イントラ符号化とは、他のＶＯＰの情報を使用せず符号
化対象のＶＯＰ自身の情報のみで符号化する符号化モー
ドのことをいい、インター符号化とは、時間的に前後す
る他のＶＯＰの情報を使用して符号化対象のＶＯＰの情
報を符号化する符号化モードのことをいう。
【０００６】
【発明が解決しようとする課題】しかし、従来は、上述
したように、符号化ビットストリーム中のＶＯＰヘッダ
情報に含まれている符号化タイプ情報を逐一解析しなけ
れば、ＶＯＰデータがいずれの符号化モードで符号化さ
れたかが分からなかったため、符号化側でオブジェクト
のＶＯＬ、ＧＯＶなどの単位の中に含まれる全てのＶＯ
Ｐデータがイントラのみで符号化した場合でも、復号化
側では個々のＶＯＰがいずれのモードで符号化されてい
るかは、ヘッダ情報の解析を行なわなければわからなか
った。このため、符号化側でオブジェクトのＶＯＬ、Ｇ
ＯＶなどの単位の中に含まれる全てのＶＯＰデータがイ
ントラのみで符号化された場合でも、復号化側で所望の
時刻のＶＯＰ瞬時にへアクセスしたり、復号時の装置の
負荷などに応じて符号化の画像信号を間引くいわゆる駒
落し制御を行うためには、個々のＶＯＰの符号化データ
の解析を行なって、符号化ビットストリームの予測構造
やまたは時間情報を認識した上で、アクセスすべき所望
のＶＯＰ、あるいは駒落し制御において復号すべきＶＯ
Ｐを特定する必要があり、復号処理が面倒となると共
に、復号処理時間が増大する、という問題があった。
【０００７】そこで、本発明は、このような問題に着目
してなされたもので、動画像シーケンス中に含まれる全
ての画像をイントラのみで符号化した場合には、画像復
号化装置側において、所望の時刻の画像へのアクセスや
駒落し制御などの復号処理を容易かつスムーズに行える
と共に、復号処理時間を短縮化することのできる画像符
号化装置、画像符号化方法、画像復号化装置、及び画像
復号化方法を提供することを目的とする。また、特に、
本発明では、複数のオブジェクトからなる画像をオブジ
ェクト単位で符号化または復号化するＭＰＥＧ−４規格
の下、符号化側でオブジェクトのＶＯＬ、ＧＯＶなどの
単位の中に含まれる全てのＶＯＰをイントラのみで符号
化した場合には、画像復号化装置側において、所望の時
刻のＶＯＰへのアクセスや駒落し制御などの復号処理を
容易かつスムーズに行えると共に、復号処理時間を短縮
化することのできる画像符号化装置、画像符号化方法、
画像復号化装置、及び画像復号化方法を提供することを
目的とする。
【０００８】
【課題を解決するための手段】前記目的を達成するた
め、本発明では、符号化ビットストリームから動画像シ
ーケンスに含まれる画像すべてがイントラ符号化されて
いるか否かを示すイントラ符号化表示情報を解析する解
析手段と、前記解析手段によって解析された前記イント
ラ符号化表示情報に基づいて前記動画像シーケンスに含
まれる画像を復号する復号手段と、を備えたものであ
る。
【０００９】また、次の発明では、動画像シーケンス
は、任意の形状を有する動画像オブジェクトのビデオオ
ブジェクトレイヤである。
【００１０】また、次の発明では、動画像シーケンス
は、任意の形状を有する動画像オブジェクトのビデオオ
ブジェクトレイヤを構成するビデオオブジェクトプレー
ンのグループである。
【００１１】また、次の発明では、前記復号手段は、前
記イントラ符号化表示情報と、画像復号化装置側におい
て指定された表示速度情報とに基づいて、前記動画像シ
ーケンス内の画像を間引いて復号するものである。
【００１２】また、次の発明では、前記解析手段は、さ
らに、符号化ビットストリームから符号化側の表示速度
情報を解析すると共に、解析した符号化側の表示速度情
報と、画像復号化装置側において指定された表示速度情
報とに基づいて、復号対象画像を特定し、前記復号手段
は、前記イントラ符号化表示情報と、前記復号対象画像
の表示時刻情報とに基づいて、前記動画像シーケンスに
含まれる画像を間引いて復号するものである。
【００１３】また、次の発明では、前記復号手段は、前
記イントラ符号化表示情報と、画像復号化装置側におい
て指定される表示時刻情報とに基づいて、前記画像復号
化装置側において指定される表示時刻情報が示す画像を
復号するものである。
【００１４】また、次の発明では、解析手段は、さら
に、符号化ビットストリームから符号化側の表示速度情
報と、前記動画像シーケンスに含まれる画像の表示時刻
情報とを解析すると共に、その解析した前記表示速度情
報と、前記表示時刻情報とに基づいて、復号対象画像を
特定し、前記復号手段は、前記イントラ符号化表示情報
と、前記復号対象画像の表示時刻情報と、画像復号化装
置側において指定される表示時刻情報とに基づいて、前
記画像復号化装置側において指定される表示時刻情報が
示す画像を復号するものである。
【００１５】また、次の発明では、前記解析手段は、前
記イントラ符号化表示情報を解析した結果、動画像シー
ケンスに含まれる画像すべてがイントラ符号化されてい
ることを指示している場合、さらに、符号化ビットスト
リームから前記動画像シーケンスに含まれる画像すべて
の表示時刻情報を多重化するか否かを示す表示時刻多重
化識別情報を解析し、該表示時刻多重化識別情報が前記
動画像シーケンスに含まれる画像すべての表示時刻情報
を多重化することを示している場合には、前記動画像シ
ーケンスに含まれる画像すべての表示時刻情報を動画像
シーケンスの単位で解析し、前記多重化手段は、前記イ
ントラ符号化表示情報と、前記表示時刻情報とに基づい
て、前記動画像シーケンス内に含まれる画像を復号する
ものである。
【００１６】また、次の発明では、前記復号手段は、前
記イントラ符号化表示情報と、前記表示時刻情報と、画
像復号化装置側において指定される表示時刻情報とに基
づいて、前記動画像シーケンス内に含まれる画像のうち
前記画像復号化装置側において指定される表示時刻情報
が示す画像を復号するものである。
【００１７】また、次の発明では、符号化ビットストリ
ームから動画像シーケンスに含まれる画像すべてがイン
トラ符号化されているか否かを示すイントラ符号化表示
情報を解析すると共に、前記イントラ符号化表示情報に
基づいて前記動画像シーケンスに含まれる画像を復号す
るものである。
【００１８】また、次の発明では、動画像シーケンスに
含まれる画像すべてをイントラ符号化するか否かを指示
するイントラ符号化指示情報に基づき前記動画像シーケ
ンスに含まれる画像を符号化する符号化手段と、前記符
号化手段によって符号化された画像符号化信号と、前記
動画像シーケンスに含まれる画像すべてがイントラ符号
化されているか否かを示すイントラ符号化表示情報とを
多重化する多重化手段と、を備えたものである。
【００１９】また、次の発明では、前記多重化手段は、
前記イントラ符号化表示情報が動画像シーケンスに含ま
れる画像すべてをイントラ符号化することを指示してい
る場合、さらに、前記動画像シーケンスに含まれる画像
すべての表示時刻情報を多重化するか否かを示す表示時
刻多重化識別情報を動画像シーケンス毎に多重化し、該
表示時刻多重化識別情報が前記動画像シーケンスに含ま
れる画像すべての表示時刻情報を多重化することを示し
ている場合には、さらに、前記動画像シーケンスに含ま
れる画像すべての表示時刻情報を動画像シーケンス毎に
多重化するものである。
【００２０】また、次の発明では、動画像シーケンスに
含まれる画像すべてをイントラ符号化するか否かを指示
するイントラ符号化指示情報に基づき前記動画像シーケ
ンスに含まれる画像を符号化すると共に、符号化された
画像符号化信号と、前記動画像シーケンスに含まれる画
像すべてがイントラ符号化されているか否かを示すイン
トラ符号化表示情報とを多重化するものである。
【００２１】
【発明の実施の形態】実施の形態１．本実施の形態１で
は、ISO/IEC JTC1/SC29/WG11/N1796で開示されるＭＰＥ
Ｇ−４ビデオ符号化方式に、本実施の形態１の要素であ
るオブジェクトのＶＯＬ、ＧＯＶなどの単位の中に含ま
れる全てのＶＯＰをイントラのみで符号化するか否かを
示す情報に基づいて符号化を行う手段と、ＶＯＬ、ＧＯ
Ｖなどの単位の中に含まれる全てのＶＯＰがイントラの
みで符号化されたか否かを示す情報をオブジェクトごと
に付加して符号化ビットストリームに多重化する手段を
備えたＶＯＰエンコーダについて説明する。なお、イン
トラ符号化とは、他のＶＯＰを使用せず、符号化対象の
ＶＯＰ自身の情報のみで符号化する符号化モードのこと
をいう。つまりイントラ符号化されたＶＯＰはそれ自身
単独で復号することが可能である。
【００２２】本実施の形態１における画像符号化装置
は、ＭＰＥＧ−４ビデオエンコーダをベースとしてお
り、ＭＰＥＧ−４ビデオデコーダは前記ＶＯＰを単位と
して符号化を実施するので、以下、ＶＯＰエンコーダと
呼ぶことにする。尚、既存のＶＯＰエンコーダの動作は
ISO/IEC JTC1/SC29/WG11/N1796などに開示されるので、
ここではエンコーダ自体の動作説明は一般的な範囲にと
どめ、本実施の形態１の要素について詳細な説明を行
う。
【００２３】図１は、本実施の形態１におけるＶＯＰエ
ンコーダの構成例を示す。図において、１は形状符号化
部、２は形状符号化データ、３は局所復号形状データ、
４は動き補償予測部、５は動き情報、６はＧＯＶ多重化
情報、７はオブジェクトイントラ符号化指示信号、８は
ヘッダ多重化部、９はヘッダ情報多重化後のビットスト
リーム、１０はビデオ信号多重化部、１１は予測画像、
１２は減算器、１３は予測誤差信号、１４はINTRA/INTE
R判定部、１５は被符号化テクスチャデータ、１６はマ
クロブロック単位の符号化モード情報、１７はテクスチ
ャ符号化部、１８はテクスチャ符号化データ、１９は局
所復号予測誤差信号、２０は加算器、２１は局所復号テ
クスチャデータ、２２はメモリ、２３は参照テクスチャ
データ、２４は符号化ビットストリームである。
【００２４】次に、図１に示す本実施の形態１における
ＶＯＰエンコーダの動作について簡単に説明する。図２
は、図１に示す本実施の形態１におけるＶＯＰエンコー
ダの動作を示すフローチャートである。入力オブジェク
ト画像は、形状符号化部１と動き補償予測部４とINTRA/
INTER判定部１４と減算器１２に入力する。その際、入
力オブジェクト画像は、形状データをアルファブロック
とよばれる１６画素×１６画素の領域ごとに、また、テ
クスチャデータをマクロブロックとよばれる１６画素×
１６画素の領域ごとに入力する。
【００２５】まず、形状符号化部１は、入力されるアル
ファブロックの符号化を行い、形状符号化データ２と局
所復号形状データ３とを出力する（ステップＳ１）。形
状符号化部１における符号化処理については本発明の対
象外であるため、説明を省略する。形状符号化データ２
はビデオ信号多重化部１０に送られ、局所復号形状デー
タ３は動き補償予測部４とテクスチャ符号化部１７に入
力される。
【００２６】次に、動き補償予測部４では、メモリ２２
中の参照テクスチャデータ２３を入力し、マクロブロッ
ク単位にてブロックマッチングを行い、動き情報５を得
る（ステップＳ２）。この際、動き補償予測部４は、局
所復号形状データ３に基づきマクロブロック中に含まれ
るオブジェクトのみを対象としたブロックマッチングに
より動き情報５を得る。次に、動き補償予測部４は、動
き情報５に対応した位置の参照テクスチャデータ２３を
メモリ２２から入力し、局所復号形状データ３に基づき
予測画像１１を作成する。動き補償予測部４において作
成された動き情報５はビデオ信号多重化部１０へ、予測
画像１１は減算器１２と加算器２０に入力される。
【００２７】次に、INTRA/INTER判定部１４では、外部
より設定されるオブジェクトイントラ符号化指示信号７
に基づき、符号化対象ＶＯＰの各マクロブロックの符号
化モードの決定を行い、決定した符号化モードに基づき
入力される画像を選択し、選択した画像(インター符号
化の場合は予測誤差画像１３)をテクスチャ符号化部１
７へ、決定したマクロブロック単位の符号化モード１６
をビデオ信号多重化部１０へ出力する（ステップＳ
３）。ここで、オブジェクトイントラ符号化指示信号と
は、ユーザ等によるスイッチの設定や、コマンドの入力
等によって設定や入力する、ＶＯＬ、ＧＯＶなどの単位
の中に含まれる全てのＶＯＰをイントラのみで符号化す
るか否かを示す情報である。すべてのＶＯＰがイントラ
のみで符号化される場合は、この信号をＯＮ
（“１”）、さもなくばＯＦＦ（“０”）に設定するも
のとする。
【００２８】図３は、INTRA/INTER判定部１４の動作を
説明するフローチャートである。以下、図３に基づい
て、INTRA/INTER判定部１４の動作について説明する。
まず、入力されるオブジェクトイントラ符号化指示信号
７の値に基づいて動作を切り替える（ステップＳ３−
１）。ここで、オブジェクトイントラ符号化指示信号７
の値がＯＮの場合、入力オブジェクト画像を入力画像１
５として選択し、マクロブロック単位の符号化モード情
報１６を常にイントラ符号化モードに設定し、選択した
入力画像１５をテクスチャ符号化部１７へ出力する（ス
テップＳ３−２）。
【００２９】また、入力されるオブジェクトイントラ符
号化指示信号７がＯＦＦの場合、たとえばISO/IEC JTC1
/SC29/WG11/N1796で定められる所定の方法でマクロブロ
ック単位において符号化モードを選択し、選択されたマ
クロブロック単位の符号化モードがイントラ符号化モー
ドの場合は入力オブジェクト画像を、選択されたマクロ
ブロック単位の符号化モードがインター符号化モードの
場合は予測誤差画像１３を入力画像１５として選択し、
テクスチャ符号化部１７へ出力する（ステップＳ３−
３）。また、選択したマクロブロック単位の符号化モー
ドをマクロブロック単位の符号化モード情報１６として
ビデオ信号多重化部１０へ出力する。
【００３０】そして、図２のフローチャートに戻り、テ
クスチャ符号化部１７では、入力された画像１５を、た
とえばISO/IEC JTC1/SC29/WG11/N1796で定められる所定
の方法で符号化し、テクスチャ符号化データ１８および
局所復号予測誤差画像１９を得る（ステップＳ４）。こ
の際、テクスチャ符号化部１７では、局所復号形状デー
タ３に基づきブロック中に含まれるオブジェクトのみを
対象とした符号化を行う。テクスチャ符号化データ１８
はビデオ信号多重化部１０へ送られ、局所復号予測誤差
画像１９を加算器２０へ出力する。
【００３１】加算器２０は、予測画像１１と局所復号予
測誤差画像１９の加算を行い局所復号テクスチャデータ
２１を作成し（ステップＳ５）、メモリ２２へ書き込む
（ステップＳ６）。以上の処理をマクロブロック単位に
行い、１つのＶＯＰに含まれるすべてのマクロブロック
について処理が終了したら１つのＶＯＰの符号化処理を
終了する。さもなくば、マクロブロックの符号化処理を
継続する（ステップＳ７）。
【００３２】ヘッダ多重化部８では各ヘッダ情報が多重
化され、各ヘッダ情報が多重化されたビットストリーム
９はビデオ信号多重化部１０に入力される（ステップＳ
８）。ビデオ信号多重化部１０は、各ヘッダ情報が多重
化されたビットストリーム９に形状符号化データ２と動
き情報５とテクスチャ符号化データ１８とマクロブロッ
ク単位の符号化モード情報１６の多重化を行い、符号化
ビットストリーム２４を出力する（ステップＳ９）。
【００３３】次に、本実施の形態１の特徴であるヘッダ
多重化部８の動作について詳しく説明する。図４は、図
１に示すヘッダ多重化部８の構成例を示している。図に
おいて、２５はＶＯヘッダ多重化部、２６はＶＯＬヘッ
ダ多重化部、２７はＧＯＶヘッダ多重化選択部、２８は
ＧＯＶヘッダ多重化部、２９はＶＯＰヘッダ多重化部で
ある。
【００３４】ＶＯヘッダ多重化部２５では、ＶＯヘッダ
を多重化したビットストリームを作成し、作成したビッ
トストリームをＶＯＬヘッダ多重化部２６に出力する。
ＶＯＬヘッダ多重化部２６は、ＶＯヘッダ多重化部２５
から入力されたビットストリームに各種のＶＯＬヘッダ
と、その一つとしてオブジェクトイントラ符号化表示信
号７’の多重化を行う。ここで、オブジェクトイントラ
符号化表示信号７’とは、ＶＯＬ、ＧＯＶなどの単位の
中に含まれる全てのＶＯＰがイントラのみで符号化され
るか否かを示す情報である。オブジェクトイントラ符号
化表示信号７’の多重化は、例えば、オブジェクトイン
トラ符号化指示信号７がＯＮの場合はオブジェクトイン
トラ符号化表示信号７’を“１”とする一方、オブジェ
クトイントラ符号化指示信号７がＯＦＦの場合はオブジ
ェクトイントラ符号化表示信号７’を“０”等として、
ＶＯＬヘッダ情報中の1ビットの情報として多重化する
ことができる。多重化後のビットストリームはＧＯＶヘ
ッダ多重化選択部２７へ出力される。
【００３５】ＧＯＶヘッダ多重化選択部２７では、ＶＯ
Ｌヘッダ多重化部２６より出力されたビットストリーム
の出力先を、ＧＯＶヘッダの多重化を行うか否かを示す
ＧＯＶ多重化情報６に基づき判断する。ＭＰＥＧ−４で
は、ＧＯＶヘッダは符号化ビットストリーム中に含まれ
ていなくてもよいので、本実施の形態１のエンコーダで
はＧＯＶ多重化選択部２７によって選択的にＧＯＶヘッ
ダを多重化する構成としている。もちろん、あらかじめ
ＧＯＶを多重化するか否かを決めてしまう構成、すなわ
ちＧＯＶ多重化選択部２７を設けずに、ＶＯＬヘッダ多
重化部２６の出力をＧＯＶヘッダ多重化部２８を介さず
に直接ＶＯＰヘッダ多重化部２９へ送る構成、あるいは
ＶＯＬヘッダ多重化部２６の出力をＧＯＶヘッダ多重化
部２８を介してＶＯＰヘッダ多重化部２９へ送るような
構成のエンコーダもありうる。ここで、ＧＯＶ多重化情
報６がＧＯＶヘッダの多重化を行わないことを示す場合
は、ＧＯＶヘッダ多重化部２８を介さずにＶＯＰヘッダ
多重化部２９へビットストリームを出力する。これに対
し、ＧＯＶ多重化情報６がＧＯＶヘッダの多重化を行う
ことを示す場合はＧＯＶヘッダ多重化部２８へビットス
トリームを出力する。すると、ＧＯＶヘッダ多重化部２
８は、ＧＯＶヘッダ多重化選択部２７から入力されたビ
ットストリームにＧＯＶヘッダを多重化し、多重化後の
ビットストリームをＶＯＰヘッダ多重化部２９に出力す
る。
【００３６】そして、ＶＯＰヘッダ多重化部２９は、Ｇ
ＯＶヘッダ多重化選択部２７から直接、あるいはＧＯＶ
ヘッダ多重化選択部２７からＧＯＶヘッダ多重化部２８
を介して入力されたビットストリームにＶＯＰヘッダを
多重化して、その多重化後のビットストリーム９をビデ
オ信号多重化部１０へ出力する。
【００３７】図５は、この実施の形態１のＶＯＰエンコ
ーダから出力される符号化ビットストリーム３０の例を
示している。これは図１における符号化ビットストリー
ム２４の一つの例を示すものである。この符号化ビット
ストリーム３０は、図４４に示す従来の符号化ビットス
トリームと同様に、それぞれのスタートコード（start
code）とヘッダ情報あるいはデータ情報とからなるＶＯ
ヘッダ３０ａ、ＶＯＬヘッダ３０ｂ、ＧＯＶヘッダ３０
ｃ、ＶＯＰヘッダ３０ｄ、ＶＯＰデータ３０ｅから構成
されているが、この実施の形態１では、ＶＯＬヘッダ３
０ｂにオブジェクトイントラ符号化表示信号７’が多重
化されている。このため、このオブジェクトイントラ符
号化表示信号７’は、ＶＯＬヘッダ３０ｂのＶＯＰを構
成するＶＯＰデータ３０ｅが全てイントラ符号化されて
いることを示すことになる。
【００３８】ここで、ＶＯＰデータ３０ｅは、被符号化
領域の単位であるマクロブロック毎に符号化されたテク
スチャデータ（図示せず）と形状データ（図示せず）と
からなり、各マクロブロック毎に、オーバヘッド情報と
して当該マクロブロックのイントラ符号化やインター符
号化の別を示す符号化モード情報１６が多重化されてい
るが、オブジェクトイントラ符号化表示信号７’のＯ
Ｎ、すなわちＶＯＬまたはＧＯＶの全てのＶＯＰデータ
３０ｅがイントラ符号化されたことを示している場合に
は、各ＶＯＰデータを構成するマクロブロック毎の符号
化モード情報１６を多重化しないようにして、符号化ビ
ットストリームの情報量を削減するようにしても良い。
このことは、以下の実施の形態でも同様である。
【００３９】なお、このＶＯＬヘッダ３０ｂは、ＶＯＬ
（Video Object Layer)を単位として設定されるもの
で、図４２に示すように、ＶＯが複数のＶＯＬ０，１か
ら構成される場合には、各ＶＯＬ毎に設定され、オブジ
ェクトイントラ符号化指示信号７も、各ＶＯＬ毎に設定
されることになる。また、ＧＯＶヘッダ多重化選択部２
７の選択によりＧＯＶヘッダ多重化部２８がＧＯＶヘッ
ダの多重化を行なわない場合には、図５に示す符号化ビ
ットストリーム３０からＧＯＶヘッダ３０ｃが取れた形
になる。
【００４０】以上のように、この実施の形態１によれ
ば、ＶＯＬヘッダにＶＯＬより下位のＧＯＶを構成する
ＶＯＰデータ、あるいはＧＯＶという概念を使用せずに
ＶＯＬを構成するＶＯＰデータが全てイントラ符号化さ
れることを示すオブジェクトイントラ符号化表示信号
７’を多重化するように構成したため、画像復号化装置
においては、オブジェクトイントラ符号化表示信号７’
を復号・解析することによって、個々のＶＯＰヘッダを
復号することなくオブジェクト内に含まれるＶＯＰがす
べてイントラ符号化されているか否かを判断することが
でき、復号化装置側で簡単に表示速度や復号速度を変化
させて復号を行ったり、所望の時刻のＶＯＰへ簡単にア
クセスすることを可能にしたりする符号化ビットストリ
ームを生成することができる。
【００４１】なお、前記説明では、図５の符号化ビット
ストリーム３０に示すように、ＶＯＬヘッダ３０ｂにオ
ブジェクトイントラ符号化表示信号７’を多重化して説
明したが、本発明では、これに限らず、例えば、図６の
符号化ビットストリーム３１に示すように、ＧＯＶヘッ
ダ３１ｃにオブジェクトイントラ符号化表示信号７’を
多重化して、ＶＯＬより下位のＧＯＶを単位としてオブ
ジェクトイントラ符号化表示信号を規定し、符号化およ
びオブジェクトイントラ符号化表示信号の多重化をＧＯ
Ｖの単位で行うようにしてもよい。この場合、ヘッダ多
重化部８は、図７に示すように構成して、ＶＯＬヘッダ
多重化部３２はオブジェクトイントラ符号化表示信号
７’の多重化をせず、ＧＯＶヘッダ多重化部３３がオブ
ジェクトイントラ符号化表示信号７’の多重化を行なう
ように構成すればよい。このようにすれば、オブジェク
トイントラ符号化表示信号７’は、ＧＯＶの中に含まれ
る全てのＶＯＰデータ３１ｅをイントラのみで符号化す
るか否かを示す情報となり、図６に示すようにＧＯＶヘ
ッダ多重化部３３においてＧＯＶヘッダ情報とともにＧ
ＯＶヘッダ３１cに多重化されることになる。
【００４２】また、本実施の形態１では、ヘッダ多重化
部８が、オブジェクトイントラ符号化指示信号７に基づ
いて、１ビットのオブジェクトイントラ符号化表示信号
７’を作成して出力するように構成したが、本発明で
は、これに限らず、１ビット以外のオブジェクトイント
ラ符号化表示信号７’でもよく、また、ＶＯＬやＧＯＶ
を構成するＶＯＰデータが全てイントラ符号化すること
を示すオブジェクトイントラ符号化指示信号７がビット
情報として表現されている場合には、オブジェクトイン
トラ符号化指示信号７をそのままオブジェクトイントラ
符号化表示信号７’として多重化するように構成しても
勿論よい。
【００４３】また、本実施の形態１では、図１等に示す
ように、符号化装置をハード的に構成して示したが、本
発明では、これに限らず、符号化装置をソフトウェア的
に構成、すなわち図２や図３に示す処理のプログラムを
実行するＣＰＵやＭＰＵにより本実施の形態１の機能を
実現するようにしても勿論良い。なお、このことは、以
下に説明する他の実施の形態についても同様である。
【００４４】実施の形態２．本実施の形態２では、ISO/
IEC JTC1/SC29/WG11/N1796で開示されるＭＰＥＧ−４ビ
デオ符号化方式に、ＶＯＬ、ＧＯＶなどの単位の中に含
まれる全てのＶＯＰをイントラのみで符号化するか否か
を示す情報であるオブジェクトイントラ符号化指示信号
７に基づいて符号化を行う手段と、ＶＯＬ、ＧＯＶなど
の単位の中に含まれる全てのＶＯＰがイントラのみで符
号化されているか否かを示す情報であるオブジェクトイ
ントラ符号化表示信号７’と、ＶＯＬ、ＧＯＶなどの単
位の中に含まれる全てのＶＯＰの絶対表示時刻情報をま
とめて多重化するか否かを示す表示時刻多重化識別情報
３４とをＶＯＬやＧＯＶの単位で符号化ビットストリー
ムに多重化する手段を備えたＶＯＰエンコーダについて
説明する。
【００４５】図８は、本実施の形態２におけるＶＯＰエ
ンコーダの構成例を示す。図８は実施の形態１のＶＯＰ
エンコーダ図１とほぼ同じ構成であり、エンコーダとし
ての基本動作も実施の形態１で述べた動作と同じであ
る。実施の形態１とは、ヘッダ多重化部８の構成のみが
異なる。図において、３４は表示時刻多重化識別情報、
３５は各ＶＯＰの絶対表示時刻であるタイムコードであ
る。それ以外の図１と同じ番号を付した部材は図１と全
く同じ部材であることを示す。以下では、実施の形態１
と異なる構成であるヘッダ多重化部８についてのみ説明
する。
【００４６】図９は、図８に示すヘッダ多重化部８の構
成例を示している。図において、３６はＶＯＬヘッダ多
重化部である。
【００４７】図８のヘッダ多重化部８は、ＶＯＬヘッダ
多重化部３６において、ＶＯＬヘッダ情報の一部として
オブジェクトイントラ符号化表示信号７’を１ビットの
情報として多重化するともに、オブジェクトイントラ符
号化表示信号７’がＯＮ、すなわちＶＯＬ、ＧＯＶなど
の単位の中に含まれる全てのＶＯＰをイントラのみで符
号化することを示している場合には、ＶＯＬヘッダ情報
の一部として表示時刻多重化識別情報３４を１ビットの
情報として多重化し、さらに表示時刻多重化識別情報３
４の値に基づいてＶＯＬを構成するすべてのＶＯＰの絶
対表示時刻を示すタイムコード３５をＶＯＬヘッダ情報
の一部としてまとめて多重化するものである。ここで、
タイムコード３５は、IEC standard publication 461 f
or “time and control codes for video tape recoder
s”で開示される時間情報であって、動画像を構成する
各時刻の画像（MPEG-2で言えばフレーム、ＭＰＥＧ−４
で言えばＶＯＰなど）の表示時刻を、時間・分・秒の精
度で規定する情報である。これは、例えば、業務用映像
編集機器などでフレーム単位で編集を行う場合に、各フ
レームにこの情報を付加することにより、タイムコード
３５の値を指定するだけで所望のフレームにアクセスで
きるなどの効果を持つことができる。尚、その他の構成
は、図４に示すヘッダ多重化部８と同じであるので、以
下、図８のうち、実施の形態１と異なるＶＯＬヘッダ多
重化部３６の動作についてのみ説明する。
【００４８】ＶＯＬヘッダ多重化部３６は、ＶＯヘッダ
多重化部２５から入力されたビットストリームに対し
て、以下のルール１）〜５）に従って必要な情報を多重
化する。 １） 各ＶＯＰの復号伸長処理に必要な各種のデータな
ど各種のＶＯＬヘッダを多重化する。 ２） オブジェクトイントラ符号化表示信号７’を多重
化する。 ３） オブジェクトイントラ符号化表示信号７’がＯ
Ｎ、すなわちＶＯＬ、ＧＯＶなどの単位の中に含まれる
全てのＶＯＰをイントラのみで符号化することを示して
いる時、表示時刻多重化識別情報３４を多重化する。表
示時刻多重化識別情報３４は、ＶＯＬ内のすべてのＶＯ
Ｐのタイムコード３５を、ＶＯＬヘッダ情報の領域に多
重化するか否かを示す１ビットの情報であり、ＶＯＬ内
のすべてのＶＯＰのタイムコード３５をＶＯＬヘッダ情
報の一部として多重化する場合はＯＮとして‘１’を、
さもなくばＯＦＦとして‘０’を設定する。オブジェク
トイントラ符号化表示信号７’がＯＦＦを示している時
は表示時刻多重化識別情報３４は多重化しない。 ４） オブジェクトイントラ符号化表示信号７’がＯＮ
を示し、かつ表示時刻多重化識別情報３４がＯＮを示し
ている場合は、後述する図１２に示すように、ＶＯＬ内
のすべてのＶＯＰのタイムコード３５をＶＯＬヘッダ情
報の領域に多重化する。たとえば、あるＶＯＬ内に３０
枚のＶＯＰを含む場合、そのＶＯＬヘッダ情報の領域に
３０個のタイムコード３５をまとめて多重化する。 ５） 以上の多重化処理を経たビットストリームをＧＯ
Ｖヘッダ多重化選択部２７へ出力する。
【００４９】図１０、図１１、図１２は、この実施の形
態２のＶＯＰエンコーダから出力される符号化ビットス
トリームの例を示している。図１０の符号化ビットスト
リーム３７は、オブジェクトイントラ符号化表示信号
７’がＯＦＦの場合を示しており、この場合は、ＶＯＬ
ヘッダ情報３７ｂの領域には表示時刻多重化識別情報３
４、タイムコード３５は多重化されない。この時、各Ｖ
ＯＰのＶＯＰヘッダ情報３７ｂの領域には、ＧＯＶヘッ
ダ３７ｃに多重化される絶対表示時刻である基準のタイ
ムコード３５から当該ＶＯＰが表示される時刻までの相
対時間を示す相対時間情報(この相対時間情報は、モジ
ュロ・タイム・ベースやＶＯＰタイムインクリメントで
あるが、ここでは図示せず。)が多重化され、復号側で
はこの相対時間情報に基づいてＶＯＰの表示時刻が定ま
る。
【００５０】図１１の符号化ビットストリーム３８は、
オブジェクトイントラ符号化表示信号７’がＯＮで、か
つ、表示時刻多重化識別情報３４がＯＦＦの場合を示し
ており、この場合は、ＶＯＬヘッダ情報３８ｂの領域に
はタイムコード３５は多重化されない。また、図１０と
同様、各ＶＯＰのＶＯＰヘッダ情報３８ｄの領域には、
ＧＯＶヘッダ３８ｃに多重化される絶対表示時刻である
基準のタイムコード３５から当該ＶＯＰが表示される時
刻までの相対時間を示す上記相対時間情報が多重化され
る。
【００５１】図１２の符号化ビットストリーム３９は、
オブジェクトイントラ符号化表示信号７’がＯＮで、か
つ、表示時刻多重化識別情報３４がＯＮの場合を示して
おり、この場合は、ＶＯＬヘッダ情報３９ｂの領域にＶ
ＯＬ内のすべてのＶＯＰ分のタイムコード３５が多重化
される。この場合は、各ＶＯＰヘッダ情報３９ｄの領域
中の相対時間情報はそのまま多重化してもよいし、ＶＯ
Ｌヘッダ情報３９ｂ中のタイムコードと重複するため、
ＶＯＰヘッダ情報としては上記相対時間情報を多重化し
ないようにしてもよい。
【００５２】以上のように、この実施の形態２によれ
ば、ＶＯＬヘッダにＶＯＬを構成するＶＯＰデータが全
てイントラ符号化されることを示すオブジェクトイント
ラ符号化表示信号７’と、表示時刻多重化識別情報３
４、ＶＯＬ内のすべてのＶＯＰの絶対表示時刻であるタ
イムコードとを多重化するように構成したため、本符号
化装置によって生成されたビットストリームを受信して
ＶＯＰを復号する画像復号化装置において、個々のＶＯ
Ｐヘッダを復号・解析することなく、ＶＯＬ内に含まれ
るＶＯＰがすべてイントラ符号化されているか否か、ま
た、すべてのＶＯＰのタイムコードがまとめて多重化さ
れているか否かを判断することができる。これにより、
復号化装置でＶＯＰの復号を開始する前に、簡単に復号
対象のＶＯＰを特定することができ、表示速度や復号速
度を変化させて復号を行ったり、所望の時刻のＶＯＰへ
簡単にアクセスすることが可能になる。
【００５３】なお、前記説明では、図１０、１１、１２
の符号化ビットストリーム３７〜３９に示すように、Ｖ
ＯＬヘッダにオブジェクトイントラ符号化表示信号
７’、表示時刻多重化識別情報３４、タイムコード３５
を多重化する例を説明したが、本発明では、これに限ら
ず、例えば、以下の例１，２のように符号化ビットスト
リームを構成することも考えられる。 （例１）図１３の符号化ビットストリーム４０に示すよ
うに、ＶＯＬヘッダ４０ｂにオブジェクトイントラ符号
化表示信号７’を多重化し、ＧＯＶヘッダ４０ｃには、
このＧＯＶに所属するＶＯＬのオブジェクトイントラ符
号化表示信号７’がＯＮの場合に表示時刻多重化識別情
報３４を多重化するとともに、表示時刻多重化識別情報
３４がＯＮの場合にＧＯＶレイヤに含まれるすべてのＶ
ＯＰのタイムコード３５を多重化する。この場合、表示
時刻多重化識別情報３４は、ＧＯＶの中に含まれるすべ
てのＶＯＰのタイムコード３５をＧＯＶヘッダにまとめ
て多重化するか否かを示す情報となる。 （例２）図１４の符号化ビットストリーム４１に示すよ
うに、ＧＯＶヘッダ４１ｃに、オブジェクトイントラ符
号化表示信号７’、表示時刻多重化識別情報３４、タイ
ムコード３５を多重化する。この場合、オブジェクトイ
ントラ符号化表示信号７’は、ＧＯＶの中に含まれる全
てのＶＯＰがイントラ符号化されるか否かを示す情報と
なり、また、表示時刻多重化識別情報３４は、ＧＯＶの
中に含まれるすべてのＶＯＰのタイムコード３５をＧＯ
Ｖヘッダにまとめて多重化するか否かを示す情報とな
る。これらのように符号化ビットストリームを生成する
ことで、復号側ではＧＯＶを単位として簡単に復号対象
のＶＯＰを特定することができ、表示速度や復号速度を
変化させて復号を行ったり、所望の時刻のＶＯＰへ簡単
にアクセスすることが可能になる。
【００５４】実施の形態３．本実施の形態３では、実施
の形態１で述べたＶＯＰエンコーダによって生成される
符号化ビットストリームを復号し、ＶＯＰ画像を再生す
るＶＯＰデコーダを説明する。具体的には、符号化ビッ
トストリーム中から実施の形態１で述べたオブジェクト
イントラ符号化表示信号７’を復号し、この値に基づい
て復号ＶＯＰの表示を制御する画像復号化装置について
説明する。
【００５５】まず、本実施の形態３における画像復号化
装置（ＶＯＰデコーダ）の構成と動作について説明す
る。既存のＶＯＰデコーダの動作はISO/IEC JTC1/SC29/
WG11/N1796などに開示されるので、ここではＶＯＰデコ
ーダそのものの動作説明は一般的な範囲にとどめる。以
下の説明においては、本実施の形態３におけるＶＯＰデ
コーダの特徴である、オブジェクトイントラ符号化表示
信号を復号してその値に基づいてＶＯＰ画像を選択的に
復号する機能を中心に説明する。また、以下の説明にお
いては本ＶＯＰデコーダへの入力は、図５に示す符号化
ビットストリーム３０とする。
【００５６】図１５は、本実施の形態３におけるＶＯＰ
デコーダの内部構成例を示したものである。なお、ＶＯ
Ｐデータは、実施の形態１と同様に、テクスチャデータ
と形状データとからなるものとし、本デコーダはこれら
を圧縮符号化したデータを入力としてそれぞれのデータ
を復元する機能を持つものとする。同図において、４２
はヘッダ解析部、４３はヘッダ情報が解析されたビット
ストリーム、４４はビデオ信号解析部、４５は形状符号
化データ、４６は形状復号部、４７は復号形状データ、
４８はテクスチャ符号化データ、４９はテクスチャ復号
部、５０は復号テクスチャデータ、５１は動き情報、５
２は動き補償部、５３は復号予測テクスチャデータ、５
４はINTRA/INTER判定部、５５は出力テクスチャデー
タ、５６はメモリ、５７は復号予測テクスチャデータで
ある。
【００５７】図１６は、図１５に示す画像復号化装置の
動作を説明するフローチャートである。以下、図１５お
よび図１６をもとに動作について詳述する。まず、符号
化ビットストリーム３０はヘッダ解析部４２に入力さ
れ、所定のシンタックスにしたがって後述するようにＶ
Ｏヘッダ、ＶＯＬヘッダ、ＧＯＶヘッダ、ＶＯＰヘッダ
の各ヘッダが解析される（ステップＳ１０）。なお、こ
の時、ＶＯＬヘッダ３０ｂに多重化されたオブジェクト
イントラ符号化表示信号７’が解析されて、INTRA/INTE
R判定部５４へ直接出力される。次に、ヘッダ解析部４
２においてヘッダ情報が解析されたビットストリーム４
３は、ビデオ信号解析部４４に入力され、ビデオ信号解
析部４４によりＶＯＰデータが解析されて、形状符号化
データ４５と、テクスチャ符号化データ４８と、動き情
報５１とに分けられ、各々、形状復号部４６、動き補償
部５２、テクスチャ復号部４９に出力される（ステップ
Ｓ１１）。
【００５８】形状復号部４６は、入力される形状符号化
データ４５の復号を行い、復号形状データ４７を出力す
る（ステップＳ１２）。
【００５９】動き補償部５２は、メモリ５６中の参照テ
クスチャデータ５７とビデオ信号解析部４４から入力さ
れる動き情報５１から復号予測テクスチャデータ５３を
出力する（ステップＳ１３）。
【００６０】テクスチャ復号部４９は、テクスチャ符号
化データ４８に基づいて、ＭＰＥＧ−４で定められる所
定の方法、例えばISO/IEC JTC1/SC29/WG11/N1796等で画
像データに復元し、復号テクスチャデータ５０を生成す
る（ステップＳ１４）。この復号テクスチャデータ５０
はINTRA/INTER判定部５４に出力される。
【００６１】INTRA/INTER判定部５４では、まず、オブ
ジェクトイントラ符号化表示信号７’に基づき、最終的
な出力テクスチャデータ５５の決定を行う（ステップＳ
１５）。
【００６２】図１７は、本実施の形態３のINTRA/INTER
判定部５４によるステップＳ１５のINTRA/INTER判定動
作を示すフローチャートである。まず、入力されるオブ
ジェクトイントラ符号化表示信号７’の値に基づいて動
作を切り替える（ステップＳ１５−１）。
【００６３】ここで、オブジェクトイントラ符号化表示
信号７’がＯＮの場合（ステップＳ１５−１“ＹＥ
Ｓ”）、INTRA/INTER判定部５４は、復号テクスチャデ
ータ５０をそのまま出力テクスチャデータ５５として出
力する（ステップＳ１５−２）。
【００６４】これに対し、オブジェクトイントラ符号化
表示信号７’がＯＦＦの場合は（ステップＳ１５−１
“ＮＯ”）、ビデオ信号解析部４４で復号したマクロブ
ロック単位の符号化モード情報１６に基づいて処理を選
択する（ステップＳ１５−３）。つまり、マクロブロッ
ク単位の符号化モードがイントラ符号化モードの場合は
（ステップＳ１５−３“ＹＥＳ”）、INTRA/INTER判定
部５４は、復号テクスチャデータ５０をそのまま出力テ
クスチャデータ５５として出力し（ステップＳ１５−
２）、その一方、インター符号化モードの場合は（ステ
ップＳ１５−３“ＮＯ”）、INTRA/INTER判定部５４
は、動き補償部５２からの復号予測テクスチャデータ５
３と、復号テクスチャデータ５０との加算を行って、そ
の加算データを出力テクスチャデータ５５として出力す
る（ステップＳ１５−４）。
【００６５】そして、図１６のフローチャートに戻り、
出力テクスチャデータ５５は、以降のＶＯＰの復号に用
いられるので、メモリ５６に書き込まれる（ステップＳ
１６）。以上の処理を符号化側および復号側で予め定め
られた被符号化（被復号化）領域であるマクロブロック
単位で行い、次のＶＯＰのスタートコードが検出された
場合には、現在のＶＯＰの復号を終了する一方、次のＶ
ＯＰのスタートコードが検出されない場合には、ステッ
プＳ１１に戻ってビデオ信号解析処理以降の処理を行
い、現在のＶＯＰにおけるマクロブロックの復号処理を
継続するようにする（ステップＳ１７）。
【００６６】このため、この実施の形態３のＶＯＰデコ
ーダでは、図１７のＩＮＴＲＡ／ＩＮＴＥＲ処理に示す
ように、まず、オブジェクトイントラ符号化表示信号
７’がＯＮであるか否かを判断し、オブジェクトイント
ラ符号化表示信号７’がＯＮ、すなわちそのＶＯＬを構
成する全てのＶＯＰデータ３０ｅがイントラ符号化され
たものである場合には、ステップＳ１５−３のマクロブ
ロック単位に符号化モードがイントラ符号化モードであ
るか否かを判断せずに、復号テクスチャデータ５０をそ
のまま出力テクスチャデータ５５として出力するように
したので、ステップＳ１５−３の処理の分だけ、ＩＮＴ
ＲＡ／ＩＮＴＥＲ処理を短縮化することができる。
【００６７】図１８は、図１５に示す本実施の形態３の
ヘッダ解析部４２の内部構成を、ＶＯＰヘッダ解析部５
５の構成を特に詳細にして示したものである。同図にお
いて、５８はスタートコード解析部、５９はＶＯヘッダ
解析部、６０はＶＯＬヘッダ解析部、６１はＧＯＶヘッ
ダ解析部、６２はＶＯＰヘッダ解析部、６３はタイムコ
ード、６４はモジュロ・タイム・ベース解析部、６５は
モジュロ・タイム・ベース、６６は復号ＶＯＰ絶対表示
時刻作成部、６７はＶＯＰタイムインクリメント解析
部、６８はＶＯＰタイムインクリメント、６９は駒落し
制御部、７０は復号ＶＯＰ絶対表示時刻、７１はデコー
ダ側にて設定される表示速度情報としてのＶＯＰレート
情報、７２は映像情報ヘッダ解析部である。
【００６８】図１９は、図１８に示す駒落し制御部６９
の内部構成を示した図である。図において、７３はオブ
ジェクトイントラ符号化判定部、７４は駒落しＶＯＰ判
定部である。
【００６９】次に、ヘッダ解析部４２の動作を詳細に説
明する。図２０は、図１８に示すヘッダ解析部４２の動
作を説明するフローチャートで、図１６に示すステップ
Ｓ１０のヘッダ解析処理を詳細に示すものである。本実
施の形態３におけるヘッダ解析部４２は、オブジェクト
イントラ符号化表示信号７’をビットストリーム中から
復号して、この情報に基づいて駒落とし制御を行うもの
である。ここで「駒落とし制御」とは、例えばＰＣ、Ｗ
Ｓのように使用可能なＣＰＵやメモリ資源が限定された
環境でソフトウエアデコーダを用いて画像復号化処理を
行う際、前記資源の制約によって符号化されたすべての
ＶＯＰを復号できないような場合に、復号を行うＶＯＰ
を限定してその他のＶＯＰを復号せずに読み飛ばす操作
を言う。オブジェクトイントラ符号化表示信号７’の使
用方法は後述する。
【００７０】ヘッダ解析部４２におけるヘッダ解析処理
では、まず、スタートコード解析部５８が入力される符
号化ビットストリーム３０に含まれるスタートコードの
解析を行う（ステップＳ１８）。ここで、解析したスタ
ートコードがＶＯを示すものであればＶＯヘッダ解析部
５９へ（ステップＳ１９）、解析したスタートコードが
ＶＯＬを示すものであればＶＯＬヘッダ解析部６０へ
（ステップＳ２０）、解析したスタートコードがＧＯＶ
を示すものであればＧＯＶヘッダ解析部６１へ（ステッ
プＳ２１）、解析したスタートコードがＶＯＰを示すも
のであればＶＯＰヘッダ解析部６２へ（ステップＳ２
２）、ビットストリームを出力する。なお、ＶＯＰヘッ
ダ解析部６２の解析処理を終了した後、ビットストリー
ムはビデオ信号解析部４４に出力される。
【００７１】すると、ＶＯヘッダ解析部５９は、スター
トコード解析部５８から入力されるビットストリームよ
りＶＯヘッダ情報の解析を行い、解析を終えたビットス
トリームをスタートコード解析部５８へ出力する（ステ
ップＳ２３）。
【００７２】また、ＶＯＬヘッダ解析部６０は、スター
トコード解析部５８から入力されるビットストリームよ
りＶＯＬヘッダ情報と、オブジェクトイントラ符号化指
示信号７との解析を行い、解析を終えたビットストリー
ムはスタートコード解析部５８へ出力する一方、解析さ
れたオブジェクトイントラ符号化表示信号７’はＶＯＰ
ヘッダ解析部６２とINTRA/INTER判定部５４へ出力する
（ステップＳ２４）。
【００７３】また、ＧＯＶヘッダ解析部６１は、スター
トコード解析部５８から入力されるビットストリームよ
りＧＯＶヘッダ情報の解析を行い、解析を終えたビット
ストリームをスタートコード解析部５８へ出力する（ス
テップＳ２５）。この際、解析されたＧＯＶヘッダ情報
中に含まれるタイムコード６３はＶＯＰヘッダ解析部６
２へ出力される。タイムコード６３の定義は、実施の形
態２で説明した通りである。
【００７４】次に、ステップＳ２６に相当するＶＯＰヘ
ッダ解析部６２の動作について説明する。図２１は、Ｖ
ＯＰヘッダ解析部６２の動作を説明するフローチャート
である。まず、ＶＯＰヘッダ解析部６２に入力されたビ
ットストリームは、モジュロ・タイム・ベース解析部６
４に入力して、モジュロ・タイム・ベースを解析して
（ステップＳ２６−１）、解析したモジュロ・タイム・
ベース６５を復号ＶＯＰ絶対表示時刻作成部６６へ出力
する一方、解析後のビットストリームをＶＯＰタイムイ
ンクリメント解析部６７へ出力する。
【００７５】ＶＯＰタイムインクリメント解析部６７
は、入力されたビットストリームよりＶＯＰタイムイン
クリメントの解析を行い（ステップＳ２６−２）、解析
されたＶＯＰタイムインクリメント６８を復号ＶＯＰ絶
対表示時刻作成部６６へ出力する一方、解析後のビット
ストリームを駒落し制御部６９へ出力する。
【００７６】この復号ＶＯＰ絶対表示時刻作成部６６
は、入力されるモジュロ・タイム・ベース６５と、ＶＯ
Ｐタイムインクリメント６８と、タイムコード６３に基
づいて復号ＶＯＰ絶対時刻７０を作成し、これを駒落し
制御部６９へ出力する（ステップＳ２６−３）。
【００７７】ここで、モジュロ・タイム・ベース６５と
は、図２２に示すように、タイムコード６３が示すある
基準時刻から当該ＶＯＰが何秒経過した後に表示される
かを示す情報であり、その秒数を値“１”のビットの個
数で表現するとともに、値“０”を付加することによっ
てデータの終端を明示する。
【００７８】また、ＶＯＰタイムインクリメント６８と
は、同じく図２２に示すように、モジュロ・タイム・ベ
ース６５で定められる時刻からの１秒間を１０００分の
１秒の精度で表示時刻を微調整する情報である。すなわ
ち、ＭＰＥＧ−４ではＶＯＰの表示時刻を１０００分の
１秒の精度で規定することができる。従って、復号ＶＯ
Ｐ絶対表示時刻(タイムコード)の作成の一例を説明する
と、復号対象ＶＯＰのモジュロ・タイム・ベース６５が
『１０』、ＶＯＰタイムインクリメント６８が『０００
０００』（但し、ＶＯＰタイムインクリメントを６ビッ
ト精度にて表現した場合）、タイムコード６３が示す基
準時刻を『00時間12分34秒』とした場合、復号ＶＯＰの
絶対表示時刻は『00時間12分35秒』となる。
【００７９】次に、駒落し制御部６９では、図１９に示
すように、まず、オブジェクトイントラ符号化判定部７
３が、オブジェクトイントラ符号化表示信号７’に基づ
いて、入力するビットストリームの出力先を決定する
（ステップＳ２６−４）。具体的には、オブジェクトイ
ントラ符号化表示信号７’がＯＮであるか否かを判断し
て、ＯＮ、すなわちＶＯＬ内のすべてのＶＯＰがイント
ラ符号化されていると判断された場合には（ステップＳ
２６−４“ＹＥＳ”）、入力ビットストリームの出力先
を駒落しＶＯＰ判定部７４へ切替える一方、オブジェク
トイントラ符号化表示信号がＯＦＦの場合は（ステップ
Ｓ２６−４“ＮＯ”）、入力ビットストリームの出力先
を映像情報ヘッダ解析部７２とする。
【００８０】そして、駒落しＶＯＰ判定部７４では、復
号ＶＯＰ絶対表示時刻作成部６６から入力される復号Ｖ
ＯＰ絶対表示時刻７０と、駒落しのためエンコーダ側よ
りレートを落としてデコーダ側にて設定されたＶＯＰレ
ート情報７１とに基づいて、解析対象ＶＯＰが復号すべ
きＶＯＰであるかないかの判定を行い（ステップＳ２６
−５）、復号の必要があると判定した場合は（ステップ
Ｓ２６−５“ＹＥＳ”）、オブジェクトイントラ符号化
指示判定部７３からの入力ビットストリームを映像情報
ヘッダ解析部７２へ出力する一方、解析が不必要である
と判定した場合は（ステップＳ２６−５“ＮＯ”）、ス
タートコード解析部５８へ出力する。
【００８１】ここで、ＶＯＰレート情報とは、ＶＯＬ、
ＧＯＶなどの所定単位に含まれるＶＯＰを秒あたり何枚
表示させるかを表す表示速度情報のことを言う。例え
ば、ＶＯＰレート情報が２枚／秒の場合、１秒あたり２
枚のＶＯＰを表示させる。なお、これは、１枚のＶＯＰ
を１／２秒ずつ表示させると考えることもできる。従っ
て、１枚目のＶＯＰの復号ＶＯＰ絶対時刻６５が『00時
間01分00秒』、ＶＯＰレート情報が１枚／秒であったと
した場合、『00時間01分00秒』に１秒ずつ加えた『00時
間01分01秒』、『00時間01分02秒』・・・などを絶対表
示時刻として持つＶＯＰが復号が必要なＶＯＰと判断さ
れる。このため、デコーダ側にて設定されるＶＯＰレー
ト情報６２と、エンコーダ側にて設定されるＶＯＰレー
ト情報とを、例えば、１０枚／秒から２枚／秒等のよう
に変えることにより、復号側でＶＯＰの駒落しが可能に
なる。
【００８２】そして、オブジェクトイントラ符号化判定
部７３によりオブジェクトイントラ符号化表示信号７’
がＯＦＦと判断された場合（ステップＳ２６−４“Ｎ
Ｏ”）、および、オブジェクトイントラ符号化表示信号
７’がＯＮと判断され（ステップＳ２６−４“ＹＥ
Ｓ”）、かつ、駒落しＶＯＰ判定部７４により解析対象
ＶＯＰの復号が必要であると判定された場合には（ステ
ップＳ２６−５“ＹＥＳ”）、映像情報ヘッダ解析部７
２は、駒落し制御部６９から入力されるビットストリー
ムより映像情報ヘッダの解析を行った後、ビットストリ
ームをスタートコード解析部５８へ出力する（ステップ
Ｓ２６−６）。スタートコード解析部５８は、以上のよ
うにして各ヘッダを解析した符号化ビットストリーム４
３をビデオ信号解析部４４へ出力する。
【００８３】従って、ステップＳ２６−４でオブジェク
トイントラ符号化判定部７３によりオブジェクトイント
ラ符号化表示信号７’がＯＦＦと判断された場合には、
ＶＯＰヘッダ解析部６２への入力ビットストリームを駒
落しＶＯＰ判定部７４を介さずに映像情報ヘッダ解析部
７２へ出力するので、ＶＯＰの駒落しは行われない。こ
れはＶＯＬ内のＶＯＰがすべてイントラ符号化されてい
ると保証されない場合であり、この時はＶＯＰ間で予測
符号化を行っている可能性があるため、正しい復号画像
を得るにはすべてのＶＯＰを一通り解析しなければなら
ないからである。
【００８４】一方、ステップＳ２６−４でオブジェクト
イントラ符号化判定部７３によりオブジェクトイントラ
符号化表示信号７’がＯＮと判断された場合には、続く
ステップ２６−５で駒落しＶＯＰ判定部７４によりＶＯ
Ｐレート情報６２等に基づき現在解析対象となっている
ＶＯＰの復号が必要であるかないかの判定を行って、復
号が必要であると判定した入力ビットストリームのみ映
像情報ヘッダ解析部７２へ出力するので、ＶＯＰの駒落
しが行われることになる。これは、オブジェクトイント
ラ符号化表示信号７’がＯＮの場合は、ＶＯＬ内のすべ
てのＶＯＰがイントラ符号化されていることが保証され
るので、デコーダでは任意の個所のＶＯＰを直接選択し
て復号を行うことができるからである。これにより、自
由に駒落とし制御を行うことができる。
【００８５】以上のように、この実施の形態３によれ
ば、ＶＯＬヘッダにオブジェクトイントラ符号化表示信
号７’が多重化された符号化ビットストリームを復号す
る際、そのオブジェクトイントラ符号化表示信号７’を
解析するように構成したため、オブジェクトイントラ符
号化表示信号７’がＯＮである場合に、デコーダ側で設
定するＶＯＰレート情報７１に応じて任意のＶＯＰを駒
落としして表示等することが可能となる。
【００８６】なお、以上の説明では、入力する符号化ビ
ットストリームとして、図５に示すＶＯＬを単位として
ＶＯＬヘッダ３０ｂにオブジェクトイントラ符号化表示
信号７’が多重化された符号化ビットストリーム３０を
例に説明したが、本発明では、これに限らず、例えば、
図６に示すようなオブジェクトイントラ符号化表示信号
７’がＧＯＶヘッダ３１ｃに多重化されている符号化ビ
ットストリーム３１を復号するようにしても良い。この
ようにする場合には、ヘッダ解析部４２を、図２３に示
すように構成し、ＶＯＬヘッダ解析部７５ではオブジェ
クトイントラ符号化表示信号７’を解析せず、ＧＯＶヘ
ッダ解析部７６がＧＯＶヘッダ３１ｃに多重化されてい
るオブジェクトイントラ符号化表示信号７’を解析、復
号するようにすれば、ＧＯＶを単位とする駒落し表示制
御を行うことが可能となる。
【００８７】また、例えば、図２４に示すように、複数
のオブジェクト７７ａ〜７７ｃに対応させて、本実施の
形態３の復号化装置をＶＯＰデコーダ部７８ａ〜７８ｃ
として複数備え、コンポジション部７９にて複数のオブ
ジェクト７７ａ〜７７ｃの復号画像信号を合成して１つ
の画像８０を再生するシステムを構成することも可能で
ある。このようなシステムを構成した場合、ＶＯＰデコ
ーダ部７８ａ〜７８ｃにより、ある特定のオブジェクト
のみの表示速度を落としたりするなどの表示制御が可能
となる。これにより、例えば複数のオブジェクトが画面
に合成されていて、表示されているオブジェクトに重要
度がある場合、重要度の低いオブジェクトから表示速度
を落とすなどの制御を行うことができる。
【００８８】また、本実施の形態３におけるＶＯＰデコ
ーダでは、前述の実施の形態１で述べたＶＯＰエンコー
ダで生成される符号化ビットストリームを復号可能なデ
コーダで、図５や図６に示す符号化ＶＯＰビットストリ
ーム３０，３１を入力して復号するものとして説明した
が、本発明では、符号化装置から直接ビットストリーム
を受信して復号する場合だけを意味するのではなく、符
号化装置によって符号化されたビットストリームをいっ
たん記憶させたＤＶＤ等の記録媒体から復号する場合も
当然に意味している。このことは、他の実施の形態の復
号化装置でも同じである。
【００８９】実施の形態４．本実施の形態４では、実施
の形態３で述べたＶＯＰデコーダの別の実施の形態を説
明する。つまり、本実施の形態４におけるＶＯＰデコー
ダは、エンコーダ側で設定したＶＯＰレート情報がＶＯ
Ｌヘッダ情報とともにＶＯＬヘッダに多重化されたビッ
トストリームを復号して、これに基づいて表示制御を行
う機能を持つものである。なお、本実施の形態４のＶＯ
Ｐデコーダは、実施の形態３で述べたＶＯＰデコーダの
ヘッダ解析部４２の構成のみが異なるので、この部材に
ついてのみ説明する。
【００９０】図２５に、本実施の形態４のＶＯＰデコー
ダが復号する符号化ビットストリーム８１の例を示す。
図２５の符号化ビットストリーム８１は、図５の符号化
ビットストリーム３０におけるＶＯＬヘッダ３０ｂの中
に、エンコーダ側で設定したＶＯＰレート情報８７が多
重化されたビットストリームで、図２５ではＶＯＰヘッ
ダ８１ｂにＶＯＰレート情報８７が多重化されることに
なる。このＶＯＰレート情報は、例えば、エンコーダ側
で秒あたり３０枚のＶＯＰを符号化した場合、３０ＶＯ
Ｐ／秒という情報となる。
【００９１】図２６は、本実施の形態４の特徴であるヘ
ッダ解析部４２の内部構成を示したものである。同図に
おいて、８３はスタートコード解析部、８４はＶＯＬヘ
ッダ解析部、８５はスタートコードを解析したＶＯＰの
数をカウントしたカウント数、８６は駒落しＶＯＰ制御
部、８７はエンコーダで設定したＶＯＰレート情報、８
８はデコードＶＯＰ選択部、８９はＶＯＰ選択情報、９
０はＶＯＰヘッダ解析部である。
【００９２】図２７は、図２６に示す本実施の形態４の
駒落しＶＯＰ制御部８６の構成を示したものである。同
図において、７３はオブジェクトイントラ符号化判定
部、９１は駒落しＶＯＰ判定部である。
【００９３】次に、本実施の形態４のヘッダ解析部４２
の動作を説明する。図２８は、本実施の形態４のヘッダ
解析部４２の動作を説明するフローチャートである。本
実施の形態４のヘッダ解析部４２では、まず、スタート
コード解析部８３において、入力される符号化ビットス
トリーム８１に含まれるスタートコードの解析を行う
（ステップＳ２７）。その結果、解析したスタートコー
ドがＶＯを示すものであればＶＯヘッダ解析部５９へ
（ステップＳ２８）、解析したスタートコードがＶＯＬ
を示すものであればＶＯＬヘッダ解析部８４へ（ステッ
プＳ２９）、解析したスタートコードがＧＯＶを示すも
のであればＧＯＶヘッダ解析部６１へ（ステップＳ３
０）、解析したスタートコードがＶＯＰを示すものであ
れば駒落しＶＯＰ制御部８６へビットストリームを出力
するとともに、ＶＯＰスタートコードを検出する度にカ
ウントをインクリメントし、このカウント数８５も駒落
しＶＯＰ制御部８６へ出力する（ステップＳ３１）。な
お、カウント数８５は、ＶＯＬスタートコードが検出さ
れるたびにリセットされるものとする。
【００９４】すると、ＶＯヘッダ解析部５９は、入力さ
れるビットストリームよりＶＯヘッダ情報の解析を行
い、解析を終えたビットストリームをスタートコード解
析部８３へ出力する（ステップＳ３２）。
【００９５】また、ＶＯＬヘッダ解析部８４は、入力さ
れるビットストリームよりＶＯＬヘッダ情報と、オブジ
ェクトイントラ符号化表示信号７’と、ＶＯＰレート情
報８７の解析を行い、解析を終えたビットストリームは
スタートコード解析部８３へ出力し、解析されたオブジ
ェクトイントラ符号化表示信号７’は駒落しＶＯＰ制御
部８６へ出力し、解析されたＶＯＰレート情報８７はデ
コードＶＯＰ選択部８８へ出力する（ステップＳ３
３）。
【００９６】また、ＧＯＶヘッダ解析部６１は、入力さ
れるビットストリームよりＧＯＶヘッダ情報の解析を行
い、解析を終えたビットストリームをスタートコード解
析部８３へ出力する（ステップＳ３４）。
【００９７】すると、デコードＶＯＰ選択部８８では、
ＶＯＬヘッダ解析部８４から入力する符号化側のＶＯＰ
レート情報８７と、ユーザ等によりデコーダ側にて設定
されるＶＯＰレート情報７１とを比較して、その比較結
果に基づき復号化を行うＶＯＰの情報を示すＶＯＰ選択
情報８９を駒落しＶＯＰ制御部８６に出力する（ステッ
プＳ３５）。
【００９８】ＶＯＰ選択情報８９を具体的に説明する
と、例えば、ＶＯＬヘッダ解析部８４から入力されるＶ
ＯＰレート情報８７が３０枚／秒、デコーダ側にて設定
されるＶＯＰレート情報７１が１５枚／秒の場合、ＶＯ
Ｐ選択情報８９は１ＶＯＰおきに解析を行うＶＯＰがあ
ることを示す情報となる。これは、エンコーダ側で1秒
あたり３０枚のＶＯＰを符号化したビットストリームを
復号する際に、デコーダ側で１枚おきにＶＯＰの復号を
行うという状況に相当する。
【００９９】次に、駒落とし制御部８６は、以下に示す
ようにステップＳ３６、Ｓ３７に示す処理を行なう。以
下、ステップＳ３８に示すＶＯＰヘッダ解析の処理とと
もに、駒落とし制御の処理について説明する。まず、図
２７に示すように、駒落しＶＯＰ制御部８６のオブジェ
クトイントラ符号化判定部７３では、ＶＯＬヘッダ解析
部８４から入力されるオブジェクトイントラ符号化表示
信号７’に基づき、ビットストリームの出力先を決定す
る（ステップＳ３６）。具体的には、オブジェクトイン
トラ符号化表示信号７’がＯＮの場合には、入力ビット
ストリームの出力先を駒落しＶＯＰ判定部９１とする一
方、オブジェクトイントラ符号化表示信号がＯＦＦの場
合には、入力ビットストリームの出力先をＶＯＰヘッダ
解析部９０とする。
【０１００】そして、オブジェクトイントラ符号化表示
信号７’がＯＮの場合、駒落しＶＯＰ制御部８６の駒落
しＶＯＰ判定部９１では、ステップＳ３７に相当する判
定処理を行う。つまり、ＶＯＰ選択情報８９と、カウン
ト数８５とに基づいて、解析対象ＶＯＰの復号すべきＶ
ＯＰであるか否かの判定を行い、復号すべきＶＯＰであ
ると判定した場合は（ステップＳ３７“ＹＥＳ”）、入
力ビットストリームをＶＯＰヘッダ解析部９０へ出力す
る一方、解析が不必要であると判定した場合は（ステッ
プＳ３７“ＮＯ”）、入力ビットストリームをスタート
コード解析部８３へ出力する。例えば、ＶＯＰ選択情報
８９が１ＶＯＰおきに解析を行うＶＯＰがあることを示
している場合、入力されるカウント数８６が偶数に場合
には復号が必要であると判定し、入力されるカウント数
が奇数の場合には復号が不必要であると判定することに
なる。
【０１０１】ＶＯＰヘッダ解析部９０では、入力される
ビットストリームよりＶＯＰヘッダの解析を行い、解析
後のビットストリームをスタートコード解析部８３へ出
力する（ステップＳ３８）。なお、ＶＯＰヘッダ解析部
９０の解析処理が終了した後、スタートコード解析部８
３は、その解析後のビットストリーム４３をビデオ信号
解析部４４（図１５参照）に出力する。
【０１０２】従って、ステップＳ３６で駒落しＶＯＰ制
御部８６のオブジェクトイントラ符号化判定部７３によ
りオブジェクトイントラ符号化表示信号７’がＯＦＦと
判断された場合には、ＶＯＰヘッダ解析部９０への入力
ビットストリームを駒落しＶＯＰ判定部９１を介さずに
出力するので、ＶＯＰの駒落しは行われない。この原理
は実施の形態３に述べたことと同じである。一方、ステ
ップＳ３６でオブジェクトイントラ符号化判定部７３に
よりオブジェクトイントラ符号化表示信号７’がＯＮと
判断され、かつ、続くステップ３７で駒落しＶＯＰ判定
部９１によりＶＯＰ選択情報８９やカウント数８５に基
づいて、現在解析対象となっているＶＯＰの復号が必要
であるかないかの判定を行う。ここで復号が必要である
と判定された入力ビットストリームのみＶＯＰヘッダ解
析部９０へ出力されるので、ＶＯＰの駒落しが行われる
ことになる。
【０１０３】以上のように、本実施の形態４では、エン
コーダ側で設定したエンコーダ側におけるＶＯＰレート
情報８７がＶＯＬヘッダ情報とともに多重化されたビッ
トストリームを復号して、これに基づいて表示制御を行
う機能を持つようにした以外は、実施の形態３と同様に
機能する。そして、実施の形態３の場合と同様に、ＶＯ
Ｌヘッダにオブジェクトイントラ符号化表示信号７’が
多重化された符号化ビットストリームを復号する際、そ
のオブジェクトイントラ符号化表示信号７’を解析する
ように構成したため、オブジェクトイントラ符号化表示
信号７’がＯＮである場合、すべてのＶＯＰデータがイ
ントラ符号化されていると判断されるオブジェクトにつ
いては、エンコーダ側で設定されたＶＯＰレート情報８
７と、デコーダ側で設定されたＶＯＰレート情報７１と
に応じて任意のＶＯＰを駒落としして表示等することが
可能となる。
【０１０４】また、本実施の形態４では、ＶＯＬヘッダ
にオブジェクトイントラ符号化表示信号７’とＶＯＰレ
ート情報８７が含まれる符号化ビットストリーム８１を
復号するよう構成したため、任意のＶＯＰを駒落としし
て表示できる前記実施の形態３の効果に加えて、個々の
ＶＯＰヘッダを解析して、個々に設定されている表示時
刻に関する相対時間情報(モジュロ・タイム・ベース、
ＶＯＰタイムインクリメント)を復号する必要がなくな
り、より簡易に駒落とし制御が可能となる。
【０１０５】なお、以上の説明では、復号側に入力する
符号化ビットストリームとして、エンコーダ側における
ＶＯＰレート情報がＶＯＬヘッダに多重化されている符
号化ビットストリームを復号するように説明したが、本
発明では、これに限らず、例えば、エンコーダ側におけ
るＶＯＰレート情報がＧＯＶヘッダに多重化されている
符号化ビットストリームを復号するようにしても良い。
このようにする場合には、図２９に示すように、ヘッダ
解析部４２のＧＯＶヘッダ解析部９２にエンコーダ側に
おけるＶＯＰレート情報９３の復号機能を持たせるよう
にすれば良い。このＶＯＰレート情報９３は、ＧＯＶ内
でのＶＯＰの表示速度を示す情報となる。
【０１０６】また、実施の形態３の場合と同様に、オブ
ジェクトイントラ符号化表示信号７’がＧＯＶを単位に
符号化されているビットストリームでも対応する構成と
することにより、同様の効果を得ることができる。この
場合には、例えば、図２６では、ＶＯＬヘッダ解析部８
４ではなく、ＧＯＶヘッダ解析部６１がオブジェクトイ
ントラ符号化表示信号７’の解析機能を持つことになる
一方、図２９では、ＶＯＬヘッダ解析部７５ではなく、
ＧＯＶヘッダ解析部９２がオブジェクトイントラ符号化
表示信号７’の解析機能を持つことになる。
【０１０７】また、本実施の形態４でも、実施の形態３
のところで説明したように、実施の形態３のＶＯＰデコ
ーダにより図２４に示すような複数オブジェクトを復号
して合成するシステムに使用しても、実施の形態３で述
べた効果と同様の効果を得ることができる。このこと
は、後述する他の実施の形態のＶＯＰデコーダでも同様
で、図２４に示すような複数オブジェクトを復号して合
成するシステムを構成できる。
【０１０８】実施の形態５．本実施の形態５では、オブ
ジェクトイントラ符号化表示信号をＶＯＬのレイヤに含
み、かつ、ＧＯＶのレイヤに当該ＧＯＶ先頭のＶＯＰの
絶対表示時刻を表すタイムコード情報を含む符号化ビッ
トストリームを入力して、任意の時刻のＶＯＰをランダ
ムに指定して復号・表示することを可能とする画像復号
化装置について説明する。なお、本実施の形態５では、
実施の形態３の構成の復号化装置のヘッダ解析部４２の
構成のみが異なるので、以下、ヘッダ解析部４２の構成
および動作についてのみ説明する。また、本実施の形態
５では、図５に示す符号化ビットストリーム３０を入力
して復号するデコーダを説明する。
【０１０９】図３０は、本実施の形態５におけるヘッダ
解析部４２の構成を示したものである。同図において、
９４はスタートコード解析部、９５は例えばＤＲＡＭ,
ＳＤＲＡＭなどのメモリや、ＰＣなどに接続されるハー
ドディスクドライブ等の記録媒体で、符号化側から送信
されてきた符号化ビットストリーム３０を記憶する記憶
媒体、９６はＶＯＰヘッダ解析部、９７は外部設定タイ
ムコード、９８は駒落し制御部、９９はサーチ指示信号
である。
【０１１０】図３１は、図３０に示す駒落し制御部６０
８の構成を示す。図において、７３はオブジェクトイン
トラ符号化判定部、１００は比較部、１０１は記憶媒体
である。
【０１１１】次に、本実施の形態５のヘッダ解析部４２
の動作を説明する。図３２は、本実施の形態５のヘッダ
解析部４２の動作を説明するフローチャートである。本
実施の形態５のヘッダ解析部４２では、まず、スタート
コード解析部９４が、入力される符号化ビットストリー
ム３０に含まれるスタートコードの解析を行う（ステッ
プＳ３９）。解析したスタートコードがＶＯを示すもの
であればＶＯヘッダ解析部５９へ（ステップＳ４０）、
解析したスタートコードがＶＯＬを示すものであればＶ
ＯＬヘッダ解析部６０へ（ステップＳ４１）、解析した
スタートコードがＧＯＶを示すものであればＧＯＶヘッ
ダ解析部６１へ（ステップＳ４２）、解析したスタート
コードがＶＯＰを示すものであればＶＯＰヘッダ解析部
９６へ（ステップＳ４３）、ビットストリームを出力す
る。なお、ＶＯＰヘッダ解析部９６の解析処理を終了し
た後、ビットストリームはビデオ信号解析部４４に出力
され、ビデオ信号解析部にて当該ＶＯＰのビデオ信号が
解析・復号された後、処理は再びスタートコード解析へ
移行する。
【０１１２】すると、ＶＯヘッダ解析部５９は、入力さ
れるビットストリームよりＶＯヘッダ情報の解析を行
い、解析を終えたビットストリームをスタートコード解
析部９４へ出力する（ステップＳ４４）。また、ＶＯＬ
ヘッダ解析部６０は、入力されるビットストリームより
ＶＯＬヘッダ情報の解析を行い、解析を終えたビットス
トリームをスタートコード解析部９４へ出力する（ステ
ップＳ４５）。この際、ＶＯＬヘッダ解析部６０は、Ｖ
ＯＬヘッダに含まれるオブジェクトイントラ符号化表示
信号７’を復号し、ＶＯＰヘッダ解析部９６へ出力す
る。
【０１１３】また、ＧＯＶヘッダ解析部６１は、入力さ
れるビットストリームよりＧＯＶヘッダ情報の解析を行
い、解析を終えたビットストリームをスタートコード解
析部９４へ出力する（ステップＳ４６）。この際、ＧＯ
Ｖヘッダ情報中に含まれるＧＯＶタイムコード６３を復
号し、ＶＯＰヘッダ解析部９６へ出力する。そして、ス
テップＳ４７では、ＶＯＰヘッダ解析処理を実施するＶ
ＯＰヘッダ解析部９６が、本実施の形態５で開示される
ＶＯＰの高速かつ簡易なランダムアクセスを実現する機
構を備える。この機構は具体的には駒落し制御部９８に
て実現される。
【０１１４】図３３に、駒落し制御部９８によるステッ
プＳ４７のＶＯＰヘッダ解析動作を示すフローチャート
である。以下、図３０のＶＯＰヘッダ解析部の詳細図、
図３１、図３３をもとに、ＶＯＰランダムアクセス処理
の動作について説明する。まず、動作状況として、以下
の状況（１）〜（４）を想定する。
【０１１５】（１）記憶媒体９５（例えばCD-ROM、DVD
などの蓄積メディア、DRAM,SDRAMなどのメモリ、PCなど
に接続されるハードディスクドライブなど）に記憶され
た符号化ビットストリームを読み出して入力し、オブジ
ェクトの復号・表示を実施する。この際、各ＶＯＰの絶
対表示時刻をユーザが認知できるよう、ＶＯＰの表示に
合わせて表示画面にタイムコードを出力するものとす
る。符号化ビットストリームはネットワークや放送網を
通じて、デコーダから読み出し可能な記憶媒体９５に送
り込まれることもある。
【０１１６】（２）ユーザが任意の箇所で復号をストッ
プする。同時に該当するタイムコードも当該ＶＯＰの位
置で停止する。表示は、復号をストップする前に最後に
復号されるＶＯＰ画像をそのまま表示させる。ユーザ
は、このストップした時刻から時間的に前や後の方向へ
離れた位置のＶＯＰの画像を静止画像としてビットスト
リーム中から取り出したいと考えている、とする。
【０１１７】（３）ユーザは、取り出したいと考えてい
るＶＯＰ画像のタイムコードを、例えば、取り出したい
と考えているタイムコードを指定するコマンドによる
等、何らかの手段で入力する。このようにして入力した
タイムコードが、外部設定タイムコード９７となる。
【０１１８】（４）（３）でユーザが入力した外部設定
タイムコード６１０と、現在停止している状態のＶＯＰ
画像のタイムコードとを比較し、異なればユーザの指定
した外部設定タイムコード６１０と一致するタイムコー
ドのＶＯＰ画像をサーチして復号・表示する。
【０１１９】なお、ＶＯＰは通常、時間的に前後のＶＯ
Ｐの画像を用いて予測符号化されることが多いので、前
記の動作を行うためには、所望のタイムコードを持つＶ
ＯＰにたどり着くまでに予測関係を持つＶＯＰをすべて
復号しなければならない。しかし、本実施の形態５で
は、オブジェクトイントラ符号化表示信号７’と、駒落
し制御部９８の機構を用いることにより、すべてをイン
トラ符号化、すなわち予測を行わずに符号化しているＶ
ＯＬを直ちに察知して、そのようなＶＯＬヘッダについ
てはダイレクトに所望のＶＯＰ画像をサーチして復号・
再生できるようになる。
【０１２０】まず、前記（１）の状態では、復号化装置
は通常復号動作を行う。ここでは、復号化装置が前記
（１）から（２）の状態に移行する瞬間を仮定する。ま
ず、この時、復号を停止するＶＯＰ画像のタイムコード
を計算する。これは３つのステップ（ステップＳ４７−
１〜Ｓ４７−３）からなる。第１のステップは、モジュ
ロ・タイム・ベースをビットストリーム中から解析する
ステップ（ステップＳ４７−１）で、これはモジュロ・
タイム・ベース解析部６４にて行われる。第２のステッ
プは、ＶＯＰタイムインクリメントをビットストリーム
中から解析するステップ（ステップＳ４７−２）で、こ
れはＶＯＰタイムインクリメント解析部６７で行われ
る。次いで第３のステップで、前記モジュロ・タイム・
ベース、ＶＯＰタイムインクリメントに加え、ＧＯＶヘ
ッダ解析部６１から出力されるＧＯＶタイムコード６３
とに基づいて、当該ＶＯＰの絶対表示時刻であるＶＯＰ
タイムコード７０を計算する（ステップＳ４７−３）。
これは復号ＶＯＰ絶対表示時刻作成部６６で行われ、計
算方法は実施の形態３に示した通りである。これによっ
て得られた（２）の停止状態のＶＯＰのタイムコードが
ユーザに提示される。
【０１２１】次いで、ユーザは（３）の動作を実施する
ものとする。これにより、外部設定タイムコード９７が
与えられ、駒落し制御部９８によるランダムアクセス機
構が作動する。つまり、まず、現在のＶＯＰがユーザが
希望する表示対象のＶＯＰか否かを判断する（ステップ
Ｓ４７−4）。これは比較部１００で行われる。具体的
には、ユーザの希望する表示対象ＶＯＰのタイムコード
である外部設定タイムコード９７と、現在表示されてい
るＶＯＰのＶＯＰタイムコード７０とを比較する。
【０１２２】その結果、一致していれば、「表示対象の
ＶＯＰ」と判断して（ステップＳ４７−４“ＹＥ
Ｓ”）、映像情報ヘッダ解析処理を行なうようにする
（ステップＳ４７−１１）。さもなくば（ステップＳ４
７-４“ＮＯ”）、外部設定タイムコード９７と、現在
のＶＯＰのＶＯＰタイムコード７０との比較により、表
示対象ＶＯＰが現在のＶＯＰより時間的に先のＶＯＰか
否かを判断して（ステップＳ４７−５）、以下のケース
１，２のいずれに相当するかを判定する。なお、その
際、記憶媒体１０１は、比較部１００が外部設定タイム
コード９７に近いＶＯＰタイムコード７０を選択できる
ように、比較部１００における比較の際、前に使用した
ＶＯＰタイムコード７０を一時記憶等するように動作す
る。
【０１２３】ケース１：外部設定タイムコード９７が
（２）の状態のＶＯＰタイムコード７０よりも時間的に
後を示している場合、例えば、外部設定タイムコード９
７が01:00:30、（２）の状態のＶＯＰタイムコード７０
が01:00:10であるような場合である（ステップＳ４７−
５“ＹＥＳ”）。アクションは、オブジェクトイントラ
符号化表示信号７’の値によって切替える（ステップＳ
４７−６）。つまり、オブジェクトイントラ符号化表示
信号７’がＯＮの場合（ステップＳ４７−６“Ｎ
Ｏ”）、すなわち「ＶＯＬ内のＶＯＰが全てイントラ符
号化されている」ことを示す場合は、比較部１００は、
サーチ指示信号９９を「順方向サーチ」に設定し、ビッ
トストリームとともにスタートコード解析部９４へ送る
（ステップＳ４７−７）。これにより、スタートコード
解析部９４は（２）の状態のＶＯＰタイムコード７０よ
りも先、すなわち時間的に後のＶＯＰスタートコードを
サーチすることになる。
【０１２４】これに対し、オブジェクトイントラ符号化
表示信号７’がＯＦＦの場合（ステップＳ４７−６“Ｙ
ＥＳ”）、すなわち「ＶＯＬ内のＶＯＰが予測符号化さ
れている」ことを示す場合は、ＶＯＬ内のＶＯＰは予測
を用いて符号化されているため、個々のＶＯＰをダイレ
クトに復号することができない。この場合は、上記ステ
ップＳ４７−１〜４７−３，Ｓ４７−１１の処理により
個々のＶＯＰのモジュロ・タイム・ベース６５とＶＯＰ
タイムインクリメント６８を復号してＶＯＰタイムコー
ド７０を計算するとともに、逐一ＶＯＰ画像を復号して
いく必要がある。このケースでは、このようにして逐
次、次のＶＯＰを復号していく。
【０１２５】ケース２：外部設定タイムコード９７が
（２）の状態のＶＯＰタイムコード７０よりも時間的に
前を示している場合、例えば、外部設定タイムコード９
７が01:00:00、（２）の状態のＶＯＰタイムコードが0
1:00:10であるような場合である（ステップＳ４７−５
“ＮＯ”）。アクションは、オブジェクトイントラ符号
化表示信号７’の値によって切替える（ステップＳ４７
−８）。つまり、オブジェクトイントラ符号化表示信号
７’がＯＮの場合（ステップＳ４７−８“ＮＯ”）、す
なわち「ＶＯＬ内のＶＯＰが全てイントラ符号化されて
いる」ことを示す場合は、比較部１００はサーチ指示信
号９９を「逆方向サーチ」に設定し、ビットストリーム
とともにスタートコード解析部９４へ送る（ステップＳ
４７−９）。これにより、スタートコード解析部９４は
ビットストリームを逆方向に解析し、（２）の状態より
も時間的に前のＶＯＰのスタートコードをサーチするこ
とができる。
【０１２６】これに対し、オブジェクトイントラ符号化
表示信号７’がＯＦＦの場合（ステップＳ４７−８“Ｙ
ＥＳ”）、すなわち「ＶＯＬ内のＶＯＰが予測符号化さ
れている」ことを示す場合、ＶＯＬ内のＶＯＰは予測を
用いて符号化されているため、個々のＶＯＰをダイレク
トに復号することができない。この場合は、個々のＶＯ
Ｐのモジュロ・タイム・ベース６５とＶＯＰタイムイン
クリメント６８を復号してＶＯＰタイムコード７０を計
算するとともに、画像データまで復号を実行する必要が
ある。このケースでは、予測を実施していないＶＯＰ画
像、すなわち時間的に前のI-ＶＯＰ（イントラ符号化さ
れたＶＯＰ）までさかのぼって復号し、そこから復号を
再開しなければならない。これはサーチ指示信号９９に
よって時間的に前のI-ＶＯＰまでさかのぼって逆サーチ
を行うよう指示することで対処する（ステップＳ４７−
１０）。
【０１２７】このように、本実施の形態５では、ケース
１およびケース２の場合において、オブジェクトイント
ラ符号化表示信号７’がＯＮのときには、サーチ指示信
号９９によりＶＯＰのスタートコード検出を進め、ステ
ップＳ４７−１１の映像情報ヘッダ解析処理を行なわず
に、ＶＯＰの画像データは読み飛ばすようにしている。
つまり、ＶＯＰスタートコードが検出されるたびに、個
々のＶＯＰのモジュロ・タイム・ベースやＶＯＰタイム
インクリメントの解析、復号による現在のＶＯＰの絶対
表示時刻であるＶＯＰタイムコード７０の算出（ステッ
プＳ４７−１〜Ｓ４７−３）、現在のＶＯＰタイムコー
ド７０と、外部設定タイムコード９７とのタイムコード
比較による表示対象のＶＯＰか否かの判断（ステップＳ
４７−４）を行い、外部設定タイムコード９７と、サー
チした結果のＶＯＰのタイムコード７０が一致するまで
処理を繰り返す。そして、外部設定タイムコード９７
と、サーチした結果のＶＯＰタイムコード７０が一致し
たら、表示対象のＶＯＰのところで復号が停止したこと
になるので、ランダムアクセスの動作を終了する。
【０１２８】以上のように、本実施の形態５によれば、
ＶＯＬ内のＶＯＰがすべてイントラ符号化されているか
どうかを示すオブジェクトイントラ符号化表示信号７’
に基づいて、もしオブジェクトイントラ符号化表示信号
７’がＯＮの場合、すなわちＶＯＬ内のＶＯＰがすべて
イントラ符号化されている場合には、Ｓ４７−１１の映
像情報ヘッダ解析処理によるＶＯＰの復号をＶＯＰ毎に
順次行うことなく、ＶＯＰの画像データは読み飛ばし
て、ダイレクトに所望のＶＯＰの画像データをサーチし
て復号することができる。このため、例えば、ＭＰＥＧ
−４準拠の圧縮規格を採用した家庭用ビデオなどですべ
てのＶＯＰをイントラで符号化して記憶媒体９５等に記
録しておき、これをインターネットや、CD-ROM/DVD-ROM
などで供給される他のオブジェクト映像と合成するなど
して所望のシーンを編集するようなケースを考えた場
合、本実施の形態５で述べた構成をとる復号化装置によ
って編集すれば、ビデオ撮影した映像の所望の時刻の画
像へ高速にアクセスすることができ、ストレスなく映像
編集を行うことが可能となる。
【０１２９】また、映像素材を、ＭＰＥＧ−４準拠の圧
縮規格によりすべてのＶＯＰをイントラで符号化してDV
D-RAMなどの大容量記録メディアに蓄積しておき、テレ
ビプログラムなどの制作の際に、高速にアクセスしなが
ら所望の編集操作を行うことも可能となる。
【０１３０】なお、本実施の形態５では、図５に示す符
号化ビットストリーム３０を例として、オブジェクトイ
ントラ符号化表示信号がＶＯＬヘッダに多重化され、タ
イムコードを含むＧＯＶのレイヤを含んだビットストリ
ームを復号する例について述べたが、本発明では、これ
に限らず、図６に示す符号化ビットストリーム３１のよ
うにＧＯＶヘッダ３１ｃにオブジェクトイントラ符号化
表示信号７’を含む場合についても、ＧＯＶヘッダ解析
部６１でオブジェクトイントラ符号化表示信号７’の解
析を行う構成にすることによって、ＧＯＶ内のすべての
ＶＯＰがイントラ符号化されている場合に、任意のＶＯ
Ｐへのランダムアクセスをスムーズに行うことが可能で
ある。
【０１３１】実施の形態６．本実施の形態６では、オブ
ジェクトイントラ符号化表示信号７’と、ＶＯＬ内のＶ
ＯＰの表示速度を示す表示速度情報としてのＶＯＰレー
ト情報とをＶＯＬのレイヤに含み、かつ、ＧＯＶのレイ
ヤに当該ＧＯＶ先頭のＶＯＰの絶対表示時刻を表すタイ
ムコード情報とを含む符号化ビットストリームを入力し
て、任意の時刻のＶＯＰをランダムに指定して復号・表
示することを可能とする画像復号化装置について説明す
る。なお、本実施の形態６では、実施の形態４の構成の
復号化装置のヘッダ解析部の構成のみが異なるので、以
下、ヘッダ解析部の動作についてのみ説明する。また、
本実施の形態６では、図２５に示す符号化ビットストリ
ーム８１を入力して復号するものとして説明する。
【０１３２】図３４は、本実施の形態６におけるヘッダ
解析部４２の構成を示したものである。同図において、
１０２はスタートコード解析部、１０３は復号ＶＯＰ選
択部、１０４はＶＯＰヘッダ解析部である。尚、その他
の構成は、図２６に示す実施の形態４等のヘッダ解析部
の構成と同じなので、同一番号を付してその説明は省略
する。
【０１３３】図３５は、図３４に示す復号ＶＯＰ選択部
１０３の内部構成を示している。図において、７３はオ
ブジェクトイントラ符号化判定部、１００は比較部、１
０５はＶＯＰタイムコード算出部である。
【０１３４】次に、本実施の形態６のヘッダ解析部４２
の動作を説明する。図３６は、本実施の形態６のヘッダ
解析部４２の動作を示すフローチャートである。本実施
の形態６のヘッダ解析部４２では、まず、スタートコー
ド解析部１０２が入力される符号化ビットストリーム８
１に含まれるスタートコードの解析を行う（ステップＳ
４８）。解析したスタートコードがＶＯを示すものであ
ればＶＯヘッダ解析部５９へ（ステップＳ４９）、解析
したスタートコードがＶＯＬを示すものであればＶＯＬ
ヘッダ解析部８４へ（ステップＳ５０）、解析したスタ
ートコードがＧＯＶを示すものであればＧＯＶヘッダ解
析部６１へ（ステップＳ５１）、解析したスタートコー
ドがＶＯＰを示すものであれば復号ＶＯＰ選択部１０３
へ（ステップＳ５２）、ビットストリームを出力する。
なお、ＶＯＰヘッダ解析部１０４の解析処理を終了した
後、ヘッダ解析を終了したビットストリーム４３はビデ
オ信号解析部４４に出力され、ビデオ信号解析部にて当
該ＶＯＰのビデオ信号が解析・復号された後、処理は再
びスタートコード解析へ移行する。スタートコード解析
部１０２は、内部にＶＯＰカウンタを持ち、ＶＯＰスタ
ートコードを検出するたびにＶＯＰカウントをインクリ
メントしてＶＯＰカウンタ値８５を出力する。また、同
カウント値８５は復号ＶＯＰ選択部１０３へ出力する。
ＶＯＰカウント値８５はＧＯＶスタートコードまたはＶ
ＯＬスタートコードが検出されるたびにリセットされる
ものとする。
【０１３５】すると、ＶＯヘッダ解析部５９は、入力さ
れるビットストリームよりＶＯヘッダ情報の解析を行
い、解析を終えたビットストリームをスタートコード解
析部１０２へ出力する（ステップＳ５３）。また、ＶＯ
Ｌヘッダ解析部８４は、入力されるビットストリームよ
りＶＯＬヘッダ情報の解析を行い、解析を終えたビット
ストリームをスタートコード解析部１０２へ出力する
（ステップＳ５４）。この際、ＶＯＬヘッダ解析部８４
は、ＶＯＬヘッダ情報中に含まれるオブジェクトイント
ラ符号化表示信号７’と、ＶＯＰレート情報８７とを復
号し、復号ＶＯＰ選択部１０３へ出力する。
【０１３６】また、ＧＯＶヘッダ解析部６１は、入力さ
れるビットストリームよりＧＯＶヘッダ情報の解析を行
い、解析を終えたビットストリームをスタートコード解
析部１０２へ出力する（ステップＳ５５）。この際、Ｇ
ＯＶヘッダ解析部６２０は、ＧＯＶヘッダ情報中に含ま
れるＧＯＶタイムコード６３を復号し、復号ＶＯＰ選択
部１０３へ出力する。
【０１３７】そして、復号ＶＯＰ選択部１０３は、本実
施の形態６で開示されるＶＯＰの高速かつ簡易なランダ
ムアクセス機構を実現する（ステップＳ５６）。
【０１３８】このため、本実施の形態６によれば、オブ
ジェクトイントラ符号化表示信号７’と、復号ＶＯＰ選
択部１０３の機構を用いることにより、すべてをイント
ラ符号化、すなわち予測を行わずに符号化しているＶＯ
Ｌを直ちに察知して、そのようなＶＯＬについてはダイ
レクトに所望のＶＯＰ画像をサーチして復号・再生でき
るようになる。特に、本実施の形態６では、ＶＯＬのレ
イヤにＶＯＰレート情報も含まれており、各ＶＯＰのタ
イムコード７０を個々のモジュロ・タイム・ベースや、
ＶＯＰタイムインクリメントを復号することなく特定す
ることができる。
【０１３９】図３７に、復号ＶＯＰ選択部１０３による
ステップＳ５６のＶＯＰランダムアクセス機構の詳細処
理のフローチャートを示す。以下、主に、図３５、図３
７をもとに、ＶＯＰランダムアクセス処理の動作につい
て説明する。動作状況として、実施の形態５で述べた
（１）〜（４）の状況をここでも想定する。
【０１４０】具体的に説明すると、この実施の形態６で
は、状態（１）では、復号化装置は通常復号動作を行
う。ここでは、復号化装置が状態（１）から状態（２）
に移行する瞬間を仮定する。この時、まず、ユーザによ
る（２）の行為により、復号を停止するＶＯＰ画像のタ
イムコード７０をＶＯＰタイムコード算出部１０５にて
計算する（ステップＳ５６−１）。これは以下の計算式
によって求められる。 ＶＯＰタイムコード７０＝ＧＯＶタイムコード６３＋
（ＶＯＰカウンタ値８５）÷（ＶＯＰレート情報８７） つまり、ＶＯＰタイムコード算出部１０５は、ＶＯＰカ
ウンタ値８５を、符号化側のＶＯＰレート情報８７によ
り除算し、その商と、ＧＯＶタイムコード６３とを加算
して、復号を停止しようとするＶＯＰ画像のタイムコー
ド７０を算出するのである。
【０１４１】例えば、ＧＯＶタイムコード６３が01時間
00分00秒、ＶＯＰカウンタ値８５が60枚、符号化側のＶ
ＯＰレート情報８７が30枚／秒とした場合、ＧＯＶタイ
ムコード６３に、60／30(＝2)秒を加算した01時間00分0
2秒がＶＯＰタイムコードとして算出される。
【０１４２】このように、この実施の形態５では、実施
の形態５のように３つのステップ（ステップＳ４７−１
〜Ｓ４７−３）から復号を停止するＶＯＰ画像のタイム
コード７０を求める必要はなく、スタートコード解析部
１０２で個々のＶＯＰのスタートコードが検出され、Ｖ
ＯＰカウンタがインクリメントされ、そのＶＯＰカウン
タ値８５と、符号化側のＶＯＰレート情報８７と、ＧＯ
Ｖタイムコード６３とを利用することにより、実施の形
態４の場合よりも迅速に、復号を停止するＶＯＰタイム
コード７０が決定できる。これによって得られた（２）
の停止状態のＶＯＰのタイムコードがユーザに提示され
る。
【０１４３】次いで、ユーザは（３）の動作を実施する
ものとする。これにより、ユーザが取り出したいと考え
ている外部設定タイムコード９７が与えられ、復号ＶＯ
Ｐ選択部１０３によるランダムアクセス機構が作動す
る。つまり、まず、現在復号を停止しているＶＯＰがユ
ーザが希望する表示対象のＶＯＰか否かを判断する（ス
テップＳ５６-２）。これは比較部１００で行われる。
具体的には、外部設定タイムコード９７と、ＶＯＰタイ
ムコード算出部１０５からのＶＯＰタイムコード７０と
を比較する。
【０１４４】その結果、一致していれば（ステップＳ５
６-２“ＹＥＳ”）、「表示対象のＶＯＰ」と判断し
て、表示対象ＶＯＰのＶＯＰヘッダ解析処理を行なう
（ステップＳ６７）。さもなくば（ステップＳ５６-２
“ＮＯ”）、外部設定タイムコード９７と、現在のＶＯ
ＰのＶＯＰタイムコード７０との比較により、表示対象
ＶＯＰが現在のＶＯＰより時間的に先のＶＯＰか否かを
判断して（ステップＳ５６−３）、以下のケース１，２
のいずれに相当するかを判定する。
【０１４５】ケース１：外部設定タイムコード９７が
（２）の状態のＶＯＰタイムコード７０よりも時間的に
後を示している場合、例えば、外部設定タイムコード９
７が01:00:30、（２）の状態のＶＯＰタイムコード７０
が01:00:10であるような場合である（ステップＳ５６−
３“ＹＥＳ”）。アクションは、オブジェクトイントラ
符号化表示信号７’の値によって切替える（ステップＳ
５６−４）。つまり、オブジェクトイントラ符号化表示
信号７’がＯＮの場合は（ステップＳ５６−４“Ｎ
Ｏ”）、すなわち「ＶＯＬ内のＶＯＰが全てイントラ符
号化されている」ことを示す場合は、比較部１００はサ
ーチ指示信号９９を「順方向サーチ」に設定し、ビット
ストリームとともにスタートコード解析部１０２へ送る
（ステップＳ５６−５）。これにより、スタートコード
解析部１０２は、（２）の状態である復号を停止した状
態のＶＯＰタイムコード７０よりも先、すなわち時間的
に後のＶＯＰスタートコードをサーチすることができ
る。
【０１４６】これに対し、オブジェクトイントラ符号化
表示信号７’がＯＦＦの場合（ステップＳ５６−４“Ｙ
ＥＳ”）、すなわち「ＶＯＬ内のＶＯＰが予測符号化さ
れている」ことを示す場合は、ＶＯＬ内のＶＯＰは予測
を用いて符号化されているため、個々のＶＯＰをダイレ
クトに復号することができない。このため、この場合
は、ＶＯＰヘッダ解析部１０４が、次のステップＳ５７
の通常のＶＯＰヘッダ解析処理の中で、図３３に示すス
テップＳ４７−１〜Ｓ４７−３，Ｓ４７−１１と同等の
処理を行なって、個々のＶＯＰのモジュロ・タイム・ベ
ースと、ＶＯＰタイムインクリメントとを解析、復号し
て、復号を停止した現在のＶＯＰのＶＯＰタイムコード
６１１を計算して、逐一ＶＯＰ画像を復号していく必要
がある。このケースでは、このようにして逐次、次のＶ
ＯＰを復号していく。
【０１４７】ケース２：外部設定タイムコード９７が
（２）の状態のＶＯＰタイムコード７０よりも時間的に
前を示している場合、例えば、外部設定タイムコード９
７が01:00:00、（２）の状態のＶＯＰタイムコード７０
が01:00:10であるような場合である（ステップＳ５６−
３“ＮＯ”）。アクションは、オブジェクトイントラ符
号化表示信号７’の値によって切替える（ステップＳ５
６−６）。つまり、オブジェクトイントラ符号化表示信
号７’がＯＮの場合（ステップＳ５６−６“ＮＯ”）、
比較部１００はサーチ指示信号９９を「逆方向サーチ」
に設定し、ビットストリームとともにスタートコード解
析部１０２へ送る（ステップＳ５６−７）。これによ
り、スタートコード解析部１０２はビットストリームを
逆方向に解析し、（２）の状態よりも時間的に前のＶＯ
Ｐのスタートコードをサーチする。
【０１４８】これに対し、オブジェクトイントラ符号化
表示信号７’がＯＦＦの場合（ステップＳ５６−６“Ｙ
ＥＳ”）、すなわち「ＶＯＬ内のＶＯＰが予測符号化さ
れている」ことを示す場合、ＶＯＬ内のＶＯＰは予測を
用いて符号化されているため、個々のＶＯＰをダイレク
トに復号することができない。この場合は、個々のＶＯ
Ｐの画像データの復号を実行する必要がある。このケー
スでは、予測を実施していないＶＯＰ画像、すなわち時
間的に前のI-ＶＯＰまでさかのぼって復号し、そこから
復号を再開しなければならない。これはサーチ指示信号
９９によって時間的に前のI-ＶＯＰまでさかのぼって逆
サーチを行うよう指示することで対処する（ステップＳ
５６−８）。
【０１４９】このように、本実施の形態６では、ケース
１およびケース２の場合において、オブジェクトイント
ラ符号化表示信号７’がＯＮのときには、サーチ指示信
号９９によりＶＯＰのスタートコード検出を進め、ステ
ップＳ５７のＶＯＰヘッダ解析処理は行なわずに、ＶＯ
Ｐの画像データは読み飛ばすようにしている。つまり、
ＶＯＰスタートコードが検出されるたびに、現在のＶＯ
Ｐの絶対表示時刻であるＶＯＰタイムコード７０の算出
（ステップＳ５６−１）、ＶＯＰタイムコード７０と外
部設定タイムコード９７との比較による表示対象のＶＯ
Ｐか否かの判断（ステップＳ５６−２）を行い、外部設
定タイムコード９７と、サーチした結果のＶＯＰのタイ
ムコード７０が一致するまで処理を繰り返す。そして、
外部設定タイムコード９７と、サーチした結果のＶＯＰ
タイムコード７０が一致したら、表示対象のＶＯＰのと
ころで復号が停止したことになるので、ランダムアクセ
スの動作を終了する。
【０１５０】以上のように、本実施の形態６では、ＶＯ
Ｌ内のＶＯＰがすべてイントラ符号化されているかどう
かを示すオブジェクトイントラ符号化表示信号７’に基
づいて、例えばオブジェクトイントラ符号化表示信号
７’がＯＮで、ＶＯＬ内のＶＯＰがすべてイントラ符号
化されている場合には、ステップＳ５７のＶＯＰヘッダ
解析処理をＶＯＰ毎に順次行わず、順次ＶＯＰの復号を
行なわないので、ダイレクトに所望のＶＯＰの画像デー
タをサーチして復号することができる。
【０１５１】また、本実施の形態６では、各ＶＯＰのタ
イムコード７０を、ＧＯＶ先頭のＶＯＰのタイムコード
であるＧＯＶタイムコード６３と、スタートコード解析
部１０２からのＶＯＰカウンタ値８５と、符号化側のＶ
ＯＰレート情報８７とに基づいて決定するので、各ＶＯ
Ｐについてモジュロ・タイム・ベースやＶＯＰタイムイ
ンクリメントの情報を復号しなくて済む。このことは、
外部設定タイムコード９７からあらかじめ読み飛ばすＶ
ＯＰの数を計算してランダムアクセスができることを示
しており、実施の形態５のように逐一各ＶＯＰの表示時
刻を図３３のステップＳ４７−１〜Ｓ４７−３の処理に
より算出して判断するという手間を踏まずに済ませるこ
とができ、実施の形態５の場合よりも高速にランダムア
クセスができることになる。つまり、各ＶＯＰの表示時
刻を逐一ＶＯＰヘッダ解析に基づいて算出することな
く、ＶＯＰレート情報に基づいて個々のＶＯＰのタイム
コードを特定できるので、高速なランダムアクセスが可
能となる。
【０１５２】例えば、ＭＰＥＧ−４準拠の圧縮規格を採
用した家庭用ビデオなどですべてのＶＯＰをイントラで
符号化して記憶媒体９５等に記録しておき、これをイン
ターネットやCD-ROM/DVD-ROMなどで供給される他のオブ
ジェクト映像と合成するなどして所望のシーンを編集す
るようなケースを考えた場合、本実施の形態で述べた構
成をとる復号化装置によって編集すれば、ビデオ撮影し
た映像の所望の時刻の画像へ高速にアクセスすることが
でき、ストレスなく映像編集を行うことが可能となる。
また、映像素材を、ＭＰＥＧ−４準拠の圧縮規格により
すべてのＶＯＰをイントラで符号化してDVD-RAMなどの
大容量記録メディアに蓄積しておき、テレビプログラム
などの制作の際に、高速にアクセスしながら所望の編集
操作を行うことも可能となる。
【０１５３】なお、本実施の形態６では、図２５に示す
符号化ビットストリーム８１を例として、オブジェクト
イントラ符号化表示信号７’と、ＶＯＰレート情報８７
とをＶＯＬヘッダ８１ｂに含み、かつ、ＧＯＶヘッダ８
１ｃに当該ＧＯＶ先頭のＶＯＰの絶対表示時刻を表すＧ
ＯＶタイムコード６３を含む符号化ビットストリームを
復号する例について述べたが、本発明では、これに限ら
ず、例えば、ＧＯＶヘッダにＧＯＶタイムコード６３だ
けでなく、オブジェクトイントラ符号化表示信号７’、
ＶＯＰレート情報８７を設けた符号化ビットストリーム
（図示せず）を復号するようにしても良い。この場合
は、図３４におけるＧＯＶヘッダ解析部６１に、ＧＯＶ
タイムコード６３の復号機能だけでなく、オブジェクト
イントラ符号化表示信号７’と、ＶＯＰレート情報８７
との復号機能を持たせるようにすればよい。
【０１５４】実施の形態７．本実施の形態７では、実施
の形態２で説明したＶＯＰエンコーダによって生成され
る符号化ビットストリームを復号するＶＯＰデコーダに
ついて説明する。つまり、本実施の形態７のＶＯＰデコ
ーダは、図１２に示す符号化ビットストリーム３９を入
力とし、符号化ビットストリーム３９中から実施の形態
２で述べたオブジェクトイントラ符号化表示信号７’、
表示時刻多重化識別情報３４、各ＶＯＰのタイムコード
３５を復号し、これらの値に基づいてＶＯＰの復号およ
び表示を制御することを特徴とするものである。尚、本
実施の形態７におけるＶＯＰデコーダは、実施の形態６
記載のＶＯＰデコーダと基本的な構成は同じであり、ヘ
ッダ解析部４２のみが異なるので、以下では本実施の形
態におけるヘッダ解析部４２の説明のみを行う。
【０１５５】図３８は本実施の形態７におけるヘッダ解
析部４２の内部構成を示したものである。図において、
１０６はＶＯＬヘッダ解析部、１０７は復号ＶＯＰ選択
部である。尚、その他の構成は、図３４に示す実施の形
態６のヘッダ解析部４２の構成と同じなので、同一番号
を付してその説明は省略する。
【０１５６】図３９は、図３８に示す実施の形態７の復
号ＶＯＰ選択部１０７の内部構成を示している。図にお
いて、７３はオブジェクトイントラ符号化判定部、１０
０は比較部、１０８はＶＯＰタイムコード保持部であ
る。
【０１５７】以下、本実施の形態７のヘッダ解析部４２
の動作を説明する。図４０は、本実施の形態のヘッダ解
析部４２の動作を示すフローチャートである。本実施の
形態７のヘッダ解析部４２では、まず、スタートコード
解析部１０２において、入力される符号化ビットストリ
ーム３９に含まれるスタートコードの解析を行う（ステ
ップＳ５８）。解析したスタートコードがＶＯを示すも
のであればＶＯヘッダ解析部５９へ（ステップＳ５
９）、解析したスタートコードがＶＯＬを示すものであ
ればＶＯＬヘッダ解析部１０６へ（ステップＳ６０）、
解析したスタートコードがＧＯＶを示すものであればＧ
ＯＶヘッダ解析部６１へ（ステップＳ６１）、解析した
スタートコードがＶＯＰを示すものであれば復号ＶＯＰ
選択部１０７へ（ステップＳ６２）、ビットストリーム
を出力する。
【０１５８】なお、ＶＯＰヘッダ解析部１０４の解析処
理を終了した後、ビットストリーム４３は、スタートコ
ード解析部１０２からビデオ信号解析部４４に出力さ
れ、ビデオ信号解析部４４にて当該ＶＯＰのビデオ信号
が解析・復号された後、処理は再びスタートコード解析
へ移行する。スタートコード解析部１０２は、内部にＶ
ＯＰカウンタを持ち、ＶＯＰスタートコードを検出する
たびにＶＯＰカウントをインクリメントしてＶＯＰカウ
ンタ値８５を復号ＶＯＰ選択部１０７へ出力する。ＶＯ
ＰカウンタはＶＯＬスタートコードが検出されるたびに
リセットされるものとする。
【０１５９】すると、ＶＯヘッダ解析部５９は、入力さ
れるビットストリームよりＶＯヘッダ情報の解析を行
い、解析を終えたビットストリームをスタートコード解
析部１０２へ出力する（ステップＳ６３）。
【０１６０】また、ＶＯＬヘッダ解析部１０６は、入力
されるビットストリームよりＶＯＬヘッダ情報の解析を
行い、解析を終えたビットストリームをスタートコード
解析部１０２へ出力する（ステップＳ６４）。
【０１６１】この際、ＶＯＬヘッダ解析部１０６は、図
１２に示すように、ＶＯＬヘッダ情報中に含まれるオブ
ジェクトイントラ符号化表示信号７’、表示時刻多重化
識別情報３４、タイムコード３５とを復号し、復号ＶＯ
Ｐ選択部１０６へ出力する。
【０１６２】ただし、実施の形態２で述べたように、表
示時刻多重化識別情報３４は、オブジェクトイントラ符
号化表示信号７’がＯＮ、すなわちＶＯＬの単位の中に
含まれる全てのＶＯＰをイントラのみで符号化すること
を示している場合のみ復号され、タイムコード３５は、
さらに表示時刻多重化識別情報３４がＯＮを示している
場合のみ復号される。以下の説明においては、オブジェ
クトイントラ符号化表示信号７’、表示時刻多重化識別
情報３４ともにＯＮであり、ＶＯＬ内のすべてのＶＯＰ
のタイムコード３５がＶＯＬヘッダ解析部１０６で復号
されるものとする。
【０１６３】また、ＧＯＶヘッダ解析部６１は、入力さ
れるビットストリームよりＧＯＶヘッダ情報の解析を行
い、解析を終えたビットストリームをスタートコード解
析部１０２へ出力する（ステップＳ６５）。この際、Ｇ
ＯＶヘッダ解析部６１は、ＧＯＶヘッダ情報中に含まれ
るＧＯＶタイムコード６３を復号するが、本実施の形態
７ではこのＧＯＶタイムコード情報は使用しない。
【０１６４】そして、復号ＶＯＰ選択部１０７は、本実
施の形態７で開示されるＶＯＰの高速かつ簡易なランダ
ムアクセス機構を実現して、復号しようとするＶＯＰを
選択する（ステップＳ６６）。本実施の形態７のランダ
ムアクセス機構の特長は、比較部１００において外部設
定タイムコード９７と比較するＶＯＰタイムコードを、
全く演算を行うことなく得ることができるという点にあ
る。
【０１６５】図４１に、復号ＶＯＰ選択部１０７による
ステップＳ６６の復号ＶＯＰ選択処理によるＶＯＰラン
ダムアクセス機構の詳細処理のフローチャートを示す。
以下、主に、図３９、図４１をもとに、ＶＯＰランダム
アクセス処理の動作について説明する。動作状況とし
て、実施の形態５で述べた（１）〜（４）の状況をここ
でも想定する。
【０１６６】まず、ＶＯＬヘッダ解析部１０６において
復号されたＶＯＬ内のすべてのＶＯＰのタイムコード３
５は、復号ＶＯＰ選択部１０７のＶＯＰタイムコード保
持部１０８に蓄積され、当該ＶＯＬの復号終了まで保持
される（ステップＳ６６−１）。この時、状態（１）で
は、復号化装置は通常復号動作を行う。
【０１６７】次に、復号化装置が状態（１）から状態
（２）に移行する瞬間を仮定する。この時、ユーザによ
る状態（１）から状態（２）へ移行する動作によって、
復号ＶＯＰ選択部１０７のＶＯＰタイムコード保持部１
０８には、その移行時のＶＯＰカウンタ値８５が示すＶ
ＯＰ画像のタイムコード３５を読出すための読出し指令
等（図示せず）が入力したり、生成等される。
【０１６８】すると、ＶＯＰタイムコード保持部１０８
からは、状態（１）から状態（２）へ移行する瞬間にス
タートコード解析部１０２から入力したＶＯＰカウンタ
値８５が示すＶＯＰ、すなわち（２）により復号を停止
するＶＯＰ画像のタイムコード３５がタイムコード７０
として読み出され、比較部１００へ出力される（ステッ
プＳ６６−２）。このような仕組みによって、（２）に
より復号を停止するＶＯＰのタイムコード７０が、ＶＯ
Ｐヘッダの解析も、何らの演算も行わずに、スタートコ
ード解析部１０２からのＶＯＰカウンタ値８５のみに基
づいて特定することができる。これによって得られた
（２）の停止状態のＶＯＰのタイムコード７０がユーザ
に提示される。
【０１６９】次いで、ユーザは（３）の動作を実施する
ものとする。これにより、外部設定タイムコード９７が
比較部１００に与えられ、復号ＶＯＰ選択部１０７によ
るランダムアクセス機構が作動する。なお、この例で
は、上述のように、ＶＯＰタイムコード保持部１０８
は、状態（２）へ移行する時に入力したＶＯＰカウンタ
値８５が示すＶＯＰ画像のタイムコード３５を、タイム
コード７０として比較部１００へ出力するように説明し
たが、これに限らず、ＶＯＰタイムコード保持部１０８
は、スタートコード解析部１０２から常時入力するＶＯ
Ｐカウンタ値８５が示すＶＯＰ画像のタイムコード３５
を、タイムコード７０として比較部１００へ常時出力す
るようにしてもよい。ただし、この場合でも、比較部１
００は、状態（２）へ移行する瞬間に入力したタイムコ
ード７０と、（３）の動作により与えられる外部設定タ
イムコード９７とにを用いて、ランダムアクセス機構を
行なうように構成されることになる。要は、ＶＯＰタイ
ムコード保持部１０８に保持されたタイムコード３５の
うち、状態（２）へ移行する時のタイムコード７０と、
外部設定タイムコード９７とを用いたランダムアクセス
機構が作動するように構成すれば良いのである。
【０１７０】具体的には、まず、当該ＶＯＰがユーザが
希望する表示対象のＶＯＰか否かを判断する（ステップ
Ｓ６６-３）。これは比較部１００で行われる。具体的
には、外部設定タイムコード９７と、ＶＯＰタイムコー
ド保持部１０８からの（２）により復号を停止した現在
のＶＯＰのＶＯＰタイムコード７０とを比較することに
より行なう。
【０１７１】ここで、外部設定タイムコード９７と、現
在のＶＯＰのＶＯＰタイムコード７０とが一致していれ
ば（ステップＳ６６−３“ＹＥＳ”）、「表示対象のＶ
ＯＰ」と判断して、表示対象ＶＯＰのＶＯＰヘッダ解析
処理を行なう（ステップＳ６７）。さもなくば（ステッ
プＳ６６−３“ＮＯ”）、外部設定タイムコード９７
と、現在のＶＯＰのＶＯＰタイムコード７０との比較に
より、表示対象ＶＯＰが現在のＶＯＰより時間的に先の
ＶＯＰか否かを判断して（ステップＳ６６−４）、以下
のケース１，２のいずれに相当するかを判定する。
【０１７２】ケース１：外部設定タイムコード９７が
（２）の状態のＶＯＰタイムコード７０よりも時間的に
後を示している場合、例えば、外部設定タイムコード９
７が01:00:30、（２）の状態のＶＯＰタイムコード７０
が01:00:10であるような場合である（ステップＳ６６−
４“ＹＥＳ”）。アクションは、オブジェクトイントラ
符号化表示信号７’の値によって切替える（ステップＳ
６６−５）。つまり、オブジェクトイントラ符号化表示
信号７’がＯＮの場合は（ステップＳ６６−５“Ｎ
Ｏ”）、すなわち「ＶＯＬ内のＶＯＰが全てイントラ符
号化されている」ことを示す場合は、比較部１００はサ
ーチ指示信号９９を「順方向サーチ」に設定し、ビット
ストリームとともにスタートコード解析部１０２へ送る
（ステップＳ６６−６）。これにより、スタートコード
解析部１０２は、（２）の状態のＶＯＰタイムコード７
０よりも先、すなわち時間的に後ののＶＯＰスタートコ
ードをサーチする。
【０１７３】これに対し、オブジェクトイントラ符号化
表示信号７’がＯＦＦの場合（ステップＳ５６−５“Ｙ
ＥＳ”）、すなわち「ＶＯＬ内のＶＯＰが予測符号され
ている」ことを示す場合は、個々のＶＯＰをダイレクト
に復号することができない。このため、この場合は、実
施の形態６の場合と同様に、ＶＯＰヘッダ解析部１０４
が、次のステップＳ６７の通常のＶＯＰヘッダ解析処理
の中で、図３３に示すステップＳ４７−１〜Ｓ４７−
３，Ｓ４７−１１と同等の処理を行なって、個々のＶＯ
Ｐのモジュロ・タイム・ベースと、ＶＯＰタイムインク
リメントとを解析、復号して、復号を停止した現在のＶ
ＯＰのＶＯＰタイムコード６１１を計算して、逐一ＶＯ
Ｐ画像を復号していく必要がある。このケースでは、こ
のようにして逐次、次のＶＯＰを復号していく。
【０１７４】ケース２：外部設定タイムコード９７が
（２）の状態のＶＯＰタイムコード７０よりも時間的に
前を示している場合、例えば、外部設定タイムコード９
７が01:00:00、（２）の状態のＶＯＰタイムコードが0
1:00:10であるような場合である（ステップＳ６６−４
“ＮＯ”）。アクションは、オブジェクトイントラ符号
化表示信号７’の値によって切替える（ステップＳ６６
−７）。つまり、オブジェクトイントラ符号化表示信号
７’がＯＮの場合（ステップＳ６６−７“ＮＯ”）、比
較部１００はサーチ指示信号９９を「逆方向サーチ」に
設定し、ビットストリームとともにスタートコード解析
部１０２へ送る（ステップＳ６６−８）。これにより、
スタートコード解析部１０２は、ビットストリームを逆
方向に解析し、（２）の状態よりも時間的に前のＶＯＰ
のスタートコードをサーチすることができる。
【０１７５】これに対し、オブジェクトイントラ符号化
表示信号７’がＯＦＦの場合（ステップＳ６６−７“Ｙ
ＥＳ”）、すなわち「ＶＯＬ内のＶＯＰが予測符号化さ
れている」ことを示す場合は、個々のＶＯＰをダイレク
トに復号することができない。この場合は、逐一画像デ
ータまで復号を実行する必要がある。このケースでは、
予測を実施していないＶＯＰ画像、すなわち時間的に前
のI-ＶＯＰまでさかのぼって復号し、そこから復号を再
開しなければならない。これはサーチ指示信号９９によ
って時間的に前のI-ＶＯＰまでさかのぼって逆サーチを
行うよう指示することで対処する（ステップＳ６６−
９）。
【０１７６】このように、本実施の形態７では、実施の
形態６の場合と同様に、ケース１およびケース２の場合
において、オブジェクトイントラ符号化表示信号７’が
ＯＮのときには、サーチ指示信号９９によりＶＯＰのス
タートコード検出を進め、ステップＳ５７のＶＯＰヘッ
ダ解析処理は行なわずに、ＶＯＰの画像データは読み飛
ばすようにしている。つまり、本実施の形態７では、ス
テップＳ６６−１の処理により、ＶＯＬヘッダ解析部１
０６において復号されたＶＯＬ内のすべてのＶＯＰのタ
イムコード３５が、当該ＶＯＬの復号終了までＶＯＰタ
イムコード保持部１０８に保持されているので、ユーザ
による（２）の動作により復号が停止されるたびに、Ｖ
ＯＰタイムコード保持部１０８からは、その時のスＶＯ
Ｐカウンタ値８５が示すＶＯＰのタイムコード３５がタ
イムコード７０として読み出されて（ステップＳ６６−
２）、ＶＯＰタイムコード７０と、外部設定タイムコー
ド９７との比較による表示対象のＶＯＰか否かの判断が
行われ（ステップＳ６６−３）、外部設定タイムコード
９７と、サーチした結果のＶＯＰのタイムコード７０が
一致するまでこれらの処理が繰り返されることになる。
そして、外部設定タイムコード９７と、サーチした結果
のＶＯＰタイムコード７０が一致したら、表示対象のＶ
ＯＰのところで復号が停止したことになるので、ランダ
ムアクセスの動作を終了する。
【０１７７】以上のように、本実施の形態７では、ＶＯ
Ｌ内のＶＯＰがすべてイントラ符号化されているかどう
かを示すオブジェクトイントラ符号化表示信号７’に基
づいて、例えばオブジェクトイントラ符号化表示信号
７’がＯＮで、ＶＯＬ内のＶＯＰがすべてイントラ符号
化されている場合には、ステップＳ６７のＶＯＰヘッダ
解析処理をＶＯＰ毎に順次行わず、順次ＶＯＰの復号を
行なわないので、ダイレクトに所望のＶＯＰの画像デー
タをサーチして復号することができる。
【０１７８】また、本実施の形態７では、各ＶＯＰのタ
イムコード３５を、ＶＯＬヘッダから直接復号してＶＯ
Ｐタイムコード保持部１０８に保持し、スタートコード
解析部１０２からのＶＯＰカウンタ値８５に基づいて読
み出すように構成したため、各ＶＯＰについてモジュロ
・タイム・ベースや、ＶＯＰタイムインクリメントの情
報を復号しなくて済むばかりでなく、デコーダでは何ら
の演算機構も必要としない。これにより、外部設定タイ
ムコード９７と、保持した各ＶＯＰのタイムコード３５
との比較のみで復号すべきＶＯＰを特定できるため、実
施の形態５，６よりも高速な、非常に高速なランダムア
クセスが可能となる。
【０１７９】例えば、ＭＰＥＧ−４準拠の圧縮規格を採
用した家庭用ビデオなどですべてのＶＯＰをイントラで
符号化して記憶媒体９５等に記録しておき、これをイン
ターネットやCD-ROM/DVD-ROMなどで供給される他のオブ
ジェクト映像と合成するなどして所望のシーンを編集す
るようなケースを考えた場合、本実施の形態で述べた構
成をとる復号化装置によって編集すれば、ビデオ撮影し
た映像の所望の時刻の画像へ高速にアクセスすることが
でき、ストレスなく映像編集を行うことが可能となる。
また、映像素材を、ＭＰＥＧ−４準拠の圧縮規格により
すべてのＶＯＰをイントラで符号化してDVD-RAMなどの
大容量記録メディアに蓄積しておき、テレビプログラム
などの制作の際に、高速にアクセスしながら所望の編集
操作を行うことも可能となる。
【０１８０】なお、本実施の形態７では、図１２に示す
符号化ビットストリーム３９を例として、ＶＯＬヘッダ
にオブジェクトイントラ符号化表示信号７’、表示時刻
多重化識別情報３４、タイムコード３５が含まれるビッ
トストリームを復号する例について述べたが、これに限
らず、図１３や、図１４に示す符号化ビットストリーム
４０、４１を復号するＶＯＰデコーダにも同様の考え方
を適用することができる。
【０１８１】例えば、図１３の符号化ビットストリーム
４０を復号するＶＯＰデコーダでは、ＧＯＶごとにその
内部に含まれるＶＯＰのタイムコードを多重化している
ので、ＶＯＬヘッダ解析部１０６ではオブジェクトイン
トラ符号化表示信号７’のみを復号し、ＧＯＶヘッダ解
析部６１ではオブジェクトイントラ符号化表示信号７’
に基づいて表示時刻多重化識別情報３４、タイムコード
３５を復号するように構成すればよい。この場合は、表
示時刻多重化識別情報３４がＯＮであるＧＯＶについて
は、その内部のすべてのＶＯＰについて高速ランダムア
クセスが可能である。
【０１８２】また、図１４の符号化ビットストリーム４
０を復号するＶＯＰデコーダでは、ＧＯＶヘッダ解析部
６１で、オブジェクトイントラ符号化表示信号７’、表
示時刻多重化識別情報３４、タイムコード３５を復号す
るように構成し、ＧＯＶごとに独立にランダムアクセス
の機能性を規定することができる。
【０１８３】以上説明した実施の形態１〜７では、被符
号（復号）化画像をオブジェクト単位のＶＯＰとして規
定してオブジェクト単位に画像を符号化するＭＰＥＧ−
４対応の画像符号化装置または画像復号化装置を例に説
明したが、本発明では、これに限らず、オブジェクトや
ＶＯＰ等の概念のないＭＰＥＧ−１やＭＰＥＧ−２等の
画像符号化装置、画像符号化方法、画像復号化装置およ
び画像復号化方法にも適用できる。この場合、動画像シ
ーケンスを構成する各時刻の画像である被符号化画像
や、テレビ信号等における画像フレーム等が、以上説明
した実施の形態１〜５におけるＶＯＰに該当することに
なり、ＶＯＰを被符号化画像や画像フレーム等に置き換
えることにより実施の形態１〜７と同様に考えることが
できる。例えば、ＭＰＥＧ−１やＭＰＥＧ−２などでは
ユーザが自由にデータの定義を行うことができるユーザ
データ領域や、将来の機能拡張のためのビットフィール
ドが設けられており、これらのデータ領域において本発
明に示したようなシンタックスを取り決めておけば、ラ
ンダムアクセスや駒落し制御などの機能性を向上するこ
とが可能となる。また、以上説明した実施の形態１〜７
では、オブジェクトイントラ符号化表示信号７’は、Ｍ
ＰＥＧ４で規定されているＶＯＬまたはＧＯＶ単位の動
画像シーケンス中に含まれる全てのＶＯＰがイントラの
みで符号化されるか否かを示す情報として説明したが、
本発明では、これらＶＯＬ、ＧＯＶ単位の動画像シーケ
ンスに限らないものである。つまり、これら以外のＶＯ
Ｐの集まりの単位が動画像シーケンスとして存在してい
たり、動画像シーケンスとして定義できるのであれば、
オブジェクトイントラ符号化表示信号７’は、そのよう
なＶＯＬ、ＧＯＶ単位以外を単位とする動画像シーケン
スに含まれる全てのＶＯＰがイントラのみで符号化され
るか否かを示す情報となる。これは、ＶＯＰを被符号化
画像や、画像フレーム等に置き換えた場合も同様であ
る。
【０１８４】
【発明の効果】以上説明したように、本発明に係る画像
復号化装置および画像復号化方法では、符号化ビットス
トリームから動画像シーケンスに含まれる画像すべてが
イントラ符号化されているか否かを示すイントラ符号化
表示情報を解析すると共に、そのイントラ符号化表示情
報に基づいて動画像シーケンスに含まれる画像を復号す
るようにしたため、復号側においては、動画像シーケン
スを構成する個々の画像データのヘッダやオーバヘッド
を復号することなく動画像シーケンス内に含まれる画像
データがすべてイントラ符号化されているか否かを判断
することができる。その結果、復号側で簡単に表示速度
や、復号速度を変化させて復号を行ったり、所望の時刻
の画像へ簡単にランダムアクセスすることが可能にな
る。
【０１８５】また、本発明に係る画像符号化装置および
画像符号化号方法では、動画像シーケンスに含まれる画
像すべてをイントラ符号化するか否かを指示するイント
ラ符号化指示情報に基づき動画像シーケンスに含まれる
画像を符号化すると共に、符号化された画像符号化信号
と、前記動画像シーケンスに含まれる画像すべてがイン
トラ符号化されているか否かを示すイントラ符号化表示
情報とを多重化するようにしたため、復号側において
は、動画像シーケンスを構成する個々の画像データのヘ
ッダやオーバヘッドを復号することなく動画像シーケン
ス内に含まれる画像データがすべてイントラ符号化され
ているか否かを判断することができ、復号側で簡単に表
示速度や復号速度を変化させて復号を行ったり、所望の
時刻の画像へ簡単にランダムアクセスすることを可能に
する符号化ビットストリームを生成することができる。
【図面の簡単な説明】
【図１】 実施の形態１におけるＶＯＰエンコーダの構
成例を示す図である。
【図２】 図１のＶＯＰエンコーダの動作を示すフロー
チャートである。
【図３】 INTRA/INTER判定部１４の動作を説明するフ
ローチャートである。
【図４】 図１に示すヘッダ多重化部８の構成例を示す
図である。
【図５】 実施の形態１のＶＯＰエンコーダから出力さ
れる符号化ビットストリーム３０の例を示す図である。
【図６】 実施の形態１のＶＯＰエンコーダから出力さ
れる符号化ビットストリーム３１の例を示す図である。
【図７】 図６に示す符号化ビットストリーム２００を
生成する場合における実施の形態１のヘッダ多重化部８
の構成例を示す図である。
【図８】 実施の形態２におけるＶＯＰエンコーダの構
成例を示す図である。
【図９】 図８におけるヘッダ多重化部８の構成例を示
す図である。
【図１０】 実施の形態２のＶＯＰエンコーダから出力
される符号化ビットストリーム３７の例を示す図であ
る。
【図１１】 実施の形態２のＶＯＰエンコーダから出力
される符号化ビットストリーム３８の例を示す図であ
る。
【図１２】 実施の形態２のＶＯＰエンコーダから出力
される符号化ビットストリーム３９の例を示す図であ
る。
【図１３】 実施の形態２のＶＯＰエンコーダから出力
される符号化ビットストリーム４０の例を示す図であ
る。
【図１４】 実施の形態２のＶＯＰエンコーダから出力
される符号化ビットストリーム４１の例を示す図であ
る。
【図１５】 実施の形態３におけるＶＯＰデコーダの内
部構成例を示した図である。
【図１６】 図１５に示す画像復号化装置の動作を説明
するフローチャートである。
【図１７】 図１５のINTRA/INTER判定部５４の動作を
示すフローチャートである。
【図１８】 図１５に示す実施の形態３のヘッダ解析部
４２の内部構成を詳細にして示した図である。
【図１９】 図１８に示す駒落し制御部６９の内部構成
を示した図である。
【図２０】 図１８に示すヘッダ解析部４２の動作を説
明するフローチャートである。
【図２１】 ＶＯＰヘッダ解析部６２の動作を説明する
フローチャートである。
【図２２】 モジュロ・タイム・ベース６５およびＶＯ
Ｐタイムインクリメント６８を説明するための図であ
る。
【図２３】 実施の形態３のヘッダ解析部４２の内部構
成の他の例を示した図である。
【図２４】 実施の形態３の画像復号化装置を複数のオ
ブジェクトの復号画像信号を合成して１つの画像を再生
するシステムに適用する例を示す図である。
【図２５】 ＶＯＰレート情報をＶＯＬヘッダに含む符
号化ビットストリームを示す図である。
【図２６】 実施の形態４におけるヘッダ解析部４２の
内部構成を示す図である。
【図２７】 図２６に示す実施の形態４の駒落しＶＯＰ
制御部８６の構成を示した図である。
【図２８】 実施の形態４のヘッダ解析部４２の動作を
説明するフローチャートである。
【図２９】 実施の形態４におけるヘッダ解析部４２の
他の構成例を示す図である。
【図３０】 実施の形態５のヘッダ解析部４２の内部構
成を示す図である。
【図３１】 実施の形態５の駒落し制御部９８の内部構
成を示す図である。
【図３２】 実施の形態５のヘッダ解析部４２の動作を
示すフローチャートである。
【図３３】 実施の形態５の駒落し制御部９８の動作を
示すフローチャートである。
【図３４】 実施の形態６におけるヘッダ解析部４２の
内部構成を示す図である。
【図３５】 図３４に示す復号ＶＯＰ選択部１０３の内
部構成を示す図である。
【図３６】 実施の形態６のヘッダ解析部４２の動作を
示すフローチャートである。
【図３７】 実施の形態６の復号ＶＯＰ選択部１０３に
よるステップＳ５６のＶＯＰランダムアクセス機構の詳
細処理を示すフローチャートである。
【図３８】 実施の形態７におけるヘッダ解析部４２の
内部構成を示す図である。
【図３９】 図３８に示す復号ＶＯＰ選択部１０７の内
部構成を示す図である。
【図４０】 実施の形態７のヘッダ解析部４２の動作を
示すフローチャートである。
【図４１】 実施の形態７の復号ＶＯＰ選択部１０７に
よるステップＳ６６のＶＯＰランダムアクセス機構の詳
細処理を示すフローチャートである。
【図４２】 ＭＰＥＧ−４におけるビデオデータ構造を
示す図である。
【図４３】 ＶＯＰの具体例を示す図である。
【図４４】 従来の符号化ビットストリームの例を示す
図である。
【符号の説明】
１ 形状符号化部、２ 形状符号化データ、３ 局所復
号形状データ、４ 動き補償予測部、５ 動き情報、６
ＧＯＶ多重化情報、７ オブジェクトイントラ符号化
指示信号、７’ オブジェクトイントラ符号化表示信
号、８ ヘッダ多重化部、９ ヘッダ情報多重化後のビ
ットストリーム、１０ ビデオ信号多重化部、１１ 予
測画像、１２ 減算器、１３ 予測誤差画像、１４ IN
TRA/INTER判定部、１５ 被符号化テクスチャデータ、
１６ マクロブロック単位の符号化モード情報、１７
テクスチャ符号化部、１８ テクスチャ符号化データ、
１９局所復号予測誤差画像、２０ 加算器、２１ 局所
復号テクスチャデータ、２２ メモリ、２３ 参照テク
スチャデータ、２４ 符号化ビットストリーム、２５
ＶＯヘッダ多重化部、２６ ＶＯＬヘッダ多重化部、２
７ ＧＯＶヘッダ多重化選択部、２８ ＧＯＶヘッダ多
重化部、２９ ＶＯＰヘッダ多重化部、３０符号化ビッ
トストリーム、３１ 符号化ビットストリーム、３２
ＶＯＬヘッダ多重化部、３３ ＧＯＶヘッダ多重化部、
３４ 表示時刻多重化識別情報、３５ タイムコード、
３６ ＶＯＬヘッダ多重化部、３７ 符号化ビットスト
リーム、３８ 符号化ビットストリーム、３９ 符号化
ビットストリーム、４０ 符号化ビットストリーム、４
１ 符号化ビットストリーム、４２ ヘッダ解析部、４
３ ヘッダ情報が解析されたビットストリーム、４４
ビデオ信号解析部、４５ 形状符号化データ、４６ 形
状復号部、４７ 復号形状データ、４８ テクスチャ符
号化データ、４９ テクスチャ復号部、５０ 復号テク
スチャデータ、５１ 動き情報、５２ 動き補償部、５
３ 復号予測テクスチャデータ、５４INTRA/INTER判定
部、５５ 出力テクスチャデータ、５６ メモリ、５７
参照テクスチャデータ、５８ スタートコード解析
部、５９ ＶＯヘッダ解析部、６０ ＶＯＬヘッダ解析
部、６１ ＧＯＶヘッダ解析部、６２ ＶＯＰヘッダ解
析部、６３ タイムコード、６４ モジュロ・タイム・
ベース解析部、６５ モジュロ・タイム・ベース、６６
復号ＶＯＰ絶対時刻作成部、６７ ＶＯＰタイムイン
クリメント解析部、６８ ＶＯＰタイムインクリメン
ト、６９ 駒落し制御部、７０ 復号ＶＯＰ絶対表示時
刻、７１ デコーダ側で設定されるＶＯＰレート情報、
７２ 映像情報ヘッダ解析部、７３ オブジェクトイン
トラ符号化判定部、７４ 駒落しＶＯＰ判定部、７５
ＶＯＬヘッダ解析部、７６ ＧＯＶヘッダ解析部、７７
オブジェクト符号化ビットストリーム、７８ ＶＯＰ
デコーダ、７９ コンポジション部、８０ 再生画像、
８３ スタートコード解析部、８４ ＶＯＬヘッダ解析
部、８５ カウント数、８６ 駒落しＶＯＰ制御部、８
７エンコーダで設定したＶＯＰレート情報、８８ デコ
ードＶＯＰ選択部、８９ＶＯＰ選択情報、９０ ＶＯＰ
ヘッダ解析部、９１ 駒落しＶＯＰ判定部、９２ ＧＯ
Ｖヘッダ解析部、９３ ＧＯＶ単位のＶＯＰレート情
報、９４ スタートコード解析部、９５ 記憶媒体、９
６ ＶＯＰヘッダ解析部、９７ 外部設定タイムコー
ド、９８ 駒落し制御部、９９ サーチ指示信号、１０
０ 比較部、１０１ 記憶媒体、１０２ スタートコー
ド解析部、１０３ 復号ＶＯＰ選択部、１０４ ＶＯＰ
ヘッダ解析部、１０５ ＶＯＰタイムコード算出部、１
０６ＶＯＬヘッダ解析部、１０７ 復号ＶＯＰ選択部、
１０８ ＶＯＰタイムコード保持部。
───────────────────────────────────────────────────── フロントページの続き (72)発明者 浅井 光太郎 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 (72)発明者 西川 博文 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 (72)発明者 井須 芳美 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内

Claims (19)

    【特許請求の範囲】
  1. 【請求項１】 符号化ビットストリームから動画像シー
    ケンスに含まれる画像すべてがイントラ符号化されてい
    るか否かを示すイントラ符号化表示情報を解析する解析
    手段と、 前記解析手段によって解析された前記イントラ符号化表
    示情報に基づいて前記動画像シーケンスに含まれる画像
    を復号する復号手段と、 を備えたことを特徴とする画像復号化装置。
  2. 【請求項２】 動画像シーケンスは、任意の形状を有す
    る動画像オブジェクトのビデオオブジェクトレイヤであ
    ることを特徴とする請求項１記載の画像復号化装置。
  3. 【請求項３】 動画像シーケンスは、任意の形状を有す
    る動画像オブジェクトのビデオオブジェクトレイヤを構
    成するビデオオブジェクトプレーンのグループであるこ
    とを特徴とする請求項１記載の画像復号化装置。
  4. 【請求項４】 前記復号手段は、前記イントラ符号化表
    示情報と、画像復号化装置側において指定された表示速
    度情報とに基づいて、前記動画像シーケンス内の画像を
    間引いて復号することを特徴とする請求項１記載の画像
    復号化装置。
  5. 【請求項５】 前記解析手段は、さらに、符号化ビット
    ストリームから符号化側の表示速度情報を解析すると共
    に、解析した符号化側の表示速度情報と、画像復号化装
    置側において指定された表示速度情報とに基づいて、復
    号対象画像を特定し、 前記復号手段は、前記イントラ符号化表示情報と、前記
    復号対象画像の表示時刻情報とに基づいて、前記動画像
    シーケンスに含まれる画像を間引いて復号することを特
    徴とする請求項１記載の画像復号化装置。
  6. 【請求項６】 前記復号手段は、前記イントラ符号化表
    示情報と、画像復号化装置側において指定される表示時
    刻情報とに基づいて、前記画像復号化装置側において指
    定される表示時刻情報が示す画像を復号することを特徴
    とする請求項１記載の画像復号化装置。
  7. 【請求項７】 解析手段は、さらに、符号化ビットスト
    リームから符号化側の表示速度情報と、前記動画像シー
    ケンスに含まれる画像の表示時刻情報とを解析すると共
    に、その解析した前記表示速度情報と、前記表示時刻情
    報とに基づいて、復号対象画像を特定し、 前記復号手段は、前記イントラ符号化表示情報と、前記
    復号対象画像の表示時刻情報と、画像復号化装置側にお
    いて指定される表示時刻情報とに基づいて、前記画像復
    号化装置側において指定される表示時刻情報が示す画像
    を復号することを特徴とする請求項１記載の画像復号化
    装置。
  8. 【請求項８】 前記解析手段は、前記イントラ符号化表
    示情報を解析した結果、動画像シーケンスに含まれる画
    像すべてがイントラ符号化されていることを指示してい
    る場合、さらに、符号化ビットストリームから前記動画
    像シーケンスに含まれる画像すべての表示時刻情報を多
    重化するか否かを示す表示時刻多重化識別情報を解析
    し、該表示時刻多重化識別情報が前記動画像シーケンス
    に含まれる画像すべての表示時刻情報を多重化すること
    を示している場合には、前記動画像シーケンスに含まれ
    る画像すべての表示時刻情報を動画像シーケンスの単位
    で解析し、 前記多重化手段は、前記イントラ符号化表示情報と、前
    記表示時刻情報とに基づいて、前記動画像シーケンス内
    に含まれる画像を復号することを特徴とする請求項１記
    載の画像復号化装置。
  9. 【請求項９】 前記復号手段は、前記イントラ符号化表
    示情報と、前記表示時刻情報と、画像復号化装置側にお
    いて指定される表示時刻情報とに基づいて、前記動画像
    シーケンス内に含まれる画像のうち前記画像復号化装置
    側において指定される表示時刻情報が示す画像を復号す
    ることを特徴とする請求項８記載の画像復号化装置。
  10. 【請求項１０】 符号化ビットストリームから動画像シ
    ーケンスに含まれる画像すべてがイントラ符号化されて
    いるか否かを示すイントラ符号化表示情報を解析すると
    共に、前記イントラ符号化表示情報に基づいて前記動画
    像シーケンスに含まれる画像を復号することを特徴とす
    る画像復号化方法。
  11. 【請求項１１】 前記イントラ符号化表示情報と、復号
    化側において指定された表示速度情報とに基づいて、前
    記動画像シーケンス内の画像を間引いて復号することを
    特徴とする請求項１０記載の画像復号化方法。
  12. 【請求項１２】 符号化ビットストリームから符号化側
    の表示速度情報の解析を行い、解析した符号化側の表示
    速度情報と、復号化側において指定された表示速度情報
    とに基づいて、復号対象画像の表示時刻を特定すると共
    に、前記イントラ符号化表示情報と、前記復号対象画像
    の表示時刻情報とに基づいて、前記動画像シーケンスに
    含まれる画像を間引いて復号することを特徴とする請求
    項１０記載の画像復号化方法。
  13. 【請求項１３】 前記イントラ符号化表示情報と、復号
    化側において指定される表示時刻情報とに基づいて、前
    記復号化側において指定される表示時刻情報が示す画像
    を復号することを特徴とする請求項１０記載の画像復号
    化方法。
  14. 【請求項１４】 さらに、符号化ビットストリームから
    符号化側の表示速度情報と、前記動画像シーケンス内に
    含まれる画像の表示時刻情報とを解析すると共に、その
    解析した前記表示速度情報と、前記表示時刻情報とに基
    づいて、復号対象画像を特定し、前記イントラ符号化表
    示情報と、前記復号対象画像の表示時刻情報と、復号化
    側において指定される表示時刻情報とに基づいて、前記
    復号化側において指定される表示時刻情報が示す画像を
    復号することを特徴とする請求項１０記載の画像復号化
    方法。
  15. 【請求項１５】 前記イントラ符号化表示情報を解析し
    た結果、動画像シーケンスに含まれる画像すべてがイン
    トラ符号化されていることを指示している場合、さら
    に、符号化ビットストリームから前記動画像シーケンス
    に含まれる画像すべての表示時刻情報を多重化するか否
    かを示す表示時刻多重化識別情報を解析し、該表示時刻
    多重化識別情報が前記動画像シーケンスに含まれる画像
    すべての表示時刻情報を多重化することを示している場
    合には、前記動画像シーケンスに含まれる画像すべての
    表示時刻情報を動画像シーケンスの単位で解析し、前記
    イントラ符号化表示情報と、前記表示時刻情報とに基づ
    いて、前記動画像シーケンス内に含まれる画像を復号す
    ることを特徴とする請求項１０記載の画像復号化方法。
  16. 【請求項１６】 前記イントラ符号化表示情報と、前記
    表示時刻情報と、画像復号化装置側において指定される
    表示時刻情報とに基づいて、前記動画像シーケンス内に
    含まれる画像のうち前記画像復号化装置側において指定
    される表示時刻情報が示す画像を復号することを特徴と
    する請求項１５記載の画像復号化方法。
  17. 【請求項１７】 動画像シーケンスに含まれる画像すべ
    てをイントラ符号化するか否かを指示するイントラ符号
    化指示情報に基づき前記動画像シーケンスに含まれる画
    像を符号化する符号化手段と、 前記符号化手段によって符号化された画像符号化信号
    と、前記動画像シーケンスに含まれる画像すべてがイン
    トラ符号化されているか否かを示すイントラ符号化表示
    情報とを多重化する多重化手段と、 を備えたことを特徴とする画像符号化装置。
  18. 【請求項１８】 前記多重化手段は、前記イントラ符号
    化表示情報が動画像シーケンスに含まれる画像すべてを
    イントラ符号化することを指示している場合、さらに、
    前記動画像シーケンスに含まれる画像すべての表示時刻
    情報を多重化するか否かを示す表示時刻多重化識別情報
    を動画像シーケンス毎に多重化し、該表示時刻多重化識
    別情報が前記動画像シーケンスに含まれる画像すべての
    表示時刻情報を多重化することを示している場合には、
    さらに、前記動画像シーケンスに含まれる画像すべての
    表示時刻情報を動画像シーケンス毎に多重化することを
    特徴とする請求項１７記載の画像符号化装置。
  19. 【請求項１９】 動画像シーケンスに含まれる画像すべ
    てをイントラ符号化するか否かを指示するイントラ符号
    化指示情報に基づき前記動画像シーケンスに含まれる画
    像を符号化すると共に、符号化された画像符号化信号
    と、前記動画像シーケンスに含まれる画像すべてがイン
    トラ符号化されているか否かを示すイントラ符号化表示
    情報とを多重化することを特徴とする画像符号化方法。
JP05469498A 1997-10-27 1998-03-06 画像復号化装置、画像復号化方法 Expired - Lifetime JP3860323B2 (ja)

Priority Applications (27)

Application Number Priority Date Filing Date Title
JP05469498A JP3860323B2 (ja) 1997-10-27 1998-03-06 画像復号化装置、画像復号化方法
US09/530,136 US7127110B1 (en) 1997-10-27 1998-10-03 Image encoding device, image encoding method, image decoding device and image decoding method
TW87117418A TW407431B (en) 1997-10-27 1998-10-21 Image encoding/decoding device and method therefor
EP20050008083 EP1558038B1 (en) 1997-10-27 1998-10-23 Image coding apparatus
AU96474/98A AU9647498A (en) 1997-10-27 1998-10-23 Image encoding device, image encoding method, image decoding device and image decoding method
PCT/JP1998/004815 WO1999022517A1 (en) 1997-10-27 1998-10-23 Image encoding device, image encoding method, image decoding device and image decoding method
EP20100011902 EP2306721B1 (en) 1997-10-27 1998-10-23 Image decoding method
KR10-2000-7004504A KR100377286B1 (ko) 1997-10-27 1998-10-23 화상 부호화 장치, 화상 부호화 방법, 화상 복호화 장치및 화상 복호화 방법
CA 2308460 CA2308460C (en) 1997-10-27 1998-10-23 Image coding apparatus, image coding method, image decoding apparatus and image decoding method
EP20100011904 EP2306723B1 (en) 1997-10-27 1998-10-23 Image coding apparatus
CNB988127067A CN1201586C (zh) 1997-10-27 1998-10-23 图像解码装置
EP20100011903 EP2306722B1 (en) 1997-10-27 1998-10-23 Image coding method
EP98950368A EP1026899B1 (en) 1997-10-27 1998-10-23 Image encoding device, image encoding method, image decoding device and image decoding method
DE1998633443 DE69833443T2 (de) 1997-10-27 1998-10-23 Vorrichtungen und verfahren zum kodieren und dekodieren von bildern
EP20100000894 EP2187641B1 (en) 1997-10-27 1998-10-23 Image encoding method
DE69841698T DE69841698D1 (de) 1997-10-27 1998-10-23 Vorrichtung zum Kodieren von Bildern
EP20100000893 EP2200314B1 (en) 1997-10-27 1998-10-23 Image coding apparatus
HK01100809A HK1030121A1 (en) 1997-10-27 2001-02-05 Image encodeing device, image encoding method, image decoding device and image decoding method
HK05110863A HK1079022A1 (en) 1997-10-27 2001-02-05 Image coding apparatus
US11/231,835 US7197188B2 (en) 1997-10-27 2005-09-22 Image coding apparatus, image coding method, image decoding apparatus and image decoding method
US11/707,922 US7362907B2 (en) 1997-10-27 2007-02-20 Image coding apparatus, image coding method, image decoding apparatus and image decoding method
US12/068,200 US7970217B2 (en) 1997-10-27 2008-02-04 Image coding apparatus, image coding method, image decoding apparatus and image decoding method
HK10106604.3A HK1140347A1 (en) 1997-10-27 2010-07-07 Image encoding method
HK10107855A HK1141653A1 (en) 1997-10-27 2010-08-17 Image coding apparatus
HK11105762A HK1151912A1 (en) 1997-10-27 2011-06-08 Image decoding method
HK11105829A HK1152177A1 (en) 1997-10-27 2011-06-09 Image coding method
HK11105905.0A HK1151915A1 (en) 1997-10-27 2011-06-10 Image coding apparatus

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP29394097 1997-10-27
JP9-293940 1997-10-27
JP05469498A JP3860323B2 (ja) 1997-10-27 1998-03-06 画像復号化装置、画像復号化方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2004180423A Division JP3894206B2 (ja) 1997-10-27 2004-06-18 画像符号化装置、画像符号化方法、画像復号化装置、及び画像復号化方法

Publications (2)

Publication Number Publication Date
JPH11196411A true JPH11196411A (ja) 1999-07-21
JP3860323B2 JP3860323B2 (ja) 2006-12-20

Family

ID=26395494

Family Applications (1)

Application Number Title Priority Date Filing Date
JP05469498A Expired - Lifetime JP3860323B2 (ja) 1997-10-27 1998-03-06 画像復号化装置、画像復号化方法

Country Status (11)

Country Link
US (4) US7127110B1 (ja)
EP (7) EP2187641B1 (ja)
JP (1) JP3860323B2 (ja)
KR (1) KR100377286B1 (ja)
CN (1) CN1201586C (ja)
AU (1) AU9647498A (ja)
CA (1) CA2308460C (ja)
DE (2) DE69833443T2 (ja)
HK (7) HK1030121A1 (ja)
TW (1) TW407431B (ja)
WO (1) WO1999022517A1 (ja)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001091467A1 (en) * 2000-05-26 2001-11-29 Mitsubishi Denki Kabushiki Kaisha Method and device for encoding image
US6400889B1 (en) 1998-01-23 2002-06-04 Matsushita Electric Industrial Co., Ltd. Image processing method for decoding compressed image data
JP2003517797A (ja) * 1999-12-14 2003-05-27 サイエンティフィック−アトランタ， インコーポレイテッド 調和されたリソースの割当てを有するビデオ信号を適応的に復号化するシステムおよび方法
KR100424762B1 (ko) * 2001-09-06 2004-03-30 삼성전자주식회사 영상 데이터 제공 시스템 및 방법
JP2007524309A (ja) * 2004-02-20 2007-08-23 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ビデオ復号の方法
JP2010045853A (ja) * 2009-11-20 2010-02-25 Mitsubishi Electric Corp 動画像符号化装置および動画像符号化方法
JP2013164660A (ja) * 2012-02-09 2013-08-22 Nec Corp ストレージ装置
US9998750B2 (en) 2013-03-15 2018-06-12 Cisco Technology, Inc. Systems and methods for guided conversion of video from a first to a second compression format

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100282147B1 (ko) * 1998-11-13 2001-02-15 구자홍 압축 영상 복원 방법
WO2003026312A2 (en) * 2001-09-18 2003-03-27 Koninklijke Philips Electronics N.V. Video coding and decoding method, and corresponding signal
US7274857B2 (en) 2001-12-31 2007-09-25 Scientific-Atlanta, Inc. Trick modes for compressed video streams
US7966642B2 (en) 2003-09-15 2011-06-21 Nair Ajith N Resource-adaptive management of video storage
JP2005184626A (ja) * 2003-12-22 2005-07-07 Canon Inc 画像処理装置
US8600217B2 (en) 2004-07-14 2013-12-03 Arturo A. Rodriguez System and method for improving quality of displayed picture during trick modes
KR100885443B1 (ko) * 2005-04-06 2009-02-24 엘지전자 주식회사 레이어간 예측방식를 사용해 엔코딩된 영상신호를디코딩하는 방법
KR100853143B1 (ko) * 2007-02-15 2008-08-20 충북대학교 산학협력단 Ｉ 프레임 태그를 이용한 동영상 압축 및 복원방법
JP4317995B2 (ja) * 2007-05-11 2009-08-19 テクトロニクス・インコーポレイテッド ストリーム解析装置とストリーム解析表示方法
US8462855B2 (en) * 2007-09-26 2013-06-11 Intel Corporation Method and apparatus for stream parsing and picture location
US8300696B2 (en) 2008-07-25 2012-10-30 Cisco Technology, Inc. Transcoding for systems operating under plural video coding specifications
MX2014000048A (es) * 2011-07-02 2014-04-30 Samsung Electronics Co Ltd Metodo y aparato para multiplexar y desmultiplexar datos de video para identificar el estado de reproduccion de los datos de video.
EP3843396B1 (en) 2011-09-28 2023-01-25 Sun Patent Trust Image decoding method and image coding and decoding method
JP5485969B2 (ja) * 2011-11-07 2014-05-07 株式会社Ｎｔｔドコモ 動画像予測符号化装置、動画像予測符号化方法、動画像予測符号化プログラム、動画像予測復号装置、動画像予測復号方法及び動画像予測復号プログラム
US10389994B2 (en) 2016-11-28 2019-08-20 Sony Corporation Decoder-centric UV codec for free-viewpoint video streaming

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3084811B2 (ja) 1991-07-24 2000-09-04 ソニー株式会社 記録媒体サーチ方法および装置
US5778143A (en) * 1993-01-13 1998-07-07 Hitachi America, Ltd. Method and apparatus for the selection of data for use in VTR trick playback operation in a system using progressive picture refresh
US5786858A (en) * 1993-01-19 1998-07-28 Sony Corporation Method of encoding image signal, apparatus for encoding image signal, method of decoding image signal, apparatus for decoding image signal, and image signal recording medium
EP0634868A4 (en) 1993-01-19 1995-05-24 Sony Corp IMAGE SIGNAL ENCODING METHOD, IMAGE SIGNAL ENCODER, IMAGE SIGNAL DECODING METHOD, IMAGE SIGNAL DECODER, AND IMAGE SIGNAL RECORDING MEDIUM.
JP3019659B2 (ja) 1993-03-16 2000-03-13 日本ビクター株式会社 動画像の飛越し再生方法及び再生装置
PT732028E (pt) 1993-11-30 2002-07-31 Gen Electric Indicador de palavra de dados num sistema para montagem de pacotes de dados de transporte
EP1139672B1 (en) 1994-03-25 2010-08-18 Nec Corporation Image reproducing device
JP3274563B2 (ja) 1994-03-25 2002-04-15 日本電気株式会社 画像再生装置
JP3034172B2 (ja) 1994-10-25 2000-04-17 株式会社グラフィックス・コミュニケーション・ラボラトリーズ 画像データ記録再生装置
US5687095A (en) * 1994-11-01 1997-11-11 Lucent Technologies Inc. Video transmission rate matching for multimedia communication systems
US5629736A (en) * 1994-11-01 1997-05-13 Lucent Technologies Inc. Coded domain picture composition for multimedia communications systems
US5623312A (en) * 1994-12-22 1997-04-22 Lucent Technologies Inc. Compressed-domain bit rate reduction system
US5887110A (en) 1995-03-28 1999-03-23 Nippon Telegraph & Telephone Corp. Video data playback system using effective scheme for producing coded video data for fast playback mode
JPH08288965A (ja) * 1995-04-18 1996-11-01 Hitachi Ltd スイッチングシステム
JP4018166B2 (ja) 1995-07-06 2007-12-05 パイオニア株式会社 媒体記録方法、装置及び媒体再生方法、装置
JPH0927944A (ja) 1995-07-12 1997-01-28 Hitachi Ltd 動画像情報再生方法
JP3068002B2 (ja) * 1995-09-18 2000-07-24 沖電気工業株式会社 画像符号化装置、画像復号化装置及び画像伝送システム
JP2848326B2 (ja) * 1996-03-28 1999-01-20 日本電気株式会社 Ｍｐｅｇ符号化画像復号装置
JP3053576B2 (ja) * 1996-08-07 2000-06-19 オリンパス光学工業株式会社 コードイメージデータ出力装置及び出力方法
JPH1079949A (ja) * 1996-09-04 1998-03-24 Oki Electric Ind Co Ltd 画像符号化装置、画像復号化装置及び画像伝送システム
JP3791720B2 (ja) * 1997-06-11 2006-06-28 ソニー株式会社 伝送装置及び伝送方法
KR100487988B1 (ko) * 1997-10-23 2005-05-09 미쓰비시덴키 가부시키가이샤 부호화 비트 스트림 변환 장치

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6400889B1 (en) 1998-01-23 2002-06-04 Matsushita Electric Industrial Co., Ltd. Image processing method for decoding compressed image data
US6418268B1 (en) 1998-01-23 2002-07-09 Matsushita Electric Industrial Co., Ltd. Image processing method for decoding compressed image data
US6449424B1 (en) 1998-01-23 2002-09-10 Matsushita Electric Industrial Co., Ltd. Image transmission method and computer readable image data structure
US7155110B2 (en) 1998-01-23 2006-12-26 Matsushita Electric Industrial Co., Ltd. Image transmission method
JP2003517797A (ja) * 1999-12-14 2003-05-27 サイエンティフィック−アトランタ， インコーポレイテッド 調和されたリソースの割当てを有するビデオ信号を適応的に復号化するシステムおよび方法
US8429699B2 (en) 1999-12-14 2013-04-23 Arturo A. Rodriguez Systems and methods for resource-adaptive processing of scaled video and graphics
WO2001091467A1 (en) * 2000-05-26 2001-11-29 Mitsubishi Denki Kabushiki Kaisha Method and device for encoding image
KR100424762B1 (ko) * 2001-09-06 2004-03-30 삼성전자주식회사 영상 데이터 제공 시스템 및 방법
JP2007524309A (ja) * 2004-02-20 2007-08-23 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ビデオ復号の方法
JP2010045853A (ja) * 2009-11-20 2010-02-25 Mitsubishi Electric Corp 動画像符号化装置および動画像符号化方法
JP2013164660A (ja) * 2012-02-09 2013-08-22 Nec Corp ストレージ装置
US9998750B2 (en) 2013-03-15 2018-06-12 Cisco Technology, Inc. Systems and methods for guided conversion of video from a first to a second compression format

Also Published As

Publication number Publication date
DE69833443D1 (de) 2006-04-20
HK1030121A1 (en) 2001-04-20
EP2306721B1 (en) 2013-07-10
EP2306721A2 (en) 2011-04-06
CA2308460C (en) 2003-12-16
US20080137973A1 (en) 2008-06-12
WO1999022517A1 (en) 1999-05-06
EP1558038A2 (en) 2005-07-27
AU9647498A (en) 1999-05-17
CN1283364A (zh) 2001-02-07
US7970217B2 (en) 2011-06-28
EP1558038A3 (en) 2005-11-23
HK1152177A1 (en) 2012-02-17
HK1151912A1 (en) 2012-02-10
TW407431B (en) 2000-10-01
US7197188B2 (en) 2007-03-27
EP2306722B1 (en) 2013-07-03
KR100377286B1 (ko) 2003-03-26
EP1026899A1 (en) 2000-08-09
EP1558038B1 (en) 2010-06-02
US20060067581A1 (en) 2006-03-30
HK1151915A1 (en) 2012-02-10
EP1026899B1 (en) 2006-02-08
US7127110B1 (en) 2006-10-24
JP3860323B2 (ja) 2006-12-20
EP1026899A8 (en) 2001-05-02
EP2306721A3 (en) 2011-09-28
KR20010031469A (ko) 2001-04-16
EP2187641B1 (en) 2014-12-10
DE69833443T2 (de) 2006-10-26
US20070172138A1 (en) 2007-07-26
EP2187641A3 (en) 2010-12-15
EP2200314A3 (en) 2010-12-15
EP2306723A3 (en) 2011-09-28
CA2308460A1 (en) 1999-05-06
EP2200314A2 (en) 2010-06-23
EP2306723A2 (en) 2011-04-06
EP2306723B1 (en) 2014-12-10
CN1201586C (zh) 2005-05-11
EP2306722A2 (en) 2011-04-06
HK1141653A1 (en) 2010-11-12
HK1079022A1 (en) 2006-03-24
EP2306722A3 (en) 2011-09-28
DE69841698D1 (de) 2010-07-15
EP2200314B1 (en) 2012-05-09
US7362907B2 (en) 2008-04-22
EP2187641A2 (en) 2010-05-19
HK1140347A1 (en) 2010-10-08

Similar Documents

Publication Publication Date Title
JPH11196411A (ja) 画像符号化装置、画像符号化方法、画像復号化装置、及び画像復号化方法
KR101215615B1 (ko) 동일 채널 내에서 서로 다른 코덱을 이용하여 부호화된 비디오 및 오디오 데이터 스트림의 재생을 위한 코덱 변경 방법 및 장치
CN1950907B (zh) 运动画面流产生装置，运动画面编码装置，运动画面多路复用装置和运动画面解码装置
US8275247B2 (en) Method and apparatus for normal reverse playback
JP4838251B2 (ja) 画像復号化装置、画像復号化方法および画像復号化システム
US8050328B2 (en) Image decoding method
JP4838253B2 (ja) 画像符号化装置、画像符号化方法、画像復号化装置、画像復号化方法、および記録方法
WO2006027880A1 (ja) 記録装置および方法、再生装置および方法、記録媒体、並びにプログラム
EP1161097A1 (en) MPEG decoder
JP2002359848A (ja) 画像処理装置
JP2008167061A (ja) 符号化装置及び符号化方法
US6999090B2 (en) Data processing apparatus, data processing method, information storing medium, and computer program
KR20040065170A (ko) 화상 정보 복호 장치 및 방법
JP4906197B2 (ja) 復号装置および方法、並びに記録媒体
JP2003244641A (ja) 画像再生装置、及び画像再生方法
JP3894206B2 (ja) 画像符号化装置、画像符号化方法、画像復号化装置、及び画像復号化方法
JP2003179867A (ja) データ処理装置、データ処理方法、および情報記憶媒体、並びにコンピュータ・プログラム
JP2003052020A (ja) 画像処理方法とこの方法を利用可能な画像処理装置およびテレビジョン受像機
JP2006187037A (ja) 画像再生方法
JP2010206463A (ja) 動画像符号化方法、動画像符号化装置及び動画像符号化プログラム
JP2008005520A (ja) Ｍｐｅｇデータ記録再生装置
Eerenberg et al. System requirements and considerations for visual table of contents in PVR
JP2003052013A (ja) 画像処理装置
JP2007336574A (ja) Ｍｐｅｇデータ記録再生装置
JP2007074467A (ja) 情報処理装置および方法、送信装置および方法、記録装置および方法、並びにプログラム

Legal Events

Date Code Title Description
A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20040420

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040618

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20040628

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20040917

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060921

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090929

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100929

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110929

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110929

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120929

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130929

Year of fee payment: 7

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term