JP2848326B2 - Ｍｐｅｇ符号化画像復号装置 - Google Patents

Ｍｐｅｇ符号化画像復号装置

Info

Publication number
JP2848326B2
JP2848326B2 JP7469896A JP7469896A JP2848326B2 JP 2848326 B2 JP2848326 B2 JP 2848326B2 JP 7469896 A JP7469896 A JP 7469896A JP 7469896 A JP7469896 A JP 7469896A JP 2848326 B2 JP2848326 B2 JP 2848326B2
Authority
JP
Japan
Prior art keywords
mpeg
video
data
decoding
picture frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP7469896A
Other languages
English (en)
Other versions
JPH09266576A (ja
Inventor
裕敬 山路
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
Nippon Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Electric Co Ltd filed Critical Nippon Electric Co Ltd
Priority to JP7469896A priority Critical patent/JP2848326B2/ja
Priority to CA 2200793 priority patent/CA2200793C/en
Priority to AU16514/97A priority patent/AU712865B2/en
Priority to DE1997613435 priority patent/DE69713435T2/de
Priority to EP19970105218 priority patent/EP0798929B1/en
Priority to US08/827,474 priority patent/US6141385A/en
Priority to KR1019970011276A priority patent/KR100273877B1/ko
Publication of JPH09266576A publication Critical patent/JPH09266576A/ja
Application granted granted Critical
Publication of JP2848326B2 publication Critical patent/JP2848326B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6375—Control signals issued by the client directed to the server or network components for requesting retransmission, e.g. of data packets lost or corrupted during transmission from server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明はＭＰＥＧ符号化画像
復号装置に関し、特にＭＰＥＧ符号化画像データが伝送
回線等においてデータ欠落等データエラーを起こした場
合におけるエラー画像再送手段を有するＭＰＥＧ符号化
画像復号装置。
【０００２】
【従来の技術】従来のＭＰＥＧ符号化画像復号装置で
は、ＭＰＥＧ符号化を行った画像データに伝送回線で訂
正不能な符号誤り、例えば長いバースト誤り等の伝送エ
ラーが発生した場合には、復号画像に顕著な画質劣化が
生じたり画像に欠落部分が発生するため、復号化側で劣
化および欠落画像部分を周辺画像に対して滑らかに修正
していた（特開平５−１５３５７４号公報；動画像デー
タ復号化装置）。
【０００３】つまり、先行技術であるこの特開平５−１
５３５７４号公報の動画像復号化装置では、訂正できな
い符号誤りが生じたブロックを過去のフレーム画像に基
づいて定まる過去の動きベクトルによって生成されるブ
ロック画像で置き換えて復号することにより、復号画像
の動きの有無にかかわらず、符号誤りによる画像の欠落
部分を周辺画像に対して滑らかに修正するものである。
【０００４】
【発明が解決しようとする課題】この従来のＭＰＥＧ符
号化画像復号装置では、伝送エラーに伴う復号画像の劣
化あるいは欠落部分を周辺画像に対して滑らかに修正す
るにすぎないため、修正画像の輪郭のぼやけは避けられ
ず、劣化あるいは欠落前と同一の画像を復号表示するこ
とができなかった。
【０００５】
【課題を解決するための手段】本発明によるＭＰＥＧ符
号化画像復号装置は、ＭＰＥＧ符号化画像データを復号
化するＭＰＥＧ符号化画像復号装置において、前記ＭＰ
ＥＧ符号化画像データに伝送回線等復号化側入力前段で
データエラーが発生した場合に、前記ＭＰＥＧ符号化画
像データを復号した復号化画像データを前記ＭＰＥＧ符
号化における１ピクチャフレーム単位で監視して前記デ
ータエラーが発生したピクチャフレームの前記ＭＰＥＧ
符号化画像データを前記ＭＰＥＧ符号化側からＧＯＰ単
位で再送することを特徴とするＭＰＥＧ符号化画像復号
装置。
【０００６】本発明によるＭＰＥＧ符号化画像復号装置
は、前記ＭＰＥＧ符号化多重側からの前記ＭＰＥＧ符号
化画像データの再送を１ピクチャフレーム単位で行うこ
とを特徴とする。
【０００７】本発明によるＭＰＥＧ符号化画像復号装置
は、前記ＭＰＥＧ符号化画像データが前記ＭＰＥＧ符号
化における１ピクチャフレーム単位で復号された前記復
号化画像データを複数ピクチャフレーム分第１の記憶手
段に蓄積格納して前記第１の記憶手段に蓄積格納された
前記複数フレーム分の復号化画像データが前記第１の記
憶手段から全て読み出され画像表示される前に前記再送
されるＭＰＥＧ符号化画像データが復号されて前記第１
の記憶手段に格納されるように再送処理を行うことを特
徴とする。
【０００８】本発明によるＭＰＥＧ符号化画像復号装置
は、前記データエラーが発生したＭＰＥＧ符号化画像デ
ータの復号化画像データを１ピクチャフレーム単位で記
憶する第２の記憶手段のデータ格納状態を監視すること
により前記データエラーを検出することを特徴とする。
【０００９】本発明によるＭＰＥＧ符号化画像復号装置
は、伝送回線および回線入力インタフェースを通して入
力されるＭＰＥＧ符号化多重側からの画像および音声等
複数メディア各各のＭＰＥＧ符号化ビットストリームを
多重化した多重化ストリームを記憶蓄積し一時格納する
第１の記憶手段と、第１の制御信号に制御され読み出さ
れる前記第１の記憶蓄積手段からの前記多重化ストリー
ムのパックヘッダを分離してシステムクロック基準のＳ
ＣＲ情報を抽出するパックヘッダ処理手段と、前記パッ
クヘッダが分離された前記パックヘッダ分離手段からの
多重化ストリームからパケットヘッダを分離して時刻基
準のＰＴＳ情報を抽出するとともに前記複数メディア各
各のパケット単位に分離するパケット処理手段と、前記
パケット処理手段で分離されたビデオパケットのＭＰＥ
ＧビデオストリームからＧＯＰを検出するＧＯＰ検出手
段と、前記ＧＯＰ検出手段からのＧＯＰ検出信号に制御
されて第２の制御信号および前記第１の制御信号を出力
する第１の制御手段と、前記パケット処理手段で分離さ
れたビデオパケットのＭＰＥＧビットストリームを記憶
蓄積して一時格納するとともに前記第１の制御手段から
の前記第２の制御信号に制御されて前記一時格納され前
記ＭＰＥＧビットストリームをＧＯＰ単位で第１の読み
出し制御をされる第２の記憶手段と、第３の制御信号に
制御されて第２の読み出し制御をされ前記第２の記憶手
段から出力される１ピクチャフレーム単位のビデオデー
タをＭＰＥＧ復号するビデオＭＰＥＧ復号化手段と、前
記ビデオＭＰＥＧ復号化手段からの１ピクチャフレーム
分の復号化ビデオデータを記憶し一時格納する第３の記
憶手段と、前記第３の記憶手段の記憶領域への前記１ピ
クチャフレーム分の復号化ビデオデータの格納状態を監
視して前記格納状態が正常のときは前記第３の記憶手段
から格納されている前記１ピクチャフレーム分の復号化
ビデオデータを出力させかつ前記格納状態が異常のとき
は第１のエラー情報を出力する記憶管理手段と、前記第
３の記憶手段から出力される前記１ピクチャフレーム分
の復号化ビデオデータを所定ピクチャフレーム分記憶蓄
積し一時格納する第４の記憶手段と、第４の制御信号に
制御され読み出される前記第４の記憶手段からの前記１
ピクチャフレーム単位の復号化ビデオデータをビデオ表
示タイミングで出力制御するビデオ表示制御手段と、前
記ビデオ表示制御手段からの前記１ピクチャフレームご
との復号化ビデオデータをディジタル／アナログ変換し
てＭＰＥＧ復号化画像信号として出力して外部のビデオ
視聴者へ供給するディジタル／アナログ変換手段と、第
５の制御信号に制御されて前記第３および第４の制御信
号を出力し前記第３の制御信号を前記第２の記憶手段へ
および前記第４の制御信号を前記第４の記憶手段へ供給
する第２の制御手段と、前記ディジタル／アナログ変換
手段から出力される前記ＭＰＥＧ復号化画像信号を外部
の前記ビデオ視聴者の画像モニタへ所定のタイミングで
表示するため前記ビデオ表示タイミングを生成して前記
ビデオ表示制御手段へ供給する表示タイミング生成手段
と、前記記憶管理手段から出力される前記第１のエラー
情報の入力を前記表示タイミング生成手段出力の前記ビ
デオ表示タイミングと同じ周期のタイミングで監視して
前記第１のエラー情報が入力されたときはそのエラー情
報にもとづいて前記ＭＰＥＧ符号化多重側へ前記第１の
エラー情報が出力されたビデオデータと同じピクチャフ
レームのビデオデータの再送を要求するビデオ再送要求
信号を出力するエラー情報処理手段と、前記パックヘッ
ダ処理手段で抽出された前記ＳＣＲ情報をもとにＭＰＥ
Ｇ復号等に使用される復号側クロック信号を生成するク
ロック生成手段と、前記パケット処理手段で抽出された
前記ＰＴＳ情報をもとにＭＰＥＧ復号等に使用される復
号側時刻情報を生成する時刻情報生成手段と、前記時刻
情報生成手段出力の前記復号側時刻情報をもとにＭＰＥ
Ｇ復号時の画像と音声との同期をとるためのＡＶ同期タ
イミングを生成する同期タイミング生成手段と、前記ク
ロック生成手段からの前記復号側クロック信号，前記時
刻情報生成手段からの前記復号側時刻情報，前記ＧＯＰ
検出手段からの前記ＧＯＰ検出信号および前記エラー情
報処理手段からの前記ビデオ再送要求信号等とを入力さ
れてホストＣＰＵを駆動しＣＰＵバスを介して前記ＭＰ
ＥＧ復号化手段におけるＭＰＥＧ復号処理を制御および
前記第５の制御信号を出力して前記第２の制御手段を制
御するとともに回線出力インタフェースおよび前記伝送
回線を通して前記ＭＰＥＧ符号化多重側へ前記ビデオ再
送要求信号を送出制御するＣＰＵ制御手段と、を備える
ことを特徴とする。
【００１０】
【発明の実施の形態】次に、本発明について図面を参照
して説明する。本発明の一実施例を示す図１を参照する
と、ＭＰＥＧ符号化画像復号装置は、一定レートで高速
にディジタルデータを流す高速ディジタルデータ専用線
を通してサーバ側つまりＭＰＥＧ符号化多重側から送出
され回線インタフェース部２６を介して入力される動画
像および音声等マルチメディア・オン・デマンド情報の
複数メディアのビットストリームが多重化されたＭＰＥ
Ｇ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ ＥｘｐｅｒｔｓＧ
ｒｏｕｐ）符号化多重データのビットストリームを一時
記憶し蓄積するストリームバッファメモリ１と、後述の
バッファメモリ制御部２に制御されてストリームバッフ
ァメモリ１から読み出されるパック（Ｐａｃｋ）レイヤ
の各各のビットストリームにおけるＰａｃｋヘッダを分
離して分離されたＰａｃｋヘッダ内のストリーム識別コ
ード（ストリームＩＤ）を検出してそのストリームＩＤ
をもとにＰａｃｋヘッダを分離するヘッダ検出・分離部
３０およびヘッダ検出・分離部で検出されたストリーム
ＩＤをもとにそのストリームＩＤの後に配列されている
システムクロック基準（Ｓｙｓｔｅｍ Ｃｌｏｃｋ Ｒ
ｅｆｅｒｅｎｃｅ）ＳＣＲコード情報を抽出するＳＣＲ
抽出部３１とを有するＰａｃｋヘッダ処理部３と、Ｐａ
ｃｋヘッダが分離されたＰａｃｋヘッダ処理部３出力の
ビットストリームからパケット化された各各のメディア
要素ごとのストリームからＰＥＳ（Ｐａｃｋｅｔｉｚｅ
ｄ Ｅｌｅｍｅｎｔａｒｙ Ｓｔｒｅａｍ）パケットヘ
ッダを分離するヘッダ分離部４０およびヘッダ分離部４
０で分離されたＰＥＳパケットヘッダ内のストリームＩ
Ｄを検出してそのストリームＩＤの後に配列されている
図示されていないオプショナル（Ｏｐｔｉｏｎａｌ）Ｐ
ＥＳヘッダ内のビデオ表示時刻情報であるＰＴＳ（Ｐｒ
ｅｓｅｎｔａｔｉｏｎ Ｔｉｍｅ Ｓｔａｍｐ）コード
情報を抽出するＰＴＳ抽出部４１を有しかつＰＥＳパケ
ットヘッダ内ストリームＩＤをもとにＰＥＳパケットヘ
ッダが分離されたビットストリームからＰａｃｋごとに
ビデオパケットとオーディオパケットとに分離してビデ
オパケット出力ポートとＧＯＰ（Ｇｒｏｕｐ Ｏｆ Ｐ
ｉｃｔｕｒｅ）出力ポートおよびオーディオパケット出
力ポートの各各に出力するパケット分離部４２を有する
ＰＥＳパケット処理部４と、ＰＥＳパケットヘッダが分
離されかつパケット分離されたＰＥＳパケット処理部４
のＧＯＰ出力ポートから入力されるＰａｃｋごとのビデ
オパケットからＧＯＰビデオストリームの始まりを示す
ＧＯＰフラグを検出するＧＯＰ検出部５と、ＰＥＳパケ
ット処理部４のビデオパケット出力ポートから入力され
るビデオストリームを記憶し一時蓄積格納するとともに
その格納されたビデオストリーム内のピクチャデータを
後述するバッファメモリ制御部２に制御されてＧＯＰ単
位でおよびバッファメモリ制御部７に制御されて１ピク
チャフレーム単位に読み出されるビデオバッファメモリ
６と、ＣＰＵバス１７およびホストメモリ２３を介して
ホストＣＰＵ１８に制御されてビデオバッファメモリ６
からＧＯＰ単位の１ピクチャフレームごとに読み出され
るビデオデータをＭＰＥＧデコード処理するビデオＭＰ
ＥＧデコード部８と、ビデオＭＰＥＧデコード部８でデ
コードされた１ピクチャフレームごとのビデオデータを
１ピクチャフレーム分一時記憶するピクチャデコードデ
ータフレームメモリ９０とピクチャデコードデータフレ
ームメモリ９０に一時記憶されたメモリ領域のビデオデ
ータの格納状態を監視して所定のメモリ領域内でビデオ
データの欠落等データエラーがあったときにはそのデー
タエラーのあった１ピクチャフレームのビデオデータが
ピクチャデコードデータフレームメモリ９０から出力さ
れるのを停止してエラー検出信号を出力するとともに上
述の所定のメモリ領域にビデオデータが欠落することな
く正常に格納されたときには格納完了と同時に記憶正常
信号を出力するメモリ管理部９０とを有するデコードデ
ータ格納部９と、デコードデータ格納部９から入力され
るデータ欠落のない正常な１ピクチャフレームのビデオ
データを数ピクチャフレーム分一時記憶するビデオ表示
フレームメモリ１００およびバッファメモリ制御部７に
制御されて読み出されるビデオ表示フレームメモリ１０
０からの１ピクチャフレームのビデオデータを図示され
ていない外部視聴者の画像モニタに表示するために後述
の表示タイミング発生部１１出力のビデオ表示タイミン
グ信号に制御されて出力する表示制御部１０１を有する
ビデオ表示処理部１０と、ビデオ表示処理部１０出力の
表示ビデオデータをディジタル／アナログ（Ｄ／Ａ）変
換して上述外部視聴者の画像モニタへ送出するビデオＤ
／Ａ変換部１２と、デコードデータ格納部９のメモリ管
理部９１出力の記憶正常信号と後述の表示タイミング生
成部１１出力のビデオ表示タイミング信号とを入力して
ビデオ表示タイミング信号入力時に記憶正常信号が入力
されていない場合にはピクチャデコードデータフレーム
メモリ９０内に格納されたビデオデータに欠落等データ
エラーがあったと見做してエラー情報とともにエラー検
出信号を出力するフレームチェック検出部１３と、フレ
ームチェック検出部１３からデータエラー検出信号が入
力されたときにはそのときのエラー情報をもとにデータ
エラーがあったピクチャフレームのビデオデータをＭＰ
ＥＧ符号化多重側からの再送要求を行うためのビデオ再
送要求信号を出力あるいはＭＰＥＧ符号化多重側からの
ビデオ送出を停止するビデオ停止要求信号等を出力する
エラー情報処理部１４と、Ｐａｃｋヘッダ処理部３のＳ
ＣＲ抽出部３１で抽出されたＳＣＲコード情報をもとに
ＭＰＥＧデコード処理等のための装置内クロック信号を
生成するクロック生成部１５と、ＰＥＳパケット処理部
４のＰＴＳ抽出部４１で抽出されたＰＴＳコード情報を
もとにＭＰＥＧデコードされたピクチャフレームデータ
の読み出しタイミングおよびオーディオ／ビデオ同期
（ＡＶ同期）タイミングのための装置内時刻情報を生成
する時刻情報生成部１６と、ピクチャフレーム画像表示
のための表示タイミングおよびピクチャフレームメモリ
格納状態チェックのためのチェックタイミングをビデオ
表示タイミング信号として出力しビデオ表示処理部１０
の表示制御部１０１およびフレームチェック検出部１３
へ供給する前述の表示タイミング生成部１１と、ＧＯＰ
検出部５から供給されるＧＯＰ検出信号に制御されてス
トリームバッファメモリ１に一時記憶されているＰａｃ
ｋストリームデータをＧＯＰフラグ周期で読み出すとと
もに同じＧＯＰ検出信号に制御されてビデオバッファメ
モリ６に一時格納されている当該ＧＯＰフラグの後に配
列されている１ビデオＰＥＳストリームデータを読み出
し制御する前述のバッファメモリ制御部２と、後述のＣ
ＰＵ制御部２５に制御されてビデオバッファメモリ６か
らＭＰＥＧデコードするための１ピクチャフレーム分の
ビデオデータをピクチャフレーム周期で読み出すととも
に同じピクチャフレーム周期でビデオ表示処理部１０の
表示フレームバッファメモリ１００に一時記憶されてい
る所定ピクチャフレーム数分のビデオデータを１ピクチ
ャフレームごとに読み出す制御信号を各各出力する前述
のバッファメモリ制御部７と、ＰＥＳパケット処理部４
のオーディオパケット出力ポートから入力されるオーデ
ィオストリームを一時記憶するオーディオバッファメモ
リ１９と、時刻情報生成部１６出力の装置内時刻情報に
もとづいてＭＰＥＧデコードデータのビデオとオーディ
オとの同期をとるためのＡＶ同期タイミング信号を生成
しビデオＭＰＥＧデコード部８および後述のオーディオ
ＭＰＥＧデコード部２１へ供給するＡＶ同期タイミング
生成部２０と、ＣＰＵバス１７およびホストメモリ２３
を介してホストＣＰＵ１８に制御されてオーディオバッ
ファメモリ１９から読み出されるオーディオストリーム
をＭＰＥＧデコード処理するオーディオＭＰＥＧデコー
ド部２１と、オーディオＭＰＥＧデコード部２１出力の
復号オーディオデータをディジタル／アナログ変換して
ビデオ視聴者へ送出するオーディオＤ／Ａ変換部２２
と、クロック生成部１５からの装置内クロック信号と時
刻情報生成部１６からの装置内時刻情報とＧＯＰ検出部
５からのＧＯＰ検出信号とエラー情報処理部１４からの
エラー情報信号とを入力されてＣＰＵバス１７およびホ
ストメモリ２３を介してホストＣＰＵ１８を制御しビデ
オＭＰＥＧデコード部８とオーディオＭＰＥＧデコード
部２１とバッファメモリ制御部７等との間で当該データ
の制御・応答を行うとともに回線インタフェース部２４
を通してＭＰＥＧ符号化多重側へデータの欠落等データ
エラーがあったピクチャフレームのビデオデータを再送
あるいはビデオ送出停止の要求信号等エラー情報の送出
を制御する前述のＣＰＵ制御部２５とから構成される。
【００１１】続いて図２，図３および図４と図１とを併
せて参照して説明する。図２はマルチメディア・オン・
デマンド情報の例えば動画像信号，音声信号およびその
他（例えば文字データ等）の信号をＭＰＥＧ多重すると
きの多重化例であり、図３は１ＧＯＰが１５フレームで
構成されるＧＯＰ内でのＩピクチャ，Ｐピクチャおよび
Ｂピクチャの１ＧＯＰ内での符号化順序およびピクチャ
相互間の画像間予測方法の一例を示す図であり、図４は
ＭＰＥＧ符号化ビットストリームのストリームデータ配
列の一例を示す図である。
【００１２】詳述すると、マルチメディア・オン・デマ
ンド情報における動画像，音声および文字データ等のＭ
ＰＥＧ符号化された複数のビットストリームを伝送回線
を通して視聴者側に伝送する場合に、これら複数のビッ
トストリームは各各ほぼ同一時間内のデータを集めてパ
ケットを構成し、それら複数パケットの各各は更に時分
割的に多重化されて複数のＰａｃｋを構成する。
【００１３】図２は動画像におけるビデオデータが時間
軸でＶ1 ，Ｖ2 ，…に区切られ、同様に音声のオーディ
オ１（例えば、ステレオの右側音声）はＡ11，…，
Ａ16，…に区切られ、音声のオーディオ２（例えば、ス
テレオの左側音声）はＡ21，…，Ａ25，…に区切られ、
その他の例えば画面に挿入する文字データはＡＵＸ1 ，
…，ＡＵＸ4 ，…に各各区切られたデータ構成例を示し
ている。
【００１４】そして、ビデオデータのＶ1 およびＶ2 を
そのままビデオパケットのＶ1 およびＶ2 とすると、こ
こでは、このビデオパケットＶ1 およびＶ2 が他のオー
ディオおよび文字データのパケット構成上の基準とな
る。つまり、オーディオ１のパケット構成を例にとれ
ば、オーディオ１のデータＡ11〜Ａ16のうちビデオＶ1
の時間とほぼ同じ時間内のデータＡ11〜Ａ13を集めて第
１のオーディオ１とし、次にビデオＶ2 の時間とほぼ同
じ時間内のデータＡ14およびＡ15を集めて第２のオーデ
ィオ２として構成してオーディオ１パケット＃１，オー
ディオ１パケット＃２，……によるストリームを形成
し、図４のＰａｃｋレイヤにおけるＰＥＳパケット＃２
に対応する。
【００１５】このようにパケット構成されたビデオパケ
ット＃１および＃２，オーディオ１パケット＃１および
＃２，オーディオ２パケット＃１および＃２，および文
字パケット＃１および＃２の各各は、次に第１のパケッ
ト（＃１）同士および第２のパケット（＃２）同士が各
各時分割的に多重化（多重化の順序は復号化の関係上、
ここではビデオ，オーディオおよび文字の順とする）さ
れて各各ＰａｃｋパケットであるＰａｃｋ＃１，Ｐａｃ
ｋ＃２，……を構成してＰａｃｋストリームを形成し、
図４における最上位レイヤに対応する。
【００１６】なお、ＰＥＳパケットであるメディアごと
のパケットヘッダには復号化側で復号する際のメディア
間の同期をとる等の目的で時刻情報の基準となるタイム
スタンプＰＴＳコード情報が挿入される。
【００１７】次に、図３は１ビデオパケット内における
圧縮符号化画像の１ＧＯＰを構成するピクチャフレーム
の配列を示したものであり、ここでは１ＧＯＰは１５ピ
クチャフレームから構成される例を示している。つま
り、常にＧＯＰの先頭に配列され他ピクチャフレームの
予測符号化の基となるＩピクチャフレームが１フレーム
と、Ｉピクチャフレームを基に片側予測符号化を行うＰ
ピクチャフレームが４フレームと、およびＩピクチャフ
レームとＰピクチャフレームあるいは前方および後方の
両Ｐピクチャフレームを基に両側予測符号化を行うＢピ
クチャフレームが１０フレームとから構成されており、
復号化の際にはＩ1 ，Ｂ1 ，Ｂ2 ，Ｐ1 ，…，Ｂ10の順
に復号化される。図４のＰＥＳパケットレイヤにおける
ビデオＰＥＳパケット＃１のピクチャストリームは図３
の中のＩ1 ，Ｂ1 ，Ｂ2 ，Ｐ1 およびＢ3 ピクチャフレ
ームまでを示したものであり、各各のピクチャフレーム
の先頭には各各のピクチャの開始を示すピクチャスター
トコードが付加される。
【００１８】続いて、動作について説明する。
【００１９】ＭＰＥＧ符号化され多重化された最上位レ
イヤのＰａｃｋストリーム、つまりＭＰＥＧ多重化ビッ
トストリームは伝送回線である例えば高速ディジタルデ
ータ専用線を通して入力され、回線インタフェース部２
６を介してストリームバッファメモリ１に記憶蓄積され
る。
【００２０】バッファメモリ制御部２は、ＰＥＳパケッ
トレイヤのビデオＰＥＳパケットにおけるＧＯＰフラグ
をもとに検出されたＧＯＰ検出部５からのＧＯＰ検出信
号により制御されてストリームバッファメモリ１を制御
し、ＧＯＰフラグが検出されるごとに当該ＧＯＰフラグ
が検出されたＰａｃｋパケットのストリームデータを読
み出し、これを繰り返す。
【００２１】Ｐａｃｋヘッダ処理部３では、ストリーム
バッファメモリ１から読み出されたＰａｃｋレイヤにお
けるＰａｃｋヘッダをヘッダ内におけるＰａｃｋスター
トコードおよびストリームＩＤコードをもとに分離する
とともに、分離したヘッダ内に配列されてあるシステム
クロック基準のＳＣＲコード情報を抽出し、復号化側で
使用される装置内クロック信号を生成するクロック生成
部１５へ供給する。
【００２２】ＰＥＳパケット処理部４では、Ｐａｃｋヘ
ッダ処理部３から入力されるＰａｃｋヘッダが分離され
たＰＥＳパケットストリームから各各のＰＥＳパケット
の先頭に配列されてあるＰＥＳパケットヘッダ内のパケ
ットスタートおよびストリームＩＤコードをもとにＰＥ
Ｓパケットヘッダを分離して、その分離したヘッダ内に
配列されてある時刻情報の基準となるＰＴＳコード情報
を抽出し、復号化側で使用される例えば復号化ビデオデ
ータと復号化オーディオデータとのＡＶ同期をとるタイ
ミング情報としての時刻情報を時刻情報生成部１６へ供
給するとともに、メディアごとのＰＥＳパケットに分離
（図１では、説明の都合上、文字ＰＥＳパケットを分離
する構成は省略している）してビデオＰＥＳパケットを
ビデオ出力ポートへ、およびオーディオ１ＰＥＳパケッ
トとオーディオ２ＰＥＳパケットとをオーディオ出力ポ
ートへ出力し、さらにパケットヘッダが分離されたビデ
オＰＥＳパケットをＧＯＰ出力ポートへ出力する。
【００２３】そして、ピクチャバッファメモリ６は、Ｐ
ＥＳパケット処理部４のビデオ出力ポートから入力され
るビデオＰＥＳパケットのピクチャストリームを記憶蓄
積し、また、オーディオバッファメモリ１９は、オーデ
ィオ出力ポートから入力されるオーディオＰＥＳパケッ
トのオーディオストリームを記憶蓄積する。
【００２４】ＧＯＰ検出部５では、ストリームバッファ
メモリ１およびピクチャバッファメモリ６の各各から、
各各のストリームデータをＧＯＰ周期で読み出すための
タイミングを生成するために、ＰＥＳパケット処理部４
のＧＯＰ出力ポートから入力されるＰＥＳパケットヘッ
ダが分離されたビデオＰＥＳパケットからその先頭に配
列されているＧＯＰフラグを検出してＧＯＰ検出信号と
して出力し、バッファメモリ制御部２へ供給する。ここ
で、最初のＧＯＰフラグはストリームバッファ１から最
初のＰａｃｋパケットが読み出されない限り検出されな
いことになるが、ストリームバッファメモリ１は読み出
し制御されなくとも所定以上のデータ量が蓄積されると
最初に格納されたデータから放出されるので、最初のＰ
ａｃｋストリームの最初のＧＯＰフラグは確実に検出さ
れることになる。
【００２５】これによって、バッファメモリ制御部２
は、前述したストリームバッファメモリ１への読み出し
を行うと同時に、ピクチャバッファメモリ６に対しても
読み出し制御を行う。つまり、ピクチャバッファメモリ
６では、バッファメモリ制御部２からの制御によりＧＯ
Ｐ周期でビデオＰＥＳパケット単位で読み出されること
になるが、実際にＭＰＥＧデコード部８へ出力されるの
は、バッファメモリ制御部７からの制御によるピクチャ
フレーム周期でピクチャ単位で読み出される。
【００２６】ビデオＭＰＥＧデコード部８では、ピクチ
ャバッファメモリ６から１ピクチャフレーム単位で、か
つ図３における１ＧＯＰ内でのピクチャ配列の順番で読
み出されるピクチャストリームデータをＭＰＥＧ復号化
して、デコードデータ格納部９の１フレームメモリ（例
えば、ＭＰＥＧ２のＮＴＳＣ方式ビデオでは７２０×４
８０画素情報分のメモリ）であるピクチャデコードデー
タフレームメモリ９０に記憶させる。
【００２７】デコードデータ格納部９のメモリ管理部９
１では、ビデオＭＰＥＧデコード部８から入力される１
ピクチャフレーム分のデコードデータがピクチャデコー
ドデータフレームメモリ９０内に揃う（つまり正常に記
憶される）と、その１ピクチャフレーム分のピクチャデ
コードデータを出力してビデオ表示処理部１０のビデオ
表示フレームメモリ１００に記憶させる。ここで、もし
ピクチャデコードデータフレームメモリ９０内に１ピク
チャフレーム分のデコードデータが全て揃わない場合、
つまりピクチャデコードデータの欠落があると、そのデ
ータ欠落のあったピクチャフレームをスタートコード情
報と最初にＩピクチャデコードデータを記憶した時から
のデコードデータの記憶順番をカウントして求めたピク
チャ位置情報等エラー情報をエラー検出信号と共に出力
する。そして、ピクチャデコードデータが全て揃って正
常に記憶された場合には、記憶完了とともに記憶正常信
号を出力し、同時にその記憶されたピクチャデコードデ
ータをビデオ表示フレームメモリ１００へ出力する。
【００２８】ビデオ表示処理部１０のビデオ表示フレー
ムメモリ１００では、ピクチャデコードフレームメモリ
９０から出力される正常なピクチャデコードデータを数
ピクチャフレーム分記憶する。つまり、メモリ管理部９
１からデータ欠落のエラー検出信号が出力されて、ＣＰ
Ｕ制御部２５を介してエラー情報処理部１４からのピク
チャ再送要求信号がＭＰＥＧ符号化多重側へ送出され、
その再送要求によって再送されＭＰＥＧデコードされて
再びピクチャデコードデータフレームメモリ９０に記憶
されるまでの間に、それまでビデオ表示フレームメモリ
１００に格納されていた数ピクチャフレーム分のピクチ
ャデコードデータが画面へのビデオ表示のために読み出
されてしまうと、次のデータ欠落のあったピクチャフレ
ームの画面表示のところで表示画面が１つ前のピクチャ
フレームの画面を表示したままポーズ状態となって、そ
の間数ピクチャフレーム分の画像が抜けてしまうため、
再送要求から再送ピクチャデコードデータの記憶完了ま
での時間を稼ぐために所要ピクチャフレーム数分のピク
チャデコードデータをビデオ表示フレームメモリ１００
内に蓄積するものである。
【００２９】そして、ビデオ表示処理部１０の表示制御
部１０１では、バッファメモリ制御部７からの制御によ
りピクチャフレーム周期で画面表示出力のために読み出
されるビデオ表示フレームメモリ１００からの１ピクチ
ャフレームごとのピクチャデコードデータを表示タイミ
ング生成部１１から供給されるビデオ表示タイミング信
号に制御されて、ビデオＤ／Ａ変換部１１へ出力する。
【００３０】ここで、表示タイミング生成部１１が出力
するビデオ表示タイミング信号は、例えばＮＴＳＣ方式
のビデオ垂直同期信号である１／３０秒周期のフレーム
信号である。
【００３１】フレームチェック検出部１３では、デコー
ドデータ格納部９０のメモリ管理部９１出力を表示タイ
ミング生成部１１から供給されるビデオ表示タイミング
信号周期で監視し、ビデオ表示タイミングごとに記憶正
常信号が出力されていれば何も出力しないが、ビデオ表
示タイミングでエラー検出信号が出力されていればその
エラー情報をエラー検出信号とともにエラー情報処理部
１４へ出力する。
【００３２】エラー情報処理部１４では、フレームチェ
ック検出部１３を通してメモリ管理部９１から供給され
るピクチャ位置情報等エラー情報をもとに、ＣＰＵ制御
部２５を介してＭＰＥＧ符号化多重側へ当該エラーの発
生したピクチャフレームあるいはそのピクチャフレーム
を含む１ＧＯＰ分のビデオデータの再送を要求するため
のビデオ再送要求信号を生成してＣＰＵ制御部２５へ供
給する。
【００３３】ＣＰＵ制御部２５は、クロック生成部１５
からの装置内クロック信号と時刻情報生成部１６からの
装置内時刻情報およびＧＯＰ検出部５からのＧＯＰ検出
信号等をもとにホストメモリ２３およびホストＣＰＵ１
８を介してビデオＭＰＥＧデコード部８，オーディオＭ
ＰＥＧデコード部２１およびバッファメモリ制御部７を
制御してＭＰＥＧデコード処理およびバッファメモリか
らの読み出し処理等の制御を行うとともに、エラー情報
処理部１４からのビデオ再送要求信号にもとづいて、回
線インタフェース部２４を通してＭＰＥＧ符号化多重側
へデータ欠落のあったピクチャフレーム単位あるいはＧ
ＯＰ単位のビデオデータの再送要求を行う。
【００３４】尚、エラー情報処理部１４におけるエラー
処理は、データ欠落のあったピクチャフレームあるいは
ＧＯＰ単位のビデオ再送要求を行うだけでなく、例えば
データの欠落が符号化側で発生してそのエラーが符号側
で検出されず訂正されないままで送出された場合には、
もしそのデータの欠落がＩピクチャフレームあるいはＰ
ピクチャフレームで発生している場合には、Ｉピクチャ
にもとづき予測符号化されるＰピクチャおよびＢピクチ
ャ、およびＰピクチャにもとづき予測符号化されるＢピ
クチャまでが欠落あるいはデータ誤りを発生している可
能性があるので、その時の画面表示への影響を事前に予
防するために、ＩピクチャあるいはＰピクチャでエラー
を検出したときは、それ以後のビデオ送出を停止する要
求を行うこともできる。
【００３５】
【発明の効果】以上説明したように本発明によれば、Ｍ
ＰＥＧデコードされたビデオデータを１ピクチャフレー
ム単位で一時記憶するフレームバッファメモリと、その
フレームバッファメモリに１フレーム分のピクチャデー
タが欠落することなく全てが格納されたかどうかを監視
するメモリ管理手段と、フレームバッファメモリから読
み出される１ピクチャフレームのビデオデータを数ピク
チャフレーム分一時格納して格納された順番に１ピクチ
ャフレーム単位で読み出されるビデオ表示フレームメモ
リと、メモリ管理手段出力のメモリ格納情報をビデオ表
示タイミングでチェックしてメモリ格納情報が出力され
ていないときにはその表示タイミング直前に格納された
ピクチャフレームにデータの欠落があったと見做してエ
ラー情報を出力してＭＰＥＧ符号化多重側へそのデータ
欠落のあったピクチャフレームあるいはＧＯＰのビデオ
データがビデオ表示フレームメモリから読み出されて表
示される以前に上記データ欠落のあった１ピクチャフレ
ーム分のビデオデータをＭＰＥＧ符号化多重側から再送
して当該１ピクチャフレームあるいはＧＯＰのビデオデ
ータが本来ビデオ表示されるべき時間までに再送された
ビデオデータをビデオ表示フレームメモリに格納する構
成を採ったので、たとえＭＰＥＧ符号化多重側あるいは
伝送回線等でＭＰＥＧ符号化ビデオデータに欠落が生じ
ても、欠落前のデータと全く同じビデオデータを１ピク
チャフレーム単位あるいはＧＯＰ単位で表示することが
でき、当該データ欠落に伴って数ピクチャフレーム分の
画像が抜けることなく連続して表示することができる。
また、上記エラー情報はデータが欠落した以後のＭＰＥ
Ｇ符号化多重側からのビデオデータの送出を停止する要
求信号として機能させることもできるので、データ欠落
以後のＭＰＥＧ符号化ビデオデータが伝送回線における
雑音等の影響を受けてデータ誤りを起こした場合でも、
誤ったピクチャフレームの表示ビデオデータを出力する
ことがないため、ビデオ視聴者に見苦しいことによる不
快感を与えないで済む。
【図面の簡単な説明】
【図１】本発明の一実施例のＭＰＥＧ画像符号化復号装
置を示すブロック図である。
【図２】同実施例のマルチメディア・オン・デマンド情
報をＭＰＥＧ多重するときの多重化図の一例である。
【図３】同実施例の１ＧＯＰ内でのＭＰＥＧ符号化順序
および画像間予測方法の一例を説明するための図であ
る。
【図４】同実施例のＭＰＥＧ符号化ビットストリームの
ストリームデータ配列図の一例である。
【符号の説明】
１ ストリームバッファメモリ ２ バッファメモリ制御部 ３ Ｐａｃｋヘッダ処理部 ４ ＰＥＳパケット処理部 ５ ＧＯＰ検出部 ６ ピクチャバッファメモリ ７ バッファメモリ制御部 ８ ビデオＭＰＥＧデコード部 ９ デコードデータ格納部 １０ ビデオ表示処理部 １１ 表示タイミング生成部 １２ ビデオＤ／Ａ変換部 １３ フレームチェック検出部 １４ エラー情報処理部 １５ クロック生成部 １６ 時刻情報生成部 １７ ＣＰＵバス １８ ホストＣＰＵ １９ オーディオバッファメモリ ２０ ＡＶ同期タイミング生成部 ２１ オーディオＭＰＥＧデコード部 ２２ オーディオＤ／Ａ変換部 ２３ ホストメモリ ２４，２６ 回線インタフェース部 ２５ ＣＰＵ制御部 ３０ ヘッダ検出・分離部 ３１ ＳＣＲ抽出部 ４０ ヘッダ分離部 ４１ ＰＴＳ抽出部 ４２ パケット分離部 ９０ ピクチャデコードフレームメモリ ９１ メモリ管理部 １００ ビデオ表示フレームメモリ １０１ 表示制御部

Claims (4)

    (57)【特許請求の範囲】
  1. 【請求項１】 ＭＰＥＧ符号化画像データを復号化する
    ＭＰＥＧ符号化画像復号装置において、 前記ＭＰＥＧ符号化画像データに伝送回線等復号化側入
    力前段でデータエラーが発生した場合に、前記ＭＰＥＧ
    符号化画像データを復号した復号化画像データを前記Ｍ
    ＰＥＧ符号化における１ピクチャフレーム単位で監視し
    て前記データエラーが発生したピクチャフレームの前記
    ＭＰＥＧ符号化画像データを前記ＭＰＥＧ符号化多重側
    からＧＯＰ単位で再送させるＭＰＥＧ符号化画像復号装
    置において、 前記ＭＰＥＧ符号化画像データが前記ＭＰＥＧ符号化に
    おける１ピクチャフレーム単位で復号された前記復号化
    画像データを複数ピクチャフレーム分第１の記憶手段に
    蓄積格納して前記第１の記憶手段に蓄積格納された前記
    複数フレーム分の復号化画像データが前記第１の記憶手
    段から全て読み出され画像表示される前に前記再送され
    るＭＰＥＧ符号化画像データが復号されて前記第１の記
    憶手段に格納されるように再送処理を行うことを特徴と
    するＭＰＥＧ符号化画像復号装置。
  2. 【請求項２】 前記ＭＰＥＧ符号化多重側からの前記Ｍ
    ＰＥＧ符号化画像データの再送を１ピクチャフレーム単
    位で行うことを特徴とする請求項１記載のＭＰＥＧ符号
    化画像復号装置。
  3. 【請求項３】 前記データエラーが発生したＭＰＥＧ符
    号化画像データの復号化画像データを１ピクチャフレー
    ム単位で記憶する第２の記憶手段のデータ格納状態を監
    視することにより前記データエラーを検出することを特
    徴とする請求項１または２記載のＭＰＥＧ符号化画像復
    号装置。
  4. 【請求項４】 伝送回線および回線入力インタフェース
    を通して入力されるＭＰＥＧ符号化多重側からの画像お
    よび音声等複数メディア各各のＭＰＥＧ符号化ビットス
    トリームを多重化した多重化ストリームを順次記憶蓄積
    し一時格納する第１の記憶手段と、 第１の制御信号に制御され読み出される前記第１の記憶
    蓄積手段からの前記多重化ストリームのパックヘッダを
    分離してシステムクロック基準のＳＣＲ情報を 抽出する
    パックヘッダ処理手段と、 前記パックヘッダが分離された前記パックヘッダ分離手
    段からの多重化ストリームからパケットヘッダを分離し
    て時刻基準のＰＴＳ情報を抽出するとともに前記複数メ
    ディア各各のパケット単位に分離するパケット処理手段
    と、 前記パケット処理手段で分離されたビデオパケットのＭ
    ＰＥＧビデオストリームからＧＯＰを検出するＧＯＰ検
    出手段と、 前記ＧＯＰ検出手段からのＧＯＰ検出信号に制御されて
    第２の制御信号および前記第１の制御信号を出力する第
    １の制御手段と、 前記パケット処理手段で分離されたビデオパケットのＭ
    ＰＥＧビデオストリームを記憶蓄積して一時格納すると
    ともに前記第１の制御手段からの前記第２の制御信号に
    制御されて前記一時格納されている前記ＭＰＥＧビデオ
    ストリームをＧＯＰ単位で第１の読み出し制御をされる
    第２の記憶手段と、 第３の制御信号に制御されて第２の読み出し制御をされ
    前記第２の記憶手段から出力される１ピクチャフレーム
    単位のビデオデータをＭＰＥＧ復号するビデオＭＰＥＧ
    復号化手段と、 前記ビデオＭＰＥＧ復号化手段からの１ピクチャフレー
    ム分の復号化ビデオデータを記憶し一時格納する第３の
    記憶手段と、 前記第３の記憶手段の記憶領域への前記１ピクチャフレ
    ーム分の復号化ビデオデータの格納状態を監視して前記
    格納状態が正常のときは前記第３の記憶手段から格納さ
    れている前記１ピクチャフレーム分の復号化ビデオデー
    タを出力させかつ前記格納状態が異常のときは第１のエ
    ラー情報を出力する記憶管理手段と、 前記第３の記憶手段から出力される前記１ピクチャフレ
    ーム分の復号化ビデオデータを所定ピクチャフレーム分
    記憶蓄積し一時格納する第４の記憶手段と、 第４の制御信号に制御され読み出される前記第４の記憶
    手段からの前記１ピクチャフレーム単位の復号化ビデオ
    データをビデオ表示タイミングで出力制御するビデオ表
    示制御手段と、 前記ビデオ表示制御手段からの前記１ピクチャフレーム
    ごとの復号化ビデオデータをディジタル／アナログ変換
    してＭＰＥＧ復号化画像信号として出力して外部のビデ
    オ視聴者へ供給するディジタル／アナログ変換手段と、 第５の制御信号に制御されて前記第３および第４の制御
    信号を出力し前記第３の制御信号を前記第２の記憶手段
    へおよび前記第４の制御信号を前記第４の記憶手段へ供
    給する第２の制御手段と、 前記ディジタル／アナログ変換手段から出力される前記
    ＭＰＥＧ復号化画像信号を外部の前記ビデオ視聴者の画
    像モニタへ所定のタイミングで表示するため前記ビデオ
    表示タイミングを生成して前記ビデオ表示制御手段へ供
    給する表示タイミング生成手段と、 前記記憶管理手段から出力される前記第１のエラー情報
    の入力を前記表示タイミング生成手段出力の前記ビデオ
    表示タイミングと同じ周期のタイミングで監視して前記
    第１のエラー情報が入力されたときはそのエラー情報に
    もとづいて前記ＭＰＥＧ符号化多重側へ前記第１のエラ
    ー情報が出力されたビデオデータと同じピクチャフレー
    ムのビデオデータの再送を要求するビデオ再送要求信号
    を出力するエラー情報処理手段と、 前記パックヘッダ処理手段で抽出された前記ＳＣＲ情報
    をもとにＭＰＥＧ復号等に使用される復号側クロック信
    号を生成するクロック生成手段と、 前記パケット処理手段で抽出された前記ＰＴＳ情報をも
    とにＭＰＥＧ復号等に使用される復号側時刻情報を生成
    する時刻情報生成手段と、 前記時刻情報生成手段出力の前記復号側時刻情報をもと
    にＭＰＥＧ復号時の画像と音声との同期をとるためのＡ
    Ｖ同期タイミングを生成する同期タイミング生成手段
    と、 前記クロック生成手段からの前記復号側クロック信号，
    前記時刻情報生成手段からの前記復号側時刻情報，前記
    ＧＯＰ検出手段からの前記ＧＯＰ検出信号および前記エ
    ラー情報処理手段からの前記ビデオ再送要求信号等とを
    入力されてホストＣＰＵを駆動しＣＰＵバスを介して前
    記ＭＰＥＧ復号化手段におけるＭＰＥＧ復号処理を制御
    および前記第５の制御信号を出力して前記第２の制御手
    段を制御するとともに回線出力インタフェースおよび前
    記伝送回線を通して前記ＭＰＥＧ符号化多重側へ前記ビ
    デオ再送要求信号を送出制御するＣＰＵ制御手段と、 を備えることを特徴とするＭＰＥＧ符号化画像復号装
    置。
JP7469896A 1996-03-28 1996-03-28 Ｍｐｅｇ符号化画像復号装置 Expired - Fee Related JP2848326B2 (ja)

Priority Applications (7)

Application Number Priority Date Filing Date Title
JP7469896A JP2848326B2 (ja) 1996-03-28 1996-03-28 Ｍｐｅｇ符号化画像復号装置
CA 2200793 CA2200793C (en) 1996-03-28 1997-03-24 Mpeg coded picture decoding apparatus
AU16514/97A AU712865B2 (en) 1996-03-28 1997-03-25 MPEG coded picture decoding apparatus
EP19970105218 EP0798929B1 (en) 1996-03-28 1997-03-27 MPEG coded picture decoding apparatus with error correction
DE1997613435 DE69713435T2 (de) 1996-03-28 1997-03-27 Vorrichtung zum Dekodieren von MPEG kodierten Bildern mit Fehlerbehebung
US08/827,474 US6141385A (en) 1996-03-28 1997-03-27 MPEG coded picture decoding apparatus
KR1019970011276A KR100273877B1 (ko) 1996-03-28 1997-03-28 Mpeg코딩된화상디코딩장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP7469896A JP2848326B2 (ja) 1996-03-28 1996-03-28 Ｍｐｅｇ符号化画像復号装置

Publications (2)

Publication Number Publication Date
JPH09266576A JPH09266576A (ja) 1997-10-07
JP2848326B2 true JP2848326B2 (ja) 1999-01-20

Family

ID=13554714

Family Applications (1)

Application Number Title Priority Date Filing Date
JP7469896A Expired - Fee Related JP2848326B2 (ja) 1996-03-28 1996-03-28 Ｍｐｅｇ符号化画像復号装置

Country Status (7)

Country Link
US (1) US6141385A (ja)
EP (1) EP0798929B1 (ja)
JP (1) JP2848326B2 (ja)
KR (1) KR100273877B1 (ja)
AU (1) AU712865B2 (ja)
CA (1) CA2200793C (ja)
DE (1) DE69713435T2 (ja)

Families Citing this family (74)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7168084B1 (en) 1992-12-09 2007-01-23 Sedna Patent Services, Llc Method and apparatus for targeting virtual objects
US9286294B2 (en) 1992-12-09 2016-03-15 Comcast Ip Holdings I, Llc Video and digital multimedia aggregator content suggestion engine
KR100269533B1 (ko) * 1997-08-11 2001-03-02 윤종용 고배속콤팩트디스크-롬드라이브를실현하는디코딩장치와에러정정처리방법
JP3185863B2 (ja) * 1997-09-22 2001-07-11 日本電気株式会社 データ多重化方法および装置
JP3860323B2 (ja) * 1997-10-27 2006-12-20 三菱電機株式会社 画像復号化装置、画像復号化方法
KR100287366B1 (ko) * 1997-11-24 2001-04-16 윤순조 엠피이지 방식을 이용한 휴대용 음향 재생장치 및 방법
CN1294759C (zh) * 1997-12-01 2007-01-10 三星电子株式会社 视频编码方法
CN1668111A (zh) * 1997-12-01 2005-09-14 三星电子株式会社 运动向量预测方法
JP3407287B2 (ja) * 1997-12-22 2003-05-19 日本電気株式会社 符号化復号システム
US7272298B1 (en) 1998-05-06 2007-09-18 Burst.Com, Inc. System and method for time-shifted program viewing
FR2780186B1 (fr) * 1998-06-23 2000-08-11 St Microelectronics Sa Procede et dispositif de decodage d'une image, comprimee notamment selon les normes mpeg, en particulier une image bidirectionnelle
KR100389854B1 (ko) * 1998-06-24 2003-08-19 삼성전자주식회사 오디오및/또는비디오데이터를기록및/또는재생하는방법,기록매체의재생방법,기록매체상의정지화를재생하는방법,및기록매체상에정지화를기록하는방법
US6324217B1 (en) * 1998-07-08 2001-11-27 Diva Systems Corporation Method and apparatus for producing an information stream having still images
AU5006699A (en) 1998-07-23 2000-02-14 Diva Systems Corporation Interactive user interface
US6754905B2 (en) 1998-07-23 2004-06-22 Diva Systems Corporation Data structure and methods for providing an interactive program guide
US9924234B2 (en) 1998-07-23 2018-03-20 Comcast Ip Holdings I, Llc Data structure and methods for providing an interactive program
US6233389B1 (en) 1998-07-30 2001-05-15 Tivo, Inc. Multimedia time warping system
US8577205B2 (en) 1998-07-30 2013-11-05 Tivo Inc. Digital video recording system
US8380041B2 (en) 1998-07-30 2013-02-19 Tivo Inc. Transportable digital video recorder system
US7558472B2 (en) 2000-08-22 2009-07-07 Tivo Inc. Multimedia signal processing system
JP2000138896A (ja) * 1998-10-30 2000-05-16 Hitachi Ltd 画像音声記録装置
US6629318B1 (en) * 1998-11-18 2003-09-30 Koninklijke Philips Electronics N.V. Decoder buffer for streaming video receiver and method of operation
JP4109772B2 (ja) * 1998-12-03 2008-07-02 キヤノン株式会社 データ処理方法及びその装置
JP2000232649A (ja) * 1998-12-10 2000-08-22 Fujitsu Ltd Ｍｐｅｇビデオ復号器及びｍｐｅｇビデオ復号方法
US6363428B1 (en) * 1999-02-01 2002-03-26 Sony Corporation Apparatus for and method of separating header information from data in an IEEE 1394-1995 serial bus network
WO2000060445A1 (fr) * 1999-03-30 2000-10-12 Matsushita Electric Industrial Co., Ltd. Systeme de traitement de donnees, dispositif emetteur/recepteur de donnees et support enregistre
US6754271B1 (en) 1999-04-15 2004-06-22 Diva Systems Corporation Temporal slice persistence method and apparatus for delivery of interactive program guide
US7096487B1 (en) 1999-10-27 2006-08-22 Sedna Patent Services, Llc Apparatus and method for combining realtime and non-realtime encoded content
US6904610B1 (en) 1999-04-15 2005-06-07 Sedna Patent Services, Llc Server-centric customized interactive program guide in an interactive television environment
US6704359B1 (en) * 1999-04-15 2004-03-09 Diva Systems Corp. Efficient encoding algorithms for delivery of server-centric interactive program guide
JP2001024698A (ja) * 1999-07-02 2001-01-26 Mitsubishi Electric Corp 復号化装置及び復号化方法
WO2001022729A1 (en) 1999-09-20 2001-03-29 Tivo, Inc. Closed caption tagging system
ATE359669T1 (de) 1999-10-27 2007-05-15 Sedna Patent Services Llc Vielfache videoströme unter verwendung von slice- basierter kodierung
US6654389B1 (en) * 1999-11-23 2003-11-25 International Business Machines Corporation System and method for searching patterns in real-time over a shared media
EP1256234A4 (en) * 1999-12-22 2009-05-27 Neomtel Co Ltd SYSTEM FOR DISPLACING IMAGE DATA USING WIRELESS COMMUNICATION AND METHOD THEREFOR
US6925097B2 (en) * 2000-03-29 2005-08-02 Matsushita Electric Industrial Co., Ltd. Decoder, decoding method, multiplexer, and multiplexing method
US6993251B1 (en) * 2000-03-31 2006-01-31 Matsushita Electric Industrial Co., Ltd. Method and apparatus for concealing disk soft errors in recorded digital television signals
US7366402B2 (en) * 2000-06-02 2008-04-29 Lg Electronics Inc. Method and apparatus of recording a high definition digital television broadcast signal
JP4411499B2 (ja) * 2000-06-14 2010-02-10 ソニー株式会社 情報処理装置および情報処理方法、並びに記録媒体
US20020149595A1 (en) * 2000-08-25 2002-10-17 Kosuke Kubota Decoding device, electronic device, and decoding method
US7068847B1 (en) * 2000-09-08 2006-06-27 Sunplus Technology Co., Ltd. High-resolution still picture decoding device
JP4208398B2 (ja) * 2000-10-05 2009-01-14 株式会社東芝 動画像復号再生装置、動画像復号再生方法及びマルチメディア情報受信装置
JP4612171B2 (ja) * 2000-10-27 2011-01-12 株式会社東芝 動画像復号再生モジュールと再生時刻管理プログラムとマルチメディア情報受信装置
JP3912003B2 (ja) * 2000-12-12 2007-05-09 株式会社日立製作所 通信装置
US6728318B2 (en) 2001-03-02 2004-04-27 Redrock Semiconductor, Ltd. Error recovery of corrupted MPEG-4 bitstreams using fuzzy decoding of start codes and resync markers
US7908628B2 (en) 2001-08-03 2011-03-15 Comcast Ip Holdings I, Llc Video and digital multimedia aggregator content coding and formatting
US7793326B2 (en) 2001-08-03 2010-09-07 Comcast Ip Holdings I, Llc Video and digital multimedia aggregator
KR100436759B1 (ko) * 2001-10-16 2004-06-23 삼성전자주식회사 수신된 멀티미디어 데이터를 저장하는 버퍼의 용량을가변할 수 있는 멀티미디어 데이터 복원장치
EP1315148A1 (en) * 2001-11-17 2003-05-28 Deutsche Thomson-Brandt Gmbh Determination of the presence of ancillary data in an audio bitstream
US7221684B1 (en) * 2002-01-08 2007-05-22 Cisco Technology, Inc. Increasing network efficiency using packet compression and decompression
JP3923898B2 (ja) 2002-01-18 2007-06-06 株式会社東芝 画像符号化方法及び装置
JP4130780B2 (ja) * 2002-04-15 2008-08-06 松下電器産業株式会社 画像符号化方法および画像復号化方法
JP4381675B2 (ja) * 2002-11-21 2009-12-09 富士通株式会社 半導体装置及びその製造方法、該半導体装置に係る測定用治具
TWI252040B (en) * 2004-06-29 2006-03-21 Benq Corp Method for determining the digital video signal of a digital display
JP4534723B2 (ja) * 2004-11-05 2010-09-01 株式会社日立製作所 画像表示装置、画像処理装置および画像処理方法
CA2588630C (en) 2004-11-19 2013-08-20 Tivo Inc. Method and apparatus for secure transfer of previously broadcasted content
JP2006155828A (ja) * 2004-11-30 2006-06-15 Toshiba Corp 再生装置及び再生方法
JP2007074549A (ja) * 2005-09-08 2007-03-22 Toshiba Corp 情報記録媒体、情報記録方法、情報再生方法、情報記録装置、情報再生装置
JP2009517947A (ja) * 2005-12-02 2009-04-30 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ビデオ・データ誤りを検出する方法および装置
JP4750730B2 (ja) * 2006-02-28 2011-08-17 パナソニック株式会社 データ解析装置、及びデータ解析方法
US8548063B2 (en) * 2006-04-13 2013-10-01 Broadcom Corporation Video receiver providing video attributes with video data
JP2008118221A (ja) * 2006-10-31 2008-05-22 Toshiba Corp 復号装置及び復号方法
WO2009065144A1 (en) 2007-11-16 2009-05-22 Divx, Inc. Chunk header incorporating binary flags and correlated variable-length fields
WO2010051545A1 (en) * 2008-10-31 2010-05-06 Divx, Inc. System and method for playing content on certified devices
GB2469281B (en) * 2009-04-06 2011-08-10 Motorola Inc Method and apparatus for asynchronous video transmission over a communication network
US20110170005A1 (en) * 2010-01-14 2011-07-14 Qualcomm Incorporated Automatic switching between simulcast video signals in a mobile media device
KR20120125338A (ko) * 2010-02-03 2012-11-14 톰슨 라이센싱 인코딩된 비디오 내의 유효한 대체 데이터
US20120087402A1 (en) * 2010-10-08 2012-04-12 Alcatel-Lucent Canada Inc. In-system method for measurement of clock recovery and oscillator drift
US9241049B2 (en) * 2011-04-27 2016-01-19 Thomas E. Darcie System and method for efficient networking for large file transactions
US9154813B2 (en) 2011-06-09 2015-10-06 Comcast Cable Communications, Llc Multiple video content in a composite video stream
US9510022B2 (en) 2012-12-12 2016-11-29 Intel Corporation Multi-layer approach for frame-missing concealment in a video decoder
US20150304526A1 (en) * 2014-02-08 2015-10-22 Clearone, Inc. External video locking and synchronization device
EP3018623A1 (en) * 2014-11-06 2016-05-11 Nagravision S.A. A system for providing authenticated recommendations on goods or services
CN107040812B (zh) * 2017-04-12 2020-04-03 青岛海信电器股份有限公司 一种视频图像控制方法及智能电视

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2643285B2 (ja) * 1988-05-07 1997-08-20 株式会社日立製作所 画像送信装置，画像受信装置，画像伝送システムおよび画像伝送方法
JP2871704B2 (ja) * 1988-12-29 1999-03-17 キヤノン株式会社 画像通信方法
JP2964484B2 (ja) * 1989-04-14 1999-10-18 ソニー株式会社 画像受信方法及び画像受信装置
JPH04170184A (ja) * 1990-10-12 1992-06-17 Mitsubishi Electric Corp 画像伝送装置
JPH05153574A (ja) * 1991-11-30 1993-06-18 Sony Corp 動画像データ復号化装置
US5400076A (en) * 1991-11-30 1995-03-21 Sony Corporation Compressed motion picture signal expander with error concealment
US5491516A (en) * 1993-01-14 1996-02-13 Rca Thomson Licensing Corporation Field elimination apparatus for a video compression/decompression system
JPH06237451A (ja) * 1993-02-10 1994-08-23 Hitachi Ltd 動画通信方式および端末装置
US5737022A (en) * 1993-02-26 1998-04-07 Kabushiki Kaisha Toshiba Motion picture error concealment using simplified motion compensation
US5561532A (en) * 1993-03-31 1996-10-01 Canon Kabushiki Kaisha Image reproducing apparatus
US5398072A (en) * 1993-10-25 1995-03-14 Lsi Logic Corporation Management of channel buffer in video decoders
JPH07322248A (ja) * 1994-05-30 1995-12-08 Matsushita Electric Ind Co Ltd 動画像データの伝送方法および伝送装置
JPH0863884A (ja) * 1994-08-23 1996-03-08 Mitsubishi Electric Corp ディジタル情報符号化・復号装置
JPH08154247A (ja) * 1994-09-29 1996-06-11 Sanyo Electric Co Ltd 圧縮画像データ処理装置及び方法
US5550847A (en) * 1994-10-11 1996-08-27 Motorola, Inc. Device and method of signal loss recovery for realtime and/or interactive communications
JPH08149474A (ja) * 1994-11-17 1996-06-07 Hitachi Ltd 動画像復号化装置
JP3100307B2 (ja) * 1995-03-14 2000-10-16 日本ビクター株式会社 圧縮データ連続再生システム
JPH08294123A (ja) * 1995-04-24 1996-11-05 Kokusai Electric Co Ltd 動画像データ伝送装置
US5790264A (en) * 1995-06-23 1998-08-04 Olympus Optical Co., Ltd. Information reproduction apparatus
JP3630474B2 (ja) * 1995-07-14 2005-03-16 沖電気工業株式会社 動画像伝送システム及び動画像伝送装置
JP3297293B2 (ja) * 1996-03-07 2002-07-02 三菱電機株式会社 動画像復号方法および動画像復号装置

Also Published As

Publication number Publication date
KR100273877B1 (ko) 2000-12-15
US6141385A (en) 2000-10-31
EP0798929A2 (en) 1997-10-01
CA2200793A1 (en) 1997-09-28
EP0798929A3 (en) 1997-12-29
AU712865B2 (en) 1999-11-18
AU1651497A (en) 1997-10-02
DE69713435T2 (de) 2003-02-13
CA2200793C (en) 2000-10-17
DE69713435D1 (de) 2002-07-25
JPH09266576A (ja) 1997-10-07
KR970068647A (ko) 1997-10-13
EP0798929B1 (en) 2002-06-19

Similar Documents

Publication Publication Date Title
JP2848326B2 (ja) Ｍｐｅｇ符号化画像復号装置
US6115537A (en) Digital signal recording and reproducing apparatus
JP3330797B2 (ja) 動画像データ格納方式および動画像データ復号方式
US7751691B2 (en) Reproducing apparatus
JP4468001B2 (ja) ビデオデータと補助データの読み出し同期装置及び処理及び関連製品
JP3917363B2 (ja) 画像復号化装置及び画像復号化方法
JP2000152160A (ja) 画像データ記録装置および記録方法、並びに画像データ記録再生装置および記録再生方法
JP2009517947A (ja) ビデオ・データ誤りを検出する方法および装置
US20070031129A1 (en) Image recording apparatus and method
JP2001204032A (ja) Ｍｐｅｇ復号装置
JP3087826B2 (ja) Ｍｐｅｇ符号化画像データ復号装置
JP4613860B2 (ja) Ｍｐｅｇ符号化ストリーム復号装置
JP3591712B2 (ja) 動画送信装置及び動画受信装置
JP2000331421A (ja) 情報記録装置及び情報再生装置
WO2005002224A1 (ja) 字幕等の情報を含むビデオ信号の処理回路
JP2957135B2 (ja) 映像復号化器における高速再生時ピクチャージッタ防止装置
JP2002290894A (ja) ディジタルビデオデータ記録／再生装置
JP2000287172A (ja) 画像データ処理装置
JP4867872B2 (ja) 画像処理装置、この画像処理装置の制御方法、及び、プログラム
JP3867342B2 (ja) 符号化装置および方法、伝送方法、並びに信号記録媒体
JP3184175B2 (ja) 復号化装置
JP4390666B2 (ja) 圧縮映像データ及び圧縮音声データの復号再生方法及び復号再生装置
JP4753493B2 (ja) 記録再生装置
JP2001268513A (ja) 動画像再生装置および動画像記録再生システム
US20070263717A1 (en) Transmitting device and receiving device

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 19981006

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20071106

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081106

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081106

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091106

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091106

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101106

Year of fee payment: 12

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111106

Year of fee payment: 13

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111106

Year of fee payment: 13

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111106

Year of fee payment: 13

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111106

Year of fee payment: 13

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121106

Year of fee payment: 14

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121106

Year of fee payment: 14

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121106

Year of fee payment: 14

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131106

Year of fee payment: 15

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees