JP2007282084A - デジタル再生装置または再生プログラム - Google Patents

デジタル再生装置または再生プログラム Download PDF

Info

Publication number
JP2007282084A
JP2007282084A JP2006108433A JP2006108433A JP2007282084A JP 2007282084 A JP2007282084 A JP 2007282084A JP 2006108433 A JP2006108433 A JP 2006108433A JP 2006108433 A JP2006108433 A JP 2006108433A JP 2007282084 A JP2007282084 A JP 2007282084A
Authority
JP
Japan
Prior art keywords
video
specific data
digital
data
detected
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006108433A
Other languages
English (en)
Other versions
JP4736918B2 (ja
JP2007282084A5 (ja
Inventor
Kenji Morimoto
健嗣 森本
Hiroshi Kashiwa
浩 柏
Nobuhiko Yamada
信彦 山田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP2006108433A priority Critical patent/JP4736918B2/ja
Publication of JP2007282084A publication Critical patent/JP2007282084A/ja
Publication of JP2007282084A5 publication Critical patent/JP2007282084A5/ja
Application granted granted Critical
Publication of JP4736918B2 publication Critical patent/JP4736918B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

【課題】映像ビットストリームの切り替わり点でデコード画像にエラーが発生し画像乱れが起きることがあった。
【解決手段】再生信号の接続点に、再生手段でダミーデータを挿入し、挿入された前記ダミーデータを前記システムデコード手段で検出し、映像ビットストリーム中に特定データを挿入する。映像デコード手段では前記特定データを検出してデコード画像の乱れを抑えて滑らかに接続させる処理を行うように構成する。映像ストリームがH.264形式で圧縮された場合において、特有のストリーム形式に対する処理を行うことで、再生画像の乱れを抑えることが確実に行える。
【選択図】図1

Description

本発明はデジタル化されて伝送される映像や音声といった情報を記録するデジタル記録装置により記録された記録媒体を再生する際の、特にH.264形式で映像信号を記録再生する際に、一連の映像や音声ビットストリームを複数接続し、連続して再生を行うデジタル再生装置に関するものである。
近年、デジタル化された映像信号や音声信号をデジタル記録または再生するデジタル再生装置はいくつか実用化、または提案されている(例えば、特許文献1参照。)。
以下に図面を参照しながら、上記した従来のデジタル記録装置の一例について説明する。図9は従来のデジタル記録装置のブロック図を示すものである。図9において、1は記録媒体、2が再生手段であり、3は制御手段、4はシステムデコード手段、118は映像信号切り替えスイッチA、6は映像ストリーム記憶手段、119は映像信号切り替えスイッチB、7は映像デコーダ、8はフレーム記憶手段、9は映像出力端子、10は音声ストリーム記憶手段、11は音声デコーダ、12は音声出力端子である。
以上のように構成されたデジタル再生装置について、以下その動作について説明する。記録媒体1には、映像や音声といったデジタルビットストリーム信号が所定のフォーマットで記録されている。例えば映像信号はH.264形式で圧縮され、記録媒体を効率的に使用して長時間の記録を可能とする。記録されているデジタルビットストリーム信号は、再生手段2により記録媒体から読み出される。再生手段2はレーザーピックアップや信号等化回路、エラー訂正回路等を含み、記録媒体のアドレスを制御手段3から指示され、読み出したデジタル信号に対してエラー訂正処理等を行った後、再生デジタルビットストリーム信号を得る。次にシステムデコード手段4では映像と音声のデジタルビットストリーム信号の分離を行う。
分離された映像ビットストリーム信号は、118の映像信号切り替えスイッチA、映像ストリーム記憶手段6、119の映像信号切り替えスイッチBを経て、映像デコーダ7に入力される。映像デコーダ7ではフレーム記憶手段8にデコードした画像を格納しながら映像ビットストリームを映像信号にデコードして変換し、映像出力端子9から出力する。
また、システムデコード手段4により分離された音声ビットストリームは、音声ストリーム記憶手段10に入力され、音声デコーダ11に入力される。音声デコーダでは音声ビットストリーム信号がデコードされ、デコードされた音声信号が音声出力端子12から出力される。
記録媒体1には一連の映像、音声信号からなる1本のデジタルビットストリームのみが入っているわけではない。したがって、2本の個別のデジタルビットストリーム信号を連続して再生する場合がある。さらに、同一の1本のデジタルビットストリーム内であっても、異なる2箇所の不連続な区間でビットストリームを連続的に再生する場合もありうる。このような、デジタルビットストリームの不連続な接続点をまたいで接続し、連続に再生を行う場合、まず第1のデジタルビットストリームを、118の映像信号切り替えスイッチAを切り替えて映像ストリーム記憶手段6の一方に順次記憶する。119の映像信号切り替えスイッチBが、映像ストリーム記憶手段6から第1のデジタルビットストリームを映像デコーダに伝送し、デコードされる。118の映像信号切り替えスイッチAは、第1のデジタルビットストリームが再生された後、続いてもう一方の映像ストリーム記憶手段6に切り替わり、第2のデジタルビットストリームを順次再生し記憶する。映像デコーダ7は、制御手段3と連携し、第1のデジタルビットストリームのデコードを終了した直後、119の映像信号切り替えスイッチBを切り替えて、第2のデジタルビットストリームのデコードを開始し、第1及び第2のデジタルビットストリームのデコードを連続して行うことが可能になるというものであった。
特開2002−281458号公報
しかしながら上記のような構成においては、映像ストリーム記憶手段6を通常の2倍設けなければならない。また、118と119で示した映像信号切り替えスイッチAとBも必要となり、さらにはスイッチの切り替え制御を制御手段3が行わなければならず、通常より多いハードウェア、及び2つのストリームの切り替わり点でスイッチを切り換えるという複雑な制御が要求されている。また、映像ビットストリームの切り替わり点では不連続なストリームをデコードするため、デコード画像にエラーが発生し画像乱れが起きることもあった。
本発明は上記問題点に鑑み、映像ストリーム記憶手段や映像信号切り替えスイッチの追加なしに、簡便な仕組みで2つの映像ビットストリームの接続点をまたいで連続してデコードを行い、再生画面の乱れを抑えることが可能なデジタル再生装置を提供することを目的とする。
上記問題点を解決するために本発明のデジタル再生装置は、記録媒体に記録された映像または音声デジタルビットストリーム信号を再生する再生手段、再生された映像または音声デジタルビットストリーム信号を映像ビットストリームと音声ビットストリームに分離するシステムデコード手段、映像ビットストリームに特定データを挿入する特定データ挿入手段、映像ビットストリームを一時的に記憶する映像ストリーム記憶手段、映像ビットストリームを映像信号にデコードする映像デコード手段、前記デコードされた映像フレーム信号を記憶するフレーム記憶手段、音声ビットストリームを一時的に記憶する音声ストリーム記憶手段、音声ビットストリームを音声信号にデコードする音声デコード手段、前記再生手段、前記システムデコード手段、前記映像デコード手段、前記音声デコード手段を制御する制御手段から構成されている。
本デジタル再生装置において、一連の映像、音声ビットストリームを複数接続し、連続して再生する場合、再生信号の接続点に、前記再生手段でダミーデータを挿入し、挿入された前記ダミーデータを前記システムデコード手段で検出し、映像ビットストリーム中に特定データを挿入する。そして映像デコード手段では前記特定データを検出してデコード画像の乱れを抑えて滑らかに接続させる処理を行うように構成したものである。これにより、2つのビットストリームを連続して再生する場合も、少ないハードウェアの追加と簡便なデコード処理により、再生画像の乱れを抑えて滑らかに再生することが可能となる。また、映像ストリームがH.264形式で圧縮された場合において、特にストリームの接続点をまたいだ後にH.264特有のストリーム形式に対する処理を行うことで、再生画像の乱れを抑えることが確実に行える。
本発明は、記録媒体からH.264で符号化された2つのビットストリームを接続し、連続して再生する際に、ダミーデータを挿入し、ダミーデータを検出して特定NALユニットコードをストリームに埋め込むことで、画像を乱すことなく再生を行うことを可能とする。さらに、ハードウェアの増加や、複雑な処理を行うことなく、簡単に実現することができるという長所を有する。
本発明の請求項1に記載の発明は、映像または音声デジタルビットストリームを複数接続し、連続して再生する場合、再生信号の接続点にダミーデータを挿入するダミーデータ挿入手段と、前記ダミーデータを検出し、検出した接続点に特定データを挿入する特定データ挿入手段と、映像デジタルビットストリーム中の特定データを検出する特定データ検出手段と、前記特定データ検出手段で特定データが検出された場合は、前記デジタルビットストリームのデコード処理を初期化してデコードを継続する映像デコード手段とを備えることを特徴とするデジタル再生装置であり、前記特定データを前記映像デコード手段で検出することにより、接続された2つのビットストリームの接続点を確実に映像デコーダに伝えるという作用を有する。
本発明の請求項2に記載の発明は、請求項1と同様の構成で、記録媒体に記録された映像デジタルビットストリーム信号がH.264形式で圧縮されていることを特徴とするデジタル再生装置である。
本発明の請求項3に記載の発明は、上記請求項1または2と同様の構成であり、特定データ挿入手段によって挿入されるデータが、H.264規格上未定義または将来拡張用のIDを持つNAL(Network Abstraction Layer)ユニットのスタートコードを含むことを特徴とするデジタル再生装置である。
本発明の請求項4に記載の発明は、上記請求項1から3のいずれかと同様の構成であり、特定データ挿入手段によって挿入されるデータに、長さNビットのビット列”0”を含むことを特徴とするデジタル再生装置である。
本発明の請求項5に記載の発明は、上記請求項1から4のいずれかと同様の構成であり、映像ビットストリーム中に挿入された特定データを検出したことを制御手段に通知し、制御手段は次にSPS(Sequence Parameter Set)またはIDRピクチャを検出するまで映像ビットストリームを飛ばしてから、前記接続されたストリームをデコードするように制御することを特徴とするデジタル再生装置である。
本発明の請求項6に記載の発明は、映像または音声デジタルビットストリームを複数接続し、連続して再生する場合、再生信号の接続点にダミーデータを挿入するダミーデータ挿入手段と、前記ダミーデータを検出し、検出した接続点に特定データを挿入する特定データ挿入手段と、映像デジタルビットストリーム中の特定データを検出する特定データ検出手段と、前記特定データ検出手段で特定データが検出された場合は、前記デジタルビットストリームのデコード処理を初期化してデコードを継続する映像デコード手段とを備えることを特徴とするコンピュータ上で実行されるプログラムである。
本発明の請求項7に記載の発明は、請求項6と同様の構成で、映像デジタルビットストリーム信号がH.264形式であることを特徴とするコンピュータ上で実行されるプログラムである。
本発明の請求項8に記載の発明は、上記請求項6または7のいずれかと同様の構成であり、特定データ挿入手段によって挿入されるデータが、H.264規格上未定義または将来拡張用のIDを持つNAL(Network Abstraction Layer)ユニットのスタートコードを含むことを特徴とするコンピュータ上で実行されるプログラムである。
本発明の請求項9に記載の発明は、上記請求項6から8のいずれかと同様の構成であり、特定データ挿入手段によって挿入されるデータに、長さNビットのビット列”0”を含むことを特徴とするコンピュータ上で実行されるプログラムである。
本発明の請求項10に記載の発明は、上記請求項6から9のいずれかと同様の構成であり、映像ビットストリーム中に挿入された特定データを検出したことを制御手段に通知し、制御手段は次にSPS(Sequence Parameter Set)またはIDRピクチャを検出するまで映像ビットストリームを飛ばしてから、前記接続されたストリームをデコードするように制御することを特徴とするコンピュータ上で実行されるプログラムである。
以下、本発明の実施例1について図1から図6を用いて説明する。
(実施の形態1)
図1は実施の形態1のデジタル再生装置のブロック図を示すものである。図1において、1は記録媒体、2が再生手段であり、内部にダミーデータ挿入手段を含む。3は制御手段、4はシステムデコード手段、5は特定データ挿入手段、6は映像ストリーム記憶手段、7は映像デコーダ、8はフレーム記憶手段、9は映像出力端子、10は音声ストリーム記憶手段、11は音声デコーダ、12は音声出力端子である。
以上のように構成されたデジタル再生装置について、以下その動作について説明する。記録媒体1には、映像や音声といったデジタルビットストリーム信号が所定のフォーマットで記録されている。例えばMPEG2(Moving Picture Image Coding Experts Group 2)のTS(Transport Stream)といった固定長(188byte)のパケットが記録されている。MPEG2−TSでは、映像と音声のビットストリームを多重化して構成し伝送することができる。さらに、映像信号の符号化方式については、MPEG2方式のみならず、H.264方式(MPEG4−AVCとも称される)方式といった符号化方式で圧縮され、より効率的に記録が可能なストリーム構成も可能となっている。
上記のような方式により記録されているデジタルビットストリーム信号は、まず再生手段2により記録媒体1から読み出される。再生手段2はレーザーピックアップや信号等化回路、エラー訂正回路等を、またダミーデータ挿入手段を含み、記録媒体のアドレスを制御手段3から指示され、読み出したデジタル信号に対してエラー訂正処理等を行った後、再生デジタルビットストリーム信号を得る。次にシステムデコード手段4では映像と音声のデジタルビットストリーム信号の分離を行う。この際に映像ストリームの接続点に特定データ挿入手段5で生成された特定データが挿入される。
分離された映像ビットストリーム信号は、映像ストリーム記憶手段6を経て、映像デコーダ7に入力される。映像デコーダ7ではフレーム記憶手段8にデコードした画像を格納しながら映像ビットストリームを映像信号にデコードして変換し、映像出力端子9から出力する。
また、システムデコード手段4により分離された音声ストリームは、音声ストリーム記憶手段10に入力され、音声デコーダ11に入力される。音声デコーダでは音声ビットストリーム信号がデコードされ、デコードされた音声信号が音声出力端子12から出力される。
記録媒体1には一連の映像、音声デジタルビットストリーム信号が1本のみ入っているわけではない。したがって、2本以上の複数のビットストリーム信号を接続し、連続して再生する場合がある。さらに、同一のストリーム内であっても、異なる2箇所の別の区間のビットストリームを接続し、連続して再生する場合もありうる。このような、デジタルビットストリームの接続点をまたいでの再生を行う場合、まず第1のデジタルビットストリームを記録媒体から再生手段2によって再生し、システムデコード手段4に転送する。システムデコード手段4では音声と映像のストリームに分離し、各映像ストリーム記憶手段6、音声ストリーム記憶手段10へ格納する。
次に制御手段3の指示により、再生手段2内のダミーデータ挿入手段でダミーデータを挿入し、システムデコード手段へと転送する。例えばMPEG2−TSのパケット長と同一の188byteのダミーデータを挿入する。システムデコード手段では、前記ダミーデータを、そのパケットIDやパケットID+データ内に記述されたIDといった方法により判別し、検出する。
図2にシステムデコード手段4のブロック図を示す。図2において、13は入力端子、14はPID検出手段、15はダミーデータ検出手段、16はTS/PESデコーダ、17は切り替えスイッチ、18は特定データ入力端子、19は切替えスイッチ、20は映像ビットストリーム出力端子、21は音声ビットストリーム出力端子である。MPEG2−TSでは固定長(188バイト)のパケットでデータを伝送し、PID(パケットID)により各種パケットの識別を行う。制御手段3から制御されて、映像ビットストリームのPIDや音声ビットストリームのPIDと比較し、切り替えスイッチ17を制御することで、ストリームを分離することが可能となる。また、ダミーデータとして、再生手段2により固定のPIDを持つパケットを挿入することで、PID検出手段14、ダミーデータ検出手段15で、ダミーデータを検出することができる。PIDのみではダミーデータを特定して検出できない場合には、パケットのデータ部にあらかじめ決められた固定のIDパターンを埋めておくことで、確実にストリームの境界を検出することが可能となる。例えば、通常はスタッフィングの目的でしか用いられない、NULL(ヌル)パケットをダミーデータとし、NULLパケットのPIDと、それに続く特定のパターンをダミーデータとして埋め込んでおくとよい。
TS/PESデコーダ16ではMPEG2−TSパケットで送られてきたデータから、TS層、PES(Packetized Elementary Stream)層とよばれる伝送のためのヘッダを取り除き、TS/PES内部に格納されたES(Elementary Stream)と呼ばれる、映像、音声のビットストリームを抽出し、切り替えスイッチ17によりそれぞれの出力端子より出力する。
ダミーデータ検出手段15でダミーデータが検出された場合、そのパケットが伝送された箇所でビットストリームが不連続であり、二つのビットストリームが接続された接続点であることを示す。したがって、特定データ挿入手段5、切替えスイッチ19を制御することにより、映像ビットストリーム中に特定データを挿入する。
例えば、映像ビットストリームがH.264で符号化されている場合、ES層は複数のNALユニットから構成されている。このNALユニットには、内部に伝送されるデータの種類によってnal_unit_typeと呼ばれるIDを含むNALヘッダが先頭付近に付加されている。伝送されるデータとは、SPSやPPS(Picture Parameter Set)と呼ばれるような画像シーケンスやピクチャの各種パラメータや、画像シーケンスの先頭のピクチャである、IDR(Instantaneous Decoding Refresh)ピクチャや、アクセス・ユニットの区切りを示す、AU(Access Unit)デリミタや、シーケンスの終了を示すEnd of Sequenceデータ等であったりする。それぞれのデータの内容によってH.264では固有のnal_unit_typeの値が定義されており、NALヘッダ内の上記IDを検出することで、伝送されているデータ種別を判別することが可能である。今回ストリーム接続点に、特定データ挿入手段5によって生成され、挿入されるデータとしては、H.264規格のNALユニットで規定されるデータ形式とし、nal_unit_typeの値としては、将来拡張用、または未定義のものを使用するとよい。これらの値は、現在未使用のため映像ビットストリーム中には存在しないので、確実に接続点を検出することが可能である。映像デコーダ7では、この特定データとして定められたIDを持つNALユニットデータを検出し、接続点を検出することができる。
図3にH.264のストリーム構成を簡単に説明する。MPEG2とは異なり、ピクチャではなくスライス単位で、I(Intra)スライス、P(Predictive)スライス、B(Bi−Predictive)スライスといった種類がスライスタイプとして定義される。図3ではピクチャ内のスライスがすべて同一のスライスタイプで示されたビットストリームの例であり、このような場合はIピクチャ、Bピクチャ、Pピクチャというようにピクチャ単位でスライスタイプが固定される。また、Iピクチャと区別し、IDRピクチャという画像シーケンスの先頭のピクチャがあり、参照ピクチャ・バッファの状態やパラメータといった、映像ビットストリームを複号するためのすべての状態をリセットするピクチャが存在する。22はIDRピクチャ、23はBピクチャ、24はPピクチャである。IDRピクチャより前には、25のSPSとしてデコードシーケンスに必要なパラメータ情報、26や28にPPSとしてピクチャデコードに必要なパラメータ情報が伝送される。29のようにIDRピクチャから次のIDRピクチャまでがMPEG2のGOP(Group of Pictures)に相当し、デコード開始時にはシーケンス先頭のIDRピクチャから再生する。
次に図4を用いてダミーデータの挿入の様子を説明する。図4において、ストリームは簡単のためMPEG2−TSの映像ビットストリームのみについて示すものとする。30は映像ビットストリーム1であり、35は映像ビットストリーム2であり、それぞれを接続して再生するものとする。31、33、34、37、38は映像ビットストリーム中のBピクチャデータ、32、39はPピクチャデータ、36はIDRピクチャデータを示している。40から41のMPEG2−TSからなるBピクチャデータで、映像ビットストリーム1が終了し、43のTSデータで映像ビットストリーム2が始まるものとする。これらビットストリーム1と2を接続し、連続して再生する場合に、42に示すようにダミーデータを再生手段2において挿入する。
例えば34のBピクチャは、45のTSヘッダ、46のPESヘッダに続く47のPPS、Bピクチャヘッダ以降の映像ESデータとして伝送されている。しかし、データの伝送単位が188バイト単位であるために、最終TSパケット41では、48に示すように、次のピクチャのESデータが始まることも考えられる。同様に、映像ビットストリーム2の先頭IDRピクチャデータ36では、43から44のMPEG−TSデータで伝送されるが、50からSPS、PPS、IDRピクチャヘッダ、ピクチャデータと伝送される。しかし、先頭TSパケットには49に示すように、直前のピクチャデータの残骸が入っていることが考えられる。これらビットストリーム1、2を単純に接続すると、不要なESデータ48や49等が誤って接続され、映像デコーダに送られてデコードエラーを引き起こしてしまう。
特に図5に接続点の様子を示す。図5で53はSPS、54はPPS、55はピクチャヘッダ、56はピクチャデータである。57は映像ビットストリーム2のデータである。また58、59,60,61、66、67、68は映像の符号化データである可変長符号VLC(Variable Length Code)であり、図4のように接続された接続点では、ピクチャの一部のデータや、62や65のようなVLCの途中でストリームが切り取られたデータが存在するので、映像デコーダではデコードエラーとなりうる。
そこで、ダミーデータを検出したシステムデコード手段4、特定データ挿入手段5では、63、64に示すように、特定のIDを持つNALユニットデータと‘0’データとを挿入する。仮にシームレス再生点に挿入されるNALユニットということで63をSLESS_NALユニットとする。64に示す‘0’データは、例えばデコーダにおけるバッファにおいて映像ビットストリーム1のデータを早く押し出して、デコーダにデータを早く到着させる役割を果たす。
ストリーム接続点ではデコーダは63のSLESS_NALユニットを検出することができるようになる。したがって、ストリーム接続点でSLESS_NALユニットを検出した際には、ビットストリーム1で完結しなかったピクチャを表示することなく、ビットストリーム2のデータのデコードを行えばよい。
このとき、H.264データにおいては、IピクチャといってもIDRピクチャを探してSPSからデコードを開始しないと映像ビットストリーム2のデコードは開始できないため、デコーダがSLESS_NALユニットを検出した場合には、IDRピクチャをサーチしてデコードを開始するように制御手段3が映像デコーダ7を制御する必要がある。
デコード開始時の出画について図6を使用して説明する。図6において、69のPピクチャから続くピクチャ列は、元画像データの表示ピクチャ順序を示している。70、77がIDRピクチャ、71、72、76がBピクチャ、73、75がPピクチャ、74がIピクチャである。また70や77のIDRピクチャがデコード開始ポイントとなる。H.264では、例えば79のように73のPピクチャは70のIDRピクチャを参照してエンコードされている。また80に示すようにIピクチャ74を超えて参照し、エンコードされることも可能である。ただし、78のようにIDRピクチャを超えて参照されることはない。
今、蓄積媒体1上においてI/IDRピクチャの位置情報が、81や82のように記録されており、それぞれ70,74のIDR/Iピクチャの先頭から再生することが可能である場合を想定する。この場合、図6下段に示すように、Iピクチャから再生しようとしても83のように参照画像がないため、再生ができない。したがって、H.264ではIDRピクチャから再生を開始することになる。
仮に図4のビットストリーム2において、36が図6の74に示すようにIピクチャから転送されてきた場合、映像デコーダ7では77のIDRピクチャまで映像ビットストリームデータをスキップしてSPS/PPSから再生を開始する必要がある。
このように、デコーダでビットストリームの接続点でSLESS_NALユニットを検出することにより、接続点を確実に検出することが可能であるため、ビットストリーム1とビットストリーム2を連続して再生した場合に、H.264符号化方式の特徴に即して正しくデコードを行うことで、画像の乱れを抑えることが可能となる。これらデコーダのデコード動作の制御を制御手段3により行う。
なお、ストリームを接続する前後は1ピクチャのみのデータ、例えばIDRピクチャだけを順番に接続して再生する、IDR特殊再生(早送り再生)であってもよい。
また、ストリーム接続点にダミーデータを挿入することで、接続点をシステムデコード手段4に伝えたが、例えばダミーデータを使用せずに、ビットストリーム1を再生した後、再生手段2が制御手段3に再生完了割り込み通知を送り、その割り込み通知により、制御手段3がシステムデコード手段4を制御してSLESS_NALユニット等の特定コードを映像ESに挿入し、その後ビットストリーム2を再生する構成としてもよい。
(実施の形態2)
実施の形態2は実施の形態1とほぼ同等の動作を行うもので、図7、図8のフローチャートに示すような再生方法をコンピュータ上で動作可能なプログラムとして実施されるものである。
詳細な説明は図7、図8を用いて説明する。実施の形態1と同様に、フローチャート101から105に示す再生手段の動作を説明する。101は再生スタートで、1番目のストリームを再生開始する。102によりn番目(開始時はn=1)のストリームの再生処理を行う。103では次に連続してストリーム再生を行うかどうかを判定する。次ストリームを再生しない場合は104に移り、再生を終了する。次に連続してストリーム再生を行う場合は、105のダミーデータ挿入処理を行う。その後、nにn+1の値を入れて、102に戻り、順次n+1番目のストリーム再生処理を行う。
106から110はシステムデコード手段のフローチャートを示す。実施の形態1同様、106の再生開始後、107ではパケットIDによりダミーデータかどうかを判定する。ダミーデータでない場合は、108で映像/音声パケット分離処理を行う。次に109でMPEG2−TSをES化する処理を行い、107に戻る。107においてダミーデータを検出した場合は、110でビデオESにSLESS_NALユニットと’0‘データを挿入し、107に戻る。
図8には映像デコーダのフローチャートを111から117に示す。111で再生をスタートし、112でSPS検出処理を行う。SPSが見つかると、113のヘッダデコード処理ではSPS/PPSや各ピクチャのヘッダデコード処理を行う。次に114ではSLESS_NALユニットを検出するかどうか確認する。SLESS_NALユニットを検出した場合は112に戻る。
その後115ではピクチャデコード処理を行う。116は114と同様である。最後に117で出画処理を行い、デコードした画像データを出画する。
以上のように実施の形態2は、実施の形態1同様の処理を図7、8で示すフローチャートのような処理に準じて、コンピュータ上で動作可能なプログラムとして実施される。
なお、実施の形態2では、コンピュータ上で動作可能なプログラムとして実施されるものとしたが、コンピュータ同様に、プログラムとして記述された言語が動作するあらゆる信号処理回路、マイクロコード、電子機器で実施しても同等の処理を実現できるものであればなんら構わない。
また、実施の形態1、実施の形態2において、映像ビットストリームの符号化方式についてH.264方式について記述したが、その他の符号化方式においても同様に、特定データとして各符号化方式のフォーマットの中で将来用、未定義用のデータを利用し、2ストリームの連続再生を行っても良い。
本発明の実施の形態1によるデジタル再生装置のブロック図 本発明の実施の形態1によるデジタル再生装置のシステムデコード手段のブロック図 本発明の実施の形態1または2によるH.264によって符号化された映像デジタルビットストリームの構成を示した図 本発明の実施の形態1による2つのデジタルビットストリームとダミーデータの挿入を示した図 本発明の実施の形態1または2によるストリーム接続点の説明図 本発明の実施の形態1または2によるH.264によって符号化されたフレーム間参照方法の説明図 本発明の実施の形態2による再生手段、システムデコード手段のフローチャート 本発明の実施の形態2による映像デコーダのフローチャート デジタル再生装置の従来の実施例のブロック図
符号の説明
1 記録媒体
2 再生手段
3 制御手段
4 システムデコード手段
5 特定データ挿入手段
6 映像ストリーム記憶手段
7 映像デコーダ
8 フレーム記憶手段
9 映像出力端子
10 音声ストリーム記憶手段
11 音声デコーダ
12 音声出力端子
13 入力端子
14 PID検出手段
15 ダミーデータ検出手段
16 TS/PESデコーダ
17,19 切り替えスイッチ
18 入力端子
20 映像ビットストリーム出力端子
21 音声ビットストリーム出力端子
22 IDRピクチャデータ
24 Pピクチャデータ
23 Bピクチャデータ
25 SPS
26、28 PPS
27 IDRピクチャデータ
29 デコードシーケンス
30 映像デジタルビットストリーム1
35 映像デジタルビットストリーム2
32、39 Pピクチャデータ
31、33、34、37、38 Bピクチャデータ
40、41、43、44 MPEG2−TSパケットデータ
45、51 TSヘッダ
46、52 PESヘッダ
47 PPS/Bピクチャヘッダ
48、50 SPS/PPS、IDRピクチャヘッダ
49 Bピクチャデータ
53 SPS
54 PPS
55 ピクチャヘッダ
56 スライスヘッダ、マクロブロックデータ
57 Bピクチャデータ
58、59、60、61、66、67、68 VLCデータ
62、65 欠落したVLCデータ
63 SLESS_NALユニットデータ
64 “0”データ
69、73、75 Pピクチャデータ
70,77 IDRピクチャデータ
71、72、76 Bピクチャデータ
74 Iピクチャデータ
78、79、80、83 参照関係を示す矢印
81、82 IDR/Iピクチャ位置情報
118 切り替えスイッチA
119 切り替えスイッチB

Claims (10)

  1. 映像または音声デジタルビットストリームを複数接続し、連続して再生する場合、再生信号の接続点にダミーデータを挿入するダミーデータ挿入手段と、前記ダミーデータを検出し、検出した接続点に特定データを挿入する特定データ挿入手段と、映像デジタルビットストリーム中の特定データを検出する特定データ検出手段と、前記特定データ検出手段で特定データが検出された場合は、前記デジタルビットストリームのデコード処理を初期化してデコードを継続する映像デコード手段とを備えることを特徴とするデジタル再生装置。
  2. 映像デジタルビットストリーム信号がH.264形式であることを特徴とする、請求項1に記載のデジタル再生装置。
  3. 前記特定データ挿入手段によって映像ビットストリームに挿入される特定データが、H.264規格上未定義または将来拡張用のIDを持つNAL(Network Abstraction Layer)ユニットのスタートコードを含むことを特徴とする、請求項1または2に記載のデジタル再生装置。
  4. 前記特定データ挿入手段によって映像ビットストリームに挿入される特定データに、長さNビットのビット列”0”を含むことを特徴とする、請求項1から3のいずれかに記載のデジタル再生装置。
  5. 映像ビットストリーム中に挿入された特定データを検出したことを制御手段に通知し、制御手段は次にSPS(Sequence Parameter Set)またはIDRピクチャを検出するまで映像ビットストリームを読み飛ばした後、前記接続されたストリームをデコードするように制御することを特徴とする請求項1から4のいずれかに記載のデジタル再生装置。
  6. 映像または音声デジタルビットストリームを複数接続し、連続して再生する場合、再生信号の接続点にダミーデータを挿入するダミーデータ挿入手段と、前記ダミーデータを検出し、検出した接続点に特定データを挿入する特定データ挿入手段と、映像デジタルビットストリーム中の特定データを検出する特定データ検出手段と、前記特定データ検出手段で特定データが検出された場合は、前記デジタルビットストリームのデコード処理を初期化してデコードを継続する映像デコード手段とを備えることを特徴とするコンピュータ上で実行されるプログラム。
  7. 映像デジタルビットストリーム信号がH.264形式であることを特徴とする請求項6に記載のコンピュータ上で実行されるプログラム。
  8. 特定データ挿入手段によって映像ビットストリームに挿入されるデータが、H.264規格上未定義または将来拡張用のIDを持つNALユニットのスタートコードを含むことを特徴とする請求項6または7に記載のコンピュータ上で実行されるプログラム。
  9. 特定データ挿入手段によって挿入されるデータに、長さNビットのビット列”0”を含むことを特徴とする請求項6から8のいずれかに記載のコンピュータ上で実行されるプログラム。
  10. 映像ビットストリーム中に挿入された特定データを検出したことを制御手段に通知し、制御手段は次にSPSまたはIDRピクチャを検出するまで映像ビットストリームを読み飛ばした後、前記接続されたストリームをデコードするように制御することを特徴とする請求項6から9のいずれかに記載のコンピュータ上で実行されるプログラム。
JP2006108433A 2006-04-11 2006-04-11 デジタル再生装置または再生プログラム Expired - Fee Related JP4736918B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006108433A JP4736918B2 (ja) 2006-04-11 2006-04-11 デジタル再生装置または再生プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006108433A JP4736918B2 (ja) 2006-04-11 2006-04-11 デジタル再生装置または再生プログラム

Publications (3)

Publication Number Publication Date
JP2007282084A true JP2007282084A (ja) 2007-10-25
JP2007282084A5 JP2007282084A5 (ja) 2009-05-21
JP4736918B2 JP4736918B2 (ja) 2011-07-27

Family

ID=38683046

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006108433A Expired - Fee Related JP4736918B2 (ja) 2006-04-11 2006-04-11 デジタル再生装置または再生プログラム

Country Status (1)

Country Link
JP (1) JP4736918B2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009253507A (ja) * 2008-04-03 2009-10-29 Sony Corp 情報処理装置および方法、並びにプログラム
US8767840B2 (en) 2009-02-11 2014-07-01 Taiwan Semiconductor Manufacturing Company, Ltd. Method for detecting errors and recovering video data

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003173622A (ja) * 2001-12-04 2003-06-20 Matsushita Electric Ind Co Ltd 符号化音声データ復号化装置及び符号化音声データ復号化方法
WO2005002221A1 (ja) * 2003-06-30 2005-01-06 Matsushita Electric Industrial Co., Ltd. データ処理装置及びデータ処理方法
WO2005106875A1 (en) * 2004-04-28 2005-11-10 Matsushita Electric Industrial Co., Ltd. Moving picture stream generation apparatus, moving picture coding apparatus, moving picture multiplexing apparatus and moving picture decoding apparatus

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003173622A (ja) * 2001-12-04 2003-06-20 Matsushita Electric Ind Co Ltd 符号化音声データ復号化装置及び符号化音声データ復号化方法
WO2005002221A1 (ja) * 2003-06-30 2005-01-06 Matsushita Electric Industrial Co., Ltd. データ処理装置及びデータ処理方法
WO2005106875A1 (en) * 2004-04-28 2005-11-10 Matsushita Electric Industrial Co., Ltd. Moving picture stream generation apparatus, moving picture coding apparatus, moving picture multiplexing apparatus and moving picture decoding apparatus

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009253507A (ja) * 2008-04-03 2009-10-29 Sony Corp 情報処理装置および方法、並びにプログラム
US8767840B2 (en) 2009-02-11 2014-07-01 Taiwan Semiconductor Manufacturing Company, Ltd. Method for detecting errors and recovering video data

Also Published As

Publication number Publication date
JP4736918B2 (ja) 2011-07-27

Similar Documents

Publication Publication Date Title
JP3752694B2 (ja) 圧縮映像信号編集装置、編集方法、及び復号化装置
JP4538908B2 (ja) データ変換装置及び方法
JP4071811B2 (ja) 動画像ストリーム生成装置、動画像ストリーム生成方法、動画像復号化装置、動画像復号化方法、記録方法および動画像復号化システム
US6628890B1 (en) Digital recording/reproduction apparatus
EP0712256B1 (en) Recording/reproducing apparatus
JPH08140056A (ja) 記録再生装置
KR100289519B1 (ko) 복호화방법및그장치
JP4262139B2 (ja) 信号処理装置
JP4736918B2 (ja) デジタル再生装置または再生プログラム
JP4173094B2 (ja) ビデオ・セグメントを記憶媒体に録画する方法およびシステム
JP2006295910A (ja) エラー訂正装置
JP3852114B2 (ja) 圧縮画像データ伝送方法及び装置
JP3792770B2 (ja) 記録再生装置
JP3045696B2 (ja) 復号化方法及びその装置
JP4435733B2 (ja) データ処理装置
JP5191294B2 (ja) 情報処理装置及びプログラム
KR101161604B1 (ko) 비디오 스트림의 립 싱크 제어 방법 및 그 장치
JP4941128B2 (ja) 映像処理装置
JP3648460B2 (ja) 圧縮画像再生方法
JP3456726B2 (ja) 圧縮信号処理装置
JPH08140046A (ja) 記録再生装置
JP4373481B2 (ja) 動画像再生装置
JP2002118826A (ja) データ転送方法
JP2001309302A (ja) デジタル信号高速再生方法及びデジタル信号高速再生装置
JP2005159525A (ja) デジタル再生装置または再生方法

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090408

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090408

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20090513

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110111

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110118

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110223

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110405

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110418

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140513

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees