JP2002118844A - 動画像復号再生装置とこの装置を用いたマルチメディア情報受信装置 - Google Patents
動画像復号再生装置とこの装置を用いたマルチメディア情報受信装置Info
- Publication number
- JP2002118844A JP2002118844A JP2000305604A JP2000305604A JP2002118844A JP 2002118844 A JP2002118844 A JP 2002118844A JP 2000305604 A JP2000305604 A JP 2000305604A JP 2000305604 A JP2000305604 A JP 2000305604A JP 2002118844 A JP2002118844 A JP 2002118844A
- Authority
- JP
- Japan
- Prior art keywords
- frame
- moving image
- management information
- information
- time management
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/24—Systems for the transmission of television signals using pulse code modulation
- H04N7/52—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
(57)【要約】
【課題】 ＰＥＳパケットから分離された全フレームの
動画像ビットストリームの正確な再生時刻を求める。 【解決手段】 画像処理部２４において、動画像信号復
号部２４６は入力バッファ２４５に蓄えられた多重分離
部２２からの動画像ビットストリーム及び再生用タイム
スタンプをフレーム毎に復号し、復号フレームに対応し
た再生用タイムスタンプ及び動画像ビットストリームの
ヘッダ中のタイムスタンプの情報を時間制御部２４７に
与え、復号画像データをフレームメモリ２４８に蓄え
る。時間制御部２４７は、動画像信号復号部２４６から
の再生用タイムスタンプが指定する時刻または動画像自
身が持つタイムスタンプに基づく時刻に画像出力部２４
９へ画像データの出力要求を送出し、フレームメモリ２
４８から画像データを読み出させ、ＬＣＤ制御部２５を
通じてＬＣＤ３４に表示させる。
動画像ビットストリームの正確な再生時刻を求める。 【解決手段】 画像処理部２４において、動画像信号復
号部２４６は入力バッファ２４５に蓄えられた多重分離
部２２からの動画像ビットストリーム及び再生用タイム
スタンプをフレーム毎に復号し、復号フレームに対応し
た再生用タイムスタンプ及び動画像ビットストリームの
ヘッダ中のタイムスタンプの情報を時間制御部２４７に
与え、復号画像データをフレームメモリ２４８に蓄え
る。時間制御部２４７は、動画像信号復号部２４６から
の再生用タイムスタンプが指定する時刻または動画像自
身が持つタイムスタンプに基づく時刻に画像出力部２４
９へ画像データの出力要求を送出し、フレームメモリ２
４８から画像データを読み出させ、ＬＣＤ制御部２５を
通じてＬＣＤ３４に表示させる。
Description
【０００１】
【発明の属する技術分野】本発明は、例えば互いに関連
したオーディオ信号及び動画像信号を別個に圧縮して多
重したマルチメディア情報を受信し、分離、伸張したオ
ーディオ信号及び動画像信号を、同期をとって再生する
マルチメディア情報受信装置に係り、特に動画像信号復
号再生装置の改良に関する。
したオーディオ信号及び動画像信号を別個に圧縮して多
重したマルチメディア情報を受信し、分離、伸張したオ
ーディオ信号及び動画像信号を、同期をとって再生する
マルチメディア情報受信装置に係り、特に動画像信号復
号再生装置の改良に関する。
【０００２】
【従来の技術】一般に、オーディオ信号及び動画像信号
を多重したマルチメディア情報を伝送するマルチメディ
ア情報伝送システムにあっては、送信側ではオーディ
オ、動画像それぞれの符号化処理部において両者の同期
を取って処理する必要があり、受信側ではオーディオと
動画像の再生タイミングが一致するように復号化処理部
において両者の出力を同期させなければない。このよう
にオーディオと動画像の同期を可能とするために、国際
標準の符号化方式であるＭＰＥＧ（Moving Pictures Ex
perts Group）−１及びＭＰＥＧ−２等では、プレゼン
テーションタイムスタンプ（ＰＴＳ：Presentation Tim
e Stamp）という再生出力時刻管理情報を使い、復号器
のシステムタイムクロック（ＳＴＣ：System Time Cloc
k）という基準同期時刻がタイムスタンプ（ＰＴＳ）で
管理される時刻に一致した時に、オーディオ信号、動画
像信号をそれぞれ再生出力することが規定されている。
を多重したマルチメディア情報を伝送するマルチメディ
ア情報伝送システムにあっては、送信側ではオーディ
オ、動画像それぞれの符号化処理部において両者の同期
を取って処理する必要があり、受信側ではオーディオと
動画像の再生タイミングが一致するように復号化処理部
において両者の出力を同期させなければない。このよう
にオーディオと動画像の同期を可能とするために、国際
標準の符号化方式であるＭＰＥＧ（Moving Pictures Ex
perts Group）−１及びＭＰＥＧ−２等では、プレゼン
テーションタイムスタンプ（ＰＴＳ：Presentation Tim
e Stamp）という再生出力時刻管理情報を使い、復号器
のシステムタイムクロック（ＳＴＣ：System Time Cloc
k）という基準同期時刻がタイムスタンプ（ＰＴＳ）で
管理される時刻に一致した時に、オーディオ信号、動画
像信号をそれぞれ再生出力することが規定されている。
【０００３】例えば、ＭＰＥＧ−２システムでは、オー
ディオ信号と動画像信号を多重する場合に、オーディオ
信号、動画像信号を符号化したビットストリームをグル
ープ化し、可変長の長さでパケット化してＰＥＳ（Pack
etized Elementary Stream）と呼ばれるパケットを生成
する。このとき、各ＰＥＳパケット中に１つのタイムス
タンプ（ＰＴＳ）を付加する。１つのＰＥＳパケット中
に複数フレームの動画像ビットストリームが存在する場
合には、最初のフレームに対応するタイムスタンプ（Ｐ
ＴＳ）だけを付加する。このため、残りのフレームに関
してはタイムスタンプ（ＰＴＳ）が存在しない。
ディオ信号と動画像信号を多重する場合に、オーディオ
信号、動画像信号を符号化したビットストリームをグル
ープ化し、可変長の長さでパケット化してＰＥＳ（Pack
etized Elementary Stream）と呼ばれるパケットを生成
する。このとき、各ＰＥＳパケット中に１つのタイムス
タンプ（ＰＴＳ）を付加する。１つのＰＥＳパケット中
に複数フレームの動画像ビットストリームが存在する場
合には、最初のフレームに対応するタイムスタンプ（Ｐ
ＴＳ）だけを付加する。このため、残りのフレームに関
してはタイムスタンプ（ＰＴＳ）が存在しない。
【０００４】但し、ＭＰＥＧ−２の動画像符号化方式で
は、１フレームの動画像ビットストリーム長が長いた
め、１つのＰＥＳパケット中に複数のフレームの動画像
ビットストリームが存在することはほとんどない。ま
た、フレーム間隔が一定であるため、個々のフレームの
タイムスタンプ（ＰＴＳ）が存在しなくても、最初のフ
レームのタイムスタンプ（ＰＴＳ）から表示時刻をほぼ
正確に推定することが可能である。
は、１フレームの動画像ビットストリーム長が長いた
め、１つのＰＥＳパケット中に複数のフレームの動画像
ビットストリームが存在することはほとんどない。ま
た、フレーム間隔が一定であるため、個々のフレームの
タイムスタンプ（ＰＴＳ）が存在しなくても、最初のフ
レームのタイムスタンプ（ＰＴＳ）から表示時刻をほぼ
正確に推定することが可能である。
【０００５】一方、現在、動画像符号化方式として、伝
送速度が低い移動体通信（無線通信）等での利用を想定
したＭＰＥＧ−４の規格制定が進められている。このＭ
ＰＥＧ−４ビデオ符号化方式では、ビットストリーム内
の各VOP（フレーム）のヘッダに各VOPに対する再生時刻
を示すタイムスタンプを付加する事が規定されている。
ただし、このタイムスタンプはシステムタイムクロック
ではなく、ビデオ独自の制度のクロックで表された値で
ある。
送速度が低い移動体通信（無線通信）等での利用を想定
したＭＰＥＧ−４の規格制定が進められている。このＭ
ＰＥＧ−４ビデオ符号化方式では、ビットストリーム内
の各VOP（フレーム）のヘッダに各VOPに対する再生時刻
を示すタイムスタンプを付加する事が規定されている。
ただし、このタイムスタンプはシステムタイムクロック
ではなく、ビデオ独自の制度のクロックで表された値で
ある。
【０００６】ここで、１つのＰＥＳパケットで１フレー
ムの動画像ビットストリームをパケット化したとする。
この場合、１フレームの動画像ビットストリーム長が短
い場合にはＰＥＳパケット長も短くなる。ところが、Ｐ
ＥＳパケット内にフレームに対応する実データ３３ビッ
トのタイムスタンプ（ＰＴＳ）を付加するため、パケッ
ト長に対してオーバヘッド（多重化のための追加デー
タ）が大きくなり、全体の伝送効率が低下してしまう。
ムの動画像ビットストリームをパケット化したとする。
この場合、１フレームの動画像ビットストリーム長が短
い場合にはＰＥＳパケット長も短くなる。ところが、Ｐ
ＥＳパケット内にフレームに対応する実データ３３ビッ
トのタイムスタンプ（ＰＴＳ）を付加するため、パケッ
ト長に対してオーバヘッド（多重化のための追加デー
タ）が大きくなり、全体の伝送効率が低下してしまう。
【０００７】そこで、１つのＰＥＳパケットで複数のフ
レームの動画像ビットストリームをパケット化し、その
ＰＥＳパケット中に最初のフレームに対応するタイムス
タンプ（ＰＴＳ）のみを付加することが考えられる。し
かしながら、ＭＰＥＧ−４ではフレーム間隔が一定にな
るとは限らない。この場合、ＰＥＳパケット中に最初の
フレーム以外のタイムスタンプ（ＰＴＳ）が存在しない
ことから、残りのフレームに関しては正確な再生時刻が
わからなくなってしまうことになる。
レームの動画像ビットストリームをパケット化し、その
ＰＥＳパケット中に最初のフレームに対応するタイムス
タンプ（ＰＴＳ）のみを付加することが考えられる。し
かしながら、ＭＰＥＧ−４ではフレーム間隔が一定にな
るとは限らない。この場合、ＰＥＳパケット中に最初の
フレーム以外のタイムスタンプ（ＰＴＳ）が存在しない
ことから、残りのフレームに関しては正確な再生時刻が
わからなくなってしまうことになる。
【０００８】
【発明が解決しようとする課題】以上述べたように、伝
送速度が低い移動体通信等での利用を想定したＭＰＥＧ
−４では、動画像ビットストリームを１フレーム毎にＰ
ＥＳパケット化した場合には、パケット中にフレームに
対応するタイムスタンプ（ＰＴＳ）を付加すると、パケ
ット長に対してオーバヘッドが大きくなってしまう。ま
た、複数フレームの動画像ビットストリームをパケット
化し、そのパケット中に先頭フレームに対応するタイム
スタンプ（ＰＴＳ）のみを付加した場合には、他のフレ
ームについては正確な再生時刻がわからなくなってしま
う。
送速度が低い移動体通信等での利用を想定したＭＰＥＧ
−４では、動画像ビットストリームを１フレーム毎にＰ
ＥＳパケット化した場合には、パケット中にフレームに
対応するタイムスタンプ（ＰＴＳ）を付加すると、パケ
ット長に対してオーバヘッドが大きくなってしまう。ま
た、複数フレームの動画像ビットストリームをパケット
化し、そのパケット中に先頭フレームに対応するタイム
スタンプ（ＰＴＳ）のみを付加した場合には、他のフレ
ームについては正確な再生時刻がわからなくなってしま
う。
【０００９】本発明は、上記の問題を解決するためにな
されたもので、１フレームの動画像ビットストリーム長
が可変であり、全てのフレームの動画像ビットストリー
ムに動画像自身の時刻管理情報が付加される動画像符号
化方式が採用され、１フレームの動画像ビットストリー
ム毎にパケット化されている場合、複数フレームの動画
像ビットストリームがまとめられてパケット化されてい
る場合のいずれの場合でも、全フレームの動画像ビット
ストリームの正確な再生時刻を求めることのできる動画
像復号再生装置と、この装置を用いて動画像と音声を正
確に同期再生することのできるマルチメディア情報受信
装置を提供することを目的とする。
されたもので、１フレームの動画像ビットストリーム長
が可変であり、全てのフレームの動画像ビットストリー
ムに動画像自身の時刻管理情報が付加される動画像符号
化方式が採用され、１フレームの動画像ビットストリー
ム毎にパケット化されている場合、複数フレームの動画
像ビットストリームがまとめられてパケット化されてい
る場合のいずれの場合でも、全フレームの動画像ビット
ストリームの正確な再生時刻を求めることのできる動画
像復号再生装置と、この装置を用いて動画像と音声を正
確に同期再生することのできるマルチメディア情報受信
装置を提供することを目的とする。
【００１０】
【課題を解決するための手段】上記の目的を達成するた
めに本発明には、動画像信号を符号化した動画像ビット
ストリームのフレームヘッダに動画像ビットストリーム
内部時刻管理情報を付加し、１または複数のフレームの
動画像ビットストリームをパケット化し、そのパケット
中に少なくとも１以上のフレームに対応する再生時刻管
理情報を付加して伝送するシステムの動画像復号再生装
置において、前記再生時刻管理情報が付加されているフ
レームの動画像ビットストリームについては、その復号
動画像信号を前記再生時刻管理情報で指定される再生時
刻に出力し、前記再生時刻管理情報が付加されていない
フレームの動画像ビットストリームについては、そのフ
レーム以前にある最初の再生時刻管理情報とそのフレー
ムの動画像ビットストリームのヘッダに付加されている
動画像ビットストリーム内部時刻管理情報から再生時刻
を求め、この再生時刻にそのフレームの復号動画像信号
を出力することを特徴とする。
めに本発明には、動画像信号を符号化した動画像ビット
ストリームのフレームヘッダに動画像ビットストリーム
内部時刻管理情報を付加し、１または複数のフレームの
動画像ビットストリームをパケット化し、そのパケット
中に少なくとも１以上のフレームに対応する再生時刻管
理情報を付加して伝送するシステムの動画像復号再生装
置において、前記再生時刻管理情報が付加されているフ
レームの動画像ビットストリームについては、その復号
動画像信号を前記再生時刻管理情報で指定される再生時
刻に出力し、前記再生時刻管理情報が付加されていない
フレームの動画像ビットストリームについては、そのフ
レーム以前にある最初の再生時刻管理情報とそのフレー
ムの動画像ビットストリームのヘッダに付加されている
動画像ビットストリーム内部時刻管理情報から再生時刻
を求め、この再生時刻にそのフレームの復号動画像信号
を出力することを特徴とする。
【００１１】具体的には、前記パケットから前記動画像
ビットストリーム及び再生時刻管理情報を分離する分離
部と、この分離部で分離された動画像ビットストリーム
及び再生時刻管理情報を蓄積する入力バッファ部と、こ
の入力バッファ部から１フレーム毎に動画像ビットスト
リーム及び再生時刻管理情報を読み出して復号し、その
フレームヘッダに付加された復号時刻管理情報により指
定される復号時刻情報と、そのフレームに対応する再生
時刻管理情報があるときはその情報により指定される再
生時刻情報を出力する動画像信号復号部と、この動画像
信号復号部で復号された動画像信号を記憶するフレーム
メモリ部と、このフレームメモリ部に記憶された動画像
信号を再生指示に従って出力する画像出力部と、前記動
画像復号部から動画像信号独立時刻情報、再生時刻情報
を受け取り、前記再生時刻情報があるフレームについて
はその情報で指定される再生時刻に前記画像出力部に動
画像信号を出力するように指示し、前記再生時刻情報が
ないフレームについてはそのフレーム以前にある最初の
再生時刻管理情報とそのフレームの動画像ビットストリ
ームのヘッダに付加されている動画像ビットストリーム
内部時刻管理情報から再生時刻を求め、この再生時刻に
前記画像出力部に動画像信号を出力するように指示する
時間制御部とを具備することを特徴とする。
ビットストリーム及び再生時刻管理情報を分離する分離
部と、この分離部で分離された動画像ビットストリーム
及び再生時刻管理情報を蓄積する入力バッファ部と、こ
の入力バッファ部から１フレーム毎に動画像ビットスト
リーム及び再生時刻管理情報を読み出して復号し、その
フレームヘッダに付加された復号時刻管理情報により指
定される復号時刻情報と、そのフレームに対応する再生
時刻管理情報があるときはその情報により指定される再
生時刻情報を出力する動画像信号復号部と、この動画像
信号復号部で復号された動画像信号を記憶するフレーム
メモリ部と、このフレームメモリ部に記憶された動画像
信号を再生指示に従って出力する画像出力部と、前記動
画像復号部から動画像信号独立時刻情報、再生時刻情報
を受け取り、前記再生時刻情報があるフレームについて
はその情報で指定される再生時刻に前記画像出力部に動
画像信号を出力するように指示し、前記再生時刻情報が
ないフレームについてはそのフレーム以前にある最初の
再生時刻管理情報とそのフレームの動画像ビットストリ
ームのヘッダに付加されている動画像ビットストリーム
内部時刻管理情報から再生時刻を求め、この再生時刻に
前記画像出力部に動画像信号を出力するように指示する
時間制御部とを具備することを特徴とする。
【００１２】上記構成によれば、１フレームの動画像ビ
ットストリーム長が可変であり、全てのフレームの動画
像ビットストリームに動画像自身の時刻管理情報が付加
される動画像符号化方式が採用され、１フレームの動画
像ビットストリーム毎にパケット化されている場合、複
数フレームの動画像ビットストリームがまとめられてパ
ケット化されている場合のいずれの場合でも、全フレー
ムの動画像ビットストリームの正確な再生時刻を求める
ことが可能となる。
ットストリーム長が可変であり、全てのフレームの動画
像ビットストリームに動画像自身の時刻管理情報が付加
される動画像符号化方式が採用され、１フレームの動画
像ビットストリーム毎にパケット化されている場合、複
数フレームの動画像ビットストリームがまとめられてパ
ケット化されている場合のいずれの場合でも、全フレー
ムの動画像ビットストリームの正確な再生時刻を求める
ことが可能となる。
【００１３】前記再生時刻は、システムが持つ基準時刻
により管理するものとする。これにより、他の再生信号
との同期を図ることができる。
により管理するものとする。これにより、他の再生信号
との同期を図ることができる。
【００１４】前記パケット中に複数のフレームに対応す
る再生時刻管理情報が付加されているときは、前記再生
時刻管理情報が付加されたフレームの復号動画像信号を
選択的に出力するものとする。これにより、再生時刻管
理情報が付加されているフレームでのランダムアクセス
が可能となる。
る再生時刻管理情報が付加されているときは、前記再生
時刻管理情報が付加されたフレームの復号動画像信号を
選択的に出力するものとする。これにより、再生時刻管
理情報が付加されているフレームでのランダムアクセス
が可能となる。
【００１５】また、本発明に係るマルチメディア情報受
信装置は、互いに関連する動画像信号及び音声信号をそ
れぞれ符号化した動画像ビットストリーム及び音声ビッ
トストリームを、それぞれパケット化し多重して生成さ
れたマルチメディア情報を伝送するシステムに用いられ
る装置であって、前記マルチメディア情報の動画像パケ
ットについては、前記動画像ビットストリームのフレー
ムヘッダに動画像ビットストリーム内部時刻管理情報が
付加され、１または複数のフレームの動画像ビットスト
リームがパケット化され、そのパケット中に前記音声信
号の再生と同期をとるために少なくとも１以上のフレー
ムに対応する再生時刻管理情報が付加されているとき、
前記マルチメディア情報の各パケットから動画像ビット
ストリーム、音声ビットストリーム、音声、動画像各々
に対する再生時刻管理情報をそれぞれ分離する分離部
と、この分離部で分離された音声ビットストリームを復
号し、復号された音声信号を音声に対する再生時刻管理
情報に基づいて再生出力する音声復号再生部と、前記分
離部で分離された動画像ビットストリーム及び動画像に
対する再生時刻管理情報を取り込んで、前記再生時刻管
理情報が付加されているフレームの動画像ビットストリ
ームについては、その復号動画像信号を前記再生時刻管
理情報で指定される再生時刻に出力し、前記再生時刻管
理情報が付加されていないフレームの動画像ビットスト
リームについては、そのフレーム以前にある最初の再生
時刻管理情報とそのフレームの動画像ビットストリーム
のヘッダに付加されている動画像ビットストリーム内部
時刻管理情報から再生時刻を求め、この再生時刻にその
フレームの復号動画像信号を出力する動画像復号再生部
とを具備することを特徴とする。
信装置は、互いに関連する動画像信号及び音声信号をそ
れぞれ符号化した動画像ビットストリーム及び音声ビッ
トストリームを、それぞれパケット化し多重して生成さ
れたマルチメディア情報を伝送するシステムに用いられ
る装置であって、前記マルチメディア情報の動画像パケ
ットについては、前記動画像ビットストリームのフレー
ムヘッダに動画像ビットストリーム内部時刻管理情報が
付加され、１または複数のフレームの動画像ビットスト
リームがパケット化され、そのパケット中に前記音声信
号の再生と同期をとるために少なくとも１以上のフレー
ムに対応する再生時刻管理情報が付加されているとき、
前記マルチメディア情報の各パケットから動画像ビット
ストリーム、音声ビットストリーム、音声、動画像各々
に対する再生時刻管理情報をそれぞれ分離する分離部
と、この分離部で分離された音声ビットストリームを復
号し、復号された音声信号を音声に対する再生時刻管理
情報に基づいて再生出力する音声復号再生部と、前記分
離部で分離された動画像ビットストリーム及び動画像に
対する再生時刻管理情報を取り込んで、前記再生時刻管
理情報が付加されているフレームの動画像ビットストリ
ームについては、その復号動画像信号を前記再生時刻管
理情報で指定される再生時刻に出力し、前記再生時刻管
理情報が付加されていないフレームの動画像ビットスト
リームについては、そのフレーム以前にある最初の再生
時刻管理情報とそのフレームの動画像ビットストリーム
のヘッダに付加されている動画像ビットストリーム内部
時刻管理情報から再生時刻を求め、この再生時刻にその
フレームの復号動画像信号を出力する動画像復号再生部
とを具備することを特徴とする。
【００１６】特に、前記動画像復号再生部は、前記分離
部で分離された動画像ビットストリーム及び再生時刻管
理情報を蓄積する入力バッファ部と、この入力バッファ
部から１フレーム毎に動画像ビットストリーム及び再生
時刻管理情報を読み出して復号し、そのフレームヘッダ
に付加された動画像ビットストリーム内部時刻管理情報
により指定される復号時刻情報と、そのフレームに対応
する再生時刻管理情報があるときはその情報により指定
される再生時刻情報を出力する動画像信号復号部と、こ
の動画像信号復号部で復号された動画像信号を記憶する
フレームメモリ部と、このフレームメモリ部に記憶され
た動画像信号を再生指示に従って出力する画像出力部
と、前記動画像信号復号部から動画像独立時刻情報、再
生時刻情報を受け取り、前記再生時刻情報があるフレー
ムについてはその情報で指定される再生時刻に前記画像
出力部に動画像信号を出力するように指示し、前記再生
時刻情報がないフレームについてはそのフレーム以前に
ある最初の再生時刻管理情報とそのフレームの動画像ビ
ットストリームのヘッダに付加されている動画像ビット
ストリーム内部時刻管理情報から再生時刻を求め、この
再生時刻に前記画像出力部に動画像信号を出力するよう
に指示する時間制御部とを備えることを特徴とする。
部で分離された動画像ビットストリーム及び再生時刻管
理情報を蓄積する入力バッファ部と、この入力バッファ
部から１フレーム毎に動画像ビットストリーム及び再生
時刻管理情報を読み出して復号し、そのフレームヘッダ
に付加された動画像ビットストリーム内部時刻管理情報
により指定される復号時刻情報と、そのフレームに対応
する再生時刻管理情報があるときはその情報により指定
される再生時刻情報を出力する動画像信号復号部と、こ
の動画像信号復号部で復号された動画像信号を記憶する
フレームメモリ部と、このフレームメモリ部に記憶され
た動画像信号を再生指示に従って出力する画像出力部
と、前記動画像信号復号部から動画像独立時刻情報、再
生時刻情報を受け取り、前記再生時刻情報があるフレー
ムについてはその情報で指定される再生時刻に前記画像
出力部に動画像信号を出力するように指示し、前記再生
時刻情報がないフレームについてはそのフレーム以前に
ある最初の再生時刻管理情報とそのフレームの動画像ビ
ットストリームのヘッダに付加されている動画像ビット
ストリーム内部時刻管理情報から再生時刻を求め、この
再生時刻に前記画像出力部に動画像信号を出力するよう
に指示する時間制御部とを備えることを特徴とする。
【００１７】上記構成によれば、マルチメディア情報を
構成するパケットに動画像ビットストリームを含み、１
フレームの動画像ビットストリーム長が可変であり、全
てのフレームの動画像ビットストリームに動画像自身の
時刻管理情報が付加される動画像符号化方式が採用され
ているとき、１フレームの動画像ビットストリーム毎に
パケット化されている場合、複数フレームの動画像ビッ
トストリームがまとめられてパケット化されている場合
のいずれの場合でも、全フレームの動画像ビットストリ
ームの正確な再生時刻を求めることが可能となる。
構成するパケットに動画像ビットストリームを含み、１
フレームの動画像ビットストリーム長が可変であり、全
てのフレームの動画像ビットストリームに動画像自身の
時刻管理情報が付加される動画像符号化方式が採用され
ているとき、１フレームの動画像ビットストリーム毎に
パケット化されている場合、複数フレームの動画像ビッ
トストリームがまとめられてパケット化されている場合
のいずれの場合でも、全フレームの動画像ビットストリ
ームの正確な再生時刻を求めることが可能となる。
【００１８】前記再生時刻は、システムが持つ基準時刻
により管理するものとする。これにより、動画像信号の
再生を音声信号と再生と同期させることが可能となる。
により管理するものとする。これにより、動画像信号の
再生を音声信号と再生と同期させることが可能となる。
【００１９】前記パケット中に複数のフレームに対応す
る再生時刻管理情報が付加されているとき、前記再生時
刻管理情報が付加されたフレームの復号動画像信号を選
択的に出力するようにする。これにより、再生時刻管理
情報が付加されているフレームでのランダムアクセスが
可能となる。
る再生時刻管理情報が付加されているとき、前記再生時
刻管理情報が付加されたフレームの復号動画像信号を選
択的に出力するようにする。これにより、再生時刻管理
情報が付加されているフレームでのランダムアクセスが
可能となる。
【００２０】すなわち、本発明は、例えばＭＰＥＧ−４
を動画像符号化方式として採用する場合、動画像ビット
ストリームのヘッダ情報内にフレームの動画像ビットス
トリーム内部時刻管理情報が挿入されていることを利用
し、１フレームに対して、フレームの再生用タイムスタ
ンプがシステムパケットに付加されている場合は、タイ
ムスタンプを再生時刻情報として採用し、フレームの再
生用タイムスタンプが付加されていない場合は、動画像
ビットストリームのヘッダ情報内にある復号時刻情報を
採用することを特徴とするものである。
を動画像符号化方式として採用する場合、動画像ビット
ストリームのヘッダ情報内にフレームの動画像ビットス
トリーム内部時刻管理情報が挿入されていることを利用
し、１フレームに対して、フレームの再生用タイムスタ
ンプがシステムパケットに付加されている場合は、タイ
ムスタンプを再生時刻情報として採用し、フレームの再
生用タイムスタンプが付加されていない場合は、動画像
ビットストリームのヘッダ情報内にある復号時刻情報を
採用することを特徴とするものである。
【００２１】
【発明の実施の形態】以下、図面を参照して本発明の実
施の形態を詳細に説明する。
施の形態を詳細に説明する。
【００２２】図１は本発明に係るマルチメディア情報受
信装置の一実施形態として、携帯電話機に本発明を適用
した場合の全体構成を示すブロック図である。この携帯
電話機ＭＳは、無線部１と、ベースバンド部２と、入出
力部３と、電源部４とから構成される。
信装置の一実施形態として、携帯電話機に本発明を適用
した場合の全体構成を示すブロック図である。この携帯
電話機ＭＳは、無線部１と、ベースバンド部２と、入出
力部３と、電源部４とから構成される。
【００２３】同図において、基地局（図示せず）から移
動通信システム用の無線回線を介して到来した無線周波
信号は、アンテナ１１で受信されたのちアンテナ共用器
（ＤＵＰ）１２を介して受信回路（ＲＸ）１３に入力さ
れる。受信回路１３は、高周波増幅器、周波数変換器及
び復調器を備える。そして、上記無線信号を低雑音増幅
器で低雑音増幅したのち、周波数変換器において周波数
シンセサイザ（ＳＹＮ）１４から発生された受信局部発
振信号とミキシングして受信中間周波信号又は受信ベー
スバンド信号に周波数変換し、その出力信号を復調器で
ディジタル復調する。復調方式としては、例えばＱＰＳ
Ｋ方式に対応した直交復調方式が用いられる。なお、上
記周波数シンセサイザ１４から発生される受信局部発振
信号周波数は、ベースバンド部２に設けられた主制御部
２１から指示される。
動通信システム用の無線回線を介して到来した無線周波
信号は、アンテナ１１で受信されたのちアンテナ共用器
（ＤＵＰ）１２を介して受信回路（ＲＸ）１３に入力さ
れる。受信回路１３は、高周波増幅器、周波数変換器及
び復調器を備える。そして、上記無線信号を低雑音増幅
器で低雑音増幅したのち、周波数変換器において周波数
シンセサイザ（ＳＹＮ）１４から発生された受信局部発
振信号とミキシングして受信中間周波信号又は受信ベー
スバンド信号に周波数変換し、その出力信号を復調器で
ディジタル復調する。復調方式としては、例えばＱＰＳ
Ｋ方式に対応した直交復調方式が用いられる。なお、上
記周波数シンセサイザ１４から発生される受信局部発振
信号周波数は、ベースバンド部２に設けられた主制御部
２１から指示される。
【００２４】上記復調器から出力された復調信号はベー
スバンド部２に入力される。ベースバンド部２は、主制
御部２１と、多重分離部２２と、音声符号復号部（以後
音声コーデックと呼称する）２３と、画像処理部２４
と、ＬＣＤ制御部２５と、システムタイムクロック部
（ＳＴＣ部）２６とを備えている。システムタイムクロ
ックとは、受信側内部の基準クロックで、例えば２７Ｍ
Ｈｚのクロックであり、位相を調整して受信側との同期
をとることができるようになっている。
スバンド部２に入力される。ベースバンド部２は、主制
御部２１と、多重分離部２２と、音声符号復号部（以後
音声コーデックと呼称する）２３と、画像処理部２４
と、ＬＣＤ制御部２５と、システムタイムクロック部
（ＳＴＣ部）２６とを備えている。システムタイムクロ
ックとは、受信側内部の基準クロックで、例えば２７Ｍ
Ｈｚのクロックであり、位相を調整して受信側との同期
をとることができるようになっている。
【００２５】上記復調信号は、主制御部２１において制
御情報であるかマルチメディア情報であるかが識別さ
れ、マルチメディア情報であれば多重分離部２２に供給
されてここで音声データと画像データとに分離され、そ
れぞれタイムスタンプと共に出力される。
御情報であるかマルチメディア情報であるかが識別さ
れ、マルチメディア情報であれば多重分離部２２に供給
されてここで音声データと画像データとに分離され、そ
れぞれタイムスタンプと共に出力される。
【００２６】音声データは音声コーデック２３に供給さ
れ、音声復号された後、システムタイムクロック部２６
から供給されるクロックと音声パケットに付加されてい
るタイムスタンプ（ＰＴＳ）に基づいて入出力部３のス
ピーカ３２から出力される。また、画像データは画像処
理部２４に供給され、画像復号された後、システムタイ
ムクロック部２６から供給されるクロックと画像データ
パケットに付加されているタイムスタンプ（ＰＴＳ）に
基づいてＬＣＤ制御部２５を介して入出力部３のＬＣＤ
３４に供給され表示される。
れ、音声復号された後、システムタイムクロック部２６
から供給されるクロックと音声パケットに付加されてい
るタイムスタンプ（ＰＴＳ）に基づいて入出力部３のス
ピーカ３２から出力される。また、画像データは画像処
理部２４に供給され、画像復号された後、システムタイ
ムクロック部２６から供給されるクロックと画像データ
パケットに付加されているタイムスタンプ（ＰＴＳ）に
基づいてＬＣＤ制御部２５を介して入出力部３のＬＣＤ
３４に供給され表示される。
【００２７】尚、上記ＬＣＤ３４には、主制御部２１か
ら出力された自装置の動作状態を表す種々情報、例えば
電話帳や受信電界強度検出値、バッテリの残量なども表
示される。
ら出力された自装置の動作状態を表す種々情報、例えば
電話帳や受信電界強度検出値、バッテリの残量なども表
示される。
【００２８】一方、入出力部３のマイクロホン３１から
出力されたユーザの送話音声信号は、ベースバンド部２
の音声コーデック２３に入力され、ここで音声符号化さ
れたのち多重分離部２２に入力される。またカメラ（Ｃ
ＡＭ）３３から出力された画像信号は、ベースバンド部
２の画像処理部２４に入力され、ここでＭＰＥＧ−４に
よる画像符号化処理が施された後、上記多重分離部２２
に入力される。多重分離部２２では、上記符号化された
音声データと画像データとがＭＰＥＧ−２システムで規
定される所定のフォーマットで多重化される。この多重
化された送信データは主制御部２１から無線部１の送信
回路（ＴＸ）１５に入力される。
出力されたユーザの送話音声信号は、ベースバンド部２
の音声コーデック２３に入力され、ここで音声符号化さ
れたのち多重分離部２２に入力される。またカメラ（Ｃ
ＡＭ）３３から出力された画像信号は、ベースバンド部
２の画像処理部２４に入力され、ここでＭＰＥＧ−４に
よる画像符号化処理が施された後、上記多重分離部２２
に入力される。多重分離部２２では、上記符号化された
音声データと画像データとがＭＰＥＧ−２システムで規
定される所定のフォーマットで多重化される。この多重
化された送信データは主制御部２１から無線部１の送信
回路（ＴＸ）１５に入力される。
【００２９】送信回路１５は、変調器、周波数変換器及
び送信電力増幅器を備える。上記送信データは、変調器
でディジタル変調されたのち、周波数変換器により周波
数シンセサイザ１４から発生された送信局部発振信号と
ミキシングされて無線周波信号に周波数変換される。変
調方式としては、ＱＰＳＫ方式が用いられる。そして、
この生成された送信無線周波信号は、送信電力増幅器で
所定の送信レベルに増幅されたのち、アンテナ共用器１
２を介してアンテナ１１に供給され、このアンテナ１１
から図示しない基地局に向け送信される。
び送信電力増幅器を備える。上記送信データは、変調器
でディジタル変調されたのち、周波数変換器により周波
数シンセサイザ１４から発生された送信局部発振信号と
ミキシングされて無線周波信号に周波数変換される。変
調方式としては、ＱＰＳＫ方式が用いられる。そして、
この生成された送信無線周波信号は、送信電力増幅器で
所定の送信レベルに増幅されたのち、アンテナ共用器１
２を介してアンテナ１１に供給され、このアンテナ１１
から図示しない基地局に向け送信される。
【００３０】尚、電源部４には、リチウムイオン電池等
のバッテリ４１と、このバッテリ４１を充電するための
充電回路４２と、電圧生成回路（ＰＳ）４３とが設けら
れている。電圧生成回路４３は、例えばＤＣ／ＤＣコン
バータからなり、バッテリ４１の出力電圧をもとに所定
の電源電圧Ｖccを生成する。
のバッテリ４１と、このバッテリ４１を充電するための
充電回路４２と、電圧生成回路（ＰＳ）４３とが設けら
れている。電圧生成回路４３は、例えばＤＣ／ＤＣコン
バータからなり、バッテリ４１の出力電圧をもとに所定
の電源電圧Ｖccを生成する。
【００３１】また入出力部４には、操作時及び通信時に
ＬＣＤ３４及びキー入力部３５を照明するための照明器
３６が設けられている。この照明器３６は、例えばバッ
クライト又はイルミネーションと呼ばれる。
ＬＣＤ３４及びキー入力部３５を照明するための照明器
３６が設けられている。この照明器３６は、例えばバッ
クライト又はイルミネーションと呼ばれる。
【００３２】また主制御部２１は、マイクロプロセッ
サ、ＲＯＭ及びＲＡＭなどからなる内部メモリを備えた
もので、無線チャネルの接続制御や通信リンク確立後の
通信制御等、通常の制御機能を備えている。
サ、ＲＯＭ及びＲＡＭなどからなる内部メモリを備えた
もので、無線チャネルの接続制御や通信リンク確立後の
通信制御等、通常の制御機能を備えている。
【００３３】図２は、上記画像処理部２４に本発明を適
用した場合の具体的な構成を示すブロック図である。
用した場合の具体的な構成を示すブロック図である。
【００３４】図２において、上記カメラ３３から出力さ
れた動画像信号は、画像入力部２４１でディジタル化さ
れた後、フレームメモリ２４２に記憶される。動画像信
号符号化部２４３は、フレームメモリ２４２に記憶され
た動画像データをＭＰＥＧ−４の動画像符号化方式で圧
縮符号化し、フレーム毎にヘッダ情報としてタイムスタ
ンプを付加して動画像ビットストリームを生成する。こ
の動画像符号化部２４３から出力される動画像ビットス
トリームは出力バッファ２４４を介して多重分離部２２
に供給され、音声コーデック２３で符号化されたマイク
入力の音声ビットストリームとＭＰＥＧ−２システムに
準拠した形式で多重されて、マルチメディア情報として
送信される。
れた動画像信号は、画像入力部２４１でディジタル化さ
れた後、フレームメモリ２４２に記憶される。動画像信
号符号化部２４３は、フレームメモリ２４２に記憶され
た動画像データをＭＰＥＧ−４の動画像符号化方式で圧
縮符号化し、フレーム毎にヘッダ情報としてタイムスタ
ンプを付加して動画像ビットストリームを生成する。こ
の動画像符号化部２４３から出力される動画像ビットス
トリームは出力バッファ２４４を介して多重分離部２２
に供給され、音声コーデック２３で符号化されたマイク
入力の音声ビットストリームとＭＰＥＧ−２システムに
準拠した形式で多重されて、マルチメディア情報として
送信される。
【００３５】ここで、上記多重分離部２２では、１フレ
ーム毎、または複数フレーム毎にパケット化してＰＥＳ
パケットを生成する。このとき、ＰＥＳパケット中に音
声と同期した再生出力用のタイムスタンプ（ＰＴＳ）が
付加される。その方法としては、動画像ビットストリー
ムをVOP（フレーム）単位でPESパケット化する場合と、
複数のVOPフレーム単位でPESパケット化する場合があ
る。
ーム毎、または複数フレーム毎にパケット化してＰＥＳ
パケットを生成する。このとき、ＰＥＳパケット中に音
声と同期した再生出力用のタイムスタンプ（ＰＴＳ）が
付加される。その方法としては、動画像ビットストリー
ムをVOP（フレーム）単位でPESパケット化する場合と、
複数のVOPフレーム単位でPESパケット化する場合があ
る。
【００３６】また、上記多重分離部２２では、ＰＥＳパ
ケットを固定長のＴＳ（Transport Stream）パケットに
変換する。このＴＳパケットのヘッダには、送信側と受
信側のシステムクロックの時刻同期を図るためのシステ
ム時刻参照値（PＣＲ：ProgramClock Reference）が付
加される。
ケットを固定長のＴＳ（Transport Stream）パケットに
変換する。このＴＳパケットのヘッダには、送信側と受
信側のシステムクロックの時刻同期を図るためのシステ
ム時刻参照値（PＣＲ：ProgramClock Reference）が付
加される。
【００３７】上記のようにして生成されたマルチメディ
ア情報が受信された場合、多重分離部２２は受信したＴ
ＳパケットからＰＥＳパケットを復元し、各ＰＥＳパケ
ットから音声ビットストリームと動画像ビットストリー
ムとを分離し、音声ビットストリームを音声コーデック
２３に送出してスピーカ３２に再生させ、動画像ビット
ストリームを画像処理部２４に送出する。このとき、Ｐ
ＥＳパケット中に付加されたタイムスタンプ（ＰＴＳ）
を動画像ビットストリームに付加しておく。
ア情報が受信された場合、多重分離部２２は受信したＴ
ＳパケットからＰＥＳパケットを復元し、各ＰＥＳパケ
ットから音声ビットストリームと動画像ビットストリー
ムとを分離し、音声ビットストリームを音声コーデック
２３に送出してスピーカ３２に再生させ、動画像ビット
ストリームを画像処理部２４に送出する。このとき、Ｐ
ＥＳパケット中に付加されたタイムスタンプ（ＰＴＳ）
を動画像ビットストリームに付加しておく。
【００３８】この付加の方法は、例えば動画像ビットス
トリームをフレーム単位でＰＥＳパケットとする場合
に、図３（ａ）に示すように全てのＶＯＰヘッダ情報
（ＶＯＰスタートコード）の前にタイムスタンプ（ＰＴ
Ｓ）を付加する方法、ｎフレームの動画像ビットストリ
ームをまとめてＰＥＳパケットとする場合に、図３
（ｂ）に示すように最初のＶＯＰヘッダ情報の前にのみ
タイムスタンプ（ＰＴＳ）を付加する方法、図３（ｃ）
に示すように途中のＶＯＰヘッダ情報の前にもタイムス
タンプ（ＰＴＳ）を付加する方法がある。尚、図３にお
いて、ＶＯＰデータは１フレーム分の動画像ビットスト
リームを意味する。
トリームをフレーム単位でＰＥＳパケットとする場合
に、図３（ａ）に示すように全てのＶＯＰヘッダ情報
（ＶＯＰスタートコード）の前にタイムスタンプ（ＰＴ
Ｓ）を付加する方法、ｎフレームの動画像ビットストリ
ームをまとめてＰＥＳパケットとする場合に、図３
（ｂ）に示すように最初のＶＯＰヘッダ情報の前にのみ
タイムスタンプ（ＰＴＳ）を付加する方法、図３（ｃ）
に示すように途中のＶＯＰヘッダ情報の前にもタイムス
タンプ（ＰＴＳ）を付加する方法がある。尚、図３にお
いて、ＶＯＰデータは１フレーム分の動画像ビットスト
リームを意味する。
【００３９】また、多重分離部２２は受信したＴＳパケ
ットのシステム時刻参照値（PＣＲ）をSTC部２６へ送
る。STC部は、送られたPCRから自身のクロックを送信側
に同期した形に補正し、音声コーデック２３、画像処理
部２４に供給し、同期再生の基準とさせる。
ットのシステム時刻参照値（PＣＲ）をSTC部２６へ送
る。STC部は、送られたPCRから自身のクロックを送信側
に同期した形に補正し、音声コーデック２３、画像処理
部２４に供給し、同期再生の基準とさせる。
【００４０】画像処理部２４では、多重分離部２２から
の動画像ビットストリーム及びタイムスタンプ（ＰＴ
Ｓ）は入力バッファ２４５に蓄積される。動画像信号復
号部２４６は入力バッファ２４５に蓄えられた動画像ビ
ットストリーム及びタイムスタンプ（ＰＴＳ）を復号
し、復号されたフレームに対応したタイムスタンプ（Ｐ
ＴＳ）及び動画像ビットストリームのヘッダ情報に含ま
れる再生時刻を示すタイムスタンプの情報を時間制御部
２４７に与え、復号した画像データをフレームメモリ２
４８に蓄える。
の動画像ビットストリーム及びタイムスタンプ（ＰＴ
Ｓ）は入力バッファ２４５に蓄積される。動画像信号復
号部２４６は入力バッファ２４５に蓄えられた動画像ビ
ットストリーム及びタイムスタンプ（ＰＴＳ）を復号
し、復号されたフレームに対応したタイムスタンプ（Ｐ
ＴＳ）及び動画像ビットストリームのヘッダ情報に含ま
れる再生時刻を示すタイムスタンプの情報を時間制御部
２４７に与え、復号した画像データをフレームメモリ２
４８に蓄える。
【００４１】また、多重分離部２２から与えられるSCR
により補正されたシステムタイムクロック（ＳＴＣ）は
時間制御部２４７に与えられる。この時間制御部２４７
はシステムタイムクロック（ＳＴＣ）が動画像信号復号
部２４６からの再生出力用タイムスタンプ（ＰＴＳ）と
一致した時刻または動画像自身用のタイムスタンプに相
当する時間だけ過ぎた時刻に画像出力部２４９へ画像デ
ータの出力要求を送出する。
により補正されたシステムタイムクロック（ＳＴＣ）は
時間制御部２４７に与えられる。この時間制御部２４７
はシステムタイムクロック（ＳＴＣ）が動画像信号復号
部２４６からの再生出力用タイムスタンプ（ＰＴＳ）と
一致した時刻または動画像自身用のタイムスタンプに相
当する時間だけ過ぎた時刻に画像出力部２４９へ画像デ
ータの出力要求を送出する。
【００４２】画像出力部２４９は、時間制御部２４７か
ら出力要求を受け付けると、フレームメモリ２４８から
画像データを読み出し、ＬＣＤ制御部２５を通じてＬＣ
Ｄ３４に表示させ、時間制御部２４７へ出力完了通知を
送出する。時間制御部２４７は画像出力部２４９から出
力完了通知を受け付けると、入力バッファ２４５ヘの読
み出し要求を送出し、動画像信号復号部２４６に次のフ
レームの復号を開始させる。
ら出力要求を受け付けると、フレームメモリ２４８から
画像データを読み出し、ＬＣＤ制御部２５を通じてＬＣ
Ｄ３４に表示させ、時間制御部２４７へ出力完了通知を
送出する。時間制御部２４７は画像出力部２４９から出
力完了通知を受け付けると、入力バッファ２４５ヘの読
み出し要求を送出し、動画像信号復号部２４６に次のフ
レームの復号を開始させる。
【００４３】上記構成による画像処理部２４において、
以下、本発明による動画像再生処理として第１乃至第３
の実施形態を説明する。
以下、本発明による動画像再生処理として第１乃至第３
の実施形態を説明する。
【００４４】まず、第１の実施形態として、フレーム毎
にＰＥＳパケットが構成され、図３（ａ）に示すように
全てのＶＯＰヘッダ情報（ＶＯＰスタートコード）の前
にタイムスタンプ（ＰＴＳ）が付加されている場合を考
える。図４に本実施形態の画像データ出力タイミング図
を示す。
にＰＥＳパケットが構成され、図３（ａ）に示すように
全てのＶＯＰヘッダ情報（ＶＯＰスタートコード）の前
にタイムスタンプ（ＰＴＳ）が付加されている場合を考
える。図４に本実施形態の画像データ出力タイミング図
を示す。
【００４５】各ＰＥＳパケット中に付加されたタイムス
タンプをそれぞれＰＴＳ＃０，ＰＴＳ＃１…とし、それ
から得られる再生時刻をＴＳ０，ＴＳ１…する。この場
合、全てのフレームについてタイムスタンプ（ＰＴＳ）
が得られるので、システムタイムクロック（ＳＴＣ）に
よって示される時刻ｔがｔ≧ＴＳ０（＝Ｔ０）でフレー
ム♯０の画像（ＶＯＰデータの復号出力画像）を表示
し、ｔ≧ＴＳ１（＝Ｔ１）でフレーム♯１の画像を表示
する。
タンプをそれぞれＰＴＳ＃０，ＰＴＳ＃１…とし、それ
から得られる再生時刻をＴＳ０，ＴＳ１…する。この場
合、全てのフレームについてタイムスタンプ（ＰＴＳ）
が得られるので、システムタイムクロック（ＳＴＣ）に
よって示される時刻ｔがｔ≧ＴＳ０（＝Ｔ０）でフレー
ム♯０の画像（ＶＯＰデータの復号出力画像）を表示
し、ｔ≧ＴＳ１（＝Ｔ１）でフレーム♯１の画像を表示
する。
【００４６】次に、本発明の第２の実施形態として、ｎ
個のフレームをまとめてＰＥＳパケットを構成し、図３
（ｂ）に示すように最初のＶＯＰヘッダ情報の前にのみ
タイムスタンプ（ＰＴＳ）が付加されている場合を考え
る。図５に本実施形態の画像データ出力タイミング図を
示す。
個のフレームをまとめてＰＥＳパケットを構成し、図３
（ｂ）に示すように最初のＶＯＰヘッダ情報の前にのみ
タイムスタンプ（ＰＴＳ）が付加されている場合を考え
る。図５に本実施形態の画像データ出力タイミング図を
示す。
【００４７】先頭フレーム♯０のＶＯＰヘッダ情報の前
に付加された再生用タイムスタンプＰＴＳ＃０による時
刻をＴＳ０、フレーム♯０のＶＯＰヘッダ情報内のタイ
ムスタンプB−ＴＳ＃０による時刻をＴＢ０、次のフレ
ーム♯１のＶOＰヘッダ情報内のタイムスタンプB−ＴＳ
＃１による時刻をＴＢ１とする。
に付加された再生用タイムスタンプＰＴＳ＃０による時
刻をＴＳ０、フレーム♯０のＶＯＰヘッダ情報内のタイ
ムスタンプB−ＴＳ＃０による時刻をＴＢ０、次のフレ
ーム♯１のＶOＰヘッダ情報内のタイムスタンプB−ＴＳ
＃１による時刻をＴＢ１とする。
【００４８】まず、フレーム♯０については再生時刻Ｔ
Ｓ０を決めるタイムスタンプＰＴＳ＃１が得られるの
で、基準時刻ｔがｔ≧ＴＳ０（＝Ｔ０）でフレーム♯０
の画像を表示する。次に、フレーム＃１については再生
用タイムスタンプＰＴＳが得られないので、フレーム＃
１のＶＯＰヘッダ情報中の復号用タイムスタンプＢ−Ｔ
Ｓ＃１を利用する。この場合、フレーム♯１の表示時刻
Ｔ１を Ｔ１＝ＴＳ０＋（ＴＢ１−ＴＢ０） とし、ｔ≧Ｔ１でフレーム＃１の画像を表示する。以
後、同様にして、最終的にフレーム＃ｎのＶＯＰヘッダ
情報内の復号用タイムスタンプＢ−ＴＳ＃ｎによる時刻
をＴＢｎとすると、フレーム＃ｎの表示時刻Ｔｎ（ｎは
ｎ≧１の整数）は Ｔｎ＝ＴＳ０＋（ＴＢｎ−ＴＢ０） となり、ｔ≧Ｔｎでフレーム＃ｎの画像を表示する。
Ｓ０を決めるタイムスタンプＰＴＳ＃１が得られるの
で、基準時刻ｔがｔ≧ＴＳ０（＝Ｔ０）でフレーム♯０
の画像を表示する。次に、フレーム＃１については再生
用タイムスタンプＰＴＳが得られないので、フレーム＃
１のＶＯＰヘッダ情報中の復号用タイムスタンプＢ−Ｔ
Ｓ＃１を利用する。この場合、フレーム♯１の表示時刻
Ｔ１を Ｔ１＝ＴＳ０＋（ＴＢ１−ＴＢ０） とし、ｔ≧Ｔ１でフレーム＃１の画像を表示する。以
後、同様にして、最終的にフレーム＃ｎのＶＯＰヘッダ
情報内の復号用タイムスタンプＢ−ＴＳ＃ｎによる時刻
をＴＢｎとすると、フレーム＃ｎの表示時刻Ｔｎ（ｎは
ｎ≧１の整数）は Ｔｎ＝ＴＳ０＋（ＴＢｎ−ＴＢ０） となり、ｔ≧Ｔｎでフレーム＃ｎの画像を表示する。
【００４９】この実施形態の場合、ＴＳ０が動画像を表
示するための初期遅延時間と考えることができるので、
オーディオ信号と動画像信号間で同期を取って多重化す
るシステムにおいて、初期遅延時間を正確に設定するこ
とが可能となる。
示するための初期遅延時間と考えることができるので、
オーディオ信号と動画像信号間で同期を取って多重化す
るシステムにおいて、初期遅延時間を正確に設定するこ
とが可能となる。
【００５０】本発明の第３の実施形態として、ｎ個のフ
レームをまとめてＰＥＳパケットを構成し、図３（ｃ）
に示すように、途中のＶＯＰヘッダ情報の前にもタイム
スタンプ情報が付加されている場合を考える。この途中
のＶＯＰヘッダ情報の前というのは、例えば、２秒間等
の一定時間間隔でのＶＯＰヘッダ情報の前でもよく、Ｉ
ピクチャ（Ｉ−ＶＯＰ）のＶＯＰヘッダ情報の前として
もよい。また、ＭＰＥG−４の動画像ビットストリーム
は、Configuration Information（ＣＩ）と呼ばれる部
分とElementary Stream（ＥＳ）と呼ばれる２つの部分
に大別され、ＣＩはＥＳに対して少なくとも１つ存在す
るが、動画像ビットストリーム内にＣＩは何度挿入され
てもよく、このＣＩが挿入された後のＶＯＰヘッダ情報
の前としてもよい。
レームをまとめてＰＥＳパケットを構成し、図３（ｃ）
に示すように、途中のＶＯＰヘッダ情報の前にもタイム
スタンプ情報が付加されている場合を考える。この途中
のＶＯＰヘッダ情報の前というのは、例えば、２秒間等
の一定時間間隔でのＶＯＰヘッダ情報の前でもよく、Ｉ
ピクチャ（Ｉ−ＶＯＰ）のＶＯＰヘッダ情報の前として
もよい。また、ＭＰＥG−４の動画像ビットストリーム
は、Configuration Information（ＣＩ）と呼ばれる部
分とElementary Stream（ＥＳ）と呼ばれる２つの部分
に大別され、ＣＩはＥＳに対して少なくとも１つ存在す
るが、動画像ビットストリーム内にＣＩは何度挿入され
てもよく、このＣＩが挿入された後のＶＯＰヘッダ情報
の前としてもよい。
【００５１】図６に本実施形態の画像データ出力タイミ
ング図を示す。例えば第２に実施形態のようにフレーム
＃０にタイムスタンプ（ＰＴＳ０）が付加され、さらに
フレーム＃ｍ（ｍは１＜ｍ＜ｎの整数）のＶOＰヘッダ
情報の前にタイムスタンプ（ＴＳｍ）が付加されていた
場合、フレーム＃ｍ-1の表示時刻をＴｍ-1、フレーム＃
ｍの表示時刻をＴｍ、フレーム＃ｎの表示時刻をＴｎと
すると、 Ｔｍ-１＝ＴＳ０＋（ＴＢｍ-１−ＴＢ０） Ｔｍ＝ＴＳｍ Ｔｎ＝ＴＳｍ＋（ＴＢｎ−ＴＢｍ） とする。この場合、フレーム＃ｍ-１では、フレーム＃
０の再生用タイムスタンプＰＴＳ＃０による時刻ＴＳ０
とフレーム＃ｍ-１のＶＯＰヘッダ情報内の復号用タイ
ムスタンプＢ−ＴＳ＃ｍ-１による時刻ＴＢｍ-１を基準
として表示時刻を計算し、ｔ≧Ｔｍ-１でフレーム＃ｍ-
１の画像を表示する。また、フレーム＃ｍでは、再生用
タイムスタンプＰＴＳ＃ｍによる時刻ＴＳｍを表示時刻
とし、ｔ≧Ｔｍでフレーム＃ｍの画像を表示する。ま
た、フレーム＃ｎでは、フレーム＃ｍの再生用タイムス
タンプＰＴＳｍとフレーム＃ｎのＶＯＰヘッダ情報内の
時間情報による時刻ＴＢｎを基準として表示時刻を計算
し、ｔ≧Ｔｎでフレーム＃ｎの画像を表示する。
ング図を示す。例えば第２に実施形態のようにフレーム
＃０にタイムスタンプ（ＰＴＳ０）が付加され、さらに
フレーム＃ｍ（ｍは１＜ｍ＜ｎの整数）のＶOＰヘッダ
情報の前にタイムスタンプ（ＴＳｍ）が付加されていた
場合、フレーム＃ｍ-1の表示時刻をＴｍ-1、フレーム＃
ｍの表示時刻をＴｍ、フレーム＃ｎの表示時刻をＴｎと
すると、 Ｔｍ-１＝ＴＳ０＋（ＴＢｍ-１−ＴＢ０） Ｔｍ＝ＴＳｍ Ｔｎ＝ＴＳｍ＋（ＴＢｎ−ＴＢｍ） とする。この場合、フレーム＃ｍ-１では、フレーム＃
０の再生用タイムスタンプＰＴＳ＃０による時刻ＴＳ０
とフレーム＃ｍ-１のＶＯＰヘッダ情報内の復号用タイ
ムスタンプＢ−ＴＳ＃ｍ-１による時刻ＴＢｍ-１を基準
として表示時刻を計算し、ｔ≧Ｔｍ-１でフレーム＃ｍ-
１の画像を表示する。また、フレーム＃ｍでは、再生用
タイムスタンプＰＴＳ＃ｍによる時刻ＴＳｍを表示時刻
とし、ｔ≧Ｔｍでフレーム＃ｍの画像を表示する。ま
た、フレーム＃ｎでは、フレーム＃ｍの再生用タイムス
タンプＰＴＳｍとフレーム＃ｎのＶＯＰヘッダ情報内の
時間情報による時刻ＴＢｎを基準として表示時刻を計算
し、ｔ≧Ｔｎでフレーム＃ｎの画像を表示する。
【００５２】この実施形態の場合、特に移動体通信（無
線通信）等の伝送品質に低い伝送路で利用したとき、動
画像ビットストリーム内のタイムスタンプに誤りが混入
され、誤った時刻情報で画像が表示されてしまうことが
考えられるが、ＰＥＳパケットの途中で付加された再生
用タイムスタンプ（ＰＴＳ）を表示時刻とすることによ
り、誤った時刻情報がより信頼性の高いシステム時刻情
報にリセットされることになる。
線通信）等の伝送品質に低い伝送路で利用したとき、動
画像ビットストリーム内のタイムスタンプに誤りが混入
され、誤った時刻情報で画像が表示されてしまうことが
考えられるが、ＰＥＳパケットの途中で付加された再生
用タイムスタンプ（ＰＴＳ）を表示時刻とすることによ
り、誤った時刻情報がより信頼性の高いシステム時刻情
報にリセットされることになる。
【００５３】また、本実施形態のように、タイムスタン
プ情報を動画像ビットストリーム内の途中に挿入する場
合、動画像ビットストリーム内のタイムスタンプ情報を
検索し、その時点から復号することが可能となるため、
動画像ビットストリーム内のタイムスタンプ情報が付加
されたフレームに対してランダムアクセスが可能とな
る。
プ情報を動画像ビットストリーム内の途中に挿入する場
合、動画像ビットストリーム内のタイムスタンプ情報を
検索し、その時点から復号することが可能となるため、
動画像ビットストリーム内のタイムスタンプ情報が付加
されたフレームに対してランダムアクセスが可能とな
る。
【００５４】したがって、以上の実施形態による画像処
理部の復号再生処理構成によれば、フレーム毎に再生用
タイムスタンプ（ＰＴＳ）が動画像ビットストリームに
付加されている場合は、動画像ビットストリームのヘッ
ダ情報に付加されているタイムスタンプではなく、再生
用タイムスタンプ（ＰＴＳ）を再生時刻情報として採用
し、再生用タイムスタンプ（ＰＴＳ）が動画像ビットス
トリームに付加されていない場合は、動画像ビットスト
リームのヘッダ情報に付加されているタイムスタンプか
らフレームの再生時刻情報を換算するようにしているの
で、必ずしもフレーム毎にタイムスタンプを持つ必要が
なくなり、動画像信号の１フレームに対するオーバヘッ
ドを軽減することが可能となる。また、初期遅延時間の
設定及び再生用タイムスタンプ（ＰＴＳ）情報が付加さ
れたフレームでのランダムアクセスが可能という効果も
得られる。
理部の復号再生処理構成によれば、フレーム毎に再生用
タイムスタンプ（ＰＴＳ）が動画像ビットストリームに
付加されている場合は、動画像ビットストリームのヘッ
ダ情報に付加されているタイムスタンプではなく、再生
用タイムスタンプ（ＰＴＳ）を再生時刻情報として採用
し、再生用タイムスタンプ（ＰＴＳ）が動画像ビットス
トリームに付加されていない場合は、動画像ビットスト
リームのヘッダ情報に付加されているタイムスタンプか
らフレームの再生時刻情報を換算するようにしているの
で、必ずしもフレーム毎にタイムスタンプを持つ必要が
なくなり、動画像信号の１フレームに対するオーバヘッ
ドを軽減することが可能となる。また、初期遅延時間の
設定及び再生用タイムスタンプ（ＰＴＳ）情報が付加さ
れたフレームでのランダムアクセスが可能という効果も
得られる。
【００５５】尚、以上の実施形態は、本発明を携帯電話
機の画像処理部に適用した場合の例であるが、本発明は
これに限定されるものではなく、ＭＰＥＧ−４システム
またはこれに類似する規格を採用するマルチメディア情
報伝送システムの受信装置にも適用可能である。
機の画像処理部に適用した場合の例であるが、本発明は
これに限定されるものではなく、ＭＰＥＧ−４システム
またはこれに類似する規格を採用するマルチメディア情
報伝送システムの受信装置にも適用可能である。
【００５６】
【発明の効果】以上のように、１フレームの動画像ビッ
トストリーム長が可変であり、全てのフレームの動画像
ビットストリームに復号用の時刻管理情報が付加される
動画像符号化方式が採用され、１フレームの動画像ビッ
トストリーム毎にパケット化されている場合、複数フレ
ームの動画像ビットストリームがまとめられてパケット
化されている場合のいずれの場合でも、全フレームの動
画像ビットストリームの正確な再生時刻を求めることの
できる動画像復号再生装置と、この装置を用いて動画像
と音声を正確に同期再生することのできるマルチメディ
ア情報受信装置を提供することができる。
トストリーム長が可変であり、全てのフレームの動画像
ビットストリームに復号用の時刻管理情報が付加される
動画像符号化方式が採用され、１フレームの動画像ビッ
トストリーム毎にパケット化されている場合、複数フレ
ームの動画像ビットストリームがまとめられてパケット
化されている場合のいずれの場合でも、全フレームの動
画像ビットストリームの正確な再生時刻を求めることの
できる動画像復号再生装置と、この装置を用いて動画像
と音声を正確に同期再生することのできるマルチメディ
ア情報受信装置を提供することができる。
【図１】 本発明に係るマルチメディア情報受信装置の
一実施形態として、携帯電話機に本発明を適用した場合
の全体構成を示すブロック図。
一実施形態として、携帯電話機に本発明を適用した場合
の全体構成を示すブロック図。
【図２】 図１の画像処理部に本発明を適用した場合の
具体的な構成を示すブロック図。
具体的な構成を示すブロック図。
【図３】 図１の多重分離部において、ＰＥＳパケット
生成の際に、動画像ビットストリームに再生用タイムス
タンプを付加する３種類の方法を説明するための動画像
ビットストリーム構成を示す図。
生成の際に、動画像ビットストリームに再生用タイムス
タンプを付加する３種類の方法を説明するための動画像
ビットストリーム構成を示す図。
【図４】 本発明の第１の実施形態を説明するための画
像データ出力タイミング図。
像データ出力タイミング図。
【図５】 本発明の第２の実施形態を説明するための画
像データ出力タイミング図。
像データ出力タイミング図。
【図６】 本発明の第３の実施形態を説明するための画
像データ出力タイミング図。
像データ出力タイミング図。
ＭＳ…携帯電話機 １…無線部 １１…アンテナ １２…アンテナ共用器（ＤＵＰ） １３…受信回路（ＲＸ） １４…周波数シンセサイザ（ＳＹＮ） １５…送信回路（ＴＸ） ２…ベースバンド部 ２１…主制御部 ２２…多重分離部 ２３…音声符号復号部（音声コーデック） ２４…画像処理部 ２４１…画像入力部 ２４２…フレームメモリ ２４３…動画像信号符号化部 ２４４…出力バッファ ２４５…入力バッファ ２４６…動画像信号復号部 ２４７…時間制御部 ２４８…フレームメモリ ２４９…画像出力部 ２５…ＬＣＤ制御部 ２６…システムタイムクロック部（ＳＴＣ部） ３…入出力部 ３１…マイクロホン ３２…スピーカ ３３…カメラ（ＣＡＭ） ３４…ＬＣＤ ３５…キー入力部 ３６…照明器 ４…電源部 ４１…バッテリ ４２…充電回路 ４３…電圧生成回路（ＰＳ）
───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5C059 KK01 MA00 PP04 RB09 RB15 RC04 RC26 RC32 SS10 TA74 TB01 TC43 UA02 UA05 UA09 UA31 5K030 HA08 HB15 HB21 JT10 KA03 KA19 KA21 LA15 LE17
Claims (8)
- 【請求項１】 動画像信号を符号化した動画像ビットス
トリームのフレームヘッダに動画像ビットストリーム内
部時刻管理情報を付加し、１または複数のフレームの動
画像ビットストリームをパケット化し、そのパケット中
に少なくとも１以上のフレームに対応する再生時刻管理
情報を付加して伝送するシステムの動画像復号再生装置
において、 前記再生時刻管理情報が付加されているフレームの動画
像ビットストリームについては、その復号動画像信号を
前記再生時刻管理情報で指定される再生時刻に出力し、
前記再生時刻管理情報が付加されていないフレームの動
画像ビットストリームについては、そのフレーム以前に
ある再生時刻管理情報とそのフレームの動画像ビットス
トリームのヘッダに付加されている動画像ビットストリ
ーム内部時刻管理情報から再生時刻を求め、この再生時
刻にそのフレームの復号動画像信号を出力することを特
徴とする動画像復号再生装置。 - 【請求項２】 動画像信号を符号化した動画像ビットス
トリームのフレームヘッダに動画像ビットストリーム内
部時刻管理情報を付加し、１または複数のフレームの動
画像ビットストリームをパケット化し、そのパケット中
に少なくとも１以上のフレームに対応する再生時刻管理
情報を付加して伝送するシステムの動画像復号再生装置
において、 前記パケットから前記動画像ビットストリーム及び再生
時刻管理情報を分離する分離部と、 この分離部で分離された動画像ビットストリーム及び再
生時刻管理情報を蓄積する入力バッファ部と、 この入力バッファ部から１フレーム毎に動画像ビットス
トリーム及び再生時刻管理情報を読み出して復号し、そ
のフレームヘッダに付加された動画像ビットストリーム
内部時刻管理情報により指定される動画像独立時刻情報
と、そのフレームに対応する再生時刻管理情報があると
きは再生時刻管理情報により指定される再生時刻情報を
出力する動画像信号復号部と、 この動画像信号復号部で復号された動画像信号を記憶す
るフレームメモリ部と、 このフレームメモリ部に記憶された動画像信号を再生指
示に従って出力する画像出力部と、 前記動画像信号復号部から動画像独立時刻情報、再生時
刻情報を受け取り、前記再生時刻情報があるフレームに
ついてはその情報で指定される再生時刻に前記画像出力
部に動画像信号を出力するように指示し、前記再生時刻
情報がないフレームについてはそのフレーム以前にある
再生時刻管理情報とそのフレームの動画像ビットストリ
ームのヘッダに付加されている動画像独立時刻管理情報
から再生時刻を求め、この再生時刻に前記画像出力部に
動画像信号を出力するように指示する時間制御部とを具
備することを特徴とする動画像復号再生装置。 - 【請求項３】 前記再生時刻は、システムが持つ基準時
刻により管理することを特徴とする請求項１または２に
記載の動画像復号再生装置。 - 【請求項４】 前記パケット中に複数のフレームに対応
する再生時刻管理情報が付加されているとき、前記再生
時刻管理情報が付加されたフレームの復号動画像信号を
選択的に出力することを特徴とする請求項１または２に
記載の動画像復号再生装置。 - 【請求項５】 互いに関連する動画像信号及び音声信号
をそれぞれ符号化した動画像ビットストリーム及び音声
ビットストリームを、それぞれパケット化し多重して生
成されたマルチメディア情報を伝送するシステムに用い
られるマルチメディア情報受信装置であって、 前記マルチメディア情報の動画像パケットについては、
前記動画像ビットストリームのフレームヘッダに動画像
ビットストリーム内部時刻管理情報が付加され、１また
は複数のフレームの動画像ビットストリームがパケット
化され、そのパケット中に前記音声信号の再生と同期を
とるために少なくとも１以上のフレームに対応する再生
時刻管理情報が付加されているとき、 前記マルチメディア情報の各パケットから動画像ビット
ストリーム、音声ビットストリーム、動画像、音声各々
に対する再生時刻管理情報をそれぞれ分離する分離部
と、 この分離部で分離された音声ビットストリームを復号
し、復号された音声信号を音声に対する再生時刻に基づ
いて再生出力する音声復号再生部と、 前記分離部で分離された動画像ビットストリーム及び動
画像に対する再生時刻管理情報を取り込んで、前記動画
像に対する再生時刻管理情報が付加されているフレーム
の動画像ビットストリームについては、その復号動画像
信号を前記再生時刻管理情報で指定される再生時刻に出
力し、前記再生時刻管理情報が付加されていないフレー
ムの動画像ビットストリームについては、そのフレーム
以前にある再生時刻管理情報とそのフレームの動画像ビ
ットストリームのヘッダに付加されている動画像ビット
ストリーム内部時刻管理情報から再生時刻を求め、この
再生時刻にそのフレームの復号動画像信号を出力する動
画像復号再生部とを具備することを特徴とするマルチメ
ディア情報受信装置。 - 【請求項６】 前記動画像復号再生部は、 前記分離部で分離された動画像ビットストリーム及び再
生時刻管理情報を蓄積する入力バッファ部と、 この入力バッファ部から１フレーム毎に動画像ビットス
トリーム及び再生時刻管理情報を読み出して復号し、そ
のフレームヘッダに付加された動画像ビットストリーム
内部時刻管理情報により指定される動画像独立時刻情報
と、そのフレームに対応する再生時刻管理情報があると
きはその情報により指定される再生時刻情報を出力する
動画像信号復号部と、 この動画像信号復号部で復号された動画像信号を記憶す
るフレームメモリ部と、 このフレームメモリ部に記憶された動画像信号を再生指
示に従って出力する画像出力部と、 前記動画像信号復号部から動画像独立時刻情報、再生時
刻情報を受け取り、前記再生時刻情報があるフレームに
ついてはその情報で指定される再生時刻に前記画像出力
部に動画像信号を出力するように指示し、前記再生時刻
情報がないフレームについてはそのフレーム以前にある
再生時刻管理情報とそのフレームの動画像ビットストリ
ームのヘッダに付加されている動画像ビットストリーム
内部時刻管理情報から再生時刻を求め、この再生時刻に
前記画像出力部に動画像信号を出力するように指示する
時間制御部とを備えることを特徴とする請求項５記載の
マルチメディア情報再生装置。 - 【請求項７】 前記再生時刻は、システムが持つ基準時
刻により管理することを特徴とする請求項５に記載のマ
ルチメディア情報受信装置。 - 【請求項８】 前記パケット中に複数のフレームに対応
する再生時刻管理情報が付加されているとき、前記再生
時刻管理情報が付加されたフレームの復号動画像信号を
選択的に出力することを特徴とする請求項５に記載のマ
ルチメディア情報受信装置。
Priority Applications (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000305604A JP4208398B2 (ja) | 2000-10-05 | 2000-10-05 | 動画像復号再生装置、動画像復号再生方法及びマルチメディア情報受信装置 |
| US09/969,636 US6862045B2 (en) | 2000-10-05 | 2001-10-04 | Moving image decoding and reproducing apparatus, moving image decoding and reproducing method, time control method, computer program product for decoding and reproducing moving image and multimedia information receiving apparatus |
| EP20010123292 EP1195996B1 (en) | 2000-10-05 | 2001-10-05 | Apparatus, method and computer program product for decoding and reproducing moving images, time control method and multimedia information receiving apparatus |
| DE60135617T DE60135617D1 (de) | 2000-10-05 | 2001-10-05 | Vorrichtung, Verfahren und Computerprogrammprodukt zur Dekodierung und zum Reproduzieren von bewegten Bildern, Zeitkontrollverfahren und Empfänger für Multimediainformationen |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000305604A JP4208398B2 (ja) | 2000-10-05 | 2000-10-05 | 動画像復号再生装置、動画像復号再生方法及びマルチメディア情報受信装置 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2002118844A true JP2002118844A (ja) | 2002-04-19 |
| JP2002118844A5 JP2002118844A5 (ja) | 2009-01-08 |
| JP4208398B2 JP4208398B2 (ja) | 2009-01-14 |
Family
ID=18786430
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000305604A Expired - Fee Related JP4208398B2 (ja) | 2000-10-05 | 2000-10-05 | 動画像復号再生装置、動画像復号再生方法及びマルチメディア情報受信装置 |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US6862045B2 (ja) |
| EP (1) | EP1195996B1 (ja) |
| JP (1) | JP4208398B2 (ja) |
| DE (1) | DE60135617D1 (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006190213A (ja) * | 2005-01-07 | 2006-07-20 | Nippon Hoso Kyokai <Nhk> | メディア再生装置 |
| JP2009124570A (ja) * | 2007-11-16 | 2009-06-04 | Canon Inc | 映像処理装置、映像処理方法、映像処理プログラム及び記憶媒体 |
Families Citing this family (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4612171B2 (ja) * | 2000-10-27 | 2011-01-12 | 株式会社東芝 | 動画像復号再生モジュールと再生時刻管理プログラムとマルチメディア情報受信装置 |
| JP4806888B2 (ja) | 2002-07-19 | 2011-11-02 | ソニー株式会社 | 復号化装置及び復号化方法 |
| JP3958141B2 (ja) * | 2002-07-31 | 2007-08-15 | キヤノン株式会社 | 画像処理装置 |
| US7408660B1 (en) | 2002-08-08 | 2008-08-05 | Sprint Spectrum L.P. | Method and system for managing delivery of digital image files to image processing labs |
| US7466362B2 (en) * | 2002-10-22 | 2008-12-16 | Broadcom Corporation | Data rate management system and method for A/V decoder |
| JP2004221900A (ja) * | 2003-01-14 | 2004-08-05 | Sony Corp | 画像情報復号装置及び画像情報復号方法 |
| JP2004364211A (ja) * | 2003-06-09 | 2004-12-24 | Matsushita Electric Ind Co Ltd | 動画像復号化装置 |
| WO2005055607A1 (en) * | 2003-12-08 | 2005-06-16 | Electronics And Telecommunications Research Institute | System and method for encoding and decoding an image using bitstream map and recording medium thereof |
| CN1317637C (zh) * | 2004-01-20 | 2007-05-23 | 无敌科技股份有限公司 | 声音与影像的同步方法 |
| US7525578B1 (en) | 2004-08-26 | 2009-04-28 | Sprint Spectrum L.P. | Dual-location tagging of digital image files |
| US7424282B2 (en) * | 2004-08-26 | 2008-09-09 | Sprint Spectrum L.P. | Method and system for delivering photos to called destinations |
| US7424310B1 (en) | 2004-08-26 | 2008-09-09 | Sprint Spectrum L.P. | System, method, and apparatus for automatic transmission of recently captured images |
| US7196718B1 (en) | 2004-08-26 | 2007-03-27 | Sprint Spectrum L.P. | Method and apparatus for transmission of digital image to destination associated with voice call participant |
| TWI273567B (en) * | 2004-08-30 | 2007-02-11 | Lite On It Corp | Method for editing video stream |
| CN101036389B (zh) * | 2004-09-02 | 2012-05-02 | 索尼株式会社 | 内容接收器、视频/音频输出定时控制方法和内容提供系统 |
| JP2006279672A (ja) * | 2005-03-30 | 2006-10-12 | Leader Electronics Corp | ネットワークに接続可能な波形表示装置 |
| EP1889151A2 (en) * | 2005-05-21 | 2008-02-20 | Kula Media Group | Media distribution over a network |
| JP4991129B2 (ja) * | 2005-07-19 | 2012-08-01 | Ｎｅｃディスプレイソリューションズ株式会社 | 映像音声再生装置および映像音声再生方法 |
| KR101226178B1 (ko) * | 2007-03-27 | 2013-01-24 | 삼성전자주식회사 | 비디오 데이터 디스플레이 방법 및 장치 |
| JP2010187116A (ja) * | 2009-02-10 | 2010-08-26 | Toshiba Corp | 動画処理装置 |
| CN106162182B (zh) | 2015-03-25 | 2019-08-30 | 杭州海康威视数字技术股份有限公司 | 一种视频编码码流的播放控制方法及系统 |
| JP6724581B2 (ja) * | 2016-06-15 | 2020-07-15 | 富士通株式会社 | 画像符号化装置、方法、及びプログラム |
Family Cites Families (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5815634A (en) * | 1994-09-30 | 1998-09-29 | Cirrus Logic, Inc. | Stream synchronization method and apparatus for MPEG playback system |
| US5771075A (en) * | 1994-12-08 | 1998-06-23 | Lg Electronics Inc. | Audio/video synchronizer |
| US6148135A (en) * | 1996-01-29 | 2000-11-14 | Mitsubishi Denki Kabushiki Kaisha | Video and audio reproducing device and video decoding device |
| JP3130464B2 (ja) * | 1996-02-02 | 2001-01-31 | ローム株式会社 | データ復号装置 |
| JP2848326B2 (ja) * | 1996-03-28 | 1999-01-20 | 日本電気株式会社 | Ｍｐｅｇ符号化画像復号装置 |
| JP2872104B2 (ja) | 1996-05-14 | 1999-03-17 | 株式会社グラフィックス・コミュニケーション・ラボラトリーズ | タイムスタンプ付加装置および方法、並びにそれを用いた動画像圧縮伸張伝送システムおよび方法 |
| ES2169019T3 (es) * | 1996-07-05 | 2002-07-01 | Matsushita Electric Ind Co Ltd | Sincronizacion de planos multiples de objetos video. |
| JP2970558B2 (ja) * | 1996-10-25 | 1999-11-02 | 日本電気株式会社 | オーディオ／ビデオ／コンピュータグラフィクス同期再生合成方式及び方法 |
| JP3106987B2 (ja) * | 1997-01-09 | 2000-11-06 | 日本電気株式会社 | オーディオ・ビデオ同期再生装置 |
| IL167288A (en) * | 1997-04-01 | 2012-03-29 | Sony Corp | Image encryption device, image encryption method, image decryption device, image decryption method, and appropriate medium |
| US5959684A (en) * | 1997-07-28 | 1999-09-28 | Sony Corporation | Method and apparatus for audio-video synchronizing |
| WO1999021367A1 (fr) * | 1997-10-20 | 1999-04-29 | Mitsubishi Denki Kabushiki Kaisha | Codeur et decodeur d'image |
| JP3232052B2 (ja) * | 1997-10-31 | 2001-11-26 | 松下電器産業株式会社 | 画像復号化方法 |
| JP3593883B2 (ja) * | 1998-05-15 | 2004-11-24 | 株式会社日立製作所 | 映像ストリーム送受信システム |
| JP4319268B2 (ja) * | 1998-08-07 | 2009-08-26 | 富士通株式会社 | 動画像復号方法及び装置 |
| US6016166A (en) * | 1998-08-31 | 2000-01-18 | Lucent Technologies Inc. | Method and apparatus for adaptive synchronization of digital video and audio playback in a multimedia playback system |
| US6363207B1 (en) * | 1998-10-22 | 2002-03-26 | Sony Corporation | Method and apparatus for a virtual system time clock for digital audio/video processor |
| ID24586A (id) * | 1998-12-21 | 2000-07-27 | Matsushita Electric Ind Co Ltd | Perangkat dan metode penyelarasan waktu dengan menggunakan modul basis waktu dan resolusi peningkatan waktu |
| US6429902B1 (en) * | 1999-12-07 | 2002-08-06 | Lsi Logic Corporation | Method and apparatus for audio and video end-to-end synchronization |
-
2000
- 2000-10-05 JP JP2000305604A patent/JP4208398B2/ja not_active Expired - Fee Related
-
2001
- 2001-10-04 US US09/969,636 patent/US6862045B2/en not_active Expired - Lifetime
- 2001-10-05 DE DE60135617T patent/DE60135617D1/de not_active Expired - Lifetime
- 2001-10-05 EP EP20010123292 patent/EP1195996B1/en not_active Expired - Lifetime
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006190213A (ja) * | 2005-01-07 | 2006-07-20 | Nippon Hoso Kyokai <Nhk> | メディア再生装置 |
| JP4511952B2 (ja) * | 2005-01-07 | 2010-07-28 | 日本放送協会 | メディア再生装置 |
| JP2009124570A (ja) * | 2007-11-16 | 2009-06-04 | Canon Inc | 映像処理装置、映像処理方法、映像処理プログラム及び記憶媒体 |
| US8229277B2 (en) | 2007-11-16 | 2012-07-24 | Canon Kabushiki Kaisha | Video processing apparatus, method, and storage medium |
Also Published As
| Publication number | Publication date |
|---|---|
| EP1195996B1 (en) | 2008-09-03 |
| DE60135617D1 (de) | 2008-10-16 |
| US20020041336A1 (en) | 2002-04-11 |
| JP4208398B2 (ja) | 2009-01-14 |
| EP1195996A3 (en) | 2005-03-30 |
| US6862045B2 (en) | 2005-03-01 |
| EP1195996A2 (en) | 2002-04-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4208398B2 (ja) | 動画像復号再生装置、動画像復号再生方法及びマルチメディア情報受信装置 | |
| JP4612171B2 (ja) | 動画像復号再生モジュールと再生時刻管理プログラムとマルチメディア情報受信装置 | |
| US6987767B2 (en) | Multiplexer, multimedia communication apparatus and time stamp generation method | |
| US6907028B2 (en) | Clock-based time slicing | |
| US7656947B2 (en) | Synchronization device and synchronization method in digital broadcast receiver | |
| US20070002902A1 (en) | Audio and video synchronization | |
| US8842218B2 (en) | Video/audio data output device and method | |
| WO2010116588A1 (ja) | デジタルテレビ放送再生装置およびその再生方法 | |
| JP5092493B2 (ja) | 受信プログラム、受信装置、通信システム、及び、通信方法 | |
| JP5032179B2 (ja) | ストリーム再生装置及びメディアデータ復号方法 | |
| KR100698182B1 (ko) | 디지털 방송 시스템의 ａｖ 출력 방법 및 장치 | |
| JP4682159B2 (ja) | ストリーム再生装置 | |
| JP2006330541A (ja) | 音声受信再生装置 | |
| JP2000059325A (ja) | 遅延時間測定装置 | |
| JP2000092519A (ja) | 立体画像受信装置及び立体画像表示システム | |
| JP4660377B2 (ja) | 無線映像送信装置、映像送信装置、無線映像受信装置、映像受信装置、無線映像送受信システム及び映像送受信システム | |
| KR100669622B1 (ko) | 휴대 영상 단말기의 오디오 및 비디오 동기화 방법 | |
| JP3671969B2 (ja) | データ多重方法及び多重データ復号方法 | |
| JP2005020429A (ja) | ストリーム受信装置、ストリーム送信装置およびストリーム送受信システム | |
| JP2008099209A (ja) | コンテンツ再生装置とその再生タイミング同期方法 | |
| KR20080058993A (ko) | 디지털 방송수신기의 표시장치 및 방법 | |
| JPH04100430A (ja) | 音声セル画像セル再生同期装置 | |
| JP2003037824A (ja) | Ｍｐｅｇストリーム切換方法及びｍｐｅｇストリーム切換装置 | |
| JP2003284069A (ja) | 多重データ復号方法及び多重データ復号装置 | |
| JP2004158921A (ja) | データ送信装置及びデータ受信装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070926 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071225 |
|
| A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20071225 |
|
| A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20080117 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080129 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080327 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080729 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080903 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20081014 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20081021 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111031 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111031 Year of fee payment: 3 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111031 Year of fee payment: 3 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111031 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121031 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121031 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131031 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131031 Year of fee payment: 5 |
|
| S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
| LAPS | Cancellation because of no payment of annual fees |