JP2007288276A - ストリームレート変換装置 - Google Patents

Abstract

【課題】トランスコード処理時に伝送路に制限があっても時間情報の転送ができるストリームレート変換装置を得る。
【解決手段】ＭＰＥＧ−ＴＳからビデオストリームを取り出しデコードしデジタル画像を出力する際、デジタル画像の特定位置の画素を、あらかじめ画素値として使用できる値にのみ変換できるよう構成された変換テーブルを用いてタイムスタンプに置換する画素置換装置８を有するＭＰＥＧ−ＴＳデコード装置２と、入力されるデジタル画像から前記変換テーブルを用いてデジタル画像と置換したタイムスタンプを取得し、ＭＰＥＧ−ＴＳから得られる特殊パケットに入っていたタイムスタンプに置換された画素を得る画素還元装置１６を有し、ＭＰＥＧ−ＴＳにエンコードされたデジタル画像を前記タイムスタンプを用いて同期させながらマルチプレクスして出力するＭＰＥＧ−ＴＳエンコード装置１３とを備える。
【選択図】図１

Description

本発明は、トランスコード処理を行う映像変換装置としてのストリームレート変換装置に関し、特に、ＭＰＥＧトランスポートストリーム（以下、ＭＰＥＧ−ＴＳと称す）において、トランスコード処理を行う際のデコード装置と再エンコード装置との間の時間情報の転送及び同期に関する。

図７は、従来の映像変換装置の構成を示すブロック図である。図７に示す映像変換装置２０は、デマルチプレクス装置２２及びビデオデコード装置２３を有するＭＰＥＧ−ＴＳデコード装置２１と、このＭＰＥＧ−ＴＳデコード装置２１にＭＰＥＧ−ＴＳ転送経路２８及びデジタル画像転送経路２９を介して接続された、ビデオエンコード装置２５及びマルチプレクス装置２６を有するＭＰＥＧ−ＴＳエンコード装置２４とを備えている（例えば、下記の特許文献１参照）。

従来の映像変換装置においては、ＭＰＥＧ−ＴＳデコード装置２１内のデマルチプレクス装置２２により入力されるＭＰＥＧ−ＴＳ２７より抜き出したＭＰＥＧビデオストリームをビデオデコード装置２３によりデコードする。さらに、その画像を、デジタル画像転送経路２９を介して受信するＭＰＥＧ−ＴＳエンコード装置２４内のビデオエンコード装置２５によりＭＰＥＧビデオストリームに再エンコードすることにより、ＭＰＥＧビデオストリームのレートを変化させ、ＭＰＥＧビデオストリームを抜き出した残りのＭＰＥＧ−ＴＳ２７をＭＰＥＧ−ＴＳ転送経路２８を介して受信するマルチプレクス装置２６によりマルチプレクスしてＭＰＥＧ−ＴＳ出力３０として出力する。

このようなＭＰＥＧ−ＴＳ全体のレートを変化させるトランスコード処理の手法は、ＤＶＨＳなどの記録可能容量に限りがあるメディアにより多くの情報を記録する場合や、広域ネットワークなどにおいて、ネットワークの転送速度とＭＰＥＧ−ＴＳのレートを合わせる場合などに広く用いられている。

ここで、特許文献１においても従来技術の問題点としているが、再エンコードしたＭＰＥＧビデオストリームと、残りのＭＰＥＧ−ＴＳの時間的な同期が問題となる。この問題は、ビデオデコード装置でデコードした画像の時間情報がビデオエンコード装置に渡されないことにより起こる。この時間の同期問題の解決法として、特許文献１では、ビデオデコード装置とビデオエンコード装置の制御を一括して行える場合を示しているが、この特許文献１に記載の発明は、ビデオデコード装置の時間情報をビデオエンコード装置に渡すことが容易である場合の発明である。

ところで、ビデオデコード装置とビデオエンコード装置とを別々のＬＳＩ内に配置した場合などでは、ＬＳＩ間の情報伝達手段の速度などの制限により時間情報を容易に渡せない場合がある。このような制限がある場合に、時間情報を渡す手法として、デコード画像のそれぞれのフレームに時間情報を重畳して転送することが考えられる。ここで、一般的に、ビデオ画像の時間情報を渡す手法として、ビデオの垂直ブランキング期間に時間情報を載せる手法があり、実例として、ＡＮＳＩ／ＳＭＴＰ１２で定義されるＶＩＴＣのタイムスタンプなどがある。

しかし、ビデオデコード装置とビデオエンコード装置との間のデジタル画像伝送路は、必ずしもビデオの垂直ブランキング領域が削除や改変されることなく転送されるとは限らないため、垂直ブランキング期間を利用する方法を使用できない場合がある。

特開２００４−１５３６３１号公報

上述したように、従来の技術では、トランスコード処理を行う場合のビデオデコード装置とビデオエンコード装置との間の時間情報の転送が課題となる。

そこで、本発明は上述した点に鑑みてなされたもので、トランスコード処理時にＭＰＥＧ−ＴＳデコード装置とＭＰＥＧ−ＴＳエンコード装置との間の伝送路に制限があっても時間情報の転送を行うことができる映像変換装置としてのストリームレート変換装置を提供することを目的とする。

本発明に係るストリームレート変換装置は、入力ＭＰＥＧトランスポートストリームを、ＭＰＥＧトランスポートストリームデコード部によっていったんデコードし、このデコードした信号をＭＰＥＧトランスポートストリームエンコード部によって前記入力ＭＰＥＧトランスポートストリームのレートとは異なるレートで再度エンコードすることによって、前記入力トランスポートストリームとは異なるレートのＭＰＥＧトランスポートストリームを生成し出力するストリームレート変換装置であって、前記ＭＰＥＧトランスポートストリームデコード部は、前記入力ＭＰＥＧトランスポートストリームからビデオストリームを分離し、この分離したビデオストリームをデコードしてデジタルビデオ画像を生成し出力すると同時に、このデジタルビデオ画像のタイムスタンプを出力するビデオデコード手段と、前記タイムスタンプを、前記デジタルビデオ画像の画素値として使用できる値に変換した変換タイムスタンプを生成するデータ変換手段と、前記デジタルビデオ画像の一画面内の所定領域の画素値を、前記変換タイムスタンプに置換し、この置換された置換デジタルビデオ画像と前記所定領域に存在した置換前の画素値とを出力する画素置換手段と、前記所定領域に存在した置換前の画素値と前記タイムスタンプとからなる特殊パケットを生成する特殊パケット生成手段と、前記特殊パケットを前記ビデオストリームが分離されたＭＰＥＧトランスポートストリームに多重化し、この特殊パケットを多重化した特殊パケット多重化ＭＰＥＧトランスポートストリームを出力する特殊パケットマルチプレクス手段とを有し、前記ＭＰＥＧトランスポートストリームエンコード部は、前記ＭＰＥＧトランスポートストリームデコード部の前記特殊パケットマルチプレクス手段から出力される前記特殊パケット多重化ＭＰＥＧトランスポートストリームから、前記特殊パケットを分離し、この特殊パケットに含まれる前記所定領域に存在した置換前の画素値と前記タイムスタンプとを取得する特殊パケット取得手段と、前記ＭＰＥＧトランスポートストリームデコード部の前記画素値変換手段から出力される前記置換デジタルビデオ画像から、前記変換タイムスタンプを抽出し、この変換タイムスタンプを逆変換して元のタイムスタンプを生成するとともに、この生成したタイムスタンプと、前記特殊パケットに含まれるタイムスタンプとを比較して、値が一致する前記特殊パケットを前記特殊パケット多重化ＭＰＥＧトランスポートストリームから抽出し、この抽出した特殊パケットに含まれる前記所定領域に存在した置換前の画素値を前記置換デジタルビデオ画像の前記所定領域に戻して元のデジタルビデオ画像を生成する画素還元手段と、前記画素還元手段で生成された前記デジタルビデオ画像を、前記タイムスタンプを用いて前記入力ＭＰＥＧトランスポートストリームの前記ビデオストリームのレートとは異なるレートでエンコードしてレート変換ビデオストリームを生成するビデオエンコード手段と、前記ビデオエンコード手段で生成されたレート変換ビデオストリームと前記特殊パケットが分離されたＭＰＥＧトランスポートストリームとを、前記タイムスタンプを用いて互いのストリームの同期が合うように多重化して、前記入力トランスポートストリームとは異なるレートのＭＰＥＧトランスポートストリームを出力するマルチプレクス手段とを備えたものである。

本発明によれば、ビデオデコード画像の画素を用いた時間情報の転送を用いることにより、トランスコード処理時にＭＰＥＧトランスポートストリームデコード装置とＭＰＥＧトランスポートストリームエンコード装置との間の伝送路に制限があっても時間情報の転送を行うことができる。

図１は、本発明の実施の形態に係るストリームレート変換装置の構成を示すブロック図である。図１に示される本実施の形態に係るストリームレート変換装置１は、ＭＰＥＧ−ＴＳデコード装置２と、ＭＰＥＧ−ＴＳエンコード装置１３とに大別され、このＭＰＥＧ−ＴＳデコード装置２とＭＰＥＧ−ＴＳエンコード装置１３とは、ＭＰＥＧ−ＴＳ転送経路１１及びデジタル画像転送経路１２により接続される。デジタル画像転送経路１２において、デジタル画像は、ＩＴＵ−Ｒ ＢＴ．６５６などの形式で転送される。また、ＭＰＥＧ−ＴＳデコード装置２には、ＭＰＥＧ−ＴＳ３を入力し、２系統に分割し、ＭＰＥＧ−ＴＳ転送経路１１により転送するＭＰＥＧ−ＴＳには、そのＴＳ内で使われていないプログラムＩＤ（以下、ＰＩＤと称す）を持つ特殊パケットを使用する。この特殊パケットの形態については後述する。

ここで、ＭＰＥＧ−ＴＳデコード装置２は、ＭＰＥＧ−ＴＳデコード制御を行うＭＰＥＧ−ＴＳデコード制御装置４と、特殊パケットとして使用するＰＩＤを検索する特殊パケットＰＩＤ検索装置５と、ＭＰＥＧ−ＴＳデコード制御装置４により指定されるＰＩＤが示すＭＰＥＧビデオストリームを分離するデマルチプレクス装置６と、ＭＰＥＧビデオストリームのデコードを行うＭＰＥＧビデオデコード装置７と、ＭＰＥＧビデオデコード装置７から送られるデコード画像の特定位置の画素を、あらかじめ画素値として使用できる値にのみ変換できるように構成された変換テーブルを用いてＭＰＥＧ−ＴＳデコード制御装置４より指示されるＰＴＳ、特殊パケットのＰＩＤ及びＭＰＥＧビデオストリームのＰＩＤに置換して、画素置換後のデジタル画像をデジタル画像転送経路１２を介してＭＰＥＧ−ＴＳエンコード装置１３に転送する画素置換装置８と、画素データを内包した特殊パケットを生成する特殊パケット生成装置９と、生成された特殊パケットを、ＭＰＥＧ−ＴＳデコード装置２に入力された２系統に分けられたＭＰＥＧ−ＴＳのうち、ビデオデコードを行わない系統のＭＰＥＧ−ＴＳにマルチプレクスしてＭＰＥＧ−ＴＳ転送経路１１を介してＭＰＥＧ−ＴＳエンコード装置１３に転送する特殊パケットマルチプレクス装置１０とを有する。

また、ＭＰＥＧ−ＴＳエンコード装置１３は、ＭＰＥＧ−ＴＳエンコード制御を行うＭＰＥＧ−ＴＳエンコード制御装置１４と、ＭＰＥＧ−ＴＳエンコード制御装置１４より指定された特殊パケットのＰＩＤを持つパケットを検索し、検索された特殊パケットよりＰＴＳと画素データを取得し、入力されたＭＰＥＧ−ＴＳから特殊パケットを取り除いて出力する特殊パケット取得装置１５と、入力されたデジタル画像から画素置換装置８で用いた変換テーブルを用いてデジタル画像と置換したＰＴＳ、特殊パケットのＰＩＤ及びＭＰＥＧビデオストリームのＰＩＤを取り出し、ＰＴＳと同じ特殊パケットに入っている画素データを得て画像を復元する画素還元装置１６と、デジタル画像のビデオエンコードを行うＭＰＥＧビデオエンコード装置１７と、特殊パケット取得装置１５から送られたＭＰＥＧ−ＴＳにＭＰＥＧビデオエンコード装置１７からのＭＰＥＧビデオストリームをＰＴＳを用いて同期させながらマルチプレクスしてＭＰＥＧ−ＴＳ出力１９として出力するマルチプレクス装置１８とを有する。

次に、上記構成を備えるストリームレート変換装置の動作について、ＭＰＥＧ−ＴＳデコード装置２内の主にＭＰＥＧ−ＴＳデコード制御装置４の動作内容である図２に示すフローチャート及びＭＰＥＧ−ＴＳエンコード装置１３内の主にＭＰＥＧ−ＴＳエンコード制御装置１４の動作内容である図３に示すフローチャートを参照して説明する。

ＭＰＥＧ−ＴＳデコード装置２に入力されるＭＰＥＧ−ＴＳ入力３は、２系統に分割され、そのうち、ＭＰＥＧ−ＴＳの１系統は、特殊パケットのＰＩＤを決定する装置である特殊パケットＰＩＤ検索装置５に入力され、特殊パケットＰＩＤ検索装置５は、特殊パケットとして使用するＰＩＤを検索する。ＭＰＥＧ−ＴＳデコード制御装置４は、特殊パケットＰＩＤ検索装置５により検索された特殊パケットＰＩＤを取得し、デマルチプレクス装置６にＭＰＥＧビデオストリームのＰＩＤを指定する（ステップＳ１、Ｓ２）。ＭＰＥＧ−ＴＳの規格においてリザーブされているＰＩＤを使用できる場合や、あらかじめ使用しないことが判明しているＰＩＤがある場合には、この特殊パケットＰＩＤ検索装置５を省略できる。特殊パケットＰＩＤ検索装置５は、入力したＭＰＥＧ−ＴＳ２には変化を加えず、デマルチプレクス装置６に送る。

デマルチプレクス装置６は、ＭＰＥＧ−ＴＳデコード制御装置４により指定されるＰＩＤが示すＭＰＥＧビデオストリームを分離する。本説明では、ＭＰＥＧ−ＴＳデコード制御装置４においては、指定するＭＰＥＧビデオストリームのＰＩＤ、すなわちレートを変化させるＭＰＥＧビデオストリームのＰＩＤはあらかじめ判明しているものとする。デマルチプレクス装置６は、パケッタイズドエレメンタリーストリーム（以下、ＰＥＳと称す）の形式で、ＭＰＥＧビデオストリームをＭＰＥＧビデオデコード装置７に送る。これは、以降の処理でプレゼンテーションタイムスタンプ（以下、ＰＴＳと称す）を必要とするためである。

ＭＰＥＧビデオデコード装置７は、ＭＰＥＧビデオストリームのデコードを行い、デコード画像を画素置換装置８に送ると同時に、ＭＰＥＧ−ＴＳデコード制御装置４にデコード画像のＰＴＳを送る。これにより、ＭＰＥＧ−ＴＳデコード制御装置４は、ＭＰＥＧビデオデコード装置７よりデコード画像のＰＴＳを取得し、画素置換装置８に、ＰＴＳ、特殊パケットのＰＩＤ及びＭＰＥＧビデオストリームのＰＩＤを送る（ステップＳ３、Ｓ４）。

画素置換装置８は、ＭＰＥＧビデオデコード装置７から送られるデコード画像の特定位置の画素を、ＭＰＥＧ−ＴＳデコード制御装置４より指示されるＰＴＳ、特殊パケットのＰＩＤ及びＭＰＥＧビデオストリームのＰＩＤに置換する（ステップＳ５）。この状態を図４に示す。この画素との置換に用いる各パラメータは、置換されるデコード画像の基になる部分のＭＰＥＧ−ＴＳストリームが持っていた値とする必要がある。図４に示すデジタル画像のフレーム４１内のデジタル画像の画素４２中、符号４３はＰＴＳを置換した画素の配置例、符号４４は特殊パケットのＰＩＤを置換した画素の配置例、符号４５はＭＰＥＧビデオストリームのＰＩＤを置換した画素の配置例をそれぞれ示している。

画素置換装置８は、画素置換後のデコード画像を、ＭＰＥＧ−ＴＳエンコード装置１３へデジタル画像転送経路１２を用いて送るが、例えばＩＴＵ−Ｒ ＢＴ．６５６をデジタル画像転送経路１２のフォーマットとして使用した場合を考えると、ＳＡＶ（Start of Active Video）、ＥＡＶ（End of Active Video）と判断される値を画素として送るとフレームを正しく判断できないため禁止されている例など、デジタル画像転送経路１２には画素として使用できない値がある場合がある。

そこで、そのような制限のあるデジタル画像転送経路１２を使用するために、画素の値として使用できる値にのみ変換するよう構成された変換テーブルを用い、置換に用いる値をこのテーブルを用いて変換の後に画素と置換することによりデジタル画像転送経路１２において使用できない値を回避することができる。画素置換装置８は、置換前にデコード画像に存在した元来の画素データはＭＰＥＧ−ＴＳデコード制御装置４に送る。

ＭＰＥＧ−ＴＳデコード制御装置４は、取得した元来の画素データ及びその元来の画素データが含まれていたフレームの元となるＭＰＥＧ−ＴＳストリームが持っていたＰＴＳを、特殊パケット生成装置９に送り、特殊パケット生成装置９は、図５に示す形式の特殊パケットを生成する（ステップＳ６、Ｓ７）。特殊パケット生成装置９で生成された特殊パケットは、特殊パケットマルチプレクス装置１０に送られる。この特殊パケットは、図５に示されるように、４バイトのＭＰＥＧ−ＴＳヘッダ、ＰＴＳ、画素データ及びリザーブエリア（このシステムでは使用しない部分）を有し、４７ワード（＝１８８バイト）で構成されている。

特殊パケットマルチプレクス装置１０は、ＭＰＥＧ−ＴＳデコード装置２に入力された２系統に分けられたＭＰＥＧ−ＴＳのうち、ビデオデコードを行わない系統のＭＰＥＧ−ＴＳにマルチプレクスする（ステップＳ８）。このマルチプレクスでは、特殊パケットのＰＴＳとＭＰＥＧ−ＴＳ内のビデオストリームが含まれるＰＥＳに元からあるＰＴＳは同じ値が存在することになるが、これらは近い位置にあることが望ましい。

特殊パケットマルチプレクス装置１０は、ＭＰＥＧ−ＴＳ転送経路１１を使用して置換した画素を含んだデジタル画像と特殊パケットがマルチプレクスされたＭＰＥＧ−ＴＳストリームをＭＰＥＧ−ＴＳエンコード装置１３に送る（ステップＳ９）。

ＭＰＥＧ−ＴＳエンコード装置１３に入力されたデジタル画像は、画像還元装置１６に入力され、画像置換装置８により置換されたデジタル画像から、ＰＴＳ、特殊パケットのＰＩＤ及びＭＰＥＧビデオストリームのＰＩＤを取り出し、ＭＰＥＧ−ＴＳエンコード制御装置１４に送る。これにより、ＭＰＥＧ−ＴＳエンコード制御装置１４は、デジタル画像と置換したＰＴＳ、特殊パケットのＰＩＤ及びＭＰＥＧビデオストリームのＰＩＤを取得し、特殊パケット取得装置１５に特殊パケットのＰＩＤを送る（ステップＳ１０、Ｓ１１）。

一方、ＭＰＥＧ−ＴＳエンコード装置１３に入力されたＭＰＥＧ−ＴＳストリームは、特殊パケット取得装置１５を用いて、ＭＰＥＧ−ＴＳエンコード制御装置１４より指定された特殊パケットのＰＩＤを持つパケットを検索する。特殊パケット取得装置１５は、検索された特殊パケットよりＰＴＳと画素データを取得し、ＭＰＥＧ−ＴＳエンコード制御装置１４に送る（ステップＳ１２）。その後、特殊パケット取得装置１５は、入力ＭＰＥＧ−ＴＳから特殊パケットを取り除き、マルチプレクス装置１８に送る。

ＭＰＥＧ−ＴＳエンコード制御装置１４は、画像還元装置１６より得たＰＴＳと特殊パケット取得装置１５より得たＰＴＳとを比較し（ステップＳ１３）、一致した場合は、特殊パケット取得装置１５によりそのＰＴＳと同じ特殊パケットに入っていた画素データとを取り出させて画素還元装置１６に送る（ステップＳ１４）。画素還元装置１６は、ＭＰＥＧ−ＴＳエンコード制御装置１４より送られてきた画素データを元来の画素の位置に戻す（ステップＳ１５）。

ＭＰＥＧ−ＴＳエンコード制御装置１４は、画像還元装置１６により復元した画像とＰＴＳを送り、これに基づき、ＭＰＥＧビデオエンコード装置１７は、デジタル画像のビデオエンコードを行い、マルチプレクス装置１８にＭＰＥＧビデオストリームを出力する。このＭＰＥＧビデオストリームはＰＥＳ形式とし、ＰＥＳヘッダ内に置かれるＰＴＳは、ＭＰＥＧ−ＴＳエンコード制御装置１４より指定する（ステップＳ１６）。

マルチプレクス装置１８では、特殊パケット取得装置１５から送られたＭＰＥＧ−ＴＳにマルチプレクスされているＰＣＲや、各エレメンタリーストリームのＰＴＳと、ＭＰＥＧビデオエンコード装置１７より出力されたＭＰＥＧビデオストリームのＰＴＳとの比較を行い、同期が取れるようにＭＰＥＧ−ＴＳのマルチプレクスを行う。マルチプレクスに際して、ＭＰＥＧ−ＴＳエンコード制御装置１４は、ＭＰＥＧビデオストリームのＰＩＤをマルチプレクス装置１８に指定する（ステップＳ１７）。

マルチプレクス装置１８は、指定されたＭＰＥＧビデオストリームのＰＩＤと同じＰＩＤのパケットを取り除く。また、マルチプレクス装置１８は、そのＰＩＤをＭＰＥＧビデオエンコード装置１７より送られるＭＰＥＧビデオストリームのＰＩＤとして使用し、マルチプレクスを行うことにより、ＰＩＤの重複を避けることができる。マルチプレクス装置１８のＭＰＥＧ−ＴＳ出力１９は、ストリームレート変換装置１の外部へのＭＰＥＧ−ＴＳ出力１９として出力される。

図６は、ＭＰＥＧ−ＴＳエンコードＬＳＩ、ＭＰＥＧ−ＴＳデコードＬＳＩを用いて、本発明を実施したものである。図６に示すＭＰＥＧ−ＴＳデコードＬＳＩ１００は、図１に示すＭＰＥＧ−ＴＳデコード装置２と同等な機能を有し、ＭＰＥＧ−ＴＳ入力３を入力してＭＰＥＧ−ＴＳ転送経路１１及びデジタル画像転送経路１２を介してＭＰＥＧ−ＴＳ及びデジタル画像を出力する。また、ＭＰＥＧ−ＴＳエンコードＬＳＩ２００は、図１に示すＭＰＥＧ−ＴＳエンコード装置１３と同等な機能を有し、ＭＰＥＧ−ＴＳ転送経路１１及びデジタル画像転送経路１２を介してＭＰＥＧ−ＴＳデコードＬＳＩ１００からのＭＰＥＧ−ＴＳ及びデジタル画像を入力してＭＰＥＧ−ＴＳ出力１９を出力する。それぞれのＬＳＩのデジタル画像のビットストリームは、国際電気通信連合の無線標準化部門の勧告によるインタフェース規格であるＩＴＵ−Ｒ ＢＴ．６５６に準拠するものとする。

これらＭＥＰＧ−ＴＳデコードＬＳＩ１００、ＭＰＥＧ−ＴＳエンコードＬＳＩ２００の能力としては一般的なものである。ただし、本発明を実現するために、ＭＰＥＧ−ＴＳデコードＬＳＩ１００は、ＭＰＥＧ−ＴＳ入力３からＭＰＥＧ−ＴＳ出力１９の間におけるＭＰＥＧ−ＴＳパケットのマルチプレクス及びデジタル画像出力に出力する直前のデジタル画像の置換が、可能である構成でなければならない。また、ＭＰＥＧ−ＴＳエンコードＬＳＩ２００は、ＭＰＥＧ−ＴＳ入力３からＭＰＥＧ−ＴＳ出力１９の間のＭＰＥＧ−ＴＳパケットの抜き取り、及びデジタル画像入力から入力した直後のデジタル画像の置換が可能である構成でなければならない。

ここで、ＭＰＥＧ−ＴＳエンコードＬＳＩ２００のデジタル画像入力がブランキング部分を通さないものであったとしても、本発明を用いればトランスコーディングを行う場合に、再エンコードしたＭＰＥＧビデオストリームと、それ以外のストリームの同期を行うことができる。

本発明の実施の形態に係る映像変換装置としてのストリームレート変換装置の構成を示すブロック図である。 図１のＭＰＥＧ−ＴＳデコード制御装置内の、主にＭＰＥＧ−ＴＳデコード制御装置の動作内容を示すフローチャートである。 図１のＭＰＥＧ−ＴＳエンコード制御装置内の、主にＭＰＥＧ−ＴＳエンコード制御装置の動作内容を示すフローチャートである。 図１の画素置換装置によりデジタル画像の画素と各パラメータを置換する場合のデジタル画像上の各パラメータを示す配置図である。 図１の特殊パケット生成装置により生成される特殊パケットの形式を示した図である。 ＭＰＥＧ−ＴＳエンコードＬＳＩ及びＭＰＥＧ−ＴＳデコードＬＳＩを用いて本発明を実施した場合のブロック図である。 従来の映像変換装置の構成を示すブロック図である。

符号の説明

１ ストリームレート変換装置
２ ＭＰＥＧ−ＴＳデコード装置
３ ストリームレート変換装置１へのＭＰＥＧ−ＴＳ入力
４ ＭＰＥＧ−ＴＳデコード制御装置
５ 特殊パケットＰＩＤ検索装置
６ デマルチプレクス装置
７ ＭＰＥＧビデオデコード装置
８ 画素置換装置
９ 特殊パケット生成装置
１０ 特殊パケットマルチプレクス装置
１１ ＭＰＥＧ−ＴＳ転送経路
１２ デジタル画像転送経路
１３ ＭＰＥＧ−ＴＳエンコード装置
１４ ＭＰＥＧ−ＴＳエンコード制御装置
１５ 特殊パケット取得装置
１６ 画素還元装置
１７ ＭＰＥＧビデオエンコード装置
１８ マルチプレクス装置
１９ ストリームレート変換装置１からのＭＰＥＧ−ＴＳ出力
４１ デジタル画像のフレーム
４２ デジタル画像の画素
４３、４４、４５ 符号
１００ ＭＰＥＧ−ＴＳデコードＬＳＩ
２００ ＭＰＥＧ−ＴＳエンコードＬＳＩ

Claims (1)

1. 入力ＭＰＥＧトランスポートストリームを、ＭＰＥＧトランスポートストリームデコード部によっていったんデコードし、このデコードした信号をＭＰＥＧトランスポートストリームエンコード部によって前記入力ＭＰＥＧトランスポートストリームのレートとは異なるレートで再度エンコードすることによって、前記入力トランスポートストリームとは異なるレートのＭＰＥＧトランスポートストリームを生成し出力するストリームレート変換装置であって、
   前記ＭＰＥＧトランスポートストリームデコード部は、
   前記入力ＭＰＥＧトランスポートストリームからビデオストリームを分離し、この分離したビデオストリームをデコードしてデジタルビデオ画像を生成し出力すると同時に、このデジタルビデオ画像のタイムスタンプを出力するビデオデコード手段と、
   前記タイムスタンプを、前記デジタルビデオ画像の画素値として使用できる値に変換した変換タイムスタンプを生成するデータ変換手段と、
   前記デジタルビデオ画像の一画面内の所定領域の画素値を、前記変換タイムスタンプに置換し、この置換された置換デジタルビデオ画像と前記所定領域に存在した置換前の画素値とを出力する画素置換手段と、
   前記所定領域に存在した置換前の画素値と前記タイムスタンプとからなる特殊パケットを生成する特殊パケット生成手段と、
   前記特殊パケットを前記ビデオストリームが分離されたＭＰＥＧトランスポートストリームに多重化し、この特殊パケットを多重化した特殊パケット多重化ＭＰＥＧトランスポートストリームを出力する特殊パケットマルチプレクス手段とを有し、
   前記ＭＰＥＧトランスポートストリームエンコード部は、
   前記ＭＰＥＧトランスポートストリームデコード部の前記特殊パケットマルチプレクス手段から出力される前記特殊パケット多重化ＭＰＥＧトランスポートストリームから、前記特殊パケットを分離し、この特殊パケットに含まれる前記所定領域に存在した置換前の画素値と前記タイムスタンプとを取得する特殊パケット取得手段と、
   前記ＭＰＥＧトランスポートストリームデコード部の前記画素値変換手段から出力される前記置換デジタルビデオ画像から、前記変換タイムスタンプを抽出し、この変換タイムスタンプを逆変換して元のタイムスタンプを生成するとともに、この生成したタイムスタンプと、前記特殊パケットに含まれるタイムスタンプとを比較して、値が一致する前記特殊パケットを前記特殊パケット多重化ＭＰＥＧトランスポートストリームから抽出し、この抽出した特殊パケットに含まれる前記所定領域に存在した置換前の画素値を前記置換デジタルビデオ画像の前記所定領域に戻して元のデジタルビデオ画像を生成する画素還元手段と、
   前記画素還元手段で生成された前記デジタルビデオ画像を、前記タイムスタンプを用いて前記入力ＭＰＥＧトランスポートストリームの前記ビデオストリームのレートとは異なるレートでエンコードしてレート変換ビデオストリームを生成するビデオエンコード手段と、
   前記ビデオエンコード手段で生成されたレート変換ビデオストリームと前記特殊パケットが分離されたＭＰＥＧトランスポートストリームとを、前記タイムスタンプを用いて互いのストリームの同期が合うように多重化して、前記入力トランスポートストリームとは異なるレートのＭＰＥＧトランスポートストリームを出力するマルチプレクス手段とを、
   有するストリームレート変換装置。
   

Images