JP4866135B2 - 画像処理装置及び画像処理方法 - Google Patents

Description

本発明は、異なった方式で符号化及びパケット化された、複数の画像符号化データを選択的に復号等する画像処理装置及び画像処理方法に関する。

近年、周波数利用効率が高く、伝送品質、画像品質に優れた放送を提供することを可能とするディジタル放送（インターネット放送、地上ディジタル放送等）が開始されている。

日本の地上ディジタル放送では、伝送方式として、高い周波数利用効率と伝送品質が得られるＯＦＤＭ（Orthogonal Frequency Division Multiplexing：直交波周波数分割多重）方式が採用され、帯域幅６ＭＨｚの放送チャンネル（物理チャンネル）を１４個のセグメントに分割し、そのうちガードバンドを除いた１３個のセグメントを複数のセグメント群（階層）のグループに分けて、各グループ単位で情報符号化方式や変調方式等の異なる番組（プログラム）を同時に放送することを可能にしている。

例えば、１３個のセグメントのうち、中央の１セグメントを除く１２セグメントを用いて、固定受信向けに、ハイビジョン番組（ＨＤＴＶ：High Definition TeleVision）を１番組、または、標準番組（ＳＤＴＶ：Standard Definition TeleVision）を２ないし３番組放送し、移動受信向けに、中央の１セグメントを用いて１セグメント放送（ワンセグ放送）が既に行われている。

また、情報源符号化（画像圧縮符号化）方式として、上述のＨＤＴＶやＳＤＴＶの番組にはＭＰＥＧ-２ Ｖｉｄｅｏ（Moving Picture Expert Group 2 Video）方式、ワンセグ放送の番組にはＨ．２６４/ＡＶＣ（ＭＰＥＧ-４ ＡＶＣ：Moving Picture Expert Group 4 Part10 Advanced Video Coding）方式が採用されている。

また、ストリーミング放送を行うためのプロトコルとして、ＭＰＥＧ-２ ＴＳ（Transport Stream）が採用されており、送信側で、情報源符号化後の画像符号化データ（ビットストリームのデータ）を伝送しやすい小さな固定長（ヘッダを含む１８８byte）のＴＳパケット（トランスポートストリームパケット）にパケット化し、それらのＴＳパケットを並べた１つのトランスポートストリームを生成して、上述のＯＦＤＭ変調等を行って放送している。更に、ＨＤＴＶやＳＤＴＶのＴＳパケットとワンセグ放送のＴＳパケットとを１つのトランスポートストリームに多重化し、それら複数の番組（プログラム）を多重放送することが可能となっている。

ここで、ストリーミング放送を実現するためには、受信機側で送信側と同期を取って、トランスポートストリームの各ＴＳパケットを番組（プログラム）毎に判別して分離抽出し、ＴＳパケット内の画像符号化データを復号できるようにする必要がある。

そのため、送信側では、エレメンタリストリーム（ＥＳ：Elementary Stream）である画像符号化データをピクチャ単位でＰＥＳ（Packetized Elementary Stream）パケットにパケット化した上でＴＳパケット化している。更に、各ＰＥＳパケットのヘッダ（ＰＥＳヘッダ）内に、ＰＴＳ（Presentation Time Stamp：提示時間情報）と呼ばれるそのＰＥＳパケット内のエレメンタリストリームＥＳを再生（提示）する時間を示す時間情報が記述されている。更に、ＰＣＲ（Program Clock Reference：番組時刻基準値情報）と呼ばれる基準時刻情報が番組（サービス）毎に伝送され、このＰＣＲを受信機が受信した瞬間の時間をＰＣＲ値（番組時刻基準値）で示された時刻とすることで、送信側との同期を取ることが可能となっている。そして、ＰＣＲ値に基づいて同期した基準時刻を基準にして、ＰＴＳの示す時間にそのＰＥＳパケット内のエレメンタリストリームＥＳを復号（デコード）することで、番組（プログラム）毎に画像を再生することができるようになっている。

なお、以上に述べたＰＴＳとＰＣＲに基づいて固定受信向けのＨＤＴＶやＳＤＴＶの番組放送（以下、「高画質動画サービス」とも総称することとする）を同期再生することができるが、移動受信向けのワンセグ放送（以下、「簡易動画サービス」とも称することとする）では、更にピクチャ単位より細かいスライス単位で符号化してエレメンタリストリームＥＳである画像符号化データを生成し、ＰＥＳパケットにパケット化した上でＴＳパケット化している。そして、放送では、見たい場面から再生できるランダムアクセス機能が必要であることから、スライス単位で符号化された画像符号化データをピクチャ単位でランダムアクセスを行えるようにしている。

つまり、Ｈ．２６４/ＡＶＣでは、スライス単位で符号化された画像符号化データを、自身で１フレームの絵を生成できるＩＤＲピクチャー（基準フレームデータ）と、参照画像を要する非ＩＤＲピクチャー（非基準フレームデータ）とに分類し、ＩＤＲピクチャーをＩＤＲ（Instantaneous Decoder Refresh：デコーダ符号動作の瞬時リフレッシュ）アクセスユニットに格納し、非ＩＤＲピクチャーを非ＩＤＲ（non Instantaneous Decoder Refresh）アクセスユニットに格納して、ＰＥＳパケットに多重化した上でＴＳパケット化している。そして、受信機側でＩＤＲアクセスユニットを判別し、ＩＤＲアクセスユニットが格納されているＰＥＳパケットのＰＥＳヘッダに記述されているＰＴＳ（Presentation Time Stamp：提示時間情報）とＰＣＲ（Program Clock Reference：番組時刻基準値情報）に同期して、そのＩＤＲアクセスユニット内のＩＤＲピクチャーの再生（提示）を行うことで、非ＩＤＲアクセスユニットに格納されている非ＩＤＲピクチャーも順次に再生（提示）することができるようになっている。更に、同期再生（提示）の基準となるＩＤＲアクセスユニットは、通常２秒程度の間隔、最大でも５秒間隔でＴＳパケットに現れるように、ＰＥＳパケットに多重化しなければならないと規定されている。

ところで、従来、ＨＤＴＶやＳＤＴＶの番組放送とワンセグ放送との多重放送を受信することが可能な受信機において、ユーザー等がＨＤＴＶやＳＤＴＶの番組放送からワンセグ放送への視聴に切替えた場合、その切替え時が上述のＩＤＲアクセスユニットの現れる期間（２秒ないし５秒の期間）内のときには、次のＩＤＲアクセスユニットが判別できるまで、ディスプレイの表示を黒表示（映像ミュート）としていたため、ユーザー等に対して違和感等を与えるという問題があった。

こうした問題を解決するため、特許文献１の受信機が提案されている。特許文献１の受信機をＨＤＴＶやＳＤＴＶとワンセグ放送とを受信するための受信機に適用した場合、ＨＤＴＶやＳＤＴＶとワンセグ放送との両者を常に復号し、ＨＤＴＶやＳＤＴＶからワンセグ放送への視聴に切替えられると、その切替え時におけるＨＤＴＶやＳＤＴＶの番組放送のフレーム画像を静止画としてディスプレイに表示させた後、次に、切替え時におけるワンセグ放送のフレーム画像と上述の静止画との合成画像を表示させてから、ワンセグ放送の画像だけに切替えてディスプレイ表示する。これにより、黒表示の期間を無くすこととなる。

特開２００６−７４４６６号公報

ところが、特許文献１の受信機では、ＨＤＴＶやＳＤＴＶとワンセグ放送との両者を常に復号することとなるため、復号を行う復号器（デコーダ）の処理負担が大きく、消費電力の低減が困難となる等の問題がある。例えば、特許文献１の受信機を、バッテリで動作する携帯電話等の移動端末装置に適用することは極めて困難である。

更に、ユーザー等から切替え指示がなされた時点からワンセグ放送に完全に切替わるまでの同期処理期間において黒表示が行われないが、ＩＤＲアクセスユニットが現れる２秒ないし５秒間の間、静止画や合成画像がディスプレイ表示されることとなるため、迅速にワンセグ放送に切替えるための手段が講じられていると言えず、単に黒表示を行わないようにしているに過ぎないという課題がある。

本発明は、このような従来の問題に鑑みてなされたものであり、異なった方式で符号化及びパケット化された複数の画像符号化データを選択的に復号等する画像処理装置及び画像処理方法であって、例えば、ユーザー等に違和感を与えることなく迅速な切替えを行うことができ、また、復号処理の負担を低減等することができる、新規な画像処理装置及び画像処理方法を提供することを目的とするものである。

請求項１に記載の発明は、符号化及びパケット化された高画質動画サービスのストリームをデコードする第１のデコーダ手段と、各々固有の提示時間情報が付された基準のアクセスユニット及び非基準のアクセスユニットが多重化された簡易動画サービスのストリームをデコードする第２のデコーダ手段とを備える画像処理装置であって、前記第１のデコード手段と第２のデコード手段の動作と停止を制御し、前記第１のデコード手段を動作させるときには前記第２のデコード手段を停止させ、前記第２のデコード手段を動作させるときには前記第１のデコード手段を停止させる切替え制御手段と、前記第１のデコード手段がデコード動作している間、前記簡易動画サービスのストリームから、前記固有の提示時間情報とアクセスユニットとを対応付けて順次に記憶すると共に、前記切替え制御手段によって前記第１のデコード手段のデコード動作から前記第２のデコード手段のデコード動作へと切替えられると、前記第１のデコード手段がデコード動作している間に記憶しておいた前記アクセスユニットのうち、最新の基準のアクセスユニットから順次に前記第２のデコーダ手段にデコードさせる同期情報蓄積処理手段と、前記第２のデコーダ手段が前記アクセスユニットのデコードを完了する現在時刻と、デコードされた前記アクセスユニットに対応付けられて前記同期情報蓄積処理手段に記憶されている固有の提示時間情報による提示時刻とを比較し、当該提示時刻が前記現在時刻より未来の時刻となると、同期確立と判定して、前記第２のデコーダ手段に通常のデコード処理を開始させる判定手段と、を具備することを特徴とする。

請求項４に記載の発明は、符号化及びパケット化された高画質動画サービスのストリームをデコードする第１のデコーダ工程と、各々固有の提示時間情報が付された基準のアクセスユニット及び非基準のアクセスユニットが多重化された簡易動画サービスのストリームをデコードする第２のデコーダ工程とを備える画像処理方法であって、前記第１のデコード工程と第２のデコード工程の処理と停止を制御し、前記第１のデコード工程の処理を行わせるときには前記第２のデコード工程を停止させ、前記第２のデコード工程の処理を行わせるときには前記第１のデコード工程を停止させる切替え制御工程と、前記第１のデコード工程におけるデコード処理の間、前記簡易動画サービスのストリームから、前記固有の提示時間情報とアクセスユニットとを対応付けて順次に記憶すると共に、前記切替え制御工程によって前記第１のデコード工程から前記第２のデコード工程へと切替えられると、前記第１のデコード工程がデコード処理をしている間に記憶しておいた前記アクセスユニットのうち、最新の基準のアクセスユニットから順次に前記第２のデコーダ工程においてデコードさせる記憶工程と、前記第２のデコーダ工程で前記アクセスユニットのデコードが完了する現在時刻と、デコードされた前記アクセスユニットに対応付けられて前記記憶工程において記憶されている固有の提示時間情報による提示時刻とを比較し、当該提示時刻が前記現在時刻より未来の時刻となると、同期確立と判定して、前記第２のデコーダ工程において通常のデコード処理を開始させる判定工程と、を具備することを特徴とする。

本発明の実施の形態に係る画像処理装置について図面を参照して説明する。図１は、本実施形態の画像処理装置の構成を表したブロック図である。また、この画像処理装置は、ＭＰＥＧ-２システムを用いた地上波ディジタル放送を受信する受信機のバックエンドとして適用されたものであり、高画質動画サービス（ＨＤＴＶとＳＤＴＶ）のデコード方式にはＭＰＥＧ-２ Ｖｉｄｅｏ、簡易動画サービスのデコード方式にはＨ．２６４/ＡＶＣが用いられている。

図１において、この受信機は、フロントエンド（前処理部）とバックエンド（後処理部）に大別され、フロントエンドは、放送波を受信するチューナ１０とＯＦＤＭ復調部２０を備えた構成、バックエンドは、ＴＳバッファ３０、デマルチプレクサ４０、本実施形態の画像処理装置１を備えた構成となっている。

そして、画像処理装置１は、ＥＳバッファ５０、Ｈ２６４デコーダ６０、送出部７０、ＩＤＲ検出部８０、ＩＤＲポインタ保持部９０、ＰＴＳ保持部１００、ＰＴＳ判定部１１０、ＭＰＥＧ-２デコーダ１２０、ビデオバッファ１３０、切替え制御部１４０を有して構成されている。

ここで、ＥＳバッファ５０とＩＤＲ検出部８０とＩＤＲポインタ保持部９０及びＰＴＳ保持部１００によって情報蓄積処理手段が構成されており、その情報蓄積処理手段の機能の詳細については後述することとする。

チューナ１０では、図示しないアンテナにより放送波を受信し、ユーザー等が選局した放送チャンネルのＯＦＤＭ信号Ｓoを抽出し、内蔵されているＡＧＣ（Auto Gain Control）回路によってレベル調整して、ＯＦＤＭ復調部２０に供給する。また、上述のＡＧＣ回路がＡＧＣ制御を行う際に生成するＳメータ信号（受信感度を示す信号）Ｓmを後述の切替え制御部１４０に供給する。

ＯＦＤＭ復調部２０は、チューナ１０から供給されるＯＦＤＭ信号Ｓoに対して復調及び誤り訂正処理等の処理を施すことでトランスポートストリームＴＳを再生し、半導体メモリ等で形成されたＴＳバッファ３０に供給する。また、上述の誤り訂正処理の際に生成するビットエラーレート（Bit Error Rate）のデータＢＥＲを受信感度を示すデータとして、後述の切替え制御部１４０に供給する。

ＴＳバッファ３０は、トランスポートストリームＴＳを入力し、一時的に記憶してタイミング調整を図りつつデマルチプレクサ４０へ転送するＦＩＦＯ処理を行う。

デマルチプレクサ４０は、ＴＳバッファ３０からのトランスポートストリームＴＳのＴＳパケットを解析し、ユーザー等の選局操作で所望のサービスが選択されることで指定されるＰＩＤ（Packet Identifier：パケット識別子）のＴＳパケットを抽出し、更に抽出したＴＳパケットから、高画質動画サービス（ＨＤＴＶやＳＤＴＶ）のＰＥＳ（Packetized Elementary Stream）パケットを抜き出してＭＰＥＧ-２デコーダ１２０に供給すると共に、簡易動画サービス（ワンセグ放送）のエレメンタリストリーム（ＥＳ）をＥＳバッファ５０に供給し格納させる。また、簡易動画サービスのエレメンタリストリーム（ＥＳ）に関するＰＴＳ（Presentation Time Stamp：提示時間情報）を、簡易動画サービスのＰＥＳパケットのＰＥＳヘッダ内から抽出し、ＥＳバッファ５０に供給する各エレメンタリストリーム（ＥＳ）と関連付けてＰＴＳ保持部１００に供給する。つまり、互いに関連付けられているＥＳとＰＴＳとの対応関係を保持しつつＥＳバッファ５０とＰＴＳ保持部１００に格納させる。

更に、デマルチプレクサ４０は、簡易動画サービスのエレメンタリストリーム（ＥＳ）と高画質動画サービスのＰＥＳと番組時刻基準値情報（ＰＣＲ）についての多重分離を常に行い、その分離した番組時刻基準値情報（ＰＣＲ）も、ＭＰＥＧ-２デコーダとＥＳバッファ５０に供給する。

ＥＳバッファ５０は、ＩＤＲアクセスユニットが最大５秒間毎に伝送されてくる場合を想定して、最大５秒間毎に伝送されてくるＩＤＲアクセスユニット間のアクセスユニットを記憶する記憶容量を備えた半導体メモリ等で形成されている。そして、上述したように、ＥＳバッファ５０に格納されるＰＴＳと関連付けてエレメンタリストリーム（ＥＳ）を記憶する。

ＩＤＲ検出部８０は、ＥＳバッファ５０に時々刻々と格納されるエレメンタリストリーム（ＥＳ）を検査して、ＩＤＲピクチャーが格納されているＩＤＲアクセスユニット（ＩＤＲ_ＡＵ）を検出する。例えば、ＩＤＲアクセスユニットの先頭に付けられたＮＡＬユニットに記述されているシーンパラメータセット（ＳＰＳ：Sequence Parameter Set）の情報を調べることで、ＩＤＲアクセスユニット（ＩＤＲ_ＡＵ）か非ＩＤＲアクセスユニット（非ＩＤＲ_ＡＵ）かの判定を行って、ＩＤＲアクセスユニット（ＩＤＲ_ＡＵ）を検出する。そして、検出したＩＤＲアクセスユニット（ＩＤＲ_ＡＵ）の位置を指し示す情報（ＩＤＲポインタデータ）をＩＤＲポインタ保持部９０に記憶させる。

ＩＤＲポインタ保持部９０は、上述したようにＩＤＲ検出部８０で検出されたＩＤＲアクセスユニット（ＩＤＲ_ＡＵ）のＩＤＲポンタデータを記憶する。つまり、ＩＤＲアクセスユニット（ＩＤＲ_ＡＵ）が検出されるたびに、その最新のＩＤＲアクセスユニット（ＩＤＲ_ＡＵ）が先頭のアクセスユニットであることを示すＩＤＲポインタデータを記憶し、旧いＩＤＲ_ＡＵのＩＤＲポインタデータとの差し替えを行う。

ＰＴＳ保持部１００は、ＩＤＲポインタ保持部９０と連携し、上述した簡易動画のＰＥＳパケットのＰＥＳヘッダ内から抽出されたＰＴＳを、対応するＥＳの領域情報と関連付けて保持する。

Ｈ２６４デコーダ６０は、ＥＳバッファ５０を介してエレメンタリストリーム（ＥＳ）を入力し、デコードする。また、切替え制御部１４０からの切替え制御信号ＣＨＧに従ってデコード動作の開始又は停止をする。すなわち、切替え制御信号ＣＨＧによってデコード動作の開始の指示がなされるとデコード動作を開始し、デコード動作の停止の指示がなされると、次にデコード動作の開始が指示されるまで、デコード動作を停止する。そして、デコード動作を開始すると、ＩＤＲポインタ保持部９０に格納されているＩＤＲポインタデータに対応する最新のＩＤＲアクセスユニット（ＩＤＲ_ＡＵ）を最初に読み出してデコード（復号）し、更にそのＩＤＲアクセスユニット（ＩＤＲ_ＡＵ）に続くアクセスユニットを順次に読み出しつつデコードを行う。なお、このデコード処理はリソースが許す限りにおいて高速に行っている。また、ＰＴＳが存在しない非アクセスユニット（非ＩＤＲ_ＡＵ）については、Ｈ．２６４の仕様に従いＰＴＳを生成して、ＰＴＳ判定部１１０へ供給する。

ＰＴＳ判定部１１０は、切替え制御信号ＣＨＧに従ってＨ２６４デコーダ６０がデコード動作を開始して各アクセスユニット（ＡＵ）をデコードする毎に、そのデコード完了時刻（現在時刻）と、そのデコードしたアクセスユニット（ＡＵ）のＰＴＳとを比較する。そして、ＰＴＳの提示時間情報から得られる提示時刻が現在時刻より未来になると、そのデコードされた画像データとＰＴＳとをイネーブル信号として、ビデオ送出部７０に送出する。つまり、ＰＴＳで指定される提示時刻（別言すれば表示時刻）が現在時刻よりも時間的に未来となる時間関係になると、そのデコードされた画像データとＰＴＳとをイネーブル信号として、ビデオ送出部７０に送出する。

ビデオ送出部７０は、上述のイネーブル信号として供給されたＰＴＳで指定される提示時刻（表示時刻）になると、瞬時に上述のイネーブル信号として供給された画像データを、ビデオバッファ１３０に送出する。更に、そのイネーブル信号としての画像データをビデオバッファ１３０に送出した後は、ビデオ送出部７０は、デマルチプレクサ４０からＥＳバッファ５０を介して供給されるエレメンタリストリーム（ＥＳ）をＨ２６４デコーダ６０がデコードすることで生じる画像データを、順次にビデオバッファ１３０に送出し、簡易動画サービスを提示するための通常の動作を行う。

ＭＰＥＧ-２デコーダ１２０は、切替え制御部１４０からの切替え制御信号ＣＨＧに従ってデコード動作の開始又は停止する。そして、ＭＰＥＧ-２ Ｖｉｄｅｏ方式のデコード動作を開始すると、高画質動画サービスのＰＥＳのＥＳをピクチャ単位でデコードし、ビデオバッファ１３０に供給する。

ビデオバッファ１３０は、Ｈ２６４デコーダ６０またはＭＰＥＧ-２デコーダ１２０でデコードされた画像データを一時記憶してディスプレイ等の表示部へ転送して映像を表示させる。

切替え制御部１４０は、チューナ１０からのＳメータ信号ＳmとＯＦＤＭ復調部２０からビットエラーレートデータＢＥＲを所定周期毎に入力し、それぞれ所定の閾値と比較することで、受信状態の良否を判定する。そして、高品質動画サービスを視聴中に受信状態が悪化すると簡易動画サービスの視聴に切替え、また、簡易動画サービスを視聴中に受信状態が良好になると、高品質動画サービスの視聴に切替える。また、ユーザー等の指示に従って、高品質動画サービスの視聴又は簡易動画サービスの視聴に切替える。なお、切替え制御信号ＣＨＧによって切替え制御を行うようになっている。

図２（ａ）（ｂ）は、高品質動画サービスの視聴から簡易動画サービスへの視聴に切替わる際の同期処理動作を概念的に表した説明図である。

図２（ａ）は、Ｈ２６４デコーダ６０がＥＳバッファ５０に記憶されている各アクセスユニット（ＡＵ）に対してデコードを完了する時刻（現在時刻）と、各アクセスユニット（ＡＵ）に対応付けられている固有の情報であるＰＴＳで指定される提示時刻（表示時刻）との関係を説明するための図２（ａ）、図２（ｂ）は、ＥＳバッファ５０に記憶されている各アクセスユニット（ＡＵ）を、ＰＴＳによる提示時刻に沿って表している。つまり、図示する提示時刻は、ＰＴＳ（Presentation Time Stamp：提示時間情報）から得られる放送局側と同期した時刻を示している。そして、ＰＴＳ＝１．０から１．６側へと時間が進むものとして表している。また、ＩＤＲ_ＡＵ（０）がＩＤＲアクセスユニット、残りのアクセスユニットが非ＩＤＲアクセスユニットであるものとして表している。

前述したように、Ｈ．２６４/ＡＶＣに関するＡＲＩＢ ＴＲ−Ｂ１４での運用では、ＩＤＲ周期が通常約２秒、最大５秒と規定されていることから、本実施形態では、最新のＩＤＲアクセスユニットをＥＳバッファ５０に記憶し、または、その最新のＩＤＲアクセスユニットに関する情報（ＩＤＲポインタデータ）をＩＤＲポインタ保持部９０で常に保持し、次のＩＤＲアクセスユニットが伝送されてくると、それを最新として更新することとしている。そして、図２（ｂ）において、最新のＩＤＲアクセスユニットがＩＤＲ_ＡＵ(0)であり、そのＰＴＳで示される提示時刻が〔１．１〕となっているものとしている。つまり、本実施形態では、複数のＩＤＲアクセスユニットが存在することが無いように、常に最新のＩＤＲアクセスユニットで更新し、それがＩＤＲ_ＡＵ(0)であるとして示している。

デコード動作を停止していたＨ２６４デコーダ６０が、図２（ａ）の時刻〔１．２５〕において、切替え制御信号ＣＨＧによってデコード動作の開始の指示がなされたとすると、今までデコード処理を行っていたＭＰＥＧ-２デコーダ１２０でデコードされた最新の画像データをビデオバッファ１３０に格納させ、その格納させた画像データで静止画像を継続的にディスプレイ表示させる。

そして、Ｈ２６４デコーダ６０が、最新のＩＤＲアクセスユニットであるＩＤＲ_ＡＵ(0)からデコードを開始する。

ＩＤＲ_ＡＵ(0)のデコードが完了した時刻（現在時刻）が、ＩＤＲ_ＡＵ(0)のＰＴＳで示される提示時刻〔１．０〕より時間的に過去（例えば、１．２８）となったとすると、そのＩＤＲ_ＡＵ(0)をデコードした画像データに基づいてディスプレイ表示を行わず、引き続き静止画像をディスプレイ表示させる。そして、次のアクセスユニット、すなわち非ＩＤＲ_ＡＵ(1)のデコード処理に移行する。

この非ＩＤＲ_ＡＵ(1)のデコードを完了した時刻（現在時刻）が、ＰＴＳで示される提示時刻〔１．２〕より時間的に過去（例えば、１．３２）となったとすると、そのＩＤＲ_ＡＵ(0)をデコードした画像データに基づく表示を行わず、引き続き静止画像をディスプレイ表示させたまま、次のアクセスユニット、すなわち非ＩＤＲ_ＡＵ(2)のデコード処理に移行する。

この非ＩＤＲ_ＡＵ(2)のデコードを完了した時刻（現在時刻）が、ＰＴＳで示される提示時刻〔１．３〕より時間的に過去（例えば、１．３４５）となったとすると、この場合にも引き続き静止画像をディスプレイ表示させたままにする。

こうして、基準となるＩＤＲ_ＡＵ(0)から順繰りにデコードを行っていき、次の非ＩＤＲ_ＡＵ(3)をデコード処理した結果、デコード完了時刻（現在時刻）が１．３７となったとすると、非ＩＤＲ_ＡＵ(3)のＰＴＳで示される提示時刻〔１．４〕の方が現在時刻より未来の時刻となる。

つまり、基準となるＩＤＲ_ＡＵ(0)から順繰りにデコードを行っていくと、次第に、提示時刻と現在時刻との差が小さくなって、デコード処理が提示時刻に追いついていき、ついに、提示時刻が現在時刻より未来の時刻となる。

こうして提示時刻が現在時刻より未来の時刻となると、その非ＩＤＲ_ＡＵ(3)をデコードした画像データと、提示時刻〔１．４〕を示すＰＴＳとをイネーブル信号としてビデオ送出部７０に供給することにより、映像表示予約を行う。

そして、実際に提示時刻〔１．４〕になると、送出部７０が瞬時に、イネーブル信号としての上記の画像データをビデオバッファ１３０に転送することで、静止画像の画像データを消去させ（上記の画像データで上書きさせ）、その転送した画像データに基づいてディスプレイ表示させる。

したがって、切替え制御信号ＣＨＧで切替えの指示が成された時点「１．２５」から、非ＩＤＲ_ＡＵ(3)のデコードが完了した時点（すなわち、提示時刻が現在時刻より未来となった時点）で、簡易動画サービスへの同期処理が実際には完了することになり、更に実質的には、提示時刻〔１．４〕になった時点で、静止画像の表示からデコードした画像データに基づく表示へと切替わった時点で同期処理が完了することになる。そして、以降は、Ｈ２６４デコーダ６０が通常のデコード処理を行って、デコード後の画像データを送出部７０を介してビデオバッファ１３０へ転送し、簡易動画サービスの表示を継続する。

更に、提示時刻が現在時刻より未来となるまでの期間では、Ｈ２６４デコーダ６０は通常のデコード処理よりも高速でデコード処理を行うことから、提示時刻が現在時刻より未来となるまでの期間は極めて短時間となり、同期処理を完了させる（同期を確立させる）のに要する時間は実質的に極めて短時間となる。このため、静止画像の表示を行っても短時間で済み、ユーザー等に対してほとんど違和感を与えることなく、簡易動画サービスへの切替えを迅速に行うことが可能である。

次に、画像処理装置１の動作について、図３、図４、図５のフローチャートを参照して説明する。

図３（ａ）（ｂ）は、切替え制御部１４０の動作を説明するためのフローチャート、図４は、画像処理装置１の全体の動作を説明するためのフローチャートである。図５は、図２で説明した簡易動画サービスへ切替わる際に必要となるアクセスユニット（ＡＵ）とＰＴＳ等を予め蓄積するための同期情報蓄積処理の動作を説明するためのフローチャートである。

切替え制御部１４０は、電源投入などが行われて受信機が受信動作を開始すると、図３（ａ）と（ｂ）に示す受信状態検出処理と切替え判定処理を並列的に行う。なお、本実施形態では、ユーザー等が切替え制御部１４０に対して、自動切替えを禁止する「マニュアルモード」と、受信状態に応じて自動切替えを行わせる「自動モード」が備えられている。

そして、ユーザー等が「マニュアルモード」を指定し、高画質動画サービスの受信を指定すると、切替え制御信号ＣＨＧによってＭＰＥＧ-２デコーダ１２０を動作させ、Ｈ２６４デコーダ６０を停止させ、受信状態が悪化しても継続的にＭＰＥＧ-２デコーダ１２０を動作させ、Ｈ２６４デコーダ６０を停止させる。

また、ユーザー等が「自動モード」を指定し、高画質動画サービスの受信を指定すると、切替え制御信号ＣＨＧによってＭＰＥＧ-２デコーダ１２０を動作させ、Ｈ２６４デコーダ６０を停止させる。ただし、受信状態が悪化すると、ＭＰＥＧ-２デコーダ１２０を停止させ、Ｈ２６４デコーダ６０を動作させる。更に、受信状態が良好になる（復帰する）と、ＭＰＥＧ-２デコーダ１２０を再び動作させ、Ｈ２６４デコーダ６０を停止させる。このように、ユーザー等が「自動モード」を指定し、高画質動画サービスの受信を指定すると、受信状態に応じた切替えを行うようになっている。

以下の動作説明では、便宜上、ユーザー等が「自動モード」を指定し、高画質動画サービスの受信を指定したものとして説明することとする。

まず、切替え制御部１４０は、図３（ａ）のステップＳ１において、所定のサンプリング時間を、内蔵するタイマー（Ｔ）にセットし、ステップＳ２において、タイマー（Ｔ）の計時値がサンプリング時間を超えたか否かの判断を行う。そして、超えたと判断するとステップＳ３において、チューナ１０から供給されるＳメータ信号ＳmとＯＦＤＭ復調部２０から供給されるビットエラーレートのデータＢＥＲを検出（取得）した後、再びステップＳ１からの処理を繰り返す。

このように、切替え制御部１４０は、所定のサンプリング時間毎に、Ｓメータ信号ＳmとビットエラーレートのデータＢＥＲを検出（取得）することで、ヒステリシスを持たせて受信状態の検出を行う。なお、サンプリング時間は、受信状態の変化を敏感に検出することとなったり、また鈍感となることのないように、調整されることが望ましい。

更に、切替え制御部１４０は、図３（ａ）の処理と平行して図３（ｂ）の処理も行い、ステップＳ１０において、現在視聴中の番組（サービス）を確認する。高画質動画サービスを視聴中であれば、ステップＳ１１において、図３（ａ）のステップＳ２で検出した最新のＳメータ信号ＳmとビットエラーレートのデータＢＥＲを夫々所定の閾値と比較し、その比較結果から受信状態の良否を判定する。そして、受信状態が悪化していると判定すると、簡易動画サービスへの視聴に切替えるべき条件が成立している（Ｙｅｓ）と判断して、ステップＳ１２へ移行し、受信状態が良好であると判定すると、簡易動画サービスへの視聴に切替えるべき条件が成立していない（Ｎｏ）と判断し、ステップＳ１０からの処理を繰り返す。

なお、ユーザー等が「マニュアルモード」にして簡易動画サービスを視聴するための入力指示をした場合にも、簡易動画サービスへの視聴に切替えるべき条件が成立している（Ｙｅｓ）と判断することとなるが、その場合の動作については説明を割愛する。

ステップＳ１２では、切替え制御部１４０は、簡易動画サービスへの視聴に切替えるためのイベントを発生する。つまり、切替え制御信号ＣＨＧによって、画像処理装置１全体の動作を「高画質動画サービス」から「簡易動画サービス」を視聴するための動作に切替えさせる。

次に、上述のステップＳ１０において、簡易動画サービスを視聴中であれば、ステップＳ１３に移行し、図３（ａ）のステップＳ２で検出した最新のＳメータ信号ＳmとビットエラーレートのデータＢＥＲを夫々所定の閾値と比較し、その比較結果から受信状態の良否を判定する。そして、受信状態が良好であると判定すると、高画質動画サービスへの視聴に切替えるべき条件が成立している（Ｙｅｓ）と判断し、ステップＳ１４へ移行し、受信状態が悪化している判定すると、高画質動画サービスへの視聴に切替えるべき条件が成立していない（Ｎｏ）と判断し、ステップＳ１０からの処理を繰り返す。

なお、ユーザー等が「マニュアルモード」にして高画質動画サービスを視聴するための入力指示をした場合にも、高画質動画サービスへの視聴に切替えるべき条件が成立している（Ｙｅｓ）と判断することとなるが、その場合の動作については説明を割愛する。

ステップＳ１４では、切替え制御部１４０は、高画質動画サービスへの視聴に切替えるためのイベントを発生する。つまり、切替え制御信号ＣＨＧによって、画像処理装置１全体の動作を「簡易動画サービス」から「高画質動画サービス」を視聴するための動作に切替えさせる。

以上に説明したように、切替え制御部１４０は、受信状態を監視しつつ受信状態に応じて、画像処理装置１全体の動作を「高画質動画サービス」から「簡易動画サービス」への切替え、または、「簡易動画サービス」から「高画質動画サービス」への切替え制御を行う。

次に、図４を参照して、画像処理装置１全体の動作（デコード処理）について説明する。

ステップＳ２０において、画像処理装置１の各構成要素が、切替え制御信号ＣＨＧによって切替えイベント（切替え制御）が発生されたか判断する。切替え制御が発生されていない場合には、ステップＳ３３において、現在視聴中のサービスを視聴するための通常デコードの処理（通常のデコード処理）を継続する。つまり、現在視聴中のサービスが「高画質動画サービス」であれば、ＭＰＥＧ-２デコーダ１２０が通常のデコード処理を継続し、Ｈ２６４デコーダ６０は停止したままとなる。一方、現在視聴中のサービスが「簡易動画サービス」であれば、Ｈ２６４デコーダ６０が通常のデコード処理を継続し、ＭＰＥＧ-２デコーダ１２０は停止したままとなる。

次に、上述のステップＳ２０において、切替えイベント（切替え制御）が発生されていると、ステップＳ２１において、ビデオバッファ１３０が最新の画像データ（フレーム画のデータ）を保持する。つまり、ビデオバッファ１３０は、現在視聴中のサービスが「高画質動画サービス」であった場合には、ＭＰＥＧ-２デコーダ１２０から供給された最新の画像データ（フレーム画のデータ）を保持し、現在視聴中のサービスが「簡易動画サービス」であった場合には、Ｈ２６４デコーダ６０から供給された最新の画像データ（フレーム画のデータ）を保持することとなる。

更にステップＳ２２において、ビデオバッファ１３０がその保持した最新の画像データを継続して出力することにより、静止画をディスプレイ表示させる。

次に、ステップＳ２３において、切替え制御信号ＣＨＧによって切替え先が「高画質動画サービス」となっていると、ＭＰＥＧ-２デコーダ１２０が動作を開始し、Ｈ２６４デコーダ６０が停止してステップＳ２４へ移行し、「簡易動画サービス」であればＭＰＥＧ-２デコーダ１２０が停止し、Ｈ２６４デコーダ６０が動作を開始してステップＳ２８へ移行する。

ステップＳ２４に移行すると、図５に示す「同期情報蓄積処理」が起動され、更にステップＳ２５において、高画質動画サービス同期処理が開始される。つまり、ステップＳ２４では、ＭＰＥＧ-２デコーダ１２０が動作している間に、簡易動画サービスへ切替わった場合の同期処理を行う際に必要となるアクセスユニット（ＡＵ）とＰＴＳ等とをＩＤＲポインタデータによって対応付けて予め蓄積しておくための、同期情報蓄積処理が開始される。なお、この同期情報蓄積処理については後述する。

ステップＳ２５では、ＭＰＥＧ-２デコーダ１２０がデマルチプレクサ４０から供給されるＰＥＳパケットのＰＥＳヘッダからＰＴＳ（提示時間情報）を取得し、そのＰＴＳとＰＣＲ（番組時刻基準値情報）から、放送側と同期するために提示時刻と現在時刻とを合わせるための同期処理を開始する。そして、ステップＳ２６で同期処理が完了すると、ステップＳ２７において、同期したときにデコードした画像データをビデオバッファに供給し、その画像データに基づくフレーム画像をディスプレイ表示させ、ステップＳ２０からの処理を継続する。

ここで、ＭＰＥＧ-２デコーダ１２０が同期処理を完了すると、ステップＳ２０からステップＳ３３に移行し、ＭＰＥＧ-２デコーダ１２０が通常のデコード処理を行うこととなり、それ以降は、高画質動画サービスがディスプレイ表示されることになる。

次に、図５の同期情報蓄積処理について説明する。上述したように、ステップＳ２４において同期情報蓄積処理が起動されると、ＭＰＥＧ-２デコーダ１２０による高画質動画サービスのための動作を行っている間中、ＥＳバッファ５０とＩＤＲ検出部８０とＩＤＲポインタ保持部９０及びＰＴＳ保持部１００が、図５の同期情報蓄積処理を継続して行う。

まず、図５のステップＳ２４１において、高画質動画サービスのための動作中であることの確認がなされた上でステップＳ２４２に移行する。

ステップＳ２４２では、ＩＤＲ検出部８０が、デマルチプレクサ４０からＥＳバッファ５０に新たなＰＥＳのエレメンタリストリームＥＳが格納されたかどうか否かを判定する。そして、新たなエレメンタリストリームＥＳが格納されるまで判定を繰り返し、新たなエレメンタリストリームＥＳが格納されるとステップＳ２４３に移行する。

ステップＳ２４３では、ＩＤＲ検出部８０が、ＥＳバッファ５０に蓄積された新しいエレメンタリストリームＥＳを解析し、続くステップＳ２４４において、ＩＤＲアクセスユニットが存在するか否かを判定する。ＩＤＲアクセスユニットが存在してない場合（すなわち、非ＩＤＲアクセスユニットである場合）は判定条件が満たされず、ステップＳ２４２に戻って処理を繰り返す。一方、ＩＤＲアクセスユニットが存在していた場合は、判定条件が満たされ、ステップＳ２４５に移行する。

ステップＳ２４５では、ＩＤＲポインタ保持部９０が、当該検出したＩＤＲアクセスユニットのＥＳバッファ５０におけるＩＤＲポインタデータを保持（別言すると、既に保持していたＩＤＲポインタデータを上書き更新）し、次に、ステップＳ２４６において、ＰＴＳ保持部１００が、対応するＩＤＲアクセスユニットのＰＴＳを保存して、ステップＳ２４２からの処理を繰り返す。

そして、切替え制御信号ＣＨＧによる簡易動画サービスへの切替え制御がなされるまで（別言すれば、ＭＰＥＧ-２デコーダ１２０が動作中の間）、同期情報蓄積処理が継続的に行われる。

再び、図４において、上述のステップＳ２３において、切替え制御信号ＣＨＧにより、簡易動画サービスへの切替え制御がなされていると、ステップＳ２８へ移行し、ＭＰＥＧ-２デコーダ１２０が停止し、Ｈ２６４デコーダ６０が動作を開始することになる。そして、簡易動画サービスのための同期処理が開始される。

次にステップＳ２９において、Ｈ２６４デコーダ６０が、ＩＤＲポインタ保持部９０に保持されているＩＤＲポインタデータに関連づけられている最新のＩＤＲアクセスユニットをＥＳバッファ５０から取得してデコードし、次にステップＳ３０において、ＰＴＳ判定部１１０が、ＰＴＳ保持部１００に格納されている当該ＩＤＲアクセスユニットのＰＴＳ（つまり、対応付けられている固有のＰＴＳ）を取得し、更にステップＳ３０において、その取得したＰＴＳで示される提示時刻とデコード完了時刻（現在時刻）との差から、提示時刻が現在時刻より未来の時刻となっているか否か判断する。そして、提示時刻が現在時刻より未来の時刻でないときには、ステップＳ２９に戻って、ＩＤＲアクセスユニットの次のアクセスユニット（ＡＵ）についてステップＳ２９〜Ｓ３１の処理を行い、その結果、提示時刻が現在時刻より未来の時刻となっていなければ、ステップＳ２９に戻って、更に次のアクセスユニット（ＡＵ）についてステップＳ２９〜Ｓ３１の処理を行う。

つまり、図２で説明したように、提示時刻が現在時刻より未来の時刻となるまで、ＥＳバッファ５０に格納されている基準のＩＤＲアクセスユニットから順次に他のアクセスユニット（ＡＵ）についても処理を行い、「提示時刻が現在時刻より未来の時刻となる」という条件が満たされると、同期処理が完了したことになり、ステップＳ３２に移行する。

そして、ステップＳ３２において、ＰＴＳ判定部１１０が、送出部７０に対して、同期確立したときのＰＴＳとデコードされた画像データとをイネーブル信号として転送し、そして提示時刻が来ると、その画像データを瞬時にビデオバッファ１３０に格納させてディスプレイ表示させる。つまり、静止画表示の状態から、Ｈ２６４デコーダ６０による通常のデコード動作状態となる。

そして、Ｈ２６４デコーダ６０が通常のデコードを開始すると、ステップＳ２０からステップＳ３３に移行し、それ以降は、Ｈ２６４デコーダ６０が通常のデコード処理を継続することとなる。

〔実施形態の効果〕
以上に説明したように、本実施形態の画像処理装置１によれば、次のような効果が得られる。

まず、ＭＰＥＧ-２デコーダ１２０でＨＤＴＶやＳＤＴＶの高画質動画サービスをデコードしている際に、ＥＳバッファ５０とＩＤＲ検出部８０とＩＤＲポインタ保持部９０及びＰＴＳ保持部１００で構成される情報蓄積処理手段が、簡易動画サービス（ワンセグ放送など）のストリームから、アクセスユニットとその固有の情報である提示時間情報を有するＰＴＳを記憶しておき、切替え制御部１４０によってＭＰＥＧ-２デコーダ１２０からＨ２６４デコーダ６０への切替え制御がなされると、Ｈ２６４デコーダ６０が情報蓄積処理手段に記憶されている最新のＩＤＲアクセスユニット（ＩＤＲ_ＡＵ）から各アクセスユニットを順にデコードし、そのデコード完了時刻（現在時刻）よりＰＴＳで示される提示時刻の方が未来の時刻となる場合をＰＴＳ判定部１１０が判定すると、Ｈ２６４デコーダ６０が同期処理を完了して通常のデコード処理に移行するようになっている。このことから、Ｈ２６４デコーダ６０への切替え制御が行われてから、Ｈ２６４デコーダ６０が同期確立となるまでの同期処理期間を短縮化することが可能となり、ユーザー対して違和感を低減することができる。

また、本実施形態の画像処理装置１では、上述の同期処理の短縮化を実現することと併せて、切替先のデコーダが同期処理を行っている間、切替えられる前のデコーダがデコードした画像データを静止画像として表示するので、黒表示を行う従来技術に較べて、ユーザー等に対し違和感を低減することができる。

また、切替え制御部１４０がＨ２６４デコーダ６０とＭＰＥＧ-２デコーダ１２０を排他的に切替える、すなわち、Ｈ２６４デコーダ６０を動作させるときにはＭＰＥＧ-２デコーダ１２０を停止させ、ＭＰＥＧ-２デコーダ１２０を動作させるときにはＨ２６４デコーダ６０を停止させるので、各デコーダの処理負担を軽減することができると共に、消費電力の低減等を図ることができる。また、こうしたデコーダの排他的切替を行っても再生影像が途切れることなくシームレスにディスプレイ表示できるのは、上述のＥＳバッファ５０とＩＤＲ検出部８０とＩＤＲポインタ保持部９０及びＰＴＳ保持部１００で構成される構情報蓄積処理手段によって、同期処理を行う際に必要となるＰＴＳとアクセスユニット（ＡＵ）を記憶しておき、その記憶しておいたＰＴＳとアクセスユニット（ＡＵ）を用いて同期処理を短時間で完了させるようにしたことが大きく寄与している。

また、切替え制御部１４０が受信状態を検出し、検出した受信状態の良否に応じて、ＭＰＥＧ-２デコーダ１２０とＨ２６４デコーダ６０を自動的に切替制御するので、ユーザー等に対し、受信状態に良いときには高画質動画サービスを自動的に提供し、受信状態の悪いときには伝送品質の良い簡易動画サービスを自動的に提供することができ、特に、携帯電話等の移動端末装置や、自動車に搭載されるナビゲーションシステム等において、ユーザー等に対し優れた利便性や操作性を提供することができる。

なお、以上に説明した実施形態では、ＥＳバッファ５０とＩＤＲ検出部８０とＩＤＲポインタ保持部９０及びＰＴＳ保持部１００で構成される構情報蓄積処理手段によって、ＰＴＳとアクセスユニット（ＡＵ）をＥＳバッファ５０に記憶する際、常に最新のＩＤＲアクセスユニット（ＩＤＲ_ＡＵ）が得られるように更新しつつ記憶するとしているが、かかる更新の処理を行わないようにしても良い。つまり、切替え制御部１４０によってＨ２６４デコーダ６０への切替制御がなされ、Ｈ２６４デコーダ６０が同期処理を行う際に、ＥＳバッファ５０に記憶されていた最新のＩＤＲアクセスユニット（ＩＤＲ_ＡＵ）を基準にしてデコード処理を開始し、提示時刻がデコード完了時（現在時刻）より未来の時刻となる時間関係をＰＴＳ判定部１１０が判定すればよい。すなわち、ＰＴＳとアクセスユニット（ＡＵ）をＥＳバッファ５０に記憶する際には、必ずしも最新の１つのＩＤＲアクセスユニットだけを記憶する処理する必要は無く、複数のＩＤＲアクセスユニットを記憶するようにしても良い。要は、Ｈ２６４デコーダ６０への切替制御がなされ、Ｈ２６４デコーダ６０が同期処理を行う際に、ＥＳバッファ５０に記憶されていた最新のＩＤＲアクセスユニット（ＩＤＲ_ＡＵ）を基準にしてデコード処理を開始するようにすれば良い。

実施形態に係る画像処理装置の構成を表したブロック図である。 図１に示した画像処理装置の機能を説明するための説明図である。 図１に示した画像処理装置の動作を説明するためのフローチャートである。 更に、図１に示した画像処理装置の動作を説明するためのフローチャートである。 更に、図１に示した画像処理装置の動作を説明するためのフローチャートである。

符号の説明

１…画像処理装置
５０…ＥＳバッファ
６０…Ｈ２６４デコーダ
８０…ＩＤＲ検出部
９０…ＩＤＲポインタ保持部
１００…ＰＴＳ保持部
１１０…ＰＴＳ判定部
１２０…ＭＰＥＧ-２デコーダ
１３０…ビデオバッファ
１４０…切替え制御部

Claims (5)

1. 符号化及びパケット化された高画質動画サービスのストリームをデコードする第１のデコーダ手段と、各々固有の提示時間情報が付された基準のアクセスユニット及び非基準のアクセスユニットが多重化された簡易動画サービスのストリームをデコードする第２のデコーダ手段とを備える画像処理装置であって、
   前記第１のデコード手段と第２のデコード手段の動作と停止を制御し、前記第１のデコード手段を動作させるときには前記第２のデコード手段を停止させ、前記第２のデコード手段を動作させるときには前記第１のデコード手段を停止させる切替え制御手段と、
   前記第１のデコード手段がデコード動作している間、前記簡易動画サービスのストリームから、前記固有の提示時間情報とアクセスユニットとを対応付けて順次に記憶すると共に、前記切替え制御手段によって前記第１のデコード手段のデコード動作から前記第２のデコード手段のデコード動作へと切替えられると、前記第１のデコード手段がデコード動作している間に記憶しておいた前記アクセスユニットのうち、最新の基準のアクセスユニットから順次に前記第２のデコーダ手段に通常よりも高速でデコードさせる同期情報蓄積処理手段と、
   前記第２のデコーダ手段が前記アクセスユニットのデコードを完了する現在時刻と、デコードされた前記アクセスユニットに対応付けられて前記同期情報蓄積処理手段に記憶されている固有の提示時間情報による提示時刻とを比較し、当該提示時刻が前記現在時刻より未来の時刻となると、同期確立と判定して、前記第２のデコーダ手段に通常のデコード処理を開始させる判定手段と、
   を具備することを特徴とする画像処理装置。
2. 前記第１のデコード手段と前記第２のデコード手段でデコードされる画像データを一時保持してディスプレイ表示するビデオバッファを更に備え、
   前記ビデオバッファは、前記切替え制御手段によって前記第１のデコード手段のデコード動作から前記第２のデコード動作へと切替えられると、当該切替え時に前記第１のデコード手段でデコードされた画像データに基づいて、当該切替え時から前記判定手段が同期確立と判定して前記第２のデコーダ手段が通常のデコード処理を開始するまでの間、静止画像をディスプレイ表示すること、
   を特徴とする請求項１に記載の画像処理装置。
3. 前記高画質動画サービスと簡易動画サービスは、無線受信手段で受信されるサービスであって、
   前記切替え制御手段は、前記無線受信手段における受信状態の良否を判定し、前記第１のデコード手段がデコード動作中に受信状態が悪化したことを検出すると、前記第２のデコード手段のデコード動作に切り替えること、
   を特徴とする請求項１又は２に記載の画像処理装置。
4. 前記第１のデコード手段は、ＭＰＥＧ-２Ｖｉｄｅｏ方式に準拠したデコードを行い、前記第２のデコード手段は、Ｈ．２６４/ＡＶＣ方式に準拠したデコードを行うこと、
   を特徴とする請求項１〜３の何れか１項に記載の画像処理装置。
5. 符号化及びパケット化された高画質動画サービスのストリームをデコードする第１のデコーダ工程と、各々固有の提示時間情報が付された基準のアクセスユニット及び非基準のアクセスユニットが多重化された簡易動画サービスのストリームをデコードする第２のデコーダ工程とを備える画像処理方法であって、
   前記第１のデコード工程と第２のデコード工程の処理と停止を制御し、前記第１のデコード工程の処理を行わせるときには前記第２のデコード工程を停止させ、前記第２のデコード工程の処理を行わせるときには前記第１のデコード工程を停止させる切替え制御工程と、
   前記第１のデコード工程におけるデコード処理の間、前記簡易動画サービスのストリームから、前記固有の提示時間情報とアクセスユニットとを対応付けて順次に記憶すると共に、前記切替え制御工程によって前記第１のデコード工程から前記第２のデコード工程へと切替えられると、前記第１のデコード工程がデコード処理をしている間に記憶しておいた前記アクセスユニットのうち、最新の基準のアクセスユニットから順次に前記第２のデコーダ工程においてデコードさせる同期情報蓄積処理工程と、
   前記第２のデコーダ工程で前記アクセスユニットのデコードが完了する現在時刻と、デコードされた前記アクセスユニットに対応付けられて前記記憶工程において記憶されている固有の提示時間情報による提示時刻とを比較し、当該提示時刻が前記現在時刻より未来の時刻となると、同期確立と判定して、前記第２のデコーダ工程において通常のデコード処理を開始させる判定工程と、
   を具備することを特徴とする画像処理方法。

Images