JPH09284771A - 圧縮符号化画像信号の処理装置および処理方法 - Google Patents
圧縮符号化画像信号の処理装置および処理方法Info
- Publication number
- JPH09284771A JPH09284771A JP11534596A JP11534596A JPH09284771A JP H09284771 A JPH09284771 A JP H09284771A JP 11534596 A JP11534596 A JP 11534596A JP 11534596 A JP11534596 A JP 11534596A JP H09284771 A JPH09284771 A JP H09284771A
- Authority
- JP
- Japan
- Prior art keywords
- stream
- switching
- streams
- phase
- processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
(57)【要約】
【課題】 圧縮符号化による二つのストリームを切り替
えた時のエラー、切り替え点のズレ、ストリームから出
力画像までの時間的ズレの発生を防止する。 【解決手段】 可変遅延回路１１〜１３から遅延量が制
御された切り替え信号、ストリームＡ、Ｂが出力され
る。各遅延量は、遅延制御回路１４によって制御され
る。可変遅延回路１１〜１３および遅延制御回路１４に
よって、切り替え信号の位相と、二つのストリームのＧ
ＯＰの位相とが合うように位相シフト処理がなされる。
スイッチング回路１５によって、二つのストリームが切
り替えられ、スイッチドストリームが形成される。切り
替え点および位相シフトの情報（フラグ）も多重され
る。復号側では、スイッチドストリームを復号する。そ
の場合に、復号化器２０において、動き補償、フリーズ
（間引き）処理がなされ、可変遅延回路２２によって復
号画像の遅延処理がなされる。
えた時のエラー、切り替え点のズレ、ストリームから出
力画像までの時間的ズレの発生を防止する。 【解決手段】 可変遅延回路１１〜１３から遅延量が制
御された切り替え信号、ストリームＡ、Ｂが出力され
る。各遅延量は、遅延制御回路１４によって制御され
る。可変遅延回路１１〜１３および遅延制御回路１４に
よって、切り替え信号の位相と、二つのストリームのＧ
ＯＰの位相とが合うように位相シフト処理がなされる。
スイッチング回路１５によって、二つのストリームが切
り替えられ、スイッチドストリームが形成される。切り
替え点および位相シフトの情報（フラグ）も多重され
る。復号側では、スイッチドストリームを復号する。そ
の場合に、復号化器２０において、動き補償、フリーズ
（間引き）処理がなされ、可変遅延回路２２によって復
号画像の遅延処理がなされる。
Description
【０００１】
【発明の属する技術分野】この発明は、例えばフレーム
間符号化を用いた圧縮符号化信号の切り替えに適用され
る圧縮符号化画像信号の処理装置および処理方法に関す
る。
間符号化を用いた圧縮符号化信号の切り替えに適用され
る圧縮符号化画像信号の処理装置および処理方法に関す
る。
【０００２】
【従来の技術】画像信号のフレーム間相関を利用して画
像信号を圧縮する符号化が知られている。一例として、
２フレーム単位の圧縮符号化により符号化された信号に
関して、符号化信号の切り替え（あるいは編集）方法に
ついて説明する。２フレーム単位の符号化構成として、
Ｂ−Ｉの符号化構成を挙げる。Ｉは、フレーム内圧縮符
号化により符号化されたフレームを表し、Ｂは、両方向
動き補償予測を使用したフレーム間圧縮符号化により符
号化されたフレームを表す。切り替え方法の説明に先立
って図１２および図１３を参照して符号化および復号化
の信号処理についてそれぞれ説明する。
像信号を圧縮する符号化が知られている。一例として、
２フレーム単位の圧縮符号化により符号化された信号に
関して、符号化信号の切り替え（あるいは編集）方法に
ついて説明する。２フレーム単位の符号化構成として、
Ｂ−Ｉの符号化構成を挙げる。Ｉは、フレーム内圧縮符
号化により符号化されたフレームを表し、Ｂは、両方向
動き補償予測を使用したフレーム間圧縮符号化により符
号化されたフレームを表す。切り替え方法の説明に先立
って図１２および図１３を参照して符号化および復号化
の信号処理についてそれぞれ説明する。
【０００３】入力画像は、その１フレーム毎にＩ、Ｂの
ピクチャタイプが決められる。Ｂのタイプのフレーム画
像に関しては、前後のフレーム画像から双方向動き補償
予測を受け、予測誤差に変換される。動き補償予測のた
めに使用されるＩの画像として、一般的にＩの画像をフ
レーム内符号化した画像をローカル復号した画像を用い
る。双方向動き補償予測に発生した誤差画像（Ｂ）およ
び入力画像（Ｉ）は、ＤＣＴ（Discrete Cosine Transf
orm)変換され、変換係数が量子化され、さらに、量子化
出力がハフマン符号等の可変長符号化され、可変長符号
化により圧縮符号化信号が発生する。
ピクチャタイプが決められる。Ｂのタイプのフレーム画
像に関しては、前後のフレーム画像から双方向動き補償
予測を受け、予測誤差に変換される。動き補償予測のた
めに使用されるＩの画像として、一般的にＩの画像をフ
レーム内符号化した画像をローカル復号した画像を用い
る。双方向動き補償予測に発生した誤差画像（Ｂ）およ
び入力画像（Ｉ）は、ＤＣＴ（Discrete Cosine Transf
orm)変換され、変換係数が量子化され、さらに、量子化
出力がハフマン符号等の可変長符号化され、可変長符号
化により圧縮符号化信号が発生する。
【０００４】一般的に、Ｂの圧縮符号化信号の方がＩの
圧縮符号化信号より動き補償の分だけ情報量が少ない。
また、最終的に圧縮符号化信号を出力する場合は、Ｂ−
Ｉの画像の組に対して、Ｉ−Ｂの順序で圧縮符号化信号
（ストリームと称する）を発生する。それによって、復
号器のハードウエァの低減、処理時間の圧縮が図れる。
さらに、Ｉ−Ｂの２フレーム単位、すなわち、ＧＯＰ単
位で一定のデータ量となるように、量子化が制御され
る。データ量の制御としては、フィードホワード制御、
フィードバック制御等が使用される。この発生データ量
の制御によって、ＶＴＲのような固定レートの記録を行
った時に記録媒体上の２フレーム単位の長さを一定とで
き、編集が容易となる。
圧縮符号化信号より動き補償の分だけ情報量が少ない。
また、最終的に圧縮符号化信号を出力する場合は、Ｂ−
Ｉの画像の組に対して、Ｉ−Ｂの順序で圧縮符号化信号
（ストリームと称する）を発生する。それによって、復
号器のハードウエァの低減、処理時間の圧縮が図れる。
さらに、Ｉ−Ｂの２フレーム単位、すなわち、ＧＯＰ単
位で一定のデータ量となるように、量子化が制御され
る。データ量の制御としては、フィードホワード制御、
フィードバック制御等が使用される。この発生データ量
の制御によって、ＶＴＲのような固定レートの記録を行
った時に記録媒体上の２フレーム単位の長さを一定とで
き、編集が容易となる。
【０００５】次に、図１３を参照して圧縮符号化の復号
化の処理について説明する。入力されるストリームは、
可変長符号化の復号、逆量子化、逆ＤＣＴの処理を受
け、動き補償誤差画像（Ｂ）、出力画像（Ｉ）にそれぞ
れ変換される。そして、前後の出力画像（Ｉ）により動
き補償予測がなされ、出力画像に変換される。復号処理
では、Ｉ−Ｂの順序のストリームに対して、Ｂ−Ｉの順
序の復号画像が形成される。
化の処理について説明する。入力されるストリームは、
可変長符号化の復号、逆量子化、逆ＤＣＴの処理を受
け、動き補償誤差画像（Ｂ）、出力画像（Ｉ）にそれぞ
れ変換される。そして、前後の出力画像（Ｉ）により動
き補償予測がなされ、出力画像に変換される。復号処理
では、Ｉ−Ｂの順序のストリームに対して、Ｂ−Ｉの順
序の復号画像が形成される。
【０００６】上述したような圧縮符号化により発生した
二つのストリームを切り替える処理について説明する。
このような切り替えは、例えば磁気テープ、光ディスク
等に記録されている圧縮符号化された映像素材を編集す
る場合に必要とされる。例えば、二つのストリームに付
随した音声が無音の箇所で切り替えを行うことを可能と
する切り替え信号が形成される。先ず、図１４に示すよ
うに、二つのストリームのＧＯＰ（Ｉ−Ｂ）の位相が合
っており（すなわち、同期しており）、切り替え信号も
ＧＯＰの位相に合っている状態の処理を説明する。
二つのストリームを切り替える処理について説明する。
このような切り替えは、例えば磁気テープ、光ディスク
等に記録されている圧縮符号化された映像素材を編集す
る場合に必要とされる。例えば、二つのストリームに付
随した音声が無音の箇所で切り替えを行うことを可能と
する切り替え信号が形成される。先ず、図１４に示すよ
うに、二つのストリームのＧＯＰ（Ｉ−Ｂ）の位相が合
っており（すなわち、同期しており）、切り替え信号も
ＧＯＰの位相に合っている状態の処理を説明する。
【０００７】ストリームＡとストリームＢは、ＧＯＰの
位相が合って状態で入力され、ＧＯＰの位相に合った切
り替え信号により切り替えられ、ストリームＡのＢ１に
対してストリームＢのＩ２が接続されるように位置Ｘで
スイッチングされ、そして、ストリームＢのＢ３に対し
てストリームＡのＩ４が接続されるように位置Ｙでスイ
ッチングされ、Ｘ−Ｙ間にストリームＢがインサートさ
れたストリーム（スイッチドストリームと称する）が形
成される。
位相が合って状態で入力され、ＧＯＰの位相に合った切
り替え信号により切り替えられ、ストリームＡのＢ１に
対してストリームＢのＩ２が接続されるように位置Ｘで
スイッチングされ、そして、ストリームＢのＢ３に対し
てストリームＡのＩ４が接続されるように位置Ｙでスイ
ッチングされ、Ｘ−Ｙ間にストリームＢがインサートさ
れたストリーム（スイッチドストリームと称する）が形
成される。
【０００８】このスイッチドストリームが上述した復号
化の処理によって出力画像へ変換される。この復号化の
処理において、切り替え点Ｘの直後の画像Ｂ２、および
切り替え点Ｙの直後の画像Ｂ４は、片側の画像Ｉ２およ
びＩ４を用いた片方向予測により復号される。片方向予
測により形成される出力画像をＰ２およびＰ４で示す。
その結果、双方向予測による復号画像と比較して画質の
劣化が多少生じるが、切り替えが正しく実現され、出力
画像にエラーが生じない。なお、図１４に示すタイミン
グチャートにおいては、回路系、伝送路等でおいて実際
に生じる遅延時間は、説明の簡単のために無視されてい
る。以下に説明するタイミングチャートに関しても同様
である。
化の処理によって出力画像へ変換される。この復号化の
処理において、切り替え点Ｘの直後の画像Ｂ２、および
切り替え点Ｙの直後の画像Ｂ４は、片側の画像Ｉ２およ
びＩ４を用いた片方向予測により復号される。片方向予
測により形成される出力画像をＰ２およびＰ４で示す。
その結果、双方向予測による復号画像と比較して画質の
劣化が多少生じるが、切り替えが正しく実現され、出力
画像にエラーが生じない。なお、図１４に示すタイミン
グチャートにおいては、回路系、伝送路等でおいて実際
に生じる遅延時間は、説明の簡単のために無視されてい
る。以下に説明するタイミングチャートに関しても同様
である。
【０００９】
【発明が解決しようとする課題】しかしながら、二つの
ストリームのＧＯＰの位相が合っていること、並びに切
り替え信号の位相がＧＯＰの位相に合っていることが満
たされない場合には、スイッチドストリームを復号した
出力画像にエラーが発生する問題が生じる。図１５を参
照して、二つのストリームのＧＯＰの位相は合っている
が、切り替え信号の位相がＧＯＰに対して１フレームず
れている場合について説明する。２フレーム単位の符号
化の場合では、相対的な位相関係としては、位相が合っ
ている場合と、位相が１フレームずれている場合とのい
ずれかの場合がありうる。
ストリームのＧＯＰの位相が合っていること、並びに切
り替え信号の位相がＧＯＰの位相に合っていることが満
たされない場合には、スイッチドストリームを復号した
出力画像にエラーが発生する問題が生じる。図１５を参
照して、二つのストリームのＧＯＰの位相は合っている
が、切り替え信号の位相がＧＯＰに対して１フレームず
れている場合について説明する。２フレーム単位の符号
化の場合では、相対的な位相関係としては、位相が合っ
ている場合と、位相が１フレームずれている場合とのい
ずれかの場合がありうる。
【００１０】切り替え信号は、ＧＯＰの途中でストリー
ムＡからストリームＢへ切り替える点Ｘで立ち上がり、
ＧＯＰの途中でストリームＢからストリームＡへ切り替
える点Ｙで立ち下がる。すなわち、図１５において、最
初の切り替え点Ｘは、出力画像において、Ｂ２の画像ま
ではストリームＡの画像を選択し、Ｉ２からストリーム
Ｂを選択することを意味している。また、後ろ側の切り
替え点Ｙは、出力画像において、Ｂ４の画像まではスト
リームＢの画像を選択し、Ｉ４からストリームＡを選択
することを意味している。
ムＡからストリームＢへ切り替える点Ｘで立ち上がり、
ＧＯＰの途中でストリームＢからストリームＡへ切り替
える点Ｙで立ち下がる。すなわち、図１５において、最
初の切り替え点Ｘは、出力画像において、Ｂ２の画像ま
ではストリームＡの画像を選択し、Ｉ２からストリーム
Ｂを選択することを意味している。また、後ろ側の切り
替え点Ｙは、出力画像において、Ｂ４の画像まではスト
リームＢの画像を選択し、Ｉ４からストリームＡを選択
することを意味している。
【００１１】しかしながら、切り替え信号が１フレーム
のずれを持つために、ＧＯＰの途中で切り替え処理が行
われる。その結果、二つのストリームは、それぞれＩ２
およびＩ４で混合されるものとなる。従って、Ｉ２およ
びＩ４の復号画像がエラーを含むものとなり、また、片
方向予測を行うとしても、これらのＩ２およびＩ４の復
号画像から予測されるＢ２およびＢ４の復号画像もエラ
ーを含んだものとなる。
のずれを持つために、ＧＯＰの途中で切り替え処理が行
われる。その結果、二つのストリームは、それぞれＩ２
およびＩ４で混合されるものとなる。従って、Ｉ２およ
びＩ４の復号画像がエラーを含むものとなり、また、片
方向予測を行うとしても、これらのＩ２およびＩ４の復
号画像から予測されるＢ２およびＢ４の復号画像もエラ
ーを含んだものとなる。
【００１２】図１６は、二つのストリームのＧＯＰの位
相が合っていない場合、より具体的には、ストリームＡ
に対してストリームＢが１フレーム遅れている場合の処
理を示す。この場合、切り替えは、二つのストリームの
内のいずれかのストリームにおいて、ＧＯＰの途中で切
り替え処理が行われる。例えば、ストリームＢのＧＯＰ
の位相に同期した点ＸおよびＹにおいて切り替え信号で
切り替えても、ストリームＡにおいてはＧＯＰの途中で
切り替えられてしまい、Ｂ２およびＩ４の画像がエラー
になってしまう。
相が合っていない場合、より具体的には、ストリームＡ
に対してストリームＢが１フレーム遅れている場合の処
理を示す。この場合、切り替えは、二つのストリームの
内のいずれかのストリームにおいて、ＧＯＰの途中で切
り替え処理が行われる。例えば、ストリームＢのＧＯＰ
の位相に同期した点ＸおよびＹにおいて切り替え信号で
切り替えても、ストリームＡにおいてはＧＯＰの途中で
切り替えられてしまい、Ｂ２およびＩ４の画像がエラー
になってしまう。
【００１３】このように、二つのストリームを単純に切
り替える方式は、ストリームのＧＯＰの位相が合ってお
り、切り替え信号もこのＧＯＰの位相に合っていない
と、切り替えの前後でエラーを引き起こす問題があっ
た。言い換えると、切り替えの精度がＧＯＰより細かい
単位、例えば１フレーム単位とすることができない問題
があった。
り替える方式は、ストリームのＧＯＰの位相が合ってお
り、切り替え信号もこのＧＯＰの位相に合っていない
と、切り替えの前後でエラーを引き起こす問題があっ
た。言い換えると、切り替えの精度がＧＯＰより細かい
単位、例えば１フレーム単位とすることができない問題
があった。
【００１４】従って、この発明の目的は、切り替えをＧ
ＯＰより細かい精度で行うことを可能とし、また、切り
替え後の画像の時間的な位相精度をより細かい精度で規
定することが可能な圧縮符号化信号の処理装置および処
理方法を提供することにある。
ＯＰより細かい精度で行うことを可能とし、また、切り
替え後の画像の時間的な位相精度をより細かい精度で規
定することが可能な圧縮符号化信号の処理装置および処
理方法を提供することにある。
【００１５】
【課題を解決するための手段】請求項１に記載の発明
は、第１および第２のストリームを切り替えて第３のス
トリームを形成するようにした処理装置であって、第１
および第２のストリームは、フィールド内またはフレー
ム内符号化と、フィールド間またはフレーム間相関を用
いた符号化とを含む、２フィールドまたは２フレーム以
上のＧＯＰ構成を有する圧縮符号化画像信号の処理装置
において、第１および第２のストリームのＧＯＰの位相
が合っていない場合に、一方のストリームを時間的にシ
フトすることによりＧＯＰの位相を合わせる位相シフト
処理と、ＧＯＰの位相と切り替え信号の位相が合ってい
ない場合に、切り替え信号の位相をＧＯＰの位相に合わ
せるシフト処理とを行う遅延手段および遅延手段に対す
る制御手段と、遅延手段からの第１および第２のストリ
ームと切り替え信号を受け取り、切り替え信号によって
第１および第２のストリームを切り替え、第３のストリ
ームを出力する手段とを備えることを特徴とする圧縮符
号化画像信号の処理装置である。
は、第１および第２のストリームを切り替えて第３のス
トリームを形成するようにした処理装置であって、第１
および第２のストリームは、フィールド内またはフレー
ム内符号化と、フィールド間またはフレーム間相関を用
いた符号化とを含む、２フィールドまたは２フレーム以
上のＧＯＰ構成を有する圧縮符号化画像信号の処理装置
において、第１および第２のストリームのＧＯＰの位相
が合っていない場合に、一方のストリームを時間的にシ
フトすることによりＧＯＰの位相を合わせる位相シフト
処理と、ＧＯＰの位相と切り替え信号の位相が合ってい
ない場合に、切り替え信号の位相をＧＯＰの位相に合わ
せるシフト処理とを行う遅延手段および遅延手段に対す
る制御手段と、遅延手段からの第１および第２のストリ
ームと切り替え信号を受け取り、切り替え信号によって
第１および第２のストリームを切り替え、第３のストリ
ームを出力する手段とを備えることを特徴とする圧縮符
号化画像信号の処理装置である。
【００１６】請求項１に記載の発明によれば、二つのス
トリームの一方のＧＯＰの途中で切り替えがなされるこ
とによって、復号画像にエラーが発生することを防止す
ることができる。
トリームの一方のＧＯＰの途中で切り替えがなされるこ
とによって、復号画像にエラーが発生することを防止す
ることができる。
【００１７】請求項３に記載の発明は、第１および第２
のストリームを切り替えて形成された第３のストリーム
と、第３のストリームと共に切り替え信号の位相シフト
情報を受け取り、第３のストリームを復号するようにし
た処理装置であって、第１および第２のストリームは、
フィールド内またはフレーム内符号化と、フィールド間
またはフレーム間相関を用いた符号化とを含む、２フィ
ールドまたは２フレーム以上のＧＯＰ構成を有する圧縮
符号化画像信号の処理装置において、第３のストリーム
を復号すると共に、位相シフト情報に基づいて第１およ
び第２のストリームの切り替え点の後の復号画像を切り
替え点の前の復号画像を繰り返す復号手段を有すること
を特徴とする圧縮符号化画像信号の処理装置である。
のストリームを切り替えて形成された第３のストリーム
と、第３のストリームと共に切り替え信号の位相シフト
情報を受け取り、第３のストリームを復号するようにし
た処理装置であって、第１および第２のストリームは、
フィールド内またはフレーム内符号化と、フィールド間
またはフレーム間相関を用いた符号化とを含む、２フィ
ールドまたは２フレーム以上のＧＯＰ構成を有する圧縮
符号化画像信号の処理装置において、第３のストリーム
を復号すると共に、位相シフト情報に基づいて第１およ
び第２のストリームの切り替え点の後の復号画像を切り
替え点の前の復号画像を繰り返す復号手段を有すること
を特徴とする圧縮符号化画像信号の処理装置である。
【００１８】請求項３に記載の発明によれば、復号画像
にエラーが発生することを防止することができ、さら
に、出力画像の切り替え点が切り替え信号の意図したも
のとできる。
にエラーが発生することを防止することができ、さら
に、出力画像の切り替え点が切り替え信号の意図したも
のとできる。
【００１９】請求項５に記載の発明は、第１および第２
のストリームを切り替えて形成された第３のストリーム
と、第３のストリームと共にストリームの位相シフト情
報を受け取り、第３のストリームを復号するようにした
処理装置であって、第１および第２のストリームは、フ
ィールド内またはフレーム内符号化と、フィールド間ま
たはフレーム間相関を用いた符号化とを含む、２フィー
ルドまたは２フレーム以上のＧＯＰ構成を有する圧縮符
号化画像信号の処理装置において、第３のストリームを
復号すると共に、位相シフト情報に基づいて第１および
／または第２のストリームの位相を制御し、制御の結
果、第１および第２のストリームの切り替え点の後に無
信号区間が生じる場合には、切り替え点の前の復号画像
を繰り返し、切り替え点の後に信号重複区間が生じる場
合には、重複する一方の信号を除く処理を行う復号手段
を有することを特徴とする圧縮符号化画像信号の処理装
置である。
のストリームを切り替えて形成された第３のストリーム
と、第３のストリームと共にストリームの位相シフト情
報を受け取り、第３のストリームを復号するようにした
処理装置であって、第１および第２のストリームは、フ
ィールド内またはフレーム内符号化と、フィールド間ま
たはフレーム間相関を用いた符号化とを含む、２フィー
ルドまたは２フレーム以上のＧＯＰ構成を有する圧縮符
号化画像信号の処理装置において、第３のストリームを
復号すると共に、位相シフト情報に基づいて第１および
／または第２のストリームの位相を制御し、制御の結
果、第１および第２のストリームの切り替え点の後に無
信号区間が生じる場合には、切り替え点の前の復号画像
を繰り返し、切り替え点の後に信号重複区間が生じる場
合には、重複する一方の信号を除く処理を行う復号手段
を有することを特徴とする圧縮符号化画像信号の処理装
置である。
【００２０】請求項５に記載の発明によれば、復号画像
にエラーが発生することを防止することができ、さら
に、出力画像において、一方のストリームが時間的にず
れることを防止することができる。
にエラーが発生することを防止することができ、さら
に、出力画像において、一方のストリームが時間的にず
れることを防止することができる。
【００２１】
【発明の実施の形態】以下、この発明のいくつかの実施
例について図面を参照して説明する。以下の説明では、
ストリームＡを切り替え元のストリームとし、ストリー
ムＢを切り替え先とする。すなわち、切り替え元のスト
リームＡは、既にストリームが以前から存在し、その位
相の変更ができないストリームであり、また、切り替え
先のストリームＢは、遅延制御にて位相の制御が可能な
ストリームである。また、編集処理の点からは、ストリ
ームＡがソースＡと呼ばれ、ストリームＢがソースＢと
呼ばれ、切り替え信号が編集コマンドと称される。
例について図面を参照して説明する。以下の説明では、
ストリームＡを切り替え元のストリームとし、ストリー
ムＢを切り替え先とする。すなわち、切り替え元のスト
リームＡは、既にストリームが以前から存在し、その位
相の変更ができないストリームであり、また、切り替え
先のストリームＢは、遅延制御にて位相の制御が可能な
ストリームである。また、編集処理の点からは、ストリ
ームＡがソースＡと呼ばれ、ストリームＢがソースＢと
呼ばれ、切り替え信号が編集コマンドと称される。
【００２２】この発明の第１の実施例は、切り替え信号
の位相および／またはストリームＢの位相を制御するこ
とによって、ＧＯＰの位相に合った切り替えを行うもの
である。上述した図１５の場合に対してこの発明の第１
の実施例を適用した処理例について説明する。すなわ
ち、ストリームＡおよびＢのＧＯＰの位相が合ってお
り、切り替え信号の位相がこのＧＯＰの位相に対して１
フレームずれている場合である。この場合では、図１に
示すように、切り替え信号がＧＯＰの位相に合うよう
に、１フレーム位相が進められる。すなわち、切り替え
信号の位相がＸの点で立ち上がり、Ｙの点で立ち下がる
ものに変更され、最終的な切り替えを元の位置より１フ
レーム進められたＸ−Ｙの位置で行う。それによって、
切り替え点の直後の画像を片方向予測の画像Ｐ２、Ｐ４
とすることによって、切り替えられた画像にエラーが発
生することが防止される。なお、以下の説明では、切り
替え信号の位相を１フレーム進める時間シフトを採用し
ているが、１フレーム遅れるように処理しても良い。
の位相および／またはストリームＢの位相を制御するこ
とによって、ＧＯＰの位相に合った切り替えを行うもの
である。上述した図１５の場合に対してこの発明の第１
の実施例を適用した処理例について説明する。すなわ
ち、ストリームＡおよびＢのＧＯＰの位相が合ってお
り、切り替え信号の位相がこのＧＯＰの位相に対して１
フレームずれている場合である。この場合では、図１に
示すように、切り替え信号がＧＯＰの位相に合うよう
に、１フレーム位相が進められる。すなわち、切り替え
信号の位相がＸの点で立ち上がり、Ｙの点で立ち下がる
ものに変更され、最終的な切り替えを元の位置より１フ
レーム進められたＸ−Ｙの位置で行う。それによって、
切り替え点の直後の画像を片方向予測の画像Ｐ２、Ｐ４
とすることによって、切り替えられた画像にエラーが発
生することが防止される。なお、以下の説明では、切り
替え信号の位相を１フレーム進める時間シフトを採用し
ているが、１フレーム遅れるように処理しても良い。
【００２３】上述した図１６の場合に対してこの発明の
第１の実施例を適用した処理例を図２に示す。図１の例
と同様に、切り替え信号の位相が１フレーム進められ、
また、ストリームＢの内容もストリームＡと合うように
１フレーム進められる。それによって、ストリームＡ、
ストリームＢのＧＯＰの位相が互いに合った状態とさ
れ、その状態で切り替えがなされる。従って、画像にエ
ラーが発生することが防止できる。なお、切り替え信号
の場合と同様に、ストリームの位相を１フレーム遅延す
ることによって、二つのストリームのＧＯＰの位相を合
わせるようにしても良い。
第１の実施例を適用した処理例を図２に示す。図１の例
と同様に、切り替え信号の位相が１フレーム進められ、
また、ストリームＢの内容もストリームＡと合うように
１フレーム進められる。それによって、ストリームＡ、
ストリームＢのＧＯＰの位相が互いに合った状態とさ
れ、その状態で切り替えがなされる。従って、画像にエ
ラーが発生することが防止できる。なお、切り替え信号
の場合と同様に、ストリームの位相を１フレーム遅延す
ることによって、二つのストリームのＧＯＰの位相を合
わせるようにしても良い。
【００２４】図１および図２に示す第１の実施例によれ
ば、出力画像にエラーが発生することを防止できる。し
かしながら、上述した処理の結果、スイッチドストリー
ム（出力画像）の切り替え点の位相が原切り替え信号の
位相に対して１フレーム進んだものとなる。このよう
に、出力画像の切り替え点が１フレーム早くなり、切り
替え時に意図した画像内容の切り替わり点が出力画像に
反映しない問題がある。さらに、図２の処理例では、ス
トリームＢから出力画像までの遅延時間が１フレーム早
いことになり、ストリームＢの画像情報に付随するタイ
ムコード情報あるいはオーディオ情報と画像の時間的な
ズレが発生する。
ば、出力画像にエラーが発生することを防止できる。し
かしながら、上述した処理の結果、スイッチドストリー
ム（出力画像）の切り替え点の位相が原切り替え信号の
位相に対して１フレーム進んだものとなる。このよう
に、出力画像の切り替え点が１フレーム早くなり、切り
替え時に意図した画像内容の切り替わり点が出力画像に
反映しない問題がある。さらに、図２の処理例では、ス
トリームＢから出力画像までの遅延時間が１フレーム早
いことになり、ストリームＢの画像情報に付随するタイ
ムコード情報あるいはオーディオ情報と画像の時間的な
ズレが発生する。
【００２５】この発明の第２の実施例は、第１の実施例
の処理に加えて切り替え信号の意図を出力に反映するこ
とを可能とする。そのために、復号側において、切り替
え点の直後に、その前の画像を繰り返すフリーズ処理を
導入する。
の処理に加えて切り替え信号の意図を出力に反映するこ
とを可能とする。そのために、復号側において、切り替
え点の直後に、その前の画像を繰り返すフリーズ処理を
導入する。
【００２６】図１５の例のように、二つのストリームの
ＧＯＰの位相が合っているが、切り替え信号の位相とＧ
ＯＰの位相が合っていない場合に対して、第２の実施例
を適用した処理例を図３に示す。二つのストリームを切
り替えるまでの処理は、第１の実施例の図１の例と同様
である。出力画像の切り替え点が意図したものより１フ
レーム早くなる問題を解決するために、ストリームの切
り替え直後の出力画像Ｐ２およびＰ４の代わりに、その
直前の出力画像Ｉ１およびＩ３を繰り返すようになされ
る。この処理がフリーズである。その結果、切り替え信
号と出力画像の時間関係が一致し、Ｉ２からＩ４の間で
ストリームＢを挿入するように切り替える意図を出力画
像に反映させることが可能となる。
ＧＯＰの位相が合っているが、切り替え信号の位相とＧ
ＯＰの位相が合っていない場合に対して、第２の実施例
を適用した処理例を図３に示す。二つのストリームを切
り替えるまでの処理は、第１の実施例の図１の例と同様
である。出力画像の切り替え点が意図したものより１フ
レーム早くなる問題を解決するために、ストリームの切
り替え直後の出力画像Ｐ２およびＰ４の代わりに、その
直前の出力画像Ｉ１およびＩ３を繰り返すようになされ
る。この処理がフリーズである。その結果、切り替え信
号と出力画像の時間関係が一致し、Ｉ２からＩ４の間で
ストリームＢを挿入するように切り替える意図を出力画
像に反映させることが可能となる。
【００２７】図１６と同様の場合に対してこの発明の第
２の実施例を適用した処理例について図４を参照して説
明する。ストリームＢおよび切り替え信号の位相が１フ
レーム進められることは、第１の実施例の図２の処理例
と同様である。切り替え点ＸおよびＹの直後の１フレー
ムは、その直前のＩ１およびＩ３の復号画像をそれぞれ
繰り返す、フリーズ処理によって、最終的な出力画像に
おける切り替え点を、原切り替え信号の意図に一致した
ものとできる。但し、ストリームＢの出力画像の位相が
１フレーム進んでいる問題は、解決されていない。
２の実施例を適用した処理例について図４を参照して説
明する。ストリームＢおよび切り替え信号の位相が１フ
レーム進められることは、第１の実施例の図２の処理例
と同様である。切り替え点ＸおよびＹの直後の１フレー
ムは、その直前のＩ１およびＩ３の復号画像をそれぞれ
繰り返す、フリーズ処理によって、最終的な出力画像に
おける切り替え点を、原切り替え信号の意図に一致した
ものとできる。但し、ストリームＢの出力画像の位相が
１フレーム進んでいる問題は、解決されていない。
【００２８】この発明の第３の実施例は、第１の実施例
と同様に切り替えによってエラーが発生することを防止
することができ、また、ストリームＢの出力画像の位相
の時間的シフト、具体例では、ストリームＢが１フレー
ム進む問題を解決するものである。すなわち、第３の実
施例では、第１の実施例と同様に切り替え信号およびス
トリームＢの位相を制御し、ストリームＢの時間シフト
の情報を切り替え処理以降、伝送（または記録）する。
そして、復号時にこの時間シフトの情報に基づいてシフ
ト処理することによって時間シフトを除く。それによっ
て生じた切り替え点Ｘの直後の無信号のフレームをフリ
ーズ処理によって埋める。さらに、切り替え点Ｙの直後
の重複する画像を除く処理を行う。
と同様に切り替えによってエラーが発生することを防止
することができ、また、ストリームＢの出力画像の位相
の時間的シフト、具体例では、ストリームＢが１フレー
ム進む問題を解決するものである。すなわち、第３の実
施例では、第１の実施例と同様に切り替え信号およびス
トリームＢの位相を制御し、ストリームＢの時間シフト
の情報を切り替え処理以降、伝送（または記録）する。
そして、復号時にこの時間シフトの情報に基づいてシフ
ト処理することによって時間シフトを除く。それによっ
て生じた切り替え点Ｘの直後の無信号のフレームをフリ
ーズ処理によって埋める。さらに、切り替え点Ｙの直後
の重複する画像を除く処理を行う。
【００２９】図５は、この発明の第３の実施例を図１６
に示すような場合に対して適用した処理を示す。ストリ
ームの切り替えまでの処理は、第１の実施例（図２参
照）と同様である。スイッチドストリームを伝送する場
合に、ストリームＢが１フレーム進められている情報も
伝送（記録）される。そして、切り替えにより発生した
スイッチドストリームを復号する場合、その内のストリ
ームＢから出力画像までの遅延時間を１フレーム遅延さ
せる。それによって、ストリームＢの遅延時間を正規の
ものとする。
に示すような場合に対して適用した処理を示す。ストリ
ームの切り替えまでの処理は、第１の実施例（図２参
照）と同様である。スイッチドストリームを伝送する場
合に、ストリームＢが１フレーム進められている情報も
伝送（記録）される。そして、切り替えにより発生した
スイッチドストリームを復号する場合、その内のストリ
ームＢから出力画像までの遅延時間を１フレーム遅延さ
せる。それによって、ストリームＢの遅延時間を正規の
ものとする。
【００３０】ストリームＢを復号する場合、切り替え点
Ｘの直後では、Ｂ２に対応する復号画像Ｐ２が発生する
が、１フレームの遅延によって、このＰ２の発生時間が
１フレーム遅れる。その結果、Ｐ２の前が無信号のフレ
ームとなる。これは、その前のＩ１をフリーズ処理する
ことによって埋め合わせる。また、後側の切り替え点Ｙ
では、１フレーム遅延のストリームＢから遅延が無いス
トリームＡに戻るために、画像が１フレーム（Ｉ３）だ
け余ることになり、画像の繰り返しを必要としない。言
い換えると、切り替え点の意図を反映させるために、Ｂ
４が捨てられる。このようにして、切り替え時に意図し
た画像内容の切り替わり点Ｙが出力画像に反映される。
また、ストリームＡおよびストリームＢからなるスイッ
チドストリームに関して、ストリームから出力画像まで
の遅延時間が一定となり、タイムコード情報、オーディ
オ情報と、画像の時間的関係が保たれる。
Ｘの直後では、Ｂ２に対応する復号画像Ｐ２が発生する
が、１フレームの遅延によって、このＰ２の発生時間が
１フレーム遅れる。その結果、Ｐ２の前が無信号のフレ
ームとなる。これは、その前のＩ１をフリーズ処理する
ことによって埋め合わせる。また、後側の切り替え点Ｙ
では、１フレーム遅延のストリームＢから遅延が無いス
トリームＡに戻るために、画像が１フレーム（Ｉ３）だ
け余ることになり、画像の繰り返しを必要としない。言
い換えると、切り替え点の意図を反映させるために、Ｂ
４が捨てられる。このようにして、切り替え時に意図し
た画像内容の切り替わり点Ｙが出力画像に反映される。
また、ストリームＡおよびストリームＢからなるスイッ
チドストリームに関して、ストリームから出力画像まで
の遅延時間が一定となり、タイムコード情報、オーディ
オ情報と、画像の時間的関係が保たれる。
【００３１】上述した第３の実施例では、復号側におい
て、無信号をフリーズ処理し、また、ストリームを遅延
するために、スイッチドストリームに付随した情報を伝
送する必要がある。この付随情報は、ストリームのＧＯ
Ｐ毎に設けられたヘッダ内に挿入される。この付随情報
は、下記のものである。
て、無信号をフリーズ処理し、また、ストリームを遅延
するために、スイッチドストリームに付随した情報を伝
送する必要がある。この付随情報は、ストリームのＧＯ
Ｐ毎に設けられたヘッダ内に挿入される。この付随情報
は、下記のものである。
【００３２】切り替え点の有無を示す切り替えフラグ 切り替え信号が１フレーム進められているかどうかを示
す遅延フラグ：ＳＷChange スイッチドストリームが１フレーム進められているかど
うかを示す遅延フラグ：ＤＬ Ｆ（Ｂ２）
す遅延フラグ：ＳＷChange スイッチドストリームが１フレーム進められているかど
うかを示す遅延フラグ：ＤＬ Ｆ（Ｂ２）
【００３３】図６は、この発明による信号処理装置の一
例の構成を示す。入力信号として切り替え信号、ストリ
ームＡ、ストリームＢが供給され、これらの入力がそれ
ぞれ可変遅延回路１１、１２、１３にそれぞれ供給され
る。また、これら３個の入力信号が遅延制御回路１４に
供給される。遅延制御回路１４は、３個の可変遅延回路
１１、１２、１３に対する制御信号を発生し、この制御
信号に応じて可変遅延回路１１、１２、１３の遅延量が
設定される。２フレーム単位の符号構成の場合では、遅
延量としては、遅延無しと１フレーム遅延とのいずれか
である。
例の構成を示す。入力信号として切り替え信号、ストリ
ームＡ、ストリームＢが供給され、これらの入力がそれ
ぞれ可変遅延回路１１、１２、１３にそれぞれ供給され
る。また、これら３個の入力信号が遅延制御回路１４に
供給される。遅延制御回路１４は、３個の可変遅延回路
１１、１２、１３に対する制御信号を発生し、この制御
信号に応じて可変遅延回路１１、１２、１３の遅延量が
設定される。２フレーム単位の符号構成の場合では、遅
延量としては、遅延無しと１フレーム遅延とのいずれか
である。
【００３４】遅延制御回路１４は、後述するフローチャ
ート（図１０）に示される遅延量の制御を行う。そのた
めに、入力ストリームＡおよびＢの間のＧＯＰの位相関
係、並びにこのＧＯＰに対する切り替え信号の位相関係
を検出し、さらに、入力されるストリームあるいは切り
替え信号が既に遅延フラグ（遅延無し、または１フレー
ム遅延）を含む場合には、この遅延フラグを検出し、遅
延制御に使用する。
ート（図１０）に示される遅延量の制御を行う。そのた
めに、入力ストリームＡおよびＢの間のＧＯＰの位相関
係、並びにこのＧＯＰに対する切り替え信号の位相関係
を検出し、さらに、入力されるストリームあるいは切り
替え信号が既に遅延フラグ（遅延無し、または１フレー
ム遅延）を含む場合には、この遅延フラグを検出し、遅
延制御に使用する。
【００３５】例えば前述した図２における入力ストリー
ムＡが遅延フラグ（１フレーム遅延）を含む場合、それ
に従って遅延した結果は、図１４のタイミングチャート
と同様の時間関係となる。ストリームＢの位相が１フレ
ーム進む問題を回避するために、ストリームＢに対して
も遅延フラグ（１フレーム遅延）が付けられる。従っ
て、復号時には、図７に示すように、ストリームＡおよ
びストリームＢの両者が１フレーム遅延される。復号装
置が双方向または片方向の動き補償予測（ＭＣ）、フリ
ーズ（または間引き）処理、および１フレーム遅延処理
が可能な構成とされているが、図７の例では、フリーズ
処理が不要である。
ムＡが遅延フラグ（１フレーム遅延）を含む場合、それ
に従って遅延した結果は、図１４のタイミングチャート
と同様の時間関係となる。ストリームＢの位相が１フレ
ーム進む問題を回避するために、ストリームＢに対して
も遅延フラグ（１フレーム遅延）が付けられる。従っ
て、復号時には、図７に示すように、ストリームＡおよ
びストリームＢの両者が１フレーム遅延される。復号装
置が双方向または片方向の動き補償予測（ＭＣ）、フリ
ーズ（または間引き）処理、および１フレーム遅延処理
が可能な構成とされているが、図７の例では、フリーズ
処理が不要である。
【００３６】また、入力ストリームＡおよびＢの両者が
１フレーム遅延の遅延フラグを有する場合の処理を図８
に示す。さらに、入力ストリームＢが１フレーム遅延の
遅延フラグを有する場合の処理を図９に示す。
１フレーム遅延の遅延フラグを有する場合の処理を図８
に示す。さらに、入力ストリームＢが１フレーム遅延の
遅延フラグを有する場合の処理を図９に示す。
【００３７】遅延制御がなされたストリームＡおよびＢ
がそれぞれスイッチング回路１５の入力端子１６Ａ、１
６Ｂにそれぞれ供給される。また、遅延制御回路１４で
発生したフラグ（切り替えフラグ、遅延フラグ）がスイ
ッチング回路１５の入力端子１６Ｃに供給される。スイ
ッチング回路１５は、可変遅延回路１１からの切り替え
信号によって制御される。フラグは、スイッチング回路
１５から出力されるスイッチドストリームのＧＯＰのヘ
ッダに挿入される。
がそれぞれスイッチング回路１５の入力端子１６Ａ、１
６Ｂにそれぞれ供給される。また、遅延制御回路１４で
発生したフラグ（切り替えフラグ、遅延フラグ）がスイ
ッチング回路１５の入力端子１６Ｃに供給される。スイ
ッチング回路１５は、可変遅延回路１１からの切り替え
信号によって制御される。フラグは、スイッチング回路
１５から出力されるスイッチドストリームのＧＯＰのヘ
ッダに挿入される。
【００３８】図６における遅延制御回路１４によってな
される遅延制御の処理の流れを図１０のフローチャート
に示す。ストリームＡを切り替え元のストリーム（既に
ストリームが以前から存在し位相の変更ができない）と
し、ストリームＡを切り替え先（遅延制御にて位相の制
御が可能な）のストリームＢへ変更する処理を行うもの
としている。ＳＷを切り替え信号とする。より具体的に
は、上述したタイミングチャートに示されるインサート
編集のイン点（切り替え信号の立ち上がりの点Ｘ）にお
けるストリームＡをＡで表し、ストリームＢをＢで表
す。
される遅延制御の処理の流れを図１０のフローチャート
に示す。ストリームＡを切り替え元のストリーム（既に
ストリームが以前から存在し位相の変更ができない）と
し、ストリームＡを切り替え先（遅延制御にて位相の制
御が可能な）のストリームＢへ変更する処理を行うもの
としている。ＳＷを切り替え信号とする。より具体的に
は、上述したタイミングチャートに示されるインサート
編集のイン点（切り替え信号の立ち上がりの点Ｘ）にお
けるストリームＡをＡで表し、ストリームＢをＢで表
す。
【００３９】フローチャートの最初のスタートのステッ
プは、切り替え信号ＳＷが変化したときである。この
時、無条件に切り替え点があることを示す切り替えフラ
グをセットし、切り替え先のストリームＢの最初のＧＯ
Ｐのヘッダに切り替えフラグを多重する（ステップＳ
１）。また、ストリームＡのＧＯＰの位相と原切り替え
信号ＳＷの位相関係を検出する（ステップＳ２）。両者
が同期していれば、切り替え信号ＳＷの位相を変更しな
い（ステップＳ３）。この制御を受けた切り替え信号を
ＳＷ１と表す。図６中の可変遅延回路１１から切り替え
信号ＳＷ１が出力される。一方、ＧＯＰの位相と切り替
え信号の位相が同期していない場合には、切り替え信号
ＳＷの位相を１フレーム進めたものをＳＷ１とする（ス
テップＳ４）。
プは、切り替え信号ＳＷが変化したときである。この
時、無条件に切り替え点があることを示す切り替えフラ
グをセットし、切り替え先のストリームＢの最初のＧＯ
Ｐのヘッダに切り替えフラグを多重する（ステップＳ
１）。また、ストリームＡのＧＯＰの位相と原切り替え
信号ＳＷの位相関係を検出する（ステップＳ２）。両者
が同期していれば、切り替え信号ＳＷの位相を変更しな
い（ステップＳ３）。この制御を受けた切り替え信号を
ＳＷ１と表す。図６中の可変遅延回路１１から切り替え
信号ＳＷ１が出力される。一方、ＧＯＰの位相と切り替
え信号の位相が同期していない場合には、切り替え信号
ＳＷの位相を１フレーム進めたものをＳＷ１とする（ス
テップＳ４）。
【００４０】さらに、ストリームＡに付随している遅延
フラグを分離して、ストリームＡに対して仮の遅延処理
を施してストリームＡ１とする（ステップＳ５）。仮の
遅延とは、データを直接遅延するのではなく、遅延した
とすると、どのようなＧＯＰ位相になるのかを予想する
ことである。ステップＳ５の後で、仮の遅延がされたス
トリームＡ１のＧＯＰの位相と切り替え信号ＳＷの位相
が同期しているかどうかが決定される（ステップＳ
６）。
フラグを分離して、ストリームＡに対して仮の遅延処理
を施してストリームＡ１とする（ステップＳ５）。仮の
遅延とは、データを直接遅延するのではなく、遅延した
とすると、どのようなＧＯＰ位相になるのかを予想する
ことである。ステップＳ５の後で、仮の遅延がされたス
トリームＡ１のＧＯＰの位相と切り替え信号ＳＷの位相
が同期しているかどうかが決定される（ステップＳ
６）。
【００４１】若し、両位相が同期していれば、切り替え
点は、ステップＳ１で多重した切り替えフラグと変わり
がないということを示す、切り替え信号に関する遅延フ
ラグ（ＳＷ Change＝０）を切り替え先（ストリーム
Ｂ）の最初のＧＯＰに多重する（ステップＳ７）。一
方、同期していなければ、切り替え点は、切り替えフラ
グから１フレーム後に存在するということを示す遅延フ
ラグ（ＳＷ Change＝１）を切り替え先のストリームＢ
の最初のＧＯＰに多重する（ステップＳ８）。
点は、ステップＳ１で多重した切り替えフラグと変わり
がないということを示す、切り替え信号に関する遅延フ
ラグ（ＳＷ Change＝０）を切り替え先（ストリーム
Ｂ）の最初のＧＯＰに多重する（ステップＳ７）。一
方、同期していなければ、切り替え点は、切り替えフラ
グから１フレーム後に存在するということを示す遅延フ
ラグ（ＳＷ Change＝１）を切り替え先のストリームＢ
の最初のＧＯＰに多重する（ステップＳ８）。
【００４２】次にストリームＢに付随している遅延フラ
グを分離して、ストリームＢに対して遅延処理を施して
ストリームＢ１とする（ステップＳ９）。入力ストリー
ムＢは、可変遅延回路１３において実際に遅延される。
次に、この遅延後のストリームＢ１とストリームＡ１と
が同期しているかどうかが決定される（ステップＳ１
０）。ストリームＡ１は、上述したように、遅延フラグ
により仮の遅延が与えられたストリームである。
グを分離して、ストリームＢに対して遅延処理を施して
ストリームＢ１とする（ステップＳ９）。入力ストリー
ムＢは、可変遅延回路１３において実際に遅延される。
次に、この遅延後のストリームＢ１とストリームＡ１と
が同期しているかどうかが決定される（ステップＳ１
０）。ストリームＡ１は、上述したように、遅延フラグ
により仮の遅延が与えられたストリームである。
【００４３】若し、両者が同期していれば、ステップＳ
１１において、最終的なストリームＢ２の遅延フラグ
は、ストリームＡの遅延フラグと同じものとする（ＤＬ
Ｆ（Ｂ２）＝ＤＬ Ｆ（Ａ））。最終的なストリーム
とは、切り替え信号ＳＷ１により切り替えられ、スイッ
チング回路１５から発生するスイッチドストリームを意
味する。一方、同期していなければ、ステップＳ１２に
おいて、最終的なストリームＢ２の遅延フラグは、スト
リームＡの遅延フラグを反転したものとする（ＤＬ Ｆ
（Ｂ２）＝！ＤＬ Ｆ（Ａ））。
１１において、最終的なストリームＢ２の遅延フラグ
は、ストリームＡの遅延フラグと同じものとする（ＤＬ
Ｆ（Ｂ２）＝ＤＬ Ｆ（Ａ））。最終的なストリーム
とは、切り替え信号ＳＷ１により切り替えられ、スイッ
チング回路１５から発生するスイッチドストリームを意
味する。一方、同期していなければ、ステップＳ１２に
おいて、最終的なストリームＢ２の遅延フラグは、スト
リームＡの遅延フラグを反転したものとする（ＤＬ Ｆ
（Ｂ２）＝！ＤＬ Ｆ（Ａ））。
【００４４】さらに、付随する遅延フラグに基づいて入
力ストリームＢを遅延したストリームＢ１のＧＯＰの位
相と切り替え信号ＳＷ１が同期しているかどうかが決定
される（ステップＳ１３）。若し、両者が同期していれ
ば、ストリームＢ１を最終的なストリームＢ２とする。
同期していないならば、ストリームＢ１の位相を１フレ
ーム進めたものを最終的なストリームＢ２とする（ステ
ップＳ１５）。
力ストリームＢを遅延したストリームＢ１のＧＯＰの位
相と切り替え信号ＳＷ１が同期しているかどうかが決定
される（ステップＳ１３）。若し、両者が同期していれ
ば、ストリームＢ１を最終的なストリームＢ２とする。
同期していないならば、ストリームＢ１の位相を１フレ
ーム進めたものを最終的なストリームＢ２とする（ステ
ップＳ１５）。
【００４５】スイッチング回路１５によって、切り替え
られると共に、フラグがＧＯＰのヘッダに挿入されたス
イッチドストリームが伝送路１７を通じて伝送される。
伝送路１７は、ケーブル等の通信路、テープ、光ディス
ク等の記録媒体に対する記録／再生のプロセス等を意味
している。
られると共に、フラグがＧＯＰのヘッダに挿入されたス
イッチドストリームが伝送路１７を通じて伝送される。
伝送路１７は、ケーブル等の通信路、テープ、光ディス
ク等の記録媒体に対する記録／再生のプロセス等を意味
している。
【００４６】伝送路１７を通過した信号が復号化器２０
およびフラグ分離器２１に供給される。フラグ分離器２
１により、受信（再生）されたスイッチドストリームか
ら切り替えフラグおよび遅延フラグが分離される。分離
された切り替えフラグが復号化器２０に供給される。こ
の切り替えフラグを復号化器２０が参照し、切り替えフ
ラグが立っているＧＯＰでは、双方向の動き補償予測か
ら片方向の動き補償予測へ切り替えられるように、復号
動作が制御される。
およびフラグ分離器２１に供給される。フラグ分離器２
１により、受信（再生）されたスイッチドストリームか
ら切り替えフラグおよび遅延フラグが分離される。分離
された切り替えフラグが復号化器２０に供給される。こ
の切り替えフラグを復号化器２０が参照し、切り替えフ
ラグが立っているＧＯＰでは、双方向の動き補償予測か
ら片方向の動き補償予測へ切り替えられるように、復号
動作が制御される。
【００４７】復号化器２０からの復号信号が画像フレー
ム単位（この例では１フレーム）での遅延を行う可変遅
延回路２２に供給される。この可変遅延回路２２に対し
て分離された遅延フラグが供給され、遅延処理、フリー
ズ（間引き）処理が制御される。遅延処理は、ストリー
ムＡ、Ｂに関して、遅延無しと１フレーム遅延とを切り
替える処理である。フリーズ処理は、可変遅延回路２２
が同一フレームの画像を繰り返して出力することでなさ
れる。重複する画像の一方を間引く処理も可変遅延回路
２２によってなされる。
ム単位（この例では１フレーム）での遅延を行う可変遅
延回路２２に供給される。この可変遅延回路２２に対し
て分離された遅延フラグが供給され、遅延処理、フリー
ズ（間引き）処理が制御される。遅延処理は、ストリー
ムＡ、Ｂに関して、遅延無しと１フレーム遅延とを切り
替える処理である。フリーズ処理は、可変遅延回路２２
が同一フレームの画像を繰り返して出力することでなさ
れる。重複する画像の一方を間引く処理も可変遅延回路
２２によってなされる。
【００４８】可変遅延回路２２の処理について詳述する
と、ストリームの遅延フラグが立っている（すなわち、
ＤＬ Ｆ（Ｂ２）＝１の）ＧＯＰは、復号化器２０の出
力を可変遅延回路２２において１フレーム遅延する。ス
トリームの遅延フラグが立っていない（すなわち、ＤＬ
Ｆ（Ｂ２）＝０の）ＧＯＰは、復号化器２０の出力を
遅延せずに出力する。
と、ストリームの遅延フラグが立っている（すなわち、
ＤＬ Ｆ（Ｂ２）＝１の）ＧＯＰは、復号化器２０の出
力を可変遅延回路２２において１フレーム遅延する。ス
トリームの遅延フラグが立っていない（すなわち、ＤＬ
Ｆ（Ｂ２）＝０の）ＧＯＰは、復号化器２０の出力を
遅延せずに出力する。
【００４９】図１１に示すように、切り替え信号の遅延
フラグが立っている（ＳＷ Change＝１の）ＧＯＰで
は、ストリームＡ、Ｂの画像の切り替わり位置が切り替
えられたＧＯＰの境目から１フレーム後になるように、
制御される。すなわち、ストリームの遅延フラグが切り
替え前後で変化しない場合、もしくは遅延無しから有り
になる場合には、切り替え前の画像を時間的に後の方に
フリーズし、また、ストリームの遅延フラグが切り替え
前後で遅延有りから遅延無しになる場合は、切り替え後
のＢの画像を捨てる。
フラグが立っている（ＳＷ Change＝１の）ＧＯＰで
は、ストリームＡ、Ｂの画像の切り替わり位置が切り替
えられたＧＯＰの境目から１フレーム後になるように、
制御される。すなわち、ストリームの遅延フラグが切り
替え前後で変化しない場合、もしくは遅延無しから有り
になる場合には、切り替え前の画像を時間的に後の方に
フリーズし、また、ストリームの遅延フラグが切り替え
前後で遅延有りから遅延無しになる場合は、切り替え後
のＢの画像を捨てる。
【００５０】図１１に示すように、切り替え信号の遅延
フラグが立っていない（ＳＷ Change＝０の）ＧＯＰで
は、ストリームＡ、Ｂの切り替わり位置が、切り替えら
れたＧＯＰの境目になるように制御される。すなわち、
ストリームの遅延フラグが切り替え前後で変化しない場
合は何の処理も行わず、また、ストリームの遅延フラグ
が切り替え前後で遅延無しから有りになる場合は、切り
替え後の画像を時間的に前の方にフリーズし、さらに、
ストリームの遅延フラグが切り替え前後で遅延有りから
無しになる場合は、切り替え前のＩ画像を捨てる。
フラグが立っていない（ＳＷ Change＝０の）ＧＯＰで
は、ストリームＡ、Ｂの切り替わり位置が、切り替えら
れたＧＯＰの境目になるように制御される。すなわち、
ストリームの遅延フラグが切り替え前後で変化しない場
合は何の処理も行わず、また、ストリームの遅延フラグ
が切り替え前後で遅延無しから有りになる場合は、切り
替え後の画像を時間的に前の方にフリーズし、さらに、
ストリームの遅延フラグが切り替え前後で遅延有りから
無しになる場合は、切り替え前のＩ画像を捨てる。
【００５１】なお、図６の構成および図１０のフローチ
ャートを参照した説明は、第３の実施例に関するもので
ある。第１の実施例では、復号側で切り替え点の直後の
動き補償予測を双方向予測から片方向予測へ切り替える
ので、復号側には、スイッチドストリームと共に、切り
替えフラグが伝送される。そして、上述した第３の実施
例と同様に、復号器の動作が制御される。また、第２の
実施例では、動き補償予測を切り替えると共に、フリー
ズ（または間引き）処理を行う必要があるので、切り替
えフラグと切り替え信号に関する遅延フラグ（ＳＷ Ch
ange) とが復号側へ伝送される。そして、上述した第３
の実施例と同様に、復号器および可変遅延回路の動作が
制御される。
ャートを参照した説明は、第３の実施例に関するもので
ある。第１の実施例では、復号側で切り替え点の直後の
動き補償予測を双方向予測から片方向予測へ切り替える
ので、復号側には、スイッチドストリームと共に、切り
替えフラグが伝送される。そして、上述した第３の実施
例と同様に、復号器の動作が制御される。また、第２の
実施例では、動き補償予測を切り替えると共に、フリー
ズ（または間引き）処理を行う必要があるので、切り替
えフラグと切り替え信号に関する遅延フラグ（ＳＷ Ch
ange) とが復号側へ伝送される。そして、上述した第３
の実施例と同様に、復号器および可変遅延回路の動作が
制御される。
【００５２】なお、上述した説明では、圧縮符号化の例
として、２フレーム単位のＧＯＰの符号構成に対してこ
の発明を適用したものである。しかしながら、この発明
は、２フィールド、３フレーム以上のＧＯＰの符号構成
に対しても適用することができる。その場合では、制御
の対象となる位相シフト量は、２フレーム以上のものと
なり、遅延フラグのビット数も２ビット以上必要とな
る。
として、２フレーム単位のＧＯＰの符号構成に対してこ
の発明を適用したものである。しかしながら、この発明
は、２フィールド、３フレーム以上のＧＯＰの符号構成
に対しても適用することができる。その場合では、制御
の対象となる位相シフト量は、２フレーム以上のものと
なり、遅延フラグのビット数も２ビット以上必要とな
る。
【００５３】
【発明の効果】この発明によれば、第１の実施例の説明
から理解されるように、互いにＧＯＰの位相の同期して
いない被切り替え信号（圧縮符号化信号）を１フレーム
単位の切り替え信号を用いて切り替えても、復号画像に
エラーが生じることを防止することができる。
から理解されるように、互いにＧＯＰの位相の同期して
いない被切り替え信号（圧縮符号化信号）を１フレーム
単位の切り替え信号を用いて切り替えても、復号画像に
エラーが生じることを防止することができる。
【００５４】また、この発明に依れば、第２の実施例の
説明から理解されるように、復号画像にエラーが発生す
ることを防止できる効果に加えて、圧縮符号化信号の切
り替え時に意図した切り替え点を、復号された出力画像
において反映することができる。
説明から理解されるように、復号画像にエラーが発生す
ることを防止できる効果に加えて、圧縮符号化信号の切
り替え時に意図した切り替え点を、復号された出力画像
において反映することができる。
【００５５】さらに、この発明に依れば、第３の実施例
の説明から理解されるように、復号画像にエラーが発生
することを防止できる効果に加えて、圧縮符号化信号の
切り替え時に被切り替え信号の相互の時間関係を保持し
た出力画像を生成することができる。
の説明から理解されるように、復号画像にエラーが発生
することを防止できる効果に加えて、圧縮符号化信号の
切り替え時に被切り替え信号の相互の時間関係を保持し
た出力画像を生成することができる。
【図１】この発明の第１の実施例の処理の一例を示すタ
イミングチャートである。
イミングチャートである。
【図２】この発明の第１の実施例の処理の他の例を示す
タイミングチャートである。
タイミングチャートである。
【図３】この発明の第２の実施例の処理の一例を示すタ
イミングチャートである。
イミングチャートである。
【図４】この発明の第２の実施例の処理の他の例を示す
タイミングチャートである。
タイミングチャートである。
【図５】この発明の第３の実施例の処理例を示すタイミ
ングチャートである。
ングチャートである。
【図６】この発明の実施例の構成を示すブロック図であ
る。
る。
【図７】この発明の第３の実施例の処理例を示すタイミ
ングチャートである。
ングチャートである。
【図８】この発明の第３の実施例の処理例を示すタイミ
ングチャートである。
ングチャートである。
【図９】この発明の第３の実施例の処理例を示すタイミ
ングチャートである。
ングチャートである。
【図１０】この発明の第３の実施例における送信（記
録）側の処理を説明するためのフローチャートである。
録）側の処理を説明するためのフローチャートである。
【図１１】この発明の第３の実施例における受信（再
生）側の処理を説明するためのフローチャートである。
生）側の処理を説明するためのフローチャートである。
【図１２】この発明を適用することができる圧縮符号の
符号化の処理を説明するための略線図である。
符号化の処理を説明するための略線図である。
【図１３】この発明を適用することができる圧縮符号の
復号化の処理を説明するための略線図である。
復号化の処理を説明するための略線図である。
【図１４】二つのストリームの切り替え処理の一例を説
明するためのタイミングチャートである。
明するためのタイミングチャートである。
【図１５】二つのストリームの切り替え処理の他の例を
説明するためのタイミングチャートである。
説明するためのタイミングチャートである。
【図１６】二つのストリームの切り替え処理のさらに他
の例を説明するためのタイミングチャートである。
の例を説明するためのタイミングチャートである。
１１、１２、１３・・・可変遅延回路、１４・・・遅延
制御回路、１５・・・スイッチング回路、２０・・・復
号化器、２１・・・フラグ分離器、２２・・・可変遅延
回路
制御回路、１５・・・スイッチング回路、２０・・・復
号化器、２１・・・フラグ分離器、２２・・・可変遅延
回路
Claims (8)
- 【請求項１】 第１および第２のストリームを切り替え
て第３のストリームを形成するようにした処理装置であ
って、 上記第１および第２のストリームは、フィールド内また
はフレーム内符号化と、フィールド間またはフレーム間
相関を用いた符号化とを含む、２フィールドまたは２フ
レーム以上のＧＯＰ構成を有する圧縮符号化画像信号の
処理装置において、 上記第１および第２のストリームの上記ＧＯＰの位相が
合っていない場合に、一方のストリームを時間的にシフ
トすることにより上記ＧＯＰの位相を合わせる位相シフ
ト処理と、上記ＧＯＰの位相と切り替え信号の位相が合
っていない場合に、上記切り替え信号の位相を上記ＧＯ
Ｐの位相に合わせるシフト処理とを行う遅延手段および
上記遅延手段に対する制御手段と、 上記遅延手段からの上記第１および第２のストリームと
切り替え信号を受け取り、切り替え信号によって第１お
よび第２のストリームを切り替え、第３のストリームを
出力する手段とを備えることを特徴とする圧縮符号化画
像信号の処理装置。 - 【請求項２】 請求項１に記載の処理装置において、 上記切り替え信号の位相のシフト処理に関する情報を上
記第３のストリームと共に伝送することを特徴とする圧
縮符号化画像信号の処理装置。 - 【請求項３】 第１および第２のストリームを切り替え
て形成された第３のストリームと、上記第３のストリー
ムと共に切り替え信号の位相シフト情報を受け取り、上
記第３のストリームを復号するようにした処理装置であ
って、 上記第１および第２のストリームは、フィールド内また
はフレーム内符号化と、フィールド間またはフレーム間
相関を用いた符号化とを含む、２フィールドまたは２フ
レーム以上のＧＯＰ構成を有する圧縮符号化画像信号の
処理装置において、 上記第３のストリームを復号すると共に、上記位相シフ
ト情報に基づいて上記第１および第２のストリームの切
り替え点の後の復号画像を上記切り替え点の前の復号画
像を繰り返す復号手段を有することを特徴とする圧縮符
号化画像信号の処理装置。 - 【請求項４】 請求項１に記載の処理装置において、 上記第１および第２のストリームに関する位相シフト情
報を上記第３のストリームと共に伝送することを特徴と
する圧縮符号化画像信号の処理装置。 - 【請求項５】 第１および第２のストリームを切り替え
て形成された第３のストリームと、上記第３のストリー
ムと共にストリームの位相シフト情報を受け取り、上記
第３のストリームを復号するようにした処理装置であっ
て、 上記第１および第２のストリームは、フィールド内また
はフレーム内符号化と、フィールド間またはフレーム間
相関を用いた符号化とを含む、２フィールドまたは２フ
レーム以上のＧＯＰ構成を有する圧縮符号化画像信号の
処理装置において、 上記第３のストリームを復号すると共に、上記位相シフ
ト情報に基づいて上記第１および／または第２のストリ
ームの位相を制御し、制御の結果、上記第１および第２
のストリームの切り替え点の後に無信号区間が生じる場
合には、上記切り替え点の前の復号画像を繰り返し、上
記切り替え点の後に信号重複区間が生じる場合には、重
複する一方の信号を除く処理を行う復号手段を有するこ
とを特徴とする圧縮符号化画像信号の処理装置。 - 【請求項６】 第１および第２のストリームを切り替え
て第３のストリームを形成するようにした処理方法であ
って、 上記第１および第２のストリームは、フィールド内また
はフレーム内符号化と、フィールド間またはフレーム間
相関を用いた符号化とを含む、２フィールドまたは２フ
レーム以上のＧＯＰ構成を有する圧縮符号化画像信号の
処理方法において、 上記第１および第２のストリームの上記ＧＯＰの位相が
合っていない場合に、一方のストリームを時間的にシフ
トすることにより上記ＧＯＰの位相を合わせる位相シフ
ト処理と、上記ＧＯＰの位相と切り替え信号の位相が合
っていない場合に、上記切り替え信号の位相を上記ＧＯ
Ｐの位相に合わせるシフト処理とを行う遅延および遅延
量を制御するステップと、 上記遅延手段からの上記第１および第２のストリームと
切り替え信号を受け取り、切り替え信号によって第１お
よび第２のストリームを切り替え、第３のストリームを
出力するステップとを備えることを特徴とする圧縮符号
化画像信号の処理方法。 - 【請求項７】 第１および第２のストリームを切り替え
て形成された第３のストリームと、上記第３のストリー
ムと共に切り替え信号の位相シフト情報を受け取り、上
記第３のストリームを復号するようにした処理方法であ
って、 上記第１および第２のストリームは、フィールド内また
はフレーム内符号化と、フィールド間またはフレーム間
相関を用いた符号化とを含む、２フィールドまたは２フ
レーム以上のＧＯＰ構成を有する圧縮符号化画像信号の
処理方法において、 上記第３のストリームを復号すると共に、上記位相シフ
ト情報に基づいて上記第１および第２のストリームの切
り替え点の後の復号画像を上記切り替え点の前の復号画
像を繰り返す処理を行うことを特徴とする圧縮符号化画
像信号の処理方法。 - 【請求項８】 第１および第２のストリームを切り替え
て形成された第３のストリームと、上記第３のストリー
ムと共にストリームの位相シフト情報を受け取り、上記
第３のストリームを復号するようにした処理方法であっ
て、 上記第１および第２のストリームは、フィールド内また
はフレーム内符号化と、フィールド間またはフレーム間
相関を用いた符号化とを含む、２フィールドまたは２フ
レーム以上のＧＯＰ構成を有する圧縮符号化画像信号の
処理方法において、 上記第３のストリームを復号すると共に、上記位相シフ
ト情報に基づいて上記第１および／または第２のストリ
ームの位相を制御し、制御の結果、上記第１および第２
のストリームの切り替え点の後に無信号区間が生じる場
合には、上記切り替え点の前の復号画像を繰り返し、上
記切り替え点の後に信号重複区間が生じる場合には、重
複する一方の信号を除く処理を行うことを特徴とする圧
縮符号化画像信号の処理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP11534596A JP4161379B2 (ja) | 1996-04-12 | 1996-04-12 | 復号装置および復号方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP11534596A JP4161379B2 (ja) | 1996-04-12 | 1996-04-12 | 復号装置および復号方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH09284771A true JPH09284771A (ja) | 1997-10-31 |
| JP4161379B2 JP4161379B2 (ja) | 2008-10-08 |
Family
ID=14660239
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP11534596A Expired - Fee Related JP4161379B2 (ja) | 1996-04-12 | 1996-04-12 | 復号装置および復号方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4161379B2 (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008301532A (ja) * | 2004-06-02 | 2008-12-11 | Panasonic Corp | 生成装置および再生装置 |
| JP2009124745A (ja) * | 2009-01-23 | 2009-06-04 | Panasonic Corp | 画像信号切替方法及び装置並びにこれを用いたデジタル撮像カメラ及び監視システム |
-
1996
- 1996-04-12 JP JP11534596A patent/JP4161379B2/ja not_active Expired - Fee Related
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008301532A (ja) * | 2004-06-02 | 2008-12-11 | Panasonic Corp | 生成装置および再生装置 |
| US7526031B2 (en) | 2004-06-02 | 2009-04-28 | Panasonic Corporation | Seamless switching between random access units multiplexed in a multi angle view multimedia stream |
| US7856062B2 (en) | 2004-06-02 | 2010-12-21 | Panasonic Corporation | Multiplexing apparatus and demultiplexing apparatus |
| US8411759B2 (en) | 2004-06-02 | 2013-04-02 | Panasonic Corporation | Multiplexing apparatus and demultiplexing apparatus |
| JP2009124745A (ja) * | 2009-01-23 | 2009-06-04 | Panasonic Corp | 画像信号切替方法及び装置並びにこれを用いたデジタル撮像カメラ及び監視システム |
| JP4580448B2 (ja) * | 2009-01-23 | 2010-11-10 | パナソニック株式会社 | 画像信号切替方法及び装置並びにこれを用いたデジタル撮像カメラ及び監視システム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4161379B2 (ja) | 2008-10-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US5602592A (en) | Moving picture compressed signal changeover apparatus | |
| EP0846396B1 (en) | Switching between bit-rate reduced signals | |
| US7027713B1 (en) | Method for efficient MPEG-2 transport stream frame re-sequencing | |
| US5917988A (en) | Editing apparatus, editing method and decoding apparatus for compressed video signal | |
| KR100276205B1 (ko) | 기록/재생장치 | |
| ZA200208713B (en) | Video error resilience. | |
| JP2000059790A (ja) | 動画像符号列変換装置及びその方法 | |
| GB2327548A (en) | Switching or splicing compressed video bitstreams | |
| US6483945B1 (en) | Moving picture encoding method and apparatus | |
| KR100289856B1 (ko) | 화상 신호 재생 방법 및 화상 신호 재생 장치 | |
| WO2007043256A1 (ja) | 動画像変換方法、動画像変換装置、動画像変換システムおよびサーバ装置並びにプログラム | |
| JP3191583B2 (ja) | 情報復号化装置 | |
| JP4010617B2 (ja) | 画像復号化装置及び画像復号化方法 | |
| JP4161379B2 (ja) | 復号装置および復号方法 | |
| JPH10191331A (ja) | 画像データの符号化方法及び装置 | |
| JP3637823B2 (ja) | 映像信号切替え装置及びその映像信号切替え方法 | |
| WO1996033573A1 (en) | Device and method for coding moving image | |
| JPH07274179A (ja) | 動画像符号化装置 | |
| JP3689440B2 (ja) | 再生装置 | |
| JPH08140047A (ja) | 画像データ記録装置 | |
| JP2000295626A (ja) | 多段画像符号化装置 | |
| JP2007028212A (ja) | 再生装置及び再生方法 | |
| JP3517463B2 (ja) | 再生装置 | |
| JPH1175198A (ja) | 画像信号圧縮装置及び方法、並びに記録媒体 | |
| JP3594017B2 (ja) | ビットストリームの伝送方法及び伝送システム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20051201 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20051213 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060213 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060919 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20061024 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20070619 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070820 |
|
| A911 | Transfer of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20070830 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071003 |
|
| A911 | Transfer of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20071012 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080701 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080714 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110801 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110801 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110801 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120801 Year of fee payment: 4 |
|
| LAPS | Cancellation because of no payment of annual fees |