JPH11289542A - 画像符号化装置、画像符号化方法、および画像符号化プログラムを記録した記録媒体 - Google Patents
画像符号化装置、画像符号化方法、および画像符号化プログラムを記録した記録媒体Info
- Publication number
- JPH11289542A JPH11289542A JP1501299A JP1501299A JPH11289542A JP H11289542 A JPH11289542 A JP H11289542A JP 1501299 A JP1501299 A JP 1501299A JP 1501299 A JP1501299 A JP 1501299A JP H11289542 A JPH11289542 A JP H11289542A
- Authority
- JP
- Japan
- Prior art keywords
- frame
- refresh
- block group
- encoding
- block
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
(57)【要約】
【課題】 リフレッシュによる符号化量の増加を少なく
しつつ、妨害ラインの出現を回避するとともに、伝送エ
ラーの影響を短時間で解消する。 【解決手段】 フレーム間符号化方式とフレーム内符号
化方式との間で符号化方式を切り換えつつ動画像を符号
化する画像符号化装置において、動き情報管理部（２７
０４）が、動画像の各フレームにおけるｍ個のブロック
群（ＧＯＢ１〜ＧＯＢ１２）のそれぞれの領域内の被写
体に所定時点から所定時間Ｔだけ経過する間に所定のし
きい値以上の動きがあるか否かを判別する。この判別結
果に基づき、一括リフレッシュ部（２７０６）は、しき
い値以上の動きがある領域のブロック群に対して一括リ
フレッシュ（１フレームでのフレーム内符号化）を行
い、分散リフレッシュ部（２８１０）は、しきい値以上
の動きがない領域のブロック群に対して分散リフレッシ
ュ（ブロック毎に異なるフレームでのフレーム内符号
化）を行う。
しつつ、妨害ラインの出現を回避するとともに、伝送エ
ラーの影響を短時間で解消する。 【解決手段】 フレーム間符号化方式とフレーム内符号
化方式との間で符号化方式を切り換えつつ動画像を符号
化する画像符号化装置において、動き情報管理部（２７
０４）が、動画像の各フレームにおけるｍ個のブロック
群（ＧＯＢ１〜ＧＯＢ１２）のそれぞれの領域内の被写
体に所定時点から所定時間Ｔだけ経過する間に所定のし
きい値以上の動きがあるか否かを判別する。この判別結
果に基づき、一括リフレッシュ部（２７０６）は、しき
い値以上の動きがある領域のブロック群に対して一括リ
フレッシュ（１フレームでのフレーム内符号化）を行
い、分散リフレッシュ部（２８１０）は、しきい値以上
の動きがない領域のブロック群に対して分散リフレッシ
ュ（ブロック毎に異なるフレームでのフレーム内符号
化）を行う。
Description
【０００１】
【発明の属する技術分野】本発明は、ビデオ信号を高能
率に圧縮符号化して伝送するための画像符号化装置およ
び方法に関するものであり、更に詳しくは、再生画像に
おいて伝送エラーの影響を消去するための画像符号化の
リフレッシュに関する。
率に圧縮符号化して伝送するための画像符号化装置およ
び方法に関するものであり、更に詳しくは、再生画像に
おいて伝送エラーの影響を消去するための画像符号化の
リフレッシュに関する。
【０００２】
【従来の技術】ビデオ信号を高能率に圧縮符号化して伝
送する技術の応用分野としては、図３４（Ａ）に示すよ
うなテレビ電話やテレビ会議が一般的である。さらに無
線ＬＡＮの伝送路を利用したディジタル無線によりビデ
オ信号を伝送し、危険個所の監視や移動体間の映像を伝
送する図３４（Ｂ）に示すようなシステムなどへの応用
や、図３４（Ｃ）に示すようなインターネットを利用し
た映像配信への応用が期待されている。
送する技術の応用分野としては、図３４（Ａ）に示すよ
うなテレビ電話やテレビ会議が一般的である。さらに無
線ＬＡＮの伝送路を利用したディジタル無線によりビデ
オ信号を伝送し、危険個所の監視や移動体間の映像を伝
送する図３４（Ｂ）に示すようなシステムなどへの応用
や、図３４（Ｃ）に示すようなインターネットを利用し
た映像配信への応用が期待されている。
【０００３】無線監視の場合には、無線資源の有効利用
の観点から周波数帯域を効率よく利用するように映像信
号を高能率に圧縮符号化することが必須であり、エラー
率に代表される通信品質も有線のシステムに比較すると
２桁から３桁以上低下する。したがって、無線監視で
は、冗長な情報を省いて高能率圧縮符号化を行っている
場合、エラーの影響を受けやすいため、後述のようにリ
フレッシュ方法を工夫するなどしてエラー耐性を高める
ことが必須となる。また、テレビ電話とは違って、監視
の場合には映像情報の伝送はカメラ側からモニタ側への
片方向の場合が多く、リフレッシュが片方向の伝送路で
機能する方が利用範囲は広がる。
の観点から周波数帯域を効率よく利用するように映像信
号を高能率に圧縮符号化することが必須であり、エラー
率に代表される通信品質も有線のシステムに比較すると
２桁から３桁以上低下する。したがって、無線監視で
は、冗長な情報を省いて高能率圧縮符号化を行っている
場合、エラーの影響を受けやすいため、後述のようにリ
フレッシュ方法を工夫するなどしてエラー耐性を高める
ことが必須となる。また、テレビ電話とは違って、監視
の場合には映像情報の伝送はカメラ側からモニタ側への
片方向の場合が多く、リフレッシュが片方向の伝送路で
機能する方が利用範囲は広がる。
【０００４】また、ＰＨＳ(Personal Handyphone Syste
m)などのディジタル無線を用いる携帯型のテレビ電話な
ども想定されている。この場合には、品質は有線に比較
して劣るが、双方向の伝送路が確保できる。
m)などのディジタル無線を用いる携帯型のテレビ電話な
ども想定されている。この場合には、品質は有線に比較
して劣るが、双方向の伝送路が確保できる。
【０００５】インターネットの場合においても、インタ
ーネット網はベストエフォートが前提であり、パケット
廃棄率などの品質の保証はなく、資源の有効利用やパケ
ットロスに対する処理を考えておくことが必須となる。
インターネットの場合、双方向の通信路が確保されるた
め、１：１の伝送では双方向を前提とした方法が利用で
きる。しかし、放送型の１：多の伝送システムの場合、
サーバー側での帰還情報の処理が集中する問題があるた
め、リフレッシュが片方向で機能する方が利用範囲は広
がる。また、インターネットの場合にはサーバー側が蓄
積情報である場合も想定されるため、符号化の処理は通
信時より前に済まされているため帰還情報は利用できな
い。
ーネット網はベストエフォートが前提であり、パケット
廃棄率などの品質の保証はなく、資源の有効利用やパケ
ットロスに対する処理を考えておくことが必須となる。
インターネットの場合、双方向の通信路が確保されるた
め、１：１の伝送では双方向を前提とした方法が利用で
きる。しかし、放送型の１：多の伝送システムの場合、
サーバー側での帰還情報の処理が集中する問題があるた
め、リフレッシュが片方向で機能する方が利用範囲は広
がる。また、インターネットの場合にはサーバー側が蓄
積情報である場合も想定されるため、符号化の処理は通
信時より前に済まされているため帰還情報は利用できな
い。
【０００６】なお、従来、通信路に帰還路がある場合に
は、符号化側で符号化データにエラー検出符号を付けて
伝送し、復号化側で受信データのエラー検出を行った結
果エラーが検出された場合に、帰還路を用いてその旨を
符号化側に通知し、符号化側はエラーが通知された後の
符号化を全てフレーム内符号化してリフレッシュする、
という方法が考案されている。ＩＴＵ−Ｔ勧告Ｈ．２６
１においてこのエラー通知を画面更新要求として規格化
している。
は、符号化側で符号化データにエラー検出符号を付けて
伝送し、復号化側で受信データのエラー検出を行った結
果エラーが検出された場合に、帰還路を用いてその旨を
符号化側に通知し、符号化側はエラーが通知された後の
符号化を全てフレーム内符号化してリフレッシュする、
という方法が考案されている。ＩＴＵ−Ｔ勧告Ｈ．２６
１においてこのエラー通知を画面更新要求として規格化
している。
【０００７】以下、テレビ会議やテレビ電話における画
像符号化を例にとって従来の画像符号化方法について詳
細に説明する。従来、テレビ会議、テレビ電話信号の符
号化では、フレーム方向にフレーム間の相関性を利用す
るフレーム間予測符号化とフレーム内予測符号化とを組
み合わせた符号化を用いるのが一般的である。１秒間に
３０枚の画像（フレーム）で構成されるテレビ画像の時
間軸方向の相関性は大きく、フレーム間相関を利用して
１フレーム前の画面中の同一位置の画素を予測に用いる
ことにすれば、画面が静止している場合には最も理想的
な予測が行えることになる。しかし、フレーム間符号化
においては、画面中に動きがある場合には逆にフレーム
間の相関は低くなり、むしろフィールド内の隣接画素間
の相関に比べても低くなってしまう。一方、フレーム毎
の画像信号の各画素も隣接する画素とのレベル変化が小
さく相関性が強い。その自己相関関数は負の指数関数で
近似できるとされている。このとき、自己相関関数のフ
ーリエ変換である電力スペクトル密度はゼロ周波数成分
（すなわち直流成分）で最大となり、周波数成分が高く
なるにつれて単調減少する性質を持っている。周波数領
域への直交変換として最もよく知られているのはフーリ
エ変換であるが、フーリエ変換は複素数演算を含み、構
成が複雑になることから、画像の符号化ではこれに代わ
る直交変換として２次元ＤＣＴ(Discrete Cosine Trans
form) を用いるのが一般的である。ＤＣＴにより周波数
成分に分解された変換係数が、符号化しない変換係数
（無意係数）であるレベルゼロと離散的な量子化代表値
をとる有意係数であるレベル±１からレベル±Ｋとに量
子化された後、無意係数の連続性を符号化するランレン
グス符号化ならびに有意係数のレベルの生起確率に応じ
て可変長符号を割り当てるハフマン符号化が行われるこ
とにより、画像データが圧縮される。
像符号化を例にとって従来の画像符号化方法について詳
細に説明する。従来、テレビ会議、テレビ電話信号の符
号化では、フレーム方向にフレーム間の相関性を利用す
るフレーム間予測符号化とフレーム内予測符号化とを組
み合わせた符号化を用いるのが一般的である。１秒間に
３０枚の画像（フレーム）で構成されるテレビ画像の時
間軸方向の相関性は大きく、フレーム間相関を利用して
１フレーム前の画面中の同一位置の画素を予測に用いる
ことにすれば、画面が静止している場合には最も理想的
な予測が行えることになる。しかし、フレーム間符号化
においては、画面中に動きがある場合には逆にフレーム
間の相関は低くなり、むしろフィールド内の隣接画素間
の相関に比べても低くなってしまう。一方、フレーム毎
の画像信号の各画素も隣接する画素とのレベル変化が小
さく相関性が強い。その自己相関関数は負の指数関数で
近似できるとされている。このとき、自己相関関数のフ
ーリエ変換である電力スペクトル密度はゼロ周波数成分
（すなわち直流成分）で最大となり、周波数成分が高く
なるにつれて単調減少する性質を持っている。周波数領
域への直交変換として最もよく知られているのはフーリ
エ変換であるが、フーリエ変換は複素数演算を含み、構
成が複雑になることから、画像の符号化ではこれに代わ
る直交変換として２次元ＤＣＴ(Discrete Cosine Trans
form) を用いるのが一般的である。ＤＣＴにより周波数
成分に分解された変換係数が、符号化しない変換係数
（無意係数）であるレベルゼロと離散的な量子化代表値
をとる有意係数であるレベル±１からレベル±Ｋとに量
子化された後、無意係数の連続性を符号化するランレン
グス符号化ならびに有意係数のレベルの生起確率に応じ
て可変長符号を割り当てるハフマン符号化が行われるこ
とにより、画像データが圧縮される。
【０００８】例えばＩＴＵ−Ｔ勧告Ｈ．２６１では、動
きの少ない画像に対しては動き補償フレーム間予測を適
用し、フレーム間の予測誤差に対して以下に示すような
符号化を行っている。また動きの大きい画像に対しては
フレーム間予測を適用せず、フレーム画素に対して直接
以下の符号化を行う。図３５はＨ．２６１による画像デ
ータの符号化器および復号化器を示したものである。
きの少ない画像に対しては動き補償フレーム間予測を適
用し、フレーム間の予測誤差に対して以下に示すような
符号化を行っている。また動きの大きい画像に対しては
フレーム間予測を適用せず、フレーム画素に対して直接
以下の符号化を行う。図３５はＨ．２６１による画像デ
ータの符号化器および復号化器を示したものである。
【０００９】図３５に示すように、Ｈ．２６１による画
像データの符号化器１１６は、減算部１０７と、２次元
ＤＣＴを行う第１の直交変換部１０８と、第１の量子化
部１０９と、第２の逆量子化部１１０と、第２の逆直交
変換部１１１と、加算部１１２と、動き補償用の第２の
画像メモリ１１３と、ループ内フィルタ１１４と、符号
化制御部１１５と、セレクタ１２３，１２４とを備えて
いる。
像データの符号化器１１６は、減算部１０７と、２次元
ＤＣＴを行う第１の直交変換部１０８と、第１の量子化
部１０９と、第２の逆量子化部１１０と、第２の逆直交
変換部１１１と、加算部１１２と、動き補償用の第２の
画像メモリ１１３と、ループ内フィルタ１１４と、符号
化制御部１１５と、セレクタ１２３，１２４とを備えて
いる。
【００１０】一方、復号化器１２２は、第１の逆量子化
部１１７と、第１の逆直交変換部１１８と、加算部１１
９と、動き補償用の第１の画像メモリ１２０と、ループ
内フィルタ１２１と、セレクタ１２５とを備えている。
部１１７と、第１の逆直交変換部１１８と、加算部１１
９と、動き補償用の第１の画像メモリ１２０と、ループ
内フィルタ１２１と、セレクタ１２５とを備えている。
【００１１】符号化器１１６では、減算部１０７によ
り、予め３５２×２８８ドットのＣＩＦ(Common Interm
ediate Format)に変換されたビデオ入力信号と動き補償
用の第２の画像メモリ１１３が記憶している予測データ
との差分をとることでフレーム間の予測誤差を算出す
る。この時、１５×１５画素の範囲内の動きは予測デー
タをブロック周辺の１６×１６画素の任意の１６×１６
画素のブロックとして指定することにより動き補償され
る。動き量の指定は２次元動きベクトルにより行い、画
像データとともに復号化器に送られる。復号化側では復
号ブロックよりこの動きベクトルだけずらした領域の動
き補償用画像メモリのデータを予測データとして復号を
行う。また動き補償が利かないような大きな動きに対し
ては、セレクタ１２３、１２４により、予測をしないフ
レーム内符号化を選択する。予測誤差やフレーム画素を
８画素×８ラインのブロックに分割し、この各ブロック
に対して第１の直交変換部１０８で２次元ＤＣＴを施
す。ＤＣＴにより各ブロックの画素は周波数成分に変換
される。得られた変換係数は第１の量子化部１０９で量
子化される。量子化により各変換係数は無意係数のレベ
ル０からレベル±１２７までの整数である有意係数のレ
ベルに代表される。量子化されたデータは、通信部等を
経て復号化器に送られるが、同時に第２の逆量子化部１
１０、第２の逆直交変換部１１１で逆変換された後、動
き補償用の第２の画像メモリ１１３が記憶する予測デー
タに加算部１１２により加算され、動き補償用の第２の
画像メモリ１１３に記憶されて次の予測データとなる。
復号化器１２２では、入力された画像データを第１の逆
量子化部１１７および第１の逆直交変換部１１８で逆変
換した後、動き補償用の第１の画像メモリ１２０が記憶
する予測データに加算器１１９により加算し、ビデオ出
力を得るとともに、これを次の予測データとして動き補
償用の第１の画像メモリ１２０に記憶する。入力ブロッ
クがフレーム内データの場合には、セレクタ１２５によ
り予測データは選択されず、入力データが直接逆変換さ
れ、ビデオ出力として取り出され、動き補償用画像メモ
リに記憶される。
り、予め３５２×２８８ドットのＣＩＦ(Common Interm
ediate Format)に変換されたビデオ入力信号と動き補償
用の第２の画像メモリ１１３が記憶している予測データ
との差分をとることでフレーム間の予測誤差を算出す
る。この時、１５×１５画素の範囲内の動きは予測デー
タをブロック周辺の１６×１６画素の任意の１６×１６
画素のブロックとして指定することにより動き補償され
る。動き量の指定は２次元動きベクトルにより行い、画
像データとともに復号化器に送られる。復号化側では復
号ブロックよりこの動きベクトルだけずらした領域の動
き補償用画像メモリのデータを予測データとして復号を
行う。また動き補償が利かないような大きな動きに対し
ては、セレクタ１２３、１２４により、予測をしないフ
レーム内符号化を選択する。予測誤差やフレーム画素を
８画素×８ラインのブロックに分割し、この各ブロック
に対して第１の直交変換部１０８で２次元ＤＣＴを施
す。ＤＣＴにより各ブロックの画素は周波数成分に変換
される。得られた変換係数は第１の量子化部１０９で量
子化される。量子化により各変換係数は無意係数のレベ
ル０からレベル±１２７までの整数である有意係数のレ
ベルに代表される。量子化されたデータは、通信部等を
経て復号化器に送られるが、同時に第２の逆量子化部１
１０、第２の逆直交変換部１１１で逆変換された後、動
き補償用の第２の画像メモリ１１３が記憶する予測デー
タに加算部１１２により加算され、動き補償用の第２の
画像メモリ１１３に記憶されて次の予測データとなる。
復号化器１２２では、入力された画像データを第１の逆
量子化部１１７および第１の逆直交変換部１１８で逆変
換した後、動き補償用の第１の画像メモリ１２０が記憶
する予測データに加算器１１９により加算し、ビデオ出
力を得るとともに、これを次の予測データとして動き補
償用の第１の画像メモリ１２０に記憶する。入力ブロッ
クがフレーム内データの場合には、セレクタ１２５によ
り予測データは選択されず、入力データが直接逆変換さ
れ、ビデオ出力として取り出され、動き補償用画像メモ
リに記憶される。
【００１２】以上がビデオ信号の予測符号化、特にフレ
ーム間予測符号化とフレーム内予測符号化を組み合わせ
た符号化の一例である。フレーム間符号化では、伝送エ
ラーが生じると符号化側と復号化側のフレームメモリー
の内容にミスマッチを生じるため、それ以降の再生画像
に全てエラーの影響が伝播する。このため、フレーム内
符号化された画像データを伝送して再生画像をリフレッ
シュする必要がある。
ーム間予測符号化とフレーム内予測符号化を組み合わせ
た符号化の一例である。フレーム間符号化では、伝送エ
ラーが生じると符号化側と復号化側のフレームメモリー
の内容にミスマッチを生じるため、それ以降の再生画像
に全てエラーの影響が伝播する。このため、フレーム内
符号化された画像データを伝送して再生画像をリフレッ
シュする必要がある。
【００１３】フレーム内符号化はフレーム間の相関を利
用しない符号化のため、フレーム間符号化と比べると符
号量が膨大である。このため、１フレームの全てのブロ
ックがフレーム内符号化されたフレームをリフレッシュ
用に伝送すると、伝送に時間がかかるため、遅延時間が
増大してしまう。そこで、従来、１フレームを複数のブ
ロック群に分割し、１フレーム毎に一つのブロック群を
フレーム内符号化でリフレッシュすることにより１フレ
ーム当たりの符号量の増加を少なくすることが考えられ
ている。特開平５−２３６４６４号公報では、さらに、
リフレッシュ済みのブロック群とリフレッシュ前のブロ
ック群の境界において、リフレッシュ済みのブロックが
動き予測によりリフレッシュ前のミスマッチの生じたブ
ロックを参照画像に選ぶことによりミスマッチ誤差が残
ってしまうという問題を解決している。この例では図３
６に示すように、ブロック２行またはブロック２列より
なるブロック群をフレーム内符号化により伝送するとと
もに、このフレーム内符号化により伝送される２行ある
いは２列を、１フレームの画像に対して行方向あるいは
列方向に順に１行または１列単位で変更するようにして
いる。こうすることにより、ブロック群境界のブロック
は上下あるいは前後のブロックがともにリフレッシュさ
れる間は動き予測を行わないため、ミスマッチの生じた
ブロックを参照画像にすることはなく、ミスマッチ誤差
は残らない。また、この例では、２行あるいは２列のブ
ロックのうち後行するブロックについてはリフレッシュ
を行わない代わりに動き補償を禁止してもよいとしてい
る。
用しない符号化のため、フレーム間符号化と比べると符
号量が膨大である。このため、１フレームの全てのブロ
ックがフレーム内符号化されたフレームをリフレッシュ
用に伝送すると、伝送に時間がかかるため、遅延時間が
増大してしまう。そこで、従来、１フレームを複数のブ
ロック群に分割し、１フレーム毎に一つのブロック群を
フレーム内符号化でリフレッシュすることにより１フレ
ーム当たりの符号量の増加を少なくすることが考えられ
ている。特開平５−２３６４６４号公報では、さらに、
リフレッシュ済みのブロック群とリフレッシュ前のブロ
ック群の境界において、リフレッシュ済みのブロックが
動き予測によりリフレッシュ前のミスマッチの生じたブ
ロックを参照画像に選ぶことによりミスマッチ誤差が残
ってしまうという問題を解決している。この例では図３
６に示すように、ブロック２行またはブロック２列より
なるブロック群をフレーム内符号化により伝送するとと
もに、このフレーム内符号化により伝送される２行ある
いは２列を、１フレームの画像に対して行方向あるいは
列方向に順に１行または１列単位で変更するようにして
いる。こうすることにより、ブロック群境界のブロック
は上下あるいは前後のブロックがともにリフレッシュさ
れる間は動き予測を行わないため、ミスマッチの生じた
ブロックを参照画像にすることはなく、ミスマッチ誤差
は残らない。また、この例では、２行あるいは２列のブ
ロックのうち後行するブロックについてはリフレッシュ
を行わない代わりに動き補償を禁止してもよいとしてい
る。
【００１４】
【発明が解決しようとする課題】１フレームを複数のブ
ロック群に分割してブロック群単位でリフレッシュを行
うという上記従来の画像符号化のリフレッシュ方法にお
いて、１フレーム当たりの符号量の増加を更に少なくす
るために、１度にリフレッシュするブロック群のブロッ
ク数を減らすことが考えられる。しかし、一度にフレー
ム内符号化でリフレッシュするブロック群のブロック数
を半分にしても、リフレッシュ済みのブロック群とリフ
レッシュ前のブロック群の境界において動き予測のため
にミスマッチ誤差が残るという問題を回避しようとする
と、２フレームあるいは３フレームに渡ってフレーム内
符号化を行うブロックあるいは２フレームあるいは３フ
レームに渡って動き補償を禁止するブロックが増える。
このため、符号化効率が低下し、発生符号量はさほど減
少しない。図３７は３列のブロックよりなるブロック群
をさらに左右２つのブロック群に分割したものを一つの
ブロック群として考えた場合の例である。図３７におい
て、斜線のブロックはフレーム内符号化をしているブロ
ックである。１フレーム目ではフレーム内符号化するブ
ロック数は図３６の３／４であるが、２フレーム目は同
等以上、３フレーム目は５／４といった具合である。こ
うしたオーバーヘッドはブロック群を小さくするとより
顕著になるとともに、１画面をリフレッシュするのに必
要な時間は長くなるため、ブロック群はあまり小さくは
できない。
ロック群に分割してブロック群単位でリフレッシュを行
うという上記従来の画像符号化のリフレッシュ方法にお
いて、１フレーム当たりの符号量の増加を更に少なくす
るために、１度にリフレッシュするブロック群のブロッ
ク数を減らすことが考えられる。しかし、一度にフレー
ム内符号化でリフレッシュするブロック群のブロック数
を半分にしても、リフレッシュ済みのブロック群とリフ
レッシュ前のブロック群の境界において動き予測のため
にミスマッチ誤差が残るという問題を回避しようとする
と、２フレームあるいは３フレームに渡ってフレーム内
符号化を行うブロックあるいは２フレームあるいは３フ
レームに渡って動き補償を禁止するブロックが増える。
このため、符号化効率が低下し、発生符号量はさほど減
少しない。図３７は３列のブロックよりなるブロック群
をさらに左右２つのブロック群に分割したものを一つの
ブロック群として考えた場合の例である。図３７におい
て、斜線のブロックはフレーム内符号化をしているブロ
ックである。１フレーム目ではフレーム内符号化するブ
ロック数は図３６の３／４であるが、２フレーム目は同
等以上、３フレーム目は５／４といった具合である。こ
うしたオーバーヘッドはブロック群を小さくするとより
顕著になるとともに、１画面をリフレッシュするのに必
要な時間は長くなるため、ブロック群はあまり小さくは
できない。
【００１５】つまり、１画面を複数のブロック群に分割
して１フレーム毎に一つのブロック群をフレーム内符号
化でリフレッシュすることにより１フレーム当たりの符
号量の増加を少なくするとしても、動き予測によるミス
マッチの伝播を考慮すると符号量の増加を極端に少なく
することは不可能であった。決められた伝送帯域で符号
量のばらつきを平滑化するためのバッファによる遅延が
極力少なくなるようにコマ飛びのない映像を伝送する場
合、１フレーム当たりの情報量は極力一定にする必要が
ある。例えば９００Ｋビット／秒の伝送速度で３０フレ
ーム／秒の映像を伝送するためには、１フレーム当たり
の発生符号量を３０Ｋビットに極力近づける必要があ
る。このとき、フレーム内符号化されたブロック群を伝
送するために増加する符号量を減らすためには、図３５
に示した符号化器１１６においては、量子化部１０９に
おける量子化ステップを大きくして符号化する必要があ
る。量子化ステップを大きくすると、符号量は減少する
が、量子化誤差が大きくなり、映像に量子化歪みが発生
する。量子化歪みが目立つ状況下で符号化方式の異なる
ブロック群が周期的な動きをすると、そのブロック群が
巡回する妨害ラインとして認識されるという問題があっ
た。この妨害ラインは静止した画像領域において特に顕
著に妨害として認識される。
して１フレーム毎に一つのブロック群をフレーム内符号
化でリフレッシュすることにより１フレーム当たりの符
号量の増加を少なくするとしても、動き予測によるミス
マッチの伝播を考慮すると符号量の増加を極端に少なく
することは不可能であった。決められた伝送帯域で符号
量のばらつきを平滑化するためのバッファによる遅延が
極力少なくなるようにコマ飛びのない映像を伝送する場
合、１フレーム当たりの情報量は極力一定にする必要が
ある。例えば９００Ｋビット／秒の伝送速度で３０フレ
ーム／秒の映像を伝送するためには、１フレーム当たり
の発生符号量を３０Ｋビットに極力近づける必要があ
る。このとき、フレーム内符号化されたブロック群を伝
送するために増加する符号量を減らすためには、図３５
に示した符号化器１１６においては、量子化部１０９に
おける量子化ステップを大きくして符号化する必要があ
る。量子化ステップを大きくすると、符号量は減少する
が、量子化誤差が大きくなり、映像に量子化歪みが発生
する。量子化歪みが目立つ状況下で符号化方式の異なる
ブロック群が周期的な動きをすると、そのブロック群が
巡回する妨害ラインとして認識されるという問題があっ
た。この妨害ラインは静止した画像領域において特に顕
著に妨害として認識される。
【００１６】そこで本発明では、リフレッシュによる符
号化量の増加を少なくしつつ、１フレームを複数のブロ
ック群に分割してブロック群単位でリフレッシュするこ
とに起因する妨害ラインの出現を回避するとともに、伝
送エラーの影響が短時間で解消されるようなリフレッシ
ュを行う画像符号化装置および方法を提供することを目
的とする。
号化量の増加を少なくしつつ、１フレームを複数のブロ
ック群に分割してブロック群単位でリフレッシュするこ
とに起因する妨害ラインの出現を回避するとともに、伝
送エラーの影響が短時間で解消されるようなリフレッシ
ュを行う画像符号化装置および方法を提供することを目
的とする。
【００１７】
【課題を解決するための手段および発明の効果】第１の
発明は、動画像の各フレームを予め決められた個数ｍの
ブロック群に分割し、各ブロック群に含まれるブロック
を単位としてフレーム間符号化方式とフレーム内符号化
方式との間で符号化方式を切り換えつつ動画像を符号化
する画像符号化装置であって、各フレームにおける個数
ｍのブロック群のそれぞれの領域内の被写体に所定時点
から所定時間Ｔだけ経過する間に予め決められたしきい
値以上の動きがあるか否かを判別する動き判別手段と、
一つのブロック群に含まれる全てのブロックを同一フレ
ームの符号化過程でフレーム内符号化することとして定
義される一括リフレッシュを、動き判別手段によりしき
い値以上の動きがあると判別された領域のブロック群に
対して行う一括リフレッシュ手段と、各フレームにおけ
るブロック群のうちフレーム内の位置が同一であるブロ
ック群を同一ブロック群と見なして一つのブロック群に
含まれる各ブロックをブロック毎に異なるフレームの符
号化過程でフレーム内符号化することとして定義される
分散リフレッシュを、動き判別手段によりしきい値以上
の動きがないと判別された領域のブロック群に対して行
う分散リフレッシュ手段とを備える。
発明は、動画像の各フレームを予め決められた個数ｍの
ブロック群に分割し、各ブロック群に含まれるブロック
を単位としてフレーム間符号化方式とフレーム内符号化
方式との間で符号化方式を切り換えつつ動画像を符号化
する画像符号化装置であって、各フレームにおける個数
ｍのブロック群のそれぞれの領域内の被写体に所定時点
から所定時間Ｔだけ経過する間に予め決められたしきい
値以上の動きがあるか否かを判別する動き判別手段と、
一つのブロック群に含まれる全てのブロックを同一フレ
ームの符号化過程でフレーム内符号化することとして定
義される一括リフレッシュを、動き判別手段によりしき
い値以上の動きがあると判別された領域のブロック群に
対して行う一括リフレッシュ手段と、各フレームにおけ
るブロック群のうちフレーム内の位置が同一であるブロ
ック群を同一ブロック群と見なして一つのブロック群に
含まれる各ブロックをブロック毎に異なるフレームの符
号化過程でフレーム内符号化することとして定義される
分散リフレッシュを、動き判別手段によりしきい値以上
の動きがないと判別された領域のブロック群に対して行
う分散リフレッシュ手段とを備える。
【００１８】上記第１の発明によれば、領域内の被写体
に動きがあるために伝送エラーの生じる可能性が高いブ
ロック群に対して一括リフレッシュが行われ、領域内の
被写体に動きがないために伝送エラーが生じる可能性の
低いブロック群に対しては分散リフレッシュが行われ
る。このため、静止した画像領域において妨害ラインを
なくすことができるとともに、動きがあったブロック群
の動きがなくなった時点で最後にブロック群としてリフ
レッシュしたブロックに伝送エラーが生じた場合にもこ
れをリフレッシュすることが可能となる。なお本発明で
は、画像符号化方式としてＩＴＵ−Ｔ勧告Ｈ．２６１ま
たはＨ．２６３が使用される場合、「ブロック」はマク
ロブロックに相当し、「ブロック群」はグループオブブ
ロックに相当する。ただし、「ブロック群」はグループ
オブブロックに限定されるものではない。
に動きがあるために伝送エラーの生じる可能性が高いブ
ロック群に対して一括リフレッシュが行われ、領域内の
被写体に動きがないために伝送エラーが生じる可能性の
低いブロック群に対しては分散リフレッシュが行われ
る。このため、静止した画像領域において妨害ラインを
なくすことができるとともに、動きがあったブロック群
の動きがなくなった時点で最後にブロック群としてリフ
レッシュしたブロックに伝送エラーが生じた場合にもこ
れをリフレッシュすることが可能となる。なお本発明で
は、画像符号化方式としてＩＴＵ−Ｔ勧告Ｈ．２６１ま
たはＨ．２６３が使用される場合、「ブロック」はマク
ロブロックに相当し、「ブロック群」はグループオブブ
ロックに相当する。ただし、「ブロック群」はグループ
オブブロックに限定されるものではない。
【００１９】第２の発明は、第１の発明において、一括
リフレッシュ手段は、動き判別手段による判別結果に基
づき、一括リフレッシュを行ったブロック群に対し、そ
のブロック群の領域内の被写体にしきい値以上の動きが
なくなってからもＭＳ回（ＭＳは所定の自然数）は一括
リフレッシュを行うことを特徴とする。上記第２の発明
によれば、動きがなくなる直前に一度に行ったリフレッ
シュデータに誤りが発生しても次のリフレッシュタイミ
ングで一度にリフレッシュすることができる。
リフレッシュ手段は、動き判別手段による判別結果に基
づき、一括リフレッシュを行ったブロック群に対し、そ
のブロック群の領域内の被写体にしきい値以上の動きが
なくなってからもＭＳ回（ＭＳは所定の自然数）は一括
リフレッシュを行うことを特徴とする。上記第２の発明
によれば、動きがなくなる直前に一度に行ったリフレッ
シュデータに誤りが発生しても次のリフレッシュタイミ
ングで一度にリフレッシュすることができる。
【００２０】第３の発明は、第１の発明において、しき
い値以上の動きがあると判別された領域のブロック群に
対する一括リフレッシュを一括リフレッシュ手段が所定
時点から時間Ｔだけ経過した時点におけるフレームの符
号化過程で行い、しきい値以上の動きがないと判別され
た領域のブロック群に対する分散リフレッシュを分散リ
フレッシュ手段が所定時点から時間Ｔだけ経過する間に
完了するように、一括リフレッシュおよび分散リフレッ
シュのタイミングを管理するリフレッシュタイミング管
理手段を更に備える。上記第３の発明によれば、静止し
た画像領域において妨害ラインをなくすことができると
ともに、動きがあったブロック群の動きがなくなった時
点で最後にブロック群としてリフレッシュしたブロック
に伝送エラーが生じた場合にもこれをより早くリフレッ
シュすることが可能となる。
い値以上の動きがあると判別された領域のブロック群に
対する一括リフレッシュを一括リフレッシュ手段が所定
時点から時間Ｔだけ経過した時点におけるフレームの符
号化過程で行い、しきい値以上の動きがないと判別され
た領域のブロック群に対する分散リフレッシュを分散リ
フレッシュ手段が所定時点から時間Ｔだけ経過する間に
完了するように、一括リフレッシュおよび分散リフレッ
シュのタイミングを管理するリフレッシュタイミング管
理手段を更に備える。上記第３の発明によれば、静止し
た画像領域において妨害ラインをなくすことができると
ともに、動きがあったブロック群の動きがなくなった時
点で最後にブロック群としてリフレッシュしたブロック
に伝送エラーが生じた場合にもこれをより早くリフレッ
シュすることが可能となる。
【００２１】第４の発明は、第３の発明において、分散
リフレッシュ手段は、分散リフレッシュの過程にあるブ
ロック群のブロックがＳ回（Ｓは所定の自然数）以上続
けてブロック毎に異なるフレームでフレーム内符号化さ
れた場合には、そのブロック群に対する分散リフレッシ
ュを時間Ｔよりも長い所定時間Ｔ’が経過する間に完了
することを特徴とする。上記第４の発明によれば、静止
領域が続くブロック群のフレーム内符号化ブロック数を
減らすことにより伝送エラーの影響を少なくおさえつ
つ、符号化効率を向上させることができる。
リフレッシュ手段は、分散リフレッシュの過程にあるブ
ロック群のブロックがＳ回（Ｓは所定の自然数）以上続
けてブロック毎に異なるフレームでフレーム内符号化さ
れた場合には、そのブロック群に対する分散リフレッシ
ュを時間Ｔよりも長い所定時間Ｔ’が経過する間に完了
することを特徴とする。上記第４の発明によれば、静止
領域が続くブロック群のフレーム内符号化ブロック数を
減らすことにより伝送エラーの影響を少なくおさえつ
つ、符号化効率を向上させることができる。
【００２２】第５の発明は、第３の発明において、分散
リフレッシュ手段は、分散リフレッシュを行うべきブロ
ック群を、時間Ｔに相当するフレーム数と等しい個数の
サブブロック群に分割し、１フレームの符号化過程で１
サブブロック群をフレーム内符号化することを特徴とす
る。上記第５の発明によれば、ブロック毎に異なるタイ
ミングでフレーム内符号化によるリフレッシュを行うブ
ロックが時間Ｔに相当する数のフレームに分散されるた
め、符号量変動が抑えられ、フレーム内符号化したブロ
ックを目立たなくすることができる。
リフレッシュ手段は、分散リフレッシュを行うべきブロ
ック群を、時間Ｔに相当するフレーム数と等しい個数の
サブブロック群に分割し、１フレームの符号化過程で１
サブブロック群をフレーム内符号化することを特徴とす
る。上記第５の発明によれば、ブロック毎に異なるタイ
ミングでフレーム内符号化によるリフレッシュを行うブ
ロックが時間Ｔに相当する数のフレームに分散されるた
め、符号量変動が抑えられ、フレーム内符号化したブロ
ックを目立たなくすることができる。
【００２３】第６の発明は、第４の発明において、分散
リフレッシュ手段は、分散リフレッシュを行うべきブロ
ック群を、時間Ｔ’に相当するフレーム数に等しい個数
のサブブロック群に分割し、１フレームの符号化過程で
１サブブロック群をフレーム内符号化することを特徴と
する。上記第６の発明によれば、ブロック毎に異なるタ
イミングでフレーム内符号化によるリフレッシュを行う
ブロックが時間Ｔ’に相当する数のフレームに分散され
るため、符号量変動が抑えられ、フレーム内符号化した
ブロックを目立たなくすることができる。
リフレッシュ手段は、分散リフレッシュを行うべきブロ
ック群を、時間Ｔ’に相当するフレーム数に等しい個数
のサブブロック群に分割し、１フレームの符号化過程で
１サブブロック群をフレーム内符号化することを特徴と
する。上記第６の発明によれば、ブロック毎に異なるタ
イミングでフレーム内符号化によるリフレッシュを行う
ブロックが時間Ｔ’に相当する数のフレームに分散され
るため、符号量変動が抑えられ、フレーム内符号化した
ブロックを目立たなくすることができる。
【００２４】第７の発明は、第４の発明において、一括
リフレッシュ部は、所定時間Ｔ’が経過する間に分散リ
フレッシュが完了するブロック群の割合に応じて時間Ｔ
よりも短い所定時間Ｔ’’が経過した時点におけるフレ
ームの符号化過程で一括リフレッシュを行うことを特徴
とする。上記第７の発明によれば、静止領域が続くブロ
ック群のフレーム内符号化ブロック数の減少による符号
化効率の向上分を利用して動きがある領域のブロック群
のフレーム内符号化ブロック数を増加させることによ
り、符号化効率および画像の劣化を少なく抑えつつ、伝
送エラーの影響をより早くリフレッシュすることができ
る。
リフレッシュ部は、所定時間Ｔ’が経過する間に分散リ
フレッシュが完了するブロック群の割合に応じて時間Ｔ
よりも短い所定時間Ｔ’’が経過した時点におけるフレ
ームの符号化過程で一括リフレッシュを行うことを特徴
とする。上記第７の発明によれば、静止領域が続くブロ
ック群のフレーム内符号化ブロック数の減少による符号
化効率の向上分を利用して動きがある領域のブロック群
のフレーム内符号化ブロック数を増加させることによ
り、符号化効率および画像の劣化を少なく抑えつつ、伝
送エラーの影響をより早くリフレッシュすることができ
る。
【００２５】第８の発明は、第７発明において、リフレ
ッシュタイミング管理部は、所定時間Ｔ’’を下記の式
により算出することを特徴とする： Ｔ’’＝ｋＴ（ｍ−Ｂ）／（ｍｋ−Ｂ） ここで、ｍは各フレームにおけるブロック群の個数であ
り、Ｂは所定時間Ｔ’が経過する間に分散リフレッシュ
が完了するブロック群の数であってｍ以下の整数であ
り、ｋはＴ’／Ｔである。上記第８の発明によれば、静
止領域が続くブロック群のフレーム内符号化ブロック数
の減少による符号化効率の向上分を正確に利用して動き
がある領域のブロック群のフレーム内符号化ブロック数
を増加させることにより、符号化効率および画像の劣化
を少なく抑えつつ、伝送エラーの影響をより早くリフレ
ッシュすることができる。
ッシュタイミング管理部は、所定時間Ｔ’’を下記の式
により算出することを特徴とする： Ｔ’’＝ｋＴ（ｍ−Ｂ）／（ｍｋ−Ｂ） ここで、ｍは各フレームにおけるブロック群の個数であ
り、Ｂは所定時間Ｔ’が経過する間に分散リフレッシュ
が完了するブロック群の数であってｍ以下の整数であ
り、ｋはＴ’／Ｔである。上記第８の発明によれば、静
止領域が続くブロック群のフレーム内符号化ブロック数
の減少による符号化効率の向上分を正確に利用して動き
がある領域のブロック群のフレーム内符号化ブロック数
を増加させることにより、符号化効率および画像の劣化
を少なく抑えつつ、伝送エラーの影響をより早くリフレ
ッシュすることができる。
【００２６】第９の発明は、動画像の各フレームを予め
決められた個数ｍのブロック群に分割し、各ブロック群
に含まれるブロックを単位としてフレーム間符号化方式
とフレーム内符号化方式との間で符号化方式を切り換え
つつ動画像を符号化する画像符号化装置であって、一つ
のブロック群に含まれる全てのブロックを同一フレーム
の符号化過程でフレーム内符号化することとして定義さ
れる一括リフレッシュを、各フレームにつき高々一つの
ブロック群に対して行う一括リフレッシュ手段と、各フ
レームにおけるブロック群のうちフレーム内の位置が同
一であるブロック群に対して一括リフレッシュを行う間
隔に相当するフレーム数Ｔｆが個数ｍよりも大きくなる
ように、一括リフレッシュのタイミングを管理するリフ
レッシュタイミング管理手段とを備える。上記第９の発
明によれば、一度にフレーム内符号化するブロック群を
含まないフレームが存在することになり、フレーム間相
関を利用した能率の高い映像符号化により画質を向上で
きる。
決められた個数ｍのブロック群に分割し、各ブロック群
に含まれるブロックを単位としてフレーム間符号化方式
とフレーム内符号化方式との間で符号化方式を切り換え
つつ動画像を符号化する画像符号化装置であって、一つ
のブロック群に含まれる全てのブロックを同一フレーム
の符号化過程でフレーム内符号化することとして定義さ
れる一括リフレッシュを、各フレームにつき高々一つの
ブロック群に対して行う一括リフレッシュ手段と、各フ
レームにおけるブロック群のうちフレーム内の位置が同
一であるブロック群に対して一括リフレッシュを行う間
隔に相当するフレーム数Ｔｆが個数ｍよりも大きくなる
ように、一括リフレッシュのタイミングを管理するリフ
レッシュタイミング管理手段とを備える。上記第９の発
明によれば、一度にフレーム内符号化するブロック群を
含まないフレームが存在することになり、フレーム間相
関を利用した能率の高い映像符号化により画質を向上で
きる。
【００２７】第１０の発明は、第３の発明において、リ
フレッシュタイミング管理手段は、各フレームにおける
ブロックのうちフレーム内の位置が同一であるブロック
に対してフレーム内符号化を行う間隔に相当するフレー
ム数Ｔｆが個数ｍよりも大きくなるように、フレーム内
符号化を行うタイミングを管理することを特徴とする。
上記第１０の発明によれば、一括リフレッシュを行うブ
ロック群を含まないフレームにおいては、フレーム内符
号化するブロックの数がブロック群のブロック数より減
少するため能率の高い映像符号化とフレーム内符号化に
よるリフレッシュの双方の効果を享受することができ
る。
フレッシュタイミング管理手段は、各フレームにおける
ブロックのうちフレーム内の位置が同一であるブロック
に対してフレーム内符号化を行う間隔に相当するフレー
ム数Ｔｆが個数ｍよりも大きくなるように、フレーム内
符号化を行うタイミングを管理することを特徴とする。
上記第１０の発明によれば、一括リフレッシュを行うブ
ロック群を含まないフレームにおいては、フレーム内符
号化するブロックの数がブロック群のブロック数より減
少するため能率の高い映像符号化とフレーム内符号化に
よるリフレッシュの双方の効果を享受することができ
る。
【００２８】第１１の発明は、第１の発明において、各
フレームにおけるブロック群のうちフレーム内の位置が
同一であるブロックに対して一括リフレッシュ手段また
は分散リフレッシュ手段によりフレーム内符号化が行わ
れる間隔を時間Ｔとするリフレッシュタイミング管理手
段を更に備え、動き判別手段は、リフレッシュタイミン
グ管理手段による管理に基づき、各フレームにおける個
数ｍのブロック群のそれぞれの領域毎に１フレームずつ
ずれた時点から時間Ｔだけ経過する間にそれぞれの領域
内の被写体にしきい値以上の動きがあるか否かを判別
し、一括リフレッシュ手段は、リフレッシュタイミング
管理手段による管理に基づき、各フレームにつき高々一
つのブロック群に対して一括リフレッシュを行うことを
特徴とする。上記第１１の発明によれば、一括リフレッ
シュを行うブロック群を順に隣接させることが可能とな
り、動きベクトルの範囲の制限の極力少ない効率のいい
リフレッシュを行うことが可能となる。
フレームにおけるブロック群のうちフレーム内の位置が
同一であるブロックに対して一括リフレッシュ手段また
は分散リフレッシュ手段によりフレーム内符号化が行わ
れる間隔を時間Ｔとするリフレッシュタイミング管理手
段を更に備え、動き判別手段は、リフレッシュタイミン
グ管理手段による管理に基づき、各フレームにおける個
数ｍのブロック群のそれぞれの領域毎に１フレームずつ
ずれた時点から時間Ｔだけ経過する間にそれぞれの領域
内の被写体にしきい値以上の動きがあるか否かを判別
し、一括リフレッシュ手段は、リフレッシュタイミング
管理手段による管理に基づき、各フレームにつき高々一
つのブロック群に対して一括リフレッシュを行うことを
特徴とする。上記第１１の発明によれば、一括リフレッ
シュを行うブロック群を順に隣接させることが可能とな
り、動きベクトルの範囲の制限の極力少ない効率のいい
リフレッシュを行うことが可能となる。
【００２９】第１２の発明は、第９の発明において、リ
フレッシュタイミング管理手段による管理に基づき、各
フレームにおける個数ｍのブロック群のそれぞれの領域
毎に１フレームずつずれた時点から時間Ｔだけ経過する
間にそれぞれの領域内の被写体にしきい値以上の動きが
あるか否かを判別する動き判別手段を更に備え、一括リ
フレッシュ手段は、動き判別手段によりしきい値以上の
動きがあると判別された領域のブロック群に対して一括
リフレッシュを行うことを特徴とする。
フレッシュタイミング管理手段による管理に基づき、各
フレームにおける個数ｍのブロック群のそれぞれの領域
毎に１フレームずつずれた時点から時間Ｔだけ経過する
間にそれぞれの領域内の被写体にしきい値以上の動きが
あるか否かを判別する動き判別手段を更に備え、一括リ
フレッシュ手段は、動き判別手段によりしきい値以上の
動きがあると判別された領域のブロック群に対して一括
リフレッシュを行うことを特徴とする。
【００３０】第１３の発明は、第１１の発明において、
動き判別手段は、分散リフレッシュを行うブロック群の
領域ついても、その分散リフレッシュと並行して、各ブ
ロック群のそれぞれの領域毎に１フレームずつずれた時
点から時間Ｔだけ経過する間にそれぞれの領域内の被写
体にしきい値以上の動きがあるか否かを検出することに
より動きの有無を判別し、分散リフレッシュ手段は、分
散リフレッシュの過程にあるブロック群の領域内の被写
体にしきい値以上の動きが動き判別手段により検出され
ると、そのブロック群に対する分散リフレッシュを中断
し、一括リフレッシュ手段は、しきい値以上の動きが検
出された領域のブロック群に対する分散リフレッシュが
開始された時点から時間Ｔだけ経過した後に、その領域
のブロック群に対し一括リフレッシュを行うことを特徴
とする。上記第１３の発明によれば、時間Ｔ経過後に一
度にリフレッシュされるブロックをそれまでの間に異な
るタイミングでリフレッシュすることがなくなるため、
符号化効率がより向上する。
動き判別手段は、分散リフレッシュを行うブロック群の
領域ついても、その分散リフレッシュと並行して、各ブ
ロック群のそれぞれの領域毎に１フレームずつずれた時
点から時間Ｔだけ経過する間にそれぞれの領域内の被写
体にしきい値以上の動きがあるか否かを検出することに
より動きの有無を判別し、分散リフレッシュ手段は、分
散リフレッシュの過程にあるブロック群の領域内の被写
体にしきい値以上の動きが動き判別手段により検出され
ると、そのブロック群に対する分散リフレッシュを中断
し、一括リフレッシュ手段は、しきい値以上の動きが検
出された領域のブロック群に対する分散リフレッシュが
開始された時点から時間Ｔだけ経過した後に、その領域
のブロック群に対し一括リフレッシュを行うことを特徴
とする。上記第１３の発明によれば、時間Ｔ経過後に一
度にリフレッシュされるブロックをそれまでの間に異な
るタイミングでリフレッシュすることがなくなるため、
符号化効率がより向上する。
【００３１】第１４の発明は、第１１の発明において、
動き判別手段は、分散リフレッシュ手段による分散リフ
レッシュと並行して、各ブロック群のそれぞれの領域毎
に１フレームずつずれた時点から時間Ｔだけ経過する間
にそれぞれの領域内の被写体にしきい値以上の動きがあ
るか否かを検出することにより動きの有無を判別し、分
散リフレッシュ手段は、各ブロック群に対し、そのブロ
ック群の領域内の被写体の動きの有無の判別が動き判別
手段により開始された時点から分散リフレッシュを行
い、分散リフレッシュの過程にあるブロック群の領域内
の被写体にしきい値以上の動きが検出されると、そのブ
ロック群に対する分散リフレッシュを中断し、一括リフ
レッシュ手段は、しきい値以上の動きが検出された領域
のブロック群に対する分散リフレッシュが開始された時
点から時間Ｔだけ経過した後に、その領域のブロック群
に対し一括リフレッシュを行うことを特徴とする。上記
第１４の発明によれば、一括リフレッシュが行われたブ
ロック群に伝送エラーが生じ、かつ当該ブロック群の領
域の被写体の動きがなくなったために時間Ｔ経過後には
一括リフレッシュが行われない場合でも、異なるタイミ
ングでリフレッシュされているブロックに伝送エラーが
生じた場合にも、分散リフレッシュにより、当該ブロッ
ク群のいずれのブロックも時間Ｔが経過するまでに必ず
リフレッシュされる。
動き判別手段は、分散リフレッシュ手段による分散リフ
レッシュと並行して、各ブロック群のそれぞれの領域毎
に１フレームずつずれた時点から時間Ｔだけ経過する間
にそれぞれの領域内の被写体にしきい値以上の動きがあ
るか否かを検出することにより動きの有無を判別し、分
散リフレッシュ手段は、各ブロック群に対し、そのブロ
ック群の領域内の被写体の動きの有無の判別が動き判別
手段により開始された時点から分散リフレッシュを行
い、分散リフレッシュの過程にあるブロック群の領域内
の被写体にしきい値以上の動きが検出されると、そのブ
ロック群に対する分散リフレッシュを中断し、一括リフ
レッシュ手段は、しきい値以上の動きが検出された領域
のブロック群に対する分散リフレッシュが開始された時
点から時間Ｔだけ経過した後に、その領域のブロック群
に対し一括リフレッシュを行うことを特徴とする。上記
第１４の発明によれば、一括リフレッシュが行われたブ
ロック群に伝送エラーが生じ、かつ当該ブロック群の領
域の被写体の動きがなくなったために時間Ｔ経過後には
一括リフレッシュが行われない場合でも、異なるタイミ
ングでリフレッシュされているブロックに伝送エラーが
生じた場合にも、分散リフレッシュにより、当該ブロッ
ク群のいずれのブロックも時間Ｔが経過するまでに必ず
リフレッシュされる。
【００３２】第１５の発明は、第１１の発明において、
動き判別手段は、各ブロック群の領域を所定数の分割領
域に分割して、分割領域毎に被写体に予め設定されたし
きい値以上の動きがあるか否かを検出することにより各
分割領域における動きの有無を判別し、一括リフレッシ
ュ手段は、動きがあると判別された分割領域を含む領域
のブロック群に対する次の一括リフレッシュの時点にお
けるフレームの符号化過程で、一括リフレッシュに代え
て、その分割領域の全てのブロックをフレーム内符号化
することを特徴とする。上記第１５の発明によれば、ブ
ロック群に比して小さな被写体の動きを効率よくリフレ
ッシュすることができ、リフレッシュによる妨害のより
少ない映像を得ることが可能となる。
動き判別手段は、各ブロック群の領域を所定数の分割領
域に分割して、分割領域毎に被写体に予め設定されたし
きい値以上の動きがあるか否かを検出することにより各
分割領域における動きの有無を判別し、一括リフレッシ
ュ手段は、動きがあると判別された分割領域を含む領域
のブロック群に対する次の一括リフレッシュの時点にお
けるフレームの符号化過程で、一括リフレッシュに代え
て、その分割領域の全てのブロックをフレーム内符号化
することを特徴とする。上記第１５の発明によれば、ブ
ロック群に比して小さな被写体の動きを効率よくリフレ
ッシュすることができ、リフレッシュによる妨害のより
少ない映像を得ることが可能となる。
【００３３】第１６の発明は、第１１の発明において、
動き判別手段は、各ブロック群の領域を所定数の分割領
域に分割して、分割領域毎に被写体に予め設定されたし
きい値以上の動きがあるか否かを検出することにより各
分割領域における動きの有無を判別し、分散リフレッシ
ュ手段は、分散リフレッシュの過程にあるブロック群の
領域に含まれる分割領域に動きがあると動き判別手段に
より判別されると、その分割領域を含む領域のブロック
群に対する分散リフレッシュを中断し、一括リフレッシ
ュ手段は、動きがあると判別された分割領域を含む領域
のブロック群に対する次の一括リフレッシュの時点にお
けるフレームの符号化過程で、一括リフレッシュに代え
てその分割領域の全てのブロックをフレーム内符号化す
ることを特徴とする。上記第１６の発明によれば、ブロ
ック群に比して小さな被写体の動きを効率よくリフレッ
シュすることができ、リフレッシュによる妨害のより少
ない映像を得ることが可能となる。
動き判別手段は、各ブロック群の領域を所定数の分割領
域に分割して、分割領域毎に被写体に予め設定されたし
きい値以上の動きがあるか否かを検出することにより各
分割領域における動きの有無を判別し、分散リフレッシ
ュ手段は、分散リフレッシュの過程にあるブロック群の
領域に含まれる分割領域に動きがあると動き判別手段に
より判別されると、その分割領域を含む領域のブロック
群に対する分散リフレッシュを中断し、一括リフレッシ
ュ手段は、動きがあると判別された分割領域を含む領域
のブロック群に対する次の一括リフレッシュの時点にお
けるフレームの符号化過程で、一括リフレッシュに代え
てその分割領域の全てのブロックをフレーム内符号化す
ることを特徴とする。上記第１６の発明によれば、ブロ
ック群に比して小さな被写体の動きを効率よくリフレッ
シュすることができ、リフレッシュによる妨害のより少
ない映像を得ることが可能となる。
【００３４】第１７の発明は、第１１の発明において、
一括リフレッシュ手段は、被写体が縦長の場合または被
写体が縦方向に移動する場合に、縦横に配列されたブロ
ック群のうち一括リフレッシュを行うブロック群を縦方
向に変更していくことを特徴とする。上記第１７の発明
によれば、一括リフレッシュを行うブロック群が連続す
ることにより、効率よくリフレッシュできるとともに、
一括リフレッシュを行うブロック群を含まない連続した
フレーム数が増えるため、フレーム間相関を利用した能
率の高い映像符号化により画質を向上できる。
一括リフレッシュ手段は、被写体が縦長の場合または被
写体が縦方向に移動する場合に、縦横に配列されたブロ
ック群のうち一括リフレッシュを行うブロック群を縦方
向に変更していくことを特徴とする。上記第１７の発明
によれば、一括リフレッシュを行うブロック群が連続す
ることにより、効率よくリフレッシュできるとともに、
一括リフレッシュを行うブロック群を含まない連続した
フレーム数が増えるため、フレーム間相関を利用した能
率の高い映像符号化により画質を向上できる。
【００３５】第１８の発明は、第１１の発明において、
一括リフレッシュ手段は、被写体が横長の場合または被
写体が横方向に移動する場合に、縦横に配列されたブロ
ック群のうち一括リフレッシュを行うブロック群を横方
向に変更していくことを特徴とする。第１８の発明によ
れば、一括リフレッシュを行うブロック群が連続するこ
とにより、効率よくリフレッシュできるとともに、一括
リフレッシュを行うブロック群を含まない連続したフレ
ーム数が増えるため、フレーム間相関を利用した能率の
高い映像符号化により画質を向上できる。
一括リフレッシュ手段は、被写体が横長の場合または被
写体が横方向に移動する場合に、縦横に配列されたブロ
ック群のうち一括リフレッシュを行うブロック群を横方
向に変更していくことを特徴とする。第１８の発明によ
れば、一括リフレッシュを行うブロック群が連続するこ
とにより、効率よくリフレッシュできるとともに、一括
リフレッシュを行うブロック群を含まない連続したフレ
ーム数が増えるため、フレーム間相関を利用した能率の
高い映像符号化により画質を向上できる。
【００３６】第１９の発明は、第１の発明において、動
き判別手段はしきい値を変更するしきい値設定手段を有
することを特徴とする。第２０の発明は、第１９の発明
において、しきい値設定手段は、カメラまたは映像のブ
レ量を検出する検出手段と、ブレ量に応じて異なる値を
しきい値として設定する設定手段と、を有することを特
徴とする。上記第１９または第２０の発明によれば、カ
メラの振動などによって映像にブレが生じている場合に
おいても、静止領域と動領域を的確に判断して適切な方
法でリフレッシュすることができる。
き判別手段はしきい値を変更するしきい値設定手段を有
することを特徴とする。第２０の発明は、第１９の発明
において、しきい値設定手段は、カメラまたは映像のブ
レ量を検出する検出手段と、ブレ量に応じて異なる値を
しきい値として設定する設定手段と、を有することを特
徴とする。上記第１９または第２０の発明によれば、カ
メラの振動などによって映像にブレが生じている場合に
おいても、静止領域と動領域を的確に判断して適切な方
法でリフレッシュすることができる。
【００３７】第２１の発明は、第１の発明において、動
き判別手段による判別結果に基づき、現在符号化しよう
とするフレームに一括リフレッシュを行うブロック群が
含まれ、かつ、ｎ（ｎは予め決められた自然数）フレー
ム前に符号化されたフレームに一括リフレッシュを行う
ブロック群が含まれない場合に、現在符号化しようとす
るフレームの画質をｎフレーム前に符号化されたフレー
ムの画質より悪くする符号化精度制御手段を更に備える
ことを特徴とする。第２２の発明は、第９の発明におい
て、動き判別手段による判別結果に基づき、現在符号化
しようとするフレームに一括リフレッシュを行うブロッ
ク群が含まれ、かつ、ｎ（ｎは予め決められた自然数）
フレーム前に符号化されたフレームに一括リフレッシュ
を行うブロック群が含まれない場合に、現在符号化しよ
うとするフレームの画質をｎフレーム前に符号化された
フレームの画質より悪くする符号化精度制御手段を更に
備えることを特徴とする。上記第２１または第２２の発
明によれば、フレーム間の情報量を平滑化することがで
き、コマ飛びの少ない動画像を得ることができる。
き判別手段による判別結果に基づき、現在符号化しよう
とするフレームに一括リフレッシュを行うブロック群が
含まれ、かつ、ｎ（ｎは予め決められた自然数）フレー
ム前に符号化されたフレームに一括リフレッシュを行う
ブロック群が含まれない場合に、現在符号化しようとす
るフレームの画質をｎフレーム前に符号化されたフレー
ムの画質より悪くする符号化精度制御手段を更に備える
ことを特徴とする。第２２の発明は、第９の発明におい
て、動き判別手段による判別結果に基づき、現在符号化
しようとするフレームに一括リフレッシュを行うブロッ
ク群が含まれ、かつ、ｎ（ｎは予め決められた自然数）
フレーム前に符号化されたフレームに一括リフレッシュ
を行うブロック群が含まれない場合に、現在符号化しよ
うとするフレームの画質をｎフレーム前に符号化された
フレームの画質より悪くする符号化精度制御手段を更に
備えることを特徴とする。上記第２１または第２２の発
明によれば、フレーム間の情報量を平滑化することがで
き、コマ飛びの少ない動画像を得ることができる。
【００３８】第２３の発明は、第１の発明において、動
き判別手段による判別結果に基づき、現在符号化しよう
とするフレームに一括リフレッシュを行うブロック群が
含まれず、かつ、ｎ（ｎは予め決められた自然数）フレ
ーム前に符号化されたフレームに一括リフレッシュを行
うブロック群が含まれる場合に、現在符号化しようとす
るフレームの画質をｎフレーム前に符号化されたフレー
ムの画質より良くする符号化精度制御手段を更に備える
ことを特徴とする。
き判別手段による判別結果に基づき、現在符号化しよう
とするフレームに一括リフレッシュを行うブロック群が
含まれず、かつ、ｎ（ｎは予め決められた自然数）フレ
ーム前に符号化されたフレームに一括リフレッシュを行
うブロック群が含まれる場合に、現在符号化しようとす
るフレームの画質をｎフレーム前に符号化されたフレー
ムの画質より良くする符号化精度制御手段を更に備える
ことを特徴とする。
【００３９】第２４の発明は、第９の発明において、動
き判別手段による判別結果に基づき、現在符号化しよう
とするフレームに一括リフレッシュを行うブロック群が
含まれず、かつ、ｎ（ｎは予め決められた自然数）フレ
ーム前に符号化されたフレームに一括リフレッシュを行
うブロック群が含まれる場合に、現在符号化しようとす
るフレームの画質をｎフレーム前に符号化されたフレー
ムの画質より良くする符号化精度制御手段を更に備える
ことを特徴とする。上記第２３または第２４の発明によ
れば、フレーム間の情報量を平滑化することができ、コ
マ飛びの少ない動画像を得ることができる。
き判別手段による判別結果に基づき、現在符号化しよう
とするフレームに一括リフレッシュを行うブロック群が
含まれず、かつ、ｎ（ｎは予め決められた自然数）フレ
ーム前に符号化されたフレームに一括リフレッシュを行
うブロック群が含まれる場合に、現在符号化しようとす
るフレームの画質をｎフレーム前に符号化されたフレー
ムの画質より良くする符号化精度制御手段を更に備える
ことを特徴とする。上記第２３または第２４の発明によ
れば、フレーム間の情報量を平滑化することができ、コ
マ飛びの少ない動画像を得ることができる。
【００４０】第２５の発明は、第２１の発明において、
符号化精度制御手段は、現在符号化しようとするフレー
ムの量子化精度を低下させることにより、現在符号化し
ようとするフレームの画質をｎフレーム前に符号化した
フレームの画質より悪くする量子化精度制御手段を含む
ことを特徴とする。上記第２５の発明によれば、量子化
精度のパラメータを変更するだけで、簡単にフレーム間
の情報量を平滑化することができ、コマ飛びの少ない動
画像を得ることができる。
符号化精度制御手段は、現在符号化しようとするフレー
ムの量子化精度を低下させることにより、現在符号化し
ようとするフレームの画質をｎフレーム前に符号化した
フレームの画質より悪くする量子化精度制御手段を含む
ことを特徴とする。上記第２５の発明によれば、量子化
精度のパラメータを変更するだけで、簡単にフレーム間
の情報量を平滑化することができ、コマ飛びの少ない動
画像を得ることができる。
【００４１】第２６の発明は、第２３の発明において、
符号化精度制御手段は、現在符号化しようとするフレー
ムの量子化精度を向上させることにより、現在符号化し
ようとするフレームの画質をｎフレーム前に符号化した
フレームの画質より良くする量子化精度制御手段を含む
ことを特徴とする。上記第２６の発明によれば、量子化
精度のパラメータを変更するだけで、フレーム間の情報
量を平滑化することができ、コマ飛びの少ない動画像を
得ることができる。
符号化精度制御手段は、現在符号化しようとするフレー
ムの量子化精度を向上させることにより、現在符号化し
ようとするフレームの画質をｎフレーム前に符号化した
フレームの画質より良くする量子化精度制御手段を含む
ことを特徴とする。上記第２６の発明によれば、量子化
精度のパラメータを変更するだけで、フレーム間の情報
量を平滑化することができ、コマ飛びの少ない動画像を
得ることができる。
【００４２】第２７の発明は、第１の発明において、分
散リフレッシュ手段により分散リフレッシュが行われる
ブロック群に含まれるブロックのうちフレーム内符号化
されるブロックの画質を、ブロック群を含むフレームに
おける他のブロックの画質よりも良くする符号化制御手
段を更に備えることを特徴とする。上記第２７の発明に
よれば、静止領域において、リフレッシュによる量子化
歪みを無くすことができる。
散リフレッシュ手段により分散リフレッシュが行われる
ブロック群に含まれるブロックのうちフレーム内符号化
されるブロックの画質を、ブロック群を含むフレームに
おける他のブロックの画質よりも良くする符号化制御手
段を更に備えることを特徴とする。上記第２７の発明に
よれば、静止領域において、リフレッシュによる量子化
歪みを無くすことができる。
【００４３】第２８の発明は、第１の発明において、分
散リフレッシュ手段により分散リフレッシュが行われる
ブロック群に含まれるブロックのうちフレーム内符号化
されるブロックの画質を予め設定された下限値より低下
しないように符号化の精度を制御する符号化精度制御手
段を更に備えることを特徴とする。上記第２８の発明に
よれば、静止領域において、リフレッシュによる量子化
歪みを無くすことができる。
散リフレッシュ手段により分散リフレッシュが行われる
ブロック群に含まれるブロックのうちフレーム内符号化
されるブロックの画質を予め設定された下限値より低下
しないように符号化の精度を制御する符号化精度制御手
段を更に備えることを特徴とする。上記第２８の発明に
よれば、静止領域において、リフレッシュによる量子化
歪みを無くすことができる。
【００４４】第２９の発明は、第１の発明において、分
散リフレッシュ手段により分散リフレッシュが行われる
ブロック群に含まれるブロックのうちフレーム内符号化
されるブロックの画質が予め設定された下限値よりも高
い場合に、その画質をブロック群を含むフレームにおけ
る他のブロックの画質と同等とし、フレーム内符号化さ
れるブロックの画質が下限値よりも低い場合に、その画
質を下限値とするように、符号化の精度を制御する符号
化精度制御手段を更に備えることを特徴とする。上記第
２９の発明によれば、静止領域において、リフレッシュ
による量子化歪みを無くすことができる。
散リフレッシュ手段により分散リフレッシュが行われる
ブロック群に含まれるブロックのうちフレーム内符号化
されるブロックの画質が予め設定された下限値よりも高
い場合に、その画質をブロック群を含むフレームにおけ
る他のブロックの画質と同等とし、フレーム内符号化さ
れるブロックの画質が下限値よりも低い場合に、その画
質を下限値とするように、符号化の精度を制御する符号
化精度制御手段を更に備えることを特徴とする。上記第
２９の発明によれば、静止領域において、リフレッシュ
による量子化歪みを無くすことができる。
【００４５】第３０の発明は、第２７の発明において、
符号化精度制御手段は、フレーム内符号化されるブロッ
クの量子化精度をフレームにおける他のブロックの量子
化精度よりも高くする量子化精度制御手段を含むことを
特徴とする。上記第３０の発明によれば、量子化精度の
パラメータを変更するだけで、簡単に、静止領域におけ
るリフレッシュによる量子化歪みを無くすことができ
る。
符号化精度制御手段は、フレーム内符号化されるブロッ
クの量子化精度をフレームにおける他のブロックの量子
化精度よりも高くする量子化精度制御手段を含むことを
特徴とする。上記第３０の発明によれば、量子化精度の
パラメータを変更するだけで、簡単に、静止領域におけ
るリフレッシュによる量子化歪みを無くすことができ
る。
【００４６】第３１の発明は、第１の発明において、分
散リフレッシュ手段により分散リフレッシュが行われる
ブロック群に含まれるブロックのうちフレーム内符号化
されるブロックの量子化精度を予め設定された下限値よ
り低下しないように量子化精度を制御する量子化精度制
御手段を更に備えることを特徴とする。上記第３１の発
明によれば、量子化精度のパラメータを変更するだけ
で、簡単に、静止領域におけるリフレッシュによる量子
化歪みを無くすことができる。
散リフレッシュ手段により分散リフレッシュが行われる
ブロック群に含まれるブロックのうちフレーム内符号化
されるブロックの量子化精度を予め設定された下限値よ
り低下しないように量子化精度を制御する量子化精度制
御手段を更に備えることを特徴とする。上記第３１の発
明によれば、量子化精度のパラメータを変更するだけ
で、簡単に、静止領域におけるリフレッシュによる量子
化歪みを無くすことができる。
【００４７】第３２の発明は、第１の発明において、分
散リフレッシュ手段により分散リフレッシュが行われる
ブロック群に含まれるブロックのうちフレーム内符号化
されるブロックの量子化精度が予め設定された下限値よ
りも高い場合に、その量子化精度をブロック群を含むフ
レームにおける他のブロックの量子化精度と同等とし、
フレーム内符号化されるブロックの量子化精度が下限値
よりも低い場合に、その量子化精度を下限値とするよう
に、量子化精度を制御する量子化精度制御手段を更に備
えることを特徴とする。上記第３２の発明によれば、量
子化精度のパラメータを変更するだけで、簡単に、静止
領域におけるリフレッシュによる量子化歪みを無くすこ
とができる。
散リフレッシュ手段により分散リフレッシュが行われる
ブロック群に含まれるブロックのうちフレーム内符号化
されるブロックの量子化精度が予め設定された下限値よ
りも高い場合に、その量子化精度をブロック群を含むフ
レームにおける他のブロックの量子化精度と同等とし、
フレーム内符号化されるブロックの量子化精度が下限値
よりも低い場合に、その量子化精度を下限値とするよう
に、量子化精度を制御する量子化精度制御手段を更に備
えることを特徴とする。上記第３２の発明によれば、量
子化精度のパラメータを変更するだけで、簡単に、静止
領域におけるリフレッシュによる量子化歪みを無くすこ
とができる。
【００４８】第３３の発明は、第１の発明において、各
ブロック群は、各フレームにおけるｍ個の予め決められ
た領域のそれぞれにおける複数ブロックより構成されて
いることを特徴とする。第３４の発明は、第９の発明に
おいて、各ブロック群は、各フレームにおけるｍ個の予
め決められた領域のそれぞれにおける複数ブロックより
構成されていることを特徴とする。上記第３３または第
３４の発明によれば、ブロック群のリフレッシュを一度
に行うリフレッシュ動作（一括リフレッシュ）や、ブロ
ック群のリフレッシュをブロック毎に異なるタイミング
で行うリフレッシュ動作（分散リフレッシュ）の制御を
簡単に行うことができる。
ブロック群は、各フレームにおけるｍ個の予め決められ
た領域のそれぞれにおける複数ブロックより構成されて
いることを特徴とする。第３４の発明は、第９の発明に
おいて、各ブロック群は、各フレームにおけるｍ個の予
め決められた領域のそれぞれにおける複数ブロックより
構成されていることを特徴とする。上記第３３または第
３４の発明によれば、ブロック群のリフレッシュを一度
に行うリフレッシュ動作（一括リフレッシュ）や、ブロ
ック群のリフレッシュをブロック毎に異なるタイミング
で行うリフレッシュ動作（分散リフレッシュ）の制御を
簡単に行うことができる。
【００４９】第３５の発明は、第１の発明において、予
め決められた領域はグループオブブロックであることを
特徴とする。第３６の発明は、第９の発明において、予
め決められた領域はグループオブブロックであることを
特徴とする。上記第３５または第３６の発明によれば、
画像を符号化した際の情報に伝送エラーが発生し、情報
が誤った場合でも、伝送エラーによる画質劣化をグルー
プオブブロック内にとどめることができ、エラー耐性を
高めることができる。
め決められた領域はグループオブブロックであることを
特徴とする。第３６の発明は、第９の発明において、予
め決められた領域はグループオブブロックであることを
特徴とする。上記第３５または第３６の発明によれば、
画像を符号化した際の情報に伝送エラーが発生し、情報
が誤った場合でも、伝送エラーによる画質劣化をグルー
プオブブロック内にとどめることができ、エラー耐性を
高めることができる。
【００５０】第３７の発明は、動画像の各フレームを予
め決められた個数ｍのブロック群に分割し、各ブロック
群に含まれるブロックを単位としてフレーム間符号化方
式とフレーム内符号化方式との間で符号化方式を切り換
えつつ動画像を符号化する画像符号化装置であって、各
ブロック群の符号化により所定時点から所定時間Ｔだけ
経過する間に発生する符号化量が予め決められたしきい
値以上であるか否かを判定する符号化量判定手段と、一
つのブロック群に含まれる全てのブロックを同一フレー
ムの符号化過程でフレーム内符号化することとして定義
される一括リフレッシュを、符号化量判定手段により符
号化量がしきい値以上であると判定されたブロック群に
対して行う一括リフレッシュ手段と、各フレームにおけ
るブロック群のうちフレーム内の位置が同一であるブロ
ック群を同一ブロック群と見なして一つのブロック群に
含まれる各ブロックをブロック毎に異なるフレームの符
号化過程でフレーム内符号化することとして定義される
分散リフレッシュを、符号化量判定手段により符号化量
がしきい値よりも少ないと判定されたブロック群に対し
て行う分散リフレッシュ手段とを備える。上記第３７の
発明によれば、符号化量が多いために伝送エラーの生じ
る可能性が高いブロック群に対して一括リフレッシュが
行われ、符号化量が少ないために伝送エラーが生じる可
能性の低いブロック群に対しては分散リフレッシュが行
われる。このため、静止した画像領域において妨害ライ
ンをなくすことができるとともに、符号化量が少ないま
まとなっているブロック群について伝送エラーが生じた
場合にもこれをリフレッシュすることが可能となる。
め決められた個数ｍのブロック群に分割し、各ブロック
群に含まれるブロックを単位としてフレーム間符号化方
式とフレーム内符号化方式との間で符号化方式を切り換
えつつ動画像を符号化する画像符号化装置であって、各
ブロック群の符号化により所定時点から所定時間Ｔだけ
経過する間に発生する符号化量が予め決められたしきい
値以上であるか否かを判定する符号化量判定手段と、一
つのブロック群に含まれる全てのブロックを同一フレー
ムの符号化過程でフレーム内符号化することとして定義
される一括リフレッシュを、符号化量判定手段により符
号化量がしきい値以上であると判定されたブロック群に
対して行う一括リフレッシュ手段と、各フレームにおけ
るブロック群のうちフレーム内の位置が同一であるブロ
ック群を同一ブロック群と見なして一つのブロック群に
含まれる各ブロックをブロック毎に異なるフレームの符
号化過程でフレーム内符号化することとして定義される
分散リフレッシュを、符号化量判定手段により符号化量
がしきい値よりも少ないと判定されたブロック群に対し
て行う分散リフレッシュ手段とを備える。上記第３７の
発明によれば、符号化量が多いために伝送エラーの生じ
る可能性が高いブロック群に対して一括リフレッシュが
行われ、符号化量が少ないために伝送エラーが生じる可
能性の低いブロック群に対しては分散リフレッシュが行
われる。このため、静止した画像領域において妨害ライ
ンをなくすことができるとともに、符号化量が少ないま
まとなっているブロック群について伝送エラーが生じた
場合にもこれをリフレッシュすることが可能となる。
【００５１】第３８の発明は、動画像を符号化しその動
画像の符号化データを送出する符号化装置と、送出され
た符号化データを受信して復号化するとともに、復号化
すべき符号化データにおけるエラーの検出を行い、エラ
ーが検出されるとエラー通知を符号化装置へ送る復号化
装置とにより構成される画像伝送システムにおいて符号
化装置として使用され、動画像の各フレームを予め決め
られた個数ｍのブロック群に分割して、各ブロック群に
含まれるブロックを単位としてフレーム間符号化方式と
フレーム内符号化方式との間で符号化方式を切り換えつ
つ動画像を符号化する画像符号化装置であって、エラー
通知を受信するエラー受信手段と、エラー受信手段によ
りエラー通知が受信された場合に、エラー通知の受信の
時点から所定時間ＲＴｍａｘだけ前までの間に符号化さ
れた各フレームにおける各ブロック群の領域内の被写体
に予め決められたしきい値以上の動きがあるか否かを判
別し、しきい値以上の動きがある領域のブロック群に対
してフレーム内符号化によるリフレッシュを行うことを
決定するリフレッシュ選択手段と、一つのブロック群に
含まれる全てのブロックを同一フレームの符号化過程で
フレーム内符号化することとして定義される一括リフレ
ッシュを、リフレッシュ選択手段によりリフレッシュを
行うことが決定されたブロック群に対して行う一括リフ
レッシュ手段とを備える。上記第３８の発明によれば、
符号化側に復号化側からエラーを通知された時点におい
て当該エラーのフレームを符号化した時点まで遡ってブ
ロック群毎の被写体の動きの大小を判別できるため、必
要な時に必要なブロック群のみを一度にリフレッシュす
ることが可能となり、エラー耐性を損なうことなく符号
化効率を高めることが可能となる。
画像の符号化データを送出する符号化装置と、送出され
た符号化データを受信して復号化するとともに、復号化
すべき符号化データにおけるエラーの検出を行い、エラ
ーが検出されるとエラー通知を符号化装置へ送る復号化
装置とにより構成される画像伝送システムにおいて符号
化装置として使用され、動画像の各フレームを予め決め
られた個数ｍのブロック群に分割して、各ブロック群に
含まれるブロックを単位としてフレーム間符号化方式と
フレーム内符号化方式との間で符号化方式を切り換えつ
つ動画像を符号化する画像符号化装置であって、エラー
通知を受信するエラー受信手段と、エラー受信手段によ
りエラー通知が受信された場合に、エラー通知の受信の
時点から所定時間ＲＴｍａｘだけ前までの間に符号化さ
れた各フレームにおける各ブロック群の領域内の被写体
に予め決められたしきい値以上の動きがあるか否かを判
別し、しきい値以上の動きがある領域のブロック群に対
してフレーム内符号化によるリフレッシュを行うことを
決定するリフレッシュ選択手段と、一つのブロック群に
含まれる全てのブロックを同一フレームの符号化過程で
フレーム内符号化することとして定義される一括リフレ
ッシュを、リフレッシュ選択手段によりリフレッシュを
行うことが決定されたブロック群に対して行う一括リフ
レッシュ手段とを備える。上記第３８の発明によれば、
符号化側に復号化側からエラーを通知された時点におい
て当該エラーのフレームを符号化した時点まで遡ってブ
ロック群毎の被写体の動きの大小を判別できるため、必
要な時に必要なブロック群のみを一度にリフレッシュす
ることが可能となり、エラー耐性を損なうことなく符号
化効率を高めることが可能となる。
【００５２】第３９の発明は、第３８の発明において、
各フレームにおけるブロック群のうちフレーム内の位置
が同一であるブロック群を同一ブロック群と見なして一
つのブロック群に含まれる各ブロックをブロック毎に異
なるフレームの符号化過程でフレーム内符号化すること
として定義される分散リフレッシュを、リフレッシュ選
択手段によりリフレッシュを行うことが決定されたブロ
ック群以外のブロック群に対して行う分散リフレッシュ
手段を更に備えることを特徴とする。
各フレームにおけるブロック群のうちフレーム内の位置
が同一であるブロック群を同一ブロック群と見なして一
つのブロック群に含まれる各ブロックをブロック毎に異
なるフレームの符号化過程でフレーム内符号化すること
として定義される分散リフレッシュを、リフレッシュ選
択手段によりリフレッシュを行うことが決定されたブロ
ック群以外のブロック群に対して行う分散リフレッシュ
手段を更に備えることを特徴とする。
【００５３】第４０の発明は、第３８の発明において、
リフレッシュ選択手段は、動画像の各フレームに対する
符号化の際に当該フレームにおける各ブロック群の領域
内の被写体の動きの大きさを示す動き情報を格納し、そ
の動き情報を当該フレームに対する符号化の時点から所
定時間ＲＴｍａｘが経過するまでは保持する動き情報格
納管理手段を含み、動き情報格納管理手段により保持さ
れている動き情報に基づき、エラー通知の受信の時点か
ら時間ＲＴｍａｘだけ前までの間に符号化された各フレ
ームにおける各ブロック群の領域内の被写体にしきい値
以上の動きがあるか否かを判別することを特徴とする。
リフレッシュ選択手段は、動画像の各フレームに対する
符号化の際に当該フレームにおける各ブロック群の領域
内の被写体の動きの大きさを示す動き情報を格納し、そ
の動き情報を当該フレームに対する符号化の時点から所
定時間ＲＴｍａｘが経過するまでは保持する動き情報格
納管理手段を含み、動き情報格納管理手段により保持さ
れている動き情報に基づき、エラー通知の受信の時点か
ら時間ＲＴｍａｘだけ前までの間に符号化された各フレ
ームにおける各ブロック群の領域内の被写体にしきい値
以上の動きがあるか否かを判別することを特徴とする。
【００５４】第４１の発明は、第３８の発明において、
時間ＲＴｍａｘは、動画像におけるいずれかのフレーム
が符号化される時点から、そのフレームの符号化データ
が復号化装置へ送られ、その符号化データにエラーが検
出されたときにエラー通知をエラー受信手段が受信する
時点までの時間の最大値であることを特徴とする。上記
第４１の発明によれば、符号量や復号化側の応答速度の
変動によらず、当該エラーのフレームを符号化した時点
まで遡ってブロック群毎の被写体の動きの大小を判別で
きるため、必要な時に必要なブロック群のみを一度にリ
フレッシュすることが可能となり、エラー耐性を損なう
ことなく符号化効率を高めることが可能となる。
時間ＲＴｍａｘは、動画像におけるいずれかのフレーム
が符号化される時点から、そのフレームの符号化データ
が復号化装置へ送られ、その符号化データにエラーが検
出されたときにエラー通知をエラー受信手段が受信する
時点までの時間の最大値であることを特徴とする。上記
第４１の発明によれば、符号量や復号化側の応答速度の
変動によらず、当該エラーのフレームを符号化した時点
まで遡ってブロック群毎の被写体の動きの大小を判別で
きるため、必要な時に必要なブロック群のみを一度にリ
フレッシュすることが可能となり、エラー耐性を損なう
ことなく符号化効率を高めることが可能となる。
【００５５】第４２の発明は、第４０の発明において、
動画像における各フレームが符号化される時点から、そ
のフレームの符号化データが復号化装置へ送られ、その
符号化データにエラーが検出されたときにエラー通知を
エラー受信手段が受信する時点までの時間を、時間ＲＴ
ｍａｘとして動画像の各フレーム毎に算出する時間算出
手段を更に備え、動き情報格納管理手段は、時間算出手
段により算出された時間ＲＴｍａｘに基づき動き情報を
保持することを特徴とする。上記第４２の発明によれ
ば、動き情報を保持すべき時間が画像の各フレーム毎に
算出されるため、必要な動き情報のみを保持することが
でき、記憶領域の無駄をなくすことができる。
動画像における各フレームが符号化される時点から、そ
のフレームの符号化データが復号化装置へ送られ、その
符号化データにエラーが検出されたときにエラー通知を
エラー受信手段が受信する時点までの時間を、時間ＲＴ
ｍａｘとして動画像の各フレーム毎に算出する時間算出
手段を更に備え、動き情報格納管理手段は、時間算出手
段により算出された時間ＲＴｍａｘに基づき動き情報を
保持することを特徴とする。上記第４２の発明によれ
ば、動き情報を保持すべき時間が画像の各フレーム毎に
算出されるため、必要な動き情報のみを保持することが
でき、記憶領域の無駄をなくすことができる。
【００５６】第４３の発明は、第３８の発明において、
一括リフレッシュ手段は、領域の異なる複数のブロック
群に対してリフレッシュを行うことがリフレッシュ選択
手段により決定された場合に、その複数のブロック群を
順次１フレームずつずらして各々１回づつ一括リフレッ
シュすることを特徴とする。上記第４３の発明によれ
ば、符号化効率の低いフレーム内符号化のブロックを分
散することが可能であり、かつリフレッシュの必要なブ
ロック群を優先してリフレッシュすることが可能とな
る。
一括リフレッシュ手段は、領域の異なる複数のブロック
群に対してリフレッシュを行うことがリフレッシュ選択
手段により決定された場合に、その複数のブロック群を
順次１フレームずつずらして各々１回づつ一括リフレッ
シュすることを特徴とする。上記第４３の発明によれ
ば、符号化効率の低いフレーム内符号化のブロックを分
散することが可能であり、かつリフレッシュの必要なブ
ロック群を優先してリフレッシュすることが可能とな
る。
【００５７】第４４の発明は、第４３の発明において、
リフレッシュ選択手段は、一括リフレッシュ手段が複数
のブロック群を順次１フレームずつずらして各々１回づ
つ一括リフレッシュしている間にエラー受信手段により
エラー通知が受信された場合に、その受信の時点から時
間ＲＴｍａｘだけ前までの間に符号化された各フレーム
における各ブロック群の領域内の被写体にしきい値以上
の動きがあるか否かを判別し、その判別結果に基づき、
しきい値以上の動きがある領域のブロック群を、リフレ
ッシュを行うブロック群として追加的に決定し、一括リ
フレッシュ手段は、リフレッシュを行うことがリフレッ
シュ選択手段により決定されている複数のブロック群
を、リフレッシュを行うことが重複して決定されたブロ
ック群をも含めて、順次１フレームずつずらして各々１
回づつ一括リフレッシュすることを特徴とする。上記第
４４の発明によれば、一括リフレッシュを行うべきブロ
ック群を順にリフレッシュしていく途中でエラーが発生
した場合にも、必要なブロック群のみを適切に一括リフ
レッシュすることが可能となる。
リフレッシュ選択手段は、一括リフレッシュ手段が複数
のブロック群を順次１フレームずつずらして各々１回づ
つ一括リフレッシュしている間にエラー受信手段により
エラー通知が受信された場合に、その受信の時点から時
間ＲＴｍａｘだけ前までの間に符号化された各フレーム
における各ブロック群の領域内の被写体にしきい値以上
の動きがあるか否かを判別し、その判別結果に基づき、
しきい値以上の動きがある領域のブロック群を、リフレ
ッシュを行うブロック群として追加的に決定し、一括リ
フレッシュ手段は、リフレッシュを行うことがリフレッ
シュ選択手段により決定されている複数のブロック群
を、リフレッシュを行うことが重複して決定されたブロ
ック群をも含めて、順次１フレームずつずらして各々１
回づつ一括リフレッシュすることを特徴とする。上記第
４４の発明によれば、一括リフレッシュを行うべきブロ
ック群を順にリフレッシュしていく途中でエラーが発生
した場合にも、必要なブロック群のみを適切に一括リフ
レッシュすることが可能となる。
【００５８】第４５の発明は、第４０の発明において、
動き情報格納管理手段は、動画像の各フレームに対する
符号化の際に、その符号化において一括リフレッシュが
行われたブロック群に対する動き情報としてしきい値以
上の動きを示す所定の動き情報を格納し、その所定の動
き情報をその符号化の時点から時間ＲＴｍａｘが経過す
るまでは保持していることを特徴とする。上記第４５の
発明によれば、符号化効率が低く、エラーが起こりやす
いフレーム内符号化ブロック群を、復号化側からエラー
通知があった際に被写体の動きが大きいブロック群と同
様に一度にリフレッシュすることが可能となる。
動き情報格納管理手段は、動画像の各フレームに対する
符号化の際に、その符号化において一括リフレッシュが
行われたブロック群に対する動き情報としてしきい値以
上の動きを示す所定の動き情報を格納し、その所定の動
き情報をその符号化の時点から時間ＲＴｍａｘが経過す
るまでは保持していることを特徴とする。上記第４５の
発明によれば、符号化効率が低く、エラーが起こりやす
いフレーム内符号化ブロック群を、復号化側からエラー
通知があった際に被写体の動きが大きいブロック群と同
様に一度にリフレッシュすることが可能となる。
【００５９】第４６の発明は、第３８の発明において、
一括リフレッシュが行われないブロック群のブロックの
うち、一括リフレッシュが行われるべきブロック群であ
ってかつ一括リフレッシュが行われていない一括リフレ
ッシュ待ちブロック群に接するブロックの符号化に際
し、その一括リフレッシュ待ちブロック群が参照されな
いように動きベクトル探索範囲を制限する探索範囲制限
手段を更に備えることを特徴とする。上記第４６の発明
によれば、一括リフレッシュを行わないブロック群にエ
ラーの影響が伝播することを防止できる。
一括リフレッシュが行われないブロック群のブロックの
うち、一括リフレッシュが行われるべきブロック群であ
ってかつ一括リフレッシュが行われていない一括リフレ
ッシュ待ちブロック群に接するブロックの符号化に際
し、その一括リフレッシュ待ちブロック群が参照されな
いように動きベクトル探索範囲を制限する探索範囲制限
手段を更に備えることを特徴とする。上記第４６の発明
によれば、一括リフレッシュを行わないブロック群にエ
ラーの影響が伝播することを防止できる。
【００６０】第４７の発明は、第４６の発明において、
探索範囲制限手段は、一括リフレッシュが行われる期間
は、各ブロック群のブロックの符号化に際し、自ブロッ
ク群以外のブロック群のブロックが参照されないように
動きベクトル探索範囲を制限することを特徴とする。上
記第４７の発明によれば、一括リフレッシュを行わない
ブロック群にエラーの影響が伝播することをより簡単に
防止することが可能となる。
探索範囲制限手段は、一括リフレッシュが行われる期間
は、各ブロック群のブロックの符号化に際し、自ブロッ
ク群以外のブロック群のブロックが参照されないように
動きベクトル探索範囲を制限することを特徴とする。上
記第４７の発明によれば、一括リフレッシュを行わない
ブロック群にエラーの影響が伝播することをより簡単に
防止することが可能となる。
【００６１】第４８の発明は、動画像の各フレームを予
め決められた個数ｍのブロック群に分割し、各ブロック
群に含まれるブロックを単位としてフレーム間符号化方
式とフレーム内符号化方式との間で符号化方式を切り換
えつつ動画像を符号化する画像符号化方法であって、各
フレームにおける個数ｍのブロック群のそれぞれの領域
内の被写体に所定時点から所定時間Ｔだけ経過する間に
予め決められたしきい値以上の動きがあるか否かを判別
する動き判別ステップと、一つのブロック群に含まれる
全てのブロックを同一フレームの符号化過程でフレーム
内符号化することとして定義される一括リフレッシュ
を、動き判別ステップでしきい値以上の動きがあると判
別された領域のブロック群に対して行う一括リフレッシ
ュステップと、各フレームにおけるブロック群のうちフ
レーム内の位置が同一であるブロック群を同一ブロック
群と見なして一つのブロック群に含まれる各ブロックを
ブロック毎に異なるフレームの符号化過程でフレーム内
符号化することとして定義される分散リフレッシュを、
動き判別ステップでしきい値以上の動きがないと判別さ
れた領域のブロック群に対して行う分散リフレッシュス
テップとを備える。
め決められた個数ｍのブロック群に分割し、各ブロック
群に含まれるブロックを単位としてフレーム間符号化方
式とフレーム内符号化方式との間で符号化方式を切り換
えつつ動画像を符号化する画像符号化方法であって、各
フレームにおける個数ｍのブロック群のそれぞれの領域
内の被写体に所定時点から所定時間Ｔだけ経過する間に
予め決められたしきい値以上の動きがあるか否かを判別
する動き判別ステップと、一つのブロック群に含まれる
全てのブロックを同一フレームの符号化過程でフレーム
内符号化することとして定義される一括リフレッシュ
を、動き判別ステップでしきい値以上の動きがあると判
別された領域のブロック群に対して行う一括リフレッシ
ュステップと、各フレームにおけるブロック群のうちフ
レーム内の位置が同一であるブロック群を同一ブロック
群と見なして一つのブロック群に含まれる各ブロックを
ブロック毎に異なるフレームの符号化過程でフレーム内
符号化することとして定義される分散リフレッシュを、
動き判別ステップでしきい値以上の動きがないと判別さ
れた領域のブロック群に対して行う分散リフレッシュス
テップとを備える。
【００６２】第４９の発明は、第４８の発明において、
動き判別ステップにおける判別結果に基づき、一括リフ
レッシュが行われたブロック群に対し、そのブロック群
の領域内の被写体にしきい値以上の動きがなくなってか
らもＭＳ回（ＭＳは所定の自然数）は一括リフレッシュ
が行われることを特徴とする。
動き判別ステップにおける判別結果に基づき、一括リフ
レッシュが行われたブロック群に対し、そのブロック群
の領域内の被写体にしきい値以上の動きがなくなってか
らもＭＳ回（ＭＳは所定の自然数）は一括リフレッシュ
が行われることを特徴とする。
【００６３】第５０の発明は、第４８の発明において、
一括リフレッシュは、所定時点から時間Ｔだけ経過した
時点におけるフレームの符号化過程で行われ、分散リフ
レッシュは、所定時点から時間Ｔだけ経過する間に完了
する。
一括リフレッシュは、所定時点から時間Ｔだけ経過した
時点におけるフレームの符号化過程で行われ、分散リフ
レッシュは、所定時点から時間Ｔだけ経過する間に完了
する。
【００６４】第５１の発明は、第５０の発明において、
分散リフレッシュの過程にあるブロック群におけるブロ
ックがＳ回（Ｓは所定の自然数）以上続けてブロック毎
に異なるフレームでフレーム内符号化された場合には、
そのブロック群に対する分散リフレッシュは時間Ｔより
も長い所定時間Ｔ’が経過する間に完了することを特徴
とする。
分散リフレッシュの過程にあるブロック群におけるブロ
ックがＳ回（Ｓは所定の自然数）以上続けてブロック毎
に異なるフレームでフレーム内符号化された場合には、
そのブロック群に対する分散リフレッシュは時間Ｔより
も長い所定時間Ｔ’が経過する間に完了することを特徴
とする。
【００６５】第５２の発明は、第５１の発明において、
所定時間Ｔ’が経過する間に分散リフレッシュが完了す
るブロック群の割合に応じて時間Ｔよりも短い所定時間
Ｔ’’が経過した時点におけるフレームの符号化過程で
一括リフレッシュが行われることを特徴とする。
所定時間Ｔ’が経過する間に分散リフレッシュが完了す
るブロック群の割合に応じて時間Ｔよりも短い所定時間
Ｔ’’が経過した時点におけるフレームの符号化過程で
一括リフレッシュが行われることを特徴とする。
【００６６】第５３の発明は、第５２の発明において、
所定時間Ｔ’’が下記の式により算出されることを特徴
とする： Ｔ’’＝ｋＴ（ｍ−Ｂ）／（ｍｋ−Ｂ） ここで、ｍは各フレームにおけるブロック群の個数であ
り、Ｂは所定時間Ｔ’が経過する間に分散リフレッシュ
が完了するブロック群の数であってｍ以下の整数であ
り、ｋはＴ’／Ｔである。
所定時間Ｔ’’が下記の式により算出されることを特徴
とする： Ｔ’’＝ｋＴ（ｍ−Ｂ）／（ｍｋ−Ｂ） ここで、ｍは各フレームにおけるブロック群の個数であ
り、Ｂは所定時間Ｔ’が経過する間に分散リフレッシュ
が完了するブロック群の数であってｍ以下の整数であ
り、ｋはＴ’／Ｔである。
【００６７】第５４の発明は、第４８の発明において、
分散リフレッシュステップでは、分散リフレッシュされ
るべきブロック群が時間Ｔに相当するフレーム数に等し
い個数のサブブロック群に分割され、１フレームの符号
化過程で１サブブロック群がフレーム内符号化されるこ
とを特徴とする。
分散リフレッシュステップでは、分散リフレッシュされ
るべきブロック群が時間Ｔに相当するフレーム数に等し
い個数のサブブロック群に分割され、１フレームの符号
化過程で１サブブロック群がフレーム内符号化されるこ
とを特徴とする。
【００６８】第５５の発明は、動画像の各フレームを予
め決められた個数ｍのブロック群に分割し、各ブロック
群に含まれるブロックを単位としてフレーム間符号化方
式とフレーム内符号化方式との間で符号化方式を切り換
えつつ動画像を符号化する画像符号化方法であって、一
つのブロック群に含まれる全てのブロックを同一フレー
ムの符号化過程でフレーム内符号化することとして定義
される一括リフレッシュを、各フレームにつき高々一つ
のブロック群に対して行う一括リフレッシュステップを
備え、各フレームにおけるブロック群のうちフレーム内
の位置が同一であるブロック群に対して一括リフレッシ
ュを行う間隔に相当するフレーム数Ｔｆが個数ｍよりも
大きいことを特徴とする。
め決められた個数ｍのブロック群に分割し、各ブロック
群に含まれるブロックを単位としてフレーム間符号化方
式とフレーム内符号化方式との間で符号化方式を切り換
えつつ動画像を符号化する画像符号化方法であって、一
つのブロック群に含まれる全てのブロックを同一フレー
ムの符号化過程でフレーム内符号化することとして定義
される一括リフレッシュを、各フレームにつき高々一つ
のブロック群に対して行う一括リフレッシュステップを
備え、各フレームにおけるブロック群のうちフレーム内
の位置が同一であるブロック群に対して一括リフレッシ
ュを行う間隔に相当するフレーム数Ｔｆが個数ｍよりも
大きいことを特徴とする。
【００６９】第５６の発明は、第４８の発明において、
各フレームにおけるブロックのうちフレーム内の位置が
同一であるブロックに対してフレーム内符号化を行う間
隔に相当するフレーム数Ｔｆが個数ｍよりも大きいこと
を特徴とする。
各フレームにおけるブロックのうちフレーム内の位置が
同一であるブロックに対してフレーム内符号化を行う間
隔に相当するフレーム数Ｔｆが個数ｍよりも大きいこと
を特徴とする。
【００７０】第５７の発明は、第４８の発明において、
各フレームにおけるブロックのうちフレーム内の位置が
同一であるブロックに対して一括リフレッシュまたは分
散リフレッシュによりフレーム内符号化が行われる間隔
が時間Ｔであり、動き判別ステップでは、各フレームに
おける個数ｍのブロック群のそれぞれの領域毎に１フレ
ームずつずれた時点から時間Ｔだけ経過する間にそれぞ
れの領域内の被写体にしきい値以上の動きがあるか否か
が判別され、一括リフレッシュは、各フレームにつき高
々一つのブロック群に対して行われることを特徴とす
る。
各フレームにおけるブロックのうちフレーム内の位置が
同一であるブロックに対して一括リフレッシュまたは分
散リフレッシュによりフレーム内符号化が行われる間隔
が時間Ｔであり、動き判別ステップでは、各フレームに
おける個数ｍのブロック群のそれぞれの領域毎に１フレ
ームずつずれた時点から時間Ｔだけ経過する間にそれぞ
れの領域内の被写体にしきい値以上の動きがあるか否か
が判別され、一括リフレッシュは、各フレームにつき高
々一つのブロック群に対して行われることを特徴とす
る。
【００７１】第５８の発明は、第５５の発明において、
各フレームにおける個数ｍのブロック群のそれぞれの領
域毎に１フレームずつずれた時点から時間Ｔだけ経過す
る間にそれぞれの領域内の被写体にしきい値以上の動き
があるか否かを判別する動き判別ステップを更に備え、
一括リフレッシュステップでは、しきい値以上の動きが
あると判別された領域のブロック群に対して一括リフレ
ッシュが行われることを特徴とする。
各フレームにおける個数ｍのブロック群のそれぞれの領
域毎に１フレームずつずれた時点から時間Ｔだけ経過す
る間にそれぞれの領域内の被写体にしきい値以上の動き
があるか否かを判別する動き判別ステップを更に備え、
一括リフレッシュステップでは、しきい値以上の動きが
あると判別された領域のブロック群に対して一括リフレ
ッシュが行われることを特徴とする。
【００７２】第５９の発明は、第５７の発明において、
動き判別ステップでは、分散リフレッシュが行われるブ
ロック群の領域についても、分散リフレッシュと並行し
て、各ブロック群のそれぞれの領域毎に１フレームずつ
ずれた時点から時間Ｔだけ経過する間にそれぞれの領域
内の被写体にしきい値以上の動きがあるか否かを検出す
ることにより動きの有無が判別され、分散リフレッシュ
の過程にあるブロック群の領域内の被写体にしきい値以
上の動きが検出されると、そのブロック群に対する分散
リフレッシュが中断され、しきい値以上の動きが検出さ
れた領域のブロック群に対する分散リフレッシュが開始
された時点から時間Ｔだけ経過した後に、一括リフレッ
シュがその領域のブロック群に対して行われることを特
徴とする。
動き判別ステップでは、分散リフレッシュが行われるブ
ロック群の領域についても、分散リフレッシュと並行し
て、各ブロック群のそれぞれの領域毎に１フレームずつ
ずれた時点から時間Ｔだけ経過する間にそれぞれの領域
内の被写体にしきい値以上の動きがあるか否かを検出す
ることにより動きの有無が判別され、分散リフレッシュ
の過程にあるブロック群の領域内の被写体にしきい値以
上の動きが検出されると、そのブロック群に対する分散
リフレッシュが中断され、しきい値以上の動きが検出さ
れた領域のブロック群に対する分散リフレッシュが開始
された時点から時間Ｔだけ経過した後に、一括リフレッ
シュがその領域のブロック群に対して行われることを特
徴とする。
【００７３】第６０の発明は、第５７の発明において、
動き判別ステップでは、分散リフレッシュと並行して、
各ブロック群のそれぞれの領域毎に１フレームずつずれ
た時点から時間Ｔだけ経過する間にそれぞれの領域内の
被写体にしきい値以上の動きがあるか否かを検出するこ
とにより動きの有無が判別され、各ブロック群に対する
分散リフレッシュが、そのブロック群の領域内の被写体
の動きの有無の判別が開始された時点から行われ、分散
リフレッシュの過程にあるブロック群の領域内の被写体
にしきい値以上の動きが検出されると、そのブロック群
に対する分散リフレッシュが中断され、しきい値以上の
動きが検出された領域のブロック群に対する分散リフレ
ッシュが開始された時点から時間Ｔだけ経過した後に、
一括リフレッシュがその領域のブロック群に対して行わ
れることを特徴とする。
動き判別ステップでは、分散リフレッシュと並行して、
各ブロック群のそれぞれの領域毎に１フレームずつずれ
た時点から時間Ｔだけ経過する間にそれぞれの領域内の
被写体にしきい値以上の動きがあるか否かを検出するこ
とにより動きの有無が判別され、各ブロック群に対する
分散リフレッシュが、そのブロック群の領域内の被写体
の動きの有無の判別が開始された時点から行われ、分散
リフレッシュの過程にあるブロック群の領域内の被写体
にしきい値以上の動きが検出されると、そのブロック群
に対する分散リフレッシュが中断され、しきい値以上の
動きが検出された領域のブロック群に対する分散リフレ
ッシュが開始された時点から時間Ｔだけ経過した後に、
一括リフレッシュがその領域のブロック群に対して行わ
れることを特徴とする。
【００７４】第６１の発明は、第５７の発明において、
動き判別ステップでは、各ブロック群の領域が所定数の
分割領域に分割されて、分割領域毎に被写体に予め設定
されたしきい値以上の動きがあるか否かを検出すること
により各分割領域における動きの有無が判別され、しき
い値以上の動きが検出された分割領域を含む領域のブロ
ック群に対する次の一括リフレッシュの時点におけるフ
レームの符号化過程でその分割領域の全てのブロックが
フレーム内符号化されることを特徴とする。
動き判別ステップでは、各ブロック群の領域が所定数の
分割領域に分割されて、分割領域毎に被写体に予め設定
されたしきい値以上の動きがあるか否かを検出すること
により各分割領域における動きの有無が判別され、しき
い値以上の動きが検出された分割領域を含む領域のブロ
ック群に対する次の一括リフレッシュの時点におけるフ
レームの符号化過程でその分割領域の全てのブロックが
フレーム内符号化されることを特徴とする。
【００７５】第６２の発明は、第５７の発明において、
動き判別ステップでは、各ブロック群の領域が所定数の
分割領域に分割されて、分割領域毎に被写体に予め設定
されたしきい値以上の動きがあるか否かを検出すること
により各分割領域における動きの有無が判別され、分散
リフレッシュの過程にあるブロック群の領域に含まれる
分割領域内の被写体にしきい値以上の動きが検出される
と、その分割領域を含む領域のブロック群に対する分散
リフレッシュが中断され、しきい値以上の動きが検出さ
れた分割領域を含む領域のブロック群に対する次の一括
リフレッシュの時点におけるフレームの符号化過程でそ
の分割領域の全てのブロックがフレーム内符号化される
ことを特徴とする。
動き判別ステップでは、各ブロック群の領域が所定数の
分割領域に分割されて、分割領域毎に被写体に予め設定
されたしきい値以上の動きがあるか否かを検出すること
により各分割領域における動きの有無が判別され、分散
リフレッシュの過程にあるブロック群の領域に含まれる
分割領域内の被写体にしきい値以上の動きが検出される
と、その分割領域を含む領域のブロック群に対する分散
リフレッシュが中断され、しきい値以上の動きが検出さ
れた分割領域を含む領域のブロック群に対する次の一括
リフレッシュの時点におけるフレームの符号化過程でそ
の分割領域の全てのブロックがフレーム内符号化される
ことを特徴とする。
【００７６】第６３の発明は、第５７の発明において、
被写体が縦長の場合または被写体が縦方向に移動する場
合に、縦横に配列されたブロック群のうち一括リフレッ
シュが行われるブロック群が縦方向に変更されていくこ
とを特徴とする。
被写体が縦長の場合または被写体が縦方向に移動する場
合に、縦横に配列されたブロック群のうち一括リフレッ
シュが行われるブロック群が縦方向に変更されていくこ
とを特徴とする。
【００７７】第６４の発明は、第５７の発明において、
被写体が横長の場合または被写体が横方向に移動する場
合に、縦横に配列されたブロック群のうち一括リフレッ
シュが行われるブロック群が横方向に変更されていくこ
とを特徴とする。
被写体が横長の場合または被写体が横方向に移動する場
合に、縦横に配列されたブロック群のうち一括リフレッ
シュが行われるブロック群が横方向に変更されていくこ
とを特徴とする。
【００７８】第６５の発明は、第４８の発明において、
動き判別ステップで使用されるしきい値を変更するしき
い値設定ステップを更に備えることを特徴とする。
動き判別ステップで使用されるしきい値を変更するしき
い値設定ステップを更に備えることを特徴とする。
【００７９】第６６の発明は、第６５の発明において、
しきい値設定ステップは、カメラまたは映像のブレ量を
検出するステップと、ブレ量に応じて異なる値をしきい
値として設定するステップとを含むことを特徴とする。
しきい値設定ステップは、カメラまたは映像のブレ量を
検出するステップと、ブレ量に応じて異なる値をしきい
値として設定するステップとを含むことを特徴とする。
【００８０】第６７の発明は、第４８の発明において、
動き判別ステップでの判別結果に基づき、現在符号化し
ようとするフレームに一括リフレッシュを行うブロック
群が含まれ、かつ、ｎ（ｎは予め決められた自然数）フ
レーム前に符号化されたフレームに一括リフレッシュを
行うブロック群が含まれない場合に、現在符号化しよう
とするフレームの画質をｎフレーム前に符号化されたフ
レームの画質より悪くする符号化精度制御ステップを更
に備えることを特徴とする。
動き判別ステップでの判別結果に基づき、現在符号化し
ようとするフレームに一括リフレッシュを行うブロック
群が含まれ、かつ、ｎ（ｎは予め決められた自然数）フ
レーム前に符号化されたフレームに一括リフレッシュを
行うブロック群が含まれない場合に、現在符号化しよう
とするフレームの画質をｎフレーム前に符号化されたフ
レームの画質より悪くする符号化精度制御ステップを更
に備えることを特徴とする。
【００８１】第６８の発明は、第５５の発明において、
動き判別ステップでの判別結果に基づき、現在符号化し
ようとするフレームに一括リフレッシュを行うブロック
群が含まれ、かつ、ｎ（ｎは予め決められた自然数）フ
レーム前に符号化されたフレームに一括リフレッシュを
行うブロック群が含まれない場合に、現在符号化しよう
とするフレームの画質をｎフレーム前に符号化されたフ
レームの画質より悪くする符号化精度制御ステップを更
に備えることを特徴とする。
動き判別ステップでの判別結果に基づき、現在符号化し
ようとするフレームに一括リフレッシュを行うブロック
群が含まれ、かつ、ｎ（ｎは予め決められた自然数）フ
レーム前に符号化されたフレームに一括リフレッシュを
行うブロック群が含まれない場合に、現在符号化しよう
とするフレームの画質をｎフレーム前に符号化されたフ
レームの画質より悪くする符号化精度制御ステップを更
に備えることを特徴とする。
【００８２】第６９の発明は、第４８の発明において、
動き判別ステップでの判別結果に基づき、現在符号化し
ようとするフレームに一括リフレッシュを行うブロック
群が含まれず、かつ、ｎ（ｎは予め決められた自然数）
フレーム前に符号化されたフレームに一括リフレッシュ
を行うブロック群が含まれる場合に、現在符号化しよう
とするフレームの画質をｎフレーム前に符号化されたフ
レームの画質より良くする符号化精度制御ステップを更
に備えることを特徴とする。
動き判別ステップでの判別結果に基づき、現在符号化し
ようとするフレームに一括リフレッシュを行うブロック
群が含まれず、かつ、ｎ（ｎは予め決められた自然数）
フレーム前に符号化されたフレームに一括リフレッシュ
を行うブロック群が含まれる場合に、現在符号化しよう
とするフレームの画質をｎフレーム前に符号化されたフ
レームの画質より良くする符号化精度制御ステップを更
に備えることを特徴とする。
【００８３】第７０の発明は、第５５の発明において、
動き判別ステップでの判別結果に基づき、現在符号化し
ようとするフレームに一括リフレッシュを行うブロック
群が含まれず、かつ、ｎ（ｎは予め決められた自然数）
フレーム前に符号化されたフレームに一括リフレッシュ
を行うブロック群が含まれる場合に、現在符号化しよう
とするフレームの画質をｎフレーム前に符号化されたフ
レームの画質より良くする符号化精度制御ステップを更
に備えることを特徴とする。
動き判別ステップでの判別結果に基づき、現在符号化し
ようとするフレームに一括リフレッシュを行うブロック
群が含まれず、かつ、ｎ（ｎは予め決められた自然数）
フレーム前に符号化されたフレームに一括リフレッシュ
を行うブロック群が含まれる場合に、現在符号化しよう
とするフレームの画質をｎフレーム前に符号化されたフ
レームの画質より良くする符号化精度制御ステップを更
に備えることを特徴とする。
【００８４】第７１の発明は、第６７の発明において、
符号化精度制御ステップは、現在符号化しようとするフ
レームの量子化精度を低下させることにより、現在符号
化しようとするフレームの画質をｎフレーム前に符号化
したフレームの画質より悪くする量子化精度制御ステッ
プを含むことを特徴とする。
符号化精度制御ステップは、現在符号化しようとするフ
レームの量子化精度を低下させることにより、現在符号
化しようとするフレームの画質をｎフレーム前に符号化
したフレームの画質より悪くする量子化精度制御ステッ
プを含むことを特徴とする。
【００８５】第７２の発明は、第６９の発明において、
符号化精度制御ステップは、現在符号化しようとするフ
レームの量子化精度を向上させることにより、現在符号
化しようとするフレームの画質をｎフレーム前に符号化
したフレームの画質より良くする量子化精度制御ステッ
プを含むことを特徴とする。
符号化精度制御ステップは、現在符号化しようとするフ
レームの量子化精度を向上させることにより、現在符号
化しようとするフレームの画質をｎフレーム前に符号化
したフレームの画質より良くする量子化精度制御ステッ
プを含むことを特徴とする。
【００８６】第７３の発明は、第４８の発明において、
分散リフレッシュステップは、分散リフレッシュが行わ
れるブロック群に含まれるブロックのうちフレーム内符
号化されるブロックの画質を、ブロック群を含むフレー
ムにおける他のブロックの画質よりも良くする符号化制
御ステップを含むことを特徴とする。
分散リフレッシュステップは、分散リフレッシュが行わ
れるブロック群に含まれるブロックのうちフレーム内符
号化されるブロックの画質を、ブロック群を含むフレー
ムにおける他のブロックの画質よりも良くする符号化制
御ステップを含むことを特徴とする。
【００８７】第７４の発明は、第４８の発明において、
分散リフレッシュステップは、分散リフレッシュが行わ
れるブロック群に含まれるブロックのうちフレーム内符
号化されるブロックの画質を予め設定された下限値より
低下しないように符号化の精度を制御する符号化精度制
御ステップを含むことを特徴とする。
分散リフレッシュステップは、分散リフレッシュが行わ
れるブロック群に含まれるブロックのうちフレーム内符
号化されるブロックの画質を予め設定された下限値より
低下しないように符号化の精度を制御する符号化精度制
御ステップを含むことを特徴とする。
【００８８】第７５の発明は、第４８の発明において、
分散リフレッシュステップは、分散リフレッシュが行わ
れるブロック群に含まれるブロックのうちフレーム内符
号化されるブロックの画質が予め設定された下限値より
も高い場合に、その画質をブロック群を含むフレームに
おける他のブロックの画質と同等とし、フレーム内符号
化されるブロックの画質が下限値よりも低い場合に、そ
の画質を下限値とするように、符号化の精度を制御する
符号化精度制御ステップを含むことを特徴とする。
分散リフレッシュステップは、分散リフレッシュが行わ
れるブロック群に含まれるブロックのうちフレーム内符
号化されるブロックの画質が予め設定された下限値より
も高い場合に、その画質をブロック群を含むフレームに
おける他のブロックの画質と同等とし、フレーム内符号
化されるブロックの画質が下限値よりも低い場合に、そ
の画質を下限値とするように、符号化の精度を制御する
符号化精度制御ステップを含むことを特徴とする。
【００８９】第７６の発明は、第７３の発明において、
符号化精度制御ステップは、フレーム内符号化されるブ
ロックの量子化精度をフレームにおける他のブロックの
量子化精度よりも高くする量子化精度制御ステップを含
むことを特徴とする。
符号化精度制御ステップは、フレーム内符号化されるブ
ロックの量子化精度をフレームにおける他のブロックの
量子化精度よりも高くする量子化精度制御ステップを含
むことを特徴とする。
【００９０】第７７の発明は、第４８の発明において、
分散リフレッシュステップは、分散リフレッシュが行わ
れるブロック群に含まれるブロックのうちフレーム内符
号化されるブロックの量子化精度を予め設定された下限
値より低下しないように量子化精度を制御する量子化精
度制御ステップを含むことを特徴とする。
分散リフレッシュステップは、分散リフレッシュが行わ
れるブロック群に含まれるブロックのうちフレーム内符
号化されるブロックの量子化精度を予め設定された下限
値より低下しないように量子化精度を制御する量子化精
度制御ステップを含むことを特徴とする。
【００９１】第７８の発明は、第４８の発明において、
分散リフレッシュステップは、分散リフレッシュが行わ
れるブロック群に含まれるブロックのうちフレーム内符
号化されるブロックの量子化精度が予め設定された下限
値よりも高い場合に、その量子化精度をブロック群を含
むフレームにおける他のブロックの量子化精度と同等と
し、フレーム内符号化されるブロックの量子化精度が下
限値よりも低い場合に、その量子化精度を下限値とする
ように、量子化精度を制御する量子化精度制御ステップ
を含むことを特徴とする。
分散リフレッシュステップは、分散リフレッシュが行わ
れるブロック群に含まれるブロックのうちフレーム内符
号化されるブロックの量子化精度が予め設定された下限
値よりも高い場合に、その量子化精度をブロック群を含
むフレームにおける他のブロックの量子化精度と同等と
し、フレーム内符号化されるブロックの量子化精度が下
限値よりも低い場合に、その量子化精度を下限値とする
ように、量子化精度を制御する量子化精度制御ステップ
を含むことを特徴とする。
【００９２】第７９の発明は、第４８の発明において、
各ブロック群は、各フレームにおけるｍ個の予め決めら
れた領域のそれぞれにおける複数ブロックより構成され
ていることを特徴とする。
各ブロック群は、各フレームにおけるｍ個の予め決めら
れた領域のそれぞれにおける複数ブロックより構成され
ていることを特徴とする。
【００９３】第８０の発明は、第５５の発明において、
各ブロック群は、各フレームにおけるｍ個の予め決めら
れた領域のそれぞれにおける複数ブロックより構成され
ていることを特徴とする。
各ブロック群は、各フレームにおけるｍ個の予め決めら
れた領域のそれぞれにおける複数ブロックより構成され
ていることを特徴とする。
【００９４】第８１の発明は、第７９の発明において、
予め決められた領域はグループオブブロックであること
を特徴とする。
予め決められた領域はグループオブブロックであること
を特徴とする。
【００９５】第８２の発明は、第８０の発明において、
予め決められた領域はグループオブブロックであること
を特徴とする。
予め決められた領域はグループオブブロックであること
を特徴とする。
【００９６】第８３の発明は、動画像の各フレームを予
め決められた個数ｍのブロック群に分割し、各ブロック
群に含まれるブロックを単位としてフレーム間符号化方
式とフレーム内符号化方式との間で符号化方式を切り換
えつつ動画像を符号化する画像符号化方法であって、各
ブロック群の符号化により所定時点から所定時間Ｔだけ
経過する間に発生する符号化量が予め決められたしきい
値以上であるか否かを判定する符号化量判定ステップ
と、一つのブロック群に含まれる全てのブロックを同一
フレームの符号化過程でフレーム内符号化することとし
て定義される一括リフレッシュを、符号化量判定ステッ
プで符号化量がしきい値以上であると判定されたブロッ
ク群に対して行う一括リフレッシュステップと、各フレ
ームにおけるブロック群のうちフレーム内の位置が同一
であるブロック群を同一ブロック群と見なして一つのブ
ロック群に含まれる各ブロックをブロック毎に異なるフ
レームの符号化過程でフレーム内符号化することとして
定義される分散リフレッシュを、符号化量判定ステップ
で符号化量がしきい値よりも少ないと判定されたブロッ
ク群に対して行う分散リフレッシュステップとを備え
る。
め決められた個数ｍのブロック群に分割し、各ブロック
群に含まれるブロックを単位としてフレーム間符号化方
式とフレーム内符号化方式との間で符号化方式を切り換
えつつ動画像を符号化する画像符号化方法であって、各
ブロック群の符号化により所定時点から所定時間Ｔだけ
経過する間に発生する符号化量が予め決められたしきい
値以上であるか否かを判定する符号化量判定ステップ
と、一つのブロック群に含まれる全てのブロックを同一
フレームの符号化過程でフレーム内符号化することとし
て定義される一括リフレッシュを、符号化量判定ステッ
プで符号化量がしきい値以上であると判定されたブロッ
ク群に対して行う一括リフレッシュステップと、各フレ
ームにおけるブロック群のうちフレーム内の位置が同一
であるブロック群を同一ブロック群と見なして一つのブ
ロック群に含まれる各ブロックをブロック毎に異なるフ
レームの符号化過程でフレーム内符号化することとして
定義される分散リフレッシュを、符号化量判定ステップ
で符号化量がしきい値よりも少ないと判定されたブロッ
ク群に対して行う分散リフレッシュステップとを備え
る。
【００９７】第８４の発明は、動画像を符号化しその動
画像の符号化データを送出する符号化装置と、送出され
た符号化データを受信して復号化するとともに、復号化
すべき符号化データにおけるエラーの検出を行い、エラ
ーが検出されるとエラー通知を符号化装置へ送る復号化
装置とにより構成される画像伝送システムにおいて使用
され、動画像の各フレームを予め決められた個数ｍのブ
ロック群に分割して、各ブロック群に含まれるブロック
を単位としてフレーム間符号化方式とフレーム内符号化
方式との間で符号化方式を切り換えつつ動画像を符号化
する画像符号化方法であって、エラー通知を受信するエ
ラー受信ステップと、エラー通知が受信された場合に、
エラー通知の受信の時点から所定時間ＲＴｍａｘだけ前
までの間に符号化された各フレームにおける各ブロック
群の領域内の被写体に予め決められたしきい値以上の動
きがあるか否かを判別し、しきい値以上の動きがある領
域のブロック群に対してフレーム内符号化によるリフレ
ッシュを行うことを決定するリフレッシュ選択ステップ
と、一つのブロック群に含まれる全てのブロックを同一
フレームの符号化過程でフレーム内符号化することとし
て定義される一括リフレッシュを、リフレッシュ選択ス
テップでリフレッシュを行うことが決定されたブロック
群に対して行う一括リフレッシュステップとを備える。
画像の符号化データを送出する符号化装置と、送出され
た符号化データを受信して復号化するとともに、復号化
すべき符号化データにおけるエラーの検出を行い、エラ
ーが検出されるとエラー通知を符号化装置へ送る復号化
装置とにより構成される画像伝送システムにおいて使用
され、動画像の各フレームを予め決められた個数ｍのブ
ロック群に分割して、各ブロック群に含まれるブロック
を単位としてフレーム間符号化方式とフレーム内符号化
方式との間で符号化方式を切り換えつつ動画像を符号化
する画像符号化方法であって、エラー通知を受信するエ
ラー受信ステップと、エラー通知が受信された場合に、
エラー通知の受信の時点から所定時間ＲＴｍａｘだけ前
までの間に符号化された各フレームにおける各ブロック
群の領域内の被写体に予め決められたしきい値以上の動
きがあるか否かを判別し、しきい値以上の動きがある領
域のブロック群に対してフレーム内符号化によるリフレ
ッシュを行うことを決定するリフレッシュ選択ステップ
と、一つのブロック群に含まれる全てのブロックを同一
フレームの符号化過程でフレーム内符号化することとし
て定義される一括リフレッシュを、リフレッシュ選択ス
テップでリフレッシュを行うことが決定されたブロック
群に対して行う一括リフレッシュステップとを備える。
【００９８】第８５の発明は、第８４の発明において、
各フレームにおけるブロック群のうちフレーム内の位置
が同一であるブロック群を同一ブロック群と見なして一
つのブロック群に含まれる各ブロックをブロック毎に異
なるフレームの符号化過程でフレーム内符号化すること
として定義される分散リフレッシュを、リフレッシュ選
択ステップでリフレッシュを行うことが決定されたブロ
ック群以外のブロック群に対して行う分散リフレッシュ
ステップを更に備えることを特徴とする。
各フレームにおけるブロック群のうちフレーム内の位置
が同一であるブロック群を同一ブロック群と見なして一
つのブロック群に含まれる各ブロックをブロック毎に異
なるフレームの符号化過程でフレーム内符号化すること
として定義される分散リフレッシュを、リフレッシュ選
択ステップでリフレッシュを行うことが決定されたブロ
ック群以外のブロック群に対して行う分散リフレッシュ
ステップを更に備えることを特徴とする。
【００９９】第８６の発明は、第８４の発明において、
動画像の各フレームに対する符号化の際に当該フレーム
における各ブロック群の領域内の被写体の動きの大きさ
を示す動き情報を格納する動き情報格納ステップと、動
き情報格納ステップで格納された動き情報を少なくとも
時間ＲＴｍａｘだけ保持するように動き情報の保持時間
を管理する保持時間管理ステップとを更に備え、リフレ
ッシュ選択ステップでは、保持時間の管理された動き情
報に基づき、エラー通知の受信の時点から時間ＲＴｍａ
ｘだけ前までの間に符号化された各フレームにおける各
ブロック群の領域内の被写体にしきい値以上の動きがあ
るか否かが判別されることを特徴とする。
動画像の各フレームに対する符号化の際に当該フレーム
における各ブロック群の領域内の被写体の動きの大きさ
を示す動き情報を格納する動き情報格納ステップと、動
き情報格納ステップで格納された動き情報を少なくとも
時間ＲＴｍａｘだけ保持するように動き情報の保持時間
を管理する保持時間管理ステップとを更に備え、リフレ
ッシュ選択ステップでは、保持時間の管理された動き情
報に基づき、エラー通知の受信の時点から時間ＲＴｍａ
ｘだけ前までの間に符号化された各フレームにおける各
ブロック群の領域内の被写体にしきい値以上の動きがあ
るか否かが判別されることを特徴とする。
【０１００】第８７の発明は、第８４の発明において、
時間ＲＴｍａｘは、動画像におけるいずれかのフレーム
が符号化される時点から、そのフレームの符号化データ
が復号化装置へ送られ、その符号化データにエラーが検
出されたときにエラー通知が符号化装置で受信される時
点までの時間の最大値であることを特徴とする。
時間ＲＴｍａｘは、動画像におけるいずれかのフレーム
が符号化される時点から、そのフレームの符号化データ
が復号化装置へ送られ、その符号化データにエラーが検
出されたときにエラー通知が符号化装置で受信される時
点までの時間の最大値であることを特徴とする。
【０１０１】第８８の発明は、第８６の発明において、
動画像における各フレームが符号化される時点から、そ
のフレームの符号化データが復号化装置へ送られ、その
符号化データにエラーが検出されたときにエラー通知が
符号化装置で受信される時点までの時間を、動画像の各
フレーム毎に算出する時間算出ステップを更に備え、保
持時間管理ステップでは、時間算出ステップで算出され
た時間を所定時間ＲＴｍａｘとして用いて動き情報の保
持時間が管理されることを特徴とする。
動画像における各フレームが符号化される時点から、そ
のフレームの符号化データが復号化装置へ送られ、その
符号化データにエラーが検出されたときにエラー通知が
符号化装置で受信される時点までの時間を、動画像の各
フレーム毎に算出する時間算出ステップを更に備え、保
持時間管理ステップでは、時間算出ステップで算出され
た時間を所定時間ＲＴｍａｘとして用いて動き情報の保
持時間が管理されることを特徴とする。
【０１０２】第８９の発明は、第８４の発明において、
領域の異なる複数のブロック群に対してリフレッシュを
行うことがリフレッシュ選択ステップで決定された場合
に、その複数のブロック群は順次１フレームずつずらし
て各々１回づつ一括リフレッシュされることを特徴とす
る。
領域の異なる複数のブロック群に対してリフレッシュを
行うことがリフレッシュ選択ステップで決定された場合
に、その複数のブロック群は順次１フレームずつずらし
て各々１回づつ一括リフレッシュされることを特徴とす
る。
【０１０３】第９０の発明は、第８９の発明において、
リフレッシュ選択ステップでは、複数のブロック群が順
次１フレームずつずらして各々１回づつ一括リフレッシ
ュされている間にエラー通知が受信された場合に、その
受信の時点から時間ＲＴｍａｘだけ前までの間に符号化
された各フレームにおける各ブロック群の領域内の被写
体にしきい値以上の動きがあるか否かが判別され、その
判別結果に基づき、しきい値以上の動きがある領域のブ
ロック群がリフレッシュを行うブロック群として追加的
に決定され、リフレッシュを行うことがリフレッシュ選
択ステップで決定されている複数のブロック群が、リフ
レッシュを行うことが重複して決定されたブロック群を
も含めて、順次１フレームずつずらして各々１回づつ一
括リフレッシュされることを特徴とする。
リフレッシュ選択ステップでは、複数のブロック群が順
次１フレームずつずらして各々１回づつ一括リフレッシ
ュされている間にエラー通知が受信された場合に、その
受信の時点から時間ＲＴｍａｘだけ前までの間に符号化
された各フレームにおける各ブロック群の領域内の被写
体にしきい値以上の動きがあるか否かが判別され、その
判別結果に基づき、しきい値以上の動きがある領域のブ
ロック群がリフレッシュを行うブロック群として追加的
に決定され、リフレッシュを行うことがリフレッシュ選
択ステップで決定されている複数のブロック群が、リフ
レッシュを行うことが重複して決定されたブロック群を
も含めて、順次１フレームずつずらして各々１回づつ一
括リフレッシュされることを特徴とする。
【０１０４】第９１の発明は、第８６の発明において、
動き情報格納ステップでは、動画像の各フレームに対す
る符号化の際に、その符号化において一括リフレッシュ
が行われたブロック群に対する動き情報としてしきい値
以上の動きを示す所定の動き情報が格納され、保持時間
管理ステップでの保持時間の管理により、その符号化の
時点から少なくとも時間ＲＴｍａｘが経過するまでは所
定の動き情報が保持されることを特徴とする。
動き情報格納ステップでは、動画像の各フレームに対す
る符号化の際に、その符号化において一括リフレッシュ
が行われたブロック群に対する動き情報としてしきい値
以上の動きを示す所定の動き情報が格納され、保持時間
管理ステップでの保持時間の管理により、その符号化の
時点から少なくとも時間ＲＴｍａｘが経過するまでは所
定の動き情報が保持されることを特徴とする。
【０１０５】第９２の発明は、第８４の発明において、
一括リフレッシュが行われないブロック群のブロックの
うち、一括リフレッシュが行われるべきブロック群であ
ってかつ一括リフレッシュが行われていない一括リフレ
ッシュ待ちブロック群に接するブロックの符号化に際
し、その一括リフレッシュ待ちブロック群が参照されな
いように動きベクトル探索範囲を制限する探索範囲制限
ステップを更に備えることを特徴とする。
一括リフレッシュが行われないブロック群のブロックの
うち、一括リフレッシュが行われるべきブロック群であ
ってかつ一括リフレッシュが行われていない一括リフレ
ッシュ待ちブロック群に接するブロックの符号化に際
し、その一括リフレッシュ待ちブロック群が参照されな
いように動きベクトル探索範囲を制限する探索範囲制限
ステップを更に備えることを特徴とする。
【０１０６】第９３の発明は、第９２の発明において、
探索範囲制限ステップでは、一括リフレッシュが行われ
る期間は、各ブロック群のブロックの符号化に際し、自
ブロック群以外のブロック群のブロックが参照されない
ように動きベクトル探索範囲が制限されることを特徴と
する。
探索範囲制限ステップでは、一括リフレッシュが行われ
る期間は、各ブロック群のブロックの符号化に際し、自
ブロック群以外のブロック群のブロックが参照されない
ように動きベクトル探索範囲が制限されることを特徴と
する。
【０１０７】第９４の発明は、動画像の各フレームを予
め決められた個数ｍのブロック群に分割して、各ブロッ
ク群に含まれるブロックを単位としてフレーム間符号化
方式とフレーム内符号化方式との間で符号化方式を切り
換えつつ動画像を符号化する画像符号化プログラムを、
コンピュータ装置において実行されるプログラムとして
記録した記録媒体であって、各フレームにおける個数ｍ
のブロック群のそれぞれの領域内の被写体に所定時点か
ら所定時間Ｔだけ経過する間に予め決められたしきい値
以上の動きがあるか否かを判別する動き判別ステップ
と、一つのブロック群に含まれる全てのブロックを同一
フレームの符号化過程でフレーム内符号化することとし
て定義される一括リフレッシュを、動き判別ステップで
しきい値以上の動きがあると判別された領域のブロック
群に対して行う一括リフレッシュステップと、各フレー
ムにおけるブロック群のうちフレーム内の位置が同一で
あるブロック群を同一ブロック群と見なして一つのブロ
ック群に含まれる各ブロックをブロック毎に異なるフレ
ームの符号化過程でフレーム内符号化することとして定
義される分散リフレッシュを、動き判別ステップでしき
い値以上の動きがないと判別された領域のブロック群に
対して行う分散リフレッシュステップと、を含む動作環
境をコンピュータ装置上で実現するための画像符号化プ
ログラムを記録する。
め決められた個数ｍのブロック群に分割して、各ブロッ
ク群に含まれるブロックを単位としてフレーム間符号化
方式とフレーム内符号化方式との間で符号化方式を切り
換えつつ動画像を符号化する画像符号化プログラムを、
コンピュータ装置において実行されるプログラムとして
記録した記録媒体であって、各フレームにおける個数ｍ
のブロック群のそれぞれの領域内の被写体に所定時点か
ら所定時間Ｔだけ経過する間に予め決められたしきい値
以上の動きがあるか否かを判別する動き判別ステップ
と、一つのブロック群に含まれる全てのブロックを同一
フレームの符号化過程でフレーム内符号化することとし
て定義される一括リフレッシュを、動き判別ステップで
しきい値以上の動きがあると判別された領域のブロック
群に対して行う一括リフレッシュステップと、各フレー
ムにおけるブロック群のうちフレーム内の位置が同一で
あるブロック群を同一ブロック群と見なして一つのブロ
ック群に含まれる各ブロックをブロック毎に異なるフレ
ームの符号化過程でフレーム内符号化することとして定
義される分散リフレッシュを、動き判別ステップでしき
い値以上の動きがないと判別された領域のブロック群に
対して行う分散リフレッシュステップと、を含む動作環
境をコンピュータ装置上で実現するための画像符号化プ
ログラムを記録する。
【０１０８】第９５の発明は、動画像の各フレームを予
め決められた個数ｍのブロック群に分割して、各ブロッ
ク群に含まれるブロックを単位としてフレーム間符号化
方式とフレーム内符号化方式との間で符号化方式を切り
換えつつ動画像を符号化する画像符号化プログラムを、
コンピュータ装置において実行されるプログラムとして
記録した記録媒体であって、一つのブロック群に含まれ
る全てのブロックを同一フレームの符号化過程でフレー
ム内符号化することとして定義される一括リフレッシュ
を、各フレームにつき高々一つのブロック群に対して行
う一括リフレッシュステップを含み、各フレームにおけ
るブロック群のうちフレーム内の位置が同一であるブロ
ック群に対して一括リフレッシュを行う間隔に相当する
フレーム数Ｔｆが個数ｍよりも大きいことを特徴とする
動作環境をコンピュータ装置上で実現するための画像符
号化プログラムを記録する。
め決められた個数ｍのブロック群に分割して、各ブロッ
ク群に含まれるブロックを単位としてフレーム間符号化
方式とフレーム内符号化方式との間で符号化方式を切り
換えつつ動画像を符号化する画像符号化プログラムを、
コンピュータ装置において実行されるプログラムとして
記録した記録媒体であって、一つのブロック群に含まれ
る全てのブロックを同一フレームの符号化過程でフレー
ム内符号化することとして定義される一括リフレッシュ
を、各フレームにつき高々一つのブロック群に対して行
う一括リフレッシュステップを含み、各フレームにおけ
るブロック群のうちフレーム内の位置が同一であるブロ
ック群に対して一括リフレッシュを行う間隔に相当する
フレーム数Ｔｆが個数ｍよりも大きいことを特徴とする
動作環境をコンピュータ装置上で実現するための画像符
号化プログラムを記録する。
【０１０９】第９６の発明は、動画像の各フレームを予
め決められた個数ｍのブロック群に分割して、各ブロッ
ク群に含まれるブロックを単位としてフレーム間符号化
方式とフレーム内符号化方式との間で符号化方式を切り
換えつつ動画像を符号化する画像符号化プログラムを、
コンピュータ装置において実行されるプログラムとして
記録した記録媒体であって、各ブロック群の符号化によ
り所定時点から所定時間Ｔだけ経過する間に発生する符
号化量が予め決められたしきい値以上であるか否かを判
定する符号化量判定ステップと、一つのブロック群に含
まれる全てのブロックを同一フレームの符号化過程でフ
レーム内符号化することとして定義される一括リフレッ
シュを、符号化量判定ステップで符号化量がしきい値以
上であると判定されたブロック群に対して行う一括リフ
レッシュステップと、各フレームにおけるブロック群の
うちフレーム内の位置が同一であるブロック群を同一ブ
ロック群と見なして一つのブロック群に含まれる各ブロ
ックをブロック毎に異なるフレームの符号化過程でフレ
ーム内符号化することとして定義される分散リフレッシ
ュを、符号化量判定ステップで符号化量がしきい値より
も少ないと判定されたブロック群に対して行う分散リフ
レッシュステップと、を含む動作環境をコンピュータ装
置上で実現するための画像符号化プログラムを記録す
る。
め決められた個数ｍのブロック群に分割して、各ブロッ
ク群に含まれるブロックを単位としてフレーム間符号化
方式とフレーム内符号化方式との間で符号化方式を切り
換えつつ動画像を符号化する画像符号化プログラムを、
コンピュータ装置において実行されるプログラムとして
記録した記録媒体であって、各ブロック群の符号化によ
り所定時点から所定時間Ｔだけ経過する間に発生する符
号化量が予め決められたしきい値以上であるか否かを判
定する符号化量判定ステップと、一つのブロック群に含
まれる全てのブロックを同一フレームの符号化過程でフ
レーム内符号化することとして定義される一括リフレッ
シュを、符号化量判定ステップで符号化量がしきい値以
上であると判定されたブロック群に対して行う一括リフ
レッシュステップと、各フレームにおけるブロック群の
うちフレーム内の位置が同一であるブロック群を同一ブ
ロック群と見なして一つのブロック群に含まれる各ブロ
ックをブロック毎に異なるフレームの符号化過程でフレ
ーム内符号化することとして定義される分散リフレッシ
ュを、符号化量判定ステップで符号化量がしきい値より
も少ないと判定されたブロック群に対して行う分散リフ
レッシュステップと、を含む動作環境をコンピュータ装
置上で実現するための画像符号化プログラムを記録す
る。
【０１１０】第９７の発明は、動画像を符号化しその動
画像の符号化データを送出する符号化装置と、送出され
た符号化データを受信して復号化するとともに、復号化
すべき符号化データにおけるエラーの検出を行い、エラ
ーが検出されるとエラー通知を符号化装置へ送る復号化
装置とにより構成される画像伝送システムにおいて使用
され、動画像の各フレームを予め決められた個数ｍのブ
ロック群に分割して、各ブロック群に含まれるブロック
を単位としてフレーム間符号化方式とフレーム内符号化
方式との間で符号化方式を切り換えつつ動画像を符号化
する画像符号化プログラムを、コンピュータ装置におい
て実行されるプログラムとして記録した記録媒体であっ
て、エラー通知を受信するエラー受信ステップと、エラ
ー通知が受信された場合に、エラー通知の受信の時点か
ら所定時間ＲＴｍａｘだけ前までの間に符号化された各
フレームにおける各ブロック群の領域内の被写体に予め
決められたしきい値以上の動きがあるか否かを判別し、
しきい値以上の動きがある領域のブロック群に対してフ
レーム内符号化によるリフレッシュを行うことを決定す
るリフレッシュ選択ステップと、一つのブロック群に含
まれる全てのブロックを同一フレームの符号化過程でフ
レーム内符号化することとして定義される一括リフレッ
シュを、リフレッシュ選択ステップでリフレッシュを行
うことが決定されたブロック群に対して行う一括リフレ
ッシュステップと、を含む動作環境をコンピュータ装置
上で実現するための画像符号化プログラムを記録する。
画像の符号化データを送出する符号化装置と、送出され
た符号化データを受信して復号化するとともに、復号化
すべき符号化データにおけるエラーの検出を行い、エラ
ーが検出されるとエラー通知を符号化装置へ送る復号化
装置とにより構成される画像伝送システムにおいて使用
され、動画像の各フレームを予め決められた個数ｍのブ
ロック群に分割して、各ブロック群に含まれるブロック
を単位としてフレーム間符号化方式とフレーム内符号化
方式との間で符号化方式を切り換えつつ動画像を符号化
する画像符号化プログラムを、コンピュータ装置におい
て実行されるプログラムとして記録した記録媒体であっ
て、エラー通知を受信するエラー受信ステップと、エラ
ー通知が受信された場合に、エラー通知の受信の時点か
ら所定時間ＲＴｍａｘだけ前までの間に符号化された各
フレームにおける各ブロック群の領域内の被写体に予め
決められたしきい値以上の動きがあるか否かを判別し、
しきい値以上の動きがある領域のブロック群に対してフ
レーム内符号化によるリフレッシュを行うことを決定す
るリフレッシュ選択ステップと、一つのブロック群に含
まれる全てのブロックを同一フレームの符号化過程でフ
レーム内符号化することとして定義される一括リフレッ
シュを、リフレッシュ選択ステップでリフレッシュを行
うことが決定されたブロック群に対して行う一括リフレ
ッシュステップと、を含む動作環境をコンピュータ装置
上で実現するための画像符号化プログラムを記録する。
【０１１１】第９８の発明は、第９７の発明において、
各フレームにおけるブロック群のうちフレーム内の位置
が同一であるブロック群を同一ブロック群と見なして一
つのブロック群に含まれる各ブロックをブロック毎に異
なるフレームの符号化過程でフレーム内符号化すること
として定義される分散リフレッシュを、リフレッシュ選
択ステップでリフレッシュを行うことが決定されたブロ
ック群以外のブロック群に対して行う分散リフレッシュ
ステップを更に含む動作環境をコンピュータ装置上で実
現するための画像符号化プログラムを記録する。
各フレームにおけるブロック群のうちフレーム内の位置
が同一であるブロック群を同一ブロック群と見なして一
つのブロック群に含まれる各ブロックをブロック毎に異
なるフレームの符号化過程でフレーム内符号化すること
として定義される分散リフレッシュを、リフレッシュ選
択ステップでリフレッシュを行うことが決定されたブロ
ック群以外のブロック群に対して行う分散リフレッシュ
ステップを更に含む動作環境をコンピュータ装置上で実
現するための画像符号化プログラムを記録する。
【０１１２】
【発明の実施の形態】（第１の実施形態）図１３は、本
発明の第１の実施形態に係る画像符号化方法に基づく画
像伝送システムの構成を示すブロック図である。このシ
ステムは、画像符号化装置２７０１と画像復号化装置２
７０９とを備える。画像符号化装置２７０１は、入力画
像Ｉmiに対し圧縮符号化を行い、その符号化により得ら
れる符号化データを送出する。画像復号化装置２７０９
は、復号化部２７１０を有し、画像符号化装置２７０１
から送出された符号化データを受信して復号化部２７１
０により復号化を行い、その復号化により得られる画像
を出力画像Ｉmoとして出力する。
発明の第１の実施形態に係る画像符号化方法に基づく画
像伝送システムの構成を示すブロック図である。このシ
ステムは、画像符号化装置２７０１と画像復号化装置２
７０９とを備える。画像符号化装置２７０１は、入力画
像Ｉmiに対し圧縮符号化を行い、その符号化により得ら
れる符号化データを送出する。画像復号化装置２７０９
は、復号化部２７１０を有し、画像符号化装置２７０１
から送出された符号化データを受信して復号化部２７１
０により復号化を行い、その復号化により得られる画像
を出力画像Ｉmoとして出力する。
【０１１３】画像符号化装置２７０１は、フレーム間予
測符号化とフレーム内予測符号化を組み合わせた符号化
を行う符号化部２７０８を有し、これに加えて、符号化
部２７０８にフレーム内符号化を行わせることによって
リフレッシュを行うために、リフレッシュ周期管理部２
７０２と、符号化タイミング管理部２７０３と、動き情
報管理部２７０４と、モード選択部２７０５と、一括リ
フレッシュ部２７０６と、分散リフレッシュ部２７０７
とを備えている。符号化部２７０８の構成は、図３５に
示した従来の符号化器１１６の構成と同様であり、符号
化部２７０８では、符号化器１１６のセレクタ１２３お
よび１２４に対応するセレクタが、一括リフレッシュ部
２７０６および分散リフレッシュ部２７０８により制御
される。
測符号化とフレーム内予測符号化を組み合わせた符号化
を行う符号化部２７０８を有し、これに加えて、符号化
部２７０８にフレーム内符号化を行わせることによって
リフレッシュを行うために、リフレッシュ周期管理部２
７０２と、符号化タイミング管理部２７０３と、動き情
報管理部２７０４と、モード選択部２７０５と、一括リ
フレッシュ部２７０６と、分散リフレッシュ部２７０７
とを備えている。符号化部２７０８の構成は、図３５に
示した従来の符号化器１１６の構成と同様であり、符号
化部２７０８では、符号化器１１６のセレクタ１２３お
よび１２４に対応するセレクタが、一括リフレッシュ部
２７０６および分散リフレッシュ部２７０８により制御
される。
【０１１４】このような画像符号化装置２７０１の各部
は、直接、ハードウェアにより実現してもよいが、ソフ
トウェアを用いて実現することもできる。後者の場合、
例えばＣＰＵ(Central Processing Unit) とメモリと外
部記憶装置とを用いて画像符号化装置を構成し、外部記
憶装置からメモリにロードされた所定のプログラム（以
下「画像符号化プログラム」という）をＣＰＵが実行す
ることにより、画像符号化装置２７０１の各部を実現す
ることができる。この場合、画像符号化プログラムは、
典型的には、当該プログラムを記憶した記憶媒体（フレ
キシブルディスク、ＣＤ−ＲＯＭ、ＤＶＤ等）によって
提供される。すなわち、ユーザーは、購入した記憶媒体
を上記画像符号化装置２７０１にセットし、そこに記憶
されている画像符号化プログラムを読み取らせて、ハー
ドディスク装置等の記憶装置にインストールする。ま
た、画像符号化装置２７０１に通信回線を介してオンラ
インで伝送されてくる画像符号化プログラムを記憶装置
にインストールするようにしてもよい。さらに、メーカ
が画像符号化装置を出荷する前に、予め記憶装置に画像
符号化プログラムをインストールしておくようにしても
よい。このようにしてインストールされたプログラム
は、記憶装置からメモリにロードされてＣＰＵにより実
行される。
は、直接、ハードウェアにより実現してもよいが、ソフ
トウェアを用いて実現することもできる。後者の場合、
例えばＣＰＵ(Central Processing Unit) とメモリと外
部記憶装置とを用いて画像符号化装置を構成し、外部記
憶装置からメモリにロードされた所定のプログラム（以
下「画像符号化プログラム」という）をＣＰＵが実行す
ることにより、画像符号化装置２７０１の各部を実現す
ることができる。この場合、画像符号化プログラムは、
典型的には、当該プログラムを記憶した記憶媒体（フレ
キシブルディスク、ＣＤ−ＲＯＭ、ＤＶＤ等）によって
提供される。すなわち、ユーザーは、購入した記憶媒体
を上記画像符号化装置２７０１にセットし、そこに記憶
されている画像符号化プログラムを読み取らせて、ハー
ドディスク装置等の記憶装置にインストールする。ま
た、画像符号化装置２７０１に通信回線を介してオンラ
インで伝送されてくる画像符号化プログラムを記憶装置
にインストールするようにしてもよい。さらに、メーカ
が画像符号化装置を出荷する前に、予め記憶装置に画像
符号化プログラムをインストールしておくようにしても
よい。このようにしてインストールされたプログラム
は、記憶装置からメモリにロードされてＣＰＵにより実
行される。
【０１１５】以下、上記構成の画像符号化装置２７０１
の動作をリフレッシュ動作に注目して説明する。図１
は、本発明の第１の実施形態に係る画像符号化方法をＩ
ＴＵ(International Telecommunication Union) で勧告
されているＨ．２６１またはＨ．２６３のＣＩＦ画像に
適用した場合のリフレッシュ動作の一例を示す図であ
る。ＣＩＦ画像は３５２×２８８ドットであり、Ｈ．２
６１またはＨ．２６３では、これが１６×１６ドットの
マクロブロック（以下「ＭＢＬＫ」という）を単位とし
て２２×１８ブロックに分割され、さらに、１１×３ブ
ロック毎にグループオブブロック（以下「ＧＯＢ」とい
う）が構成される。つまり、ＣＩＦ画像は２×６のＧＯ
Ｂで構成され、それぞれのＧＯＢはさらに１１×３のＭ
ＢＬＫで構成されている。本実施形態において、「ブロ
ック」とはＭＢＬＫを意味するが、「ブロック群」はＧ
ＯＢに限定されるものではない。ここでは、ＧＯＢをブ
ロック群とする場合を例にあげて説明する。ＧＯＢには
図１に示す順にＧＯＢ１からＧＯＢ１２までの番号が付
けられている。これを例えばこの番号の順に１フレーム
毎に１ＧＯＢずつフレーム内符号化することによりリフ
レッシュするとすると、１画面全体のリフレッシュは１
２フレームで完了する。そこで最初にリフレッシュ周期
Ｔを１２フレームとする場合を例にあげて説明する。な
お以下の説明（他の実施形態の説明も含む）では、この
ようにフレーム数によって時間または期間を表すものと
し、同一フレームに含まれる各ブロックに対して行われ
る符号化は同一時点で行われるものと見なす。また、各
フレームにおけるブロック群のうちフレーム内における
位置が同一であるブロック群は、区別されることなく同
一ブロック群として識別され、同一番号を付して参照さ
れるものとする。
の動作をリフレッシュ動作に注目して説明する。図１
は、本発明の第１の実施形態に係る画像符号化方法をＩ
ＴＵ(International Telecommunication Union) で勧告
されているＨ．２６１またはＨ．２６３のＣＩＦ画像に
適用した場合のリフレッシュ動作の一例を示す図であ
る。ＣＩＦ画像は３５２×２８８ドットであり、Ｈ．２
６１またはＨ．２６３では、これが１６×１６ドットの
マクロブロック（以下「ＭＢＬＫ」という）を単位とし
て２２×１８ブロックに分割され、さらに、１１×３ブ
ロック毎にグループオブブロック（以下「ＧＯＢ」とい
う）が構成される。つまり、ＣＩＦ画像は２×６のＧＯ
Ｂで構成され、それぞれのＧＯＢはさらに１１×３のＭ
ＢＬＫで構成されている。本実施形態において、「ブロ
ック」とはＭＢＬＫを意味するが、「ブロック群」はＧ
ＯＢに限定されるものではない。ここでは、ＧＯＢをブ
ロック群とする場合を例にあげて説明する。ＧＯＢには
図１に示す順にＧＯＢ１からＧＯＢ１２までの番号が付
けられている。これを例えばこの番号の順に１フレーム
毎に１ＧＯＢずつフレーム内符号化することによりリフ
レッシュするとすると、１画面全体のリフレッシュは１
２フレームで完了する。そこで最初にリフレッシュ周期
Ｔを１２フレームとする場合を例にあげて説明する。な
お以下の説明（他の実施形態の説明も含む）では、この
ようにフレーム数によって時間または期間を表すものと
し、同一フレームに含まれる各ブロックに対して行われ
る符号化は同一時点で行われるものと見なす。また、各
フレームにおけるブロック群のうちフレーム内における
位置が同一であるブロック群は、区別されることなく同
一ブロック群として識別され、同一番号を付して参照さ
れるものとする。
【０１１６】それぞれのＧＯＢは個別にＧＯＢがリフレ
ッシュされるタイミングより前の１２フレームの間にＧ
ＯＢ内の被写体に動きがないかを、動き情報管理部２７
０４が符号化部２７０８から得られる情報に基づいて１
フレーム毎に判別している。判別の方法としては、ＧＯ
Ｂ内の各ＭＢＬＫの動きベクトルの大きさと設定された
しきい値を比較して、しきい値以上の動きベクトルを持
つＭＢＬＫが所定数以上あればＧＯＢ内の被写体に動き
があるとする方法を用いることができる。また、これに
代えて、１２フレームの各フレームの符号量を設定され
たしきい値と比較し、符号量がしきい値を越えるフレー
ムが１フレームでもあれば動きありとすることにより、
ＧＯＢ内の被写体の動きの有無を判別してもよい。この
ような動きの判別結果に基づき、モード選択部２７０５
が、リフレッシュモードとして、一括リフレッシュモー
ドと分散リフレッシュモードのうちの一方を選択する。
ＧＯＢ内の被写体に動きのある場合は、モード選択部が
一括リフレッシュモードを選択し、一括リフレッシュ部
２７０６が符号化部２７０８におけるセレクタを制御す
ることにより、そのＧＯＢに属する全てのＭＢＬＫを一
度に（つまり同一フレームに対する符号化過程におい
て）フレーム内符号化する、すなわち、そのＧＯＢに対
し一括リフレッシュを行う。ＧＯＢ内の被写体に動きの
ない場合は、モード選択部が分散リフレッシュモードを
選択し、分散リフレッシュ部２７０７が符号化部２７０
８におけるセレクタを制御することにより、そのＧＯＢ
内の各ＭＢＬＫに対しＭＢＬＫ毎に異なるタイミングで
（つまりＭＢＬＫ毎に異なるフレームに対する符号化過
程において）フレーム内符号化をする、すなわち、その
ＧＯＢに対し分散リフレッシュを行う。なお、このよう
なリフレッシュ（フレーム内符号化）を含む符号化のた
めのタイミング情報は、符号化タイミング管理部２７０
３によって生成され、符号化部２７０８およびリフレッ
シュ周期管理部２７０２に供給される。また、リフレッ
シュ周期を示すタイミング情報は、リフレッシュ周期管
理部２７０２により生成され、動き情報管理部２７０
４、一括リフレッシュ部２７０６、および分散リフレッ
シュ部２７０７に供給される。
ッシュされるタイミングより前の１２フレームの間にＧ
ＯＢ内の被写体に動きがないかを、動き情報管理部２７
０４が符号化部２７０８から得られる情報に基づいて１
フレーム毎に判別している。判別の方法としては、ＧＯ
Ｂ内の各ＭＢＬＫの動きベクトルの大きさと設定された
しきい値を比較して、しきい値以上の動きベクトルを持
つＭＢＬＫが所定数以上あればＧＯＢ内の被写体に動き
があるとする方法を用いることができる。また、これに
代えて、１２フレームの各フレームの符号量を設定され
たしきい値と比較し、符号量がしきい値を越えるフレー
ムが１フレームでもあれば動きありとすることにより、
ＧＯＢ内の被写体の動きの有無を判別してもよい。この
ような動きの判別結果に基づき、モード選択部２７０５
が、リフレッシュモードとして、一括リフレッシュモー
ドと分散リフレッシュモードのうちの一方を選択する。
ＧＯＢ内の被写体に動きのある場合は、モード選択部が
一括リフレッシュモードを選択し、一括リフレッシュ部
２７０６が符号化部２７０８におけるセレクタを制御す
ることにより、そのＧＯＢに属する全てのＭＢＬＫを一
度に（つまり同一フレームに対する符号化過程におい
て）フレーム内符号化する、すなわち、そのＧＯＢに対
し一括リフレッシュを行う。ＧＯＢ内の被写体に動きの
ない場合は、モード選択部が分散リフレッシュモードを
選択し、分散リフレッシュ部２７０７が符号化部２７０
８におけるセレクタを制御することにより、そのＧＯＢ
内の各ＭＢＬＫに対しＭＢＬＫ毎に異なるタイミングで
（つまりＭＢＬＫ毎に異なるフレームに対する符号化過
程において）フレーム内符号化をする、すなわち、その
ＧＯＢに対し分散リフレッシュを行う。なお、このよう
なリフレッシュ（フレーム内符号化）を含む符号化のた
めのタイミング情報は、符号化タイミング管理部２７０
３によって生成され、符号化部２７０８およびリフレッ
シュ周期管理部２７０２に供給される。また、リフレッ
シュ周期を示すタイミング情報は、リフレッシュ周期管
理部２７０２により生成され、動き情報管理部２７０
４、一括リフレッシュ部２７０６、および分散リフレッ
シュ部２７０７に供給される。
【０１１７】画像符号化装置２７０１における上述のリ
フレッシュ動作を更に詳しく説明する。１２フレームの
間にＧＯＢ内の被写体に動きがあったＧＯＢは次のフレ
ームでＧＯＢに属する全てのＭＢＬＫをフレーム内符号
化する（一括リフレッシュ）。さらに、このフレームを
起点として以下１２フレームの動きの判別を始める。１
２フレームの間にＧＯＢ内の被写体に動きがなかったＧ
ＯＢは次のフレームよりＭＢＬＫ毎に異なるタイミング
でフレーム内符号化によるリフレッシュを行う（分散リ
フレッシュ）。どのようにタイミングを異ならせるかは
限定するものではないが、例えば１フレーム当たり３つ
のＭＢＬＫをフレーム内符号化していけば、１１フレー
ムでＧＯＢ内を一巡できる。さらに、これと並行して１
２フレームの動きの判別を行う。図１では最初の１２フ
レームの間にＧＯＢ１からＧＯＢ４とＧＯＢ９からＧＯ
Ｂ１２とで被写体に動きがあった場合の動作を示してい
る。図１において斜線を施した部分はフレーム内符号化
をしているブロックである。１２フレーム経過した時点
から１フレーム毎にＧＯＢ１から順にＧＯＢ４まではＧ
ＯＢ単位のリフレッシュを行っているが（ｔ＝１３〜ｔ
＝１６）、ＧＯＢ５には動きがなかったため、ＧＯＢ５
の分散リフレッシュを開始し、ＭＢＬＫ１から３をフレ
ーム内符号化する（ｔ＝１７）。次のタイミングではＧ
ＯＢ５はＭＢＬＫ４からＭＢＬＫ６をフレーム内符号化
する。同じくＧＯＢ６には動きがなかったため、ＧＯＢ
６の分散リフレッシュを開始し、ＭＢＬＫ１から３をフ
レーム内符号化する（ｔ＝１８）。以下同様の動作を繰
り返す。ＧＯＢ５にはｔ＝２０において動きが検出され
たため、ｔ＝２９ではＧＯＢ５に対し一括リフレッシュ
が行われている。
フレッシュ動作を更に詳しく説明する。１２フレームの
間にＧＯＢ内の被写体に動きがあったＧＯＢは次のフレ
ームでＧＯＢに属する全てのＭＢＬＫをフレーム内符号
化する（一括リフレッシュ）。さらに、このフレームを
起点として以下１２フレームの動きの判別を始める。１
２フレームの間にＧＯＢ内の被写体に動きがなかったＧ
ＯＢは次のフレームよりＭＢＬＫ毎に異なるタイミング
でフレーム内符号化によるリフレッシュを行う（分散リ
フレッシュ）。どのようにタイミングを異ならせるかは
限定するものではないが、例えば１フレーム当たり３つ
のＭＢＬＫをフレーム内符号化していけば、１１フレー
ムでＧＯＢ内を一巡できる。さらに、これと並行して１
２フレームの動きの判別を行う。図１では最初の１２フ
レームの間にＧＯＢ１からＧＯＢ４とＧＯＢ９からＧＯ
Ｂ１２とで被写体に動きがあった場合の動作を示してい
る。図１において斜線を施した部分はフレーム内符号化
をしているブロックである。１２フレーム経過した時点
から１フレーム毎にＧＯＢ１から順にＧＯＢ４まではＧ
ＯＢ単位のリフレッシュを行っているが（ｔ＝１３〜ｔ
＝１６）、ＧＯＢ５には動きがなかったため、ＧＯＢ５
の分散リフレッシュを開始し、ＭＢＬＫ１から３をフレ
ーム内符号化する（ｔ＝１７）。次のタイミングではＧ
ＯＢ５はＭＢＬＫ４からＭＢＬＫ６をフレーム内符号化
する。同じくＧＯＢ６には動きがなかったため、ＧＯＢ
６の分散リフレッシュを開始し、ＭＢＬＫ１から３をフ
レーム内符号化する（ｔ＝１８）。以下同様の動作を繰
り返す。ＧＯＢ５にはｔ＝２０において動きが検出され
たため、ｔ＝２９ではＧＯＢ５に対し一括リフレッシュ
が行われている。
【０１１８】図２は、画像符号化装置２７０１で使用さ
れている画像符号化方法を示すフローチャートであっ
て、一つのＧＯＢに対する上述の動作を示している。図
２において、ＲＣＯＵＮＴはリフレッシュ周期のカウン
ト値である。ＭＯＶはＧＯＢ内の被写体の動きの有無を
示すフラグであって、“１”は動きありを示し、“０”
は動きなしを示している。ＦＭＢＬＫはＭＢＬＫ毎に異
なるタイミングでフレーム内符号化するか否かを示すフ
ラグすなわち分散リフレッシュを行うか否かを示すフラ
グであって、“１”は分散リフレッシュを行うことを示
し、“０”は分散リフレッシュを行わないことを示して
いる。ＭＢＬＫＧ（Ｉ）はＧＯＢ内のＭＢＬＫをＩ＝１
〜Ｋまでのタイミングに分類して１フレーム毎にフレー
ム内符号化するグループを示している。それらは、ＭＢ
ＬＫ番号と対応していてもよいが、視覚上リフレッシュ
ブロックが最も目立ちにくい順番にリフレッシュして行
けるように対応づける。
れている画像符号化方法を示すフローチャートであっ
て、一つのＧＯＢに対する上述の動作を示している。図
２において、ＲＣＯＵＮＴはリフレッシュ周期のカウン
ト値である。ＭＯＶはＧＯＢ内の被写体の動きの有無を
示すフラグであって、“１”は動きありを示し、“０”
は動きなしを示している。ＦＭＢＬＫはＭＢＬＫ毎に異
なるタイミングでフレーム内符号化するか否かを示すフ
ラグすなわち分散リフレッシュを行うか否かを示すフラ
グであって、“１”は分散リフレッシュを行うことを示
し、“０”は分散リフレッシュを行わないことを示して
いる。ＭＢＬＫＧ（Ｉ）はＧＯＢ内のＭＢＬＫをＩ＝１
〜Ｋまでのタイミングに分類して１フレーム毎にフレー
ム内符号化するグループを示している。それらは、ＭＢ
ＬＫ番号と対応していてもよいが、視覚上リフレッシュ
ブロックが最も目立ちにくい順番にリフレッシュして行
けるように対応づける。
【０１１９】本実施形態における画像符号化では、まず
ステップ２０１で各変数およびフラグの初期化を行う。
すなわち、リフレッシュ周期管理部２７０２がＲＣＯＵ
ＮＴを“１”に初期化し、モード選択部２７０５がＭＯ
Ｖを“０”に、Ｉを“１”に、ＦＭＢＬＫを“０”にそ
れぞれ初期化する。次に、ステップ２０２でリフレッシ
ュ周期管理部２７０２がリフレッシュタイミングか否か
を判断する。この結果、リフレッシュタイミングの場
合、ステップ２０３でモード選択部２７０５がフラグＭ
ＯＶに基づき動きがあったか否かを判定する。このフラ
グＭＯＶは、後述のように動き情報管理部２７０４によ
ってセットされる。
ステップ２０１で各変数およびフラグの初期化を行う。
すなわち、リフレッシュ周期管理部２７０２がＲＣＯＵ
ＮＴを“１”に初期化し、モード選択部２７０５がＭＯ
Ｖを“０”に、Ｉを“１”に、ＦＭＢＬＫを“０”にそ
れぞれ初期化する。次に、ステップ２０２でリフレッシ
ュ周期管理部２７０２がリフレッシュタイミングか否か
を判断する。この結果、リフレッシュタイミングの場
合、ステップ２０３でモード選択部２７０５がフラグＭ
ＯＶに基づき動きがあったか否かを判定する。このフラ
グＭＯＶは、後述のように動き情報管理部２７０４によ
ってセットされる。
【０１２０】ステップ２０３でＧＯＢに動きがあったと
判定された場合（ＭＯＶ＝１の場合）には、モード選択
部２７０５が一括リフレッシュモードを選択する。この
選択に応じて一括リフレッシュ部２７０６が、ステップ
２０４でＧＯＢに対し一括リフレッシュ（「ＧＯＢリフ
レッシュ」ともいう）を行い、ステップ２０５でモード
選択部２７０５がＭＯＶとＦＭＢＬＫのリセットを行
う。その後、ステップ２０６でリフレッシュ周期管理部
２７０２がＲＣＯＮＴを“１”に初期化し、次のフレー
ムに対する符号化を行うべく、ステップ２０２に戻っ
て、再び、リフレッシュ周期か否かを判定する。
判定された場合（ＭＯＶ＝１の場合）には、モード選択
部２７０５が一括リフレッシュモードを選択する。この
選択に応じて一括リフレッシュ部２７０６が、ステップ
２０４でＧＯＢに対し一括リフレッシュ（「ＧＯＢリフ
レッシュ」ともいう）を行い、ステップ２０５でモード
選択部２７０５がＭＯＶとＦＭＢＬＫのリセットを行
う。その後、ステップ２０６でリフレッシュ周期管理部
２７０２がＲＣＯＮＴを“１”に初期化し、次のフレー
ムに対する符号化を行うべく、ステップ２０２に戻っ
て、再び、リフレッシュ周期か否かを判定する。
【０１２１】ステップ２０３でＧＯＢに動きがなかった
と判定された場合（ＭＯＶ＝０の場合）には、ステップ
２０７でモード選択部２７０５がＦＭＢＬＫをセットし
て分散リフレッシュモードを選択し、Ｉを“１”に設定
する。このモード選択に応じて分散リフレッシュ部２７
０７が、ステップ２０８でＭＢＬＫＧ（１）に属するＭ
ＢＬＫをフレーム内符号化し、Ｉをインクリメントす
る。次のステップ２０９では、符号化部２７０８がＧＯ
Ｂ内のＭＢＬＫＧ（Ｉ）以外のブロックの符号化を行
う。この符号化後に、ステップ２１０で動き情報管理部
２７０４が、そのフレームの符号化時にＧＯＢ内に動き
があったか否かを判断し、動きがあった場合にはステッ
プ２１１においてＭＯＶをセットする。その後、ステッ
プ２０６でリフレッシュ周期管理部２７０２がＲＣＯＮ
Ｔを“１”に初期化し、次のフレームに対する符号化を
行うべく、ステップ２０２に戻って、再び、リフレッシ
ュ周期か否かを判定する。
と判定された場合（ＭＯＶ＝０の場合）には、ステップ
２０７でモード選択部２７０５がＦＭＢＬＫをセットし
て分散リフレッシュモードを選択し、Ｉを“１”に設定
する。このモード選択に応じて分散リフレッシュ部２７
０７が、ステップ２０８でＭＢＬＫＧ（１）に属するＭ
ＢＬＫをフレーム内符号化し、Ｉをインクリメントす
る。次のステップ２０９では、符号化部２７０８がＧＯ
Ｂ内のＭＢＬＫＧ（Ｉ）以外のブロックの符号化を行
う。この符号化後に、ステップ２１０で動き情報管理部
２７０４が、そのフレームの符号化時にＧＯＢ内に動き
があったか否かを判断し、動きがあった場合にはステッ
プ２１１においてＭＯＶをセットする。その後、ステッ
プ２０６でリフレッシュ周期管理部２７０２がＲＣＯＮ
Ｔを“１”に初期化し、次のフレームに対する符号化を
行うべく、ステップ２０２に戻って、再び、リフレッシ
ュ周期か否かを判定する。
【０１２２】ステップ２０２でリフレッシュタイミング
でないと判定された場合には、ステップ２１２でモード
選択部２７０５がフラグＦＭＢＬＫに基づき分散リフレ
ッシュモードか否かを判定する。分散リフレッシュモー
ドの場合（ＦＭＢＬＫ＝１の場合）には、ステップ２１
３において分散リフレッシュ部２７０７が、ＭＢＬＫＧ
（Ｉ）が示すＭＢＬＫグループをフレーム内符号化し、
Ｉをインクリメントする。次のステップ２１４では、符
号化部２７０８がＧＯＢ内のＭＢＬＫＧ（Ｉ）以外のブ
ロックの符号化を行う。この符号化後に、ステップ２１
５で動き情報管理部２７０４が、そのフレームの符号化
時にＧＯＢ内に動きがあったか否かを判断し、動きがあ
った場合にはステップ２１６においてＭＯＶをセットす
る。その後、ステップ２１７でリフレッシュ周期管理部
２７０２がＲＣＯＵＮＴをインクリメントし、次のフレ
ームに対する符号化を行うべく、ステップ２０２に戻っ
て、再び、リフレッシュ周期か否かを判定する。
でないと判定された場合には、ステップ２１２でモード
選択部２７０５がフラグＦＭＢＬＫに基づき分散リフレ
ッシュモードか否かを判定する。分散リフレッシュモー
ドの場合（ＦＭＢＬＫ＝１の場合）には、ステップ２１
３において分散リフレッシュ部２７０７が、ＭＢＬＫＧ
（Ｉ）が示すＭＢＬＫグループをフレーム内符号化し、
Ｉをインクリメントする。次のステップ２１４では、符
号化部２７０８がＧＯＢ内のＭＢＬＫＧ（Ｉ）以外のブ
ロックの符号化を行う。この符号化後に、ステップ２１
５で動き情報管理部２７０４が、そのフレームの符号化
時にＧＯＢ内に動きがあったか否かを判断し、動きがあ
った場合にはステップ２１６においてＭＯＶをセットす
る。その後、ステップ２１７でリフレッシュ周期管理部
２７０２がＲＣＯＵＮＴをインクリメントし、次のフレ
ームに対する符号化を行うべく、ステップ２０２に戻っ
て、再び、リフレッシュ周期か否かを判定する。
【０１２３】本実施形態における画像符号化では、以上
のステップ２０１〜２１７の動作をＧＯＢ毎に行う。
のステップ２０１〜２１７の動作をＧＯＢ毎に行う。
【０１２４】以上のように本実施形態によれば、動きの
ないブロック群のフレーム内符号化によるリフレッシュ
ブロックは、１画面をリフレッシュするリフレッシュ周
期内の伝送フレーム数にオーバーヘッドをともなうこと
なく分割される。このため、１フレーム当たりのフレー
ム内符号化ブロック数が減少し、より小さい量子化ステ
ップでの量子化が可能となる。また、ブロック群の周期
的な動きがリフレッシュ周期内に分散されるため、静止
した画像領域において妨害ラインをなくすことができ
る。さらに、動きのないブロック群に対しては分散リフ
レッシュが行われるため、動きがあったブロック群の動
きがなくなった時点で最後にブロック群としてリフレッ
シュしたブロックに伝送エラーが生じた場合にもこれを
リフレッシュすることが可能となる。
ないブロック群のフレーム内符号化によるリフレッシュ
ブロックは、１画面をリフレッシュするリフレッシュ周
期内の伝送フレーム数にオーバーヘッドをともなうこと
なく分割される。このため、１フレーム当たりのフレー
ム内符号化ブロック数が減少し、より小さい量子化ステ
ップでの量子化が可能となる。また、ブロック群の周期
的な動きがリフレッシュ周期内に分散されるため、静止
した画像領域において妨害ラインをなくすことができ
る。さらに、動きのないブロック群に対しては分散リフ
レッシュが行われるため、動きがあったブロック群の動
きがなくなった時点で最後にブロック群としてリフレッ
シュしたブロックに伝送エラーが生じた場合にもこれを
リフレッシュすることが可能となる。
【０１２５】なお、動きがあったブロック群の動きがな
くなった時点で最後にブロック群としてリフレッシュし
たブロックに伝送エラーが生じた場合に一度にこれをリ
フレッシュするために、動きがあったブロック群の動き
がなくなった時点で少なくとも一度はブロック群を一度
にリフレッシュするようにしてもよい。図３は、この場
合の画像符号化方法を一つのＧＯＢについて示すフロー
チャートであって、図２に示したフローチャートに対応
するものである。この画像符号化方法では、フラグＲＥ
Ｆおよびカウント値を示す変数ｍｓが新たに導入され
て、ステップ３０１でＲＣＯＵＮＴ，ＭＯＶ，Ｉ，ＭＢ
ＬＫとともに初期化される。すなわち、ステップ３０１
でモード選択部２７０５がＲＥＦ＝０，ｍｓ＝ＭＳと設
定する（ただし、ＭＳは予め決められた自然数であ
る）。そして、一度にＧＯＢリフレッシュをしたブロッ
ク群すなわち一括リフレッシュをしたブロック群につい
ては、モード選択部２７０５は、ステップ３０２でＲＥ
Ｆ＝１、ｍｓ＝ＭＳとし、ステップ２０３で動きなしと
判定されても、ステップ３０３でフラグＲＥＦに基づき
一括リフレッシュモードを選択する。この選択に応じ
て、ステップ３０４で一括リフレッシュ部２７０６がＧ
ＯＢリフレッシュを行う。これは、モード選択部２７０
５が実行するステップ３０５、３０６、３０７でＲＥＦ
＝０になるまで、ＭＳ回繰り返される。さらにこの場
合、ブロック毎に異なるタイミングでリフレッシュする
頻度を減らして分散リフレッシュ部２７０７がＴより大
きな周期Ｔ’でブロック群のリフレッシュを完了するよ
うにしてもよい。このようにすれば、静止画の続くブロ
ック群のフレーム内符号化ブロック数を減らすことによ
り伝送エラーの影響を少なく抑えつつ符号化効率を向上
させることができる。
くなった時点で最後にブロック群としてリフレッシュし
たブロックに伝送エラーが生じた場合に一度にこれをリ
フレッシュするために、動きがあったブロック群の動き
がなくなった時点で少なくとも一度はブロック群を一度
にリフレッシュするようにしてもよい。図３は、この場
合の画像符号化方法を一つのＧＯＢについて示すフロー
チャートであって、図２に示したフローチャートに対応
するものである。この画像符号化方法では、フラグＲＥ
Ｆおよびカウント値を示す変数ｍｓが新たに導入され
て、ステップ３０１でＲＣＯＵＮＴ，ＭＯＶ，Ｉ，ＭＢ
ＬＫとともに初期化される。すなわち、ステップ３０１
でモード選択部２７０５がＲＥＦ＝０，ｍｓ＝ＭＳと設
定する（ただし、ＭＳは予め決められた自然数であ
る）。そして、一度にＧＯＢリフレッシュをしたブロッ
ク群すなわち一括リフレッシュをしたブロック群につい
ては、モード選択部２７０５は、ステップ３０２でＲＥ
Ｆ＝１、ｍｓ＝ＭＳとし、ステップ２０３で動きなしと
判定されても、ステップ３０３でフラグＲＥＦに基づき
一括リフレッシュモードを選択する。この選択に応じ
て、ステップ３０４で一括リフレッシュ部２７０６がＧ
ＯＢリフレッシュを行う。これは、モード選択部２７０
５が実行するステップ３０５、３０６、３０７でＲＥＦ
＝０になるまで、ＭＳ回繰り返される。さらにこの場
合、ブロック毎に異なるタイミングでリフレッシュする
頻度を減らして分散リフレッシュ部２７０７がＴより大
きな周期Ｔ’でブロック群のリフレッシュを完了するよ
うにしてもよい。このようにすれば、静止画の続くブロ
ック群のフレーム内符号化ブロック数を減らすことによ
り伝送エラーの影響を少なく抑えつつ符号化効率を向上
させることができる。
【０１２６】なお、上記第１の実施形態では、ＧＯＢ内
の被写体に動きがないかどうかの判別に、ＧＯＢ内の各
ＭＢＬＫの動きベクトルの大きさと設定したしきい値と
を比較し、しきい値以上の動きベクトルを持つＭＢＬＫ
が設定数以上あれば、ＧＯＢ内の被写体に動きがあると
する判別方法、または、１２フレームの各フレームの符
号量を設定したしきい値と比較し、符号量がしきい値を
越えるフレームが１フレームでもあれば動きありとする
判別方法を使用するものとしているが、これらに代え
て、ＧＯＢ内の各ＭＢＬＫの動きベクトルの絶対値の総
量と設定したしきい値とを比較し、しきい値以上の場
合、ＧＯＢ内の被写体に動きがあるとする判別方法を用
いてもよい。
の被写体に動きがないかどうかの判別に、ＧＯＢ内の各
ＭＢＬＫの動きベクトルの大きさと設定したしきい値と
を比較し、しきい値以上の動きベクトルを持つＭＢＬＫ
が設定数以上あれば、ＧＯＢ内の被写体に動きがあると
する判別方法、または、１２フレームの各フレームの符
号量を設定したしきい値と比較し、符号量がしきい値を
越えるフレームが１フレームでもあれば動きありとする
判別方法を使用するものとしているが、これらに代え
て、ＧＯＢ内の各ＭＢＬＫの動きベクトルの絶対値の総
量と設定したしきい値とを比較し、しきい値以上の場
合、ＧＯＢ内の被写体に動きがあるとする判別方法を用
いてもよい。
【０１２７】（第２の実施形態）次に、本発明の第２の
実施形態に係る画像符号化方法およびその画像符号化方
法に基づく画像符号化装置について説明する。この画像
符号化装置の構成は、第１の実施形態における画像符号
化装置２７０１と同様であって、図１３に示す通りであ
る。本実施形態における画像符号化装置のうち第１の実
施形態における画像符号化装置２７０１と同一の部分に
ついては、同一の符号を付して説明を省略する。
実施形態に係る画像符号化方法およびその画像符号化方
法に基づく画像符号化装置について説明する。この画像
符号化装置の構成は、第１の実施形態における画像符号
化装置２７０１と同様であって、図１３に示す通りであ
る。本実施形態における画像符号化装置のうち第１の実
施形態における画像符号化装置２７０１と同一の部分に
ついては、同一の符号を付して説明を省略する。
【０１２８】従来の技術の説明において述べたように、
一度にフレーム内符号化でリフレッシュするブロック群
のブロック数を半分にしても、２フレームあるいは３フ
レームに渡ってフレーム内符号化を行うブロックあるい
は２フレームあるいは３フレームに渡って動き補償を禁
止するブロックが増えるため、符号化効率が低下し、発
生符号量はさほど減少しない。つまり、１画面を複数の
ブロック群に分割して１フレーム毎に一つのブロック群
をフレーム内符号化でリフレッシュすることにより１フ
レーム当たりの符号量の増加を少なくするとしても、動
き予測によるミスマッチの伝播を考慮すると符号量の増
加を極端に少なくすることは不可能であった。そこで、
本発明の第２の実施形態では、リフレッシュ周期管理部
２７０２が、一括リフレッシュを行うブロック群を含ま
ないフレームをリフレッシュ周期内に入れるように、一
括リフレッシュ部２７０６によるリフレッシュのタイミ
ングを管理する。これにより、フレーム間差分符号化に
よって符号化効率を向上させ、画質を向上させる。ここ
でも、ＩＴＵで勧告されている、Ｈ．２６１または、
Ｈ．２６３のＣＩＦ画像の場合を例にあげて説明する。
例えば、リフレッシュ周期Ｔ＝３３フレームとしてその
中の連続した１２フレームでＧＯＢ単位のリフレッシュ
を行うことにすれば、ＧＯＢ単位のリフレッシュを行わ
ないフレームは２１フレームとなり、この間は符号化効
率が高く、符号量を一定にして考えると効率向上分だけ
画質を高めることができる。また、リフレッシュは約１
秒で行える。
一度にフレーム内符号化でリフレッシュするブロック群
のブロック数を半分にしても、２フレームあるいは３フ
レームに渡ってフレーム内符号化を行うブロックあるい
は２フレームあるいは３フレームに渡って動き補償を禁
止するブロックが増えるため、符号化効率が低下し、発
生符号量はさほど減少しない。つまり、１画面を複数の
ブロック群に分割して１フレーム毎に一つのブロック群
をフレーム内符号化でリフレッシュすることにより１フ
レーム当たりの符号量の増加を少なくするとしても、動
き予測によるミスマッチの伝播を考慮すると符号量の増
加を極端に少なくすることは不可能であった。そこで、
本発明の第２の実施形態では、リフレッシュ周期管理部
２７０２が、一括リフレッシュを行うブロック群を含ま
ないフレームをリフレッシュ周期内に入れるように、一
括リフレッシュ部２７０６によるリフレッシュのタイミ
ングを管理する。これにより、フレーム間差分符号化に
よって符号化効率を向上させ、画質を向上させる。ここ
でも、ＩＴＵで勧告されている、Ｈ．２６１または、
Ｈ．２６３のＣＩＦ画像の場合を例にあげて説明する。
例えば、リフレッシュ周期Ｔ＝３３フレームとしてその
中の連続した１２フレームでＧＯＢ単位のリフレッシュ
を行うことにすれば、ＧＯＢ単位のリフレッシュを行わ
ないフレームは２１フレームとなり、この間は符号化効
率が高く、符号量を一定にして考えると効率向上分だけ
画質を高めることができる。また、リフレッシュは約１
秒で行える。
【０１２９】さらに本実施形態では、分散リフレッシュ
部２７０７は、第１の実施形態で説明したＭＢＬＫ毎に
異なるタイミングで符号化するＧＯＢのリフレッシュを
リフレッシュ周期内に分散させ、これにより符号化効率
を向上させる。第１の実施形態では１１フレームでＧＯ
ＢのＭＢＬＫをリフレッシュするために、１フレーム当
たり３ＭＢＬＫをフレーム内符号化しているが、本実施
形態では、例えば上記のようにリフレッシュ周期を３３
フレームとしている場合には、３３フレームでＧＯＢの
ＭＢＬＫをリフレッシュすればよいため、１フレーム当
たり１ＭＢＬＫをフレーム内符号化すればよい。このよ
うにリフレッシュ周期を３３フレームとした場合におけ
る本実施形態の画像符号化方法では、図４に示すように
してリフレッシュ動作が行われる。この図４は、第１の
実施形態における図１に対応しており、図４において斜
線を施した部分はフレーム内符号化をしているブロック
（ＭＢＬＫ）である。
部２７０７は、第１の実施形態で説明したＭＢＬＫ毎に
異なるタイミングで符号化するＧＯＢのリフレッシュを
リフレッシュ周期内に分散させ、これにより符号化効率
を向上させる。第１の実施形態では１１フレームでＧＯ
ＢのＭＢＬＫをリフレッシュするために、１フレーム当
たり３ＭＢＬＫをフレーム内符号化しているが、本実施
形態では、例えば上記のようにリフレッシュ周期を３３
フレームとしている場合には、３３フレームでＧＯＢの
ＭＢＬＫをリフレッシュすればよいため、１フレーム当
たり１ＭＢＬＫをフレーム内符号化すればよい。このよ
うにリフレッシュ周期を３３フレームとした場合におけ
る本実施形態の画像符号化方法では、図４に示すように
してリフレッシュ動作が行われる。この図４は、第１の
実施形態における図１に対応しており、図４において斜
線を施した部分はフレーム内符号化をしているブロック
（ＭＢＬＫ）である。
【０１３０】図５は、本実施形態に係る画像符号化方法
を一つのＧＯＢについて示すフローチャートである。こ
のフローチャートでは、図２に示したフロチャートのス
テップ２０２を、リフレッシュ周期のカウント値ＲＣＯ
ＵＮＴが“３３”に等しいか否かを判定するステップ２
０２ｂに代えている。これによりリフレッシュ周期管理
部２７０２は、一括リフレッシュ部２７０６による一括
リフレッシュおよび分散リフレッシュ部２７０７による
分散リフレッシュのタイミングを管理して、リフレッシ
ュ周期を３３フレームとしている。この場合、ＭＢＬＫ
Ｇ（Ｉ）はそれぞれ一つのＭＢＬＫとなるが、ＭＢＬＫ
の番号とは異なる順番にマッピングすることによりリフ
レッシュを目立たなくさせてもよい。以上のように本実
施形態によれば、一括リフレッシュを行うブロック群を
含まないフレームにおいては、フレーム内符号化するブ
ロックの数がブロック群のブロック数より減少するた
め、能率の高い映像符号化とフレーム内符号化によるリ
フレッシュの双方の効果を享受することができる。
を一つのＧＯＢについて示すフローチャートである。こ
のフローチャートでは、図２に示したフロチャートのス
テップ２０２を、リフレッシュ周期のカウント値ＲＣＯ
ＵＮＴが“３３”に等しいか否かを判定するステップ２
０２ｂに代えている。これによりリフレッシュ周期管理
部２７０２は、一括リフレッシュ部２７０６による一括
リフレッシュおよび分散リフレッシュ部２７０７による
分散リフレッシュのタイミングを管理して、リフレッシ
ュ周期を３３フレームとしている。この場合、ＭＢＬＫ
Ｇ（Ｉ）はそれぞれ一つのＭＢＬＫとなるが、ＭＢＬＫ
の番号とは異なる順番にマッピングすることによりリフ
レッシュを目立たなくさせてもよい。以上のように本実
施形態によれば、一括リフレッシュを行うブロック群を
含まないフレームにおいては、フレーム内符号化するブ
ロックの数がブロック群のブロック数より減少するた
め、能率の高い映像符号化とフレーム内符号化によるリ
フレッシュの双方の効果を享受することができる。
【０１３１】（第３の実施形態）次に、本発明の第３の
実施形態に係る画像符号化方法およびその画像符号化方
法に基づく画像符号化装置について説明する。この画像
符号化装置の構成は、第１の実施形態における画像符号
化装置２７０１と同様であって、図１３に示す通りであ
る。本実施形態における画像符号化装置のうち第１の実
施形態における画像符号化装置２７０１と同一の部分に
ついては、同一の符号を付して説明を省略する。
実施形態に係る画像符号化方法およびその画像符号化方
法に基づく画像符号化装置について説明する。この画像
符号化装置の構成は、第１の実施形態における画像符号
化装置２７０１と同様であって、図１３に示す通りであ
る。本実施形態における画像符号化装置のうち第１の実
施形態における画像符号化装置２７０１と同一の部分に
ついては、同一の符号を付して説明を省略する。
【０１３２】第１の実施形態や第２の実施形態では、或
るブロック群に対し分散リフレッシュを行っている間に
そのブロック群の被写体に動きが検出された場合でも、
分散リフレッシュを中断しない。例えば図１のｔ＝２０
においてＧＯＢ５に動きが検出されても、それ以降もＧ
ＯＢ５はブロック毎に異なるタイミングでリフレッシュ
を行っている。この場合、リフレッシュ周期の終了時点
（ｔ＝２９）においてブロック群は一度にリフレッシュ
される。そこで、本実施形態では、分散リフレッシュを
行っている間に動き情報管理部２７０４がそのブロック
群の被写体に動きを検出した場合には、モード選択部２
７０５が分散リフレッシュ部２７０７に分散リフレッシ
ュを中断させている。
るブロック群に対し分散リフレッシュを行っている間に
そのブロック群の被写体に動きが検出された場合でも、
分散リフレッシュを中断しない。例えば図１のｔ＝２０
においてＧＯＢ５に動きが検出されても、それ以降もＧ
ＯＢ５はブロック毎に異なるタイミングでリフレッシュ
を行っている。この場合、リフレッシュ周期の終了時点
（ｔ＝２９）においてブロック群は一度にリフレッシュ
される。そこで、本実施形態では、分散リフレッシュを
行っている間に動き情報管理部２７０４がそのブロック
群の被写体に動きを検出した場合には、モード選択部２
７０５が分散リフレッシュ部２７０７に分散リフレッシ
ュを中断させている。
【０１３３】図６は、本実施形態に係る画像符号化方法
を一つのＧＯＢについて示すフローチャートである。こ
のフローチャートでは、図５に示したフロチャートのス
テップ２１１とステップ２１６を、ステップ６０１とス
テップ６０２にそれぞれ変更している。これらステップ
６０１とステップ６０２では、動きが検出された際に動
き情報管理部２７０４がＦＭＢＬＫをリセットしてい
る。これにより、分散リフレッシュ部２７０７による分
散リフレッシュが中断される（ステップ２１２参照）。
を一つのＧＯＢについて示すフローチャートである。こ
のフローチャートでは、図５に示したフロチャートのス
テップ２１１とステップ２１６を、ステップ６０１とス
テップ６０２にそれぞれ変更している。これらステップ
６０１とステップ６０２では、動きが検出された際に動
き情報管理部２７０４がＦＭＢＬＫをリセットしてい
る。これにより、分散リフレッシュ部２７０７による分
散リフレッシュが中断される（ステップ２１２参照）。
【０１３４】図７は、このような本実施形態におけるリ
フレッシュ動作の一例を示す図である。図７に示すよう
にｔ＝４４でＧＯＢ５に動きが検出された場合、分散リ
フレッシュ部２７０７は次のフレーム以降においてＧＯ
Ｂ５でブロック毎に異なるタイミングでリフレッシュす
ることを中断し、ＧＯＢ５の分散リフレッシュが開始さ
れた時点ｔ＝３８を起点にして３３フレームの期間が経
過した後の時点ｔ＝７１において一括リフレッシュ部２
７０６がＧＯＢ５を一度にリフレッシュしている。
フレッシュ動作の一例を示す図である。図７に示すよう
にｔ＝４４でＧＯＢ５に動きが検出された場合、分散リ
フレッシュ部２７０７は次のフレーム以降においてＧＯ
Ｂ５でブロック毎に異なるタイミングでリフレッシュす
ることを中断し、ＧＯＢ５の分散リフレッシュが開始さ
れた時点ｔ＝３８を起点にして３３フレームの期間が経
過した後の時点ｔ＝７１において一括リフレッシュ部２
７０６がＧＯＢ５を一度にリフレッシュしている。
【０１３５】以上のように本実施形態によれば、分散リ
フレッシュが開始されてから時間Ｔが経過した後に一括
リフレッシュが行われるブロック群のブロックを、動き
が検出されてからはその一括リフレッシュの時点まで分
散リフレッシュすることがなくなるため、符号化効率が
より向上する。
フレッシュが開始されてから時間Ｔが経過した後に一括
リフレッシュが行われるブロック群のブロックを、動き
が検出されてからはその一括リフレッシュの時点まで分
散リフレッシュすることがなくなるため、符号化効率が
より向上する。
【０１３６】（第４の実施形態）次に、本発明の第４の
実施形態に係る画像符号化方法およびその画像符号化方
法に基づく画像符号化装置について説明する。この画像
符号化装置の構成は、第１の実施形態における画像符号
化装置２７０１と同様であって、図１３に示す通りであ
る。本実施形態における画像符号化装置のうち第１の実
施形態における画像符号化装置２７０１と同一の部分に
ついては、同一の符号を付して説明を省略する。
実施形態に係る画像符号化方法およびその画像符号化方
法に基づく画像符号化装置について説明する。この画像
符号化装置の構成は、第１の実施形態における画像符号
化装置２７０１と同様であって、図１３に示す通りであ
る。本実施形態における画像符号化装置のうち第１の実
施形態における画像符号化装置２７０１と同一の部分に
ついては、同一の符号を付して説明を省略する。
【０１３７】第３の実施形態では、一括リフレッシュを
行ったブロック群に伝送エラーが生じ、かつ当該ブロッ
ク群の領域の被写体の動きがなくなった場合、当該ブロ
ック群に対し、その一括リフレッシュの時点から時間Ｔ
が経過した後には一括リフレッシュが行われず、かつ分
散リフレッシュが始まるのはそこから１リフレッシュ周
期先となる。よって、最悪の場合にはエラーの影響はリ
フレッシュ周期の２倍の時間残ることになる。そこで本
実施形態では、各ブロック群毎に被写体の動きの有無の
判断を開始した時点から分散リフレッシュ部２７０７が
分散リフレッシュを行い、動き情報管理部２７０４は、
これと並行して時間Ｔが経過するまで１フレームを符号
化する毎に各ブロック群毎に被写体の動きの有無を判断
し、被写体に予め決められたしきい値以上の動きを検出
したブロック群に対しては、モード選択部２７０５が分
散リフレッシュ部２７０７に分散リフレッシュをその時
点で中断させ、分散リフレッシュを開始した時点から時
間Ｔが経過した後に一括リフレッシュ部２７０６が当該
ブロック群を一括リフレッシュすることとしている。
行ったブロック群に伝送エラーが生じ、かつ当該ブロッ
ク群の領域の被写体の動きがなくなった場合、当該ブロ
ック群に対し、その一括リフレッシュの時点から時間Ｔ
が経過した後には一括リフレッシュが行われず、かつ分
散リフレッシュが始まるのはそこから１リフレッシュ周
期先となる。よって、最悪の場合にはエラーの影響はリ
フレッシュ周期の２倍の時間残ることになる。そこで本
実施形態では、各ブロック群毎に被写体の動きの有無の
判断を開始した時点から分散リフレッシュ部２７０７が
分散リフレッシュを行い、動き情報管理部２７０４は、
これと並行して時間Ｔが経過するまで１フレームを符号
化する毎に各ブロック群毎に被写体の動きの有無を判断
し、被写体に予め決められたしきい値以上の動きを検出
したブロック群に対しては、モード選択部２７０５が分
散リフレッシュ部２７０７に分散リフレッシュをその時
点で中断させ、分散リフレッシュを開始した時点から時
間Ｔが経過した後に一括リフレッシュ部２７０６が当該
ブロック群を一括リフレッシュすることとしている。
【０１３８】図８は、本実施形態に係る画像符号化方法
を一つのＧＯＢについて示すフローチャートである。こ
のフローチャートでは、図６に示したフロチャートのス
テップ２０１とステップ２０５を、ステップ８０１とス
テップ８０２にそれぞれ変更している。これらステップ
８０１とステップ８０２では、モード選択部２７０５が
ＦＭＢＬＫをセットしている。
を一つのＧＯＢについて示すフローチャートである。こ
のフローチャートでは、図６に示したフロチャートのス
テップ２０１とステップ２０５を、ステップ８０１とス
テップ８０２にそれぞれ変更している。これらステップ
８０１とステップ８０２では、モード選択部２７０５が
ＦＭＢＬＫをセットしている。
【０１３９】図９は、本実施形態におけるリフレッシュ
動作の一例を示す図である。図９に示すようにｔ＝３４
で一括リフレッシュが行われたＧＯＢ１についてはステ
ップ８０２でＦＭＢＬＫ＝１となるため、次のフレーム
においては、ステップ２１２での判定結果に基づきステ
ップ２１３へ進む。すなわち、モード選択部２７０５が
ＦＭＢＬＫに基づき分散リフレッシュモードを選択し、
これにより分散リフレッシュ部２７０７はＧＯＢ１に対
して分散リフレッシュを開始する（図９のｔ＝３５）。
しかし、この場合ＧＯＢ１の領域では被写体に動きがあ
るため、図８のステップ２１５の判定結果に基づきステ
ップ６０２に進み、ＦＭＢＬＫがリセットされる（ＦＭ
ＢＬＫ＝０）。これにより、その時点（ｔ＝３６）以降
のフレームではＧＯＢ１に対する分散リフレッシュが中
断される。また、ステップ６０２でＭＯＶ＝１にセット
されるため、ＲＣＯＮＴ＝３３になった時点でＧＯＢ１
に対し一括リフレッシュが行われる。
動作の一例を示す図である。図９に示すようにｔ＝３４
で一括リフレッシュが行われたＧＯＢ１についてはステ
ップ８０２でＦＭＢＬＫ＝１となるため、次のフレーム
においては、ステップ２１２での判定結果に基づきステ
ップ２１３へ進む。すなわち、モード選択部２７０５が
ＦＭＢＬＫに基づき分散リフレッシュモードを選択し、
これにより分散リフレッシュ部２７０７はＧＯＢ１に対
して分散リフレッシュを開始する（図９のｔ＝３５）。
しかし、この場合ＧＯＢ１の領域では被写体に動きがあ
るため、図８のステップ２１５の判定結果に基づきステ
ップ６０２に進み、ＦＭＢＬＫがリセットされる（ＦＭ
ＢＬＫ＝０）。これにより、その時点（ｔ＝３６）以降
のフレームではＧＯＢ１に対する分散リフレッシュが中
断される。また、ステップ６０２でＭＯＶ＝１にセット
されるため、ＲＣＯＮＴ＝３３になった時点でＧＯＢ１
に対し一括リフレッシュが行われる。
【０１４０】以上のように本実施形態によれば、一括リ
フレッシュを行ったブロック群に伝送エラーが生じ、か
つ当該ブロック群の領域の被写体の動きがなくなったた
めに時間Ｔの経過後に一括リフレッシュが行われない場
合であっても、分散リフレッシュが行われているブロッ
クに伝送エラーが生じた場合であっても、分散リフレッ
シュにより、当該ブロック群のいずれのブロックも時間
Ｔが経過するまでに必ずリフレッシュされる。
フレッシュを行ったブロック群に伝送エラーが生じ、か
つ当該ブロック群の領域の被写体の動きがなくなったた
めに時間Ｔの経過後に一括リフレッシュが行われない場
合であっても、分散リフレッシュが行われているブロッ
クに伝送エラーが生じた場合であっても、分散リフレッ
シュにより、当該ブロック群のいずれのブロックも時間
Ｔが経過するまでに必ずリフレッシュされる。
【０１４１】なお、一括リフレッシュを行ったブロック
群については次のフレームにおいて動きの検出を先に行
うようにして、継続して動きがある場合に、異なるタイ
ミングでリフレッシュしたブロックの送出を回避するよ
うにしてもよい。
群については次のフレームにおいて動きの検出を先に行
うようにして、継続して動きがある場合に、異なるタイ
ミングでリフレッシュしたブロックの送出を回避するよ
うにしてもよい。
【０１４２】なお、静止状態が続いているＧＯＢに対す
る分散リフレッシュのリフレッシュ周期をＴより大きく
することで、伝送エラーの影響を少なく抑えつつ、符号
化効率を向上させることができる。図１０は、このよう
な画像符号化方法の一例を一つのＧＯＢについて示すフ
ローチャートである。このフローチャートでは、新たに
変数ｓを導入し、図８に示したフローチャートのステッ
プ８０１、８０２、２０７を、変数ｓの初期化を含むス
テップ１００１、変数ｓの初期化を含むステップ１００
２、変数ｓのインクリメントを含むステップ１００４
に、それぞれ変更するとともに、ステップ１００３、１
００５、１００６、１００７、１００８、１００９を新
たに追加している。このフローチャートにより示される
画像符号化方法では、ステップ２０４でＧＯＢが一括リ
フレッシュされた後、ステップ１００２でモード選択部
２７０５がｓ＝０とし、ステップ１００３または１００
７での判断に基づき、変数ｓが予め設定された値Ｓに達
するまでは、ステップ２０８または２１３において分散
リフレッシュ部２７０７が、これまでのＭＢＬＫＧ
（Ｉ）にしたがったブロック毎に異なるタイミングでリ
フレッシュを行う。変数ｓがＳに達すると、ステップ１
００５または１００８でモード選択部２７０５がＦＭＢ
ＬＫをセットした後、ステップ１００６または１００９
においてＭＢＬＫＧ（Ｉ）とは異なるタイミングのＭＢ
ＬＫＧ’（Ｉ’）で分散リフレッシュ部２７０７がリフ
レッシュを行う。ＭＢＬＫＧ’（Ｉ’）の中には、リフ
レッシュを行わないフレームもあってよく、ブロック群
を全てリフレッシュする時間はＴより大きい。図１０に
おいてＩ’は或る値まで達すると１に戻るモジュロであ
ることにしている。
る分散リフレッシュのリフレッシュ周期をＴより大きく
することで、伝送エラーの影響を少なく抑えつつ、符号
化効率を向上させることができる。図１０は、このよう
な画像符号化方法の一例を一つのＧＯＢについて示すフ
ローチャートである。このフローチャートでは、新たに
変数ｓを導入し、図８に示したフローチャートのステッ
プ８０１、８０２、２０７を、変数ｓの初期化を含むス
テップ１００１、変数ｓの初期化を含むステップ１００
２、変数ｓのインクリメントを含むステップ１００４
に、それぞれ変更するとともに、ステップ１００３、１
００５、１００６、１００７、１００８、１００９を新
たに追加している。このフローチャートにより示される
画像符号化方法では、ステップ２０４でＧＯＢが一括リ
フレッシュされた後、ステップ１００２でモード選択部
２７０５がｓ＝０とし、ステップ１００３または１００
７での判断に基づき、変数ｓが予め設定された値Ｓに達
するまでは、ステップ２０８または２１３において分散
リフレッシュ部２７０７が、これまでのＭＢＬＫＧ
（Ｉ）にしたがったブロック毎に異なるタイミングでリ
フレッシュを行う。変数ｓがＳに達すると、ステップ１
００５または１００８でモード選択部２７０５がＦＭＢ
ＬＫをセットした後、ステップ１００６または１００９
においてＭＢＬＫＧ（Ｉ）とは異なるタイミングのＭＢ
ＬＫＧ’（Ｉ’）で分散リフレッシュ部２７０７がリフ
レッシュを行う。ＭＢＬＫＧ’（Ｉ’）の中には、リフ
レッシュを行わないフレームもあってよく、ブロック群
を全てリフレッシュする時間はＴより大きい。図１０に
おいてＩ’は或る値まで達すると１に戻るモジュロであ
ることにしている。
【０１４３】なお、ＧＯＢ内の被写体に動きがないかど
うかの判別には、第１の実施形態で説明したような方法
を用いることができる。また、これに代えて、ＧＯＢ内
の各ＭＢＬＫの動きベクトルの絶対値の総量と予め設定
されたしきい値とを比較し、その総量がしきい値以上の
場合にＧＯＢ内の被写体に動きがあると判別する、とい
う方法を用いてもよい。
うかの判別には、第１の実施形態で説明したような方法
を用いることができる。また、これに代えて、ＧＯＢ内
の各ＭＢＬＫの動きベクトルの絶対値の総量と予め設定
されたしきい値とを比較し、その総量がしきい値以上の
場合にＧＯＢ内の被写体に動きがあると判別する、とい
う方法を用いてもよい。
【０１４４】（第５の実施形態）次に、本発明の第５の
実施形態に係る画像符号化方法およびその画像符号化方
法に基づく画像符号化装置について説明する。この画像
符号化装置の構成は、第１の実施形態における画像符号
化装置２７０１と同様であって、図１３に示す通りであ
る。本実施形態における画像符号化装置のうち第１の実
施形態における画像符号化装置２７０１と同一の部分に
ついては、同一の符号を付して説明を省略する。
実施形態に係る画像符号化方法およびその画像符号化方
法に基づく画像符号化装置について説明する。この画像
符号化装置の構成は、第１の実施形態における画像符号
化装置２７０１と同様であって、図１３に示す通りであ
る。本実施形態における画像符号化装置のうち第１の実
施形態における画像符号化装置２７０１と同一の部分に
ついては、同一の符号を付して説明を省略する。
【０１４５】第１ないし第４の実施形態のようにブロッ
ク群をＧＯＢとした場合、図１１（Ａ）に示すように動
く物体が画面の左右どちらか半分の領域内で動いている
ときには残りの半分の領域のブロック群に対しては分散
リフレッシュが行われるが、図１１（Ｂ）に示すように
動く物体が画面の中央で動いているときには全てのブロ
ック群で動きが検出されるため、全てのブロック群に対
して一括リフレッシュが行われる。ブロック群をＧＯＢ
より小さい領域に選べば、この問題を回避できるが、従
来の技術の説明において述べたように、一括リフレッシ
ュを行うブロック群のブロック数を半分にしても２フレ
ームあるいは３フレームに渡ってフレーム内符号化を行
うブロックあるいは２フレームあるいは３フレームに渡
って動き補償を禁止するブロックが増えるため、符号化
効率が低下し、発生符号量はさほど減少しない。一方、
ブロック群の数が増えると一括リフレッシュを行うブロ
ック群を含むフレームが増加するため、リフレッシュ周
期を変えないとすると一括リフレッシュを行うブロック
群を含まないフレームが減少する。その結果、符号化効
率が低下し、画質が劣化する。そこで、本実施形態で
は、第３の実施形態または第４の実施形態の画像符号化
方法において、ブロック群の大きさおよびブロック群に
対する一括リフレッシュのタイミングを変えないで、ブ
ロック群をさらにＬ分割し、その分割によって得られる
各領域毎に被写体の動きを動き情報管理部２７０４が判
断し、被写体に予め決められたしきい値以上の動きがあ
ると判断された領域を、当該領域を含むブロック群をリ
フレッシュするタイミングにおいて、一括リフレッシュ
部２７０６が一度にリフレッシュしている。
ク群をＧＯＢとした場合、図１１（Ａ）に示すように動
く物体が画面の左右どちらか半分の領域内で動いている
ときには残りの半分の領域のブロック群に対しては分散
リフレッシュが行われるが、図１１（Ｂ）に示すように
動く物体が画面の中央で動いているときには全てのブロ
ック群で動きが検出されるため、全てのブロック群に対
して一括リフレッシュが行われる。ブロック群をＧＯＢ
より小さい領域に選べば、この問題を回避できるが、従
来の技術の説明において述べたように、一括リフレッシ
ュを行うブロック群のブロック数を半分にしても２フレ
ームあるいは３フレームに渡ってフレーム内符号化を行
うブロックあるいは２フレームあるいは３フレームに渡
って動き補償を禁止するブロックが増えるため、符号化
効率が低下し、発生符号量はさほど減少しない。一方、
ブロック群の数が増えると一括リフレッシュを行うブロ
ック群を含むフレームが増加するため、リフレッシュ周
期を変えないとすると一括リフレッシュを行うブロック
群を含まないフレームが減少する。その結果、符号化効
率が低下し、画質が劣化する。そこで、本実施形態で
は、第３の実施形態または第４の実施形態の画像符号化
方法において、ブロック群の大きさおよびブロック群に
対する一括リフレッシュのタイミングを変えないで、ブ
ロック群をさらにＬ分割し、その分割によって得られる
各領域毎に被写体の動きを動き情報管理部２７０４が判
断し、被写体に予め決められたしきい値以上の動きがあ
ると判断された領域を、当該領域を含むブロック群をリ
フレッシュするタイミングにおいて、一括リフレッシュ
部２７０６が一度にリフレッシュしている。
【０１４６】例えば、図１１（Ｃ）に示すように、各Ｇ
ＯＢを左右２つの領域に分割する。この場合、各ＧＯＢ
につき左右独立に動きの有無を検出し、領域内を一度に
リフレッシュするか領域内のブロックを異なるタイミン
グでリフレッシュするかも独立に決定する。ただし、リ
フレッシュを行うタイミングを共通とする。すなわち本
実施形態では、この場合、各ＧＯＢの左右の領域それぞ
れのリフレッシュすべきタイミングは同じであるとしつ
つ、各ＧＯＢの左右の領域それぞれについて動きの検出
およびリフレッシュモードの選択を独立に行うものとし
て、図２、図３、図５、図６、図８、図１０のいずれか
のフローチャートに示される各ステップを実行すること
により、画像の符号化を行う。
ＯＢを左右２つの領域に分割する。この場合、各ＧＯＢ
につき左右独立に動きの有無を検出し、領域内を一度に
リフレッシュするか領域内のブロックを異なるタイミン
グでリフレッシュするかも独立に決定する。ただし、リ
フレッシュを行うタイミングを共通とする。すなわち本
実施形態では、この場合、各ＧＯＢの左右の領域それぞ
れのリフレッシュすべきタイミングは同じであるとしつ
つ、各ＧＯＢの左右の領域それぞれについて動きの検出
およびリフレッシュモードの選択を独立に行うものとし
て、図２、図３、図５、図６、図８、図１０のいずれか
のフローチャートに示される各ステップを実行すること
により、画像の符号化を行う。
【０１４７】なお、以下では、各ＧＯＢを分割して得ら
れる領域の各ブロックを一度にリフレッシュすることも
「一括リフレッシュ」と呼び、各ＧＯＢを分割して得ら
れる領域の各ブロックをブロック毎に異なるタイミング
でリフレッシュすることも「分散リフレッシュ」と呼ぶ
ものとする。
れる領域の各ブロックを一度にリフレッシュすることも
「一括リフレッシュ」と呼び、各ＧＯＢを分割して得ら
れる領域の各ブロックをブロック毎に異なるタイミング
でリフレッシュすることも「分散リフレッシュ」と呼ぶ
ものとする。
【０１４８】以上のように本実施形態によれば、ブロッ
ク群に比して小さな被写体の動きを効率よくリフレッシ
ュすることができ、リフレッシュによる妨害のより少な
い映像を得ることが可能となる。
ク群に比して小さな被写体の動きを効率よくリフレッシ
ュすることができ、リフレッシュによる妨害のより少な
い映像を得ることが可能となる。
【０１４９】なお、ここではＧＯＢを左右に２分割して
いるが、分割の方法はこれに限定されるものではなく、
左中右に３分割してもよいし、上下に分割してもよい。
また、分割は均等でなくてもよい。
いるが、分割の方法はこれに限定されるものではなく、
左中右に３分割してもよいし、上下に分割してもよい。
また、分割は均等でなくてもよい。
【０１５０】（第６の実施形態）次に、本発明の第６の
実施形態に係る画像符号化方法およびその画像符号化方
法に基づく画像符号化装置について説明する。この画像
符号化装置の構成は、第１の実施形態における画像符号
化装置２７０１と同様であって、図１３に示す通りであ
る。本実施形態における画像符号化装置のうち第１の実
施形態における画像符号化装置２７０１と同一の部分に
ついては、同一の符号を付して説明を省略する。
実施形態に係る画像符号化方法およびその画像符号化方
法に基づく画像符号化装置について説明する。この画像
符号化装置の構成は、第１の実施形態における画像符号
化装置２７０１と同様であって、図１３に示す通りであ
る。本実施形態における画像符号化装置のうち第１の実
施形態における画像符号化装置２７０１と同一の部分に
ついては、同一の符号を付して説明を省略する。
【０１５１】第５の実施形態の説明で示した図１１
（Ａ）のような場合には、左半分のＧＯＢのみが一度に
リフレッシュするブロック群（すなわち一括リフレッシ
ュのブロック群）となり、右半分のＧＯＢはリフレッシ
ュ周期内で分散してリフレッシュするブロック群（すな
わち分散リフレッシュのブロック群）となる。この場合
には、左半分のＧＯＢを順にリフレッシュしてから右半
分のＧＯＢをリフレッシュするようにしておけば、一度
にリフレッシュするフレームは連続する６フレームとな
り、残りの２７フレームは一度にリフレッシュを行わな
い連続したフレームとなり、符号化効率の面で大変有利
となる。一方、図１のように被写体が横に動く場合には
左右のＧＯＢを順にリフレッシュする方が符号化効率が
向上する。
（Ａ）のような場合には、左半分のＧＯＢのみが一度に
リフレッシュするブロック群（すなわち一括リフレッシ
ュのブロック群）となり、右半分のＧＯＢはリフレッシ
ュ周期内で分散してリフレッシュするブロック群（すな
わち分散リフレッシュのブロック群）となる。この場合
には、左半分のＧＯＢを順にリフレッシュしてから右半
分のＧＯＢをリフレッシュするようにしておけば、一度
にリフレッシュするフレームは連続する６フレームとな
り、残りの２７フレームは一度にリフレッシュを行わな
い連続したフレームとなり、符号化効率の面で大変有利
となる。一方、図１のように被写体が横に動く場合には
左右のＧＯＢを順にリフレッシュする方が符号化効率が
向上する。
【０１５２】そこで本実施形態では、第１ないし第５の
実施形態の画像符号化方法において、符号化して伝送す
べき映像の被写体の特徴に応じてブロック群をリフレッ
シュする順序を変えている。すなわち本実施形態では、
被写体が縦長の場合または被写体が縦方向に移動する場
合には、縦横に配列されたブロック群を縦方向にリフレ
ッシュしていき、被写体が横長の場合または被写体が横
方向に移動する場合には、縦横に配列されたブロック群
を横方向にリフレッシュしていくようにしている。具体
的には、被写体が横長の場合または横方向に移動する場
合は、図１に示すようにＧＯＢ１→ＧＯＢ２→ＧＯＢ３
→…→ＧＯＢ１２というように横方向を優先した順でリ
フレッシュを行い、被写体が縦長の場合または縦方向に
移動する場合は、ＧＯＢ１→ＧＯＢ３→…→ＧＯＢ１１
→ＧＯＢ２→ＧＯＢ４→…→ＧＯＢ１２というように縦
方向を優先した順でリフレッシュを行う。リフレッシュ
方向の切り替え、すなわちリフレッシュ方向として縦方
向と横方向のいずれを優先させるかは、被写体が決めら
れている場合には、はじめからどちらかに決められてい
てもよいし、被写体に応じて選択できるようにしてあっ
てもよいし、一度にリフレッシュするＧＯＢのパターン
から推測して適応的に切り替えてもよい。一括リフレッ
シュを行うＧＯＢのパターンから推測してリフレッシュ
方向を適応的に切り替える場合には、例えば、符号化部
２７０８から得られる動きベクトル等の情報を用いて被
写体の形状（縦長か横長か）および動き方向を推測し、
その推測結果に基づく順序で一括リフレッシュ部２７０
６がリフレッシュを行う。
実施形態の画像符号化方法において、符号化して伝送す
べき映像の被写体の特徴に応じてブロック群をリフレッ
シュする順序を変えている。すなわち本実施形態では、
被写体が縦長の場合または被写体が縦方向に移動する場
合には、縦横に配列されたブロック群を縦方向にリフレ
ッシュしていき、被写体が横長の場合または被写体が横
方向に移動する場合には、縦横に配列されたブロック群
を横方向にリフレッシュしていくようにしている。具体
的には、被写体が横長の場合または横方向に移動する場
合は、図１に示すようにＧＯＢ１→ＧＯＢ２→ＧＯＢ３
→…→ＧＯＢ１２というように横方向を優先した順でリ
フレッシュを行い、被写体が縦長の場合または縦方向に
移動する場合は、ＧＯＢ１→ＧＯＢ３→…→ＧＯＢ１１
→ＧＯＢ２→ＧＯＢ４→…→ＧＯＢ１２というように縦
方向を優先した順でリフレッシュを行う。リフレッシュ
方向の切り替え、すなわちリフレッシュ方向として縦方
向と横方向のいずれを優先させるかは、被写体が決めら
れている場合には、はじめからどちらかに決められてい
てもよいし、被写体に応じて選択できるようにしてあっ
てもよいし、一度にリフレッシュするＧＯＢのパターン
から推測して適応的に切り替えてもよい。一括リフレッ
シュを行うＧＯＢのパターンから推測してリフレッシュ
方向を適応的に切り替える場合には、例えば、符号化部
２７０８から得られる動きベクトル等の情報を用いて被
写体の形状（縦長か横長か）および動き方向を推測し、
その推測結果に基づく順序で一括リフレッシュ部２７０
６がリフレッシュを行う。
【０１５３】以上のように本実施形態によれば、一括リ
フレッシュを行うブロック群が連続することにより、効
率よくリフレッシュできるとともに、一括リフレッシュ
を行うブロック群を含まない連続したフレーム数が増え
るため、フレーム間相関を利用した能率の高い映像符号
化により画質を向上させることができる。
フレッシュを行うブロック群が連続することにより、効
率よくリフレッシュできるとともに、一括リフレッシュ
を行うブロック群を含まない連続したフレーム数が増え
るため、フレーム間相関を利用した能率の高い映像符号
化により画質を向上させることができる。
【０１５４】（第７の実施形態）次に、本発明の第７の
実施形態に係る画像符号化方法およびその画像符号化方
法に基づく画像符号化装置について説明する。この画像
符号化装置の構成は、第１の実施形態における画像符号
化装置２７０１と同様であって、図１３に示す通りであ
る。本実施形態における画像符号化装置のうち第１の実
施形態における画像符号化装置２７０１と同一の部分に
ついては、同一の符号を付して説明を省略する。
実施形態に係る画像符号化方法およびその画像符号化方
法に基づく画像符号化装置について説明する。この画像
符号化装置の構成は、第１の実施形態における画像符号
化装置２７０１と同様であって、図１３に示す通りであ
る。本実施形態における画像符号化装置のうち第１の実
施形態における画像符号化装置２７０１と同一の部分に
ついては、同一の符号を付して説明を省略する。
【０１５５】上述した第１ないし第６の実施形態では、
分割された領域に対し一括リフレッシュを行うか否かの
判定に予め決められたしきい値を用い、分割された領域
内の被写体の動きがしきい値を越えた場合、その領域は
動きがあるとして一括リフレッシュを行うとした。しか
し、上記のように一括リフレッシュを行うか否かを判定
するしきい値を固定する場合、以下に述べるような問題
が発生する。
分割された領域に対し一括リフレッシュを行うか否かの
判定に予め決められたしきい値を用い、分割された領域
内の被写体の動きがしきい値を越えた場合、その領域は
動きがあるとして一括リフレッシュを行うとした。しか
し、上記のように一括リフレッシュを行うか否かを判定
するしきい値を固定する場合、以下に述べるような問題
が発生する。
【０１５６】カメラを手持ちしているためにカメラが振
動する場合や、カメラを固定していても風や側を通る車
等の外部環境によってカメラが振動する場合において、
一括リフレッシュを行うか否かの判定に用いるしきい値
よりもカメラの振動が大きいときには、被写体が動いて
いないにも拘わらず動いていると判断され、実際に動い
ていない領域までも一括リフレッシュが行われる。その
結果、圧縮率が低下し、画質の劣化した画像となってし
まう。また、カメラの振動と被写体の動きが逆方向とな
り、被写体の動きが相殺された場合には、実際に動いて
いない領域が動いている領域と判断されて一括リフレッ
シュが行われたり、実際に動いている領域が動いていな
いと判断されて一括リフレッシュが行われない、という
ような不具合が生じる。また、上記不具合を克服すべく
一括リフレッシュを行うか否かの判定に用いるしきい値
を高く設定すると、被写体の動きが小さい場合、実際に
被写体が動いている領域にも拘わらず、被写体の動きが
ない領域と判断されて一括リフレッシュが行われない。
この時、伝送エラーが発生したとすると、符号化側と復
号化側のフレームメモリの不一致による画質劣化は、以
降の画像フレームに伝搬する。
動する場合や、カメラを固定していても風や側を通る車
等の外部環境によってカメラが振動する場合において、
一括リフレッシュを行うか否かの判定に用いるしきい値
よりもカメラの振動が大きいときには、被写体が動いて
いないにも拘わらず動いていると判断され、実際に動い
ていない領域までも一括リフレッシュが行われる。その
結果、圧縮率が低下し、画質の劣化した画像となってし
まう。また、カメラの振動と被写体の動きが逆方向とな
り、被写体の動きが相殺された場合には、実際に動いて
いない領域が動いている領域と判断されて一括リフレッ
シュが行われたり、実際に動いている領域が動いていな
いと判断されて一括リフレッシュが行われない、という
ような不具合が生じる。また、上記不具合を克服すべく
一括リフレッシュを行うか否かの判定に用いるしきい値
を高く設定すると、被写体の動きが小さい場合、実際に
被写体が動いている領域にも拘わらず、被写体の動きが
ない領域と判断されて一括リフレッシュが行われない。
この時、伝送エラーが発生したとすると、符号化側と復
号化側のフレームメモリの不一致による画質劣化は、以
降の画像フレームに伝搬する。
【０１５７】本発明の第７の実施形態は、上記問題を解
決するために、一括リフレッシュを行うか否かの判定に
用いるしきい値を固定せず、フレームを符号化する毎
に、カメラの振動に応じてしきい値を設定するしきい値
設定処理を行うことを特徴とする。
決するために、一括リフレッシュを行うか否かの判定に
用いるしきい値を固定せず、フレームを符号化する毎
に、カメラの振動に応じてしきい値を設定するしきい値
設定処理を行うことを特徴とする。
【０１５８】図１２は、本実施形態におけるしきい値設
定処理の手順を示すフローチャートである。本実施形態
では、カメラが振動していない場合に用いる第１のしき
い値とカメラが振動している場合に用いる第２のしきい
値という２つのしきい値が予め用意されており、第２の
しきい値が第１のしきい値よりも大きくなるように設定
されている。このしきい値設定処理はフレームを符号化
する毎に動き情報管理部２７０４により実行される。本
実施形態では、このしきい値設定処理において、まず、
画像フレーム中の４隅のＭＢＬＫの全てにおいて動きが
あるか否かを検出することによりカメラが振動している
か否かを判断する（ステップ３２０２）。そして、画像
フレーム中の４隅のＭＢＬＫのうち一つでも動きがない
ＭＢＬＫがある場合はカメラが振動していないと判断
し、一括リフレッシュを行うか否かの判定に用いるしき
い値を第１のしきい値に設定する（ステップ３２０
４）。一方、画像フレーム中の４隅のＭＢＬＫの全てに
おいて動きがある場合はカメラが振動していると判断
し、一括リフレッシュを行うか否かの判定に用いるしき
い値を第２のしきい値に設定する（ステップ３２０
６）。
定処理の手順を示すフローチャートである。本実施形態
では、カメラが振動していない場合に用いる第１のしき
い値とカメラが振動している場合に用いる第２のしきい
値という２つのしきい値が予め用意されており、第２の
しきい値が第１のしきい値よりも大きくなるように設定
されている。このしきい値設定処理はフレームを符号化
する毎に動き情報管理部２７０４により実行される。本
実施形態では、このしきい値設定処理において、まず、
画像フレーム中の４隅のＭＢＬＫの全てにおいて動きが
あるか否かを検出することによりカメラが振動している
か否かを判断する（ステップ３２０２）。そして、画像
フレーム中の４隅のＭＢＬＫのうち一つでも動きがない
ＭＢＬＫがある場合はカメラが振動していないと判断
し、一括リフレッシュを行うか否かの判定に用いるしき
い値を第１のしきい値に設定する（ステップ３２０
４）。一方、画像フレーム中の４隅のＭＢＬＫの全てに
おいて動きがある場合はカメラが振動していると判断
し、一括リフレッシュを行うか否かの判定に用いるしき
い値を第２のしきい値に設定する（ステップ３２０
６）。
【０１５９】このようにカメラの振動に応じてしきい値
を変更することにより、上記問題が解消され、カメラの
設置状態や外部環境に応じた効果的なリフレッシュが可
能となる。
を変更することにより、上記問題が解消され、カメラの
設置状態や外部環境に応じた効果的なリフレッシュが可
能となる。
【０１６０】なお、上記のしきい値設定処理では、カメ
ラが振動しているか否かを判断するために画像フレーム
中の４隅のＭＢＬＫの全てにおいて動きがあるか否かを
検出しているが、これは、カメラまたは映像のブレ量を
検出することに相当する。したがって、本実施形態によ
れば、カメラまたは映像のブレ量に応じて、一括リフレ
ッシュを行うか否かの判定に用いるしきい値が設定され
ることになる。
ラが振動しているか否かを判断するために画像フレーム
中の４隅のＭＢＬＫの全てにおいて動きがあるか否かを
検出しているが、これは、カメラまたは映像のブレ量を
検出することに相当する。したがって、本実施形態によ
れば、カメラまたは映像のブレ量に応じて、一括リフレ
ッシュを行うか否かの判定に用いるしきい値が設定され
ることになる。
【０１６１】なお、上記第７の実施形態では、カメラ振
動の有無をフレーム中の４隅のＭＢＬＫにおける動きで
判定するとしたが、フレームの上端、下端、右端、左端
に接するＭＢＬＫ群からカメラの振動の有無を判定する
としてもよい。また、ジャイロ等の画像処理以外の部を
用いてカメラの振動の有無を判定してもよい。また、上
記第７の実施形態では、カメラが振動していない場合に
用いる第１のしきい値とカメラが振動している場合に用
いる第２のしきい値との２つのしきい値を持つとした
が、フレーム中の４隅のＭＢＬＫの動き量に応じて適応
的にしきい値を設定するとしてもよい。例えば、４隅の
ＭＢＬＫの動き量の平均を、一括リフレッシュを行うか
否かのしきい値として設定してもよい。
動の有無をフレーム中の４隅のＭＢＬＫにおける動きで
判定するとしたが、フレームの上端、下端、右端、左端
に接するＭＢＬＫ群からカメラの振動の有無を判定する
としてもよい。また、ジャイロ等の画像処理以外の部を
用いてカメラの振動の有無を判定してもよい。また、上
記第７の実施形態では、カメラが振動していない場合に
用いる第１のしきい値とカメラが振動している場合に用
いる第２のしきい値との２つのしきい値を持つとした
が、フレーム中の４隅のＭＢＬＫの動き量に応じて適応
的にしきい値を設定するとしてもよい。例えば、４隅の
ＭＢＬＫの動き量の平均を、一括リフレッシュを行うか
否かのしきい値として設定してもよい。
【０１６２】（第８の実施形態）図２６は、本発明の第
８の実施形態に係る画像符号化方法に基づく画像伝送シ
ステムの構成を示すブロック図である。このシステム
は、画像符号化装置２８０１と画像復号化装置２８１３
とを備える。画像符号化装置２８０１は、入力画像Ｉmi
に対し圧縮符号化を行い、その符号化により得られる符
号化データを送出する。画像復号化装置２８１３は、画
像符号化装置２８０１から送出された符号化データを受
信して復号化を行い、その復号化により得られる画像を
出力画像Ｉmoとして出力する。また、画像復号化装置２
８１３は、画像符号化装置２８０１から送られてきた符
号化データに伝送エラーがあるか否かを検出し、エラー
を検出した場合には画像符号化装置２８０１にそのエラ
ーを通知する。
８の実施形態に係る画像符号化方法に基づく画像伝送シ
ステムの構成を示すブロック図である。このシステム
は、画像符号化装置２８０１と画像復号化装置２８１３
とを備える。画像符号化装置２８０１は、入力画像Ｉmi
に対し圧縮符号化を行い、その符号化により得られる符
号化データを送出する。画像復号化装置２８１３は、画
像符号化装置２８０１から送出された符号化データを受
信して復号化を行い、その復号化により得られる画像を
出力画像Ｉmoとして出力する。また、画像復号化装置２
８１３は、画像符号化装置２８０１から送られてきた符
号化データに伝送エラーがあるか否かを検出し、エラー
を検出した場合には画像符号化装置２８０１にそのエラ
ーを通知する。
【０１６３】画像符号化装置２８０１は、フレーム間予
測符号化とフレーム内予測符号化を組み合わせた符号化
を行う符号化部２８１２を有し、これに加えて、符号化
部２８１２にフレーム内符号化を行わせることによって
リフレッシュを行うために、エラー通知保持部２８０３
と、第１のモード選択部２８０２と、符号化タイミング
管理部２８０４と、動き情報保持時間管理部２８０５
と、動き情報格納管理部２８０６と、動き情報保持時間
算出部２８０７と、第２のモード選択部２８０８と、動
きベクトル探索範囲制限部２８０９１を含む一括リフレ
ッシュ部２８０９と、分散リフレッシュ部２８１０と、
ＤＣＴリフレッシュ部２８１１とを備えている。符号化
部２８１２の構成は、図３５に示した従来の符号化器１
１６の構成と同様であり、符号化部２８１２では、符号
化器１１６のセレクタ１２３および１２４に対応するセ
レクタが、一括リフレッシュ部２８０９、分散リフレッ
シュ部２８１０およびＤＣＴリフレッシュ部２８１１に
より制御される。
測符号化とフレーム内予測符号化を組み合わせた符号化
を行う符号化部２８１２を有し、これに加えて、符号化
部２８１２にフレーム内符号化を行わせることによって
リフレッシュを行うために、エラー通知保持部２８０３
と、第１のモード選択部２８０２と、符号化タイミング
管理部２８０４と、動き情報保持時間管理部２８０５
と、動き情報格納管理部２８０６と、動き情報保持時間
算出部２８０７と、第２のモード選択部２８０８と、動
きベクトル探索範囲制限部２８０９１を含む一括リフレ
ッシュ部２８０９と、分散リフレッシュ部２８１０と、
ＤＣＴリフレッシュ部２８１１とを備えている。符号化
部２８１２の構成は、図３５に示した従来の符号化器１
１６の構成と同様であり、符号化部２８１２では、符号
化器１１６のセレクタ１２３および１２４に対応するセ
レクタが、一括リフレッシュ部２８０９、分散リフレッ
シュ部２８１０およびＤＣＴリフレッシュ部２８１１に
より制御される。
【０１６４】画像復号化装置２８１３は、復号化部２８
１６とエラー検出部２８１５とエラー通知部２８１４と
を備えている。エラー検出部２８１５は、画像符号化装
置２８０１から送られてきた符号化データを受け取り、
伝送エラーがあるか否かを検出するとともに、受け取っ
た符号化データを復号化部２８１６に供給する。復号部
２８１６は、その符号化データを復号化し、その復号化
により得られた画像を出力画像Ｉmoとして出力する。一
方、エラー通知部２８１４は、エラー検出部２８１５で
検出された伝送エラーを示すエラー通知メッセージを画
像符号化装置２８０１に送る。このエラー通知メッセー
ジは、前述のように画像符号装置２８０１におけるエラ
ー通知保持部２８０３が受け取って保持する。
１６とエラー検出部２８１５とエラー通知部２８１４と
を備えている。エラー検出部２８１５は、画像符号化装
置２８０１から送られてきた符号化データを受け取り、
伝送エラーがあるか否かを検出するとともに、受け取っ
た符号化データを復号化部２８１６に供給する。復号部
２８１６は、その符号化データを復号化し、その復号化
により得られた画像を出力画像Ｉmoとして出力する。一
方、エラー通知部２８１４は、エラー検出部２８１５で
検出された伝送エラーを示すエラー通知メッセージを画
像符号化装置２８０１に送る。このエラー通知メッセー
ジは、前述のように画像符号装置２８０１におけるエラ
ー通知保持部２８０３が受け取って保持する。
【０１６５】以下、本実施形態に係る画像符号化方法お
よびその画像符号化方法に基づく画像符号化装置２８０
１について説明する。
よびその画像符号化方法に基づく画像符号化装置２８０
１について説明する。
【０１６６】画像符号化装置２８０１の各部は、直接、
ハードウェアにより実現してもよいが、ソフトウェアを
用いて実現してもよい。後者の場合、例えばＣＰＵ(Cen
tralProcessing Unit) とメモリと外部記憶装置とを用
いて画像符号化装置を構成し、外部記憶装置からメモリ
にロードされた所定のプログラム（以下、第１の実施形
態と同様「画像符号化プログラム」という）をＣＰＵが
実行することにより、画像符号化装置２８０１の各部を
実現することができる。この場合、画像符号化プログラ
ムは、典型的には、当該プログラムを記憶した記憶媒体
（フレキシブルディスク、ＣＤ−ＲＯＭ、ＤＶＤ等）に
よって提供される。すなわち、ユーザーは、購入した記
憶媒体を上記画像符号化装置２８０１にセットし、そこ
に記憶されている画像符号化プログラムを読み取らせ
て、ハードディスク装置等の記憶装置にインストールす
る。また、画像符号化装置２８０１に通信回線を介して
オンラインで伝送されてくる画像符号化プログラムを記
憶装置にインストールするようにしてもよい。さらに、
メーカが画像符号化装置を出荷する前に、予め記憶装置
に画像符号化プログラムをインストールしておくように
してもよい。このようにしてインストールされたプログ
ラムは、記憶装置からメモリにロードされてＣＰＵによ
り実行される。
ハードウェアにより実現してもよいが、ソフトウェアを
用いて実現してもよい。後者の場合、例えばＣＰＵ(Cen
tralProcessing Unit) とメモリと外部記憶装置とを用
いて画像符号化装置を構成し、外部記憶装置からメモリ
にロードされた所定のプログラム（以下、第１の実施形
態と同様「画像符号化プログラム」という）をＣＰＵが
実行することにより、画像符号化装置２８０１の各部を
実現することができる。この場合、画像符号化プログラ
ムは、典型的には、当該プログラムを記憶した記憶媒体
（フレキシブルディスク、ＣＤ−ＲＯＭ、ＤＶＤ等）に
よって提供される。すなわち、ユーザーは、購入した記
憶媒体を上記画像符号化装置２８０１にセットし、そこ
に記憶されている画像符号化プログラムを読み取らせ
て、ハードディスク装置等の記憶装置にインストールす
る。また、画像符号化装置２８０１に通信回線を介して
オンラインで伝送されてくる画像符号化プログラムを記
憶装置にインストールするようにしてもよい。さらに、
メーカが画像符号化装置を出荷する前に、予め記憶装置
に画像符号化プログラムをインストールしておくように
してもよい。このようにしてインストールされたプログ
ラムは、記憶装置からメモリにロードされてＣＰＵによ
り実行される。
【０１６７】以下、上記構成の画像符号化装置２８０１
の動作をリフレッシュ動作に注目して説明する。図１４
は、本発明の第８の実施形態に係る画像符号化方法をＩ
ＴＵ(International Telecommunication Union) で勧告
されているＨ．２６１またはＨ．２６３のＣＩＦ画像に
適用した場合のリフレッシュ動作の一例を示す図であ
る。既述のように、ＣＩＦ画像は３５２×２８８ドット
であり、Ｈ．２６１またはＨ．２６３では、これが１６
×１６ドットのマクロブロック（ＭＢＬＫ）を単位とし
て２２×１８ブロックに分割され、さらに、１１×３ブ
ロック毎にグループオブブロック（ＧＯＢ）が構成され
る。つまり、ＣＩＦ画像は２×６のＧＯＢで構成され、
それぞれのＧＯＢはさらに１１×３のＭＢＬＫで構成さ
れている。本実施形態においても、「ブロック」とはＭ
ＢＬＫを意味するが、「ブロック群」はＧＯＢに限定さ
れるものではない。ここでも、ＧＯＢをブロック群とす
る場合を例にあげて説明する。ＧＯＢには図１４に示す
順にＧＯＢ１からＧＯＢ１２までの番号が付けられてい
る。これを例えばこの番号の順に１フレーム毎に１ＧＯ
Ｂずつフレーム内符号化することによりリフレッシュす
るとすると、１画面全体のリフレッシュは１２フレーム
で完了する。また、各ＧＯＢのＭＢＬＫを１フレームに
１ＭＢＬＫずつリフレッシュするとリフレッシュは３３
フレームで完了する。
の動作をリフレッシュ動作に注目して説明する。図１４
は、本発明の第８の実施形態に係る画像符号化方法をＩ
ＴＵ(International Telecommunication Union) で勧告
されているＨ．２６１またはＨ．２６３のＣＩＦ画像に
適用した場合のリフレッシュ動作の一例を示す図であ
る。既述のように、ＣＩＦ画像は３５２×２８８ドット
であり、Ｈ．２６１またはＨ．２６３では、これが１６
×１６ドットのマクロブロック（ＭＢＬＫ）を単位とし
て２２×１８ブロックに分割され、さらに、１１×３ブ
ロック毎にグループオブブロック（ＧＯＢ）が構成され
る。つまり、ＣＩＦ画像は２×６のＧＯＢで構成され、
それぞれのＧＯＢはさらに１１×３のＭＢＬＫで構成さ
れている。本実施形態においても、「ブロック」とはＭ
ＢＬＫを意味するが、「ブロック群」はＧＯＢに限定さ
れるものではない。ここでも、ＧＯＢをブロック群とす
る場合を例にあげて説明する。ＧＯＢには図１４に示す
順にＧＯＢ１からＧＯＢ１２までの番号が付けられてい
る。これを例えばこの番号の順に１フレーム毎に１ＧＯ
Ｂずつフレーム内符号化することによりリフレッシュす
るとすると、１画面全体のリフレッシュは１２フレーム
で完了する。また、各ＧＯＢのＭＢＬＫを１フレームに
１ＭＢＬＫずつリフレッシュするとリフレッシュは３３
フレームで完了する。
【０１６８】画像符号化装置２８０１では、常に動き情
報格納管理部２８０６が、符号化部２８１２から得られ
る情報に基づき、符号化する時点より少なくとも時間Ｒ
Ｔｍａｘだけ前までの各フレームにおいて各ＧＯＢ内の
被写体に動きがないかを１フレーム毎に判別して記憶し
ている。ここで、時間ＲＴｍａｘとは、符号化してから
それに対するエラー通知メッセージが復号化側から返送
されるまでの時間である。動きの有無の判別方法として
は、ＧＯＢ内の各ＭＢＬＫの動きベクトルの大きさと予
め決めておいたしきい値とを比較して、しきい値以上の
動きベクトルを持つＭＢＬＫが所定数以上あればＧＯＢ
内の被写体に動きがあるとする方法を用いることができ
る。また、これに代えて、符号量と予め決めておいたし
きい値とを比較することにより、ＧＯＢ内の被写体の動
きの有無を判別してもよい。また、ＧＯＢ内の各ＭＢＬ
Ｋの動きベクトルの絶対値の総和と予め決められた閾値
とを比較して、閾値以上の値を持つＧＯＢに関しては、
被写体に動きがあるとしてもよい。
報格納管理部２８０６が、符号化部２８１２から得られ
る情報に基づき、符号化する時点より少なくとも時間Ｒ
Ｔｍａｘだけ前までの各フレームにおいて各ＧＯＢ内の
被写体に動きがないかを１フレーム毎に判別して記憶し
ている。ここで、時間ＲＴｍａｘとは、符号化してから
それに対するエラー通知メッセージが復号化側から返送
されるまでの時間である。動きの有無の判別方法として
は、ＧＯＢ内の各ＭＢＬＫの動きベクトルの大きさと予
め決めておいたしきい値とを比較して、しきい値以上の
動きベクトルを持つＭＢＬＫが所定数以上あればＧＯＢ
内の被写体に動きがあるとする方法を用いることができ
る。また、これに代えて、符号量と予め決めておいたし
きい値とを比較することにより、ＧＯＢ内の被写体の動
きの有無を判別してもよい。また、ＧＯＢ内の各ＭＢＬ
Ｋの動きベクトルの絶対値の総和と予め決められた閾値
とを比較して、閾値以上の値を持つＧＯＢに関しては、
被写体に動きがあるとしてもよい。
【０１６９】画像復号化装置２８１３では、エラー検出
部２８１５が、復号化する画像フレームに伝送エラーが
あるか否かを判別し、エラーが検出された場合には、エ
ラー通知部２８１４がその旨を帰還伝送路により符号化
側に通知する、すなわち画像符号化装置２８０１にエラ
ー通知メッセージを返送する。エラーの検出には、符号
化側において符号化データにエラー検出符号を付して伝
送し、復号化側ではこれを用いてエラーを検出する、と
いう方法を用いることができる。また、これに代えて、
符号化規則を利用して、復号化時に矛盾を生じた場合に
エラーと判断するようにしてもよい。
部２８１５が、復号化する画像フレームに伝送エラーが
あるか否かを判別し、エラーが検出された場合には、エ
ラー通知部２８１４がその旨を帰還伝送路により符号化
側に通知する、すなわち画像符号化装置２８０１にエラ
ー通知メッセージを返送する。エラーの検出には、符号
化側において符号化データにエラー検出符号を付して伝
送し、復号化側ではこれを用いてエラーを検出する、と
いう方法を用いることができる。また、これに代えて、
符号化規則を利用して、復号化時に矛盾を生じた場合に
エラーと判断するようにしてもよい。
【０１７０】画像復号化装置２８１３におけるエラー通
知部２８１４からエラー通知メッセージが返送された場
合、画像符号化装置２８０１において、エラー通知保持
部２８０３がこれを受け取り、第１のモード選択部２８
０２が、このエラー通知に基づいて第２のモード選択部
２８０８を起動する。このようにして起動された第２の
モード選択部２８０８は、そのエラー通知後に符号化を
開始する時点において、そこから時間ＲＴｍａｘだけ前
までに各ブロックの被写体に動きがあったか否かを、動
き情報格納管理部２８０６が記憶しておいた動き情報に
基づいて判定する。この動き判定の結果に基づき、第２
のモード選択部２８０８は、動きのあったＧＯＢを一括
リフレッシュＧＯＢと、動きのなかったＧＯＢを分散リ
フレッシュＧＯＢと決定する。一括リフレッシュＧＯＢ
については、一括リフレッシュ部２８０９が、その時点
から１フレーム符号化する毎に１ＧＯＢずつ順に、ＧＯ
Ｂ内のＭＢＬＫを全て一括してリフレッシュする。分散
リフレッシュＧＯＢについては、分散リフレッシュ部２
８１０が、その時点から１フレーム符号化する毎に全て
の分散リフレッシュＧＯＢに対し、ＧＯＢ内のＭＢＬＫ
を１フレームに１ＭＢＬＫずつ順にリフレッシュする。
知部２８１４からエラー通知メッセージが返送された場
合、画像符号化装置２８０１において、エラー通知保持
部２８０３がこれを受け取り、第１のモード選択部２８
０２が、このエラー通知に基づいて第２のモード選択部
２８０８を起動する。このようにして起動された第２の
モード選択部２８０８は、そのエラー通知後に符号化を
開始する時点において、そこから時間ＲＴｍａｘだけ前
までに各ブロックの被写体に動きがあったか否かを、動
き情報格納管理部２８０６が記憶しておいた動き情報に
基づいて判定する。この動き判定の結果に基づき、第２
のモード選択部２８０８は、動きのあったＧＯＢを一括
リフレッシュＧＯＢと、動きのなかったＧＯＢを分散リ
フレッシュＧＯＢと決定する。一括リフレッシュＧＯＢ
については、一括リフレッシュ部２８０９が、その時点
から１フレーム符号化する毎に１ＧＯＢずつ順に、ＧＯ
Ｂ内のＭＢＬＫを全て一括してリフレッシュする。分散
リフレッシュＧＯＢについては、分散リフレッシュ部２
８１０が、その時点から１フレーム符号化する毎に全て
の分散リフレッシュＧＯＢに対し、ＧＯＢ内のＭＢＬＫ
を１フレームに１ＭＢＬＫずつ順にリフレッシュする。
【０１７１】図１４に示す例では、時間ＲＴｍａｘの間
にＧＯＢ１〜ＧＯＢ４の領域の被写体に動きがあったた
め、ＧＯＢ１〜ＧＯＢ４が一括リフレッシュＧＯＢと決
定され、ｔ＝１からｔ＝４にかけて順に１フレーム符号
化する毎に１ＧＯＢずつ一括リフレッシュされる。な
お、図１４において斜線を施した部分はフレーム内符号
化をしているブロックである。ＧＯＢ５〜ＧＯＢ１２
は、時間ＲＴｍａｘの間に領域内の被写体に動きがなか
ったため、分散リフレッシュＧＯＢと決定される。そし
て、ＧＯＢ１〜ＧＯＢ１２のそれぞれに対し、ｔ＝１で
ＭＢＬＫ１がリフレッシュされ、ｔ＝２でＭＢＬＫ２が
リフレッシュされ、というように、１フレーム符号化さ
れる毎に１ＭＢＬＫずつ順にリフレッシュされ、ｔ＝３
３でＭＢＬＫ３３がリフレッシュされると、分散リフレ
ッシュＧＯＢと決定されたＧＯＢ５〜ＧＯＢ１２に対す
るリフレッシュが終了する。リフレッシュ終了後は、第
１のモード選択部２８０２がＤＣＴリフレッシュ部２８
１１を起動し、ＤＣＴリフレッシュ部２８１１が、符号
化側と復号化側の離散コサイン変換（ＤＣＴ）における
計算誤差の蓄積をリフレッシュする目的でＩＴＵ-Ｔ勧
告Ｈ.２６１に定められているリフレッシュ（以下「Ｄ
ＣＴリフレッシュ」という）を、例えば１フレームに１
ＭＢＬＫの割合で実行する。
にＧＯＢ１〜ＧＯＢ４の領域の被写体に動きがあったた
め、ＧＯＢ１〜ＧＯＢ４が一括リフレッシュＧＯＢと決
定され、ｔ＝１からｔ＝４にかけて順に１フレーム符号
化する毎に１ＧＯＢずつ一括リフレッシュされる。な
お、図１４において斜線を施した部分はフレーム内符号
化をしているブロックである。ＧＯＢ５〜ＧＯＢ１２
は、時間ＲＴｍａｘの間に領域内の被写体に動きがなか
ったため、分散リフレッシュＧＯＢと決定される。そし
て、ＧＯＢ１〜ＧＯＢ１２のそれぞれに対し、ｔ＝１で
ＭＢＬＫ１がリフレッシュされ、ｔ＝２でＭＢＬＫ２が
リフレッシュされ、というように、１フレーム符号化さ
れる毎に１ＭＢＬＫずつ順にリフレッシュされ、ｔ＝３
３でＭＢＬＫ３３がリフレッシュされると、分散リフレ
ッシュＧＯＢと決定されたＧＯＢ５〜ＧＯＢ１２に対す
るリフレッシュが終了する。リフレッシュ終了後は、第
１のモード選択部２８０２がＤＣＴリフレッシュ部２８
１１を起動し、ＤＣＴリフレッシュ部２８１１が、符号
化側と復号化側の離散コサイン変換（ＤＣＴ）における
計算誤差の蓄積をリフレッシュする目的でＩＴＵ-Ｔ勧
告Ｈ.２６１に定められているリフレッシュ（以下「Ｄ
ＣＴリフレッシュ」という）を、例えば１フレームに１
ＭＢＬＫの割合で実行する。
【０１７２】図１５は、画像符号化装置２８０１で使用
されている画像符号化方法を示すフローチャートであ
る。図１５において、ＦＣＮＴは、現時点までに符号化
したフレームの各ＧＯＢの動きベクトル絶対値総和が後
述の配列MV_GOB1〜MV_GOB12に何フレーム分格納されて
いるかを示しており、ＲＥは、リフレッシュ終了フラグ
であって、“１”はリフレッシュ処理が終了しているこ
とを示し、“０”はリフレッシュ処理が継続中であるこ
とを示している。この画像符号化方法では、まず、ステ
ップ１６００において、ＦＣＮＴを“０”に初期化する
とともにフラグＲＥをセットする。次に、ステップ１６
０１において符号化の開始を判断する。カメラなどから
の映像信号は秒３０フレームの割合で入力されるが、符
号化データを伝送する伝送路の通信速度と符号化データ
量の兼ね合いにより符号化時にフレームを間引くいわゆ
る「コマ落とし」を行う場合がある。このような場合に
はどのフレームを符号化してどのフレームをコマ落とし
するかは、バッファのデータ残量などを参照して符号化
部２８１２内の符号化制御部が判断する。符号化制御部
によるこの判断の結果、入力された映像信号の現時点の
フレームに対して符号化を行う場合には、符号化の指示
が出される。この符号化の指示が出ない間はステップ１
６０１で待機し、符号化の指示が出ればステップ１６０
３へ進む。
されている画像符号化方法を示すフローチャートであ
る。図１５において、ＦＣＮＴは、現時点までに符号化
したフレームの各ＧＯＢの動きベクトル絶対値総和が後
述の配列MV_GOB1〜MV_GOB12に何フレーム分格納されて
いるかを示しており、ＲＥは、リフレッシュ終了フラグ
であって、“１”はリフレッシュ処理が終了しているこ
とを示し、“０”はリフレッシュ処理が継続中であるこ
とを示している。この画像符号化方法では、まず、ステ
ップ１６００において、ＦＣＮＴを“０”に初期化する
とともにフラグＲＥをセットする。次に、ステップ１６
０１において符号化の開始を判断する。カメラなどから
の映像信号は秒３０フレームの割合で入力されるが、符
号化データを伝送する伝送路の通信速度と符号化データ
量の兼ね合いにより符号化時にフレームを間引くいわゆ
る「コマ落とし」を行う場合がある。このような場合に
はどのフレームを符号化してどのフレームをコマ落とし
するかは、バッファのデータ残量などを参照して符号化
部２８１２内の符号化制御部が判断する。符号化制御部
によるこの判断の結果、入力された映像信号の現時点の
フレームに対して符号化を行う場合には、符号化の指示
が出される。この符号化の指示が出ない間はステップ１
６０１で待機し、符号化の指示が出ればステップ１６０
３へ進む。
【０１７３】ステップ１６０３では、第１のモード選択
部２８０２が復号化側からのエラー通知の有無を判断す
る。エラー通知保持部２８０３は、前回符号化した時点
から現時点までにおけるエラー通知の有無を示すデータ
（以下「エラー通知データ」という）を蓄えている。第
１のモード選択部２８０２は、このエラー通知データに
基づいてエラー通知の有無を判定し、エラー通知なしの
場合はステップ１６０４へ進む。
部２８０２が復号化側からのエラー通知の有無を判断す
る。エラー通知保持部２８０３は、前回符号化した時点
から現時点までにおけるエラー通知の有無を示すデータ
（以下「エラー通知データ」という）を蓄えている。第
１のモード選択部２８０２は、このエラー通知データに
基づいてエラー通知の有無を判定し、エラー通知なしの
場合はステップ１６０４へ進む。
【０１７４】ステップ１６０４では、第１のモード選択
部２８０２がリフレッシュ終了フラグＲＥによりリフレ
ッシュ処理が継続中か否かを判定する。この結果、リフ
レッシュ処理が継続中の場合（ＲＥ＝０の場合）にはス
テップ１６０９へ進み、エラー通知が一度もなされてい
ないか、エラー通知後の処理が終了している場合（ＲＥ
＝１の場合）にはステップ１６０５へ進む。ステップ１
６０５では、ＤＣＴリフレッシュ部２８１１が現フレー
ムに対してＤＣＴリフレッシュの処理を行う。このＤＣ
Ｔリフレッシュの処理により、入力画像Ｉmiの１フレー
ム分の符号化データが得られる。その後、ステップ１６
０６において、動き情報格納管理部２８０６が、このＤ
ＣＴリフレッシュによる現フレームの符号化結果に基づ
いて動き情報を格納する（以下「動き情報格納管理処
理」という）。
部２８０２がリフレッシュ終了フラグＲＥによりリフレ
ッシュ処理が継続中か否かを判定する。この結果、リフ
レッシュ処理が継続中の場合（ＲＥ＝０の場合）にはス
テップ１６０９へ進み、エラー通知が一度もなされてい
ないか、エラー通知後の処理が終了している場合（ＲＥ
＝１の場合）にはステップ１６０５へ進む。ステップ１
６０５では、ＤＣＴリフレッシュ部２８１１が現フレー
ムに対してＤＣＴリフレッシュの処理を行う。このＤＣ
Ｔリフレッシュの処理により、入力画像Ｉmiの１フレー
ム分の符号化データが得られる。その後、ステップ１６
０６において、動き情報格納管理部２８０６が、このＤ
ＣＴリフレッシュによる現フレームの符号化結果に基づ
いて動き情報を格納する（以下「動き情報格納管理処
理」という）。
【０１７５】以下に、図２０および図２１を用いて動き
情報格納管理処理について説明する。図２０は、動き情
報格納管理処理の手順を示すフローチャートである。図
２０において、配列MV_GOB1〜MV_GOB12 は、時間ＲＴｍ
ａｘだけ前から現時点までに符号化したフレームの各Ｇ
ＯＢの動きベクトル絶対値総和を格納する配列である。
変数FCNTは、現時点で配列MV_GOB1 ないしMV_GOB12に動
きベクトル絶対値総和が格納されているフレームの数で
あり、前述のように図１５のステップ１６００で初期化
され、配列MV_GOB1 ないしMV_GOB12へ動き情報を格納す
るためのポインタとして使用される。
情報格納管理処理について説明する。図２０は、動き情
報格納管理処理の手順を示すフローチャートである。図
２０において、配列MV_GOB1〜MV_GOB12 は、時間ＲＴｍ
ａｘだけ前から現時点までに符号化したフレームの各Ｇ
ＯＢの動きベクトル絶対値総和を格納する配列である。
変数FCNTは、現時点で配列MV_GOB1 ないしMV_GOB12に動
きベクトル絶対値総和が格納されているフレームの数で
あり、前述のように図１５のステップ１６００で初期化
され、配列MV_GOB1 ないしMV_GOB12へ動き情報を格納す
るためのポインタとして使用される。
【０１７６】図２０のステップ群２１０１では、フレー
ムを符号化する毎に、そのフレーム中で一括リフレッシ
ュを行ったＧＯＢの番号を検出し、一括リフレッシュを
行った各ＧＯＢの動きベクトル絶対値の総和に、一括リ
フレッシュを行うか分散リフレッシュを行うかを決定す
るしきい値以上の値を加算する。これにより符号化効率
が低くエラーが起こりやすいフレーム内符号化ブロック
群を、復号化側からエラー通知があった際に被写体の動
きが大きいブロック群と同様に一度にリフレッシュする
ことが可能となる。次のステップ２１０２では、各ＧＯ
Ｂの動きベクトルの絶対値総和を、配列MV_GOB1 ないし
MV_GOB12の各配列の領域のうち変数FCNTが示す部分に格
納する。
ムを符号化する毎に、そのフレーム中で一括リフレッシ
ュを行ったＧＯＢの番号を検出し、一括リフレッシュを
行った各ＧＯＢの動きベクトル絶対値の総和に、一括リ
フレッシュを行うか分散リフレッシュを行うかを決定す
るしきい値以上の値を加算する。これにより符号化効率
が低くエラーが起こりやすいフレーム内符号化ブロック
群を、復号化側からエラー通知があった際に被写体の動
きが大きいブロック群と同様に一度にリフレッシュする
ことが可能となる。次のステップ２１０２では、各ＧＯ
Ｂの動きベクトルの絶対値総和を、配列MV_GOB1 ないし
MV_GOB12の各配列の領域のうち変数FCNTが示す部分に格
納する。
【０１７７】図２１は、動き情報の配列MV_GOB1 ないし
MV_GOB12への格納管理例を示している。図２１に示すよ
うに、各ＧＯＢの動き情報は、過去に符号化したフレー
ムの動き情報に続けて、配列MV_GOB1ないしMV_GOB12に
格納される。配列MV_GOB1ないしMV_GOB12に格納されて
いるフレームの動き情報は、一括リフレッシュを行うか
分散リフレッシュを行うかの判定に用いられる。
MV_GOB12への格納管理例を示している。図２１に示すよ
うに、各ＧＯＢの動き情報は、過去に符号化したフレー
ムの動き情報に続けて、配列MV_GOB1ないしMV_GOB12に
格納される。配列MV_GOB1ないしMV_GOB12に格納されて
いるフレームの動き情報は、一括リフレッシュを行うか
分散リフレッシュを行うかの判定に用いられる。
【０１７８】上記のようにして動き情報格納管理処理が
行われた後は、ステップ１６１４〜１６１６を順次実行
するが、これらのステップについては後述する。
行われた後は、ステップ１６１４〜１６１６を順次実行
するが、これらのステップについては後述する。
【０１７９】ステップ１６０３においてエラー通知あり
と判定された場合は、エラー通知データをリセットして
（すなわち“エラー通知なし”を示す値に設定して）ス
テップ１６０７へ進む。ステップ１６０７では、第２の
モード選択部２８０８が、配列MV_GOB1 ないしMV_GOB12
に格納されている各フレームの動き情報より、各ＧＯＢ
を一括リフレッシュを行うＧＯＢである一括リフレッシ
ュＧＯＢと分散リフレッシュを行うＧＯＢである分散リ
フレッシュＧＯＢとに分類する。すなわち、各ＧＯＢに
ついての動き情報に基づき各ＧＯＢのリフレッシュのモ
ードを選択する（以下「動き判定モード選択処理」とい
う）。
と判定された場合は、エラー通知データをリセットして
（すなわち“エラー通知なし”を示す値に設定して）ス
テップ１６０７へ進む。ステップ１６０７では、第２の
モード選択部２８０８が、配列MV_GOB1 ないしMV_GOB12
に格納されている各フレームの動き情報より、各ＧＯＢ
を一括リフレッシュを行うＧＯＢである一括リフレッシ
ュＧＯＢと分散リフレッシュを行うＧＯＢである分散リ
フレッシュＧＯＢとに分類する。すなわち、各ＧＯＢに
ついての動き情報に基づき各ＧＯＢのリフレッシュのモ
ードを選択する（以下「動き判定モード選択処理」とい
う）。
【０１８０】以下に、動き判定モード選択処理について
図１６および図１７を用いて説明する。図１６は、動き
判定モード選択処理の手順を示すフローチャートであ
る。図１６において、変数cnt1は、内部カウンタであ
り、配列MV_GOB1〜MV_GOB12 のポインタとして用いられ
る。配列MV_GOB1〜MV_GOB12 には、図２０に示した動き
情報格納管理処理により、過去に符号化したフレームの
各ＧＯＢの動きベクトルの絶対値総和が図２１に示すよ
うに格納されている。配列REF には、この動き判定モー
ド選択処理により、各ＧＯＢを一括リフレッシュを行う
か分散リフレッシュを行うかを示す情報（以下「リフレ
ッシュ情報」という）が、図１７に示すように格納され
る。すなわち、一括リフレッシュＧＯＢに対応する配列
REF の要素には“１”が格納され、分散リフレッシュＧ
ＯＢに対応する配列REF の要素には“０”が格納され
る。変数FCNTは、既述のように、現時点で配列MV_GOB1
ないしMV_GOB12 に各ＧＯＢの動きベクトルの絶対値総
和が格納されているフレーム数である。
図１６および図１７を用いて説明する。図１６は、動き
判定モード選択処理の手順を示すフローチャートであ
る。図１６において、変数cnt1は、内部カウンタであ
り、配列MV_GOB1〜MV_GOB12 のポインタとして用いられ
る。配列MV_GOB1〜MV_GOB12 には、図２０に示した動き
情報格納管理処理により、過去に符号化したフレームの
各ＧＯＢの動きベクトルの絶対値総和が図２１に示すよ
うに格納されている。配列REF には、この動き判定モー
ド選択処理により、各ＧＯＢを一括リフレッシュを行う
か分散リフレッシュを行うかを示す情報（以下「リフレ
ッシュ情報」という）が、図１７に示すように格納され
る。すなわち、一括リフレッシュＧＯＢに対応する配列
REF の要素には“１”が格納され、分散リフレッシュＧ
ＯＢに対応する配列REF の要素には“０”が格納され
る。変数FCNTは、既述のように、現時点で配列MV_GOB1
ないしMV_GOB12 に各ＧＯＢの動きベクトルの絶対値総
和が格納されているフレーム数である。
【０１８１】この動き判定モード選択処理では、まずス
テップ１７０１において変数cnt1を“０”に初期化す
る。次に、ステップ１７０２において、変数cnt1と変数
FCNTを比較し、変数cnt1が変数FCNTよりも大きい場合は
動き判定モード選択処理を終了し、変数cnt1が変数FCNT
以下である場合はステップ１７０３へ進む。
テップ１７０１において変数cnt1を“０”に初期化す
る。次に、ステップ１７０２において、変数cnt1と変数
FCNTを比較し、変数cnt1が変数FCNTよりも大きい場合は
動き判定モード選択処理を終了し、変数cnt1が変数FCNT
以下である場合はステップ１７０３へ進む。
【０１８２】ステップ１７０３では、ＧＯＢ１の動きベ
クトル絶対値総和が予め定められた閾値よりも大きいか
否かを判定する。閾値よりも大きい場合はステップ１７
０４へ進み、閾値よりも小さい場合はステップ１７０５
へ進む。ステップ１７０４では、配列要素REF[0]と
“１”との論理和を求め、その論理和を配列要素REF[0]
として再格納する。ステップ１７０５では、配列要素RE
F[0]と“０”との論理和を求め、その論理和を配列要素
REF[0]として再格納する。ステップ１７０４または１７
０５の実行後はステップ１７０６へ進む。
クトル絶対値総和が予め定められた閾値よりも大きいか
否かを判定する。閾値よりも大きい場合はステップ１７
０４へ進み、閾値よりも小さい場合はステップ１７０５
へ進む。ステップ１７０４では、配列要素REF[0]と
“１”との論理和を求め、その論理和を配列要素REF[0]
として再格納する。ステップ１７０５では、配列要素RE
F[0]と“０”との論理和を求め、その論理和を配列要素
REF[0]として再格納する。ステップ１７０４または１７
０５の実行後はステップ１７０６へ進む。
【０１８３】ステップ１７０６では、ＧＯＢ２の動きベ
クトル絶対値総和が予め定められた閾値よりも大きいか
否かを判定する。閾値よりも大きい場合はステップ１７
０７へ進み、閾値よりも小さい場合はステップ１７０８
へ進む。ステップ１７０７では、配列要素REF[1]と
“１”との論理和を求め、その論理和を配列要素REF[1]
として再格納する。ステップ１７０８では、配列要素RE
F[1]と“０”との論理和を求め、その論理和を配列要素
REF[1]として再格納する。
クトル絶対値総和が予め定められた閾値よりも大きいか
否かを判定する。閾値よりも大きい場合はステップ１７
０７へ進み、閾値よりも小さい場合はステップ１７０８
へ進む。ステップ１７０７では、配列要素REF[1]と
“１”との論理和を求め、その論理和を配列要素REF[1]
として再格納する。ステップ１７０８では、配列要素RE
F[1]と“０”との論理和を求め、その論理和を配列要素
REF[1]として再格納する。
【０１８４】ＧＯＢ３〜ＧＯＢ１２についても上記と同
様の処理を行い、その後、ステップ１７１２において変
数cnt1をインクリメントし、ステップ１７０２へ戻る。
様の処理を行い、その後、ステップ１７１２において変
数cnt1をインクリメントし、ステップ１７０２へ戻る。
【０１８５】上記のようにして、ステップ１７０２〜１
７１２を変数FCNT回数だけ繰り返し実行する。これによ
り、配列MV_GOB1 ないしMV_GOB12に格納されている各フ
レームの動き情報に基づいて、各ＧＯＢが一括リフレッ
シュを行うＧＯＢと分散リフレッシュを行うＧＯＢとに
分類され、その分類結果を示すリフレッシュ情報が図１
７に示すように配列REFに格納される。なお、配列REFに
格納されたリフレッシュ情報は、当該GOBのリフレッシ
ュが完了すると０クリアされる。
７１２を変数FCNT回数だけ繰り返し実行する。これによ
り、配列MV_GOB1 ないしMV_GOB12に格納されている各フ
レームの動き情報に基づいて、各ＧＯＢが一括リフレッ
シュを行うＧＯＢと分散リフレッシュを行うＧＯＢとに
分類され、その分類結果を示すリフレッシュ情報が図１
７に示すように配列REFに格納される。なお、配列REFに
格納されたリフレッシュ情報は、当該GOBのリフレッシ
ュが完了すると０クリアされる。
【０１８６】このように、エラー通知を検出した時点
で、一括リフレッシュを行うか分散リフレッシュを行う
かを判定し、判定結果と現時点のリフレッシュ状態（配
列REFの値）との論理和を求め、その論理和を配列REF
に再格納することで、一括リフレッシュを行っている途
中に再びエラー通知を受けた場合にも、必要なＧＯＢの
みを一括リフレッシュすることができる。図１７に示す
ように、配列REF は１２の領域から構成され、配列要素
REF[0]の領域にはＧＯＢ１のリフレッシュ情報が格納さ
れ、配列要素REF[1]の領域にはＧＯＢ２のリフレッシュ
情報が格納され、同様に配列要素REF[2]からREF[11]の
領域にはＧＯＢ３からＧＯＢ１２のリフレッシュ情報が
それぞれ格納される。
で、一括リフレッシュを行うか分散リフレッシュを行う
かを判定し、判定結果と現時点のリフレッシュ状態（配
列REFの値）との論理和を求め、その論理和を配列REF
に再格納することで、一括リフレッシュを行っている途
中に再びエラー通知を受けた場合にも、必要なＧＯＢの
みを一括リフレッシュすることができる。図１７に示す
ように、配列REF は１２の領域から構成され、配列要素
REF[0]の領域にはＧＯＢ１のリフレッシュ情報が格納さ
れ、配列要素REF[1]の領域にはＧＯＢ２のリフレッシュ
情報が格納され、同様に配列要素REF[2]からREF[11]の
領域にはＧＯＢ３からＧＯＢ１２のリフレッシュ情報が
それぞれ格納される。
【０１８７】上記の動き判定モード選択処理を行った後
は、ステップ１６０８において、第２のモード選択部２
８０８がリフレッシュ終了フラグＲＥをリセットする。
は、ステップ１６０８において、第２のモード選択部２
８０８がリフレッシュ終了フラグＲＥをリセットする。
【０１８８】次のステップ１６０９では動きベクトル制
限付き符号化を行う。画像符号化装置２８０１では、一
括リフレッシュ部２８０９内に動きベクトル探索範囲制
限部２８０９１が設けられており、この動きベクトル探
索範囲制限部２８０９１が符号化部２８１２における動
き補償フレーム間符号化を制御することにより、ステッ
プ１６０９の動きベクトル制限付き符号化が行われる。
以下に、動きベクトル制限つき符号化処理について、図
１８および図１９を用いて説明する。
限付き符号化を行う。画像符号化装置２８０１では、一
括リフレッシュ部２８０９内に動きベクトル探索範囲制
限部２８０９１が設けられており、この動きベクトル探
索範囲制限部２８０９１が符号化部２８１２における動
き補償フレーム間符号化を制御することにより、ステッ
プ１６０９の動きベクトル制限付き符号化が行われる。
以下に、動きベクトル制限つき符号化処理について、図
１８および図１９を用いて説明する。
【０１８９】図１８は、動きベクトル制限付き符号化処
理を示すフローチャートである。図１９は、動きベクト
ル探索範囲の制限例を示す図である。動きベクトル制限
付き符号化処理は、図１８に示すように、符号化部２８
１２が、各ＭＢＬＫに対し動き補償フレーム間符号化を
行う際、一括リフレッシュを行う領域内の未リフレッシ
ュ領域から参照しないように動きベクトル探索範囲を制
限して、符号化を行う。その動作の具体例を図１９
（Ａ）および図１９（Ｂ）を用いて説明する。図１９
（Ａ）は、一括リフレッシュを行う領域を示している。
この例では、ＧＯＢ１，３，５が一括リフレッシュを行
う領域である。図１９（Ｂ）は、一括リフレッシュ中に
おける動きベクトル探索制限を行うＭＢＬＫを示してい
る。図１９（Ｂ）に示すように、リフレッシュ開始後、
１フレーム目では、ＧＯＢ１，３，５がリフレッシュさ
れていないことから、ＧＯＢ１，３，５を参照するとエ
ラーが波及する恐れがあるため、ＧＯＢ１，３，５に隣
接するＭＢＬＫの動きベクトル探索範囲をＧＯＢ１，
３，５から参照しないように制限を行う。２フレーム目
では、ＧＯＢ１は一括リフレッシュ済みであり、ＧＯＢ
１を参照してもエラーが波及する恐れがないため、未リ
フレッシュ領域に隣接するＭＢＬＫ、即ちＧＯＢ３，５
に隣接するＭＢＬＫの動きベクトル探索制限を行う。３
フレーム目では、ＧＯＢ１，３は一括リフレッシュ済み
であり、ＧＯＢ１，３を参照してもエラーが波及する恐
れがないため、未リフレッシュ領域に隣接するＭＢＬ
Ｋ、即ち、ＧＯＢ５に隣接するＭＢＬＫのみ動きベクト
ル探索制限を行う。なお、処理を簡単にするために、一
度にフレーム内符号化によるリフレッシュを行う期間
は、各ＧＯＢのブロックは自ＧＯＢ以外のＧＯＢのブロ
ックを参照しないように動きベクトルを制限するように
してもよい。
理を示すフローチャートである。図１９は、動きベクト
ル探索範囲の制限例を示す図である。動きベクトル制限
付き符号化処理は、図１８に示すように、符号化部２８
１２が、各ＭＢＬＫに対し動き補償フレーム間符号化を
行う際、一括リフレッシュを行う領域内の未リフレッシ
ュ領域から参照しないように動きベクトル探索範囲を制
限して、符号化を行う。その動作の具体例を図１９
（Ａ）および図１９（Ｂ）を用いて説明する。図１９
（Ａ）は、一括リフレッシュを行う領域を示している。
この例では、ＧＯＢ１，３，５が一括リフレッシュを行
う領域である。図１９（Ｂ）は、一括リフレッシュ中に
おける動きベクトル探索制限を行うＭＢＬＫを示してい
る。図１９（Ｂ）に示すように、リフレッシュ開始後、
１フレーム目では、ＧＯＢ１，３，５がリフレッシュさ
れていないことから、ＧＯＢ１，３，５を参照するとエ
ラーが波及する恐れがあるため、ＧＯＢ１，３，５に隣
接するＭＢＬＫの動きベクトル探索範囲をＧＯＢ１，
３，５から参照しないように制限を行う。２フレーム目
では、ＧＯＢ１は一括リフレッシュ済みであり、ＧＯＢ
１を参照してもエラーが波及する恐れがないため、未リ
フレッシュ領域に隣接するＭＢＬＫ、即ちＧＯＢ３，５
に隣接するＭＢＬＫの動きベクトル探索制限を行う。３
フレーム目では、ＧＯＢ１，３は一括リフレッシュ済み
であり、ＧＯＢ１，３を参照してもエラーが波及する恐
れがないため、未リフレッシュ領域に隣接するＭＢＬ
Ｋ、即ち、ＧＯＢ５に隣接するＭＢＬＫのみ動きベクト
ル探索制限を行う。なお、処理を簡単にするために、一
度にフレーム内符号化によるリフレッシュを行う期間
は、各ＧＯＢのブロックは自ＧＯＢ以外のＧＯＢのブロ
ックを参照しないように動きベクトルを制限するように
してもよい。
【０１９０】上記の動きベクトル制限付き符号化処理に
より、一度にフレーム内符号化によるリフレッシュを行
わないブロック群にエラーの影響が伝播することを防止
できる。
より、一度にフレーム内符号化によるリフレッシュを行
わないブロック群にエラーの影響が伝播することを防止
できる。
【０１９１】上記の動き制限付き符号化処理を行った後
は、次のステップ１６１０において、第２のモード選択
部２８０８が、配列REF を参照して、ステップ１６０７
で分散リフレッシュＧＯＢと決定されたＧＯＢに対し分
散リフレッシュ部２８１０により分散リフレッシュを行
う。次のステップ１６１１では、第２のモード選択部２
８０８が、配列REF を参照して、ステップ１６０７で一
括リフレッシュＧＯＢと決定されたＧＯＢに対し一括リ
フレッシュ部２８０９により一括リフレッシュを行う。
ここで一括リフレッシュしたＧＯＢについては、ステッ
プ１６０６において、そのＧＯＢにおいて動きがあるこ
とを示す動き情報が格納される。ステップ１６１０の分
散リフレッシュ処理およびステップ１６１１の一括リフ
レッシュ処理により、入力画像Ｉmiの１フレーム分の符
号化データが得られる。
は、次のステップ１６１０において、第２のモード選択
部２８０８が、配列REF を参照して、ステップ１６０７
で分散リフレッシュＧＯＢと決定されたＧＯＢに対し分
散リフレッシュ部２８１０により分散リフレッシュを行
う。次のステップ１６１１では、第２のモード選択部２
８０８が、配列REF を参照して、ステップ１６０７で一
括リフレッシュＧＯＢと決定されたＧＯＢに対し一括リ
フレッシュ部２８０９により一括リフレッシュを行う。
ここで一括リフレッシュしたＧＯＢについては、ステッ
プ１６０６において、そのＧＯＢにおいて動きがあるこ
とを示す動き情報が格納される。ステップ１６１０の分
散リフレッシュ処理およびステップ１６１１の一括リフ
レッシュ処理により、入力画像Ｉmiの１フレーム分の符
号化データが得られる。
【０１９２】次にステップ１６１２において、第２のモ
ード選択部２８０８が、エラー通知後のリフレッシュの
処理が終了したか否かを判定する。その結果、エラー通
知後のリフレッシュの処理が終了したと判定された場合
は、ステップ１６１３においてリフレッシュ終了フラグ
ＲＥをセットした後、ステップ１６０６へ進む。エラー
通知後のリフレッシュの処理が終了していないと判定さ
れた場合は、そのままステップ１６０６へ進む。
ード選択部２８０８が、エラー通知後のリフレッシュの
処理が終了したか否かを判定する。その結果、エラー通
知後のリフレッシュの処理が終了したと判定された場合
は、ステップ１６１３においてリフレッシュ終了フラグ
ＲＥをセットした後、ステップ１６０６へ進む。エラー
通知後のリフレッシュの処理が終了していないと判定さ
れた場合は、そのままステップ１６０６へ進む。
【０１９３】ステップ１６０６では、前述の如く、図２
０に示した動き情報格納管理処理により、図２１に示す
ように配列MV_GOB1 ないしMV_GOB12に現フレームの各Ｇ
ＯＢに対する動き情報が格納される。
０に示した動き情報格納管理処理により、図２１に示す
ように配列MV_GOB1 ないしMV_GOB12に現フレームの各Ｇ
ＯＢに対する動き情報が格納される。
【０１９４】次にステップ１６１４において、動き情報
保持時間算出部２８０７が、フレームの動き情報を配列
MV_GOB1 ないしMV_GOB12に保持しておく時間を、１フレ
ームの符号化を行う毎に算出する。以下に、図２２およ
び図２３を用いて、動き情報保持時間算出処理について
説明する。図２２は、動き情報保持時間算出処理の手順
を示すフローチャートである。図２３は、動き情報保持
時間の配列TIMEへの格納例を示している。動き情報保持
時間とは、復号化側に誤りなく受信されたと判定するの
に要する時間であり、或るフレームを符号化してから動
き情報保持時間を経過した後に復号化側から通知された
エラーは、当該フレームに対するエラーではないと判定
できる。図２２において、配列TIMEは動き情報保持時間
を格納する配列である。変数FCNTは、既述のように、現
時点で配列MV_GOB1ないしMV_GOB12 に動き情報としての
動きベクトル絶対値総和が格納されているフレームの数
であり、配列TIMEのポインタとして使用される。
保持時間算出部２８０７が、フレームの動き情報を配列
MV_GOB1 ないしMV_GOB12に保持しておく時間を、１フレ
ームの符号化を行う毎に算出する。以下に、図２２およ
び図２３を用いて、動き情報保持時間算出処理について
説明する。図２２は、動き情報保持時間算出処理の手順
を示すフローチャートである。図２３は、動き情報保持
時間の配列TIMEへの格納例を示している。動き情報保持
時間とは、復号化側に誤りなく受信されたと判定するの
に要する時間であり、或るフレームを符号化してから動
き情報保持時間を経過した後に復号化側から通知された
エラーは、当該フレームに対するエラーではないと判定
できる。図２２において、配列TIMEは動き情報保持時間
を格納する配列である。変数FCNTは、既述のように、現
時点で配列MV_GOB1ないしMV_GOB12 に動き情報としての
動きベクトル絶対値総和が格納されているフレームの数
であり、配列TIMEのポインタとして使用される。
【０１９５】この動き情報保持時間算出処理では、まず
ステップ２３０１において、動き情報保持時間算出部２
８０７が、現時点のバッファデータ量と復号化側のエラ
ー検出時間とエラー通知メッセージの伝送時間と伝送レ
ートから、動き情報保持時間を算出する。次にステップ
２３０２において、動き情報保持時間算出部２８０７
が、算出した動き情報保持時間を配列TIMEの変数FCNTが
指す領域へ格納する。各フレームの動き情報保持時間
は、図２３に示すように、過去に符号化したフレームの
動き情報保持時間に続けて、配列TIMEに格納される。
ステップ２３０１において、動き情報保持時間算出部２
８０７が、現時点のバッファデータ量と復号化側のエラ
ー検出時間とエラー通知メッセージの伝送時間と伝送レ
ートから、動き情報保持時間を算出する。次にステップ
２３０２において、動き情報保持時間算出部２８０７
が、算出した動き情報保持時間を配列TIMEの変数FCNTが
指す領域へ格納する。各フレームの動き情報保持時間
は、図２３に示すように、過去に符号化したフレームの
動き情報保持時間に続けて、配列TIMEに格納される。
【０１９６】上記の動き情報保持時間算出処理を行った
後は、ステップ１６１５において、動き情報保持時間管
理部２８０５が、過去に符号化したフレームの動き情報
のうち、復号化側に誤りなく受信されたと判定できるフ
レームに関する動き情報を廃棄する。以下に、図２４を
用いて、動き情報保持時間管理処理について説明する。
図２４は、動き情報保持時間管理処理の手順を示すフロ
ーチャートである。図２４において、変数cnt1はカウン
タである。変数FCNTは、既述のように、現時点で配列MV
_GOB1 ないしMV_GOB12に動き情報が格納されているフレ
ームの数であり、配列TIMEおよび配列MV_GOB1 ないしMV
_GOB12のポインタとして使用される。配列TIMEは、既述
のように、動き情報保持時間を格納している配列であ
る。配列MB_GOB1 ないしMV_GOB12は、過去に符号化した
フレームの各ＧＯＢの動きベクトルの絶対値の総和が動
き情報として格納されている。
後は、ステップ１６１５において、動き情報保持時間管
理部２８０５が、過去に符号化したフレームの動き情報
のうち、復号化側に誤りなく受信されたと判定できるフ
レームに関する動き情報を廃棄する。以下に、図２４を
用いて、動き情報保持時間管理処理について説明する。
図２４は、動き情報保持時間管理処理の手順を示すフロ
ーチャートである。図２４において、変数cnt1はカウン
タである。変数FCNTは、既述のように、現時点で配列MV
_GOB1 ないしMV_GOB12に動き情報が格納されているフレ
ームの数であり、配列TIMEおよび配列MV_GOB1 ないしMV
_GOB12のポインタとして使用される。配列TIMEは、既述
のように、動き情報保持時間を格納している配列であ
る。配列MB_GOB1 ないしMV_GOB12は、過去に符号化した
フレームの各ＧＯＢの動きベクトルの絶対値の総和が動
き情報として格納されている。
【０１９７】この動き情報保持時間管理処理では、まず
ステップ２５０１において、タイマー割り込みがあるか
否かを判定する。その結果、タイマー割り込みが発生し
ていれば、ステップ２５０２において変数cnt1を“０”
に初期化し、次のステップ２５０３において、変数FCNT
と変数cnt1を比較する。その結果、変数cnt1が変数FCNT
以下であれば、ステップ２５０４において、変数cnt1で
指された配列TIMEの値をデクリメントする。その後、ス
テップ２５０５において変数cnt1をインクリメントし
て、ステップ２５０３へ戻る。以降、変数cnt1が変数FC
NT以下である間、ステップ２５０３〜２５０５を繰り返
し実行し、これにより、配列TIMEに格納されている各フ
レームの動き情報保持時間がタイマー割り込み間隔の時
間分だけ減算される。
ステップ２５０１において、タイマー割り込みがあるか
否かを判定する。その結果、タイマー割り込みが発生し
ていれば、ステップ２５０２において変数cnt1を“０”
に初期化し、次のステップ２５０３において、変数FCNT
と変数cnt1を比較する。その結果、変数cnt1が変数FCNT
以下であれば、ステップ２５０４において、変数cnt1で
指された配列TIMEの値をデクリメントする。その後、ス
テップ２５０５において変数cnt1をインクリメントし
て、ステップ２５０３へ戻る。以降、変数cnt1が変数FC
NT以下である間、ステップ２５０３〜２５０５を繰り返
し実行し、これにより、配列TIMEに格納されている各フ
レームの動き情報保持時間がタイマー割り込み間隔の時
間分だけ減算される。
【０１９８】ステップ２５０１でタイマー割り込みがな
いと判定された場合、または、ステップ２５０３におい
て変数cnt1が変数FCNTよりも大きいと判定された場合に
は、ステップ２５０６へ進み、配列TIME[0]の値が
“０”か否かを判定する。この結果、配列TIME[0]の値
が“０”でなければ動き情報保持時間管理処理を終了
し、配列TIME[0]の値が“０”であればステップ２５０
７へ進む。
いと判定された場合、または、ステップ２５０３におい
て変数cnt1が変数FCNTよりも大きいと判定された場合に
は、ステップ２５０６へ進み、配列TIME[0]の値が
“０”か否かを判定する。この結果、配列TIME[0]の値
が“０”でなければ動き情報保持時間管理処理を終了
し、配列TIME[0]の値が“０”であればステップ２５０
７へ進む。
【０１９９】ステップ２５０７では、変数cnt1を１にセ
ットし、次のステップ２５０８において、変数FCNTと変
数cnt1を比較する。その結果、変数cnt1が変数FCNT以下
の場合には、ステップ２５０９において、配列MV_GOB1
ないしMV_GOB12の変数cnt1で指された値を、配列MV_GOB
1 ないしMV_GOB12の変数cnt1-1で指された領域にそれぞ
れ格納する。次にステップ２５１０において、配列TIME
の変数cnt1で指された値を、配列TIMEの変数cnt1-1で指
された領域に格納する。その後、ステップ２５１１にお
いて変数cnt1をインクリメントして、ステップ２５０８
へ戻る。以降、変数cnt1が変数FCNT以下である間、ステ
ップ２５０８〜２５１１を繰り返し実行し、これによ
り、動き情報保持時間を経過したフレームの動き情報が
配列MV_GOB1ないしMV_GOB12から廃棄され、配列MV_GOB1
ないしMV_GOB12に格納されている値の入れ替えが行われ
る。また、配列TIMEに格納されている値に関しても、同
様に入れ替えが行われる。
ットし、次のステップ２５０８において、変数FCNTと変
数cnt1を比較する。その結果、変数cnt1が変数FCNT以下
の場合には、ステップ２５０９において、配列MV_GOB1
ないしMV_GOB12の変数cnt1で指された値を、配列MV_GOB
1 ないしMV_GOB12の変数cnt1-1で指された領域にそれぞ
れ格納する。次にステップ２５１０において、配列TIME
の変数cnt1で指された値を、配列TIMEの変数cnt1-1で指
された領域に格納する。その後、ステップ２５１１にお
いて変数cnt1をインクリメントして、ステップ２５０８
へ戻る。以降、変数cnt1が変数FCNT以下である間、ステ
ップ２５０８〜２５１１を繰り返し実行し、これによ
り、動き情報保持時間を経過したフレームの動き情報が
配列MV_GOB1ないしMV_GOB12から廃棄され、配列MV_GOB1
ないしMV_GOB12に格納されている値の入れ替えが行われ
る。また、配列TIMEに格納されている値に関しても、同
様に入れ替えが行われる。
【０２００】ステップ２５０８において変数cnt1が変数
FCNTよりも大きいと判定されると、ステップ２５１２へ
進んで、変数FCNTが“０”より大きいか否かを判定す
る。その結果、変数FCNTが“０”より大きければ、ステ
ップ２５１３において変数FCNTをデクリメントした後、
動き情報保持時間管理処理を終了する。変数FCNTが
“０”以下であれば、そのまま動き情報保持時間管理処
理を終了する。
FCNTよりも大きいと判定されると、ステップ２５１２へ
進んで、変数FCNTが“０”より大きいか否かを判定す
る。その結果、変数FCNTが“０”より大きければ、ステ
ップ２５１３において変数FCNTをデクリメントした後、
動き情報保持時間管理処理を終了する。変数FCNTが
“０”以下であれば、そのまま動き情報保持時間管理処
理を終了する。
【０２０１】上記の動き情報保持時間管理処理によれ
ば、フレームを符号化した際にセットした動き情報保持
時間を経過したフレームの動き情報を廃棄することで、
一括リフレッシュを行うか分散リフレッシュを行うかの
判定に用いる必要最低限のフレームの動き情報だけが保
持されることになる。
ば、フレームを符号化した際にセットした動き情報保持
時間を経過したフレームの動き情報を廃棄することで、
一括リフレッシュを行うか分散リフレッシュを行うかの
判定に用いる必要最低限のフレームの動き情報だけが保
持されることになる。
【０２０２】なお、バッファサイズやエラー通知のばら
つきを考慮して、符号化してからそれに対するエラー通
知が返送されるまでの最大時間を想定して、これをRTma
x（固定値）とすることにより、動き情報保持時間算出
処理のステップ１６１４を省略してもよい。
つきを考慮して、符号化してからそれに対するエラー通
知が返送されるまでの最大時間を想定して、これをRTma
x（固定値）とすることにより、動き情報保持時間算出
処理のステップ１６１４を省略してもよい。
【０２０３】ステップ１６１５において動き情報保持時
間管理処理を行った後は、ステップ１６１６において変
数FCNTをインクリメントして、次のフレームに対する符
号化を行うべくステップ１６０１へ戻る。以後、ステッ
プ１６０１〜１６１６を実行する毎に１フレームずつ、
上記と同様にしてリフレッシュを動作を伴いつつ入力画
像Ｉmiに対する符号化が行われる。
間管理処理を行った後は、ステップ１６１６において変
数FCNTをインクリメントして、次のフレームに対する符
号化を行うべくステップ１６０１へ戻る。以後、ステッ
プ１６０１〜１６１６を実行する毎に１フレームずつ、
上記と同様にしてリフレッシュを動作を伴いつつ入力画
像Ｉmiに対する符号化が行われる。
【０２０４】以上のように本実施形態によれば、符号化
側に復号化側からエラーが通知された時点において当該
エラーのフレームを符号化した時点まで遡ってブロック
群毎の被写体の動きの大小を判別できるため、必要な時
に必要なブロック群のみを一度にリフレッシュすること
が可能となり、エラー耐性を損なうことなく符号化効率
を高めることが可能となる。
側に復号化側からエラーが通知された時点において当該
エラーのフレームを符号化した時点まで遡ってブロック
群毎の被写体の動きの大小を判別できるため、必要な時
に必要なブロック群のみを一度にリフレッシュすること
が可能となり、エラー耐性を損なうことなく符号化効率
を高めることが可能となる。
【０２０５】ところで本実施形態の動き判定モード選択
処理では、符号化側が復号化側からエラー通知を受けた
ときに、配列MV_GOB1〜MV_GOB12 に動き情報が格納され
ている全てのフレームのＧＯＢにつき一括リフレッシュ
を行うか分散リフレッシュを行うかが、それらの動き情
報に基づき図１６に示すようにして決定される。しか
し、このようにして一括リフレッシュを行うことが決定
されたＧＯＢのうちエラー通知に対応する伝送エラーが
生じたと考えられるフレームのＧＯＢに着目し、一括リ
フレッシュを行うことが決定されたＧＯＢであってもそ
の着目したＧＯＢに接しないＧＯＢに対しては、一括リ
フレッシュに代えて分散リフレッシュを行うこととして
もよい。例えば図２５は、エラー通知を受けた時点で４
フレームの動き情報が配列MV_GOB1〜MV_GOB12 に格納さ
れていることを示しており、この場合、伝送エラーが生
じたと考えられるフレームは、それら４フレームのうち
の最も古いフレームである。そして、この最も古いフレ
ームではＧＯＢ１での動きのみがしきい値以上となって
おり、他のフレームではＧＯＢ２，３，１２においてし
きい値以上の動きがある。したがって、この場合、上記
の方法によれば、しきい値以上の動きがあると判断され
るＧＯＢ１，２，３，１２のうち、ＧＯＢ１に接してい
ないＧＯＢ１２に対しては一括リフレッシュが行われな
い。
処理では、符号化側が復号化側からエラー通知を受けた
ときに、配列MV_GOB1〜MV_GOB12 に動き情報が格納され
ている全てのフレームのＧＯＢにつき一括リフレッシュ
を行うか分散リフレッシュを行うかが、それらの動き情
報に基づき図１６に示すようにして決定される。しか
し、このようにして一括リフレッシュを行うことが決定
されたＧＯＢのうちエラー通知に対応する伝送エラーが
生じたと考えられるフレームのＧＯＢに着目し、一括リ
フレッシュを行うことが決定されたＧＯＢであってもそ
の着目したＧＯＢに接しないＧＯＢに対しては、一括リ
フレッシュに代えて分散リフレッシュを行うこととして
もよい。例えば図２５は、エラー通知を受けた時点で４
フレームの動き情報が配列MV_GOB1〜MV_GOB12 に格納さ
れていることを示しており、この場合、伝送エラーが生
じたと考えられるフレームは、それら４フレームのうち
の最も古いフレームである。そして、この最も古いフレ
ームではＧＯＢ１での動きのみがしきい値以上となって
おり、他のフレームではＧＯＢ２，３，１２においてし
きい値以上の動きがある。したがって、この場合、上記
の方法によれば、しきい値以上の動きがあると判断され
るＧＯＢ１，２，３，１２のうち、ＧＯＢ１に接してい
ないＧＯＢ１２に対しては一括リフレッシュが行われな
い。
【０２０６】なお、バッファサイズやエラー通知のばら
つき等により、伝送エラーが生じたフレームを特定する
ことができない場合には、符号化してからそれに対する
エラー通知が返送されるまでの時間の最大値を想定し
て、これをＲＴｍａｘとするとともに、バッファサイズ
やエラー通知のばらつき等により変動する時間をＴとし
て与え、時間ＲＴｍａｘ前から時間Ｔが経過する間に符
号化されたフレームを伝送エラーが生じたフレームであ
るとみなしてもよい。
つき等により、伝送エラーが生じたフレームを特定する
ことができない場合には、符号化してからそれに対する
エラー通知が返送されるまでの時間の最大値を想定し
て、これをＲＴｍａｘとするとともに、バッファサイズ
やエラー通知のばらつき等により変動する時間をＴとし
て与え、時間ＲＴｍａｘ前から時間Ｔが経過する間に符
号化されたフレームを伝送エラーが生じたフレームであ
るとみなしてもよい。
【０２０７】（第９の実施形態）次に、本発明の第９の
実施形態に係る画像符号化方法およびその画像符号化方
法に基づく画像符号化装置について説明する。この画像
符号化装置の構成は、第１の実施形態における画像符号
化装置２７０１と同様であって、図１３に示す通りであ
る。本実施形態における画像符号化装置のうち第１の実
施形態における画像符号化装置２７０１と同一の部分に
ついては、同一の符号を付して説明を省略する。
実施形態に係る画像符号化方法およびその画像符号化方
法に基づく画像符号化装置について説明する。この画像
符号化装置の構成は、第１の実施形態における画像符号
化装置２７０１と同様であって、図１３に示す通りであ
る。本実施形態における画像符号化装置のうち第１の実
施形態における画像符号化装置２７０１と同一の部分に
ついては、同一の符号を付して説明を省略する。
【０２０８】本実施形態の画像符号化装置において、リ
フレッシュ周期管理部２７０２は、各ＧＯＢのリフレッ
シュ周期を示すタイミング情報を算出し、そのタイミン
グ情報を、動き情報管理部２７０４、一括リフレッシュ
部２７０６、および分散リフレッシュ部２７０７に供給
する。
フレッシュ周期管理部２７０２は、各ＧＯＢのリフレッ
シュ周期を示すタイミング情報を算出し、そのタイミン
グ情報を、動き情報管理部２７０４、一括リフレッシュ
部２７０６、および分散リフレッシュ部２７０７に供給
する。
【０２０９】以下に、リフレッシュ周期管理部２７０２
において用いられるリフレッシュ周期算出方法につい
て、図３２および図３３を用いて説明する。図３２は、
本実施形態に係る画像符号化方法を１つのＧＯＢについ
て示すフローチャートである。図３２のフローチャート
では、図１０に示したフローチャートのステップ２０２
ｂをステップ２０２ｃに変更し、ステップ３７０１から
３７０４を追加するとともに、変数ｉｎｔｅｒｖａｌ、
周期設定フラグＦＰＥＲＩ、ＧＯＢフラグＦＧＯＢを新
たに導入している。ステップ２０２ｃでは、カウント値
であるＲＣＯＵＮＴの値が変数ｉｎｔｅｒｖａｌの値に
等しいか否かを判定する。ここで変数ｉｎｔｅｒｖａｌ
にはリフレッシュ周期が設定されているものとする。ス
テップ３７０１では、周期設定フラグＦＰＥＲＩを
“１”にセットする。ステップ３７０２では、ＧＯＢフ
ラグＦＧＯＢを“１”にセットする。ステップ３７０３
およびステップ３７０４では、ＧＯＢフラグＦＧＯＢを
０クリアする。ＧＯＢフラグＦＧＯＢは、下記に述べる
図３３のフローチャートで参照される。
において用いられるリフレッシュ周期算出方法につい
て、図３２および図３３を用いて説明する。図３２は、
本実施形態に係る画像符号化方法を１つのＧＯＢについ
て示すフローチャートである。図３２のフローチャート
では、図１０に示したフローチャートのステップ２０２
ｂをステップ２０２ｃに変更し、ステップ３７０１から
３７０４を追加するとともに、変数ｉｎｔｅｒｖａｌ、
周期設定フラグＦＰＥＲＩ、ＧＯＢフラグＦＧＯＢを新
たに導入している。ステップ２０２ｃでは、カウント値
であるＲＣＯＵＮＴの値が変数ｉｎｔｅｒｖａｌの値に
等しいか否かを判定する。ここで変数ｉｎｔｅｒｖａｌ
にはリフレッシュ周期が設定されているものとする。ス
テップ３７０１では、周期設定フラグＦＰＥＲＩを
“１”にセットする。ステップ３７０２では、ＧＯＢフ
ラグＦＧＯＢを“１”にセットする。ステップ３７０３
およびステップ３７０４では、ＧＯＢフラグＦＧＯＢを
０クリアする。ＧＯＢフラグＦＧＯＢは、下記に述べる
図３３のフローチャートで参照される。
【０２１０】図３３は、本実施形態におけるリフレッシ
ュ周期の算出方法を示すフローチャートである。このリ
フレッシュ周期算出方法では、まず、ステップ３６０１
において、変数Ｔにリフレッシュ周期のデフォルト値を
セットする。次にステップ３６０２において、変数Ｔ’
に第２リフレッシュ周期のデフォルト値をセットする。
ここで第２リフレッシュ周期とは、静止状態が続いてい
るＧＯＢに対する分散リフレッシュのリフレッシュ周
期、すなわち、分散リフレッシュの過程にあるＧＯＢの
ブロックがＳ回以上続けてブロック毎に異なるフレーム
でフレーム内符号化された場合におけるその分散リフレ
ッシュのリフレッシュ周期である。
ュ周期の算出方法を示すフローチャートである。このリ
フレッシュ周期算出方法では、まず、ステップ３６０１
において、変数Ｔにリフレッシュ周期のデフォルト値を
セットする。次にステップ３６０２において、変数Ｔ’
に第２リフレッシュ周期のデフォルト値をセットする。
ここで第２リフレッシュ周期とは、静止状態が続いてい
るＧＯＢに対する分散リフレッシュのリフレッシュ周
期、すなわち、分散リフレッシュの過程にあるＧＯＢの
ブロックがＳ回以上続けてブロック毎に異なるフレーム
でフレーム内符号化された場合におけるその分散リフレ
ッシュのリフレッシュ周期である。
【０２１１】変数ＴおよびＴ’にデフォルト値が設定さ
れた後は、ステップ３６０３において、符号化開始タイ
ミングか否かを判定する。その結果、符号化開始タイミ
ングでなければ符号化開始タイミングまで待機し、符号
化開始タイミングになればステップ３６０４へ進む。ス
テップ３６０４では、全てのＧＯＢの周期設定フラグＦ
ＰＥＲＩが“１”にセットされているか否かを判定す
る。図３２のフローチャートからわかるように、周期設
定フラグＦＰＥＲＩは、ＲＣＯＵＮＴの値が変数ｉｎｔ
ｅｒｖａｌの値に等しくなったときに、“１”にセット
される。これは、リフレッシュ周期の始まりを意味す
る。したがって、全てのＧＯＢの周期設定フラグＦＰＥ
ＲＩが“１”に設定されている状態は、１フレームずつ
ずれてリフレッシュされている各ＧＯＢが全て新しいリ
フレッシュ周期に入っていることを意味する。
れた後は、ステップ３６０３において、符号化開始タイ
ミングか否かを判定する。その結果、符号化開始タイミ
ングでなければ符号化開始タイミングまで待機し、符号
化開始タイミングになればステップ３６０４へ進む。ス
テップ３６０４では、全てのＧＯＢの周期設定フラグＦ
ＰＥＲＩが“１”にセットされているか否かを判定す
る。図３２のフローチャートからわかるように、周期設
定フラグＦＰＥＲＩは、ＲＣＯＵＮＴの値が変数ｉｎｔ
ｅｒｖａｌの値に等しくなったときに、“１”にセット
される。これは、リフレッシュ周期の始まりを意味す
る。したがって、全てのＧＯＢの周期設定フラグＦＰＥ
ＲＩが“１”に設定されている状態は、１フレームずつ
ずれてリフレッシュされている各ＧＯＢが全て新しいリ
フレッシュ周期に入っていることを意味する。
【０２１２】ステップ３６０４で全てのＧＯＢの周期設
定フラグＦＰＥＲＩが“１”にセットされていると判定
された場合は、ステップ３６０５へ進んで、全てのＧＯ
ＢのＲＣＯＵＮＴの値が変数ｉｎｔｅｒｖａｌの値より
も小さいか否かを判定する。その結果、全てのＧＯＢの
ＲＣＯＵＮＴの値が変数ｉｎｔｅｒｖａｌの値よりも小
さい場合は、ステップ３６０６および３６０７を実行す
ることによりリフレッシュ周期Ｔ’’を算出する。ＲＣ
ＯＵＮＴの値が変数ｉｎｔｅｒｖａｌの値よりも大きい
ＧＯＢがある場合は、ステップ３６０９において全ての
ＧＯＢの周期設定フラグＦＰＥＲＩを０クリアして、ス
テップ３６１０へ進む。
定フラグＦＰＥＲＩが“１”にセットされていると判定
された場合は、ステップ３６０５へ進んで、全てのＧＯ
ＢのＲＣＯＵＮＴの値が変数ｉｎｔｅｒｖａｌの値より
も小さいか否かを判定する。その結果、全てのＧＯＢの
ＲＣＯＵＮＴの値が変数ｉｎｔｅｒｖａｌの値よりも小
さい場合は、ステップ３６０６および３６０７を実行す
ることによりリフレッシュ周期Ｔ’’を算出する。ＲＣ
ＯＵＮＴの値が変数ｉｎｔｅｒｖａｌの値よりも大きい
ＧＯＢがある場合は、ステップ３６０９において全ての
ＧＯＢの周期設定フラグＦＰＥＲＩを０クリアして、ス
テップ３６１０へ進む。
【０２１３】全てのＧＯＢのＲＣＯＵＮＴの値が変数ｉ
ｎｔｅｒｖａｌの値よりも大きいことは、リフレッシュ
周期が次のリフレッシュ周期に移ったことを意味する。
ステップ３６０５でｎｏと判定される状態は、１フレー
ムずつずれてリフレッシュされている各ＧＯＢのうちの
最初のＧＯＢが新しいリフレッシュ周期に入っているこ
とを意味する。
ｎｔｅｒｖａｌの値よりも大きいことは、リフレッシュ
周期が次のリフレッシュ周期に移ったことを意味する。
ステップ３６０５でｎｏと判定される状態は、１フレー
ムずつずれてリフレッシュされている各ＧＯＢのうちの
最初のＧＯＢが新しいリフレッシュ周期に入っているこ
とを意味する。
【０２１４】全てのＧＯＢのＲＣＯＵＮＴの値が変数ｉ
ｎｔｅｒｖａｌの値よりも小さい場合は、まず、ステッ
プ３６０６において、ＧＯＢフラグＦＧＯＢが“１”に
セットされているＧＯＢの数を変数Ｂに設定し、ＧＯＢ
の数を変数ｍに設定し、Ｔ’／Ｔを変数ｋに設定する。
次にステップ３６０７において、これらの変数の値に基
づき、次式によりリフレッシュ周期Ｔ’’を算出する。 Ｔ’’＝ｋＴ（ｍ−Ｂ）／（ｍｋ−Ｂ） Ｔ’’は整数値となることが望ましいが、小数点以下を
切り上げることで、その分、画質を向上させることがで
き、また、小数点以下を切り捨てることで、その分、動
きのあるＧＯＢのエラー耐性を高めることができる。上
記式は、リフレッシュ周期内のイントラブロックの数が
等しくなるようにＴ’’を決定する。つまり上記式によ
れば、静止領域が続くブロック群のフレーム内符号化ブ
ロック数の減少分と動きがある領域のブロック群のフレ
ーム内符号化ブロック数の増加分とが等しくなるリフレ
ッシュ周期Ｔ’’が、算出される。このようにして算出
されたＴ’’は、次のステップ３６０８で変数ｉｎｔｅ
ｒｖａｌに設定される。その後、ステップ３６１０へ進
む。
ｎｔｅｒｖａｌの値よりも小さい場合は、まず、ステッ
プ３６０６において、ＧＯＢフラグＦＧＯＢが“１”に
セットされているＧＯＢの数を変数Ｂに設定し、ＧＯＢ
の数を変数ｍに設定し、Ｔ’／Ｔを変数ｋに設定する。
次にステップ３６０７において、これらの変数の値に基
づき、次式によりリフレッシュ周期Ｔ’’を算出する。 Ｔ’’＝ｋＴ（ｍ−Ｂ）／（ｍｋ−Ｂ） Ｔ’’は整数値となることが望ましいが、小数点以下を
切り上げることで、その分、画質を向上させることがで
き、また、小数点以下を切り捨てることで、その分、動
きのあるＧＯＢのエラー耐性を高めることができる。上
記式は、リフレッシュ周期内のイントラブロックの数が
等しくなるようにＴ’’を決定する。つまり上記式によ
れば、静止領域が続くブロック群のフレーム内符号化ブ
ロック数の減少分と動きがある領域のブロック群のフレ
ーム内符号化ブロック数の増加分とが等しくなるリフレ
ッシュ周期Ｔ’’が、算出される。このようにして算出
されたＴ’’は、次のステップ３６０８で変数ｉｎｔｅ
ｒｖａｌに設定される。その後、ステップ３６１０へ進
む。
【０２１５】ステップ３６１０では、各ＧＯＢに対し、
図１０に示したような符号化処理を行い、その後、ステ
ップ３６０３へ戻る。
図１０に示したような符号化処理を行い、その後、ステ
ップ３６０３へ戻る。
【０２１６】上述のような図３３のフローチャートによ
れば、ステップ３６０６からステップ３６０８までの処
理が、１フレームずつずれてリフレッシュされている各
ＧＯＢが全て新しいリフレッシュ周期に入った時点か
ら、１フレームずつずれてリフレッシュされている各Ｇ
ＯＢのうちの最初のＧＯＢが次のリフレッシュ周期に入
るまで、繰り返し実行される。これにより、被写体の動
きに応じて、リフレッシュ周期（Ｔ’’）が逐次更新さ
れる。
れば、ステップ３６０６からステップ３６０８までの処
理が、１フレームずつずれてリフレッシュされている各
ＧＯＢが全て新しいリフレッシュ周期に入った時点か
ら、１フレームずつずれてリフレッシュされている各Ｇ
ＯＢのうちの最初のＧＯＢが次のリフレッシュ周期に入
るまで、繰り返し実行される。これにより、被写体の動
きに応じて、リフレッシュ周期（Ｔ’’）が逐次更新さ
れる。
【０２１７】以上のように本実施形態によれば、分散リ
フレッシュが行われるＧＯＢの中で、リフレッシュ周期
がデフォルトのリフレッシュ周期Ｔよりも長く設定され
たＧＯＢの、１画像フレームに含まれる割合に応じて、
一括リフレッシュが行われるＧＯＢのリフレッシュ周期
を可変に（デフォルトのリフレッシュ周期よりも短く）
することができ、これにより、画質を維持しつつ、一括
リフレッシュが行われるＧＯＢのエラー耐性を上げるこ
とができる。
フレッシュが行われるＧＯＢの中で、リフレッシュ周期
がデフォルトのリフレッシュ周期Ｔよりも長く設定され
たＧＯＢの、１画像フレームに含まれる割合に応じて、
一括リフレッシュが行われるＧＯＢのリフレッシュ周期
を可変に（デフォルトのリフレッシュ周期よりも短く）
することができ、これにより、画質を維持しつつ、一括
リフレッシュが行われるＧＯＢのエラー耐性を上げるこ
とができる。
【０２１８】（変形例）上記各実施形態では、ブロック
群（第５の実施形態においては分割の基準となる領域）
をＧＯＢとした。このようにブロック群をＧＯＢ単位と
することで、フレームを符号化した際の情報に伝送エラ
ーが発生し、情報が誤った場合でも、伝送エラーによる
画質劣化をＧＯＢ内にとどめることができ、エラー耐性
を高めることができる。また、ブロック群をＧＯＢ単位
以外でも、予め決められた領域とすると、ブロック群の
リフレッシュを一度に行う一括リフレッシュの動作、ブ
ロック群のリフレッシュをブロック毎に異なるタイミン
グで行う分散リフレッシュの動作の制御を簡単に行うこ
とができる。
群（第５の実施形態においては分割の基準となる領域）
をＧＯＢとした。このようにブロック群をＧＯＢ単位と
することで、フレームを符号化した際の情報に伝送エラ
ーが発生し、情報が誤った場合でも、伝送エラーによる
画質劣化をＧＯＢ内にとどめることができ、エラー耐性
を高めることができる。また、ブロック群をＧＯＢ単位
以外でも、予め決められた領域とすると、ブロック群の
リフレッシュを一度に行う一括リフレッシュの動作、ブ
ロック群のリフレッシュをブロック毎に異なるタイミン
グで行う分散リフレッシュの動作の制御を簡単に行うこ
とができる。
【０２１９】また、上記各実施形態では、リフレッシュ
周期を１２フレームまたは３３フレームとしたが、リフ
レッシュ周期はこれらの値に限定されるものではない。
リフレッシュ周期を短くすれば、エラーに強くなり、逆
に遅くすれば、画質を向上させることができる。
周期を１２フレームまたは３３フレームとしたが、リフ
レッシュ周期はこれらの値に限定されるものではない。
リフレッシュ周期を短くすれば、エラーに強くなり、逆
に遅くすれば、画質を向上させることができる。
【０２２０】また、上記各実施形態において、現在符号
化しようとするフレームに、一括リフレッシュを行うブ
ロック群を含み、かつ、ｎ（ｎ≧１）フレーム前に符号
化したフレームに、一括リフレッシュを行うブロック群
を含まない場合、現在符号化しようとするフレームの画
質をｎフレーム前に符号化したフレームの画質より、悪
くするとしてもよい。また、現在符号化しようとするフ
レームに、一括リフレッシュを行うブロック群を含ま
ず、かつ、ｎ（ｎ≧１）フレーム前に符号化したフレー
ムに、一括リフレッシュを行うブロック群を含む場合、
現在符号化しようとするフレームの画質をｎフレーム前
に符号化したフレームの画質より良くするとしてもよ
い。
化しようとするフレームに、一括リフレッシュを行うブ
ロック群を含み、かつ、ｎ（ｎ≧１）フレーム前に符号
化したフレームに、一括リフレッシュを行うブロック群
を含まない場合、現在符号化しようとするフレームの画
質をｎフレーム前に符号化したフレームの画質より、悪
くするとしてもよい。また、現在符号化しようとするフ
レームに、一括リフレッシュを行うブロック群を含ま
ず、かつ、ｎ（ｎ≧１）フレーム前に符号化したフレー
ムに、一括リフレッシュを行うブロック群を含む場合、
現在符号化しようとするフレームの画質をｎフレーム前
に符号化したフレームの画質より良くするとしてもよ
い。
【０２２１】上記手法により、フレーム間の情報量を平
滑化することができ、コマ飛びの少ない動画像を得るこ
とができる。
滑化することができ、コマ飛びの少ない動画像を得るこ
とができる。
【０２２２】なお、画質を良くしたり悪くしたりする方
法として、符号化する際の量子化精度を変更するように
してもよい。この場合、量子化精度を上げると画質を良
くすることができ、逆に量子化精度を低下させると画質
を悪くすることができる。画質の変更に量子化精度を用
いることで、量子化精度のパラメータを変更するだけ
で、簡単に、フレーム間の情報量を平滑化することがで
き、コマ飛びの少ない動画像を得ることができる。
法として、符号化する際の量子化精度を変更するように
してもよい。この場合、量子化精度を上げると画質を良
くすることができ、逆に量子化精度を低下させると画質
を悪くすることができる。画質の変更に量子化精度を用
いることで、量子化精度のパラメータを変更するだけ
で、簡単に、フレーム間の情報量を平滑化することがで
き、コマ飛びの少ない動画像を得ることができる。
【０２２３】図２７は、上記のように量子化精度を制御
する画像符号化装置２７０１ｂの構成を示すブロック図
である。この画像符号化装置２７０１ｂは、図１３に示
す構成要素に加えて、動き情報管理部２７０４により得
られる情報に基づき符号化部２７０８における量子化精
度を制御する量子化精度制御部２７１２ｂを備えてい
る。
する画像符号化装置２７０１ｂの構成を示すブロック図
である。この画像符号化装置２７０１ｂは、図１３に示
す構成要素に加えて、動き情報管理部２７０４により得
られる情報に基づき符号化部２７０８における量子化精
度を制御する量子化精度制御部２７１２ｂを備えてい
る。
【０２２４】このような画像符号化装置２７０１ｂで
は、入力された画像Ｉmiの各フレームに対し、まず量子
化精度制御部２７１２ｂが量子化精度設定処理を行い、
その後に上記各実施形態の画像符号化方法のいずれかに
より符号化を行う。図２８は、この量子化精度設定処理
の手順を示すフローチャートである。この量子化精度設
定処理では、まず、各ＧＯＢ内の被写体の動きについて
の動き情報管理部２７０４による判別結果を用いて、現
在符号化しようとするフレームに一括リフレッシュを行
うブロック群（１度にＧＯＢリフレッシュを行うブロッ
ク群）を含むか否かを判定し（ステップ３００２）、次
に、予め設定された自然数ｎに基づき、ｎフレーム前に
符号化したフレームに一括リフレッシュを行うブロック
群を含むか否かを判定する（３００４，３００６）。こ
れらの判定の結果に応じて量子化精度制御部２７１２ｂ
は符号化部２７０８における量子化精度を制御する。す
なわち、現在符号化しようとするフレームに一括リフレ
ッシュを行うブロック群を含み、かつ、ｎフレーム前に
符号化したフレームに一括リフレッシュを行うブロック
群を含まない場合は、量子化精度のパラメータを所定値
だけ変更することにより、現在符号化しようとするフレ
ームに対する量子化精度を低下させ（ステップ３００
６）、現在符号化しようとするフレームに一括リフレッ
シュを行うブロック群を含まず、かつ、ｎフレーム前に
符号化したフレームに一括リフレッシュを行うブロック
群を含む場合は、量子化精度のパラメータを所定値だけ
変更することにより、現在符号化しようとするフレーム
に対する量子化精度を向上させ（ステップ３０１０）、
その後、量子化精度設定処理を終了する。いずれの場合
にも該当しないときは、量子化精度を変更することなく
量子化精度設定処理を終了する。
は、入力された画像Ｉmiの各フレームに対し、まず量子
化精度制御部２７１２ｂが量子化精度設定処理を行い、
その後に上記各実施形態の画像符号化方法のいずれかに
より符号化を行う。図２８は、この量子化精度設定処理
の手順を示すフローチャートである。この量子化精度設
定処理では、まず、各ＧＯＢ内の被写体の動きについて
の動き情報管理部２７０４による判別結果を用いて、現
在符号化しようとするフレームに一括リフレッシュを行
うブロック群（１度にＧＯＢリフレッシュを行うブロッ
ク群）を含むか否かを判定し（ステップ３００２）、次
に、予め設定された自然数ｎに基づき、ｎフレーム前に
符号化したフレームに一括リフレッシュを行うブロック
群を含むか否かを判定する（３００４，３００６）。こ
れらの判定の結果に応じて量子化精度制御部２７１２ｂ
は符号化部２７０８における量子化精度を制御する。す
なわち、現在符号化しようとするフレームに一括リフレ
ッシュを行うブロック群を含み、かつ、ｎフレーム前に
符号化したフレームに一括リフレッシュを行うブロック
群を含まない場合は、量子化精度のパラメータを所定値
だけ変更することにより、現在符号化しようとするフレ
ームに対する量子化精度を低下させ（ステップ３００
６）、現在符号化しようとするフレームに一括リフレッ
シュを行うブロック群を含まず、かつ、ｎフレーム前に
符号化したフレームに一括リフレッシュを行うブロック
群を含む場合は、量子化精度のパラメータを所定値だけ
変更することにより、現在符号化しようとするフレーム
に対する量子化精度を向上させ（ステップ３０１０）、
その後、量子化精度設定処理を終了する。いずれの場合
にも該当しないときは、量子化精度を変更することなく
量子化精度設定処理を終了する。
【０２２５】上記の画像符号化装置２７０１ｂでは、フ
レーム間の情報量を平滑化すべく、フレーム単位で量子
化精度を制御していたが、ＭＢＬＫ毎に異なるタイミン
グでフレーム内符号化によるリフレッシュを行うブロッ
ク群において、リフレッシュを行うＭＢＬＫの画質を、
フレーム中の他のＭＢＬＫの画質よりもよくするとして
もよい。また、リフレッシュを行うＭＢＬＫの画質の下
限値を設定し、ＭＢＬＫ毎の画質が設定した下限値を下
回らなくしてもよい。更に、リフレッシュを行うＭＢＬ
Ｋの画質が、設定した下限値を上回る場合、フレーム中
の他のＭＢＬＫの画質と同程度にし、リフレッシュを行
うＭＢＬＫの画質が設定した下限値を下回る場合、リフ
レッシュを行うＭＢＬＫの画質を設定した下限値にする
としてもよい。
レーム間の情報量を平滑化すべく、フレーム単位で量子
化精度を制御していたが、ＭＢＬＫ毎に異なるタイミン
グでフレーム内符号化によるリフレッシュを行うブロッ
ク群において、リフレッシュを行うＭＢＬＫの画質を、
フレーム中の他のＭＢＬＫの画質よりもよくするとして
もよい。また、リフレッシュを行うＭＢＬＫの画質の下
限値を設定し、ＭＢＬＫ毎の画質が設定した下限値を下
回らなくしてもよい。更に、リフレッシュを行うＭＢＬ
Ｋの画質が、設定した下限値を上回る場合、フレーム中
の他のＭＢＬＫの画質と同程度にし、リフレッシュを行
うＭＢＬＫの画質が設定した下限値を下回る場合、リフ
レッシュを行うＭＢＬＫの画質を設定した下限値にする
としてもよい。
【０２２６】上記手法により、静止領域において、リフ
レッシュによる量子化歪みを無くすことができる。
レッシュによる量子化歪みを無くすことができる。
【０２２７】なお、画質を良くしたり悪くしたりする方
法として、先に述べたように、符号化する際の量子化精
度を変更してもよい。この場合、量子化精度を上げると
画質を良くすることができ、逆に量子化精度を低下させ
ると画質を悪くすることができる。画質の変更に量子化
精度を用いることで、量子化精度のパラメータを変更す
るだけで、簡単に、静止領域において、リフレッシュに
よる量子化歪みを無くすことができる。
法として、先に述べたように、符号化する際の量子化精
度を変更してもよい。この場合、量子化精度を上げると
画質を良くすることができ、逆に量子化精度を低下させ
ると画質を悪くすることができる。画質の変更に量子化
精度を用いることで、量子化精度のパラメータを変更す
るだけで、簡単に、静止領域において、リフレッシュに
よる量子化歪みを無くすことができる。
【０２２８】図２９は、上記のようにして量子化精度を
制御する画像符号化装置２７０１ｃの構成を示すブロッ
ク図である。この画像符号化装置２７０１ｃは、図１３
に示す構成要素に加えて、分散リフレッシュ部２７０７
から出力されるタイミング情報に基づき符号化部２７０
８における量子化精度を制御する量子化精度制御部２７
１２ｃを備えている。
制御する画像符号化装置２７０１ｃの構成を示すブロッ
ク図である。この画像符号化装置２７０１ｃは、図１３
に示す構成要素に加えて、分散リフレッシュ部２７０７
から出力されるタイミング情報に基づき符号化部２７０
８における量子化精度を制御する量子化精度制御部２７
１２ｃを備えている。
【０２２９】図３０は、上記の画像符号化装置２７０１
ｃにおける分散リフレッシュの手順の一例を示すフロー
チャートであって、例えば図２のフローチャートにおけ
るステップ２０８および２１３の内部処理を示してい
る。この画像符号化装置２７０１ｃでは、量子化制御部
２７１２ｃが、分散リフレッシュの時期を示すタイミン
グ情報を分散リフレッシュ部２７０７から受け取り、分
散リフレッシュモードにおいてリフレッシュ対象のＭＢ
ＬＫＧ（Ｉ）に属するブロックを符号化する前に、ま
ず、量子化精度のパラメータを所定値だけ変更すること
により現時点の量子化精度を向上させる（ステップ３１
０２）。その後、ＭＢＬＫＧ（Ｉ）に属するＭＢＬＫを
フレーム内符号化すなわちリフレッシュする（ステップ
３１０４）。このリフレッシュ後は、量子化精度のパラ
メータを変更前に戻し（ステップ３１０６）、Ｉをイン
クリメントして（ステップ３１０８）、１回分の分散リ
フレッシュを終了する。
ｃにおける分散リフレッシュの手順の一例を示すフロー
チャートであって、例えば図２のフローチャートにおけ
るステップ２０８および２１３の内部処理を示してい
る。この画像符号化装置２７０１ｃでは、量子化制御部
２７１２ｃが、分散リフレッシュの時期を示すタイミン
グ情報を分散リフレッシュ部２７０７から受け取り、分
散リフレッシュモードにおいてリフレッシュ対象のＭＢ
ＬＫＧ（Ｉ）に属するブロックを符号化する前に、ま
ず、量子化精度のパラメータを所定値だけ変更すること
により現時点の量子化精度を向上させる（ステップ３１
０２）。その後、ＭＢＬＫＧ（Ｉ）に属するＭＢＬＫを
フレーム内符号化すなわちリフレッシュする（ステップ
３１０４）。このリフレッシュ後は、量子化精度のパラ
メータを変更前に戻し（ステップ３１０６）、Ｉをイン
クリメントして（ステップ３１０８）、１回分の分散リ
フレッシュを終了する。
【０２３０】図３１は、上記の画像符号化装置２７０１
ｃにおける分散リフレッシュの手順の他の例を示すフロ
ーチャートである。この例では、量子化制御部２７１２
ｃが、分散リフレッシュの時期を示すタイミング情報を
分散リフレッシュ部２７０７から受け取り、分散リフレ
ッシュモードにおいてリフレッシュ対象のＭＢＬＫＧ
（Ｉ）に属するブロックを符号化する前に、まず、現時
点の量子化精度が予め設定された下限値よりも低いか否
かを判定する（ステップ３１１４）。次に量子化精度制
御部２７１２ｃは、この判定の結果に応じて符号化部２
７０８における量子化精度を制御する。すなわち、量子
化精度が下限値よりも低い場合は、量子化精度を下限値
に設定し（ステップ３１１４）、量子化精度が下限値以
上の場合は、量子化精度を他のＭＢＬＫ（今回の分散リ
フレッシュの対象以外のブロック）の量子化精度と同程
度に設定する（ステップ３１１６）。その後、ＭＢＬＫ
Ｇ（Ｉ）に属するＭＢＬＫをフレーム内符号化すなわち
リフレッシュする（ステップ３１１８）。このリフレッ
シュ後は、量子化精度を変更前の精度に戻し（ステップ
３１２０）、Ｉをインクリメントして（ステップ３１２
２）、１回分の分散リフレッシュを終了する。
ｃにおける分散リフレッシュの手順の他の例を示すフロ
ーチャートである。この例では、量子化制御部２７１２
ｃが、分散リフレッシュの時期を示すタイミング情報を
分散リフレッシュ部２７０７から受け取り、分散リフレ
ッシュモードにおいてリフレッシュ対象のＭＢＬＫＧ
（Ｉ）に属するブロックを符号化する前に、まず、現時
点の量子化精度が予め設定された下限値よりも低いか否
かを判定する（ステップ３１１４）。次に量子化精度制
御部２７１２ｃは、この判定の結果に応じて符号化部２
７０８における量子化精度を制御する。すなわち、量子
化精度が下限値よりも低い場合は、量子化精度を下限値
に設定し（ステップ３１１４）、量子化精度が下限値以
上の場合は、量子化精度を他のＭＢＬＫ（今回の分散リ
フレッシュの対象以外のブロック）の量子化精度と同程
度に設定する（ステップ３１１６）。その後、ＭＢＬＫ
Ｇ（Ｉ）に属するＭＢＬＫをフレーム内符号化すなわち
リフレッシュする（ステップ３１１８）。このリフレッ
シュ後は、量子化精度を変更前の精度に戻し（ステップ
３１２０）、Ｉをインクリメントして（ステップ３１２
２）、１回分の分散リフレッシュを終了する。
【図１】本発明の第１の実施形態に係る画像符号化方法
によるリフレッシュ動作の一例を示す図。
によるリフレッシュ動作の一例を示す図。
【図２】第１の実施形態に係る画像符号化方法を示すフ
ローチャート。
ローチャート。
【図３】本発明の第１の実施形態の変形例である画像符
号化方法を示すフローチャート。
号化方法を示すフローチャート。
【図４】本発明の第２の実施形態に係る画像符号化方法
によるリフレッシュ動作の一例を示す図。
によるリフレッシュ動作の一例を示す図。
【図５】第２の実施形態に係る画像符号化方法を示すフ
ローチャート。
ローチャート。
【図６】本発明の第３の実施形態に係る画像符号化方法
を示すフローチャート。
を示すフローチャート。
【図７】第３の実施形態に係る画像符号化方法によるリ
フレッシュ動作の一例を示す図。
フレッシュ動作の一例を示す図。
【図８】本発明の第４の実施形態に係る画像符号化方法
を示すフローチャート。
を示すフローチャート。
【図９】第４の実施形態に係る画像符号化方法によるリ
フレッシュ動作の一例を示す図。
フレッシュ動作の一例を示す図。
【図１０】第４の実施形態の変形例である画像符号化方
法を示すフローチャート。
法を示すフローチャート。
【図１１】本発明の第５の実施形態に係る画像符号化方
法によるリフレッシュ動作の一例を示す図。
法によるリフレッシュ動作の一例を示す図。
【図１２】本発明の第７の実施形態に係る画像符号化方
法におけるしきい値設定処理の手順を示すフローチャー
ト。
法におけるしきい値設定処理の手順を示すフローチャー
ト。
【図１３】第１ないし第７の実施形態に係る画像符号化
方法に基づく画像伝送システムの構成を示すブロック
図。
方法に基づく画像伝送システムの構成を示すブロック
図。
【図１４】本発明の第８の実施形態に係る画像符号化方
法によるリフレッシュ動作の一例を示す図。
法によるリフレッシュ動作の一例を示す図。
【図１５】第８の実施形態に係る画像符号化方法を示す
フローチャート。
フローチャート。
【図１６】第８の実施形態に係る画像符号化方法におけ
る動き判定モード選択処理の手順を示すフローチャー
ト。
る動き判定モード選択処理の手順を示すフローチャー
ト。
【図１７】第８の実施形態に係る画像符号化方法で使用
されるＧＯＢ分類情報の配列への格納例を示す図。
されるＧＯＢ分類情報の配列への格納例を示す図。
【図１８】第８の実施形態に係る画像符号化方法におけ
る動きベクトル制限付き符号化処理を示すフローチャー
ト。
る動きベクトル制限付き符号化処理を示すフローチャー
ト。
【図１９】第８の実施形態に係る画像符号化方法におけ
る動きベクトル探索範囲の制限例を示す図。
る動きベクトル探索範囲の制限例を示す図。
【図２０】第８の実施形態に係る画像符号化方法におけ
る動き情報格納管理処理の手順を示すフローチャート。
る動き情報格納管理処理の手順を示すフローチャート。
【図２１】第８の実施形態に係る画像符号化方法で使用
される動き情報の格納管理例を示す図。
される動き情報の格納管理例を示す図。
【図２２】第８の実施形態に係る画像符号化方法におけ
る動き情報保持時間算出処理の手順を示すフローチャー
ト。
る動き情報保持時間算出処理の手順を示すフローチャー
ト。
【図２３】第８の実施形態に係る画像符号化方法で使用
される動き情報保持時間の配列への格納例を示す図。
される動き情報保持時間の配列への格納例を示す図。
【図２４】第８の実施形態に係る画像符号化方法におけ
る動き情報保持時間管理処理の手順を示すフローチャー
ト。
る動き情報保持時間管理処理の手順を示すフローチャー
ト。
【図２５】第８の実施形態の変形例における動き判定モ
ード選択処理を説明するための図。
ード選択処理を説明するための図。
【図２６】第８の実施形態に係る画像符号化方法に基づ
く画像伝送システムの構成を示すブロック図。
く画像伝送システムの構成を示すブロック図。
【図２７】第１の実施形態の第１の変形例である画像符
号化方法に基づく画像符号化装置の構成を示すブロック
図。
号化方法に基づく画像符号化装置の構成を示すブロック
図。
【図２８】第１の実施形態の第１の変形例である画像符
号化方法における量子化精度設定処理の手順を示すフロ
ーチャート。
号化方法における量子化精度設定処理の手順を示すフロ
ーチャート。
【図２９】第１の実施形態の第２の変形例である画像符
号化方法に基づく画像符号化装置の構成を示すブロック
図。
号化方法に基づく画像符号化装置の構成を示すブロック
図。
【図３０】第１の実施形態の第２の変形例における分散
リフレッシュの手順を示すフローチャート。
リフレッシュの手順を示すフローチャート。
【図３１】第１の実施形態の第２の変形例における分散
リフレッシュの手順の他の例を示すフローチャート。
リフレッシュの手順の他の例を示すフローチャート。
【図３２】本発明の第９の実施形態に係る画像符号化方
法を示すフローチャート。
法を示すフローチャート。
【図３３】第９の実施形態におけるリフレッシュ周期の
算出方法を示すフローチャート。
算出方法を示すフローチャート。
【図３４】本発明の応用分野を説明するためのシステム
図。
図。
【図３５】画像データの符号化器および復号化器の従来
例の構成を示すブロック図。
例の構成を示すブロック図。
【図３６】従来の画像符号化におけるリフレッシュ方法
を説明するための図。
を説明するための図。
【図３７】従来の画像符号化におけるリフレッシュ動作
の一例を示す図。
の一例を示す図。
２７０１，２７０１ｂ，２７０１ｃ …画像符号化装置 ２７０２ …リフレッシュ周期管理部 ２７０４ …動き情報管理部 ２７０５ …モード選択部 ２７０６ …一括リフレッシュ部 ２７０７ …分散リフレッシュ部 ２７０８ …符号化部 ２７１２ｂ，２７１２ｃ …量子化精度制御部 ２８０１ …画像符号化装置 ２８０３ …エラー通知保持部 ２８０５ …動き情報保持時間管理部 ２８０６ …動き情報格納管理部 ２８０７ …動き情報保持時間算出部 ２８０８ …第２のモード選択部 ２８０９ …一括リフレッシュ部 ２８１０ …分散リフレッシュ部 ２８０９１…動きベクトル探索範囲制限部 ２８１２ …符号化部 ２８１３ …画像復号化装置 ２８１４ …エラー通知部 ２８１５ …エラー検出部 ＧＯＢ１〜ＧＯＢ１２ …グループオブブロック ＭＢＬＫ１〜ＭＢＬＫ３３ …マクロブロック
Claims (98)
- 【請求項１】 動画像の各フレームを予め決められた個
数ｍのブロック群に分割し、各ブロック群に含まれるブ
ロックを単位としてフレーム間符号化方式とフレーム内
符号化方式との間で符号化方式を切り換えつつ動画像を
符号化する画像符号化装置であって、 各フレームにおける前記個数ｍのブロック群のそれぞれ
の領域内の被写体に所定時点から所定時間Ｔだけ経過す
る間に予め決められたしきい値以上の動きがあるか否か
を判別する動き判別手段と、 一つのブロック群に含まれる全てのブロックを同一フレ
ームの符号化過程でフレーム内符号化することとして定
義される一括リフレッシュを、前記動き判別手段により
前記しきい値以上の動きがあると判別された領域のブロ
ック群に対して行う一括リフレッシュ手段と、 各フレームにおけるブロック群のうちフレーム内の位置
が同一であるブロック群を同一ブロック群と見なして一
つのブロック群に含まれる各ブロックをブロック毎に異
なるフレームの符号化過程でフレーム内符号化すること
として定義される分散リフレッシュを、前記動き判別手
段により前記しきい値以上の動きがないと判別された領
域のブロック群に対して行う分散リフレッシュ手段と、
を備える画像符号化装置。 - 【請求項２】 前記一括リフレッシュ手段は、前記動き
判別手段による判別結果に基づき、前記一括リフレッシ
ュを行ったブロック群に対し、該ブロック群の領域内の
被写体に前記しきい値以上の動きがなくなってからもＭ
Ｓ回（ＭＳは所定の自然数）は一括リフレッシュを行
う、請求項１に記載の画像符号化装置。 - 【請求項３】 前記しきい値以上の動きがあると判別さ
れた領域のブロック群に対する前記一括リフレッシュを
前記一括リフレッシュ手段が前記所定時点から前記時間
Ｔだけ経過した時点におけるフレームの符号化過程で行
い、前記しきい値以上の動きがないと判別された領域の
ブロック群に対する前記分散リフレッシュを前記分散リ
フレッシュ手段が前記所定時点から前記時間Ｔだけ経過
する間に完了するように、前記一括リフレッシュおよび
前記分散リフレッシュのタイミングを管理するリフレッ
シュタイミング管理手段を更に備える請求項１に記載の
画像符号化装置。 - 【請求項４】 前記分散リフレッシュ手段は、前記分散
リフレッシュの過程にあるブロック群のブロックがＳ回
（Ｓは所定の自然数）以上続けてブロック毎に異なるフ
レームでフレーム内符号化された場合には、該ブロック
群に対する前記分散リフレッシュを前記時間Ｔよりも長
い所定時間Ｔ’が経過する間に完了する、請求項３に記
載の画像符号化装置。 - 【請求項５】 前記分散リフレッシュ手段は、分散リフ
レッシュを行うべきブロック群を、前記時間Ｔに相当す
るフレーム数に等しい個数のサブブロック群に分割し、
１フレームの符号化過程で１サブブロック群をフレーム
内符号化する、請求項３に記載の画像符号化装置。 - 【請求項６】 前記分散リフレッシュ手段は、分散リフ
レッシュを行うべきブロック群を、前記時間Ｔ’に相当
するフレーム数に等しい個数のサブブロック群に分割
し、１フレームの符号化過程で１サブブロック群をフレ
ーム内符号化する、請求項４に記載の画像符号化装置。 - 【請求項７】 前記一括リフレッシュ手段は、前記所定
時間Ｔ’が経過する間に前記分散リフレッシュが完了す
るブロック群の割合に応じて前記時間Ｔよりも短い所定
時間Ｔ’’が経過した時点におけるフレームの符号化過
程で前記一括リフレッシュを行う、請求項４に記載の画
像符号化装置。 - 【請求項８】 前記リフレッシュタイミング管理手段
は、前記所定時間Ｔ’’を下記の式により算出する、請
求項７に記載の画像符号化装置： Ｔ’’＝ｋＴ（ｍ−Ｂ）／（ｍｋ−Ｂ） ここで、ｍは各フレームにおけるブロック群の前記個数
であり、Ｂは前記所定時間Ｔ’が経過する間に前記分散
リフレッシュが完了するブロック群の数であってｍ以下
の整数であり、ｋはＴ’／Ｔである。 - 【請求項９】 動画像の各フレームを予め決められた個
数ｍのブロック群に分割し、各ブロック群に含まれるブ
ロックを単位としてフレーム間符号化方式とフレーム内
符号化方式との間で符号化方式を切り換えつつ動画像を
符号化する画像符号化装置であって、 一つのブロック群に含まれる全てのブロックを同一フレ
ームの符号化過程でフレーム内符号化することとして定
義される一括リフレッシュを、各フレームにつき高々一
つのブロック群に対して行う一括リフレッシュ手段と、 各フレームにおけるブロック群のうちフレーム内の位置
が同一であるブロック群に対して一括リフレッシュを行
う間隔に相当するフレーム数Ｔｆが前記個数ｍよりも大
きくなるように、一括リフレッシュのタイミングを管理
するリフレッシュタイミング管理手段と、を備える画像
符号化装置。 - 【請求項１０】 前記リフレッシュタイミング管理手段
は、各フレームにおけるブロックのうちフレーム内の位
置が同一であるブロックに対してフレーム内符号化を行
う間隔に相当するフレーム数Ｔｆが前記個数ｍよりも大
きくなるように、フレーム内符号化を行うタイミングを
管理する、請求項３に記載の画像符号化装置。 - 【請求項１１】 各フレームにおけるブロック群のうち
フレーム内の位置が同一であるブロックに対して前記一
括リフレッシュ手段または前記分散リフレッシュ手段に
よりフレーム内符号化が行われる間隔を前記時間Ｔとす
るリフレッシュタイミング管理手段を更に備え、 前記動き判別手段は、前記リフレッシュタイミング管理
手段による管理に基づき、各フレームにおける前記個数
ｍのブロック群のそれぞれの領域毎に１フレームずつず
れた時点から前記時間Ｔだけ経過する間にそれぞれの領
域内の被写体に前記しきい値以上の動きがあるか否かを
判別し、 前記一括リフレッシュ手段は、前記リフレッシュタイミ
ング管理手段による管理に基づき、各フレームにつき高
々一つのブロック群に対して一括リフレッシュを行う、
請求項１に記載の画像符号化装置。 - 【請求項１２】 前記リフレッシュタイミング管理手段
による管理に基づき、各フレームにおける前記個数ｍの
ブロック群のそれぞれの領域毎に１フレームずつずれた
時点から前記時間Ｔだけ経過する間にそれぞれの領域内
の被写体に前記しきい値以上の動きがあるか否かを判別
する動き判別手段を更に備え、 前記一括リフレッシュ手段は、前記動き判別手段により
前記しきい値以上の動きがあると判別された領域のブロ
ック群に対して前記一括リフレッシュを行う、請求項９
に記載の画像符号化装置。 - 【請求項１３】 前記動き判別手段は、分散リフレッシ
ュを行うブロック群の領域ついても、該分散リフレッシ
ュと並行して、各ブロック群のそれぞれの領域毎に１フ
レームずつずれた時点から前記時間Ｔだけ経過する間に
それぞれの領域内の被写体に前記しきい値以上の動きが
あるか否かを検出することにより動きの有無を判別し、 前記分散リフレッシュ手段は、前記分散リフレッシュの
過程にあるブロック群の領域内の被写体に前記しきい値
以上の動きが前記動き判別手段により検出されると、該
ブロック群に対する前記分散リフレッシュを中断し、 前記一括リフレッシュ手段は、前記しきい値以上の動き
が検出された領域のブロック群に対する前記分散リフレ
ッシュが開始された時点から前記時間Ｔだけ経過した後
に、該領域のブロック群に対し一括リフレッシュを行
う、請求項１１に記載の画像符号化装置。 - 【請求項１４】 前記動き判別手段は、前記分散リフレ
ッシュ手段による分散リフレッシュと並行して、各ブロ
ック群のそれぞれの領域毎に１フレームずつずれた時点
から前記時間Ｔだけ経過する間にそれぞれの領域内の被
写体に前記しきい値以上の動きがあるか否かを検出する
ことにより動きの有無を判別し、 前記分散リフレッシュ手段は、各ブロック群に対し、該
ブロック群の領域内の被写体の動きの有無の判別が前記
動き判別手段により開始された時点から前記分散リフレ
ッシュを行い、前記分散リフレッシュの過程にあるブロ
ック群の領域内の被写体に前記しきい値以上の動きが検
出されると、該ブロック群に対する前記分散リフレッシ
ュを中断し、 前記一括リフレッシュ手段は、前記しきい値以上の動き
が検出された領域のブロック群に対する分散リフレッシ
ュが開始された時点から前記時間Ｔだけ経過した後に、
該領域のブロック群に対し一括リフレッシュを行う、請
求項１１に記載の画像符号化装置。 - 【請求項１５】 前記動き判別手段は、各ブロック群の
領域を所定数の分割領域に分割して、分割領域毎に被写
体に予め設定されたしきい値以上の動きがあるか否かを
検出することにより各分割領域における動きの有無を判
別し、 前記一括リフレッシュ手段は、動きがあると判別された
前記分割領域を含む領域の前記ブロック群に対する次の
一括リフレッシュの時点におけるフレームの符号化過程
で、前記一括リフレッシュに代えて、該分割領域の全て
のブロックをフレーム内符号化する、請求項１１に記載
の画像符号化装置。 - 【請求項１６】 前記動き判別手段は、各ブロック群の
領域を所定数の分割領域に分割して、分割領域毎に被写
体に予め設定されたしきい値以上の動きがあるか否かを
検出することにより各分割領域における動きの有無を判
別し、 前記分散リフレッシュ手段は、前記分散リフレッシュの
過程にあるブロック群の領域に含まれる分割領域に動き
があると前記動き判別手段により判別されると、該分割
領域を含む領域のブロック群に対する分散リフレッシュ
を中断し、 前記一括リフレッシュ手段は、動きがあると判別された
前記分割領域を含む領域の前記ブロック群に対する次の
一括リフレッシュの時点におけるフレームの符号化過程
で、前記一括リフレッシュに代えて該分割領域の全ての
ブロックをフレーム内符号化する、請求項１１に記載の
画像符号化装置。 - 【請求項１７】 前記一括リフレッシュ手段は、被写体
が縦長の場合または被写体が縦方向に移動する場合に、
縦横に配列されたブロック群のうち一括リフレッシュを
行うブロック群を縦方向に変更していく、請求項１１に
記載の画像符号化装置。 - 【請求項１８】 前記一括リフレッシュ手段は、被写体
が横長の場合または被写体が横方向に移動する場合に、
縦横に配列されたブロック群のうち一括リフレッシュを
行うブロック群を横方向に変更していく、請求項１１に
記載の画像符号化装置。 - 【請求項１９】 前記動き判別手段は前記しきい値を変
更するしきい値設定手段を有する、請求項１に記載の画
像符号化装置。 - 【請求項２０】 前記しきい値設定手段は、 カメラまたは映像のブレ量を検出する手段と、 前記ブレ量に応じて異なる値を前記しきい値として設定
する手段と、を有する、請求項１９に記載の画像符号化
装置。 - 【請求項２１】 前記動き判別手段による判別結果に基
づき、現在符号化しようとするフレームに一括リフレッ
シュを行うブロック群が含まれ、かつ、ｎ（ｎは予め決
められた自然数）フレーム前に符号化されたフレームに
一括リフレッシュを行うブロック群が含まれない場合
に、現在符号化しようとするフレームの画質を前記ｎフ
レーム前に符号化されたフレームの画質より悪くする符
号化精度制御手段を更に備える、請求項１に記載の画像
符号化装置。 - 【請求項２２】 前記動き判別手段による判別結果に基
づき、現在符号化しようとするフレームに一括リフレッ
シュを行うブロック群が含まれ、かつ、ｎ（ｎは予め決
められた自然数）フレーム前に符号化されたフレームに
一括リフレッシュを行うブロック群が含まれない場合
に、現在符号化しようとするフレームの画質をｎフレー
ム前に符号化されたフレームの画質より悪くする符号化
精度制御手段を更に備える、請求項９に記載の画像符号
化装置。 - 【請求項２３】 前記動き判別手段による判別結果に基
づき、現在符号化しようとするフレームに一括リフレッ
シュを行うブロック群が含まれず、かつ、ｎ（ｎは予め
決められた自然数）フレーム前に符号化されたフレーム
に一括リフレッシュを行うブロック群が含まれる場合
に、現在符号化しようとするフレームの画質をｎフレー
ム前に符号化されたフレームの画質より良くする符号化
精度制御手段を更に備える、請求項１に記載の画像符号
化装置。 - 【請求項２４】 前記動き判別手段による判別結果に基
づき、現在符号化しようとするフレームに一括リフレッ
シュを行うブロック群が含まれず、かつ、ｎ（ｎは予め
決められた自然数）フレーム前に符号化されたフレーム
に一括リフレッシュを行うブロック群が含まれる場合
に、現在符号化しようとするフレームの画質をｎフレー
ム前に符号化されたフレームの画質より良くする符号化
精度制御手段を更に備える、請求項９に記載の画像符号
化装置。 - 【請求項２５】 前記符号化精度制御手段は、前記現在
符号化しようとするフレームの量子化精度を低下させる
ことにより、前記現在符号化しようとするフレームの画
質を前記ｎフレーム前に符号化したフレームの画質より
悪くする量子化精度制御手段を含む、請求項２１に記載
の画像符号化装置。 - 【請求項２６】 前記符号化精度制御手段は、前記現在
符号化しようとするフレームの量子化精度を向上させる
ことにより、前記現在符号化しようとするフレームの画
質を前記ｎフレーム前に符号化したフレームの画質より
良くする量子化精度制御手段を含む、請求項２３に記載
の画像符号化装置。 - 【請求項２７】 前記分散リフレッシュ手段により分散
リフレッシュが行われるブロック群に含まれるブロック
のうちフレーム内符号化されるブロックの画質を、前記
ブロック群を含むフレームにおける他のブロックの画質
よりも良くする符号化制御手段を更に備える、請求項１
に記載の画像符号化装置。 - 【請求項２８】 前記分散リフレッシュ手段により分散
リフレッシュが行われるブロック群に含まれるブロック
のうちフレーム内符号化されるブロックの画質を予め設
定された下限値より低下しないように符号化の精度を制
御する符号化精度制御手段を更に備える、請求項１に記
載の画像符号化装置。 - 【請求項２９】 前記分散リフレッシュ手段により分散
リフレッシュが行われるブロック群に含まれるブロック
のうちフレーム内符号化されるブロックの画質が予め設
定された下限値よりも高い場合に、該画質を前記ブロッ
ク群を含むフレームにおける他のブロックの画質と同等
とし、フレーム内符号化される前記ブロックの画質が前
記下限値よりも低い場合に、該画質を前記下限値とする
ように、符号化の精度を制御する符号化精度制御手段を
更に備える、請求項１に記載の画像符号化装置。 - 【請求項３０】 前記符号化精度制御手段は、フレーム
内符号化される前記ブロックの量子化精度を前記フレー
ムにおける他のブロックの量子化精度よりも高くする量
子化精度制御手段を含む、請求項２７に記載の画像符号
化装置。 - 【請求項３１】 前記分散リフレッシュ手段により分散
リフレッシュが行われるブロック群に含まれるブロック
のうちフレーム内符号化されるブロックの量子化精度を
予め設定された下限値より低下しないように量子化精度
を制御する量子化精度制御手段を更に備える、請求項１
に記載の画像符号化装置。 - 【請求項３２】 前記分散リフレッシュ手段により分散
リフレッシュが行われるブロック群に含まれるブロック
のうちフレーム内符号化されるブロックの量子化精度が
予め設定された下限値よりも高い場合に、該量子化精度
を前記ブロック群を含むフレームにおける他のブロック
の量子化精度と同等とし、フレーム内符号化される前記
ブロックの量子化精度が前記下限値よりも低い場合に、
該量子化精度を前記下限値とするように、量子化精度を
制御する量子化精度制御手段を更に備える、請求項１に
記載の画像符号化装置。 - 【請求項３３】 各ブロック群は、各フレームにおける
ｍ個の予め決められた領域のそれぞれにおける複数ブロ
ックより構成されている、請求項１に記載の画像符号化
装置。 - 【請求項３４】 各ブロック群は、各フレームにおける
ｍ個の予め決められた領域のそれぞれにおける複数ブロ
ックより構成されている、請求項９に記載の画像符号化
装置。 - 【請求項３５】 前記予め決められた領域はグループオ
ブブロックである、請求項３３に記載の画像符号化装
置。 - 【請求項３６】 前記予め決められた領域はグループオ
ブブロックである、請求項３４に記載の画像符号化装
置。 - 【請求項３７】 動画像の各フレームを予め決められた
個数ｍのブロック群に分割し、各ブロック群に含まれる
ブロックを単位としてフレーム間符号化方式とフレーム
内符号化方式との間で符号化方式を切り換えつつ動画像
を符号化する画像符号化装置であって、 各ブロック群の符号化により所定時点から所定時間Ｔだ
け経過する間に発生する符号化量が予め決められたしき
い値以上であるか否かを判定する符号化量判定手段と、 一つのブロック群に含まれる全てのブロックを同一フレ
ームの符号化過程でフレーム内符号化することとして定
義される一括リフレッシュを、前記符号化量判定手段に
より前記符号化量が前記しきい値以上であると判定され
たブロック群に対して行う一括リフレッシュ手段と、 各フレームにおけるブロック群のうちフレーム内の位置
が同一であるブロック群を同一ブロック群と見なして一
つのブロック群に含まれる各ブロックをブロック毎に異
なるフレームの符号化過程でフレーム内符号化すること
として定義される分散リフレッシュを、前記符号化量判
定手段により前記符号化量が前記しきい値よりも少ない
と判定されたブロック群に対して行う分散リフレッシュ
手段と、を備える画像符号化装置。 - 【請求項３８】 動画像を符号化し該動画像の符号化デ
ータを送出する符号化装置と、送出された前記符号化デ
ータを受信して復号化するとともに、復号化すべき前記
符号化データにおけるエラーの検出を行い、エラーが検
出されるとエラー通知を前記符号化装置へ送る復号化装
置とにより構成される画像伝送システムにおいて前記符
号化装置として使用され、前記動画像の各フレームを予
め決められた個数ｍのブロック群に分割して、各ブロッ
ク群に含まれるブロックを単位としてフレーム間符号化
方式とフレーム内符号化方式との間で符号化方式を切り
換えつつ前記動画像を符号化する画像符号化装置であっ
て、 前記エラー通知を受信するエラー受信手段と、 前記エラー受信手段により前記エラー通知が受信された
場合に、前記エラー通知の受信の時点から所定時間ＲＴ
ｍａｘだけ前までの間に符号化された各フレームにおけ
る各ブロック群の領域内の被写体に予め決められたしき
い値以上の動きがあるか否かを判別し、前記しきい値以
上の動きがある領域のブロック群に対してフレーム内符
号化によるリフレッシュを行うことを決定するリフレッ
シュ選択手段と、 一つのブロック群に含まれる全てのブロックを同一フレ
ームの符号化過程でフレーム内符号化することとして定
義される一括リフレッシュを、前記リフレッシュ選択手
段によりリフレッシュを行うことが決定されたブロック
群に対して行う一括リフレッシュ手段と、を備える画像
符号化装置。 - 【請求項３９】 各フレームにおけるブロック群のうち
フレーム内の位置が同一であるブロック群を同一ブロッ
ク群と見なして一つのブロック群に含まれる各ブロック
をブロック毎に異なるフレームの符号化過程でフレーム
内符号化することとして定義される分散リフレッシュ
を、前記リフレッシュ選択手段によりリフレッシュを行
うことが決定されたブロック群以外のブロック群に対し
て行う分散リフレッシュ手段を更に備える、請求項３８
に記載の画像符号化装置。 - 【請求項４０】 前記リフレッシュ選択手段は、 前記動画像の各フレームに対する符号化の際に当該フレ
ームにおける各ブロック群の領域内の被写体の動きの大
きさを示す動き情報を格納し、該動き情報を当該フレー
ムに対する符号化の時点から所定時間ＲＴｍａｘが経過
するまでは保持する動き情報格納管理手段を含み、 前記動き情報格納管理手段により保持されている前記動
き情報に基づき、前記エラー通知の受信の時点から前記
時間ＲＴｍａｘだけ前までの間に符号化された各フレー
ムにおける各ブロック群の領域内の被写体に前記しきい
値以上の動きがあるか否かを判別する、請求項３８に記
載の画像符号化装置。 - 【請求項４１】 前記時間ＲＴｍａｘは、前記動画像に
おけるいずれかのフレームが符号化される時点から、該
フレームの符号化データが前記復号化装置へ送られ、該
符号化データにエラーが検出されたときに前記エラー通
知を前記エラー受信手段が受信する時点までの時間の最
大値である、請求項３８に記載の画像符号化装置。 - 【請求項４２】 前記動画像における各フレームが符号
化される時点から、該フレームの符号化データが前記復
号化装置へ送られ、該符号化データにエラーが検出され
たときに前記エラー通知を前記エラー受信手段が受信す
る時点までの時間を、前記時間ＲＴｍａｘとして前記動
画像の各フレーム毎に算出する時間算出手段を更に備
え、 前記動き情報格納管理手段は、前記時間算出手段により
算出された前記時間ＲＴｍａｘに基づき前記動き情報を
保持する、請求項４０に記載の画像符号化装置。 - 【請求項４３】 前記一括リフレッシュ手段は、領域の
異なる複数のブロック群に対してリフレッシュを行うこ
とが前記リフレッシュ選択手段により決定された場合
に、該複数のブロック群を順次１フレームずつずらして
各々１回づつ一括リフレッシュする、請求項３８に記載
の画像符号化装置。 - 【請求項４４】 前記リフレッシュ選択手段は、前記一
括リフレッシュ手段が前記複数のブロック群を順次１フ
レームずつずらして各々１回づつ一括リフレッシュして
いる間に前記エラー受信手段により前記エラー通知が受
信された場合に、該受信の時点から前記時間ＲＴｍａｘ
だけ前までの間に符号化された各フレームにおける各ブ
ロック群の領域内の被写体に前記しきい値以上の動きが
あるか否かを判別し、該判別結果に基づき、前記しきい
値以上の動きがある領域のブロック群を、リフレッシュ
を行うブロック群として追加的に決定し、 前記一括リフレッシュ手段は、リフレッシュを行うこと
が前記リフレッシュ選択手段により決定されている複数
のブロック群を、リフレッシュを行うことが重複して決
定されたブロック群をも含めて、順次１フレームずつず
らして各々１回づつ一括リフレッシュする、請求項４３
に記載の画像符号化装置。 - 【請求項４５】 前記動き情報格納管理手段は、前記動
画像の各フレームに対する符号化の際に、該符号化にお
いて一括リフレッシュが行われたブロック群に対する前
記動き情報として前記しきい値以上の動きを示す所定の
動き情報を格納し、該所定の動き情報を該符号化の時点
から前記時間ＲＴｍａｘが経過するまでは保持してい
る、請求項４０に記載の画像符号化装置。 - 【請求項４６】 前記一括リフレッシュが行われないブ
ロック群のブロックのうち、前記一括リフレッシュが行
われるべきブロック群であってかつ前記一括リフレッシ
ュが行われていない一括リフレッシュ待ちブロック群に
接するブロックの符号化に際し、該一括リフレッシュ待
ちブロック群が参照されないように動きベクトル探索範
囲を制限する探索範囲制限手段を更に備える、請求項３
８に記載の画像符号化装置。 - 【請求項４７】 前記探索範囲制限手段は、前記一括リ
フレッシュが行われる期間は、各ブロック群のブロック
の符号化に際し、自ブロック群以外のブロック群のブロ
ックが参照されないように動きベクトル探索範囲を制限
する、請求項４６に記載の画像符号化装置。 - 【請求項４８】 動画像の各フレームを予め決められた
個数ｍのブロック群に分割し、各ブロック群に含まれる
ブロックを単位としてフレーム間符号化方式とフレーム
内符号化方式との間で符号化方式を切り換えつつ動画像
を符号化する画像符号化方法であって、 各フレームにおける前記個数ｍのブロック群のそれぞれ
の領域内の被写体に所定時点から所定時間Ｔだけ経過す
る間に予め決められたしきい値以上の動きがあるか否か
を判別する動き判別ステップと、 一つのブロック群に含まれる全てのブロックを同一フレ
ームの符号化過程でフレーム内符号化することとして定
義される一括リフレッシュを、前記動き判別ステップで
前記しきい値以上の動きがあると判別された領域のブロ
ック群に対して行う一括リフレッシュステップと、 各フレームにおけるブロック群のうちフレーム内の位置
が同一であるブロック群を同一ブロック群と見なして一
つのブロック群に含まれる各ブロックをブロック毎に異
なるフレームの符号化過程でフレーム内符号化すること
として定義される分散リフレッシュを、前記動き判別ス
テップで前記しきい値以上の動きがないと判別された領
域のブロック群に対して行う分散リフレッシュステップ
と、を備える画像符号化方法。 - 【請求項４９】 前記動き判別ステップにおける判別結
果に基づき、前記一括リフレッシュが行われたブロック
群に対し、該ブロック群の領域内の被写体に前記しきい
値以上の動きがなくなってからもＭＳ回（ＭＳは所定の
自然数）は一括リフレッシュが行われる、請求項４８に
記載の画像符号化方法。 - 【請求項５０】 前記一括リフレッシュは、前記所定時
点から前記時間Ｔだけ経過した時点におけるフレームの
符号化過程で行われ、 前記分散リフレッシュは、前記所定時点から前記時間Ｔ
だけ経過する間に完了する、請求項４８に記載の画像符
号化方法。 - 【請求項５１】 前記分散リフレッシュの過程にあるブ
ロック群におけるブロックがＳ回（Ｓは所定の自然数）
以上続けてブロック毎に異なるフレームでフレーム内符
号化された場合には、該ブロック群に対する前記分散リ
フレッシュは前記時間Ｔよりも長い所定時間Ｔ’が経過
する間に完了する、請求項５０に記載の画像符号化方
法。 - 【請求項５２】 前記所定時間Ｔ’が経過する間に前記
分散リフレッシュが完了するブロック群の割合に応じて
前記時間Ｔよりも短い所定時間Ｔ’’が経過した時点に
おけるフレームの符号化過程で前記一括リフレッシュが
行われる、請求項５１に記載の画像符号化方法。 - 【請求項５３】 前記所定時間Ｔ’’が下記の式により
算出される、請求項５２に記載の画像符号化方法： Ｔ’’＝ｋＴ（ｍ−Ｂ）／（ｍｋ−Ｂ） ここで、ｍは各フレームにおけるブロック群の前記個数
であり、Ｂは前記所定時間Ｔ’が経過する間に前記分散
リフレッシュが完了するブロック群の数であってｍ以下
の整数であり、ｋはＴ’／Ｔである。 - 【請求項５４】 前記分散リフレッシュステップでは、
前記分散リフレッシュされるべきブロック群が前記時間
Ｔに相当するフレーム数に等しい個数のサブブロック群
に分割され、１フレームの符号化過程で１サブブロック
群がフレーム内符号化される、請求項４８に記載の画像
符号化方法。 - 【請求項５５】 動画像の各フレームを予め決められた
個数ｍのブロック群に分割し、各ブロック群に含まれる
ブロックを単位としてフレーム間符号化方式とフレーム
内符号化方式との間で符号化方式を切り換えつつ動画像
を符号化する画像符号化方法であって、 一つのブロック群に含まれる全てのブロックを同一フレ
ームの符号化過程でフレーム内符号化することとして定
義される一括リフレッシュを、各フレームにつき高々一
つのブロック群に対して行う一括リフレッシュステップ
を備え、 各フレームにおけるブロック群のうちフレーム内の位置
が同一であるブロック群に対して前記一括リフレッシュ
を行う間隔に相当するフレーム数Ｔｆが前記個数ｍより
も大きい画像符号化方法。 - 【請求項５６】 各フレームにおけるブロックのうちフ
レーム内の位置が同一であるブロックに対してフレーム
内符号化を行う間隔に相当するフレーム数Ｔｆが前記個
数ｍよりも大きい、請求項４８に記載の画像符号化方
法。 - 【請求項５７】 各フレームにおけるブロックのうちフ
レーム内の位置が同一であるブロックに対して前記一括
リフレッシュまたは前記分散リフレッシュによりフレー
ム内符号化が行われる間隔が前記時間Ｔであり、 前記動き判別ステップでは、各フレームにおける前記個
数ｍのブロック群のそれぞれの領域毎に１フレームずつ
ずれた時点から前記時間Ｔだけ経過する間にそれぞれの
領域内の被写体に前記しきい値以上の動きがあるか否か
が判別され、 前記一括リフレッシュは、各フレームにつき高々一つの
ブロック群に対して行われる、請求項４８に記載の画像
符号化方法。 - 【請求項５８】 各フレームにおける前記個数ｍのブロ
ック群のそれぞれの領域毎に１フレームずつずれた時点
から前記時間Ｔだけ経過する間にそれぞれの領域内の被
写体に前記しきい値以上の動きがあるか否かを判別する
動き判別ステップを更に備え、 前記一括リフレッシュステップでは、前記しきい値以上
の動きがあると判別された領域のブロック群に対して前
記一括リフレッシュが行われる、請求項５５に記載の画
像符号化方法。 - 【請求項５９】 前記動き判別ステップでは、前記分散
リフレッシュが行われるブロック群の領域についても、
前記分散リフレッシュと並行して、各ブロック群のそれ
ぞれの領域毎に１フレームずつずれた時点から前記時間
Ｔだけ経過する間にそれぞれの領域内の被写体に前記し
きい値以上の動きがあるか否かを検出することにより動
きの有無が判別され、 前記分散リフレッシュの過程にあるブロック群の領域内
の被写体に前記しきい値以上の動きが検出されると、該
ブロック群に対する前記分散リフレッシュが中断され、 前記しきい値以上の動きが検出された領域のブロック群
に対する前記分散リフレッシュが開始された時点から前
記時間Ｔだけ経過した後に、前記一括リフレッシュが該
領域のブロック群に対して行われる、請求項５７に記載
の画像符号化方法。 - 【請求項６０】 前記動き判別ステップでは、前記分散
リフレッシュと並行して、各ブロック群のそれぞれの領
域毎に１フレームずつずれた時点から前記時間Ｔだけ経
過する間にそれぞれの領域内の被写体に前記しきい値以
上の動きがあるか否かを検出することにより動きの有無
が判別され、 各ブロック群に対する前記分散リフレッシュが、該ブロ
ック群の領域内の被写体の動きの有無の判別が開始され
た時点から行われ、前記分散リフレッシュの過程にある
ブロック群の領域内の被写体に前記しきい値以上の動き
が検出されると、該ブロック群に対する前記分散リフレ
ッシュが中断され、 前記しきい値以上の動きが検出された領域のブロック群
に対する前記分散リフレッシュが開始された時点から前
記時間Ｔだけ経過した後に、前記一括リフレッシュが該
領域のブロック群に対して行われる、請求項５７に記載
の画像符号化方法。 - 【請求項６１】 前記動き判別ステップでは、各ブロッ
ク群の領域が所定数の分割領域に分割されて、分割領域
毎に被写体に予め設定されたしきい値以上の動きがある
か否かを検出することにより各分割領域における動きの
有無が判別され、 前記しきい値以上の動きが検出された分割領域を含む領
域の前記ブロック群に対する次の一括リフレッシュの時
点におけるフレームの符号化過程で該分割領域の全ての
ブロックがフレーム内符号化される、請求項５７に記載
の画像符号化方法。 - 【請求項６２】 前記動き判別ステップでは、各ブロッ
ク群の領域が所定数の分割領域に分割されて、分割領域
毎に被写体に予め設定されたしきい値以上の動きがある
か否かを検出することにより各分割領域における動きの
有無が判別され、 前記分散リフレッシュの過程にあるブロック群の領域に
含まれる分割領域内の被写体に前記しきい値以上の動き
が検出されると、該分割領域を含む領域のブロック群に
対する分散リフレッシュが中断され、 前記しきい値以上の動きが検出された分割領域を含む領
域の前記ブロック群に対する次の一括リフレッシュの時
点におけるフレームの符号化過程で該分割領域の全ての
ブロックがフレーム内符号化される、請求項５７に記載
の画像符号化方法。 - 【請求項６３】 被写体が縦長の場合または被写体が縦
方向に移動する場合に、縦横に配列されたブロック群の
うち前記一括リフレッシュが行われるブロック群が縦方
向に変更されていく、請求項５７に記載の画像符号化方
法。 - 【請求項６４】 被写体が横長の場合または被写体が横
方向に移動する場合に、縦横に配列されたブロック群の
うち前記一括リフレッシュが行われるブロック群が横方
向に変更されていく、請求項５７に記載の画像符号化方
法。 - 【請求項６５】 前記動き判別ステップで使用される前
記しきい値を変更するしきい値設定ステップを更に備え
る、請求項４８に記載の画像符号化方法。 - 【請求項６６】 前記しきい値設定ステップは、 カメラまたは映像のブレ量を検出するステップと、 前記ブレ量に応じて異なる値を前記しきい値として設定
するステップとを含む、請求項６５に記載の画像符号化
方法。 - 【請求項６７】 前記動き判別ステップでの判別結果に
基づき、現在符号化しようとするフレームに一括リフレ
ッシュを行うブロック群が含まれ、かつ、ｎ（ｎは予め
決められた自然数）フレーム前に符号化されたフレーム
に一括リフレッシュを行うブロック群が含まれない場合
に、現在符号化しようとするフレームの画質を前記ｎフ
レーム前に符号化されたフレームの画質より悪くする符
号化精度制御ステップを更に備える、請求項４８に記載
の画像符号化方法。 - 【請求項６８】 前記動き判別ステップでの判別結果に
基づき、現在符号化しようとするフレームに一括リフレ
ッシュを行うブロック群が含まれ、かつ、ｎ（ｎは予め
決められた自然数）フレーム前に符号化されたフレーム
に一括リフレッシュを行うブロック群が含まれない場合
に、現在符号化しようとするフレームの画質をｎフレー
ム前に符号化されたフレームの画質より悪くする符号化
精度制御ステップを更に備える、請求項５５に記載の画
像符号化方法。 - 【請求項６９】 前記動き判別ステップでの判別結果に
基づき、現在符号化しようとするフレームに一括リフレ
ッシュを行うブロック群が含まれず、かつ、ｎ（ｎは予
め決められた自然数）フレーム前に符号化されたフレー
ムに一括リフレッシュを行うブロック群が含まれる場合
に、現在符号化しようとするフレームの画質をｎフレー
ム前に符号化されたフレームの画質より良くする符号化
精度制御ステップを更に備える、請求項４８に記載の画
像符号化方法。 - 【請求項７０】 前記動き判別ステップでの判別結果に
基づき、現在符号化しようとするフレームに一括リフレ
ッシュを行うブロック群が含まれず、かつ、ｎ（ｎは予
め決められた自然数）フレーム前に符号化されたフレー
ムに一括リフレッシュを行うブロック群が含まれる場合
に、現在符号化しようとするフレームの画質をｎフレー
ム前に符号化されたフレームの画質より良くする符号化
精度制御ステップを更に備える、請求項５５に記載の画
像符号化方法。 - 【請求項７１】 前記符号化精度制御ステップは、前記
現在符号化しようとするフレームの量子化精度を低下さ
せることにより、前記現在符号化しようとするフレーム
の画質を前記ｎフレーム前に符号化したフレームの画質
より悪くする量子化精度制御ステップを含む、請求項６
７に記載の画像符号化方法。 - 【請求項７２】 前記符号化精度制御ステップは、前記
現在符号化しようとするフレームの量子化精度を向上さ
せることにより、前記現在符号化しようとするフレーム
の画質を前記ｎフレーム前に符号化したフレームの画質
より良くする量子化精度制御ステップを含む、請求項６
９に記載の画像符号化方法。 - 【請求項７３】 前記分散リフレッシュステップは、前
記分散リフレッシュが行われるブロック群に含まれるブ
ロックのうちフレーム内符号化されるブロックの画質
を、前記ブロック群を含むフレームにおける他のブロッ
クの画質よりも良くする符号化制御ステップを含む、請
求項４８に記載の画像符号化方法。 - 【請求項７４】 前記分散リフレッシュステップは、前
記分散リフレッシュが行われるブロック群に含まれるブ
ロックのうちフレーム内符号化されるブロックの画質を
予め設定された下限値より低下しないように符号化の精
度を制御する符号化精度制御ステップを含む、請求項４
８に記載の画像符号化方法。 - 【請求項７５】 前記分散リフレッシュステップは、前
記分散リフレッシュが行われるブロック群に含まれるブ
ロックのうちフレーム内符号化されるブロックの画質が
予め設定された下限値よりも高い場合に、該画質を前記
ブロック群を含むフレームにおける他のブロックの画質
と同等とし、フレーム内符号化される前記ブロックの画
質が前記下限値よりも低い場合に、該画質を前記下限値
とするように、符号化の精度を制御する符号化精度制御
ステップを含む、請求項４８に記載の画像符号化方法。 - 【請求項７６】 前記符号化精度制御ステップは、フレ
ーム内符号化される前記ブロックの量子化精度を前記フ
レームにおける他のブロックの量子化精度よりも高くす
る量子化精度制御ステップを含む、請求項７３に記載の
画像符号化方法。 - 【請求項７７】 前記分散リフレッシュステップは、前
記分散リフレッシュが行われるブロック群に含まれるブ
ロックのうちフレーム内符号化されるブロックの量子化
精度を予め設定された下限値より低下しないように量子
化精度を制御する量子化精度制御ステップを含む、請求
項４８に記載の画像符号化方法。 - 【請求項７８】 前記分散リフレッシュステップは、前
記分散リフレッシュが行われるブロック群に含まれるブ
ロックのうちフレーム内符号化されるブロックの量子化
精度が予め設定された下限値よりも高い場合に、該量子
化精度を前記ブロック群を含むフレームにおける他のブ
ロックの量子化精度と同等とし、フレーム内符号化され
る前記ブロックの量子化精度が前記下限値よりも低い場
合に、該量子化精度を前記下限値とするように、量子化
精度を制御する量子化精度制御ステップを含む、請求項
４８に記載の画像符号化方法。 - 【請求項７９】 各ブロック群は、各フレームにおける
ｍ個の予め決められた領域のそれぞれにおける複数ブロ
ックより構成されている、請求項４８に記載の画像符号
化方法。 - 【請求項８０】 各ブロック群は、各フレームにおける
ｍ個の予め決められた領域のそれぞれにおける複数ブロ
ックより構成されている、請求項５５に記載の画像符号
化方法。 - 【請求項８１】 前記予め決められた領域はグループオ
ブブロックである、請求項７９に記載の画像符号化方
法。 - 【請求項８２】 前記予め決められた領域はグループオ
ブブロックである、請求項８０に記載の画像符号化方
法。 - 【請求項８３】 動画像の各フレームを予め決められた
個数ｍのブロック群に分割し、各ブロック群に含まれる
ブロックを単位としてフレーム間符号化方式とフレーム
内符号化方式との間で符号化方式を切り換えつつ動画像
を符号化する画像符号化方法であって、 各ブロック群の符号化により所定時点から所定時間Ｔだ
け経過する間に発生する符号化量が予め決められたしき
い値以上であるか否かを判定する符号化量判定ステップ
と、 一つのブロック群に含まれる全てのブロックを同一フレ
ームの符号化過程でフレーム内符号化することとして定
義される一括リフレッシュを、前記符号化量判定ステッ
プで前記符号化量が前記しきい値以上であると判定され
たブロック群に対して行う一括リフレッシュステップ
と、 各フレームにおけるブロック群のうちフレーム内の位置
が同一であるブロック群を同一ブロック群と見なして一
つのブロック群に含まれる各ブロックをブロック毎に異
なるフレームの符号化過程でフレーム内符号化すること
として定義される分散リフレッシュを、前記符号化量判
定ステップで前記符号化量が前記しきい値よりも少ない
と判定されたブロック群に対して行う分散リフレッシュ
ステップと、を備える画像符号化方法。 - 【請求項８４】 動画像を符号化し該動画像の符号化デ
ータを送出する符号化装置と、送出された前記符号化デ
ータを受信して復号化するとともに、復号化すべき前記
符号化データにおけるエラーの検出を行い、エラーが検
出されるとエラー通知を前記符号化装置へ送る復号化装
置とにより構成される画像伝送システムにおいて使用さ
れ、前記動画像の各フレームを予め決められた個数ｍの
ブロック群に分割して、各ブロック群に含まれるブロッ
クを単位としてフレーム間符号化方式とフレーム内符号
化方式との間で符号化方式を切り換えつつ前記動画像を
符号化する画像符号化方法であって、 前記エラー通知を受信するエラー受信ステップと、 前記エラー通知が受信された場合に、前記エラー通知の
受信の時点から所定時間ＲＴｍａｘだけ前までの間に符
号化された各フレームにおける各ブロック群の領域内の
被写体に予め決められたしきい値以上の動きがあるか否
かを判別し、前記しきい値以上の動きがある領域のブロ
ック群に対してフレーム内符号化によるリフレッシュを
行うことを決定するリフレッシュ選択ステップと、 一つのブロック群に含まれる全てのブロックを同一フレ
ームの符号化過程でフレーム内符号化することとして定
義される一括リフレッシュを、前記リフレッシュ選択ス
テップでリフレッシュを行うことが決定されたブロック
群に対して行う一括リフレッシュステップと、を備える
画像符号化方法。 - 【請求項８５】 各フレームにおけるブロック群のうち
フレーム内の位置が同一であるブロック群を同一ブロッ
ク群と見なして一つのブロック群に含まれる各ブロック
をブロック毎に異なるフレームの符号化過程でフレーム
内符号化することとして定義される分散リフレッシュ
を、前記リフレッシュ選択ステップでリフレッシュを行
うことが決定されたブロック群以外のブロック群に対し
て行う分散リフレッシュステップを更に備える、請求項
８４に記載の画像符号化方法。 - 【請求項８６】 前記動画像の各フレームに対する符号
化の際に当該フレームにおける各ブロック群の領域内の
被写体の動きの大きさを示す動き情報を格納する動き情
報格納ステップと、 前記動き情報格納ステップで格納された前記動き情報を
少なくとも前記時間ＲＴｍａｘだけ保持するように前記
動き情報の保持時間を管理する保持時間管理ステップと
を更に備え、 前記リフレッシュ選択ステップでは、保持時間の管理さ
れた前記動き情報に基づき、前記エラー通知の受信の時
点から前記時間ＲＴｍａｘだけ前までの間に符号化され
た各フレームにおける各ブロック群の領域内の被写体に
前記しきい値以上の動きがあるか否かが判別される、請
求項８４に記載の画像符号化方法。 - 【請求項８７】 前記時間ＲＴｍａｘは、前記動画像に
おけるいずれかのフレームが符号化される時点から、該
フレームの符号化データが前記復号化装置へ送られ、該
符号化データにエラーが検出されたときに前記エラー通
知が前記符号化装置で受信される時点までの時間の最大
値である、請求項８４に記載の画像符号化方法。 - 【請求項８８】 前記動画像における各フレームが符号
化される時点から、該フレームの符号化データが前記復
号化装置へ送られ、該符号化データにエラーが検出され
たときに前記エラー通知が前記符号化装置で受信される
時点までの時間を、前記動画像の各フレーム毎に算出す
る時間算出ステップを更に備え、 前記保持時間管理ステップでは、前記時間算出ステップ
で算出された前記時間を前記所定時間ＲＴｍａｘとして
用いて前記動き情報の保持時間が管理される、請求項８
６に記載の画像符号化方法。 - 【請求項８９】 領域の異なる複数のブロック群に対し
てリフレッシュを行うことが前記リフレッシュ選択ステ
ップで決定された場合に、該複数のブロック群は順次１
フレームずつずらして各々１回づつ一括リフレッシュさ
れる、請求項８４に記載の画像符号化方法。 - 【請求項９０】 前記リフレッシュ選択ステップでは、
前記複数のブロック群が順次１フレームずつずらして各
々１回づつ一括リフレッシュされている間に前記エラー
通知が受信された場合に、該受信の時点から前記時間Ｒ
Ｔｍａｘだけ前までの間に符号化された各フレームにお
ける各ブロック群の領域内の被写体に前記しきい値以上
の動きがあるか否かが判別され、該判別結果に基づき、
前記しきい値以上の動きがある領域のブロック群がリフ
レッシュを行うブロック群として追加的に決定され、 リフレッシュを行うことが前記リフレッシュ選択ステッ
プで決定されている複数のブロック群が、リフレッシュ
を行うことが重複して決定されたブロック群をも含め
て、順次１フレームずつずらして各々１回づつ一括リフ
レッシュされる、請求項８９に記載の画像符号化方法。 - 【請求項９１】 前記動き情報格納ステップでは、前記
動画像の各フレームに対する符号化の際に、該符号化に
おいて一括リフレッシュが行われたブロック群に対する
前記動き情報として前記しきい値以上の動きを示す所定
の動き情報が格納され、 前記保持時間管理ステップでの前記保持時間の管理によ
り、該符号化の時点から少なくとも前記時間ＲＴｍａｘ
が経過するまでは前記所定の動き情報が保持される、請
求項８６に記載の画像符号化方法。 - 【請求項９２】 前記一括リフレッシュが行われないブ
ロック群のブロックのうち、前記一括リフレッシュが行
われるべきブロック群であってかつ前記一括リフレッシ
ュが行われていない一括リフレッシュ待ちブロック群に
接するブロックの符号化に際し、該一括リフレッシュ待
ちブロック群が参照されないように動きベクトル探索範
囲を制限する探索範囲制限ステップを更に備える、請求
項８４に記載の画像符号化方法。 - 【請求項９３】 前記探索範囲制限ステップでは、前記
一括リフレッシュが行われる期間は、各ブロック群のブ
ロックの符号化に際し、自ブロック群以外のブロック群
のブロックが参照されないように動きベクトル探索範囲
が制限される、請求項９２記載の画像符号化方法。 - 【請求項９４】 動画像の各フレームを予め決められた
個数ｍのブロック群に分割して、各ブロック群に含まれ
るブロックを単位としてフレーム間符号化方式とフレー
ム内符号化方式との間で符号化方式を切り換えつつ動画
像を符号化する画像符号化プログラムを、コンピュータ
装置において実行されるプログラムとして記録した記録
媒体であって、 各フレームにおける前記個数ｍのブロック群のそれぞれ
の領域内の被写体に所定時点から所定時間Ｔだけ経過す
る間に予め決められたしきい値以上の動きがあるか否か
を判別する動き判別ステップと、 一つのブロック群に含まれる全てのブロックを同一フレ
ームの符号化過程でフレーム内符号化することとして定
義される一括リフレッシュを、前記動き判別ステップで
前記しきい値以上の動きがあると判別された領域のブロ
ック群に対して行う一括リフレッシュステップと、 各フレームにおけるブロック群のうちフレーム内の位置
が同一であるブロック群を同一ブロック群と見なして一
つのブロック群に含まれる各ブロックをブロック毎に異
なるフレームの符号化過程でフレーム内符号化すること
として定義される分散リフレッシュを、前記動き判別ス
テップで前記しきい値以上の動きがないと判別された領
域のブロック群に対して行う分散リフレッシュステップ
と、を含む動作環境を前記コンピュータ装置上で実現す
るための画像符号化プログラムを記録した記録媒体。 - 【請求項９５】 動画像の各フレームを予め決められた
個数ｍのブロック群に分割して、各ブロック群に含まれ
るブロックを単位としてフレーム間符号化方式とフレー
ム内符号化方式との間で符号化方式を切り換えつつ動画
像を符号化する画像符号化プログラムを、コンピュータ
装置において実行されるプログラムとして記録した記録
媒体であって、 一つのブロック群に含まれる全てのブロックを同一フレ
ームの符号化過程でフレーム内符号化することとして定
義される一括リフレッシュを、各フレームにつき高々一
つのブロック群に対して行う一括リフレッシュステップ
を含み、 各フレームにおけるブロック群のうちフレーム内の位置
が同一であるブロック群に対して前記一括リフレッシュ
を行う間隔に相当するフレーム数Ｔｆが前記個数ｍより
も大きいことを特徴とする動作環境を前記コンピュータ
装置上で実現するための画像符号化プログラムを記録し
た記録媒体。 - 【請求項９６】 動画像の各フレームを予め決められた
個数ｍのブロック群に分割して、各ブロック群に含まれ
るブロックを単位としてフレーム間符号化方式とフレー
ム内符号化方式との間で符号化方式を切り換えつつ動画
像を符号化する画像符号化プログラムを、コンピュータ
装置において実行されるプログラムとして記録した記録
媒体であって、 各ブロック群の符号化により所定時点から所定時間Ｔだ
け経過する間に発生する符号化量が予め決められたしき
い値以上であるか否かを判定する符号化量判定ステップ
と、 一つのブロック群に含まれる全てのブロックを同一フレ
ームの符号化過程でフレーム内符号化することとして定
義される一括リフレッシュを、前記符号化量判定ステッ
プで前記符号化量が前記しきい値以上であると判定され
たブロック群に対して行う一括リフレッシュステップ
と、 各フレームにおけるブロック群のうちフレーム内の位置
が同一であるブロック群を同一ブロック群と見なして一
つのブロック群に含まれる各ブロックをブロック毎に異
なるフレームの符号化過程でフレーム内符号化すること
として定義される分散リフレッシュを、前記符号化量判
定ステップで前記符号化量が前記しきい値よりも少ない
と判定されたブロック群に対して行う分散リフレッシュ
ステップと、を含む動作環境を前記コンピュータ装置上
で実現するための画像符号化プログラムを記録した記録
媒体。 - 【請求項９７】 動画像を符号化し該動画像の符号化デ
ータを送出する符号化装置と、送出された前記符号化デ
ータを受信して復号化するとともに、復号化すべき前記
符号化データにおけるエラーの検出を行い、エラーが検
出されるとエラー通知を前記符号化装置へ送る復号化装
置とにより構成される画像伝送システムにおいて使用さ
れ、前記動画像の各フレームを予め決められた個数ｍの
ブロック群に分割して、各ブロック群に含まれるブロッ
クを単位としてフレーム間符号化方式とフレーム内符号
化方式との間で符号化方式を切り換えつつ前記動画像を
符号化する画像符号化プログラムを、コンピュータ装置
において実行されるプログラムとして記録した記録媒体
であって、 前記エラー通知を受信するエラー受信ステップと、 前記エラー通知が受信された場合に、前記エラー通知の
受信の時点から所定時間ＲＴｍａｘだけ前までの間に符
号化された各フレームにおける各ブロック群の領域内の
被写体に予め決められたしきい値以上の動きがあるか否
かを判別し、前記しきい値以上の動きがある領域のブロ
ック群に対してフレーム内符号化によるリフレッシュを
行うことを決定するリフレッシュ選択ステップと、 一つのブロック群に含まれる全てのブロックを同一フレ
ームの符号化過程でフレーム内符号化することとして定
義される一括リフレッシュを、前記リフレッシュ選択ス
テップでリフレッシュを行うことが決定されたブロック
群に対して行う一括リフレッシュステップと、を含む動
作環境を前記コンピュータ装置上で実現するための画像
符号化プログラムを記録した記録媒体。 - 【請求項９８】 各フレームにおけるブロック群のうち
フレーム内の位置が同一であるブロック群を同一ブロッ
ク群と見なして一つのブロック群に含まれる各ブロック
をブロック毎に異なるフレームの符号化過程でフレーム
内符号化することとして定義される分散リフレッシュ
を、前記リフレッシュ選択ステップでリフレッシュを行
うことが決定されたブロック群以外のブロック群に対し
て行う分散リフレッシュステップを更に含む動作環境を
前記コンピュータ装置上で実現するための画像符号化プ
ログラムを記録した、請求項９７に記載の記録媒体。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP1501299A JPH11289542A (ja) | 1998-02-09 | 1999-01-22 | 画像符号化装置、画像符号化方法、および画像符号化プログラムを記録した記録媒体 |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP10-26944 | 1998-02-09 | ||
| JP2694498 | 1998-02-09 | ||
| JP1501299A JPH11289542A (ja) | 1998-02-09 | 1999-01-22 | 画像符号化装置、画像符号化方法、および画像符号化プログラムを記録した記録媒体 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH11289542A true JPH11289542A (ja) | 1999-10-19 |
Family
ID=26351073
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP1501299A Pending JPH11289542A (ja) | 1998-02-09 | 1999-01-22 | 画像符号化装置、画像符号化方法、および画像符号化プログラムを記録した記録媒体 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH11289542A (ja) |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2001067769A1 (en) * | 2000-03-09 | 2001-09-13 | Oz Vision Ltd. | Method and system for transferring live video pictures from a video camera to a remote video displayer via a conventional telephone line |
| WO2002063885A1 (en) * | 2001-01-30 | 2002-08-15 | Kabushiki Kaisha Office Noa | Moving picture information compressing method and its system |
| WO2003039163A1 (en) * | 2001-11-01 | 2003-05-08 | Kabushiki Kaisha Office Noa | Moving picture information compression method and system thereof |
| US6912318B2 (en) | 2000-06-06 | 2005-06-28 | Kabushiki Kaisha Office Noa | Method and system for compressing motion image information |
| US7085424B2 (en) | 2000-06-06 | 2006-08-01 | Kobushiki Kaisha Office Noa | Method and system for compressing motion image information |
| JP2006279464A (ja) * | 2005-03-29 | 2006-10-12 | Canon Inc | 撮像装置及びネットワーク撮像システム |
| JP2011517233A (ja) * | 2008-04-07 | 2011-05-26 | クゥアルコム・インコーポレイテッド | エラーフィードバックに応答するビデオリフレッシュ適合アルゴリズム |
| JP2014528200A (ja) * | 2011-09-02 | 2014-10-23 | マイクロソフト コーポレーション | 誤り伝搬追跡および受信機からの誤りフィードバックを用いるビデオリフレッシュ |
| US9854274B2 (en) | 2011-09-02 | 2017-12-26 | Skype Limited | Video coding |
| JP2019519964A (ja) * | 2016-04-29 | 2019-07-11 | エーティーアイ・テクノロジーズ・ユーエルシーＡｔｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｕｌｃ | 高効率、低遅延ビデオコーディングのためのモーション適応型イントラリフレッシュ |
| JPWO2021044974A1 (ja) * | 2019-09-06 | 2021-03-11 | ||
| GB2618721A (en) * | 2019-03-20 | 2023-11-15 | V Nova Int Ltd | Low complexity enhancement video coding |
-
1999
- 1999-01-22 JP JP1501299A patent/JPH11289542A/ja active Pending
Cited By (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2001067769A1 (en) * | 2000-03-09 | 2001-09-13 | Oz Vision Ltd. | Method and system for transferring live video pictures from a video camera to a remote video displayer via a conventional telephone line |
| US6912318B2 (en) | 2000-06-06 | 2005-06-28 | Kabushiki Kaisha Office Noa | Method and system for compressing motion image information |
| US7085424B2 (en) | 2000-06-06 | 2006-08-01 | Kobushiki Kaisha Office Noa | Method and system for compressing motion image information |
| WO2002063885A1 (en) * | 2001-01-30 | 2002-08-15 | Kabushiki Kaisha Office Noa | Moving picture information compressing method and its system |
| WO2003039163A1 (en) * | 2001-11-01 | 2003-05-08 | Kabushiki Kaisha Office Noa | Moving picture information compression method and system thereof |
| JP2006279464A (ja) * | 2005-03-29 | 2006-10-12 | Canon Inc | 撮像装置及びネットワーク撮像システム |
| JP4646668B2 (ja) * | 2005-03-29 | 2011-03-09 | キヤノン株式会社 | 撮像装置及びその制御方法 |
| US8406296B2 (en) | 2008-04-07 | 2013-03-26 | Qualcomm Incorporated | Video refresh adaptation algorithms responsive to error feedback |
| JP2011517233A (ja) * | 2008-04-07 | 2011-05-26 | クゥアルコム・インコーポレイテッド | エラーフィードバックに応答するビデオリフレッシュ適合アルゴリズム |
| US9479800B2 (en) | 2008-04-07 | 2016-10-25 | Qualcomm Incorporated | Video refresh adaptation algorithms responsive to error feedback |
| JP2014528200A (ja) * | 2011-09-02 | 2014-10-23 | マイクロソフト コーポレーション | 誤り伝搬追跡および受信機からの誤りフィードバックを用いるビデオリフレッシュ |
| US9854274B2 (en) | 2011-09-02 | 2017-12-26 | Skype Limited | Video coding |
| JP2019519964A (ja) * | 2016-04-29 | 2019-07-11 | エーティーアイ・テクノロジーズ・ユーエルシーＡｔｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｕｌｃ | 高効率、低遅延ビデオコーディングのためのモーション適応型イントラリフレッシュ |
| JP2021108483A (ja) * | 2016-04-29 | 2021-07-29 | エーティーアイ・テクノロジーズ・ユーエルシーＡｔｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｕｌｃ | 高効率、低遅延ビデオコーディングのためのモーション適応型イントラリフレッシュ |
| GB2618721A (en) * | 2019-03-20 | 2023-11-15 | V Nova Int Ltd | Low complexity enhancement video coding |
| GB2618721B (en) * | 2019-03-20 | 2024-03-13 | V Nova Int Ltd | Low complexity enhancement video coding |
| JPWO2021044974A1 (ja) * | 2019-09-06 | 2021-03-11 | ||
| WO2021044974A1 (ja) * | 2019-09-06 | 2021-03-11 | 株式会社ソニー・インタラクティブエンタテインメント | 送信装置、受信装置、送信方法、受信方法及びプログラム |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6333948B1 (en) | Video coding apparatus, video coding method and storage medium containing video coding program | |
| JP4256574B2 (ja) | 画像信号符号化方法および画像信号符号化装置 | |
| US6002802A (en) | Video encoding and decoding apparatus | |
| US5305113A (en) | Motion picture decoding system which affords smooth reproduction of recorded motion picture coded data in forward and reverse directions at high speed | |
| JP4440640B2 (ja) | 画像ブロックの復号方法 | |
| US20030095603A1 (en) | Reduced-complexity video decoding using larger pixel-grid motion compensation | |
| KR20110071231A (ko) | 부호화 방법, 복호화 방법 및 장치 | |
| JPH07184196A (ja) | 画像符号化装置 | |
| JP2002511669A (ja) | 映像データストリームの適応的符号化方法と装置 | |
| JP2003274410A (ja) | 監視映像の符号化装置及び復号装置並びに符号化方法 | |
| JPH11289542A (ja) | 画像符号化装置、画像符号化方法、および画像符号化プログラムを記録した記録媒体 | |
| JP3508916B2 (ja) | 動画像可変ビットレート符号化方法および装置 | |
| JP3669281B2 (ja) | 符号化装置および符号化方法 | |
| JP4010617B2 (ja) | 画像復号化装置及び画像復号化方法 | |
| JP2003348594A (ja) | 画像復号装置及び方法 | |
| JP3416649B2 (ja) | 可変長符号化装置 | |
| JP2007067526A (ja) | 画像処理装置 | |
| JP2000261809A (ja) | 画像特徴に応じた画像符号化装置 | |
| JP3581382B2 (ja) | 符号化装置及びその方法 | |
| KR100626419B1 (ko) | 비디오 전송에서 비트 스트림들간의 교환 | |
| JPH06339111A (ja) | 圧縮動画像再生装置 | |
| JP2002010263A (ja) | 動画像符号化装置および動画像符号化方法 | |
| KR100677128B1 (ko) | 동영상 부호화기의 비트율 제어장치 및 방법 | |
| JPH0993537A (ja) | ディジタル映像信号記録再生装置及びディジタル映像信号符号化方法 | |
| JP6874844B2 (ja) | 動画像符号化装置、動画像符号化方法、及び、動画像符号化プログラム |