JPH09307850A

JPH09307850A - 画像処理装置

Info

Publication number: JPH09307850A
Application number: JP8123531A
Authority: JP
Inventors: Yoshitaka Takeuchi; 義尊竹内
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 1996-05-17
Filing date: 1996-05-17
Publication date: 1997-11-28
Anticipated expiration: 2016-05-17
Also published as: JP3792780B2

Abstract

(57)【要約】【課題】動画像の記録中に指定されたフレームの静止
画像を動画像の連続性を失うことなく高画質で記録す
る。【解決手段】フレームｎｏ．１〜９の動画像が入力さ
れ、順次符号化して記録しているとき、ｎｏ．３フレー
ムで静止画取り込みスイッチをＯＮにすると、このｎ
ｏ．３フレームの画面が３画面分フレームメモリに保持
される。一方、このｎｏ．３フレームを含む動画像が順
次符号化されて記録される。ｎｏ．９フレームで記録停
止スイッチがＯＮされると、動画像の処理が終了し、次
にフレームメモリから３枚のｎｏ．３フレームの静止画
像が取り出されて符号化、記録される。この符号化の際
に、３枚の各画面の互いに異なる特定エリアの量子化特
性を制御して高画質となるように符号化する。従って復
号化時に高画質部分のみを合成することにより一枚の高
画質静止画像が得られると共に再生動画像の連続性が保
たれる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、入力画像信号から
静止画像信号を取り込んで処理する画像処理装置に関す
るものである。

【０００２】

【従来の技術】従来より動画像信号を伝送したりディジ
タル記録する場合、動画像を画面単位内で、例えば各フ
レーム内で符号化を行い、伝送媒体や記録媒体等の媒体
に順次送っていく方法が用いられている。この方法で符
号化された動画像を再生中に、これらの動画像情報から
静止画情報を得て、例えば印刷出力したりテレビジョン
画面に出力表示したりする場合、従来は動画像を再生出
力する過程でフレーム・メモリに取り込まれた１フレー
ム分の画像情報を抽出して、その抽出されたデータを静
止画像として扱っていた。このとき、テレビジョン画像
の飛び越し走査によって、表示される静止画像がフリッ
カによって乱れたり、画像の輪郭部分に走査線の影響が
現われて滑らかでなくなったり、データ読み取りのエラ
ーやドロップ・アウトによって静止画像が完全に再生で
きないなどの問題を生じていた。

【０００３】上記の問題の対策として、より整った静止
画像を再生するために、動画像を伝送または記録してい
る途中で、伝送または記録しておきたい１フレーム分の
静止画像を数フレーム分のデータとして繰り返し記録す
る方法が用いられるようになってきている。図８は１フ
レーム分の静止画像データを動画像３フレーム分の領域
で伝送または記録する様子を示したものである。図中の
ｎｏ．２フレームの伝送または記録中に静止画として処
理したい場合が現れた時、静止画取り込みスイッチを押
すことによって、ｎｏ．３フレームの位置Ａから静止画
の処理が始まる。

【０００４】ｎｏ．３フレームの画像をＡの位置で取り
込んで処理した後、このフレームの再生時にエラーが発
生したときや、走査線の影響を受けた画像中の輪郭部の
補間などに用いるための、同じ内容の予備の静止画像の
データをＢ、Ｃのフレームの位置にあたるところで再び
処理していく。そしてこの３フレーム分の静止画像を処
理した後、Ｄのフレームにあたる位置から動画像ｎｏ．
６フレームからの処理を再開し、引き続き動画像の処理
を継続する。

【０００５】図９は上述の画像信号処理方式を実現する
装置の一例を示したブロック図である。ディジタル画像
データの入力端子９０１から入力された動画像データ
は、符号化回路９０２でフレーム内符号化された後、フ
ォーマット化回路９０３において記録フォーマットに合
うようにフォーマット化され、バッファ９０４に送られ
た後、媒体９０５に伝送される。この動画像情報の処理
中に、静止画情報として処理しておきたいフレームのと
ころで静止画取り込みスイッチを押すことによって、入
力端子９０６から静止画取り込み信号が入力される。こ
の信号に応じて、それまで動画像を処理するために入力
されてきた動画像データを順次フォーマット化してバッ
ファ９０４に送出していたフォーマット化回路９０３は
図８におけるＡにあたるフレームの画像データに続いて
Ｂ、Ｃのフレームに相当する位置に同じ内容のデータを
繰り返し出力して、媒体９０５に伝送するように成す。
このようにして、連続して処理される動画像フレームに
静止画像フレームを挿入して処理していく方法が用いら
れている。

【０００６】画像信号を符号化する場合、図１０に示さ
れるようなフレーム内符号化のシステムが用いられてい
る。これは、画像信号を複数の画素から成るブロックに
分割するとともに、そのデータを直交変換し、上記複数
のブロックで、ある範囲の符号量となるように、上記直
交変換したデータを量子化および可変長符号化し、これ
を伝送または記録するようにした画像処理装置である。

【０００７】図１０について説明する前に上記ブロック
分割について説明する。ブロックの分割の方法の一例と
しては、図２に示すものが考えられている。図２におい
て、（Ａ）は画像全体を示し、横にＩ：１〜Ｎまで分割
され、さらに各分割領域を（Ｂ）のように直交変換する
ブロックに分割する。このブロックをＸ個集めて、この
複数ブロックの範囲内で固定長符号化する場合、（Ａ）
の各々のＩ（Ｉ：１〜Ｎ）からＹ個ずつの直交変換する
ブロックを選択してＸ個のブロック（Ｘ＝Ｙ×Ｎ）と成
し、この集められたＸ個のブロックのエリアの範囲内
で、符号量がある一定の値となるように、量子化および
可変長符号化を行う。この時、量子化特性は（Ａ）の各
々のＩの中のＹ個の直交変換ブロック毎、もしくは各直
交変換ブロック毎に与えられる。

【０００８】次に図１０について説明する。図１０にお
いて、符号化時には、外部から供給されるディジタル入
力画像信号Ｓ１の入力端子１０１を介して内部に導入さ
れたディジタル画像信号Ｓ１は、まず直交変換のための
ブロックを形成し、さらにそのブロックをＸ個集めたも
のからなるエリアにするためのメモリ回路１０２に与え
られて蓄積される。このメモリ回路１０２は、アドレ
ス、および書き込み／読み出し動作がメモリ制御部１０
３により制御されるように成されている。

【０００９】メモリ制御部１０３の後述する読み出し制
御に基いてメモリ回路１０２からブロック化されて読み
出された画像データＳ２は、次に直交変換回路１０４に
与えられて直交変換される。この直交変換された画像デ
ータＳ３は、次に量子化器１０５に与えられ、後述する
符号量計算部１０６からの制御に基づいた量子化データ
で量子化される。量子化された画像データＳ４は、次に
可変長符号化回路１０７に与えられて可変長符号化され
る。

【００１０】上記直交変換された画像データＳ３は、符
号量計算部１０６にも与えられていて、Ｘ個のブロック
からなるエリア単位で量子化、可変長符号化した場合
に、ある範囲の符号量となる（以下、Ｘブロック固定長
符号化という）ような量子化テーブルが、符号量計算部
１０６によって計算された値に基いて、量子化器１０５
で選択される。このようにして与えられた量子化テーブ
ルを用いて、量子化された画像データＳ４は、次に可変
長符号化回路１０７に与えられて可変長符号化される。

【００１１】この可変長符号化された画像データＳ５
は、次にデータ処理部１０８に与えられる。データ処理
部１０８では、伝送媒体や記録媒体に適したデータに画
像データＳ５を処理し、処理したデータＳ６を伝送媒体
や記録媒体である媒体１２０に送る。このデータ処理を
行う場合、入力端子１１０から静止画取り込み信号が入
力されたときは、図８について説明した静止画処理が行
われる。

【００１２】次に、復号化時には、媒体１２０を介した
データＳ７は、伝送媒体や記録媒体に適したデータの処
理に対して復号化するデータ復号化部１３１に与えら
れ、復号化された画像データＳ８を可変長復号化回路１
３２に出力する。可変長復号化回路１３２では、画像デ
ータＳ８を可変長復号化して画像データＳ９を出力し、
次に逆量子化器１３３で、逆量子化を行った画像データ
Ｓ１０を逆直交変換処理部１３５に与える。

【００１３】逆直交変換処理部１３５では、画像データ
Ｓ１０を逆直交変換して画像データＳ１１を各ブロック
化されたデータをラスタ走査に戻すためのブロック・エ
リア解除メモリ１３６に与えて蓄積する。このブロック
・エリア解除メモリ回路１３６は、アドレス、および書
き込み／読み出し動作がメモリ制御部１３４により制御
されるように構成されている。

【００１４】また、逆量子化器１３３で使用した逆量子
化特性はデータＳ１２として出力され、メモリ制御部１
３４へ与えられる。メモリ制御部１３４の読み出しアド
レス制御に基いて、ブロック・エリア解除メモリ回路１
３６から読み出された画像データＳ１３は、ディジタル
出力画像信号として出力端子１３７から出力される。

【００１５】

【発明が解決しようとする課題】前述した従来の画像処
理装置を用いて動画像の処理の途中で静止画の処理を行
った場合、図８に示されるように、静止画像を処理して
いる間のＢ及びＣのフレームの位置に該当する動画像ｎ
ｏ．４及びｎｏ．５フレームが伝送または記録されない
ために、動画像を復号化する再生時に画面の連続性が失
われ、画像が乱れるという問題があった。

【００１６】また、上記の従来の画像処理装置では、動
画モード／静止画モードに関係なくデータの圧縮方法が
同じであるが、人間の視覚特性は静止画像の方が動画像
より画質劣化が判別しやすい。このため従来の画像処理
装置では、静止画モードで画質劣化が目立ちやすいとい
う問題があった。

【００１７】本発明は上述の問題点に鑑み、静止画像を
画像処理し伝送または記録する場合に、動画像の連続性
を失わず、かつ動画像の中の所望の静止画像を複数画面
だけ記録、伝送することができ、さらに再生される静止
画像の画質劣化を目立たないようにすることのできる画
像処理装置を得ることを目的とする。

【００１８】

【課題を解決するための手段】請求項１の発明において
は、入力される画像信号を符号化する符号化処理手段
と、上記符号化処理手段による処理が行われているとき
に上記入力される画像信号から指定された画面の静止画
像信号を取り込む取り込み手段と、上記取り込まれた静
止画像信号を蓄積する蓄積手段と、上記符号化処理手段
による上記入力される画像信号の処理が終了した後に上
記蓄積手段に蓄積された静止画像信号を上記符号化処理
手段に入力させる入力手段とを設けている。

【００１９】請求項２の発明においては、入力される符
号化画像データを復号化する復号化処理手段と、上記入
力される符号化画像データに存在する静止画像データを
復号化した静止画像信号を保持する保持手段と、上記保
持手段に保持された上記静止画像信号を指示に応じて取
り出し出力する出力手段とを設けている。

【００２０】請求項５の発明においては、入力される画
像信号を符号化する符号化処理手段と、上記符号化処理
手段による処理が行われているときに上記入力される画
像信号から指定された画面の静止画像信号を取り込む取
り込み手段と、上記取り込まれた静止画像信号を蓄積す
る蓄積手段と、上記符号化処理手段による上記入力され
る画像信号の処理が終了した後に上記蓄積手段に蓄積さ
れた静止画像信号を上記符号化処理手段に入力させる入
力手段とを有する符号化装置と、上記符号化処理手段に
より符号化された符号化画像データを復号化する復号化
処理手段と、上記入力される符号化画像データに存在す
る静止画像データを復号化した静止画像信号を保持する
保持手段と、上記保持手段に保持された上記静止画像信
号を指示に応じて取り出し出力する出力手段とを有する
復号化装置とを設けている。

【００２１】

【作用】請求項１の発明によれば、符号化処理を行いな
がら静止画像信号を取り込んで蓄積しておき、上記符号
化処理が終了した後で蓄積された静止画像信号の符号化
を行う。従って、符号化画像データの復号化時に再生画
像信号の連続性が失われることがない。

【００２２】請求項２の発明によれば、符号化画像デー
タを復号化処理しながら静止画像信号を保持し、所望の
ときに取り出すことができる。

【００２３】請求項５の発明によれば、符号化装置にお
いて、符号化処理を行いながら静止画像信号を取り込ん
で蓄積しておき、上記符号化処理が終了した後で蓄積さ
れた静止画像信号の符号化を行う。復号化装置では、符
号化装置で符号化された符号化画像データを復号化処理
を行いながら静止画像信号を保持する。従って、復号化
された再生画像信号の連続性が損なわれることがない。
また任意のときに静止画像信号を出力させることができ
る。

【００２４】

【発明の実施の形態】図１は本発明による画像処理装置
の実施の形態を示すブロック図である。図１における１
０１〜１０８、１１０、１２０、１３１〜１３７は、図
４の同一符号部分と実質的に同じ機能を有しており、重
複する説明を省略する。

【００２５】動画像信号は図８について説明したように
順次符号化されて媒体１２０に送られていき、さらに媒
体１２０から送られてきたデータが復号化されていく
が、次に本発明のポイントであるところの静止画像信号
を伝送または記録するための処理を行う際に用いられる
フレームメモリ制御部分について説明する。まず、各静
止画像を１フレームにつき１フレーム分のデータを媒体
１２０に送り、複数の場面の静止画像の画面を処理する
モードについて説明する。動画像信号を取り込んで符号
化を行い、媒体１２０に伝送している途中で、静止画像
として取り込みたい画像があるとき、静止画取り込みス
イッチを押すことにより入力端子１１０から静止画取り
込み信号が入力される。また、入力端子１０９には、１
画面につき１フレーム分のデータを媒体１２０に送るモ
ードを示すモード切り換え信号が入力される。

【００２６】上記の２種類の信号を受けたメモリの切換
え制御部１１２は、メモリ書き込み切換えスイッチ１１
３に信号を送り、１フレームの静止画像を取り込む度に
スイッチを切り換えて３つのフレームメモリＦＭ１〜３
（１１５〜１１７）に異なる３種類の場面の静止画像信
号を１フレームずつ順次送り込む。

【００２７】次に、動画像の取り込みが終了したことを
示す動画処理終了信号が入力端子１１１から入力される
と、これに応じてメモリ読み出し切り換えスイッチ１１
４を切り換えて、静止画像信号を１フレームずつ順次読
み出して、符号化を行うための回路系に信号を送る。そ
して、動画像符号化データに引き続き静止画像符号化デ
ータの符号化処理を動画像と同様に行い、データ処理部
１０８において静止画像データであることを示すフラグ
を付加して媒体１２０に伝送する。

【００２８】次に、媒体１２０から送られてきた静止画
像データを復号再生する場合は、データ復号部１３１に
おいて静止画像データを示すフラグを検出した信号を復
号メモリ制御部１３４に送り、その信号に応じて復号メ
モリ制御部１３４は、メモリ書き込みスイッチ１４１を
切り換えて、復号された静止画像信号を１フレームずつ
復号フレームメモリＦＭ４〜６（１４２〜１４４）に順
次書き込んでいく。

【００２９】復号フレームメモリ１４２〜１４４に蓄え
られた静止画像信号は、入力端子１３９から入力された
静止画像読み出し信号に応じてメモリ読み出しスイッチ
１４０のスイッチを切り換えて、動画像の読み出し中、
動画像の読み出し後、または静止画像のみを読み出した
い時などの必要に応じて各静止画像の希望の場面を１フ
レーム分ずつ読み出す。次に、各フレームメモリから読
み出された静止画像信号は、ブロック・エリア解除メモ
リ１３６に送られて、メモリ制御部１３４の信号に応じ
たメモリ制御部１３８の制御により、複数個の直交変換
ブロックを含めたエリアのデータ配列からラスタ走査に
変換するような読み出しアドレス順に各フレームメモリ
からデータを読み出して、ディジタル画像信号出力端子
１３７から静止画像信号を出力する。

【００３０】次に、１フレームの静止画像をＮフレーム
（ここでは３フレーム）分のデータとして繰り返し媒体
１２０に送り、高画質の静止画像を処理するモードにつ
いて説明する。動画像信号を取り込んで符号化を行い媒
体１２０に伝送している途中で、静止画像として取り込
みたい画像があるとき、静止画取り込みスイッチを押す
ことによって、入力端子１１０から静止画取り込み信号
が入力される。また、入力端子１０９には、１画面につ
き３フレーム分のデータを媒体１２０に送るモードを示
すモード切換え信号を入力する。

【００３１】上記の２種類の信号を受けたメモリ切り換
え制御部１１２は、メモリ書き込み切り換えスイッチ１
１３に信号を送り、スイッチをすべて閉じて、一度にフ
レームメモリＦＭ１〜３（１１５〜１１７）にそれぞれ
１フレーム分の同一の静止画像信号を送り込むようにす
る。

【００３２】次に、動画像の取り込みが終了したことを
示す動画処理終了信号が入力端子１１１から入力される
と、これに応じてメモリ読み出し切り換えスイッチ１１
４を切り換えて、静止画像信号を１フレームずつ順次読
み出して、符号化を行なう回路に信号を送り、動画像符
号化データに引き続き静止画像符号化データの符号化を
行い、データ処理部１０８において静止画像データであ
ることを示すフラグを付加して媒体１２０に伝送する。

【００３３】次に、媒体１２０から送られてきた静止画
像データを復号再生する場合は、データ復号部１３１に
おいて静止画像データを示すフラグを検出した信号を復
号メモリ制御部１３４に送り、その信号に応じて復号メ
モリ制御部１３４は、メモリ書き込みスイッチ１４１を
切り換えて、復号された静止画像信号を１フレームずつ
復号フレームメモリＦＭ４〜６（１４２〜１４４）に順
次書き込んでいく。

【００３４】復号フレームメモリに蓄えられた静止画像
信号は、入力端子１３９から入力された静止画像読み出
し信号に応じてメモリ読み出しスイッチ１４０のスイッ
チを切り換えて、動画像の読み出し中、動画像の読み出
し後、または静止画像のみを読み出したい時など、必要
に応じて後述する要領によって高画質の１フレームの静
止画像を完成させるために、必要なエリアのデータをそ
れぞれのフレームから順次読み出す。

【００３５】次に、フレームメモリから読み出された静
止画像信号は、ブロック・エリア解除メモリ１３６に送
られて、メモリ制御部１３８の制御により、複数個の直
交変換ブロックを含めたエリアのデータ配列からラスタ
走査に変換するような読み出しアドレス順にメモリから
データを読み出して、ディジタル画像信号出力端子１３
７から静止画像信号を出力する。

【００３６】次に、各フレームメモリにおける制御や符
号化の方法について説明する。直交変換するブロックの
分割、およびＸブロック固定長符号化するエリアの選択
は、上記メモリ制御部１０３で行っている。ブロックの
分割の方法としては従来例と同様に図２に示すように行
われる。図２において（Ａ）は画像全体を示し、横に
Ｉ：１〜Ｎまで分割され、さらに（Ｂ）のように直交変
換するブロックに分割する。このブロックをＸ個（Ｘ＝
Ｎ×Ｙ、ただしＹは１以上の整数）でＸブロック固定長
符号化する場合、（Ａ）の各々のＩ：１〜ＮからＹ個の
直交変換するブロックを選択し、ある範囲の符号量とな
るように量子化および可変長符号化を行う。

【００３７】図３（Ａ）は、図２（Ａ）でＮ＝３にした
場合の画像全体を示すもので、横にＩ：１〜３まで分割
されている。Ｘブロック固定長符号化（Ｘ＝Ｎ×Ｙ）す
る場合には、各々のＩの部分からＹ個の直交変換するブ
ロックを選択し、ある範囲の符号量となるように、あら
かじめ符号量計算部１０６において量子化特性を決定
し、その結果に基づいて量子化及び可変長符号化を行
う。

【００３８】このようにして、Ｘ個の直交変換ブロック
からなるエリアごとに直交変換を行っていける順序で画
像データをメモリ１０２から読み出していくように、メ
モリ制御部１０３からアドレスを指定する信号を発生さ
せる。そして、読み出された動画像データはそのまま直
交変換回路１０４に送られる。また、静止画像として処
理されるデータは一旦フレームメモリＦＭ１〜３（１１
５〜１１７）に送られ、動画像の処理後に直交変換回路
１０４に送られる。

【００３９】量子化特性は各直交変換ブロック毎、もし
くは図２（Ａ）の各々Ｉ：１〜Ｎに与えられ、その特性
に従った量子化が量子化回路１０５において行われた後
に、可変長符号化回路１０７により可変長符号化され
る。この可変長符号化された符号化データは、与えられ
た量子化特性とともにデータ処理部１０８に送られ処理
された後、媒体１２０に伝送される。

【００４０】ここで、静止画像１画面をＮフレーム（本
実施の形態では３フレーム）分のメモリに蓄えて処理す
るモードにおいては、次のように量子化特性を与える。
初めに記録または伝送するためにフレームメモリＦＭ１
（１１５）に送られた画像データは、図３（Ｂ）の斜線
部（Ｉ＝１）内の各ブロックに与える量子化特性を他の
領域（Ｉ＝２、３）内の各ブロックに与える量子化特性
よりも画質が良くなるようにする。

【００４１】次に記録または伝送するためにフレームメ
モリＦＭ２（１１６）に送られた画像データは、図３
（Ｃ）の斜線部（Ｉ＝２）内の各ブロックに与える量子
化特性を他の領域（Ｉ＝１、３）内の各ブロックに与え
る量子化特性よりも画質が良くなるようにする。さらに
次に記録または伝送するためにフレームメモリＦＭ３
（１１７）に送られた画像データは、図３（Ｄ）の斜線
部（Ｉ＝３）内の各ブロックに与える量子化特性を他の
領域（Ｉ＝１、２）内の各ブロックに与える量子化特性
よりも画質が良くなるようにする。

【００４２】上述した領域の選択は、図４（Ａ）〜
（Ｃ）に示されるように、Ｘブロック固定長符号化され
る各エリアごとに、画質が良くなる量子化特性を振り分
ける方法を用いてもよい。

【００４３】上述のように選択することにより、選択さ
れるブロックごとの水平・垂直方向の相関性が少なくな
り、エラーが発生した場合でも視覚上目立たなくするこ
とができる。

【００４４】さらに上記領域の選択は、輝度信号成分や
色差信号成分の区別によって画質が良くなる量子化特性
を振り分ける方法を用いてもよい。

【００４５】同じ静止画像を複数回（本実施の形態では
３回）伝送または記録する場合は、以上のようにしてＸ
ブロック固定長符号化が行われる。

【００４６】次に上述のようにして伝送または記録され
た１画面に対してＮフレーム（本実施の形態では３フレ
ーム）分の静止画像データが媒体１２０から送られてき
た場合の復号を行うためのメモリ制御は以下のように行
われる。媒体１２０から伝送されてきて可変長復号化さ
れ、逆量子化回路１３３において逆量子化が行なわれた
ときに、各データに与えられていた量子化特性も復号さ
れて、メモリ制御部１３４に送られる。この信号とデー
タ復号処理部１３１において検出されたモードを示す信
号とに応じてメモリ制御部１３４は、フレームメモリＦ
Ｍ４〜６（１４２〜１４４）に逆直交変換された静止画
像データを書き込み、さらに、複数回（３回）伝送また
は記録されたデータの内、いちばん画質劣化の少ない量
子化特性で量子化されていた画像データを選択して、ス
イッチ１４０に切換えて出力する。

【００４７】図５（Ａ）は時間Ｔ＝１〜３に伝送または
記録された画像を示し、斜線部分は量子化特性を他のブ
ロックより画質が良くなるようにした部分である。図５
（Ｂ）はメモリ回路１３６に蓄積される画像データの様
子を示したものである。まず、Ｔ＝１の画像データを処
理した画像データをメモリ回路１３６へ蓄積し、次にメ
モリ回路１３６に蓄積されている画像データより画質劣
化の少ない量子化特性で量子化された画像データが与え
られた場合、メモリ回路１３６のデータを書き換え、そ
れ以外は与えられた画像データを捨てるようにして画像
全体で画質劣化の少ない画像データをメモリ回路１３６
へ蓄積する。

【００４８】同様に図４のように、エリアごとに高画質
の量子化特性を振り分けて符号化したときの復号時にお
けるメモリ回路１３６へのデータの蓄積の様子を図６に
示す。

【００４９】以上のように、通常よりも特定ブロックの
画質劣化の少ないデータを複数回に分けて符号化伝送ま
たは記録し、復号する場合に最も画質劣化の少ないデー
タを選択して１つの画像信号とするため、通常よりも画
質劣化の少ない静止画像信号を伝送または記録する画像
処理装置を実現できる。なお、このシステムを用いるこ
とにより、例えばＶＴＲのように、符号化と復号化を同
じローカルな場所で行うような機器では、符号化部と復
号化部を共用することができる。

【００５０】本実施の形態の説明では、１画面を１フレ
ームの単位で扱ったが、１画面をフィールドの単位で扱
ってもよい。また、本実施の形態では、符号化方式をフ
レーム内符号化に限定して説明を行ったが、フレーム間
符号化を用いても、フレーム間での符号化の相関が完結
している単位の間で静止画像信号を扱うことにより、本
実施の形態を適用することができる。

【００５１】図７は１フレーム画面を３フレーム分取り
込んで静止画像として記録する場合の様子を示す。フレ
ームｎｏ．１〜９の動画像が入力され、これを順次符号
化して記録しているとき、ｎｏ．３フレームで静止画取
り込みスイッチをＯＮにすると、このｎｏ．３フレーム
の画面が３画面分フレームメモリに取り込まれて保持さ
れる。一方、このｎｏ．３フレームを含むｎｏ．９フレ
ームまでの動画像が順次符号化処理されて記録される。
そしてｎｏ．９フレームで記録停止スイッチがＯＮされ
ると、動画像の処理が終了し、次にフレームメモリから
３枚のｎｏ．３フレームの静止画像が取り出されて符号
化、記録される。この符号化の際に、前述したように３
枚の各画面の互いに異なる特定エリアの量子化特性を制
御してそこだけ高画質となるように符号化する。従って
符号化時に高画質部分のみを合成することにより一枚の
高画質静止画像が得られる。

【００５２】

【発明の効果】以上説明したように、請求項１の発明に
よれば、動画像を取り込んで処理している途中で静止画
像を取り込む命令を入力しても、復号化時に再生動画像
の連続性を失うことなく、動画像処理後に静止画像を得
るようにすることができる。

【００５３】また、請求項２、５の発明によれば、動画
像の符号化データを復号化処理しながら静止画像を保持
し、保持した静止画像をいつでも出力させることができ
る。また動画像の復号化終了後に静止画像を出力させれ
ば、動画像の連続性が失われることがない。

【００５４】請求項６の発明によれば、異る複数枚の静
止画像を動画像の連続性を失うことなく得ることができ
る。

【００５５】請求項７の発明によれば、同一画面の静止
画像を複数枚蓄積することで、それらを高画質を得るた
めの補間に用いることができると共に、動画像の連続性
も保たれる。

【００５６】請求項３、９〜１２の発明によれば、複数
枚の静止画像のそれぞれ高画質に符号化された部分を合
成することにより、１枚の高画質静止画像を得ることが
できると共に、動画像の連続性も保つことができる。

【００５７】さらに請求項８の発明によれば、２種類の
静止画像を処理するモードを持つことにより、一連の動
画像の処理の間に数種類の静止画像を処理して、例えば
名場面集などを編集することができると共に、通常より
も画質劣化の少ない静止画像を処理再生することを必要
に応じて選択することができる。

【図面の簡単な説明】

【図１】本発明の実施の形態を示す画像処理装置のブロ
ック図である。

【図２】画像処理装置において行われるＸブロック固定
長符号化のブロック選択法を示す構成図である。

【図３】本発明におけるＸブロック固定長符号化の様子
を示す構成図である。

【図４】本発明におけるＸブロック固定長符号化の様子
を示す構成図である。

【図５】本発明におけるＸブロック固定長符号化の様子
とデータを復号する場合のメモリ回路へのデータ蓄積法
とを示す構成図である。

【図６】図４の場合におけるデータを復号する場合のメ
モリ回路へのデータ蓄積法を示す構成図である。

【図７】動画像信号の処理中に静止画像信号を処理する
命令を受けたときの各画面の処理順序を示す構成図であ
る。

【図８】動画像信号の処理中に静止画像信号を処理する
命令を受けたときの従来例における各画面の処理順序を
示す構成図である。

【図９】動画像信号の処理中に静止画像信号を処理する
命令を受けたときに静止画像の処理を行うことのできる
従来のシステムの一例を示すブロック図である。

【図１０】従来例のフレーム内符号化を行う画像処理装
置の一例を示すブロック図である。

【符号の説明】

１０１ディジタル画像信号の入力端子１０２ブロック・エリア化メモリ回路１０３ブロック・エリア化メモリ制御部１０４直交変換処理部１０５量子化器１０６符号量計算部１０７可変長符号化部１０８データ処理部１０９静止画像処理モード切り換え信号の入力端子１１０静止画像取り込み信号の入力端子１１１動画像処理終了信号の入力端子１１２メモリ入力切り換えスイッチの切り換え制御部１１３静止画像符号化メモリの入力切り換えスイッチ１１４静止画像符号化メモリの出力切り換えスイッチ１１５、１１６、１１７静止画像符号化フレームメモ
リ１３１データ復号部１３２可変長復号化部１３３逆量子化器１３４復号化メモリ制御部１３５逆直交変換処理部１３６ブロック・エリア解除メモリ１３７ブロック・エリア解除メモリ制御部１３８ディジタル画像信号の出力端子１３９静止画像読み出し信号の入力端子１４０静止画像再生メモリの出力切り換えスイッチ１４１静止画像再生メモリの入力切り換えスイッチ１４２、１４３、１４４静止画像再生フレームメモリ

Claims

【特許請求の範囲】

【請求項１】入力される画像信号を符号化する符号化
処理手段と、上記符号化処理手段による処理が行われているときに上
記入力される画像信号から指定された画面の静止画像信
号を取り込む取り込み手段と、上記取り込まれた静止画像信号を蓄積する蓄積手段と、上記符号化処理手段による上記入力される画像信号の処
理が終了した後に上記蓄積手段に蓄積された静止画像信
号を上記符号化処理手段に入力させる入力手段とを備え
た画像処理装置。
【請求項２】入力される符号化画像データを復号化す
る復号化処理手段と、上記入力される符号化画像データに存在する静止画像デ
ータを復号化した静止画像信号を保持する保持手段と、上記保持手段に保持された上記静止画像信号を指示に応
じて取り出し出力する出力手段とを備えた画像処理装
置。
【請求項３】上記静止画像データは同一画面のものが
複数枚存在し、かつ各画面において互いに異る特定の部
分が他の部分より画質が良くなるように符号化されてお
り、上記出力手段は、上記保持手段における各画面から
上記特定の部分を取り出し、一枚の静止画像として出力
することを特徴とする請求項２記載の画像処理装置。
【請求項４】上記静止画像データには識別情報が付加
されており、上記保持手段は上記識別情報に基づいて上
記静止画像信号を抽出して取り込むことを特徴とする請
求項２記載の画像処理装置。
【請求項５】入力される画像信号を符号化する符号化
処理手段と、上記符号化処理手段による処理が行われて
いるときに上記入力される画像信号から指定された画面
の静止画像信号を取り込む取り込み手段と、上記取り込
まれた静止画像信号を蓄積する蓄積手段と、上記符号化
処理手段による上記入力される画像信号の処理が終了し
た後に上記蓄積手段に蓄積された静止画像信号を上記符
号化処理手段に入力させる入力手段とを有する符号化装
置と、上記符号化処理手段により符号化された符号化画像デー
タを復号化する復号化処理手段と、上記入力される符号
化画像データに存在する静止画像データを復号化した静
止画像信号を保持する保持手段と、上記保持手段に保持
された上記静止画像信号を指示に応じて取り出し出力す
る出力手段とを有する復号化装置とを備えた画像処理装
置。
【請求項６】上記取り込み手段は、第１のモードにお
いて上記入力される画像信号から異なる複数枚の画面の
静止画像信号を順次取り込むことを特徴とする請求項１
又は５記載の画像処理装置。
【請求項７】上記取り込み手段は、第２のモードにお
いて上記入力される画像信号から１枚の画面の静止画像
信号を複数枚分取り込み、上記蓄積手段は取り込まれた
同一画面の静止画像信号を複数枚分蓄積することを特徴
とする請求項１又は５記載の画像処理装置。
【請求項８】上記取り込み手段が上記入力される画像
信号から異なる複数枚の画面の静止画像信号を順次取り
込む第１のモードと、上記取り込み手段が上記入力される画像信号から１枚の
画面の静止画像信号を複数枚分取り込み、上記蓄積手段
が取り込まれた同一画面の静止画像信号を複数枚分蓄積
する第２のモードとを有し、上記第１のモードと第２のモードとを切り換える切り換
え手段を設けたことを特徴とする請求項１又は５記載の
画像処理装置。
【請求項９】上記第２のモードにおいて、上記符号化
処理手段が上記蓄積された複数枚の画面の静止画像信号
を処理するのに際し、各画面における互いに異なる特定
の部分を他の部分より画質が良くなるように符号化する
ことを特徴とする請求項７又は８記載の画像処理装置。
【請求項１０】上記特定の部分は、画面の水平、垂直
に対して相関を持たないように選択されることを特徴と
する請求項９記載の画像処理装置。
【請求項１１】上記特定の部分は、静止画像信号にお
ける輝度信号か色差信号かによって選択されることを特
徴とする請求項９記載の画像処理装置。
【請求項１２】上記符号化処理手段は、直交変換、量
子化、可変長符号化を行うものであり、上記特定の部分
の画質をよくするために上記量子化を制御する制御手段
を設けたことを特徴とする請求項９記載の画像処理装
置。
【請求項１３】上記符号化処理手段が上記蓄積された
静止画像信号を符号化した符号化画像データに対して識
別情報を付加する付加手段を設けたことを特徴とする請
求項１又は５記載の画像処理装置。