JP4817263B2 - Image processing apparatus, image processing method, and program - Google Patents

Image processing apparatus, image processing method, and program Download PDF

Info

Publication number
JP4817263B2
JP4817263B2 JP2007240185A JP2007240185A JP4817263B2 JP 4817263 B2 JP4817263 B2 JP 4817263B2 JP 2007240185 A JP2007240185 A JP 2007240185A JP 2007240185 A JP2007240185 A JP 2007240185A JP 4817263 B2 JP4817263 B2 JP 4817263B2
Authority
JP
Grant status
Grant
Patent type
Prior art keywords
image
region
unit
difference
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2007240185A
Other languages
Japanese (ja)
Other versions
JP2009071731A (en )
Inventor
祐和 亀山
隆之 宇田川
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Grant date

Links

Images

Description

本発明は、画像処理装置、画像処理方法、およびプログラムに関する。 The present invention relates to an image processing apparatus, image processing method, and a program. 本発明は、特に、画像を符号化する画像処理装置および画像処理方法、並びに画像処理装置用のプログラムに関する。 The present invention is particularly, an image processing apparatus and image processing method for encoding image, and a program for an image processing apparatus.

圧縮符号化された動画のデータ量を削減すること等を目的として、イントラ符号化された動画構成画像であるIピクチャをPピクチャに変換する技術が知られている(例えば、特許文献1および2参照。)。 The purpose of such reducing the data amount of the compression coded moving, the I picture is intra-coded moving image constituent images into a P-picture technique is known (e.g., Patent Documents 1 and 2 reference.).
特開2001−145112号公報 JP 2001-145112 JP 特開平10−66092号公報 JP-10-66092 discloses

しかしながら、上記特許文献1に記載の技術によると、IピクチャのマクロブロックタイプをPピクチャのイントラマクロブロックに変換しているだけなので、データ量を削減することができない。 However, according to the technique described in Patent Document 1, since only translating the macroblock type of the I-picture to the intra-macro block of P picture, it is impossible to reduce the amount of data. また、上記特許文献2に記載の技術によると、シーンチェンジがない場合には、ピクチャタイプを変更しないので、効果的に動画のデータ量を削減することができない。 Further, according to the technique described in Patent Document 2, when there is no scene change, it does not change the picture type can not be effectively reduce the amount of data of video.

上記課題を解決するために、本発明の第1の形態においては、画像処理装置であって、イントラ符号化された領域を有する動画構成画像を含む動画を取得する動画取得部と、イントラ符号化された領域を有する動画構成画像と他の動画構成画像との間の画像の変化量を検出する変化量検出部と、変化量が予め定められた値より小さい場合に、動画構成画像のイントラ符号化された領域の画像を、他の動画構成画像を参照するインター符号化により圧縮する再圧縮部と、を備える。 In order to solve the above problems, a first aspect of the present invention, an image processing apparatus, a moving image acquisition unit that acquires a moving image including a moving image constituting image having intra-coded regions, intra-coded a change amount detector for detecting a change amount of the image between the video configuration images and other video configuration images having regions which are, when the change amount is smaller than a predetermined value, intra video configuration images and an image of the reduction area, and a recompression portion for compressed by inter coding that refers to other video configuration image.

動画に含まれる複数の動画構成画像における特徴領域を検出する特徴領域検出部をさらに備え、変化量検出部は、動画構成画像におけるイントラ符号化された領域を有する特徴領域と他の動画構成画像における特徴領域との間の変化量を検出し、再圧縮部は、変化量が予め定められた値より小さい場合に、イントラ符号化された領域を有する特徴領域の画像を、他の動画構成画像における特徴領域を参照するインター符号化により圧縮してもよい。 Further comprising a feature region detecting section that detects a characteristic region in a plurality of video configuration images included in the moving image, the change amount detection unit, in the feature region and the other moving image constituent images having intra-coded region in the moving image constituent images detecting a variation between the characteristic region, recompression unit, when variation is less than a predetermined value, the image of the characteristic region with the intra-coded regions, in the other video configuration images it may be compressed by inter coding that refers to the feature region.

動画取得部は、イントラ符号化された領域を有する動画構成画像であるIピクチャを含む動画を取得し、変化量検出部は、Iピクチャである動画構成画像における特徴領域と他の動画構成画像における特徴領域との間の変化量を検出し、再圧縮部は、変化量が予め定められた値より小さい場合に、Iピクチャである動画構成画像を、他の動画構成画像を参照するPピクチャまたはBピクチャに変換することにより圧縮してもよい。 Video acquisition unit acquires moving image including an I picture which is a moving structure image having intra-coded region, variation detection unit, in the feature region and the other video configuration images in a moving image constituting image is an I-picture detecting a variation between the characteristic region, recompression unit, when variation is less than a predetermined value, the video configuration images is an I-picture, or P picture to refer to other video configuration images it may be compressed by converting the B-picture.

変化量検出部は、Iピクチャである動画構成画像における特徴領域と他のIピクチャである他の動画構成画像における特徴領域との間の変化量を検出し、再圧縮部は、変化量が予め定められた値より小さい場合に、Iピクチャである動画構成画像を、他のIピクチャである他の動画構成画像を参照するPピクチャまたはBピクチャに変換することにより圧縮してもよい。 Change amount detector detects the amount of change between the characteristic region in the other video configuration images a feature region and another I picture in the moving image constituting image is an I-picture, recompression unit, the amount of change in advance is smaller than the determined value, the video configuration images is an I-picture may be compressed by converting the P-picture or B-picture refers to the other videos configuration image is another I-picture.

再圧縮部は、変化量が予め定められた値より小さい場合に、イントラ符号化された領域を有する特徴領域と他の動画構成画像における特徴領域との間の画像の差分により、イントラ符号化された領域を有する特徴領域の画像を圧縮してもよい。 Recompression unit, when variation is less than a predetermined value, the difference of the image between the feature region in the characteristic region and other video configuration images with intra-coded regions are intra-coded image of the characteristic region with areas may compress.

再圧縮部は、イントラ符号化された領域を有する特徴領域と差分をとる他の動画構成画像の特徴領域における差分対象領域の位置とイントラ符号化された領域を有する特徴領域の位置との間の位置差およびイントラ符号化された領域を有する特徴領域と差分対象領域との間の画像の差分により、イントラ符号化された領域を有する特徴領域の画像を圧縮してもよい。 Recompression unit, between the position of the feature region having position and intra-coded areas of the difference target region in the characteristic region of the other videos configuration image taking feature region and the difference with the intra-coded regions the difference image between feature region and the difference target region having a position difference and an intra-coded region, may compress the image of the characteristic region with the intra-coded regions.

再圧縮部は、イントラ符号化された領域を有する特徴領域および他の動画構成画像における特徴領域を伸張して、イントラ符号化された領域を有する特徴領域の画素情報および他の動画構成画像における特徴領域の画素情報を取得する画像伸張部と、画像伸張部により伸張されて得られた画素情報に基づいて生成される画像の差分により、イントラ符号化された領域を有する特徴領域の画像を圧縮する差分再圧縮部と、を有してもよい。 Recompression unit, characterized in decompresses the characteristic region in the feature region and other video configuration images having intra-coded regions, intra-coded pixel information of feature region having regions and other video configuration images an image decompression unit which acquires pixel information of the region, the difference of the image generated based on the pixel information obtained is decompressed by the image decompression unit compresses the image of the characteristic region having intra-coded regions a difference recompression unit may have.

動画取得部は、イントラ符号化された領域を有する動画構成画像と他の動画構成画像との間のインター符号化された動画構成画像を含む動画を取得し、変化量検出部は、インター符号化された動画構成画像に含まれる符号化情報に基づいて変化量を検出してもよい。 Video acquisition unit acquires videos that contain inter-coded video configuration images between moving image constituting images and other video configuration images with intra-coded region, the change amount detector, inter-coding it may detect a change amount on the basis of the coded information included in the video configuration images.

変化量検出部は、インター符号化された動画構成画像に含まれる画像の差分情報および動きベクトルの少なくとも一方に基づいて、変化量を検出してもよい。 Change amount detecting unit, based on at least one of the difference information and the motion vector of the image contained in a moving image constituting image is inter-coded, may be detected variation.

変化量検出部は、イントラ符号化された領域を有する動画構成画像を他の動画構成画像と比較することにより圧縮し、イントラ符号化された領域を有する動画構成画像がより高い圧縮率で圧縮されるほど、より小さい変化量を検出してもよい。 Change amount detecting unit, the video configuration images having intra-coded region is compressed by comparing it with other video configuration images, videos constituent images having intra-coded region is compressed at a higher compression ratio Ruhodo may detect a smaller amount of change.

本発明の第2の形態によると、画像処理方法であって、イントラ符号化された領域を有する動画構成画像を含む動画を取得する動画取得段階と、イントラ符号化された領域を有する動画構成画像と他の動画構成画像との間の画像の変化量を検出する変化量検出段階と、変化量が予め定められた値より小さい場合に、動画構成画像のイントラ符号化された領域の画像を、他の動画構成画像を参照するインター符号化により圧縮する再圧縮段階とを備える。 According to a second aspect of the present invention, there is provided an image processing method, and a video acquisition step for acquiring moving image including a moving image constituting image having intra-coded regions, motion picture structure image having intra-coded regions and the change amount detecting step of detecting a variation of the image between the other video configuration images, when the change amount is smaller than a predetermined value, an image of the intra-coded regions of the video configuration images, and a recompression step of compressing the inter-coding that refers to other video configuration images.

本発明の第3の形態によると、画像を処理する画像処理装置用プログラムであって、画像を処理する画像処理装置用のプログラムであって、画像処理装置を、イントラ符号化された領域を有する動画構成画像を含む動画を取得する動画取得部、イントラ符号化された領域を有する動画構成画像と他の動画構成画像との間の画像の変化量を検出する変化量検出部、変化量が予め定められた値より小さい場合に、動画構成画像のイントラ符号化された領域の画像を、他の動画構成画像を参照するインター符号化により圧縮する再圧縮部として機能させる。 Having According to a third aspect of the present invention, an image processing device program for processing an image, a program for an image processing apparatus for processing an image, the image processing apparatus, which is intra-coded region video acquisition unit that acquires a moving image including a moving image constituting images, change amount detector for detecting a change amount of the image between the intra-coded video configuration images and other video configuration images having a region, the amount of change in advance If less than the prescribed value, the image of the intra-coded regions of the video configuration images, to function as a re-compressing section that compresses the inter coding that refers to other video configuration images.

なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。 The summary of the invention does not enumerate all the necessary features of the present invention. また、これらの特徴群のサブコンビネーションもまた、発明となりうる。 The sub-combinations of the features may become the invention.

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。 The present invention will be described below through an embodiment of the invention, the following embodiments are not intended to limit the invention according to the claims. また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。 Further, all combinations of features described in the embodiments are not necessarily essential to the invention.

図1は、一実施形態に係る画像処理システム10の一例を示す。 Figure 1 shows an example of an image processing system 10 according to one embodiment. 画像処理システム10は、特徴的な被写体の画質を高画質に保ちつつ画像のデータ量を低減することを目的とする。 The image processing system 10 is intended to reduce the data amount of the image while maintaining the image quality characteristic subject to high quality.

画像処理システム10は、監視対象空間150を撮像する複数の撮像装置100a−c(以下、撮像装置100と総称する。)、画像を処理する複数の画像処理装置120a−c(以下、画像処理装置120と総称する。)、画像処理装置170、通信ネットワーク110、および複数の表示装置180a−c(以下、表示装置180と総称する。)を備える。 The image processing system 10 captures the monitored space 150 a plurality of imaging devices 100a-c (hereinafter collectively referred to as the imaging apparatus 100.), A plurality of image processing apparatuses 120a-c for processing an image (hereinafter, the image processing apparatus collectively referred to as 120.), the image processing apparatus 170, a communication network 110, and a plurality of display devices 180a-c (hereinafter collectively referred to as the display device 180.) a.

画像処理装置120aは、撮像装置100aに接続されている。 The image processing apparatus 120a is connected to the imaging device 100a. また、画像処理装置120bは、撮像装置100bに接続されている。 The image processing apparatus 120b is connected to the imaging device 100b. また、画像処理装置120cは、撮像装置100cに接続されている。 The image processing apparatus 120c is connected to the imaging device 100c. なお、画像処理装置170および表示装置180は、監視対象空間150と異なる空間160に設けられている。 The image processing apparatus 170 and the display device 180 is provided in a space 160 different from the monitored space 150.

以下に、撮像装置100a、画像処理装置120a、画像処理装置170、および表示装置180aの動作を説明する。 The following describes the operation of the imaging apparatus 100a, the image processing apparatus 120a, the image processing apparatus 170 and the display device 180a,. 撮像装置100aは、監視対象空間150を撮像して得られた撮像動画をMPEG符号化して撮像動画データを生成して、撮像装置100aが接続されている画像処理装置120aに出力する。 Imaging device 100a generates the captured moving image data captured video obtained by imaging a monitored space 150 and MPEG coding, and outputs to the image processing apparatus 120a to the image pickup apparatus 100a is connected.

画像処理装置120aは、撮像装置100aが生成した撮像動画データを取得する。 The image processing apparatus 120a obtains the captured moving image data capturing device 100a is generated. 画像処理装置120は、撮像装置100から取得した撮像動画データを復号して撮像動画を生成して、生成した撮像動画から人物130、車輌等の移動物体140等、特徴の種類が異なる複数の特徴領域を検出する。 The image processing apparatus 120 generates a captured moving by decoding the captured moving image data obtained from the image capturing apparatus 100, the generated person 130 from captured moving the moving object 140, etc. of a vehicle or the like, a plurality of feature types of features are different to detect the area. そして、画像処理装置120aは、撮像動画から、特徴の種類のそれぞれについて特徴領域が他の領域より高画質な動画を生成することによって、複数の特徴領域動画を生成する。 Then, the image processing apparatus 120a, from the captured moving, by the characteristic region to produce a high-quality video than other regions for each of the types of features to generate a plurality of feature region moving. また、画像処理装置120aは、特徴領域以外の背景領域の動画であって、特徴領域動画より低画質な背景領域動画を生成する。 The image processing apparatus 120a is an video background region other than the feature region, and generates a low-quality background region moving from the feature region moving.

そして、画像処理装置120aは、生成した複数の特徴領域動画および背景領域動画をそれぞれ符号化することによって複数の特徴領域動画データおよび背景領域動画データを生成する。 Then, the image processing apparatus 120a generates a plurality of characteristic region moving image data and the background region moving image data by which encoded generated the characteristic region moving images and the background region moving. 同時に、画像処理装置120aは、符号化して得られた複数の特徴領域動画データおよび背景領域動画データを互いに関連づけて、通信ネットワーク110を通じて画像処理装置170に送信する。 At the same time, the image processing apparatus 120a may associate a plurality of characteristic region moving image data and the background region moving image data obtained by encoding each other, it transmits through the communication network 110 to the image processing apparatus 170.

画像処理装置170は、画像処理装置120aから受信した関連付けされた複数の特徴領域動画データおよび背景領域動画データをそれぞれ復号することによって、複数の特徴領域動画および背景領域動画を取得する。 The image processing apparatus 170, by decoding each received association has been the characteristic region moving image data and the background region moving image data from the image processing apparatus 120a, to obtain a plurality of characteristic region moving images and the background region moving image. そして、画像処理装置170は、複数の特徴領域動画および背景領域動画を合成することによって一の合成動画を生成して、生成した合成動画を表示装置180aに供給する。 Then, the image processing apparatus 170 generates an synthesized moving by combining a plurality of characteristic region moving images and the background region moving supplies the generated composite video display device 180a. 表示装置180aは、画像処理装置170から供給された動画を表示する。 Display device 180a displays a moving image supplied from the image processing apparatus 170.

なお、撮像装置100bおよび撮像装置100cの機能および動作は、それぞれ画像処理装置120bおよび画像処理装置120cに撮像動画データを提供することを除いて、撮像装置100aの機能および動作と同様であるので、その説明を省略する。 Since functions and operations of the image pickup apparatus 100b and the image pickup device 100c, respectively, except that to provide an imaging moving image data to the image processing apparatus 120b and the image processing apparatus 120c, are the same as the function and operation of the imaging device 100a, a description thereof will be omitted. また、画像処理装置120bおよび画像処理装置120cの機能および動作は、それぞれ撮像装置100bおよび撮像装置100cから撮像動画データを取得することを除いて、画像処理装置120aの機能および動作と同様であってよい。 The image processing apparatus 120b and the image processing apparatus 120c functions and operations, respectively, except that acquires a captured moving image data from the imaging device 100b and imaging device 100c, be similar to the function and operation of the image processing apparatus 120a good. よって、その説明を省略する。 Thus, the description thereof is omitted. また、画像処理装置170は、撮像装置100bおよび撮像装置100cのそれぞれから受信した関連付けされた複数の特徴領域動画データおよび背景領域動画データから、一の動画をそれぞれ生成して、それぞれ表示装置180bおよび表示装置180cに供給する。 The image processing apparatus 170, from the association a plurality of characteristic region moving image data and the background region moving image data has been received from each of the image pickup apparatus 100b and an imaging device 100c, and generates each one of video, each display device 180b and It is supplied to the display device 180c. また、表示装置180bおよび表示装置180cは、画像処理装置170から供給されたそれぞれの動画を表示する。 The display device 180b and the display device 180c displays the respective video supplied from the image processing apparatus 170.

本実施形態の画像処理システム10を、例えば監視システムとして実際に適用した場合には、人物、移動物体等、監視対象として特徴的な被写体を高画質で残すことができる場合がある。 The image processing system 10 of the present embodiment, for example, in the case of actual application as a monitoring system may be able to leave a person, moving objects, etc., a characteristic object in quality as monitored. そのうえ、動画のデータ量を低下することができる場合がある。 Moreover, it may be possible to reduce the data amount of moving.

図2は、画像処理装置120のブロック構成の一例を示す。 Figure 2 shows an exemplary block configuration of the image processing apparatus 120. 画像処理装置120は、圧縮動画取得部201、圧縮動画伸張部202、特徴領域検出部203、画像分割部204、画像生成部205、固定値化ユニット210、低減化ユニット220、符号化ユニット230、再圧縮ユニット270、対応付け処理部206、および出力部207を有する。 The image processing apparatus 120, the compressed moving image obtaining unit 201, a compression moving image expanding unit 202, feature region detecting unit 203, an image dividing unit 204, the image generation unit 205, a fixed value of unit 210, reducing unit 220, coding unit 230, recompression unit 270 has a correspondence processing section 206, and an output unit 207.

固定値化ユニット210は、複数の固定値化部211a−211c(以下、固定値化部211と総称する。)を含む。 Value fixing unit 210 includes a plurality of value fixing unit 211a-211c (hereinafter collectively referred to as the value fixing unit 211.). 低減化ユニット220は、複数の画質低減部221a−d(以下、画質低減部221と総称する。)を含む。 Reducing unit 220 includes a plurality of image quality reducing section 221a-d (hereinafter, collectively referred to as image quality reducing section 221.).

符号化ユニット230は、背景領域動画符号化部231aおよび複数の特徴領域動画符号化部231b−d(以下、特徴領域動画符号化部231と総称する。)を含む。 Coding unit 230 includes a background region moving image coding section 231a and the characteristic region moving picture coding unit 231b-d (hereinafter, collectively referred to as the characteristic region moving picture coding unit 231.). なお、背景領域動画符号化部231aおよび特徴領域動画符号化部231b−dを総称して、符号化部231と呼ぶ場合がある。 Note that collectively background region moving image coding section 231a and the characteristic region moving picture coding unit 231b-d, it may be referred to as encoding unit 231.

なお、画質低減部221aおよび背景領域動画符号化部231aは、圧縮部240aとして機能する。 Incidentally, the image quality reduction unit 221a and the background region moving image coding unit 231a functions as a compression unit 240a. また、画質低減部221bおよび特徴領域動画符号化部231bは、圧縮部240bとして機能する。 Further, the image quality reduction unit 221b and the characteristic region moving picture coding unit 231b serves as a compression portion 240b. 同様に、画質低減部221cおよび特徴領域動画符号化部231cは圧縮部240cとして機能する。 Similarly, image quality reducing section 221c and the characteristic region moving picture coding unit 231c serves as a compression part 240c. 画質低減部221dおよび特徴領域動画符号化部231dは圧縮部240dとして機能する。 Quality reduction unit 221d and the characteristic region moving picture coding unit 231d serves as a compression portion 240d. なお、複数の圧縮部240a−dを、圧縮部240と総称する。 Incidentally, a plurality of compressed portions 240a-d, collectively referred to as the compression section 240.

圧縮動画取得部201は、圧縮された動画を取得する。 Compressing moving image obtaining unit 201 obtains a compressed moving image. 具体的には、圧縮動画取得部201は、撮像装置100が生成した、符号化された撮像動画データを取得する。 Specifically, the compressed moving image obtaining section 201, the imaging apparatus 100 has generated, acquires a captured moving image data encoded. 圧縮動画伸張部202は、圧縮動画取得部201が取得した動画を復元して、動画に含まれる複数の動画構成画像を生成する。 Compressing moving image expanding section 202 restores the video compression moving image obtaining unit 201 has obtained, to generate a plurality of video configuration images included in the moving image. 具体的には、圧縮動画伸張部202は、圧縮動画取得部201が取得した撮像動画データを復号して、動画に含まれる複数の動画構成画像を生成する。 Specifically, the compressed moving image decompression unit 202 decodes the captured moving image data compressing moving image obtaining unit 201 has obtained, to generate a plurality of video configuration images included in the moving image. なお、動画構成画像はフレーム画像およびフィールド画像を含む。 The moving structure image includes a frame image and the field images.

特徴領域検出部203は、動画に含まれる複数の動画構成画像から、特徴領域を検出する。 Feature region detecting unit 203, a plurality of video configuration images included in the moving, it detects a characteristic region. そして、画像分割部204は、複数の動画構成画像のそれぞれを、特徴領域と背景領域とに分割する。 Then, the image division unit 204, each of the plurality of video configuration images is divided into the feature region and the background region.

画像生成部205は、複数の動画構成画像から特徴領域画像を抽出することにより、複数の特徴領域画像をそれぞれ含む複数の特徴領域圧縮用動画を生成する。 Image generating unit 205, by extracting the feature region image from a plurality of video configuration images to generate a plurality of moving image characteristic region compression including a plurality of feature region images, respectively. 具体的には、画像生成部205は、動画を複製することにより、複数の特徴領域動画のそれぞれを圧縮するための複数の特徴領域圧縮用動画および背景領域動画を圧縮するための背景領域圧縮用動画を生成する。 Specifically, the image generating unit 205, by duplicating a video, the background area compression to compress the plurality of characteristic region compression moving images and the background region moving for compressing each of the plurality of characteristic region moving to produce the video.

そして、固定値化部211は、特徴領域圧縮用動画に含まれる複数の動画構成画像における特徴領域画像以外の領域の画素値を固定値化する。 Then, the value fixing unit 211 fixes value of the pixel value of the region other than the characteristic region image in a plurality of video configuration images included in the characteristic region compression moving image. 例えば、固定値化部211は、特徴領域画像以外の領域の画素値を所定の値(例えば、輝度値0)に設定する。 For example, the value fixing unit 211, a predetermined value pixel value of the region other than the feature region image (e.g., luminance value 0) is set to. そして、圧縮部240は、特徴領域画像以外の領域の画素値が固定値化された複数の動画構成画像をそれぞれ含む複数の特徴領域圧縮用画像を、それぞれの特徴量に応じた強度で圧縮する。 Then, the compression unit 240, a plurality of characteristic regions compression image comprising a plurality of video configuration images pixel value of the region other than the feature region image is fixed valued respectively, compressed at intensity corresponding to each feature quantity . このように、圧縮部240は、複数の特徴領域圧縮用動画のそれぞれと、背景領域圧縮用動画とを、それぞれの特徴量に応じた強度で圧縮する。 Thus, the compression unit 240, respectively of the characteristic region compression moving image, a moving image background region compression, compressed in intensity corresponding to each feature quantity.

以上説明したように、特徴領域検出部203は、画像から特徴領域を検出する。 As described above, the characteristic region detecting section 203 detects a characteristic region from the image. そして、画像分割部204は、画像を、特徴領域と、特徴領域以外の背景領域とに分割する。 The image dividing unit 204 divides the image, and the feature region and a background region other than the feature region. そして、圧縮部240は、特徴領域の画像である特徴領域画像と背景領域の画像である背景領域画像とを、それぞれ異なる強度で圧縮する。 Then, the compression unit 240, and a background area image of a feature region image and a background area which is an image of the characteristic region is compressed at different intensities. そして、圧縮部240は、特徴領域画像を複数含む特徴領域動画と背景領域画像を複数含む背景領域動画とを、それぞれ異なる強度で圧縮する。 Then, the compression unit 240, and a plurality including background region moving the characteristic region moving images and the background region image containing a plurality of characteristic region images are compressed with different intensities.

なお、圧縮部240b、圧縮部240c、および圧縮部240dには、いずれの種類の特徴領域動画を圧縮すべきかが予め定められており、圧縮部240b、圧縮部240c、および圧縮部240dは予め定められた特徴の種類の特徴領域動画を圧縮する。 The compression unit 240b, the compression unit 240c, and the compression portion 240d is whether to compress any type of feature region moving image is predetermined, the compression unit 240b, the compression unit 240c, and the compression portion 240d is set in advance compressing the characteristics of the types of feature region moving is. なお、特徴領域動画を圧縮する場合の圧縮強度は、複数の特徴の種類ごとに予め定められており、圧縮部240b、圧縮部240c、および圧縮部240dは、予め定められた特徴の種類の特徴領域動画を、当該特徴の種類に予め定められた圧縮強度で圧縮する。 Incidentally, the compressive strength when compressing characteristic region moving images, are determined in advance for each type of a plurality of features, the compression unit 240b, the compression unit 240c, and the compression unit 240d is the type of predetermined characteristics, wherein the region moving, compressing the compression strength predetermined for the type of the feature. このように、圧縮部240は、画像分割部204によって分割された画像領域ごとに設けられた圧縮器を用いて、複数の領域を並行して圧縮する。 Thus, the compression unit 240, using a compressor which is provided for each image regions divided by the image dividing unit 204 compresses in parallel a plurality of regions.

なお、圧縮部240は、一つの圧縮器によって実装されてよく、複数の特徴領域動画および背景領域動画を時間的に順次圧縮してもよい。 The compression unit 240 may be implemented by a single compressor, a plurality of characteristic region moving images and the background region moving can be temporally sequential compression. 他にも、圧縮部240は、圧縮動画伸張部202によって復号された撮像動画を、画像分割部204が分割した領域ごとに、各領域の特徴の種類および背景のそれぞれに対して予め定められた圧縮率で圧縮することによって、一の動画データを生成してよい。 Additional compression section 240, a captured moving image decoded by the compressed moving image expanding section 202, for each area where the image dividing unit 204 divides, predetermined for each feature type and background of each region by compressing the compression ratio may generate one moving image data.

なお、特徴領域検出部203は、画像である動画に含まれる複数の動画構成画像から、特徴の種類が異なる複数の特徴領域を検出する。 The characteristic region detecting section 203, a plurality of video configuration images included in a moving image, the type of feature to detect a plurality of different characteristic regions. そして、画像分割部204は、複数の動画構成画像を、複数の特徴領域のそれぞれと、複数の特徴領域以外の背景領域とに分割する。 Then, the image division unit 204, a plurality of video configuration images, dividing each with a plurality of characteristic regions and a background region other than the plurality of characteristic regions. そして、圧縮部240は、複数の特徴領域動画と背景領域動画とを、それぞれの特徴量に応じた強度で圧縮する。 Then, the compression unit 240, and a plurality of characteristic region moving images and the background region moving compressed with intensity corresponding to each feature quantity. なお、特徴量とは、被写体の種類、被写体の大きさ、移動物体が移動する移動速さ、および特徴領域の大きさを含む。 Note that the feature quantity includes the type of the object, the object size, the moving speed at which the moving object moves, and the size of the feature region.

具体的には、画質低減部221は、複数の特徴領域動画と背景領域動画とを、それぞれの特徴量に応じて画質を低減することにより圧縮することにより、複数の特徴領域動画データと背景領域動画データとを生成する。 Specifically, the image quality reduction unit 221, and a plurality of characteristic region moving images and the background region moving image, by compressing by reducing the image quality in response to each feature quantity, the characteristic region moving image data and the background area to generate and video data. より具体的には、画質低減部221は、複数の特徴領域動画と背景領域動画とを、それぞれの特徴量に応じて解像度またはフレームレートを低減することにより圧縮する。 More specifically, the image quality reduction unit 221, and a plurality of characteristic region moving images and the background region moving compressed by reducing the resolution or frame rate according to each feature quantity. そして、符号化部231は、複数の特徴領域動画と背景領域動画とを、それぞれの特徴量に応じた設定値を用いて符号化することにより圧縮する。 Then, the encoding unit 231, and a plurality of characteristic region moving images and the background region moving compressed by encoding by using the setting value corresponding to each feature quantity. 例えば、符号化部231は、複数の特徴領域動画と背景領域動画とを、それぞれの特徴量に応じた割り当て符号量を用いて符号化することにより圧縮する。 For example, the encoding unit 231, and a plurality of characteristic region moving images and the background region moving compressed by encoding using assigned code amount corresponding to each feature quantity.

再圧縮ユニット270は、符号化部231によって生成された複数の特徴領域動画データと背景領域動画データとをそれぞれ再圧縮する。 Recompressing unit 270 recompressed generated by the coding unit 231 a plurality of characteristic regions moving image data and the background region moving image data, respectively. そして、対応付け処理部206は、再圧縮ユニット270が再圧縮した複数の特徴領域動画データと背景領域動画データとのそれぞれを例えばタグ情報等を付帯する等して互いに対応づける。 Then, the correspondence processing section 206 equal recompression unit 270 attached to, for example, tag information, etc. Each of the plurality of characteristic region moving image data and the background region moving image data recompressed associate with each other. 出力部207は、対応付け処理部206が対応づけた複数の特徴領域動画データおよび背景領域動画データを通信ネットワーク110に送出する。 The output unit 207 transmits the plurality of characteristic region moving image data and the background region moving image data correspondence processing section 206 associates the communication network 110.

なお、特徴領域検出部203は、複数の特徴領域のそれぞれの特徴量を特定したときの信頼性の度合いを示す確信度を、複数の特徴領域毎に算出する。 The characteristic region detecting section 203, a confidence level indicating the degree of reliability when identifying the respective feature amounts of a plurality of characteristic regions is calculated for each of the plurality of characteristic regions. そして、圧縮部240は、複数の特徴領域動画を、それぞれの特徴量および確信度に応じた強度で圧縮する。 Then, the compression unit 240, a plurality of characteristic region moving, compressing at intensity corresponding to each of the feature quantities and confidence. 例えば、画質低減部221は、複数の特徴領域動画を、それぞれの特徴量および確信度に応じて解像度またはフレームレートを低減することにより圧縮する。 For example, the image quality reduction unit 221, a plurality of characteristic region moving, compressed by reducing the resolution or frame rate according to each of the feature quantities and confidence. そして、符号化部231は、複数の特徴領域動画を、それぞれの特徴量および確信度に応じた設定値を用いて符号化することにより圧縮する。 Then, the encoding unit 231, a plurality of characteristic region moving compresses by encoding using a set value corresponding to each feature quantity and confidence. 例えば、圧縮部240は、複数の特徴領域動画を、それぞれの確信度が低いほど、それぞれの特徴量に応じた強度より低い強度で圧縮してよい。 For example, compression unit 240, a plurality of characteristic region moving images, the lower the respective confidence, may be compressed with lower intensity corresponding to each feature quantity intensity.

図3は、画像処理装置170のブロック構成の一例を示す。 Figure 3 shows an exemplary block configuration of the image processing apparatus 170. 画像処理装置170は、圧縮動画取得部301、対応付け解析部302、圧縮動画伸張ユニット310、動画生成部303、および出力部304を有する。 The image processing apparatus 170 includes a compressed moving image obtaining section 301, correspondence analysis unit 302, compressed moving image expanding unit 310, moving image generation unit 303, and an output unit 304. 圧縮動画伸張ユニット310は、複数の圧縮動画伸張部311a−d(以下、圧縮動画伸張部311と総称する。)を含む。 Compressed moving image expanding unit 310 includes a plurality of compression moving image expanding section 311a-d (hereinafter collectively referred to as the compressed moving image expanding section 311.).

圧縮動画取得部301は、出力部207が出力した、対応づけられた複数の特徴領域動画データおよび背景領域動画データを取得する。 Compressed moving image acquisition unit 301, output unit 207 has output, to obtain a plurality of characteristic region moving image data and the background region moving image data that is correlated. 対応付け解析部302は、例えば付帯されたタグ情報を解析して、圧縮動画取得部301が取得した対応づけられた複数の特徴領域動画データおよび背景領域動画データを取り出す。 Correspondence analyzing section 302, for example, by analyzing the accompanying tag information, retrieve the pieces of characteristic region moving image data and the background region moving image data compressing moving image obtaining unit 301 is associated acquired.

圧縮動画伸張部311は、複数の特徴領域動画データおよび背景領域動画データを復号する。 Compressing moving image expanding section 311 decodes the plurality of characteristic region moving image data and the background region moving image data. 具体的には、圧縮動画伸張部311aは背景領域動画データを復号する。 Specifically, the compressed moving image decompression unit 311a decodes the background region moving image data. また、圧縮動画伸張部311b−dは、複数の特徴領域動画データのうち、一の特徴領域動画を復号して、複数の特徴領域動画および背景領域動画を取得する。 The compression video decompression unit 311b-d, of the plurality of characteristic region moving image data, by decoding one of the characteristic region moving, to obtain a plurality of characteristic region moving images and the background region moving image. なお、圧縮動画伸張部311b−dは、特徴の種類ごとに設けられ、それぞれ、いずれかの種類の特徴領域動画データを復号する。 The compression video decompression unit 311b-d are provided for each type of feature, respectively, to decode any kind of characteristic region moving image data.

動画生成部303は、圧縮動画伸張部311が復号することによって得られた動画構成画像を合成する。 Moving image generation unit 303 synthesizes the video configuration images obtained by compressing moving image expanding section 311 is decoded. 具体的には、動画生成部303は、圧縮動画伸張部311b−dにより復号された複数の特徴領域動画のそれぞれが含む動画構成画像の特徴領域の画像を、背景領域動画が含む動画構成画像に重ね合わせた動画構成画像を生成する。 Specifically, moving image generation unit 303, the image of the characteristic region of the video configuration images, each of the characteristic region moving images decoded by the compressed moving image decompression unit 311b-d comprises, in the moving structure image including the background region moving It generates a moving image constituting image superimposed. 出力部304は、動画生成部303が生成した複数の動画構成画像を含む動画を、表示装置180に供給する。 The output unit 304, a moving image including a plurality of video configuration images moving image generation unit 303 has generated, to the display device 180.

なお、本実施形態の圧縮動画伸張ユニット310は、特徴の種類の数に応じた複数の圧縮動画伸張部311を含むが、他の形態では、圧縮動画伸張ユニット310が含む一の圧縮動画伸張部311が、背景領域動画データおよび複数の特徴領域動画データを順次復号してもよい。 The compression moving image expanding unit 310 of this embodiment includes a plurality of compression moving image expanding section 311 corresponding to the number of types of feature, in another form, one compressed moving image decompression unit which compressed moving image expanding unit 310 comprises 311, may be sequentially decodes the background region moving image data and the characteristic region moving image data. また、画像処理装置120から一の動画データとして提供される場合には、一の圧縮動画伸張部311が当該一の動画データを復号して、復号した得られた動画を出力部304が出力してもよい。 Also, when provided from the image processing apparatus 120 as one of the moving image data, the single compression moving image expanding unit 311 decodes the moving image data of the one, output by the output unit 304 the video obtained decoded it may be.

図4は、画像処理装置120のブロック構成の別の一例を示す。 Figure 4 shows another example of a block configuration of the image processing apparatus 120. 画像処理装置120は、圧縮動画取得部201、圧縮動画伸張部202、特徴領域検出部203、入力動画画質制御部280、画質低減部281、階層間差分圧縮部282a−d(以下、階層間差分圧縮部282と総称する。)、再圧縮ユニット270、および出力部207を備える。 The image processing apparatus 120, the compressed moving image obtaining unit 201, a compression moving image expanding unit 202, feature region detecting unit 203, the input moving image quality control unit 280, the image quality reduction unit 281, the hierarchical difference compressing section 282a-d (hereinafter, the hierarchical difference collectively referred to as the compression section 282.), re-compression unit 270, and an output unit 207.

圧縮動画取得部201は、圧縮された動画を取得する。 Compressing moving image obtaining unit 201 obtains a compressed moving image. 具体的には、圧縮動画取得部201は、撮像装置100が生成した、符号化された撮像動画データを取得する。 Specifically, the compressed moving image obtaining section 201, the imaging apparatus 100 has generated, acquires a captured moving image data encoded. 圧縮動画伸張部202は、圧縮動画取得部201が取得した動画を復元して、動画に含まれる複数の動画構成画像を生成する。 Compressing moving image expanding section 202 restores the video compression moving image obtaining unit 201 has obtained, to generate a plurality of video configuration images included in the moving image.

具体的には、圧縮動画伸張部202は、圧縮動画取得部201が取得した撮像動画データを復号して、動画に含まれる複数の動画構成画像を生成する。 Specifically, the compressed moving image decompression unit 202 decodes the captured moving image data compressing moving image obtaining unit 201 has obtained, to generate a plurality of video configuration images included in the moving image. なお、動画構成画像はフレーム画像およびフィールド画像を含む。 The moving structure image includes a frame image and the field images. また、動画構成画像は、この発明における入力画像の一例である。 The moving structure image is an example of an input image in the present invention.

特徴領域検出部203は、動画に含まれる複数の動画構成画像から、特徴領域を検出する。 Feature region detecting unit 203, a plurality of video configuration images included in the moving, it detects a characteristic region. 入力動画画質制御部280は、圧縮動画伸張部202が生成した複数の動画構成画像のそれぞれにおける特徴領域の特徴量に応じて、特徴領域の画質および特徴領域以外の領域の画質を制御する。 The input moving image quality control unit 280 according to the feature amount of the feature region in each of the plurality of moving image constituent images compressed moving image expanding section 202 has generated, to control the image quality of a region other than the image quality and the characteristic region in the characteristic region.

画質低減部281は、動画の画質を低減することによって、予め定められた異なる画質を持つ複数の動画を生成する。 Image quality reducing section 281, by reducing the image quality of the moving image, generates a plurality of video with different quality determined in advance. そして、画質低減部281は、生成した画質が異なる動画を階層間差分圧縮部282に提供する。 Then, the image quality reduction unit 281, the generated image quality to provide different video hierarchical difference compressing section 282. 具体的には、画質低減部281は、動画のフレームレートを低減することにより、あるいは動画に含まれる動画構成画像の解像度を低減することにより、異なる画質を持つ動画を生成する。 Specifically, the image quality reducing section 281, by reducing the frame rate of a moving, or by reducing the resolution of the moving image constituting images included in the moving image, to generate a video with different quality. そして、階層間差分圧縮部282は、予め定められた画質の動画を画質低減部281から取得して、取得した動画を圧縮する。 Then, the hierarchical difference compressing unit 282 acquires the video quality that is determined in advance from the image quality reducing unit 281, compresses the acquired video. なお、階層間差分圧縮部282は、互いに異なる画質の動画を圧縮する。 Incidentally, the hierarchical difference compressing unit 282 compresses the different quality video with each other.

なお、画質低減部281が階層間差分圧縮部282aに供給する動画に含まれる動画構成画像は、この発明における低画質画像の一例であってよい。 The moving image constituting image quality reducing section 281 included in the moving image supplied to the hierarchical difference compressing section 282a may be an example of low-quality images in the present invention. また、画質低減部281が階層間差分圧縮部282b−dに供給する動画に含まれる動画構成画像は、この発明における特徴領域画像の一例であってよい。 The moving image constituting image quality reducing section 281 included in the moving image supplied to the hierarchical difference compressing section 282b-d may be an example of a feature region image in the present invention. この場合、画質低減部281および入力動画画質制御部280は、この発明における画像生成部として機能する。 In this case, the image quality reduction unit 281 and the input moving image quality control unit 280 functions as an image generating unit in the present invention.

なお、階層間差分圧縮部282aは、階層間差分圧縮部282b−dのいずれが受け取る動画構成画像より解像度が低い動画構成画像を画質低減部281から取得して圧縮する。 Incidentally, the hierarchical difference compressing section 282a compresses to obtain a low moving image constituting image resolution than video configuration images either receives a hierarchical difference compressing section 282b-d from the image quality reducing section 281. なお、階層間差分圧縮部282は、階層間差分圧縮部282b、階層間差分圧縮部282c、および階層間差分圧縮部282dの順で解像度が低い動画構成画像を画質低減部281から取得して圧縮する。 Incidentally, the hierarchical difference compressing unit 282 acquires the hierarchical difference compressing section 282b, the hierarchical difference compressing section 282c, and the low resolution moving image constituting images in the order of inter-grade difference compressing section 282d from the image quality reducing section 281 compression to.

階層間差分圧縮部282bは、階層間差分圧縮部282aが圧縮した動画構成画像を伸張して、伸張して得られた動画構成画像を、画質低減部281から取得した動画構成画像の解像度と同じ解像度にまで拡大する。 Hierarchical difference compressing section 282b decompresses the video configuration images hierarchical difference compressing section 282a is compressed, the video configuration images obtained by stretching, the same as the resolution of the video configuration images obtained from the image quality reducing section 281 to expand to the resolution. そして、階層間差分圧縮部282bは、拡大して得られた動画構成画像と画質低減部281から取得した動画構成画像との間の差分画像を圧縮する。 Then, the hierarchical difference compressing section 282b compresses the difference image between the video configuration images obtained from video configuration images and image quality reducing section 281 obtained by expanding. なお、階層間差分圧縮部282bは、特徴領域において差分値を持つが、特徴領域以外の領域において差分値を持たない差分画像を生成して圧縮する。 Incidentally, the hierarchical difference compressing section 282b is has a difference value in the characteristic region is compressed to generate a difference image having no difference in the non-characteristic region.

また、階層間差分圧縮部282cは、階層間差分圧縮部282bが圧縮した動画構成画像を伸張して、伸張して得られた動画構成画像を、画質低減部281から取得した動画構成画像の解像度と同じ解像度にまで拡大する。 Also, the hierarchical difference compressing section 282c decompresses the video configuration images hierarchical difference compressing section 282b is compressed, the video configuration images obtained by stretching, the video configuration images obtained from the image quality reducing section 281 resolution to expand to the same resolution as the. そして、階層間差分圧縮部282cは、拡大して得られた動画構成画像と画質低減部281から取得した動画構成画像との間の差分画像を圧縮する。 Then, the hierarchical difference compressing section 282c compresses the difference image between the video configuration images obtained from video configuration images and image quality reducing section 281 obtained by expanding. なお、階層間差分圧縮部282cは、特徴領域の特徴量に応じて、複数の特徴領域のうちの少なくとも一部の特徴領域において差分値を持つが、当該少なくとも一部の特徴領域以外の領域において差分値を持たない差分画像を生成して圧縮する。 Incidentally, the hierarchical difference compressing section 282c in accordance with the feature amount of the feature region, but with a difference value in at least a part of the characteristic region of the plurality of characteristic regions in a region other than the at least part of the feature region compression to generate a difference image that does not have a difference value.

また、階層間差分圧縮部282dは、階層間差分圧縮部282cが圧縮した動画構成画像を伸張する。 Also, the hierarchical difference compressing section 282d decompresses the video configuration images hierarchical difference compressing section 282c is compressed. そして、階層間差分圧縮部282dは、伸張して得られた動画構成画像を、入力動画画質制御部280から取得した動画構成画像の解像度と同じ解像度にまで拡大する。 The inter-grade difference compressing section 282d enlarges the video configuration images obtained by stretching, to the same resolution as the resolution of the video configuration images obtained from the input video image quality control unit 280. そして、階層間差分圧縮部282dは、拡大して得られた動画構成画像と入力動画画質制御部280から取得した動画構成画像との間の差分画像を圧縮する。 The inter-grade difference compressing section 282d compresses the difference image between the video configuration images obtained with video configuration image obtained by enlarging the input moving image quality control unit 280. なお、階層間差分圧縮部282dは、特徴領域の特徴量に応じて、複数の特徴領域のうちの少なくとも一部の特徴領域において差分値を持つが、当該少なくとも一部の特徴領域以外の領域において差分値を持たない差分画像を生成して圧縮する。 Incidentally, the hierarchical difference compressing section 282d in accordance with the feature amount of the feature region, but with a difference value in at least a part of the characteristic region of the plurality of characteristic regions in a region other than the at least part of the feature region compression to generate a difference image that does not have a difference value.

このように、階層間差分圧縮部282b−dは、入力動画画質制御部280または画質低減部281から受け取った動画構成画像と、より低い解像度の動画構成画像を拡大した動画構成画像との間の差分をとることによって得られた差分画像を圧縮する。 Thus, the hierarchical difference compressing section 282b-d is between the video configuration images received from the input moving image quality control unit 280 or the image quality reducing section 281, a video configuration images obtained by enlarging a lower resolution video configuration images compressing the difference image obtained by taking the difference. そして、再圧縮ユニット270は、階層間差分圧縮部282のそれぞれが圧縮して得られた動画のそれぞれを再圧縮する。 The recompression unit 270, each of the inter-grade difference compressing unit 282 to re-compress the respective video obtained by compressing. さらに、出力部207は、再圧縮ユニット270によって再圧縮されたそれぞれの動画を多重化して出力する。 Further, the output unit 207 outputs the respective videos are recompressed by recompression unit 270 multiplexes. 具体的には、出力部207は、階層間差分圧縮部282が圧縮した後に、再圧縮ユニット270によって再圧縮された動画を画像処理装置170に送信する。 Specifically, the output unit 207, after the inter-grade difference compressing unit 282 compresses and transmits a moving image that has been re-compressed by the recompression unit 270 to the image processing apparatus 170. このように、画像処理装置120は、特徴領域の特徴量に応じてスケーラブルに圧縮符号化された動画を提供することができる。 Thus, the image processing apparatus 120 may provide a video that has been compressed and encoded in a scalable depending on the feature amount of the feature region.

図5は、階層間差分圧縮部282aおよびbのブロック構成の一例を示す。 Figure 5 shows an example of a block configuration of a hierarchical difference compressing section 282a and b. 階層間差分圧縮部282aは、動き解析部285a、動き符号化部286a、差分処理部287a、および符号化部288aを有する。 Hierarchical difference compressing section 282a includes motion analysis unit 285a, a motion coding unit 286a, a difference processing unit 287a, and a coding section 288a. 動き解析部285aは、差分対象領域決定部294aおよび位置差情報生成部295aを含む。 Motion analysis unit 285a includes a differential target region determining section 294a and the position difference information generating unit 295a. 差分処理部287aは、差分画素画像生成部296a、空間周波数領域変換部297a、および量子化部298aを含む。 Difference processing unit 287a includes a differential pixel image generating section 296a, the spatial frequency domain transform section 297a, and a quantization unit 298a.

階層間差分圧縮部282bは、動き解析部285b、動き符号化部286b、差分処理部287b、画像拡大部293b、画像復号部292b、画素値変更部291b、および符号化部288bを有する。 Hierarchical difference compressing section 282b includes motion analysis unit 285b, a motion coding unit 286b, a difference processing unit 287 b, the image enlargement unit 293b, an image decoding unit 292b, the pixel value changing section 291 b, and a coding section 288b. 動き解析部285bは、差分対象領域決定部294bおよび位置差情報生成部295bを含む。 Motion analysis unit 285b includes a difference target region determining unit 294b and the position difference information generating unit 295b. 差分処理部287bは、差分画素画像生成部296b、空間周波数領域変換部297b、量子化部298b、および周波数領域画質変換部299bを含む。 Difference processing unit 287b includes differential pixel image generating unit 296b, the spatial frequency domain transform unit 297b, the quantization unit 298b, and a frequency domain image quality converting unit 299b. なお、階層間差分圧縮部282cおよび階層間差分圧縮部282dは、階層間差分圧縮部282bが有する構成要素と略同一の構成要素を有するので、説明を省略する。 Since hierarchical difference compressing section 282c and the hierarchical difference compressing section 282d includes components substantially the same components with the hierarchical difference compressing section 282b, the description thereof is omitted.

以下に、階層間差分圧縮部282aの各構成要素の機能および動作について説明する。 The following describes the functions and operations of each component of the inter-grade difference compressing section 282a. 動き解析部285aは、画質低減部281から受け取った複数の動画構成画像の画像内容に基づいて、複数の動画構成画像にわたる動きを解析することによって、動きに基づいて動画構成画像を圧縮する部分領域を決定する。 Motion analysis unit 285a, based on the image content of a plurality of video configuration images received from the image quality reducing section 281, by analyzing the movement across multiple video configuration images, portions to compress the video configuration images based on the motion area to determine.

具体的には、差分対象領域決定部294aは、複数の動画構成画像にわたる部分領域の画素値に基づいて、動画構成画像を他の動画構成画像との差分により圧縮する場合における、差分対象となる他の動画構成画像における部分領域を決定する。 Specifically, the difference target region determining section 294a based on the pixel value of the partial area over a plurality of video configuration images, in the case of compressing the video configuration images by the difference between the other moving image constituent images, the difference target determining a partial area of ​​the other video configuration images. 差分対象領域決定部294aは、圧縮対象の部分領域の画素情報および差分対象の部分領域の画素情報を差分処理部287aに供給する。 Difference target region determining section 294a supplies the pixel information of the pixel information and the difference target partial region of the compressed partial region in the difference processing unit 287a.

また、位置差情報生成部295aは、差分により圧縮する部分領域と差分対象となる部分領域との間の位置差を示す位置差情報を生成する。 The position difference information generating section 295a generates a position difference information indicating a position difference between the partial region and the differences subject to partial area to be compressed by the difference. 具体的には、位置差情報生成部295aは、動き補償に用いる動きベクトルを生成する。 Specifically, the position difference information generating section 295a generates a motion vector used for motion compensation. そして、位置差情報生成部295aは、生成した位置差情報を動き符号化部286aに供給する。 The position difference information generating section 295a supplies the encoding section 286a moves the generated position difference information.

動き符号化部286aは、位置差情報生成部295aから供給された位置差情報を符号化して、再圧縮ユニット270に供給する。 Movement coding section 286a is a position difference information supplied from the position difference information generating unit 295a and encodes and supplies the recompression unit 270. 例えば、動き符号化部286は、隣接する部分領域における位置差情報との間の差を符号化して、再圧縮ユニット270に供給する。 For example, the motion coding unit 286, encodes the difference between the position difference information in the adjacent partial regions, and supplies the recompression unit 270.

差分処理部287aは、動き解析部285aから受け取った圧縮対象の部分領域の画素情報と差分対象の部分領域の画素情報との間の差分により、圧縮対象の部分領域の画像を圧縮する。 Difference processing section 287a is the difference between the pixel information of the pixel information and the difference target partial regions of the compressed partial region received from the motion analysis unit 285a, compresses the image to be compressed in the partial area. 具体的には、差分画素画像生成部296aは、圧縮対象の部分領域の画素情報と差分対象の部分領域の画素情報との間の差分により差分画素画像を生成する。 Specifically, the differential pixel image generating unit 296a is the difference between the pixel information of the pixel information of the compressed target partial regions and differential target partial region to generate a difference pixel image.

そして、空間周波数領域変換部297aは、差分画素画像を部分領域cに空間周波数領域に変換する。 Then, the spatial frequency domain transforming section 297a converts the spatial frequency domain the differential pixel image into partial regions c. 具体的には、空間周波数領域変換部297aは、離散コサイン変換(DCT)により、差分画素画像における部分領域ごとに空間周波数領域に変換する。 Specifically, the spatial frequency domain transform unit 297a is a discrete cosine transform (DCT), into a spatial frequency domain for each partial area in the differential pixel image. なお、空間周波数領域変換部297aは、アダマール変換あるはウェーブレット変換等のような種々の周波数変換により、差分画素画像を部分領域ごとに空間周波数領域に変換してよい。 Note that the spatial frequency domain transforming section 297a is Hadamard transform by various frequency conversion, such as the wavelet transform may convert the differential pixel image into the spatial frequency domain for each partial region.

なお、動き解析部285aが他の動画構成画像の部分領域との間の差分により圧縮しない旨を判断した場合には、差分処理部287aは圧縮対象の部分領域の画素情報を空間周波数領域変換部297aに供給する。 In the case where the motion analysis unit 285a determines the instruction not compressed by the difference between the partial region of the other video configuration images, the difference processing unit 287a is the spatial frequency domain transform unit pixel information of the partial regions of the compressed supplied to the 297a. 空間周波数領域変換部297aは画素情報を、上記のように部分領域ごとに空間周波数領域に変換する。 The spatial frequency domain transform unit 297a pixel information, into a spatial frequency domain for each partial region as described above.

量子化部298aは、空間周波数領域変換部297aが空間周波数領域に変換することによって得られた変換係数を量子化する。 Quantizing section 298a quantizes the transform coefficients obtained by the spatial frequency domain conversion unit 297a converts the spatial frequency domain. そして、符号化部288aは、量子化部298aによって量子化された変換係数を符号化することによって圧縮する。 The encoding unit 288a is compressed by encoding the transform coefficients quantized by the quantization unit 298a. 例えば、符号化部288は、量子化部298aによって量子化された変換係数を、ハフマン符号化、算術符号化等のエントロピー符号化により符号化する。 For example, the coding unit 288, the transform coefficients quantized by the quantization unit 298a, Huffman coding, for coding by entropy coding such as arithmetic coding. そして、符号化部288aは、符号化することによって得られた動画を再圧縮ユニット270に供給する。 The encoding unit 288a supplies the recompression unit 270 a video obtained by encoding.

以下に、階層間差分圧縮部282bが含む各構成要素の機能および動作について説明する。 The following describes the functions and operation of each component included in the hierarchical difference compressing section 282b. 階層間差分圧縮部282bが含む構成要素のうち、階層間差分圧縮部282aが含む構成要素と同一の符号が付された構成要素は、階層間差分圧縮部282aが含む構成要素と類似する機能および動作をするので、その相違点を除いて説明を省略する。 Of the components included in the hierarchical difference compressing section 282b, components same reference numerals as components inter-grade difference compressing section 282a includes is attached, the function and similar components hierarchical difference compressing section 282a includes since the operation will not be described except for the differences.

差分対象領域決定部294bは、差分対象領域決定部294aと同様に、画質低減部281から受け取った複数の動画構成画像のそれぞれについて、動画構成画像に含まれる圧縮対象の部分領域と差分をとるべき、他の動画構成画像における部分領域を特定する。 Difference target region determining section 294b, similar to the difference target region determining unit 294a, for each of a plurality of video configuration images received from the image quality reducing section 281, to take a partial region and the difference between the compression target included in the moving image constituent images , it identifies a partial area in the other video configuration images. このように、差分対象領域決定部294bは、特徴領域画像との間で差分をとるべき、他の動画構成画像から生成された特徴領域画像における部分領域である特徴領域部分領域を決定する。 Thus, the difference target region determining unit 294b is to take the difference between the feature region image, determining a characteristic region partial region is a partial region in the characteristic region image generated from another video configuration images. そして、差分対象領域決定部294bは、圧縮対象の部分領域の画素情報および差分対象の部分領域の画素情報を画素値変更部291bに供給する。 Then, the difference target region determining unit 294b supplies the pixel information of the pixel information and the difference target partial region of the compressed partial regions to the pixel value changing section 291 b.

また、画像復号部292bは、符号化部288aから動画構成画像を取得するとともに、動き符号化部286aから位置差情報を取得する。 Further, the image decoding unit 292b acquires the moving image constituent images from the encoding unit 288a, obtains position difference information from the movement coding section 286a. そして、画像復号部292bは、符号化部288aから取得した動画構成画像を、動き符号化部286aから取得した位置差情報を用いて復号する。 Then, the image decoding unit 292b includes a moving image constituent images acquired from the encoding unit 288a, decrypts using the position difference information obtained from the motion coding unit 286a. なお、画像復号部292bは、量子化部298aにより量子化された動画構成画像を取得して復号してよく、符号化部288aが符号化した動画構成画像を取得して復号してもよい。 Note that the image decoding unit 292b may be decoded to obtain the moving image constituent image quantized by the quantization unit 298a, the coding unit 288a may be decoded to obtain the video configuration images encoded. なお、画像復号部292bによって復号されて得られた動画構成画像は、この発明における低画質画像の一例であってよい。 The moving structure image obtained by decoding by the image decoding unit 292b may be an example of low-quality images in the present invention. この場合、階層間差分圧縮部282aは、この発明における低画質画像を生成する画像生成部として機能する。 In this case, the hierarchical difference compressing section 282a functions as an image generating unit for generating a low-quality image in the present invention.

画像拡大部293bは、画像復号部292bにより復号された動画構成画像を拡大することによって拡大画像を生成する。 Image enlarging unit 293b generates an enlarged image by enlarging the video configuration images decoded by the image decoding unit 292b. そして、画素値変更部291bは、差分対象領域決定部294bが決定した部分領域のうち、特徴領域を含む部分領域の画素値を変更せずに、特徴領域に含まれない部分領域の画素値を、拡大画像における部分領域の画素値で置き換える。 Then, the pixel value changing section 291 b, of the difference target region determining section 294b has determined partial area, without changing the pixel values ​​of the partial region including the feature region, the pixel values ​​not included in the characteristic region partial region , replaced with pixel values ​​of a partial region in the enlarged image.

このように、画素値変更部291bは、入力された動画構成画像から、特徴領域以外の領域の画素値を拡大した画像の画素値で置き換えた特徴領域画像を生成する。 Thus, the pixel value changing section 291b from the input moving image configured image to generate a feature region image is replaced with pixel values ​​of an image obtained by enlarging the pixel value of the region other than the feature region. なお、画素値変更部291bは、この発明において、特徴領域以外の領域の画素値を拡大した画像の画素値で置き換えた特徴領域画像を生成する画像生成部として機能することができる。 The pixel value changing section 291b, in the present invention can function as an image generation unit for generating feature region image is replaced with pixel values ​​of an image obtained by enlarging the pixel value of the region other than the feature region.

差分処理部287bは、圧縮対象の特徴領域画像、特徴領域画像に含まれる部分領域の差分対象となる部分領域の画像情報、および拡大画像を、画素値変更部291bから受け取る。 Difference processing unit 287b, the feature region image to be compressed, the image information of the difference subject to partial regions of the partial regions included in the feature region image and an enlarged image is received from the pixel value changing section 291 b. そして、差分処理部287bは、圧縮対象の特徴領域画像に含まれる複数の部分領域のそれぞれについて、同じ特徴領域画像の画素情報を用いて符号化するか(以下、イントラ符号化と呼ぶ。)、他の動画構成画像に含まれる差分対象の部分領域との間の差分により符号化するか(以下、インター符号化と呼ぶ。)、拡大画像との間の差分により符号化するか(以下、階層間圧縮と呼ぶ。)を決定する。 The difference processing unit 287b, for each of the plurality of partial regions included in the feature region image to be compressed, or encoded using pixel information of the same feature area image (hereinafter, referred to as intra-coding.) other or encoding the difference between the difference target partial regions included in the moving image constituting image (hereinafter, referred to as inter-coding.), or to encode the difference between the enlarged image (hereinafter, the hierarchy referred to as during compression.) determined. このとき、差分処理部287bは符号化後の符号量がより小さい符号化方法をより優先して選択する。 In this case, the difference processing unit 287b includes code amount after coding is selected more preferentially smaller coding method. 特徴領域以外の領域において差分を持たないように画素値が置き換えられているので階層間符号化が選択されるので階層間符号化が選択された場合についてまず説明するが、加えて、インター符号化、イントラ符号化が選択された場合についても説明する。 Although first described a case where inter-layer coding since inter-grade coding is selected is selected because the pixel value is replaced to have no difference in the non-characteristic region, in addition, inter-coded also it describes the case where the intra encoding is selected.

階層間符号化が選択された場合には、差分画素画像生成部296bは、特徴領域画像と拡大画像との間の画素値の差分を示す差分画素画像を生成する。 If the inter-layer coding is selected, differential pixel image generating unit 296b generates a differential pixel image representing the difference in pixel value between the feature region image and the enlarged image. 具体的には、差分画素画像生成部296bは、特徴領域以外の領域の画素値が置き換えられた特徴領域画像と拡大画像との間の差分により差分画素画像を生成する。 Specifically, the differential pixel image generating unit 296b generates a differential pixel image from a difference between the feature region image pixel value of the region other than the feature region has been replaced with the enlarged image. なお、特徴領域画像においては特徴領域以外の領域の画素値は拡大画像の画素値で置き換えられているので、差分画素画像生成部296bは、特徴領域において特徴領域画像と拡大した画像との間の画素値の差分値を持ち、特徴領域以外の領域において画素値の差分値を持たない差分画素画像を生成することができる。 In the characteristic region image since the pixel values ​​of the non-characteristic region are replaced with pixel values ​​of the enlarged image, the differential pixel image generating section 296b between the image obtained by enlarging the characteristic region image in the feature region has a difference value of the pixel values, it is possible to generate a differential pixel image having no difference of the pixel values ​​in the non-characteristic region.

インター符号化が選択された場合には、差分画素画像生成部296bは、画素値変更部291bにより生成された特徴領域画像と、他の動画構成画像から画素値変更部291bが生成した特徴領域画像との間の差分をとる。 If the inter-coding is selected, differential pixel image generating unit 296b includes a feature region image generated by the pixel value changing section 291b, feature region image pixel value changing section 291b is generated from another video configuration images taking the difference between the. 具体的には、差分画素画像生成部296bは、特徴領域に含まれる部分領域の画像と、当該部分領域について差分対象領域決定部294bが決定した差分対象部分領域の画像との間の差分をとる。 Specifically, the differential pixel image generating unit 296b takes an image of a partial region included in the characteristic region, the difference between the image of the difference target portion of the difference target region determining section 294b for the partial area is determined . 特徴領域画像においては特徴領域以外の領域の画素値は拡大画像の画素値で置き換えられているので、差分画素画像生成部296bは、特徴領域に含まれる部分領域において差分対象領域決定部294bが決定した部分領域との間の画素値の差分値を持ち、特徴領域以外の領域において差分対象領域決定部294bが決定した部分領域との間で画素値の差分値を持つ差分画素画像が生成される。 Since in the feature region image pixel values ​​of the non-characteristic region are replaced with pixel values ​​of the enlarged image, the differential pixel image generating section 296b determines the difference target region determining section 294b in the partial region included in the characteristic region has a difference value of pixel values, the differential pixel image having a difference value of the pixel values ​​between the difference target region determining portion region 294b is determined in the non-characteristic region is created between the partial region .

なお、イントラ符号化が選択された場合には、差分画素画像生成部296bは、特徴領域画像のそれぞれが含む部分領域の画像を、特徴領域画像の他の領域の画素値または同じ部分領域の画素値との間で差分をとることにより、差分画素画像を生成する。 In the case where intra-coding is selected, the differential pixel image generating section 296b, an image of the partial region including the respective feature region image, the pixels of the pixel values ​​or the same partial region of the other regions of the feature region image by taking the difference between the value, to generate a difference pixel image.

空間周波数領域変換部297bは、差分画素画像を、部分領域ごとに空間周波数領域に変換する。 Spatial frequency domain transform section 297b includes a differential pixel image is converted into the spatial frequency domain for each partial region. 具体的には、空間周波数領域変換部297bは、差分画素画像が示す差分値を、空間周波数領域変換部297aと同様に、離散コサイン変換(DCT)、アダマール変換、またはウェーブレット変換等により、部分領域ごとに空間周波数領域に変換する。 Specifically, the spatial frequency domain transform section 297b, a difference value indicated by the differential pixel image, as in the spatial frequency domain transform section 297a, discrete cosine transform (DCT), Hadamard transform, or a wavelet transform or the like, the partial region into a spatial frequency domain every. 量子化部298bは、量子化部298aと同様に、空間周波数領域変換部297bが空間周波数領域に変換することによって得られた変換係数を量子化する。 Quantization unit 298b, like the quantization unit 298a, quantizes the transform coefficients obtained by the spatial frequency domain conversion unit 297b converts the spatial frequency domain.

そして、周波数領域画質変換部299bは、空間周波数領域変換部297bにより空間周波数領域に変換されて得られる部分領域ごとの空間周波数成分のうち、特徴領域以外の領域を含む少なくとも一部の部分領域の空間周波数成分のデータ量を低減することによって、特徴領域差分画像または特徴領域間差分画像を生成する。 Then, the frequency domain image quality converting unit 299b, among the spatial frequency components of each partial region obtained are converted into the spatial frequency domain by the spatial frequency domain transform section 297b, at least a portion of the partial region including a region other than the feature region by reducing the data amount of the spatial frequency components, and generates a difference image between feature region difference image or the feature region. 具体的には、周波数領域画質変換部299bは、予め定められた周波数より高い周波数成分を示す変換係数の大きさを低減する。 Specifically, the frequency domain image quality converting unit 299b reduces the size of the transform coefficient representing frequency components above a predetermined frequency. 周波数領域画質変換部299bは、予め定められた周波数より高い周波数成分を示す変換係数を0にしてもよい。 Frequency domain image quality converting unit 299b includes a transform coefficient representing frequency components above a predetermined frequency may be zero.

このように、差分処理部287bは、特徴領域において特徴領域画像と拡大した画像との間の差分が空間周波数領域に変換された空間周波数成分を持ち、特徴領域以外の領域において空間周波数成分のデータ量が低減された特徴領域差分画像を生成する。 Thus, the difference processing unit 287b has a spatial frequency component difference is converted into a spatial frequency region between the image enlarged with feature region image in the feature region, the data of the spatial frequency components in the non-characteristic region the amount to produce a feature region difference image is reduced. そして、符号化部288bは、差分処理部287bが生成した特徴領域差分画像を符号化する。 The encoding unit 288b encodes the feature region difference image difference processing unit 287b is generated.

また、上記したように、差分処理部287bは、特徴領域画像における特徴領域の画像と、低画質画像における特徴領域の画像との間の差分画像を示す特徴領域差分画像を生成する。 Further, as described above, the difference processing unit 287b generates the image of the characteristic region in the feature region image, the feature region difference image indicating a difference image between the image of the characteristic region in the low-quality image. より具体的には、差分処理部287は、特徴領域画像における特徴領域の画像と、低画質画像における特徴領域の画像を拡大した画像との間の特徴領域差分画像を生成する。 More specifically, the difference processing unit 287 generates an image of the characteristic region in the feature region image, the feature region difference image between the image obtained by enlarging the image of the characteristic region in the low-quality image.

なお、以上の説明においては、画素値変更部291bは、差分画素画像における少なくとも特徴領域以外の領域(予め定められた特徴の種類を持つ特徴領域以外の領域であって、当該特徴領域より高解像度を持つべき特徴の種類を持つ特徴領域以外の領域)において差分値を0とすべく、特徴領域以外の画素値を拡大画像の画素値で置き換えた。 In the above description, the pixel value changing section 291b is a region other than the characteristic region with the kind of at least the non-characteristic region (predetermined characteristics in the differential pixel image, higher resolution than the feature region a difference value so as to zero in the region) other than the characteristic region with the types of features should have, by replacing the pixel value other than the feature region pixel values ​​of the enlarged image. しかしながら、他の方法により、差分画素画像における差分値を0とすることもできる。 However, other methods, the difference value in the differential pixel image may be zero.

例えば、画素値変更部291bは、画質低減部281から取得した動画構成画像の特徴領域以外の領域の画素値を所定の画素値に変換するとともに、拡大画像における特徴領域以外の領域と同じ画像領域の画素値を当該所定の画素値に変換してよい。 For example, the pixel value changing section 291b converts the pixel value of the region other than the characteristic region of the video configuration images obtained from the image quality reducing section 281 to a predetermined pixel value, the same image area and the non-characteristic region in the enlarged image the pixel values ​​may be converted to the predetermined pixel value. このようにしても、差分画素画像における特徴領域以外の領域の差分値を0とすることができ、特徴領域以外の領域の情報量を実質的に低減することができる。 Also in this case, the difference value of the non-characteristic region in the differential pixel image can be taken as zero, the information amount of the non-characteristic region can be substantially reduced.

このように、画素値変更部291bは、動画構成画像から、特徴領域以外の領域の画素値および拡大した画像における特徴領域以外の領域の画素値を、所定値で置き換えた特徴領域画像を生成する。 Thus, the pixel value changing section 291b, from the moving image constituent images, the pixel value of the region other than the feature region in the pixel value and an enlarged image of a region other than the feature region, and generates a feature region image is replaced with a predetermined value . そして、差分画素画像生成部296は、特徴領域以外の領域の画素値が置き換えられた、特徴領域画像と拡大した画像との間の差分により差分画素画像を生成する。 The differential pixel image generating unit 296, the pixel value of the region other than the feature region has been replaced, and generates a differential pixel image by the difference between the enlarged image and the feature region image.

なお、画素値変更部291bは、画質低減部281から取得した動画構成画像の特徴領域以外の領域の画素値を、下位階層の階層間差分圧縮部282(例えば、階層間差分圧縮部282a)に提供される動画構成画像を拡大した画像における同一領域の画素値で置き換えてもよい。 The pixel value changing section 291b has a pixel value of the region other than the characteristic region of the video configuration images obtained from the image quality reducing section 281, the inter-grade difference compressing section 282 of the lower layer (e.g., the hierarchical difference compressing section 282a) video configuration images provided may be replaced with pixel values ​​of the same region in the enlarged image. このようにしても、差分画素画像における差分値を略0にすることができ、特徴領域以外の領域の情報量を実質的に低減することができる。 Also in this manner, substantially can be zero difference value in the differential pixel image, the information amount of the non-characteristic region can be substantially reduced.

なお、位置差情報生成部295bは、特徴領域以外の領域に含まれる、差分対象となる部分領域の位置差を示す位置差情報を生成する。 The position difference information generating unit 295b is included in the non-characteristic region, generates position difference information indicating the positional difference between the partial regions comprising the difference target. 具体的には、位置差情報生成部295bは、位置差情報生成部295aと同様に、差分により圧縮する部分領域と差分対象となる部分領域である差分対象部分領域との間の位置差を示す位置差情報を生成する。 Specifically, the position difference information generating unit 295b indicates the positional difference between the position difference like the information generator 295a, a difference target portion is a portion region to be a partial region and the differences subject to compression by the difference It generates position difference information. なお、位置差情報は、動き補償における動きベクトルを含む。 The position difference information includes a motion vector in motion compensation.

位置差情報変更部290bは、特徴領域以外の領域に含まれる部分領域が同じ位置の部分領域との間で差分がとられることを位置差情報が示すべく、位置差情報を変更する。 Position difference information changing section 290b, to indicate the position difference information that partial region contained in the non-feature region difference is taken between the partial region of the same position, change the position difference information. 具体的には、位置差情報変更部290bは、特徴領域以外の領域に含まれる部分領域における位置差情報を、位置差がないことを示す情報に変換する。 Specifically, the position difference information changing section 290b is the position difference information in the partial area included in the non-characteristic region, converts the information indicating that there is no positional difference. また、位置差情報変更部290bは、動き符号化部286aから位置差情報を取得して、特徴領域以外の領域に含まれる部分領域における位置差情報を、位置差ないことを示す情報に変換する。 The position difference information changing section 290b converts acquires the positional difference information from the motion encoding section 286a, a position difference information in the partial area included in the non-characteristic region, the information indicating that there is no positional difference . 具体的には、位置差情報変更部290bは、特徴領域以外の領域における動きベクトルの大きさを0にする。 Specifically, the position difference information changing section 290b is the magnitude of the motion vectors in the non-characteristic region to 0. 具体的には、位置差情報変更部290bは、特徴領域以外の領域について、位置差情報生成部295bから受け取った動きベクトルの大きさを0にするとともに、動き符号化部286aから受け取った動きベクトルの大きさを0にする。 Specifically, the position difference information changing section 290b, for the non-characteristic region, the motion vector magnitude of the motion vector received from the position difference information generating unit 295b together to 0, received from the motion coding unit 286a of the size to 0.

そして、動き符号化部286bは、位置差情報を符号化する。 The motion coding unit 286b encodes the position difference information. 具体的には、動き符号化部286bは、動き符号化部286aと同様に、隣接する部分領域における位置差情報との間の差を符号化する。 Specifically, the motion coding unit 286b, like the motion coding unit 286a, to encode the difference between the position difference information in adjacent subregions. 動き符号化部286bにより符号化された位置差情報は、再圧縮ユニット270に供給される。 Position difference information encoded by the motion coding unit 286b is supplied to the re-compression unit 270.

なお、本実施形態では、位置差情報変更部290は、特徴領域以外の領域の位置差情報を変換したが、位置差情報変更部290bは、動き符号化部286bにより符号化された符号化形式上で、特徴領域以外の領域の位置差情報を変換してもよい。 In the present embodiment, the position difference information changing section 290 has been converted to position difference information of the region other than the characteristic region, the position difference information changing section 290b is encoded encoding format by the motion coding unit 286b above may be converted to positional difference information of the non-characteristic region. すなわち、位置差情報変更部290bは、特徴領域以外の部分領域が同じ位置の部分領域との間で差分がとられることを示すべく、動き符号化部286により符号化された位置差情報を変更してもよい。 That is, the position difference information changing section 290b to indicate that partial regions other than the characteristic region difference is taken between the partial region of the same position, change the position difference information encoded by the motion encoder 286 it may be.

なお、符号化部288bは、特徴領域以外の領域における差分情報を持たない符号化データを生成してよい。 Incidentally, the encoding unit 288b may generate coded data having no difference information in the non-characteristic region. 具体的には、特徴領域以外の領域に含まれる部分領域の差分情報を持たない符号化データを生成してよい。 Specifically, it may generate encoded data that has no difference information of the partial regions included in the non-characteristic region. また、動き符号化部286bは、特徴領域以外の領域に含まれる部分領域における位置差情報を持たない符号化データを生成してよい。 The motion coding unit 286b the encoded data may be generated without a positional difference information in the partial area included in the non-characteristic region. このように、符号化部288bおよび動き符号化部286bは、特徴領域以外の領域の画像内容が他の動画構成画像における同じ領域の画像内容と同じであることを、差分情報および位置差情報を持たないことによって示す符号化データを生成する。 Thus, the coding unit 288b and a motion coding unit 286b is that the image contents of the non-characteristic region is the same as the image content of the same area in the other video configuration images, difference information and positional difference information generating encoded data indicating by no. 例えば、符号化部288bおよび動き符号化部286bは、特徴領域以外の領域に含まれる部分領域の画像内容が他の動画構成画像における同じ領域の画像内容と同じであることを示す部分領域の種別を含む符号化データを生成してよい。 For example, the coding unit 288b and a motion coding unit 286b is a type of partial region indicating that the image in the partial regions included in the non-characteristic region is the same as the image content of the same area in the other video configuration images it may generate encoded data including.

例えば、符号化部288bおよび動き符号化部286bは、特徴領域以外の領域に含まれる部分領域が、単純フレーム間予測であり、かつ変換係数を持たないことを示す符号化モードで符号化された部分領域であることを示す部分領域の種別を含む符号化データを生成してよい。 For example, the coding unit 288b and a motion coding unit 286b is partial regions included in the non-characteristic region is a simple inter-frame prediction and encoded by the encoding mode indicating that no transform coefficients it may generate encoded data including the type of the partial region indicating a partial region. 例えば、当該部分領域の種別は、MPEG符号化におけるNonMC NotCodedに相当する種別であってよい。 For example, the type of the partial region can be a kind corresponding to NonMC NotCoded in MPEG coding. このように、符号化部288bおよび動き符号化部286bが動きベクトルの大きさおよび差分情報が0であることを示す情報を持たない符号化データを生成することにより、符号化後の動画構成画像の符号量をより低減することができる。 Thus, by generating the encoded data that has no information indicating that the size and the difference information encoding section 288b and the motion coding unit 286b motion vector is zero, motion picture structure image after encoding it is possible to further reduce the code amount. なお、階層間差分圧縮部282bは、上記符号化モードを含む予測モードを決定する場合に、ラグランジェの未定乗数法に基づいて、レート・歪コストを最小化することができる予測モードを選択してよい。 Incidentally, the hierarchical difference compressing section 282b, when determining the prediction modes including the coding mode, based on the undetermined multiplier method Lagrange, select the prediction mode of the rate distortion cost can be minimized it may be.

なお、階層間差分圧縮部282cおよび階層間差分圧縮部282dは、階層間差分圧縮部282bと同様の機能を有する構成要素を有する。 Incidentally, the hierarchical difference compressing section 282c and the hierarchical difference compressing section 282d includes components having the same functions as hierarchical difference compressing section 282b. なお、以後の説明において、階層間差分圧縮部282cおよび階層間差分圧縮部282dが有する、階層間差分圧縮部282と同名の構成要素には同じ符号を付す。 In the following description, the hierarchical difference compressing section 282c and the hierarchical difference compressing section 282d has, are marked with the same reference numerals as in the hierarchical difference compressing section 282 with the same name as the component. そして、符号の末尾(b、c、d)により、階層間差分圧縮部282b−dのいずれに含まれる構成要素であるかを区別する。 The trailing sign (b, c, d) by distinguishing whether the components included in either a hierarchical difference compressing section 282b-d.

例えば、動き解析部285cは階層間差分圧縮部282cが有する構成要素の一つであって、動き解析部285dは階層間差分圧縮部282dが有する構成要素の一つとなる。 For example, the motion analysis unit 285c a one component included in the hierarchical difference compressing section 282c, the motion analysis unit 285d is one of the components included in the hierarchical difference compressing section 282d. なお、以下の説明において、符号の末尾に英文字が付されていない構成要素は、階層間差分圧縮部282b−dが有する当該符号が付された構成要素の全体を示す。 In the following description, the components at the end of the code is not assigned the letters indicate the overall components to which the symbol is affixed with the hierarchical difference compressing section 282b-d. 例えば、画素値変更部291は、画素値変更部291b−dを示す。 For example, the pixel value changing section 291, a pixel value changing section 291 b-d.

なお、階層間差分圧縮部282cおよび階層間差分圧縮部282dの機能および動作と、階層間差分圧縮部282bの機能および動作は、画質低減部281から異なる画質の動画を取得して処理すること、および位置差情報変更部290cおよびd、ならびに画像復号部292cおよびdが、より画質が低い動画を処理する他の階層間差分圧縮部282から、差分のための位置差情報および動画構成画像を取得するところが異なる。 Incidentally, the function and operation of the hierarchical difference compressing section 282c and the hierarchical difference compressing section 282d, the functions and operations of the hierarchical difference compressing section 282b, to be processed to obtain different quality video from the image quality reducing section 281, and position difference information changing section 290c and d, and the image decoding unit 292c and d, from other inter-grade difference compressing unit 282 for processing the more the image quality is low video, acquires positional difference information and video configuration images for the difference where it is different.

より具体的には、位置差情報変更部290cは、動き符号化部286bから位置差情報を取得して、取得した位置差情報を変換する。 More specifically, the position difference information changing section 290c obtains position difference information from the movement coding section 286b, converts the obtained position difference information. また、画像復号部292cは、動き符号化部286bから位置差情報を取得するとともに、符号化部288bから動画構成画像を取得して、取得した動画構成画像を当該位置差情報を用いて復号する。 Further, the image decoding unit 292c acquires the positional difference information from the motion encoding section 286b, acquires the video configuration images from coding section 288b, decodes the video configuration images obtained by using the position difference information . また、位置差情報変更部290dは、動き符号化部286cから位置差情報を取得して、取得した位置差情報を変換する。 The position difference information changing section 290d obtains position difference information from the movement coding section 286c, converts the obtained position difference information. また、画像復号部292dは、動き符号化部286cから位置差情報を取得するとともに、符号化部288cから動画構成画像を取得して、取得した動画構成画像を当該位置差情報を用いて復号する。 Further, the image decoding section 292d acquires the positional difference information from the motion encoding section 286c, obtains the video configuration images from the coding section 288c, decodes the video configuration images obtained by using the position difference information .

なお、特徴領域検出部203は、入力された動画構成画像から特徴の種類が異なる複数の特徴領域を検出する。 The characteristic region detecting section 203, the type of feature from the input moving image constituent images to detect a plurality of different characteristic regions. この場合、画質低減部281は、一の特徴の種類を持つ特徴領域において解像度を低減することにより入力画像から一の特徴領域画像を生成するとともに、他の特徴の種類を持つ特徴領域において当該特徴領域画像より高解像度な他の特徴領域画像を入力画像から生成する。 In this case, the image quality reduction unit 281, to generate a one feature region image from the input image by reducing the resolution in the characteristic region with the kind of one feature, the feature in the feature region with other types of features to generate a high-resolution other characteristic region image from the region image from the input image. そして、階層間差分圧縮部282b−cは、特徴領域の種類ごとに用意されており、少なくとも予め定められた種類の特徴領域において、特徴領域以外の領域との間で解像度の差を持つ特徴領域画像を処理する。 Then, the hierarchical difference compressing section 282b-c is prepared for each type of feature regions, wherein a region having the feature region of the type at least a predetermined, the difference resolution between the non-characteristic region to process the image.

具体的には、階層間差分圧縮部282bは、全ての特徴領域を含む領域において、最も低い解像度を持つ低解像度特徴領域画像を処理する。 Specifically, the hierarchical difference compressing section 282b, in the region including all of the feature region, processing the low-resolution characteristic region image having the lowest resolution. 階層間差分圧縮部282cは、予め定められた種類の特徴領域において低解像度特徴領域画像より解像度が高い中解像度特徴領域画像を処理する。 Hierarchical difference compressing section 282c processes a resolution characteristic region image in a higher resolution than the low resolution feature region image in advance the type of characteristic regions defined. そして、階層間差分圧縮部282dは、予め定められた他の種類の特徴領域において高い解像度を持つ高解像度特徴領域画像を処理する。 The inter-grade difference compressing section 282d, processing high-resolution characteristic region image having a high resolution in other types of feature region determined in advance.

このように、差分処理部287は、一の特徴の種類を持つ特徴領域および他の特徴の種類を持つ特徴領域において一の特徴領域画像と拡大した画像との間の差分が空間周波数領域に変換された空間周波数成分を持ち、一の特徴の種類を持つ特徴領域および他の特徴の種類を持つ特徴領域以外の領域において空間周波数成分のデータ量が低減された特徴領域差分画像を生成する。 Thus, the difference processing unit 287, converts the differential spatial frequency region between the image enlarged with one feature area image in the characteristic region with the type of the feature region and other features with the kind of one characteristic has been has spatial frequency components, and generates a feature region difference image data of the spatial frequency components in the region other than the feature region with a type of the feature region and other features is reduced with a kind of one characteristic.

このように、差分処理部287は、一の特徴の種類を持つ特徴領域において一の特徴領域画像と拡大した画像との間の差分が空間周波数領域に変換された空間周波数成分を持ち、一の特徴の種類を持つ特徴領域以外の領域において空間周波数成分のデータ量が低減された特徴領域差分画像を生成するとともに、他の特徴の種類を持つ特徴領域において他の特徴領域画像と他の特徴領域画像における特徴領域を拡大した画像との間の差分が空間周波数領域に変換された空間周波数成分を持ち、他の特徴の種類を持つ特徴領域以外の領域において空間周波数成分のデータ量が低減された特徴領域間差分画像を生成する。 Thus, the difference processing unit 287 has a spatial frequency component difference is converted into a spatial frequency region between the image enlarged with one feature area image in the characteristic region with the kind of one characteristic, one along with the data of the spatial frequency component to generate a feature region difference image is reduced in the region other than the feature region with a type of feature, another feature region image and other characteristic region in the characteristic region with other types of features has a spatial frequency component difference is converted into a spatial frequency region between the image obtained by enlarging the characteristic region in the image, the data amount of the spatial frequency component is reduced in the non-characteristic region with other types of features generating a difference image between feature region.

符号化部288は、特徴領域差分画像、特徴領域間差分画像、および低画質画像をそれぞれ符号化する。 Encoding unit 288, respectively encoding feature region difference image, wherein the area between the difference image, and the low quality image. そして、再圧縮ユニット270は、動き符号化部286a−dにより符号化された位置差情報および符号化部288a−dにより符号化された動画構成画像(例えば、低画質画像、特徴領域差分画像、および特徴領域間差分画像)を、再圧縮する。 The recompression unit 270, coded moving image constituent images by positional difference information encoded by the motion encoder unit 286a-d and encoding unit 288a-d (e.g., low-quality image, the feature region difference image, and a characteristic region between difference image), recompressed. さらに、出力部207は、再圧縮ユニット270によって再圧縮された位置差情報および動画構成画像を、多重化して出力する。 Further, the output unit 207, the position difference information and video configuration images recompressed by recompressing unit 270, and outputs the multiplexed.

以上説明したように、階層間差分圧縮部282aは、特徴領域を含む全画像領域を低画質化した動画構成画像、いわば入力された動画構成画像の低空間周波数成分を有する動画構成画像を生成する。 As described, the hierarchical difference compressing section 282a generates a video configuration images with low spatial frequency components of the video configuration images, as it were input moving structure image low image quality of the entire image area including a characteristic region or . そして、階層間差分圧縮部282bは、階層間差分圧縮部282aよりも高い周波数成分を有する動画構成画像であって、階層間差分圧縮部282cよりも低い周波数成分を有する動画構成画像を生成する。 Then, the hierarchical difference compressing section 282b is a moving structure image with frequency components than the hierarchical difference compressing section 282a, and generates a video configuration images having a frequency component lower than the hierarchical difference compressing section 282c. そして、階層間差分圧縮部282bは、特徴領域以外の領域において、階層間差分圧縮部282aが生成した動画構成画像に対する差分値が低減された動画構成画像を生成する。 Then, the hierarchical difference compressing section 282b, in the non-characteristic region, generates a moving image constituting image difference value is reduced for the moving image constituent images hierarchical difference compressing section 282a has generated.

同様に、階層間差分圧縮部282cは、階層間差分圧縮部282bよりも高い周波数成分を有する動画構成画像であって、階層間差分圧縮部282dよりも低い周波数成分を有する動画構成画像を生成する。 Similarly, the hierarchical difference compressing section 282c is a moving structure image with frequency components than the hierarchical difference compressing section 282b, generates a moving structure image having frequency components lower than the hierarchical difference compressing section 282d . そして、階層間差分圧縮部282dは、階層間差分圧縮部282cよりも高い周波数成分を有する動画構成画像を生成する。 The inter-grade difference compressing section 282d generates a moving structure image with frequency components than the hierarchical difference compressing section 282c. そして、階層間差分圧縮部282cおよび階層間差分圧縮部282dは、特徴領域以外の領域において、それぞれ階層間差分圧縮部282bおよびcが生成した動画構成画像に対する差分値が低減された動画構成画像を生成する。 Then, the hierarchical difference compressing section 282c and the hierarchical difference compressing section 282d, in the non-characteristic region, respectively a moving image constituting image difference value is reduced for the moving image constituent images hierarchical difference compressing section 282b and c is generated generated.

このように、階層間差分圧縮部282b−dのそれぞれは、予め定められた特徴の種類を持つ特徴領域について、他の領域より高い画質の動画を処理することによって、特徴の種類に応じて画質が異なる動画を外部に提供することができる。 Thus, each of the inter-grade difference compressing unit 282b-d, the feature region having a different predetermined characteristic, by treating a high quality video than other regions, according to the type of feature quality it is possible to provide a different video to the outside. このとき、階層間差分圧縮部282b−dは、他の階層間差分圧縮部282が処理する低画質の動画構成画像との間の差分により圧縮するので、効率的に圧縮することができる。 At this time, the hierarchical difference compressing section 282b-d, because other hierarchical difference compressing section 282 compresses the difference between the video configuration images of low quality to be processed, can be compressed efficiently.

なお、特徴領域検出部203は、複数の特徴領域のそれぞれの特徴量を検出した場合に、特徴領域として検出した信頼性の度合いを示す確信度を複数の特徴領域毎に算出してよい。 The characteristic region detecting section 203, when detecting the respective feature amounts of a plurality of characteristic regions, the confidence level indicating the degree of reliability of detection as a characteristic region may be calculated for each of the plurality of characteristic regions. そして、階層間差分圧縮部282b−dは、複数の特徴領域のそれぞれの特徴量および確信度に応じて解像度が調整された特徴領域の画像を圧縮する。 Then, the hierarchical difference compressing section 282b-d, the resolution is to compress the image of the characteristic region that is adjusted according to the respective feature quantities and confidence for a plurality of characteristic regions. 例えば、画質低減部281は、複数の特徴領域のそれぞれの画像を、それぞれの特徴量および確信度に応じて解像度を調整して、階層間差分圧縮部282に供給してよい。 For example, the image quality reduction unit 281, the respective images of a plurality of characteristic regions, by adjusting the resolution in accordance with the respective feature quantities and confidence, may be supplied to the hierarchical difference compressing section 282. 例えば、画質低減部281は、複数の特徴領域のそれぞれの画像を、確信度が低いほど、特徴量に応じて予め定められた解像度より高い解像度にしてよい。 For example, the image quality reduction unit 281, the respective images of a plurality of characteristic regions, the lower the confidence, may be higher than a predetermined resolution resolution in accordance with the feature quantity.

なお、画像処理装置120は、上記のように解像度が異なる複数の階層間の画像の差分を符号化することによって階層的に符号化する。 Note that the image processing apparatus 120, hierarchically encoded by encoding the difference image between the resolution as described above different hierarchies. このことから明らかなように、画像処理装置120による圧縮方式の一部は、H. As apparent from this, a portion of the compression method by the image processing apparatus 120, H. 264/SVCによる圧縮方式を含むことが明らかである。 It is clear that includes a compression system by 264 / SVC.

なお、画像処理装置170は、階層間差分圧縮部282a−dのそれぞれにより圧縮された後に、再圧縮ユニット270によって再圧縮された複数の動画構成画像を取得する。 Note that the image processing apparatus 170, after being compressed by the respective hierarchical difference compressing section 282a-d, to obtain a plurality of video configuration images recompressed by recompressing unit 270. そして、画像処理装置170は、取得した複数の動画構成画像をそれぞれ復号する。 Then, the image processing apparatus 170 decodes the obtained plurality of video configuration images, respectively. そして、画像処理装置170は、復号することにより得られた複数の動画構成画像を重ね合わせることにより一の合成画像を生成する。 Then, the image processing apparatus 170 generates one combined image by superposing a plurality of video configuration images obtained by decoding. そして、画像処理装置170は、生成した合成画像を動画構成画像として含む動画を、表示装置180に供給する。 The image processing apparatus 170, a moving image including the generated composite image as a moving image constituting image, to the display device 180.

図6は、再圧縮ユニット270のブロック構成の一例を示す。 Figure 6 shows an example of a block configuration of the re-compression unit 270. 再圧縮ユニット270は、動画取得部271、変化量検出部272、および再圧縮部273を有する。 Recompressing unit 270 includes a video obtaining unit 271, the change amount detector 272, and the recompression unit 273.

動画取得部271は、イントラ符号化された領域を有する動画構成画像を含む動画を取得する。 Video acquisition unit 271 acquires a moving image including a moving image constituting image having intra-coded region. たとえば、動画取得部271は、符号化部231または階層間差分圧縮部282から、動画を取得する。 For example, moving image obtaining unit 271, the coding unit 231 or the inter-grade difference compressing unit 282, acquires the video. また、動画取得部271は、イントラ符号化された領域を有する動画構成画像であるIピクチャを含む動画を取得してもよい。 Also, moving image obtaining section 271 may obtain the moving image including the I-picture is a moving image constituting image having intra-coded region. たとえば、動画取得部271は、イントラ符号化された領域を有する動画構成画像であるIピクチャを含むMPEG動画を取得してもよい。 For example, moving image obtaining section 271 may obtain the MPEG video including an I-picture is a moving image constituting image having intra-coded region.

なお、動画取得部271は、イントラ符号化された領域を有する動画構成画像であるIピクチャ以外の動画構成画像を含む、MPEG動画以外の動画を取得してもよい。 The moving acquisition unit 271 includes a moving image constituent images other than the I-picture is a moving image constituting image having intra-coded regions may acquire the video other than the MPEG video. たとえば、動画取得部271は、イントラ符号化されたマクロブロックを有するPピクチャ又はBピクチャを含む動画を取得してもよい。 For example, moving image obtaining section 271 may obtain the moving image including a P-picture or B-picture has an intra-coded macroblock. また、動画取得部271は、MotionJPEG動画を取得してもよい。 Also, moving image obtaining section 271 may obtain the MotionJPEG video.

また、動画取得部271は、イントラ符号化された領域を有する動画構成画像と、他の動画構成画像との間のインター符号化された動画構成画像とを含む動画を取得してもよい。 Also, moving image obtaining unit 271, a video configuration images having intra-coded regions, it may acquire a video including the inter-coded video configuration images between other video configuration images. たとえば、動画取得部271は、イントラ符号化された領域を有する動画構成画像であるIピクチャと、他の動画構成画像との間のインター符号化された動画構成画像であるBピクチャまたはPピクチャとを含む動画を取得してもよい。 For example, moving image obtaining unit 271, the I-picture is a moving image constituting image having intra-coded region, and B picture or P picture that is inter-coded video configuration images between other video configuration images it may acquire the videos that contain.

変化量検出部272は、動画取得部271によって取得された動画構成画像と他の動画構成画像との間の画像の変化量を検出する。 Variation detecting unit 272 detects the amount of change in the image between the moving image configured image with other video configuration images acquired by the video acquisition unit 271. たとえば、変化量検出部272は、イントラ符号化された領域を有する動画構成画像と他の動画構成画像との間の画像の変化量を検出する。 For example, the change amount detector 272 detects the amount of change in the image between the video configuration images and other video configuration images with intra-coded region. なお、変化量検出部272は、動画構成画像におけるイントラ符号化された領域を有する特徴領域と他の動画構成画像における特徴領域との間の変化量を検出してもよい。 The change amount detecting unit 272 may detect a variation between the characteristic region in the characteristic region and other video configuration images with intra-coded region in the moving image constituent images. また、変化量検出部272は、Iピクチャである動画構成画像における特徴領域と他の動画構成画像における特徴領域との間の変化量を検出してもよい。 The change amount detecting unit 272 may detect a variation between the characteristic region in the characteristic region and other video configuration images in a moving image constituting image is an I-picture.

なお、変化量検出部272は、動画取得部271がインター符号化された動画構成画像を取得している場合、当該インター符号化された動画構成画像に含まれる符号化情報に基づいて上記変化量を検出してもよい。 The change amount detecting unit 272, when the moving image obtaining unit 271 has obtained the video configuration images inter-coded, the amount of change based on the coding information included in the inter-coded video configuration images it may be detected. たとえば、変化量検出部272は、インター符号化された複数の動画構成画像から、符号化情報を取得して、取得した符号化情報を用いた線形補完処理などにより、上記変化量を予測する。 For example, the change amount detector 272, a plurality of video configuration images inter-coded, to obtain encoded information, such as by linear interpolation processing using the acquired encoded data to predict the amount of change. なお、変化量検出部272は、インター符号化された動画構成画像に含まれる画像の差分情報および動きベクトルの少なくとも一方に基づいて、上記変化量を検出してもよい。 The change amount detecting unit 272, based on at least one of the difference information and the motion vector of the image contained in a moving image constituting image is inter-coded, it may detect the amount of change.

なお、変化量検出部272は、イントラ符号化された領域を有する動画構成画像と、他の動画構成画像とを比較して差分をとることにより、イントラ符号化された領域を有する動画構成画像を圧縮してもよい。 The change amount detecting unit 272, a video configuration images having intra-coded region, by taking a difference by comparing the other video configuration images, the moving image constituent images having intra-coded regions it may be compressed. この場合、変化量検出部272は、イントラ符号化された領域を有する動画構成画像がより高い圧縮率で圧縮されるほど、より小さい上記変化量を検出する。 In this case, the change amount detector 272, as video configuration images having intra-coded regions are compressed at a higher compression rate, and detects a smaller amount of change.

また、変化量検出部272は、イントラ符号化された領域を有する動画構成画像および他の動画構成画像を、画素データまで復号化してから、動画取得部271によって取得された動画構成画像と他の動画構成画像との間の画像の変化量を検出してもよい。 The change amount detecting unit 272, the video configuration images and other video configuration images having intra-coded regions, from the decoded to the pixel data, acquired by the video acquisition unit 271 moving image constituent images and other it may detect a change amount of the image between the video configuration images. また、変化量検出部272は、イントラ符号化された領域を有する動画構成画像および他の動画構成画像を、DCT係数まで復号化してから、動画取得部271によって取得された動画構成画像と他の動画構成画像との間の画像の変化量を検出してもよい。 The change amount detecting unit 272, the video configuration images and other video configuration images having intra-coded regions, from the decoded to DCT coefficients, acquired by the video acquisition unit 271 moving image constituent images and other it may detect a change amount of the image between the video configuration images.

再圧縮部273は、変化量検出部272によって検出された変化量が予め定められた値より小さい場合に、動画構成画像のイントラ符号化された領域の画像を、他の動画構成画像を参照するインター符号化により圧縮する。 Recompression unit 273, when the amount detected by the variation detecting unit 272 changes is less than a predetermined value, an image of the intra-coded regions of the video configuration images, refer to other video configuration images compressed by inter coding. このとき、再圧縮部273は、動画構成画像のイントラ符号化された領域の画像を、画素データまで復号化してから圧縮してもよい。 At this time, the recompression section 273, an image of the intra-coded regions of the video configuration images, may be compressed after decoding to pixel data. また、再圧縮部273は、動画構成画像のイントラ符号化された領域の画像を、DCT係数まで復号化してから圧縮してもよい。 Further, the recompression section 273, an image of the intra-coded regions of the video configuration images, may be compressed after decoding to DCT coefficients.

また、再圧縮部273は、変化量検出部272によって検出された変化量が予め定められた値より小さい場合に、イントラ符号化された領域を有する特徴領域の画像を、他の動画構成画像における特徴領域を参照するインター符号化により圧縮してもよい。 Further, the recompression section 273, when the change amount detected by the variation detecting section 272 is smaller than a predetermined value, the image of the characteristic region with the intra-coded regions, in the other video configuration images it may be compressed by inter coding that refers to the feature region. また、再圧縮部273は、変化量検出部272によって検出された変化量が予め定められた値より小さい場合に、Iピクチャである動画構成画像を、他の動画構成画像を参照するPピクチャまたはBピクチャに変換することにより圧縮してもよい。 Further, the recompression section 273, when the amount detected by the variation detecting unit 272 changes is less than a predetermined value, the video configuration images is an I-picture, or P picture to refer to other video configuration images it may be compressed by converting the B-picture.

また、再圧縮部273は、変化量検出部272によって検出された変化量が予め定められた値より小さい場合に、Iピクチャである前記動画構成画像を、他のIピクチャである他の動画構成画像を参照するPピクチャまたはBピクチャに変換することにより圧縮してもよい。 Further, the recompression section 273, when the amount detected by the variation detecting unit 272 changes is less than a predetermined value, the moving structure image is an I-picture, other videos as another I picture structure may be compressed by converting the P-picture or B-picture refers to the image. また、再圧縮部273は、変化量検出部272によって検出された変化量が予め定められた値より小さい場合に、イントラ符号化された領域を有する特徴領域と他の動画構成画像における特徴領域との間の画像の差分により、イントラ符号化された領域を有する前記特徴領域の画像を圧縮してもよい。 Further, the recompression section 273, when the amount detected by the variation detecting unit 272 changes is less than a predetermined value, the characteristic region in the feature region and the other moving image constituent images having intra-coded regions the difference image between the, may compress the image of the characteristic region having intra-coded region. なお、再圧縮部273は、変化量検出部272によって検出された変化量が予め定められた値より小さい場合に、イントラ符号化された領域を有する特徴領域と他の動画構成画像における特徴領域との間の画像の差分が無いとみなして、イントラ符号化された領域を有する前記特徴領域の画像を圧縮してもよい。 Incidentally, the recompression section 273, when the amount detected by the variation detecting unit 272 changes is less than a predetermined value, the characteristic region in the feature region and the other moving image constituent images having intra-coded regions is regarded as the difference of the image is not between the images may be compressed to the feature region having intra-coded region. また、再圧縮部273は、イントラ符号化された領域を有する特徴領域と差分をとる他の動画構成画像の特徴領域における差分対象領域の位置と、イントラ符号化された領域を有する特徴領域の位置との間の位置差、およびイントラ符号化された領域を有する特徴領域と上記差分対象領域との間の画像の差分により、イントラ符号化された領域を有する特徴領域の画像を圧縮してもよい。 Further, the recompression section 273, the position of the characteristic region with the position of the difference target region in the characteristic region of the other videos configuration image taking feature region and the difference with the intra-coded regions, the intra-coded regions position difference between, and the difference image between the intra-coded feature region having a region and the difference target region, may compress the image of the characteristic region with the intra-coded regions .

また、再圧縮部273は、画像伸張部273aと、差分再圧縮部273bとを有する。 Further, the recompression section 273 includes an image decompression unit 273a, and the difference recompression unit 273b. 画像伸張部273aは、イントラ符号化された領域を有する特徴領域および他の動画構成画像における特徴領域を伸張して、イントラ符号化された領域を有する特徴領域の画素情報および他の動画構成画像における特徴領域の画素情報を取得する。 Image decompression unit 273a decompresses the characteristic region in the feature region and other video configuration images having intra-coded region, the pixel information and other moving structure image of the characteristic region with the intra-coded regions obtaining pixel information of feature region. 差分再圧縮部273bは、画像伸張部273aにより伸張されて得られた画素情報に基づいて生成される画像の差分により、イントラ符号化された領域を有する特徴領域の画像を圧縮する。 Difference recompression unit 273b is the difference of the image generated based on the pixel information obtained is decompressed by the image decompression unit 273a, it compresses the image of the characteristic region with the intra-coded regions. 再圧縮部は、再圧縮した画像を、対応付け処理部206または出力部207へ出力する。 Recompression unit recompressed image, and outputs it to the correlation processor 206 or the output unit 207.

図7は、動画構成画像を圧縮する方法の一例を示す。 Figure 7 shows an example of a method for compressing video configuration images. 上段に示す動画700は、再圧縮ユニット270が画像処理をする前のMPEG動画を示す。 Video 700 shown in the upper part, the recompression unit 270 indicates the MPEG video prior to the image processing. 動画700は、GOP710、GOP720、およびGOP730を含む。 Video 700, including the GOP710, GOP720, and GOP730. GOP710、GOP720、およびGOP730は、それぞれ、動画構成画像を複数含む。 GOP710, GOP720, and GOP730 each include a plurality of video configuration images.

また、GOP710、GOP720、およびGOP730は、それぞれ、イントラ符号化された動画構成画像であるIフレームを一つ含む。 Further, GOP710, GOP720, and GOP730 each include one I-frame is an intra-coded video configuration images. たとえば、GOP710は、Iフレームである動画構成画像711を含む。 For example, GOP710 includes a moving structure image 711 is an I-frame. また、GOP720は、Iフレームである動画構成画像721を含む。 Further, GOP720 includes a moving structure image 721 is an I-frame. そして、GOP730は、Iフレームである動画構成画像731を含む。 Then, GOP730 includes a moving structure image 731 is an I-frame.

一方、下段に示す動画700は、再圧縮ユニット270が画像処理をした後のMPEG動画を示す。 On the other hand, video 700 shown in the lower indicates the MPEG video after recompression unit 270 has an image processing. 下段に示す動画700は、動画構成画像721がPフレームとなっており、それに伴い、GOP710と720とが結合され、一つのGOPであるGOP715になっている点が、上段に示す動画700と相違する。 Video 700 shown in the lower part, moving image constituent images 721 has a P frame, along with it, are combined and GOP710 720, that has become a single GOP GOP715 is a video 700 shown in the upper part differences to.

再圧縮ユニット270は、動画700の一部または全部を画素データまたはDCT係数まで復号化した後に、動画構成画像711、721、および731のそれぞれについて、他の動画構成画像との間の画像の変化量を検出する。 Recompressing unit 270, a part or all of the video 700 after decoding to pixel data or DCT coefficients, each of the video configuration images 711 and 721, and 731, the image changes in between other video configuration images to detect the amount. このとき、上記他の動画構成画像は、Pフレーム、Bフレーム、およびIフレームのいずれであってもよい。 At this time, the other video configuration images, may be either a P-frame, B-frame and I-frame. また、再圧縮ユニット270は、動画構成画像711、721、および731のそれぞれについて、複数の他の動画構成画像との間の変化量を検出してもよい。 Further, recompression unit 270, for each of the moving image constituting images 711 and 721, and 731 may detect the amount of change between a plurality of other video configuration images.

そして、再圧縮ユニット270は、動画構成画像711、721、および731のそれぞれについて、検出された変化量が予め定められた値より小さいか否かを判断する。 The recompression unit 270, for each of the moving image constituting images 711 and 721, and 731, it is determined whether the amount detected change is less than a predetermined value. さらに、再圧縮ユニット270は、動画構成画像711、721、および731のうち、検出された変化量が予め定められた値より小さいと判断した動画構成画像をインター符号化する。 Furthermore, recompression unit 270, video configuration images 711 and 721, and 731 of, for inter-coding the video configuration images is determined that the amount detected change is less than a predetermined value.

たとえば、動画構成画像721は、検出された変化量が予め定められた値より小さいと判断されているので、再圧縮ユニット270は、動画構成画像721を、Pフレームに変換する。 For example, moving image constituent image 721, since the amount of detected change is determined to be smaller than a predetermined value, re-compression unit 270, the video configuration images 721, into a P-frame. これにより、再圧縮ユニット270は、動画構成画像721をインター符号化する。 Thus, recompression unit 270 inter-coding the video configuration images 721. 一方、動画構成画像711および731は、検出された変化量が予め定められた値より大きいと判断されているので、再圧縮ユニット270は、動画構成画像711および731を、インター符号化しない。 On the other hand, moving image constituent images 711 and 731, since the amount of detected change is determined to be larger than a predetermined value, re-compression unit 270, the video configuration images 711 and 731, no inter-coded.

図8は、画像の変化量を検出する方法の一例を示す。 Figure 8 shows an example of a method for detecting a variation in images. 動画800は、再圧縮ユニット270が画像処理する前のMPEG動画である。 Video 800, recompression unit 270 is an MPEG video before the image processing. 動画800は、連続する複数の動画構成画像を含む。 Video 800 includes a plurality of video configuration images continuously. 複数の動画構成画像のうち、動画構成画像801aは、イントラ符号化された動画構成画像であるIフレームである。 Among the plurality of video configuration images, videos configuration image 801a is an I-frame is an intra-coded video configuration images. この動画構成画像801aは、被写体810を含んでいる領域である特徴領域802aを含む。 The video configuration images 801a includes a characteristic region 802a is a region that contains the object 810.

また、複数の動画構成画像のうち、動画構成画像801bは、イントラ符号化された動画構成画像であるIフレームである。 Further, among the plurality of video configuration images, videos configuration image 801b is an I-frame is an intra-coded video configuration images. 動画構成画像801bは、被写体810を含んでいる領域である特徴領域802bを含む。 Video Configuration image 801b includes a feature region 802b is a region that contains the object 810. 特徴領域802bの面積、各画素の輝度の平均値、および各画素の色差の平均値は、特徴領域802aと同一である。 Area characteristic region 802b, the average value of the luminance of each pixel, and the average value of the color difference of each pixel is identical to the feature region 802a. また、動画構成画像801bにおける特徴領域802bの位置は、動画構成画像801aにおける特徴領域801aの位置と異なる。 The position of the characteristic region 802b in the moving image constituting image 801b is different from the position of the characteristic region 801a in the moving structure image 801a.

このように構成された動画800に対して、再圧縮ユニット270は、動画構成画像801aの特徴領域802aと動画構成画像801bの特徴領域802bとの間の画像の変化量を検出する。 Against the thus constructed video 800, recompression unit 270 detects the amount of change in the image between the feature region 802b of the characteristic region 802a and the moving image constituent images 801b of the moving image constituent images 801a. たとえば、再圧縮ユニット270は、特徴領域802aと特徴領域802bとの間の、各画素の輝度の平均値、および各画素の色差の平均値の変化量を検出する。 For example, re-compression unit 270, between the feature region 802a and the characteristic region 802b, the average value of the luminance of each pixel, and detects the amount of change in the average value of the color difference of each pixel. このとき、再圧縮ユニット270は、特徴領域802aおよび特徴領域802bの、各画素の輝度および色差を得ることができるように、動画構成画像801aおよび動画構成画像801bを復号化してもよい。 In this case, re-compression unit 270, the feature region 802a and the characteristic region 802b, so as to obtain the luminance and chrominance of each pixel, may decode the video configuration images 801a and video configuration images 801b. また、再圧縮ユニット270は、動画構成画像801aと動画構成画像801bとの間に位置する動画構成画像に含まれる符号化情報から、上記変化量を予測してもよい。 Further, recompression unit 270, the coded information included in the moving arrangement image that is located between the moving structure image 801a and the moving image constituting image 801b, may predict the amount of change.

そして、再圧縮ユニット270は、検出された変化量が予め定められた値より小さいか否かを判断する。 The recompression unit 270 determines whether the amount detected change is less than a predetermined value. そして、再圧縮ユニット270は、検出された変化量が予め定められた値より小さいと判断した場合、動画構成画像801aをインター符号化する。 The recompression unit 270, when the amount of detected change is judged to be smaller than a predetermined value, for inter-coding the video configuration images 801a. このとき、再圧縮ユニット270は、動画構成画像801aのうちの特徴領域802aだけをインター符号化してもよい。 In this case, re-compression unit 270, only the feature region 802a of the moving image constituent images 801a may be inter-coded. また、再圧縮ユニット270は、動画構成画像801aの全部をインター符号化してもよい。 Further, recompression unit 270 may be inter-coding all the video configuration images 801a.

このように、本実施形態の画像処理装置120は、イントラ符号化された動画構成画像と他の動画構成画像との変換量を検出して、検出された変化量が予め定められた値より小さい場合は、イントラ符号化された動画構成画像をインター符号化する。 Thus, the image processing apparatus 120 of this embodiment detects the amount of conversion and intra-coded video configuration images and other video configuration images, a value less than the amount detected change predetermined case, inter-coding the intra-coded video configuration images. これにより、本実施形態の画像処理装置120を実際の監視システムに適用した場合には、本実施形態の画像処理装置120を適用しない監視システムよりも、効率的に動画のデータ量を削減することができる場合がある。 Thus, when the image processing apparatus 120 of the present embodiment is applied to an actual monitoring system, than monitoring systems that do not apply image processing apparatus 120 of the present embodiment efficiently reducing the data amount of moving there is a case that can be.

図9は、画像処理装置120および画像処理装置170のハードウェア構成の一例を示す。 Figure 9 shows an example of a hardware configuration of the image processing apparatus 120 and the image processing apparatus 170. 画像処理装置120および画像処理装置170は、CPU周辺部と、入出力部と、レガシー入出力部とを備える。 The image processing apparatus 120 and the image processing apparatus 170 is provided with a CPU peripheral section, an input-output unit, and a legacy input-output section. CPU周辺部は、ホスト・コントローラ1582により相互に接続されるCPU1505、RAM1520、グラフィック・コントローラ1575、および表示デバイス1580を有する。 CPU peripheral section, CPU1505 are interconnected by a host controller 1582, RAM 1520, a graphic controller 1575 and a display device 1580,. 入出力部は、入出力コントローラ1584によりホスト・コントローラ1582に接続される通信インターフェイス1530、ハードディスクドライブ1540、およびCD−ROMドライブ1560を有する。 Output unit includes a communication interface 1530 connected by input-output controller 1584 to the host controller 1582, a hard disk drive 1540, and CD-ROM drive 1560,. レガシー入出力部は、入出力コントローラ1584に接続されるROM1510、フレキシブルディスク・ドライブ1550、および入出力チップ1570を有する。 Legacy input-output section, ROM1510 is connected to the input-output controller 1584, a flexible disk drive 1550 and an input-output chip 1570,.

ホスト・コントローラ1582は、RAM1520と、高い転送レートでRAM1520をアクセスするCPU1505、およびグラフィック・コントローラ1575とを接続する。 The host controller 1582 connects the RAM 1520, CPU 1505 accesses the RAM 1520 at a high transfer rate, and the graphic controller 1575. CPU1505は、ROM1510、およびRAM1520に格納されたプログラムに基づいて動作して、各部の制御をする。 CPU1505 is, ROM1510, and operates based on a program stored in the RAM1520, the control of each unit. グラフィック・コントローラ1575は、CPU1505等がRAM1520内に設けたフレーム・バッファ上に生成する画像データを取得して、表示デバイス1580上に表示させる。 The graphic controller 1575 acquires image data or the like CPU1505 is generated on a frame buffer provided in the RAM 1520, and displays it on the display device 1580. これに代えて、グラフィック・コントローラ1575は、CPU1505等が生成する画像データを格納するフレーム・バッファを、内部に含んでもよい。 Alternatively, the graphic controller 1575 may include therein a frame buffer for storing image data generated by the CPU 1505, may be included therein.

入出力コントローラ1584は、ホスト・コントローラ1582と、比較的高速な入出力装置であるハードディスクドライブ1540、通信インターフェイス1530、CD−ROMドライブ1560を接続する。 Output controller 1584 connects the host controller 1582, the hard disk drive 1540 that are a comparatively fast input-output device, a communication interface 1530, CD-ROM drive 1560. ハードディスクドライブ1540は、CPU1505が使用するプログラム、およびデータを格納する。 The hard disk drive 1540 stores programs used by the CPU 1505, and the data. 通信インターフェイス1530は、ネットワーク通信装置1598に接続してプログラムまたはデータを送受信する。 The communication interface 1530 sends and receives a program or data by connecting to the network communication apparatus 1598. CD−ROMドライブ1560は、CD−ROM1595からプログラムまたはデータを読み取り、RAM1520を介してハードディスクドライブ1540、および通信インターフェイス1530に提供する。 CD-ROM drive 1560 reads a program or data from the CD-ROM 1595, and provides the hard disk drive 1540 and communication interface 1530 via the RAM 1520.

入出力コントローラ1584には、ROM1510と、フレキシブルディスク・ドライブ1550、および入出力チップ1570の比較的低速な入出力装置とが接続される。 Output controller 1584 includes a ROM 1510, and relatively low-speed input-output device in the flexible disk drive 1550 and an input-output chip 1570, are connected. ROM1510は、放射線撮像システムが起動時に実行するブート・プログラム、あるいは放射線撮像システムのハードウェアに依存するプログラム等を格納する。 ROM1510 the radiation imaging system stores a program depending on hardware of the boot program or radiation imaging system, run on startup. フレキシブルディスク・ドライブ1550は、フレキシブルディスク1590からプログラムまたはデータを読み取り、RAM1520を介してハードディスクドライブ1540、および通信インターフェイス1530に提供する。 The flexible disk drive 1550 reads a program or data from a flexible disk 1590 and provides the hard disk drive 1540 and communication interface 1530 via the RAM 1520. 入出力チップ1570は、フレキシブルディスク・ドライブ1550、あるいはパラレル・ポート、シリアル・ポート、キーボード・ポート、マウス・ポート等を介して各種の入出力装置を接続する。 Output chip 1570 connects the flexible disk drive 1550, a parallel port, a serial port, a keyboard port, various input and output devices via a mouse port, or the like.

CPU1505が実行するプログラムは、フレキシブルディスク1590、CD−ROM1595、またはICカード等の記録媒体に格納されて利用者によって提供される。 Program CPU1505 executes is provided by a user is stored in a recording medium such as the flexible disk 1590, CD-ROM 1595, or IC card, or the like. 記録媒体に格納されたプログラムは圧縮されていても非圧縮であってもよい。 The program stored in the recording medium may be also compressed or uncompressed. プログラムは、記録媒体からハードディスクドライブ1540にインストールされ、RAM1520に読み出されてCPU1505により実行される。 The program is installed from the recording medium to the hard disk drive 1540, and executed by CPU1505 is read into RAM 1520.

CPU1505により実行されるプログラムは、画像処理装置120を、図1から図8に関連して説明した圧縮動画取得部201、圧縮動画伸張部202、特徴領域検出部203、画像分割部204、および画像生成部205として機能させる。 Program executed by the CPU1505, the image processing apparatus 120, the compressed moving image obtaining section 201 described in relation to FIGS. 1-8, the compression moving image expanding unit 202, feature region detecting unit 203, an image dividing unit 204, and an image to function as a generator 205. また、CPU1505により実行されるプログラムは、画像処理装置120を、図1から図8に関連して説明した固定値化部211、画質低減部221、符号化部231、対応付け処理部206、および出力部207として機能させる。 Further, the program executed by the CPU1505, the image processing apparatus 120, the value fixing section 211 described in relation to FIGS. 1-8, the image quality reducing section 221, coding section 231, mapping section 206, and It functions as an output unit 207. また、CPU1505により実行されるプログラムは、画像処理装置120を、図1から図8に関連して説明した、入力動画画質制御部280、画質低減部281、および階層間差分圧縮部282として機能させる。 Further, the program executed by the CPU1505, the image processing apparatus 120 has been described in connection with FIGS. 1-8, the input moving image quality control unit 280, image quality reducing section 281, and to function as a hierarchical difference compressing section 282 .

また、CPU1505により実行されるプログラムは、画像処理装置120を、図1から図8に関連して説明した動画取得部271、変化量検出部272、および再圧縮部273として機能させる。 Further, the program executed by the CPU1505, the image processing apparatus 120, moving image obtaining section 271 described in relation to FIGS. 1-8, the change amount detector 272, and to function as a recompression unit 273. また、CPU1505により実行されるプログラムは、画像処理装置170を、図1から図8に関連して説明した圧縮動画取得部301、対応付け解析部302、圧縮動画伸張部311、動画生成部303、および出力部304として機能させる。 Further, the program executed by the CPU1505, the image processing apparatus 170, the compressed moving image obtaining section 301 described in relation to FIGS. 1-8, correspondence analysis unit 302, compressed moving decompression unit 311, moving image generation unit 303, and function as an output unit 304.

以上に示したプログラムは、外部の記憶媒体に格納されてもよい。 The program described above may be stored in an external storage medium. 記憶媒体としては、フレキシブルディスク1590、CD−ROM1595の他に、DVDまたはPD等の光学記録媒体、MD等の光磁気記録媒体、テープ媒体、ICカード等の半導体メモリ等を用いることができる。 The storage medium may be used in addition to the flexible disk 1590, CD-ROM 1595, an optical recording medium such as DVD or PD, a magneto-optical recording medium such as MD, a tape medium, a semiconductor memory such as an IC card. また、専用通信ネットワークあるいはインターネットに接続されたサーバシステムに設けたハードディスクまたはRAM等の記憶装置を記録媒体として使用して、ネットワークを介したプログラムとして画像処理装置120および画像処理装置170に提供してもよい。 Also, a storage device such as a hard disk or a RAM provided in a server system connected to a dedicated communication network or Internet may be used as a recording medium, provided to the image processing apparatus 120 and the image processing apparatus 170 as a program via a network it may be.

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。 Although the present invention has been described with the embodiment, the technical scope of the present invention is not limited to the scope described in the above embodiment. 上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。 To the embodiments described above, it is apparent to those skilled in the art can be added to various modifications and improvements. その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。 It is apparent from the appended claims that embodiments with such modifications also belong to the technical scope of the present invention.

一実施形態に係る画像処理システム10の一例を示す。 It shows an example of an image processing system 10 according to one embodiment. 画像処理装置120のブロック構成の一例を示す。 It shows an exemplary block configuration of the image processing apparatus 120. 画像処理装置170のブロック構成の一例を示す。 It shows an exemplary block configuration of the image processing apparatus 170. 画像処理装置120のブロック構成の別の一例を示す。 It shows another example of a block configuration of the image processing apparatus 120. 階層間差分圧縮部282aおよびbのブロック構成の一例を示す。 It shows an exemplary block configuration of a hierarchical difference compressing section 282a and b. 再圧縮ユニット270のブロック構成の一例を示す。 It illustrates an example of a block configuration of the re-compression unit 270. 動画構成画像を圧縮する方法の一例を示す。 It shows an example of a method for compressing video configuration images. 画像の変化量を検出する方法の一例を示す。 It shows an example of a method for detecting the amount of change in the image. 画像処理装置120および画像処理装置170のハードウェア構成の一例を示す。 It shows an example of a hardware configuration of the image processing apparatus 120 and the image processing apparatus 170.

符号の説明 DESCRIPTION OF SYMBOLS

10 画像処理システム100 撮像装置110 通信ネットワーク120 画像処理装置130 人物140 移動物体150 監視対象空間160 空間170 画像処理装置180 表示装置201 圧縮動画取得部202 圧縮動画伸張部203 特徴領域検出部204 画像分割部205 画像生成部206 対応付け処理部207 出力部210 固定値化ユニット211 固定値化部220 低減化ユニット221 画質低減部230 符号化ユニット231 符号化部231a 背景領域動画符号化部231b−d 特徴領域動画符号化部240 圧縮部270 再圧縮ユニット271 動画取得部272 変化量検出部273 再圧縮部273a 画像伸張部273b 差分再圧縮部280 入力動画画質制御部281 画質低減部282 階層間差分圧縮部285 動き解 10 image processing system 100 imaging device 110 the communication network 120 the image processing apparatus 130 person 140 moves the object 150 monitored space 160 space 170 image processing apparatus 180 display device 201 compressed moving image obtaining unit 202 compressing moving image expanding section 203 feature region detecting unit 204 image segmentation part 205 image generation unit 206 associating section 207 output section 210 value fixing unit 211 fixed value generating section 220 reducing unit 221 image quality reducing section 230 encoding unit 231 encoding unit 231a the background region moving picture coding unit 231b-d wherein region moving picture coding unit 240 compressor unit 270 re-compression unit 271 moving image obtaining unit 272 change amount detector 273 recompression unit 273a image decompression unit 273b difference recompression unit 280 the input moving image quality control unit 281 image quality reducing section 282 hierarchical difference compressing section 285 movement solution 部286 動き符号化部287 差分処理部288 符号化部290 位置差情報変更部291 画素値変更部292 画像復号部293 画像拡大部294 差分対象領域決定部295 位置差情報生成部296 差分画素画像生成部297 空間周波数領域変換部298 量子化部299 周波数領域画質変換部301 圧縮動画取得部302 対応付け解析部310 圧縮動画伸張ユニット311 圧縮動画伸張部303 動画生成部304 出力部 Part 286 motion coding unit 287 difference processing unit 288 coding unit 290 position difference information changing section 291 pixel value changing section 292 the image decoding unit 293 the image enlargement unit 294 difference target region determining unit 295 positional difference information generating unit 296 differential pixel image generating part 297 spatial frequency domain transform unit 298 quantization unit 299 frequency domain image quality converting unit 301 compressing moving image obtaining unit 302 corresponds analyzing section 310 compressed moving image expanding unit 311 compressing moving image expanding unit 303 moving image generating unit 304 output unit

Claims (8)

  1. 動画に含まれる複数の動画構成画像から、特徴の種類が異なる複数の特徴領域を検出する特徴領域検出部と、 A plurality of video configuration images included in the moving image, the feature region detecting unit type of feature to detect a plurality of different characteristic regions,
    前記複数の動画構成画像を、前記複数の特徴領域のそれぞれを含む複数の特徴領域動画と、前記複数の特徴領域以外の背景領域を含む背景領域動画とに分割する画像分割部と、 The plurality of video configuration images, an image dividing unit that divides a background region moving image including a plurality of characteristic regions moving image including each of the plurality of characteristic regions, a background region other than the plurality of characteristic regions,
    前記複数の特徴領域動画および前記背景領域動画を、それぞれの特徴の種類ごとに予め定められた圧縮強度で圧縮する圧縮部と、 A compression unit for compressing the plurality of characteristic region moving images and the background region moving image, at a predetermined compressive strength for each type of each feature,
    圧縮された前記複数の特徴領域動画および前記背景領域動画の中から、イントラ符号化された領域を有する動画構成画像を含む動画を取得する動画取得部と、 From among the compressed plurality of characteristic region moving images and the background region moving image, a moving image acquisition unit that acquires a moving image including a moving image constituting image having intra-coded region,
    前記イントラ符号化された領域を有する動画構成画像と他の動画構成画像との間の画像の変化量を検出する変化量検出部と、 A change amount detector for detecting a change amount of the image between the intra-coded video configuration images and other video configuration images having an area,
    前記変化量が予め定められた値より小さい場合に、前記動画構成画像の前記イントラ符号化された領域の画像を、前記他の動画構成画像を参照するインター符号化により圧縮する再圧縮部と、 If the amount of change is smaller than a predetermined value, the image of the intra-coded region of the moving image constituent images, the recompression unit for compressed by inter coding that refers to the other video configuration images,
    を備え Equipped with a,
    前記変化量検出部は、前記動画構成画像におけるイントラ符号化された領域を有する特徴領域と前記他の動画構成画像における特徴領域との間の前記変化量を検出し、 The change amount detector detects the amount of change between the feature region characteristic region having intra-coded region in the moving image constituent image and in the other video configuration images,
    前記再圧縮部は、前記変化量が予め定められた値より小さい場合に、前記イントラ符号化された領域を有する前記特徴領域の画像を、前記他の動画構成画像における前記特徴領域を参照するインター符号化により圧縮する画像処理装置。 The recompression unit, when said change amount is smaller than a predetermined value, the image of the characteristic region with the intra-coded region, referring to the characteristic region in the other video configuration images Inter the image processing apparatus for compressing the encoding.
  2. 前記動画取得部は、前記イントラ符号化された領域を有する動画構成画像であるIピクチャを含む動画を取得し、 The video acquisition unit acquires moving image including an I picture which is a moving structure image with the intra-coded region,
    前記変化量検出部は、Iピクチャである前記動画構成画像における前記特徴領域と前記他の動画構成画像における前記特徴領域との間の変化量を検出し、 The change amount detector detects the amount of change between the characteristic region in the characteristic region and the other video configuration images in the moving image constituent images is an I-picture,
    前記再圧縮部は、前記変化量が予め定められた値より小さい場合に、前記Iピクチャである動画構成画像を、前記他の動画構成画像を参照するPピクチャまたはBピクチャに変換することにより圧縮する請求項に記載の画像処理装置。 The recompression unit is compressed by converting when the amount of change is smaller than a predetermined value, the video configuration images is the I picture, the P picture or B picture to refer to the other video configuration images the image processing apparatus according to claim 1.
  3. 前記変化量検出部は、Iピクチャである前記動画構成画像における前記特徴領域と他のIピクチャである前記他の動画構成画像における前記特徴領域との間の変化量を検出し、 The change amount detector detects the amount of change between the characteristic region in the other video configuration images as another I-picture and the characteristic region in the moving image constituent images is an I-picture,
    前記再圧縮部は、前記変化量が予め定められた値より小さい場合に、前記Iピクチャである前記動画構成画像を、前記他のIピクチャである前記他の動画構成画像を参照するPピクチャまたはBピクチャに変換することにより圧縮する請求項に記載の画像処理装置。 The recompression unit, when said change amount is smaller than a predetermined value, the said video configuration images are I picture, P picture referring to the other video configuration images that is the other of the I-picture or the image processing apparatus according to claim 2, compressed by converting the B-picture.
  4. 前記再圧縮部は、前記変化量が予め定められた値より小さい場合に、前記イントラ符号化された領域を有する前記特徴領域と前記他の動画構成画像における前記特徴領域との間の画像の差分により、前記イントラ符号化された領域を有する前記特徴領域の画像を圧縮する請求項に記載の画像処理装置。 The recompression unit, when said change amount is smaller than a predetermined value, a difference image between the characteristic region in the characteristic region and the other video configuration images with the intra-coded regions the image processing apparatus according to claim 1 for compressing an image of the characteristic region with the intra-coded regions.
  5. 前記再圧縮部は、前記イントラ符号化された領域を有する前記特徴領域と差分をとる前記他の動画構成画像の前記特徴領域における差分対象領域の位置と前記イントラ符号化された領域を有する前記特徴領域の位置との間の位置差および前記イントラ符号化された領域を有する前記特徴領域と前記差分対象領域との間の画像の差分により、前記イントラ符号化された領域を有する前記特徴領域の画像を圧縮する請求項に記載の画像処理装置。 The recompression unit, the feature having the feature region and the position and the intra-coded regions of the difference target region in the characteristic region of the other video configuration images obtaining a difference with the intra-coded regions the difference image between the feature region and the difference target region of which position differences and with the intra-coded region between the position of the region, the image of the characteristic region with the intra-coded regions the image processing apparatus according to claim 4 for compressing.
  6. 前記再圧縮部は、 The recompression unit,
    前記イントラ符号化された領域を有する前記特徴領域および前記他の動画構成画像における前記特徴領域を伸張して、前記イントラ符号化された領域を有する前記特徴領域の画素情報および前記他の動画構成画像における前記特徴領域の画素情報を取得する画像伸張部と、 Decompresses the characteristic region in the characteristic region and the other moving image constituent images with the intra-coded regions, the intra-coded the feature region pixel information and said other video configuration images having regions an image decompression unit which acquires pixel information of the feature region in,
    前記画像伸張部により伸張されて得られた画素情報に基づいて生成される前記画像の差分により、前記イントラ符号化された領域を有する前記特徴領域の画像を圧縮する差分再圧縮部と、 The difference between the image generated based on the pixel information obtained is decompressed by the image decompression unit, and a difference recompression unit for compressing an image of the characteristic region with the intra-coded region,
    を有する請求項に記載の画像処理装置。 The image processing apparatus according to claim 4 having a.
  7. コンピュータを、請求項1から請求項6のいずれか1つに記載の画像処理装置として機能させるためのプログラム。 Program for causing a computer to function as the image processing apparatus according to claim 1, any one of claims 6.
  8. 動画に含まれる複数の動画構成画像から、特徴の種類が異なる複数の特徴領域を検出する特徴領域検出段階と、 A plurality of video configuration images included in the moving image, the feature region detecting step of types of features to detect a plurality of different characteristic regions,
    前記複数の動画構成画像を、前記複数の特徴領域のそれぞれを含む複数の特徴領域動画と、前記複数の特徴領域以外の背景領域を含む背景領域動画とに分割する画像分割段階と、 The plurality of video configuration images, an image dividing step that divides a background region moving image including a plurality of characteristic regions moving image including each of the plurality of characteristic regions, a background region other than the plurality of characteristic regions,
    前記複数の特徴領域動画および前記背景領域動画を、それぞれの特徴の種類ごとに予め定められた圧縮強度で圧縮する圧縮段階と、 Said plurality of characteristic region moving images and the background region moving, a compression step of compressing at a predetermined compressive strength for each type of each feature,
    圧縮された前記複数の特徴領域動画および前記背景領域動画の中から、イントラ符号化された領域を有する動画構成画像を含む動画を取得する動画取得段階と、 From among the compressed plurality of characteristic region moving images and the background region moving image, the moving image obtaining step of obtaining a moving image including a moving image constituting image having intra-coded region,
    前記イントラ符号化された領域を有する動画構成画像と他の動画構成画像との間の画像の変化量を検出する変化量検出段階と、 A change amount detecting step of detecting a variation of the image between the intra-coded video configuration images and other video configuration images having an area,
    前記変化量が予め定められた値より小さい場合に、前記動画構成画像の前記イントラ符号化された領域の画像を、前記他の動画構成画像を参照するインター符号化により圧縮する再圧縮段階とを備え If the amount of change is smaller than a predetermined value, the image of the intra-coded region of the moving image constituent images, and a recompression step of compressing the inter-coding that refers to the other video configuration images provided,
    前記変化量検出段階では、前記動画構成画像におけるイントラ符号化された領域を有する特徴領域と前記他の動画構成画像における特徴領域との間の前記変化量を検出し、 Wherein the variation detection step detects the variation between the characteristic region in the characteristic region with the other video configuration images with intra-coded region in the moving image constituent images,
    前記再圧縮段階では、前記変化量が予め定められた値より小さい場合に、前記イントラ符号化された領域を有する前記特徴領域の画像を、前記他の動画構成画像における前記特徴領域を参照するインター符号化により圧縮する画像処理方法。 Wherein in the recompression phase, when the amount of change is smaller than a predetermined value, the image of the characteristic region with the intra-coded region, referring to the characteristic region in the other video configuration images Inter An image processing method for compressing the encoding.
JP2007240185A 2007-09-14 2007-09-14 Image processing apparatus, image processing method, and program Active JP4817263B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007240185A JP4817263B2 (en) 2007-09-14 2007-09-14 Image processing apparatus, image processing method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007240185A JP4817263B2 (en) 2007-09-14 2007-09-14 Image processing apparatus, image processing method, and program

Publications (2)

Publication Number Publication Date
JP2009071731A true JP2009071731A (en) 2009-04-02
JP4817263B2 true JP4817263B2 (en) 2011-11-16

Family

ID=40607504

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007240185A Active JP4817263B2 (en) 2007-09-14 2007-09-14 Image processing apparatus, image processing method, and program

Country Status (1)

Country Link
JP (1) JP4817263B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5141656B2 (en) * 2009-09-07 2013-02-13 ブラザー工業株式会社 Communication control apparatus, communication control method, and communication control program
JP5727398B2 (en) 2012-01-26 2015-06-03 日本電信電話株式会社 Moving picture coding method, the moving picture coding apparatus and a moving picture encoding program
WO2016203539A1 (en) * 2015-06-16 2016-12-22 三菱電機株式会社 Image encoding scheme conversion device and image encoding scheme conversion method

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1023427A (en) * 1996-07-04 1998-01-23 Matsushita Electric Ind Co Ltd Video signal encoding and decoding device and video signal transmitter
JP2004274216A (en) * 2003-03-06 2004-09-30 Sharp Corp Moving picture data partitioning apparatus
JP2006074327A (en) * 2004-09-01 2006-03-16 Alpine Electronics Inc Re-coder for video data and video distribution system

Also Published As

Publication number Publication date Type
JP2009071731A (en) 2009-04-02 application

Similar Documents

Publication Publication Date Title
US6233279B1 (en) Image processing method, image processing apparatus, and data storage media
US6466697B1 (en) Data structure for image transmission, image coding method, and image decoding method
US5818531A (en) Video encoding and decoding apparatus
US6757330B1 (en) Efficient implementation of half-pixel motion prediction
US6466624B1 (en) Video decoder with bit stream based enhancements
US20050232501A1 (en) Predictive lossless coding of images and video
US20090060032A1 (en) Software Video Transcoder with GPU Acceleration
US6563953B2 (en) Predictive image compression using a single variable length code for both the luminance and chrominance blocks for each macroblock
US20090022403A1 (en) Image processing apparatus, image processing method, and computer readable medium
EP1715693A2 (en) Method and apparatus for adaptively selecting context model for entropy coding
US20020051494A1 (en) Method of transcoding encoded video data and apparatus which transcodes encoded video data
US20090141810A1 (en) Extension to the AVC standard to support the encoding and storage of high resolution digital still pictures in series with video
WO2007111292A1 (en) Picture coding apparatus and picture decoding apparatus
CN1917647A (en) Method and apparatus for adaptively selecting context model for entropy coding
US20090141809A1 (en) Extension to the AVC standard to support the encoding and storage of high resolution digital still pictures in parallel with video
US20030012278A1 (en) System and methodology for video compression
Acharya et al. Compressed domain transcoding of MPEG
CN101102495A (en) A video image decoding and encoding method and device based on area
US6823015B2 (en) Macroblock coding using luminance date in analyzing temporal redundancy of picture, biased by chrominance data
US6847684B1 (en) Zero-block encoding
US20090034609A1 (en) Method and apparatus for providing prediction mode fine granularity scalability
US20080232477A1 (en) Method and Device For Coding and Decoding of Video Error Resilience
JP2007174569A (en) Encoding method
US20060133512A1 (en) Video decoder and associated methods of operation
Symes Video Compression

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100210

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110308

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110405

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110531

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110802

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110824

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140909

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250