JP3474707B2 - Image encoding device and image decoding device - Google Patents
Image encoding device and image decoding deviceInfo
- Publication number
- JP3474707B2 JP3474707B2 JP17444996A JP17444996A JP3474707B2 JP 3474707 B2 JP3474707 B2 JP 3474707B2 JP 17444996 A JP17444996 A JP 17444996A JP 17444996 A JP17444996 A JP 17444996A JP 3474707 B2 JP3474707 B2 JP 3474707B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- area
- shape
- information
- image information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/537—Motion estimation other than block-based
- H04N19/543—Motion estimation other than block-based using regions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Description
【０００１】[0001]
【発明の属する技術分野】本発明はディジタル画像処理
の分野に属し、画像データを高能率に符号化する画像符
号化装置及びこの画像符号化装置で作成された符号化デ
ータを復号する画像復号装置に関するものである。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention belongs to the field of digital image processing, and an image coding apparatus for coding image data with high efficiency and an image decoding apparatus for decoding coded data created by this image coding apparatus. It is about.
【０００２】[0002]
【従来の技術】画像符号化において、異なる動画像シー
ケンスを符号化及び復号し、合成する方式が検討されて
いる。例えば、文献「階層表現と多重テンプレートを用
いた画像符号化」（信学技報ＩＥ９４−１５９、ｐｐ９
９−１０６（１９９５））では、背景となる動画像シー
ケンスと前景となる部品動画像の動画像シーケンス（例
えばクロマキー技術によって切り出された人物画像や魚
の映像など）を合成して新たなシーケンスを作成する手
法が述べられている。2. Description of the Related Art In image coding, a method of coding, decoding, and synthesizing different moving image sequences has been studied. For example, the document "Image Coding Using Hierarchical Representation and Multiple Templates" (Shingaku Giho IE94-159, pp9
9-106 (1995)), a new moving image sequence is created by synthesizing a moving image sequence serving as a background and a moving image sequence of a component moving image serving as a foreground (for example, a human image or a fish image cut out by the chroma key technique). The method to do is described.
【０００３】また、動画像符号化方式の国際標準化（Ｉ
ＳＯ／ＩＥＣ ＭＰＥＧ４）では、図８に示すような階
層構造を持つ符号化装置及び復号装置によって入力画像
と注目する領域の形状を示す形状情報で表される複数の
部品画像の符号化、復号及び合成が検討されている。International standardization (I)
In SO / IEC MPEG4), encoding and decoding of a plurality of component images represented by shape information indicating the shape of an input image and a region of interest by an encoding device and a decoding device having a hierarchical structure as shown in FIG. Synthesis is being considered.
【０００４】ここで部品画像とは、動画像内の人物や物
体などを部品として切り出した画像のことである。ただ
し、通常の動画像自体も部品画像の一種として扱われ
る。第１の部品画像符号化部８０１及び第２の部品画像
符号化部８０２及び第３の部品画像符号化部８０３では
入力画像１，２，３の画素値データと、形状情報１，
２，３がそれぞれ符号化され、多重化部８０４では複数
の部品画像符号化データが多重化され、伝送または蓄積
される。Here, the component image is an image obtained by cutting out a person or an object in the moving image as a component. However, the normal moving image itself is also treated as a kind of component image. In the first component image encoding unit 801, the second component image encoding unit 802, and the third component image encoding unit 803, the pixel value data of the input images 1, 2, and 3 and the shape information 1,
2 and 3 are encoded respectively, and a plurality of component image encoded data are multiplexed in the multiplexing unit 804 and transmitted or stored.
【０００５】復号装置では非多重化部８０５で符号化デ
ータが複数の部品画像符号化データに分離され、第１の
部品画像復号部８０６及び第２の部品画像復号部８０７
及び第３の部品画像復号部８０８では複数の部品画像符
号化データが各々復号され、部品画像合成部８０９では
復号画像１，２，３と形状情報１，２，３が各々合成さ
れて合成映像出力として出力され、図示しないディスプ
レイなどに表示される。In the decoding device, the demultiplexing unit 805 separates the encoded data into a plurality of component image encoded data, and the first component image decoding unit 806 and the second component image decoding unit 807.
And the third component image decoding unit 808 decodes each of the plurality of component image encoded data, and the component image synthesizing unit 809 synthesizes the decoded images 1, 2, 3 and the shape information 1, 2, 3 with each other to obtain a synthesized video It is output as an output and displayed on a display or the like not shown.
【０００６】ここで、合成位置情報は合成時に各部品を
ディスプレイに表示する際の位置を示す情報である。こ
の情報は符号化時に符号化データに多重しているものを
用いても良いし、または復号時に手動又は自動で与えら
れるものを用いても良い。Here, the combination position information is information indicating the position when each component is displayed on the display during combination. This information may be multiplexed with encoded data at the time of encoding, or may be provided manually or automatically at the time of decoding.
【０００７】図９は部品画像と、その合成の様子を模式
的に示したものである。図９（ａ）の部品画像１は背景
を表す通常の動画像であり、図９（ｂ）の部品画像２は
人物のみを切り出した動画像である。さらに、図９
（ｃ）の部品画像３は自動車のみを切り出した動画像で
ある。FIG. 9 schematically shows a component image and how the components are combined. The component image 1 in FIG. 9A is a normal moving image representing a background, and the component image 2 in FIG. 9B is a moving image in which only a person is cut out. Furthermore, FIG.
The part image 3 in (c) is a moving image in which only the car is cut out.
【０００８】符号化データのうち部品画像１だけを復号
すれば図９（ａ）と同様の背景だけの画像が得られ、部
品画像１と部品画像２を復号し合成すれば図９（ｄ）の
ような画像が再生される。さらに部品画像３を復号し、
３つの部品画像を合成すれば図９（ｅ）のような画像が
再生される。If only the component image 1 of the encoded data is decoded, an image with only the background similar to that shown in FIG. 9A is obtained, and if the component image 1 and the component image 2 are decoded and synthesized, the image shown in FIG. 9D is obtained. An image like is reproduced. Furthermore, the component image 3 is decoded,
If three component images are combined, an image as shown in FIG. 9 (e) is reproduced.
【０００９】[0009]
【発明が解決しようとする課題】従来の技術の問題点を
図を用いて説明する。Problems of the prior art will be described with reference to the drawings.
【００１０】図５に示した通り部品画像は、画像情報領
域５０１とその形状を表す形状情報領域５０２の組によ
って表わされる。この時、形状情報領域内部に対応する
画像情報が存在することが前提となっている。As shown in FIG. 5, the part image is represented by a set of an image information area 501 and a shape information area 502 showing its shape. At this time, it is premised that image information corresponding to the inside of the shape information area exists.
【００１１】しかし、低ビットレートで部品画像を符号
化する場合には、与えられたビットレートによっては元
の形状を再現できるよう可逆符号化するのは適当でな
く、何らかの非可逆的過程を行なうことで符号量削減を
実現する必要がある。However, when the component image is encoded at a low bit rate, it is not appropriate to perform the reversible encoding so that the original shape can be reproduced depending on the given bit rate, and some irreversible process is performed. Therefore, it is necessary to reduce the code amount.
【００１２】しかし、図６において画像情報領域６０１
の中の形状情報領域が６０２のように変形されたとする
と、元の画像情報領域をはみ出した領域である画像情報
領域内のデータの存在しない領域６０３が存在すること
になる。そのため、上記領域６０３に対応する画像情報
が存在せず、これを存在するかのごとく取り扱うと、画
質が低下するおそれがある。However, in FIG. 6, the image information area 601 is displayed.
If the shape information area in the area is transformed into a shape information area 602, there is an area 603 in which no data exists in the image information area, which is an area outside the original image information area. Therefore, the image information corresponding to the area 603 does not exist, and if it is handled as if it exists, the image quality may deteriorate.
【００１３】本発明の目的は従来技術の問題を解決し、
上述したように形状情報の可逆符号化によって元の形状
情報領域が画像情報領域内外部に跨るような場合に生じ
る不具合を回避しつつ部品画像の符号化方式を提供する
ことにある。The object of the present invention is to solve the problems of the prior art,
An object of the present invention is to provide an encoding method for component images while avoiding the problems that occur when the original shape information area extends inside and outside the image information area due to lossless encoding of shape information as described above.
【００１４】[0014]
【課題を解決するための手段】本発明は、上記目的を達
成するために以下の手段を有する。The present invention has the following means in order to achieve the above object.
【００１５】（１）任意の形状をした部品画像を符号化
する際に、その領域の形状を非可逆符号化した結果これ
が画像情報領域の内外部に跨る場合には、元の画像情報
領域画像に合わせて形状情報領域を変形する。(1) When a part image having an arbitrary shape is encoded, the shape of the area is lossy-encoded. As a result, when this extends over the inside and outside of the image information area, the original image information area image is displayed. The shape information area is deformed according to.
【００１６】（２）任意の形状をした部品画像を符号化
する際に、その領域の形状を非可逆符号化した結果これ
が画像情報領域の内外部に跨る場合に、形状情報領域が
画像画像情報領域内外部に跨らないよう領域の非可逆符
号化のパラメータ変更を行ない、条件を満たすまで繰り
返す。(2) When a part image having an arbitrary shape is encoded, the shape of the area is lossy-encoded. As a result, the shape information area extends to the inside or outside of the image information area. The lossy encoding parameters of the area are changed so as not to extend inside and outside the area and repeated until the condition is satisfied.
【００１７】（３）任意の形状をした部品画像を符号化
する際に画像フレームから注目する任意形状領域を切り
出す際に、その領域の形状を非可逆符号化した結果これ
が画像情報領域の内外部に跨る場合に、これを含むよう
画像情報領域の周囲のある範囲を適切な値であらかじめ
補間・拡大することで、これが先の復号形状情報領域を
含む。(3) As a result of irreversible coding of the shape of a region of interest when cutting out a region of arbitrary shape of interest from an image frame when encoding a component image having an arbitrary shape, this is the inside or outside of the image information region. In the case of straddling, the certain area around the image information area is interpolated / enlarged with an appropriate value in advance so as to include this, and this includes the previous decoded shape information area.
【００１８】（４）任意の形状をした部品画像を復号す
る際に、その領域の形状を復号した結果これが画像情報
領域の内外部に跨る場合には、元の画像情報領域画像に
合わせて形状情報領域を変形する。(4) When a component image having an arbitrary shape is decoded, and the result of decoding the shape of the area extends across the inside and outside of the image information area, the shape is adjusted to the original image information area image. Deform the information area.
【００１９】[0019]
【発明の実施の形態】以下、図面を参照しながら、本発
明の実施の形態を詳細に説明する。BEST MODE FOR CARRYING OUT THE INVENTION Embodiments of the present invention will be described in detail below with reference to the drawings.
【００２０】図１は、本発明の第１の実施の形態を示す
ブロック図である。これは、非可逆符号化によって変形
した形状情報を画像情報領域の大きさに合わせて変形す
ることで従来技術の問題を解決するものである。FIG. 1 is a block diagram showing a first embodiment of the present invention. This solves the problem of the conventional technique by transforming the shape information transformed by lossy encoding according to the size of the image information area.
【００２１】この実施の形態では、画像符号化部１０５
による画像信号（テクスチャ）の符号化方式については
言及しないが、これは形状情報領域によって定められた
任意形状領域を符号化するものである。入力された形状
情報は形状符号化部１０１にて決定された符号化パラメ
ータを用いて符号化される。In this embodiment, the image coding unit 105
Although the image signal (texture) coding method according to (1) is not mentioned, this is for coding an arbitrary shape area defined by the shape information area. The input shape information is encoded using the encoding parameter determined by the shape encoding unit 101.
【００２２】形状復号部１０２にて復号された形状情報
領域が画像情報領域の内部にあるかどうかを内外判定部
１０３にて行なう。もし、内部にあるならばその復号領
域形状を用いて画像信号の符号化を画像符号化部１０５
にて行なう。The inside / outside determination unit 103 determines whether the shape information area decoded by the shape decoding unit 102 is inside the image information area. If it is inside, the image encoding unit 105 encodes the image signal using the decoding area shape.
At.
【００２３】もし、外部にあるならば形状変形部１０４
にて復号形状領域を画像フレームの形状に合わせて変形
した後、改めて画像符号化部１０５にて符号化を行な
う。符号化された領域形状と画像情報は多重化部１０６
にて多重化され、１つの任意形状領域の符号化データと
なる。If it is outside, the shape deforming section 104
After deforming the combined decoding shaped region to the shape of the image frame at, revised performs encoding at picture coding unit 105. The encoded area shape and image information are multiplexed by the multiplexing unit 106.
Are multiplexed and are encoded data of one arbitrary shape area.
【００２４】ここでいう形状の変形処理とは、例えば図
６に示すように画像情報領域内のデータが存在しない領
域６０３を削除することに相当する。これにより、形状
情報領域内部の全ての画像情報が画像情報領域内のデー
タから得られる。The shape transforming process here corresponds to deleting an area 603 in the image information area where data does not exist, as shown in FIG. 6, for example. As a result, all the image information in the shape information area can be obtained from the data in the image information area.
【００２５】図２は、本発明の第２の実施の形態を示す
ブロック図である。これは、非可逆符号化を行なう際に
復号して得られた形状情報領域が画像情報領域内部に必
ず存在するようパラメータを調整することにより従来技
術の問題を解決するものである。FIG. 2 is a block diagram showing a second embodiment of the present invention. This solves the problem of the conventional technique by adjusting the parameters so that the shape information area obtained by decoding when irreversibly encoding is always present inside the image information area.
【００２６】この実施の形態では、形状符号化部２０１
にて符号化した形状情報を形状復号部２０２にて復号し
た後、この結果が画像情報領域内部に存在するかどうか
を内外判定部２０３にて判定する。もしこれが外部に跨
っている場合には、２つのスイッチ２０６，２０７がオ
フとなり、符号化パラメータ変更部２０５にてパラメー
タの変更を行なう。In this embodiment, shape coding section 201
The shape decoding unit 202 decodes the shape information encoded in 1., and the inside / outside determination unit 203 determines whether or not the result exists inside the image information area. If it extends to the outside, the two switches 206 and 207 are turned off, and the coding parameter changing unit 205 changes the parameter.
【００２７】そうでなければ、２つのスイッチ２０６，
２０７がオンとなり、その時点で得られている形状情報
領域を用いて画像情報の符号化が行なわれる。したがっ
て、形状符号化の処理は目的の符号化パラメータが発見
されるまで繰り返し行なわれる。こうして得られた形状
情報領域を用いて画像符号化部２０４にて符号化を行な
う。パラメータの選択の手法として、例えば形状を大き
く変形できる部分は符号量を減らして単純な形状で表現
し、逆にこれが小さい部分は符号量を費やして元の形状
に近づける手法が考えられる。Otherwise, the two switches 206,
207 is turned on, and the image information is encoded using the shape information area obtained at that time. Therefore, the shape coding process is repeated until the target coding parameter is found. The image encoding unit 204 performs encoding using the shape information area thus obtained. As a method of selecting the parameters, for example, a method in which a portion whose shape can be largely deformed is represented by a simple shape by reducing the code amount, and conversely, a portion in which the shape is small is spent in the code amount to approximate the original shape.
【００２８】なお、前述の第１の実施の形態と同様に、
符号化された領域形状と画像情報は多重化部１０６にて
多重化され、１つの任意形状領域の符号化データとな
る。Incidentally, as in the first embodiment described above,
The encoded area shape and the image information are multiplexed by the multiplexing unit 106 to be encoded data of one arbitrary shape area.
【００２９】図３は、本発明の第３の実施の形態を示す
ブロック図である。これは、非可逆符号化によって変形
した形状情報領域の内部に対応する画像情報が必ず存在
するよう、画像情報領域をあらかじめ外挿補間を用いて
作成する手法である。FIG. 3 is a block diagram showing a third embodiment of the present invention. This is a method of creating the image information area by using extrapolation in advance so that the image information corresponding to the inside of the shape information area deformed by the lossy encoding always exists.
【００３０】この実施の形態では、図３の形状符号化部
１０１にて符号化した形状情報を形状復号部１０２にて
復号した後、この領域形状の大きさに合わせて領域拡張
部３０３にて追加領域を外挿補間により作成する。In this embodiment, the shape information encoded by the shape encoding unit 101 of FIG. 3 is decoded by the shape decoding unit 102, and then the area expansion unit 303 is adapted to the size of the area shape. The extra area is created by extrapolation.
【００３１】ここでいう追加領域とは図７の斜線部に示
される領域７０３を指す。これを新たな画像情報領域と
して図３の画像符号化部３０４で符号化することで、図
７の形状情報領域７０２の内部に必ず画像情報領域が存
在するようになり、従来技術の問題を解決することがで
きる。The additional area referred to here is the area 703 shown by the shaded area in FIG. By encoding this as a new image information area by the image encoding unit 304 of FIG. 3, the image information area always exists inside the shape information area 702 of FIG. 7, and the problem of the conventional technique is solved. can do.
【００３２】なお、画像情報領域６０１と画像情報領域
内のデータの存在しない領域６０３は、上述の図６のも
のと同じであるので説明は省略する。The image information area 601 and the area 603 in which no data exists in the image information area are the same as those shown in FIG.
【００３３】また、上述の第１の実施の形態と同様に、
符号化された領域形状と画像情報は図３の多重化部１０
６にて多重化され、１つの任意形状領域の符号化データ
となる。Further, similarly to the above-mentioned first embodiment,
The coded area shape and image information are obtained by the multiplexing unit 10 in FIG.
It is multiplexed in 6 to form encoded data of one arbitrary shape area.
【００３４】図４は、本発明の第４の実施の形態を示す
ブロック図である。これは、復号した形状情報領域が符
号化側で非可逆符号化を行なったため画像情報領域の内
外に跨る場合に、これを画像情報の大きさに合わせて変
形することで従来技術の問題を解決するものである。FIG. 4 is a block diagram showing a fourth embodiment of the present invention. This is because when the decoded shape information area is lossy-encoded on the encoding side and therefore extends over the inside and outside of the image information area, it is transformed according to the size of the image information to solve the problem of the conventional technology. To do.
【００３５】この実施の形態においても、図４の画像復
号部４０５における画像信号の復号方式の詳細について
は言及しないが、これも形状情報によって定められた任
意の形状をした画像情報を復号するものである。同図の
非多重化部４０１にて分離された形状情報は形状復号部
４０２にて復号される。In this embodiment as well, details of the image signal decoding method in the image decoding unit 405 of FIG. 4 are not mentioned, but this also decodes image information having an arbitrary shape determined by the shape information. Is. The shape information separated by the demultiplexing unit 401 in the figure is decoded by the shape decoding unit 402.
【００３６】復号された形状情報領域は、符号化時に非
可逆的過程にて得られたものと同一でありこれが画像情
報領域内外に跨るかどうかを内外判定部４０３にて判定
する。もし、これが画像情報領域の外側に跨ると判定さ
れた場合には、形状変形部４０４にて外部に跨らないよ
うに変形する。そうでなければ、復号した結果をそのま
ま用い、画像復号部４０５にて元の部品画像が復号再生
される。The decoded shape information area is the same as that obtained in the irreversible process at the time of encoding, and the inside / outside judgment unit 403 judges whether or not this extends over the inside and outside of the image information area. If it is determined that this extends over the outside of the image information area, the shape transformation unit 404 transforms it so as not to extend over the outside. Otherwise, the decoded result is used as it is, and the image decoding unit 405 decodes and reproduces the original component image.
【００３７】なお、本発明は画像情報として動画像だけ
でなく、静止画像にも同様に適用できる。The present invention can be applied not only to moving images but also to still images as image information.
【００３８】[0038]
【発明の効果】本発明の画像符号化及び復号装置を用い
れば以下の効果を奏する。The following effects can be obtained by using the image coding and decoding apparatus of the present invention.
【００３９】（１）領域形状情報の非可逆符号化による
領域形状の変化による画像情報領域外部のデータ参照に
起因する画質低下を、形状情報領域が画像情報領域内外
部に跨る場合にこれを画像情報領域に合わせて変形する
ことにより画質低下を抑えることができる。(1) When the shape information area extends inside and outside the image information area, the image quality deterioration caused by the data reference outside the image information area due to the change of the area shape due to the irreversible encoding of the area shape information is imaged. Deformation according to the information area can prevent image quality deterioration.
【００４０】（２）領域形状情報の非可逆符号化による
領域形状の変化による画像情報領域外部のデータ参照に
起因する画質低下を、形状情報領域がフレーム内外部に
跨る場合に非可逆符号化による形状変化を画像情報領域
内部に制限するよう符号化パラメータを制御することで
画質低下を抑えることができる。(2) The image quality deterioration caused by the data reference outside the image information area due to the change of the area shape due to the lossy encoding of the area shape information is caused by the lossy encoding when the shape information area extends inside and outside the frame. Image quality deterioration can be suppressed by controlling the encoding parameter so that the shape change is limited to the inside of the image information area.
【００４１】（３）領域形状情報の非可逆符号化による
領域形状の変化による画像情報領域外部のデータ参照に
起因する画質低下を、非可逆符号化により形状情報領域
が画像情報領域内外部に跨る場合に、画像情報領域の周
囲をある適切な値で補間して形状情報領域を含むように
することにより画質低下を抑えることができる。(3) The image quality deterioration caused by the data reference outside the image information area due to the change of the area shape due to the irreversible encoding of the area shape information extends over the inside and outside of the image information area by the irreversible encoding. In this case, it is possible to suppress the image quality deterioration by interpolating the periphery of the image information area with a certain appropriate value so as to include the shape information area.
【００４２】（４）領域形状情報の復号された形状情報
領域が画像情報領域内外部に跨る場合に、これを画像情
報領域に合わせて変形することにより復号画像の画質低
下を抑えることができる。(4) When the decoded shape information area of the area shape information extends over the inside and outside of the image information area, by deforming the shape information area according to the image information area, it is possible to suppress deterioration of the image quality of the decoded image.
【図１】本発明の第１の実施の形態を示すブロック図で
ある。FIG. 1 is a block diagram showing a first embodiment of the present invention.
【図２】本発明の第２の実施の形態を示すブロック図で
ある。FIG. 2 is a block diagram showing a second embodiment of the present invention.
【図３】本発明の第３の実施の形態を示すブロック図で
ある。FIG. 3 is a block diagram showing a third embodiment of the present invention.
【図４】本発明の第４の実施の形態を示すブロック図で
ある。FIG. 4 is a block diagram showing a fourth embodiment of the present invention.
【図５】従来の技術を説明する図である。FIG. 5 is a diagram illustrating a conventional technique.
【図６】従来の技術の問題点を説明する図である。FIG. 6 is a diagram illustrating a problem of the conventional technique.
【図７】本発明の実施の形態を説明する図である。FIG. 7 is a diagram illustrating an embodiment of the present invention.
【図８】従来の技術を説明するブロック図である。FIG. 8 is a block diagram illustrating a conventional technique.
【図９】部品画像と、その合成の様子を模式的に示す図
である。FIG. 9 is a diagram schematically showing a component image and how the images are combined.
１０１，２０１ 形状符号化部 １０２，２０２，４０２ 形状復号部 １０３，２０３，４０３ 内外判定部 １０４，４０４ 形状変形部 ２０５ 符号化パラメータ変更部 １０５，２０４，３０４ 画像符号化部 ２０６，２０７ スイッチ ３０３ 領域拡張部 １０６，８０４ 多重化部 ４０１，８０５ 非多重化部 ８０１，８０２，８０３ 部品画像符号化部 ８０６，８０７，８０８ 部品画像復号部 ８０９ 部品画像合成部 101, 201 shape coding unit 102, 202, 402 shape decoding unit 103, 203, 403 Inside / outside determination unit 104,404 Shape deformation part 205 encoding parameter changing unit 105, 204, 304 image coding unit 206, 207 switch 303 Area expansion part 106,804 Multiplexing unit 401,805 Demultiplexer 801, 802, 803 Component image coding unit 806, 807, 808 Component image decoding unit 809 Component image composition unit
───────────────────────────────────────────────────── フロントページの続き (56)参考文献 特開 平１−181280（ＪＰ，Ａ) 特開 平４−195686（ＪＰ，Ａ) 特開 平７−262384（ＪＰ，Ａ) Ｍ．Ｈｏｔｔｅｒ，”Ｏｂｊｅｃｔ− ｏｒｉｅｎｔｅｄ ａｎａｌｙｓｉｓ− ｓｙｎｔｈｅｓｉｓ ｃｏｄｉｎｇ ｂ ａｓｅｄ ｏｎ ｍｏｖｉｎｇ ｔｗｏ −ｄｉｍｅｎｓｉｏｎａｌ ｏｂｊｅｃ ｔｓ”，Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓ ｉｎｇ： Ｉｍａｇｅ Ｃｏｍｍｕｎｉ ｃａｔｉｏｎ，1990年11月，Ｖｏｌ. ２， Ｎｏ．４，ｐ．409−428 (58)調査した分野(Int.Cl.7，ＤＢ名) H04N 7/24 - 7/68 ＪＩＣＳＴファイル（ＪＯＩＳ)─────────────────────────────────────────────────── ───Continued from the front page (56) References JP-A-1-181280 (JP, A) JP-A-4-195686 (JP, A) JP-A-7-262384 (JP, A) M.M. Hutter, "Object-orientated analysis-synthesis coding based on moving two-dimensional objects", Signal Processing, Image Commun., November, 1990, V. 4, p. 409-428 (58) Fields investigated (Int.Cl. 7 , DB name) H04N 7/ 24-7/68 JISST file (JOIS)
Claims (3)
目する任意形状領域を切り出し、切り出された領域の形
状情報と画像情報を符号化する画像符号化装置におい
て、 前記形状情報を符号化する形状符号化手段と、 前記符号化された形状情報を復号する形状復号手段と、 前記復号された形状情報が示す領域である形状情報領域
が前記画像情報領域の内部にあるかどうかを判定する内
外判定手段と、 前記内外判定手段が外部にあると判定した場合、前記形
状情報領域を前記画像情報領域に合わせて変形する形状
変形手段と、 前記切り出された任意形状領域内あるいは前記変形され
た形状情報領域内の画像情報を符号化する画像符号化手
段とを備え、 前記内外判定手段が内部にあると判定した場合、前記形
状符号化手段により符号化した形状情報と前記形状情報
領域内の画像情報を前記画像符号化手段により符号化し
た画像情報とを符号化データとし、 前記内外判定手段が外部にあると判定した場合、前記形
状符号化手段により符号化した形状情報と前記形状変形
手段により変形された形状情報領域内の画像情報を前記
画像符号化手段により符号化した画像情報とを符号化デ
ータとすることを特徴とした画像符号化装置。1. An image encoding apparatus for cutting out an arbitrarily shaped area of interest from an image frame, which is an image information area, and coding the shape information and image information of the cut out area, the shape code for coding the shape information. Conversion means, shape decoding means for decoding the encoded shape information, and inside / outside determination means for determining whether or not the shape information area, which is an area indicated by the decoded shape information, is inside the image information area And, when the inside / outside determination means determines that the shape information area is outside, a shape deforming means for deforming the shape information area in accordance with the image information area, and inside the cut out arbitrary shape area or the deformed shape information area the image information of the inner and image coding means for coding, when the outside judgment unit determines that inside, encoded by the shape coding means shape If the information and the image information in the shape information area are coded by the image coding means, and the inside / outside judging means judges that the information is outside, the shape coding means codes the information. shape information and the image marks-coding apparatus characterized in that the encoded data and the encoded image information by the image information the image encoding means of said deformation unit by the deformed configuration information region.
目する任意形状領域を切り出し、切り出された領域の形
状情報と画像情報を符号化する画像符号化装置におい
て、 前記形状情報を符号化する形状符号化手段と、 前記符号化手段により符号化された前記形状情報を復号
する形状復号手段と、 前記復号された形状情報が示す領域である形状情報領域
が前記画像情報領域よりはみ出した場合に、画像情報領
域が前記はみ出した領域を完全に含むよう画像情報領域
の周囲を適切な値を用いて補間する領域拡張手段と、 前記領域拡張手段により補間された領域を含む画像情報
を符号化する画像符号化手段とを備える ことを特徴とし
た画像符号化装置。2. A cut out arbitrarily-shaped region of interest from the image frame is an image information area, in the image encoding device for encoding the shape information and the image information of the cut-out area, shaped to sign-of the shape information encoding means, in the case where the shape decoding means for decoding the shape information encoded shape information area which is an area in which the decoded shape information indicates that protrudes from the image information area by the encoding means, Image information area
Image information area so that the area completely includes the protruding area
Area expansion means for interpolating the surroundings of the area using an appropriate value, and image information including the area interpolated by the area expansion means
An image encoding device comprising: an image encoding unit that encodes the image .
り出した任意形状領域の符号化された形状情報と画像情
報を復号する画像復号装置において、 前記符号化された形状情報を復号する形状復号手段と、前記復号された形状情報が示す領域である形状情報領域
が前記画像情報領域の内部にあるかどうかを判定する内
外判定手段と、 前記内外判定手段が外部にあると判定した場合、前記形
状情報領域を前記画像情報領域に合わせて変形し、前記
内外判定手段が内部にあると判定した場合、変形は行わ
ない領域変形手段と、 前記領域変形手段が出力した形状情報領域内の画像情報
を復号する画像復号手段とを備え、 前記領域変形手段が変形した形状情報と前記画像復号手
段が復号した画像情報を復号データとする ことを特徴と
した画像復号装置。3. The image frame, which is the image information area, is cut off from the image frame.
Encoded shape information and image information of the projected arbitrary shape region
An image decoding apparatus for decoding broadcast, and shape decoding means for decoding the pre Kifu Goka been shape information, the shape information area which is an area showing the decoded shape information
To determine whether is inside the image information area
If it is determined that the outside determination means and the inside / outside determination means are outside,
The shape information area is transformed according to the image information area,
If the inside / outside determination means is determined to be inside, the transformation is performed.
And no area transforming means, the image information of the area transforming means shape information area outputted
Image decoding means for decoding the image information, and
An image decoding device characterized in that image information decoded by a stage is used as decoded data .
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP17444996A JP3474707B2 (en) | 1996-07-04 | 1996-07-04 | Image encoding device and image decoding device |
| PCT/JP1997/001448 WO1998002000A1 (en) | 1996-07-04 | 1997-04-25 | Image encoder and image decoder |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP17444996A JP3474707B2 (en) | 1996-07-04 | 1996-07-04 | Image encoding device and image decoding device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH1023400A JPH1023400A (en) | 1998-01-23 |
| JP3474707B2 true JP3474707B2 (en) | 2003-12-08 |
Family
ID=15978698
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP17444996A Expired - Fee Related JP3474707B2 (en) | 1996-07-04 | 1996-07-04 | Image encoding device and image decoding device |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP3474707B2 (en) |
| WO (1) | WO1998002000A1 (en) |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH01181280A (en) * | 1988-01-13 | 1989-07-19 | Nippon Telegr & Teleph Corp <Ntt> | Coding system for picture signal |
| JP2890835B2 (en) * | 1990-11-28 | 1999-05-17 | 松下電器産業株式会社 | Area dividing device |
| US5422963A (en) * | 1993-10-15 | 1995-06-06 | At&T Corp. | Block transform coder for arbitrarily shaped image segments |
| JPH07262384A (en) * | 1994-03-23 | 1995-10-13 | Nippon Telegr & Teleph Corp <Ntt> | Method and device for dividing image area |
| US5608458A (en) * | 1994-10-13 | 1997-03-04 | Lucent Technologies Inc. | Method and apparatus for a region-based approach to coding a sequence of video images |
| JPH08161505A (en) * | 1994-11-30 | 1996-06-21 | Sony Corp | Dynamic image processor, dynamic image encoding device, and dynamic image decoding device |
-
1996
- 1996-07-04 JP JP17444996A patent/JP3474707B2/en not_active Expired - Fee Related
-
1997
- 1997-04-25 WO PCT/JP1997/001448 patent/WO1998002000A1/en active Application Filing
Non-Patent Citations (1)
| Title |
|---|
| Ｍ．Ｈｏｔｔｅｒ，"Ｏｂｊｅｃｔ−ｏｒｉｅｎｔｅｄ ａｎａｌｙｓｉｓ−ｓｙｎｔｈｅｓｉｓ ｃｏｄｉｎｇ ｂａｓｅｄ ｏｎ ｍｏｖｉｎｇ ｔｗｏ−ｄｉｍｅｎｓｉｏｎａｌ ｏｂｊｅｃｔｓ"，Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｉｎｇ： Ｉｍａｇｅ Ｃｏｍｍｕｎｉｃａｔｉｏｎ，１９９０年１１月，Ｖｏｌ．２， Ｎｏ．４，ｐ．４０９−４２８ |
Also Published As
| Publication number | Publication date |
|---|---|
| WO1998002000A1 (en) | 1998-01-15 |
| JPH1023400A (en) | 1998-01-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3249729B2 (en) | Image encoding device and image decoding device | |
| JP3224514B2 (en) | Video encoding device and video decoding device | |
| JP2003116053A (en) | Method for encoding specific effect data, method for displaying specific effect, and method for editing specific effect data | |
| JP3474707B2 (en) | Image encoding device and image decoding device | |
| JP3158064B2 (en) | Video encoding device and video decoding device | |
| JP3832971B2 (en) | Image processing apparatus and method, and image processing system | |
| US5990959A (en) | Method, system and product for direct rendering of video images to a video data stream | |
| JP3526316B2 (en) | Video compression encoding method | |
| JP4136403B2 (en) | Image processing apparatus, image processing method, program, and storage medium | |
| JP3148751B2 (en) | Video encoding device and video decoding device | |
| JP3256434B2 (en) | Image data encoding / decoding apparatus and method | |
| JP3461807B2 (en) | Video decoding method | |
| JP3188237B2 (en) | Image encoding device and image decoding device | |
| JP3247893B2 (en) | Image encoding device and image decoding device | |
| JP3148752B2 (en) | Video encoding device | |
| JP3648121B2 (en) | Decoding method and decoding apparatus | |
| JP2003198936A (en) | Special effect data encoding method, special effect processing method, and special effect data editing method | |
| JPH08289298A (en) | Image encoding method and device, image decoding method, image encoding/decoding method, image communication method and device | |
| JPH1141502A (en) | Image pickup device and image pickup method | |
| JP2002142225A (en) | Image signal-coding device | |
| JPH08223480A (en) | Device for adding special effect to compressed moving image | |
| JPH10174104A (en) | Moving image coder and moving image decoder | |
| JPH11122580A (en) | Edit device for image signal, coder and decoder | |
| JPH11164320A (en) | Method and system for decoding color compression image | |
| JPH10191361A (en) | Supplement method for image signal, image signal coder and image signal decoder |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080919 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080919 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090919 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090919 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100919 Year of fee payment: 7 |
|
| LAPS | Cancellation because of no payment of annual fees |