JP2002027460A - Apparatus and method for processing image, apparatus and method for encoding image as well as apparatus and method for decoding image - Google Patents

Apparatus and method for processing image, apparatus and method for encoding image as well as apparatus and method for decoding image

Info

Publication number
JP2002027460A
JP2002027460A JP2000203335A JP2000203335A JP2002027460A JP 2002027460 A JP2002027460 A JP 2002027460A JP 2000203335 A JP2000203335 A JP 2000203335A JP 2000203335 A JP2000203335 A JP 2000203335A JP 2002027460 A JP2002027460 A JP 2002027460A
Authority
JP
Japan
Prior art keywords
image
lens distortion
parameter
decoding
acquiring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2000203335A
Other languages
Japanese (ja)
Other versions
JP3648135B2 (en
JP2002027460A5 (en
Inventor
Shinichi Sakaida
慎一 境田
Buntou Tei
文涛 鄭
Yoshiaki Shishikui
善明 鹿喰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Japan Broadcasting Corp
Original Assignee
Nippon Hoso Kyokai NHK
Japan Broadcasting Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Hoso Kyokai NHK, Japan Broadcasting Corp filed Critical Nippon Hoso Kyokai NHK
Priority to JP2000203335A priority Critical patent/JP3648135B2/en
Priority to US09/811,923 priority patent/US6771823B2/en
Publication of JP2002027460A publication Critical patent/JP2002027460A/en
Publication of JP2002027460A5 publication Critical patent/JP2002027460A5/ja
Application granted granted Critical
Publication of JP3648135B2 publication Critical patent/JP3648135B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Studio Devices (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

PROBLEM TO BE SOLVED: To alleviate or eliminate a sense of incongruity of a reproduced image in the case of processing the image. SOLUTION: An encoding circuit 3 encodes a lens distortion amount signal B, a camera parameter signal D and a background image signal E, and generates a digital data signal F. A decoding circuit 4 decodes the signal F, and generates a background image decoding signal G, a camera parameter decoding signal H and a lens distortion amount decoding signal I. A dynamic image slicing circuit 5 generates a dynamic image decoding signal J from the decoded signal G. A lens distortion adding circuit 6 adds a lens distortion to each frame image of the dynamic image by using the signal J, and generates a dynamic image signal K.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、例えばデジタル放
送で利用される画像処理装置及び方法、画像符号化装置
及び方法並びに画像復号化装置及び方法に関するもので
ある。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image processing apparatus and method used in digital broadcasting, an image encoding apparatus and method, and an image decoding apparatus and method.

【0002】[0002]

【従来の技術】画像をデジタルデータに符号化した後に
伝送し及び/又は蓄積する技術は、デジタル放送やデジ
タルVTRに利用されている。現在広く使用されている
MPEG−2規格の次の規格として標準化されたMPE
G−4規格は、画像を前景と背景とに分離して符号化す
るオブジェクトベース符号化と称されている。
2. Description of the Related Art Techniques for transmitting and / or storing an image after encoding the image into digital data are used in digital broadcasting and digital VTR. MPE standardized as the next standard of the MPEG-2 standard currently widely used
The G-4 standard is referred to as object-based coding that separates an image into a foreground and a background and codes the image.

【0003】オブジェクトベース符号化は、画像を前景
と背景とに分離することによって符号化の効率を向上さ
せる特徴を有する。特にMPEG−4規格では、スプラ
イト符号化という手法が取り入れられている。この場
合、背景用の画像であるスプライトを符号化し、復号化
の際にこの画像の一部を任意の位置から切り出して、復
号化画像の背景とする。
[0003] Object-based coding has a feature of improving coding efficiency by separating an image into a foreground and a background. In particular, the MPEG-4 standard employs a technique called sprite coding. In this case, a sprite which is a background image is encoded, and a part of the image is cut out from an arbitrary position at the time of decoding to be used as a background of the decoded image.

【0004】スプライト手法では、背景用の画像及び復
号化の際に切り出すための位置パラメータのみを符号化
すればよいので、画像をフレームごとに符号化する必要
がなく、画像の符号化効率を向上させることができる。
In the sprite method, only the background image and the position parameter to be cut out at the time of decoding need to be encoded, so that it is not necessary to encode the image for each frame, and the encoding efficiency of the image is improved. Can be done.

【0005】スプライトを動画像から作成する技術は、
パノラマ画像処理やイメージモザイク処理と称される画
像の張り合わせ技術である。その処理では、画像を張り
合わせる位置を決定するために、カメラのパンやズーム
のようなカメラパラメータを画像信号から推定し又は直
接カメラの雲台等から計測する。
A technique for creating a sprite from a moving image is as follows.
This is an image joining technique called panoramic image processing or image mosaic processing. In that process, camera parameters such as camera pan and zoom are estimated from image signals or measured directly from the camera platform to determine the position where the images are to be attached.

【0006】また、カメラレンズの幾何学的な歪を補正
し及び除去してから貼り合せが行われる。このようなレ
ンズ歪を複数のパラメータによるモデルによって定式化
できることは、例えば1998年に新技術コミュニケー
ションズから刊行された松山等による文献「コンピュー
タビジョン:技術評論と将来展望」の42−43頁に記
載されている。
[0006] In addition, bonding is performed after correcting and removing geometric distortion of a camera lens. The fact that such lens distortion can be formulated by a model using a plurality of parameters is described in, for example, a document “Computer Vision: Technical Review and Future Prospects” by Matsuyama et al. ing.

【0007】なお、スプライトから動画像を復元する際
にレンズ歪を逆に付加することによって、元の動画像を
再生することができる。
[0007] When a moving image is restored from a sprite, the original moving image can be reproduced by adding a lens distortion in reverse.

【0008】[0008]

【発明が解決しようとする課題】従来、動画像の背景用
の画像を復号化するに当たり、動画像撮影時のレンズ歪
値の逆補正を考慮していない。しかしながら、レンズ歪
値の逆補正を考慮しない場合、符号化の際にレンズ歪を
補正した精度の高い画像を作成したとしても、復号化の
際に元の動画像を忠実に再現することができない。
Conventionally, in decoding a background image of a moving image, the inverse correction of the lens distortion value at the time of capturing the moving image has not been considered. However, when the inverse correction of the lens distortion value is not considered, even if a high-precision image in which the lens distortion is corrected during encoding is created, the original moving image cannot be faithfully reproduced during decoding. .

【0009】その結果、レンズ歪を除去する補正を行っ
た背景用の画像を、別に撮影したレンズ歪を有する前景
用の画像と合成ずる際に、レンズ歪の有無によって画像
に違和感が生じる。
As a result, when the background image corrected to remove the lens distortion is combined with the foreground image having the lens distortion that has been separately captured, the image has a feeling of strangeness due to the presence or absence of the lens distortion.

【0010】本発明の目的は、再現された画像の違和感
を軽減し又はなくす画像処理装置及び方法、画像符号化
装置及び方法並びに画像復号化装置及び方法を提供する
ことである。
It is an object of the present invention to provide an image processing apparatus and method, an image encoding apparatus and method, and an image decoding apparatus and method for reducing or eliminating unnaturalness in a reproduced image.

【0011】[0011]

【課題を解決するための手段】本発明による画像処理装
置は、動画像中の背景用の画像を取得するためのパラメ
ータを取得するパラメータ取得手段と、そのパラメータ
を用いて前記背景用の画像を取得する静止画像取得手段
と、カメラのレンズ歪量を検出するレンズ歪量検出手段
と、前記パラメータ、背景用の画像及びレンズ歪量を符
号化する符号化手段と、符号化されたパラメータ、背景
用の画像及びレンズ歪量を復号化する復号化手段と、復
号化されたパラメータを用いて、復号化された背景用の
画像から動画像を取得する動画像取得手段と、取得した
動画像に復号化されたレンズ歪量を付加するレンズ歪量
付加手段とを具えることを特徴とするものである。
According to the present invention, there is provided an image processing apparatus comprising: parameter acquisition means for acquiring a parameter for acquiring a background image in a moving image; A still image acquisition unit for acquiring, a lens distortion amount detection unit for detecting a lens distortion amount of the camera, an encoding unit for encoding the parameter, the image for the background and the lens distortion amount, and an encoded parameter, the background Decoding means for decoding the image for use and the amount of lens distortion, moving image obtaining means for obtaining a moving image from the decoded background image using the decoded parameters, Lens distortion adding means for adding the decoded lens distortion amount.

【0012】本発明によれば、復号化の際に動画像にレ
ンズ歪量を付加するので、違和感が軽減され又はなくな
る動画像を生成することができる。
According to the present invention, the amount of lens distortion is added to a moving image at the time of decoding, so that it is possible to generate a moving image in which the sense of discomfort is reduced or eliminated.

【0013】本発明による画像符号化装置は、動画像中
の背景用の画像を取得するためのパラメータを取得する
パラメータ取得手段と、そのパラメータを用いて前記背
景用の画像を取得する静止画像取得手段と、カメラのレ
ンズ歪量を検出するレンズ歪量検出手段と、前記パラメ
ータ、背景用の画像及びレンズ歪量を符号化する符号化
手段とを具えることを特徴とするものである。
[0013] An image encoding apparatus according to the present invention comprises: a parameter acquisition unit for acquiring a parameter for acquiring a background image in a moving image; and a still image acquisition for acquiring the background image using the parameter. Means, lens distortion detecting means for detecting the amount of lens distortion of the camera, and encoding means for encoding the parameter, background image and lens distortion.

【0014】本発明によれば、復号化の際に動画像にレ
ンズ歪量を付加することができるので、違和感が軽減さ
れ又はなくなる動画像を生成することができる。
According to the present invention, the amount of lens distortion can be added to a moving image at the time of decoding, so that a moving image with less or no discomfort can be generated.

【0015】本発明による画像復号化装置は、符号化さ
れたパラメータ、背景用の画像及びレンズ歪量を復号化
する復号化手段と、復号化されたパラメータを用いて、
復号化された背景用の画像から動画像を取得する動画像
取得手段と、取得した動画像に復号化されたレンズ歪量
を付加するレンズ歪量付加手段とを具えることを特徴と
するものである。
An image decoding apparatus according to the present invention uses a decoding means for decoding an encoded parameter, a background image and an amount of lens distortion, and the decoded parameter.
A moving image acquiring unit for acquiring a moving image from a decoded background image; and a lens distortion adding unit for adding a decoded lens distortion amount to the acquired moving image. It is.

【0016】本発明によれば、復号化の際に動画像にレ
ンズ歪量を付加するので、違和感が軽減され又はなくな
る動画像を生成することができる。
According to the present invention, since the amount of lens distortion is added to a moving image at the time of decoding, it is possible to generate a moving image in which the sense of discomfort is reduced or eliminated.

【0017】本発明による画像処理方法は、動画像中の
背景用の画像を取得するためのパラメータを取得するパ
ラメータ取得ステップと、そのパラメータを用いて前記
背景用の画像を取得する静止画像取得ステップと、カメ
ラのレンズ歪量を検出するレンズ歪量検出ステップと、
前記パラメータ、背景用の画像及びレンズ歪量を符号化
する符号化ステップと、符号化されたパラメータ、背景
用の画像及びレンズ歪量を復号化する復号化ステップ
と、復号化されたパラメータを用いて、復号化された背
景用の画像から動画像を取得する動画像取得ステップ
と、取得した動画像に復号化されたレンズ歪量を付加す
るレンズ歪量付加ステップとを具えることを特徴とする
ものである。
An image processing method according to the present invention includes a parameter obtaining step of obtaining a parameter for obtaining a background image in a moving image, and a still image obtaining step of obtaining the background image using the parameter. And a lens distortion amount detecting step of detecting a lens distortion amount of the camera;
The coding step of coding the parameter, the background image and the amount of lens distortion, the coded parameter, the decoding step of decoding the background image and the amount of lens distortion, and using the decoded parameter. A moving image obtaining step of obtaining a moving image from the decoded background image, and a lens distortion amount adding step of adding a decoded lens distortion amount to the obtained moving image. Is what you do.

【0018】本発明によれば、復号化の際に動画像にレ
ンズ歪量を付加するので、違和感が軽減され又はなくな
る動画像を生成することができる。
According to the present invention, the amount of lens distortion is added to a moving image at the time of decoding, so that it is possible to generate a moving image in which the sense of discomfort is reduced or eliminated.

【0019】本発明による画像符号化方法は、動画像中
の背景用の画像を取得するためのパラメータを取得する
パラメータ取得ステップと、そのパラメータを用いて前
記背景用の画像を取得する静止画像取得ステップと、カ
メラのレンズ歪量を検出するレンズ歪量検出ステップ
と、前記パラメータ、背景用の画像及びレンズ歪量を符
号化する符号化ステップとを具えることを特徴とするも
のである。
An image encoding method according to the present invention includes a parameter acquiring step of acquiring a parameter for acquiring a background image in a moving image, and a still image acquiring step of acquiring the background image using the parameter. A step of detecting a lens distortion amount of the camera, and an encoding step of encoding the parameter, the background image and the lens distortion amount.

【0020】本発明によれば、復号化の際に動画像にレ
ンズ歪量を付加することができるので、違和感が軽減さ
れ又はなくなる動画像を生成することができる。
According to the present invention, the amount of lens distortion can be added to a moving image at the time of decoding, so that it is possible to generate a moving image in which the sense of discomfort is reduced or eliminated.

【0021】本発明による画像復号化方法は、符号化さ
れたパラメータ、背景用の画像及びレンズ歪量を復号化
する復号化ステップと、復号化されたパラメータを用い
て、復号化された背景用の画像から動画像を取得する動
画像取得ステップと、取得した動画像に復号化されたレ
ンズ歪量を付加するレンズ歪量付加ステップとを具える
ことを特徴とするものである。
An image decoding method according to the present invention comprises a decoding step of decoding an encoded parameter, a background image and an amount of lens distortion, and a decoded background image using the decoded parameters. And a lens distortion adding step of adding a decoded lens distortion amount to the obtained moving image.

【0022】本発明によれば、復号化の際に動画像にレ
ンズ歪量を付加するので、違和感が軽減され又はなくな
る動画像を生成することができる。
According to the present invention, since the amount of lens distortion is added to a moving image at the time of decoding, it is possible to generate a moving image in which a sense of discomfort is reduced or eliminated.

【0023】[0023]

【発明の実施の形態】本発明による画像処理装置及び方
法、画像符号化装置及び方法並びに画像復号化装置及び
方法の実施の形態を、図面を参照して詳細に説明する。
図1は、本発明による画像処理装置の実施の形態を示す
図である。この画像処理装置は、レンズ歪補正回路1
と、大画像生成回路2と、符号化回路3と、復号化回路
4と、動画像切り出し回路5と、レンズ歪付加回路6と
を具える。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Embodiments of an image processing apparatus and method, an image encoding apparatus and method, and an image decoding apparatus and method according to the present invention will be described in detail with reference to the drawings.
FIG. 1 is a diagram showing an embodiment of an image processing apparatus according to the present invention. This image processing apparatus includes a lens distortion correction circuit 1
, A large image generation circuit 2, an encoding circuit 3, a decoding circuit 4, a video clipping circuit 5, and a lens distortion adding circuit 6.

【0024】レンズ歪補正回路1は、動画像信号Aの各
フレーム画像に対し、カメラレンズの歪量信号Bを用い
て補正を行う。なお、レンズ歪とは、図2に示すよう
に、レンズ7によって矩形の物体8を撮影して場合に、
歪曲を有する像9a,9bが生じてしまう現象のことを
いう。像9a(図2A)のような糸巻き型の歪曲を正の
歪曲といい、像9b(図2B)のような樽型の歪曲を負
の歪曲という。
The lens distortion correction circuit 1 corrects each frame image of the moving image signal A using the distortion amount signal B of the camera lens. In addition, lens distortion means, as shown in FIG. 2, when a rectangular object 8 is photographed by a lens 7.
This is a phenomenon in which images 9a and 9b having distortion are generated. Pincushion-type distortion such as image 9a (FIG. 2A) is referred to as positive distortion, and barrel-type distortion such as image 9b (FIG. 2B) is referred to as negative distortion.

【0025】上記文献に記載されているように、レンズ
歪の補正を画面の座標に施すためのモデルが提案されて
おり、その手順を以下説明する。撮影されたレンズ歪を
有する画像の座標を(Xd,Yd)とし、レンズ歪を補
正した後の座標を(Xu,Yu)とすると、以下の関係
が成立する。
As described in the above document, a model for correcting the lens distortion to the coordinates of the screen has been proposed, and the procedure will be described below. Assuming that the coordinates of the captured image having the lens distortion are (Xd, Yd) and the coordinates after correcting the lens distortion are (Xu, Yu), the following relationship is established.

【0026】[0026]

【数1】 (Equation 1)

【0027】この場合、Dx,Dyは、レンズの半径方
向の歪であり、歪係数κ,κを用いて次のように表
される。
In this case, Dx and Dy are distortions in the radial direction of the lens, and are expressed as follows using the distortion coefficients κ 1 and κ 2 .

【0028】[0028]

【数2】 (Equation 2)

【0029】ただし、κを零とする場合が多い。補正
された座標に対応して、輝度及び色度信号値を周辺画素
からの内挿計算によって求め、レンズ歪補正動画像信号
Cが出力される。
However, κ 2 is often set to zero. In accordance with the corrected coordinates, the luminance and chromaticity signal values are obtained by interpolation calculation from peripheral pixels, and a lens distortion corrected moving image signal C is output.

【0030】大画像生成回路2では、レンズ歪補正動画
像信号Cの各フレーム画像を位置合わせを行いながら1
枚の画像に貼り合せる。貼り合わせ位置は、動画像信号
Aから推定され又は直接カメラの雲台等から計測された
カメラのパンやズームのようなカメラパラメータ信号D
が入力されることによって決定される。その結果、全て
のフレームに対して貼り合せた静止画像である背景用画
像信号Eが出力される。
The large image generation circuit 2 adjusts the position of each frame image of the lens distortion corrected moving image signal C while adjusting the position of each frame image.
Glue the images. The bonding position is estimated from the moving image signal A or directly measured from the camera platform or the like.
Is determined. As a result, a background image signal E, which is a still image attached to all frames, is output.

【0031】符号化回路3では、レンズ歪量信号B、カ
メラパラメータ信号D及び背景用画像信号Eが符号化さ
れ、デジタルデータ信号Fが生成される。復号化回路4
では、符号化されたデジタルデータ信号Fを復号化し
て、背景用画像復号化信号G、カメラパラメータ復号化
信号H及びレンズ歪量復号化信号Iを生成する。
The encoding circuit 3 encodes the lens distortion amount signal B, the camera parameter signal D, and the background image signal E, and generates a digital data signal F. Decoding circuit 4
Then, the encoded digital data signal F is decoded to generate a decoded image signal G for background, a decoded camera parameter signal H, and a decoded lens distortion amount signal I.

【0032】動画像切り出し回路5では、カメラパラメ
ータ復号化信号Iを用いて、復号化された背景用画像復
号化信号Gから、画像生成回路2で行われた手順と逆の
手順で各フレーム画像を切り出し、動画像復号化信号J
を生成する。
In the video clipping circuit 5, each frame image is decoded from the decoded background image decoded signal G using the camera parameter decoded signal I in a procedure reverse to that performed by the image generation circuit 2. And the decoded video signal J
Generate

【0033】レンズ歪付加回路6では、動画像復号化信
号Jに対して、レンズ歪復号化信号Jを用いて、レンズ
歪補正回路1で行われた手順と逆の手順で動画像の各フ
レーム画像にレンズ歪を付加し、すなわち、レンズ歪逆
補正を行い、動画像信号Kを生成する。
The lens distortion adding circuit 6 uses the lens distortion decoded signal J for each frame of the moving image in a procedure reverse to the procedure performed by the lens distortion correction circuit 1 for the decoded moving image signal J. A lens distortion is added to the image, that is, a lens distortion reverse correction is performed to generate a moving image signal K.

【0034】本実施の形態によれば、復号化の際にレン
ズ歪値の逆補正を考慮しているので、違和感が軽減し又
はなくなる前景用画像との合成画像を取得することがで
きる。
According to the present embodiment, since the inverse correction of the lens distortion value is taken into account at the time of decoding, it is possible to obtain a composite image with the foreground image in which the discomfort is reduced or eliminated.

【0035】本発明は、上記実施の形態に限定されるも
のではなく、幾多の変更及び変形が可能である。例え
ば、上記実施の形態では動画像について説明したがレン
ズ歪補正回路1においてレンズ歪の補正を画面の座標に
施す際に、他の方法を用いることができる。
The present invention is not limited to the above-described embodiment, and many modifications and variations are possible. For example, in the above-described embodiment, a moving image has been described. However, when the lens distortion correction is performed on the screen coordinates in the lens distortion correction circuit 1, another method can be used.

【図面の簡単な説明】[Brief description of the drawings]

【図1】 本発明による画像処理装置の実施の形態を示
す図である。
FIG. 1 is a diagram showing an embodiment of an image processing apparatus according to the present invention.

【図2】 レンズ歪を説明するための図である。FIG. 2 is a diagram for explaining lens distortion.

【符号の説明】[Explanation of symbols]

1 レンズ歪補正回路 2 大画像生成回路 3 符号化回路 4 復号化回路 5 動画像切り出し回路 6 レンズ歪付加回路 7 レンズ 8 物体 9a,9b 像 A,K 動画像信号 B 歪量信号 C レンズ歪補正動画像信号 D カメラパラメータ信号 E 背景用画像信号 F デジタルデータ信号 G 背景用画像復号化信号 H カメラパラメータ復号化信号 I レンズ歪量復号化信号 J 動画像復号化信号 DESCRIPTION OF SYMBOLS 1 Lens distortion correction circuit 2 Large image generation circuit 3 Encoding circuit 4 Decoding circuit 5 Video clipping circuit 6 Lens distortion addition circuit 7 Lens 8 Object 9a, 9b Image A, K Video signal B Distortion amount signal C Lens distortion correction Moving image signal D Camera parameter signal E Background image signal F Digital data signal G Background image decoding signal H Camera parameter decoding signal I Lens distortion amount decoding signal J Moving image decoding signal

───────────────────────────────────────────────────── フロントページの続き (72)発明者 鹿喰 善明 東京都世田谷区砧1丁目10番11号 日本放 送協会 放送技術研究所内 Fターム(参考) 5C022 AB68 AC00 AC54 5C059 LA02 MA00 MB14 MB16 PP01 PP04 PP19 PP28 PP29 RC00 UA02 UA05  ────────────────────────────────────────────────── ─── Continuation of the front page (72) Inventor Yoshiaki Kakuro 1-10-11 Kinuta, Setagaya-ku, Tokyo Japan Broadcasting Corporation Broadcasting Research Institute F-term (reference) 5C022 AB68 AC00 AC54 5C059 LA02 MA00 MB14 MB16 PP01 PP04 PP19 PP28 PP29 RC00 UA02 UA05

Claims (6)

【特許請求の範囲】[Claims] 【請求項1】 動画像中の背景用の画像を取得するため
のパラメータを取得するパラメータ取得手段と、 そのパラメータを用いて前記背景用の画像を取得する静
止画像取得手段と、 カメラのレンズ歪量を検出するレンズ歪量検出手段と、 前記パラメータ、背景用の画像及びレンズ歪量を符号化
する符号化手段と、 符号化されたパラメータ、背景用の画像及びレンズ歪量
を復号化する復号化手段と、 復号化されたパラメータを用いて、復号化された背景用
の画像から動画像を取得する動画像取得手段と、 取得した動画像に復号化されたレンズ歪量を付加するレ
ンズ歪量付加手段とを具えることを特徴とする画像処理
装置。
A parameter acquisition unit for acquiring a parameter for acquiring a background image in a moving image; a still image acquisition unit for acquiring the background image using the parameter; and a lens distortion of a camera. Lens distortion amount detecting means for detecting the amount; encoding means for encoding the parameter, background image and lens distortion amount; decoding for decoding the encoded parameter, background image and lens distortion amount Moving image acquiring means for acquiring a moving image from a decoded background image using the decoded parameters, and lens distortion for adding a decoded lens distortion amount to the acquired moving image. An image processing apparatus comprising: an amount adding unit.
【請求項2】 動画像中の背景用の画像を取得するため
のパラメータを取得するパラメータ取得手段と、 そのパラメータを用いて前記背景用の画像を取得する静
止画像取得手段と、 カメラのレンズ歪量を検出するレンズ歪量検出手段と、 前記パラメータ、背景用の画像及びレンズ歪量を符号化
する符号化手段とを具えることを特徴とする画像符号化
装置。
2. A parameter acquisition unit for acquiring a parameter for acquiring a background image in a moving image, a still image acquisition unit for acquiring the background image using the parameter, and a lens distortion of a camera. An image encoding apparatus comprising: a lens distortion amount detecting unit that detects an amount; and an encoding unit that encodes the parameter, the background image, and the lens distortion amount.
【請求項3】 符号化されたパラメータ、背景用の画像
及びレンズ歪量を復号化する復号化手段と、 復号化されたパラメータを用いて、復号化された背景用
の画像から動画像を取得する動画像取得手段と、 取得した動画像に復号化されたレンズ歪量を付加するレ
ンズ歪量付加手段とを具えることを特徴とする画像復号
化装置。
3. A decoding means for decoding an encoded parameter, a background image and an amount of lens distortion, and a moving image is obtained from the decoded background image using the decoded parameter. An image decoding apparatus, comprising: a moving image acquisition unit that performs decoding; and a lens distortion amount adding unit that adds a decoded lens distortion amount to the acquired moving image.
【請求項4】 動画像中の背景用の画像を取得するため
のパラメータを取得するパラメータ取得ステップと、 そのパラメータを用いて前記背景用の画像を取得する静
止画像取得ステップと、 カメラのレンズ歪量を検出するレンズ歪量検出ステップ
と、 前記パラメータ、背景用の画像及びレンズ歪量を符号化
する符号化ステップと、 符号化されたパラメータ、背景用の画像及びレンズ歪量
を復号化する復号化ステップと、 復号化されたパラメータを用いて、復号化された背景用
の画像から動画像を取得する動画像取得ステップと、 取得した動画像に復号化されたレンズ歪量を付加するレ
ンズ歪量付加ステップとを具えることを特徴とする画像
処理方法。
4. A parameter acquiring step for acquiring a parameter for acquiring a background image in a moving image; a still image acquiring step for acquiring the background image using the parameter; A lens distortion amount detecting step of detecting an amount; an encoding step of encoding the parameter, the background image and the lens distortion amount; and a decoding of decoding the encoded parameter, the background image and the lens distortion amount. A moving image obtaining step of obtaining a moving image from a decoded background image using the decoded parameters, and a lens distortion adding a decoded lens distortion amount to the obtained moving image. An image processing method, comprising an amount adding step.
【請求項5】 動画像中の背景用の画像を取得するため
のパラメータを取得するパラメータ取得ステップと、 そのパラメータを用いて前記背景用の画像を取得する静
止画像取得ステップと、 カメラのレンズ歪量を検出するレンズ歪量検出ステップ
と、 前記パラメータ、背景用の画像及びレンズ歪量を符号化
する符号化ステップとを具えることを特徴とする画像符
号化方法。
5. A parameter acquiring step for acquiring a parameter for acquiring a background image in a moving image, a still image acquiring step for acquiring the background image using the parameter, a lens distortion of the camera. An image encoding method, comprising: a lens distortion amount detecting step of detecting an amount; and an encoding step of encoding the parameter, the background image, and the lens distortion amount.
【請求項6】 符号化されたパラメータ、背景用の画像
及びレンズ歪量を復号化する復号化ステップと、 復号化されたパラメータを用いて、復号化された背景用
の画像から動画像を取得する動画像取得ステップと、 取得した動画像に復号化されたレンズ歪量を付加するレ
ンズ歪量付加ステップとを具えることを特徴とする画像
復号化方法。
6. A decoding step of decoding an encoded parameter, a background image and an amount of lens distortion, and obtaining a moving image from the decoded background image using the decoded parameter. An image decoding method, comprising: a moving image acquisition step of performing a moving image acquisition step; and a lens distortion amount adding step of adding a decoded lens distortion amount to the acquired moving image.
JP2000203335A 2000-03-21 2000-07-05 Decryption device Expired - Fee Related JP3648135B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2000203335A JP3648135B2 (en) 2000-07-05 2000-07-05 Decryption device
US09/811,923 US6771823B2 (en) 2000-03-21 2001-03-19 Coding and decoding of moving pictures based on sprite coding

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000203335A JP3648135B2 (en) 2000-07-05 2000-07-05 Decryption device

Publications (3)

Publication Number Publication Date
JP2002027460A true JP2002027460A (en) 2002-01-25
JP2002027460A5 JP2002027460A5 (en) 2005-03-03
JP3648135B2 JP3648135B2 (en) 2005-05-18

Family

ID=18700756

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000203335A Expired - Fee Related JP3648135B2 (en) 2000-03-21 2000-07-05 Decryption device

Country Status (1)

Country Link
JP (1) JP3648135B2 (en)

Also Published As

Publication number Publication date
JP3648135B2 (en) 2005-05-18

Similar Documents

Publication Publication Date Title
US8179446B2 (en) Video stabilization and reduction of rolling shutter distortion
JP5413002B2 (en) Imaging apparatus and method, and program
TW200913674A (en) Video camera
JPH10150663A (en) Method and device for minimizing blocking effect
JP2011239195A (en) Electronic apparatus
JP4217041B2 (en) Filtering
JP2008258848A (en) Noise reduction device, noise reduction method, and electronic equipment
JP2009141769A (en) Image processing apparatus
US8718376B2 (en) Apparatus and method for enhancing image in portable terminal
JPH08251422A (en) Block distortion correction device and image signal expander
US6771823B2 (en) Coding and decoding of moving pictures based on sprite coding
JPH06105241A (en) Picture element defect correction method
JP3955910B2 (en) Image signal processing method
JP2007214887A (en) Digital still camera and image composition method
US20050088531A1 (en) Automatic stabilization control apparatus, automatic stabilization control method, and computer readable recording medium having automatic stabilization control program recorded thereon
JP3648135B2 (en) Decryption device
JPH1117984A (en) Image processor
JP2006203365A (en) Video signal encoding device and video signal encoding method
JP2844619B2 (en) Digital filter for image signal
JP2001016591A (en) Compression encoder and compression encoding method
JP4942596B2 (en) Image processing apparatus, imaging apparatus, and display apparatus
JP3648121B2 (en) Decoding method and decoding apparatus
JPH0767107A (en) Image encoder
JPS6146684A (en) System and device for inter-frame encoding/decoding
JPH0787493A (en) Frame interpolation method

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040331

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20040331

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20040416

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040706

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040906

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20041116

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20041119

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20050118

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20050210

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 3648135

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090218

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100218

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110218

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120218

Year of fee payment: 7

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130218

Year of fee payment: 8

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140218

Year of fee payment: 9

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees