JPH09218954A - Image generating method - Google Patents
Image generating methodInfo
- Publication number
- JPH09218954A JPH09218954A JP8026339A JP2633996A JPH09218954A JP H09218954 A JPH09218954 A JP H09218954A JP 8026339 A JP8026339 A JP 8026339A JP 2633996 A JP2633996 A JP 2633996A JP H09218954 A JPH09218954 A JP H09218954A
- Authority
- JP
- Japan
- Prior art keywords
- image
- area
- images
- minute
- captured
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】本発明は、複数の異なる位置
から撮像された画像データをもとに、任意位置から見た
画像を高画質に生成する仮想カメラ技術に関するもので
ある。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a virtual camera technology for generating an image viewed from an arbitrary position with high image quality based on image data taken from a plurality of different positions.
【０００２】[0002]
【従来の技術】従来の任意位置から見た画像の画像生成
法は、複数の撮像装置で撮像された画像から被写体の３
次元位置を計測し、各撮像画像中の被写体像を張り合わ
せることによる方法であった。2. Description of the Related Art A conventional image generation method for an image viewed from an arbitrary position is a method of extracting a subject image from images picked up by a plurality of image pickup devices.
This is a method in which the dimensional position is measured and the subject images in the captured images are attached to each other.
【０００３】例えば、複数の撮像画像から被写体画像を
生成する方法については、参考文献「２次元形状データ
の張り合わせによる距離画像の統合」（脇迫仁、鎌田清
一郎、河口英二、電子情報通信学会論文誌 Ｄ−ＩＩ，
Ｖｏｌ．Ｊ７８−Ｄ−ＩＩ，Ｎｏ．５，ｐｐ．７２７−
７３６，１９９５）に記載されている。ここで記憶され
ている手法は、撮像装置、あるいは被写体を回転させ、
被写体の影になっている、すなわち情報が欠落している
オクルージョンと呼ばれる領域がないように画像を撮像
して統合を行なっている。For example, for a method of generating a subject image from a plurality of picked-up images, refer to "Integration of distance images by stitching two-dimensional shape data" (Hitoshi Wakisako, Seiichiro Kamata, Eiji Kawaguchi, The Institute of Electronics, Information and Communication Engineers). Magazine D-II,
Vol. J78-D-II, No. 5, pp. 727-
736, 1995). The method stored here is to rotate the imaging device or the subject,
The image is captured and integrated so that there is no region called occlusion in which the shadow of the subject is present, that is, information is missing.
【０００４】[0004]
【発明が解決しようとする課題】しかしながら、上記従
来の複数の撮像画像から被写体画像を生成する方法で
は、オクルージョンのない画像を用いて画像を統合する
ことはできるが、オクルージョンのない撮像画像の中か
ら、必ずしも解像度の高い撮像画像が選択されるとは限
らないため、統合された画像を高画質にすることはでき
なかった。However, in the above-described conventional method for generating a subject image from a plurality of picked-up images, it is possible to integrate the images by using images without occlusion, but among the picked-up images without occlusion. Therefore, it is not always possible to select a high-resolution captured image, so that the integrated image cannot be rendered high in quality.
【０００５】すなわち、従来の任意位置の画像生成法で
は、複数の撮像画像のうちの１つの画像を用いて射影変
換して画像を生成しているため、被写体に対して遠い位
置において撮像した画像や、被写体のある面に対して斜
め方向から撮像した画像など、射影変換に用いる画像が
必ずしも被写体を画質良く撮像したものとは言えなかっ
た。That is, in the conventional image generation method at an arbitrary position, one image of a plurality of picked-up images is used for projective conversion to generate an image, so that an image picked up at a position far from the subject is taken. Also, it cannot be said that the image used for the projective transformation is not necessarily the image of the subject with good image quality, such as the image captured from the direction oblique to the surface on which the subject is present.
【０００６】そのため、被写体の任意位置画像を生成し
ようとする場合に、低画質に撮像した画像が用いられた
場合には、低解像度画像が生成されることになる。特に
複数画像を撮像する場合よりも被写体に近づいた点を任
意位置とする場合には、被写体が大きく見えるようにな
るにも関わらず、小さい撮像画像を用いなければならな
いため、低解像度にしか被写体像を生成することができ
ず、画像が劣化することになる。Therefore, when an image of an arbitrary position of a subject is to be generated and a low-quality image is used, a low resolution image is generated. In particular, when a point closer to the subject is set as an arbitrary position than when capturing a plurality of images, a small captured image must be used even though the subject looks large, so that the subject can be used only at a low resolution. The image cannot be generated and the image deteriorates.
【０００７】本発明は、このような従来技術の問題点を
解決するためになされたものであり、その目的は、異な
る位置から撮像した複数画像を用いて、任意位置から見
た画像を高画質に生成する画像生成方法を提供すること
にある。The present invention has been made in order to solve the above-mentioned problems of the prior art, and an object thereof is to use a plurality of images picked up from different positions to obtain a high quality image viewed from an arbitrary position. It is to provide an image generation method for generating the image.
【０００８】[0008]
【課題を解決するための手段】上記の目的を達成するた
め、本発明は、異なる位置から撮像した複数の画像を用
いて任意位置から見た画像を生成する画像生成方法にお
いて、まず、被写体の各微小領域ごとに、各撮像画像か
ら該微小領域に対応する微小領域画像を検出し、次に、
前記各撮像画像ごとに検出された微小領域画像の画質を
１つまたは複数の要因で評価して、評価が最高の微小領
域画像を選択し、次に、前記選択した微小領域画像を用
いて任意位置から見た画像を生成することを特徴とす
る。In order to achieve the above object, the present invention provides an image generating method for generating an image viewed from an arbitrary position using a plurality of images captured from different positions. For each micro area, a micro area image corresponding to the micro area is detected from each captured image, and then,
The image quality of the micro region image detected for each of the captured images is evaluated by one or more factors, the micro region image with the highest evaluation is selected, and then the selected micro region image is arbitrarily used. It is characterized by generating an image viewed from the position.
【０００９】上記の画像生成方法において、微小領域画
像を選択する過程では、画質を評価する要因として解像
度を選び、各撮像画像中の各微小領域画像の面積を求
め、解像度が最高になるように面積が最大となる微小領
域画像を選択するか、あるいは、微小領域画像を選択す
る過程では、画質を評価する要因として、情報欠落の有
無を選び、各撮像画像中の各微小領域画像の情報欠落の
有無を求め、情報が欠落していない微小領域画像を選択
するのが、撮像画像中の微小領域の選択処理を高速化、
簡略化できる点で好適である。In the above-mentioned image generation method, in the process of selecting a minute area image, the resolution is selected as a factor for evaluating the image quality, the area of each minute area image in each captured image is obtained, and the resolution is maximized. In the process of selecting the micro area image that maximizes the area, or in the process of selecting the micro area image, the presence or absence of information is selected as a factor for evaluating the image quality, and the information loss of each micro area image in each captured image is selected. It is to speed up the selection process of the micro area in the captured image by determining the presence or absence of
It is preferable because it can be simplified.
【００１０】このように本発明は、複数の撮像画像を用
いて、分割した被写体の微小領域を任意位置において撮
像したものと等価な画像に変換して生成する場合に、微
小領域Ｉjの画質が最も良くなるように解像度、情報欠
落の有無等の複数の要因ｘiをパラメータとしｗiを重み
係数とする評価関数ｆIj（ｗ1ｘ1，ｗ2ｘ2，…，ｗ
nｘn）を用い、最適な撮像画像の微小領域Ｉjを選択し
て画像生成する。As described above, according to the present invention, when a plurality of picked-up images are used and converted into an image equivalent to that obtained by picking up a minute area of a divided subject at an arbitrary position, the image quality of the minute area I j is generated. So as to be the best, an evaluation function f Ij (w 1 x 1 , w 2 x 2 , ..., W) having a plurality of factors x i such as resolution and the presence or absence of information loss as parameters and w i as a weighting coefficient
n x n ) is used to select an optimum minute region I j of the captured image to generate an image.
【００１１】本発明では、被写体の各微小領域ごとに、
各撮像画像から該微小領域に対応する領域を検出し、前
記各撮像画像ごとに検出された微小領域画像の画質を複
数の要因で評価し、評価が最高の微小領域画像を選択す
ることにより、微小領域単位に選択された常に最高の画
質の領域画像を用いて、より高画質な任意位置から見た
画像を生成可能とする。In the present invention, for each minute area of the subject,
By detecting a region corresponding to the micro region from each captured image, evaluating the image quality of the micro region image detected for each captured image by a plurality of factors, and selecting the micro region image with the highest evaluation, It is possible to generate an image viewed from an arbitrary position with higher image quality by using the area image of the highest image quality selected for each minute area unit.
【００１２】[0012]
【発明の実施の形態】以下、本発明の実施の形態を、図
を用いて詳細に説明する。Embodiments of the present invention will be described below in detail with reference to the drawings.
【００１３】〔実施形態例１〕まず、本発明の第１の実
施形態例を説明する。図１は、本発明の実施形態例を示
すフローチャートである。図２は、本発明の実施形態例
における被写体１０、画像生成対象の被写体微小領域１
１、画像を撮像する撮像装置２０〜２４、任意位置カメ
ラ３０の配置図である。図３は、本発明の実施形態例の
撮像装置２２〜２４による撮像画像４２〜４４、任意位
置から見たカメラ３０による撮像画像５０の説明図であ
る。[Embodiment 1] First, a first embodiment of the present invention will be described. FIG. 1 is a flowchart showing an exemplary embodiment of the present invention. FIG. 2 shows a subject 10 and a subject minute region 1 as an image generation target in the embodiment of the present invention.
1 is a layout diagram of image pickup devices 20 to 24 that pick up an image and an arbitrary position camera 30. FIG. 3 is an explanatory diagram of images 42 to 44 captured by the image capturing devices 22 to 24 according to the embodiment of the present invention and an image 50 captured by the camera 30 viewed from an arbitrary position.
【００１４】本実施形態例による任意位置から見た画像
の生成方法を、図１、図２および図３を用いて説明す
る。被写体１０を複数の、この場合例えば撮像装置２０
〜２４を用いて異なる位置から撮像し、任意位置から見
たカメラ３０で撮像した画像を生成するものとする。被
写体１０の被写体微小領域１１を任意位置から見た画像
として生成するには、撮像装置２２〜２４で撮像された
画像４２〜４４の被写体微小領域１１を用いて、射影変
換により求める手法を用いる。A method of generating an image viewed from an arbitrary position according to this embodiment will be described with reference to FIGS. 1, 2 and 3. A plurality of subjects 10 are provided, in this case, for example, the imaging device 20.
It is assumed that images are picked up from different positions using Nos. 24 to 24 and an image picked up by the camera 30 viewed from an arbitrary position is generated. In order to generate the subject minute area 11 of the subject 10 as an image viewed from an arbitrary position, a method of obtaining the subject minute area 11 of the images 42 to 44 imaged by the imaging devices 22 to 24 by projective transformation is used.
【００１５】このとき、撮像画像４２〜４４のうち被写
体微小領域１１を最も画質良く撮像している画像Ｉｊ
を、解像度、情報欠落の有無等の複数の要因ｘi（ｉ＝
１〜ｎ）をパラメータとしｗi（ｉ＝１〜ｎ）を重み係
数とする評価関数ｆIj（ｗ1ｘ1，ｗ2ｘ2，…，ｗnｘn）
において画質を決定する複数の要因ｘiの評価項目によ
って決定する。これにより、被写体微小領域毎に撮像画
像４２〜４４中で最も高画質な撮像画像を求め、これら
の画像を射影変換することにより高解像度の任意位置か
ら見た画像５０を生成することができる。At this time, the image Ij which is the highest quality image of the subject minute region 11 among the picked-up images 42 to 44.
To a plurality of factors x i (i =
1-n) as a parameter and w i (i = 1-n) as a weighting coefficient f Ij (w 1 x 1 , w 2 x 2 , ..., W n x n )
In the above, it is determined by the evaluation items of a plurality of factors x i that determine the image quality. As a result, it is possible to obtain the image having the highest image quality among the imaged images 42 to 44 for each micro area of the subject, and perform projective conversion of these images to generate the image 50 viewed from an arbitrary position with high resolution.
【００１６】具体的には、ｘ1を解像度を決定する面積
Ｓとし、ｘ2を情報欠落の有無を表すパラメータとして
ｘ2＝１の時の情報が欠落していない場合、ｘ2＝０を情
報が欠落している場合とし、ｘ2は０から１の間を連続
的に変化する値を取るものとする。またｘ3はコントラ
ストを表し、微小領域の輝度の最大と最小のピーク値の
差Ｄをｘ3＝Ｄとし、以下ｘ4からｘnまで他の画質を決
定する要因とする。Specifically, x 1 is the area S for determining the resolution, and x 2 is a parameter indicating the presence or absence of information loss, and when there is no information loss when x 2 = 1, x 2 = 0 is set. It is assumed that information is missing, and x 2 has a value that continuously changes from 0 to 1. Further, x 3 represents a contrast, and the difference D between the maximum and minimum peak values of the luminance of the minute area is set as x 3 = D, and is a factor for determining other image quality from x 4 to x n below.
【００１７】このとき評価関数ｆIj（ｗ1ｘ1，ｗ2ｘ2，
…，ｗnｘn）は、 ｆIj（ｗ1ｘ1，ｗ2ｘ2，…，ｗnｘn）＝ｗ1Ｓ＋ｗ2ｘ2
＋ｗ3Ｄ＋…ｗnｘn と表せる。この式を用いて、各撮像画像の微小領域毎に
評価値を求め、評価値が最高の微小領域画像を決定す
る。At this time, the evaluation function f Ij (w 1 x 1 , w 2 x 2 ,
,, w n x n ) is f Ij (w 1 x 1 , w 2 x 2 , ..., W n x n ) = w 1 S + w 2 x 2
+ W 3 D + ... expressed as w n x n. Using this formula, an evaluation value is obtained for each micro area of each captured image, and the micro area image with the highest evaluation value is determined.
【００１８】ここで、評価関数による最適画像の決定
は、図４に示すフローチャートにしたがって行なうこと
もできる。すなわち、まず始めに、面積Ｓが最大（解像
度が最大）の撮像画像を選択する。次に、情報欠落の有
無を判定し、有の場合には上記最大のものの次に面積Ｓ
が最大の撮像面積を選択し、情報欠落が無いものとなる
まで上記の判定と撮像画像の選別を繰り返す。さらに、
他の画質の決定要因がある場合は、その要因による評価
の判定を行い、判定が良のものとなるまで、以上の判定
と撮像画像の選別を繰り返す。Here, the optimum image can be determined by the evaluation function according to the flow chart shown in FIG. That is, first, the captured image having the largest area S (the highest resolution) is selected. Next, it is determined whether or not there is information loss. If yes, then the area S
Selects the maximum image pickup area and repeats the above determination and picked-up image selection until there is no information loss. further,
If there is another determinant factor for image quality, the evaluation is determined based on that factor, and the above determination and picked-up image selection are repeated until the determination is good.
【００１９】以上のようにして、これら画質を決定する
ｘ1，ｘ2，…，ｘnの複数の要因から、解像度、情報欠
落の有無、コントラスト等総合的に評価を行ない、高画
質な微小領域画像を選択する。[0019] Thus, x 1, x 2 to determine these quality, ..., performed from a plurality of sources of x n, resolution, presence or absence of information loss, the overall rating such as contrast, high-quality fine Select a region image.
【００２０】このように最高の画質として選択された微
小領域画像を、射影変換等により任意視点から見た画像
に変換し、これをすべての被写体の微小領域に対応した
微小領域画像について繰り返せば、高画質な任意視点か
ら見た画像５０を生成することができる。The minute area image thus selected as the highest image quality is converted into an image viewed from an arbitrary viewpoint by projective transformation or the like, and this is repeated for the minute area images corresponding to the minute areas of all objects. The image 50 viewed from an arbitrary viewpoint with high image quality can be generated.
【００２１】なお、図１の実施形態例では、一つの微小
画像領域を選択する毎にその微小領域画像を任意視点か
ら見た画像へ変換しているが、被写体の全ての微小領域
に対応した微小画像領域を全て選択した後で、選択され
た全微小画像領域を一度に射影変換等により任意視点か
ら見た画像に変換してもよい。このことは、以下に示す
実施形態例でも同様である。In the embodiment shown in FIG. 1, each time one minute image area is selected, the minute area image is converted into an image viewed from an arbitrary viewpoint, but it corresponds to all minute areas of the subject. After selecting all the minute image areas, all the selected minute image areas may be converted into an image viewed from an arbitrary viewpoint by projective conversion or the like at once. This also applies to the embodiments described below.
【００２２】〔実施形態例２〕次に、本発明の第２の実
施形態例を示す。本実施形態例における画像生成方法の
手順は、基本的には図１のフローチャートと同様であ
る。だだし、画質の評価のし方を第１の実施形態例より
も簡略化している。[Second Embodiment] Next, a second embodiment of the present invention will be described. The procedure of the image generation method in the present embodiment example is basically the same as the flowchart in FIG. However, the method of evaluating the image quality is simplified as compared with the first embodiment.
【００２３】上記第１の実施形態例では評価関数を画質
を決定する複数の要因の関数としたが、本実施形態例で
は、評価関数ｆIj（ｗ1ｘ1，ｗ2ｘ2，…，ｗnｘn）にお
ける評価関数の複数の要因のうち、解像度を要因として
選び、解像度を各撮像画像中の各微小領域の面積で決定
されるものとし、要因を面積ｘ1として求め、該微小領
域の解像度が最も高解像度になるように、面積が最も大
きくなる撮像画像を選択する。In the above first embodiment, the evaluation function is a function of a plurality of factors that determine the image quality, but in this embodiment, the evaluation function f Ij (w 1 x 1 , w 2 x 2 , ..., among a plurality of factors of the evaluation function in w n x n), select the resolution as a factor, the resolution shall be determined by the area of each minute region in the captured image, it obtains a factor as an area x 1, fine small The picked-up image having the largest area is selected so that the resolution of the region becomes the highest.
【００２４】本実施形態例によれば、撮像画像中の微小
領域の面積のみ比較されて求められるため、最適画像を
選択する判定手順を高速化・簡略化することができる。
このように選択した撮像画像を用いて任意位置から見た
画像を生成すれば、より高解像度な任意位置画像を生成
することができる。According to this embodiment, only the areas of the minute regions in the picked-up image are compared and obtained, so that the decision procedure for selecting the optimum image can be speeded up and simplified.
If an image viewed from an arbitrary position is generated using the picked-up image selected in this way, a higher resolution arbitrary position image can be generated.
【００２５】〔実施形態例３〕さらに、本発明の第３の
実施形態例を示す。本実施形態例における画像生成方法
の手順も、基本的には図１のフローチャートと同様であ
るが、第２の実施形態例とは異なる評価のし方で、画質
の評価の手順を簡略化している。[Embodiment 3] Further, a third embodiment of the present invention will be described. The procedure of the image generation method in the present embodiment is basically the same as that in the flowchart of FIG. 1, but an evaluation method different from that in the second embodiment is used to simplify the procedure of image quality evaluation. There is.
【００２６】上記第１、第２の実施形態例では、評価関
数を画質を決定する複数の要因の関数、あるいは解像度
のみを要因とした関数を用いて高画質な画像の微小領域
を選択するとしたが、本実施形態例では、評価関数ｆIj
（ｗ1ｘ1，ｗ2ｘ2，…，ｗnxn）における評価関数の複
数の要因のうち、情報欠落の有無を要因として選び、各
撮像画像中の各微小領域の中で占める、被写体物の重な
りによって生じるオクルージョン、すなわち情報欠落の
有無を求める。求めた情報欠落の有無により、情報が最
も欠落してない微小領域画像を選択する。In the first and second embodiments described above, the evaluation function is selected from a plurality of factors that determine the image quality, or a function in which only the resolution is a factor is used to select a minute area of a high quality image. However, in the present embodiment example, the evaluation function f Ij
Among a plurality of factors of the evaluation function in (w 1 x 1 , w 2 x 2 , ..., W n x n ), the presence or absence of information loss is selected as a factor and occupied in each minute area in each captured image, Occlusion caused by overlapping of objects, that is, the presence or absence of information loss is determined. A micro-region image having the least information is selected according to the calculated presence or absence of information loss.
【００２７】本実施形態例によれば、撮像画像中の微小
領域の情報欠落の有無のみで比較されて求められるた
め、最適画像を選択する判定手順を高速化・簡略化する
ことができる。このように選択した撮像画像を用いて任
意位置から見た画像を生成すれば、オクルージョン、す
なわち情報が欠落していない任意位置画像を生成するこ
とができる。According to the present embodiment, the determination procedure for selecting the optimum image can be speeded up and simplified because the determination is made based only on the presence / absence of information loss in a minute area in the captured image. If an image viewed from an arbitrary position is generated using the picked-up image thus selected, it is possible to generate an occlusion, that is, an arbitrary position image in which information is not missing.
【００２８】以上では本発明の３つの実施形態例を述べ
たが、本発明の精神を逸脱することなく種々の変更が可
能なことは言うまでもない。上記第２の実施形態例で
は、評価関数のパラメータを解像度を表す微小領域の面
積としたが、面積以外にも第１の実施形態例で述べたよ
うに情報欠落の有無、コントラスト、色調等を要因とし
て適宜組み合わせて微小領域を評価し、最適な撮像画像
を選択すれば、選択した撮像画像から任意位置画像を生
成することにより、任意位置から見た高画質な画像を生
成することができる。Although three embodiments of the present invention have been described above, it goes without saying that various modifications can be made without departing from the spirit of the present invention. In the second embodiment described above, the parameter of the evaluation function is the area of the minute region that represents the resolution. However, in addition to the area, the presence or absence of information loss, contrast, color tone, etc., as described in the first embodiment, are used. By appropriately combining as factors, evaluating a micro area and selecting the most suitable captured image, an image at an arbitrary position can be generated from the selected captured image, so that a high-quality image viewed from an arbitrary position can be generated.
【００２９】[0029]
【発明の効果】以上説明したように、本発明によれば、
複数の撮像画像を用いて、分割した被写体の微小領域を
任意位置において撮像したものと等価な画像に変換して
生成する場合に、被写体の各微小領域ごとに、各撮像画
像から該微小領域に対応する領域を検出し、前記各撮像
画像ごとに検出された微小領域画像の画質を複数の要因
で評価し、評価が最高の微小領域画像を選択するように
したので、選択した撮像画像を用いて高画質な任意位置
から見た画像を生成することが可能である。この新しい
方法により、従来には見ることのできなかった高画質な
任意の位置から見た画像を見ることができる。As described above, according to the present invention,
In the case where a plurality of captured images are used to generate a divided minute area of a subject by converting it into an image equivalent to that captured at an arbitrary position, for each minute area of the subject, each captured image is converted into the minute area. The corresponding region is detected, the image quality of the micro region image detected for each of the captured images is evaluated by a plurality of factors, and the micro region image with the highest evaluation is selected. Therefore, the selected captured image is used. It is possible to generate an image viewed from an arbitrary position with high image quality. With this new method, it is possible to see an image viewed from an arbitrary position with high image quality that could not be seen in the past.
【図１】本発明の実施形態例を示すフローチャートであ
る。FIG. 1 is a flowchart showing an exemplary embodiment of the present invention.
【図２】本発明の実施形態例を説明するための配置図で
ある。FIG. 2 is a layout diagram for explaining an exemplary embodiment of the present invention.
【図３】本発明の実施形態例における撮像画像の説明図
である。FIG. 3 is an explanatory diagram of a captured image according to the embodiment of the present invention.
【図４】本発明の第１の実施形態例における微小画像領
域の決定手順の一例を示すフローチャートである。FIG. 4 is a flowchart showing an example of a procedure for determining a minute image area according to the first embodiment of the present invention.
１０…被写体 １１…画像生成対象の被写体の微小領域 ２０〜２４…撮像装置 ３０…任意位置カメラ ４２〜４４…撮像装置２２〜２４による撮像画像 ５０…任意位置カメラ３０による撮像画像 DESCRIPTION OF SYMBOLS 10 ... Subject 11 ... Micro area of the subject of image generation 20-24 ... Imaging device 30 ... Arbitrary position camera 42-44 ... Imaging image by imaging device 22-24 50 ... Image captured by arbitrary position camera 30
Claims (3)
いて任意位置から見た画像を生成する画像生成方法にお
いて、 まず、被写体の各微小領域ごとに、各撮像画像から該微
小領域に対応する微小領域画像を検出し、 次に、前記各撮像画像ごとに検出された微小領域画像の
画質を１つまたは複数の要因で評価して、評価が最高の
微小領域画像を選択し、 次に、前記選択した微小領域画像を用いて任意位置から
見た画像を生成することを特徴とする画像生成方法。1. An image generating method for generating an image viewed from an arbitrary position by using a plurality of images captured from different positions. First, for each minute region of a subject, corresponding to the minute region from each captured image. The micro area image is detected, the image quality of the micro area image detected for each of the captured images is evaluated by one or more factors, and the micro area image with the highest evaluation is selected. An image generation method characterized in that an image viewed from an arbitrary position is generated using the selected minute area image.
の各微小領域画像の面積を求め、解像度が最高になるよ
うに面積が最大となる微小領域画像を選択することを特
徴とする請求項１記載の画像生成方法。2. In the process of selecting the minute area image, the resolution is selected as a factor for evaluating the image quality, the area of each minute area image in each captured image is calculated, and the area is maximized so that the resolution is maximized. The image generation method according to claim 1, wherein a minute area image is selected.
撮像画像中の各微小領域画像の情報欠落の有無を求め、
情報が欠落していない微小領域画像を選択することを特
徴とする請求項１記載の画像生成方法。3. In the process of selecting a micro region image, the presence or absence of information loss is selected as a factor for evaluating image quality, and the presence or absence of information loss of each micro region image in each captured image is calculated.
2. The image generation method according to claim 1, wherein a minute area image in which information is not missing is selected.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP8026339A JPH09218954A (en) | 1996-02-14 | 1996-02-14 | Image generating method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP8026339A JPH09218954A (en) | 1996-02-14 | 1996-02-14 | Image generating method |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH09218954A true JPH09218954A (en) | 1997-08-19 |
Family
ID=12190688
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP8026339A Pending JPH09218954A (en) | 1996-02-14 | 1996-02-14 | Image generating method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH09218954A (en) |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11183142A (en) * | 1997-12-19 | 1999-07-09 | Fuji Xerox Co Ltd | Method and apparatus for picking up three-dimensional image |
| JP2006012161A (en) * | 2004-06-28 | 2006-01-12 | Microsoft Corp | Interactive viewpoint video system and process |
| JP2006012166A (en) * | 2004-06-28 | 2006-01-12 | Microsoft Corp | Stereo three-dimensional reconstruction system and process based on color segmentation |
| WO2009051065A1 (en) * | 2007-10-15 | 2009-04-23 | Nippon Telegraph And Telephone Corporation | Image generation method, device, its program and recording medium with program recorded therein |
| JP2012043345A (en) * | 2010-08-23 | 2012-03-01 | Canon Inc | Image processing device and method |
| US8355596B2 (en) | 2007-10-15 | 2013-01-15 | Nippon Telegraph And Telephone Corporation | Image generation method and apparatus, program therefor, and storage medium which stores the program |
| WO2018147329A1 (en) * | 2017-02-10 | 2018-08-16 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | Free-viewpoint image generation method and free-viewpoint image generation system |
| JP2020037356A (en) * | 2018-09-05 | 2020-03-12 | 株式会社明電舎 | Overhead wire abrasion inspection device |
-
1996
- 1996-02-14 JP JP8026339A patent/JPH09218954A/en active Pending
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11183142A (en) * | 1997-12-19 | 1999-07-09 | Fuji Xerox Co Ltd | Method and apparatus for picking up three-dimensional image |
| JP2006012161A (en) * | 2004-06-28 | 2006-01-12 | Microsoft Corp | Interactive viewpoint video system and process |
| JP2006012166A (en) * | 2004-06-28 | 2006-01-12 | Microsoft Corp | Stereo three-dimensional reconstruction system and process based on color segmentation |
| WO2009051065A1 (en) * | 2007-10-15 | 2009-04-23 | Nippon Telegraph And Telephone Corporation | Image generation method, device, its program and recording medium with program recorded therein |
| JP4658223B2 (en) * | 2007-10-15 | 2011-03-23 | 日本電信電話株式会社 | Image generating method, apparatus, program thereof, and recording medium recording program |
| US8355596B2 (en) | 2007-10-15 | 2013-01-15 | Nippon Telegraph And Telephone Corporation | Image generation method and apparatus, program therefor, and storage medium which stores the program |
| US8363985B2 (en) | 2007-10-15 | 2013-01-29 | Nippon Telegraph And Telephone Corporation | Image generation method and apparatus, program therefor, and storage medium which stores the program |
| JP2012043345A (en) * | 2010-08-23 | 2012-03-01 | Canon Inc | Image processing device and method |
| WO2018147329A1 (en) * | 2017-02-10 | 2018-08-16 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | Free-viewpoint image generation method and free-viewpoint image generation system |
| US10944960B2 (en) | 2017-02-10 | 2021-03-09 | Panasonic Intellectual Property Corporation Of America | Free-viewpoint video generating method and free-viewpoint video generating system |
| JP2020037356A (en) * | 2018-09-05 | 2020-03-12 | 株式会社明電舎 | Overhead wire abrasion inspection device |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7729563B2 (en) | Method and device for video image processing, calculating the similarity between video frames, and acquiring a synthesized frame by synthesizing a plurality of contiguous sampled frames | |
| JP5754312B2 (en) | Image processing apparatus, image processing method, and program | |
| JP3733392B2 (en) | Image composition change detection method | |
| JP5035372B2 (en) | 3D modeling apparatus, 3D modeling method, and program | |
| EP1431912A2 (en) | Method and system for determining an area of importance in an archival image | |
| JP2010062785A (en) | Image processing apparatus, imaging apparatus, solid state imaging element, image processing method, and program | |
| JP2010011441A (en) | Imaging apparatus and image playback device | |
| JP4429816B2 (en) | Imaging apparatus and method for increasing image resolution | |
| JP2000102040A (en) | Electronic stereo camera | |
| JP2010193058A (en) | Image capture device, image capturing method, and image capturing program | |
| JP5011504B2 (en) | Image composition apparatus, image composition method, and program | |
| CN104883948A (en) | Image processing device, program and image processing method | |
| JPH09218954A (en) | Image generating method | |
| CN104104881B (en) | The image pickup method of object and mobile terminal | |
| JP5581728B2 (en) | Image processing apparatus and method, and program | |
| JPH0973540A (en) | Motion vector calculation device | |
| JP3534551B2 (en) | Motion detection device | |
| JP5478533B2 (en) | Omnidirectional image generation method, image generation apparatus, and program | |
| JP5239991B2 (en) | Image processing apparatus and image processing system | |
| JP6752942B2 (en) | Image processing equipment, image processing methods and programs, and imaging equipment | |
| JP6218520B2 (en) | Image processing apparatus, image processing method, and program | |
| JP2021105850A (en) | Image processing device and method, and imaging device | |
| JP5293422B2 (en) | Image specifying device and image specifying program | |
| JP6585890B2 (en) | Image processing apparatus, image processing method and program, and imaging apparatus | |
| JP2001319224A (en) | Device and method for detecting three-dimensional object, and recording medium |