JPH0946579A - Image reproduction method and image reproducing device - Google Patents

Image reproduction method and image reproducing device

Info

Publication number
JPH0946579A
JPH0946579A JP7196677A JP19667795A JPH0946579A JP H0946579 A JPH0946579 A JP H0946579A JP 7196677 A JP7196677 A JP 7196677A JP 19667795 A JP19667795 A JP 19667795A JP H0946579 A JPH0946579 A JP H0946579A
Authority
JP
Japan
Prior art keywords
image
data
image pickup
imaged
series
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP7196677A
Other languages
Japanese (ja)
Other versions
JP3943611B2 (en
Inventor
Keishin Shiraiwa
敬信 白岩
Eiichiro Ikeda
栄一郎 池田
Yoshiro Udagawa
善郎 宇田川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP19667795A priority Critical patent/JP3943611B2/en
Priority to US08/689,054 priority patent/US6160579A/en
Priority to EP05076332A priority patent/EP1592227B1/en
Priority to EP96305647A priority patent/EP0757473B1/en
Priority to DE69634867T priority patent/DE69634867T2/en
Publication of JPH0946579A publication Critical patent/JPH0946579A/en
Priority to US09/697,315 priority patent/US7098944B1/en
Application granted granted Critical
Publication of JP3943611B2 publication Critical patent/JP3943611B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Abstract

PROBLEM TO BE SOLVED: To reproduce a desired image accurately. SOLUTION: The image reproducing device is provided with an image pickup data memory section 20, an image pickup data selection command section 34, an image pickup data selection section 33 selecting image pickup data from the image pickup data memory section 20, an image pickup data storage section 31 storing the image pickup data selected by the image pickup data selection section 33, an image reproduction parameter decision section 32 using the image pickup data stored and selected to decide an image reproduction parameter, and an image reproduction processing section 35 using the image reproduction parameter decided by the image reproduction parameter decision section 32 to reproduce an image of the image pickup data stored in the image pickup data storage section 31.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【発明の属する技術分野】本発明は、撮像管やCCD等
の撮像素子により得られる撮像信号に対して、その撮像
データを可視化できる画像信号、例えばNTSC−RG
B等に変換する画像再生方法及び画像再生装置の技術分
野に属するものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image signal obtained by an image pickup device such as an image pickup tube or a CCD, which can visualize the image pickup data, for example, NTSC-RG.
The present invention belongs to the technical field of an image reproducing method and an image reproducing apparatus for converting into B or the like.

【0002】[0002]

【従来の技術】従来より、CCD等の撮像素子を利用し
たテレビカメラ等の画像再生装置においては、撮像素子
やカラーフィルターの経年変化や照明光源の変化に関わ
らず、見た目に同じ印象が常に得られるように、或はで
きるだけ忠実な再生画像が得られるように、撮像データ
から画像データを得る画像再生処理時に、前記撮像デー
タから画像再生パラメータの一部を決定することが一般
的に行われている。画像再生パラメータとしては、例え
ば、色温度や再生輝度レベル等があり、画像再生パラメ
ータはこれら色温度を補正したり再生輝度レベルを設定
する際に使われる。 色温度の補正においては、具体的
には、いわゆるホライトバランス調整が行われ、白色と
見えるべき物体は白色に見える用に調整される。そし
て、この色温度補正は、一般には、撮像された画像デー
タに基づいて判断されて行われる。即ち、画像データか
ら白色と見えるべき物体を抽出し、これから画像再生パ
ラメータの一部であるホワイトバランス係数が決められ
る。ホワイトバランス調整においては、このホワイトバ
ランス係数を用いて、撮像素子の出力する映像信号を構
成する複数の色成分信号にそれぞれゲインを与えて補正
する事により、白色と見えるべき物体に対し、その映像
信号を構成する各色成分の信号の出力レベルが等しくな
るように調整される。
2. Description of the Related Art Conventionally, in an image reproducing apparatus such as a television camera using an image pickup device such as a CCD, the same impression can always be obtained regardless of the aging change of the image pickup device or the color filter or the change of the illumination light source. In order to obtain a reproduced image that is as faithful as possible, or to obtain an image data that is as faithful as possible, it is common practice to determine some of the image reproduction parameters from the imaged data during the image reproduction process. There is. The image reproduction parameters include, for example, color temperature and reproduction brightness level, and the image reproduction parameters are used when correcting the color temperature and setting the reproduction brightness level. In the correction of the color temperature, specifically, so-called light balance adjustment is performed, and an object that should be white is adjusted so that it looks white. Then, this color temperature correction is generally judged and performed based on the imaged image data. That is, an object that should appear white is extracted from the image data, and the white balance coefficient that is a part of the image reproduction parameter is determined from this. In white balance adjustment, the white balance coefficient is used to correct gains by applying gains to the multiple color component signals that make up the video signal output by the image sensor. The output levels of the signals of the respective color components forming the signal are adjusted to be equal.

【0003】再生輝度レベルの設定は、撮像データから
輝度分布を算出し、最適な再生輝度レベル(範囲)を設
定し、その範囲において再生画像が得られるようにパラ
メータが調整され、再生される。
The reproduction brightness level is set by calculating the brightness distribution from the imaged data, setting the optimum reproduction brightness level (range), and adjusting the parameters so that a reproduced image can be obtained in that range.

【0004】[0004]

【発明が解決しようとする課題】しかしながら、上記ホ
ワイトバランス調整により映像の色合いを調整する方法
等では、撮像素子等から得られる映像信号中に白色に見
えるべき物体(被写体)が十分に存在する時は有効であ
るが、特定の状況においては撮像信号中に白色に見える
べき物体(被写体)がない場合や、あっても非常に少な
い場合があり、この様な状況においてはホワイトバラン
ス調整により色合いを調整する事は原理的に不可能とな
る。一般に、この様な状況においては、該状態を回避す
るために、撮像データ全体の撮像信号を各色成分毎に平
均化し、該平均値を用いてホワイトバランス調整が行わ
れることがあるが、該方法では、求めた平均値に示され
る色が白色(光源の色)であるとは限らず、精度良くホ
ワイトバランス調整を行うことはできない。
However, in the method of adjusting the color tone of the image by the white balance adjustment described above, when the image signal obtained from the image pickup device or the like has a sufficient amount of an object (subject) that should appear white. Is effective, but in certain situations, there may be no object (subject) that should appear white in the image signal, or there may be very few. Even in such situations, the color balance may be adjusted by white balance adjustment. Adjustment is impossible in principle. Generally, in such a situation, in order to avoid this state, the image pickup signals of the entire image pickup data may be averaged for each color component, and the white balance adjustment may be performed using the average value. Then, the color shown in the obtained average value is not always white (color of the light source), and white balance adjustment cannot be performed accurately.

【0005】このように従来の画像再生装置において
は、最適な再生画像を得るために画像再生処理を行う場
合、画像再生パラメータを前記撮像データから決めよう
とすると、精度良くパラメータを設定することができな
いという問題があった。
As described above, in the conventional image reproducing apparatus, when the image reproducing process is performed in order to obtain the optimum reproduced image, if the image reproducing parameter is determined from the image pickup data, the parameter can be set accurately. There was a problem that I could not.

【0006】また、再生輝度レベルの設定においては、
個々の撮像データ毎に輝度の再生パラメータを決定する
と画像比較等を行う場合や画像合成処理等を行う場合に
比較する複数枚の撮像データ間の輝度の相関関係等が失
われ、再生画像間の比較が困難となったり、あるいは再
生合成画像において輝度のつながりが不自然になる等の
不具合が生じる場合があるという問題があった。
Further, in setting the reproduction brightness level,
When the luminance reproduction parameter is determined for each individual image data, the luminance correlation between a plurality of image data to be compared is lost when performing image comparison and the like, or when performing image combining processing, etc. There is a problem in that it may be difficult to make a comparison, or inconvenience may occur in the reproduced synthetic image such that the connection of the luminance becomes unnatural.

【0007】例えば、撮影領域の関係で、本来なら同一
画面として撮像したい被写体を分割して撮像し、複数枚
の撮像データを得たときに上記不具合が明らかになる。
[0007] For example, in view of the shooting area, the above-mentioned problem becomes apparent when a plurality of image pickup data are obtained by dividing an image of a subject that should be imaged on the same screen.

【0008】即ち、画像情報により求めた画像再生パラ
メータを用いて得られる再生画像は、個々の撮像データ
について個別の画像再生パラメータが得られるため、輝
度情報により物性情報等を得る場合の様に、複数枚の画
像を比較解析し画像間の情報を抽出する際に用いる再生
画像を得ることができない。或は、被写体の反射率が空
間的に徐々に変化している場合は、これを分割撮像して
得られた個々の撮像データにおいては輝度レベル(範
囲)に違いが生じており、これを各撮像データ毎に最適
化して画像再生を行うと、本来各撮像領域にあった輝度
の相関関係が失われた画像として再現され、従って、各
撮像領域を撮像した画像を合成して一枚の画像とすると
輝度の相関関係が失われた不自然な合成画像になるとい
う問題があった。
That is, since the reproduced image obtained by using the image reproduction parameter obtained from the image information can obtain the individual image reproduction parameter for each image pickup data, as in the case of obtaining the physical property information or the like by the brightness information, It is not possible to obtain a reproduced image used for extracting information between images by comparing and analyzing a plurality of images. Alternatively, when the reflectance of the subject gradually changes spatially, there is a difference in the brightness level (range) in the individual image data obtained by dividing the image, and this When the image is reproduced by optimizing it for each imaged data, it is reproduced as an image in which the correlation of the brightness originally in each imaged region is lost. Therefore, the images captured in each imaged region are combined to form one image. Then, there is a problem that an unnatural synthetic image in which the correlation of luminance is lost is obtained.

【0009】本発明はこの様な問題点を解消するために
なされたものであって、所望の正確な画像再生を行うこ
とができる画像再生方法及び画像再生装置を提供するこ
とを目的とする。
The present invention has been made to solve such problems, and an object of the present invention is to provide an image reproducing method and an image reproducing apparatus capable of performing desired accurate image reproduction.

【0010】[0010]

【課題を解決するための手段】このため、本発明に係る
画像再生方法及び画像再生装置は、 (1)撮像手段によって撮像された撮像データを画像再
生パラメータを用いて可視化可能な画像信号に変換する
画像再生方法であって、一定の条件を満たす複数の撮像
データからなる一連の撮像データ群を形成し、この一連
の撮像データ群から前記の画像再生パラメータを求め、
この画像再生パラメータを用いて前記撮像データ群に属
する撮像データを画像データに変換することを特徴とす
る画像再生方法。
Therefore, in the image reproducing method and the image reproducing apparatus according to the present invention, (1) the image pickup data picked up by the image pickup means is converted into an image signal which can be visualized by using the image reproduction parameter. An image reproducing method for forming a series of imaged data groups consisting of a plurality of imaged data satisfying a certain condition, and obtaining the image reproduction parameters from the series of imaged data groups,
An image reproduction method characterized in that the image data belonging to the image data group is converted into image data using the image reproduction parameter.

【0011】(2)前記一定の条件を満たす複数の撮像
データからなる一連の撮像データ群は、撮像データを解
析して得られる色温度データが予め指定する色温度デー
タ範囲内にある撮像データからなることを特徴とする前
記(1)記載の画像再生方法。
(2) A series of imaged data groups consisting of a plurality of imaged data satisfying the above-mentioned certain conditions are obtained from imaged data whose color temperature data obtained by analyzing the imaged data are within a color temperature data range designated in advance. The image reproducing method described in (1) above.

【0012】(3)前記一定の条件を満たす複数の撮像
データからなる一連の撮像データ群は、撮像データを簡
易再生して表示される画像群よりユーザーが選択する撮
像データからなることを特徴とする前記(1)記載の画
像再生方法。
(3) A series of imaged data groups consisting of a plurality of imaged data satisfying the predetermined condition are imaged data selected by a user from an image group displayed by simply reproducing the imaged data. The image reproducing method described in (1) above.

【0013】(4)前記一定の条件を満たす複数の撮像
データからなる一連の撮像データ群は、撮像データに付
随した情報である、撮像時刻、EV値、絞り値、被写体
距離、シャッター速度のいずれか或はその組み合わせの
情報が、予め数値的に指定する範囲内にある撮像データ
からなることを特徴とする前記(1)記載の画像再生方
法。
(4) A series of imaged data groups consisting of a plurality of imaged data satisfying the above-mentioned certain conditions are information attached to the imaged data, that is, image pickup time, EV value, aperture value, subject distance, shutter speed. Alternatively, the image reproduction method according to (1) above, wherein the information of the combination is image pickup data within a range specified numerically in advance.

【0014】(5)前記一定の条件を満たす複数の撮像
データからなる一連の撮像データ群は、撮像データに付
随した情報である、撮像モード、撮像場所、ストロボ使
用の有無、光学ローパスフィルターの有無のいずれか或
はその組み合わせの情報が、予め指定する条件を満たす
撮像データからなることを特徴とする前記(1)記載の
画像再生方法。
(5) A series of imaged data groups consisting of a plurality of imaged data satisfying the above-mentioned certain conditions are information attached to the imaged data, that is, image pickup mode, image pickup location, use of strobe, presence of optical low-pass filter. The image reproduction method according to (1) above, wherein the information of any one of the above or a combination thereof is image pickup data satisfying a condition designated in advance.

【0015】(6)前記一定の条件を満たす複数の撮像
データからなる一連の撮像データ群は、合成画像を形成
するための撮像データであることを示す付随情報を持つ
撮像データからなることを特徴とする前記(1)記載の
画像再生方法。
(6) A series of imaged data groups consisting of a plurality of imaged data satisfying the certain conditions are imaged data having accompanying information indicating that the imaged data is for forming a composite image. The image reproducing method according to (1) above.

【0016】(7)撮像手段によって撮像された撮像デ
ータを画像再生パラメータを用いて可視化可能な画像信
号に変換する画像再生装置であって、撮像された撮像デ
ータを記憶する撮像データメモリ手段と、撮像データ選
択の条件を指示する撮像データ選択指示手段と、前記撮
像データメモリ手段から撮像データを選択する撮像デー
タ選択手段と、該撮像データ選択手段が選択した撮像デ
ータを保持する撮像データ保持手段と、該撮像データ保
持手段に保持されている選択された撮像データを用いて
画像再生パラメータを決定する画像再生パラメータ決定
手段と、該画像再生パラメータ決定手段により決定され
た画像再生パラメータを用いて前記撮像データ保持手段
に保持された撮像データの画像再生をする画像再生処理
手段を備え、一定の条件を満たす複数の撮像データから
なる一連の撮像データ群を形成し、この一連の撮像デー
タ群から前記の画像再生パラメータを求め、この画像再
生パラメータを用いて前記撮像データ群に属する撮像デ
ータを画像データに変換することを特徴とする画像再生
装置。
(7) An image reproducing device for converting the imaged data imaged by the imaging means into an image signal which can be visualized by using an image reproduction parameter, and imaged data memory means for storing the imaged imaged data. Imaging data selection instructing means for instructing conditions of imaging data selection, imaging data selecting means for selecting imaging data from the imaging data memory means, and imaging data holding means for holding the imaging data selected by the imaging data selecting means. An image reproduction parameter determining means for determining an image reproduction parameter using the selected imaging data held in the imaging data holding means, and the imaging using the image reproduction parameter determined by the image reproduction parameter determining means An image reproduction processing unit for reproducing an image of the imaged data held in the data holding unit is provided, and A series of image pickup data groups consisting of a plurality of image pickup data satisfying a condition is formed, the image reproduction parameters are obtained from the series of image pickup data groups, and the image pickup data belonging to the image pickup data group is imaged using the image reproduction parameters. An image reproducing device characterized by converting into data.

【0017】(8)前記一定の条件を満たす複数の撮像
データからなる一連の撮像データ群は、撮像データを解
析して得られる色温度データが予め指定する色温度デー
タ範囲内にある撮像データからなることを特徴とする前
記(7)記載の画像再生装置。
(8) A series of imaged data groups consisting of a plurality of imaged data satisfying the above-mentioned certain conditions are obtained from imaged data whose color temperature data obtained by analyzing the imaged data is within a color temperature data range designated in advance. The image reproducing device according to (7) above.

【0018】(9)前記一定の条件を満たす複数の撮像
データからなる一連の撮像データ群は、撮像データを簡
易再生して表示される画像群よりユーザーが選択する撮
像データからなることを特徴とする前記(7)記載の画
像再生装置。
(9) A series of image pickup data groups consisting of a plurality of image pickup data satisfying the predetermined condition are image pickup data selected by a user from an image group displayed by simply reproducing the image pickup data. The image reproducing device according to (7) above.

【0019】(10)前記一定の条件を満たす複数の撮
像データからなる一連の撮像データ群は、撮像データに
付随した情報である、撮像時刻、EV値、絞り値、被写
体距離、シャッター速度のいずれか或はその組み合わせ
の情報が、予め数値的に指定する範囲内にある撮像デー
タからなることを特徴とする前記(7)記載の画像再生
装置。
(10) A series of imaged data groups consisting of a plurality of imaged data satisfying the above-mentioned certain conditions are information attached to the imaged data, that is, image pickup time, EV value, aperture value, subject distance, shutter speed. Alternatively, the image reproducing apparatus according to the above (7), wherein the information of the combination is image pickup data within a range specified numerically in advance.

【0020】(11)前記一定の条件を満たす複数の撮
像データからなる一連の撮像データ群は、撮像データに
付随した情報である、撮像モード、撮像場所、ストロボ
使用の有無、光学ローパスフィルターの有無のいずれか
或はその組み合わせの情報が、予め指定する条件を満た
す撮像データからなることを特徴とする前記(7)記載
の画像再生装置。
(11) A series of image pickup data groups consisting of a plurality of image pickup data satisfying the above-mentioned certain conditions are information attached to the image pickup data, such as image pickup mode, image pickup location, use of strobe, and presence of optical low-pass filter. The image reproducing apparatus according to (7) above, wherein the information of any one of them or a combination thereof is image pickup data that satisfies a condition designated in advance.

【0021】(12)前記一定の条件を満たす複数の撮
像データからなる一連の撮像データ群は、合成画像を形
成するための撮像データであることを示す付随情報を持
つ撮像データからなることを特徴とする前記(7)記載
の画像再生装置。
(12) A series of imaged data groups consisting of a plurality of imaged data satisfying the predetermined condition are imaged data having associated information indicating that the imaged data is for forming a composite image. The image reproducing device according to (7) above.

【0022】本発明は、上記の各構成によって、前記の
目的を達成するものである。
The present invention achieves the above-mentioned object by each of the above constitutions.

【0023】[0023]

【発明の実施の形態】前記目的を達成するため本発明
は、撮像手段によって撮像された撮像データを画像再生
パラメータを用いて可視化可能な画像信号に変換する画
像再生方法及び画像再生装置において、一定の条件を満
たす複数の撮像データからなる一連の撮像データ群とし
て、この一連の撮像データ群から前記画像再生パラメー
タを求め、この画像再生パラメータを用いて、前記撮像
データ群に属する撮像データを画像データに変換するこ
とを特徴とする。
To achieve the above object, the present invention provides an image reproducing method and an image reproducing apparatus for converting image pickup data picked up by an image pickup means into an image signal which can be visualized by using an image reproduction parameter. As a series of image pickup data groups consisting of a plurality of image pickup data satisfying the condition of 1., the image reproduction parameters are obtained from the series of image pickup data groups, and the image pickup parameters belonging to the image pickup data group are used as image data It is characterized by converting to.

【0024】さらに、前記一定の条件を満たす複数の撮
像データからなる一連の撮像データ群は、撮像データを
解析して得られる色温度データが予め指定する色温度デ
ータ範囲内にあることを特徴とする また、前記一定の条件を満たす複数の撮像データからな
る一連の撮像データ群は、撮像データを簡易再生して表
示される撮像被写体の構図が類似しているという条件の
もとにユーザにより選択されたものであることを特徴と
する。
Further, a series of imaged data groups consisting of a plurality of imaged data satisfying the certain condition is characterized in that the color temperature data obtained by analyzing the imaged data is within the color temperature data range designated in advance. In addition, a series of imaged data groups consisting of a plurality of imaged data satisfying the certain condition are selected by the user under the condition that the composition of the imaged subject displayed by simply reproducing the imaged data is similar. It is characterized by being

【0025】また、前記一定の条件を満たす複数の撮像
データからなる一連の撮像データ群は、撮像データに付
随した情報である、撮像時刻、EV値、絞り値、被写体
距離、シャッター速度のいずれか、あるいはその組み合
わせ情報が予め数値的に指定する範囲内にあることを特
徴とする。
Further, a series of image pickup data groups consisting of a plurality of image pickup data satisfying the above-mentioned certain condition is any one of information attached to the image pickup data, that is, image pickup time, EV value, aperture value, subject distance, shutter speed. , Or its combination information is within a range specified numerically in advance.

【0026】また、前記一定の条件を満たす複数の撮像
データからなる一連の撮像データ群は、撮像データに付
随した情報である、撮像モード、撮像場所、ストロボ使
用の有無、光学ローパスフィルターの有無のいずれか、
あるいはその組み合わせの情報が予め指定する条件を満
たすことを特徴とする。
Further, a series of imaged data groups consisting of a plurality of imaged data satisfying the above-mentioned certain conditions are information attached to the imaged data, that is, image pickup mode, image pickup location, use of strobe, presence of optical low-pass filter. either,
Alternatively, it is characterized in that the information of the combination satisfies the condition specified in advance.

【0027】また、前記一定の条件を満たす複数の撮像
データからなる一連の撮像データ群は、合成画像を形成
する撮像データとしての情報を持つ、あるいは合成画像
を形成する撮像データとして選択された複数の撮像デー
タからなることを特徴とする実施である。
Further, a series of image pickup data groups consisting of a plurality of image pickup data satisfying the predetermined condition has information as image pickup data forming a composite image, or a plurality of image pickup data selected as image forming data forming a composite image. It is an implementation characterized in that it is composed of image pickup data of.

【0028】上記画像再生方法及び画像再生装置によれ
ば、関連する複数枚の撮像データを一連の撮像データ群
として扱い、その撮像データを群を用いて、最適な画像
再生パラメータが求められ、その画像再生パラメータを
用いて、撮像データ群を構成する撮像データが画像デー
タに変換される。
According to the image reproducing method and the image reproducing apparatus, a plurality of related image pickup data are treated as a series of image pickup data, and the image pickup data are used to obtain the optimum image reproduction parameter. The image pickup data forming the image pickup data group is converted into image data using the image reproduction parameter.

【0029】[0029]

【実施例】以下、本発明の実施例を図面を参照して説明
する。
Embodiments of the present invention will be described below with reference to the drawings.

【0030】図1は本発明に係わる画像再生装置の一実
施例を示すブロック図である。
FIG. 1 is a block diagram showing an embodiment of an image reproducing apparatus according to the present invention.

【0031】10はデジタルカメラ等のカラー画像撮像
部であって、被写体を撮像し該被写体画像データを二次
元のデジタル撮像データ(以下、単に「撮像データ」と
いう)として撮像データメモリ部20に出力する。そし
て、撮像データメモリ部20は、カラー画像撮像部10
から送られてきた前記撮像データを記憶保存する。
Reference numeral 10 denotes a color image pickup unit such as a digital camera, which picks up an image of a subject and outputs the subject image data as two-dimensional digital image pickup data (hereinafter, simply referred to as "image pickup data") to the image pickup data memory unit 20. To do. Then, the imaged data memory unit 20 includes the color image pickup unit 10
The image pickup data sent from is stored and saved.

【0032】カラー画像再生処理部30は、撮像データ
メモリ部20に記憶保存されている撮像データに関し所
定の画像再生処理を施し、例えば、デジタル化されたN
TSC−RGBデータに変換し、カラー画像再生表示部
40及び再生画像データメモリ部50に出力する。
The color image reproduction processing unit 30 performs a predetermined image reproduction process on the image pickup data stored and saved in the image pickup data memory unit 20, and, for example, digitized N.
It is converted into TSC-RGB data and output to the color image reproduction display unit 40 and the reproduction image data memory unit 50.

【0033】前記カラー画像再生表示部40は、例えば
カラービデオボードとモニタ等を備え、カラー画像再生
処理部30から出力されたカラー画像信号を受け、ある
いは、再生画像データメモリ部50からカラー画像信号
を読みだし、カラー画像としてモニタ上に表示する。
The color image reproduction display section 40 is provided with, for example, a color video board and a monitor, receives the color image signal output from the color image reproduction processing section 30, or receives the color image signal from the reproduction image data memory section 50. Is read out and displayed as a color image on the monitor.

【0034】再生画像データメモリ部50は、カラー画
像再生処理部30において画像再生された画像データを
記憶保存し、この記憶保存された画像データは必要に応
じてカラー画像再生表示部40に送られカラー画像とし
て表示される。
The reproduced image data memory section 50 stores the image data reproduced in the color image reproduction processing section 30, and the stored image data is sent to the color image reproduction display section 40 as needed. It is displayed as a color image.

【0035】カラー画像再生処理部30は、詳述する
と、撮像データメモリ部20からのデジタル撮像データ
を保持しておくための撮像データ保持機構31と、撮像
データメモリ部20から撮像データを選択して取り出し
撮像データ保持機構31に出力する撮像データ選択機構
33と、この撮像データ選択部33が撮像データを選択
するための条件等を指示する撮像データ選択指示部(指
示手段)34と、撮像データ保持部31に選択保持され
ている撮像データを用いて画像パラメータを決定する画
像再生パラメータ決定部32により決定された画像再生
パラメータを用いて撮像データ保持部31に保持された
撮像データの画像再生をする画像再生処理部35と、こ
のカラー画像再生処理部30の各部を制御するコントロ
ール部36とを具備している。
More specifically, the color image reproduction processing section 30 selects an image pickup data from the image pickup data holding mechanism 31 for holding the digital image pickup data from the image pickup data memory section 20 and the image pickup data memory section 20. The captured image data selection mechanism 33 that outputs the captured image data to the captured image data storage mechanism 31, the captured image data selection instruction unit (instructing means) 34 that indicates conditions for the captured image data selection unit 33 to select the captured image data, and the captured image data. The image reproduction of the imaged data held in the imaged data holding unit 31 is performed by using the image reproduction parameter determined by the image reproduction parameter determination unit 32 which determines the image parameter using the imaged data selectively held in the holding unit 31. And an image reproduction processing unit 35 for controlling the color image reproduction processing unit 30 and a control unit 36 for controlling each unit of the color image reproduction processing unit 30. To have.

【0036】画像再生パラメータ決定部32が決定する
画像再生パラメータとしては、例えば、色温度、ホワイ
トバランス係数、色成分ゲイン量、ホワイトポイント情
報、ブラックポイント情報、ガンマ係数、階調特性、階
調変換曲線、階調変換ルックアップテーブル、ニーポイ
ント、ダイナミックレンジ、色域、照明光源情報、色座
標変換マトリックス係数、空間周波数特性、ブラックバ
ランス係数、S/N比、自己相関係数、ウィナースペク
トル、強度(濃度)分布、輝度分布等を示すパラメー
タ、あるいはこれらの情報より直接、間接に得られるパ
ラメータ等を挙げることができる。
The image reproduction parameters determined by the image reproduction parameter determination unit 32 are, for example, color temperature, white balance coefficient, color component gain amount, white point information, black point information, gamma coefficient, gradation characteristic, gradation conversion. Curve, gradation conversion lookup table, knee point, dynamic range, color gamut, illumination light source information, color coordinate conversion matrix coefficient, spatial frequency characteristic, black balance coefficient, S / N ratio, autocorrelation coefficient, Wiener spectrum, intensity Examples thereof include parameters indicating (density) distribution, luminance distribution, etc., or parameters obtained directly or indirectly from these information.

【0037】撮像データ選択指示部34は、撮像データ
メモリ部20に蓄えられている複数の撮像データから、
一定の条件を満たす撮像データを撮像データ群として扱
うために選択的に取り出すための条件を指示できる様に
なっている。指示条件は、例えば、撮像データから得ら
れる色温度情報や撮像被写体の構図に対する条件や、或
は撮像データに付随した情報である撮像時刻、撮像モー
ド、撮像場所、EV値、絞り値、被写体距離、シャッタ
ー速度、ストロボ使用の有無、光学ローパスフィルター
の有無等についての一定の条件として与えられる。
The picked-up image data selection instructing section 34 selects from a plurality of picked-up image data stored in the picked-up image data memory section 20.
In order to handle the imaged data satisfying a certain condition as a group of imaged data, it is possible to instruct a condition for selectively extracting. The instruction condition is, for example, the color temperature information obtained from the image pickup data, the condition for the composition of the image pickup subject, or information associated with the image pickup data, that is, the image pickup time, the image pickup mode, the image pickup place, the EV value, the aperture value, and the subject distance. , Shutter speed, use of strobe, presence of optical low-pass filter, etc.

【0038】図2は本実施例の画像再生装置の画像処理
手順を示すフローチャートであって、本プログラムはカ
ラー画像再生処理部30において実行される。また、撮
像データメモリ部20には既にカラー画像撮像部10に
おいて撮像された複数の撮像データが記憶保持されてい
るものとする。
FIG. 2 is a flow chart showing the image processing procedure of the image reproducing apparatus of this embodiment. This program is executed in the color image reproducing processing section 30. Further, it is assumed that the imaging data memory unit 20 already stores and holds a plurality of imaging data captured by the color image capturing unit 10.

【0039】図2に示されるフローチャートがスタート
するとこれを実行するコントロール部36は、まず撮像
データ選択指示部34の撮像データ選択指示(ステップ
S1)の内容を調べ、該選択指示内容を撮像データ選択
部33に送る。次に、撮像データ選択部33は、撮像デ
ータ選択指示部34から指示された選択指示内容をもと
に、撮像データメモリ部20に格納されている撮像デー
タの中から該選択指示内容に当てはまる撮像データを選
んで撮像データ保持部31に出力する(S2)。なお、
該選択指示内容に当てはまる撮像データが一枚以下の時
は、本プログラムは実行されず、選択撮像データが一枚
の時は通常の画像再生処理により撮像データが画像デー
タに変換される。選択撮像データがない時には、その旨
の指示がなされ、一連の処理は終了する。
When the flow chart shown in FIG. 2 starts, the control unit 36, which executes it, first checks the content of the image data selection instruction (step S1) of the image data selection instruction unit 34, and selects the image data selection instruction. Send to section 33. Next, based on the selection instruction content instructed by the imaging data selection instructing section 34, the imaging data selection section 33 selects the imaging data corresponding to the selection instruction content from the imaging data stored in the imaging data memory section 20. The data is selected and output to the imaging data holding unit 31 (S2). In addition,
This program is not executed when the number of pieces of image pickup data applicable to the selection instruction content is one or less, and when the number of pieces of selection image pickup data is one, the image pickup data is converted into image data by a normal image reproduction process. When there is no selected image pickup data, an instruction to that effect is issued, and a series of processing ends.

【0040】撮像データ保持部31は、撮像データメモ
リ部20から選択出力された撮像データを一時保持する
(S3)。
The image data holding section 31 temporarily holds the image data selected and output from the image data memory section 20 (S3).

【0041】画像再生パラメータ決定部32は、撮像デ
ータ保持部31に一時保持された撮像データを用いて、
該撮像データを解析し、例えばホワイトバランス調整に
必要となる該撮像データ撮像時の光源情報(例えば色温
度や或は光源の色度等)を得た後、その光源情報を基に
画像再生パラメータが決定される(S4)。即ち、画像
再生パラメータ決定部32は、撮像データ群として選択
され保持された複数の撮像データを用いて、画像再生パ
ラメータが決定され、画像再生処理装置機構35に送ら
れる。
The image reproduction parameter determining section 32 uses the image pickup data temporarily held in the image pickup data holding section 31,
After analyzing the imaged data and obtaining light source information (for example, color temperature or chromaticity of the light source) at the time of image pickup of the imaged data necessary for white balance adjustment, for example, an image reproduction parameter based on the light source information. Is determined (S4). That is, the image reproduction parameter determination unit 32 determines the image reproduction parameter by using the plurality of image pickup data selected and held as the image pickup data group, and sends the image reproduction parameter to the image reproduction processing device mechanism 35.

【0042】画像再生処理部35は、決定された画像再
生パラメータを用いて、撮像データ保持部31が保持す
る撮像データ群を構成する撮像データを画像データに変
換する(S5)。
The image reproduction processing section 35 uses the decided image reproduction parameters to convert the image pickup data forming the image pickup data group held by the image pickup data holding section 31 into image data (S5).

【0043】次に、複数の撮像データから、一連の撮像
データ群として扱うベく、撮像データを選択する条件に
ついて列挙する。
Next, the conditions for selecting image pickup data, which should be treated as a series of image pickup data from a plurality of image pickup data, will be listed.

【0044】撮像データ自身の解析から得られる情報と
して、色温度情報及び撮像被写体の構図がある。色温度
がある一定の範囲内にある複数の撮像データは、相関の
ある撮像データ群として扱うことが必要な場合がある。
特に色温度の推定に用いたサンプル点の点数が少ない場
合においては、推定色温度がある一定の範囲内にある複
数の撮像データを用いて、再度色温度推定を行うことに
より、その推定精度を上げることができ、画像再現を精
度良く行うことが可能となる。
Information obtained from the analysis of the imaged data itself includes color temperature information and the composition of the imaged subject. It may be necessary to treat a plurality of image data whose color temperature is within a certain range as a group of correlated image data.
Especially when the number of sample points used for the color temperature estimation is small, the estimation accuracy can be improved by performing the color temperature estimation again using a plurality of imaging data in which the estimated color temperature is within a certain range. Therefore, the image can be reproduced with high accuracy.

【0045】撮像被写体の構図が同じである或は良く似
ている場合においては、同一撮影条件下で撮影した可能
性が高い。従って、その再生パラメータは同じか、ある
一定の精度の範囲内で同じものとして扱うことが可能と
なる。この様な場合においては、複数の撮像データから
前記再生パラメータを求めると精度良く再生パラメータ
を求めることができ、撮像被写体の構図が同じである、
或は良く似ている撮像データは一連の撮像データ群で扱
うことが有用な場合がある。
When the composition of the imaged subject is the same or very similar, there is a high possibility that the images were taken under the same imaging conditions. Therefore, the reproduction parameters can be treated as the same or the same within a certain accuracy range. In such a case, if the reproduction parameter is obtained from a plurality of image data, the reproduction parameter can be obtained with high accuracy, and the composition of the imaged subject is the same.
Alternatively, it may be useful to handle image data that are very similar to each other in a series of image data sets.

【0046】撮像データの相関性を把握するのに有用な
情報として、例えば撮影時刻(日付)、撮像モード、撮
影場所、EV値、シャッター速度、絞り値、被写体距
離、ストロボ使用の有無、光学ローパスフィルターの有
無等がある。これらの情報が撮像データに付随する情報
として与えられているときは、この情報を解析すること
により、一連の撮像データ群を生成することが可能とな
る。
Information useful for grasping the correlation of the image pickup data includes, for example, image pickup time (date), image pickup mode, image pickup location, EV value, shutter speed, aperture value, subject distance, use of strobe, and optical low pass. Whether there is a filter or not. When these pieces of information are given as information accompanying the image pickup data, it is possible to generate a series of image pickup data groups by analyzing this information.

【0047】例えば、撮像時刻がある一定の範囲にある
場合においては、明らかに一連の撮像データ群として扱
うことが有効である。また、撮像モードが連写モードで
ある一連の撮像データは一つの群として扱うことが有効
であることも明らかである。ストロボ使用の有無の情報
は、例えば、ストロボ使用時における撮影光源の情報は
ストロボ光の特性に多く依存するので、ストロボ使用に
より撮影した複数撮像データを撮像データ群として一括
して扱うことは有用である。
For example, when the imaging time is within a certain range, it is obviously effective to treat it as a series of imaging data groups. It is also clear that it is effective to handle a series of imaged data whose image capturing mode is continuous shooting mode as one group. Information on whether or not a strobe is used, for example, information on a shooting light source when a strobe is used largely depends on the characteristics of the strobe light, so it is useful to collectively handle a plurality of image pickup data shot by using a strobe as an image pickup data group. is there.

【0048】また、EV値、シャッター速度、絞り値、
被写体距離等の情報は撮影条件に極めて依存し、再生パ
ラメータを決める上でもそれぞれ強い拘束条件となる。
そのため、それらの値が一定の範囲にある撮像データは
一つの撮像データ群として扱うと、画像再生を行う場合
において非常に効率的になる。
The EV value, shutter speed, aperture value,
The information such as the subject distance greatly depends on the shooting conditions, and is a strong constraint condition in determining the reproduction parameters.
Therefore, if the image pickup data whose values are in a certain range is treated as one image pickup data group, it becomes very efficient when performing image reproduction.

【0049】撮影場所についての情報は、被写体像の特
性を同一とする情報となり、被写体を精度良く再生する
上で非常に有効である。さらに、撮影時刻(日付)等情
報と組み合わせて考えると、撮像条件等の変化の情報も
得ることができ、その有用性が増すことは明らかであ
る。
The information about the shooting location is information that makes the characteristics of the subject image the same, and is very effective in accurately reproducing the subject. Furthermore, when considered in combination with information such as the shooting time (date), it is clear that information on changes in the imaging conditions and the like can be obtained, and the usefulness thereof is increased.

【0050】上記の例においては、個々の情報について
の条件を主にのべたが、上記の条件を組み合わせて条件
とすることが有効性を一段と増す場合があることは明ら
かである。
In the above example, the conditions for individual information are mainly mentioned, but it is obvious that the combination of the above conditions may be more effective in some cases.

【0051】また、処理条件として、例えば、図3に示
すような、空間的に連続性がある複数の撮像データを指
定して、合成画像を得る場合などがある。このような場
合においては、合成画像として空間での連続性を保持す
る必要性があり、このため、上記複数の撮像データを一
連の撮像データ群として扱って画像再生処理を施すこと
は非常に有効となる。
Further, as a processing condition, for example, there is a case where a plurality of image data having spatial continuity are designated to obtain a composite image, as shown in FIG. In such a case, it is necessary to maintain spatial continuity as a composite image. Therefore, it is very effective to perform image reproduction processing by treating the above plurality of image pickup data as a series of image pickup data groups. Becomes

【0052】或は、図4に示すような、撮影場所情報や
撮像データの解析による構図情報により、時間的に連続
性をもち、被写体像がほぼ同じであると判定できる撮像
データにおいては、本発明の画像再生方法及び装置によ
り、一連の撮像データ群として扱うことにより、時間的
な連続性を保った再現画像を得ることができる。
Alternatively, as shown in FIG. 4, in the case of image pickup data which has temporal continuity and can be determined to be almost the same in the subject image based on the photographing location information and the composition information obtained by analyzing the image pickup data, According to the image reproducing method and apparatus of the present invention, a reproduced image with temporal continuity can be obtained by treating it as a series of captured image data.

【0053】例えば、それが屋外で得られた撮像データ
であれば、撮影時刻、即ち日照条件の変化にともなう連
続的な変化を保持して画像再生ができる。具体的には、
被写体像がほぼ同じである複数撮像データから構成され
る撮像データ群の撮像データに関して、撮影時刻の情報
に応じて、画像再生パラメータを連続的に変化させるこ
とにより、時間的に連続性を持って再生画像を得ること
ができる。これにより、突発的な条件変化によって一部
の撮像データに生じた外乱を補正して画像再生ができる
ので、時間的に自然な画像を得ることができる。
For example, if the image data is obtained outdoors, it is possible to reproduce the image while holding the image capturing time, that is, the continuous change due to the change of the sunshine condition. In particular,
Regarding the image data of the image data group consisting of a plurality of image data whose subject images are almost the same, by continuously changing the image reproduction parameters according to the information of the image capturing time, it is possible to have temporal continuity. A reproduced image can be obtained. As a result, it is possible to correct the disturbance that has occurred in a part of the imaged data due to a sudden change in the condition and to reproduce the image, so that it is possible to obtain a temporally natural image.

【0054】また、図5に示すような、時間的に連続性
をもち、撮像順的にも連続性を持つ、即ち撮影モードが
連写モードである、或は空間的にも連続性を持つ撮像デ
ータに関しても、一連の撮像データ群として扱うことに
より、個々の撮影データに生じた異質な条件を除外でき
るので、連続性を保った画像再生が可能となる。
Further, as shown in FIG. 5, there is continuity in time and continuity in the order of imaging, that is, the shooting mode is continuous shooting mode or spatial continuity. By treating the image pickup data as a series of image pickup data groups, it is possible to exclude the different conditions occurring in the individual pieces of image pickup data, so that it is possible to reproduce the images with continuity.

【0055】以下、撮像データ自身の解析から得られる
情報である色温度情報を用いて、撮像データをグループ
化する、即ち一連の撮像データ群とする方法について詳
述する。図6にそのフローチャートを示す。
The method of grouping the imaged data, that is, a series of imaged data groups, using the color temperature information, which is the information obtained from the analysis of the imaged data itself, will be described in detail below. FIG. 6 shows a flowchart thereof.

【0056】撮像選択指示部34より与えられる条件
は、相関色温度(A(K))とその選択範囲色温度(±
dA(K))である。上記相関色温度範囲は、ユーザに
より、直接、数値的に入力されることもあれば、あるい
は、相関色温度に関連する情報、例えば、昼、夕方、夕
焼け、曇、白熱電灯の言葉等、色温度についてユーザが
想定できる情報を入力することにより、システム側でそ
れ等に相当する色温度範囲を予め定義して蓄えておいた
記憶部から呼び出して利用することも可能であり、演算
により求めることも可能である(図6ステップS1
1)。また、色温度が想定できる赤い、青白い等の形容
詞を用いたり、具体的に色度値や色差値等を利用するこ
とも可能である。
The conditions given by the image pickup selection instructing section 34 are the correlated color temperature (A (K)) and the selected range color temperature (±
dA (K)). The correlated color temperature range may be directly and numerically input by the user, or information related to the correlated color temperature, for example, day, evening, sunset, cloudiness, words of incandescent lamp, color, etc. By inputting information that can be assumed by the user about the temperature, it is also possible to call it from the storage unit that has previously defined and stored the color temperature range corresponding to them on the system side and use it. Is also possible (step S1 in FIG. 6).
1). It is also possible to use adjectives such as red and pale, which can assume the color temperature, and specifically use chromaticity values, color difference values, and the like.

【0057】上記の条件を指示することにより、撮像デ
ータに固有の情報である相関色温度を例えば図7に示す
色度図等を用いて指定できる。
By instructing the above conditions, the correlated color temperature, which is information unique to the image pickup data, can be specified using, for example, the chromaticity diagram shown in FIG.

【0058】[0058]

【数1】 [Equation 1]

【0059】上記条件が撮像データ選択部33に送ら
れ、グループ化の条件として利用される。
The above conditions are sent to the image pickup data selection section 33 and used as grouping conditions.

【0060】撮像データ選択部33では、画像データメ
モリー部20に蓄えられている撮像データを順次読み込
み(S12)、撮像データを解析し色温度に関する情報
を抽出し(S13)、前記予め指定したグループ化条件
を満たすかどうかを判定し(S14)、前記条件を満た
す場合はその撮像データを撮像データ保持部31に送る
(S15)。
The image pickup data selection section 33 sequentially reads the image pickup data stored in the image data memory section 20 (S12), analyzes the image pickup data and extracts information on the color temperature (S13), and the previously designated group. It is determined whether or not the conversion condition is satisfied (S14), and if the condition is satisfied, the image pickup data is sent to the image pickup data holding unit 31 (S15).

【0061】[0061]

【数2】 [Equation 2]

【0062】次に、撮像被写体の構図がグループ化の条
件として指示された時に、撮像データをグループ化する
方法を説明する。図9にそのフローチャート例を示す。
Next, a method of grouping the imaged data when the composition of the imaged subjects is instructed as a grouping condition will be described. FIG. 9 shows an example of the flowchart.

【0063】構図がグループ化の条件として指示された
時は、撮像データ選択部33では、画像データメモリー
部20に蓄えられている撮像データを読み込み(図9ス
テップS21,S22)、構図が確認できる程度の簡易
再生を行い(S23)、簡易再生画像データを得る。簡
易再生は構図が確認できる程度の再生処理で良く、例え
ば、撮像データから画素間引きを行い、データ量を押さ
えた上で、輝度データとして再生する程度でよい。
When the composition is designated as a grouping condition, the imaging data selection section 33 reads the imaging data stored in the image data memory section 20 (steps S21 and S22 in FIG. 9) to confirm the composition. Simple reproduction is performed to some extent (S23), and simple reproduction image data is obtained. The simple reproduction may be a reproduction process that allows the composition to be confirmed. For example, pixels may be thinned out from the imaged data to suppress the data amount and then reproduced as luminance data.

【0064】次に、簡易再生画像データを用いてグルー
プ化の判断を行う(S29)。画像の類似性等の判断に
おいては、主観によるが判断が一般に効率的であるの
で、本発明の実施においても主観判断による方法が用い
る。即ち、グループ化の判断において、ユーザによる判
断指示が期待できる時は、一連の簡易再生画像データを
モニター等に表示し(S25)、ユーザがグループ化す
べき画像を選択する手段を設け、ユーザにより選択され
た画像に対応する撮像データは順次撮像データ保持部3
1に送られ、そこで保持される(S26,S30)。
Next, the grouping judgment is made using the simple reproduction image data (S29). In determining the similarity of images, the subjective judgment is generally effective, but the subjective judgment method is also used in the present invention. That is, in the grouping judgment, when a judgment instruction from the user can be expected, a series of simple reproduction image data is displayed on a monitor or the like (S25), and a means for the user to select an image to be grouped is provided and selected by the user. The captured image data corresponding to the captured images are sequentially captured by the captured image data holding unit 3.
1 and is held there (S26, S30).

【0065】例えば、グループ化の判断を自動的に行う
場合には、次に示す手続きが行われる。即ち、簡易再生
画像データからエッジ成分を抽出したエッジ画像データ
を形成し、エッジの空間的関係の同一性、相似性等を画
像処理技術を応用して検出する(S27,S28)。そ
して、同一性、相似性等の解析から得られる空間的相関
関係を調べ、相関関係の強い画像は、グループ化の条件
を満たす画像として判断し、撮像データ保持部31に送
られ、そこで保持される(S29,S30)。次に、撮
像データに付随する情報を用いて、撮像データをグルー
プ化する方法について説明する。図10にその動作例を
示すフローチャートを示す。
For example, when the grouping determination is automatically performed, the following procedure is performed. That is, edge image data in which edge components are extracted from the simple reproduction image data is formed, and the identity, similarity, etc. of the spatial relationship of edges are detected by applying image processing technology (S27, S28). Then, the spatial correlation obtained from the analysis of the identity, the similarity, etc. is examined, and the image having a strong correlation is judged as an image satisfying the grouping condition, and is sent to the imaging data holding unit 31 and held there. (S29, S30). Next, a method of grouping the imaged data using information attached to the imaged data will be described. FIG. 10 shows a flowchart showing the operation example.

【0066】撮像データに付随する情報とそれについて
の条件が、グループ化の為の条件として撮像データ選択
指示部34に与えられた時は、撮像データ選択部33で
は、画像データメモリー部20に蓄えられている撮像デ
ータに、前記条件に対応する情報が付記されているか調
べられ、前記情報が付記されている撮像データは順に読
み込まれる(図10ステップS31,S32)。つい
で、その付随データがグループ化の為の条件を満たして
いるかどうか調べられる(S33,S34)。
When the information attached to the image pickup data and the condition therefor are given to the image pickup data selection instructing section 34 as a condition for grouping, the image pickup data selecting section 33 stores the information in the image data memory section 20. It is checked whether or not the information corresponding to the condition is added to the captured image data, and the captured data to which the information is added is sequentially read (steps S31 and S32 in FIG. 10). Then, it is checked whether or not the associated data satisfies the grouping condition (S33, S34).

【0067】グループ化の為の条件は、例えば、撮像時
刻、EV値、絞り値、被写体距離、シャッター速度等の
数値的にその範囲を設定できる情報であれば、その数値
的に示された範囲内に、該情報値があるかどうかが条件
となる。撮像モード、撮影場所、ストロボ使用の有無、
光学ローパスフィルターの有無等の情報のように数値的
に示すことが困難な情報を用いる時の条件は例えば、地
名、モード名、有無が一致するかどうかが条件となる。
あるいは、撮像モードによるグループ化の情報(一連の
連写モードでとられた撮像データには同一のマークが付
与されている)や撮像場所によるグループ化の情報(同
一場所で撮像されたデータには同一マークが付与されて
いる)等が、付随データとして与えられている時には、
付与マークが一致する条件となる。条件を満たしている
撮像データは順に撮像データ保持部31に送られ(S3
5,S36)、そこで保持される。
The condition for grouping is, for example, if the information can be set numerically such as the image pickup time, EV value, aperture value, subject distance, shutter speed, etc., the range indicated numerically The condition is whether or not there is the information value. Shooting mode, shooting location, use of strobe,
The condition when using information that is difficult to be shown numerically, such as information about the presence or absence of an optical low-pass filter, is, for example, whether or not the place name, the mode name, and the presence or absence thereof match.
Alternatively, grouping information according to the image capturing mode (the same mark is attached to the image capturing data taken in the series of continuous shooting modes) or grouping information according to the image capturing location (for the data captured at the same location, (The same mark is given), etc., is given as ancillary data,
The condition is that the given marks match. The image pickup data satisfying the conditions are sequentially sent to the image pickup data holding unit 31 (S3
5, S36), and held there.

【0068】次に、画像再生時に、例えば特開平7−1
31796号公報に開示されているダイナミックレンジ
を拡大して合成画像を得ることを目的とする場合や、例
えば、特開平5−183789号公報に開示されている
ような複数の撮像データから広角撮像画像を得るパノラ
マ画像合成の手法により合成画像を得る場合において、
撮像データをグループ化する方法について説明する。こ
の様な場合においては、撮像時に、ある合成画像を得る
ための撮像データであることが付随情報として付与され
ることが望ましい。そのような場合においは、本実施例
は、上記付随情報をもとに、撮像データ群を構成する撮
像データを選択し、グループ化する。あるいは、構図情
報を用いて、撮像データをグループ化時に示したよう
に、撮像データを簡易再生し、グループ化判断を行い、
撮像データをグループ化する事もできる。また、合成画
像を得る処理においては、処理実行時に予め、画像デー
タメモリー部20にあるデータはすべてグループとして
扱う撮像データとしても選択されている場合もある。こ
の様な場合には、本発明は画像データメモリ部20にあ
る撮像データはすべて一連の撮像データとして扱い画像
再生を行う。
Next, at the time of image reproduction, for example, Japanese Patent Laid-Open No. 7-1
For the purpose of expanding the dynamic range disclosed in Japanese Patent No. 31796 to obtain a composite image, or for example, from a plurality of imaging data disclosed in Japanese Patent Laid-Open No. 5-183789, a wide-angle captured image is obtained. When obtaining a composite image by the method of panorama image composition,
A method of grouping image pickup data will be described. In such a case, it is desirable that the captured data for obtaining a certain composite image be added as the accompanying information at the time of capturing. In such a case, in the present embodiment, the image pickup data forming the image pickup data group is selected and grouped on the basis of the accompanying information. Alternatively, by using the composition information, the imaging data is simply reproduced as shown at the time of grouping the imaging data, the grouping judgment is performed,
Imaging data can be grouped. Further, in the process of obtaining the composite image, all the data in the image data memory unit 20 may be selected in advance as the imaged data to be treated as a group when the process is executed. In such a case, the present invention treats all the image pickup data in the image data memory section 20 as a series of image pickup data and reproduces the image.

【0069】上記に示した実施例に見られるように、本
発明の主旨は、撮像データを画像信号に変換する際に、
一定の条件を満たす複数の撮像データを一連の撮像デー
タ群として扱い、この一連の撮像データ群から前記画像
再生パラメータを求め、この画像再生パラメータを用い
て、前記撮像データ群に属する撮像データを画像データ
に変換することにある。従って、前記の本発明の主旨を
逸脱しない範囲において、様々なシーケンス処理が考え
られる。これらのシーケンス処理は例えば、論理化され
あるいはソフトウエア化され、または前記の本発明の主
旨を逸脱しない範囲においてアルゴリズム化され、この
アルゴリズムに従って動作するハードウエアや装置とし
て応用可能である。
As can be seen from the above-described embodiments, the gist of the present invention is to convert the image data into image signals.
A plurality of image pickup data satisfying a certain condition are treated as a series of image pickup data groups, the image reproduction parameters are obtained from the series of image pickup data groups, and the image pickup data belonging to the image pickup data groups are imaged using the image reproduction parameters. It is about converting to data. Therefore, various sequence processes can be considered without departing from the gist of the present invention. These sequence processes can be applied, for example, as hardware or a device that is logicalized or softwareized, or is algorithmized within the scope of the gist of the present invention, and operates according to this algorithm.

【0070】[0070]

【発明の効果】以上説明したように、本発明によれば、
一定の条件を満たす複数の撮像データを一連の撮像デー
タ群として扱い、この一連の撮像データ群から前記画像
再生パラメータを求め、この画像再生パラメータを用い
て、前記撮像データ群に属する撮像データを画像データ
に変換することができるので、従来の画像再生処理の方
法のように、画像再生パラメータを該撮像データから決
めようとすると一般にパラメータ決定の為の条件が満た
されなくなり、精度良くパラメータを求めることができ
なくなることがある、といった様な問題に本発明は対応
がとれ、より正確な画像再生パラメータを用いて撮像デ
ータを画像データに変換することが可能となり、正確な
画像再現が可能となる。また、画像(撮像データ)毎に
異なった画像再生パラメータを使用して再生処理が行わ
れることにより生じる撮像データ間の相関関係の消失等
も防止でき、画像間の情報や相関関係を保持した、より
正確な画像再生パラメータを用いて撮像データを画像デ
ータに変換することができるので、自然で正確な画像を
再生することができる。
As described above, according to the present invention,
A plurality of image pickup data satisfying a certain condition are treated as a series of image pickup data groups, the image reproduction parameters are obtained from the series of image pickup data groups, and the image pickup data belonging to the image pickup data groups are imaged using the image reproduction parameters. Since the data can be converted into data, if the image reproduction parameters are to be decided from the imaged data as in the conventional image reproduction processing method, the conditions for parameter determination are generally not satisfied, and the parameters can be obtained accurately. The present invention can cope with such a problem that the image data cannot be obtained, and the image data can be converted into the image data by using a more accurate image reproduction parameter, and the image can be reproduced accurately. Further, it is possible to prevent the disappearance of the correlation between the imaged data caused by performing the reproduction process using different image reproduction parameters for each image (imaged data), and the information and the correlation between the images are retained. Since the captured data can be converted into image data using a more accurate image reproduction parameter, a natural and accurate image can be reproduced.

【図面の簡単な説明】[Brief description of drawings]

【図1】 本発明に係わる画像再生装置の一実施例を示
すブロック図である。
FIG. 1 is a block diagram showing an embodiment of an image reproducing apparatus according to the present invention.

【図2】 本発明に係わる一実施例の動作を示すフロー
チャートである。
FIG. 2 is a flowchart showing the operation of one embodiment according to the present invention.

【図3】 本発明の一実施例に係わる被写体撮像例を模
式的に示した説明図である。
FIG. 3 is an explanatory diagram schematically showing an example of subject image pickup according to an embodiment of the present invention.

【図4】 本発明の一実施例に係わる被写体撮像例を模
式的に示した説明図である。
FIG. 4 is an explanatory diagram schematically showing an example of subject imaging according to an embodiment of the present invention.

【図5】 本発明の一実施例に係わる被写体撮像例を模
式的に示した説明図である。
FIG. 5 is an explanatory diagram schematically showing an example of subject imaging according to an embodiment of the present invention.

【図6】 本発明の一実施例の動作を示すフローチャー
トである。
FIG. 6 is a flowchart showing the operation of the embodiment of the present invention.

【図7】 本発明の一実施例において与えられる撮像デ
ータ選択条件を模式的に示した説明図である。
FIG. 7 is an explanatory diagram schematically showing the imaging data selection condition given in the embodiment of the present invention.

【図8】 本発明の一実施例において用いる撮像データ
選択条件範囲を模式的に示した説明図
FIG. 8 is an explanatory diagram schematically showing a range of image pickup data selection conditions used in an embodiment of the present invention.

【図9】 本発明の一実施例の動作を示すフローチャー
トである。
FIG. 9 is a flowchart showing the operation of the embodiment of the present invention.

【図10】 本発明の一実施例の動作を示すフローチャ
ートである。
FIG. 10 is a flowchart showing the operation of the embodiment of the present invention.

【符号の説明】 10 カラー画像撮像部(撮像手段) 20 撮像データメモリー部(記憶手段) 30 カラー画像再生処理部 31 撮像データ保持部 32 画像再生パラメータ決定部(決定手段) 33 撮像データ選択部 34 撮像データ選択指示部(指示手段) 35 画像再生処理部 36 コントロール部 40 カラー画像再生表示部 50 再生画像データメモリー部[Explanation of Codes] 10 Color Image Imaging Unit (Imaging Unit) 20 Imaging Data Memory Unit (Storage Unit) 30 Color Image Playback Processing Unit 31 Imaging Data Holding Unit 32 Image Replay Parameter Determining Unit (Determination Unit) 33 Imaging Data Selection Unit 34 Imaging data selection instruction section (instruction means) 35 image reproduction processing section 36 control section 40 color image reproduction display section 50 reproduction image data memory section

Claims (12)

【特許請求の範囲】[Claims] 【請求項1】 撮像手段によって撮像された撮像データ
を画像再生パラメータを用いて可視化可能な画像信号に
変換する画像再生方法であって、一定の条件を満たす複
数の撮像データからなる一連の撮像データ群を形成し、
この一連の撮像データ群から前記の画像再生パラメータ
を求め、この画像再生パラメータを用いて前記撮像デー
タ群に属する撮像データを画像データに変換することを
特徴とする画像再生方法。
1. An image reproduction method for converting image pickup data picked up by an image pickup means into an image signal which can be visualized by using an image reproduction parameter, and is a series of image pickup data consisting of a plurality of image pickup data satisfying a certain condition. Forming a flock,
An image reproducing method, characterized in that the image reproduction parameter is obtained from the series of image data, and the image data belonging to the image data group is converted into image data by using the image reproduction parameter.
【請求項2】 前記一定の条件を満たす複数の撮像デー
タからなる一連の撮像データ群は、撮像データを解析し
て得られる色温度データが予め指定する色温度データ範
囲内にある撮像データからなることを特徴とする請求項
1記載の画像再生方法。
2. A series of imaged data groups consisting of a plurality of imaged data satisfying the certain condition is composed of imaged data whose color temperature data obtained by analyzing the imaged data is within a color temperature data range designated in advance. The image reproducing method according to claim 1, wherein:
【請求項3】 前記一定の条件を満たす複数の撮像デー
タからなる一連の撮像データ群は、撮像データを簡易再
生して表示される画像群よりユーザーが選択する撮像デ
ータからなることを特徴とする請求項1記載の画像再生
方法。
3. A series of imaged data groups consisting of a plurality of imaged data satisfying the certain condition are imaged data selected by a user from an image group displayed by simply reproducing the imaged data. The image reproducing method according to claim 1.
【請求項4】 前記一定の条件を満たす複数の撮像デー
タからなる一連の撮像データ群は、撮像データに付随し
た情報である、撮像時刻、EV値、絞り値、被写体距
離、シャッター速度のいずれか或はその組み合わせの情
報が、予め数値的に指定する範囲内にある撮像データか
らなることを特徴とする請求項1記載の画像再生方法。
4. A series of image pickup data groups consisting of a plurality of image pickup data satisfying the predetermined condition are any of image pickup time, EV value, aperture value, subject distance, and shutter speed, which are information attached to the image pickup data. Alternatively, the image reproduction method according to claim 1, wherein the information of the combination is image pickup data within a range which is numerically designated in advance.
【請求項5】 前記一定の条件を満たす複数の撮像デー
タからなる一連の撮像データ群は、撮像データに付随し
た情報である、撮像モード、撮像場所、ストロボ使用の
有無、光学ローパスフィルターの有無のいずれか或はそ
の組み合わせの情報が、予め指定する条件を満たす撮像
データからなることを特徴とする請求項1記載の画像再
生方法。
5. A series of imaged data groups consisting of a plurality of imaged data satisfying the certain conditions, which are information attached to the imaged data, such as image pickup mode, image pickup place, use of strobe, and presence / absence of optical low-pass filter. 2. The image reproducing method according to claim 1, wherein the information of any one or a combination thereof includes image pickup data satisfying a condition designated in advance.
【請求項6】 前記一定の条件を満たす複数の撮像デー
タからなる一連の撮像データ群は、合成画像を形成する
ための撮像データであることを示す付随情報を持つ撮像
データからなることを特徴とする請求項1記載の画像再
生方法。
6. A series of imaged data groups consisting of a plurality of imaged data satisfying the certain condition is composed of imaged data having accompanying information indicating that the imaged data is for forming a composite image. The image reproducing method according to claim 1.
【請求項7】 撮像手段によって撮像された撮像データ
を画像再生パラメータを用いて可視化可能な画像信号に
変換する画像再生装置であって、 撮像された撮像データを記憶する撮像データメモリ手段
と、撮像データ選択の条件を指示する撮像データ選択指
示手段と、前記撮像データメモリ手段から撮像データを
選択する撮像データ選択手段と、該撮像データ選択手段
が選択した撮像データを保持する撮像データ保持手段
と、該撮像データ保持手段に保持されている選択された
撮像データを用いて画像再生パラメータを決定する画像
再生パラメータ決定手段と、該画像再生パラメータ決定
手段により決定された画像再生パラメータを用いて前記
撮像データ保持手段に保持された撮像データの画像再生
をする画像再生処理手段を備え、 一定の条件を満たす複数の撮像データからなる一連の撮
像データ群を形成し、この一連の撮像データ群から前記
の画像再生パラメータを求め、この画像再生パラメータ
を用いて前記撮像データ群に属する撮像データを画像デ
ータに変換することを特徴とする画像再生装置。
7. An image reproduction device for converting image pickup data picked up by an image pickup means into an image signal which can be visualized by using an image reproduction parameter, wherein the image pickup data memory means stores the picked up image pickup data. Imaging data selection instructing means for instructing conditions of data selection, imaging data selecting means for selecting imaging data from the imaging data memory means, imaging data holding means for holding the imaging data selected by the imaging data selecting means, Image reproduction parameter determining means for determining an image reproduction parameter using the selected image data stored in the image data storage means, and the image data using the image reproduction parameter determined by the image reproduction parameter determining means An image reproduction processing means for reproducing an image of the image data held in the holding means is provided, and A series of image pickup data groups consisting of a plurality of image pickup data satisfying the above conditions is formed, the image reproduction parameters are obtained from the series of image pickup data groups, and the image pickup data belonging to the image pickup data group is obtained by using the image reproduction parameters. An image reproducing device characterized by converting to.
【請求項8】前記一定の条件を満たす複数の撮像データ
からなる一連の撮像データ群は、撮像データを解析して
得られる色温度データが予め指定する色温度データ範囲
内にある撮像データからなることを特徴とする請求項7
記載の画像再生装置。
8. A series of imaged data groups consisting of a plurality of imaged data satisfying the certain condition is composed of imaged data whose color temperature data obtained by analyzing the imaged data is within a color temperature data range designated in advance. 7. The method according to claim 7, wherein
The image reproducing device described.
【請求項9】 前記一定の条件を満たす複数の撮像デー
タからなる一連の撮像データ群は、撮像データを簡易再
生して表示される画像群よりユーザーが選択する撮像デ
ータからなることを特徴とする請求項7記載の画像再生
装置。
9. A series of image pickup data groups consisting of a plurality of image pickup data satisfying the predetermined condition are image pickup data selected by a user from an image group displayed by simply reproducing the image pickup data. The image reproducing device according to claim 7.
【請求項10】 前記一定の条件を満たす複数の撮像デ
ータからなる一連の撮像データ群は、撮像データに付随
した情報である、撮像時刻、EV値、絞り値、被写体距
離、シャッター速度のいずれか或はその組み合わせの情
報が、予め数値的に指定する範囲内にある撮像データか
らなることを特徴とする請求項7記載の画像再生装置。
10. A series of imaged data groups consisting of a plurality of imaged data satisfying the predetermined condition is any one of imaged time, EV value, aperture value, subject distance, and shutter speed, which is information attached to the imaged data. 8. The image reproducing apparatus according to claim 7, wherein the information of the combination is image pickup data within a range which is numerically designated in advance.
【請求項11】 前記一定の条件を満たす複数の撮像デ
ータからなる一連の撮像データ群は、撮像データに付随
した情報である、撮像モード、撮像場所、ストロボ使用
の有無、光学ローパスフィルターの有無のいずれか或は
その組み合わせの情報が、予め指定する条件を満たす撮
像データからなることを特徴とする請求項7記載の画像
再生装置。
11. A series of imaged data groups consisting of a plurality of imaged data satisfying the certain conditions, which are information attached to the imaged data, such as image pickup mode, image pickup location, use of strobe, and presence of optical low-pass filter. 8. The image reproducing apparatus according to claim 7, wherein the information of any one or a combination thereof includes image pickup data satisfying a condition designated in advance.
【請求項12】 前記一定の条件を満たす複数の撮像デ
ータからなる一連の撮像データ群は、合成画像を形成す
るための撮像データであることを示す付随情報を持つ撮
像データからなることを特徴とする請求項7記載の画像
再生装置。
12. A series of imaged data groups consisting of a plurality of imaged data satisfying the certain condition is composed of imaged data having accompanying information indicating that the imaged data is for forming a composite image. The image reproducing device according to claim 7.
JP19667795A 1995-08-01 1995-08-01 Image reproduction method and image reproduction apparatus Expired - Fee Related JP3943611B2 (en)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP19667795A JP3943611B2 (en) 1995-08-01 1995-08-01 Image reproduction method and image reproduction apparatus
US08/689,054 US6160579A (en) 1995-08-01 1996-07-30 Image processing apparatus and method
EP05076332A EP1592227B1 (en) 1995-08-01 1996-07-31 Apparatus and method for determining an image processing parameter from image data at a user-selected image position
EP96305647A EP0757473B1 (en) 1995-08-01 1996-07-31 Image processing apparatus and method
DE69634867T DE69634867T2 (en) 1995-08-01 1996-07-31 Image processing apparatus and method
US09/697,315 US7098944B1 (en) 1995-08-01 2000-10-27 Image processing apparatus and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP19667795A JP3943611B2 (en) 1995-08-01 1995-08-01 Image reproduction method and image reproduction apparatus

Publications (2)

Publication Number Publication Date
JPH0946579A true JPH0946579A (en) 1997-02-14
JP3943611B2 JP3943611B2 (en) 2007-07-11

Family

ID=16361766

Family Applications (1)

Application Number Title Priority Date Filing Date
JP19667795A Expired - Fee Related JP3943611B2 (en) 1995-08-01 1995-08-01 Image reproduction method and image reproduction apparatus

Country Status (1)

Country Link
JP (1) JP3943611B2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008236114A (en) * 2007-03-19 2008-10-02 Nec Corp Image input system, image processing device, and image input method
JP2010087558A (en) * 2008-09-29 2010-04-15 Kyocera Corp Moving picture reproducing apparatus
JP2014147096A (en) * 2014-03-24 2014-08-14 Canon Inc Imaging apparatus
US9264685B2 (en) 2009-06-30 2016-02-16 Canon Kabushiki Kaisha Image capture apparatus

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS57185777A (en) * 1981-05-12 1982-11-16 Fuji Photo Film Co Ltd Electronic camera with electronic memo
JPH0471070A (en) * 1990-07-11 1992-03-05 Minolta Camera Co Ltd Camera system
JPH0593973A (en) * 1991-05-21 1993-04-16 Konica Corp Method for determining exposure for photograph printing
JPH06261333A (en) * 1993-03-08 1994-09-16 Canon Inc Image pickup device
JPH06276466A (en) * 1993-03-19 1994-09-30 Minolta Camera Co Ltd Picture reproduction system using index print
JPH06292231A (en) * 1993-03-31 1994-10-18 Toppan Printing Co Ltd Plate making system

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS57185777A (en) * 1981-05-12 1982-11-16 Fuji Photo Film Co Ltd Electronic camera with electronic memo
JPH0471070A (en) * 1990-07-11 1992-03-05 Minolta Camera Co Ltd Camera system
JPH0593973A (en) * 1991-05-21 1993-04-16 Konica Corp Method for determining exposure for photograph printing
JPH06261333A (en) * 1993-03-08 1994-09-16 Canon Inc Image pickup device
JPH06276466A (en) * 1993-03-19 1994-09-30 Minolta Camera Co Ltd Picture reproduction system using index print
JPH06292231A (en) * 1993-03-31 1994-10-18 Toppan Printing Co Ltd Plate making system

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008236114A (en) * 2007-03-19 2008-10-02 Nec Corp Image input system, image processing device, and image input method
JP2010087558A (en) * 2008-09-29 2010-04-15 Kyocera Corp Moving picture reproducing apparatus
US9264685B2 (en) 2009-06-30 2016-02-16 Canon Kabushiki Kaisha Image capture apparatus
JP2014147096A (en) * 2014-03-24 2014-08-14 Canon Inc Imaging apparatus

Also Published As

Publication number Publication date
JP3943611B2 (en) 2007-07-11

Similar Documents

Publication Publication Date Title
EP0757473B1 (en) Image processing apparatus and method
JP3528184B2 (en) Image signal luminance correction apparatus and luminance correction method
US7057653B1 (en) Apparatus capable of image capturing
US7358988B1 (en) Image signal processor for performing image processing appropriate for an output device and method therefor
JP3668014B2 (en) Image processing method and apparatus
US8488015B2 (en) Camera using preview image to select exposure
JP4244063B2 (en) Image processing apparatus, image processing method, and program
JP3153147B2 (en) Imaging device
JPH08340542A (en) Electronic still camera
JPH09322191A (en) Image input device
JP3184309B2 (en) Gradation correction circuit and imaging device
US20060114527A1 (en) Image pickup apparatus
US6201893B1 (en) Image reproduction apparatus and method
JP2003046848A (en) Imaging system and program
JP2003324656A (en) Imaging device and imaging method, recording medium, and program
JP2002223387A (en) Imaging unit
JP2004282133A (en) Automatic white balance processor and method, and image signal processor
JP3943611B2 (en) Image reproduction method and image reproduction apparatus
JP4175954B2 (en) Image display device and image display method
JPH10322592A (en) Method and device for controlling electronic camera
JPH11155108A (en) Video signal processor and processing method and video camera using the same
JP3841584B2 (en) Imaging device
JPH10243289A (en) Image adder
JP2007267170A (en) Electronic camera with chroma saturation regulating function and image processing program
JPH03106269A (en) Video signal processor for video camera

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20040206

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040224

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040426

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20041026

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20041122

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20041126

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20050128

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070406

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110413

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130413

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130413

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140413

Year of fee payment: 7

LAPS Cancellation because of no payment of annual fees