WO2005086495A1 - フィルタおよび動画カメラ - Google Patents

フィルタおよび動画カメラ Download PDF

Info

Publication number
WO2005086495A1
WO2005086495A1 PCT/JP2005/004171 JP2005004171W WO2005086495A1 WO 2005086495 A1 WO2005086495 A1 WO 2005086495A1 JP 2005004171 W JP2005004171 W JP 2005004171W WO 2005086495 A1 WO2005086495 A1 WO 2005086495A1
Authority
WO
WIPO (PCT)
Prior art keywords
color
optical
spectral
image
light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2005/004171
Other languages
English (en)
French (fr)
Inventor
Yoshifumi Shimodaira
Shoichi Yokoi
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shizuoka University NUC
Original Assignee
Shizuoka University NUC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2004066576A external-priority patent/JP2005257827A/ja
Priority claimed from JP2004068501A external-priority patent/JP2005260527A/ja
Application filed by Shizuoka University NUC filed Critical Shizuoka University NUC
Publication of WO2005086495A1 publication Critical patent/WO2005086495A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/12Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only

Definitions

  • the present invention has an improved spectral filter used in a camera device, which is arranged in front of an image sensor such as a CCD imaging device, and has a color gamut equal to the color gamut of a person configured using the filter.
  • an image sensor such as a CCD imaging device
  • a spectral filter is arranged in front of the CCD so as to correspond to the CCD.
  • the CCD camera is described in Non-Patent Document 1 “Introduction to CCD Camera Technology” written by Hiroo Takemura, Corona (1997), or other general literature.
  • These filters are placed, for example, in front of the CCD photocathode corresponding to the three primary colors of red, green and blue, and have respective red, green and blue spectral characteristics.
  • the filters disperse the light on each of the red, green, and blue optical path channels, pass only the corresponding components, and input them to the photocathode of each CCD image sensor.
  • a wide color gamut video camera includes a lens system, a light beam splitter, four color filters, four optical sensors, and an arithmetic processing unit. .
  • the lens system forms the incident light from the target object on the surface of the optical sensor via a light beam splitter, and generates an inverted image on a photoelectric conversion surface of a sensor such as a CCD.
  • the color filters pass light beams of different wavelength ranges and wavelength ranges equal to the XYZ spectral characteristics defined on the CIE chromaticity diagram.
  • the attenuations of the light beams entering the respective color filters are equal to each other.
  • sensors such as CCDs perform photoelectric conversion on the incident light and form a projection image corresponding to the target object on the photoelectric conversion surface.
  • Sensors such as CCDs are wide and have sufficient sensitivity characteristics to the color gamut. Let's say.
  • the image signals of the real images in the color gamut corresponding to the different color filters obtained by the sensor powers of four CCDs and the like are respectively input to the arithmetic processing unit.
  • the processing unit operates at high speed and obtains a chromaticity value for the color of the target object in real time.
  • the calculation by the arithmetic processing unit is described in, for example, A. N. Netravali and B. G. Haskell, “Digital Images” (Plenum Press, 1988), Chapter 1: Numerical Representation of Visual Information (AN Netravali and B) u. Hasell, Digital Pictures, Plenum Press, 1988, chapter 1: Numerical Representation of Visual Information). In other words, this is the color matching function obtained when the three primary color wavelengths are 700.Onm (R), 546.lnm (G), and 435.8 nm (B) based on the human luminosity characteristics.
  • a processing device In a camera device, it is ideal to match the spectral characteristics of each filter to the calculated values. The problem is that it is difficult in reality.
  • the reference white color was D65, and the database was all data except for the “calib” category of the SOCS database (see Non-Patent Document 3). Table 2 shows the results. From this, it can be seen that if it is shifted by lnm or more, it will not be within the “3rd class color difference”.
  • Class 2 (Practical color difference a) 1.2 Most people can easily recognize color difference when judging side by side
  • Class 4 5.0 Appears to be almost the same when compared over time
  • the color represented by the camera signal exactly matches the color of the target object.
  • No camera capable of capturing such a characteristic has been produced. That is, the output signal of the camera used in the image system widely used at present is processed and output so that the color gamut is equal to the color gamut of the display. Therefore, if the color of the target object is outside the color gamut of the display, it is converted to a color within the color gamut and output. Therefore, colors outside the color gamut of the display cannot be extracted as accurate signals. Furthermore, even if the color of the target object is within the color gamut, it is output to the display as a color signal different from the original color of the target object.
  • the camera is composed mainly of a light receiving unit composed of a light collector, a spectroscope, and a plurality of light receivers.
  • the light that has entered the light receiving unit is collected by a concentrator consisting of a lens system, and is split into a plurality of wavelength ranges by a spectroscope consisting of a spectral filter.
  • the signals in each wavelength range are converted to the three primary colors of RGB through multiple receivers.
  • multiple photodetectors are placed on a single silicon substrate chip in a two-dimensional matrix.
  • JP-A-2002-54994 “Imaging device, imaging display system and imaging printing system” can be cited.
  • a spherical lens and a waveguide are used as a light collector to efficiently output incident light to a spectroscope.
  • the spectroscope uses a diffraction grating, a prism, a photonic crystal, or a film filter composed of an oxide film, a dielectric film, a polymer film, or the like.
  • the multiple photodetectors are configured using a CCD imaging device composed of a single silicon substrate chip.
  • the spectroscope divides the chromaticity range into four regions and eleven regions on the CIE chromaticity diagram to determine the color of the target object, and outputs a color signal different from the original color of the target object to the display side.
  • Such a multi-band wide color gamut camera that is currently realized specifically acquires the color information of the target object using a large number of four or more color filters, and the spectral power of the object also indicates the color of the object. Is estimated.
  • Such color estimation is not accurate because the spectral distribution of colors is different for natural and artificial objects.
  • Another problem is that the amount of calculation for calculating the spectral information power of the color of the target object is very large.
  • JP-A-6-261332 “Primary color conversion method for multi-primary color display” can be mentioned.
  • Japanese Patent Application Laid-Open No. 6-261332 provides two arithmetic methods for converting a signal for displaying three primary colors into a signal for displaying multiple primary colors exceeding three primary colors.
  • the determiner determines whether or not the input three primary colors are located at corresponding positions on the CIE chromaticity diagram.
  • three colors are selected from among the multi-primary colors exceeding the three primary colors converted according to the determination result, and a linear combination thereof is generated by an arithmetic processing unit.
  • a multi-primary signal exceeding the three primary colors converted by the determination result is obtained as a linear combination of the three primary colors by the arithmetic processing unit and output.
  • Three colors are selected from the multi-primary signal.
  • the output of the other colors becomes negative, the output is made zero and a correction signal is prepared, and the correction signal is added to the linear combination of the three primary color signals selected above. Output.
  • these primary color conversion methods for multi-primary color display assuming values are given to the variables of the linear combination used in the arithmetic processing, unless a concrete basis and method for giving the variable values are actually specified. However, it cannot be practically used for a moving image camera. In addition, the real-time requirements of video cameras have not been met until now.
  • the functions [r (), g (), b (e)] are the three stimulus values for a given three primary colors, for example, if the three primary wavelengths are 700.Onm (R), 546.lnm (G), 435.8 Color at 8nm (B)
  • the matching function (r ( ⁇ ), g ( ⁇ ), b ( ⁇ )) represents the color gamut of a person
  • G X X + Y Y + ZZ (3)
  • B X X + Y Y + ZZ
  • R GB and X, Y, Z are vectors.
  • C, RGB and X, Y, Z are vectors. Basically
  • Patent Document 1 Japanese Patent Application No. 2004-36937
  • Patent Document 2 Japanese Patent Application Laid-Open No. 2002-54994
  • Patent Document 3 JP-A-6-261332
  • Non-patent Document 1 Hiroo Takemura, "Introduction to CCD Camera Technology", Corona, 1997
  • Non-Patent Document 2 Japanese Society of Color Science: “New Edition of Color Science Handbook [2nd Edition]”, University of Tokyo Press, 1998
  • Non-Patent Document 3 Japanese Standards Association: "TRX0012 Standard Object Spectral Database for Color Reproduction Evaluation (SOCS)", Japanese Standards Association, 1999
  • Non-Patent Document 4 A. Netravali and BG Haskell, “Digital Images” (Plenum Press, 1988), Chapter 1: Numerical Representation of Visual Information (AN Netravali and BG Haskell, "Digital Pictures , Plenum Press, 1988, chapter 1: Numerical
  • the problem to be solved is that a color difference in luminosity is recognized in the spectral characteristics of an actual filter as compared with a filter satisfying a router condition.
  • the problem to be solved by the video camera according to the present invention is that, in the video camera, since the color gamut of a person is not equal to the color gamut of the camera, the color represented by the camera output signal matches the color of the object. The point is not.
  • An object of the present invention is to provide a filter suitable for equalizing the color gamut of a person with the color gamut of a camera. Is to do.
  • Still another object of the present invention is to use a filter according to the present applicant, which is suitable for equalizing the color gamut of a person and the color of a camera. Means to solve the problem to provide a video camera having a color gamut equal to the color gamut of a person that can be matched
  • each spectral characteristic in a filter that satisfies the router condition, has a mountain shape having a single peak without a negative value, and a peak value of each spectral characteristic curve. This is a means for realizing the one that has the characteristics that are equivalently exchanged with each other and that minimizes the overlap between the spectral characteristic curves.
  • the video camera according to the present invention is based on the spectral sensitivities obtained by linearly converting the XYZ color matching function defined by the CIE and the relationship shown in the following specific matrix.
  • a color filter is provided, and the optical image that has passed through these color filters is converted into an electric signal by an optical sensor. This is a video camera that obtains the chromaticity value of the object!
  • a moving image camera includes a lens system for forming an optical projection image inside by entering an optical real image from a target object, and a light beam incident from the lens system.
  • a light beam splitter for obtaining a light output by dividing the light into three so as to have the same intensity, and a light beam splitter provided corresponding to the light output of the light beam splitter.
  • Three color filters based on the spectral sensitivity obtained by linear conversion in the relationship described above, and are provided corresponding to the three color filters, and sequentially convert the optical image into an electric image by internal scanning.
  • Optical sensors and the three optical sensors for And an arithmetic processing unit for receiving the output electric signal of the above and generating a video signal equal to the color gamut of a person.
  • the moving image camera according to claim 4 of the present invention includes a lens system for entering an optical real image from a target object to form an optical projection image inside, and a light beam incident from the lens system.
  • a first optical beam splitter for obtaining an optical output by dividing the light into three so as to have the same intensity, and an XYZ color matching function defined by the CIE and the specific matrix provided corresponding to the optical output of the optical beam splitter.
  • the light An optical sensor for arranging the space division in pixel units or row units or column units corresponding to the disks, inputting the optical image of the optical output, and sequentially converting the optical image into an electric image; and An arithmetic processing unit for inputting an output electric signal, returning the space-divided electric signal to a video signal based on the spectral characteristics of SI, S2, and S3, and generating a video signal equal to a human color gamut; , Are provided.
  • a moving image camera includes a lens system for forming an optical projection image internally by entering an optical real image from a target object, and a light output corresponding to the lens system.
  • a microblock is formed in units of three pixels, spatially divided in units of the microblock, and the spectral sensitivity obtained by linearly converting the XYZ color matching function defined by the CIE and the relationship shown in the specific matrix.
  • An optical sensor that is provided in close contact with three base color filters and a color filter that has a microblock corresponding to the spectral sensitivity, and sequentially converts an optical image to an electric image by internal scanning.
  • the spectral characteristics of the obtained filter have no color difference in luminosity. Since this is not observed, no color difference is felt between different cameras, and the effect of improving color reproducibility is obtained.
  • the moving image camera of the present invention extracts the spectral information by using three color filters to perform theoretical calculations. Since the color information can be obtained more accurately, there is an advantage that the moving image whose calculation amount is smaller than that obtained from the spectrum information can be easily displayed in real time with a video signal.
  • FIG. 1 is an explanatory diagram showing ranges of g 1 and g 2 satisfying a condition 1 required for a spectral characteristic of a filter.
  • FIG. 1 A first figure.
  • FIG. 3 is an explanatory diagram showing overall spectral characteristics obtained without performing correction according to the present invention.
  • FIG. 4 is a graph showing characteristics of three color filters according to the present invention.
  • FIG. 5 is an explanatory diagram showing the basic principle of a moving image camera having an equal U ⁇ color gamut in a human color gamut.
  • FIG. 6 is an explanatory diagram showing a first embodiment of a moving image camera using three color filters.
  • FIG. 7 is an explanatory diagram showing a second embodiment of the moving image camera using one color filter.
  • FIG. 8 is an explanatory diagram showing a configuration example of a color filter used in a second embodiment of the video camera.
  • Equation (9) holds from equations (6), (7) and (8).
  • ⁇ ( ⁇ ), q (), and r () are defined as in equations (10)-(12).
  • ⁇ ( ⁇ ) x ' ⁇ A ⁇ ⁇ Z ! (1 0)
  • Figure 2 shows the range. If Condition 2 is satisfied, it is shown from Figures 2 and 3 that Condition 1 is not important.
  • the output value for the equal energy spectrum is obtained by standardization as shown in Expression (8).
  • the maximum value of each band is not uniform.
  • S '(e) denote the total spectral characteristics after normalization, and denote the coefficient to be normalized.
  • the total spectral sensitivity obtained by the standardization is as shown in equation (14). O
  • g ag
  • g ag
  • the overlap between the combined spectral characteristics is related to effective bit utilization. In other words, the greater the overlap between total spectral characteristics, the greater the number of unused bit combinations.
  • Table 3 shows combinations of coefficients that satisfy the conditions 1 and 2 and the condition 3 relatively well.
  • FIG. 4 shows the obtained overall spectral characteristics.
  • the spectral characteristics have the peak values shown in Table 4 below.
  • the calculation results will be described with respect to the deviation of the overall spectral characteristics.
  • the calculated result of the color difference of the reproduced color may be two to three times greater than the theoretical characteristic of the ideal color difference.
  • Table 5 shows the difference between the case where quantization is not performed (theoretical value) and the case where quantization is performed with 12 bits (which is assumed to be linear).
  • the matrix used to convert to XYZ is the same as the original.
  • the force indicated by the matrix conversion formula (12) may be used for the conversion which is not necessarily based on the linear conversion. I did not show the conversion matrix with the intent of actively eliminating nonlinear conversion.
  • the device according to the present invention is intended to realize a video camera having a color gamut equal to the color gamut of a person.
  • the purpose is to achieve a spectral information by a minimum of three color filters (the above-mentioned spectral characteristics SI, S2, S3). By using these spectral information, real time can be easily reduced with a small amount of computation.
  • the movie was video signaled by the system. Before describing the embodiments, the color filters used in the present invention will be described.
  • FIG. 4 is a graph showing the spectral characteristics of the color filters used in the device according to the present invention.
  • SI, S2, and S3 in the figure represent the characteristics of the three color filters based on the spectral sensitivities obtained by linearly converting the XYZ color matching function determined by the CIE and the relationship shown in the specific matrix described above. Each is shown.
  • S1 has a peak wavelength of 582 nm, 1Z2 width power 23-629 nm, and 1/10 width power 91-663 nm.
  • S2 has a peak wavelength of 543 nm, 1Z2 width power of 06-589 nm, and 1/10 width power of 64-632 nm.
  • S3 has a peak wavelength of 446 nm, a half width of 423-478 nm, and a width of lZlO of 09-508 nm. It should be noted that the image quality is not substantially impaired even if the respective peak wavelengths of the spectral characteristics move within the range of 4 nm, 3 nm, and 7 nm.
  • FIG. 5 is a block diagram showing a basic configuration of a moving image camera according to the present invention.
  • the video camera consists of a lens system 1, an optical beam splitter 2, the three color filters 3-5 described above (these filters have the characteristics of SI, S2, and S3), three optical sensors 7-9, and arithmetic processing. It is configured to include the device 11.
  • the lens system 1 forms the incident light from the target object 12 on the surface of the optical sensor 7-9 via the light beam splitter 2, and generates an inverted image on the photoelectric conversion surface of the sensor 7-9.
  • the color filters 3-5 pass light beams of wavelength range components, such as spectral sensitivity obtained by linearly converting the XYZ color matching function defined by the CIE and the relationship shown in the specific matrix, in different wavelength ranges. .
  • the optical beam splitter 2 shows a simple configuration example.
  • the ratio of the optical power incident on each color filter 3-5 needs to be clear.
  • the three optical sensors 7-9 perform photoelectric conversion on the incident light, and form a projected image corresponding to the target object 12 on the photoelectric conversion surface.
  • Each of the optical sensors 7-9 has sufficient sensitivity characteristics for a wide color gamut such as a CCD imaging device.
  • the video signals of the real images in the color gamut corresponding to the different color filters 3-5 obtained from the three optical sensors 7-9 are input to the arithmetic processing unit 11, respectively.
  • the arithmetic processing device 11 operates at high speed and obtains a chromaticity value for the color of the target object 12 in real time.
  • the calculation by the arithmetic processing unit 11 is described, for example, by A. N. Netravali, B. Gino, and Skell, “Digital Images” (Plenum Press, 1988), Chapter 1: Numerical Representation of Visual Information (AN Netravali and BG Haskell, "Digital Pictures", Plenum Press, 1988, Chapter 1: Numerical Representation of Visual Information) .
  • the following first or second method is specifically adopted for realizing the video camera according to the present invention in a small size and light weight.
  • FIG. 6 is a block diagram showing one embodiment of the moving image camera according to the present invention.
  • 1 is an optical system
  • 2 is a light beam splitter
  • 3-5 are color filters
  • 2 ' is a second light beam splitter
  • 7 is an optical sensor
  • 11 is an arithmetic processing unit.
  • the second light beam splitter 2 has a mask 21-23 corresponding to a pixel unit or a row or column unit of a matrix array of a CCD imaging device, and outputs light of each filter 3-5.
  • a spatial division is performed on the optical sensor 7 'formed by a D imaging device or the like. Therefore, the light beam split by the above-described configuration is input to the optical sensor 7 'that is in close contact with the mask, and a split optical image is formed.
  • a stripe filter known in a single-chip CCD camera as a method for realizing the division in row units ⁇
  • an optical image obtained through an optical system 1 composed of a lens is further divided into three directions by a light beam splitter 2, and three different wavelength region characteristics are provided on each optical path. Insert into the color filter 3-5.
  • the three optical images that have passed through the respective color filters 3-5 are collected by the second light beam splitter 2 and sequentially formed on one sensor 7 by a method such as space division.
  • the necessary processing is performed on the video signal obtained from the optical sensor 7 'by the arithmetic processing unit 11' to obtain a signal based on the spectral characteristics of SI, S2, and S3.
  • the second light beam splitter 2 ′ and the optical sensor 7 ′ are provided with masks 21 to 23 for realizing space division. Therefore, spatial resolution is sacrificed in this camera system. Except for the registration, it can be realized relatively easily and real-time can be realized.
  • FIG. 7 is a block diagram showing another embodiment of the light gamut video camera according to the present invention.
  • reference numeral 1 denotes an optical system
  • 3 denotes a color filter having three wavelengths, each of which has three wavelengths and three pixels as one microblock
  • 7 denotes an optical sensor comprising a matrix array such as a CCD imaging device
  • 11 Is an arithmetic processing unit.
  • a color filter film having three different wavelength band characteristics on the CIE chromaticity diagram corresponding to one of the three pixels is formed by space division.
  • the wavelength range characteristic of each segment of one microblock is the deviation of the spectral sensitivity obtained by linear conversion based on the XYZ color matching function defined by the CIE and the relationship shown in the specific matrix.
  • FIG. 8 is an explanatory diagram showing an example of a detailed configuration of the color filter.
  • the optical sensor 7 is passed through three tiled color filter segments (repeated stripes of SI, S2, and S3 in this embodiment) placed immediately before the optical sensor 7 ′′.
  • a signal based on the spectral characteristics of SI, S2, and S3 by performing an appropriate calculation based on Equations (1) and (4) above.
  • an RGB color filter is placed just before the optical sensor!
  • the above configuration can be realized by replacing this color filter with three filters having spectral sensitivity characteristics obtained by linearly converting the XYZ color matching function defined by the CIE and the relationship shown in the specific matrix. This is a method that can be realized in a small size and real-time like a conventional camera.
  • the optical image is converted into an electric signal by rotating a disk on which three filters are arranged immediately before the optical sensor of the camera.
  • One image signal is obtained by calculating three temporally different image signals. This method of rotating the filter takes a long time to acquire one image, which is used in colorimeters, and is not suitable for acquiring moving images.
  • the color information of the target object can be obtained by using three color filters and an arithmetic processing unit to acquire image information of a wide color gamut.
  • Camera devices using a CCD as an image sensor are used not only in homes, which have high stability and reliability, but also in industrial, security, and other fields. Accurate colors in these areas Since it is strongly required that information is obtained and that no color difference is recognized between different cameras, the filter of the present invention is expected to be widely used to satisfy such requirements.
  • Video cameras with a color gamut equal to the color gamut of a person are extremely wide-ranging, for example, robots that act as substitutes for humans, surgical medical sites such as surgery, artworks such as paintings, etc. It is expected to be used in certain fields.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Color Television Image Signal Generators (AREA)

Abstract

 色再現性が良好となるフィルタを提供し、さらに前記フィルタを用いて人の色域に等しい色域をもつ動画カメラを提供する。  本発明によるフィルタは、CIE−XYZ分光特性を満足する各分光特性(S1 ,S2 ,S3 )が負の値をもたない、単独ピークをもつ山形であり、それぞれの分光曲線のピーク値が等しく、かつ分光曲線のピーク値が等しく分光曲線のすその部分での重なりはできるだけ少なくするという条件を満たしたフィルタである。このフィルタはピーク波長が約582nm,543nm,446nmにある。動画カメラは、前記フィルタを用いて構成される。

Description

フィルタおよび動画カメラ
技術分野
[0001] 本発明は、 CCDイメージングデバイス等の撮像素子の前面に配置され、カメラ装置 に使用される改良された分光フィルタおよび前記フィルタを用いて構成した人の色域 と等しい色域をもった動画用カメラに関する。
背景技術
[0002] (分光フィルタの背景技術)
CCDを撮像素子としたカメラ装置では、 CCDの前面に CCDに対応して分光フィル タが配置されている。 CCDカメラに関しては非特許文献 1「CCDカメラ技術入門」竹 村裕夫著,コロナ社(1997)、あるいはその他の一般文献に掲載されている。これら のフィルタは、例えば赤緑青の 3原色に対応する CCDの光電面の前面に置かれ、そ れぞれ赤緑青の分光特性をもったものである。フィルタは赤緑青のそれぞれの光路 チャネル上で、各チャネル上の光を分光して該当する成分のみを通過させ、各 CCD 撮像素子の光電面にそれぞれ入力して 、る。
[0003] 一方、広色域の動く対象物体に対応してチャネル数を増やすことも可能である。例 えば、この種のカメラ装置に関する特許文献の一例として、特願 2004-36937号「 広色域動画カメラ」を挙げることができる。特願 2004-36937号によれば、広色域動 画カメラはレンズ系と、光ビームスプリッタと、 4つの色フィルタと、 4つの光学センサと 、演算処理装置とを備えて構成したものである。レンズ系は対象物体からの入射光を 、光ビームスプリッタを介して光学センサの表面に結像させ、その倒立像を CCD等の センサの光電変換面上に生成する。色フィルタはそれぞれ異なった波長域の、 CIE 色度図上に定められた XYZの分光特性に等しい波長域成分の光ビームを通過させ る。光ビームスプリッタは単純な構成例としてある力 各色フィルタに入射する光パヮ 一の減衰量がそれぞれ相等し 、ものとする必要がある。 4つの CCD等のセンサは入 射光に対して光電変換を行!、、対象物体に対応した投影像をその光電変換面上に 形成する。 CCD等のセンサはそれぞれ広 、色域に対して十分な感度特性をもつも のとする。
[0004] 4つの CCD等のセンサ力 得られた、それぞれ異なった色フィルタに対応する色域 の実像の映像信号は、それぞれ演算処理装置に入力される。演算処理装置は高速 で動作し、対象物体の色についての色度値をリアルタイムで得る。演算処理装置に よる演算は、例えば、エー.ェヌ.ネットラバリ,ビー.ジー.ハスケル著, 「ディジタル 画像」(プレナムプレス, 1988年),第 1章:視覚情報の数値表現(A. N. Netravali and B. u. Has ell, Digital Pictures , Plenum Press, 1988, chapter 1: Numerical Representation of Visual Information)に記載の方法に従った計算方式と理論的概念 によって計算される。すなわち、これは人の視感度特性に基づいて 3原色波長を 700 . Onm (R ) , 546. lnm (G ) , 435. 8nm (B )としたとき、得られる色マッチング関
0 0 0
数 (color matching fonction)〔r ( λ ) , g ( λ ) , b (又)〕を求め、カメラ出力を演算処
0 0 0
理装置によって計算する方式である。カメラ装置では各フィルタの分光特性を計算値 に合致させることが理想的である力 現実には困難性が高いのが課題である。
[0005] そこで、以下に 3原色について、理想的分光特性からの物理的波長のずれ (色差) と、人間が判定してずれが感じられる範囲の関係を考察する。ルータ条件を満たす 目標とする総合分光特性は理想的である。しかし、この様な理想的な総合分光曲線 を実現することは困難である。そこで、総合分光曲線の中心波長を lnmづっ、ずらし た場合にっ 、て考える。どの程度ずらすと平均色差がある一定以上となるかを調べる
[0006] ある一定の色差として、非特許文献 2による色差の分類 (表 1参照)中の「3級色差」 を用いた。ただし、ここでいう色差は、 CIELAB色区間における色差 Δ Ε *であり、
ab
基準白色は D65,データベースには SOCSデータベース(非特許文献 3参照)の「 calib」カテゴリを除くすべてのデータを用いた。結果を表 2に示す。これより lnm以上 ずらすと「3級色差」に収まらなくなることがわかる。
[表 1] 名称 色差 説明
測色不能領域 -0.2 ―
識別色差 0.3 同一物体の測色再現精度
1級(厳格色差) ϋ.6 各種の誤差要因を考えた場合の実用的な許容差の限界
2級(実用色差 a) 1.2 並べて判定した場合,ほとんどの人が容易に色差を認められる
3級(実用色差 b) 2.5 離間して判定した場合に,ほぼ同一と認められる
4級 5.0 経時比較した場合に,ほぼ同一と認められる
5級 10.0 一
6級 20.0 ―
[表 2] バンド名 ずれの方向 ずれの大きさ 平均色差
si 長波長方向 4nm 2.3562
短波長方向 4nm 2.3210
s2 長波長方向 ύΏχα 1.9393
短波長方向 3nm 1.9158
s3 長波長方向 7nm 2.2103.
短波長方向 7 m 2.3461
[0007] (動画カメラの背景技術)
人の色域と等 ヽ色域をもつカメラで対象物体の動画像を撮影した場合には、その カメラ信号の表す色は対象物体のもつ色に正確に一致する。このような特徴をもつ動 画のとれるカメラは現在、製作されていない。すなわち、現在広く使われている画像 システムに使用されているカメラの出力信号は、その色域がディスプレイの色域に等 しくなるように処理されて出力されている。そのため対象物体の色がディスプレイの色 域外の場合には色域内の色に変換して出力される。従って、ディスプレイの色域以 外の色を正確な信号として取り出すことはできない。さらに、対象物体の色がたとえ色 域内であっても、対象物体の元の色とは異なった色信号として表示器側に出力され る。
[0008] 現在、使用されている動画用カメラの原理および構成を説明する。カメラは集光器 、分光器、複数の受光器より構成された受光部を主要素として成り立つ。受光部に入 射した光はレンズ系よりなる集光器により集められ、分光フィルタよりなる分光器で複 数の波長域に分光される。各波長域の信号は、複数の受光器を通して RGBの 3原 色に変換される。ここで、複数の受光器を一枚のシリコン基板チップ上に 2次元マトリ タス状に配置することにより、受光部の表面に結像された対象物体の画像が認識さ れる。この形式の受光器は CCDとして公知である。
[0009] 本発明の背景を説明する第 2の特許文献として特開 2002-54994号「撮像装置、 撮像表示システムおよび撮像印刷システム」を挙げることができる。特開 2002-549 94号において、集光器には球状レンズと導波路を使用して入射光を効率よく分光器 に出力している。ここで、分光器には回折格子、プリズム、フォトニック結晶、あるいは 酸化膜、誘電体膜、高分子膜等によって構成された膜フィルタを使用している。複数 の受光器は、一枚のシリコン基板チップにより構成した CCDイメージングデバイスを 使用して構成している。
[0010] 同上分光器では CIE色度図上で色度域を 4領域一 11領域に分割して対象物体の 色を求め、対象物体の元の色とは異なった色信号が表示器側に出力されるという色 再現上の制約を取り除こうとしている。このような、現在実現されているマルチバンド 広色域カメラは具体的に 4枚以上の多数の色フィルタを使って対象物体の色のスぺ タトル情報を取得し、これらのスペクトル力も物体の色を推定している。色のスペクトル 分布は自然物体と人工物体とでは異なるので、このような色の推定は正確でない。更 に、対象物体の色をスペクトル情報力 算出するための演算量が大変多いのが問題 である。
[0011] 本発明の背景を説明する第 3の特許文献として特開平 6— 261332号「多原色表示 用原色変換方法」を挙げることができる。特開平 6— 261332号においては、 3原色表 示用の信号を 3原色を越える多原色表示用の信号に変換する 2つの演算方法を提 供して 、る。この方式では入力された 3原色が CIE色度図上で 、かなる位置にあるか を判定器により判定する。第 1の方法では判定結果によって変換される 3原色を越え る多原色の中から 3つの色を選びだして、それらの一次結合を演算処理装置により 生成する。第 2の方法では、判定結果によって変換される 3原色を越える多原色信号 を、 3原色信号の一次結合としてすベて演算処理装置により求めて出力しておく。こ の多原色信号の中から 3つの色を選び出す。それ以外の色の出力が負になるときに は、その出力を零にするとともに補正信号を用意し、上の選び出された 3つの原色信 号の一次結合に対して補正信号を加算して出力する。 [0012] これらの多原色表示用原色変換方法では、演算処理に使用される一次結合の変 数に仮定値を与えているため、変数値を与える具体的根拠と方法が現実に指定され ないかぎり、具体的に動画用のカメラに実用されるのは不可能である。さらに、このま までは動画カメラのリアルタイムの要求も現実には満足されない。
[0013] 人の色域と等 、色域をもつ動画を撮像することのできる動画用カメラは未だ存在 していないが、人の色域についての解析は理論的に構築されている。例えば、エー. ェヌ.ネットラバリ,ビー.ジー.ハスケル著, 「ディジタル画像」(プレナムプレス, 198 8年),第 1章:視覚情報の数値表現(A. N. Netravali and B. G. Haskell, "Digital Pictures , Plenum Press, 1988, Chapter 1: Numerical Representation of Visual Information)において、計算方式が要約して提示されている。スペクトルで表した色 の 3つの刺激値は、色マッチング関数 (color matching fonction)と呼ばれる力 この関 数〔r( ), g( ), b (え)〕は与えられた 3原色に関する 3つの刺激値である。例えば 、 3原色波長を 700. Onm(R ), 546. lnm(G ), 435. 8nm(B )としたときの、色
0 0 0
マッチング関数 (r (λ), g (λ), b (λ))を人の色域を表すものとして波長に対し
0 0 0
てプロットすることができる。
[0014] R G B を使用して CIE色度図上の XYZを求めれば、次の(1)式が成り立つ。
0 0 0
X=2. 365R -0. 515G +0.005B
0 0 0
Y=-0.897R +1.426G —0.014B (1)
0 0 0
Z=-0.468R +0.089G +1.009Β
0 0 0
次に、 XYZから R G B を求めれば(2)式が得られる。
0 0 0
R =0.490X+0. 177Y
0
G =0. 310X+0.813Y+0.01Z (2)
0
B =0. 200X+0.010Y+0. 990Z
0
[0015] 一般論として 3原色 (R G B (ベクトル))の (X, Υ, Z (ベクトル))刺激値座標をそ
0 0 0
れぞれ (X , Y , Z )、(X , Y , Z )、(X , Y , Z )とすれば、次のベクトルを
R0 R0 R0 GO GO GO B0 B0 B0
表す(3)式が得られる。
R =X X+Y Y+Z Z
0 R0 R0 R0
G =X X+Y Y+Z Z (3) B =X X+Y Y+Z Z
0 BO BO BO
なお、前記(3)式において、 R G B および X, Y, Zは、ベクトルである。同様にして
0 0 0
、刺激値 (R , G , B )および (X , Υ , Ζ )をもつ任意の色刺激値 C (ベクトル)
C C C C C C
は次の (4)式により与えられる。
C=R R +G G +B B =X X+Y Y+Z Z (4)
C O C O C O c c c
前記(4)式において、 C, R G B および X, Y, Zは、ベクトルである。基本的に演
0 0 0
算処理は前述の理論によって実現されるので、前記理論式と、人の視感度特性によ つて動画用カメラを設計することになる。
特許文献 1:特願 2004 - 36937号
特許文献 2:特開 2002— 54994号公報
特許文献 3 :特開平 6— 261332号公報
非特許文献 1 :竹村裕夫著, 「CCDカメラ技術入門」,コロナ社, 1997年
非特許文献 2:日本色彩学会:「新編 色彩科学ハンドブック〔第 2版〕」 ,東京大学出 版会, 1998年
非特許文献 3 :日本規格協会:「TRX0012 色再現評価用標準物体分光データべ ース(SOCS)」日本規格協会, 1999年
非特許文献 4:エー.ェヌ.ネットラバリ,ビー.ジー.ハスケル著, 「ディジタル画像」( プレナムプレス, 1988年),第 1章:視覚情報の数値表現(A. N. Netravali and B. G. Haskell, "Digital Pictures , Plenum Press, 1988, chapter 1: Numerical
Representation of Visual Information)
発明の開示
発明が解決しょうとする課題
[0016] 解決しょうとする課題は、ルータ条件を満たすフィルタと比較して現実のフィルタで は分光特性に視感度上の色差が認められる点である。
[0017] 本発明による動画カメラが解決しょうとする問題点は、動画用カメラにおいて、人の 色域とカメラの色域とが等しくないため、カメラ出力信号の表す色が物体のもつ色と 一致しない点である。
[0018] 本発明の目的は、人の色域とカメラの色域とを等しくするのに適したフィルタを提供 することにある。
本発明のさらに他の目的は、人の色域とカメラの色域とを等しくするのに適した本件 出願人の開発に係るフィルタを用いて、カメラ出力信号の表す色が物体のもつ色と 一致させることができる人の色域と等しい色域をもつ動画カメラを提供することにある 課題を解決するための手段
[0019] 本発明は、ルータ条件を満たすフィルタにおいて、各分光特性 (si, s2, s3)が負 の値を持たない、単独ピークを持つ山形である上、それぞれの分光特性曲線のピー ク値が等しぐかつ各分光特性曲線の重なりができるだけ少なくする条件力 等価交 換した特性をもつものを実現する手段である。
[0020] 前記目的を達成するために、本発明による動画カメラは、 CIEが定めた XYZ等色 関数と下記の特定マトリクスに示された関係で線形変換して得られる分光感度を基に した 3枚の色フィルタを備え、これらの色フィルタを通過した光学像を光学センサで電 気信号に変換することにより、得られた電気信号を簡易な構成の演算処理装置によ り処理して、対象物体の色につ!、ての色度値を得る動画カメラである。
特定マトリクス
S 1 (义) X
S2 ( A ) = y
S3 ( λ ) Z ( λ )
Figure imgf000009_0001
[0021] 本発明による請求項 3記載の動画カメラは、対象物体からの光学実像を入射して内 部で光学投影像を形成するためのレンズ系と、前記レンズ系から入射した光ビームを それぞれ等しい強度になるように 3分割して光出力を得るための光ビームスプリッタと 、前記光ビームスプリッタの光出力に対応して設けられ、 CIEが定めた ΧΥΖ等色関 数と前記特定マトリクスに示された関係で線形変換して得られる分光感度を基にした 3枚の色フィルタと、 前記 3枚の色フィルタに対応して設けられ、内部走査により順 次、光学像を電気像に変換するための 3枚の光学センサと、前記 3枚の光学センサ の出力電気信号を入力して、人の色域と等しい映像信号を生成するための演算処 理装置と、を具備して構成されている。
[0022] 本発明による請求項 4記載の動画カメラは、対象物体からの光学実像を入射して内 部で光学投影像を形成するためのレンズ系と、前記レンズ系から入射した光ビームを それぞれ等しい強度になるように 3分割して光出力を得るための第 1の光ビームスプ リツタと、前記光ビームスプリッタの光出力に対応して設けられ、 CIEが定めた XYZ等 色関数と前記特定マトリクスに示された関係で線形変換して得られる分光感度を基に した 3枚の色フィルタと、前記 3枚の色フィルタに対応して設けられ、前記各色フィル タの光出力を画素単位、または行単位あるいは列単位に 3原色よりなる色信号を空 間分割して出力するための光マスクを備えた第 2の光ビームスプリッタと、前記第 2の 光ビームスプリッタの光マスクに密着して設けられ、前記光マスクに対応して画素単 位、または行単位あるいは列単位に空間分割の整列をとり、前記光出力の光学像を 入力して順次、電気像に変換するための光学センサと、前記光学センサの出力電気 信号を入力して、前記空間分割された電気信号から前記 SI , S2 , S3の分光特性 に基づく映像信号に戻し、人の色域と等しい映像信号を生成するための演算処理装 置と、を具備して構成されている。
[0023] 本発明による請求項 5記載の動画カメラは、対象物体からの光学実像を入射して内 部で光学投影像を形成するためのレンズ系と、前記レンズ系の光出力に対応して設 けられ、 3画素単位にマイクロブロックを形成し、前記マイクロブロック単位で空間分 割され、 CIEが定めた XYZ等色関数と前記特定マトリクスに示された関係で線形変 換して得られる分光感度を基にした 3枚の色フィルタと、前記分光感度に対応したマ イクロブロックをもつ色フィルタに対応して密着して設けられ、内部走査により順次、 光学像を電気像に変換するための光学センサと、前記マイクロブロック単位で空間分 割された光学センサの出力電気信号を入力し前記 SI , S2 , S3の分光特性に基づ く映像信号に戻し、人の色域と等しい映像信号を生成するための演算処理装置と、 を具備して構成されている。
発明の効果
[0024] 本発明による前記フィルタで、得られたフィルタの分光特性に視感度上の色差のず れが認められないので、異なったカメラ間で色の相違が感じられず、色の再現性が良 好になるという効果がある。
[0025] 現在までのところ、人と等 、色域をもつ動画カメラは実現されて ヽな ヽが、本発明 の動画カメラは、 3つの色フィルタにより分光情報を取り出すことにより、それらの理論 計算により正確に色情報を得ることができるので、その演算処理はスペクトル情報か ら求めるものに比べて演算量が少なぐ動画を容易にリアルタイムで映像信号ィ匕でき るという利点がある。
図面の簡単な説明
[0026] [図 1]フィルタの分光特性に要求される条件 1を満たす g 1 , g 2の範囲を示す説明図 である。
[図 2]フィルタの分光特性に要求される条件 1, 2を満たす g , g の範囲を示す説明
1 2
図である。
[図 3]本発明による補正を実施しな ヽで求めた総合分光特性を示す説明図である。
[図 4]本発明による 3つの色フィルタの特性を示すグラフである。
[図 5]人の色域に等 Uヽ色域をもつ動画カメラの基本原理を示す説明図である。
[図 6]3つの色フィルタを使った動画カメラの第 1の実施例を示す説明図である。
[図 7]1つの色フィルタを使った動画カメラの第 2の実施例を示す説明図である。
[図 8]動画カメラの第 2の実施例に使用する色フィルタの構成例を示す説明図である 符号の説明
[0027] 1 レンズ系
2, 2, 光ビームスプリッタ
3—5, 3" 色フィルタ
7—9, 7' , 7" 光学センサ
11, 11,, 11" 演算処理装置
21— 23 光マスク
発明を実施するための最良の形態
[0028] (分光フィルタの実施形態) 特定の受像装置を想定しな! ルータ条件を満たす撮像装置の総合分光特性は 第 1の条件として負をもたないこと、第 2の条件として単独のピークを持つこと、第 3の 条件として総合分光感度同士の重なりが最小であること、の 3条件のもとで導出され る。ここでは、最大値が最大となるバンドの最大値を 1. 0に規格化して計算を実行す る。各バンドの等エネルギスペクトルに対する出力値が等しくなる条件で計算して ヽ る。
[0029] 受光素子の分光感度が、各波長領域でフラットな場合を考えてみる。このとき、最 大値が 1であるような総合分光感度を実現するためには、一部のバンドで最大の分 光透過率が低 、フィルタを用いなくてはならな シャツタスピード等を各バンドで変 えることができない、単版式の同時式のカラー撮像方式の場合には、入射光の有効 利用という観点では好ましくない。そこで、最大値を 1. 0にする条件で解き直す必要 がある。解き方としては、条件 1, 2までは全く同じで、条件 3を求める際に最大値を規 格化して計算を実行する。
[0030] CIEXYZ等色関数には 360— 830nmまで、 lnmごとにデータが与えられているも のを用いる。このため、本来、 CIEXYZ等色関数で成立する、等エネルギスペクトル に対する三刺激値 ( λ ) , V ( λ ) , ^ ( λ ) が等しいという条件が成立しない。そこで、式 (5) ,式 (6)に示すように規格化する。
J Γ vi . x(X) d\ + f . y(X)dX
s 、 ' J vis + J Γ vi .s ^ίλ^ ' λ ― ττ^ f ~ (λ)
二 ( 6 , (入)— (λ)
Figure imgf000012_0001
[0031] 求める総合分光特性 S ( )は、変換の係数を g — g とすると、式(7)のようになる 5(λ)=^^(λ)+52^(λ)+ 3^
[0032] :で、 S ( λ )は式 (4)のように規格されて!、るものとする。
Figure imgf000013_0001
[0033] 式 (6),式(7)および式 (8)より式(9)が成立する。
Figure imgf000013_0002
[0034] ここで、 ρ(λ), q( ), r( )を、式(10)—(12)のように定義する。 ρ(λ) = x'\A \ ― Z! ( 1 0)
Figure imgf000013_0003
一 zf(X)
W ( 1 2) 式(5)および式(10)—(12)から、式(7)は式(13)となる。
S(l)=g p(l)+g α(λ)+ν(λ) (13)
1 2
[0035] 条件 1を満たすためには、全波長領域で S ( λ ) >0であればょ 、。これを満たす g , g の範囲を図 1に示す。次に、条件 1を満たす g , g の範囲のうち、条件 2を満た
2 1 2
す範囲を図 2に示す。なお、条件 2が満たされる場合には、条件 1は重要ではないこ とが図 2,図 3から示される。
[0036] ルータ条件を満足させる撮像装置の総合分光特性を求める手法は、式 (8)に示す ように等エネルギスペクトルに対する出力値を規格ィ匕して求めて 、る。このようにした 場合、図 3に示すように、各バンドの最大値が揃わない。ここで、条件 1, 2を満たす総 合分光特性の最大値を、ある値に規格化するとする。規格化後の総合分光特性を S '(え),規格化する係数をひとする。規格ィ匕した総合分光感度は式(14)のようになる oたたし、 g = ag , g = ag
1 1 2 2とする。
S' (λ) = aS(l) = a {g p(l)+g 'q(l)+r(l)}
1 2
= g 'p(l)+g 'q(l) + ar(l) (14) [0037] 規格化前の最大値と規格化後の最大値が一致する場合、つまり α = 1.0となる場 合を除いて、等エネルギスペクトルに対する出力値を一定にする。条件 1, 2を満たす 係数 g , g の範囲に、規格ィ匕後の係数 g ', g 'が存在することはない。
1 2 1 2
[0038] 総合分光特性同士の重なりを最小にする条件は、式(15)に示す目的関数 Fを最
/J、〖こすること〖こより満たされる。ここで、 S ' (λ) (i 3)は、選んだ総合分光特性 であり、 ' ( X )≠S ' ( X ) , S ' ( X )≠S ' ( X ) , S ' ( X )≠S '(え)である。なお、総
1 2 2 3 3 1
合分光特性同士の重なりは、有効なビット利用に関連している。つまり、総合分光特 性同士の重なりが大きいほど、使われないビットの組み合わせを増カロさせることにな る。
F = ( 1 5)
Figure imgf000014_0001
[0039] 条件 1, 2を満たし、条件 3を比較的よく満たす係数の組み合わせを表 3に示す。式
(6)を考慮して変換式を求めると、式(16)のようになる。
[表 3]
Γ gi1 9 1 9Z1
0.511482 0.609669 -0.109322
S21 -0.386657 1.160152 0.075392
s,1 0-0 0.0 0.560971
Figure imgf000014_0002
[0040] 求めた総合分光特性を図 4に示す。図 4において、分光特性は次の表 4に示すピ 一クの値をもつ。
[表 4] カーブ ピーク波長 半値幅 1ノ〗 0幅
s i 582腿 523-629nm 491-663脑
s 2 543nm 506-589nm 464-632nm
S 3 446腿 423-478nm 409-508nm
[0041] 次に、総合分光特性のずれにつ!、て計算結果を記述する。分光特性が右 (または 左)に 5nmずれた場合の、再現される色の色差についての計算結果を理想的な色 差の理論特性と比較すると 2— 3倍になる可能性があることがわ力つた。すなわち、総 合分光特性の各バンドを 5nmずつ左右にシフトした場合、 SOCSデータベースの calibカテゴリを除く全データについて lnmごとに補完し、 D65光源下における(CIE LAB色空間での)平均色差を求めたものを表 5に示す。同表では、量子化しない(理 論値)と 12bits (線形とする)で量子化した場合の差を示したもので、 XYZに変換する マトリクスは、もとと同じ物を用いている。
[表 5]
Figure imgf000015_0001
[0042] 以上詳しく説明した実施例につ!ヽて、本発明の範囲で種々の変形を施すことがで きる。実施例としてマトリクス変換式(12)による場合を示した力 必ずしもこのような線 形変換によらない変換を行なってもよい。非線形変換を積極的に排除する趣旨で変 換マトリクスを示したのではな 、。
[0043] (動画カメラの実施形態)
本発明による装置は、人の色域と等 ヽ色域をもつ動画用カメラを実現すると ヽぅ 目的を、必要最小限の 3つの色フィルタ (前述の分光特性 SI , S2 , S3 )により分光 情報を取り出し、これらの分光情報を使うことにより少な 、演算量で容易にリアルタイ ムで動画を映像信号ィ匕した。実施例の説明の前に、本願発明で用いる色フィルタ〖こ ついて説明する。
[0044] 図 4は、本発明による装置で使用する色フィルタの分光特性を示すグラフである。
図中の SI , S2 , S3は、 CIEが定めた XYZ等色関数と前述の特定マトリクスに示さ れた関係で線形変換して得られる分光感度を基にした 3枚の色フィルタの特性をそ れぞれ示している。 S1は、ピーク波長が 582nmで、 1Z2幅力 23— 629nm, 1/1 0幅力 91一 663nmである。 S2は、ピーク波長が 543nmで、 1Z2幅力 06— 589 nm, 1/10幅力 64— 632nmである。 S3は、ピーク波長が 446nmで、 1/2幅が 4 23— 478nm, lZlO幅力 09— 508nmである。なお、前記分光特性は、それぞれ のピーク波長が 4nm, 3nm, 7nmの範囲で移動しても実質的に画質は損なわれな い。
[0045] 図 5は、本発明による動画カメラの原理的構成を示すブロック図である。動画カメラ はレンズ系 1と、光ビームスプリッタ 2と、前述の 3つの色フィルタ 3— 5 (SI , S2 , S3 の特性をもつフィルタ以下同様)と、 3つの光学センサ 7— 9と、演算処理装置 11とを 備えて構成したものである。レンズ系 1は対象物体 12からの入射光を、光ビームスプ リツタ 2を介して光学センサ 7— 9の表面に結像させ、その倒立像をセンサ 7— 9の光 電変換面上に生成する。色フィルタ 3— 5はそれぞれ異なった波長域の、 CIEが定め た XYZ等色関数と特定マトリクスに示された関係で線形変換して得られる分光感度 に等 、波長域成分の光ビームを通過させる。光ビームスプリッタ 2は単純な構成例 を示した力 各色フィルタ 3— 5に入射する光パワーの比が明確である必要がある。 3 つの光学センサ 7— 9は入射光に対して光電変換を行 、、対象物体 12に対応した投 影像をその光電変換面上に形成する。光学センサ 7— 9はそれぞれ CCDイメージン グデバイスなどの広い色域に対して十分な感度特性をもつものとする。
[0046] 3つの光学センサ 7— 9から得られた、それぞれ異なった色フィルタ 3— 5に対応す る色域の実像の映像信号は、それぞれ演算処理装置 11に入力される。演算処理装 置 11は高速で動作し、対象物体 12の色についての色度値をリアルタイムで得る。演 算処理装置 11による演算は、例えば、エー.ェヌ.ネットラバリ,ビー.ジー.ノ、スケ ル著, 「ディジタル画像」(プレナムプレス, 1988年),第 1章:視覚情報の数値表現 (A. N. Netravali and B. G. Haskell, "Digital Pictures", Plenum Press, 1988, Chapter 1: Numerical Representation of Visual Information)【こ記載の方法【こ従った、目 ij 己十 算方式と理論的概念によって計算される。
[0047] 以上の説明を要約すると、本発明による動画カメラを小型、軽量ィ匕して実現するに は、具体的に次の第 1、または第 2の方式を採用する。
[0048] 図 6は、本発明による動画カメラの一実施例を示すブロック図である。図 6において 、 1は光学系、 2は光ビームスプリッタ、 3— 5はそれぞれ色フィルタ、 2'は第 2の光ビ 一ムスプリッタ、 7,は光学センサ、 11,は演算処理装置である。第 2の光ビームスプリ ッタ 2,には、各フィルタ 3— 5の出力光が CCDイメージングデバイスのマトリクスアレイ の画素単位、または行あるいは列単位に対応したマスク 21— 23を備えていて、 CC Dイメージングデバイス等により成り立つ光学センサ 7'に対して空間分割を行う。した がって、前記構成によって分光された光ビームが前記マスクに密着した光学センサ 7 '上に入力され、分光された光学像が形成される。前記画素単位の分割を実現する 方法には CRTで公知のシャドウマスクがあり、行単位ある ヽは列単位の分割を実現 する方法には単板式 CCDカメラで公知のストライプフィルタがある。
[0049] 第 1の方式では、レンズより成る光学系 1を通して得られた光学像を光ビームスプリ ッタ 2によってさらに 3方向に分配し、それぞれの光路上に 3つの異なった波長域特 性をもった色フィルタ 3— 5に挿入する。それぞれの色フィルタ 3— 5を通った 3つの光 学像を第 2の光ビームスプリッタ 2,によって集め、ひとつのセンサ 7,上に空間分割等 の方法で、順次結像させる。光学センサ 7'から得られた映像信号に対し演算処理装 置 11 'により必要な演算を施し、 SI , S2 , S3の分光特性に基づく信号を得る。この とき、第 2の光ビームスプリッタ 2'および光センサ 7'には空間分割を実現するための マスク 21— 23を備えている。したがって、このカメラ方式では空間解像度は犠牲にな る。レジストレーシヨンを除けば比較的容易に実現でき、リアルタイム性も実現できる。
[0050] 図 7は、本発明による光色域動画カメラの他の実施例を示すブロック図である。図 7 において、 1は光学系、 3"は 3つの画素をひとつのマイクロブロックとしてそれぞれ異 なった波長域特性をもった色フィルタ、 7"は CCDイメージングデバイス等のマトリクス アレイより成り立つ光学センサ、 11"は演算処理装置である。図 7の色フィルタ 3"では 、 3つの画素のひとつに対応して CIE色度図上の異なった 3つの波長域特性をもつ 色フィルタ膜を空間分割により形成してある。したがって、たとえば、ひとつのマイクロ ブロックの各セグメントの波長域特性は、 CIEが定めた XYZ等色関数と特定マトリクス に示された関係で線形変換して得られる分光感度の!/、ずれかである。図 8は色フィル タの詳細な構成の実施例を示す説明図である。
[0051] 第 2の方式では、光学センサ 7"の直前におかれたタイル状に並んだ 3つの色フィル タセグメント(この実施例では SI , S2 , S3のストライプのくりかえし)を通して光学セ ンサ 7"により画像信号を取得し、これに前記(1)一(4)式にもとづいた適切な演算を 行って SI , S2 , S3の分光特性に基づく信号を得る。通常の RGBカメラでは RGB の色フィルタが光学センサの直前におかれて!/、る。この色フィルタを CIEが定めた X YZ等色関数と特定マトリクスに示された関係で線形変換して得られる分光感度特性 をもつフィルタ 3つと置き換えることで前記構成が実現できる。従来のカメラと同様に 小型でリアルタイムの実現ができる方法である。
[0052] 原理的には次の方法もある。すなわち、カメラの光学センサの直前に 3つのフィルタ を配置した円盤を回転させて光学像を電気信号に変換する。時間的に異なる 3つの 画像信号を演算して、ひとつの画像信号を得る。このフィルタを回転させる方法は色 彩輝度計などに使われている力 1枚の画像を取得するために時間がかかり、動画 像の取得には向かない。
[0053] 前述したように対象物体の色情報を 3つの色フィルタと演算処理装置により広 、色 域の画像情報を取得することもできる。
[0054] 以上詳しく説明した実施例について、本発明の範囲内で種々の変形を施すことが できる。使用フィルタとして特定マトリクスによる場合を示した力 必ずしもこのような線 形変換によらない変換を行なった場合であっても、段落 (0044)に示す範囲内にある ものは、実質的に特定マトリクスに基づくものと解されるべきであり、マトリクス変換以 外の変換を排除する趣旨ではない。
産業上の利用可能性
[0055] CCDを撮像素子としたカメラ装置は安定性、信頼性が高ぐ家庭用のみならず産 業用、保安用、その他のあらゆる分野に利用されている。こうした分野では正確な色 情報の取得や異なったカメラ間で色差が認められないことが強く求められるので、本 発明のフィルタはこうした要求を満たすものとして広い利用が期待される。
人の色域と等しい色域をもつ動画カメラの用途は極めて広ぐ例えば人間に代わる 役目をするロボット、手術などの外科医療現場、絵画のような美術品、その他、人の 感性や視覚が求められる分野で利用が期待される。

Claims

請求の範囲
[1] 各分光特性 (SI , S2 , S3 )が CIE— XYZ分光特性から、負の値を持たない、単独 ピークを持つ山形であり、それぞれの分光感度曲線のピーク値が等しぐかつ分光感 度曲線のピーク値が等しく分光感度の曲線の重なりはできるだけ少なくするといぅ条 件力 等価変換した略下記の特性をもつフィルタ。
ピーク波長 半値幅 1Z10幅
51 582nm 523— 629nm 491— 663nm
52 543nm 506— 589nm 464— 632nm
53 446nm 423— 478nm 409— 508nm
[2] 分光特性 SIのピーク波長が 580±4nm、分光特性 S2のピーク波長が 543± 3n m、分光特性 S3のピーク波長が 446 ± 7nmの範囲で移動しても実質的に画質を損 なわな 、ことを特徴とするフィルタ。
[3] 対象物体力ゝらの光学実像を入射して内部で光学投影像を形成するためのレンズ系 と、
前記レンズ系から入射した光ビームをそれぞれ等 、強度になるように 3分割して 光出力を得るための光ビームスプリッタと、
前記光ビームスプリッタの光出力に対応して設けられ、 CIEが定めた XYZ等色関 数と下記特定マトリクスに示された関係で線形変換して得られる分光感度を基にした 3枚の色フィルタと、
前記 3枚の色フィルタに対応して設けられ、内部走査により順次、光学像を電気像 に変換するための 3枚の光学センサと、
前記 3枚の光学センサの出力電気信号を入力して、人の色域と等しい映像信号を 生成するための演算処理装置と、
を具備し、人の色域と等しい色域をもつ動画カメラ。
特定マトリクス S I ( A )
S2 ( A )
S3 (え)
Figure imgf000021_0001
[4] 対象物体力ゝらの光学実像を入射して内部で光学投影像を形成するためのレンズ系 と、
前記レンズ系から入射した光ビームをそれぞれ等 、強度になるように 3分割して 光出力を得るための光ビームスプリッタと、
前記光ビームスプリッタの光出力に対応して設けられ、 CIEが定めた XYZ等色関 数と下記特定マトリクスに示された関係で線形変換して得られる分光感度を基にした 3枚の色フィルタと、
前記 3枚の色フィルタに対応して設けられ、前記各色フィルタの光出力を画素単位 、または行単位あるいは列単位に 3原色よりなる色信号を空間分割して出力するため の光マスクを備えた第 2の光ビームスプリッタと、前記第 2の光ビームスプリッタの光マ スクに密着して設けられ、前記光マスクに対応して画素単位、または行単位あるいは 列単位に空間分割の整列をとり、前記光出力の光学像を入力して順次、電気像に変 換するための光学センサと、
前記光学センサの出力電気信号を入力して、前記空間分割された電気信号から下 記 SI , S2 , S3の分光特性に基づく映像信号に戻し、人の色域と等しい映像信号 を生成するための演算処理装置と、
を具備し、人の色域と等しい色域をもつ動画カメラ。
特定マトリクス
Figure imgf000021_0002
[5] 対象物体力ゝらの光学実像を入射して内部で光学投影像を形成するためのレンズ系 と、 前記レンズ系の光出力に対応して設けられ、 3画素単位にマイクロブロックを形成し 、前記マイクロブロック単位で空間分割され、 CIEが定めた XYZ等色関数と下記特 定マトリクスに示された関係で線形変換して得られる分光感度を基にした 3枚の色フ ィルタと、前記分光感度に対応したマイクロブロックをもつ色フィルタに対応して密着 して設けられ、内部走査により順次、光学像を電気像に変換するための光学センサと 前記マイクロブロック単位で空間分割された光学センサの出力電気信号を入力し 下記 SI , S2 , S3の分光特性に基づく映像信号に戻し、人の色域と等しい映像信 号を生成するための演算処理装置と、
を具備し、人の色域と等しい色域をもつ動画カメラ。
特定マトリクス
S 1 ( A ) X
S2 ( ) y U )
S3 ( ) z ( λ )
Figure imgf000022_0001
PCT/JP2005/004171 2004-03-10 2005-03-10 フィルタおよび動画カメラ Ceased WO2005086495A1 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2004066576A JP2005257827A (ja) 2004-03-10 2004-03-10 フィルタ
JP2004-066576 2004-03-10
JP2004068501A JP2005260527A (ja) 2004-03-11 2004-03-11 動画カメラ
JP2004-068501 2004-03-11

Publications (1)

Publication Number Publication Date
WO2005086495A1 true WO2005086495A1 (ja) 2005-09-15

Family

ID=34921751

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2005/004171 Ceased WO2005086495A1 (ja) 2004-03-10 2005-03-10 フィルタおよび動画カメラ

Country Status (1)

Country Link
WO (1) WO2005086495A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8363134B2 (en) 2007-08-01 2013-01-29 Sharp Kabushiki Kaisha Color imaging device, imaging apparatus using the same, and filter
US9984307B2 (en) 2014-01-14 2018-05-29 Papalab Co, Ltd. Coloring inspection apparatus and coloring inspection method

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001189941A (ja) * 1999-12-28 2001-07-10 Fuji Photo Film Co Ltd 固体撮像装置および光学フィルタ
JP2001197508A (ja) * 2000-01-14 2001-07-19 Fuji Photo Film Co Ltd 電子カメラ
JP2003018611A (ja) * 2001-07-04 2003-01-17 Sony Corp 撮像装置
JP2003087817A (ja) * 2001-09-07 2003-03-20 Seiko Epson Corp ホワイトバランス調整装置、ホワイトバランス調整プログラム、ホワイトバランス調整方法およびディジタルカメラ
JP2004215236A (ja) * 2002-12-18 2004-07-29 Nikon Corp 画像処理装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001189941A (ja) * 1999-12-28 2001-07-10 Fuji Photo Film Co Ltd 固体撮像装置および光学フィルタ
JP2001197508A (ja) * 2000-01-14 2001-07-19 Fuji Photo Film Co Ltd 電子カメラ
JP2003018611A (ja) * 2001-07-04 2003-01-17 Sony Corp 撮像装置
JP2003087817A (ja) * 2001-09-07 2003-03-20 Seiko Epson Corp ホワイトバランス調整装置、ホワイトバランス調整プログラム、ホワイトバランス調整方法およびディジタルカメラ
JP2004215236A (ja) * 2002-12-18 2004-07-29 Nikon Corp 画像処理装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8363134B2 (en) 2007-08-01 2013-01-29 Sharp Kabushiki Kaisha Color imaging device, imaging apparatus using the same, and filter
US9984307B2 (en) 2014-01-14 2018-05-29 Papalab Co, Ltd. Coloring inspection apparatus and coloring inspection method

Similar Documents

Publication Publication Date Title
Yamaguchi et al. Color image reproduction based on multispectral and multiprimary imaging: experimental evaluation
US7835002B2 (en) System for multi- and hyperspectral imaging
US7884980B2 (en) System for capturing graphical images using hyperspectral illumination
JP2004228662A (ja) 撮像装置
Shrestha et al. Multispectral imaging using LED illumination and an RGB camera
JP2018098630A5 (ja)
KR20100103504A (ko) 칼라-모자이크 이미저로부터 전정색 응답을 성취하는 방법 및 장치
US7053935B2 (en) Apparatus and method for accurate electronic color capture and reproduction
JP2000102042A (ja) 撮像装置の分光感度特性測定方法および撮像データ構成方法
KR20150136977A (ko) 초분광 이미징 시스템
US20100238329A1 (en) Color conversion coefficient calculation apparatus, computer readable recording medium for recording color conversion coefficient calculation program, and color conversion coefficient calculation method
CN101828404B (zh) 分光特性校正装置、分光特性校正方法
US9036030B2 (en) Color calibration of an image capture device in a way that is adaptive to the scene to be captured
Shrestha et al. One-shot multispectral color imaging with a stereo camera
WO2023088187A1 (zh) 环境光传感器及其数据处理方法
KR102350164B1 (ko) 멀티스펙트럴 이미징 변환 방법
JP2002109523A (ja) 撮像装置、光学フィルタ群および画像データ変換装置
JP4136820B2 (ja) 色変換マトリクス算出方法および色補正方法
JP4174707B2 (ja) 分光測定システム、色再現システム
WO2005086495A1 (ja) フィルタおよび動画カメラ
JP4482685B2 (ja) 広色域動画カメラ
JP4344257B2 (ja) 撮影装置及び色分解光学系
JP2005260527A (ja) 動画カメラ
JP2005257827A (ja) フィルタ
US20170038196A1 (en) System and method for acquiring color image from monochrome scan camera

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BW BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE EG ES FI GB GD GE GH GM HR HU ID IL IN IS KE KG KP KR KZ LC LK LR LS LT LU LV MA MD MG MK MN MW MX MZ NA NI NO NZ OM PG PH PL PT RO RU SC SD SE SG SK SL SM SY TJ TM TN TR TT TZ UA UG US UZ VC VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): BW GH GM KE LS MW MZ NA SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IS IT LT LU MC NL PL PT RO SE SI SK TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

121 Ep: the epo has been informed by wipo that ep was designated in this application
NENP Non-entry into the national phase

Ref country code: DE

WWW Wipo information: withdrawn in national office

Country of ref document: DE

122 Ep: pct application non-entry in european phase