JP2013135305A - Signal processor, imaging apparatus, and imaging system - Google Patents

Signal processor, imaging apparatus, and imaging system Download PDF

Info

Publication number
JP2013135305A
JP2013135305A JP2011283746A JP2011283746A JP2013135305A JP 2013135305 A JP2013135305 A JP 2013135305A JP 2011283746 A JP2011283746 A JP 2011283746A JP 2011283746 A JP2011283746 A JP 2011283746A JP 2013135305 A JP2013135305 A JP 2013135305A
Authority
JP
Japan
Prior art keywords
unit
image signal
value
imaging
chromaticity
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2011283746A
Other languages
Japanese (ja)
Inventor
Shuji Hayashi
修二 林
Yoshiro Hirahara
義朗 平原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konica Minolta Advanced Layers Inc
Original Assignee
Konica Minolta Advanced Layers Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konica Minolta Advanced Layers Inc filed Critical Konica Minolta Advanced Layers Inc
Priority to JP2011283746A priority Critical patent/JP2013135305A/en
Publication of JP2013135305A publication Critical patent/JP2013135305A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Image Processing (AREA)
  • Color Television Image Signal Generators (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Color Image Communication Systems (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a technique capable of obtaining an image free from discomfort which is similar to an actual appearance, in imaging at night.SOLUTION: A signal processor processes an image signal obtained by imaging means capable of changing imaging conditions, and comprises an extraction unit, a determination unit, and a change unit. The extraction unit extracts a chromaticity parameter from the image signal. The determination unit determines the change amount of the chromaticity parameter on the basis of the imaging conditions when the image signal is obtained. The change unit changes the chromaticity parameter extracted by the extraction unit, in accordance with the change amount.

Description

この発明は、信号処理装置、撮像装置及び撮像システムに関する。   The present invention relates to a signal processing device, an imaging device, and an imaging system.

撮像装置には、その用途により様々な種類が存在する。例えば、車両の周囲を撮像し、撮像した画像中の物体(車両,歩行者など)や道路標示・標識(区画線などの路面ペイント,止まれなどの標識など)を認識するための車載用カメラが知られている。   There are various types of imaging devices depending on the application. For example, an in-vehicle camera that captures an image of the surroundings of a vehicle and recognizes objects (vehicles, pedestrians, etc.) and road markings / signs (road surface paint such as lane markings, signs such as stops) in the captured image Are known.

車載用カメラは、車両走行中に被写体を撮像し、その撮像結果をリアルタイムで表示するための画像信号を取得している。取得された画像信号には、種々の画像処理が施される。   The vehicle-mounted camera captures an image of a subject while the vehicle is traveling, and acquires an image signal for displaying the imaging result in real time. Various image processing is performed on the acquired image signal.

例えば、画素ごとに明度判定と彩度判定を行い、これらの判定結果に基づいてクロマサプレス処理(彩度補正処理)を行うことにより、自然な色を再現するという技術が知られている(以下の特許文献1参照)。   For example, a technique is known in which lightness determination and saturation determination are performed for each pixel, and a natural color is reproduced by performing chroma suppression processing (saturation correction processing) based on these determination results (hereinafter referred to as the following). Patent Document 1).

特開2007−288573号公報JP 2007-288573 A

ところで、夜間に車載用カメラで前方の被写体を撮影する場合、前方の車のブレーキランプやテールランプが点灯されると、表示部(モニター)に表示される画像が一面真っ赤となり、実際の見た目とは異なる違和感のある画像となってしまう。   By the way, when shooting a front subject with a vehicle-mounted camera at night, if the brake light and tail light of the car in front are turned on, the image displayed on the display (monitor) will turn red, and what is the actual appearance? It becomes an image with a different sense of incongruity.

また、後方を撮影する場合には、自身のブレーキランプやテールランプが後方の物体に反射して、表示部(モニター)に表示される画像が一面真っ赤となり、実際の見た目とは違う違和感のある画像となってしまう。   Also, when shooting the back, your own brake lamp and tail lamp will reflect off the object behind, and the image displayed on the display (monitor) will be completely red. End up.

上記した従来技術では、画素の明度が低い場合に彩度を低減させる補正処理を行っている。しかしながら、点灯しているブレーキランプやテールランプ周辺の明度は高いため、彩度を低減(抑制)させるという補正処理を行うことは困難である。   In the prior art described above, correction processing is performed to reduce the saturation when the brightness of the pixel is low. However, it is difficult to perform a correction process for reducing (suppressing) saturation because the brightness around the lit brake lamp and tail lamp is high.

本発明は上記問題点を解決するものであり、夜間撮影において、実際の見た目に近く、違和感のない画像を得ることができる技術を提供することを目的とする。   The present invention solves the above-described problems, and an object thereof is to provide a technique capable of obtaining an image that is close to an actual appearance and has no sense of incongruity in night photography.

上記課題を解決するために、請求項1記載の信号処理装置は、撮影条件を変更可能な撮像手段により得られた画像信号を処理する信号処理装置であって、抽出部と、決定部と、変更部とを有する。抽出部は、画像信号から色度パラメータを抽出する。決定部は、画像信号が得られたときの撮影条件に基づいて、色度パラメータの変更量を決定する。変更部は、抽出部により抽出された色度パラメータを変更量に基づいて変更する。   In order to solve the above problem, the signal processing device according to claim 1 is a signal processing device that processes an image signal obtained by an imaging unit capable of changing a shooting condition, and includes an extraction unit, a determination unit, And a change unit. The extraction unit extracts a chromaticity parameter from the image signal. The determination unit determines a change amount of the chromaticity parameter based on the shooting condition when the image signal is obtained. The changing unit changes the chromaticity parameter extracted by the extracting unit based on the change amount.

また、上記課題を解決するために、請求項2記載の信号処理装置は、請求項1記載の信号処理装置であって、撮影条件は、撮影視野の明るさに応じて変更される条件パラメータを含む。決定部は、条件パラメータと色透過率とを関連付けた第1の関連付け情報をあらかじめ記憶した記憶部を有し、画像信号が得られたときの条件パラメータの値に関連付けられた色透過率の値を変更量として第1の関連付け情報に基づき特定する。   In order to solve the above problem, the signal processing device according to claim 2 is the signal processing device according to claim 1, wherein the imaging condition is a condition parameter that is changed according to the brightness of the imaging field of view. Including. The determination unit includes a storage unit that stores in advance first association information that associates the condition parameter and the color transmittance, and the value of the color transmittance associated with the value of the condition parameter when the image signal is obtained Is specified based on the first association information as the change amount.

また、上記課題を解決するために、請求項3記載の信号処理装置は、請求項2に記載の信号処理装置であって、条件パラメータは、撮影感度、絞り値及び/又はシャッター速度を含む。   In order to solve the above problem, a signal processing device according to a third aspect is the signal processing device according to the second aspect, wherein the condition parameter includes a photographing sensitivity, an aperture value, and / or a shutter speed.

また、上記課題を解決するために、請求項4記載の信号処理装置は、請求項2または3に記載の信号処理装置であって、第1の関連付け情報は、所定の閾値より小さい条件パラメータの値に対して色透過率の最大値よりも小さい値を関連付けている。   In order to solve the above problem, a signal processing device according to claim 4 is the signal processing device according to claim 2 or 3, wherein the first association information is a condition parameter smaller than a predetermined threshold. A value smaller than the maximum value of the color transmittance is associated with the value.

また、上記課題を解決するために、請求項5記載の信号処理装置は、請求項2〜4に記載の信号処理装置であって、記憶部は、画像信号の画素の輝度値と色透過率とを関連付けた第2の関連付け情報をあらかじめ記憶し、決定部は、画像信号の各画素について、その輝度値に関連付けられた色透過率の値を変更量として第2の関連付け情報に基づき特定する。   In order to solve the above problem, the signal processing device according to claim 5 is the signal processing device according to claims 2 to 4, wherein the storage unit includes a luminance value and a color transmittance of a pixel of the image signal. Is stored in advance, and the determination unit specifies, for each pixel of the image signal, the color transmittance value associated with the luminance value as a change amount based on the second association information. .

また、上記課題を解決するために、請求項6記載の信号処理装置は、請求項5に記載の信号処理装置であって、前記決定部は、特定の色に対する色透過率のみを前記輝度値に応じて小さくするように、前記変更量を決定する。   In order to solve the above problem, the signal processing device according to claim 6 is the signal processing device according to claim 5, wherein the determination unit determines only the color transmittance for a specific color as the luminance value. The amount of change is determined so as to be smaller in accordance with.

また、上記課題を解決するために、請求項7記載の撮像装置は、撮像手段と、請求項1から6のいずれかに記載の信号処理装置とを有する。   In order to solve the above problem, an imaging apparatus according to a seventh aspect includes an imaging unit and the signal processing apparatus according to any one of the first to sixth aspects.

また、上記課題を解決するために、請求項8記載の撮像装置は、請求項7に記載の撮像装置であって、撮像手段が、入射光を画像信号に線形変換する第1の動作と前記線形変換された画像信号を対数変換する第2の動作とを入射光量に応じて切り換え可能な複数の素子を有するリニアログセンサであり、変更部が、第2の動作が行われる対数領域において、撮影条件に基づいて色度パラメータを変更する。   In order to solve the above problem, an imaging apparatus according to claim 8 is the imaging apparatus according to claim 7, wherein the imaging unit linearly converts incident light into an image signal, and It is a linear log sensor having a plurality of elements that can switch the second operation for logarithmically converting the linearly converted image signal according to the amount of incident light, and the changing unit is in a logarithmic region where the second operation is performed. The chromaticity parameter is changed based on the shooting conditions.

また、上記課題を解決するために、請求項9記載の撮像システムは、車両に搭載された撮像手段と、前記車両のブレーキの踏込みの有無を検出する検出部と、請求項1から6のいずれかに記載の信号処理装置と、前記ブレーキの踏込が検出された場合に、前記変更部を制御し、前記撮影条件に基づいて前記色度パラメータを変更させる車両制御部とを有する。   In order to solve the above problem, an imaging system according to a ninth aspect includes an imaging means mounted on a vehicle, a detection unit that detects whether or not the brake of the vehicle is depressed, and any one of the first to sixth aspects. And a vehicle control unit that controls the changing unit and changes the chromaticity parameter based on the photographing condition when the depression of the brake is detected.

このように、本発明における信号処理装置(撮像装置、撮像システム)によれば、撮影条件を取得して、この撮影条件に基づいて、抽出された色度パラメータの変更量を決定し、抽出された色度パラメータを前記変更量に基づいて変更している。   Thus, according to the signal processing device (imaging device, imaging system) of the present invention, the imaging condition is acquired, and the change amount of the extracted chromaticity parameter is determined and extracted based on the imaging condition. The chromaticity parameter is changed based on the change amount.

したがって、撮影条件に基づいて被写体周辺の明るさの程度が判断されるので、例えば夜間撮影において被写体近傍の光源から照射される光が単色光(例えば、赤色)であるような場合に、その単色が色抑制される。このため、実際の見た目に近く、違和感のない画像が得られる。   Accordingly, since the degree of brightness around the subject is determined based on the shooting conditions, for example, when the light emitted from the light source near the subject is monochromatic light (for example, red) in night shooting, the monochrome Is color-suppressed. For this reason, an image that is close to the actual appearance and has no sense of incongruity can be obtained.

撮像装置の構成を示すブロック図である。It is a block diagram which shows the structure of an imaging device. 処理ユニットの構成を示すブロック図である。It is a block diagram which shows the structure of a processing unit. 画像処理部の構成を示すブロック図である。It is a block diagram which shows the structure of an image process part. 色処理部の構成を示すブロック図である。It is a block diagram which shows the structure of a color processing part. 抽出部の構成を示すブロック図である。It is a block diagram which shows the structure of an extraction part. 撮像装置の動作を説明するフローチャートである。It is a flowchart explaining operation | movement of an imaging device. 色処理部の動作を説明するフローチャートである。It is a flowchart explaining operation | movement of a color processing part. 色度抑制処理を説明するための模式図である。It is a schematic diagram for demonstrating a chromaticity suppression process. 変形例1に係る色処理部における色度抑制処理を説明するための模式図である。10 is a schematic diagram for explaining chromaticity suppression processing in a color processing unit according to Modification 1. FIG. 第2の実施の形態の変形例に係るクロマサプレス処理を説明するグラフである。It is a graph explaining the chroma suppression process which concerns on the modification of 2nd Embodiment. 第3の実施の形態に係る撮像システムを説明するためのブロック図である。It is a block diagram for demonstrating the imaging system which concerns on 3rd Embodiment.

<第1の実施形態>
図1から図8を用いて実施形態に係る撮像装置1について説明する。撮像装置1は、車載カメラや監視カメラ等として用いることができる。なお、本実施形態における「画像」と「画像信号(映像信号)」は一対一に対応している。
<First Embodiment>
The imaging device 1 according to the embodiment will be described with reference to FIGS. The imaging device 1 can be used as an in-vehicle camera, a surveillance camera, or the like. Note that “image” and “image signal (video signal)” in the present embodiment correspond one-to-one.

[撮像装置の全体構成]
図1に示すように、撮像装置1は、レンズ部2と、撮像手段3と、アンプ4と、A/D変換部5と、処理ユニット6と、メインマイコン(メイン制御部)7とを含んで構成されている。処理ユニット6には、後述する色度パラメータ(Cb、Cr)の変更処理等を行う図示しないサブマイコン(サブ制御部)が含まれている。
[Overall configuration of imaging device]
As shown in FIG. 1, the imaging device 1 includes a lens unit 2, an imaging unit 3, an amplifier 4, an A / D conversion unit 5, a processing unit 6, and a main microcomputer (main control unit) 7. It consists of The processing unit 6 includes a sub-microcomputer (sub-control unit) (not shown) that performs processing for changing chromaticity parameters (Cb, Cr) described later.

なお、図1の例では、撮像手段3、アンプ4、及びA/D変換部5はそれぞれ単独で構成されているが、これに限定されない。例えば、撮像手段3、アンプ4、及びA/D変換部5をワンチップで一体に構成してもよい。   In the example of FIG. 1, the imaging unit 3, the amplifier 4, and the A / D conversion unit 5 are each configured independently, but are not limited thereto. For example, the imaging unit 3, the amplifier 4, and the A / D conversion unit 5 may be integrally configured with one chip.

レンズ部2は、単一のレンズ、或いは複数のレンズからなる光学系から構成されている。レンズ部2は、被写体の光像を取込み、撮像手段3に導く。レンズ部2には、透過光量を調整するための絞りやシャッタ(いずれも図示なし)を設けることも可能である。   The lens unit 2 is composed of an optical system composed of a single lens or a plurality of lenses. The lens unit 2 captures the optical image of the subject and guides it to the imaging unit 3. The lens unit 2 may be provided with a diaphragm and a shutter (both not shown) for adjusting the amount of transmitted light.

撮像手段3は、複数の素子を含んで構成されている。複数の素子は、レンズ部2において結像された光像を光電変換して、光量に応じたレベルを有する色成分(たとえば、赤(R)、緑(G)、青(B))の画像信号(カラー信号:RGB信号)を生成する。生成された画像信号は、アンプ4へ出力される。本実施形態における撮像手段3は、入射光を画像信号に線形変換する動作と対数変換する動作とを入射光量に応じて切り換え可能な複数の素子を有するセンサ(所謂、リニアログセンサ)を用いている。撮像手段3としては、たとえば、CMOS(Complementary Metal Oxide Semiconductor)イメージセンサ、CCD(Charge Coupled Device)イメージセンサ等を使用することができる。   The imaging means 3 includes a plurality of elements. The plurality of elements photoelectrically convert the light image formed in the lens unit 2 and image of color components (for example, red (R), green (G), blue (B)) having a level corresponding to the amount of light. A signal (color signal: RGB signal) is generated. The generated image signal is output to the amplifier 4. The imaging means 3 in the present embodiment uses a sensor (so-called linear log sensor) having a plurality of elements that can switch an operation for linearly converting incident light into an image signal and an operation for logarithmic conversion according to the amount of incident light. Yes. For example, a CMOS (Complementary Metal Oxide Semiconductor) image sensor, a CCD (Charge Coupled Device) image sensor, or the like can be used as the imaging unit 3.

アンプ4は、撮像手段3から出力された画像信号を増幅等する。アンプ4は、たとえば、画像信号の増幅を行うAGC(Auto Gain Control)回路、画像信号に含まれるノイズ成分の除去を行うCDS(Correlated Double Sampling)回路等を含む。増幅等された画像信号は、A/D変換部5に出力される。   The amplifier 4 amplifies the image signal output from the imaging unit 3. The amplifier 4 includes, for example, an AGC (Auto Gain Control) circuit that amplifies an image signal, a CDS (Correlated Double Sampling) circuit that removes a noise component included in the image signal, and the like. The amplified image signal is output to the A / D converter 5.

A/D変換部5は、アンプ4により増幅された画像信号をデジタルの画像信号に変換する。A/D変換された画像信号は、処理ユニット6に出力される。   The A / D converter 5 converts the image signal amplified by the amplifier 4 into a digital image signal. The A / D converted image signal is output to the processing unit 6.

処理ユニット6は、入力された画像信号に対して後述する各種処理を実行する。なお、本実施形態において、処理ユニット6が「信号処理装置」の一例である。   The processing unit 6 performs various processes described later on the input image signal. In the present embodiment, the processing unit 6 is an example of a “signal processing device”.

メインマイコン7は、撮像装置1全体の動作制御を行うとともに後述する撮影条件を取得し、この撮影条件を後述する処理ユニット6に送出する。   The main microcomputer 7 controls the operation of the entire imaging apparatus 1 and acquires shooting conditions described later, and sends the shooting conditions to a processing unit 6 described later.

図1に示すように、本実施形態における撮像装置1には、表示部10が接続されている。なお、表示部10を含めて撮像装置1を構成してもよい。   As shown in FIG. 1, a display unit 10 is connected to the imaging device 1 in the present embodiment. Note that the imaging apparatus 1 may be configured including the display unit 10.

表示部10は、LCD(Liquid Crystal Display)等の任意の表示デバイスによって構成される。たとえば、撮像装置1が車載カメラの場合、車内に設置されるカーナビゲーション装置の表示装置を表示部10として用いることが可能である。表示部10には、処理ユニット6で処理された画像信号(NTSC信号(後述))に基づく画像が表示される。   The display unit 10 is configured by an arbitrary display device such as an LCD (Liquid Crystal Display). For example, when the imaging device 1 is an in-vehicle camera, a display device of a car navigation device installed in the vehicle can be used as the display unit 10. An image based on an image signal (NTSC signal (described later)) processed by the processing unit 6 is displayed on the display unit 10.

[処理ユニットの構成]
図2に示すように、処理ユニット6は、対数変換処理部61と、圧縮部62と、リニア化処理部63、画像処理部64と、NTSC変換部65とを含んで構成されている。
[Processing unit configuration]
As shown in FIG. 2, the processing unit 6 includes a logarithmic conversion processing unit 61, a compression unit 62, a linearization processing unit 63, an image processing unit 64, and an NTSC conversion unit 65.

対数変換処理部61は、撮像手段3から入力された画像信号に対して対数変換処理を行う。対数変換処理部61は、図示しない加算器、乗算器及びLUT(Lookup Table)を含んで構成されている。   The logarithmic conversion processing unit 61 performs logarithmic conversion processing on the image signal input from the imaging unit 3. The logarithmic conversion processing unit 61 includes an adder, a multiplier, and an LUT (Lookup Table) not shown.

圧縮部62は、対数変換処理された画像信号のダイナミックレンジを圧縮する。ダイナミックレンジの圧縮の手法については、たとえば、コニカミノルタテクノロジーレポートVol.4(2007)に記載された手法を用いることができる。   The compression unit 62 compresses the dynamic range of the logarithmic conversion image signal. For the dynamic range compression method, see, for example, Konica Minolta Technology Report Vol. 4 (2007) can be used.

具体的に、圧縮部62は、入力された画像信号から照明成分を抽出する。そして、圧縮部62は、抽出した照明成分を所定の圧縮特性に従って圧縮する。更に、圧縮部62は、画像信号を圧縮前の照明成分で除して得られる反射率成分を、圧縮した照明成分に対して乗じる。これにより、ダイナミックレンジが圧縮された画像信号が生成される。   Specifically, the compression unit 62 extracts an illumination component from the input image signal. Then, the compression unit 62 compresses the extracted illumination component according to a predetermined compression characteristic. Further, the compression unit 62 multiplies the compressed illumination component by a reflectance component obtained by dividing the image signal by the illumination component before compression. Thereby, an image signal with a compressed dynamic range is generated.

ダイナミックレンジ圧縮がなされた画像信号は、リニア変換(リニア換算)処理を行うリニア化処理部63に送出される。リニア化処理部63でリニア変換された画像信号は、画像処理部64に入力される。   The image signal subjected to the dynamic range compression is sent to a linearization processing unit 63 that performs linear conversion (linear conversion) processing. The image signal linearly converted by the linearization processing unit 63 is input to the image processing unit 64.

画像処理部64では、ダイナミックレンジが圧縮された画像信号に対して輝度処理及び色度処理等を行う。詳細については後述する。画像処理部64で処理された画像信号はNTSC変換部65に送出される。   The image processing unit 64 performs luminance processing, chromaticity processing, and the like on the image signal with the dynamic range compressed. Details will be described later. The image signal processed by the image processing unit 64 is sent to the NTSC conversion unit 65.

NTSC変換部65は、画像処理部64で処理された画像信号をNTSC信号(映像信号)に変換する。具体的には、NTSC変換部65は、デジタルの画像信号をD/A変換等によりアナログのNTSC信号に変換する。このNTSC信号は、表示部10に出力される。なお、本実施形態におけるNTSC変換部65は、デジタルの画像信号をアナログ映像信号に変換する手段の一例である。この映像信号としては、NTSC信号に限らず、表示部10で画像表示できるフォーマットであればよい。たとえば、PAL(Phase Alternating Line)信号等も「映像信号」に含まれる。   The NTSC converter 65 converts the image signal processed by the image processor 64 into an NTSC signal (video signal). Specifically, the NTSC converter 65 converts a digital image signal into an analog NTSC signal by D / A conversion or the like. This NTSC signal is output to the display unit 10. Note that the NTSC converter 65 in this embodiment is an example of a unit that converts a digital image signal into an analog video signal. The video signal is not limited to the NTSC signal, and any format that can display an image on the display unit 10 may be used. For example, a PAL (Phase Alternating Line) signal or the like is also included in the “video signal”.

[画像処理部64の構成]
図3に示すように、画像処理部64は、色補間処理部81と、RGB変換処理部82と、階調変換処理部83と、色処理部84とを含んで構成されている。
[Configuration of Image Processing Unit 64]
As shown in FIG. 3, the image processing unit 64 includes a color interpolation processing unit 81, an RGB conversion processing unit 82, a gradation conversion processing unit 83, and a color processing unit 84.

色補間処理部81は、モザイク状に並んだ画素のそれぞれの位置において欠落した画像信号を補間する処理を行う。   The color interpolation processing unit 81 performs a process of interpolating the missing image signal at each position of the pixels arranged in a mosaic pattern.

RGB変換処理部82は、色補間処理部81で補間された画像信号に対して3×3のマトリクス演算によりRGB変換を行う。これにより色(カラー)の再現が向上する。   The RGB conversion processing unit 82 performs RGB conversion on the image signal interpolated by the color interpolation processing unit 81 by a 3 × 3 matrix calculation. As a result, color reproduction is improved.

階調変換処理部83は、表示部の画面の明るさと画像信号が比例するように画像の階調を補正する。   The gradation conversion processing unit 83 corrects the gradation of the image so that the screen brightness of the display unit is proportional to the image signal.

色処理部84は、階調変換処理部83で階調補正された画像信号から色度パラメータを抽出し、後述する撮影条件に基づく色度パラメータの変更量に応じて色度パラメータを変更する。   The color processing unit 84 extracts a chromaticity parameter from the image signal that has been subjected to gradation correction by the gradation conversion processing unit 83, and changes the chromaticity parameter according to a change amount of the chromaticity parameter based on a shooting condition described later.

[色処理部84の構成]
図4に示すように、色処理部84は、抽出部90と、決定部91と、変更部92とを含んで構成されている。決定部91と変更部92は、上述したサブマイコンを構成する。
[Configuration of Color Processing Unit 84]
As shown in FIG. 4, the color processing unit 84 includes an extraction unit 90, a determination unit 91, and a change unit 92. The determining unit 91 and the changing unit 92 constitute the sub-microcomputer described above.

抽出部90は、階調変換処理部83からの画像信号から画像を構成する画素の輝度成分を示す輝度信号YのY値(輝度値)と、色差成分を示す色度信号(色差信号)Cb,CrのCb値,Cr値(色度パラメータ)を抽出する。   The extraction unit 90 uses the Y value (luminance value) of the luminance signal Y indicating the luminance component of the pixels constituting the image from the image signal from the gradation conversion processing unit 83, and the chromaticity signal (color difference signal) Cb indicating the color difference component. , Cr Cb value, Cr value (chromaticity parameter) is extracted.

抽出部90は、図5に示すように輝度信号Yを生成する輝度生成部95と、色度信号Cb,Crを生成する色度生成部96を備えて構成されている。   As shown in FIG. 5, the extraction unit 90 includes a luminance generation unit 95 that generates a luminance signal Y and a chromaticity generation unit 96 that generates chromaticity signals Cb and Cr.

決定部91は、メインマイコン7から送出された撮影条件に基づいて色度パラメータの変更量(以下、「色度変更量」と呼ぶ。)を決定し、変更量情報を送出する。この撮影条件には、例えば、撮影感度(ISO感度)、絞り値(F値)、シャッター速度や、撮影感度(ISO感度)、絞り値(F値)、シャッター速度に基づいて取得される被写体の周囲の明るさの情報(条件パラメータ)が含まれる。   The determination unit 91 determines a change amount of the chromaticity parameter (hereinafter referred to as “chromaticity change amount”) based on the shooting condition sent from the main microcomputer 7 and sends the change amount information. The shooting conditions include, for example, shooting sensitivity (ISO sensitivity), aperture value (F value), shutter speed, shooting sensitivity (ISO sensitivity), aperture value (F value), and subject speed acquired based on the shutter speed. Ambient brightness information (condition parameters) is included.

また、決定部91は、この条件パラメータと色透過率とが関連付けられた第1の関連付け情報(第1のテーブル)と、画像信号の画素の輝度値と色透過率とが関連付けられた第2の関連付け情報(第2のテーブル)とが格納された記憶部(図示せず)を有する。なお、輝度値と色透過率は一対一で対応している。   The determining unit 91 also includes first association information (first table) in which the condition parameter and the color transmittance are associated with each other, and a brightness value of the pixel of the image signal and the color transmittance are associated with each other. Storage information (second table) stored therein (not shown). Note that there is a one-to-one correspondence between the luminance value and the color transmittance.

ここで、色透過率とは、色の彩度(明度)を調整するためのパラメータである。例えば、色透過率が等倍(×1)であるときは色の彩度は変更されない。色透過率が半減(×0.5)すると色の彩度も半減する。色透過率がゼロであるときは色の彩度もゼロである。なお、彩度とは、彩度色のあざやかさの度合(色の純度)をいい、色の三属性(彩度、明度、色相)の一つである。   Here, the color transmittance is a parameter for adjusting the color saturation (brightness). For example, when the color transmittance is equal (× 1), the color saturation is not changed. When the color transmittance is halved (× 0.5), the color saturation is also halved. When the color transmittance is zero, the color saturation is also zero. Note that saturation refers to the degree of vividness (color purity) of a saturation color, and is one of the three attributes of color (saturation, lightness, and hue).

変更部92は、抽出部90により抽出された色度パラメータCb値,Cr値を色度変更量に基づいて変更し、変更された色度信号Cb´,Cr´を表示部10に送出する。   The changing unit 92 changes the chromaticity parameters Cb value and Cr value extracted by the extracting unit 90 based on the chromaticity change amount, and sends the changed chromaticity signals Cb ′ and Cr ′ to the display unit 10.

[撮像装置1の動作]
図6を参照して、撮像装置1の動作について説明する。
[Operation of Imaging Device 1]
With reference to FIG. 6, the operation of the imaging apparatus 1 will be described.

撮像装置1を駆動させると、撮像手段3は、レンズ部2において結像された光像を光電変換し、画像信号を生成する(S10)。メインマイコン7は、撮像手段3を制御し、生成された画像信号をアンプ4へ出力させる。   When the imaging device 1 is driven, the imaging unit 3 photoelectrically converts the light image formed in the lens unit 2 to generate an image signal (S10). The main microcomputer 7 controls the image pickup means 3 and outputs the generated image signal to the amplifier 4.

アンプ4は、S10で生成された画像信号を増幅する(S11)。メインマイコン7は、アンプ4を制御し、増幅された画像信号をA/D変換部5に出力させる。   The amplifier 4 amplifies the image signal generated in S10 (S11). The main microcomputer 7 controls the amplifier 4 to output the amplified image signal to the A / D converter 5.

A/D変換部5は、S11で増幅された画像信号をデジタルの画像信号に変換する(S12)。メインマイコン7は、A/D変換部5を制御し、A/D変換された画像信号を対数変換処理部61に出力させる。   The A / D converter 5 converts the image signal amplified in S11 into a digital image signal (S12). The main microcomputer 7 controls the A / D converter 5 and causes the logarithmic conversion processor 61 to output an A / D converted image signal.

対数変換処理部61は、S12でデジタル変換された画像信号に対して対数変換処理を行う(S13)。メインマイコン7は、対数変換処理部61を制御し、対数変換処理がなされた画像信号を圧縮部62に出力させる。   The logarithmic conversion processing unit 61 performs logarithmic conversion processing on the image signal digitally converted in S12 (S13). The main microcomputer 7 controls the logarithmic conversion processing unit 61 and causes the compression unit 62 to output the image signal that has undergone the logarithmic conversion processing.

圧縮部62は、S13で対数変換処理された画像信号のダイナミックレンジを圧縮する(S14)。メインマイコン7は、圧縮部62を制御し、ダイナミックレンジ圧縮がなされた画像信号をリニア化処理部63に出力させる。   The compression unit 62 compresses the dynamic range of the image signal subjected to the logarithmic conversion process in S13 (S14). The main microcomputer 7 controls the compression unit 62 and causes the linearization processing unit 63 to output an image signal subjected to dynamic range compression.

リニア化処理部63は、S14でダイナミックレンジ圧縮がなされた画像信号をリニア変換する(S15)。メインマイコン7は、リニア化処理部63を制御し、リニア化された画像信号を画像処理部64に出力させる。   The linearization processing unit 63 performs linear conversion on the image signal that has been subjected to dynamic range compression in S14 (S15). The main microcomputer 7 controls the linearization processing unit 63 and causes the image processing unit 64 to output the linearized image signal.

画像処理部64は、S15でリニア変換された画像信号に対して輝度処理及び色度処理を行う(S16)。メインマイコン7は、画像処理部64を制御し、輝度処理及び色度処理がなされた画像信号をNTSC変換部65に出力させる。   The image processing unit 64 performs luminance processing and chromaticity processing on the image signal linearly converted in S15 (S16). The main microcomputer 7 controls the image processing unit 64 and causes the NTSC conversion unit 65 to output an image signal that has been subjected to luminance processing and chromaticity processing.

NTSC変換部65は、S16で輝度処理及び色度処理された画像信号をNTSC信号に変換する(S17)。メインマイコン7は、NTSC変換部65を制御し、NTSC信号を表示部10に出力させる。このNTSC信号は、表示部10の入力レンジに被写体の階調が収まるような画像処理(ダイナミックレンジ圧縮等)がなされている。従って、表示部10は、NTSC信号に基づく画像を表示することができる。   The NTSC conversion unit 65 converts the image signal subjected to the luminance processing and chromaticity processing in S16 into an NTSC signal (S17). The main microcomputer 7 controls the NTSC conversion unit 65 and causes the display unit 10 to output an NTSC signal. The NTSC signal is subjected to image processing (dynamic range compression or the like) so that the gradation of the subject falls within the input range of the display unit 10. Therefore, the display unit 10 can display an image based on the NTSC signal.

なお、メインマイコン7は、例えば、CPU(Central Processing Unit)などの図示しない処理装置と、CPUで実行される制御プログラム等が記憶されたROM(Read Only Memory)、CPUの作業用メモリとして用いられるRAM(Random Access Memory)などの図示しない記憶装置とによって構成されている。上述したサブマイコンも、上記メインマイコンと同様の構成を有している。上記した記憶装置には、上記各ステップで行われる動作制御を実行するための制御プログラム等が記憶されている。CPUなどの処理装置が、記憶装置に記憶されている制御プログラムを実行することで上記各ステップの動作制御が実行される。   The main microcomputer 7 is used as a processing device (not shown) such as a CPU (Central Processing Unit), a ROM (Read Only Memory) storing a control program executed by the CPU, and a working memory of the CPU. It is configured by a storage device (not shown) such as a RAM (Random Access Memory). The sub-microcomputer described above also has the same configuration as the main microcomputer. The storage device described above stores a control program and the like for executing the operation control performed in each step. A processing device such as a CPU executes the control program stored in the storage device, whereby the operation control of each step is executed.

[色処理部84の動作]
以下に、図4、図7および図8を参照して、色処理部84の動作(S16)について説明する。
[Operation of Color Processing Unit 84]
Hereinafter, the operation (S16) of the color processing unit 84 will be described with reference to FIG. 4, FIG. 7, and FIG.

色処理部84に画像信号が入力されると(S20)、抽出部90は、色差成分を示す色度信号(色差信号)Cb,CrのCb値,Cr値(色度パラメータ)を抽出する(S21)。決定部91は、撮影感度(ISO感度)、絞り値(F値)、シャッター速度や、撮影感度、絞り値、シャッター速度に基づく条件パラメータを取得する。そして、決定部91は、あらかじめ記憶された第1のテーブルを参照して、取得した条件パラメータの値に対応する色透過率の値を色度パラメータの変更量として決定(特定)する(S22)。   When an image signal is input to the color processing unit 84 (S20), the extraction unit 90 extracts Cb values and Cr values (chromaticity parameters) of chromaticity signals (chrominance signals) Cb and Cr indicating chrominance components (chromaticity parameter). S21). The determination unit 91 acquires imaging sensitivity (ISO sensitivity), aperture value (F value), shutter speed, and condition parameters based on imaging sensitivity, aperture value, and shutter speed. Then, the determination unit 91 refers to the first table stored in advance and determines (specifies) the color transmittance value corresponding to the acquired condition parameter value as the chromaticity parameter change amount (S22). .

ここで、図8の左下のグラフは条件パラメータと色透過率の関係を示すグラフである。図8の左上のグラフは画素の輝度と色透過率の関係を示すグラフである。図8の右上のグラフは、前記第N列目における輝度の値(輝度値)に対応した色度信号の波形である。点線の波形は、本実施の形態における条件パラメータの変更量に基く信号波形である。実線の波形は、前記変更量に基かない信号波形(第2のテーブルのみに基づいて色抑制された信号波形)である。   Here, the lower left graph of FIG. 8 is a graph showing the relationship between the condition parameter and the color transmittance. The graph on the upper left of FIG. 8 is a graph showing the relationship between pixel luminance and color transmittance. The upper right graph in FIG. 8 is a waveform of the chromaticity signal corresponding to the luminance value (luminance value) in the Nth column. The dotted waveform is a signal waveform based on the change amount of the condition parameter in the present embodiment. The solid line waveform is a signal waveform that is not based on the amount of change (a signal waveform that is color-suppressed based only on the second table).

図8左上のグラフにおいて、細い実線で描かれている波形(以下、「波形A」と呼ぶ。)は、第2のテーブルに格納された第2の関連付け情報のみに基いて色度抑制される様子を示す波形である。つまり波形Aは、第1の関連付け情報が全く適用されていない場合の波形である。   In the graph at the upper left of FIG. 8, the waveform drawn by a thin solid line (hereinafter referred to as “waveform A”) is suppressed in chromaticity based only on the second association information stored in the second table. It is a waveform which shows a mode. That is, the waveform A is a waveform when the first association information is not applied at all.

例えば、図8左下のグラフのb点においては、色透過率が最大値(透過率100%)である(被写体周囲の明るさが所定の明るさより明るい場合)ので、第1の関連付け情報を適用せずに通常の第2の関連付け情報だけに基いて色度抑制処理が行われる。そして、前記色度抑制処理がなされて変更部92から色度信号Cb´,Cr´(図8右上の実線波形)が出力される。   For example, at point b in the lower left graph of FIG. 8, the color transmittance is the maximum value (transmittance 100%) (when the brightness around the subject is brighter than the predetermined brightness), so the first association information is applied. Instead, the chromaticity suppression process is performed based only on the normal second association information. Then, the chromaticity suppression process is performed, and chromaticity signals Cb ′ and Cr ′ (solid line waveform in the upper right of FIG. 8) are output from the changing unit 92.

一方、図8左上のグラフにおいて、太い実線で描かれている波形(以下、「波形B」と呼ぶ。)は、第1のテーブルに格納された第1の関連付け情報を第2の関連付け情報に適用して色度抑制される様子を示す波形である。   On the other hand, in the graph in the upper left of FIG. 8, the waveform drawn with a thick solid line (hereinafter referred to as “waveform B”) is changed from the first association information stored in the first table to the second association information. It is a waveform which shows a mode that chromaticity suppression is applied and applied.

例えば、図8左下のグラフのa点においては、色透過率が最大値より小さい(被写体周囲の明るさが所定の明るさより暗い場合)ので、第1の関連付け情報を第2の関連付け情報に適用してその適用後の色度パラメータに基いて色度抑制処理(色度パラメータの変更処理(S23))が行われる。なお、適用後の色度パラメータは、第1の関連付け情報を第2の関連付け情報に乗算して得られる。また、色透過率が最大値より小さいか否かは決定部91において判定される。本実施の形態では、最大値を透過率100%として上記判定がなされているが、最大値を透過率100%とせず、任意の透過率に設定してもよい。   For example, at point a in the lower left graph of FIG. 8, the color transmittance is smaller than the maximum value (when the brightness around the subject is darker than the predetermined brightness), so the first association information is applied to the second association information. Then, chromaticity suppression processing (chromaticity parameter changing processing (S23)) is performed based on the chromaticity parameters after the application. The applied chromaticity parameter is obtained by multiplying the second association information by the first association information. In addition, the determination unit 91 determines whether or not the color transmittance is smaller than the maximum value. In the present embodiment, the above determination is made with the maximum value set to 100% transmittance, but the maximum value may not be set to 100% transmittance but may be set to an arbitrary transmittance.

そして、前記色度抑制処理がなされて変更部92から色度信号Cb´,Cr´(図8右上の点線波形)が出力される。図8右上の点線波形を見るとわかるように、被写体周囲の明るさが所定の明るさより暗い場合には色度信号Cb,Crが抑制され、抑制された色度信号Cb´,Cr´が出力される。   Then, the chromaticity suppression process is performed, and the chromaticity signals Cb ′ and Cr ′ (dotted line waveform in the upper right in FIG. 8) are output from the changing unit 92. As can be seen from the dotted line waveform in the upper right of FIG. 8, when the brightness around the subject is darker than the predetermined brightness, the chromaticity signals Cb and Cr are suppressed, and the suppressed chromaticity signals Cb ′ and Cr ′ are output. Is done.

なお、本実施の形態では、色処理部84を構成する決定部91がメインマイコン7から送出された撮影条件を受けて条件パラメータを取得し、取得した条件パラメータの値に対応する色透過率の値を色度パラメータの変更量として決定しているが、メインマイコン7に決定部91の機能を持たせる構成とすることも可能である。   In the present embodiment, the determination unit 91 constituting the color processing unit 84 receives the shooting conditions sent from the main microcomputer 7 to acquire the condition parameters, and the color transmittance corresponding to the acquired value of the condition parameters. Although the value is determined as the change amount of the chromaticity parameter, the main microcomputer 7 may be configured to have the function of the determination unit 91.

具体的には、メインマイコン7は、前記第1のテーブルと前記第2のテーブルとを格納する記憶部を含む決定部を備え、色処理部84は、抽出部と変更部を備える。これら決定部、色処理部および抽出部の機能は上記と同様である。つまり、メインマイコン7を構成する決定部は、撮影条件を取得するとともに、取得された撮影条件に基づく条件パラメータを取得する。そして、決定部は、あらかじめ記憶された第1のテーブルを参照して、取得した条件パラメータの値に対応する色透過率の値を色度パラメータの変更量として決定し、その変更量の情報を変更部に送出する。以降の変更部92の処理は上記と同様である。
[効果]
以下に、本実施の形態の効果について説明する。
Specifically, the main microcomputer 7 includes a determination unit including a storage unit that stores the first table and the second table, and the color processing unit 84 includes an extraction unit and a change unit. The functions of these determination unit, color processing unit, and extraction unit are the same as described above. That is, the determination unit that configures the main microcomputer 7 acquires the shooting conditions and the condition parameters based on the acquired shooting conditions. Then, the determination unit refers to the first table stored in advance, determines the color transmittance value corresponding to the acquired condition parameter value as the change amount of the chromaticity parameter, and sets information on the change amount. Send to change section. The subsequent processing of the changing unit 92 is the same as described above.
[effect]
Below, the effect of this Embodiment is demonstrated.

本実施の形態における信号処理装置1は、撮影条件を変更可能な撮像手段により得られた画像信号を処理する信号処理装置であって抽出部90と、決定部91と、変更部92とを有する。   The signal processing apparatus 1 according to the present embodiment is a signal processing apparatus that processes an image signal obtained by an imaging unit that can change imaging conditions, and includes an extraction unit 90, a determination unit 91, and a change unit 92. .

抽出部90は、前記画像信号から色度パラメータを抽出する。決定部91は、前記画像信号が得られたときの前記撮影条件に基づいて、色度パラメータの変更量を決定する。変更部92は、抽出部90により抽出された色度パラメータを前記変更量に基づいて変更する。   The extraction unit 90 extracts chromaticity parameters from the image signal. The determination unit 91 determines a change amount of the chromaticity parameter based on the shooting condition when the image signal is obtained. The changing unit 92 changes the chromaticity parameter extracted by the extracting unit 90 based on the change amount.

また、前記撮影条件には、撮影視野の明るさに応じて変更される条件パラメータが含まれる。決定部91は、前記条件パラメータと色透過率とを関連付けた第1の関連付け情報(第1のテーブル)をあらかじめ記憶した記憶部を有し、前記画像信号が得られたときの前記条件パラメータの値に関連付けられた色透過率の値を前記変更量として前記第1のテーブルに基づき特定する。ここで、前記条件パラメータは、撮影感度、絞り値及び/又はシャッター速度を含む。   In addition, the shooting conditions include a condition parameter that is changed according to the brightness of the shooting field of view. The determination unit 91 includes a storage unit that stores in advance first association information (first table) that associates the condition parameter and color transmittance, and the condition parameter when the image signal is obtained is determined. The value of the color transmittance associated with the value is specified as the change amount based on the first table. Here, the condition parameter includes a photographing sensitivity, an aperture value, and / or a shutter speed.

また、前記第1のテーブルは、所定の閾値より小さい前記条件パラメータの値に対して色透過率の最大値よりも小さい値を関連付けている。   In the first table, a value smaller than the maximum value of the color transmittance is associated with the value of the condition parameter smaller than a predetermined threshold.

また、前記記憶部は、画像信号の画素の輝度値と色透過率とを関連付けた第2の関連付け情報(第2のテーブル)をあらかじめ記憶している。決定部91は、前記画像信号の各画素について、その輝度値に関連付けられた色透過率の値を前記変更量として前記第2のテーブルに基づき特定する。
また、本実施形態における撮像装置1は、撮像手段3と、上記信号処理装置とを有する。
The storage unit stores in advance second association information (second table) in which the luminance value of the pixel of the image signal and the color transmittance are associated with each other. The determination unit 91 specifies the value of the color transmittance associated with the luminance value of each pixel of the image signal as the change amount based on the second table.
In addition, the imaging device 1 in the present embodiment includes the imaging unit 3 and the signal processing device.

このように、本発明における信号処理装置(撮像装置1)によれば、被写体周辺の明るさの情報を条件パラメータとして検出して、この条件パラメータと色透過率を関連付けた関連付け情報に基づいて、色度パラメータCb値,Cr値の色度変更量を変更している。   Thus, according to the signal processing device (imaging device 1) of the present invention, brightness information around the subject is detected as a condition parameter, and based on the association information that associates the condition parameter with the color transmittance, The chromaticity change amount of the chromaticity parameters Cb value and Cr value is changed.

したがって、例えば、夜間に車両前方の被写体を撮影する場合において、前方の車のブレーキランプやテールランプが点灯されたとしても、撮像装置は条件パラメータによって被写体周辺が暗いと判断されるので、ブレーキランプやテールランプの光源色(赤色)が色透過される。このため、表示部(モニター)に表示される画像は真っ赤とならず、実際の見た目に近く、違和感のない画像を得ることができる。
また、信号機付近での夜間撮影においては、信号機の光源色(緑色)が色透過されるため、実際の見た目に近く、違和感のない画像を得ることができる。
Therefore, for example, when photographing a subject in front of the vehicle at night, even if the brake lamp and tail lamp of the vehicle in front are turned on, the imaging device determines that the periphery of the subject is dark according to the condition parameter. The light source color (red) of the tail lamp is transmitted through. For this reason, the image displayed on the display unit (monitor) is not red, and an image that is close to the actual appearance and has no sense of incongruity can be obtained.
Further, in night photography near a traffic light, the light source color (green) of the traffic light is transmitted through, so an image that is close to the actual appearance and has no sense of incongruity can be obtained.

<変形例>
上記した第1の実施形態では、マトリクス構成された画素群の第N列目における画素群の色度信号Cb,Crのプラス・マイナス領域(例えば、階調範囲が−128ビット〜+127ビット(256ビット))全域において、色度抑制処理を行っていた。
<Modification>
In the first embodiment described above, the plus / minus regions of the chromaticity signals Cb and Cr of the pixel group in the Nth column of the pixel group configured in a matrix (for example, the gradation range is −128 bits to +127 bits (256 Bit)) The chromaticity suppression process was performed in the entire area.

本変形例では、例えば、赤色のみ抑制したいような場合には、図9に示すように色度信号Crのプラス領域のみ抑制するようにする。なお、例えば青色のみ抑制したいような場合には、色度信号Cbのプラス領域のみ抑制するようにすればよい。   In the present modification, for example, when it is desired to suppress only red, only the plus region of the chromaticity signal Cr is suppressed as shown in FIG. For example, when only blue is desired to be suppressed, only the positive region of the chromaticity signal Cb may be suppressed.

このように特定の色のみ抑制することによって、利用目的に合わせてより的確に抑制することができる。例えば、車載用カメラで前方の被写体を撮影する場合、前方の車のブレーキランプやテールランプが点灯された場合でも、赤色のみ抑制されるので、表示部(モニター)に表示される画像は、より実際の見た目に近く、より違和感のない画像となる。   Thus, by suppressing only a specific color, it can suppress more appropriately according to the purpose of use. For example, when shooting a subject in front with an in-vehicle camera, only the red color is suppressed even if the brake light and tail light of the front car are lit, so the image displayed on the display unit (monitor) is more actual. The image is close to the appearance of the image, and the image is more comfortable.

<第2の実施形態>
本実施形態は、撮像装置1における撮像手段3として、入射光を画像信号に線形変換する動作と対数変換する動作とを入射光量に応じて切り換え可能な複数の素子を有するリニアログセンサを用いたものである。このリニアログセンサについては公知(例えば、国際公報WO2006−103881号公報等参照)であるので、ここではその説明は省略する。
<Second Embodiment>
In this embodiment, a linear log sensor having a plurality of elements that can switch between an operation for linearly converting incident light into an image signal and an operation for logarithmic conversion according to the amount of incident light is used as the image pickup means 3 in the image pickup apparatus 1. Is. Since this linear log sensor is publicly known (see, for example, International Publication WO2006-103881 etc.), the description thereof is omitted here.

上記したように、撮像手段3としてリニアログセンサを用いることにより、ダイナミックレンジを拡大させることができる。したがって、高画質な画像を表示部10に表示させることができる。   As described above, the dynamic range can be expanded by using a linear log sensor as the imaging unit 3. Therefore, a high-quality image can be displayed on the display unit 10.

ところで、撮像手段3としてリニアログセンサを用いた場合には、リニア化処理部63(図2参照)でリニア化処理(リニア換算処理)された画像信号にノイズが発生し易くなる。これは、線形領域(リニア領域)で撮像した画像のデータ(画像信号)の階調(分解能)と対数領域(ログ領域)で撮像した画像のデータ(画像信号)の階調に差が生じるため、対数領域で撮像された画像データをリニア化処理したときに、その画像データが飛び飛びになってしまうからである。   By the way, when a linear log sensor is used as the imaging means 3, noise is likely to occur in the image signal linearized (linear conversion processing) by the linearization processing unit 63 (see FIG. 2). This is because there is a difference between the gradation (resolution) of image data (image signal) captured in the linear region (linear region) and the gradation of image data (image signal) captured in the logarithmic region (log region). This is because when the image data captured in the logarithmic region is linearized, the image data is skipped.

本実施の形態によれば、この対数領域における画素の色抑制処理を、その画素の輝度値と色透過率とが関連付けられた第2のテーブルを用いて行っているので、上記したリニア化処理(リニア換算処理)の際に生じるノイズを抑制することができる。   According to the present embodiment, the color suppression processing of the pixel in the logarithmic region is performed using the second table in which the luminance value of the pixel and the color transmittance are associated with each other. Noise generated during (linear conversion processing) can be suppressed.

<変形例>
ところで、リニアログセンサを用いた場合の画素の輝度値に対する色透過率は、図10に示すように撮像時や信号処理時における線形領域と対数領域の境界位置が変化する。
例えば、図10の境界位置がA点からB点に変化したような場合、対数領域における色透過率は、実線Aのようになる。B点からA点までの間は、対数領域であるにもかかわらず色透過率が一定であるので、本来の抑制処理(点線Bのような変化)がされないことになる。
<Modification>
By the way, the color transmittance with respect to the luminance value of the pixel when the linear log sensor is used changes the boundary position between the linear region and the logarithmic region at the time of imaging or signal processing as shown in FIG.
For example, when the boundary position in FIG. 10 changes from point A to point B, the color transmittance in the logarithmic region is as shown by a solid line A. Between point B and point A, the color transmittance is constant despite the logarithmic region, so that the original suppression process (change as shown by dotted line B) is not performed.

また、図10の境界位置がA点からC点に変化したような場合、A点からC点までの間は、線形領域であるにもかかわらず色透過率が一定であるので、本来の抑制処理(点線Cのような変化)がされず、自然な色再現を図ることができない。   Further, when the boundary position in FIG. 10 changes from the point A to the point C, the color transmittance is constant from the point A to the point C although it is a linear region. Processing (changes like dotted line C) is not performed, and natural color reproduction cannot be achieved.

そこで、本変形例では、決定部91および変更部92に以下のような機能を追加する。決定部91は、撮像時や信号処理時における前記境界位置の情報を受けて、前記境界位置が変化した場合に、その変化した後の境界点から色透過率を変化させるようにその変更量情報を変更部92に送出する。変更部92は、その変更量に応じて色透過率を変化(クロマサプレス領域を変化)させる。   Therefore, in this modification, the following functions are added to the determination unit 91 and the change unit 92. The determination unit 91 receives the information on the boundary position at the time of imaging or signal processing, and when the boundary position changes, the change amount information so as to change the color transmittance from the boundary point after the change. Is sent to the changing unit 92. The change unit 92 changes the color transmittance (changes the chroma suppress area) according to the change amount.

本変形例によれば、線形領域と対数領域の境界位置が変化しても、その変化に応じてクロマサプレス領域を変化させているので自然な色再現を図ることができる。   According to this modification, even if the boundary position between the linear region and the logarithmic region changes, the chroma suppress region is changed according to the change, so that natural color reproduction can be achieved.

<第3の実施形態>
[全体構成]
本実施の形態に係る撮像システムは、図11に示すように、上記した第1の実施の形態に係る撮像装置1(図1参照)に、検出部102と車両制御部101を追加した構成となっている。なお、撮像装置1の構成については上記同様であるので説明を省略する。
<Third Embodiment>
[overall structure]
As shown in FIG. 11, the imaging system according to the present embodiment has a configuration in which a detection unit 102 and a vehicle control unit 101 are added to the imaging device 1 (see FIG. 1) according to the first embodiment described above. It has become. Note that the configuration of the imaging apparatus 1 is the same as described above, and thus the description thereof is omitted.

ここで、撮像装置1は、車両に搭載される撮像装置である。検出部102は、車両のブレーキの踏込みの有無を検出し、ブレーキの踏込みの有無を示すブレーキ検出信号を車両制御部101に送出する。車両制御部101は、いわゆる車両ECU(エンジンコントロールユニット:Engine Control Unit)であり、運転者によるブレーキの踏込みが検出された場合に、色処理部84を構成する変更部92に変更開始信号を送出する。   Here, the imaging device 1 is an imaging device mounted on a vehicle. The detection unit 102 detects whether or not the brake of the vehicle is depressed, and sends a brake detection signal indicating whether or not the brake is depressed to the vehicle control unit 101. The vehicle control unit 101 is a so-called vehicle ECU (Engine Control Unit), and sends a change start signal to the change unit 92 that constitutes the color processing unit 84 when a brake depression by the driver is detected. To do.

[動作]
変更部92は、車両制御部101からの変更開始信号を受けた場合に、抽出部90により抽出された色度パラメータCb値,Cr値を色度変更量に基づいて変更し、変更された色度信号Cb´,Cr´を表示部10に送出する。なお、この色度パラメータCb値,Cr値の色度変更量に基づく変更処理については、上記した第1の実施の形態における変更部92における変更処理と同様であるので、その説明を省略する。
[Operation]
When the change unit 92 receives a change start signal from the vehicle control unit 101, the change unit 92 changes the chromaticity parameter Cb value and the Cr value extracted by the extraction unit 90 based on the chromaticity change amount, and the changed color Degree signals Cb ′ and Cr ′ are sent to the display unit 10. Note that the change process based on the chromaticity change amount of the chromaticity parameters Cb value and Cr value is the same as the change process in the change unit 92 in the first embodiment described above, and thus the description thereof is omitted.

[効果]
本実施の形態によれば、変更開始信号を受けた場合に、抽出された色度パラメータCb値,Cr値を色度変更量に基づいて変更し、変更された色度信号Cb´,Cr´を送出するようにしている。このため、ブレーキランプの点灯に連動して色度パラメータCb値,Cr値の色度変更量が変更される。
[effect]
According to the present embodiment, when the change start signal is received, the extracted chromaticity parameter Cb value and Cr value are changed based on the chromaticity change amount, and the changed chromaticity signals Cb ′ and Cr ′. Is sent out. Therefore, the chromaticity change amount of the chromaticity parameters Cb value and Cr value is changed in conjunction with the lighting of the brake lamp.

したがって、例えば、夜間に車両後方の被写体を撮影する場合において、自身のブレーキランプが後方の物体(被写体)に反射されたときに自動的に本撮像システムを構成する撮像装置を起動させることができる。   Therefore, for example, when photographing a subject behind the vehicle at night, the imaging device that constitutes the imaging system can be automatically activated when its own brake lamp is reflected by a rear object (subject). .

このため、ブレーキランプの点灯と同時に、取得した条件パラメータによって被写体周辺が暗いと判断され、ブレーキランプの光源色(赤色)が色透過されるため、実際の見た目に近く、違和感のない画像を得ることができる。   For this reason, simultaneously with the lighting of the brake lamp, it is determined that the surroundings of the subject are dark according to the acquired condition parameter, and the light source color (red) of the brake lamp is transmitted through, so an image that is close to the actual appearance and has no sense of incongruity is obtained. be able to.

1 撮像装置
2 レンズ部
3 撮像手段
4 アンプ
5 A/D変換部
6 処理ユニット
7 メインマイコン
10 表示部
61 対数変換処理部
62 圧縮部
63 リニア化処理部
64 画像処理部
65 NTSC変換部
81 色補間処理部
82 RGB変換処理部
83 階調変換処理部
84 色処理部
90 抽出部
91 決定部
92 変更部
95 輝度生成部
96 色度生成部
101 車両制御部
102 検出部
DESCRIPTION OF SYMBOLS 1 Imaging device 2 Lens part 3 Imaging means 4 Amplifier 5 A / D conversion part 6 Processing unit 7 Main microcomputer 10 Display part 61 Logarithmic conversion processing part 62 Compression part 63 Linearization processing part 64 Image processing part 65 NTSC conversion part 81 Color interpolation Processing unit 82 RGB conversion processing unit 83 Gradation conversion processing unit 84 Color processing unit 90 Extraction unit 91 Determination unit 92 Change unit 95 Luminance generation unit 96 Chromaticity generation unit 101 Vehicle control unit 102 Detection unit

Claims (9)

撮影条件を変更可能な撮像手段により得られた画像信号を処理する信号処理装置であって、
前記画像信号から色度パラメータを抽出する抽出部と、
前記画像信号が得られたときの前記撮影条件に基づいて、色度パラメータの変更量を決定する決定部と、
前記抽出部により抽出された色度パラメータを前記変更量に基づいて変更する変更部とを有する
ことを特徴とする信号処理装置。
A signal processing device for processing an image signal obtained by an imaging means capable of changing imaging conditions,
An extraction unit for extracting chromaticity parameters from the image signal;
A determination unit that determines a change amount of a chromaticity parameter based on the photographing condition when the image signal is obtained;
A signal processing apparatus comprising: a changing unit that changes the chromaticity parameter extracted by the extracting unit based on the change amount.
前記撮影条件は、撮影視野の明るさに応じて変更される条件パラメータを含み、
前記決定部は、
前記条件パラメータと色透過率とを関連付けた第1の関連付け情報をあらかじめ記憶した記憶部を有し、
前記画像信号が得られたときの前記条件パラメータの値に関連付けられた色透過率の値を前記変更量として前記第1の関連付け情報に基づき特定する
ことを特徴とする請求項1に記載の信号処理装置。
The shooting condition includes a condition parameter that is changed according to the brightness of the shooting field of view,
The determination unit
A storage unit that stores in advance first association information in which the condition parameter and the color transmittance are associated;
2. The signal according to claim 1, wherein a value of color transmittance associated with a value of the condition parameter when the image signal is obtained is specified based on the first association information as the amount of change. Processing equipment.
前記条件パラメータは、撮影感度、絞り値及び/又はシャッター速度を含むことを特徴とする請求項2に記載の信号処理装置。   The signal processing apparatus according to claim 2, wherein the condition parameter includes a photographing sensitivity, an aperture value, and / or a shutter speed. 前記第1の関連付け情報は、所定の閾値より小さい前記条件パラメータの値に対して色透過率の最大値よりも小さい値を関連付けていることを特徴とする請求項2又は請求項3に記載の信号処理装置。   The first association information associates a value smaller than a maximum value of color transmittance with a value of the condition parameter that is smaller than a predetermined threshold value. Signal processing device. 前記記憶部は、画像信号の画素の輝度値と色透過率とを関連付けた第2の関連付け情報をあらかじめ記憶し、
前記決定部は、前記画像信号の各画素について、その輝度値に関連付けられた色透過率の値を前記変更量として前記第2の関連付け情報に基づき特定する
ことを特徴とする請求項2〜請求項4のいずれか一項に記載の信号処理装置。
The storage unit stores in advance second association information that associates the luminance value of the pixel of the image signal and the color transmittance,
The said determination part specifies the value of the color transmittance linked | related with the luminance value about each pixel of the said image signal as said change amount based on said 2nd correlation information. The Claim 2 characterized by the above-mentioned. Item 5. The signal processing device according to any one of Items 4 to 6.
前記決定部は、特定の色に対する色透過率のみを前記輝度値に応じて小さくするように、前記変更量を決定する
ことを特徴とする請求項5に記載の信号処理装置。
The signal processing apparatus according to claim 5, wherein the determination unit determines the change amount so that only a color transmittance for a specific color is reduced according to the luminance value.
撮像手段と、
請求項1から6のいずれかに記載の信号処理装置と、
を有することを特徴とする撮像装置。
Imaging means;
A signal processing device according to any one of claims 1 to 6;
An imaging device comprising:
前記撮像手段は、入射光を画像信号に線形変換する第1の動作と前記線形変換された画像信号を対数変換する第2の動作とを入射光量に応じて切り換え可能な複数の素子を有するリニアログセンサであり、
前記変更部は、前記第2の動作が行われる対数領域において、前記撮影条件に基づいて前記色度パラメータを変更する
ことを特徴とする請求項7に記載の撮像装置。
The imaging unit includes a plurality of elements that can switch between a first operation for linearly converting incident light into an image signal and a second operation for logarithmically converting the linearly converted image signal according to the amount of incident light. Log sensor,
The imaging apparatus according to claim 7, wherein the changing unit changes the chromaticity parameter based on the shooting condition in a logarithmic region in which the second operation is performed.
車両に搭載された撮像手段と、
前記車両のブレーキの踏込みの有無を検出する検出部と、
請求項1から6のいずれかに記載の信号処理装置と、
前記ブレーキの踏込が検出された場合に、前記変更部を制御し、前記撮影条件に基づいて前記色度パラメータを変更させる車両制御部と、
を有することを特徴とする撮像システム。
Imaging means mounted on the vehicle;
A detection unit for detecting presence or absence of depression of the brake of the vehicle;
A signal processing device according to any one of claims 1 to 6;
A vehicle control unit that controls the changing unit when the depression of the brake is detected, and changes the chromaticity parameter based on the shooting condition;
An imaging system comprising:
JP2011283746A 2011-12-26 2011-12-26 Signal processor, imaging apparatus, and imaging system Pending JP2013135305A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011283746A JP2013135305A (en) 2011-12-26 2011-12-26 Signal processor, imaging apparatus, and imaging system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011283746A JP2013135305A (en) 2011-12-26 2011-12-26 Signal processor, imaging apparatus, and imaging system

Publications (1)

Publication Number Publication Date
JP2013135305A true JP2013135305A (en) 2013-07-08

Family

ID=48911737

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011283746A Pending JP2013135305A (en) 2011-12-26 2011-12-26 Signal processor, imaging apparatus, and imaging system

Country Status (1)

Country Link
JP (1) JP2013135305A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107707789A (en) * 2016-08-08 2018-02-16 谷歌有限责任公司 Monochromatic color mapping is carried out using monochromatic imager and color mapped sensors

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001006097A (en) * 1999-06-25 2001-01-12 Fujitsu Ten Ltd Device for supporting driving for vehicle
JP2002033934A (en) * 2000-07-18 2002-01-31 Fuji Photo Film Co Ltd Apparatus and method for image processing
JP2005110235A (en) * 2003-09-09 2005-04-21 Konica Minolta Holdings Inc Imaging apparatus
JP2007267170A (en) * 2006-03-29 2007-10-11 Nikon Corp Electronic camera with chroma saturation regulating function and image processing program
JP2007288573A (en) * 2006-04-18 2007-11-01 Olympus Corp Chroma suppress processing device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001006097A (en) * 1999-06-25 2001-01-12 Fujitsu Ten Ltd Device for supporting driving for vehicle
JP2002033934A (en) * 2000-07-18 2002-01-31 Fuji Photo Film Co Ltd Apparatus and method for image processing
JP2005110235A (en) * 2003-09-09 2005-04-21 Konica Minolta Holdings Inc Imaging apparatus
JP2007267170A (en) * 2006-03-29 2007-10-11 Nikon Corp Electronic camera with chroma saturation regulating function and image processing program
JP2007288573A (en) * 2006-04-18 2007-11-01 Olympus Corp Chroma suppress processing device

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107707789A (en) * 2016-08-08 2018-02-16 谷歌有限责任公司 Monochromatic color mapping is carried out using monochromatic imager and color mapped sensors
CN107707789B (en) * 2016-08-08 2020-11-03 谷歌有限责任公司 Method, computing device and storage medium for providing a color high resolution image of a scene

Similar Documents

Publication Publication Date Title
US8493502B2 (en) Image pickup apparatus, image pickup method, and storage medium storing program
US10560670B2 (en) Imaging apparatus and imaging control method
TWI416940B (en) Image processing apparatus and image processing program
US9426437B2 (en) Image processor performing noise reduction processing, imaging apparatus equipped with the same, and image processing method for performing noise reduction processing
EP3343912B1 (en) Imaging device
US9936172B2 (en) Signal processing device, signal processing method, and signal processing program for performing color reproduction of an image
JP2009017306A (en) Image display device and imaging apparatus using the same
JP2008160477A (en) Imaging apparatus, its control method, program, and storage medium
US11172173B2 (en) Image processing device, image processing method, program, and imaging device
US9214034B2 (en) System, device and method for displaying a harmonized combined image
JP2003304549A (en) Camera and image signal processing system
US9131199B2 (en) Imaging apparatus capable of generating an appropriate color image
US11798143B2 (en) Image processing apparatus and control method thereof
WO2013118337A1 (en) Imaging device
JP5228717B2 (en) Image input device
JP2005236588A (en) Image data conversion device and camera device
JP6411644B2 (en) Automatic vehicle camera device with histogram diffusion
JP5521927B2 (en) Imaging device
KR102247597B1 (en) Image processing apparatus and image processing method
JP2007288573A (en) Chroma suppress processing device
JP2013135305A (en) Signal processor, imaging apparatus, and imaging system
JP2006060744A (en) Noise reduction apparatus
JP5545596B2 (en) Image input device
JP2007336172A (en) Image signal processor and image signal processing method
JP2010147800A (en) Image processing apparatus

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20130417

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140317

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20141125

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20141224

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20150512