JP2006053682A - Image composing device and method - Google Patents

Image composing device and method Download PDF

Info

Publication number
JP2006053682A
JP2006053682A JP2004233682A JP2004233682A JP2006053682A JP 2006053682 A JP2006053682 A JP 2006053682A JP 2004233682 A JP2004233682 A JP 2004233682A JP 2004233682 A JP2004233682 A JP 2004233682A JP 2006053682 A JP2006053682 A JP 2006053682A
Authority
JP
Japan
Prior art keywords
color
image
composite
region
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2004233682A
Other languages
Japanese (ja)
Inventor
Koichi Abe
幸一 阿部
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to JP2004233682A priority Critical patent/JP2006053682A/en
Publication of JP2006053682A publication Critical patent/JP2006053682A/en
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Image Processing (AREA)
  • Studio Circuits (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Color Image Communication Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an image composing device and method enabling a clear distinction of character information such as an imaging date from a background original image when mapping it onto the original image by colorization. <P>SOLUTION: The image composiing device 10, which composites a composition image into a composition area of an original image after correcting a preset color of the composition image, comprises a histogram creation means 21 for dividing two-dimensional color coordinates into a plurality of color regions and allocating the colors of one or more pixels of the composition area to corresponding color regions to create a histogram, a color region decision means 22 for deciding the color region of the color of the composition area according to the histogram and a predetermined threshold, a color matching means 23 for determining whether or not the decided color region of the composition area is the same as the color region of the color of the composition image, and a color correction means 24 for correcting the color of the composition image according to the histogram and predetermined threshold if the color regions are the same. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は、画像合成装置及び方法に関し、特に、撮影の日付や時刻などの撮影情報をカラー画像として撮影画像に合成する装置及び方法に関する。   The present invention relates to an image synthesizing apparatus and method, and more particularly to an apparatus and method for synthesizing shooting information such as shooting date and time as a color image into a shot image.

従来、デジタルカメラには、フィルムカメラと同様のデータ（日付、撮影情報などの文字情報）写し込み機能が付けられている。
例えば、特許文献１に開示されたデジタルカメラにおいては、元画像（撮影画像）が淡色系のときは、黒で文字情報を写し込む一方、元画像が濃色系のときは白で文字情報を写し込む。これによって、文字情報を背景から容易に識別することができる。
特許第３０３７１４０号公報（段落００２９） Conventionally, a digital camera has a function of imprinting data (character information such as date and photographing information) similar to that of a film camera.
For example, in the digital camera disclosed in Patent Document 1, when the original image (captured image) is light color, the character information is copied in black, while when the original image is dark color, the character information is displayed in white. Copy. Thereby, the character information can be easily identified from the background.
Japanese Patent No. 3037140 (paragraph 0029)

最近、ユーザの多様な趣味感に応えるため、文字情報のカラー化が考えられている。
しかし、特許文献１では、文字情報をカラー化したとき、背景から容易に識別できるようにすることは開示されていない。
そこで、本発明は、撮影日付などの撮影情報をカラー化して元画像に写し込んだとき、元画像から明瞭に区別することができる画像合成装置及び方法を提供することを目的とする。 Recently, colorization of character information has been considered in order to respond to various tastes of users.
However, Patent Document 1 does not disclose that character information can be easily identified from the background when it is colored.
SUMMARY OF THE INVENTION An object of the present invention is to provide an image composition apparatus and method that can clearly distinguish photographing information such as a photographing date from the original image when the photographing information is colored and copied to the original image.

上述した課題を解決するため、文字情報の色をあらかじめ指定してカラー文字情報を元画像中に合成する際、元画像中の合成領域の色に応じて合成画像（撮影情報）の色を補正する。
また、文字情報の色をあらかじめ指定しないときは、合成領域の色に応じて合成画像（撮影情報）の色を決定する。 In order to solve the above-described problems, when the color of character information is specified in advance and the color character information is synthesized in the original image, the color of the synthesized image (shooting information) is corrected according to the color of the synthesis area in the original image. To do.
When the color of the character information is not designated in advance, the color of the composite image (photographing information) is determined according to the color of the composite area.

ここに、元画像中の合成領域の色は、合成領域の１以上の画素の色を、２次元色座標上で定義された複数の色領域のいずれかに振り分けてヒストグラムを作成し、そのヒストグラムと所定閾値とに基づいて、決定される。
具体的には、請求項１に係る発明は、合成画像を元画像の合成領域中に合成する際、あらかじめ設定した合成画像の色を補正してから上記合成領域中に合成する画像合成装置において、２次元色座標を複数の色領域に分割し、上記合成領域の１以上の画素の色を上記色領域のいずれかに振り分けてヒストグラムを作成するヒストグラム作成手段と、上記ヒストグラム作成手段の出力に接続され、上記ヒストグラムと所定閾値とに基づいて、上記合成領域の色領域を決定する色領域決定手段と、上記色領域決定手段の出力に接続され、上記決定された色領域と上記合成画像の色領域との一致・不一致を判定する色一致判定手段と、上記色一致判定手段の出力に接続され、上記色領域の一致が判定されたとき、上記ヒストグラムと上記所定閾値とに基づいて、上記合成画像の色を補正する色補正手段とを備えることを特徴とする。 Here, the color of the composite area in the original image is created by assigning the color of one or more pixels in the composite area to one of a plurality of color areas defined on the two-dimensional color coordinates, and generating the histogram And a predetermined threshold.
Specifically, the invention according to claim 1 is an image synthesizing apparatus that synthesizes a synthesized image in the synthesized region after correcting a preset color of the synthesized image when the synthesized image is synthesized in the synthesized region of the original image. Histogram creation means for dividing a two-dimensional color coordinate into a plurality of color areas and assigning the color of one or more pixels in the composite area to any of the color areas; and output from the histogram creation means Connected to the output of the color area determining means, the color area determining means for determining the color area of the synthesized area based on the histogram and a predetermined threshold, and the determined color area and the synthesized image A color match determination unit that determines whether the color region matches or not, and an output of the color match determination unit, and when the color region match is determined, the histogram and the predetermined threshold value Based on, characterized in that it comprises a color correction means for correcting the color of the composite image.

また、請求項２に係る発明は、請求項１記載の画像合成装置において、上記２次元色座標は、色差信号Ｃｒ及びＣｂによる直交座標であることを特徴とする。
また、請求項３に係る発明は、請求項１記載の画像合成装置において、上記色領域決定手段は、さらに、上記合成領域の１以上の画素の輝度信号Ｙに基づいて、上記合成領域の色領域を決定することを特徴とする。 According to a second aspect of the present invention, in the image composition device according to the first aspect, the two-dimensional color coordinates are orthogonal coordinates based on the color difference signals Cr and Cb.
According to a third aspect of the present invention, in the image synthesizing apparatus according to the first aspect, the color area determining means further includes a color of the synthesis area based on a luminance signal Y of one or more pixels of the synthesis area. A region is determined.

また、請求項４に係る発明は、請求項１記載の画像合成装置において、上記色補正手段は、上記ヒストグラムと所定閾値とに基づいて、上記合成画像の色差信号Ｃｒ及びＣｂを補正することを特徴とする。
また、請求項５に係る発明は、請求項４記載の画像合成装置において、上記色補正手段は、上記ヒストグラムと所定閾値とに基づき、且つ、上記合成画像の輝度信号Ｙａと上記合成領域の平均輝度信号Ｙｂの差分に基づき、上記合成画像の輝度信号Ｙａを補正することを特徴とする。 According to a fourth aspect of the present invention, in the image synthesizing apparatus according to the first aspect, the color correcting unit corrects the color difference signals Cr and Cb of the synthesized image based on the histogram and a predetermined threshold value. Features.
According to a fifth aspect of the present invention, in the image synthesizing apparatus according to the fourth aspect, the color correction means is based on the histogram and a predetermined threshold value, and is an average of the luminance signal Ya of the synthesized image and the synthesized area. The luminance signal Ya of the composite image is corrected based on the difference of the luminance signal Yb.

また、請求項６に係る発明は、請求項１記載の画像合成装置を使用する画像合成方法において、２次元色座標を複数の色領域に分割し、上記合成領域の１以上の画素の色を上記色領域のいずれかに振り分けたヒストグラムを作成するヒストグラム作成ステップと、上記ヒストグラムと所定閾値とに基づいて、上記合成領域の色領域を決定する色領域決定ステップと、上記決定された色領域と上記合成画像の色との色領域の一致・不一致を、上記ヒストグラムと上記所定閾値とに基づいて、判定する色領域一致判定ステップと、上記色領域の一致が判定されたとき、上記ヒストグラムと上記所定閾値とに基づいて、上記合成画像の色を補正する色補正ステップとを備えることを特徴とする。   The invention according to claim 6 is the image composition method using the image composition apparatus according to claim 1, wherein the two-dimensional color coordinates are divided into a plurality of color regions, and the color of one or more pixels in the composition region is determined. A histogram creation step for creating a histogram assigned to any one of the color regions; a color region determination step for determining a color region of the composite region based on the histogram and a predetermined threshold; and the determined color region A color region match determination step for determining whether the color region matches or does not match the color of the composite image based on the histogram and the predetermined threshold, and when the match between the color regions is determined, And a color correction step of correcting the color of the composite image based on a predetermined threshold value.

また、請求項７に係る発明は、請求項６記載の画像合成方法において、上記色領域決定ステップにおいて、上記２次元色座標は、色差信号Ｃｒ及びＣｂを直交座標であることを特徴とする。
また、請求項８に係る発明は、請求項７記載の画像合成方法において、上記色領域決定ステップにおいて、さらに、上記合成領域の１以上の画素の輝度信号Ｙに基づいて、上記合成領域の色領域を決定する。 According to a seventh aspect of the present invention, in the image synthesizing method according to the sixth aspect, in the color region determining step, the two-dimensional color coordinates are color difference signals Cr and Cb.
According to an eighth aspect of the present invention, in the image composition method according to the seventh aspect, in the color region determination step, the color of the composite region is further based on a luminance signal Y of one or more pixels of the composite region. Determine the area.

また、請求項９に係る発明は、請求項６記載の画像合成方法において、上記色補正ステップにおいて、上記ヒストグラムと所定閾値とに基づいて、上記合成画像の色差信号Ｃｒ及びＣｂを補正する。
また、請求項１０に係る発明は、請求項６記載の画像合成方法において、上記色補正ステップにおいて、上記ヒストグラムと所定閾値とに基き、且つ、上記合成画像の輝度信号Ｙａと上記合成領域の平均輝度信号Ｙｂの差分に基づき、上記合成画像の輝度信号Ｙａを補正することを特徴とする。 According to a ninth aspect of the present invention, in the image synthesizing method according to the sixth aspect, in the color correction step, the color difference signals Cr and Cb of the synthesized image are corrected based on the histogram and a predetermined threshold value.
According to a tenth aspect of the present invention, in the image synthesizing method according to the sixth aspect, in the color correction step, the luminance signal Ya of the synthesized image and the average of the synthesized area are based on the histogram and a predetermined threshold value. The luminance signal Ya of the composite image is corrected based on the difference of the luminance signal Yb.

また、請求項１１に係る発明は、合成画像を元画像の合成領域中に合成する際、あらかじめ合成画像の色を設定することなく、上記合成領域の色に基づいて上記合成画像の色を決定する画像合成装置において、２次元色座標を複数の色領域に分割し、上記合成領域の１以上の画素の色を上記色領域のいずれかに振り分けてヒストグラムを作成するヒストグラム作成手段と、上記ヒストグラム作成手段の出力に接続され、上記ヒストグラムと所定閾値とに基づいて、上記合成画像の色を決定する合成画像色決定手段とを備えることを特徴とする。   The invention according to claim 11 determines the color of the synthesized image based on the color of the synthesized area without setting the color of the synthesized image in advance when the synthesized image is synthesized in the synthesized area of the original image. An image synthesizing apparatus that divides a two-dimensional color coordinate into a plurality of color areas and distributes colors of one or more pixels in the synthesis area to any one of the color areas; And a composite image color determining unit that is connected to an output of the generating unit and determines a color of the composite image based on the histogram and a predetermined threshold value.

また、請求項１２に係る発明は、請求項１１記載の画像合成装置において、上記２次元座標は、色差信号Ｃｂ及びＣｒによる直交座標であることを特徴とする。
また、請求項１３に係る発明は、請求項１１記載の画像合成装置において、上記色領域決定手段は、さらに、上記合成領域の１以上の画素の輝度信号Ｙに基づいて、上記合成領域の色領域を決定することを特徴とする。 According to a twelfth aspect of the present invention, in the image synthesizing apparatus according to the eleventh aspect, the two-dimensional coordinates are orthogonal coordinates based on the color difference signals Cb and Cr.
According to a thirteenth aspect of the present invention, in the image synthesizing apparatus according to the eleventh aspect, the color area determining means further includes a color of the synthesis area based on a luminance signal Y of one or more pixels of the synthesis area. A region is determined.

また、請求項１４に係る発明は、請求項１１記載の画像合成装置において、上記合成画像色決定手段は、上記ヒストグラムと所定閾値とに基づいて、上記合成画像の色差信号Ｃｒ及びＣｂを決定する。
また、請求項１５に係る発明は、請求項１１記載の画像合成装置において、上記合成画像色決定手段は、上記ヒストグラムと所定閾値とに基づき、且つ、上記合成画像の輝度信号Ｙａと上記合成領域の平均輝度信号Ｙｂの差分に基づき、上記合成画像の輝度信号Ｙを補正することを特徴とする。 According to a fourteenth aspect of the present invention, in the image synthesizing apparatus according to the eleventh aspect, the synthesized image color determining means determines the color difference signals Cr and Cb of the synthesized image based on the histogram and a predetermined threshold value. .
According to a fifteenth aspect of the present invention, in the image synthesizing apparatus according to the eleventh aspect, the synthesized image color determining means is based on the histogram and a predetermined threshold, and the luminance signal Ya of the synthesized image and the synthesized region. The luminance signal Y of the composite image is corrected based on the difference of the average luminance signal Yb.

また、請求項１６に係る発明は、請求項１１記載の画像合成装置を使用する画像合成方法において、２次元色座標を複数の色領域に分割し、上記合成領域の１以上の画素の色を上記色領域のいずれかにに振り分けてヒストグラムを作成するヒストグラム作成ステップと、上記ヒストグラムと所定閾値とに基づいて、上記合成領域の色領域を決定する色領域決定ステップと、上記ヒストグラムと上記所定閾値とに基づいて、上記合成画像の色を決定する色決定ステップとを備えることを特徴とする。   According to a sixteenth aspect of the present invention, in the image synthesizing method using the image synthesizing device according to the eleventh aspect, the two-dimensional color coordinate is divided into a plurality of color areas, and the colors of one or more pixels in the synthetic area are obtained. A histogram creation step for creating a histogram by allocating to any of the color regions, a color region determination step for determining a color region of the composite region based on the histogram and a predetermined threshold, the histogram and the predetermined threshold And a color determining step for determining the color of the composite image based on the above.

また、請求項１７に係る発明は、請求項１６記載の画像合成方法において、上記色領域決定ステップにおいて、上記２次元色座標は、色差信号Ｃｒ及びＣｂを直交座標とする２次元色座標であることを特徴とする。
また、請求項１８に係る発明は、請求項１７記載の画像合成方法において、上記色領域決定ステップにおいて、さらに、上記合成領域の１以上の画素の輝度信号Ｙに基づいて、上記合成領域の色領域を決定することを特徴とする。 According to a seventeenth aspect of the present invention, in the image composition method according to the sixteenth aspect, in the color region determining step, the two-dimensional color coordinates are two-dimensional color coordinates having color difference signals Cr and Cb as orthogonal coordinates. It is characterized by that.
According to an eighteenth aspect of the present invention, in the image composition method according to the seventeenth aspect, in the color region determination step, the color of the composite region is further based on a luminance signal Y of one or more pixels of the composite region. A region is determined.

また、請求項１９に係る発明は、請求項１７記載の画像合成方法において、上記色決定ステップにおいて、上記ヒストグラムと所定閾値とに基づいて、上記合成画像の色差信号Ｃｒ及びＣｂを決定することを特徴とする。
また、請求項２０に係る発明は、請求項１９記載の画像合成方法において、上記色決定正ステップにおいて、上記ヒストグラムと所定閾値とに基づき、且つ、上記合成画像の輝度信号Ｙａと上記合成領域の平均輝度信号Ｙｂの差分に基づき、上記合成画像の輝度信号Ｙａを決定することを特徴とする。 According to a nineteenth aspect of the present invention, in the image composition method according to the seventeenth aspect, in the color determination step, the color difference signals Cr and Cb of the composite image are determined based on the histogram and a predetermined threshold value. Features.
According to a twentieth aspect of the present invention, in the image composition method according to the nineteenth aspect, in the color determination step, the luminance signal Ya of the composite image and the composite region are determined based on the histogram and a predetermined threshold value. The luminance signal Ya of the composite image is determined based on the difference of the average luminance signal Yb.

本発明によれば、合成画像（撮影日時などの撮影情報）をカラー化して元画像（撮影画像）の合成領域に写し込んだとき、合成画像を合成領域から明瞭に識別することができる。   According to the present invention, when a composite image (photographing information such as a photographing date and time) is colorized and copied into a composite region of an original image (photographed image), the composite image can be clearly identified from the composite region.

以下、図面を参照して、本発明の実施形態について説明する。
［画像合成装置］
図１は、デジタルカメラなどのデジタル撮像機器に内蔵された画像合成装置のブロック図である。
図１に示すように、デジタル撮像機器内では、レンズ系１で被写体をＣＣＤ２に結像し、光電変換信号をＡ／Ｄ３（アナログデジタル変換器）でデジタル撮像信号へと変換し、そのデジタル撮像信号をフレームメモリ４に格納する。その後、階調補正やエッジ強調などの画像処理を画像処理部５で行い、さらに、圧縮処理部６で、ＪＰＥＧ（Joint Photographic Experts Group)規格などで画像圧縮する。 Embodiments of the present invention will be described below with reference to the drawings.
[Image composition device]
FIG. 1 is a block diagram of an image composition apparatus built in a digital imaging device such as a digital camera.
As shown in FIG. 1, in a digital imaging device, a subject is imaged on a CCD 2 by a lens system 1, and a photoelectric conversion signal is converted into a digital imaging signal by an A / D 3 (analog / digital converter). The signal is stored in the frame memory 4. Thereafter, image processing such as tone correction and edge enhancement is performed by the image processing unit 5, and further, the compression processing unit 6 compresses the image according to the JPEG (Joint Photographic Experts Group) standard or the like.

画像合成装置１０は、圧縮処理手段６の出力に接続されており、カラー合成画像（例えば、撮影日付などの撮影情報）と圧縮処理手段６の出力であるデジタル画像（元画像）を合成して、不揮発性半導体メモリなどの記録手段７に出力する。
この画像合成時には、カラー合成画像が、元画像中の合成領域から明瞭に識別されるようにするため、必要な場合には、画像合成装置１０の判断により、合成画像の色が補正される。なお、合成画像の色をあらかじめ指定しないときは、合成領域の色に基づいて、合成画像の色が決定される。 The image composition device 10 is connected to the output of the compression processing means 6 and synthesizes a color composite image (for example, photographing information such as a photographing date) and a digital image (original image) that is the output of the compression processing means 6. And output to the recording means 7 such as a nonvolatile semiconductor memory.
At the time of this image composition, the color composition image is corrected by the judgment of the image composition device 10 as necessary so that the color composition image can be clearly identified from the composition area in the original image. When the color of the composite image is not designated in advance, the color of the composite image is determined based on the color of the composite area.

ここに、画像合成装置１０は、撮影日時などの合成画像を生成する合成画像生成手段１１と、元画像（撮像画像）中に合成画像（撮影情報）を合成するための領域を設定する合成領域設定手段１２と、合成画像を合成領域に合成することができるか否かを判定する合成領域検出手段１３と、合成画像の色を決定又は補正する合成画像色決定・補正手段１４と、合成画像と元画像を合成する画像合成手段１５と、画像合成が不可能であるときに警告を発する警告手段１６とを備えている。   Here, the image synthesizing apparatus 10 includes a synthetic image generating unit 11 that generates a synthetic image such as a photographing date and time, and a synthetic region that sets a region for synthesizing the synthetic image (photographing information) in the original image (captured image). A setting unit 12; a composite region detection unit 13 that determines whether or not the composite image can be combined with a composite region; a composite image color determination / correction unit 14 that determines or corrects the color of the composite image; And an image synthesizing unit 15 for synthesizing the original image and a warning unit 16 for issuing a warning when the image synthesis is impossible.

なお、画像合成装置１０は、演算回路、シフトレジスタ、メモリ、入出力回路等から構成された半導体電子回路を含み、プログラムにより、合成画像生成手段１１、合成領域設定手段１２、合成領域検出手段１３、合成画像色決定・補正手段１４、画像合成手段１５として機能し、ブザー、ディスプレイ、バイブレータなどの警告手段１６を駆動する。
そして、画像合成装置１５から、合成画像が元画像とともに記録手段７（不揮発性半導体メモリなど）へ出力される。 The image composition device 10 includes a semiconductor electronic circuit composed of an arithmetic circuit, a shift register, a memory, an input / output circuit, and the like, and a composite image generation means 11, a composition area setting means 12, and a composition area detection means 13 according to a program. They function as the composite image color determination / correction means 14 and the image synthesis means 15 and drive warning means 16 such as a buzzer, a display, and a vibrator.
Then, the composite image is output from the image composition device 15 together with the original image to the recording means 7 (nonvolatile semiconductor memory or the like).

図２は、合成画像色決定・補正手段１４のブロック図である。
図２に示すように、合成画像色決定・補正手段１４は、合成領域の画素を、２次元色座標上で定義された複数の色領域に振り分けたヒストグラムを作成するヒストグラム作成手段２１と、そのヒストグラムと所定の閾値とに基づいて、合成領域の色を決定する色領域決定手段２２と、あらかじめ指定された合成画像の色と合成領域の色とが一致するか否かを判定する色一致判定手段２３と、両者の色が一致すると判定されたとき、合成画像の色を補正する合成画像色補正手段２４とを備える。 FIG. 2 is a block diagram of the composite image color determination / correction means 14.
As shown in FIG. 2, the composite image color determining / correcting unit 14 includes a histogram creating unit 21 that creates a histogram in which pixels in the composite region are distributed to a plurality of color regions defined on two-dimensional color coordinates, Based on the histogram and a predetermined threshold, the color region determination means 22 for determining the color of the composite region, and a color match determination for determining whether the color of the composite image specified in advance matches the color of the composite region Means 23 and composite image color correction means 24 for correcting the color of the composite image when it is determined that the colors match.

なお、必ずしも、合成画像の色をあらかじめ指定する必要はなく、その場合は、制御手段３０から、色指定がない旨の制御信号を切替手段３１に出力し、色領域決定手段２２の出力を、切替手段３１を介して合成画像色決定手段２５に入力させる。なお、あらかじめ合成画像の色が指定されたときは、制御手段３０から、色指定がなされた旨の制御信号を切替手段３１に出力し、色領域決定手段２２の出力を、切替手段３１を介して色一致判定手段２３に入力させる。   Note that it is not always necessary to specify the color of the composite image in advance. In this case, the control unit 30 outputs a control signal indicating that no color is specified to the switching unit 31, and the output of the color region determination unit 22 is The synthesized image color determining means 25 is input via the switching means 31. When the color of the composite image is designated in advance, the control means 30 outputs a control signal indicating that the color designation has been made to the switching means 31, and the output of the color area determining means 22 is sent via the switching means 31. The color match determination means 23 is then input.

こうして、合成画像色補正手段２４又は合成画像色決定手段２５の出力が画像合成手段１５に入力され、合成画像と元画像とが合成される。
ここで、２次元色座標について説明する。
色を座標値で表す表色系は、ＣＩＥ（国際照明委員会）によれば、赤（Ｒ）、緑（Ｇ）、青（Ｂ）の波長領域での３刺激値Ｘ、Ｙ、Ｚに基づいたｘｙ直交座標系があり、この座標系で色度座標（ｘ、ｙ）をプロットした平面図形をｘｙ色度図と呼んでいる。ここに、ｘ＝Ｘ／（Ｘ＋Ｙ＋Ｚ）、ｙ＝Ｙ／（Ｘ＋Ｙ＋Ｚ）である。 In this way, the output of the synthesized image color correcting unit 24 or the synthesized image color determining unit 25 is input to the image synthesizing unit 15, and the synthesized image and the original image are synthesized.
Here, the two-dimensional color coordinate will be described.
According to the CIE (International Commission on Illumination), the color system that expresses colors by coordinate values is tristimulus values X, Y, and Z in the red (R), green (G), and blue (B) wavelength regions. There is an xy orthogonal coordinate system based on this, and a plane figure in which chromaticity coordinates (x, y) are plotted in this coordinate system is called an xy chromaticity diagram. Here, x = X / (X + Y + Z) and y = Y / (X + Y + Z).

また、ＣＩＥのＵＣＳ色度図は、ｕ’＝４Ｘ ／（Ｘ＋１５Ｙ＋３Ｚ）、ｖ’＝９Ｙ／（Ｘ＋１５Ｙ＋３Ｚ）として、ｕ’ｖ’直交座標系上のプロットである。
を定め、これをＵＣＳ色度図と呼んでいる。
また、ＣＩＥのＬ*ａ*ｂ* 表色系は、
Ｌ* ＝ １１６（Ｙ／Ｙｎ）1/3 − １６
ａ* ＝ ５００（（Ｘ／Ｘｎ）1/3 − （Ｙ／Ｙｎ）1/3）
ｂ* ＝ ２００（（Ｙ／Ｙｎ）1/3 − （Ｚ／Ｚｎ）1/3）
で定義された３次元直交座標によるプロットである。ここに、Ｘｎ、Ｙｎ、Ｚｎは、特定の白色物体（完全拡散反射面）の３刺激値である。 The UCS chromaticity diagram of the CIE is a plot on the u′v ′ orthogonal coordinate system where u ′ = 4X / (X + 15Y + 3Z) and v ′ = 9Y / (X + 15Y + 3Z).
This is called the UCS chromaticity diagram.
The CIE L * a * b * color system is
L * = 116 (Y / Yn) 1 / 3-16
a * = 500 ((X / Xn) 1 /3-(Y / Yn) 1/3 )
b * = 200 ((Y / Yn) 1 /3-(Z / Zn) 1/3 )
Is a plot in three-dimensional Cartesian coordinates defined in Here, Xn, Yn, and Zn are tristimulus values of a specific white object (complete diffuse reflection surface).

ＣＩＥによるこれらの色度図（２次元直交座標系）が、２次元色座標に該当することはもちろんである。
しかし、本実施形態では、簡単のため、色差信号Ｃｒ及びＣｂによる２次元直交座標を例として説明する。
ここに、３原色信号を、Ｒ（赤）、Ｇ（緑）、Ｂ（青）とすると、
Ｙ ＝ ０．２９９＊Ｒ ＋ ０．５８７＊Ｇ ＋ ０．１４４＊Ｂ
Ｃｒ＝ ０．５００００＊Ｒ−０．４１８６９＊Ｇ−０．０８１３１＊Ｂ＋１２８
Ｃｂ＝−０．１６８７４＊Ｒ−０．３３１２６＋＊Ｇ＋０．５００００＊Ｂ＋１２８
で定義する。ただし、３原色信号を各色８ビットとして、Ｃｒ及びＣｂに”１２８”のオフセットを加えている。 It goes without saying that these chromaticity diagrams (two-dimensional orthogonal coordinate system) by CIE correspond to two-dimensional color coordinates.
However, in this embodiment, for the sake of simplicity, a description will be given by taking two-dimensional orthogonal coordinates based on the color difference signals Cr and Cb as an example.
Here, if the three primary color signals are R (red), G (green), and B (blue),
Y = 0.299 * R + 0.587 * G + 0.144 * B
Cr = 0.50000 * R−0.41869 * G−0.0811 * B + 128
Cb = −0.16874 * R−0.33126 + * G + 0.50000 * B + 128
Define in. However, an offset of “128” is added to Cr and Cb, assuming that the three primary color signals are 8 bits for each color.

次に、図３を参照して、ＣｒＣｂ２次元色座標上で定義される色領域について説明する。
図３に示すように、一例として、ＣｒＣｂ座標系が９つの色領域に分割されている。
色領域１から色領域８までは、半径１２８の円を８分割したものであり、各象限が２分割されている。また、色領域９は、座標原点を中心とし、彩度が低い色領域であり、色領域９の半径は、適宜に設定する。 Next, with reference to FIG. 3, the color area defined on the CrCb two-dimensional color coordinate will be described.
As shown in FIG. 3, as an example, the CrCb coordinate system is divided into nine color regions.
From the color region 1 to the color region 8, a circle with a radius of 128 is divided into eight, and each quadrant is divided into two. The color region 9 is a color region having a low saturation with the coordinate origin as the center, and the radius of the color region 9 is appropriately set.

次に、図４（Ａ）、図４（Ｂ）、図４（Ｃ）を参照して、合成領域の画素のヒストグラムについて説明する。
各ヒストグラムは、合成領域の各画素がどの色領域に属するかを計数したものである。なお、必ずしもすべての画素を計数する必要はないが、ヒストグラムを安定させるため、ある程度多くの画素を計数するとよい。 Next, with reference to FIGS. 4A, 4 </ b> B, and 4 </ b> C, a histogram of pixels in the synthesis area will be described.
Each histogram is a count of which color region each pixel in the synthesis region belongs to. Note that it is not always necessary to count all the pixels, but a certain number of pixels may be counted to stabilize the histogram.

図４（Ａ）では、色領域４の画素数が閾値より大きい。このように、閾値を超える色領域がただ１つである場合は、色領域決定手段２２は、当該色領域の色を合成領域の色であると決定する。
図４（Ｂ）では、色領域４と色領域７の画素数が閾値より大きい。このように、閾値を超える色領域が２つ以上である場合は、色領域決定手段２２は、閾値を超えたすべての色領域（この場合は、色領域４及び色領域７）の色を合成領域の色であると決定する。 In FIG. 4A, the number of pixels in the color region 4 is larger than the threshold value. Thus, when there is only one color area exceeding the threshold, the color area determination unit 22 determines the color of the color area as the color of the synthesis area.
In FIG. 4B, the number of pixels in the color region 4 and the color region 7 is larger than the threshold value. As described above, when there are two or more color regions exceeding the threshold value, the color region determination unit 22 combines the colors of all the color regions exceeding the threshold value (in this case, the color region 4 and the color region 7). Determine the color of the area.

なお、後述するように、図４（Ａ）の場合と、図４（Ｂ）の場合では、合成画像の色の補正方法又は決定方法は異なる。
一方、図４（Ｃ）では、所定閾値を超える色領域が１つも存在しない。この場合には、合成領域は識別力のある色を有さないため、色領域決定手段２２は、合成領域の色を決定しない。 As will be described later, the method for correcting or determining the color of the composite image differs between the case of FIG. 4A and the case of FIG. 4B.
On the other hand, in FIG. 4C, there is no color region exceeding the predetermined threshold. In this case, since the combined area does not have a discriminating color, the color area determining unit 22 does not determine the color of the combined area.

［画像合成方法］
図５は、画像合成方法を説明するためのフローチャートである。
まず、Ｓ１において、元画像（撮像画像）中の合成領域を検出し、合成画像（撮影日時などの撮影情報）を合成することができるかどうか判定する。
ここで、図６、図７を参照して、図５のＳ１をさらに説明する。 [Image composition method]
FIG. 5 is a flowchart for explaining the image composition method.
First, in S1, a composite area in the original image (captured image) is detected, and it is determined whether the composite image (capturing information such as the shooting date and time) can be combined.
Here, S1 of FIG. 5 will be further described with reference to FIGS.

図６は、合成画像領域を示す図である。
図６に示すように、元画像寸法は、デジタル撮像機器側の図示しない設定手段により設定されており、横Ｗ、縦Ｌの寸法を有し、元画像の左上端をｘｙ座標の原点としている。また、合成領域は、合成領域設定手段１２によって設定されており、横ｈ、縦ｖの寸法を有し、合成領域の左上端の座標が（ｘ、ｙ）としている。 FIG. 6 is a diagram illustrating a composite image area.
As shown in FIG. 6, the original image dimensions are set by setting means (not shown) on the digital imaging device side, have horizontal W and vertical L dimensions, and the upper left corner of the original image is the origin of the xy coordinates. . The composite area is set by the composite area setting means 12, has dimensions of horizontal h and vertical v, and the coordinates of the upper left corner of the composite area are (x, y).

図７は、Ｓ１を詳細に説明するためのフローチャートである。
まず、Ｓ１１において、合成領域検出手段１３は、合成画像生成手段１１により生成された合成画像寸法ａ×ｂを読み込む。
次に、Ｓ１２において、合成領域検出手段１３は、合成領域設定手段により設定された合成領域寸法ｈ×ｖを読み込む。 FIG. 7 is a flowchart for explaining S1 in detail.
First, in S <b> 11, the composite area detection unit 13 reads the composite image size a × b generated by the composite image generation unit 11.
Next, in S12, the composite region detection unit 13 reads the composite region size h × v set by the composite region setting unit.

次に、Ｓ１３において、合成領域検出手段１３は、デジタル撮像機器側から元画像寸法Ｗ×Ｌを読み込む。
次に、Ｓ１４において、合成領域検出手段１３は、画像合成は可能か否かを判定する。ａ＜ｈ、ｂ＜ｖであれば画像合成は可能である。
ここで、Ｓ１４において、画像合成が可能であると判定されれば、図５のフローチャートのＳ２に進む。 Next, in S13, the composite area detection unit 13 reads the original image size W × L from the digital imaging device side.
Next, in S <b> 14, the synthesis area detection unit 13 determines whether image synthesis is possible. If a <h and b <v, image composition is possible.
If it is determined in S14 that image composition is possible, the process proceeds to S2 in the flowchart of FIG.

一方、Ｓ１４において、画像合成は可能ではないと判定されたときは、Ｓ１５に進み、合成領域検出手段１３は、警告手段１６に警告（表示、音声、振動などによる）を出させて、全処理を終了する。
次に、図５のフローチャートに戻り、図７のＳ１４から図５のＳ２に進んだ後の処理について説明する。 On the other hand, if it is determined in S14 that image composition is not possible, the process proceeds to S15, where the composition area detection unit 13 causes the warning unit 16 to issue a warning (by display, sound, vibration, etc.) and perform all processing. Exit.
Next, returning to the flowchart of FIG. 5, the processing after proceeding from S <b> 14 of FIG. 7 to S <b> 2 of FIG. 5 will be described.

図５のＳ２において、ヒストグラム作成手段２１は、図４（Ａ）、図４（Ｂ）、図４（Ｃ）に例示したようなヒストグラムを作成する。
次に、Ｓ３において、制御手段３０は、合成画像の色は指定されているか否かを判定する。
ここで、Ｓ３において、合成画像の色が指定されていないと判定されれば、制御手段３０は切替手段３１を介して、色領域決定手段２２の出力を合成画像色決定手段２５に入力させ、Ｓ５に進んで、合成画像色決定手段２５が合成画像の色を決定した後、Ｓ８に進んで、画像合成手段１５が画像合成を行う。 In S2 of FIG. 5, the histogram creation means 21 creates a histogram as illustrated in FIGS. 4A, 4B, and 4C.
Next, in S3, the control means 30 determines whether or not the color of the composite image is designated.
Here, if it is determined in S3 that the color of the composite image is not designated, the control means 30 causes the output of the color area determination means 22 to be input to the composite image color determination means 25 via the switching means 31, Proceeding to S5, the synthesized image color determining means 25 determines the color of the synthesized image, and then proceeding to S8, where the image synthesizing means 15 performs image synthesis.

一方、Ｓ３において、合成画像の色が指定されていると判定されれば、Ｓ４に進み、色一致判定手段２３が、合成画像と合成領域が属する色領域は一致するか否かを判定する。
ここで、Ｓ４において、合成画像と合成領域の色領域は一致すると判定されれば、Ｓ６に進んで合成画像の色を補正し、その後で、Ｓ８において、画像合成を行う。
一方、Ｓ４において、合成画像と合成領域の色領域は一致しないと判定されれば、Ｓ７に進んで合成画像の色を補正せず、Ｓ８に進んで、画像合成を行う。 On the other hand, if it is determined in S3 that the color of the composite image is designated, the process proceeds to S4, and the color matching determination unit 23 determines whether or not the composite image and the color region to which the composite region belongs match.
Here, if it is determined in S4 that the color area of the composite image matches the color area of the composite area, the process proceeds to S6 to correct the color of the composite image, and then the image is combined in S8.
On the other hand, if it is determined in S4 that the color area of the composite image and the composite area do not match, the process proceeds to S7, the color of the composite image is not corrected, and the process proceeds to S8 to perform image composition.

［色補正方法］
次に、図８を参照して、図５のフローチャートのＳ６における合成画像（撮影日時などの撮影情報）の色補正方法について説明する。
図８に示すように、合成画像の色補正は、元画像（撮像画像）中の合成領域の画素の色領域ごとに作成したヒストグラムと、所定の閾値とを比較した結果に基づいて行われる。
ここに、所定の閾値は、あまり小さいと合成領域の色を決定することが困難になるため、合成領域の色を決定するために十分な大きさの値が経験的に定められる。 [Color correction method]
Next, with reference to FIG. 8, the color correction method of the composite image (shooting information such as the shooting date and time) in S6 of the flowchart of FIG. 5 will be described.
As shown in FIG. 8, the color correction of the composite image is performed based on a result of comparing a histogram created for each color region of the pixel in the composite region in the original image (captured image) with a predetermined threshold value.
Here, if the predetermined threshold is too small, it is difficult to determine the color of the synthesis area, and thus a value large enough to determine the color of the synthesis area is determined empirically.

すなわち、閾値を超える合成領域の色領域が１つ以上あれば、閾値を超えたすべての色領域の色が合成領域の色であると決定され、その決定に基づいて合成画像の色補正（又は輝度補正）が行われる。なお、閾値を超える合成画像の色領域が１つだけである場合と、２つ以上である場合とで、補正方法を異ならしめている。
一方、閾値を超える合成画像の色領域が全く存在しない場合は、合成領域の色は明確でないため、色領域を決定する必要はなく、色補正（又は輝度補正）も行わない。 That is, if there is at least one color area of the composite area that exceeds the threshold, the colors of all the color areas that exceed the threshold are determined to be the colors of the composite area, and based on the determination, color correction of the composite image (or Brightness correction). Note that the correction method is different between the case where there is only one color region of the composite image exceeding the threshold and the case where there are two or more color regions.
On the other hand, when there is no color area of the composite image exceeding the threshold value, the color of the composite area is not clear, so it is not necessary to determine the color area and color correction (or luminance correction) is not performed.

以下、色補正方法について具体的に説明する。
まず、Ｓ６０において、ヒストグラム作成手段２１が作成したヒストグラムを使用して、色領域決定手段２２は、閾値を超える合成領域の色領域が１つであるか否かを判定する。
ここで、Ｓ６０において、閾値を超える合成領域の色領域が１つではないと判定されたときは、Ｓ７０に進み、閾値を超える合成領域の色領域が２つ以上であるか否かを判定する。Ｓ７０に続く処理は後述する。 The color correction method will be specifically described below.
First, in S60, using the histogram created by the histogram creating means 21, the color area determining means 22 determines whether or not there is one color area of the combined area exceeding the threshold.
Here, in S60, when it is determined that there is not one color area of the synthesis area exceeding the threshold value, the process proceeds to S70, and it is determined whether or not there are two or more color areas of the synthesis area exceeding the threshold value. . Processing subsequent to S70 will be described later.

一方、Ｓ６０において、閾値を超える合成領域の色領域が１つであると判定されたときは、Ｓ６１に進み、色領域決定手段２２は、合成領域の色は、当該閾値を超えた色領域の色であると決定する。
次に、Ｓ６２において、色一致判定手段２３は、合成領域の色が属する色領域は合成画像の色が属する色領域と同じであるか否かを判定する。 On the other hand, when it is determined in S60 that there is one color area of the composite area that exceeds the threshold, the process proceeds to S61, and the color area determination means 22 determines that the color of the composite area exceeds the threshold. Determine color.
Next, in S62, the color matching determination unit 23 determines whether the color area to which the color of the composite area belongs is the same as the color area to which the color of the composite image belongs.

ここで、Ｓ６２において、両者の色領域は同じではないと判定されたときは、合成画像の色補正は不必要であるので、Ｓ８１に進み、合成画像の色補正を行わずに、全処理を終了する。
一方、Ｓ６２において、両者の色領域は同じであると判定されたときは、合成画像の色補正が必要となる。そこで、Ｓ６３に進み、色一致判定手段２３は、合成領域の色が属する色領域は特定色領域（図３に示した色領域９（低彩度領域））であるか否かを判定する。 Here, if it is determined in S62 that the two color regions are not the same, the color correction of the composite image is unnecessary, so the process proceeds to S81 and the entire process is performed without performing the color correction of the composite image. finish.
On the other hand, if it is determined in S62 that both color regions are the same, color correction of the composite image is required. In step S63, the color matching determination unit 23 determines whether the color area to which the color of the synthesis area belongs is a specific color area (color area 9 (low saturation area) illustrated in FIG. 3).

ここで、Ｓ６３において、合成領域の色領域が特定色領域であると判定されれば、合成領域と合成画像はともに低彩度であるため、両者の輝度を異ならせることが適切である。そこで、Ｓ６４に進んで、合成画像の輝度信号補正を行う。
具体的には、Ｓ６４において、合成画像色補正手段２４は、合成領域の輝度信号の平均値Ｙａｖを求める。そして、合成画像の輝度信号Ｙ１との差分Ｓ（＝Ｙａｖ−Ｙ１）を求める。 Here, if it is determined in S63 that the color area of the composite area is the specific color area, the composite area and the composite image are both low-saturated, so it is appropriate to make the brightness of the two different. Accordingly, the process proceeds to S64, and the luminance signal correction of the composite image is performed.
Specifically, in S64, the composite image color correcting unit 24 obtains the average value Yav of the luminance signals in the composite area. Then, a difference S (= Yav−Y1) from the luminance signal Y1 of the composite image is obtained.

そして、合成画像の補正された輝度Ｙ２を、例えば、
Ｙ２＝Ｙ１＋ｋ・Ｓとする。ここに、係数ｋは正とする。これにより、合成画像の設定輝度Ｙ１が合成領域の平均輝度より低いときは、補正後の輝度信号Ｙ２は合成領域の平均輝度信号Ｙａｖより高くなる一方、合成画像の設定輝度Ｙ１が合成領域の平均輝度より高いときは、補正後の輝度信号Ｙ２は合成領域の平均輝度信号Ｙａｖより低くなる。このように、合成画像の輝度信号は合成領域の平均輝度と異なるなるように補正され、合成画像の識別性が高まる。 Then, the corrected luminance Y2 of the composite image is, for example,
Y2 = Y1 + k · S. Here, the coefficient k is positive. Thereby, when the set brightness Y1 of the composite image is lower than the average brightness of the composite area, the corrected brightness signal Y2 is higher than the average brightness signal Yav of the composite area, while the set brightness Y1 of the composite image is the average of the composite area When the luminance is higher than the luminance, the corrected luminance signal Y2 is lower than the average luminance signal Yav in the synthesis area. In this way, the brightness signal of the composite image is corrected to be different from the average brightness of the composite area, and the distinguishability of the composite image is improved.

なお、合成画像の補正された輝度Ｙ２を、
Ｙ２＝Ｙａｖ＋ｋ・Ｓとしてもよい。これによっても上式を用いた場合と同じ補正結果が得られる。
また、合成画像の補正された輝度Ｙ２を、例えば、
Ｙ２＝Ｙ１−ｋ・Ｓとする。ここに、係数ｋは正とする。これにより、合成画像の設定輝度Ｙ１が合成領域の平均輝度より低いときは、補正後の輝度信号Ｙ２は合成領域の平均輝度信号Ｙａｖよりさらに低くなる一方、合成画像の設定輝度Ｙ１が合成領域の平均輝度より高いときは、補正後の輝度信号Ｙ２は合成領域の平均輝度信号Ｙａｖよりさらに高くなりなる。このように、合成画像の輝度信号は合成領域の平均輝度と異なるなるように補正され、合成画像の識別性がより高まる。 Note that the corrected luminance Y2 of the composite image is
It is good also as Y2 = Yav + k * S. This also provides the same correction result as when the above equation is used.
Further, the corrected luminance Y2 of the composite image is, for example,
Y2 = Y1-k · S. Here, the coefficient k is positive. Thereby, when the set brightness Y1 of the composite image is lower than the average brightness of the composite area, the corrected brightness signal Y2 is further lower than the average brightness signal Yav of the composite area, while the set brightness Y1 of the composite image is that of the composite area. When the average luminance is higher than the average luminance, the corrected luminance signal Y2 becomes higher than the average luminance signal Yav in the synthesis area. In this way, the brightness signal of the composite image is corrected so as to be different from the average brightness of the composite area, and the distinguishability of the composite image is further increased.

なお、補正後の輝度信号Ｙ２を、差分Ｓからのデータテーブル参照により、補正係数Ｋを取得して、
Ｙ２＝Ｙａｖ＋Ｋなどとしてもよい。
一方、Ｓ６３において、合成領域の色領域が特定色領域ではないと判定されれば、色差信号Ｃｒ、Ｃｂの極性反転を行う。その理由は、Ｓ６２において、両者が同一色であると判定されたため、両者の色を、青色と黄色などのように補色の関係に立たせれば、合成画像が見易くなるからである。 The corrected luminance signal Y2 is obtained by referring to the data table from the difference S to obtain the correction coefficient K.
Y2 = Yav + K may be used.
On the other hand, if it is determined in S63 that the color area of the combined area is not the specific color area, the polarity of the color difference signals Cr and Cb is inverted. The reason is that since it is determined in S62 that both colors are the same color, if the two colors are in a complementary color relationship such as blue and yellow, the composite image is easy to see.

すなわち、色差信号Ｃｒ、Ｃｂがそれぞれ例えば８ビットであるとしたとき、色差信号Ｃｒ、Ｃｂが１２８より大きいときは、極性反転後の色差信号Ｃｉｒ，Ｃｉｂを、
Ｃｉｒ＝Ｃｒ−１２８、Ｃｉｂ＝Ｃｂ−１２８とする。
一方、色差信号Ｃｒ、Ｃｂが１２８より大きくないときは、極性反転後の色差信号Ｃｉｒ， Ｃｉｂを、
Ｃｉｒ＝Ｃｒ＋１２８、Ｃｉｂ＝Ｃｂ＋１２８とする。 That is, assuming that the color difference signals Cr and Cb are each 8 bits, for example, if the color difference signals Cr and Cb are greater than 128, the color difference signals Cir and Cib after polarity inversion are
It is assumed that Cir = Cr−128 and Cib = Cb−128.
On the other hand, when the color difference signals Cr and Cb are not larger than 128, the color difference signals Cir and Cib after polarity inversion are
It is assumed that Cir = Cr + 128 and Cib = Cb + 128.

なお、上述した極性反転に限らず、係数ｋ１とｋ２とをあらかじめ定めて、Ｃｒ、Ｃｂが１２８より大きいときは、極性反転後の色差信号をＣｉｒ， Ｃｉｂを、
Ｃｉｒ＝ｋ１・（Ｃｒ−１２８）＋ｋ２、Ｃｉｂ＝ｋ１・（Ｃｂ−１２８）＋ｋ２
とする一方、色差信号Ｃｒ、Ｃｂが１２８より大きくないときは、極性反転後の色差信号をＣｉｒ， Ｃｉｂを、
Ｃｉｒ＝ｋ１・（Ｃｒ＋１２８）＋ｋ２、Ｃｉｂ＝ｋ１・（Ｃｂ＋１２８）＋ｋ２
としても、両者の色を違えることができ、合成画像が見易くなる。 Not only the polarity inversion described above but also the coefficients k1 and k2 are determined in advance, and when Cr and Cb are greater than 128, the color difference signals after polarity inversion are represented by Cir and Cib,
Cir = k1 · (Cr−128) + k2, Cib = k1 · (Cb−128) + k2
On the other hand, when the color difference signals Cr and Cb are not larger than 128, the color difference signals after polarity inversion are represented as Cir and Cib.
Cir = k1 · (Cr + 128) + k2, Cib = k1 · (Cb + 128) + k2
However, both colors can be different, and the composite image can be easily viewed.

次に、Ｓ６０からＳ７０へ進んだ場合の処理について説明する。
Ｓ７０は、閾値を超える合成領域の色領域が２つ以上であるか否かを判定する処理である。
Ｓ７０において、色領域決定手段２２が、閾値を超える合成領域の色領域が２つ以上ではない（閾値を超える合成領域の色領域が存在しない）と判定したときは、Ｓ８０に進み、色領域決定手段２２は、合成領域の色領域を決定することなくＳ８１へと進み、合成画像の色補正を行うことなく、全処理を終了する。 Next, processing when the process proceeds from S60 to S70 will be described.
S70 is a process for determining whether or not there are two or more color regions in the composite region that exceed the threshold.
In S70, when the color area determination unit 22 determines that there are not two or more color areas in the synthesis area exceeding the threshold value (there is no color area in the synthesis area exceeding the threshold value), the process proceeds to S80, and the color area determination is performed. The means 22 proceeds to S81 without determining the color area of the composite area, and ends all the processes without correcting the color of the composite image.

一方、Ｓ７０において、色領域決定手段２２が、閾値を超える合成領域の色領域が２つ以上であると判定したときは、Ｓ７１に進み、色領域決定手段２２は、閾値を超えた色領域すべてを合成領域の色領域と決定する。
次に、Ｓ７２において、色一致判定手段２３は、閾値を超えた合成領域の色領域の１つが合成画像の色が属する色領域と一致するか否かを判定する。 On the other hand, when the color region determination unit 22 determines in S70 that there are two or more color regions in the composite region that exceed the threshold, the process proceeds to S71, and the color region determination unit 22 determines that all the color regions that exceed the threshold. Is determined as the color region of the composite region.
Next, in S <b> 72, the color matching determination unit 23 determines whether one of the color areas in the synthesis area that exceeds the threshold matches the color area to which the color of the synthesis image belongs.

ここで、Ｓ７２において、閾値を超えた合成領域の色領域のいずれも合成画像の色が属する色領域とは一致しないと判定されれば、Ｓ８１に進んで、合成画像の色補正を行うことなく全処理を終了する。
一方、Ｓ７２において、閾値を超えた合成領域の色領域の１つが合成画像の色が属する色領域と一致すると判定されれば、Ｓ７３に進んで、色一致判定手段２３は、ヒストグラムの中から、閾値を超えず、且つ、最も度数の少ない色領域を選択する。図４（Ｂ）の例では、閾値を超えず最小度数の色領域は、色領域１又は色領域９である。そこで、この例では、色領域１及び色領域９を選択し、Ｓ７４に進む。 Here, in S72, if it is determined that none of the color areas of the composite area exceeding the threshold value matches the color area to which the color of the composite image belongs, the process proceeds to S81, and the color correction of the composite image is not performed. End all processing.
On the other hand, if it is determined in S72 that one of the color regions of the composite region that exceeds the threshold matches the color region to which the color of the composite image belongs, the process proceeds to S73, and the color match determination unit 23 determines from the histogram. A color region that does not exceed the threshold and has the lowest frequency is selected. In the example of FIG. 4B, the color area having the minimum frequency that does not exceed the threshold is the color area 1 or the color area 9. Therefore, in this example, the color area 1 and the color area 9 are selected, and the process proceeds to S74.

次に、Ｓ７４において、色一致判定手段２３は、選択した色領域は特定色領域（色領域９）であるか否かを判定する。
ここで、Ｓ７４において、選択した色領域の１つが特定色領域（色領域９）であると判定されたときは、Ｓ７５に進んで、合成画像の輝度信号を補正する。この輝度信号補正は、Ｓ６４における輝度信号補正と同じである。 Next, in S74, the color matching determination unit 23 determines whether or not the selected color area is a specific color area (color area 9).
Here, in S74, when it is determined that one of the selected color areas is the specific color area (color area 9), the process proceeds to S75, and the luminance signal of the composite image is corrected. This luminance signal correction is the same as the luminance signal correction in S64.

一方、Ｓ７４において、選択した色領域のいずれも特定色領域（色領域９の低彩度領域）ではないと判定されたときは、合成画像に設定されていた色を変更する必要がある。そこで、Ｓ７６に進んで、合成画像の設定色を置換する補正を行う。
この色置換は、合成画像の設定色を、選択した色領域のいずれかの色に置換するものである。その理由は、選択した色領域は、必ず、閾値を超えた色領域と異なるからであり、これによって、合成画像と合成領域の色が異なるようにできるからである。 On the other hand, when it is determined in S74 that none of the selected color areas is the specific color area (the low saturation area of the color area 9), it is necessary to change the color set in the composite image. Accordingly, the process proceeds to S76 and correction for replacing the set color of the composite image is performed.
This color replacement replaces the set color of the composite image with any color in the selected color region. The reason is that the selected color area is always different from the color area exceeding the threshold value, so that the colors of the composite image and the composite area can be made different.

選択した色領域が複数あるときは、例えば、閾値を超えた色領域からの距離が最大であるような色領域を、選択した色領域の中から、選ぶとよい。なお、距離はＣｒＣｂ直交座標上のユークリッド距離で定義してもよい。
また、選択した色領域が所定数以上存在し、合成画像の色補正が上記の基準では困難となることがある。この場合には、色領域１から色領域８の色の置換値を定めたデータテーブルを参照することとしてもよい。すなわち、合成画像の設定色と一致すると判定された色領域の色を上述したデータテーブルを参照して、置換すれば、合成画像と合成領域の色は異なったものになるからである。 When there are a plurality of selected color areas, for example, a color area having the maximum distance from the color area exceeding the threshold value may be selected from the selected color areas. The distance may be defined by the Euclidean distance on the CrCb orthogonal coordinates.
In addition, there may be a predetermined number or more of selected color regions, and color correction of the composite image may be difficult with the above-described criteria. In this case, it is possible to refer to a data table in which the color replacement values of the color area 1 to the color area 8 are determined. That is, if the color of the color region determined to match the set color of the composite image is replaced with reference to the data table described above, the color of the composite image and the composite region will be different.

以上、合成画像の色をあらかじめ指定した場合の、合成画像の色補正・輝度補正について説明した。
なお、Ｓ６４及びＳ７５においては、輝度信号補正を行ったが、これに限らず、Ｓ７６の色置換を行ってもよい。これによっても、合成画像を合成領域から明瞭に識別させるという目的を達成することができる。 In the above, the color correction / luminance correction of the composite image when the color of the composite image is designated in advance has been described.
In S64 and S75, the luminance signal correction is performed. However, the present invention is not limited to this, and color replacement in S76 may be performed. This can also achieve the purpose of clearly identifying the composite image from the composite region.

［色決定方法］
次に、図９を参照して、図５のフローチャートのＳ５における合成画像の色を決定する方法について説明する。これは、合成画像の色を、あらかじめ指定することなく、合成画像色決定手段２５が自動的に決定するための処理である。
図９に示す色決定方法は、図８の色補正方法とほとんど同じであるが、異なる部分もあるため、以下、具体的に説明する。 [Color determination method]
Next, the method for determining the color of the composite image in S5 of the flowchart of FIG. 5 will be described with reference to FIG. This is a process for the composite image color determination means 25 to automatically determine the color of the composite image without specifying it in advance.
The color determination method shown in FIG. 9 is almost the same as the color correction method of FIG. 8, but there are some differences, so that it will be specifically described below.

まず、Ｓ６０において、ヒストグラム作成手段２１が作成したヒストグラムに基づき、色領域決定手段２２は、閾値を超える合成領域の色領域が１つか否かを判定する。
ここで、Ｓ６０において、閾値を超える合成領域の色領域が１つではないと判定されたときは、Ｓ７０に進み、閾値を超える合成領域の色領域が２つ以上か否かを判定する。Ｓ７０に続く処理は後述する。 First, in S60, based on the histogram created by the histogram creation means 21, the color area determination means 22 determines whether there is one color area of the synthesis area that exceeds the threshold.
Here, in S60, when it is determined that there is not one color area of the synthesis area exceeding the threshold value, the process proceeds to S70, and it is determined whether or not there are two or more color areas of the synthesis area exceeding the threshold value. Processing subsequent to S70 will be described later.

一方、Ｓ６０において、閾値を超える合成領域の色領域が１つであると判定されたときは、Ｓ６３に進み、色領域決定手段２２は、合成領域の当該色領域は特定色領域（色領域９の低彩度領域）か否かを判断する。
ここで、Ｓ６３において、合成領域の当該色領域が特定色領域であると判定されれば、合成画像の色を、図８のＳ６４で説明した輝度信号Ｙ２を有する色と決定する。 On the other hand, when it is determined in S60 that there is one color area of the synthesis area exceeding the threshold, the process proceeds to S63, and the color area determination means 22 determines that the color area of the synthesis area is a specific color area (color area 9). In the low saturation region).
Here, if it is determined in S63 that the color area of the combined area is the specific color area, the color of the combined image is determined as the color having the luminance signal Y2 described in S64 of FIG.

ここに、合成画像の色差信号Ｃｒ及び又はＣｂはゼロとしてもよいし、合成領域の画素の平均値としてもよい。
一方、Ｓ６３において、合成領域の当該色領域が特定色領域ではないと判定されれば、合成画像の色を、図８のＳ６５で説明した色差信号Ｃｉｒ、Ｃｉｂと決定する。
ここに、合成画像の輝度信号は、合成領域の画素の平均値としてもよいし、平均輝度より高く又は低くしてもよい。 Here, the color difference signals Cr and / or Cb of the composite image may be zero, or may be the average value of the pixels in the composite region.
On the other hand, if it is determined in S63 that the color area of the combined area is not the specific color area, the color of the combined image is determined as the color difference signals Cir and Cib described in S65 of FIG.
Here, the luminance signal of the synthesized image may be an average value of the pixels in the synthesized area, or may be higher or lower than the average luminance.

次に、Ｓ７０に進んだ後の処理について説明する。
Ｓ７０において、色領域決定手段２２は、閾値を超える合成領域の色領域が２つ以上か否かを判定する。
ここで、閾値を超える合成領域の色領域が２つ以上ではない（閾値を超える合成領域の色領域が存在しない）と判定されれば、合成画像の色はどのようであっても、合成領域から明瞭に識別されるため、Ｓ９０に進んで、合成画像色決定手段は、適宜に定めたデフォルト色を合成画像の色と決定する。 Next, the process after proceeding to S70 will be described.
In S <b> 70, the color area determination unit 22 determines whether there are two or more color areas in the synthesis area that exceed the threshold.
Here, if it is determined that there are not two or more color regions in the composite region that exceed the threshold (no color region in the composite region that exceeds the threshold exists), the composite region may be whatever the color of the composite image. Therefore, the process proceeds to S90, and the composite image color determination unit determines a default color determined as appropriate as the color of the composite image.

一方、閾値を超える合成領域の色領域が２つ以上であると判定されれば、Ｓ７３に進んで、色一致判定手段２３は、ヒストグラムの中から、閾値を超えず、且つ、最も度数の少ない色領域を選択する。図４（Ｂ）の例では、閾値を超えず最小度数の色領域は、色領域１又は色領域９である。そこで、この例では、色領域１及び色領域９を選択し、Ｓ７４に進む。   On the other hand, if it is determined that there are two or more color regions in the composite region that exceed the threshold, the process proceeds to S73, and the color match determination unit 23 does not exceed the threshold from the histogram and has the lowest frequency. Select a color area. In the example of FIG. 4B, the color area of the minimum frequency that does not exceed the threshold is the color area 1 or the color area 9. Therefore, in this example, the color area 1 and the color area 9 are selected, and the process proceeds to S74.

次に、Ｓ７４において、色一致判定手段２３は、選択した色領域は特定色領域か否かを判定する。
ここで、Ｓ７４において、選択した色領域が特定色領域（色領域９の低彩度領域）であると判定されたときは、Ｓ７５に進んで、合成画像の輝度信号を決定する。輝度信号は、図８のＳ６４で説明した輝度信号Ｙ２とする。また、合成画像の色差信号Ｃｒ、及び又はＣｂはゼロとしてもよいし、合成領域の画素の平均値としてもよい。 Next, in S74, the color matching determination unit 23 determines whether or not the selected color area is a specific color area.
Here, in S74, when it is determined that the selected color area is the specific color area (low saturation area of the color area 9), the process proceeds to S75, and the luminance signal of the composite image is determined. The luminance signal is the luminance signal Y2 described in S64 of FIG. Further, the color difference signals Cr and / or Cb of the composite image may be zero, or may be the average value of the pixels in the composite area.

一方、Ｓ７４において、選択した色領域が特定色領域（色領域９の低彩度領域）ではないと判定されたときは、Ｓ７６に進んで、図８のＳ７６におけると同様、色信号置換処理を行い、置換された色を合成画像の色と決定する。このとき、輝度信号は、合成領域の平均輝度と同じでもよいし、それより高くても低くてよい。
以上、合成画像の色をあらかじめ指定しない場合の、合成画像の色決定について説明した。 On the other hand, when it is determined in S74 that the selected color area is not the specific color area (the low saturation area of the color area 9), the process proceeds to S76, and the color signal replacement process is performed as in S76 of FIG. The replacement color is determined as the color of the composite image. At this time, the luminance signal may be the same as the average luminance of the synthesis area, or may be higher or lower.
In the above, the color determination of the composite image when the color of the composite image is not designated in advance has been described.

なお、図９のＳ６４及びＳ７５においては、輝度信号決定を行ったが、これに限らず、図９のＳ７６の色決定を行っても、合成画像を合成領域から明瞭に識別させるという目的を達成することができる。   In S64 and S75 in FIG. 9, the luminance signal is determined. However, the present invention is not limited to this, and even if the color determination in S76 in FIG. 9 is performed, the purpose of clearly identifying the composite image from the composite region is achieved. can do.

デジタル撮像機器に内蔵された画像合成装置のブロック図である。It is a block diagram of an image composition device built in digital imaging equipment. 画像合成装置中の合成画像（日付などの撮影情報）色決定・補正手段のブロック図である。It is a block diagram of a composite image (photographing information such as date) color determination / correction means in the image composition device. ２次元色座標上で定義された色領域の一例である。It is an example of the color area | region defined on the two-dimensional color coordinate. 元画像（撮像画像）中の合成領域の画素を色領域に振り分けたヒストグラムの例である。It is an example of the histogram which allocated the pixel of the synthetic | combination area | region in the original image (captured image) to the color area | region. 画像合成方法を説明するためのフローチャートである。It is a flowchart for demonstrating the image synthesis method. 合成画像領域の一例である。It is an example of a composite image area. 合成領域検出処理を説明するためのフローチャートである。It is a flow chart for explaining synthetic field detection processing. あらかじめ指定した合成画像の色を補正する処理を説明するためのフローチャートである。It is a flowchart for demonstrating the process which correct | amends the color of the synthesized image designated beforehand. あらかじめ色を指定しない場合の合成画像の色決定処理を説明するためのフローチャートである。It is a flowchart for demonstrating the color determination process of the synthesized image when not designating a color beforehand.

符号の説明Explanation of symbols

１ レンズ系
２ ＣＣＤ
３ Ａ／Ｄ
４ フレームメモリ
５ 画像処理手段
６ 圧縮処理手段
７ 記録手段
１０ 画像合成手段
１１ 合成画像生成手段
１２ 合成領域設定手段
１３ 合成領域検出手段
１４ 合成画像色決定・補正手段
１５ 画像合成手段
１６ 警告手段
２１ ヒストグラム作成手段
２２ 色領域決定手段
２３ 色一致判定手段
２４ 合成画像色補正手段
２５ 合成画像色決定手段
３０ 制御手段
３１ 切替手段 1 Lens system 2 CCD
3 A / D
4 Frame memory 5 Image processing means 6 Compression processing means 7 Recording means 10 Image synthesizing means 11 Synthetic image generating means 12 Synthetic area setting means 13 Synthetic area detecting means 14 Synthetic image color determining / correcting means 15 Image synthesizing means 16 Warning means 21 Histogram Creating means 22 color region determining means 23 color matching determining means 24 composite image color correcting means 25 composite image color determining means 30 control means 31 switching means

Claims (20)

合成画像を元画像の合成領域中に合成する際、あらかじめ設定した合成画像の色を補正してから前記合成領域中に合成する画像合成装置において、
２次元色座標を複数の色領域に分割し、前記合成領域の１以上の画素の色を前記色領域のいずれかに振り分けてヒストグラムを作成するヒストグラム作成手段と、
前記ヒストグラム作成手段の出力に接続され、前記ヒストグラムと所定閾値とに基づいて、前記合成領域の色領域を決定する色領域決定手段と、
前記色領域決定手段の出力に接続され、前記決定された色領域と前記合成画像の色領域との一致・不一致を判定する色一致判定手段と、
前記色一致判定手段の出力に接続され、前記色領域の一致が判定されたとき、前記ヒストグラムと前記所定閾値とに基づいて、前記合成画像の色を補正する色補正手段とを備えることを特徴とする画像合成装置。 When compositing a composite image in the composite region of the original image, an image composition device that corrects the color of the composite image set in advance and then composites the composite image in the composite region.
Histogram creation means for dividing a two-dimensional color coordinate into a plurality of color regions and assigning the color of one or more pixels in the composite region to any of the color regions;
A color region determination unit that is connected to an output of the histogram generation unit and determines a color region of the synthesis region based on the histogram and a predetermined threshold;
Connected to the output of the color area determination means, color match determination means for determining whether the determined color area matches the color area of the composite image; and
And a color correction unit that is connected to an output of the color match determination unit and corrects the color of the composite image based on the histogram and the predetermined threshold when the color region match is determined. An image composition device. 請求項１記載の画像合成装置において、
前記２次元色座標は、色差信号Ｃｒ及びＣｂによる直交座標であることを特徴とする画像合成装置。 The image synthesizing apparatus according to claim 1.
2. The image synthesizing apparatus according to claim 2, wherein the two-dimensional color coordinates are orthogonal coordinates based on color difference signals Cr and Cb. 請求項１記載の画像合成装置において、
前記色領域決定手段は、さらに、前記合成領域の１以上の画素の輝度信号Ｙに基づいて、前記合成領域の色領域を決定することを特徴とする画像合成装置。 The image synthesizing apparatus according to claim 1.
The image composition apparatus, wherein the color region determination means further determines a color region of the composite region based on a luminance signal Y of one or more pixels of the composite region. 請求項１記載の画像合成装置において、
前記色補正手段は、前記ヒストグラムと所定閾値とに基づいて、前記合成画像の色差信号Ｃｒ及びＣｂを補正することを特徴とする画像合成装置。 The image synthesizing apparatus according to claim 1.
The image correcting apparatus, wherein the color correcting unit corrects color difference signals Cr and Cb of the composite image based on the histogram and a predetermined threshold value. 請求項４記載の画像合成装置において、
前記色補正手段は、前記ヒストグラムと所定閾値とに基づき、且つ、前記合成画像の輝度信号Ｙａと前記合成領域の平均輝度信号Ｙｂの差分に基づき、前記合成画像の輝度信号Ｙａを補正することを特徴とする画像合成装置。 The image composition device according to claim 4, wherein
The color correction unit corrects the luminance signal Ya of the composite image based on the histogram and a predetermined threshold, and based on the difference between the luminance signal Ya of the composite image and the average luminance signal Yb of the composite region. A featured image composition device. 請求項１記載の画像合成装置を使用する画像合成方法において、
２次元色座標を複数の色領域に分割し、前記合成領域の１以上の画素の色を前記色領域のいずれかに振り分けたヒストグラムを作成するヒストグラム作成ステップと、
前記ヒストグラムと所定閾値とに基づいて、前記合成領域の色領域を決定する色領域決定ステップと、
前記決定された色領域と前記合成画像の色との色領域の一致・不一致を、前記ヒストグラムと前記所定閾値とに基づいて、判定する色領域一致判定ステップと、
前記色領域の一致が判定されたとき、前記ヒストグラムと前記所定閾値とに基づいて、前記合成画像の色を補正する色補正ステップとを備えることを特徴とする画像合成方法。 In the image composition method using the image composition device according to claim 1,
A histogram creating step of dividing a two-dimensional color coordinate into a plurality of color regions and creating a histogram in which colors of one or more pixels of the composite region are assigned to any of the color regions;
A color region determining step for determining a color region of the composite region based on the histogram and a predetermined threshold;
A color region match determination step for determining whether or not the color region matches or does not match between the determined color region and the color of the composite image based on the histogram and the predetermined threshold;
An image synthesizing method comprising: a color correction step of correcting a color of the synthesized image based on the histogram and the predetermined threshold when matching of the color areas is determined. 請求項６記載の画像合成方法において、
前記色領域決定ステップにおいて、
前記２次元色座標は、色差信号Ｃｒ及びＣｂを直交座標であることを特徴とする画像合成方法。 The image composition method according to claim 6.
In the color region determination step,
2. The image composition method according to claim 2, wherein the two-dimensional color coordinates are orthogonal coordinates of the color difference signals Cr and Cb. 請求項７記載の画像合成方法において、
前記色領域決定ステップにおいて、
さらに、前記合成領域の１以上の画素の輝度信号Ｙに基づいて、前記合成領域の色領域を決定することを特徴とする画像合成方法。 The image composition method according to claim 7.
In the color region determination step,
Furthermore, the color composition area of the composition area is determined based on the luminance signal Y of one or more pixels in the composition area. 請求項６記載の画像合成方法において、
前記色補正ステップにおいて、
前記ヒストグラムと所定閾値とに基づいて、前記合成画像の色差信号Ｃｒ及びＣｂを補正することを特徴とする画像合成方法。 The image composition method according to claim 6.
In the color correction step,
An image composition method comprising correcting the color difference signals Cr and Cb of the composite image based on the histogram and a predetermined threshold value. 請求項６記載の画像合成方法において、
前記色補正ステップにおいて、
前記ヒストグラムと所定閾値とに基き、且つ、前記合成画像の輝度信号Ｙａと前記合成領域の平均輝度信号Ｙｂの差分に基づき、前記合成画像の輝度信号Ｙａを補正することを特徴とする画像合成方法。 The image composition method according to claim 6.
In the color correction step,
An image composition method, comprising: correcting the brightness signal Ya of the composite image based on the histogram and a predetermined threshold and based on a difference between the brightness signal Ya of the composite image and the average brightness signal Yb of the composite area. . 合成画像を元画像の合成領域中に合成する際、あらかじめ合成画像の色を設定することなく、前記合成領域の色に基づいて前記合成画像の色を決定する画像合成装置において、
２次元色座標を複数の色領域に分割し、前記合成領域の１以上の画素の色を前記色領域のいずれかに振り分けてヒストグラムを作成するヒストグラム作成手段と、
前記ヒストグラム作成手段の出力に接続され、前記ヒストグラムと所定閾値とに基づいて、前記合成画像の色を決定する合成画像色決定手段とを備えることを特徴とする画像合成装置。 In the image composition device for determining the color of the composite image based on the color of the composite area without setting the color of the composite image in advance when compositing the composite image in the composite area of the original image,
Histogram creation means for dividing a two-dimensional color coordinate into a plurality of color regions and assigning the color of one or more pixels in the composite region to any of the color regions;
An image synthesizing apparatus, comprising: a synthesized image color determining unit that is connected to an output of the histogram creating unit and determines a color of the synthesized image based on the histogram and a predetermined threshold value. 請求項１１記載の画像合成装置において、
前記２次元座標は、色差信号Ｃｂ及びＣｒによる直交座標であることを特徴とする画像合成装置。 The image composition device according to claim 11.
2. The image synthesizing apparatus according to claim 2, wherein the two-dimensional coordinates are orthogonal coordinates based on color difference signals Cb and Cr. 請求項１１記載の画像合成装置において、
前記色領域決定手段は、さらに、前記合成領域の１以上の画素の輝度信号Ｙに基づいて、前記合成領域の色領域を決定することを特徴とする画像合成装置。 The image composition device according to claim 11.
The image composition apparatus, wherein the color region determination means further determines a color region of the composite region based on a luminance signal Y of one or more pixels of the composite region. 請求項１１記載の画像合成装置において、
前記合成画像色決定手段は、前記ヒストグラムと所定閾値とに基づいて、前記合成画像の色差信号Ｃｒ及びＣｂを決定することを特徴とする画像合成装置。 The image composition device according to claim 11.
The composite image color determining means determines the color difference signals Cr and Cb of the composite image based on the histogram and a predetermined threshold value. 請求項１１記載の画像合成装置において、
前記合成画像色決定手段は、前記ヒストグラムと所定閾値とに基づき、且つ、前記合成画像の輝度信号Ｙａと前記合成領域の平均輝度信号Ｙｂの差分に基づき、前記合成画像の輝度信号Ｙを補正することを特徴とする画像合成装置。 The image composition device according to claim 11.
The synthesized image color determining unit corrects the luminance signal Y of the synthesized image based on the histogram and a predetermined threshold, and based on a difference between the luminance signal Ya of the synthesized image and the average luminance signal Yb of the synthesized area. An image composition device characterized by the above. 請求項１１記載の画像合成装置を使用する画像合成方法において、
２次元色座標を複数の色領域に分割し、前記合成領域の１以上の画素の色を前記色領域のいずれかにに振り分けてヒストグラムを作成するヒストグラム作成ステップと、
前記ヒストグラムと所定閾値とに基づいて、前記合成領域の色領域を決定する色領域決定ステップと、
前記ヒストグラムと前記所定閾値とに基づいて、前記合成画像の色を決定する色決定ステップとを備えることを特徴とする画像合成方法。 In the image composition method using the image composition device according to claim 11,
A histogram generation step of dividing a two-dimensional color coordinate into a plurality of color areas, and distributing a color of one or more pixels of the composite area to any of the color areas;
A color region determining step for determining a color region of the composite region based on the histogram and a predetermined threshold;
A color determining step for determining a color of the composite image based on the histogram and the predetermined threshold value. 請求項１６記載の画像合成方法において、
前記色領域決定ステップにおいて、
前記２次元色座標は、色差信号Ｃｒ及びＣｂを直交座標とする２次元色座標であることを特徴とする画像合成方法。 The image composition method according to claim 16.
In the color region determination step,
2. The image composition method according to claim 2, wherein the two-dimensional color coordinates are two-dimensional color coordinates having color difference signals Cr and Cb as orthogonal coordinates. 請求項１７記載の画像合成方法において、
前記色領域決定ステップにおいて、
さらに、前記合成領域の１以上の画素の輝度信号Ｙに基づいて、前記合成領域の色領域を決定することを特徴とする画像合成方法。 The image composition method according to claim 17.
In the color region determination step,
Furthermore, the color composition area of the composition area is determined based on the luminance signal Y of one or more pixels in the composition area. 請求項１７記載の画像合成方法において、
前記色決定ステップにおいて、
前記ヒストグラムと所定閾値とに基づいて、前記合成画像の色差信号Ｃｒ及びＣｂを決定することを特徴とする画像合成方法。 The image composition method according to claim 17.
In the color determination step,
An image composition method, wherein color difference signals Cr and Cb of the composite image are determined based on the histogram and a predetermined threshold value. 請求項１９記載の画像合成方法において、
前記色決定正ステップにおいて、
前記ヒストグラムと所定閾値とに基づき、且つ、前記合成画像の輝度信号Ｙａと前記合成領域の平均輝度信号Ｙｂの差分に基づき、前記合成画像の輝度信号Ｙａを決定することを特徴とする画像合成方法。
The image composition method according to claim 19, wherein
In the color determination positive step,
An image composition method comprising: determining a brightness signal Ya of the composite image based on the histogram and a predetermined threshold, and based on a difference between the brightness signal Ya of the composite image and the average brightness signal Yb of the composite area. .
JP2004233682A 2004-08-10 2004-08-10 Image composing device and method Withdrawn JP2006053682A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004233682A JP2006053682A (en) 2004-08-10 2004-08-10 Image composing device and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004233682A JP2006053682A (en) 2004-08-10 2004-08-10 Image composing device and method

Publications (1)

Publication Number Publication Date
JP2006053682A true JP2006053682A (en) 2006-02-23

Family

ID=36031136

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004233682A Withdrawn JP2006053682A (en) 2004-08-10 2004-08-10 Image composing device and method

Country Status (1)

Country Link
JP (1) JP2006053682A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1976263A1 (en) 2007-03-26 2008-10-01 Murata Machinery, Ltd. Image processing apparatus and method for detcting a background color
JP2010206647A (en) * 2009-03-04 2010-09-16 Casio Computer Co Ltd Tape printer, method of producing composite label synthesizing image and document, and storage medium memorizing composite label producing program

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1976263A1 (en) 2007-03-26 2008-10-01 Murata Machinery, Ltd. Image processing apparatus and method for detcting a background color
US8009902B2 (en) 2007-03-26 2011-08-30 Murata Machinery, Ltd. Image processing apparatus and method for detecting a background color based on data chrominance distribution
JP2010206647A (en) * 2009-03-04 2010-09-16 Casio Computer Co Ltd Tape printer, method of producing composite label synthesizing image and document, and storage medium memorizing composite label producing program

Similar Documents

Publication Publication Date Title
KR100791375B1 (en) Apparatus and method for color correction
JP5761946B2 (en) Image processing apparatus, image processing method, and storage medium
JP5677113B2 (en) Image processing device
JP5665436B2 (en) Image processing apparatus, image processing method, and program
JP2006108873A (en) Dynamic image processor and method
US20070280529A1 (en) External-Appearance Inspection Apparatus
KR20060120643A (en) Image processing apparatus, image processing method, and image processing program
JPH07222016A (en) Method and system for correction of color shift
JP2008527852A (en) White balance correction of digital camera images
JP2004200902A (en) Image processor, electronic camera, and image processing program
CN107680142B (en) Method for improving out-of-gamut color overlay mapping
JP2013243639A (en) Image processing apparatus, image processing method, and program
JP2004032060A (en) Color picture signal processing method and color image output arrangement as well as photographing equipment
JP5950756B2 (en) Image processing apparatus and image processing method
JPH09200554A (en) Image processor
JP7207876B2 (en) Image processing device, image processing method, and program
JP2002109523A (en) Image pickup device, optical filter group, and image data converter
US6781715B1 (en) Image processing method and system
JP2006053682A (en) Image composing device and method
US8804025B2 (en) Signal processing device and imaging device
JP4784097B2 (en) Signal processing method, signal processing apparatus, and storage medium storing signal processing procedure
JP2005130281A (en) Image processing system, image processing method, and program
JP5818515B2 (en) Image processing apparatus, image processing method and program thereof
JP2756047B2 (en) Color image color adjustment method and apparatus, and image synthesis method
JP2017135600A (en) Image processing device and program

Legal Events

Date Code Title Description
A300 Withdrawal of application because of no request for examination

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20071106