JP3763880B2 - Color correction method - Google Patents

Color correction method Download PDF

Info

Publication number
JP3763880B2
JP3763880B2 JP09215696A JP9215696A JP3763880B2 JP 3763880 B2 JP3763880 B2 JP 3763880B2 JP 09215696 A JP09215696 A JP 09215696A JP 9215696 A JP9215696 A JP 9215696A JP 3763880 B2 JP3763880 B2 JP 3763880B2
Authority
JP
Japan
Prior art keywords
color
value
correction
values
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP09215696A
Other languages
Japanese (ja)
Other versions
JPH095164A (en
Inventor
清 松尾
正保 林
篤志 内田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dai Nippon Printing Co Ltd
Original Assignee
Dai Nippon Printing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dai Nippon Printing Co Ltd filed Critical Dai Nippon Printing Co Ltd
Priority to JP09215696A priority Critical patent/JP3763880B2/en
Publication of JPH095164A publication Critical patent/JPH095164A/en
Application granted granted Critical
Publication of JP3763880B2 publication Critical patent/JP3763880B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Spectrometry And Color Measurement (AREA)

Description

【0001】
【産業上の利用分野】
この発明は医療あるいは美容の分野において、人体の皮膚等のカラー画像を記録する場合における画像記録用カラーチャートを用いた色補正方法に関する。
【0002】
【従来の技術】
医療や美容の分野において、人の皮膚のカラー画像を写真やビデオに記録することが多い。
【0003】
例えば、皮膚科における皮膚病変、形整外科における痣の色、治療効果の判定、美容における化粧効果の判定のために、顔を写真あるいはビデオ撮影することが多い。
【0004】
【発明が解決しようとする課題】
ここで、写真やビデオの撮影は、同一の患者等については時間の経過に伴って複数回撮影することになるが、その撮影の都度、自然光の光量、自然光を含めた照明光源の種類、撮影するための部屋の色彩、フィルムメーカー、現像会社等が異なると、撮影された画像は同一人であっても異なる色になってしまうことがあるという問題点がある。
【0005】
又、他の臨床例との比較の場合は、当然患者等の皮膚の色が異なることが多いので、比較が更に困難となってしまう。
【0006】
更に、画像の大きさについても、撮影の都度、距離、倍率等を厳密に同一条件とすることが困難であるために、変化が避けられず、正確な比較、判定を困難とするという問題点があった。
【0007】
これに対して、得られた画像をコンピュータ処理してその色、大きさを補正することが考えられるが、基準が不明確であるために補正が恣意的に行われ易く、色の評価や相対的な比較に正確さを欠くという問題点がある。
【0008】
この発明は、上記従来の問題点に鑑みてなされたものであって、記録された画像を被写体に近い色に補正して、個別に撮影された複数の画像を同一条件で比較する際に、画像記録用カラーチャートを用いて、記録された画像の色を補正する方法を提供することを目的とする。
【0011】
【発明を解決するための手段】
の発明は、紙、樹脂フィルム等のシート状基材からなり、裏面側に被写体に貼着可能な粘着層を備えると共に、基材表面がマット状とされ、且つ、該基材表面に、少なくとも3色の色材が、異なる区画にマット状に塗布されてなる画像記録用カラーチャートを、前記粘着層により被写体に貼着して被写体と共に撮影する過程と、撮影した画像をデジタルデータとして記憶装置に取り込む過程と、前記記憶装置に取り込まれたデジタルデータを、ディスプレイ上に表示する過程と、前記3色のうち少なくとも2色の、ディスプレイ上における前記画像記録用カラーチャートの色値を読み取る過程と、読み取ったカラーチャートの色値のデジタルデータと前記画像記録用カラーチャートにおける対応する区画での目標値とにより各色毎の補正値を算出する過程と、該算出した補正値により前記記憶装置に取り込まれたデジタルデータを補正して、再度記憶装置に取り込む過程と、を有してなり、前記3色の色値の目標値を予め設定しておき、前記ディスプレイ上の画像における各区画の色値を読み取り、読み取った色値のデジタルデータと前記目標値とから補正値を算出する色補正方法であって、前記色材を白、黒、グレーとし、且つ、白及び黒の色値の目標値OH 、OL を予め設定しておき、前記ディスプレイ上に表示された画像の白区画のRGB値IH (R)、IH (G)、IH (B)を読み取り、この読み取り値と対応する前記目標値とを座標軸とする2次元グラフにおける(0,0)−(IH ,OH )−(255,255)の各点を通る補正カーブに基づき、前記取り込まれているRGB値I H (R) 、I H (G) 、I H (B)を変換し、次に黒区画のRGB値IL (R)、IL (G)、IL (B)を読み取り、この読み取り値と対応する前記目標値とを座標軸とする2次元グラフにおける(0,0)−(IL ,OL )−(255,255)の各点を通る補正カーブに基づき、前記取り込まれているRGB値I L (R) 、I L (G) 、I L (B)を変換し、次にグレー区画のRGB値IM (R) 、IM(G) 、IM (B) を読み取り、この読み取り値であるI M (R) 、I M (G) 、I M (B)の平均値Ave(IM )を計算し、前記読み取り値と対応する前記目標値とを座標軸とする2次元グラフにおける(0,0)−(IM ,Ave(IM ))−(255,255)の各点を通る補正カーブに基づき、前記取り込まれているRGB値I M (R) 、I M (G) 、I M (B)を変換するするようにして、上記目的を達成するものである。
【0012】
請求項の発明は、紙、樹脂フィルム等のシート状基材からなり、裏面側に被写体に貼着可能な粘着層を備えると共に、基材表面がマット状とされ、且つ、該基材表面に、少なくとも3色の色材が、異なる区画にマット状に塗布されてなる画像記録用カラーチャートを、前記粘着層により被写体に貼着して被写体と共に撮影する過程と、撮影した画像をデジタルデータとして記憶装置に取り込む過程と、前記記憶装置に取り込まれたデジタルデータを、ディスプレイ上に表示する過程と、前記3色のうち少なくとも2色の、ディスプレイ上における前記画像記録用カラーチャートの色値を読み取る過程と、読み取ったカラーチャートの色値のデジタルデータと前記画像記録用カラーチャートにおける対応する区画での目標値とにより各色毎の補正値を算出する過程と、該算出した補正値により前記記憶装置に取り込まれたデジタルデータを補正して、再度記憶装置に取り込む過程と、を有してなり、前記3色の色値の目標値を予め設定しておき、前記ディスプレイ上の画像における各区画の色値を読み取り、読み取った色値のデジタルデータと前記目標値とから補正値を算出する色補正方法であって、前記色材を白、黒、グレーとし、且つ、これらの色値の目標値OH 、OL 、OM を予め設定しておき、前記ディスプレイ上に表示された画像の白区画のRGB値IH (R)、IH (G)、IH (B)を読み取り、この読み取り値と対応する前記目標値とを座標軸とする2次元グラフにおける(0,0)−(IH ,OH )−(255,255)の各点を通る補正カーブに基づき、前記取り込まれているRGB値I H (R) 、I H (G) 、I H (B)を変換し、次に黒区画のRGB値IL (R)、IL (G)、IL (B)を読み取り、この読み取り値と対応する前記目標値とを座標軸とする2次元グラフにおける(0,0)−(IL ,OL )−(255,255)の各点を通る補正カーブに基づき、前記取り込まれたRGB値I L (R) 、I L (G) 、I L (B)を変換し、次にグレー区画のRGB値IM (R)、IM(G)、IM (B)を読み取り、グレーの、目標とするRGB値をO M (R) 、O M (G) 、O M (B) として、次式によって、O′M を算出し、
O′M (R) =ΣIM +(OM (R) /ΣOM
O′M (G) =ΣIM +(OM (G) /ΣOM
O′M (B) =ΣIM +(OM (B) /ΣOM
(但し、ΣIM =IM (R) +IM (G) +IM (B) ,ΣOM =OM (R) +OM (G) +OM (B) )
この読み取り値と対応する前記目標値とを座標軸とする2次元グラフにおける(0,0)−(IM ,O′M )−(255,255)の各点を通る補正カーブに基づき、前記取り込まれているRGB値I M (R) 、I M (G) 、I M (B)を変換するようにして、上記目的を達成するものである。
請求項の発明は、紙、樹脂フィルム等のシート状基材からなり、裏面側に被写体に貼着可能な粘着層を備えると共に、基材表面がマット状とされ、且つ、該基材表面に、少なくとも3色の色材が、異なる区画にマット状に塗布されてなる画像記録用カラーチャートを、前記粘着層により被写体に貼着して被写体と共に撮影する過程と、撮影した画像をデジタルデータとして記憶装置に取り込む過程と、前記記憶装置に取り込まれたデジタルデータを、ディスプレイ上に表示する過程と、前記3色のうち少なくとも2色の、ディスプレイ上における前記画像記録用カラーチャートの色値を読み取る過程と、読み取ったカラーチャートの色値のデジタルデータと前記画像記録用カラーチャートにおける対応する区画での目標値とにより各色毎の補正値を算出する過程と、該算出した補正値により前記記憶装置に取り込まれたデジタルデータを補正して、再度記憶装置に取り込む過程と、を有してなり、前記3色の色値の目標値を予め設定しておき、前記ディスプレイ上の画像における各区画の色値を読み取り、読み取った色値のデジタルデータと前記目標値とから補正値を算出する色補正方法であって、前記色材を白、黒、グレーとし、且つ、これらの色値の目標値OH 、OL 、OM を予め設定しておき、前記ディスプレイ上に開かれた画像の白区画及び黒区画のL* 値IH (L) 、IL (L) 及びグレー区画のL* * * 値IM (L) 、IM (a)、IM (b) をそれぞれ読み取り、この読み取り値と対応する前記目標値とを座標軸とする2次元グラフにおける(0,0)−(IL (L),OL (L) )−(IM (L) ,OM (L) )−(IH (L) ,OH (L) )−(100,100)の各点を通る補正カーブに基づき、前記取り込まれているL* データを変換し(但し、白、黒、グレーの目標とするL * 値をO H (L) 、O L (L) 、O M (L) とし目標とするa * 値、b * 値をO M (a) 、O M (b) とする)、次に補正値ΔM(a) 、ΔM(b) を次式によって算出し、
ΔM(a) =OM (a) −IM (a)
ΔM(b) =OM (b) −IM (b)
前記補正値ΔM(a) 、ΔM(b) を既に取り込まれているa*及びb* データにそれぞれ加算し、前記変換された * データを保存することを特徴とする色補正方法により上記目的を達成するものである。
請求項の発明は、請求項1乃至のいずれかにおいて、前記補正値を記憶する過程と、次回以後に取り込んだ画像のデジタルデータを、前記記憶されている補正値により補正する過程と、この補正されたデジタルデータを記憶する過程と、を有してなるようにしたものである。
【0013】
請求項の発明は、請求項1乃至のいずれかの発明において、前記色材が塗布された区画を、色材の種類の数と同数のマス目状とし、前記基材表面には、該マス目状の区画を囲んで同一寸法の正方形を列状に配置してなるスケールを設けたものである。
【0014】
請求項の発明は、請求項1乃至のいずれかの発明において、前記基材表面を正方形とし、該基材表面に、前記正方形に略内接する円を形成し、且つ、該円を中心角90°に4等分し、この4等分円、及び前記円の外側で前記正方形の4隅の区画の一方にRGB表色系の3原色、CMY表色系の3原色、Lab表色系の基本色のいずれかの色材を、他方に白色、灰色、黒色の色材の少なくとも1つを、それぞれ塗布したものである。
【0015】
請求項の発明は、請求項の発明において、前記基材表面の正方形の全域を、前記円の4等分線に重畳してマス目状に区画したものである。
【0016】
請求項の発明は、請求項の発明において、前記基材表面における前記円内の少なくとも1つの4等分円を、該円の4等分線に重畳して、マス目状に区画したものである。
【0017】
請求項の発明は、請求項乃至のいずれかの発明において、前記マス目状の各区画の一辺の長さを同一寸法としたものである。
【0018】
請求項1の発明は、請求項乃至のいずれかの発明において、前記基材表面を、前記被写体の表面と略等しい凹凸、色の材料から構成したものである。
【0019】
請求項1の発明は、請求項乃至のいずれかの発明において、前記基材表面を、人の皮膚と略等しい凹凸、色の材料から構成したものである。
【0030】
この発明においては、画像記録用カラーチャートが被写体、例えば人体の皮膚に貼着可能なシート状基材から構成され、更に基材の表面が光の反射を抑制するマット状で、このマット状の表面に少なくとも3色の色材が異なる区画にマット状に塗布され、これにより、被写体を撮影した後に前記3色を基準として色の補正を正確に行い、異なる被写体のカラー画像記録、同一被写体の異なる条件でのカラー画像記録を正確に比較することができる。
【0032】
更に、マス目状の区画に色材を塗布すると共に、その周囲に同一寸法の正方形を列状に配置してスケールを構成することにより、色のみならず、被写体のサイズ、傾斜、歪みを正確に知って、調整を容易とすることができる。
【0033】
又、基材表面を正方形にして、その内接円を中心角90°に4等分し、その4等分円と外側の正方形の4隅に適宜色材を塗布することによって、被写体の種類等の条件、画像出力の態様等に応じて最適に配色し、補正、比較を容易とすることができる。
【0034】
更に、前記円の4等分線に重畳して基材表面の全域をマス目状に区画することによって、寸法や歪みをより正確に表現し、補正を容易とする。
【0035】
更に又、前記マス目状の各区画の一辺の長さを同一寸法にすることによって、一目で被写体の大きさを理解させることができる。
【0036】
又、前記基材の表面を被写体、例えば人間の皮膚と略等しい凹凸、色の材料から構成することによって、被写体表面における光の反射、色調の条件を正確に反映させて後の画像処理をより正確に行うことができる。
【0037】
本方法発明によれば、画像として取り込まれた画像表示用カラーチャートにおける基本の3色のうちの少なくとも2色(RGB、CMYの場合は3色)の、ディスプレイ上の色値とカラーチャートにおける対応する区画での色材の色値を比較して各色毎の補正値を算出することによって、画像中の各色の区画における値が画像全体で最適となるように容易に補正することができる。
【0038】
又、読み取るべき画像の区画の色を白、黒及びグレーとし、これらの色値を同時に補正するようにしているので、先の補正の結果が後の補正によって影響を受けることがなく、色値の補正を最適にすることができる。又、被写体の撮影時の露光の過不足や色かぶりによって生じた色調不良を簡単に補正することができる。
【0039】
又、読み取るべき区画の色を白、黒、グレーとして、且つ、これらの順で読み取り、読み取りの都度順次色値を補正することにより、被写体の撮影時の露光の過不足や色かぶりによって生じた色調不良を簡単に補正することができる。白、黒、グレーの順で読み取り、且つ補正した場合は、最も良好な補正結果が得られた。
【0040】
【発明の実施の形態】
以下本発明の実施の形態の例を図面を参照して説明する。
【0041】
図1に示されるように、この発明に係る画像記録用カラーチャート10は、紙、樹脂フィルム等のシート状基材12からなり、表面形状は正方形であって、中央が9個の正方形のマス目状にされた色区画14と、その周囲に前記色区画14よりも小さな同一寸法の正方形を列状に配置してなるスケール16が設けられている。
【0042】
前記9個の色区画14は、図1において左上から右下に向かって、光の3原色であるR、G、B、と、黒色、灰色、白色、更には色材の3原色であるY、M、Cの各色材によって塗り分けられている。
【0043】
前記シート状基材12の表面は、マット状(つや消し)で、且つ塗布(印刷)される色材の仕上りがマット状とされて、反射光が散乱されるようになっている。
【0044】
又、シート状基材12の裏面側は、図2に拡大して示されるように、例えば人の皮膚等の被写体に貼着可能な粘着層18とされ、例えば剥離紙からなる台紙19に貼着されていて、該台紙19から剥がして使用できるようにされている。
【0045】
前記画像記録用カラーチャート10は、例えば図3に示されるように患者20の顔面に粘着層18により貼着して、これを貼り付けた状態で写真撮影、あるいはビデオ撮影を行う。
【0046】
フィルムあるいは磁気記録装置等に記録(撮影)された画像の色は、当然照明光、フィルム、カメラ、等の条件によって異なるが、記録された画像内には前記画像記録用カラーチャート10の色が取り込まれているので、この色区画14の各色を元の色に戻すように、画像処理装置(コンピュータ)によって補正すれば、患者20の皮膚の色は正確に補正されることになる。
【0047】
更に色区画14に、光の3原色RGB、色材の3原色CMY、カラーバランス調整用の白色、灰色及び黒色が塗布されているので、カラー画像の出力形態に応じて正確に補正することができる。
【0048】
又、記録されたカラー画像には、スケール16も取り込まれているので、複数の異なる条件で記録したカラー画像の大きさを該スケール16に基づいて等しく調整することができる。又、色区画14及びスケール16は共に正方形のマス目状であるので、被写体の傾斜、歪み状態を正確に知ることができる。
【0049】
画像処理のためのデジタル信号を得る具体的手順は、次のようにする。
【0050】
まずスチールカメラで撮影した場合は、そのフィルム又は印画紙の像をカラースキャナで分解してデジタルデータに変換する。デジタルカメラで撮影した場合は、その信号をそのまま画像処理する。更には、ビデオカメラで撮影した場合は、その静止画像をA/D変換してデジタル信号とし、これを画像処理装置によって処理して補正を行う(詳細は後述)。
【0051】
なお、前記画像記録用カラーチャート10は、例えば全体の一辺の長さを5cm、2cm、1cm、5mm等の複数種類用意し、これを被写体の大きさに応じて使用するものとする。例えば図3のように患者の顔面を撮影する場合は、一辺が1cm又は2cmの正方形の画像記録用カラーチャート10を用いる。
【0052】
この場合、得られるカラー画像の全面積に対して画像記録用カラーチャート10の面積が過大にならず、且つ画像処理の際に十分な色情報を得られるように過小とならない範囲、例えばカラー画像の1/50〜1/100の面積となるように選択する。
【0053】
なお、一辺が5mmの画像記録用カラーチャートは、スケール16のマス目がカラー画像内で潰れてしまうので、例えば図4に示されるように、色区画14のマス目と同一となるようにする。
【0054】
上記図1の例は、シート状基材12の表面をマス目状に区画して色区画14とし、その外側にスケール16を形成したものであるが、本発明はこれに限定されるものでなく、シート状基材の表面に少なくとも3色の色材が異なる区画に塗布されるものであればよく、又、色材もRGB系、CMY系に限定されず、Lab表色系の基本色(以下RGB系及びCMY系の3原色も含めて基本色という)でもよく、従って以下のような各種の実施の形態でもよい。
【0055】
図5に示される本発明の実施の形態の第2例に係る画像記録用カラーチャート22は、その表面が正方形形状であり、該正方形の内接円24とその外側の、前記正方形の4隅に、RGB系、CMY系又はLab系の3又は4基本色を表示する色区画26を設けると共に、前記内接円24の内側を中心角90°に4等分し、その4等分線24Aに重ねて正方形のマス目28を形成し、4等分円25の対向する2つを黒色としたものである。
【0056】
色区画26にRGB系の3基本色を塗布した場合、残りの一隅には灰色とするとよい。又、前記黒色とされた一対の4等分円25におけるマス目28の線は色抜きとされている。
【0057】
なお前記内接円24内の4等分円は、図6の第3実施例の画像記録用カラーチャート30のように、黒色に塗布しないものとしてもよい。
【0058】
更に、図7は本発明の実施の形態の第4例に係る画像記録用カラーチャートを示す。
【0059】
この画像記録用カラーチャート32は正方形の表面の全域をマス目34により区画すると共に、該正方形に内接する内接円36を形成し、更に該内接円36を前記マス目34と重畳する4等分線36Aにより4等分し、4等分円37にRGB表色系、CMY表色系及びLab表色系のうちいずれかの表色系の3基本色に1色を加えた色材を塗布し、内接円36と前記正方形との間の4隅部分には白色、灰色、及び黒色を適宜配色したものである。
【0060】
図8に示される本発明の第5実施例の画像記録用カラーチャート40は、前記図6に示される実施例における4等分円25の1つ25Aに画像処理装置により色補正する際に、特に重要な色の色材を塗布したものである。この場合、図8(A)に示されるように、4等分円25内のマス目を除去してもよく、又図8(B)に示されるように、4等分円25にマス目28を設けてもよい。
【0061】
図9は、本発明の形態の第6例に係る画像記録用カラーチャート42を示す。
【0062】
この画像記録用カラーチャート42は、1と同様のスケール16における、図9において、右側縦方向の列を、上端から1マスおきの、塗りつぶされない白抜きマス目44A〜44Eと、各白抜きマス目44A〜44Eの間の、カラーチャート管理情報の1つであるバージョンナンバーに応じて塗りつぶされ又は塗りつぶされない情報表示マス目46A〜46Dとから構成されている。
【0063】
又、スケール16における、図9において、下側横方向の列は、右端から1つおきの、塗りつぶさることがない白抜きマス目45A〜45Eと、これら白抜きマス目45A〜45Eの間の、カラーチャート管理情報の1つであるロットナンバーに対応して塗りつぶされ又は塗りつぶされない情報表示マス目47A〜47Dとから構成とされている。
【0064】
前記スケール16の、図9において上側横方向列の中央の2つのマス目は、各々半分が塗りつぶされて、上向き矢印状の貼付方向指示マーク48が構成されている。
【0065】
前記情報表示マス目46A〜46D、47A〜47Dは、二進法によってバージョンナンバー及びロットナンバーを表示するようにされている。
【0066】
例えば、図9に示されるように、縦方向列での上から1番目の情報表示マス目46Aのみが塗りつぶされているときはバージョンNo.1、図10のように1番目と2番目の情報表示マス目46A、46Bが塗りつぶされているときはバージョンNo.3、図11のように、第1、第3及び第4の情報表示マス目46A、46C、46Dが塗りつぶされているときはバージョンNo.13をそれぞれ表示するようにされている。
【0067】
又、下側横方向列では、例えば、図9のように、第1の情報表示マス目47Aのみが塗りつぶされているときは、ロットNo.1を示し、図10のように第2の情報表示マス目47Bのみが塗りつぶされているときはロットNo.2を表示し、更に、図11のように第1、第2及び第3の情報表示マス目47A、47B、47Cがそれぞれ塗りつぶされているときはロットNo.7を表示するようにされている。
【0068】
前記画像記録用カラーチャート42における色区画14の各色の色値は、バージョンナンバー及びロットナンバー毎に、予め測定され、コンピュータのメモリーあるいは紙に、テーブルとして記録されていて、バージョンナンバー及びロットナンバーを読み取り、あるいは指定することにより、色値を設定及び/又は表示できるようになっている。又、ロットナンバーに対する各色値を記載した表(テーブル)を予め用意しておき、マニュアルでテーブルの色値を、コンピュータに入力するするようにしてもよい。
【0069】
なお、上記実施例は紙、樹脂フィルム等のシート状基材の表面をマット状とし、且つここに3基本色等の色材をマット状に塗布したものであるが、これはストロボ等の照明光による反射が色がとぶ等の不明瞭な画像の発生を防止するためのものであり、理想的には、被写体の表面の凹凸、色彩と一致する性状の表面とするのがよい。
【0070】
従って、例えば人の皮膚に、本発明に係る画像記録用カラーチャートを貼り付けて用いる場合は、該画像記録用カラーチャートの基材表面は人の皮膚の凹凸及び色と略一致した性状とするのがよい。
【0071】
人の皮膚の凹凸は、例えば乳幼児、子供、成人、老人、男性、女性、油性肌、乾性肌等に応じて適宜選択する。更に色は、白色人種、黄色人種、黒色人種又はこれらの混血人種等に応じて配色するものとする。
【0072】
次に、上記のような画像記録用カラーチャートを用いて実際に画像の色を補正する方法の例について説明する。
【0073】
この方法は、図12に示されるように、上記のような画像記録用カラーチャートを、前記粘着層18により被写体である患者20に貼着して、該患者20と共に撮影する過程と、撮影した画像をデジタルデータとして図13に示されるコンピュータ50の記憶装置51に取り込む過程と、前記記憶装置51に取り込まれたデジタルデータをディスプレイ52上に表示する過程と、前記3色のうち少なくとも2色の、前記ディスプレイ52上のカラーチャートの色値を例えばポインティングデバイス54で指示してチャート値読み取り部55に取り込む過程と、前記読み取ったカラーチャートの色値のデジタルデータと前記画像記録用カラーチャートにおける対応する区画での(予め設定されている)目標値又は設定値とを比較することにより各色毎の補正値を、例えば補正カーブ作成部56において算出する過程と、該算出した補正値により、前記記憶装置51に取り込まれたデジタルデータを、例えば画像データ変換部58により補正して、再度記憶装置51に取り込む過程とにより、カラーチャートを用いた画像の色補正方法を構成したものである。符号60は画像補正部全体、62は目標値設定部をそれぞれ示す。目標値又は設定値は、図9〜図11に示される画像記録用カラーチャートにおけると同様のバージョンナンバー、ロットナンバーを読み取り、又は入力することにより、予め入力されているテーブルに基づき目標値設定部62において自動的に設定するようにしておく。なお、前述のように表に示された目標値をマニュアルで目標値設定部62に入力して、設定するようにしてもよい。
【0074】
具体的には、図12に示されるように、ステップ101で被写体である患者20に画像記録用カラーチャートを貼り、ステップ102において被写体をカラーチャートと共に撮影し、ステップ103において撮影した画像をデジタル化して記憶し、ステップ104において記憶した画像をディスプレイ52上に表示し、ステップ105においてスキャナ54により、該ディスプレイ52上のカラーチャート画像における白、黒及びグレーの各区画の色値を読み取る。
【0075】
次に、この読み取ったデジタルデータと、前記画像記録用カラーチャートにおける白、黒、グレーの予め設定されている目標値のデジタルデータとにより、補正カーブ作成部56において、図14に示されるように、補正値を縦軸、読み取り値を横軸とする2次元のグラフにおける補正カーブを形成し(ステップ106参照)、この補正カーブに基づいて前記取り込まれたデジタルデータを補正し(ステップ107参照)、ステップ108において補正されたデジタルデータを保存する。
【0076】
更に詳細には、図13に示されるように、目標値設定部62により補正カーブ作成部56に予め白、黒、グレーの目標値O、OL 、OM を設定しておき、ディスプレイ52上に画像を開いた後、その画像中の白、黒及びグレー区画のRGB値IH (R) 、IH (G) 、IH (B) 、IL (R) 、IL (G) 、IL (B) 、IM (R) 、IM (G) 、IM (B) をそれぞれ読み取り、前記2次元グラフの点(0,0)−(IL ,OL )−(IM ,OM )−(IH ,OH )−(255,255)を通る補正曲線を形成し、この補正曲線に基づいて、既に取り込まれているRGB各デジタルデータを変換し、このデジタルデータを記憶装置51に保存する。
【0077】
例えば、画像記録用カラーチャートのRGB値(入力値)が、
白:IH (R) =208 ,IH (G) =188 ,IH (B) =217
黒:IH (R) = 29 ,IH (G) = 16 ,IH (B) = 19
グレー:IH (R) =126 ,IH (G) = 90 ,IH (B) =138
目標とするRGB値(目標値)が、
白:OH (R) =OH (G) =OH (B) =228
黒:OL (R) =OL (G) =OL (B) = 35
グレー:OM (R) =OM (G) =OM (B) =114
の場合、
補正カーブは、
Rデータ:(0,0) −(29,35) −(126,114) −(208,228) −(255,255)
Gデータ:(0,0) −(16,35) −( 90,114)−(188,228) −(255,255)
Bデータ:(0,0) −(19,35) −(138,114) −(217,228) −(255,255)
となる(図14参照)。
【0078】
前記図12に示されるフローチャート1の補正方法の例を補正アルゴリズム1とすると、この補正アルゴリズム1では、白、黒及びグーの各色区画の読取りデジタルデータを同時に補正変換しているので、白、黒、グレー毎に順次補正した場合のように、先に行った補正の結果が、後に行補正によって影響を受けるという欠点がないので理想的である。
【0079】
但し、コンピュータの構成あるいはソフトウェアの仕様等によって、アルゴリズム1の補正方法をとることが困難な場合、次の補正アルゴリズム2〜4のような補正方法をとってもよい。
【0080】
これらアルゴリズム2、3及び4は、図15に示されるフローチャートの手順で取込まれたデジタルデータを補正するものである。
【0081】
まず、補正アルゴリズム2を図15を参照して説明する。
【0082】
予め、白、黒、グレーの目標値OH 、OL 、OM を設定しておき、ステップ201で画像を表示し、ステップ2で画像中の白区画のRGB値IH (R) 、IH (G) 、IH (B) を読取り、ステップ203で補正アルゴリズム(0,0)−(IH ,OH )−(255,255)を通るハイライト補正カーブを作成し(図16参照)、次にこのハイライト補正カーブにより、ステップ204においてハイライト補正をするようにRGB各データを変換し、次にステップ205において画像中の黒区画のRGB値IL (R) 、IL (G) 、IL (B) を読取り、ステップ206において(0,0)−(IL ,OL )−(255,255)を通るシャドウ補正カーブを作成し、ステップ207においてシャドウ補正するようにRGB各データを変換する。
【0083】
次に画像中のグレー区画のRGB値IM (R) 、IM (G) 、IM (B) を読取り、ステップ209において(0,0)−(IM ,OM )−(255,255)を通るグレー補正カーブを作成しこれに基づき、グレー補正するようにRGB各データを変換して、ステップ211で画像(デジタルデータ)を保存する。
【0084】
例えば、チャートのRGB値(入力値)が、
白:IH (R) =208 ,IH (G) =188 ,IH (B) =217
黒:IH (R) = 29 ,IH (G) = 16 ,IH (B) = 19
グレー:IH (R) =126 ,IH (G) = 90 ,IH (B) =138
目標とするRGB値(目標値)が、
白:OH (R) =OH (G) =OH (B) =228
黒:OL (R) =OL (G) =OL (B) = 35
グレー:OM (R) =OM (G) =OM (B) =114
の場合、
ハイライト補正カーブは、
Rデータ:(0,0) −(208,228) −(255,255)
Gデータ:(0,0) −(188,228) −(255,255)
Bデータ:(0,0) −(217,228) −(255,255)
シャドウ補正カーブは、
Rデータ:(0,0) −(29,35) −(255,255)
Gデータ:(0,0) −(16,35) −(255,255)
Bデータ:(0,0) −(19,35) −(255,255)
グレー補正カーブは、
Rデータ:(0,0) −(126,114) −(255,255)
Gデータ:(0,0) −( 90,114)−(255,255)
Bデータ:(0,0) −(138,114) −(255,255)
となる(図16〜18参照)。
【0085】
補正アルゴリズム3は、前記ステップ209及び210において補正アルゴリズム2と異なる。補正アルゴリズム3におけるステップ209は、読取ったグレー区画のRGB値IM (R) 、IM (G) 、IM (B) の平均値Ave (IM )を計算して、(0,0)−IM 、Ave (IM )−(255,255)を通るグレー補正カーブを作成し、ステップ210でこの補正カーブに基づいてRGB各デジタルデータを変換し、ステップ211で変換された画像のデジタルデータを保存するものである。
【0086】
チャートのRGB値(入力値)が、
白:IH (R) =208 ,IH (G) =188 ,IH (B) =217
黒:IH (R) = 29 ,IH (G) = 16 ,IH (B) = 19
グレー:IH (R) =126 ,IH (G) = 90 ,IH (B) =138
目標とするRGB値(目標値)が、
白:OH (R) =OH (G) =OH (B) =228
黒:OL (R) =OL (G) =OL (B) = 35
の場合、
ハイライト補正カーブは、
Rデータ:(0,0) −(208,228) −(255,255)
Gデータ:(0,0) −(188,228) −(255,255)
Bデータ:(0,0) −(217,228) −(255,255)
シャドウ補正カーブは、
Rデータ:(0,0) −(29,35) −(255,255)
Gデータ:(0,0) −(16,35) −(255,255)
Bデータ:(0,0) −(19,35) −(255,255)
グレー補正カーブは、
Rデータ:(0,0) −(126,118) −(255,255)
Gデータ:(0,0) −( 90,118)−(255,255)
Bデータ:(0,0) −(138,118) −(255,255)
となる(図16〜18参照)。
【0087】
次に、補正アルゴリズム4について説明する。
【0088】
この補正アルゴリズムは、前記補正アルゴリズム2と、ステップ201〜208が同一であり、ステップ209では、次式によってO′M を算出する。
【0089】
O′M (R) =ΣIM *(OM (R) /ΣOM
O′M (G) =ΣIM *(OM (G) /ΣOM
O′M (B) =ΣIM *(OM (B) /ΣOM
【0090】
更に算出したO′M に基づいて、(0,0)−(IM ,O′M )−(255,255)を通るグレー補正カーブを作成し、ステップ210において、前記グレー補正カーブに基づいてRGB各デジタルデータを変換して、ステップ211において変換された画像のデジタルデータを保存するものである。
【0091】
更に同様に、チャートのRGB値(入力値)が、
白:IH (R) =208 ,IH (G) =188 ,IH (B) =217
黒:IH (R) = 29 ,IH (G) = 16 ,IH (B) = 19
グレー:IH (R) =126 ,IH (G) = 90 ,IH (B) =138
目標とするRGB値(目標値)が、
白:OH (R) =OH (G) =OH (B) =228
黒:OL (R) =OL (G) =OL (B) = 35
グレー:OH (R) =OH (G) =OH (B) =114
の場合、
ハイライト補正カーブは、
Rデータ:(0,0) −(208,228) −(255,255)
Gデータ:(0,0) −(188,228) −(255,255)
Bデータ:(0,0) −(217,228) −(255,255)
シャドウ補正カーブは、
Rデータ:(0,0) −(29,35) −(255,255)
Gデータ:(0,0) −(16,35) −(255,255)
Bデータ:(0,0) −(19,35) −(255,255)
グレー補正カーブは、
Rデータ:(0,0) −(126,118) −(255,255)
Gデータ:(0,0) −( 90,118)−(255,255)
Bデータ:(0,0) −(138,118) −(255,255)
と同じ結果となる(図16〜18参照)。
【0092】
前記補正アルゴリズム2、3及び4は、白、黒、グレーの順で、即ちハイライト補正、シャドウ補正、グレー補正を独立で行うために、先の補正の結果が後の補正によって影響を受ける場合があるが、実際上大きな不都合はない。
【0093】
又、上記の如く、補正アルゴリズム2、3、4において、補正をハイライト(白)、シャドウ(黒)、グレーの順にすると、白は後の黒、グレーの補正によって変化する可能性があるが、見た目の変化が少ないので、最も良好な補正結果が得られた。
【0094】
上記補正アルゴリズム1〜4では、画像データとしてRGBデータを例としてあげているが、これはCMYデータでもよい。
【0095】
次に、L* * * やL* * * 、YIQ等、明度(輝度)と色差が分離した表色系の画像データに対する補正アルゴリズム5を、L* * * データを例に、図19のフローチャートを参照して説明する。
【0096】
予め、白、黒、グレーの目標OH 、OL 、OM を設定しておき、ステップ301で画像を表示し、ステップ302で画像中の白、黒区画のL* 値IH (L) 、IL (L) 及びグレー区画のL* * * 値IM (L) 、IM (a) 、IM (b) をそれぞれ読み取り、ステップ303で(0,0)−(IL (L) ,OL (L) )−(IM (L) ,OM (L) )−(IH (L) ,OH (L) )−(100,100)を通るL* 補正カーブを作成し、ステップ304でこの補正カーブに基づいて、既に取り込まれているL* データを変換し、ステップ305で補正値ΔM(a) 、ΔM(b) を次式によって算出する。
【0097】
ΔM(a) =OM (a)−IM (a)
ΔM(b) =OM (b)−IM (b)
【0098】
そして、ステップ306で既に取り込まれているa* 及びb* データに前記補正値ΔM(a) 、ΔM(B) をそれぞれ加算し、ステップ307で変換された画像のデジタルデータを保存するものである。
【0099】
例えば、チャートのL* * * 値(入力値)が、
白:IH (L) =84
黒:IL (L) =12
グレー:IM (L) =55,IM (a) =24,IM (b) =−19
目標とするL* * * 値(目標値)が、
白:OH (L) =93
黒:OL (L) =22
グレー:OM (L) =58,OM (a) =0,OM (b) =0
の場合、L* 補正カーブは、
(0,0)−(12,22)−(55,58)−(84,93)
−(100,100)
となり(図20参照)、補正値ΔM(a) 、ΔM(b) は、
ΔM(a) =0−24=−24
ΔM(b) =0−(−19)=19
となる。
【0100】
上記補正アルゴリズム5では、画像データとしてL* * * を例としてあげているが、これはL* * * やYIQ等、明度(輝度)と色差が分離した表色系の画像データでもよい。
【0101】
又、上記補正アルゴリズム1〜5はいずれも白、黒及びグレーの区画を利用して色調を補正しているが、これは、撮影時の露出不良及び色かぶりにより色調不良の補正に関しては、これら3色を利用することが最も有効だからである。
【0102】
例えば、撮影した画像の中のどの部分をハイライト及びシャドーとみなすかを見極めるのは容易ではないが、画像記録用カラーチャートと共に撮影した画像であれば、該カラーチャートの白部分がハイライトポイント、黒部分がシャドーポイントであることが一目でわかる。
【0103】
又、色かぶりの補正には、画像の中から本来無彩色であるべき部分をみつける必要があるが、白、黒、グレーは無彩色であるので、これを利用することが色かぶりの補正に有効である。
【0104】
なお、上記補正アルゴリズムは、画像中の白、黒、グレーの区画を利用して色調を補正するようにしたものであるが、本発明はこれに限定されるものでなく、他の色を利用するものであってもよい。又、補正の順序も限定されない。
【0105】
又、前記色補正方法では、ディスプレイ上に表示された画像毎に補正カーブを作成して色値を補正するようにしているが、撮影条件が同一の複数の画像の場合は、同一の補正カーブを利用することができる。
【0106】
従って、この場合、初回の色補正操作のとき作成し、保存した補正カーブを利用することにより、図12、図15及び図19のフローチャートにおける補正カーブ作成のステップを省略して、色補正の作業を短縮化することができる。
【0107】
【発明の効果】
本発明の画像記録用カラーチャートは上記のように構成したので、撮影により取り込んだカラー画像を画像処理装置によって色補正する場合、標準となる少なくとも3色がそのカラー画像に取り込まれているので、その標準色に基づいて被写体の色補正を精密に行うことができる。又、色材塗布の形状を円形及び四角、あるいはマス目との組合せとすることによって、歪み、大きさ、及び歪みの補正も行うことができる。
【0108】
又本発明の画像記録用カラーチャートを用いた色補正方法は、撮影時の露光の過不足や色かぶりによって生じた色調不良を簡単に補正することができるという効果を有する。
【図面の簡単な説明】
【図1】本発明の実施の形態の第1例に係る画像記録用カラーチャートを拡大して示す平面図
【図2】同画像記録用カラーチャートの断面を拡大して示す断面図
【図3】同画像記録用カラーチャートを患者の顔面に貼着した状態を示す表面図
【図4】同画像記録用カラーチャートの変形例を示す平面図
【図5】本発明の実施の形態の第2例に係る画像記録用カラーチャートを拡大して示す平面図
【図6】本発明の実施の形態の第3例に係る画像記録用カラーチャートを拡大して示す平面図
【図7】本発明の実施の形態の第4例に係る画像記録用カラーチャートを拡大して示す平面図
【図8】本発明の実施の形態の第5例に係る画像記録用カラーチャートを拡大して示す平面図
【図9】本発明の実施の形態の第6例に係る画像記録用カラーチャートを拡大して示す平面図
【図10】本発明の実施の形態の第7例に係る画像記録用カラーチャートを拡大して示す平面図
【図11】本発明の実施の形態の第8例に係る画像記録用カラーチャートを拡大して示す平面図
【図12】本発明に係る画像記録用カラーチャートを用いた色補正方法により画像を補正する手順を示すフローチャート
【図13】同色補正方法を実施するためのシステムを示すブロック図
【図14】図12のフローチャートで示された色補正アルゴリズムによって作成されたRGB補正カーブを示す線図
【図15】本発明に係る色補正方法の他の補正アルゴリズムを示すフローチャート
【図16】図15に示されるフローチャートのアルゴリズムによって作成されたハイライト補正カーブを示す線図
【図17】同シャドウ補正カーブを示す線図
【図18】同グレー補正カーブを示す線図
【図19】本発明に係る色補正方法の更に他の補正アルゴリズムを示すフローチャート
【図20】図19に示されるフローチャートのアルゴリズムによって作成された補正カーブを示す線図
【符号の説明】
10、22、30、32、40…画像記録用カラーチャート
12…シート状基材
14、26…色区画
16…スケール
18…粘着層
20…患者
24、36…内接円
24A、36A…4等分線
25、37…4等分円
28…マス目
50…コンピュータ
51…記憶装置
52…ディスプレイ
54…ポインティングデバイス
56…補正カーブ作成部
58…画像データ変換部
[0001]
[Industrial application fields]
  In the medical or beauty field, the present invention is used for recording color images of human skin and the like.CanColor chart for image recordingTheThe present invention relates to the color correction method used.
[0002]
[Prior art]
In the medical and beauty fields, color images of human skin are often recorded in photographs and videos.
[0003]
For example, in order to determine skin lesions in dermatology, color of wrinkles in orthopedic surgery, determination of therapeutic effect, and determination of cosmetic effect in beauty, a face is often photographed or video-shooted.
[0004]
[Problems to be solved by the invention]
Here, photography and video are taken multiple times with the passage of time for the same patient, etc., but the amount of natural light, the type of illumination light source including natural light, and photography each time it is taken If the color of the room, the film manufacturer, the developing company, and the like are different, there is a problem in that the photographed image may be a different color even for the same person.
[0005]
In comparison with other clinical cases, naturally, the skin color of the patient or the like is often different, which makes comparison more difficult.
[0006]
Furthermore, with respect to the size of the image, since it is difficult to make the distance, magnification, and the like exactly the same for each shooting, changes are unavoidable, making accurate comparison and determination difficult. was there.
[0007]
On the other hand, it is conceivable to correct the color and size of the obtained image by computer processing. However, since the reference is unclear, correction is easily performed arbitrarily. There is a problem of lack of accuracy in general comparison.
[0008]
  The present invention has been made in view of the above-described conventional problems, and corrects a recorded image to a color close to a subject and compares a plurality of individually shot images under the same conditions.In the pictureColor chart for image recordingUse the method to correct the color of the recorded imageThe purpose is to provide.
[0011]
[Means for Solving the Invention]
  ThisThe invention comprises a sheet-like base material such as paper, resin film, etc., and has an adhesive layer that can be attached to a subject on the back side, the base material surface is mat-like, and the base material surface has at least A process of sticking an image recording color chart in which three color materials are applied to different sections in a mat shape to the subject by the adhesive layer and photographing the subject together with the subject, and storing the photographed image as digital data A process of displaying digital data captured in the storage device on a display, and a process of reading color values of the color chart for image recording on the display of at least two of the three colors. The correction value for each color is obtained from the digital data of the color value of the read color chart and the target value in the corresponding section in the color chart for image recording. And a step of correcting the digital data captured in the storage device by the calculated correction value and importing it again into the storage device, and the target values of the color values of the three colors are set in advance. A color correction method that sets and reads the color value of each section in the image on the display and calculates a correction value from the digital data of the read color value and the target value, wherein the color material is white, Black, gray and white and black target values OH, OLIs set in advance and the RGB value I of the white section of the image displayed on the display is set.H(R), IH(G), IH(B) is read and (0,0)-(I) in a two-dimensional graph having the read value and the corresponding target value as coordinate axes.H, OH)-(255,255)Correction curveBased on the captured RGBValue I H (R) , I H (G) , I H (B)And then the RGB value I of the black sectionL(R), IL(G), IL(B) is read and (0,0)-(I) in a two-dimensional graph having the read value and the corresponding target value as coordinate axes.L, OL)-(255,255)Correction curveBased on the aboveIs capturedRGBValue I L (R) , I L (G) , I L (B)And then the RGB value I of the gray sectionM(R), IM(G), IMRead (B), this readingI M (R) , I M (G) , I M (B)Average value Ave (IM) And (0,0)-(I) in a two-dimensional graph having the read value and the corresponding target value as coordinate axes.M, Ave (IM))-Pass through each point of (255, 255)Correction curveBased on the aboveIs capturedRGBValue I M (R) , I M (G) , I M (B)The above-mentioned object is achieved by converting.
[0012]
  Claim2The invention comprises a sheet-like base material such as paper, resin film, etc., and has an adhesive layer that can be attached to a subject on the back side, the base material surface is mat-like, and the base material surface has at least A process of sticking an image recording color chart in which three color materials are applied to different sections in a mat shape to the subject by the adhesive layer and photographing the subject together with the subject, and storing the photographed image as digital data A process of displaying digital data captured in the storage device on a display, and a process of reading color values of the color chart for image recording on the display of at least two of the three colors. The correction value for each color is obtained from the digital data of the color value of the read color chart and the target value in the corresponding section in the color chart for image recording. And a step of correcting the digital data captured in the storage device by the calculated correction value and importing it again into the storage device, and the target values of the color values of the three colors are set in advance. A color correction method that sets and reads the color value of each section in the image on the display and calculates a correction value from the digital data of the read color value and the target value, wherein the color material is white, Black, gray, and the target value O of these color valuesH, OL, OMIs set in advance and the RGB value I of the white section of the image displayed on the display is set.H(R), IH(G), IH(B) is read and (0,0)-(I) in a two-dimensional graph having the read value and the corresponding target value as coordinate axes.H, OH)-(255,255)Correction curveBased on the captured RGBValue I H (R) , I H (G) , I H (B)And then the RGB value I of the black sectionL(R), IL(G), IL(B) is read and (0,0)-(I) in a two-dimensional graph having the read value and the corresponding target value as coordinate axes.L, OL)-(255,255)Correction curveBased on the aboveCapturedRGBValue I L (R) , I L (G) , I L (B)And then the RGB value I of the gray sectionM(R), IM(G), IMRead (B),The target RGB value of gray is O M (R) , O M (G) , O M (B) AsO 'MTo calculate
    O 'M(R) = ΣIM+ (OM(R) / ΣOM)
    O 'M(G) = ΣIM+ (OM(G) / ΣOM)
    O 'M(B) = ΣIM+ (OM(B) / ΣOM)
(However, ΣIM= IM(R) + IM(G) + IM(B), ΣOM= OM(R) + OM(G) + OM(B))
  (0,0)-(I) in a two-dimensional graph having the read value and the corresponding target value as coordinate axes.M, O 'M)-(255,255)Correction curveBased on the aboveIs capturedRGBValue I M (R) , I M (G) , I M (B)To achieve the above object.
  Claim3The invention comprises a sheet-like base material such as paper, resin film, etc., and has an adhesive layer that can be attached to a subject on the back side, the base material surface is mat-like, and the base material surface has at least A process of sticking an image recording color chart in which three color materials are applied to different sections in a mat shape to the subject by the adhesive layer and photographing the subject together with the subject, and storing the photographed image as digital data A process of displaying digital data captured in the storage device on a display, and a process of reading color values of the color chart for image recording on the display of at least two of the three colors. The correction value for each color is obtained from the digital data of the color value of the read color chart and the target value in the corresponding section in the color chart for image recording. And a step of correcting the digital data captured in the storage device by the calculated correction value and importing it again into the storage device, and the target values of the color values of the three colors are set in advance. A color correction method that sets and reads the color value of each section in the image on the display and calculates a correction value from the digital data of the read color value and the target value, wherein the color material is white, Black, gray, and the target value O of these color valuesH, OL, OMIs set in advance, and the white and black sections of the image opened on the display are set to L*Value IH(L), IL(L) and L in gray section*a*b*Value IM(L), IM(a), IM(b) is read, and (0,0)-(I) in a two-dimensional graph having the read value and the corresponding target value as coordinate axes.L(L), OL(L))-(IM(L), OM(L))-(IH(L), OH(L))-(100, 100) through each pointCorrection curveBased on the captured L*Convert data(However, the target for white, black and gray is L * Value O H (L) , O L (L) , O M (L) And target a * Value, b * Value O M (a) , O M (b) And)Next, the correction values ΔM (a) and ΔM (b) are calculated by the following equations,
ΔM (a) = OM(a) -IM(a)
ΔM (b) = OM(b) -IM(b)
The correction values ΔM (a) and ΔM (b) are already taken in a*And b*Each is added to the data and the convertedL * DataSaveColor correction method characterized byThe above object is achieved.
Claim4The invention of claim 1 to claim 13In any of the above, the process of storing the correction value, the process of correcting the digital data of the image captured after the next time with the stored correction value, the process of storing the corrected digital data, It is made to have.
[0013]
  Claim5The invention of claim 1 to claim 14In any one of the inventions, the section to which the color material is applied is a grid having the same number as the number of types of the color material, and the substrate surface has the same dimensions surrounding the grid-shaped section. A scale is formed by arranging squares in rows.
[0014]
  Claim6The invention of claim 1 to claim 14In any one of the inventions, the substrate surface is square, a circle substantially inscribed in the square is formed on the substrate surface, and the circle is divided into four at a central angle of 90 °. Color material of any of the three primary colors of the RGB color system, the three primary colors of the CMY color system, and the basic color of the Lab color system in one of the four corners of the square outside the circle and the circle, On the other hand, at least one of white, gray and black color materials is applied.
[0015]
  Claim7The invention of claim6In this invention, the whole area of the square on the surface of the base material is divided into squares so as to overlap the quadrant of the circle.
[0016]
  Claim8The invention of claim6In the invention, at least one quadrant in the circle on the surface of the base material is superposed on the quadrant of the circle and partitioned into squares.
[0017]
  Claim9The invention of claim5Thru8In any one of the inventions, the length of one side of each of the grid-like sections is the same dimension.
[0018]
  Claim 10The invention of claim5Thru9In any one of the inventions, the surface of the base material is made of a material having irregularities and colors substantially equal to the surface of the subject.
[0019]
  Claim 11The invention of claim5Thru9In any one of the inventions, the surface of the base material is made of a material having irregularities and colors substantially equal to human skin.
[0030]
In this invention, the color chart for image recording is composed of a sheet-like base material that can be attached to a subject, for example, the skin of a human body, and the surface of the base material is a mat shape that suppresses reflection of light. At least three color materials are applied in a mat shape to different sections on the surface, so that after the subject is photographed, color correction is accurately performed based on the three colors, and color images of different subjects are recorded. Color image recordings under different conditions can be accurately compared.
[0032]
  In addition, color material is applied to the grid-like sections and around it.SameBy arranging the squares with dimensions in rows, the scale can be configured so that not only the color but also the size, inclination, and distortion of the subject can be accurately known and adjustment can be facilitated.
[0033]
  Also, make the surface of the base material square and its inscribed circleCenter angle 90 °Divide into four equal parts, and apply appropriate color materials to the four corners of the quadrant and the outer square, so that colors are optimally arranged according to conditions such as the type of subject, image output mode, etc., and correction and comparison Can be made easy.
[0034]
Furthermore, the entire surface of the base material is partitioned into squares so as to overlap with the quadrant of the circle, so that dimensions and distortion can be expressed more accurately and correction can be facilitated.
[0035]
  Furthermore, the length of one side of each square-shaped section is set toSameBy making the dimensions, the size of the subject can be understood at a glance.
[0036]
In addition, the surface of the base material is made of a material having substantially the same unevenness and color as that of the subject, for example, human skin, so that the reflection of light on the surface of the subject and the condition of the color tone can be accurately reflected to perform later image processing. Can be done accurately.
[0037]
According to the present invention, the color value on the display and the correspondence in the color chart of at least two of the basic three colors (three colors in the case of RGB and CMY) in the image display color chart captured as an image By comparing the color values of the color materials in the sections to be calculated and calculating the correction value for each color, the values in the sections of each color in the image can be easily corrected so as to be optimal for the entire image.
[0038]
Also, since the color of the section of the image to be read is white, black and gray and these color values are corrected simultaneously, the result of the previous correction is not affected by the subsequent correction, and the color value Can be optimized. In addition, it is possible to easily correct a color tone defect caused by overexposure or underexposure when photographing a subject.
[0039]
In addition, the color of the section to be read is set to white, black, gray, and in this order, and the color value is corrected each time reading is performed, which is caused by overexposure and color cast when photographing the subject. It is possible to easily correct poor color tone. When reading and correcting in order of white, black, and gray, the best correction result was obtained.
[0040]
DETAILED DESCRIPTION OF THE INVENTION
Embodiments of the present invention will be described below with reference to the drawings.
[0041]
  As shown in FIG. 1, an image recording color chart 10 according to the present invention comprises a sheet-like base material 12 such as paper or a resin film, has a square surface shape, and a square cell having nine squares in the center. Colored section 14 formed in an eye shape, and smaller than color section 14 around itSameA scale 16 is provided in which squares of dimensions are arranged in rows.
[0042]
The nine color sections 14 are R, G, B, which are three primary colors of light, and black, gray, white, and Y, which are three primary colors of coloring materials, from the upper left to the lower right in FIG. , M, and C.
[0043]
The surface of the sheet-like substrate 12 is mat-like (matte), and the finish of the color material to be applied (printed) is mat-like so that reflected light is scattered.
[0044]
Further, as shown in an enlarged view in FIG. 2, the back side of the sheet-like substrate 12 is an adhesive layer 18 that can be attached to a subject such as human skin, for example, and is attached to a mount 19 made of release paper, for example. It is attached so that it can be peeled off from the mount 19 for use.
[0045]
For example, as shown in FIG. 3, the color chart 10 for image recording is attached to the face of the patient 20 with an adhesive layer 18, and a photograph or video is taken with the adhesive layer 18 attached.
[0046]
The color of an image recorded (photographed) on a film or a magnetic recording device naturally varies depending on conditions such as illumination light, film, camera, etc., but the color of the image recording color chart 10 is included in the recorded image. Therefore, if the image processing device (computer) corrects each color of the color section 14 so as to restore the original color, the skin color of the patient 20 is accurately corrected.
[0047]
Furthermore, since the three primary colors RGB of light, the three primary colors CMY of color materials, and white, gray and black for color balance adjustment are applied to the color section 14, it is possible to correct accurately according to the output form of the color image. it can.
[0048]
Further, since the scale 16 is also captured in the recorded color image, the size of the color image recorded under a plurality of different conditions can be adjusted equally based on the scale 16. Further, since both the color section 14 and the scale 16 are square grids, it is possible to accurately know the inclination and distortion state of the subject.
[0049]
A specific procedure for obtaining a digital signal for image processing is as follows.
[0050]
First, when shooting with a still camera, the image of the film or photographic paper is disassembled with a color scanner and converted into digital data. When the image is taken with a digital camera, the signal is processed as it is. Furthermore, when the image is taken with a video camera, the still image is A / D converted into a digital signal, which is processed by an image processing apparatus to be corrected (details will be described later).
[0051]
The image recording color chart 10 is prepared, for example, in a plurality of types such as 5 cm, 2 cm, 1 cm, and 5 mm in length of one side, and is used according to the size of the subject. For example, when imaging a patient's face as shown in FIG. 3, a square image recording color chart 10 having a side of 1 cm or 2 cm is used.
[0052]
In this case, the area of the color chart 10 for image recording is not excessive with respect to the total area of the obtained color image, and is not excessively small so that sufficient color information can be obtained during image processing, for example, a color image Of 1/50 to 1/100 of the area.
[0053]
Note that, in the color chart for image recording having a side of 5 mm, the grids of the scale 16 are crushed in the color image, so that they are the same as the grids of the color section 14 as shown in FIG. 4, for example. .
[0054]
In the example of FIG. 1 described above, the surface of the sheet-like base material 12 is divided into grids to form color sections 14, and a scale 16 is formed on the outside thereof. However, the present invention is not limited to this. The color material is not limited to RGB and CMY colors, and the basic color of the Lab color system may be used as long as at least three color materials are applied to different sections on the surface of the sheet-like substrate. (Hereinafter, referred to as basic colors including the three primary colors of RGB and CMY) may be used. Therefore, the following various embodiments may be used.
[0055]
  The color chart 22 for image recording according to the second example of the embodiment of the present invention shown in FIG. 5 has a square surface, and the inscribed circle 24 and the four corners of the square outside the square. In addition, a color section 26 for displaying three or four basic colors of RGB, CMY, or Lab is provided, and an inner side of the inscribed circle 24 is provided.Center angle 90 °It is divided into four equal parts, and square squares 28 are formed so as to overlap the quadrant line 24A, and two opposing quadrant circles 25 are black.
[0056]
When three basic colors of RGB are applied to the color section 26, the remaining corner may be gray. Further, the lines of the cells 28 in the pair of quadrants 25 made black are uncolored.
[0057]
The quadrant in the inscribed circle 24 may not be applied to black as in the image recording color chart 30 of the third embodiment of FIG.
[0058]
Further, FIG. 7 shows an image recording color chart according to a fourth example of the embodiment of the present invention.
[0059]
This color chart 32 for image recording partitions the entire area of the square surface by a grid 34, forms an inscribed circle 36 inscribed in the square, and further superimposes the inscribed circle 36 on the square 34. A color material obtained by dividing an equal line 36A into four equal parts and adding one color to the three basic colors of the RGB color system, the CMY color system, and the Lab color system in the quadrant 37. The four corners between the inscribed circle 36 and the square are appropriately colored in white, gray, and black.
[0060]
The color chart 40 for image recording of the fifth embodiment of the present invention shown in FIG. 8 is used when the image processing apparatus performs color correction on one 25A of the quadrant 25 in the embodiment shown in FIG. A particularly important color material is applied. In this case, as shown in FIG. 8 (A), the squares in the quadrant 25 may be removed, and as shown in FIG. 28 may be provided.
[0061]
FIG. 9 shows an image recording color chart 42 according to a sixth example of the embodiment of the present invention.
[0062]
This color chart 42 for image recording is the same as the scale 16 in FIG. 9, but in the right vertical column in FIG. 9, unfilled white cells 44A to 44E every other square from the upper end and each white cell. It is composed of information display cells 46A to 46D which are filled or not painted according to the version number which is one of the color chart management information between the cells 44A to 44E.
[0063]
Further, in FIG. 9, the lower horizontal row in the scale 16 includes white squares 45 </ b> A to 45 </ b> E that are not filled and every other square from the right end, and between these white squares 45 </ b> A to 45 </ b> E. The information display cells 47A to 47D are filled or not filled corresponding to the lot number which is one of the color chart management information.
[0064]
The two squares at the center of the upper horizontal row in FIG. 9 of the scale 16 are each half-filled to form an upward arrow-shaped sticking direction indication mark 48.
[0065]
The information display cells 46A to 46D and 47A to 47D display a version number and a lot number in binary.
[0066]
For example, as shown in FIG. 9, when only the first information display cell 46A from the top in the vertical direction column is filled, the version number. 1 and when the first and second information display cells 46A and 46B are filled as shown in FIG. 3 and when the first, third and fourth information display cells 46A, 46C and 46D are filled as shown in FIG. 13 is displayed.
[0067]
In the lower horizontal row, for example, as shown in FIG. 9, when only the first information display grid 47A is filled, the lot No. 1 and when only the second information display grid 47B is filled as shown in FIG. 2 and when the first, second and third information display cells 47A, 47B and 47C are respectively filled as shown in FIG. 7 is displayed.
[0068]
The color value of each color in the color section 14 in the image recording color chart 42 is measured in advance for each version number and lot number, and is recorded as a table in a computer memory or paper. The color value can be set and / or displayed by reading or specifying. Alternatively, a table (table) describing each color value for the lot number may be prepared in advance, and the color value of the table may be manually input to the computer.
[0069]
In the above embodiment, the surface of a sheet-like base material such as paper or resin film is formed in a mat shape, and color materials such as three basic colors are applied in a mat shape here. Reflection by light is to prevent the generation of an unclear image such as a color flicker, and ideally, the surface should have a property that matches the irregularities and colors of the surface of the subject.
[0070]
Therefore, for example, when the image recording color chart according to the present invention is applied to the human skin, the surface of the base material of the image recording color chart is substantially the same as the unevenness and color of the human skin. It is good.
[0071]
The unevenness of the human skin is appropriately selected according to, for example, infants, children, adults, elderly people, men, women, oily skin, and dry skin. Furthermore, colors shall be arranged according to white race, yellow race, black race or mixed race of these.
[0072]
Next, an example of a method for actually correcting the color of an image using the image recording color chart as described above will be described.
[0073]
In this method, as shown in FIG. 12, the color chart for image recording as described above is attached to the patient 20 as the subject by the adhesive layer 18, and is photographed together with the patient 20. The process of capturing an image as digital data into the storage device 51 of the computer 50 shown in FIG. 13, the process of displaying the digital data captured in the storage device 51 on the display 52, and at least two of the three colors The process of instructing the color value of the color chart on the display 52 by, for example, the pointing device 54 and taking it into the chart value reading unit 55, the digital data of the color value of the read color chart and the correspondence in the color chart for image recording By comparing the target value (set in advance) or the set value in the section For example, the correction value for each color is calculated in the correction curve creation unit 56, and the digital data captured in the storage device 51 is corrected by, for example, the image data conversion unit 58 based on the calculated correction value. The image color correction method using the color chart is configured by the process of taking in the storage device 51. Reference numeral 60 denotes the entire image correction unit, and 62 denotes a target value setting unit. The target value or set value is a target value setting unit based on a table input in advance by reading or inputting the same version number and lot number as in the color chart for image recording shown in FIGS. In 62, it is set automatically. As described above, the target values shown in the table may be manually input to the target value setting unit 62 and set.
[0074]
Specifically, as shown in FIG. 12, an image recording color chart is attached to the patient 20 as a subject in step 101, the subject is photographed together with the color chart in step 102, and the photographed image is digitized in step 103. The image stored in step 104 is displayed on the display 52. In step 105, the color values of the white, black, and gray sections in the color chart image on the display 52 are read by the scanner 54.
[0075]
Next, as shown in FIG. 14, the correction curve creation unit 56 uses the read digital data and digital data of preset target values of white, black, and gray in the color chart for image recording as shown in FIG. 14. Then, a correction curve is formed in a two-dimensional graph with the correction value as the vertical axis and the read value as the horizontal axis (see step 106), and the captured digital data is corrected based on the correction curve (see step 107). The digital data corrected in step 108 is stored.
[0076]
More specifically, as shown in FIG. 13, the target value setting unit 62 causes the correction curve creation unit 56 to preliminarily set the target values O, W, G, and G.H, OL, OMAfter the image is opened on the display 52, the RGB values I of the white, black, and gray sections in the image are set.H(R), IH(G), IH(B), IL(R), IL(G), IL(B), IM(R), IM(G), IM(B) is read, and the point (0,0) − (IL, OL)-(IM, OM)-(IH, OH)-(255, 255) is formed, RGB digital data that has already been captured is converted based on the correction curve, and the digital data is stored in the storage device 51.
[0077]
For example, the RGB value (input value) of the color chart for image recording is
White: IH(R) = 208, IH(G) = 188, IH(B) = 217
Black: IH(R) = 29, IH(G) = 16, IH(B) = 19
Gray: IH(R) = 126, IH(G) = 90, IH(B) = 138
The target RGB value (target value) is
White: OH(R) = OH(G) = OH(B) = 228
Black: OL(R) = OL(G) = OL(B) = 35
Gray: OM(R) = OM(G) = OM(B) = 114
in the case of,
The correction curve is
R data: (0,0) − (29,35) − (126,114) − (208,228) − (255,255)
G data: (0,0)-(16,35)-(90,114)-(188,228)-(255,255)
B data: (0,0)-(19,35)-(138,114)-(217,228)-(255,255)
(See FIG. 14).
[0078]
Assuming that the correction algorithm 1 in the flowchart 1 shown in FIG. 12 is the correction algorithm 1, the correction algorithm 1 simultaneously corrects and converts the read digital data of each of the white, black, and goo color sections. This is ideal because there is no drawback that the result of the correction performed earlier is influenced by the row correction later, as in the case of correcting sequentially for each gray.
[0079]
However, if it is difficult to take the correction method of algorithm 1 due to the computer configuration or software specifications, the following correction methods such as correction algorithms 2 to 4 may be used.
[0080]
These algorithms 2, 3 and 4 correct the digital data taken in by the procedure of the flowchart shown in FIG.
[0081]
First, the correction algorithm 2 will be described with reference to FIG.
[0082]
Preliminary white, black and gray target values OH, OL, OMIs set, the image is displayed in step 201, and the RGB value I of the white section in the image is displayed in step 2.H(R), IH(G), IH(B) is read and the correction algorithm (0,0)-(IH, OH)-(255, 255) to create a highlight correction curve (see FIG. 16). Next, with this highlight correction curve, each RGB data is converted so as to perform highlight correction in step 204, and then In step 205, the RGB value I of the black section in the imageL(R), IL(G), IL(B) is read and in step 206 (0,0)-(IL, OL)-(255, 255), a shadow correction curve is created, and RGB data are converted so as to perform shadow correction in step 207.
[0083]
Next, the RGB value I of the gray section in the imageM(R), IM(G), IM(B) is read and in step 209 (0,0)-(IM, OM)-(255, 255) is created, and based on this, each RGB data is converted so as to perform gray correction, and the image (digital data) is stored in step 211.
[0084]
For example, the RGB value (input value) of the chart is
White: IH(R) = 208, IH(G) = 188, IH(B) = 217
Black: IH(R) = 29, IH(G) = 16, IH(B) = 19
Gray: IH(R) = 126, IH(G) = 90, IH(B) = 138
The target RGB value (target value) is
White: OH(R) = OH(G) = OH(B) = 228
Black: OL(R) = OL(G) = OL(B) = 35
Gray: OM(R) = OM(G) = OM(B) = 114
in the case of,
The highlight correction curve is
R data: (0,0)-(208,228)-(255,255)
G data: (0,0)-(188,228)-(255,255)
B data: (0,0)-(217,228)-(255,255)
The shadow correction curve is
R data: (0,0)-(29,35)-(255,255)
G data: (0,0)-(16,35)-(255,255)
B data: (0,0)-(19,35)-(255,255)
The gray correction curve is
R data: (0,0)-(126,114)-(255,255)
G data: (0,0)-(90,114)-(255,255)
B data: (0,0)-(138,114)-(255,255)
(See FIGS. 16 to 18).
[0085]
The correction algorithm 3 is different from the correction algorithm 2 in the steps 209 and 210. Step 209 in the correction algorithm 3 is the RGB value I of the read gray section.M(R), IM(G), IMAverage value of (B) Ave (IM) To calculate (0,0) -IM, Ave (IM)-(255, 255), a gray correction curve is created, RGB digital data is converted based on the correction curve in step 210, and the digital data of the image converted in step 211 is stored.
[0086]
The RGB value (input value) of the chart is
White: IH(R) = 208, IH(G) = 188, IH(B) = 217
Black: IH(R) = 29, IH(G) = 16, IH(B) = 19
Gray: IH(R) = 126, IH(G) = 90, IH(B) = 138
The target RGB value (target value) is
White: OH(R) = OH(G) = OH(B) = 228
Black: OL(R) = OL(G) = OL(B) = 35
in the case of,
The highlight correction curve is
R data: (0,0)-(208,228)-(255,255)
G data: (0,0)-(188,228)-(255,255)
B data: (0,0)-(217,228)-(255,255)
The shadow correction curve is
R data: (0,0)-(29,35)-(255,255)
G data: (0,0)-(16,35)-(255,255)
B data: (0,0)-(19,35)-(255,255)
The gray correction curve is
R data: (0,0)-(126,118)-(255,255)
G data: (0,0)-(90,118)-(255,255)
B data: (0,0)-(138,118)-(255,255)
(See FIGS. 16 to 18).
[0087]
Next, the correction algorithm 4 will be described.
[0088]
This correction algorithm is the same as the correction algorithm 2 in steps 201 to 208. In step 209, O 'MIs calculated.
[0089]
O 'M(R) = ΣIM* (OM(R) / ΣOM)
O 'M(G) = ΣIM* (OM(G) / ΣOM)
O 'M(B) = ΣIM* (OM(B) / ΣOM)
[0090]
Further calculated O 'M(0,0)-(IM, O 'M)-(255, 255) is created, RGB digital data is converted based on the gray correction curve in step 210, and the digital data of the image converted in step 211 is stored It is.
[0091]
Similarly, the RGB value (input value) of the chart is
White: IH(R) = 208, IH(G) = 188, IH(B) = 217
Black: IH(R) = 29, IH(G) = 16, IH(B) = 19
Gray: IH(R) = 126, IH(G) = 90, IH(B) = 138
The target RGB value (target value) is
White: OH(R) = OH(G) = OH(B) = 228
Black: OL(R) = OL(G) = OL(B) = 35
Gray: OH(R) = OH(G) = OH(B) = 114
in the case of,
The highlight correction curve is
R data: (0,0)-(208,228)-(255,255)
G data: (0,0)-(188,228)-(255,255)
B data: (0,0)-(217,228)-(255,255)
The shadow correction curve is
R data: (0,0)-(29,35)-(255,255)
G data: (0,0)-(16,35)-(255,255)
B data: (0,0)-(19,35)-(255,255)
The gray correction curve is
R data: (0,0)-(126,118)-(255,255)
G data: (0,0)-(90,118)-(255,255)
B data: (0,0)-(138,118)-(255,255)
(See FIGS. 16 to 18).
[0092]
Since the correction algorithms 2, 3 and 4 are performed in the order of white, black, and gray, that is, highlight correction, shadow correction, and gray correction are performed independently, the result of the previous correction is affected by the subsequent correction. There is no major inconvenience in practice.
[0093]
Further, as described above, in the correction algorithms 2, 3, and 4, when correction is performed in the order of highlight (white), shadow (black), and gray, white may change due to subsequent correction of black and gray. Since the change in appearance is small, the best correction result was obtained.
[0094]
In the correction algorithms 1 to 4, RGB data is taken as an example of image data, but this may be CMY data.
[0095]
Next, L*a*b*Or L*u*v*, YIQ, etc., a correction algorithm 5 for color system image data in which brightness (luminance) and color difference are separated,*a*b*Data will be described as an example with reference to the flowchart of FIG.
[0096]
Preliminary white, black and gray targets OH, OL, OMIs set, and the image is displayed in step 301, and the white and black sections L in the image are displayed in step 302.*Value IH(L), IL(L) and L in gray section*a*b*Value IM(L), IM(a), IM(b) is read, and in step 303 (0,0)-(IL(L), OL(L))-(IM(L), OM(L))-(IH(L), OH(L))-L through (100, 100)*Create a correction curve, and in step 304, based on this correction curve,*Data is converted, and correction values ΔM (a) and ΔM (b) are calculated by the following equation in step 305.
[0097]
ΔM (a) = OM(a) -IM(a)
ΔM (b) = OM(b) -IM(b)
[0098]
And a that has already been captured in step 306*And b*The correction values ΔM (a) and ΔM (B) are added to the data, and the digital data of the image converted in step 307 is stored.
[0099]
For example, the chart L*a*b*The value (input value) is
White: IH(L) = 84
Black: IL(L) = 12
Gray: IM(L) = 55, IM(a) = 24, IM(b) = -19
Target L*a*b*The value (target value) is
White: OH(L) = 93
Black: OL(L) = 22
Gray: OM(L) = 58, OM(a) = 0, OM(b) = 0
In the case of L*The correction curve is
(0,0)-(12,22)-(55,58)-(84,93)
-(100, 100)
(See FIG. 20), the correction values ΔM (a) and ΔM (b) are
ΔM (a) = 0−24 = −24
ΔM (b) = 0 − (− 19) = 19
It becomes.
[0100]
In the correction algorithm 5, the image data is L*a*b*As an example, this is L*u*v*Alternatively, color system image data in which brightness (brightness) and color difference are separated may be used.
[0101]
In addition, the correction algorithms 1 to 5 all correct the color tone using white, black, and gray sections. However, these are the corrections for poor color tone due to poor exposure and color cast at the time of shooting. This is because it is most effective to use three colors.
[0102]
For example, it is not easy to determine which part of a photographed image is considered as a highlight or shadow, but if it is an image photographed with a color chart for image recording, the white part of the color chart is the highlight point. , You can see at a glance that the black part is the shadow point.
[0103]
In addition, for the correction of color cast, it is necessary to find the part that should be originally achromatic in the image. However, since white, black and gray are achromatic, it is possible to correct the color cast. It is valid.
[0104]
The above correction algorithm corrects the color tone using white, black, and gray sections in the image. However, the present invention is not limited to this, and other colors are used. You may do. Further, the order of correction is not limited.
[0105]
In the color correction method, a correction curve is created for each image displayed on the display to correct the color value. However, in the case of a plurality of images having the same shooting conditions, the same correction curve is used. Can be used.
[0106]
Therefore, in this case, the correction curve creation step in the flowcharts of FIGS. 12, 15 and 19 is omitted by using the correction curve created and saved at the first color correction operation, and the color correction operation is performed. Can be shortened.
[0107]
【The invention's effect】
Since the image recording color chart of the present invention is configured as described above, when color correction is performed by an image processing apparatus using a color image captured by photographing, at least three standard colors are captured in the color image. The color correction of the subject can be performed accurately based on the standard color. Further, distortion, size, and distortion can be corrected by using a combination of a color material application with a circle, square, or grid.
[0108]
The color correction method using the image recording color chart of the present invention has an effect that it is possible to easily correct a color tone defect caused by overexposure or underexposure at the time of photographing.
[Brief description of the drawings]
FIG. 1 is an enlarged plan view showing an image recording color chart according to a first example of an embodiment of the invention.
FIG. 2 is an enlarged cross-sectional view of the image recording color chart.
FIG. 3 is a surface view showing a state in which the color chart for recording the image is attached to a patient's face.
FIG. 4 is a plan view showing a modification of the image recording color chart.
FIG. 5 is an enlarged plan view showing an image recording color chart according to a second example of the embodiment of the present invention;
FIG. 6 is an enlarged plan view showing a color chart for image recording according to a third example of the embodiment of the present invention.
FIG. 7 is an enlarged plan view showing a color chart for image recording according to a fourth example of an embodiment of the present invention.
FIG. 8 is an enlarged plan view showing an image recording color chart according to a fifth example of the embodiment of the invention.
FIG. 9 is an enlarged plan view showing an image recording color chart according to a sixth example of the embodiment of the present invention;
FIG. 10 is an enlarged plan view showing a color chart for image recording according to a seventh example of the embodiment of the present invention.
FIG. 11 is an enlarged plan view showing an image recording color chart according to an eighth example of the embodiment of the present invention.
FIG. 12 is a flowchart showing a procedure for correcting an image by a color correction method using an image recording color chart according to the present invention.
FIG. 13 is a block diagram showing a system for carrying out the same color correction method.
14 is a diagram showing an RGB correction curve created by the color correction algorithm shown in the flowchart of FIG.
FIG. 15 is a flowchart showing another correction algorithm of the color correction method according to the present invention.
16 is a diagram showing a highlight correction curve created by the algorithm of the flowchart shown in FIG.
FIG. 17 is a diagram showing the shadow correction curve
FIG. 18 is a diagram showing the same gray correction curve.
FIG. 19 is a flowchart showing still another correction algorithm of the color correction method according to the present invention.
20 is a diagram showing a correction curve created by the algorithm of the flowchart shown in FIG.
[Explanation of symbols]
10, 22, 30, 32, 40 ... Color chart for image recording
12 ... Sheet-like substrate
14, 26 ... Color section
16 ... Scale
18 ... Adhesive layer
20 ... patient
24, 36 ... Inscribed circle
24A, 36A ... 4 lines
25, 37 ... 4 equally divided circles
28 ...
50 ... Computer
51. Storage device
52 ... Display
54 ... Pointing device
56 ... Correction curve creation section
58. Image data converter

Claims (11)

紙、樹脂フィルム等のシート状基材からなり、裏面側に被写体に貼着可能な粘着層を備えると共に、基材表面がマット状とされ、且つ、該基材表面に、少なくとも3色の色材が、異なる区画にマット状に塗布されてなる画像記録用カラーチャートを、前記粘着層により被写体に貼着して被写体と共に撮影する過程と、撮影した画像をデジタルデータとして記憶装置に取り込む過程と、前記記憶装置に取り込まれたデジタルデータを、ディスプレイ上に表示する過程と、前記3色のうち少なくとも2色の、ディスプレイ上における前記画像記録用カラーチャートの色値を読み取る過程と、読み取ったカラーチャートの色値のデジタルデータと前記画像記録用カラーチャートにおける対応する区画での目標値とにより各色毎の補正値を算出する過程と、該算出した補正値により前記記憶装置に取り込まれたデジタルデータを補正して、再度記憶装置に取り込む過程と、を有してなり、前記3色の色値の目標値を予め設定しておき、前記ディスプレイ上の画像における各区画の色値を読み取り、読み取った色値のデジタルデータと前記目標値とから補正値を算出する色補正方法であって、
前記色材を白、黒、グレーとし、且つ、白及び黒の色値の目標値OH 、OL を予め設定しておき、前記ディスプレイ上に表示された画像の白区画のRGB値IH (R)、IH (G)、IH (B)を読み取り、この読み取り値と対応する前記目標値とを座標軸とする2次元グラフにおける(0,0)−(IH ,OH )−(255,255)の各点を通る補正カーブに基づき、前記取り込まれているRGB値I H (R) 、I H (G) 、I H (B)を変換し、
次に黒区画のRGB値IL (R)、IL (G)、IL (B)を読み取り、この読み取り値と対応する前記目標値とを座標軸とする2次元グラフにおける(0,0)−(IL ,OL )−(255,255)の各点を通る補正カーブに基づき、前記取り込まれているRGB値I L (R) 、I L (G) 、I L (B)を変換し、
次にグレー区画のRGB値IM (R) 、IM(G) 、IM (B) を読み取り、この読み取り値であるI M (R) 、I M (G) 、I M (B)の平均値Ave(IM )を計算し、前記読み取り値と対応する前記目標値とを座標軸とする2次元グラフにおける(0,0)−(IM ,Ave(IM ))−(255,255)の各点を通る補正カーブに基づき、前記取り込まれているRGB値I M (R) 、I M (G) 、I M (B)を変換することを特徴とする色補正方法。
It consists of a sheet-like base material such as paper or resin film, and is provided with an adhesive layer that can be attached to the subject on the back side, the base material surface is mat-like, and at least three colors on the base material surface A process of sticking an image recording color chart in which a material is applied in a mat shape in different sections to a subject by using the adhesive layer, and a process of capturing the captured image as digital data in a storage device; A process of displaying digital data captured in the storage device on a display, a process of reading color values of the color chart for image recording on the display of at least two of the three colors, and a read color The correction value for each color is calculated based on the digital data of the color value of the chart and the target value in the corresponding section in the image recording color chart. And correcting the digital data fetched into the storage device by the calculated correction value and fetching it again into the storage device, and setting target values of the color values of the three colors in advance. A color correction method for reading a color value of each section in the image on the display and calculating a correction value from the digital data of the read color value and the target value,
White said colorant, black, and gray, and white and the target value O H black color value, O L is set in advance to, RGB value I H of the white section of the image displayed on the display (R), I H (G), I H (B) are read, and (0,0) − (I H , O H ) − in a two-dimensional graph having the read values and the corresponding target values as coordinate axes. The captured RGB values I H (R) , I H (G) , I H (B) are converted based on correction curves passing through the points (255, 255),
Next, the RGB values I L (R), I L (G), and I L (B) of the black section are read, and (0, 0) in a two-dimensional graph having the read values and the corresponding target values as coordinate axes. - (I L, O L) - based on the correction curve passing through the points of (255, 255), the captured and are RGB values I L (R), I L (G), converting the I L (B) And
Then the gray compartment RGB value I M (R), I M (G), reads the I M (B), I M (R) This is a reading, I M of (G), I M (B ) An average value Ave (I M ) is calculated, and (0,0) − (I M , Ave (I M )) − (255,255) in a two-dimensional graph having the read value and the corresponding target value as coordinate axes. The color correction method is characterized in that the captured RGB values I M (R) , I M (G) , and I M (B) are converted on the basis of a correction curve passing through each of the points.
紙、樹脂フィルム等のシート状基材からなり、裏面側に被写体に貼着可能な粘着層を備えると共に、基材表面がマット状とされ、且つ、該基材表面に、少なくとも3色の色材が、異なる区画にマット状に塗布されてなる画像記録用カラーチャートを、前記粘着層により被写体に貼着して被写体と共に撮影する過程と、撮影した画像をデジタルデータとして記憶装置に取り込む過程と、前記記憶装置に取り込まれたデジタルデータを、ディスプレイ上に表示する過程と、前記3色のうち少なくとも2色の、ディスプレイ上における前記画像記録用カラーチャートの色値を読み取る過程と、読み取ったカラーチャートの色値のデジタルデータと前記画像記録用カラーチャートにおける対応する区画での目標値とにより各色毎の補正値を算出する過程と、該算出した補正値により前記記憶装置に取り込まれたデジタルデータを補正して、再度記憶装置に取り込む過程と、を有してなり、前記3色の色値の目標値を予め設定しておき、前記ディスプレイ上の画像における各区画の色値を読み取り、読み取った色値のデジタルデータと前記目標値とから補正値を算出する色補正方法であって、
前記色材を白、黒、グレーとし、且つ、これらの色値の目標値OH 、OL 、OM を予め設定しておき、前記ディスプレイ上に表示された画像の白区画のRGB値IH (R)、IH (G)、IH (B)を読み取り、この読み取り値と対応する前記目標値とを座標軸とする2次元グラフにおける(0,0)−(IH ,OH )−(255,255)の各点を通る補正カーブに基づき、前記取り込まれているRGB値I H (R) 、I H (G) 、I H (B)を変換し、
次に黒区画のRGB値IL (R)、IL (G)、IL (B)を読み取り、この読み取り値と対応する前記目標値とを座標軸とする2次元グラフにおける(0,0)−(IL ,OL )−(255,255)の各点を通る補正カーブに基づき、前記取り込まれたRGB値I L (R) 、I L (G) 、I L (B)を変換し、
次にグレー区画のRGB値IM (R)、IM(G)、IM (B)を読み取り、グレーの、目標とするRGB値をO M (R) 、O M (G) 、O M (B) として、次式によって、O′M を算出し、
O′M (R) =ΣIM +(OM (R) /ΣOM
O′M (G) =ΣIM +(OM (G) /ΣOM
O′M (B) =ΣIM +(OM (B) /ΣOM
(但し、ΣIM =IM (R) +IM (G) +IM (B) ,ΣOM =OM (R) +OM (G) +OM (B) )
この読み取り値と対応する前記目標値とを座標軸とする2次元グラフにおける(0,0)−(IM ,O′M )−(255,255)の各点を通る補正カーブに基づき、前記取り込まれているRGB値I M (R) 、I M (G) 、I M (B)を変換することを特徴とするカラーチャートを用いた画像補正方法。
It consists of a sheet-like base material such as paper or resin film, and is provided with an adhesive layer that can be attached to the subject on the back side, the base material surface is mat-like, and at least three colors on the base material surface A process of sticking an image recording color chart in which a material is applied in a mat shape in different sections to a subject by using the adhesive layer, and a process of capturing the captured image as digital data in a storage device; A process of displaying digital data captured in the storage device on a display, a process of reading color values of the color chart for image recording on the display of at least two of the three colors, and a read color The correction value for each color is calculated based on the digital data of the color value of the chart and the target value in the corresponding section in the image recording color chart. And correcting the digital data fetched into the storage device by the calculated correction value and fetching it again into the storage device, and setting target values of the color values of the three colors in advance. A color correction method for reading a color value of each section in the image on the display and calculating a correction value from the digital data of the read color value and the target value,
White said colorant, black, and gray, and the target value O H These color values, O L, O M may be set in advance, RGB values I white compartment of the displayed image on the display H (R), I H (G), and I H (B) are read and (0,0) − (I H , O H ) in a two-dimensional graph having the read value and the corresponding target value as coordinate axes. -Convert the captured RGB values I H (R) , I H (G) , I H (B) based on correction curves passing through the points (-255, 255),
Next, the RGB values I L (R), I L (G), and I L (B) of the black section are read, and (0, 0) in a two-dimensional graph having the read values and the corresponding target values as coordinate axes. - (I L, O L) - based on the correction curve passing through the points of (255, 255), the captured RGB value I L (R), I L (G), and converts the I L (B) ,
Next, the RGB values I M (R), I M (G), and I M (B) of the gray section are read, and the target RGB values of gray are determined as O M (R) , O M (G) , and O M. As (B) , O ′ M is calculated by the following formula,
O 'M (R) = ΣI M + (O M (R) / ΣO M)
O 'M (G) = ΣI M + (O M (G) / ΣO M)
O 'M (B) = ΣI M + (O M (B) / ΣO M)
(However, ΣI M = I M (R ) + I M (G) + I M (B), ΣO M = O M (R) + O M (G) + O M (B))
And said target value corresponding to this reading in a two-dimensional graph and coordinate axes (0,0) - (I M, O 'M) - based on the correction curve passing through the points of (255, 255), the captured image correcting method using the color chart and converting the are and are RGB values I M (R), I M (G), I M (B).
紙、樹脂フィルム等のシート状基材からなり、裏面側に被写体に貼着可能な粘着層を備えると共に、基材表面がマット状とされ、且つ、該基材表面に、少なくとも3色の色材が、異なる区画にマット状に塗布されてなる画像記録用カラーチャートを、前記粘着層により被写体に貼着して被写体と共に撮影する過程と、撮影した画像をデジタルデータとして記憶装置に取り込む過程と、前記記憶装置に取り込まれたデジタルデータを、ディスプレイ上に表示する過程と、前記3色のうち少なくとも2色の、ディスプレイ上における前記画像記録用カラーチャートの色値を読み取る過程と、読み取ったカラーチャートの色値のデジタルデータと前記画像記録用カラーチャートにおける対応する区画での目標値とにより各色毎の補正値を算出する過程と、該算出した補正値により前記記憶装置に取り込まれたデジタルデータを補正して、再度記憶装置に取り込む過程と、を有してなり、前記3色の色値の目標値を予め設定しておき、前記ディスプレイ上の画像における各区画の色値を読み取り、読み取った色値のデジタルデータと前記目標値とから補正値を算出する色補正方法であって、
前記色材を白、黒、グレーとし、且つ、これらの色値の目標値OH 、OL 、OM を予め設定しておき、前記ディスプレイ上に開かれた画像の白区画及び黒区画のL* 値IH (L) 、IL (L) 及びグレー区画のL* * * 値IM (L) 、IM (a)、IM (b) をそれぞれ読み取り、この読み取り値と対応する前記目標値とを座標軸とする2次元グラフにおける(0,0)−(IL (L),OL (L) )−(IM (L) ,OM (L) )−(IH (L) ,OH (L) )−(100,100)
の各点を通る補正カーブに基づき、前記取り込まれているL* データを変換し、
(但し、白、黒、グレーの目標とするL * 値をO H (L) 、O L (L) 、O M (L) とし、目標とするa * 値、b * 値をO M (a) 、O M (b) とする)
次に補正値ΔM(a) 、ΔM(b) を次式によって算出し、
ΔM(a) =OM (a) −IM (a)
ΔM(b) =OM (b) −IM (b)
前記補正値ΔM(a) 、ΔM(b) を既に取り込まれているa*及びb* データにそれぞれ加算し、前記変換された * データを保存することを特徴とする色補正方法。
It consists of a sheet-like base material such as paper or resin film, and is provided with an adhesive layer that can be attached to the subject on the back side, the base material surface is mat-like, and at least three colors on the base material surface A process of sticking an image recording color chart in which a material is applied in a mat shape in different sections to a subject by using the adhesive layer, and a process of capturing the captured image as digital data in a storage device; A process of displaying digital data captured in the storage device on a display, a process of reading color values of the color chart for image recording on the display of at least two of the three colors, and a read color The correction value for each color is calculated based on the digital data of the color value of the chart and the target value in the corresponding section in the image recording color chart. And correcting the digital data fetched into the storage device by the calculated correction value and fetching it again into the storage device, and setting target values of the color values of the three colors in advance. A color correction method for reading a color value of each section in the image on the display and calculating a correction value from the digital data of the read color value and the target value,
White said colorant, black, and gray, and the target value O H These color values, O L, may be set to O M beforehand, white compartment and the black compartment of the image held on the display Read the L * values I H (L), I L (L), and the L * a * b * values I M (L), I M (a), I M (b) of the gray section, (0,0) − (I L (L), O L (L)) − (I M (L), O M (L)) − (I in a two-dimensional graph having the corresponding target value as a coordinate axis H (L), O H ( L)) - (100,100)
Based on the correction curve passing through each point, the L * data that has been captured is converted,
(However, the target L * values for white, black, and gray are O H (L) , OL (L) , and O M (L) , and the target a * value and b * value are O M (a ) , O M (b) )
Next, the correction values ΔM (a) and ΔM (b) are calculated by the following formulas,
ΔM (a) = O M ( a) -I M (a)
ΔM (b) = O M ( b) -I M (b)
A color correction method, wherein the correction values ΔM (a) and ΔM (b) are respectively added to a * and b * data already taken in, and the converted L * data is stored .
請求項1乃至のいずれかにおいて、前記補正値を記憶する過程と、次回以後に取り込んだ画像のデジタルデータを、前記記憶されている補正値により補正する過程と、この補正されたデジタルデータを記憶する過程と、を有してなるカラーチャートを用いた画像補正方法。In any one of claims 1 to 3, the steps of storing the correction value, the digital data of the captured image to the next after the steps of the correction by the correction value, which is the storage, the corrected digital data And an image correction method using a color chart. 請求項1乃至のいずれかにおいて、前記色材が塗布された区画は、色材の種類の数と同数のマス目状とされ、前記基材表面には、該マス目状の区画を囲んで同一寸法の正方形を列状に配置してなるスケールが設けられていることを特徴とする色補正方法。5. The section to which the color material is applied is defined in any one of claims 1 to 4 , and has the same number of grids as the number of types of color materials, and the substrate surface surrounds the grid-shaped sections. A color correction method, wherein a scale is formed by arranging squares having the same dimensions in a row. 請求項1乃至のいずれかにおいて、前記基材表面を正方形とし、該基材表面に、前記正方形に略内接する円を形成し、且つ、該円を中心角90°に4等分し、前記円の外側で前記正方形の4隅の区画及び前記4等分円の一方にRGB表色系の3原色、CMY表色系の3原色、Lab表色系の基本色のいずれかの色材を、他方に白色、灰色、黒色の色材の少なくとも1つを、それぞれ塗布したことを特徴とする色補正方法。In any one of Claims 1 thru | or 4 , the said base-material surface is made into a square, and the circle | round | yen substantially inscribed in the said square is formed in this base-material surface, And this circle | round | yen is equally divided into four at a central angle of 90 degrees, Color material of one of the four primary corners of the square outside the circle and one of the quadrant circles, the three primary colors of the RGB color system, the three primary colors of the CMY color system, and the basic color of the Lab color system A color correction method, wherein at least one of white, gray and black color materials is applied to the other. 請求項において、前記基材表面の正方形の全域を、前記円の4等分線に重畳してマス目状に区画したことを特徴とする色補正方法。7. The color correction method according to claim 6 , wherein the entire square area of the surface of the base material is partitioned into squares so as to overlap the quadrant of the circle. 請求項において、前記基材表面における前記円内の少なくとも1つの4等分円を、該円の4等分線に重畳して、マス目状に区画したことを特徴とする色補正方法。The color correction method according to claim 6 , wherein at least one quadrant in the circle on the surface of the base material is divided into squares by being superimposed on a quadrant of the circle. 請求項乃至のいずれかにおいて、前記マス目状の各区画の一辺の長さを同一寸法としたことを特徴とする色補正方法。In any one of claims 5 to 8, a color correction method characterized by the length of the grid-like side of each compartment were the same size. 請求項乃至のいずれかにおいて、前記基材表面は、前記被写体の表面と略等しい凹凸、色の材料から構成されたことを特徴とする色補正方法。In any one of claims 5 to 9, wherein the substrate surface is substantially equal to irregularities and surface of the object, color correction method characterized in that it is constituted from the color of the material. 請求項乃至のいずれかにおいて、前記基材表面は、人の皮膚と略等しい凹凸、色の材料から構成されたことを特徴とする色補正方法。In any one of claims 5 to 9, wherein the substrate surface is approximately equal irregularities with human skin, the color correction method which is characterized in that it is constituted from the color of the material.
JP09215696A 1995-04-14 1996-04-15 Color correction method Expired - Fee Related JP3763880B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP09215696A JP3763880B2 (en) 1995-04-14 1996-04-15 Color correction method

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP8909895 1995-04-14
JP7-89098 1995-04-14
JP09215696A JP3763880B2 (en) 1995-04-14 1996-04-15 Color correction method

Publications (2)

Publication Number Publication Date
JPH095164A JPH095164A (en) 1997-01-10
JP3763880B2 true JP3763880B2 (en) 2006-04-05

Family

ID=26430530

Family Applications (1)

Application Number Title Priority Date Filing Date
JP09215696A Expired - Fee Related JP3763880B2 (en) 1995-04-14 1996-04-15 Color correction method

Country Status (1)

Country Link
JP (1) JP3763880B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008136518A (en) * 2006-11-30 2008-06-19 Pola Chem Ind Inc Method for forming skin image used for discriminating between overlaying and infiltration of pigment cell
KR20160001252A (en) * 2014-06-27 2016-01-06 이화여자대학교 산학협력단 A device and method for wound management

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1202209B1 (en) * 2000-04-21 2012-03-21 Shiseido Company Limited Makeup counseling apparatus
JP2010520551A (en) * 2007-03-08 2010-06-10 ヒューレット−パッカード デベロップメント カンパニー エル.ピー. Method and system for recommending products based on skin color estimated from images
JP2008231643A (en) * 2007-03-23 2008-10-02 Teijin Fibers Ltd Method and apparatus for producing light interfering fiber
JP5149527B2 (en) * 2007-03-29 2013-02-20 常盤薬品工業株式会社 How to display skin pigmentation
KR101242216B1 (en) * 2009-12-18 2013-03-19 민의기 A manufacturing method of optical parameter adjusting-card for photograph correction
KR101242215B1 (en) * 2009-12-18 2013-03-13 민의기 Optical parameter adjusting-card for photograph correction
KR101310216B1 (en) * 2009-12-21 2013-09-24 한국전자통신연구원 Apparatus and method for converting color of images cinematograph
JP6151077B2 (en) * 2013-04-19 2017-06-21 大和ハウス工業株式会社 Deterioration judgment method for exterior materials

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008136518A (en) * 2006-11-30 2008-06-19 Pola Chem Ind Inc Method for forming skin image used for discriminating between overlaying and infiltration of pigment cell
KR20160001252A (en) * 2014-06-27 2016-01-06 이화여자대학교 산학협력단 A device and method for wound management
KR102200753B1 (en) * 2014-06-27 2021-01-11 이화여자대학교 산학협력단 A device and method for wound management

Also Published As

Publication number Publication date
JPH095164A (en) 1997-01-10

Similar Documents

Publication Publication Date Title
US5852675A (en) Color chart for image correction and method of color correction
JP6254826B2 (en) Camera system, color conversion apparatus and method used therefor, and color conversion program
TW577727B (en) Method for measuring changes in portions of a human body
CN106068092B (en) Image processing apparatus
JP3763880B2 (en) Color correction method
CN107582085A (en) A kind of apparatus and method of intelligent digital X-ray exposure control
JP2004023784A (en) Method and device for generating calibration data for digital camera
US20100020164A1 (en) Surface Analysis Method and System
US11094085B2 (en) System comprising a color selection aid and a method for determining tooth colors
CN106408664A (en) Three-dimensional model curved surface reconstruction method based on three-dimensional scanning device
KR20210139345A (en) Methods for providing natural color and optical depth to dental objects
JP2008167853A (en) Test sheet, object diagnostic apparatus and method, and program
WO2000057786A1 (en) X-ray camera
JP3863963B2 (en) Digital data correction and storage method and apparatus for X-ray image
CN108876740A (en) A kind of more exposure registration methods based on ghost removal
Snow Assessing and achieving accuracy in digital dental photography
JP3378518B2 (en) Fundus image luminance correction method, device thereof, and recording medium recording program thereof
JP3683329B2 (en) Device for superimposing moire topographic image information on thermographic image information of a subject
JP2006350621A (en) Image processor and image processing program
KR20220049465A (en) Comparison of color images of three-dimensional dental structures
JP2002010283A (en) Display method and processor for face image
JPH0996565A (en) Color chart for image recording
JP2018159703A (en) Method for photographing three-dimensional surface shape of object
Weyrich et al. Measuring skin reflectance and subsurface scattering
Shrestha et al. Comparison between mobile camera and DSLR camera photography for the evaluation of shade of anterior teeth-A cross-sectional study

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20050608

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20050705

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050905

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20051004

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20051202

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060110

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060118

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090127

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100127

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100127

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110127

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110127

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120127

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120127

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130127

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130127

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140127

Year of fee payment: 8

LAPS Cancellation because of no payment of annual fees