JP5149527B2 - Pigmentation display method of skin - Google Patents

Pigmentation display method of skin Download PDF

Info

Publication number
JP5149527B2
JP5149527B2 JP2007086991A JP2007086991A JP5149527B2 JP 5149527 B2 JP5149527 B2 JP 5149527B2 JP 2007086991 A JP2007086991 A JP 2007086991A JP 2007086991 A JP2007086991 A JP 2007086991A JP 5149527 B2 JP5149527 B2 JP 5149527B2
Authority
JP
Grant status
Grant
Patent type
Prior art keywords
image
pigmentation
color
step
site
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2007086991A
Other languages
Japanese (ja)
Other versions
JP2008245666A (en )
Inventor
昌彦 大江
まどか 乾
Original Assignee
常盤薬品工業株式会社
株式会社ノエビア
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Grant date

Links

Images

Description

本発明は、皮膚の色素沈着評価方法、その提示方法および色素沈着の治療剤および美白剤の評価方法に関する。 The present invention, pigmentation evaluation method of the skin, method for evaluating the presentation method and pigmentation therapeutic agents and whitening agents.

シミ、ソバカスとして現れる皮膚における色素沈着は加齢または紫外線曝露等の種々の原因により発生し、その代表例は紫外線曝露後の褐色色素沈着であるメラニン色素の全身的または局部的な蓄積によるもので、老人性色素斑および日光黒子のごとき日光性色素斑ならびに雀卵斑等が知られている。 Stains, pigmentation in the skin appearing as freckles caused by various causes, such as aging or exposure to UV radiation, a typical example is due to systemic or local accumulation of melanin pigment is a brown pigmentation after ultraviolet exposure , such as senile pigmentation spots and sun lentigines sunlight lentigo as well as Suzumetamago spots and the like are known. この色素沈着は特に女性にとって美容上の極めて深刻な問題である。 This pigmentation is especially very serious cosmetic problems for women. 色素沈着は、皮膚の皺部分、外界と接する部分、衣服等に接する部分の皮膚表面に起こりやすく、紫外線や機械的接触による刺激を原因とすることが多いことが知られている。 Pigmentation, wrinkles portion of the skin, a portion in contact with the outside world, tends to occur on the skin surface of the portion in contact with the clothes, it is known that it is often caused by stimulation with ultraviolet light or mechanical contact.
このようなシミ、ソバカスとして現れる色素沈着を視覚化および数値化することにより正確に評価する要求が特に美容分野および皮膚治療分野において存在している。 Such stains, a request to evaluate accurately by visualizing and quantifying the pigmentation appear as freckles is present, particularly in the cosmetics field, and skin treatment field.

しかしながら、皮膚における色素沈着の評価において、種々の評価方法が試みられているが皮膚の微弱な炎症や血行の変化によって色素沈着部位の明度が変化し評価が一定しないことが多い。 However, in the evaluation of pigmentation in the skin, often Various evaluation methods have been attempted lightness pigmentation site is changed by a change in a weak inflammation and blood circulation evaluation of skin is not constant. また、美白剤の評価をする場合、ヘモグロビンの変動に影響されずメラニンの増減のみを評価したいというニーズがあった。 Further, in the case of the evaluation of the whitening agent, there is a need to be evaluated only the increase or decrease of melanin without being affected by the fluctuation of hemoglobin.

川口らは、分光画像の画像分析によって色素沈着部位の画像を再構成し、皮膚色の濃淡を評価する方法を報告している。 Kawaguchi et al., By image analysis of the spectral image to reconstruct an image of pigmentation sites have reported a method of evaluating the density of the skin color. ただ、この方法は、事前に数多くの色素沈着の分光反射率を基礎データとして採取し、皮膚の分光反射率(400〜700nm、10nm間隔、31波長点)の波長間の反射率データを用いて主成分分析を行い、皮膚の分光反射率構成因子の固有スペクトルを算出する必要があるなど煩雑さが課題とされていた。 However, this method, the spectral reflectance of pre numerous pigmented taken as basic data, using the reflectance data between the wavelengths of the spectral reflectance of the skin (400 to 700 nm, 10 nm spacing, 31 wavelengths point) perform principal component analysis, such complication is necessary to calculate the intrinsic spectrum of the spectral reflectance structure factor of the skin has been a problem. また、メラニンの存在部位を相対的に浅い位置および深い位置の2種にしか分類できない(非特許文献1)。 Moreover, it can not be classified in only two relatively shallow location and deeper presence site of melanin (Non-Patent Document 1).

滝脇らは、カラー画像をR(赤)、G(緑)、B(青)チャネルに色分解したR画像を用いて、logR反転画像の平均輝度値をメラニン指数とする方法を提案している。 Takinowaki et al, a color image of R (red), G (green), B (blue) by using the R image color separation channel, proposes a method to melanin index an average luminance value of logR reverse image . これは、色素沈着物質であるメラニンが、BGR領域においてある範囲の吸収係数を有し、R領域においても減衰せず、一方、ヘモグロビンの還元型(Hb)および酸化型(HbO )は、BおよびG領域に吸収係数の極大を有し、R領域において減衰することによる(図1)。 This melanin is pigmented material has an absorption coefficient in the range with the BGR region, without attenuation even in R region, whereas, hemoglobin reduced form (Hb) and oxidized (HbO 2) is, B and G regions has a maximum absorption coefficient, due to attenuation in the R region (Figure 1). この方法は、事前処理が必要ではなく簡易にヘモグロビンとメラニンを分離でき、メラニンを数値化する方法としては実用的である。 This method is simply not necessary preprocessing can separate hemoglobin and melanin, is practical as a method to quantify the melanin.
しかしながら、データがlogR反転画像であるため色素沈着の色が白黒が逆転して表示されることから、一般の人に美白剤の使用前後の写真からは分かり難く、カウンセリングなどにおいてデータを応用しにくいといった課題があった。 However, since the color of pigmentation for data is logR reversed image is displayed in reversed black and white, the general public obscuring from around the use of whitening agents photo, difficult to apply data in counseling there is a problem. また、評価方法として、矩形の一定面積を平均化処置するため、色素沈着部位の大きさ、分布等の細かい評価が可能ではない。 Further, as an evaluation method, for averaging treat certain area of ​​the rectangle, the size of the pigmentation sites, fine evaluation is not possible with such distribution. (非特許文献2) (Non-Patent Document 2)

より詳細には、滝脇らの手法は、以下の評価範囲および画像処理を行う。 More particularly, Takinowaki's method is to evaluate the range and image processing follows. 評価範囲として、取り込み画像の広範囲の部位(眼下のクマや頬骨の部分など)を1点として扱い評価し、画像処理後は数値データのみが示される。 As evaluation range, and treats evaluate a wide range of sites of captured images (such as the portion of the undereye bear and cheekbones) as 1 point, after the image processing, only numeric data is shown. 従って、イメージデータではないため、シミの大きさや散らばりの頻度などを視覚的に捉えることができない。 Accordingly, since it is not the image data, it can not be captured, including frequency of stain size and scattered visually. また、画像処理について、logRの反転画像(ネガイメージ)を提供できるが、シミやクマなどの明度の低い部分ほど高明度(白く)表示されるため、一般ユーザーには直感的に、シミ、ソバカスおよびクマのイメージとして捉え難い。 Further, the image processing, can provide a reverse image (negative image) of logR, for as low portion of lightness of the stains and dark circles appear high brightness (white), the general users intuitively, stains, freckles and hardly regarded as a bear image. また、一律にlogRの反転処理を行うため、ベースとなる肌色の濃淡によって、シミ、ソバカスおよびクマの部位を捉え難くなるという欠点を有する。 Also, in order to perform inversion processing of logR uniformly, with the skin color of gray as a base, stains, the disadvantage of not easily caught site of freckles and dark circles.

本発明の目的は、より簡便でかつ視覚化可能な皮膚の色素沈着の評価方法、その提示方法、および色素沈着の治療剤および美白剤の評価方法を提供することである。 An object of the present invention is to provide a more convenient and method Evaluation of pigmentation can be visualized skin, the evaluation method of the present methods, and pigmentation of the therapeutic agents and whitening agents.

本発明者らは、上記目的を達成するため鋭意検討した結果、特定の手段および画像処理方法を用いることにより、簡便に皮膚の色素沈着部位を視覚化でき、色素沈着の改善率を数値として算出できることを見出し、本発明を完成させた。 The present inventors have calculated a result of intensive investigations to achieve the above objects, by using a specific means and an image processing method, conveniently visualize pigmentation sites of the skin, the improvement of pigmentation as a number heading to be able to, it has led to the completion of the present invention. より詳細には、本発明により、簡便にメラニンによる色素沈着の色の濃さや面積を評価でき、色素沈着部位のメラニンの増減を白黒の色のグラデーションによって容易に理解可能に可視化(画像化)でき、色素沈着の改善率を数値として算出でき、また、メラニンの増減を視覚化できるために、色素沈着の治療剤および美白剤の効果の提示が可能となった。 More particularly, the present invention conveniently can evaluate the density and area of ​​the color pigmentation by melanin readily understandable to be visualized (imaging) by the color gradation of black and white to increase or decrease the melanin pigmentation sites , can be calculated improvement of pigmentation as a number, also, in order to visualize the changes in melanin it allowed the presentation of the effect of therapeutic agents and whitening agents pigmentation.

すなわち、本発明は以下を提供するものである。 That is, the present invention provides the following.
1. 1. 第1の態様 (1)ヒトの皮膚評価部位における色素沈着の評価方法であって、 The first aspect (1) A method for evaluating the pigmentation in the skin evaluation site of human,
a)2枚の偏光フィルターを直交させて装着したカメラを用いて、拡散反射画像として該評価部位およびホワイトバランス調整用カラーチャートのカラー画像を同時に得; a) using the by orthogonal two polarizing filter camera mounted at the same time to obtain a color image of the evaluation site and a color chart for white balance adjustment as diffuse reflection image;
b)該カラーチャートのカラー画像に基づき、得られた該カラー画像のホワイトバランスを調整し; b) based on the color image of the color chart, to adjust the white balance of the obtained the color image;
c)その調整後のカラー画像をRGBに分解し; c) decomposing the color image after the adjustment to RGB;
d)R画像のコントラストを強調させ; d) to enhance the contrast of the R image;
e)該評価部位における背景を減算処理して、色素沈着部位およびその色素沈着の色の濃さをグレーレベルの各ピクセルよりなる画像として抽出し; And subtracting the background in e) the evaluation site, it extracts the color intensity of pigmented site and its pigmentation as an image composed of each pixel of the gray levels;
f)この抽出後の画像を2値化処理して、各ピクセルを白または黒として表示することによりその色素沈着部位を明確化し;次いで g)明確化された色素沈着部位の面積を色素沈着を表すピクセル数にて算出して数値として表示する、および/または明確化された色素沈着部位を画像として表示する工程を含むことを特徴とする該評価方法。 The then g) the area pigmentation clarity dye deposition site; f) the image after the extracted binarized, clarifies the pigmentation site by displaying each pixel as black or white the evaluation method characterized by comprising the step of displaying to be displayed as numerical values ​​calculated by the pixel number, and / or clarification dye deposition site as an image representing.
(2)前記(1)の工程e)において、さらに、各ピクセルのグレーレベルから平均輝度値が算出され、かつその平均輝度値が、工程g)において表示されることを特徴とする (1)記載の評価方法。 In step e) of (2) above (1), further, the calculated average luminance value from the gray level of each pixel, and the mean luminance value, characterized in that it is displayed in step g) (1) evaluation method described.
(3)該皮膚評価部位が顔であることを特徴とする(1)または(2)記載の評価方法。 (3) the skin evaluation site is characterized in that a face (1) or (2) evaluation method according.
(4) 該2値化処理が、黒から白の順序の0〜255グレーレベルのうち、 (4) said binarization, of 0 to 255 gray levels white order from black,
200〜240の範囲のグレーレベルで行われることを特徴とする(1)〜(3)いずれか1記載の評価方法。 Characterized in that it is carried out at the gray level in the range of 200 to 240 (1) to (3) Evaluation method as claimed in any one.
(5)前記(1)の工程b)〜f)の各工程が、デジタル画像編集用および画像処理用ソフトウェアを用いて行われる(1)〜(4)いずれか1記載の評価方法。 (5) wherein (1) each process step b) ~f) of is carried out using a digital image editing and image processing software (1) to (4) Evaluation Method as claimed in any one.
(6)前記(1)の工程b)、f)およびg)がデジタル画像編集用ソフトウェアを用いて行われ、かつ工程c)、d)およびe)がデジタル画像処理用ソフトウェアを用いて行われることを特徴とする(5)記載の評価方法。 (6) the (1) step b) of, f) and g) are performed using a software for digital imaging, and step c), d) and e) is performed using the software for digital image processing characterized in that (5) evaluation method according.

2. 2. 第2の態様 (7) 皮膚における色素沈着の程度のヒトに対する提示方法であって、 The second aspect (7) A presentation method for human in the degree of pigmentation in the skin,
a)2枚の偏光フィルターを直交させて装着したカメラを用いて、拡散反射画像として該評価部位およびホワイトバランス調整用カラーチャートのカラー画像を同時に得; a) using the by orthogonal two polarizing filter camera mounted at the same time to obtain a color image of the evaluation site and a color chart for white balance adjustment as diffuse reflection image;
b)該カラーチャートのカラー画像に基づき、得られた該カラー画像のホワイトバランスを調整し; b) based on the color image of the color chart, to adjust the white balance of the obtained the color image;
c)その調整後のカラー画像をRGBに分解し; c) decomposing the color image after the adjustment to RGB;
d)R画像のコントラストを強調させ; d) to enhance the contrast of the R image;
e)該評価部位における背景を減算処理して、色素沈着部位およびその色素沈着の色の濃さをグレーレベルの各ピクセルよりなる画像として抽出し; And subtracting the background in e) the evaluation site, it extracts the color intensity of pigmented site and its pigmentation as an image composed of each pixel of the gray levels;
f)この抽出後の画像を2値化処理して、各ピクセルを白または黒として表示することによりその色素沈着部位を明確化し;次いで g)明確化された色素沈着部位の面積を色素沈着を表すピクセル数にて算出し;次いで h)表示装置を用いて、数値としての工程g)で得られた明確化された色素沈着部位の面積、および/または画像としての工程f)で得られた明確化された色素沈着部位を該ヒトに視覚的に提示する工程を含むことを特徴とする該方法。 The then g) the area pigmentation clarity dye deposition site; f) the image after the extracted binarized, clarifies the pigmentation site by displaying each pixel as black or white calculated by the number of pixels representing; then h) using a display device, obtained in step f) the area of ​​the resulting clarified dye deposition site in step g) as a numerical value, and / or as an image It said method characterized by comprising the step of visually presenting the clarified dye deposition site in the human.
(8) 前記(7)の工程e)において、さらに、各ピクセルのグレーレベルから平均輝度値が算出され、かつその平均輝度値が、工程h)において該ヒトに提示されることを特徴とする(7)記載の提示方法。 (8) In the above (7) Step e) of further calculated average luminance value from the gray level of each pixel, and the mean luminance value, characterized in that it is presented to the person in step h) (7) method of presenting described.
(9) 前記(7)の工程a)〜g)が、異なる時点にて少なくとも2回実施される結果、工程h)において比較して提示されることを特徴とする(7)または(8)記載の提示方法。 (9) said step a) to g of (7)) is the result to be performed at least twice at different times, characterized in that it is presented in comparison in step h) (7) or (8) presentation method described.
(10) 使用した色素沈着の治療剤および/または美白剤の効果を提示するために行われることを特徴とする(7)〜(9)いずれか1記載の提示方法。 (10) carried out that in order to present the therapeutic agent and / or effect of whitening pigmentation used and wherein (7) to (9) the method presented as claimed in any one.
(11) 該皮膚評価部位が顔であることを特徴とする(7)〜(10)いずれか1記載の提示方法。 (11) said skin rating site is characterized by a face (7) to (10) the presentation of any one described.
(12) 該2値化処理が、黒から白の順序の0〜255グレーレベルのうち、 (12) said binarization, of 0 to 255 gray levels white order from black,
200〜240の範囲のグレーレベルで行われることを特徴とする(7)〜(11)いずれか1記載の提示方法。 Characterized in that it is carried out at the gray level in the range of 200 to 240 (7) to (11) the presentation of any one described.
(13) 前記(7)の工程b)〜f)の各工程が、デジタル画像編集用および画像処理用ソフトウェアを用いて行われることを特徴とする(7)〜(12)いずれか1記載の評価方法。 (13) Step b) ~f) each step of the (7), characterized in that is carried out using a digital image editing and image processing software (7) to (12) as claimed in any one Evaluation method.
(14) 前記(7)のの工程b)、f)およびg)がデジタル画像編集用ソフトウェアを用いて行われ、かつ工程c)、d)およびe)がデジタル画像処理用ソフトウェアを用いて行われることを特徴とする(13)記載の評価方法。 Step b The (14) said (7)), f) and g) are performed using a software for digital imaging, and step c), d) and e) line using software for digital image processing and wherein the dividing (13) evaluation method according.

3. 3. 第3の態様 (15) 被験体の皮膚評価部位における色素沈着の治療剤および/または美白剤の評価方法であって、 A third aspect (15) therapeutic agent for pigmentation in the skin evaluation site in a subject and / or whitening evaluation method,
a)2枚の偏光フィルターを直交させて装着したカメラを用いて、拡散反射画像として該評価部位およびホワイトバランス調整用カラーチャートのカラー画像を同時に得; a) using the by orthogonal two polarizing filter camera mounted at the same time to obtain a color image of the evaluation site and a color chart for white balance adjustment as diffuse reflection image;
b)該カラーチャートのカラー画像に基づき、得られた該カラー画像のホワイトバランスを調整し; b) based on the color image of the color chart, to adjust the white balance of the obtained the color image;
c)その調整後のカラー画像をRGBに分解し; c) decomposing the color image after the adjustment to RGB;
d)R画像のコントラストを強調させ; d) to enhance the contrast of the R image;
e)該評価部位における背景を減算処理して、色素沈着部位およびその色素沈着の色の濃さをグレーレベルの各ピクセルよりなる画像として抽出し; And subtracting the background in e) the evaluation site, it extracts the color intensity of pigmented site and its pigmentation as an image composed of each pixel of the gray levels;
f)この抽出後の画像を2値化処理して、各ピクセルを白または黒として表示することによりその色素沈着部位を明確化し;次いで g)明確化された色素沈着部位の面積を色素沈着を表すピクセル数にて算出して数値として表示する、および/または明確化された色素沈着部位を画像として表示する工程を含み、上記a)〜g)の工程が異なる時点にて少なくとも2回実施される結果、工程gにおいて比較されることを特徴とする該評価方法。 The then g) the area pigmentation clarity dye deposition site; f) the image after the extracted binarized, clarifies the pigmentation site by displaying each pixel as black or white displayed as numerical values ​​calculated by the pixel number representing, and includes a step of displaying / or clarification dye deposition site as an image, the a) to g) of the process is performed at least twice at different time points that result, the evaluation method, characterized in that it is compared in step g.
(16) 前記(15)の工程e)において、さらに、各ピクセルのグレーレベルから平均輝度値が算出され、かつその平均輝度値が、比較されることを特徴とする(15)記載の評価方法。 (16) In step e) of the (15), further, the average luminance value is calculated from the gray level of each pixel, and the evaluation method of the average luminance value, characterized in that it is compared (15), wherein .
(17) 該被験体がヒトであって、該皮膚評価部位が顔であることを特徴とする(15)または(16)記載の評価方法。 (17) a said subject is a human, the skin evaluation site is characterized by a face (15) or (16) Evaluation method according.
(18) 該2値化処理が、黒から白の順序の0〜255グレーレベルのうち、 (18) said binarization, of 0 to 255 gray levels white order from black,
200〜240の範囲のグレーレベルで行われることを特徴とする(15)〜(17)いずれか1記載の評価方法。 Characterized in that it is carried out at the gray levels in the range of 200 to 240 (15) - (17) Evaluation method as claimed in any one.
(19) 前記(15)の工程b)〜f)の各工程が、デジタル画像編集用および画像処理用ソフトウェアを用いて行われることを特徴とする(15)〜(18)いずれか1記載の評価方法。 (19) said step b) ~f) the steps of (15), using a digital image editing and image processing software characterized by being carried out (15) to (18) as claimed in any one Evaluation method.
(20) 前記(15)の工程b)、f)およびg)デジタル画像編集用ソフトウェアを用いて行われ、かつ工程c)、d)およびe)がデジタル画像処理用ソフトウェアを用いて行われることを特徴とする(19)記載の評価方法。 (20) said step b (15)), f) and g) are performed using a digital image editing software, and step c), d) and e) that is performed using the software for digital image processing the constitution (19) evaluation method according.

本発明により、シミやソバカスが実イメージに近い画像イメージとなるため、数値データと合わせて、シミやソバカスの大きさや散らばりの程度や頻度なども視覚的に捉えることができ、また、院内での治療剤の治療効果説明や化粧品販売時のカウンセリング等に際して、色素沈着の色の濃さや面積の変化を数値や画像で伝えることができる。 The present invention, since the spots and freckles is picture image close to the actual image, together with numerical data, spots and freckles including the extent and frequency of the size and scattered also be grasped visually, also in hospital in the therapeutic effect described and cosmetics counseling during sales of therapeutic agents, can convey a change in density and area of ​​the color pigmentation in numerical values ​​or image.

本発明を以下に詳細に説明する。 The present invention will be described in detail below.
本発明の第1〜3の態様に用いた「皮膚評価部位」とは、皮膚における色素沈着部位を含む評価の対象となる部位をいい、ヒトの皮膚の全体もしくは一部分であれば特に限定されるものではないが、好ましくは顔、腕、足のごとき外部から観察可能な部位、より好ましくは顔である。 The "skin evaluation site" used in the first to third aspect of the present invention refers to a site to be evaluated, including the pigmentation sites in the skin, is limited particularly as long as the whole or a portion of human skin Although not, preferably the face, arms, observable from the foot, such as an external site, more preferably face.

本発明の第1の態様では、ヒトの皮膚評価部位における色素沈着の評価方法が提供される。 In a first aspect of the present invention, method for evaluating the pigmentation in the skin evaluation site man.
まず、第1の態様における工程a)では、2枚の偏光フィルターを直交させて装着したカメラを用いて、拡散反射画像として該評価部位およびホワイトバランス調整用カラーチャートのカラー画像を同時に得る。 First obtained in step a) in the first embodiment, by using the two polarizing filters camera are perpendicular to the mounting, and the color image of the evaluation site and a color chart for white balance adjustment as diffuse reflection image at the same time.

工程a)における「2枚の偏光フィルターを直交させて装着したカメラ」とは、偏光フィルターの装着に際して、2枚の偏光フィルターを直交させて装着した、デジタル方式で画像を録画または保存および再生が可能なビデオカメラ、デジタルカメラのごときカメラをいう。 The "two polarizing filters camera are perpendicular wearing the" in step a), upon mounting of the polarizing filter was mounted by orthogonal two polarizing filters, the recording or storage and reproducing images digitally possible video camera, refers to a digital camera, such as camera. より好ましいカメラは、顔写真専用撮影ミニスタジオ VISIA-CRである。 More preferred camera is a face photograph only shooting mini studio VISIA-CR. 偏光フィルターは、当該偏光フィルターを用いることにより、拡散反射画像としてカラー画像を得ることができるものであれば、特に限定されない。 Polarizing filter, by using the polarizing filter, as long as it is possible to obtain a color image as diffuse reflection image is not particularly limited.

工程a)における「ホワイトバランス調整用カラーチャート」とは、画像の色調を一定水準に補正するために市販または作製されたカラーチャートであり、画像のR/G/Bの出力レベルが同一に成るよう調整できる、すなわち、ホワイトバランス調整が可能なものであれば特に限定されない。 The "white balance adjusting color chart" in step a), a commercially available or prepared color chart in order to correct the color tone of the image to a certain level, the output level of the R / G / B image is made in the same It is adjusted, i.e., not particularly limited as long as it can be the white balance adjustment. 好ましくは、Casmatch(大日本印刷社製)を用いてもよい。 Preferably, it may be used Casmatch (manufactured by Dai Nippon Printing Co., Ltd.).
このようなホワイトバランス調整用カラーチャートを同時に用いて、偏光フィルターを装着したカメラにより皮膚評価部位の画像を拡散反射画像として得る。 Using such a color chart for white balance adjustment simultaneously obtain an image of the skin evaluation sites as diffuse reflection image by a camera equipped with a polarizing filter.

次に、b)該カラーチャートのカラー画像に基づき、得られた該カラー画像のホワイトバランスを調整する。 Then, b) based on the color image of the color chart, to adjust the white balance of the obtained the color image.
工程b)では、画像処理分野において、一般的に用いられる、光源に応じた白の基準をベースとして画像全体の色を補正する。 In step b), in the image processing field, commonly used to correct the color of the entire image the reference for white in accordance with the light source as a base. 具体例には、画像中のカラーチャートの色度をデジタル画像編集用ソフトウェアで測色し、カラーチャート固有の色度と一致させるように、画像のR/G/B出力レベルの補正を行う。 Examples include the chromaticity of the color chart in the image and color measurement by the digital image editing software, to match the color chart specific chromaticity performs R / G / B output level correction of the image. このホワイトバランスの調整には、デジタル画像編集用ソフトウェア、好ましくはPhotoshop R (アドビ社製)を用いてもよい。 The adjustment of the white balance, digital image editing software, preferably may be used Photoshop R (manufactured by Adobe). また、このホワイトバランスの調整は、カメラ自体のオートホワイトバランス機能により行ってもよい。 Also, adjustment of the white balance may be performed by the auto white balance function of the camera itself.
このようにしてホワイトバランスが調整されたカラー画像を以下の画像分析に用いる。 Thus used in the following image analysis color image which the white balance is adjusted.

工程c)では、画像処理分野において一般的な手法を用いてカラー画像をR(赤)、G(緑)、B(青)の各色に分解する。 In step c), it decomposes the color image using the general procedure in the image processing field R (red), the respective colors of G (green), B (blue). このカラー画像のRGBへの分解に関して、赤間ら(画像情報処理の基礎、技報堂出版、第4章画像処理の基礎、2006)の総説に詳しく記載されている。 For degradation of the RGB of the color image, Akama et al (basic image processing, Gihodo Publishing, basal Chapter 4 image processing, 2006) is described in detail in the review of. このRGBへの分解には、デジタル画像処理用ソフトウェア、好ましくはフリーソフトのImageJ(バイオアーツ社製)を用いてもよい。 The decomposition into this RGB, digital image processing software, preferably may be used free software ImageJ (Bio Arts Inc.).

次に、工程d)では、このようにして得られたRGBへの分解後の画像につき、画像処理分野において一般的に用いられる方法を用いて、R画像だけのコントラストを強調させる。 Next, in step d), this way per image after decomposition into the resulting RGB by using a commonly used method in the field of image processing, to emphasize the contrast of only the R image. R画像のコントラストを強調には、赤間ら(画像情報処理の基礎、技報堂出版、第4章画像処理の基礎、2006)の総説に記載されるごとく、ヒストグラム変換、線形変換、非線形変換等の種々の方法が存在するが、画素の濃度変換により画像のコントラストを高めるものであれば特に限定されない。 To enhance the contrast of the R image, Akama et al (basic image processing, Gihodo Publishing, basal Chapter 4 image processing, 2006) as described in the review of the histogram conversion, linear conversion, various such nonlinear transformation there are methods, but is not particularly limited as long as it enhances the contrast of the image by the density conversion of the pixel. 具体例には、ヒストグラム変換をいう。 Specific examples refers to the histogram conversion. このR画像のコントラストの強調には、デジタル画像処理用ソフトウェア、好ましくはImageJ(バイオアーツ社製)を用いてもよい。 The contrast enhancement of the R image, the digital image processing software, preferably may be used ImageJ (Bio Arts Inc.).

工程e)では、色素沈着部位の抽出を行うために、前記工程d)により得られたR画像につき背景を減算処理する。 In step e), in order to perform the extraction of the pigmentation sites to subtracting the background every resulting R image by the step d). 具体的には、Stanley Sternbergら(Biomedical Image Processing, IEEE Computer, pp. 22-34, January, 1983)の総説に記載されるごとく、ローリングボールアルゴリズムに基づく減算処理を行う。 Specifically, Stanley Sternberg et al (Biomedical Image Processing, IEEE Computer, pp. 22-34, January, 1983) as described in the review of, it performs subtraction processing based on the rolling ball algorithm. 背景の減算処理には、デジタル画像処理用ソフトウェア、好ましくはImageJ(バイオアーツ社製)を用いてもよい。 The subtraction process of background, digital image processing software, preferably may be used ImageJ (Bio Arts Inc.).

次に、工程f)では、このようにして得られた減算処理後のR画像につき、2値化処理を行う。 Next, in step f), per thus obtained subtraction processed of the R image, performs binarization processing. 「2値化処理」とは、画像処理分野において一般的に用いられる閾値処理により行われるものをいう。 The "binarization processing", refers to those performed by commonly thresholding used in the field of image processing. 2値化処理は、赤間ら(画像情報処理の基礎、技報堂出版、第4章画像処理の基礎、2006)に詳しく記載されている。 Binarization, Akama et al (basic image processing, Gihodo Publishing, basal Chapter 4 image processing, 2006) is described in detail in. この2値化処理には、デジタル画像編集用ソフトウェア、好ましくはPhotoshop R (アドビ社製)を用いてもよい。 The binarization processing, digital image editing software, preferably may be used Photoshop R (manufactured by Adobe). 2値化処理は、シミ、ソバカス、皺、凹凸等を含めたヒトの皮膚状態に依存して、0〜255グレーレベルを選択できるが、本願発明の色素沈着の評価には好ましくは、200〜240、より好ましくは205〜235、最も好ましくは210〜230の範囲のグレーレベルで行われる。 Binarization, stains, freckles, wrinkles, depending on the skin condition of the person, including irregularities, etc., can be selected to 0-255 gray levels, the evaluation of the pigmentation of the present invention is preferably 200 to 240, more preferably 205 to 235, and most preferably at a gray level ranging from 210 to 230. この2値化処理により、画像の各ピクセルは白または黒で表示され、それにより、色素沈着部位は明確化される。 The binarization processing, each pixel of the image is displayed in white or black, whereby pigmentation sites are clarified.

次に、工程g)では、このようにして得られた明確化された色素沈着部位の面積を色素沈着を表すピクセル数にて算出して数値として表示する、および/または明確化された色素沈着部位を画像として表示する。 Next, in step g), and displays such an area of ​​the resultant clarified dye deposition site in the numerically with calculated by the number of pixels representing pigmentation, and / or clarified by pigmentation to view the site as an image.
工程g)における「ピクセル数」とは、画像処理分野において一般的に用いられる画素数をいい、赤間ら(画像情報処理の基礎、技報堂出版、第3章画像の扱い、2006)の総説に詳しく記載されている。 Step g) The "number of pixels" in refers to the number of pixels to be commonly used in the field of image processing, the basis of Akama et al. (Image information processing, Gihodo Publishing, Chapter 3 image handling, in detail in the review of 2006) Are listed. このピクセル数での色素沈着部位の面積の算出には、画像のヒストグラムを得、黒色(グレーレベル0)で示されたピクセル数の総和の値を求める。 The calculation of the area of ​​pigmentation sites of the number of the pixels to obtain a histogram of the image, obtaining the value of the sum of the number of pixels indicated in black (gray level 0). このピクセル数による色素沈着部位の面積には、デジタル画像編集用ソフトウェア、好ましくはPhotoshop R (アドビ社製)を用いてもよい。 The area of the pigmentation sites by this number of pixels, digital image editing software, preferably may be used Photoshop R (manufactured by Adobe). また、工程f)により明確化された色素沈着部位を、単独または前記の色素沈着部位の面積の数値と共に、画像処理分野において使用される表示装置を用いて表示させてもよい。 Further, the clarified dye deposition site by step f), either alone or with numeric area of ​​the pigmentation sites may be displayed using a display device used in an image processing field. あるいは、明確化された色素沈着部位の画像のみを該表示装置を用いて表示させてもよい。 Alternatively, only clarified dye deposition site of the image may be displayed by using the display device.

さらに、この態様において、工程e)にて、各ピクセルのグレーレベルから平均輝度値を算出し、その平均輝度値を比較してもよい。 Further, in this embodiment, in step e), calculates the average luminance value from the gray level of each pixel may be compared with the average luminance value.
本明細書に用いた「平均輝度値」とは、指定範囲における総画素数のグレーレベルの平均値をいう。 The "average brightness value" as used herein, refers to the average value of the gray level of the total number of pixels in the specified range. 具体例には、各グレーレベルごとに、グレーレベルの値(0〜255)に相当する画素数を乗じた積を求め、これら積の総和を総画素数で除することにより算出できる。 Specific examples, for each gray level, calculated the product obtained by multiplying the number of pixels corresponding to the gray level value (0-255), it can be calculated by dividing the sum of these products the total number of pixels.

また、本発明の第2の態様では、ヒトに対する皮膚における色素沈着の程度の提示方法が提供される。 In the second aspect of the present invention, the presentation of the degree of pigmentation in the skin to man.
この第2の態様における工程a)〜f)は、前記の第1の態様における工程a)〜f)と同じ工程であるので、それらの工程の説明を省略する。 Step a) ~f) in the second aspect, since in step a) ~f) the same process in the first embodiment described above, description thereof will be omitted for those steps.
このような工程f)により得られた明確化された色素沈着部位の画像に基づき、工程g)では、色素沈着部位の面積を色素沈着を表すピクセル数にて算出する。 Based on such step f) clarification dye deposition site obtained by the image, in step g), to calculate the area of ​​the pigmentation sites in pixels, of the pigmentation. 工程g)における「ピクセル数」は、前記の第1の態様における工程g)における定義に同じであり、同様に沈着部位の面積を算出できる。 "Number of pixels" in step g) is the same as defined in step g) in the first embodiment described above, it calculates the area of ​​similarly deposition site. このピクセル数による色素沈着部位の面積には、デジタル画像編集用ソフトウェア、好ましくはPhotoshop R (アドビ社製)を用いてもよい。 The area of the pigmentation sites by this number of pixels, digital image editing software, preferably may be used Photoshop R (manufactured by Adobe).

次に、工程h)では、表示装置を用いて、数値としての工程g)で得られた明確化された色素沈着部位の面積、および/または画像としての工程f)で得られた明確化された色素沈着部位を該ヒトに視覚的に提示する。 Next, in step h), using the display device, is clarified obtained in step f) the area of ​​the resulting clarified dye deposition site in step g) as a numerical value, and / or as an image the pigmentation site visually presented to the person.
工程h)における「表示装置」とは、画像処理分野において用いられる、画像および数値等を表示するCRT、液晶等のディスプレイ装置をいい、このような表示装置を用いて、工程g)で得られた明確化された色素沈着部位の面積の数値を提示する、および/または工程f)で得られた明確化された色素沈着部位の画像を視覚的に提示する。 The "display device" in the step h), is used in the field of image processing, CRT for displaying images and numerical values, it means a display apparatus such as a liquid crystal, by using such a display device, obtained in the step g) presents a number of areas of clarification dye deposition site was, and / or visually presenting an image of the resulting clarified dye deposition site in step f).

さらに、本発明の第2の態様における提示方法は、皮膚の経時的な変化あるいは色素沈着の治療剤または美白剤の効果を示すために、上記a)〜g)の工程を異なる時点にて少なくとも2回実施し、工程e)で得られる色素沈着部位の色の濃さ、面積の数値、および/または明確化された色素沈着部位の画像の結果を比較することにより、ヒトに視覚的に提示してもよい。 Furthermore, the method presented in the second aspect of the present invention, in order to show the effect of therapeutic agents or whitening of temporal changes or pigmentation of the skin, at least at different times the a) to g) of the process was performed twice, step e) in the resulting pigmented sites color strength, by comparing the results of the area numbers, and / or clarified dye deposition site of the image, visually presented to human it may be.
本明細書に用いた「異なる時点」とは、皮膚の経時的な変化あるいは色素沈着の治療剤および美白剤の評価を行うための、異なる時点、または当該治療剤の処置前および処置後のいずれの時点もいい、少なくとも2回にわたる皮膚の経時的な変化あるいはその治療または美白剤による色素沈着の程度を評価し得る時点をいう。 "Different times" as used herein, either for the evaluation of therapeutic agents and whitening agents change over time or pigmentation of the skin, different time or before and after treatment of the therapeutic agent, good time refers to the time that can assess the degree of pigmentation by temporal change or the treatment or whitening agents of the skin for at least 2 times. これらの異なる時点は、秒、分、時間、日、週間、月、年のいずれの間隔も含み得る。 These different time, in seconds, minutes, hours, day, week, month, may also include any of the interval of the year. 本発明の提示方法により、簡易にメラニンの色素沈着の面積を数値および画像としてヒトに提示できる。 The presentation method of the present invention, can be presented to the person to the area of ​​the pigmentation of melanin as a number, and an image easily.

また、本発明の第3の態様において、ヒトの皮膚評価部位における色素沈着の治療剤および美白剤の評価方法が提供される。 In the third aspect of the present invention, method for evaluating the therapeutic agent and whitening agent of pigmentation in the skin evaluation site man.
この態様に用いる色素沈着の治療剤および美白剤は、当該技術分野において一般的に用いられるものであれば特に限定されるものではない。 Therapeutic agents and whitening pigmentation used in this embodiment is not limited in particular as long as those commonly used in the art. 色素沈着の治療剤および美白剤として、ハイドロキノン、アスコルビン酸およびその各種誘導体、プランタ、コウジ酸、アルブチン、エラグ酸、カミルレエキス、ルシノール、リノール酸、トラネキサム酸、マグノリグナン、アデノシン−リン酸二ナトリウムなどが挙げられる。 As therapeutic agents and whitening agents pigmentation, hydroquinone, ascorbic acid and its various derivatives, planter, kojic acid, arbutin, ellagic acid, Kamirureekisu, rucinol, linoleic acid, tranexamic acid, Magno lignans, adenosine - such as phosphate disodium and the like. 好ましい治療剤は、ハイドロキノンである。 Preferred therapeutic agents are hydroquinone.
この第3の態様における工程a)〜g)は、前記の第1の態様における工程a)〜g)と同じ工程であるので、それらの工程の説明を省略する。 Step a) to g) in the third aspect, since in step a) to g) and the same process in the first embodiment described above, description thereof will be omitted for those steps.
この態様では、工程a)〜g)が、異なる時点にて少なくとも2回実施され、明確化された色素沈着部位の面積の数値および/または明確化された色素沈着部位を画像が比較して表示装置に表示される。 In this aspect, step a) to g) is different is performed at least two times at time, clarified numeric area pigmentation sites and / or clarified dye deposition site images are compared Display It is display device.
また、工程e)において、各ピクセルのグレーレベルから平均輝度値が算出されて、異なる時点でのその平均輝度値が比較されてもよい。 Further, in step e), is computed mean luminance values ​​from the gray level of each pixel, the average luminance value at different times may be compared.

以下、本発明を実施例により具体的に説明するが、本発明はこれらに限定されるものではない。 Following illustratively describes the invention based on examples, the present invention is not limited thereto.

実施例1 Example 1
色素沈着の評価 1)皮膚評価部位の撮影 顔写真専用撮影ミニスタジオVISIA-CR TM (CANFIELD社製)を用いて、色素沈着部位を有するヒトの顔の正面および、左右の3方向からの写真を撮影した。 Evaluation of pigmentation 1) using a skin evaluation sites photographed face photograph dedicated imaging Mini studio VISIA-CR TM (CANFIELD Co.), the front face of the person having the pigmentation site and the photo from the left and right three directions It was taken. 撮影には、該評価部位およびホワイトバランス調整用カラーチャートのカラー画像を同時に、2枚の偏光フィルターを直交させて拡散反射画像として得た。 The shooting, the color image of the evaluation site and a color chart for white balance adjustment simultaneously, as a diffuse reflection image by orthogonal two polarizing filters.
2)ホワイトバランスの調整 予めデジタル画像編集用ソフトウェアPhotoshop R (アドビ社製)の白色の基準値としてCasmatch(大日本印刷社製)カラーチャート白色部の色度を入力する。 2) Input the chromaticity of Casmatch (DNP Co.) color chart white portion as a white reference value of the adjusted pre digital image editing software Photoshop R white balance (manufactured by Adobe). 次に、上記拡散反射画像をPhotoshop R (アドビ社製)に取り込み、当該ソフトウェアのレベル補正機能にて、取り込み画像中のCasmatch(大日本印刷社製)カラーチャートの白色部位を拡散反射画像の基準白色部位として指定した。 Next, incorporation of the diffuse reflection image in Photoshop R (manufactured by Adobe), at the level correction function of the software, in the captured image Casmatch (manufactured by Dai Nippon Printing Co., Ltd.) of a white portion of the diffuse reflection image of the color chart reference It was designated as a white site.
3)カラー画像のRGBへの分解 上記2)で得られたホワイトバランス調整済み画像を、画像処理ソフトウェアImageJ(バイオアーツ社製)に取り込み、当該ソフトウェアのRGB分解機能にて、R、G、Bの各色に応じた個別の画像を得した。 The white balance adjusted image obtained in 3) decomposition above 2 to RGB color image), taken in the image processing software ImageJ (Bio Arts Co.) at RGB decomposition function of the software, R, G, B It was obtained individual images corresponding to each color.
4)R画像のコントラストの強調 上記3)で得られたR画像を、ImageJ(バイオアーツ社製)のコントラスト強調機能であるヒストグラムの平均化により、コントラストが強調された画像を得た。 The R image obtained in 4) enhancement above 3 in contrast of R image), by averaging the histogram is a contrast enhancement function of ImageJ (Bio Arts Co.) to obtain an image contrast is enhanced.
5)評価部位における減算処理 上記4)で得られたコントラスト強調画像を、ImageJ(バイオアーツ社製)の減算処理機能により、画像中の背景の減算を行った。 5) a contrast enhanced image obtained by the subtraction process 4 above) in the evaluation site, by the subtraction processing function of ImageJ (Bio Arts Inc.), was subtracted of the background in the image.
6)2値化処理 上記5)で得られた減算処置済画像を、デジタル画像編集用ソフトウェアPhotoshop R (アドビ社製)に取り込み、当該ソフトウェアの2値化機能にて、画像の2値化を行った。 Subtraction the treated image obtained in 6) binarization above 5) captures the digital image editing software Photoshop R (manufactured by Adobe), in binarization function of the software, the binary image went. また、実施例6に後記のごとく、2値化処理が、黒から白の順序の0〜255グレーレベルのうち、好ましくは、200〜240、より好ましくは205〜235、最も好ましくは210〜230の範囲のグレーレベルで行われる場合に、明確化された色素部位の画像が得られることが判明した。 Further, as described later in Example 6, binarization, among white order of 0 to 255 gray levels from black, preferably, 200 to 240, more preferably 205 to 235, most preferably 210-230 If carried out in the range gray levels, the image clarity dye sites can be obtained has been found.
7)色素沈着部位の面積の算出および表示 上記6)で得られた2値化画像について、黒色で示された色素沈着部位の画素数をPhotoshop R (アドビ社製)のヒストグラム表示機能により得、その色素沈着部位の面積を算出し、その結果を数値として表示画面に表示した。 7) obtained for the binary image obtained by the calculation and display above 6) in the area of the pigmentation sites, the number of pixels pigmentation sites indicated in black by the histogram display function of Photoshop R (manufactured by Adobe), calculating the area of ​​the pigmentation site was displayed on the display screen the results as numbers. また、前記6)で得られた2値化画像を、明確化された色素沈着部位の画像として表示画面に表示した。 Further, the binarized image obtained in the above 6), and displayed on the display screen as the clarification dye deposition site of the image. さらに、所望により、上記の色素沈着部位の面積(数値)および明確化された色素沈着部位の画像の一方のみを表示させた。 In addition, if desired, to display only one of the above areas of pigmentation sites (numeric) and clarified dye deposition site of the image.

実施例2 Example 2
皮膚色モデル(in vitro)による評価 皮膚色は主に、メラニンとヘモグロビンによって構成されることから、24穴マイクロプレートにヘモグロビンとメラニンを次の方法で層状に重ね合わせ皮膚色モデルを作成した。 Evaluation skin color by the skin color model (in vitro) is primarily from being constituted by melanin and hemoglobin, we have created a superposed skin color model hemoglobin and melanin in layers in the following way a 24-well microplate. ヘモグロビン溶液は、寒天(Nissui Agar,日水製薬社製)を1.0%溶液となるように加熱溶解させ30℃まで冷却させた後、ウマ保存血液(Hg濃度2.1g/dL,日本バイオテスト社製)を加え、各濃度(3濃度:30μL/mL,21μ/mL,14.7μ/mL)となるように調整した。 Hemoglobin solution, agar (Nissui Agar, manufactured by Nissui Pharmaceutical) After cooling to heating dissolved 30 ° C. so as to have a 1.0% solution, horse stored blood (Hg concentration 2.1 g / dL, manufactured by Nippon Biotest Co. ) was added, the concentration (3 concentration: 30μL / mL, 21μ / mL, it was adjusted to 14.7μ / mL). また、メラニン溶液は、メラニン試薬(SIGMA社製)を各濃度(6濃度:1.0mg/mL,0.7mg/mL,0.49mg/mL,0.34mg/mL,0.24mg/mL,0.17mg/mL)となるように0.5%NaOH溶液にて溶解させ調整した。 Furthermore, melanin solution melanin reagent (SIGMA Co.) each concentration (6 Concentration: 1.0mg / mL, 0.7mg / mL, 0.49mg / mL, 0.34mg / mL, 0.24mg / mL, 0.17mg / mL) become so dissolved in 0.5% NaOH solution was adjusted. 次に、各濃度のヘモグロビン溶液とメラニン溶液を、16mmの円柱セル(24穴マイクロプレートのwell)に0.3mLずつ分注し、下に白色紙を置き、メディカルニッコール(ニコン社製)を用いて写真を撮影し、実施例1に示す方法で画像処理を行い、各セル毎の平均輝度値を求めた。 Next, the hemoglobin solution and melanin solutions of each concentration, aliquoted 0.3mL into a cylindrical cell of 16 mm (well of 24-well microplate) minute, place the white paper down, with Medical Nikkor (Nikon) photographed, it performs image processing by the method shown in example 1, to obtain an average luminance value for each cell. グラフには、ヘモグロビン溶液30μL/mLおよびメラニン溶液1.0mg/mLの各溶液を、それぞれ相対濃度1.0として表した。 The graph of each solution of hemoglobin solution 30 [mu] L / mL and melanin solution 1.0 mg / mL, respectively expressed as relative density of 1.0.

試験結果 皮膚色モデルの各セル毎の平均輝度値は、ヘモグロビン量に関係なく、メラニンの濃度に依存して低下した(図2)。 Test results average luminance value for each cell in the skin color model, regardless of the amount of hemoglobin were decreased depending on the concentration of melanin (Figure 2). このことから、分光画像の解析によって、メラニンの濃さの数値化が可能であった。 Therefore, the analysis of the spectral image was possible density numbers of melanin.

実施例3 Example 3
色素沈着部位(in vivo)の色の濃さの評価 色素沈着の程度の異なる被験者(20名)を選定し、同一の色素沈着部位を一般的に用いられる分光測色計と本発明の分光画像解析(色素沈着の評価方法)との両方で測定して、色素沈着部のL*値と平均輝度値をSpearman(non-parametric)にて相関解析した。 Pigmentation sites of different subjects (20 persons) the degree of evaluation pigmentation color intensity of the (in vivo) were selected, spectrophotometer generally used the same pigmentation site and the spectral image of the present invention analysis by measuring in both the (evaluation method of pigmentation), correlated analyzing the L * value and the average luminance value of the pigmented section with Spearman (non-parametric). なお、L*値の測定は、分光測色計(ミノルタ社製CM-2002)を用いて、5ヵ所測定しその平均値を測定値とした。 It should be noted that the measurement of L * values, using a spectrophotometer (Minolta CM-2002), measured five locations was the measured value and the average value. また、色素沈着部の平均輝度値は、VISIA-CR (CANFIELD社製)により撮影した画像を実施例1に示す方法に従って解析して、色素沈着の色の濃さを平均輝度値(0-255グレーレベル)にて表した。 Further, the average luminance value of the pigmentation portions analyzes according to the process images captured by VISIA-CR R (CANFIELD Co.) in Example 1, the average luminance value of the color density of pigmentation (0- 255 was expressed in gray level).

試験結果 本発明の分光画像解析が、色素沈着部位でのメラニンの定量に応用できるか否かを検証するため、分光測色計により測定したL*値と分光画像解析により求めた平均輝度値との関係を図3に示した(rs=0.97)。 Test results spectral image analysis of the present invention, in order to verify whether it can quantify the application of melanin in pigmentation sites, the average luminance value obtained by the L * value and the spectral image analysis was measured by a spectrocolorimeter It showed the relation in FIG. 3 (rs = 0.97). その結果、色素沈着部位のL*値と平均輝度の間に正の相関性が認められた。 As a result, a positive correlation was observed between the average brightness and L * values ​​of pigmentation sites. このことから、本発明の画像解析法により、臨床的に観察される様々な色素沈着の定量的な評価が可能であることが確認された。 Therefore, the image analysis method of the present invention, it was confirmed to be possible clinical various quantitative assessment of pigmentation to be observed.

実施例4 Example 4
ハイドロキノン(HQ)のin vivo有効性試験 ハイドロキノン(4%)を配合した製剤を試作し、顔面に色素沈着のある男性(5名)、女性(15名)、合計20名(平均年齢43.4歳)を対象に3ヵ月(90日)間の使用試験を実施した。 Hydroquinone a prototype formulation containing a combination of in vivo efficacy test hydroquinone (4%) of (HQ), men (five) with pigmentation on the face, women (15 people), a total of 20 patients (mean age 43.4 years) 3 months (90 days) in the target were carried out using test between.
1)皮膚所見 担当医師が試験開始時および終了時に被験者の色素沈着の程度を、「なし:0」、「軽微:1」、「軽度:2」、「中等度:3」、「高度:4」の5段階のスコアにて評価した。 1) the extent of the subject's pigmentation skin findings attending physician at the time of the start and end of the study, "no: 0", "minor: 1", "mild: 2", "moderate: 3", "Advanced: 4 It was evaluated in 5 stages of the score of ". 試験前後のスコアの変化を、Wilcoxson t-testにて統計解析した。 The change in the score before and after the test, were statistically analyzed by Wilcoxson t-test.
2)美白効果の評価 色素沈着の色の濃さの評価は、実施例1に示す方法に従って行い、試験開始時および終了時の色素沈着の濃さの変化を平均輝度値(0〜255グレーレベル)で表した。 2) Evaluation of the color strength of the evaluation pigmentation whitening effect was performed according to the method shown in Example 1, the test start and end of the density average luminance value changes in pigmentation (0 to 255 gray levels It expressed in). 色素沈着面積の評価は、実施例1の方法に従い、試験開始時および終了時の濃淡の変化をピクセル数にて表し、変化率および改善率を求めた。 Evaluation of pigmentation area, according to the method of Example 1, a change in the shade at the beginning and end of the study expressed in number of pixels, to determine the rate of change and improvement. 試験前後の変化を、Wilcoxson t-testにて統計解析し、皮膚所見と色素沈着の濃さ(平均輝度値)および色素沈着改善率との関係に関しては、Spearman(non-parametric)にて相関解析した。 The change before and after the test, and statistical analysis by Wilcoxson t-test, with respect to the relationship between the skin findings and density of pigmentation (average luminance value) and pigmentation improvement ratio, correlation analysis in Spearman (non-parametric) did.

試験結果および考察 皮膚所見 担当医師が試験開始時および終了時の色素沈着の程度を観察し、5段階評価を行った結果を図4に示す(**;P<0.01)。 Test Results and Discussion Skin findings physician to observe the degree of pigmentation at the beginning and end of the study, shown in Figure 4 the results of out (**; P <0.01). 試験開始時に比べ色素沈着スコアが有意に低下して、色素沈着の改善が認められた。 Pigmentation score than at the start of the test is significantly reduced, improvement of pigmentation was observed.
色素沈着改善効果 色素沈着のある被験者を対象とした3ヵ月間の使用試験の結果、ハイドロキノンを4%配合した製剤の使用によって、試験開始前に比べ試験終了時において色素沈着部位の平均輝度値が有意に上昇する(P<0.01)ことが確認された(図5)。 Pigmentation improvement effect pigmentation of some use test 3 months targeted subjects result, by the use of formulations containing a combination of hydroquinone 4%, the average luminance value of the pigmentation sites at the end of the study than before the start of the study significantly increased (P <0.01) was confirmed (Figure 5). また、色素沈着面積の解析の結果、試験開始時に比べ試験終了時の色素沈着面積が減少する(P<0.01)ことが確認された(図7)。 As a result of the analysis of the pigmentation area, it was confirmed that pigmentation area at the end of the study than at the start of the test is reduced (P <0.01) (Fig. 7). さらに、Δ色素沈着の色の濃さ(試験開始時−試験終了時)および色素沈着面積の改善率は、担当医師によるΔ皮膚所見(試験開始時−試験終了時)と正の相関性を示し、製剤の美白効果を客観的に評価できることが示唆された(図6, rs=0.67;図8, rs=0.69)。 Furthermore, delta color density of pigmentation (at the start of the test - the test at the end) improvement of and pigmentation area, delta skin findings (at the start of the test - at the end of the study) by doctor and showed a positive correlation , can be objectively evaluated the whitening effect of the formulation was suggested (Figure 6, rs = 0.67; Fig. 8, rs = 0.69). また、ハイドロキノンを4%配合した製剤は、色素沈着の改善に有用であることが明らかとなった。 Also, 4% compounded formulation hydroquinone was found to be useful for improving pigmentation.
また、老人性色素斑および雀卵斑におけるHQのin vivo有効性試験が顕著に認められた2名の対象の使用前後のカラー画像、分光画像および2値化後の画像を示した(図9および図10)。 Further, senile lentigo and HQ in freckle in vivo efficacy 2 subjects of before and after use color image test was remarkably observed, showing an image after the spectral image and the binarization (FIG. 9 and FIG. 10). この2値化後の画像は、老人性色素斑および雀卵斑における対象の色素沈着がハイドロキノン製剤の使用前に比較し、使用後に視覚的にもかなり改善されることが明らかであり、一般のヒトにも色素沈着の程度を提示すること、ならびに皮膚評価部位における色素沈着の治療剤および美白剤の効果を提示することが可能である。 Image after the binarization is subject to pigmentation in senile lentigo and freckle are compared before the use of hydroquinone formulations, it is clear that is significantly improved visually after use, the general presenting the extent of even pigmentation in humans, and it is possible to present the effect of the therapeutic agents and whitening agents pigmentation in skin evaluation site.

前記の実施例1〜4のように、カラー画像をRGBチャネルに色分解したR画像を画像解析して、色素沈着の濃さや面積を客観的に評価する本願の色素沈着の評価および提示方法では、臨床的に色素沈着と紅斑が混在しても、ヘモグロビン量に影響されずに色素沈着の色の濃さや面積を客観的に評価ができることが示された。 As in Examples 1 to 4 above, and image analysis of R color-separated images are color images in the RGB channels, the evaluation and presentation method objectively evaluate the present pigmentation the density and area of ​​pigmentation clinically pigmentation and erythema be mixed, objective evaluation of density and area of ​​the color pigmentation without being influenced by the amount of hemoglobin that may have been shown. また、これらの方法を用いてハイドロキノンを4%配合した製剤の3ヵ月間の使用試験を行ったところ、試験開始前に比べ色素沈着が薄くなり、面積も減少することが明らかとなった。 When it was used the test of 3 months 4% compounded formulation of hydroquinone using these methods, pigmentation becomes thinner than before the start of the test, the area also was found to decrease. また、本方法によってΔ色素沈着の色の濃さおよび色素沈着面積の改善率は、医師によるΔ皮膚所見と正の相関性を示し、製剤の美白効果を客観的に評価できることが示唆された。 Also, improvement of strength and pigmentation area color Δ pigmentation by this method showed a positive correlation Δ skin findings by doctors, was suggested to be able to objectively evaluate the whitening effect of the formulation. これらのことから、ハイドロキノンを4%配合した製剤は、色素沈着の改善に有用であることが明らかとなった。 From these, 4% compounded formulations are hydroquinone, it was found to be useful for improving pigmentation.

実施例5 Example 5
滝脇らの方法と本願の色素沈着の評価方法との比較 発明者らは、前記の滝脇らの方法と本願の色素沈着の評価方法との比較を行うため、双方の画像処理により同一の基画像(カラー画像)を処理した。 Takinowaki 'method and the present comparative inventors of the evaluation method of pigmentation, for comparison with the evaluation method of Takinowaki's method and application of pigmentation of the same basic image by both image processing They were treated with (color image). 図11として、i)基画像(カラー画像)、ii)滝脇らの方法による解析画像およびiii)本願の評価方法による解析画像を示す。 As Figure 11, i) based on image (color image), illustrating the analysis image by analyzing the image and iii) application of the evaluation method according to the method of ii) Takinowaki al. その結果、本願の画像解析方法を用いた場合、肌の赤みと色素沈着が混在している部位[i)の点線で囲まれた部分]においてもその色素沈着部位が明確に視覚化できるが、滝脇らの方法で解析した画像ではその色素沈着部位が明確には判別可能ではなかった(図11)。 As a result, when using the image analysis method of the present application, can be clearly visualized the pigmentation site in the site [i dotted line portion surrounded by a) the redness and pigmentation are mixed, its pigmentation sites in the image analyzed by Takinowaki's method is to clear was not distinguishable (Figure 11). 従って、本願の色素沈着の評価方法は、グレーレベル表示による画像としてヒトに提示した場合においても、その色素沈着部位を明確に把握させ、色素沈着の程度を容易に理解することができる。 Therefore, the evaluation method of the present pigmentation, when presented to a human as an image by a gray level display can also be the pigmentation sites clearly to understand, easy to understand the degree of pigmentation.

実施例6 Example 6
色素沈着面積を算出する際の二値化の閾値分布 方法: Threshold distribution method of binarization in calculating pigmentation area:
操作1) Operation 1)
まず、20代〜60代の女性40名被験者の顔面画像を用いて、目視所見にて色素沈着部位を特定した。 First of all, 40 women in their 20s to 60 generations by using the facial image of the subject, was to identify the pigmentation site by visual inspection findings. 特定した部位については、画像処理ソフト等の範囲指定ツールで囲み書きを行い、色素沈着部位とその他の部位との領域を明確に区別した。 For the identified site, performs a writing enclosed in range specification tool of image processing software or the like, was a clear distinction between the area of ​​the pigmentation sites and other sites.
操作2) Operation 2)
次に、同画像を用いて、実施例1における色素沈着面積抽出の手順に従い、画像の2値化処理を行った。 Next, using the same image, according to the procedure of pigmentation area extracted in Example 1 was subjected to binarization processing of the image. このとき、操作1)で特定した色素沈着部位を示す領域と、2値化処理によって得られる白黒画像の領域が一致するように、2値化に際しての閾値(黒から白の順序の0〜255グレーレベル)を、各被験者ごとに設定した。 At this time, the region indicating the specified pigmented site at operation 1), as the area of ​​the black-and-white image obtained by the binarization match, the threshold (from black to white order of time of binarization 0-255 the gray level), was set for each subject.

試験結果: Test results:
色素沈着を抽出する際の二値化の閾値設定は、210〜230(グレーレベル)の範囲では、80.0%(32名/40名)の被験者で目視評価による所見と一致し、205〜235(グレーレベル)の範囲では、95.0%(38名/40名)の被験者の目視評価による所見と一致し、220±20(グレーレベル)の範囲では、全ての被験者100.0%(40名/40名)において、目視評価によって指定した色素沈着部位を抽出できることが明らかとなった(図12)。 Threshold setting binarization in extracting pigmentation, in the range of 210 to 230 (gray level), consistent with findings by visual evaluation by the subjects of 80.0% (32 patients / 40 patients), 205 to 235 ( in the range of gray levels), 95.0% (consistent with the observation by visual evaluation of the subject's 38 persons / 40 persons), in the range of 220 ± 20 (gray level), 100.0% all subjects (40 persons / 40 persons) in was found to be able to extract the pigmentation site specified by visual evaluation (Figure 12).

院内での治療剤の治療効果説明や化粧品販売時のカウンセリング等に際して、色素沈着の色の濃さや面積の変化を数値や画像で伝えることができる。 In the therapeutic effect described and cosmetics sales during counseling therapeutic agent in the hospital, can convey changes in density and area of ​​the color pigmentation in numerical values ​​or image.

図1は、メラニン、還元型ヘモグロビン(Hb)および酸化型ヘモグロビン(HbO )の吸光係数を示す。 Figure 1 shows the absorption coefficient of melanin, deoxyhemoglobin (Hb) and oxyhemoglobin (HbO 2). 図2は、皮膚色モデル(in vitro)によるメラニン呈色(輝度)と濃度との関係を示す(●;1.0Hg、▲;0.6Hg、○;0.36Hg)。 Figure 2 shows the relationship between melanin coloration with skin color model (in vitro) and (luminance) concentration (●; 1.0Hg, ▲; 0.6Hg, ○; 0.36Hg). 図3は、分光測色計により測定したL 値と分光画像解析により求めた平均輝度値との関係を示す。 Figure 3 shows the relationship between the average luminance values calculated by the L * value and the spectral image analysis was measured by spectrophotometer. 図4は、5段階評価によるハイドロキノンを配合した製剤の試験開始時(第0日)および終了時(第90日)の色素沈着の程度を示す。 Figure 4 shows the degree of pigmentation of the five stages at the start of the test formulations containing a combination of hydroquinone by the evaluation (day 0) and end (Day 90). 図5は、ハイドロキノンを配合した製剤の使用前後の色素沈着部位の平均輝度値の変化を示す。 Figure 5 shows the change in average luminance value before and after the pigmentation sites use of formulations containing a combination of hydroquinone. 図6は、使用前後の臨床的所見スコアとΔメラニン色素の輝度との相関性を示す。 Figure 6 shows the correlation between the luminance of the clinical appearance score and Δ melanin around use. 図7は、ハイドロキノンを配合した製剤の使用による色素沈着面積の変化を示す。 Figure 7 shows the change in pigmentation area by use of formulations containing a combination of hydroquinone. 図8は、Δ臨床的所見スコアの変化とΔ色素沈着改善率との相関性を示す。 Figure 8 shows the correlation between the change and the Δ pigmentation improvement of Δ clinical findings score. 図9は、ハイドロキノンを配合した製剤の使用による老人性色素斑の改善例を示す。 Figure 9 shows an improved example of senile lentigo by use of formulations containing a combination of hydroquinone. 図10は、ハイドロキノンを配合した製剤の使用による雀卵斑の改善例を示す。 Figure 10 shows an improved example of the Sparrow egg plaque by use of formulations containing a combination of hydroquinone. 図11は、基画像を滝脇ら方法および本発明の評価方法の双方による画像処理結果を示す。 Figure 11 shows the result of image processing by both evaluation methods of group image Takinowaki et al method and the present invention. 図12は、色素沈着面積を算出する際の二値化の閾値分布を示す。 Figure 12 shows the threshold distribution of binarization in calculating pigmentation area.

Claims (6)

  1. ヒトの皮膚評価部位における色素沈着の表示方法であって、 A display method of pigmentation in the skin evaluation site of human,
    a)2枚の偏光フィルターを直交させて装着したカメラを用いて、拡散反射画像として該評価部位およびホワイトバランス調整用カラーチャートのカラー画像を同時に得; a) using the by orthogonal two polarizing filter camera mounted at the same time to obtain a color image of the evaluation site and a color chart for white balance adjustment as diffuse reflection image;
    b)該カラーチャートのカラー画像に基づき、得られた該カラー画像のホワイトバランスを調整し; b) based on the color image of the color chart, to adjust the white balance of the obtained the color image;
    c)その調整後のカラー画像をRGBに分解し; c) decomposing the color image after the adjustment to RGB;
    d)R画像のコントラストを強調させ; d) to enhance the contrast of the R image;
    e)該評価部位における背景を減算処理して、色素沈着部位およびその色素沈着の色の濃さをグレーレベルの各ピクセルよりなる画像として抽出し; And subtracting the background in e) the evaluation site, it extracts the color intensity of pigmented site and its pigmentation as an image composed of each pixel of the gray levels;
    f)この抽出後の画像を2値化処理して、各ピクセルを白または黒として表示することによりその色素沈着部位を明確化し;次いで g)明確化された色素沈着部位の面積を色素沈着を表すピクセル数にて算出して数値として表示する、および/または明確化された色素沈着部位を画像として表示する工程を含むことを特徴とする該表示方法。 The then g) the area pigmentation clarity dye deposition site; f) the image after the extracted binarized, clarifies the pigmentation site by displaying each pixel as black or white the display method characterized by comprising the step of displaying to be displayed as numerical values calculated by the pixel number, and / or clarification dye deposition site as an image representing.
  2. 請求項1の工程e)において、さらに、各ピクセルのグレーレベルから平均輝度値が算出され、かつその平均輝度値が、工程g)において表示されることを特徴とする請求項1記載の表示方法。 In step e) of claim 1, further calculated average luminance value from the gray level of each pixel, and an average luminance value, the display method of claim 1, wherein the display in step g) .
  3. 該皮膚評価部位が顔であることを特徴とする請求項1または2記載の表示方法。 Display method according to claim 1 or 2, wherein the said skin rating site is a face.
  4. 該2値化処理が、黒から白の順序の0〜255グレーレベルのうち、200〜240の範囲のグレーレベルで行われることを特徴とする請求項1〜3いずれか1記載の表示方法。 The binarization, among white order of 0 to 255 gray levels from black display method as claimed in any one claims 1-3, characterized in that takes place in the gray level range of 200 to 240.
  5. 請求項1の工程b)〜f)の各工程が、デジタル画像編集用および画像処理用ソフトウェアを用いて行われる請求項1〜4いずれか1記載の表示方法。 Each step, display method as claimed in any one claims 1 to 4 is performed using a digital image editing and image processing software step b) ~f) of claim 1.
  6. 請求項1の工程b)、f)およびg)がデジタル画像編集用ソフトウェアを用いて行われ、かつ工程c)、d)およびe)がデジタル画像処理用ソフトウェアを用いて行われることを特徴とする請求項5記載の表示方法 Step b) of claim 1, f) and g) are performed using a software for digital imaging, and step c), and characterized in that d) and e) is performed using the software for digital image processing display method according to claim 5.
JP2007086991A 2007-03-29 2007-03-29 Pigmentation display method of skin Active JP5149527B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007086991A JP5149527B2 (en) 2007-03-29 2007-03-29 Pigmentation display method of skin

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007086991A JP5149527B2 (en) 2007-03-29 2007-03-29 Pigmentation display method of skin

Publications (2)

Publication Number Publication Date
JP2008245666A true JP2008245666A (en) 2008-10-16
JP5149527B2 true JP5149527B2 (en) 2013-02-20

Family

ID=39971353

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007086991A Active JP5149527B2 (en) 2007-03-29 2007-03-29 Pigmentation display method of skin

Country Status (1)

Country Link
JP (1) JP5149527B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015146084A1 (en) * 2014-03-27 2015-10-01 日本電気株式会社 Pos terminal, information processing device, white balance adjustment method, and recording medium

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4831632B2 (en) * 2008-09-16 2011-12-07 国立大学法人 鹿児島大学 Image processing apparatus, image processing method, program and storage medium
JP5065237B2 (en) * 2008-12-26 2012-10-31 常盤薬品工業株式会社 Non-invasive method for evaluating local pathology of atopic dermatitis
JP5398354B2 (en) * 2009-05-26 2014-01-29 株式会社マンダム Method of evaluating the surface state of the skin
FR2975804A1 (en) * 2011-05-27 2012-11-30 Lvmh Rech Method for Characterization of the complexion of the skin or nails
KR101856976B1 (en) * 2011-11-29 2018-05-15 (주)아모레퍼시픽 Method for determining the gloss of skin
US9996674B2 (en) * 2012-01-10 2018-06-12 Cnoga Holdings Ltd. Web site providing cosmetic and nutrition regimen from color images
KR20130133969A (en) * 2012-05-30 2013-12-10 주식회사 센바이텍 Automatically controlled laser apparatus by image-analysis
WO2014204007A1 (en) 2013-06-19 2014-12-24 L'oreal Method for evaluating cosmetic effects of cosmetic product on skin
JP6138745B2 (en) * 2014-11-19 2017-05-31 株式会社 資生堂 Stains evaluation device, and stains evaluation program

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5995645A (en) * 1993-08-18 1999-11-30 Applied Spectral Imaging Ltd. Method of cancer cell detection
JP3219550B2 (en) * 1993-06-30 2001-10-15 株式会社資生堂 Analysis system of the surface state of the skin
JP3219551B2 (en) * 1993-06-30 2001-10-15 株式会社資生堂 Surface state analysis system
JP3763880B2 (en) * 1995-04-14 2006-04-05 大日本印刷株式会社 Color correction method
JPH11332836A (en) * 1998-05-28 1999-12-07 Noevir Co Ltd Dullness evaluation method of skin
JP3727807B2 (en) * 1999-06-14 2005-12-21 株式会社資生堂 Measuring method and apparatus of the ingredients and skin characteristics of the skin
JP2003047597A (en) * 2001-08-08 2003-02-18 Noevir Co Ltd Method for evaluating clarity on skin
JP3734741B2 (en) * 2001-11-12 2006-01-11 株式会社資生堂 Freckles evaluation method
JP4010849B2 (en) * 2002-04-04 2007-11-21 ポーラ化成工業株式会社 Differential method of stain
JP4277534B2 (en) * 2003-02-12 2009-06-10 オムロン株式会社 Image editing apparatus and image editing method
JP2006285468A (en) * 2005-03-31 2006-10-19 Japan Science & Technology Agency Apparatus and method for extracting image target area
JP4579046B2 (en) * 2005-04-28 2010-11-10 株式会社資生堂 Skin state analyzing method, the skin condition analyzer, skin condition analysis program, and a recording medium on which the program is recorded
JP2007020956A (en) * 2005-07-19 2007-02-01 Kao Corp Imaging probe
JP2007047045A (en) * 2005-08-10 2007-02-22 Olympus Corp Apparatus, method and program for image processing

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015146084A1 (en) * 2014-03-27 2015-10-01 日本電気株式会社 Pos terminal, information processing device, white balance adjustment method, and recording medium

Also Published As

Publication number Publication date Type
JP2008245666A (en) 2008-10-16 application

Similar Documents

Publication Publication Date Title
Kadunce et al. Cigarette smoking: risk factor for premature facial wrinkling
Stanley et al. fMRI activation in response to illusory contours and salient regions in the human lateral occipital complex
Beach et al. Oximetry of retinal vessels by dual-wavelength imaging: calibration and influence of pigmentation
Pope et al. Benign pigmented nevi in children: prevalence and associated factors: the West Midlands, United Kingdom Mole Study
Mahler et al. Long-term effects of appearance-based interventions on sun protection behaviors.
Spaide Fundus autofluorescence and age-related macular degeneration
Greenman et al. Early changes in the skin microcirculation and muscle metabolism of the diabetic foot
Nordlund et al. Demographic study of clinically atypical (dysplastic) nevi in patients with melanoma and comparison subjects
Edwards et al. The pigments and color of living human skin
Agbai et al. Skin cancer and photoprotection in people of color: a review and recommendations for physicians and the public
Babizhayev et al. N-Acetylcarnosine, a natural histidine-containing dipeptide, as a potent ophthalmic drug in treatment of human cataracts
Gillies et al. Fluorescence excitation spectroscopy provides information about human skin in vivo
Gerger et al. Diagnostic applicability of in vivo confocal laser scanning microscopy in melanocytic skin tumors
Can et al. Basal cell carcinoma
US20130012794A1 (en) Rapid multi-spectral imaging methods and apparatus and applications for cancer detection and localization
Cascinelli et al. A possible new tool for clinical diagnosis of melanoma: the computer
US5438989A (en) Solid tumor, cortical function, and nerve tissue imaging methods and device
Stamatas et al. Non‐invasive measurements of skin pigmentation in situ
EP2264669A2 (en) Systems and methods for the multispectral imaging and characterization of skin tissue
Wiegell et al. Photodynamic therapy of actinic keratoses with 8% and 16% methyl aminolaevulinate and home‐based daylight exposure: a double‐blinded randomized clinical trial
Vanzetta et al. Columnar resolution of blood volume and oximetry functional maps in the behaving monkey: implications for fMRI
Griffiths The clinical identification and quantification of photodamage
US20050273011A1 (en) Multispectral imaging for quantitative contrast of functional and structural features of layers inside optically dense media such as tissue
US20050049467A1 (en) Method for assessing pigmented skin
US20040202356A1 (en) Optical detection of dental caries

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100323

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20110927

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120126

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120828

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121022

RD13 Notification of appointment of power of sub attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7433

Effective date: 20121023

TRDD Decision of grant or rejection written
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20121023

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20121127

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20121130

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20151207

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250