JP2004105748A - Digital zooming skin diagnosing device - Google Patents

Digital zooming skin diagnosing device Download PDF

Info

Publication number
JP2004105748A
JP2004105748A JP2003371399A JP2003371399A JP2004105748A JP 2004105748 A JP2004105748 A JP 2004105748A JP 2003371399 A JP2003371399 A JP 2003371399A JP 2003371399 A JP2003371399 A JP 2003371399A JP 2004105748 A JP2004105748 A JP 2004105748A
Authority
JP
Japan
Prior art keywords
skin
image
digital zoom
density distribution
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003371399A
Other languages
Japanese (ja)
Other versions
JP3530523B1 (en
Inventor
Yoshiaki Sakamoto
坂本 義明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
RIC KK
Original Assignee
RIC KK
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by RIC KK filed Critical RIC KK
Priority to JP2003371399A priority Critical patent/JP3530523B1/en
Publication of JP2004105748A publication Critical patent/JP2004105748A/en
Application granted granted Critical
Publication of JP3530523B1 publication Critical patent/JP3530523B1/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/41Detecting, measuring or recording for evaluating the immune or lymphatic systems
    • A61B5/411Detecting or monitoring allergy or intolerance reactions to an allergenic agent or substance
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0071Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by measuring fluorescence emission

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Public Health (AREA)
  • Physics & Mathematics (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Immunology (AREA)
  • Vascular Medicine (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Studio Devices (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a digital zooming skin diagnosing device which picks up an image of a subject 10 by less operations and a simple explanation, and can accurately determine parameters of the skin with less operation errors in a short period of time. <P>SOLUTION: Only one piece of a high resolution color image of the total face of the subject 10 is picked up by a digital camera 13 of six million pixels. Image data for a plurality of treatment regions is cut off from the one piece of the picked up image data, and parameter values for the skin are calculated. An expanded image 103 of the treatment region is displayed on a monitor screen, and an analysis line 109 overlapped with the expanded image 103 is dragged by a mouse, and the positions of the analysis line 109 is set. Thus, a graph 104 of the density distribution along the analysis line 109 is displayed together with the expanded image 103 side by side. On the graph 104 for the density distribution, threshold values are displayed, and parameters for the texture of the skin are calculated by counting a crossing number with the density distribution while applying a hysteresis to the threshold values. <P>COPYRIGHT: (C)2004,JPO

Description

 本発明は、被診断者の顔を撮影して撮影画像データから皮膚のパラメータを演算して診
断結果を作成する肌診断装置に関する。
The present invention relates to a skin diagnostic apparatus that captures a face of a subject and calculates skin parameters from captured image data to create a diagnosis result.

 被診断者の顔の一部分を撮影して、肌色、きめ、しわ、くすみ、しみ、荒れ、温度、弾
力、敏感度、メラニン、肌年齢、毛穴状態、皮脂量などのパラメータを判定する肌診断装
置が実用化されている。特許文献1には、皮膚画像を画像処理してしわやきめのパラメー
タを判定する肌診断装置が示される。特許文献2、特許文献3、特許文献4などにも拡大
皮膚画像を画像処理して複数のパラメータを判定する肌診断装置が示される。
特開平3−118036号公報 特開平5−245113号公報 特開平7−12544号公報 特開平7−19839号公報
A skin diagnostic device that photographs a part of the face of the subject and determines parameters such as skin color, texture, wrinkles, dullness, spots, roughness, temperature, elasticity, sensitivity, melanin, skin age, pore condition, and sebum volume. Has been put to practical use. Patent Literature 1 discloses a skin diagnostic apparatus that performs image processing on a skin image to determine wrinkle and texture parameters. Patent Literature 2, Patent Literature 3, Patent Literature 4, and the like also show skin diagnostic apparatuses that perform image processing on an enlarged skin image and determine a plurality of parameters.
JP-A-3-118036 JP-A-5-245113 JP-A-7-12544 JP-A-7-19839

 従来の肌診断装置は、手持ちカメラヘッドを用いて、被診断者のほお、ひたい、目じり
など、所定の診断位置ごとに撮影を行っていたので、診断位置の数だけ撮影を行う必要が
あった。従って、専属のオペレータを置いてカメラ操作を行う場合でも撮影手順や機械操
作のミスを起こし易く、被診断者が自ら撮影を行うシステムでは、パソコン画面を通じて
長々とカメラ操作などを説明する必要があった。
 本発明は、少ない操作と簡単な説明で撮影を済ませ、操作ミス少なく正確に皮膚のパラ
メータを演算できるデジタルズーム肌診断装置を提供することを目的としている。
Conventional skin diagnosis apparatuses use a hand-held camera head to perform imaging at predetermined diagnosis positions such as cheeks, chins, and eyes of the subject, so it is necessary to perform imaging by the number of diagnosis positions. . Therefore, even if a dedicated operator is used to operate the camera, errors in the imaging procedure and machine operation are likely to occur. there were.
SUMMARY OF THE INVENTION An object of the present invention is to provide a digital zoom skin diagnostic apparatus that can perform photographing with a small number of operations and a simple explanation and can accurately calculate skin parameters with few operation errors.

 本発明のデジタルズーム肌診断装置は、撮像素子の画素数が多いデジタルカメラで出力
データサイズの大きな顔全体の高解像度画像を撮影し、撮影した顔全体の撮影画像データ
に少なくとも1個の処理領域を設定して処理領域の画像データを切り出し、切り出した処
理領域の画像データを処理して皮膚のパラメータを演算するデジタルズーム肌診断装置に
おいて、処理領域を横断する解析線に沿った濃度分布を抽出し、濃度分布の凹凸をカウン
トすることにより皮膚のきめのパラメータを求めるものである。
The digital zoom skin diagnosis apparatus of the present invention captures a high-resolution image of the entire face having a large output data size with a digital camera having a large number of pixels of an image sensor, and includes at least one processing region in captured image data of the captured face. In the digital zoom skin diagnostic apparatus that sets and cuts out the image data of the processing area and processes the cut-out image data of the processing area to calculate the parameters of the skin, the density distribution along the analysis line crossing the processing area is extracted. The parameter of the texture of the skin is obtained by counting the unevenness of the density distribution.

 本発明のデジタルズーム肌診断装置では、顔全体を撮影した高解像度大容量のデジタル
撮影画像データから処理領域の画像データを切り出し、処理領域を横断する解析線に沿っ
た濃度分布を抽出し、濃度分布の微小な凹凸をカウントすることにより、皮膚のきめのパ
ラメータが演算される。
In the digital zoom skin diagnostic apparatus of the present invention, image data of a processing area is cut out from high-resolution large-capacity digital photographed image data of the entire face, and a density distribution along an analysis line crossing the processing area is extracted. By counting the minute irregularities of the above, the parameters of the texture of the skin are calculated.

 本発明のデジタルズーム肌診断装置では、顔全体の撮影画像データから処理領域の画像
データを切り出してパラメータ演算を行うから、複数の測定領域でパラメータを求める場
合でも、複数種類のパラメータを求める場合でも、基本的に撮影回数が1回で済み、解析
場所ごとに撮影を行う必要がない。そして、演算されたパラメータが適正でなければ、同
じ撮影画像データから別の場所の画像データを切り取ったり、適用するしきい値などの解
析条件を変化させて同じ画像データを再解析したりしてパラメータを修正できるから、わ
ざわざ撮影をやり直す必要がない。
In the digital zoom skin diagnostic apparatus of the present invention, since the parameter calculation is performed by cutting out the image data of the processing area from the captured image data of the entire face, even when obtaining parameters in a plurality of measurement areas, even when obtaining a plurality of types of parameters, Basically, the number of times of photographing is one, and there is no need to perform photographing for each analysis place. If the calculated parameter is not appropriate, the image data at another location is cut out from the same captured image data, or the same image data is re-analyzed by changing an analysis condition such as a threshold to be applied. Since the parameters can be corrected, there is no need to redo shooting.

 また、演算する画像データは切り出してデータ量を小さくしているから、安価な演算装
置で複雑な演算を行っても短時間で診断結果を出力できる。
 そして、手持ちのカメラヘッドを用いて複数の診断位置ごとに撮影を行う場合に比較し
て撮影ミスや操作ミスや演算ミスが生じる可能性が少なく、時間も節約されるから、正確
な診断結果を迅速に取得できる。オペレータの負担が軽く特殊能力や資格を要しないから
、診断コストが低くなる。
 また、一度混ざると誰の写真か判らなくなる部分画像とは異なり、被診断者をひとめで
確認できる顔全体画像データを保存するから、混在したデータから間違いなく必要なデー
タを選択したり、顔写真を配置したわかり易い出力プリントを提供することが容易である
。また、顔全体の皮膚状態がデータとして残るから、アトピー症とか紫外線ダメージとか
老化度のように部分画像からは正確に判断できない情報を抽出したり、目視判断したりす
ることも可能である。
Further, since the image data to be calculated is cut out to reduce the data amount, the diagnosis result can be output in a short time even if a complicated calculation is performed by an inexpensive calculation device.
In addition, compared to the case where imaging is performed at each of a plurality of diagnostic positions using a handheld camera head, the possibility of imaging errors, operation errors, and calculation errors is reduced, and time is saved. Can be obtained quickly. Since the burden on the operator is light and no special ability or qualification is required, the diagnosis cost is reduced.
Also, unlike partial images that once become unclear, nobody can tell who is the photograph, since the entire face image data that allows the examinee to be checked at a glance is saved, the necessary data can be selected without fail from the mixed data. , It is easy to provide an easy-to-understand output print. In addition, since the skin condition of the entire face remains as data, it is possible to extract information that cannot be accurately determined from a partial image, such as atopic disease, ultraviolet damage, or aging degree, or to visually determine the information.

 診断結果は、皮膚のパラメータを単独または組み合わせて文章を選択したり、皮膚のパ
ラメータをグラフ化するなどして、被診断者に対してモニタ画面やプリントアウトを通じ
て出力される。好ましくは、視覚的な印象と信頼性を高めるために、処理領域のデジタル
ズーム写真と並べた形式で診断結果が配置され、顔全体の縮小画像も添付される。診断結
果の文章やグラフは、対応するパラメータを演算した処理領域のデジタルズーム写真と並
べて、これらの画像と対応して理解できる形式で配置される。
 また、証明写真自動撮影ボックスまたは写真シール自動撮影ボックスに類似したシステ
ムとし、少ない操作と簡単な説明で被診断者が自ら撮影を行って、操作ミス少なく正確に
皮膚のパラメータを判定できるようにした。
The diagnosis result is output to the subject through a monitor screen or a printout by selecting a sentence by using the skin parameters alone or in combination or by graphing the skin parameters. Preferably, in order to enhance the visual impression and reliability, the diagnosis result is arranged in a form side by side with the digital zoom photograph of the processing area, and a reduced image of the entire face is also attached. The sentences and graphs of the diagnosis result are arranged in a format that can be understood in correspondence with these images, along with digital zoom photographs of the processing area in which the corresponding parameters have been calculated.
In addition, the system is similar to the ID photo box or photo sticker box, so that the subject can take his / her own image with a small number of operations and simple explanations, and can accurately determine the skin parameters with few operation errors. .

 図1は第1実施例のデジタルズーム肌診断装置の側面図、図2はモニタ画面表示の説明
図、図3は診断処理のフローチャート、図4はパラメータの演算方法の説明図である。
FIG. 1 is a side view of the digital zoom skin diagnostic apparatus of the first embodiment, FIG. 2 is an explanatory diagram of a monitor screen display, FIG. 3 is a flowchart of a diagnostic process, and FIG. 4 is an explanatory diagram of a parameter calculation method.

 図1に示すように、第1実施例のデジタルズーム肌診断装置は、証明写真自動撮影ボッ
クスまたは写真シール自動撮影ボックスに類似した外観と操作を持たせて構成される。第
1実施例のデジタルズーム肌診断装置の内部は、中央に透明ガラス窓を設けた遮蔽壁24
で仕切られて撮影室11と機械室12に区分される。
 機械室12には、600万画素のデジタルカメラ13と高周波駆動の蛍光灯20を駆動
する光源19が配置される。デジタルカメラ13の画角17と焦点は、イス22に座った
被診断者10の顔全体を捉えるように調整されている。
ボタン18、光源19、デジタルカメラ13に加えて、料金徴収用のコインスロット25
、撮影室11に配置した液晶モニタ画面16および判定結果をプリントアウトするプリン
タ15もパソコン14に接続されている。
As shown in FIG. 1, the digital zoom skin diagnostic apparatus of the first embodiment is configured to have an appearance and an operation similar to those of an automatic ID photographing box or a photo sticker automatic photographing box. The inside of the digital zoom skin diagnostic apparatus of the first embodiment has a shielding wall 24 provided with a transparent glass window at the center.
And divided into a photographing room 11 and a machine room 12.
In the machine room 12, a digital camera 13 having 6 million pixels and a light source 19 for driving a high-frequency driven fluorescent lamp 20 are arranged. The angle of view 17 and focus of the digital camera 13 are adjusted so as to capture the entire face of the subject 10 sitting on the chair 22.
In addition to button 18, light source 19 and digital camera 13, coin slot 25 for collecting fees
Also, a liquid crystal monitor screen 16 arranged in the photographing room 11 and a printer 15 for printing out the judgment result are connected to the personal computer 14.

 撮影室11のイス22は、座面の高さ調整が可能で固定された高い背もたれがあるハイ
バック型であって、被診断者10の顔を、画角17(撮影範囲)内でデジタルカメラ13
に向って焦点位置に位置決めする。幅の狭い踏み台21は、被診断者10の足位置を規制
してイス22の上にまっすぐ座らせ、顔が画角17の左右にはみ出るのを防止する。被診
断者10の背後の壁面には、青い背景スクリーン23が配置され、撮影画像から顔の輪郭
を自動判別し易くしてある。
The chair 22 of the imaging room 11 is of a high-back type having a fixed and high back capable of adjusting the height of the seating surface. The face of the subject 10 can be moved by the digital camera 13 within an angle of view 17 (imaging range).
To the focal position toward. The narrow platform 21 regulates the position of the foot of the subject 10 and sits straight on the chair 22 to prevent the face from protruding left and right of the angle of view 17. A blue background screen 23 is disposed on the wall behind the subject 10 to facilitate automatic determination of the face outline from the captured image.

 被診断者10が撮影室11のイス22に腰掛けてコインスロット25に500円硬貨を
挿入すると、光源19が作動して蛍光灯20が点灯し、デジタルカメラ13で撮影された
被診断者10のライブ画像が液晶モニタ画面16に表示されて撮影スタンバイ状態となる
。ライブ画像を見て顔が画角17を外れていれば、被診断者10がイス22高さを調整す
るなどして画角17に収める。
 続いて被診断者10がボタン18を操作すると、デジタルカメラ13が作動して被診断
者10の顔全体を撮影し、直ちにデジタルカメラ13からパソコン14へ約2000×3
000ドットの1枚の画像データが転送される。パソコン14は、液晶モニタ画面16に
撮影画像の縮小全体画像を表示した状態で、画像処理とパラメータの演算を実行して、診
断結果を作成する。そして、液晶モニタ画面16に診断結果を表示し、並行してプリンタ
15から診断結果をプリントアウトする。
 液晶モニタ画面16には、図2に示すように、撮影した画像全体の縮小画像31に並べ
て、撮影画像データから切り取った3つの表示領域の拡大画像32、33、34が表示さ
れる。また、縮小画像31に重ねて、処理領域に対応させた枠35、36、37が表示さ
れる。
When the subject 10 sits on the chair 22 of the imaging room 11 and inserts a 500-yen coin into the coin slot 25, the light source 19 is activated, the fluorescent lamp 20 is turned on, and the subject 10 is photographed by the digital camera 13. The live image is displayed on the LCD monitor screen 16 and the camera enters a shooting standby state. If the face deviates from the angle of view 17 while viewing the live image, the subject 10 fits the angle of view 17 by adjusting the height of the chair 22 or the like.
Subsequently, when the patient 10 operates the button 18, the digital camera 13 operates to photograph the entire face of the patient 10, and the digital camera 13 immediately transfers the image to the personal computer 14 by about 2000 × 3.
One image data of 000 dots is transferred. The personal computer 14 executes image processing and parameter calculation in a state where the reduced whole image of the captured image is displayed on the liquid crystal monitor screen 16 to create a diagnosis result. Then, the diagnostic result is displayed on the liquid crystal monitor screen 16, and the diagnostic result is printed out from the printer 15 in parallel.
As shown in FIG. 2, enlarged images 32, 33, and 34 of three display areas cut out from the captured image data are displayed on the liquid crystal monitor screen 16 side by side with the reduced image 31 of the entire captured image. Also, frames 35, 36, and 37 corresponding to the processing area are displayed on the reduced image 31.

 処理領域は、画像処理して皮膚パラメータを演算するのに最適な大きさに切り出した画
像データに対応し、顔面上の実寸で2cm角、撮影画像データ全体を画像処理して輪郭と
目を検出し、ひたいと目じりとほおに対応させて3か所が自動的に設定される。
 一方、表示領域は、それぞれの処理領域に対応させて、所定のデジタルズーム倍率で一
定の形状と寸法になるよう定めてある。拡大画像32は、ひたいの処理領域(枠36)の
内側から切り取った実寸1.5cm角領域の画像データを5cm角までデジタルズーム処
理してドット補間した画像である。拡大画像33は、目の一部を含む目じりの処理領域(
枠35)の画像データを5cm角までデジタルズーム処理した画像である。
 下段の拡大画像34は、ほおの処理領域(枠37)を中心にした実寸3cm角の領域を
5cm角までデジタルズーム処理した画像である。これらの画像より少し遅れて、皮膚の
パラメータの数値とその解説が、それぞれ演算を行った処理領域に対応する拡大画像32
、33、34の横に表示される。ひたいの拡大画像32は肌色と毛穴のパラメータ、めじ
りの拡大画像33はきめとしわのパラメータ、ほおの拡大画像34はしみとくすみのパラ
メータに対応している。
The processing area corresponds to the image data cut out to the optimal size for image processing to calculate the skin parameters. The actual size on the face is 2 cm square. Then, three locations are automatically set in correspondence with the eyes, eyes and cheeks.
On the other hand, the display area is determined to have a constant shape and size at a predetermined digital zoom magnification, corresponding to each processing area. The enlarged image 32 is an image obtained by digitally zooming image data of an actual 1.5 cm square area cut out from the inside of the processing area (frame 36) of the window to a 5 cm square and performing dot interpolation. The enlarged image 33 is a processing area of a margin (including a part of the eye).
This is an image obtained by digitally zooming the image data of the frame 35) to a 5 cm square.
The enlarged image 34 at the lower stage is an image obtained by digitally zooming an actual 3 cm square area centered on the cheek processing area (frame 37) to a 5 cm square. Slightly later than these images, the numerical values of the skin parameters and their descriptions are displayed in the enlarged images 32 corresponding to the processing regions on which the respective calculations were performed.
, 33, 34. The enlarged image 32 corresponds to the parameters of skin color and pores, the enlarged image 33 corresponds to the parameters of texture and wrinkles, and the enlarged image 34 corresponds to the parameters of stains and dullness.

 パソコン14による肌診断は、図3に示すシーケンスで実行される。ステップ111で
コインスロット25がコインを受領すると、ステップ112で光源19を駆動して撮影ス
タンバイ状態となる。ステップ113でスイッチ18の操作を受け取ると、ステップ11
4へ移行して撮影と画像データ転送が実行される。さらに、ステップ115でデジタルズ
ーム画像拡大を行って、ステップ116で液晶モニタ画面16に画像を表示する。
 ステップ117では、撮影画像データから切り出した3つの処理領域の画像データを処
理して皮膚のパラメータを演算する。
 ステップ118では、3つの処理領域で演算した皮膚のパラメータを総合判断して診断
結果を作成し、診断結果に画像を組み合わせたプリントアウトデータを作成する。
 ステップ119では、プリンタ15を作動させて被診断者10に診断結果をプリント出
力する。診断結果のプリントアウトには、図2に示す液晶モニタ画面16の場合と同様に
、顔全体の縮小画像に並べて、倍率の異なる3つのデジタルズーム画像が同じ大きさに揃
えて配置され、肌色、しわ、きめ、しみ、くすみ、毛穴状態の診断結果と問題点、治療方
法や推奨される化粧品、手入れ方法がさらに詳しく記載されている。
The skin diagnosis by the personal computer 14 is executed in the sequence shown in FIG. When the coin slot 25 receives a coin in step 111, the light source 19 is driven in step 112 to enter a shooting standby state. When the operation of the switch 18 is received in Step 113, Step 11
Then, the process proceeds to step 4, where photographing and image data transfer are performed. Further, the digital zoom image is enlarged in step 115, and the image is displayed on the liquid crystal monitor screen 16 in step 116.
In step 117, the image data of the three processing regions cut out from the captured image data is processed to calculate the parameters of the skin.
In step 118, a diagnosis result is created by comprehensively judging the skin parameters calculated in the three processing regions, and printout data in which an image is combined with the diagnosis result is created.
In step 119, the printer 15 is operated to print out the diagnosis result to the person to be diagnosed 10. As in the case of the LCD monitor screen 16 shown in FIG. 2, three digital zoom images having different magnifications are arranged in the same size in the same manner as the liquid crystal monitor screen 16 shown in FIG. In addition, the results of diagnosis, problems, textures, spots, dullness, and pore conditions, treatment methods, recommended cosmetics, and care methods are described in more detail.

 図4に示すように、ひたいとほおの処理領域の画像データから水平方向の濃度分布関数
を求め、関数の平均値41をRGBの3原色でそれぞれ求めて肌色を判定する。
 また、水平方向の濃度分布関数に2本のしきい値42、43を設定して交差する点の数
を数えることにより皮膚の微小な凹凸の密度を求める。ひたいとほおの測定領域に設定し
た複数の水平な横断線についてこの操作を繰り返して平均することにより皮膚のきめのパ
ラメータが演算される。
As shown in FIG. 4, a density distribution function in the horizontal direction is obtained from the image data of the processing area of the sun and cheeks, and the average value 41 of the function is obtained for each of the three primary colors of RGB to determine the skin color.
Further, the density of minute irregularities on the skin is obtained by setting two thresholds 42 and 43 for the density distribution function in the horizontal direction and counting the number of intersecting points. By repeating and averaging this operation for a plurality of horizontal traverse lines set in the measurement area of the chin and cheek, the parameters of the skin texture are calculated.

 また、目じりの処理領域の画像データに設定した複数の垂直な横断線について同様な操
作を行ってしわのパラメータが演算される。しわの凹凸はきめよりも長い周期で画像上の
明暗濃度差も大きいので、上下のしきい値をきめの場合よりも広く設定して交差する点の
数を数える。
 また、ひたいの処理領域のXY二次元の濃度分布を作成し、しきい値を変化させて二値
化する演算により毛穴を抽出する。処理領域の毛穴の濃度と大きさから毛穴のパラメータ
を演算する。
 また、ほおの処理領域のR画像データからXY二次元の濃度分布を作成し、しきい値を
変化させて二値化してしみ(メラニン)を抽出する。しみの大きさと数からしみのパラメ
ータを演算する。そして、肌色としみときめのパラメータからくすみのパラメータが演算
される。
In addition, wrinkle parameters are calculated by performing the same operation on a plurality of vertical traversing lines set in the image data of the processing area of the eye-opening. Since the unevenness of the wrinkles has a longer period than the texture and the difference in the light and dark density on the image is large, the upper and lower thresholds are set wider than in the case of the texture and the number of intersecting points is counted.
Further, an XY two-dimensional density distribution of the processing area of the shin is created, and pores are extracted by an operation of changing the threshold value to binarize. The pore parameters are calculated from the density and size of the pores in the processing area.
Further, an XY two-dimensional density distribution is created from the R image data of the cheek processing area, and the threshold value is changed to binarize to extract the stain (melanin). The stain parameters are calculated from the stain size and number. Then, the dullness parameter is calculated from the flesh color and the soothing parameter.

 以上のように構成された第1実施例のデジタルズーム肌診断装置では、600万画素の
デジタルカメラを採用して幅20cm高さ30cmの領域を撮影し約2000×3000
ドットの高解像度カラー画像を撮影するから、2cm角の小さな処理領域の画像データで
も200×200ドット程度のパラメータ演算に十分なデータ量を確保できる。また、1
.5cm角を5cm角に拡大するデジタルズーム処理を行っても十分な解像度の画像表示
およびプリントアウトが可能である。
 また、1枚の撮影画像データから複数の処理領域の画像データを切り取って皮膚のパラ
メータ値を演算するから、撮影回数が1回で済み、撮影画像データをパソコン14に保存
しているから、後から別の測定領域(あご、鼻、みけん等)を設定してパラメータ値を演
算することも可能である。
The digital zoom skin diagnostic apparatus of the first embodiment configured as described above employs a digital camera of 6 million pixels to photograph an area of 20 cm in width and 30 cm in height and about 2000 × 3000.
Since a high-resolution color image of dots is photographed, a sufficient data amount can be secured for a parameter calculation of about 200 × 200 dots even with image data of a small processing area of 2 cm square. Also, 1
. Even if a digital zoom process for enlarging a 5 cm square to a 5 cm square is performed, it is possible to display and print out an image with a sufficient resolution.
Also, since image data of a plurality of processing areas is cut out from one piece of photographed image data and the parameter values of the skin are calculated, the number of times of photographing is one, and since the photographed image data is stored in the personal computer 14, It is also possible to set another measurement area (chin, nose, miken, etc.) from and calculate the parameter value.

 また、画角17から顔の輪郭がはみ出して測定領域の自動設定が行えない撮影画像デー
タでも、残りの部分の大きな画像から人間が手動で測定領域を設定し直して、パラメータ
値を再度演算することも可能である。万が一、パラメータの演算値が実情と合わない場合
でも、撮影画像データの全体観察を行って合わない理由を解析可能である。ほくろや髪の
毛でパラメータ値に異常をきたしても、少しずつ処理領域をずらせてそれぞれパラメータ
値を演算することにより異常値を排除する自動処理も可能である。
 いずれにせよ、万が一、判定結果が異常でも撮影をやり直す必要がなく、ばらばらの部
分画像では困難な撮影画像データと本人の照合も迅速確実である。
 また、処理領域の面積は2cm×2cmなので、幅13cm長さ20cm前後の女性の
顔の上に、輪郭からはみ出すことなく、顔面の凹凸や傾き、照明の陰影や髪の毛の影響を
避けた配置が可能である。そして、処理領域の画像データは、200×200ドットの軽
いデータなので、複雑なフィルタ画像処理の重い演算でも短時間で完了する。
In addition, even with photographed image data in which the contour of the face protrudes from the angle of view 17 and the measurement area cannot be automatically set, a person manually resets the measurement area from the remaining large image and calculates the parameter values again. It is also possible. Even if the calculated values of the parameters do not match the actual situation, it is possible to perform an overall observation of the photographed image data and analyze the reason for the mismatch. Even if a parameter value is abnormal due to a mole or hair, automatic processing for removing the abnormal value by slightly shifting the processing area and calculating the parameter value is also possible.
In any case, even if the judgment result is abnormal, there is no need to retake the image, and the collation of the photographed image data and the person who is difficult with the separated partial images is quickly and surely performed.
In addition, since the area of the processing area is 2 cm x 2 cm, an arrangement that avoids the unevenness and inclination of the face, the shadow of lighting, and the influence of hair on the face of a woman with a width of 13 cm and a length of about 20 cm without protruding from the contour. It is possible. Since the image data of the processing area is light data of 200 × 200 dots, even heavy calculations of complicated filter image processing can be completed in a short time.

 また、ハイバック型のイス22と幅の狭い踏み台21で被診断者の位置と姿勢を制御し
て顔の位置と向きを一定に設定するから、顔の輪郭が画角17の外へはみ出しにくく、デ
ジタルカメラ13の画角17一杯に顔を捉えた情報量の大きな撮影画像データが得られる

 また、コイン投入と同時に照明を点灯して撮影スタンバイ状態とし、被診断者10によ
るボタン18操作を待ってデジタルカメラ13を作動させるから、ストロボ照明に比較し
て光量立ち上がりの遅い蛍光灯20でも安定した照明効果を期待でき、撮影と同時に目を
閉じてしまうこともない。
 また、撮影画像データから処理領域の画像データを切り取って、液晶モニタ画面16お
よびプリンタ15を通じて、被診断者10に画像提供するから、現実感と説得力に満ちた
情報提供が可能である。複数の表示領域の画像データは異なる倍率でデジタルズーム処理
されて共通の大きさに揃えて画像提供されるから、見た目に整った美しい画像表示および
プリントアウトとなる。
In addition, since the position and orientation of the subject is controlled by the high-back chair 22 and the narrow step 21 to keep the position and orientation of the face constant, the contour of the face is unlikely to protrude outside the angle of view 17, The captured image data with a large amount of information obtained by capturing the face at the full angle of view 17 of the digital camera 13 can be obtained.
In addition, since the lighting is turned on at the same time as the coin is inserted, the digital camera 13 is activated after the button 18 is operated by the subject 10, and the fluorescent lamp 20 whose light quantity rises slower than the strobe light is stable. You can expect an improved lighting effect, and your eyes will not be closed at the same time as shooting.
Further, since the image data of the processing area is cut out from the photographed image data and the image is provided to the subject 10 through the liquid crystal monitor screen 16 and the printer 15, it is possible to provide information full of realism and persuasive power. The image data of the plurality of display areas are subjected to digital zoom processing at different magnifications and are provided with the images being adjusted to a common size, so that beautiful and beautiful image display and printout are achieved.

 また、拡大画像32、33、34は、それぞれ異なる拡大倍率を付与してパラメータ理
解に最適化して、その表示領域に対応する処理領域の画像データから演算したパラメータ
値と並べて出力するから、専門知識の無い被診断者10でも、数値と画像を対応させるこ
とにより無味乾燥な数値の意味を直感的に理解できて、診断結果の説得力がアップする。
表示領域の拡大画像は、顔全体の画像と並べて出力されるから、被診断者10は結論と理
由と証拠を同時に提示されて反論できない精神状況に誘導され、受け入れ難い診断結果を
出力してもクレームを受けにくい。
 また、撮影からプリントアウトまでを市販の安いパソコン14で制御して自動的に遂行
させ、専属のオペレータや管理人を不要にしたから、500円という低料金でも、証明写
真や写真シールの自動撮影ボックスに匹敵する高い利益を確保できる。
In addition, the enlarged images 32, 33, and 34 are assigned different enlargement magnifications, optimized for parameter understanding, and output side by side with parameter values calculated from image data of a processing area corresponding to the display area. Even if the subject 10 does not have any, the meaning of the tasteless numerical value can be intuitively understood by associating the numerical value with the image, and the persuasive power of the diagnostic result is improved.
Since the enlarged image of the display area is output side by side with the image of the entire face, the subject 10 is presented with a conclusion, reason, and evidence at the same time, is guided to a mental situation that cannot be refuted, and outputs an unacceptable diagnostic result. It is hard to receive complaints.
In addition, since the process from photographing to printing out is controlled automatically by a commercially available inexpensive personal computer 14, there is no need for a dedicated operator or manager, so even at a low charge of 500 yen, automatic photographing of ID photos and photo stickers is possible. High profits comparable to boxes can be secured.

 なお、第1実施例のデジタルズーム肌診断装置では、パソコン14を用いて撮影からプ
リントアウトまでを自動的に遂行させたが、専用のオペレータを付き添わせてカウンセリ
ングを行うシステムを構成してもよい。例えば、機械室12の外壁面に液晶モニタ画面1
6とスイッチ18とキーボードを配置してオペレータを着席させる。そして、液晶モニタ
画面16にライブ画像を表示させた状態でオペレータが撮影室11の外から被診断者10
の姿勢を誘導し、オペレータがスイッチ18を操作して撮影開始してもよい。オペレータ
は、被診断者10にいくつかの質問を投げかけ、食事内容や酒量、昨日の睡眠時間、利用
している化粧品の種類などを聞き出してキーボード入力してもよい。
In the digital zoom skin diagnostic apparatus of the first embodiment, the procedure from photographing to printout is automatically performed using the personal computer 14, but a system for performing counseling with a dedicated operator may be configured. For example, the LCD monitor screen 1 is placed on the outer wall of the machine room 12.
6, the switch 18 and the keyboard are arranged and the operator is seated. Then, while the live image is displayed on the liquid crystal monitor screen 16, the operator moves the subject 10 from outside the imaging room 11.
, The operator may operate the switch 18 to start shooting. The operator may ask the diagnosis subject 10 some questions, hear the contents of the meal, the amount of alcohol, the sleep time yesterday, the type of cosmetics used, and the like, and input them by keyboard.

 また、第1実施例のデジタルズーム肌診断装置では、デジタルカメラ13で撮影した撮
影画像データのみを判定したが、特開昭59−28646号公報に示されるような静電容
量センサを用いた皮膚水分量の測定ヘッドを設けて、皮膚水分量のパラメータを判定項目
に加えてもよい。さらに、特開平10−286283号公報に示されるような水分蒸散量
の測定ヘッドを設けたり、特開昭56−158639号公報に示されるようなすりガラス
片を用いた皮脂分泌量の測定ヘッドを追加してもよい。
 また、実施例のデジタルズーム肌診断装置は、化粧品販売の営業ツールや美容エステの
コミュニケーションツールとしても利用できる。
Further, in the digital zoom skin diagnostic apparatus of the first embodiment, only the photographed image data photographed by the digital camera 13 is determined, but the skin moisture using a capacitance sensor as disclosed in JP-A-59-28646 is used. An amount measuring head may be provided to add the parameter of the amount of skin moisture to the judgment item. Further, a measuring head for measuring the amount of water evaporation as disclosed in JP-A-10-286283 or a measuring head for measuring the amount of sebum secretion using ground glass pieces as disclosed in JP-A-56-158639 is added. May be.
Further, the digital zoom skin diagnostic apparatus of the embodiment can also be used as a sales tool for selling cosmetics and a communication tool for beauty aesthetics.

 図5は第2実施例のデジタルズーム肌診断装置の説明図、図6はモニタ画面表示の説明
図である。ここでは、ノートパソコン54とデジタルカメラ53の最小構成によるカウン
セリングシステムが説明される。
 図5に示すように、ノートパソコン54のモニタ画面56の上部にデジタルカメラ53
が取り付けられ、ノートパソコン54とデジタルカメラ53は、リモコン操作、設定、お
よび画像データ転送が可能に接続され、ノートパソコン54にはこれらの入出力操作と画
像処理とパラメータ演算を行い、診断結果を作成する専用の撮影診断ソフトウエアが組み
込まれている。
 デジタルカメラ53は、ノートパソコン54からの指令を待ってストロボ照明55を作
動させ、被診断者10の顔全体の高解像度カラー画像を撮影する。
 カウンセラー50は、被診断者10と対面した状態でノートパソコン54を操作して、
被診断者10の肌診断とカウンセリングを行う。カウンセラー50は、モニタ画面に表示
されたライブ画像を見て被診断者10の姿勢や位置を指導し、ノートパソコン54を操作
して被診断者10の顔全体を撮影する。撮影に続いてデジタルカメラ53からノートパソ
コン54へ自動的に画像転送が行われると、図6に示すような測定画面が表示される。
FIG. 5 is an explanatory diagram of the digital zoom skin diagnostic apparatus of the second embodiment, and FIG. 6 is an explanatory diagram of a monitor screen display. Here, a counseling system using the minimum configuration of the notebook computer 54 and the digital camera 53 will be described.
As shown in FIG. 5, a digital camera 53 is displayed above a monitor screen 56 of the notebook computer 54.
The notebook computer 54 and the digital camera 53 are connected so that remote control operation, setting, and image data transfer can be performed. The notebook computer 54 performs these input / output operations, image processing, and parameter calculation, and executes diagnosis results. Special diagnostic imaging software to be created is included.
The digital camera 53 waits for a command from the notebook computer 54 to activate the strobe lighting 55 to capture a high-resolution color image of the entire face of the subject 10.
The counselor 50 operates the notebook computer 54 in a state of facing the subject 10,
The skin diagnosis and counseling of the subject 10 are performed. The counselor 50 instructs the posture and position of the subject 10 by watching the live image displayed on the monitor screen, and operates the notebook computer 54 to photograph the entire face of the subject 10. When the image transfer is automatically performed from the digital camera 53 to the notebook computer 54 following the photographing, a measurement screen as shown in FIG. 6 is displayed.

 モニタ画面56の左側に被診断者10の顔全体の縮小画像60が表示され、カウンセラ
ー50は、縮小画像60上でマウスポインタをドラッグして正方形の処理領域を設定する
。最初に設定された領域Aは自動的に画像処理されてしわときめと肌色のパラメータが演
算される。二番目に設定された領域Bは自動的に画像処理されてしみとメラニンのパラメ
ータが演算される。モニタ画面56の右側に領域Aと領域Bの固定枠が表示され、手動設
定された領域Aと領域Bの画像データが、2つの固定枠一杯まで可変倍率でデジタルズー
ム拡大されて拡大画像61、62を形成する。
 また、拡大画像61、62の下に、YES、NOの記入枠を設けた質問枠63が表示さ
れる。カウンセラー50は、質問枠63の質問を読み上げて被診断者10からの回答を聞
いて、質問枠63のYES、NOの記入枠をマウスでチェックする。
 最後に質問枠63の下部の診断スイッチをマウスでクリックすると、演算された複数の
パラメータと質問回答に基づいた肌診断結果がモニタ画面56に表示される。肌診断結果
は、処理領域を示す枠を重ねた顔全体の縮小画像と診断結果に対応した複数のデジタルズ
ーム拡大画像を含む。カウンセラーは、肌診断結果の表示されたモニタ画面56を被診断
者10に見せて、カウンセリングを行う。
A reduced image 60 of the entire face of the subject 10 is displayed on the left side of the monitor screen 56, and the counselor 50 sets a square processing area by dragging a mouse pointer on the reduced image 60. The first set region A is automatically subjected to image processing to calculate wrinkle and flesh color parameters. The second set area B is automatically subjected to image processing to calculate stain and melanin parameters. Fixed frames of the areas A and B are displayed on the right side of the monitor screen 56, and the image data of the manually set areas A and B are digitally zoomed at a variable magnification until the two fixed frames are full, and the enlarged images 61 and 62 are displayed. To form
In addition, a question frame 63 having an entry frame for YES and NO is displayed below the enlarged images 61 and 62. The counselor 50 reads out the question in the question frame 63, listens to the answer from the subject 10, and checks the entry frame of YES and NO in the question frame 63 with a mouse.
Finally, when the diagnostic switch below the question frame 63 is clicked on with a mouse, a skin diagnosis result based on the plurality of calculated parameters and the question answer is displayed on the monitor screen 56. The skin diagnosis result includes a reduced image of the entire face on which the frame indicating the processing area is overlapped, and a plurality of digital zoom enlarged images corresponding to the diagnosis result. The counselor shows the monitor screen 56 on which the skin diagnosis result is displayed to the subject 10, and performs counseling.

 第2実施例のデジタルズーム肌診断装置は、ノートパソコン54とデジタルカメラ53
という最小構成で使用できるから、自由に持ち運んで訪問先で直ちに診断開始できる。ま
た、市販の標準的な機器を用いて専用ソフトウエアのインストールだけでシステムが完成
するから、安価で納期迅速、在庫なし、不具合の手直しや質問変更などの修正も容易に行
える。
 また、カウンセラー50は、簡単なパソコン操作とモニタ画面56に表示された質問枠
63の読み上げだけで肌診断を行えるから、専門知識や実務経験に乏しい人材でも、誤操
作や誤判断なく、正確で迅速な診断結果が得られる。
 また、手動操作で処理領域の位置と面積を設定するから、大きなほくろや傷跡を避ける
などの応変な対処が可能で、自動的、機械的に設定するよりも望ましい処理領域を選択し
て正確な診断結果が得られる。
The digital zoom skin diagnostic apparatus according to the second embodiment includes a notebook computer 54 and a digital camera 53.
Because it can be used with the minimum configuration, it can be carried freely and the diagnosis can be started immediately at the place of visit. In addition, since the system is completed simply by installing dedicated software using standard equipment on the market, inexpensive and quick delivery, no stock, correction of defects and correction of questions can be easily performed.
In addition, since the counselor 50 can perform skin diagnosis only by simple operation of a personal computer and reading out the question frame 63 displayed on the monitor screen 56, even a human resource with little expertise or practical experience can perform accurate and quick without erroneous operation or misjudgment. Diagnostic results are obtained.
In addition, since the position and area of the processing area are set manually, it is possible to take appropriate measures such as avoiding large moles and scars. A diagnostic result is obtained.

 なお、第2実施例のデジタルズーム診断装置では、手動操作で処理領域を設定したが、
顔の輪郭や目を自動検出して処理領域を自動設定してもよい。また、マウスポイントをド
ラッグして可変の大きさの処理領域を設定する代わりに、顔画像に重ねて表示された一定
大きさの枠画像をマウスでドラッグして任意の位置に移動することにより、常に一定サイ
ズの処理領域を設定できるようにしてもよい。
 さらに、デジタルカメラ53をノートパソコン54に固定しないで、デジタルカメラ5
3の向きを水平方向および垂直方向に10度くらい回転できるモーター付きの機構を設け
、このモーター付き機構をノートパソコン54でリモコン操作してデジタルカメラ53の
撮影範囲を上下左右に移動できるようにしてもよい。
 例えば、デジタルカメラ53で撮影されたライブ画像をパソコン画面に小さくウインド
ウ表示するとともに、キーボードのカーソルキーでデジタルカメラ53の向きを操作でき
るように診断ソフトウエアを一部改造する。操作者50は、このライブ画像を参照して被
診断者10の顔全体がバランス良く画面の中央に収まるようにカーソルキーを操作する。
これにより、被診断者が動くことなく、顔全体をデジタルカメラ53の撮影範囲の中央へ
誘導できる。
In the digital zoom diagnostic apparatus according to the second embodiment, the processing area is set manually.
The processing area may be automatically set by automatically detecting the contour and eyes of the face. Also, instead of dragging the mouse point to set a processing area of variable size, by dragging the frame image of a certain size displayed over the face image with the mouse and moving it to an arbitrary position, A processing area of a fixed size may always be set.
Further, without fixing the digital camera 53 to the notebook computer 54, the digital camera 5
A mechanism with a motor capable of rotating the direction of 3 about 10 degrees in the horizontal and vertical directions is provided, and the mechanism with the motor can be operated by remote control with a notebook computer 54 so that the shooting range of the digital camera 53 can be moved up, down, left and right. Is also good.
For example, a live image captured by the digital camera 53 is displayed in a small window on a personal computer screen, and the diagnostic software is partially modified so that the direction of the digital camera 53 can be operated by a cursor key on a keyboard. The operator 50 operates the cursor keys with reference to the live image so that the entire face of the subject 10 fits in the center of the screen with good balance.
Thus, the entire face can be guided to the center of the photographing range of the digital camera 53 without moving the subject.

 図7は第3実施例のデジタルズーム肌診断装置の説明図、図8は照明切替えの説明図、
図9は撮影画面の説明図、図10は解析画面の説明図、図11は肌診断シーケンスのフロ
ーチャートである。ここでは、可視光撮影と紫外光撮影を連続して行う肌診断システムが
説明される。
 図7に示すように、一眼レフタイプの1200万画素デジタルカメラ73は、ノートパ
ソコン74に接続されてシャッタータイミング、シャッター速度、絞り値、ズーム量、そ
の他の撮影条件や出力仕様などを設定され、制御される。
FIG. 7 is an explanatory diagram of a digital zoom skin diagnostic apparatus according to a third embodiment, FIG. 8 is an explanatory diagram of lighting switching,
FIG. 9 is an explanatory view of a photographing screen, FIG. 10 is an explanatory view of an analysis screen, and FIG. 11 is a flowchart of a skin diagnosis sequence. Here, a skin diagnosis system that continuously performs visible light imaging and ultraviolet light imaging will be described.
As shown in FIG. 7, a single-lens reflex type 12-megapixel digital camera 73 is connected to a notebook computer 74 and is set with shutter timing, shutter speed, aperture value, zoom amount, other shooting conditions and output specifications, Controlled.

 照明制御部71は、ノートパソコン74に接続されて専用の診断ソフトウエアで制御さ
れる。照明制御部71は、蛍光灯80とブラックライト79に高周波電力を供給してシャ
ッター時間内の照明量の変動を抑制し、常時点灯させることで立ち上がりの光量変動を回
避している。
 照明制御部71は、図示しない位置検出センサの出力を参照してモーター72を駆動し
、テーブル76を回転させて蛍光灯80とブラックライト79の照明を切り替える。蛍光
灯80は昼光色で、拡散板81を配置して面光源化してある。
 モーター72は、プーリー75を回転してタイミングベルト77を駆動し、テーブル7
6を180度回転させて、図8に示すように、蛍光灯80とブラックライト79を被診断
者10の顔全体を照明する位置へ交互に移動させる。
 デジタルカメラ73から被診断者10までの空間は、後ろ向きの蛍光灯80やブラック
ライト79の出力光がデジタルカメラ73へ直接入射しないように設計された暗箱84に
収められ、被診断者10の背後には、後方からの入射光を遮る暗幕が配置されている。
 被診断者10は、暗箱84の床面の縁に固定されたあご乗せ78にあごを乗せてデジタ
ルカメラ73に正対する。あご乗せ78は、デジタルカメラ73の焦点位置でその画角に
被診断者の顔全体が収まるように位置決めされている。
The lighting controller 71 is connected to the notebook computer 74 and is controlled by dedicated diagnostic software. The illumination control unit 71 supplies high-frequency power to the fluorescent lamp 80 and the black light 79 to suppress the fluctuation of the illumination amount within the shutter time, and avoids the fluctuation of the rising light amount by always lighting.
The illumination control unit 71 drives the motor 72 with reference to the output of a position detection sensor (not shown), rotates the table 76, and switches illumination of the fluorescent lamp 80 and the black light 79. The fluorescent lamp 80 has a daylight color, and has a diffuser plate 81 arranged to form a surface light source.
The motor 72 rotates the pulley 75 to drive the timing belt 77,
6, the fluorescent lamp 80 and the black light 79 are alternately moved to positions where the entire face of the subject 10 is illuminated, as shown in FIG.
The space from the digital camera 73 to the subject 10 is housed in a dark box 84 designed so that the output light of the fluorescent light 80 and the black light 79 facing backward does not directly enter the digital camera 73, and is behind the subject 10. Is provided with a blackout curtain that blocks incident light from behind.
The subject 10 puts his / her chin on a chin rest 78 fixed to the edge of the floor surface of the dark box 84 and faces the digital camera 73 directly. The chin rest 78 is positioned at the focal position of the digital camera 73 so that the entire face of the subject is included in the angle of view.

 診断ソフトウエアを起動したノートパソコン74の画面には、図9に示すように診断画
面が表示され、診断画面の解析ボタン97をクリックすると、診断画面は図10に示す解
析画面へ切り替わる。
 診断画面にはデジタルカメラ73で撮影されたモニタ用のライブ画像92が表示される
。この状態で撮影ボタン95をクリックすると、デジタルカメラ73が撮影を実行されて
、あご乗せ78にあごを乗せた状態で被診断者10の顔の縮小全体画像91が表示される
。縮小全体画像91に重ねて処理領域の設定枠85、86、87が表示され、設定枠85
、86、87は、それぞれポインタでドラッグして任意の位置へ移動できる。診断画面の
右側には、設定枠85、86、87の処理領域をデジタルズーム拡大した拡大画像93が
表示され、タブを選択して、ほお、ひたい、めじりの画像を切り替えできる。
 縮小全体画像91は、左上のタブを選択して可視光画像と紫外光画像に切り替え表示で
きる。紫外光画像の縮小全体画像の場合、ひたいと眼の下(ほお骨の上)と鼻に処理領域
の設定枠が表示される(図示略)。設定枠は、可視光画像の場合と同様にポインタを操作
して位置を調整でき、拡大画像93はタブを選択して各処理領域の画像へ切り替えできる
A diagnostic screen is displayed on the screen of the notebook personal computer 74 on which the diagnostic software has been started, as shown in FIG. 9. When the analysis button 97 on the diagnostic screen is clicked, the diagnostic screen switches to the analysis screen shown in FIG.
On the diagnostic screen, a monitor live image 92 captured by the digital camera 73 is displayed. When the photographing button 95 is clicked in this state, the digital camera 73 performs photographing, and the reduced overall image 91 of the face of the subject 10 is displayed with the chin resting on the chin rest 78. Setting frames 85, 86, and 87 for the processing area are displayed so as to overlap the reduced entire image 91.
, 86, 87 can be moved to any position by dragging with a pointer. On the right side of the diagnostic screen, an enlarged image 93 obtained by digitally zooming the processing area of the setting frames 85, 86, and 87 is displayed.
The reduced whole image 91 can be switched to a visible light image or an ultraviolet light image by selecting a tab on the upper left. In the case of the reduced whole image of the ultraviolet light image, a setting frame of a processing region is displayed below the eye (above the cheekbone) and the nose (not shown). The position of the setting frame can be adjusted by operating the pointer similarly to the case of the visible light image, and the enlarged image 93 can be switched to an image of each processing area by selecting a tab.

 可視光と紫外光の撮影が完了して縮小全体画像91が表示された状態で解析ボタン97
をクリックすると、図10に示す解析画面が表示される。そして、可視光画像と紫外光画
像の各処理領域の画像データが処理されて各種のパラメータが演算される。
 その後、解析画面の確認ボタン108をクリックすると、再び診断画面が表示される。
そして、可視光画像の3つの処理領域で求めたしわ、きめ、肌色、くすみ、均一性のパラ
メータ値と、紫外光画像の3つの処理領域で求めたしみ、そばかす、皮脂、毛穴のパラメ
ータがノートパソコン74に蓄えた解析結果データに照合されて、診断画面の診断結果9
4にまとめられる。
 診断結果94が表示された状態で印刷ボタン98をクリックすると、可視光の縮小全体
画像91と各処理領域の拡大画像93と解析結果を1枚の用紙に配置してカラー印刷シー
トのプリントアウトが実行される。
The analysis button 97 is displayed in a state where the photographing of the visible light and the ultraviolet light is completed and the reduced whole image 91 is displayed.
Clicking displays the analysis screen shown in FIG. Then, the image data of each processing region of the visible light image and the ultraviolet light image is processed, and various parameters are calculated.
Then, when the confirmation button 108 on the analysis screen is clicked, the diagnosis screen is displayed again.
The wrinkle, texture, skin color, dullness, and uniformity parameter values obtained in the three processing regions of the visible light image and the parameters of the spot, freckle, sebum, and pores obtained in the three processing regions of the ultraviolet light image are notes. The diagnostic result 9 on the diagnostic screen is compared with the analysis result data stored in the personal computer 74.
4
When the print button 98 is clicked while the diagnosis result 94 is displayed, the reduced whole image 91 of visible light, the enlarged image 93 of each processing area, and the analysis result are arranged on one sheet, and the color print sheet is printed out. Be executed.

 ところで、撮影、解析と進んで解析画面で確認ボタン108をクリックすると、可視光
と紫外光の撮影画像データは、各処理領域の画像データ、演算された各種パラメータ、お
よび解析結果とともに1つの診断フォルダにまとめて診断番号の名前で自動保存される。
従って、ノートパソコン74には、1回の撮影と診断ごとの多数の診断フォルダが保存さ
れることになる。
 診断画面の読込ボタン96をクリックするとこれらの診断フォルダの一覧が示され、こ
こから1つを選択すると、その診断フォルダから可視光と紫外光の画像データを呼び出し
て解析と診断をやり直すことができる。
 ただし、古い画像データを呼び出した場合、解析画面で確認ボタン108をクリックし
た際に自動保存は実行されず、新しい診断結果の保存が必要な場合には、診断画面で保存
ボタン99をクリックして別途保存操作を行う必要がある。
 これにより、前回の解析で設定した処理領域を設定し直したり、画像データに手動の画
像処理を施して解析をやり直したりして、診断結果94を書き換えて元のフォルダに上書
き保存することができる。また、元のフォルダをそのまま残して別名の新しい診断フォル
ダを作成することもできる。
By the way, when the confirmation button 108 is clicked on the analysis screen after proceeding with the photographing and the analysis, the photographed image data of the visible light and the ultraviolet light is stored in one diagnostic folder together with the image data of each processing region, various calculated parameters, and the analysis result. It is automatically saved under the name of the diagnosis number.
Therefore, the notebook personal computer 74 stores a large number of diagnostic folders for each one imaging and each diagnosis.
Clicking the read button 96 on the diagnostic screen displays a list of these diagnostic folders. If one is selected from this folder, image data of visible light and ultraviolet light can be called from the diagnostic folder to perform analysis and diagnosis again. .
However, when the old image data is called, the automatic saving is not performed when the confirmation button 108 is clicked on the analysis screen. When the new diagnosis result needs to be saved, the save button 99 is clicked on the diagnosis screen. A separate save operation is required.
As a result, the processing area set in the previous analysis can be reset, the image data can be subjected to manual image processing and the analysis can be performed again, and the diagnosis result 94 can be rewritten and overwritten and saved in the original folder. . Alternatively, a new diagnostic folder with a different name can be created while leaving the original folder as it is.

 図10に示すように、解析画面は、シェーディング補正された可視光の拡大画像103
に水平方向の解析線109と垂直方向の解析線110が重ねて表示され、タブを選択して
ほお、ひたい、めじりを切り替え表示できる。選択された処理領域について水平方向の解
析線109に沿った赤の濃度分布104とその微分値分布105、垂直方向の解析線11
0に沿った赤の濃度分布106とその微分値分布107が表示されている。そして、濃度
分布および微分値分布には破線で示すしきい値が設定されている。
 しきい値にヒステリシスを持たせて濃度分布および微分値分布とクロスした回数が拡大
画像103のすべての解析線109、110についてカウントされて積算される。微分値
分布での積算結果は、きめの表101に、垂直と水平に分けて数値表示され、濃度分布で
の積算結果は粗さの表100に水平と垂直に分けて数値表示される。水平のクロス数と垂
直のクロス数の比も表100,101にそれぞれ表示される。つまり、微分値分布に現れ
るクロスの間隔は小さな凹凸すなわちきめに相当し、濃度分布に現れるクロスの間隔は大
きなうねり、すなわちしわに相当し、水平/垂直の比はしわやきめの方向性を示している

 確認ボタン108をクリックするまで、それぞれの拡大画像について、水平方向の解析
線109と垂直方向の解析線110をポインタでドラッグして任意の高さ位置へ移動でき
る。そして、移動の都度、そのしきい値による各種パラメータが再演算されて表101、
102、103の各数値が書き換えられる。
As shown in FIG. 10, the analysis screen includes an enlarged visible light image 103 having undergone shading correction.
The analysis line 109 in the horizontal direction and the analysis line 110 in the vertical direction are displayed in a superimposed manner. For the selected processing region, a red density distribution 104 and its differential value distribution 105 along a horizontal analysis line 109, and a vertical analysis line 11
A red density distribution 106 along 0 and its differential value distribution 107 are displayed. A threshold value indicated by a broken line is set in the density distribution and the differential value distribution.
The number of times the threshold value has hysteresis and crosses the density distribution and the differential value distribution is counted and integrated for all the analysis lines 109 and 110 of the enlarged image 103. The integration result in the differential value distribution is displayed numerically in the texture table 101 separately in the vertical and horizontal directions, and the integration result in the density distribution is displayed numerically in the roughness table 100 in the horizontal and vertical directions. The ratio of the number of horizontal crosses to the number of vertical crosses is also displayed in tables 100 and 101, respectively. In other words, the intervals between the crosses appearing in the differential value distribution correspond to small irregularities or textures, the intervals between the crosses appearing in the density distribution correspond to large undulations, ie wrinkles, and the horizontal / vertical ratio indicates the directionality of the wrinkles and textures. ing.
Until the confirmation button 108 is clicked, the horizontal analysis line 109 and the vertical analysis line 110 of each enlarged image can be moved to an arbitrary height position by dragging with a pointer. Each time the vehicle moves, various parameters based on the threshold value are recalculated, and Table 101,
Each numerical value of 102 and 103 is rewritten.

 また、拡大画像の中に設定した複数の小領域で赤、緑、青の濃度平均値を求めて濃度平
均値の標準偏差が演算され、計算結果がその他の表102の均一性の枠に記入される。さ
らに、ほおとひたいの処理領域で肌色が求められ、肌色の灰色レベルが演算されてくすみ
の枠に記入される。
 さらに、拡大画像全体の画素の赤濃度分布121、緑濃度分布122、青濃度分布12
3もグラフで表示され、ピークの形によって肌色のばらつきが視覚的に示される。
In addition, the average density of red, green, and blue is calculated for a plurality of small areas set in the enlarged image, and the standard deviation of the average density is calculated. Is done. Further, the skin color is obtained in the processing area of the cheeks and the gray level of the skin color is calculated and entered in the dull frame.
Further, red density distribution 121, green density distribution 122, and blue density distribution 12 of the pixels of the entire enlarged image
3 is also displayed in a graph, and the variation in skin color is visually indicated by the shape of the peak.

 図11に示すように、ステップ130でパソコン74の診断ソフトが起動されると、ス
テップ131でモーター72を駆動して、蛍光灯80の側を被診断者10側へ向ける。続
いてステップ132で蛍光灯80とブラックライト79に電力供給を開始して常時点灯さ
せる。
 ステップ133では、図9の診断画面が開かれてデジタルカメラ73のライブ画像92
が表示される。ステップ134で撮影ボタン95がクリックされると、ステップ135以
下の撮影と解析が実行されるが、ステップ150で読込ボタン96がクリックされるとス
テップ151以下の再解析が実行される。
As shown in FIG. 11, when the diagnostic software of the personal computer 74 is started in step 130, the motor 72 is driven in step 131 to turn the fluorescent lamp 80 toward the subject 10. Subsequently, in step 132, the power supply to the fluorescent lamp 80 and the black light 79 is started to be constantly turned on.
In step 133, the diagnostic screen shown in FIG.
Is displayed. If the photographing button 95 is clicked in step 134, photographing and analysis in step 135 and subsequent steps are performed. If the read button 96 is clicked in step 150, reanalysis in step 151 and subsequent steps is performed.

 ステップ135では、1回目のシャッターが開かれて可視光撮影が実行され、直ちにス
テップ136でノートパソコン74へ画像が転送される。続いて、ステップ137ではモ
ーター72が駆動され、テーブル76を回転させてブラックライト79を被診断者10へ
向け、向くと同時にステップ138で2回目のシャッターを開いて紫外光撮影を実行する
。そして、ステップ139でモーター72が逆方向に駆動され、テーブル76を回転させ
て蛍光灯80を被診断者10へ向けた状態へ復帰させる。
 その後、ステップ140で紫外光撮影画像データがノートパソコン74へ転送される。
転送完了すると、ステップ141で診断画面に縮小全体画像91が表示され、操作者は、
可視光と紫外光の縮小全体画像91と拡大画像93を確認して必要なら処理領域の設定枠
85、86、87の位置を調整する。
In step 135, the first shutter is opened to perform visible light imaging, and immediately in step 136, the image is transferred to the notebook computer 74. Subsequently, in step 137, the motor 72 is driven to rotate the table 76 so that the black light 79 is directed to the subject 10, and at the same time, the second shutter is opened in step 138 to perform ultraviolet light imaging. Then, in step 139, the motor 72 is driven in the reverse direction, and the table 76 is rotated to return the fluorescent lamp 80 to a state where the fluorescent lamp 80 is directed toward the subject 10.
Thereafter, in step 140, the ultraviolet light image data is transferred to the notebook computer 74.
When the transfer is completed, the reduced whole image 91 is displayed on the diagnosis screen in step 141, and the operator
The entire reduced image 91 and the enlarged image 93 of visible light and ultraviolet light are checked, and if necessary, the positions of the processing area setting frames 85, 86, and 87 are adjusted.

 ステップ142で解析ボタン97がクリックされるとステップ143へ移行して図10
に示す解析画面が表示され、ステップ144では、前回解析と共通のしきい値でパラメー
タが演算される。操作者は、拡大画像103を切り替えてその都度表101、102、1
03の各数値を確認し、必要なら濃度分布104、106および微分値分布105、10
6のグラフ上でしきい値を調整する。
 ステップ145で確認ボタン108がクリックされると、演算されたパラメータ値に基
づいてステップ146で診断結果が作成される。さらに、ここまでの撮影データ処理領域
の拡大画像データ、パラメータ値、診断結果94がまとめられ、診断番号を名前につけた
1つのフォルダに記録保存される。ステップ148で診断結果94を記入した診断画面が
表示され、次の撮影または再解析のスタンバイ状態となる。
When the analysis button 97 is clicked in step 142, the process proceeds to step 143 and FIG.
Is displayed, and in step 144, parameters are calculated using the same threshold value as the previous analysis. The operator switches the magnified image 103 and changes the tables 101, 102, 1 each time.
03, and if necessary, the density distributions 104 and 106 and the differential value distributions 105 and 10
The threshold value is adjusted on the graph of No. 6.
When the confirmation button 108 is clicked in step 145, a diagnosis result is created in step 146 based on the calculated parameter values. Further, the enlarged image data, the parameter values, and the diagnosis results 94 in the imaging data processing area up to this point are collected and stored in one folder with a diagnosis number as a name. In step 148, a diagnostic screen in which the diagnostic result 94 is entered is displayed, and the system enters a standby state for the next imaging or reanalysis.

 一方、ステップ150で診断画面の読込ボタン96がクリックされると、過去のフォル
ダの一覧が示され、1つを選択して開くとそのフォルダの可視光撮影画像データと紫外光
撮影画像データが読み出されて、ステップ151でその縮小全体画像91が表示される。
このとき、前回の解析における設定枠85、86、87や各しきい値なども再現される。
そして、ステップ152で確認ボタン108をクリックするとステップ153で解析画面
が表示される。操作者は、診断画面の縮小全体画像91上で設定枠85、86、87を移
動したり、解析画面の濃度分布104、106、微分値分布105、107上でしきい値
を設定し直すなどして、前回とは異なるパラメータを演算させて、異なった診断結果94
を導くことができる。
 ステップ155で確認ボタン108がクリックされると診断結果94が作成されて診断
画面が表示される。診断結果94が意図した方向に変化していれば、操作者は、保存ボタ
ン99を押して診断フォルダの一覧を表示させ、前回の診断フォルダに上書きするか、新
しいフォルダで新たに記録保存するかを選択し、実行する。
On the other hand, when the read button 96 on the diagnostic screen is clicked in step 150, a list of past folders is displayed, and when one is selected and opened, the visible light image data and the ultraviolet light image data of the folder are read. Then, at step 151, the reduced whole image 91 is displayed.
At this time, the setting frames 85, 86, 87 and the respective threshold values in the previous analysis are also reproduced.
Then, when the confirmation button 108 is clicked in step 152, an analysis screen is displayed in step 153. The operator moves the setting frames 85, 86, and 87 on the reduced whole image 91 of the diagnostic screen, resets the thresholds on the density distributions 104 and 106, and the differential value distributions 105 and 107 on the analysis screen. Then, a parameter different from the previous one is calculated, and a different diagnosis result 94 is obtained.
Can be led.
When the confirmation button 108 is clicked in step 155, a diagnosis result 94 is created and a diagnosis screen is displayed. If the diagnostic result 94 has changed in the intended direction, the operator presses the save button 99 to display a list of diagnostic folders, and determines whether to overwrite the previous diagnostic folder or to newly record and save the new diagnostic folder. Select and execute.

 第3実施例のデジタルズーム肌診断装置によれば、ブラックライト79で照明してその
蛍光画像を撮影するから、蛍光画像を利用してしみ、皮脂、水分、角質層の厚さ、毛穴な
どのパラメータを正確に診断できる。従って、肌状態のさらに総合的な評価が可能になる
とともに、水分センサや皮脂センサを別途設けなくても、皮脂量と水分量を診断すること
ができる。
 また、蛍光灯80とブラックライト79はテーブル76に乗せて常時点灯するから、撮
影ごとに点灯する場合に比較して放電開始後の不安定を回避でき、光量が安定して再現性
の高い撮影を実行できる。
 また、ブラックライト79は、紫外光撮影の直前に被診断者10へ向かわせ、撮影後は
、画像転送にも先立たせて真っ先に退去させ、被診断者10へ向ける時間を最短にして不
要な紫外線被爆を避けているから、被診断者が望まない日焼けや紫外線アレルギーを起こ
すことがない。
 また、蛍光灯80とブラックライト79はテーブル76を回転して切り替えるから配置
スペースが節約され、デジタルカメラ73の光路を十分に確保しつつ被診断者10の顔を
近くで効率的に照明できる。光学系の遮蔽壁を含む装置全体がコンパクトに構成され駆動
機構も簡単だから、安価で使いやすく持ち運びにも有利なシステムを提供できる。
According to the digital zoom skin diagnostic apparatus of the third embodiment, since the fluorescent image is captured by illuminating with the black light 79, the fluorescent image is used, and parameters such as spots, sebum, moisture, thickness of the stratum corneum, pores, and the like are used. Can be diagnosed accurately. Therefore, the skin condition can be more comprehensively evaluated, and the amount of sebum and the amount of water can be diagnosed without separately providing a moisture sensor and a sebum sensor.
In addition, since the fluorescent lamp 80 and the black light 79 are always lit on the table 76, instability after the start of discharge can be avoided as compared with the case where the fluorescent lamp 80 and the black light 79 are lit for each photographing. Can be executed.
Further, the black light 79 is directed to the subject 10 immediately before the ultraviolet light imaging, and after the imaging, the black light 79 is first departed prior to the image transfer, thereby minimizing the time required for directing the subject 10 to the unnecessary. Avoids exposure to UV radiation, so that the subject does not suffer from unwanted sunburn or UV allergy.
In addition, since the fluorescent lamp 80 and the black light 79 are switched by rotating the table 76, the arrangement space is saved, and the face of the subject 10 can be efficiently illuminated nearby while the optical path of the digital camera 73 is sufficiently secured. Since the entire apparatus including the shielding wall of the optical system is compactly configured and the driving mechanism is simple, it is possible to provide a system which is inexpensive, easy to use, and advantageous to carry.

 また、あご乗せ78を設けて被診断者の顔の位置が毎回一定に再現されるようにしたか
ら、顔の照明状態や拡大倍率の変動が少なくなり、デジタルカメラ73の焦点ずれもおき
にくい。
 また、縮小全体画像91と拡大画像93にタブを設けて複数画像から選択表示できるよ
うにし、最前面に観察と調整の頻度の高い可視光画像とほお画像を配置したから、画面に
全部並べる場合に比較して見やすい大きな画像を利用でき、選択と観察と設定を間違いな
く効率的かつ迅速に実行できる。
In addition, since the chin rest 78 is provided so that the position of the face of the person to be diagnosed is constantly reproduced every time, fluctuations in the illumination state and magnification of the face are reduced, and the focus of the digital camera 73 is hardly shifted.
Also, tabs are provided in the reduced whole image 91 and the enlarged image 93 so that a plurality of images can be selected and displayed, and a visible light image and a cheek image that are frequently observed and adjusted are arranged on the foreground. A large image that is easy to see compared to is available, and selection, observation, and setting can definitely be performed efficiently and quickly.

 また、設定枠85、86、87やしきい値は前回の撮影解析時と同じものを再現し、必
要に応じて縮小全体画像91上や濃度分布104、106等で調整できるようにしたから
、その都度設定し直す場合に比較して設定による誤差が少なく、ほくろや髪の毛と言った
錯乱要因がある場合にはそれを回避して設定枠85、86、87を設定するなどの柔軟な
対応が可能である。
 また、撮影解析ごとに画像データと診断結果をまとめて1つの診断フォルダに記録し、
後から診断フォルダを開いて同じ画像データを用いて再解析、再診断を行えるようにした
から、実情と合わない診断結果が出た場合に、同じ被診断者10を呼び出して撮影を繰り
返すことなく、その原因を分析したり、実情と合う形に診断結果を訂正することが可能で
ある。そして、再解析の場合でも、最初にしきい値などの解析条件もまとめて再現するか
ら、診断結果の解析と修整はさらに容易である。
Also, the setting frames 85, 86, 87 and threshold values reproduce the same as those at the time of the previous shooting analysis, and can be adjusted on the reduced whole image 91, the density distributions 104, 106, etc. as necessary. There is less error due to the setting than in the case of resetting each time, and when there are confusion factors such as moles and hair, flexible measures such as setting the setting frames 85, 86 and 87 by avoiding them are provided. It is possible.
In addition, the image data and the diagnostic results are collectively recorded for each imaging analysis in one diagnostic folder,
Since the diagnosis folder can be opened later and re-analysis and re-diagnosis can be performed using the same image data, when a diagnosis result that does not match the actual situation is obtained, the same diagnosis subject 10 is not called and the imaging is not repeated. It is possible to analyze the cause or correct the diagnosis result in a way that matches the actual situation. Then, even in the case of re-analysis, the analysis conditions such as the threshold value are also collectively reproduced first, so that the analysis and the modification of the diagnosis result are further easier.

 なお、第3実施例のデジタルズーム診断装置では、蛍光灯80とブラックライト79を
使用して照明を可視光と紫外光に切り替えたが、可視光を自然光や白色LEDやストロボ
光に置き換えてもよく、紫外光を特殊なストロボやLEDやレーザーで発生させてもよい

また、可視光と赤外光、可視光と電波(水分検知用)、単色光と白色光など、第3実施例
とは異なる照射内容の組み合わせを利用してもよい。
 また、手動操作で処理領域を設定したが、顔の輪郭や目を自動検出して処理領域を自動
設定してもよい。また、マウスポイントをドラッグして可変の大きさの処理領域を設定す
る代わりに、顔画像に重ねて表示された一定大きさの枠画像をマウスでドラッグして任意
の位置に移動することにより、常に一定サイズの処理領域を設定できるようにしてもよい
In the digital zoom diagnostic apparatus of the third embodiment, the illumination is switched between visible light and ultraviolet light using the fluorescent lamp 80 and the black light 79, but the visible light may be replaced with natural light, white LED, or strobe light. Alternatively, ultraviolet light may be generated by a special strobe, LED, or laser.
Further, a combination of irradiation contents different from the third embodiment, such as visible light and infrared light, visible light and radio wave (for detecting moisture), monochromatic light and white light, may be used.
Further, the processing area is set manually, but the processing area may be automatically set by automatically detecting the contours and eyes of the face. Also, instead of dragging the mouse point to set a processing area of variable size, by dragging the frame image of a certain size displayed over the face image with the mouse and moving it to an arbitrary position, A processing area of a fixed size may always be set.

第1実施例のデジタルズーム肌診断装置の側面図である。It is a side view of the digital zoom skin diagnostic device of the first embodiment. モニタ画面表示の説明図である。It is an explanatory view of a monitor screen display. 診断処理のフローチャートである。It is a flowchart of a diagnostic process. 皮膚のパラメータの演算方法の説明図である。It is explanatory drawing of the calculation method of the parameter of skin. 第2実施例のデジタルズーム肌診断装置の説明図である。It is explanatory drawing of the digital zoom skin diagnosis apparatus of 2nd Example. モニタ画面表示の説明図である。It is an explanatory view of a monitor screen display. 第3実施例のデジタルズーム肌診断装置の説明図である。It is explanatory drawing of the digital zoom skin diagnosis apparatus of 3rd Example. 照明切替えの説明図である。It is explanatory drawing of lighting switching. 診断画面の説明図である。It is an explanatory view of a diagnostic screen. 解析画面の説明図である。It is an explanatory view of an analysis screen. 診断ソフトのフローチャートである。It is a flowchart of diagnostic software.

符号の説明Explanation of reference numerals

10 被診断者
11 撮影室
12 機械室
13 デジタルカメラ
14 パソコン(制御手段、演算手段)
15 プリンタ(出力手段)
16 液晶モニタ画面(出力手段)
17、57 画角(撮影領域)
18 スイッチ
19 光源
20、80 蛍光灯(高周波駆動)
21 踏み台(規制手段、狭い)
22 イス(規制手段、ハイバック型)
23 青い背景スクリーン
30 背景
31、60 顔全体の縮小画像
32、33、34、61、62 拡大画像(表示領域に対応)
35、36、37 枠(処理領域)
41 平均値
42、43 しきい値
50 カウンセラー
53、73 デジタルカメラ
54、74 ノートパソコン
55 ストロボ
56 モニタ画面
63 質問表
64 診断ボタン
70 肌診断システム
71 証明制御部
72 モーター
75 プーリー
76 テーブル
77 タイミングベルト
78 あご乗せ
79 ブラックライト
81 拡散板
84 暗箱
85、86、87 枠
91 縮小全体画像
92 ライブ画像
93 拡大画像
94 解析結果
95 撮影ボタン
96 読み込みボタン
97 解析ボタン
98 印刷ボタン
99 保存ボタン
100、101、102 表
103 拡大画像
104、106 濃度分布
105、107 微分値分布
109、110 解析線
10 person to be diagnosed 11 imaging room 12 machine room 13 digital camera 14 personal computer (control means, arithmetic means)
15 Printer (output means)
16 LCD monitor screen (output means)
17,57 Angle of view (shooting area)
18 Switch 19 Light source 20, 80 Fluorescent lamp (high frequency drive)
21 Step platform (regulatory means, narrow)
22 chairs (regulatory means, high-back type)
23 Blue background screen 30 Background 31, 60 Reduced image 32, 33, 34, 61, 62 of entire face Enlarged image (corresponding to display area)
35, 36, 37 frames (processing area)
41 Average value 42, 43 Threshold value 50 Counselor 53, 73 Digital camera 54, 74 Notebook computer 55 Strobe 56 Monitor screen 63 Questionnaire 64 Diagnostic button 70 Skin diagnostic system 71 Certification control unit 72 Motor 75 Pulley 76 Table 77 Timing belt 78 Chin rest 79 Black light 81 Diffusion plate 84 Dark box 85, 86, 87 Frame 91 Reduced whole image 92 Live image 93 Enlarged image 94 Analysis result 95 Shooting button 96 Read button 97 Analysis button 98 Print button 99 Save button 100, 101, 102 Table 103 Enlarged image 104, 106 Density distribution 105, 107 Differential value distribution 109, 110 Analysis line

 本発明のデジタルズーム肌診断装置は、デジタルカメラで撮影した顔全体の撮影画像データに少なくとも1個の処理領域を設定して処理領域の画像データを切り出し、切り出した処理領域の画像データを処理して皮膚のパラメータを演算するデジタルズーム肌診断装置において、撮像素子の画素数が多いデジタルカメラで出力データサイズの大きな顔全体の高解像度画像を撮影し、画像上で任意に配置を設定可能な解析線を重ねた処理領域の拡大画像と並べて、この解析線に沿った濃度分布のグラフをモニタ画面に表示し、このグラフ上で設定したしきい値に基づいて濃度分布の凹凸をカウントすることにより皮膚のパラメータを求めるものである。 The digital zoom skin diagnostic apparatus of the present invention sets at least one processing region in photographed image data of the entire face photographed by a digital camera, cuts out the image data of the processing region, and processes the image data of the cut out processing region. In a digital zoom skin diagnostic device that calculates the parameters of the skin, a high resolution image of the entire face with a large output data size is captured by a digital camera with a large number of pixels of the image sensor, and an analysis line that can be arbitrarily set on the image is created. Along with the enlarged image of the overlapped processing area, a graph of the density distribution along the analysis line is displayed on the monitor screen, and the unevenness of the density distribution is counted based on the threshold value set on this graph. This is for obtaining parameters.

 本発明のデジタルズーム肌診断装置では、顔全体を撮影した高解像度大容量のデジタル撮影画像データから処理領域の画像データを切り出し、処理領域を横断する解析線に沿った濃度分布を抽出して、濃度分布の微小な凹凸をカウントすることにより、皮膚のきめのパラメータが演算される。
 モニタ画面には、位置変更が可能な解析線で関連付けられた処理領域の拡大画像と濃度分布のグラフが一緒に表示されるから、拡大画像上で解析線を移動して任意の位置の解析線に沿った濃度分布をグラフで確認できる。また、皮膚のパラメータを求めるためのしきい値を濃度分布のグラフ上で設定するから、しきい値の設定に際して拡大画像と濃度グラフを参照できる。
In the digital zoom skin diagnostic apparatus of the present invention, image data of a processing region is cut out from high-resolution large-capacity digital photographed image data of the entire face, and a density distribution along an analysis line crossing the processing region is extracted. By counting the minute irregularities in the distribution, the texture parameters of the skin are calculated.
On the monitor screen, an enlarged image of the processing area and a graph of the density distribution associated with the analysis line whose position can be changed are displayed together. Can be confirmed by a graph. In addition, since the threshold for obtaining the parameters of the skin is set on the graph of the density distribution, it is possible to refer to the enlarged image and the density graph when setting the threshold.

 本発明のデジタルズーム肌診断装置では、拡大画像と濃度分布のグラフを同一画面に表示して、そのグラフ上でしきい値を設定できるから、必要に応じてしきい値を調整でき、ほくろや髪の毛といった錯乱要因がある場合にはそれを回避して処理領域を設定するなどの柔軟な対応が可能となる。
 また、顔全体の撮影画像データから処理領域の画像データを切り出してパラメータ演算を行うから、複数の測定領域でパラメータを求める場合でも、複数種類のパラメータを求める場合でも、基本的に撮影回数が1回で済み、解析場所ごとに撮影を行う必要がない。そして、演算されたパラメータが適正でなければ、同じ撮影画像データから別の場所の画像データを切り取ったり、適用するしきい値などの解析条件を変化させて同じ画像データを再解析したりしてパラメータを修正できるから、わざわざ撮影をやり直す必要がない。
In the digital zoom skin diagnosis apparatus of the present invention, the enlarged image and the graph of the density distribution can be displayed on the same screen, and the threshold can be set on the graph. Therefore, the threshold can be adjusted as necessary, and the mole and hair can be adjusted. If there is such a confusion factor, it is possible to flexibly cope with the problem by setting a processing area while avoiding the confusion factor.
In addition, since the image data of the processing area is cut out from the captured image data of the entire face and the parameter calculation is performed, the number of times of capturing is basically 1 regardless of whether the parameter is obtained in a plurality of measurement areas or a plurality of types of parameters. It only needs to be performed once, and there is no need to take images for each analysis location. If the calculated parameter is not appropriate, the image data at another location is cut out from the same captured image data, or the same image data is re-analyzed by changing an analysis condition such as a threshold to be applied. Since the parameters can be corrected, there is no need to redo shooting.

Claims (10)

 撮像素子の画素数が多いデジタルカメラで出力データサイズの大きな顔全体の高解像度
画像を撮影し、撮影した顔全体の撮影画像データに少なくとも1個の処理領域を設定して
処理領域の画像データを切り出し、切り出した処理領域の画像データを処理して皮膚のパ
ラメータを演算するデジタルズーム肌診断装置において、
 処理領域を横断する解析線に沿った濃度分布を抽出し、濃度分布の凹凸をカウントする
ことにより皮膚のきめのパラメータを求めることを特徴とするデジタルズーム肌診断装置
A high-resolution image of the entire face having a large output data size is captured by a digital camera having a large number of pixels of an image sensor, and at least one processing area is set in the captured image data of the entire captured face to convert the image data of the processing area. In the digital zoom skin diagnostic apparatus that calculates the parameters of the skin by processing the image data of the processing area that has been cut out,
A digital zoom skin diagnostic apparatus characterized by extracting a density distribution along an analysis line traversing a processing area, and calculating skin texture parameters by counting unevenness of the density distribution.
 請求項1のデジタルズーム肌診断装置において、
 処理領域を横断する解析線に沿った濃度分布に凹凸の振幅よりも大きなしきい値を設定
して凹凸のうねりをカウントすることによりしわのパラメータを求めることを特徴とする
デジタルズーム肌診断装置。
The digital zoom skin diagnosis device according to claim 1,
A digital zoom skin diagnosis apparatus characterized in that a threshold value larger than the amplitude of unevenness is set in a density distribution along an analysis line traversing a processing region, and wrinkle parameters are obtained by counting unevenness waviness.
 請求項1のデジタルズーム肌診断装置において、
 処理領域を横断する直線に沿った濃度分布の微分関数にしきい値を設定して濃度分布の
凹凸をカウントすることを特徴するデジタルズーム肌診断装置。
The digital zoom skin diagnosis device according to claim 1,
A digital zoom skin diagnostic apparatus characterized in that a threshold value is set for a differential function of a density distribution along a straight line traversing a processing area to count unevenness of the density distribution.
 デジタルカメラで顔全体の高解像度画像を撮影し、撮影した顔全体の撮影画像データに
少なくとも1個の処理領域を設定して処理領域の画像データを切り出し、切り出した処理
領域の画像データを処理して皮膚のパラメータを演算するデジタルズーム肌診断装置にお
いて、
 被診断者に向けて配置された撮像素子の画素数が多くて出力データサイズの大きなデジ
タルカメラと、
 皮膚のパラメータの演算処理の設定を行う解析画面を表示するモニタ画面と、
 処理領域を横断する解析線に沿った濃度分布のグラフを作成して、解析線を重ねた処理
領域の拡大画像と並べてモニタ画面に表示する演算手段とを有することを特徴とするデジ
タルズーム肌診断装置。
A high-resolution image of the entire face is photographed with a digital camera, at least one processing region is set in the photographed image data of the photographed entire face, and image data of the processing region is cut out. The image data of the cut out processing region is processed. A digital zoom skin diagnostic device that calculates skin parameters by
A digital camera having a large output data size with a large number of pixels of an image sensor arranged toward the subject;
A monitor screen for displaying an analysis screen for setting the arithmetic processing of the skin parameters,
A digital zoom skin diagnostic apparatus comprising: a calculating means for forming a graph of a density distribution along an analysis line crossing the processing area, and displaying the graph on a monitor screen along with an enlarged image of the processing area on which the analysis line is superimposed. .
 請求項4のデジタルズーム肌診断装置において、
 モニタ画面上で解析線をドラッグ操作して処理領域の任意の位置へ移動でき、解析線を
移動すると、新しい位置の解析線に沿った濃度分布のグラフが作成されて先のグラフを置
き換えて表示されることを特徴とするデジタルズーム肌診断装置。
The digital zoom skin diagnostic device according to claim 4,
You can drag the analysis line on the monitor screen and move it to any position in the processing area, and when you move the analysis line, a graph of the concentration distribution along the analysis line at the new position is created and replaced with the previous graph and displayed A digital zoom skin diagnostic apparatus characterized by being performed.
 請求項4のデジタルズーム肌診断装置において、
 同じモニタ画面上に処理領域全体での赤、緑、青の濃度値のばらつきを示す赤濃度分布
、緑濃度分布、および青濃度分布のグラフが表示されることを特徴とするデジタルズーム
肌診断装置。
The digital zoom skin diagnostic device according to claim 4,
A digital zoom skin diagnostic apparatus characterized by displaying a graph of red density distribution, green density distribution, and blue density distribution indicating variations in red, green, and blue density values over the entire processing area on the same monitor screen.
 デジタルカメラで顔全体の高解像度画像を撮影し、撮影した顔全体の撮影画像データに
少なくとも1個の処理領域を設定して処理領域の画像データを切り出し、切り出した処理
領域の画像データを処理して皮膚のパラメータを演算するデジタルズーム肌診断装置にお
いて、
 被診断者に向けて配置された撮像素子の画素数が多くて出力データサイズの大きなデジ
タルカメラと、
 皮膚のパラメータの演算処理の設定を行う解析画面を表示するモニタ画面と、
 処理領域を横断する解析線に沿った濃度分布を抽出し、適用されるしきい値を重ねた濃
度分布のグラフとしきい値に基づいて演算されたパラメータの数値とをモニタ画面に並べ
て表示する演算手段とを有することを特徴とするデジタルズーム肌診断装置。
A high-resolution image of the entire face is photographed with a digital camera, at least one processing region is set in the photographed image data of the photographed entire face, and image data of the processing region is cut out. The image data of the cut out processing region is processed. A digital zoom skin diagnostic device that calculates skin parameters by
A digital camera having a large output data size with a large number of pixels of an image sensor arranged toward the subject;
A monitor screen for displaying an analysis screen for setting the arithmetic processing of the skin parameters,
Calculation to extract the density distribution along the analysis line crossing the processing area, display the density distribution graph with the applied thresholds superimposed, and the parameter values calculated based on the thresholds side by side on the monitor screen And a digital zoom skin diagnostic apparatus.
 請求項7のデジタルズーム肌診断装置において、
 モニタ画面上でしきい値を上下にドラッグ操作して濃度分布の任意の位置へ移動でき、
しきい値を移動すると、新しい位置のしきい値に基づいて演算したパラメータ数値が先の
パラメータ数値を置き換えて表示されることを特徴とするデジタルズーム肌診断装置。
The digital zoom skin diagnosis device according to claim 7,
Drag the threshold up and down on the monitor screen to move it to any position in the density distribution.
A digital zoom skin diagnostic apparatus wherein a parameter value calculated based on a threshold value at a new position is displayed by replacing the previous parameter value when the threshold value is moved.
 請求項7のデジタルズーム肌診断装置において、
 しきい値にヒステリシスを持たせてしきい値と濃度分布のクロス回数をカウントするこ
とにより皮膚のパラメータを求めることを特徴とするデジタルズーム肌診断装置。
The digital zoom skin diagnosis device according to claim 7,
A digital zoom skin diagnostic apparatus characterized in that a threshold value has hysteresis and a skin parameter is obtained by counting the number of crossings between the threshold value and the density distribution.
 請求項4または7のデジタルズーム肌診断装置において、
 処理領域に対応する設定枠を重ねた顔全体の縮小全体画像と処理領域の拡大画像と診断
結果を並べて表示する診断画面が最初のモニタ画面に表示され、診断画面上で解析の指令
操作を実行すると、診断画面に置き換えて解析画面が表示されることを特徴とするデジタ
ルズーム肌診断装置。
The digital zoom skin diagnostic device according to claim 4 or 7,
A diagnostic screen is displayed on the first monitor screen that displays the reduced whole image of the entire face with the setting frame corresponding to the processing area superimposed, the enlarged image of the processing area, and the diagnostic result side by side, and executes the analysis command operation on the diagnostic screen Then, an analysis screen is displayed in place of the diagnosis screen.
JP2003371399A 2002-07-09 2003-10-31 Digital zoom skin diagnostic device Expired - Fee Related JP3530523B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003371399A JP3530523B1 (en) 2002-07-09 2003-10-31 Digital zoom skin diagnostic device

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2002199539 2002-07-09
JP2002-199539 2002-07-09
JP2002199539 2002-07-09
JP2003371399A JP3530523B1 (en) 2002-07-09 2003-10-31 Digital zoom skin diagnostic device

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2003288230A Division JP3499865B1 (en) 2002-07-09 2003-07-03 Digital zoom skin diagnostic device

Publications (2)

Publication Number Publication Date
JP2004105748A true JP2004105748A (en) 2004-04-08
JP3530523B1 JP3530523B1 (en) 2004-05-24

Family

ID=32300187

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003371399A Expired - Fee Related JP3530523B1 (en) 2002-07-09 2003-10-31 Digital zoom skin diagnostic device

Country Status (1)

Country Link
JP (1) JP3530523B1 (en)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007221450A (en) * 2006-02-16 2007-08-30 Canon Inc Digital camera and control method
US8007062B2 (en) 2005-08-12 2011-08-30 Tcms Transparent Beauty Llc System and method for applying a reflectance modifying agent to improve the visual attractiveness of human skin
US8184901B2 (en) 2007-02-12 2012-05-22 Tcms Transparent Beauty Llc System and method for applying a reflectance modifying agent to change a person's appearance based on a digital image
US8591414B2 (en) 2005-04-28 2013-11-26 Shiseido Company, Ltd. Skin state analyzing method, skin state analyzing apparatus, and computer-readable medium storing skin state analyzing program
US8942775B2 (en) 2006-08-14 2015-01-27 Tcms Transparent Beauty Llc Handheld apparatus and method for the automated application of cosmetics and other substances
KR20160039881A (en) * 2014-10-02 2016-04-12 주식회사 엘지유플러스 Method for outputting an skin analysing result, apparatus and application therefor
US10092082B2 (en) 2007-05-29 2018-10-09 Tcms Transparent Beauty Llc Apparatus and method for the precision application of cosmetics
US10486174B2 (en) 2007-02-12 2019-11-26 Tcms Transparent Beauty Llc System and method for applying a reflectance modifying agent electrostatically to improve the visual attractiveness of human skin
US11069057B2 (en) 2016-05-25 2021-07-20 Panasonic Intellectual Property Management Co., Ltd. Skin diagnostic device and skin diagnostic method

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03118036A (en) * 1989-09-30 1991-05-20 Kanebo Ltd Evaluating method for skin state and device used therefor
JPH05329133A (en) * 1992-06-03 1993-12-14 Pola Chem Ind Inc Detection method of feature of figure for surface of skin
JPH0719839A (en) * 1993-06-30 1995-01-20 Shiseido Co Ltd Surface condition analyzing system
JPH0998961A (en) * 1995-10-09 1997-04-15 Hitachi Ltd Method of image display
JP2001000419A (en) * 1999-06-14 2001-01-09 Procter & Gamble Co:The Skin imaging and analyzing system and method for the same

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03118036A (en) * 1989-09-30 1991-05-20 Kanebo Ltd Evaluating method for skin state and device used therefor
JPH05329133A (en) * 1992-06-03 1993-12-14 Pola Chem Ind Inc Detection method of feature of figure for surface of skin
JPH0719839A (en) * 1993-06-30 1995-01-20 Shiseido Co Ltd Surface condition analyzing system
JPH0998961A (en) * 1995-10-09 1997-04-15 Hitachi Ltd Method of image display
JP2001000419A (en) * 1999-06-14 2001-01-09 Procter & Gamble Co:The Skin imaging and analyzing system and method for the same

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8591414B2 (en) 2005-04-28 2013-11-26 Shiseido Company, Ltd. Skin state analyzing method, skin state analyzing apparatus, and computer-readable medium storing skin state analyzing program
US8007062B2 (en) 2005-08-12 2011-08-30 Tcms Transparent Beauty Llc System and method for applying a reflectance modifying agent to improve the visual attractiveness of human skin
US11445802B2 (en) 2005-08-12 2022-09-20 Tcms Transparent Beauty, Llc System and method for applying a reflectance modifying agent to improve the visual attractiveness of human skin
US11147357B2 (en) 2005-08-12 2021-10-19 Tcms Transparent Beauty, Llc System and method for applying a reflectance modifying agent to improve the visual attractiveness of human skin
US8915562B2 (en) 2005-08-12 2014-12-23 Tcms Transparent Beauty Llc System and method for applying a reflectance modifying agent to improve the visual attractiveness of human skin
US10016046B2 (en) 2005-08-12 2018-07-10 Tcms Transparent Beauty, Llc System and method for applying a reflectance modifying agent to improve the visual attractiveness of human skin
US9247802B2 (en) 2005-08-12 2016-02-02 Tcms Transparent Beauty Llc System and method for medical monitoring and treatment through cosmetic monitoring and treatment
JP2007221450A (en) * 2006-02-16 2007-08-30 Canon Inc Digital camera and control method
JP4689490B2 (en) * 2006-02-16 2011-05-25 キヤノン株式会社 Digital camera and control method thereof
US9449382B2 (en) 2006-08-14 2016-09-20 Tcms Transparent Beauty, Llc System and method for applying a reflectance modifying agent to change a persons appearance based on a digital image
US8942775B2 (en) 2006-08-14 2015-01-27 Tcms Transparent Beauty Llc Handheld apparatus and method for the automated application of cosmetics and other substances
US10043292B2 (en) 2006-08-14 2018-08-07 Tcms Transparent Beauty Llc System and method for applying a reflectance modifying agent to change a person's appearance based on a digital image
US10163230B2 (en) 2007-02-12 2018-12-25 Tcms Transparent Beauty Llc System and method for applying a reflectance modifying agent to change a person's appearance based on a digital image
US10467779B2 (en) 2007-02-12 2019-11-05 Tcms Transparent Beauty Llc System and method for applying a reflectance modifying agent to change a person's appearance based on a digital image
US10486174B2 (en) 2007-02-12 2019-11-26 Tcms Transparent Beauty Llc System and method for applying a reflectance modifying agent electrostatically to improve the visual attractiveness of human skin
US8582830B2 (en) 2007-02-12 2013-11-12 Tcms Transparent Beauty Llc System and method for applying a reflectance modifying agent to change a persons appearance based on a digital image
US8184901B2 (en) 2007-02-12 2012-05-22 Tcms Transparent Beauty Llc System and method for applying a reflectance modifying agent to change a person's appearance based on a digital image
US10092082B2 (en) 2007-05-29 2018-10-09 Tcms Transparent Beauty Llc Apparatus and method for the precision application of cosmetics
KR20160039881A (en) * 2014-10-02 2016-04-12 주식회사 엘지유플러스 Method for outputting an skin analysing result, apparatus and application therefor
KR101701210B1 (en) * 2014-10-02 2017-02-01 주식회사 엘지유플러스 Method for outputting an skin analysing result, apparatus and application therefor
US11069057B2 (en) 2016-05-25 2021-07-20 Panasonic Intellectual Property Management Co., Ltd. Skin diagnostic device and skin diagnostic method

Also Published As

Publication number Publication date
JP3530523B1 (en) 2004-05-24

Similar Documents

Publication Publication Date Title
JP5080060B2 (en) Skin condition analysis method, skin condition analysis apparatus, skin condition analysis program, and recording medium on which the program is recorded
US20040028263A1 (en) Digital zoom skin diagnostic apparatus
EP1189536B1 (en) Skin imaging and analysis methods
US7477767B2 (en) Systems and methods for analyzing skin conditions of people using digital images
TWI512643B (en) Face recognition system and method
US20120206587A1 (en) System and method for scanning a human body
EP1433418A1 (en) Skin diagnostic imaging method and apparatus
US20200196863A1 (en) Systems and methods for improved ophthalmic imaging
US9992409B2 (en) Digital mirror apparatus
JP3499865B1 (en) Digital zoom skin diagnostic device
JP2023040229A (en) Apparatus and method for visualizing cosmetic skin attributes
US20170311872A1 (en) Organ image capture device and method for capturing organ image
US20150036898A1 (en) Station for acquiring biometric and biographic data
JP2004105748A (en) Digital zooming skin diagnosing device
JP2008167853A (en) Test sheet, object diagnostic apparatus and method, and program
JP2009000410A (en) Image processor and image processing method
JP3517660B1 (en) Digital zoom skin diagnostic device
JP3517659B2 (en) Digital zoom skin diagnostic device
JP5399874B2 (en) Image processing apparatus and image processing method
JP3524916B1 (en) Digital zoom skin diagnostic device
WO2007035829A2 (en) Systems and methods for analyzing skin conditions of people using digital images
JP2009003842A (en) Image processor and image processing method
JP2017023474A (en) Skin pore analysis apparatus, skin pore analysis method and program for use in device
JP2005034424A (en) Method and apparatus for evaluating the state of skin surface
JP2004329620A (en) Imaging unit

Legal Events

Date Code Title Description
A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20040107

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040120

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040126

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20040224

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20040227

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees