WO2015049936A1 - 器官画像撮影装置 - Google Patents

器官画像撮影装置 Download PDF

Info

Publication number
WO2015049936A1
WO2015049936A1 PCT/JP2014/072408 JP2014072408W WO2015049936A1 WO 2015049936 A1 WO2015049936 A1 WO 2015049936A1 JP 2014072408 W JP2014072408 W JP 2014072408W WO 2015049936 A1 WO2015049936 A1 WO 2015049936A1
Authority
WO
WIPO (PCT)
Prior art keywords
organ
image
tongue
image data
glossiness
Prior art date
Application number
PCT/JP2014/072408
Other languages
English (en)
French (fr)
Inventor
松田　伸也
Original Assignee
コニカミノルタ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by コニカミノルタ株式会社 filed Critical コニカミノルタ株式会社
Priority to EP14850255.2A priority Critical patent/EP3053514A1/en
Priority to US15/023,645 priority patent/US20160210746A1/en
Priority to JP2015540425A priority patent/JPWO2015049936A1/ja
Publication of WO2015049936A1 publication Critical patent/WO2015049936A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A61B5/0088—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for oral or dental tissue
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/45—For evaluating or diagnosing the musculoskeletal system or teeth
    • A61B5/4538—Evaluating a particular part of the muscoloskeletal system or a particular medical condition
    • A61B5/4542—Evaluating the mouth, e.g. the jaw
    • A61B5/4552—Evaluating soft tissue within the mouth, e.g. gums or tongue
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/48—Other medical applications
    • A61B5/4854—Diagnosis based on concepts of traditional oriental medicine
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • G06T7/0014—Biomedical image inspection using an image reference approach
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/12—Edge-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/13—Edge detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing

Definitions

  • the present invention relates to an organ image photographing apparatus for detecting the glossiness of the surface of an organ based on an image obtained by photographing a living organ.
  • a diagnostic technique for diagnosing a health condition or medical condition by observing the state of a human tongue.
  • the physical condition and health level are judged based on the color and shape of the tongue (more precisely, tongue and moss).
  • One of the diagnostic items in tongue examination is the wetness of the tongue surface (also called moistening).
  • moistening When water in the body is insufficient, the water content of the tongue cells is reduced and the surface is dried.
  • Oriental medicine this condition is called takuyaku, and it develops due to fever and inflammation. When the abnormal state progresses, it falls into a serious state such as dehydration.
  • Patent Document 1 white having a constant brightness (90% or more of the maximum luminance value) is obtained from a photographed image obtained by applying illumination light to the tongue and receiving the reflected light with a camera.
  • the wetness of the tongue is measured by detecting the skipped pixels and counting the number of pixels. That is, the glossiness of the tongue surface is detected based on the luminance information included in the reflected light from the tongue.
  • Patent Document 2 an integrating sphere in which a plurality of openings are formed, a diffusion light source device that irradiates the integrating sphere with light so that the subject is not directly irradiated with light from any opening of the integrating sphere, A glossy light source device that emits light so that light directly hits the subject through one of the openings of the integrating sphere and the specularly reflected light that hits the tongue surface enters the camera.
  • Japanese Patent Laying-Open No. 2005-137756 see paragraphs [0082] to [0084], FIG. 9 etc.
  • Japanese Patent Laying-Open No. 2011-239926 see paragraphs [0024] to [0025], FIG. 1, FIG. 2, etc.
  • the luminance data Y includes RGB color information
  • the luminance data Y when any of the RGB colors changes, the luminance data Y also changes.
  • the R and G color components in the photographed image of the tongue are more likely to vary depending on the individual's physical condition and individual differences than the B color component.
  • the redness of the tongue color R
  • the luminance information changes and the detected glossiness changes.
  • the tongue is light red and the moss is white and thick, the brightness increases and the glossiness increases. As a result, the accuracy of glossiness detection decreases.
  • Patent Document 2 when acquiring only the gloss data of the tongue surface, as described above, only the image data of the tongue surface color and the image data including both the color and gloss of the tongue surface are acquired. However, since it is necessary to use an integrating sphere for sufficiently diffusing the illumination light when acquiring image data of only the color, the apparatus becomes large and the cost increases.
  • the present invention has been made to solve the above problems, and an object thereof is to provide an organ imaging apparatus capable of accurately detecting the glossiness of the surface of an organ with a small and low-cost configuration. There is to do.
  • An organ imaging apparatus includes an imaging unit that captures an image of a living body and acquires an image, and detection that detects features of the organ based on the image acquired by the imaging unit
  • An organ imaging apparatus comprising: a detection unit configured to extract blue component image data from a photographed image of the organ, and based on only the extracted blue component image data, Detect glossiness.
  • the glossiness of the organ surface can be accurately detected with a small and low-cost configuration.
  • the numerical value range includes the values of the lower limit A and the upper limit B.
  • FIG. 1 is a perspective view showing an external appearance of an organ image photographing apparatus 1 of the present embodiment
  • FIG. 2 is a block diagram showing a schematic configuration of the organ image photographing apparatus 1.
  • the organ image capturing apparatus 1 captures an organ of a living body and extracts information necessary for diagnosis.
  • the object to be imaged is a tongue as an organ of a living body
  • the information necessary for diagnosis is the glossiness of the tongue surface (degree of wetness).
  • the organ image photographing apparatus 1 includes an illumination unit 2, an imaging unit 3, a display unit 4, an operation unit 5, a detection unit 6, a storage unit 7, a communication unit 8, and a control unit 9.
  • the illumination unit 2 is provided in the housing 21, and the configuration (for example, the imaging unit 3, the display unit 4, and the operation unit 5) other than the illumination unit 2 is provided in the housing 22.
  • casing 22 are connected so that relative rotation is possible. Note that the illumination unit 2 and other configurations may be provided in a single housing.
  • the organ image photographing device 1 may be composed of a multifunctional portable information terminal.
  • the illumination unit 2 is composed of an illuminator that illuminates a subject to be photographed from above.
  • a light source that emits a daylight color such as a xenon lamp is used.
  • the brightness of the light source varies depending on the sensitivity of the imaging unit 3 and the distance to the shooting target. As an example, it is possible to consider the brightness at which the illuminance of the shooting target is 1000 to 10000 lx.
  • the illumination unit 2 includes a lighting circuit and a dimming circuit in addition to the above light source, and lighting / extinguishing and dimming are controlled by a command from the control unit 9.
  • the imaging unit 3 captures an image of a living organ under illumination by the illuminating unit 2 and acquires an image, and includes an imaging lens and an area sensor (imaging element).
  • the aperture (brightness of the lens), shutter speed, and focal length of the imaging lens are set so that the entire range to be photographed is in focus.
  • F number 16, shutter speed: 1/120 seconds, focal length: 20 mm.
  • the area sensor is composed of image sensors such as CCD (Charge Coupled Device) and CMOS (Complementary Metal Oxide Semiconductor), and the sensitivity and resolution are set so that the color and shape of the subject can be detected sufficiently.
  • image sensors such as CCD (Charge Coupled Device) and CMOS (Complementary Metal Oxide Semiconductor)
  • sensitivity and resolution are set so that the color and shape of the subject can be detected sufficiently.
  • sensitivity 60 db
  • resolution 10 million pixels.
  • the imaging unit 3 includes a focus mechanism (not shown), a diaphragm mechanism, a drive circuit, an A / D conversion circuit, and the like. And aperture control, A / D conversion, and the like are controlled.
  • the imaging unit 3 acquires, for example, data of 0 to 255 in 8 bits for each of red (R), green (G), and blue (B) as captured image data.
  • the display unit 4 has a liquid crystal panel (not shown), a backlight, a lighting circuit, and a control circuit, and displays an image acquired by photographing with the imaging unit 3 according to a command from the control unit 9.
  • the display unit 4 can also display information acquired from the outside via the communication unit 8 (for example, a result of diagnosis by transmitting information to an external medical institution).
  • the operation unit 5 is an input unit for instructing imaging by the imaging unit 3, and includes an OK button (imaging execution button) 5a and a CANCEL button 5b.
  • the display unit 4 and the operation unit 5 are configured by a common touch panel display device 11, and the display area of the display unit 4 and the display area of the operation unit 5 in the touch panel display device 11 are separated.
  • the operation unit 5 may be configured by an input unit other than the touch panel display device 11 (the operation unit 5 may be provided at a position outside the display area of the touch panel display device 11).
  • the detection unit 6 includes a calculation unit (not shown), and detects organ characteristics based on the image acquired by the imaging unit 3. In particular, the detection unit 6 extracts a contour line of the organ from the photographed image of the organ, sets a glossiness detection region based on the extracted contour line, and determines a red component ( Among the R component, the green component (G), and the blue component (B), the B image data is extracted, and the glossiness of the surface of the organ is detected based on the extracted B image data.
  • the details of contour extraction, detection area setting, and glossiness detection method will be described later.
  • the storage unit 7 is a memory that stores image data acquired by the imaging unit 3, information obtained by the detection unit 6, information received from the outside, and the like.
  • the communication unit 8 is an interface for transmitting the above image data and information to the outside via a communication line (including wired and wireless) and receiving information from the outside.
  • the control unit 9 controls the operation of each unit of the organ imaging apparatus 1, and includes, for example, a CPU (Central Processing Unit) and a memory that stores a program for controlling each unit. .
  • a CPU Central Processing Unit
  • FIG. 3 is an explanatory diagram showing the illumination angle of the imaging target in the organ image imaging apparatus 1.
  • the imaging unit 3 is arranged to face the subject to be photographed (tongue or face).
  • the illumination unit 2 is arranged so as to illuminate the imaging target at an angle A of, for example, 0 ° to 45 ° with respect to the imaging optical axis X of the imaging unit 3 passing through the imaging target.
  • the imaging optical axis X refers to the optical axis of the imaging lens that the imaging unit 3 has.
  • the preferable range of the angle A at the time of illumination is 15 ° to 30 °.
  • the detection unit 6 extracts the contour line of the tongue as an organ by extracting the luminance edge of the captured image (the portion in which the brightness is rapidly changed in the image).
  • Luminance edge extraction can be performed using, for example, an edge extraction filter as shown in FIG.
  • the edge extraction filter is a filter that weights pixels in the vicinity of the target pixel when performing first-order differentiation (when obtaining a difference in image data between adjacent pixels).
  • the edge extraction filter for example, for the G image data of each pixel of the captured image, the difference between the image data is calculated between the target pixel and the neighboring pixel, and the pixel whose difference value exceeds a predetermined threshold is extracted.
  • a pixel that becomes a luminance edge can be extracted. Since there is a luminance difference due to the shadow around the tongue, the contour line of the tongue can be extracted by extracting pixels that become luminance edges as described above.
  • G image data having the greatest influence on the luminance is used for the calculation, R or B image data may be used.
  • the speckled white portion found in the center of the tongue is called moss, and its color is called moss.
  • the color of the red part other than the above in the tongue is called the tongue color.
  • FIG. 5 shows a photographed image of the tongue and a sectional shape of the tongue.
  • the tongue is projected forward from the oral cavity. Since the surface of the protruding upper lip side of the tongue is photographed by the imaging unit 3, the tongue is curved so that the upper lip side surface is convex toward the imaging unit 3 (see the CC ′ cross section). If necessary, the tongue may be defined in a specification or manual so that the tongue is guided to an appropriate photographing position.
  • both the center and left and right ends of the tongue are recessed and curved in an M shape (see section D-D ').
  • Such a cross-sectional shape is substantially the same from the upper part to the lower part of the tongue.
  • the central part E of the tongue may have a crack pattern. Therefore, in this embodiment, the angle A at the time of illumination is set to 15 degrees, and the remaining area on the upper half of the tongue and avoiding the center and both ends in the left-right direction is suitable for detecting the glossiness. It is set as a detection area.
  • the detection unit 6 detects the upper and lower ends and left and right ends of the tongue from the contour line Q of the tongue extracted from the photographed image by the above-described method, and Glossiness detection regions R1 and R2 are set with reference to the contour line Q of the tongue so that the length H and the left and right widths W are detected and the positional relationship shown in FIG. 6 is obtained.
  • the glossiness detection areas R1 and R2 may be set without extracting the tongue outline Q as described above. For example, by displaying a frame line for guiding the tongue to an appropriate photographing position on the display unit 4 so that the tongue can be photographed at an appropriate position for each living body, a predetermined region of the photographed image of the tongue Can be set as the glossiness detection areas R1 and R2. In this case, since the process of extracting the contour line Q is not necessary, it is possible to shorten the time required for detecting the glossiness and simplify the circuit configuration of the detection unit 6.
  • FIG. 7 is a graph showing the spectral distribution of the tongue. Since the tongue has a mucosal structure and no epidermis, the color of the blood appears as the color of the tongue. Blood has a large amount of R component (wavelength 600 nm to 700 nm) and a small amount of B component (wavelength 500 nm or less). Further, when the color of the tongue is light, the ratio of the R component decreases, and when it is dark, the ratio of the R component increases.
  • moss is formed of keratinized papillae cells and exhibits a white to yellow color. And when the moss is thin, the base tongue color appears, so the ratio of the R component increases as shown in the figure, and when the moss is white and dark, the G component (wavelength 500 nm to 600 nm) The ratio goes up.
  • the glossiness of the tongue surface is detected as follows based on the B image data obtained from the photographed image of the tongue.
  • the detection unit 6 extracts B image data from each pixel in the detection regions R1 and R2 of the photographed image, and creates a frequency distribution thereof.
  • FIG. 8 schematically shows the frequency distribution of the extracted B image data.
  • the horizontal axis indicates the B pixel value (image data), and the vertical axis indicates the frequency (number of pixels).
  • the pixel value is a value from 1 to 100, and the larger the pixel value, the brighter the pixel value.
  • a function that continuously indicates the frequency change may be obtained and smoothed to remove the noise, and then the pixel value Dp corresponding to the maximum frequency Np may be obtained.
  • the number of upper pixels may be obtained by integrating the smoothed function over a predetermined interval.
  • the frequency distribution of the B image data is only a distribution close to the normal distribution (first group G1) when there is no regular reflection on the surface of the tongue at the time of photographing, but when there is a regular reflection, the first distribution is first.
  • a distribution (second group G2) having a large frequency on the high pixel value side is added to the group G1.
  • the width of the first group G1 (the width from the minimum pixel value to the maximum pixel value of the first group G1) is This is narrower than the frequency distribution (normal distribution) of other R and G image data.
  • the boundary between the first group G1 and the second group G2 is the value of the image data (pixel value Dp) and the image where the frequency is maximum. It clearly appears between the maximum value of data (pixel value Dm), and the first group G1 and the second group G2 can be easily identified.
  • the detection unit 6 sets a threshold value M larger than the pixel value Dp, and obtains the sum of the frequencies between the threshold value M and the pixel value Dm as the upper pixel number, so that the frequency of the second group G2 A value close to the sum is obtained.
  • FIG. 9 shows the frequency distribution of B by photographing a plurality of tongues as samples, and the number of upper pixels obtained as described above from each frequency distribution and the actual Chinese medicine regarding the wetness of each tongue. It shows the relationship with the findings. From the figure, it can be seen that there is a high correlation between the number of upper pixels and the findings of Kampo medicine. That is, it can be said that the lower the number of upper pixels, the drier the tongue (lower glossiness), and the higher the number of upper pixels, the wetter (higher glossiness). Therefore, if the correlation of FIG. 9 is stored in the storage unit 7 as a table, the detection unit 6 refers to the above table to determine the glossiness of the tongue surface and the degree of wetness from the detected number of upper pixels. Can be detected.
  • FIG. 10 is a flowchart showing an operation flow in the organ image photographing apparatus 1 of the present embodiment.
  • the control unit 9 turns on the illumination unit 2 (S1) and sets photographing conditions (S2).
  • the control unit 9 controls the imaging unit 3 to photograph the tongue that is the photographing target (S3).
  • the detection unit 6 extracts the tongue contour Q from the photographed image of the tongue (S4). Then, the detection unit 6 detects the upper and lower ends and left and right ends of the tongue from the extracted contour line Q, and sets the glossiness detection regions R1 and R2 with the contour line Q as a reference (S5). Subsequently, the detection unit 6 extracts B image data from each pixel of the set detection regions R1 and R2, creates a frequency distribution (S6), and calculates the number of upper pixels (S7).
  • the detection unit 6 refers to a table showing the relationship between the number of upper pixels and the findings, detects and digitizes the glossiness of the tongue (degree of wetness) from the calculated number of upper pixels, and based on the result, The health level of the subject is diagnosed (S8).
  • the gloss level detection result and the user health level diagnosis result are displayed on the display unit 4, but are output (recorded) to an output device (not shown) or transferred to the outside via the communication unit 8 as necessary.
  • the gloss level detection result may be digitized and transmitted to the outside, and the user's health level may be diagnosed outside.
  • the detection unit 6 extracts B image data with less fluctuation due to the physical condition of the living body and individual differences compared to R and G from the captured image of the organ, and based on the extracted B image data (The glossiness of the surface of the organ is detected based on only the B image data (not the B or R image data).
  • the influence due to the physical condition of the living body and individual differences is reduced. Glossiness can be detected with high accuracy.
  • the glossiness is directly detected based on the B image data extracted from the photographed image, the glossiness can be detected without using a conventional large integrating sphere, and the configuration is small and low cost. Thus, the glossiness of the organ surface can be detected with high accuracy.
  • the detection unit 6 can detect the glossiness of the tongue with high accuracy by detecting the glossiness as described above.
  • the detection unit 6 creates a frequency distribution of the extracted B image data, and a threshold value M larger than the value of the image data (pixel value Dp) that maximizes the frequency, and the maximum value (maximum pixel value) of the image data.
  • Dm is detected based on the sum of the frequencies (number of upper pixels) with respect to Dm), and therefore detection based on the sum of the frequencies of the distribution (second group G2) representing the gloss component in the frequency distribution of B A result close to the result can be obtained, and the detection accuracy of the glossiness can be further increased.
  • the threshold value M is 1.1 to 1.3 times the value of the image data having the maximum frequency
  • the detection result of the glossiness based on the number of upper pixels is used for the second group G2 representing the gloss component.
  • the detection result based on the total sum of frequencies can be as close as possible, and the detection accuracy of the glossiness can be reliably increased.
  • the detection unit 6 sets the glossiness detection regions R1 and R2 with reference to the organ contour line Q, even if the organ contour line Q differs for each living body (individual), the glossiness for each living body. It is possible to set a region suitable for detection. Then, based on the B image data extracted from each pixel of the detection regions R1 and R2, it is possible to appropriately detect the glossiness of the organ surface.
  • the subject to be photographed is a human tongue
  • it may not be a human but may be an animal other than a human.
  • the glossiness of the surface of the tongue can be detected by applying the method of the present embodiment, and diagnosis can be performed based on the detection result. In this case, it is possible to quickly and accurately determine the poor physical condition of an animal that cannot communicate its intention.
  • the organ of the living body to be imaged is not limited to the tongue.
  • it may be a site in the oral cavity such as the lips and gums, the inner wall of the stomach or intestine, the back side of the eyelid, and the like. It is also possible to detect the glossiness of the organ surface simultaneously with the examination in each department.
  • the organ image capturing apparatus described above can be expressed as follows, and has the following effects.
  • the organ image capturing apparatus described above includes an imaging unit that captures an image of a biological organ and acquires an image, and a detection unit that detects features of the organ based on the image acquired by the imaging unit.
  • the organ image capturing apparatus includes: the detection unit extracts image data of a blue component from a captured image of the organ, and determines the glossiness of the surface of the organ based only on the extracted image data of the blue component. It is the structure to detect.
  • the image data of the blue component (B) included in the photographed image of the organ is less changed due to the physical condition of the living body and individual differences than the image data of the red component (R) and the green component (G), for example.
  • the detection unit extracts B image data with little variation from the photographed image of the organ, and detects the glossiness of the surface of the organ based on the extracted B image data.
  • luminance information including color information it is possible to detect the glossiness accurately by reducing the influence of the physical condition of the living body and individual differences.
  • the glossiness is directly detected based on the B image data extracted from the photographed image, the glossiness is detected by obtaining the data including the color and gloss and the data of only the color and performing the difference calculation. As described above, there is no need to use a large integrating sphere for acquiring color-only data. As a result, the glossiness of the organ surface can be accurately detected with a small and low-cost configuration.
  • the organ may be a tongue
  • the detection unit may detect the degree of wetness of the tongue by detecting the glossiness. In this case, the degree of wetness of the tongue can be accurately detected.
  • the detection unit may detect the degree of wetness of the tongue with reference to a table indicating a correlation between the blue component data and the findings of the Chinese medicine doctor. In this case, the detection unit can accurately determine the degree of wetness of the tongue in accordance with the findings of the Chinese medicine doctor.
  • the detection unit creates a frequency distribution of the extracted blue component image data, and based on the sum of the frequencies between the threshold value larger than the image data value that maximizes the frequency and the maximum value of the image data, The gloss level may be detected.
  • the frequency distribution of the extracted B image data is a distribution close to the normal distribution (first group) when there is no specular reflection on the organ surface at the time of imaging, but when there is specular reflection, there is no specular reflection.
  • a distribution (second group) having a high frequency on the high pixel value (image data) side is added to the above distribution.
  • the sum of the frequencies of the second group is detected by detecting the glossiness based on the sum of the frequencies between the threshold value (image data) larger than the value of the image data having the maximum frequency and the maximum value of the image data. Can be obtained that is close to the detection result based on, and the accuracy of glossiness detection can be further increased.
  • the threshold value is 1.1 to 1.3 times the value of the image data having the maximum frequency.
  • the width of the first group described above is narrower than the frequency distribution of the other R and G image data. For this reason, it is known that the boundary between the first group and the second group is almost within the range of 1.1 to 1.3 times the value of the image data having the maximum frequency. Therefore, by setting the above threshold value to 1.1 to 1.3 times the value of the image data having the maximum frequency, the glossiness based on the sum of the frequencies between the threshold value and the maximum value of the image data is set. The detection result can be made as close as possible to the detection result based on the sum of the frequencies of the second group, and the glossiness detection accuracy can be reliably increased.
  • the detection unit extracts a contour line of the organ from the captured image of the organ, sets a glossiness detection region based on the extracted contour line, and the image data of the blue component is included in the captured image. It may be extracted from each pixel of the detection area.
  • the detection unit sets the glossiness detection area based on the organ contour line, so that even if the organ contour line is different for each living body, it is possible to set a region suitable for the glossiness detection for each living body. Based on the B image data extracted from each pixel in the detection area, the glossiness of the organ surface can be appropriately detected.
  • the present invention can be used in an apparatus for detecting the glossiness of the surface of an organ from an image obtained by photographing the organ of a living body.

Abstract

　器官画像撮影装置（１）は、生体の器官を撮影して画像を取得する撮像部（３）と、撮像部（３）にて取得された画像に基づいて、器官の特徴を検出する検出部（６）とを備える。検出部（６）は、器官の撮影画像から青色成分の画像データを抽出し、抽出した青色成分の画像データのみに基づいて、器官の表面の光沢度を検出する。

Description

器官画像撮影装置
　本発明は、生体の器官を撮影して得られる画像に基づいて、器官の表面の光沢度を検出する器官画像撮影装置に関するものである。
　東洋医学においては、人間の舌の状態を観察することにより、健康状態や病状を診断する診断手法（舌診）が知られている。舌診では、舌（正確には舌と苔）の色と形をもとに体調や健康度を判断している。
　舌診における診断項目の一つに、舌の表面の湿り気（湿潤とも言う）がある。体内の水分が不足すると、舌細胞の水分が減少し、その表面が乾燥する。この状態を、東洋医学では津虚と言い、発熱や炎症により発症する。不調の状態が進行すると、脱水症状などの重篤な状態に陥る。
　これらの診断は、専門の医師が実施しているが、経験や勘に頼っているため、個人差があり、客観性に乏しい。また、過去の状態の記憶もあいまいで、客観的な状態の変化を捉えることができない。
　これを解決するため、デジタルカメラを用いて被写体を撮影し、撮影画像からその特徴を数値化して記録、診断するシステムが提案されている。例えば、特許文献１では、舌に照明光を当てて、その反射光をカメラで受光することで得られる撮影画像から、白色でかつ一定の明るさ（最大輝度値の９０％以上）を有する白飛び画素を検出し、その画素数をカウントすることにより、舌の湿り気を計測するようにしている。つまり、舌からの反射光に含まれる輝度情報に基づいて、舌の表面の光沢度を検出するようにしている。
　また、特許文献２では、複数の開口部が形成された積分球と、積分球のいずれかの開口部から被験者に直接光が照射されないように積分球に光を照射する拡散用光源装置と、積分球のいずれかの開口部から被験者に直接光が当たり、舌表面に当たった鏡面反射光がカメラに入射するように光を照射する光沢用光源装置とを備え、光沢用光源装置を消灯させた状態での舌の撮影と、光沢用光源装置を点灯させた状態での舌の撮影とを交互に切り替えることにより、舌表面の光沢を含まない色彩のみの画像データと、舌表面の色彩と光沢を両方含んだ画像データとを取得し、さらに後者の画像データから前者の画像データを差分演算することで、光沢のみの画像データを取得するようにしている。
特開２００５－１３７７５６号公報（段落〔００８２〕～〔００８４〕、図９等参照） 特開２０１１－２３９９２６号公報（段落〔００２４〕～〔００２５〕、図１、図２等参照）
　ところで、撮影画像の各画素の赤、緑、青の画像データをそれぞれＲＧＢとし、輝度データをＹとしたとき、各画素の輝度データＹは、一般的に以下ように表される。
　　　　Ｙ＝０．２２Ｒ＋０．７１Ｇ＋０．０７Ｂ
　このように、輝度データＹはＲＧＢの色の情報を含んでいるため、ＲＧＢのいずれかの色が変動すると、輝度データＹも変動する。特に、器官が舌である場合、舌の撮影画像におけるＲやＧの色成分は、Ｂの色成分に比べて、個人の体調や個人差によって変動しやすい。このため、特許文献１のように、少なくともＲやＧの色情報を含む輝度情報に基づいて舌の表面の光沢度を検出する手法では、個人の体調や個人差によって舌の色の赤み（Ｒ成分）や苔の色の白さ（主にＧ成分）が変化すると、輝度情報が変化して、検出される光沢度が変化する。例えば、舌が淡紅色で、苔が白色で厚い場合には、輝度が増大して光沢度が増大する。その結果、光沢度の検出の精度が低下する。
　また、特許文献２では、舌表面の光沢のみの画像データを取得するにあたり、上述のように舌表面の色彩のみの画像データと、舌表面の色彩と光沢を両方含んだ画像データとを取得して差分演算を行っているが、色彩のみの画像データを取得する際に、照明光を十分に拡散させるための積分球を用いる必要があるため、装置が大型化し、コストも高くなる。
　本発明は、上記の問題点を解決するためになされたもので、その目的は、小型、低コストの構成で、器官の表面の光沢度を精度よく検出することができる器官画像撮影装置を提供することにある。
　本発明の一側面に係る器官画像撮影装置は、生体の器官を撮影して画像を取得する撮像部と、前記撮像部にて取得された前記画像に基づいて、前記器官の特徴を検出する検出部とを備えた器官画像撮影装置であって、前記検出部は、前記器官の撮影画像から青色成分の画像データを抽出し、抽出した青色成分の画像データのみに基づいて、前記器官の表面の光沢度を検出する。
　上記構成によれば、小型、低コストの構成で、器官の表面の光沢度を精度よく検出することができる。
本発明の実施の一形態に係る器官画像撮影装置の外観を示す斜視図である。 上記器官画像撮影装置の概略の構成を示すブロック図である。 上記器官画像撮影装置における撮影対象の照明角度を示す説明図である。 舌の撮影画像と、エッジ抽出フィルタと、上記エッジ抽出フィルタを用いて抽出された上記器官の輪郭線とを示す説明図である。 舌の撮影画像と舌の断面形状とを示す説明図である。 上記撮影画像から抽出される舌の輪郭線と、光沢度の検出領域との位置関係を示す説明図である。 舌の分光分布を示すグラフである。 上記検出領域から抽出したＢの画像データの度数分布を示すグラフである。 上位画素数と漢方医の所見との関係を示す説明図である。 上記器官画像撮影装置における動作の流れを示すフローチャートである。
　本発明の実施の一形態について、図面に基づいて説明すれば、以下の通りである。なお、本明細書において、数値範囲をＡ～Ｂと表記した場合、その数値範囲に下限Ａおよび上限Ｂの値は含まれるものとする。
　〔器官画像撮影装置の全体構成〕
　図１は、本実施形態の器官画像撮影装置１の外観を示す斜視図であり、図２は、器官画像撮影装置１の概略の構成を示すブロック図である。器官画像撮影装置１は、生体の器官を撮影して、診断に必要な情報を抽出するものである。以下では、撮影対象が生体の器官としての舌であり、診断に必要な情報が舌の表面の光沢度（湿り気の度合い）である場合を例として説明する。
　器官画像撮影装置１は、照明部２、撮像部３、表示部４、操作部５、検出部６、記憶部７、通信部８および制御部９を備えている。照明部２は筐体２１に設けられており、照明部２以外の構成（例えば撮像部３、表示部４、操作部５）は、筐体２２に設けられている。筐体２１と筐体２２とは相対的に回転可能に連結されている。なお、照明部２とそれ以外の構成とは、単一の筐体に設けられていてもよい。また、器官画像撮影装置１は、多機能携帯情報端末で構成されてもよい。
　照明部２は、撮影対象を上方より照明する照明器で構成されている。照明部２の光源としては、色再現性を向上するため、例えばキセノンランプなどの昼光色を発光するものを用いている。光源の明るさは、撮像部３の感度や撮影対象までの距離により異なるが、一例としては、撮影対象の照度が１０００～１００００ｌｘとなるような明るさを考えることができる。照明部２は、上記の光源の他に、点灯回路や調光回路を有しており、制御部９からの指令によって点灯／消灯および調光が制御される。
　撮像部３は、照明部２による照明下で、生体の器官を撮影して画像を取得するものであり、撮像レンズとエリアセンサ（撮像素子）とを有している。撮像レンズの絞り（レンズの明るさ）、シャッター速度、焦点距離は、撮影対象の全ての範囲に焦点が合うように設定されている。一例としては、Ｆナンバー：１６、シャッター速度：１／１２０秒、焦点距離：２０ｍｍである。
　エリアセンサは、例えばＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）のような撮像素子で構成されており、撮影対象の色および形状を十分に検出できるように、感度や解像度などが設定されている。一例としては、感度：６０ｄｂ、解像度：１０００万画素である。
　撮像部３による撮影は、制御部９によって制御されている。また、撮像部３は、撮像レンズやエリアセンサの他にも、不図示のフォーカス機構、絞り機構、駆動回路およびＡ／Ｄ変換回路などを有しており、制御部９からの指令により、フォーカスや絞りの制御、Ａ／Ｄ変換などが制御される。撮像部３では、撮影画像のデータとして、赤（Ｒ）、緑（Ｇ）、青（Ｂ）のそれぞれについて、例えば８ビットで０～２５５のデータが取得される。
　表示部４は、不図示の液晶パネル、バックライト、点灯回路および制御回路を有しており、制御部９からの指令により、撮像部３での撮影によって取得される画像を表示する。また、表示部４は、通信部８を介して外部から取得した情報（例えば外部の医療機関に情報を送信して診断された結果）を表示することもできる。
　操作部５は、撮像部３による撮影を指示するための入力部であり、ＯＫボタン（撮影実行ボタン）５ａおよびＣＡＮＣＥＬボタン５ｂで構成されている。本実施形態では、表示部４および操作部５を、共通のタッチパネル表示装置１１で構成し、タッチパネル表示装置１１における表示部４の表示領域と操作部５の表示領域とを別々にしている。なお、操作部５は、タッチパネル表示装置１１以外の入力部で構成されてもよい（タッチパネル表示装置１１の表示領域外の位置に操作部５を設けてもよい）。
　検出部６は、不図示の演算部を有しており、撮像部３にて取得された画像に基づいて、器官の特徴を検出するものである。特に、検出部６は、器官の撮影画像から、器官の輪郭線を抽出した後、抽出した輪郭線を基準にして光沢度の検出領域を設定し、上記検出領域の各画素から、赤色成分（Ｒ）、緑色成分（Ｇ）、青色成分（Ｂ）のうちで、Ｂの画像データを抽出し、抽出したＢの画像データに基づいて、器官の表面の光沢度を検出する。なお、輪郭線の抽出、検出領域の設定、光沢度の検出方法の詳細については後述する。
　記憶部７は、撮像部３にて取得した画像のデータ、検出部６にて得られた情報、外部から受信した情報などを記憶するメモリである。通信部８は、上記の画像データや情報を、通信回線（有線や無線を含む）を介して外部に送信したり、外部からの情報を受信するためのインターフェースである。制御部９は、器官画像撮影装置１の各部の動作を制御するものであり、例えばＣＰＵ（Central Processing Unit）と、各部を制御するためのプログラムを格納するメモリとを有して構成されている。
　〔照明部および撮像部の配置例〕
　図３は、器官画像撮影装置１における撮影対象の照明角度を示す説明図である。同図に示すように、撮像部３は、撮影対象（舌や顔）に正対して配置されている。照明部２は、撮影対象を通る撮像部３の撮影光軸Ｘに対して、例えば０°～４５°の角度Ａで撮影対象を照明するように配置されている。なお、撮影光軸Ｘとは、撮像部３が有する撮像レンズの光軸を指す。
　ここで、照明時の角度Ａが大きいと、上唇の影により、舌を撮影できる範囲が小さくなる。逆に、角度Ａが小さいと、正反射による色とびが大きくなる。以上のことを考慮すると、照明時の角度Ａの好ましい範囲は、１５°～３０°である。
　〔器官の輪郭線の抽出〕
　本実施形態では、検出部６は、撮影画像の輝度エッジ（画像の中で急激に明るさが変化している部分）を抽出することにより、器官としての舌の輪郭線を抽出する。
　輝度エッジの抽出は、例えば図４に示すようなエッジ抽出フィルタを用いて行うことができる。エッジ抽出フィルタは、１次微分をするときに（隣接画素間で画像データの差分をとるときに）、注目画素の近傍の画素に重みを付けるフィルタである。このようなエッジ抽出フィルタを用い、例えば、撮影画像の各画素のＧの画像データについて、注目画素と近傍画素とで画像データの差分を取り、その差分値が所定の閾値を超える画素を抽出することで、輝度エッジとなる画素を抽出できる。舌の周囲には、その影に起因する輝度差が存在するため、上記のように輝度エッジとなる画素を抽出することにより、舌の輪郭線を抽出することができる。なお、ここでは、輝度への影響が最も大きいＧの画像データを演算に用いているが、ＲやＢの画像データを用いてもよい。
　なお、東洋医学では、舌の中央部に見られる斑点状の白い部分を苔と言い、その色を苔色と呼んでいる。また、舌における上記以外の赤い部分の色を舌色と呼んでいる。
　〔検出領域の設定〕
　図５は、舌の撮影画像と舌の断面形状とを示している。舌を撮影する際、舌は口腔から前方に突き出される。その突き出された舌の上唇側の表面を撮像部３で撮影するため、舌はその上唇側の表面が撮像部３側に凸になるように湾曲している（Ｃ－Ｃ’断面参照）。なお、必要に応じて、仕様書やマニュアルに舌の出し方を規定しておき、舌を適切な撮影位置に案内するようにしてもよい。
　図３で示した照明部２および撮像部３の配置で舌を撮影すると、舌の上半分に正反射領域が発生する（照明部２が撮影光軸Ｘに対して上方にあるため）。一方、舌の左右方向については、舌の中心と左右端がともに凹んでＭ字状に湾曲している（Ｄ－Ｄ’断面参照）。このような断面形状は、舌の上部から下部にかけてほぼ同様である。さらに、舌の中央部Ｅには、亀裂による模様が入っていることがある。したがって、本実施形態では、照明時の角度Ａを１５度に設定し、舌の上半分で、かつ、左右方向の中央部および両端部を避けた残りの領域を、光沢度の検出に適した検出領域として設定している。
　より具体的には、図６に示すように、検出部６は、上述の手法で撮影画像から抽出した舌の輪郭線Ｑから、舌の上下端および左右端を検出して、舌の上下の長さＨおよび左右の幅Ｗを検出し、図６に示す位置関係となるように、舌の輪郭線Ｑを基準にして光沢度の検出領域Ｒ１・Ｒ２を設定している。
　なお、上記のように舌の輪郭線Ｑを抽出することなく、光沢度の検出領域Ｒ１・Ｒ２を設定するようにしてもよい。例えば、舌を適切な撮影位置に案内するための枠線を表示部４に表示するなどして、生体ごとに舌を適切な位置で撮影できるようにすれば、舌の撮影画像の所定の領域を光沢度の検出領域Ｒ１・Ｒ２として設定することも可能である。この場合、輪郭線Ｑを抽出する処理が不要となるため、光沢度の検出に要する時間の短縮化や、検出部６の回路構成の簡素化などを図ることができる。
　〔光沢度の検出方法〕
　図７は、舌の分光分布を示すグラフである。舌は粘膜構造であり、表皮が無いため、舌の色としては、血液の色が現れる。血液は、Ｒ成分（波長６００ｎｍ～７００ｎｍ）が多く、Ｂ成分（波長５００ｎｍ以下）が少ない。また、舌の色が淡い場合には、Ｒ成分の比率が下がり、濃い場合にはＲ成分の比率が上がる。
　一方、苔は角化した乳頭細胞で形成されており、白色から黄色を呈する。そして、苔が薄い場合には、下地となる舌の色が現れるため、同図のようにＲ成分の比率が高くなり、苔が白く、濃い場合には、Ｇ成分（波長５００ｎｍ～６００ｎｍ）の比率が上がる。
　生体の体調や個人差により、舌と苔の色は上記のように変化するが、Ｂ成分の変化は少ない。そこで、本実施形態では、舌の撮影画像から得られるＢの画像データに基づき、以下のようにして舌の表面の光沢度を検出するようにしている。
　まず、検出部６は、撮影画像の検出領域Ｒ１・Ｒ２の各画素からＢの画像データを抽出して、その度数分布を作成する。図８は、抽出したＢの画像データの度数分布を模式的に示している。なお、図８の横軸は、Ｂの画素値（画像データ）を示し、縦軸は度数（画素数）を示している。ただし、ここでの説明を簡略化するため、画素値は、１から１００までの値とし、画素値が大きいほど明るいことを示す。
　次に、検出部６は、上記の度数分布より、最大度数Ｎｐに対応する画素値Ｄｐを求め（図８の例ではＤｐ＝７０）、この画素値Ｄｐを１．２倍した値を閾値Ｍとし（図８の例ではＭ＝８４）、閾値Ｍから画像データの最大値（最大画素値Ｄｍ＝１００）までの区間における度数の総和を上位画素数として積算する。なお、画素値Ｄｐを求めるにあたって、度数の変化を連続的に示す関数を求めてこれをスムージングし、ノイズを除去してから、最大度数Ｎｐに対応する画素値Ｄｐを求めるようにしてもよい。また、スムージング後の関数を所定の区間で積分して上位画素数を求めるようにしてもよい。
　ここで、Ｂの画像データの度数分布は、撮影時に舌の表面での正反射がない場合、正規分布に近い分布（第１の群Ｇ１）のみとなるが、正反射がある場合、第１の群Ｇ１に、高画素値側で度数が大きい分布（第２の群Ｇ２）が加算されたものとなる。しかも、Ｂの画像データは、上述のように生体の体調や個人差による変化が少ないため、第１の群Ｇ１の幅（第１の群Ｇ１の最小画素値から最大画素値までの幅）は、他のＲやＧの画像データの度数分布（正規分布）に比べて狭くなる。その結果、第１の群Ｇ１と第２の群Ｇ２との境界（度数が減少から増加に転じるような極小となる部分）が、度数が最大となる画像データの値（画素値Ｄｐ）と画像データの最大値（画素値Ｄｍ）との間で明確に現れ、第１の群Ｇ１と第２の群Ｇ２とを容易に識別することが可能となる。光沢度を検出するためには、光沢成分（正反射成分）を含まない第１の群Ｇ１ではなく、光沢成分を表す第２の群Ｇ２に基づいて光沢度を検出することが望ましい。
　そこで、検出部６は、画素値Ｄｐよりも大きい閾値Ｍを設定し、この閾値Ｍと画素値Ｄｍとの間の度数の総和を上位画素数として求めることにより、第２の群Ｇ２の度数の総和に近い値を得るようにしている。
　特に、Ｂの画像データの度数分布においては、第１の群Ｇ１と第２の群Ｇ２との境界が、画素値Ｄｐの１．１～１．３倍の範囲内で現れることが実験的にわかっている。このため、本実施形態では、検出部６は、上記の閾値Ｍを、画素値Ｄｐの１．１～１．３倍の範囲内（図８の例では、１．２Ｄｐ＝８４）に設定し、閾値Ｍと画素値Ｄｍとの間の度数の総和を上位画素数として求めるようにしている。
　図９は、複数人の舌をサンプルとして撮影してＢの度数分布をそれぞれ作成し、各度数分布から上記のようにして得られた上位画素数と、各々の舌の湿り気に関する漢方医の実際の所見との関係を示している。同図より、上位画素数と漢方医の所見との間には高い相関関係があることがわかる。つまり、上位画素数が少ないほど、舌が乾燥しており（光沢度が低く）、上位画素数が多いほど、湿潤である（光沢度が高い）と言える。したがって、図９の相関関係をテーブルとして記憶部７に記憶しておけば、検出部６は上記のテーブルを参照することにより、検出した上位画素数から舌の表面の光沢度および湿り気の度合いを検出することができる。
　〔制御フロー〕
　図１０は、本実施形態の器官画像撮影装置１における動作の流れを示すフローチャートである。器官画像撮影装置１は、操作部５または不図示の入力部により、撮影指示を受け付けると、制御部９は照明部２を点灯させ（Ｓ１）、撮影条件の設定を行う（Ｓ２）。撮影条件の設定が終了すると、制御部９は撮像部３を制御して撮影対象である舌を撮影する（Ｓ３）。
　撮影が終了すると、検出部６は、舌の撮影画像から舌の輪郭線Ｑを抽出する（Ｓ４）。そして、検出部６は、抽出された輪郭線Ｑから、舌の上下端および左右端を検出し、輪郭線Ｑを基準として光沢度の検出領域Ｒ１・Ｒ２を設定する（Ｓ５）。続いて、検出部６は、設定した検出領域Ｒ１・Ｒ２の各画素からＢの画像データを抽出して度数分布を作成し（Ｓ６）、上位画素数を算出する（Ｓ７）。そして、検出部６は、上位画素数と所見との関係を示すテーブルを参照して、算出した上位画素数から舌の光沢度（湿り気の度合い）を検出、数値化し、その結果に基づいて、対象者の健康度を診断する（Ｓ８）。光沢度の検出結果や使用者の健康度の診断結果は、表示部４に表示されるが、必要に応じて図示しない出力装置に出力（記録）されたり、通信部８を介して外部に転送される（Ｓ９）。なお、光沢度の検出結果を数値化して外部に送信し、外部にて使用者の健康度を診断するようにしてもよい。
　以上のように、検出部６は、器官の撮影画像から、ＲやＧに比べて生体の体調や個人差による変動の少ないＢの画像データを抽出し、抽出したＢの画像データに基づいて（ＢやＲの画像データではなく、Ｂの画像データのみに基づいて）、器官の表面の光沢度を検出する。これにより、ＲやＧの色情報を含む輝度情報に基づいて光沢度を検出する構成に比べて、生体の体調や個人差による影響（Ｒ成分やＧ成分の変動による影響）を低減して、光沢度を精度よく検出することができる。しかも、撮影画像から抽出されるＢの画像データに基づいて、光沢度を直接検出する構成のため、従来のような大型の積分球を用いることなく光沢度を検出でき、小型、低コストの構成で、器官の表面の光沢度を精度よく検出することができる。
　特に、器官が生体の舌である場合、検出部６は、上記のようにして光沢度を検出することにより、舌の湿り気の度合いを精度よく検出することができる。
　また、検出部６は、抽出したＢの画像データの度数分布を作成し、度数が最大となる画像データの値（画素値Ｄｐ）よりも大きい閾値Ｍと、画像データの最大値（最大画素値Ｄｍ）との間の度数の総和（上位画素数）に基づいて光沢度を検出するので、Ｂの度数分布の中で光沢成分を表す分布（第２の群Ｇ２）の度数の総和に基づく検出結果に近い結果を得ることができ、光沢度の検出精度をさらに高めることができる。
　また、閾値Ｍは、度数が最大となる画像データの値の１．１～１．３倍であるので、上位画素数に基づく光沢度の検出結果を、光沢成分を表す第２の群Ｇ２の度数の総和に基づく検出結果にできるだけ近づけることができ、光沢度の検出精度を確実に高めることができる。
　また、検出部６は、器官の輪郭線Ｑを基準にして光沢度の検出領域Ｒ１・Ｒ２を設定するので、器官の輪郭線Ｑが生体（個人）ごとに異なる場合でも、生体ごとに光沢度の検出に適した領域を設定できる。そして、検出領域Ｒ１・Ｒ２の各画素から抽出されるＢの画像データに基づいて、器官表面の光沢度を適切に検出することができる。
　〔その他〕
　以上では、撮影対象が人間の舌である場合について説明したが、生体（生きているもの）であれば人間でなくてもよく、人間以外の動物であってもよい。例えば、ペットや家畜などの動物の舌であっても、本実施形態の手法を適用して舌の表面の光沢度を検出したり、その検出結果に基づいて診断を行うことができる。この場合、意思の伝達ができない動物の体調不良を速やかに、かつ的確に判断することができる。
　また、撮影対象となる生体の器官は、舌には限定されない。例えば唇、歯茎などの口腔内の部位、胃や腸の内壁、瞼の裏側などであってもよい。また、それぞれの診療科での検査と同時に器官表面の光沢度を検出することも可能である。
　以上で説明した器官画像撮影装置は、以下のように表現することができ、これによって以下の作用効果を奏する。
　以上で説明した器官画像撮影装置は、生体の器官を撮影して画像を取得する撮像部と、前記撮像部にて取得された前記画像に基づいて、前記器官の特徴を検出する検出部とを備えた器官画像撮影装置であって、前記検出部は、前記器官の撮影画像から青色成分の画像データを抽出し、抽出した青色成分の画像データのみに基づいて、前記器官の表面の光沢度を検出する構成である。
　器官の撮影画像に含まれる青色成分（Ｂ）の画像データは、例えば赤色成分（Ｒ）や緑色成分（Ｇ）の画像データに比べると、生体の体調や個人差による変化が少ない。このため、検出部が、器官の撮影画像から、変動の少ないＢの画像データを抽出し、抽出したＢの画像データに基づいて、器官の表面の光沢度を検出することにより、ＲやＧの色情報を含む輝度情報に基づいて光沢度を検出する構成に比べて、生体の体調や個人差による影響を低減して、光沢度を精度よく検出することができる。しかも、撮影画像から抽出されるＢの画像データに基づいて、光沢度を直接検出する構成のため、色彩と光沢を含むデータと色彩のみのデータとを取得して差分演算によって光沢を検出する従来のように、色彩のみのデータを取得するための大型の積分球を用いる必要がない。その結果、小型、低コストの構成で、器官の表面の光沢度を精度よく検出することができる。
　前記器官は、舌であり、前記検出部は、前記光沢度を検出することにより、舌の湿り気の度合いを検出してもよい。この場合、舌の湿り気の度合いを精度よく検出することができる。
　前記検出部は、前記舌の湿り気の度合いを、前記青色成分データと漢方医の所見との相関関係を示すテーブルを参照して検出してもよい。この場合、検出部は、舌の湿り気の度合いを、漢方医の所見に即して正確に判断することができる。
　前記検出部は、抽出した青色成分の画像データの度数分布を作成し、度数が最大となる画像データの値よりも大きい閾値と、画像データの最大値との間の度数の総和に基づいて前記光沢度を検出してもよい。
　抽出したＢの画像データの度数分布は、撮影時に器官表面での正反射がない場合、正規分布に近い分布（第１の群）となるが、正反射がある場合、正反射がない場合の上記分布に、高画素値（画像データ）側で度数が大きい分布（第２の群）が加算されたものとなる。度数が最大となる画像データの値よりも大きい閾値（画像データ）と、画像データの最大値との間の度数の総和に基づいて光沢度を検出することにより、第２の群の度数の総和に基づく検出結果に近いものを得ることができ、光沢度の検出精度をさらに高めることができる。
　前記閾値は、度数が最大となる画像データの値の１．１～１．３倍であることが望ましい。
　Ｂの画像データは、生体の体調や個人差による変化が少ないため、上記した第１の群の幅は、他のＲやＧの画像データの度数分布に比べて狭くなる。そのため、第１の群と第２の群との境界が、度数が最大となる画像データの値の１．１～１．３倍の範囲内にほぼ収まることがわかっている。したがって、上記の閾値を、度数が最大となる画像データの値の１．１～１．３倍に設定することにより、閾値と画像データの最大値との間の度数の総和に基づく光沢度の検出結果を、第２の群の度数の総和に基づく検出結果にできるだけ近づけることができ、光沢度の検出精度を確実に高めることができる。
　前記検出部は、前記器官の撮影画像から前記器官の輪郭線を抽出した後、抽出した輪郭線を基準にして光沢度の検出領域を設定し、前記青色成分の画像データは、前記撮影画像における前記検出領域の各画素から抽出されてもよい。
　検出部が、器官の輪郭線を基準にして光沢度の検出領域を設定することにより、器官の輪郭線が生体ごとに異なる場合でも、生体ごとに光沢度の検出に適した領域を設定できる。そして、検出領域の各画素から抽出されるＢの画像データに基づいて、器官表面の光沢度を適切に検出することができる。
　本発明は、生体の器官を撮影して得られる画像から、器官の表面の光沢度を検出する装置に利用可能である。
　　　１　　　器官画像撮影装置
　　　３　　　撮像部
　　　６　　　検出部

Claims (6)

  1. 　生体の器官を撮影して画像を取得する撮像部と、
    　前記撮像部にて取得された前記画像に基づいて、前記器官の特徴を検出する検出部とを備えた器官画像撮影装置であって、
    　前記検出部は、前記器官の撮影画像から青色成分の画像データを抽出し、抽出した青色成分の画像データのみに基づいて、前記器官の表面の光沢度を検出する器官画像撮影装置。
  2. 　前記器官は、舌であり、
    　前記検出部は、前記光沢度を検出することにより、舌の湿り気の度合いを検出する請求項１に記載の器官画像撮影装置。
  3. 　前記検出部は、前記舌の湿り気の度合いを、前記青色成分データと漢方医の所見との相関関係を示すテーブルを参照して検出する請求項２に記載の器官画像撮影装置。
  4. 　前記検出部は、抽出した青色成分の画像データの度数分布を作成し、度数が最大となる画像データの値よりも大きい閾値と、画像データの最大値との間の度数の総和に基づいて前記光沢度を検出する請求項１から３のいずれかに記載の器官画像撮影装置。
  5. 　前記閾値は、度数が最大となる画像データの値の１．１～１．３倍である請求項４に記載の器官画像撮影装置。
  6. 　前記検出部は、前記器官の撮影画像から前記器官の輪郭線を抽出した後、抽出した輪郭線を基準にして光沢度の検出領域を設定し、
    　前記青色成分の画像データは、前記撮影画像における前記検出領域の各画素から抽出される請求項１から５のいずれかに記載の器官画像撮影装置。
PCT/JP2014/072408 2013-10-01 2014-08-27 器官画像撮影装置 WO2015049936A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP14850255.2A EP3053514A1 (en) 2013-10-01 2014-08-27 Organ imaging apparatus
US15/023,645 US20160210746A1 (en) 2013-10-01 2014-08-27 Organ imaging device
JP2015540425A JPWO2015049936A1 (ja) 2013-10-01 2014-08-27 器官画像撮影装置

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013206623 2013-10-01
JP2013-206623 2013-10-01

Publications (1)

Publication Number Publication Date
WO2015049936A1 true WO2015049936A1 (ja) 2015-04-09

Family

ID=52778531

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/072408 WO2015049936A1 (ja) 2013-10-01 2014-08-27 器官画像撮影装置

Country Status (4)

Country Link
US (1) US20160210746A1 (ja)
EP (1) EP3053514A1 (ja)
JP (1) JPWO2015049936A1 (ja)
WO (1) WO2015049936A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3057067B1 (en) * 2015-02-16 2017-08-23 Thomson Licensing Device and method for estimating a glossy part of radiation
US10425633B2 (en) * 2016-12-30 2019-09-24 Konica Minolta Laboratory U.S.A., Inc. Method and system for capturing images for wound assessment with moisture detection
US11779222B2 (en) 2019-07-10 2023-10-10 Compal Electronics, Inc. Method of and imaging system for clinical sign detection

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005137756A (ja) 2003-11-10 2005-06-02 Konica Minolta Holdings Inc 健康度測定システムおよびプログラム
US20080139966A1 (en) * 2006-12-07 2008-06-12 The Hong Kong Polytechnic University Automatic tongue diagnosis based on chromatic and textural features classification using bayesian belief networks
US20080260218A1 (en) * 2005-04-04 2008-10-23 Yoav Smith Medical Imaging Method and System
JP2009000410A (ja) * 2007-06-25 2009-01-08 Noritsu Koki Co Ltd 画像処理装置及び画像処理方法
JP2009028058A (ja) * 2007-07-24 2009-02-12 Saieco:Kk 舌診システム、舌診装置、舌診方法、舌診プログラム
JP2011239926A (ja) 2010-05-18 2011-12-01 Chiba Univ 舌表面質感撮影システム

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101053249B (zh) * 2005-09-09 2011-02-16 松下电器产业株式会社 图像处理方法、图像存储方法、图像处理装置及文件格式
JP5067886B2 (ja) * 2008-10-30 2012-11-07 キヤノン株式会社 画像処理装置及び画像処理方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005137756A (ja) 2003-11-10 2005-06-02 Konica Minolta Holdings Inc 健康度測定システムおよびプログラム
US20080260218A1 (en) * 2005-04-04 2008-10-23 Yoav Smith Medical Imaging Method and System
US20080139966A1 (en) * 2006-12-07 2008-06-12 The Hong Kong Polytechnic University Automatic tongue diagnosis based on chromatic and textural features classification using bayesian belief networks
JP2009000410A (ja) * 2007-06-25 2009-01-08 Noritsu Koki Co Ltd 画像処理装置及び画像処理方法
JP2009028058A (ja) * 2007-07-24 2009-02-12 Saieco:Kk 舌診システム、舌診装置、舌診方法、舌診プログラム
JP2011239926A (ja) 2010-05-18 2011-12-01 Chiba Univ 舌表面質感撮影システム

Also Published As

Publication number Publication date
US20160210746A1 (en) 2016-07-21
EP3053514A1 (en) 2016-08-10
JPWO2015049936A1 (ja) 2017-03-09

Similar Documents

Publication Publication Date Title
WO2015114950A1 (ja) 器官画像撮影装置
JP6346576B2 (ja) 画像処理装置
WO2015029537A1 (ja) 器官画像撮影装置
CN112351724B (zh) 电子内窥镜系统
WO2016076059A1 (ja) 器官画像撮影装置およびプログラム
WO2020036121A1 (ja) 内視鏡システム
CN112469323B (zh) 内窥镜系统
WO2016067892A1 (ja) 健康度出力装置、健康度出力システムおよびプログラム
WO2022037397A1 (zh) 内窥镜系统及用于检测内窥镜的末端与组织接触的方法
JP7374280B2 (ja) 内視鏡装置、内視鏡プロセッサ、及び内視鏡装置の作動方法
JP6774552B2 (ja) プロセッサ装置、内視鏡システム及びプロセッサ装置の作動方法
WO2015049936A1 (ja) 器官画像撮影装置
JP2018126632A (ja) 画像処理装置
JP2016151584A (ja) 器官画像撮影装置
JP2016150024A (ja) 器官画像撮影装置
JP2010142546A (ja) 内視鏡装置およびその制御方法
WO2015068494A1 (ja) 器官画像撮影装置
JP2015226599A (ja) 生体色度計測装置
WO2015060070A1 (ja) 器官画像撮影装置
WO2015068495A1 (ja) 器官画像撮影装置
WO2015156039A1 (ja) 器官画像撮影装置
JP2016168303A (ja) 器官画像撮影装置
JP2016198140A (ja) 器官画像撮影装置
CN113747825B (zh) 电子内窥镜系统
KR102260260B1 (ko) 다각 및 다파장 광원을 이용한 두피진단영상 생성시스템

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14850255

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 15023645

Country of ref document: US

ENP Entry into the national phase

Ref document number: 2015540425

Country of ref document: JP

Kind code of ref document: A

REEP Request for entry into the european phase

Ref document number: 2014850255

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2014850255

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE