WO2017126817A1 - 사용자단말기 및 그 제어방법 - Google Patents

사용자단말기 및 그 제어방법 Download PDF

Info

Publication number
WO2017126817A1
WO2017126817A1 PCT/KR2016/015442 KR2016015442W WO2017126817A1 WO 2017126817 A1 WO2017126817 A1 WO 2017126817A1 KR 2016015442 W KR2016015442 W KR 2016015442W WO 2017126817 A1 WO2017126817 A1 WO 2017126817A1
Authority
WO
WIPO (PCT)
Prior art keywords
light
user
image
user terminal
unit
Prior art date
Application number
PCT/KR2016/015442
Other languages
English (en)
French (fr)
Inventor
김도영
박희진
안준현
정선태
조재걸
김진성
Original Assignee
삼성전자(주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자(주) filed Critical 삼성전자(주)
Priority to US16/071,174 priority Critical patent/US20210161365A1/en
Publication of WO2017126817A1 publication Critical patent/WO2017126817A1/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0004—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by the type of physiological signal transmitted
    • A61B5/0013—Medical image data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00045—Display arrangement
    • A61B1/00048—Constructional features of the display
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00045—Display arrangement
    • A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/043—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/045—Control thereof
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/24—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the mouth, i.e. stomatoscopes, e.g. with tongue depressors; Instruments for opening or keeping open the mouth
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A61B5/0022—Monitoring a patient using a global network, e.g. telephone networks, internet
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A61B5/0088—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for oral or dental tissue
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/45—For evaluating or diagnosing the musculoskeletal system or teeth
    • A61B5/4538—Evaluating a particular part of the muscoloskeletal system or a particular medical condition
    • A61B5/4542—Evaluating the mouth, e.g. the jaw
    • A61B5/4547—Evaluating teeth
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61C—DENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C19/00—Dental auxiliary appliances
    • A61C19/04—Measuring instruments specially adapted for dentistry
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/67—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00006—Operational features of endoscopes characterised by electronic signal processing of control signals
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00011—Operational features of endoscopes characterised by signal transmission
    • A61B1/00016—Operational features of endoscopes characterised by signal transmission using wireless means
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00025—Operational features of endoscopes characterised by power management
    • A61B1/00027—Operational features of endoscopes characterised by power management characterised by power supply
    • A61B1/00032—Operational features of endoscopes characterised by power management characterised by power supply internally powered
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00039—Operational features of endoscopes provided with input arrangements for the user
    • A61B1/0004—Operational features of endoscopes provided with input arrangements for the user for electronic operation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163—Optical arrangements
    • A61B1/00186—Optical arrangements with imaging filters
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0661—Endoscope light sources
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/01—Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/08—Detecting, measuring or recording devices for evaluating the respiratory organs
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/08—Detecting, measuring or recording devices for evaluating the respiratory organs
    • A61B5/082—Evaluation by breath analysis, e.g. determination of the chemical composition of exhaled breath

Definitions

  • the present invention is a user terminal and a control method for outputting a specific range of light to the user's body and imaging the image by the reflected light to provide analysis information about the user's body.
  • the system captures a part of the user's body using a personal terminal and transmits the captured image to a specialist using a remote dental diagnostic server. The expert then looks at the captured images to determine the condition of the teeth and transmits medical information to the personal terminal.
  • the remote dental diagnosis server 1 receives an image (image A) of the photographed tooth from the personal terminal 2 and transmits it to the dental professional terminal 3, and receives the diagnostic data from the dental professional terminal 3. Can be transmitted to the personal terminal (2). After the user of the personal terminal 2 of FIG. 1 captures an image of a tooth, the user of the personal terminal 2 transmits the captured image to the remote dental diagnosis server 1 so as to be transferred to the dental professional terminal 3, and the remote dental diagnosis server 1 The captured image is transmitted to the professional terminal 3.
  • An object of the present invention is to output a specific range of light to the user's body on the screen of the user terminal, to capture the image by the reflected light and to analyze the captured image to provide analysis information about the user's body on the user terminal screen It is to provide a user terminal and a control method thereof.
  • the apparatus may further include a detector configured to sense a gas and a temperature of the user's mouth, and wherein the controller is configured to output the first light based on at least one level of the gas and the temperature detected by the detector.
  • the display unit may be controlled.
  • the controller may analyze an image by the second light having a second wavelength range among the captured images.
  • the controller may analyze at least one of color, distribution, illuminance, amount of fluorescence loss and area of the image by the second light in response to the captured image.
  • the controller may set a range of the at least one analyzed value for providing the analysis information.
  • the controller may extract an image by the second light from the captured image.
  • the optical filter may further include an optical filter which receives power from the power supply and operates to pass the second light among the reflected light by the first light and to block light other than the second light.
  • the controller may control the power supply unit to start the operation of the optical filter when the first light is output.
  • the controller may be configured to change at least one of the size, position, and luminance of the first light in response to at least one of the size of the captured image, the illuminance, and the luminance of the image by the captured second light. Can be controlled.
  • the storage unit for storing an application for determining the oral cavity of the user;
  • the UI generating unit for generating a UI for the application, wherein the control unit executes the application, the UI to generate a selectable UI for measuring at least one of the user's plaque, caries, bad breath and mouth temperature
  • the generation unit can be controlled.
  • the analysis information may include at least one of oral state information, oral care information, oral education, coaching information, goal setting challenge information, goal achievement guide information, and guide information of the user.
  • the display unit may have an RGB filter for outputting the first light.
  • the image by the second light may be green and red-based fluorescent colors received after being reflected by the blue-based first light is output to the oral microbial secretion of the user.
  • control method of the user terminal for achieving the above object of the present invention the step of controlling to output the first light of the first wavelength range in the first area of the screen of the display unit; Imaging the image; Analyzing the captured image; It is achieved by a control method of a user terminal comprising the step of displaying the analysis information in the second area of the screen.
  • the controlling of the output of the first light may include controlling the output of the first light based on at least one level of gas and temperature of the detected user's mouth.
  • the controlling of the output of the first light may include controlling the output of the first light based on at least one level of gas and temperature of the detected user's mouth.
  • the analyzing of the picked-up image may include analyzing an image by a second light having a second wavelength range among the picked-up images.
  • the displaying of the analysis information may include analyzing at least one of color, distribution, illuminance, fluorescence loss, and area of the image by the second light in response to the captured image.
  • the analyzing of the at least one may include setting a range of the at least one analyzed value for providing the analysis information.
  • the analyzing of the picked-up image may include extracting an image by the second light from the picked-up image.
  • the method may further include supplying power to an optical filter to allow the second light to pass through the reflected light and to block light other than the second light.
  • the supplying power may include controlling to start the operation of the optical filter when the first light is output.
  • the displaying of the analysis information may include the size, location and first light of the first area corresponding to at least one of the size of the captured image, the illuminance and luminance of the image by the captured second light. And changing at least one of the luminance.
  • the method may further include generating a selectable UI to measure at least one of the user's plaque, caries, bad breath, and oral temperature.
  • the analysis information may include at least one of oral state information, oral care information, oral education, coaching information, goal setting challenge information, goal achievement guide information, and guide information of the user.
  • the image by the second light may be green and red-based fluorescent colors received after being reflected by the blue-based first light is output to the oral microbial secretion of the user.
  • oral care device for achieving the above object of the present invention, the communication unit that can communicate with the user terminal; A light output unit capable of outputting light of a specific wavelength to a user's mouth; An imaging unit capable of capturing an image of the mouth of the user; Oral care including a control unit controlling the light output unit to output a first light having a first wavelength range, controlling the imaging unit to capture an image, and controlling the communication unit to transmit the captured image to the user terminal. It can be achieved by the device.
  • the apparatus may further include a detector configured to detect a gas and a temperature of the mouth of the user, wherein the controller transmits at least one level of the gas and the temperature detected by the detector to the user terminal. Can be controlled.
  • the controller may be configured to perform at least one of sensing at least one of gas and temperature of the user's mouth and outputting the first light based on a control signal received from the user terminal.
  • control method of the oral care device for achieving the above object of the present invention the step of outputting the first light of the first wavelength range; Imaging the image; It can be achieved by a control method of the oral care device comprising the step of transmitting the captured image to a user terminal.
  • the method may further include transmitting at least one level of a gas and a temperature of the detected user's mouth to the user terminal.
  • the outputting of the first light may include detecting at least one of gas and temperature of the user's mouth and outputting the first light based on a control signal received from the user terminal. It may include a step.
  • the present invention there is an effect that the user can easily obtain the state of the teeth, diagnosis information, education information, coaching information, target guide information using his user terminal.
  • FIG. 1 is a simplified diagram showing a remote dental diagnosis system related to the present invention
  • FIG. 2 is an exemplary view illustrating imaging a tooth using a user terminal according to an embodiment of the present invention and displaying analysis information about the tooth on a screen;
  • FIG. 3 is a block diagram showing the configuration of a user terminal according to the present invention.
  • FIG. 4 is a block diagram showing the configuration of a user terminal according to another embodiment of the present invention.
  • FIG. 5 is a control flowchart illustrating a control method of a user terminal according to the present invention.
  • FIG. 6 is a control flowchart illustrating a control method of a user terminal according to an embodiment of the present invention.
  • FIG. 7 is a control flowchart illustrating a control method of a user terminal according to another embodiment of the present invention.
  • FIG. 8 is an exemplary view illustrating a UI selectable to measure plaque and caries of a user in a user terminal according to another embodiment of the present invention.
  • FIG. 9 is a graph illustrating a screen spectrum capable of outputting blue light in a user terminal according to an embodiment of the present invention.
  • FIG. 10 is an exemplary view illustrating analysis information about a user's body in an image captured by a user terminal according to an embodiment of the present invention.
  • 11 and 12 are exemplary views illustrating color and area analysis through grid area setting in an image captured by a user terminal according to an embodiment of the present invention.
  • FIG. 13 is an exemplary diagram illustrating an example of providing status information and diagnostic guide information in an image captured by a user terminal according to an exemplary embodiment of the present disclosure.
  • FIG. 14 is a control flow diagram illustrating a control flow for providing analysis information on plaque by measuring the amount of fluorescence loss in a user terminal according to an embodiment of the present invention.
  • 15 is an exemplary diagram illustrating analysis information due to the control flow of FIG. 14.
  • 16 is a control flow diagram illustrating a control flow for providing analysis information on caries by measuring an area of a second light in a user terminal according to another embodiment of the present invention.
  • 17 is an exemplary diagram illustrating analysis information due to the control flow of FIG. 16.
  • FIG. 18 is an exemplary diagram illustrating an example of displaying guide information in a second area in a user terminal according to an embodiment of the present invention.
  • 19 and 20 are exemplary views illustrating a first area and a second area on a screen of the display 110 of the user terminal 10 according to another embodiment of the present invention.
  • 21 is a block diagram showing the configuration of an oral care apparatus according to the present invention.
  • Figure 22 is a block diagram showing the configuration of an oral care apparatus according to an embodiment of the present invention.
  • 24 is a control flow diagram showing the operation of the oral care apparatus according to an embodiment of the present invention.
  • 25 is a control flow diagram illustrating a control flow for providing analysis information using measurements on a user's bad breath, oral temperature, and light in an oral care device and a user terminal according to an embodiment of the present invention
  • 26 is an exemplary table showing guide information provided to a user in a user terminal by measuring the oral temperature level of the user in another oral care device according to an embodiment of the present invention.
  • 27 is an exemplary table illustrating guide information provided to a user in a user terminal by measuring a bad breath level of a user in another oral care device according to an embodiment of the present invention.
  • FIG. 28 is an exemplary diagram illustrating measurement and analysis information about a user's bad breath, oral temperature, and light by using another user terminal and an oral care device according to an embodiment of the present invention.
  • 29 to 31 is an exemplary view showing the mounting position and shape of the light output unit, the imaging unit and the detection unit of the oral care apparatus according to an embodiment of the present invention
  • 32 is an exemplary diagram illustrating a signal flow for measuring and providing analysis information about a bad breath, oral temperature and light of a user using a user terminal and an oral care apparatus according to an embodiment of the present invention.
  • 33 and 34 are exemplary diagrams for oral education and coaching using an animation or a user-set character comparing before and after brushing with respect to a measurement result.
  • FIG. 35 is an extended example diagram of transmitting measurement results to a server capable of analyzing oral measurement results and receiving services such as FIGS. 33 and 34 through the server;
  • 36 and 37 are control flowcharts illustrating a control method of a user terminal according to an embodiment of the present invention with reference to FIGS. 33 and 34.
  • 38 is an exemplary view illustrating an operation of providing analysis information of a tooth using a user terminal and a server according to another embodiment of the present invention.
  • FIG 2 is an exemplary view showing that the image of the tooth using the user terminal 10 according to an embodiment of the present invention and the analysis information about the tooth is displayed on the screen.
  • the user terminal 10 illustrated in FIG. 2 may show the screen of the display 110 by dividing the first area and the second area.
  • the first area of the display 110 may be set in the screen of the first area such that the first light, which is about 400 nm to about 450 nm blue light, is output to the user's mouth.
  • the screen of the second area is the image of the second light reflected by the first light output from the first area to the mouth portion of the user by the image pickup unit 120 and analyzes the captured image to the user's mouth Analytical information about can be displayed.
  • the second region may display an image of the mouth, that is, a plaque is formed in the mouth of the user.
  • the captured image includes the image by the second light reflected by the user's mouth.
  • the image by the second light in the image can be analyzed to determine the condition of the oral cavity.
  • the secretion of the tooth bacteria becomes large.
  • the blue light, which is the first light is reflected, the secretion of the dental bacteria has a red fluorescent color when it is reflected.
  • the user terminal 10 photographs the user's teeth and analyzes the teeth to provide analysis information through the second area, but is not limited thereto.
  • the captured data is transmitted to an external device, the external device is analyzed, and the analysis information is transmitted to the user terminal 10. It may be implemented to display the analysis information received in the two areas.
  • the user terminal 10 includes a display 110, an imaging unit 120, and a control unit 100.
  • the display 110 may display an image based on the image signal output from the image processor 140 (see FIG. 4).
  • Implementation of the display unit 110 is not limited, such as liquid crystal, plasma, light-emitting diode, organic light-emitting diode, surface conduction electron gun It can be implemented by various display methods such as -conduction electron-emitter, carbon nano-tube, and nano-crystal.
  • the display 110 may additionally include additional components according to its implementation.
  • the display unit 110 is a liquid crystal type
  • a display unit liquid crystal display panel (not shown)
  • a backlight unit (not shown) for supplying light thereto
  • a panel driving substrate for driving the panel (not shown) (Not shown).
  • the display 110 displays an image based on the image signal processed by the image processor 140.
  • the display 110 displays an image, but includes a method of LCD, PDP, OLED, and the like.
  • the display unit may include an LCD panel, a PDP panel, an OLED panel, and the like.
  • the display 110 may display an image and a color correction process.
  • the display unit 110 may include a display panel for displaying an image and a panel driver for processing an input image signal to display the image on the display panel, but is not limited thereto.
  • An image signal received from an external input source through an interface may be displayed on the display 110 through image processing such as decoding, deinterlacing, scaling, or the like.
  • the display 110 may have a screen capable of displaying an image, and may output light having a specific wavelength in at least a portion of the screen.
  • the imaging unit 120 may be implemented as a camera to capture an external image.
  • the imaging unit 120 may capture an image including the second light, which is the first light, which is blue light output from a portion of the display 110, is reflected light reflected by a part of the user's body.
  • the imaging unit 120 may be controlled to image the body of the user on the front surface.
  • the controller 100 may be implemented as a central processing unit (CPU) or a processor, so that the first light having the first wavelength range is output to the user's body in the first area of the display 110.
  • Control the display unit 110 control the imaging unit 120 to capture an image of the user's body, and display to display the analysis information about the user's body in the second area of the screen based on the captured image
  • the unit 110 is controlled.
  • FIG. 4 is a block diagram showing the configuration of a user terminal 10 according to another embodiment of the present invention.
  • the user terminal 10 according to another embodiment of the present invention of FIG. 4 may include the display unit 110 and the imaging unit 120 of FIG. 3.
  • the communication unit 130 and the image processor 140 may be additionally configured.
  • the apparatus may further include a storage 150, a UI generator 160, a power supply 170, an optical filter 180, a detector 190, and a controller 100.
  • the display 110 has an RGB filter 112 for outputting first light.
  • the command is transmitted from the controller 100 to output the first light
  • the power is supplied to the RGB filter 112 of the display 110, so that the light having a specific range of wavelengths in some areas of the display 110, that is, blue light It is operable to output only the first light.
  • the light source is output from the lower portion of the display 110, only the blue light is output to the outside of the display 110.
  • the communication unit 130 may receive a signal by an external input and transmit the signal to the image processing unit 140 or the control unit 100.
  • the communication unit 130 may receive a signal from the corresponding external input by wire by connecting various external input cables, or may receive a signal received wirelessly according to a predetermined wireless communication standard.
  • the communication unit 130 may include a plurality of connectors (not shown) to which each cable is individually connected.
  • the communication unit 130 may receive a signal from a connected external input, for example, a broadcast signal, an image signal, a data signal, etc. according to an HDMI, USB, component standard, or receive communication data through a communication network. Can be.
  • the communication unit 130 may receive a signal / data from an external input, as well as a tuner for tuning a wireless communication module (not shown) or a broadcast signal for wireless communication according to a design method of the user terminal 10. Various additional configurations, such as not shown). In addition to receiving a signal from an external device, the communication unit 130 may transmit information / data / signal of the user terminal 10 to the external device. That is, the communication unit 130 may not be limited to the configuration of receiving a signal to an external device, but may be implemented as an interface capable of bidirectional communication. The communication unit 130 may receive a control signal for selecting a UI from the plurality of control devices.
  • the communication unit 130 may be configured as a communication module for short-range wireless communication such as Bluetooth, IR (Infrared), UWB (Ultra Wideband), Zigbee, etc., and is a well-known communication port for wired communication. It may be configured.
  • the communicator 130 may be used for various purposes, such as a command for manipulating a display, transmitting and receiving data, in addition to a control signal for selecting a UI.
  • the image processor 140 may be implemented as a graphic processing unit (GPU), and the type of the image processing process performed by the image processor 140 is not limited.
  • the image processor 140 may distribute a predetermined signal to a signal for each characteristic. De-multiplexing, decoding corresponding to video format of video signal, de-interlacing converting interlaced video signal to progressive method, and improving image quality
  • a decoder (not shown) which may include noise reduction, detail enhancement, frame refresh rate conversion, etc., and decodes the source image corresponding to the image format of the encoded source image.
  • a frame buffer (not shown) for storing the decoded source image in units of frames.
  • the image processing unit 140 is a system-on-chip (SOC) incorporating these various functions, or an individual component capable of independently performing each of these processes is mounted on a printed circuit board to an image processing board (not shown). It may be implemented and embedded in the display device.
  • SOC system-on-chip
  • the image processor 140 performs various preset image processing processes on a broadcast signal including an image signal received from a receiver (not shown) and a source image including an image signal provided from an image source (not shown).
  • the image processor 140 may output the image signal on which the process is performed to the user terminal 10, thereby displaying the processed source image on the user terminal 10.
  • the storage unit 150 should retain data even when power is cut off from the user terminal 10, and is preferably provided as a writable nonvolatile memory (Writable ROM) to reflect changes in the user. That is, the storage unit 150 may be provided as one of a flash memory, an EPROM, or an EEPROM.
  • the storage unit 150 may store an application for determining the oral cavity state of the user.
  • the application may be stored in the storage unit of the user terminal 10 as firmware by the producer, and if not stored at the time of initial production, may download and install an application for determining the user's oral cavity state from an external server. .
  • the application may not be stored in the storage unit of the user terminal 10 by being executed as a web application by connecting to a server of the web application.
  • the UI generator 160 may generate a UI for operating the executed application program.
  • the generated UI includes a plurality of sub UIs provided in the form of icons, text, and the like, and when a user selects a specific sub UI through the user terminal 10, an application program may be operated in response to the selected sub UI. That is, each subUI may be generated in units of a plurality of functions or events capable of operating an application program running in the user terminal 10.
  • the UI generator 160 refers to a software or hardware function for generating and controlling a UI displayed on the display 110, and may be performed by the controller 100 to be described later. In other words, the UI generator 160 may be configured as a separate chipset or may not be implemented by a separate microprocessor.
  • the power supply unit 170 supplies power to an internal configuration that requires the power of the user terminal 10.
  • the power supply unit 170 may supply power in some configurations under the control of the controller 100 and may block the power supply unit 170. As a result, the respective components are driven and stopped.
  • the optical filter 180 may be selectively received with respect to the light incident to the imaging unit 120 from the outside inside the user terminal 10.
  • the optical filter 180 may be implemented to operate to receive power from the power supply unit 170 to pass the second light of the reflected light and to block light other than the second light.
  • the optical filter 180 may be attached to the outside of the user terminal 10 to cover the image capturing unit 120, or may be provided to slide.
  • the optical filter 180 may be formed in the form of a film to cover the light to the imaging unit 120. Whenever the oral cavity state is to be determined, it may be attached to the imaging unit 120 to make it easier to grasp the second light more efficiently.
  • the detector 190 includes a temperature detector 192 for optically measuring the body temperature of the user and includes a gas detector 194 for measuring and detecting a gas of bad breath that may be generated in the user's mouth. can do.
  • the temperature sensing unit 192 may be provided as an optical sensor that measures the body temperature of the user's mouth as light received by outputting light to the user's mouth reflected and reflected, but is not limited thereto.
  • the temperature sensor 192 may measure the temperature (body temperature) of the user's mouth in the case of brushing or brushing the teeth. This is because the activity of volatile sulfur compounds of bacteria in the oral cavity is closely related to temperature, so when the user with good oral condition brush their teeth, the higher the temperature, the more effective the bad breath reduction.
  • the gas detector 194 may detect gas (bad breath) in the exhalation of the user, which may be caused by bacteria in the oral cavity. However, if it is determined that bad breath is occurring more than a predetermined level in the user's mouth, it is determined whether the bad breath is caused by the user's ingestion of food or is caused by caries and plaque of the user's teeth. It can also be determined by combining analysis information.
  • the controller 100 may control the display 110 to output the first light based on at least one level of the gas and the temperature detected by the detector 190.
  • the controller 100 may analyze an image by the second light having the second wavelength range among the captured images.
  • the controller 100 may analyze at least one of color, distribution, illuminance, fluorescence loss, and area of the image by the second light in response to the captured image.
  • the image of the second light in the captured image has a lot of dental bacteria in the mouth of the user.
  • the blue light which is the first light
  • the secretion of the dental bacteria is red-colored fluorescent color. That is, by analyzing at least one of color, distribution, illuminance, fluorescence loss and area, it is possible to determine how many dental bacteria are.
  • the controller 100 may adjust the first area and the second area of the screen of the display 110 by analyzing the illuminance. For example, as the illuminance, that is, the angle at which the second light is incident on the imaging unit 120 is changed, the first area may be increased or decreased, and the second area may be increased or decreased.
  • the controller 100 may set a range of at least one analyzed value for providing analysis information about the user's body.
  • the control unit 100 may set that the formation of dental plaque is started in the light pink region with respect to the color.
  • the light pink region may be regarded as about 50% in the process of turning to red light than the image index white green due to the second light when no dental bacteria are present, so the control unit 100 may set this.
  • the control unit 100 sets the range of 0% to 5%, 5% to 20%, and 20% or more in the case of fluorescence loss, and the value of the analyzed fluorescence loss is 0% to 5%, 5% to 20%, and 20% or more. In this case, it is possible to determine the degree of dental plaque, and diagnosis and dental care information may be provided differently according to the range.
  • the controller 100 may extract an image by the second light from the captured image.
  • an image of the second light having a diameter of about 520 nm may be extracted from the captured image to determine how much is distributed in which region of the captured image.
  • the reflected light by the first light includes an image of the user's mouth, and the second light is received, and the second light is 520 nm, indicating a dark and pale red fluorescent color according to its intensity. Extracted from the image and displayed on the image of the user's mouth can be provided to the user.
  • the controller 100 may control the power supply unit 170 to start the operation of the optical filter 180 operated by the power supply when the first light is output.
  • the controller 100 may control to change at least one of the size, position, and brightness of the first light in response to at least one of the size of the captured image, the illuminance, and the brightness of the image by the second light. have.
  • the controller 100 may adjust the size and luminance of the first area outputting the first light by comparing the size of the captured image with a preset image size or the size of a previously captured image, grasping the magnitude and luminance of the size of the captured image.
  • the size or position of the first region may be changed according to the angle at which the second light is incident on the imaging unit 120.
  • the size of the first area formed on the lower side of the screen of the display 110 becomes smaller and its position is lower. If the user terminal 10 is used lower than the user's body, the size of the first region may be increased, and the size of the second region may be reduced by the controller 100. The first region and the second region may have thresholds of a size that no longer decrease and no longer increase. As a result, the luminance of the first light output from the first region can be kept to a minimum. Then, the analysis information about the user's body provided in the second area may be provided in sufficient size. The above examples show that the first area and the second area can be changed according to the position of the user terminal 10.
  • the control unit 100 executes an application stored in the storage unit 150 to determine a user's oral condition, and to measure at least one of dental plaque, dental caries, bad breath and oral temperature of the user.
  • the UI generator may be controlled to generate a selectable UI.
  • the analysis information may include at least one of oral state information, oral care information, oral education, coaching information, goal setting challenge information, goal achievement guide information, and guide information of the user.
  • the control unit 100 may provide the user's oral condition information, oral care information, oral education, coaching information, goal setting challenge information, goal achievement guide information and guidance information with the captured image and be provided to the user as a table UI. It may be.
  • the oral state information may be indicative of the progress of dental plaque
  • the oral care information may be information on brushing teeth or management information on treatment.
  • the guide information may include oral state information and oral care information, and may be information about a hospital or information about a tooth-related medicine.
  • Goal Setting Challenge and Achievement Guide Information is provided according to the degree of dental plaque or bad breath, and guides are provided according to the degree of elimination of plaque or bad breath through the use of gargles and dental floss. A guide to achievement is scored and provided. The result of the measurement before the removal of plaque or bad breath is compared to the measurement results after the use of teeth and floss.
  • the oral state information, oral care information, oral education, coaching information, goal setting challenge information, goal achievement guide information and guide information is not limited to the above, and may be provided as long as the relevant information that can be provided to the user. Such information may be provided using an alarm or vibration effect.
  • FIG. 5 is a control flowchart illustrating a control method of the user terminal 10 according to the present invention.
  • the first light having the first wavelength range is output to the user's body in the first area of the display 110.
  • the imaging unit 120 captures an image of the user's body under the control of the control unit 100 (S12).
  • the analysis information about the user's body is displayed on the second area of the screen based on the captured image (S13).
  • step S11 the first light is not outputted from the display apparatus 10 and the control flow is received by receiving a captured image of an area in which the first light is output from the external device and the first light of the first wavelength range is output. Can proceed.
  • the control flow is not limited thereto because it is an embodiment.
  • FIG. 6 is a control flowchart illustrating a control method of the user terminal 10 according to an embodiment of the present invention.
  • the user selects and executes an application for determining the oral cavity state of the user on the screen of the display 110 (S21).
  • the controller 100 controls the UI generator 160 to generate a selectable UI for measuring at least one of dental plaque, dental caries, bad breath, and oral temperature of the user (S22).
  • the user selects one of the generated plaque measurement mode UI and the caries measurement mode UI (S23).
  • the controller 100 controls the display 110 to output the first light having the first wavelength range to the user's body in the first area of the screen of the display 110 according to the selected mode (S24).
  • the imaging unit 120 captures an image of the user's body (S25).
  • the power supply unit 170 supplies power to the optical filter 180 to pass the second light out of the reflected light and block other than the second light (S26).
  • a range of at least one analyzed value for providing analysis information about the user's body is set (S27).
  • the setting of the range of analyzed values may be preset by the user or by referring to the opinion of a doctor.
  • the image by the second light of the second wavelength range of the captured image is analyzed (S28).
  • the controller 100 determines at least one of the size, position, and brightness of the first light in response to at least one of the size of the picked-up image, the illuminance and brightness of the image by the picked-up second light (S29). .
  • the controller 100 controls the display 110 to be the determined size, position, and luminance of the first light.
  • the control unit 100 analyzes at least one of color, distribution, illuminance, fluorescence loss and area of the image by the second light in response to the captured image, and displays oral state information, oral care information, At least one of oral education, coaching information, goal setting challenge information, goal achievement guide information, and guide information is displayed (S30).
  • the oral image of the user may be provided with a color to indicate the extent of bad breath, dental caries or dental plaque, and the analyzed information may be displayed numerically. Depending on the degree of bad breath, you can also be notified by vibrating or alarming, or you can provide a table with a numerical display of the analyzed information while displaying the color on the image.
  • the first light is not outputted from the display apparatus 10, but the control flow may be performed by receiving a captured image of an area in which the first light is output from the external device and the first light of the first wavelength range is output.
  • the control flow is not limited thereto because it is an embodiment.
  • control unit 100 may measure the gas level of the user's mouth to measure the temperature level when the predetermined level or more.
  • the controller 100 may measure the temperature level of the user's mouth and output the first light to capture an image when the temperature is lower than or equal to a predetermined level.
  • the first light may be output to display guide information for guiding the measured gas level, that is, the degree of bad breath, without capturing an image.
  • the first light may be output to display guide information for guiding the measured temperature level and bad breath level without capturing an image.
  • FIG. 7 is a control flowchart illustrating a control method of the user terminal 10 according to another embodiment of the present invention.
  • the user selects and executes an application for determining the oral cavity state of the user on the screen of the display 110 (S31).
  • the controller 100 controls the UI generator 160 to generate a selectable UI for measuring at least one of dental plaque, dental caries, bad breath, and oral temperature of the user (S32).
  • the user selects one of the generated plaque measurement mode UI and the caries measurement mode UI (S33).
  • the controller 100 controls the display 110 to output the first light having the first wavelength range to the user's body in the first area of the screen of the display 110 according to the selected mode (S34).
  • the imaging unit 120 captures an image of the user's body (S35).
  • the controller 100 extracts the second light from the received reflected light (S36).
  • an algorithm may extract how much the second light is distributed in the image from among the received reflected light.
  • a range of at least one analyzed value for providing analysis information about the user's body is set (S37).
  • the setting of the range of analyzed values may be preset by the user or with reference to a doctor's opinion.
  • the image by the second light of the second wavelength range of the captured image is analyzed (S38).
  • the controller 100 determines at least one of the size, position, and luminance of the first light in response to at least one of the size of the captured image, the illuminance, and the luminance of the image by the captured second light (S39). .
  • the controller 100 controls the display 110 to be the determined size, position, and luminance of the first light.
  • the control unit 100 analyzes at least one of color, distribution, illuminance, fluorescence loss and area of the image by the second light in response to the captured image, and displays oral state information, oral care information, At least one of oral education, coaching information, goal setting challenge information, goal achievement guide information, and guide information is displayed (S40).
  • the user's oral image may be color coded to indicate the extent of bad breath, dental caries or dental plaque, or analyzed information may be indicated numerically and the image may be colored.
  • the analyzed information can be provided with a numerical table.
  • the first light is not outputted from the display apparatus 10, but the control flow may be performed by receiving a captured image of an area in which the first light is output from the external device and the first light of the first wavelength range is output.
  • the control flow is not limited thereto because it is an embodiment.
  • control unit 100 may measure the gas level of the user's mouth to measure the temperature level when the predetermined level or more.
  • the controller 100 may measure the temperature level of the user's mouth and output the first light to capture an image when the temperature is lower than or equal to a predetermined level.
  • the first light may be output to display guide information for guiding the measured gas level, that is, the degree of bad breath, without capturing an image.
  • the first light may be output to display guide information for guiding the measured temperature level without capturing an image.
  • FIG. 8 is an exemplary view showing a UI selectable for measuring dental plaque and dental caries of a user in the user terminal 10 according to another embodiment of the present invention.
  • the plaque measurement mode and the caries measurement mode may be displayed.
  • the user can enter the measurement mode by selecting one of the displayed plaque measurement and caries measurement mode.
  • Other measurement modes can be displayed and the caries mode can be executed immediately.
  • the imaging unit 120 is formed above the user terminal 10.
  • An optical filter 180 may be provided on the right side of the imaging unit 120 to cover the lens of the imaging unit.
  • the optical filter 180 may be provided to cover the image capturing unit 120 by sliding left and right.
  • the optical filter 180 may be provided to be attached to and attached to the lens portion of the imaging unit 120.
  • FIG 9 is a graph illustrating a screen spectrum capable of outputting blue light from the user terminal 10 according to an exemplary embodiment.
  • the various types of user terminals 10 output light in a band of about 400 to 450 nm, and output blue light. Similarly, it can output also about the wavelength light of another area
  • FIG. 10 is an exemplary view illustrating analysis information about a user's body in an image captured by the user terminal 10 according to an exemplary embodiment.
  • the user terminal 10 outputs the first light and then captures an image including the received second light and shows that the analysis information is displayed together. Specifically, the image of the user's mouth is displayed and the image is displayed.
  • the first light is output to the oral cavity, and the second light, which is a fluorescence of the red series, is displayed by the secretion of the dental bacteria among the reflected light. It is indicated that the part indicated by dental plaque.
  • the red color of the fluorescent color that is, the color, distribution, illuminance, the amount of fluorescence loss and the area, the degree of dental caries, the degree of dental plaque, the degree of plaque lamination, and bad breath You can judge the degree.
  • 11 and 12 are exemplary views illustrating color and area analysis through grid area setting in an image picked up by the user terminal 10 according to an exemplary embodiment of the present invention.
  • 11 and 12 illustrate color and area analysis of a portion of the red series shown in FIG. 10 by fluorescence through grid region setting.
  • Detecting white / red color, and calculating the ratio of the number of grid (A) of the white / red color can calculate the degree of dental caries / plaque.
  • the color of the grid is red, white green or white.
  • FIG. 13 is an exemplary diagram illustrating an example of providing status information and diagnostic guide information for determining a dental condition in an image captured by the user terminal 10 according to an exemplary embodiment.
  • the criteria for percentage (%) are compared to the total number of grids and the number of grids representing tooth decay and tooth decay (%), which is determined to be 10% when there are 100 total grids and 10 red teeth with tooth decay. can do. If a grid is half red and half white, one grid can be determined to have tooth decay or plaque, or the total grid count can be made more dense to represent a percentage. In the above example, the method of determining when 10 to 5 of the red color with dental caries / mortar is mixed with red and white is judged that there are 10 dental caries / mortar, or 100 grids more densely. After making 1000, you can calculate the percentage of caries / totality.
  • an index for the displayed color is provided on the lower side, and a table (reference) displaying the distribution amount and the guide for the fluorescence loss level is displayed on the lower side. If the level of fluorescence loss is less than 5%, it provides health information and diagnosis guide information, and if it is 6 ⁇ 20% distribution, it provides status information and diagnosis guide information to measure again after brushing.
  • the table can be marked to inform you of the (dental plaque).
  • the percentage distribution (%) value may be provided differently according to the criteria for diagnosis and dental management information medical staff. If the range is only one example, it is also possible to display the guide by setting the distribution amount of another range according to another embodiment and various intentions.
  • FIG. 14 is a control flow diagram illustrating a control flow for providing analysis information on dental plaque by measuring the amount of fluorescence loss in the user terminal 10 according to an exemplary embodiment of the present invention.
  • the range is only one example, it is also possible to display the guide by setting a distribution amount of another range according to another embodiment and various intentions.
  • the measurement light source is set (S42).
  • the measurement light source may be preset to 400 to 500 nm.
  • the first module outputs the first light to the mouth of the user and the camera module, which is an imaging unit, operates (S43).
  • the optical filter 180 is slid and positioned to cover the lens of the imaging unit 120 (S44).
  • the optical filter 180 may be built in to operate by supplying power. It may be provided as a removable type to cover the imaging unit 120.
  • the amount of fluorescence loss of the picked-up image for the second light is measured (S45).
  • the measured value is stored in the storage unit 150 (S47).
  • the amount of fluorescence loss within 5% based on the distribution amount and the guide shown in FIG. 13 is displayed to guide healthy teeth (S48).
  • the user's teeth may be continuously managed using records stored in the storage unit 150.
  • the second region may display 5-20% of the fluorescence loss, and may display a prompt for re-measurement after brushing (S50).
  • Oral training and coaching information on brushing and flossing may be provided when remeasuring.
  • Oral education is information using the distribution and the guide of FIG. 13 to teach the user how to brush teeth or how to manage the teeth and specific methods for management, such as the use of dental floss and dental floss to remove plaque and bad breath in the teeth.
  • Such training and coaching can be provided using animations or custom characters.
  • the above range is only one example, and it is also possible to display the guidance text by setting the amount of fluorescence dissipation in another range according to another embodiment or various intentions.
  • the plaque may be informed of an excessive state while the amount of fluorescence loss is greater than 20% in the second region (S51).
  • caries may be dangerous and may indicate instructions to visit the hospital for treatment.
  • based on the location of the current location, home, office, etc. can also guide information about the surrounding dental hospital. In addition, it may further guide information on brushing the teeth to remove the measured excess plaque.
  • the first light is not outputted from the display apparatus 10, but the control flow may be performed by receiving a captured image of an area in which the first light is output from the external device and the first light of the first wavelength range is output.
  • the control flow is not limited thereto because it is an embodiment.
  • control unit 100 may measure the gas level of the user's mouth to measure the temperature level when the predetermined level or more.
  • the controller 100 may measure the temperature level of the user's mouth and output the first light to capture an image when the temperature is lower than or equal to a predetermined level.
  • the first light may be output to display guide information for guiding the measured gas level, that is, the degree of bad breath, without capturing an image.
  • the first light may be output to display guide information for guiding the measured temperature level without capturing an image.
  • FIG. 15 is an exemplary diagram illustrating analysis information due to the control flow of FIG. 14.
  • FIG. 15 is a table displaying information including at least one of oral state information, oral care information, oral education, coaching information, goal setting challenge information, goal achievement guide information, and guide information for the control flow of FIG. 14.
  • the amount of dental plaque can be determined based on the amount of fluorescence loss.
  • FIG. 16 is a control flowchart illustrating a control flow of providing analysis information on dental caries by measuring an area of a second light in the user terminal 10 according to another exemplary embodiment of the present invention.
  • An application for optically measuring the dental condition of the user is selected (S61).
  • the measurement light source is set (S62).
  • the measurement light source may be preset to 400 to 500 nm.
  • the first light is output to the mouth of the user in the first area, and the camera module, which is an imaging unit, is operated (S63).
  • the optical filter 180 is slid and positioned to cover the lens of the imaging unit 120 (S64).
  • the optical filter 180 may be built in to operate by supplying power. It may be provided as a removable type to cover the imaging unit 120.
  • the area of the second light of the picked-up image for the second light is measured (S65).
  • the measured value is stored in the storage unit 150 (S67).
  • the second area may be notified that the area of the second light is 20 to 70%, and a guide phrase for the determination information of the initial caries state may be displayed (S70).
  • the above range is only one example, and it is also possible to display the guidance text by setting the amount of fluorescence dissipation in another range according to another embodiment or various intentions.
  • the second area may be informed that the area of the second light is greater than 20%, and the information determined as dental caries may be notified (S71).
  • caries may be dangerous and may indicate instructions to visit the hospital for treatment.
  • based on the location of the current location, home, office, etc. can also guide information about the surrounding dental hospital.
  • it may further guide information on brushing the teeth to remove the measured excess plaque.
  • the information about brushing teeth may be oral education and coaching information about brushing teeth and floss use.
  • Oral education is information using the distribution and the guide of FIG. 13 to teach the user how to brush teeth or how to manage the teeth and specific methods for management, such as the use of dental floss and dental floss to remove plaque and bad breath in the teeth.
  • Such training and coaching may be provided using animations or custom characters.
  • the first light is not outputted from the display apparatus 10, but the control flow may be performed by receiving a captured image of an area in which the first light is output from the external device and the first light of the first wavelength range is output.
  • the control flow is not limited thereto because it is an embodiment.
  • control unit 100 may measure the gas level of the user's mouth to measure the temperature level when the predetermined level or more.
  • the controller 100 may measure the temperature level of the user's mouth and output the first light to capture an image when the temperature is lower than or equal to a predetermined level.
  • the first light may be output to display guide information for guiding the measured gas level, that is, the degree of bad breath, without capturing an image.
  • the first light may be output to display guide information for guiding the measured temperature level without capturing an image.
  • 17 is an exemplary diagram illustrating analysis information due to the control flow of FIG. 16.
  • FIG. 17 is a table displaying information including at least one of oral state information, oral care information, oral education, coaching information, goal setting challenge information, goal achievement guide information, and guide information for the control flow of FIG. 16.
  • the caries can be determined based on the area of the second light. If the area level of the second light ranges from 0 to 20%, display the message in the second area for continuous self-removal management. If the area level of the second light ranges from 21 to 70%, provide a message stating the initial caries. In the second area, if the area level of the second light is about 70 to 100%, a notice text indicating that caries is expected is displayed in the second area.
  • FIG. 18 is an exemplary view showing an example of displaying guide information in a second area in the user terminal 10 according to an embodiment of the present invention.
  • the area level of the second light corresponds to 21 to 70%, it may be displayed in the second area as "21 to 70% (area level of the second light) and initial caries".
  • phrases such as "caries risk”, “hospital visit”, “current dental office-OO hospital, ** hospital”, "garment information-attachment” and “enhancement of plaque measurement mode” may be displayed. When displaying such a phrase, it may be provided using an animation or a custom character.
  • 19 and 20 are exemplary views illustrating a first area and a second area on a screen of the display 110 of the user terminal 10 according to another exemplary embodiment of the present invention.
  • the first light is output from the first area of the screen of the display 110, and the image is captured and analyzed to display the analysis information in the second area of the screen of the display 110. .
  • the first light may be output from the entire area of the screen of the display 110.
  • the first area becomes the entire area of the screen of the display 110.
  • the output of the first light may be stopped in the first area and the analysis information may be displayed on the entire area of the screen of the display 110. Therefore, the first area and the second area are the same as the entire area of the screen of the display 110, but display the image or the first light outputted from the entire area of the screen of the display 110 with the parallax.
  • Each of the and second regions may overlap the regions.
  • the analysis information is displayed in the second area while the first light is output from the first area, and the first area is extended to the entire area of the screen of the display 110 to obtain more accurate analysis information.
  • the second region may be disappeared, and the second region may be extended to the entire region of the screen of the display 110 and the first region may disappear in order to display the analysis information largely.
  • each region may be gradually expanded or disappeared and may be expanded or disappeared at a time.
  • the first region and the second region may or may not overlap each other.
  • the user terminal 10 has an automatic rotation function.
  • the first area and the second area may also be changed to correspond to the rotation. have.
  • the first area before the rotation is 40% of the rectangular area from the lower right side of the entire left and right width of the screen
  • the first area may be changed to be 40% of the rectangular area from the lowest side of the entire left and right width of the screen even after the user terminal is rotated.
  • the screen of the display unit 110 of the user terminal 10 outputs the first light in each of the first region and the second region in an elongated shape perpendicular to the ground and displays analysis information.
  • the first region and the second region may also be changed in response to rotation, but the region is changed in response to rotation.
  • Each area is long left and right and long vertically. In this case, each area may be set not to change in response to the rotation of the user terminal 10.
  • the analysis information of the second area may be set to rotate in response to the rotation of the user terminal 10.
  • FIG. 21 is a block diagram showing the configuration of the oral care device 20 according to the present invention.
  • the oral care apparatus 20 according to the present invention may include a communication unit 210, an optical output unit 220, an imaging unit 230, and a control unit 200.
  • the communication unit 210 may receive a signal by an external input and transmit it to the control unit 200.
  • the communication unit 210 may receive a signal from a corresponding external input by wire by connecting various external input cables, or may receive a signal received wirelessly according to a predetermined wireless communication standard.
  • the communication unit 210 may include a plurality of connectors (not shown) to which each cable is individually connected.
  • the communication unit 210 may receive a signal from a connected external input, for example, a broadcast signal, an image signal, a data signal, etc. according to HDMI, USB, component standards, or receive communication data through a communication network. Can be.
  • the communication unit 210 not only receives a signal / data from an external input, but also a tuner for tuning a wireless communication module (not shown) or a broadcast signal for wireless communication according to a design method of the oral care device 20. Various additional configurations such as (not shown) may be further included.
  • the communication unit 210 may transmit information / data / signal of the oral care device 20 to the external device, in addition to receiving a signal from an external device including a user terminal. That is, the communication unit 210 may not be limited to the configuration of receiving a signal to an external device, but may be implemented as an interface capable of bidirectional communication.
  • the communication unit 210 may receive a control signal for selecting a UI from the plurality of control devices.
  • the communication unit 130 may be configured as a communication module for short-range wireless communication such as Bluetooth, IR (Infrared), UWB (Ultra Wideband), Zigbee, etc., and is a well-known communication port for wired communication. It may be configured.
  • the light output unit 220 may be provided such that an RGB filter is provided on the display screen to output the first light having the first wavelength range that is blue light.
  • the first light may have a wavelength of 400 to 450 nm.
  • the imaging unit 230 may be implemented as a camera to capture an external image.
  • the imaging unit 230 may capture an image including the second light, which is the first light, which is the blue light output from the light output unit 220, is reflected light reflected by a part of the user's body.
  • the imaging unit 230 may be controlled to capture the body, particularly the oral cavity, of the user on the front surface.
  • the control unit 200 controls the light output unit 220 to output the first light in the first wavelength range, controls the imaging unit 230 to capture an image, and transmits the captured image to the user terminal 10.
  • the communication unit 210 may be controlled to perform the control.
  • Oral care device 20 is a block diagram showing the configuration of the oral care device 20 according to an embodiment of the present invention.
  • Oral care device 20 according to an embodiment of the present invention may include all of the configuration of Figure 21, and may further include a detector 240 and the vibration unit 250.
  • the detector 240 includes a temperature detector 242 for optically measuring the body temperature of the user and includes a gas detector 244 for measuring and detecting a gas of bad breath that may be generated in the user's mouth. can do.
  • the temperature detecting unit 242 may be provided as an optical sensor for measuring the body temperature of the user's mouth as light received by outputting light reflected to the user's mouth, but is not limited thereto.
  • the temperature sensor 242 may measure the temperature (body temperature) of the user's mouth in the case of brushing or brushing the teeth. This is because the activity of volatile sulfur compounds of bacteria in the oral cavity is closely related to temperature, so when the user with good oral condition brush their teeth, the higher the temperature, the more effective the bad breath reduction.
  • the gas detector 244 may detect gas (bad breath) in the user's exhalation that may be caused by bacteria in the oral cavity. However, if it is determined that bad breath is occurring more than a predetermined level in the user's mouth, it is determined whether the bad breath is caused by the user's ingestion of food or is caused by caries and plaque of the user's teeth. It can also be determined by combining analysis information.
  • the vibrator 250 may cause the oral care device 20 to vibrate under the control of the controller 200. For example, when brushing teeth using the oral care device 20, if the user's body temperature does not rise above a predetermined value, the controller 200 drives the vibration unit 250 to raise the user's body temperature above a predetermined value. Can be.
  • the vibrator 250 may generate a vibration for notifying when a signal such as a control signal is received from an external device such as the user terminal 10.
  • the controller 200 may control the communicator 210 to transmit at least one level of gas and temperature detected from the detector 240 to the user terminal 10.
  • the control unit 200 may receive a control signal for measuring a bad breath of the user from an external device such as the user terminal 10, in this case, the control unit 200 drives the vibration unit 250 to inform the user, the user When exhaled by the detection unit 240 of the oral care device 20, the gas detection unit 244 may be detected by measuring the gas level.
  • the controller 200 may control the temperature detector 242 to measure the temperature level when the gas level detected by the gas detector 244 is greater than or equal to a preset level. By determining that the detected gas level may be transmitted to an external device such as the user terminal 10 to notify the user.
  • the controller 200 may control the light output unit 220 to output the first light to the oral cavity of the user when the temperature level detected by the temperature detector 242 is less than or equal to a preset temperature level.
  • the controller 200 may notify the user by transmitting the sensed temperature level to an external device such as the user terminal 10 when the preset temperature level is exceeded.
  • the controller 200 may capture an image of an area where the first light is output and transmit the captured image to an external device such as the user terminal 10.
  • the controller 200 may control to perform at least one of sensing at least one of gas and temperature of the user's oral cavity and outputting the first light based on the control signal received from the user terminal 10.
  • FIG. 23 is a control flow diagram showing the operation of the oral care device 20 according to the present invention.
  • the first light of the first wavelength range is output (S101).
  • An image is picked up (S102).
  • the captured image is transmitted to an external device such as the user terminal 10 (S103).
  • 24 is a control flow diagram showing the operation of the oral care device 20 according to an embodiment of the present invention.
  • the temperature level of the user's mouth is sensed (S114).
  • the first light of the first wavelength range is output (S115).
  • the detected bad gas level is less than the preset bad gas level (3) or the detected temperature level is above the preset level (2), the detected bad gas level and the detected temperature level are transmitted to the user terminal 10 and the captured image is detected. The image is also transmitted to the user terminal 10 (S117).
  • the control unit 200 detects the bad gas level and temperature level and compares the preset level with the preset level, but transmits the detected bad gas level and temperature level to the user terminal 10 and receives a control signal to perform the operation. It can also be done.
  • 25 is a control flow diagram illustrating a control flow for providing analysis information using measurements on a user's bad breath, mouth temperature and light in the oral care device 20 and the user terminal 10 according to an embodiment of the present invention.
  • the user spits toward the gas detection unit 244 of the oral care device 20 to breathe and measures the bad breath gas to detect the bad breath gas of the user (S121).
  • the gas detector 244 transmits the detected bad gas level to the controller 200 (S122).
  • the controller 200 determines whether the detected bad gas level is greater than or equal to the preset bad gas level 3 (S123).
  • the temperature level of the user's mouth is sensed (S124).
  • the first light of the first wavelength range is output toward the user's mouth. Image the image of the user's mouth. The amount of fluorescence loss of the picked-up image is determined (S125).
  • the measured value is stored (S126).
  • the amount of fluorescence loss is within 5% and information is displayed to guide healthy teeth (S127). Stored records can be used to continuously manage the user's teeth.
  • the fluorescence loss amount of the captured image may be notified by 5-20%, and a notice may be displayed for re-measurement after brushing (S129).
  • the above range is only one example, and it is also possible to display the guidance text by setting the amount of fluorescence dissipation in another range according to another embodiment or various intentions.
  • the dental plaque may indicate a current excessive condition while informing that the amount of fluorescence loss of the captured image is greater than 20% (S130).
  • caries may be dangerous and may indicate instructions to visit the hospital for treatment.
  • based on the location of the current location, home, office, etc. can also guide information about the surrounding dental hospital. In addition, it may further guide information on brushing the teeth to remove the measured excess plaque.
  • the detected gas level and the detected temperature level can be provided.
  • when providing guide information of the bad breath level may provide the temperature information and guide level for the temperature level.
  • the information indicating guide to healthy teeth is displayed while providing guide information of the bad breath level due to bacteria with the food and plant (S131).
  • FIG. 26 is an exemplary table illustrating guide information provided to the user in the user terminal 10 by measuring the oral temperature level of the user in the oral care apparatus 20 according to an embodiment of the present invention.
  • Body temperature level 1 is information deemed to have a bad breath effect if the temperature is lower than body temperature.
  • Body temperature level 2 is a level of information that recommends brushing because it is considered a good environment for bacteria to grow at temperatures above or above body temperature 1. While providing the above example table, a part corresponding to the currently measured level may be highlighted. This allows the user to know his temperature level and to be good at oral care according to the guide information.
  • FIG. 27 is an exemplary table illustrating guide information provided to the user in the user terminal 10 by measuring a bad breath level of the user in the oral care device 20 according to an embodiment of the present disclosure.
  • An exemplary table showing criteria of guide information on a user's gas level is information which judges that there is little smell.
  • Bad breath level 2 is information of the level which judges that there is a little smell of a user.
  • Guidance information recommending brushing can be displayed.
  • Bad breath level 3 is a bad breath and may display the guide information to measure the amount of fluorescence lost by the first light. While providing the above example table, a part corresponding to the currently measured level may be highlighted. This allows the user to know his temperature level and to be good at oral care according to the guide information.
  • FIG. 28 is an exemplary view illustrating measurement of bad breath, oral temperature and light of a user using the user terminal 10 and the oral care device 20 according to an embodiment of the present invention, and providing analysis information.
  • the user terminal 10 of FIG. 28 may allow the first light to be output from the first area of the display 110, and to output the first light from the light output unit 220 of the oral care device 20. It may be. 28 is an embodiment in which the first light is output from the light output unit 220 of the oral care device 20. The first light may be output from the light output unit 220 of the oral care device 20 to every corner of the user's mouth, and the analyzed image is displayed on the display unit 110 of the user terminal 10 by analyzing the captured image. The user may be more convenient than viewing the analysis information by analyzing the oral cavity using only the user terminal 10.
  • the user terminal 10 and the oral care device 20 may transmit and receive various information using respective communication modules (Bluetooth, wi-fi).
  • the oral care device 20 may be provided in the shape of a toothbrush, and a light output unit 220, an imaging unit 230, and a sensing unit 240 may be provided at a handle portion to output a first light, and to capture an image. It can detect the user's bad breath, can detect the body temperature of the user's mouth.
  • the information detected by the oral care device 20 may be transmitted to the user terminal 10.
  • the user terminal 10 may transmit a control signal to output the first light to capture an image, detect bad breath, or detect body temperature.
  • the oral care device 20 outputs the first light to the oral cavity of the user and transmits the captured image to the user terminal 10 so that the user terminal 10 analyzes the image to display the analysis information. What is shown in the figure is shown.
  • 29 to 31 is an exemplary view showing the mounting position and shape of the light output unit 220, the imaging unit 230 and the detection unit 240 of the oral care device 20 according to an embodiment of the present invention.
  • the oral care device 20 of FIG. 29 shows that the light output unit 220, the imaging unit 230, and the sensing unit 240 may be provided at the front and the rear of the toothbrush in a toothbrush shape.
  • the oral care device 20 of FIG. 30 shows that the light output unit 220, the imaging unit 230, and the sensing unit 240 may be provided to be detachable. Since it is provided so as to be detachable, it can be utilized to determine the condition of the oral cavity to be attached and attached as a toothbrush that can be detached and gargled at ordinary times.
  • the oral care device 20 of FIG. 31 may be provided as a pen having a shape that can be attached and detached to the user terminal 10.
  • FIG 32 is a view illustrating a signal flow for measuring user's bad breath, mouth temperature and light and providing analysis information using the user terminal 10 and the oral care apparatus 20 according to an exemplary embodiment of the present invention. It is an illustration.
  • the user terminal 10 may perform the operation of FIG. 25 by itself.
  • FIG. 32 may indicate that the operation of FIG. 25 may be performed using both the user terminal 10 and the oral care device 20.
  • the user selects and executes an application for determining the oral cavity state of the user on the screen of the display 110 of the user terminal 10.
  • the user terminal 10 transmits a control signal to detect the bad breath of the user to the oral care device 20 as the application is executed (4).
  • the user spits out toward the detection unit 240 of the oral care device 20 (1).
  • the gas detection unit 244 of the oral care device 20 detects the gas for bad breath (2).
  • the control unit 200 of the oral care device 20 may determine whether the detected gas level is higher than or equal to a predetermined level, and transmit the detected gas level to the user terminal 10 (3).
  • the user terminal 10 determines whether the received gas level is greater than or equal to a predetermined level, and if the level is greater than or equal to the predetermined level, the oral care device 20 detects the temperature of the oral cavity.
  • the control signal is transmitted so as to (4).
  • the user puts the sensing unit 240 of the oral care device 20 in the oral cavity and detects the body temperature of the oral cavity.
  • the control unit 200 of the oral care device 20 may determine whether the sensed temperature level is greater than or equal to a preset level, and transmit the sensed temperature level to the user terminal 10 (3).
  • the user terminal 10 determines whether the received temperature level is greater than or equal to a predetermined level, and if the level is greater than or equal to the predetermined level, the first light is transmitted to the oral cavity by the oral care device 20. Outputs a control signal to transmit an image (4). Accordingly, the user places the imaging unit 220 of the oral care device 20 toward the oral cavity and outputs the first light to capture an image. The captured image may be transmitted to the user terminal 10 (3). The user terminal 10 may analyze the received image and display the analysis information on the screen of the display 110.
  • Oral education and coaching can also be provided by providing a challenge and achievement guide to users after setting goals.
  • FIG. 35 illustrates an extension example in which the measurement result is transmitted to the server 30 capable of analyzing the oral cavity measurement result and the service 30 as shown in FIGS. 33 and 34 can be received through the server 30.
  • the photographed data is transmitted to the server 30 for analysis by the server 30, and the analysis information is transmitted to the user terminal 10. It may be implemented to display the analysis information received on the display 110 of 10).
  • the user terminal 10 also measures the bad breath and oral temperature, and transmits the measurement data to the server 30, and the user terminal 10 receives the analysis information analyzed by the server 30 to the display unit 110. Can also be displayed.
  • 36 and 37 are control flowcharts illustrating a control method of the user terminal 10 according to an exemplary embodiment of the present invention with reference to FIGS. 33 and 34.
  • the user selects and executes an application for determining the oral cavity state of the user on the screen of the display 110 (S141).
  • the controller 100 controls the UI generator 160 to generate a selectable UI for measuring at least one of dental plaque, dental caries, bad breath, and oral temperature of the user (S142).
  • the user selects one of the generated plaque measurement mode UI and the caries measurement mode UI (S143).
  • the controller 100 controls the display 110 to output the first light having the first wavelength range to the user's body in the first area of the screen of the display 110 according to the selected mode (S144).
  • the imaging unit 120 captures an image of a user's body (S145).
  • the power supply unit 170 supplies power to the optical filter 180 to pass the second light out of the reflected light and block other than the second light (S146).
  • Data measured using the light filter 180 is transmitted to the analysis server (S147) and the analysis is performed.
  • a range of at least one analyzed value for providing analysis information about the user's body is set (S148).
  • the setting of the range of analyzed values may be preset by the user or by referring to the opinion of a doctor.
  • the image by the second light of the second wavelength range of the captured image is analyzed (S149).
  • the controller 100 determines at least one of the size, position, and luminance of the first light in response to at least one of the size of the captured image, the illuminance, and the luminance of the image by the captured second light (S150). .
  • the controller 100 controls the display 110 to be the determined size, position, and luminance of the first light.
  • the control unit 100 analyzes at least one of color, distribution, illuminance, fluorescence loss and area of the image by the second light in response to the captured image, and displays oral condition information, oral care information, and the like of the user in the second area of the screen.
  • At least one of guide information, oral education and coaching information, goal setting challenge, and achievement guide information is displayed (S151).
  • the user's oral image may be provided with a color to indicate the degree of dental caries, dental plaque, and bad breath.
  • the analyzed information may be displayed numerically to inform the user of caries, plaque, bad breath.
  • a vibration or alarm can be provided with a table that displays the analyzed information numerically while displaying the color on the image.
  • the first light is not outputted from the user terminal 10 but the first device is output from the external device and the control flow may be performed by receiving a captured image of the area where the first light is output in the first wavelength range.
  • the control flow is not limited thereto because it is an embodiment.
  • control unit 100 may measure the gas level of the user's mouth to measure the temperature level when the predetermined level or more.
  • the controller 100 may measure the temperature level of the user's mouth and output the first light to capture an image when the temperature is lower than or equal to a predetermined level.
  • the first light may be output to display guide information for guiding the measured gas level, that is, the degree of bad breath, without capturing an image.
  • the first light may be output to display guide information for guiding the measured temperature level without capturing an image.
  • 38 is an exemplary view illustrating an operation of providing analysis information of a tooth using the user terminal 10 and the server 30 according to another embodiment of the present invention.
  • the user terminal 10 or the oral care device 20 outputs the first light to the user's teeth.
  • the reflected light (second light) for the first light is measured at the terminal.
  • the user terminal 10 collects images, measurement data, and the like.
  • the oral care device 20 may transmit the image, the measurement data, and the like to the user terminal 10 or the server 30.
  • the user terminal 10 transmits the collected image, measurement data, etc. to the server 30.
  • the server 30 receives an image, measurement data and the like from the oral care device 20 or the user terminal 10.
  • the server 30 analyzes the color, distribution, illuminance, amount of fluorescence loss, area, gas, temperature, and the like with respect to the image and the measurement data like the user terminal 10.
  • the server 30 derives measurement results such as oral condition information, management information, oral education, coaching information, goal setting challenge information, goal achievement guide information and guide information.
  • the server 30 transmits the derived measurement result to the user terminal 10.
  • the user terminal 10 displays the received measurement results on the display 110.
  • the user terminal 10 outputs a specific range of light to the user's body on the screen of the user terminal 10, captures an image by the reflected light, and provides analysis information about the user's body on the user terminal screen. And the user can easily obtain the state and diagnostic information of the teeth by using his user terminal (10).

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Biophysics (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Medical Informatics (AREA)
  • Physics & Mathematics (AREA)
  • Pathology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Optics & Photonics (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Signal Processing (AREA)
  • Physiology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Epidemiology (AREA)
  • Business, Economics & Management (AREA)
  • Rheumatology (AREA)
  • Orthopedic Medicine & Surgery (AREA)
  • Physical Education & Sports Medicine (AREA)
  • General Business, Economics & Management (AREA)
  • Primary Health Care (AREA)
  • Endoscopes (AREA)
  • Dental Tools And Instruments Or Auxiliary Dental Instruments (AREA)
  • Pulmonology (AREA)
  • Human Computer Interaction (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Multimedia (AREA)
  • Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)

Abstract

본 발명의 사용자단말기는, 영상을 표시할 수 있는 화면을 가지며, 화면의 적어도 일부 영역에서 특정 파장의 광을 출력할 수 있는 디스플레이부; 사용자의 신체에 대한 이미지를 촬상할 수 있는 촬상부; 화면의 제1영역에서 제1파장범위의 제1광이 출력되도록 디스플레이부를 제어하고, 이미지를 촬상하도록 촬상부를 제어하며, 촬상된 이미지를 분석하고, 화면의 제2영역에 분석정보를 표시하도록 디스플레이부를 제어하는 제어부를 포함한다.

Description

사용자단말기 및 그 제어방법
본 발명은 특정범위의 광을 사용자의 신체에 출력하고 반사되는 광에 의한 이미지를 촬상하여 사용자신체에 대한 분석정보를 제공하는 사용자단말기 및 그 제어방법이다.
본 발명과 관련된 시스템으로 개인용단말기를 이용하여 사용자의 신체 일부를 촬상하고 촬상된 이미지를 원격 치아 진단 서버를 이용하여 전문가에게 전송한다. 그러면 전문가는 수신된 촬상된 이미지를 보고 치아에 대하여 상태를 판단하고 의료정보를 개인용단말기로 전송하게 된다.
도 1은 본 발명과 관련된 원격 치아 진단 시스템을 나타내는 도면이다. 원격 치아 진단 서버(1)는, 촬영된 치아의 영상(영상 A)을 개인용 단말기(2)로부터 수신하여 치아 전문가용 단말기(3)에 전송하고, 치아 전문가용 단말기(3)로부터 진단 데이터를 수신하여 개인용 단말기(2)에 전송할 수 있다. 도 1의 개인용 단말기(2)의 사용자는 치아의 이미지를 촬상 후, 촬상된 이미지를 치아 전문가용 단말기(3)로 전달되도록 원격 치아 진단 서버(1)로 전송하고 원격 치아 진단 서버(1)는 전문가용 단말기(3)로 촬상된 이미지를 전송한다. 전문가용 단말기(3)의 사용자이며 치아 전문가인 치과의사는 촬상된 이미지를 육안 판독하여 개인용 단말기(2)의 사용자 치아의 상태 및 진단정보를 작성하여 개인용 단말기(2)로 전달되도록 원격 치아 진단 서버(1)로 전송한다. 이에 의해 개인용 단말기(2)의 사용자는 자신의 치아에 대한 상태 및 진단정보를 제공받을 수 있다.
상기 도 1과 같은 치아 진단 서비스를 제공받기 위해서는 치아 전문가인 치과의사의 판독을 받기 위해 자신의 치아 이미지를 촬상하여 전송하고 소정 시간이 지나야 자신의 치아에 대한 정보를 얻을 수 있고 수신한 정보에 대하여 다음 조치에 대한 결정을 하기에 부족함을 느낄 수 있으므로 사용자 입장에서는 불편할 수 있다.
본 발명의 목적은 사용자단말기 화면에서 특정범위의 광을 사용자의 신체에 출력하고 반사되는 광에 의한 이미지를 촬상하며 촬상된 이미지를 분석하여 사용자 신체에 대한 분석정보를 사용자단말기 화면에 제공할 수 있는 사용자단말기 및 그 제어방법을 제공함에 있다.
상기 본 발명의 해결과제를 달성하기 위한 사용자단말기는, 영상을 표시할 수 있는 화면을 가지며, 상기 화면의 적어도 일부 영역에서 특정 파장의 광을 출력할 수 있는 디스플레이부와; 사용자의 신체에 대한 이미지를 촬상할 수 있는 촬상부와; 상기 화면의 제1영역에서 제1파장범위의 제1광이 출력되도록 상기 디스플레이부를 제어하고, 이미지를 촬상하도록 상기 촬상부를 제어하며, 상기 촬상된 이미지를 분석하고, 상기 화면의 제2영역에 분석정보를 표시하도록 상기 디스플레이부를 제어하는 제어부를 포함하는 사용자단말기에 의해 달성된다.
여기서, 상기 사용자의 구강에 대한 가스 및 온도를 감지 할 수 있는 감지부를 더 포함하고, 상기 제어부는 상기 감지부로부터 감지된 상기 가스 및 온도 중 적어도 하나의 레벨에 기초하여 상기 제1광이 출력되도록 상기 디스플레이부를 제어할 수 있다.
그리고, 상기 제어부는 상기 촬상된 이미지 중 제2파장범위의 제2광에 의한 이미지를 분석할 수 있다.
여기서, 상기 제어부는 상기 촬상된 이미지에 대응하여 상기 제2 광에 의한 이미지의 색상, 분포, 조도, 형광소실량 및 면적 중 적어도 하나를 분석할 수 있다.
그리고, 상기 제어부는 상기 분석정보를 제공하기 위한 상기 적어도 하나의 분석된 값의 범위를 설정할 수 있다.
여기서, 제어부는 상기 촬상된 이미지 중 상기 제2광에 의한 이미지를 추출할 수 있다.
그리고, 전원을 공급할 수 있는 전원공급부와; 상기 전원공급부로부터 전원을 공급받아 상기 제1광에 의한 반사광 중 상기 제2광은 통과시키고 상기 제2 광 이외의 광은 차단하도록 동작하는 광필터를 더 포함할 수 있다.
여기서, 제어부는 상기 제1광이 출력되면 상기 광필터의 상기 동작이 개시되도록 상기 전원공급부를 제어할 수 있다.
그리고, 상기 제어부는 상기 촬상된 이미지의 크기, 상기 촬상된 제2광에 의한 이미지의 조도 및 휘도 중 적어도 하나에 대응하여 상기 제1영역의 크기, 위치 및 상기 제1광의 휘도 중 적어도 하나가 변경되도록 제어할 수 있다.
여기서, 사용자의 구강상태를 판단하기 위한 애플리케이션을 저장하는 저장부와; 상기 애플리케이션을 위한 UI를 생성하는 UI생성부를 더 포함하고, 상기 제어부는 상기 애플리케이션을 실행하며, 상기 사용자의 치태, 우식, 구취 및 구강 온도 중 적어도 하나를 측정하기 위하여 선택 가능한 UI가 생성되도록 상기 UI생성부를 제어할 수 있다.
그리고, 상기 분석정보는 상기 사용자의 구강상태정보, 구강관리정보, 구강 교육, 코칭 정보, 목표 설정 도전정보, 목표 달성 가이드 정보 및 안내정보 중 적어도 하나를 포함할 수 있다.
여기서, 상기 디스플레이부는 상기 제1광을 출력하기 위한 RGB 필터를 가질 수 있다.
그리고, 상기 제2광에 의한 이미지는 청색 계열의 상기 제1광이 사용자의 구강 미생물 분비물에 출력된 후 반사되어 수신되는 녹색 및 적색계열의 형광색일 수 있다.
한편, 상기 본 발명의 해결과제를 달성하기 위한 사용자단말기의 제어방법은, 디스플레이부의 화면의 제1영역에서 제1파장범위의 제1광이 출력되도록 제어하는 단계와; 이미지를 촬상하는 단계와; 상기 촬상된 이미지를 분석하는 단계와; 상기 화면의 제2영역에 분석정보를 표시하는 단계를 포함하는 사용자단말기의 제어방법 에 의해 달성된다. 여기서, 상기 제1광이 출력되도록 제어하는 단계는, 감지된 사용자의 구강에 대한 가스 및 온도 중 적어도 하나의 레벨에 기초하여 상기 제1광이 출력되도록 제어하는 단계를 포함할 수 있다.
여기서, 상기 제1광이 출력되도록 제어하는 단계는, 감지된 사용자의 구강에 대한 가스 및 온도 중 적어도 하나의 레벨에 기초하여 상기 제1광이 출력되도록 제어하는 단계를 포함할 수 있다.
그리고, 상기 촬상된 이미지를 분석하는 단계는, 상기 촬상된 이미지 중 제2파장범위의 제2광에 의한 이미지를 분석하는 단계를 포함할 수 있다.
여기서, 상기 분석정보를 표시하는 단계는, 상기 촬상된 이미지에 대응하여 상기 제2 광에 의한 이미지의 색상, 분포, 조도, 형광소실량 및 면적 중 적어도 하나를 분석하는 단계를 포함할 수 있다.
여기서, 상기 적어도 하나를 분석하는 단계는, 상기 분석정보를 제공하기 위한 상기 적어도 하나의 분석된 값의 범위를 설정하는 단계를 포함할 수 있다.
그리고, 상기 촬상된 이미지를 분석하는 단계는, 상기 촬상된 이미지 중 상기 제2광에 의한 이미지를 추출하는 단계를 포함할 수 있다.
여기서, 상기 반사광 중 상기 제2 광은 통과시키고 상기 제2 광 이외의 광은 차단하도록 광필터로 전원을 공급하는 단계를 더 포함할 수 있다.
그리고, 상기 전원을 공급하는 단계는, 상기 제1광이 출력되면 상기 광필터의 상기 동작이 개시되도록 제어하는 단계를 포함할 수 있다.
여기서, 상기 분석정보를 표시하는 단계는, 상기 촬상된 이미지의 크기, 상기 촬상된 제2광에 의한 이미지의 조도 및 휘도 중 적어도 하나에 대응하여 상기 제1영역의 크기, 위치 및 상기 제1광의 휘도 중 적어도 하나를 변경하는 단계를 포함할 수 있다.
그리고, 상기 사용자의 구강상태를 판단하기 위한 애플리케이션을 실행하는 단계와; 상기 사용자의 치태, 우식, 구취 및 구강 온도 중 적어도 하나를 측정하기 위하여 선택 가능한 UI를 생성하는 단계를 더 포함할 수 있다.
여기서, 상기 분석정보는 상기 사용자의 구강상태정보, 구강관리정보, 구강 교육, 코칭 정보, 목표 설정 도전정보, 목표 달성 가이드 정보 및 안내정보 중 적어도 하나를 포함할 수 있다.
그리고, 상기 제2광에 의한 이미지는 청색 계열의 상기 제1광이 사용자의 구강 미생물 분비물에 출력된 후 반사되어 수신되는 녹색 및 적색계열의 형광색일 수 있다.
한편, 상기 본 발명의 해결과제를 달성하기 위한 구강관리장치는, 사용자단말기와 통신할 수 있는 통신부와; 사용자의 구강에 대하여 특정 파장의 광을 출력할 수 있는 광출력부와; 상기 사용자의 구강에 대한 이미지를 촬상할 수 있는 촬상부와; 제1파장범위의 제1광이 출력되도록 상기 광출력부를 제어하고, 이미지를 촬상하도록 상기 촬상부를 제어하며, 상기 촬상된 이미지를 상기 사용자단말기로 전송하도록 상기 통신부를 제어하는 제어부를 포함하는 구강관리장치에 의해 달성될 수 있다.
여기서, 상기 사용자의 구강에 대한 가스 및 온도를 감지할 수 있는 감지부를 더 포함하고, 상기 제어부는 상기 감지부로부터 감지된 상기 가스 및 온도 중 적어도 하나의 레벨을 상기 사용자단말기로 전송하도록 상기 통신부를 제어할 수 있다.
그리고, 상기 제어부는 상기 사용자단말기로부터 수신되는 제어신호에 기초하여, 상기 사용자의 구강에 대한 가스 및 온도 중 적어도 하나의 감지와 상기 제1광의 출력 중 적어도 하나를 수행하도록 제어할 수 있다.
한편, 상기 본 발명의 해결과제를 달성하기 위한 구강관리장치의 제어방법은, 제1파장범위의 제1광을 출력하는 단계와; 이미지를 촬상하는 단계와; 상기 촬상된 이미지를 사용자단말기로 전송하는 단계를 포함하는 구강관리장치의 제어방법에 의해 달성될 수 있다.
여기서, 감지된 사용자의 구강에 대한 가스 및 온도 중 적어도 하나의 레벨을 상기 사용자단말기로 전송하는 단계를 더 포함할 수 있다.
그리고, 상기 제1광을 출력하는 단계는, 상기 사용자단말기로부터 수신되는 제어신호에 기초하여, 상기 사용자의 구강에 대한 가스 및 온도 중 적어도 하나의 감지와 상기 제1광의 출력 중 적어도 하나를 수행하는 단계를 포함할 수 있다.
본 발명에 의하면, 사용자가 자신의 사용자단말기를 이용하여 치아의 상태, 진단정보, 교육정보, 코칭정보, 목표가이드정보를 손쉽게 얻을 수 있는 효과가 있다.
도 1은 본 발명과 관련된 원격 치아 진단 시스템을 나타내는 간략도이며,
도 2는 본 발명의 일 실시 예에 따른 사용자단말기를 이용하여 치아를 촬상하고 치아에 관한 분석정보가 화면에 표시되는 것을 나타내는 예시도이고,
도3 은 본 발명에 따른 사용자단말기의 구성을 나타내는 블록도이며,
도 4 는 본 발명의 다른 실시 예에 따른 사용자단말기의 구성을 나타내는 블록도이고,
도 5는 본 발명에 따른 사용자단말기의 제어방법을 나타내는 제어흐름도이며,
도 6은 본 발명의 일 실시 예에 따른 사용자단말기의 제어방법을 나타내는 제어흐름도이고,
도 7은 본 발명의 다른 실시 예에 따른 사용자단말기의 제어방법을 나타내는 제어흐름도이며,
도 8은 본 발명의 다른 실시 예에 따른 사용자단말기에서 사용자의 치태와 우식을 측정하기 위하여 선택 가능한 UI를 나타내는 예시도이고,
도 9는 본 발명의 일 실시 예에 따른 사용자단말기에서 청색광을 출력할 수 있는 화면 스펙트럼을 나타내는 그래프이며,
도 10은 본 발명의 일 실시 예에 따른 사용자단말기에서 촬상된 이미지에 사용자 신체에 관한 분석정보를 나타내는 예시도이고,
도 11및 도 12는 본 발명의 일 실시 예에 따른 사용자단말기에서 촬상된 이미지에서 그리드 영역설정을 통해 색상 및 면적 분석하는 것을 나타내는 예시도이고,
도 13은 본 발명의 일 실시 예에 따른 사용자단말기에서 촬상된 이미지에서 상태정보 및 진단가이드 정보를 제공하는 예시를 나타내는 예시도이며,
도 14는 본 발명의 일 실시 예에 따른 사용자단말기에서 형광 소실량을 측정하여 치태에 대한 분석정보를 제공하는 제어흐름을 나타내는 제어흐름도이고,
도 15는 도 14의 제어흐름으로 인한 분석정보를 나타내는 예시도이며,
도 16은 본 발명의 다른 실시 예에 따른 사용자단말기에서 제2광의 면적을 측정하여 우식에 대한 분석정보를 제공하는 제어흐름을 나타내는 제어흐름도이고,
도 17은 도 16의 제어흐름으로 인한 분석정보를 나타내는 예시도 이며,
도 18은 본 발명의 일 실시 예에 따른 사용자단말기에서 제2영역에 안내정보를 표시하는 예시를 나타내는 예시도이고,
도 19 및 도 20은 본 발명의 또 다른 실시 예에 따른 사용자단말기(10)의 디스플레이부(110) 화면에서 제1영역과 제2영역을 나타내는 예시도이며,
도 21은 본 발명에 따른 구강관리장치의 구성을 나타내는 블록도이고,
도 22는 본 발명의 일 실시 예에 따른 구강관리장치의 구성을 나타내는 블록도이며,
도 23은 본 발명에 따른 구강관리장치의 동작을 나타내는 제어흐름도이고,
도 24는 본 발명의 일 실시 예에 따른 구강관리장치의 동작을 나타내는 제어흐름도이며,
도 25는 본 발명의 일 실시 예에 따른 구강관리장치와 사용자단말기 에서 사용자의 구취, 구강온도 및 광에 대한 측정을 이용한 분석정보를 제공하는 제어흐름을 나타내는 제어흐름도이고,
도 26은 본 발명의 일 실시 예에 다른 구강관리장치에서 사용자의 구강 체온 레벨을 측정하여 사용자단말기에서 사용자에게 제공되는 안내정보를 나타내는 예시표이며,
도 27은 본 발명의 일 실시 예에 다른 구강관리장치에서 사용자의 구취 레벨을 측정하여 사용자단말기에서 사용자에게 제공되는 안내정보를 나타내는 예시표이고,
도 28은 본 발명의 일 실시 예에 다른 사용자단말기와 구강관리장치를 이용하여 사용자의 구취, 구강온도 및 광에 대한 측정하고 분석정보를 제공하는 것을 나타내는 예시도이며,
도 29내지 도 31은 본 발명의 일 실시 예에 다른 구강관리장치의 광출력부, 촬상부 및 감지부가 장착위치 및 형태를 나타내는 예시도이고,
도 32는 본 발명의 일 실시 예에 따른 사용자단말기와 구강관리장치를 이용하여 사용자의 구취, 구강온도 및 광에 대한 측정하고 분석정보를 제공하는 것에 대한 신호의 흐름을 나타내는 예시도이며,
도 33및 도 34는 측정결과에 대해 양치 전후를 비교하는 애니메이션 또는 사용자 설정 캐릭터를 이용하여 구강 교육 및 코칭을 해주는 예시도이고,
도 35는 구강 측정 결과를 분석할 수 있는 서버에 측정 결과를 전송하고 도 33및 도 34와 같은 서비스를 서버를 통해 받을 수 있는 확장 예시도이며,
도 36 및 도 37는 도 33및 도 34에 대해 본 발명의 일 실시 예에 따른 사용자단말기의 제어방법을 나타내는 제어흐름도이고,
도 38은 본 발명의 도 다른 실시 예에 따른 사용자단말기와 서버를 이용하여 치아의 분석정보를 제공하는 동작을 나타내는 예시도이다.
이하에서는 첨부한 도면을 참조하여 본 발명에 대해 상세히 설명한다.
도 2는 본 발명의 일 실시 예에 따른 사용자단말기(10)를 이용하여 치아를 촬상하고 치아에 관한 분석정보가 화면에 표시되는 것을 나타내는 예시도이다.
도 2에 도시된 사용자단말기(10)는 디스플레이부(110)의 화면을 제1영역과 제2영역을 분할하여 도시할 수 있다. 제1영역의 화면은 사용자의 구강으로 400~450nm 정도의 청색광인 제1광이 출력되도록 디스플레이부(110)의 제1영역이 설정되어 있을 수 있다. 그리고, 제2영역의 화면은 제1영역에서 출력된 제1광이 사용자의 구강부분에 반사된 제2광에 의한 이미지를 촬상부(120)에 의해 촬상하고 촬상된 이미지를 분석하여 사용자의 구강에 대한 분석정보를 표시할 수 있다. 제2영역에는 구강의 이미지 즉, 사용자의 구강에 프라그가 형성되어 있는 것을 표시할 수 있다. 이렇게 사용자의 구강으로 청색광을 비출 수 있도록 제1영역에서 청색화면이 형성되도록 하고 사용자의 구강을 촬상하면 촬상된 이미지에는 청색광이 사용자의 구강에 반사된 제2광에 의한 이미지가 포함되게 되므로 촬상된 이미지에서 제2광에 의한 이미지를 분석하여 구강의 상태가 어떤지를 판단할 수 있게 해준다. 촬상된 이미지에서의 제2광에 의한 이미지는 사용자의 구강에 치아세균이 많은 경우 치아세균의 분비물이 많게 되어 제1광인 청색광이 비춰지면 치아세균의 분비물은 반사될 때 적색의 형광색을 띠므로 이의 정도를 분석하여 치아세균이 얼마나 많은 지를 파악할 수 있다. 상기의 예시는 사용자단말기(10)에서 사용자의 치아를 촬상하고 치아에 관한 분석을 하여 제2영역을 통하여 분석정보를 제공하고 있지만 이에 한정되지는 않는다. 사용자단말기(10)의 제1영역에서 제1광을 촬상하고, 촬상된 데이터를 외부장치로 전송하여 외부장치에서 분석을 하여 분석정보를 사용자단말기(10)로 전송하면 사용자단말기(10)의 제2영역에서 수신된 분석정보를 표시할 수 있도록 구현할 수도 있다.
도 3은 본 발명에 따른 사용자단말기(10)의 구성을 나타내는 블록도이다. 본 발명에 따른 사용자단말기는 디스플레이부(110), 촬상부(120) 및 제어부(100)를 포함한다.
디스플레이부(110)는 영상처리부(도4 참조, 140)로부터 출력되는 영상신호에 기초하여 영상을 표시할 수 있다. 디스플레이부(110)의 구현 방식은 한정되지 않는 바, 액정(liquid crystal), 플라즈마(plasma), 발광 다이오드(light-emitting diode), 유기발광 다이오드(organic light-emitting diode), 면전도 전자총(surface-conduction electron-emitter), 탄소 나노 튜브(carbon nano-tube), 나노 크리스탈(nano-crystal) 등의 다양한 디스플레이 방식으로 구현될 수 있다.
디스플레이부(110)는 그 구현 방식에 따라서 부가적인 구성을 추가적으로 포함할 수 있다. 예를 들면, 디스플레이부(110)가 액정 방식인 경우, 디스플레이부 액정 디스플레이 패널(미도시)과, 이에 광을 공급하는 백라이트유닛(미도시)과, 패널(미도시)을 구동시키는 패널구동기판(미도시)을 포함할 수 있다.
디스플레이부(110)는 영상처리부(140)에 의해 처리된 영상신호에 기초하여 영상을 표시한다. 디스플레이부(110)가 영상을 표시하는 방식에는 제한이 없으나, LCD, PDP, OLED 등의 방식을 포함한다. 이 경우, 디스플레이부는 LCD패널, PDP패널, OLED패널 등을 포함할 수 있다.
디스플레이부(110)는 영상 및 색보정 과정을 표시할 수 있다. 디스플레이부(110)는 영상이 표시되는 디스플레이패널과 입력되는 영상신호를 처리하여 디스플레이패널에 영상이 표시되게 하는 패널구동부를 포함할 수 있으며, 자세한 구현 방식에 있어 한정되지 않는다. 인터페이스를 통해 외부의 입력소스로부터 수신된 영상신호는 디코딩(decoding), 디인터레이싱(deinterlacing), 스케일링(scaling) 등의 영상 처리 과정을 거쳐 디스플레이부(110)에 표시될 수 있다. 디스플레이부(110)는 영상을 표시할 수 있는 화면을 가지며, 화면의 적어도 일부 영역에서 특정 파장의 광을 출력할 수 있다.
촬상부(120)는 카메라로 구현되어 외부의 이미지를 촬상할 수 있다. 촬상부(120)는 디스플레이부(110)의 일부 영역에서 출력된 청색광인 제1광이 사용자의 신체 일부에 의해 반사된 반사광인 제2광을 포함하는 이미지를 촬상할 수 있다. 제어부(100)의 제어에 의해 제1광이 출력되면 촬상부(120)는 전면의 사용자의 신체를 촬상하도록 제어될 수 있다.
제어부(100)는 CPU(central processing unit) 또는 프로세서(processor)로 구현될 수 있는 것으로서, 디스플레이부(110) 화면의 제1영역에서 제1파장범위의 제1광이 사용자의 신체에 대하여 출력되도록 디스플레이부(110)를 제어하고, 사용자의 신체에 대한 이미지를 촬상하도록 촬상부(120)를 제어하며, 촬상된 이미지에 기초하여 화면의 제2영역에 사용자의 신체에 관한 분석정보를 표시하도록 디스플레이부(110)를 제어한다.
도 4 는 본 발명의 다른 실시 예에 따른 사용자단말기(10)의 구성을 나타내는 블록도이다. 도 4의 본 발명의 다른 실시 예에 따른 사용자단말기(10)는 도 3의 디스플레이부(110)와 촬상부(120)를 포함할 수 있으며 추가의 구성으로 통신부(130), 영상처리부(140), 저장부(150), UI생성부(160), 전원공급부(170), 광필터(180), 감지부(190) 및 제어부(100)를 더 포함할 수 있다.
디스플레이부(110)는 제1광을 출력하기 위한 RGB 필터(112)를 갖는다. 제어부(100)로부터 제1광을 출력하도록 명령이 전달되면 디스플레이부(110)의 RGB 필터(112)로 전원을 공급하여 디스플레이부(110)의 일부 영역에서 특정범위의 파장을 갖는 광 즉, 청색광인 제1광만 출력되도록 동작할 수 있다. 이후 디스플레이부(110)의 하부에서 광원이 출력되면 디스플레이부(110) 외부로는 청색광만이 출력되게 된다.
통신부(130)는 외부입력에 의한 신호를 수신하여 영상처리부(140) 또는 제어부(100)에 전달할 수 있다. 통신부(130)는 다양한 외부입력 케이블이 접속됨으로써 해당 외부입력으로부터의 신호를 유선으로 수신하며, 또는 무선으로 수신되는 신호를 미리 정해진 무선통신규격에 따라서 수신할 수 있다.
통신부(130)는 각 케이블이 개별적으로 접속되는 복수의 커넥터(미도시)를 포함할 수 있다. 통신부(130)는 접속된 외부입력으로부터의 신호, 예를 들면 HDMI, USB, 컴포넌트(component) 규격에 따른 방송신호, 영상신호, 데이터신호 등을 수신하거나, 또는 통신 네트워크를 통한 통신데이터를 수신할 수 있다.
통신부(130)는 외부입력으로부터의 신호/데이터를 수신하는 구성뿐 아니라, 사용자단말기(10)의 설계 방식에 따라서, 무선 통신을 위한 무선통신모듈(미도시)이나 방송신호의 튜닝을 위한 튜너(미도시)와 같은 다양한 부가적인 구성을 더 포함할 수 있다. 통신부(130)는 외부장치로부터 신호를 수신하는 것 이외에도, 사용자단말기(10)의 정보/데이터/신호를 외부장치에 전송할 수도 있다. 즉, 통신부(130)는 외부장치로 신호를 수신하는 구성으로만 한정할 수 없으며, 양방향 통신이 가능한 인터페이스(interface)로 구현될 수 있다. 통신부(130)는 복수의 제어장치로부터 UI를 선택하기 위한 제어신호를 수신할 수 있다. 통신부(130)는 블루투스(Bluetooth), IR(Infrared), UWB(Ultra Wideband), 지그비(Zigbee) 등 공지의 근거리 무선통신을 위한 통신모듈로 구성될 수 있으며, 유선통신을 위한 공지의 통신포트로 구성될 수도 있다. 통신부(130)는 UI를 선택하기 위한 제어신호 이외에, 디스플레이의 조작을 위한 명령, 데이터의 송수신 등 다양한 목적으로 활용될 수 있다.
영상처리부(140)는 GPU(graphic processing unit)으로 구현될 수 있는 것으로서, 영상처리부(140)가 수행하는 영상처리 프로세스의 종류는 한정되지 않으며, 예를 들면 소정 신호를 각 특성별 신호로 분배하는 디멀티플렉싱(de-multiplexing), 영상신호의 영상 포맷에 대응하는 디코딩(decoding), 인터레이스(interlace) 방식의 영상신호를 프로그레시브(progressive) 방식으로 변환하는 디인터레이싱(de-interlacing), 영상 화질 개선을 위한 노이즈 감소(noise reduction), 디테일 강화(detail enhancement), 프레임 리프레시 레이트(frame refresh rate) 변환 등을 포함할 수 있으며, 인코딩된 소스영상의 영상 포맷에 대응하여 소스 영상을 디코딩하는 디코더(미도시) 및 디코딩된 소스영상을 프레임단위로 저장하는 프레임버퍼(미도시)를 포함할 수 있다.
영상처리부(140)는 이러한 여러 기능을 통합시킨 SOC(system-on-chip), 또는 이러한 각 프로세스를 독자적으로 수행할 수 있는 개별적인 구성들이 인쇄회로기판 상에 장착됨으로써 영상처리보드(미도시)로 구현되어 디스플레이장치에 내장될 수 있다.
영상처리부(140)는 수신부(미도시)로부터 수신되는 영상신호를 포함하는 방송신호 및 영상공급원(미도시)으로부터 제공받은 영상신호를 포함하는 소스영상에 대해 기 설정된 다양한 영상처리 프로세스를 수행한다. 영상처리부(140)는 이러한 프로세스가 수행된 영상신호를 사용자단말기(10)에 출력함으로써, 사용자단말기(10)에 처리된 소스영상이 표시될 수 있다.
저장부(150)는 사용자단말기(10)에 전원이 차단되더라도 데이터들이 남아있어야 하며, 사용자의 변동 사항을 반영할 수 있도록 쓰기 가능한 비휘발성 메모리(Writable ROM)로 마련되는 것이 바람직하다. 즉, 저장부(150)는 플래쉬 메모리(Flash Memory) 또는 EPROM 또는 EEPROM 중 어느 하나로 마련될 수 있다. 저장부(150)는 사용자의 구강상태를 판단하기 위한 애플리케이션을 저장할 수 있다. 애플리케이션은 생산자에 의해 펌웨어로써 사용자단말기(10)의 저장부에 저장되어 있을 수 있으며 최초 생산 시 저장되어 있지 않다면 외부의 서버로부터 사용자의 구강상태를 판단하기 위한 애플리케이션을 다운로드하여 설치한 후 실행할 수도 있다. 또는 웹 애플리케이션으로써 웹애플리케이션의 서버로 접속하여 실행되도록 함으로써 애플리케이션을 사용자단말기(10)의 저장부에 저장하고 있지 않을 수도 있다.
UI생성부(160)는 실행되는 응용프로그램을 동작하기 위한 UI를 생성할 수 있다. 생성되는 UI는 아이콘, 텍스트 등의 형태로 제공되는 복수의 서브 UI를 포함하며, 사용자가 사용자단말기(10)를 통해 특정 서브UI를 선택하면 선택된 서브UI에 대응하여 응용프로그램이 동작될 수 있다. 즉, 각각의 서브UI는 사용자단말기(10)에서 실행 중인 응용프로그램을 동작할 수 있는 복수의 기능 또는 이벤트 단위로 생성될 수 있다.
UI생성부(160)는 디스플레이부(110)에 표시되는 UI를 생성하고 제어하는 소프트웨어 또는 하드웨어 적 기능을 의미하는 것으로, 후술할 제어부(100)에 의해 그 기능이 수행될 수 있을 것이다. 다시 말하면, UI생성부(160)가 별도의 칩셋으로 구성되거나, 별도의 마이크로프로세서에 의해 구현되지 않을 수 있다.
전원공급부(170)는 사용자단말기(10)의 전원을 필요로 하는 내부 구성으로 전원을 공급한다. 전원공급부(170)는 제어부(100)의 제어에 의해 일부 구성으로 전원을 공급할 수 있으며 차단할 수도 있다. 이에 의해 각각의 구성이 구동을 하고 구동을 멈추게 된다.
광필터(180)는 사용자단말기(10) 내부에 외부로부터 촬상부(120)로 입사되는 광에 대하여 선별적으로 수신될 수 있도록 할 수 있다. 광필터(180)는 전원공급부(170)로부터 전원을 공급받아 반사광 중 제2광은 통과시키고 제2 광 이외의 광은 차단하도록 동작할 수 있도록 구현될 수 있다. 광필터(180)는 사용자단말기(10)의 외부에 촬상부(120)를 커버하도록 부착되어 마련될 수도 있으며, 슬라이딩되어 마련될 수 있다. 광필터(180)는 필름형태로 마련되어 촬상부(120)로의 광을 커버하도록 형성되어 있을 수 있다. 구강상태를 파악하려는 경우마다 촬상부(120)에 부착되어 제2광을 보다 효율적으로 파악하기 쉽게 할 수도 있다.
감지부(190)은 사용자의 체온을 광학적으로 측정하여 감지하는 온도감지부(192)를 포함하며, 사용자의 구강에서 발생될 수 있는 구취의 가스를 측정하여 감지하는 가스감지부(194)를 포함할 수 있다. 온도감지부(192)는 사용자의 구강에 광을 출력하여 반사되어 수신되는 광으로 사용자의 구강에 대한 체온을 측정할 수 있는 광학센서로 마련될 수 있으나 이에 한정되지는 않는다. 온도감지부(192)는 양치질을 하거나 양치질을 한 후 등의 경우에서 사용자의 구강에 대한 온도(체온)을 측정할 수 있다. 이는 구강 내 세균들의 휘발성 황화합물 활성은 온도와 밀접한 관련이 있어 구강상태가 좋은 사용자가 양치질을 할 때 온도가 높을수록 구취감소에도 효과가 있다. 그러므로, 치아 온도를 광학 측정하여 구강 세균 활동에 영향을 주는 온도가 될 때 양치질에 대한 코칭 즉, 안내정보를 사용자에게 제공하면 보다 효과가 있다. 가스감지부(194)는 구강의 세균에 의해 발생될 수 있는 사용자의 날숨에서 가스(구취)를 감지할 수 있다. 다만, 사용자의 구강에서 구취가 소정 정도 이상 발생되고 있다고 판단되는 경우에는 사용자가 음식을 섭취한 후 발생되는 구취인지 아니면 사용자의 치아의 우식 및 치태 등의 원인으로 구취가 발생하는 것인지는 광측정에 의한 분석정보를 조합하여 판단할 수도 있다.
제어부(100)는 감지부(190)로부터 감지된 상기 가스 및 온도 중 적어도 하나의 레벨에 기초하여 제1광이 출력되도록 디스플레이부(110)를 제어할 수 있다.
제어부(100)는 촬상된 이미지 중 제2파장범위의 제2광에 의한 이미지를 분석할 수 있다. 제어부(100)는 촬상된 이미지에 대응하여 제2 광에 의한 이미지의 색상, 분포, 조도, 형광소실량 및 면적 중 적어도 하나를 분석할 수 있다. 촬상된 이미지에서의 제2광에 의한 이미지는 사용자의 구강에 치아세균이 많은 경우 치아세균의 분비물이 많게 되어 제1광인 청색광이 비춰지면 치아세균의 분비물은 반사될 때 적색계열의 형광색이므로 이의 정도 즉, 색상, 분포, 조도, 형광소실량 및 면적 중 적어도 하나를 분석하여 치아세균이 얼마나 많은 지를 파악할 수 있다. 여기서, 제어부(100)는 조도를 분석하여 디스플레이부(110) 화면의 제1영역과 제2영역을 조정할 수 있다. 이를 테면 조도 즉, 제2광이 촬상부(120)로 입사되는 각도가 변경됨에 따라 제1영역이 증가 또는 감소되고 제2영역이 증가 또는 감소될 수 있다.
제어부(100)는 사용자의 신체에 관한 분석정보를 제공하기 위한 적어도 하나의 분석된 값의 범위를 설정할 수 있다. 이를 테면 제어부(100)는 색상에 대하여 연분홍색 영역일 경우 치태(dental plaque)의 형성이 시작되는 것으로 설정할 수 있다. 연분홍색 영역은 치아세균이 하나도 없을 경우의 제2광에 의한 이미지 색인 흰녹색보다 적색광으로 변하는 과정에서 50%정도라고 볼 수 있으므로 제어부(100)는 이에 대한 설정을 할 수 있다. 제어부(100)는 형광소실량의 경우 0% ~ 5%, 5% ~ 20%, 20%이상의 범위를 설정하여 분석된 형광소실량의 값이 0% ~ 5%, 5% ~ 20%, 20%이상인 경우 치태(dental plaque) 정도를 파악할 수 있도록 할 수 있으며 진단 및 치아관리정보를 범위에 따라 다르게 제공될 수 있다.
제어부(100)는 촬상된 이미지 중 제2광에 의한 이미지를 추출할 수 있다. 광필터(180)가 장착 또는 부착되어 있지 않을 경우는 촬상된 이미지 중 520nm정도의 제2광의 이미지를 추출하여 촬상된 이미지의 어느 영역에 어느 정도 분포하는 지를 파악할 수 있다. 제1광에 의한 반사광은 사용자의 구강의 이미지를 포함하고 있으며 이 중 제2광이 수신되는데 제2광은 520nm로 그 세기에 따라 짙고 옅은 적색계열의 형광색을 나타내고 있으므로 적색계열의 형광색을 촬상된 이미지에서 추출하여 사용자의 구강의 이미지에 함께 표시하여 사용자에게 제공될 수 있다.
제어부(100)는 제1광이 출력되면 전원공급에 의해서 동작하는 광필터(180)의 동작이 개시되도록 전원공급부(170)를 제어할 수 있다.
제어부(100)는 촬상된 이미지의 크기, 촬상된 제2광에 의한 이미지의 조도 및 휘도 중 적어도 하나에 대응하여 제1영역의 크기, 위치 및 제1광의 휘도 중 적어도 하나가 변경되도록 제어할 수 있다. 제어부(100)는 촬상된 이미지의 크기가 기설정된 이미지 크기 또는 이전 촬상된 이미지의 크기와 비교하고 그 크기의 정도와 휘도를 파악하여 제1광을 출력하는 제1영역의 크기와 휘도를 조정할 수 있으며 제2광이 촬상부(120)로 입사되는 각도에 따라 제1영역의 크기 또는 위치를 변경할 수 있다. 일 예로 사용자단말기(10)를 사용자가 평소보다 많이 사용자의 신체에 대향하여 보다 높이 들어서 사용할 경우 디스플레이부(110) 화면의 아래측에 형성되는 제1영역의 크기는 작아지게 되고 그 위치가 아래에 있게 되며 사용자단말기(10)를 사용자가 평소보다 사용자의 신체에 대향하여 보다 낮게 들어서 사용할 경우 제1영역은 그 크기가 증가되어 제2영역의 크기는 제어부(100)에 의해 감소될 수도 있다. 제1영역 및 제2영역은 더 이상 줄어들지 않고 더 이상 증가하지 않는 크기의 임계값을 가질 수 있다. 이로 인해서 제1영역에서 출력되는 제1광의 휘도를 최소한으로 유지할 수 있다. 그리고, 제2영역에서 제공되는 사용자의 신체에 관한 분석정보를 충분한 크기로 제공할 수 있다. 상기의 예들은 사용자단말기(10)의 위치에 따라 제1영역과 제2영역을 변경할 수 있는 것을 나타내었다.
제어부(100)는 사용자의 구강상태를 판단하기 위해 저장부(150)에 저장된 애플리케이션을 실행하며, 사용자의 치태(dental plaque), 우식(dental caries), 구취 및 구강 온도 중 적어도 하나를 측정하기 위하여 선택 가능한 UI가 생성되도록 UI생성부를 제어할 수 있다.
분석정보는 사용자의 구강상태정보, 구강관리정보, 구강 교육, 코칭 정보, 목표 설정 도전정보, 목표 달성 가이드 정보 및 안내정보 중 적어도 하나를 포함할 수 있다. 제어부(100)는 사용자의 구강상태정보, 구강관리정보, 구강 교육, 코칭 정보, 목표 설정 도전정보, 목표 달성 가이드 정보 및 안내정보를 촬상된 이미지와 함께 제공할 수도 있으며 표의 UI로써 사용자에게 제공될 수도 있다. 일 예로 구강상태정보는 치태(dental plaque)의 진행 정도를 나타내는 것일 수 있으며, 구강관리정보는 양치질에 대한 정보일 수도 있으며 치료에 대한 관리정보일 수도 있다. 안내정보는 구강상태정보와 구강관리정보를 포함할 수 있으며 병원에 대한 정보 또는 치아관련 약에 대한 정보일 수도 있다.
구강 교육 및 코칭 정보는 구강상태정보를 이용하여 사용자가 양치 방법 또는 치아 관리 방법을 교육하고 구강상태정보를 이용하여 치아 중 치태 및 구취 제거가 필요한 양치질 구간이나 치실 사용 등 관리를 위한 구체적인 방법에 대해 알려주는 정보이다. 이러한 교육 및 코칭은 애니메이션 또는 사용자 설정 캐릭터를 이용하여 제공해 줄 수 있다. 목표 설정 도전 및 달성 가이드 정보는 치태정도나 구취정도에 따라 목표가 설정가이드가 제공되고 이를 이용하여 양치질이나 치실 사용들을 통해 치태나 구취가 제거 후 다시 촬상과정을 통해 치태나 구취가 제거되는 정도에 따라 달성 여부에 대한 가이드가 점수화 되어 제공된다. 치태나 구취가 제거 되기 전 측정 결과와 양치나 치실 사용 후 측정 결과가 비교되어 제거가 많이 될수록 가이드 점수가 높이 책정된다.
상기 구강상태정보, 구강관리정보, 구강 교육, 코칭 정보, 목표 설정 도전정보, 목표 달성 가이드 정보 및 안내정보는 상기에만 한정되지 않고 사용자에게 제공될 수 있는 관련정보이면 가능하다. 이러한 정보는 알람이나 진동효과를 이용하여 제공될 수도 있다.
도 5는 본 발명에 따른 사용자단말기(10)의 제어방법을 나타내는 제어흐름도이다.
디스플레이부(110) 화면의 제1영역에서 제1파장범위의 제1광을 사용자의 신체에 대하여 출력한다(S11).
촬상부(120)는 제어부(100)의 제어에 의해 사용자 신체에 대한 이미지를 촬상한다(S12).
촬상된 이미지에 기초하여 화면의 제2영역에 사용자의 신체에 관한 분석정보를 표시한다(S13).
상기 S11단계에서의 제1광은 디스플레이장치(10)에서 출력하지 않고 외부장치에서 제1광이 출력되고 제1파장범위의 제1광이 출력된 영역에 대한 촬상된 이미지를 수신하여 제어흐름이 진행될 수 있다. 상기 제어흐름은 일 실시 예이므로 이에 한정되지 않는다.
도 6은 본 발명의 일 실시 예에 따른 사용자단말기(10)의 제어방법을 나타내는 제어흐름도이다.
사용자는 사용자의 구강상태를 판단하기 위한 애플리케이션을 디스플레이부(110) 화면에서 선택하여 실행한다(S21).
제어부(100)는 사용자의 치태(dental plaque), 우식(dental caries), 구취 및 구강 온도 중 적어도 하나를 측정하기 위하여 선택 가능한 UI를 생성하도록 UI생성부(160)를 제어한다(S22).
사용자는 생성된 치태측정모드 UI 및 우식측정모드 UI 중 하나를 선택한다(S23).
제어부(100)는 선택된 모드에 따라 디스플레이부(110) 화면의 제1영역에서 제1파장범위의 제1광이 사용자의 신체에 대하여 출력되도록 디스플레이부(110)를 제어한다(S24).
촬상부(120)는 사용자 신체에 대한 이미지를 촬상한다(S25).
전원공급부(170)은 제1광이 출력되면 반사광 중 제2광은 통과시키고 제2광 이외의 광은 차단하도록 광필터(180)로 전원을 공급한다(S26).
사용자의 신체에 관한 분석정보를 제공하기 위한 적어도 하나의 분석된 값의 범위를 설정한다(S27). 분석된 값의 범위를 설정은 사용자에 의해 또는 의사의 의견을 참조하여 기설정되어 있을 수 있다.
촬상된 이미지 중 제2파장범위의 제2광에 의한 이미지를 분석한다(S28).
제어부(100)는 촬상된 이미지의 크기, 촬상된 제2광에 의한 이미지의 조도 및 휘도 중 적어도 하나에 대응하여 제1영역의 크기, 위치 및 제1광의 휘도 중 적어도 하나를 결정한다(S29). 제어부(100)는 결정된 제1영역의 크기, 위치 및 제1광의 휘도가 되도록 디스플레이부(110)를 제어한다.
제어부(100)는 촬상된 이미지에 대응하여 제2광에 의한 이미지의 색상, 분포, 조도, 형광소실량 및 면적 중 적어도 하나를 분석하여 화면의 제2영역에 사용자의 구강상태정보, 구강관리정보, 구강 교육, 코칭 정보, 목표 설정 도전정보, 목표 달성 가이드 정보 및 안내정보 중 적어도 하나를 표시한다(S30). 이를 테면 사용자의 구강 이미지에 구취, 우식(dental caries) 또는 치태(dental plaque)의 정도를 알 수 있도록 색상을 표시하여 제공할 수도 있으며 분석된 정보를 숫자로 표시하여 알릴 수도 있으며, 우식, 치태, 구취의 정도에 따라 진동이나 알람을 이용하여 알릴 수도 있고, 이미지에 색상을 표시하면서 분석된 정보를 숫자로 표시하는 표와 함께 제공할 수 있다.
제1광은 디스플레이장치(10)에서 출력하지 않고 외부장치에서 제1광이 출력되고 제1파장범위의 제1광이 출력된 영역에 대한 촬상된 이미지를 수신하여 제어흐름이 진행될 수 있다. 상기 제어흐름은 일 실시 예이므로 이에 한정되지 않는다.
상기의 제어흐름에 추가하여 제어부(100)는 사용자의 구강에 대한 가스 레벨을 측정하여 소정 레벨 이상이 되면 온도 레벨을 측정하도록 할 수 있다. 제어부(100)는 사용자의 구강에 대한 온도 레벨을 측정하여 소정 레벨 이하이면 제1광을 출력하여 이미지를 촬상하도록 할 수도 있다. 상기 사용자의 구강에 대한 가스 레벨이 소정 레벨 이하이면 제1광을 출력하여 이미지를 촬상하지 않고 측정된 가스 레벨 즉, 구취 정도를 안내하는 안내정보를 표시하도록 할 수 있다. 상기 사용자의 구강에 대한 온도 레벨이 소정 레벨 이상이면 제1광을 출력하여 이미지를 촬상하지 않고 측정된 온도 레벨 및 구취레벨을 안내하는 안내정보를 표시하도록 할 수 있다.
도 7은 본 발명의 다른 실시 예에 따른 사용자단말기(10)의 제어방법을 나타내는 제어흐름도이다.
사용자는 사용자의 구강상태를 판단하기 위한 애플리케이션을 디스플레이부(110) 화면에서 선택하여 실행한다(S31).
제어부(100)는 사용자의 치태(dental plaque), 우식(dental caries), 구취 및 구강 온도 중 적어도 하나를 측정하기 위하여 선택 가능한 UI를 생성하도록 UI생성부(160)를 제어한다(S32).
사용자는 생성된 치태측정모드 UI 및 우식측정모드 UI 중 하나를 선택한다(S33).
제어부(100)는 선택된 모드에 따라 디스플레이부(110) 화면의 제1영역에서 제1파장범위의 제1광이 사용자의 신체에 대하여 출력되도록 디스플레이부(110)를 제어한다(S34).
촬상부(120)는 사용자 신체에 대한 이미지를 촬상한다(S35).
제어부(100)는 수신된 반사광 중 제2광을 추출한다(S36). 제2광의 파장범위만을 추출하기 위하여 알고리즘을 이용하여 수신된 반사광 중 제2광이 이미지 중 어느 영역에 어느 정도 분포하는 지를 추출할 수 있다.
사용자의 신체에 관한 분석정보를 제공하기 위한 적어도 하나의 분석된 값의 범위를 설정한다(S37). 분석된 값의 범위의 설정은 사용자에 의해 또는 의사의 의견을 참조하여 기설정되어 있을 수 있다.
촬상된 이미지 중 제2파장범위의 제2광에 의한 이미지를 분석한다(S38).
제어부(100)는 촬상된 이미지의 크기, 촬상된 제2광에 의한 이미지의 조도 및 휘도 중 적어도 하나에 대응하여 제1영역의 크기, 위치 및 제1광의 휘도 중 적어도 하나를 결정한다(S39). 제어부(100)는 결정된 제1영역의 크기, 위치 및 제1광의 휘도가 되도록 디스플레이부(110)를 제어한다.
제어부(100)는 촬상된 이미지에 대응하여 제2광에 의한 이미지의 색상, 분포, 조도, 형광소실량 및 면적 중 적어도 하나를 분석하여 화면의 제2영역에 사용자의 구강상태정보, 구강관리정보, 구강 교육, 코칭 정보, 목표 설정 도전정보, 목표 달성 가이드 정보 및 안내정보 중 적어도 하나를 표시한다(S40). 이를 테면 사용자의 구강 이미지에 구취, 우식(dental caries) 또는 치태(dental plaque)의 정도를 알 수 있도록 색상을 표시하여 제공할 수도 있으며 분석된 정보를 숫자로 표시하여 알릴 수도 있으며 이미지에 색상을 표시하면서 분석된 정보를 숫자로 표시하는 표와 함께 제공할 수 있다.
제1광은 디스플레이장치(10)에서 출력하지 않고 외부장치에서 제1광이 출력되고 제1파장범위의 제1광이 출력된 영역에 대한 촬상된 이미지를 수신하여 제어흐름이 진행될 수 있다. 상기 제어흐름은 일 실시 예이므로 이에 한정되지 않는다.
상기의 제어흐름에 추가하여 제어부(100)는 사용자의 구강에 대한 가스 레벨을 측정하여 소정 레벨 이상이 되면 온도 레벨을 측정하도록 할 수 있다. 제어부(100)는 사용자의 구강에 대한 온도 레벨을 측정하여 소정 레벨 이하이면 제1광을 출력하여 이미지를 촬상하도록 할 수도 있다. 상기 사용자의 구강에 대한 가스 레벨이 소정 레벨 이하이면 제1광을 출력하여 이미지를 촬상하지 않고 측정된 가스 레벨 즉, 구취 정도를 안내하는 안내정보를 표시하도록 할 수도 있다. 상기 사용자의 구강에 대한 온도 레벨이 소정 레벨 이상이면 제1광을 출력하여 이미지를 촬상하지 않고 측정된 온도 레벨를 안내하는 안내정보를 표시하도록 할 수도 있다.
도 8은 본 발명의 다른 실시 예에 따른 사용자단말기(10)에서 사용자의 치태(dental plaque)와 우식(dental caries)을 측정하기 위하여 선택 가능한 UI를 나타내는 예시도이다.
사용자는 사용자의 구강상태를 판단하기 위한 애플리케이션 UI를 선택하면 치태측정모드와 우식측정모드가 표시되도록 할 수도 있다. 사용자는 표시된 치태측정모드와 우식측정모드 중 하나를 선택하여 측정모드로 진입할 수 있다. 이외의 측정모드가 표시되도록 할 수도 있으며 바로 우식측정모드가 실행되도록 할 수도 있다.
사용자단말기(10)의 상측에는 촬상부(120)가 형성되어 있다. 이 촬상부(120)의 우측에는 촬상부의 렌즈를 커버할 수 있도록 광필터(180)가 마련되어 있을 수 있다. 이 광필터(180)는 촬상부(120)를 좌우측으로 슬라이딩되어 커버할 수 있도록 마련될 수도 있다. 또는 광필터(180)는 부착형으로 마련되어 촬상부(120)의 렌즈부분에 부착되도록 형성될 수도 있다.
도 9는 본 발명의 일 실시 예에 따른 사용자단말기(10)에서 청색광을 출력할 수 있는 화면 스펙트럼을 나타내는 그래프이다.
여러 종류의 사용자단말기(10)에서 400~450nm정도 대역의 광을 출력하는 것을 나타내는 것으로 청색광을 출력하는 것을 나타낸다. 이와 마찬가지로 다른 영역의 파장 광에 대해서도 출력 가능하다.
도 10은 본 발명의 일 실시 예에 따른 사용자단말기(10)에서 촬상된 이미지에 사용자 신체에 관한 분석정보를 나타내는 예시도이다.
사용자단말기(10)에서 제1광을 출력한 후 수신된 제2광을 포함하는 이미지를 촬상하고 분석정보를 함께 표시한 것을 나타내는 것을 도시하였다. 구체적으로, 사용자의 구강을 촬상하고 이미지를 표시하는데 제1광을 구강에 출력하여 반사된 광 중 치아세균의 분비물에 의해 적색계열의 형광인 제2광이 표시되는 것을 나타내고 있으며 이 적색계열의 형광색으로 표시되는 부분이 치태(dental plaque)임을 알려주고 있다. 적색계열의 형광색으로 표시되는 부분이 그 정도 즉, 색상, 분포, 조도, 형광소실량 및 면적에 대한 정도에 따라 우식(dental caries)의 정도, 치태(dental plaque)의 정도, 프라그의 적층 정도, 구취 정도 등을 판단할 수 있는 것이다.
도 11및 도 12는 본 발명의 일 실시 예에 따른 사용자단말기(10)에서 촬상된 이미지에서 그리드 영역설정을 통해 색상 및 면적 분석하는 것을 나타내는 예시도이다.
도 11및 도 12에서는 도 10에서의 적색계열의 형광으로 표시되는 부분에 대하여 그리드 영역설정을 통해 색상 및 면적 분석하는 것을 나타내었다.
흰색/붉은색을 검출하고, 흰색/붉은색의 그리드(A) 개수 비율을 계산하여 충치/치태 정도를 산출할 수 있다. 그리드(A)가 조밀할수록 사용자의 치아(C) 중 충치/치태(dental plaque)(B) 측정에 대하여 정확도 높아지게 된다. 그리드 하나를 충치/치태를 판단하는 셀이라 기준하고 그리드 색깔이 붉은색인지 흰녹색인지 흰색인지를 구분하여 붉은색이면 충치/치태를 판정하고 흰녹색 또는 흰색이면 정상판정을 한다.
도 13은 본 발명의 일 실시 예에 따른 사용자단말기(10)에서 촬상된 이미지에서 치아 상태를 판정하는 상태정보 및 진단가이드 정보를 제공하는 예시를 나타내는 예시도이다.
사용자단말기(10)의 제1영역에서 청색광을 사용자의 구강으로 출력하면 사용자가 우식(dental caries)이나 치태(dental plaque)와 같은 것이 없는 정상치아일 경우는 촬상부(120)에서 촬상된 이미지는 도시된 바와 같이 정상치아 형광색(흰녹색)으로 적색형광은 0%이다. 하지만, 사용자의 치아에 우식(dental caries)이나 치태(dental plaque)와 같은 것이 존재하는 경우 예를 들어 적색형광이 50%정도 연분홍색인 경우에는 치아에 우식(dental caries)이나 치태(dental plaque)가 치석이 되기까지 50%정도 진행되었다는 것을 알 수 있다. 정상형광에서 적색형광의 변화가 100% 진행되면 치태(dental plaque)가 상당히 많이 진행되었다는 것을 나타내는 것이다.
퍼센트(%)를 나타내는 기준은 전체 그리드 개수와 충치/치태를 나타내는 그리드 개수를 비교하여 퍼센트(%)를 나타내는데 전체 그리드가 100개 이고 충치/치태가 있는 붉은색이 10개일 때 10%가 된다고 판단할 수 있다. 만약 하나의 그리드 내에서 반은 적색이고 반은 흰색이라면 하나의 그리드를 충치/치태가 있다고 판단할 수도 있고 아니면 전체 그리드 수를 더욱 조밀하게 하여 퍼센트(%)를 나타낼 수 있다. 상기 예에서 충치/치태가 있는 붉은색이 10개중에서 5개 정도가 적색과 흰색이 섞여 있을 때 이를 판정하는 방법은 10개가 충치/치태가 있다고 판단하거나 아니면 100개 그리드를 더욱 조밀하게 그리드 개수를 높여 1000개를 만든 후 충치/치태를 나타내는 퍼센트(%)를 계산할 수 있다.
도 13에 도시된 색상의 변화를 나타내는 그림에 대하여 하측에는 표시되는 색상에 대한 인덱스를 제공하고 있으며 그 하측에는 형광소실 수준에 대하여 그 분포량과 가이드를 표시하는 표(기준)가 표시되어 있다. 형광소실 수준이 5% 이하라면 건강한 치아라고 상태정보 및 진단가이드 정보를 제공하고 6~20%의 분포량이라면 양치 후 재측정하라는 상태정보 및 진단가이드 정보를 제공 하며 21~100%의 분포량이라면 과도한 치태(dental plaque)를 알리도록 표를 표시할 수 있다. 상기 분포량 퍼센트(%) 수치는 진단 및 치아관리정보를 의료진 판단 기준에 따라 다르게 제공될 수도 있다. 상기 범위는 일례일 뿐이면 다른 실시예 및 다양한 의도에 따라 다른 범위의 분포량을 설정하여 가이드를 표시하는 것도 가능하다.
도 14는 본 발명의 일 실시 예에 따른 사용자단말기(10)에서 형광 소실량을 측정하여 치태(dental plaque)에 대한 분석정보를 제공하는 제어흐름을 나타내는 제어흐름도이다. 다만, 상기 범위는 일례일 뿐이면 다른 실시예 및 다양한 의도에 따라 다른 범위의 분포량을 설정하여 가이드를 표시하는 것도 가능하다.
사용자의 치아상태를 광학 측정하는 애플리케이션을 선택한다(S41).
측정광원을 설정한다(S42). 측정광원을 400~500nm으로 기설정되어 있을 수도 있다.
제1영역에서 사용자의 구강으로 제1광을 출력하며 촬상부인 카메라 모듈이 동작한다(S43).
광필터(180)를 촬상부(120)의 렌즈를 커버하도록 슬라이딩하여 위치시킨다(S44). 광필터(180)가 내장되어 전원을 공급하여 동작되는 것일 수 있다. 탈부착형으로 마련되어 촬상부(120)을 커버할 수도 있다.
제2광에 대한 촬상된 이미지의 형광소실량을 측정한다(S45).
측정된 형광소실량이 5% 이내라면(S46) 측정값을 저장부(150)에 저장한다(S47).
제2영역에는 도 13에 있는 분포량 및 가이드를 기준하여 형광소실량이 5% 이내이며 건강치아라고 안내하는 정보를 표시한다(S48). 저장부(150)에 저장된 기록들을 이용하여 지속적으로 사용자의 치아를 관리할 수 있다.
측정된 형광소실량이 5% 내지 20%이내인지를 판단한다(S49).
측정된 형광소실량이 5~20%라면 제2영역에 형광소실량이 5~20%라고 알리면서 양치 후 재측정하라는 안내문구를 표시할 수 있다(S50). 재측정을 할 때 양치질 및 치실 사용에 대한 구강 교육 및 코칭 정보를 제공 할 수도 있다. 구강 교육은 도 13의 분포량과 가이드를 이용하여 사용자가 양치 방법 또는 치아 관리 방법을 교육하고 치아 중 치태 및 구취 제거가 필요한 양치질 구간이나 치실 사용 등 관리를 위한 구체적인 방법에 대해 알려주는 정보이다. 이러한 교육 및 코칭은 애니메이션 또는 사용자 설정 캐릭터를 이용하여 제공해 줄 수 있다. 다만, 상기 범위는 일 예일 뿐이며 다른 실시 예 또는 다양한 의도에 따라 다른 범위의 형광 소실 량을 설정하여 안내 문구를 표시하는 것도 가능하다.
측정된 형광소실량이 20%보다 초과라면 제2영역에 형광소실량이 20%보다 초과하는 것을 알리면서 치태(dental plaque)가 현재 과도한 상태를 알릴 수 있다(S51). 또한, 충치가 위험하므로 병원을 방문하여 치료를 하라는 안내문구를 표시할 수도 있다. 또한, 현 위치, 집, 사무실 등의 위치를 기준으로 주변의 치과병원에 대한 정보를 안내할 수도 있다. 그리고, 측정된 과도한 치태(dental plaque)를 제거할 수 있는 양치질에 대한 정보를 더 안내할 수도 있다.
제1광은 디스플레이장치(10)에서 출력하지 않고 외부장치에서 제1광이 출력되고 제1파장범위의 제1광이 출력된 영역에 대한 촬상된 이미지를 수신하여 제어흐름이 진행될 수 있다. 상기 제어흐름은 일 실시 예이므로 이에 한정되지 않는다.
상기의 제어흐름에 추가하여 제어부(100)는 사용자의 구강에 대한 가스 레벨을 측정하여 소정 레벨 이상이 되면 온도 레벨을 측정하도록 할 수 있다. 제어부(100)는 사용자의 구강에 대한 온도 레벨을 측정하여 소정 레벨 이하이면 제1광을 출력하여 이미지를 촬상하도록 할 수도 있다. 상기 사용자의 구강에 대한 가스 레벨이 소정 레벨 이하이면 제1광을 출력하여 이미지를 촬상하지 않고 측정된 가스 레벨 즉, 구취 정도를 안내하는 안내정보를 표시하도록 할 수도 있다. 상기 사용자의 구강에 대한 온도 레벨이 소정 레벨 이상이면 제1광을 출력하여 이미지를 촬상하지 않고 측정된 온도 레벨을 안내하는 안내정보를 표시하도록 할 수도 있다.
도 15는 도 14의 제어흐름으로 인한 분석정보를 나타내는 예시도이다.
도 15에서는 도 14의 제어흐름에 대한 구강상태정보, 구강관리정보, 구강 교육, 코칭 정보, 목표 설정 도전정보, 목표 달성 가이드 정보 및 안내정보 중 적어도 하나를 포함하는 정보를 표시하는 표이다. 형광소실량을 기준하여 치태(dental plaque) 정도를 판단할 수 있는 것이다.
도 16은 본 발명의 다른 실시 예에 따른 사용자단말기(10)에서 제2광의 면적을 측정하여 우식(dental caries)에 대한 분석정보를 제공하는 제어흐름을 나타내는 제어흐름도이다.
사용자의 치아상태를 광학 측정하는 애플리케이션을 선택한다(S61).
측정광원을 설정한다(S62). 측정광원을 400~500nm으로 기설정되어 있을 수도 있다.
제1영역에서 사용자의 구강으로 제1광을 출력하며 촬상부인 카메라 모듈을 동작한다(S63).
광필터(180)를 촬상부(120)의 렌즈를 커버하도록 슬라이딩하여 위치시킨다(S64). 광필터(180)가 내장되어 전원을 공급하여 동작되는 것일 수 있다. 탈부착형으로 마련되어 촬상부(120)을 커버할 수도 있다.
제2광에 대한 촬상된 이미지의 제2광의 면적을 측정한다(S65).
측정된 제2광의 면적이 20% 이내라면(S66) 측정값을 저장부(150)에 저장한다(S67).
제2영역에는 제2광의 면적이 20% 이내이며 건강치아라고 안내하는 정보를 표시한다(S68). 저장부(150)에 저장된 기록들을 이용하여 지속적으로 사용자의 치아를 관리할 수 있다.
측정된 제2광의 면적이 20 ~ 70% 이내인지를 판단한다(S69).
측정된 제2광의 면적이 20 ~ 70%라면 제2영역에 제2광의 면적이 20 ~ 70%라고 알리면서 초기 우식상태의 판단정보에 대한 안내문구를 표시할 수 있다(S70). 다만, 상기 범위는 일 예일 뿐이며 다른 실시 예 또는 다양한 의도에 따라 다른 범위의 형광 소실 량을 설정하여 안내 문구를 표시하는 것도 가능하다.
측정된 제2광의 면적이 70%보다 초과라면 제2영역에 제2광의 면적이 20%보다 초과하는 것을 알리면서 우식(dental caries)으로 판단된 정보를 알릴 수 있다(S71). 또한, 충치가 위험하므로 병원을 방문하여 치료를 하라는 안내문구를 표시할 수도 있다. 또한, 현 위치, 집, 사무실 등의 위치를 기준으로 주변의 치과병원에 대한 정보를 안내할 수도 있다. 그리고, 측정된 과도한 치태(dental plaque)를 제거할 수 있는 양치질에 대한 정보를 더 안내할 수도 있다. 양치질에 대한 정보는 양치질 및 치실 사용에 대한 구강 교육 및 코칭 정보일 수도 있다.
구강 교육은 도 13의 분포량과 가이드를 이용하여 사용자가 양치 방법 또는 치아 관리 방법을 교육하고 치아 중 치태 및 구취 제거가 필요한 양치질 구간이나 치실 사용 등 관리를 위한 구체적인 방법에 대해 알려주는 정보이다. 이러한 교육 및 코칭은 애니메이션 또는 사용자 설정 캐릭터를 이용하여 제공해 줄 수도 있다.
더불어 우식(dental caries) 이후에 치태(dental plaque)가 있을 수 있으므로 치태측정을 하라는 안내문구를 표시할 수도 있다.
제1광은 디스플레이장치(10)에서 출력하지 않고 외부장치에서 제1광이 출력되고 제1파장범위의 제1광이 출력된 영역에 대한 촬상된 이미지를 수신하여 제어흐름이 진행될 수 있다. 상기 제어흐름은 일 실시 예이므로 이에 한정되지 않는다.
상기의 제어흐름에 추가하여 제어부(100)는 사용자의 구강에 대한 가스 레벨을 측정하여 소정 레벨 이상이 되면 온도 레벨을 측정하도록 할 수 있다. 제어부(100)는 사용자의 구강에 대한 온도 레벨을 측정하여 소정 레벨 이하이면 제1광을 출력하여 이미지를 촬상하도록 할 수도 있다. 상기 사용자의 구강에 대한 가스 레벨이 소정 레벨 이하이면 제1광을 출력하여 이미지를 촬상하지 않고 측정된 가스 레벨 즉, 구취 정도를 안내하는 안내정보를 표시하도록 할 수도 있다. 상기 사용자의 구강에 대한 온도 레벨이 소정 레벨 이상이면 제1광을 출력하여 이미지를 촬상하지 않고 측정된 온도 레벨을 안내하는 안내정보를 표시하도록 할 수도 있다.
도 17은 도 16의 제어흐름으로 인한 분석정보를 나타내는 예시도 이다.
도 17에서는 도 16의 제어흐름에 대한 구강상태정보, 구강관리정보, 구강 교육, 코칭 정보, 목표 설정 도전정보, 목표 달성 가이드 정보 및 안내정보 중 적어도 하나를 포함하는 정보를 표시하는 표이다. 제2광의 면적을 기준하여 우식(dental caries)을 판단할 수 있는 것이다. 제2광의 면적수준이 0~20% 정도라면 지속 셀프 제거 관리를 안내문구를 제2영역에 표시하고 제2광의 면적수준이 21~70%정도라면 초기 우식(dental caries) 예상이라는 안내문구를 제2영역에 표시하고 제2광의 면적수준이 70~100%정도라면 우식(dental caries)이 예상된다는 안내문구를 제2영역에 표시하는 것이다.
도 18은 본 발명의 일 실시 예에 따른 사용자단말기(10)에서 제2영역에 안내정보를 표시하는 예시를 나타내는 예시도이다.
도 17에서 제2광의 면적수준이 21~70%에 해당된다면 제2영역에 "21~70%(제2광의 면적수준), 초기 우식(dental caries) 예상"이라고 표시할 수 있다. 또한, "충치위험", "병원방문요망", "현위치 주변 치과병원-OO병원, **병원", "양치질정보-첨부" 및 "치태 측정 모드 실행" 등의 문구를 표시할 수도 있다. 이러한 문구를 표시 할 때 애니메이션 또는 사용자 설정 캐릭터를 이용하여 제공해 줄 수도 있다.
도 19 및 도 20은 본 발명의 또 다른 실시 예에 따른 사용자단말기(10)의 디스플레이부(110) 화면에서 제1영역과 제2영역을 나타내는 예시도이다.
본 발명에 따른 사용자단말기(10)에서는 제1광을 디스플레이부(110) 화면의 제1영역에서 출력하도록 하면서 이미지를 촬상하고 분석하여 분석정보를 디스플레이부(110) 화면의 제2영역에서 표시한다.
도 19에서는 디스플레이부(110) 화면의 영역 전체에서 제1광이 출력되도록 할 수 있다. 이러한 경우 제1영역은 디스플레이부(110) 화면의 영역 전체가 된다. 이후 도 20에서는 제1영역에서 제1광의 출력을 중단하고 분석정보를 디스플레이부(110) 화면의 영역 전체에 표시할 수도 있다. 그러므로 제1영역과 제2영역은 디스플레이부(110) 화면의 영역 전체로 동일하지만 시차를 두어 디스플레이부(110) 화면의 영역 전체에서 촬상된 이미지를 표시 또는 제1광을 출력하는 것으로 제1영역과 제2영역 각각은 그 영역이 겹쳐질 수 있다.
일 실시 예로, 제1영역에서 제1광이 출력되는 중에 제2영역에 분석정보를 표시하고 있다가 보다 정밀한 분석정보를 얻기 위해서 제1영역이 디스플레이부(110) 화면의 전체 영역으로 확장되고 제2영역이 없어질 수도 있으며 분석정보를 크게 표시하기 위하여 제2영역이 디스플레이부(110) 화면의 전체 영역으로 확장되고 제1영역이 없어질 수도 있다. 제1영역과 제2영역이 확장되고 없어지는 경우 각각의 영역이 점차 확장되거나 없어질 수 있으며 일시에 확장되거나 없어질 수 있다. 제1영역과 제2영역은 서로 중첩될 수도 있으며 중첩되지 않을 수도 있다.
다른 실시 예로, 사용자단말기(10)는 자동회전기능이 있다. 제1영역과 제2영역 각각에서 제1광을 출력하고 있고 분석정보를 표시하고 있을 때 사용자단말기(10)가 회전하는 경우 제1영역과 제2영역도 회전에 대응하여 그 영역이 변경될 수도 있다. 이를 테면 회전되기 이전의 제1영역이 화면 좌우폭 전체에 대하여 최하측으로부터 40%의 사각영역이었다면 사용자단말기가 회전된 후에도 회전 후의 화면 좌우폭 전체에 대하여 최하측으로부터 40%의 사각영역이 되도록 변경할 수도 있다. 다만, 사용자단말기(10)의 디스플레이부(110) 화면이 지면에 대하여 수직한 상하방향으로 긴 형상에서 제1영역과 제2영역 각각에서 제1광을 출력하고 있고 분석정보를 표시하고 있을 때 90도 정도 회전하여 디스플레이부(110) 화면이 지면에 대하여 평행한 좌우방향으로 긴 형상이 된다면 제1영역과 제2영역도 회전에 대응하여 그 영역이 변경될 수도 있지만 회전에 대응하여 그 영역이 변경되면 각 영역이 좌우로 길고 상하로 길게 된다. 이러한 경우에는 사용자단말기(10)의 회전에 대응하여 각각의 영역이 변경되지 않게 설정할 수도 있다. 그리고, 사용자가 분석정보를 보기 편하게 하기 위하여 사용자단말기(10)의 회전에 대응하여 제2영역의 분석정보는 회전이 되게 설정할 수도 있다.
도 21은 본 발명에 따른 구강관리장치(20)의 구성을 나타내는 블록도이다. 본 발명에 따른 구강관리장치(20)는 통신부(210), 광출력부(220), 촬상부(230) 및 제어부(200)를 포함할 수 있다.
통신부(210)는 외부입력에 의한 신호를 수신하여 제어부(200)에 전달할 수 있다. 통신부(210)는 다양한 외부입력 케이블이 접속됨으로써 해당 외부입력으로부터의 신호를 유선으로 수신하며, 또는 무선으로 수신되는 신호를 미리 정해진 무선통신규격에 따라서 수신할 수 있다.
통신부(210)는 각 케이블이 개별적으로 접속되는 복수의 커넥터(미도시)를 포함할 수 있다. 통신부(210)는 접속된 외부입력으로부터의 신호, 예를 들면 HDMI, USB, 컴포넌트(component) 규격에 따른 방송신호, 영상신호, 데이터신호 등을 수신하거나, 또는 통신 네트워크를 통한 통신데이터를 수신할 수 있다.
통신부(210)는 외부입력으로부터의 신호/데이터를 수신하는 구성뿐 아니라, 구강관리장치(20)의 설계 방식에 따라서, 무선 통신을 위한 무선통신모듈(미도시)이나 방송신호의 튜닝을 위한 튜너(미도시)와 같은 다양한 부가적인 구성을 더 포함할 수 있다. 통신부(210)는 사용자단말기를 비롯한 외부장치로부터 신호를 수신하는 것 이외에도, 구강관리장치(20)의 정보/데이터/신호를 외부장치에 전송할 수도 있다. 즉, 통신부(210)는 외부장치로 신호를 수신하는 구성으로만 한정할 수 없으며, 양방향 통신이 가능한 인터페이스(interface)로 구현될 수 있다. 통신부(210)는 복수의 제어장치로부터 UI를 선택하기 위한 제어신호를 수신할 수 있다. 통신부(130)는 블루투스(Bluetooth), IR(Infrared), UWB(Ultra Wideband), 지그비(Zigbee) 등 공지의 근거리 무선통신을 위한 통신모듈로 구성될 수 있으며, 유선통신을 위한 공지의 통신포트로 구성될 수도 있다.
광출력부(220)는 디스플레이 화면에 RGB필터가 마련되어 청색광인 제1파장범위의 제1광이 출력되도록 마련될 수 있다. 제1광은 파장이 400~450nm의 파장을 갖도록 할 수 있다.
촬상부(230)는 카메라로 구현되어 외부의 이미지를 촬상할 수 있다. 촬상부(230)는 광출력부(220)에서 출력된 청색광인 제1광이 사용자의 신체 일부에 의해 반사된 반사광인 제2광을 포함하는 이미지를 촬상할 수 있다. 제어부(200)의 제어에 의해 제1광이 출력되면 촬상부(230)는 전면의 사용자의 신체 특히 구강을 촬상하도록 제어될 수 있다.
제어부(200)는 제1파장범위의 제1광이 출력되도록 광출력부(220)를 제어하고, 이미지를 촬상하도록 촬상부(230)를 제어하며, 촬상된 이미지를 사용자단말기(10)로 전송하도록 통신부(210)를 제어할 수 있다.
도 22는 본 발명의 일 실시 예에 따른 구강관리장치(20)의 구성을 나타내는 블록도이다. 본 발명의 일 실시 예에 따른 구강관리장치(20)는 상기 도 21의 구성을 모두 포함할 수 있으며, 추가적으로 감지부(240)와 진동부(250)을 더 포함할 수 있다.
감지부(240)은 사용자의 체온을 광학적으로 측정하여 감지하는 온도감지부(242)를 포함하며, 사용자의 구강에서 발생될 수 있는 구취의 가스를 측정하여 감지하는 가스감지부(244)를 포함할 수 있다. 온도감지부(242)는 사용자의 구강에 광을 출력하여 반사되어 수신되는 광으로 사용자의 구강에 대한 체온을 측정할 수 있는 광학센서로 마련될 수 있으나 이에 한정되지는 않는다. 온도감지부(242)는 양치질을 하거나 양치질을 한 후 등의 경우에서 사용자의 구강에 대한 온도(체온)을 측정할 수 있다. 이는 구강 내 세균들의 휘발성 황화합물 활성은 온도와 밀접한 관련이 있어 구강상태가 좋은 사용자가 양치질을 할 때 온도가 높을수록 구취감소에도 효과가 있다. 그러므로, 치아 온도를 광학 측정하여 구강 세균 활동에 영향을 주는 온도가 될 때 양치질에 대한 코칭 즉, 안내정보를 체온을 나타내는 온도정보와 함께 사용자에게 제공하면 보다 효과가 있다. 가스감지부(244)는 구강의 세균에 의해 발생될 수 있는 사용자의 날숨에서 가스(구취)를 감지할 수 있다. 다만, 사용자의 구강에서 구취가 소정 정도 이상 발생되고 있다고 판단되는 경우에는 사용자가 음식을 섭취한 후 발생되는 구취인지 아니면 사용자의 치아의 우식 및 치태 등의 원인으로 구취가 발생하는 것인지는 광측정에 의한 분석정보를 조합하여 판단할 수도 있다.
진동부(250)는 제어부(200)의 제어에 의해 구강관리장치(20)가 진동되도록 할 수 있다. 이를 테면 구강관리장치(20)를 이용하여 양치질을 하는 경우 사용자의 체온이 소정치 이상으로 상승되지 않는다면 제어부(200)는 진동부(250)를 구동하여 사용자의 체온이 소정치 이상으로 상승되도록 할 수 있다. 진동부(250)는 사용자단말기(10)와 같은 외부장치로부터 제어신호 등의 신호가 수신되면 이를 알리는 진동을 발생하도록 할 수도 있다.
제어부(200)는 감지부(240)로부터 감지된 가스 및 온도 중 적어도 하나의 레벨을 사용자단말기(10)로 전송하도록 통신부(210)를 제어할 수 있다. 제어부(200)는 사용자단말기(10)와 같은 외부장치로부터 사용자의 구취를 측정하라는 제어신호를 수신할 수 있으며, 이러한 경우 제어부(200)는 진동부(250)를 구동하여 사용자에 이를 알리고, 사용자가 구강관리장치(20)의 감지부(240)로 날숨을 쉬면 가스감지부(244)는 가스 레벨을 측정하여 감지할 수 있다. 제어부(200)는 가스감지부(244)에서 감지된 가스 레벨이 기설정된 레벨이상이면 온도감지부(242)로 온도 레벨을 측정하도록 제어할 수 있으며 감지된 가스 레벨이 기설정된 레벨미만이면 건강한 치아로 판단하여 감지된 가스 레벨을 사용자단말기(10)와 같은 외부장치로 전송하여 사용자에게 알리도록 할 수 있다. 제어부(200)는 온도감지부(242)에서 감지된 온도 레벨이 기설정된 온도 레벨이하이면 제1광이 사용자의 구강으로 출력되도록 광출력부(220)제어할 수 있다. 제어부(200)는 기설정된 온도 레벨 초과이면 감지된 온도 레벨을 사용자단말기(10)와 같은 외부장치로 전송하여 사용자에게 알리도록 할 수 있다. 제어부(200)는 제1광이 출력된 영역에 대한 이미지를 촬상하여 촬상된 이미지를 사용자단말기(10)와 같은 외부장치로 전송할 수 있다.
제어부(200)는 사용자단말기(10)로부터 수신되는 제어신호에 기초하여, 사용자의 구강에 대한 가스 및 온도 중 적어도 하나의 감지와 제1광의 출력 중 적어도 하나를 수행하도록 제어할 수 있다.
도 23은 본 발명에 따른 구강관리장치(20)의 동작을 나타내는 제어흐름도이다.
제1파장범위의 제1광을 출력한다(S101). 이미지를 촬상한다(S102). 촬상된 이미지를 사용자단말기(10)와 같은 외부장치로 전송한다(S103).
도 24는 본 발명의 일 실시 예에 따른 구강관리장치(20)의 동작을 나타내는 제어흐름도이다.
사용자단말기(10)로부터 사용자 구강의 구취 가스를 감지하라는 제어신호를 수신한다(S111).
구취 가스 레벨을 감지한다(S112).
감지된 구취 가스 레벨이 기설정된 구취 가스 레벨(3)이상인지를 판단한다(S113).
감지된 구취 가스 레벨이 기설정된 구취 가스 레벨(3)이상이면 사용자 구강의 온도 레벨을 감지한다(S114).
감지된 온도 레벨이 기설정된 레벨(2)이하이면 제1파장범위의 제1광을 출력한다(S115).
이미지를 촬상한다(S116).
감지된 구취 가스 레벨이 기설정된 구취 가스 레벨(3)미만이거나 감지된 온도 레벨이 기설정된 레벨(2)초과이면 감지된 구취 가스 레벨과 감지된 온도 레벨을 사용자단말기(10)로 전송하고 촬상된 이미지도 사용자단말기(10)로 전송한다(S117).
상기 구취 가스 레벨과 온도 레벨을 감지하여 제어부(200)에서 기설정된 레벨과 비교하여 동작을 진행하고 있으나 감지된 구취 가스 레벨과 온도 레벨을 사용자단말기(10)로 전송하고 제어신호를 수신하여 동작을 수행할 수도 있다.
도 25는 본 발명의 일 실시 예에 따른 구강관리장치(20)와 사용자단말기(10)에서 사용자의 구취, 구강온도 및 광에 대한 측정을 이용한 분석정보를 제공하는 제어흐름을 나타내는 제어흐름도이다.
사용자가 숨을 구강관리장치(20)의 가스감지부(244)를 향하여 뱉어서 구취 가스를 측정하여 사용자의 구취 가스를 감지한다(S121).
가스감지부(244)는 감지된 구취 가스 레벨을 제어부(200)로 전송한다(S122).
제어부(200)는 감지된 구취 가스 레벨이 기설정된 구취 가스 레벨(3)이상인지를 판단한다(S123).
감지된 구취 가스 레벨이 기설정된 구취 가스 레벨(3)이상이면 사용자 구강의 온도 레벨을 감지한다(S124).
감지된 온도 레벨이 기설정된 레벨(2)이상이면 제1파장범위의 제1광을 사용자의 구강을 향하여 출력한다. 사용자의 구강에 대한 이미지를 촬상한다. 촬상된 이미지의 형광소실량을 판단한다(S125).
촬상된 이미지의 형광소실량이 5% 이내라면 측정값을 저장한다(S126).
형광소실량이 5% 이내이며 건강치아라고 안내하는 정보를 표시한다(S127). 저장된 기록들을 이용하여 지속적으로 사용자의 치아를 관리할 수 있다.
촬상된 이미지의 형광소실량이 5% 내지 20%(S125)이내인지를 판단한다(S128).
측정된 형광소실량이 5~20%라면 촬상된 이미지의 형광소실량이 5~20%라고 알리면서 양치 후 재측정하라는 안내문구를 표시할 수 있다(S129). 다만, 상기 범위는 일 예일 뿐이며 다른 실시 예 또는 다양한 의도에 따라 다른 범위의 형광 소실 량을 설정하여 안내 문구를 표시하는 것도 가능하다.
측정된 형광소실량이 20%보다 초과라면 촬상된 이미지의 형광소실량이 20%보다 초과하는 것을 알리면서 치태(dental plaque)가 현재 과도한 상태를 알릴 수 있다(S130). 또한, 충치가 위험하므로 병원을 방문하여 치료를 하라는 안내문구를 표시할 수도 있다. 또한, 현 위치, 집, 사무실 등의 위치를 기준으로 주변의 치과병원에 대한 정보를 안내할 수도 있다. 그리고, 측정된 과도한 치태(dental plaque)를 제거할 수 있는 양치질에 대한 정보를 더 안내할 수도 있다.
감지된 가스 레벨이 기설정된 레벨(3)미만이거나 감지된 온도 레벨이 기설정된 레벨(2)미만이면 감지된 구취 가스 레벨과 감지된 온도 레벨을 제공할 수 있으며, 취식물에 의한 구취 가스 레벨의 안내정보를 제공한다(S132). 또한 구취 레벨의 안내정보를 제공할 때 체온 레벨에 대한 체온 정보와 가이드 수준도 제공할 수 있다.
촬상된 이미지의 형광소실량이 5% 이내라면 건강치아라고 안내하는 정보를 표시하면서 취식물과 함께 세균성에 의한 구취 레벨의 안내정보를 제공한다(S131).
도 26은 본 발명의 일 실시 예에 다른 구강관리장치(20)에서 사용자의 구강 체온 레벨을 측정하여 사용자단말기(10)에서 사용자에게 제공되는 안내정보를 나타내는 예시표이다.
사용자의 체온 레벨에 대한 안내정보의 기준을 나타내는 예시표이다. 체온 레벨 1은 체온보다 낮은 온도를 나타내고 있다면 구취감소효과가 있는 것으로 판단하는 정보입니다. 체온 레벨 2는 체온보다 높거나 체온 레벨 1보다 높은 온도로 세균이 번식하기 좋은 환경이라고 판단하여 양치를 권고하는 레벨의 정보입니다. 상기 예시표를 제공하면서 현재 측정된 레벨에 해당하는 부분을 하이라이트하여 표시할 수도 있다. 이에 의해 사용자는 자신의 온도 레벨을 알고 안내정보에 따라 구강관리를 잘할 수 있도록 할 수 있다.
도 27은 본 발명의 일 실시 예에 다른 구강관리장치(20)에서 사용자의 구취 레벨을 측정하여 사용자단말기(10)에서 사용자에게 제공되는 안내정보를 나타내는 예시표이다.
사용자의 가스 레벨에 대한 안내정보의 기준을 나타내는 예시표이다. 구취 레벨 1은 냄새가 거의 없는 것으로 판단하는 정보이다. 구취 레벨 2는 사용자의 입냄새가 약간 있는 것으로 판단하는 레벨의 정보이다. 이에 양치를 권고하는 안내정보를 표시할 수 있다. 구취 레벨 3은 입냄새가 많은 것으로 제1광에 의한 형광소실량을 측정하도록 안내정보를 표시할 수 있다. 상기 예시표를 제공하면서 현재 측정된 레벨에 해당하는 부분을 하이라이트하여 표시할 수도 있다. 이에 의해 사용자는 자신의 온도 레벨을 알고 안내정보에 따라 구강관리를 잘할 수 있도록 할 수 있다.
도 28은 본 발명의 일 실시 예에 다른 사용자단말기(10)와 구강관리장치(20)를 이용하여 사용자의 구취, 구강온도 및 광 측정을 하고 분석정보를 제공하는 것을 나타내는 예시도이다.
도 28의 사용자단말기(10)는 디스플레이부(110)의 제1영역에서 제1광이 출력되도록 할 수도 있으며, 구강관리장치(20)의 광출력부(220)로부터 제1광이 출력되도록 할 수도 있다. 다만, 도 28은 구강관리장치(20)의 광출력부(220)로부터 제1광이 출력되는 실시 예이다. 구강관리장치(20)의 광출력부(220)로부터 사용자 구강의 구석구석으로 제1광이 출력될 수 있고 촬상된 이미지를 분석하여 사용자단말기(10)의 디스플레이부(110)에 분석정보를 표시하면 사용자는 사용자단말기(10)만으로 구강에 대한 분석을 하여 분석정보를 보는 것보다 편리할 수 있다.
사용자단말기(10)와 구강관리장치(20)는 각각의 통신모듈(블루투스, wi-fi)을 이용하여 각종 정보를 송수신할 수 있다. 구강관리장치(20)는 칫솔형상으로 마련될 수 있으며 손잡이 부분에는 광출력부(220), 촬상부(230), 감지부(240)가 마련되어 제1광을 출력할 수 있고, 이미지를 촬상할 수 있으며, 사용자의 구취를 감지할 수 있고, 사용자 구강의 체온을 감지할 수 있다. 이렇게 구강관리장치(20)에서 감지된 정보들은 사용자단말기(10)로 전송할 수도 있다. 사용자단말기(10)에서는 제어신호를 전송하여 제1광을 출력하여 이미지를 촬상하도록 할 수 있고, 구취를 감지하도록 할 수도 있으며, 체온을 감지하도록 할 수도 있다.
도 28에서는 구강관리장치(20)에서 제1광을 사용자의 구강으로 출력하여 촬상된 이미지를 사용자단말기(10)로 전송하여 사용자단말기(10)는 이미지를 분석하여 분석정보를 디스플레이부(110)에 표시한 것을 나타내고 있다.
도 29내지 도 31은 본 발명의 일 실시 예에 다른 구강관리장치(20)의 광출력부(220), 촬상부(230) 및 감지부(240)가 장착위치 및 형태를 나타내는 예시도이다.
도 29의 구강관리장치(20)는 칫솔형상으로 칫솔부분에 앞과 뒤에 광출력부(220), 촬상부(230) 및 감지부(240)가 마련될 수 있는 것을 나타내고 있다.
도 30의 구강관리장치(20)는 광출력부(220), 촬상부(230) 및 감지부(240)가 탈부착될 수 있도록 마련될 수 있는 것을 나타내고 있다. 이렇게 탈부착될 수 있도록 마련됨으로써 평상 시에는 탈착되어 양치질을 할 수 있는 칫솔로써 활용되고 부착되어 구강의 상태를 파악하기 위해서 활용될 될 수 있다.
도 31의 구강관리장치(20)는 사용자단말기(10)에 탈착 및 장착될 수 있는 형상의 펜으로 마련될 수 있다.
도 32는 본 발명의 일 실시 예에 따른 사용자단말기(10)와 구강관리장치(20)를 이용하여 사용자의 구취, 구강온도 및 광에 대한 측정하고 분석정보를 제공하는 것에 대한 신호의 흐름을 나타내는 예시도이다.
사용자단말기(10)는 단독으로 도 25의 동작이 이루어지도록 할 수 있다. 그러나, 도32에서는 사용자단말기(10)와 구강관리장치(20)를 모두 이용하여 도 25의 동작이 이루어지도록 할 수 있는 것을 나타낼 수 있다.
사용자는 사용자의 구강상태를 판단하기 위한 애플리케이션을 사용자단말기(10)의 디스플레이부(110) 화면에서 선택하여 실행한다. 사용자단말기(10)는 애플리케이션이 실행됨에 따라 구강관리장치(20)로 사용자의 구취를 감지하도록 제어신호를 전송한다(④). 사용자는 구강관리장치(20)의 감지부(240)를 향하여 숨을 뱉는다(①). 이에 구강관리장치(20)의 가스감지부(244)는 구취에 대한 가스를 감지한다(②). 구강관리장치(20)의 제어부(200)는 감지된 가스 레벨이 기설정된 레벨 이상인지를 판단할 수도 있으며, 감지된 가스 레벨을 사용자단말기(10)로 전송할 수도 있다(③). 감지된 가스 레벨을 사용자단말기(10)로 전송하면 사용자단말기(10)는 수신된 가스 레벨이 기설정된 레벨 이상인지를 판단하여, 기설정된 레벨 이상이라면 구강관리장치(20)로 구강의 온도를 감지하도록 제어신호를 전송한다(④). 이에 사용자는 구강관리장치(20)의 감지부(240)를 구강에 넣고 구강의 체온을 감지한다. 구강관리장치(20)의 제어부(200)는 감지된 온도 레벨이 기설정된 레벨 이상인지를 판단할 수도 있으며, 감지된 온도 레벨을 사용자단말기(10)로 전송할 수도 있다(③). 감지된 온도 레벨을 사용자단말기(10)로 전송하면 사용자단말기(10)는 수신된 온도 레벨이 기설정된 레벨 이상인지를 판단하여, 기설정된 레벨 이상이라면 구강관리장치(20)로 구강으로 제1광을 출력하여 이미지를 촬상하도록 제어신호를 전송한다(④). 이에 사용자는 구강관리장치(20)의 촬상부(220)를 구강을 향하여 놓고 제1광을 출력하여 이미지를 촬상한다. 촬상된 이미지는 사용자단말기(10)로 전송될 수 있다(③). 사용자단말기(10)는 수신된 이미지를 분석하여 분석정보를 디스플레이부(110)의 화면에 표시할 수 있다.
도 33및 도 34는 측정결과에 대해 양치 전후를 비교하는 애니메이션 또는 사용자 설정 캐릭터를 이용하여 구강 교육 및 코칭을 해주는 예를 나타내었다. 또한 사용자에게 목표 설정 후 도전 및 달성 가이드를 제공하여 구강 교육 및 코칭을 할 수도 있다.
도 35에서는 구강 측정 결과를 분석할 수 있는 서버(30)에 측정 결과를 전송하고 도 33및 도 34와 같은 서비스를 서버(30)를 통해 받을 수 있는 확장 예를 나타내었다.
사용자단말기(10)의 제1영역에서 제1광을 촬상하고, 촬상된 데이터를 서버(30)로 전송하여 서버(30)에서 분석을 하여 분석정보를 사용자단말기(10)로 전송하면 사용자단말기(10)의 디스플레이부(110)에 수신된 분석정보를 표시할 수 있도록 구현할 수도 있다. 구취 및 구강온도에 대하여도 사용자단말기(10)에서 측정을 하고 측정데이터를 서버(30)로 전송하여 서버(30)에서 분석된 분석정보를 사용자단말기(10)는 수신하여 디스플레이부(110)에 표시할 수도 있다.
도 36 및 도 37는 도 33및 도 34에 대해 본 발명의 일 실시 예에 따른 사용자단말기(10)의 제어방법을 나타내는 제어흐름도이다.
사용자는 사용자의 구강상태를 판단하기 위한 애플리케이션을 디스플레이부(110) 화면에서 선택하여 실행한다(S141).
제어부(100)는 사용자의 치태(dental plaque), 우식(dental caries), 구취 및 구강온도 중 적어도 하나를 측정하기 위하여 선택 가능한 UI를 생성하도록 UI생성부(160)를 제어한다(S142).
사용자는 생성된 치태측정모드 UI 및 우식측정모드 UI 중 하나를 선택한다(S143).
제어부(100)는 선택된 모드에 따라 디스플레이부(110) 화면의 제1영역에서 제1파장범위의 제1광이 사용자의 신체에 대하여 출력되도록 디스플레이부(110)를 제어한다(S144).
촬상부(120)는 사용자 신체에 대한 이미지를 촬상한다(S145).
전원공급부(170)는 제1광이 출력되면 반사광 중 제2광은 통과시키고 제2광 이외의 광은 차단하도록 광필터(180)로 전원을 공급한다(S146).
광필터(180)를 이용하여 측정된 데이터는 분석 서버에 전송(S147)되어 분석이 진행된다.
사용자의 신체에 관한 분석정보를 제공하기 위한 적어도 하나의 분석된 값의 범위를 설정한다(S148). 분석된 값의 범위를 설정은 사용자에 의해 또는 의사의 의견을 참조하여 기설정되어 있을 수 있다.
촬상된 이미지 중 제2파장범위의 제2광에 의한 이미지를 분석한다(S149).
제어부(100)는 촬상된 이미지의 크기, 촬상된 제2광에 의한 이미지의 조도 및 휘도 중 적어도 하나에 대응하여 제1영역의 크기, 위치 및 제1광의 휘도 중 적어도 하나를 결정한다(S150).
제어부(100)는 결정된 제1영역의 크기, 위치 및 제1광의 휘도가 되도록 디스플레이부(110)를 제어한다.
제어부(100)는 촬상된 이미지에 대응하여 제2광에 의한 이미지의 색상, 분포, 조도, 형광소실량 및 면적 중 적어도 하나를 분석하여 화면의 제2영역에 사용자의 구강상태정보, 구강관리정보 및 안내정보, 구강 교육 및 코칭 정보, 목표 설정 도전 및 달성 가이드 정보 중 적어도 하나를 표시한다(S151). 이를 테면 사용자의 구강 이미지에 우식(dental caries) 또는 치태(dental plaque), 구취의 정도를 알 수 있도록 색상을 표시하여 제공할 수도 있으며 분석된 정보를 숫자로 표시하여 알릴 수도 있으며 우식, 치태, 구취의 정도에 따라 진동이나 알람을 이용하여 알릴 수도 있으며 이미지에 색상을 표시하면서 분석된 정보를 숫자로 표시하는 표와 함께 제공할 수 있다.
제1광은 사용자단말기(10)에서 출력하지 않고 외부장치에서 제1광이 출력되고 제1파장범위의 제1광이 출력된 영역에 대한 촬상된 이미지를 수신하여 제어흐름이 진행될 수 있다. 상기 제어흐름은 일 실시 예이므로 이에 한정되지 않는다.
상기의 제어흐름에 추가하여 제어부(100)는 사용자의 구강에 대한 가스 레벨을 측정하여 소정 레벨 이상이 되면 온도 레벨을 측정하도록 할 수 있다. 제어부(100)는 사용자의 구강에 대한 온도 레벨을 측정하여 소정 레벨 이하이면 제1광을 출력하여 이미지를 촬상하도록 할 수도 있다. 상기 사용자의 구강에 대한 가스 레벨이 소정 레벨 이하이면 제1광을 출력하여 이미지를 촬상하지 않고 측정된 가스 레벨 즉, 구취 정도를 안내하는 안내정보를 표시하도록 할 수 있다. 상기 사용자의 구강에 대한 온도 레벨이 소정 레벨 이상이면 제1광을 출력하여 이미지를 촬상하지 않고 측정된 온도 레벨를 안내하는 안내정보를 표시하도록 할 수 있다.
도 38은 본 발명의 도 다른 실시 예에 따른 사용자단말기(10)와 서버(30)를 이용하여 치아의 분석정보를 제공하는 동작을 나타내는 예시도이다.
① 사용자단말기(10) 또는 구강관리장치(20)에서 제1광을 사용자의 치아로 출력한다.
② 제1광에 대한 반사광(제2광)을 단말에서 측정한다.
③ 사용자단말기(10)는 이미지, 측정데이터 등을 수집한다. 구강관리장치(20)에서 제1광을 출력하는 경우에는 이미지, 측정데이터 등을 구강관리장치(20)는 사용자단말기(10) 또는 서버(30)로 전송할 수 있다.
④ 사용자단말기(10)는 수집된 이미지, 측정데이터 등을 서버(30)로 전송한다.
⑤ 서버(30)는 구강관리장치(20) 또는 사용자단말기(10)로부터 이미지, 측정데이터 등을 수신한다.
⑥ 서버(30)는 사용자단말기(10)와 같이 이미지, 측정데이터 등에 대하여 색상, 분포, 조도, 형광소실량, 면적, 가스, 온도 등을 분석한다.
⑦ 서버(30)는 구강상태정보, 관리정보, 구강 교육, 코칭 정보, 목표 설정 도전정보, 목표 달성 가이드 정보 및 안내정보 등의 측정 결과를 도출한다.
⑧ 서버(30)는 도출된 측정 결과를 사용자단말기(10)로 전송한다.
⑨ 사용자단말기(10)는 수신된 측정 결과를 디스플레이부(110)에 표시한다.
상기의 사용자단말기(10)에 의하여, 사용자단말기(10) 화면에서 특정범위의 광을 사용자의 신체에 출력하고 반사되는 광에 의한 이미지를 촬상하며 사용자 신체에 대한 분석정보를 사용자단말기 화면에 제공할 수 있으며 사용자가 자신의 사용자단말기(10)를 이용하여 치아의 상태 및 진단정보를 손쉽게 얻을 수 있다.
지금까지 본 발명의 실시 예가 도시되고 설명되었지만, 본 발명이 속하는 기술분야의 통상의 지식을 가진 당업자라면 본 발명의 원칙이나 정신에서 벗어나지 않으면서 실시 예를 변형할 수 있을 것이다. 따라서, 발명의 범위는 지금까지 설명된 실시 예로 정해지는 것이 아니라 첨부된 청구항과 그 균등물에 의해 정해질 것이다.

Claims (14)

  1. 사용자단말기에 있어서,
    영상을 표시할 수 있는 화면을 가지며, 상기 화면의 적어도 일부 영역에서 특정 파장의 광을 출력할 수 있는 디스플레이부와;
    사용자의 신체에 대한 이미지를 촬상할 수 있는 촬상부와;
    상기 화면의 제1영역에서 제1파장범위의 제1광이 출력되도록 상기 디스플레이부를 제어하고, 이미지를 촬상하도록 상기 촬상부를 제어하며, 상기 촬상된 이미지를 분석하고, 상기 화면의 제2영역에 분석정보를 표시하도록 상기 디스플레이부를 제어하는 제어부를 포함하는 사용자단말기.
  2. 제1항에 있어서,
    상기 사용자의 구강에 대한 가스 및 온도 중 적어도 하나를 감지할 수 있는 감지부를 더 포함하고,
    상기 제어부는 상기 감지부로부터 감지된 상기 가스 및 온도 중 적어도 하나의 레벨에 기초하여 상기 제1광이 출력되도록 상기 디스플레이부를 제어하는 사용자단말기.
  3. 제1항에 있어서,
    상기 제어부는 상기 촬상된 이미지 중 제2파장범위의 제2광에 의한 이미지를 분석하는 사용자단말기.
  4. 제3항에 있어서,
    상기 제어부는 상기 촬상된 이미지에 대응하여 상기 제2 광에 의한 이미지의 색상, 분포, 조도, 형광소실량 및 면적 중 적어도 하나를 분석하는 사용자단말기.
  5. 제3항에 있어서,
    전원을 공급할 수 있는 전원공급부와;
    상기 전원공급부로부터 전원을 공급받아 상기 제1광에 의한 반사광 중 상기 제2광은 통과시키고 상기 제2 광 이외의 광은 차단하도록 동작하는 광필터를 더 포함하는 사용자단말기.
  6. 제5항에 있어서,
    상기 제어부는 상기 제1광이 출력되면 상기 광필터의 상기 동작이 개시되도록 상기 전원공급부를 제어하는 사용자단말기.
  7. 제3항에 있어서,
    상기 제어부는 상기 촬상된 이미지의 크기, 상기 촬상된 제2광에 의한 이미지의 조도 및 휘도 중 적어도 하나에 대응하여 상기 제1영역의 크기, 위치 및 상기 제1광의 휘도 중 적어도 하나가 변경되도록 제어하는 사용자단말기.
  8. 제1항에 있어서,
    사용자의 구강상태를 판단하기 위한 애플리케이션을 저장하는 저장부와;
    상기 애플리케이션을 위한 UI를 생성하는 UI생성부를 더 포함하고,
    상기 제어부는 상기 애플리케이션을 실행하며, 상기 사용자의 치태, 우식, 구취 및 구강 온도 중 적어도 하나를 측정하기 위하여 선택 가능한 UI가 생성되도록 상기 UI생성부를 제어하는 사용자단말기.
  9. 사용자단말기의 제어방법에 있어서,
    디스플레이부의 화면의 제1영역에서 제1파장범위의 제1광이 출력되도록 제어하는 단계와;
    이미지를 촬상하는 단계와;
    상기 촬상된 이미지를 분석하는 단계와;
    상기 화면의 제2영역에 분석정보를 표시하는 단계를 포함하는 사용자단말기의 제어방법.
  10. 제9항에 있어서,
    상기 제1광이 출력되도록 제어하는 단계는,
    감지된 사용자의 구강에 대한 가스 및 온도 중 적어도 하나의 레벨에 기초하여 상기 제1광이 출력되도록 제어하는 단계를 포함하는 사용자단말기의 제어방법.
  11. 제9항에 있어서,
    상기 촬상된 이미지를 분석하는 단계는,
    상기 촬상된 이미지 중 제2파장범위의 제2광에 의한 이미지를 분석하는 단계를 포함하는 사용자단말기의 제어방법.
  12. 제11항에 있어서,
    상기 분석정보를 표시하는 단계는,
    상기 촬상된 이미지에 대응하여 상기 제2 광에 의한 이미지의 색상, 분포, 조도, 형광소실량 및 면적 중 적어도 하나를 분석하는 단계를 포함하는 사용자단말기의 제어방법.
  13. 구강관리장치에 있어서,
    사용자단말기와 통신할 수 있는 통신부와;
    사용자의 구강에 대하여 특정 파장의 광을 출력할 수 있는 광출력부와;
    상기 사용자의 구강에 대한 이미지를 촬상할 수 있는 촬상부와;
    제1파장범위의 제1광이 출력되도록 상기 광출력부를 제어하고, 이미지를 촬상하도록 상기 촬상부를 제어하며, 상기 촬상된 이미지를 상기 사용자단말기로 전송하도록 상기 통신부를 제어하는 제어부를 포함하는 구강관리장치.
  14. 구강관리장치의 제어방법에 있어서,
    제1파장범위의 제1광을 출력하는 단계와;
    이미지를 촬상하는 단계와;
    상기 촬상된 이미지를 사용자단말기로 전송하는 단계를 포함하는 구강관리장치의 제어방법.
PCT/KR2016/015442 2016-01-19 2016-12-29 사용자단말기 및 그 제어방법 WO2017126817A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US16/071,174 US20210161365A1 (en) 2016-01-19 2016-12-29 User terminal and control method of the same

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020160006672A KR102492183B1 (ko) 2016-01-19 2016-01-19 사용자단말기 및 그 제어방법
KR10-2016-0006672 2016-01-19

Publications (1)

Publication Number Publication Date
WO2017126817A1 true WO2017126817A1 (ko) 2017-07-27

Family

ID=59362280

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/015442 WO2017126817A1 (ko) 2016-01-19 2016-12-29 사용자단말기 및 그 제어방법

Country Status (3)

Country Link
US (1) US20210161365A1 (ko)
KR (1) KR102492183B1 (ko)
WO (1) WO2017126817A1 (ko)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102218752B1 (ko) * 2018-10-16 2021-02-23 주식회사 큐티티 딥러닝과 빅데이터를 이용한 치주질환관리시스템
JP2020113027A (ja) * 2019-01-11 2020-07-27 東日本電信電話株式会社 臭気分析装置
GB2611627A (en) * 2020-02-26 2023-04-12 Get Grin Inc Systems and methods for remote dental monitoring
KR102499352B1 (ko) * 2021-02-09 2023-02-13 주식회사 핵심가치 조사광의 파장대의 선택적 형성을 통한 구강 컨디션 모니터링 시스템
KR102499368B1 (ko) * 2021-02-09 2023-02-13 주식회사 핵심가치 구강 내 치아의 선택적 모니터링을 통한 치아 관리 시스템

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050066197A (ko) * 2003-12-26 2005-06-30 주식회사 팬택 디지털 카메라 장치를 구비하는 이동 통신 단말기
JP2009205330A (ja) * 2008-02-27 2009-09-10 Nec Corp 携帯電話装置、デンタルケアシステム、デンタルケア方法、デンタルケアプログラムおよびプログラム記録媒体
KR20120069794A (ko) * 2010-12-21 2012-06-29 한국광기술원 치아 모니터링 장치
JP2012147910A (ja) * 2011-01-18 2012-08-09 Olympus Corp 口腔内観察装置
WO2015016377A1 (ja) * 2013-08-02 2015-02-05 Kanbara Masaki 撮影評価・検出ユニット及び遠隔診断システム

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5372502A (en) * 1988-09-02 1994-12-13 Kaltenbach & Voight Gmbh & Co. Optical probe and method for the three-dimensional surveying of teeth
JP2003515417A (ja) * 1999-12-08 2003-05-07 エックス−ライト、インコーポレイテッド 光学計測デバイスおよびそれに関連した方法
CA2459570A1 (en) * 2001-09-05 2003-03-13 Genicon Sciences Corporation Apparatus for reading signals generated from resonance light scattered particle labels
US7830507B2 (en) * 2006-02-13 2010-11-09 Optopo Inc. Spatially patterned substrates for chemical and biological sensing
US7972266B2 (en) * 2007-05-22 2011-07-05 Eastman Kodak Company Image data normalization for a monitoring system
US20150168302A1 (en) * 2011-08-22 2015-06-18 Northeastern University Density analysis of living organisms by magnetic levitation
US8998609B2 (en) * 2012-02-11 2015-04-07 The Board Of Trustees Of The Leland Stanford Jr. University Techniques for standardized imaging of oral cavity
EP2919142B1 (en) * 2014-03-14 2023-02-22 Samsung Electronics Co., Ltd. Electronic apparatus and method for providing health status information
US20170045936A1 (en) * 2014-04-07 2017-02-16 Hewlett-Packard Development Company, L.P. Adjusting Display Brightness Based on User Distance

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050066197A (ko) * 2003-12-26 2005-06-30 주식회사 팬택 디지털 카메라 장치를 구비하는 이동 통신 단말기
JP2009205330A (ja) * 2008-02-27 2009-09-10 Nec Corp 携帯電話装置、デンタルケアシステム、デンタルケア方法、デンタルケアプログラムおよびプログラム記録媒体
KR20120069794A (ko) * 2010-12-21 2012-06-29 한국광기술원 치아 모니터링 장치
JP2012147910A (ja) * 2011-01-18 2012-08-09 Olympus Corp 口腔内観察装置
WO2015016377A1 (ja) * 2013-08-02 2015-02-05 Kanbara Masaki 撮影評価・検出ユニット及び遠隔診断システム

Also Published As

Publication number Publication date
KR20170086974A (ko) 2017-07-27
KR102492183B1 (ko) 2023-01-26
US20210161365A1 (en) 2021-06-03

Similar Documents

Publication Publication Date Title
WO2017126817A1 (ko) 사용자단말기 및 그 제어방법
US6545703B1 (en) Electronic endoscope
WO2013058567A1 (en) X-ray imaging apparatus and method for controlling the same
CN101170939B (zh) 图像处理装置、内窥镜装置以及色彩平衡调节方法
WO2020204531A1 (ko) Tv 제어 시스템 및 이에 적합한 tv 제어 장치
US20070064119A1 (en) Photographing system
JP2005003385A (ja) 画像測定方法、および画像測定装置
WO2019135475A1 (en) Electronic apparatus and control method thereof
WO2020101380A1 (ko) 광학식 피부질환 진단장치
JP6109457B1 (ja) 撮像システムおよび処理装置
JPWO2019093355A1 (ja) 内視鏡システム及びその作動方法
CN107072506A (zh) 摄像装置和处理装置
US20200268231A1 (en) Endoscope system and method of operating the same
KR20160122641A (ko) 화상표시장치 및 그 제어 방법
WO2019164126A1 (ko) 사용자의 심혈관 상태에 대한 정보를 제공하기 위한 전자 장치 및 방법
WO2016129796A1 (ko) 컬러 테이블 생성 장치, 카메라 영상 보정/제어 장치 및 그 방법
WO2020235698A1 (ko) 유기 발광 다이오드 표시 장치
WO2022065641A1 (ko) 조리 장치 및 그 제어 방법
US20180184881A1 (en) Endoscope processor
WO2018074702A1 (en) Electronic apparatus and method for providing blood sugar care service
WO2020105954A1 (ko) 가변파장의 피부 영상 정보를 이용한 휴대용 피부질환 진단장치
WO2022225275A1 (ko) 관심 영역 확인을 위한 의료 영상 제공 방법 및 장치
CN101790037B (zh) 成像设备和成像方法
JP2005532577A (ja) 光学視覚補助器具
JP5325396B2 (ja) 撮像システム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16886660

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16886660

Country of ref document: EP

Kind code of ref document: A1