WO2017135564A1 - 전자장치, 휴대단말기 및 그 제어방법 - Google Patents

전자장치, 휴대단말기 및 그 제어방법 Download PDF

Info

Publication number
WO2017135564A1
WO2017135564A1 PCT/KR2016/014684 KR2016014684W WO2017135564A1 WO 2017135564 A1 WO2017135564 A1 WO 2017135564A1 KR 2016014684 W KR2016014684 W KR 2016014684W WO 2017135564 A1 WO2017135564 A1 WO 2017135564A1
Authority
WO
WIPO (PCT)
Prior art keywords
unit
user
optical head
electronic device
light
Prior art date
Application number
PCT/KR2016/014684
Other languages
English (en)
French (fr)
Inventor
이안토니
호아퀸 산체스두아르테
김영현
조재걸
진건우
최아영
Original Assignee
삼성전자(주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자(주) filed Critical 삼성전자(주)
Priority to US16/075,860 priority Critical patent/US11246489B2/en
Publication of WO2017135564A1 publication Critical patent/WO2017135564A1/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/227—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for ears, i.e. otoscopes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/12—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/12—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes
    • A61B3/1208—Multiple lens hand-held instruments
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/14—Arrangements specially adapted for eye photography
    • A61B3/145—Arrangements specially adapted for eye photography by video means
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6898—Portable consumer electronic devices, e.g. music players, telephones, tablet computers
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2560/00—Constructional details of operational features of apparatus; Accessories for medical measuring apparatus
    • A61B2560/04—Constructional details of apparatus
    • A61B2560/0443—Modular apparatus

Definitions

  • the present invention relates to an electronic device, a portable terminal, and a control method thereof, and more particularly, to an electronic device, a portable terminal, and a control method for capturing an image of a part of a user's body using a plurality of optical heads.
  • diagnostic devices are typically made individually according to each measurement object and the type of the biosignal, and some of them have a function of transmitting measurement results through wired / wireless communication, and received measurements for each diagnostic device.
  • Software exists to store and analyze the results.
  • diagnostic devices that exist separately may not be able to perform a communication function, and even if the communication function may be performed, different software is used for each diagnostic device. Accordingly, it is inconvenient to separately purchase, store and manage the necessary diagnostic devices by type, and to manage the software corresponding to each diagnostic device separately.
  • the object of the present invention is that any one of the plurality of optical head is selectively detachable coupling portion;
  • a communication unit capable of communicating with an external device;
  • An optical module unit configured to transmit light reflected from the user's body and passing through the optical head attached to the coupling unit to the external device;
  • a control unit which controls the communication unit to acquire identification information of the optical head attached to the coupling unit and transmit the identification information of the optical head attached to the coupling unit when one of the plurality of optical heads is attached to the coupling unit.
  • control unit performs communication pairing with the external device through the communication unit when the electronic device and the external device are within a preset range, and when the communication pairing is completed, the optical unit attached to the coupling unit.
  • the identification information of the head may be transmitted to the external device through the communication unit.
  • the apparatus further includes a display unit, and the controller may control the display unit to display information regarding a current state of the electronic device.
  • the information regarding the current state of the electronic device includes at least one of whether information is in communication with the external device and information about an optical head attached to the coupling unit.
  • the coupling unit includes a connection terminal for connecting with the attached optical head, and the control unit may receive the identification information from the attached optical head through the connection terminal.
  • the optical module unit further comprises a lens unit including a plurality of lenses for transmitting the incident light, and a lens control unit for adjusting the focal length of the lens unit, the control unit from the external device
  • the lens controller may be controlled to adjust the focal length of the lens unit based on the received control signal.
  • the focal length of the lens unit may be adjusted by at least one of changing the distance between the plurality of lenses and changing at least one of thickness, size, and refractive index of the lens in use.
  • the optical module unit may further include a light source unit generating light and outputting the light through the attached optical head, and the controller may control the light source unit to generate and provide the light.
  • the controller may control the light source unit to adjust at least one of the brightness and chromaticity of the generated light.
  • the controller may control the light source unit based on a control signal received from the external device.
  • the optical module unit further includes a pattern generation unit that applies a pattern to light generated from the light source unit, and the controller may control the pattern generation unit to apply a pattern to the light.
  • An object of the present invention is a control method of an electronic device, wherein any one of a plurality of optical heads includes a detachable coupling portion, comprising: attaching one of the plurality of optical heads to the coupling portion; Communicating with an external device; Obtaining identification information of the attached optical head and transmitting the identification information to the external device; And transmitting the light reflected from the user's body and passing through the attached optical head to the external device.
  • the communicating with the external device may include: performing communication pairing with the external device through the communication unit when the electronic device and the external device are adjacent to each other within a preset range; And when the communication pairing is completed, transmitting identification information of the optical head attached to the coupling unit to the external device through the communication unit.
  • information on the current state of the electronic device may be displayed on the display unit.
  • the information about the current state of the electronic device may include at least one of information about whether the external device is communicating with the external device and an optical head attached to the coupling unit.
  • the step of transmitting the light reflected from the body part of the user to the external device the step of transmitting the light incident through the lens unit including a plurality of lenses; And adjusting a focal length of the lens unit based on a control signal received from the external device.
  • adjusting the focal length of the lens unit wherein the focal length of the lens unit is at least one of changing the distance between the plurality of lenses, and at least one of the thickness, size, and refractive index of the lens in use is different. Can be adjusted by one.
  • the method may further include generating light and outputting the light through the attached optical head.
  • generating and outputting the light through the attached optical head may include adjusting at least one of brightness and chromaticity of the generated light.
  • generating the light and outputting the light through the attached optical head may include generating the light based on a control signal received from the external device.
  • generating and outputting light through the attached optical head may further include applying a pattern to the generated light.
  • the object of the present invention is a portable terminal, comprising: a display unit for outputting an image; A communication unit capable of communicating with a plurality of optical heads and a detachable imaging module and other external devices; A camera unit for photographing a part of the user's body; And controlling the display unit to provide a user interface (UI) including a plurality of diagnostic items, selection of a user through the user interface, and identification of an optical head attached to the optical module received from the optical module. Controlling the communication unit to transmit a first control signal to the optical module to photograph the body part of the user based on the information, and based on the light reflected from the user body part transmitted from the optical module. It may be achieved by a mobile terminal including a control unit for photographing a body part and controlling the display unit to display the photographed image.
  • UI user interface
  • Controlling the communication unit to transmit a first control signal to the optical module to photograph the body part of the user based on the information, and based on the light reflected from the user body part transmitted from the
  • the control unit selects the necessary optical head.
  • the display can be controlled to display information about the required optical head for attachment to an optical module.
  • the information about the required optical head may include at least one of a manufacturer, a serial number and an appearance of the required optical head.
  • the controller may control the communication unit to transmit the captured image to an external device.
  • the controller may control the display unit to provide the user with information about the second control signal.
  • the necessary optical The display can be controlled to display information about the required optical head to attach a head to the optical module.
  • control unit may provide guide information so that the user correctly photographs the user's body part based on the diagnostic item selected by the user.
  • the guide information may include information about a distance, a focus and an angle with respect to a part of the user's body.
  • the controller is configured to display the pre-photographed image in a blur based on the selected diagnostic item, and to display in real time the image of the body part of the user to be photographed together with the blurred image in advance.
  • the guide device may control the display device, and the guide information may include information about a degree of matching by comparing the blurred photographed image with the image of a part of the user's body displayed in real time.
  • the controller may analyze the photographed image and provide diagnostic information based on the analysis.
  • the diagnostic information may include information about the body part of the user.
  • the object of the present invention is to selectively detachable coupling portion and one of the plurality of optical head; A communication unit capable of communicating with an external device; A camera unit for photographing a part of the user's body; And when one of the plurality of optical heads is attached to the coupling part, controls the communication unit to acquire identification information of the optical head attached to the coupling part and transmit the identification information to the external device, and to the control command received from the external device.
  • an electronic device including a control unit configured to control the camera unit to photograph a body part of the user based on the attached optical head and to control the communication unit to transmit the image generated by the photographing to the external device based on the attached optical head. Can be.
  • one of the various optical heads may be selectively attached to the electronic device to photograph a part of the user's body, and the captured image itself or an image signal converted into an electrical signal may be applied to the display device. It is possible to reduce the size and cost of the diagnostic apparatus. In addition, it is possible to transfer the image taken to the hospital through the network without going directly to the hospital, thereby improving user convenience.
  • FIG. 1 illustrates an example of use of an electronic device and a portable terminal attachable to a plurality of optical heads according to an embodiment of the present invention.
  • FIG. 2 illustrates an example of use of an electronic device and a portable terminal to which a plurality of optical heads can be attached according to an embodiment of the present invention.
  • FIG. 3 is a block diagram of an electronic device according to an embodiment of the present invention.
  • FIG. 4 is a block diagram of a portable terminal according to an embodiment of the present invention.
  • FIG. 5 shows a block diagram of an optical head according to an embodiment of the present invention.
  • FIG. 6 is a block diagram illustrating the operation of a portable terminal, an electronic device, and an optical head.
  • FIG. 7 illustrates an example of use of a portable terminal, an electronic device, and an optical head according to an embodiment of the present invention.
  • FIG. 8 illustrates an example of use of a portable terminal, an electronic device, and an optical head according to an embodiment of the present invention.
  • FIG. 9 illustrates an example of use of a portable terminal, an electronic device, and an optical head according to an embodiment of the present invention.
  • FIG. 10 illustrates a block diagram of an optical module of an electronic device according to an embodiment of the present invention.
  • FIG 11 shows an example of a lens unit according to an embodiment of the present invention.
  • FIG. 12 shows an example of a lens unit according to another embodiment of the present invention.
  • FIG 13 shows an example of a lens unit according to another embodiment of the present invention.
  • FIG 14 illustrates an example of an electronic device according to an embodiment of the present disclosure.
  • FIG. 15 illustrates an example of use of a portable terminal, an electronic device, and an optical head according to an embodiment of the present invention.
  • FIG. 16 illustrates an example of use of a portable terminal, an electronic device, and an optical head according to an embodiment of the present invention.
  • FIG. 17 illustrates an example of use of a portable terminal, an electronic device, and an optical head according to an embodiment of the present invention.
  • FIG 18 illustrates an example of providing an image and information of an eye photographed by photographing an eyeball according to an embodiment of the present invention.
  • FIG 19 illustrates an example of providing an image and information of an eye photographed by photographing an eyeball according to an embodiment of the present invention.
  • FIG. 20 illustrates an example of providing an image and information of an ear photographed by photographing an ear according to an embodiment of the present invention.
  • 21 illustrates an example of photographing a wound of a user's skin according to an embodiment of the present invention.
  • FIG. 22 illustrates an example of displaying a wound of a photographed user's skin, according to an exemplary embodiment.
  • FIG. 23 illustrates an example of a user interface provided through a display unit according to an embodiment of the present invention.
  • FIG. 24 illustrates an example of a user interface provided through a display unit according to an embodiment of the present invention.
  • 25 illustrates an example of a user interface provided through a display unit according to an embodiment of the present invention.
  • 26 illustrates an example of a user interface provided through a display unit according to an embodiment of the present invention.
  • FIG 27 shows an example of providing the progress of photographing according to an embodiment of the present invention.
  • 29 illustrates an example of use of a mobile terminal and an electronic device according to an embodiment of the present invention.
  • FIG. 30 illustrates a UI in which a diagnosis request is transmitted from the outside according to an embodiment of the present invention.
  • 31 illustrates an example of a mobile terminal and an electronic device according to another embodiment of the present invention.
  • 32 illustrates an example of a mobile terminal and an electronic device according to another embodiment of the present invention.
  • 33 is a control flowchart of an electronic device according to an embodiment of the present invention.
  • 35 is a flowchart illustrating a control of a portable terminal when a diagnostic request is received from the outside according to an embodiment of the present invention.
  • 36 illustrates an example in which the portable terminal and the electronic device warn when a wrong optical head is mounted, according to an embodiment of the present invention.
  • FIG. 37 illustrates an example in which the portable terminal and the electronic device warn when a wrong optical head is mounted, according to an embodiment of the present invention.
  • 38 illustrates an example in which the portable terminal provides guide information when photographing a body in an incorrect posture according to an embodiment of the present invention.
  • FIG. 39 illustrates an example in which the portable terminal guides a correct body part when photographing an incorrect body part according to an embodiment of the present invention.
  • 'unit' refers to a hardware component such as a software FPGA or an ASIC, and 'unit' may be configured to perform certain roles. But wealth is not limited to software or hardware.
  • the 'unit' may be configured to be in an addressable storage medium and may be configured to play one or more processors.
  • a 'part' may include components such as software components, object-oriented software components, class components, and task components, processes, functions, properties, procedures, Subroutines, segments of program code, drivers, firmware, microcode, circuits, data, databases, data structures, tables, arrays and variables.
  • the functionality provided within the components and 'parts' may be combined into a smaller number of components and 'parts' or further separated into additional components and 'parts'.
  • the display device in the present specification is wirelessly supplied with power from an external device and is configured to provide an image based on the received image signal.
  • 1 and 2 illustrate an example of use of an electronic device and a portable terminal to which a plurality of optical heads can be attached according to an embodiment of the present invention.
  • the mobile terminal 2 is an electronic device that a user can carry, such as a smart phone and a PDA, and may be configured to be attached to the case 10.
  • the case 10 is for protecting the mobile terminal 2 from external shocks.
  • the case 10 of the present embodiment may be configured to be coupled to the electronic device 1 and supplies power to the electronic device 1.
  • a signal line 11 connecting the portable terminal 2 and the connection terminals of the electronic device 1 may be embedded.
  • the mobile terminal 2 photographs a part of the user's body using the electronic device 1 coupled with one of the plurality of optical heads 100a, 100b, 100c, and displays the captured image to the user through the display unit 101. It can be configured to provide.
  • the electronic device 1 is configured such that one of the plurality of optical heads 100a, 100b, 100c can be combined.
  • the electronic device 1 may be configured to provide the identification information of the attached optical heads 100a, 100b, 100c to the mobile terminal 2 through a signal line or wireless communication connected to the mobile terminal 2.
  • the mobile terminal 2 may provide the user with information regarding the type of the optical heads 100a, 100b, 100c attached through the received identification information.
  • the portable terminal 2 When a user who has touched information of the type of the attached optical heads 100a, 100b, and 100c operates the user interface of the portable terminal 2 to photograph the user's body, the light reflected from the user's body is reflected by the optical heads 100a, 100b, The electronic device 1 is incident on the electronic device 1 through 100c, and the electronic device 1 provides the incident light to the mobile terminal 2.
  • the camera unit of the portable terminal 2 generates an image by converting the light transmitted from the electronic device 1, and the portable terminal 2 may display the generated image on the display 101.
  • the electronic device 1 may also be configured to generate and output light based on identification information received from the optical heads 100a, 100b, 100c attached with the light source unit or control signals received from the portable terminal 2. Can be.
  • the electronic device 1 has an optical head 100c corresponding to the otoscope, and the optical head 100c corresponding to the otoscope provided from the electronic device 1 is attached to the engaging portion to photograph the ear.
  • the mobile terminal 2 having received the identification information may transmit a control signal to the electronic device 1 to output light.
  • the electronic device 1 is configured to output the light generated by the light source to the user's ear through the attached optical head 100c and to provide the reflected light incident through the optical head 100c to the mobile terminal 2. Can be.
  • the plurality of optical heads 100a, 100b, and 100c may be variously configured to photograph a user's body, and are configured to be attached to the electronic device 1.
  • the plurality of optical heads 100a, 100b, 100c may include an optical head 100c corresponding to an otoscope, an optical head 100b corresponding to an otoscope, and an optical head 100a corresponding to an ophthalmoscope.
  • the plurality of optical heads 100a, 100b, and 100c are not limited to the drawings and the above-described examples, and may be variously implemented to measure a body part of a user.
  • FIG. 3 is a block diagram of an electronic device according to an embodiment of the present invention.
  • the electronic device 1 includes a coupling unit 301, a communication unit 303, an optical module 300, and a control unit 305. Specifically, the electronic device 1 performs a common operation regardless of the type of the optical heads 100a, 100b, and 100c coupled based on a control signal transmitted from an external device, that is, the portable terminal 2, and the optical head. It supplies power to or photographs an image based on the reflected light received from the optical heads 100a, 100b, and 100c, and transmits the image to the external device 2.
  • the electronic device 1 may be attached to or detached from at least one of the plurality of optical heads 100a, 100b, and 100c, and may be implemented in various forms.
  • the coupling unit 301 may be selectively detachable from at least one of the plurality of optical heads 100a, 100b, and 100c having different curvatures, thicknesses, and distances between the lenses.
  • the coupling part 301 is configured in a structure that is physically engaged with the coupling part provided in the optical head (100a, 100b, 100c), the coupling part 301 is coupled optical head (100a, 100b, 100c) ) May include a connection terminal for transmitting and receiving power or data.
  • the optical heads 100a, 100b, and 100c and the electronic device 1 may be coupled to each other by being engaged with each other by a coupling part provided in the camera lens and a coupling part provided in the camera body.
  • the coupling part 301 may be coupled not only as a physical structure with the coupling part provided in the optical heads 100a, 100b, and 100c but also by a fastening method through a magnetic force using a magnetic material, and is not limited thereto. It can be implemented in various ways.
  • each of the plurality of optical heads 100a, 100b and 100c may be configured to have a different structure according to the body of the user to be measured.
  • the optical heads 100a, 100b, and 100c may be implemented in different forms according to the user's body to be measured, and may include different sensor units according to the body.
  • the distal disposable specule is narrower than the other optical heads 100a and 100b, and the front end opening for taking an image is smaller. (disposable specule) can be configured to be coated.
  • the optical head 100b corresponding to the ophthalmoscope for examining an eye it is comprised in order to observe a fundus, a vitreous body, a lens, etc. More specifically, the optical head 100b corresponding to the ophthalmoscope may be configured to irradiate the fundus with light provided from the electronic device 1 and to receive light reflected from the fundus.
  • the optical head 100a corresponding to the speculum for inspecting the skin may be configured to measure dermatitis or skin cancer.
  • the optical head 100a corresponding to the speculum is configured to enlarge the pigmented lesion of the skin at least 5 times and up to 20 times by contacting the skin or spaced at a certain distance from the skin, and to perform discrimination on it.
  • Pigmented lesions of the photographed skin are transmitted to the mobile terminal 2, and the mobile terminal 2 may be configured to perform analysis such as measuring the size of the pigmented lesion to provide related information to the user.
  • each of the plurality of optical heads 100a, 100b, and 100c may further include a sensor unit capable of measuring temperature and humidity of a body part, and measures a biosignal such as an EEG, an electrocardiogram, and a heart rate of a user, depending on the implementation. It may be implemented to further include a sensor.
  • the optical module 300 is configured to transmit the light passing through the optical heads 100a, 100b and 100c reflected and attached to the user's body to the mobile terminal 2.
  • the optical module 300 may include a plurality of lens units for transmitting incident light, and may further include a light source unit for generating light based on a control signal transmitted from the mobile terminal 2.
  • the output light may further include a splitter unit for outputting the output light and transmitting the light incident from the optical heads 100a, 100b and 100c to the mobile terminal 2.
  • the communication unit 303 may communicate with an external device.
  • the external device refers to a portable terminal 2 that is an electronic device that generates an image by receiving light incident through the optical module 300 and displays, stores, and analyzes the generated image.
  • the portable terminal 2 may be implemented as a complex electronic device including an image capturing function such as a smartphone, a PDA, a tablet, a laptop, and a digital camera.
  • the communication unit 303 may be connected to other external devices or networks, and a plurality of connection ports according to various standards, such as high definition multimedia interface (HDMI) and universal serial bus (USB), may be provided.
  • the communication unit 303 may perform wired communication with a plurality of servers through a wired local area network (LAN).
  • the communication performed by the communication unit 303 may include wireless communication.
  • the communication unit 303 may include an RF circuit for transmitting and receiving an RF (radio frequency) signal to perform a wireless communication, Wi-fi, Bluetooth, BLE, ANT, WiMAx, Z-Wave, Zigbee, UWM (Ultra-Wide Band), Wireless USB, WirelessHD, WirelessHART, NFC (Near Field Communication) may be configured to perform one or more of the communication.
  • RF radio frequency
  • the communication unit 303 may be configured to receive identification information from the optical heads 100a, 100b, and 100c attached through the coupling unit 301, and provide the received identification information to the mobile terminal 2. It may be configured to receive a control signal from (2).
  • the communication unit 303 may include a power transmission and reception terminal to receive power from the mobile terminal 2.
  • the power transmitter and receiver may be configured to receive power by wire through a signal line connected from the power transmitter and receiver of the portable terminal 2, but may be configured to wirelessly receive power from the portable terminal 2 according to implementation.
  • the power transmitter / receiver uses a current having alternating current with the coil to wirelessly transmit and receive power by a magnetic induction method in which current is induced on the receiver side by a change in the magnetic field induced by a change in the current flowing through the transmitter side coil. It may be configured to further include a conversion unit for converting to direct current, and may be configured to wirelessly receive power by a magnetic resonance method in which electric current is induced by electromagnetic resonance generated by a wireless power signal to transfer power. .
  • the electronic device 1 may also be configured to convert light energy emitted from the flash light into electrical energy through a photovoltaic cell for use.
  • the electronic device 1 may further include a user command input unit.
  • the user command input unit receives a user's command and transfers the received command to the controller 305, and the controller 305 controls the operation of the electronic device 1 based on the user's control through the user command input unit.
  • the user command input unit may be provided outside the electronic device 1 such as a key button and may be implemented as a touch screen of the display unit.
  • the user forms and modifies the pattern for assisting the level, color adjustment, and inspection of the light output output through the optical head 100 of the optical module 300 through the user command input unit of the electronic device 1. It may be possible to perform the focus adjustment of the captured image.
  • the controller 305 is configured to control the overall operation of the electronic device 1. Specifically, the controller 305 obtains identification information of the optical heads 100a, 100b, 100c attached through the coupling unit 301, and provides the communication unit 303 to provide the obtained information to the mobile terminal 2. To control. In addition, the controller 305 may control the optical module 300 to generate and output light based on identification information of the attached optical heads 100a, 100b and 100c or a control signal provided from the portable terminal 2. Can be.
  • the attached optical heads 100a, 100b, and 100c are the optical heads 100c corresponding to the otoscope
  • the light is directly output according to a user's intention to measure the ear, and the reflected light is transferred to the portable terminal ( 2) or, when a control signal for outputting light is received from the portable terminal 2, it may be configured to output light thereafter.
  • information on the magnification of the captured image is transmitted using the distance between lenses used in the optical head 100c corresponding to the corresponding otoscope, and may be used to calculate the size of the captured image.
  • the controller 305 may also adjust the focal length of the optical module 300 based on a control signal received from the optical heads 100a, 100b, 100c or the portable terminal 2 attached thereto. Since each of the plurality of optical heads 100a, 100b, and 100c includes different lenses and focal lengths depending on their use, the optical heads 100a, 100b, and 100c may provide light to the optical heads 100a, 100b, and 100c, or may provide optical heads 100a and 100b. , Optical module 300 that receives light from 100c also needs to be adjusted differently according to the attached optical heads 100a, 100b, and 100c.
  • the user when the user manipulates the mobile terminal 2 to further enlarge or reduce the image or inputs a user command input unit of the electronic device 1, the user may be configured to adjust the focal length based on this.
  • the communication unit 303 may be controlled to transmit the information about the focal length and the magnification to the mobile terminal 2.
  • the electronic device 1 may further include a sensor unit configured to sense a distance and an angle from the user's body to the electronic device 1, and the controller 305 may provide information related to the distance and angle sensed from the sensor unit at the time of shooting. (2) can be provided.
  • FIG. 4 is a block diagram of a portable terminal according to an embodiment of the present invention.
  • the mobile terminal 2 may communicate with the outside and may be configured to display information received through communication to the user.
  • the mobile terminal 2 may include a display 101, a camera 200, a communicator 401, and a controller 400.
  • the display 101 is configured to display an image under the control of the controller 400.
  • the display unit 101 may include a display panel on which an image is displayed and a backlight unit, which is a light source unit for supplying light to the display panel, and further includes a driving unit for driving by supplying power to the display panel and the light source unit. It may include.
  • the display panel is composed of a non-light emitting device such as an LCD, an image is displayed only when light is supplied from the light source unit, and when the display panel is configured as a self emitting device, the driving circuit directly applies an electrode to the self emitting device of the display panel. It can be configured to.
  • the mobile terminal 2 may further include a speaker for outputting sound or voice. The speaker may be provided in the portable terminal 2 or implemented as an external device connected through wired / wireless communication.
  • the display unit 101 also includes a touch screen for detecting a user's touch input input to the display panel, and is configured to provide a menu item corresponding to various functions provided to the user to a user interface (UI). do.
  • the mobile terminal 2 may be configured to provide a function corresponding to a user's touch input input to the UI. Various functions corresponding to the touch input through the UI provided by the mobile terminal 2 and the UI of the user will be described later.
  • the camera unit 200 is configured to transmit the captured image to the display unit 101.
  • the camera unit 200 may include an optical module including a lens and an image processing unit for detecting incident light and converting an image of a subject formed on the lens into an image that is an electrical signal.
  • the image processor may include a charged coupled device (CCD).
  • the communication unit 401 may communicate with an external device.
  • the external device connects the optical head 100 from the user's body to the counterpart portable terminal 2, other communicable computing device, server, and the portable terminal 2 that make a phone call with the portable terminal 2.
  • An electronic device 1 or the like for providing the light reflected therethrough.
  • the communication unit 401 may further include an antenna for receiving an image signal from the outside and a tuner, demodulator, etc. for processing the signal received through the antenna and providing image information.
  • the communication unit 401 may be configured to receive at least one or more of a terrestrial broadcast signal, satellite signal, and cable signal.
  • the communication unit 401 may include digital multimedia broadcasting-terrestrial (DMB-T), digital multimedia broadcasting-satelite (DMB-S), media forward link only (MediaFLO), digital video broadcast-handheld (DVB-H), and ISDB-T.
  • DMB-T digital multimedia broadcasting-terrestrial
  • DMB-S digital multimedia broadcasting-satelite
  • MediaFLO media forward link only
  • DVD-H digital video broadcast-handheld
  • ISDB-T ISDB-T
  • a broadcast signal may be received using a digital broadcasting system such as (Integrated Services Digital Broadcast-Terrestirial).
  • the received broadcast signal is processed to display an included image and is provided to the display unit 101, and the display unit 101 may be configured to display an image based on the processed image signal.
  • the communication unit 401 may be configured to receive direct data such as identification information of the optical head 100 attached to the electronic device 1 from the electronic device 1 and provide a control signal to the electronic device 1, Like the communication unit of the electronic device 1, a plurality of connection ports according to various standards such as HDMI and USB may be provided, and wired communication may be performed with a plurality of servers through a wired LAN.
  • the communication unit 401 may include an RF circuit for transmitting and receiving RF signals to perform wireless communication, Wi-fi, Bluetooth, BLE, ANT, WiMAx, Z-Wave, Zigbee (Uigtra), UWM (Ultra) It may be configured to perform one or more of a wide band (Wide Band), Wireless USB, WirelessHD, WirelessHART, Near Field Communication (NFC), RFID.
  • RF circuit for transmitting and receiving RF signals to perform wireless communication, Wi-fi, Bluetooth, BLE, ANT, WiMAx, Z-Wave, Zigbee (Uigtra), UWM (Ultra) It may be configured to perform one or more of a wide band (Wide Band), Wireless USB, WirelessHD, WirelessHART, Near Field Communication (NFC), RFID.
  • the communication unit 401 may also include a power transmission and reception terminal for transmitting power to the combined electronic device 1, and the power transmission and reception terminal may be configured to transmit power by wire or wirelessly.
  • the controller 400 may be configured to control the overall operation of the mobile terminal 2 according to the present invention. More specifically, the control unit 400 communicates with external devices by the mobile terminal 2, provides the user with information based on the received signals and data, and provides the mobile terminal 2 to the user selected based on the user's input. It is configured to control each configuration of the mobile terminal 2 to provide at least one of a plurality of functions that can be provided.
  • the plurality of functions that the mobile terminal 2 may provide may include a health diagnosis service that may measure a health state of a user and provide information based on the measured health state.
  • the health diagnosis service refers to a service that photographs a part of a user's body and analyzes the photographed image to provide diagnosis information to the user.
  • the controller 400 may provide the user with guide information for capturing to photograph the body part of the user, transmit the image to an external display device in order to enlarge and display the captured image, and to the outside such as a hospital. The image can be sent so that the user can receive telemedicine diagnostic services.
  • the portable terminal 2 is configured to photograph a part of the user's body through the camera unit 200, and predicts a disease in advance or analyzes the degree of recovery through the photographed image. Can be provided to
  • the dermatitis or skin cancer it is possible to predict the dermatitis or skin cancer to the user by checking the change in the size of the spot on the user's skin, to determine whether otitis media by using the image in the ear, and whether the wound or the like on the skin healed Can be analyzed through.
  • the controller 400 analyzes the image directly to provide relevant information to the user, delivers the captured image to an external display device to display a larger image, or performs a series of operations for providing the image through a network, such as a hospital. Can be configured.
  • the medical examination service selects the user to start the medical examination service among a plurality of functions, or the user attaches any one of the plurality of optical heads 100a, 100b, 100c to the electronic device 1, or from outside the hospital or the like. It may be initiated in response to the photographing request being received.
  • the controller 400 When the medical examination service is started in response to a user's selection or a photographing request from the outside, the controller 400 must maintain the optical head 100 to be attached, the user's body to be photographed, and the user's body and the portable terminal 2.
  • Guide information including distance, angle, and the like, may be provided to the user.
  • the guide information may be provided again to attach the optical head 100 suitable for the user.
  • the mobile terminal 2 when the user attaches the optical head 100 to the electronic device 1, information about the kind of the optical head 100 and the electronic device 1 is transmitted to the mobile terminal 2, and the It can be configured to automatically load the control program to increase user convenience. That is, when the optical terminal 100c corresponding to the otoscope is attached to the electronic device 1, the portable terminal 2 executes a control program for inspecting the ear, and the UI for examining the ear of the user such as guide information. It may be configured to provide to the user through the display 101.
  • the portable terminal 2 may load another control program according to the type of the attached electronic device 1. Even if the same optical head 100 is used, different services may be provided to the user according to the type of the electronic device 1 being used, as well as the type of the optical head 100 as well as the electronics attached to the mobile terminal 2. Information of the device 1 is also transferred to the mobile terminal 2 so that the associated control program is loaded. For example, when the optical head 100c corresponding to the otoscope is attached to the general electronic device 1, only a control program for capturing an inner ear / middle ear image is loaded, but the body temperature sensor or the like is added to the electronic device 1.
  • a control program for measuring body temperature in addition to capturing an image and providing information about the measured body temperature to a user is loaded so that the user does not have to find a program for properly using the electronic device 1.
  • the attached electronic device 1 and the optical head 100 can intuitively know what function they can perform, thereby improving user convenience and usability.
  • the controller 400 may be configured to notify the user that the medical examination service has been started and to provide guide information for photographing the body, similarly to the selection made by the user through the UI.
  • the controller 400 may also provide guide information for the user to correctly photograph the body.
  • the guide information may also include information about a distance from a part of the user's body to be photographed and an angle when the portable terminal 2 is photographed.
  • photographing at a position similar to the last photographing may correctly analyze the spot or wound size change of the skin.
  • the controller 400 may provide a warning sound to the user when the mobile device 2 is positioned at the same distance and angle as the last photographing by referring to the guide information, and when the mobile device 2 is positioned at the wrong location. You can control the speaker.
  • the controller 400 may superimpose an image obtained in the last photographing on the display 101 to superimpose an image obtained during the last photographing so that the user photographs the correct position.
  • the controller 400 may also control the display unit 101 to display the photographed user's body image, and may provide the captured image to an external display device or transmit the captured image to the outside of a hospital or the like through the network. There is a bar.
  • FIG. 5 shows a block diagram of an optical head according to an embodiment of the present invention.
  • the optical head 100 is configured to be coupled to the electronic device 1 by having different external shapes as necessary.
  • the optical head 100 may further include a lens unit 500 and a coupling unit 501.
  • the optical head 100 may be driven by receiving power from the electronic device 1 through the coupling unit 501, and configured to transmit light reflected from the user's body to the electronic device 1.
  • the optical head 100 may further include a storage unit 505 for storing identification information of each optical head 100 and a sensor unit 503 for sensing biometric information of a user's body.
  • the lens unit 500 is configured to irradiate light output from the electronic device 1 to the user's body and to provide the electronic device 1 with the light reflected from the user's body and incident.
  • the lens unit 500 may include a plurality of lenses, and the focal length should be adjusted differently according to the type of the optical head 100, and thus, the size, the distance between the lenses, the thickness of the lens, the refractive index, and the optical for each of the optical heads 100.
  • the coating, polarization axis, etc. may be different.
  • the coupling part 501 is configured to detachably attach the optical head 100 to the electronic device 1.
  • the coupling part 100 has a structure in which the coupling part 100 is physically engaged with the coupling part 501 of the electronic device 1, and may include a connection terminal for providing identification information of the optical head 100 to the electronic device 1. have.
  • the coupling unit 501 may be coupled to the coupling unit 501 of the electronic device 1 by a magnetic force using a magnetic body.
  • the storage unit 505 may be configured to store identification information of the optical head 100.
  • the storage unit 505 should retain data even when the power supplied to the optical head 100 is cut off, and may be provided as a writable nonvolatile memory (Writable Rom) to reflect the change. That is, the storage unit may be provided as one of a flash memory, an EPROM, and an EEPROM.
  • the storage unit 505 may include information about the configuration of the lens unit 500, such as the type of the optical head 100, the manufacturer, the serial number, the optical filter information, the polarization axis information, and the refractive index and the magnification of the lens. have.
  • the sensor unit 503 may be configured to measure a biosignal of a user. More specifically, in the case of the optical head 100 corresponding to the otoscope that enters the user's ear, the sensor unit 503 may be configured to obtain a user brain waves, that is, an electroencephalogram (EGE), an electrooculogram (EOG), or the like. . In addition, the sensor unit 503 may be configured to acquire various information such as temperature and humidity of the user's body in contact. The information obtained by sensing the user's body in the sensor unit 503 may be stored in the storage unit 505 or transferred to the electronic device 1 through the coupling unit 501. The information transmitted to the electronic device 1 is transferred to the mobile terminal 2. At this time, it may be stored encrypted to protect sensitive medical information.
  • EGE electroencephalogram
  • EOG electrooculogram
  • FIG. 6 is a block diagram illustrating the operation of a portable terminal, an electronic device, and an optical head.
  • the portable terminal 2 and the electronic device 1 are coupled, and the electronic device 1 is driven by the electric power transmitted from the portable terminal 2.
  • the coupling part 501 of the optical head 100 is attached to the coupling part 301 of the electronic device 1, the electronic device 1 receives identification information from the optical head 100, and receives the received identification information. Transfer to portable terminal (2).
  • the mobile terminal 2 may provide the user with guide information for capturing a part of the body through the display 101 based on the identification information of the optical head 100 attached to the electronic device 1.
  • the guide information includes information on the attached optical head 100 and information for causing a user to take an image, such as a posture to photograph a body part, a distance and an angle between the body part and the electronic device 1.
  • the angle of the portable terminal 2 is sensed using the acceleration, gyro, and geomagnetic sensors installed in the portable terminal 2, and the related information is compared with the angle of the portable terminal 2 in the previous shooting. Can provide.
  • the electronic device 1 transmits the light reflected from the user's body through the optical head 100 to the camera unit 200 of the mobile terminal 2, and the camera unit 200 transmits the received light with an electrical signal.
  • the image is converted into an image and transmitted to the display unit 101.
  • the mobile terminal 2 may provide the user with the image captured by the display unit 101 and the analyzed information, and may transmit the captured image to an external device.
  • the electronic device 1 may generate and output light based on a control signal received from the portable terminal 2.
  • the output light is irradiated to the user's body through the optical head 100, the light reflected from the user's body is incident to the electronic device 1 through the optical head 100, the electronic device 1 is incident It is configured to provide the reflected light to the camera unit 200 of the mobile terminal (2).
  • a specific pattern may be included in the output light 700, and the mobile terminal 2 may collect three-dimensional information obtained by photographing the curvature of the skin in three dimensions using a specific pattern included in the light 700. Can be.
  • the mobile terminal 2 measures height and width of pigmented lesions such as wound healing, acne, and spots using a specific pattern, and analyzes the measured 3D information to provide more accurate diagnostic information to the user. It can be configured to provide.
  • the pattern included in the light 700 may be made by using an infrared ray (IR) so that the user's eyes are not detected.
  • 7, 8, and 9 illustrate examples of use of a portable terminal, an electronic device, and an optical head according to an embodiment of the present invention.
  • the plurality of optical heads 100 may be selected based on the part of the user's body to be photographed and attached to the electronic device 1.
  • the optical head 100 corresponding to the speculum may be attached to the electronic device 1 to photograph a portion 701 of the user's skin.
  • the light 700 generated and output by the electronic device 1 passes through the optical head 100 and is irradiated to a part of the user's skin 701, and the light reflected from the part of the skin 701 again passes the optical head 100.
  • the electronic device 1 is configured to provide light incident through the attached optical head 100 to the camera unit 200 of the mobile terminal 2.
  • the mobile terminal 2 is configured to provide an image of a part 701 of the photographed user's skin to the user through the display 101.
  • the optical head 100 corresponding to the speculum may be in contact with a part 701 of the user's skin, and may be configured to enlarge and photograph an image of the part 701 of the contacted skin without distortion.
  • an optical head 100 corresponding to an ophthalmoscope may be attached to the electronic device 1 to photograph the user's eye 801.
  • the optical head 100b corresponding to the ophthalmoscope is configured to inspect the fundus of the user such as the vitreous, the retina, the choroid, and the optic nerve papilla.
  • Fundus examination can diagnose diseases such as glaucoma, macular degeneration, and retinal detachment.
  • the optical head 100b corresponding to the ophthalmoscope may be configured to irradiate the user fundus with light 800 generated by the electronic device 1 and provide reflected light to the electronic device 1 for this purpose.
  • the electronic device 1 is configured to provide the light incident through the optical head 100b to the camera unit 200 of the mobile terminal 2.
  • the camera unit 200 is configured to convert an image of the user's eye 801 into an electrical signal based on the received light, and the display unit 101 converts the image of the user's eye 800 into an electrical signal. It is configured to display. At this time, the guide image can be irradiated to the retina so that the position of the lesion of the retina can be easily photographed.
  • the optical head 100c corresponding to the otoscope is attached to the electronic device 1 to photograph the ear 901 of the user.
  • the optical head 100c corresponding to the otoscope may be configured as a conical metal tube inserted into the ear canal to push earwax and hair hair and observe the ear canal, middle ear, and eardrum of the user.
  • the tip opening may have a diameter of 2 to 7 mm.
  • the light 900 generated and output from the electronic device 1 is irradiated to the user's ear 901 through the front end opening of the optical head 100c, and the reflected light is again reflected through the optical head 100c.
  • the electronic device 1 is configured to provide the incident light to the camera unit 200 of the mobile terminal 2.
  • the camera unit 200 is configured to convert an image of the user's ear 901 into an electrical signal based on the received light
  • the display unit 101 converts the image of the user's ear 901 into an electrical signal. It is configured to display an image of.
  • the optical head 100 may be provided with a sensor unit including an optical temperature sensor.
  • the mobile terminal 2 may diagnose a disease requiring measurement of temperature, such as otitis media, by using the body temperature measured by the sensor unit of the head 100 and the photographed image.
  • FIG. 10 illustrates a block diagram of an optical module of an electronic device according to an embodiment of the present invention.
  • the optical module 300 transmits the light reflected from the user's body to the portable terminal 2, and generates and attaches the light based on a control signal received from the portable terminal 2. It can be configured to output through.
  • the optical module 300 may include the first and second lens units 1000a and 1000b, the splitter unit 1001, the pattern generator 1003, the light source unit 1005, and the lens control unit 1007. It may include.
  • the first and second lens units 1000a and 1000b may be used to form an image of an eyepiece and an object for transmitting the light reflected from the user's body to the mobile terminal 2 to observe a part of the user's body.
  • a plurality of lenses may be included, such as an objective lens to be used and a relay lens positioned between the eyepiece and the objective lens to reverse an inverted image to the objective lens.
  • the optical module 300 may include at least one lens unit 1000a or 1000b, and the optical module 300 of the present invention is not limited to the first and second lens units 1000a and 1000b shown in the drawing. Do not. That is, the drawings and the above description are only examples, and are not intended to limit the number and features of the lenses included in the optical module 300.
  • the lens adjusting unit 1007 is configured to adjust the focal lengths of the lenses of the respective lens units 1000a and 1000b. More specifically, the distance between the lenses, the size, thickness, curvature, etc. of the lenses are adjusted to adjust the distance of the focal point of the image based on the light transmitted from the optical head 100 according to the optical head 100 to be attached. Can be.
  • each lens unit (1000a, 1000b) is configured to include a plurality of lenses having a different size, thickness, curvature, can be configured to adjust the position of the lens under the control of the lens control unit (1007). have.
  • the light source unit 1005 is configured to generate and output light to a part of the user's body.
  • the light source unit 1005 may include a light emitting diode (LED) that generates light when power is applied.
  • LED light emitting diode
  • the splitter unit 1001 reflects the light generated by the light source unit 1005 and transmits the light to the optical head 100 through the second lens unit 1000b, and transmits the light transmitted from the optical head 100 to the first lens. It is configured to provide to the mobile terminal 2 through the unit (1000a).
  • the pattern generator 1003 is configured to generate a pattern and apply it to the light generated by the light source unit 1005. For example, when light is generated in the light source unit 1005 in order to irradiate light onto the skin, various patterns such as orthogonal grids may be formed to analyze the size of feature points such as lesions, spot acne, and wounds on the user's skin. In addition, three-dimensional information of the captured image can be obtained using this pattern.
  • the pattern generation unit stores various patterns, and is configured to apply a pattern selected according to a control signal transmitted from the mobile terminal 2 to the output light.
  • FIG 11 shows an example of a lens unit according to an embodiment of the present invention.
  • the optical module 300 may include first and second lens units 1000a and 1000b.
  • Each lens unit 1000a or 1000b may change a lens used as a lens having a different size, thickness, and curvature under the control of the lens adjusting unit 1007.
  • the optical heads 100 have different uses, and lenses of different sizes are used according to different uses. Accordingly, it is necessary to adjust the focal length of the light provided from the optical module 300 or the reflected light incident to the optical module 300 through the optical head 100 according to the user's selection of the attached optical head 100 or the user. have.
  • the electronic device 1 may be configured to automatically adjust the focus based on a control signal received from the portable terminal 2 according to the prior art.
  • each of the lens units 1000a and 1000b may adjust the size, thickness, and curvature of the lens used, and for this purpose, the lens units 1000a and 1000b may include a plurality of lenses 1100a to 1100h having different sizes. Can be configured.
  • a turning plate provided with a plurality of lenses 1100a to 1100h is illustrated.
  • the lens adjusting unit 1007 may be configured to rotate the turning plate to wear the lenses 1100a to 1100h of the required size based on the control of the controller 305.
  • a plurality of lenses 1100a to 1100h having different sizes are provided on the turning plate, but the turning plate may include lenses having different thicknesses and curvatures as well as different sizes.
  • FIG. 12 shows an example of a lens unit according to another embodiment of the present invention.
  • Each lens unit 1000a and 1000b may be configured to use a plurality of lenses 1200a to d and 1201a to d having different thicknesses as well as sizes.
  • the thickness of the lenses 1200a-d and 1201a-d may also affect the focal length.
  • the turning plate illustrated in FIG. 11 may also include a plurality of lenses 1200a to d and 1201a to d having different thicknesses.
  • FIG. 12 illustrates an example in which a plurality of lenses 1200a to d and 1201a to d having different thicknesses may be moved and used in the path of light input and output under the control of the lens adjusting unit 1007.
  • each lens unit 1000a or 1000b may be configured to use at least one or more lenses 1200a to d and 1201a to d having different thicknesses.
  • the plurality of lenses 1200a to d and 1201a to d are all provided as convex lenses, the present disclosure is not limited thereto, and the plurality of lenses 1200a to d and 1201a to d may have various convex lenses. It may include a concave lens or a composite lens.
  • FIG 13 shows an example of a lens unit according to another embodiment of the present invention.
  • Each of the lens units 1000a and 1000b includes a plurality of lenses 1100a to h, 1200a to d, and 1201a to d having different thicknesses and sizes, thereby allowing the lens units 1000a and 1000b to be used. It can be configured to adjust the focal length of the. In addition, the lens units 1000a and 1000b may be positioned in the path of the input / output light, that is, the focal length may be adjusted by adjusting the distance between the lenses used.
  • the focus of the image may be adjusted. Therefore, in order to photograph a part of the user's body based on the attached optical head 100, the size and thickness of the lens used as described above can be changed, and as in this embodiment, the position of the lens is adjusted to focus. Can be adjusted.
  • the position of the lens can be changed using various known techniques.
  • the electronic device 1 may use a combination of different lenses 1100a to h, 1200a to d, and 1201a to d.
  • the electronic device 1 may be implemented using various methods for adjusting the focal length of the incident or reflected light.
  • FIG 14 illustrates an example of an electronic device according to an embodiment of the present disclosure.
  • the electronic device 1 may include a display unit 1400 for displaying a current state 1401 of the electronic device 1.
  • the current state 1401 is information on whether the electronic device 1 is connected to the mobile terminal 2, which optical head 100 is attached, or the like.
  • the display unit 1400 may display an electronic device (eg, a text or an image) through a text or an image.
  • the current state 1401 of 1) can be displayed.
  • the display unit 1400 may include information about a pattern applied to light emitted to a user's body, information about whether an image on the lens is in focus, and a lens used in the lens units 1000a and 1000b.
  • the electronic device 1 may be configured to display information related to various functions that the electronic device 1 may provide, such as related information. As the information is provided through the display unit 1400 of the electronic device 1, the user may use the electronic device 1 more conveniently.
  • FIG. 15 an example in which the portable terminal 2, the electronic device 1, and the optical head 100 are used in combination to photograph a user's skin is illustrated.
  • the user attaches the optical head 100 corresponding to the speculum to the electronic device 1 in order to photograph the skin, and the electronic device 1 is coupled to the case 10 of the mobile terminal 2 so that the mobile terminal 2 It is driven by receiving power from).
  • the light reflected from the user's skin is transmitted through the optical head 100 and the electronic device 1 to the camera unit of the mobile terminal 2. 200).
  • the camera unit 200 converts the incident light into an image having an electrical signal, and the display unit 101 is configured to provide the converted image to a user.
  • the lesion detected at the spot 701 or part of the skin of the user may be an initial symptom of skin cancer.
  • the user may determine the shape of the spot 701 of the skin, measure the size, and measure the size of the measured spot 701.
  • Photography may be performed to analyze whether the size or shape changes.
  • the electronic device 1 may further include a pattern generator 1003 for generating the pattern 1500, and the generated pattern and the dot 701.
  • the size of the point can be determined by comparing
  • three-dimensional information can be obtained using the generated pattern.
  • FIG. 16 an example in which the photographed skin 1600 is displayed through the display 101 is illustrated.
  • the control unit 400 of the mobile terminal 2 may display the user's body through the display unit 101.
  • the user skin image 1600 including information 1603 regarding an angle and a distance from the user's body and a point 1601 of the user's hand may be displayed.
  • the 3D image including the height of a point, a skin lesion, a wound, and the like may be displayed on the display 101 by using the 3D information acquired previously.
  • the angle of the portable terminal 2 and the distance from the user's body can then be used to photograph the user's body at the same location and can be provided to the user as guide information.
  • FIG. 17 illustrates an example in which the pattern 1500 generated by the pattern generator 1003 is displayed on the display 101 together with the user skin 1600.
  • the mobile terminal 2 transmits a control signal based on the user's operation to the electronic device 1 through the communication unit 401.
  • the pattern generator 1003 of the electronic device 1 may generate the pattern 1500 based on the control signal and apply the generated light to the output light.
  • the user may directly measure the size of the dot 1601 by comparing the pattern 1500 displayed on the display 101 with the dot 1601.
  • the controller 400 of the mobile terminal 2 directly measures the height using the width 1703, the length 1701 of the point 1601 and the three-dimensional information using the pattern 1500. It can be configured to. The controller 400 may then provide the user with information 1700 regarding the size of the measured point through the display 101.
  • 18 and 19 illustrate an example of providing an image and information of an eye photographed by photographing an eyeball according to an embodiment of the present invention.
  • the electronic device 1 irradiates light to the fundus through the opening of the optical head 100 corresponding to the attached ophthalmoscope, and reflects the light incident from the fundus and incident through the optical head 100 to the camera of the mobile terminal 2.
  • the camera unit 200 Provided to the unit 200.
  • the camera unit 200 generates an image of the vitreous, optic nerve papilla, retina, choroid, and blood vessel in the eye based on the received light, and the display 101 is configured to provide the generated image.
  • FIG. 18 illustrates an example in which the mobile terminal 2 attaches the optical head 100 corresponding to the speculum to the electronic device 1 to provide a photographed image 1800 and information 1803 through the display 101. Shows.
  • the image 1800 of the eye includes vitreous, nerves, blood vessels, and the like, when there are some parts of the eye that are cloudy 1180, etc., it may be an early symptom of eye disease, the shape of the clouded part 1801 You need to analyze the size. In addition, by photographing the eyeballs with parallax, it is possible to analyze whether the clouded point 1801 is gradually increased.
  • the control unit 400 of the mobile terminal 2 may display information about the angle at which the mobile terminal 2 was photographed by the mobile terminal 2 and the distance to the user's body through the display unit 101 and the user's eyeball.
  • a user's eyeball image 1800 that includes a point 1801 may be displayed.
  • the user may directly determine the size of the clouded point 1801 of the eye using the pattern 1500 applied to the image, and the controller 400 Can be configured to directly analyze the area based on the pattern 1500.
  • the controller 400 may directly analyze the area of the clouded point 1801 inside the eyeball, and then provide the analyzed result information 1900 through the display 101.
  • FIG. 20 illustrates an example of providing an image and information of an ear photographed by photographing an ear according to an embodiment of the present invention.
  • the portable terminal 2 Based on the control signal transmitted from the electronic device 1, the electronic device 1 irradiates the light into the ear through the tip opening of the optical head 100c, and the portable terminal receives the light reflected in the ear incident through the optical head 100c. It transfers to the camera part 200 of (2).
  • the camera unit 200 converts the transmitted light into an image, and the display unit 101 is configured to provide the converted attribution image to the user.
  • the optical head 100c may further include a sensor unit 503.
  • the sensor unit 503 may measure a biological signal such as brain waves in the ear or may sense the body temperature of the user and the humidity in the ear and provide the sensed information to the electronic device 1.
  • the electronic device 1 may provide the portable terminal 2 with the received information to the user.
  • the mobile terminal 2 may provide the sensed temperature and humidity information 2001 to the user through the display 101.
  • 21 illustrates an example of photographing a wound of a user's skin according to an embodiment of the present invention.
  • the user may photograph the skin to analyze the progress of the wound, as well as spot or skin degeneration, as well as a wound on the skin.
  • an optical head 100a corresponding to a speculum is attached to the electronic device 1 coupled to the portable terminal 2 to capture light 2101 to photograph a wound 2100 of a user's skin. It is shown to illuminate and generate an image using the reflected light.
  • FIG. 22 illustrates an example of displaying a wound of a photographed user's skin, according to an exemplary embodiment.
  • the light source unit 1005 of the electronic device 1 may be configured to output a laser for analyzing the wound 2100 of the user's skin to the wound 2100 and to receive the laser reflected from the wound 2100.
  • the electronic device 1 may generate information on the wound 2100 based on the received laser and transmit the generated information to the mobile terminal 2 through the communication unit 303.
  • the controller 400 of the mobile terminal 2 may be configured to analyze the depth and width of the wound 2100 based on the information of the wound 2100 received from the electronic device 1.
  • control unit 400 of the portable terminal 2 includes an image 2200 of the user's skin including the wound 2100, information 2201 on the depth and width of the analyzed wound 2100, and the portable terminal 2.
  • information 2203 about an angle and a distance from a user's body may be provided through the display 101.
  • guide information may be provided from the mobile terminal 2 through a user interface (UI) to perform a related function on the mobile terminal 2.
  • UI user interface
  • the guide information includes information that the user can refer to photographing the body part, such as the type of the optical head 100 to be attached according to the body part to be photographed and the operation that the user should take.
  • a UI including a menu item 2300 corresponding to a body to be photographed by a user is provided.
  • the user may proceed to the next step by selecting one of the menu items 2300 displayed among the menu items 2300 corresponding to the eyes, ears, or skin.
  • the UI in the drawing is merely an example to help explain, and in order to examine a body, more various UIs that the user can select may be provided to the user.
  • the user examines the eye, selects that the cataract is suspected according to the deterioration of vision, or examines the skin, but selects whether the patient wants to check whether the wound is healed. You can make more specific selections through the UI.
  • the display 101 may display the type 2400 of the optical head 100 that the user should attach to the electronic device 1 as shown in FIG. 24, and the optical head.
  • the UI including various guide information such as the appearance of the image 1001a, the serial number 2401b, and the like may be displayed.
  • the guide information in the drawings is merely an example, and more specifically, various information for guiding a user exists.
  • FIG. 25 illustrates a UI provided when an optical head 100 that does not correspond to a body part to be measured by a user is mounted.
  • Identification information is stored in each of the optical heads 100, and based on the identification information, it is possible to determine what kind of optical head 100 is attached to the electronic device 1.
  • the control unit 400 of the portable terminal 2 compares the identification information of the attached optical head 100 with the item selected by the user to photograph a body part, and the optical head 100 corresponding to the item selected by the user and other optical fibers.
  • the UI including a guide 2500 for notifying the user may be provided through the display 101.
  • the controller 400 of the portable terminal 2 corresponds to the selection.
  • the guide information may be provided once again to properly attach the optical head 100.
  • control unit 400 of the portable terminal 2 if the attached optical head 100 does not match the optical head 100 corresponding to the user's selection, the user's body to be measured to the user Confirmation can be obtained whether or not to change the selection for the site.
  • FIG. 26 an example of providing a guide for capturing an ear using an optical head attached to a user is shown.
  • the user may photograph a part of the user's body by using guide information provided through a photo or other picture provided through the display 101, and determine in advance whether or not there is an abnormality in health based on the photographed result, or diagnose You can send the captured images to the outside world.
  • the identification information of the optical head 100 may include not only information on the type of the optical head 100 but also unique information such as a serial number of the optical head 100. Accordingly, even when the optical head 100 of the same type uses a different optical head 100 for each user, the controller 400 of the mobile terminal 2 is based on the unique information received through the electronic device 1. Which user's optical head 100 is mounted may be determined based on pre-stored information.
  • the angle at which the user A photographed the point of the wrist and the distance from the wrist and the angle at which the user B photographed the eye and the distance from the eye may be different from each other, and the optical head 100 corresponding to the speculum of the user A (100). ), The focal length of the electronic device 1 may be adjusted to correspond to the angle and distance previously photographed by the user A.
  • the optical head 100 stores such information in the storage unit 505,
  • the electronic device 1 may be provided to the electronic device 1, and the electronic device 1 may adjust the first and second lens parts 1000a and 1000b based on information received from the attached optical head 100. 1007) can be controlled.
  • the electronic device 1 may provide the received information to a user through the display unit 1400 of the electronic device 1.
  • 27 and 28 illustrate examples of providing the progress of photographing according to an embodiment of the present invention.
  • FIG. 27 when a user who has spots on the skin photographs the skin at a time difference, an example of providing an image of photographing the user's skin, information for assisting the photographing, and information over time is illustrated.
  • the controller 400 of the portable terminal 2 is controlled. Transmits a control signal to the electronic device 1 to irradiate light onto the user's skin, and the electronic device 1 irradiates light onto the user's skin through an attached optical head 1000 and transmits light reflected from the user's skin. It is configured to provide to the camera unit 200.
  • the display unit 101 may display an image 2700a of the skin including the point 2701a and the angle of the mobile terminal 2 and the user's body part at the time of taking the picture.
  • Information 2705 including the distance from the display can be displayed.
  • the display unit 101 After the image is taken and time passes and the user photographs the skin again, the display unit 101 includes an afterimage 2702 of the point 2701a in the last image and a point 2701b whose size has changed.
  • Information 2705 including the image 2700b of the current skin and the angle of the portable terminal 2 and the distance from the user's body part may be displayed.
  • the control unit 400 of the mobile terminal 2 compares and analyzes the point 2701a at the last photographing with the point 2701b of the current skin, and displays the information 2703 about the progress of healing at a reduced rate. 101).
  • the size of the point 2701 can be compared more accurately.
  • (2) may display the related information 2705 to the user, and may also notify the user that the angle and distance from the body part which the user is currently photographing are the same as the photographed image.
  • FIG. 28 illustrates an example in which a user having a wound on the skin photographs the skin at a time difference, and provides an image of photographing the skin, information for assisting the photographing, and information over time.
  • the controller 400 of the portable terminal 2 captures an image 2800a of the skin including the wound 2801a, and is portable during the shooting.
  • the information 2805 including the angle of the terminal 2 and the distance from the user's body part and the captured image are analyzed to provide the information 2803a on the depth and width of the wound 2100 through the display 101. can do.
  • the controller 400 of the portable terminal 2 captures the afterimage 2802 and the current wound 2801b of the wound 2801a in the last photographing. Analyze the image (2700b) including the photographed skin, the information (2805) including the angle of the mobile terminal (2) and the distance from the user's body part at the time of shooting and the captured image to analyze the depth and width of the wound (2100)
  • the information 2803b may be provided through the display 101.
  • the information 2803b regarding the depth and width may include elapsed information so as to compare the depth and width of the wound 2801a in the last photographing with the depth and width of the wound 2801b in this photographing.
  • 29 illustrates an example of use of a mobile terminal and an electronic device according to an embodiment of the present invention.
  • the mobile terminal 2 may include a communication unit 401 to communicate with the external device 29.
  • the controller 400 may control the communication unit 401 to transmit an image of a part of the user's body photographed using the optical head 100 and the electronic device 1 to the outside.
  • the outside includes a separate display device 29, an external hospital 30, etc. for displaying the received image.
  • the display device 29 is provided with a display panel larger than the display unit 101 of the mobile terminal 2, so that the captured image can be viewed on a larger screen.
  • an external diagnostic facility such as a hospital, the user can receive a remote diagnosis without going to the hospital.
  • FIG. 30 illustrates a UI in which a diagnosis request is transmitted from the outside according to an embodiment of the present invention.
  • the controller 400 of the mobile terminal 2 selects a part of the user's body to perform a test corresponding to the selected menu item.
  • the guide information for photographing may be provided through the display unit 101.
  • the medical examination service which can be provided by the mobile terminal 2 may be started in response to a test request transmitted from the outside such as a hospital.
  • the portable terminal 2 is a guide for taking a photograph including a guide 3000 suggesting to perform the inspection and information about the optical head 100 to be attached to the user.
  • Information may be displayed on the display 101.
  • the inspection request transmitted from the outside may include guide information provided to the user.
  • the guide information transmitted from the outside may include information about the specific optical head 100, the distance from the body to the mobile terminal 2, the angle of the mobile terminal 2 and the afterimage of the image photographed according to the last inspection request, etc. Can be.
  • the control unit 400 of the mobile terminal 2 inspects the communication unit 401. It may be configured to transmit the generated image to the outside requesting.
  • 31 and 32 illustrate examples of a portable terminal and an electronic device according to another embodiment of the present invention.
  • the electronic device 1 is directly coupled to the portable terminal 2, and is driven by being supplied with power from the power transmission and reception terminal of the portable terminal 2 to the user's body to the camera unit 200 of the portable terminal 2. Some have been described as delivering reflected light.
  • the electronic device 1 may be driven without supplying power from the mobile terminal 2, and may directly provide a photographed image to the mobile terminal 2 through communication.
  • the electronic device 1 may further include a battery and a camera unit, and may be implemented in the form of a wearable device such as smart goggles, earphones, a head-mounted display (HMD), and the like as illustrated in FIG. 31.
  • HMD head-mounted display
  • a user may control to photograph a body part through the portable terminal 2 while wearing the wearable devices 3100a and 3100b, and the wearable devices 3100a and 3100b may capture the captured image. It may be configured to transmit to (2).
  • the mobile terminal 2 may be configured to display the eyeball image 3101 and the attribution image 3103 of the user received from the wearable devices 3100a and 3100b through the display 101.
  • the wearable devices 3100a and 3100b may include a separate battery, and may be configured to include a power transmission / reception terminal for receiving power from the portable terminal 2 in a wired / wireless manner.
  • the wearable devices 3100a and 3100b may be configured to transmit an image photographed through the connected signal line to the mobile terminal 2.
  • the electronic device 1 may include a battery unit 3200 and a camera unit 3201.
  • the battery unit 3200 may be charged using power input from the outside, and may be configured to provide the charged power to the electronic device 1.
  • the camera unit 3201 may be configured to photograph a user's body by using the attached optical head 100, and generate an image by converting light transmitted through the optical head 100.
  • the camera unit 100 may include a converting unit for converting the reflected light transmitted through the optical head 100 into an image having an electrical signal.
  • the electronic device 1 and the optical head 100 are attached through the coupling parts 301 and 501, and the identification information of the attached optical head 100 is transmitted to the mobile terminal 2, and then the mobile terminal is based on the identification information.
  • the camera unit 3201 of the electronic device 1 is configured to photograph an image of a user's body.
  • the generated image may be transferred to the mobile terminal 2 through the communication unit 401 or directly to the camera unit 200 of the mobile terminal 2.
  • the display 101 of the mobile terminal 2 may be configured to display an image transmitted from the electronic device 1.
  • 33 is a control flowchart of an electronic device according to an embodiment of the present invention.
  • one of the plurality of science heads 100 is attached to the coupling portion 501 of the electronic device 1.
  • the electronic device 1 communicates with the external device 2, that is, the mobile terminal 2, through the communication unit 303.
  • the communication unit 303 acquires identification information of the attached optical head 100 and transmits the obtained information to an external device.
  • the optical module 300 transmits the light reflected from the user's body and passing through the attached optical head 100 to the camera unit 200 of the external device 2.
  • operation S3400 the user selects an item to be diagnosed by operating the displayed UI.
  • the controller 400 of the mobile terminal 2 provides the optical head 100 corresponding to the diagnostic item and guide information for photographing through the display 101.
  • operation S3402 the controller 400 outputs and provides the captured image through the display 101.
  • 35 is a flowchart illustrating a control of a portable terminal when a diagnostic request is received from the outside according to an embodiment of the present invention.
  • a test and diagnosis request is received from the outside via the communication unit 401 of the mobile terminal 2.
  • the controller 400 provides guide information for mounting and capturing the optical head 100 corresponding to the received diagnostic request through the display 101.
  • the controller 400 controls the communication unit 401 to transmit an image photographed by the camera unit 200 to the outside using the electronic device 1 and the optical head 100 to request an inspection and diagnosis.
  • the communication unit 401 receives the diagnostic information from the outside, and the control unit 400 provides the received information to the user through the display unit 101.
  • 36 and 37 illustrate examples of notifying a user when an optical head is incorrectly mounted according to an embodiment of the present invention.
  • identification information of the optical head 100 is provided. Is provided to the mobile terminal 2 through the electronic device 1, and the mobile terminal 2 is configured to determine whether the optical head 100 is attached to the electronic device 1 according to a user's selection or an external diagnosis request.
  • the UI including the guide items 3605 and 3703 may be provided through the display 101.
  • the electronic device 1 and the portable terminal 2 may further include LED lights 3600 and 3601.
  • the red light may be output through the LED lights 3600 and 3601, and if the correct optical head 100 is attached, the blue light may be output.
  • the electronic device 1 and the portable terminal 2 may also guide the user to attach the correct optical head 100 by using sounds and vibrations 3700, such as alert sounds 3603 and 3701.
  • At least one of the electronic device 1 and the portable terminal 2 according to the present embodiment may further include a sensor unit including a gyro sensor, an acceleration sensor, a geomagnetic sensor, and the like, and the portable terminal 2 may use a sensor unit.
  • the posture of the user can be detected.
  • the portable terminal 2 and the electronic device 1 primarily use the LED lights 3600 and 3601 and the guidance items 3605 and 3703. Can be notified that the wrong optical head 100 is attached. Subsequently, when it is detected that the user moves the mobile terminal 2 to photograph a part of the user body with the wrong optical head 100 attached, the mobile terminal 2 outputs a vibration 3700 or a warning sound 3603 and 3701. It can be configured to.
  • the mobile terminal 2 and the electronic device 1 may further include a speaker unit for outputting sound and a vibration motor for vibrating for this purpose.
  • the optical unit 100 is coupled to the coupling unit 301 of the electronic device 1 does not respond to a user's selection or a diagnosis request from the outside under the control of the mobile terminal 2. It can be prevented from sticking.
  • the identification information of the optical head 100 is transmitted to the portable terminal 2 through the temporary coupling with the optical head 100, and the portable terminal 2 determines that the wrong optical head 100 is connected to transmit the control signal to the electronic device.
  • the control unit 305 may be configured to control the coupling unit 301 so that the wrong optical head 100 is not attached to the electronic device 1.
  • At least one of the electronic device 1 and the portable terminal 2 may include a sensor unit provided with a gyro, a geomagnetic, and an acceleration sensor.
  • the mobile terminal 2 may measure the posture of the user based on the information sensed by the sensor unit, and the measured posture is not suitable for photographing a body part based on a diagnosis selected by the user or requested from the outside. If it is possible, the display unit 101 may provide a UI including a guide item 3801 indicating that the shooting posture is incorrect and guide information 3803 indicating the posture for correct shooting. Can be configured to provide voice 3800 via.
  • 39 shows an example of guiding a mobile terminal to photograph a correct body part according to an embodiment of the present invention.
  • the UI including the guide item 3901 may be provided through the display 101, and may be configured to provide the voice 3900 through the speaker.
  • Whether a body part corresponding to the user's selection or an external request is photographed may be determined by analyzing the photographed image, and may be determined based on the posture of the user determined using the sensor unit.
  • the angle of the mobile terminal 2 being photographed is horizontal or vertical, it is possible to determine whether the skin is being photographed or the ear is being photographed. Whether the user is photographing or photographing the right ear may provide related information to the user.
  • the mobile terminal 2 may also compare the photographed image with the image taken in the last photographing to determine whether the photographing distance and the photographing position of the user match the part of the photographing taken in the past. Relevant information can be provided to the user to capture the exact location.
  • the mobile terminal 2 may provide guide information for the user to photograph the wrist in order to diagnose that the size of the point of the wrist photographed by the user during the last photographing and the size of the point of the wrist photographed by the user have changed.
  • the user may determine whether the user is photographing the same wrist as the last photographing by comparing the previously photographed wrist image with the currently photographed wrist image as well as the feature point of the wrist to be photographed. If the user is measuring the correct part based on the similarity, the user may output the green light from the LED light 3600 or inform the user through various methods such as a notification sound 3603 and a UI displayed on the display 101.
  • the user may output red light from the LED light 3600, or may alert the user with a warning sound 3603, the UI displayed on the display 101, or a vibration 3700.
  • the user mounts the correct optical head 100 by using the guide information provided by the mobile terminal 2 and this additional output, and can take a correct posture, photograph the correct body, and diagnose a disease of the body.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Physics & Mathematics (AREA)
  • Veterinary Medicine (AREA)
  • Pathology (AREA)
  • Ophthalmology & Optometry (AREA)
  • Multimedia (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Optics & Photonics (AREA)
  • Dermatology (AREA)
  • Studio Devices (AREA)
  • Physiology (AREA)
  • Computer Networks & Wireless Communication (AREA)

Abstract

전자장치로서, 복수의 광학 헤드 중 어느 하나가 선택적으로 탈부착 가능한 결합부; 외부 장치와 통신 가능한 통신부; 사용자의 신체에서 반사되어 상기 결합부에 부착된 광학 헤드를 통과한 광을 상기 외부 장치로 전달하는 광학모듈부(optical unit); 및 상기 복수의 광학 헤드 중 하나가 상기 결합부에 부착되면 상기 결합부에 부착된 광학 헤드의 식별정보를 획득하여 상기 외부 장치로 전송하도록 상기 통신부를 제어하는 제어부를 포함하는 전자장치가 제공된다. 이로 인하여, 필요에 따라 원하는 광학 헤드를 장착하여 사용자의 신체를 촬영하고 촬영한 이미지를 분석하여 사용자에게 정보를 제공할 수 있게 된다.

Description

전자장치, 휴대단말기 및 그 제어방법
본 발명은 전자장치, 휴대단말기 및 그 제어방법에 관한 것으로서, 보다 자세하게는, 복수의 광학 헤드를 사용하여 사용자의 신체 일부의 이미지를 촬영하기 위한 전자장치, 휴대단말기 및 그 제어방법에 관한 것이다.
전자 기술의 발달에 힘입어 다양한 유형의 전자 제품들이 개발 및 보급되고 있다. 특히, TV, 휴대폰, PC, 노트북 PC, PDA 등과 같은 각종 디스플레이 장치들은 대부분의 일반 가정에서도 많이 사용되고 있다. 이와 더불어, 사용자의 생체 신호를 측정하고 이에 기초하여 사용자의 건강 상태를 진단할 수 있는 기능들이 다양한 전자 장치에서 수행되고 있다.
특히, 이러한 진단 기기들은 통상적으로 각 측정 대상 및 생체 신호의 타입에 따라 개별적으로 만들어지고, 그 중 일부는 유/무선 통신을 통해 측정 결과를 전송하는 기능을 가지고 있으며, 각 진단 기기 별로 수신된 측정 결과를 저장하여 분석하는 소프트웨어들이 존재한다.
다만, 개별적으로 존재하는 진단 기기 중 일부는 통신 기능을 수행할 수 없는 경우도 있고, 설령 통신 기능을 수행할 수 있다고 하더라도 진단 기기 별로 서로 다른 소프트웨어를 사용한다. 이에 따라, 필요한 진단 기기를 종류별로 별도로 구매, 보관 관리해야 하며 각 진단 기기에 대응되는 소프트웨어 역시 개별적으로 관리해야 하는 불편함이 있다.
또한, 중이염, 피부염 등 그 경과를 눈으로 확인해야 하는 질병의 경우, 진단에 오랜 시간이 걸리지 않는데도, 항상 병원에 가서 진단을 받아야 함에 따라 환자는 오가는데 시간을 소비하게 되며, 병원은 환자가 적체되는 문제가 있다.
본 발명의 상기 목적은 복수의 광학 헤드 중 어느 하나가 선택적으로 탈부착 가능한 결합부; 외부장치와 통신 가능한 통신부; 사용자의 신체에서 반사되어 상기 결합부에 부착된 광학 헤드를 통과한 광을 상기 외부 장치로 전달하는 광학모듈부(optical unit); 및 상기 복수의 광학 헤드 중 하나가 상기 결합부에 부착되면 상기 결합부에 부착된 광학 헤드의 식별정보를 획득하여 상기 외부 장치로 전송하도록 상기 통신부를 제어하는 제어부를 포함하는 전자장치에 의하여 달성될 수 있다.
바람직하게는, 상기 제어부는, 상기 전자장치와 상기 외부장치가 기 설정된 범위 내에 인접하게 되면 상기 통신부를 통해 상기 외부장치와 통신 페어링을 수행하고, 상기 통신 페어링이 완료되면 상기 결합부에 부착된 광학 헤드의 식별정보를 상기 통신부를 통해 상기 외부장치로 전송하는 것을 특징으로 할 수 있다.
바람직하게는, 디스플레이부를 더 포함하며, 상기 제어부는 상기 전자장치의 현재상태에 관한 정보를 표시하도록 상기 디스플레이부를 제어할 수 있다.
*바람직하게는, 상기 전자장치의 현재상태에 관한 정보는 상기 외부 장치와 통신 중인지 여부 및 상기 결합부에 부착된 광학 헤드에 관한 정보 중 적어도 하나를 포함하는 전자장치.
바람직하게는, 상기 결합부는 상기 부착된 광학 헤드와 연결하기 위한 접속 단자를 포함하며, 상기 제어부는 상기 접속 단자를 통해 상기 부착된 광학 헤드로부터 상기 식별정보를 수신할 수 있다.
바람직하게는, 상기 광학모듈부는 입사되는 광을 전달하는 복수의 렌즈를 포함하는 렌즈부와, 상기 렌즈부의 초점거리(focal length)를 조절하는 렌즈조절부를 더 포함하며, 상기 제어부는 상기 외부장치로부터 수신되는 제어신호에 기초하여 상기 렌즈부의 초점거리를 조절하도록 상기 렌즈조절부를 제어할 수 있다.
바람직하게는, 상기 렌즈부의 초점거리는 상기 복수의 렌즈간 거리 변경과, 상기 사용중인 렌즈를 두께, 크기 및 굴절율 중 적어도 하나가 다른 렌즈로의 변경 중 적어도 하나에 의해 조절될 수 있다.
바람직하게는, 상기 광학 모듈부는, 광을 생성하여 상기 부착된 광학 헤드를 통해 출력하는 광원부를 더 포함하며 상기 제어부는 상기 광을 생성하여 제공하도록 상기 광원부를 제어할 수 있다.
바람직하게는, 상기 제어부는 상기 생성되는 광의 휘도 및 색도 중 적어도 하나가 조절되도록 상기 광원부를 제어할 수 있다.
바람직하게는, 상기 제어부는, 상기 외부장치로부터 수신되는 제어신호에 기초하여 상기 광원부를 제어할 수 있다.
바람직하게는, 상기 광학모듈부는 상기 광원부로부터 생성되는 광에 패턴을 가하는 패턴생성부를 더 포함하며, 상기 제어부는 상기 광에 패턴을 가하도록 상기 패턴생성부를 제어할 수 있다.
본 발명의 상기 목적은 복수의 광학 헤드 중 어느 하나가 선택적으로 탈부착 가능한 결합부를 포함하는 전자장치의 제어방법에 있어서, 복수의 광학 헤드 중 하나가 상기 결합부에 부착하는 단계; 외부장치와 통신하는 단계; 상기 부착된 광학 헤드의 식별정보를 획득하여 상기 외부 장치로 전송하는 단계; 및 사용자의 신체에서 반사되어 상기 부착된 광학 헤드를 통과한 광을 상기 외부 장치로 전달하는 단계를 포함하는 전자장치의 제어방법에 의하여 달성될 수 있다.
바람직하게는, 상기 외부장치와 통신하는 단계는, 상기 전자장치와 상기 외부장치가 기 설정된 범위 내에 인접하게 되면 상기 통신부를 통해 상기 외부장치와 통신 페어링을 수행하는 단계; 및 상기 통신 페어링이 완료되면 상기 결합부에 부착된 광학 헤드의 식별정보를 상기 통신부를 통해 상기 외부장치로 전송하는 단계를 포함할 수 있다.
바람직하게는, 상기 전자장치의 현재상태에 관한 정보를 상기 디스플레이부를 통해 표시할 수 있다.
바람직하게는, 상기 전자장치의 현재상태에 관한 정보는, 상기 외부 장치와 통신 중인지 여부 및 상기 결합부에 부착된 광학 헤드에 관한 정보 중 적어도 하나를 포함할 수 있다.
바람직하게는, 사용자의 신체 일부에서 반사된 광을 상기 외부 장치로 전달하는 단계는, 복수의 렌즈를 포함하는 렌즈부를 통해 입사되는 광을 전달하는 단계; 및 상기 외부장치로부터 수신되는 제어신호에 기초하여 상기 렌즈부의 초점거리를 조절하는 단계를 포함할 수 잇다.
바람직하게는, 상기 렌즈부의 초점거리를 조절하는 단계는, 상기 렌즈부의 초점거리는 상기 복수의 렌즈간 거리 변경과, 상기 사용중인 렌즈를 두께, 크기 및 굴절율 중 적어도 하나가 다른 렌즈로의 변경 중 적어도 하나에 의해 조절할 수 있다.
바람직하게는, 광을 생성하여 상기 부착된 광학 헤드를 통해 출력하는 단계를 더 포함할 수 있다.
바람직하게는, 상기 광을 생성하여 상기 부착된 광학 헤드를 통해 출력하는 단계는, 상기 생성되는 광의 휘도 및 색도 중 적어도 하나를 조절하는 단계를 포함할 수 있다.
바람직하게는, 상기 광을 생성하여 상기 부착된 광학 헤드를 통해 출력하는 단계는, 상기 외부장치로부터 수신되는 제어신호에 기초하여 상기 광을 생성하는 단계를 포함할 수 있다.
바람직하게는, 광을 생성하여 상기 부착된 광학 헤드를 통해 출력하는 단계는, 상기 생성되는 광에 패턴을 가하는 단계를 더 포함할 수 있다.
본 발명의 상기 목적은 휴대단말기에 있어서, 이미지를 출력하는 디스플레이부; 복수의 광학 헤드와 탈부착 될 수 있는 촬영 모듈 및 기타 외부 장치와 통신 가능한 통신부; 사용자의 신체 일부를 촬영하는 카메라부; 및 복수의 진단항목을 포함하는 유저 인터페이스(user interface: UI)를 제공하도록 상기 디스플레이부를 제어하며, 상기 유저 인터페이스를 통한 사용자의 선택 및 상기 광학 모듈로부터 수신되는 상기 광학 모듈에 부착된 광학 헤드의 식별정보에 기초하여 상기 사용자의 신체 일부를 촬영하기 위해 제1제어신호를 상기 광학 모듈에 전송하도록 상기 통신부를 제어하며, 상기 광학 모듈로부터 전달되는 상기 사용자 신체 일부에서 반사된 광에 기초하여 상기 사용자의 신체 일부를 촬영하며, 상기 촬영된 이미지를 표시하도록 상기 디스플레이부를 제어하는 제어부를 포함하는 휴대단말기에 의하여 달성될 수 있다.
바람직하게는, 상기 제어부는 수신된 상기 부착된 광학 헤드의 식별정보와 상기 사용자가 선택한 진단항목에 기초하여 상기 부착된 광학 헤드와 진단에 필요한 광학 헤드가 서로 다르다고 판단되면, 상기 필요한 광학 헤드를 상기 광학 모듈에 부착하게 하기 위해 상기 필요한 광학 헤드에 관한 정보를 표시하도록 상기 디스플레이부를 제어할 수 있다.
바람직하게는, 상기 필요한 광학 헤드에 관한 정보는 상기 필요한 광학 헤드의 제조사, 시리얼넘버 및 외형 중 적어도 하나를 포함할 수 있다.
바람직하게는, 상기 제어부는 상기 촬영된 이미지를 외부 장치로 전송하도록 상기 통신부를 제어할 수 있다.
바람직하게는, 상기 제어부는 외부로부터 진단을 개시하기 위한 제2제어신호가 수신되면, 상기 제2제어신호에 관한 정보를 사용자에게 제공하도록 상기 디스플레이부를 제어할 수 있다.
바람직하게는, 상기 제어부는 수신된 상기 부착된 광학 헤드의 식별정보와 상기 외부로부터 수신되는 제2제어신호에 기초하여 상기 부착된 광학 헤드와 진단에 필요한 광학 헤드가 서로 다르다고 판단되면, 상기 필요한 광학 헤드를 상기 광학 모듈에 부착하게 하기 위해 상기 필요한 광학 헤드에 관한 정보를 표시하도록 상기 디스플레이부를 제어할 수 있다.
바람직하게는, 상기 제어부는 상기 사용자가 선택한 진단항목에 기초하여 사용자가 올바르게 상기 사용자 신체 일부를 촬영하도록 가이드정보를 제공할 수 있다.
바람직하게는, 상기 가이드정보는 상기 사용자 신체 일부와의 거리, 포커스 및 각도 등에 대한 정보를 포함할 수 있다.
바람직하게는, 상기 제어부는 상기 선택된 진단항목에 기초하여 기 촬영된 이미지를 흐릿하게 표시하며, 촬영되는 상기 사용자의 신체 일부의 이미지를 상기 흐릿하게 표시되는 기 촬영된 이미지와 함께 실시간으로 표시하도록 상기 디스플레이장치를 제어하며, 상기 가이드정보는 상기 흐릿하게 표시되는 기 촬영된 이미지와 상기 실시간으로 표시되는 촬영되는 상기 사용자의 신체 일부의 이미지를 비교하여 일치하는 정도에 관한 정보를 포함할 수 있다.
바람직하게는, 상기 제어부는 상기 촬영된 이미지를 분석하며, 분석에 기초하여 진단정보를 제공할 수 있다.
바람직하게는, 상기 진단정보는 상기 사용자 신체 일부에 대한 정보를 포함할 수 있다.
본 발명의 상기 목적은 복수의 광학 헤드 중 하나와 선택적으로 탈부착 가능한 결합부; 외부 장치와 통신 가능한 통신부; 사용자의 신체 일부를 촬영하는 카메라부; 및 상기 복수의 광학 헤드 중 하나가 상기 결합부에 부착되면 상기 결합부에 부착된 광학 헤드의 식별정보를 획득하여 상기 외부 장치로 전송하도록 상기 통신부를 제어하며, 상기 외부 장치로부터 수신된 제어 명령에 기초하여 상기 부착된 광학 헤드를 통해 상기 사용자의 신체 일부를 촬영하도록 상기 카메라부를 제어하며, 상기 촬영으로 생성된 이미지를 상기 외부 장치로 전송하도록 상기 통신부를 제어하는 제어부를 포함하는 전자장치에 의하여 달성될 수 있다.
상기한 바와 같이, 본 발명에 의하면 필요에 따라 다양한 광학 헤드 중 하나를 선택적으로 전자장치에 부착하여 사용자의 신체 일부를 촬영할 수 있으며, 촬영된 이미지 자체 또는 전기적 신호로 변환된 이미지신호가 디스플레이장치에 전달되어 진단장치의 소형화 및 저가격화가 가능해진다. 또한, 병원에 직접 갈 필요 없이 네트워크를 통해 병원으로 촬영한 이미지를 전달할 수 있게 되어, 사용자의 편의성이 향상된다.
도 1은 본 발명의 일 실시예에 따른 복수의 광학 헤드가 부착 가능한 전자장치 및 휴대단말기의 사용예를 도시한다.
도 2는 본 발명의 일 실시예에 따른 복수의 광학 헤드가 부착 가능한 전자장치 및 휴대단말기의 사용예를 도시한다.
도 3은 본 발명의 일 실시예에 따른 전자장치의 블록도를 도시한다.
도 4는 본 발명의 일 실시예에 따른 휴대단말기의 블록도를 도시한다.
도 5는 본 발명의 일 실시예에 따른 광학 헤드의 블록도를 도시한다.
도 6은 휴대단말기, 전자장치 및 광학헤드의 동작을 설명하기 위한 블록도를 도시한다.
도 7은 본 발명의 일 실시예에 따른 휴대단말기, 전자장치 및 광학 헤드의 사용예를 도시한다.
도 8은 본 발명의 일 실시예에 따른 휴대단말기, 전자장치 및 광학 헤드의 사용예를 도시한다.
도 9는 본 발명의 일 실시예에 따른 휴대단말기, 전자장치 및 광학 헤드의 사용예를 도시한다.
도 10은 본 발명의 일 실시예에 따른 전자장치의 광학 모듈의 블록도를 도시한다.
도 11은 본 발명의 일 실시예에 따른 렌즈부의 예를 도시한다.
도 12는 본 발명의 다른 일 실시예에 따른 렌즈부의 예를 도시한다.
도 13은 본 발명의 다른 일 실시예에 따른 렌즈부의 예를 도시한다.
도 14는 본 발명의 일 실시예에 따른 전자장치의 예를 도시한다.
도 15는 본 발명의 일 실시예에 따른 휴대단말기, 전자장치 및 광학 헤드의 사용예를 도시한다.
도 16은 본 발명의 일 실시예에 따른 휴대단말기, 전자장치 및 광학 헤드의 사용예를 도시한다.
도 17은 본 발명의 일 실시예에 따른 휴대단말기, 전자장치 및 광학 헤드의 사용예를 도시한다.
도 18은 본 발명의 일 실시예에 따라 안구를 촬영하여 촬영된 안구의 이미지 및 정보를 제공하는 예를 도시한다.
도 19는 본 발명의 일 실시예에 따라 안구를 촬영하여 촬영된 안구의 이미지 및 정보를 제공하는 예를 도시한다.
도 20은 본 발명의 일 실시예에 따라 귀 속을 촬영하여 촬영된 귀 속의 이미지 및 정보를 제공하는 예를 도시한다.
도 21은 본 발명의 일 실시예에 따른 사용자 피부의 상처를 촬영하는 예를 도시한다.
도 22는 본 발명의 일 실시예에 따른 촬영된 사용자 피부의 상처를 표시하는 예를 도시한다.
도 23은 본 발명의 일 실시예에 따른 디스플레이부를 통해 제공되는 유저 인터페이스의 예를 도시한다.
도 24는 본 발명의 일 실시예에 따른 디스플레이부를 통해 제공되는 유저 인터페이스의 예를 도시한다.
도 25는 본 발명의 일 실시예에 따른 디스플레이부를 통해 제공되는 유저 인터페이스의 예를 도시한다.
도 26은 본 발명의 일 실시예에 따른 디스플레이부를 통해 제공되는 유저 인터페이스의 예를 도시한다.
도 27은 본 발명의 일 실시예에 따라 촬영의 경과를 제공하는 예를 도시한다.
도 28은 본 발명의 일 실시예에 따라 촬영의 경과를 제공하는 예를 도시한다.
도 29는 본 발명의 일 실시예에 따른 휴대단말기, 전자장치의 사용예를 도시한다.
도 30은 본 발명의 일 실시예에 따라 외부로부터 진단 요청이 전송되는 UI를 도시한다.
도 31은 본 발명의 다른 일 실시예에 따른 휴대단말기 및 전자장치의 예를 도시한다.
도 32는 본 발명의 다른 일 실시예에 따른 휴대단말기 및 전자장치의 예를 도시한다.
도 33은 본 발명의 일 실시예에 따른 전자장치의 제어흐름도를 도시한다.
도 34는 본 발명의 일 실시예에 따른 휴대단말기의 제어흐름도를 도시한다.
도 35는 본 발명의 일 실시예에 따른 외부로부터 진단요청이 수신되는 경우 휴대단말기의 제어흐름도를 도시한다.
도 36은 본 발명의 일 실시예에 따른 휴대단말기 및 전자장치가 잘못된 광학 헤드 장착 시 경고하는 예를 도시한다.
도 37은 본 발명의 일 실시예에 따른 휴대단말기 및 전자장치가 잘못된 광학 헤드 장착 시 경고하는 예를 도시한다.
도 38은 본 발명의 일 실시예에 따른 휴대단말기가 잘못된 자세로 신체 촬영시 가이드정보를 제공하는 예를 도시한다.
도 39는 본 발명의 일 실시예에 따른 휴대단말기가 잘못된 신체부위를 촬영시 정확한 부위에 대해서 안내하는 예를 도시한다.
이하, 본 발명의 바람직한 실시예를 첨부한 도면을 참조하여 상세히 설명한다. 다만, 하기의 설명 및 첨부된 도면에서 본 발명의 요지를 흐릴 수 있는 공지 기능 또는 구성에 대한 상세한 설명은 생략한다. 또한, 도면 전체에 걸쳐 동일한 구성 요소들은 가능한 한 동일한 도면 부호로 나타내고 있음에 유의하여야 한다.
이하에서 설명되는 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위한 용어로 적절하기 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다. 따라서, 본 명세서에 기재된 실시 예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일 실시예에 불과할 뿐이고, 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형 예들이 있을 수 있음을 이해하여야 한다.
첨부 도면에 있어서 일부 구성요소는 과장되거나 생략되거나 또는 개략적으로 도시되었으며, 각 구성요소의 크기는 실제 크기를 전적으로 반영하는 것이 아니다. 본 발명은 첨부한 도면에 그려진 상대적인 크기나 간격에 의해 제한되어지지 않는다.
명세서 전반에 걸쳐 어떤 구성요소가 다른 구성요소를 '포함'한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 포함하는 구성요소가 아닌 다른 구성요소를 제외하고자 함이 아니라, 그 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에서 사용되는 '부'는 소프트웨어 FPGA, 또는 ASIC과 같은 하드웨어 구성요소를 의미하며, '부'는 어떤 역할들을 수행하도록 구성될 수 있다. 그렇지만 '부'는 소프트웨어 또는 하드웨어에 한정되는 의미는 아니다. '부'는 어드레싱할 수 있는 저장 매체에 있도록 구성될 수 있고, 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다. 따라서, 일 예로서 '부'는 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로 코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함한다. 구성요소들과 '부'들 안에서 제공되는 기능은 더 작은 수의 구성요소들 및 '부'들로 결합되거나 추가적인 구성요소들과 '부'들로 더 분리될 수 있다.
아래에서는 첨부한 도면을 참고하여 본 발명의 실시예에 대하여 본 발명의 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
본 명세서에서의 디스플레이장치는 외부 장치로부터 무선으로 전력을 공급받으며, 수신되는 영상신호에 기초하여 영상을 제공하도록 구성된다.
도 1과 도 2는 본 발명의 일 실시예에 따른 복수의 광학 헤드가 부착 가능한 전자장치 및 휴대단말기의 사용예를 도시한다.
휴대단말기(2)는 스마트폰, PDA 등 사용자가 휴대할 수 있는 전자장치로서, 케이스(10)와 부착되도록 구성될 수 있다. 케이스(10)는 휴대단말기(2)를 외부 충격으로부터 보호하기 위한 것으로, 본 실시예에서의 케이스(10)는 전자장치(1)와 결합되도록 구성될 수 있으며, 전자장치(1)에 전력을 전달하고, 전자장치(1)로부터 정보를 수신하기 위해 휴대단말기(2) 및 전자장치(1)의 접속단자들을 연결하는 신호선(11)을 내장할 수 있다.
휴대단말기(2)는 복수의 광학 헤드(100a, 100b, 100c) 중 하나와 결합된 전자장치(1)를 사용하여 사용자 신체 일부를 촬영하며, 촬영된 이미지를 사용자에게 디스플레이부(101)를 통하여 제공하도록 구성될 수 있다.
전자장치(1)는 복수의 광학 헤드(100a, 100b, 100c)중 하나가 결합 가능하도록 구성된다. 전자장치(1)는 부착된 광학 헤드(100a, 100b, 100c)의 식별정보를 휴대단말기(2)와 연결된 신호선 또는 무선 통신을 통해 휴대단말기(2)에 제공하도록 구성될 수 있다. 휴대단말기(2)는 수신되는 식별정보를 통해 부착된 광학 헤드(100a, 100b, 100c)의 종류에 관한 정보를 사용자에게 제공할 수 있다. 부착된 광학 헤드(100a, 100b, 100c)의 종류의 정보를 접한 사용자가 사용자 신체를 촬영하도록 휴대단말기(2)의 유저 인터페이스를 조작하면, 사용자 신체에서 반사된 광은 광학 헤드(100a, 100b, 100c)를 통해 전자장치(1)에 입사하며, 전자장치(1)는 입사된 광을 휴대단말기(2)에 제공한다. 휴대단말기(2)의 카메라부는 전자장치(1)로부터 전달받은 광을 변환하여 이미지를 생성하며, 휴대단말기(2)는 생성된 이미지를 디스플레이부(101)를 통해 표시할 수 있다. 전자장치(1)는 또한, 광원부를 구비하여 부착된 광학 헤드(100a, 100b, 100c)로부터 수신되는 식별정보 또는 휴대단말기(2)로부터 수신되는 제어신호에 기초하여 광을 생성하여 출력하도록 구성될 수 있다.
이를 테면, 전자장치(1)는 그 결합부에 귀 속을 촬영하기 위해 검이경에 대응하는 광학 헤드(100c)가 부착되고, 전자장치(1)로부터 제공되는 검이경에 대응하는 광학 헤드(100c)의 식별정보를 수신한 휴대단말기(2)가 광을 출력하도록 제어신호를 전자장치(1)에 전송할 수 있다. 전자장치(1)는 광원부에서 생성되는 광을 부착된 광학 헤드(100c)를 통해 사용자 귀 속에 출력하고, 반사되어 광학 헤드(100c)를 통해 입사되는 광을 휴대단말기(2)로 제공하도록 구성될 수 있다.
복수의 광학 헤드(100a, 100b, 100c)는 사용자 신체를 촬영하기 위해 다양하게 구성될 수 있으며, 전자장치(1)에 부착되도록 구성된다. 예를 들면, 복수의 광학 헤드(100a, 100b, 100c)는 검이경에 대응하는 광학 헤드(100c), 검안경에 대응하는 광학 헤드(100b) 및 검피경에 대응하는 광학 헤드(100a)를 포함할 수 있다. 복수의 광학 헤드(100a, 100b, 100c)는 도면과 상술한 예에 한정되지 아니하며, 사용자의 신체 부위를 측정하기 위해 다양하게 구현될 수 있다.
도 3은 본 발명의 일 실시예에 따른 전자장치의 블록도를 도시한다.
전자장치(1)는 결합부(301), 통신부(303), 광학 모듈(300) 및 제어부(305)를 포함한다. 구체적으로, 전자장치(1)는 외부 장치 즉 휴대단말기(2)로부터 전송되는 제어신호에 기초하여 결합되는 광학 헤드(100a, 100b, 100c)의 종류와 상관 없이 공통적인 동작을 수행하고, 광학 헤드에 전원을 공급하거나 광학 헤드(100a, 100b, 100c)로부터 수신되는 반사광에 기초하여 이미지를 촬영하며, 외부 장치(2)에 전달하는 기능을 수행한다. 이러한 전자장치(1)는 복수의 광학헤드(100a, 100b, 100c)중 적어도 하나와 탈부착이 가능하며, 다양한 형태로 구현될 수 있다.
결합부(301)는 구비되는 렌즈의 곡률, 두께, 렌즈간 거리 등이 서로 다르게 구성되는 복수의 광학 헤드(100a, 100b, 100c) 중 적어도 하나와 선택적으로 탈부착 가능하도록 구현된다. 구체적으로, 이러한 결합부(301)는 광학 헤드(100a, 100b, 100c)에 구비된 결합부와 물리적으로 맞물리는 구조로 구성되며, 결합부(301)는 결합된 광학 헤드(100a, 100b, 100c)에 전원 또는 데이터를 송수신하기 위한 접속 단자를 포함할 수 있다. 예를 들면, 카메라 렌즈에 구비된 결합부와 카메라 본체에 구비된 결합부가 서로 맞물리면서 결합되는 것처럼 광학 헤드(100a, 100b, 100c)와 전자장치(1)까 결합될 수 있다. 또한, 결합부(301)는 광학 헤드(100a, 100b, 100c)에 구비된 결합부와 물리적인 구조로서뿐만 아니라, 자성체를 이용하여 자기력을 통한 체결 방식으로 결합될 수 있으며, 이에 한정되지 않고 체결 가능한 다양한 방식으로 구현될 수 있다.
여기서, 복수의 광학 헤드(100a, 100b, 100c) 각각은 측정하고자 하는 사용자의 신체에 따라 상이한 구조를 갖도록 구성될 수 있다. 구체적으로, 광학 헤드(100a, 100b, 100c)는 측정하고자 하는 사용자의 신체에 따라 상이한 형태로 구현될 수 있으며, 신체 에 따라 서로 다른 센서부를 포함할 수 있다.
예를 들면, 귀를 검사하기 위한 검이경에 대응하는 광학 헤드(100c)의 경우, 이미지를 촬영하기 위한 선단개구부가 다른 광학 헤드(100a, 100b)에 비해 좁으며, 일회용인 디스포져블 스페큘(disposable specule)이 입혀지도록 구성될 수 있다. 또한, 눈을 검사하기 위한 검안경에 대응하는 광학 헤드(100b)의 경우, 안저, 유리체, 수정체 등을 관찰하기 위해 구성된다. 보다 구체적으로, 검안경에 대응하는 광학 헤드(100b)는 전자장치(1)로부터 제공되는 광을 안저에 조사하고, 안저로부터 반사되어 돌아오는 광을 수광할 수 있도록 구성될 수 있다. 용도에 따라서 4배에서 16배까지 확대된 안저상을 얻도록 구성되며, 안저의 도립상, 직립상 등을 검사하도록 용도마다 사용하는 렌즈 역시 각각 다를 수 있다. 또한, 피부를 검사하기 위한 검피경에 대응하는 광학 헤드(100a)는 피부염 또는 피부암 등을 측정하기 위해 구성될 수 있다. 검피경에 대응하는 광학 헤드(100a)는 피부에 접촉되거나 피부로부터 일정 거리를 두고 이격되어 피부의 색소성 병변을 최소 5배에서 최대 20배까지 확대하여 촬영하고 이에 대한 감별을 수행할 수 있도록 구성될 수 있다. 촬영된 피부의 색소성 병변은 휴대단말기(2)에 전달되며, 휴대단말기(2)는 색소성 병변의 크기를 측정하는 등의 분석을 수행하여 관련 정보를 사용자에게 제공하도록 구성될 수 있다.
또한, 복수의 광학 헤드(100a, 100b, 100c) 각각은 신체 부위의 온도, 습도 등을 측정할 수 있는 센서부를 더 포함할 수 있으며, 구현에 따라 사용자의 뇌파, 근전도, 심박수 등 생체신호를 측정하는 센서를 더 포함하도록 구현될 수 있다.
광학 모듈(300)은 사용자의 신체에서 반사되어 부착된 광학 헤드(100a, 100b, 100c)를 통과한 광을 휴대단말기(2)로 전달하도록 구성된다. 이를 위해, 광학 모듈(300)은 입사된 광을 전달하기 위한 복수의 렌즈부를 구비할 수 있으며, 휴대단말기(2)로부터 전달되는 제어신호에 기초하여 광을 생성하기 위한 광원부를 더 구비할 수 있고, 생성된 광은 밖으로 출력하고, 광학 헤드(100a, 100b, 100c)로부터 입사되는 광은 휴대단말기(2)로 전달하는 스플리터부를 더 포함할 수 있다. 광학 모듈(300)의 보다 자세한 구성에 대해서는 후술한다.
통신부(303)는 외부 장치와 통신을 수행할 수 있다. 여기서, 외부 장치라 함은 광학 모듈(300)을 통해 입사되는 광을 전달받아 이미지를 생성하고, 생성한 이미지를 디스플레이, 저장, 분석 등을 수행하는 전자장치인 휴대단말기(2)를 의미한다. 상술한 바와 같이, 휴대단말기(2)는 스마트폰, PDA, 태블릿, 랩탑 및 디지털 카메라 등 영상 촬영 기능을 포함하는 복합적인 전자장치로 구현될 수 있다.
통신부(303)는 기타 외부 장치 또는 네트워크 등과 연결 가능하도록 마련되며, HDMI(high definition multimedia interface), USB(universal serial bus) 등 다양한 규격에 따른 접속 포트가 복수개로 마련될 수 있다. 통신부(303)는 유선 LAN(local area network)을 통해 복수의 서버들과 유선 통신을 수행할 수 있다. 또한, 통신부(303)가 수행하는 통신은 무선통신을 포함할 수 있다. 통신부(303)는 무선 통신을 수행하기 위해 RF(radio frequency)신호를 송수신하는 RF회로를 포함할 수 있으며, Wi-fi, 블루투스, BLE, ANT, WiMAx, Z-Wave, 지그비(Zigbee), UWM(Ultra-Wide Band), Wireless USB, WirelessHD, WirelessHART, NFC(Near Field Communication), RFID 중 하나 이상의 통신을 수행하도록 구성될 수 있다.
통신부(303)는 결합부(301)를 통해 부착된 광학 헤드(100a, 100b, 100c)로부터 식별정보를 수신하여, 수신된 식별정보를 휴대단말기(2)에 제공하도록 구성될 수 있으며, 휴대단말기(2)로부터 제어신호를 수신하도록 구성될 수 있다.
또한, 통신부(303)는 휴대단말기(2)로부터 전력을 공급받을 수 있도록 전력송수신단자를 포함할 수 있다. 전력송수신단자는 휴대단말기(2)의 전력송수신단자로부터 연결되는 신호선을 통해 유선으로 전력을 수신하도록 구성될 수 있으나, 구현에 따라 휴대단말기(2)로부터 무선으로 전력을 수신하도록 구성될 수 있다.
이를 테면, 전력송수신단자는 송신측 코일에 흐르는 전류의 변화에 따라 유도되는 자기장의 변화로 수신측에 전류가 유도되는 자기유도방식에 의해 전력을 무선으로 송수신 하도록 코일부와 교류 성질을 갖는 전류를 직류로 변환하기 위한 변환부를 더 포함하도록 구성될 수 있으며, 무선 전력 신호에 의하여 발생하는 전자기적 공진에 의해 전류가 유도되어 전력이 전달되는 자기공명방식에 의해 무선으로 전력을 수신하도록 구성될 수 있다.
전자장치(1)는 또한, 플래쉬 라이트에서 방사되는 빛 에너지를 광전지를 통하여 전기에너지로 변환하여 사용되도록 구성될 수 있다.
전자장치(1)는 또한 사용자명령입력부를 더 포함할 수 있다. 사용자명령입력부는 사용자의 명령을 수신하여, 수신된 명령을 제어부(305)에 전달하며, 제어부(305)는 사용자명령입력부를 통한 사용자의 제어에 기초하여 전자장치(1)의 동작을 제어할 수 있다. 사용자명령입력부는 키 버튼 등 전자장치(1)의 외부에 마련될 수 있으며, 디스플레이부의 터치스크린으로 구현될 수 있다.
사용자는 전자장치(1)의 사용자명령입력부를 통해 광학 모듈(300)의 광학 헤드(100)를 통해 출력되는 광 출력의 레벨, 영상의 색상 조절, 검사를 보조하기 위한 패턴의 형성 및 변형을 수행할 수 있으며, 촬영되는 영상의 초점 조절 등을 수행할 수 있다.
제어부(305)는 전자장치(1)의 전반적인 동작을 제어하도록 구성된다. 구체적으로, 제어부(305)는 결합부(301)를 통해 부착된 광학 헤드(100a, 100b, 100c)의 식별정보를 획득하며, 획득된 정보를 휴대단말기(2)에 제공하도록 통신부(303)를 제어한다. 또한, 제어부(305)는 부착된 광학 헤드(100a, 100b, 100c)의 식별정보 또는 휴대단말기(2)로부터 제공되는 제어신호에 기초하여 광학 모듈(300)로 하여금 빛을 생성하여 출력하도록 제어할 수 있다. 이를 테면, 부착된 광학 헤드(100a, 100b, 100c)가 검이경에 대응하는 광학 헤드(100c)인 경우, 귀 속을 측정하는 사용자 의도에 따라 바로 빛을 출력하며, 반사된 광을 휴대단말기(2)에 전달하거나, 휴대단말기(2)로부터 빛을 출력하라는 제어신호가 수신되면 그때부터 빛을 출력하도록 구성될 수 있다. 또한, 해당하는 검이경에 대응하는 광학 헤드(100c)에서 사용된 렌즈간 거리 등을 이용하여 촬영된 영상의 배율에 대한 정보를 전송하며, 촬영한 이미지의 크기를 계산하는 데 사용될 수 있다.
제어부(305)는 또한, 광학 모듈(300)의 초점 거리를 부착되는 광학 헤드(100a, 100b, 100c) 또는 휴대단말기(2)로부터 수신되는 제어신호에 기초하여 조절할 수 있다. 복수의 광학 헤드(100a, 100b, 100c) 각각은 그 쓰임새에 따라 포함되는 렌즈 및 초점 거리가 서로 다르므로 이에 기초하여 광학 헤드(100a, 100b, 100c)에 광을 제공하거나 광학 헤드(100a, 100b, 100c)로부터 광을 전달 받는 광학 모듈(300)역시 초점 거리를 부착된 광학 헤드(100a, 100b, 100c)에 따라 다르게 조절할 필요가 있다. 또한, 사용자가 영상을 더 확대 또는 축소 하도록 휴대단말기(2)를 조작하거나 전자장치(1)의 사용자명령입력부를 입력하면, 이에 기초하여 초점 거리를 조절하도록 구성될 수 있다. 이 때 초점 거리와 배율에 대한 정보를 휴대단말기(2)로 전달하도록 통신부(303)를 제어할 수 있다.
전자장치(1)는 사용자 신체로부터 전자장치(1)와의 거리, 각도를 센싱하는 센서부를 더 포함할 수 있으며, 제어부(305)는 촬영 당시 센서부로부터 센싱된 거리 및 각도와 관련된 정보를 휴대단말기(2)로 제공할 수 있다.
도 4는 본 발명의 일 실시예에 따른 휴대단말기의 블록도를 도시한다.
휴대단말기(2)는 외부와 통신이 가능하며, 사용자에게 통신을 통해 수신되는 정보를 표시하도록 구성될 수 있다. 휴대단말기(2)는 디스플레이부(101), 카메라부(200), 통신부(401) 및 제어부(400)를 포함할 수 있다.
디스플레이부(101)는 제어부(400)의 제어에 따라, 영상을 표시하도록 구성된다. 디스플레이부(101)는 영상이 표시되는 표시패널과 표시패널에 광을 공급하는 광원부인 백라이트 유닛(backlight unit)을 포함할 수 있으며, 상기 표시패널 및 광원부에 전력을 공급함으로써 구동하기 위한 구동부를 더 포함할 수 있다. 표시패널이 LCD등과 같은 비발광소자로 구성되는 경우, 광원부에서 광이 공급되어야 영상이 표시되며, 표시패널이 자체발광소자로 구성되는 경우, 구동회로가 직접 표시패널의 자체발광소자에 전극을 인가하도록 구성될 수 있다. 휴대단말기(2)는 또한, 소리 또는 음성을 출력하기 위한 스피커를 더 포함할 수 있다. 스피커는 휴대단말기(2)에 마련되거나, 유/무선 통신으로 연결되는 외부 장치로 구현될 수 있다.
디스플레이부(101)는 또한 표시패널에 입력되는 사용자의 터치입력을 감지하기 위한 터치스크린을 포함하며, 사용자에게 제공되는 다양한 기능에 대응하는 메뉴항목을 유저 인터페이스(user interface: UI)로 제공하도록 구성된다. 휴대단말기(2)는 UI에 입력되는 사용자의 터치입력에 대응하는 기능을 제공하도록 구성될 수 있다. 휴대단말기(2)가 제공하는 UI와 사용자의 UI를 통한 터치입력에 대응하는 다양한 기능에 대해서는 후술한다.
카메라부(200)는 촬영하는 영상을 디스플레이부(101)로 전송되도록 구성된다. 카메라부(200)는 렌즈를 포함하는 광학 모듈과, 입사된 광을 감지하고 렌즈에 결상된 피사체의 영상을 전기적 신호인 이미지로 변환하는 영상처리부 등을 포함할 수 있다. 영상처리부는 CCD(Charged Coupled Device)를 포함할 수 있다.
통신부(401)는 외부 장치와 통신을 수행할 수 있다. 외부 장치는 상기 휴대단말기(2)와 전화 통화(phone call)을 수행하는 상대 휴대단말기(2), 기타 통신 가능한 컴퓨팅 디바이스, 서버, 및 휴대단말기(2)에 사용자 신체에서 광학 헤드(100)를 통해 반사된 광을 제공하기 위한 전자장치(1) 등을 포함한다. 통신부(401)는 또한, 외부로부터 영상신호를 수신하기 위한 안테나 및 안테나를 통해 수신되는 신호를 처리하여 영상정보를 제공하기 위한 튜너, 디모듈레이터 등을 더 포함할 수 있다. 통신부(401)는 지상파 방송신호, 위성신호, 케이블 신호 중 적어도 하나 이상을 수신하도록 구성될 수 있다. 또한 통신부(401)는 DMB-T(Digital Multimedia Broadcasting-Terrestrial), DMB-S(Digital Multimedia Broadcasting-Satelite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), ISDB-T(Integrated Services Digital Broadcast-Terrestirial) 등의 디지털 방송 시스템을 이용하여 방송 신호 등을 수신할 수 있다. 수신된 방송신호는 포함된 영상을 표시하도록 처리되어 디스플레이부(101)에 제공되며, 디스플레이부(101)는 처리된 영상신호에 기초하여 영상을 표시하도록 구성될 수 있다.
통신부(401)는 전자장치(1)로부터 전자장치(1)에 부착된 광학 헤드(100)의 식별정보 등 직접 데이터를 수신하고, 전자장치(1)에 제어신호를 제공하도록 구성될 수 있으며, 전자장치(1)의 통신부와 마찬가지로 HDMI, USB 등 다양한 규격에 따른 접속 포트가 복수개로 마련될 수 있으며, 유선 LAN을 통해 복수의 서버들과 유선 통신을 수행할 수 있다. 또한, 통신부(401)는 무선 통신을 수행하기 위해 RF신호를 송수신하는 RF회로를 포함할 수 있으며, Wi-fi, 블루투스, BLE, ANT, WiMAx, Z-Wave, 지그비(Zigbee), UWM(Ultra-Wide Band), Wireless USB, WirelessHD, WirelessHART, NFC(Near Field Communication), RFID 중 하나 이상의 통신을 수행하도록 구성될 수 있다.
통신부(401)는 또한, 결합된 전자장치(1)에 전력을 전송할 수 있도록 전력송수신단자가 포함될 수 있으며, 전력송수신단자는 유선으로 또는 무선으로 전력을 전송하도록 구성될 수 있다.
제어부(400)는 본 발명에 따른 휴대단말기(2)의 전반적인 동작을 제어하도록 구성될 수 있다. 보다 구체적으로, 제어부(400)는 휴대단말기(2)가 외부 장치들과 통신하며, 수신되는 신호 및 데이터에 기초한 정보를 사용자에게 제공하고, 사용자의 입력에 기초하여 선택된 사용자에게 휴대단말기(2)가 제공할 수 있는 복수의 기능 중 적어도 하나를 제공하기 위해 휴대단말기(2)의 각 구성을 제어하도록 구성된다.
상기 휴대단말기(2)가 제공할 수 있는 복수의 기능은 사용자의 건강 상태를 측정하고, 측정된 건강 상태에 기초하여 정보를 제공할 수 있는 건강 진단 서비스를 포함할 수 있다. 건강 진단 서비스란, 사용자의 신체 일부를 촬영하며, 촬영된 이미지를 분석하여 사용자에게 진단 정보를 제공하는 서비스를 의미한다. 제어부(400)는 사용자의 신체 일부를 촬영하기 위해 사용자에게 촬영을 위한 가이드 정보를 제공할 수 있으며, 촬영된 이미지를 보다 확대하여 표시하기 위해 외부 디스플레이장치에 이미지를 전송할 수 있고, 병원 등 외부로 이미지를 전송하여 사용자가 원격 의료 진단 서비스를 받을 수 있도록 할 수 있다.
본 발명의 일 실시예에 따른 휴대단말기(2)는 카메라부(200)를 통해 사용자의 신체 일부를 촬영하도록 구성되며, 촬영된 이미지를 통해 질병을 미리 예측하거나, 회복의 정도 등을 분석하여 사용자에게 제공할 수 있다.
이를 테면, 사용자 피부에 있는 점의 크기 변화를 체크하여 사용자에게 피부염 또는 피부암을 예측할 수 있으며, 귀 속 이미지를 이용하여 중이염 여부를 판단할 수 있고, 피부에 상처 등이 아물어 가는지 여부 역시 촬영된 이미지를 통하여 분석할 수 있다.
제어부(400)는 이미지를 직접 분석하여 사용자에게 관련 정보를 제공하거나, 촬영된 이미지를 더 크게 표시하도록 외부의 디스플레이장치에 전달하거나, 병원 등에 네트워크를 통해 이미지를 제공하기 위한 일련의 동작을 수행하도록 구성될 수 있다.
건강 진단 서비스는 사용자자가 복수의 기능 중 건강 진단 서비스를 개시하도록 선택하거나, 사용자가 복수의 광학 헤드(100a, 100b, 100c) 중 어느 하나를 전자장치(1)에 부착하거나, 또는 병원 등 외부로부터 촬영 요청이 수신됨에 응답하여 개시될 수 있다.
사용자의 선택 또는 외부로부터 촬영 요청에 응답하여 건강 진단 서비스가 개시되는 경우, 제어부(400)는 부착하여야 할 광학 헤드(100), 촬영해야 하는 사용자 신체, 사용자 신체와 휴대단말기(2)사이 유지하여야 하는 거리, 각도 등을 포함하는 가이드 정보를 사용자에게 제공할 수 있다. 가이드 정보에 기초하여 사용자가 광학 헤드(100)를 부착하면, 부착된 광학 헤드(100)로부터 전달되는 식별정보에 기초하여 개시되는 건강 진단 서비스에 대응하는 광학 헤드(100)가 부착되었는지 판단하고 사용자가 개시된 건강 진단 서비스에 대응하는 광학 헤드(100)와 다른 광학 헤드(100)를 부착하였다고 판단되면, 사용자에게 맞는 광학 헤드(100)를 부착하도록 가이드 정보를 다시 제공할 수 있다.
또한, 사용자가 광학 헤드(100)를 전자장치(1)에 부착한 경우, 광학헤드(100) 및 전자장치(1)가 어떤 종류인지에 대한 정보를 휴대단말기(2)로 전송하며, 그에 해당하는 컨트롤 프로그램을 자동으로 로딩하도록 구성되어 사용자의 편의성을 증가시킬 수 있다. 즉, 휴대단말기(2)는 전자장치(1)에 검이경에 대응하는 광학 헤드(100c)가 부착되면, 귀를 검사하기 위한 컨트롤 프로그램을 실행하여, 가이드 정보 등 사용자의 귀를 검진하기 위한 UI를 디스플레이부(101)를 통해 사용자에게 제공하도록 구성될 수 있다.
또한, 휴대단말기(2)는 부착된 전자장치(1)의 종류에 따라 다른 컨트롤 프로그램을 로딩할 수 있다. 같은 광학 헤드(100)를 사용하더라도 사용 중인 전자장치(1)의 종류에 따라 서로 다른 서비스가 사용자에게 제공될 수 있는바, 광학 헤드(100)의 종류뿐 아니라 휴대단말기(2)에 부착된 전자장치(1)의 정보 역시 휴대단말기(2)로 전달되어 관련된 컨트롤 프로그램이 로딩된다. 이를 테면, 검이경에 대응하는 광학 헤드(100c)가 일반적인 전자장치(1)에 부착된 경우 내이/중이 영상을 촬영하기 위한 컨트롤 프로그램만 로딩되나, 체온 센서 등이 추가된 전자장치(1)에 연결되면, 영상의 촬영 외에 체온을 측정하고, 측정된 체온에 관한 정보를 사용자에게 제공하기 위한 컨트롤 프로그램이 로딩되도록 하여 사용자가 해당 전자장치(1)를 적절히 이용하기 위한 프로그램을 찾는 수고를 덜고, 부착된 전자장치(1) 및 광학 헤드(100)가 어떤 기능을 수행할 수 있는지 여부를 직관적으로 알 수 있어, 사용자의 편의성 및 사용성이 향상된다.
사용자가 광학 헤드(100)를 전자장치(1)에 부착함에 따라 건강 진단 서비스가 개시되는 경우, 광학 헤드(100)의 식별정보가 전자장치(1)를 지나 휴대단말기(2)에 제공되며, 제어부(400)는 사용자가 UI를 통해 선택한 것과 유사하게, 사용자에게 건강 진단 서비스가 개시되었음을 알리고, 신체 촬영을 위한 가이드 정보를 제공하도록 구성될 수 있다.
제어부(400)는 또한, 사용자가 올바르게 신체를 촬영하도록 가이드 정보를 제공할 수 있다. 가이드 정보는 촬영하고자 하는 사용자 신체 일부로부터의 거리 및 휴대단말기(2)의 촬영 시 각도 등에 관한 정보를 또한 포함할 수 있다. 특히 사용자가 사용자 피부의 점, 상처 등을 시차를 가지고 촬영하는 경우, 지난 촬영과 유사한 위치에서 촬영을 해야 피부의 점 또는 상처의 크기 변화를 올바르게 분석할 수 있다. 제어부(400)는 사용자가 가이드 정보를 참조하여 지난 촬영과 같은 거리 및 각도에 휴대단말기(2)를 위치시키면, 알림음을 잘못된 위치에 휴대단말기(2)를 위치시키면, 경고음을 사용자에게 제공하도록 스피커를 제어할 수 있다. 또한, 제어부(400)는 사용자가 정확한 위치를 촬영하도록 지난 촬영때 얻은 영상을 현재 촬영중인 영상에 겹쳐 디스플레이부(101)를 통해 표시할 수 있다.
제어부(400)는 또한, 촬영된 사용자 신체 이미지를 표시하도록 디스플레이부(101)를 제어할 수 있으며, 촬영된 이미지를 외부 디스플레이장치에 제공하거나 병원 등의 외부로 네트워크를 통해 전송할 수 있음은 상술한 바 있다.
도 5는 본 발명의 일 실시예에 따른 광학 헤드의 블록도를 도시한다.
광학 헤드(100)는 필요에 따라 외형이 각각 다르게 형성되어, 전자장치(1)에 결합되도록 구성된다. 광학 헤드(100)는 렌즈부(500) 및 결합부(501)를 더 포함할 수 있다. 광학 헤드(100)는 결합부(501)를 통해 전자장치(1)로부터 전력을 제공받아 구동될 수 있으며, 사용자 신체로부터 반사되는 광을 전자장치(1)로 전달하도록 구성된다. 광학 헤드(100)는 각 광학 헤드(100)의 식별정보를 저장하기 위한 저장부(505)와 사용자 신체의 생체정보를 센싱하기 위한 센서부(503)를 더 포함할 수 있다.
렌즈부(500)는 전자장치(1)로부터 출력되는 광을 사용자 신체에 조사하고, 사용자 신체로부터 반사되어 입사되는 광을 전자장치(1)로 제공하도록 구성된다. 렌즈부(500)는 복수의 렌즈를 포함할 수 있으며, 광학 헤드(100)의 종류에 따라 초점 거리를 다르게 맞추어야 하므로, 광학 헤드(100)마다 크기, 렌즈간 거리, 렌즈의 두께, 굴절률, 광학 코팅, 편광 축 등이 다를 수 있다.
결합부(501)는 광학 헤드(100)를 전자장치(1)에 탈부착 가능하도록 구성된다. 결합부(100)는 전자장치(1)의 결합부(501)와 물리적으로 맞물리는 구조를 가지며, 전자장치(1)에 광학 헤드(100)의 식별정보를 제공하기 위한 접속단자를 포함할 수 있다. 결합부(501)는 또한, 전자장치(1)의 결합부(501)와 자성체를 이용하여 자기력을 통한 체결 방식으로 결합될 수 있음은 상술한 바 있다.
저장부(505)는 광학 헤드(100)의 식별정보를 저장하도록 구성될 수 있다. 저장부(505)는 광학 헤드(100)에 공급되는 전원이 차단되더라도 데이터들이 남아있어야 하며, 변동사항을 반영할 수 있도록 쓰기 가능한 비휘발성 메모리(Writable Rom)로 구비될 수 있다. 즉, 저장부는 플래쉬 메모리(Flash Memeory), EPROM 또는 EEPROM 중 어느 하나로 구비될 수 있다. 저장부(505)는 광학 헤드(100)의 종류, 제조사, 시리얼 넘버, 광학 필터 정보, 편광 축 정보, 렌즈의 굴절률 및 배율에 관련된 정보 등 렌즈부(500)의 구성에 관한 정보를 포함할 수 있다.
센서부(503)는 사용자의 생체신호를 측정하도록 구성될 수 있다. 보다 구체적으로, 사용자 귀 속에 들어가는 검이경에 대응하는 광학 헤드(100)의 경우, 센서부(503)는 사용자 뇌파 즉, EEG(electroencephalogram), EOG(electrooculogram)등을 획득할 수 있도록 구성될 수 있다. 또한, 센서부(503)는 접촉한 사용자 신체의 온도, 습도 등 각종 정보를 취득할 수 있도록 구성될 수 있다. 센서부(503)에서 사용자 신체를 센싱하여 획득한 정보는 저장부(505)에 저장되거나 결합부(501)를 통해 전자장치(1)로 전달될 수 있다. 전자장치(1)로 전달된 정보는 휴대단말기(2)로 전달된다. 이 때, 민감한 의료정보를 보호하기 위해 암호화되어 저장될 수 있다.
도 6은 휴대단말기, 전자장치 및 광학헤드의 동작을 설명하기 위한 블록도를 도시한다.
휴대단말기(2)와 전자장치(1)가 결합되고, 전자장치(1)는 휴대단말기(2)로부터 전달되는 전력에 의해 구동된다. 전자장치(1)의 결합부(301)에 광학 헤드(100)의 결합부(501)가 부착되면, 전자장치(1)는 광학 헤드(100)로부터 식별정보를 수신하며, 수신된 식별정보를 휴대단말기(2)로 전달한다.
휴대단말기(2)는 전자장치(1)에 부착된 광학 헤드(100)의 식별정보에 기초하여 사용자에게 신체 일부의 촬영을 위한 가이드 정보를 디스플레이부(101)를 통해 제공할 수 있다. 가이드 정보는 부착된 광학 헤드(100)의 정보와 신체 일부를 촬영하기 위해야 하는 자세, 신체 일부와 전자장치(1)와의 거리 및 각도 등 사용자에게 영상을 촬영하게 하기 위한 정보를 포함한다. 이 때, 휴대단말기(2)에 설치되어 있는 가속도, 자이로 및 지자기 센서를 이용하여 휴대단말기(2) 각도를 감지하며, 이 전 촬영에서의 휴대단말기(2) 각도와 비교하여 사용자에게 관련 정보를 제공할 수 있다.
전자장치(1)는 광학 헤드(100)를 통해 사용자 신체에서 반사되는 광을 휴대단말기(2)의 카메라부(200)에 전달하며, 카메라부(200)는 수신되는 광을 전기적인 신호를 갖는 이미지로 변환하여 디스플레이부(101)에 전달한다. 휴대단말기(2)는 디스플레이부(101)를 통해 촬영한 이미지 및 이미지를 분석한 정보를 사용자에게 제공할 수 있으며, 또한 외부 장치에 촬영된 이미지를 전송할 수 있다.
다른 일 실시예에 따르면, 전자장치(1)는 휴대단말기(2)로부터 수신되는 제어신호에 기초하여 광을 생성하여 출력할 수 있다. 출력되는 광은 광학 헤드(100)를 통해서 사용자의 신체로 조사되며, 사용자 신체에서 반사되는 광은 마찬가지로 광학 헤드(100)를 통해 전자장치(1)로 입사되고, 전자장치(1)는 입사된 반사광을 휴대단말기(2)의 카메라부(200)에 제공하도록 구성된다. 이 때, 출력된 광(700)에 특정 패턴이 포함될 수 있으며, 휴대단말기(2)는 광(700)에 포함된 특정 패턴을 이용하여 피부의 굴곡을 3차원으로 촬영한 3차원정보를 수집할 수 있다. 휴대단말기(2)는 특정 패턴을 이용하여 상처의 치유 및 여드름, 점 등 색소성 병변의 길이 및 폭뿐 아니라 높이를 측정하며, 측정된 3차원정보를 분석하여, 보다 정확하게 분석된 진단정보를 사용자에게 제공하도록 구성될 수 있다. 이 때, 광(700)에 포함되는 패턴은 사용자의 눈에 감지되지 않도록 IR(Infrared ray)를 이용하여 만들 수도 있다.
도 7, 도 8 및 도 9는 본 발명의 일 실시예에 따른 휴대단말기, 전자장치 및 광학 헤드의 사용예를 도시한다.
복수의 광학 헤드(100)는 촬영하고자 하는 사용자 신체 일부에 기초하여 선택되어 전자장치(1)에 부착될 수 있다.
도 7을 참조하면, 사용자 피부의 일부(701)를 촬영 하기 위해 검피경에 해당하는 광학 헤드(100)를 전자장치(1)에 부착할 수 있다. 전자장치(1)에서 생성되어 출력된 광(700)은 광학 헤드(100)를 통과하여 사용자 피부 일부(701)에 조사되며, 피부 일부(701)에서 반사된 광은 다시 광학 헤드(100)를 통해 전자장치(1)로 입사된다. 전자장치(1)는 부착된 광학 헤드(100)를 통해 입사된 광을 휴대단말기(2)의 카메라부(200)에 제공하도록 구성된다.
휴대단말기(2)는 촬영한 사용자 피부의 일부(701)의 이미지를 디스플레이부(101)를 통해 사용자에게 제공하도록 구성된다. 검피경에 대응하는 광학 헤드(100)는 사용자의 피부의 일부(701)에 접촉되며, 접촉한 피부의 일부(701)의 이미지가 왜곡 없이 확대되어 촬영되도록 구성될 수 있다.
도 8을 참조하면, 사용자의 눈(801)을 촬영하기 위해 검안경에 해당하는 광학 헤드(100)를 전자장치(1)에 부착할 수 있다.
검안경에 대응하는 광학 헤드(100b)는 사용자의 유리체, 망막, 맥락막, 시신경유두 등 안저를 검사하기 위하여 구성된다. 안저 검사를 통해 녹내장, 황반변성, 망막박리 등의 질병을 진단할 수 있다.
검안경에 대응하는 광학 헤드(100b)는 이를 위해 전자장치(1)에서 생성된 광(800)을 사용자 안저에 조사하고, 반사광을 전자장치(1)에 제공하도록 구성될 수 있다. 전자장치(1)는 광학 헤드(100b)를 통해 입사된 광을 휴대단말기(2)의 카메라부(200)에 제공하도록 구성된다.
또한, 카메라부(200)는 수신된 광에 기초하여 사용자 눈(801)의 이미지를 전기적 신호로 변환하여 제공하도록 구성되며, 디스플레이부(101)는 전기적 신호로 변환된 사용자 눈(800)의 이미지를 표시하도록 구성된다. 이 때, 망막의 병변의 위치를 쉽게 촬영할 수 있도록, 가이드 이미지를 망막에 조사할 수 있다.
도 9를 참조하면, 사용자의 귀 속(901)을 촬영하기 위해 검이경에 해당하는 광학 헤드(100c)를 전자장치(1)에 부착하여 촬영한다.
검이경에 대응하는 광학 헤드(100c)는 귀지, 귓털을 밀쳐내고 사용자의 외이도, 중이, 고막을 관찰하기 위해 외이도내에 삽입되는 원뿔모양의 금속통으로 구성될 수 있다. 선단개구부의 지름은 2~7mm로 다양하게 구성될 수 있다.
전자장치(1)에서 생성되어 출력된 광(900)은 광학 헤드(100c)의 선단개구부를 통해 사용자의 귀 속(901)에 조사되며, 반사된 광은 다시 광학 헤드(100c)를 통해 전자장치(1)로 입사되고, 전자장치(1)는 입사된 광을 휴대단말기(2)의 카메라부(200)에 제공하도록 구성된다.
또한, 카메라부(200)는 수신된 광에 기초하여 사용자 귀 속(901)의 이미지를 전기적 신호로 변환하여 제공하도록 구성되며, 디스플레이부(101)는 전기적 신호로 변환된 사용자 귀 속(901)의 이미지를 표시하도록 구성된다. 상술한 바와 같이 광학 헤드(100)는 광학 온도 센서 등을 포함하는 센서부가 구비될 수 있다. 휴대단말기(2)는 헤드(100)의 센서부에서 측정된 체온과 촬영된 이미지를 이용하여 중이염 등 온도의 측정이 필요한 질병의 진단을 수행할 수 있다.
도 10은 본 발명의 일 실시예에 따른 전자장치의 광학 모듈의 블록도를 도시한다.
광학 모듈(300)은 사용자 신체에서 반사되는 광을 휴대단말기(2)에 전달하는 역할을 수행하며, 휴대단말기(2)로부터 수신되는 제어신호에 기초하여 광을 생성하여 부착된 광학 헤드(100)를 통해 출력하도록 구성될 수 있다.
도 10을 참조하면, 광학 모듈(300)은 제1 및 제2렌즈부(1000a, 1000b), 스플리터부(1001), 패턴생성부(1003), 광원부(1005) 및 렌즈조절부(1007)를 포함할 수 있다.
제1 및 제2렌즈부(1000a, 1000b)는 사용자 신체 일부를 관찰하기 위해, 사용자의 신체에서 반사되는 광이 입력되면 이를 휴대단말기(2)에 전달하기 위한 접안렌즈 및 물체의 상을 맺기 위해 사용되는 대물렌즈 및 접안렌즈와 대물렌즈 사이에 위치하여 대물렌즈에 반전된 상을 역전시키는 릴레이렌즈 등 복수의 렌즈를 포함할 수 있다. 광학 모듈(300)은 적어도 하나 이상의 렌즈부(1000a, 1000b)를 포함할 수 있으며, 도면에 도시된 제1 및 제2렌즈부(1000a, 1000b)로부터 본 발명의 광학 모듈(300)이 한정되지 않는다. 즉, 도면과 상술된 설명은 단지 예시일 뿐으로, 광학 모듈(300)에 포함되는 렌즈의 수와 특징을 한정하기 위함이 아니다.
렌즈조절부(1007)는 각 렌즈부(1000a, 1000b)의 렌즈들의 초점 거리를 조절하도록 구성된다. 보다 구체적으로, 부착되는 광학 헤드(100)에 따라 광학 헤드(100)로부터 전달되는 광에 기초하여 상이 맺히는 초점의 거리를 조절하기 위해, 렌즈들 간의 거리, 렌즈의 크기, 두께, 곡률 등을 조절할 수 있다. 이를 위해, 각 렌즈부(1000a, 1000b)는 서로 다른 크기, 두께, 곡률을 갖는 복수의 렌즈를 포함하도록 구성되며, 렌즈조절부(1007)의 제어에 따라 렌즈의 위치를 조절할 수 있도록 구성될 수 있다.
광원부(1005)는 사용자의 신체 일부에 광을 생성하여 출력하도록 구성된다. 광원부(1005)는 전원이 인가되면 광을 생성하는 LED(light emitting diode)를 포함할 수 있다.
스플리터부(1001)는 광원부(1005)에서 생성된 광은 반사하여 제2렌즈부(1000b)를 통해 광학 헤드(100)에 전달하며, 광학 헤드(100)로부터 전달된 광은 투과시켜 제1렌즈부(1000a)를 통해 휴대단말기(2)에 제공하도록 구성된다.
패턴생성부(pattern generator)(1003)는 패턴을 생성하여 광원부(1005)에서 생성된 광에 가하도록 구성된다. 이를 테면, 피부에 광을 조사하기 위해 광원부(1005)에서 빛을 생성하면, 직교 그리드 형태 등 여러가지 패턴을 만들어 사용자 피부의 병변, 점 여드름, 상처 등 특징점의 크기를 분석하도록 구성될 수 있다. 또한 이 패턴을 이용하여 촬영한 영상의 3차원 정보를 취득할 수 있다. 패턴생성부는 다양한 패턴을 저장하며, 휴대단말기(2)로부터 전달되는 제어 신호에 따라 선택되는 패턴을 출력되는 광에 가하도록 구성된다.
도 11은 본 발명의 일 실시예에 따른 렌즈부의 예를 도시한다.
상술한 바와 같이, 광학 모듈(300)은 제1 및 제2렌즈부(1000a, 1000b)를 포함할 수 있다. 각 렌즈부(1000a, 1000b)는 렌즈조절부(1007)의 제어에 따라 다른 크기, 두께, 곡률을 갖는 렌즈로 사용하는 렌즈를 변경할 수 있다.
복수의 광학 헤드(100)는 그 각각 쓰임새가 다르며, 다른 쓰임새에 따라 서로 다른 크기의 렌즈가 사용된다. 이에 따라, 부착된 광학 헤드(100) 또는 사용자의 선택에 따라서 광학 모듈(300)에서부터 제공되는 광 및 반사되어 광학 헤드(100)를 통해 광학 모듈(300)로 입사되는 광의 초점거리를 조절할 필요가 있다.
초점거리를 조절하기 위해, 전자장치(1)는 종래 기술에 따라 휴대단말기(2)로부터 수신되는 제어신호에 기초하여 자동으로 초점을 조절하도록 구성될 수 있다. 또한, 각 렌즈부(1000a, 1000b)는 사용되는 렌즈의 크기, 두께, 곡률을 조절할 수 있으며, 이를 위해 렌즈부(1000a, 1000b)는 복수의 서로 크기가 다른 렌즈(1100a~1100h)를 포함하도록 구성될 수 있다.
도 11을 참조하면, 복수의 렌즈(1100a~1100h)가 마련되는 돌림판이 도시된다. 렌즈조절부(1007)는 제어부(305)의 제어에 기초하여 필요한 크기의 렌즈(1100a~1100h)를 착용하기 위해 돌림판을 회전하도록 구성될 수 있다. 도 11에는 서로 다른 크기의 복수의 렌즈(1100a~1100h)가 돌림판에 구비되도록 도시되나, 돌림판은 서로 다른 크기뿐 아니라, 두께 및 곡률이 서로 다른 렌즈가 구비될 수 있다.
도 12는 본 발명의 다른 일 실시예에 따른 렌즈부의 예를 도시한다.
각 렌즈부(1000a, 1000b)는 크기뿐 아니라 두께가 서로 다른 복수의 렌즈(1200a~d, 1201a~d)를 사용하도록 구성될 수 있다. 렌즈(1200a~d, 1201a~d)의 두께 역시 초점거리를 변경하는 데 영향이 미칠 수 있다. 도 11에 도시된 돌림판 역시 서로 다른 두께를 갖는 복수의 렌즈(1200a~d, 1201a~d)를 포함할 수 있음은 상술한 바 있다.
도 12는 서로 다른 두께를 갖는 복수의 렌즈(1200a~d, 1201a~d)가 렌즈조절부(1007)의 제어에 따라 입출력되는 광의 경로로 이동하여 사용될 수 있는 예를 도시한다. 도 11의 돌림판과 달리 본 실시예에서의 각 렌즈부(1000a, 1000b)는 서로 다른 두께를 갖는 복수의 렌즈(1200a~d, 1201a~d)를 적어도 하나 이상 사용하도록 구성될 수 있다. 도 12에서는 복수의 렌즈(1200a~d, 1201a~d)가 모두 볼록렌즈로 구비되는 것으로 도시되나, 이에 한정되지 아니하며, 복수의 렌즈(1200a~d, 1201a~d)는 다양한 형태의 볼록렌즈, 오목렌즈 또는 복합적인 렌즈를 포함할 수 있다.
도 13은 본 발명의 다른 일 실시예에 따른 렌즈부의 예를 도시한다.
각 렌즈부(1000a, 1000b)는 서로 다른 두께, 크기를 갖는 복수의 렌즈(1100a~h, 1200a~d, 1201a~d)를 포함하여 필요에 따른 렌즈를 사용함으로써, 렌즈부(1000a, 1000b)의 초점거리를 조절하도록 구성될 수 있다. 또한, 렌즈부(1000a, 1000b)는 입출력 되는 광의 경로에 위치하는 즉, 사용되는 렌즈의 서로간 거리를 조절하여 초점 거리를 조절할 수 있다.
복수의 렌즈간 위치가 멀어지고 가까워 짐에 따라 상이 맺히는 초점이 조절될 수 있다. 따라서, 부착된 광학 헤드(100)에 기초하여 사용자 신체 일부를 촬영하기 위해, 상술한 바와 같이 사용되는 렌즈의 크기 및 두께를 변경할 수 있으며, 본 실시예에서와 같이, 렌즈의 위치를 조절하여 초점을 조절할 수 있다. 렌즈의 위치는 공지된 다양한 기술을 사용하여 변경될 수 있다.
도 11, 도 12 및 도13은 단지, 본 발명의 일 실시예에 따른 전자장치(1)가 서로 다른 렌즈(1100a~h, 1200a~d, 1201a~d)를 조합하여 사용할 수 있음을 설명하기 위한 도면에 불과하며, 조사되거나 반사되어 입사되는 광의 초점거리를 조절하기 위한 다양한 방식을 사용하는 전자장치(1)가 구현될 수 있다.
도 14는 본 발명의 일 실시예에 따른 전자장치의 예를 도시한다.
전자장치(1)는 전자장치(1)의 현재 상태(1401)를 표시하기 위한 디스플레이부(1400)를 구비할 수 있다. 현재 상태(1401)란, 전자장치(1)가 휴대단말기(2)와 접속했는지, 어떤 광학 헤드(100)가 부착 되었는지 등에 관한 정보로서, 디스플레이부(1400)는 문자 또는 이미지를 통해 전자장치(1)의 현재 상태(1401)를 표시할 수 있다.
다른 일 실시예에 따르면, 디스플레이부(1400)는 사용자 신체에 조사되는 광에 가해지는 패턴에 관한 정보, 렌즈에 맺히는 상이 초점이 맞는지에 관한 정보, 렌즈부(1000a, 1000b)에서 사용되는 렌즈에 관한 정보 등 전자장치(1)가 제공할 수 있는 다양한 기능에 관련된 정보를 표시하도록 구성될 수 있다. 사용자는 전자장치(1)의 디스플레이부(1400)를 통해 정보가 제공됨에 따라 전자장치(1)를 더 편리하게 사용할 수 있다.
도 15, 16 및 17은 본 발명의 일 실시예에 따른 휴대단말기, 전자장치 및 광학 헤드의 사용예를 도시한다.
도 15를 참조하면, 사용자 피부를 촬영하기 위해 휴대단말기(2), 전자장치(1) 및 광학 헤드(100)가 결합되어 사용되는 예가 도시된다. 사용자는 피부를 촬영하기 위해 검피경에 해당하는 광학 헤드(100)를 전자장치(1)에 부착하고, 전자장치(1)는 휴대단말기(2)의 케이스(10)에 결합되어 휴대단말기(2)로부터 전력을 공급받아 구동된다.
이어서, 사용자가 사용자 피부의 일부를 촬영하기 위해 휴대단말기(2)를 조작하면, 사용자 피부에서 반사된 광이 광학 헤드(100) 및 전자장치(1)를 통해 휴대단말기(2)의 카메라부(200)에 전달된다. 카메라부(200)는 입사된 광을 전기적 신호를 갖는 이미지로 변환하고, 디스플레이부(101)는 변환된 이미지를 사용자에게 제공하도록 구성된다.
사용자 피부의 점(701) 또는 피부 일부분에서 검출되는 병변은 피부암의 초기 증상일 수 있는바, 사용자는 피부의 점(701)의 모양을 판단하고, 크기를 측정하며, 측정된 점(701)의 크기 또는 모양이 변하는지 여부를 분석하기 위해 촬영을 수행할 수 있다. 점(701)의 모양 및 크기를 좀 더 명확히 판단하기 위해, 전자장치(1)는 패턴(1500)을 생성하는 패턴생성부(1003)를 더 포함할 수 있으며, 생성된 패턴과 점(701)을 비교하여 점의 크기를 판단할 수 있다. 또한 생성되어 가해진 패턴을 이용하여 3차원 정보를 취득할 수 있다.
도 16을 참조하면, 상기 촬영된 피부(1600)가 디스플레이부(101)를 통해 표시되는 예가 도시된다.
사용자가 손의 점(701)을 확대하여 촬영하기 위해 피부(1600)를 촬영하면, 휴대단말기(2)의 제어부(400)는 디스플레이부(101)를 통해 휴대단말기(2)가 사용자 신체를 촬영할 때 위치했던 각도 및 사용자 신체와의 거리에 관한 정보(1603)와, 사용자 손의 점(1601)을 포함하는 사용자 피부 이미지(1600)를 표시할 수 있다. 또한 앞서 취득한 3차원정보를 이용하여 점, 피부 병변, 상처 등의 높이를 포함하는 3차원 이미지를 디스플레이부(101)를 통해 표시할 수 있다.
휴대단말기(2)의 각도 및 사용자 신체로부터의 거리는 이후 같은 위치에서 사용자 신체를 촬영하기 위해 사용될 수 있으며, 사용자에게 가이드 정보로서 제공될 수 있다.
도 17은 패턴생성부(1003)가 생성한 패턴(1500)이 사용자 피부(1600)와 함께 디스플레이부(101)를 통해 표시되는 예가 도시된다.
사용자가 피부의 점(701)의 크기를 정확히 재기 위해 휴대단말기(2)를 조작하면, 휴대단말기(2)는 통신부(401)를 통해 사용자의 조작에 기초한 제어신호를 전자장치(1)로 전송하며, 전자장치(1)의 패턴생성부(1003)는 제어신호에 기초하여 패턴(1500)을 생성하여 출력되는 광에 가할 수 있다. 사용자는 디스플레이부(101)를 통해 표시되는 패턴(1500)과 점(1601)을 비교하여 직접 점(1601)의 크기를 잴 수 있다.
다른 일 실시예에 따르면, 휴대단말기(2)의 제어부(400)는 패턴(1500)을 직접 이용하여 점(1601)의 가로(1703), 세로(1701) 길이와 3차원 정보를 이용한 높이를 측정하도록 구성될 수 있다. 제어부(400)는 이어서, 측정된 점의 크기에 관한 정보(1700)를 사용자에게 디스플레이부(101)를 통해 제공할 수 있다.
도 18 및 도 19는 본 발명의 일 실시예에 따라 안구를 촬영하여 촬영된 안구의 이미지 및 정보를 제공하는 예를 도시한다.
전자장치(1)는 부착된 검안경에 대응하는 광학 헤드(100)의 개구부를 통해 광을 안저에 조사하고, 안저로부터 반사되어 광학 헤드(100)를 통해 입사되는 광을 휴대단말기(2)의 카메라부(200)에 제공한다. 카메라부(200)는 수신되는 광에 기초하여, 안구 속의 유리체, 시신경유두, 망막, 맥락 및 혈관의 이미지를 생성하고, 디스플레이부(101)는 생성된 이미지를 제공하도록 구성된다.
도 18은 휴대단말기(2)가 상기 검안경에 해당하는 광학 헤드(100)를 전자장치(1)에 부착하여 촬영된 이미지(1800)와 정보(1803)를 디스플레이부(101)를 통해 제공하는 예를 도시한다.
안구의 이미지(1800)는 유리체, 신경, 혈관 등을 포함하며, 안구의 일부가 혼탁한 지점(1801)등이 있는 경우, 안구 질병의 초기 증상일 수 있는바, 혼탁한 지점(1801)의 모양과 크기를 분석할 필요가 있다. 또한, 시차를 가지고 안구를 촬영하여 혼탁한 지점(1801)이 점점 커지는지 여부를 분석할 수 있다.
휴대단말기(2)의 제어부(400)는 디스플레이부(101)를 통해 휴대단말기(2)가 사용자 신체를 촬영할 때 위치했던 각도 및 사용자 신체와의 거리에 관한 정보(1803), 사용자 안구의 혼탁한 지점(1801)을 포함하는 사용자 안구 이미지(1800)를 표시할 수 있다.
또한, 패턴생성부(1003)로부터 패턴(1500)이 가해지면, 사용자는 이미지에 가해진 패턴(1500)을 이용하여 안구의 혼탁한 지점(1801)의 크기를 직접 판단 할 수 있고, 제어부(400)가 패턴(1500)에 기초하여 면적을 직접 분석하도록 구성될 수 있다.
제어부(400)는 안구 내부의 혼탁한 지점(1801)의 면적을 직접 분석한 후, 분석된 결과 정보(1900)를 디스플레이부(101)를 통해 제공할 수 있다.
도 20은 본 발명의 일 실시예에 따라 귀 속을 촬영하여 촬영된 귀 속의 이미지 및 정보를 제공하는 예를 도시한다.
검이경에 해당하는 광학 헤드(100c)가 전자장치(1)에 부착되고, 사용자가 광학 헤드(100c)의 개구부를 귀 속에 넣은 후 촬영하도록 휴대단말기(2)를 조작하면, 휴대단말기(2)로부터 전달되는 제어신호에 기초하여 전자장치(1)는 빛을 광학 헤드(100c)의 선단개구부를 통해 귀 속으로 조사하고, 광학 헤드(100c)를 통해 입사되는 귀 속에서 반사된 광을 휴대단말기(2)의 카메라부(200)에 전달한다. 카메라부(200)는 전달된 빛을 이미지로 변환하고, 디스플레이부(101)는 변환된 귀 속 이미지를 사용자에게 제공하도록 구성된다.
상술한 바와 같이, 광학 헤드(100c)는 센서부(503)를 더 포함할 수 있다. 센서부(503)는 귀 속에서 뇌파 등 생체 신호를 측정하거나, 사용자의 신체온도 및 귀 속의 습도를 센싱하여 센싱된 정보를 전자장치(1)에 제공할 수 있다. 전자장치(1)는 전달받은 정보를 사용자에게 표시하도록 휴대단말기(2)에 제공할 수 있다. 휴대단말기(2)는 센싱된 온도 및 습도 정보(2001)를 디스플레이부(101)를 통해 사용자에게 제공할 수 있다.
도 21은 본 발명의 일 실시예에 따른 사용자 피부의 상처를 촬영하는 예를 도시한다.
사용자는 점 또는 피부변성뿐 아니라, 피부에 상처가 생기면, 상처의 치료 경과를 분석하기 위해 피부를 촬영할 수 있다. 도 21을 참조하면, 휴대단말기(2)에 결합된 전자장치(1)에 검피경에 해당하는 광학 헤드(100a)가 부착되어 사용자 피부의 상처(2100)를 촬영하기 위해, 광(2101)을 조사하고, 반사된 광을 이용하여 이미지를 생성함이 도시된다.
도 22는 본 발명의 일 실시예에 따른 촬영된 사용자 피부의 상처를 표시하는 예를 도시한다.
전자장치(1)의 광원부(1005)는 사용자 피부의 상처(2100)를 분석하기 위한 레이저를 상처(2100)에 출력하고, 상처(2100)에서 반사되는 레이저를 수신하도록 구성될 수 있다. 전자장치(1)는 수신되는 레이저에 기초하여 상처(2100)의 정보를 생성할 수 있으며, 생성된 정보를 통신부(303)를 통해 휴대단말기(2)로 전송할 수 있다. 휴대단말기(2)의 제어부(400)는 전자장치(1)로부터 수신되는 상처(2100)의 정보에 기초하여 상처(2100)의 깊이 및 폭을 분석하도록 구성될 수 있다.
또한, 휴대단말기(2)의 제어부(400)는 상처(2100)를 포함하는 사용자 피부의 이미지(2200), 분석된 상처(2100)의 깊이 및 폭에 대한 정보(2201), 휴대단말기(2)의 사용자 피부 촬영 시 사용자 신체로부터의 각도 및 거리에 대한 정보(2203)를 디스플레이부(101)를 통해 제공할 수 있다.
도 23, 도 24, 도 25 및 도 26은 본 발명의 일 실시예에 따른 디스플레이부를 통해 제공되는 유저 인터페이스의 예를 도시한다.
사용자가 신체 일부를 측정하기에 앞서, 휴대단말기(2)에 관련 기능을 수행하도록 유저인터페이스(user interface: UI)를 통해 휴대단말기(2)로부터 가이드 정보를 제공 받을 수 있다.
가이드 정보는 촬영하고자 하는 신체 일부에 따라 부착해야 하는 광학 헤드(100)의 종류, 사용자가 취해야 하는 동작 등 사용자가 신체 일부를 촬영하기 위해 참조할 수 있는 정보를 포함한다.
도 23을 참조하면, 사용자가 촬영하고자 하는 신체에 대응하는 메뉴항목(2300)을 포함하는 UI가 제공된다. 사용자는 표시되는 메뉴항목(2300) 중에서 눈, 귀 또는 피부에 대응하는 메뉴항목(2300) 중 검사를 희망하는 하나를 선택함으로써 다음 단계로 진행할 수 있다.
도면의 UI는 설명을 돕기 위한 예시일 뿐으로, 신체를 검사하기 위해, 사용자가 선택할 수 있는 보다 다양한 UI가 사용자에게 제공될 수 있다. 다른 일 실시예에 따르면, 사용자는 눈을 검사하되, 시력의 저하에 따라 백내장이 의심된다고 선택하거나, 피부를 검사하되, 피부의 상처가 낫는지 여부를 검사하고 싶다고 선택하는 등 진단받고자 하는 내용을 UI를 통해 보다 구체적으로 선택할 수 있다.
도 23의 UI에서, 사용자가 눈을 촬영하겠다고 선택하면, 디스플레이부(101)는 도 24에서와 같이 사용자가 전자장치(1)에 부착하여야 하는 광학 헤드(100)의 종류(2400), 광학 헤드(100)의 생김새(2401a), 시리얼 번호(2401b) 등 다양한 가이드 정보를 포함하는 UI를 표시할 수 있다.
도면의 가이드 정보는 단지 예시일 뿐으로, 보다 구체적으로, 사용자를 가이드 하기 위한 다양한 정보가 존재한다.
도 25는 사용자가 측정하고자 하는 신체 부위에 대응하지 않는 광학 헤드(100)를 장착하였을 경우 제공되는 UI를 도시한다. 각 광학 헤드(100)에는 식별정보가 저장되어 있어, 식별정보에 기초하여 사용자가 전자장치(1)에 어떤 종류의 광학 헤드(100)를 부착하였는지 판단할 수 있다. 휴대단말기(2)의 제어부(400)는 사용자가 신체 일부를 촬영하기 위해 선택한 항목과 부착된 광학 헤드(100)의 식별정보를 비교하여 사용자가 선택한 항목에 대응하는 광학 헤드(100)와 다른 광학 헤드(100)가 부착된 경우, 사용자에게 이를 알리는 안내(2500)를 포함하는 UI를 디스플레이부(101)를 통해 제공할 수 있다.
다른 일 실시예에 따르면, 휴대단말기(2)의 제어부(400)는 디스플레이부(101)를 통해 선택에 대응하는 광학 헤드(100)와 다른 광학 헤드(100)가 부착된 경우, 선택에 대응하는 광학 헤드(100)를 올바르게 부착할 수 있도록 다시 한번 가이드 정보를 제공할 수 있다.
또 다른 일 실시예에 따르면, 휴대단말기(2)의 제어부(400)는 부착된 광학 헤드(100)가 사용자의 선택에 대응하는 광학 헤드(100)와 일치하지 않는 경우, 사용자에게 측정할 사용자 신체 부위에 대한 선택을 변경할 지 여부에 대한 확인을 구할 수 있다.
도 26을 참조하면, 사용자에게 부착된 광학 헤드를 사용하여 귀를 촬영할 수 있도록 가이드를 제공하는 예가 도시된다.
사용자는 디스플레이부(101)를 통해 제공되는 사진 또는 기타 그림을 통해 제공되는 가이드 정보를 이용하여 사용자 신체 일부를 촬영할 수 있으며, 촬영된 결과에 기초하여 건강에 이상이 있는지 여부를 미리 판단하거나, 진단을 위해 촬영된 이미지를 외부에 전송할 수 있다.
광학 헤드(100)의 식별정보는 광학 헤드(100)의 종류에 대한 정보뿐 아니라, 광학 헤드(100)의 시리얼 넘버와 같은 고유정보를 포함할 수 있다. 이를 통해 같은 종류의 광학 헤드(100)라 하더라도 사용자 별로 다른 광학 헤드(100)를 사용하는 경우, 휴대단말기(2)의 제어부(400)는 전자장치(1)를 통해 수신되는 고유정보에 기초하여 어떤 사용자의 광학 헤드(100)가 장착 되었는지 기 저장된 정보에 기초하여 판단할 수 있다.
이는 또한, 사용자 별로 기 촬영한 정보가 다르게 저장되어 있을 수 있어 유용하다. 이를 테면, 사용자A가 손목의 점을 촬영한 각도 및 손목부터의 거리와 사용자B가 안구를 촬영한 각도 및 안구로부터의 거리는 서로 상이할 수 있으며, 사용자A의 검피경에 해당하는 광학 헤드(100)가 부착되면, 사용자A가 기 촬영한 각도 및 거리에 대응하도록 전자장치(1)의 초점거리가 조절될 수 있다.
또한, 같은 종류의 광학 헤드(100)라 하더라도 개구부의 크기나 렌즈부(500)의 초점거리 등 미세한 차이가 있을 수 있으며, 광학 헤드(100)는 이러한 정보를 저장부(505)에 저장하며, 전자장치(1)에 제공할 수 있고, 전자장치(1)는 부착된 광학 헤드(100)로부터 수신되는 정보에 기초하여 제1 및 제2렌즈부(1000a, 1000b)를 조절하도록 렌즈조절부(1007)를 제어할 수 있다. 또한, 전자장치(1)는 수신되는 정보를 전자장치(1)의 디스플레이부(1400)를 통해 사용자에게 제공할 수 있다.
도 27 및 도 28은 본 발명의 일 실시예에 따라 촬영의 경과를 제공하는 예를 도시한다.
도 27을 참조하면, 피부에 점이 있는 사용자가 피부를 시간차를 두고 촬영하였을 때, 사용자 피부를 촬영한 이미지와 촬영을 돕기 위한 정보 및 시간경과에 따른 정보를 제공하는 예가 도시된다. 사용자가 검피경에 대응하는 광학 헤드(100a)를 전자장치(1)에 부착하고, 피부의 점(701)을 촬영하도록 휴대단말기(2)를 제어하면, 휴대단말기(2)의 제어부(400)는 사용자 피부에 광을 조사하도록 전자장치(1)에 제어신호를 전송하며, 전자장치(1)는 부착된 광학 헤드(1000)를 통해 광을 사용자 피부에 조사하고, 사용자 피부로부터 반사된 광을 카메라부(200)에 제공하도록 구성된다.
카메라부(200)가 수신된 광을 변환하여 이미지를 생성하면, 디스플레이부(101)는 점(2701a)을 포함하는 피부의 이미지(2700a) 및 촬영시 휴대단말기(2)의 각도 및 사용자 신체부위로부터의 거리를 포함하는 정보(2705) 등을 표시할 수 있다.
이미지를 촬영하고, 시간이 흐른 뒤, 사용자가 다시 피부를 촬영하면, 디스플레이부(101)는 지난 촬영에서의 점(2701a)의 잔상(2702)과, 크기가 변화한 점(2701b)을 포함하는 현재 피부의 이미지(2700b) 및 촬영시 휴대단말기(2)의 각도 및 사용자 신체부위로부터의 거리를 포함하는 정보(2705)를 표시할 수 있다. 휴대단말기(2)의 제어부(400)는 지난 촬영에서의 점(2701a)과 현재 피부의 점(2701b)을 비교 및 분석하여 어느 정도 비율로 줄어들었는지 치유 경과에 대한 정보(2703)를 디스플레이부(101)를 통해 제공할 수 있다.
사용자가, 휴대단말기(2)의 각도 및 거리에 관한 정보(2705)를 참조하여 지난 촬영시와 같은 각도 및 거리에서 피부를 촬영하여야 보다 정확하게 점(2701)의 크기를 비교할 수 있게 되므로, 휴대단말기(2)는 사용자에게 관련 정보(2705)를 표시할 수 있고, 또한 알림음 등을 통해 사용자가 현재 촬영하는 각도 및 신체 부위로부터의 거리가 지난 촬영과 동일함을 알릴 수 있다.
도 28은 피부에 상처가 있는 사용자가 피부를 시간차를 두고 촬영하였을 때, 피부를 촬영한 이미지와 촬영을 돕기 위한 정보 및 시간경과에 따른 정보를 제공하는 예가 도시된다.
사용자가 휴대단말기(2)를 조작하여 피부의 상처(2100)를 촬영하면, 휴대단말기(2)의 제어부(400)는 상처(2801a)를 포함하는 피부를 촬영한 이미지(2800a), 촬영시 휴대단말기(2)의 각도 및 사용자 신체부위로부터의 거리를 포함하는 정보(2805) 및 촬영된 이미지를 분석하여 상처(2100)의 깊이 및 폭에 관한 정보(2803a)를 디스플레이부(101)를 통해 제공할 수 있다.
시간이 경과한 후, 사용자가 피부의 상처(2100)를 다시 촬영하면, 휴대단말기(2)의 제어부(400)는 지난 촬영에서의 상처(2801a)의 잔상(2802)과 현재 상처(2801b)를 포함하는 피부를 촬영한 이미지(2700b), 촬영시 휴대단말기(2)의 각도 및 사용자 신체부위로부터의 거리를 포함하는 정보(2805) 및 촬영된 이미지를 분석하여 상처(2100)의 깊이 및 폭에 관한 정보(2803b)를 디스플레이부(101)를 통해 제공할 수 있다. 깊이 및 폭에 관한 정보(2803b)는 지난 촬영에서의 상처(2801a)의 깊이 및 폭과 이번 촬영에서의 상처(2801b)의 깊이 및 폭을 비교할 수 있도록 경과한 정보를 포함할 수 있다.
도 29는 본 발명의 일 실시예에 따른 휴대단말기, 전자장치의 사용예를 도시한다.
휴대단말기(2)는 외부 장치(29)와 통신할 수 있도록 통신부(401)를 포함할 수 있다. 제어부(400)는 통신부(401)를 제어하여 광학 헤드(100) 및 전자장치(1)를 이용하여 촬영한 사용자 신체 일부의 이미지를 외부에 전송할 수 있다.
외부는 전송 받은 이미지를 표시하기 위한 별도의 디스플레이장치(29), 외부의 병원(30) 등을 포함한다.
디스플레이장치(29)에는 휴대단말기(2)의 디스플레이부(101) 보다 큰 표시패널이 구비되는바, 촬영한 이미지를 보다 큰 화면으로 볼 수 있도록 한다. 또한, 촬영한 이미지를 병원 등 외부 진단 시설에 전송함으로써 사용자는 병원까지 가지 않아도 원격 진단을 받을 수 있다.
도 30은 본 발명의 일 실시예에 따라 외부로부터 진단 요청이 전송되는 UI를 도시한다.
휴대단말기(2)의 제어부(400)는 사용자가 UI를 통해 복수의 검사에 각각 대응하는 복수의 메뉴항목 중 적어도 하나를 선택하면, 선택한 메뉴항목에 대응하는 검사를 수행하기 위해, 사용자 신체 일부를 촬영하기 위한 가이드 정보를 디스플레이부(101)를 통해 제공할 수 있음은 상술한 바 있다.
본 발명의 다른 일 실시예에 따르면, 휴대단말기(2)가 제공할 수 있는 건강 진단 서비스는 병원 등 외부로부터 전달되는 검사요청에 대응하여 개시될 수 있다. 휴대단말기(2)는 외부로부터 특정 검사의 실시가 요청되면, 해당 검사를 실시할 것을 제안하는 안내(3000)와, 사용자에게 부착할 광학 헤드(100)에 관한 정보를 포함하는 촬영을 하기 위한 가이드 정보를 디스플레이부(101)를 통해 표시할 수 있다. 외부로부터 전송되는 검사요청은 사용자에게 제공되는 가이드 정보를 포함할 수 있다. 외부로부터 전송되는 가이드 정보는 특정 광학 헤드(100)에 관한 정보, 신체로부터 휴대단말기(2)와의 거리, 휴대단말기(2)의 각도 및 지난 검사 요청에 따라 기 촬영된 이미지의 잔상 등을 포함할 수 있다.
사용자가 가이드 정보를 참조하여 휴대단말기(2) 및 전자장치(1)를 조작하여 사용자 신체 일부를 촬영하여 이미지를 생성하면, 휴대단말기(2)의 제어부(400)는 통신부(401)를 통해 검사를 요청한 외부에 생성한 이미지를 전송하도록 구성될 수 있다.
도 31 및 도 32는 본 발명의 다른 일 실시예에 따른 휴대단말기 및 전자장치의 예를 도시한다.
지금까지, 전자장치(1)는 휴대단말기(2)와 직접 결합되며, 휴대단말기(2)의 전력송수신단자로부터 전원을 공급받아 구동되어, 휴대단말기(2)의 카메라부(200)에 사용자 신체 일부에서 반사된 광을 전달하는 것으로 설명되었다.
하지만, 본 발명의 다른 일 실시예에 따른 전자장치(1)는 휴대단말기(2)로부터 전원의 공급 없이 구동될 수 있으며, 직접 촬영한 이미지를 휴대단말기(2)에 통신을 통해 제공할 수 있다. 이를 위해, 전자장치(1)는 배터리, 카메라부를 더 포함할 수 있으며, 도 31에 도시된 바와 같이 스마트고글, 이어폰, HMD(head-mounted display) 등 웨어러블 디바이스 형태로 구현될 수 있다.
도 31을 참조하면, 사용자는 웨어러블 디바이스(3100a, 3100b)들을 착용한 채로 휴대단말기(2)를 통해 신체 일부를 촬영하도록 제어할 수 있으며, 웨어러블 디바이스(3100a, 3100b)들은 촬영한 이미지를 휴대단말기(2)에 전송하도록 구성될 수 있다. 휴대단말기(2)는 웨어러블 디바이스(3100a, 3100b)들로부터 수신한 사용자의 안구 이미지(3101) 및 귀 속 이미지(3103)를 디스플레이부(101)를 통해 표시하도록 구성될 수 있음이 도시된다.
웨어러블 디바이스(3100a, 3100b)들은 별도의 배터리를 포함할 수 있으며, 휴대단말기(2)로부터 유/무선으로 전력을 수신하기 위한 전력송수신단자를 포함하도록 구성될 수 있다. 웨어러블 디바이스(3100a, 3100b)들이 신호선을 통해 휴대단말기(2)로부터 전력을 수신하여 구동되는 경우, 연결된 신호선을 통해 촬영한 이미지를 휴대단말기(2)로 전송하도록 구성될 수 있다.
도 32를 참조하면, 본 발명의 다른 일 실시예에 따른 휴대단말기(2), 전자장치(1) 및 부착된 광학 헤드(100)의 블록도가 도시된다. 상술한 바와 같이, 전자장치(1)는 배터리부(3200)와 카메라부(3201)를 포함할 수 있다.
배터리부(3200)는 외부로부터 입력되는 전력을 이용하여 충전되고, 충전된 전력을 전자장치(1)에 제공하도록 구성될 수 있다.
카메라부(3201)는 부착된 광학 헤드(100)를 이용하여 사용자 신체를 촬영하며, 광학 헤드(100)를 통해 전달되는 광을 변환하여 이미지를 생성하도록 구성될 수 있다. 카메라부(100)는 광학 헤드(100)를 통해 전달된 반사광을 전기적 신호를 갖는 이미지로 변화하기 위한 변환부를 포함할 수 있다.
전자장치(1)와 광학 헤드(100)가 결합부(301,501)들을 통해 부착되고, 부착된 광학 헤드(100)의 식별정보가 휴대단말기(2)로 전송된 후, 식별정보에 기초하여 휴대단말기(2)로부터 제어신호가 전자장치(1)로 전달되면, 전자장치(1)의 카메라부(3201)는 사용자 신체 일부를 촬영하여 이미지를 생성하도록 구성된다. 생성된 이미지는 통신부(401)를 통해 휴대단말기(2)로 전달되거나, 휴대단말기(2)의 카메라부(200)에 직접 전달될 수 있다. 또한, 휴대단말기(2)의 디스플레이부(101)는 전자장치(1)로부터 전달된 이미지를 표시하도록 구성될 수 있다.
도 33은 본 발명의 일 실시예에 따른 전자장치의 제어흐름도를 도시한다.
먼저, 동작 S3300에서, 복수의 과학 헤드(100) 중 하나가 전자장치(1)의 결합부(501)에 부착된다. 그리고 동작 S3301에서, 전자장치(1)는 통신부(303)를 통해 외부 장치(2) 즉 휴대단말기(2)와 통신한다. 이후, 동작 S3302에서, 통신부(303)는 부착된 광학 헤드(100)의 식별정보를 획득하며, 획득한 정보를 외부 장치로 전송한다. 마지막으로 동작 S3303에서, 광학 모듈(300)은 사용자 신체에서 반사되어 상기 부착된 광학 헤드(100)를 통과한 광을 상기 외부 장치(2)의 카메라부(200)에 전달한다.
도 34는 본 발명의 일 실시예에 따른 휴대단말기의 제어흐름도를 도시한다.
먼저, 동작 S3400에서, 사용자가 표시된 UI를 조작하여 진단하고자 하는 항목을 선택한다. 그리고 동작 S3401에서, 휴대단말기(2)의 제어부(400)는 진단항목에 대응하는 광학 헤드(100) 및 촬영을 위한 가이드 정보를 디스플레이부(101)를 통해 제공한다. 마지막으로, 동작 S3402에서, 제어부(400)는 촬영한 이미지를 디스플레이부(101)를 통해 출력하여 제공한다.
도 35는 본 발명의 일 실시예에 따른 외부로부터 진단요청이 수신되는 경우 휴대단말기의 제어흐름도를 도시한다.
먼저, 동작 S3500에서, 외부로부터 검사 및 진단 요청이 휴대단말기(2)의 통신부(401)를 통해 수신된다. 그리고 동작 S3501에서, 제어부(400)는 수신된 진단 요청에 대응하는 광학 헤드(100)의 장착 및 촬영을 위한 가이드 정보를 디스플레이부(101)를 통해 제공한다. 이후 동작 S3502에서, 제어부(400)는 전자장치(1) 및 광학 헤드(100)를 이용하여 카메라부(200)에서 촬영한 이미지를 통신부(401)를 제어하여 검사 및 진단을 요청한 외부로 전송한다. 마지막으로 동작 S3503에서, 통신부(401)는 외부로부터 진단 정보를 수신하며, 제어부(400)는 수신된 정보를 디스플레이부(101)를 통해 사용자에게 제공한다.
도 36 및 도 37은 본 발명의 일 실시예에 따라 광학헤드가 잘못 장착 되었을 때 사용자에게 경고를 알리는 예를 도시한다.
사용자가 진단하고자 하는 대상을 선택하거나 또는 외부로부터 진단 요청이 들어온 후, 사용자가 제공되는 가이드 정보에 기초하여 광학 헤드(100)를 전자장치(1)에 부착하면, 광학 헤드(100)의 식별정보가 전자장치(1)를 통해 휴대단말기(2)로 제공되며, 휴대단말기(2)는 사용자의 선택 또는 외부의 진단 요청에 따른 광학 헤드(100)가 전자장치(1)에 부착되었는지 판단하도록 구성될 수 있으며, 선택에 대응하는 광학 헤드(100)가 부착되지 않은 경우, 디스플레이부(101)를 통해 안내항목(3605, 3703)을 포함하는 UI를 제공할 수 있다.
전자장치(1)와 휴대단말기(2)는 또한, LED등(3600, 3601)을 더 포함할 수 있다. 사용자 또는 외부 요청과 다른 광학 헤드(100)가 부착된 경우, LED등(3600, 3601)을 통해 빨간색 빛을 출력하고, 올바른 광학 헤드(100)가 부착되었다면, 파란색 빛을 출력할 수 있다.
또한, 전자장치(1)와 휴대단말기(2)는 또한 경고음(3603, 3701)등 소리 및 진동(3700)을 이용하여 사용자에게 올바른 광학 헤드(100)를 부착하도록 안내할 수 있다.
본 실시예에서의 전자장치(1)와 휴대단말기(2) 중 적어도 하나는 자이로센서, 가속도센서, 지자기센서 등으로 구성되는 센서부를 더 포함할 수 있으며, 휴대단말기(2)는 센서부를 이용하여 사용자의 자세를 감지할 수 있다.
예를 들면, 사용자가 광학 헤드(100)를 잘못 부착하였다면, 1차적으로 휴대단말기(2)와 전자장치(1)는 LED등(3600, 3601), 안내항목(3605, 3703)을 이용하여 사용자에게 잘못된 광학 헤드(100)가 부착되었음을 알릴 수 있다. 이어서, 사용자가 잘못된 광학 헤드(100)를 부착한 채로 사용자 신체 일부를 촬영하고자 휴대단말기(2)를 움직이는 것이 감지되면, 휴대단말기(2)는 진동(3700) 또는 경고음(3603, 3701)을 출력하도록 구성될 수 있다. 휴대단말기(2)와 전자장치(1)는 이를 위해 소리를 출력하기 위한 스피커부, 진동하기 위한 진동 모터를 더 포함할 수 있다.
본 발명은 도면과 상술된 설명에 한정되지 아니하며, 사용자에게 올바른 광학 헤드(100)를 부착하도록 다양한 실시예가 가능하다. 본 발명의 다른 일 실시예에 따르면, 전자장치(1)의 결합부(301)가 휴대단말기(2)의 제어에 따라 사용자의 선택 또는 외부로부터의 진단 요청에 대응하지 않는 광학 헤드(100)가 부착되지 않도록 할 수 있다. 광학 헤드(100)와 일시적인 결합을 통해 광학 헤드(100)의 식별정보가 휴대단말기(2)로 전달되고, 휴대단말기(2)가 잘못된 광학 헤드(100)가 연결되었다고 판단하여 제어신호를 전자장치(1)로 전달하면, 제어부(305)는 잘못된 광학 헤드(100)가 전자장치(1)에 부착되지 않도록 결합부(301)를 제어하도록 구성될 수 있다.
도 38은 본 발명의 일 실시예에 따라 사용자의 촬영 자세를 감지하고, 가이드정보를 다시 제공하는 예를 도시한다.
상술한 바와 같이, 전자장치(1) 및 휴대단말기(2)중 적어도 하나는 자이로, 지자기, 가속도 센서가 구비된 센서부를 포함할 수 있다. 휴대단말기(2)는 센서부에서 센싱된 정보에 기초하여 사용자의 자세를 측정할 수 있으며, 측정된 자세가 사용자가 선택하였거나, 외부로부터 요청된 진단에 기초하여 신체 일부를 촬영하기에 적당하지 않다고 생각되는 경우, 촬영 자세가 올바르지 않음을 알리는 안내항목(3801)과 올바른 촬영을 위한 자세를 알려주는 가이드 정보(3803)를 포함하는 UI를 디스플레이부(101)를 통해 제공할 수 있으며, 이를 스피커를 통해 음성(3800)으로 제공하도록 구성될 수 있다.
도 39는 본 발명의 일 실시예에 따른 휴대단말기가 올바른 신체 부위를 촬영할 것을 안내하는 예를 도시한다.
사용자의 선택 또는 외부의 요청에 따라 신체 일부를 사용자가 촬영하였으나, 촬영한 신체 일부가 사용자의 선택 또는 외부의 요청에 대응하는 신체 일부와 다른 부분인 경우, 휴대단말기(2)는 다시 촬영할 것을 알리는 안내항목(3901)을 포함하는 UI를 디스플레이부(101)를 통해 제공할 수 있으며, 이를 스피커를 통해 음성(3900)으로 제공하도록 구성될 수 있다.
사용자의 선택 또는 외부의 요청에 대응하는 신체 부위가 촬영되었는지는 촬영된 이미지를 분석하여 이루어질 수 있으며, 센서부를 이용하여 판단된 사용자의 자세에 기초하여 판단할 수 있다.
이를 테면, 사용자가 촬영하고 있는 휴대단말기(2)의 각도가 수평한지 수직한지를 기초로 피부를 촬영 중인지 귀를 촬영중인지 판단할 수 있으며, 휴대단말기(2)의 방향에 따라 사용자가 왼쪽 귀를 촬영하고 있는지, 오른쪽 귀를 촬영하고 있는지를 판단하여 사용자에게 관련 정보를 제공할 수 있다.
휴대단말기(2)는 또한, 촬영된 이미지를 지난 촬영에서의 이미지와 비교하여 사용자의 촬영 거리, 촬영 위치가 지난 촬영의 부위와 일치하는지 여부를 판단할 수 있으며, 잘못된 신체 일부를 촬영하고 있다면, 정확한 위치를 촬영하도록 사용자에게 관련 정보를 제공할 수 있다.
예를 들면, 휴대단말기(2)는 사용자가 지난 촬영때 촬영한 손목의 점과 사용자가 다시 촬영한 손목의 점의 크기가 변화한 것을 진단하기 위해 사용자로 하여금 손목을 촬영하도록 가이드 정보를 제공할 수 있으며, 촬영의 목적이 되는 손목의 특징점 뿐 아니라 전에 촬영한 손목이미지와 현재 촬영된 손목이미지를 전반적으로 비교하여 사용자가 지난 촬영과 같은 손목을 촬영하고 있는지를 판단할 수 있다. 유사성에 기초하여 사용자가 정확한 부위를 측정하는 중이라면, 이를 LED등(3600)에서 초록빛을 출력하거나, 알림음(3603), 디스플레이부(101)에 표시되는 UI 등 다양한 방법을 통해 사용자에게 안내할 수 있으며, 반대로 사용자가 다른 부위를 측정하는 중이라면, 마찬가지로 LED등(3600)에서 빨간빛을 출력하거나, 경고음(3603), 디스플레이부(101)에 표시되는 UI, 진동(3700) 등으로 사용자에게 안내할 수 있다. 사용자는 휴대단말기(2)에서 제공되는 가이드 정보와 이런 부가적인 출력을 이용하여 정확한 광학 헤드(100)를 장착하며, 정확한 자세를 취하여, 정확한 신체를 촬영하여 신체의 질병을 진단할 수 있게 된다.

Claims (15)

  1. 전자장치에 있어서,
    복수의 광학 헤드 중 어느 하나가 선택적으로 탈부착 가능한 결합부;
    외부 장치와 통신 가능한 통신부;
    사용자의 신체에서 반사되어 상기 결합부에 부착된 광학 헤드를 통과한 광을 상기 외부 장치로 전달하는 광학모듈부(optical unit); 및
    상기 복수의 광학 헤드 중 하나가 상기 결합부에 부착되면 상기 결합부에 부착된 광학 헤드의 식별정보를 획득하여 상기 외부 장치로 전송하도록 상기 통신부를 제어하는 제어부를 포함하는 전자장치.
  2. 제 1항에 있어서,
    상기 제어부는, 상기 전자장치와 상기 외부 장치가 기 설정된 범위 내에 인접하게 되면 상기 통신부를 통해 상기 외부 장치와 통신 페어링을 수행하고, 상기 통신 페어링이 완료되면 상기 결합부에 부착된 광학 헤드의 식별정보를 상기 통신부를 통해 상기 외부 장치로 전송하는 것을 특징으로 하는 전자장치.
  3. 제 1항에 있어서,
    디스플레이부를 더 포함하며,
    상기 제어부는 상기 전자장치의 현재상태에 관한 정보를 표시하도록 상기 디스플레이부를 제어하는 전자장치.
  4. 제 3항에 있어서,
    상기 전자장치의 현재상태에 관한 정보는
    상기 외부 장치와 통신 중인지 여부 및 상기 결합부에 부착된 광학 헤드에 관한 정보 중 적어도 하나를 포함하는 전자장치.
  5. 제 1항에 있어서,
    상기 결합부는, 상기 부착된 광학 헤드와 연결하기 위한 접속 단자를 포함하며,
    상기 제어부는 상기 접속 단자를 통해 상기 부착된 광학 헤드로부터 상기 식별정보를 수신하는 전자장치.
  6. 제 1항에 있어서,
    상기 광학모듈부는,
    입사되는 광을 전달하는 복수의 렌즈를 포함하는 렌즈부; 및
    상기 렌즈부의 초점거리(focal length)를 조절하는 렌즈조절부를 더 포함하며,
    상기 제어부는 상기 외부 장치로부터 수신되는 제어신호에 기초하여 상기 렌즈부의 초점거리를 조절하도록 상기 렌즈조절부를 제어하는 전자장치.
  7. 제 6항에 있어서,
    상기 렌즈부의 초점거리는 상기 복수의 렌즈간 거리 변경과, 상기 사용중인 렌즈를 두께, 크기 및 굴절율 중 적어도 하나가 다른 렌즈로의 변경 중 적어도 하나에 의해 조절되는 전자장치.
  8. 제 1항에 있어서,
    상기 광학 모듈부는, 광을 생성하여 상기 부착된 광학 헤드를 통해 출력하는 광원부를 더 포함하며,
    상기 제어부는 상기 광을 생성하여 제공하도록 상기 광원부를 제어하는 전자장치.
  9. 제 8항에 있어서,
    상기 제어부는 상기 생성되는 광의 휘도 및 색도 중 적어도 하나가 조절되도록 상기 광원부를 제어하는 전자장치.
  10. 제 8항에 있어서,
    상기 제어부는, 상기 외부 장치로부터 수신되는 제어신호에 기초하여 상기 광원부를 제어하는 전자장치.
  11. 제 8항에 있어서,
    상기 광학모듈부는, 상기 광원부로부터 생성되는 광에 패턴을 가하는 패턴생성부를 더 포함하며,
    상기 제어부는 상기 광에 패턴을 가하도록 상기 패턴생성부를 제어하는 전자장치.
  12. 복수의 광학 헤드 중 어느 하나가 선택적으로 탈부착 가능한 결합부를 포함하는 전자장치의 제어방법에 있어서,
    복수의 광학 헤드 중 하나가 상기 결합부에 부착하는 단계;
    외부 장치와 통신하는 단계;
    상기 부착된 광학 헤드의 식별정보를 획득하여 상기 외부 장치로 전송하는 단계; 및
    사용자의 신체에서 반사되어 상기 부착된 광학 헤드를 통과한 광을 상기 외부 장치로 전달하는 단계를 포함하는 전자장치의 제어방법.
  13. 제 12항에 있어서,
    상기 외부 장치와 통신하는 단계는,
    상기 전자장치와 상기 외부 장치가 기 설정된 범위 내에 인접하게 되면 상기 통신부를 통해 상기 외부 장치와 통신 페어링을 수행하는 단계; 및
    상기 통신 페어링이 완료되면 상기 결합부에 부착된 광학 헤드의 식별정보를 상기 통신부를 통해 상기 외부 장치로 전송하는 단계를 포함하는 전자장치의 제어방법.
  14. 제 12항에 있어서,
    상기 전자장치의 현재상태에 관한 정보를 상기 디스플레이부를 통해 표시하는 단계를 포함하는 전자장치의 제어방법.
  15. 제 14항에 있어서,
    상기 전자장치의 현재상태에 관한 정보는,
    상기 외부 장치와 통신 중인지 여부 및 상기 결합부에 부착된 광학 헤드에 관한 정보 중 적어도 하나를 포함하는 전자장치의 제어방법.
PCT/KR2016/014684 2016-02-05 2016-12-15 전자장치, 휴대단말기 및 그 제어방법 WO2017135564A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US16/075,860 US11246489B2 (en) 2016-02-05 2016-12-15 Electronic device, mobile terminal and control method thereof

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020160015310A KR102531976B1 (ko) 2016-02-05 2016-02-05 전자장치, 휴대단말기 및 그 제어방법
KR10-2016-0015310 2016-02-05

Publications (1)

Publication Number Publication Date
WO2017135564A1 true WO2017135564A1 (ko) 2017-08-10

Family

ID=59500880

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/014684 WO2017135564A1 (ko) 2016-02-05 2016-12-15 전자장치, 휴대단말기 및 그 제어방법

Country Status (3)

Country Link
US (1) US11246489B2 (ko)
KR (1) KR102531976B1 (ko)
WO (1) WO2017135564A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020064475A1 (en) * 2018-09-27 2020-04-02 Albanna Walid Method of retinal vessel analysis, a portable retinal vessel analysis apparatus and a non-transitory computer-readable medium
US20220245848A1 (en) * 2021-02-04 2022-08-04 Fibonacci Phyllotaxis Inc. System and method for evaluating tumor stability

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9456752B2 (en) 2013-03-14 2016-10-04 Aperture Diagnostics Ltd. Full-field three-dimensional surface measurement
US11153696B2 (en) * 2017-02-14 2021-10-19 Virtual 3-D Technologies Corp. Ear canal modeling using pattern projection
US11172825B1 (en) * 2017-01-23 2021-11-16 Stephen T. Ayanruoh Handheld multipurpose medical diagnostic instrument for examination of ears, eyes, nose, throat, and body temperature
CN212465960U (zh) 2017-09-28 2021-02-05 株式会社朝盈思 皮肤诊断装置以及用于所述皮肤诊断装置的耦合系统
KR102317946B1 (ko) * 2017-09-28 2021-10-28 (주)초위스컴퍼니 피부 진단 장치 및 이를 위한 커플링 시스템
KR102472694B1 (ko) * 2018-12-03 2022-12-01 (주)초위스컴퍼니 피부 진단 장치 및 이를 위한 커플링 시스템
US20220175245A1 (en) * 2019-03-26 2022-06-09 Sony Group Corporation Eye examination attachment, control device, and ophthalmic microscope system
US11308618B2 (en) 2019-04-14 2022-04-19 Holovisions LLC Healthy-Selfie(TM): a portable phone-moving device for telemedicine imaging using a mobile phone
US11258988B1 (en) * 2020-07-21 2022-02-22 Vivian J. Douglas Dudley Body-viewing camera system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120022050A (ko) * 2010-08-30 2012-03-09 삼성전자주식회사 촬상 장치, 촬영 모드 선택 방법 및 컴퓨터 프로그램을 저장한 기록매체
US20120320340A1 (en) * 2011-06-18 2012-12-20 Intuitive Medical Technologies, Llc Smart-phone adapter for ophthalmoscope
US20140085603A1 (en) * 2012-02-02 2014-03-27 Visunex Medical Systems. Co. Ltd. Portable eye imaging apparatus
KR101420799B1 (ko) * 2007-11-30 2014-07-17 삼성전자주식회사 이동통신 단말기 및 컨버젼 렌즈를 이용한 이동통신단말기의 카메라 촬영 방법
KR20150045792A (ko) * 2013-10-21 2015-04-29 삼성전자주식회사 렌즈 분리형 카메라의 동작 방법 및 장치

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110019992A (ko) * 2009-08-21 2011-03-02 윤영기 홍채학을 이용한 진단시스템 및 방법
KR20130074316A (ko) 2011-12-26 2013-07-04 주식회사 필로시스 스마트폰의 혈당측정모듈 자동인식방법
WO2014105649A1 (en) 2012-12-26 2014-07-03 Ecoclinix, Inc. Transformable medical device
US10617305B2 (en) 2013-02-28 2020-04-14 Canfield Scientific, Incorporated Dermatoscope devices
CN203883900U (zh) 2014-04-28 2014-10-15 江门市五邑中医院 一种皮肤镜及其手机连接件

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101420799B1 (ko) * 2007-11-30 2014-07-17 삼성전자주식회사 이동통신 단말기 및 컨버젼 렌즈를 이용한 이동통신단말기의 카메라 촬영 방법
KR20120022050A (ko) * 2010-08-30 2012-03-09 삼성전자주식회사 촬상 장치, 촬영 모드 선택 방법 및 컴퓨터 프로그램을 저장한 기록매체
US20120320340A1 (en) * 2011-06-18 2012-12-20 Intuitive Medical Technologies, Llc Smart-phone adapter for ophthalmoscope
US20140085603A1 (en) * 2012-02-02 2014-03-27 Visunex Medical Systems. Co. Ltd. Portable eye imaging apparatus
KR20150045792A (ko) * 2013-10-21 2015-04-29 삼성전자주식회사 렌즈 분리형 카메라의 동작 방법 및 장치

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020064475A1 (en) * 2018-09-27 2020-04-02 Albanna Walid Method of retinal vessel analysis, a portable retinal vessel analysis apparatus and a non-transitory computer-readable medium
US20220245848A1 (en) * 2021-02-04 2022-08-04 Fibonacci Phyllotaxis Inc. System and method for evaluating tumor stability
US11908154B2 (en) * 2021-02-04 2024-02-20 Fibonacci Phyllotaxis Inc. System and method for evaluating tumor stability

Also Published As

Publication number Publication date
US11246489B2 (en) 2022-02-15
KR20170093645A (ko) 2017-08-16
US20190038135A1 (en) 2019-02-07
KR102531976B1 (ko) 2023-05-12

Similar Documents

Publication Publication Date Title
WO2017135564A1 (ko) 전자장치, 휴대단말기 및 그 제어방법
WO2016018108A1 (en) Apparatus and method for enhancing accuracy of a contactless body temperature measurement
WO2018080149A2 (ko) 생체신호연동 가상현실 인지재활 시스템
WO2016056791A1 (en) Ultrasound diagnosis apparatus and communication connecting method performed in the ultrasound diagnosis apparatus
WO2019147021A1 (en) Device for providing augmented reality service, and method of operating the same
WO2015147383A1 (en) Mobile terminal and method of controlling the same
WO2016017966A1 (en) Method of displaying image via head mounted display device and head mounted display device therefor
WO2017185316A1 (zh) 一种无人机第一视角飞行的控制方法及系统、智能眼镜
WO2018097683A1 (ko) 전자 장치, 외부 전자 장치 및 전자 장치와 외부 전자 장치를 연결하기 위한 방법
WO2016182090A1 (ko) 안경형 단말기 및 이의 제어방법
CN102790850A (zh) 远程显示眼镜照相机系统和方法
WO2017007101A1 (ko) 스마트 디바이스 및 이의 제어방법
WO2020050496A1 (ko) 검안용 헤드 마운티드 디스플레이 장치 및 이를 이용한 안과검사방법
WO2017010628A1 (en) Method and photographing apparatus for controlling function based on gesture of user
WO2017090833A1 (en) Photographing device and method of controlling the same
WO2018190648A1 (ko) 무인 비행 장치를 제어하는 전자 장치, 그에 의해 제어되는 무인 비행 장치 및 시스템
WO2020050497A1 (ko) 가상현실 기반의 시야검사 방법 및 시스템
WO2022145999A1 (ko) 인공지능 기반의 자궁경부암 검진 서비스 시스템
WO2023182727A1 (en) Image verification method, diagnostic system performing same, and computer-readable recording medium having the method recorded thereon
WO2021246758A1 (ko) 전자 장치 및 그 동작 방법
WO2016006765A1 (ko) 엑스선 장치
WO2019240564A1 (ko) 생체 데이터 획득용 탈착식 기능모듈 및 이를 포함하는 헤드 마운트 디스플레이 장치
WO2019208923A1 (ko) 생체 정보를 수신하는 웨어러블 장치와 통신을 수행하는 전자 장치
WO2022191598A1 (ko) 전자 장치, 그 제어 방법, 및 프로그램이 기록된 기록매체
WO2019203554A1 (en) Electronic device and method of controlling electronic device

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16889542

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16889542

Country of ref document: EP

Kind code of ref document: A1