WO2012124893A2 - 눈 위치 추적방법 및 이를 이용한 의료용 헤드램프 - Google Patents

눈 위치 추적방법 및 이를 이용한 의료용 헤드램프 Download PDF

Info

Publication number
WO2012124893A2
WO2012124893A2 PCT/KR2012/000711 KR2012000711W WO2012124893A2 WO 2012124893 A2 WO2012124893 A2 WO 2012124893A2 KR 2012000711 W KR2012000711 W KR 2012000711W WO 2012124893 A2 WO2012124893 A2 WO 2012124893A2
Authority
WO
WIPO (PCT)
Prior art keywords
eye
image
pupil
distance
medical
Prior art date
Application number
PCT/KR2012/000711
Other languages
English (en)
French (fr)
Other versions
WO2012124893A3 (ko
Inventor
김성민
홍상훈
정찬범
한전필
이권희
Original Assignee
동국대학교 산학협력단
한국보건산업진흥원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 동국대학교 산학협력단, 한국보건산업진흥원 filed Critical 동국대학교 산학협력단
Priority to US13/515,581 priority Critical patent/US9033505B2/en
Publication of WO2012124893A2 publication Critical patent/WO2012124893A2/ko
Publication of WO2012124893A3 publication Critical patent/WO2012124893A3/ko

Links

Images

Classifications

    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F21LIGHTING
    • F21VFUNCTIONAL FEATURES OR DETAILS OF LIGHTING DEVICES OR SYSTEMS THEREOF; STRUCTURAL COMBINATIONS OF LIGHTING DEVICES WITH OTHER ARTICLES, NOT OTHERWISE PROVIDED FOR
    • F21V33/00Structural combinations of lighting devices with other articles, not otherwise provided for
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/113Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/11Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for measuring interpupillary distance or diameter of pupils
    • A61B3/111Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for measuring interpupillary distance or diameter of pupils for measuring interpupillary distance
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • A61B90/35Supports therefor
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/19Sensors therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/193Preprocessing; Feature extraction
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017Electrical control of surgical instruments
    • A61B2017/00216Electrical control of surgical instruments with eye tracking or head position tracking control
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/50Supports for surgical instruments, e.g. articulated arms
    • A61B2090/502Headgear, e.g. helmet, spectacles
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F21LIGHTING
    • F21VFUNCTIONAL FEATURES OR DETAILS OF LIGHTING DEVICES OR SYSTEMS THEREOF; STRUCTURAL COMBINATIONS OF LIGHTING DEVICES WITH OTHER ARTICLES, NOT OTHERWISE PROVIDED FOR
    • F21V21/00Supporting, suspending, or attaching arrangements for lighting devices; Hand grips
    • F21V21/08Devices for easy attachment to any desired place, e.g. clip, clamp, magnet
    • F21V21/084Head fittings
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F21LIGHTING
    • F21VFUNCTIONAL FEATURES OR DETAILS OF LIGHTING DEVICES OR SYSTEMS THEREOF; STRUCTURAL COMBINATIONS OF LIGHTING DEVICES WITH OTHER ARTICLES, NOT OTHERWISE PROVIDED FOR
    • F21V21/00Supporting, suspending, or attaching arrangements for lighting devices; Hand grips
    • F21V21/14Adjustable mountings
    • F21V21/145Adjustable mountings for portable lighting devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Definitions

  • the present invention relates to an eye position tracking method and a medical head lamp using the same. More specifically, when doctors treat or treat patients, the light irradiation direction of the lamp is adjusted according to the eye position of the doctor without direct manual manipulation of the head lamp.
  • the present invention relates to an eye position tracking method for allowing light to be irradiated to a dark area or a desired area, and a medical head lamp using the same.
  • headlamps are used to be attached to a head band (hat band), a hat or a helmet (helmet) in the fields of mining, medical, especially surgery.
  • hat band head band
  • helmet helmet
  • Such headlamps have the advantage of being able to illuminate the range actually seen by the wearer without the need for a fixed floodlight or a portable lamp.
  • the desired area is brightly illuminated so that the medical activity can be more easily performed.
  • the medical headlamp is fixed to the head irrespective of the doctor's gaze, so when adjusting the position of the headlamp during surgery, the nurse, not the doctor of the head doctor, of the headlamp mounted on the doctor's head to prevent contamination of the patient is Adjust the direction manually.
  • the doctor when the doctor directly adjusts the headlamp mounted on his head, the doctor can set the desired position of the headlamp more quickly and accurately, but there is a problem that the surgical gloves are contaminated.
  • the present invention provides a method of tracking eye position by extracting feature points after binarizing an image of an eye portion photographed by a photographing means.
  • the present invention photographs the doctor's eyes with the photographing means, calculates the eye position from the image taken using the eye position tracking method, the light irradiation direction of the headlamp automatically according to the calculated eye position It provides a medical headlamp to correspond to the eyes of the.
  • the present invention is a.
  • a distance and slope calculation step of calculating a distance and a slope between the eyelid and the pupil using the feature points extracted through the feature point extraction step
  • an eye position tracking method including an eye gaze determination step of determining an eye gaze based on the distance and slope values calculated through the distance and slope calculation steps.
  • the feature point is extracted to track the eye position, and thus the light irradiation angle of the lamp provided in the headlamp according to the eyes of the user, that is, the eye position. This can be controlled to automatically correspond to the eyes of the user.
  • FIG. 1 is a flow chart illustrating an eye position tracking method according to the present invention
  • FIG. 2 is a view showing extracting feature points of the eye according to the present invention.
  • FIG. 3 is a view showing an eye gaze according to the present invention.
  • FIG. 4 is a block diagram of a medical headlamp according to the present invention.
  • FIG. 5 is a configuration diagram showing a lamp unit and a position adjusting unit of the medical headlamp according to the present invention.
  • the present invention comprises: i) a binarization processing step of converting a captured image into a binary image; ii) a feature point extraction step of extracting feature points by dividing the maximum value of the eyes, the maximum pupil and the lowest pupil from the binary image at which the binarization processing is completed; iii) a distance and slope calculation step of calculating a distance and a slope between the eyelid and the pupil using the feature points extracted through the feature point extraction step; And iv) an eye gaze determination step of determining an eye gaze based on the distance and slope values calculated through the distance and slope calculation steps.
  • the present invention provides a medical head lamp comprising controlling the light irradiation direction of the medical head lamp using the eye position tracking method.
  • the medical headlamp photographs the doctor's eye using a photographing means, calculates the eye position using the eye position tracking method from the photographed image, and the light irradiation direction of the headlamp according to the calculated eye position. This automatically responds to the eyes of the doctor.
  • the medical headlamp does not directly manipulate the headlamp when the doctor treats or treats a patient, and automatically irradiates light to a dark affected area or a desired area according to the position of the doctor's eyes, preferably the pupil.
  • any headlamp having this purpose may be used.
  • the headlamp according to the present invention may be applied not only to medical use but also to a field requiring a headlamp for irradiating light to a desired position according to a line of sight, for example, a repair industry, a mining industry, or the like.
  • FIG. 1 is a flowchart illustrating a method for tracking eye position according to the present invention
  • FIG. 2 is a diagram illustrating extracting feature points of an eye according to the present invention
  • FIG. 3 is a diagram illustrating an eye gaze according to the present invention
  • FIG. Fig. 5 is a configuration diagram showing a lamp unit and a position adjusting unit of the medical head lamp according to the present invention.
  • the eye position tracking method comprises: i) a binarization processing step of converting the captured image into a binary image; ii) a feature point extraction step of extracting feature points by dividing the maximum value of the eyes, the maximum pupil and the lowest pupil from the binary image at which the binarization processing is completed; iii) a distance and slope calculation step of calculating a distance and a slope between the eyelid and the pupil using the feature points extracted through the feature point extraction step; And iv) an eye gaze determination step of determining an eye gaze based on the distance and slope values calculated through the distance and slope calculation steps.
  • the binarization processing step of step i) according to the present invention is for converting the photographed image into a binary image, and is not particularly limited as long as it is a binarization processing method having this purpose.
  • the binarization divides the photographed image, preferably the image of the photographed eye portion, into regions and then converts the image pixels within each region into binary, eg, "0" or "1" based on a preset threshold. To convert.
  • the threshold may be changed according to a user's selection, and a binary value of "0" or “1” may also be set to be opposite to each other according to a user's selection based on a threshold when binarizing the image pixel.
  • the photographed image may be an image of an eye part positioned on a face, and the image may be an image of a left / right eye part, and includes both a black and white image or a color image.
  • the photographed left and right eye images are sequentially tracked through the binarization processing step, feature point extraction step, distance and tilt calculation step, and the like.
  • the binarization processing step according to the present invention may further include a skin color removing step of removing the skin color from the image taken as a previous step.
  • the photographed image for removing the skin color is preferably a color image.
  • removing the skin color allows the binarization process to proceed only when the red, green, and blue values of each pixel in the photographed image satisfy a preset range of values.
  • the set range value is 50 to 100 for red, 20 to 50 for green, and 200 to 255 for blue, and when the binarization satisfies all of the range values, the corresponding part is an eye.
  • the binarization value is designated as "0". If the condition is not satisfied, the binarization value is designated as "1" and the binarization value is preferable.
  • the feature point extraction step of step ii) is to distinguish the eye, the maximum value of the eye and the minimum value of the eye from the binary image in which the binarization processing step of step ii) is completed. You may use it.
  • the eye refers to a portion slanted toward the ear of the eye.
  • the feature point extracting step moves a mask by one pixel from one end of the binarized image to the other end of the binarized image as shown in FIG. summation) value, the position where the summation value is valid for the first time, that is, the part where the eye contour is first found, for example, where the summation value is 3 or more, is regarded as the eye position,
  • the position where the difference of the masked mask value is large is regarded as the pupil area, and the method includes finding the highest and lowest value at the pupil position.
  • the mask refers to the area of the partial search of the entire image and the summation refers to the sum of the binarized values in the search area.
  • the highest value measured through the summing mask refers to the contour peak of the eye area, and the lowest value refers to the contour low point of the eye area.
  • the distance and slope calculation step of step iii) is to calculate the distance and the slope between the eye and the pupil using the feature points extracted through the feature point extraction step of step ii).
  • the position of the eye and the pupil is extracted through the feature point extraction step of step ii), the distance and the slope between the eye and the pupil is calculated according to the following equation (1) and (2).
  • the maximum value of the pupil, the minimum value of the pupil, and the eye focus of Equation 1 and Equation 2 refer to respective pixel positions of the binarized image.
  • the maximum value of the pupil represents the contour maximum of the pupil area
  • the minimum value of the pupil represents the contour minimum of the pupil area
  • the eye refers to the position value of the part where the contour of the eye is found.
  • the eye gaze determination step according to the present invention is to determine the eye gaze based on the distance and the slope value calculated through the distance and the slope calculation step of step iv), and is not particularly limited as long as it is a conventional judgment method having this purpose. Do not.
  • the eye gaze determination method when the distance between the right eye and the left eye is greater than a threshold as shown in FIG. 3, the gaze is in the left direction, and the distance between the left eye and the right eye is different. If it is larger than the critical point, the line of sight is in the right direction, and if all of the above conditions are not satisfied, the line of sight is in the left and right front direction.
  • the gaze is downward; if the difference between the inclination of the left eye and the right eye is greater than the threshold, the gaze is upward; Is the downward facing direction.
  • the threshold is an experimentally calculated value, which may be set in advance according to a user's selection.
  • the eye position tracking method according to the present invention described above can be applied to all areas that need to track the eye position, it is recommended to apply to medical headlamps.
  • the medical headlamp is a main body (2) to be worn on the head;
  • a driving unit 4 connected to one side of the main body 2 to provide a driving force;
  • Position adjusting means (6) connected to one side of the driving means (4);
  • a lamp unit 8 connected to one side of the position adjusting means 6 and moving together according to the movement of the position adjusting means 6 and irradiating light to one side of the front end;
  • Photographing means (10) connected to one side of the main body (2) to photograph the position of the eye; It is connected to the driving means 4 and the photographing means 10 to analyze the image taken by the photographing means 10, preferably calculates the eye position by the eye position tracking method of the present invention, the calculated eye position A control unit 12 for operating the driving means 4 accordingly;
  • a power supply unit 14 connected to the control unit 12, the driving means 4, and the lamp unit 8 to apply current.
  • the main body 2 is to be worn on the head of a person, the use of which is not particularly limited as long as it is a conventional device in the art having such a purpose.
  • the main body 2 is preferably used, such as a hair band, headband.
  • the driving means 4 is connected to one side of the main body 2, specifically one side of the main body 2 where the human eye is located, the position adjusting means connected to the lamp unit 8 for irradiating light ( Provide driving force for the operation of 6).
  • the driving means 4 may be any device as long as it is a conventional device providing a driving force, but it is preferable to use a motor.
  • the adjusting means 6 is connected to one side of the driving means 4 and moves in accordance with the operation of the driving means 4 to adjust the position of the lamp unit 8.
  • the position adjusting means 6 is provided with a lamp unit 8 connected to one side thereof to adjust the position of the lamp unit 8 in accordance with the operation of the drive means (4).
  • the position adjusting means according to the present invention (6) can adjust the position of the lamp unit 8 with one drive means (4).
  • the position adjusting means 6 has a drive shaft of the driving means 4, for example, a rotational axis of the motor, located at the center of gravity 26 of the position adjusting means 6, and the lamp unit 8 being It is connected to one side spaced apart from the center of gravity (26) of the position adjusting means (6) connected to the drive shaft, the position adjusting means (6) is rotated due to the drive of the drive means 4 and the lamp unit (8) Adjust the position of).
  • a drive shaft of the driving means 4 for example, a rotational axis of the motor, located at the center of gravity 26 of the position adjusting means 6, and the lamp unit 8 being It is connected to one side spaced apart from the center of gravity (26) of the position adjusting means (6) connected to the drive shaft, the position adjusting means (6) is rotated due to the drive of the drive means 4 and the lamp unit (8) Adjust the position of).
  • the position adjusting means 6 is not particularly limited as long as it can be connected to the drive shaft of the drive means 4, but preferably in the form of a plate, more preferably radially extended plate, disc, longitudinal It may be an extended plate.
  • the lamp unit 8 is connected to the position adjusting means 6 to provide illumination to the user by irradiating light to one side of the front end, the conventional lamp unit 8 in the art having this purpose. ) Is not particularly limited.
  • the lamp unit 8 is connected to the position adjusting means 6 and moves together in accordance with the movement of the position adjusting means 6 moving along the driving means 4 and the position of the lamp unit 8 changes. do.
  • the lamp part 8 comprises a housing 24 which provides an appearance of the lamp part 8; A body 20 positioned to form a groove in the housing 24; And a lamp 22 inserted into and seated in the groove of the body 20.
  • the lamp 22 is moved to the front / rear inside the body 20 as the body 20 is rotated and configured to change the exposure area of the lamp 22 is to change the light irradiation range of the lamp 22 You can change it.
  • the body 20 of the lamp unit 8 when the body 20 of the lamp unit 8 is rotated in one direction, the body 20 is the center of gravity of the position adjusting means 6 connected to the drive shaft of the driving means 4. 26) by reducing the area to which the light is irradiated, i.e. the size of the spot, to more intensively irradiate the light to be useful in the operation of deep and narrow areas, the body (in the opposite direction of the one direction) Rotating 20 allows the body 20 to move away from the center of gravity 26 of the position adjusting means 6 and to expand the spot size so that light can be irradiated in a wider range.
  • the photographing means 10 according to the present invention is connected to one side of the main body 2 to photograph the eye, and is not particularly limited as long as it is a conventional photographing means 10 in the art having such a purpose.
  • the photographing means 10 may be a camera, for example, a digital camera or a CCD camera, and the guide bar 16 extending in a longitudinal direction from one side of the main body 2 so as not to obstruct the user's field of view. It is good to be connected to one end.
  • the photographing means 10 may be provided to be adjacent to the left and right eyes so as to capture both the left and right eyes of the user as needed.
  • the control unit 12 is connected to the driving means 4 and the photographing means 10 to track the eye position by analyzing the image photographed by the photographing means 10 with the eye position tracking method according to the present invention.
  • the calculation is performed, and the driving means (4) in accordance with the calculated eye position direction so that the lamp unit (8) connected to the position adjusting means (6) can irradiate light corresponding to the position of the eye Adjust
  • the control unit 12 may be any control unit 12 in the art having the above-described purpose, but it is preferable to use a printed circuit board.
  • the power supply unit 14 is connected to the control unit 12, the driving means 4 and the lamp unit 8 to apply a current, the conventional power supply unit 14 in the art having this purpose. ) Is not particularly limited.
  • the power supply unit 14 is preferably connected to the control unit 12, the drive means 4 and / or the lamp unit 8 and the like by the wire 18.
  • the power supply 14 may be positioned independently of the medical headlamp and the outside, and may apply current to the medical headlamp through a wire, but a rechargeable battery or a battery may be applied to one side of the main body 2 of the medical headlamp. Equipped to be connected can freely move the user.
  • the power supply unit 14 when the power supply unit 14 is connected to one side of the main body 2 of the medical headlamp, the power supply unit 14 is the other side opposite to one side of the main body 2 where the lamp unit 8 is located. It is good to be provided in.
  • the power supply unit 14 may be integrally formed with the control unit 12.

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Veterinary Medicine (AREA)
  • Ophthalmology & Optometry (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Optics & Photonics (AREA)
  • Radiology & Medical Imaging (AREA)
  • General Engineering & Computer Science (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Eye Examination Apparatus (AREA)
  • Image Analysis (AREA)

Abstract

본 발명은 i) 촬영된 영상을 이진수 이미지로 변환하는 이진화 처리단계; ii) 상기 이진화 처리단계가 종료된 이진수 이미지로부터 눈초리, 눈동자의 최대값 및 눈동자의 최저값을 구분하여 특징점을 추출하는 특징점 추출단계; iii) 상기 특징점 추출단계를 통해 추출된 특징점을 이용하여 눈초리와 눈동자 사이의 거리 및 기울기를 계산하는 거리 및 기울기 계산단계; 및 iv) 상기 거리 및 기울기 계산단계를 통해 계산된 거리 및 기울기 값을 근거로 눈의 시선을 판단하는 눈 시선 판단단계를 포함하는 눈 위치 추적방법에 관한 것이다.

Description

눈 위치 추적방법 및 이를 이용한 의료용 헤드램프
본 발명은 눈 위치 추적방법 및 이를 이용한 의료용 헤드램프에 관한 것으로서, 보다 상세하게는 의사들이 환자를 진료하거나 치료할 경우 헤드램프의 직접적인 수동 조작 없이 의사의 눈 위치에 따라 램프의 광 조사방향이 조절되어 어두운 환부나 원하는 부위에 광이 조사될 수 있도록 하는 눈 위치 추적방법 및 이를 이용한 의료용 헤드램프에 관한 것이다.
일반적으로 헤드램프는 광업, 의료용, 특히 외과술 등의 분야에서 머리띠(head band), 모자 또는 헬멧(helmet)에 부착되어 사용되고 있다.
이러한 헤드램프는 고정 투광조명(floodlight) 또는 휴대용 램프 없이도 그것을 착용한 사람이 실제로 보는 범위를 조명할 수 있다는 장점이 있다.
특히, 상기 헤드램프를 의료용으로 사용하는 경우, 의사가 환부를 살피거나 수술을 할 경우, 원하는 부위를 밝게 조명하여 보다 용이하게 의료행위를 할 수 있도록 한다.
하지만, 상기 의료용 헤드램프는 의사의 시선과는 상관없이 머리에 고정되어 있으므로 수술시 헤드램프의 위치를 조절할 경우, 환자의 오염을 방지하기 위해 집도의가 아닌 간호사가 의사의 머리에 장착된 헤드램프의 방향을 수동으로 조절한다.
여기서, 상기 의사가 자신의 머리에 장착된 헤드램프를 직접 조절하게 되면 보다 신속하고 정확하게 원하는 헤드램프의 위치를 설정할 수 있지만, 수술장갑이 오염되는 문제점이 있다.
본 발명은 촬영수단에 의해 촬영된 눈 부위의 영상을 이진화 처리한 후 특징점을 추출하여 눈 위치를 추적하는 방법을 제공한다.
또한, 본 발명은 촬영수단으로 의사의 눈을 촬영하고, 상기 눈 위치 추적방법을 이용하여 촬영된 영상으로부터 눈 위치를 계산하며, 상기 계산된 눈 위치에 따라 헤드램프의 광 조사방향이 자동적으로 의사의 시선에 대응되도록 하는 의료용 헤드램프를 제공한다.
본 발명은
i) 촬영된 영상을 이진수 이미지로 변환하는 이진화 처리단계;
ii) 상기 이진화 처리단계가 종료된 이진수 이미지로부터 눈초리, 눈동자의 최대값 및 눈동자의 최저값을 구분하여 특징점을 추출하는 특징점 추출단계;
iii) 상기 특징점 추출단계를 통해 추출된 특징점을 이용하여 눈초리와 눈동자 사이의 거리 및 기울기를 계산하는 거리 및 기울기 계산단계; 및
iv) 상기 거리 및 기울기 계산단계를 통해 계산된 거리 및 기울기 값을 근거로 눈의 시선을 판단하는 눈 시선 판단단계를 포함하는 눈 위치 추적방법을 제공한다.
본 발명에 따른 눈 위치 추적방법은 카메라로 촬영한 눈 부위의 영상을 이진화 처리한 후 특징점을 추출하여 눈 위치를 추적하여 사용자의 시선, 즉 눈 위치에 따라 헤드램프에 구비된 램프의 광 조사각이 자동적으로 사용자의 시선에 대응되도록 제어할 수 있다.
도 1은 본 발명에 따른 눈 위치 추적방법을 나타내는 흐름도,
도 2는 본 발명에 따른 눈의 특징점을 추출하는 것을 나타내는 도,
도 3은 본 발명에 따른 눈 시선을 나타내는 도,
도 4는 본 발명에 따른 의료용 헤드램프의 구성도,
도 5는 본 발명에 따른 의료용 헤드램프의 램프부 및 위치 조절부를 나타내는 구성도이다.
한 가지 관점에서, 본 발명은 i) 촬영된 영상을 이진수 이미지로 변환하는 이진화 처리단계; ii) 상기 이진화 처리단계가 종료된 이진수 이미지로부터 눈초리, 눈동자의 최대값 및 눈동자의 최저값을 구분하여 특징점을 추출하는 특징점 추출단계; iii) 상기 특징점 추출단계를 통해 추출된 특징점을 이용하여 눈초리와 눈동자 사이의 거리 및 기울기를 계산하는 거리 및 기울기 계산단계; 및 iv) 상기 거리 및 기울기 계산단계를 통해 계산된 거리 및 기울기 값을 근거로 눈의 시선을 판단하는 눈 시선 판단단계를 포함하는 눈 위치 추적방법을 제공한다.
다른 관점에서, 본 발명은 상기 눈 위치 추적방법을 이용하여 의료용 헤드램프의 광 조사방향을 제어하는 것을 포함하는 의료용 헤드램프를 제공한다.
특히, 상기 의료용 헤드램프는 촬영수단을 이용하여 의사의 눈을 촬영하고, 촬영된 영상으로부터 상기 눈 위치 추적방법을 이용하여 눈 위치를 계산하며, 상기 계산된 눈 위치에 따라 헤드램프의 광 조사방향이 자동적으로 의사의 시선에 대응되도록 한다.
여기서, 상기 의료용 헤드램프는 의사가 환자를 진료하거나 치료할 경우 헤드램프를 직접적으로 조작하지 않고, 의사의 눈 위치, 바람직하게는 눈동자의 위치에 따라 자동으로 어두운 환부나 원하는 부위에 광을 조사할 수 있도록 하는 것으로서, 이러한 목적을 갖는 헤드램프라면 어떠한 것이라도 무방하다.
특히, 본 발명에 따른 헤드램프는 의료용뿐만 아니라 사용자가 머리에 착용하여 시선에 따라 광을 원하는 위치로 조사하는 헤드램프가 필요한 분야, 예를 들면 수리업, 광업 등에 적용될 수도 있다.
이하, 첨부된 도면을 참조하여 본 발명에 대하여 상세히 설명하면 다음과 같다. 그러나 하기의 설명은 오로지 본 발명을 구체적으로 설명하기 위한 것으로 하기 설명에 의해 본 발명의 범위를 한정하는 것은 아니다.
도 1은 본 발명에 따른 눈 위치 추적방법을 나타내는 흐름도, 도 2는 본 발명에 따른 눈의 특징점을 추출하는 것을 나타내는 도, 도 3은 본 발명에 따른 눈 시선을 나타내는 도, 도 4는 본 발명에 따른 의료용 헤드램프의 구성도, 도 5는 본 발명에 따른 의료용 헤드램프의 램프부 및 위치 조절부를 나타내는 구성도로서 함께 설명한다.
도 1 내지 도 5에 도시된 바와 같이, 본 발명에 따른 눈 위치 추적방법은 i) 촬영된 영상을 이진수 이미지로 변환하는 이진화 처리단계; ii) 상기 이진화 처리단계가 종료된 이진수 이미지로부터 눈초리, 눈동자의 최대값 및 눈동자의 최저값을 구분하여 특징점을 추출하는 특징점 추출단계; iii) 상기 특징점 추출단계를 통해 추출된 특징점을 이용하여 눈초리와 눈동자 사이의 거리 및 기울기를 계산하는 거리 및 기울기 계산단계; 및 iv) 상기 거리 및 기울기 계산단계를 통해 계산된 거리 및 기울기 값을 근거로 눈의 시선을 판단하는 눈 시선 판단단계를 포함한다.
본 발명에 따른 단계 i)의 이진화(binarization) 처리단계는 촬영된 영상을 이진수 이미지로 변환하기 위한 것으로서, 이러한 목적을 갖는 이진화 처리방법이라면 특별히 한정되지 않는다.
특히, 상기 이진화는 촬영된 영상, 바람직하게는 촬영된 눈 부분의 영상을 지역으로 구획한 뒤 미리 설정된 임계값을 기준으로 각 지역 내의 영상 픽셀을 이진수, 예를 들면 "0" 또는 "1"로 변환하는 것이다.
여기서, 상기 임계값은 사용자의 선택에 따라 변경 가능하며, 상기 영상 픽셀의 이진화시 "0" 또는 "1"의 이진수 값 또한 임계값을 기준으로 사용자의 선택에 따라 서로 반대로 설정할 수도 있다.
또한, 상기 촬영된 영상은 얼굴에 위치하는 눈 부분을 촬영한 영상으로서, 상기 영상은 좌/우 눈 부분을 각각 촬영한 영상일 수 있으며, 흑백영상 또는 컬러영상 모두를 포함한다.
이때, 상기 촬영된 좌/우 눈 부분의 영상은 각각 이진화 처리단계, 특징점 추출단계, 거리 및 기울기 계산 단계 등을 순차적으로 거쳐 눈 위치를 추적할 수 있도록 한다.
특정적으로, 본 발명에 따른 이진화 처리단계는 그 전단계로서 촬영된 영상에서 피부색을 제거하는 피부색 제거단계를 더 포함할 수 있다.
이때, 상기 피부색 제거단계를 위한 촬영된 영상은 컬러영상인 것이 바람직하다.
또한, 상기 피부색을 제거하는 것은 촬영된 영상에서 각 픽셀의 빨강, 녹색, 파랑 값이 미리 설정된 범위의 값을 만족할 경우에만 이진화 처리가 진행될 수 있도록 한다.
이때, 예시적으로 상기 설정된 범위 값은 빨강의 경우 50 내지 100, 녹색의 경우, 20 내지 50, 파랑의 경우 200 내지 255 범위값이고, 이를 이진화 할 경우 상기 범위값을 모두 만족하면 해당 부분은 눈의 흰자위에 해당하는 부분으로써, 이진화 값을 "0"으로 지정하며, 조건을 만족하지 않으면 눈의 윤곽에 해당하는 부분으로써, "1"로 지정하여 이진화하는 것이 바람직하다.
본 발명에 따른 단계 ii)의 특징점 추출단계는 상기 단계 ii)의 이진화 처리단계가 종료된 이진수 이미지로부터 눈초리, 눈동자의 최대값 및 눈동자의 최저값을 구분하는 것으로서, 이러한 목적을 갖는 통상적인 방법이라면 어떠한 것을 사용하여도 무방하다.
여기서, 상기 눈초리는 눈의 귀 쪽으로 째진 부분을 지칭한다.
특정적으로, 상기 특징점 추출단계는 도 2에 도시된 바와 같이 이진화된 이미지의 일측 종단으로부터 다른 측 종단까지 마스크(mask)를 하나의 픽셀씩 증가시켜 이동시키고, 이동시 각각의 픽셀 위치에서 서메이션(summation) 값을 저장하며, 상기 서메이션 값이 최초로 유효한 부분 즉, 처음으로 눈의 윤곽이 발견되는 부분 예를 들면 서메이션 값이 3이상 되는 부분에서의 위치를 눈초리로 간주하고, 일정간격으로 서메이션된 마스크 값의 차가 큰 위치를 눈동자 부위로 간주하며, 상기 눈동자 위치에서 최고값 및 최저값을 찾는 것을 포함한다.
여기서 상기 마스크는 전체 이미지의 일부 탐색의 영역을 의미하는 것이고 서메이션은 탐색 영역안의 이진화된 값의 합을 의미한다. 또한, 서메이션 마스크를 통해 측정된 최고값은 눈동자 부위의 윤곽 최고점을, 최저값은 눈동자 부위의 윤곽 최저점을 지칭한다.
본 발명에 따른 단계 iii)의 거리 및 기울기 계산단계는 상기 단계 ii)의 특징점 추출단계를 통해 추출된 특징점을 이용하여 눈초리와 눈동자 사이의 거리 및 기울기 등을 계산하는 것이다.
또한, 상기 눈초리 및 눈동자의 위치는 상기 단계 ii)의 특징점 추출단계를 통해 추출된 것으로서, 상기 눈초리와 눈동자 사이의 거리 및 기울기는 다음 수학식 1 및 수학식 2를 따라 계산된다.
<수학식 1>
거리 = (눈동자의 최대값 + 눈동자의 최저값)/2 - 눈초리
<수학식 2>
기울기 = 눈동자의 최대값 - 눈동자의 최소값
여기서, 상기 수학식 1 및 수학식 2의 눈동자의 최대값, 눈동자의 최저값 및 눈초리는 이진화 이미지의 각 픽셀 위치를 지칭한다.
특히, 상기 눈동자의 최고값은 눈동자 부위의 윤곽 최고점을, 눈동자의 최저값은 눈동자 부위의 윤곽 최저점을 나타내고, 눈초리는 눈의 윤곽이 발견되는 부분의 위치값을 지칭한다.
본 발명에 따른 눈 시선 판단단계는 상기 단계 iv)의 거리 및 기울기 계산단계를 통해 계산된 거리 및 기울기 값을 근거로 눈의 시선을 판단하는 것으로서, 이러한 목적을 갖는 통상적인 판단방법이라면 특별히 한정되지 않는다.
이러한 눈 시선 판단방법의 일례로서, 도 3에 도시된 바와 같이 오른쪽 눈의 거리와 왼쪽 눈의 거리 차이가 한계점(threshold)보다 크면 시선은 왼쪽방향이고, 왼쪽 눈의 거리와 오른쪽 눈의 거리 차이가 임계점보다 크면 시선은 오른쪽 방향이고, 상기 조건을 모두 만족하지 못하면 시선은 좌우정면 방향이다.
또한, 오른쪽 눈의 기울기와 왼쪽 눈의 기울기 차이가 임계점보다 크면 시선은 아랫방향이고, 왼쪽 눈의 기울기와 오른쪽 눈의 기울기 차이가 한계점 보다 크면 시선은 위쪽 방향이고, 상기 조건을 모두 만족하지 못하면 시선은 아래정면 방향이다.
여기서 상기 한계점은 실험적으로 산출된 값으로서, 사용자의 선택에 따라 미리 설정될 수 있다.
한편, 전술한 본 발명에 따른 눈 위치 추적방법은 눈 위치를 추적하는 것이 필요한 분야에 모두 적용 가능하며, 추천하기로는 의료용 헤드램프에 적용하는 것이 좋다.
여기서, 상기 의료용 헤드램프는 머리에 착용하는 본체(2); 상기 본체(2)의 일측에 연결설치되어 구동력을 제공하는 구동수단(4); 상기 구동수단(4)의 일측에 연결되는 위치 조절수단(6); 상기 위치 조절수단(6)의 일측에 연결설치되어 위치 조절수단(6)의 움직임에 따라 함께 움직이며 전단 일측으로 광을 조사하는 램프부(8); 상기 본체(2)의 일측에 연결설치되어 눈의 위치를 촬영하는 촬영수단(10); 상기 구동수단(4) 및 촬영수단(10)에 연결설치되어 촬영수단(10)으로 촬영된 영상을 분석, 바람직하게는 본 발명의 눈 위치 추적방법으로 눈 위치를 계산하고, 계산된 눈 위치에 따라 구동수단(4)을 작동시키는 제어부(12); 상기 제어부(12), 구동수단(4) 및 램프부(8)에 연결설치되어 전류를 인가하는 전원공급부(14)를 포함한다.
상기 본체(2)는 사람의 머리에 착용되는 것으로서, 이러한 목적을 갖는 당업계의 통상적인 장치라면 그 사용이 특별히 한정되지 않는다.
상기 본체(2)는 헤어밴드, 머리띠 등을 사용하는 것이 좋다.
상기 구동수단(4)은 상기 본체(2)의 일측, 특정적으로 사람의 시선이 위치하는 본체(2)의 일측에 연결설치되어 광을 조사하는 램프부(8)가 연결설치된 위치 조절수단(6)의 작동을 위한 구동력을 제공한다.
이때, 상기 구동수단(4)은 구동력을 제공하는 통상적인 장치라면 어떠한 것을 사용하여도 무방하지만, 모터를 사용하는 것이 좋다.
상기 조절수단(6)은 상기 구동수단(4)의 일측에 연결설치되어 구동수단(4)의 작동에 따라 움직이며 램프부(8)의 위치를 조절한다.
또한, 상기 위치 조절수단(6)은 상기 구동수단(4)의 작동에 따라 램프부(8)의 위치를 조절할 수 있도록 램프부(8)가 그 일측에 연결설치된다.
한편, 상기 램프부(8)의 위치를 자동으로 조절하기 위해서는 램프부(8)를 x좌표로 이동시키는 구동수단 및 y좌표로 이동시키는 구동수단이 별도로 구비되어야 하지만, 본 발명에 따른 위치 조절수단(6)은 하나의 구동수단(4)으로 램프부(8)의 위치를 조절할 수 있다.
이를 위해, 본 발명에 따른 위치 조절수단(6)은 구동수단(4)의 구동축, 예들 들면 모터의 회전축이 위치 조절수단(6)의 무게중심(26)에 위치하고, 상기 램프부(8)가 구동축과 연결되는 위치 조절수단(6)의 무게중심(26)으로부터 일정 거리 이격되는 일측에 연결설치되어, 상기 구동수단(4)의 구동으로 인해 위치 조절수단(6)이 회전하며 램프부(8)의 위치를 조절한다.
이때, 상기 위치 조절수단(6)은 상기 구동수단(4)의 구동축에 연결될 수 있는 형태라면 특별히 한정되지 않지만, 바람직하게는 판상형, 보다 바람직하게는 방사형으로 확장된 판상형, 원판형, 길이방향으로 확장된 판상형일 수 있다.
본 발명에 따른 램프부(8)는 상기 위치 조절수단(6)에 연결설치되어 전단 일측으로 광을 조사함으로써 사용자에게 조명을 제공하기 위한 것으로서, 이러한 목적을 갖는 당업계의 통상적인 램프부(8)라면 특별히 한정되지 않는다.
이때, 상기 램프부(8)는 상기 위치 조절수단(6)에 연결설치되어 구동수단(4)에 따라 움직이는 위치 조절수단(6)의 움직임에 따라 함께 움직이며 램프부(8)의 위치가 변화한다.
특정 양태로서, 본 발명에 따른 램프부(8)는 램프부(8)의 외관을 제공하는 하우징(24); 상기 하우징(24)의 내부에 홈이 형성되도록 위치하는 몸체(20); 및 상기 몸체(20)의 홈에 삽입되어 안착되는 램프(22)를 포함한다.
이때, 상기 램프(22)는 몸체(20)가 회전함에 따라 몸체(20)의 내부에서 전/후방으로 움직이며 램프(22)의 노출면적이 변화되도록 구성되어 램프(22)의 광 조사범위를 변경할 수 있다.
이러한 일례로서 도 5에 도시된 바와 같이, 램프부(8)의 몸체(20)를 일방향으로 회전시키면 몸체(20)가 구동수단(4)의 구동축과 연결된 위치 조절수단(6)의 무게중심(26) 방향으로 이동하며 광이 조사되는 면적, 즉 스폿(spot)의 크기를 감소시킴으로써, 깊고 좁은 부위의 수술시 유용하도록 광을 보다 집중적으로 조사할 수 있도록 하고, 상기 일방향의 반대 방향으로 몸체(20)를 회전시키면 몸체(20)가 위치 조절수단(6)의 무게중심(26)과 멀어지며 스폿 크기를 확장시켜 보다 넓은 범위로 광이 조사될 수 있도록 한다.
본 발명에 따른 촬영수단(10)은 본체(2)의 일측에 연결설치되어 눈을 촬영하는 것으로서, 이러한 목적을 갖는 당업계의 통상적인 촬영수단(10)이라면 특별히 한정되지 않는다.
이때, 상기 촬영수단(10)은 카메라, 예를 들면 디지털 카메라 또는 CCD 카메라를 사용하는 것이 좋고, 사용자의 시야를 가리지 않도록 본체(2)의 일측면으로부터 길이방향으로 확장되는 가이드바(16)의 일측 종단에 연결설치되는 것이 좋다.
또한, 상기 촬영수단(10)은 필요에 따라 사용자의 좌/우 눈을 모두 촬영할 수 있도록 좌/우 눈과 인접하도록 두 개 구비될 수 있다.
본 발명에 따른 제어부(12)는 상기 구동수단(4) 및 촬영수단(10)에 연결설치되어 촬영수단(10)으로 촬영된 영상을 본 발명에 따른 눈 위치 추적방법으로 분석하여 눈 위치를 추적, 바람직하게는 계산하고, 상기 계산된 눈 위치에 따라 구동수단(4)을 작동시켜 위치 조절수단(6)에 연결설치된 램프부(8)가 눈의 위치에 대응하여 광을 조사할 수 있도록 방향을 조절한다.
상기 제어부(12)는 전술한 목적을 갖는 당업계의 통상적인 제어부(12)라면 어떠한 것을 사용하여도 무방하지만, 바람직하게는 인쇄회로기판을 사용하는 것이 좋다.
본 발명에 따른 전원공급부(14)는 상기 제어부(12), 구동수단(4) 및 램프부(8)에 연결설치되어 전류를 인가하는 것으로서, 이러한 목적을 갖는 당업계의 통상적인 전원공급부(14)라면 특별히 한정되지 않는다.
여기서, 상기 전원공급부(14)는 상기 제어부(12), 구동수단(4) 및/또는 램프부(8) 등과 전선(18)으로 연결설치되는 것이 바람직하다.
특정 양태로서, 상기 전원공급부(14)는 의료용 헤드램프와 외부에 독립적으로 위치한 후 전선을 통해 의료용 헤드램프에 전류를 인가할 수도 있지만, 충전지 또는 배터리 등을 의료용 헤드램프의 본체(2) 일측에 연결되도록 구비시켜 사용자의 움직임을 자유롭게 할 수 있다.
여기서, 상기 전원공급부(14)를 의료용 헤드램프의 본체(2)의 일측에 연결설치하는 경우, 상기 전원공급부(14)는 램프부(8)가 위치하는 본체(2)의 일측에 대향되는 타측에 구비되는 것이 좋다.
또한, 상기 전원공급부(14)는 제어부(12)와 일체로 형성될 수도 있다.
이상에서 설명한 바와 같이, 본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예는 모두 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모두 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.

Claims (8)

  1. i) 촬영된 영상을 이진수 이미지로 변환하는 이진화 처리단계;
    ii) 상기 이진화 처리단계가 종료된 이진수 이미지로부터 눈초리, 눈동자의 최대값 및 눈동자의 최저값을 구분하여 특징점을 추출하는 특징점 추출단계;
    iii) 상기 특징점 추출단계를 통해 추출된 특징점을 이용하여 눈초리와 눈동자 사이의 거리 및 기울기를 계산하는 거리 및 기울기 계산단계; 및
    iv) 상기 거리 및 기울기 계산단계를 통해 계산된 거리 및 기울기 값을 근거로 눈의 시선을 판단하는 눈 시선 판단단계를 포함하는 눈 위치 추적방법.
  2. 제1항에 있어서,
    상기 단계 i)에서의 촬영된 영상은 얼굴에 위치하는 좌/우 눈 부분을 각각 촬영한 영상인 것을 포함하는 눈 위치 추적방법.
  3. 제1항에 있어서,
    상기 단계 i)의 이진화 처리단계의 그 전단계로서 촬영된 영상에서 피부색을 제거하는 피부색 제거단계를 더 포함하는 것을 특징으로 하는 눈 위치 추적방법.
  4. 제3항에 있어서,
    상기 피부색을 제거하는 것은 촬영된 영상에서 각 픽셀의 빨강, 녹색, 파랑 값이 미리 설정된 범위를 만족할 경우에만 이진화하는 것을 포함하는 눈 위치 추적방법.
  5. 제1항에 있어서,
    상기 단계 ii)의 특징점 추출단계는 이진화된 이미지의 일측 종단으로부터 다른 측 종단까지 마스크를 하나의 픽셀씩 증가시켜 이동시키고, 이동시 각각의 픽셀 위치에서 서메이션 값을 저장하며, 상기 서메이션 값이 최초로 유효한 부분에서의 위치를 눈초리로 간주하고, 일정간격으로 서메이션된 마스크 값의 차가 큰 위치를 눈동자 부위로 간주하며, 상기 눈동자 위치에서 최고값 및 최저값을 찾는 것을 포함하는 눈 위치 추적방법.
  6. 제1항 내지 제5항 중 어느 한 항에 따른 눈 위치 추적방법을 이용하여 의료용 헤드램프의 광 조사 방향을 제어하는 것을 포함하는 의료용 헤드램프.
  7. 제6항에 있어서,
    상기 의료용 헤드램프는
    머리에 착용하는 본체;
    상기 본체의 일측에 연결설치되어 구동력을 제공하는 구동수단;
    상기 구동수단의 일측에 연결되는 위치 조절수단;
    상기 위치 조절수단의 일측에 연결설치되어 위치 조절수단의 움직임에 따라 함께 움직이며 전단 일측으로 광을 조사하는 램프부;
    상기 본체의 일측에 연결설치되어 눈의 위치를 촬영하는 촬영수단;
    상기 구동수단 및 촬영수단에 연결설치되어 촬영수단으로 촬영된 영상을 분석하여 눈 위치를 계산하고, 계산된 눈 위치에 따라 구동수단을 작동시키는 제어부; 및
    상기 제어부, 구동수단 및 램프부에 연결설치되어 전류를 인가하는 전원공급부를 포함하는 의료용 헤드램프.
  8. 제7항에 있어서,
    상기 촬영수단은 좌/우 눈과 인접하도록 2개 구비된 것을 특징으로 하는 의료용 헤드램프.
PCT/KR2012/000711 2011-03-15 2012-01-31 눈 위치 추적방법 및 이를 이용한 의료용 헤드램프 WO2012124893A2 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US13/515,581 US9033505B2 (en) 2011-03-15 2012-01-31 Method of tracking a position of an eye and a medical head lamp using the same

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2011-0022856 2011-03-15
KR20110022856A KR101046677B1 (ko) 2011-03-15 2011-03-15 눈 위치 추적방법 및 이를 이용한 의료용 헤드램프

Publications (2)

Publication Number Publication Date
WO2012124893A2 true WO2012124893A2 (ko) 2012-09-20
WO2012124893A3 WO2012124893A3 (ko) 2012-11-22

Family

ID=44923171

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2012/000711 WO2012124893A2 (ko) 2011-03-15 2012-01-31 눈 위치 추적방법 및 이를 이용한 의료용 헤드램프

Country Status (3)

Country Link
US (1) US9033505B2 (ko)
KR (1) KR101046677B1 (ko)
WO (1) WO2012124893A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107895157A (zh) * 2017-12-01 2018-04-10 沈海斌 一种低分辨率图像虹膜中心精确定位的方法

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6227996B2 (ja) * 2013-12-18 2017-11-08 浜松ホトニクス株式会社 計測装置及び計測方法
KR101613091B1 (ko) * 2014-04-24 2016-04-20 한국과학기술연구원 시선 추적 장치 및 방법
CN107077013B (zh) * 2014-10-21 2020-07-03 飞利浦灯具控股公司 用于发光分布的不用手配置的系统、方法和计算机程序产品
US11166515B1 (en) * 2015-01-26 2021-11-09 Mohammed Ali Hajianpour Helmet/hood assembly structure and method of use thereof
US11166514B2 (en) * 2015-01-26 2021-11-09 Mohammed A. Hajianpour Helmet/Hood assembly structure and method to prepare for use
JP6751324B2 (ja) * 2016-09-14 2020-09-02 株式会社デンソーアイティーラボラトリ 虹彩検出装置、虹彩検出方法、およびプログラム
KR101996415B1 (ko) * 2016-12-30 2019-07-04 현대자동차주식회사 자세 정보 기반 보행자 탐지 및 보행자 충돌 방지 장치 및 방법
CN107238003A (zh) * 2017-07-19 2017-10-10 广州新诚生物科技有限公司 智能头灯
CN107527015B (zh) * 2017-07-21 2020-08-04 深圳市梦网视讯有限公司 一种基于肤色检测的人眼视频定位方法和系统
US10667366B2 (en) * 2018-06-29 2020-05-26 Osram Sylvania Inc. Lighting devices with automatic lighting adjustment
EP3861250A1 (en) 2018-10-04 2021-08-11 Integra LifeSciences Corporation Head wearable devices and methods
USD901737S1 (en) 2018-10-04 2020-11-10 Integra Lifesciences Corporation Wearable headgear device
USD884236S1 (en) 2018-10-04 2020-05-12 Integra Lifesciences Corporation Wearable headgear device
EP3826432A1 (en) 2019-11-22 2021-05-26 Oberalp Spa Headlamp with an ai unit
US11350506B1 (en) 2021-05-03 2022-05-31 Ober Alp S.P.A. Adaptive illumination control via activity classification

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000060570A (ko) * 1999-03-17 2000-10-16 윤종용 T형 탐색 영역을 이용한 얼굴 및 눈 위치 검출 장치 및 그 방법
JP2002324403A (ja) * 2001-04-25 2002-11-08 Dainippon Screen Mfg Co Ltd 視野照明装置
JP2006209442A (ja) * 2005-01-27 2006-08-10 Nissan Motor Co Ltd 眼位置検出装置
JP2010230651A (ja) * 2009-03-27 2010-10-14 Utechzone Co Ltd 視線追跡方法及び視線追跡システム
KR20100119420A (ko) * 2009-04-30 2010-11-09 한국전자통신연구원 눈동자 서술자를 이용한 눈 위치 검출 장치 및 그 방법

Family Cites Families (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08104B2 (ja) * 1992-09-17 1996-01-10 株式会社エイ・ティ・アール視聴覚機構研究所 奥行き視線移動検査装置
JPH074343B2 (ja) * 1992-09-29 1995-01-25 株式会社エイ・ティ・アール視聴覚機構研究所 奥行き知覚分析装置
US5975703A (en) * 1996-09-30 1999-11-02 Digital Optics International Image projection system
US6554444B2 (en) * 2000-03-13 2003-04-29 Kansai Technology Licensing Organization Co., Ltd. Gazing point illuminating device
JP2001276111A (ja) * 2000-03-31 2001-10-09 Nidek Co Ltd 眼科手術装置
US6608615B1 (en) * 2000-09-19 2003-08-19 Intel Corporation Passive gaze-driven browsing
JP4598261B2 (ja) * 2000-11-16 2010-12-15 株式会社トプコン 眼光学特性測定装置
US6604847B2 (en) * 2000-12-28 2003-08-12 Robert A. Lehrer Portable reading light device
JP2003036704A (ja) 2001-07-24 2003-02-07 Dainippon Screen Mfg Co Ltd 照明装置
JP4016735B2 (ja) * 2001-11-30 2007-12-05 株式会社日立製作所 レーンマーク認識方法
UA76280C2 (en) * 2002-01-15 2006-07-17 Steris Inc System for lighting an operating room and a control system for the system
DE60236461D1 (de) * 2002-07-26 2010-07-01 Mitsubishi Electric Corp Bildverarbeitungsvorrichtung
CN100337248C (zh) * 2002-11-07 2007-09-12 松下电器产业株式会社 个人认证方法和认证程序、虹膜登录装置和认证装置
US6690451B1 (en) * 2003-02-06 2004-02-10 Gerald S. Schubert Locating object using stereo vision
US7379567B2 (en) * 2003-07-17 2008-05-27 Matsushita Electric Industrial Co., Ltd. Iris code generation method, individual authentication method, iris code entry device, individual authentication device, and individual certification program
EP1690126A4 (en) 2003-11-26 2010-06-02 Rafael Armament Dev Authority HELMET SYSTEM FOR INFORMATION SYSTEMS OR ARMS SYSTEMS
JP4492847B2 (ja) * 2003-12-25 2010-06-30 株式会社ニデック 眼屈折力測定装置
US7524064B2 (en) * 2004-03-09 2009-04-28 Research Foundation Of The State University Of New York Apparatus and method for assessing retinal damage
WO2007053666A1 (en) * 2005-10-31 2007-05-10 Alcon, Inc. Surgical wide-angle illuminator
US8260008B2 (en) * 2005-11-11 2012-09-04 Eyelock, Inc. Methods for performing biometric recognition of a human eye and corroboration of same
JP4426535B2 (ja) * 2006-01-17 2010-03-03 本田技研工業株式会社 車両の周辺監視装置
US7815342B2 (en) * 2006-12-14 2010-10-19 Medinis David M Surgical headlamp
US7370991B1 (en) * 2006-12-18 2008-05-13 Ellis-Fant Wanda J Voice-controlled surgical lighting assembly
KR100791389B1 (ko) * 2006-12-26 2008-01-07 삼성전자주식회사 스트럭쳐드 라이트를 이용한 거리 측정 장치 및 방법
EP2131721A4 (en) * 2007-03-08 2010-12-01 Univ Northern British Columbia APPARATUS AND METHOD FOR VISUAL FIELD EXAMINATION BY OBJECTIVE PERIMETRY
KR100920450B1 (ko) 2007-03-22 2009-10-08 한양대학교 산학협력단 위치추적 기능을 사용한 수술용 조명로봇시스템과 이를 구비한 수술실 및 위치추적 기능을 사용한 조명로봇 위치이동방법
US8851709B2 (en) * 2007-03-30 2014-10-07 Designs For Vision, Inc. Remote control of illuminating headlamp
JP4966816B2 (ja) * 2007-10-25 2012-07-04 株式会社日立製作所 視線方向計測方法および視線方向計測装置
US8652044B2 (en) * 2008-08-01 2014-02-18 Igor Abramov Portable non-contact tonometer and method of determining intra-ocular pressure using such
EP2182732A1 (en) * 2008-10-28 2010-05-05 Panasonic Corporation Switching between scans in image coding
US8317325B2 (en) * 2008-10-31 2012-11-27 Cross Match Technologies, Inc. Apparatus and method for two eye imaging for iris identification
WO2010143377A1 (ja) * 2009-06-08 2010-12-16 パナソニック株式会社 注視対象判定装置及び注視対象判定方法
EP2507742A2 (en) * 2009-12-02 2012-10-10 Tata Consultancy Services Limited A cost effective and robust system and method for eye tracking and driver drowsiness identification
FR2953616B1 (fr) * 2009-12-08 2011-12-09 Thales Sa Procede de correction de la position des yeux dans une image
JP5521888B2 (ja) * 2010-08-19 2014-06-18 ソニー株式会社 情報処理装置、情報処理方法、プログラム、及び電子装置
JP5538160B2 (ja) * 2010-09-24 2014-07-02 パナソニック株式会社 瞳孔検出装置及び瞳孔検出方法
US8899774B2 (en) * 2010-11-17 2014-12-02 Integra Lifesciences Corporation Wearable headlight devices and related methods
US8903144B2 (en) * 2010-12-01 2014-12-02 Olympus Corporation Endoscope apparatus and method of measuring object
US8408706B2 (en) * 2010-12-13 2013-04-02 Microsoft Corporation 3D gaze tracker
US8888287B2 (en) * 2010-12-13 2014-11-18 Microsoft Corporation Human-computer interface system having a 3D gaze tracker
US8836777B2 (en) * 2011-02-25 2014-09-16 DigitalOptics Corporation Europe Limited Automatic detection of vertical gaze using an embedded imaging device
KR101114993B1 (ko) * 2011-02-28 2012-03-06 (재)예수병원유지재단 눈 위치를 추적하는 의료용 헤드램프
US9785835B2 (en) * 2011-03-22 2017-10-10 Rochester Institute Of Technology Methods for assisting with object recognition in image sequences and devices thereof
US8885877B2 (en) * 2011-05-20 2014-11-11 Eyefluence, Inc. Systems and methods for identifying gaze tracking scene reference locations
US9041734B2 (en) * 2011-07-12 2015-05-26 Amazon Technologies, Inc. Simulating three-dimensional features
US8929589B2 (en) * 2011-11-07 2015-01-06 Eyefluence, Inc. Systems and methods for high-resolution gaze tracking

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000060570A (ko) * 1999-03-17 2000-10-16 윤종용 T형 탐색 영역을 이용한 얼굴 및 눈 위치 검출 장치 및 그 방법
JP2002324403A (ja) * 2001-04-25 2002-11-08 Dainippon Screen Mfg Co Ltd 視野照明装置
JP2006209442A (ja) * 2005-01-27 2006-08-10 Nissan Motor Co Ltd 眼位置検出装置
JP2010230651A (ja) * 2009-03-27 2010-10-14 Utechzone Co Ltd 視線追跡方法及び視線追跡システム
KR20100119420A (ko) * 2009-04-30 2010-11-09 한국전자통신연구원 눈동자 서술자를 이용한 눈 위치 검출 장치 및 그 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107895157A (zh) * 2017-12-01 2018-04-10 沈海斌 一种低分辨率图像虹膜中心精确定位的方法
CN107895157B (zh) * 2017-12-01 2020-10-27 沈海斌 一种低分辨率图像虹膜中心精确定位的方法

Also Published As

Publication number Publication date
US9033505B2 (en) 2015-05-19
WO2012124893A3 (ko) 2012-11-22
US20140039273A1 (en) 2014-02-06
KR101046677B1 (ko) 2011-07-06

Similar Documents

Publication Publication Date Title
WO2012124893A2 (ko) 눈 위치 추적방법 및 이를 이용한 의료용 헤드램프
WO2012118282A2 (ko) 눈 위치를 추적하는 의료용 헤드램프
KR101163497B1 (ko) 의료용 헤드램프
CN109938698A (zh) 一种基于人工智能的全方位面部皮肤病检测装置及检测方法
WO2014077447A1 (ko) 살아있는 눈 식별 방법 및 장치
WO2013015482A1 (ko) 휴대용 인체외시경 영상장치
WO2012176960A1 (ko) 홍채 전안부 촬영장치 및 스마트폰을 이용한 의료용 화상시스템
WO2018056563A1 (ko) 카메라를 구비하는 x선 촬영 장치
JP5599687B2 (ja) 内視鏡ナビゲーションシステムの作動方法、及び、内視鏡ナビゲーションシステム
EP2671500A2 (en) Endoscope and endoscope system
CN106714651B (zh) 评价值计算装置以及电子内窥镜系统
WO2021080069A1 (ko) 광을 이용한 마스크형 피부 미용 장치 및 그 제어 방법
JP3124676U (ja) 細隙灯顕微鏡用補助照明装置
CN117676992B (zh) 多组智能灯镜协同照明控制方法和系统
WO2019022361A1 (ko) 의료용 복합촬영장치
CN109688403A (zh) 一种应用于手术室内的裸眼3d人眼追踪方法及其设备
CN213097775U (zh) 一种拍照压舌板
CN212015565U (zh) 一种多模式小动物活体成像装置
CN107238003A (zh) 智能头灯
WO2011065731A2 (ko) 광을 이용한 피부 치료 장치 및 그 방법
WO2015056911A1 (ko) 두 광원 사이에 카메라 대물렌즈가 설치되는 헤드램프 카메라시스템
CN207094253U (zh) 新型智能头灯
WO2016064072A1 (ko) X선 촬영장치
KR20200098973A (ko) 포터블 의료용 헤드라이트
WO2017131307A1 (ko) 헤드램프

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12757635

Country of ref document: EP

Kind code of ref document: A2

WWE Wipo information: entry into national phase

Ref document number: 13515581

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12757635

Country of ref document: EP

Kind code of ref document: A2