WO2015108230A1 - 비접촉 모션 인식 장치 - Google Patents

비접촉 모션 인식 장치 Download PDF

Info

Publication number
WO2015108230A1
WO2015108230A1 PCT/KR2014/001801 KR2014001801W WO2015108230A1 WO 2015108230 A1 WO2015108230 A1 WO 2015108230A1 KR 2014001801 W KR2014001801 W KR 2014001801W WO 2015108230 A1 WO2015108230 A1 WO 2015108230A1
Authority
WO
WIPO (PCT)
Prior art keywords
light
module
scan line
light receiving
distance
Prior art date
Application number
PCT/KR2014/001801
Other languages
English (en)
French (fr)
Inventor
유남준
이진상
홍용표
Original Assignee
엑센도 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엑센도 주식회사 filed Critical 엑센도 주식회사
Publication of WO2015108230A1 publication Critical patent/WO2015108230A1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0421Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0421Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen
    • G06F3/0423Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen using sweeping light beams, e.g. using rotating or vibrating mirror
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/041012.5D-digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface and also measures the distance of the input means within a short range in the Z direction, possibly with a separate measurement setup

Definitions

  • the present invention relates to an apparatus for recognizing a non-contact motion (motion) of an object.
  • the light receiving module for collecting and reflecting the light output from the light output module, and receiving the light reflected from the scanning line reflector and the scanning line region to form a scanning line region having a predetermined range at a predetermined distance based on the reflected light It relates to a non-contact motion recognition device comprising a.
  • the present invention measures an object's distance based on the light reflected from the scanning line region and received by the light receiving module, generates an image frame including distance information corresponding to the time until light is output and received, and generates an image. It relates to a non-contact motion recognition device for comparing the frame to recognize the motion of the object.
  • the electronic devices are operated by directly touching the screen with a finger or a touch pen for touch operation, which is not provided for direct contact or is inconvenient for direct contact.
  • a finger or a touch pen for touch operation which is not provided for direct contact or is inconvenient for direct contact.
  • the non-contact recognition technology includes an output element for outputting light such as infrared rays and a light receiving element for receiving light, wherein the light of the output element output in the direction of the object is reflected by the object, and the light receiving element receives the reflected light. It is configured to
  • the light receiving element when the light receiving element receives the light, it converts it into electrical energy to generate a current, and controls the electronic device in a non-contact manner based on the current.
  • the above-described non-contact recognition technology generally recognizes the existence of an object located within the recognition range or recognizes the motion of an object because it performs object recognition by reflecting and receiving light output in one direction.
  • motion recognition is limited, such as only recognizing a simple motion such as movement.
  • the light is output in the direction of the object, a plurality of outputs in a multi-direction, and equipped with a plurality of light receiving elements (photodiode, camera module, etc.) technology that can recognize a variety of operations Is being developed.
  • a plurality of light receiving elements photodiode, camera module, etc.
  • Korean Patent Laid-Open Publication No. 10-2013-0086727 discloses a touch sensor module for a display and an optical device including the same.
  • the technology described above relates to an optical device that guarantees a freedom of movement of a user by employing a stereoscopic camera.
  • an optical scanning unit installed at one side of the display and scanning light in a direction parallel to the screen of the display, a photographing unit and an optical scanning unit installed at one side of the display and photographing a subject present in front of the screen of the display;
  • a control unit controls the operation of the photographing unit, performs coordinate calculation based on the positioning information by the optical scanning unit, and obtains depth information based on the image information from the photographing unit, and includes a controller for recognizing a specific operation of the subject.
  • the above-described technique is positive in terms of ensuring freedom of various positional movements by the Z axis in addition to the XY axis, but it is difficult to reduce the size and manufacture because the light output means and the light receiving means are provided in plural numbers.
  • the technology described above is not suitable for applying the device embedded in a smart terminal, personal terminal (laptop, desktop) and the like.
  • the recognition of the object by the light output from one light output module consists of detecting the amount of light received by the light receiving module, which can detect the presence of the object or only recognize the extent to which the object is in proximity. There is only.
  • TOF time of flight
  • the optical system When applied to the optical system, it can be implemented to measure the distance according to the light receiving time (flight time) until the light is output to the light receiving module.
  • the degree of proximity of the object can be recognized by measuring the distance of the object through the TOF method.
  • various motions such as fine motion of the object.
  • the above problem can be solved by forming an arbitrary area for dividing a recognized object into a predetermined range and measuring a distance corresponding to each range.
  • the contactless recognition device is provided with at least a number of light output module and a light receiving module that can be manufactured in a small size, through the light output from the light output module to form an area that can be divided into a predetermined range, corresponding to each range It is required to develop a technology that can recognize the motion of the object by measuring the distance.
  • the problem to be solved in the present invention is to solve the problem in the present invention, in the apparatus for recognizing the non-contact operation of the object, to collect and reflect the light output from a single optical output module, based on the reflected light
  • the present invention provides a non-contact motion recognition apparatus including a scan line reflector for forming a scan line region having a predetermined range at a predetermined distance, and a light receiving module for receiving light reflected from the scan line region.
  • Another object of the present invention is to measure the distance of the object based on the light reflected from the scanning line region and received by the light receiving module, generating an image frame including distance information corresponding to the time until the light is output and received
  • the present invention provides a non-contact motion recognition apparatus for recognizing a motion of an object by comparing generated image frames.
  • Non-contact motion recognition device for solving the above problems, the optical output module; A scan line reflector for receiving and reflecting the light output from the optical output module and for reflecting the light to form a scan line region having a predetermined range at a predetermined distance; And a light receiving module configured to receive light reflected from the scan line region.
  • the present invention is characterized in that the light output from the optical output module has a predetermined direction through the scanning line reflector to convert to the scanning line output to the outside, and forming a scanning line point and the scanning line region based on the scanning line.
  • the present invention further comprises a measurement control unit for measuring the distance to the object based on the light received by the light receiving module, distance measurement to the object is required until the light output from the light output module is received by the light receiving module It is a technical feature to be measured based on the light receiving time.
  • the present invention provides a frame generation module for generating an image frame including the distance information corresponding to the time from which the light is output to receive; And a motion detection module for detecting a motion by comparing the image frames generated by the frame generation module.
  • the non-contact motion recognition device has an effect of making it easy to manufacture small because it comprises a single light output module and a single light receiving module to recognize the non-contact motion of the object.
  • the present invention forms a scanning line region through the light output from the optical output module, and when the light reflected from the scanning line region is received by the light receiving module, the image including the distance information corresponding to the time until the light is output and received
  • the motion of the object is recognized, and the distance of each of the scan line points constituting the scan line area can be measured to recognize various motions (movement, tilt, fine motion, etc.) of the object.
  • the present invention is applicable to various devices and at the same time has a remarkable effect of recognizing various motions of an object.
  • FIG. 1 shows a schematic configuration of a non-contact motion recognition apparatus according to the present invention.
  • FIG. 1A illustrates an assembly view of a non-contact motion recognition apparatus according to the present invention.
  • Figure 1b shows a block diagram of the internal configuration of the non-contact motion recognition apparatus according to the present invention.
  • FIG. 2 illustrates a scan line region formed for motion recognition of an object in a non-contact motion recognition apparatus according to the present invention.
  • Figure 2a shows in detail the scanning line region of the non-contact motion recognition apparatus according to the present invention.
  • FIG. 2b illustrates an image frame generated based on a scan line region in a non-contact motion recognition apparatus according to the present invention.
  • FIG. 3 illustrates an example of an image frame generated according to an operation of an object in a non-contact motion recognition apparatus according to the present invention.
  • FIG. 4 illustrates another example of an image frame generated according to an operation of an object in a non-contact motion recognition apparatus according to the present invention.
  • FIG. 5 illustrates an example in which a non-contact motion recognition apparatus according to the present invention is applied to a control target device to recognize a non-contact motion.
  • 5A illustrates that an object moves in a high and low direction in the non-contact motion recognition apparatus according to the present invention.
  • FIG. 6 illustrates another example in which a non-contact motion recognition apparatus according to the present invention is applied to a control target device to recognize a non-contact motion.
  • the present invention relates to an apparatus for recognizing a non-contact motion (motion) of an object, and more particularly, to collect and reflect light output from an optical output module, and a scan line region having a predetermined range at a predetermined distance based on the reflected light.
  • the present invention relates to a non-contact motion recognition apparatus including a scan line reflector for forming a light receiving module and a light receiving module for receiving light reflected from the scan line region.
  • the operation of the object described herein may mean not only the non-contact motion operation of the object, but also the shape (state of presence or absence) of the object.
  • Figure 1 shows a schematic configuration of a non-contact motion recognition device according to the present invention
  • Figure 1a shows an assembly view of the non-contact motion recognition device according to the present invention
  • Figure 1b is an interior of the contactless motion recognition device according to the present invention A block diagram of the configuration is shown.
  • the recognition apparatus 100 includes a light output module 110, a condenser lens 120, a scanning line reflector 130, a light receiving module 140, a measurement control unit 150, and a compensation module 160 ( 1b).
  • the light output module 110 outputs light.
  • the light output module 110 is installed to output light in the horizontal direction of the recognition device 100, and is provided as a single piece. Depending on design conditions, the light output module 110 may be provided in two or more, but preferably only one.
  • the light output module 110 may include a semiconductor laser (LD), a light emitting diode (LED) and a nitride semiconductor vertical cavity surface output laser diode (VCSEL LED).
  • LD semiconductor laser
  • LED light emitting diode
  • VCSEL LED nitride semiconductor vertical cavity surface output laser diode
  • the light output from the light output module 110 is incident on the scanning line reflector 130 through the condenser lens 120.
  • the condenser lens 120 condenses the light output from the light output module 110 to the scan line reflector 130, and specifically, condenses the light to the reflector module 131 of the scan line reflector 130 (FIG. 1a).
  • the scan line reflector 130 collects and reflects the light output from the light output module 110 and forms the reflected light into a scan line region having a predetermined range at a predetermined distance.
  • the scan line reflector 130 includes the reflector module 131 and the scan line control module 132 described above.
  • the reflector module 131 reflects light incident from the light output module 110, and the scan line control module 132 controls the reflector module 131 so that the light reflected from the reflector module 131 forms a scan line region. Perform the function.
  • the reflector module 131 may be configured to be fixed to the recognition device 100 through an axis. In this case, the reflector module 131 may be configured to shake circumferentially under the control of the scan line control module 132 about the axis. .
  • the reflector module 131 may be manufactured to be ultra-thin through MEMS (Micro Electro Mechanical System) technology.
  • MEMS Micro Electro Mechanical System
  • This MEMS technology refers to a technology for processing ultrafine density integrated circuits, ultrathin gears, and hard disks by processing silicon, quartz, and glass.
  • the reflector module 131 may be manufactured to be ultra-thin through Piezo technology, and high precision control may be performed.
  • Piezo technology uses a principle in which a ceramic piezoelectric body and an internal electrode are formed in a layered and multilayered structure, and a mechanical deformation is obtained when a voltage is applied to the ceramic piezoelectric material, so that nanometer (nm) level high precision control is possible.
  • the reflector module 131 can be manufactured to be extremely thin.
  • the light reflected by the reflector module 131 is transmitted in the direction in which the reflector module 131 guides through the output lens 133, and the output lens 133 is provided on the reflector module 131 (FIG. 1a).
  • the output lens 133 may be configured as an f-theta lens according to design conditions. Accordingly, the light output from the reflector module 131 may be scanned at a constant speed by generating distortion aberration while passing through the output lens 133, thereby forming a more uniform (uniform) resolution of the scan line region formed. have.
  • FIG. 2 illustrates a scan line region formed for motion recognition of an object in a non-contact motion recognition apparatus according to the present invention.
  • the light reflected from the reflector module 131 is output to the outside of the recognition device 100 through the output lens 133 in the direction guided by the reflector module 131.
  • the light reflected from the reflector module 131 and output to the outside is described as a scanning line SL.
  • the scan line SL is output in a direction guided by the reflector module 131 which is circumferentially controlled by the scan line control module 132.
  • the scan line control module 132 may be configured to store the pattern order for the circumferential shaking control of the reflector module 131 in advance, and the light output module 110 may be configured to continuously output light.
  • the light output from the light output module 110 may be reflected from the reflector module 131 and output to the scan line SL, and may be output in a direction guided by the reflector module 131 to form the scan line point SP.
  • the scan line area SA may be formed in a predetermined area by being output along the above-described pattern.
  • the scanning line point SP may be formed in an area where the scanning line SL is reflected from the object, that is, an area in which the object is recognized.
  • the scan line area SA is an area in which each scan line SL is formed in a horizontal direction at a predetermined distance, and is preferably formed by the scan line SL output from the optical output module 110 and output to the outside. It is formed within the range of light.
  • the present invention forms a scan line area SA within a range of light formed by the scan line SL reflected by the reflector module 131, and the scan line SL sequentially output along the set pattern is the scan line area SA.
  • the scan line points SP may be configured to be synchronized with each other in the vertical direction or the horizontal direction within the scan line area SA.
  • the scan line SL which forms the scan line area SA, is configured to be reflected by the scan line area SA and received by the light receiving module 140.
  • the present invention describes that the scan line SL is reflected from the scan line area SA, the scan line point SP, and the object, which is defined as the scan line area SA, which is formed in the area where the object is detected.
  • the portion where the scan line SL contacts the scan line area SA is defined as the scan line point SP, and thus it is explicitly stated that the scan line SL is reflected from the object. Accordingly, it is emphasized that there is no confusion in understanding the present invention.
  • the light receiving module 140 performs a function of receiving light reflected from the scan line area SA.
  • the light receiving module 140 may be provided in two or more according to the number of the light output module 110, but preferably only one.
  • the recognition apparatus 100 may recognize the motion of an object. This is because the scan line SL reflected from each scan line point SP is received by the light receiving module 140. Motion recognition may be performed by measuring a distance corresponding to SP).
  • the light receiving lens 141 is provided on the light receiving module 140.
  • the light receiving lens 141 serves to guide the light reflected from the scan line area SA to be focused on the light receiving module 140.
  • measuring the distance to the object may measure the distance of each scan line point SP corresponding to the object located in the scan line area SA.
  • the above-described distance measurement is performed by the optical output module 110.
  • the time until light is received by the light receiving module 140 (hereinafter, referred to as 'light receiving time') is calculated, and the distance is measured based on the calculated time.
  • FIG. 2A illustrates the scanning line region of the non-contact motion recognition apparatus according to the present invention in detail.
  • an object is a hand as shown in FIG. 2A of the accompanying drawings.
  • the distance information corresponding to the hand shape is measured.
  • FIG. 2A is only attached to help understanding of the present invention.
  • the measured distance value may not be displayed in the scan line area SA.
  • the circle shown in the scan line area SA in FIG. 2A represents the scan line point SP, and the number described in the circle means the distance measured at each scan line point SP.
  • numerical information from 0 to 7 is described in each scan line point SP, and the numerical information described here means distance information.
  • the distance information is illustrated as an inverse concept of the time measured based on the light receiving time for easy explanation.
  • the distance information may be set in numerical units (for example, 0 to 5), and a lower number may be written as the light receiving time is shorter or higher as the light receiving time is based on the light receiving time. Can be configured.
  • the distance information is sufficient if the distance of the object can be measured based on the light reception time of the light.
  • the recognition apparatus 100 generates an image frame including distance information based on the scan line point SP of the scan line area SA where the distance is measured, and includes a measurement controller 150 for this purpose.
  • the measurement controller 150 measures the distance to the object based on the light received by the light receiving module 140. That is, the measurement of the distance based on the scan line SL received by the light receiving module 140 described above is performed through the measurement controller 150.
  • the measurement control unit 150 includes a frame generation module for generating an image frame including distance information from which the distance to the object is measured and an motion detection module for comparing an image frame generated by the frame generation module and detecting an operation.
  • the frame generation module generates a plurality of image frames in seconds, and may preferably generate 10 to 30 frames per second.
  • the image frame is generated based on the scan line area SA including the measured distance information and is generated including the distance information.
  • FIG. 2b illustrates an image frame generated based on a scan line region in a non-contact motion recognition apparatus according to the present invention.
  • the image frames IF of FIG. 2B represent image frames IF-1, IF-2, IF-3 .. IF-n, which are generated in plural by seconds, and each image frame.
  • (IF-1, IF-2, IF-3 .. IF-n) includes distance information corresponding to the shape of the hand according to FIG. 2B.
  • distance information according to the image frame IF may be changed accordingly.
  • the motion of the object may be recognized by comparing the changed image frame IF.
  • FIG. 3 is a view illustrating an example of an image frame generated according to an operation of an object in a non-contact motion recognition apparatus according to the present invention
  • FIG. 4 illustrates another example of an image frame generated according to an operation of an object in a non-contact motion recognition apparatus according to the present invention. An example is shown.
  • 3 of the accompanying drawings shows an example of the distance information included in the image frame IF depending on the operation of the object O, and is included in the image frame according to the movement of the object and the movement of the object.
  • Distance information b is shown.
  • the object O when the object O moves from the left direction to the right direction with respect to the recognition device 100 as illustrated in FIG. 3 of the accompanying drawings (a), the object O is included in the image frame IF.
  • the distance information may vary as shown in FIG.
  • the comparison of the image frame IF may be configured to sequentially compare the before and after image frame IF.
  • the n-1 th image frame IF is compared with the n th image frame IF
  • the n th image frame IF is compared with the n + 1 th image frame IF.
  • the image frame IF is compared and the distance information included in the image frame IF does not change, it may be determined that the object is not moving.
  • FIG. 4 of the accompanying drawings shows distance information b of the image frame IF depending on the operations of the examples (a) and (a) of the non-contact operation of folding only the index finger.
  • the present invention can recognize not only the movement according to the direction movement of the object O, but also the fine motion of the object O.
  • the compensation module 160 outputs compensation light according to the peripheral illumination of the recognition device 100.
  • an illumination sensor (not shown in the drawing) may be further provided.
  • the illumination sensor may be provided outside the recognition device 100 or may be embedded in the recognition device 100.
  • the light output and reflected from the light output module 110 of the recognition device 100 is received by the light receiving module 140, the light and the ambient light around the recognition device 100 (natural light, illumination light, etc.). ) May be mixed to cause a malfunction in the operation of the recognition device 100.
  • the light received by the light receiving module 140 may be compensated by outputting a predetermined light from the compensation module 160, wherein the light output from the compensation module 160 is light output from the light output module 110. And light having a 180 ° phase difference, and the light does not leak outside of the recognition device 100.
  • the recognition device 100 may minimize interference.
  • the present invention can be configured as described above to recognize a variety of motion, the object (up), down (down), left (left), right (high), high (low) or diagonal movement and Recognize object motion of the same type.
  • the direction key of the control object may be moved according to the moving direction of the object, and the moving speed of the control object may be controlled according to a high or low degree of the hand, which is illustrated in FIG. 5 of the accompanying drawings. And 5a.
  • FIG. 5 illustrates an example in which a non-contact motion recognition apparatus according to the present invention is applied to a control target device to recognize a non-contact motion
  • FIG. 5A illustrates a high object O in the recognition apparatus 100 according to the present invention. , It is shown to move in the low direction.
  • the direction of the hand (object) may be moved, but by varying the high and low degrees from the recognition device 100, the direction key speed of the moving target may be controlled ( 5a).
  • the object O when the object O is operated at a low level (h1, height 1) from the recognition device 100, the speed of the direction key of the control target is quickly controlled, and the object O is recognized by the recognition device 100.
  • a height of about (h2, height 2) from the height can be controlled to control the direction key speed of the control target. At this time, it can be configured to be controlled in reverse according to the setting.
  • FIG. 6 illustrates another example in which a non-contact motion recognition apparatus according to the present invention is applied to a control target device to recognize a non-contact motion.
  • the hand may be tilted in the forward, backward, left, and right directions in the direction of the arrow, and may be controlled to move the direction key of the control object according to the tilt direction.
  • the speed of the control target direction key can be controlled according to the degree of inclination (angle) of the object.
  • the non-contact motion recognition apparatus can recognize a variety of non-contact motions
  • the non-contact motion recognition apparatus can recognize a combined motion in another form.
  • the object displayed on the control object can be picked up and moved from left to right.
  • the direction of the control object may be controlled according to the inclination direction of the hand (object), but the direction moving speed of the control object may be adjusted according to a high or low degree.
  • the present invention may be configured to interoperate with the device to which the recognition device 100 is applied, and control and control the device (device) through the above-described non-contact motion recognition by presetting and storing the control according to the recognized operation. .
  • various non-contact motion recognition may be performed, such as dial, depth adjustment, enlargement and reduction, window control, slide control, and numeric motion.
  • the output element and the light receiving element are provided one by one, there is an advantage that it can be manufactured in a small size and can be applied to various devices.
  • the non-contact motion recognition apparatus configured as described above is easy to manufacture small because it comprises a single light output module and a single light receiving module in order to recognize the non-contact operation of the object.
  • the present invention forms a scanning line region through the light output from the optical output module, and when the light reflected from the scanning line region is received by the light receiving module, the image including the distance information corresponding to the time until the light is output and received
  • the motion of the object is recognized, and the distance of each of the scan line points constituting the scan line area can be measured to recognize various motions (movement, tilt, fine motion, etc.) of the object.
  • the present invention can be applied to various devices and can recognize various motions of an object.
  • or 6 described only the main matter of this invention, and this invention is limited to the structure of FIG. 1 thru

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

본 발명은 물체의 비접촉 동작(모션)을 인식하는 장치에 관한 것으로, 더욱 구체적으로는 광출력모듈에서 출력된 광을 집광하여 반사시키며, 반사된 광에 근거하여 일정거리에서 일정범위를 갖는 주사선 영역을 형성하는 주사선 반사경 및 주사선 영역으로부터 반사된 광을 수광하는 수광모듈을 포함하는 비접촉 모션 인식 장치에 관한 것이다. 이때 주사선 영역은 광출력모듈에서 출력된 광이 주사선 반사경을 통해 일정 방향을 갖으며 반사되도록 구성하여 상기 광에 근거하여 복수의 주사선 포인트를 형성하고, 주사선 포인트가 연결되어 형성된다. 또한 본 발명은 수광모듈에 수광되는 광에 근거하여 물체까지의 거리를 측정하되, 물체까지의 거리 측정은 광출력모듈에서 출력된 광이 수광모듈에 수광되기까지 소요되는 수광시간에 근거하여 측정되는 비접촉 모션 인식 장치에 관한 것이다. 또한 본 발명은 광이 출력되어서 수광되기까지의 시간에 대응되는 거리정보가 포함된 이미지 프레임을 생성하고, 생성된 이미지 프레임을 비교하여 물체의 동작을 인식할 수 있는 비접촉 모션 인식 장치에 관한 것이다.

Description

비접촉 모션 인식 장치
본 발명은 물체의 비접촉 동작(모션)을 인식하는 장치에 관한 것이다.
더욱 구체적으로는, 광출력모듈에서 출력된 광을 집광하여 반사시키며, 반사된 광에 근거하여 일정거리에서 일정범위를 갖는 주사선 영역을 형성하는 주사선 반사경 및 주사선 영역으로부터 반사된 광을 수광하는 수광모듈을 포함하는 비접촉 모션 인식 장치에 관한 것이다.
본 발명은 주사선 영역으로부터 반사되어 수광모듈에 수광된 광에 근거하여 물체의 거리를 측정하며, 광이 출력되어 수광되기까지의 시간에 대응되는 거리정보를 포함하는 이미지 프레임을 생성하고, 생성된 이미지 프레임을 비교하여 물체의 동작을 인식하는 비접촉 모션 인식 장치에 관한 것이다.
최근에는 기술이 발달 됨에 따라 별도의 컬트롤러를 구비할 필요없이 터치만으로 전자기기를 조작할 수 있게 되었으며, 이러한 장치에는 AVN(Audio, Video, Navigation) 장치, 이동전화 단말기, 태블릿 PC 등이 있다.
그러나 터치를 통해 전자기기를 조작하는데에 있어서, 터치조작을 위해 손가락 또는 터치펜(Touch Pen)을 화면에 직접 접촉하여 전자기기를 조작하고 있는데, 이는 직접 접촉할 여건이 마련되지 않거나 직접 접촉하기 불편한 상태에 있는 경우에는 전자기기를 조작하기 어려운 문제가 있다.
위와 같은 문제를 해결하기 위하여 모바일 기기의 키버튼 또는 스크린을 직접 접촉하지 않고 조작을 위한 모션, 움직임, 동작 등(이하, '동작'으로 지칭)을 인식하여 전자기기의 조작을 제어할 수 있는 비접촉 인식 기술이 개발되고 있다.
이러한 비접촉 인식 기술은, 적외선 등의 광을 출력하는 출력소자와 광을 수광하는 수광소자를 배치하며, 물체 방향으로 출력되는 출력소자의 광이 물체에 의하여 반사되고, 반사된 광을 수광소자가 수광하도록 구성하고 있다.
이에 따라 수광소자가 광을 수광하면 이를 전기 에너지로 변환하여 전류를 발생시키고, 상기 전류에 근거하여 제어부에 의해 전자기기를 비접촉식으로 제어하는 것이다.
그러나 위와 같은 비접촉 인식 기술은 일반적으로 하나의 방향으로 출력되는 광이 물체에 반사되어 수광되는 것으로 물체 인식을 수행하기 때문에 인식범위 내에 위치하는 물체의 존재 여부를 인식하거나 물체의 동작을 인식한다고 하더라도 슬라이드 이동과 같은 단순한 동작만을 인식하는 등 동작 인식이 제한되는 불편함이 있다.
한편, 위의 불편함을 해소하기 위하여 광이 물체 방향으로 출력되되, 복수 개로 다방향에서 출력되며, 수광소자(포토 다이오드, 카메라 모듈 등)를 복수 개로 구비하여 다양한 동작을 인식할 수 있는 기술이 개발되고 있다.
이러한 기술과 관련하여 공개특허공보 제10-2013-0086727호에는 디스플레이용 터치센서모듈 및 이를 포함하는 광학장치가 기재되어 있다.
위에 기재된 기술은 입체 카메라를 채용함으로써 사용자의 이동의 자유도를 보장하는 광학장치에 관한 것이다.
개략적으로 보면, 디스플레이 일측에 설치되고 디스플레이의 스크린과 평행한 방향으로 광을 주사하는 광 주사부, 디스플레이의 일측에 설치되고 디스플레이의 스크린의 전방에 존재하는 피사체를 촬영하는 촬영부 및 광 주사부와 촬영부의 동작을 제어하되, 광 주사부에 의한 위치 결정 정보에 근거하여 좌표계산을 수행하고 촬영부로부터의 영상 정보를 기초로 깊이 정보를 획득하여 피사체의 특정 동작을 인식하는 제어부를 포함한다.
그러나 위에 기재된 기술은 XY축 외에도 Z축에 의해 다양한 위치 이동의 자유성을 보장할 수 있는 점에서는 긍정적이나, 광의 출력수단과 수광수단이 복수 개 씩 구성되기 때문에 소형화 제작이 어려운 문제점이 있다.
즉, 위에 기재된 기술은 장치를 스마트 단말기, 개인 단말기(노트북, 데스크탑) 등에 내장하여 적용하기에 적합하지 않다.
이에 따라 장치를 구성하는 모듈의 개수를 최소화하여 소형으로 제작 가능함과 동시에 다양한 동작을 인식할 수 있는 기술의 개발이 절실하다.
그런데 상술된 바와 같이 비접촉 인식 장치를 구성하는 모듈의 개수를 최소화하기 위해서 한 개씩의 광출력모듈과 수광모듈을 구비하는 경우에는 인식할 수 있는 동작이 제한되는 문제점이 있다.
부연하면, 한 개의 광출력모듈에서 출력되는 광으로 물체를 인식하는 것은, 수광모듈에 수광된 광의 양을 검출하는 것으로 이루어지는데, 이는 물체의 존재 여부를 감지하거나 물체가 근접해 있는 정도만을 인식할 수 있을 뿐이다.
한편, 입자 빔이 일정한 거리를 비행하여 검출기에 검출될 때까지의 시간에 근거하여 속도, 운동 에너지 혹은 거리를 측정할 수 있는 TOF(Time Of Flight) 방식이 있다.
이를 광학계에 적용하면, 광이 출력되어 수광모듈에 수광되기까지의 수광시간(비행시간)에 따른 거리를 측정하도록 구현할 수 있다.
이에 따라 TOF 방식을 통해 물체의 거리를 측정하여 물체가 근접한 정도를 인식할 수 있는데, 여전히 물체의 미세동작 등 다양한 동작을 인식하기에는 어려운 문제점이 존재한다.
그러나 위의 문제점은, 인식되는 물체를 소정의 범위로 구분할 수 있는 임의의 영역을 형성하고, 각 범위에 대응되는 거리를 측정하는 것으로 해결할 수 있다.
따라서 비접촉 인식 장치를 소형으로 제작할 수 있는 최소한 개수의 광출력모듈과 수광모듈을 구비하되, 광출력모듈에서 출력되는 광을 통해 물체를 소정의 범위로 구분할 수 있는 영역을 형성하고, 각 범위에 대응되는 거리를 측정하는 것으로 물체의 동작을 인식할 수 있는 기술의 개발이 요구된다.
위와 같은 요구에 부응하기 위하여 안출된 것으로, 본 발명에서 해결하고자 하는 과제는 물체의 비접촉 동작을 인식하는 장치에 있어서, 단일 개의 광출력모듈에서 출력된 광을 집광하여 반사시키며, 반사된 광에 근거하여 일정거리에서 일정범위를 갖는 주사선 영역을 형성하는 주사선 반사경 및 주사선 영역으로부터 반사된 광을 수광하는 수광모듈을 포함하는 비접촉 모션 인식 장치를 제공하는 데 있다.
본 발명의 다른 목적은, 주사선 영역으로부터 반사되어 수광모듈에 수광된 광에 근거하여 물체의 거리를 측정하되, 광이 출력되어 수광되기까지의 시간에 대응되는 거리정보를 포함하는 이미지 프레임을 생성하고, 생성된 이미지 프레임을 비교하여 물체의 동작을 인식하는 비접촉 모션 인식 장치를 제공하는 데 있다.
위와 같은 과제를 해결하기 위한 본 발명에 따른 비접촉 모션 인식 장치는, 광출력모듈; 광출력모듈에서 출력된 광을 수광하여 반사시키며, 반사된 광이 일정거리에서 일정범위를 갖는 주사선 영역을 형성하도록 하는 주사선 반사경; 및 주사선 영역으로부터 반사된 광을 수광하는 수광모듈;을 포함하는 것을 기술적 특징으로 한다.
또한 본 발명은 광출력모듈에서 출력된 광이 주사선 반사경을 통해 일정 방향을 갖으며 외부로 출력되는 주사선으로 변환하고, 주사선에 근거하여 주사선 포인트 및 주사선 영역을 형성하는 것을 기술적 특징으로 한다.
또한 본 발명은 수광모듈에 수광되는 광에 근거하여 물체까지의 거리를 측정하는 측정 제어부;를 더 포함하되, 물체까지의 거리 측정은 광출력모듈에서 출력된 광이 수광모듈에 수광되기까지 소요되는 수광시간에 근거하여 측정되는 것을 기술적 특징으로 한다.
또한 본 발명은 광이 출력되어서 수광되기까지의 시간에 대응되는 거리정보가 포함된 이미지 프레임을 생성하는 프레임 생성 모듈; 및 프레임 생성 모듈에서 생성된 이미지 프레임을 비교하여 동작을 검출하는 동작 검출 모듈;을 포함하는 것을 기술적 특징으로 한다.
본 발명에 따른 비접촉 모션 인식 장치는, 물체의 비접촉 동작을 인식하기 위해서 단일의 광출력모듈 및 단일의 수광모듈을 구성하기 때문에 소형 제작이 용이한 효과를 보유한다.
또한 본 발명은 광출력모듈에서 출력되는 광을 통해 주사선 영역을 형성하며, 주사선 영역으로부터 반사된 광이 수광모듈에 수광되면, 광이 출력되어서 수광되기까지의 시간에 대응되는 거리정보가 포함된 이미지 프레임을 생성하고, 생성된 이미지 프레임을 비교하여 물체의 동작을 인식하되, 주사선 영역을 이루는 주사선 포인트 각각의 거리를 측정할 수 있어서, 물체의 다양한 동작(이동, 기울임, 미세동작 등)을 인식할 수 있는 현저한 효과를 보유한다.
이에 따라 본 발명은 다양한 디바이스에 적용가능함과 동시에 물체의 다양한 동작을 인식할 수 있는 현저한 효과를 보유한다.
도 1은 본 발명에 따른 비접촉 모션 인식 장치의 개략적인 구성을 나타낸 것이다.
도 1a는 본 발명에 따른 비접촉 모션 인식 장치의 조립도를 나타낸 것이다.
도 1b는 본 발명에 따른 비접촉 모션 인식 장치의 내부 구성의 블록도를 나타낸 것이다.
도 2는 본 발명에 따른 비접촉 모션 인식 장치에서 물체의 동작 인식을 위해 형성되는 주사선 영역을 나타낸 것이다.
도 2a는 본 발명에 따른 비접촉 모션 인식 장치의 주사선 영역을 상세하게 나타낸 것이다.
도 2b는 본 발명에 따른 비접촉 모션 인식 장치에서 주사선 영역에 근거하여 생성되는 이미지 프레임을 나타낸 것이다.
도 3은 본 발명에 따른 비접촉 모션 인식 장치에서 물체의 동작에 따라 생성되는 이미지 프레임의 일예를 나타낸 것이다.
도 4는 본 발명에 따른 비접촉 모션 인식 장치에서 물체의 동작에 따라 생성되는 이미지 프레임의 다른 일예를 나타낸 것이다.
도 5는 본 발명에 따른 비접촉 모션 인식 장치가 제어 대상 장치에 적용되어 비접촉 모션을 인식하는 일예를 나타낸 것이다.
도 5a는 본 발명에 따른 비접촉 모션 인식 장치에서 물체가 고(高), 저(低) 방향으로 이동하는 것을 나타낸 것이다.
도 6은 본 발명에 따른 비접촉 모션 인식 장치가 제어 대상 장치에 적용되어 비접촉 모션을 인식하는 다른 일예를 나타낸 것이다.
본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 안되며, 발명자는 그 자신의 발명의 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다.
따라서 본 명세서에 기재된 실시 예와 도면에 도시된 구성은 본 발명의 가장 바람직한 실시 예에 불과할 뿐이고 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형 예들이 있을 수 있음을 이해하여야 한다.
이하, 도면을 참조하여 설명하기에 앞서, 본 발명의 요지를 드러내기 위해서 필요하지 않은 사항, 즉 통상의 지식을 가진 당업자가 자명하게 부가할 수 있는 공지 구성에 대해서는 도시하지 않거나, 구체적으로 기술하지 않았음을 밝혀둔다.
본 발명은 물체의 비접촉 동작(모션)을 인식하는 장치에 관한 것으로, 더욱 구체적으로는 광출력모듈에서 출력된 광을 집광하여 반사시키며, 반사된 광에 근거하여 일정거리에서 일정범위를 갖는 주사선 영역을 형성하는 주사선 반사경 및 주사선 영역으로부터 반사된 광을 수광하는 수광모듈을 포함하는 비접촉 모션 인식 장치에 관한 것이다.
여기서 본 명세서에서 기재하는 물체의 동작은, 물체의 비접촉 모션 동작은 물론이며, 물체의 형상(존재 유무 상태)을 포함하는 의미일 수 있음을 미리 강조하는 바이다.
이하, 상기와 같은 본 발명에 따른 비접촉 모션 인식 장치의 구성을 첨부된 도면의 도 1 내지 도 1b를 통해 설명한다.
도 1은 본 발명에 따른 비접촉 모션 인식 장치의 개략적인 구성을 나타낸 것이며, 도 1a는 본 발명에 따른 비접촉 모션 인식 장치의 조립도를 나타낸 것이고, 도 1b는 본 발명에 따른 비접촉 모션 인식 장치의 내부 구성의 블록도를 나타낸 것이다.
본 발명에 따른 인식장치(100)는 광출력모듈(110), 집광렌즈(120), 주사선 반사경(130), 수광모듈(140), 측정 제어부(150) 및 보상모듈(160)을 포함한다(도 1b 참조).
광출력모듈(110)은 광을 출력하는 것으로, 광이 인식장치(100)의 수평방향으로 출력되도록 설치되며, 단일 개로 구비된다. 설계 조건에 따라서 광출력모듈(110)은 두 개 이상으로 구비될 수도 있지만, 바람직하게는 한 개만 구비되도록 한다.
또한 광출력모듈(110)은 반도체 레이저(LD), 발광 다이오드(LED) 및 질화물 반도체 수직공동 표면 출력 레이저 다이오드(VCSEL LED) 등으로 구성될 수 있다.
이러한 광출력모듈(110)에서 출력되는 광은 집광렌즈(120)를 통해 주사선 반사경(130)에 입사된다.
즉, 집광렌즈(120)는 광출력모듈(110)에서 출력된 광을 주사선 반사경(130)에 집광시키는 것으로, 구체적으로는 주사선 반사경(130)의 반사경모듈(131)에 광을 집광시킨다(도 1a 참조).
주사선 반사경(130)은 광출력모듈(110)에서 출력된 광을 집광하여 반사시키되, 반사된 광을 일정거리에서 일정범위를 갖는 주사선 영역으로 형성하는 기능을 수행한다. 이러한 주사선 반사경(130)은 상술된 반사경모듈(131)과 주사선 제어모듈(132)을 포함한다.
반사경모듈(131)은 광출력모듈(110)로부터 입사된 광을 반사시키며, 주사선 제어모듈(132)은 반사경모듈(131)로부터 반사된 광이 주사선 영역을 형성하도록 반사경모듈(131)을 제어하는 기능을 수행한다.
여기서, 반사경모듈(131)은 축을 통해 인식장치(100)에 고정되도록 구성할 수 있는데, 이때 반사경모듈(131)은 축을 중심으로 주사선 제어모듈(132)의 제어에 따라 원주흔들림 되도록 구성할 수 있다.
또한 반사경모듈(131)은 MEMS(Micro Electro Mechanical System, 미세전자기계시스템) 기술을 통해 초박형으로 제작할 수 있다.
이러한 MEMS 기술은 실리콘, 수정 및 유리 등을 가공해 초고밀도 직접회로, 초박형 기어, 하드디스크 등의 초미세 기계 구조물을 만드는 기술을 의미한다.
또한 다른 설계 조건에 따라서는 Piezo 기술을 통해 반사경모듈(131)을 초박형으로 제작하고, 고정밀 제어할 수도 있다.
여기서, Piezo 기술은 세라믹 압전체와 내부 전극이 층상, 다층으로 형성된 구조로 이루어져 전압을 세라믹 압전체에 가하면 기계적 변형을 얻게되는 원리를 이용하는 기술로써, 나노미터(nm) 수준의 고정밀 제어가 가능하기 때문에, 본 발명에 Piezo 기술을 채용하는 경우, 반사경모듈(131)을 초박형으로 제작할 수 있다.
이러한 반사경모듈(131)에 의해 반사되는 광은 출력렌즈(133)를 통해 반사경모듈(131)이 유도하는 방향으로 투과되는데, 출력렌즈(133)는 반사경모듈(131)의 상부에 구비된다(도 1a 참조).
이때 출력렌즈(133)는 설계 조건에 따라서 에프-시터 렌즈(f-theta lens)로 구성할 수 있다. 이에 따라 반사경모듈(131)에서 출력된 광은 출력렌즈(133)를 투과하면서 왜곡수차를 발생하여 등속으로 주사될 수 있고, 이에 따라 형성되는 주사선 영역의 해상도를 더욱 일정(균일)하게 형성할 수 있다.
이와 같은 주사선 영역이 형성되는 일예를 첨부된 도면의 도 2 및 도 2a를 통해 설명한다.
도 2는 본 발명에 따른 비접촉 모션 인식 장치에서 물체의 동작 인식을 위해 형성되는 주사선 영역을 나타낸 것이다.
첨부된 도면의 도 2에 따르면, 반사경모듈(131)로부터 반사된 광은 반사경모듈(131)이 유도하는 방향으로 출력렌즈(133)를 통해 인식장치(100)의 외부로 출력된다.
이와 같이 본 명세서에서는 본 발명의 이해를 돕기 위하여 반사경모듈(131)로부터 반사되어 외부로 출력되는 광을 주사선(SL, Scanning Line)으로 기재한다.
이때 주사선(SL)은, 주사선 제어모듈(132)에 의해 원주흔들림 제어되는 반사경모듈(131)이 유도하는 방향으로 출력된다.
예컨대, 주사선 제어모듈(132)은 반사경모듈(131)의 원주흔들림 제어에 대한 패턴 순서를 미리 저장하도록 구성하며, 광출력모듈(110)은 광을 지속적으로 출력하도록 구성할 수 있다.
이에 따라 광출력모듈(110)에서 출력되는 광은, 반사경모듈(131)로부터 반사되어 주사선(SL)으로 출력될 수 있으며 반사경모듈(131)이 유도하는 방향으로 출력되어 주사선 포인트(SP)를 형성하되, 상술된 패턴을 따라 출력되어 일정 영역에 주사선 영역(SA)을 형성할 수 있다.
여기서, 주사선 포인트(SP, Scanning Point)는, 주사선(SL)이 물체로부터 반사되는 영역, 즉 물체가 인식된 영역에 형성될 수 있다.
또한 주사선 영역(SA, Scanning Area)은, 각 주사선(SL)이 일정거리에 수평방향으로 형성된 영역인 것으로, 바람직하게는 광출력모듈(110)에서 출력되어 외부로 출력된 주사선(SL)이 이루는 광의 범위 내에 형성되는 것이다.
정리하면, 본 발명은 반사경모듈(131)에서 반사된 주사선(SL)이 이루는 광의 범위 내에 주사선 영역(SA)을 형성하되, 설정된 패턴을 따라 순차적으로 출력되는 주사선(SL)이 상기 주사선 영역(SA)에 접촉하는 부분이 주사선 포인트(SP)이다.
이러한 주사선 포인트(SP)는 주사선 영역(SA) 내에서 수직방향 또는 수평방향으로 상호 동기화되도록 구성할 수 있다.
또한 주사선 영역(SA)을 형성한 주사선(SL)은 주사선 영역(SA)에서 반사되어 수광모듈(140)에 수광되도록 구성된다.
이때 본 발명에서는 주사선(SL)이 주사선 영역(SA), 주사선 포인트(SP) 및 물체로부터 반사된다고 기재하고 있으나, 이는 상기에서 물체가 감지되는 영역에 형성되는 것을 주사선 영역(SA)이라 정의하며, 주사선(SL)이 주사선 영역(SA)에 접촉하는 부분을 주사선 포인트(SP)라 정의하는바, 결론적으로 물체로부터 반사됨을 명시적으로 기재하고 있다. 이에 따라 본 발명을 이해하는 데에 혼란이 없음을 미리 강조하는 바이다.
또한 본 발명을 설명하는데 있어서 주사선(SL)이 반사되는 대상(주사선 영역, 주사선 포인트 및 물체)을 구분하여 기재하지 않더라도 본 발명의 이해가 용이한 경우에는 주사선(SL)이 주사선 영역(SA)에서 반사되는 것으로 기재할 것임을 미리 밝힌다.
상술된 바와 같이 수광모듈(140)은 주사선 영역(SA)으로부터 반사된 광을 수광하는 기능을 수행한다. 이때 수광모듈(140)은 광출력모듈(110)의 개수에 따라 두 개 이상으로 구비될 수도 있지만, 바람직하게는 한 개만 구비하도록 한다.
이로써, 본 발명에 따른 인식장치(100)는 물체의 동작을 인식할 수 있는데, 이는 각 주사선 포인트(SP)에서 반사되는 주사선(SL)이 수광모듈(140)에 수광될 때마다 해당 주사선 포인트(SP)에 해당하는 거리를 측정하는 것으로 동작 인식을 수행할 수 있다.
수광모듈(140)의 상부에는 수광렌즈(141)가 구비된다.
수광렌즈(141)는 주사선 영역(SA)으로부터 반사된 광이 수광모듈(140)에 집광되도록 유도하는 기능을 수행한다.
또한 물체까지의 거리를 측정하는 것은, 주사선 영역(SA) 내에 위치하는 물체에 대응되는 각 주사선 포인트(SP)의 거리를 측정할 수 있는데, 상술된 거리 측정은 광출력모듈(110)에서 출력된 광이 수광모듈(140)에 수광되기까지의 시간(이하, '수광시간'이라 지칭)을 계산하고, 계산된 시간에 근거하여 거리를 측정한다.
이를 첨부된 도면의 도 2a를 통해 설명한다.
도 2a는 본 발명에 따른 비접촉 모션 인식 장치의 주사선 영역을 상세하게 나타낸 것으로, 예컨대 첨부된 도면의 도 2a와 같이 물체를 손이라고 가정하고, 손 모양을 도 2a와 같이하여 주사선 영역(SA) 내에 위치시키는 경우, 상기 손 모양에 대응되는 거리정보를 측정한다.
이때 도 2a는 본 발명의 이해를 돕기 위하여 첨부된 것일 뿐, 본 발명을 실시하는데에 있어서는 주사선 영역(SA)에 측정된 거리 값이 표시되지 않을 수 있다.
즉, 도 2a에서의 주사선 영역(SA)에 표시된 원은 주사선 포인트(SP)를 나타낸 것이며, 원 내에 기재된 숫자는 각 주사선 포인트(SP)에서 측정된 거리를 의미한다. 또한 각 주사선 포인트(SP)에는 0 ~ 7까지의 숫자정보가 기재되어 있는데, 여기에 기재된 숫자정보는 거리정보를 의미한다.
이때 거리정보는 설명을 용이하게 하기 위해서 수광시간에 근거하여 측정된 시간의 역수 개념으로 도시하여 설명하고 있다.
예컨대, 도시된 숫자가 클수록 수광시간이 짧은 것을 의미하며, 이는 물체의 거리가 가까운 것을 의미한다.
또 다른 설계 조건에 따라서는 거리정보를 숫자 단위(예를 들어 0 ~ 5)로 기설정하고, 수광시간에 근거하여 수광시간이 짧을수록 낮은 숫자를 기재하도록 하거나 수광시간이 길수록 높은 숫자를 기재하도록 구성할 수 있다.
즉, 거리정보는 광의 수광시간에 근거하여 물체의 거리를 측정할 수 있으면 충분하다.
위와 같이 거리가 측정된 주사선 영역(SA)의 주사선 포인트(SP)에 근거하여 인식장치(100)는 거리정보를 포함하는 이미지 프레임을 생성하는데, 이를 위해 측정 제어부(150)를 포함한다.
측정 제어부(150)는 수광모듈(140)에 수광되는 광에 근거하여 물체까지의 거리를 측정하는 기능을 수행한다. 즉, 상술된 수광모듈(140)에 수광된 주사선(SL)에 근거하여 거리를 측정하는 것은 측정 제어부(150)를 통해 이루어진다.
이러한 측정 제어부(150)는 물체까지의 거리가 측정된 거리정보를 포함하는 이미지 프레임을 생성하는 프레임 생성 모듈과 프레임 생성 모듈에서 생성된 이미지 프레임을 비교하여 동작을 검출하는 동작 검출 모듈을 포함한다.
이때 프레임 생성 모듈은 초 단위로 복수의 이미지 프레임을 생성하는데, 바람직하게 초당 10 내지 30 프레임을 생성할 수 있다.
또한 이미지 프레임은, 측정된 거리정보를 포함하는 주사선 영역(SA)에 근거하여 생성되며, 거리정보를 포함하여 생성된다.
이를 첨부된 도면의 도 2b를 통해 설명한다.
도 2b는 본 발명에 따른 비접촉 모션 인식 장치에서 주사선 영역에 근거하여 생성되는 이미지 프레임을 나타낸 것이다.
첨부된 도면의 도 2b의 이미지 프레임(IF, Image Frame)은 초단위로 복수 개 생성되는 이미지 프레임(IF-1, IF-2, IF-3 .. IF-n)을 나타내고 있으며, 각 이미지 프레임(IF-1, IF-2, IF-3 .. IF-n)은, 도 2b에 따른 손 모양에 대응되는 거리정보를 포함하고 있다.
예컨대, 손 모양(물체)이 변화되면 이에 따라 이미지 프레임(IF)에 따른 거리정보가 달라질 수 있는데, 이때 달라지는 이미지 프레임(IF)을 비교하여 물체의 동작을 인식할 수 있다.
이하, 물체의 동작에 따라 달라지는 이미지 프레임(IF)의 일예를 첨부된 도면의 도 3 및 도 4를 통해 설명한다.
도 3은 본 발명에 따른 비접촉 모션 인식 장치에서 물체의 동작에 따라 생성되는 이미지 프레임의 일예를 나타낸 것이며, 도 4는 본 발명에 따른 비접촉 모션 인식 장치에서 물체의 동작에 따라 생성되는 이미지 프레임의 다른 일예를 나타낸 것이다.
첨부된 도면의 도 3은 물체(O, object)의 동작에 따라 달라지는 이미지 프레임(IF)에 포함된 거리정보의 일예를 나타낸 것이며, 물체의 움직임(a)과 물체의 움직임에 따른 이미지 프레임에 포함된 거리정보(b)를 나타내고 있다.
즉, 첨부된 도면의 도 3과 같이 물체(O)가 인식장치(100)를 기준으로 좌(左) 방향에서 우(右) 방향으로 이동하는 경우(a), 이미지 프레임(IF)에 포함된 거리정보는 도 3의 (b)와 같이 달라질 수 있다.
이때, 이미지 프레임(IF)의 비교는 전, 후 이미지 프레임(IF)을 순차적으로 비교하도록 구성될 수 있다. 부연하면, n-1 번째 이미지 프레임(IF)은 n번째 이미지 프레임(IF)과 비교하며, n번째 이미지 프레임(IF)은 n+1 번째 이미지 프레임(IF)과 비교하는 것이다.
반면, 이미지 프레임(IF)을 비교하였는데, 이미지 프레임(IF)에 포함된 거리정보가 달라지지 않으면 물체가 움직이지 않은 것으로 판단할 수 있다.
또한 첨부된 도면의 도 4는 검지 손가락만을 접는 비접촉 동작의 일예(a) 및 (a)의 동작에 따라 달라지는 이미지 프레임(IF)의 거리정보(b)를 나타내고 있다.
이러한 도 4와 같이, 본 발명은 물체(O)의 방향 이동에 따른 움직임뿐만 아니라, 물체(O)의 미세한 동작 또한 인식할 수 있다.
즉, 물체(O)를 손이라고 가정하였을 경우, 첨부된 도면의 도 4와 같이 검지 손가락만 접는 동작도 인식할 수 있다.
이때 첨부된 도면의 도 3 및 4는 본 발명이 인식할 수 있는 비접촉 동작을 설명하기 위한 일예를 나타내는 것일 뿐, 본 발명의 권리범위가 도면에 의해 한정되거나 축소될 수는 없는 것이므로, 본 발명이 도면에 도시된 비접촉 동작 외의 다양한 동작을 감지할 수 있음을 이해하여야 한다.
보상모듈(160)은 인식장치(100)의 주변조도에 따라 보상용 광을 출력한다.
이를 위해 조도센서(도면에 미표시)를 더 마련할 수 있는데, 조도센서는 인식장치(100) 외부에 마련될 수도 있고, 인식장치(100)에 내장될 수도 있다.
즉, 인식장치(100)의 광출력모듈(110)에서 출력되어 반사된 광이 수광모듈(140)에 수광되는 경우, 상기의 광과 인식장치(100) 주변의 주변광(자연광, 조명등 광 등)이 혼합되어 인식장치(100)의 동작에 기능 장애가 발생할 수 있다.
따라서, 보상모듈(160)에서 일정 광을 출력하는 것으로 수광모듈(140)에 수광되는 광을 보상할 수 있는데, 여기서 보상모듈(160)에서 출력되는 광은 광출력모듈(110)에서 출력하는 광과 180°위상차를 갖는 광이며, 이 광은 인식 장치(100)의 외부로는 누설되지 않는다.
이에 따라 인식장치(100)가 수광모듈(140)에 수광된 광에 근거하여 물체의 동작을 인식하는데에 있어서, 간섭작용을 최소화할 수 있다.
위와 같이 구성되어 다양한 동작을 인식할 수 있는 본 발명은, 물체의 상(up), 하(down), 좌(left), 우(right), 고(high), 저(low) 또는 대각선 이동과 같은 형태의 물체 동작을 인식할 수 있다.
또한 물체의 기울기 방향, 기울기 정도(각도), 기울기 속도와 같은 형태의 동작을 인식할 수 있으며, 물체의 형태 변환을 인식할 수도 있다.
또한, 위의 3가지 형태를 결합한 하나 이상의 형태를 인식할 수도 있다.
예를 들어, 물체의 이동 방향에 따라 제어 대상의 방향키를 이동시키고, 손의 고(high) 또는 저(low) 정도에 따라 제어 대상의 이동 속도를 제어할 수 있는데, 이를 첨부된 도면의 도 5 및 5a를 통해 설명한다.
도 5는 본 발명에 따른 비접촉 모션 인식 장치가 제어 대상 장치에 적용되어 비접촉 모션을 인식하는 일예를 나타낸 것이며, 도 5a는 본 발명에 따른 인식장치(100)에서 물체(O)가 고(高), 저(低) 방향으로 이동하는 것을 나타낸 것이다.
첨부된 도면의 도 5는 손(물체)을 좌(left) 방향에서 우(right) 방향으로 이동시킴에 따라 제어 대상의 방향키(PC의 화살표키)가 좌에서 우로 이동되는 것을 나타낸다.
나아가, 도 5와 같이 손(물체)의 방향을 이동하되, 인식장치(100)로부터의 고(high), 저(low) 정도를 다르게 함으로써, 이동되는 제어 대상의 방향키 속도를 제어할 수 있다(도 5a 참조).
예컨대, 물체(O)를 인식장치(100)로부터 저(low) 정도(h1, height 1)의 높이에서 동작하는 경우 제어 대상의 방향키 속도를 빠르게 제어하며, 물체(O)를 인식장치(100)로부터 고(high) 정도(h2, height 2)의 높이에서 동작하는 경우 제어 대상의 방향키 속도를 느리게 제어할 수 있다. 이때 설정에 따라서 반대로 제어되도록 구성할 수 있음은 물론이다.
다른 일예로, 손(물체)의 기울기 방향에 따라 제어 대상의 방향을 제어하면서 손의 기울기 정도(각도)에 따라 제어 대상의 방향 이동 속도를 조절할 수 있는데, 이를 첨부된 도면의 도 6을 통해 설명한다.
도 6은 본 발명에 따른 비접촉 모션 인식 장치가 제어 대상 장치에 적용되어 비접촉 모션을 인식하는 다른 일예를 나타낸 것이다.
첨부된 도면의 도 6에 따르면 손(물체, O)은 화살표 방향대로 전, 후, 좌, 우 방향으로 기울일 수 있으며, 기울임 방향에 따라 제어 대상의 방향키가 이동되도록 제어할 수 있다. 아울러 물체의 기울임 정도(각도)에 따라 제어 대상 방향키의 속도를 제어할 수 있다.
또한 본 발명에 따른 비접촉 모션 인식 장치는, 다양한 비접촉 동작의 인식이 가능하기 때문에 다른 형태로 결합된 동작을 인식할 수 있다.
예를 들어, 손(물체)의 엄지와 검지 손가락을 통해 물건을 집는 동작을 취하고 좌에서 우 방향으로 이동시키면, 제어 대상에 디스플레이된 물건을 집어 좌에서 우 방향으로 이동하도록 제어할 수 있다.
다른 일예로, 손(물체)의 기울기 방향에 따라 제어 대상의 방향을 제어하되, 고(high) 또는 저(low) 정도에 따라 제어 대상의 방향 이동 속도를 조절할 수도 있다.
부연하면, 본 발명은 인식장치(100)가 적용되는 디바이스와 연동되도록 구성하고, 인식되는 동작에 따른 제어를 미리 설정 저장함으로써, 상술된 비접촉 동작 인식을 통해 제어 대상(디바이스)을 제어할 수 있다.
이에 따라 본 발명이 적용된 디바이스에서는, 종래의 광학장치보다 더욱 다양한 동작을 인식할 수 있고, 이에 다양한 비접촉 인터페이스를 수행할 수 있다.
예컨대, 다이얼(Dial), 깊이 조절, 확대 및 축소, 윈도우 제어, 슬라이드 제어, 뉴메릭(Numeric) 모션 등 다양한 비접촉 동작 인식을 수행할 수 있다.
또한 한 개씩의 출력소자 및 수광소자를 구비하기 때문에 소형으로 제작할 수 있어서 다양한 디바이스에 적용할 수 있는 이점이 있다.
위와 같이 구성되는 본 발명에 따른 비접촉 모션 인식 장치는, 물체의 비접촉 동작을 인식하기 위해서 단일의 광출력모듈 및 단일의 수광모듈을 구성하기 때문에 소형 제작이 용이하다.
또한 본 발명은 광출력모듈에서 출력되는 광을 통해 주사선 영역을 형성하며, 주사선 영역으로부터 반사된 광이 수광모듈에 수광되면, 광이 출력되어서 수광되기까지의 시간에 대응되는 거리정보가 포함된 이미지 프레임을 생성하고, 생성된 이미지 프레임을 비교하여 물체의 동작을 인식하되, 주사선 영역을 이루는 주사선 포인트 각각의 거리를 측정할 수 있어서, 물체의 다양한 동작(이동, 기울임, 미세동작 등)을 인식할 수 있다.
이에 따라 본 발명은 다양한 디바이스에 적용가능함과 동시에 물체의 다양한 동작을 인식할 수 있다.
한편, 상기에서 도 1 내지 도 6을 이용하여 서술한 것은, 본 발명의 주요 사항만을 서술한 것으로, 그 기술적 범위 내에서 다양한 설계가 가능한 만큼, 본 발명이 도 1 내지 도 6의 구성에 한정되는 것이 아님은 자명하다.

Claims (14)

  1. 광출력모듈, 주사선 반사경 및 수광모듈을 포함하여 물체의 동작을 감지하는 인식장치에 있어서,
    상기 광출력모듈은 상기 주사선 반사경으로 광을 입사시키고,
    상기 주사선 반사경은 입사된 광을 반사하되, 상기 반사된 광에 근거하여 일정거리에서 일정범위를 갖는 주사선 영역을 형성하며,
    상기 수광모듈은 상기 주사선 영역으로부터 반사된 광을 수광하는 것으로, 물체의 동작 또는 물체의 형상을 인식하는 것을 특징으로 하는 비접촉 모션 인식 장치.
  2. 청구항 1에 있어서,
    상기 주사선 영역은 상기 물체가 인식된 영역에 형성되는 것을 특징으로 하는 비접촉 모션 인식 장치.
  3. 청구항 1에 있어서,
    상기 인식장치는,
    상기 수광모듈에 수광되는 광에 근거하여 상기 물체까지의 거리가 측정된 거리정보를 포함하는 이미지 프레임을 생성하고, 상기 생성된 이미지 프레임을 비교하여 상기 물체의 동작 인식이 이루어지는 것을 특징으로 하는 비접촉 모션 인식 장치.
  4. 청구항 1 및 3 중 선택된 어느 한 항에 있어서,
    상기 물체까지의 거리 측정은,
    상기 광출력모듈에서 출력된 광이 상기 수광모듈에 수광되기까지 소요되는 수광시간에 근거하여 측정되는 것을 특징으로 하는 비접촉 모션 인식 장치.
  5. 청구항 1에 있어서,
    상기 동작은,
    1) 상기 물체의 상(up), 하(down), 좌(left), 우(right), 고(high), 저(low) 또는 대각선 이동에 따른 방향 및 속도, 2) 상기 물체의 기울기 방향, 기울기 정도(각도), 기울기 속도, 3) 상기 물체의 형태 변환 중 선택된 어느 하나 이상인 것을 특징으로 하는 비접촉 모션 인식 장치.
  6. 청구항 5에 있어서,
    상기 물체의 기울기 방향에 근거하여 제어 대상의 이동방향을 결정하며, 상기 물체의 기울기 정도에 근거하여 제어 대상의 이동속도를 결정하는 것을 특징으로 하는 비접촉 모션 인식 장치.
  7. 광출력모듈;
    상기 광출력모듈에서 출력된 광을 수광하여 반사시키며, 상기 반사된 광이 일정거리에서 일정범위를 갖는 주사선 영역을 형성하도록 하는 주사선 반사경; 및
    상기 주사선 영역으로부터 반사된 광을 수광하는 수광모듈; 을 포함하는 것을 특징으로 하는 비접촉 모션 인식 장치.
  8. 청구항 7에 있어서,
    상기 수광모듈에 수광되는 광에 근거하여 물체까지의 거리를 측정하는 측정 제어부; 를 더 포함하되,
    상기 물체까지의 거리 측정은,
    상기 광출력모듈에서 출력된 광이 상기 수광모듈에 수광되기까지 소요되는 수광시간에 근거하여 측정되는 것을 특징으로 하는 비접촉 모션 인식 장치.
  9. 청구항 8에 있어서,
    상기 측정 제어부는,
    상기 물체까지의 거리가 측정된 거리정보를 포함하는 이미지 프레임을 생성하는 프레임 생성 모듈; 및 상기 프레임 생성 모듈에서 생성된 이미지 프레임을 비교하여 상기 동작을 검출하는 동작 검출 모듈; 을 더 포함하는 것을 특징으로 하는 비접촉 모션 인식 장치.
  10. 청구항 7에 있어서,
    상기 주사선 반사경은,
    상기 광출력모듈에서 출력된 광을 반사시키는 반사경모듈; 및 상기 반사경모듈에서 반사되는 광이 일정거리에서 일정범위를 갖는 주사선 영역을 형성하도록 제어하는 주사선 제어모듈; 을 포함하는 것을 특징으로 하는 비접촉 모션 인식 장치.
  11. 청구항 7에 있어서,
    상기 광출력모듈에서 출력된 광을 상기 반사경모듈에 집광시키는 집광렌즈를 더 포함하는 것을 특징으로 하는 비접촉 모션 인식 장치.
  12. 청구항 7에 있어서,
    상기 인식장치는, 주변조도에 따라 보상용 광을 출력하는 보상모듈을 더 포함하는 것을 특징으로 하는 비접촉 모션 인식 장치.
  13. 청구항 7에 있어서,
    상기 광출력모듈은 반도체 레이저(LD), 발광 다이오드(LED), 질화물 반도체 수직공동 표면 출력 레이저 다이오드(VCSEL LED) 중 선택된 어느 하나인 것을 특징으로 하는 비접촉 모션 인식 장치.
  14. 청구항 7에 있어서,
    상기 인식장치는,
    상기 광출력모듈에서 출력되고 상기 주사선 반사경에서 반사된 광이 외부로 투과하도록 형성되는 출력렌즈; 및 상기 수광모듈의 상부에 구비되며, 상기 주사선 영역으로부터 반사된 광이 상기 수광모듈에 집광되도록 유도하는 수광렌즈; 를 포함하는 것을 특징으로 하는 비접촉 모션 인식 장치.
PCT/KR2014/001801 2014-01-15 2014-03-05 비접촉 모션 인식 장치 WO2015108230A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020140005015A KR101563627B1 (ko) 2014-01-15 2014-01-15 비접촉 모션 인식 장치
KR10-2014-0005015 2014-01-15

Publications (1)

Publication Number Publication Date
WO2015108230A1 true WO2015108230A1 (ko) 2015-07-23

Family

ID=53543104

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2014/001801 WO2015108230A1 (ko) 2014-01-15 2014-03-05 비접촉 모션 인식 장치

Country Status (2)

Country Link
KR (1) KR101563627B1 (ko)
WO (1) WO2015108230A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106775137A (zh) * 2016-12-06 2017-05-31 广东欧珀移动通信有限公司 接近检测方法、装置及移动终端

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100829158B1 (ko) * 2006-10-02 2008-05-14 이제선 물체 감지 시스템
KR20080043634A (ko) * 2006-11-14 2008-05-19 삼성전자주식회사 동작 추적 장치 및 방법
KR20120140176A (ko) * 2011-06-20 2012-12-28 (주)차바이오앤디오스텍 물체 인식을 위한 반사 광학계 및 이를 이용한 이동형 로봇
KR20130110309A (ko) * 2012-03-29 2013-10-10 주식회사 아이카이스트 반사부를 이용한 터치인식 시스템

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012161382A (ja) 2011-02-03 2012-08-30 Nidek Co Ltd 眼科装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100829158B1 (ko) * 2006-10-02 2008-05-14 이제선 물체 감지 시스템
KR20080043634A (ko) * 2006-11-14 2008-05-19 삼성전자주식회사 동작 추적 장치 및 방법
KR20120140176A (ko) * 2011-06-20 2012-12-28 (주)차바이오앤디오스텍 물체 인식을 위한 반사 광학계 및 이를 이용한 이동형 로봇
KR20130110309A (ko) * 2012-03-29 2013-10-10 주식회사 아이카이스트 반사부를 이용한 터치인식 시스템

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106775137A (zh) * 2016-12-06 2017-05-31 广东欧珀移动通信有限公司 接近检测方法、装置及移动终端
CN106775137B (zh) * 2016-12-06 2019-10-25 Oppo广东移动通信有限公司 接近检测方法、装置及移动终端

Also Published As

Publication number Publication date
KR101563627B1 (ko) 2015-11-02
KR20150085298A (ko) 2015-07-23

Similar Documents

Publication Publication Date Title
WO2016108546A1 (en) User terminal apparatus
WO2018056473A1 (ko) 헤드 마운티드 디스플레이 장치
WO2020256168A1 (ko) 이동 단말기
WO2020153703A1 (ko) 카메라 장치 및 그의 오토포커싱 방법
WO2019235859A1 (ko) 카메라 모듈 및 그의 깊이 정보 추출 방법
WO2020231222A1 (ko) 카메라 모듈
WO2016036059A1 (en) Photographing apparatus and photographing method
WO2014046351A1 (en) Camera module
WO2022080720A1 (ko) 카메라 모듈 및 이를 포함하는 전자 장치
WO2017204498A1 (ko) 이동 단말기
WO2020141827A1 (ko) 광학계 및 이를 포함하는 카메라 모듈
WO2016080716A1 (ko) 홍채 인식 카메라 시스템 및 이를 포함하는 단말기와 그 시스템의 홍채 인식 방법
WO2019164312A1 (ko) 카메라 모듈 및 그의 초해상도 영상 처리 방법
WO2013172566A1 (en) Camera module and method for auto focusing the same
WO2020147161A1 (zh) 一种交互显示装置及方法
WO2022119150A1 (ko) 멀티 이미지 표시 방법 및 전자 장치
WO2015108230A1 (ko) 비접촉 모션 인식 장치
WO2012057435A1 (en) Camera module and estimation method of auto focus search range thereof
WO2018131747A1 (ko) 이동 단말기 및 그 제어 방법
WO2021066219A1 (ko) 이동단말기
WO2018101507A1 (en) Display device and control method thereof
WO2021137321A1 (ko) 컨텐츠를 표시하는 전자 장치 및 그 제어 방법
WO2019177217A1 (ko) 광학장치 및 이동 단말기
WO2022245129A1 (ko) 오브젝트 추적 방법 및 이를 위한 전자 장치
WO2023277298A1 (ko) 이미지 안정화 방법 및 이를 위한 전자 장치

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14879020

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205N DATED 19.10.2016)

122 Ep: pct application non-entry in european phase

Ref document number: 14879020

Country of ref document: EP

Kind code of ref document: A1