WO2010050736A2 - 격자신호 수신기 및 그것을 포함한 무선 포인팅 시스템 - Google Patents

격자신호 수신기 및 그것을 포함한 무선 포인팅 시스템 Download PDF

Info

Publication number
WO2010050736A2
WO2010050736A2 PCT/KR2009/006240 KR2009006240W WO2010050736A2 WO 2010050736 A2 WO2010050736 A2 WO 2010050736A2 KR 2009006240 W KR2009006240 W KR 2009006240W WO 2010050736 A2 WO2010050736 A2 WO 2010050736A2
Authority
WO
WIPO (PCT)
Prior art keywords
motion vector
grid
axis
pattern
signal
Prior art date
Application number
PCT/KR2009/006240
Other languages
English (en)
French (fr)
Other versions
WO2010050736A3 (ko
Inventor
김석기
이광재
윤세환
Original Assignee
실리콤텍 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 실리콤텍 주식회사 filed Critical 실리콤텍 주식회사
Priority to CN2009801426969A priority Critical patent/CN102197351A/zh
Priority to US13/126,331 priority patent/US20110211132A1/en
Priority claimed from KR1020090102252A external-priority patent/KR101043923B1/ko
Publication of WO2010050736A2 publication Critical patent/WO2010050736A2/ko
Publication of WO2010050736A3 publication Critical patent/WO2010050736A3/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/30—User interface
    • G08C2201/32—Remote control based on movements, attitude of remote control device

Definitions

  • the present invention relates to a grating signal receiver and a wireless pointing system including the same.
  • IPTV IP-based pointing device
  • PC mice As major video appliances such as TVs, DVDs, set-top boxes, and IPTVs develop, there is an urgent need for the implementation of pointing devices such as PC mice on the screen.
  • IPTV is evolving as a means of replacing PCs in the home, and a pointing device such as a PC mouse is required.
  • a pointing device such as a PC mouse is required.
  • due to the characteristics of the home appliance it is not possible to implement a wired wire like a general PC mouse. Therefore, it is required to implement a pointing device using a conventional TV remote control.
  • Patent Publication 10-2008-0064074 1 illustrates a wireless pointing system using such a lattice structure.
  • the wireless pointing system using the lattice structure generates a lattice light by installing an LED and a lattice generator on the lattice signal transmitter (included in the remote control), and the lattice signal is transmitted by the lattice signal receiver. After detecting the movement, the moving direction, the moving speed, and the size are measured to drive the pointer on the screen of the electric appliance such as a TV.
  • the grid signal receiver is composed of a pair of sensors for determining left and right movement and a pair of sensors for determining a shanghai movement, that is, a pair of sensors.
  • the motion judging method is as follows.
  • A) The remote control including the grid signal transmitter is moved so that the grid generated by the grid signal transmitter is moved.
  • Grid signal receiver receives grid light
  • FIG. 2 shows an example of motion determination when the grid signal transmitter moves to the right. Since only the left and right and the up and down are different in the receiving direction and determine the same operation, in FIG. As shown in FIG. 2, when a line of the grating passes through both sensors, movement occurs.
  • the grating of the light may be inferior to the movement due to the inclination of the light grating or the change of the thickness and spacing of the grating line according to the distance.
  • the grid structure is inclined frequently. The tilt of the grid structure is a problem that causes an operation error.
  • FIG. 3 is a diagram showing three frames in which the grid structure moves in the grid signal receiver when the user moves upward while tilting the remote controller to the right.
  • the grid is inclined to the right side, and in addition to the upward movement, the grid line passes through a pair of sensors for detecting left and right movements, thereby causing a malfunction in which the grid is gradually moved to the left side.
  • the present invention is to provide a grid signal receiver and a wireless pointing system including the same to prevent the malfunction caused by the tilt of the grid signal transmitter to solve the above problems. That is, an object of the present invention is to provide a grid signal receiver and a wireless pointing system including the grid signal receiver that can compensate the tilt of the grid signal transmitter.
  • Grid signal receiver in the grid signal receiver for receiving a grid pattern signal from the grid signal transmitter to determine the movement of the grid signal transmitter, in addition to the motion sensor for detecting the movement of the grid grid inclination of the grid Including a tilt sensor for sensing the load is characterized in that for detecting the tilt of the grid signal transmitter.
  • the grating signal receiver comprises: a pair of horizontal motion sensors for detecting a horizontal movement (X-axis movement) by sensing a vertical pattern (Y-axis pattern) signal of the grid; A pair of vertical motion sensors for detecting vertical movement (Y-axis movement) by sensing a horizontal pattern (X-axis pattern) signal of a grid; And an inclination sensor for sensing an inclination of the grating.
  • the inclination detection sensor is preferably disposed at a position that is not collinear with the pair of horizontal motion sensors or the pair of vertical motion sensors.
  • the tilt sensor may be disposed in a vertical direction with respect to one of the pair of horizontal motion sensors, or may be disposed in a horizontal direction with respect to one sensor of the pair of vertical motion sensors.
  • the inclination detection sensor, the distance between the inclination sensor and one horizontal motion sensor disposed in the vertical direction is the same as the distance between a pair of horizontal motion sensor, or the inclination detection sensor and Preferably, the distance between one vertical motion sensor disposed in the horizontal direction is equal to the distance between the pair of vertical motion sensors.
  • the grid signal receiver the tilt sensor detects a vertical pattern (Y-axis pattern) signal with a pair of horizontal motion sensor to compare the relative detection time between the sensors to tilt the grid Information is calculated or the tilt sensor detects a horizontal pattern (X-axis pattern) signal together with a pair of vertical motion sensors to compare the relative detection time between the sensors and calculate tilt information of the grid. It is done.
  • the grating signal receiver, the vertical pattern (Y-axis pattern) signal and the horizontal pattern (X-axis pattern) signal of the grating preferably has a different frequency band from each other, each sensor is a photo for sensing the grating signal It may comprise a diode and an optical filter for passing the frequency band of the grating signal.
  • the grating signal receiver, the vertical pattern (Y-axis pattern) signal and the horizontal pattern (X-axis pattern) signal of the grid has a different frequency band
  • the horizontal motion sensor and the vertical motion sensor are each a vertical pattern
  • the inclination sensor includes a vertical pattern (Y-axis pattern) signal or a horizontal pattern (X-axis pattern) signal It is preferable to provide the optical filter which passes the frequency band of either signal.
  • the grid signal receiver includes a motion vector processor that receives a detection signal from each of the sensors, processes a motion vector, calculates tilt information of the grid, and corrects the motion vector. It may be done.
  • the motion vector processor for detecting a moving direction of the grating;
  • a line detector generating a pulse each time one lattice line moves;
  • a tilt detector detecting a tilt of the grating;
  • a motion vector extracting unit extracting an X-axis motion vector (horizontal motion vector) and a Y-axis motion vector (vertical motion vector) by receiving the motion direction information of the grating from the direction detector and the pulse from the line detector;
  • a tilt-based motion vector corrector configured to correct the X-axis motion vector and the Y-axis motion vector according to the tilt information transmitted from the tilt detector.
  • the motion vector processor may further include a low-band filter that receives low-band filtering by receiving the output of the slope-based motion vector corrector to suppress the variation of the motion vector due to noise and hand shaking generated at the transmitter or the receiver. It may also include.
  • the motion vector processor receives the X-axis motion vector and the Y-axis motion vector of the motion vector extractor and performs low-band filtering to reduce errors that may occur under acceleration or deceleration conditions, and the filtered X
  • the apparatus may further include a low band filter outputting the axial motion vector and the Y-axis motion vector to the gradient-based motion vector corrector.
  • the motion vector processor may further include an image stabilization determiner that estimates hand shake, and the motion vector extractor may be stopped according to the determination of the image stabilization determiner.
  • the motion vector processor the direction detecting unit for detecting a moving direction of the grating; A line detector generating a pulse each time one lattice line moves; A tilt detector detecting a tilt of the grating;
  • the motion vector extracting unit extracting an X-axis motion vector and a Y-axis motion vector by receiving the movement direction information of the grating from the direction detecting unit and the pulse from the line detecting unit;
  • a pulse width demodulator for converting a certain period of the movement of the grating into a digital value;
  • a pulse-based motion vector corrector for correcting the X-axis motion vector and the Y-axis motion vector transmitted from the motion vector extractor according to the converted digital value;
  • a tilt-based motion vector corrector configured to correct the corrected X-axis motion vector and the corrected Y-axis motion vector transmitted from the pulse-based motion vector corrector according to the tilt information of the grid transmitted from the tilt detector. It may be made, including.
  • the plurality of sensors may be implemented by a first chip
  • the motion vector processor may be implemented by a second chip different from the first chip
  • the plurality of sensors And the motion vector processor may be implemented in one chip.
  • Wireless pointing system a grid signal transmitter for generating and outputting a signal of the grid pattern; And a grating signal receiver for processing a motion vector for receiving a grating pattern signal and calculating a motion, wherein the grating signal receiver includes a tilt sensor in addition to a motion sensor for detecting a grating movement. Detects the inclination and corrects the motion vector according to the inclination information.
  • the grating signal receiver and the wireless pointing system including the same can implement a wireless pointing function which is absolutely required for the next generation video appliances such as IPTV at high performance and low cost.
  • FIG. 1 is a view showing a wireless pointing system using a grid structure.
  • FIG. 2 is a diagram illustrating an example of motion determination in a grid signal receiver of a wireless pointing system using a grid structure.
  • FIG. 3 is a diagram illustrating an error occurring in a grating signal receiver when the grating signal transmitter is tilted.
  • FIG. 4 is a diagram illustrating an embodiment of a wireless pointing system of the present invention.
  • FIG. 5 is a diagram illustrating an example of extracting an inclination angle of the grid signal transmitter from the grid signal receiver.
  • FIG. 6 is a view showing a rotation conversion equation and an example according to the present invention.
  • FIGS. 7 to 11 are diagrams showing embodiments of configuring a motion vector processor of a grating signal receiver according to the present invention.
  • FIG. 12 is a block diagram in which the grating signal receiver according to the present invention is implemented in a hardware manner.
  • FIG. 13 and 14 illustrate an embodiment in which the grating signal receiver according to the present invention is implemented in a software manner.
  • microcomputer 140,145 grid generator
  • lens 220 signal receiver
  • motion vector extractor 245 tilt based motion vector corrector
  • pulse width demodulator 249 pulse based motion vector correction unit
  • serial interface 260 22: MCU
  • the grating signal receiver and the wireless pointing system including the same can detect the inclination of the grating signal transmitter and perform a wireless pointing function in which reliability is guaranteed by correcting a motion vector according to the detected result.
  • FIG. 4 shows an embodiment of a wireless pointing system 10 of the present invention.
  • a grating signal transmitter 100 generating a grating structure signal and a grating signal receiver for receiving a grating structure signal and determining a movement from the received grating signal ( 200).
  • the grid signal transmitter 100 includes a light source (for example, an LED may be used) and a grid generator to transmit light of a grid structure to implement a pointing function. Transmitted grid light is detected by the sensor at the grid signal receiver 200, and the moving direction and the speed are calculated by calculating the motion vector. Drive it.
  • the wireless pointing system 10 of the present embodiment will be described in more detail with reference to FIG. 4 as follows.
  • the grating signal transmitter 100 may include a microcomputer 120, an X-grid generator 140, a Y-grid generator 145, a first lens 160, and a second lens 165.
  • the grating signal transmitter 100 will generate an infrared signal of a grating structure (light other than infrared may be used within the scope of the object of the present invention).
  • the microcomputer 120 will generate a signal with a carrier frequency on each axis (X axis and Y axis).
  • the X axis is an axis where the grid signal transmitter 100 generates grid lines in the horizontal direction
  • the Y axis is an axis where the grid signal transmitter 100 generates grid lines in the vertical direction.
  • the generated signal will be converted into an infrared signal through the infrared LED.
  • the generated X-axis carrier frequency signal and the Y-axis carrier frequency signal may use the same frequency, but it is preferable to use signals in different frequency domains to prevent mutual interference.
  • the X-axis carrier frequency signal may be generated within 30 ⁇ 40KHz
  • the X-axis carrier frequency signal may be generated within 41 ⁇ 50Hz.
  • the X-grid generator 140 may receive an X-axis carrier frequency signal and generate an X-axis pattern IRX. That is, the X-grid generator 140 will transmit the light output through the LED to generate the X-axis pattern (IRX).
  • the Y-grid generator 145 may receive the Y-axis carrier frequency signal and generate a Y-axis pattern IRY. That is, the Y-grid generator 145 will transmit the light output through the LED to generate the Y-axis pattern IRY.
  • the X-lattice generator 140 and the Y-lattice generator may be formed of a plate in which the X-axis pattern and the Y-axis pattern of the grid pattern are etched.
  • the material may be a material such as glass that may transmit light (infrared rays). have.
  • the first lens 160 transmits the X-axis pattern IRX and scatters it around the grating signal receiver 200.
  • the second lens 165 transmits the Y-axis pattern IRY and scatters it around the grating signal receiver 200.
  • the first and second lenses 160 and 165 are materials that can transmit light (infrared rays).
  • the grating signal transmitter 100 may simultaneously generate the X-axis pattern and the Y-axis pattern (lattice generator XY-grid generator Grid pattern may be generated using one carrier frequency signal.
  • the grating signal receiver 200 includes a signal receiver 220 for detecting an infrared grating signal generated from the grating signal transmitter 100 and a motion vector processor 240 for processing a motion vector from the received grating signal. It will include.
  • the signal receiver 220 further includes a tilt detection sensor E, and is configured to detect tilt of the grid, and the motion vector processor 240 according to the tilt detection of the signal receiver 220. It is implemented to correct the motion vector. As a result, the direction or magnitude of the motion vector can be prevented from being distorted.
  • the signal receiver 220 includes horizontal motion sensors A and B for determining left and right movements (X-axis movement), vertical motion sensors C and D for vertical movements (Y-axis movement), and tilt for determining inclination. It will include a detection sensor (E).
  • the motion discrimination method of the present invention is as follows.
  • the grid signal transmitter 100 moves, and the grid generated by the grid signal transmitter 100 will move.
  • the signal receiver 220 of the grid signal receiver 200 will receive the light of the grid.
  • the direction will then be determined according to the pattern received.
  • the determined direction will be applied to the pointer.
  • Each sensor (A, B, C, D, E) will be composed of photodiodes that can detect light and convert it into an electrical signal.
  • the grating signal transmitter 100 will generate light of the horizontal / vertical (X-axis / Y-axis) at different wavelengths.
  • each sensor A, B, C, D, E will use an optical filter accordingly.
  • the horizontal motion sensors A and B are sensors capable of discriminating the movement of the left and right (X axis).
  • the vertical motion sensors C and D are sensors that can determine the movement of the up and down (Y axis).
  • the tilt detection sensor E is a sensor that can determine the tilt of the grid.
  • the tilt detection sensor E is configured to have the same optical filter as the horizontal motion sensors A and B or the vertical motion sensors C and D. Accordingly, the tilt detection sensor E is the horizontal motion sensor A. Tilt can be detected together with B, or tilt can be detected together with the vertical motion sensors C and D. FIG.
  • the horizontal motion sensors A and B should be disposed horizontally to each other, and the vertical motion sensors A and B should be disposed perpendicular to each other.
  • the tilt detection sensor E receives the same frequency signal as the horizontal motion sensors A and B (when tilting is detected together with the horizontal motion sensors A and B)
  • the tilt motion sensor A and B Any position can be arranged except for the horizontal position on the same line.
  • the inclination will be determined through the sensor A and the sensor E.
  • FIG. If the tilt of the grating occurs, the time at which the vertical grating pattern is received at the sensor A and the sensor E is different. Thus, the tilt of the grid signal transmitter 100 will be determined. (This case would be possible if the sensor A and the sensor E are arranged vertically, even if they are not vertically arranged. Tilt can be determined by comparing the detection time of B and E).
  • the inclination direction and angle of the grating signal transmitter 100 may be determined through the sensors A, B, and E. FIG.
  • the inclination direction of the grating signal transmitter 100 may be known through the order in which the sensors are “ON”.
  • Table 1 lists the information that can be obtained according to the order of recognizing the infrared signal.
  • the reference of 45 degrees below is an example that can be discriminated when the distance between the sensor A and the sensor B is equal to the distance between the sensor A and the sensor E.
  • FIG. 5 is a diagram illustrating an example of extracting an inclination angle of the grating signal transmitter 100. If you move to the right, you will reach E->A-> B in that order. At this time, t EA , t AB can be obtained by calculating the time each reaches. And because the distance between the sensors is so short, the speed of movement to the right rarely changes. Therefore, if the movement is assumed to be constant velocity movement, the movement distance is proportional to time.
  • the ratio of t EA to t AB is equal to the ratio of d A to d B. Further, when the distance between the sensor A and the sensor E and the distance between the sensor A and the sensor B are the same distance, d B and d E are the same. Therefore, the ratio of d A and d E is obtained. The slope is obtained by the trigonometric function.
  • the obtained slope is used to correct a motion vector through a rotation transformation.
  • FIG. 6 is a view showing a rotation conversion equation and an example according to the present invention.
  • the problem in determining the direction of movement is the incidence of one or more lines of light between the sensors. Therefore, if the thickness of the light in the transmission and reception distance of the grating signal transmitter 100 is thicker than the distance between the sensors, there is no problem in determining the direction of movement.
  • the structure that makes the grid of light uses the method of screening the light, so there is no great difficulty in thickening the line.
  • the grating signal receiver 200 may be broadly classified into a signal receiver 220 including light sensors and a motion vector processor 240 that calculates motion by receiving the detected signal. Can be.
  • the configuration of the motion vector processor in the present embodiment is as follows.
  • the direction detector 241 will detect the movement direction of the grating signal transmitter 100.
  • the line detector 242 will generate a pulse each time a line moves.
  • the motion vector extractor 244 generates a motion vector for the horizontal and vertical directions and transfers the motion vector to the slope-based motion vector compensator 245.
  • the motion vector corrector 245 may correct the motion vector according to the inclined angle ⁇ .
  • the slope detector 243 uses the horizontal motion sensors A and B and the detection signals 2H, 2V and 1E from the tilt sensor E to incline the tilt degree ⁇ of the transmitter. Will be sent to the motion vector corrector 245.
  • the 2H signal is a vertical pattern infrared signal IRX received from the horizontal motion sensors A and B
  • the 1E signal is a vertical pattern infrared signal IRX received from the signal tilt sensor E.
  • the gradient-based motion vector corrector 245 takes two motion vectors and a ⁇ value, and then outputs the corrected motion vector by performing the rotation conversion formula described above.
  • FIG. 8 is a diagram illustrating a second embodiment constituting a motion vector processor of the grating signal receiver 200 according to the present invention.
  • the grid signal receiver 200 may connect a low-pass filter 246 to the final stage to suppress the variation of the motion vector due to the noise and the shaking caused by the transceiver. As a result, the grating signal receiver 200 obtains a smooth motion vector.
  • FIG. 9 is a diagram illustrating a third embodiment of the motion vector processor of the grating signal receiver 200 according to the present invention.
  • the grating signal receiver 200 may instead apply a low-band filter to the final stage, as shown in FIG. 8. Will connect the low pass filter 246a.
  • the grid signal receiver 200 attenuates an error due to acceleration or deceleration.
  • FIG. 10 is a diagram illustrating a fourth embodiment constituting a motion vector processor of the grating signal receiver 200 according to the present invention.
  • Image stabilization using the low pass filter 246 shown in FIG. 8 may be referred to as a passive technique. More aggressively, when generating a stop condition of the motion vector extractor using an algorithm for estimating the actual hand shake by the anti-shaking decision unit 247 as shown in FIG. Will be prevented.
  • FIG. 11 is a diagram illustrating a fifth embodiment constituting a motion vector processor of the grating signal receiver 200 according to the present invention.
  • smooth motion may be produced. This is due to a problem due to the limitation of the lattice resolution due to the structure of the present technique.
  • a predetermined period (Twidth: movement speed) for the movement of the grid generated by the grid signal transmitter 100 is set as a discrimination criterion, appropriate correction is possible. Since the deceleration and acceleration can be determined according to the magnitude of the value of the constant period (Twidth), a method of calculating the corrected motion vector will be devised accordingly.
  • the width (Twidth) will be generated from a pulse width demodulator (PWDM) for converting the pulse signal into a digital signal.
  • PWDM pulse width demodulator
  • the pulse-based motion vector corrector 249 may correct the motion vector according to a predetermined period transmitted from the pulse width demodulator 248.
  • the corrected motion vector value will be transmitted to the slope-based motion vector corrector 245.
  • two methods can be considered to implement a method of receiving a grid signal and calculating a motion vector.
  • One is to implement a motion vector processor in a hardware manner, and the other is to convert / implement the functions inside the motion vector processor into software (firmware) using an MCU.
  • FIG. 12 is a block diagram of a hardware implementation of the grating signal receiver 200 according to the present invention.
  • the hardware method may be divided into two chip solutions (solid line) and a separate chip (201) for developing the A chip 201 and the B chip 202 into one package (board). have.
  • a serial interface 254 for data communication with an application will be essentially built-in.
  • FIG. 13 is a diagram illustrating a first embodiment in which a grating signal receiver 200 according to the present invention is implemented in a software manner.
  • the MCU 260 when the MCU 260 is external, the signal receiver 220 and the MCU 260 coexist in one board 203, and the MCU 260 communicates with an application.
  • the MCU 260 internally includes a series of programs that perform motion vector processor functions, and externally connects GPIO or IRQ pins to the signal receiver 220 to receive signals.
  • the serial interface 264 is then connected with the application.
  • This software approach provides the flexibility to develop independent boards in anticipation of the MCU level corresponding to the application. On the contrary, since the MCU characteristics of the independent board must be application dependent, each time the application changes, it will be necessary to evaluate and test the suitability of the selected MCU.
  • FIG. 14 is a diagram illustrating a second embodiment in which the grating signal receiver 200 according to the present invention is implemented in a software manner.
  • device development in which the MCU 22 is embedded in the application 21 will be limited to the signal receiver 220. Since the MCU 22 utilizes what is embedded in the application, it is necessary to program the motion vector processor considering the resources already occupied in the application.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)
  • Selective Calling Equipment (AREA)

Abstract

본 발명은 격자신호 수신기 및 그것을 포함한 무선 포인팅 시스템에 관한 것이다. 본 발명의 격자신호 수신기는 격자신호 송신기로부터 격자 패턴의 신호를 수신하여 격자신호 송신기의 움직임을 판별하는 격자신호 수신기에 있어서, 격자의 움직임을 감지하는 모션 센서 이외에 격자의 기울어짐을 감지하는 기울어짐 감지센서를 포함하여 격자신호 송신기의 기울어짐을 감지하여 모션 벡터를 보정하는 것을 특징으로 한다.

Description

격자신호 수신기 및 그것을 포함한 무선 포인팅 시스템
본 발명은 격자신호 수신기 및 그것을 포함한 무선 포인팅 시스템에 관한 것이다.
TV, DVD, 셋톱박스, IPTV 등 주요 영상 가전기기가 발달함에 따라 화면상에 PC 마우스와 같은 포인팅 장치의 구현이 절실히 요구되고 있다. 특히 IPTV의 경우 일반 가정에서 PC를 대체할 수단으로까지 발전하고 있어 더더욱 PC 마우스와 같은 포인팅 장치가 필요하다. 그러나 영상 가전기기의 특성상 일반 PC 마우스와 같이 유선으로 구현할 수 없기 때문에 기존의 TV 리모컨을 활용하여 포인팅 장치를 구현하는 것이 요구된다.
이러한 포인팅 장치로써 리모콘에서 격자구조(grid pattern)의 빛을 생성하여 송신하고 수신단에서 이를 수신하여 격자 라인의 이동 방향, 이동 속도, 크기 등을 측정하여 포인터를 구동하는 방식에 대한 특허가 공개된바 있다(특허공개 10-2008-0064074). 도 1은 이러한 격자구조를 이용한 무선 포인팅 시스템을 나타내고 있다. 이러한 격자구조를 이용한 무선 포인팅 시스템은 격자신호 송신기(리모콘에 포함됨)에 LED 및 격자생성기를 설치하여 격자구조의 빛을 생성하여 송신하며, 송신된 격자구조의 빛은 격자신호 수신기에서 격자 라인이 지나는 것을 감지하여 이동방향, 이동 속도, 및 크기를 측정하여 TV 등의 영상가전기기의 화면에서 포인터를 구동한다.
격자신호 수신기는 좌우이동을 판단하는 한 쌍의 센서와 상하이동을 판단하는 한 쌍의 센서, 즉 두 쌍의 센서로 구성된다. 움직임 판단 방법을 나타내어 보면 다음과 같다.
A) 격자신호 송신기를 포함하는 리모콘이 움직여, 격자신호 송신기가 생성하는 격자가 움직임
B) 격자신호 수신기가 격자구조의 빛을 수신
C) 수신되는 패턴에 따라 움직임을 판단
D) 판단된 움직임을 포인터에 적용
도 2는 격자신호 송신기가 오른쪽으로 움직였을 때의 움직임 판단의 예를 나타내고 있다. 좌우와 상하는 수신하는 방향만 다르고 모두 동일한 동작을 판단하므로, 도 2에서는 상하 한 쌍의 센서를 생략하고 좌우 한 쌍의 센서만 나타내었다. 도 2에 나타난 바와 같이, 격자의 라인이 센서 두 개를 모두 통과하게 되면, 움직임이 발생한다.
그런데 이러한 격자구조 무선 포인팅 방법에서는 격자구조의 빛을 기준으로 움직임을 판단하기 때문에, 빛의 격자가 기울어지거나 거리에 따른 격자 라인의 두께 및 간격 변화에 따라 움직임에 오동작을 가져올 수 있다. 특히, 사용자가 격자신호 송신기가 포함된 리모콘을 손으로 들고 움직이게 됨으로써, 격자구조의 기울어짐은 빈번히 발생하게 된다. 이러한 격자구조의 기울어짐은 동작 오류를 발생시키는 문제점으로 대두되고 있다.
격자구조의 기울어짐에 따라 동작 오류를 나타내는 예를 도 3에 나타내었다. 도 3은 사용자가 리모콘을 오른쪽으로 기울인 상태에서 위로 움직일 때, 격자신호 수신기에서 격자구조가 움직이는 동작을 세 프레임으로 나눈 그림이다. 이때, 격자가 오른쪽으로 기울어져 있어, 위로 움직이는 동작 외에도 격자 라인이 좌우이동을 감지하는 한 쌍의 센서를 지나게 됨으로써 왼쪽으로 조금씩 움직이게 되는 오동작 발생한다. 또한 미세하지만, 위로 움직이는 크기가 더 작게 움직이는 오동작도 가지게 된다.
본 발명은 전술한 문제를 해결하기 위하여 격자신호 송신기의 기울어짐에 따른 오동작을 방지하는 격자신호 수신기 및 그것을 포함하는 무선 포인팅 시스템을 제공하는 데 있다. 즉, 본 발명의 목적은 격자신호 송신기의 기울어짐을 보상할 수 있는 격자신호 수신기 및 그것을 포함한 무선 포인팅 시스템을 제공하는데 있다.
본 발명의 일실시예에 따른 격자신호 수신기는, 격자신호 송신기로부터 격자 패턴의 신호를 수신하여 격자신호 송신기의 움직임을 판별하는 격자신호 수신기에 있어서, 격자의 움직임을 감지하는 모션 센서 이외에 격자의 기울어짐을 감지하는 기울어짐 감지센서를 포함하여 격자신호 송신기의 기울어짐을 감지하는 것을 특징으로 한다.
일실시예로서, 상기 격자신호 수신기는, 격자의 수직 패턴(Y축 패턴) 신호를 감지하여 수평 움직임(X축 움직임)을 감지하는 한 쌍의 수평모션 센서; 격자의 수평 패턴(X축 패턴) 신호를 감지하여 수직 움직임(Y축 움직임)을 감지하는 한 쌍의 수직모션 센서; 및 격자의 기울어짐을 감지하는 기울어짐 감지센서;를 포함하여 이루어질 수 있다.
이때, 상기 기울어짐 감지센서는, 상기 한 쌍의 수평모션 센서 또는 상기 한 쌍의 수직모션 센서와 동일선상이 아닌 위치에 배치되는 것이 바람직하다.
또한, 상기 기울어짐 감지센서는, 상기 한 쌍의 수평모션 센서 중 하나의 센서에 대해 수직 방향으로 배치되거나, 상기 한 쌍의 수직모션 센서 중 하나의 센서에 대해 수평 방향으로 배치될 수도 있다.
이때, 상기 기울어짐 감지센서는, 상기 기울어짐 감지센서와 수직 방향으로 배치된 하나의 수평모션 센서 사이의 거리가 한 쌍의 수평모션 센서 사이의 거리와 동일하게 배치되거나, 상기 기울어짐 감지센서와 수평 방향으로 배치된 하나의 수직모션 센서 사이의 거리가 한 쌍의 수직모션 센서 사이의 거리와 동일하게 배치되는 것이 바람직하다.
일실시예로서, 상기 격자신호 수신기는, 상기 기울어짐 감지센서가 한 쌍의 수평모션 센서와 함께 수직 패턴(Y축 패턴) 신호를 감지하여 센서들 사이의 상대적인 감지시간을 비교하여 격자의 기울어짐 정보를 산출하거나, 상기 기울어짐 감지센서가 한 쌍의 수직모션 센서와 함께 수평 패턴(X축 패턴) 신호를 감지하여 센서들 사이의 상대적인 감지시간을 비교하여 격자의 기울어짐 정보를 산출하는 것을 특징으로 한다.
일실시예로서, 격자신호 수신기는, 격자의 수직 패턴(Y축 패턴) 신호와 수평 패턴(X축 패턴) 신호는 서로 상이한 주파수 대역을 갖는 것이 바람직하며, 각 센서들은, 격자 신호를 감지하는 포토다이오드 및 상기 격자 신호의 주파수 대역을 통과시키는 광학 필터를 포함하여 이루어질 수 있다.
일실시예로서, 격자신호 수신기는, 격자의 수직 패턴(Y축 패턴) 신호와 수평 패턴(X축 패턴) 신호는 서로 상이한 주파수 대역을 가지며, 상기 수평모션 센서와 상기 수직모션 센서는 각각 수직 패턴(Y축 패턴) 신호와 수평 패턴(X축 패턴) 신호의 주파수 대역을 통과시키는 광학 필터를 구비하며, 상기 기울어짐 감지센서는 수직 패턴(Y축 패턴) 신호 또는 수평 패턴(X축 패턴) 신호 중 어느 하나의 신호의 주파수 대역을 통과시키는 광학 필터를 구비하는 것이 바람직하다.
본 발명의 일실시예에 따른 상기 격자신호 수신기는, 상기 각 센서들로부터 감지신호를 입력받아 모션 벡터를 처리하고, 격자의 기울어짐 정보를 산출하여 상기 모션 벡터를 보정하는 모션 벡터 프로세서를 포함하여 이루어질 수도 있다.
일실시예로서, 상기 모션 벡터 프로세서는, 격자의 움직이는 방향을 검출하는 방향 검출부; 하나의 격자 라인이 움직일 때마다 펄스를 생성하는 라인 검출부; 격자의 기울어짐을 검출하는 기울기 검출부; 상기 방향 검출부로부터 격자의 움직임 방향 정보와 상기 라인 검출부로부터 펄스를 입력받아 X축 모션 벡터(수평 모션 벡터)와 Y축 모션 벡터(수직 모션 벡터)를 추출하는 모션 벡터 추출부; 및 상기 기울기 검출부로부터 전달된 기울어짐 정보에 따라 상기 X축 모션 벡터와 상기 Y축 모션 벡터를 보정하는 기울기 기반 모션 벡터 보정부;를 포함하는 이루어질 수 있다.
이때, 상기 모션 벡터 프로세서는, 송신단 또는 수신단에서 발생한 잡음 및 손 떨림에 의한 모션 벡터의 변동을 억제하기 위하여 상기 기울기 기반 모션 벡터 보정부의 출력을 입력받아 저대역 필터링을 수행하는 저대역 필터를 더 포함할 수도 있다.
이때, 상기 모션 벡터 프로세서는, 가속 또는 감속 조건하에서 생길 수 있는 오차를 줄이기 위하여 상기 모션 벡터 추출부의 상기 X축 모션 벡터 및 상기 Y축 모션 벡터를 입력받아 저대역 필터링을 수행하고, 상기 필터링된 X축 모션 벡터와 Y축 모션 벡터를 상기 기울기 기반 모션 벡터 보정부로 출력하는 저대역 필터를 더 포함할 수도 있다.
이때, 상기 모션 벡터 프로세서는, 손 떨림을 추정하는 손떨림 방지 결정부를 더 포함하고, 상기 손떨림 방지 결정부의 결정에 따라 상기 모션 벡터 추출부가 정지되도록 구성될 수도 있다.
일실시예로서, 상기 모션 벡터 프로세서는, 격자의 움직이는 방향을 검출하는 방향 검출부; 하나의 격자 라인이 움직일 때마다 펄스를 생성하는 라인 검출부; 격자의 기울어짐을 검출하는 기울기 검출부; 상기 방향 검출부로부터 격자의 움직임 방향 정보와 상기 라인 검출부로부터 펄스를 입력받아 X축 모션 벡터와 Y축 모션 벡터를 추출하는 상기 모션 벡터 추출부; 격자의 움직임에 대한 일정주기를 디지털 값으로 변환하는 펄스 폭 복조부; 상기 변환된 디지털 값에 따라 상기 모션 벡터 추출부로부터 전송된 상기 X축 모션 벡터와 상기 Y축 모션 벡터를 보정하는 펄스 기반 모션 벡터 보정부; 및 상기 기울기 검출부로부터 전달된 격자의 기울어짐 정보에 따라 상기 펄스 기반 모션 벡터 보정부로부터 전달된 상기 보정된 X축 모션 벡터와 상기 보정된 Y축 모션 벡터를 보정하는 기울기 기반 모션 벡터 보정부;를 포함하여 이루어질 수도 있다.
본 발명의 일실시예에 따른 격자신호 수신기는, 상기 복수의 센서들은 제 1 칩으로 구현되고, 상기 모션 벡터 프로세서는 상기 제 1 칩과 다른 제 2 칩으로 구현될 수도 있으며, 상기 복수의 센서들과 상기 모션 벡터 프로세서가 하나의 칩으로 구현될 수도 있다.
본 발명의 일실시예에 따른 무선 포인팅 시스템은, 격자 패턴의 신호를 생성하여 출력하는 격자신호 송신기; 및 격자 패턴의 신호를 수신하여 움직임을 산출하기 위한 모션 벡터를 처리하는 격자신호 수신기를 포함하되, 상기 격자신호 수신기는 격자의 움직임을 감지하는 모션 센서 이외에 기울어짐 감지센서를 포함하여 상기 격자신호 송신기의 기울어짐을 감지하고 기울어짐 정보에 따라 상기 모션 벡터를 보정하는 것을 특징으로 한다.
본 발명에 따른 격자신호 수신기 및 그것을 포함한 무선 포인팅 시스템은 IPTV 등 차세대 영상 가전기기에 절대적으로 요구되고 있는 무선 포인팅 기능을 고성능 저비용으로 구현될 수 있다.
특히, 격자신호 송신기의 기울어짐을 감지하여 이를 보정함으로써 리모컨을 기울임에 따라 발생하는 오동작을 방지할 수 있으며, 또한, 다양한 신호처리를 통하여 손떨림 방지, 부드러운 포인팅 등을 구현할 수 있다.
도 1은 격자구조를 이용한 무선 포인팅 시스템을 보여주는 도면이다.
도 2는 격자구조를 이용한 무선 포인팅 시스템의 격자신호 수신기에서 움직임 판단의 예를 보여주는 도면이다.
도 3은 격자신호 송신기가 기울어질 경우 격자신호 수신기에서 발생하는 오류를 보여주는 도면이다.
도 4는 본 발명의 무선 포인팅 시스템의 일실시예를 보여주는 도면이다.
도 5는 격자신호 수신기에서 격자신호 송신기의 기울어진 각도를 추출하는 예를 보여주는 도면이다.
도 6은 본 발명에 따른 회전변환 수식과 예제를 보여주는 도면이다.
도 7 내지 도 11은 본 발명에 따른 격자신호 수신기의 모션벡터 프로세서를 구성하는 실시 예들을 보여주는 도면이다.
도 12는 본 발명에 따른 격자신호 수신기를 하드웨어 방식으로 구현된 블록도이다.
도 13 및 도 14는 본 발명에 따른 격자신호 수신기를 소프트웨어 방식으로 구현한 실시 예를 보여주는 도면이다.
*도면의 주요부분에 대한 부호의 설명*
10: 무선 포인팅 시스템 20,21: 애플리케이션
100: 격자신호 송신기 200: 격자신호 수신기
120: 마이컴 140,145: 격자 발생기
160,165: 렌즈 220: 신호 수신기
240: 모션 벡터 프로세서 241: 방향 검출부
242: 라인 검출부 243: 기울기 검출부
244: 모션 벡터 추출부 245: 기울기 기반 모션 벡터 보정부
246,246a: 저대역 필터 247: 손떨림 방지 결정부
248: 펄스 폭 복조부 249: 펄스 기반 모션 벡터 보정부
254: 직렬 인터페이스 260, 22: MCU
이하, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있도록 본 발명의 실시 예를 첨부된 도면을 참조하여 설명한다.
본 발명은 여기서 설명되는 실시예에 한정되지 않고 다른 형태로 구체화될 수도 있다. 오히려, 여기서 소개되는 실시예는 개시된 내용이 철저하고 완전해질 수 있도록 그리고 당업자에게 본 발명의 사상이 충분히 전달될 수 있도록 하기 위해 제공되는 것이다.
본 발명에 따른 격자신호 수신기 및 그것을 포함한 무선 포인팅 시스템은 격자신호 송신기의 기울어짐을 감지할 수 있고, 감지된 결과에 따라 모션 벡터를 보정함으로써, 신뢰성이 보장되는 무선 포인팅 기능을 수행하게 된다.
도 4는 본 발명의 무선 포인팅 시스템(10)의 실시예를 보여주는 도면이다. 도 4를 참조하면, 본 발명의 무선 포인팅 시스템(10) 격자 구조의 신호를 발생하는 격자신호 송신기(100), 및 격자 구조의 신호를 수신하여 수신된 격자 신호로부터 움직임을 판단하는 격자신호 수신기(200)를 포함할 것이다.
격자신호 송신기(100)는 광원(일례로 LED가 사용될 수 있다.) 및 격자생성기를 포함하여 격자구조의 빛을 송신하여 포인팅 기능을 구현한다. 송신된 격자구조의 빛은 격자신호 수신기(200)에서 센서가 격자구조의 라인이 지나는 것을 감지하여 이동방향 및 이동 속도를 계산하여 모션벡터를 산출함으로써 디지털 TV 등의 영상가전기기의 화면 상에서 포인터를 구동시킨다. 도 4를 참조하여 본 실시예의 무선 포인팅 시스템(10)을 보다 상세히 설명하면 다음과 같다.
격자신호 송신기(100)는 마이컴(120), X-격자 발생기(140), Y-격자 발생기(145), 제 1 렌즈(160), 및 제 2 렌즈(165)를 포함할 것이다. 격자신호 송신기(100)는 격자 구조의 적외선 신호를 생성할 것이다(본 발명의 목적이 달성되는 범위 내에서는 적외선 이외의 빛이 사용될 수도 있다.).
마이컴(120)은 각 축(X축 및 Y축)에 반송 주파수가 있는 신호를 생성할 것이다. 여기서 X축은 격자신호 송신기(100)가 수평 방향의 격자 라인을 생성하는 축이고, Y축은 격자신호 송신기(100)가 수직 방향의 격자 라인을 생성하는 축이다. 이때 생성된 신호는 적외선 LED을 통하여 적외선 신호로 변환될 것이다. 이때 생성되는 X축 반송 주파수 신호와 Y축 반송 주파수 신호는 동일한 주파수를 사용할 수도 있으나, 상호 간섭이 일어나는 것을 방지하기 위하여 서로 다른 주파수 영역의 신호들을 사용하는 것이 바람직하다. 예를 들어, X축 반송 주파수 신호는 30~40KHz 내에서 생성되고, X축 반송 주파수 신호는 41~50Hz 내에서 생성될 수 있다.
X-격자 발생기(140)는 X축 반송 주파수 신호를 입력받아 X축 패턴(IRX)을 생성할 것이다. 즉, X-격자 발생기(140)는 LED을 통하여 출력된 빛을 투과시켜 X축 패턴(IRX)을 생성할 것이다. Y-격자 발생기(145)는 Y축 반송 주파수 신호를 입력받아 Y축 패턴(IRY)을 생성할 것이다. 즉, Y-격자 발생기(145)는 LED을 통하여 출력된 빛을 투과시켜 Y축 패턴(IRY)을 생성할 것이다. X-격자 발생기(140) 및 Y-격자 발생기는 그리드 패턴의 X축 패턴 및 Y축 패턴이 식각된 플레이트로 이루어질 수 있고, 재질은 빛(적외선)을 투과시킬 수 있는 유리 등의 재질이 사용될 수 있다.
제 1 렌즈(160)는 X축 패턴(IRX)을 투과시켜 격자신호 수신기(200) 주변으로 뿌려줄 것이다. 제 2 렌즈(165)는 Y축 패턴(IRY)을 투과시켜 격자신호 수신기(200) 주변으로 뿌려줄 것이다. 제 1 및 제 2 렌즈들(160,165)은 빛(적외선)을 투과할 수 있는 재질이다.
본 발명에서 격자신호 송신기(100)는 전술한 바와 같이 X축 패턴 신호 및 Y축 패턴 신호를 각각 생성하는 방식 이외에도 X축 패턴 및 Y축 패턴을 동시에 생성할 수도 있으며(격자 발생기를 XY-격자 발생기로 사용함), 하나의 반송주파수 신호를 사용하여 그리드 패턴을 생성할 수도 있다.
도 4를 참조하면, 격자신호 수신기(200)는 격자신호 송신기(100)로부터 생성된 적외선 격자 신호를 감지하는 신호 수신기(220) 및 수신된 격자 신호로부터 모션 벡터를 처리하는 모션 벡터 프로세서(240)를 포함할 것이다.
신호 수신기(220)는 종래 기술과 달리 기울어짐 감지센서(E)를 더 구비하여 격자의 기울어짐을 감지할 수 있도록 구성되며, 모션 벡터 프로세서(240)는 신호 수신기(220)의 기울어짐 감지에 따라 모션 벡터를 보정할 수 있도록 구현된다. 이로써, 모션 벡터의 방향 또는 크기가 왜곡되는 것을 방지할 수 있게 된다.
신호 수신기(220)는 좌우 움직임(X축 움직임)을 판별하는 수평모션 센서(A,B), 상하 움직임(Y축 움직임)을 판별하는 수직모션 센서(C,D) 및 기울어짐을 판별하는 기울어짐 감지센서(E)를 포함할 것이다.
본 발명의 움직임 판별 방법을 보면 다음과 같다. 격자신호 송신기(100)가 움직여, 격자신호 송신기(100)가 생성하는 격자가 움직일 것이다. 격자신호 수신기(200)의 신호 수신기(220)에서 격자의 빛을 수신할 것이다. 다음에 수신되는 패턴에 따라 방향이 판별될 것이다. 판별된 방향은 포인터에 적용될 것이다.
각 센서(A,B,C,D,E)는 빛을 감지하여 전기 신호로 변환할 수 있는 포토다이오드로 구성될 것이다. 단, 격자의 수평/수직(X축/Y축) 간의 간섭을 없애기 위해서 격자신호 송신기(100)는 수평/수직(X축/Y축)의 빛을 서로 다른 파장으로 생성할 것이다. 따라서, 각 센서(A,B,C,D,E)는 이에 맞는 광학 필터를 사용할 것이다.
수평모션 센서(A,B)는 좌우(X축)의 움직임을 판별할 수 있는 센서이다. 수직모션 센서(C,D)는 상하(Y축)의 움직임을 판별할 수 있는 센서이다. 기울어짐 감지센서(E)는 격자의 기울어짐을 판별할 수 있는 센서이다.
기울어짐 감지센서(E)는 수평모션 센서(A,B) 또는 수직모션 센서(C,D)와 동일한 광학 필터를 가지도록 구성되며, 이에 따라 기울어짐 감지센서(E)는 수평모션 센서(A,B)와 함께 기울어짐을 감지하거나, 또는 수직모션 센서(C,D)들과 함께 기울어짐을 감지할 수 있게 된다.
수평모션 센서(A,B)는 서로 수평으로 배치되고, 수직모션 센서(A,B)는 서로 수직으로 배치해야 한다. 기울어짐 감지센서(E)는 수평모션 센서(A,B)와 동일한 주파수 신호를 수신하는 경우(수평모션 센서(A,B)와 함께 기울어짐을 감지하는 경우) 수평모션 센서(A,B)와 동일선상의 수평 위치만 제외하면 어느 위치라도 배치될 수 있다.
또한, 수직모션 센서(C,D)와 동일한 주파수 신호를 수신하는 경우(수직모션 센서(C,D)와 함께 기울어짐을 감지하는 경우) 수직모션 센서(C,D)와 동일선상의 수직 위치만 제외하면 어느 위치라도 배치될 수 있다. 여기서 수직이나 수평이냐는 것은 격자신호 송신기(100)에 생성된 격자의 X축과 Y축을 기준으로 한 것이다.
이하에서는 본 발명의 일실시예에 따라 기울어짐 감지센서(E)가 수평모션 센서(A,B)와 함께 기울어짐을 감지하는 방법에 대하여 설명한다.
본 실시예에서, 기울어짐은 센서(A)와 센서(E)를 통하여 판별될 것이다. 만일 격자의 기울어짐이 발생하면, 센서(A)와 센서(E)에서 수직 격자 패턴이 수신되는 시간이 다르게 된다. 이로써, 격자신호 송신기(100)의 기울어짐이 판별될 것이다.(이 경우는 센서(A)와 센서(E)가 수직으로 배열된 경우에 가능할 것이며, 수직으로 배열되지 않는다 하더라도 센서들(A,B,E)들의 감지시간에 대한 상대적 비교를 통하여 기울어짐을 판별할 수 있다.)
또한 격자신호 송신기(100)의 기울어진 방향과 각도는 센서들(A,B,E)을 통하여 판별될 것이다.
우선 격자신호 송신기(100)의 기울어진 방향은 센서가 "ON"을 되는 순서를 통해 알 수 있다.
표 1은 적외선 신호를 인식하는 순서에 따라 얻을 수 있는 정보를 나열한 것이다. 아래에서 45도의 기준은 센서(A)와 센서(B)의 거리가 센서(A)와 센서(E)의 거리와 같을 경우에 판별할 수 있는 예이다.
표 1
인식 순서 얻을 수 있는 정보
이동방향 기울어진 방향 비고
B -> A -> E 왼쪽 오른쪽
B -> E -> A 왼쪽 왼쪽
E -> B -> A 왼쪽 왼쪽 45도 이상 기울어짐
E -> A -> B 오른쪽 오른쪽
A -> E -> B 오른쪽 왼쪽
A -> B -> E 오른쪽 왼쪽 45도 이상 기울어짐
도 5는 격자신호 송신기(100)의 기울어진 각도를 추출하는 예를 보여주는 도면이다. 만일 오른쪽으로 움직일때, 차례로 E -> A -> B 순으로 닿게 될 것이다. 이때, 각각이 닿는 시간을 구하면 tEA, tAB를 구할 수 있다. 그리고 센서 사이의 거리가 굉장히 짧기 때문에 오른쪽으로 움직이는 이동의 속도는 거의 변하지 않는다. 따라서 이동을 등속이동이라고 가정하면, 이동거리는 시간에 비례하게 된다.
수학식 1
Figure PCTKR2009006240-appb-M000001
따라서 tEA와 tAB의 비는 dA와 dB의 비와 동일하다. 또한 센서(A)와 센서(E) 사이의 거리와 센서(A)와 센서(B)의 사이의 거리를 같은 거리일 때, dB와 dE는 동일하다. 따라서, dA와 dE의 비가 구해진다. 이를 통해 삼각 함수의 연산으로 기울기가 구해진다.
수학식 2
Figure PCTKR2009006240-appb-M000002
이렇게 구한 기울기는 회전변환을 통하여 모션 벡터(Motion Vector)를 보정하는데 이용된다.
도 6은 본 발명에 따른 회전변환 수식과 예제를 보여주는 도면이다.
움직임 방향 판별에 있어서 문제가 되는 것은 센서들 사이에 빛의 라인이 하나 이상 들어가는 것이다. 따라서 격자신호 송신기(100)의 송수신거리 안에서 빛의 두께가 센서들 사이의 거리보다 두껍다면, 움직임 방향 판별에 문제가 발생되지 않는다. 빛의 격자를 만드는 구조는 빛을 가리는 방식을 사용하므로, 라인의 두께를 두껍게 하는데는 큰 어려움이 없다.
도 7은 본 발명에 따른 격자신호 수신기(200)의 모션 벡터 프로세서를 구성하는 제 1 실시 예를 보여주는 도면이다. 도 7을 참조하면, 격자신호 수신기(200)는 빛을 감지하는 센서들로 이루어진 신호 수신기(220)와 감지된 신호를 받아 움직임을 계산하는 모션 벡터 프로세서(Motion Vector Processor:240)로 크게 구분될 수 있다. 본 실시예에서 모션 벡터 프로세서의 구성은 다음과 같다.
방향 검출부(Direction Detector:241)에서 격자신호 송신기(100)의 움직임 방향을 감지할 것이다. 라인 검출부(Line Detector:242)는 한 라인이 움직였을 때마다 펄스를 생성할 것이다. 이후 모션 벡터 추출부(Motion Vector Extractor:244)에서 수평과 수직 방향에 대한 모션 벡터를 생성하여 기울기 기반 모션 벡터 보정부(Slope-based Motion Vector Compensator:245)로 전달할 것이다.
모션 벡터 보정부(245)는 기울어진 각도(θ)에 따라 모션 벡터를 보정할 것이다. 이와 동시에 기울기 검출부(Slope Detector:243)에서는 수평모션 센서(A,B)와기울기 센서(E)로부터의 감지 신호(2H,2V,1E)를 이용하여 송신기의 기울어진 정도(θ)를 기울기 기반 모션 벡터 보정부(245)로 전송할 것이다. 여기서 2H 신호는 수평모션 센서(A,B)로부터 수신된 수직 패턴 적외선 신호(IRX)이고, 1E 신호는 신호 기울기 센서(E)로부터 수신된 수직 패턴 적외선 신호(IRX)이다.
기울기 기반 모션 벡터 보정부(245)는 2개의 모션 벡터와 θ값을 취한 후 앞서 설명한 회전변환 공식을 수행하여 보정된 모션 벡터를 출력할 것이다.
도 8은 본 발명에 따른 격자신호 수신기(200)의 모션벡터 프로세서를 구성하는 제 2 실시 예를 보여주는 도면이다. 도 8을 참조하면, 격자신호 수신기(200)는 송수신단에서 발생한 잡음 및 손 떨림에 의한 모션 벡터의 변동을 억제하기 위하여 최종 단에 저대역 필터(Low-pass Filter:246)를 연결할 것이다. 이로써, 격자신호 수신기(200)는 움직임이 부드러운 모션 벡터를 얻게 된다.
도 9는 본 발명에 따른 격자신호 수신기(200)의 모션벡터 프로세서를 구성하는 제 3 실시 예를 보여주는 도면이다. 도 9를 참조하면, 격자신호 수신기(200)는 가속 또는 감속 조건하에서 생길 수 있는 오차를 줄이기 위하여, 도 8에서와 같이 최종 단에 저대역 필터를 적용하는 것을 대신하여, 모션 벡터 추출부(244)의 뒷 단에 저대역 필터(246a)를 연결할 것이다. 이로써, 격자신호 수신기(200)는 가속 또는 감속에 의한 오차가 감쇄된다.
도 10은 본 발명에 따른 격자신호 수신기(200)의 모션벡터 프로세서를 구성하는 제 4 실시 예를 보여주는 도면이다. 도 8에 도시된 저대역 필터(246)를 이용한 손 떨림 억제는 소극적 기법이라 할 수 있다. 보다 적극적으로 도 10과 같이 손떨림 방지 결정부(Anti-shaking Decision:247)에 의해 실제 손 떨림을 추정하는 알고리즘을 활용하여 모션 벡터 추출부의 정지 조건을 생성하면, 미세 움직임으로 인한 잘못된 모션 벡터추출이 예방될 것이다.
도 11은 본 발명에 따른 격자신호 수신기(200)의 모션벡터 프로세서를 구성하는 제 5 실시 예를 보여주는 도면이다. 격자 라인과 격자 라인 사이에서 격자 이동에 따라 모션 벡터가 단위 이동을 할 경우 부드럽지 못한 모션이 연출될 수 있다. 이는 본 기법의 구조상 격자 해상도의 한계에 따른 문제에 기인한다. 그런데, 격자신호 송신기(100)에서 생성된 격자의 움직임에 대한 일정주기(Twidth: 이동속도를 의미)가 판별 기준으로 설정되면, 적절한 보정이 가능하다. 일정주기(Twidth)의 값의 크기에 따라 감속과 가속이 판별될 수 있으므로, 그에 따라 보정된 모션 벡터를 계산하는 방법이 강구될 것이다.
이때 일정주기(Twidth)는 펄스 신호를 디지털 신호로 바꿔주는 펄스 폭 복조부(PWDM:Pulse Width De-Modulator:248)로부터 생성될 것이다. 펄스 기반 모션 벡터 보정부(249)는 펄스 폭 복조부(248)로부터 전달된 일정주기에 따라 모션 벡터를 보정할 것이다. 이렇게 보정된 모션 벡터값은 기울기 기반 모션 벡터 보정부(245)에 전달될 것이다.
본 발명에 따라 격자 신호를 수신하여 모션벡터를 산출하는 방법을 구현하는데에는, 크게 두 가지 방법이 고려될 수 있다. 하나는 모션 벡터 프로세서를 하드웨어 방식으로 구현하는 것이고, 다른 하나는 MCU를 활용하여 모션 벡터 프로세서 내부의 기능을 소프트웨어(펌웨어)로 변환/구현하는 것이다.
도 12는 본 발명에 따른 격자신호 수신기(200)를 하드웨어 방식으로 구현한 블록도이다. 도 12를 참조하면, 하드웨어 방식은 A 칩(201)과 B 칩(202)을 따로 개발하여 하나의 패키지(보드)로 병합하는 것(점선)과 독립된 두 개의 칩 솔루션(실선)으로 분리될 수 있다. 특히, B 칩(202)의 경우 애플리케이션과의 데이터 통신을 위한 직렬 인터페이스(Serial Interface:254)가 필수적으로 내장(built-in)될 것이다.
소프트웨어 방식은 애플리케이션에 대해서 MCU가 외장인 경우(도 16)와 내장되는 경우(도 14)로 구분될 것이다.
도 13은 본 발명에 따른 격자신호 수신기(200)를 소프트웨어 방식으로 구현된 제 1 실시 예를 보여주는 도면이다. 도 13을 참조하면, MCU(260)가 외장인 경우에 신호 수신기(220)와 MCU(260)가 한 보드(203) 내에 공존하게 하고, MCU(260)가 애플리케이션과 통신하는 방식을 취한다. MCU(260)는 내부적으로 모션 벡터 프로세서 기능들을 수행하는 일련의 프로그램을 내장하고, 외부적으로 GPIO 혹은 IRQ(혹은 둘을 연합) 핀(pin)들을 신호 수신기(220)에 연결하여 신호를 입력받고, 직렬 인터페이스(264)가 애플리케이션과 접속되도록 한다.
이러한 소프트웨어 방식은 애플리케이션에 대응하는 MCU 수준을 예상하여 독립 보드를 유동성 있게 개발할 수 있는 장점이 있다. 반대로 독립 보드의 MCU특성이 애플리케이션에 종속적이어야 하기 때문에, 애플리케이션이 바뀔 때마다 선정된 MCU의 적절성에 대한 평가 및 시험이 요구될 것이다.
도 14는 본 발명에 따른 격자신호 수신기(200)를 소프트웨어 방식으로 구현된 제 2 실시 예를 보여주는 도면이다. 도 14를 참조하면, MCU(22)가 애플리케이션(21)의 내부에 내장된 장치 개발은 신호 수신기(220)에 한정될 것이다. MCU(22)는 애플리케이션에 내장된 것을 활용하기 때문에, 애플리케이션에서 이미 선점하고 있는 리소스들을 고려한 모션 벡터 프로세서 프로그래밍이 반드시 필요하다.
이상과 같이 도면과 명세서에서 최적 실시 예가 개시되었다. 여기서 특정한 용어들이 사용되었으나, 이는 단지 본 발명을 설명하기 위한 목적에서 사용된 것이지 의미 한정이나 특허청구범위에 기재된 본 발명의 범위를 제한하기 위하여 사용된 것은 아니다. 그러므로 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시 예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.

Claims (19)

  1. 격자신호 송신기로부터 격자 패턴의 신호를 수신하여 격자신호 송신기의 움직임을 판별하는 격자신호 수신기에 있어서,
    격자의 움직임을 감지하는 모션 센서 이외에 격자의 기울어짐을 감지하는 기울어짐 감지센서를 포함하여 격자신호 송신기의 기울어짐을 감지하는 것을 특징으로 하는 격자신호 수신기.
  2. 제 1항에 있어서,
    상기 격자신호 수신기는,
    격자의 수직 패턴(Y축 패턴) 신호를 감지하여 수평 움직임(X축 움직임)을 감지하는 한 쌍의 수평모션 센서;
    격자의 수평 패턴(X축 패턴) 신호를 감지하여 수직 움직임(Y축 움직임)을 감지하는 한 쌍의 수직모션 센서; 및
    격자의 기울어짐을 감지하는 기울어짐 감지센서;
    를 포함하여 이루어지는 것을 특징으로 하는 격자신호 수신기.
  3. 제 2항에 있어서,
    상기 기울어짐 감지센서는,
    상기 한 쌍의 수평모션 센서 또는 상기 한 쌍의 수직모션 센서와 동일선상이 아닌 위치에 배치되는 것을 특징으로 하는 격자신호 수신기.
  4. 제 3항에 있어서,
    상기 기울어짐 감지센서는,
    상기 한 쌍의 수평모션 센서 중 하나의 센서에 대해 수직 방향으로 배치되거나,
    상기 한 쌍의 수직모션 센서 중 하나의 센서에 대해 수평 방향으로 배치되는 것을 특징으로 하는 격자신호 수신기.
  5. 제 4항에 있어서,
    상기 기울어짐 감지센서는,
    상기 기울어짐 감지센서와 수직 방향으로 배치된 하나의 수평모션 센서 사이의 거리가 한 쌍의 수평모션 센서 사이의 거리와 동일하게 배치되거나,
    상기 기울어짐 감지센서와 수평 방향으로 배치된 하나의 수직모션 센서 사이의 거리가 한 쌍의 수직모션 센서 사이의 거리와 동일하게 배치되는 것을 특징으로 하는 격자신호 수신기.
  6. 제 3항에 있어서,
    상기 격자신호 수신기는,
    상기 기울어짐 감지센서가 한 쌍의 수평모션 센서와 함께 수직 패턴(Y축 패턴) 신호를 감지하여 센서들 사이의 상대적인 감지시간을 비교하여 격자의 기울어짐 정보를 산출하거나,
    상기 기울어짐 감지센서가 한 쌍의 수직모션 센서와 함께 수평 패턴(X축 패턴) 신호를 감지하여 센서들 사이의 상대적인 감지시간을 비교하여 격자의 기울어짐 정보를 산출하는 것을 특징으로 하는 격자신호 수신기.
  7. 제 2항에 있어서,
    격자의 수직 패턴(Y축 패턴) 신호와 수평 패턴(X축 패턴) 신호는 서로 상이한 주파수 대역을 갖는 것을 특징으로 하는 격자신호 수신기.
  8. 제 2항에 있어서,
    상기 각 센서들은,
    격자 신호를 감지하는 포토다이오드; 및
    상기 격자 신호의 주파수 대역을 통과시키는 광학 필터를 포함하여 이루어지는 것을 특징으로 하는 격자신호 수신기.
  9. 제 7항에 있어서,
    격자의 수직 패턴(Y축 패턴) 신호와 수평 패턴(X축 패턴) 신호는 서로 상이한 주파수 대역을 가지며,
    상기 수평모션 센서와 상기 수직모션 센서는 각각 수직 패턴(Y축 패턴) 신호와 수평 패턴(X축 패턴) 신호의 주파수 대역을 통과시키는 광학 필터를 구비하며,
    상기 기울어짐 감지센서는 수직 패턴(Y축 패턴) 신호 또는 수평 패턴(X축 패턴) 신호 중 어느 하나의 신호의 주파수 대역을 통과시키는 광학 필터를 구비하는 것을 특징으로 하는 격자신호 수신기.
  10. 제 1항에 있어서,
    상기 격자신호 수신기는,
    상기 각 센서들로부터 감지신호를 입력받아 모션 벡터를 처리하고, 격자의 기울어짐 정보를 산출하여 상기 모션 벡터를 보정하는 모션 벡터 프로세서를 포함하여 이루어지는 것을 특징으로 하는 격자신호 수신기.
  11. 제 10항에 있어서,
    상기 모션 벡터 프로세서는,
    격자의 움직이는 방향을 검출하는 방향 검출부;
    하나의 격자 라인이 움직일 때마다 펄스를 생성하는 라인 검출부;
    격자의 기울어짐을 검출하는 기울기 검출부;
    상기 방향 검출부로부터 격자의 움직임 방향 정보와 상기 라인 검출부로부터 펄스를 입력받아 X축 모션 벡터(수평 모션 벡터)와 Y축 모션 벡터(수직 모션 벡터)를 추출하는 모션 벡터 추출부; 및
    상기 기울기 검출부로부터 전달된 기울어짐 정보에 따라 상기 X축 모션 벡터와 상기 Y축 모션 벡터를 보정하는 기울기 기반 모션 벡터 보정부;
    를 포함하는 이루어지는 것을 특징으로 하는 격자신호 수신기.
  12. 제 11항에 있어서,
    상기 모션 벡터 프로세서는,
    송신단 또는 수신단에서 발생한 잡음 및 손 떨림에 의한 모션 벡터의 변동을 억제하기 위하여 상기 기울기 기반 모션 벡터 보정부의 출력을 입력받아 저대역 필터링을 수행하는 저대역 필터를 더 포함하는 것을 특징으로 하는 격자신호 수신기.
  13. 제 11항에 있어서,
    상기 모션 벡터 프로세서는,
    가속 또는 감속 조건하에서 생길 수 있는 오차를 줄이기 위하여 상기 모션 벡터 추출부의 상기 X축 모션 벡터 및 상기 Y축 모션 벡터를 입력받아 저대역 필터링을 수행하고, 상기 필터링된 X축 모션 벡터와 Y축 모션 벡터를 상기 기울기 기반 모션 벡터 보정부로 출력하는 저대역 필터를 더 포함하는 것을 특징으로 하는 격자신호 수신기.
  14. 제 11항에 있어서,
    상기 모션 벡터 프로세서는,
    손 떨림을 추정하는 손떨림 방지 결정부를 더 포함하고,
    상기 손떨림 방지 결정부의 결정에 따라 상기 모션 벡터 추출부가 정지되는 것을 특징으로 하는 격자신호 수신기.
  15. 제 10항에 있어서,
    상기 모션 벡터 프로세서는,
    격자의 움직이는 방향을 검출하는 방향 검출부;
    하나의 격자 라인이 움직일 때마다 펄스를 생성하는 라인 검출부;
    격자의 기울어짐을 검출하는 기울기 검출부;
    상기 방향 검출부로부터 격자의 움직임 방향 정보와 상기 라인 검출부로부터 펄스를 입력받아 X축 모션 벡터와 Y축 모션 벡터를 추출하는 상기 모션 벡터 추출부;
    격자의 움직임에 대한 일정주기를 디지털 값으로 변환하는 펄스 폭 복조부;
    상기 변환된 디지털 값에 따라 상기 모션 벡터 추출부로부터 전송된 상기 X축 모션 벡터와 상기 Y축 모션 벡터를 보정하는 펄스 기반 모션 벡터 보정부; 및
    상기 기울기 검출부로부터 전달된 격자의 기울어짐 정보에 따라 상기 펄스 기반 모션 벡터 보정부로부터 전달된 상기 보정된 X축 모션 벡터와 상기 보정된 Y축 모션 벡터를 보정하는 기울기 기반 모션 벡터 보정부;
    를 포함하여 이루어지는 것을 특징으로 하는 격자신호 수신기.
  16. 제 10항에 있어서,
    상기 복수의 센서들은 제 1 칩으로 구현되고,
    상기 모션 벡터 프로세서는 상기 제 1 칩과 다른 제 2 칩으로 구현되는 것을 특징으로 하는 격자신호 수신기.
  17. 제 10항에 있어서,
    상기 복수의 센서들과 상기 모션 벡터 프로세서는 하나의 칩으로 구현되는 것을 특징으로 하는 격자신호 수신기.
  18. 격자 패턴의 신호를 생성하여 출력하는 격자신호 송신기; 및
    격자 패턴의 신호를 수신하여 움직임을 산출하기 위한 모션 벡터를 처리하는 격자신호 수신기를 포함하되,
    상기 격자신호 수신기는 격자의 움직임을 감지하는 모션 센서 이외에 기울어짐 감지센서를 포함하여 상기 격자신호 송신기의 기울어짐을 감지하고 기울어짐 정보에 따라 상기 모션 벡터를 보정하는 것을 특징으로 하는 무선 포인팅 시스템.
  19. 제 18항에 있어서,
    상기 격자신호 수신기는,
    격자의 수직 패턴(Y축 패턴) 신호를 감지하여 수평 움직임(X축 움직임)을 감지하는 한 쌍의 수평모션 센서;
    격자의 수평 패턴(X축 패턴) 신호를 감지하여 수직 움직임(Y축 움직임)을 감지하는 한 쌍의 수직모션 센서; 및
    상기 한 쌍의 수평모션 센서 또는 상기 한 쌍의 수직모션 센서와 동일선상이 아닌 위치에 배치되어 격자의 기울어짐을 감지하는 기울어짐 감지센서;
    를 포함하여 이루어지는 것을 특징으로 하는 격자신호 수신기.
PCT/KR2009/006240 2008-10-28 2009-10-27 격자신호 수신기 및 그것을 포함한 무선 포인팅 시스템 WO2010050736A2 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN2009801426969A CN102197351A (zh) 2008-10-28 2009-10-27 网格信号接收器及具有网格信号接收器的无线指向系统
US13/126,331 US20110211132A1 (en) 2008-10-28 2009-10-27 Grid signal receiver and wireless pointing system having the same

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR10-2008-0106175 2008-10-28
KR20080106175 2008-10-28
KR1020090102252A KR101043923B1 (ko) 2008-10-28 2009-10-27 격자신호 수신기 및 그것을 포함한 무선 포인팅 시스템
KR10-2009-0102252 2009-10-27

Publications (2)

Publication Number Publication Date
WO2010050736A2 true WO2010050736A2 (ko) 2010-05-06
WO2010050736A3 WO2010050736A3 (ko) 2010-08-19

Family

ID=42129454

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2009/006240 WO2010050736A2 (ko) 2008-10-28 2009-10-27 격자신호 수신기 및 그것을 포함한 무선 포인팅 시스템

Country Status (1)

Country Link
WO (1) WO2010050736A2 (ko)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0583836U (ja) * 1992-03-31 1993-11-12 株式会社島津製作所 光学式マウス用マウスパッド
WO2005108119A2 (en) * 2004-04-30 2005-11-17 Hillcrest Laboratories, Inc. Free space pointing devices with tilt compensation and improved usability
KR20060116125A (ko) * 2005-05-09 2006-11-14 위찬용 평판 표시 장치용 포인팅 장치 및 이를 이용한 평판 표시장치
KR20080064074A (ko) * 2007-09-06 2008-07-08 김기수 원격조정 송수신장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0583836U (ja) * 1992-03-31 1993-11-12 株式会社島津製作所 光学式マウス用マウスパッド
WO2005108119A2 (en) * 2004-04-30 2005-11-17 Hillcrest Laboratories, Inc. Free space pointing devices with tilt compensation and improved usability
KR20060116125A (ko) * 2005-05-09 2006-11-14 위찬용 평판 표시 장치용 포인팅 장치 및 이를 이용한 평판 표시장치
KR20080064074A (ko) * 2007-09-06 2008-07-08 김기수 원격조정 송수신장치

Also Published As

Publication number Publication date
WO2010050736A3 (ko) 2010-08-19

Similar Documents

Publication Publication Date Title
WO2011068362A2 (en) Power control method of device controllable by user's gesture
WO2011028025A2 (ko) 원격 위치 지시용 송신장치 및 수신장치
WO2010053305A2 (ko) 적외선 터치 스캐닝 모듈
WO2013105765A1 (en) Display apparatus and controlling method thereof
WO2010128796A2 (ko) 휴대용 단말기에서 사용자 자세에 따른 자동 호 수발신을 위한 장치 및 방법
EP2649511A2 (en) 3 dimensional (3d) display system of responding to user motion and user interface for the 3d display system
WO2018128518A1 (ko) 카메라 모듈 및 이를 포함하는 광학기기
WO2015160052A1 (ko) 광각 렌즈 이미지 보정 방법 및 그 장치
WO2017023151A1 (ko) 이미지 처리 장치
WO2015156553A1 (ko) 지문 검출 장치 및 이의 구동 신호 감쇄 보상 방법
WO2012081900A2 (ko) 광 터치 패널
WO2010050736A2 (ko) 격자신호 수신기 및 그것을 포함한 무선 포인팅 시스템
KR101043923B1 (ko) 격자신호 수신기 및 그것을 포함한 무선 포인팅 시스템
WO2023158068A1 (ko) 객체검출률 향상을 위한 학습시스템 및 그 방법
WO2013031158A1 (ja) 操作装置、その情報処理方法及び情報処理装置
WO2010050741A2 (ko) 격자신호 송신기와 격자신호 수신기 및 이들을 포함한 무선 포인팅 시스템 그리고 무선포인팅 시스템에서의 움직임 판별 방법
WO2013180354A1 (en) Method and home device for outputting response to user input
WO2022025630A1 (ko) 거리 센서를 포함하는 전자 장치 및 오토 포커스 수행 방법
WO2014129825A1 (ko) 차동 터치 센싱 시스템의 좌표 선택 회로 및 방법
WO2015088105A1 (ko) 디바이스 페어링 시스템 및 방법, 이동 단말기
WO2020171607A1 (ko) 온도 변화에 따른 오류 터치를 방지하는 터치 회로, 터치 회로를 포함하는 전자 장치 및 그 동작 방법
WO2013103230A1 (en) Method of providing user interface and image photographing apparatus applying the same
WO2014021490A1 (ko) 화면 인지성 검사 장치 및 이를 이용한 화면 인지성 테스트 시스템
WO2017116082A1 (ko) 하나의 감지 회로로 복수의 모드들을 구현하는 터치 패널용 구동 회로 및 이를 이용한 터치 감지 방법
WO2013180317A1 (ko) 모바일 단말기의 터치 입력을 이용한 ｉｐ 카메라의 원격 제어장치

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 200980142696.9

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09823816

Country of ref document: EP

Kind code of ref document: A2

NENP Non-entry into the national phase in:

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 13126331

Country of ref document: US

122 Ep: pct application non-entry in european phase

Ref document number: 09823816

Country of ref document: EP

Kind code of ref document: A2