KR20170124134A - Monitor Drive Method for Detecting a Change of the Position of the Optical Pen Mouse Operated on a Display Screen - Google Patents

Monitor Drive Method for Detecting a Change of the Position of the Optical Pen Mouse Operated on a Display Screen Download PDF

Info

Publication number
KR20170124134A
KR20170124134A KR1020160053156A KR20160053156A KR20170124134A KR 20170124134 A KR20170124134 A KR 20170124134A KR 1020160053156 A KR1020160053156 A KR 1020160053156A KR 20160053156 A KR20160053156 A KR 20160053156A KR 20170124134 A KR20170124134 A KR 20170124134A
Authority
KR
South Korea
Prior art keywords
monitor
optical mouse
mouse pen
image
displayed
Prior art date
Application number
KR1020160053156A
Other languages
Korean (ko)
Inventor
정승태
심수연
Original Assignee
주식회사 아이티티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 아이티티 filed Critical 주식회사 아이티티
Priority to KR1020160053156A priority Critical patent/KR20170124134A/en
Publication of KR20170124134A publication Critical patent/KR20170124134A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03542—Light pens for emitting or receiving light
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03543—Mice or pucks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545—Pens or stylus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)

Abstract

The present invention relates to a monitor operating method to sense the position change of an optical mouse pen operating on a display screen and, more specifically, to a position sensing method of an optical mouse pen operating on a displayed image. The present invention has technical features implemented by: a first step in which a contact sensing signal of the optical mouse pen is delivered to a monitor; a second step of generating a random noise pattern on the monitor; a third step in which a conversion image is displayed on the monitor; a fourth step in which the optical mouse pen senses a moving position by extracting and determining a screen pixel value of the conversion image; and a fifth step in which the position of the optical mouse pen is displayed on the monitor. Thus, the present invention has an effect of preventing remarkable decrease of a position recognition rate according to movements of the optical mouse pen when the entire area or a partial area of an image displayed on a monitor is expressed with white color or a pixel value having no change.

Description

디스플레이 화면상에서 동작하는 광마우스 펜의 위치변화를 감지하기 위한 모니터 구동 방법{Monitor Drive Method for Detecting a Change of the Position of the Optical Pen Mouse Operated on a Display Screen}Technical Field [0001] The present invention relates to a monitor driving method for detecting a change in position of an optical mouse pen operating on a display screen,

본 발명은 디스플레이 화면상에서 동작하는 광마우스 펜의 위치변화를 감지하기 위한 모니터 구동 방법에 관한 것으로서, 보다 상세하게는 광마우스 펜이 디스플레이되는 이미지 상에서 위치변화를 감지하는 동작이 수행되어질 때, 상기 이미지에 일정 수준의 랜덤노이즈 정보를 부가함으로서, 상기 광마우스 펜의 이미지 센서가 보다 정밀하게 위치변화를 획득할 수 있도록 하는 디스플레이 화면상에서 동작하는 광마우스 펜의 위치변화를 감지하기 위한 모니터 구동 방법에 관한 것이다.The present invention relates to a method of driving a monitor for detecting a change in the position of an optical mouse pen operating on a display screen. More particularly, To a monitor driving method for detecting a change in position of an optical mouse pen that operates on a display screen so that an image sensor of the optical mouse pen can acquire a positional change more precisely by adding a certain level of random noise information will be.

광마우스는 매우 작은 카메라 작용을 하는 이미지 센서(또는 금속 산화물 CMOS 반도체)와 적색 파장의 광을 내는 다이오드(LED)를 포함하는 광학적 기술을 이용하여 감지되는 이미지의 이동량을 분석하여 그 결과를 마우스 포인터의 이동에 반영하는 사용자 입력 장치를 말한다.The optical mouse analyzes the movement amount of the sensed image by using an optical technique including an image sensor (or a metal oxide CMOS semiconductor) that performs a very small camera action and a diode (LED) emitting light of a red wavelength, To the user's input device.

이러한 광마우스는 적색 파장의 광이 이미지 센서로 반사되고, 이미지 센서의 신호는 다시 각 영상을 신호 처리부(DSP)로 보내고, 신호 처리부는 각 영상의 패턴을 감지할 수 있고, 이런 패턴들이 이전의 영상과 비교해 어떻게 움직였는지 간파할 수 있는 기능을 수행한다.In this optical mouse, light of a red wavelength is reflected to the image sensor, the signal of the image sensor again sends each image to the DSP, the signal processor can detect the pattern of each image, It performs a function to detect how it moves compared with the image.

이때 상기 광마우스는 일반적인 패드위에서 동작하는 광마우스와 모니터의 디스플레이 상에서 직접 터치를 통하여 위치 판독 및 입력 명령을 수행하는 광마우스 펜으로 나뉠 수 있다.In this case, the optical mouse can be divided into an optical mouse operating on a general pad and an optical mouse pen performing a position reading and inputting command through a touch directly on the display of the monitor.

본 발명은 상기 광마우스 펜에 관련된 것으로서, 모니터 상에서 디스플레이되는 일련의 영상 패턴이 변화한 값을 토대로 신호 처리부에 의하여 상기 광마우스 펜이 얼마나 멀리 움직였는지를 결정하고, 이에 상응하는 좌표를 컴퓨터로 보내고, 컴퓨터는 마우스에서 받은 좌표를 바탕으로 모니터 화면 위에서 상기 광마우스 펜촉의 위치에 커서를 움직이는 것에 관한 것이다.The present invention relates to the optical mouse pen, and determines how far the optical mouse pen has moved by the signal processing unit based on the changed value of a series of image patterns displayed on the monitor, and sends the corresponding coordinates to the computer , The computer is about moving the cursor to the position of the optical mouse tip on the monitor screen based on the coordinates received from the mouse.

그러나 광마우스와 마찬가지로 광마우스 펜도 기본적으로 전자 카메라 또는 이미지 센서 형태로 되어 있으며 모니터의 디스플레이 화면을 촬영한 이미지를 활용하여 이동 거리 및 위치를 감지할 수 있으나, 모니터 화면 이미지의 픽셀값이 어떤 변화량도 없이 일정한 경우에는 상기 광마우스 펜의 이미지 센서가 이동 거리 및 위치를 감지하는데 정확성이 떨어지는 문제점이 있다.However, as with an optical mouse, an optical mouse pen is basically in the form of an electronic camera or an image sensor, and it is possible to detect a moving distance and a position by using an image taken on a display screen of a monitor. However, There is a problem in that the image sensor of the optical mouse pen detects the moving distance and the position of the optical mouse pen is not accurate.

예를 들어 모니터에서 광량 변화 없는 백색의 화면이 디스플레이되어 지고 있을 때 특정 영역에서 광마우스 펜이 A 지점에서 B 지점으로 이동한다고 가정하였을 시, 상기 광마우스 펜은 A의 지점을 촬영하고 이동하면서 다음에 B의 지점을 촬영하여 이미지를 비교하면 실제로는 마우스가 일정 픽셀로 이동하였음에도 불구하고 이미지의 픽셀값의 변화가 없기 때문에 상기 광마우스 펜은 이동이나 움직임이 없는 것으로 판단하게 되어 위치를 파악하지 못하는 문제점이 발생하게 되는 것이다.For example, assuming that the optical mouse pen moves from point A to point B in a specific area when a white screen without a change in light intensity is being displayed on the monitor, the optical mouse pen shoots a point of A, The optical mouse pen judges that there is no movement or movement, and therefore the position of the optical mouse pen can not be detected because the position of the optical mouse pen can not be determined because there is no change in the pixel value of the image even though the mouse actually moves to a certain pixel A problem will arise.

종래의 기술로서는 대한민국 등록특허공보 제10-0962511호에서와 같이 전자펜 마우스 및 그 동작 방법이 공지되어있으나, 이는 본 발명의 도출 과정에서 습득한 기술 정보일 뿐이고, 상술한 문제점을 개선하기 위하여 제안되는 본 발명의 출원 전에 일반 공중에게 공개된 공지 기술이라 할 수는 없다.As a conventional technique, an electronic pen mouse and an operation method thereof are known as disclosed in Korean Patent Publication No. 10-0962511, but this is merely technical information learned in the derivation process of the present invention. In order to solve the above problems, But it is not a known technology disclosed to the general public before the invention of the present invention.

상기와 같은 종래 기술의 문제점을 해결하기 위하여 안출된 본 발명은 모니터에 디스플레이되는 이미지의 전체 영역 또는 일정 부분 영역이 백색 또는 흑색이거나 화면의 픽셀값에 변동이 없는 픽셀값으로 표현될 시 상기 광마우스 펜의 이동에 따른 위치 인식률이 현저히 떨어지는 것을 방지하는 목적이 있다.According to an aspect of the present invention, there is provided an optical mouse, including a display unit for displaying an image on a monitor, The present invention has an object of preventing the position recognition rate from being remarkably deteriorated due to the movement of the pen.

이에 본 발명은 광마우스 펜이 모니터 상에 동작될 시 디스플레이되는 이미지의 전체 영역 또는 일정 부분 영역에서 랜덤하게 이미지의 변환 정보를 생성하여 뿌려줌으로서 광마우스 펜의 원활한 위치 인식을 가능하게 해주려는 목적이 있다.Accordingly, it is an object of the present invention to enable smooth recognition of an optical mouse pen by generating and distributing image conversion information at random in a whole area or a certain area of an image displayed when the optical mouse pen is operated on a monitor .

또한, 본 발명은 모니터에서 디스플레이되는 화면의 원 이미지의 픽셀값에 대하여 이미지 센서가 수학적으로 감지할 수 있는 최소한의 범위에서만 변화량을 발생하여 실제로는 사람의 시각으로는 랜덤노이즈가 거의 보이지 않는 이미지를 표현해 주기 위한 다른 목적이 있다.In addition, the present invention provides a method and apparatus for generating an image in which a random noise is hardly visible in human eyes, because a variation occurs only in a minimum range that the image sensor can mathematically detect with respect to a pixel value of an original image of a screen displayed on a monitor There is another purpose to express.

본 발명의 상기 목적은 디스플레이되는 이미지 상에서 동작하는 광마우스 펜의 위치 감지 방법에 있어서, 상기 광마우스 펜의 펜촉이 모니터의 디스플레이 화면에 접촉되어 접촉 감지 신호가 상기 모니터에 전달되는 제1단계, 상기 제1단계의 접촉 감지 신호에 의하여 상기 모니터의 랜덤노이즈 생성 수단에서 상기 디스플레이 화면의 원 이미지에 대응하는 랜덤노이즈 패턴을 생성하는 제2단계, 상기 제2단계에서 생성된 상기 랜덤노이즈 패턴을 상기 디스플레이 화면의 원 이미지에 부가한 변환 이미지가 상기 모니터에 디스플레이되는 제3단계, 상기 제3단계의 상기 모니터에 디스플레이되는 상기 변환 이미지 상에서 상기 광마우스 펜의 이동 동작에 따라 상기 광마우스 펜이 상기 변환 이미지의 픽셀값을 추출 판단하여 이동 위치를 감지하는 제4단계 및 상기 제4단계의 상기 광마우스 펜의 이동 위치 감지에 따라 상기 모니터 상의 디스플레이 화면에 상기 광마우스 펜의 위치가 표시되는 제5단계를 통하여 이루어지는 것을 특징으로 하는 디스플레이 화면상에서 동작하는 광마우스 펜의 위치변화를 감지하기 위한 모니터 구동 방법을 통하여 달성되는 것을 특징으로 달성된다.The above object of the present invention can be achieved by a method of detecting the position of an optical mouse pen operating on an image to be displayed, the method comprising: a first step in which a pen tip of the optical mouse pen is brought into contact with a display screen of a monitor, A second step of generating a random noise pattern corresponding to the original image of the display screen in the random noise generating means of the monitor by the touch sense signal of the first step, A third step in which a converted image added to the original image of the screen is displayed on the monitor; and a third step of displaying the converted image added to the original image of the screen on the monitor. According to the moving operation of the optical mouse pen on the converted image displayed on the monitor of the third step, And a fourth step of detecting the movement position And a fifth step of displaying the position of the optical mouse pen on a display screen on the monitor according to the detection of the movement position of the optical mouse pen in the fourth step. And a monitor driving method for detecting a change in position.

따라서 본 발명의 디스플레이 화면상에서 동작하는 광마우스 펜의 위치변화를 감지하기 위한 모니터 구동 방법은 모니터에 디스플레이되는 이미지의 전체 영역 또는 일정 부분 영역이 백색 또는 화면의 픽셀값에 변동이 없는 픽셀값으로 표현될 시 상기 광마우스 펜의 이동에 따른 위치 인식률이 현저히 떨어지는 것을 방지하는 효과가 있다.Therefore, the monitor driving method for detecting the change of the position of the optical mouse pen operating on the display screen of the present invention is characterized in that the whole area or the predetermined area of the image displayed on the monitor is represented by a pixel value It is possible to prevent the position recognition rate from remarkably deteriorating due to the movement of the optical mouse pen.

또한, 본 발명은 모니터에서 디스플레이되는 화면의 원 이미지의 픽셀 R G B 값에 대하여 이미지 센서가 수학적으로 감지할 수 있는 최소한의 범위에서만 변화량을 발생하여 실제로는 사람의 시각으로는 원 이미지 대비하여 변환 이미지의 화면 얼룩이 거의 보이지 않는 이미지를 표현해 주는 효과가 있다.In addition, the present invention generates a change amount only in a minimum range that the image sensor can mathematically detect for the pixel RGB value of the original image of the screen displayed on the monitor, It has the effect of expressing almost invisible images on the screen.

또한, 본 발명은 광마우스 펜이 모니터 상에 동작될 시 디스플레이되는 이미지의 전체 영역 또는 일정 부분 영역에서 랜덤하게 이미지의 변환 정보를 생성하여 뿌려줌으로서 광마우스 펜의 원활한 위치 인식을 가능하게 해주는 효과가 있다.The present invention also provides a method and apparatus for generating an image transformation information randomly in an entire area or a certain area of an image displayed when an optical mouse pen is operated on a monitor, .

도 1은 본 발명에 따른 디스플레이 화면상에서 동작하는 광마우스 펜의 위치변화를 감지하기 위한 모니터 구동 방법의 흐름도이고,
도 2는 본 발명의 일 실시예에 따른 원 이미지의 전체 영역에 대한 랜덤노이즈 패턴 및 변환 이미지를 나타내는 예시도이다.FIG. 1 is a flowchart of a monitor driving method for detecting a change in position of an optical mouse pen operating on a display screen according to the present invention,
2 is an exemplary diagram illustrating a random noise pattern and transformed image for the entire region of the original image according to an embodiment of the present invention.

본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다.The terms and words used in the present specification and claims should not be construed as limited to ordinary or dictionary terms and the inventor may appropriately define the concept of the term in order to best describe its invention It should be construed as meaning and concept consistent with the technical idea of the present invention.

따라서 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일 실시예에 불과할 뿐이고 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다.Therefore, the embodiments described in the present specification and the configurations shown in the drawings are merely the most preferred embodiments of the present invention and are not intended to represent all of the technical ideas of the present invention. Therefore, various equivalents It should be understood that water and variations may be present.

이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명하기로 한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명에 따른 디스플레이 화면상에서 동작하는 광마우스 펜의 위치변화를 감지하기 위한 모니터 구동 방법의 흐름도이다.1 is a flowchart illustrating a method of driving a monitor for detecting a change in position of an optical mouse pen operating on a display screen according to the present invention.

도시와 같이 본 발명은 디스플레이되는 이미지 상에서 동작하는 광마우스 펜의 위치 감지 방법에 있어서, 상기 광마우스 펜의 접촉 감지 신호가 모니터에 전달되는 제1단계(S100), 상기 모니터에서 랜덤노이즈 패턴을 생성하는 제2단계(S200), 상기 모니터에서 변환 이미지가 디스플레이되는 제3단계(S300), 상기 광마우스 펜이 변환 이미지의 화면 픽셀값을 추출 판단하여 이동 위치를 감지하는 제4단계(S400) 및 상기 광마우스 펜의 위치가 상기 모니터에 표시되는 제5단계(S500)를 통하여 이루어진다.As shown in the figure, the present invention provides a method of detecting the position of an optical mouse pen that operates on an image to be displayed, the method comprising: a first step (S100) of transmitting a contact detection signal of the optical mouse pen to a monitor; A third step S300 of displaying the transformed image on the monitor, a fourth step S400 of detecting the movement position by extracting the screen pixel value of the transformed image by the optical mouse pen, And a fifth step (S500) in which the position of the optical mouse pen is displayed on the monitor.

이에 본 발명은 디스플레이 화면상에서 동작하는 광마우스 펜과 모니터 장치를 포함하여 구성되어진다.Accordingly, the present invention comprises an optical mouse pen and a monitor device that operate on a display screen.

상기 광마우스 펜은 모니터에 직접 접촉하여 동작되는 모니터 접촉형 광마우스로서, 사용자의 사용이 용이하도록 상기 광마우스 펜의 펜촉이 모니터의 디스플레이 화면에 접촉되어 접촉 감지 신호가 발생될 수 있는 펜 타입으로 이루어진다.The optical mouse pen is a monitor-type optical mouse operated by being in direct contact with a monitor. The optical mouse pen is a pen type in which a pen touch of the optical mouse pen is brought into contact with a display screen of a monitor .

그러나 일반적인 광마우스가 모니터에 접촉되는 감지 신호가 발생할 수 있으면 범용적인 광마우스에서도 본 발명이 적용되어질 수 있다. 또한, 광마우스의 기능을 갖는 전자펜에도 적용되어질 수 있다.However, the present invention can be applied to a general-purpose optical mouse as long as a detection signal that a general optical mouse contacts the monitor can be generated. It can also be applied to an electronic pen having the function of an optical mouse.

또한, 상기 광마우스 펜은 내부에 적색 파장의 광을 조사하는 발광부와 상기 광의 반사로 인한 모니터 화면의 영상을 획득하는 이미지 센서부 및 상기 이미지 센서부의 영상 패턴을 분석하고 처리하여 상기 영상 패턴들이 이전의 영상과 비교해 어떻게 움직였는지 파악하는 기능을 수행하는 제어부를 포함한다. 이는 일반적인 광마우스의 구성 및 기능과 유사할 수 있다.The optical mouse pen may include a light emitting unit for emitting light of a red wavelength, an image sensor unit for acquiring an image of a monitor screen due to reflection of the light, and an image sensor unit for analyzing and processing the image pattern of the image sensor unit, And a control unit for performing a function of determining how the image has moved compared with the previous image. This can be similar to the configuration and function of a general optical mouse.

상기 모니터 장치는 TV나 컴퓨터, 스마트폰 및 태플릿 PC 등에서 영상 정보를 재현할 때 쓰는 디스플레이 장치이다. 본 발명의 상기 모니터는 디스플레이 기능뿐만 아니라 운용 제어를 담당하는 컴퓨터 장치를 포함하는 것을 의미한다.The monitor device is a display device for reproducing image information in a TV, a computer, a smart phone, or a tablet PC. The monitor of the present invention means not only a display function but also a computer device for controlling operation.

이때, 상기 광마우스 펜과 상기 모니터는 유선 방식 또는 무선 방식 중의 어느 하나의 방식을 통하여 상호 연결되어 동작할 수 있도록 유선 방식 또는 무선 방식 중의 어느 하나의 방식을 위한 통신 모듈을 포함한다.In this case, the optical mouse pen and the monitor include a communication module for either a wired or wireless mode so that the optical mouse pen and the monitor can operate in a wired or wireless manner.

먼저 상기 제1단계(S100)는 상기 광마우스 펜의 펜촉이 모니터의 디스플레이 화면에 접촉되어 접촉 감지 신호가 상기 모니터에 전달되는 단계이다.First, in the first step S100, the pen tip of the optical mouse pen is brought into contact with the display screen of the monitor, and a touch detection signal is transmitted to the monitor.

그리고 상기 제2단계(S200)는 상기 제1단계(S100)의 접촉 감지 신호에 의하여 상기 모니터의 랜덤노이즈 생성 수단에서 상기 디스플레이 화면의 원 이미지에 대응하는 랜덤노이즈 패턴을 생성하는 단계이다. 상기 원 이미지란 모니터에서 디스플레이되는 원래(Original)의 일반 이미지를 지칭한다.The second step S200 is a step of generating a random noise pattern corresponding to the original image of the display screen in the random noise generating means of the monitor by the touch sensing signal of the first step S100. The original image refers to a general image of an original displayed on a monitor.

상기 랜덤노이즈 생성 수단이란 상기 모니터에 포함되는 운용 제어 프로세스에 의하여 불규칙한 패턴 이미지를 생성하는 프로그램 또는 하드웨어적인 임베디드 생성 수단을 지칭하는 것으로서, 상기 랜덤노이즈 생성 수단은 상기 디스플레이되는 화면의 원 이미지의 전체 영역 또는 일정 부분 영역 중의 어느 하나의 영역에 대응하여 랜덤노이즈 패턴을 생성하는 역할을 하는 것이다.The random noise generating means refers to a program or hardware embedded generating means for generating an irregular pattern image by an operation control process included in the monitor, wherein the random noise generating means generates the random noise generating means, Or to generate a random noise pattern corresponding to any one of the predetermined partial regions.

상기 일정 부분 영역은 상기 디스플레이되는 화면의 원 이미지에서 픽셀 간의 픽셀값이 변화가 없이 동일한 값으로 표현되는 일정 범위 이상의 픽셀을 갖는 이미지 영역이다.The predetermined partial area is an image area having a certain range of pixels in which the pixel value between pixels in the original image of the displayed screen is represented by the same value without change.

이에 상기 랜덤노이즈 생성 수단은 상기 원 이미지의 전체 영역 또는 일정 부분 영역의 사이즈에 해당하는 가로 세로 픽셀 영역에서 랜덤하게 정해지는 픽셀의 해당 R G B 광량값에 미세하게 변화를 주는 광량값을 갖는 랜덤노이즈 패턴을 생성하는 것이다.The random noise generating unit may generate a random noise pattern having a light quantity value that finely changes the corresponding RGB light quantity value of a pixel randomly determined in the horizontal and vertical pixel areas corresponding to the size of the entire area or the predetermined partial area of the original image. .

상기 미세하게 변화를 주는 광량값이란 상기 디스플레이되는 화면의 원 이미지의 픽셀 R G B 값에 대하여 0.1% 내지 1% 이내의 범위에서 상기 픽셀 R G B 값이 불규칙적으로 변화를 갖도록 설정하여 상기 랜덤노이즈 패턴을 생성하는 것을 의미한다.The light intensity value giving a minute change is generated by setting the pixel RGB value to be irregularly changed within a range of 0.1% to 1% with respect to a pixel RGB value of the original image of the displayed screen to generate the random noise pattern .

상기 제3단계(S300)는 상기 제2단계(S200)에서 생성된 상기 랜덤노이즈 패턴을 갖는 이미지를 상기 디스플레이 화면의 원 이미지에 부가한 변환 이미지로 상기 모니터에 디스플레이하는 단계이다.The third step S300 is a step of displaying the image having the random noise pattern generated in the second step S200 on the monitor as a transformed image added to the original image of the display screen.

예를 들어 상기 픽셀 R G B 광량값에 미세하게 변화를 주는 이미지의 변화량은 사람의 시각이 감지할 수 없으나 상기 광마우스의 이미지 센서가 픽셀값을 비교할 때 수학적으로는 감지할 수 있어야 하는 변화량으로, 보통 8비트의 백색 이미지의 광량값이 256이라면 여기에 약 1%의 광량변화를 주게 되면 원래 256인 픽셀 밝기 값은 253정도의 값으로 디스플레이가 되는 것이다.For example, the amount of change in the image that gives a slight change to the RGB RGB light amount value is a change amount that can not be detected by the human eye but can be mathematically detected when the image sensor of the optical mouse compares pixel values. If the amount of light of an 8-bit white image is 256, if the amount of light is changed by about 1%, the original 256 pixel brightness value is displayed as a value of about 253.

또는 원 이미지의 특정 픽셀값의 R G B값이 (R,G,B)=(200,200,200)이라면 랜덤노이즈 패턴의 이미지를 1%로 설정하면 (R,G,B)=(200*0.99, 200*0.99, 200*0.99) =(198,198,198)로 변경된 픽셀값을 생성할 수 있게 되는 것이다.(R, G, B) = (200 * 0.99, 200 * 0.99) if the RGB value of a specific pixel value of the original image is (R, G, B) = (200,200,200) , 200 * 0.99) = (198, 198, 198).

상기 제4단계(S400)는 상기 제3단계(S300)의 상기 모니터에 디스플레이되는 상기 변환 이미지 상에서 상기 광마우스 펜의 이동 동작에 따라 상기 광마우스 펜이 상기 변환 이미지의 픽셀값을 추출 판단하여 이동 위치를 감지하는 단계이다.In the fourth step S400, the optical mouse pen extracts the pixel value of the converted image according to the movement of the optical mouse pen on the converted image displayed on the monitor of the third step S300, And detecting the position.

이후 상기 제5단계(S500)는 상기 제4단계(S400)의 상기 광마우스 펜의 이동 위치 감지에 따라 상기 모니터 상의 디스플레이 화면에 상기 광마우스 펜의 위치가 표시되는 단계이다.The fifth step S500 is a step of displaying the position of the optical mouse pen on the display screen on the monitor according to the detection of the movement position of the optical mouse pen in the fourth step S400.

도 2는 본 발명의 일 실시예에 따른 원 이미지의 전체 영역에 대한 랜덤노이즈 패턴 및 변환 이미지를 나타내는 예시도이다.2 is an exemplary diagram illustrating a random noise pattern and transformed image for the entire region of the original image according to an embodiment of the present invention.

도시의 원 이미지는 모니터에서 디스플레이되는 원래(Original)의 일반 이미지이며, 도시의 랜덤노이즈 패턴은 상기 제2단계(S200)에 의하여 생성되는 불규칙적인 패턴을 갖는 이미지의 예시를 든 것이고, 도시의 변환 이미지는 상기 랜덤노이즈 패턴이 상기 원 이미지와 결합하거나 변환되어 모니터에 디스플레이되는 것을 나타내고 있는 것이다.The original image of the city is an ordinary image of the original displayed on the monitor and the random noise pattern of the city is an example of an image having an irregular pattern generated by the second step S200, The image indicates that the random noise pattern is combined with the original image or converted and displayed on the monitor.

이때, 도2에서 예시되는 변환 이미지는 실제로는 사람의 시각으로는 얼룩이 거의 보이지 않는 이미지이나, 본 발명의 설명을 위하여 얼룩과 같은 이미지로 표현되었다.At this time, the transformed image illustrated in FIG. 2 is actually an image that is almost invisible to human vision, or an image such as a stain for explaining the present invention.

그러므로 본 발명은 상기 원 이미지의 전체 영역 또는 일정 부분 영역이 백색 또는 흑색이거나 또는 화면의 픽셀값에 변동이 없을 시 상기 광마우스 펜의 이동에 따른 위치 인식률이 현저히 떨어지는 것을 방지하기 위함이다.Therefore, the present invention is intended to prevent the position recognition rate from being remarkably deteriorated due to the movement of the optical mouse pen when the whole area or the certain area of the original image is white or black or there is no change in the pixel value of the screen.

본 발명은 이상에서 살펴본 바와 같이 바람직한 실시예를 들어 도시하고 설명하였으나, 상기한 실시예에 한정되지 아니하며 본 발명의 정신을 벗어나지 않는 범위 내에서 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변경과 수정이 가능할 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is clearly understood that the same is by way of illustration and example only and is not to be taken by way of limitation, Various changes and modifications will be possible.

Claims (5)

디스플레이되는 이미지 상에서 동작하는 광마우스 펜의 위치 감지 방법에 있어서,
상기 광마우스 펜의 펜촉이 모니터의 디스플레이 화면에 접촉되어 접촉 감지 신호가 상기 모니터에 전달되는 제1단계,
상기 제1단계의 접촉 감지 신호에 의하여 상기 모니터의 랜덤노이즈 생성 수단에서 상기 디스플레이 화면의 원 이미지에 대응하는 랜덤노이즈 패턴을 생성하는 제2단계,
상기 제2단계에서 생성된 상기 랜덤노이즈 패턴을 상기 디스플레이 화면의 원 이미지에 부가한 변환 이미지가 상기 모니터에 디스플레이되는 제3단계,
상기 제3단계의 상기 모니터에 디스플레이되는 상기 변환 이미지 상에서 상기 광마우스 펜의 이동 동작에 따라 상기 광마우스 펜이 상기 변환 이미지의 픽셀값을 추출 판단하여 이동 위치를 감지하는 제4단계,
상기 제4단계의 상기 광마우스 펜의 이동 위치 감지에 따라 상기 모니터 상의 디스플레이 화면에 상기 광마우스 펜의 위치가 표시되는 제5단계를 통하여 이루어지는 것을 특징으로 하는 디스플레이 화면상에서 동작하는 광마우스 펜의 위치변화를 감지하기 위한 모니터 구동 방법.
A method of detecting the position of an optical mouse pen operating on an image to be displayed,
A first step in which a pen tip of the optical mouse pen is brought into contact with a display screen of a monitor and a touch detection signal is transmitted to the monitor,
A second step of generating a random noise pattern corresponding to the original image of the display screen in the random noise generating means of the monitor by the touch sense signal of the first step,
A third step of displaying on the monitor a converted image obtained by adding the random noise pattern generated in the second step to the original image of the display screen,
A fourth step of the optical mouse pen extracting and determining a pixel value of the converted image according to a moving operation of the optical mouse pen on the converted image displayed on the monitor of the third step,
Wherein the position of the optical mouse pen is displayed on a display screen on the monitor in accordance with the detection of the movement position of the optical mouse pen in the fourth step. A method of driving a monitor to detect a change.
제1 항에 있어서,
상기 광마우스 펜과 상기 모니터는 유선 방식 또는 무선 방식 중의 어느 하나의 방식을 통하여 연결되어 상호 연결되어 동작하는 것을 특징으로 하는 디스플레이 화면상에서 동작하는 광마우스 펜의 위치변화를 감지하기 위한 모니터 구동 방법.
The method according to claim 1,
Wherein the optical mouse pen and the monitor are connected to each other through a wire system or a wireless system and are connected to each other to operate the monitor.
제1 항에 있어서,
상기 제2단계에서 생성되는 상기 랜덤노이즈 패턴은 상기 디스플레이되는 화면의 원 이미지의 전체 영역 또는 일정 부분 영역 중의 어느 하나의 영역에 대응하여 생성되는 것을 특징으로 하는 디스플레이 화면상에서 동작하는 광마우스 펜의 위치변화를 감지하기 위한 모니터 구동 방법.
The method according to claim 1,
Wherein the random noise pattern generated in the second step is generated in correspondence with any one of an entire area of the original image of the displayed screen and a certain area of the screen. A method of driving a monitor to detect a change.
제3 항에 있어서,
상기 일정 부분 영역은 상기 디스플레이되는 화면의 원 이미지에서 픽셀 간의 픽셀값이 변화가 없이 동일한 값으로 표현되는 일정 범위 이상의 픽셀 영역인 것을 특징으로 하는 디스플레이 화면상에서 동작하는 광마우스 펜의 위치변화를 감지하기 위한 모니터 구동 방법.
The method of claim 3,
Wherein the predetermined portion region is a pixel region of a certain range or more where a pixel value between pixels in the original image of the displayed screen is represented by the same value without change, A method for driving a monitor.
제1 항에 있어서,
상기 랜덤노이즈 생성 수단은 상기 디스플레이되는 화면의 원 이미지의 픽셀 R G B 값에 대하여 0.1% 내지 1% 이내의 범위에서 상기 픽셀 R G B 값이 불규칙적으로 변화를 갖도록 상기 랜덤노이즈 패턴을 생성하는 것을 특징으로 하는 디스플레이 화면상에서 동작하는 광마우스 펜의 위치변화를 감지하기 위한 모니터 구동 방법.The method according to claim 1,
Wherein the random noise generating means generates the random noise pattern such that the pixel RGB values vary irregularly within a range of 0.1% to 1% with respect to pixel RGB values of the original image of the displayed screen. A monitor driving method for detecting a change in position of an optical mouse pen operating on a screen.
KR1020160053156A 2016-04-29 2016-04-29 Monitor Drive Method for Detecting a Change of the Position of the Optical Pen Mouse Operated on a Display Screen KR20170124134A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160053156A KR20170124134A (en) 2016-04-29 2016-04-29 Monitor Drive Method for Detecting a Change of the Position of the Optical Pen Mouse Operated on a Display Screen

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160053156A KR20170124134A (en) 2016-04-29 2016-04-29 Monitor Drive Method for Detecting a Change of the Position of the Optical Pen Mouse Operated on a Display Screen

Publications (1)

Publication Number Publication Date
KR20170124134A true KR20170124134A (en) 2017-11-10

Family

ID=60386520

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160053156A KR20170124134A (en) 2016-04-29 2016-04-29 Monitor Drive Method for Detecting a Change of the Position of the Optical Pen Mouse Operated on a Display Screen

Country Status (1)

Country Link
KR (1) KR20170124134A (en)

Similar Documents

Publication Publication Date Title
CN110308789B (en) Method and system for mixed reality interaction with peripheral devices
US9639178B2 (en) Optical stylus
US10915186B2 (en) Projection video display apparatus and video display method
US8610670B2 (en) Imaging and display apparatus, information input apparatus, object detection medium, and object detection method
KR101643496B1 (en) Context-driven adjustment of camera parameters
US9507437B2 (en) Algorithms, software and an interaction system that support the operation of an on the fly mouse
US20140247216A1 (en) Trigger and control method and system of human-computer interaction operation command and laser emission device
US20130127705A1 (en) Apparatus for touching projection of 3d images on infrared screen using single-infrared camera
JP4270248B2 (en) Display imaging apparatus, information input apparatus, object detection program, and object detection method
JP2009116778A (en) Display-and-image-pickup device, object detection program, and object detection method
US8659577B2 (en) Touch system and pointer coordinate detection method therefor
US9958965B2 (en) Dual mode optical navigation device and mode switching method thereof
JPWO2010047256A1 (en) IMAGING DEVICE, DISPLAY IMAGING DEVICE, AND ELECTRONIC DEVICE
US20130127704A1 (en) Spatial touch apparatus using single infrared camera
US11682183B2 (en) Augmented reality system and anchor display method thereof
JP4270247B2 (en) Display imaging apparatus, object detection program, and object detection method
KR101695728B1 (en) Display system including stereo camera and position detecting method using the same
KR20170124134A (en) Monitor Drive Method for Detecting a Change of the Position of the Optical Pen Mouse Operated on a Display Screen
EP2249229A1 (en) Non-contact mouse apparatus and method for operating the same
US10969883B2 (en) Optical navigation device and system with changeable smoothing
KR20130137507A (en) Interaction providing apparatus and method for wearable display device
KR20190069023A (en) Method of Providing Touchless Input Interface Based on Hand Recognition and The Apparatus Applied Thereto
JP4788755B2 (en) Display imaging apparatus, object detection program, and object detection method
CN113703161B (en) Augmented reality system and anchoring display method thereof
KR102300290B1 (en) Smart mouse that works in conjunction with finger movement using camera and method for controlling mouse cursor using the same

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment