KR100907286B1 - Mouse pointer control method for using projection keyboard - Google Patents

Mouse pointer control method for using projection keyboard Download PDF

Info

Publication number
KR100907286B1
KR100907286B1 KR1020070120870A KR20070120870A KR100907286B1 KR 100907286 B1 KR100907286 B1 KR 100907286B1 KR 1020070120870 A KR1020070120870 A KR 1020070120870A KR 20070120870 A KR20070120870 A KR 20070120870A KR 100907286 B1 KR100907286 B1 KR 100907286B1
Authority
KR
South Korea
Prior art keywords
keyboard
mouse pointer
projection
template
keyboard template
Prior art date
Application number
KR1020070120870A
Other languages
Korean (ko)
Other versions
KR20090054142A (en
Inventor
안재영
Original Assignee
(주)디앤티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)디앤티 filed Critical (주)디앤티
Priority to KR1020070120870A priority Critical patent/KR100907286B1/en
Publication of KR20090054142A publication Critical patent/KR20090054142A/en
Application granted granted Critical
Publication of KR100907286B1 publication Critical patent/KR100907286B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0421—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)

Abstract

본 발명은 프로젝션 키보드를 이용한 마우스 포인터 제어 방법에 관한 것으로서, 특히 키보드 템플릿을 투사하는 프로젝션 모듈과, 상기 키보드 템플릿이 투사된 표면 바로 위를 수평으로 검색하는 IR 모듈과, 상기 키보드 템플릿을 촬영하여 이미지화시키는 센서 모듈과, 이들을 통해 입력되는 이미지를 통해 입력 이벤트를 발생하는 컨트롤러를 포함하는 프로젝션 키보드의 제어 방법에 있어서, 상기 키보드 템플릿 상에서 사용자의 손이 최초로 접촉된 좌표와 이동되는 좌표를 이미지 비교를 통해 좌표 이동 거리 및 방향을 감지하는 이동 감지 단계와; 상기 키보드 템플릿의 가로×세로 비율과, 디스플레이 장치의 가로×세로 비율에 따라 감지된 좌표 이동거리를 보정하는 보정 단계; 및 좌표 이동 방향 및 보정된 좌표 이동거리에 따라 마우스 포인터 제어 신호를 출력하여 상기 디스플레이 장치 상의 마우스 포인터를 이동시키는 마우스 포인터 이동 단계로 이루어지는 것을 특징으로 한다.The present invention relates to a method of controlling a mouse pointer using a projection keyboard, and more particularly, a projection module for projecting a keyboard template, an IR module for horizontally searching directly above the surface on which the keyboard template is projected, and photographing the keyboard template. In the control method of the projection keyboard comprising a sensor module for generating a sensor and a controller for generating an input event through the image input through the image, the coordinates of the user's first contact with the coordinates of the user's hand on the keyboard template through image comparison A movement detecting step of detecting a coordinate movement distance and a direction; A correction step of correcting the detected coordinate movement distance according to the horizontal x vertical ratio of the keyboard template and the horizontal x vertical ratio of the display device; And a mouse pointer movement step of outputting a mouse pointer control signal according to the coordinate movement direction and the corrected coordinate movement distance to move the mouse pointer on the display device.

상기와 같은 본 발명에 따르면 키보드 템플릿 상에서 이동되는 물체의 거리를 계산하고, 이를 화면 비율로 조정한 후 마우스 포인터를 이동시키도록 함으로써 프로젝션 키보드를 이용하여 키입력 및 마우스 포인터를 이동시킬 수 있다.According to the present invention as described above it is possible to move the key input and the mouse pointer using the projection keyboard by calculating the distance of the object moving on the keyboard template, adjust it to the aspect ratio and then move the mouse pointer.

프로젝션, 가상, 키보드, 마우스, 포인터 Projection, virtual, keyboard, mouse, pointer

Description

프로젝션 키보드를 이용한 마우스 포인터 제어 방법{MOUSE POINTER CONTROL METHOD FOR USING PROJECTION KEYBOARD}MOUSE POINTER CONTROL METHOD FOR USING PROJECTION KEYBOARD}

본 발명은 프로젝션 키보드의 제어 방법에 관한 것으로서, 상세하게는 키보드 템플릿 상에서 이동되는 물체의 거리를 계산하고, 이를 화면 비율로 조정한 후 마우스 포인터를 이동시키도록 하는 프로젝션 키보드를 이용한 마우스 포인터 제어 방법에 관한 것이다.The present invention relates to a method of controlling a projection keyboard, and more particularly, to a method of controlling a mouse pointer using a projection keyboard that calculates a distance of an object moved on a keyboard template, adjusts it to an aspect ratio, and then moves a mouse pointer. It is about.

현재 일반적으로 사용되고 있는 퍼스널 컴퓨터용의 키보드는 가정이나 사무실의 고정된 위치에서 사용할 수밖에 없는 한계성을 갖고 있다. 휴대형으로 개발되어 판매되고 있는 대표적인 휴대 전자 기기들인 PDA, 핸드폰, PMP 등의 입력 장치는 제품의 크기에 의한 제한성 때문에 사용자들의 불편한 입력 방법을 강요하고 있는 실정이다.Keyboards for personal computers, which are generally used today, have a limitation that they can only be used in a fixed position in a home or an office. Representative portable electronic devices, such as PDAs, mobile phones, and PMPs, which are developed and sold in a portable type, are forcing users to enter an inconvenient input method due to limitations due to the size of the product.

이러한 문제를 해결하기 위하여 프로젝션 키보드(또는 가상 키보드)가 개발되었고, 프로젝션 키보드는 전자 기기들이 소형화, 휴대용으로 발전하면서 필요로 하게 된, 크기와 장소를 제한 받지 않고 사용할 수 있도록 고안된, 전자기기와 사용자 간에 의사 전달을 할 수 있는 효율적인 인터페이스 장치(Interface machine) 이다.In order to solve this problem, a projection keyboard (or virtual keyboard) has been developed, which is designed to be used without limitation in size and location, which is required for electronic devices to be miniaturized and portable. It is an efficient interface machine that can communicate with each other.

이러한 프로젝션 키보드는 가시광선으로 키보드 템플릿(또는 자판본)을 형성하고, 상기 키보드 템플릿의 특정영역에 사용자의 손이 위치할 때 사용자의 손이 놓여진 위치를 결정한 후, 이것에 기초하여 사용자가 입력하고자 하는 문자를 결정하여 최종적으로 결정된 문자를 디스플레이시키게 된다.Such a projection keyboard forms a keyboard template (or keyboard) with visible light, determines the position of the user's hand when the user's hand is located in a specific area of the keyboard template, and then inputs the user's input based on this. To determine the character to be displayed and finally display the determined character.

도 1을 참조하면, 상기 프로젝션 키보드(10)는 프로젝션 모듈(11)과, IR 모듈(13)과, 센서 모듈(15) 및 컨트롤러(17)로 구성된다.Referring to FIG. 1, the projection keyboard 10 includes a projection module 11, an IR module 13, a sensor module 15, and a controller 17.

먼저, 프로젝션 모듈(11)은 굴곡이 없는 표면에 미리 디자인된 키보드 템플릿(20)을 투사한다. 이때, 프로젝션 모듈(11)은 광 효율이 높은 저 출력 적색 레이저 광원을 사용하여 용도별로 설계된 키보드 템플릿(20)을 투사한다.First, the projection module 11 projects the predesigned keyboard template 20 on a surface that is not curved. In this case, the projection module 11 projects the keyboard template 20 designed for each use by using a low output red laser light source having high light efficiency.

그리고, IR 모듈(13)은 IR(Infra-Red) 광으로 된 경계면이 키보드 템플릿(20)이 투사된 표면 바로 위를 수평으로 스캔하고, 반사되는 IR 광을 IF 필터를 통해 필터링하여 센싱한다. IR 광은 인간의 눈에는 보이지 않지만, 표면 위 2~3mm 위를 짧은 간격으로 스캔한다.In addition, the IR module 13 horizontally scans the interface of the IR (Infra-Red) light just above the surface on which the keyboard template 20 is projected, and senses the reflected IR light by filtering through an IF filter. IR light is invisible to the human eye, but scans at short intervals 2-3 mm above the surface.

또한, 센서 모듈(15)은 키보드 템플릿(20)을 촬영하여 이미지화시키는 CMOS 카메라가 탑재된다.In addition, the sensor module 15 is equipped with a CMOS camera for photographing and imaging the keyboard template 20.

또, 컨트롤러(17)는 센서 모듈(15)로부터 입력되는 센싱 신호 및 이미지를 분석하여 키 입력을 인식하고, 이를 디스플레이 장치에 전달한다.In addition, the controller 17 analyzes a sensing signal and an image input from the sensor module 15, recognizes a key input, and transfers the same to the display device.

그러나, 이러한 종래의 프로젝션 키보드는 단순히 키 입력만으로 이용할 수 있기 때문에 마우스 포인터를 이동시키기 위해서는 별도로 마우스를 구비해야만 하 는 문제점이 있다.However, since such a conventional projection keyboard can be used only by key input, there is a problem that a mouse must be provided separately to move the mouse pointer.

본 발명은 상기와 같은 문제점을 해결하기 위한 것으로, 키보드 템플릿 상에서 이동되는 물체의 거리를 계산하고, 이를 화면 비율로 조정한 후 마우스 포인터를 이동시키도록 함으로써 프로젝션 키보드를 이용하여 키입력 및 마우스 포인터를 이동시킬 수 있도록 하는 프로젝션 키보드를 이용한 마우스 포인터 제어 방법을 제공하는데 그 목적이 있다.The present invention is to solve the above problems, it is to calculate the distance of the object moving on the keyboard template, adjust it to the aspect ratio and then move the mouse pointer to the key input and mouse pointer using the projection keyboard It is an object of the present invention to provide a mouse pointer control method using a projection keyboard that can be moved.

상기와 같은 목적을 달성하기 위한 본 발명의 특징은,Features of the present invention for achieving the above object,

키보드 템플릿을 투사하는 프로젝션 모듈과, 상기 키보드 템플릿이 투사된 표면 바로 위를 수평으로 검색하는 IR 모듈과, 상기 키보드 템플릿을 촬영하여 이미지화시키는 센서 모듈과, 이들을 통해 입력되는 이미지를 통해 입력 이벤트를 발생하는 컨트롤러를 포함하는 프로젝션 키보드의 제어 방법에 있어서, 상기 키보드 템플릿 상에서 사용자의 손이 최초로 접촉된 좌표와 이동되는 좌표를 이미지 비교를 통해 좌표 이동 거리 및 방향을 감지하는 이동 감지 단계와; 상기 키보드 템플릿의 가로×세로 비율과, 디스플레이 장치의 가로×세로 비율에 따라 감지된 좌표 이동거리를 보정하는 보정 단계; 및 좌표 이동 방향 및 보정된 좌표 이동거리에 따라 마우스 포인터 제어 신호를 출력하여 상기 디스플레이 장치 상의 마우스 포인터를 이동시키는 마우스 포인터 이동 단계로 이루어지는 것을 특징으로 한다.A projection module for projecting a keyboard template, an IR module for horizontally retrieving directly above the surface on which the keyboard template is projected, a sensor module for photographing and imaging the keyboard template, and generating input events through the images inputted through them A control method of a projection keyboard, comprising: a movement detecting step of detecting a coordinate movement distance and a direction by comparing an image of coordinates that are moved with the first touch of a user's hand on the keyboard template; A correction step of correcting the detected coordinate movement distance according to the horizontal x vertical ratio of the keyboard template and the horizontal x vertical ratio of the display device; And a mouse pointer movement step of outputting a mouse pointer control signal according to the coordinate movement direction and the corrected coordinate movement distance to move the mouse pointer on the display device.

여기에서, 상기 이동 감지 단계는 상기 키보드 템플릿을 연속적으로 촬영하여 이미지화시킨 후 촬영된 이미지 프레임을 기본 이미지 프레임과 상호 비교하여 좌표 이동거리를 추출한다.Here, in the movement detecting step, the keyboard template is continuously photographed and imaged, and then the coordinated moving distance is extracted by comparing the photographed image frame with the basic image frame.

여기에서 또한, 상기 프로젝션 키보드는 키입력 기능과 마우스 포인터 기능을 상호 절환시키는 기능 키가 구비된다.Here, the projection keyboard is provided with a function key for switching between a key input function and a mouse pointer function.

여기에서 또, 상기 프로젝션 키보드는 상기 마우스 포인터 이동 가능 영역을 상기 키보드 템플릿의 영역 내에서 설정한다.Here, the projection keyboard sets the mouse pointer movable area within an area of the keyboard template.

상기와 같이 구성되는 본 발명인 프로젝션 키보드를 이용한 마우스 포인터 제어 방법에 따르면, 키보드 템플릿 상에서 이동되는 물체의 거리를 계산하고, 이를 화면 비율로 조정한 후 마우스 포인터를 이동시키도록 함으로써 프로젝션 키보드를 이용하여 키입력 및 마우스 포인터를 이동시킬 수 있어 사용자에게 편의를 제공할 수 있는 이점이 있다.According to the mouse pointer control method using the projection keyboard of the present invention configured as described above, by using the projection keyboard to calculate the distance of the object moving on the keyboard template, adjust it to the aspect ratio, and then move the mouse pointer. The input and the mouse pointer can be moved to provide a convenience to the user.

이하, 본 발명에 따른 마우스 포인터 제어가 가능한 프로젝션 키보드의 구성을 첨부된 도면을 참조하여 상세하게 설명하면 다음과 같다.Hereinafter, with reference to the accompanying drawings the configuration of a projection keyboard capable of controlling the mouse pointer according to the present invention will be described in detail.

하기에서 본 발명을 설명함에 있어, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략할 것이다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라 질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.In the following description of the present invention, if it is determined that a detailed description of a related known function or configuration may unnecessarily obscure the subject matter of the present invention, the detailed description thereof will be omitted. In addition, terms to be described below are terms defined in consideration of functions in the present invention, which may vary according to intention or custom of a user or an operator. Therefore, the definition should be made based on the contents throughout the specification.

도 2는 본 발명에 따른 프로젝션 키보드를 이용한 마우스 포인터 제어 방법을 구현하기 위한 프로젝션 키보드의 구성을 개략적으로 나타낸 블록도이다.2 is a block diagram schematically illustrating a configuration of a projection keyboard for implementing a mouse pointer control method using a projection keyboard according to the present invention.

도 2를 참조하면, 본 발명에 따른 프로젝션 키보드를 이용한 마우스 포인터 제어 방법을 구현하기 위한 프로젝션 키보드(100)는, 프로젝션 모듈(11)과, IR 모듈(13)과, 센서 모듈(15), 메모리(110)와, 기능 키(120) 및 컨트롤러(130)로 구성된다.2, a projection keyboard 100 for implementing a mouse pointer control method using a projection keyboard according to the present invention includes a projection module 11, an IR module 13, a sensor module 15, and a memory. 110, a function key 120, and a controller 130.

먼저, 프로젝션 모듈(11)과, IR 모듈(13) 및 센서 모듈(15)은 종래와 동일 동작을 수행하므로 동일 부호를 부여하고, 그 중복 설명은 생략한다. 그 외에 온/오프 스위치와, 스피커와, 무선 통신 모듈 및 배터리 등의 구성은 공지의 구성으로 도시 및 그 설명을 생략한다.First, since the projection module 11, the IR module 13, and the sensor module 15 perform the same operations as in the prior art, the same reference numerals are assigned, and the description thereof will be omitted. In addition, the structure of an on / off switch, a speaker, a wireless communication module, a battery, etc. is well-known and abbreviate | omits illustration and description.

그리고, 메모리(110)는 시스템 구동에 필요한 각종 정보와 데이터가 저장된다.The memory 110 stores various kinds of information and data necessary for driving the system.

또한, 기능 키(120)는 키입력 기능과 마우스 포인터 기능을 상호 절환시키는 데, 별도로 설치하거나 또는 특정 스위치(예를 들면, 온/오프 스위치)에 기능을 부여할 수도 있다.In addition, the function key 120 may switch the key input function and the mouse pointer function mutually, or may be installed separately or may provide a function to a specific switch (for example, an on / off switch).

또한, 컨트롤러(130)는 시스템을 전반적으로 제어하고, 키보드 템플릿 상에서 사용자의 손이 최초로 접촉된 좌표와 이동되는 좌표를 이용하는 경우 좌표 이동거리 및 방향을 통해 디스플레이 장치 상의 마우스 포인터를 이동시킨다. 여기에 서, 컨트롤러(130)는 센서 모듈(15)의 CMOS 카메라를 통해 키보드 템플릿을 연속적으로 촬영하여 이미지화시킨 후 촬영된 이미지 프레임을 기본 이미지 프레임과 상호 비교하여 좌표 이동거리를 추출한다. 여기에서 또한, 컨트롤러(130)는 키보드 템플릿의 영역 내에서 좌표 이동으로 마우스 포인터를 디스플레이 장치(140) 상에서 자유롭게 이동시킬 수 있도록 마우스 포인터 이동 가능 영역을 키보드 템플릿(20)의 영역 내에서 설정한다.In addition, the controller 130 controls the system as a whole and moves the mouse pointer on the display device through the coordinate moving distance and direction when using the coordinates in which the user's hand first touches and moves on the keyboard template. Here, the controller 130 continuously photographs and images the keyboard template through the CMOS camera of the sensor module 15 and extracts the coordinate movement distance by comparing the photographed image frame with the basic image frame. Here, the controller 130 sets the mouse pointer movable area within the area of the keyboard template 20 so that the mouse pointer can be moved freely on the display device 140 by the coordinate movement within the area of the keyboard template.

이하, 본 발명에 따른 프로젝션 키보드를 이용한 마우스 포인터 제어 방법을 첨부된 도면을 참조하여 상세하게 설명하면 다음과 같다.Hereinafter, a mouse pointer control method using a projection keyboard according to the present invention will be described in detail with reference to the accompanying drawings.

도 3은 본 발명에 따른 프로젝션 키보드를 이용한 마우스 포인터 제어 방법의 동작 흐름도이고, 도 4는 본 발명에 따라 키보드 템플릿의 영역 내에서 좌표 이동으로 디스플레이 장치 상에서 마우스 포인터의 이동을 설명하기 위한 도면이다.3 is a flowchart illustrating a method of controlling a mouse pointer using a projection keyboard according to the present invention, and FIG. 4 is a view for explaining a movement of a mouse pointer on a display device by moving coordinates within an area of a keyboard template according to the present invention.

먼저, 기능 키(120)가 동작되어 마우스 포인터 기능이 선택되면(S101, S102), 컨트롤러(130)는 센서 모듈(15)로부터 입력되는 센싱 신호 및 이미지를 분석하여 키 입력을 인식할 수 있도록 대기한다.First, when the function key 120 is operated to select a mouse pointer function (S101 and S102), the controller 130 analyzes a sensing signal and an image input from the sensor module 15 and waits to recognize a key input. do.

이러한 상태에서 사용자가 마우스 포인터를 이동시키기 위하여 손가락을 키보드 템플릿 상의 임의의 좌표에 접촉한 상태에서 마우스 포인터를 이동시키고자 하는 방향으로 이동시키면, 컨트롤러(130)는 키입력을 감지하여 키입력이 연속적으로 이루어지는지를 확인한다(S103, S104).In this state, if the user moves the finger pointer in a direction to move the mouse pointer while touching a finger on the keyboard template to move the mouse pointer, the controller 130 detects a key input and the key input is continuous. It is checked whether or not it is made (S103, S104).

그리하여, 키입력이 연속적으로 이루어지면 컨트롤러(130)는 센서 모듈(15)을 통해 키보드 템플릿(20)을 연속적으로 촬영하여 이미지화시킨 후 촬영된 이미지 프레임을 기본 이미지 프레임과 상호 비교하여(S105), 좌표 이동거리 및 좌표 이동방향을 추출한다(S106). 여기에서, 좌표 이동거리 및 좌표 이동방향을 추출하는 방법은 영상 내에서 움직임 백터를 추출하는 공지의 방법을 사용한다.Thus, if key input is made continuously, the controller 130 continuously photographs and images the keyboard template 20 through the sensor module 15 and compares the photographed image frame with the basic image frame (S105). The coordinate movement distance and the coordinate movement direction are extracted (S106). Here, the method of extracting the coordinate moving distance and the coordinate moving direction uses a known method of extracting a motion vector in an image.

그런 다음, 컨트롤러(130)는 키보드 템플릿(20)의 가로×세로 비율과, 디스플레이 장치(140)의 가로×세로 비율에 따라 감지된 좌표 이동거리를 보정한다(S120).Then, the controller 130 corrects the detected coordinate movement distance according to the horizontal x vertical ratio of the keyboard template 20 and the horizontal x vertical ratio of the display device 140 (S120).

그리고, 컨트롤러(130)는 좌표 이동 방향 및 보정된 좌표 이동거리에 따라 마우스 포인터 제어 신호를 출력하여 디스플레이 장치 상의 마우스 포인터를 이동시킨다(S150).The controller 130 outputs a mouse pointer control signal according to the coordinate movement direction and the corrected coordinate movement distance to move the mouse pointer on the display device (S150).

한편, 컨트롤러(130)는 현재 마우스 포인터가 이동된 상태에서 사용자가 좌표를 2번 누르게 되는 경우 이를 인식하여 클릭 신호를 생성하여 출력할 수도 있다.Meanwhile, the controller 130 may recognize and output a click signal when the user presses the coordinates twice while the mouse pointer is moved.

따라서, 프로젝션 키보드를 이용하여 키보드 기능 및 마우스 기능을 모두 사용할 수 있도록 함으로써 사용자에게 편의를 제공할 수 있다.Therefore, it is possible to provide convenience to the user by using both the keyboard function and the mouse function using the projection keyboard.

본 발명은 다양하게 변형될 수 있고 여러 가지 형태를 취할 수 있으며 상기 발명의 상세한 설명에서는 그에 따른 특별한 실시 예에 대해서만 기술하였다. 하지만 본 발명은 상세한 설명에서 언급되는 특별한 형태로 한정되는 것이 아닌 것으로 이해되어야 하며, 오히려 첨부된 청구범위에 의해 정의되는 본 발명의 정신과 범위 내에 있는 모든 변형물과 균등물 및 대체물을 포함하는 것으로 이해되어야 한다.As those skilled in the art would realize, the described embodiments may be modified in various ways, all without departing from the spirit or scope of the present invention. It is to be understood, however, that the present invention is not limited to the specific forms referred to in the description, but rather includes all modifications, equivalents, and substitutions within the spirit and scope of the invention as defined by the appended claims. Should be.

본 발명에 따르면 휴대 전자 기기의 입력 장치로 사용이 가능하다.According to the present invention can be used as an input device of a portable electronic device.

도 1은 일반적인 프로젝션 키보드의 구성을 설명하기 위한 개념도,1 is a conceptual diagram illustrating a configuration of a general projection keyboard;

도 2는 본 발명에 따른 프로젝션 키보드를 이용한 마우스 포인터 제어 방법을 구현하기 위한 프로젝션 키보드의 구성을 개략적으로 나타낸 블록도,2 is a block diagram schematically showing the configuration of a projection keyboard for implementing a mouse pointer control method using a projection keyboard according to the present invention;

도 3은 본 발명에 따른 프로젝션 키보드를 이용한 마우스 포인터 제어 방법의 동작 흐름도,3 is a flowchart illustrating a method of controlling a mouse pointer using a projection keyboard according to the present invention;

도 4는 본 발명에 따라 키보드 템플릿의 영역 내에서 좌표 이동으로 디스플레이 장치 상에서 마우스 포인터의 이동을 설명하기 위한 도면.4 is a view for explaining a movement of a mouse pointer on a display device by moving coordinates within an area of a keyboard template according to the present invention.

<도면의 주요 부분에 관한 부호의 설명><Explanation of symbols on main parts of the drawings>

11 : 프로젝션 모듈 13 : IR 모듈11 projection module 13 IR module

15 : 센서 모듈 20 : 키보드 템플릿15: sensor module 20: keyboard template

110 : 메모리 120 : 기능 키110: memory 120: function keys

130 : 컨트롤러130: controller

Claims (4)

키보드 템플릿을 투사하는 프로젝션 모듈과, 상기 키보드 템플릿이 투사된 표면 바로 위를 수평으로 검색하는 IR 모듈과, 상기 키보드 템플릿을 촬영하여 이미지화시키는 센서 모듈과, 이들을 통해 입력되는 이미지를 통해 입력 이벤트를 발생하는 컨트롤러와, 키입력 기능과 마우스 포인터 기능을 상호 절환시키는 기능 키를 포함하는 프로젝션 키보드의 제어 방법에 있어서,A projection module for projecting a keyboard template, an IR module for horizontally retrieving directly above the surface on which the keyboard template is projected, a sensor module for photographing and imaging the keyboard template, and generating input events through the images inputted through them In the control method of the projection keyboard comprising a controller for switching between the key input function and the mouse pointer function, 상기 프로젝션 키보드의 기능 키를 통해 마우스 포인터 기능이 선택된 경우 상기 키보드 템플릿 상에서 사용자의 손이 최초로 접촉된 좌표와 이동되는 좌표를 이미지 비교를 통해 좌표 이동 거리 및 방향을 감지하되, 상기 키보드 템플릿을 연속적으로 촬영하여 이미지화시킨 후 촬영된 이미지 프레임을 기본 이미지 프레임과 상호 비교하여 좌표 이동거리를 추출하는 이동 감지 단계와;When a mouse pointer function is selected through a function key of the projection keyboard, a coordinate movement distance and direction are detected by comparing images of coordinates where the user's hand first touches on the keyboard template with coordinates that are moved, but continuously the keyboard template A movement detection step of extracting a coordinate movement distance by comparing the photographed image frame with a basic image frame after photographing the image; 상기 키보드 템플릿의 가로×세로 비율과, 디스플레이 장치의 가로×세로 비율에 따라 감지된 좌표 이동거리를 보정하는 보정 단계; 및A correction step of correcting the detected coordinate movement distance according to the horizontal x vertical ratio of the keyboard template and the horizontal x vertical ratio of the display device; And 좌표 이동 방향 및 보정된 좌표 이동거리에 따라 마우스 포인터 제어 신호를 출력하여 상기 디스플레이 장치 상의 마우스 포인터를 이동시키되, 상기 마우스 포인터 이동 가능 영역을 상기 키보드 템플릿의 영역 내에서 설정하는 마우스 포인터 이동 단계로 이루어지는 것을 특징으로 하는 프로젝션 키보드를 이용한 마우스 포인터 제어 방법.A mouse pointer movement step of outputting a mouse pointer control signal according to a coordinate movement direction and a corrected coordinate movement distance to move the mouse pointer on the display device, wherein the mouse pointer movement area is set within an area of the keyboard template; Mouse pointer control method using a projection keyboard, characterized in that. 삭제delete 삭제delete 삭제delete
KR1020070120870A 2007-11-26 2007-11-26 Mouse pointer control method for using projection keyboard KR100907286B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070120870A KR100907286B1 (en) 2007-11-26 2007-11-26 Mouse pointer control method for using projection keyboard

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070120870A KR100907286B1 (en) 2007-11-26 2007-11-26 Mouse pointer control method for using projection keyboard

Publications (2)

Publication Number Publication Date
KR20090054142A KR20090054142A (en) 2009-05-29
KR100907286B1 true KR100907286B1 (en) 2009-07-13

Family

ID=40861362

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070120870A KR100907286B1 (en) 2007-11-26 2007-11-26 Mouse pointer control method for using projection keyboard

Country Status (1)

Country Link
KR (1) KR100907286B1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020061217A1 (en) * 2000-11-17 2002-05-23 Robert Hillman Electronic input device
JP2006323866A (en) * 1998-10-07 2006-11-30 Intel Corp Data input method

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006323866A (en) * 1998-10-07 2006-11-30 Intel Corp Data input method
US20020061217A1 (en) * 2000-11-17 2002-05-23 Robert Hillman Electronic input device

Also Published As

Publication number Publication date
KR20090054142A (en) 2009-05-29

Similar Documents

Publication Publication Date Title
US11188125B2 (en) Information processing apparatus, information processing meihod and program
US20090146968A1 (en) Input device, display device, input method, display method, and program
US20090295712A1 (en) Portable projector and method of operating a portable projector
US20110242054A1 (en) Projection system with touch-sensitive projection image
US9225896B2 (en) Mobile terminal device, storage medium, and display control method
JP2007219966A (en) Projection input device, and information terminal and charger having projection input device
JP5645444B2 (en) Image display system and control method thereof
US9727147B2 (en) Unlocking method and electronic device
KR20120038788A (en) Apparatus and method for controlling user interface based motion
EP3933545B1 (en) Method and apparatus for detecting a bending state of electronic device, and storage medium
CN103019518A (en) Method of automatically adjusting human-computer interaction interface
US7696985B2 (en) Producing display control signals for handheld device display and remote display
JP2014203417A (en) Control device, operation control method and operation control program
KR20150070870A (en) Preview method of picture taken in camera and electronic device implementing the same
GB2517284A (en) Operation input device and input operation processing method
CN101782823B (en) Displacement detection input device and method based on image sensor
KR100907286B1 (en) Mouse pointer control method for using projection keyboard
US20140085264A1 (en) Optical touch panel system, optical sensing module, and operation method thereof
KR100907287B1 (en) Keyboard coordinates compensating method template method of projection keyboard
JP2013114645A (en) Small information device
KR20120063791A (en) Method for controlling image using mobile projector
KR20110066545A (en) Method and terminal for displaying of image using touchscreen
KR20080092184A (en) Projector with virtual input interface and method of inputting data with virtual input interface
US9652087B2 (en) Telecommunication unit having a projection device and method for operating a telecommunication unit having a projection device
JP2019061539A (en) Input assisting device and portable terminal

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130619

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20140617

Year of fee payment: 6

LAPS Lapse due to unpaid annual fee