KR100827067B1 - Portable wireless terminal with camera and realizing method of mouse using thereof - Google Patents
Portable wireless terminal with camera and realizing method of mouse using thereof Download PDFInfo
- Publication number
- KR100827067B1 KR100827067B1 KR1020070006612A KR20070006612A KR100827067B1 KR 100827067 B1 KR100827067 B1 KR 100827067B1 KR 1020070006612 A KR1020070006612 A KR 1020070006612A KR 20070006612 A KR20070006612 A KR 20070006612A KR 100827067 B1 KR100827067 B1 KR 100827067B1
- Authority
- KR
- South Korea
- Prior art keywords
- virtual space
- camera
- wireless terminal
- user
- portable wireless
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/23—Construction or mounting of dials or of equivalent devices; Means for facilitating the use thereof
- H04M1/233—Construction or mounting of dials or of equivalent devices; Means for facilitating the use thereof including a pointing device, e.g. roller key, track ball, rocker switch or joystick
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
- H04M1/026—Details of the structure or mounting of specific components
- H04M1/0264—Details of the structure or mounting of specific components for a camera module assembly
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2250/00—Details of telephonic subscriber devices
- H04M2250/52—Details of telephonic subscriber devices including functional features of a camera
Abstract
Description
도 1은 본 발명의 제1 실시 예에 따른 카메라를 구비한 휴대용 무선 단말기의 마우스 구현을 위한 구성을 도시한 블록도,1 is a block diagram showing a configuration for implementing a mouse of a portable wireless terminal with a camera according to a first embodiment of the present invention;
도 2는 도 1에 도시된 휴대용 무선 단말기의 평면 상태를 도시한 도면,FIG. 2 is a view showing a planar state of the portable wireless terminal shown in FIG. 1;
도 3은 도 1과 도 2에 도시된 휴대용 무선 단말기에 의해 구현된 가상 공간의 예를 도시한 도면,3 is a diagram illustrating an example of a virtual space implemented by the portable wireless terminal illustrated in FIGS. 1 and 2;
도 4는 본 발명의 제2 실시 예에 따른 휴대용 무선 단말기의 마우스 구현 과정을 도시한 순서도.4 is a flowchart illustrating a mouse implementation process of a portable wireless terminal according to a second embodiment of the present invention.
본 발명은 휴대용 무선 단말기에 관한 발명으로서, 특히 카메라를 포함하는 휴대용 무선 단말기에 관한 발명이다. The present invention relates to a portable wireless terminal, and more particularly, to a portable wireless terminal including a camera.
근래의 휴대용 무선 단말기들은 기본 기능 이외에 사용자의 요구를 충족시키 기 위한 다양한 기능을 제공할 수 있는 복합 가전의 형태로 개발되고 있다. 휴대용 무선 단말기에 포함되는 부가 기능들의 예로는 카메라 기능, 동영상 기능, 네비게이션(navagation) 등이 있으며, 그 외에 그 외에도 포인터(pointer) 또는 마우스(Mouse) 등과 같은 다양한 부가 기능들이 개발되고 있다. In recent years, portable wireless terminals have been developed in the form of complex home appliances that can provide various functions to meet the needs of users in addition to the basic functions. Examples of additional functions included in the portable wireless terminal include a camera function, a video function, a navigation, etc. In addition, various additional functions such as a pointer or a mouse are being developed.
그러나, 휴대용 무선 단말기를 이용한 마우스 기능의 구현은 터치 스크린과 같은 구성을 구비한 경우로 제한된다. However, the implementation of the mouse function using the portable wireless terminal is limited to the case having a configuration such as a touch screen.
본 발명은 카메라를 구비한 휴대용 무선 단말기를 이용해서 마우스 기능을 제공하고자 한다. The present invention is to provide a mouse function using a portable wireless terminal having a camera.
본 발명의 제1 측면에 따른 휴대용 무선 단말기는,A portable wireless terminal according to the first aspect of the present invention,
스크린과;Screen;
복수의 영역들로 구획된 가상 공간 내 피사체를 촬영하기 위한 카메라와;A camera for photographing a subject in a virtual space divided into a plurality of areas;
복수의 영역들로 구획된 가상 공간 신호를 생성하고 상기 카메라에서 촬영된 가상 공간 내 피사체의 영역을 산출해서 사용자의 선택에 따른 영상 정보를 상기 스크린을 통해 제공하는 연산부를 포함한다. And a calculator configured to generate a virtual space signal divided into a plurality of areas, calculate a region of a subject in the virtual space photographed by the camera, and provide image information according to a user's selection through the screen.
본 발명의 제2 측면에 따른 카메라를 구비한 휴대용 무선 단말기의 마우스 구현 방법은,A mouse implementing method of a portable wireless terminal having a camera according to a second aspect of the present invention,
사용자가 선택 가능한 복수의 영역들로 구획된 가상 공간 신호를 생성하는 과정과;Generating a virtual space signal partitioned into a plurality of user selectable regions;
가상 공간 내에 피사체를 촬영하는 과정과, 가상 공간 내에서 촬영된 피사체의 위치와 가상 공간 신호를 비교해서 사용자가 선택한 가상 공간 내의 영역을 산출하는 과정과, 산출된 선택 영역에 따른 영상 정보를 사용자에게 제공하는 과정을 포함한다. A process of photographing a subject in a virtual space, a process of calculating a region in a virtual space selected by a user by comparing a position of a subject photographed in the virtual space and a virtual space signal, and image information according to the calculated selected region to a user It includes the process of providing.
이하에서는 첨부도면들을 참조하여 본 발명의 실시 예를 상세히 설명하기로 한다. 본 발명을 설명함에 있어서, 관련된 공지기능, 혹은 구성에 대한 구체적인 설명은 본 발명의 요지를 모호하지 않게 하기 위하여 생략한다.Hereinafter, with reference to the accompanying drawings will be described an embodiment of the present invention; In describing the present invention, detailed descriptions of related well-known functions or configurations are omitted in order not to obscure the subject matter of the present invention.
도 1은 본 발명의 제1 실시 예에 따른 카메라를 구비한 휴대용 무선 단말기의 마우스 구현을 위한 블록 도이고, 도 2는 도 1에 도시된 휴대용 무선 단말기의 평면 상태를 도시한 도면이다. 도 1과 도 2를 참조하면, 본 발명에 따른 휴대용 무선 단말기(100)는 스크린(Screen; 120)과, 복수의 영역들로 구획된 가상 공간 내 피사체를 촬영하기 위한 카메라(Camera; 110)와, 복수의 영역들로 구획된 가상 공간 신호(122)를 생성하고 상기 카메라(110)에서 촬영된 가상 공간 내 피사체(150)가 위치된 영역을 검출해서 사용자의 선택에 따른 영상 정보(103a)를 상기 스크린(120)을 통해 제공하는 연산부(130)를 포함한다. 1 is a block diagram of a mouse implementation of a portable wireless terminal with a camera according to a first embodiment of the present invention, Figure 2 is a view showing a planar state of the portable wireless terminal shown in FIG. 1 and 2, the portable
또한, 상기 휴대용 무선 단말기(100)는 통신 포트(140)를 더 포함해서 구성될 수 있으며, 상기 통신 포트(140)는 상기 연산부(130)로부터 제공되는 영상 정보(103b)를 무선 통신 수단을 구비한 외부의 기기들로 전송할 수도 있다. In addition, the portable
상기 연산부(130)는 마우스 동작이 시작되면 가상 공간 신호(122)를 생성하고, 상기 카메라(110)가 일정한 FPS(frame per second; 초당 재생할 수 있는 프레임 비율을 의미한다. 예를 들자면, 24 FPS는 1초에 24장의 화면 재생을 의미한다.)로 피사체(150)를 촬영할 수 있도록 제어하기 위한 제어 신호(101)도 제공한다. 상기 카메라(110)는 가상 공간 내 피사체의 움직임을 일정한 FPS로 지속적으로 촬영하며, 촬영된 피사체의 정보(102)를 상기 연산부(130)에 제공한다. 상기 제어 신호(101)는 상기 카메라(110)의 FPS 뿐만 아니라, 화각을 제어하기 위한 정보도 포함될 수 있다. The
상기 연산부(130)는 가상 공간 신호(122)와, 상기 카메라(110)로부터 제공받은 피사체 데이터(Data)를 비교해서 사용자가 선택한 가상 공간 신호(122)의 영역을 검출해낼 수 있다. 상기 연산부(130)에서 검출된 사용자가 선택한 가상 공간 신호(122)의 영역은 상기 스크린(120)을 통해서 사용자에게 제공된다. The
상기 휴대용 무선 단말기(100)는 사용자의 영역 선택을 돕기 위해서 도 2에 도시된 바와 같은 펜(Pen) 형태의 피사체(150)와, 상기 스크린(120)의 일 부분에 가상 공간 신호(122)의 영역 구성을 사용자에게 제공한다. 상기 펜은 끝단이 착색되어 선택된 영역을 검출하는데 발생 가능한 오류를 최소화시킬 수도 있다.The portable
상기 스크린(120)은 상기 연산부(130)로부터 제공되는 다양한 형태의 영상 정보(103a)를 사용자에게 제공하며, 일 부분에 사용자가 선택해야될 가상 공간 신호(122)의 영역들도 제공한다. 또한, 상기 연산부(130)는 상기 스크린(120)에 상기 카메라(110)에서 촬영된 피사체와 관련된 정보가 반영된 영상 정보를 제공함으로 써, 사용자는 자신의 선택에 따른 마우스 포인터(mouse pointer; 121)의 움직임을 지속적으로 제공받을 수 있다. The
도 3은 도 1과 도 2에 도시된 휴대용 무선 단말기에 의해 구현된 가상 공간신호(122)의 예를 도시한 도면이다. 상기 연산부(130)는 도 3에 도시된 바와 같은 형태의 가상 공간 신호(122)를 생성하며, 카메라에서 촬영된 피사체(150)를 입력받아서 가상 공간 신호(122)와 비교함으로써 사용자가 선택한 가상 공간 신호(122) 내의 영역을 검출해낼 수 있다. 3 is a diagram illustrating an example of a
상술한 가상 공간 신호(122)는 다수의 영역들(122-1 ~ 122-10)로 구획될 수 있으며, 필요에 따라서 다양한 기능이 부가될 수 있다. The above-described
도 4는 본 발명의 제2 실시 예에 따른 휴대용 무선 단말기의 마우스 구현 과정을 도시한 순서 도이다. 도 4를 참조하면, 카메라를 구비한 휴대용 무선 단말기의 마우스 구현 방법(200)은 사용자가 선택 가능한 복수의 영역들로 구획된 가상 공간 신호를 생성하는 과정(220)과, 가상 공간 내에 피사체를 촬영하는 과정(230)과, 가상 공간 내에서 촬영된 피사체의 위치와 가상 공간 신호를 비교해서 사용자가 선택한 가상 공간 내의 영역을 산출하는 과정(240)과, 산출된 선택 영역에 따른 영상 정보를 사용자에게 제공하는 과정(250)을 포함한다. 4 is a flowchart illustrating a mouse implementation process of a portable wireless terminal according to a second embodiment of the present invention. Referring to FIG. 4, the method for implementing a
휴대용 무선 단말의 마우스 동작이 시작(210)되면, 연산부는 마우스 구현을 위한 복수의 영역들로 구획된 가상 공간의 신호를 생성하며, 카메라는 고정된 화각(연산부에 의해 생성된 가상 공간 내)과, 일정한 FPS로 화각 내의 피사체을 촬영한다.When the mouse operation of the portable wireless terminal is started 210, the operation unit generates a signal of a virtual space partitioned into a plurality of areas for implementing a mouse, and the camera has a fixed angle of view (in the virtual space generated by the calculation unit) and , Shoot the subject within the field of view at a constant FPS.
또한, 연산 부는 가상 공간 내에서 촬영된 피사체의 정보와, 가상 공간 신호를 비교해서 사용자가 선택한 가상 공간 내의 영역을 검출해낼 수 있다. 상술한 연산 부는 가상 공간 신호와, 피사체의 정보(피사체로 이용된 펜의 형태와 색)가 저장되어 있으며, 촬영된 피사체와 비교해서 산출할 수 있다. In addition, the calculator may detect the area in the virtual space selected by the user by comparing the information of the subject photographed in the virtual space with the virtual space signal. The arithmetic unit described above stores a virtual space signal and information of a subject (shape and color of a pen used as a subject) and can be calculated by comparing with a photographed subject.
사용자가 선택한 영역은 카메라에서 촬영된 피사체와 가상 공간의 구획된 영역들을 비교해서 검출될 수 있으며, 이는 영상 처리(보상) 방법 중에 윤곽선(edge)을 이용한 방법이 이용될 수 있다. 그 외에도, 피사체로서 사용된 펜의 형태 또는 펜 끝의 색 등을 비교하는 등의 방법이 이용될 수 있다. The area selected by the user may be detected by comparing the subject photographed by the camera with the partitioned areas of the virtual space, which may be a method using an edge among image processing (compensation) methods. In addition, a method such as comparing the shape of the pen used as a subject, the color of the pen tip, or the like may be used.
카메라 또는 모니터, 스크린 등의 영상 장치들은 영상 정보를 데이터 형태의 신호들로 이미지를 구현하며, 이미지 구현 중에 다양한 형태의 영상 처리(보상)를 거치게 된다. 상술한 영상 처리 중 윤곽선을 이용한 영상 처리 방법은 촬영된 농담의 급격한 변화를 미분 연산에 의해 윤곽선을 추출하는 처리 방법으로서, 다양한 형태의 연산 방법이 적용될 수 있다. Imaging devices such as cameras, monitors, and screens implement images as signals in the form of data, and undergo various forms of image processing (compensation) during image implementation. The image processing method using the contour of the image processing described above is a processing method for extracting the contour by the differential operation to the abrupt change of the photographed shades, various calculation methods can be applied.
즉, 연산 부는 카메라에서 촬영된 데이터로부터 윤곽선을 추출하고, 추출된 윤곽선을 피사체의 위치와 가상 공간에 구획된 영역과 비교해서 사용자가 선택한 영역을 검출한다. That is, the calculation unit extracts an outline from the data photographed by the camera, and detects an area selected by the user by comparing the extracted outline with a location partitioned in the virtual space.
또한, 연산 부는 검출된 선택 영역에 관한 데이터가 포함된 영상 정보를 스크린을 통해서 사용자에게 제공한다. 사용자에게 제공되는 영상 정보는 스크롤(scrol)이나 마우스 포인터의 움직임 또는 사용자가 선택한 메뉴 등 다양한 형태를 포함해서 사용자에게 제공될 수 있다. In addition, the operation unit provides the user with image information including data on the detected selection area through the screen. The image information provided to the user may be provided to the user in various forms such as scrolling, movement of the mouse pointer, or a menu selected by the user.
만약, 카메라에서 촬영된 프레임(frame)에 피사체가 촬영되지 않은 경우(NO)에는, 사용자에게 제공되는 영상 정보는 마우스 동작의 시작 이전의 화면이 유지된다.If the subject is not photographed in the frame photographed by the camera (NO), the image information provided to the user is maintained on the screen before the start of the mouse operation.
본 발명에 따른 카메라를 구비한 휴대용 무선 단말기는 복수의 영역들로 구획된 임의의 가상 공간을 설정해서 가상 공간 내에서 촬영된 피사체의 위치(영역)로부터 사용자가 선택한 마우스 포인터를 인식함으로써 터치 스크린을 구비하지 않고도 마우스 기능을 구현할 수 있다. A portable wireless terminal having a camera according to the present invention sets an arbitrary virtual space partitioned into a plurality of areas and recognizes a mouse pointer selected by a user from a position (area) of a subject photographed in the virtual space. You can implement the mouse function without having.
즉, 본 발명에 따른 마우스 구현 방법은 프로그램에 따라 구성 가능함으로, 기존의 카메라를 구비한 휴대용 무선 단말기 등에도 소프트웨어적인 지원을 통해서 구현될 수 있는 이점이 있다.That is, the mouse implementation method according to the present invention can be configured according to the program, there is an advantage that can be implemented through software support in a portable wireless terminal having an existing camera and the like.
Claims (5)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020070006612A KR100827067B1 (en) | 2007-01-22 | 2007-01-22 | Portable wireless terminal with camera and realizing method of mouse using thereof |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020070006612A KR100827067B1 (en) | 2007-01-22 | 2007-01-22 | Portable wireless terminal with camera and realizing method of mouse using thereof |
Publications (1)
Publication Number | Publication Date |
---|---|
KR100827067B1 true KR100827067B1 (en) | 2008-05-02 |
Family
ID=39649554
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020070006612A KR100827067B1 (en) | 2007-01-22 | 2007-01-22 | Portable wireless terminal with camera and realizing method of mouse using thereof |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR100827067B1 (en) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100466855B1 (en) | 2004-03-23 | 2005-01-15 | 에스케이 텔레콤주식회사 | Method and System for Providing User Interface by Using Image Signal for Mobile Communication Terminal Equipped with Camera Function |
KR20060133428A (en) * | 2005-06-20 | 2006-12-26 | 삼성전자주식회사 | Method for implementing user interface using camera module and mobile communication terminal therefor |
KR20070044354A (en) * | 2005-10-24 | 2007-04-27 | 소니 에릭슨 모빌 커뮤니케이션즈 재팬, 아이엔씨. | Mobile terminal, mouse application program, and method for utilizing mobile terminal as wireless mouse device |
-
2007
- 2007-01-22 KR KR1020070006612A patent/KR100827067B1/en not_active IP Right Cessation
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100466855B1 (en) | 2004-03-23 | 2005-01-15 | 에스케이 텔레콤주식회사 | Method and System for Providing User Interface by Using Image Signal for Mobile Communication Terminal Equipped with Camera Function |
KR20060133428A (en) * | 2005-06-20 | 2006-12-26 | 삼성전자주식회사 | Method for implementing user interface using camera module and mobile communication terminal therefor |
KR20070044354A (en) * | 2005-10-24 | 2007-04-27 | 소니 에릭슨 모빌 커뮤니케이션즈 재팬, 아이엔씨. | Mobile terminal, mouse application program, and method for utilizing mobile terminal as wireless mouse device |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6525611B2 (en) | Image processing apparatus and control method thereof | |
CN109308205B (en) | Display adaptation method, device, equipment and storage medium of application program | |
US8884924B2 (en) | Information processing apparatus, information processing method, information recording medium, and program | |
WO2013105493A1 (en) | Information processing apparatus, information processing method, and computer program | |
WO2013105492A1 (en) | Information processing apparatus, information processing method, and computer program | |
KR20150053955A (en) | Absolute and relative positioning sensor fusion in an interactive display system | |
US10979700B2 (en) | Display control apparatus and control method | |
CA2900267C (en) | System and method of object recognition for an interactive input system | |
KR102078198B1 (en) | Shooting Method for Three-Dimensional Modeling And Electrical Device Thereof | |
JP2012238293A (en) | Input device | |
WO2014029020A1 (en) | Keyboard projection system with image subtraction | |
KR101503017B1 (en) | Motion detecting method and apparatus | |
EP3621295A1 (en) | Display control apparatus, imaging apparatus, control method, program, and computer readable medium | |
KR20080024252A (en) | A paratus for interfacing a mouse using a camera image, system and method using the paratus, computer readable record medium on which a program therefore is recorded | |
US10073614B2 (en) | Information processing device, image projection apparatus, and information processing method | |
WO2011096571A1 (en) | Input device | |
TWI499938B (en) | Touch control system | |
WO2021004413A1 (en) | Handheld input device and blanking control method and apparatus for indication icon of handheld input device | |
US9946333B2 (en) | Interactive image projection | |
US9300908B2 (en) | Information processing apparatus and information processing method | |
KR100827067B1 (en) | Portable wireless terminal with camera and realizing method of mouse using thereof | |
KR101414362B1 (en) | Method and apparatus for space bezel interface using image recognition | |
KR101204868B1 (en) | Projector with virtual input interface and Method of inputting data with virtual input interface | |
JP6686319B2 (en) | Image projection device and image display system | |
JP2014170367A (en) | Object detection device, object detection method, object detection system and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment | ||
FPAY | Annual fee payment | ||
FPAY | Annual fee payment |
Payment date: 20160330 Year of fee payment: 9 |
|
FPAY | Annual fee payment |
Payment date: 20170330 Year of fee payment: 10 |
|
FPAY | Annual fee payment |
Payment date: 20180329 Year of fee payment: 11 |
|
LAPS | Lapse due to unpaid annual fee |