KR20160072757A - 원격 가상 컨트롤러 구성 및 터치 제어 방법 - Google Patents

원격 가상 컨트롤러 구성 및 터치 제어 방법 Download PDF

Info

Publication number
KR20160072757A
KR20160072757A KR1020150024952A KR20150024952A KR20160072757A KR 20160072757 A KR20160072757 A KR 20160072757A KR 1020150024952 A KR1020150024952 A KR 1020150024952A KR 20150024952 A KR20150024952 A KR 20150024952A KR 20160072757 A KR20160072757 A KR 20160072757A
Authority
KR
South Korea
Prior art keywords
terminal
screen
button
touch
menu
Prior art date
Application number
KR1020150024952A
Other languages
English (en)
Inventor
신두일
Original Assignee
둘툰 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 둘툰 주식회사 filed Critical 둘툰 주식회사
Publication of KR20160072757A publication Critical patent/KR20160072757A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus

Abstract

본 발명은 스마트 기기 간 원격 가상 컨트롤러 구성 및 터치 제어 방법에 관한 것으로서, 좀더 구체적으로는 정보기기인 제1단말기를 터치하여 제1단말기와 연결된 원격의 제2단말기 화면의 터치를 제어하기 위한 것이다.
본 발명은 제2단말기 화면의 좌표 및 버튼들과 매핑되는 제1단말기 화면의 가상 패드와 가상 버튼들을 생성 및 제어하여 사용자가 직관적으로 원격의 스마트기기 화면의 메뉴나 게임 캐릭터를 편리하게 제어할 수 있는 기술을 제공한다.

Description

원격 가상 컨트롤러 구성 및 터치 제어 방법 {Virtual Remote Touch controller configuration and control method}
본 발명은 스마트 기기 간 원격 가상 컨트롤러 구성 및 터치 제어 방법에 관한 것으로서, 좀더 구체적으로는 정보기기인 제1단말기를 터치하여 제1단말기와 연결된 원격의 제2단말기 화면의 터치를 제어하기 위한 스마트 기기 간 원격 가상 컨트롤러 구성 및 터치 제어 방법에 관한 것이다.
일반적으로 최근의 스마트폰이나 태블릿PC 등의 스마트기기는 일정관리, 금융, 인터넷, 게임 기능 등과 같이 많은 기능을 구비하게 되었고, 일반 PC와 같은 다양한 기능 지원을 위하여 보다 발전된 형태의 하드웨어와 소프트웨어가 적용되고 있다.
하지만 스마트기기의 작은 화면을 통해 터치 입력과 화상 출력의 두 가지 역할을 모두 구현하도록 되어 있으므로, 협소한 화면에 터치, 펜, 또는 마우스를 입력하는 경우 사용자에게 세밀한 입력이 어려운 등 사용상 답답한 부분이 있다. 특히, 입력장치가 터치스크린인 스마트 기기에서 게임시의 예를 들면, 게임 캐릭터를 터치하여 제어하도록 하고 있지만, 마우스와 게임버튼을 동시에 신속하고 원활한 제어가 어려운 점이 있다. 또한, 마우스 입력의 경우 일부 PC에서 원격으로 태블릿PC에 연결하여 PC의 마우스로 태블릿PC 화면의 마우스를 원격 제어하는 방법을 사용하고 있지만, 이 또한 PC 및 마우스를 별도로 구비하여 사용해야 하는 불편함이 있다.
본 발명은 상기와 같은 문제점을 해결하기 위한 것으로, 두 대의 제1, 2단말기를 연결하고 제2단말기의 전체 화면이나 게임 등에서 표시되는 기능버튼이나 조이스틱 버튼의 좌표와, 상대적으로 매핑되는 가상 터치패드나 가상 버튼을 제1단말기 화면에서 이동과 크기 조절이 가능한 형태로 구비하여, 제2단말기의 화면이나 버튼을 터치로 원격 제어함으로써, 사용자가 보다 편리하게 제2단말기를 원격으로 제어하는 방법을 제공하기 위한 것이다.
본 발명의 목적을 달성하기 위해, 본 발명의 일 양태에 따른, 본 발명은 상기한 목적을 달성하기 위한 수단으로 터치스크린이 구비된 두 대의 제1,2 단말기를 연결하고, 제1단말기 화면에서 제2단말기 화면좌표와 매핑되는 가상의 터치/포이팅/마우스패드를 구비하고, 제1단말기에서 제2단말기 버튼과 매핑되고 위치 이동과 크기 조절이 가능한 가상 버튼들을 생성 관리할 수 있도록하여, 제2단말기의 화면과 버튼을 동시에 제어하여 상기와 같은 과제를 해결할 수 있다.
본 발명을 이용하면, 두 대의 스마트폰, 제2단말기 화면의 좌표 및 버튼들과 매핑되는 제1단말기 화면의 가상 터치패드/포인팅패드/마우스패드와 가상 버튼들을 생성하고 매핑하는 방법을 통해, 사용자가 직관적으로 원격의 스마트기기 화면의 메뉴나 게임 캐릭터를 원격으로 편리하게 제어할 수 있는 기술을 제공한다.
도 1은 본 발명의 일 실시예에 따른 제1단말기와 제2단말기의 좌표를 상대 매핑하여, 제1단말기의 터치에 의해 제2단말기를 터치 제어하는 예를 나타낸 예시도면이다.
도 2는 본 발명의 일 실시예에 따른 제1단말기와 제2단말기 화면의 특정영역을 축소 혹은 확대 매핑하여, 제1단말기 화면의 특정영역 터치로 제2단말기 화면의 특정영역의 터치 제어하는 예를 나타낸 예시도면이다.
도 3은 본 발명의 다른 일 실시예에 따른 제1단말기의 특정버튼과 제2단말기 화면의 특정버튼을 매핑하고, 제1단말기 화면에서 마우스 패드를 추가로 구비하여 제2단말기 화면의 특정버튼과 마우스 커서를 제어하는 예를 나타낸 예시도면이다.
도 4는 본 발명의 다른 일 실시예에 따른 제1단말기에서 제2단말기 화면의 특정버튼과 매핑되는 버튼과 가상 조이스틱를 추가하고, 추가된 버튼과 조이스틱의 크기,위치 등을 조절하여 제2단말기 화면의 터치를 제어하는 예를 나타낸 예시도면이다.
도 5는 본 발명의 다른 일 실시예에 따른 제1단말기 화면과 제2단말기 화면의 좌표를 상대 매핑하고, 제1단말기 화면에서 일반 버튼, 가상 조이스틱과 함께 포인팅패드 및 터치패드로 같이 사용하여 제2단말기 화면의 터치를 제어하는 예를 나타낸 예시도면이다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 실시예를 상세히 설명한다. 이 과정에서 도면에 도시된 구성요소의 크기나 형상 등은 설명의 명료성과 편의상 확대되어 도시될 수 있다. 또한, 본 발명의 구성 및 작용을 고려하여 특별히 정의된 용어들은 사용자, 운용자의 의도 또는 관례에 따라 달라질 수 있다.
제1단말기는 이동 단말기, 스마트폰, 태블릿 PC 중에서 하나가 될 수 있고, 제2 단말기는 스마트폰, 태블릿PC, 스마트TV, PC, 웨워러블 VR 중에서 선택된 하나가 될 수 있다.
본원 실시예의 계산식에서 [ ]는 x,y좌표의 행렬 표현을 위한 괄호이고, ( )는 수치 계산을 위한 괄호이다. 또한 본원 실시예의 특정영역 간 혹은 특정좌표 간 매핑 순서는 달라질 수 있다. 또한 일반적으로 터치 기능이 지원되는 단말기 화면에서 터치 이벤트는 터치 DOWN, MOVE, UP 이벤트로 분류되고, 상기 터치 이벤트는 각각 마우스 이벤트의 Left Button Press(Click), Left Button Press+Mouse Cursor Drag, Left Button Release와 매칭된다. 여기서 사용하는 터치/마우스 이벤트도 상기 범주에 포함된다.
<제1 실시예>
도 1은 본 발명의 일 실시예에 따른 제1단말기와 제2단말기의 좌표를 상대 매핑하여, 제1단말기로 제2단말기의 터치를 제어하는 예를 나타낸 예시도면이다. 본 발명의 일 양태에서, 도 1에서와 같이 터치스트린이 구비된 제1단말기와 제2단말기를 연결하고, 제1단말기 화면을 터치하여 제2단말기 화면를 원격으로 제어한다. 제1단말기의 화면(110) 크기는 가로 200, 세로 100이고, 제2단말기의 화면(120) 크기는 가로 400, 세로200으로 제1단말기 화면의 두 배이다.
예를 들어 제1단말기에서 특정좌표인 [50,50]에 대한 제2단말기의 상대 특정좌표의 계산은 아래와 같다.
- 제2단말기의 상대좌표 = 제1단말기의 터치좌표 * [가로배율,세로배율]
- [100,100] = [50,50] * [2,2]
상기 제1단말기에서 특정 좌표인 [50,50]을 터치하면, 터치좌표와 화면크기를 상대 단말기인 제2단말기에 송신한다. 상기 제2단말기는 제1단말기의 화면에 대한 제2단말기 화면의 가로배율[400/200=2배]과 세로배율[200/100=2배]을 계산한다. 계산된 화면배율로 제1단말기의 터치좌표[50,50]에 대한 제2단말기의 상대좌표[100,100]를 구하여, 제2단말기 화면의 상대좌표에서 터치나 클릭 이벤트를 발생시킨다. 그리고 제1단말기에서 제2단말기의 화면크기를 수신하여, 제2단말기의 상대좌표 계산하여, 제1단말기에서 계산된 제2단말기의 상대좌표를 제2단말기로 송신할 수 있다. 단말기 화면 사이즈나 화면설정 등 하드웨어 요소나 소프트웨어 요소에 의해서 제1단말기와 제2단말기의 좌우 가로 대 세로의 화면비율이 서로 다른 경우가 있을 수 있는데, 이러한 경우, 가로 대 세로의 비율을 비례적으로 계산하여 적용하면 될 것이며, 이는 제1 실시예 뿐 아니라 다른 실시예에서도 마찬가지이다.
<제2 실시예>
도 2는 본 발명의 일 실시예에 따른 제1단말기 화면(110)과 제2단말기 화면(120)의 특정영역을 축소 혹은 확대 매핑하여, 제1단말기 화면의 특정영역에서 제2단말기 화면의 특정영역의 터치를 제어하는 예를 나타낸 예시도면이다.
제1, 2단말기에 미리 등록된 제1단말기 화면의 특정영역(213)을 터치하여, 연결된 제2단말기 화면의 특정영역(223) 내의 터치를 원격 제어 한다.
도 2와 같이 제1단말기의 특정영역(213)의 시작좌표는 [20,20]이고 종료좌표는 [80,80]으로, 가로와 세로 크기는 각각 60이다. 제2단말기의 특정영역(223)의 시작좌표는 [200,100]이고 종료좌표는 [230,130]으로, 가로와 세로 크기는 각각 30이다. 제2단말기 특정영역(223)은 제1단말기 특정영역(213)에 대한 화면의 가로배율과 세로배율은 각각 0.5 [30/60=0.5]이다. 상기와 같이 미리 등록된 특정영역에 대한 매핑정보를 기반으로, 제1단말기의 특정영역(213) 내에서 좌표가 [40,50]인 특정좌표(211)를 터치하면, 제2단말기의 상대좌표(221)의 계산식은 아래와 같다.
- 제2단말기의 상대좌표 = 제2단말기의 특정영역 시작좌표 + ( 제1단말기 터치좌표 - 제1단말기의 특정영역 시작좌표 ) x [가로배율, 세로배율]
- 제2단말기의 [x,y] = [200,100] + ( [40,50] - [20,20] ) x [0.5 ,05]
= [200,100] + [20,30] x [0.5,05]
= [210,115]
위와 같은 특정영역 매핑방법에 따라, 제1단말기의 특정영역내의 좌표(211) 터치시, 제2단말기의 특정영역내의 상대좌표에서 터치 혹은 클릭 이벤트를 발생시킨다. 여기서 제2단말기의 특정영역은 범위가 아닌 특정좌표가 될 수 있다. 결국 상기와 같은 특정영역 확대 매핑 방법에 의해 원격의 단말기(제2단말기)의 작은 범위(223)의 버튼이나 게임 컨트롤 버튼을 제1단말기의 더 큰 범위(213)에서 터치하여 제어함으로서, 원격의 단말기의 특정영역(223)을 더욱 상세하게 제어할 수 있는 효과를 제공할 수 있다. 또한 제2단말기의 고정된 범위나 버튼(223)을 제1단말기에서는 다른 위치(214)로 변경할 수 있어, 사용자의 기호에 맞게 터치영역(214)를 변경하여, 제2단말기의 버튼이나 메뉴를 제어할 수 있게 된다.
<제 3실시예>
도 3은 본 발명의 다른 일 실시예에 따른 제1단말기의 특정버튼과 제2단말기 화면의 특정버튼을 매핑하고, 추가로 제1단말기 화면에서 마우스 패드를 구비하여 제2단말기 화면의 특정버튼과 마우스 커서를 제어하는 예를 나타낸 예시도면이다.
도3의 제2단말기 화면(120)의 좌/우 가상 조이스틱 버튼(601,602)과 기능버튼(603)을 각각 제1단말기 화면(110)의 좌/우 가상 조이스틱 버튼(501,502)과 기능버튼(503)으로 매핑한다. 또한 제1단말기 화면에서 마우스 패드 추가 버튼(520)을 구비하여 마우스 패드추가 버튼을 선택하면, 제1단말기 화면에서 미리 지정한 특정영역을 가진 마우스 패드(505)가 생성된다. 상기 특정영역을 가진 마우스 패드 내에서 터치하여 드래그하면, 연결된 단말기 화면의 마우스 커서가 상기 드래그 방향으로 이동한다. 상기 마우스 패드는 상기 마우스 패드의 위치를 이동시키는 이동활성화(511) 버튼과 상기 마우스 패드의 크기를 조절하는 크기조절 버튼(512)을 구비한다. 추가적으로 마우스 패드에는 상기 마우스 패드를 화면에서 삭제하는 삭제버튼(513)을 구비할 수 있다. 또한 마우스 패드 추가버튼을 누르면 추가로 같은 형태의 마우스 패드가 생성된다.
<제 4실시예>
도 4는 본 발명의 다른 일 실시예에 따른 제1단말기에서 제2단말기 화면의 특정버튼과 매핑되는 버튼과 가상 조이스틱를 추가하고, 추가된 버튼과 조이스틱의 크기,위치 등을 조절하여 제2단말기 화면의 터치를 제어하는 예를 나타낸 예시도면이다.
도4의 제1단말기 화면에서 제2단말기 화면(120)의 좌/우 가상 조이스틱 버튼(601,602)과 기능버튼(603)과 매핑되는 좌/우 조이스틱 버튼(501,502)과 기능버튼(503)를 신규로 생성하는 버튼 컨트롤 메뉴(530)를 배치한다. 상기 버튼 컨트롤 메뉴(530)는 기능버튼 추가 탭(521), 좌측 조이스틱 추가 탭(522), 우측 조이스틱 추가 탭(523), 마우스 패드 추가 탭(520), 버튼 상세 메뉴 On/Off 탭(515)으로 구성된다. 그리고 전체 화면의 맨우측에 상기 버튼 컨트롤 메뉴(530)의 표시여부를 선택하는 토글 바(540)를 배치한다. 참고로 상기에서 사용하는 탭,버튼,바는 터치 이벤트를 감지할 수 있는 버튼이나 이미지, 텍스트 등으로 표시될 수 있다.
상기 기능버튼 추가 탭(521)을 선택하면, 일반적인 터치가 가능한 기능버튼(503)이 화면에 표시된다. 상기 기능 버튼(503)은 기능버튼 삭제 버튼(531), 기능버튼 위치 이동 버튼(532), 크기조정 버튼(533) 등의 상세 메뉴 버튼들을 기능 버튼(503) 주변에 작은 형태로 배치된다. 상세 메뉴 버튼들을 이용하여 제2단말기 화면의 기능버튼(603)의 크기,위치에 맞추어 제1단말기 화면의 기능 버튼(503)의 크기, 위치 등을 손쉽게 조정하여 매핑할 수 있으며, 필요하지 않은 경우 바로 삭제버튼(531)을 선택하여 삭제할 수 있다. 또한 이렇게 매핑된 기능 버튼을 터치하면, 제1 단말기 화면의 터치 좌표에 대한 제2단말기 화면의 상대좌표에서 터치 이벤트를 발생시켜, 제1 단말기 화면으로 제2단말기 화면을 직관적으로 보다 용이하게 제어할 수 있다. 또한 버튼이 배치되지 않은 영역은 포인팅패드,터치패드,마우스패드 등의 다른 용도로 터치 영역을 명확하게 구분하여 사용할 수 있게 된다.
마찬가지로 상기 좌측 조이스틱 추가 탭(522)을 선택하면, 가상의 좌측 조이스틱 버튼(501)이 화면상에 표시된다. 조이스틱 버튼은 상하좌우로 터치하여 일정 영역내에서 움직일 수 있으며, 미터치 시 버튼은 다시 최조 중앙 원점으로 돌아온다. 조이스티 버튼(501)역시 상기 기능 버튼(503)처럼, 주변에 삭제 버튼(531), 위치 이동 버튼(532), 크기조정 버튼(533) 등의 상세 메뉴 버튼들을 조이스틱 버튼(501) 주변에 작은 형태로 표시된다. 상세 버튼들을 사용하여 제2단말기 화면의 조이스틱 버튼(601)의 크기,위치에 맞추어 제1단말기 화면의 기능 버튼(601)의 크기, 위치 등을 손쉽게 조정하여 매핑할 수 있다.
상기 버튼 상세 메뉴 On/Off 탭(515) 선택하면, 화면상에 상세 메뉴가 표시되고 있는 기능버튼이나 조이스틱 등의 버튼이 하나도 없으면, 좌측 조이스틱 버튼(501)처럼 화면상의 버튼들에 대해 모두 상세 메뉴를 표시된다. 반대로 화면상에 상세 메뉴가 표시되고 있는 기능버튼이나 조이스틱 등의 버튼이 하나라도 있으면, 우측 조이스틱 버튼(502)처럼 화면상의 모든 버튼들에 대해 상세 메뉴를 표시하지 않는다. 기능버튼이나 조이스틱 버튼(502)에서 상세 메뉴가 표시되는 않는 경우는 버튼의 이동이나 크기변경이 불가능하고, 상세 메뉴가 표시되는 경우 상세메뉴를 통해 버튼 이동과 크기를 변경할 수 있다. 상세 메뉴가 표시되는 경우, 일반 기능버튼(503)은 주변 상세메뉴를 제외하고 기능버튼 영역을 터치 드래그하여 기능버튼(503)의 위치를 이동시킬 수 있다. 상기 버튼 상세 메뉴 On/Off 탭(515)은 하나의 탭으로 구성할 수도 있고, On/Off 기능을 분리하여 두 개의 탭(On 탭, Off 탭)으로 배치할 수 있다.
그리고 상기 버튼 컨트롤 메뉴(530)의 화면 표시여부를 선택하는 컨트롤 메뉴 토글 바(540)를 화면의 맨우측에 배치한다. 상기 토글 바(540)는 터치하여 드래그 하면 화면 우측에서 상하로 움직일 수 있다. 버튼 컨트롤 메뉴(530)가 표시된 상태에서 토글 바(540)를 선택하면, 화면에서 버튼 컨트롤 메뉴가 사라지고, 버튼 컨트롤 메뉴(530)가 미표시된 상태에서 토글 바(540)를 선택하면, 화면에서 버튼 컨트롤 메뉴가 표시된다.
<제 5실시예>
도 5는 본 발명의 다른 일 실시예에 따른 제1단말기 화면과 제2단말기 화면의 좌표를 1:1로 상대 매핑하고, 제1단말기 화면에서 일반 기능버튼, 조이스틱과 함께 포인팅패드 및 터치패드로 같이 사용하여 제2단말기 화면의 터치를 제어하는 예를 나타낸 예시도면이다.
도5의 제1단말기 화면에서 전체 혹은 특정 영역을 포인팅패드 혹은 터치패드로 선택하여 사용할 수 있는 기능을 가진 포인팅모드(610)와 터치모드(620)메뉴를 구성한다.
제1단말기에서 상기 포인팅모드(610)가 선택되면 포인팅패드(110)가 활성화되고, 상기 터치모드(620)가 선택되면 터치패드(110)가 활성화 된다. 상기 포인팅패드나 터치패드 화면 위에 일반 기능버튼(503)이나 조이스틱 버튼(501)들이 겹쳐서 표시될 수 있다.
제1단말기에서 사용하는 포인팅패드나 터치패드는 화면 전체이거나 특정영역으로 지정할 수 있고, 상기 포인팅/터치패드 영역과 제2단말기 전체 화면의 좌표는 1:1로 상대 매핑된다.
포인팅 모드는 제1단말기의 포인팅패드에서 임의의 좌표를 터치하거나 터치 후 드래그하면, 터치좌표에 대한 제2단말기의 상대좌표에서 원형,사각,점 등의 포인팅 이미지가 표시한다. 만약 제1단말기의 화면에서 터치 UP 후, 지정한 시간 이내에 바로 터치하면, 해당되는 제2단말기의 상대좌표에서 터치 이벤트가 발생된다.
상세하게 제1단말기가 포인팅 모드인 경우, 포인팅 패드의 제1특정좌표(556)에서 터치 DOWN 이벤트가 발생되면, 제1특정좌표(556)에 대한 제2단말기의 제1상대좌표(606)를 기준으로 원형,사각,점 등의 특정 이미지(606)가 포인팅 되어 표시된다. 제1특정좌표(556)에서 터치 DOWN 후, 제2특정좌표(557)로 터치 드래그하여 터치 MOVE가 발생되면, 제2특정좌표(557)에 대한 제2단말기의 제2상대좌표(607)로 포인팅 이미지(607)가 이동되어 표시된다. 만약 임의의 제1좌표에서 터치 DOWN 혹은 MOVE 이벤트 발생 후에, 임의의 제2좌표에서 터치 UP 이벤트가 발생하고 지정한 특정시간 이내에 다시 임의의 제3좌표에서 터치 DOWN 이벤트가 발생하는 경우, 임의의 제2좌표 혹은 제3좌표에 대한 제2단말기의 제2상대좌표 혹은 제3상대좌표에서 터치 DOWN,터치 UP 이벤트가 연속으로 발생된다. 그리고 제1단말기에서 터치 Up 이벤트가 발생되면, 제2단말기의 포인팅 이미지(607)가 화면에서 바로 사라지거나 사용자가 지정한 시간 이내에 사라진다.
상기 포인팅패드(110)가 활성화 상태에서 상기 터치모드(620)메뉴가 선택되면, 터치모드로 변환된다. 터치모드는 제1단말기 터치패드(110)의 특정좌표에서 터치 DOWN, MOVE, UP 등의 이벤트가 발생하면, 제1단말기의 특정좌표에 대한 제2단말기의 상대좌표에서 터치 이벤트가 발생되고, 원형,사각,점 등의 포인팅 이미지가 표시된다. 만약 제1단말기의 화면에서 터치 UP이 발생되면, 제2단말기의 포인팅 이미지(607)가 화면에서 바로 사라지거나 사용자가 지정한 시간 이내에 사라진다. 제1단말기에 의한 제2단말기에서 터치 DOWN, MOVE 이벤트 발생 시, 상대좌표의 포인팅 이미지 표시여부는 옵션으로 선택할 수 있다. 또한 두 개 좌표 이상의 멀티 터치도 발생될 수 있다. 상기 제1단말기의 포인팅모드 혹은 터치모드에서 터치 시, 제2단말기 화면에 표시되는 이미지는 각각 다른 이미지가 사용될 수 있다.
이와 같이 특정영역에 대해 마우스/버튼/포인팅/터치패드 등의 크기와 위치를 추가 및 조절 매핑함으로써, 원격지 단말기의 위치와 크기가 각기 다른 다수의 기능버튼이나 조이스틱 버튼을 매핑하여 제1단말기 화면에서 가상의 버튼과 제어패드를 용이하게 추가/변경할 수 있고, 각기 고유의 기능을 유지하면서 같은 화면에 구현할 수 있다. 이로서 제1단말기 화면으로 제2단말기의 터치 화면과 버튼들을 사용자가 쉽게 제어할 수 있다.
이상에서 설명한 본 발명은 본 발명의 요지와 필수적 특징을 벗어나지 않는 범위에서 다른 특정한 형태로 구체화될 수 있다.
100 : 제1단말기
200 : 제2단말기
110 : 제1단말기 화면
120 : 제2단말기 화면
111 : 제1단말기 특정좌표
121 : 제2단말기 상대좌표
211,212 : 제1단말기 화면의 터치좌표
213,214 : 제1단말기 화면의 특정영역
221 : 제2단말기 화면의 상대좌표
223 : 제2단말기 화면의 특정영역
501 : 제2단말기 좌측 가상 조이스틱 버튼에 대한 매핑버튼
502 : 제2단말기 우측 가상 조이스틱 버튼에 대한 매핑버튼
503 : 제2단말기 기능 버튼에 대한 매핑버튼
505 : 마우스 패드
511 : 마우스 패드 위치 이동 조절 버튼
512 : 마우스 패드 크기 조절 버튼
513 : 마우스 패드 삭제 버튼
515 : 버튼 컨트롤 메뉴
520 : 마우스 패드 추가 버튼
521 : 기능버튼 추가 탭
522 : 좌측 조이스틱 추가 탭
523 : 우측 조이스틱 추가 탭
530 : 버튼 컨트롤 메뉴
531 : 삭제 버튼
532 : 위치 이동 버튼
533 : 크기조정 버튼
540 : 버튼 컨트롤 메뉴 토글 바
556 : 제1특정좌표
557 : 제2특정좌표
606 : 제1상대좌표 및 포인팅 이미지
607 : 제2상대좌표 및 포인팅 이미지
601 : 제2단말기 좌측 가상 컨트롤 버튼
602 : 제2단말기 우측 가상 컨트롤 버튼
603 : 제2단말기 기능 버튼
605 : 마우스 커서

Claims (8)

  1. 터치스크린이 구비된 제1단말기 화면으로 상대 단말기인 제2단말기의 게임화면을 원격 제어하는 방법에 있어서,

    제1단말기와 제2단말기를 유무선 네트워크를 통해 연결하는 단계와;

    제1단말기 화면에 액션버튼 탭을 포함하는 버튼 컨트롤 메뉴를 구성하는 단계와;
    상기 액션버튼 탭을 선택하면, 화면상의 미리 지정한 위치와 크기에 따라 터치가 가능한 액션버튼(501)이 화면 표시되는 단계와;
    상기 액션버튼은 삭제버튼, 크기조정 버튼 등의 상세메뉴를 액션버튼 외곽 주변에 구성되는 단계와;
    상기 삭제버튼을 선택하면, 상기 액션버튼이 화면에서 삭제되는 단계와;
    상기 크기변경버튼을 선택하여 드래그하면, 드래그한 크기만큼 상기 액션버튼의 크기가 변경되는 단계와;

    상기 액션버튼에서 상세메뉴 이외의 영역을 터치하여 터치이벤트가 발생되면, 제1 단말기 화면의 터치 좌표에 대한 제2단말기 화면의 상대좌표에서 터치 이벤트를 발생시키는 단계;를
    포함하는 것을 특징으로 하는 원격 가상 컨트롤러 구성 및 터치 제어 방법;
  2. 청구항 1항에서,
    액션버튼(501)은 상하좌우로 터치하여 미지 지정한 영역내에서 움직이는 단계와;
    미터치 시, 액션버튼은 다시 최조 중앙 원점으로 돌아오는 단계와;
    상기 상세메뉴에 위치 이동버튼을 구성하는 단계와;
    상기 위치 이동버튼을 선택하여 드래그하면 상기 액션버튼을 드래그 방향으로 이동되는 단계;를
    포함하는 것을 특징으로 하는 원격 가상 컨트롤러 구성 및 터치 제어 방법;
  3. 청구항 1항에서,
    상기 버튼 컨트롤 메뉴에 버튼 상세메뉴 탭을 구성하는 단계와;
    화면상에 상기 상세메뉴가 표시되고 있는 액션버튼이 하나도 없으면, 화면상에 있는 액션버튼들에 대해 모두 상세메뉴를 표시하는 단계와;
    화면상에 상세 상세메뉴가 표시되고 있는 액션버튼이 하나라도 있으면, 화면상의 모든 액션버튼들에 대해 상세메뉴를 사라지게 하는 단계;를

    포함하는 것을 특징으로 하는 원격 가상 컨트롤러 구성 및 터치 제어 방법;
  4. 청구항 1항에서,
    상기 액션버튼에서 상세 메뉴가 표시되는 않는 경우는 액션버튼의 이동이나 크기변경이 불가능하고, 상세메뉴가 표시되는 경우 상세메뉴를 통해 버튼 이동과 크기를 변경하는 단계;를

    포함하는 것을 특징으로 하는 원격 가상 컨트롤러 구성 및 터치 제어 방법;
  5. 청구항 1항에서,
    상기 토글 바를 화면의 좌우 중 한 측면에 구성하는 단계와;
    상기 토글 바를 터치 드래그 하여 화면 상하로 움직이는 단계와;
    상기 버튼 컨트롤 메뉴(530)가 표시된 상태에서 토글 바(540)를 선택하면, 화면에서 버튼 컨트롤 메뉴가 사라지는 단계와;
    상기 버튼 컨트롤 메뉴(530)가 미표시된 상태에서 토글 바(540)를 선택하면, 화면에서 버튼 컨트롤 메뉴가 표시되는 단계를

    포함하는 것을 특징으로 하는 원격 가상 컨트롤러 구성 및 터치 제어 방법;
  6. 터치스크린이 구비된 제1단말기 화면으로 상대 단말기인 제2단말기의 게임화면을 원격 제어하는 방법에 있어서,
    제1단말기와 제2단말기를 유무선 네트워크를 통해 연결하는 단계와;

    제1단말기 화면에서 임의의 제1특정좌표(556)에서 터치 DOWN 이벤트가 발생되면, 제1특정좌표(556)에 대한 제2단말기의 제1상대좌표(606)를 기준으로 원형,사각,점 등의 특정 이미지(606)가 포인팅 되어 표시되는 단계와;
    상기 제1특정좌표(556)에서 터치 DOWN 후, 제2특정좌표(557)로 터치 드래그하여 터치 MOVE가 발생되면, 제2특정좌표(557)에 대한 제2단말기의 제2상대좌표(607)로 포인팅 이미지(607)가 이동되어 표시되는 단계와;

    상기 제1단말기의 화면에서 터치 UP 후, 지정한 시간 이내에 바로 터치하면, 해당되는 제2단말기의 상대좌표에서 터치 DOWN, 터치 UP 이벤트가 연속으로 발생되는 단계;를

    포함하는 것을 특징으로 하는 원격 가상 컨트롤러 구성 및 터치 제어 방법;
  7. 제6항에 있어서,
    상기 제1단말기에서 터치 UP 이벤트가 발생되면, 제2단말기의 포인팅 이미지(607)가 화면에서 바로 사라지거나 사용자가 지정한 시간 이내에 사라지는 단계를;
    포함하는 것을 특징으로 하는 원격 가상 컨트롤러 구성 및 터치 제어 방법;
  8. 제6항에 있어서,
    상기 제1단말기에 의한 제2단말기에서 터치 DOWN, MOVE 이벤트 발생 시, 상대좌표의 포인팅 이미지 표시여부를 옵션으로 선택할 수 있는 단계;를

    포함하는 것을 특징으로 하는 원격 가상 컨트롤러 구성 및 터치 제어 방법;
KR1020150024952A 2014-12-15 2015-02-23 원격 가상 컨트롤러 구성 및 터치 제어 방법 KR20160072757A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020140180810 2014-12-15
KR20140180810 2014-12-15

Publications (1)

Publication Number Publication Date
KR20160072757A true KR20160072757A (ko) 2016-06-23

Family

ID=56353406

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150024952A KR20160072757A (ko) 2014-12-15 2015-02-23 원격 가상 컨트롤러 구성 및 터치 제어 방법

Country Status (1)

Country Link
KR (1) KR20160072757A (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180136828A (ko) * 2017-06-15 2018-12-26 주식회사 넥슨코리아 시점에 기초하여 적응적으로 기준점이 변하는 가상 패드 제공 방법 및 장치
KR20190027804A (ko) * 2019-03-08 2019-03-15 주식회사 넥슨코리아 시점에 기초하여 적응적으로 기준점이 변하는 가상 패드 제공 방법 및 장치
WO2021020616A1 (ko) * 2019-07-30 2021-02-04 엘지전자 주식회사 이동 단말기 및 이동 단말기를 구비한 전자 장치
WO2021033808A1 (ko) * 2019-08-22 2021-02-25 엘지전자 주식회사 이동 단말기 및 이동 단말기를 구비한 전자장치

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180136828A (ko) * 2017-06-15 2018-12-26 주식회사 넥슨코리아 시점에 기초하여 적응적으로 기준점이 변하는 가상 패드 제공 방법 및 장치
KR20190027804A (ko) * 2019-03-08 2019-03-15 주식회사 넥슨코리아 시점에 기초하여 적응적으로 기준점이 변하는 가상 패드 제공 방법 및 장치
WO2021020616A1 (ko) * 2019-07-30 2021-02-04 엘지전자 주식회사 이동 단말기 및 이동 단말기를 구비한 전자 장치
WO2021033808A1 (ko) * 2019-08-22 2021-02-25 엘지전자 주식회사 이동 단말기 및 이동 단말기를 구비한 전자장치

Similar Documents

Publication Publication Date Title
KR100686165B1 (ko) 오에스디 기능 아이콘을 갖는 휴대용 단말기 및 이를이용한 오에스디 기능 아이콘의 디스플레이 방법
US9467729B2 (en) Method for remotely controlling smart television
KR20130129864A (ko) 터치 스크린을 이용하는 사용자 인터페이스 제어 방법 및 장치
JP6313395B1 (ja) 描画処理方法、描画処理プログラム及び描画処理装置
EP2930925A1 (en) Multi-screen switching method and system for video conferencing
KR20180111397A (ko) 외부 입력장치를 이용한 게임 가상 컨트롤러 생성 및 매핑 방법
US11435870B2 (en) Input/output controller and input/output control program
KR20130017241A (ko) 터치 스크린 단말기에서 입출력 방법 및 장치
KR20160072757A (ko) 원격 가상 컨트롤러 구성 및 터치 제어 방법
JP2013143144A (ja) ディスプレイ装置およびそのアイテム選択方法
KR20140113547A (ko) 하이라이트 네이게이션을 위한 가시적 피드백
CN104035716A (zh) 触摸屏操作方法和装置以及终端
KR20160019762A (ko) 터치 스크린 한손 제어 방법
KR20140142520A (ko) 터치 인터페이스를 제공하는 장치에서 터치 입력을 수신하는 방법 및 장치
CN103731712B (zh) 一种通过标识物对终端设备进行控制的方法和装置
JP6130583B1 (ja) 仮想空間内のオブジェクトを制御するコンピュータ・プログラムおよびコンピュータ実装方法
KR101652776B1 (ko) 터치 입력 제어 및 가상 매핑 방법
JP5767378B1 (ja) 仮想空間内のオブジェクトを制御するコンピュータ・プログラムおよびコンピュータ実装方法
JP6863918B2 (ja) 制御プログラム、制御方法及び情報処理装置
KR101260016B1 (ko) 스킨형 인터페이스를 이용한 포인터 인터페이스 구현 방법 및 이를 구현하는 터치스크린 기기
WO2015181986A1 (ja) プログラマブル表示器およびプログラマブル表示器の表示方法
KR101424970B1 (ko) 복수 개의 화면들을 디스플레이하는 디스플레이 장치를제어하는 방법 및 장치
KR101899884B1 (ko) 그래픽 사용자 인터페이스 장치 및 방법
CN110297589B (zh) 自定义虚拟按键位置自动排列方法、系统及虚拟输入装置
TW201835751A (zh) 功能型手機及其操作方法