KR101560748B1 - 스마트폰을 이용한 원격 제어 시스템 장치 및 그 동작 방법 - Google Patents

스마트폰을 이용한 원격 제어 시스템 장치 및 그 동작 방법 Download PDF

Info

Publication number
KR101560748B1
KR101560748B1 KR1020140089142A KR20140089142A KR101560748B1 KR 101560748 B1 KR101560748 B1 KR 101560748B1 KR 1020140089142 A KR1020140089142 A KR 1020140089142A KR 20140089142 A KR20140089142 A KR 20140089142A KR 101560748 B1 KR101560748 B1 KR 101560748B1
Authority
KR
South Korea
Prior art keywords
remote control
computer
screen
button
smartphone
Prior art date
Application number
KR1020140089142A
Other languages
English (en)
Inventor
유원석
Original Assignee
유원석
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 유원석 filed Critical 유원석
Priority to KR1020140089142A priority Critical patent/KR101560748B1/ko
Application granted granted Critical
Publication of KR101560748B1 publication Critical patent/KR101560748B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G06F9/452—Remote windowing, e.g. X-Window System, desktop virtualisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00—Indexing scheme relating to G06F9/00
    • G06F2209/54—Indexing scheme relating to G06F9/54
    • G06F2209/544—Remote

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)
  • Telephonic Communication Services (AREA)

Abstract

본 발명의 실시 형태는 화면상에 콘텐츠를 표시한 컴퓨터가, 원격 제어 선택을 받은 경우 고유 아이디를 생성하여 미리 설정된 웹주소를 가지는 원격 제어 서버에 전송하는 고유 아이디 전송 과정; 상기 컴퓨터가, 상기 원격 제어 서버의 웹주소와 상기 고유 아이디를 포함시킨 웹접속 URL을 생성하여 화면상에 표시하는 웹접속 URL 표시 과정; 스마트폰이, 상기 화면상에 표시된 웹접속 URL을 이용하여 상기 원격 제어 서버에 접속하는 스마트폰 접속 과정; 상기 원격 제어 서버가, 상기 스마트폰 접속시에 사용된 웹접속 URL에서 고유 아이디를 추출하여, 동일한 고유 아이디를 제공한 컴퓨터와 스마트폰을 동기화시키는 동기화 과정; 상기 스마트폰으로부터 컴퓨터의 화면 조작 명령을 입력받아 상기 원격 제어 서버에 전송하는 화면 조작 명령 생성 과정; 상기 원격 제어 서버가, 상기 스마트폰으로부터 수신한 화면 조작 명령을 원격 제어 메시지로서 상기 동기화된 컴퓨터에 전송하는 원격 제어 메시지 전송 과정; 및 상기 컴퓨터가, 상기 원격 제어 서버로부터 수신한 원격 제어 메시지에 따라서 화면상의 콘텐츠에 대하여 조작 제어를 수행하는 콘텐츠 조작 과정; 을 포함한다.

Description

스마트폰을 이용한 원격 제어 시스템 장치 및 그 동작 방법{Apparatus for remote controlling with smart phone and method for operating the same}
본 발명은 원격 제어 시스템 장치로서, 컴퓨터의 화면상의 콘텐츠에 대하여 스마트폰을 이용하여 원격에서 제어하는 스마트폰을 이용한 원격 제어 시스템 장치 및 그 제어 방법에 관한 것이다.
도 1에 도시한 바와 같이 PC 등의 컴퓨터는 키보드(10) 및 마우스(20) 등의 입력 하드웨어를 사용하여 웹사이트를 조작한다. 즉, 영어, 한글, 특수문자 등의 텍스트와 특정 조작을 간편하게 하기 위한 단축키 등을 입력하기 위한 키보드(10), 모니터(30)의 화면상의 좌표값을 이용하여 특정 지점을 클릭, 혹은 드래그를 통해서 원하는 페이지를 로드하거나 특정 액션을 작동시키는 마우스(20)를 이용하여 조작하게 된다.
사용자는 특정 웹사이트 URL을 키보드(10)를 통해 PC의 브라우저에 입력하게 되면 해당 웹사이트에 접속이 완료된다. 키보드(10)로 직접 입력하지 않고서도 특정 하이퍼링크를 마우스(20)로 클릭을 통해서 해당 웹사이트에 접속할 수 있다.
따라서 웹사이트 안에서의 하이퍼링크 이동, 특정 버튼 클릭, 스크롤, 그 밖의 다양한 인터랙션 등은 주로 마우스(20)를 통해서 조작된다. 사용자는 웹사이트 상에서 문서를 작성하거나 댓글을 작성할 때, 검색을 하거나 URL을 입력하는 등의 텍스트를 입력할 때 주로 키보드(10)를 사용하게 된다.
그런데 모니터(30)의 디스플레이만 존재하는 경우에는 웹사이트를 조작하는 것은 불가능하다. 또한 모니터(30) 이외에 키보드(10) 및 마우스(20)가 존재한다 하더라도 키보드(10) 및 마우스(20)를 조작하기 위하여 사용자는 항상 컴퓨터 테이블 위에 손을 얹히고 있는 불편한 자세를 유지해야 한다. 이는 즉, 웹사이트의 콘텐츠와 시야 사이의 정해진 거리를 필수적으로 유지해야 함을 의미하며, 눈의 피로, 거북목증후군, 손목 관절 피로 등을 유발할 수도 있다.
또한 키보드(10)나 마우스(20) 등의 하드웨어를 통한 입력이 물리적 버튼을 통해서 작동되기 때문에 구체적인 메뉴 네비게이션, 비디오 컨트롤러 등을 단일 화면 안에 다 담아내야 함으로 웹사이트의 레이아웃이 복잡해지고 인터페이스의 직관성을 다소 떨어트리게 된다.
또한, 개인 PC가 아닌 외부 등에서 스크린 혹은 프로젝터만으로 다수의 대중들에게 웹사이트의 조작이 가능하게 하는 것은 불가능하다. 키보드(10)나 마우스(20)가 반드시 존재해야 하며 이것들을 배치하는 일도 꽤 까다로운 일이다. 그 외에 터치 입력을 통한 터치스크린 방식이 존재하지만 이마저도 사람의 키를 넘는 대형 스크린에서의 조작은 불가능한 실정이다.
한국공개특허 10-2012-0071295
본 발명의 기술적 과제는 컴퓨터의 마우스, 키보드 등의 입력 하드웨어 장치가 없더라도 컴퓨터의 화면을 조작할 수 있도록 하는데 있다. 또한 본 발명의 기술적 과제는 스마트폰을 이용하여 컴퓨터의 화면을 원격에서 조작하도록 하는데 있다.
본 발명의 실시 형태는 화면상에 콘텐츠를 표시한 컴퓨터가, 원격 제어 선택을 받은 경우 고유 아이디를 생성하여 미리 설정된 웹주소를 가지는 원격 제어 서버에 전송하는 고유 아이디 전송 과정; 상기 컴퓨터가, 상기 원격 제어 서버의 웹주소와 상기 고유 아이디를 포함시킨 웹접속 URL을 생성하여 화면상에 표시하는 웹접속 URL 표시 과정; 스마트폰이, 상기 화면상에 표시된 웹접속 URL을 이용하여 상기 원격 제어 서버에 접속하는 스마트폰 접속 과정; 상기 원격 제어 서버가, 상기 스마트폰 접속시에 사용된 웹접속 URL에서 고유 아이디를 추출하여, 동일한 고유 아이디를 제공한 컴퓨터와 스마트폰을 동기화시키는 동기화 과정; 상기 스마트폰으로부터 컴퓨터의 화면 조작 명령을 입력받아 상기 원격 제어 서버에 전송하는 화면 조작 명령 생성 과정; 상기 원격 제어 서버가, 상기 스마트폰으로부터 수신한 화면 조작 명령을 원격 제어 메시지로서 상기 동기화된 컴퓨터에 전송하는 원격 제어 메시지 전송 과정; 및 상기 컴퓨터가, 상기 원격 제어 서버로부터 수신한 원격 제어 메시지에 따라서 화면상의 콘텐츠에 대하여 조작 제어를 수행하는 콘텐츠 조작 과정; 을 포함한다.
상기 웹접속 URL 표시 과정은, 상기 원격 제어 서버의 웹주소의 하위 디렉토리에 상기 고유 아이디를 포함시켜 생성한 웹접속 URL을 화면상에 표시한다.
상기 화면 조작 명령 생성 과정은, 상기 원격 제어 서버가, 컴퓨터 화면 조작 인터페이스가 포함된 웹 문서 파일을 생성하여 상기 스마트폰에 전송하는 컴퓨터 화면 조작 인터페이스 전송 과정; 상기 스마트폰이, 수신한 웹 문서 파일에 따라서 컴퓨터 화면 조작 인터페이스가 표시된 웹페이지를 디스플레이하는 과정; 상기 스마트폰이, 상기 컴퓨터 화면 조작 인터페이스를 이용하여 사용자로부터 화면 조작 명령을 입력받는 과정; 및 상기 스마트폰이, 상기 화면 조작 명령을 상기 원격 제어 서버에 전송하는 과정; 을 포함한다.
상기 고유 아이디 전송 과정은, 상기 컴퓨터가, 상기 콘텐츠의 종류도 함께 전송하며, 상기 컴퓨터 화면 조작 인터페이스 전송 과정은, 상기 원격 제어 서버가, 상기 콘텐츠의 종류에 따라서 상기 컴퓨터 화면 조작 인터페이스의 형태를 다르게 생성하여 상기 스마트폰에 전송한다.
상기 콘텐츠의 종류가 메뉴 선택 콘텐츠인 경우, 상기 화면 조작 인터페이스는, 메뉴 상세 안내 버튼, 상측 이동 버튼, 하측 이동 버튼, 우측 이동 버튼, 좌측 이동 버튼, 선택 버튼을 포함한다.
상기 콘텐츠의 종류가 동영상 콘텐츠인 경우, 상기 화면 조작 인터페이스는, 앞으로 탐색 버튼, 뒤로 탐색 버튼, 재생 버튼, 정지 버튼, 볼륨 조절 버튼, 전체 화면 버튼을 포함한다.
상기 콘텐츠의 종류가 정지 영상 콘텐츠인 경우, 상기 화면 조작 인터페이스는, 터치 경로를 파악할 수 있는 스와이핑 버튼, 다음번째 영상 표시 버튼, 이전 영상 표시 버튼, 확대 버튼, 축소 버튼을 포함한다.
상기 콘텐츠의 종류가 웹페이지인 경우, 상기 화면 조작 인터페이스는, 터치 경로를 파악할 수 있는 스와이핑 버튼, 선택 버튼을 포함한다.
본 발명의 실시 형태에 따르면, HTML5가 2014년 공식 최종 표준화(권고화) 되면서 기존의 PC 웹 환경을 벗어나 스마트폰 앱 및 OS, 스마트 안경, 스마트 손목시계, 스마트 티비를 포함한 각종 가전제품의 어플리케이션의 표준언어로서 확장 될 것으로 예상되는 가운데 기존 PC 환경에서 필수적이었던 키보드 및 마우스 조작방식을 벗어나 다양한 플랫폼에 적용된 새로운 웹 환경에서의 조작방식을 제공할 수 있다. 또한 본 발명의 실시 형태에 따르면, 현재 1인 1스마트폰 시대에서 별도의 리모트컨트롤러 장치 없이 사용자가 소지한 스마트폰으로 단순 주소 접속만을 통해서 웹을 컨트롤 할 수 있게 함으로서 가전용 스마트 티비, 공공 설치 디스플레이, 전시용 대형 디스플레이 등등에 폭넓게 응용할 수 있다. 또한 별도 리모트컨트롤러가 필요없음에 따라 분실 염려가 없고, 장비를 따로 구매하지 않아도 되는 효과를 가질 수 있다.
도 1은 컴퓨터를 도시한 그림이다.
도 2는 본 발명의 실시예에 따른 스마트폰을 이용한 원격 제어 시스템 장치의 구성 블록도.
도 3은 본 발명의 실시예에 따른 컴퓨터의 구성 블록도.
도 4는 본 발명의 실시예에 따른 스마트폰을 이용한 원격 제어 과정을 도시한 플로차트.
도 5는 본 발명의 실시예에 따라 웹접속 URL만을 컴퓨터 화면상에 표시한 모습을 도시한 그림.
도 6은 본 발명의 실시예에 따라 컴퓨터 화면 조작 인터페이스가 표시된 스마트폰의 화면 표시 예를 도시한 그림.
도 7은 본 발명의 실시예에 따라 컴퓨터 화면 조작 인터페이스에서 우측 이동 버튼이 눌리어진 경우 화면 조작 제어가 이루어지는 모습을 도시한 그림.
도 8은 본 발명의 실시예에 따라 컴퓨터에 표시되는 콘텐츠의 종류가 메뉴 선택 콘텐츠인 경우, 스마트폰에 표시되는 화면 조작 인터페이스를 도시한 그림.
도 9는 본 발명의 실시예에 따라 컴퓨터에 표시되는 콘텐츠의 종류가 동영상 콘텐츠인 경우, 스마트폰에 표시되는 화면 조작 인터페이스를 도시한 그림.
도 10은 본 발명의 실시예에 따라 컴퓨터에 표시되는 콘텐츠의 종류가 정지 영상 콘텐츠인 경우, 스마트폰에 표시되는 화면 조작 인터페이스를 도시한 그림.
이하, 이 발명이 속하는 기술분야에서 통상의 지식을 갖는 자가 이 발명을 용이하게 실시할 수 있을 정도로 상세히 설명하기 위하여, 이 발명의 가장 바람직한 실시예를 첨부된 도면을 참조로 하여 상세히 설명하기로 한다. 이 발명의 목적, 작용 효과를 포함하여 기타 다른 목적들, 특징점들, 그리고 동작상의 이점들이 바람직한 실시예의 설명에 의해서 보다 명확해질 것이다. 하기에서 각 도면의 구성요소들에 참조부호를 부가함에 있어 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다.
도 2는 본 발명의 실시예에 따른 스마트폰을 이용한 원격 제어 시스템 장치의 구성 블록도이며, 도 3은 본 발명의 실시예에 따른 컴퓨터의 구성 블록도이다.
유무선 통신망(400)은 컴퓨터(100), 스마트폰(200), 원격 제어 서버(300) 간에 데이터 송수신이 이루어지는 네트워크이다. 따라서 컴퓨터(100)는 유무선 통신망(400)을 통하여 원격 제어 서버(300)에 고유 아이디, 화면상에 표시되는 콘텐츠 종류를 전송할 수 있다. 원격 제어 서버(300)는 유무선 통신망(400)을 통하여 원격 제어 메시지를 컴퓨터(100)에 전송하며, 스마트폰(200)에 화면 조작 인터페이스를 전송할 수 있다. 스마트폰(200)은 유무선 통신망(400)을 통하여 원격 제어 서버(300)에 접속하여 고유 아이디를 전송할 수 있다. 이와 같은 유무선 통신망(400)은 무선 이동통신망 또는 네트워크 통신망으로 구현될 수 있다. 예를 들어, 3G, 4G, 와이파이(WiFi), 무선랜과 같은 무선 통신망을 이용하여 구현될 수 있으며, TCP/IP(Transmission Control Protocol/Internet Protocol) 등의 인터넷 프로토콜에 따른 인터넷 유선 통신망을 통하여 데이터들을 전송할 수 있다.
원격 제어 서버(300)는, 스마트폰(200)으로부터 웹접속 URL을 통한 접속이 있는 경우 웹접속 URL로부터 고유 아이디를 추출하여 고유 아이디를 가지는 컴퓨터(100)와 동기화하며, 스마트폰(200)으로부터 수신한 화면 조작 명령을 원격 제어 메시지로서 동기화된 컴퓨터(100)에 전송한다. 원격 제어 서버(300)는, 고유 아이디 추출 모듈(310)과, 원격 제어 동기화 관리 모듈(320), 화면 조작 인터페이스 생성 모듈(330)을 구비한다. 고유 아이디 추출 모듈(310)은, 컴퓨터(100)로부터 전송되는 고유 아이디 및 스마트폰(200)으로부터 전송되는 고유 아이디를 추출한다. 원격 제어 동기화 관리 모듈(320)은 컴퓨터(100)로부터 고유 아이디를 수신한 경우, 해당 고유 아이디를 가지는 동기화 태스크를 생성한다. 이러한 동기화 태스크는 고유 아이디, 컴퓨터(100)의 접속 IP가 포함된다. 동기화 태스크에는 동일한 고유 아이디를 전송한 스마트폰(200)을 컴퓨터(100)와 매칭하여, 스마트폰(200)이 전송한 화면 조작 명령을 화면 조작 메시지로서 매칭되어 동기화된 컴퓨터(100)로 중계 전송한다. 또한 화면 조작 인터페이스 생성 모듈(330)은, 컴퓨터의 화면을 조작할 수 있는 인터페이스를 생성한다. 특히, 컴퓨터(100)의 화면에 표시되고 있는 콘텐츠의 종류에 따라서 화면 조작 인터페이스가 각각 다른 형태로서 생성될 수 있다.
스마트폰(200)은 3G(3-Generation), 4G(4-Generation) 통신망을 통하여 인터넷 웹 접속이 가능한 단말기로서, 화면상에 표시된 웹접속 URL을 이용하여 원격 제어 서버(300)에 접속한다. 접속이 이루어진 후, 원격 제어 서버(300)로부터 컴퓨터 화면 조작 인터페이스를 수신하여 디스플레이하며, 디스플레이된 컴퓨터 화면 조작 인터페이스를 이용하여 사용자로부터 화면 조작 명령을 입력받아 다시 원격 제어 서버(300)에 전송한다. 따라서 사용자는 컴퓨터(100)의 화면에 대하여 컴퓨터(100)에 부착된 마우스, 키보드 등의 입력 하드웨어 장치의 조작없이도, 스마트폰(200) 화면상에서 컴퓨터(100)의 화면에 디스플레이되는 콘텐츠에 대하여 입력 조작을 할 수 있게 된다.
컴퓨터(100)는 고유 아이디를 생성하여 미리 설정된 웹주소를 가지는 원격 제어 서버(300)에 전송한다. 또한 원격 제어 서버(300)의 웹주소의 하위 디렉토리에 고유 아이디를 포함시켜 생성한 웹접속 URL을 생성하여 화면상에 표시한다. 그리고 원격 제어 서버(300)로부터 원격 제어 메시지를 수신한 경우 수신한 원격 제어 메시지에 따라서 화면 상의 콘텐츠에 대하여 조작 제어를 수행한다. 예를 들어, 원격 제어 서버(300)로부터 수신한 원격 제어 메시지가 '왼쪽 이동'인 경우, 컴퓨터(100)는 화면상에 표시되는 콘텐츠에 대하여 '왼쪽 이동'의 제어를 수행한다. 따라서 별도의 컴퓨터(100)에 연결된 키보드, 마우스 등의 입력 하드웨어가 없더라도, 서버로부터 수신한 원격 제어 메시지를 이용하여 컴퓨터(100)의 화면을 조작할 수 있게 된다. 이러한 컴퓨터(100)는, PC(Personal computer), 노트북 컴퓨터(notebook computer), 데스크탑 컴퓨터(desktop computer) 등이 있다. 물론, 본 발명이 적용 가능한 컴퓨터(100)는 상술한 종류에 한정되지 않고, 콘텐츠를 표시할 수 있는 화면을 가지면서 외부 장치와 통신이 가능한 모든 단말기를 포함할 수 있음은 당연하다.
본 발명의 실시예에 따른 컴퓨터(100)는, 표시부(110), 고유 아이디 생성부(120), 유무선 통신 접속부(130), 화면 제어 인터페이스부(140)를 포함한다.
표시부(110)는 LCD, LED 등의 모니터로서, 콘텐츠를 표시한다. 메뉴 선택 콘텐츠, 동영상 콘텐츠, 정지영상 콘텐츠, 웹페이지 등 다양한 종류의 콘텐츠가 표시부(110)에 디스플레이될 수 있다. 또한 표시부(110)는 고유 아이디가 포함된 웹접속 URL을 표시할 수 있다. 이렇게 표시된 웹접속 URL을 사용자가 스마트폰(200)에 입력하여 원격 제어 서버(300)에 웹접속할 수 있다.
고유 아이디 생성부(120)는, 사용자로부터 원격 제어 요청이 있는 경우 고유 아이디를 생성한다. 고유 아이디는 원격 제어 요청이 있을 때마다 랜덤하게 알파벳 형태로 생성될 수 있다. 이밖에, 랜덤하게 생성되지 않고, 컴퓨터(100)의 고유한 제조넘버(S/N), 컴퓨터(100)의 MAC 주소가 해당 컴퓨터(100)의 고유 아이디로 사용될 수 있다.
유무선 통신 접속부(130)는, 유무선 통신망(400)과 접속하여 통신을 수행하며, 고유 아이디를 원격 제어 서버(300)에 전송한다. 고유 아이디 이외에 표시부(110)의 화면상에 디스플레이되는 콘텐츠의 종류를 원격 제어 서버(300)에 전송할 수 있다.
화면 제어 인터페이스부(140)는, 원격 제어 서버(300)로부터 원격 제어 메시지를 수신한 경우 수신한 원격 제어 메시지에 따라서 화면상의 콘텐츠에 대하여 조작 제어를 수행한다. 예를 들어, 원격 제어 서버(300)로부터 수신한 원격 제어 메시지가 '왼쪽 이동'인 경우, 컴퓨터(100)는 화면상에 표시되는 콘텐츠에 대하여 '왼쪽 이동'의 제어를 수행한다.
도 4는 본 발명의 실시예에 따른 스마트폰을 이용한 원격 제어 과정을 도시한 플로차트이다.
우선 컴퓨터(100)는, 화면상에 콘텐츠를 표시한다(S402). 이러한 화면상에 표시되는 콘텐츠는, 다양한 종류가 있을 수 있는데, 메뉴 선택 콘텐츠, 동영상 콘텐츠, 정지영상 콘텐츠, 웹페이지 등 다양한 종류의 콘텐츠가 표시부(110)에 표시될 수 있다. 화면상에 표시되는 콘텐츠에 대하여 원격 제어 요청이 사용자로부터 있는지 판단한다. 원격 제어 요청은 화면상에 원격 제어 요청 버튼을 함께 표시하여 사용자로부터 선택받거나, 또는 원격 제어 프로그램 툴의 구동이 있는 경우 원격 제어 요청이 있다고 판단하는 등 다양한 방식의 원격 제어 요청 판단을 할 수 있다.
원격 제어 요청이 있는 경우, 컴퓨터(100)는, 원격 제어 서버(300)의 웹주소와 고유 아이디를 포함시킨 웹접속 URL을 생성하여 화면상에 표시하는 웹접속 URL 표시 과정을 가진다(S404). 웹접속 URL은 웹주소의 하위 디렉토리에 고유 아이디를 포함시켜 웹접속 URL을 생성할 수 있다. 예를 들어, 원격 제어 서버(300)의 웹주소가 "http://www.abc.co.kr"이고, 고유 아이디가 "1wQzVi"인 경우, 웹접속 URL은 "http://www.abc.co.kr/1wQzVi"로 생성된다.
웹접속 URL 표시 과정(S404)은, 콘텐츠에 중복하여 웹접속 URL을 함께 표시할 수 있다. 이밖에, 이전에 표시되던 콘텐츠 대신에 도 5에 도시한 바와 같이 웹접속 URL만을 화면상에 표시할 수 있다.
또한 컴퓨터(100)는, 고유 아이디를 생성하여 미리 설정된 웹주소를 가지는 원격 제어 서버(300)에 전송하는 고유 아이디 전송 과정을 가진다(S406). 여기서 고유 아이디는 원격 제어 요청이 있을 때마다 랜덤하게 알파벳 형태로 생성될 수 있다. 이 밖에, 랜덤하게 생성되지 않고, 컴퓨터(100)의 고유한 제조넘버(S/N), 컴퓨터(100)의 MAC 주소가 해당 컴퓨터(100)의 고유 아이디로 사용될 수 있다.
원격 제어 서버(300)가 고유 아이디를 수신한 경우, 원격 제어 서버(300)는, 고유 아이디 및 컴퓨터(100)의 접속 IP를 가지는 원격 제어 동기화 관리 모듈(320)을 생성하는 동기화 관리 모듈 생성 과정을 가진다(S408). 고유 아이디를 태스크 명칭으로 가지는 태스크 모듈을 원격 제어 동기화 관리 모듈(320)을 생성하고 고유 아이디를 전송한 컴퓨터(100)의 접속 IP를 해당 원격 제어 동기화 관리 모듈(320)에서 관리한다.
한편, 스마트폰(200)은, 컴퓨터(100)의 화면상에 표시된 웹접속 URL을 이용하여 상기 원격 제어 서버(300)에 접속하는 스마트폰(200) 접속 과정을 가진다(S410). 스마트폰(200)은 TCP/IP 프로토콜을 따라 웹접속 URL내의 웹주소 "http://www.abc.co.kr"에 접속한 후, 그 하위 디렉토리인 "1wQzVi"에 접속하려고 할 것이다. 참고로, 웹 접속이 이루어질 때, TCP/IP 프로토콜에 따라 헤더 정보에 데스티네이션 주소(destination address)로서 웹접속 URL이 기록된다.
스마트폰(200)의 접속을 인지한 원격 제어 서버(300)는, 헤더 정보 내의 웹접속 URL에서 하위 디렉토리 명칭인 "1wQzVi"를 고유 아이디로서 추출하고, "1wQzVi" 아이디를 가지는 원격 제어 동기화 관리 모듈(320)을 추출하여, 원격 제어 동기화 관리 모듈(320)에 저장된 컴퓨터 접속 IP와 스마트폰(200)을 동기화시키는 과정을 가진다(S412).
또한 이러한 동기화는, 하나의 컴퓨터(100)에 하나의 스마트폰(200)만을 동기화시킨다. 하나의 컴퓨터(100)에 여러 개의 스마트폰(200)을 동기화시킬 경우, 여러 개의 스마트폰(200)이 동시에 화면 조작을 할 경우 제어 조작 명령이 충돌되기 때문이다. 따라서 스마트폰(200)으로부터 수신한 웹접속 URL에서 추출한 고유 아이디가 이미 다른 스마트폰(200)으로부터 추출한 고유 아이디와 일치하여 다른 스마트폰(200)과 동기화가 이루어진 경우, 나중에 접속한 스마트폰(200)을 동기화하지 않고 원격 제어 불가 메시지를 나중에 접속한 스마트폰(200) 및 컴퓨터(100)에 전송하고 모든 과정을 종료한다.
또한 스마트폰(200)에서 전송한 고유 아이디와 일치하는 고유 아이디를 전송한 컴퓨터(100)가 있어 동기화가 이루어진 경우, 원격 제어 서버(300)는, 동기화된 컴퓨터(100)에 동기화 완료 메시지를 전송한다. 이러한 동기화 완료 메시지를 수신한 컴퓨터(100)는, 이전에 표시되던 웹접속 URL 대신에 콘텐츠만을 화면상에 표시한다. 동기화가 이루어졌기 때문에 웹접속 URL을 컴퓨터(100)의 화면에 더 이상 표시할 필요가 없기 때문이다.
한편, 동기화(S412)가 이루어지면, 스마트폰(200)으로부터 컴퓨터(100)의 화면 조작 명령을 입력받아 상기 원격 제어 서버(300)에 전송하는 화면 조작 명령 생성 과정을 가진다.
이러한 화면 조작 명령 생성 과정은, 우선, 원격 제어 서버(300)가, 컴퓨터 화면 조작 인터페이스가 포함된 웹 문서 파일을 생성하여 스마트폰(200)에 전송하는 컴퓨터 화면 조작 인터페이스 전송 과정을 가진다(S414). 이러한 웹 문서 파일은 HTML(Hypertext Markup Language) 파일, PHP(Hypertext Preprocessor) 파일 등이 해당될 수 있으며, 웹 문서 파일에 화면 조작 인터페이스의 실행 이미지나 실행 파일을 포함시킨다.
상기의 컴퓨터 화면 조작 인터페이스가 포함된 웹 문서 파일을 수신한 스마트폰(200)은, 웹 문서 파일에 기재된 내용에 따라서 컴퓨터 화면 조작 인터페이스가 표시된 웹페이지를 디스플레이한다(S416). 도 6에 컴퓨터 화면 조작 인터페이스가 표시된 스마트폰(200)의 화면 표시 예를 도시하였다. 컴퓨터 화면 조작 인터페이스는, 메뉴 버튼(201), 상하좌우 이동 버튼(203,204,205,206), 선택 버튼(202) 등의 다양한 인터페이스 버튼을 구비하고 있다.
스마트폰(200)은, 컴퓨터 화면 조작 인터페이스를 이용하여 사용자로부터 화면 조작 명령을 입력받는다(S418). 사용자는 컴퓨터(100)의 화면을 보면서, 컴퓨터(100)의 화면에 표시된 콘텐츠에 대하여 조작을 스마트폰(200)의 화면에 표시된 컴퓨터 화면 조작 인터페이스를 통하여 조작하게 된다.
스마트폰(200)은, 입력받는 화면 조작 명령을 원격 제어 서버(300)에 전송한다(S20). 예컨대, 화면 조작 명령이 포함된 웹 문서 파일을 고유 아이디가 포함된 웹접속 URL인 "http://www.abc.co.kr/1wQzVi"에 접속하여 전송한다.
상기에서 설명한 바와 같이, 스마트폰(200)으로부터 컴퓨터(100)의 화면 조작 명령을 입력받아 상기 원격 제어 서버(300)에 전송이 이루어지면, 원격 제어 서버(300)는, 스마트폰(200)으로부터 접속 요청이 있는 웹접속 URL인 "http://www.abc.co.kr/1wQzVi"에서 고유 아이디 "1wQzVi"를 추출하고, 수신한 웹 문서 파일에서 화면 조작 명령을 추출한다. 그리고, 수신한 고유 아이디에 동기화된 원격 제어 동기화 관리 모듈(320)에서 컴퓨터 접속 IP를 추출하여, 추출한 화면 조작 명령을 원격 제어 메시지로 생성한다(S422). 생성한 원격 제어 메시지는 컴퓨터 접속 IP를 가지는 컴퓨터(100)에 전송한다(S424).
컴퓨터(100)는, 상기 원격 제어 서버(300)로부터 수신한 원격 제어 메시지에 따라서 화면상의 콘텐츠에 대하여 조작 제어를 수행한다(S426). 예를 들어, 도 7(a)에 도시한 바와 같이, 스마트폰(200)의 화면상의 컴퓨터 화면 조작 인터페이스에서 우측 이동 버튼(206)이 눌리어진 경우, '우측 이동'이라는 원격 제어 메시지가 원격 제어 서버(300)로부터 컴퓨터(100)로 전달된다. 따라서 '우측 이동'이라는 원격 제어 메시지를 수신한 컴퓨터(100)는 도 7(b)에 도시한 바와 같이 컴퓨터(100)의 화면상에 표시된 선택 필드를 우측으로 이동시키는 화면 조작 제어를 수행한다.
한편, 스마트폰(200)의 화면상의 컴퓨터 화면 조작 인터페이스는 컴퓨터(100)의 화면에 디스플레이되는 콘텐츠의 종류에 따라서 각각 다른 형태로서 제공될 수 있다.
이를 위하여, 아이디 전송 과정에서, 컴퓨터(100)는, 컴퓨터(100)의 화면에 표시되는 콘텐츠의 종류도 함께 전송한다. 그리고, 컴퓨터 화면 조작 인터페이스 전송 과정에서, 원격 제어 서버(300)가, 콘텐츠의 종류에 따라서 컴퓨터 화면 조작 인터페이스의 형태를 다르게 생성하여 스마트폰(200)에 전송한다.
예를 들어, 도 8(a)에 도시한 바와 같이 컴퓨터(100)에 표시되는 콘텐츠의 종류가 메뉴 선택 콘텐츠인 경우, 도 8(b)에 도시한 바와 같이 스마트폰(200)에 표시되는 화면 조작 인터페이스는, 메뉴 상세 안내 버튼(201), 상측 이동 버튼(203), 하측 이동 버튼(204), 좌측 이동 버튼(205), 우측 이동 버튼(206), 선택 버튼(202)을 포함할 수 있다. 여기서 메뉴 선택 콘텐츠라 함은, 복수의 아이콘 필드 중에서 어느 하나의 아이콘 필드를 선택받는 콘텐츠를 말한다. 또한 메뉴 상세 안내 버튼(201)은, 각 아이콘 필드에 대한 상세 안내 설명 및 조작 설명을 요청받는 버튼이며, 상측 이동 버튼(203)은 상측으로 이동을 요청받는 버튼이며, 하측 이동 버튼(204)은 커서를 하측으로 한 단계 이동을 요청받는 버튼이며, 우측 이동 버튼(206)은 커서를 우측으로 한 단계 이동을 요청받는 버튼이며, 좌측 이동 버튼(205)은 커서를 좌측으로 한 단계 이동을 요청받는 버튼이며, 선택 버튼(202)은 커서가 위치한 아이콘 필드를 선택하도록 하는 버튼이다.
또한 도 9(a)에 도시한 바와 같이, 컴퓨터(100)에 표시되는 콘텐츠의 종류가 동영상 콘텐츠인 경우, 도 9(b)에 도시한 바와 같이 스마트폰(200)의 화면 조작 인터페이스는, 앞으로 탐색 버튼(211), 뒤로 탐색 버튼(214), 재생 버튼(212), 정지 버튼(213), 볼륨 조절 버튼(215), 전체 화면 버튼(216)을 포함할 수 있다. 여기서 앞으로 탐색 버튼(211)은, 동영상의 재생구간을 앞으로 전진시키는 버튼을 말하며, 뒤로 탐색 버튼(214)은 동영상의 재생 구간을 뒤로 후진시키는 버튼을 말하며, 재생 버튼(212)은 동영상을 재생시키는 버튼을 말하며, 정지 버튼(213)은 동영상의 재생을 정지시키는 버튼을 말하며, 볼륨 버튼(215)은 동영상의 소리를 조절하는 버튼을 말하며, 전체 화면 버튼(216)은 동영상을 컴퓨터(100)의 화면 전체에 표시하도록 하는 버튼을 말한다.
또한 도 10(a)에 도시한 바와 같이, 컴퓨터(100)에 표시되는 콘텐츠의 종류가 정지영상 콘텐츠인 경우, 도 10(b)에 도시한 바와 같이 화면 조작 인터페이스는, 터치 경로를 파악할 수 있는 스와이핑 버튼(221), 다음번째 영상 표시 버튼(224), 이전 영상 표시 버튼(222), 확대 버튼(225), 축소 버튼(226)을 포함할 수 있다. 여기서 스와이핑 버튼(221)은, 손가락의 스와이핑(swiping,터치한 상태로 미는 동작)를 인식하는 버튼이며, 다음번째 영상 표시 버튼(224)은, 다음 번째의 정지 영상을 표시하도록 하는 버튼이며, 이전 영상 표시 버튼(222)은 이전의 정지 영상을 표시하도록 하는 버튼을 말하며, 확대 버튼(225)은 정지영상을 확대하여 표시하도록 하는 버튼을 말하며, 축소버튼(226)은 정지영상을 축소하여 표시하도록 하는 버튼을 말한다.
또한 컴퓨터(100)에 표시되는 콘텐츠의 종류가 '구글', '네이버', '다음'과 같은 웹페이지인 경우, 터치 경로를 파악할 수 있는 스와이핑 버튼, 선택 버튼을 포함할 수 있다. 스와이핑 버튼은, 손가락의 스와이핑(swiping,터치한 상태로 미는 동작)를 인식하는 버튼이며, 선택버튼은 커서의 현재 위치에서 클릭이 이루어지도록 하는 버튼이다. 따라서 컴퓨터(100)의 화면상에 표시된 웹페이지 상에 커서가 위치한 경우, 스마트폰(200)의 화면상에서 스와이핑 동작에 의하여 스와이핑 경로에 따라서 컴퓨터 화면상의 커서가 이동될 수 있으며, 선택 버튼의 조작에 의하여 커서의 클릭이 이루어질 수 있다.
상술한 본 발명의 설명에서의 실시예는 여러 가지 실시가능한 예 중에서 당업자의 이해를 돕기 위하여 가장 바람직한 예를 선정하여 제시한 것으로, 이 발명의 기술적 사상이 반드시 이 실시예만 의해서 한정되거나 제한되는 것은 아니고, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 다양한 변화와 변경 및 균등한 타의 실시예가 가능한 것이다.
100:컴퓨터 200:스마트폰
300:원격제어서버 400:유무선 통신망

Claims (8)

  1. 화면상에 콘텐츠를 표시한 컴퓨터가, 원격 제어 선택을 받은 경우 고유 아이디를 생성하여 미리 설정된 웹주소를 가지는 원격 제어 서버에 전송하는 고유 아이디 전송 과정;
    상기 컴퓨터가, 상기 원격 제어 서버의 웹주소와 상기 고유 아이디를 포함시킨 웹접속 URL을 생성하여 화면상에 표시하는 웹접속 URL 표시 과정;
    스마트폰이, 상기 화면상에 표시된 웹접속 URL을 이용하여 상기 원격 제어 서버에 접속하는 스마트폰 접속 과정;
    상기 원격 제어 서버가, 상기 스마트폰 접속시에 사용된 웹접속 URL에서 고유 아이디를 추출하여, 동일한 고유 아이디를 제공한 컴퓨터와 스마트폰을 동기화시키는 동기화 과정;
    상기 스마트폰으로부터 컴퓨터의 화면 조작 명령을 입력받아 상기 원격 제어 서버에 전송하는 화면 조작 명령 생성 과정;
    상기 원격 제어 서버가, 상기 스마트폰으로부터 수신한 화면 조작 명령을 원격 제어 메시지로서 상기 동기화된 컴퓨터에 전송하는 원격 제어 메시지 전송 과정; 및
    상기 컴퓨터가, 상기 원격 제어 서버로부터 수신한 원격 제어 메시지에 따라서 화면상의 콘텐츠에 대하여 조작 제어를 수행하는 콘텐츠 조작 과정;
    을 포함하는 스마트폰을 이용한 원격 제어 방법.
  2. 청구항 1에 있어서, 상기 웹접속 URL 표시 과정은,
    상기 원격 제어 서버의 웹주소의 하위 디렉토리에 상기 고유 아이디를 포함시켜 생성한 웹접속 URL을 화면상에 표시하는 스마트폰을 이용한 원격 제어 방법.
  3. 청구항 1에 있어서, 상기 화면 조작 명령 생성 과정은,
    상기 원격 제어 서버가, 컴퓨터 화면 조작 인터페이스가 포함된 웹 문서 파일을 생성하여 상기 스마트폰에 전송하는 컴퓨터 화면 조작 인터페이스 전송 과정;
    상기 스마트폰이, 수신한 웹 문서 파일에 따라서 컴퓨터 화면 조작 인터페이스가 표시된 웹페이지를 디스플레이하는 과정;
    상기 스마트폰이, 상기 컴퓨터 화면 조작 인터페이스를 이용하여 사용자로부터 화면 조작 명령을 입력받는 과정; 및
    상기 스마트폰이, 상기 화면 조작 명령을 상기 원격 제어 서버에 전송하는 과정;
    을 포함하는 스마트폰을 이용한 원격 제어 방법.
  4. 청구항 3에 있어서,
    상기 고유 아이디 전송 과정은, 상기 컴퓨터가, 상기 콘텐츠의 종류도 함께 전송하며,
    상기 컴퓨터 화면 조작 인터페이스 전송 과정은, 상기 원격 제어 서버가, 상기 콘텐츠의 종류에 따라서 상기 컴퓨터 화면 조작 인터페이스의 형태를 다르게 생성하여 상기 스마트폰에 전송하는 스마트폰을 이용한 원격 제어 방법.
  5. 청구항 4에 있어서, 상기 콘텐츠의 종류가 메뉴 선택 콘텐츠인 경우,
    상기 화면 조작 인터페이스는, 메뉴 상세 안내 버튼, 상측 이동 버튼, 하측 이동 버튼, 우측 이동 버튼, 좌측 이동 버튼, 선택 버튼을 포함하는 스마트폰을 이용한 원격 제어 방법.
  6. 청구항 4에 있어서, 상기 콘텐츠의 종류가 동영상 콘텐츠인 경우,
    상기 화면 조작 인터페이스는, 앞으로 탐색 버튼, 뒤로 탐색 버튼, 재생 버튼, 정지 버튼, 볼륨 조절 버튼, 전체 화면 버튼을 포함하는 스마트폰을 이용한 원격 제어 방법.
  7. 청구항 4에 있어서, 상기 콘텐츠의 종류가 정지 영상 콘텐츠인 경우,
    상기 화면 조작 인터페이스는, 터치 경로를 파악할 수 있는 스와이핑 버튼, 다음번째 영상 표시 버튼, 이전 영상 표시 버튼, 확대 버튼, 축소 버튼을 포함하는 스마트폰을 이용한 원격 제어 방법.
  8. 청구항 4에 있어서, 상기 콘텐츠의 종류가 웹페이지인 경우,
    상기 화면 조작 인터페이스는, 터치 경로를 파악할 수 있는 스와이핑 버튼, 선택 버튼을 포함하는 스마트폰을 이용한 원격 제어 방법.
KR1020140089142A 2014-07-15 2014-07-15 스마트폰을 이용한 원격 제어 시스템 장치 및 그 동작 방법 KR101560748B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140089142A KR101560748B1 (ko) 2014-07-15 2014-07-15 스마트폰을 이용한 원격 제어 시스템 장치 및 그 동작 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140089142A KR101560748B1 (ko) 2014-07-15 2014-07-15 스마트폰을 이용한 원격 제어 시스템 장치 및 그 동작 방법

Publications (1)

Publication Number Publication Date
KR101560748B1 true KR101560748B1 (ko) 2015-10-15

Family

ID=54357110

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140089142A KR101560748B1 (ko) 2014-07-15 2014-07-15 스마트폰을 이용한 원격 제어 시스템 장치 및 그 동작 방법

Country Status (1)

Country Link
KR (1) KR101560748B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022169101A1 (ko) * 2021-02-02 2022-08-11 삼성전자주식회사 사용자 단말장치 및 이의 제어 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007306100A (ja) * 2006-05-09 2007-11-22 Matsushita Electric Ind Co Ltd サーバー、コントローラおよびそのプログラム
JP2009159188A (ja) * 2007-12-26 2009-07-16 Hitachi Ltd コンテンツ表示用サーバ
KR20130009186A (ko) * 2011-07-14 2013-01-23 에스케이플래닛 주식회사 사용자 단말 장치와 영상출력장치간 컨텐츠 공유 시스템, 그리고 이를 위한 방법 및 기록매체
KR20130130508A (ko) * 2012-05-22 2013-12-02 심플렉스 인터넷 주식회사 네트워크 상에서 제어 신호를 중계하는 서버, 상기 서버를 기반으로 하는 제어 시스템, 네트워크 상에서 제어 신호를 중계하는 방법 및 원격 제어 장치가 제어 대상 장치를 제어하는 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007306100A (ja) * 2006-05-09 2007-11-22 Matsushita Electric Ind Co Ltd サーバー、コントローラおよびそのプログラム
JP2009159188A (ja) * 2007-12-26 2009-07-16 Hitachi Ltd コンテンツ表示用サーバ
KR20130009186A (ko) * 2011-07-14 2013-01-23 에스케이플래닛 주식회사 사용자 단말 장치와 영상출력장치간 컨텐츠 공유 시스템, 그리고 이를 위한 방법 및 기록매체
KR20130130508A (ko) * 2012-05-22 2013-12-02 심플렉스 인터넷 주식회사 네트워크 상에서 제어 신호를 중계하는 서버, 상기 서버를 기반으로 하는 제어 시스템, 네트워크 상에서 제어 신호를 중계하는 방법 및 원격 제어 장치가 제어 대상 장치를 제어하는 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022169101A1 (ko) * 2021-02-02 2022-08-11 삼성전자주식회사 사용자 단말장치 및 이의 제어 방법

Similar Documents

Publication Publication Date Title
US10552518B2 (en) Administration of web page
US8375328B2 (en) Implementing customized control interfaces
KR101733115B1 (ko) 원격 스크린내 콘텐츠 원격 제어 방법 및 장치
US20160170703A1 (en) System and method for linking and controlling terminals
US20130198653A1 (en) Method of displaying input during a collaboration session and interactive board employing same
CN108885521A (zh) 跨环境共享
JP2015090570A (ja) 情報処理装置および制御方法
US20160092152A1 (en) Extended screen experience
CN103176690A (zh) 显示控制设备、显示控制方法和程序
CN103747308A (zh) 用模拟按键控制智能电视的方法和系统、移动终端
CN110708527A (zh) 图像显示装置、图像显示装置的图像显示方法及存储介质
WO2017096813A1 (zh) 网页展示方法、移动终端、智能终端、程序和存储介质
TW200538959A (en) Simple input method for a web browser
Simeone et al. A cross-device drag-and-drop technique
KR101914207B1 (ko) 셋톱박스
KR20140103363A (ko) 메신저 시스템 및 이에 있어서 메신저 서비스 방법
CN104699407B (zh) 一种字符输入方法及装置
KR101560748B1 (ko) 스마트폰을 이용한 원격 제어 시스템 장치 및 그 동작 방법
KR20150008688A (ko) 디스플레이장치 및 그 제어방법
Huang et al. A Toolkit for Prototyping Tabletop-Centric Cross-Device Interaction
KR20210130510A (ko) 스마트폰 원격 제어 시스템 및 그 작동 방법
Huang et al. Investigating one-handed and two-handed inter-device interaction
JP2009169883A (ja) Ｗｅｂブラウザの簡易操作方法
TW201627853A (zh) 多點手寫輸入控制系統及方法
JP2014197256A (ja) 編集装置、編集方法、及びプログラム

Legal Events

Date Code Title Description
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee