KR20140080726A - 동적 스크립트를 이용한 원격 제어 장치 및 방법 - Google Patents

동적 스크립트를 이용한 원격 제어 장치 및 방법 Download PDF

Info

Publication number
KR20140080726A
KR20140080726A KR1020120146416A KR20120146416A KR20140080726A KR 20140080726 A KR20140080726 A KR 20140080726A KR 1020120146416 A KR1020120146416 A KR 1020120146416A KR 20120146416 A KR20120146416 A KR 20120146416A KR 20140080726 A KR20140080726 A KR 20140080726A
Authority
KR
South Korea
Prior art keywords
control module
control
terminal
event
controlled terminal
Prior art date
Application number
KR1020120146416A
Other languages
English (en)
Inventor
이문수
권승준
김민정
김선중
조기성
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020120146416A priority Critical patent/KR20140080726A/ko
Priority to US13/933,365 priority patent/US20140167936A1/en
Publication of KR20140080726A publication Critical patent/KR20140080726A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1431—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display using a single graphics controller
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/06009—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
    • G06K19/06037—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking multi-dimensional coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B5/00—Near-field transmission systems, e.g. inductive or capacitive transmission systems
    • H04B5/70—Near-field transmission systems, e.g. inductive or capacitive transmission systems specially adapted for specific purposes
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/30—User interface
    • G08C2201/33—Remote control using macros, scripts
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/90—Additional features
    • G08C2201/93—Remote control using other portable devices, e.g. mobile phone, PDA, laptop

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)
  • Selective Calling Equipment (AREA)
  • Stored Programmes (AREA)

Abstract

제어 단말에서의 동적 스크립트를 이용한 원격 제어 방법으로, 피제어 단말를 제어하기 위해 동적 스크립트로 작성된 제어 모듈을 획득하는 단계와, 상기 획득된 제어 모듈을 동적 스크립트 문자열로 생성하는 단계와, 상기 생성된 동적 스크립트를 실행하는 단계와, 상기 실행된 제어 모듈을 통해 상기 피제어 단말과 연결 접속하는 단계와, 상기 제어 UI를 출력하는 단계와, 실행된 제어 모듈에 포함되어 있는 원격 제어를 위한 그래픽 사용자 인터페이스(Graphic User Interface : GUI)를 시각화하여 화면에 출력하는 단계와, 상기 그래픽 사용자 인터페이스를 통해 사용자로부터 입력된 이벤트 정보를 상기 피제어 단말에 전송하는 단계를 포함한다.

Description

동적 스크립트를 이용한 원격 제어 장치 및 방법{Apparatus and Method for Remote Control using Dynamic Script}
본 발명은 원격 제어 장치 및 방법에 관한 것으로, 특히 사용자가 소지하는 단말을 이용하여 원거리에 위치하는 피제어 단말을 제어하는 장치 및 방법에 관한 것이다.
최근의 모바일 기기의 발전과 시장 보급 확대로 인해 개인이 소지하거나 접근 가능한 장치들의 개수가 점점 늘어나고 있다. 이로 인해 자신이 소지한 장치들 중에서 콘텐츠별로 최적화된 스크린에서 디스플레이하고자 요구가 발생하고 있다. 현재 이러한 요구를 충족시켜주는 기술로서 통신 사업자나 콘텐츠 제공 사업자들은 N-스크린이나 디지털 사이니지 서비스들을 제공하고 있다.
N-스크린 서비스는 사용자가 소비하고 있는 콘텐츠들이 단말간 이동을 통해 다양한 단말에서 끊김없이 공유될 수 있도록 해 준다. 하지만, N-스크린 서비스에서는 파일 단위의 이미지, 음악, 동영상 등과 같은 조작이나 제어가 간단한 콘텐츠가 주로 사용되고 있다. 그리고 해당 콘텐츠를 제공하기 위해 서는 클라우드 서버와 같이 별도의 서버를 구축 하고, 이를 지속적으로 유지 관리해야 하기 때문에 많은 비용이 소요된다.
이러한 서버 비용을 들이지 않고 댁내에서 간단하게 사용할 수 있는 N-스크린 서비스의 대표적인 기술로 DLNA(Digital Living Network Alliance)가 있다. 이는 단말간 콘텐츠를 공유 및 원격 제어하기 위해 클라우드 또는 서버 기반의 N-스크린 서비스와 달리 별도의 서버를 구축하지 않는다. 대신에 피어 투 피어(P2P) 통신을 이용하여 단말간 멀티 미디어 서비스를 공유될 수 있도록 한다. 따라서, DLNA 방식은 서버 기반 N-스크린 서비스와 비교하여 다양한 콘텐츠에 대한 유지 관리 비용면에서 유리하나, 단말기 내에 DLNA 기능을 지원하는 소프트웨어 스택을 미리 설치하고 있어야 한다. 또한, 지원하는 콘텐츠 종류가 다양해짐에 따라, 소프트웨어 스택에 클라이언트-서버간 통신 프로토콜이 추가되도록 정의하거나, 개발하는 것이 필요하고, 지속적으로 업데이트되어야 한다.
본 발명은 별도의 서버 장치가 필요없이 동적 스크립트를 이용하여 작성된 제어 모듈을 이용하여 제어 단말에서 원격의 피제어 단말을 제어하는 장치 및 방법에 관한 것이다.
피제어 단말은 피제어 단말을 제어하기 위한 제어모듈을 동적 스크립트로 가지고 있으며 제어 단말에 제공하는 제어 모듈 제공부와, 상기 제어 모듈을 수신한 제어 단말과 접속 연결이 이루어진 후, 상기 제어 단말로부터 사용자 이벤트를 수신하여, 수신된 사용자 이벤트를 해석한 결과에 따라 내부 동작을 제어하는 이벤트 해석부를 포함한다.
제어 단말은 원격으로 피제어 단말을 제어하기 위한 제어 모듈을 획득하여 동적 스크립트 문자열로 생성하는 제어 모듈 획득부와, 상기 제어 모듈 획득부가 생성한 동적 스크립트를 실행하는 스크립트 실행 엔진과, 상기 스크립트 실행 엔진에 의해 실행된 제어 모듈에 포함되어 있는 원격 제어를 위한 그래픽 사용자 인터페이스(Graphic User Interface : GUI)를 시각화하여 화면에 출력하는 인터페이스 처리부와, 상기 그래픽 사용자 인터페이스를 통해 사용자로부터 입력된 이벤트 정보를 상기 피제어 단말에 전송하는 이벤트 전송부를 포함한다.
피제어 단말에서의 동적 스크립트를 이용한 원격 제어 방법으로, 원격으로 피제어 단말을 제어하기 위한 제어 모듈을 동적 스크립트를 이용하여 생성하는 단계와, 생성된 제어 모듈을 제어 단말에 제공하는 단계와, 상기 제어 모듈을 수신한 제어 단말과 접속 연결되는 단계와, 상기 제어 단말로부터 사용자 이벤트를 수신하는 단계와, 수신된 사용자 이벤트를 해석하는 단계와, 사용자 이벤트를 해석한 결과에 따라 내부 동작을 제어하는 단계를 포함한다.
제어 단말에서의 동적 스크립트를 이용한 원격 제어 방법으로, 피제어 단말를 제어하기 위해 동적 스크립트로 작성된 제어 모듈을 획득하는 단계와, 상기 획득된 제어 모듈을 동적 스크립트 문자열로 생성하는 단계와, 상기 생성된 동적 스크립트를 실행하는 단계와, 상기 실행된 제어 모듈을 통해 상기 피제어 단말과 연결 접속하는 단계와, 실행된 제어 모듈에 포함되어 있는 원격 제어를 위한 그래픽 사용자 인터페이스(Graphic User Interface: GUI)를 시각화하여 화면에 출력하는 단계와, 상기 그래픽 사용자 인터페이스를 통해 사용자로부터 입력된 이벤트 정보를 상기 피제어 단말에 전송하는 단계를 포함한다.
본 발명의 구성에 따르면, 인터넷이 연결된 장치들간 연동하기 위하여 사전에 설치된 클라이언트 어플리케이션이나 기기간 상호 중계하기 위한 서버 장치 없이 언제 어디서나 원격에서 타 정보 기기를 자유롭게 제어할 수 있다.
따라서, 장치간 연결/제어를 위한 클라이언트 어플리케이션을 모두 설치해서 가지고 다닐 필요가 없으며, 서버 구축 및 유지 관리 비용을 들지 않는 이점이 있다. 또한, 장치나 제공 서비스의 특성에 맞게 사용하기 편리한 원격 제어 GUI를 실시간으로 제공해 줄 수 있는 장점도 있다.
도 1은 본 발명의 일 실시 예에 따른 단말들 간의 원격 제어를 위한 개략적인 구성을 도시한 도면이다.
도 2는 본 발명의 일 실시 예에 따른 원격 제어를 수생하는 피제어 단말과 제어 단말의 상세 구성을 도시한 도면이다.
도 3은 본 발명의 HTML 문서 형태의 제어 모듈의 일 실시 예를 도시한 도면이다.
도 4는 본 발명의 제어 모듈 송수신의 일 실시 예를 설명하기 위한 도면이다.
도 5는 본 발명의 제어 모듈 송수신의 다른 실시 예를 설명하기 위한 도면이다.
도 6은 본 발명의 일 실시 예에 따라 동적 스크립트를 이용하여 원격 제어하는 방법을 설명하기 위한 흐름도이다.
이하, 첨부된 도면을 참조하여 기술되는 바람직한 실시 예를 통하여 본 발명을 당업자가 용이하게 이해하고 재현할 수 있도록 상세히 기술하기로 한다.
본 발명을 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명 실시 예들의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.
명세서 전반에 걸쳐 사용되는 용어들은 본 발명 실시 예에서의 기능을 고려하여 정의된 용어들로서, 사용자 또는 운용자의 의도, 관례 등에 따라 충분히 변형될 수 있는 사항이므로, 이 용어들의 정의는 본 발명의 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 본 발명의 일 실시 예에 따른 단말들 간의 원격 제어를 위한 개략적인 구성을 도시한 도면이다.
도 1을 참조하면, 본 발명은 피제어 단말(100)과 제어 단말(110)로 구성된다. 각 단말들(100, 110)은 데스크탑, 노트북, 스마트폰, 모바일 단말 등과 같이 동적 스크립트를 해석하고 실행할 수 있는 연산 기능과, 네트워크를 연결하기 위한 유/무선 IP 네트워크 연결 기능을 포함한다. 또한, 터치 스크린, 마우스, 마이크, 카메라 등을 포함하는 사용자(120)가 단말(100, 110)에 정보를 입력할 수 있는 입력 인터페이스와, 모니터, 프로젝터, HMD(Head-mounted Display), HUD(Head-up Display), 스피커 등을 포함하는 사용자(12)가 정보를 인지할 수 있도록 출력하기 위한 출력 인터페이스를 포함한다. 이러한 입력 인터페이스 및 출력 인터페이스는 단말들(100, 110)의 기본적인 구성이므로, 이하 도면에서는 생략하기로 한다.
피제어 단말(100)은 단말 내 콘텐츠나 어플리케이션을 제어하기 위해 동적 스크립트로 정의된 제어 모듈을 저장한다. 제어 단말(110)은 제어 모듈을 획득하여 사용자(120)에게 원격 제어 그래픽 유저 인터페이스(Graphic User Interface; GUI)를 시각화하여 화면에 출력한다. 사용자(120)가 GUI 기반 명령을 입력함에 따라, 제어 단말(110)은 원격에 있는 피제어 단말(100)에 제어 정보로 전송한다.
도 2는 본 발명의 일 실시 예에 따른 원격 제어를 수행하는 피제어 단말과 제어 단말의 상세 구성을 도시한 도면이다.
도 2를 참조하면, 제어 모듈을 제공하거나 원격 제어 신호를 수신하는 피제어 단말(200), 사용자(120)로부터 입력된 제어 정보에 따라 피제어 단말(200)을 원격 제어하는 제어 단말(220)로 구성된다. 그리고, 피제어 단말(200)과 제어 단말(220) 간에 제어모듈이 송수신됨에 따라, 이러한 원격 제어가 가능하다.
제어모듈을 송수신하는 방법은 다양한 실시 예가 가능하다. 일 예로, QR 마크, 문자 인식 등 영상으로 텍스트를 인식하는 방식이 있을 수 있다. 이에 대해 도 4를 참조하여 설명하기로 한다. 다른 예로, IR 센서, NFC(Near Field Communication) 센서, Direct Wifi, 블루투스 등 피어 투 피어 방식의 통신할 수 있는 무선 전송 방식이 가능하다. 이에 대해 도 5를 참조하여 상세히 설명하기로 한다.
피제어 단말(200)은 상세하게는 콘텐츠 출력 처리부(201), 이벤트 해석부(202) 및 제어 모듈 제공부(203)를 포함한다.
콘텐츠 출력 처리부(201)는 피제어 단말(201)에서 피제어 콘텐츠를 화면에 표시해주는 장치로서, 콘텐츠로는 텍스트, 이미지, 동영상, 윈도우 패널 및 어플리케이션 등 다양한 내부 서비스가 가능하다.
제어 모듈 제공부(203)는 제어모듈을 제어 단말(220)에 전송하는데, 전송 방법은 다양한 실시 예가 가능하다. 일 예로, QR 마크, 문자 인식 등 영상으로 텍스트를 인식하는 방식이 있을 수 있다. 이에 대해 도 4를 참조하여 설명하기로 한다. 다른 예로, IR 센서, NFC(Near Field Communication) 센서, Direct Wifi, 블루투스 등 피어 투 피어 방식의 통신할 수 있는 무선 전송 방식이 가능하다. 이에 대해 도 5를 참조하여 상세히 설명하기로 한다.
이벤트 해석부(202)는 제어모듈에 의해 단말간 접속이 이루어진 후, 제어 단말(220)로부터 사용자 이벤트 정보를 수신하여, 수신된 사용자 이벤트를 해석한 결과에 따라 피제어 단말(200)에서 제공되는 서비스들을 제어한다.
제어 단말(220)은 제어 인터페이스 처리부(221), 스크립트 실행 엔진(222), 제어 모듈 획득부(223) 및 이벤트 전송부(224)를 포함한다.
제어 모듈 획득부(223)는 피제어 단말(200)로부터 제어모듈을 획득하고, 획득된 제어 모듈을 동적 스크립트 문자열로 생성한다. 여기서, 제어모듈을 획득하는 방법은 다양한 실시 예가 가능하다. 일 예로, QR 마크, 문자 인식 등 영상으로 텍스트를 인식하는 방식이 있을 수 있다. 이에 대해 도 4를 참조하여 설명하기로 한다. 다른 예로, IR 센서, NFC(Near Field Communication) 센서, Direct Wifi, 블루투스 등 피어 투 피어 방식의 통신할 수 있는 무선 전송 방식이 가능하다. 이에 대해 도 5를 참조하여 상세히 설명하기로 한다.
스크립트 실행 엔진(222)은 제어 모듈 획득부(223)가 생성한 동적 스크립트를 해석하고 실행한다. 동적 스크립트는 단말의 운영체제(OS)와 무관한 HTML, 자바스크립트, Python, Perl 등을 포함하는 텍스트 형태의 문자열로서 동적으로 실행 가능한 프로그램 모듈을 말한다. 그리고, 스크립트 실행 엔진(222)은 독립(Stand-alone) 형태의 실행 애플리케이션이 될 수도 있고, 웹 브라우저나 웹 OS 등에 탑재된 스크립트 엔진이 될 수도 있다.
제어 인터페이스 처리부(221)는 제어 모듈(230)에 포함되어 있는 가상 키보드, 메뉴판 등 GUI의 뷰어 부분을 시각화하여 화면에 출력한다.
이벤트 전송부(224)는 제어 인터페이스 처리부(221)에 의해 표출된 GUI 기반 사용자 이벤트 정보가 입력됨에 따라, 해당 이벤트 정보를 피제어 단말(200)로 전송한다.
도 3은 본 발명의 HTML 문서 형태의 제어 모듈의 일 실시 예를 도시한 도면이다.
그러나, 제어 모듈은 HTML 문서에 국한되지 않으며 순수 자바스크립트, Python, Perl, 사용자 정의 스크립트 등 다양한 형태로 작성될 수 있다.
도 3을 참조하면, 제어모듈(300)은 웹 리소스 참조 블록(302), 통신 연결 접속 블록(302), 사용자 이벤트 처리부 블록(303) 및 제어 GUI 표출부 블록(304)을 포함한다.
웹 리소스 참조 블록(302)은 웹을 통해 용량이 큰 로직이나 공통적으로 사용되는 라이브러리를 제어 단말(200)로 다운로드하기 위한 라이브러리를 정의하게 된다. 이는 제어 모듈(300) 자체가 용량이 작아 화려한 그래픽 UI나 이미지를 포함하지 못할 경우가 많으므로, 공통적으로 자주 사용되는 라이브러리의 경우 피제어 단말(100)에서보다는 웹에 있는 리소스를 다운로드 받도록 한다.
통신 연결 접속 블록(302)은 피제어 단말(100)과 연결 접속하는 코드 블록이다. 연결 접속 방식으로는 소켓, 웹 소켓, RPC(Remote Procedure Call) 등을 포함하는 다양한 IP 기반 유무선 네트워크 연결이 있을 수 있다. 통신 연결 접속부(302)의 주요 로직은 접속하고자 하는 피제어 단말(200)의 IP, 포트, 사용자 ID 등 접속에 필요한 정보와 연결 접속 방법을 스크립트로 작성된다.
사용자 이벤트 처리 블록(303)는 사용자가 터치 스크린, 키보드, 마우스, 전자 펜 등을 포함하는 입력 인터페이스를 통해 사용자 입력 이벤트를 입력함에 따라, 해당 명령 이벤트를 통신 연결 접속 블록(302)을 통해 피제어 단말(200)로 전송하게 된다.
제어 GUI 표출부 블록(304)은 피제어 단말(200)을 제어하기 위한 제어 GUI를 출력한다. 예컨대, 피제어 단말(200)을 제어하기 위한 메뉴, 옵션 또는 입력 상자등이 포함될 수 있다.
도 4는 본 발명의 제어 모듈 송수신의 일 실시 예를 설명하기 위한 도면이다.
도 4를 참조하면, 피제어 단말의 제어 모듈 제공부(400)는 제어모듈(401), QR 마크 인코더(402), QR 마크 화면 출력 처리부(403)를 포함할 수 있다.
QR 마크 생성은 모니터, 프로젝트, HUD, HMD, 투명 디스플레이 등과 같은 출력 인터페이스를 통해 실시간으로 생성될 수도 있고, 스티커, 프린팅과 같이 오프라인에서 생성될 수 있다. 여기서는 실시간으로 QR 마크를 생성하는 실시 예를 설명한다.
제어모듈(401)은 QR 마크 인코더(402)에 의해 인코딩이 수행되어 이미지 형태의 QR 마크가 생성된다. 생성된 QR 마크는 QR 마크 화면 출력 처리부(403)를 통해 모니터, 프로젝트 등과 같은 디스플레이로 표출된다.
제어 단말의 제어 모듈 획득부(410)는 QR 마크 영상 인식부(411), QR 마크 디코더(412) 및 제어모듈(413)을 포함한다.
QR 마크 영상 인식부(411)에서 카메라를 통해 촬영된 영상의 QR 마크 부분을 추출한다. 추출된 QR 마크는 QR 마크 디코더(412)를 통해 텍스트 형태의 원래 제어 모듈(413)로 복원된다. 복원된 제어 모듈(413)은 스크립트 실행 엔진(420)에 전송되어 실행된다.
도 5는 본 발명의 제어 모듈 송수신의 다른 실시 예를 설명하기 위한 도면이다.
도 5를 참조하면, 근거리 무선 통신 수단은 NFC, Direct Wifi, 블루투스, UPnP등으로 P2P 통신 방식을 지원하는 모든 네트워크 장치를 포함할 수 있으며, 도5는 NFC에 대한 일 실시 예를 설명한다.
피제어 단말의 제어 모듈 제공부(500)과 제어 단말의 제어 모듈 획득부(510)는 NFC 페어링을 통해 서로 통신 가능한 상태에 있으며, NFC 송신 모듈(502)을 통해 제어 모듈(501)을 전송하게 된다. NFC 수신 모듈(511)은 수신된 제어 모듈(512)을 스크립트 실행 엔진(520)으로 전송하여 실행되도록 한다.
도 6은 본 발명의 일 실시 예에 따라 동적 스크립트를 이용하여 원격 제어하는 방법을 설명하기 위한 흐름도이다.
도 6을 참조하면, 피제어 단말(100)은 610 단계에서 동적 스크립트로 작성된 제어 모듈을 제어 단말(110)에 전송한다. 제어 모듈 전송 방식은 다양한 실시 예가 가능하다. 일 예로, 도 4에 도시된 바와 같이, QR 마크, 문자 인식 등 영상으로 텍스트를 인식하는 방식이 가능하다. 다른 예로, 도 5에 도시된 바와 같이, IR 센서, NFC(Near Field Communication) 센서, Direct Wifi, 블루투스 등 피어 투 피어 방식의 통신할 수 있는 무선 전송 방식이 가능하다.
제어 단말(602)은 620 단계에서 획득한 제어 모듈을 실행한다. 상세하게는, 획득된 제어 모듈이 동적 스크립트 문자열로 생성되고, 제어모듈 중 제어 GUI 표출 블록(304)를 실행하여 사용자 화면에 원격 제어를 위한 GUI를 디스플레이해 준다.
그리고, 제어 단말(602)은 630 단계에서 피제어 단말(601)에 접속한다. 제어 단말(610)의 스크립트 실행 엔진이 제어 모듈 중 통신 연결 접속 블록(302)을 해석하고, 피제어 단말(600)과의 유무선 네트워크를 이용하여 연결 접속을 수행한다.
그러면, 피제어 단말(601)은 640 단계에서 접속 응답을 전송하여, 피제어 단말(601)과 제어 단말(602)이 접속된다.
650 단계에서 사용자(603)는 제어 단말(602)의 화면에 디스플레이된 원격 제어를 위한 GUI에 기반하여, 사용자 이벤트 정보를 입력한다. 그러면, 제어 단말(602)은 660 단계에서 입력된 사용자 이벤트 정보를 피제어 단말(601)에 전송한다. 피제어 단말(601)은 670 단계에서 수신 입력 이벤트 정보를 해석하여 피제어 단말(635)에 적합하도록 변환한다. 그런 후, 피제어 단말(601)은 680 단계에서 해석된 이벤트에 맞게 내부 장치나 현재 사용되고 있는 콘텐츠를 제어하게 된다.

Claims (15)

  1. 원격으로 피제어 단말을 제어하기 위한 제어모듈을 동적 스크립트를 이용하여 생성하여 제어 단말에 제공하는 제어 모듈 제공부와,
    상기 제어 모듈을 수신한 제어 단말과 접속 연결이 이루어진 후, 상기 제어 단말로부터 사용자 이벤트를 수신하여, 수신된 사용자 이벤트를 해석한 결과에 따라 내부 동작을 제어하는 이벤트 해석부를 포함함을 특징으로 하는 피제어 단말.
  2. 제 1항에 있어서,
    상기 이벤트 해석부의 제어에 의해 상기 서비스에 따른 콘텐츠를 화면 또는 음향으로 출력해주는 콘텐츠 출력 처리부를 포함함을 특징으로 하는 피제어 단말.
  3. 제 2항에 있어서, 상기 콘텐츠는
    텍스트, 이미지, 동영상, 윈도우 패널 및 어플리케이션 중 적어도 하나 이상을 포함함을 특징으로 하는 피제어 단말.
  4. 제 1항에 있어서, 상기 제어 모듈 제공부는
    적외선 센서, NFC(Near Field Communication) 센서, 와이파이 및 블루투스를 포함하는 피어 투 피어 무선 전송 방식들 중 하나로 상기 제어 모듈을 전송함을 특징으로 하는 피제어 단말.
  5. 제 1항에 있어서, 상기 제어 모듈 제공부는
    상기 제어 모듈을 QR 마크 또는 문자를 포함하는 이미지로 생성하고, 생성된 제어 모듈을 화면으로 출력함을 특징으로 하는 피제어 단말.
  6. 원격으로 피제어 단말을 제어하기 위한 제어 모듈을 획득하여 동적 스크립트 문자열로 생성하는 제어 모듈 획득부와,
    상기 제어 모듈 획득부가 생성한 동적 스크립트를 실행하는 스크립트 실행 엔진과,
    상기 스크립트 실행 엔진에 의해 실행된 제어 모듈에 포함되어 있는 원격 제어를 위한 그래픽 사용자 인터페이스(Graphic User Interface : GUI)를 시각화하여 화면에 출력하는 제어 인터페이스 처리부와,
    사용자로부터 상기 GUI 기반 이벤트 정보가 입력됨에 따라, 상기 이벤트 정보를 상기 피제어 단말에 전송하는 이벤트 전송부를 포함함을 특징으로 하는 제어 단말.
  7. 제 6항에 있어서, 상기 동적 스크립트는
    HTML, 자바스크립트, Python, Perl을 포함하는 텍스트 형태의 문자열들 중 하나인 동적으로 실행 가능한 프로그램 모듈임을 특징으로 하는 제어 단말.
  8. 제 6항에 있어서, 상기 스크립트 실행 엔진은
    독립(Stand-alone) 형태의 실행 애플리케이션, 웹 브라우저 또는 웹 운영 시스템에 탑재된 스크립트 엔진 중 하나임을 특징으로 하는 제어 단말.
  9. 제 6항에 있어서, 상기 제어 모듈 획득부는
    카메라를 통해 촬영된 영상의 QR 마크 부분을 추출하고, 추출된 QR 마크를 텍스트 형태의 제어 모듈로 복원함을 특징으로 하는 제어 단말.
  10. 제 6항에 있어서, 상기 제어 모듈 제공부는
    적외선 센서, NFC(Near Field Communication) 센서, 와이파이 및 블루투스를 포함하는 피어 투 피어 무선 전송 방식들 중 하나로 상기 제어 모듈을 획득함을 특징으로 하는 피제어 단말.
  11. 제 6항에 있어서, 상기 제어 모듈은
    웹으로부터 대용량의 로직 또는 라이브러리를 다운로드하기 위한 라이브러리를 정의하는 웹 리소스 참조 블록과,
    피제어 단말과 연결 접속하는 코드 블록인 통신 연결 접속 블록과,
    접속하고자 하는 피제어 단말의 IP, 포트, 사용자 ID를 포함하는 접속 정보와 접속 방법을 스크립트로 작성한 통신 연결 접속 블록와,
    사용자로부터 원격 제어를 위한 GUI 기반 사용자 입력 이벤트가 발생함에 따라, 해당 명령 이벤트를 상기 통신 연결 접속 블록을 통해 피제어 단말로 전송하는 사용자 이벤트 처리 블록을 포함함을 특징으로 하는 제어 단말.
  12. 피제어 단말에서의 동적 스크립트를 이용한 원격 제어 방법에 있어서,
    원격으로 피제어 단말을 제어하기 위한 제어 모듈을 동적 스크립트를 이용하여 생성하는 단계와,
    생성된 제어 모듈을 제어 단말에 제공하는 단계와,
    상기 제어 모듈을 수신한 제어 단말과 접속 연결되는 단계와,
    상기 제어 단말로부터 사용자 이벤트를 수신하는 단계와,
    수신된 사용자 이벤트를 해석하는 단계와,
    사용자 이벤트를 해석한 결과에 따라 내부 동작을 제어하는 단계를 포함함을 특징으로 하는 동적 스크립트를 이용한 원격 제어 방법.
  13. 제 11항에 있어서, 상기 생성하는 단계는
    제어 모듈의 인코딩을 수행하여 이미지 형태의 QR 마크를 생성하는 단계와,
    상기 제공하는 단계는
    상기 이미지 형태의 QR 마크를 화면으로 출력하는 단계를 포함함을 특징으로 하는 동적 스크립트를 이용한 원격 제어 방법.
  14. 제어 단말에서의 동적 스크립트를 이용한 원격 제어 방법에 있어서,
    피제어 단말을 제어하기 위해 동적 스크립트로 작성된 제어 모듈을 획득하는 단계와,
    상기 획득된 제어 모듈을 동적 스크립트 문자열로 생성하는 단계와,
    상기 생성된 동적 스크립트를 실행하는 단계와,
    상기 실행된 제어 모듈을 통해 상기 피제어 단말과 연결 접속하는 단계와,
    실행된 제어 모듈에 포함되어 있는 원격 제어를 위한 그래픽 사용자 인터페이스(Graphic User Interface : GUI)를 시각화하여 화면에 출력하는 단계와,
    사용자로부터 상기 GUI 기반 이벤트 정보가 입력됨에 따라, 상기 이벤트 정보를 상기 피제어 단말에 전송하는 단계를 포함함을 특징으로 하는 동적 스크립트를 이용한 원격 제어 방법.
  15. 제 14항에 있어서, 상기 제어 모듈을 획득하는 단계는
    카메라를 통해 촬영된 영상의 QR 마크 부분을 추출하는 단계와,
    상기 추출된 QR 마크를 텍스트 형태의 제어 모듈로 복원하는 단계를 포함함을 특징으로 하는 동적 스크립트를 이용한 원격 제어 방법.
KR1020120146416A 2012-12-14 2012-12-14 동적 스크립트를 이용한 원격 제어 장치 및 방법 KR20140080726A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020120146416A KR20140080726A (ko) 2012-12-14 2012-12-14 동적 스크립트를 이용한 원격 제어 장치 및 방법
US13/933,365 US20140167936A1 (en) 2012-12-14 2013-07-02 Remote control apparatus and method using dynamic script

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120146416A KR20140080726A (ko) 2012-12-14 2012-12-14 동적 스크립트를 이용한 원격 제어 장치 및 방법

Publications (1)

Publication Number Publication Date
KR20140080726A true KR20140080726A (ko) 2014-07-01

Family

ID=50930222

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120146416A KR20140080726A (ko) 2012-12-14 2012-12-14 동적 스크립트를 이용한 원격 제어 장치 및 방법

Country Status (2)

Country Link
US (1) US20140167936A1 (ko)
KR (1) KR20140080726A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9800666B2 (en) 2015-08-28 2017-10-24 Xiaomi Inc. Method and client terminal for remote assistance

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9911136B2 (en) 2013-06-03 2018-03-06 Google Llc Method and system for providing sign data and sign history
US20150186921A1 (en) * 2013-12-31 2015-07-02 Google Inc. Wifi Landing Page for Remote Control of Digital Signs
US20150187186A1 (en) * 2013-12-31 2015-07-02 Google Inc. Wifi Landing Page for Remote Control of Digital Signs
TWI565607B (zh) * 2014-01-09 2017-01-11 鴻海精密工業股份有限公司 車用可動部件輔助系統及車輛
CN107438089A (zh) * 2016-05-26 2017-12-05 中兴通讯股份有限公司 一种远程控制方法及终端
US10791172B2 (en) 2016-07-22 2020-09-29 Tinker Pte. Ltd. Systems and methods for interacting with nearby people and devices

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5258558B2 (ja) * 2005-05-31 2013-08-07 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 装置の制御のための方法
JP2010528519A (ja) * 2007-05-25 2010-08-19 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ユニバーサルリモートコントローラの使用の容易化
US8558716B2 (en) * 2010-06-10 2013-10-15 Verizon Patent And Licensing Inc. Systems and methods to adaptively change functionality of a remote control device to execute the script on a client program for reprogramming buttons on the remote control device
US8918719B2 (en) * 2011-02-14 2014-12-23 Universal Electronics Inc. Graphical user interface and data transfer methods in a controlling device

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9800666B2 (en) 2015-08-28 2017-10-24 Xiaomi Inc. Method and client terminal for remote assistance

Also Published As

Publication number Publication date
US20140167936A1 (en) 2014-06-19

Similar Documents

Publication Publication Date Title
KR20140080726A (ko) 동적 스크립트를 이용한 원격 제어 장치 및 방법
EP2577635B1 (en) Remote control of a telephone
CN103024503B (zh) 一种通过移动通讯设备终端实现遥控的系统和方法
US10860279B2 (en) Method and system for browser-based screen sharing
KR101706479B1 (ko) 사물인터넷 제어방법, 단말 및 피제어 기기
US9173000B2 (en) Automatic discovery and mirroring of server-client remote user interface (RUI) session on a companion device and synchronously controlling both sessions using RUI on companion device
KR101606384B1 (ko) 접속된 장치
US20190011997A1 (en) Command relay device, system and method for providing remote assistance/remote control
CN104270662A (zh) 一种终端设备通过浏览器对智能电视进行控制的系统
US20120144058A1 (en) Systems and methods for operating an appliance control device for an appliance
US9811304B2 (en) Method and apparatus of capturing a screen image of a remotely managed machine
KR102294182B1 (ko) 홈 네트워크 기반의 양방향 모니터링 시스템의 동작방법
US20150222329A1 (en) One touch product information on mobile communication device using near field communication
Kim et al. Wearable device control platform technology for network application development
EP3285143A1 (en) Ar/vr device virtualisation
US20150215575A1 (en) Relay apparatus
KR20160000911A (ko) 클라우드 서비스 제공 방법, 이를 지원하는 웹 어플리케이션을 기록한 컴퓨터 판독 가능한 기록매체, 그리고 클라우드 서비스 시스템 및 이에 따른 장치
JP6230151B2 (ja) ユーザ入力要素インタフェースのユーザ記述情報を交換するページ同期方法、プロキシサーバ及びプログラム
US11650735B1 (en) Accessibility feature in remote device infrastructure
US11860771B1 (en) Multisession mode in remote device infrastructure
EP4047833A1 (en) Load balancing system, load balancing method, and carrier means
US20170168994A1 (en) Method And Apparatus For Facilitating Visual Presentations
SINGH et al. Restful Communication Approach
KR20160061874A (ko) 스마트 ｔｖ 기반 홈 기기 제어장치 및 홈 기기 제어방법
CN116932240A (zh) 调用原生功能的方法、装置、设备及存储介质

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid