KR20110112645A - Remotely dynamic control system and method for target device using smart phone - Google Patents

Remotely dynamic control system and method for target device using smart phone Download PDF

Info

Publication number
KR20110112645A
KR20110112645A KR1020100031870A KR20100031870A KR20110112645A KR 20110112645 A KR20110112645 A KR 20110112645A KR 1020100031870 A KR1020100031870 A KR 1020100031870A KR 20100031870 A KR20100031870 A KR 20100031870A KR 20110112645 A KR20110112645 A KR 20110112645A
Authority
KR
South Korea
Prior art keywords
control
page
target device
smart phone
smartphone
Prior art date
Application number
KR1020100031870A
Other languages
Korean (ko)
Other versions
KR101179922B1 (en
Inventor
이이섭
Original Assignee
금오공과대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 금오공과대학교 산학협력단 filed Critical 금오공과대학교 산학협력단
Priority to KR1020100031870A priority Critical patent/KR101179922B1/en
Publication of KR20110112645A publication Critical patent/KR20110112645A/en
Application granted granted Critical
Publication of KR101179922B1 publication Critical patent/KR101179922B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04QSELECTING
    • H04Q9/00Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication

Abstract

스마트 폰의 다양한 입력 기능과 IPTV와 같은 제어 대상 기기와의 양방향 전송 기술을 적용하여, 무선 인터넷을 통하여 대상 기기에 접속하여 필요에 따라 대상 기기로부터 제어 정보가 포함된 제어 페이지를 전송받아 동적으로 제어 메뉴를 설정하고, 설정된 메뉴를 통하여 대상 기기를 제어하는 시스템 및 방법이 제공된다. 스마트 폰은 통신망을 통하여 제어 대상 기기에 접속하여 제어 페이지를 요청하여 전송받은 제어 페이지를 기초로 하여 상기 대상 기기 제어용 동적 제어 메뉴를 구성한다. 제어 서버는 각 제어 대상 기기에 내장되어 상기 스마트 폰으로부터의 상기 제어 페이지 요청에 응답하여 상기 원하는 제어 대상 기기에 축적된 제어 및 컨텐츠 템플릿을 기초로 하여 요청된 제어 페이지를 생성하여 상기 스마트 폰으로 전송한다.By applying various input functions of smart phone and two-way transmission technology with the target device such as IPTV, it is connected to the target device through the wireless Internet and dynamically receives the control page containing the control information from the target device as needed. A system and method for setting a menu and controlling a target device through the set menu are provided. The smart phone configures the dynamic control menu for controlling the target device based on the control page received by requesting a control page through a communication network and requesting a control page. The control server is built in each control target device and generates a requested control page based on a control and content template accumulated in the desired control target device in response to the control page request from the smartphone and transmits the requested control page to the smartphone. do.

Description

스마트폰을 이용한 동적인 원격 제어 시스템 및 그 방법{Remotely dynamic control system and method for target device using smart phone}Dynamic remote control system using smartphone and its method {Remotely dynamic control system and method for target device using smart phone}

본 발명은 원격 제어 시스템에 관한 것으로, 더욱 상세하게는 스마트 폰을 이용하여 원격지의 대상 기기를 제어하는 시스템 및 그 방법에 관한 것이다.
The present invention relates to a remote control system, and more particularly, to a system and a method for controlling a remote target device using a smart phone.

종래에 원격지에서 제어 대상 기기(일예로, IPTV 등)를 제어하기 위해서는 제어용 스마트 폰과 서버 간의 TCP/IP 통신을 통해서 이루어졌다. 일반적으로, 원격지에서 제어 대상 기기를 제어하기 위해서는 제어하고자 하는 스마트폰에 TCP/IP 통신을 통한 제어용 프로그램 및 제어에 필요한 모든 기능이 설치되고, 이를 통하여 대상기기를 제어하는 방식으로서 스마트폰에 설치된 기능을 업데이트하거나 수정하기가 어렵다는 문제점이 있었다.Conventionally, in order to control a control target device (for example, IPTV, etc.) at a remote location, the control smart phone is made through a TCP / IP communication between the server and the control. In general, in order to control the control target device from a remote site, all the functions necessary for the control program and control through TCP / IP communication are installed on the smart phone to be controlled, and the function installed on the smart phone as a method of controlling the target device through this. There was a problem that it is difficult to update or modify.

그리고 제어대상기기가 특정 플랫폼에 종속적인 문제로 인해 범용적인 활용에 어려움이 있다.
In addition, there is a difficulty in controlling the general purpose because the control target device is dependent on a specific platform.

본 발명은 상기와 같은 문제점을 해결하기 위한 것으로, 스마트 폰의 다양한 입력 기능과 IPTV와 같은 제어 대상 기기와의 양방향 전송 기술을 적용하여, 스마트폰에 제어에 필요한 모든 기능을 설치하지 않고, 제어 브라우저만을 설치하여, 무선 인터넷을 통해 대상 기기에 접속, 필요에 따라 대상 기기로부터 제어 정보가 포함된 제어 페이지를 전송받아 동적으로 제어 메뉴를 설정하고, 설정된 메뉴를 통하여 대상 기기를 제어하는 시스템 및 방법을 제공하는데 그 목적이 있다.
The present invention is to solve the above problems, by applying a variety of input functions of the smart phone and the two-way transmission technology with the controlled device, such as IPTV, the control browser without installing all the functions necessary for the control, System, a method of accessing a target device via wireless Internet, receiving a control page including control information from the target device, dynamically setting a control menu, and controlling the target device through the set menu. The purpose is to provide.

상기한 목적을 달성하기 위하여, 본 발명에 따른 스마트 폰을 이용한 대상 기기 원격 동적 제어 시스템은 통신망을 통하여 제어 대상 기기에 접속하여 제어 페이지를 요청하여 전송받은 제어 페이지를 기초로 하여 상기 대상 기기 제어용 동적 제어 메뉴를 구성하는 스마트 폰; 및 각 제어 대상 기기에 내장되어 상기 스마트 폰으로부터의 상기 제어 페이지 요청에 응답하여 상기 원하는 제어 대상 기기에 축적된 제어 및 컨텐츠 템플릿을 기초로 하여 요청된 제어 페이지를 생성하여 상기 스마트 폰으로 전송하는 제어 서버를 포함하는 것을 특징으로 한다. In order to achieve the above object, the target device remote dynamic control system using a smart phone according to the present invention is connected to the control target device through a communication network to request a control page based on the received control page for controlling the target device dynamic A smartphone that configures a control menu; And controlling to generate the requested control page based on the control and content template stored in the desired control target device in response to the control page request from the smartphone and transmit the generated control page to the smartphone in response to the control page request from the smartphone. It characterized in that it comprises a server.

또한, 본 발명에 따른 스마트폰을 이용한 동적인 원격 제어 방법은 (i) 스마트 폰에서 통신망을 통하여 제어 대상 기기에 접속하여 제어 페이지를 요청하는 단계; (ii) 상기 스마트 폰으로부터의 상기 제어 페이지 요청에 응답하여 상기 원하는 제어 대상 기기에 축적된 제어 및 컨텐츠 템플릿을 기초로 하여 요청된 제어 페이지를 생성하여 상기 스마트 폰으로 전송하는 단계; 및 (iii) 상기 스마트 폰에서 상기 제어 대상 기기로부터 전송받은 제어 페이지를 기초로 하여 상기 대상 기기 제어용 동적 제어 메뉴를 구성하는 단계를 포함하는 것을 특징으로 한다.In addition, a dynamic remote control method using a smart phone according to the present invention includes the steps of (i) requesting a control page by accessing the control target device through a communication network in the smart phone; (ii) generating a requested control page based on a control and content template accumulated in the desired control target device in response to the control page request from the smartphone and transmitting the requested control page to the smartphone; And (iii) constructing a dynamic control menu for controlling the target device based on the control page received from the control target device in the smart phone.

본 발명에 따르면, 스마트 폰에 제어 페이지를 제어할 수 있는 기능을 가진 프로그램, 즉 제어 브라우저를 설치하고, 제어 서버에서는 제어정보를 동적으로 추출하여 제어 페이지를 생성하고, 사용자는 동적으로 생성된 제어 페이지를 실시간으로 전송받아 메뉴를 통해 제어 대상을 제어할 수 있음으로써 동적인 양방향 서비스를 제공받을 수 있으며, 별도의 서버 프로그램을 구현하지 않음으로 서버 구축 비용과 기간을 획기적으로 줄일 수 있는 등의 장점이 있다.According to the present invention, a program having a function of controlling a control page, that is, a control browser is installed in a smart phone, the control server dynamically extracts control information to generate a control page, and the user dynamically generates the control. By receiving the page in real time and controlling the control target through the menu, it is possible to receive dynamic interactive services, and it can drastically reduce the server construction cost and duration by not implementing a separate server program. There is this.

또한, 스마트 폰의 제어 브라우저가 제어 페이지를 요청하게 되면 제어 서버에서 요청된 제어 페이지를 제공함으로써, 다음과 같은 동적 메뉴 장점을 가진다.In addition, when the control browser of the smartphone requests a control page, the control server provides the requested control page, which has the following dynamic menu advantages.

첫째, 브라우저의 설치로 모든 제어대상의 처리 가능하고,First, all browsers can be handled by installing a browser.

둘째, IPTV와 모바일 기기간 실시간 정보 갱신으로 동적인 양방향 서비스 제공하고,Second, provide dynamic interactive service by real-time information update between IPTV and mobile devices,

셋째, 사용자에게 친숙한 웹 페이지 방식 서비스 제공하고,Third, provide a user-friendly web page service,

넷째, 스마트 폰에서 사용하는 자원을 최소화한다.Fourth, to minimize the resources used in the smartphone.

스마트 폰에는 제어 대상 기기에 연결할 수 있는 기능을 가진 제어 브라우저프로그램을 설치하고, 제어 대상 기기에는 설정된 제어 명령을 추출하여 동적으로 제어 페이지를 생성 및 스마트 폰에 전송하는 제어 서버를 구축하여 사용자는 스마트 폰을 이용하여 무선 인터넷 혹은 블루투스를 통해 제어 명령을 설정할 수 있으므로 시스템 구축비용을 획기적으로 줄이고 별도의 서버 프로그램을 구현하지 필요가 없어 서 서버 구축비용과 기간을 획기적으로 줄일 수 있는 효과가 있다.On the smartphone, a control browser program with a function to connect to the controlled device is installed, and on the controlled device, a control server that dynamically generates a control page and transmits it to the smartphone by extracting a set control command is provided. The control command can be set through the wireless Internet or Bluetooth using a phone, thereby significantly reducing the system construction cost and eliminating the need to implement a separate server program, thereby dramatically reducing the server construction cost and duration.

종래, 해당 제어코드가 리모컨에 저장되어 있어야 하고, 통합 리모컨의 경우 제어 대상에 연결 시 대상 모델을 알고 있어야 하는 폐단에서 탈피하여, 본 발명은, 한번 연결이 설정되면 사용할 때마다 자동으로 연결됨과 동시에, 페어링 과정을 거침으로서 보안성 보장을 구현하게 되는 특징이 있다.Conventionally, the corresponding control code should be stored in the remote control, and in the case of the integrated remote control to avoid the need to know the target model when connecting to the control object, the present invention, once a connection is set up is automatically connected and used at the same time However, the security feature is implemented by going through the pairing process.

도 1은 본 발명의 실시예에 따른 스마트 폰을 이용한 대상 기기 원격 동적 제어 시스템의 구성을 나타낸 블록도,
도 2는 도 1에 도시된 스마트 폰을 이용한 제어 대상 기기 원격 제어 흐름을나타낸 구성도,
도 3은 도 1에 도시된 스마트 폰의 일예를 나타낸 상세 블록도이다.
도 4는 사용자 제어 대상 기기의 컴퓨터를 제어하기 위하여 사용되는 본 발명의 실시예에 따른 스마트 폰의 내부 구조도이다.
도 5는 도 3에 도시된 스마트 폰의 스크린에 표시되는 제어 브라우저의 일예를 나타낸 도면이다.
도 6은 도 3에 도시된 모션 센서를 이용한 모드 전환 과정을 설명하는 도면이다.
도 7은 본 발명의 실시예에 따른 모션 센싱을 적용한 게임의 일예를 나타낸 도면이다.
도 8은 본 발명의 실시예에 따른 스크린에서 기본 제어 기능과 제스처에 의한 특정 기능 활용 방법의 일예를 나타낸 도면이다.
도 9는 본 발명에 적용되는 스마트 폰의 다양한 UX를 예시한 도면이다.
도 10은 도 1에 도시된 제어 대상 기기의 일예인 IPTV의 구성을 나타낸 블록도이다.
도 11은 본 발명의 실시예에 따른 스마트폰을 이용한 동적인 원격 제어 방법을 설명하는 흐름도,
도 12는 도 11에 도시된 제어 서버에 의한 제어 페이지 생성 과정을 설명하는 흐름도이다.
1 is a block diagram showing the configuration of a target device remote dynamic control system using a smart phone according to an embodiment of the present invention;
FIG. 2 is a block diagram showing a remote control flow of a control target device using the smart phone shown in FIG. 1;
3 is a detailed block diagram illustrating an example of the smart phone illustrated in FIG. 1.
4 is an internal structural diagram of a smart phone according to an embodiment of the present invention used to control a computer of a user control target device.
FIG. 5 is a diagram illustrating an example of a control browser displayed on a screen of the smart phone illustrated in FIG. 3.
FIG. 6 is a view illustrating a mode switching process using the motion sensor shown in FIG. 3.
7 is a diagram illustrating an example of a game to which motion sensing is applied according to an embodiment of the present invention.
8 is a diagram illustrating an example of a method of using a specific function by a basic control function and a gesture in a screen according to an embodiment of the present invention.
9 is a diagram illustrating various UX of the smart phone applied to the present invention.
FIG. 10 is a block diagram illustrating a configuration of an IPTV, which is an example of a control target device illustrated in FIG. 1.
11 is a flowchart illustrating a dynamic remote control method using a smartphone according to an embodiment of the present invention;
12 is a flowchart illustrating a control page generation process by the control server shown in FIG. 11.

이하, 본 발명의 실시 예에 관하여 첨부도면을 참조하여 상세히 설명한다. 여기서 반복되는 설명, 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능, 및 구성에 대한 상세한 설명은 생략한다. 본 발명의 실시형태는 당 업계에서 평균적인 지식을 가진 자에게 본 발명을 더욱 완전하게 설명하기 위해서 제공되는 것이다. 따라서, 도면에서의 요소들의 형상 및 크기 등은 보다 명확한 설명을 위해 확대 강조될 수 있음은 물론이다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. Repeated descriptions, well-known functions and configurations that may unnecessarily obscure the subject matter of the present invention, and detailed description of the configuration will be omitted. Embodiments of the present invention are provided to more completely explain the present invention to those skilled in the art. Therefore, the shape and size of the elements in the drawings can be expanded and emphasized for clarity of course.

도 1은 본 발명의 실시예에 따른 스마트 폰을 이용한 원격 동적 제어 시스템의 구성을 나타낸 블록도이고, 도 2는 도 1에 도시된 스마트 폰을 이용한 제어 대상 기기 원격 제어 흐름을 나타낸 구성도이다.1 is a block diagram showing the configuration of a remote dynamic control system using a smart phone according to an embodiment of the present invention, Figure 2 is a block diagram showing a remote control flow of the control target device using the smart phone shown in FIG.

본 발명의 실시예에 따른 스마트 폰을 이용한 원격 동적 제어 시스템은 스마트 폰(100) 및 제어 서버(200)를 포함한다.Remote dynamic control system using a smart phone according to an embodiment of the present invention includes a smart phone 100 and the control server 200.

스마트 폰(100)은 블루투스 또는 WiFi와 같은 통신망을 통하여 원하는 제어 대상 기기(20), 예를 들면 IPTV 셋탑 박스에 접속하여 제어 페이지를 요청하여 전송받은 제어 페이지를 기초로 하여 상기 대상 기기 제어용 동적 제어 메뉴를 구성한다. The smartphone 100 accesses a desired control target device 20, for example, an IPTV set-top box, through a communication network such as Bluetooth or WiFi, requests a control page, and dynamically controls the target device based on the received control page. Configure the menu.

두 방법 모두 페어링 과정을 거쳐 제어 대상 기기에 연결되며, 한번 연결이 완료된 후에는 별도의 페어링 절차 없이 기기연결을 지원하게 된다.Both methods are connected to the controlled device through a pairing process, and once connected, the device supports connection without a separate pairing procedure.

도 3은 도 1에 도시된 스마트 폰의 일예를 나타낸 상세 블록도이고, 도 4는 사용자 제어 대상 기기의 컴퓨터를 제어하기 위하여 사용되는 본 발명의 실시예에 따른 스마트 폰의 내부 구조도이다.3 is a detailed block diagram illustrating an example of the smart phone illustrated in FIG. 1, and FIG. 4 is an internal structural diagram of a smart phone according to an embodiment of the present invention used to control a computer of a user control target device.

도 3 및 도 4를 참조하면, 상기 스마트 폰(100)은 제어 브라우저(110), 스크린(120), MCU(130), 통신 모듈(140), 모션 센서(150), 터치 센서(160), 마이크(170), 카메라(180), 및 스피커(190)를 포함한다.3 and 4, the smart phone 100 includes a control browser 110, a screen 120, an MCU 130, a communication module 140, a motion sensor 150, a touch sensor 160, The microphone 170, the camera 180, and the speaker 190 are included.

제어 브라우저(110)는 어플리케이션 마켓(10)으로부터 다운로드받아 설치되며, 실행되어 페어링 과정을 통해 제어 대상 기기(20)에 접속하여 제어 홈 페이지를 전송받는다.The control browser 110 is downloaded and installed from the application market 10 and is executed to access the control target device 20 through a pairing process and receive a control home page.

스크린(120)은 상기 제어 브라우저(110)에 의해 전송받은 제어 페이지 및 상기 동적 제어 메뉴를 화면에 표시한다.The screen 120 displays the control page and the dynamic control menu received by the control browser 110 on the screen.

도 5는 도 3에 도시된 스마트 폰의 스크린(120)에 표시되는 제어 브라우저의 일예를 나타낸 도면이다. 도 5에서의 표준 제어브라우저는, 컨텐츠 마켓에서 어플리케이션 형태로 배포되며 이동통신 단말기에 설치하고, IPTV 셋탑(20) 내 제어 서버(200)로부터 생성된 제어 페이지를 수신하여 제어화면을 동적으로 갱신하며, 입력받은 데이터를 제어 대상에서 요구하는 데이터 형태로 전환 제어 가능하다. 물론, 동기화된 제어화면은 웹과 같이 필요에 따라 동적으로 생성된다.FIG. 5 is a diagram illustrating an example of a control browser displayed on the screen 120 of the smart phone illustrated in FIG. 3. The standard control browser in FIG. 5 is distributed in an application form in the content market, installed in a mobile communication terminal, and dynamically updates a control screen by receiving a control page generated from the control server 200 in the IPTV set-top 20. In addition, the input data can be converted and controlled in the form of data required by the control target. Of course, the synchronized control screen is dynamically generated as needed, such as the web.

MCU(130)는 상기 제어 홈 페이지를 해석하고, 상기 제어 홈 페이지에서 이벤트-액션 쌍으로 동적 메뉴를 생성하고 사용자가 메뉴 항목 선택으로 이벤트를 입력함에 따라 상기 입력된 이벤트에 해당하는 액션의 유형이 단순 명령 형식 또는 페이지 이동 형태인지를 판단하고, 단순 명령 형식일 경우 해당 명령어를 매핑 테이블을 바탕으로 해석하여 상기 통신 모듈(140)를 통하여 상기 제어 대상 기기(20)로 전송하고 페이지 이동 형태일 경우 상기 제어 대상 기기(20)에 상기 제어 페이지 생성을 요청한다. 표 1에는 스마트 폰(100)의 이벤트와 액션 값의 매핑 테이블의 예이다.The MCU 130 interprets the control home page, generates a dynamic menu as an event-action pair in the control home page, and as the user inputs an event by selecting a menu item, the type of action corresponding to the input event is changed. It is determined whether it is a simple command format or a page movement form, and in the case of the simple command format, the corresponding command is interpreted based on a mapping table and transmitted to the control target device 20 through the communication module 140 and in the page movement form. Request the control page 20 to generate the control page. Table 1 is an example of a mapping table of event and action values of the smartphone 100.

이벤트event 액션action 위로 스크롤Scroll up send volume up send volume up 좌측으로 스크롤Scroll left send channel down send channel down 우측으로 스크롤Scroll right send channel next send channel next 아래로 스크롤Scroll down send volume previous send volume previous 그림 1 선택Select Figure 1 go page a100 go page a100 ........

통신 모듈(140)은 상기 제어 대상 기기(20)와의 통신을 수행하도록 상기 제어 대상 기기 간의 데이터를 교환 처리한다.The communication module 140 exchanges data between the controlled devices so as to perform communication with the controlled devices 20.

모션 센서(150)는 상기 스마트 폰(100)의 움직임에 따라 모드 전환 신호를 발생한다.The motion sensor 150 generates a mode switch signal according to the movement of the smart phone 100.

도 7은 본 발명의 실시예에 따른 모션 센싱을 적용한 게임의 일예를 나타낸 도면이다.7 is a diagram illustrating an example of a game to which motion sensing is applied according to an embodiment of the present invention.

일 예로, 도 7을 참조하면, 본원 발명에 따른 스마트 폰을 기반으로 IPTV와의 양방향 통신 기능을 이용하여, 동적으로 제어할 수 있는 메뉴를 제공함에 따라, IPTV의 앱 스토어를 통해 게임을 즐길 경우, 안드로이드의 모션센싱 기능을 활용하여 핸드폰을 좌, 우로 기울이거나 앞, 뒤로 기울여 게임을 컨트롤할 수 있는 원격제어기기를 제공할 수 있게 되는 것이다. 이렇게 개발되는 제품은 스마트 폰의 다양한 입력 기능과 IPTV와의 양방향 전송기술을 적용, 제어대상에 대해 동적으로 메뉴 구성이 가능하여 IPTV의 기능을 손쉽게 제어할 수 있다는 특장점이 있다.As an example, referring to FIG. 7, when a game is played through an app store of an IPTV, a menu that can be controlled dynamically is provided by using a bidirectional communication function with an IPTV based on a smart phone according to the present invention. By leveraging Android's motion sensing feature, the mobile phone can be tilted left and right or forward and backward to provide a remote control device that can control the game. The product developed in this way has a feature that it is possible to control the function of IPTV easily by applying various input functions of smart phone and two-way transmission technology with IPTV to dynamically configure menu for the control target.

도 8은 본 발명의 실시예에 따른 스크린에서 기본 기능 설정 방법과 제스처에 의한 특정 기능 설정 방법을 비교한 도면이다. 스크린(120)에 특정 형상을 그림으로써 기능을 수행하는 도면으로서, M을 그려서 MBC로 채널 변경하는 것을 나타낸다. 도 8을 참조하면, 터치 센서(160)는 상기 스크린(120)의 화면 상에서 원하는 방송 채널에 해당하는 형상을 그림으로써 방송 채널 변경 명령을 발생한다. 8 is a diagram comparing a basic function setting method and a specific function setting method by a gesture in a screen according to an embodiment of the present invention. The figure performs a function by drawing a specific shape on the screen 120, showing that the channel is changed to MBC by drawing M. Referring to FIG. 8, the touch sensor 160 generates a broadcast channel change command by drawing a shape corresponding to a desired broadcast channel on the screen of the screen 120.

상기 MCU(130)는 상기 모션 센서(150)로부터의 모드 전환 신호에 따라 모드 전환 제어 신호 그리고 상기 터치 센서(160)로부터의 방송 채널 변경 명령에 따른 방송 채널 변경 제어 신호를 상기 통신 모듈(140)을 통하여 상기 제어 대상 기기로 전송한다.The MCU 130 transmits a mode change control signal according to a mode change signal from the motion sensor 150 and a broadcast channel change control signal according to a broadcast channel change command from the touch sensor 160. Through the transmission to the control target device.

도 9는 본 발명에 적용되는 스마트 폰(100)의 다양한 UX를 예시한 도면이다. 도 9에 예시된 바와 같이, 웹 브라우저의 웹 페이지 갱신 방법과 유사한 방법으로 IPTV 셋탑(20) 내 제어 서버(200)로부터 생성된 제어 페이지를 수신하여 제어 화면을 동적으로 갱신할 수 있다.9 is a diagram illustrating various UX of the smart phone 100 applied to the present invention. As illustrated in FIG. 9, the control screen may be dynamically updated by receiving a control page generated from the control server 200 in the IPTV set-top 20 by a method similar to a web page update method of the web browser.

도 10은 도 1에 도시된 제어 대상 기기의 일예인 IPTV의 구성을 나타낸 블록도이다.FIG. 10 is a block diagram illustrating a configuration of an IPTV, which is an example of a control target device illustrated in FIG. 1.

상기 제어 대상 기기(200)는 통신 모듈(210), 제어 서버(200), 스크린(220), 방송 수신 장치(230), 및 스피커(240)를 포함한다.The control target device 200 includes a communication module 210, a control server 200, a screen 220, a broadcast receiving device 230, and a speaker 240.

통신 모듈(210)은 상기 스마트 폰(100)과의 통신을 수행하도록 상기 스마트폰(100)과 데이터를 교환 처리한다. The communication module 210 exchanges data with the smartphone 100 to perform communication with the smartphone 100.

제어 서버(200)는 각 제어 대상 기기에 내장되어 상기 스마트 폰(100)으로부터의 상기 제어 페이지 요청에 응답하여, 즉 스마트 폰의 관리자의 동적 요청 사항(Request)을 요청받아 상기 원하는 제어 대상 기기에 축적된 제어 및 컨텐츠 템플릿을 기초로 하여 요청된 제어 페이지를 생성하여 상기 스마트 폰(100)으로 전송한다. The control server 200 is embedded in each control target device and responds to the control page request from the smart phone 100, that is, receives a dynamic request of the administrator of the smart phone and requests the control target device to the desired control target device. Based on the accumulated control and content template, the requested control page is generated and transmitted to the smart phone 100.

도 11은 본 발명의 실시예에 따른 스마트폰을 이용한 동적인 원격 제어 방법을 설명하는 흐름도이다.11 is a flowchart illustrating a dynamic remote control method using a smartphone according to an embodiment of the present invention.

상기 스마트 폰(100)에 내장된 제어 브라우저(110)를 실행하여 페어링 과정을 통해 제어 대상 기기(20)에 접속하여 요청 전송받은 제어 홈 페이지를 해석한다(단계 S102). 상기 제어 홈 페이지에서 이벤트-액션 쌍으로 동적 메뉴를 생성한다(단계 S104). 사용자가 메뉴 항목 선택으로 이벤트를 입력(S106)함에 따라 상기 입력된 이벤트에 해당하는 액션의 유형이 단순 명령 형식 또는 페이지 이동 형태인지를 판단한다(단계 S108).The control browser 110 embedded in the smart phone 100 is executed to access the control target device 20 through a pairing process and to analyze the requested control home page (step S102). In the control home page, a dynamic menu is generated as an event-action pair (step S104). As the user inputs an event by selecting a menu item (S106), it is determined whether the action type corresponding to the input event is a simple command form or a page shift form (step S108).

상기 액션의 유형이 단순 명령 형식일 경우, 스마트 폰(100)은 해당 명령어를 매핑 테이블을 바탕으로 해석하여(S110), 상기 제어 대상 기기(20)로 전송한다(S112).When the action type is a simple command format, the smartphone 100 interprets the corresponding command based on the mapping table (S110) and transmits the command to the control target device 20 (S112).

상기 액션의 유형이 페이지 이동 형태일 경우, 스마트 폰(100)은 상기 제어 대상 기기(20)에 상기 제어 페이지 생성을 요청한다(S114).When the action type is a page movement type, the smart phone 100 requests the control target device 20 to generate the control page (S114).

상기 제어 서버(200)는 상기 스마트 폰(100)으로부터의 상기 제어 페이지 요청에 응답하여 상기 원하는 제어 대상 기기에 축적된 제어 및 컨텐츠 템플릿을 기초로 하여 요청된 제어 페이지를 생성하여 상기 스마트 폰(100)으로 전송한다(단계 S116).The control server 200 generates the requested control page based on the control and content template accumulated in the desired control target device in response to the control page request from the smart phone 100 and generates the requested control page. (Step S116).

도 12은 도 11에 도시된 제어 페이지 생성 단계를 상세하게 설명하는 도면이다.12 is a view for explaining the control page generation step shown in FIG.

상기 제어 서버(200)에서 상기 제어 대상 기기의 제어 및 컨텐츠 템플릿을 선택하여 추출한다(단계 S1102). 상기 제어 서버(200)는 상기 추출된 제어 및 컨텐츠 템플릿을 조합하고 관련 데이터를 삽입하여(S1104), 상기 제어 페이지를 생성하여(S1106) 상기 스마트 폰(100)으로 전송한다(S1108). The control server 200 selects and extracts the control and content template of the control target device (step S1102). The control server 200 combines the extracted control and content templates and inserts related data (S1104), generates the control page (S1106), and transmits the generated control page to the smart phone 100 (S1108).

본 발명은, 스마트 폰의 핵심인 터치패드, 모션센싱 등의 풍부한 UX적용 기술로서, 특정 제품군에 종속되지 않고 제어정보의 내장 없이 블루투스, WiFi를 통한 범용적인 제어 가능하고, 또, 타 디바이스와의 혼용을 통한 기술의 확장이 용이하며, IPTV 스토어를 통해 제공되는 어플리케이션과의 다양한 응용 가능하고, 지능형 디지털 기기의 제품 독립적 통신 프로토콜 기술 선점 및 국제표준화에 이바지할 수 있게 되는 것이다.
The present invention is a rich UX application technology such as touchpad, motion sensing, etc., which is the core of a smart phone, and is not dependent on a specific product group and can be controlled universally through Bluetooth and WiFi without embedding control information, and with other devices. It is easy to expand the technology through intermixing, and can be applied to various applications with the applications provided through the IPTV store, and to contribute to the preemption and international standardization of product independent communication protocol technology of intelligent digital devices.

10: 어플리케이션 마켓 100: 스마트 폰
110: 제어 브라우저 120: 스크린
130: MPU 140,210: 통신 모듈
150: 모션 센서 160: 터치 센서
170: 마이크 180: 카메라
190: 스피커 20: IPTV 셋탑
200: 제어 서버
10: Application Market 100: Smartphone
110: control browser 120: screen
130: MPU 140,210: communication module
150: motion sensor 160: touch sensor
170: microphone 180: camera
190: speaker 20: IPTV set-top
200: control server

Claims (6)

통신망을 통하여 제어 대상 기기에 접속하여 제어 페이지를 요청하여 전송받은 제어 페이지를 기초로 하여 상기 대상 기기 제어용 동적 제어 메뉴를 구성하는 스마트 폰; 및
각 제어 대상 기기에 내장되어 상기 스마트 폰으로부터의 상기 제어 페이지 요청에 응답하여 상기 원하는 제어 대상 기기에 축적된 제어 및 컨텐츠 템플릿을 기초로 하여 요청된 제어 페이지를 생성하여 상기 스마트 폰으로 전송하는 제어 서버를 포함하는 스마트폰을 이용한 동적인 원격 제어 시스템.
A smart phone configured to access a control target device through a communication network and configure a dynamic control menu for controlling the target device based on a control page received by requesting a control page; And
A control server built in each control target device and generating a requested control page based on a control and content template accumulated in the desired control target device in response to the control page request from the smartphone and transmitting the requested control page to the smartphone; Dynamic remote control system using a smartphone comprising a.
제1 항에 있어서, 상기 스마트 폰은,
실행되어 페어링 과정을 통해 제어 대상 기기에 접속하여 제어 페이지를 전송받는 제어 브라우저;
상기 제어 페이지 및 상기 동적 제어 메뉴를 화면에 표시하는 스크린;
사용자가 입력한 이벤트에 해당하는 액션의 유형이 단순 명령 형식 또는 페이지 이동 형태인지를 판단하고, 단순 명령 형식일 경우 해당 명령어를 매핑 테이블을 바탕으로 해석하여 상기 제어 대상 기기로 전송하고 페이지 이동 형태일 경우 상기 제어 대상 기기에 상기 제어 페이지 생성을 요청하는 MCU; 및
상기 제어 대상 기기와의 통신을 수행하도록 상기 제어 대상 기기 간의 데이터를 교환 처리하는 통신 모듈을 포함하는 스마트폰을 이용한 동적인 원격 제어 시스템.
The method of claim 1, wherein the smart phone,
A control browser which is executed to access a control target device through a pairing process and receive a control page;
A screen displaying the control page and the dynamic control menu on a screen;
It is determined whether the action type corresponding to the event input by the user is a simple command format or a page movement type.In the case of the simple command format, the command is interpreted based on a mapping table and transmitted to the control target device, and the page movement type is determined. The MCU requesting the control target device to generate the control page; And
And a communication module for exchanging data between the controlled devices so as to communicate with the controlled devices.
제2 항에 있어서, 상기 스마트 폰은 상기 스마트 폰의 움직임에 따라 모드 전환 신호를 발생하는 모션 센서; 및
상기 스크린의 화면 상에서 원하는 방송 채널에 해당하는 형상을 그림으로써 방송 채널 변경 명령을 발생하는 터치 센서를 더 포함하고,
상기 MCU는 상기 모션 센서로부터의 모드 전환 신호에 따라 모드 전환 제어 신호 그리고 상기 터치 센서로부터의 방송 채널 변경 명령에 따른 방송 채널 변경 제어 신호를 상기 통신 모듈을 통하여 상기 제어 대상 기기로 전송하는 스마트폰을 이용한 동적인 원격 제어 시스템.
According to claim 2, wherein the smart phone is a motion sensor for generating a mode switch signal in accordance with the movement of the smart phone; And
Further comprising a touch sensor for generating a broadcast channel change command by drawing a shape corresponding to a desired broadcast channel on the screen of the screen,
The MCU may transmit a mode change control signal according to a mode change signal from the motion sensor and a broadcast channel change control signal according to a broadcast channel change command from the touch sensor to the control target device through the communication module. Used dynamic remote control system.
(i) 스마트 폰에서 통신망을 통하여 제어 대상 기기에 접속하여 제어 페이지를 요청하는 단계;
(ii) 상기 스마트 폰으로부터의 상기 제어 페이지 요청에 응답하여 상기 원하는 제어 대상 기기에 축적된 제어 및 컨텐츠 템플릿을 기초로 하여 요청된 제어 페이지를 생성하여 상기 스마트 폰으로 전송하는 단계; 및
(iii) 상기 스마트 폰에서 상기 제어 대상 기기로부터 전송받은 제어 페이지를 기초로 하여 상기 대상 기기 제어용 동적 제어 메뉴를 구성하는 단계를 포함하는 스마트폰을 이용한 동적인 원격 제어 방법.
(i) requesting a control page by accessing a control target device through a communication network in a smart phone;
(ii) generating a requested control page based on a control and content template accumulated in the desired control target device in response to the control page request from the smartphone and transmitting the requested control page to the smartphone; And
(iii) configuring the dynamic control menu for controlling the target device based on the control page received from the controlling device in the smartphone.
제4 항에 있어서, 단계 (i)는
(i-1) 상기 스마트 폰에 내장된 제어 브라우저를 실행하여 페어링 과정을 통해 제어 대상 기기에 접속하여 요청 전송받은 제어 홈 페이지를 해석하는 단계;
(i-2) 상기 제어 홈 페이지에서 이벤트-액션 쌍으로 동적 메뉴를 생성하는 단계;
(i-3) 사용자가 메뉴 항목 선택으로 이벤트를 입력함에 따라 상기 입력된 이벤트에 해당하는 액션의 유형이 단순 명령 형식 또는 페이지 이동 형태인지를 판단하는 단계; 및
(i-4) 상기 액션의 유형이 단순 명령 형식일 경우 해당 명령어를 매핑 테이블을 바탕으로 해석하여 상기 제어 대상 기기로 전송하고 페이지 이동 형태일 경우 상기 제어 대상 기기에 상기 제어 페이지 생성을 요청하는 단계를 포함하는 스마트폰을 이용한 동적인 원격 제어 방법.
The method of claim 4, wherein step (i)
(i-1) executing the control browser embedded in the smart phone, accessing the control target device through a pairing process, and interpreting the requested control home page;
(i-2) generating a dynamic menu as an event-action pair in the control home page;
(i-3) determining whether an action type corresponding to the input event is a simple command form or a page movement type as the user inputs an event by selecting a menu item; And
(i-4) if the action type is a simple command format, interpreting the command based on a mapping table and transmitting the command to the control target device, and requesting generation of the control page from the control target device in the case of a page movement type Dynamic remote control method using a smartphone comprising a.
제4 항에 있어서, 단계 (ii)는,
(ii-1) 상기 제어 서버에서 상기 제어 대상 기기의 제어 및 컨텐츠 템플릿을 선택하여 추출하는 단계; 및
(ii-2) 상기 추출된 제어 및 컨텐츠 템플릿을 조합하여 관련 데이터를 삽입하는 상기 제어 페이지를 생성하여 상기 스마트 폰으로 전송하는 단계를 포함하는 스마트폰을 이용한 동적인 원격 제어 방법.
The method of claim 4, wherein step (ii) comprises:
(ii-1) selecting and extracting a control and content template of the controlling device from the control server; And
(ii-2) generating the control page for inserting related data by combining the extracted control and content templates and transmitting the generated control page to the smart phone.
KR1020100031870A 2010-04-07 2010-04-07 Remotely dynamic control system and method for target device using smart phone KR101179922B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100031870A KR101179922B1 (en) 2010-04-07 2010-04-07 Remotely dynamic control system and method for target device using smart phone

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100031870A KR101179922B1 (en) 2010-04-07 2010-04-07 Remotely dynamic control system and method for target device using smart phone

Publications (2)

Publication Number Publication Date
KR20110112645A true KR20110112645A (en) 2011-10-13
KR101179922B1 KR101179922B1 (en) 2012-09-05

Family

ID=45028261

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100031870A KR101179922B1 (en) 2010-04-07 2010-04-07 Remotely dynamic control system and method for target device using smart phone

Country Status (1)

Country Link
KR (1) KR101179922B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102665123A (en) * 2012-03-30 2012-09-12 华为技术有限公司 Television control method, handheld device, television set and television control system
WO2015041494A1 (en) * 2013-09-23 2015-03-26 삼성전자 주식회사 Method and apparatus for executing application in wireless communication system

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009100046A (en) 2007-10-12 2009-05-07 Sharp Corp Remote control system, household electrical appliance, and communication terminal

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102665123A (en) * 2012-03-30 2012-09-12 华为技术有限公司 Television control method, handheld device, television set and television control system
WO2015041494A1 (en) * 2013-09-23 2015-03-26 삼성전자 주식회사 Method and apparatus for executing application in wireless communication system
CN105579995A (en) * 2013-09-23 2016-05-11 三星电子株式会社 Method and apparatus for executing application in wireless communication system
US11006187B2 (en) 2013-09-23 2021-05-11 Samsung Electronics Co., Ltd. Method and apparatus for executing application in wireless communication system

Also Published As

Publication number Publication date
KR101179922B1 (en) 2012-09-05

Similar Documents

Publication Publication Date Title
US11102538B2 (en) System and method for ubiquitous appliance control
JP6312877B2 (en) Method, apparatus and system for intelligently controlling a device and plug and play device
US10187685B2 (en) Set top/back box, system and method for providing a remote control device
JP6205400B2 (en) Display device
KR101794378B1 (en) Remote control of a telephone
US8789130B2 (en) Set top box browser control via a wireless handset
CN104270662A (en) System of terminal equipment for controlling intelligent television through browser
CN103024503A (en) System and method for achieving remote control through mobile communication equipment terminal
US11197053B2 (en) Set-top box with enhanced content and system and method for use of same
WO2017059703A1 (en) Method of controlling network appliance, network appliance, feature phone, and system
KR101179922B1 (en) Remotely dynamic control system and method for target device using smart phone
CN113225838A (en) Microphone control method, audio receiving equipment and audio collecting equipment
CN104735510B (en) A kind of set-top box control method, apparatus and system
US11223872B2 (en) Set-top box with enhanced functionality and system and method for use of same
CN103873943A (en) OSD (on-screen display) interaction interface display method and system, and terminals
CN104065992A (en) HTML-based multi-screen set top box remote controller system and working method
JP6248302B2 (en) Display device
US11985375B2 (en) Set-top box with enhanced functionality and system and method for use of same
US11653049B2 (en) Set-top box with enhanced content and system and method for use of same
JP6542967B2 (en) Display device
US20230224531A1 (en) Set-Top Box with Enhanced Functionality and System and Method for Use of Same
JP2022115870A (en) Display device
KR101202315B1 (en) System for supporting multi-view and method therefor
JP2018060546A (en) Display device

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150825

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160830

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee