KR102049069B1 - Methods and apparatus for remote controlling peripheral device in mobile communication terminal - Google Patents

Methods and apparatus for remote controlling peripheral device in mobile communication terminal Download PDF

Info

Publication number
KR102049069B1
KR102049069B1 KR1020180149395A KR20180149395A KR102049069B1 KR 102049069 B1 KR102049069 B1 KR 102049069B1 KR 1020180149395 A KR1020180149395 A KR 1020180149395A KR 20180149395 A KR20180149395 A KR 20180149395A KR 102049069 B1 KR102049069 B1 KR 102049069B1
Authority
KR
South Korea
Prior art keywords
electronic device
external electronic
profile
application
information
Prior art date
Application number
KR1020180149395A
Other languages
Korean (ko)
Other versions
KR20180130470A (en
Inventor
김두석
박현철
김규열
신동윤
양준모
정효용
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to KR1020180149395A priority Critical patent/KR102049069B1/en
Publication of KR20180130470A publication Critical patent/KR20180130470A/en
Application granted granted Critical
Publication of KR102049069B1 publication Critical patent/KR102049069B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/2866Architectures; Arrangements
    • H04L67/30Profiles
    • H04L67/303Terminal profiles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/22Microcontrol or microprogram arrangements
    • G06F9/24Loading of the microprogram
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/4401Bootstrapping
    • G06F9/4411Configuring for operating with peripheral devices; Loading of device drivers
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2807Exchanging configuration information on appliance services in a home automation network
    • H04L12/281Exchanging configuration information on appliance services in a home automation network indicating a format for calling an appliance service function in a home automation network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2816Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/282Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/34Network arrangements or protocols for supporting network services or applications involving the movement of software or configuration parameters 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/90Additional features
    • G08C2201/92Universal remote control

Abstract

본 발명은 이동통신 단말기에서 주변 디바이스를 원격 제어하기 위한 장치 및 방법에 관한 것이다. 본 발명에 따른 이동통신 단말기에서 주변 디바이스를 제어하기 위한 방법은, 제어대상 디바이스에 대한 프로파일을 획득하는 과정과, 상기 획득된 프로파일을 기반으로 상기 제어대상 디바이스에 대한 제어 어플리케이션을 구성하는 과정과, 상기 구성된 제어 어플리케이션을 이용하여 상기 제어대상 디바이스를 제어하는 과정을 포함하는 것을 특징으로 한다.The present invention relates to an apparatus and method for remotely controlling a peripheral device in a mobile communication terminal. A method for controlling a peripheral device in a mobile communication terminal according to the present invention includes the steps of obtaining a profile for a control target device, configuring a control application for the control target device based on the obtained profile; And controlling the control target device using the configured control application.

Description

이동통신 단말기에서 주변 디바이스를 원격 제어하기 위한 장치 및 방법{METHODS AND APPARATUS FOR REMOTE CONTROLLING PERIPHERAL DEVICE IN MOBILE COMMUNICATION TERMINAL}Apparatus and method for remotely controlling a peripheral device in a mobile communication terminal {METHODS AND APPARATUS FOR REMOTE CONTROLLING PERIPHERAL DEVICE IN MOBILE COMMUNICATION TERMINAL}

본 발명은 이동통신 단말기에 관한 것이며, 특히 이동통신 단말기에서 주변 디바이스를 원격 제어하기 위한 장치 및 방법에 관한 것이다. The present invention relates to a mobile communication terminal, and more particularly, to an apparatus and method for remotely controlling a peripheral device in a mobile communication terminal.

최근의 IT(information technology)업계에서는 컨버젼스(Convergence)가 이슈화 되면서 디바이스 간의 특성을 서로 유기적으로 엮어 새로운 소비 컨텐츠를 만들어 내는 것이 화두가 되고 있다. 또한 디바이스들은 이전의 단일 기능을 목적으로 하는 펌웨어 수준의 디바이스에서 OS(Operate System)를 내장하여 어플리케이션(Application)의 실행에 따라 다양한 목적으로 여러 서비스들을 사용할 수 있는 구조의 디바이스로 변화하고 있다. 이러한 변화는 스마트 폰의 활발한 보급을 기반으로 하여, 스마트 TV, 타블렛(Tablet) PC와 같은 디바이스까지 그 영역을 넓혀 가고 있다. In recent years, as convergence has become an issue in the information technology (IT) industry, it is becoming a hot topic to create new consumption contents by organically tying characteristics between devices. In addition, devices are changing to devices having a structure that can use various services for various purposes according to the execution of an application by incorporating an OS (Operate System) in a firmware level device for a single function. This change is based on the proliferation of smart phones, and is expanding its scope to devices such as smart TVs and tablet PCs.

이와 같이 OS와 통신 네트워크 인터페이스를 가지는 디바이스가 확대됨에 따라 다양한 통신 방법을 통하여 디바이스 간의 의사소통이 가능해져 디바이스 간의 물리적인 결합, 즉 물리적 컨버젼스가 아닌 소프트웨어적 컨버젼스를 통한 새로운 서비스가 가능해지고 있다. 이러한 컨버젼스 기능 중 대표적인 것으로 스마트 폰과 같은 모바일 디바이스로 주변의 장치를 제어하는 서비스들이 있다. 예를 들어 스마트 폰을 이용하여 TV원격 제어, 홈시어터 제어, 자동차 원격제어, PC 마우스 키보드 기능 등을 수행할 수 있다. 이는, 각 리모트 컨트롤러가 해당 디바이스에 특화된 물리적 입력장치를 가지고 있어, 사용자가 각 디바이스들을 제어하기 위해서는 복수개의 물리적 리모트 컨트롤러를 보유해야한다는 단점을 해결하기 위하여, 사용자가 항상 소지하고 있는 스마트 폰과 같은 모바일 디바이스로 그 역할을 옮김으로서, 사용자에게 여러 리모트 컨트롤러의 기능을 하나의 장치로 모아서 사용할 수 있는 환경을 마련해주고 있다. 여기서, 상기 모바일 디바이스는 핸드폰 및 PDA, 스마트 폰, 타블렛 PC, 노트북 등 OS 기능과 통신 네트워크 기능을 가지는 다양한 디바이스들을 총칭할 수 있다. As a device having an OS and a communication network interface is expanded, communication between devices is enabled through various communication methods, thereby enabling new services through physical convergence between devices, that is, software convergence rather than physical convergence. One such convergence function is a service that controls a peripheral device with a mobile device such as a smartphone. For example, a smartphone can be used to perform TV remote control, home theater control, car remote control, and PC mouse keyboard functions. In order to solve the disadvantage that each remote controller has a physical input device specific to the device, the user must have a plurality of physical remote controllers in order to control each device, such as a smart phone that the user always has By shifting its role to mobile devices, it provides users with an environment that allows them to combine the functions of multiple remote controllers into a single device. Here, the mobile device may collectively refer to various devices having an OS function and a communication network function, such as a mobile phone, a PDA, a smart phone, a tablet PC, a notebook computer, and the like.

종래 모바일 디바이스를 이용하여 주변의 제어하고자 하는 대상이 되는 디바이스를 원격 제어하기 위해서는 사용자는 키 조작을 통해 외부 서버에 접속하여 제어 어플리케이션을 다운받아 모바일 디바이스에 설치해야 한다. 또한, 종래 모바일 디바이스를 이용하여 각기 다른 제어대상 디바이스를 제어하기 위해서는 모바일 디바이스에 각 제어대상 디바이스별 어플리케이션들이 존재해야 한다. 이에 따라, 마치 실제 생활에 있어서 리모트 컨트롤러를 어디다 두었는지 몰라 리모트 컨트롤러를 찾아 시간을 소비하는 것과 유사한 현상이 모바일 디바이스 상에서도 나타나게 되는 문제점이 있다. In order to remotely control a device to be controlled by using a conventional mobile device, a user needs to access an external server through a key operation, download a control application, and install it on the mobile device. In addition, in order to control different controlled devices using a conventional mobile device, applications for each controlled device must exist in the mobile device. Accordingly, there is a problem in that a phenomenon similar to consuming time to find a remote controller may appear on a mobile device as if the remote controller is not placed anywhere in real life.

또한, 종래 모바일 디바이스는 제어대상 디바이스 자체의 고유 기능(예를 들어, TV의 볼륨 및 채널 변경 기능)만을 제어 가능할 뿐, 최근 대두되고 있는 스마트 서비스 즉, 스마트 TV, 타블렛(Tablet) PC와 같이 OS가 내장되어 있는 디바이스에서 실행되는 서비스 어플리케이션에 대응하는 최적화된 제어 및 인터액션(Control & Interaction)에 대해서는 대응하지 못하고 있는 문제점이 있다. 다시 말해, 종래 모바일 디바이스는 일반적인 TV 리모트 컨트롤러처럼 제어 신호를 단방향으로 보내는 형태로 구조화 되어 있거나 간단한 구동 상태에 대한 정보만을 보여주는 형태이기 때문에, 종래 모바일 디바이스의 제어 기능은 스마트 TV와 같은 장치에서 실행되는 여러 서로 다른 어플리케이션의 최적화된 제어 방법을 제공할 수 없는 단점이 있다. 예를 들어, 스마트 TV에는 게임, 탐색기, 잡지, 메신져, 멀티미디어 어플리케이션과 같은 다양한 어플리케이션들이 존재하지만, 일반적인 TV 리모트 컨트롤러의 기능으로는 이와 같은 다양한 어플리케이션들을 쉽고 편리하게 제어할 수 없다. In addition, the conventional mobile device can only control the unique functions (for example, the volume and channel change function of the TV) of the device to be controlled itself, and the OS such as smart services, that is, smart TVs and tablet PCs, which are emerging recently. There is a problem in that an optimized control and interaction corresponding to a service application executed in a device having a built-in device is not supported. In other words, since the conventional mobile device is structured in a form of sending a control signal in one direction like a general TV remote controller or only shows information on a simple driving state, the control function of the conventional mobile device is executed in a device such as a smart TV. The disadvantage is that it cannot provide an optimized control method for several different applications. For example, smart TVs have a variety of applications such as games, browsers, magazines, messengers, and multimedia applications. However, the functions of a general TV remote controller cannot control these various applications easily and conveniently.

또한, 종래 모바일 디바이스를 이용하여 각 제어대상 디바이스별 다양한 어플리케이션들을 제어하기 위해서는 대응하는 각각의 제어 어플리케이션에 대한 프로그램의 설계, UI(User Interface) 작업 및 기능 구현까지 전 과정을 개발해야 하기 때문에 투자 비용 및 시간이 많이 필요한 문제점이 있다. In addition, in order to control various applications for each control target device using a conventional mobile device, the entire investment process must be developed from design of a program to a corresponding control application, UI (User Interface) operation, and function implementation. And there is a problem that requires a lot of time.

본 발명의 목적은 이동통신 단말기에서 주변 디바이스를 원격 제어하기 위한 장치 및 방법을 제공함에 있다. An object of the present invention is to provide an apparatus and method for remotely controlling a peripheral device in a mobile communication terminal.

본 발명의 다른 목적은 이동통신 단말기에서 주변의 제어 가능한 다양한 디바이스들에 대하여 프로파일을 기반으로 하나의 통합제어 애플리케이션을 구성하고, 상기 구성된 제어 어플리케이션을 이용하여 제어대상 디바이스를 원격 제어하기 위한 장치 및 방법을 제공함에 있다. Another object of the present invention is to configure an integrated control application based on a profile for various controllable devices in a mobile communication terminal, and an apparatus and method for remotely controlling a controlled device using the configured control application. In providing.

상술한 목적들을 달성하기 위한 본 발명의 제 1 견지에 따르면, 이동통신 단말기에서 주변 디바이스를 제어하기 위한 방법은, 제어대상 디바이스에 대한 프로파일을 획득하는 과정과, 상기 획득된 프로파일을 기반으로 상기 제어대상 디바이스에 대한 제어 어플리케이션을 구성하는 과정과, 상기 구성된 제어 어플리케이션을 이용하여 상기 제어대상 디바이스를 제어하는 과정을 포함하는 것을 특징으로 한다.According to a first aspect of the present invention for achieving the above objects, a method for controlling a peripheral device in a mobile communication terminal, the process of obtaining a profile for a device to be controlled, and the control based on the obtained profile And a process of configuring a control application for a target device, and controlling the control target device by using the configured control application.

본 발명의 제 2 견지에 따르면, 이동통신 단말기에서 주변 디바이스를 제어하기 위한 장치는, 제어대상 디바이스에 대한 프로파일을 획득하는 프로파일 매니저와, 상기 획득된 프로파일을 기반으로 상기 제어대상 디바이스에 대한 제어 어플리케이션을 구성하는 동적 구성 매니저와, 상기 구성된 제어 어플리케이션을 이용하여 상기 제어대상 디바이스를 제어하는 제어 인터액션 매니저를 포함하는 것을 특징으로 한다. According to a second aspect of the present invention, an apparatus for controlling a peripheral device in a mobile communication terminal includes: a profile manager obtaining a profile for a controlled device, and a control application for the controlled device based on the obtained profile; And a control interaction manager configured to control the control target device using the configured control application.

본 발명은 주변의 제어 가능한 다양한 디바이스들에 대하여 프로파일을 기반으로 하나의 통합제어 애플리케이션을 구성함으로써, 사용자가 매번 외부 서버에 접속하여 각기 다른 제어대상 디바이스를 제어하기 위한 제어 어플리케이션을 다운받아 단말에 설치해야 하는 번거로움을 줄일 수 있다. 또한, 하나의 화면에서 여러 제어 가능한 디바이스 및 어플리케이션(또는 서비스)의 목록을 관리하기 때문에, 단말 내에 설치된 다수의 제어 애플리케이션들 중에서 제어대상 디바이스에 적합한 제어 애플리케이션을 선택하여 실행할 필요없이, 하나의 통합제어 애플리케이션으로 다양한 디바이스 및 어플리케이션(또는 서비스)을 제어할 수 있는 이점이 있다. The present invention configures one integrated control application based on a profile for various controllable devices around the user, so that a user downloads and installs a control application for controlling different control target devices each time by connecting to an external server. This can reduce the hassle of doing. In addition, since a list of controllable devices and applications (or services) is managed on one screen, one integrated control is not required from among a plurality of control applications installed in a terminal, without having to select and execute a control application suitable for a control target device. An application has the advantage of being able to control various devices and applications (or services).

또한, 디바이스 검색 및 제어 프로토콜, 제어 기능에 대한 추가 개발 없이도 프로파일 획득 및 갱신을 통해 새로운 디바이스(서비스 또는 어플리케이션)에 대한 제어 어플리케이션을 간단히 제공할 수 있어 개발 리소스 측면에서 상당히 절감할 수 있는 이점이 있다. 또한, 하나의 제품군이라 할지라도 모델별로 특화된 다양한 기능을 제공하는 제품에 대하여, 모델별로 제어 애플리케이션을 일일이 개발하여 사용자에게 제공할 필요가 없으므로, 제어 애플리케이션 관리 및 배포 측면에서도 신속하고 편리하게 대응이 가능한 이점이 있다. In addition, it is possible to simply provide a control application for a new device (service or application) through profile acquisition and update without further development of device discovery and control protocols and control functions, thereby significantly reducing development resources. . In addition, even in one product line, it is not necessary to develop a control application for each model and provide it to the user for products that provide various functions specialized for each model. Therefore, it is possible to respond quickly and conveniently in terms of control application management and distribution. There is an advantage.

도 1은 본 발명에 따른 이동통신 단말기와 제어대상이 되는 주변 디바이스를 도시한 도면,
도 2는 본 발명에 따른 이동통신 단말기의 장치 구성을 도시한 블럭도,
도 3은 본 발명의 실시 예에 따른 이동통신 단말기에서 주변 디바이스를 원격 제어하기 위한 방법을 도시한 흐름도, 및
도 4는 본 발명의 실시 예에 따른 화면을 구성하는 오브젝트의 이미지와 배치를 도시한 예시도.
1 is a diagram illustrating a mobile communication terminal and a peripheral device to be controlled according to the present invention;
2 is a block diagram showing a device configuration of a mobile communication terminal according to the present invention;
3 is a flowchart illustrating a method for remotely controlling a peripheral device in a mobile communication terminal according to an embodiment of the present invention; and
4 is an exemplary diagram illustrating an image and an arrangement of objects constituting a screen according to an embodiment of the present invention.

이하 첨부된 도면을 참조하여 본 발명의 동작 원리를 상세히 설명한다. 하기에서 본 발명을 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다. Hereinafter, the operating principle of the present invention will be described in detail with reference to the accompanying drawings. In the following description of the present invention, detailed descriptions of well-known functions or configurations will be omitted if it is determined that the detailed description of the present invention may unnecessarily obscure the subject matter of the present invention. Terms to be described later are terms defined in consideration of functions in the present invention, and may be changed according to intentions or customs of users or operators. Therefore, the definition should be made based on the contents throughout the specification.

이하, 본 발명은 이동통신 단말기에서 주변 디바이스를 원격 제어하기 위한 방안에 대해 설명하기로 한다. 이하 본 발명은 단말을 예로 들어 설명할 것이나, 주변 디바이스의 어플리케이션 제어가 가능한 모든 모바일 디바이스에 적용 가능함은 물론이다. Hereinafter, a method for remotely controlling a peripheral device in a mobile communication terminal will be described. Hereinafter, the present invention will be described by taking a terminal as an example, but of course, the present invention can be applied to all mobile devices capable of application control of peripheral devices.

도 1은 본 발명에 따른 이동통신 단말기와 제어대상이 되는 주변 디바이스를 도시한 도면이다. 1 is a diagram illustrating a mobile communication terminal and a peripheral device to be controlled according to the present invention.

상기 도 1을 참조하면, 단말(100)은 입력, 표시, 통신 기능을 가지며, 제어대상이 되는 주변 디바이스들(110, 120, 130)과 통신하여 제어대상 디바이스들(110, 120, 130)의 프로파일을 획득하고, 획득된 프로파일을 이용하여 하나의 통합제어 어플리케이션을 구성하며, 상기 구성된 통합제어 어플리케이션을 이용하여 해당 제어대상 디바이스(110, 120, 130)의 어플리케이션(또는 서비스)을 원격 제어한다.Referring to FIG. 1, the terminal 100 has an input, a display, and a communication function, and communicates with peripheral devices 110, 120, and 130 to be controlled to control the devices 110, 120, and 130. A profile is obtained, a single integrated control application is configured using the obtained profile, and an application (or service) of the corresponding control target device 110, 120, 130 is remotely controlled using the configured integrated control application.

또한, 도시하지는 않았지만, 프로파일 서버(rofile Server)는 각 제어대상 디바이스들의 프로파일을 관리하며, 상기 단말(100)의 요청에 따라 제어대상 디바이스(110, 120, 130)의 프로파일을 상기 단말(100)에게 제공한다. 여기서, 상기 프로파일 서버는, 외부에 존재하는 외부 서버이거나, 댁내 혹은 일정 영역에 존재하는 로컬 서버(Local Server)일 수 있다. 또는 다른 방법으로, 별도의 프로파일 서버 없이, 제어대상 디바이스(110, 120, 130)가 프로파일을 관리할 수 있으며, 이 경우 단말(100)과 제어대상 디바이스(110, 120, 130) 간 직접 연결을 통한 P2P 방식을 통해 제어대상 디바이스(110, 120, 130)의 프로파일을 단말(100)에게 제공할 수 있다. In addition, although not shown, a profile server manages a profile of each control target device, and requests a profile of the control target device 110, 120, 130 according to a request of the terminal 100 from the terminal 100. To provide. Here, the profile server may be an external server existing outside, or may be a local server existing in a home or a predetermined area. Alternatively, without a separate profile server, the control target device (110, 120, 130) can manage the profile, in this case the direct connection between the terminal 100 and the control target device (110, 120, 130) Through the P2P method through the profile of the control target device (110, 120, 130) may be provided to the terminal (100).

도 2는 본 발명에 따른 이동통신 단말기의 장치 구성을 도시한 블럭도이다. 2 is a block diagram showing an apparatus configuration of a mobile communication terminal according to the present invention.

도시된 바와 같이, 이동통신 단말기는, 물리적 통신 인터페이스(200), 통신 프로토콜(202), 디바이스 연결 매니저(Device Link Manager)(204), 서비스 인에이블러(Service Enabler)(206), 프로파일 매니저(Profile Manager)(208), 제어 인터액션 매니저(Control Interaction Manager)(210), 동적 구성 매니저(Dynamic Configuration Manager)(212), 제어 어플리케이션(Control Application)(214)을 포함하여 구성된다. As shown, the mobile communication terminal includes a physical communication interface 200, a communication protocol 202, a device link manager 204, a service enabler 206, and a profile manager. Profile Manager 208, Control Interaction Manager 210, Dynamic Configuration Manager 212, and Control Application 214 are configured.

상기 도 2를 참조하면, 상기 물리적 통신 인터페이스(200)는 와이파이(WiFi), 블루투스(Bluetooth), 지그비(ZigBee) 등의 전송 수단을 통해 주변 제어대상 디바이스들과 통신한다. Referring to FIG. 2, the physical communication interface 200 communicates with peripheral control target devices through a transmission means such as Wi-Fi, Bluetooth, ZigBee, or the like.

상기 통신 프로토콜(202)은 UPnP(Universal Plug and Play), DLNA(Digital Living Network Alliance), TCP(Transmission Control Protocol), UDP(User Datagram Protocol), SNMP(Simple Network Management Protocol), RF4CE(Radio Frequency for Consumer Electronics) 등의 데이터 전송 규약을 정의한다. The communication protocol 202 may include Universal Plug and Play (UPnP), Digital Living Network Alliance (DLNA), Transmission Control Protocol (TCP), User Datagram Protocol (UDP), Simple Network Management Protocol (SNMP), and Radio Frequency for RF4CE Data transfer protocol such as Consumer Electronics).

상기 디바이스 연결 매니저(204)는 주변 제어대상 디바이스들을 검색하기 위한 역할을 수행한다. 특히, 상기 디바이스 연결 매니저(204)는, 상기 통신 프로토콜(202)와 물리적 통신 인터페이스(200)을 이용하여, 주변 제어대상 디바이스들에게 검색요청 메시지를 브로드캐스트하고, 주변 제어대상 디바이스들로부터 상기 검색요청 메시지에 대한 응답 메시지를 수신한다. 여기서, 상기 응답 메시지는 해당 제어대상 디바이스에 관한 정보를 포함하여 구성된다. 예를 들어, 상기 제어대상 디바이스에 관한 정보는 디바이스 명, 모델명, 디바이스 타입(제어가능 여부를 지시), 네트워크 주소, 서비스 및 애플리케이션에 대한 이름 및 종류 등 다양한 정보를 포함할 수 있다. 또한, 상기 디바이스 연결 매니저(204)는 주변 제어대상 디바이스별로 수신된 응답 메시지에서 디바이스 관련 정보를 추출하고, 상기 추출된 주변 제어대상 디바이스별 디바이스 관련 정보를 기반으로 화면에 제어대상 디바이스 목록을 표시한다. The device connection manager 204 serves to search for peripheral control target devices. In particular, the device connection manager 204 broadcasts a search request message to peripheral control devices using the communication protocol 202 and the physical communication interface 200, and searches for the search from peripheral control devices. Receive a response message to the request message. Here, the response message is configured to include information about the control device. For example, the information about the control target device may include various information such as a device name, a model name, a device type (indicative of controllability), a network address, a name and type of a service and an application. In addition, the device connection manager 204 extracts device related information from a response message received for each peripheral control target device and displays a list of control target devices on the screen based on the extracted device related information for each peripheral control target device. .

상기 서비스 인에이블러(206)는 주변 제어대상 디바이스들에서 수행하는 서비스나 어플리케이션을 검색하기 위한 역할을 수행한다. 특히, 상기 서비스 인에이블러(206)는, 상기 통신 프로토콜(202)와 물리적 통신 인터페이스(200)을 이용하여, 주변 제어대상 디바이스들에게 검색요청 메시지를 브로드캐스트하고, 주변 제어대상 디바이스들로부터 상기 검색요청 메시지에 대한 응답 메시지를 수신한다. 여기서, 상기 응답 메시지는 해당 제어대상 디바이스로부터 현재 수행되고 있거나 변경되는 서비스나 애플리케이션에 관한 정보를 포함하여 구성된다.The service enabler 206 serves to search for a service or an application performed by peripheral control target devices. In particular, the service enabler 206 broadcasts a search request message to peripheral control devices using the communication protocol 202 and the physical communication interface 200, and transmits the search request message from the peripheral control devices. Receive a response message to the search request message. Here, the response message includes information on a service or an application currently being executed or changed from the corresponding control target device.

상기 프로파일 매니저(208)는 메모리(도시하지 않음)에 제어대상 디바이스의 프로파일이 존재하지 않는 경우, 프로파일 서버에게 해당 제어대상 디바이스의 프로파일을 전송해줄 것을 요청하고, 상기 프로파일 서버로부터 해당 프로파일을 수신하여 메모리(도시하지 않음)에 저장 및 관리한다. 여기서, 상기 프로파일은 화면 구성을 위한 UI 정보와 오브젝트(Object)에 등록될 제어명령 정보를 포함하여 구성되고 그 외에도 통신 프로토콜을 포함하여 구성되며, 상기 UI 정보는 화면을 구성하는 오브젝트의 이미지 정보와 배치(Layout) 정보를 포함하여 구성된다. 상기 오브젝트는, 예를 들어 도 4와 같이, 버튼, 터치 입력, 제스쳐 입력, 센서 입력, 파일 목록, 동영상, 음악 등 단말을 통해 사용자에게 제공 가능한 다양한 종류의 오브젝트가 될 수 있다.If the profile of the controlling device does not exist in the memory (not shown), the profile manager 208 requests the profile server to transmit the profile of the controlling device, and receives the corresponding profile from the profile server. Store and manage in memory (not shown). Here, the profile is configured to include UI information for screen configuration and control command information to be registered in an object, and also includes a communication protocol. The UI information includes image information of an object constituting the screen. It is configured to include layout information. For example, as shown in FIG. 4, the object may be various kinds of objects that can be provided to the user through a terminal such as a button, a touch input, a gesture input, a sensor input, a file list, a video, and a music.

상기 제어 인터액션 매니저(210)는 구성된 제어 어플리케이션(214)을 이용하여 제어대상 디바이스를 원격 제어한다. 즉, 사용자로부터 화면에 배치된 오브젝트의 이미지가 입력되면, 상기 제어 인터액션 매니저(210)는 상기 오브젝트 이미지에 매핑된 제어명령 정보를 확인하고, 상기 확인된 제어명령 정보를 해당 프로파일에 정의되어 있는 통신 프로토콜(예를 들어 TCP, UDP, UPnP 등의 규격)에 맞게 가공하여 해당 제어대상 디바이스로 전송한다. 또한, 상기 제어 인터액션 매니저(210)는 해당 제어대상 디바이스로부터 정보가 수신되면, 상기 수신된 정보를 해석하고, 상기 해석된 정보와 등록된 제어명령 정보를 비교하여 적절한 동작을 수행한다. The control interaction manager 210 remotely controls the controlling device by using the configured control application 214. That is, when an image of an object disposed on the screen is input from the user, the control interaction manager 210 checks the control command information mapped to the object image, and communicates the checked control command information defined in the corresponding profile. Process it according to protocol (for example, TCP, UDP, UPnP, etc.) and send it to the device under control. In addition, when information is received from the control target device, the control interaction manager 210 interprets the received information, compares the interpreted information with registered control command information, and performs an appropriate operation.

상기 동적 구성 매니저(212)는 제어대상 디바이스의 프로파일을 분석하고, 분석 결과를 기반으로 상기 제어대상 디바이스에 대한 제어 어플리케이션(214)을 실시간으로 구성한다. 즉, 상기 동적 구성 매니저(212)는 제어대상 디바이스의 프로파일에서 화면 구성을 위한 UI 정보와 오브젝트에 등록될 제어명령 정보를 추출한 후, 상기 추출된 UI 정보를 이용하여 각 오브젝트의 이미지를 화면에 배치하고, 상기 추출된 제어명령 정보를 각 오브젝트에 연결하며, 화면에 배치된 각 오브젝트의 이미지와 오브젝트별 제어명령 정보를 매핑하여 등록한다.The dynamic configuration manager 212 analyzes the profile of the device to be controlled, and configures the control application 214 for the device to be controlled in real time based on the analysis result. That is, the dynamic configuration manager 212 extracts UI information for screen configuration and control command information to be registered in the object from the profile of the control target device, and then places an image of each object on the screen using the extracted UI information. Then, the extracted control command information is connected to each object, and an image of each object arranged on the screen and control command information for each object are mapped and registered.

도 3은 본 발명의 실시 예에 따른 이동통신 단말기에서 주변 디바이스를 원격 제어하기 위한 방법을 도시한 흐름도이다. 3 is a flowchart illustrating a method for remotely controlling a peripheral device in a mobile communication terminal according to an exemplary embodiment of the present invention.

상기 도 3을 참조하면, 단말은 301단계에서 사용자의 키 조작에 따라 통신제어 어플리케이션 실행 메뉴가 선택되는지 여부를 검사한다. Referring to FIG. 3, in step 301, the terminal determines whether a communication control application execution menu is selected according to a user's key manipulation.

상기 301단계에서, 통신제어 어플리케이션 실행 메뉴가 선택됨이 판단될 시, 상기 단말은 303단계에서 제어하고자 하는 대상 디바이스들이 제어 가능 범위에 존재하는지 여부를 파악하기 위해 주변 제어대상 디바이스들에게 검색요청 메시지를 브로드캐스트한다. 여기서, 상기 단말은 기 결정된 다양한 물리적 통신 인터페이스(예를 들어, 와이파이, 블루투스, 지그비 등)와 디바이스별로 가질 수 있는 다양한 통신 프로토콜(예를 들어, UPnP, DLNA, TCP, UDP, SNMP, RF4CE 등)을 사용하여, 주변 제어대상 디바이스들에게 검색요청 메시지를 브로드캐스트한다. 여기서, 상기 주변 제어대상 디바이스는, 단말에 해당 디바이스에 대한 제어 기능이 존재하는 디바이스와, 신규구입하여 단말에 해당 디바이스에 대한 제어 기능이 존재하지 않는 디바이스를 모두 포함하는 의미이다. When it is determined in step 301 that the execution menu of the communication control application is selected, the terminal sends a search request message to the surrounding control target devices to determine whether the target devices to be controlled exist in the controllable range in step 303. Broadcast Here, the terminal may have a variety of predetermined physical communication interfaces (for example, Wi-Fi, Bluetooth, Zigbee, etc.) and various communication protocols (for example, UPnP, DLNA, TCP, UDP, SNMP, RF4CE, etc.) that can have for each device Broadcasts a search request message to peripheral control target devices. Herein, the peripheral control target device is meant to include both a device in which a control function of a corresponding device exists in a terminal and a device in which a control function of a corresponding device does not exist in a terminal newly purchased.

이후, 상기 단말은 305단계에서 주변 제어대상 디바이스들로부터 상기 검색요청 메시지에 대한 응답 메시지가 수신되는지 여부를 검사한다. 여기서, 상기 응답 메시지는 해당 제어대상 디바이스에 관한 정보를 포함하여 구성된다. 예를 들어, 상기 제어대상 디바이스에 관한 정보는 디바이스 명, 모델명, 디바이스 타입(제어가능 여부를 지시), 네트워크 주소, 서비스 및 애플리케이션에 대한 이름 및 종류 등 다양한 정보를 포함할 수 있다. In step 305, the terminal determines whether a response message to the search request message is received from peripheral control target devices. Here, the response message is configured to include information about the control device. For example, the information about the control target device may include various information such as a device name, a model name, a device type (indicative of controllability), a network address, a name and type of a service and an application.

상기 305단계에서, 주변 제어대상 디바이스들로부터 상기 검색요청 메시지에 대한 응답 메시지가 수신됨이 판단될 시, 상기 단말은 제어하고자 하는 대상 디바이스들이 제어 가능 범위에 존재함을 확인하고, 307단계에서 주변 제어대상 디바이스별로 수신된 응답 메시지에서 디바이스 관련 정보를 추출하고, 상기 추출된 주변 제어대상 디바이스별 디바이스 관련 정보를 기반으로 화면에 제어대상 디바이스 목록을 표시한다. In step 305, when it is determined that the response message for the search request message is received from the peripheral control target devices, the terminal determines that the target devices to be controlled are in the controllable range, and in step 307 The device related information is extracted from the response message received for each control target device, and a list of control target devices is displayed on the screen based on the extracted device related information for each peripheral control target device.

이후, 상기 단말은 309단계에서 사용자의 키 조작에 따라 화면에 표시된 제어대상 디바이스 목록 중 제어하고자 하는 하나의 제어대상 디바이스가 선택되는지 여부를 검사한다. In step 309, the terminal determines whether one control target device to be controlled is selected from the list of control target devices displayed on the screen according to a user's key manipulation.

상기 309단계에서, 화면에 표시된 제어대상 디바이스 목록 중 제어하고자 하는 하나의 제어대상 디바이스가 선택됨이 판단될 시, 상기 단말은 311단계에서 상기 선택된 제어대상 디바이스의 디바이스 관련 정보를 이용하여, 메모리에 상기 선택된 제어대상 디바이스의 프로파일이 존재하는지 여부를 검사한다.When it is determined in step 309 that one control target device to be controlled is selected from the list of control target devices displayed on the screen, the terminal uses the device-related information of the selected control target device in step 311 to display the memory in the memory. Check whether the profile of the selected control target device exists.

상기 311단계에서, 메모리에 상기 선택된 제어대상 디바이스의 프로파일이 존재함이 판단될 시, 상기 단말은 315단계로 바로 진행한다. 도시하지는 않았지만, 만약, 메모리에 상기 선택된 제어대상 디바이스의 프로파일이 존재하는 경우, 상기 단말은 상기 메모리에 존재하는 프로파일의 버전정보를 프로파일 서버에게 전송하고, 상기 프로파일 서버에 새롭게 갱신된 프로파일이 존재한다면, 상기 프로파일 서버로부터 새롭게 갱신된 프로파일을 수신하여, 상기 메모리에 존재하는 프로파일을 갱신할 수 있다. If it is determined in step 311 that the profile of the selected control target device exists in the memory, the terminal proceeds directly to step 315. Although not shown, if the profile of the selected control target device exists in the memory, the terminal transmits the version information of the profile existing in the memory to the profile server, if there is a newly updated profile in the profile server In response to the newly updated profile from the profile server, the profile existing in the memory may be updated.

반면, 상기 311단계에서, 메모리에 상기 선택된 제어대상 디바이스의 프로파일이 존재하지 않음이 판단될 시, 상기 단말은 313단계에서 상기 선택된 제어대상 디바이스의 디바이스 관련 정보를 이용하여, 예를 들어 디바이스 명을 이용하여 프로파일 서버에게 상기 선택된 제어대상 디바이스의 프로파일에 대한 전송을 요청하고, 상기 프로파일 서버로부터 상기 선택된 제어대상 디바이스의 프로파일을 수신한다. 이때, 상기 프로파일 서버는 상기 단말로부터 수신되는 디바이스 관련 정보를 이용하여 상기 선택된 제어대상 디바이스의 프로파일을 검색하고, 검색되는 프로파일을 상기 단말로 전송할 수 있다. On the other hand, when it is determined in step 311 that there is no profile of the selected control target device in the memory, the terminal uses the device related information of the selected control target device in step 313, for example, to name the device. Request a profile server to transmit a profile of the selected controlled device, and receive a profile of the selected controlled device from the profile server. In this case, the profile server may search for the profile of the selected control target device using the device related information received from the terminal, and transmit the searched profile to the terminal.

이후, 상기 단말은 315단계에서 상기 메모리에 존재하는 또는 상기 프로파일 서버로부터 수신한 제어대상 디바이스의 프로파일을 분석하고, 분석 결과를 기반으로 상기 선택된 제어대상 디바이스에 대한 제어 어플리케이션을 실시간으로 구성하여 화면에 표시한다. 여기서, 상기 프로파일은 화면 구성을 위한 UI 정보와 오브젝트(Object)에 등록될 제어명령 정보를 포함하여 구성되고 그 외에도 통신 프로토콜을 포함하여 구성되며, 상기 UI 정보는 화면을 구성하는 오브젝트의 이미지 정보와 배치(Layout) 정보를 포함하여 구성된다. 상기 오브젝트는, 예를 들어 도 4와 같이, 버튼, 터치 입력, 제스쳐 입력, 센서 입력, 파일 목록, 동영상, 음악 등 단말을 통해 사용자에게 제공 가능한 다양한 종류의 오브젝트가 될 수 있다. 즉, 상기 단말은 상기 제어대상 디바이스의 프로파일에서 화면 구성을 위한 UI 정보와 오브젝트에 등록될 제어명령 정보를 추출한 후, 상기 추출된 UI 정보를 이용하여 각 오브젝트의 이미지를 화면에 배치하고, 상기 추출된 제어명령 정보를 각 오브젝트에 연결한다. 이후, 상기 단말은 화면에 배치된 각 오브젝트의 이미지와 오브젝트별 제어명령 정보를 매핑하여 등록한다.In step 315, the terminal analyzes a profile of the control target device existing in the memory or received from the profile server, and configures a control application for the selected control target device in real time based on an analysis result. Display. Here, the profile is configured to include UI information for screen configuration and control command information to be registered in an object, and also includes a communication protocol. The UI information includes image information of an object constituting the screen. It is configured to include layout information. For example, as shown in FIG. 4, the object may be various kinds of objects that can be provided to the user through a terminal such as a button, a touch input, a gesture input, a sensor input, a file list, a video, and a music. That is, the terminal extracts UI information for screen configuration and control command information to be registered in the object from the profile of the control target device, and then uses the extracted UI information to place an image of each object on the screen. The connected control command information to each object. Thereafter, the terminal maps and registers an image of each object disposed on the screen and control command information for each object.

이후, 상기 단말은 317단계에서 상기 구성된 제어 어플리케이션을 이용하여 사용자의 키 조작에 따라 상기 선택된 제어대상 디바이스를 원격 제어할 수 있다. 즉, 사용자로부터 화면에 배치된 오브젝트의 이미지가 입력되면, 상기 단말은 상기 오브젝트 이미지에 매핑된 제어명령 정보를 확인하고, 상기 확인된 제어명령 정보를 해당 프로파일에 정의되어 있는 통신 프로토콜(예를 들어 TCP, UDP, UPnP 등의 규격)에 맞게 가공하여 해당 제어대상 디바이스로 전송한다. 또한, 상기 단말은 해당 제어대상 디바이스로부터 정보가 수신되면, 상기 수신된 정보를 해석하고, 상기 해석된 정보와 등록된 제어명령 정보를 비교하여 적절한 동작을 수행한다. In step 317, the terminal can remotely control the selected control target device according to a user's key manipulation using the configured control application. That is, when an image of an object disposed on the screen is input from the user, the terminal checks the control command information mapped to the object image, and the determined control command information is used in a communication protocol (for example, defined in the corresponding profile). Process it according to the standards of TCP, UDP, UPnP, etc.) and send it to the device to control. In addition, when information is received from the corresponding control target device, the terminal interprets the received information, compares the analyzed information with registered control command information, and performs an appropriate operation.

이후, 상기 단말은 본 발명에 따른 알고리즘을 종료한다. Thereafter, the terminal terminates the algorithm according to the present invention.

한편, 도시하지는 않았지만, 상기 단말은 제어대상 디바이스를 원격 제어하는 도중, 상기 제어대상 디바이스가 어떤 어플리케이션(또는 서비스)을 실행하게 되면, 해당 어플리케이션에 대하여 인터액션(Interaction)할 수 있는 최적의 제어 어플리케이션을 자동으로 구성할 수 있다. 상기 단말은 해당 제어대상 디바이스로부터 현재 수행되고 있거나 변경되는 서비스나 애플리케이션의 프로파일 또는 프로파일 식별자를 획득(메모리에서 검색 또는 프로파일 서버로 요청하여 수신)하고 이를 기반으로 사용자에게 최적의 제어 기능을 제공할 수 있는 제어 어플리케이션을 실시간으로 구성하도록 할 수 있다. 예를 들어, 제어대상 디바이스로서 PC가 검색되고 선택되면, 단말은 PC의 프로파일을 기반으로 PC의 마우스와 키보드 기능 관련 제어 어플리케이션을 구성하고, 이를 이용하여 PC를 원격 제어할 수 있다. 이때, PC가 미디어 플레이어(Media Player)나 파워포인트(Power Point) 등의 어플리케이션을 실행한다면, PC는 해당 어플리케이션의 프로파일 또는 프로파일 식별자를 단말로 전송하여, 상기 단말로 하여금 해당 프로파일을 획득(메모리에서 검색 또는 프로파일 서버로 요청하여 수신)하고 이를 기반으로 사용자에게 최적의 제어 기능을 제공할 수 있는 제어 어플리케이션을 실시간으로 구성하도록 할 수 있다. 즉, PC에서 미디어 플레이어가 실행되는 경우, 단말은 재생, 일시정지, 볼륨조절 등의 정보가 담긴 프로파일을 기반으로 미디어 플레이어에 대한 제어 기능을 사용자에게 제공하고, PC에서 파워포인트가 실행되는 경우, 단말은 프리젠테이션 모드 변경, 이전 페이지, 다음 페이지 등의 제어 기능을 제공할 수 있다. On the other hand, although not shown, the terminal, while remotely controlling the control target device, when the control target device executes an application (or service), the optimal control application that can interact with the application (Interaction) It can be configured automatically. The terminal may obtain a profile or profile identifier of a service or an application currently being executed or changed from the corresponding control target device (received by request from a memory or a profile server) and provide an optimal control function to the user based on the received profile. Control applications can be configured in real time. For example, when a PC is searched for and selected as the control target device, the terminal may configure a control application related to the mouse and keyboard functions of the PC based on the profile of the PC, and remotely control the PC using the same. At this time, if the PC executes an application such as a media player or a power point, the PC transmits a profile or profile identifier of the corresponding application to the terminal, and the terminal acquires the corresponding profile (in memory). Request to the search or profile server) and based on this, the control application can be configured in real time to provide the user with optimal control. That is, when the media player is running on the PC, the terminal provides the user with a control function for the media player based on a profile containing information such as play, pause, and volume control, and when the PowerPoint is executed on the PC, The terminal may provide a control function such as a presentation mode change, a previous page, a next page, and the like.

한편 본 발명의 상세한 설명에서는 구체적인 실시 예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시 예에 국한되어 정해져서는 아니 되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.Meanwhile, in the detailed description of the present invention, specific embodiments have been described, but various modifications are possible without departing from the scope of the present invention. Therefore, the scope of the present invention should not be limited to the described embodiments, but should be determined not only by the scope of the following claims, but also by the equivalents of the claims.

Claims (20)

전자 장치에 있어서,
명령어들을 저장하는 하나 이상의 메모리들;
통신 인터페이스; 및
상기 하나 이상의 메모리들 및 상기 통신 인터페이스와 기능적으로 결합된 하나 이상의 프로세서들을 포함하고, 상기 하나 이상의 프로세서들은,
외부 전자 장치로부터 상기 외부 전자 장치에서 현재 구동 중인 어플리케이션의 정보를 수신하고,
상기 외부 전자 장치에서 상기 구동 중인 어플리케이션의 정보에 기초하여 상기 구동 중인 어플리케이션을 제어하기 위한 프로파일을 획득하고,
상기 외부 전자 장치를 제어하기 위한 어플리케이션의 사용자 인터페이스(user interface) 상에서, 상기 외부 전자 장치에서 상기 구동 중인 어플리케이션을 제어하기 위한 상기 프로파일에 기초하여, 상기 외부 전자 장치에서 상기 구동 중인 어플리케이션의 적어도 하나의 기능과 관련된 적어도 하나의 실행가능한(executable) 객체를 표시하며,
상기 적어도 하나의 실행가능한 객체 중 하나의 실행가능한 객체를 선택하기 위한 입력을 수신하는 것에 응답하여, 상기 외부 전자 장치와 상기 전자 장치 사이의 직접(direct) 통신 경로를 통해 상기 외부 전자 장치 내에서 상기 선택된 실행가능한 객체에 의해 지시되는 기능을 실행하기 위한 신호를 송신하기 위해 상기 저장된 명령어들을 실행하도록 설정되는(configured) 전자 장치.
In an electronic device,
One or more memories for storing instructions;
Communication interface; And
One or more processors operatively coupled with the one or more memories and the communication interface, wherein the one or more processors include:
Receive information of an application currently running in the external electronic device from an external electronic device,
Acquire a profile for controlling the running application based on information of the running application in the external electronic device;
On the user interface of the application for controlling the external electronic device, based on the profile for controlling the application running in the external electronic device, at least one of the application running in the external electronic device Represents at least one executable object associated with a function,
In response to receiving an input for selecting one executable object of the at least one executable object, within the external electronic device via a direct communication path between the external electronic device and the electronic device; And configured to execute the stored instructions to transmit a signal for executing a function indicated by the selected executable object.
제 1 항에 있어서, 상기 하나 이상의 프로세서들은,
상기 외부 전자 장치를 제어하기 위한 상기 어플리케이션의 다른 사용자 인터페이스 상에서, 하나 이상의 외부 전자 장치들을 나타내기 위한 하나 이상의 객체들을 표시하고,
상기 하나 이상의 객체(object)들 중 하나의(an) 객체에 대한 입력을 검출하는 것에 응답하여, 상기 하나의 객체에 의해 지시되는 상기 외부 전자 장치의 상기 구동 중인 어플리케이션의 정보를 상기 외부 전자 장치에 요청하기 위해 상기 저장된 명령어들을 실행하도록 설정되는 전자 장치.
The method of claim 1, wherein the one or more processors are:
Displaying one or more objects for representing one or more external electronic devices on another user interface of the application for controlling the external electronic device,
In response to detecting an input to an object of the one or more objects, information about the running application of the external electronic device indicated by the one object to the external electronic device; An electronic device configured to execute the stored instructions to request.
제 2 항에 있어서, 상기 하나 이상의 프로세서들은,
상기 전자 장치 주변에 위치된 다른 전자 장치를 검색하기 위해 메시지를 방송하고,
상기 하나 이상의 외부 전자 장치들로부터 상기 하나 이상의 외부 전자 장치들에 대한 정보를 포함하는 하나 이상의 메시지들을 수신하고,
상기 하나 이상의 메시지들을 수신하는 것에 응답하여, 상기 어플리케이션의 상기 다른 사용자 인터페이스 상에서 상기 하나 이상의 객체들을 표시하기 위해 상기 저장된 명령어들을 실행하도록 설정되는 전자 장치.
The method of claim 2, wherein the one or more processors,
Broadcast a message to search for another electronic device located near the electronic device;
Receive one or more messages containing information about the one or more external electronic devices from the one or more external electronic devices,
In response to receiving the one or more messages, execute the stored instructions to display the one or more objects on the other user interface of the application.
제 3 항에 있어서, 상기 하나 이상의 외부 전자 장치들에 대한 상기 정보는,
상기 하나 이상의 외부 전자 장치들의 장치 이름(device name)에 대한 데이터, 상기 하나 이상의 외부 전자 장치들의 모델명(model name)에 대한 데이터, 상기 하나 이상의 외부 전자 장치들의 네트워크 주소에 대한 데이터, 상기 하나 이상의 외부 전자 장치들의 서비스명(service name)에 대한 데이터, 또는 상기 하나 이상의 외부 전자 장치들의 서비스 유형에 대한 데이터 중 적어도 하나를 포함하는 전자 장치.
The method of claim 3, wherein the information about the one or more external electronic devices,
Data for a device name of the one or more external electronic devices, data for a model name of the one or more external electronic devices, data for a network address of the one or more external electronic devices, the one or more external devices And at least one of data about a service name of electronic devices or data about a service type of the one or more external electronic devices.
제 1 항에 있어서, 상기 하나 이상의 프로세서들은,
상기 프로파일이 상기 전자 장치에 저장되지 않음을 식별하고,
상기 프로파일이 상기 전자 장치에 저장되지 않음을 식별하는 것에 응답하여, 서버 또는 상기 외부 전자 장치에게 상기 프로파일을 요청하기 위해 상기 저장된 명령어들을 실행하도록 설정되는 전자 장치.
The method of claim 1, wherein the one or more processors are:
Identify that the profile is not stored on the electronic device,
In response to identifying that the profile is not stored in the electronic device, configured to execute the stored instructions to request a profile from a server or the external electronic device.
제 5 항에 있어서, 상기 하나 이상의 프로세서들은,
상기 프로파일이 상기 전자 장치에 저장됨을 식별하고,
상기 저장된 프로파일에 기반하여, 상기 사용자 인터페이스 상에서 상기 적어도 하나의 실행가능한 객체를 표시하기 위해 상기 저장된 명령어들을 실행하도록 더 설정되는 전자 장치.
The method of claim 5, wherein the one or more processors,
Identify that the profile is stored on the electronic device,
Based on the stored profile, the electronic device further configured to execute the stored instructions to display the at least one executable object on the user interface.
제 1 항에 있어서, 상기 프로파일은,
상기 사용자 인터페이스에 대한 사용자 인터페이스 데이터(user interface data)를 포함하고,
상기 사용자 인터페이스 데이터는,
상기 적어도 하나의 실행가능한 객체에 대한 이미지 정보 또는 상기 적어도 하나의 실행가능한 객체의 배치(arrangement)에 대한 레이아웃(layout) 정보 중 적어도 하나를 포함하는 전자 장치.
The method of claim 1, wherein the profile,
And user interface data for the user interface,
The user interface data,
And at least one of image information of the at least one executable object or layout information of an arrangement of the at least one executable object.
제 7 항에 있어서, 상기 하나 이상의 프로세서들은,
상기 사용자 인터페이스 상에서 상기 프로파일에 기반하여 배치된 상기 적어도 하나의 실행가능한 객체를 표시하기 위해 상기 저장된 명령어들을 실행하도록 설정되는 전자 장치.
The method of claim 7, wherein the one or more processors,
Electronic device configured to execute the stored instructions on the user interface to display the at least one executable object disposed based on the profile.
전자 장치의 동작 방법에 있어서,
외부 전자 장치로부터 상기 외부 전자 장치에서 현재 구동 중인 어플리케이션의 정보를 수신하는 동작과,
상기 외부 전자 장치에서 상기 구동 중인 어플리케이션의 정보에 기초하여 상기 구동 중인 어플리케이션을 제어하기 위한 프로파일을 획득하는 동작과,
상기 외부 전자 장치를 제어하기 위한 어플리케이션의 사용자 인터페이스(user interface) 상에서, 상기 외부 전자 장치에서 상기 구동 중인 어플리케이션을 제어하기 위한 상기 프로파일에 기초하여, 상기 외부 전자 장치에서 상기 구동 중인 어플리케이션의 적어도 하나의 기능과 관련된 적어도 하나의 실행가능한(executable) 객체를 표시하는 동작과,
상기 적어도 하나의 실행가능한 객체 중 하나의 실행가능한 객체를 선택하기 위한 입력을 수신하는 것에 응답하여, 상기 외부 전자 장치와 상기 전자 장치 사이의 직접(direct) 통신 경로를 통해 상기 외부 전자 장치 내에서 상기 선택된 실행가능한 객체에 의해 지시되는 기능을 실행하기 위한 신호를 송신하는 동작을 포함하는 방법.
In the operating method of the electronic device,
Receiving information of an application currently running in the external electronic device from an external electronic device;
Acquiring a profile for controlling the running application based on information of the running application in the external electronic device;
On the user interface of the application for controlling the external electronic device, based on the profile for controlling the application running in the external electronic device, at least one of the application running in the external electronic device Display at least one executable object associated with the function,
In response to receiving an input for selecting one executable object of the at least one executable object, within the external electronic device via a direct communication path between the external electronic device and the electronic device; Transmitting a signal to perform a function indicated by the selected executable object.
제 9 항에 있어서, 상기 어플리케이션의 정보를 수신하는 동작은,
상기 외부 전자 장치를 제어하기 위한 상기 어플리케이션의 다른 사용자 인터페이스 상에서, 하나 이상의 외부 전자 장치들을 나타내기 위한 하나 이상의 객체들을 표시하는 동작과,
상기 하나 이상의 객체(object)들 중 하나의(an) 객체에 대한 입력을 검출하는 것에 응답하여, 상기 하나의 객체에 의해 지시되는 상기 외부 전자 장치의 상기 구동 중인 어플리케이션의 정보를 상기 외부 전자 장치에 요청하는 동작을 더 포함하는 방법.
The method of claim 9, wherein the receiving of the application information comprises:
Displaying one or more objects for representing one or more external electronic devices on another user interface of the application for controlling the external electronic device;
In response to detecting an input to an object of the one or more objects, information about the running application of the external electronic device indicated by the one object to the external electronic device; The method further comprises the requesting action.
제 10 항에 있어서, 상기 하나 이상의 객체들을 표시하는 동작은,
상기 전자 장치 주변에 위치된 다른 전자 장치를 검색하기 위해 메시지를 방송하는 동작과,
상기 하나 이상의 외부 전자 장치들로부터 상기 하나 이상의 외부 전자 장치들에 대한 정보를 포함하는 하나 이상의 메시지들을 수신하는 동작과,
상기 하나 이상의 메시지들을 수신하는 것에 응답하여, 상기 어플리케이션의 상기 다른 사용자 인터페이스 상에서 상기 하나 이상의 객체들을 표시하는 동작을 더 포함하는 방법.
The method of claim 10, wherein displaying the one or more objects comprises:
Broadcasting a message to search for another electronic device located near the electronic device;
Receiving one or more messages including information about the one or more external electronic devices from the one or more external electronic devices;
In response to receiving the one or more messages, displaying the one or more objects on the other user interface of the application.
제 11 항에 있어서, 상기 하나 이상의 외부 전자 장치들에 대한 상기 정보는,
상기 하나 이상의 외부 전자 장치들의 장치 이름(device name)에 대한 데이터, 상기 하나 이상의 외부 전자 장치들의 모델명(model name)에 대한 데이터, 상기 하나 이상의 외부 전자 장치들의 네트워크 주소에 대한 데이터, 상기 하나 이상의 외부 전자 장치들의 서비스명(service name)에 대한 데이터, 또는 상기 하나 이상의 외부 전자 장치들의 서비스 유형에 대한 데이터 중 적어도 하나를 포함하는 방법.
The method of claim 11, wherein the information about the one or more external electronic devices,
Data for a device name of the one or more external electronic devices, data for a model name of the one or more external electronic devices, data for a network address of the one or more external electronic devices, the one or more external devices At least one of data for a service name of electronic devices or data for a service type of the one or more external electronic devices.
제 9 항에 있어서, 상기 적어도 하나의 실행가능한 객체를 표시하는 동작은,
상기 프로파일이 상기 전자 장치에 저장되지 않음을 식별하는 동작과,
상기 프로파일이 상기 전자 장치에 저장되지 않음을 식별하는 것에 응답하여, 서버 또는 상기 외부 전자 장치에게 상기 프로파일을 요청하는 동작을 더 포함하는 방법.
The method of claim 9, wherein displaying the at least one executable object comprises:
Identifying that the profile is not stored on the electronic device;
In response to identifying that the profile is not stored on the electronic device, requesting the profile from a server or the external electronic device.
제 13 항에 있어서,
상기 프로파일이 상기 전자 장치에 저장됨을 식별하는 동작과,
상기 저장된 프로파일에 기반하여, 상기 사용자 인터페이스 상에서 상기 적어도 하나의 실행가능한 객체를 표시하기 위해 상기 저장된 명령어들을 실행하는 동작을 더 포함하는 방법.
The method of claim 13,
Identifying that the profile is stored in the electronic device;
Based on the stored profile, executing the stored instructions to display the at least one executable object on the user interface.
제 9 항에 있어서, 상기 프로파일은,
상기 사용자 인터페이스에 대한 사용자 인터페이스 데이터(user interface data)를 포함하고,
상기 사용자 인터페이스 데이터는,
상기 적어도 하나의 실행가능한 객체에 대한 이미지 정보 또는 상기 적어도 하나의 실행가능한 객체의 배치(arrangement)에 대한 레이아웃(layout) 정보 중 적어도 하나를 포함하는 방법.
The method of claim 9, wherein the profile,
And user interface data for the user interface,
The user interface data,
At least one of image information for the at least one executable object or layout information for an arrangement of the at least one executable object.
제 15 항에 있어서, 상기 적어도 하나의 실행가능한 객체를 표시하는 동작은,
상기 사용자 인터페이스 상에서 상기 프로파일에 기반하여 배치된 상기 적어도 하나의 실행가능한 객체를 표시하는 동작을 포함하는 방법.
The method of claim 15, wherein displaying the at least one executable object comprises:
Displaying the at least one executable object disposed based on the profile on the user interface.
비일시적(non-transitory) 컴퓨터 판독가능 저장 매체(medium)에 있어서,
외부 전자 장치로부터 상기 외부 전자 장치에서 현재 구동 중인 어플리케이션의 정보를 수신하는 동작과,
상기 외부 전자 장치에서 상기 구동 중인 어플리케이션의 정보에 기초하여 상기 구동 중인 어플리케이션을 제어하기 위한 프로파일을 획득하는 동작과, 상기 외부 전자 장치를 제어하기 위한 어플리케이션의 사용자 인터페이스(user interface) 상에서, 상기 외부 전자 장치에서 상기 구동 중인 어플리케이션을 제어하기 위한 상기 프로파일에 기초하여, 상기 외부 전자 장치에서 상기 구동 중인 어플리케이션의 적어도 하나의 기능과 관련된 적어도 하나의 실행가능한(executable) 객체를 표시하는 동작과,
상기 적어도 하나의 실행가능한 객체 중 하나의 실행가능한 객체를 선택하기 위한 입력을 수신하는 것에 응답하여, 상기 외부 전자 장치와 전자 장치 사이의 직접(direct) 통신 경로를 통해 상기 외부 전자 장치 내에서 상기 선택된 실행가능한 객체에 의해 지시되는 기능을 실행하기 위한 신호를 송신하는 동작을 실행하기 위한 하나 이상의 프로그램들을 저장하는 매체.
A non-transitory computer readable storage medium,
Receiving information of an application currently running in the external electronic device from an external electronic device;
Obtaining, by the external electronic device, a profile for controlling the running application based on information of the running application; and on the user interface of the application for controlling the external electronic device, the external electronic device. Displaying at least one executable object associated with at least one function of the running application at the external electronic device based on the profile for controlling the running application at the device;
In response to receiving an input for selecting one executable object of the at least one executable object, the selected within the external electronic device via a direct communication path between the external electronic device and the electronic device; A medium for storing one or more programs for executing an operation for transmitting a signal for executing a function indicated by an executable object.
제 17 항에 있어서, 상기 어플리케이션의 정보를 수신하는 동작은,
상기 외부 전자 장치를 제어하기 위한 상기 어플리케이션의 다른 사용자 인터페이스 상에서, 하나 이상의 외부 전자 장치들을 나타내기 위한 하나 이상의 객체들을 표시하는 동작과,
상기 하나 이상의 객체(object)들 중 하나의(an) 객체에 대한 입력을 검출하는 것에 응답하여, 상기 하나의 객체에 의해 지시되는 상기 외부 전자 장치의 상기 구동 중인 어플리케이션의 정보를 상기 외부 전자 장치에 요청하는 동작을 더 포함하는 매체.
The method of claim 17, wherein the receiving of the application information comprises:
Displaying one or more objects for representing one or more external electronic devices on another user interface of the application for controlling the external electronic device;
In response to detecting an input to an object of the one or more objects, information about the running application of the external electronic device indicated by the one object to the external electronic device; The medium further comprising the requesting action.
제 17 항에 있어서, 상기 적어도 하나의 실행가능한 객체를 표시하는 동작은,
상기 프로파일이 상기 전자 장치에 저장되지 않음을 식별하는 동작과,
상기 프로파일이 상기 전자 장치에 저장되지 않음을 식별하는 것에 응답하여, 서버 또는 상기 외부 전자 장치에게 상기 프로파일을 요청하는 동작을 더 포함하는 매체.
The method of claim 17, wherein displaying the at least one executable object comprises:
Identifying that the profile is not stored on the electronic device;
In response to identifying that the profile is not stored in the electronic device, requesting the profile from a server or the external electronic device.
제 17 항에 있어서, 상기 프로파일은,
상기 사용자 인터페이스에 대한 사용자 인터페이스 데이터(user interface data)를 포함하고,
상기 사용자 인터페이스 데이터는,
상기 적어도 하나의 실행가능한 객체에 대한 이미지 정보 또는 상기 적어도 하나의 실행가능한 객체의 배치(arrangement)에 대한 레이아웃(layout) 정보 중 적어도 하나를 포함하는 매체.
The method of claim 17, wherein the profile,
And user interface data for the user interface,
The user interface data,
And at least one of image information of the at least one executable object or layout information of an arrangement of the at least one executable object.
KR1020180149395A 2018-11-28 2018-11-28 Methods and apparatus for remote controlling peripheral device in mobile communication terminal KR102049069B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180149395A KR102049069B1 (en) 2018-11-28 2018-11-28 Methods and apparatus for remote controlling peripheral device in mobile communication terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180149395A KR102049069B1 (en) 2018-11-28 2018-11-28 Methods and apparatus for remote controlling peripheral device in mobile communication terminal

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020110000370A Division KR101924974B1 (en) 2011-01-04 2011-01-04 Methods and apparatus for remote controlling peripheral device in mobile communication terminal

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020190149802A Division KR102093397B1 (en) 2019-11-20 2019-11-20 Methods and apparatus for remote controlling peripheral device in mobile communication terminal

Publications (2)

Publication Number Publication Date
KR20180130470A KR20180130470A (en) 2018-12-07
KR102049069B1 true KR102049069B1 (en) 2020-01-08

Family

ID=64669485

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180149395A KR102049069B1 (en) 2018-11-28 2018-11-28 Methods and apparatus for remote controlling peripheral device in mobile communication terminal

Country Status (1)

Country Link
KR (1) KR102049069B1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060271695A1 (en) 2005-05-16 2006-11-30 Electronics Line 3000 Ltd. System for remote secured operation, monitoring and control of security and other types of events

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100667742B1 (en) * 2000-08-23 2007-01-11 삼성전자주식회사 Method and apparatus for controlling at least one controlled device in a controlling device
JP3800626B2 (en) * 2003-01-30 2006-07-26 ソニー株式会社 Control device and method, information processing device and method, recording medium, and program
KR100741850B1 (en) * 2005-11-24 2007-07-23 주식회사 유캠프 Apparatus and control method for home network system by united remote controller
KR20090039904A (en) * 2007-10-19 2009-04-23 경북대학교 산학협력단 Wireless network system and method of controlling device therein

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060271695A1 (en) 2005-05-16 2006-11-30 Electronics Line 3000 Ltd. System for remote secured operation, monitoring and control of security and other types of events

Also Published As

Publication number Publication date
KR20180130470A (en) 2018-12-07

Similar Documents

Publication Publication Date Title
US11416113B2 (en) Apparatus and method for remotely controlling peripheral devices in mobile communication terminal
RU2698247C2 (en) System and method for configuring remote control functionality of portable device
TWI511537B (en) Smart tv system, smart tv, mobile device and input operation method thereof
US9621434B2 (en) Display apparatus, remote control apparatus, and method for providing user interface using the same
KR101634745B1 (en) Electronic device, user input apparatus controlling electronic device and contol method thereof
EP2963935A1 (en) Multi screen display controlled by a plurality of remote controls
US11372612B2 (en) Display device and method for controlling same
US9078088B2 (en) System and method for transport layer agnostic programming interface for use with smartphones
US9418539B2 (en) Remote control apparatus and electronic device remotely controlled by the same
KR102417418B1 (en) Display apparatus, method for controlling display apparatus and recording media thereof
US20180113426A1 (en) Device control method and apparatus, and device control system
KR102049069B1 (en) Methods and apparatus for remote controlling peripheral device in mobile communication terminal
KR102156802B1 (en) Methods and apparatus for remote controlling peripheral device in mobile communication terminal
KR102093397B1 (en) Methods and apparatus for remote controlling peripheral device in mobile communication terminal
EP3748492B1 (en) Downloading and launching an app on a second device from a first device
CN114980358A (en) Automatic network distribution method, system, equipment and storage medium for batch intelligent equipment
CN117812204A (en) Display equipment and key function setting method
KR101012458B1 (en) Remote control device for providing personalized services using natural view user interface, and system having the said device, and method therefor, and the recording media storing the program performing the said method
KR20120025110A (en) Device and method for registrating zigbee device
KR20140147599A (en) Electronic device and method for controlling the same

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
A107 Divisional application of patent
GRNT Written decision to grant