KR102485648B1 - System and Method for Providing of Service for Controlling of Appliance of Home - Google Patents

System and Method for Providing of Service for Controlling of Appliance of Home Download PDF

Info

Publication number
KR102485648B1
KR102485648B1 KR1020170125262A KR20170125262A KR102485648B1 KR 102485648 B1 KR102485648 B1 KR 102485648B1 KR 1020170125262 A KR1020170125262 A KR 1020170125262A KR 20170125262 A KR20170125262 A KR 20170125262A KR 102485648 B1 KR102485648 B1 KR 102485648B1
Authority
KR
South Korea
Prior art keywords
management server
control code
built
additional
control
Prior art date
Application number
KR1020170125262A
Other languages
Korean (ko)
Other versions
KR20190036252A (en
Inventor
류민우
이장원
이혜림
임미숙
Original Assignee
주식회사 케이티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 케이티 filed Critical 주식회사 케이티
Priority to KR1020170125262A priority Critical patent/KR102485648B1/en
Publication of KR20190036252A publication Critical patent/KR20190036252A/en
Application granted granted Critical
Publication of KR102485648B1 publication Critical patent/KR102485648B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B15/00—Systems controlled by a computer
    • G05B15/02—Systems controlled by a computer electric
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/20—Pc systems
    • G05B2219/26—Pc applications
    • G05B2219/2642—Domotique, domestic, home control, automation, smart house

Abstract

본 발명은 음성데이터를 이용한 건물 내의 기기 제어서비스 제공시스템 및 방법에 관한 것으로, 사용자의 음성데이터를 획득하여 건물 내에 위치한 적어도 하나의 기기를 제어하기 위한 제어 코드로 변환하는 전자장치, 전자장치로부터 수신된 제어 코드와 관련된 기기의 정보를 확인하고, 기기가 빌트인기기인지 추가기기인지 확인하여 기기와 관련된 관리서버로 제어 코드를 전송하는 처리장치 및 제어 코드를 기반으로 기기를 제어하는 관리서버를 포함할 수 있고, 다른 실시 예로도 적용이 가능하다.The present invention relates to a system and method for providing a device control service in a building using voice data, which is received from an electronic device that acquires user's voice data and converts it into a control code for controlling at least one device located in a building, and received from the electronic device. It includes a processing unit that checks device information related to the control code and whether the device is a built-in device or an additional device and transmits the control code to the management server related to the device and a management server that controls the device based on the control code. It can be applied to other embodiments as well.

Description

음성데이터를 이용한 건물 내의 기기 제어서비스 제공시스템 및 방법{System and Method for Providing of Service for Controlling of Appliance of Home} System and method for providing device control service in a building using voice data {System and Method for Providing of Service for Controlling of Appliance of Home}

본 발명은 음성데이터를 이용한 건물 내의 기기 제어서비스 제공시스템 및 방법에 관한 것으로, 사용자의 음성데이터 분석을 통해 건물 내에 빌트인된 빌트인기기와 사용자가 추가한 추가기기 중에서 사용자가 제어하고자 하는 기기를 선택하여 제어할 수 있는 음성데이터를 이용한 건물 내의 기기 제어서비스 제공시스템 및 방법에 관한 것이다.The present invention relates to a system and method for providing a device control service in a building using voice data, by selecting a device to be controlled by a user from built-in devices built in a building and additional devices added by a user through analysis of user voice data. It relates to a system and method for providing a device control service in a building using controllable voice data.

국내의 보편적인 거주 형태는 아파트이고, 최근에는 거주자들이 월패드를 이용하여 거주하는 댁내 거실의 조명을 켜거나, 현관의 개폐를 제어하는 등 아파트에 빌트인(built-in)되어 있는 기기를 제어할 수 있다. 또한, 거주자들은 댁내에 무선 통신이 가능한 적어도 하나의 기기를 추가적으로 구비하여 스마트폰 등의 전자장치를 이용해 기기를 제어할 수 있다. A common type of residence in Korea is an apartment, and recently, residents can use a wall pad to control built-in devices in the apartment, such as turning on the lights in the living room or controlling the opening and closing of the front door. can In addition, residents may additionally have at least one device capable of wireless communication in their home and control the device using an electronic device such as a smart phone.

그러나, 현재는 거주자들이 빌트인기기는 월패드를 이용하여 제어하고, 추가적으로 구비한 추가기기는 거주자가 구비한 전자장치를 이용하여 제어함으로써, 댁내에 구비된 기기를 제어하기 위해 별도의 장치를 이용해야 하는 번거로움이 발생한다. However, currently, residents have to use a separate device to control built-in devices using a wall pad and control additional devices additionally provided by using electronic devices provided by residents. The hassle of doing so arises.

이러한 종래의 문제점을 해결하기 위한 본 발명의 다양한 실시 예들은 빌트인기기와 추가기기를 하나의 전자장치에서 제어할 수 있는 음성데이터를 이용한 건물 내의 기기 제어서비스 제공시스템 및 방법을 제공하는 것이다. Various embodiments of the present invention to solve these conventional problems are to provide a device control service providing system and method in a building using voice data capable of controlling a built-in device and an additional device from a single electronic device.

또한, 본 발명의 다양한 실시 예들은 전자장치에서 인식된 음성데이터를 기반으로 빌트인기기 및 추가기기 중 적어도 하나의 기기를 제어할 수 있는 음성데이터를 이용한 건물 내의 기기 제어서비스 제공시스템 및 방법을 제공하는 것이다. In addition, various embodiments of the present invention provide a system and method for providing a device control service in a building using voice data capable of controlling at least one of a built-in device and an additional device based on voice data recognized by an electronic device. will be.

본 발명의 일 실시 예에 제어서비스 제공시스템은, 사용자의 음성데이터를 획득하여 건물 내에 위치한 적어도 하나의 기기를 제어하기 위한 제어 코드로 변환하는 전자장치, 상기 전자장치로부터 수신된 상기 제어 코드와 관련된 기기의 정보를 확인하고, 상기 기기가 빌트인기기인지 추가기기인지 확인하여 상기 기기와 관련된 관리서버로 상기 제어 코드를 전송하는 처리장치 및 상기 제어 코드를 기반으로 상기 기기를 제어하는 상기 관리서버를 포함하는 것을 특징으로 한다. In one embodiment of the present invention, a control service providing system includes an electronic device that acquires user's voice data and converts it into a control code for controlling at least one device located in a building, and related to the control code received from the electronic device. A processing device that checks device information, whether the device is a built-in device or an additional device, and transmits the control code to a management server related to the device, and the management server that controls the device based on the control code It is characterized by doing.

또한, 관리서버는, 상기 기기가 상기 빌트인기기이면 상기 제어 코드를 기반으로 상기 기기를 제어하는 빌트인기기 관리서버 및 상기 기기가 상기 추가기기이면 상기 제어 코드를 기반으로 상기 기기를 제어하는 추가기기 관리서버를 포함하는 것을 특징으로 한다.In addition, the management server includes a built-in device management server for controlling the device based on the control code if the device is the built-in device and additional device management for controlling the device based on the control code if the device is the additional device. Characterized in that it includes a server.

또한, 처리장치는, 상기 기기의 사용 이력을 조회하고, 상기 기기가 특정 기간 내에 사용된 이력이 존재하면, 상기 기기와 관련된 상기 관리서버에 대한 데이터 포맷으로 상기 제어 코드의 데이터 포맷을 변환하여 상기 관리서버로 상기 제어 코드를 전송하는 것을 특징으로 한다. In addition, the processing device queries the use history of the device, and if there is a history of using the device within a specific period, converts the data format of the control code into a data format for the management server related to the device, It is characterized in that the control code is transmitted to the management server.

또한, 처리장치는, 상기 기기의 정보와 동일한 기기가 복수개 존재하면, 상기 복수개의 기기를 포함하는 중복 기기리스트를 상기 전자장치로 전송하는 것을 특징으로 한다. In addition, the processing device may transmit, to the electronic device, a duplicate device list including the plurality of devices if there are a plurality of devices identical to the information of the device.

또한, 처리장치는, 상기 전자장치로부터 상기 중복 기기리스트 중 어느 하나의 기기에 대한 선택신호가 수신되면, 상기 선택신호에 대응되는 기기와 관련된 상기 관리서버에 대한 데이터 포맷으로 상기 제어 코드의 데이터 포맷을 변환하여 상기 관리서버로 상기 제어 코드를 전송하는 것을 특징으로 한다. In addition, when a selection signal for any one device from the duplicate device list is received from the electronic device, the processing device converts the data format of the control code into a data format for the management server related to a device corresponding to the selection signal. and converting the control code to the management server.

아울러, 본 발명의 일 실시 예에 따른 제어서비스 제공방법은, 전자장치가 획득된 사용자의 음성데이터를 건물 내에 위치한 적어도 하나의 기기를 제어하기 위한 제어 코드로 변환하는 단계, 처리장치가 상기 전자장치로부터 수신된 상기 제어 코드와 관련된 기기의 정보를 기반으로 상기 기기가 빌트인기기인지 추가기기인지 확인하는 단계, 상기 처리장치가 상기 기기와 관련된 관리서버로 상기 제어 코드를 전송하는 단계 및 상기 관리서버가 상기 제어 코드를 기반으로 상기 기기를 제어하는 단계를 포함하는 것을 특징으로 한다.In addition, a method for providing a control service according to an embodiment of the present invention includes the steps of converting, by an electronic device, the acquired voice data of a user into a control code for controlling at least one device located in a building, the electronic device by a processing device. determining whether the device is a built-in device or an additional device based on device information related to the control code received from the controller, transmitting the control code to a management server related to the device by the processing device, and and controlling the device based on the control code.

또한, 관리서버로 상기 제어 코드를 전송하는 단계는, 상기 기기가 상기 빌트인기기이면 상기 제어 코드를 기반으로 상기 기기를 제어하는 빌트인기기 관리서버로 상기 제어 코드를 전송하는 단계 및 상기 기기가 상기 추가기기이면 상기 제어 코드를 기반으로 상기 가전 기기를 제어하는 추가기기 관리서버로 상기 제어 코드를 전송하는 단계를 포함하는 것을 특징으로 한다.In addition, the step of transmitting the control code to the management server may include transmitting the control code to a built-in device management server that controls the device based on the control code if the device is the built-in device, and and transmitting the control code to an additional device management server that controls the home appliance based on the control code if it is a device.

또한, 기기가 빌트인기기인지 추가기기인지 확인하는 단계는, 상기 기기의 사용 이력을 조회하는 단계 및 상기 기기가 특정 기간 내에 사용된 이력이 존재하면, 상기 기기와 관련된 상기 관리서버에 대한 데이터 포맷으로 상기 제어 코드의 데이터 포맷을 변환하는 단계를 더 포함하는 것을 특징으로 하는 제어서비스 제공방법. In addition, the step of determining whether the device is a built-in device or an additional device includes the step of inquiring the usage history of the device, and if the device has a usage history within a specific period, the data format for the management server related to the device The control service providing method further comprising converting the data format of the control code.

또한, 기기가 빌트인기기인지 추가기기인지 확인하는 단계는, 상기 기기의 정보와 동일한 기기가 복수개 존재하면, 상기 복수개의 기기를 포함하는 중복 기기리스트를 생성하여 상기 전자장치로 전송하는 단계 및 상기 전자장치로부터 상기 중복 기기리스트 중 어느 하나의 기기에 대한 선택신호가 수신되면, 상기 선택신호에 대응되는 기기와 관련된 상기 관리서버에 대한 데이터 포맷으로 상기 제어 코드의 데이터 포맷을 변환하는 단계를 더 포함하는 것을 특징으로 한다.In addition, the step of determining whether the device is a built-in device or an additional device may include, if there are a plurality of devices identical to the device information, generating a duplicate device list including the plurality of devices and transmitting the duplicated device list to the electronic device; and When a selection signal for any one device of the duplicate device list is received from the device, converting the data format of the control code into a data format for the management server related to a device corresponding to the selection signal characterized by

상술한 바와 같이 본 발명의 음성데이터를 이용한 건물 내의 기기 제어서비스 제공시스템 및 방법은, 빌트인기기와 추가기기를 하나의 전자장치에서 제어할 수 있도록 하고, 전자장치에서 인식된 음성데이터를 기반으로 빌트인기기 및 추가기기 중 적어도 하나의 기기를 제어할 수 있도록 함으로써, 사용자의 편의를 향상시킬 수 있는 효과가 있다. As described above, the system and method for providing a device control service in a building using voice data of the present invention enable a built-in device and an additional device to be controlled from one electronic device, and the built-in device based on the voice data recognized by the electronic device. By allowing at least one of the device and the additional device to be controlled, there is an effect of improving user convenience.

도 1은 본 발명의 실시 예에 따른 제어서비스 제공시스템을 도시한 도면이다.
도 2는 본 발명의 실시 예에 따른 빌트인기기를 제어하는 방법을 설명하기 위한 흐름도이다.
도 3은 본 발명의 실시 예에 따른 추가기기를 제어하는 방법을 설명하기 위한 흐름도이다.
도 4는 본 발명의 실시 예에 따른 전자장치의 동작 방법을 설명하기 위한 순서도이다.
도 5는 본 발명의 실시 예에 따른 처리장치의 동작 방법을 설명하기 위한 순서도이다. 1 is a diagram showing a control service providing system according to an embodiment of the present invention.
2 is a flowchart illustrating a method of controlling a built-in device according to an embodiment of the present invention.
3 is a flowchart illustrating a method of controlling an additional device according to an embodiment of the present invention.
4 is a flowchart for explaining a method of operating an electronic device according to an embodiment of the present invention.
5 is a flowchart illustrating an operating method of a processing device according to an embodiment of the present invention.

이하, 본 발명에 따른 바람직한 실시 형태를 첨부된 도면을 참조하여 상세하게 설명한다. 첨부된 도면과 함께 이하에 개시될 상세한 설명은 본 발명의 예시적인 실시형태를 설명하고자 하는 것이며, 본 발명이 실시될 수 있는 유일한 실시형태를 나타내고자 하는 것이 아니다. 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략할 수 있고, 명세서 전체를 통하여 동일 또는 유사한 구성 요소에 대해서는 동일한 참조 부호를 사용할 수 있다.Hereinafter, preferred embodiments according to the present invention will be described in detail with reference to the accompanying drawings. The detailed description set forth below in conjunction with the accompanying drawings is intended to describe exemplary embodiments of the present invention and is not intended to represent the only embodiments in which the present invention may be practiced. In order to clearly describe the present invention in the drawings, parts irrelevant to the description may be omitted, and the same reference numerals may be used for the same or similar components throughout the specification.

본 발명의 일 실시 예에서, “또는”, “적어도 하나” 등의 표현은 함께 나열된 단어들 중 하나를 나타내거나, 또는 둘 이상의 조합을 나타낼 수 있다. 예를 들어, “A 또는 B”, “A 및 B 중 적어도 하나”는 A 또는 B 중 하나만을 포함할 수 있고, A와 B를 모두 포함할 수도 있다.In one embodiment of the present invention, expressions such as “or” and “at least one” may represent one of the words listed together, or a combination of two or more. For example, "A or B" and "at least one of A and B" may include only one of A or B, or may include both A and B.

도 1은 본 발명의 실시 예에 따른 제어서비스 제공시스템을 도시한 도면이다.1 is a diagram showing a control service providing system according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 실시 예에 따른 시스템(10)은 전자장치(100), 처리장치(200), 빌트인기기 관리서버(300) 및 추가기기 관리서버(400)를 포함한다. Referring to FIG. 1 , a system 10 according to an embodiment of the present invention includes an electronic device 100, a processing device 200, a built-in device management server 300, and an additional device management server 400.

전자장치(100)는 사용자가 사용하는 장치로, 휴대전화기, 스마트 폰, 타블렛 PC 등일 수 있고, 처리장치(200)와 통신을 수행한다. 이를 위해, 전자장치(100)는 유선 또는 무선 통신 중 적어도 하나를 수행할 수 있다. 전자장치(100)는 WiFi(wireless fidelity), LTE(long term evolution), LTE-A(long term evolution-advanced), 블루투스(bluetooth), BLE(bluetooth low energy) 및 NFC(near field communication) 등의 무선 통신 및 USB(universal serial bus) Cable 등의 유선 통신을 통해 처리장치(200)와 통신을 수행할 수 있다. The electronic device 100 is a device used by a user, and may be a mobile phone, a smart phone, a tablet PC, or the like, and communicates with the processing device 200 . To this end, the electronic device 100 may perform at least one of wired or wireless communication. The electronic device 100 is wireless fidelity (WiFi), long term evolution (LTE), long term evolution-advanced (LTE-A), bluetooth, bluetooth low energy (BLE), and near field communication (NFC). Communication with the processing device 200 may be performed through wireless communication and wired communication such as a universal serial bus (USB) cable.

전자장치(100)는 마이크(미도시)를 통해 사용자로부터 입력되는 음성데이터를 획득하여 이를 분석한다. 전자장치(100)는 음성데이터 분석 알고리즘을 이용하여 음성데이터에서 제어하고자 하는 기기에 대한 정보 예컨대, 이름, 제어하고자 하는 동작을 확인할 수 있다. 전자장치(100)는 음성데이터를 기기를 제어하기 위한 제어 코드로 변환할 수 있다. 예컨대, 전자장치(100)가 “나갈거야, 엘리베이터 호출해줘”라는 음성데이터를 수신하면, 전자장치(100)는 음성데이터의 분석을 통해 건물 내에 설치된 기기 중에서 엘리베이터를 사용자의 거주지까지 호출하기 위한 제어 코드로 변환할 수 있다. 또한, 전자장치(100)가 “텔레비전 켜줘”라는 음성데이터를 수신하면, 전자장치(100)는 음성데이터의 분석을 통해 건물 내에 설치된 기기 중에서 텔레비전을 켜기 위한 제어 코드로 변환할 수 있다. 전자장치(100)는 변환된 제어 코드를 처리장치(200)로 전송할 수 있다. 이때, 엘리베이터 또는 텔레비전과 같은 기기의 고유 명칭, 기기의 상품명 또는 기기에 할당된 별명 등(이하, 기기의 이름이라 함)은, 사용자가 제어할 수 있는 건물 내 빌트인기기, 사용자의 댁내에 구비된 빌트인기기, 사용자가 추가적으로 댁내에 배치한 추가기기 각각에 대한 기기의 이름일 수 있다. The electronic device 100 obtains and analyzes voice data input from a user through a microphone (not shown). The electronic device 100 may check information about a device to be controlled from voice data, eg, a name and an operation to be controlled, by using a voice data analysis algorithm. The electronic device 100 may convert voice data into a control code for controlling the device. For example, when the electronic device 100 receives voice data saying "I'm going out, call the elevator", the electronic device 100 analyzes the voice data and controls to call an elevator from among devices installed in the building to the user's residence. can be converted into code. In addition, when the electronic device 100 receives voice data saying “Turn on the TV”, the electronic device 100 may analyze the voice data and convert it into a control code for turning on the TV among devices installed in the building. The electronic device 100 may transmit the converted control code to the processing device 200 . At this time, the unique name of the device, such as an elevator or television, the product name of the device, or a nickname assigned to the device (hereinafter referred to as the device name) is a built-in device in a building that can be controlled by the user, provided in the user's home. It may be a device name for each of the built-in device and the additional device additionally placed in the premises by the user.

전자장치(100)는 처리장치(200)로부터 음성데이터에 포함된 기기의 이름과 동일한 복수의 기기에 대한 중복 기기리스트를 수신하여 표시부(미도시) 또는 스피커(미도시) 중 적어도 하나를 통해 출력할 수 있다. 전자장치(100)는 중복 기기리스트에 포함된 기기 중 어느 하나의 기기에 대한 선택신호가 수신되면, 선택신호를 처리장치(200)로 전송한다. 이때, 선택신호는, 기기 선택을 위한 사용자 음성데이터일 수 있고, 사용자가 입력부(미도시)를 통해 입력한 입력 신호일 수 있다. The electronic device 100 receives, from the processing device 200, a duplicate device list for a plurality of devices having the same name as the device included in the voice data, and outputs the duplicated device list through at least one of a display unit (not shown) or a speaker (not shown). can do. When the electronic device 100 receives a selection signal for any one of the devices included in the duplicate device list, it transmits the selection signal to the processing device 200 . In this case, the selection signal may be user voice data for device selection or an input signal input by the user through an input unit (not shown).

전자장치(100)는 빌트인기기 관리서버(300) 또는 추가기기 관리서버(400) 중 어느 하나의 관리서버로부터 기기에 대한 제어결과를 수신한다. 전자장치(100)는 수신된 제어결과를 표시부 또는 스피커 중 적어도 하나를 통해 출력한다. 보다 구체적으로, 전자장치(100)는 엘리베이터를 호출하기 위한 음성데이터가 수신되면, 엘리베이터의 제어를 관리하는 빌트인기기 관리서버(300)로부터 엘리베이터의 호출 성공/실패를 알리기 위한 제어결과를 수신할 수 있다. 또한, 전자장치(100)는 텔레비전의 전원을 켜기 위한 음성데이터가 수신되면, 텔레비전의 제어를 관리하는 추가기기 관리서버(400)로부터 텔레비전 전원 온/오프에 대한 결과를 알리기 위한 제어결과를 수신할 수 있다. The electronic device 100 receives a device control result from any one of the built-in device management server 300 and the additional device management server 400 . The electronic device 100 outputs the received control result through at least one of a display unit and a speaker. More specifically, when voice data for calling an elevator is received, the electronic device 100 may receive a control result for notifying success/failure of an elevator call from the built-in device management server 300 that manages elevator control. there is. In addition, when voice data for turning on the television is received, the electronic device 100 receives a control result for notifying the result of turning on/off the television from the additional device management server 400 that manages the control of the television. can

처리장치(200)는 유선 또는 무선 통신 중 적어도 하나를 수행할 수 있다. 처리장치(200)는 WiFi(wireless fidelity), LTE(long term evolution), LTE-A(long term evolution-advanced), 블루투스(bluetooth), BLE(bluetooth low energy) 및 NFC(near field communication) 등의 무선 통신 및 USB(universal serial bus) Cable 등의 유선 통신을 통해 전자장치(100), 빌트인기기 관리서버(300), 추가기기 관리서버(400)와 통신을 수행할 수 있다. The processing device 200 may perform at least one of wired or wireless communication. The processing device 200 is wireless fidelity (WiFi), long term evolution (LTE), long term evolution-advanced (LTE-A), bluetooth, bluetooth low energy (BLE), and near field communication (NFC). Communication with the electronic device 100, the built-in device management server 300, and the additional device management server 400 may be performed through wireless communication and wired communication such as a universal serial bus (USB) cable.

처리장치(200)는 전자장치(100)로부터 제어 코드가 수신되면, 처리장치(200)는 제어 코드에 포함된 기기의 이름을 확인할 수 있다. 처리장치(200)는 메모리(미도시)에 저장된 적어도 하나의 기기에 대한 사용 이력 중에서 제어 코드에 포함된 기기의 이름 예컨대, A에 대응되는 기기의 사용 이력이 존재하는지 확인한다. 이때, 처리장치(200)는 제어 코드가 수신된 시점을 기준으로 특정 기간 예컨대, 일주일 동안 사용한 제어 코드에 포함된 기기에 대한 사용 이력을 조회할 수 있다. 처리장치(200)는 A의 사용 이력이 존재하면, 사용 이력을 기반으로 A를 관리하는 관리서버를 식별한다. 처리장치(200)는 A가 빌트인기기(330)이면, 빌트인기기 관리서버(300)로 제어 코드를 전송하고, A가 추가기기(420)이면, 추가기기 관리서버(400)로 제어 코드를 전송한다. 이때, 빌트인기기(330)는 사용자가 제어할 수 있는 건물 내 빌트인기기, 사용자의 댁내에 구비된 빌트인기기일 수 있고, 추가기기(420)는 사용자가 추가적으로 댁내에 배치한 기기일 수 있다. 예컨대, 건물 내 빌트인기기는 엘리베이터, 공지사항이 게시되는 게시판, 수도/환풍기/샷시 등 사용자의 댁내에 설치된 설비에 대한 보수신청 이력을 관리하기 위한 게시판 등일 수 있고, 댁내에 구비된 빌트인기기는 사용자의 댁내에 내장된 조명, 난방기기, 가스안전기 및 동체감지기 등일 수 있으며, 추가기기는 텔레비전, 라디오, 전자레인지, 냉장고, 세탁기 등일 수 있다. When the control code is received from the electronic device 100, the processing device 200 may check the name of the device included in the control code. The processing device 200 checks whether there is a use history of a device corresponding to the name of the device included in the control code, for example, A, among the use records of at least one device stored in a memory (not shown). In this case, the processing device 200 may inquire the use history of the device included in the control code used for a specific period, eg, a week, based on the time point at which the control code is received. If the use history of A exists, the processing device 200 identifies a management server that manages A based on the use history. If A is the built-in device 330, the processing device 200 transmits a control code to the built-in device management server 300, and if A is an additional device 420, transmits the control code to the additional device management server 400. do. In this case, the built-in device 330 may be a built-in device in a building that can be controlled by the user or a built-in device provided in the user's home, and the additional device 420 may be a device additionally placed in the user's home. For example, the built-in device in the building may be an elevator, a bulletin board on which notices are posted, a bulletin board for managing the maintenance application history for facilities installed in the user's home, such as water supply / ventilator / sash, etc. It may be a light, heating device, gas safety device, motion sensor, etc. built into the home of the user, and additional devices may be a television, radio, microwave oven, refrigerator, washing machine, and the like.

처리장치(200)는 A에 대한 사용 이력이 존재하지 않으면, 빌트인기기 관리서버(300)와 추가기기 관리서버(400)로 A의 이름을 갖는 기기에 대한 검색을 요청한다. 처리장치(200)는 빌트인기기 관리서버(300) 및 추가기기 관리서버(400)로부터 검색 요청에 대한 검색결과를 수신한다. 빌트인기기 관리서버(300)와 추가기기 관리서버(400)는 자신이 관리하는 빌트인기기(330) 및 추가기기(420)의 이름을 확인하여 이름이 A인 기기들에 대한 정보를 추출하여 처리장치(200)로 전송할 수 있다.If the use history for A does not exist, the processing device 200 requests the built-in device management server 300 and the additional device management server 400 to search for a device having the name of A. The processing device 200 receives a search result for a search request from the built-in device management server 300 and the additional device management server 400 . The built-in device management server 300 and the additional device management server 400 check the names of the built-in device 330 and the additional device 420 managed by the built-in device management server 300 and extract information about devices whose names are A to process devices. (200).

처리장치(200)는 빌트인기기 관리서버(300)와 추가기기 관리서버(400)로부터 수신된 검색결과를 기반으로 A와 이름이 동일한 기기에 대한 중복기기의 존재여부를 확인한다. 예컨대, 처리장치(200)는 검색결과에 포함된 기기들 중에서 기기의 이름이 A인 기기가 복수개이면, 중복기기에 대한 리스트를 생성하여 전자장치(100)로 전송한다. 즉, 처리장치(200)는 기기의 이름이 A인 중복기기의 정보로 중복기기 리스트로 생성하여 전자장치(100)로 전송한다. 처리장치(200)는 전자장치(100)로부터 중복기기 리스트 중에서 어느 하나의 기기에 대한 선택신호가 수신되면, 선택신호에 대응되는 기기를 관리하는 관리서버를 식별한다. 처리장치(200)는 선택신호에 대응되는 기기가 빌트인기기(330)이면, 빌트인기기 관리서버(300)로 제어 코드를 전송하고, 선택신호에 대응되는 기기가 추가기기(420)이면, 추가기기 관리서버(400)로 제어 코드를 전송한다. The processing device 200 determines whether a duplicate device exists for a device having the same name as A based on the search results received from the built-in device management server 300 and the additional device management server 400 . For example, if there are a plurality of devices whose device name is A among the devices included in the search result, the processing device 200 creates a list of duplicate devices and transmits the list to the electronic device 100 . That is, the processing device 200 generates a duplicate device list with information of a duplicate device whose device name is A and transmits the duplicate device list to the electronic device 100 . When a selection signal for any one device from the duplicate device list is received from the electronic device 100, the processing device 200 identifies a management server that manages a device corresponding to the selection signal. If the device corresponding to the selection signal is the built-in device 330, the processing device 200 transmits a control code to the built-in device management server 300, and if the device corresponding to the selection signal is the additional device 420, the additional device Transmits the control code to the management server (400).

처리장치(200)는 제어 코드를 관리서버로 전송하기 이전에, 관리서버가 빌트인기기 관리서버(300)이면 빌트인기기 관리서버(300)에서 호환되는 데이터 포맷으로 제어 코드를 변환한 후 전송한다. 또한, 관리서버가 추가기기 관리서버(400)이면 추가기기 관리서버(400)에서 호환되는 데이터 포맷으로 제어 코드를 변환한 후 전송한다. Before transmitting the control code to the management server, the processing device 200 converts the control code into a compatible data format in the built-in device management server 300 if the management server is the built-in device management server 300 and transmits the control code. In addition, if the management server is the additional device management server 400, the additional device management server 400 converts the control code into a compatible data format and transmits the control code.

빌트인기기 관리서버(300)는 처리장치(200)에서 수신되는 제어 코드를 이용하여 빌트인기기(330)를 제어한다. 이를 위해, 빌트인기기 관리서버(300)는 빌트인기기 연동서버(310), 빌트인기기 제어서버(320) 및 적어도 하나의 빌트인기기(330)를 포함할 수 있다. The built-in device management server 300 controls the built-in device 330 using the control code received from the processing device 200 . To this end, the built-in device management server 300 may include a built-in device linkage server 310, a built-in device control server 320, and at least one built-in device 330.

빌트인기기 연동서버(310)는 사용자가 제어할 수 있는 빌트인기기(330)에 대한 기기리스트를 구비하고, 처리장치(200)의 검색 요청에 따라, 특정 이름을 갖는 기기를 기기리스트에서 검색한다. 빌트인기기 연동서버(310)는 검색 결과를 처리장치(200)로 전송한다. 이때, 기기리스트는, 건물(예컨대, 사용자가 거주하는 아파트단지) 내 빌트인기기 및 사용자 댁내 빌트인기기에 대한 리스트일 수 있다. 건물 내 빌트인기기는 엘리베이터, 공지사항이 게시되는 게시판, 수도/환풍기/샷시 등 사용자의 댁내에 설치된 설비에 대한 보수신청 이력을 관리하기 위한 게시판 등일 수 있고, 댁내 빌트인기기는 사용자의 댁내에 내장된 조명, 난방기기, 가스안전기 및 동체감지기 등일 수 있다. The built-in device linkage server 310 has a device list for built-in devices 330 that can be controlled by a user, and searches for a device having a specific name from the device list according to a search request from the processing device 200. The built-in device linkage server 310 transmits the search result to the processing device 200 . In this case, the device list may be a list of built-in devices in a building (eg, an apartment complex where the user resides) and built-in devices in the user's home. The built-in device in the building may be an elevator, a bulletin board on which notices are posted, a bulletin board for managing the maintenance application history for facilities installed in the user's home, such as water supply / ventilator / sash, etc. It may be a lighting, heating device, gas safety device, motion detector, and the like.

빌트인기기 연동서버(310)는 처리장치(200)로부터 수신된 제어 코드를 빌트인기기 제어서버(320)로 전송한다. 빌트인기기 제어서버(320)는 수신된 제어 코드를 이용하여 제1 빌트인기기(303a) 내지 제n 빌트인기기(303n) 중 제어 코드에 대응되는 빌트인기기(이하, 빌트인기기(330)로 통칭함)를 제어하기 위한 제어 신호를 생성하고, 생성된 제어 신호를 이용하여 빌트인기기(330)를 제어한다. The built-in device linkage server 310 transmits the control code received from the processing device 200 to the built-in device control server 320 . The built-in device control server 320 uses the received control code to build-in devices corresponding to the control codes among the first built-in devices 303a to n-th built-in devices 303n (hereinafter collectively referred to as built-in devices 330). A control signal for controlling is generated, and the built-in device 330 is controlled using the generated control signal.

빌트인기기(330)는 빌트인기기 제어서버(320)로부터 수신된 제어 신호를 기반으로 제어를 수행하고, 수행된 제어결과를 빌트인기기 제어서버(320)를 통해 전자장치(100)로 전송한다. 이때, 빌트인기기(330)는 엘리베이터, 공지사항이 게시되는 게시판, 수도/환풍기/샷시 등 사용자의 댁내에 설치된 설비에 대한 보수신청 이력을 관리하기 위한 게시판, 사용자의 댁내에 내장된 조명, 난방기기, 가스안전기 및 동체감지기 등을 포함할 수 있다. The built-in device 330 performs control based on the control signal received from the built-in device control server 320 and transmits the performed control result to the electronic device 100 through the built-in device control server 320. At this time, the built-in device 330 is an elevator, a bulletin board on which notices are posted, a bulletin board for managing maintenance application records for facilities installed in the user's home, such as water supply / ventilator / sash, lighting and heating equipment built into the user's home , gas safety devices and motion detectors.

추가기기 관리서버(400)는 처리장치(200)에서 수신되는 제어 코드를 이용하여 추가기기(420)를 제어한다. 이를 위해, 추가기기 관리서버(400)는 추가기기 제어서버(410) 및 적어도 하나의 추가기기(420)를 포함할 수 있다. The additional device management server 400 controls the additional device 420 using the control code received from the processing device 200 . To this end, the additional device management server 400 may include an additional device control server 410 and at least one additional device 420 .

추가기기 제어서버(410)는 사용자가 제어할 수 있는 추가기기(420)에 대한 기기리스트를 구비하고, 처리장치(200)의 검색 요청에 따라, 특정 이름을 갖는 기기를 기기리스트에서 검색한다. 추가기기 제어서버(410)는 검색결과를 처리장치(200)로 전송한다. 이때, 기기리스트는, 텔레비전, 라디오, 전자레인지, 냉장고, 세탁기 등의 기기에 대한 리스트일 수 있다. The additional device control server 410 has a device list for additional devices 420 that can be controlled by a user, and searches for a device having a specific name from the device list according to a search request from the processing device 200 . The additional device control server 410 transmits the search result to the processing device 200 . In this case, the device list may be a list of devices such as a television, radio, microwave oven, refrigerator, and washing machine.

추가기기 제어서버(410)는 처리장치(200)로부터 수신된 제어 코드를 이용하여 제1 추가기기(420a) 내지 제n 추가기기(420n) 중에서 제어 코드에 대응되는 추가기기(이하, 추가기기(420)로 통칭함)를 제어하기 위한 제어 신호를 생성하고, 생성된 제어 신호를 이용하여 추가기기(420)를 제어한다.The additional device control server 410 uses the control code received from the processing device 200, and among the first additional device 420a to the n-th additional device 420n, the additional device corresponding to the control code (hereinafter, the additional device (hereinafter, the additional device) 420) is generated, and the additional device 420 is controlled using the generated control signal.

추가기기(420)는 추가기기 제어서버(410)로부터 수신된 제어 신호를 기반으로 제어를 수행하고, 수행된 제어결과를 추가기기 제어서버(410)를 통해 전자장치(100)로 전송한다. 이때, 추가기기(420)는 텔레비전, 라디오, 전자레인지, 냉장고, 세탁기 등 사용자가 댁내에 추가적으로 배치시킨 기기일 수 있다. The additional device 420 performs control based on the control signal received from the additional device control server 410 and transmits the performed control result to the electronic device 100 through the additional device control server 410 . In this case, the additional device 420 may be a device additionally placed in the home by the user, such as a television, radio, microwave oven, refrigerator, or washing machine.

도 2는 본 발명의 실시 예에 따른 빌트인기기를 제어하는 방법을 설명하기 위한 흐름도이다. 2 is a flowchart illustrating a method of controlling a built-in device according to an embodiment of the present invention.

도 2를 참조하면, 201단계에서 전자장치(100)는 사용자로부터 음성데이터를 수신한다. 203단계에서 전자장치(100)는 음성데이터의 분석을 수행한다. 205단계에서 전자장치(100)는 음성데이터의 분석을 통해 빌트인기기(330) 및 추가기기(420)를 포함하는 기기 중 어느 하나의 기기를 제어하기 위한 제어 코드를 생성한다. 보다 구체적으로, 전자장치(100)는 음성데이터의 분석을 통해서 음성데이터에 포함된 기기의 정보 및 제어하고자 하는 기기의 동작을 확인할 수 있다. 예컨대, 전자장치(100)가 사용자로부터 “나갈거야, 엘리베이터 호출해줘”라는 음성데이터를 수신하면, 전자장치(100)는 음성데이터의 분석을 통해 건물 내에 설치된 기기 중에서 엘리베이터를 사용자의 거주지까지 호출하기 위한 제어 코드를 생성할 수 있다. Referring to FIG. 2 , in step 201, the electronic device 100 receives voice data from the user. In step 203, the electronic device 100 analyzes the voice data. In step 205, the electronic device 100 generates a control code for controlling one of the devices including the built-in device 330 and the additional device 420 through analysis of the voice data. More specifically, the electronic device 100 can check the information of the device included in the voice data and the operation of the device to be controlled through analysis of the voice data. For example, when the electronic device 100 receives voice data from the user saying "I'm going out, call the elevator", the electronic device 100 analyzes the voice data to call an elevator from among devices installed in the building to the user's residence. You can generate control codes for

207단계에서 전자장치(100)는 처리장치(200)로 제어 코드를 전송한다. 209단계에서 처리장치(200)는 제어 코드에 포함된 기기의 정보에서 기기의 이름을 확인할 수 있다. 이때, 기기의 이름은, 기기의 고유 명칭, 기기의 상품명일 수 있고, 사용자가 임의로 기기에 할당한 이름일 수 있다. 처리장치(200)는 제어 코드에서 기기의 이름 예컨대, 엘리베이터를 확인할 수 있다. 211단계에서 처리장치(200)는 빌트인기기 연동서버(310)로 엘리베이터와 동일한 이름을 갖는 기기에 대한 검색을 요청할 수 있다. 빌트인기기 연동서버(310)는 자신이 관리하는 빌트인기기(330) 중에서 엘리베이터와 이름이 동일한 기기를 검색하여 검색결과를 처리장치(200)로 전송할 수 있다. In step 207, the electronic device 100 transmits a control code to the processing device 200. In step 209, the processing device 200 may check the name of the device from device information included in the control code. In this case, the name of the device may be a unique name of the device, a product name of the device, or a name arbitrarily assigned to the device by the user. The processing device 200 may check the name of the device, for example, an elevator, in the control code. In step 211, the processing device 200 may request a search for a device having the same name as the elevator to the built-in device linkage server 310. The built-in device linkage server 310 may search for a device having the same name as the elevator among the built-in devices 330 managed by the built-in device and transmit the search result to the processing device 200 .

213단계에서 처리장치(200)는 기기 검색 결과에 따라 엘리베이터를 제어할 수 있는 관리서버를 식별한다. 213단계에서 처리장치(200)는 식별결과, 엘리베이터를 제어할 수 있는 관리서버는 빌트인기기 관리서버(300)이므로, 빌트인기기 관리서버(300)에서 호환이 가능한 데이터 포맷으로 제어 코드를 변환할 수 있다. 215단계에서 처리장치(200)는 변환된 제어 코드를 빌트인기기 관리서버(300)에 포함된 빌트인기기 연동서버(310)로 전송하고, 217단계에서 빌트인기기 연동서버(310)는 변환된 제어 코드를 빌트인기기 제어서버(320)로 전송한다. 219단계에서 빌트인기기 제어서버(320)는 변환된 제어 코드를 기반으로 빌트인기기(330)를 제어할 수 있는 제어신호를 엘리베이터로 전송한다. In step 213, the processing device 200 identifies a management server capable of controlling the elevator according to the device search result. As a result of the identification in step 213, since the management server capable of controlling the elevator is the built-in device management server 300, the built-in device management server 300 can convert the control code into a compatible data format. there is. In step 215, the processing unit 200 transmits the converted control code to the built-in device linkage server 310 included in the built-in device management server 300, and in step 217, the built-in device linkage server 310 transmits the converted control code. is transmitted to the built-in device control server 320. In step 219, the built-in device control server 320 transmits a control signal capable of controlling the built-in device 330 to the elevator based on the converted control code.

221단계에서 빌트인기기(330)는 즉, 엘리베이터는 빌트인기기 제어서버(320)의 제어에 의해 사용자의 거주지까지 이동할 수 있다. 223단계에서 빌트인기기(330)는 사용자의 거주지까지 이동이 완료되면 제어 수행 결과를 빌트인기기 제어서버(320)로 전송한다. 225단계에서 빌트인기기 제어서버(320)는 제어 수행 결과를 빌트인기기 연동서버(310)로 전송한다. 227단계에서 빌트인기기 연동서버(310)는 제어 수행 결과를 전자장치(100)로 전송한다. 229단계에서 전자장치(100)는 제어 수행 결과를 출력할 수 있다. 이때, 전자장치(100)는 음성데이터 등의 청각 데이터로 제어 수행 결과를 출력할 수 있고, 텍스트데이터 등의 시각 데이터로 제어 수행 결과를 출력할 수 있다. In step 221, the built-in device 330, that is, the elevator can move to the user's residence under the control of the built-in device control server 320. In step 223, the built-in device 330 transmits a control execution result to the built-in device control server 320 when the movement to the user's residence is completed. In step 225, the built-in device control server 320 transmits the control performance result to the built-in device linkage server 310. In step 227, the built-in device linkage server 310 transmits the control execution result to the electronic device 100. In step 229, the electronic device 100 may output a control execution result. At this time, the electronic device 100 may output the control execution result as auditory data such as voice data, and may output the control execution result as visual data such as text data.

도 3은 본 발명의 실시 예에 따른 추가기기를 제어하는 방법을 설명하기 위한 흐름도이다. 3 is a flowchart illustrating a method of controlling an additional device according to an embodiment of the present invention.

도 3을 참조하면, 301단계에서 전자장치(100)는 사용자로부터 음성데이터를 수신한다. 303단계에서 전자장치(100)는 음성데이터의 분석을 수행한다. 305단계에서 전자장치(100)는 음성데이터의 분석을 통해 빌트인기기(330) 및 추가기기(420)를 포함하는 기기 중 어느 하나의 기기를 제어하기 위한 제어 코드를 생성한다. 보다 구체적으로, 전자장치(100)는 음성데이터의 분석을 통해서 음성데이터에 포함된 기기의 정보 및 제어하고자 하는 기기의 동작을 확인할 수 있다. 예컨대, 전자장치(100)가 사용자로부터 “텔레비전 켜줘”라는 음성데이터를 수신하면, 전자장치(100)는 음성데이터의 분석을 통해 건물 내에 설치된 기기 중에서 사용자의 댁내에 구비된 텔레비전을 켜기 위한 제어 코드를 생성할 수 있다. Referring to FIG. 3 , in step 301, the electronic device 100 receives voice data from the user. In step 303, the electronic device 100 analyzes the voice data. In step 305, the electronic device 100 generates a control code for controlling one of the devices including the built-in device 330 and the additional device 420 through analysis of the voice data. More specifically, the electronic device 100 can check the information of the device included in the voice data and the operation of the device to be controlled through analysis of the voice data. For example, when the electronic device 100 receives voice data saying “Turn on the TV” from the user, the electronic device 100 analyzes the voice data to obtain a control code for turning on the television installed in the user's home among devices installed in the building. can create

307단계에서 전자장치(100)는 처리장치(200)로 제어 코드를 전송한다. 309단계에서 제어 코드에 포함된 기기의 정보에서 기기의 이름을 확인할 수 있다. 이때, 기기의 이름은, 기기의 고유 명칭, 기기의 상품명일 수 있고, 사용자가 임의로 기기에 할당한 이름일 수 있다. 처리장치(200)는 제어 코드에서 기기의 이름 예컨대, 텔레비전을 확인할 수 있다. 처리장치(200)는 기기리스트에서 텔레비전을 추출할 수 있다. 311단계에서 처리장치(200)는 추가기기 제어서버(410)로 텔레비전과 동일한 이름을 갖는 기기에 대한 검색을 요청할 수 있다. 추가기기 제어서버(410)는 자신이 관리하는 추가기기(420) 중에서 텔레비전과 이름이 동일한 기기를 검색하여 검색결과를 처리장치(200)로 전송할 수 있다. In step 307, the electronic device 100 transmits a control code to the processing device 200. In step 309, the name of the device can be checked from device information included in the control code. In this case, the name of the device may be a unique name of the device, a product name of the device, or a name arbitrarily assigned to the device by the user. The processing unit 200 can identify the name of the device, eg, a television, in the control code. The processing device 200 may extract a television from the device list. In step 311, the processing device 200 may request the additional device control server 410 to search for a device having the same name as the television. The additional device control server 410 may search for a device having the same name as the television among the additional devices 420 managed by the server 410 and transmit the search result to the processing device 200 .

313단계에서 처리장치(200)는 기기 검색 결과에 따라 텔레비전을 제어할 수 있는 관리서버를 식별한다. 313단계에서 처리장치(200)는 식별결과, 텔레비전을 제어할 수 있는 관리서버는 추가기기 관리서버(400)이므로, 추가기기 관리서버(400)에서 호환이 가능한 데이터 포맷으로 제어 코드를 변환할 수 있다. 315단계에서 처리장치(200)는 변환된 제어 코드를 추가기기 관리서버(400)에 포함된 추가기기 제어서버(410)로 전송하고, 317단계에서 추가기기 제어서버(410)는 변환된 제어 코드를 기반으로 추가기기(420) 즉, 텔레비전을 제어할 수 있는 제어신호를 텔레비전으로 전송한다. In step 313, the processing device 200 identifies a management server capable of controlling the television according to the device search result. As a result of the identification in step 313, the processing unit 200 can convert the control code into a compatible data format in the additional device management server 400, since the management server capable of controlling the television is the additional device management server 400. there is. In step 315, the processing unit 200 transmits the converted control code to the additional device control server 410 included in the additional device management server 400, and in step 317, the additional device control server 410 transmits the converted control code. Based on , a control signal capable of controlling the additional device 420 , that is, the television is transmitted to the television.

319단계에서 추가기기(420)는 즉, 텔레비전은 추가기기 제어서버(410)의 제어에 의해 전원을 온(on)할 수 있다. 321단계에서 추가기기(420)는 전원이 온되면, 제어 수행 결과를 추가기기 제어서버(410)로 전송한다. 323단계에서 추가기기 제어서버(410)는 제어 수행 결과를 전자장치(100)로 전송한다. 325단계에서 전자장치(100)는 제어 수행 결과를 출력할 수 있다. 이때, 전자장치(100)는 음성데이터 등의 청각 데이터로 제어 수행 결과를 출력할 수 있고, 텍스트데이터 등의 시각 데이터로 제어 수행 결과를 출력할 수 있다.In step 319, the power of the additional device 420, that is, the television, can be turned on under the control of the additional device control server 410. In step 321, when the power is turned on, the additional device 420 transmits the control performance result to the additional device control server 410. In step 323, the additional device control server 410 transmits the control performance result to the electronic device 100. In step 325, the electronic device 100 may output a control execution result. At this time, the electronic device 100 may output the control execution result as auditory data such as voice data, and may output the control execution result as visual data such as text data.

도 4는 본 발명의 실시 예에 따른 전자장치의 동작 방법을 설명하기 위한 순서도이다. 4 is a flowchart for explaining a method of operating an electronic device according to an embodiment of the present invention.

도 4를 참조하면, 401단계에서 전자장치(100)는 기기 제어를 위한 시작신호의 수신여부를 확인한다. 401단계의 확인결과, 시작신호가 수신되면 전자장치(100)는 403단계를 수행한다. 이때, 시작신호는 전자장치(100)에 구비된 마이크(미도시)를 통해 수신되는 음성데이터, 입력부(미도시)를 통해 수신되는 압력데이터 또는 터치데이터 중 적어도 하나의 데이터에 대한 신호일 수 있다. Referring to FIG. 4 , in step 401, the electronic device 100 checks whether a start signal for device control has been received. As a result of checking in step 401, when the start signal is received, the electronic device 100 performs step 403. In this case, the start signal may be a signal for at least one of voice data received through a microphone (not shown) provided in the electronic device 100, pressure data received through an input unit (not shown), or touch data.

403단계에서 전자장치(100)는 마이크로부터 수신되는 음성데이터를 수신한다. 405단계에서 전자장치(100)는 음성데이터를 분석한다. 407단계에서 전자장치(100)는 음성데이터의 분석을 통해서 음성데이터에 포함된 기기의 정보 및 제어하고자 하는 기기의 동작을 확인할 수 있다. 예컨대, 전자장치(100)가 사용자로부터 “나갈거야, 엘리베이터 호출해줘”라는 음성데이터를 수신하면, 전자장치(100)는 음성데이터의 분석을 통해 건물 내에 설치된 기기 중에서 엘리베이터를 사용자의 거주지까지 호출하기 위한 제어 코드를 생성할 수 있다. 또한, 전자장치(100)가 사용자로부터 “텔레비전 켜줘”라는 음성데이터를 수신하면, 전자장치(100)는 음성데이터의 분석을 통해 건물 내에 설치된 기기 중에서 사용자의 댁내에 구비된 텔레비전을 켜기 위한 제어 코드를 생성할 수 있다.In step 403, the electronic device 100 receives voice data received from the microphone. In step 405, the electronic device 100 analyzes the voice data. In step 407, the electronic device 100 can check the device information included in the voice data and the operation of the device to be controlled through analysis of the voice data. For example, when the electronic device 100 receives voice data from the user saying "I'm going out, call the elevator", the electronic device 100 analyzes the voice data to call an elevator from among devices installed in the building to the user's residence. You can generate control codes for In addition, when the electronic device 100 receives voice data saying “Turn on the TV” from the user, the electronic device 100 analyzes the voice data to obtain a control code for turning on the television installed in the user's home among devices installed in the building. can create

409단계에서 전자장치(100)는 생성된 제어 코드를 처리장치(200)로 전송한다. 411단계에서 전자장치(100)는 처리장치(200)로부터 중복 기기리스트가 수신되면 413단계를 수행하고, 중복 기기리스트가 수신되지 않으면 419단계를 수행한다. 이때, 중복 기기리스트는, 제어 코드에 포함된 기기의 이름과 동일한 이름을 가진 기기들에 대한 리스트일 수 있다. 413단계에서 전자장치(100)는 중복 기기리스트를 출력한다. 이때, 전자장치(100)는 전자장치(100)에 구비된 스피커(미도시)를 통해 음성데이터를 포함하는 청각 데이터로 중복 기기리스트를 출력할 수 있고, 전자장치(100)에 구비된 표시부(미도시)를 통해 텍스트데이터를 포함하는 시각 데이터로 출력할 수 있다. In step 409, the electronic device 100 transmits the generated control code to the processing device 200. In step 411, the electronic device 100 performs step 413 when the duplicate device list is received from the processing device 200, and performs step 419 when the duplicate device list is not received. In this case, the duplicate device list may be a list of devices having the same name as the name of the device included in the control code. In step 413, the electronic device 100 outputs a duplicate device list. At this time, the electronic device 100 may output a duplicate device list with auditory data including voice data through a speaker (not shown) provided in the electronic device 100, and a display unit provided in the electronic device 100 ( Not shown) may be output as visual data including text data.

415단계에서 전자장치(100)는 사용자로부터 중복 기기리스트 중 어느 하나의 기기에 대한 선택신호 여부를 확인한다. 415단계의 확인결과, 선택신호가 수신되면 417단계에서 전자장치(100)는 선택신호를 처리장치(200)로 전송하고, 선택신호가 수신되지 않으면 선택신호의 수신을 대기한다. In step 415, the electronic device 100 checks whether or not a selection signal for any one device from the duplicate device list is received from the user. As a result of checking in step 415, if the selection signal is received, in step 417, the electronic device 100 transmits the selection signal to the processing device 200, and if the selection signal is not received, it waits for reception of the selection signal.

419단계에서 전자장치(100)는 빌트인기기 관리서버(300) 또는 추가기기 관리서버(400) 중 적어도 하나의 관리서버로부터 제어결과의 수신여부를 확인한다. 이때, 제어결과는, 제어 코드에 포함된 기기 또는 중복 기기리스트에서 선택된 기기에 대한 제어결과일 수 있다. 421단계에서 전자장치(100)는 관리서버로부터 수신된 제어결과를 출력한다. 이때, 전자장치(100)는 스피커를 통해 청각 데이터로 제어결과를 출력할 수 있고, 표시부를 통해 시각 데이터로 출력할 수 있다. In step 419, the electronic device 100 checks whether a control result has been received from at least one of the built-in device management server 300 and the additional device management server 400. In this case, the control result may be a control result for a device included in the control code or a device selected from the overlapping device list. In step 421, the electronic device 100 outputs the control result received from the management server. At this time, the electronic device 100 may output the control result as auditory data through a speaker and visual data through the display unit.

도 5는 본 발명의 실시 예에 따른 처리장치의 동작 방법을 설명하기 위한 순서도이다. 5 is a flowchart illustrating an operating method of a processing device according to an embodiment of the present invention.

도 5를 참조하면, 501단계에서 처리장치(200)는 전자장치(100)로부터 제어 코드의 수신여부를 확인한다. 501단계의 확인결과, 제어 코드가 수신되면 처리장치(200)는 503단계를 수행하고, 제어 코드가 수신되지 않으면 처리장치(200)는 제어 코드의 수신을 대기한다. 503단계에서 처리장치(200)는 제어 코드에 포함된 기기의 정보에 기기의 이름을 확인할 수 있다. 이때, 기기의 이름은, 기기의 고유 명칭, 기기의 상품명일 수 있고, 사용자가 임의로 기기에 할당한 이름일 수 있다. 예컨대, 처리장치(200)는 제어 코드에서 기기의 이름이 A인 것을 확인할 수 있다. Referring to FIG. 5 , in step 501, the processing device 200 checks whether a control code has been received from the electronic device 100. As a result of checking in step 501, if the control code is received, the processing device 200 performs step 503, and if the control code is not received, the processing device 200 waits for the control code to be received. In step 503, the processing device 200 may check the name of the device in device information included in the control code. In this case, the name of the device may be a unique name of the device, a product name of the device, or a name arbitrarily assigned to the device by the user. For example, the processing device 200 can confirm that the name of the device is A in the control code.

505단계에서 처리장치(200)는 A의 사용 이력을 조회할 수 있다. 이를 위해, 처리장치(200)는 기기의 사용 이력을 저장할 수 있다. 처리장치(200)는 제어 코드가 수신된 시점을 기준으로 특정 기간 예컨대, 일주일 동안 사용한 A의 사용 이력을 조회할 수 있다. 507단계에서 처리장치(200)는 사용 이력의 존재여부를 확인한다. 507단계의 확인결과, A의 사용 이력이 존재하면, 처리장치(200)는 517단계를 수행한다. 517단계에서 처리장치(200)는 A를 관리하는 관리서버를 식별할 수 있다. 이때, 관리서버는 빌트인기기 관리서버(300)와 추가기기 관리서버(400)를 포함할 수 있다. 처리장치(200)는 A가 빌트인기기 관리서버(300)에서 관리하는 기기인지 추가기기 관리서버(400)에서 관리하는 기기인지 확인할 수 있다. In step 505, the processing device 200 may inquire the use history of A. To this end, the processing device 200 may store a usage history of the device. The processing device 200 may inquire the use history of A used for a specific period, for example, a week based on the time point at which the control code is received. In step 507, the processing device 200 checks whether a use history exists. As a result of checking in step 507, if the use history of A exists, the processing device 200 performs step 517. In step 517, the processing device 200 may identify a management server that manages A. At this time, the management server may include a built-in device management server 300 and an additional device management server 400 . The processing device 200 can determine whether A is a device managed by the built-in device management server 300 or a device managed by the additional device management server 400 .

519단계에서 처리장치(200)는 517단계의 확인된 관리서버에서 호환 가능한 데이터 포맷으로 제어 코드의 포맷을 변환하고 521단계를 수행한다. 521단계에서 처리장치(200)는 데이터 포맷이 변환된 제어 코드를 빌트인기기 관리서버(300) 또는 추가기기 관리서버(400) 중 A를 관리하는 관리서버로 전송할 수 있다. In step 519, the processing device 200 converts the format of the control code into a data format compatible with the management server confirmed in step 517 and performs step 521. In step 521, the processing device 200 may transmit the control code whose data format is converted to a management server that manages A of the built-in device management server 300 or the additional device management server 400.

507단계의 확인결과, A의 사용 이력이 존재하지 않으면, 처리장치(200)는 509단계를 수행한다. 509단계에서 처리장치(200)는 빌트인기기 관리서버(300) 및 추가기기 관리서버(400)로 A의 이름을 갖는 기기에 대한 검색을 요청하고, 빌트인기기 관리서버(300) 및 추가기기 관리서버(400)로부터 검색 요청에 대한 검색결과를 수신한다. 빌트인기기 관리서버(300)와 추가기기 관리서버(400)는 자신이 관리하는 빌트인기기(330) 및 추가기기(420)의 이름을 확인하여 이름이 A인 기기들에 대한 정보를 추출하여 처리장치(200)로 전송할 수 있다. As a result of checking in step 507, if the use history of A does not exist, the processing device 200 performs step 509. In step 509, the processing unit 200 requests the built-in device management server 300 and the additional device management server 400 to search for a device named A, and the built-in device management server 300 and the additional device management server A search result for a search request is received from 400 . The built-in device management server 300 and the additional device management server 400 check the names of the built-in device 330 and the additional device 420 managed by the built-in device management server 300 and extract information about devices whose names are A to process devices. (200).

511단계에서 처리장치(200)는 관리서버로부터 수신된 검색결과를 기반으로 A와 이름이 동일한 기기에 대한 중복기기의 존재여부를 확인한다. 예컨대, 처리장치(200)는 검색결과에 포함된 기기들 중에서 기기의 이름이 A인 기기가 복수개인지 확인할 수 있다. 처리장치(200)는 중복기기가 존재하면 513단계를 수행하고, 중복기기가 존재하지 않으면 517단계를 수행한다. In step 511, the processing unit 200 checks whether a duplicate device exists for a device having the same name as A based on the search result received from the management server. For example, the processing device 200 may check whether there are a plurality of devices whose device name is A among the devices included in the search result. The processing unit 200 performs step 513 if there is a duplicate device, and performs step 517 if there is no duplicate device.

513단계에서 처리장치(200)는 중복기기에 대한 리스트를 생성하여 전자장치(100)로 전송한다. 즉, 처리장치(200)는 기기의 이름이 A인 중복기기의 정보로 중복기기 리스트로 생성한다. 515단계에서 처리장치(200)는 전자장치(100)로부터 중복기기 리스트 중에서 어느 하나의 기기에 대한 선택신호의 수신여부를 확인한다. 515단계의 확인결과, 전자장치(100)로부터 선택신호가 수신되면, 전자장치(100)는 517단계를 수행한다. 517단계 내지 521단계는 상기에서 설명하였으므로 상세한 설명을 생략하기로 한다. 515단계의 확인결과, 전자장치(100)로부터 선택신호가 수신되지 않으면, 전자장치(100)는 선택신호의 수신을 대기한다. In step 513, the processing device 200 generates a list of duplicate devices and transmits the list to the electronic device 100. That is, the processing device 200 creates a redundant device list with the information of the redundant device whose device name is A. In step 515, the processing device 200 checks whether a selection signal for any one device from the duplicate device list has been received from the electronic device 100. As a result of checking in step 515, when the selection signal is received from the electronic device 100, the electronic device 100 performs step 517. Since steps 517 to 521 have been described above, a detailed description thereof will be omitted. As a result of checking in step 515, if the selection signal is not received from the electronic device 100, the electronic device 100 waits for reception of the selection signal.

본 명세서와 도면에 개시된 본 발명의 실시 예들은 본 발명의 기술 내용을 쉽게 설명하고 본 발명의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 따라서 본 발명의 범위는 여기에 개시된 실시 예들 이외에도 본 발명의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.Embodiments of the present invention disclosed in the present specification and drawings are only presented as specific examples to easily explain the technical content of the present invention and help understanding of the present invention, and are not intended to limit the scope of the present invention. Therefore, the scope of the present invention should be construed as including all changes or modifications derived based on the technical idea of the present invention in addition to the embodiments disclosed herein.

Claims (9)

사용자의 음성데이터를 획득하여 상기 음성데이터를 건물 내에 위치한 적어도 하나의 기기를 제어하기 위한 제어 코드로 변환하는 전자장치;
상기 전자장치로부터 수신된 상기 제어 코드와 관련된 기기의 정보를 확인하고, 상기 기기가 빌트인기기인지 추가기기인지 확인하여 상기 기기와 관련된 관리서버에 대한 데이터 포맷으로 상기 제어 코드의 데이터 포맷을 변환하여 상기 기기와 관련된 관리서버로 상기 제어 코드를 전송하는 처리장치; 및
상기 제어 코드를 기반으로 상기 빌트인기기를 제어하는 빌트인기기 관리서버 및 상기 추가기기를 제어하는 추가기기 관리서버를 포함하는 상기 관리서버;
를 포함하고,
상기 처리장치는,
상기 기기의 사용 이력을 조회하고, 상기 기기가 특정 기간 내에 사용된 이력이 존재하면, 상기 사용 이력에 기초하여 상기 기기와 관련된 상기 관리서버로 상기 제어 코드를 전송하고,
상기 기기가 특정 기간 내에 사용된 이력이 존재하지 않으면, 상기 관리서버로부터 상기 관리서버에 구비된 빌트인기기에 대한 기기리스트 및 추가기기에 대한 기기리스트에 기초하여 상기 제어 코드와 관련된 상기 기기의 정보를 확인하고, 상기 기기의 정보에 기초하여 상기 기기와 관련된 상기 관리서버로 상기 제어 코드를 전송하는 것을 특징으로 하는 제어서비스 제공시스템.An electronic device that acquires user's voice data and converts the voice data into a control code for controlling at least one device located in a building;
It checks the device information related to the control code received from the electronic device, checks whether the device is a built-in device or an additional device, and converts the data format of the control code into a data format for a management server related to the device. a processing device that transmits the control code to a management server associated with the device; and
the management server including a built-in device management server controlling the built-in device based on the control code and an additional device management server controlling the additional device;
including,
The processing device,
Inquiring a usage history of the device, and if there is a history of using the device within a specific period, transmitting the control code to the management server related to the device based on the usage history;
If there is no history of using the device within a specific period, information on the device related to the control code is obtained from the management server based on a device list for built-in devices and a device list for additional devices provided in the management server. and transmitting the control code to the management server related to the device based on information of the device. 삭제delete 삭제delete 제1항에 있어서,
상기 처리장치는,
상기 기기의 정보와 동일한 기기가 복수개 존재하면, 상기 복수개의 기기를 포함하는 중복 기기리스트를 상기 전자장치로 전송하는 것을 특징으로 하는 제어서비스 제공시스템. According to claim 1,
The processing device,
and transmitting a duplicate device list including the plurality of devices to the electronic device if there are a plurality of devices identical to the information of the device. 제4항에 있어서,
상기 처리장치는,
상기 전자장치로부터 상기 중복 기기리스트 중 어느 하나의 기기에 대한 선택신호가 수신되면, 상기 선택신호에 대응되는 기기와 관련된 상기 관리서버에 대한 데이터 포맷으로 상기 제어 코드의 데이터 포맷을 변환하여 상기 관리서버로 상기 제어 코드를 전송하는 것을 특징으로 하는 제어서비스 제공시스템. According to claim 4,
The processing device,
When a selection signal for any one device from the duplicate device list is received from the electronic device, the data format of the control code is converted into a data format for the management server related to the device corresponding to the selection signal to the management server. Control service providing system characterized in that for transmitting the control code to. 전자장치가 사용자의 음성데이터를 획득하여 상기 음성데이터를 건물 내에 위치한 적어도 하나의 기기를 제어하기 위한 제어 코드로 변환하는 단계;
처리장치가 상기 전자장치로부터 수신된 상기 제어 코드와 관련된 기기의 정보를 기반으로 상기 기기가 빌트인기기인지 추가기기인지 확인하는 단계;
상기 처리장치가 상기 빌트인기기를 제어하는 빌트인기기 관리서버 및 상기 추가기기를 제어하는 추가기기 관리서버 중 상기 기기와 관련된 관리서버에 대한 데이터 포맷으로 상기 제어 코드의 데이터 포맷을 변환하여 상기 기기와 관련된 관리서버로 상기 제어 코드를 전송하는 단계; 및
상기 관리서버가 상기 제어 코드를 기반으로 상기 기기를 제어하는 단계;
를 포함하고,
상기 제어 코드를 전송하는 단계는,
상기 처리장치가 상기 기기의 사용 이력을 조회하는 단계;
상기 기기가 특정 기간 내에 사용된 이력이 존재하면, 상기 처리장치가 상기 사용 이력에 기초하여 상기 기기와 관련된 상기 관리서버로 상기 제어 코드를 전송하는 단계;
상기 기기가 특정 기간 내에 사용된 이력이 존재하지 않으면, 상기 처리장치가 상기 관리서버로부터 상기 관리서버에 구비된 빌트인기기에 대한 기기리스트 및 추가기기에 대한 기기리스트에 기초하여 상기 제어 코드와 관련된 상기 기기의 정보를 확인하고, 상기 기기의 정보에 기초하여 상기 기기와 관련된 상기 관리서버로 상기 제어 코드를 전송하는 단계를 포함하는 것을 특징으로 하는 제어서비스 제공방법. obtaining, by an electronic device, voice data of a user and converting the voice data into a control code for controlling at least one device located in a building;
determining, by a processing device, whether the device is a built-in device or an additional device based on device information related to the control code received from the electronic device;
The processing device converts the data format of the control code into a data format for a management server related to the device among the built-in device management server controlling the built-in device and the additional device management server controlling the additional device, thereby Transmitting the control code to a management server; and
controlling the device based on the control code by the management server;
including,
Transmitting the control code,
querying, by the processing device, a use history of the device;
transmitting, by the processing device, the control code to the management server related to the device based on the usage history, if the device has a usage history within a specific period of time;
If there is no history of using the device within a specific period of time, the processing device determines the information related to the control code based on a device list for built-in devices and a device list for additional devices provided in the management server from the management server. A control service providing method comprising: checking device information and transmitting the control code to the management server related to the device based on the device information. 제6항에 있어서,
상기 관리서버로 상기 제어 코드를 전송하는 단계는,
상기 기기가 상기 빌트인기기이면 상기 제어 코드를 상기 빌트인기기 관리서버로 상기 제어 코드를 전송하는 단계; 및
상기 기기가 상기 추가기기이면 상기 제어 코드를 상기 추가기기 관리서버로 상기 제어 코드를 전송하는 단계;
를 포함하는 것을 특징으로 하는 제어서비스 제공방법. According to claim 6,
Transmitting the control code to the management server,
If the device is the built-in device, transmitting the control code to the built-in device management server; and
If the device is the additional device, transmitting the control code to the additional device management server;
Control service providing method comprising a. 삭제delete 제7항에 있어서,
상기 기기가 빌트인기기인지 추가기기인지 확인하는 단계는,
상기 기기의 정보와 동일한 기기가 복수개 존재하면, 상기 복수개의 기기를 포함하는 중복 기기리스트를 생성하여 상기 전자장치로 전송하는 단계; 및
상기 전자장치로부터 상기 중복 기기리스트 중 어느 하나의 기기에 대한 선택신호가 수신되면, 상기 선택신호에 대응되는 기기와 관련된 상기 관리서버에 대한 데이터 포맷으로 상기 제어 코드의 데이터 포맷을 변환하는 단계;
를 더 포함하는 것을 특징으로 하는 제어서비스 제공방법. According to claim 7,
The step of determining whether the device is a built-in device or an additional device,
generating a duplicate device list including the plurality of devices and transmitting the duplicated device list to the electronic device if there are a plurality of devices identical to the device information; and
converting a data format of the control code into a data format for the management server related to a device corresponding to the selection signal when a selection signal for any one device from the duplicate device list is received from the electronic device;
Control service providing method characterized in that it further comprises.
KR1020170125262A 2017-09-27 2017-09-27 System and Method for Providing of Service for Controlling of Appliance of Home KR102485648B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170125262A KR102485648B1 (en) 2017-09-27 2017-09-27 System and Method for Providing of Service for Controlling of Appliance of Home

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170125262A KR102485648B1 (en) 2017-09-27 2017-09-27 System and Method for Providing of Service for Controlling of Appliance of Home

Publications (2)

Publication Number Publication Date
KR20190036252A KR20190036252A (en) 2019-04-04
KR102485648B1 true KR102485648B1 (en) 2023-01-05

Family

ID=66105475

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170125262A KR102485648B1 (en) 2017-09-27 2017-09-27 System and Method for Providing of Service for Controlling of Appliance of Home

Country Status (1)

Country Link
KR (1) KR102485648B1 (en)

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040203387A1 (en) * 2003-03-31 2004-10-14 Sbc Knowledge Ventures, L.P. System and method for controlling appliances with a wireless data enabled remote control
KR101909498B1 (en) * 2012-09-19 2018-10-19 주식회사 케이티 Control Station for Remote Control of Home Appliances by Recognition of Natural Language Based Command and Method thereof

Also Published As

Publication number Publication date
KR20190036252A (en) 2019-04-04

Similar Documents

Publication Publication Date Title
CN102830687B (en) Intelligent home control system and method
US20190222432A1 (en) Smart household control method, apparatus and system
US8498572B1 (en) Home automation device pairing by NFC-enabled portable device
US9153126B2 (en) Smart switch and remote control system using the same
US9412266B2 (en) Signal conversion device and smart home network system using the same
US9842489B2 (en) Waking other devices for additional data
US9547980B2 (en) Smart gateway, smart home system and smart controlling method thereof
US20140100854A1 (en) Smart switch with voice operated function and smart control system using the same
US20140121786A1 (en) Smart gateway, smart home system and smart remote control method thereof
Yue et al. Voice activated smart home design and implementation
KR101253148B1 (en) Digital device control system capable of infrared signal addition using smart phone and home server
US20160269691A1 (en) System for monitoring door using door phone
KR101909498B1 (en) Control Station for Remote Control of Home Appliances by Recognition of Natural Language Based Command and Method thereof
TW201419797A (en) Gateway, smart home system and smart control method of home appliance thereof
US20160132029A1 (en) Method for configuring and controlling smart home products
KR20160139343A (en) Method and apparatus for controlling peripheral devices
CN105467846A (en) Intelligent household appliance control method and system
CN112513786B (en) Electronic device and control method thereof
JP2013098821A (en) Remote control system, and remote controller device for remote control system used in the same
JP2016063415A (en) Network system, audio output method, server, device and audio output program
US8958788B2 (en) Home electronic apparatus control system, home electronic control apparatus, and wireless home electronic apparatus control terminal
CN205139694U (en) Intelligent housing system
TW202027462A (en) Home device control system and method thereof
KR102485648B1 (en) System and Method for Providing of Service for Controlling of Appliance of Home
JP2019062374A (en) Management device, management system, management method, and program

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant