KR20200008708A - A voice recognition remote control system for electrical appliances using infrared ray communication and a method using the same - Google Patents

A voice recognition remote control system for electrical appliances using infrared ray communication and a method using the same Download PDF

Info

Publication number
KR20200008708A
KR20200008708A KR1020180082686A KR20180082686A KR20200008708A KR 20200008708 A KR20200008708 A KR 20200008708A KR 1020180082686 A KR1020180082686 A KR 1020180082686A KR 20180082686 A KR20180082686 A KR 20180082686A KR 20200008708 A KR20200008708 A KR 20200008708A
Authority
KR
South Korea
Prior art keywords
code
remote control
home appliance
function
infrared
Prior art date
Application number
KR1020180082686A
Other languages
Korean (ko)
Other versions
KR102124606B1 (en
Inventor
고창룡
송철호
이훈
오경수
Original Assignee
한남대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한남대학교 산학협력단 filed Critical 한남대학교 산학협력단
Priority to KR1020180082686A priority Critical patent/KR102124606B1/en
Publication of KR20200008708A publication Critical patent/KR20200008708A/en
Application granted granted Critical
Publication of KR102124606B1 publication Critical patent/KR102124606B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C23/00—Non-electrical signal transmission systems, e.g. optical systems
    • G08C23/04—Non-electrical signal transmission systems, e.g. optical systems using light waves, e.g. infrared
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q2209/00—Arrangements in telecontrol or telemetry systems
    • H04Q2209/40—Arrangements in telecontrol or telemetry systems using a wireless architecture

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Selective Calling Equipment (AREA)
  • Telephonic Communication Services (AREA)

Abstract

The present invention relates to a voice recognition remote control service system for home appliances using infrared ray communications and a method thereof and, more specifically, to a voice recognition remote control service system comprising a virtualization device (100), a remote control device (200), and a server (300) and a method thereof. According to the present invention, a smart home service can be used for general home appliances using infrared ray communications even if a separate home appliance for a smart home service is not purchased so as to use the smart home service more economically, thereby increasing convenience of real life and providing various services. Also, according to the present invention, it is possible to control home appliances remotely or through voice by using the virtualization device (100) and the remote control device (200) even if a separate home appliance for the smart home service is not purchased. In addition, the server (300) analyzes operation patterns of home appliances to provide the same to a user or to suggest an operation of a home appliance based on the operation patterns to a user, thereby enabling a user to enjoy a more convenient life.

Description

적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템 및 방법{A voice recognition remote control system for electrical appliances using infrared ray communication and a method using the same}A voice recognition remote control system for electrical appliances using infrared ray communication and a method using the same}

본 발명은 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템 및 방법에 관한 것으로, 보다 구체적으로는 가상화장치(100); 리모컨장치(200); 및 서버(300);를 포함하는 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템 및 방법에 관한 것이다.The present invention relates to a voice recognition remote control service system and method for home appliances in infrared communication, and more specifically, the virtualization apparatus 100; A remote control apparatus 200; And a server 300. The present invention relates to a voice recognition remote control service system and method for household appliances in infrared communication.

사물인터넷(Internet of Things, IoT)의 발달에 따라 이를 적용한 다양한 기술들이 소개되고 있다. 스마트 홈서비스는 사물인터넷을 활용한 기술 중 하나이다. 보다 상세한 스마트 홈서비스 관련된 기술과 제품으로는 가스밸브를 잠그지 않고 외출하더라도 사용자의 외출을 인지하여 자동으로 가스밸브를 잠그거나 원격으로 가스밸브를 잠그는 스마트 밸브, 외출한 상태에서도 카메라를 통해 집안 내부를 확인할 수 있는 스마트 카메라, 사용자의 생활 패턴에 따라 미리 동작하는 스마트 에어컨 등이 있다. With the development of the Internet of Things (IoT), various technologies are being introduced. Smart home service is one of the technologies using the Internet of Things. Smart home service related technologies and products are smart valves that automatically shut off the gas valve or remotely lock the gas valve by recognizing the user's outing even if the gas valve is not locked out. Smart cameras that can be checked, smart air conditioners that operate in advance according to the user's life pattern.

그런데 이러한 스마트 홈서비스를 이용하기 위해서는 스마트 홈서비스 기능이 있는 스마트 가전기기를 구매해야 하는 문제점이 있어 소비자들에게 경제적인 측면에서 부담감이 있으며, 또한 스마트 홈서비스 기능이 있는 전용 가전기기를 구매하더라도 별도의 업체에서 제공하는 스마트 홈서비스에 가입해야 하기 때문에, 더욱 경제적으로 부담감이 발생하고 있는 실정이다. However, in order to use such a smart home service, there is a problem of purchasing a smart home appliance having a smart home service function, and there is a burden on the economic side to consumers, and even if a dedicated home appliance having a smart home service function is purchased separately. Because of the need to subscribe to the smart home service provided by the company, the situation is occurring more economically.

따라서 일반 가전기기를 구입한 경우에도 스마트 홈서비스를 누릴 수 있는 기술개발이 필요하다. Therefore, it is necessary to develop a technology that can enjoy smart home service even when purchasing general home appliances.

일반 가전기기와 스마트 가전기기는 통신 수단과 방법에서 차이가 있다. 스마트 가전기기는 통신망에 접근 가능한 통신 수단을 구비하여 이를 통해 가전기기의 제어 및 상태 정보 취득이 가능한 양방향 통신이 이루어지고 있으나, 일반적인 가전기기는 적외선 신호를 기반으로 리모컨은 송신하고 가전기기는 수신하는 방식으로 단방향 통신을 하는 구조로 이루어져 있다. General home appliances and smart home appliances are different in communication means and methods. Smart home appliances are provided with a communication means that can access the communication network through which the two-way communication is possible to control and acquire the status information of the home appliance, but the general home appliance transmits the remote control based on the infrared signal and receives the home appliance It consists of a one-way communication structure.

따라서 일반 가전기기에 구비되어 있는 적외선 통신 방식을 이용하면서 특정 가전기기를 제어하고 가전기기의 기능 동작 및 상태 정보를 송수신할 수 있는 기술개발이 필요하다. Therefore, there is a need for a technology development capable of controlling a specific home appliance and transmitting / receiving function operation and status information of the home appliance while using an infrared communication method provided in a general home appliance.

한국 공개특허공보 제10-2017-0067917호(“스마트홈 가전 서비스 제공 시스템 및 서비스 제공 방법”, 2017.06.19.)Korean Unexamined Patent Publication No. 10-2017-0067917 (“Smart home appliances service providing system and service providing method”, 2017.06.19.)

본 발명은 상기한 바와 같은 문제점을 해결하기 위해 안출된 것으로서, 본 발명에 의한 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템의 목적은 별도의 스마트 홈서비스용 가전기기를 구입하지 않더라도, 즉 적외선 통신하는 일반 가전기기를 대상으로 스마트 홈서비스를 사용할 수 있어 보다 경제적으로 스마트 홈서비스를 사용할 수 있으며, 이를 통해 실생활 편의성을 증대시키는 서비스를 제공하는데 있다.The present invention has been made to solve the above problems, the object of the voice recognition remote control service system for home appliances for infrared communication according to the present invention, even if you do not purchase a separate smart home service home appliances, namely infrared Smart home service can be used for general home appliances to communicate more economically, smart home service can be used, thereby providing a service that increases the convenience of real life.

상기한 바와 같은 문제점을 해결하기 위하여, 본 발명의 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템은, In order to solve the problems as described above, the voice recognition remote control service system for home appliances in the infrared communication of the present invention,

IR 신호 송신부(120)와 IR 신호 수신부(130)를 구비하고, 물리적으로 다른 특정 가전기기와 논리적으로 하나로 통합하여 가상 코드(151)를 부여함으로써 가상화된 특정 가전기기를 식별하고, 상기 특정 가전기기에서 제공하는 리모트 컨트롤러의 기능 버튼의 적외선 신호 코드에 해당하는 IR 코드(152)를 저장함으로써 상기 특정 가전기기를 제어하는 적외선 신호의 수신을 통해 특정 가전기기의 기능 수행 및 상태 정보를 인지하는 가상화장치(100); The IR signal transmitter 120 and the IR signal receiver 130 are provided, and the virtual appliance 151 is identified by logically integrating with another specific household appliance logically and given a virtual code 151 to identify the virtualized specific household appliance, and the specific household appliance A virtualization apparatus that recognizes the function performance and status information of a specific home appliance by receiving an infrared signal controlling the specific home appliance by storing an IR code 152 corresponding to an infrared signal code of a function button of a remote controller provided by 100;

제어 대상 가전기기 및 제어 기능을 음성으로 입력받아 상응하는 기능 수행을 위한 적외선 신호를 생성하여 송신하고, 제어 대상 가전기기에 가상화된 가상화장치(100)를 통해 제어 대상 가전기기가 수행하는 기능 동작 및 상태 정보를 수집함으로써 적외선 통신하는 가전기기를 음성으로 제어하는 리모컨장치(200); 및 Receiving a control target home appliance and a control function as a voice to generate and transmit an infrared signal for performing a corresponding function, the function operation performed by the controlled home appliance through the virtualization device 100 virtualized to the controlled home appliance and Remote control device 200 for controlling the home appliance to communicate by infrared by collecting state information by voice; And

상기 리모컨장치(200)를 통한 음성 입력을 인식하여 제어 대상과 제어 기능으로 분류하여 코드화하고, 이를 식별 코드(351)로 구별되는 리모컨장치(200)와 매칭하고, 상기 식별 코드(351)로 구별되는 리모컨장치(200)를 통해 수집되는 가전기기의 기능 동작 및 상태 정보를 시간 시점으로 누적하여 데이터베이스화 하고, 이를 기반으로 분석된 기능 동작의 패턴 코드를 생성하는 서버(300);를 포함하는 것을 특징으로 한다. Recognizes the voice input through the remote control device 200 and classifies and codes it into a control object and a control function, matches it with the remote control device 200 distinguished by the identification code 351, and distinguishes it by the identification code 351. It includes a server 300 accumulates the functional operation and state information of the home appliances collected through the remote control device 200 to a time point, and generates a pattern code of the analyzed functional operation based on this; It features.

본 발명의 일실시예에 있어서, 상기 가상화장치(100)는 적외선 신호를 송신하는 IR 신호 송신부(120); 적외선 신호를 수신하는 IR 신호 수신부(130); 외부 통신 장치와 연결하여 데이터를 주고받는 통신부(140); 가상화된 특정 가전기기를 구별하는 가상 코드(151) 및 상기 특정 가전기기에서 제공하는 리모트 컨트롤러의 기능 버튼의 적외선 신호 코드에 해당하는 IR 코드(152)를 관리하는 코드관리부(150); 및 적외선 신호를 송신, 생성 및 수신하고, 수신된 적외선 신호의 분석을 포함하여 가상화장치(100)의 동작을 수행하고 관리하는 제어부(110);를 포함하고, In one embodiment of the present invention, the virtualization apparatus 100 includes an IR signal transmitter 120 for transmitting an infrared signal; An IR signal receiver 130 for receiving an infrared signal; A communication unit 140 for transmitting and receiving data by connecting to an external communication device; A code manager 150 for managing a virtual code 151 for identifying a virtualized specific home appliance and an IR code 152 corresponding to an infrared signal code of a function button of a remote controller provided by the specific home appliance; And a controller 110 for transmitting, generating, and receiving an infrared signal, and performing and managing an operation of the virtualization apparatus 100 including analysis of the received infrared signal.

상기 리모컨장치(200)는 음성을 인식하여 제어 대상 가전기기를 구분하는 가전 코드(261) 및 수행 기능을 구분하는 기능 코드(262)로 구분하여 매칭 하는 음성인식부(260); 외부 통신 장치와 연결하여 데이터를 주고받는 통신부(270); 음성으로 명령을 입력받는 마이크(280); 오디오를 출력하는 스피커(290); 적외선 신호를 송신하는 IR 신호 송신부(220); 적외선 신호를 수신하는 IR 신호 수신부(230); 감지기를 구비하는 센서부(240); 서버(300)에서 리모컨장치(200)를 구별하는 식별코드(251) 및 상기 기능 코드(262)의 적외선 신호 코드에 해당하는 IR 코드(252)를 관리하는 코드관리부(250); 및 리모컨장치(200)의 모든 기능 동작을 수행하고 관리하는 제어부(210);를 포함하며, The remote control apparatus 200 includes a voice recognition unit 260 that recognizes and distinguishes and matches a home appliance code 261 for distinguishing a control target home appliance and a function code 262 for distinguishing a performing function; A communication unit 270 for transmitting and receiving data by connecting to an external communication device; A microphone 280 that receives a command by voice; A speaker 290 for outputting audio; An IR signal transmitter 220 for transmitting an infrared signal; An IR signal receiver 230 for receiving an infrared signal; A sensor unit 240 having a detector; Code management unit 250 for managing the IR code 252 corresponding to the infrared code code of the identification code 251 and the function code 262 to distinguish the remote control device 200 in the server 300; And a controller 210 that performs and manages all function operations of the remote control apparatus 200.

상기 서버(300)는 리모컨장치(200)에서 전달되는 음성을 인식하여 상응하는 코드를 생성하거나 코드관리부(350)를 통해 매칭 하는 음성인식부(320); 외부 통신 장치와 연결하여 데이터를 주고받는 통신부(340); 제어 대상을 구분하는 가전 코드(352), 제어 기능을 구분하는 기능 코드(353), 접속하는 리모컨장치(200)를 구별하는 식별 코드(351) 및 상기 기능 코드(353)의 적외선 신호 코드에 해당하는 IR 코드(354)를 관리하는 코드관리부(350); 리모컨장치(200)에서 수행된 제어 대상과 기능 수행 정보를 데이터베이스화 하여 패턴 코드(331)를 생성하는 서비스D/B(330); 서버(300)의 모든 기능 동작을 수행하고 관리하는 서비스매니저(310);를 포함하는 것을 특징으로 한다. The server 300 includes a voice recognition unit 320 to recognize the voice transmitted from the remote control device 200 to generate a corresponding code or to match through the code management unit 350; A communication unit 340 for connecting with an external communication device to exchange data; Corresponds to the home appliance code 352 for distinguishing the control target, the function code 353 for distinguishing the control function, the identification code 351 for distinguishing the remote controller 200 to be connected, and the infrared signal code of the function code 353. Code management unit 350 for managing the IR code 354 to the; A service D / B 330 for generating a pattern code 331 by making a control object and function performance information performed by the remote control apparatus 200 into a database; And a service manager 310 for performing and managing all functional operations of the server 300.

본 발명의 일실시예에 있어서, 상기 통신부(140, 270, 340)는 모뎀, 블루투스, 지그비, 와이파이, LAN, USB 및 UART 에서 선택되는 하나 이상의 통신 수단을 포함하는 것을 특징으로 한다. In one embodiment of the present invention, the communication unit 140, 270, 340 is characterized in that it comprises one or more communication means selected from modem, Bluetooth, Zigbee, Wi-Fi, LAN, USB and UART.

본 발명의 일실시예에 있어서, 상기 센서부(240)는 온도센서, 습도센서, 먼지센서, 열감지센서, 조도센서, 가속도센서, 근접센서, 지자계센서, CO2센서, VOC센서, 가스센서 및 자이로센서에서 선택되는 하나 이상의 감지기를 포함하는 것을 특징으로 한다.In one embodiment of the present invention, the sensor unit 240 is a temperature sensor, humidity sensor, dust sensor, heat sensor, illuminance sensor, acceleration sensor, proximity sensor, geomagnetic sensor, CO 2 sensor, VOC sensor, gas It characterized in that it comprises one or more detectors selected from sensors and gyro sensors.

또한 본 발명은 (a) 리모컨장치(200)가 마이크(280)를 통해 음성을 입력받아 이를 음성인식부(260)에서 분석하여 제어 대상 가전기기와 제어 기능을 구분하며, 제어 대상 가전기기에 해당하는 가전 코드(261) 및 제어 기능에 해당하는 기능 코드(262)로 매칭 하는 단계; In addition, the present invention (a) the remote control device 200 receives the voice through the microphone 280 and analyzes it in the voice recognition unit 260 to distinguish the control target home appliance and the control function, corresponding to the control target home appliance Matching to a home appliance code 261 and a function code 262 corresponding to a control function;

(b) 코드관리부(250)에서 상기 기능 코드(262)의 적외선 신호 코드에 해당하는 IR 코드(252)를 매칭하고 이를 적외선 신호로 생성하여 IR 신호 송신부(220)를 통해 송신하는 단계; (b) matching the IR code 252 corresponding to the infrared signal code of the function code 262 by the code manager 250 to generate the infrared signal and transmitting it through the IR signal transmitter 220;

(c) 가상화장치(100)가 IR 신호 수신부(130)를 통해 상기 리모컨장치(200)로부터 적외선 신호를 수신하고, 수신된 적외선 신호의 프로토콜을 분석하여 코드관리부(150)에 저장된 IR 코드(152)와 일치하는지 판별하는 단계; (c) the virtualization apparatus 100 receives the infrared signal from the remote control apparatus 200 through the IR signal receiver 130, analyzes the protocol of the received infrared signal, and stores the IR code 152 stored in the code manager 150. Determining whether or not to coincide with;

(d) 판별 결과가 일치하는 경우, 상기 코드관리부(150)에 저장된 가상 코드(151)를 적외선 신호로 생성하여 IR 신호 송신부(120)를 통해 리모컨장치(200)로 송신하는 단계; (d) generating a virtual code 151 stored in the code manager 150 as an infrared signal and transmitting the IR code to the remote controller 200 through the IR signal transmitter 120 when the determination result is identical;

(e) 리모컨장치(200)는 가상화장치(100)의 적외선 신호를 수신하여 프로토콜을 분석하고, 분석된 가상 코드(151)가 상기 (a)단계의 가전 코드(261)와 일치하는지 판별하는 단계; 및 (e) The remote control apparatus 200 receives the infrared signal from the virtualization apparatus 100, analyzes the protocol, and determines whether the analyzed virtual code 151 matches the home appliance code 261 of step (a). ; And

(f) 판별 결과가 일치하는 경우, 상기 (a)단계의 가전 코드(261) 및 기능 코드(262)를 통신부(270)를 통해 서버(300)로 전달하여 서버(300), 리모컨장치(200) 및 가상화장치(100)간에 제어 대상 가전기기와 제어 기능 정보를 상호 동기화하는 단계;를 포함하는, 상기 음성인식 리모컨 서비스 시스템을 사용한 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 방법을 제공한다. (f) If the determination result is matched, the home appliance code 261 and the function code 262 in step (a) are transmitted to the server 300 through the communication unit 270 to the server 300, the remote control device 200 And synchronizing the control target home appliance with control function information between the virtualization apparatus 100 and the virtualization apparatus 100. The voice recognition remote control service method of the home appliance providing infrared communication using the voice recognition remote control service system is provided.

본 발명의 일실시예에 있어서, 상기 음성인식 리모컨 서비스 방법은 (g) 서버(300)는 가전 코드(261) 및 기능 코드(262)를 서비스D/B(330)에 누적하여 데이터베이스화하고, 특정된 가전기기의 기능 수행 또는 상태 정보를 시간 시점 및 요일 시점을 기본 단위로 분류하여 주간 및 월간 단위로 구분하는 단계; 및 In one embodiment of the present invention, the voice recognition remote control service method (g) the server 300 accumulates the home appliance code 261 and the function code 262 accumulates in the service D / B (330), the database; Dividing the function performance or state information of the specified home appliance into time units and weekly points in basic units and dividing them into weekly and monthly units; And

(h) 상기 서비스D/B(330)는 누적된 가전 코드(261) 및 기능 코드(262)를 분석하여 특정 가전기기에서 시간 시점 및 요일 시점의 기능 수행 패턴을 추출하여 코드로 관리하고, 이를 바탕으로 음성 명령이 입력되는 시점의 시간 및 요일에 적합한 패턴 코드(331)를 생성하여 리모컨장치(200)로 제공하는 단계;를 더 포함하는 것을 특징으로 한다.(h) The service D / B 330 analyzes the accumulated home appliance code 261 and the function code 262 to extract a function performing pattern at a time point and a day of the week from a specific home appliance and manages the code as a code. And generating a pattern code 331 suitable for a time and day of the week at which a voice command is input, and providing the pattern code 331 to the remote control apparatus 200.

본 발명의 일실시예에 있어서, 상기 (a) 단계는 음성으로 입력받은 제어 대상 가전기기와 제어 기능을 스피커(290)로 출력하는 복명복창을 통해 입력된 음성 명령을 확인하고 기능의 수행을 알리는 것을 특징으로 한다. In one embodiment of the present invention, the step (a) is to confirm the inputted voice command and to inform the performance of the function through the bokbok window outputting the control target home appliance and the control function received by voice to the speaker 290 It is characterized by.

본 발명의 일실시예에 있어서, 상기 리모컨장치(200)는 다수의 가전기기에 각각 가상화된 가상화장치(100)를 통해 다수의 제어 대상 가전기기와 제어 기능을 구분하여 기능 수행을 제어하거나 수행된 기능 동작 및 상태 정보를 수집하는 것을 특징으로 한다. In one embodiment of the present invention, the remote control device 200 controls the performance of the function or performed by distinguishing a plurality of control target home appliances and control functions through a virtualization device 100 virtualized in each of a plurality of home appliances Collecting function operation and status information.

본 발명은 별도의 스마트 홈서비스용 가전기기를 구입하지 않더라도, 즉 적외선 통신하는 일반 가전기기를 대상으로 스마트 홈서비스를 사용할 수 있어 보다 경제적으로 스마트 홈서비스를 사용할 수 있으며, 이를 통해 실생활 편의성을 증대시키고 다양한 서비스를 제공할 수 있다. The present invention can use the smart home service more economically, even if you do not purchase a separate home appliances for smart home services, that is, can be used for general home appliances for infrared communication, thereby increasing the convenience of real life And various services.

또한 본 발명은 별도의 스마트 홈서비스용 가전기기를 구입하지 않더라도, 가상화장치(100)와 리모컨장치(200)를 통해 가전기기를 원격 또는 음성을 통해 제어할 수 있으며, 서버(300)에서 가전기기들의 동작패턴을 분석하여 사용자에게 제공하거나 동작패턴을 근거로 한 가전기기의 동작을 사용자에게 제안하여 사용자가 보다 편리한 생활을 할 수 있는 효과가 있다. In addition, the present invention can control the home appliance through the virtual device 100 and the remote control device 200 via a remote or voice, even if you do not purchase a separate home appliances for smart home services, the home appliance from the server 300 Analyzing the operation pattern of the user to provide to the user or to propose the operation of the home appliance based on the operation pattern to the user has an effect that can make the user more convenient life.

도 1은 본 발명에 따른 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템의 가상화장치(100).
도 2는 본 발명에 따른 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템의 가상화장치(100)의 동작 흐름도.
도 3은 본 발명에 따른 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템의 리모컨장치(200).
도 4는 본 발명에 따른 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템의 리모컨장치(200)의 동작 흐름도.
도 5는 본 발명에 따른 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템의 서버(300).
도 6은 본 발명에 따른 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템의 서버(300)의 동작 흐름도.
도 7은 본 발명에 따른 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템의 블록도.
도 8은 다수의 가상화창치(100)를 포함하는 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템의 블록도.
도 9는 본 발명에 따른 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템의 동작 흐름도.1 is a virtualization apparatus 100 of a voice recognition remote control service system for home appliances for infrared communication according to the present invention.
2 is an operation flowchart of the virtualization apparatus 100 of the voice recognition remote control service system for home appliances in infrared communication according to the present invention.
Figure 3 is a remote control device 200 of the voice recognition remote control service system for home appliances for infrared communication according to the present invention.
4 is a flowchart illustrating the operation of the remote control device 200 of the voice recognition remote control service system for home appliances for infrared communication according to the present invention.
5 is a server 300 of the voice recognition remote control service system for home appliances in infrared communication according to the present invention.
6 is an operation flowchart of a server 300 of the voice recognition remote control service system for home appliances in infrared communication according to the present invention.
Figure 7 is a block diagram of a voice recognition remote control service system for home appliances in infrared communication according to the present invention.
Figure 8 is a block diagram of a voice recognition remote control service system for home appliances in infrared communication including a plurality of virtualized window (100).
9 is a flowchart illustrating an operation of a voice recognition remote control service system for home appliances in infrared communication according to the present invention;

이하 첨부된 도면을 참고하여 본 발명에 따른 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템 및 방법의 바람직한 실시예에 관하여 상세하게 설명한다. Hereinafter, a preferred embodiment of a voice recognition remote control service system and method for an infrared communication home appliance according to the present invention will be described in detail with reference to the accompanying drawings.

본 발명에 따른 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템에서 가상화장치(100)는 다양한 가전기기를 대상으로 특정하여 가상화 할 수 있지만 이에 한정하는 것은 아니다. In the voice recognition remote control service system for home appliances for infrared communication according to the present invention, the virtualization apparatus 100 may be virtualized by targeting various home appliances, but is not limited thereto.

본 발명에서 “적외선 통신하는 가전기기”라 함은 일반적인 실생활 환경에서 접할 수 있는 텔레비전, 셋톱박스, 오디오, 라디오, 선풍기, 전등, 전동 커튼, 스위치 등을 의미한다. 이들 가전기기들은 적외선 통신을 통해 전원을 포함하여 다양한 기능 동작을 수행하는 방식으로 동작하고 있다. 다만, 스마트 가전기기와 같이 통신 수단을 구비하고 있지 않은 이유로 가전기기의 상태 정보를 알 수 없으며 이로 인해 스마트 홈서비스를 제공받지 못하고 있다. In the present invention, the "infrared communication home appliance" refers to a television, a set-top box, an audio, a radio, a fan, a lamp, an electric curtain, a switch, and the like, which can be encountered in a general real life environment. These home appliances operate in a manner of performing various functional operations including power supply through infrared communication. However, the reason for not having a communication means such as a smart home appliance does not know the state information of the home appliance, and thus does not receive a smart home service.

본 발명은 이러한 서비스 제약을 극복하기 위해 일반적인 가전기기를 대상으로 가상화장치(100)를 논리적으로 통합하고, 리모컨장치(200)를 통해 음성 명령으로 가전기기의 기능 동작을 수행하고 수행된 기능을 모니터링 할 수 있으며, 서버(300)와 가전기기의 기능 수행 정보를 동기화함으로써 패턴을 추출하여 사용자에게 맞춤형 서비스를 제공할 수 있다. The present invention logically integrates the virtualization apparatus 100 for general home appliances to overcome such service constraints, perform a functional operation of the home appliances with voice commands through the remote control device 200 and monitor the performed functions And, by synchronizing the function performance information of the server 300 and the home appliance, it is possible to extract the pattern to provide a customized service to the user.

본 발명의 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템은, IR 신호 송신부(120)와 IR 신호 수신부(130)를 구비하고, 물리적으로 다른 특정 가전기기와 논리적으로 하나로 통합하여 가상 코드(151)를 부여함으로써 가상화된 특정 가전기기를 식별하고, 상기 특정 가전기기에서 제공하는 리모트 컨트롤러의 기능 버튼의 적외선 신호 코드에 해당하는 IR 코드(152)를 저장함으로써 상기 특정 가전기기를 제어하는 적외선 신호의 수신을 통해 특정 가전기기의 기능 수행 및 상태 정보를 인지하는 가상화장치(100); Voice recognition remote control service system for home appliances in the infrared communication of the present invention, including an IR signal transmitter 120 and IR signal receiver 130, and physically integrated with other specific home appliances, the virtual code 151 Identify the virtualized specific home appliance and store the IR code 152 corresponding to the infrared signal code of the function button of the remote controller provided by the specific home appliance to control the specific home appliance. A virtualization apparatus 100 that recognizes the function performance and state information of a specific home appliance through reception;

제어 대상 가전기기 및 제어 기능을 음성으로 입력받아 상응하는 기능 수행을 위한 적외선 신호를 생성하여 송신하고, 제어 대상 가전기기에 가상화된 가상화장치(100)를 통해 제어 대상 가전기기가 수행하는 기능 동작 및 상태 정보를 수집함으로써 적외선 통신하는 가전기기를 음성으로 제어하는 리모컨장치(200); 및 Receiving a control target home appliance and a control function as a voice to generate and transmit an infrared signal for performing a corresponding function, the function operation performed by the controlled home appliance through the virtualization device 100 virtualized to the controlled home appliance and Remote control device 200 for controlling the home appliance to communicate by infrared by collecting state information by voice; And

상기 리모컨장치(200)를 통한 음성 입력을 인식하여 제어 대상과 제어 기능으로 분류하여 코드화하고, 이를 식별 코드(351)로 구별되는 리모컨장치(200)와 매칭하고, 상기 식별 코드(351)로 구별되는 리모컨장치(200)를 통해 수집되는 가전기기의 기능 동작 및 상태 정보를 시간 시점으로 누적하여 데이터베이스화 하고, 이를 기반으로 분석된 기능 동작의 패턴 코드를 생성하는 서버(300);를 포함할 수 있다. Recognizes the voice input through the remote control device 200 and classifies and codes it into a control object and a control function, matches it with the remote control device 200 distinguished by the identification code 351, and distinguishes it by the identification code 351. The server 300 accumulates the functional operation and state information of the home appliance collected through the remote control device 200 at a time point and makes a database, and generates a pattern code of the analyzed functional operation based on this. have.

도 1은 본 발명에 따른 가상화장치(100)의 구성을 나타낸다. 상기 가상화장치(100)는 적외선 신호를 내보내는 IR 신호 송신부(120), 적외선 신호를 받아들이는 IR 신호 수신부(130), 외부장치와 상호 연결할 수 있는 통신부(140), 가상화장치(100)와 논리적으로 하나로 통합되는 가전기기를 특정하여 식별하는 가상 코드(151)와 상기 가전기기의 리모트 컨트롤러에서 제공하는 기능 버튼의 적외선 신호 코드에 해당하는 IR 코드(152)를 포함하는 코드관리부(150) 및 가상화장치(100)의 전체적인 동작을 수행하고 관리하는 제어부(110)를 포함하며, 상기 코드관리부(150)는 통신부(140)에 연결되는 외부장치를 통해 가상 코드(151) 및 IR 코드(152)를 설정할 수 있다. 1 shows a configuration of a virtualization apparatus 100 according to the present invention. The virtual device 100 logically with the IR signal transmitter 120 for emitting an infrared signal, an IR signal receiver 130 for receiving an infrared signal, a communication unit 140 capable of interconnecting with an external device, and the virtualization device 100. Code management unit 150 and a virtualization device including a virtual code 151 for identifying and identifying a home appliance to be integrated into one and an IR code 152 corresponding to an infrared signal code of a function button provided by a remote controller of the home appliance. And a controller 110 for performing and managing the overall operation of the apparatus 100. The code manager 150 may set the virtual code 151 and the IR code 152 through an external device connected to the communication unit 140. Can be.

즉, 상기 가상화장치(100)는 적외선 신호를 송신하는 IR 신호 송신부(120); 적외선 신호를 수신하는 IR 신호 수신부(130); 외부 통신 장치와 연결하여 데이터를 주고받는 통신부(140); 가상화된 특정 가전기기를 구별하는 가상 코드(151) 및 상기 특정 가전기기에서 제공하는 리모트 컨트롤러의 기능 버튼의 적외선 신호 코드에 해당하는 IR 코드(152)를 관리하는 코드관리부(150); 및 적외선 신호를 송신, 생성 및 수신하고, 수신된 적외선 신호의 분석을 포함하여 가상화장치(100)의 동작을 수행하고 관리하는 제어부(110);를 포함한다. That is, the virtualization apparatus 100 includes an IR signal transmitter 120 for transmitting an infrared signal; An IR signal receiver 130 for receiving an infrared signal; A communication unit 140 for transmitting and receiving data by connecting to an external communication device; A code manager 150 for managing a virtual code 151 for identifying a virtualized specific home appliance and an IR code 152 corresponding to an infrared signal code of a function button of a remote controller provided by the specific home appliance; And a controller 110 for transmitting, generating, and receiving an infrared signal, and performing and managing an operation of the virtualization apparatus 100 including analysis of the received infrared signal.

도 2는 가상화장치(100)의 동작 흐름도를 나타낸다. 상기 가상화장치(100)는 IR 신호 수신부(130)를 통해 가전기기를 제어하는 적외선 신호를 수신하게 된다. 2 shows an operation flowchart of the virtualization apparatus 100. The virtualization apparatus 100 receives an infrared signal for controlling the home appliance through the IR signal receiver 130.

상기 제어부(110)는 수신된 적외선 신호의 프로토콜을 분석하여 가전기기를 제어하는 적외선 코드로 변환하고, 상기 코드관리부(150)의 IR 코드(152)에서 매칭 되는 코드가 있는지 판별하며, 매칭 되는 코드가 없으면, 가상화장치(100)의 기능 수행은 종료된다. The controller 110 analyzes the protocol of the received infrared signal and converts it into an infrared code controlling the home appliance, determines whether there is a matching code in the IR code 152 of the code manager 150, and matches the code. If no, the function performance of the virtualization apparatus 100 is terminated.

판별 결과 매칭 되는 코드가 있으면, 상기 가상 코드(151)를 적외선 신호로 생성하여 IR 신호 송신부(120)를 통해 상기 리모컨장치(200)로 내보낸다. 이때 가상화장치(100)가 가상 코드(151)를 적외선 신호로 송신한다는 의미는 가상화된 특정 가전기기를 제어하는 적외선 신호가 정상적으로 수신되었음을 리모컨장치(200)에게 알려주는 것이다. If there is a matching code, the virtual code 151 is generated as an infrared signal and sent to the remote control apparatus 200 through the IR signal transmitter 120. In this case, the virtual device 100 transmits the virtual code 151 as an infrared signal to inform the remote controller 200 that an infrared signal for controlling a virtualized specific home appliance is normally received.

도 3은 본 발명에 따른 리모컨장치(200)의 구성을 나타낸다. 상기 리모컨장치(200)는 적외선 신호를 내보내는 IR 신호 송신부(220), 적외선 신호를 받아들이는 IR 신호 수신부(230), 감지기를 구비하는 센서부(240), 외부장치와 상호 연결할 수 있는 통신부(270), 음성을 입력 받는 마이크(280), 오디오를 출력하는 스피커(290), 마이크(280)를 통해 입력 받는 음성을 인식하여 제어 대상 가전기기에 해당하는 가전 코드(261) 및 제어 기능에 해당하는 기능 코드(262)로 구분하여 매칭 하는 음성인식부(260), 서버(300)에서 리모컨장치(200)를 구분하는 식별 코드(251) 및 제어 기능의 적외선 신호 코드에 해당하는 IR 코드(252)를 포함하는 코드관리부(250) 및 리모컨장치(200)의 전체적인 동작을 수행하고 관리하는 제어부(210)를 포함한다. 3 shows a configuration of a remote control apparatus 200 according to the present invention. The remote control apparatus 200 includes an IR signal transmitter 220 for emitting infrared signals, an IR signal receiver 230 for receiving infrared signals, a sensor unit 240 having a detector, and a communication unit 270 that can be connected to an external device. ), A microphone 280 that receives voice, a speaker 290 that outputs audio, and a microphone 280 that recognizes the voice received through the microphone 280 and corresponding to the home appliance code 261 corresponding to the controlled home appliance and the control function. Voice recognition unit 260 to distinguish and match the function code 262, identification code 251 for distinguishing the remote control device 200 from the server 300 and IR code 252 corresponding to the infrared signal code of the control function It includes a code management unit 250 and a control unit 210 for performing and managing the overall operation of the remote control device 200 including a.

즉, 상기 리모컨장치(200)는 음성을 인식하여 제어 대상 가전기기를 구분하는 가전 코드(261) 및 수행 기능을 구분하는 기능 코드(262)로 구분하여 매칭 하는 음성인식부(260); 외부 통신 장치와 연결하여 데이터를 주고받는 통신부(270); 음성으로 명령을 입력받는 마이크(280); 오디오를 출력하는 스피커(290); 적외선 신호를 송신하는 IR 신호 송신부(220); 적외선 신호를 수신하는 IR 신호 수신부(230); 감지기를 구비하는 센서부(240); 서버(300)에서 리모컨장치(200)를 구별하는 식별코드(251) 및 상기 기능 코드(262)의 적외선 신호 코드에 해당하는 IR 코드(252)를 관리하는 코드관리부(250); 및 리모컨장치(200)의 모든 기능 동작을 수행하고 관리하는 제어부(210);를 포함한다. That is, the remote control apparatus 200 includes a voice recognition unit 260 that recognizes a voice and distinguishes and matches the home appliance code 261 for classifying a control target home appliance and a function code 262 for classifying a performance function; A communication unit 270 for transmitting and receiving data by connecting to an external communication device; A microphone 280 that receives a command by voice; A speaker 290 for outputting audio; An IR signal transmitter 220 for transmitting an infrared signal; An IR signal receiver 230 for receiving an infrared signal; A sensor unit 240 having a detector; Code management unit 250 for managing the IR code 252 corresponding to the infrared code code of the identification code 251 and the function code 262 to distinguish the remote control device 200 in the server 300; And a controller 210 for performing and managing all functional operations of the remote control apparatus 200.

이때 상기 센서부(240)는 온도센서, 습도센서, 먼지센서, 열감지센서, 조도센서, 가속도센서, 근접센서, 지자계센서, CO2센서, VOC센서, 가스센서 및 자이로센서에서 선택되는 하나 이상의 감지기를 포함하는 것을 특징으로 한다.At this time, the sensor unit 240 is one selected from the temperature sensor, humidity sensor, dust sensor, heat sensor, illumination sensor, acceleration sensor, proximity sensor, geomagnetic sensor, CO 2 sensor, VOC sensor, gas sensor and gyro sensor. It characterized by including the above detector.

상기 리모컨장치(200)는 특정 가전기기에 대한 제어신호를 입력받는 부분으로, 사용자의 생활공간에 설치되거나, 사용자가 파지하고 이동할 수 있도록 구성될 수 있으나, 이동범위는 제어대상이 되는 가전기기들의 근처로 한정한다.The remote control device 200 is a portion receiving a control signal for a specific home appliance, may be installed in the living space of the user, or may be configured to allow the user to grip and move, the moving range of the home appliances to be controlled We limit to neighborhood.

리모컨장치(200)의 이동범위를 상술한 바와 같이 가전기기들의 근처로 한정하는 이유는, 본 발명이 종래에 적외선 통신을 기반으로 제어신호를 입력받는 기존의 가전기기를 활용하기 위함으로, 리모컨장치(200)와 가전기기 사이의 적외선 통신이 가능해야 하기 때문이다.The reason for limiting the moving range of the remote control device 200 to the vicinity of the home appliances as described above, the present invention is to utilize the existing home appliances that receive a control signal based on the infrared communication, the remote control device This is because infrared communication between the 200 and the home appliance should be possible.

상기 리모컨장치(200)로 입력되는 제어신호는 후술할 서버(300)를 통해 입력되거나, 사용자를 통해 입력될 수 있다. 본 발명에서 사용자를 통해 입력되는 제어신호는 사용자가 직접 또는 간접 입력할 수 있다.The control signal input to the remote control apparatus 200 may be input through the server 300 to be described later or may be input through a user. In the present invention, the control signal input through the user can be directly or indirectly input by the user.

사용자가 리모컨장치(200)에 제어신호를 입력하는 대표적인 방법으로 음성을 통한 제어신호의 입력이 있을 수 있으나, 리모컨장치(200)에 형성된 버튼 또는 디스플레이를 이용하여 제어신호를 입력받을 수 있다.As a representative method for the user to input the control signal to the remote control device 200 may be the input of the control signal through the voice, it is possible to receive the control signal using a button or display formed on the remote control device 200.

본 발명에서 사용자가 리모컨장치(200)에 음성을 이용해 제어신호를 입력할 경우, 음성을 인식하기 위한 장치, 즉 마이크(280)가 사용될 수 있다.In the present invention, when a user inputs a control signal using a voice to the remote control apparatus 200, a device for recognizing the voice, that is, the microphone 280 may be used.

사용자가 리모컨장치(200)에 제어신호를 입력할 때, 입력되는 제어신호에는 어떠한 가전기기를 제어하기를 원하는지, 즉 제어 대상이 되는 가전기기를 식별할 수 있는 식별정보가 포함되어야 하고, 해당 가전기기를 어떻게 동작시키는지에 대한 동작정보 및 수행기능이 포함되어야 한다. 예를 들어 사용자가 에어컨을 실내 온도가 섭씨 25도가 되도록 동작을 원할 경우, 사용자가 리모컨장치(200)에 입력하는 제어신호에는 “에어컨”이라는 식별정보와 “섭씨 25도”라는 동작정보를 포함하여야 한다.When the user inputs a control signal to the remote control apparatus 200, the input control signal should include identification information for identifying which home appliances to control, i.e., identifying home appliances to be controlled, Operational information and performance functions on how to operate the equipment shall be included. For example, if the user wants to operate the air conditioner so that the room temperature is 25 degrees Celsius, the control signal input by the user to the remote control apparatus 200 should include identification information of "air conditioner" and operation information of "25 degree Celsius". do.

입력되는 제어신호가 음성일 경우, 해당 음성에서 어떠한 정보가 식별정보와 동작정보인지를 구분할 필요가 있으며, 이를 위해 리모컨장치(200)는 신호식별부를 추가로 포함할 수 있다.When the input control signal is a voice, it is necessary to distinguish which information is identification information and operation information in the corresponding voice. For this purpose, the remote control apparatus 200 may further include a signal identification unit.

상기 신호식별부는 음성으로 제어신호가 입력될 경우 해당 제어신호를 문장으로 변환한 후, 파싱(Parsing)과 같은 기법을 이용하여 해당 문장을 의미 있는 단어의 집합으로 분해한다. 이후 신호식별부에 미리 저장 및 분류된 제어 대상이 되는 가전기기의 명칭과 파싱된 단어들을 비교한 후, 일치되거나 유사한 단어가 있을 경우 제어대상이 되는 가전기기를 식별하여 식별정보를 파악할 수 있다.When the control signal is input by voice, the signal identification unit converts the control signal into a sentence and decomposes the sentence into a set of meaningful words by using a technique such as parsing. Then, after comparing the names of the home appliances to be controlled and pre-stored and classified in the signal identification unit with the parsed words, if there is a matched or similar word, the home appliance to be controlled may be identified to identify identification information.

이후 다시 미리 저장 및 분류된 가전기기별 동작정보들과 파싱된 단어들을 비교하여 일치되거나 유사한 단어가 있을 경우 해당 가전기기의 동작정보를 파악할 수 있다.Thereafter, operation information of the home appliances stored and classified in advance and the parsed words may be compared to determine operation information of the corresponding home appliance when there is a matched or similar word.

상술한 동작을 통해 신호식별부에서 제어 대상이 되는 가전기기를 파악하지 못하거나, 가전기기를 파악하더라도 어떻게 동작시키는지를 파악하지 못할 경우, 사용자에게 제어신호의 재입력을 요청할 수 있으며, 이를 위해 리모컨장치(200)는 음향출력장치, 즉 스피커(290)를 포함할 수 있다.If the signal identification unit does not identify the home appliance to be controlled by the above-described operation, or if the home appliance does not understand how to operate the home appliance, the user may request the user to re-enter the control signal. The device 200 may include a sound output device, that is, a speaker 290.

리모컨장치(200)에서 제어신호의 재입력을 요청할 경우, 신호식별부에서 파악한 정보를 기준으로 출력되는 재입력 요청이 달라질 수 있다. 예를 들어, 가전기기를 식별하지 못할 경우 리모컨장치(200)는 가전기기와 해당 가전기기를 어떻게 동작하길 원하는지 다시 입력해달라고 요청할 수 있으며, 가전기기는 식별하되, 해당 가전기기의 동작을 식별하지 못했을 경우 리모컨장치(200)는 해당 가전기기의 요구 동작만을 다시 입력해달라고 요청할 수 있다.When the remote control apparatus 200 requests re-input of the control signal, the re-input request that is output based on the information identified by the signal identification unit may be different. For example, if the home appliance may not be identified, the remote control apparatus 200 may request to re-enter the home appliance and how the home appliance is desired, and the home appliance may be identified, but the operation of the home appliance may not be identified. In this case, the remote controller 200 may request to re-enter only a required operation of the home appliance.

도 4는 리모컨장치(200)의 동작 흐름도를 나타낸다. 리모컨장치(200)는 마이크(280)를 통해 음성 명령을 입력 받는다. 4 shows an operation flowchart of the remote control apparatus 200. The remote control device 200 receives a voice command through the microphone 280.

이때 통신부(270)는 서버(300)에 접속하여 리모컨장치(200)의 식별 코드(251)를 전송하고, 서버와 상호 연동하는 통신 채널을 형성하게 된다. At this time, the communication unit 270 connects to the server 300 to transmit the identification code 251 of the remote control device 200, and forms a communication channel interoperating with the server.

음성인식부(260)는 입력 받은 음성 명령을 인식하여 제어 대상에 상응하는 가전 코드(261)와 제어 기능에 상응하는 기능 코드(262)로 구분하여 매칭 하며, 상기 기능 코드(262)와 매칭 되는 코드관리부(250)의 IR 코드(252)를 통해 적외선 신호를 생성하고, 생성된 적외선 신호를 IR 신호 송신부(220)를 통해 가상화장치(100)로 송신한다. 이때 상기 음성인식부(260)는 제어 대상 가전기기 및 제어 기능을 포함하는 음성 명령을 스피커(290)를 통해 오디오 출력할 수 있다. The voice recognition unit 260 recognizes the received voice command, distinguishes and matches the home appliance code 261 corresponding to the control object and the function code 262 corresponding to the control function, and matches the function code 262. The infrared signal is generated through the IR code 252 of the code manager 250, and the generated infrared signal is transmitted to the virtualization apparatus 100 through the IR signal transmitter 220. At this time, the voice recognition unit 260 may output a voice command including a control target home appliance and a control function through the speaker 290.

이때 음성인식부(260)에서 매칭 되는 가전 코드(261)와 기능 코드(262)가 없으면, 수신된 음성 명령은 서버(300)로 전달되며, 서버(300)에서는 수신된 음성 명령을 처리하여 가전 코드(352), 기능 코드(353) 및 IR 코드(354)를 매칭한 정보를 리모컨장치(200)로 송신하고, 리모컨장치(200)에서는 상기 매칭한 정보를 제어부(210), 음성인식부(260) 및 코드관리부(250)에서 업데이트할 수 있다. At this time, if there is no home appliance code 261 and function code 262 matched in the voice recognition unit 260, the received voice command is transmitted to the server 300, the server 300 processes the received voice command The information matching the code 352, the function code 353 and the IR code 354 is transmitted to the remote controller 200, and the remote controller 200 transmits the matched information to the controller 210 and the voice recognition unit ( 260 and the code manager 250 may update.

리모컨장치(200)는 제어 기능에 상응하는 적외선 신호를 송신한 후, 제어 대상 가전기기의 가상화장치(100)로부터 가상 코드(151)를 수신해야 한다. 이때 가상 코드(151)가 수신되지 않으면, 기능 코드(262)가 수행되지 않았음을 스피커(290)를 통해 오디오 출력하고 음성 명령을 다시 입력 받게 된다. After transmitting the infrared signal corresponding to the control function, the remote control apparatus 200 should receive the virtual code 151 from the virtualization apparatus 100 of the control target home appliance. In this case, if the virtual code 151 is not received, the audio code is output through the speaker 290 that the function code 262 is not performed and the voice command is input again.

가상 코드(151)가 수신되면 제어 대상에 해당하는 가전 코드(261)와 일치되는지 확인하여 일치되면 정상적인 기능 수행이 완료된 것으로 판단하고, 서버(300)로 가전 코드(261), 기능 코드(262) 및 식별 코드(251)를 송신한다. When the virtual code 151 is received, it is checked whether it matches the home appliance code 261 corresponding to the control target, and if it matches, it is determined that the normal function is completed, and the server 300 home appliance code 261 and the function code 262 are determined. And an identification code 251.

도 5는 본 발명에 따른 서버(300)의 구성을 나타낸다. 서버(300)는 리모컨장치(200)와 상호 연결할 수 있는 통신부(340); 음성을 인식하는 음성인식부(320); 제어 대상 가전기기를 구분하는 가전 코드(352), 제어 기능을 구분하는 기능 코드(353), 리모컨장치(200)를 구분하는 식별 코드(351), 제어 기능의 적외선 신호 코드에 해당하는 IR 코드(354)를 포함하는 코드관리부(350); 제어 대상 가전기기 및 제어 대상이 수행한 제어 기능을 데이터베이스화 하고 이를 분석하여 패턴 코드(331)를 생성하는 서비스D/B(330); 및 서버(300)의 전체적인 서비스 수행을 관리하는 서비스매니저(310)를 포함한다. 5 shows a configuration of a server 300 according to the present invention. The server 300 includes a communication unit 340 that can be interconnected with the remote control device 200; A voice recognition unit 320 for recognizing a voice; The home appliance code 352 for distinguishing the controlled home appliance, the function code 353 for separating the control function, the identification code 351 for separating the remote control device 200, and the IR code corresponding to the infrared signal code of the control function ( Code management unit 350 including a 354; A service D / B 330 for generating a pattern code 331 by analyzing a database of control functions performed by the controlled home appliance and the control target and analyzing the same; And a service manager 310 managing overall service performance of the server 300.

즉, 상기 서버(300)는 리모컨장치(200)에서 전달되는 음성을 인식하여 상응하는 코드를 생성하거나 코드관리부(350)를 통해 매칭 하는 음성인식부(320); 외부 통신 장치와 연결하여 데이터를 주고받는 통신부(340); 제어 대상을 구분하는 가전 코드(352), 제어 기능을 구분하는 기능 코드(353), 접속하는 리모컨장치(200)를 구별하는 식별 코드(351) 및 상기 기능 코드(353)의 적외선 신호 코드에 해당하는 IR 코드(354)를 관리하는 코드관리부(350); 리모컨장치(200)에서 수행된 제어 대상과 기능 수행 정보를 데이터베이스화 하여 패턴 코드(331)를 생성하는 서비스D/B(330); 및 서버(300)의 모든 기능 동작을 수행하고 관리하는 서비스매니저(310);를 포함한다. That is, the server 300 is a voice recognition unit 320 to recognize the voice transmitted from the remote control device 200 to generate a corresponding code or to match through the code management unit 350; A communication unit 340 for connecting with an external communication device to exchange data; Corresponds to the home appliance code 352 for distinguishing the control target, the function code 353 for distinguishing the control function, the identification code 351 for distinguishing the remote controller 200 to be connected, and the infrared signal code of the function code 353. Code management unit 350 for managing the IR code 354 to the; A service D / B 330 for generating a pattern code 331 by making a control object and function performance information performed by the remote control apparatus 200 into a database; And a service manager 310 performing and managing all functional operations of the server 300.

상기 서버(300)는 가전기기별 동작이나 기능 수행에 관한 패턴을 분석해 분석된 패턴을 사용자에게 알릴 수 있으며, 더 나아가 분석된 패턴을 이용해 특정 가전기기의 동작을 제안할 수도 있다.The server 300 may inform the user of the analyzed pattern by analyzing a pattern related to an operation or a function of each home appliance, and further, may suggest an operation of a specific home appliance using the analyzed pattern.

도 6은 서버(300)의 동작 흐름도를 나타낸다. 서버(300)는 통신부(340)를 통해 접속하는 리모컨장치(200)의 식별 코드(251)를 확인하여 상호 연동하는 통신 채널을 형성하고, 리모컨장치(200)에서 수행된 가전 코드(261), 기능 코드(262) 및 식별 코드(251)를 전달 받아 서비스D/B(330)에 시간 시점 및 요일 시점으로 누적하여 데이터베이스화 하여 업데이트하고 패턴 코드(331)를 생성한다. 6 shows an operation flowchart of the server 300. The server 300 checks the identification code 251 of the remote control device 200 connected through the communication unit 340 to form a communication channel interoperating with each other, and the home appliance code 261 performed by the remote control device 200, The function code 262 and the identification code 251 are received and accumulated in the service D / B 330 at a time point in time and a day point in time, the database is updated, and a pattern code 331 is generated.

이때 리모컨장치(200)는 음성인식부(260)에서 매칭 되는 가전 코드(261)와 기능 코드(262)가 없는 경우, 마이크(280)를 통해 입력된 음성 명령을 서버(300)로 전송하며, 서버(300)는 전송받은 음성 명령을 음성인식부(320) 및 코드관리부(350)에서 인식하여 제어 대상에 상응하는 가전 코드(352), 제어 기능에 상응하는 기능 코드(353) 및 기능 코드(353)에 상응하는 IR 코드(354)를 신규 생성하거나 코드관리부(350)에서 매칭 하여 리모컨장치(200)로 해당 코드들을 전달한다. In this case, the remote control apparatus 200 transmits the voice command input through the microphone 280 to the server 300 when there is no home appliance code 261 and the function code 262 matched by the voice recognition unit 260, The server 300 recognizes the received voice command by the voice recognition unit 320 and the code management unit 350 to recognize the home appliance code 352 corresponding to the control target, the function code 353 corresponding to the control function, and the function code ( A new IR code 354 corresponding to 353 is generated or matched by the code manager 350 to transmit the codes to the remote control apparatus 200.

또한 본 발명은 사용자가 리모컨장치(200)에 직접 제어신호를 입력하지 않고, 단말기를 통해 제어신호를 입력할 수도 있다.In addition, in the present invention, the user may input the control signal through the terminal without directly inputting the control signal to the remote control apparatus 200.

상기 단말기를 통해 제어신호를 입력하면, 단말기는 해당 제어신호를 서버(300)로 전송한다. 이때 서버(300)는 단말기로부터 수신한 제어신호를 리모컨장치(200)로 전달하며, 리모컨장치(200)는 입력된 제어신호를 적외선 신호로 변환하여 가상화장치(100)로 송신한다. 즉, 본 발명은 사용자가 실외에 있더라도 서버(300)와 통신 가능한 단말기를 보유하고 있다면, 언제든 가전기기들을 제어할 수 있다.When the control signal is input through the terminal, the terminal transmits the control signal to the server 300. At this time, the server 300 transmits the control signal received from the terminal to the remote control device 200, the remote control device 200 converts the input control signal into an infrared signal and transmits it to the virtualization device 100. That is, the present invention can control the home appliances at any time if the user has a terminal that can communicate with the server 300 even when the user is outdoors.

또한 사용자는 특정 단말기를 이용해 서버(300)에 접속하여 데이터베이스화된 정보를 열람할 수 있고, 서버(300)로부터 제안되는 가전기기의 패턴을 확인한 후, 해당 가전기기의 동작여부를 결정할 수 있다.In addition, the user can access the server 300 by using a specific terminal to view the database information, and after confirming the pattern of the home appliance proposed from the server 300, it is possible to determine whether to operate the home appliance.

예를 들어, 서버(300)는 사용자가 특정 기간의 특정 시간 동안 에어컨을 섭씨 25도 가량으로 동작하는 것으로 동작패턴을 분석할 경우, 사용자에게 해당 시간의 소정 시간 이전에 에어컨을 해당 온도로 설정해도 되는지 여부를 묻는 메시지를 보낼 수 있다. For example, when the user analyzes the operation pattern by operating the air conditioner at about 25 degrees Celsius for a specific time of a specific period, the server 300 sets the air conditioner to the corresponding temperature even before the predetermined time of the corresponding time. You can send a message asking whether

사용자가 서버(300)에서 제안되는 가전기기의 동작에 대해 승인하면 서버(300)는 사용자에게 제안했던 가전기기의 동작에 관한 정보(가전기기의 식별정보, 동작정보)가 포함된 제어신호를 리모컨장치(200)로 전송하고, 리모컨장치(200)는 입력된 제어신호에 대한 적외선 신호를 생성하여 가상화장치(100)로 전송할 수 있다. When the user approves the operation of the home appliance proposed by the server 300, the server 300 remotely controls a control signal including information on the operation of the home appliance proposed to the user (identification information of the home appliance, operation information). The remote control device 200 may transmit an infrared signal to an input control signal and transmit the generated infrared signal to the virtualization device 100.

도 7은 본 발명에 따른 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템에서 서버(300), 리모컨장치(200) 및 가상화장치(100) 사이에 상호 연결되어 연동하는 실시예를 나타내며, 도 8은 다수의 가상화창치(100)를 통해 복수의 제어 대상을 연동하는 실시예를 나타낸다.   FIG. 7 illustrates an embodiment in which the server 300, the remote control device 200, and the virtualization device 100 are interconnected and interworked in the voice recognition remote control service system for the home appliance having infrared communication according to the present invention. Represents an embodiment of interworking a plurality of control targets through a plurality of virtualized window value (100).

이때 상기 통신부(140, 270, 340)는 모뎀, 블루투스, 지그비, 와이파이, LAN, USB 및 UART 에서 선택되는 하나 이상의 통신 수단을 포함하는 것을 특징으로 한다. At this time, the communication unit 140, 270, 340 is characterized in that it comprises one or more communication means selected from the modem, Bluetooth, Zigbee, Wi-Fi, LAN, USB and UART.

상기 리모컨장치(200)는 다수의 가전기기에 각각 가상화된 가상화장치(100)를 통해 다수의 제어 대상 가전기기와 제어 기능을 구분하여 기능 수행을 제어하거나 수행된 기능 동작 및 상태 정보를 수집할 수 있다. The remote control apparatus 200 may control a function execution or collect performed function operation and status information by distinguishing a plurality of control target home appliances and a control function through the virtualization apparatus 100 virtualized in each of a plurality of home appliances. have.

도 9는 본 발명에 따른 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템에서 서버(300), 리모컨장치(200) 및 가상화장치(100) 사이에 상호 연결되어 연동하는 동작 흐름도를 나타낸다. 9 is a flowchart illustrating an operation in which the server 300, the remote control device 200, and the virtualization device 100 are interconnected and interoperable in the voice recognition remote control service system for home appliances having infrared communication according to the present invention.

본 발명의 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 방법은 (a) 리모컨장치(200)가 마이크(280)를 통해 음성을 입력받아 이를 음성인식부(260)에서 분석하여 제어 대상 가전기기와 제어 기능을 구분하며, 제어 대상 가전기기에 해당하는 가전 코드(261) 및 제어 기능에 해당하는 기능 코드(262)로 매칭 하는 단계; Voice recognition remote control service method for home appliances in the infrared communication of the present invention (a) the remote control device 200 receives a voice through the microphone 280 and analyzes it in the voice recognition unit 260 and the control target home appliance Distinguishing the control function and matching the home appliance code 261 corresponding to the controlled home appliance and the function code 262 corresponding to the control function;

(b) 코드관리부(250)에서 상기 기능 코드(262)의 적외선 신호 코드에 해당하는 IR 코드(252)를 매칭하고 이를 적외선 신호로 생성하여 IR 신호 송신부(220)를 통해 송신하는 단계; (b) matching the IR code 252 corresponding to the infrared signal code of the function code 262 by the code manager 250 to generate the infrared signal and transmitting it through the IR signal transmitter 220;

(c) 가상화장치(100)가 IR 신호 수신부(130)를 통해 상기 리모컨장치(200)로부터 적외선 신호를 수신하고, 수신된 적외선 신호의 프로토콜을 분석하여 코드관리부(150)에 저장된 IR 코드(152)와 일치하는지 판별하는 단계; (c) the virtualization apparatus 100 receives the infrared signal from the remote control apparatus 200 through the IR signal receiver 130, analyzes the protocol of the received infrared signal, and stores the IR code 152 stored in the code manager 150. Determining whether or not to coincide with;

(d) 판별 결과가 일치하는 경우, 상기 코드관리부(150)에 저장된 가상 코드(151)를 적외선 신호로 생성하여 IR 신호 송신부(120)를 통해 리모컨장치(200)로 송신하는 단계; (d) generating a virtual code 151 stored in the code manager 150 as an infrared signal and transmitting the IR code to the remote controller 200 through the IR signal transmitter 120 when the determination result is identical;

(e) 리모컨장치(200)는 가상화장치(100)의 적외선 신호를 수신하여 프로토콜을 분석하고, 분석된 가상 코드(151)가 상기 (a)단계의 가전 코드(261)와 일치하는지 판별하는 단계; 및 (e) The remote control apparatus 200 receives the infrared signal from the virtualization apparatus 100, analyzes the protocol, and determines whether the analyzed virtual code 151 matches the home appliance code 261 of step (a). ; And

(f) 판별 결과가 일치하는 경우, 상기 (a)단계의 가전 코드(261) 및 기능 코드(262)를 통신부(270)를 통해 서버(300)로 전달하여 서버(300), 리모컨장치(200) 및 가상화장치(100) 사이에 제어 대상 가전기기와 제어 기능 정보를 상호 동기화하는 단계;를 포함할 수 있다. (f) If the determination result is matched, the home appliance code 261 and the function code 262 in step (a) are transmitted to the server 300 through the communication unit 270 to the server 300, the remote control device 200 And synchronizing control function home appliance and control function information between the virtual device 100 and the virtualization apparatus 100.

또한 상기 음성인식 리모컨 서비스 방법은 (g) 서버(300)는 가전 코드(261) 및 기능 코드(262)를 서비스D/B(330)에 누적하여 데이터베이스화하고, 특정된 가전기기의 기능 수행 또는 상태 정보를 시간 시점 및 요일 시점을 기본 단위로 분류하여 주간 및 월간 단위로 구분하는 단계; 및 In addition, the voice recognition remote control service method (g) the server 300 accumulates the home appliance code (261) and the function code 262 in the service D / B (330) to the database, and performs the function of the specified home appliance or Classifying the state information into time units and weekly points in basic units, and dividing the state information into weekly and monthly units; And

(h) 상기 서비스D/B(330)는 누적된 가전 코드(261) 및 기능 코드(262)를 분석하여 특정 가전기기에서 시간 시점 및 요일 시점의 기능 수행 패턴을 추출하여 코드로 관리하고, 이를 바탕으로 음성 명령이 입력되는 시점의 시간 및 요일에 적합한 패턴 코드(331)를 생성하여 리모컨장치(200)로 제공하는 단계;를 더 포함할 수 있다. (h) The service D / B 330 analyzes the accumulated home appliance code 261 and the function code 262 to extract a function performing pattern at a time point and a day of the week from a specific home appliance and manages the code as a code. The method may further include generating a pattern code 331 suitable for a time and day of the week at which a voice command is input, and providing the pattern code 331 to the remote control apparatus 200.

또한 상기 (a) 단계는 음성으로 입력받은 제어 대상 가전기기와 제어 기능을 스피커(290)로 출력하는 복명복창을 통해 입력된 음성 명령을 확인하고 기능의 수행을 알리는 것을 특징으로 한다. In addition, the step (a) is characterized by confirming the input of the voice command and the performance of the function through the bokbok window outputting the control target home appliance and the control function received by the voice to the speaker 290.

상기 도 9를 참조하면, 리모컨장치(200)에서 제어 기능을 위한 적외선 신호를 송신하는 단계(P260)는 가상화장치(100)에서 IR 신호 수신부(130)를 통해 적외선 신호를 수신하는 단계(P120)로 이어지며, 가상화장치(100)에서 가상 코드(151)의 적외선 신호를 송신하는 단계(P150)는 리모컨장치(200)에서 가상 코드(151)의 적외선 신호를 수신하는 단계(P270)로 이어진다. Referring to FIG. 9, in operation P260, the remote control apparatus 200 transmits an infrared signal for a control function to receive an infrared signal through the IR signal receiver 130 in the virtualization apparatus 100 (P120). Subsequently, the step (P150) of transmitting the infrared signal of the virtual code 151 by the virtualization apparatus 100 is followed by the step (P270) of receiving the infrared signal of the virtual code 151 by the remote control apparatus 200.

또한 리모컨장치(200)에서 가상 코드(151)의 수신이 이루어지면 가전 코드(261), 기능 코드(262) 및 식별 코드(251)를 서버(300)로 전달하는 단계(P280)는 서버가 이를 수신하는 단계(P340)로 연결이 된다. In addition, when the virtual code 151 is received by the remote control apparatus 200, the home appliance code 261, the function code 262, and the identification code 251 are transferred to the server 300 (P280). The connection is made to the receiving step (P340).

아울러 리모컨장치(200)에서 서버(300)로 접속하여 식별코드(251)를 전송하는 단계(P215)는 통신부를 통해 리모컨장치(200)가 서버(300)에 접속하는 단계(P320)로 연결되고, 마이크(280)를 통해 수신된 음성 명령을 서버(300)로 전달하는 단계(P245)는 서버가 이를 수신하는 단계(P345)로 이어지며, 가전 코드(352), 기능 코드(353), IR 코드(354) 및 패턴 코드(331)를 리모컨장치(200)로 전달하는 단계(P380)는 리모컨장치(200)가 이를 수신하는 단계(P255)로 이어진다. In addition, the step (P215) of connecting to the server 300 from the remote control device 200 and transmitting the identification code 251 is connected to the step (P320) of connecting the remote control device 200 to the server 300 through a communication unit. The step (P245) of transmitting the voice command received through the microphone 280 to the server 300 is followed by the step (P345) of receiving the server by the server code 352, the function code 353, and the IR. Transferring the code 354 and the pattern code 331 to the remote control device 200 (P380) continues to the step (P255) that the remote control device 200 receives it.

본 발명의 전체적인 상호 동작 흐름을 살펴보면 가상화장치(100)의 가상 코드(151), 리모컨장치(200)의 가전 코드(261) 및 서버(300)의 가전 코드(352)는 동일하며, 가상화장치(100)의 IR 코드(152), 리모컨장치(200)의 IR 코드(252) 및 서버(300)의 IR 코드(354)도 동일하다. Looking at the overall interaction flow of the present invention, the virtual code 151 of the virtualization device 100, the home appliance code 261 of the remote control device 200 and the home appliance code 352 of the server 300 are the same, IR code 152 of 100, IR code 252 of remote control device 200 and IR code 354 of server 300 are also the same.

또한 가상화장치(100)의 가상 코드(151)는 리모컨장치(200)가 제어 대상을 특정하여 구별하는 수단이 되며, 리모컨장치(200)의 식별 코드(251)는 서버(300)에서 통신 채널을 형성하고 있는 장치를 구별하는 수단으로 서버(300)의 식별 코드(351)와 일치한다. In addition, the virtual code 151 of the virtualization device 100 is a means for the remote control device 200 to identify and distinguish the control target, the identification code 251 of the remote control device 200 is a communication channel in the server 300 The identification code 351 of the server 300 is matched as a means of distinguishing the formed device.

100 : 가상화장치 110 : 제어부
120 : IR 신호 송신부 130 : IR 신호 수신부
140 : 통신부 150 : 코드관리부
151 : 가상 코드 152 : IR 코드
200 : 리모컨장치 210 : 제어부
220 : IR 신호 송신부 230 : IR 신호 수신부
240 : 센서부 250 : 코드관리부
251 : 식별 코드 252 : IR 코드
260 : 음성인식부 261 : 가전 코드
262 : 기능 코드 270 : 통신부
280 : 마이크 290 : 스피커
300 : 서버 310 : 서비스매니저
320 : 음성인식부 330 : 서비스D/B
331 : 패턴 코드 340 : 통신부
350 : 코드관리부 351 : 식별 코드
352 : 가전 코드 353 : 기능 코드
354 : IR 코드100: virtualization device 110: control unit
120: IR signal transmitter 130: IR signal receiver
140: communication unit 150: code management unit
151: virtual code 152: IR code
200: remote control device 210: control unit
220: IR signal transmitter 230: IR signal receiver
240: sensor unit 250: code management unit
251: identification code 252: IR code
260: voice recognition unit 261: home appliance code
262 function code 270 communication unit
280: microphone 290: speaker
300: server 310: service manager
320: voice recognition unit 330: service D / B
331: pattern code 340: communication unit
350: code management unit 351: identification code
352: appliance code 353: function code
354: IR code

Claims (8)

적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템에 있어서,
IR 신호 송신부(120)와 IR 신호 수신부(130)를 구비하고, 물리적으로 다른 특정 가전기기와 논리적으로 하나로 통합하여 가상 코드(151)를 부여함으로써 가상화된 특정 가전기기를 식별하고,
상기 특정 가전기기에서 제공하는 리모트 컨트롤러의 기능 버튼의 적외선 신호 코드에 해당하는 IR 코드(152)를 저장함으로써 상기 특정 가전기기를 제어하는 적외선 신호의 수신을 통해 특정 가전기기의 기능 수행 및 상태 정보를 인지하는 가상화장치(100);
제어 대상 가전기기 및 제어 기능을 음성으로 입력받아 상응하는 기능 수행을 위한 적외선 신호를 생성하여 송신하고,
제어 대상 가전기기에 가상화된 가상화장치(100)를 통해 제어 대상 가전기기가 수행하는 기능 동작 및 상태 정보를 수집함으로써 적외선 통신하는 가전기기를 음성으로 제어하는 리모컨장치(200); 및
상기 리모컨장치(200)를 통한 음성 입력을 인식하여 제어 대상과 제어 기능으로 분류하여 코드화하고, 이를 식별 코드(351)로 구별되는 리모컨장치(200)와 매칭하고,
상기 식별 코드(351)로 구별되는 리모컨장치(200)를 통해 수집되는 가전기기의 기능 동작 및 상태 정보를 시간 시점으로 누적하여 데이터베이스화 하고, 이를 기반으로 분석된 기능 동작의 패턴 코드를 생성하는 서버(300);를 포함하는 것을 특징으로 하는 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템.
In the voice recognition remote control service system for home appliances that communicate infrared,
It is equipped with an IR signal transmitter 120 and an IR signal receiver 130, and physically integrated with other specific home appliances to identify a virtualized specific home appliance by giving a virtual code 151,
By storing the IR code 152 corresponding to the infrared signal code of the function button of the remote controller provided by the specific home appliance, the function performance and status information of the specific home appliance are received through the reception of the infrared signal controlling the specific home appliance. Recognizing virtualization apparatus 100;
Receives a control target home appliance and a control function by voice to generate and transmit an infrared signal for performing a corresponding function,
A remote control device 200 for controlling a home appliance communicating by infrared by collecting function operation and state information performed by the controlled home appliance through a virtualization device 100 virtualized in the controlled home appliance; And
Recognizes the voice input through the remote control device 200, classifies and codes them into control objects and control functions, matches them with the remote control device 200 distinguished by the identification code 351,
A server that accumulates the function operation and state information of the home appliance collected through the remote control device 200 distinguished by the identification code 351 into a database by time, and generates a pattern code of the analyzed function operation based on the database. (300); Voice recognition remote control service system for home appliances in the infrared communication comprising a.
제1항에 있어서,
상기 가상화장치(100)는
적외선 신호를 송신하는 IR 신호 송신부(120);
적외선 신호를 수신하는 IR 신호 수신부(130);
외부 통신 장치와 연결하여 데이터를 주고받는 통신부(140);
가상화된 특정 가전기기를 구별하는 가상 코드(151) 및 상기 특정 가전기기에서 제공하는 리모트 컨트롤러의 기능 버튼의 적외선 신호 코드에 해당하는 IR 코드(152)를 관리하는 코드관리부(150); 및
적외선 신호를 송신, 생성 및 수신하고, 수신된 적외선 신호의 분석을 포함하여 가상화장치(100)의 동작을 수행하고 관리하는 제어부(110);를 포함하고,
상기 리모컨장치(200)는
음성을 인식하여 제어 대상 가전기기를 구분하는 가전 코드(261) 및 수행 기능을 구분하는 기능 코드(262)로 구분하여 매칭 하는 음성인식부(260);
외부 통신 장치와 연결하여 데이터를 주고받는 통신부(270);
음성으로 명령을 입력받는 마이크(280);
오디오를 출력하는 스피커(290);
적외선 신호를 송신하는 IR 신호 송신부(220);
적외선 신호를 수신하는 IR 신호 수신부(230);
감지기를 구비하는 센서부(240);
서버(300)에서 리모컨장치(200)를 구별하는 식별코드(251) 및 상기 기능 코드(262)의 적외선 신호 코드에 해당하는 IR 코드(252)를 관리하는 코드관리부(250); 및
리모컨장치(200)의 모든 기능 동작을 수행하고 관리하는 제어부(210);를 포함하며,
상기 서버(300)는
리모컨장치(200)에서 전달되는 음성을 인식하여 상응하는 코드를 생성하거나 코드관리부(350)를 통해 매칭 하는 음성인식부(320);
외부 통신 장치와 연결하여 데이터를 주고받는 통신부(340);
제어 대상을 구분하는 가전 코드(352), 제어 기능을 구분하는 기능 코드(353), 접속하는 리모컨장치(200)를 구별하는 식별 코드(351) 및 상기 기능 코드(353)의 적외선 신호 코드에 해당하는 IR 코드(354)를 관리하는 코드관리부(350);
리모컨장치(200)에서 수행된 제어 대상과 기능 수행 정보를 데이터베이스화 하여 패턴 코드(331)를 생성하는 서비스D/B(330); 및
서버(300)의 모든 기능 동작을 수행하고 관리하는 서비스매니저(310);를 포함하는 것을 특징으로 하는 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템.
The method of claim 1,
The virtualization device 100
An IR signal transmitter 120 for transmitting an infrared signal;
An IR signal receiver 130 for receiving an infrared signal;
A communication unit 140 for transmitting and receiving data by connecting to an external communication device;
A code manager 150 for managing a virtual code 151 for identifying a virtualized specific home appliance and an IR code 152 corresponding to an infrared signal code of a function button of a remote controller provided by the specific home appliance; And
And a controller 110 for transmitting, generating and receiving infrared signals, and performing and managing operations of the virtualization apparatus 100 including analysis of received infrared signals.
The remote control device 200
A voice recognition unit 260 that recognizes and distinguishes and matches a home appliance code 261 for identifying a control target home appliance and a function code 262 for separating a performing function;
A communication unit 270 for transmitting and receiving data by connecting to an external communication device;
A microphone 280 that receives a command by voice;
A speaker 290 for outputting audio;
An IR signal transmitter 220 for transmitting an infrared signal;
An IR signal receiver 230 for receiving an infrared signal;
A sensor unit 240 having a detector;
Code management unit 250 for managing the IR code 252 corresponding to the infrared code code of the identification code 251 and the function code 262 to distinguish the remote control device 200 in the server 300; And
It includes; and the controller 210 for performing and managing all the functions of the remote control device 200,
The server 300 is
A voice recognition unit 320 generating a corresponding code by recognizing the voice transmitted from the remote control apparatus 200 or matching the code through the code management unit 350;
A communication unit 340 for transmitting and receiving data by connecting to an external communication device;
Corresponds to the home appliance code 352 for distinguishing the control target, the function code 353 for distinguishing the control function, the identification code 351 for distinguishing the remote controller 200 to be connected, and the infrared signal code of the function code 353. Code management unit 350 for managing the IR code 354;
A service D / B 330 for generating a pattern code 331 by databaseting the control target and the function performance information performed by the remote control apparatus 200; And
Voice management remote control service system for a home appliance having an infrared communication, comprising: a service manager (310) for performing and managing all the functional operations of the server (300).
제2항에 있어서,
상기 통신부(140, 270, 340)는
모뎀, 블루투스, 지그비, 와이파이, LAN, USB 및 UART 에서 선택되는 하나 이상의 통신 수단을 포함하는 것을 특징으로 하는 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템.
The method of claim 2,
The communication unit 140, 270, 340 is
A voice recognition remote control service system for an infrared communication home appliance comprising at least one communication means selected from a modem, Bluetooth, Zigbee, Wi-Fi, LAN, USB and UART.
제2항에 있어서,
상기 센서부(240)는
온도센서, 습도센서, 먼지센서, 열감지센서, 조도센서, 가속도센서, 근접센서, 지자계센서, CO2센서, VOC센서, 가스센서 및 자이로센서에서 선택되는 하나 이상의 감지기를 포함하는 것을 특징으로 하는 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 시스템.
The method of claim 2,
The sensor unit 240 is
It includes one or more sensors selected from temperature sensor, humidity sensor, dust sensor, heat sensor, illuminance sensor, acceleration sensor, proximity sensor, geomagnetic sensor, CO 2 sensor, VOC sensor, gas sensor and gyro sensor. Voice recognition remote control service system for home appliances to communicate infrared.
(a) 리모컨장치(200)가 마이크(280)를 통해 음성을 입력받아 이를 음성인식부(260)에서 분석하여 제어 대상 가전기기와 제어 기능을 구분하며, 제어 대상 가전기기에 해당하는 가전 코드(261) 및 제어 기능에 해당하는 기능 코드(262)로 매칭 하는 단계;
(b) 코드관리부(250)에서 상기 기능 코드(262)의 적외선 신호 코드에 해당하는 IR 코드(252)를 매칭하고 이를 적외선 신호로 생성하여 IR 신호 송신부(220)를 통해 송신하는 단계;
(c) 가상화장치(100)가 IR 신호 수신부(130)를 통해 상기 리모컨장치(200)로부터 적외선 신호를 수신하고, 수신된 적외선 신호의 프로토콜을 분석하여 코드관리부(150)에 저장된 IR 코드(152)와 일치하는지 판별하는 단계;
(d) 판별 결과가 일치하는 경우, 상기 코드관리부(150)에 저장된 가상 코드(151)를 적외선 신호로 생성하여 IR 신호 송신부(120)를 통해 리모컨장치(200)로 송신하는 단계;
(e) 리모컨장치(200)는 가상화장치(100)의 적외선 신호를 수신하여 프로토콜을 분석하고, 분석된 가상 코드(151)가 상기 (a)단계의 가전 코드(261)와 일치하는지 판별하는 단계; 및
(f) 판별 결과가 일치하는 경우, 상기 (a)단계의 가전 코드(261) 및 기능 코드(262)를 통신부(270)를 통해 서버(300)로 전달하여 서버(300), 리모컨장치(200) 및 가상화장치(100)간에 제어 대상 가전기기와 제어 기능 정보를 상호 동기화하는 단계;를 포함하는,
제1항의 음성인식 리모컨 서비스 시스템을 사용한 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 방법.
(a) The remote control device 200 receives the voice through the microphone 280 and analyzes it in the voice recognition unit 260 to distinguish the control target home appliance and the control function, and the home appliance code corresponding to the control target home appliance ( 261) and a function code 262 corresponding to the control function;
(b) matching the IR code 252 corresponding to the infrared signal code of the function code 262 by the code manager 250 to generate the infrared signal and transmitting it through the IR signal transmitter 220;
(c) the virtualization apparatus 100 receives the infrared signal from the remote control apparatus 200 through the IR signal receiver 130, analyzes the protocol of the received infrared signal, and stores the IR code 152 stored in the code manager 150. Determining whether or not to coincide with;
(d) generating a virtual code 151 stored in the code manager 150 as an infrared signal and transmitting the IR code to the remote controller 200 through the IR signal transmitter 120 when the determination result is identical;
(e) The remote control apparatus 200 receives the infrared signal from the virtualization apparatus 100, analyzes the protocol, and determines whether the analyzed virtual code 151 matches the home appliance code 261 of step (a). ; And
(f) If the determination result is matched, the home appliance code 261 and the function code 262 in step (a) are transmitted to the server 300 through the communication unit 270 to the server 300, the remote control device 200 And synchronizing control function home appliances and control function information between the virtual device 100 and the virtualization apparatus 100.
A voice recognition remote control service method for a home appliance communicating infrared rays using the voice recognition remote control service system of claim 1.
제5항에 있어서,
(g) 서버(300)는 가전 코드(261) 및 기능 코드(262)를 서비스D/B(330)에 누적하여 데이터베이스화하고, 특정된 가전기기의 기능 수행 또는 상태 정보를 시간 시점 및 요일 시점을 기본 단위로 분류하여 주간 및 월간 단위로 구분하는 단계; 및
(h) 상기 서비스D/B(330)는 누적된 가전 코드(261) 및 기능 코드(262)를 분석하여 특정 가전기기에서 시간 시점 및 요일 시점의 기능 수행 패턴을 추출하여 코드로 관리하고, 이를 바탕으로 음성 명령이 입력되는 시점의 시간 및 요일에 적합한 패턴 코드(331)를 생성하여 리모컨장치(200)로 제공하는 단계;를
더 포함하는 것을 특징으로 하는 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 방법.
The method of claim 5,
(g) The server 300 accumulates and accumulates the home appliance code 261 and the function code 262 in the service D / B 330 and makes a database, and displays the performance or state information of the specified home appliance at a time point and a day point in time. Classifying the data into basic units and classifying them into weekly and monthly units; And
(h) The service D / B 330 analyzes the accumulated home appliance code 261 and the function code 262 to extract a function performing pattern at a time point and a day of the week from a specific home appliance and manages the code as a code. Generating a pattern code 331 suitable for a time and day of the week when a voice command is input to the remote control apparatus 200;
Voice recognition remote control service method for home appliances to infrared communication, characterized in that it further comprises.
제5항에 있어서,
상기 (a) 단계는
음성으로 입력받은 제어 대상 가전기기와 제어 기능을 스피커(290)로 출력하는 복명복창을 통해 입력된 음성 명령을 확인하고 기능의 수행을 알리는 것을 특징으로 하는 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 방법.
The method of claim 5,
Step (a) is
Voice recognition remote control service for home appliances that communicate with the infrared, characterized in that the input of the control target home appliances and the control function received the voice to the speaker 290 to check the input voice command and notify the performance of the function Way.
제5항에 있어서,
상기 리모컨장치(200)는 다수의 가전기기에 각각 가상화된 가상화장치(100)를 통해 다수의 제어 대상 가전기기와 제어 기능을 구분하여 기능 수행을 제어하거나 수행된 기능 동작 및 상태 정보를 수집하는 것을 특징으로 하는 적외선 통신하는 가전기기를 위한 음성인식 리모컨 서비스 방법.
The method of claim 5,
The remote control device 200 controls the performance of a function by collecting a plurality of control target home appliances and control functions through the virtualization apparatus 100 virtualized in each of a plurality of home appliances, or collects the performed function operation and status information. Voice recognition remote control service method for home appliances characterized in that the infrared communication.
KR1020180082686A 2018-07-17 2018-07-17 A voice recognition remote control system for electrical appliances using infrared ray communication and a method using the same KR102124606B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180082686A KR102124606B1 (en) 2018-07-17 2018-07-17 A voice recognition remote control system for electrical appliances using infrared ray communication and a method using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180082686A KR102124606B1 (en) 2018-07-17 2018-07-17 A voice recognition remote control system for electrical appliances using infrared ray communication and a method using the same

Publications (2)

Publication Number Publication Date
KR20200008708A true KR20200008708A (en) 2020-01-29
KR102124606B1 KR102124606B1 (en) 2020-06-18

Family

ID=69322297

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180082686A KR102124606B1 (en) 2018-07-17 2018-07-17 A voice recognition remote control system for electrical appliances using infrared ray communication and a method using the same

Country Status (1)

Country Link
KR (1) KR102124606B1 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113012699A (en) * 2021-05-07 2021-06-22 宇博科创（深圳）科技有限公司 Infrared remote control switch method and system based on off-line voice
CN113763951A (en) * 2021-08-24 2021-12-07 深圳市恒必达电子科技有限公司 Intelligent wrist-watch of intelligent house of pronunciation infrared control
WO2022124493A1 (en) * 2020-12-10 2022-06-16 삼성전자 주식회사 Electronic device and method for providing memory service in electronic device
WO2024005364A1 (en) * 2022-06-30 2024-01-04 삼성전자 주식회사 Method for controlling home appliance on basis of voice input, and home appliance controlled thereby

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030071975A (en) * 2002-03-05 2003-09-13 에스엘투(주) Integrated remote control system and method for home automation using voice recognition
KR20040104871A (en) * 2003-06-04 2004-12-13 삼성전자주식회사 Apparatus and method for remote controlling household electric appliances using an wireless terminal
KR20070060961A (en) * 2005-12-08 2007-06-13 한국전자통신연구원 Method and system for controlling electric home appliances of infrared ray in home network system
KR20170067917A (en) 2015-12-08 2017-06-19 전자부품연구원 Smart home appliances service system and service method thereof

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030071975A (en) * 2002-03-05 2003-09-13 에스엘투(주) Integrated remote control system and method for home automation using voice recognition
KR20040104871A (en) * 2003-06-04 2004-12-13 삼성전자주식회사 Apparatus and method for remote controlling household electric appliances using an wireless terminal
KR20070060961A (en) * 2005-12-08 2007-06-13 한국전자통신연구원 Method and system for controlling electric home appliances of infrared ray in home network system
KR20170067917A (en) 2015-12-08 2017-06-19 전자부품연구원 Smart home appliances service system and service method thereof

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022124493A1 (en) * 2020-12-10 2022-06-16 삼성전자 주식회사 Electronic device and method for providing memory service in electronic device
US11929080B2 (en) 2020-12-10 2024-03-12 Samsung Electronics Co., Ltd. Electronic device and method for providing memory service by electronic device
CN113012699A (en) * 2021-05-07 2021-06-22 宇博科创（深圳）科技有限公司 Infrared remote control switch method and system based on off-line voice
CN113012699B (en) * 2021-05-07 2024-01-23 宇博科创（深圳）科技有限公司 Infrared remote control switch method and system based on offline voice
CN113763951A (en) * 2021-08-24 2021-12-07 深圳市恒必达电子科技有限公司 Intelligent wrist-watch of intelligent house of pronunciation infrared control
CN113763951B (en) * 2021-08-24 2024-01-05 深圳市恒必达电子科技有限公司 Intelligent watch capable of controlling intelligent home through voice and infrared
WO2024005364A1 (en) * 2022-06-30 2024-01-04 삼성전자 주식회사 Method for controlling home appliance on basis of voice input, and home appliance controlled thereby

Also Published As

Publication number Publication date
KR102124606B1 (en) 2020-06-18

Similar Documents

Publication Publication Date Title
KR102124606B1 (en) A voice recognition remote control system for electrical appliances using infrared ray communication and a method using the same
US7349758B2 (en) Interactive personalized robot for home use
CN205334101U (en) Smart home system
KR101835085B1 (en) Smart home network system
US20200104094A1 (en) Customizable embedded vocal command sets for a lighting and/or other environmental controller
US20140129006A1 (en) Smart gateway, smart home system and smart controlling method thereof
US10796564B2 (en) Remote control apparatus capable of remotely controlling multiple devices
US20130171981A1 (en) Digital device control system using smart phone
KR101253148B1 (en) Digital device control system capable of infrared signal addition using smart phone and home server
CN105446162A (en) Intelligent home system and intelligent home control method of robot
EP2728854A2 (en) Agent apparatus and method of controlling agent apparatus
JP2006522556A (en) Home automation system and method using RF remote control module based on network
US11257358B2 (en) Remote control apparatus capable of remotely controlling multiple devices
KR20210122843A (en) Matching method and device
KR200493908Y1 (en) Multi-Function Remote Control
WO2018010388A1 (en) Wearable device and control method for home device
CN111936981A (en) Device control system and device control method
KR20150018663A (en) A system and method for personalized living services by identification and positioning by image processing
KR102320027B1 (en) Voice transmission method, voice transmission apparatus implementing the same, and system including the same
WO2018103623A1 (en) Terminal control method and apparatus, and terminal system
KR102569400B1 (en) Hub apparatus and Method for providing service thereof
KR101975537B1 (en) SERIAL TO LoRa CONVERTER
KR20220023620A (en) Automatic device control system for lighting control and crime prevention
US11595222B2 (en) System and method for using a multicast service to configure a controlling device
KR20200062623A (en) Electronic device and method for controlling another electonic device thereof

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right