KR20160057774A - Smart home network service control device and the control method - Google Patents

Smart home network service control device and the control method Download PDF

Info

Publication number
KR20160057774A
KR20160057774A KR1020140158810A KR20140158810A KR20160057774A KR 20160057774 A KR20160057774 A KR 20160057774A KR 1020140158810 A KR1020140158810 A KR 1020140158810A KR 20140158810 A KR20140158810 A KR 20140158810A KR 20160057774 A KR20160057774 A KR 20160057774A
Authority
KR
South Korea
Prior art keywords
home
sound
network
communication terminal
terminal
Prior art date
Application number
KR1020140158810A
Other languages
Korean (ko)
Other versions
KR102242961B1 (en
Inventor
정인권
안사무엘
Original Assignee
삼성에스디에스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성에스디에스 주식회사 filed Critical 삼성에스디에스 주식회사
Priority to KR1020140158810A priority Critical patent/KR102242961B1/en
Priority to CN201510772508.8A priority patent/CN105608880B/en
Publication of KR20160057774A publication Critical patent/KR20160057774A/en
Application granted granted Critical
Publication of KR102242961B1 publication Critical patent/KR102242961B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C23/00—Non-electrical signal transmission systems, e.g. optical systems
    • G08C23/02—Non-electrical signal transmission systems, e.g. optical systems using infrasonic, sonic or ultrasonic waves
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2823—Reporting information sensed by appliance or service execution status of appliance services in a home automation network
    • H04L12/2827—Reporting to a device within the home network; wherein the reception of the information reported automatically triggers the execution of a home appliance functionality
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS], computer integrated manufacturing [CIM]
    • G05B19/4185—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS], computer integrated manufacturing [CIM] characterised by the network communication
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0805—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
    • H04L43/0811—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability by checking connectivity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/10—Active monitoring, e.g. heartbeat, ping or trace-route
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks

Abstract

The present invention discloses a method for controlling a smart home network service. According to the present invention, at the time when a network error of a smart home network occurs, the network error is recognized when a communication terminal on which a home portal application has been installed requests a smart home network service, and various types of indoor devices connected to the smart home network are remotely controlled through automatic operation in a voice recognition control mode (for example, a Sound QR mode) based on the recognized network error. Accordingly the smart home network service can be prevented from being stopped by a network error, thereby mitigating inconvenience of a user attributable to a stop of the smart home network service.

Description

스마트 홈 네트워크 서비스 제어 장치 및 그 제어방법{Smart home network service control device and the control method}Technical Field [0001] The present invention relates to a smart home network service control device and a control method thereof,

본 발명은 스마트 홈 네트워크 서비스의 제어기술에 관한 것으로, 보다 상세하게는 스마트 홈 네트워크 서비스를 받고 있는 상태에서 네트워크 에러가 발생시, 사운드 제어모드(예; 사운드 QR)를 통해 스마트 홈 네트워크에 연결된 각종 댁내 장치(예; 에어콘, TV, 전등, 도어록, 가스밸브, 스마트 콘센트, 기울기 감지기, 문열림 감지기, 움직임 감지기, 이동형 감지기 등)를 원격 제어할 수 있도록 하는 스마트 홈 네트워크 서비스 제어장치 및 그 제어방법에 관한 것이다.The present invention relates to a control technology of a smart home network service, and more particularly, to a control technology of a smart home network service in which, when a network error occurs in a state of receiving a smart home network service, A smart home network service control device and a control method thereof for enabling remote control of a device (e.g., an air conditioner, a TV, a light, a door lock, a gas valve, a smart outlet, a tilt sensor, a door open sensor, a motion sensor, .

일반적으로, 스마트 홈 네트워크에는 댁내에 설치되는 각종 댁내 장치(예; 에어콘, TV, 전등, 도어록, 가스밸브, 스마트 콘센트, 기울기 감지기, 문열림 감지기, 움직임 감지기, 이동형 감지기 등)이 연결되고, 이러한 각종 댁내 장치는 네트워크로 연결된 댁내 단말기(IHD)를 통해 제어하거나, 또는 클라우드 기반의 홈 포털 어플리케이션을 설치한 단말기(예; 스마트폰, 스마트패드 등)를 통해 시간 및 공간 제약없이 원격 제어할 수 있도록 한 것이며, 그 원격 제어를 위해 댁내에는 게이트웨이가 설치되도록 하였다.2. Description of the Related Art Generally, smart home networks are connected to various domestic devices (eg, air conditioners, TVs, electric lamps, door locks, gas valves, smart outlets, tilt detectors, door openers, motion detectors, Various home devices can be controlled through a networked home terminal (IHD) or remote control can be performed without restriction of time and space through a terminal (eg smart phone, smart pad, etc.) installed with a cloud based home portal application And a gateway is installed in the house for the remote control.

그러나, 종래 스마트 홈 네트워크에서 네트워크 에러가 발생시, 스마트 홈 네트워크에 연결된 댁내의 각종 댁내 장치에 대한 제어는 불가능하게 되었다.However, when a network error occurs in the conventional smart home network, it becomes impossible to control various domestic devices connected to the smart home network.

이에 종래에는 공개특허공보 제 10-2009-0035152 호(공개일 2009.04.09)에서와 같이, 네트워크 오류 발생시 이의 인지를 통해 오류 유형을 해석하고, 이를 기반으로 오류를 처리하는 기술이 개시되었다.Conventionally, as disclosed in Japanese Unexamined Patent Application Publication No. 10-2009-0035152 (published on Apr. 04, 2009), a technique for analyzing an error type through the recognition of a network error and processing the error based on the error type has been disclosed.

그러나, 상기와 같은 선행기술은 네트워크 오류 발생시 그 오류를 인식하여 오류를 해소하도록 하였지만, 오류가 해소되기까지 스마트 홈 네트워크 서비스는 정지될 수 밖에 없으며, 오류 처리에 상당한 시간이 소요되는 경우에는 댁내의 각종 댁내장치에 대한 제어는 불가능할 수 밖에 없는 것이다.However, in the prior art as described above, when a network error occurs, the error is recognized and the error is resolved. However, the smart home network service must be stopped until the error is resolved. If the error processing takes a considerable time, It is impossible to control various home devices.

따라서, 본 발명은 상기와 같은 종래의 문제점을 개선하기 위한 것으로, 스마트 홈 네트워크의 네트워크 에러가 발생된 시점에, 홈 포털 어플리케이션이 설치된 통신단말기에서 스마트 홈 네트워크 서비스를 요청시 네트워크 에러를 인지하고 그 인지된 네트워크 에러에 따라 사운드 제어모드(예; 사운드 QR)의 자동 구동을 통해 스마트 홈 네트워크에 연결된 각종 댁내장치를 원격 제어하도록 구성함으로써, 스마트 홈 네트워크 서비스가 네트워크 에러에 의해 정지되는 것을 방지할 수 있도록 하고, 스마트 홈 네트워크 서비스의 정지에 따른 사용자 불편을 개선할 수 있도록 하는 스마트 홈 네트워크 서비스 제어장치 및 그 제어방법을 제공함에 그 목적이 있는 것이다.SUMMARY OF THE INVENTION Accordingly, the present invention has been made to solve the above-mentioned problems occurring in the prior art, and it is an object of the present invention to provide a smart home network service in which when a network error occurs in a smart home network, It is possible to remotely control various home devices connected to the smart home network through automatic driving of a sound control mode (e.g., sound QR) according to a recognized network error, thereby preventing a smart home network service from being stopped due to a network error The present invention is directed to a smart home network service control apparatus and a control method thereof, which can improve user convenience due to suspension of a smart home network service.

상기 목적 달성을 위한 본 발명 스마트 홈 네트워크 서비스 제어장치는, 각종 댁내 장치가 로컬 네트워크(Local Network)로 댁내 단말기(IHD)와 연결되고, 상기 댁내 단말기와 공중의 네트워크(Public Network)로 통신단말기를 연결 구성하되, 상기 통신단말기에는 공중의 네트워크에 대한 연결성을 체크하는 네트워크 드라이버와, 상기 네트워크 드라이버의 체크결과에 따라 통신단말기와 댁내 단말기의 네트워크 연결이 이루어지지 않을 때 사운드 제어모드(Sound QR)로 동작하는 사운드모드 동작부 및, 상기 사운드모드 동작부를 제어하는 제어부를 포함하여 구성하고, 상기 댁내 단말기에는 상기 사운드모드 동작부가 사운드 제어모드로 동작하여 사용자의 음성 제어명령을 전송시 이를 수신하는 수신부와, 상기 수신부로부터 수신된 사용자의 음성 제어명령을 분석하는 음성인식엔진과, 상기 댁내 장치는 물론 상기 통신단말기와의 네트워크 연결이 이루어지지 않을 때 사운드 제어(Sound QR)의 서버모드로 동작하여 상기 통신단말기에 의한 스마트 홈 네트워크 서비스가 정지없이 계속 이루어지도록 상기 수신부와 음성인식엔진을 제어하는 홈 네트워크 컨트롤러를 포함하여 구성한 것이다.In order to achieve the above object, the smart home network service control apparatus of the present invention is characterized in that various home devices are connected to a home network (IHD) through a local network, and a communication terminal is connected to the home network through a public network A network driver for checking the connectivity of the public network to the communication terminal, and a sound control unit for controlling the communication unit to communicate with the communication terminal through a sound control mode (Sound QR) when the network connection between the communication terminal and the home- And a control unit for controlling the sound mode operation unit, wherein the home terminal is provided with a receiving unit for receiving the voice control command when the sound mode operation unit operates in the sound control mode and transmits the voice control command of the user, , A voice control command of the user received from the receiver A voice recognition engine for performing voice communication with the communication terminal, and a server mode of sound control (QR) when the network connection with the communication terminal is not established, And a home network controller for controlling the receiving unit and the speech recognition engine so as to control the voice recognition engine.

또한, 상기 제어부는 네트워크 드라이버를 통해 브로드캐스트하는 네트워크 상태를 모니터링하고, 통신단말기와 댁내 단말기의 네트워크 연결시 상기 사운드모드 동작부의 사운드 제어모드를 해제하는 제어프로그램을 탑재 구성한 것이다.In addition, the control unit is equipped with a control program for monitoring a network state broadcast through a network driver, and releasing a sound control mode of the sound mode operation unit when the communication terminal and the home terminal are connected to each other via a network.

또한, 상기 홈 네트워크 컨트롤러는 최초 스마트 홈 네트워크 서비스의 시작 시점을 알리는 신호를 발생시킨 후 이를 통신단말기로 전송하되, 상기 통신단말기의 제어부는 최초 스마트 홈 네트워크 서비스의 시작 시점을 알리는 신호를 수신시, 사운드 제어(Sound QR)의 서버모드를 해제하는 제어프로그램을 탑재 구성한 것이다.In addition, the home network controller generates a signal indicating the start time of the first smart home network service, and transmits the signal to the communication terminal. Upon reception of a signal indicating the starting time of the first smart home network service, And a control program for releasing the server mode of the sound control (sound QR).

다른 일면에 따라, 상기 스마트 홈 네트워크 서비스 제어장치에 의해 구현되는 스마트 홈 네트워크 서비스 제어방법은, 통신단말기와 댁내 단말기에 대한 네트워크 연결상태를 체크하는 제 1 단계; 상기 제 1 단계의 체크결과 네트워크 에러에 의해 통신단말기와 댁내 단말기의 네트워크 연결이 이루어지지 않으면, 통신단말기는 사운드 제어모드(Sound QR)를 시작하고, 댁내 단말기는 사운드 제어(Sound QR)의 서버모드를 시작하는 제 2 단계; 상기 제 2 단계로부터 통신단말기와 댁내 단말기가 각각 사운드 제어모드와 사운드제어의 서버모드를 시작시, 통신단말기 또는 댁내 단말기는 할당받은 아이피 게이트웨이로 댁내 단말기 또는 통신단말기에 핑(Ping)을 요청하는 제 3 단계; 상기 제 3 단계로부터 핑 요청이 성공하지 못하면, 통신단말기 또는 댁내 단말기는 네트워크 이상으로 판단하고, 상기 제 2 단계의 사운드 제어모드에 따라 스마트 홈 네트워크에 연결되는 댁내 장치에 대한 사용자의 음성 제어명령을 사운드 QR로 매칭한 웨이브 파일(WAV file)을 댁내 단말기로 전송하는 제 4 단계; 및, 상기 제 4 단계로부터 통신단말기에서 전송하는 사운드 QR로 매칭한 웨이브 파일을 댁내 단말기가 수신한 후 음성인식모드로 동작하여 상기 웨이브 파일에 매칭되는 제어명령을 수행하면서 스마트 홈 네트워크의 해당 댁내 장치를 제어하는 제 5 단계; 를 포함하여 진행하는 것이다.According to another aspect of the present invention, there is provided a smart home network service control method implemented by the smart home network service control apparatus, comprising: a first step of checking a network connection state of a communication terminal and a home terminal; As a result of the check in the first step, if the network connection between the communication terminal and the home terminal is not established due to a network error, the communication terminal starts the sound control mode (Sound QR), and the home terminal starts the sound control A second step of starting the second step; When the communication terminal and the home terminal start the sound control mode and the sound control server mode, respectively, from the second step, the communication terminal or the home terminal transmits the ping request to the home terminal or the communication terminal Step 3; If the ping request is unsuccessful from the third step, it is determined that the communication terminal or the home terminal is abnormal in the network. In response to the sound control mode of the second step, the voice control command of the user to the home- A fourth step of transmitting a WAV file matched with the sound QR to the home terminal; And the home terminal receives the wave file matched with the sound QR transmitted from the communication terminal in the fourth step, and operates in a voice recognition mode to perform a control command matched with the wave file, ; .

또한, 상기 제 2 단계에는, 상기 제 1 단계의 체크결과 통신단말기와 댁내 단말기가 스마트 홈 네트워크 서비스를 위한 네트워크 연결시, 통신단말기에서 전송하는 댁내 장치의 제어명령을 댁내 단말기가 정상적으로 수신하였는지를 판단하는 단계; 및, 상기 단계의 판단결과 댁내 단말기가 제어명령을 정상적으로 수신시, 스마트 홈 네트워크 서비스를 진행하고, 댁내 단말기가 제어명령을 정상적으로 수신하지 않으면 통신단말기가 사운드 제어모드(Sound QR)를 시작하는 단계; 를 더 포함하여 진행하는 것이다.In the second step, it is determined whether the home terminal normally receives the control command of the home-use device transmitted from the communication terminal when the communication terminal and the home-use terminal check the network connection for the smart home network service in the first step step; And proceeding to a smart home network service when the home-use terminal normally receives the control command as a result of the determination in the step, and when the home-use terminal does not normally receive the control command, initiating the sound control mode (sound QR) As shown in FIG.

또한, 상기 제 2 단계에는, 네트워크 에러 발생시 통신단말기 또는 댁내 단말기는 사운드 QR 프로세스가 활성화되어 있는지를 확인하는 단계; 상기 단계의 사운드 QR 프로세스가 활성화되어 있지 않으면, 통신단말기는 사운드 QR 프로세스를 활성화시킨 후 스마트 홈 네트워크 서비스를 위한 사용자의 음성 제어명령을 전송하는 리스너 프로세스(Listener Process)를 시작하는 단계; 및,In the second step, the communication terminal or the home terminal confirms whether the sound QR process is activated when a network error occurs. If the sound QR process of the step is not activated, the communication terminal activates a sound QR process and then starts a listener process for transmitting a voice control command of a user for a smart home network service; And

상기 단계의 사운드 QR 프로세스가 활성화되어 있지 않으면, 댁내 단말기는 사운드 QR 프로세스를 활성화시킨 후 스마트 홈 네트워크 서비스를 위한 사용자의 음성 제어명령을 수신할 수 있는 파싱(Parsing)과 리스너(Listener)를 등록하는 단계; 를 더 포함하여 진행하는 것이다.If the sound QR process of the above step is not activated, the home terminal activates the sound QR process, and then registers parsing and listener capable of receiving the voice control command of the user for the smart home network service step; As shown in FIG.

또한, 상기 제 4 단계에는, 상기 제 3 단계로부터 핑 요청이 성공시, 공중의 네트워크 에러 또는 로컬 네트워크 에러인지를 확인하는 단계; 및, 상기 단계로부터 확인된 에러가 공중의 네트워크 에러이고 로컬 네트워크는 정상이면 댁내 단말기가 스마트 홈 네트워크의 댁내 장치를 리부팅(Rebooting)시키는 단계; 를 더 포함하여 진행하는 것이다.In addition, in the fourth step, when the ping request is successful from the third step, it is confirmed whether it is a public network error or a local network error. And if the error identified from the step is a network error of the public and the local network is normal, the home terminal reboots the home network device of the smart home network; As shown in FIG.

또한, 상기 제 5 단계에는, 댁내 단말기가 웨이브 파일을 수신시 음성인식엔진을 가동하여 수신된 웨이브 파일이 비가청 주파수로 수신되는지를 감지하는 단계; 상기 단계로부터 수신되는 웨이브 파일이 비가청 주파수이면 그 웨이브 파일이 비상상황 음성 또는 댁내 장치에 대한 음성 제어명령인지를 분석하는 단계; 상기 단계의 분석결과 비상상황 음성이면 비상관제센터에 비상상황을 전달하는 스마트 홈 네트워크 서비스를 진행하고, 댁내 장치에 대한 음성 제어명령이면 스마트 홈 네트워크의 해당 댁내 장치를 제어하는 단계; 를 더 포함하여 진행하는 것이다.In the fifth step, the home terminal activates the voice recognition engine when receiving the wave file, and detects whether the received wave file is received at the non-audible frequency; Analyzing whether the wave file received from the step is a non-audible frequency, whether the wave file is an emergency situation voice or a voice control command for the domestic device; Controlling a smart home network service for delivering an emergency situation to an emergency management center in case of an emergency situation voice as a result of the analysis of the step and controlling the corresponding indoor device of the smart home network if the voice control command is for a home appliance; As shown in FIG.

또한, 상기 제 5 단계에는, 상기 비상관제센터로의 비상상황 전달 또는 댁내 장치에 대한 제어 서비스가 이루어지지 않으면, 댁내 단말기가 비상상황 전달 또는 댁내 장치에 대한 제어 서비스를 재시도(re-Try)하는 단계; 를 더 포함하여 진행하는 것이다.In addition, in the fifth step, if the emergency situation delivery to the emergency management center or the control service for the home-use device is not performed, the home-use terminal may re-try the control service for the emergency situation delivery or the home- ; As shown in FIG.

또한, 상기 통신단말기는 네트워크 드라이버에서 브로드캐스트하는 네트워크 연결 상태를 모니터링하여 연결 메세지를 수신시, 상기 제 2 단계로부터 시작되는 사운드 제어모드를 해제하는 제 6 단계; 를 더 포함하여 진행하는 것이다.The communication terminal may further include a sixth step of, upon receiving a connection message by monitoring a network connection status broadcasted by the network driver, releasing a sound control mode starting from the second step; As shown in FIG.

또한, 상기 댁내 단말기는 최초 스마트 홈 네트워크 서비스의 시작 시점을 알리는 신호를 발생시킨 후 이를 통신단말기로 전송하고, 상기 통신단말기에서 상기 서비스의 시작 시점을 알리는 신호를 수신시, 상기 제 2 단계로부터 시작되는 사운드 제어(Sound QR)의 서버모드를 해제하는 제 7 단계; 를 더 포함하여 진행하는 것이다.The home terminal generates a signal indicating the start time of the first smart home network service and transmits the signal to the communication terminal. Upon receiving the signal indicating the starting time of the service in the communication terminal, A seventh step of releasing a server mode of sound control (Sound QR); As shown in FIG.

이와 같이, 본 발명은 스마트 홈 네트워크의 네트워크 에러가 발생된 시점에, 홈 포털 어플리케이션이 설치된 통신단말기에서 스마트 홈 네트워크 서비스를 요청시 네트워크 에러를 인지하고 그 인지된 네트워크 에러에 따라 음성인식 제어모드(예; 사운드 QR)의 자동 구동을 통해 스마트 홈 네트워크에 연결된 각종 댁내 장치를 원격 제어하는 것으로, 이를 통해 스마트 홈 네트워크 서비스가 네트워크 에러에 의해 정지되는 것을 방지할 수 있도록 하고, 스마트 홈 네트워크 서비스의 정지에 따른 사용자 불편을 개선하는 효과를 기대할 수 있는 것이다.As described above, according to the present invention, when a network error of a smart home network occurs, a communication terminal equipped with a home portal application recognizes a network error when requesting a smart home network service, The smart home network service is prevented from being stopped due to a network error by means of remote control of various domestic devices connected to the smart home network through the automatic driving of the home network service It is possible to expect the effect of improving the user inconvenience caused by the user.

도 1은 본 발명의 실시예로 네트워크 에러시의 스마트 홈 네트워크 서비스 제어 장치에 대한 개략적인 블럭 구성도.
도 2는 본 발명의 실시예로 네트워크 에러시의 스마트 홈 네트워크 서비스 제어 방법을 보인 전체 흐름도.
도 3은 본 발명의 실시예로 통신단말기에서의 사운드 제어모드에 대한 동작 흐름도.
도 4는 본 발명의 실시예로 댁내 단말기에서의 사운드 제어모드에 대한 동작 흐름도.
도 5는 본 발명의 실시예로 댁내 단말기의 음성인식 엔진에 대한 동작 흐름도.FIG. 1 is a schematic block diagram of a smart home network service control apparatus in case of a network error according to an embodiment of the present invention. FIG.
2 is a flowchart illustrating a method of controlling a smart home network service in the event of a network error according to an embodiment of the present invention.
FIG. 3 is a flowchart illustrating an operation of a communication terminal in a sound control mode according to an embodiment of the present invention; FIG.
4 is a flowchart illustrating an operation of a sound control mode in a home-use terminal according to an embodiment of the present invention.
5 is a flowchart illustrating an operation of a voice recognition engine of a home-use terminal according to an embodiment of the present invention.

이하, 첨부된 도면을 참조하여 본 발명의 실시예를 설명하기로 한다.Hereinafter, embodiments of the present invention will be described with reference to the accompanying drawings.

도 1은 본 발명의 실시예로 네트워크 에러시의 스마트 홈 네트워크 서비스 제어 장치에 대한 개략적인 블럭 구성도를 도시한 것이다.FIG. 1 is a schematic block diagram of a smart home network service control apparatus in case of a network error according to an embodiment of the present invention.

첨부된 도 1을 참조하면, 본 발명의 실시예에 따른 네트워크 에러시의 스마트 홈 네트워크 서비스 제어장치는, 댁내 장치(D1,D2,…,Dn)와 로컬 네트워크(Local Network)로 댁내 단말기(IHD)(200)를 연결하고, 상기 댁내 단말기(200)와 공중의 네트워크(Public Network)로 통신단말기(100)를 연결 구성하는 것에 있어서, 상기 통신단말기(100)에는 네트워크 드라이버(Wi-Fi/Network Driver)(11), 사운드모드 동작부(Sound QR Client)(12), 그리고 제어부(Devices Control Sender/Listener)(13)를 구성하여둔 것이다.Referring to FIG. 1, a smart home network service control apparatus for a network error according to an embodiment of the present invention includes a home network (IHD), a home network (Wi-Fi / Network) 200 is connected to the communication terminal 100 by connecting the communication terminal 100 with the home terminal 200 through a public network, Driver 11, a sound mode operation unit (Sound QR Client) 12, and a control unit (Devices Control Sender / Listener)

상기 네트워크 드라이버(11)는 공중의 네트워크에 대한 연결성을 체크한 후 이를 상기 제어부(13)에 제공하도록 구성하여둔 것이다.The network driver 11 is configured to check connectivity to the public network and provide the control unit 13 with the connectivity.

상기 사운드모드 동작부(12)는 상기 네트워크 드라이버(11)의 체크결과에 따라 통신단말기(100)와 댁내 단말기(200)의 네트워크 연결이 이루어지지 않을 때, 통신단말기(100)를 통해 스마트 홈 네트워크 서비스가 정지없이 지속적으로 이루어질 수 있도록 하는 사운드 제어모드(Sound QR)로 동작하도록 구성하여둔 것이다.When the network connection between the communication terminal 100 and the home-use terminal 200 is not established according to a result of the check by the network driver 11, the sound-mode operation unit 12 transmits the home- And to operate as a sound control mode (Sound QR) so that the service can be continuously performed without stopping.

상기 제어부(13)는 상기 네트워크 드라이버(11)의 체크결과로부터 통신단말기(100)와 댁내 단말기(200)의 네트워크 연결이 이루어지지 않을 때 상기 사운드모드 동작부(12)를 제어하도록 구성하여둔 것이다.The control unit 13 is configured to control the sound mode operating unit 12 when the network connection between the communication terminal 100 and the home-use terminal 200 is not established, based on a check result of the network driver 11 .

이때, 상기 제어부(13)는 상기 네트워크 드라이버(11)를 통해 브로드캐스트하는 네트워크 상태를 모니터링하고, 그 모니터링 결과에 따라 통신단말기(100)와 댁내 단말기(200)의 네트워크 연결이 이루어지면 상기 사운드모드 동작부(12)의 사운드 제어모드를 해제하는 제어프로그램을 탑재 구성하여둔 것이지만, 상기 제어프로그램은 스마트 홈 네트워크 서비스 제어방법을 구현하기 위해 저장매체에 저장되는 컴퓨터 프로그램일 수도 있는 것이다.At this time, the control unit 13 monitors the network state broadcasted through the network driver 11, and when the network connection between the communication terminal 100 and the home-use terminal 200 is established according to the monitoring result, A control program for releasing the sound control mode of the operation unit 12 is mounted, but the control program may be a computer program stored in a storage medium to implement the smart home network service control method.

상기 댁내 단말기(200)에는 수신부(Sound QR Server Process)(21)와, 음성인식 엔진(QR Sound Parser)(22), 그리고 홈 네트워크 컨트롤러(23)를 구성하여둔 것이다.The home terminal 200 includes a sound QR server process 21, a voice recognition engine (QR sound parser) 22, and a home network controller 23.

상기 수신부(21)는 상기 사운드모드 동작부(12)가 사운드 제어모드로 동작하여 사용자의 음성 제어명령을 전송시 이를 수신하도록 구성하여둔 것이다.The receiving unit 21 is configured so that the sound mode operation unit 12 operates in the sound control mode and receives the voice control command when the user transmits the voice control command.

상기 음성인식엔진(22)은 상기 수신부(21)로부터 수신된 사용자의 음성 제어명령을 분석하도록 구성하여둔 것이다.The voice recognition engine 22 is configured to analyze a voice control command of the user received from the receiving unit 21. [

상기 홈 네트워크 컨트롤러(23)는 상기 댁내 장치(D1,D2,…,Dn)는 물론 상기 수신부(21)와 음성인식엔진(22)을 제어하도록 구성하여둔 것이다.The home network controller 23 is configured to control the receiving unit 21 and the voice recognition engine 22 as well as the domestic devices D1, D2, ..., Dn.

이때, 상기 홈 네트워크 컨트롤러(23)는 최초 스마트 홈 네트워크 서비스의 시작 시점을 알리는 신호(Coldstart)를 발생시킨 후 이를 통신단말기(100)로 전송하되, 상기 통신단말기(200)의 제어부(13)는 최초 스마트 홈 네트워크 서비스의 시작 시점을 알리는 신호(Coldstart)을 수신하게 되면, 사운드 제어(Sound QR)의 서버모드(Server Mode)를 해제하는 제어프로그램을 탑재 구성하여둔 것이지만, 상기 제어프로그램은 스마트 홈 네트워크 서비스 제어방법을 구현하기 위해 저장매체에 저장되는 컴퓨터 프로그램일 수도 있는 것이다.At this time, the home network controller 23 generates a coldstart signal indicating the start time of the first smart home network service, and then transmits the signal to the communication terminal 100. The control unit 13 of the communication terminal 200 A control program for releasing the server mode of the sound control (Sound QR) is installed when receiving a signal (Coldstart) indicating the start time of the first smart home network service. However, And may be a computer program stored on a storage medium for implementing a network service control method.

이와 같이, 본 발명의 실시예에 따른 네트워크 에러시의 스마트 홈 네트워크 서비스 제어는 네트워크 에러 상태에서도 통신단말기(100)에 탑재된 어플리케이션을 통해 스마트 홈 네트워크 서비스를 제어할 수 있도록 한 것으로, 그 제어는 제 1 내지 제 7 단계를 포함하여 진행하는 것이다.As described above, the smart home network service control in case of network error according to the embodiment of the present invention allows the smart home network service to be controlled through the application installed in the communication terminal 100 even in the network error state, And proceeds with the first to seventh steps.

상기 제 1 단계는, 통신단말기(100)와 댁내 단말기(200)에 대한 네트워크 연결상태를 체크하도록 한 것이다.The first step is to check the network connection status of the communication terminal 100 and the home-use terminal 200.

즉, 상기 통신단말기(100)에 구성되는 네트워크 드라이버(11), 그리고 상기 댁내 단말기(200)내의 홈 네트워크 컨트롤러(23)는 각각 네트워크 연결상태를 체크하게 되는 것이다.That is, the network driver 11 configured in the communication terminal 100 and the home network controller 23 in the home terminal 200 check the network connection status, respectively.

다음의 제 2 단계로서, 상기와 같은 체크결과로부터 네트워크 에러에 의해 통신단말기(100)와 댁내 단말기(200)의 네트워크 연결이 이루어지지 않을 때, 상기 통신단말기(100)의 제어부(13)는 사운드모드 동작부(12)를 제어하여 사운드 제어모드(Sound QR)를 시작하고, 상기 댁내 단말기(200)는 사운드 제어(Sound QR)의 서버모드(Server Mode)를 시작하도록 한 것이다.When the network connection between the communication terminal 100 and the home-use terminal 200 is not established due to a network error from the above-mentioned check result, the control unit 13 of the communication terminal 100 transmits a sound The user operates the mode operation unit 12 to start a sound control mode (Sound QR), and the home terminal 200 starts a server mode of sound control (Sound QR).

즉, 상기 통신단말기(100)와 댁내 단말기(200)가 네트워크 에러로 서로 네트워크 연결이 이루어지지 않을 때, 통신단말기(100) 또는 댁내 단말기(200)는 사운드 QR 프로세스가 활성화되어 있는지를 우선 확인하게 된다.That is, when the communication terminal 100 and the home-use terminal 200 are not connected to each other due to a network error, the communication terminal 100 or the home-use terminal 200 first confirms whether the sound QR process is activated do.

다음으로, 통신단말기(100)의 제어부(13)는 상기 사운드 QR 프로세스가 활성화되어 있지 않으면, 사운드 QR 프로세스를 활성화시킨 후 스마트 홈 네트워크 서비스를 위한 사용자의 음성 제어명령을 전송하는 리스너 프로세스(Listener Process)를 시작하게 된다.If the sound QR process is not activated, the control unit 13 of the communication terminal 100 activates the sound QR process and then transmits a voice control command of the user for the smart home network service to the listener process ).

또한, 댁내 단말기(200)의 홈 네트워크 컨트롤러(23)는 상기 사운드 QR 프로세스가 활성화되어 있지 않으면, 사운드 QR 프로세스를 활성화시킨 후 스마트 홈 네트워크 서비스를 위한 사용자의 음성 제어명령을 수신할 수 있는 파싱(Parsing)과 리스너(Listener)를 등록하게 되는 것이다.If the sound QR process is not activated, the home network controller 23 of the home-use terminal 200 activates the sound QR process, and then performs a parsing operation to receive a user's voice control command for the smart home network service Parsing) and a listener.

여기서, 통신단말기(100)와 댁내 단말기(200)가 스마트 홈 네트워크 서비스를 위한 네트워크로 연결되어 있는 경우, 상기 통신단말기(100)에서 전송하는 댁내 장치(D1,D2,…,Dn)의 제어명령을 댁내 단말기(200)가 정상적으로 수신하였는지를 판단하게 되는데, 그 판단결과 댁내 단말기(200)가 제어명령을 정상적으로 수신시, 상기 댁내 단말기(200)의 홈 네트워크 컨트롤러(23)는 스마트 홈 네트워크 서비스를 진행하게 되지만, 댁내 단말기(20)가 제어명령을 정상적으로 수신하지 않을 경우, 상기 통신단말기(100)의 제어부(13)는 사운드모드 동작부(12)를 제어하여 사운드 제어모드(Sound QR)를 시작하도록 하였다.When the communication terminal 100 and the home terminal 200 are connected to each other through a network for a smart home network service, control commands of the home devices D1, D2, ..., Dn transmitted from the communication terminal 100 The home network controller 23 of the home terminal 200 performs a smart home network service when the home terminal 200 normally receives the control command as a result of the determination The control unit 13 of the communication terminal 100 controls the sound mode operation unit 12 to start the sound control mode (Sound QR) Respectively.

다음의 제 3 단계로서, 상기 통신단말기(100)와 댁내 단말기(200)가 각각 사운드 제어모드와 사운드제어의 서버모드를 시작하게 되면, 상기 통신단말기(100)의 제어부(13)는 할당받은 아이피 게이트웨이(IP Gateway)로 댁내 단말기(200)에 핑(Ping)을 요청하고, 상기 댁내 단말기(200)의 홈 네트워크 컨트롤러(23)는 할당받은 아이피 게이트웨이(IP Gateway)로 통신단말기(100)에 핑(Ping)을 요청하게 되는 것이다.When the communication terminal 100 and the home terminal 200 start the sound control mode and the sound control server mode, respectively, the control unit 13 of the communication terminal 100 transmits the allocated ip The home network controller 23 of the home terminal 200 requests the home terminal 200 to ping the home terminal 200 with the IP gateway and the home network controller 23 of the home terminal 200 requests the ping to the communication terminal 100 with the assigned IP gateway, (Ping) is requested.

다음의 제 4 단계로서, 상기 통신단말기(100) 또는 상기 댁내 단말기(200)의 핑 요청이 성공하지 못할 경우, 상기 통신단말기(100)의 제어부(13) 또는 상기 댁내 단말기(200)의 홈 네트워크 컨트롤러(23)는 네트워크 이상으로 판단하면서, 상기 통신단말기(100)의 사운드모드 동작부(12)에서는 시작된 사운드 제어모드에 따라 스마트 홈 네트워크에 연결되는 댁내 장치(D1,D2,…,Dn)에 대한 사용자의 음성 제어명령을 사운드 QR로 매칭한 웨이브 파일(WAV file)을 댁내 단말기(200)의 수신부(21)에 전송처리하게 되는 것이다.If the ping request of the communication terminal 100 or the home terminal 200 is unsuccessful, the control unit 13 of the communication terminal 100 or the home network of the home terminal 200 The controller 23 judges that there is an abnormality in the network and transmits the signal to the domestic devices D1, D2, ..., Dn connected to the smart home network according to the sound control mode started in the sound mode operation unit 12 of the communication terminal 100 (WAV file) obtained by matching the voice control command of the user with the sound QR to the receiving unit 21 of the home-use terminal 200.

여기서, 상기 통신단말기(100) 또는 상기 댁내 단말기(200)의 핑 요청이 성공한 경우, 상기 통신단말기(100)의 제어부(13) 또는 댁내 단말기(200)의 홈 네트워크 컨트롤러(23)는 공중의 네트워크 에러 또는 로컬 네트워크 에러인지를 확인하게 되고, 그 에러가 공중의 네트워크 에러이고 로컬 네트워크는 정상이라고 확인되는 경우, 상기 댁내 단말기(200)의 홈 네트워크 컨트롤러(23)는 스마트 홈 네트워크의 댁내 장치(D1,D2,…,Dn)를 리부팅(Rebooting)시키도록 하였다.The control unit 13 of the communication terminal 100 or the home network controller 23 of the home network 200 may be connected to the public network 100. In the case where the ping request of the communication terminal 100 or the home network 200 is successful, The home network controller 23 of the home network 200 determines whether the local network error is a network error of the public network and that the local network is normal, , D2, ..., Dn are rebooted.

다음의 제 5 단계로서, 상기 통신단말기(100)에서 전송하는 사운드 QR로 매칭한 웨이브 파일을 댁내 단말기(200)의 수신부(21)가 수신한 후 이를 음성인식엔진(22)에 전달하게 되면, 상기 음성인식엔진(22)은 음성인식모드로 동작하면서 상기 웨이브 파일에 매칭되는 제어명령을 홈 네트워크 컨트롤러(23)에 전달하고, 이에따라 상기 홈 네트워크 컨트롤러(23)가 스마트 홈 네트워크의 해당 댁내 장치(D1,D2,…,Dn)를 제어하는 동작을 수행하게 되는 것이다.In the next step 5, when the receiving unit 21 of the home-use terminal 200 receives the wave file matched with the sound QR transmitted from the communication terminal 100 and transmits the wave file to the voice recognition engine 22, The voice recognition engine 22 operates in the voice recognition mode and transmits a control command matched with the wave file to the home network controller 23 so that the home network controller 23 transmits the control command to the corresponding home device D1, D2, ..., Dn.

즉, 상기 댁내 단말기(200)의 수신부(21)가 웨이브 파일을 수신시 음성인식엔진(22)이 가동되는데, 이때 상기 음성인식엔진(22)은 수신된 웨이브 파일이 비가청 주파수로 수신되는지를 감지하고 그 감지결과 웨이브 파일이 비가청 주파수인 경우, 상기 웨이브 파일이 비상상황 음성(예; 비상 알람, SOS, 긴급 음성멘트 등) 또는 댁내 장치(D1,D2,…,Dn)에 대한 음성 제어명령의 사운드 QR을 파싱(Parsing)하여 그 음성 제어명령을 분석한 후 그 결과를 홈 네트워크 컨트롤러(23)에 전달하게 된다.That is, when the receiving unit 21 of the home-use terminal 200 receives the wave file, the voice recognition engine 22 is activated. At this time, the voice recognition engine 22 determines whether the received wave file is received at the non- (E.g., emergency alarm, SOS, emergency voice message, etc.) or voice control for the premises devices D1, D2, ..., Dn when the wave file is detected at the non- Parses the sound QR of the command, analyzes the voice control command, and transmits the result to the home network controller 23.

그러면, 상기 홈 네트워크 컨트롤러(23)는 비상상황 음성으로 분석되면 비상관제센터에 비상상황을 전달하는 스마트 홈 네트워크 서비스를 진행하고, 댁내 장치(D1,D2,…,Dn)에 대한 음성 제어명령이면 스마트 홈 네트워크의 해당 댁내 장치(D1,D2,…,Dn)를 제어하게 되는 것이다.Then, when the home network controller 23 analyzes the emergency situation voice, the home network controller 23 proceeds to a smart home network service for delivering an emergency situation to the emergency control center, and if it is a voice control command for the premises devices D1, D2, ..., Dn D2, ..., Dn of the smart home network.

일예로, 수신부(11)에 의해 수신된 제어명령이 "가스밸브를 잠금" 이라는 음성 제어명령이고, 이를 음성인식엔진(22)에서 분석하여 홈 네트워크 컨트롤러(23)에 전달하는 경우, 상기 홈 네트워크 컨트롤러(23)는 댁내 장치인 가스밸브를 잠그는 스마트 홈 네트워크 서비스를 수행하게 되는 것이다.For example, when the control command received by the receiving unit 11 is a voice control command "lock the gas valve ", which is analyzed by the voice recognition engine 22 and transmitted to the home network controller 23, The controller 23 performs a smart home network service for locking the gas valve which is an in-house unit.

또한, 수신부(11)에 의해 수신된 제어명령이 "사람살려" 라는 비상상황의 음성이고, 이를 음성인식엔진(22)에서 분석하여 홈 네트워크 컨트롤러(23)에 전달하는 경우, 상기 홈 네트워크 컨트롤러(23)는 등록된 비상관제센터로 비상신고를 수행하는 스마트 홈 네트워크 서비스를 진행하게 되는 것이다.In the case where the control command received by the receiving unit 11 is a voice of an emergency situation called "a person is alive ", and the voice recognition engine 22 analyzes the voice and transmits it to the home network controller 23, 23 will proceed with a smart home network service that performs emergency notification to the registered emergency management center.

한편, 상기 비상관제센터로의 비상상황 전달 또는 댁내 장치(D1,D2,…,Dn)에 대한 제어 서비스가 이루어지지 않을 경우, 댁내 단말기(200)의 홈 네트워크 컨트롤러(23)는 비상상황 전달 또는 댁내 장치(D1,D2,…,Dn)에 대한 제어 서비스를 재시도(re-Try)를 반복하도록 하였다.The home network controller 23 of the home-use terminal 200 does not transmit the emergency situation to the emergency management center or the home-network controller 23 of the home- The control service for the in-house apparatuses D1, D2, ..., Dn is repeated.

다음의 제 6 단계로서, 상기 통신단말기(100)의 제어부(13)는 네트워크 드라이버(11)에서 브로드캐스트하는 네트워크 연결 상태를 모니터링하고 있으므로, 상기 네트워크의 연결로부터 메세지 수신이 이루어지는 경우, 상기 사운드모드 동작부(12)의 사운드 제어모드를 해제하면서 스마트 홈 네트워크 서비스를 정상적인 상태로 제어할 수 있게 되는 것이다.The control unit 13 of the communication terminal 100 monitors the network connection state broadcasted by the network driver 11 so that when a message is received from the connection of the network, The smart home network service can be controlled in a normal state while the sound control mode of the operation unit 12 is canceled.

다음의 제 7 단계로서, 상기와 같이 통신단말기(100)의 사운드모드 동작부(12)에 대한 사운드 제어모드가 해제될 때, 상기 댁내 단말기(200)의 홈 네트워크 컨트롤러(23)는 최초 스마트 홈 네트워크 서비스의 시작 시점을 알리는 신호(Coldstart)를 발생시킨 후 이를 상기 통신단말기(100)의 제어부(13)에 전송하고, 이에 상기 제어부(13)에서 서비스의 시작 시점을 알리는 신호를 수신하게 되는 경우, 상기 홈 네트워크 컨트롤러(23)는 사운드제어의 서버모드를 해제하면서, 상기 통신단말기(100)와 댁내 단말기(200)는 정상적인 네트워크 연결로 스마트 홈 네트워크 서비스를 진행할 수 있게 되는 것이다.When the sound control mode for the sound mode operation unit 12 of the communication terminal 100 is released as described above, the home network controller 23 of the home terminal 200 receives the first smart home (Coldstart) signaling the start time of the network service and transmits the signal to the control unit 13 of the communication terminal 100. When the control unit 13 receives a signal informing the starting point of the service , The home network controller 23 releases the server mode of sound control so that the communication terminal 100 and the home network 200 can perform the smart home network service through the normal network connection.

여기서, 상기 제 1 내지 제 7 단계로 이루어지는 스마트 홈 네트워크 서비스 제어 방법은 저장매체에 저장되는 컴퓨터 프로그램으로, 하드웨어와 결합되어 실행되며, 상기 하드웨어는 첨부된 도 1의 구성요소들을 포함하지만, 반드시 이러한 것에 한정하는 것은 아니다.Here, the smart home network service control method according to the first through seventh steps is a computer program stored in a storage medium, which is executed in combination with hardware, and the hardware includes the components of FIG. But is not limited thereto.

이상에서 본 발명의 스마트 홈 네트워크 서비스 제어 장치 및 그 제어방법에 대한 기술사상을 첨부도면과 함께 서술하였지만, 이는 본 발명의 가장 양호한 실시예를 예시적으로 설명한 것이지 본 발명을 한정하는 것은 아니다.While the present invention has been described with reference to the accompanying drawings, it is to be understood that the scope of the present invention is not limited to the disclosed embodiments.

따라서, 본 발명은 상술한 특정의 바람직한 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능한 것은 물론이고, 그와같은 변경은 청구범위 기재의 범위내에 있게 된다.It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit and scope of the invention as defined by the appended claims. It is to be understood that such changes and modifications are within the scope of the claims.

100; 통신단말기 11; 네트워크 드라이버
12; 사운드모드 동작부 13; 제어부
200; 댁내 단말기(IHD) 21; 수신부
22; 음성인식엔진 23; 홈 네트워크 컨트롤러100; Communication terminal 11; Network driver
12; A sound mode operation unit 13; The control unit
200; An in-home terminal (IHD) 21; Receiver
22; Speech recognition engine 23; Home network controller

Claims (12)

공중의 네트워크에 대한 연결성을 체크하는 네트워크 드라이버와, 상기 네트워크 드라이버의 체크결과에 따라 통신단말기와 댁내 단말기의 네트워크 연결이 이루어지지 않을 때 사운드 제어모드(Sound QR)로 동작하는 사운드모드 동작부 및, 상기 사운드모드 동작부를 제어하는 제어부를 포함하는 통신단말기; 를 구성하고,
상기 댁내 단말기에는 상기 사운드모드 동작부가 사운드 제어모드로 동작하여 사용자의 음성 제어명령을 전송시 이를 수신하는 수신부와, 상기 수신부로부터 수신된 사용자의 음성 제어명령을 분석하는 음성인식엔진과, 상기 댁내 장치는 물론 상기 통신단말기와의 네트워크 연결이 이루어지지 않을 때 사운드 제어(Sound QR)의 서버모드로 동작하여 상기 통신단말기에 의한 스마트 홈 네트워크 서비스가 정지없이 계속 이루어지도록 상기 수신부와 음성인식엔진을 제어하는 홈 네트워크 컨트롤러를 포함하여 구성하는 것을 특징으로 하는 스마트 홈 네트워크 서비스 제어장치.A sound mode operation unit operating in a sound control mode (Sound QR) when the network connection between the communication terminal and the home-use terminal is not established according to a check result of the network driver; A communication terminal for controlling the sound mode operation unit; Respectively,
A voice recognition engine for analyzing a voice control command of a user received from the receiver, and a voice recognition engine for receiving voice control commands from a voice recognition engine, And controls the receiver and the speech recognition engine to operate in a server mode of sound control (QR) when the network connection with the communication terminal is not established, so that the smart home network service by the communication terminal can be continued without stopping And a home network controller. 제 1 항에 있어서,
상기 제어부는 네트워크 드라이버를 통해 브로드캐스트하는 네트워크 상태를 모니터링하고, 통신단말기와 댁내 단말기의 네트워크 연결시 상기 사운드모드 동작부의 사운드 제어모드를 해제하는 제어프로그램을 탑재 구성하는 것을 특징으로 하는 스마트 홈 네트워크 서비스 제어장치.The method according to claim 1,
Wherein the control unit is installed with a control program for monitoring a network state broadcast through a network driver and releasing a sound control mode of the sound mode operation unit when a communication terminal and a home terminal are connected to each other through a network, Control device. 제 1 항에 있어서,
상기 홈 네트워크 컨트롤러는 최초 스마트 홈 네트워크 서비스의 시작 시점을 알리는 신호를 발생시킨 후 이를 통신단말기로 전송하되, 상기 통신단말기의 제어부는 최초 스마트 홈 네트워크 서비스의 시작 시점을 알리는 신호를 수신시, 사운드 제어(Sound QR)의 서버모드를 해제하는 제어프로그램을 탑재 구성하는 것을 특징으로 하는 스마트 홈 네트워크 서비스 제어장치.The method according to claim 1,
The home network controller generates a signal indicating the start time of the first smart home network service and transmits the signal to the communication terminal. Upon receiving a signal informing the start time of the first smart home network service, And a control program for releasing a server mode of the sound QR. 통신단말기와 댁내 단말기에 대한 네트워크 연결상태를 체크하는 제 1 단계;
상기 제 1 단계의 체크결과 네트워크 에러에 의해 통신단말기와 댁내 단말기의 네트워크 연결이 이루어지지 않으면, 통신단말기는 사운드 제어모드(Sound QR)를 시작하고, 댁내 단말기는 사운드 제어(Sound QR)의 서버모드를 시작하는 제 2 단계;
상기 제 2 단계로부터 통신단말기와 댁내 단말기가 각각 사운드 제어모드와 사운드제어의 서버모드를 시작시, 통신단말기 또는 댁내 단말기는 할당받은 아이피 게이트웨이로 댁내 단말기 또는 통신단말기에 핑(Ping)을 요청하는 제 3 단계;
상기 제 3 단계로부터 핑 요청이 성공하지 못하면, 통신단말기 또는 댁내 단말기는 네트워크 이상으로 판단하고, 상기 제 2 단계의 사운드 제어모드에 따라 스마트 홈 네트워크에 연결되는 댁내 장치에 대한 사용자의 음성 제어명령을 사운드 QR로 매칭한 웨이브 파일(WAV file)을 댁내 단말기로 전송하는 제 4 단계; 및,
상기 제 4 단계로부터 통신단말기에서 전송하는 사운드 QR로 매칭한 웨이브 파일을 댁내 단말기가 수신한 후 음성인식모드로 동작하여 상기 웨이브 파일에 매칭되는 제어명령을 수행하면서 스마트 홈 네트워크의 해당 댁내 장치를 제어하는 제 5 단계; 를 포함하여 진행하는 것을 특징으로 하는 스마트 홈 네트워크 서비스 제어방법.A first step of checking a network connection state of the communication terminal and the home terminal;
As a result of the check in the first step, if the network connection between the communication terminal and the home terminal is not established due to a network error, the communication terminal starts a sound control mode (Sound QR), and the home terminal performs a sound control A second step of starting the second step;
When the communication terminal and the home terminal start the sound control mode and the sound control server mode, respectively, from the second step, the communication terminal or the home terminal transmits the ping request to the home terminal or the communication terminal Step 3;
If the ping request is unsuccessful from the third step, it is determined that the communication terminal or the home terminal is abnormal in the network. In response to the sound control mode of the second step, the voice control command of the user to the home- A fourth step of transmitting a WAV file matched with the sound QR to the home terminal; And
After the home terminal receives the wave file matched with the sound QR transmitted from the communication terminal in the fourth step, the local terminal operates in the voice recognition mode and performs control commands matching the wave file to control the corresponding domestic device of the smart home network 5 < th > The method of claim 1, further comprising: 제 4 항에 있어서, 상기 제 2 단계에는,
상기 제 1 단계의 체크결과 통신단말기와 댁내 단말기가 스마트 홈 네트워크 서비스를 위한 네트워크 연결시, 통신단말기에서 전송하는 댁내 장치의 제어명령을 댁내 단말기가 정상적으로 수신하였는지를 판단하는 단계; 및,
상기 단계의 판단결과 댁내 단말기가 제어명령을 정상적으로 수신시, 스마트 홈 네트워크 서비스를 진행하고, 댁내 단말기가 제어명령을 정상적으로 수신하지 않으면 통신단말기가 사운드 제어모드(Sound QR)를 시작하는 단계; 를 더 포함하여 진행하는 것을 특징으로 하는 스마트 홈 네트워크 서비스 제어방법.5. The method of claim 4, wherein in the second step,
Determining whether the home terminal normally receives a control command of the home network device transmitted from the communication terminal when the communication terminal and the home network connect to the network for the smart home network service as a result of the check of the first step; And
If the home terminal normally receives the control command and proceeds to the smart home network service as a result of the determination, if the home terminal does not normally receive the control command, the communication terminal starts the sound control mode (sound QR); The method of claim 1, further comprising: 제 5 항에 있어서, 상기 제 2 단계에는,
네트워크 에러 발생시 통신단말기 또는 댁내 단말기는 사운드 QR 프로세스가 활성화되어 있는지를 확인하는 단계;
상기 단계의 사운드 QR 프로세스가 활성화되어 있지 않으면, 통신단말기는 사운드 QR 프로세스를 활성화시킨 후 스마트 홈 네트워크 서비스를 위한 사용자의 음성 제어명령을 전송하는 리스너 프로세스(Listener Process)를 시작하는 단계; 및,
상기 단계의 사운드 QR 프로세스가 활성화되어 있지 않으면, 댁내 단말기는 사운드 QR 프로세스를 활성화시킨 후 스마트 홈 네트워크 서비스를 위한 사용자의 음성 제어명령을 수신할 수 있는 파싱(Parsing)과 리스너(Listener)를 등록하는 단계; 를 더 포함하여 진행하는 것을 특징으로 하는 스마트 홈 네트워크 서비스 제어방법.6. The method of claim 5, wherein in the second step,
Confirming whether a sound QR process is activated in a communication terminal or a home terminal when a network error occurs;
If the sound QR process of the step is not activated, the communication terminal activates a sound QR process and then starts a listener process for transmitting a voice control command of a user for a smart home network service; And
If the sound QR process of the above step is not activated, the home terminal activates the sound QR process, and then registers parsing and listener capable of receiving the voice control command of the user for the smart home network service step; The method of claim 1, further comprising: 제 4 항에 있어서, 상기 제 4 단계에는,
상기 제 3 단계로부터 핑(Ping) 요청이 성공시, 공중의 네트워크 에러 또는 로컬 네트워크 에러인지를 확인하는 단계; 및,
상기 단계로부터 확인된 에러가 공중의 네트워크 에러이고 로컬 네트워크는 정상이면 댁내 단말기가 스마트 홈 네트워크의 댁내 장치를 리부팅(Rebooting)시키는 단계; 를 더 포함하여 진행하는 것을 특징으로 하는 스마트 홈 네트워크 서비스 제어방법.5. The method of claim 4, wherein in the fourth step,
Confirming whether the ping request is successful from the third step, whether it is a public network error or a local network error; And
If the error identified from the step is a public network error and the local network is normal, the home terminal reboots the home network device of the smart home network; The method of claim 1, further comprising: 제 4 항에 있어서, 상기 제 5 단계에는,
댁내 단말기가 웨이브 파일을 수신시 음성인식엔진을 가동하여 수신된 웨이브 파일이 비가청 주파수로 수신되는지를 감지하는 단계;
상기 단계로부터 수신되는 웨이브 파일이 비가청 주파수이면 그 웨이브 파일이 비상상황 음성 또는 댁내 장치에 대한 음성 제어명령인지를 분석하는 단계;
상기 단계의 분석결과 비상상황 음성이면 비상관제센터에 비상상황을 전달하는 스마트 홈 네트워크 서비스를 진행하고, 댁내 장치에 대한 음성 제어명령이면 스마트 홈 네트워크의 해당 댁내 장치를 제어하는 단계; 를 더 포함하여 진행하는 것을 특징으로 하는 스마트 홈 네트워크 서비스 제어방법.5. The method of claim 4, wherein in the fifth step,
The method comprising the steps of: detecting whether a received wave file is received at a non-audible frequency by activating a speech recognition engine upon receiving a wave file;
Analyzing whether the wave file received from the step is a non-audible frequency, whether the wave file is an emergency situation voice or a voice control command for the domestic device;
Controlling a smart home network service for delivering an emergency situation to an emergency management center in case of an emergency situation voice as a result of the analysis of the step and controlling the corresponding indoor device of the smart home network if the voice control command is for a home appliance; The method of claim 1, further comprising: 제 8 항에 있어서, 상기 제 5 단계에는,
상기 비상관제센터로의 비상상황 전달 또는 댁내 장치에 대한 제어 서비스가 이루어지지 않으면, 댁내 단말기가 비상상황 전달 또는 댁내 장치에 대한 제어 서비스를 재시도(re-Try)하는 단계; 를 더 포함하여 진행하는 것을 특징으로 하는 스마트 홈 네트워크 서비스 제어방법.9. The method according to claim 8, wherein in the fifth step,
If the emergency situation delivery to the emergency management center or control service for the premises equipment is not performed, retrying the emergency service delivery or the control service for the premises equipment by the home-use terminal; The method of claim 1, further comprising: 제 4 항에 있어서,
상기 통신단말기는 네트워크 드라이버에서 브로드캐스트하는 네트워크 연결 상태를 모니터링하여 연결 메세지를 수신시, 상기 제 2 단계로부터 시작되는 사운드 제어모드를 해제하는 제 6 단계; 를 더 포함하여 진행하는 것을 특징으로 하는 스마트 홈 네트워크 서비스 제어방법.5. The method of claim 4,
A sixth step of, when the communication terminal monitors the network connection status broadcasted by the network driver and releases the sound control mode starting from the second step upon receiving the connection message, The method of claim 1, further comprising: 제 4 항에 있어서,
상기 댁내 단말기는 최초 스마트 홈 네트워크 서비스의 시작 시점을 알리는 신호를 발생시킨 후 이를 통신단말기로 전송하고, 상기 통신단말기에서 상기 서비스의 시작 시점을 알리는 신호를 수신시, 상기 제 2 단계로부터 시작되는 사운드 제어(Sound QR)의 서버모드를 해제하는 제 7 단계; 를 더 포함하여 진행하는 것을 특징으로 하는 스마트 홈 네트워크 서비스 제어방법.5. The method of claim 4,
Wherein the home terminal generates a signal indicating the start time of the first smart home network service and transmits the signal to the communication terminal, and upon receiving a signal informing the starting time point of the service in the communication terminal, A seventh step of releasing the server mode of the control (Sound QR); The method of claim 1, further comprising: 하드웨어와 결합되어 청구항 제 4 항 내지 제 11 항 중 어느 한 항에 기재된 방법을 실행시키기 위하여 저장매체에 저장된 컴퓨터 프로그램.12. A computer program stored in a storage medium for execution in accordance with any one of claims 4 to 11 in combination with hardware.
KR1020140158810A 2014-11-14 2014-11-14 Smart home network service control device and the control method KR102242961B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020140158810A KR102242961B1 (en) 2014-11-14 2014-11-14 Smart home network service control device and the control method
CN201510772508.8A CN105608880B (en) 2014-11-14 2015-11-12 Intelligent home network service control device and its control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140158810A KR102242961B1 (en) 2014-11-14 2014-11-14 Smart home network service control device and the control method

Publications (2)

Publication Number Publication Date
KR20160057774A true KR20160057774A (en) 2016-05-24
KR102242961B1 KR102242961B1 (en) 2021-04-22

Family

ID=55988784

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140158810A KR102242961B1 (en) 2014-11-14 2014-11-14 Smart home network service control device and the control method

Country Status (2)

Country Link
KR (1) KR102242961B1 (en)
CN (1) CN105608880B (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106054644A (en) * 2016-06-30 2016-10-26 慧锐通智能科技股份有限公司 Intelligent home control method and system
CN106803813A (en) * 2017-03-02 2017-06-06 重庆邮电大学 A kind of recognition methods of intelligent home device control command field
CN108831453A (en) * 2018-05-02 2018-11-16 四川斐讯信息技术有限公司 Intelligent terminal based on the intelligent sound equipment method and system that compatibility controls entirely
CN109884937A (en) * 2019-01-10 2019-06-14 北京市燃气集团有限责任公司 For the indoor intelligent safety control device and method of non intelligent gas meter, flow meter
CN110501916A (en) * 2019-08-15 2019-11-26 珠海格力电器股份有限公司 A kind of intelligent electrical appliance control, equipment and storage medium
WO2020171398A1 (en) 2019-02-22 2020-08-27 Samsung Electronics Co., Ltd. Apparatus and method for controlling signal related to external device

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6161093A (en) * 1993-11-30 2000-12-12 Sony Corporation Information access system and recording medium
US20090021486A1 (en) * 2007-07-19 2009-01-22 Apple Inc. Dashboard Surfaces
KR101062089B1 (en) * 2003-01-10 2011-09-02 톰슨 라이센싱 Method for controlling a device in a network by a dedicated remote control and apparatus for performing the method

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100898339B1 (en) * 2007-10-05 2009-05-20 한국전자통신연구원 Autonomous fault processing system in home network environments and operation method thereof
CN101552995A (en) * 2009-05-15 2009-10-07 长沙中富通信技术有限公司 Mobile communication wireless network detection system
CN102448194A (en) * 2011-11-15 2012-05-09 邓超 Multimedia intelligent home network based on Zigbee
CN103474071A (en) * 2013-09-16 2013-12-25 重庆邮电大学 Embedded portable voice controller and intelligent housing system with voice recognition

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6161093A (en) * 1993-11-30 2000-12-12 Sony Corporation Information access system and recording medium
KR101062089B1 (en) * 2003-01-10 2011-09-02 톰슨 라이센싱 Method for controlling a device in a network by a dedicated remote control and apparatus for performing the method
US20090021486A1 (en) * 2007-07-19 2009-01-22 Apple Inc. Dashboard Surfaces
WO2009012330A2 (en) * 2007-07-19 2009-01-22 Apple Inc. Dashboard surfaces

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106054644A (en) * 2016-06-30 2016-10-26 慧锐通智能科技股份有限公司 Intelligent home control method and system
CN106803813A (en) * 2017-03-02 2017-06-06 重庆邮电大学 A kind of recognition methods of intelligent home device control command field
CN106803813B (en) * 2017-03-02 2020-05-26 重庆邮电大学 Method for identifying control command field of intelligent household equipment
CN108831453A (en) * 2018-05-02 2018-11-16 四川斐讯信息技术有限公司 Intelligent terminal based on the intelligent sound equipment method and system that compatibility controls entirely
CN109884937A (en) * 2019-01-10 2019-06-14 北京市燃气集团有限责任公司 For the indoor intelligent safety control device and method of non intelligent gas meter, flow meter
WO2020171398A1 (en) 2019-02-22 2020-08-27 Samsung Electronics Co., Ltd. Apparatus and method for controlling signal related to external device
US11172348B2 (en) 2019-02-22 2021-11-09 Samsung Electronics Co., Ltd. Apparatus and method for controlling signal related to external device
EP3878221A4 (en) * 2019-02-22 2022-03-30 Samsung Electronics Co., Ltd. Apparatus and method for controlling signal related to external device
CN110501916A (en) * 2019-08-15 2019-11-26 珠海格力电器股份有限公司 A kind of intelligent electrical appliance control, equipment and storage medium

Also Published As

Publication number Publication date
KR102242961B1 (en) 2021-04-22
CN105608880A (en) 2016-05-25
CN105608880B (en) 2019-03-08

Similar Documents

Publication Publication Date Title
KR20160057774A (en) Smart home network service control device and the control method
US10348732B2 (en) Anti-takeover systems and methods for network attached peripherals
US9721466B2 (en) Method of pairing a remote control
KR101113120B1 (en) Apparatus and method to control devices using a portable terminal in a device automation system
JP2017524167A (en) Method and apparatus for monitoring the state of a terminal compressor
US11310361B1 (en) Redundancy for back-end failure
US20080195757A1 (en) Method and apparatus for automatically recognizing a connection of a device to a building management system
US20140266679A1 (en) Security system installation
US20170192796A1 (en) Methods and systems for configuring a device using a firmware configuration block
CN108431709B (en) Maintenance method of electromechanical equipment
WO2016095286A1 (en) Method, device and terminal for controlling intelligent household devices
US11950325B2 (en) Gateway with backup power and communications system
US20040111501A1 (en) Network system connected with multiple master devices and method for operating the same
US10506204B2 (en) State detection and voice guided setup for a video doorbell unit
CN107787579B (en) System and method for data exchange with a laser or machine tool
CN110045705B (en) Intelligent home control method, device and system adopting heterogeneous wireless network
TWI592892B (en) Smart home system
US10726689B1 (en) Systems and methods for leveraging internet-of-things devices in security systems
EP3029649A1 (en) System and method for take-over protection for a security system
JPH04170895A (en) Remote controller for house hold appliances
US11367334B2 (en) Method and system for monitoring a base device by means of a mobile terminal
CN112141021A (en) Control method, device and system for vehicles in Internet of vehicles
JP2016158150A (en) Remote operation system
US20210312929A1 (en) System and method for digital assistant management
KR20210026128A (en) FIRE HYDRANT BASED IoT FIRE ALARM SYSTEM

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right