KR102464535B1 - IoT Home Gateway with in-house broadcasting and voice analysis function and method using the same - Google Patents
IoT Home Gateway with in-house broadcasting and voice analysis function and method using the same Download PDFInfo
- Publication number
- KR102464535B1 KR102464535B1 KR1020210154396A KR20210154396A KR102464535B1 KR 102464535 B1 KR102464535 B1 KR 102464535B1 KR 1020210154396 A KR1020210154396 A KR 1020210154396A KR 20210154396 A KR20210154396 A KR 20210154396A KR 102464535 B1 KR102464535 B1 KR 102464535B1
- Authority
- KR
- South Korea
- Prior art keywords
- voice
- unit
- broadcasting
- household
- home gateway
- Prior art date
Links
- 238000004458 analytical method Methods 0.000 title claims abstract description 27
- 238000000034 method Methods 0.000 title claims 7
- 238000004891 communication Methods 0.000 claims abstract description 65
- 230000006870 function Effects 0.000 claims abstract description 29
- 230000002457 bidirectional effect Effects 0.000 claims abstract 2
- 238000001514 detection method Methods 0.000 claims description 26
- 230000033001 locomotion Effects 0.000 claims description 25
- 238000006243 chemical reaction Methods 0.000 claims description 10
- 238000013473 artificial intelligence Methods 0.000 claims description 6
- 238000005259 measurement Methods 0.000 claims description 6
- 230000015572 biosynthetic process Effects 0.000 claims description 4
- 230000003287 optical effect Effects 0.000 claims description 4
- 238000003786 synthesis reaction Methods 0.000 claims description 4
- 230000005540 biological transmission Effects 0.000 abstract description 6
- 238000013480 data collection Methods 0.000 abstract description 2
- 230000000694 effects Effects 0.000 description 15
- 238000010586 diagram Methods 0.000 description 13
- 238000012790 confirmation Methods 0.000 description 8
- 238000003860 storage Methods 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 230000001965 increasing effect Effects 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 3
- 239000000428 dust Substances 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000010438 heat treatment Methods 0.000 description 2
- 230000031700 light absorption Effects 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000000737 periodic effect Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- QVFWZNCVPCJQOP-UHFFFAOYSA-N chloralodol Chemical compound CC(O)(C)CC(C)OC(O)C(Cl)(Cl)Cl QVFWZNCVPCJQOP-UHFFFAOYSA-N 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 238000012502 risk assessment Methods 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 238000010183 spectrum analysis Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
- H04L12/283—Processing of data at an internetworking point of a home automation network
- H04L12/2834—Switching of information between an external network and a home network
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01D—MEASURING NOT SPECIALLY ADAPTED FOR A SPECIFIC VARIABLE; ARRANGEMENTS FOR MEASURING TWO OR MORE VARIABLES NOT COVERED IN A SINGLE OTHER SUBCLASS; TARIFF METERING APPARATUS; MEASURING OR TESTING NOT OTHERWISE PROVIDED FOR
- G01D21/00—Measuring or testing not otherwise provided for
- G01D21/02—Measuring two or more variables by means not covered by a single other subclass
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01H—MEASUREMENT OF MECHANICAL VIBRATIONS OR ULTRASONIC, SONIC OR INFRASONIC WAVES
- G01H15/00—Measuring mechanical or acoustic impedance
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01H—MEASUREMENT OF MECHANICAL VIBRATIONS OR ULTRASONIC, SONIC OR INFRASONIC WAVES
- G01H9/00—Measuring mechanical vibrations or ultrasonic, sonic or infrasonic waves by using radiation-sensitive means, e.g. optical means
- G01H9/004—Measuring mechanical vibrations or ultrasonic, sonic or infrasonic waves by using radiation-sensitive means, e.g. optical means using fibre optic sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L13/00—Speech synthesis; Text to speech systems
- G10L13/08—Text analysis or generation of parameters for speech synthesis out of text, e.g. grapheme to phoneme translation, prosody generation or stress or intonation determination
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/78—Detection of presence or absence of voice signals
- G10L25/87—Detection of discrete points within a voice signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04H—BROADCAST COMMUNICATION
- H04H20/00—Arrangements for broadcast or for distribution combined with broadcast
- H04H20/53—Arrangements specially adapted for specific applications, e.g. for traffic information or for mobile receivers
- H04H20/61—Arrangements specially adapted for specific applications, e.g. for traffic information or for mobile receivers for local area broadcast, e.g. instore broadcast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
- H04L12/2823—Reporting information sensed by appliance or service execution status of appliance services in a home automation network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Automation & Control Theory (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Acoustics & Sound (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computing Systems (AREA)
- Social Psychology (AREA)
- Medical Informatics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Psychiatry (AREA)
- Alarm Systems (AREA)
Abstract
Description
본 발명은 세대 방송 및 음성 분석 기능이 있는 IoT Home Gateway에 관한 것으로서, 보다 상세하게는 청음 센서 등을 통한 방송 및 음성 분석과 근거리 유무선 통신을 통한 데이터 수집 및 네트워크 서버로 전송하는 통신 기능이 융합된 양방향 유무선 IoT Home Gateway 관한 것이다.The present invention relates to an IoT Home Gateway having a generation broadcasting and voice analysis function, and more specifically, a communication function that combines broadcasting and voice analysis through a hearing sensor, data collection through short-distance wired/wireless communication, and transmission to a network server. It is about a two-way wired and wireless IoT Home Gateway.
다양한 사물인터넷 서비스가 개발되면서 흥미로운 서비스를 가능하게 하는 커넥티드 디바이스(Connected Device)에 대한 관심이 높아지고 있다. 보통 IoT도어락, IoT 체중계 등 사물을 중심으로 말하곤 한다. As various IoT services are developed, interest in connected devices that enable interesting services is increasing. Usually, we talk about things such as IoT door locks and IoT scales.
하지만 사물 못지않게 IoT 서비스에서 중요한 요소가 IoT Home Gateway (홈 게이트웨이)이다.However, the IoT Home Gateway is an important element in IoT services as much as things.
IoT Home Gateway(홈 게이트웨이)는 연결된 디바이스의 데이터를 수집하고, 인터넷 영역으로 전달하며, 외부에서 각각의 디바이스와 연결할 수 있는 인터페이스(Interface) 역할을 하는 일종의 관문이라 할 수 있다.IoT Home Gateway is a kind of gateway that collects data of connected devices, delivers them to the Internet area, and serves as an interface that can connect with each device from the outside.
대부분의 IoT 사물들이 소형, 저전력의 특성을 갖고 있기 때문에 처리 능력(Processing Power)과 메모리 등에 한계가 있다. 하지만 IoT Home Gateway를 두게 됨으로써 사물들이 최소한 인터페이스 장치만으로 인터넷에 접근할 수 있는 것이다. Since most IoT objects have characteristics of small size and low power, there are limitations in processing power and memory. However, by having an IoT Home Gateway, things can access the Internet with at least an interface device.
또한 각각의 사물로부터 들어오는 주기적인 데이터를 분석하여 유의미한 데이터만을 전달함으로써 네트워크 대역폭의 부담을 낮추고 데이터의 실효성을 높이는 역할도 수행한다.In addition, it analyzes periodic data coming from each object and delivers only meaningful data, thereby lowering the burden of network bandwidth and increasing the effectiveness of data.
가장 잘 알려진 예로는 랜이나 무선 랜을 인터넷이나 다른 원거리 통신망에 연결하는 것이다. The best known example is connecting a LAN or wireless LAN to the Internet or other telecommunications networks.
이 경우 마을에 오래 동안 주거해온 연로하신 마을 주민분들의 관리 및 통신비 부담이 발생하여 원격접속 디바이스 구성에 난제가 발생하였다. In this case, elderly villagers who have lived in the village for a long time had to bear the burden of management and communication costs, which caused difficulties in configuring remote access devices.
또한 세대에 설치된 마을 방송시스템이 양방향 무선 통신이 아닌 단방향 방송 수신 전용으로 제작 구성되어 있어서 시군 관내에서 재난 및 공지 사항 방송 시 결과를 확인할 수 없었다. In addition, since the village broadcasting system installed in the household was produced and composed exclusively for receiving one-way broadcasts rather than two-way wireless communication, it was not possible to check the results of disasters and announcements broadcast within city and county jurisdictions.
또한 최근 무선 통신을 이용하여 마을 공지 사항의 안내 방송을 실시하는 시스템이 적용되고 있다. 마을회관에 무선 설비를 두고, 각 세대 내에는 무선 방송 수신 설비를 두어 가정 내에서 명료하게 청취할 수 있도록 하고 있다. Also, recently, a system for broadcasting announcements of village announcements using wireless communication has been applied. Wireless equipment is installed in the town hall, and wireless broadcast reception equipment is installed in each household so that you can listen clearly in your home.
하지만 통신 간섭에 의해 방송 내용이 전달되지 않는 문제가 발생 하고, 공지 사항 안내 방송 시스템과 같이 사용 가능한 주파수가 적거나, 좁은 지역에 사용자가 많은 경우 또한 사용 시간대가 유사한 경우에는 댁내 방송의 수신 여부의 파악이 더욱 어려워지는 문제가 있다. However, there is a problem in that broadcast content is not delivered due to communication interference, and when there are few available frequencies such as a notice announcement broadcasting system, there are many users in a small area, or when the usage time zone is similar, the reception of in-house broadcasts There is a problem that is more difficult to understand.
본 발명은 상기와 같은 문제점을 해결하기 위해 이루어진 것으로서, 기존 설치된 방송 단말의 방송 결과를 유무선 센서를 통해 분석하는 기능과 음성 센서 및 IoT 센서를 통해 수집된 데이터를 양방향 무선 통신 시스템을 통해 네트워크 서버로 전송하는 원거리 통신 기능으로 구성된다.The present invention has been made to solve the above problems, and the function of analyzing the broadcasting results of the existing installed broadcasting terminals through wired and wireless sensors and the data collected through the voice sensors and IoT sensors are transferred to the network server through the two-way wireless communication system. It consists of a telecommunication function that transmits
상기 과제를 해결하기 위하여 본 발명은 세대 내에 설치된 무선 방송 수신 설비의 방송 유무를 아날로그 신호로 검출하는 청음센서부와, 방송 결과를 디지털 신호로 수신하는 디지털 입력 신호부와 또 이를 통신으로 수신할 수 있는 시리얼 통신부와 세대 내 음성을 검출하는 음성 변환부와 세대 내 움직임을 검출하는 동작검출부와 세대 내 환경을 감지하는 환경감지부와 세대 내 유선 통신을 위한 제1통신부와 세대 내 무선 통신을 위한 제2통신부와 마을 회관 방송 주장치와 통신하기 위한 제3통신부와 외부 네트워크와 통신하기 위한 제4통신부와 정전 시 시스템이 정상 동작하기 위한 배터리 충전부를 제공한다.In order to solve the above problems, the present invention provides a hearing sensor unit for detecting the presence or absence of broadcasting by an analog signal of a wireless broadcast reception facility installed in a household, a digital input signal unit for receiving a broadcast result as a digital signal, and a communication receiver capable of receiving it A serial communication unit that has a serial communication unit, a voice conversion unit that detects voice within a household, a motion detection unit that detects movement within a household, an environment sensing unit that detects the environment within the household, a first communication unit for wired communication within the household, and a second communication unit for wireless communication within the household A third communication unit for communicating with the second communication unit and the village hall broadcasting main device, a fourth communication unit for communicating with an external network, and a battery charging unit for normal operation of the system in case of a power failure are provided.
본 발명은 세대 방송 및 음성 분석 기능이 있는 IoT Home Gateway 시스템에 있어서, 세대 내에 설치된 마을 양방향 유무선 방송 장치의 방송 유무를 검출하는 청음센서부; 상기 청음센서부의 신호를 디지털 신호로 수신하는 디지털 입력 신호부; 상기 방송 결과를 통신으로 수신할 수 있는 시리얼 통신부; 세대 내 음성을 검출하는 음성 변환부와 세대 내 움직임을 검출하는 동작검출부; 세대 내 환경을 감지하는 환경감지부; 상기 세대 내 유선 통신을 위한 제1통신부; 세대 내 무선 통신을 위한 제2통신부; 마을 회관 방송 주장치와 통신하기 위한 제3통신부; 외부 네트워크와 통신하기 위한 제4통신부; 정전 시 시스템이 정상 동작하기 위한 배터리 충전부;를 포함하는 세대 방송 및 음성 분석 기능이 있다.The present invention provides an IoT Home Gateway system having a household broadcasting and voice analysis function, comprising: a hearing sensor unit for detecting the presence or absence of broadcasting of a village interactive wired/wireless broadcasting device installed in a household; a digital input signal unit for receiving the signal of the hearing sensor unit as a digital signal; a serial communication unit capable of receiving the broadcast result through communication; a voice conversion unit for detecting voice within a household and a motion detection unit for detecting movement within a household; an environment sensing unit that detects the environment within the household; a first communication unit for wire communication within the household; a second communication unit for intra-generational wireless communication; a third communication unit for communicating with the town hall broadcasting main device; a fourth communication unit for communicating with an external network; There is a generation broadcasting and voice analysis function including; a battery charging unit for normal operation of the system in case of a power failure.
본 발명에 따른 연결된 디바이스의 데이터를 수집하고, 인터넷 영역으로 전달하며, 외부에서 각각의 디바이스와 연결할 수 있는 인터페이스(Interface) 역할을 하는 IoT Home Gateway(홈 게이트웨이);를 포함한다.IoT Home Gateway (home gateway) that collects the data of the connected device according to the present invention, transmits it to the Internet area, and serves as an interface that can be connected to each device from the outside; includes.
상기 청음센서부는 세대 내에 설치된 무선 방송 수신 설비의 방송 유무를 전압 및 전류가 시간에 따라 연속적으로 변화하는 신호로 검출한다.The hearing sensor unit detects the presence or absence of a broadcast of a wireless broadcast reception facility installed in a household as a signal in which voltage and current continuously change with time.
상기 청음센서부는 실내 소음을 측정하기 위한 마이크를 포함하고, 실시간으로 측정값의 누적에 의해 측정값 패턴을 형성하고, 유효 범위 주파수 중에서 진폭이 큰 순서로 상위 설정 갯수의 주파수를 선별하여 판별 대상 주파수로 선정한다.The hearing sensor unit includes a microphone for measuring indoor noise, forms a measurement value pattern by accumulating measurement values in real time, and selects a high-set number of frequencies in the order of amplitude from among the effective range frequencies to determine the target frequency to be selected as
이는 측정 지점에서의 소리는 생활 소음, 누수음, 대형 트럭이 지나가거나 공사장 장비의 소음 등이 섞여있는데, 이 중 방송 음성과 주파수 범위가 다른 소음은 분류 모듈에서 노이즈로서 제외되고, 방송 음성과 주파수 범위가 다소 유사한 생활 소음 등은 진폭이 비교적 작기 때문에 가중치를 적용하여 제외시킨다.This means that the sound at the measurement point is a mixture of living noise, water leaks, heavy trucks passing, and noise from construction equipment. Living noises with similar ranges are excluded by applying weights because their amplitudes are relatively small.
본 발명에 따른 판별 대상 주파수를 입력 변수로 설정하고, 입력 변수마다 가중치를 적용하여 가중평균값을 계산한다. 이를 위하여 세대 방송 및 음성 분석 기능이 있는 IoT Home Gateway 시스템에는 계산 모듈이 구비되며, 계산 모듈은, 입력 변수인 판별 대상 주파수에 추출 모듈로부터 추출된 가중치를 적용하여 가중평균값을 계산한다. A frequency to be discriminated according to the present invention is set as an input variable, and a weighted average value is calculated by applying a weight to each input variable. To this end, the IoT Home Gateway system with the generation broadcasting and voice analysis function is provided with a calculation module, and the calculation module calculates a weighted average value by applying the weight extracted from the extraction module to the frequency to be determined as an input variable.
본 발명에 따른 청음센서에서 상기 증폭부를 거쳐 입력되는 신호를 시간의 흐름에 따른 스펙트럼 분석을 통해 진폭 레벨이 설정된 문턱치보다 낮은 구간을 잡음 신호 구간으로 결정하고, 상기 문턱치 보다 높은 구 간을 소음 신호 구간으로 결정할 수도 있다.In the hearing sensor according to the present invention, a section in which the amplitude level is lower than a set threshold is determined as a noise signal section through a spectrum analysis of a signal input through the amplification unit over time, and a section higher than the threshold is a noise signal section may be decided as
본 발명에 따른 음성 변환부는 TTS 합성부로 TTS 합성을 하는 데 있어, 특정 음성 기부자로부터 수신된 발화 음성에 대해 음성인식을 수행하는 음성 AI(Aritificial Intelligence) 장치로부터 상발화 음성 정보를 수신하고, 그에 대응하는 가상화자의 발화 음성 정보를 상기 음성 AI 장치를 통해 음성합성(TTS: Text to Speech)하여 송신하고, 발화 음성 정보와 관련된 발화 이력의 로그를 저장하고 분석한다.The speech conversion unit according to the present invention receives the uttered speech information from a speech AI (Artificial Intelligence) device that performs speech recognition on the speech speech received from a specific speech donor in TTS synthesis with the TTS synthesis section, and responds accordingly The virtualizer's speech information is transmitted by text-to-speech (TTS) through the speech AI device, and a log of speech history related to speech information is stored and analyzed.
본 발명은 청음센서부가 세대 내에 설치된 무선 방송 수신 설비의 방송 유무를 검출하는 단계; 디지털 입력 신호부가 방송 결과를 디지털 신호로 수신하는 단계; 시리얼 통신부가 상기 방송 결과를 통신으로 수신할 수 있는 단계;를 포함한다.The present invention comprises the steps of: detecting the presence or absence of a broadcast of a wireless broadcast reception facility installed in a household by a hearing sensor unit; receiving, by a digital input signal unit, a broadcast result as a digital signal; and receiving, by a serial communication unit, the broadcast result through communication.
음성 변환부가 세대 내 음성을 검출하는 단계와 동작검출부가 세대 내 움직임을 검출하는 단계;를 포함하되, 환경감지부가 세대 내 가스 센서, 진동 센서, 카메라 및 청음 센서를 통해 환경을 감지하는 단계;를 포함하되, 상기 진동 센서로는 광케이블 센서가 이용되고, 청음 센서로서는 사운드 감지 센서를 이용하되, 상기 카메라를 통해 침입자를 감지하고, 진동 센서와 청음 센서로 이동 경로를 추적한다.A step of detecting a voice in the household by a voice conversion unit and a step in which a motion detection unit detects a movement in the household; including, but by an environment sensing unit detecting the environment through a gas sensor, a vibration sensor, a camera and a hearing sensor in the household; However, an optical cable sensor is used as the vibration sensor, a sound sensor is used as the hearing sensor, an intruder is detected through the camera, and a movement path is tracked by the vibration sensor and the hearing sensor.
본 명세서에서 개시된 기술은 다음의 효과를 가질 수 있다. 다만, 특정 실시예가 다음의 효과를 전부 포함하여야 한다거나 다음의 효과만을 포함하여야 한다는 의미는 아니므로, 개시된 기술의 권리범위는 이에 의하여 제한되는 것으로 이해 되어서는 아니 될 것이다. The technology disclosed herein may have the following effects. However, this does not mean that a specific embodiment should include all of the following effects or only the following effects, so the scope of the disclosed technology should not be construed as being limited thereby.
상기와 같이 이루어지는 본 발명은 세대 내에 설치된 무선 방송 수신 설비의 방송 유무를 아날로그 신호로 검출하여 디지털로 전환하기 전 대용량 실시간 데이터에 따라 (스피커의 이상으로 소신호가 검출되더라도 이를 검출할 수 있는) 정밀하게 방송 유무를 검출할 수 있다.The present invention as described above detects the presence or absence of broadcasting in a wireless broadcast reception facility installed in a household as an analog signal and accurately detects it (even if a small signal is detected due to a speaker abnormality) according to large-capacity real-time data before conversion to digital. The presence or absence of broadcasting can be detected.
도 1은 본 발명의 일실시예에 따른 세대 방송 및 음성 분석 기능이 있는 IoT Home Gateway 시스템의 구성을 보여주는 도면이다.
도 2는 본 발명의 일실시예에 따른 세대 방송 및 음성 분석 기능이 있는 IoT Home Gateway 시스템의 구성을 세부적으로 보여주는 도면이다.
도 3은 본 발명의 일실시예에 따른 마을 양방향 유무선 방송 장치의 외관을 보여주는 도면이다.
도 4는 본 발명의 다른 실시예에 따른 마을 양방향 유무선 방송 장치의 세부적 구성을 보여주는 도면이다.
도 5는 본 발명의 다른 실시예에 따른 홈게이트웨이를 이용한 가전을 커넥트하여 관리하는 구성을 보여주는 도면이다.
도 6은 본 발명의 다른 실시예에 따른 세대 방송 및 음성 분석 기능이 있는 IoT Home Gateway 시스템의 대쉬 보드를 보여주는 도면이다.
도 7은 본 발명의 또 다른 실시예에 따른 세대 방송 및 음성 분석 기능이 있는 IoT Home Gateway 시스템의 대쉬 보드를 보여주는 도면이다.
1 is a diagram showing the configuration of an IoT Home Gateway system having a generation broadcasting and voice analysis function according to an embodiment of the present invention.
2 is a diagram showing in detail the configuration of an IoT Home Gateway system having a generation broadcasting and voice analysis function according to an embodiment of the present invention.
3 is a view showing the exterior of a village two-way wired/wireless broadcasting apparatus according to an embodiment of the present invention.
4 is a diagram showing a detailed configuration of a village interactive wired/wireless broadcasting apparatus according to another embodiment of the present invention.
5 is a diagram showing a configuration for connecting and managing home appliances using a home gateway according to another embodiment of the present invention.
6 is a diagram showing a dashboard of an IoT Home Gateway system having a generation broadcasting and voice analysis function according to another embodiment of the present invention.
7 is a diagram showing a dashboard of an IoT Home Gateway system having a generation broadcasting and voice analysis function according to another embodiment of the present invention.
본 발명을 충분히 이해하기 위해서 본 발명의 바람직한 실시예를 첨부 도면을 참조하여 설명한다. 본 발명의 실시예는 여러 가지 형태로 변형될 수 있으며, 본 발명의 범위가 아래에서 상세히 설명하는 실시예로 한정되는 것으로 해석되어서는 안 된다. 본 실시예는 당업계에서 평균적인 지식을 가진 자에게 본 발명을 보다 완전하게 설명하기 위하여 제공되는 것이다. 따라서 도면에서의 요소의 형상 등은 보다 명확한 설명을 강조하기 위해서 과장되어 표현될 수 있다. 각 도면에서 동일한 부재는 동일한 참조부호로 도시한 경우가 있음을 유의하여야 한다. 또한, 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 공지 기능 및 구성에 대한 상세한 기술은 생략된다.In order to fully understand the present invention, preferred embodiments of the present invention will be described with reference to the accompanying drawings. Embodiments of the present invention may be modified in various forms, and the scope of the present invention should not be construed as being limited to the embodiments described in detail below. This example is provided to more completely explain the present invention to those of ordinary skill in the art. Accordingly, the shape of elements in the drawings may be exaggerated to emphasize a clearer description. It should be noted that the same members in each drawing are sometimes shown with the same reference numerals. In addition, detailed descriptions of well-known functions and configurations determined to unnecessarily obscure the gist of the present invention will be omitted.
도 1은 본 발명의 일실시예에 따른 세대 방송 및 음성 분석 기능이 있는 IoT Home Gateway 시스템의 구성을 보여주는 도면이다.1 is a diagram showing the configuration of an IoT Home Gateway system having a generation broadcasting and voice analysis function according to an embodiment of the present invention.
도 2는 본 발명의 일실시예에 따른 세대 방송 및 음성 분석 기능이 있는 IoT Home Gateway 시스템의 구성을 세부적으로 보여주는 도면이다.2 is a diagram showing in detail the configuration of an IoT Home Gateway system having a generation broadcasting and voice analysis function according to an embodiment of the present invention.
본 발명에 따른 게이트웨이 기능이 있는 마을 양방향 유무선 방송시스템은 세대 양방향 유무선 방송 시스템(10)과 외부 네트워크(55)를 통해 통신할 수 있는 마을 회관 방송 주장치(50)와 이들을 각각 연결하는 통신부(30) 등을 포함한다.The village two-way wired/wireless broadcasting system with a gateway function according to the present invention includes a village hall broadcasting
세대 양방향 유무선 방송 시스템(10)은 청음센서부(11), 디지털 입력 신호부(12), 통신부(13), 음성 변환부(14), 동작검출부(15) 환경감지부(16) 등으로 구성된다.The generation two-way wired/
구체적으로 본 발명은 세대 내에 설치된 무선 방송 수신 설비의 방송 유무를 아날로그 신호로 검출하는 청음센서부(11)와, 방송 결과를 디지털 신호로 수신하는 디지털 입력 신호부(12)와 또 이를 통신으로 수신할 수 있는 시리얼 통신부(13)와 세대 내 음성을 검출하는 음성 변환부(14)와 세대 내 움직임을 검출하는 동작검출부(15)와 세대 내 환경을 감지하는 환경감지부(16)와 세대 내 유선 통신을 위한 제1통신부와 세대 내 무선 통신을 위한 제2통신부와 마을 회관 방송 주장치와 통신하기 위한 제3통신부와 외부 네트워크와 통신하기 위한 제4통신부와 정전 시 시스템이 정상 동작하기 위한 배터리 충전부를 제공한다.Specifically, the present invention relates to a
도 3은 본 발명의 일실시예에 따른 마을 양방향 유무선 방송 장치의 외관을 보여주는 도면이다.3 is a view showing the exterior of a village two-way wired/wireless broadcasting apparatus according to an embodiment of the present invention.
도 4는 본 발명의 다른 실시예에 따른 마을 양방향 유무선 방송 장치의 세부적 구성을 보여주는 도면이다.4 is a diagram showing a detailed configuration of a village interactive wired/wireless broadcasting apparatus according to another embodiment of the present invention.
본 발명은 마을 주민 거주지의 세대 양방향 유무선 방송 시스템(10)에 통신을 수행하여 연결 정보를 각종 센서를 포함하는 세대 방송 및 음성 분석 기능이 있는 IoT Home Gateway 시스템의 디스플레이부(115)를 이용하여 디스플레이 장치(110)에 표시한다.The present invention communicates with the household two-way wired/
일실시예로서 본 발명은 세대 내에 설치된 무선 방송 수신 설비의 방송 유무를 아날로그 신호로 검출하는 청음센서부의 센싱 정보를 수신하면 저장부에 저장하며, 상기 마을 회관 방송 주장치(50)로부터 전달된 송출된 문장을 스피커를 통해 마을 주민이 일정 공간 내에서 청취할 수 있도록 음성 변환하거나 세대 내 음성을 검출하는 음성 변환부;를 포함한다.As an embodiment of the present invention, when the sensing information of the hearing sensor unit that detects the presence or absence of broadcasting of a wireless broadcast reception facility installed in a household as an analog signal is received, it is stored in the storage unit, and the transmitted data transmitted from the village hall broadcasting main unit (50) is stored in the storage unit. and a voice conversion unit that converts a sentence to a voice through a speaker so that villagers can hear it in a certain space or detects a voice within a household.
구체적으로 살펴보면, 수신 피드백 신호를 음성으로 출력하는 수시 피드백 장치, 수신 피드백 장치로부터 방송된 음성 정보를 피드백 받아 정확한 음성으로 방송되었는지 음성으로 확인하는 수신 확인 모듈의 확인 신호 생성부는 댁내 방송이 실시되는 순간 활성화되고, 전송되는 방송 음성 정보와 구분 신호에 대응하는 피드백 확인 신호를 생성 하고, 이를 통신부 중 하나를 통해 수신 피드백 장치에 전송한다.More specifically, an occasional feedback device for outputting a received feedback signal as voice, and a confirmation signal generator of a reception confirmation module that receives feedback of voice information broadcast from the reception feedback device and confirms with a voice whether the broadcast is performed in an accurate voice, the moment the in-house broadcast is performed A feedback confirmation signal corresponding to the activated and transmitted broadcast voice information and a classification signal is generated, and the feedback confirmation signal is transmitted to the receiving feedback device through one of the communication units.
댁내 방송은 안테나를 통해 신호가 수신되면 변조된 신호를 변조된 반송파로부터 정보 내용을 복구하기 위해 사용되는 전자 회로를 통하여 음성으로 변환한다. In-house broadcasting, when a signal is received through an antenna, the modulated signal is converted into voice through an electronic circuit used to recover information content from the modulated carrier wave.
변환된 음성을 음성필터를 이용하여 명료도를 보정하며, 보정된 음성신호를 증폭기를 거쳐 스피커로 출력한다. The converted voice is corrected for intelligibility using a voice filter, and the corrected voice signal is output to the speaker through an amplifier.
녹음 출력부는 주민이 추후에 녹음된 내용을 확인하여 청취할 수 있도록 한다.The recording output unit allows residents to check and listen to the recorded content later.
녹음 확인은 녹음방송청취 버튼을 선택 시 제어부는 녹음 파일 유무를 확인하고, 메모리(SD) 카드의 특정 폴더에 저장된 파일(음원데이터)을 열어 코덱(DAC)을 통하여 아날로그 신호로 변환, 증폭기를 통하여 스피커로 출력된다. To check the recording, when the Listen Recording button is selected, the control unit checks the presence of a recorded file, opens the file (sound source data) stored in a specific folder of the memory (SD) card, converts it to an analog signal through the codec (DAC), and uses the amplifier output to the speaker.
시계를 포함하여 구성하고 있는 경우, 녹음방송청취 버튼을 선택시 시계 표시 부에 방송녹음시간 정보를 표출하여 직관적으로 방송 시간을 확인할 수 있다. In the case of a configuration including a clock, when the broadcast listening button is selected, the broadcast time information is displayed on the clock display, so that the broadcast time can be checked intuitively.
녹음 방송을 스케줄 기능을 통해 지정 시간 동안 동작될 수 있다. 또한, 녹음 방송은 앞서 무선 방송 송출 장치 의 무선 방송 정보 신호 중에서 음성 정보를 제외한 정보만을 무선 수신 출력 장치로 제공할 수 있게 된다. 이 때, 최소로 전송되는 정보에는 방송 번호와 방송 시간 정보만이 제공될 수 있다. It can be operated for a specified time through the recording broadcast schedule function. Also, in the recorded broadcast, only information excluding voice information from among the wireless broadcast information signals of the wireless broadcast transmitting device can be provided to the wireless reception and output device. In this case, only the broadcast number and broadcast time information may be provided as the minimum transmitted information.
상기 댁내 방송의 녹음 저장은 안테나를 통하여 수신된 신호를 복조기를 통하여 음성신호로 변환되면 변환된 음성을 음성필터를 이용하여 명료도를 보정하게 되고 보정된 음성포함 오디오 신호를 코덱을 통하여 디지털 신호로 변 환하고, 이렇게 생성된 PCM 코드를 음원 파일형태(WAVE)로 메모리카드의 지정된 위치에 지정된 이름으로 순차적으로 기록 저장할 수 있다.In the recording and storage of the in-house broadcast, when a signal received through an antenna is converted into a voice signal through a demodulator, the converted voice is corrected for intelligibility using a voice filter, and the corrected voice-containing audio signal is converted into a digital signal through a codec. The PCM code generated in this way can be recorded and stored sequentially in the designated location of the memory card in the form of a sound source file (WAVE) with a designated name.
일실시예로 가스 센서(131), 진동 센서(132), 카메라(133), 청음 센서(134) 등을 포함하는 센서부(130)는 움직임 센서를 구비하여 방송이 출력될 때의 움직임을 감지하여 주민이 방송을 청취하는지 여부를 판단할 수 있다. 즉, 센서부(130)를 통해 방송 시점에 사람이 있을 경우 이를 자동 인지하여 알림을 선택적 으로 표출할 수 있고, 사용자가 알림 효과를 해제하여 수동으로 알림 운영할 수도 있다. In one embodiment, the
도 5는 본 발명의 다른 실시예에 따른 홈게이트웨이를 이용한 가전을 커넥트하여 관리하는 구성을 보여주는 도면이다.5 is a diagram showing a configuration for connecting and managing home appliances using a home gateway according to another embodiment of the present invention.
본 발명의 다른 실시예에 따른 게이트웨이(30) 기능이 있는 마을 양방향 유무선 방송시스템을 통해 계량기, 난방, 조명, 온습도센서, 미세먼지센서, 문열림감지, 가스, 에어컨, 냉장고, 헬스밴드, 출입, 전기차 충전을 하는 것을 보여주는 도면이다.Meter, heating, lighting, temperature and humidity sensor, fine dust sensor, door open detection, gas, air conditioner, refrigerator, health band, access, A diagram showing the charging of an electric vehicle.
예를 들어 PLC 모듈, 근거리무선모듈, 블루투스모듈, WIFI 모듈, 지그비모듈, 로라(LoRa)모듈, IR모듈 중 하나 이상을 포함하는 활동량 감지 센서는 마을 주민의 동작 감시지 센싱 정보를 근거리 통신을 통해 게이트웨이로 송신한다. For example, an activity detection sensor including at least one of a PLC module, a short-range wireless module, a Bluetooth module, a WIFI module, a Zigbee module, a LoRa module, and an IR module transmits the sensing information of a villager's motion monitoring site through short-distance communication. send to the gateway.
이 때 마을 주민 거주지에 부착된 활동량 감지 센서는, 인체의 움직임 동작을 감지하는 센서로서, 동작 버튼, 동작 감지시 감지 확인을 알리는 LED가 구비된다.At this time, the activity sensor attached to the village resident's residence is a sensor that detects the movement of the human body, and is provided with an operation button and an LED for notifying the detection confirmation when the movement is detected.
이 외에도 난방, 조명, 온습도센서, 미세먼지센서, 문열림감지, 가스, 에어컨, 냉장고 등의 동작 감지시 마을 주민의 스마트 단말(60) 또는 관청 또는 소방 센터 또는 관리 센터(50) 등에 해당 정보를 송신할 수 있다.In addition, when the motion of heating, lighting, temperature and humidity sensor, fine dust sensor, door open detection, gas, air conditioner, refrigerator, etc. is detected, the information is sent to the
활동량 감지 센서로는 초음파 센서, 능동형 적외선 센서, 광센서 등이 있으며, 당업자에 따라 변경 실시 될 수 있다. 또한 활동량 감지 센서는 거주 공간마다 설치될 수 있다. The activity detection sensor includes an ultrasonic sensor, an active infrared sensor, an optical sensor, and the like, and may be changed according to those skilled in the art. In addition, the activity detection sensor may be installed in each living space.
상기 광센서는 광조사부로부터 순차적으로 멀어지도록 배치된 복수의 광센서를 포함하는 광검출부 및 측정된 반사신호세기를 이용하여 반사도(Reflectance)를 산출하고, 산출된 반사도를 이용하여 광흡수도를 산출하고, 산출된 광흡수도를 이용하여 활동량을 감지할 수 있다.The photosensor calculates reflectance using a photodetector including a plurality of photosensors disposed sequentially away from the light irradiator and the measured reflected signal intensity, and calculates light absorption using the calculated reflectance. and the amount of activity can be detected using the calculated light absorption.
상기 활동량 감지 센서는 MQTT 통신망을 통해 감시 정보를 기반으로 가정의 IoT 정보를 실시간으로 수집하여 저장하고, 실시간 위험 분석을 위하여 정보를 전송하며, 통합정보를 시계열로 데이터베이스화하여 저장하고, 빅데이터 분석을 통하여 시계열추세 분석에 따른 이상치 예측, 기계 학습 알고리즘 분석에 따른 위험 예측을 위한 예측 정보를 저장하며, 수집되는 실시간 정보를 기반으로 기기의 고장 유무 및 다양한 검지 정보를 통합하여 복합적 원인에 따른 위험 수준을 지수화하여 위험 정보를 저장한다.The activity detection sensor collects and stores household IoT information in real time based on monitoring information through MQTT communication network, transmits information for real-time risk analysis, stores integrated information as a time series database, and analyzes big data Prediction information for outlier prediction according to time series trend analysis and risk prediction according to machine learning algorithm analysis is stored through index and store risk information.
예를 들어, 침실, 주방, 거실, 욕실 등에 초음파 센서, 능동형 적외선 센서, 광센서 중 한 개 이상이 설치될 수 있으며, 공간의 크기에 따라 다수개 설치가 가능하다. For example, at least one of an ultrasonic sensor, an active infrared sensor, and an optical sensor may be installed in a bedroom, a kitchen, a living room, a bathroom, and a plurality of installations may be made according to the size of the space.
상기 활동량 감지 센서(101)는 게이트웨이로부터 주기 변경 메시지가 수신되면 상기 정상 동작 확인 정보를 송신하는 송신 주기를 변경한다.When a cycle change message is received from the gateway, the activity detection sensor 101 changes the transmission cycle for transmitting the normal operation confirmation information.
또한 화재 감지 센서는, 주위 화재를 이온화식으로 감지하기 위한 센서로서, 동작 버튼이 구비되고 또한 전원 공급을 표시하는 LED, 경고 부저가 구비된다. In addition, the fire detection sensor is a sensor for ionically detecting a surrounding fire, and is provided with an operation button, an LED indicating power supply, and a warning buzzer.
화재 감지 센서(102)는, 근거리 통신 모듈이 구비되어 화재 감지시 센싱 정보를 근거리 통신을 통해 게이트웨이(30)로 송신한다. The fire detection sensor 102 is provided with a short-range communication module and transmits sensing information to the
또한, 화재 감지 센서(102)는 화재 미 감지시 90분 단위로 정상 동작 확인 정보를 근거리 통신을 통해 게이트웨이(30)로 송신한다. In addition, the fire detection sensor 102 transmits normal operation confirmation information to the
외출 감지 센서(103)는 마을 주민의 외출/귀가 상태 정보를 게이트웨이(30)로 전송하기 위한 센서로서, 게이트웨이(30)와 근거리 통신을 수행하는 근거리 통신 모듈을 구비한다.The outing detection sensor 103 is a sensor for transmitting the outing/homecoming state information of the villagers to the
이 외에도 외출 버튼 장치는 센서정보처리모듈(104)에 연결되어, 마을 주민의 외출/귀가 상태 정보를 게이트웨이(30)로 전송하기 위한 버튼 장치로서, 게이트웨이(30)와 근거리 통신을 수행하는 근거리 통신 모듈을 구비한다.In addition to this, the out button device is connected to the sensor information processing module 104, and is a button device for transmitting out/home state information of villagers to the
마을 양방향 유무선 방송 장치(100)에 부착되는 외출 버튼 장치는, 외출/복귀 버튼이 최초로 눌러지면 근거리 통신 모듈을 통해 게이트웨이(30)로 외출 상태 이벤트 정보를 전송하고, 이후 외출/복귀 버튼이 다시 눌러지면 근거리 통신 모듈을 통해 게이트웨이(30)로 외출 해제 이벤트 정보를 전송한다. The outing button device attached to the village two-way wired/
상기 외출 버튼 장치는 버튼 미동작시 활동량 감지 센서를 통한 일정 시간 단위로 정상 동작 확인 정보를 근거리 통신을 통해 게이트웨이(30)로 송신하고, 게이트웨이로부터 정상 활동 정보를 수신한다.The out button device transmits normal operation confirmation information to the
이 때 게이트웨이(30)는, 세대 센서 및 외출 버튼 장치와 외부의 관청 또는 소방 센터 또는 관리 센터(50) 사이의 관문으로서, 상기 센서들로부터 근거리 통신을 통해 센싱 정보를 수집하여 저장하고 이를 원격 통신을 통해 마을 회관 방송 주장치(50) 등으로 경보 정보를 자동 전송한다. At this time, the
또한 화재 감지 센서(102) 등의 알림 조건으로는 램프 점등, 램프 깜박임, 알림음 송출, 주기적 알림음 송출, 지속적 알림음 송출, 문자 안내 및 음성 안내 조건을 포함할 수 있다. In addition, the notification conditions of the fire detection sensor 102 and the like may include lamp lighting, lamp blinking, notification sound transmission, periodic notification sound transmission, continuous notification sound transmission, text guidance, and voice guidance conditions.
마을 양방향 유무선 방송 장치(100)의 일정 위치에 설치되는 스피커부는 무선 방송 수신 장치의 스피커부를 통해 출력된 음성 신호를 청취할 수 있는 거리에 위치한다.The speaker unit installed at a predetermined position of the village two-way wired/
상기 스피커부는 상기 세대 양방향 유무선 방송 시스템(10)에서 상기 마을 회관 방송 주장치(50)로부터 전달된 송출된 문장을 스피커를 통해 마을 주민이 일정 공간 내에서 청취할 수 있도록 음성 변환(TTS 합성부(125))한다.The speaker unit converts the text transmitted from the village hall broadcasting
또한 상기 스피커부(120)에 인접하는 음성 입력부(청음센서부; 130)는 사용자로부터 특정 내용을 입력받는 것으로, 마이크를 사용하는 것이 효과적이고, 외부로부터 접속된 사용자의 경우 음성 입력을 제어하는 다수의 스위치와 볼륨을 조절하는 볼륨 컨트롤을 더 포함할 수 있다. In addition, the voice input unit (audio sensor unit; 130) adjacent to the
상술한 경보 또는 알림을 효율적으로 하기 위해 상기 게이트웨이를 통해 관리 센터(50)에 전송되는 정보로는 마을 주택의 전반적인 정보(Home), 마을 주택의 가정 구성원 정보(Household), 및 가전기기 정보(Individual Appliance)를 포함하며, 마을 주택 정보는 주택 위치(Home location), 주택 크기(Home size), 주택 소유 여부 (Home ownership), 주택에 구비된 가전 기기 종류(Installed home appliance)에 대한 정보를 포함하고, 가정 구성원 정보는 구성원 수(Number of residents), 가족 구성 형태(Family Composition), 생활 패턴(Commuting time slot), 구성원 각각의 직업 및 나이(Occupations of residents, Age distribution of residents)에 대한 정보를 포함하고, 가전 기기 정보는 기기 타입(Device type), 제조사(Manufacturer), 제조 일자(Date of production), 기능(Operation), 사용 횟수 및 기간(Number of use of a device per week, Duration of use of a device at a time)에 대한 정보를 포함한다. Information transmitted to the
도 6은 본 발명의 다른 실시예에 따른 세대 방송 및 음성 분석 기능이 있는 IoT Home Gateway 시스템의 대쉬 보드를 보여주는 도면이다.6 is a diagram showing a dashboard of an IoT Home Gateway system having a generation broadcasting and voice analysis function according to another embodiment of the present invention.
도 7은 본 발명의 또 다른 실시예에 따른 세대 방송 및 음성 분석 기능이 있는 IoT Home Gateway 시스템의 대쉬 보드를 보여주는 도면이다.7 is a diagram showing a dashboard of an IoT Home Gateway system having a generation broadcasting and voice analysis function according to another embodiment of the present invention.
본 발명은 일출시간과 일몰시간 대비 평상시 사용하던 전력을 시간별로 최대한 절약한 전력 절약률(A1; 절약률측정모듈)과 일자별 절약률(A3; 절약률계산모듈)을 표시할 수 있다.The present invention can display the power saving rate (A1; saving rate measurement module) and the daily saving rate (A3; saving rate calculation module) that maximize the time by time of the normally used power compared to the sunrise time and the sunset time.
본 발명의 일실시예에 따라 스마트 단말(S)에 추가되는 GUI제공부는, 이동된 가상 공간에서 미리 설계된 (근거리 통신 기능을 갖는) 가상 전자 제품(A2)을 선택할 수 있도록 그래픽 유저 인터 페이스를 제공한다. The GUI providing unit added to the smart terminal (S) according to an embodiment of the present invention provides a graphical user interface to select a pre-designed virtual electronic product (A2) (having a short-range communication function) in the moved virtual space do.
미리 사용자는 스마트 단말(60)의 가상 공간의 원하는 위치에 배치하고자 하는 가상 전자 제품을 GUI를 통해 선택할 수 있다. In advance, the user may select a virtual electronic product to be placed at a desired location in the virtual space of the
그리고 선택된 가상 전자 제품은 가상 공간에 배치될 수 있는 상태로 활성화 된다.And the selected virtual electronic product is activated in a state that it can be arranged in the virtual space.
여기서, 활성화되는 것은 사용자가 선택된 가상 전자 제품을 드래그하여 가상 공간 안에 배치할 수 있도록 가상 공간의 중앙에 나타나는 것을 의미할 수 있다. Here, being activated may mean appearing in the center of the virtual space so that the user can drag and place the selected virtual electronic product in the virtual space.
그러면, 가상전자 제품처리부는, 사용자의 제스쳐에 따라 활성화된 가상 전자 제품을 가상 공간 내에 배치할 수 있도록 한다. Then, the virtual electronic product processing unit may arrange the activated virtual electronic product in the virtual space according to the user's gesture.
이때, 활성화된 가상 전자 제품에 사용자의 신체 접촉이 있고, 신체 접촉 지점이 이동되면 그 대응되는 위치로 활성화된 가상 전자 제품을 이동시키며, 신체 접촉 지점이 릴리즈되는 위치에 가상 전자 제품을 배치시키는 것이 될 수 있다. In this case, when there is a user's body contact with the activated virtual electronic product and the body contact point is moved, moving the activated virtual electronic product to a corresponding position, and disposing the virtual electronic product at a position where the body contact point is released can be
일 실시예에 따르면, 활성화된 가상 전자 제품이 배치된 가상 공간은 저장부(150)에 저장될 수 있으며, 이는 별도의 명령 없이 자동으로 저장될 수도 있다. According to an embodiment, the virtual space in which the activated virtual electronic product is disposed may be stored in the storage unit 150 , which may be automatically stored without a separate command.
일 실시예로서 본 발명에 따른 다매체 데이터 집중장치(1)는 최적 온도 예측을 위해 먼저 데이터베이스 서버로부터 과거 일정기간(예를 들어, 7일)동안 온도 데이터, 습도 데이터 및 재실 감지 데이터를 추출하고 학습을 통해 각 가정의 최적 예측 평균 온열감 학습 모델을 생성하여 에어컨이나 히터의 온도를 조절하는 예측부;를 포함할 수 있다.As an embodiment, the multimedia data concentrator 1 according to the present invention extracts and learns temperature data, humidity data, and occupancy detection data for a predetermined period (eg, 7 days) in the past from the database server for optimal temperature prediction. It may include; a prediction unit for controlling the temperature of the air conditioner or heater by generating an optimal prediction average heat sensation learning model of each household through .
다른 실시예로서 본 발명에 따른 복수개의 CCTV 센싱 정보(A4; CCTV 모듈)를 수신하여, 외부 네트워크 망과 무선으로 연결하고, 상기 센싱 정보로 부터 화재, 가스, 또는 침입 동작에 관한 일정 신호를 감지 시, 관리 센터로 화재 발생 감지 정보, 가스 누수 감지 정보, 정상 동작 중임을 알리고 음성으로 전환하여 스피커를 통해 마을 주민이 일정 공간 내에서 음성 신호를 청취할 수 있도록 하며, 이를 저장(A5; 메모리 모듈)하여 시간별로 해당 방송을 다시 들을 수 있게 한다.As another embodiment, a plurality of CCTV sensing information (A4; CCTV module) according to the present invention is received, connected to an external network wirelessly, and a predetermined signal related to fire, gas, or intrusion operation is detected from the sensing information. It notifies the city and management center of fire occurrence detection information, gas leak detection information, and normal operation, and converts it to voice so that villagers can hear the voice signal within a certain space through the speaker, and saves (A5; memory module) ) so that you can listen to the broadcast again by time.
이 외에도 각 온도(B2; 온도 모듈), 습도(B3; 습도 모듈), 날씨(B4; 날씨 수신 모듈) 정보를 통해 활동량 감지 센서로 인체의 움직임 동작을 감지(B6; 날짜별 활동량 측정)하고, 일정 시간 동안 동작이 감지되지 않으면, 동작 버튼(B1)을 누르도록 유도하여 동작을 확인할 수 있다.In addition, through each temperature (B2; temperature module), humidity (B3; humidity module), and weather (B4; weather reception module) information, the movement of the human body is detected with the activity sensor (B6; activity amount by date), If no motion is detected for a certain period of time, the motion may be confirmed by inducing the user to press the operation button B1.
추가적으로 본 발명은 마이크를 통해 상기 세대 방송 및 음성 분석 기능이 있는 IoT Home Gateway 시스템을 통해 음성을 입력하면, 상기 음성의 크기가 일정값 보다 적을 경우 마을 관련 관청 서버에서 제어하는 명령어를 입력받아 볼륨을 강제로 조절하할 수 있는 데, 이 때 음성변조부(B5)가 특정 사람의 음성으로 변환하여 마을 방송 안내를 할 수 있다.Additionally, in the present invention, when a voice is input through the IoT Home Gateway system having the household broadcasting and voice analysis function through a microphone, when the volume of the voice is less than a predetermined value, a command to control the village-related government server is input and the volume is increased. It can be forcibly adjusted, and at this time, the voice modulator B5 converts the voice of a specific person into a village broadcast guide.
10 : 유무선 방송 시스템
11 : 청음센서부
12 : 디지털 입력 신호부
13 : 통신부
14 : 음성 변환부
15 : 동작검출부
16 : 환경감지부
30 : 통신부
50 : 마을 회관 방송 주장치
55 : 외부 네트워크
10: wired and wireless broadcasting system
11: hearing sensor unit
12: digital input signal part
13: communication department
14: voice conversion unit
15: motion detection unit
16: environment sensing unit
30: communication department
50: town hall broadcasting main device
55: external network
Claims (8)
세대 내에 설치된 마을 양방향 유무선 방송 장치의 방송 유무를 검출하는 청음센서부; 상기 청음센서부의 방송 유무 결과를 디지털 신호로 수신하는 디지털 입력 신호부; 상기 디지털 입력 신호부로 부터 방송 유무 결과를 통신으로 수신할 수 있는 시리얼 통신부; 세대 내 음성을 검출하는 음성 변환부와 세대 내 움직임을 검출하는 동작검출부; 세대 내 환경을 감지하는 환경감지부; 상기 세대 내 유선 통신을 위한 제1통신부; 세대 내 무선 통신을 위한 제2통신부; 마을 회관 방송 주장치와 통신하기 위한 제3통신부; 외부 네트워크와 통신하기 위한 제4통신부; 정전 시 시스템이 정상 동작하기 위한 배터리 충전부;를 포함하며,
상기 청음센서부는 세대 내에 설치된 무선 방송 수신 설비의 방송 유무를 전압 및 전류가 시간에 따라 연속적으로 변화하는 신호로 검출하는 것을 특징으로 하는 세대 방송 및 음성 분석 기능이 있는 IoT Home Gateway 시스템.In the IoT Home Gateway system with generation broadcasting and voice analysis function,
a hearing sensor unit for detecting the presence or absence of broadcasting of a village bidirectional wired/wireless broadcasting device installed in a household; a digital input signal unit for receiving a result of the presence or absence of broadcasting as a digital signal of the hearing sensor unit; a serial communication unit capable of receiving a result of broadcasting or not through communication from the digital input signal unit; a voice conversion unit for detecting voice within a household and a motion detection unit for detecting movement within a household; an environment sensing unit that detects the environment within the household; a first communication unit for wire communication within the household; a second communication unit for intra-generational wireless communication; a third communication unit for communicating with the town hall broadcasting main device; a fourth communication unit for communicating with an external network; Including a; battery charging unit for normal operation of the system in the event of a power failure;
IoT Home Gateway system with a household broadcasting and voice analysis function, characterized in that the hearing sensor unit detects the presence or absence of broadcasting of a wireless broadcasting reception facility installed in the household as a signal in which voltage and current continuously change according to time.
홈 게이트웨이(IoT Home Gateway)는 연결된 디바이스의 데이터를 수집하고, 인터넷 영역으로 전달하며, 외부에서 각각의 디바이스와 연결할 수 있는 인터페이스(Interface) 역할을 하는 것을 특징으로 하는 세대 방송 및 음성 분석 기능이 있는 IoT Home Gateway 시스템.The method according to claim 1,
The home gateway (IoT Home Gateway) collects the data of the connected device, delivers it to the Internet area, and serves as an interface that can connect with each device from the outside. IoT Home Gateway system.
상기 청음센서부는 실내 소음을 측정하기 위한 마이크
실시간으로 측정값의 누적에 의해 측정값 패턴을 형성하고, 유효 범위 주파수 중에서 진폭이 큰 순서로 상위 설정 갯수의 주파수를 선별하여 판별 대상 주파수로 선정하는 것을 특징으로 하는 세대 방송 및 음성 분석 기능이 있는 IoT Home Gateway 시스템.The method according to claim 1,
The hearing sensor unit is a microphone for measuring indoor noise
A generation broadcasting and voice analysis function, characterized in that a measurement value pattern is formed by accumulating measurement values in real time, and the frequency of the upper setting number is selected in the order of the largest amplitude among the effective range frequencies and selected as the frequency to be determined. IoT Home Gateway system.
상기 음성 변환부는 TTS 합성부로 TTS 합성을 하는 데 있어, 특정 음성 기부자로부터 수신된 발화 음성에 대해 음성인식을 수행하는 음성 AI(Aritificial Intelligence) 장치로부터 상발화 음성 정보를 수신하고, 그에 대응하는 가상화자의 발화 음성 정보를 상기 음성 AI 장치를 통해 음성합성(TTS: Text to Speech)하여 송신하고, 발화 음성 정보와 관련된 발화 이력의 로그를 저장하고 분석하는 것을 특징으로 하는 세대 방송 및 음성 분석 기능이 있는 IoT Home Gateway 시스템.The method according to claim 1,
In the TTS synthesis by the TTS synthesizer, the voice converter receives the uttered voice information from a voice AI (Artificial Intelligence) device that performs voice recognition on the uttered voice received from a specific voice donor, and the corresponding virtualizer IoT with a generation broadcasting and voice analysis function, characterized in that the uttered voice information is transmitted by text-to-speech (TTS) through the voice AI device, and a log of utterance history related to the uttered voice information is stored and analyzed Home Gateway system.
청음센서부가 세대 내에 설치된 무선 방송 수신 설비의 방송 유무를 검출하는 단계;
디지털 입력 신호부가 방송 결과를 디지털 신호로 수신하는 단계;
시리얼 통신부가 상기 방송 결과를 통신으로 수신할 수 있는 단계;
환경감지부가 세대 내 가스 센서, 진동 센서, 카메라 및 청음 센서를 통해 환경을 감지하는 단계;를 포함하고,
상기 진동 센서로는 광케이블 센서가 이용되고, 청음 센서로서는 사운드 감지 센서를 이용하며, 상기 카메라를 통해 침입자를 감지하고, 진동 센서와 청음 센서로 이동 경로를 추적하는 것을 특징으로 하는 세대 방송 및 음성 분석 기능이 있는 IoT Home Gateway 시스템을 이용한 방법.In the method using the IoT Home Gateway system with the generation broadcasting and voice analysis function of claim 1,
detecting, by the hearing sensor unit, the presence or absence of a broadcast of a wireless broadcast reception facility installed in a household;
receiving, by a digital input signal unit, a broadcast result as a digital signal;
a step in which a serial communication unit can receive the broadcast result through communication;
Including; by an environment sensing unit detecting the environment through a gas sensor, a vibration sensor, a camera and a hearing sensor in the household;
Generation broadcasting and voice analysis, characterized in that an optical cable sensor is used as the vibration sensor, a sound detection sensor is used as the hearing sensor, an intruder is detected through the camera, and a movement path is traced by a vibration sensor and a hearing sensor How to use a functional IoT Home Gateway system.
음성 변환부가 세대 내 음성을 검출하는 단계와 동작검출부가 세대 내 움직임을 검출하는 단계;를 더 포함하는 것을 특징으로 하는 세대 방송 및 음성 분석 기능이 있는 IoT Home Gateway 시스템을 이용한 방법.
7. The method of claim 6,
The method using the IoT Home Gateway system with a generation broadcasting and voice analysis function, characterized in that it further comprises; a voice converting unit detecting a voice within a household and a motion detecting unit detecting a motion within a household.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020210154396A KR102464535B1 (en) | 2021-11-11 | 2021-11-11 | IoT Home Gateway with in-house broadcasting and voice analysis function and method using the same |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020210154396A KR102464535B1 (en) | 2021-11-11 | 2021-11-11 | IoT Home Gateway with in-house broadcasting and voice analysis function and method using the same |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR102464535B1 true KR102464535B1 (en) | 2022-11-09 |
Family
ID=84040217
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020210154396A KR102464535B1 (en) | 2021-11-11 | 2021-11-11 | IoT Home Gateway with in-house broadcasting and voice analysis function and method using the same |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102464535B1 (en) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20150122878A (en) * | 2014-04-23 | 2015-11-03 | (주)오에이전자 | Broadcasting confirmation system and method |
| KR20170102937A (en) * | 2015-01-06 | 2017-09-12 | 어페로, 인크. | System and method for implementing Internet (IoT) remote control applications |
| KR20180027256A (en) * | 2016-09-06 | 2018-03-14 | 엘지전자 주식회사 | Sensor device, mobile terminal and home appliance system including the same |
-
2021
- 2021-11-11 KR KR1020210154396A patent/KR102464535B1/en active IP Right Grant
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20150122878A (en) * | 2014-04-23 | 2015-11-03 | (주)오에이전자 | Broadcasting confirmation system and method |
| KR20170102937A (en) * | 2015-01-06 | 2017-09-12 | 어페로, 인크. | System and method for implementing Internet (IoT) remote control applications |
| KR20180027256A (en) * | 2016-09-06 | 2018-03-14 | 엘지전자 주식회사 | Sensor device, mobile terminal and home appliance system including the same |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10645908B2 (en) | Systems and methods for providing a sound masking environment | |
| US9769420B1 (en) | Portable wireless remote monitoring and control systems | |
| US11990992B2 (en) | System and method for triggering an alarm during a sensor jamming attack | |
| US10540873B2 (en) | Multifunction per-room home automation device | |
| US20080120103A1 (en) | Management and assistance system for the deaf | |
| US20110102133A1 (en) | Programmable security system with transmitter | |
| CN103899963A (en) | Multifunctional integrated intelligent electric lamp | |
| US9824565B1 (en) | Smoke detector system with expanded capabilities | |
| US11589204B2 (en) | Smart speakerphone emergency monitoring | |
| US20200267941A1 (en) | Apparatus and method for delivering an auditory stimulus | |
| US20180353069A1 (en) | Distributed slave beacon network requiring no mobile telephone or compute applications | |
| CN203784722U (en) | Multifunctional integral intelligent electric lamp | |
| WO2013178869A1 (en) | Mobile device, stand, arrangement, and method for alarm provision | |
| CN104680706A (en) | Domestic robot alarming system based on GSM (Global System for Mobile Communications) | |
| KR102464535B1 (en) | IoT Home Gateway with in-house broadcasting and voice analysis function and method using the same | |
| KR102480326B1 (en) | Village wireless broadcasting device with wireless communication relay function and method using the same | |
| CN113631030A (en) | System and method for providing a sound masking environment | |
| US11259126B1 (en) | Property control and configuration based on door knock detection | |
| US20230267815A1 (en) | Ear bud integration with property monitoring | |
| CN111105790A (en) | Intelligent external device, intelligent sound box system and distributed reception method | |
| KR102636840B1 (en) | Ai noise management system | |
| CA3160791A1 (en) | Apparatus and method for delivering an auditory stimulus | |
| KR20220076891A (en) | Method and system for servicing an intelligent care of infant | |
| CN108989761A (en) | A kind of portable mobile wireless remote monitoring system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |