KR100934651B1 - Voice recognition device of automatic washing machine - Google Patents

Voice recognition device of automatic washing machine Download PDF

Info

Publication number
KR100934651B1
KR100934651B1 KR1020020077942A KR20020077942A KR100934651B1 KR 100934651 B1 KR100934651 B1 KR 100934651B1 KR 1020020077942 A KR1020020077942 A KR 1020020077942A KR 20020077942 A KR20020077942 A KR 20020077942A KR 100934651 B1 KR100934651 B1 KR 100934651B1
Authority
KR
South Korea
Prior art keywords
voice
signal
washing machine
noise
speech
Prior art date
Application number
KR1020020077942A
Other languages
Korean (ko)
Other versions
KR20040050224A (en
Inventor
김영수
최성봉
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020020077942A priority Critical patent/KR100934651B1/en
Publication of KR20040050224A publication Critical patent/KR20040050224A/en
Application granted granted Critical
Publication of KR100934651B1 publication Critical patent/KR100934651B1/en

Links

Images

Classifications

    • D—TEXTILES; PAPER
    • D06—TREATMENT OF TEXTILES OR THE LIKE; LAUNDERING; FLEXIBLE MATERIALS NOT OTHERWISE PROVIDED FOR
    • D06F—LAUNDERING, DRYING, IRONING, PRESSING OR FOLDING TEXTILE ARTICLES
    • D06F34/00—Details of control systems for washing machines, washer-dryers or laundry dryers
    • D06F34/28—Arrangements for program selection, e.g. control panels therefor; Arrangements for indicating program parameters, e.g. the selected program or its progress
    • D—TEXTILES; PAPER
    • D06—TREATMENT OF TEXTILES OR THE LIKE; LAUNDERING; FLEXIBLE MATERIALS NOT OTHERWISE PROVIDED FOR
    • D06F—LAUNDERING, DRYING, IRONING, PRESSING OR FOLDING TEXTILE ARTICLES
    • D06F34/00—Details of control systems for washing machines, washer-dryers or laundry dryers
    • D06F34/04—Signal transfer or data transmission arrangements
    • D—TEXTILES; PAPER
    • D06—TREATMENT OF TEXTILES OR THE LIKE; LAUNDERING; FLEXIBLE MATERIALS NOT OTHERWISE PROVIDED FOR
    • D06F—LAUNDERING, DRYING, IRONING, PRESSING OR FOLDING TEXTILE ARTICLES
    • D06F34/00—Details of control systems for washing machines, washer-dryers or laundry dryers
    • D06F34/08—Control circuits or arrangements thereof
    • D—TEXTILES; PAPER
    • D06—TREATMENT OF TEXTILES OR THE LIKE; LAUNDERING; FLEXIBLE MATERIALS NOT OTHERWISE PROVIDED FOR
    • D06F—LAUNDERING, DRYING, IRONING, PRESSING OR FOLDING TEXTILE ARTICLES
    • D06F34/00—Details of control systems for washing machines, washer-dryers or laundry dryers
    • D06F34/14—Arrangements for detecting or measuring specific parameters
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • D—TEXTILES; PAPER
    • D06—TREATMENT OF TEXTILES OR THE LIKE; LAUNDERING; FLEXIBLE MATERIALS NOT OTHERWISE PROVIDED FOR
    • D06F—LAUNDERING, DRYING, IRONING, PRESSING OR FOLDING TEXTILE ARTICLES
    • D06F2103/00—Parameters monitored or detected for the control of domestic laundry washing machines, washer-dryers or laundry dryers
    • D06F2103/26—Imbalance; Noise level

Landscapes

  • Engineering & Computer Science (AREA)
  • Textile Engineering (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Control Of Washing Machine And Dryer (AREA)

Abstract

주변 잡음 속에서도 세탁기를 음성으로 제어할 수 있도록 하는 전자동 세탁기의 음성인식장치에 관한 것으로, 세탁기에서 발생하는 노이즈를 적응 필터에 의해 제거하며, 음성이 입력되면 음성 구간 검출 알고리즘에 의해 음성 구간을 검출한다. 검출된 음성 구간에 대하여 음성을 분석하여 특징을 추출하고, 추출된 특징을 기준 패턴과 비교하거나 기준 모델의 발생 확률을 계산하여 입력된 음성을 인식 또는 거부하며, 추출된 특징 및 인식 결과를 인식기에 적응하여 인식된 결과를 주변기기에 수행함으로써, 전자동 세탁기를 음성 인식에 의해 제어하여 편리성 및 부가가치를 증대시킬 수 있다.The present invention relates to a voice recognition device of a full-automatic washing machine, which allows a washing machine to be controlled by voice even in ambient noise. The noise generated by the washing machine is removed by an adaptive filter, and when a voice is input, the voice section is detected by a voice section detection algorithm. . The speech is extracted from the detected speech section, and the feature is extracted. The extracted feature is compared with the reference pattern or the probability of occurrence of the reference model is recognized or rejected. By adapting the recognized result to the peripheral device, the automatic washing machine can be controlled by voice recognition to increase convenience and added value.

세탁기, 음성, 인식Washing machine, voice, recognition

Description

전자동 세탁기의 음성인식장치{device for recognizing voice in full automation-type washing machine}Device for recognizing voice in full automation-type washing machine

도 1은 기존의 전자동 세탁기 구조예를 나타낸 사시도1 is a perspective view showing an example of a conventional fully automatic washing machine

도 2은 일반적인 음성 인식 시스템의 블록구성도2 is a block diagram of a general speech recognition system

도 3은 본 발명에 따른 전자동 세탁기의 음성인식장치의 블록구성도Figure 3 is a block diagram of a voice recognition device of the automatic washing machine according to the present invention

도 4는 도 3의 적응 필터부를 보여주는 블록구성도4 is a block diagram illustrating an adaptive filter of FIG. 3.

*도면의 주요부분에 대한 부호의 설명** Description of the symbols for the main parts of the drawings *

21 : 적응 필터부 22 : 음성 인식부21: adaptive filter unit 22: speech recognition unit

25 : 제 1 혼합기 26 : 적응 필터25: first mixer 26: adaptive filter

27 : 제 2 혼합기 28 : 음성 구간 검출부27: second mixer 28: voice section detection unit

29 : 특징 추출부 30 : 매칭부29: feature extraction unit 30: matching unit

31 : 인식 결과 확인부 32 : 인식 결과 수행부31: recognition result checking unit 32: recognition result performing unit

본 발명은 음성인식에 관한 것으로, 특히 주변 잡음 속에서도 세탁기를 제어할 수 있는 세탁기의 음성인식장치에 관한 것이다. The present invention relates to voice recognition, and more particularly, to a voice recognition device of a washing machine that can control a washing machine even in ambient noise.                         

현재, 일상 생활에 많이 사용되는 전자 제품을 음성 명령으로 동작시키는 일이 여러 분야에서 시도되고 있다.At present, there are many attempts to operate electronic products that are used in daily life by voice commands.

특히, 세탁기, 식기세척기등은 현대인의 생활에서 가사노동을 줄여 생활의 편리함을 제공하며, TV, 오디오(audio) 등은 여가, 정보수집과 교육 등의 분야에서 중요한 부분을 차지하고 있다.In particular, washing machines, dishwashers, and the like provide convenience of life by reducing household labor in modern life. TV, audio, etc., play an important part in leisure, information gathering and education.

또한, 작동의 편리성을 향상시키기 위해 리모콘이 등장하고 이로 인하여 앉은 자리에서 손으로 자신이 원하는 동작을 시킬 수 있게 되었다.In addition, the remote control has appeared to improve the convenience of operation, thereby allowing the user to perform the desired action by sitting in the seat.

그러나, 이것 또한 다른 기기를 작동시키는 것이기 때문에 편리성의 한계가 있으므로 인간에게 가장 친숙한 음성을 인식할 수 있는 장치의 개발이 진행되고 있다.However, since this also operates other devices, there is a limit to convenience, and therefore, development of a device capable of recognizing a voice that is most familiar to humans is in progress.

이러한 음성인식의 대략적인 동작원리는 다음과 같다.The general operation principle of the speech recognition is as follows.

먼저, 음성인식 알고리즘은 크게 음성 구간 검출 과정과 특징(feature) 추출 과정, 그리고 매칭(matching) 과정으로 나눌 수 있다.First, the speech recognition algorithm may be classified into a speech section detection process, a feature extraction process, and a matching process.

즉, 도 2에 도시된 바와 같이 마이크(11)를 통해 음성신호가 입력되면 A/D 컨버터(12)에서 이를 디지털 신호로 변환한 후, 음성 구간 검출부(13)로 출력한다.That is, as shown in FIG. 2, when a voice signal is input through the microphone 11, the A / D converter 12 converts the voice signal into a digital signal and outputs the digital signal to the voice section detector 13.

음성 구간 검출부(13)는 디지털 음성 신호를 짧은 구간의 신호(즉, 프레임)로 분할한 후, 각 프레임의 에너지와 영교차율(zero crossing rate) 그리고, 시간길이 정보를 이용하여 입력된 신호중에서 실제 발성된 음성 구간만을 검출한 후, 특징 추출부(14)로 출력한다.The speech section detector 13 divides the digital speech signal into short section signals (ie, frames), and then uses the energy, zero crossing rate, and time length information of each frame to actually input the signals. After detecting only the spoken speech section, the speech signal is output to the feature extractor 14.

특징 추출부(14)에서는 음성 구간에 해당하는 프레임의 특징을 추출하여 입 력된 음성의 테스트 패턴을 만든 후, 매칭부(15)로 출력한다.The feature extractor 14 extracts the feature of the frame corresponding to the speech section, creates a test pattern of the input speech, and outputs the test pattern to the matcher 15.

매칭부(15)에서는 테스트 패턴과 기준 데이터용 메모리(16)에 저장된 각 기준 패턴들과 각각 비교하여 테스트 패턴과 가장 유사한 특징을 갖는 기준 패턴을 인식된 음성으로 출력한다.The matching unit 15 compares the test pattern with each of the reference patterns stored in the reference data memory 16 and outputs a reference pattern having a feature most similar to the test pattern as a recognized voice.

이때, 상기 기준 데이터용 메모리(16)에 음성 신호의 기준 패턴을 저장하는 경우도 마찬가지로 상기 특징 추출부(14)에서 음성 구간에 해당하는 프레임의 특징을 추출하여 기준 패턴을 만든 후, 기준 데이터용 메모리에 저장하는데, 이와 같은 동작을 인식하고자 하는 음성 신호에 대하여 반복 수행하여 기준 패턴을 기준 데이터용 메모리(16)에 데이터베이스화한다.In this case, when the reference pattern of the voice signal is stored in the reference data memory 16, the feature extractor 14 extracts a feature of a frame corresponding to the voice section to create a reference pattern, and then uses the reference data. In the memory, the voice signal to recognize the operation is repeatedly performed to database the reference pattern in the reference data memory 16.

그러나, 이와 같은 기존의 음성인식 장치는 주변 환경 잡음이 있을 경우 그 성능이 저하된다.However, such a conventional speech recognition device is degraded when there is ambient noise.

특히, 세탁기는 구동시 모터음이 크고 급/배수시 물소리등으로 인해 소음이 커서 음성인식이 용이하게 이루어지지 못할 가능성이 높다.In particular, the washing machine has a high motor sound when driven and a high noise due to the sound of water during feeding / draining, so that voice recognition may not be easily performed.

따라서, 이러한 주변 소음 및 잡음에도 불구하고 음성인식이 가능한 장치의 개발이 필요하다.Therefore, it is necessary to develop a device capable of speech recognition despite such ambient noise and noise.

본 발명은 이와 같은 문제를 해결하기 위한 것으로 세탁기에서 발생하는 주변 소음에도 불구하고 확실한 음성인식이 가능한 전자동 세탁기의 음성인식장치를 제공하는데 그 목적이 있다.An object of the present invention is to provide a voice recognition device for a fully automatic washing machine capable of reliably recognizing voice despite ambient noise generated in a washing machine.

본 발명의 다른 목적은 음성인식 알고리즘을 마이크가 내장된 세탁기에 적용 하여 음성으로 세탁기를 동작시키는데 있다.Another object of the present invention is to apply a voice recognition algorithm to a washing machine with a built-in microphone to operate the washing machine by voice.

본 발명에 따른 전자동 세탁기의 음성인식장치의 특징은, 세탁기 구성부품에서 발생하거나 급/배수시 발생한 노이즈 신호를 세탁기 본체에 내장된 마이크 또는 별도로 구비되는 리모컨에 내장된 마이크로부터 입력되는 음성신호에 적응시켜서 상기 노이즈 신호가 제거된 음성신호를 출력하는 적응 필터부와; 적응 필터부의 음성신호를 인가받아 음성 구간 검출 알고리즘을 수행하여 음성 구간을 검출하고, 검출된 음성 신호을 분석하여 특징을 추출하며, 그 추출된 특징을 기준 패턴과 비교하거나 기준 모델의 발생 확률을 계산하여 입력된 음성을 인식 또는 거부하고, 상기 추출된 특징 및 인식 결과를 인식기에 적응하여 인식된 결과를 주변기기에 수행하도록 하는 음성인식부;로 구성되는데 있다.A feature of the voice recognition device of the automatic washing machine according to the present invention is that the noise signal generated from the washing machine components or the water supply / drainage is adapted to the voice signal input from the microphone built into the washing machine body or the microphone built into the remote controller. An adaptive filter to output an audio signal from which the noise signal is removed; By applying the speech signal of the adaptive filter unit, the speech segment detection algorithm is performed to detect the speech segment, analyze the detected speech signal to extract the features, compare the extracted features with the reference pattern, or calculate the probability of occurrence of the reference model. And a voice recognition unit for recognizing or rejecting an input voice and adapting the extracted feature and recognition result to a recognizer to perform the recognized result to a peripheral device.

본 발명의 다른 특징은, 적응 필터부를 세탁기에서 발생한 노이즈 신호와 마이크로부터 입력된 음성신호를 가산하여 노이즈가 혼합된 음성신호를 출력하는 제 1 혼합기와; 제 1 혼합기로부터 인가되는 노이즈가 혼합된 음성신호와 하기 적응 필터로부터 인가되는 필터링된 신호를 감산하여 노이즈가 제거된 음성신호를 출력하는 제 2 혼합기와; 인가되는 노이즈 신호를 필터링하여 출력하고 제 2 혼합기로부터 출력되는 노이즈가 제거된 음성신호를 피드백하여 필터의 계수를 조정하는 적응 필터;로 구성하는데 있다.According to another aspect of the present invention, an adaptive filter unit includes: a first mixer configured to add a noise signal generated from a washing machine and a voice signal input from a microphone to output a mixed voice signal; A second mixer for subtracting the speech signal mixed with the noise applied from the first mixer and the filtered signal applied from the following adaptive filter and outputting the speech signal from which the noise is removed; And an adaptive filter for filtering and outputting an applied noise signal and feeding back a speech signal from which the noise output from the second mixer is removed to adjust a coefficient of the filter.

본 발명의 또 다른 특징은, 음성인식부에서 음성 구간 검출시, 적응 필터의 계수 변화 및 세탁기에서 발생한 노이즈 신호와 마이크로부터 입력된 음성신호의 특징을 이용하는데 있다.Another feature of the present invention is to use the characteristics of the voice signal input from the microphone and the noise signal generated in the washing machine and the coefficient change of the adaptive filter when detecting the voice section in the voice recognition unit.

상기와 같은 특징을 갖는 본 발명에 따른 전자동 세탁기의 음성인식장치를 첨부된 도면을 참조하여 설명하면 다음과 같다.Referring to the accompanying drawings, the voice recognition device of the automatic washing machine according to the present invention having the features as described above is as follows.

먼저, 본 발명의 개념은 전자동 세탁기의 각종 부품 또는 급/배수시 발생하는 소음(노이즈)을 기준 신호로 이용한 적응 필터(adaptive filter)를 구성하여 세탁기에서 발생하는 노이즈(noise)를 제거함으로써 세탁기에도 음성 인식을 가능하게 하는데 있다.First, the concept of the present invention forms an adaptive filter using various components of the automatic washing machine or noise (noise) generated during supply / drainage as a reference signal to remove the noise generated in the washing machine. It is to enable speech recognition.

도 3은 본 발명에 따른 전자동 세탁기의 음성인식장치를 보여주는 블록도로서, 도 3에 도시된 바와 같이 크게 적응 필터부(21)와 음성 인식부(22)로 나눌 수 있다.FIG. 3 is a block diagram illustrating a speech recognition device of the automatic washing machine according to the present invention. As shown in FIG. 3, the adaptive filter unit 21 and the speech recognition unit 22 may be largely divided.

적응 필터부(21)는 도 4에 도시된 바와 같이 전자동 세탁기에서 발생한 노이즈와 세탁기 본체에 구비된 마이크 또는 이와는 별도로 구비되는 마이크로부터 입력된 음성신호를 가산하여 노이즈가 혼합된 음성신호를 출력하는 제 1 혼합기(25)와, 제 1 혼합기(25)로부터 인가되는 노이즈가 혼합된 음성신호와 적응 필터(26)로부터 인가되는 필터링된 신호를 감산하여 노이즈가 제거된 음성신호를 출력하는 제 2 혼합기(27)와, 인가되는 노이즈를 필터링하여 출력하고 제 2 혼합기(27)로부터 출력되는 노이즈가 제거된 음성신호를 피드백하여 필터의 계수를 조정하는 적응 필터(26)로 구성된다.As shown in FIG. 4, the adaptive filter unit 21 adds the noise generated by the automatic washing machine and the voice signal input from the microphone provided in the washing machine main body or a microphone provided separately from the washing machine to output a mixed voice signal. A second mixer which subtracts the voice signal mixed with the noise applied from the first mixer 25 and the first mixer 25 and the filtered signal applied from the adaptive filter 26 to output the voice signal from which the noise is removed ( 27) and an adaptive filter 26 which filters and outputs the applied noise and feeds back the speech signal from which the noise output from the second mixer 27 is removed to adjust the coefficient of the filter.

여기서, 노이즈는 제어하려는 세탁기의 부품으로부터 발생하는 소음 및 급/배수시 발생하는 소리의 신호를 의미하는 것이고, 마이크로부터 입력된 음성신호는 외부의 노이즈 신호와 세탁기에서 발생한 노이즈 신호가 포함된 음성신호를 의미한다.Here, the noise refers to a signal of the noise generated from the parts of the washing machine to be controlled and the sound generated during the supply / drainage, the voice signal input from the microphone is a voice signal including an external noise signal and a noise signal generated from the washing machine Means.

그리고, 음성 인식부(22)는 적응 필터(26)의 계수 변화 및 세탁기 본체 또는 별도로 구비된 마이크를 통해 입력되는 음성신호와 노이즈의 특징을 이용하여 마이크를 통해 인가된 신호로부터 음성 신호 구간을 추출하는 음성 구간 추출부(28)와, 검출된 음성 신호로부터 특성을 나타내는 파라미터를 추출해내는 특징 추출부(29)와, 추출된 파라미터를 기준 패턴과 비교하거나 기준 모델의 발생확률을 계산하여 입력된 음성을 인식하는 매칭부(30)와, 인식된 결과의 유사도 또는 발생 확률값이 일정 수준 이하이면 인식을 거부하는 인식 결과부(31)와, 인식된 결과를 수행하는 인식 결과 수행부(32)와, 추출된 특징 및 인식 결과를 이용해 음성 인식 장치를 화자 또는 사용환경의 특성에 맞게 적응시키는 인식기 적응부(33)로 구성된다. The voice recognition unit 22 extracts the voice signal section from the signal applied through the microphone by using the coefficient change of the adaptive filter 26 and the voice signal and noise input through the washing machine main body or a microphone separately provided. A speech section extractor 28, a feature extractor 29 extracting a parameter representing a characteristic from the detected speech signal, and a speech inputted by comparing the extracted parameter with a reference pattern or calculating a probability of occurrence of the reference model A matching unit 30 for recognizing the identification, a recognition result unit 31 for rejecting recognition if the similarity or probability of occurrence of the recognized result is below a predetermined level, a recognition result performing unit 32 for performing the recognized result, It is composed of a recognizer adaptation unit 33 for adapting the speech recognition device to the characteristics of the speaker or the use environment using the extracted features and recognition results.

이와 같이 구성되는 본 발명의 동작을 도 2 및 도 3을 참조하여 설명하면 다음과 같다.The operation of the present invention configured as described above will be described with reference to FIGS. 2 and 3.

먼저, 세탁기에서 음성 인식을 하기 위해서는 마이크에서 인가되는 음성신호로부터 세탁기에서 발생하는 소리 신호(노이즈)를 제거해야 한다.First, in order to recognize a voice in a washing machine, a sound signal (noise) generated in the washing machine must be removed from the voice signal applied from the microphone.

그러기 위해서는 세탁기의 발생 신호와 마이크에서 인가되는 음성 신호의 차이를 최소화하도록 적응 필터 계수를 조정해야 한다.To do this, the adaptive filter coefficients should be adjusted to minimize the difference between the generated signal of the washing machine and the voice signal applied from the microphone.

즉, 세탁기에서 발생한 노이즈와 마이크로부터 입력된 음성신호가 제 1 혼합기(25)에서 가산되어 노이즈가 혼합된 음성신호를 출력하고 적응 필터(26)는 노이즈 신호를 필터링한다. That is, the noise generated in the washing machine and the voice signal input from the microphone are added by the first mixer 25 to output the mixed voice signal, and the adaptive filter 26 filters the noise signal.                     

이 적응 필터(26)의 출력 신호와 제 1 혼합기(25)의 출력 신호는 제 2 혼합기(27)로 인가되어 노이즈가 제거된 음성신호를 출력하게 된다.The output signal of the adaptive filter 26 and the output signal of the first mixer 25 are applied to the second mixer 27 to output an audio signal from which noise is removed.

그리고, 노이즈가 제거된 음성신호는 피드백(feedback)되어 적응 필터(26)로 다시 인가되어 적응 필터의 계수를 조정하게 된다.The speech signal from which the noise is removed is fed back to the adaptive filter 26 to adjust the coefficients of the adaptive filter.

이와 같이 적응 필터부(21)로부터 출력된 노이즈가 제거된 음성 신호는 음성 구간 검출부(28)로 인가되어 그 음성 신호 중에서 실제로 발성된 구간, 즉 음성 구간만을 검출한다.In this way, the speech signal from which the noise output from the adaptive filter unit 21 is removed is applied to the speech section detecting section 28 to detect only the section actually spoken, i.e., the speech section.

여기서, 음성 구간은 적응 필터의 계수 변화 및 마이크로부터 입력되는 음성 신호와 세탁기에서 발생하는 노이즈 신호의 특징을 이용하여 검출된다.Here, the voice section is detected using the coefficient change of the adaptive filter and the characteristics of the voice signal input from the microphone and the noise signal generated in the washing machine.

이들을 이용하는 이유는 적응 필터의 경우, 필터 계수는 기준 신호와 마이크로부터 입력되는 주신호가 현저하게 다를 경우 변화가 매우 심하게 나타난다.The reason for using them is that in the case of the adaptive filter, the filter coefficient is very severely changed when the main signal input from the reference signal and the microphone are significantly different.

즉, 음성이 입력되는 동안에 필터 계수 변화는 다른 구간과 현격한 차이를 보이게 된다.That is, while the voice is input, the filter coefficient change is remarkably different from other intervals.

그러므로 계수 변화량을 계속 모니터링하게 되면 변화량이 큰 부분을 음성 구간으로 추출할 수 있는 것이다.Therefore, if the coefficient variation is continuously monitored, a large portion of the variation can be extracted as the voice interval.

여기서, 각 계수 변화량은 단구간 평균 계수 변화량을 측정한 것이다.Here, each coefficient change amount measures the average coefficient change amount of a short segment.

이러한 필터 계수 변화량과 더불어 기준 신호와 주신호의 스펙트럼 정보, 에너지 정보 등을 같이 이용하여 음성 구간을 추출한다.In addition to the filter coefficient variation, the speech section is extracted by using the spectrum information and the energy information of the reference signal and the main signal together.

이어, 특징 추출부(29)에서는 검출된 음성 구간 신호의 특징을 추출하게 되는데, 보통 스펙트럼 정보를 나타내는 파라미터를 이용한다. Next, the feature extractor 29 extracts a feature of the detected speech section signal, and usually uses a parameter representing spectrum information.                     

그리고, 매칭부(30)는 추출된 파라미터를 기준 패턴과 비교하거나 기준 모델의 발생확률을 계산하여 입력된 음성을 인식한다.The matching unit 30 recognizes the input voice by comparing the extracted parameter with a reference pattern or by calculating a probability of occurrence of the reference model.

즉, 입력된 음성과 가장 유사한 음성을 등록되어 있는 음성중에서 찾는데, 등록되어 있는 각 단어에 대한 유사도를 모두 계산한 뒤, 가장 유사한 등록 단어를 추출한다.That is, the voice most similar to the input voice is searched among the registered voices. After all the similarities of the registered words are all calculated, the most similar registered words are extracted.

유사도를 측정하는 방법의 예로 DTW(Dynamic Time Warping) 알고리즘 또는 은닉 마코프 모델(Hidden Markov Model ; HMM) 확률값을 이용할 수 있다.As an example of measuring similarity, a dynamic time warping (DTW) algorithm or a hidden markov model (HMM) probability value may be used.

본 발명의 매칭부(30)에서는 음성인식 장치의 성능을 향상시키기 위하여 2단계 인식 방법을 이용할 수 있다.The matching unit 30 of the present invention may use a two-stage recognition method to improve the performance of the voice recognition device.

2단계 인식은 키 워드(key word) 인식과정과 명령어 인식과정으로 나뉘는데, 키 워드 인식과정은 미리 정해진 한 가지 단어가 발성되었는가를 인식한다.Two-stage recognition is divided into a key word recognition process and a command recognition process. The key word recognition process recognizes whether a single word is uttered.

즉, 인식 대상 어휘는 1개이며 인식 결과 확인과정에 의해 '인식' 또는 '거부'를 결정하는데, 인식 단어를 최소화함으로써 인식율을 향상시킨다.That is, there is only one vocabulary to be recognized, and 'recognition' or 'rejection' is determined by the recognition result checking process, and the recognition rate is improved by minimizing the recognition word.

제어 대상 기기는 초기 상태로써 키 워드 인식 모드로 동작하고, '인식'으로 결정되면 제어하려는 기기를 명령어 인식 모드로 설정하고 기기에서 발생하는 노이즈를 일정 레벨(level) 이하로 제한한다.The device to be controlled operates in the keyword recognition mode as an initial state, and when it is determined as 'recognition', sets the device to be controlled to the command recognition mode and limits the noise generated by the device to a predetermined level or less.

그리고, 명령어 인식 과정은 기기의 명령어를 인식하는데, 인식 결과를 수행하고 기기를 본래의 상태인 키 워드 인식 모드로 설정한다.In addition, the command recognition process recognizes a command of the device, performs a recognition result, and sets the device to a keyword recognition mode in its original state.

이어, 인식 결과 확인부(31)는 가장 유사한 등록 단어와 입력 음성의 유사도가 일정 룰에 의해 거부될 경우, 등록되어 있지 않은 음성이 입력된 것으로 보고 다시 음성을 받아들인다.Then, if the similarity between the most similar registered words and the input voice is rejected by the predetermined rule, the recognition result confirming unit 31 sees that the voice not registered is input and accepts the voice again.

이때, 단순한 유사도를 측정하여 이용할 수도 있으며 여러 가지 형태의 필터 모델을 이용할 수도 있다. In this case, a simple similarity may be measured and used, or various types of filter models may be used.

이는 키 워드 인식 과정 및 명령어 인식 과정에 모두 적용된다.This applies to both keyword recognition and command recognition.

그리고, 인식 결과 수행부(32)는 인식 과정이 성공하면 그 결과에 따라 명령을 수행한다.If the recognition process is successful, the recognition result execution unit 32 executes a command according to the result.

한편, 인식기 적응부(33)는 추출된 특징 및 인식 결과를 이용해 음성 인식 장치를 화자 또는 사용환경의 특성에 맞게 적응시킨다.On the other hand, the recognizer adaptor 33 adapts the speech recognition apparatus to the characteristics of the speaker or the use environment by using the extracted features and recognition results.

이 과정은 기기의 실제 사용 이전의 훈련과정으로써 이루어지거나 또는 실제 사용하는 도중에 이루어질 수 있다.This can be done as a training course before the actual use of the device or during the actual use.

본 발명에 따른 전자동 세탁기의 음성인식장치는 다음과 같은 효과가 있다.Voice recognition device of the automatic washing machine according to the present invention has the following effects.

첫째, 전자동 세탁기를 음성 인식에 의해 제어함으로써, 그의 편리성 및 부가가치를 증대시킬 수 있다.First, by controlling the automatic washing machine by voice recognition, its convenience and added value can be increased.

둘째, 전자동 세탁기에 음성 인식 기능을 적용함에 있어 가장 큰 문제였던 노이즈 문제를 해결함으로써, 세탁기에서 발생하는 노이즈에도 불구하고 음성 인식을 가능케할 수 있다.Second, by solving the noise problem that was the biggest problem in applying the speech recognition function to the automatic washing machine, it is possible to enable speech recognition in spite of the noise generated in the washing machine.

Claims (3)

세탁기 구성부품에서 발생하거나 급/배수시 발생한 노이즈 신호를 세탁기 본체에 내장된 마이크 또는 별도로 구비되는 리모컨에 내장된 마이크로부터 입력되는 음성신호에 적응시켜서 상기 노이즈 신호가 제거된 음성신호를 출력하는 적응 필터부와,An adaptive filter that outputs a voice signal from which the noise signal is removed by adapting a noise signal generated from a washing machine component or a noise signal generated from a water supply / drainage to a voice signal input from a microphone built in a washing machine body or a microphone built in a remote controller. Wealth, 상기 적응 필터부의 음성신호를 인가받아 음성 구간 검출 알고리즘을 수행하여 음성 구간을 검출하고, 검출된 음성 신호을 분석하여 특징을 추출하며, 그 추출된 특징을 기준 패턴과 비교하거나 기준 모델의 발생 확률을 계산하여 입력된 음성을 인식 또는 거부하고, 상기 추출된 특징 및 인식 결과를 인식기에 적응하여 인식된 결과를 주변기기에 수행하도록 하는 음성인식부를 포함하여서 됨을 특징으로 하는 전자동 세탁기의 음성인식장치.The speech signal is applied to the adaptive filter unit to perform a speech section detection algorithm to detect a speech section, analyze the detected speech signal to extract a feature, and compare the extracted feature with a reference pattern or calculate a probability of occurrence of a reference model. And a voice recognition unit configured to recognize or reject the input voice and to adapt the extracted feature and the recognition result to a recognizer to perform the recognized result on the peripheral device. 제 1 항에 있어서, The method of claim 1, 상기 적응 필터부는, The adaptive filter unit, 세탁기에서 발생한 노이즈 신호와 마이크로부터 입력된 음성신호를 가산하여 노이즈가 혼합된 음성신호를 출력하는 제 1 혼합기와; 제 1 혼합기로부터 인가되는 노이즈가 혼합된 음성신호와 하기 적응 필터로부터 인가되는 필터링된 신호를 감산하여 노이즈가 제거된 음성신호를 출력하는 제 2 혼합기와; 인가되는 노이즈 신호를 필터링하여 출력하고 제 2 혼합기로부터 출력되는 노이즈가 제거된 음성신호를 피드백하여 필터의 계수를 조정하는 적응 필터;를 포함하여 구성됨을 특징으로 하는 전자동 세탁기의 음성인식장치.A first mixer for adding a noise signal generated from a washing machine and a voice signal input from a microphone to output a voice signal mixed with noise; A second mixer for subtracting the speech signal mixed with the noise applied from the first mixer and the filtered signal applied from the following adaptive filter and outputting the speech signal from which the noise is removed; And an adaptive filter for filtering and outputting an applied noise signal and feeding back a noise signal from which the noise output from the second mixer is removed to adjust coefficients of the filter. 제 1 항에 있어서, The method of claim 1, 세탁기 본체에 내장된 마이크 또는 별도로 구비되는 리모컨에 내장된 마이크로부터 입력되는 음성신호는 외부의 노이즈 신호와 세탁기에서 발생한 노이즈 신호가 포함된 음성신호인 것을 특징으로 하는 전자동 세탁기의 음성인식장치.The voice signal input from the microphone built in the washing machine body or the microphone built in the remote controller provided separately is a voice signal including an external noise signal and a noise signal generated by the washing machine.
KR1020020077942A 2002-12-09 2002-12-09 Voice recognition device of automatic washing machine KR100934651B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020020077942A KR100934651B1 (en) 2002-12-09 2002-12-09 Voice recognition device of automatic washing machine

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020020077942A KR100934651B1 (en) 2002-12-09 2002-12-09 Voice recognition device of automatic washing machine

Publications (2)

Publication Number Publication Date
KR20040050224A KR20040050224A (en) 2004-06-16
KR100934651B1 true KR100934651B1 (en) 2009-12-31

Family

ID=37344451

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020020077942A KR100934651B1 (en) 2002-12-09 2002-12-09 Voice recognition device of automatic washing machine

Country Status (1)

Country Link
KR (1) KR100934651B1 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101603104B1 (en) * 2008-11-17 2016-03-14 엘지전자 주식회사 Washing Machine and using method for the same
KR20100086897A (en) * 2009-01-23 2010-08-02 엘지전자 주식회사 Method for noise reducing in washing machine and washing machine having the same
KR102471499B1 (en) 2016-07-05 2022-11-28 삼성전자주식회사 Image Processing Apparatus and Driving Method Thereof, and Computer Readable Recording Medium
CN109487492A (en) * 2018-10-12 2019-03-19 南京创维电器研究院有限公司 Washing machine, washing machine voice control model of mind designing system and its operation method

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH067577A (en) * 1992-06-26 1994-01-18 Matsushita Electric Ind Co Ltd Washing machine
KR100195925B1 (en) * 1996-11-07 1999-06-15 구자홍 Control method of full automatic washing machine having microphone
JPH11304959A (en) * 1998-04-17 1999-11-05 Toshiba Corp Electrical equipment
JP2001293284A (en) * 2000-04-13 2001-10-23 Hitachi Ltd Washing machine

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH067577A (en) * 1992-06-26 1994-01-18 Matsushita Electric Ind Co Ltd Washing machine
KR100195925B1 (en) * 1996-11-07 1999-06-15 구자홍 Control method of full automatic washing machine having microphone
JPH11304959A (en) * 1998-04-17 1999-11-05 Toshiba Corp Electrical equipment
JP2001293284A (en) * 2000-04-13 2001-10-23 Hitachi Ltd Washing machine

Also Published As

Publication number Publication date
KR20040050224A (en) 2004-06-16

Similar Documents

Publication Publication Date Title
Dahake et al. Speaker dependent speech emotion recognition using MFCC and Support Vector Machine
US6671669B1 (en) combined engine system and method for voice recognition
US7769588B2 (en) Spoken man-machine interface with speaker identification
CN1248192C (en) Semi-monitoring speaker self-adaption
US4811399A (en) Apparatus and method for automatic speech recognition
US5025471A (en) Method and apparatus for extracting information-bearing portions of a signal for recognizing varying instances of similar patterns
US20130054236A1 (en) Method for the detection of speech segments
EP1022725B1 (en) Selection of acoustic models using speaker verification
CA2055749C (en) Method and system for speech recognition without noise interference
KR20100027865A (en) Speaker recognition and speech recognition apparatus and method thereof
US6574596B2 (en) Voice recognition rejection scheme
EP1376537B1 (en) Apparatus, method, and computer-readable recording medium for recognition of keywords from spontaneous speech
CN109065026B (en) Recording control method and device
KR100934651B1 (en) Voice recognition device of automatic washing machine
KR100587260B1 (en) speech recognizing system of sound apparatus
KR100737358B1 (en) Method for verifying speech/non-speech and voice recognition apparatus using the same
JP2996019B2 (en) Voice recognition device
CN111192573B (en) Intelligent control method for equipment based on voice recognition
KR101529918B1 (en) Speech recognition apparatus using the multi-thread and methmod thereof
CN111105798B (en) Equipment control method based on voice recognition
Tuasikal et al. Voice activation using speaker recognition for controlling humanoid robot
KR20000056849A (en) method for recognizing speech in sound apparatus
KR20040050765A (en) method for recognizing speech in sound apparatus
EP1387350A1 (en) Spoken man-machine interface with speaker identification
JP2001350494A (en) Device and method for collating

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20121128

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20131122

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20141124

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20151124

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20161114

Year of fee payment: 8

LAPS Lapse due to unpaid annual fee