KR102656501B1 - Method for voice cancelling for call security and apparatus for the same - Google Patents
Method for voice cancelling for call security and apparatus for the same Download PDFInfo
- Publication number
- KR102656501B1 KR102656501B1 KR1020190087109A KR20190087109A KR102656501B1 KR 102656501 B1 KR102656501 B1 KR 102656501B1 KR 1020190087109 A KR1020190087109 A KR 1020190087109A KR 20190087109 A KR20190087109 A KR 20190087109A KR 102656501 B1 KR102656501 B1 KR 102656501B1
- Authority
- KR
- South Korea
- Prior art keywords
- signal
- voice signal
- voice
- offset
- caller
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 42
- 238000013473 artificial intelligence Methods 0.000 claims abstract description 11
- 238000013135 deep learning Methods 0.000 claims abstract description 11
- 238000012545 processing Methods 0.000 claims abstract description 11
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 claims description 7
- 230000005236 sound signal Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000000981 bystander Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000001149 cognitive effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/20—Arrangements for preventing acoustic feed-back
Abstract
통화음성 상쇄방법이 개시된다. 본 발명에 따른 통화음성 상쇄방법은 통화자의 음성신호를 감지하는 단계 및 상쇄신호 저장부에 저장된 사전저장 상쇄신호를 이용하여 상기 감지된 음성신호를 상쇄하는 상쇄신호를 출력하는 단계를 포함하고, 상기 사전저장 상쇄신호는 사전에 상기 통화자의 음성신호에 대해 딥러닝을 포함하는 인공지능 학습 및 빅데이터 처리에 기반한 사전분석 정보에 기초하여 생성된 후 상기 상쇄신호 저장부에 저장된다.A call voice offset method is disclosed. The call voice cancellation method according to the present invention includes the steps of detecting a caller's voice signal and outputting an offset signal that cancels out the detected voice signal using a pre-stored offset signal stored in an offset signal storage unit, A pre-stored offset signal is generated based on pre-analysis information based on artificial intelligence learning and big data processing, including deep learning, for the caller's voice signal and then stored in the offset signal storage unit.
Description
본 발명은 소리상쇄 방법 및 장치에 관한 것으로, 상세하게는 통화 중인 사람의 통화음성 유출 및 통화로 인한 소음을 방지하기 위한 통화음성 상쇄방법 및 장치에 관한 것이다.The present invention relates to a sound canceling method and device, and more specifically, to a call voice canceling method and device for preventing the voice of a person on the phone from leaking and noise caused by the call.
통신 기술의 발전으로 스마트폰과 같은 개인 휴대단말의 보급이 확대되어 때와 장소를 가리지 않고 통화를 할 수 있는 시대가 되었다. 그러나 이러한 상황으로 말미암아 도 1에 도시된 바와 같이 대중 교통 이용 중인 상황이나 공공장소와 같은 곳에서 개인 휴대단말을 이용하여 통화 시 통화자(110)의 통화 내용이 주위의 다른 사람(120)에게 노출될 수 있을 뿐만이 아니라, 통화자 주변의 사람(130)에게 불필요한 소음을 유발할 수 있다. With the advancement of communication technology, the spread of personal mobile devices such as smartphones has expanded, leading to an era in which calls can be made anytime and anywhere. However, due to this situation, as shown in Figure 1, when making a call using a personal mobile terminal while using public transportation or in a public place, the caller's (110) call content is exposed to other people (120) around him. Not only that, but it can also cause unnecessary noise to people 130 around the caller.
통화자가 작은 소리로 말해도 개인 휴대단말이 잘 인식하여 통화 상대방에게는 선명하게 전달되게 하는 기술은 이미 많은 연구가 진행되어 개인 휴대단말에 적용되어서 사용자가 의식적으로 목소리를 낮추어 통화를 함으로써 통화 소음을 줄일 수는 있겠으나, 이 경우에도 통화 내용이 외부로 노출될 수 있을 뿐만이 아니라, 통화 도중 부주의 등으로 목소리가 커질 수도 있어 통화로 인한 소음이 주변에 유발될 수도 있는 문제는 상존한다.A lot of research has already been done on the technology that allows personal mobile devices to recognize even if the caller speaks in a low voice and transmit it clearly to the other party on the phone, and it has been applied to personal mobile devices so that users can reduce call noise by consciously lowering their voice when talking. However, in this case, not only can the content of the call be exposed to the outside world, but also the voice may become loud due to carelessness during the call, causing noise from the call to the surrounding area.
그러므로 개인 휴대단말을 이용하여 실내외에서 통화 시 주변의 사람들에게 통화 내용의 유출을 막고, 통화로 인한 소음 유발을 막을 방법 및 장치의 개발이 필요하다.Therefore, there is a need to develop a method and device to prevent the content of the call from being leaked to people around when making a call indoors or outdoors using a personal mobile device and to prevent noise caused by the call.
상기와 같은 문제점을 해결하기 위한 본 발명의 목적은, 개인 휴대단말을 이용한 실내외 통화 시 통화 음성의 외부 유출을 막고 주변에의 소음작용을 최소화하기 위한 통화음성 상쇄방법 및 장치를 제공하는 데 있다.The purpose of the present invention to solve the above problems is to provide a call voice canceling method and device for preventing outside leakage of call voice and minimizing noise effects in the surrounding area during indoor and outdoor calls using a personal mobile terminal.
상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른 통화음성 상쇄방법은, 통화자의 음성신호를 감지하는 단계 및 상쇄신호 저장부에 저장된 사전저장 상쇄신호를 이용하여 상기 감지된 음성신호를 상쇄하는 상쇄신호를 출력하는 단계를 포함하고, 상기 사전저장 상쇄신호는 사전에 상기 통화자의 음성신호에 대해 딥러닝을 포함하는 인공지능 학습 및 빅데이터 처리에 기반한 사전분석 정보에 기초하여 생성된 후 상기 상쇄신호 저장부에 저장된다.A call voice cancellation method according to an embodiment of the present invention to achieve the above object includes detecting a caller's voice signal and offsetting the detected voice signal using a pre-stored offset signal stored in an offset signal storage unit. A step of outputting an offset signal, wherein the pre-stored offset signal is generated based on pre-analysis information based on artificial intelligence learning and big data processing including deep learning for the caller's voice signal in advance, and then the offset is generated. It is stored in the signal storage unit.
상기 사전저장 상쇄신호를 이용하여 상기 감지된 음성신호를 상쇄하는 상쇄신호를 출력하는 단계는 상기 통화자의 발성부 방향을 제외한 방향으로 상기 사전저장 상쇄신호를 출력하는 단계를 포함한다.The step of outputting an offset signal that cancels out the detected voice signal using the pre-stored offset signal includes outputting the pre-stored offset signal in a direction other than the direction of the speaker's vocalist.
상기 목적을 달성하기 위한 본 발명의 다른 실시예에 따른 통화음성 상쇄방법은, 통화자의 음성신호를 감지하는 단계, 감지된 상기 음성신호로부터 음성신호 정보를 검출하는 단계, 검출된 상기 음성신호 정보에 기초하여 예측 상쇄신호를 생성하는 단계 및 생성된 상기 예측 상쇄신호를 상기 감지된 음성신호를 상쇄하는 상쇄신호로서 출력하는 단계를 포함하고, 상기 예측 상쇄신호는 상기 음성신호 정보에 대한 상기 통화자의 언어 습관 및 사용상황에 대한 딥러닝을 포함하는 인공지능 학습 및 빅데이터 처리에 기반한 패턴분석 및 자연어 분석에 기초하여 생성된다.A call voice cancellation method according to another embodiment of the present invention for achieving the above object includes the steps of detecting a caller's voice signal, detecting voice signal information from the detected voice signal, and adding the detected voice signal information to the voice signal information. A step of generating a prediction cancellation signal based on the generated prediction cancellation signal and outputting the generated prediction cancellation signal as a cancellation signal that cancels out the detected voice signal, wherein the prediction cancellation signal is the language of the caller with respect to the voice signal information. It is created based on pattern analysis and natural language analysis based on artificial intelligence learning and big data processing, including deep learning on habits and usage situations.
생성된 상기 예측 상쇄신호를 상기 감지된 음성신호를 상쇄하는 상쇄신호로서 출력하는 단계는 상기 통화자의 발성부 방향을 제외한 방향으로 생성된 상기 예측 상쇄신호를 출력하는 단계를 포함한다.The step of outputting the generated prediction cancellation signal as a cancellation signal that cancels out the detected voice signal includes outputting the prediction cancellation signal generated in a direction other than the direction of the speaker's vocalization unit.
상기 음성신호 정보는 상기 음성신호의 주파수 정보, 진폭 정보 및 위상 정보 중 적어도 하나를 포함한다.The voice signal information includes at least one of frequency information, amplitude information, and phase information of the voice signal.
상기 통화자의 음성신호를 감지하는 단계는 음성신호 입력부로 입력되는 상기 음성신호의 크기를 확인하는 단계 및 상기 확인된 음성신호의 크기가 소정의 크기 이상이면 유효한 음성신호로 판정하는 단계를 포함한다.The step of detecting the caller's voice signal includes the step of checking the size of the voice signal input to the voice signal input unit and determining that the voice signal is valid if the volume of the confirmed voice signal is greater than a predetermined size.
상기 통화자의 음성신호를 감지하는 단계는 상기 통화자에 의한 통화음성 상쇄동작 가동선택을 입력받는 단계 및 음성신호 입력부로 입력된 상기 음성신호를 유효한 음성신호로 판정하는 단계를 포함한다.The step of detecting the caller's voice signal includes receiving a call voice offset operation selection input by the caller and determining the voice signal input to the voice signal input unit as a valid voice signal.
상기 통화자의 음성신호를 감지하는 단계는 상기 통화자에 의한 통화 시작부터 음성신호 입력부를 통해 상기 음성신호를 입력받는 단계 및 상기 음성신호 입력부로 입력된 상기 음성신호를 유효한 음성신호로 판정하는 단계를 포함한다.The step of detecting the voice signal of the caller includes receiving the voice signal through a voice signal input unit from the start of the call by the caller and determining the voice signal input to the voice signal input unit as a valid voice signal. Includes.
상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른 통화음성 상쇄장치는 통화자의 음성을 입력받는 음성신호 입력부, 상기 입력된 음성으로부터 상기 통화자의 음성신호를 감지해서 음성신호 정보를 검출하는 음성신호 분석부, 검출된 상기 음성신호 정보를 상쇄하기 위한 예측 상쇄신호를 생성하는 상쇄신호 생성부, 상기 통화자의 음성신호에 대해 사전에 딥러닝을 포함하는 인공지능 학습 및 빅데이터 처리에 기초하여 생성된 사전저장 상쇄신호를 저장하는 상쇄신호 저장부, 생성된 상기 예측 상쇄신호 및 사전저장 상쇄신호 중 적어도 하나를 출력하는 상쇄신호 출력부 및 상기 음성신호 입력부, 음성신호 분석부, 상쇄신호 생성부, 상쇄신호 저장부 및 상쇄신호 출력부를 제어하는 음성신호 상쇄제어부를 포함하고, 상기 예측 상쇄신호는 상기 통화자의 음성신호 정보에 대한 상기 통화자의 언어 습관 및 사용상황에 대한 딥러닝을 포함하는 인공지능 학습 및 빅데이터 처리에 기반한 패턴분석 및 자연어 분석에 기초하여 생성된다A call voice canceling device according to an embodiment of the present invention for achieving the above object includes a voice signal input unit that receives the caller's voice, and a voice signal that detects the caller's voice signal from the input voice and detects voice signal information. An analysis unit, an offset signal generator that generates a predicted offset signal to offset the detected voice signal information, and an artificial intelligence learning and big data processing including deep learning in advance for the caller's voice signal. An offset signal storage unit for storing a pre-stored offset signal, an offset signal output unit for outputting at least one of the generated predicted offset signal and a pre-stored offset signal, and the audio signal input unit, an audio signal analyzer, an offset signal generator, and an offset signal. It includes a voice signal cancellation control unit that controls a signal storage unit and a cancellation signal output unit, and the predicted cancellation signal includes deep learning on the caller's language habits and usage situations for the caller's voice signal information, and artificial intelligence learning and It is created based on pattern analysis and natural language analysis based on big data processing.
상기 음성신호 정보는 상기 음성신호의 주파수 정보, 진폭 정보 및 위상 정보 중 적어도 하나를 포함한다.The voice signal information includes at least one of frequency information, amplitude information, and phase information of the voice signal.
상기 음성신호 분석부는 상기 음성신호의 크기가 소정의 크기 이상이면 유효한 음성신호로서 감지하거나, 상기 통화자에 의한 통화음성 상쇄동작 가동선택 시부터 상기 음성신호를 유효한 음성신호로서 감지하거나, 통화 시작부터 상기 음성신호를 유효한 음성신호로서 감지한다.The voice signal analysis unit detects the voice signal as a valid voice signal when the size of the voice signal is greater than a predetermined size, or detects the voice signal as a valid voice signal from the time the call voice offset operation is selected by the caller, or from the start of the call. The voice signal is detected as a valid voice signal.
상기 상쇄신호 출력부는 지향성 신호출력 장치이다.The offset signal output unit is a directional signal output device.
삭제delete
삭제delete
삭제delete
삭제delete
본 발명에 의하면, 통화 당사자의 음성을 분석하여 이에 대응되는 소리를 생성하여 이를 이용하거나 미리 저장된 소리를 이용하여 통화 당사자의 통화 내용의 외부 유출을 막고 통화로 인한 주변에의 소음 유발을 최소화할 수 있다.According to the present invention, it is possible to analyze the voice of a calling party and generate a corresponding sound and use this or a pre-stored sound to prevent the contents of the calling party's call from leaking to the outside and minimize the noise caused by the call to the surrounding area. there is.
도 1은 종래 기술에 따른 통화 시 통화내용 유출 및 소음유발을 설명하는 개념도.
도 2는 본 발명의 일 실시예에 따른 통화음성 상쇄장치를 설명하는 구성도.
도 3은 본 발명의 일 실시예에 따른 통화음성 상쇄방법을 설명하는 흐름도.
도 4는 본 발명의 일 실시예에 따른 통화음성 상쇄장치를 이용한 경우에서의 통화내용 유출 방지 및 소음유발 해소를 설명하는 개념도.1 is a conceptual diagram illustrating leakage of call content and noise generation during a call according to the prior art.
Figure 2 is a configuration diagram illustrating a call voice cancellation device according to an embodiment of the present invention.
Figure 3 is a flow chart illustrating a call voice cancellation method according to an embodiment of the present invention.
Figure 4 is a conceptual diagram illustrating prevention of leakage of call content and elimination of noise in the case of using a call voice canceling device according to an embodiment of the present invention.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 몇몇 실시예들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 권리범위는 실시예들로부터 관념되는 본 발명의 기술적 사상에 속하는 모든 변경, 변형, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.Since the present invention can be modified in various ways and can have various embodiments, some embodiments will be illustrated in the drawings and described in detail. However, this is not intended to limit the present invention to specific embodiments, and the scope of the present invention should be understood to include all changes, modifications, equivalents, or substitutes falling within the technical spirit of the present invention as conceived from the embodiments. do.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.Terms such as first, second, etc. may be used to describe various components, but the components should not be limited by the terms. The above terms are used only for the purpose of distinguishing one component from another. The term and/or includes any of a plurality of related stated items or a combination of a plurality of related stated items.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에만, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.When a component is said to be "connected" or "connected" to another component, it is understood that it may be directly connected to or connected to the other component, but that other components may exist in between. It should be. Only when a component is said to be "directly connected" or "directly connected" to another component should it be understood that there are no other components in between.
본 출원에서 사용한 용어는 단지 제시되는 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terms used in this application are merely used to describe the presented embodiments and are not intended to limit the present invention. Singular expressions include plural expressions unless the context clearly dictates otherwise. In this application, terms such as “comprise” or “have” are intended to designate the presence of features, numbers, steps, operations, components, parts, or combinations thereof described in the specification, but are not intended to indicate the presence of other features, numbers, or steps. , it should be understood that this does not exclude in advance the possibility of the presence or addition of operations, components, parts, or combinations thereof.
기술적이거나 과학적인 용어를 포함해서 본 명세서에서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있으며, 이상적이거나 과도하게 축소된 형식적인 의미로 해석되지 않아야 할 것이며, 본 명세서에서 어떤 용어의 의미를 정의할 경우 해 용어는 그 정의된 대로 해석되어야 한다.All terms used in this specification, including technical or scientific terms, have the same meaning as generally understood by a person of ordinary skill in the technical field to which the present invention pertains, and are not idealized or excessively reduced formal terms. It should not be interpreted as meaning, and when the meaning of a term is defined in this specification, the term should be interpreted as defined.
이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예를 보다 상세하게 설명하고자 한다. 본 발명을 설명함에 있어 전체적인 이해를 용이하게 하기 위하여 도면상의 동일한 구성요소에 대해서는 동일한 참조부호를 사용하고 동일한 구성요소에 대해서 중복된 설명은 생략한다.Hereinafter, preferred embodiments of the present invention will be described in more detail with reference to the attached drawings. In order to facilitate overall understanding when describing the present invention, the same reference numerals are used for the same components in the drawings, and duplicate descriptions for the same components are omitted.
도 2는 본 발명의 일 실시예에 따른 통화음성 상쇄장치를 설명하는 구성도이다.Figure 2 is a configuration diagram illustrating a call voice cancellation device according to an embodiment of the present invention.
도 2를 참조하면, 본 발명의 일 실시예에 따른 통화음성 상쇄장치(200)는 통화자의 음성신호를 입력받는 음성신호 입력부(210), 입력된 음성신호를 분석하여 음성신호 정보를 검출하는 음성신호 분석부(220), 음성신호를 상쇄할 수 있는 상쇄신호를 생성하는 상쇄신호 생성부(240), 통화자의 음성신호 분석에 기초하여 사전에 생성된 사전저장 상쇄신호를 저장하는 상쇄신호 저장부(250), 상쇄신호 생성부(240)에서 생성된 상쇄신호 및 사전저장 상쇄신호를 출력하는 상쇄신호 출력부(260), 및 이들을 제어하는 음성신호 상쇄제어부(230)을 포함한다. 이하 통화음성 상쇄장치(200)의 구성요소에 대해 상세히 설명한다.Referring to FIG. 2, the call voice cancellation device 200 according to an embodiment of the present invention includes a voice signal input unit 210 that receives the caller's voice signal, and a voice signal that analyzes the input voice signal and detects voice signal information. A signal analysis unit 220, an offset signal generator 240 that generates an offset signal capable of offsetting a voice signal, and an offset signal storage unit that stores a pre-stored offset signal generated in advance based on analysis of the caller's voice signal. (250), an offset signal output unit 260 that outputs the offset signal generated by the offset signal generator 240 and a pre-stored offset signal, and a voice signal offset control unit 230 that controls them. Hereinafter, the components of the call voice cancellation device 200 will be described in detail.
통화음성 상쇄장치(200)의 음성신호 입력부(210)는 개인 휴대단말의 마이크로폰과 같이 소리를 입력 받는 모듈로서 통화자의 음성신호뿐만이 아니라 주변의 소리 등도 같이 입력될 수 있다. 음성신호 입력부(210)는 입력된 음성신호를 음성신호 분석부(220)로 무조건 전달하거나 후술할 본 발명의 일 실시에에 따른 음성신호 상쇄제어부(230)의 제어에 기초하여 입력된 음성신호를 음성신호 분석부(220)로 전달할 수 있다.The voice signal input unit 210 of the call voice cancellation device 200 is a module that receives sound like a microphone of a personal mobile terminal, and can input not only the caller's voice signal but also surrounding sounds. The voice signal input unit 210 unconditionally transmits the input voice signal to the voice signal analysis unit 220 or transmits the input voice signal based on the control of the voice signal offset control unit 230 according to an embodiment of the present invention, which will be described later. It can be transmitted to the voice signal analysis unit 220.
통화음성 상쇄장치(200)의 음성신호 분석부(220)는 음성신호 입력부(210)로부터 음성신호를 전달받아 음성신호를 감지하여 음성신호 정보를 검출한다. 또한, 음성신호 분석부(220)는 음성신호 상쇄제어부의 제어에 기초하여 음성신호 입력부(210)로부터 전달받은 음성신호에 대해 감지한다.The voice signal analysis unit 220 of the call voice cancellation device 200 receives a voice signal from the voice signal input unit 210 and detects the voice signal to detect voice signal information. Additionally, the voice signal analysis unit 220 detects the voice signal received from the voice signal input unit 210 based on the control of the voice signal offset control unit.
음성신호 분석부(220)는 음성신호 입력부(210)로부터 전달받은 음성신호의 크기가 소정의 크기 이상일 경우에만 음성신호를 유효한 음성신호로 감지하도록 구현될 수 있다. 또는 통화자가 개인 휴대단말의 특정 버튼이나 화면에 표시되는 특정 아이콘을 누르면 음성신호를 감지하도록 구현될 수 있다(그 외에도 특정 단어를 말하거나 특정 제스처를 취하는 방법으로도 음성신호 감지를 시작하도록 구현될 수 있다).The voice signal analysis unit 220 may be implemented to detect the voice signal as a valid voice signal only when the size of the voice signal received from the voice signal input unit 210 is greater than a predetermined size. Alternatively, it can be implemented to detect voice signals when the caller presses a specific button on the personal mobile terminal or a specific icon displayed on the screen (in addition, it can be implemented to start detecting voice signals by saying a specific word or making a specific gesture). can).
음성신호 분석부(220)는 사용편의성을 위해 통화 시작부터 음성신호 입력부로부터 전달받은 모든 음성신호를 유효한 음성신호로서 감지하도록 구현될 수 있다. 이러한 음성신호 감지 방식은 한 가지 방식만이 아니라 전술한 방식 중 두 개 이상이 동시에 적용될 수 있다.For ease of use, the voice signal analysis unit 220 may be implemented to detect all voice signals received from the voice signal input unit from the start of the call as valid voice signals. This voice signal detection method is not limited to one method, but two or more of the above-mentioned methods can be applied simultaneously.
또한 음성신호 분석부(220)는 감지된 음성신호로부터 음성신호 정보를 검출한다. 본 발명의 일 실시예에 따른 음성신호 정보는 음성신호의 주파수 정보, 진폭 정보 및 위상 정보를 포함할 수 있다. 음성신호 분석부(220)는 검출된 음성신호 정보로부터 통화자의 음성 특징을 도출할 수 있고 음성신호 상쇄제어부(230)의 제어에 기초하여 상쇄신호 생성부(240)로 음성신호 정보를 전달한다.Additionally, the voice signal analysis unit 220 detects voice signal information from the detected voice signal. Voice signal information according to an embodiment of the present invention may include frequency information, amplitude information, and phase information of the voice signal. The voice signal analysis unit 220 can derive the caller's voice characteristics from the detected voice signal information and transmits the voice signal information to the cancellation signal generator 240 based on the control of the voice signal cancellation control unit 230.
통화음성 상쇄장치(200)의 상쇄신호 생성부(240)는 음성신호 분석부(220)로부터 전달받은 음성신호 정보에 기초하여 음성신호를 상쇄할 수 있는 상쇄신호를 생성한다. 상쇄신호 생성부(240)는 전달받은 음성신호 정보에 기초해서 해당 음성신호의 주파수와 진폭은 동일하나(완전히 동일하지는 않더라도 일정 수준의 동일성을 갖는 주파수와 진폭도 포함함), 위상차는 180도인 신호를 상쇄신호로서 생성할 수 있다. The cancellation signal generator 240 of the call voice cancellation device 200 generates a cancellation signal capable of canceling out the voice signal based on the voice signal information received from the voice signal analysis unit 220. Based on the received voice signal information, the offset signal generator 240 generates a signal whose frequency and amplitude are the same (including frequencies and amplitudes that have a certain level of identity even if they are not completely the same), but whose phase difference is 180 degrees. can be generated as an offset signal.
상쇄신호 생성부(240)는 음성신호 분석부(220)로부터 음성신호 정보를 실시간으로 전달받아 해당 음성신호 정보에 기초하여 그와 180도 위상차를 가지는 상쇄신호(주파수와 진폭은 동일)를 실시간으로 생성할 수 있다(이를 실시간 상쇄신호로 칭함). 여기서 실시간이란 음성신호 입력부(210) 및 음성신호 분석부(220)를 거쳐 상쇄신호 생성부(240)로 전달된 음성신호에 대한 상쇄신호 생성부(240)에서의 상쇄신호 생성 후 후술할 상쇄신호 출력부(260)를 통해 출력될 때까지 걸리는 시간이 평균적인 인간의 청력 및 인지 수준을 고려 시 동일한 시간 내로 인정될 수 있는 시간뿐만이 아니라 일정 범위 내로 지연된 시간을 포함한다. The cancellation signal generator 240 receives voice signal information in real time from the voice signal analysis unit 220 and generates an offset signal (the same frequency and amplitude) having a phase difference of 180 degrees in real time based on the voice signal information. It can be generated (this is called a real-time offset signal). Here, real time refers to the generation of a cancellation signal in the cancellation signal generation unit 240 for the voice signal transmitted to the cancellation signal generation unit 240 through the voice signal input unit 210 and the voice signal analysis unit 220, and then the cancellation signal to be described later. The time taken to be output through the output unit 260 includes not only a time that can be recognized as the same time considering the average human hearing and cognitive level, but also a time delayed within a certain range.
다른 실시예로서, 상쇄신호 생성부(240)는 개인 휴대단말 통화자의 음성신호 정보에 대한 패턴분석 및 자연어 분석 등에 기초하여 통화자의 음성신호를 미리 예측하여 이를 상쇄하기 위한 예측 상쇄신호를 생성한다. 즉, 통화자의 언어 습관 및 사용 상황 등에 대한 빅데이터 처리, 딥러닝 및 인공지능에 의한 통화자 언어 습관 분석 등을 통해 통화자의 음성신호를 예측하여 상쇄신호를 생성 후 이를 상쇄신호 출력부(260)를 통해 출력한다. In another embodiment, the offset signal generator 240 predicts the caller's voice signal in advance based on pattern analysis and natural language analysis of the caller's voice signal information on the personal mobile terminal and generates a predicted offset signal to cancel it. In other words, the caller's voice signal is predicted through big data processing on the caller's language habits and usage situations, analysis of the caller's language habits by deep learning and artificial intelligence, etc., and an offset signal is generated, and then the offset signal output unit 260 Output via .
한편, 상쇄신호 생성부(240)는 상쇄 동작을 위해 실시간 상쇄신호 및 예측 상쇄신호 각각 뿐 아니라 두 종류의 상쇄신호를 음성신호 상쇄제어부(230)의 제어에 기초하여 상쇄신호 출력부로 전달할 수 있다.Meanwhile, the offset signal generator 240 may transmit not only a real-time offset signal and a predicted offset signal, but also two types of offset signals to the offset signal output unit based on the control of the voice signal offset control unit 230 for the offset operation.
통화음성 상쇄장치(200)의 상쇄신호 저장부(250)는 통화자의 음성신호 분석에 기초하여 사전에 생성된 사전저장 상쇄신호를 저장한다. 통화자의 음성 정보에 대해 사전 학습을 하여 다양한 통화자 음성신호를 상쇄신호 저장부(250)에 등록 및 저장하여 추후 통화자 음성신호에 대한 상쇄동작 시 사전저장 상쇄신호를 이용하여 음성신호를 상쇄한다. 통화자의 음성 정보에 대한 사전 학습 방법으로는 딥러닝 학습, 인공지능 학습, 빅데이터 학습 등이 가능하다. 상쇄신호 저장부(250)에 저장되는 사전저장 상쇄신호로는 일반 백색 잡음신호 등과 같은 음성신호 외의 소리신호도 가능하다.The cancellation signal storage unit 250 of the call voice cancellation device 200 stores a pre-stored cancellation signal generated in advance based on analysis of the caller's voice signal. By learning about the caller's voice information in advance, various caller voice signals are registered and stored in the offset signal storage unit 250, and when performing an offset operation for the caller's voice signal in the future, the voice signal is offset using the pre-stored offset signal. . Advance learning methods for caller's voice information include deep learning learning, artificial intelligence learning, and big data learning. The pre-stored offset signal stored in the offset signal storage unit 250 may be a sound signal other than a voice signal, such as a general white noise signal.
통화음성 상쇄장치(200)의 상쇄신호 출력부(260)는 상쇄신호 생성부(240)에서 생성된 상쇄신호(실시간 상쇄신호 및 예측 상쇄신호) 및 사전저장 상쇄신호 중 어느 하나 또는 둘 이상의 상쇄신호를 출력한다. 상쇄신호 출력부(260)는 개인 휴대단말의 스피커로서 상쇄신호 생성부(240)에서 생성된 상쇄신호나 사전저장 상쇄신호를 출력하기 위한 별도의 전용 스피커일 수 있다.The offset signal output unit 260 of the call voice cancellation device 200 outputs one or more of the offset signal (real-time offset signal and predicted offset signal) and the pre-stored offset signal generated by the offset signal generator 240. outputs. The offset signal output unit 260 is a speaker of a personal mobile terminal and may be a separate dedicated speaker for outputting the offset signal generated by the offset signal generator 240 or the pre-stored offset signal.
이때 상쇄신호 출력부(260)는 통화자가 통화 상대방의 목소리를 인식하는 데 지장을 주지 않고 외부로 상쇄신호가 출력되도록 개인 휴대단말에 설치됨이 바람직하다. 또는 상쇄신호 출력부(260)는 지향성 스피커로서 통화자의 전화통화에 영향을 주지 않고 주변으로만 상쇄신호를 방출하도록 상쇄 신호 출력 방향을 조절할 수 있다.At this time, the offset signal output unit 260 is preferably installed in the personal mobile terminal so that the offset signal is output to the outside without interfering with the caller's recognition of the voice of the other party. Alternatively, the offset signal output unit 260 is a directional speaker and can adjust the output direction of the offset signal so as to emit the offset signal only to the surrounding area without affecting the caller's phone call.
통화음성 상쇄장치(200)의 음성신호 상쇄제어부(230)는 상쇄신호 생성 및 출력 방식을 결정하고, 음성신호 입력부(210), 음성신호 분석부(220), 상쇄신호 생성부(240), 상쇄신호 저장부(250) 및 상쇄신호 출력부(260)를 제어한다. 음성신호 상쇄제어부(230)는 본 발명의 일 실시예에 따른 통화음성 상쇄장치(200)의 각 모듈 간의 동작을 제어한다. The voice signal cancellation control unit 230 of the call voice cancellation device 200 determines the cancellation signal generation and output method, and the voice signal input unit 210, the voice signal analysis unit 220, the cancellation signal generation unit 240, and the offset Controls the signal storage unit 250 and the offset signal output unit 260. The voice signal cancellation control unit 230 controls operations between each module of the call voice cancellation device 200 according to an embodiment of the present invention.
즉, 음성신호 상쇄제어부(230)는 실시간 상쇄신호 생성 방식 이용 여부, 예측 상쇄신호 생성 방식 이용 여부 또는 사전 상쇄신호 이용 여부 등을 결정하고, 결정된 방식 등에 따라 통화 음성상쇄를 하기 위해 통화음성 상쇄장치(200)의 모듈 간 동작을 제어한다. 다음으로 본 발명의 일 실시예에 따른 통화음성 상쇄장치(200)를 이용한 통화음성 상쇄방법을 설명한다.That is, the voice signal offset control unit 230 determines whether to use the real-time offset signal generation method, whether to use the predicted offset signal generation method, or whether to use the pre-offset signal, and uses a call voice offset device to cancel the call voice according to the determined method. Controls the operation between modules of 200. Next, a method of canceling call voice using the call voice canceling device 200 according to an embodiment of the present invention will be described.
도 3은 본 발명의 일 실시예에 따른 통화음성 상쇄방법을 설명하는 흐름도이다.Figure 3 is a flowchart explaining a call voice cancellation method according to an embodiment of the present invention.
도 3의 본 발명의 일 실시예에 따른 통화음성 상쇄방법은 도 2의 본 발명의 일 실시예에 따른 통화음성 상쇄장치(200)를 이용해서 통화음성을 상쇄하는 방법의 일 실시예에 대한 것으로서 통화자의 음성신호를 감지하고, 사전 저장된 상쇄신호, 실시간 상쇄신호 및 예측 상쇄신호 중 적어도 하나를 이용하여 감지된 통화자의 음성신호를 상쇄하는 방법에 대한 것이다.The call voice canceling method according to an embodiment of the present invention in FIG. 3 relates to an embodiment of a call voice canceling method using the call voice canceling device 200 according to an embodiment of the present invention in FIG. 2. It relates to a method of detecting a caller's voice signal and offsetting the detected caller's voice signal using at least one of a pre-stored offset signal, a real-time offset signal, and a predicted offset signal.
본 발명의 일 실시예에 따른 통화음성 상쇄방법은 먼저 음성신호 입력부(210) 및 음성신호 분석부(220)를 통해 통화자로부터의 음성신호를 감지한다(S310).The call voice cancellation method according to an embodiment of the present invention first detects a voice signal from the caller through the voice signal input unit 210 and the voice signal analysis unit 220 (S310).
본 발명의 일 실시예에 따른 통화자 음성신호에 대한 감지는 음성신호 입력부(210)로 입력된 음성신호의 크기가 소정의 크기 이상이면 유효한 음성신호로서 감지할 수 있다. 또는 통화자가 개인 휴대단말에 배치된 통화음성 상쇄동작 가동 버튼 또는 아이콘을 선택하여 누를 시점부터 음성신호 입력부(210)로 입력된 음성신호를 유효한 음성신호로서 감지하거나, 통화 시작부터 음성신호 입력부(210)로 입력된 음성신호를 유효한 음성신호로서 감지할 수 있다.Detection of the caller's voice signal according to an embodiment of the present invention can be detected as a valid voice signal if the size of the voice signal input to the voice signal input unit 210 is greater than a predetermined size. Alternatively, the voice signal input to the voice signal input unit 210 is detected as a valid voice signal from the time the caller selects and presses the call voice offset operation operation button or icon placed on the personal mobile terminal, or the voice signal input unit 210 from the start of the call ) can be detected as a valid voice signal.
음성신호 상쇄제어부(230)는 감지된 음성신호를 상쇄하기 위한 방식을 결정하기 위해 사전저장 상쇄신호를 이용할 지 또는 상쇄신호 생성부(240)를 통해 상쇄신호를 생성하는 방식을 이용할지를 결정하는데, 이를 위해 먼저 사전저장 상쇄신호를 이용하여 음성신호를 상쇄할 지 여부를 결정한다(S320). 사전저장 상쇄신호를 이용하는 것으로 결정되면(S320의 예) 상쇄신호 출력부(260)에서 사전저장 상쇄신호를 출력한다(S330).The voice signal cancellation control unit 230 determines whether to use a pre-stored offset signal or a method of generating an offset signal through the offset signal generator 240 to determine a method for offsetting the detected voice signal. To this end, it is first determined whether to offset the voice signal using the pre-stored offset signal (S320). If it is determined to use the pre-stored offset signal (example in S320), the pre-stored offset signal is output from the offset signal output unit 260 (S330).
사전저장 상쇄신호를 이용하여 음성신호를 상쇄하지 않는 경우는(S320의 아니오) 음성신호 분석부(220)에서 감지된 음성신호를 이용하여 음성신호 정보를 검출한다(S340). 음성신호 정보가 검출되면 음성신호 상쇄제어부(230)에서는 실시간 상쇄신호를 생성할 지 예측 상쇄신호를 생성할지를 결정한다(S350). 전술한 바와 같이 본 발명의 일 실시예에 따른 음성신호 정보는 상기 음성신호의 주파수 정보, 진폭 정보 및 위상 정보를 포함한다.If the voice signal is not offset using the pre-stored offset signal (No in S320), voice signal information is detected using the voice signal detected by the voice signal analysis unit 220 (S340). When voice signal information is detected, the voice signal offset control unit 230 determines whether to generate a real-time offset signal or a predicted offset signal (S350). As described above, voice signal information according to an embodiment of the present invention includes frequency information, amplitude information, and phase information of the voice signal.
실시간 상쇄신호를 생성하는 경우(S350의 예)는 검출된 음성신호 정보에 기초하여 그에 대응하는 음성신호와 주파수 및 진폭은 동일하고 위상차가 180도인 상쇄음성 신호를 실시간으로 생성하고(S360), 실시간 상쇄신호를 생성하지 않는 경우(S350의 아니오)는 예측 상쇄신호를 생성한다(S370).In the case of generating a real-time offset signal (example of S350), an offset audio signal with the same frequency and amplitude as the corresponding audio signal and a phase difference of 180 degrees is generated in real time based on the detected audio signal information (S360). If an offset signal is not generated (No in S350), a predicted offset signal is generated (S370).
본 발명의 일 실시예에 따른 예측 상쇄신호를 생성하는 방법은 통화자의 음성신호 정보에 대해 패턴분석을 하여 예측 상쇄신호를 생성하거나 통화자의 음성신호 및 음성신호 정보에 기초한 자연어 분석을 통해 예측 상쇄신호를 생성할 수 있다.The method for generating a predicted offset signal according to an embodiment of the present invention is to generate a predicted offset signal by performing pattern analysis on the caller's voice signal information or to generate a predicted offset signal through natural language analysis based on the caller's voice signal and voice signal information. can be created.
이후 생성된 실시간 상쇄신호나 예측 상쇄신호 중 하나를 상쇄신호 출력부(260)로 출력한다(S330). 본 발명의 일 실시예에 따른 음성신호 상쇄방법은 사용 환경이나 통화자의 이용 선택에 따라 사전저장 상쇄신호, 실시간 상쇄신호, 및 예측 상쇄신호 중 어느 하나로 고정하지 않고 통화 도중 변경되도록 구현될 수 있다. 또는 음성신호 상쇄제어부(230)가 주변 환경 등을 고려하여 가변적으로 최적의 음성신호 상쇄방식을 선택할 수 있다.Afterwards, one of the generated real-time offset signal or predicted offset signal is output to the offset signal output unit 260 (S330). The voice signal cancellation method according to an embodiment of the present invention may be implemented to change during a call rather than fixing it to one of a pre-stored offset signal, a real-time offset signal, and a predicted offset signal depending on the usage environment or the caller's usage selection. Alternatively, the voice signal offset control unit 230 may variably select the optimal voice signal offset method in consideration of the surrounding environment, etc.
한편 사전저장 상쇄신호의 이용을 먼저 고려하는 전술한 실시예에서의 통화음성 상쇄방법과는 달리 실시간 상쇄신호나 예측 상쇄신호의 생성을 먼저 고려하는 통화음성 상쇄방법도 가능하다.Meanwhile, unlike the call voice offset method in the above-described embodiment that first considers the use of a pre-stored offset signal, a call voice offset method that first considers the generation of a real-time offset signal or a predicted offset signal is also possible.
또한, 어느 하나의 방법만이 아니라 사전저장 상쇄신호, 실시간 상쇄신호 및 예측 상쇄신호 중 2개 이상을 동시에 적용하여 통화음성을 상쇄할 수 있고, 주변 환경 등을 고려하여 가변적으로 하나 이상의 상쇄신호를 선택하여 통화음성을 상쇄할 수 있다.In addition, the call voice can be offset by applying not only one method but two or more of the pre-stored offset signal, real-time offset signal, and predicted offset signal at the same time, and one or more offset signals can be variably applied in consideration of the surrounding environment, etc. You can select to cancel out the call voice.
사전저장 상쇄신호나 생성된 실시간 상쇄신호 및 예측 상쇄신호를 출력할 때 통화자의 통화 목소리가 출력되는 상쇄신호와 최대한 혼합되지 않도록 통화자의 발성부 방향을 제외한 방향으로 출력한다(이는 통화자의 음성이 통화 상대방에게는 상쇄되지 않고 전달되도록 하기 위함). When outputting a pre-stored offset signal, a generated real-time offset signal, or a predicted offset signal, the caller's voice is output in a direction other than the direction of the caller's vocal part so that it is not mixed as much as possible with the output offset signal (this means that the caller's voice is not mixed with the output offset signal as much as possible). (To ensure that it is delivered to the other party without being offset).
도 4에 도시된 바와 같이 본 발명의 일 실시예에 따른 통화음성 상쇄장치를 이용해서 통화음성을 상쇄하는 방법을 적용할 경우 통화자(410)가 통화 시 발생하는 통화자(410)의 음성신호(440)를 상쇄시키는 상쇄신호(450)로 인해 주변인1(420)에게 통화 내용의 유출이 최소화된다.As shown in Figure 4, when applying the method of canceling the call voice using the call voice canceling device according to an embodiment of the present invention, the voice signal of the caller 410 generated when the caller 410 is on the phone Due to the offset signal (450) that cancels out (440), leakage of call content to bystander 1 (420) is minimized.
또한 통화자(410)가 통화 시 발생하는 통화자(410)의 음성신호(440)를 상쇄시키는 상쇄신호(450)로 인해 주변인2(430)로의 소음유발이 최소화된다In addition, the noise caused to bystanders 2 (430) is minimized due to the offset signal (450) that cancels out the voice signal (440) of the caller (410) generated when the caller (410) makes a call.
한편, 전술한 각 구성은 각각이 별도의 장치로 설명되었으나, 이는 설명의 편의와 이해의 증진을 위한 예시적 설명에 불과한 것으로서, 본 발명의 기술적 사상의 범주 내에서 다양한 형태로 구현될 수 있음은 물론이다. 예컨대, 음성신호 분석부(220) 및 음성신호 상쇄 제어부(230)는 하나의 모듈로 통합되어 구현될 수도 있고, 또는 둘이나 그 이상의 장치로 분할하여 구현될 수 있다.Meanwhile, each of the above-described configurations has been described as a separate device, but this is merely an exemplary explanation for convenience of explanation and improvement of understanding, and may be implemented in various forms within the scope of the technical idea of the present invention. Of course. For example, the voice signal analysis unit 220 and the voice signal cancellation control unit 230 may be integrated and implemented as a single module, or may be implemented by dividing them into two or more devices.
본 발명에 따른 방법들은 다양한 컴퓨터 수단을 통해 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 컴퓨터 판독 가능 매체에 기록되는 프로그램 명령은 본 발명을 위해 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수 있다.Methods according to the present invention may be implemented in the form of program instructions that can be executed through various computer means and recorded on a computer-readable medium. Computer-readable media may include program instructions, data files, data structures, etc., singly or in combination. Program instructions recorded on a computer-readable medium may be those specifically designed and constructed for the present invention, or may be known and usable by those skilled in the computer software art.
컴퓨터 판독 가능 매체의 예에는 롬(rom), 램(ram), 플래시 메모리(flash memory) 등과 같이 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. Examples of computer-readable media include hardware devices specially configured to store and execute program instructions, such as ROM, RAM, flash memory, etc.
또한, ROM(Read Only Memory), RAM(Random Access Memory), 자기 테이프, 자기 디스크, 플래시 메모리, 광 데이터 저장장치 등이 있을 수 있다. 또한, 컴퓨터로 판독 가능한 기록매체는 컴퓨터 통신망으로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 읽을 수 있는 코드로서 저장되고 실행될 수 있다.Additionally, there may be Read Only Memory (ROM), Random Access Memory (RAM), magnetic tape, magnetic disk, flash memory, and optical data storage devices. Additionally, the computer-readable recording medium can be distributed to a computer system connected through a computer communication network, and stored and executed as a code that can be read in a distributed manner.
프로그램 명령의 예에는 컴파일러(compiler)에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터(interpreter) 등을 사용해서 컴퓨터에 의해 실행될 수 있는 고급 언어 코드를 포함한다. 상술한 하드웨어 장치는 본 발명의 동작을 수행하기 위해 적어도 하나의 소프트웨어 모듈로 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.Examples of program instructions include machine language code, such as that produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter, etc. The above-described hardware device may be configured to operate with at least one software module to perform the operations of the present invention, and vice versa.
한편, 본 발명의 실시예에 따른 통화음성 상쇄장치는 컴퓨터 시스템에서 구현되거나, 또는 기록매체에 기록될 수 있다. 컴퓨터 시스템은 적어도 하나 이상의 프로세서와, 메모리와, 사용자 입력 장치와, 데이터 통신 버스와, 사용자 출력 장치와, 저장소를 포함할 수 있다. 전술한 각각의 구성 요소는 데이터 통신 버스를 통해 데이터 통신을 한다.Meanwhile, the call voice cancellation device according to an embodiment of the present invention may be implemented in a computer system or recorded on a recording medium. A computer system may include at least one processor, memory, user input device, data communication bus, user output device, and storage. Each of the above-described components communicates data through a data communication bus.
컴퓨터 시스템은 네트워크에 커플링된 네트워크 인터페이스를 더 포함할 수 있다. 상기 프로세서는 중앙처리 장치(central processing unit (CPU))이거나, 혹은 메모리 및/또는 저장소에 저장된 명령어를 처리하는 반도체 장치일 수 있다. The computer system may further include a network interface coupled to the network. The processor may be a central processing unit (CPU) or a semiconductor device that processes instructions stored in memory and/or storage.
상기 메모리 및 상기 저장소는 다양한 형태의 휘발성 혹은 비휘발성 저장매체를 포함할 수 있다. 예컨대, 상기 메모리는 ROM 및 RAM을 포함할 수 있다.The memory and the storage may include various types of volatile or non-volatile storage media. For example, the memory may include ROM and RAM.
따라서, 본 발명의 실시예에 따른 통화음성 상쇄장치의 통화음성 상쇄방법은 컴퓨터에서 실행 가능한 방법으로 구현될 수 있다. 본 발명의 실시예에 따른 통화음성 상쇄장치의 통화음성 상쇄방법이 컴퓨터 장치에서 수행될 때, 컴퓨터로 판독 가능한 명령어들이 본 발명에 따른 인식 방법을 수행할 수 있다.Therefore, the call voice canceling method of the call voice canceling device according to the embodiment of the present invention can be implemented in a method executable on a computer. When the call voice canceling method of the call voice canceling device according to an embodiment of the present invention is performed on a computer device, computer-readable instructions can perform the recognition method according to the present invention.
이상, 본 발명의 바람직한 실시예를 통해 본 발명의 구성에 대하여 상세히 설명하였다. 그러나 전술한 실시예는 예시에 불과한 것으로서, 본 발명의 권리범위를 제한하지 아니한다. 본 발명의 기술분야에 통상의 지식을 가진 자라면 본 명세서의 교시와 시사로부터 본 발명의 기술적 사상의 범주내의 다양한 변형과 변경이 가능할 것이다. 따라서, 본 발명의 보호범위는 이하의 특허청구범위의 기재에 의하여 정하여짐이 마땅하다.Above, the configuration of the present invention has been described in detail through preferred embodiments of the present invention. However, the above-described embodiments are merely examples and do not limit the scope of the present invention. Those skilled in the art will be able to make various modifications and changes within the scope of the technical idea of the present invention from the teachings and suggestions of the present specification. Therefore, the scope of protection of the present invention should be determined by the description of the claims below.
Claims (16)
상쇄신호 저장부에 저장된 사전저장 상쇄신호를 이용하여 상기 감지된 음성신호를 상쇄하는 상쇄신호를 출력하는 단계를 포함하고,
상기 사전저장 상쇄신호는 사전에 상기 통화자의 음성신호에 대해 딥러닝을 포함하는 인공지능 학습 및 빅데이터 처리에 기반한 사전분석 정보에 기초하여 생성된 후 상기 상쇄신호 저장부에 저장되는 것인
통화음성 상쇄방법.Detecting a caller's voice signal; and
A step of outputting an offset signal that cancels out the detected voice signal using a pre-stored offset signal stored in an offset signal storage unit,
The pre-stored offset signal is generated based on pre-analysis information based on artificial intelligence learning and big data processing including deep learning for the caller's voice signal in advance and then stored in the offset signal storage unit.
How to cancel phone calls.
상기 사전저장 상쇄신호를 이용하여 상기 감지된 음성신호를 상쇄하는 상쇄신호를 출력하는 단계는 상기 통화자의 발성부 방향을 제외한 방향으로 상기 사전저장 상쇄신호를 출력하는 단계를 포함하는 통화음성 상쇄방법.According to paragraph 1,
The step of outputting an offset signal that cancels out the detected voice signal using the pre-stored offset signal includes outputting the pre-stored offset signal in a direction other than the direction of the speaking part of the caller.
감지된 상기 음성신호로부터 음성신호 정보를 검출하는 단계;
검출된 상기 음성신호 정보에 기초하여 예측 상쇄신호를 생성하는 단계; 및
생성된 상기 예측 상쇄신호를 상기 감지된 음성신호를 상쇄하는 상쇄신호로서 출력하는 단계를 포함하고,
상기 예측 상쇄신호는 상기 음성신호 정보에 대한 상기 통화자의 언어 습관 및 사용상황에 대한 딥러닝을 포함하는 인공지능 학습 및 빅데이터 처리에 기반한 패턴분석 및 자연어 분석에 기초하여 생성되는 것인 통화음성 상쇄방법.Detecting a caller's voice signal;
Detecting voice signal information from the detected voice signal;
generating a predicted offset signal based on the detected voice signal information; and
A step of outputting the generated predicted cancellation signal as a cancellation signal that cancels out the detected voice signal,
The prediction offset signal is a call voice offset that is generated based on pattern analysis and natural language analysis based on artificial intelligence learning and big data processing, including deep learning of the caller's language habits and usage situations for the voice signal information. method.
생성된 상기 예측 상쇄신호를 상기 감지된 음성신호를 상쇄하는 상쇄신호로서 출력하는 단계는 상기 통화자의 발성부 방향을 제외한 방향으로 생성된 상기 예측 상쇄신호를 출력하는 단계를 포함하는 통화음성 상쇄방법.According to paragraph 3,
The step of outputting the generated predicted canceling signal as a canceling signal that cancels out the detected voice signal includes outputting the predicted canceling signal generated in a direction other than the direction of the speaking part of the caller.
상기 음성신호 정보는 상기 음성신호의 주파수 정보, 진폭 정보 및 위상 정보 중 적어도 하나를 포함하는 것인 통화음성 상쇄방법.According to paragraph 3,
The voice signal information includes at least one of frequency information, amplitude information, and phase information of the voice signal.
상기 통화자의 음성신호를 감지하는 단계는,
음성신호 입력부로 입력되는 상기 음성신호의 크기를 확인하는 단계; 및
상기 확인된 음성신호의 크기가 소정의 크기 이상이면 유효한 음성신호로 판정하는 단계를 포함하는 통화음성 상쇄방법.According to any one of paragraphs 1 and 3,
The step of detecting the caller's voice signal is,
Checking the size of the voice signal input to the voice signal input unit; and
A call voice cancellation method comprising the step of determining that the confirmed voice signal is a valid voice signal if the size is greater than a predetermined size.
상기 통화자의 음성신호를 감지하는 단계는,
상기 통화자에 의한 통화음성 상쇄동작 가동선택을 입력받는 단계; 및
음성신호 입력부로 입력된 상기 음성신호를 유효한 음성신호로 판정하는 단계를 포함하는 통화음성 상쇄방법.According to any one of paragraphs 1 and 3,
The step of detecting the caller's voice signal is,
Receiving a call voice offset operation selection by the caller; and
A call voice cancellation method comprising the step of determining that the voice signal input to a voice signal input unit is a valid voice signal.
상기 통화자의 음성신호를 감지하는 단계는,
상기 통화자에 의한 통화 시작부터 음성신호 입력부를 통해 상기 음성신호를 입력받는 단계; 및
상기 음성신호 입력부로 입력된 상기 음성신호를 유효한 음성신호로 판정하는 단계를 포함하는 통화음성 상쇄방법.According to any one of paragraphs 1 and 3,
The step of detecting the caller's voice signal is,
Receiving the voice signal through a voice signal input unit from the start of the call by the caller; and
A call voice cancellation method comprising determining the voice signal input to the voice signal input unit as a valid voice signal.
상기 입력된 음성으로부터 상기 통화자의 음성신호를 감지해서 음성신호 정보를 검출하는 음성신호 분석부;
검출된 상기 음성신호 정보를 상쇄하기 위한 예측 상쇄신호를 생성하는 상쇄신호 생성부;
상기 통화자의 음성신호에 대해 사전에 딥러닝을 포함하는 인공지능 학습 및 빅데이터 처리에 기초하여 생성된 사전저장 상쇄신호를 저장하는 상쇄신호 저장부;
생성된 상기 예측 상쇄신호 및 사전저장 상쇄신호 중 적어도 하나를 출력하는 상쇄신호 출력부; 및
상기 음성신호 입력부, 음성신호 분석부, 상쇄신호 생성부, 상쇄신호 저장부 및 상쇄신호 출력부를 제어하는 음성신호 상쇄제어부를 포함하고,
상기 예측 상쇄신호는 상기 통화자의 음성신호 정보에 대한 상기 통화자의 언어 습관 및 사용상황에 대한 딥러닝을 포함하는 인공지능 학습 및 빅데이터 처리에 기반한 패턴분석 및 자연어 분석에 기초하여 생성되는 것인
통화음성 상쇄장치.A voice signal input unit that receives the caller's voice;
a voice signal analysis unit that detects voice signal information by detecting the caller's voice signal from the input voice;
an offset signal generator that generates a predicted offset signal to offset the detected voice signal information;
An offset signal storage unit that stores a pre-stored offset signal generated based on artificial intelligence learning and big data processing, including deep learning, for the caller's voice signal in advance;
An offset signal output unit that outputs at least one of the generated predicted offset signal and the pre-stored offset signal; and
It includes a voice signal cancellation control unit that controls the voice signal input unit, a voice signal analysis unit, a cancellation signal generation unit, a cancellation signal storage unit, and a cancellation signal output unit,
The predicted offset signal is generated based on pattern analysis and natural language analysis based on artificial intelligence learning and big data processing, including deep learning of the caller's language habits and usage situations for the caller's voice signal information.
Call voice cancellation device.
상기 음성신호 정보는 상기 음성신호의 주파수 정보, 진폭 정보 및 위상 정보 중 적어도 하나를 포함하는 것인 통화음성 상쇄장치.According to clause 9,
The voice signal information includes at least one of frequency information, amplitude information, and phase information of the voice signal.
상기 음성신호 분석부는 상기 음성신호의 크기가 소정의 크기 이상이면 유효한 음성신호로서 감지하거나, 상기 통화자에 의한 통화음성 상쇄동작 가동선택 시부터 상기 음성신호를 유효한 음성신호로서 감지하거나, 통화 시작부터 상기 음성신호를 유효한 음성신호로서 감지하는 것인 통화음성 상쇄장치.According to clause 9,
The voice signal analysis unit detects the voice signal as a valid voice signal when the size of the voice signal is greater than a predetermined size, or detects the voice signal as a valid voice signal from the time the call voice offset operation is selected by the caller, or from the start of the call. A call voice cancellation device that detects the voice signal as a valid voice signal.
상기 상쇄신호 출력부는 지향성 신호출력 장치인, 통화음성 상쇄장치.According to clause 9,
The cancellation signal output unit is a call voice cancellation device that is a directional signal output device.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020190087109A KR102656501B1 (en) | 2019-07-18 | 2019-07-18 | Method for voice cancelling for call security and apparatus for the same |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020190087109A KR102656501B1 (en) | 2019-07-18 | 2019-07-18 | Method for voice cancelling for call security and apparatus for the same |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20210009928A KR20210009928A (en) | 2021-01-27 |
| KR102656501B1 true KR102656501B1 (en) | 2024-04-12 |
Family
ID=74238574
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020190087109A KR102656501B1 (en) | 2019-07-18 | 2019-07-18 | Method for voice cancelling for call security and apparatus for the same |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102656501B1 (en) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006041590A (en) | 2004-07-22 | 2006-02-09 | Matsushita Electric Ind Co Ltd | Control apparatus and program for echo canceller |
| WO2011151842A1 (en) * | 2010-06-03 | 2011-12-08 | Rajmohan Harindranath | Method and attenuation device for avoiding eavesdropping in electronic device |
| KR101900829B1 (en) | 2017-03-31 | 2018-09-27 | (주)엠포러스 | Method and apparatus for controlling telephone voice |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100627178B1 (en) * | 2004-12-02 | 2006-09-25 | 유장식 | Voice attenuation device of phone and phone comprising the device |
| KR20110070657A (en) * | 2009-12-18 | 2011-06-24 | 한국전자통신연구원 | Device and method for active noise cancelling and voice communication device include the same |
| KR101131498B1 (en) * | 2010-02-22 | 2012-03-30 | 에스케이플래닛 주식회사 | Wireless communication terminal and secret call method thereof |
| KR20110098555A (en) * | 2010-02-26 | 2011-09-01 | 에스케이텔레콤 주식회사 | Wireless communication terminal and secret call method using tone generator thereof |
| KR20160055023A (en) * | 2014-11-07 | 2016-05-17 | 엘지전자 주식회사 | Mobile terminal and method of controlling the same |
-
2019
- 2019-07-18 KR KR1020190087109A patent/KR102656501B1/en active IP Right Grant
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006041590A (en) | 2004-07-22 | 2006-02-09 | Matsushita Electric Ind Co Ltd | Control apparatus and program for echo canceller |
| WO2011151842A1 (en) * | 2010-06-03 | 2011-12-08 | Rajmohan Harindranath | Method and attenuation device for avoiding eavesdropping in electronic device |
| KR101900829B1 (en) | 2017-03-31 | 2018-09-27 | (주)엠포러스 | Method and apparatus for controlling telephone voice |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20210009928A (en) | 2021-01-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10510352B2 (en) | Detecting replay attacks in voice-based authentication | |
| US20210192033A1 (en) | Detection of replay attack | |
| US11264047B2 (en) | Causing a voice enabled device to defend against inaudible signal attacks | |
| Chen et al. | Metamorph: Injecting inaudible commands into over-the-air voice controlled systems | |
| Mitev et al. | Alexa lied to me: Skill-based man-in-the-middle attacks on virtual assistants | |
| US7761292B2 (en) | Method and apparatus for disturbing the radiated voice signal by attenuation and masking | |
| US11909340B2 (en) | Motor vibration method, motor vibration device, computer device, and computer-readable storage medium | |
| US20190180759A1 (en) | Device and method for privacy-preserving vocal interaction | |
| US9444423B2 (en) | Method for adjusting volume and electronic device thereof | |
| KR20130012073A (en) | User-specific noise suppression for voice quality improvements | |
| US9378755B2 (en) | Detecting a user's voice activity using dynamic probabilistic models of speech features | |
| WO2022151657A1 (en) | Noise cancellation method and apparatus, and audio device and computer-readable storage medium | |
| KR20200005617A (en) | Speaker division | |
| US11069332B2 (en) | Interference generation | |
| Esposito et al. | Alexa versus alexa: Controlling smart speakers by self-issuing voice commands | |
| US20170229119A1 (en) | Method for detecting voice and electronic device using the same | |
| KR102656501B1 (en) | Method for voice cancelling for call security and apparatus for the same | |
| KR101722686B1 (en) | Method and Apparatus for outputting bell sound | |
| US9641912B1 (en) | Intelligent playback resume | |
| US20220035898A1 (en) | Audio CAPTCHA Using Echo | |
| CN116151832B (en) | Interactive wind control system and method | |
| KR102503895B1 (en) | Audio signal processing method and appratus | |
| KR102356915B1 (en) | Voice data recording device for speech recognition learning, and method therefor | |
| KR102378895B1 (en) | Method for learning wake-word for speech recognition, and computer program recorded on record-medium for executing method therefor | |
| US10887459B1 (en) | Identifying a live person on a phone call |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E902 | Notification of reason for refusal | ||
| E90F | Notification of reason for final refusal | ||
| E701 | Decision to grant or registration of patent right |