KR20160142217A - 음성 신호 최적화 방법 및 그 장치, 프로그램 및 저장매체 - Google Patents

음성 신호 최적화 방법 및 그 장치, 프로그램 및 저장매체 Download PDF

Info

Publication number
KR20160142217A
KR20160142217A KR1020157031849A KR20157031849A KR20160142217A KR 20160142217 A KR20160142217 A KR 20160142217A KR 1020157031849 A KR1020157031849 A KR 1020157031849A KR 20157031849 A KR20157031849 A KR 20157031849A KR 20160142217 A KR20160142217 A KR 20160142217A
Authority
KR
South Korea
Prior art keywords
sound source
terminal
voice
voice signal
predetermined sound
Prior art date
Application number
KR1020157031849A
Other languages
English (en)
Inventor
치아후 옌
난난 왕
펭 장
리우준 장
Original Assignee
시아오미 아이엔씨.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 시아오미 아이엔씨. filed Critical 시아오미 아이엔씨.
Publication of KR20160142217A publication Critical patent/KR20160142217A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/10527—Audio or video recording; Data buffering arrangements
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0272—Voice signal separating
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00—Monitoring arrangements; Testing arrangements
    • H04R29/007—Monitoring arrangements; Testing arrangements for public address systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H04M3/56—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H04M3/568—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities audio processing specific to telephonic conferencing, e.g. spatial distribution, mixing of participants
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2227/00—Details of public address [PA] systems covered by H04R27/00 but not provided for in any of its subgroups
    • H04R2227/007—Electronic adaptation of audio signals to reverberation of the listening space for PA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00—Signal processing covered by H04R, not provided for in its groups
    • H04R2430/01—Aspects of volume control, not necessarily automatic, in sound systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00—Signal processing covered by H04R, not provided for in its groups
    • H04R2430/20—Processing of the output signals of the acoustic transducers of an array for obtaining a desired directivity characteristic
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/11—Transducers incorporated or for use in hand-held devices, e.g. mobile phones, PDA's, camera's
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/15—Aspects of sound capture and related signal processing for recording or reproduction

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • Otolaryngology (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Telephone Function (AREA)
  • Stereophonic System (AREA)
  • Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)

Abstract

본 발명은 음성 신호 최적화 방법 및 그 장치에 관한 것이며, 음성 신호 처리 기술 분야에 속한다. 상기 방법은 적어도 2개의 수집유닛을 갖는 단말기에 사용되며, 상기 적어도 2개의 음성 수집 유닛을 통하여 상기 단말기 주변의 음원에 대하여 위치 결정을 진행하는 단계와, 위치 결정된 각 음원중에서 소정의 음원을 선별하는 단계와, 위치 결정에 의하여 취득된 상기 소정의 음원의 공간 위치에 기반하여 상기 단말기가 수집한 음성 신호중에서 상기 소정의 음원이 발신한 음성 신호를 결정하는 단계와, 상기 소정의 음원이 발신한 음성 신호에 대하여 음량을 최적화 하는 단계를 포함한다. 본 발명은 음성 신호를 수집할 때 주위의 음원에 대해 선별을 진행하고 선별된 음원에서 발신한 음성 신호를 최적화 함으로써, 단말기의 음성 신호에 대한 수집 효과를 향상한다.

Description

음성 신호 최적화 방법 및 그 장치{METHOD AND DEVICE OF OPTIMIZING SOUND SIGNAL}
본 출원은 음성 신호 처리 기술 분야에 관한것이며, 특히 음성 신호의 최적화 방법 및 그 장치에 관한 것이다. 본 출원은, 출원 번호가 CN201510226844.2이며, 출원일이 2015년 5월 6일인 중국 특허 출원을 기초로 우선권을 주장하고, 상기 중국 특허 출원의 모든 내용을 본원에 원용한다.
통신 전자 기술이 부단히 발전함에 따라 스마트 폰, 태블릿 PC, 전자 서적 리더 및 IC레코드 등의 음성 통화 또는 녹음 기능을 지원하는 단말기는 사람들의 생활에 있어서 불가가피한 도구가 되어, 일상 생활에 극대한 편리를 제공하고 있다.
이런 단말기의 응용 방식으로서, 복수의 유저가 녹음 기능을 지원하는 동일 단말기를 이용하고 회의 중 녹음성을 하거나, 또는 복수의 유저가 음성 통화을 뒷받침하는 동일 단말기를 이용하여 기타 원격 유저와 전화 회의를 할 수 있다. 단말기는 녹음한 음성 신호를 저장하거나 또는 그것을 음성 통화를 진행하는 원격 유저에게 송신한다.
본 발명은, 음성 신호의 최적화 방법 및 그 장치를 제공한다.
본 발명의 제1 양태에 따르면,
적어도 2개의 음성 수집 유닛을 갖는 단말기에 사용되며,
상기 적어도 2개의 음성 수집 유닛을 통하여 상기 단말기 주변의 음원에 대하여 위치 결정을 진행하는 단계와,
위치 결정된 각 음원중에서 소정의 음원을 선별하는 단계와,
위치 결정에 의하여 취득된 상기 소정의 음원의 공간 위치에 기반하여 상기 단말기가 수집한 음성 신호중에서 상기 소정의 음원이 발신한 음성 신호를 결정하는 단계와,
상기 소정의 음원이 발신한 음성 신호에 대하여 음량을 최적화 하는 단계
를 포함하는 음성 신호 최적화 방법을 제공한다.
상기 소정의 음원이 발신한 음성 신호에 대하여 음량을 최적화 하는 단계는,
상기 소정의 음원이 발신한 음성 신호 강도를, 미리 설정한 제1강도 역치 및 상기 제1강도 역치 이하의 제2강도 역치와 비교하는 단계와,
상기 소정의 음원이 발신한 음성 신호 강도가 상기 제1강도 역치보다 클 경우, 상기 소정의 음원이 발신한 음성 신호 강도를 상기 제1강도 역치까지 저하시키는 단계와,
상기 소정의 음원이 발신한 음성 신호 강도가 상기 제2강도 역치보다 작을 경우, 상기 소정의 음원이 발신한 음성 신호 강도를 상기 제2강도 역치까지 증가시키는 단계를 포함할 수 있다.
상기 적어도 2개의 음성 수집 유닛을 통하여 상기 단말기 주변의 음원에 대하여 위치 결정을 진행하는 단계는,
하나의 음원에서 발신한 음성 신호가 상기 적어도 2개의 음성 수집 유닛에 도달하는 시간 차와 위상 차를 취득하는 단계와,
상기 음원에서 발신한 음성 신호가 상기 적어도 2개의 음성 수집 유닛에 도달하는 시간 차와 위상 차에 기반하여 상기 단말기에 대한 상기 음원의 공간 위치를 결정하는 단계를 포함할 수 있다.
위치 결정된 각 음원중에서 소정의 음원을 선별하는 단계는
상기 각 음원의 음성 신호 강도 및/또는 음성 신호의 연속성에 기반하여 상기 각 음원중에서 상기 소정의 음원을 선별하는 단계를 포함할 수 있다.
상기 단말기가 수집한 음성 신호중에서 상기 소정의 음원이 발신한 음성 신호를 결정하는 단계를 실행하기 전에,
상기 단말기중의 자세 센서를 통하여 상기 단말기의 자세를 취득하는 단계와,
상기 단말기의 자세에 기반하여 상기 단말기가 수집한 음성 신호에 대하여 이득 보상을 진행하는 단계를 더 포함하며,
상기 단말기가 수집한 음성 신호중에서 상기 소정의 음원이 발신한 음성 신호를 결정하는 단계는,
이득 보상 후의 음성 신호중에서 상기 소정의 음원이 발신한 음성 신호를 결정하는 단계를 포함할 수 있다.
상기 단말기의 자세에는 상기 단말기의 정면과 수평면 사이의 협각이 포함되고,
상기 단말기의 자세에 기반하여 상기 단말기가 수집한 음성 신호에 대하여 이득 보상을 진행하는 단계는,
상기 단말기의 정면과 수평면 사이의 협각에 기반하여 상기 협각에 정비례 하는 보상 수치를 결정하는 단계와,
상기 보상 수치에 기반하여 상기 단말기가 수집한 음성 신호에 대하여 이득 보상을 진행하는 단계를 포함할 수 있다.
본 발명의 제2 양태에 따르면,
적어도 2개의 음성 수집 유닛을 갖는 단말기에 사용되며,
상기 적어도 2개의 음성 수집 유닛을 통하여 상기 단말기 주변의 음원에 대하여 위치 결정을 진행하기 위한 위치 결정 모듈과,
위치 결정된 각 음원중에서 소정의 음원을 선별하기 위한 선별 모듈과,
위치 결정에 의하여 취득된 상기 소정의 음원의 공간 위치에 기반하여 상기 단말기가 수집한 음성 신호중에서 상기 소정의 음원이 발신한 음성 신호를 결정하기 위한 음성 신호 결정 모듈과,
상기 소정의 음원이 발신한 음성 신호에 대하여 음량을 최적화 하기 위한 최적화 모듈
을 포함하는 음성 신호 최적화 장치를 제공한다.
상기 최적화 모듈은,
상기 소정의 음원이 발신한 음성 신호 강도를, 미리 설정한 제1강도 역치 및 상기 제1강도 역치 이하의 제2강도 역치와 비교하기 위한 비교 서브 모듈과,
상기 소정의 음원이 발신한 음성 신호 강도가 상기 제1강도 역치보다 클 경우, 상기 소정의 음원이 발신한 음성 신호 강도를 상기 제1강도 역치까지 저하 시키기 위한 저하 서브 모듈과
상기 소정의 음원이 발신한 음성 신호 강도가 상기 제2강도 역치보다 작을 경우, 상기 소정의 음원이 발신한 음성 신호 강도를 상기 제2강도 역치까지 증가 시키기 위한 증가 서브 모듈을 포함할 수 있다.
상기 위치 결정 모듈은,
하나의 음원에서 발신한 음성 신호가 상기 적어도 2개의 음성 수집 유닛에 도달하는 시간 차와 위상 차를 취득하기 위한 취득 서브모듈과,
상기 음원에서 발신한 음성 신호가 상기 적어도 2개의 음성 수집 유닛에 도달하는 시간 차와 위상 차에 기반하여 상기 단말기에 대한 상기 음원의 공간 위치를 결정하기 위한 위치 결정 서브모듈을 포함할 수 있다.
상기 선별 모듈은,
상기 각 음원의 음성 신호 강도 및/또는 음성 신호의 연속성에 기반하여 상기 각 음원중에서 상기 소정의 음원을 선별할 수 있다.
상기 음성 신호 최적화 장치는,
상기 음성 신호 결정 모듈이 상기 단말기가 수집한 음성 신호중에서 상기 소정의 음원이 발신한 음성 신호를 결정하기 전에, 상기 단말기중의 자세 센서를 통하여 상기 단말기의 자세를 취득하기 위한 자세 취득 모듈과,
상기 단말기의 자세에 기반하여 상기 단말기가 수집한 음성 신호에 대하여 이득 보상을 진행 하기 위한 보상 모듈을 더 포함하며;
상기 음성 신호 결정 모듈은 이득 보상 후의 음성 신호중에서 상기 소정의 음원이 발신한 음성 신호를 결정할 수 있다.
상기 보상 모듈은,
상기 단말기의 정면과 수평면 사이의 협각에 기반하여 상기 협각에 정비례 하는 보상 수치를 결정하기 위한 수치 확정 서브 모듈과,
상기 보상 수치에 기반하여 상기 단말기가 수집한 음성 신호에 대하여 이득 보상을 진행하기 위한 보상 서브 모듈을 포함하며;
상기 단말기의 자세는 상기 단말기의 정면과 수평면 사이의 협각을 포함할 수 있다.
본 발명의 제3 양태에 따르면,
적어도 2개의 음성 수집 유닛을 갖는 단말기에 사용되며,
상기 적어도 2개의 음성 수집 유닛을 통하여 상기 단말기 주변의 음원에 대하여 위치 결정을 하고, 위치 결정된 각 음원중에서 소정의 음원을 선별하고, 위치 결정에 의하여 취득된 상기 소정의 음원의 공간 위치에 기반하여 상기 단말기가 수집한 음성 신호중에서 상기 소정의 음원이 발신한 음성 신호를 결정하고, 상기 소정의 음원이 발신한 음성 신호에 대하여 음량을 최적화 하도록 구성된 프로세서와
프로세서의 실행 가능한 인스트럭션을 저장하기 위한 메모리
를 포함하는 음성 신호 최적화 방법 장치를 제공한다.
본 발명의 실시예에 의하여 제공되는 기술 방안에 따르면 다음과 같은 유익한 효과를 산생한다.
적어도 2개의 음성 수집 유닛을 통하여 단말기 주변의 음원에 대하여 위치 결정을 하고, 위치를 결정에 의하여 결정된 각 음원중에서 소정의 음원을 선별하고, 위치 결정에 의하여 취득된 당해 소정의 음원의 공간 위치에 기반하여 당해 단말기가 수집한 음성 신호중에서 당해 소정의 음원이 발신한 음성 신호를 결정하고, 당해 소정의 음원이 발신한 음성 신호에 대하여 음량을 최적화 하며; 단말기가 음성 신호를 수집할 때 주위의 음원에 대해 선별을 진행하고 선별된 음원이 발신한 음성 신호를 최적화함으로써, 단말기의 음성 신호에 대한 수집 효과를 향상한다.
이상의 일반적인 설명과 다음과 같은 세부적인 설명은 예시적인 것으로 본 발명에 대한 한정으로 이해해서는 안 된다.
여기에 표시된 도면은 명세서에 포함되어 명세서의 일부분을 구성하고 본 발명에 따른 실시예를 도시하였으며, 명세서와 함께 본 발명의 원리를 해석하기 위하여 사용된다.
도 1은 예시적인 일 실시예에 따른 음성 신호의 최적화 방법의 흐름도이다.
도 2는 다른 예시적인 실시예에 따른 음성 신호 최적화 방법의 흐름도이다.
도 3은 다른 예시적인 실시예에 따른 위치 결정 방법의 흐름도이다.
도 4는 다른 예시적인 실시예에 따른 이득 보상 방법의 흐름도이다.
도 5는 예시적인 일 실시예에 따른 음성 신호 최적화장치의 블럭도이다.
도 6은 다른 예시적인 실시예에 따른 음성 신호 최적화 장치의 블럭도이다.
도 7은 예시적인 일 실시예에 따른 장치의 블럭도이다.
이하, 예시적인 실시예에 대하여 자세히 설명하고 그 예시적인 실시예를 도면에 표시하기로 한다. 이하의 도면에 관한 설명에 있어서, 별도의 설명이 없는 한, 서로 다른 도면상의 동일한 부호는 동일 또는 유사한 요소를 표시한다. 이하의 예시적 실시예중의 실시 형태는 본 발명과 일치한 모든 실시 형태를 표시하는 것은 아니다. 이와 반대로, 이들은 첨부된 특허 청구의 범위에 기재되는 본 발명의 일부 양태와 일치한 장치 및 방법의 예에 지나지 않는다.
도 1은 예시적인 일 실시예에 따른 음성 신호의 최적화 방법의 흐름도이다. 당해 음성 신호 최적화 방법은 적어도 2개의 음성 수집 유닛을 갖는 단말기에 이용할 수 있다. 당해 단말기는 스마트 폰, 태블릿 PC, 전자 서적 리더 및 스마트 레코더 등의 음성 통화 또는 녹음 기능을 지원하는 스마트 단말기일 수 있다. 도1에 도시한 바와 같이, 당해 음성 신호 최적화 방법은 이하의 단계를 포함할 수 있다.
단계 102에서, 적어도 2개의 음성 수집 유닛을 통하여 단말기 주변의 음원에 대하여 위치 결정을 진행한다.
단계 104에서, 위치 결정된 각 음원중에서 소정의 음원을 선별한다.
단계 106에서, 위치 결정에 의하여 취득된 당해 소정의 음원의 공간 위치에 기반하여 당해 단말기가 수집한 음성 신호중에서 당해 소정의 음원이 발신한 음성 신호를 결정한다.
단계 108에서, 당해 소정의 음원이 발신한 음성 신호에 대하여 음량을 최적화 한다.
당해 소정의 음원이 발신한 음성 신호에 대하여 음량을 최적화 하는 단계는,
당해 소정의 음원이 발신한 음성 신호 강도를, 미리 설정한 제1강도 역치 및 당해 제1강도 역치 이하의 제2강도 역치와 비교하는 단계와,
당해 소정의 음원이 발신한 음성 신호 강도가 당해 제1강도 역치보다 클 경우, 당해 소정의 음원이 발신한 음성 신호 강도를 당해 제1강도 역치까지 저하시키는 단계와,
당해 소정의 음원이 발신한 음성 신호 강도가 당해 제2강도 역치보다 작을 경우, 당해 소정의 음원이 발신한 음성 신호 강도를 당해 제2강도 역치까지 증가시키는 단계를 포함 할 수 있다.
당해 적어도 2개의 음성 수집 유닛을 통하여 당해 단말기 주변의 음원에 대하여 위치 결정을 진행하는 단계는,
하나의 음원에서 발신한 음성 신호가 당해 적어도 2개의 음성 수집 유닛에 도달하는 시간 차와 위상 차를 취득하는 단계와,
당해 음원에서 발신한 음성 신호가 당해 적어도 2개의 음성 수집 유닛에 도달하는 시간 차와 위상 차에 기반하여 당해 단말기에 대한 당해 음원의 공간 위치를 결정하는 단계를 포함 할 수 있다.
상기 위치 결정된 각 음원중에서 소정의 음원을 선별하는 단계는,
당해 각 음원의 음성 신호 강도 및/또는 음성 신호의 연속성에 기반하여 당해 각 음원중에서 소정의 음원을 선별하는 단계를 포함할 수 있다.
단말기가 수집한 음성 신호중에서 소정의 음원이 발신한 음성 신호를 결정하는 단계를 실행하기 전에,
당해 단말기중의 자세 센서를 통하여 상기 단말기의 자세를 취득하는 단계와,
당해 단말기의 자세에 기반하여 당해 단말기가 수집한 음성 신호에 대하여 이득 보상을 진행하는 단계를 더 포함할 수 있으며,
상기 단말기가 수집한 음성 신호중에서 소정의 음원이 발신한 음성 신호를 결정하는 단계는, 이득 보상 후의 음성 신호중에서 당해 소정의 음원이 발신한 음성 신호를 결정하는 단계를 포함할 수 있다.
당해 단말기의 자세에는 당해 단말기의 정면과 수평면 사이의 협각이 포함되고 당해 단말기의 자세에 기반하여 당해 단말기가 수집한 음성 신호에 대하여 이득 보상을 진행하는 단계는
당해 단말기의 정면과 수평면 사이의 협각에 기반하여 당해 협각에 정비례 하는 보상 수치를 결정하는 단계와,
당해 보상 수치에 기반하여 당해 단말기가 수집한 음성 신호에 대하여 이득 보상을 진행하는 단계를 포함 할 수 있다.
요컨대 본 발명의 실시예에서 제공된 음성 신호 최적화 방법에 따르면, 적어도 2개의 음성 수집 유닛을 통하여 단말기 주변의 음원에 대해 위치 결정을 진행하고, 위치 결정된 각 음원중에서 소정의 음원을 선별하고, 위치 결정에 의하여 취득된 당해 소정의 음원의 공간 위치에 기반하여, 당해 단말기가 수집한 음성 신호중에서 당해 소정의 음원이 발신한 음성 신호를 결정하고, 당해 소정의 음원이 발신한 음성 신호에 대해 음량을 최적화 하며; 단말기가 음성 신호를 수집할 때 주위의 음원에 대해 선별을 진행하고, 또한 선별된 음원이 발신한 음성 신호를 최적화 함으로써, 단말기의 음성 신호에 대한 수집 효과를 향상한다.
도 2는 다른 예시적인 일 실시예에 따른 음성 신호 최적화 방법의 흐름도이다. 당해 음성 신호 최적화 방법은 적어도 2개의 음성 수집 유닛을 갖는 단말기에 이용할 수 있고 당해 단말기는 스마트 폰, 태블릿 PC, 전자 서적 리더 및 스마트 레코더 등의음성 통화 또는 녹음 기능을 지원하는 스마트 단말기일 수 있다. 도 2에 도시한 바와 같이, 당해 음성 신호 최적화 방법은 이하의 단계를 포함 할 수 있다.
단계 202에서, 적어도 2개의 음성 수집 유닛을 통하여 단말기 주변의 음원에 대하여 위치 결정을 진행한다.
도 3에 도시된 위치 결정 방법의 흐름도와 같이, 상기 당해 적어도 2개의 음성 수집 유닛을 통하여 당해 단말기 주변의 음원에 대해 위치 결정을 진행하는 단계는 다음과 같이 진행 될 수 있다.
단계 202a에서, 하나의 음원에서 발신한 음성 신호가 당해 적어도 2개의 음성 수집 유닛에 도달하는 시간 차와 위상 차를 취득한다.
여기서, 단말기에 포함된 적어도 2개의 음성 수집 유닛은 하나의 음성 수집 유닛 배열을 구성하고, 음원으로 부터 당해 음성 수집 유닛 배열중의 각 음성 수집 유닛까지의 거리와 방향이 전부 다르기 때문에 당해 음원에서 발신한 소리가 각 음성 수집 유닛에 전달되는 시간과 위상도 다르다. 단말기는 당해 음성 수집 유닛 배열중의 각 음성 수집 유닛이 수집한 이 하나의 음원에서 발신한 소리의 시간차를 위상 차를 취득할 수 있다.
단계 202b에서, 당해 음원에서 발신한 음성 신호가 당해 적어도 2개의 음성 수집 유닛에 도달하는 시간 차와 위상 차에 기반하여, 당해 단말기에 대한 당해 음원의 공간 위치를 결정한다.
단말기는 빔포밍 성형 기술을 이용하여 음원의 위치를 결정할 수 있다. 예를 들면, 단말기는 당해 음원에서 발신한 음성 신호가 당해 적어도 2개의 음성 수집 유닛에 도달하는 시간 차와 위상 차에 기반하여, 지연화 법 또는 고유 값 분해 등의 알고리즘으로 단말기에 대한 음원의 위치를 식별할 수 있다.
단말기는, 빔포밍 성형 기술을 이용하여 고정된 음원의 공간 위치를 정확히 결정할수 있을 뿐만 아니라, 이동 중의 음원을 추적하여 이동 중의 음원에서 발신하는 신호에 대하여 지속적으로 최적화 처리를 진행할수 도 있다.
단계 204에서, 당해 각 음원의 음성 신호 강도 및/또는 음성 신호의 연속성에 기반하여 당해 각 음원중에서 소정의 음원을 선별한다.
단말기가 통화 또는 녹음 상태에 있을때, 통상적으로 유저가 말할 때 발신한 음성 신호만이 유효한 음성 신호이고 기타 음성 신호의 대부분은 소음이다. 본 발명의 실시예중의 기술 방안에 따르면, 단말기는 각 음원의 음성 신호 강도 및/또는 음성 신호의 연속성에 기반하여, 각 음원중에서 유저일 가능성이 가장 높은 음원을 선별하고, 그 뒤, 선별한 유저일 가능성이 가장 높은 음원에 대해서만 최적화를 실시한다.
예를 들면, 단말기는 음성 신호의 부동한 강도에 대하여 부동한 가중치를 설정하고, 음성 신호의 부동한 지속 시간에 대하여도 부동한 가중치를 설정할 수 있다. 단말기가 하나의 음원에서 발신한 음성 신호를 수신한 뒤, 그 음강도에 대응하는 가중치와 지속 시간에 대응하는 가중치를 확인하여 가중치 부여를 진행하고, 또한 각 음원에 대응하는 가중치에 따라 순서 배열을 하여 가중치가 가장 큰 소정의 음원을 결정한다.
음성 신호의 부동한 강도에 대하여 부동한 가중치를 설정할 경우, 사람의 말하는 소리에 가장 근접하는 음성 강도에 대해 비교적 높은 가중치를 설정할 수 있다. 사람의 말하는 음성 강도와의 차가 클수록 그에 대응하여 설정되는 가중치가 낮다. 예를 들면, 평소 사람이 말하는 정상적인 음성 강도는 약 40데시벨이며 40데시벨에 대해 가장 높은 가중치를 설정할 수 있다. 음성 강도가 40데시벨에서 벗어나면 벗어날수록 그 가중치가 더 낮다.
마찬가지로, 음성 신호의 지속 시간에 대하여 부동한 가중치를 설정할 경우, 사람이 말하는 음성에 가장 가까운 음성 신호 지속 시간에 대해 비교적 높은 가중치를 설정할 수 있다. 사람이 말할 때의 음성 신호지속 시간과의 차가 클수록 그에 대응하여 설정되는 가중치가 낮다. 예를 들면, 사람이 말할 때 일반적으로 한마디 지속 시간이 2s(초)라고 할 경우, 2s의 지속 시간에 대해 가장 높은 가중치를 설정할 수 있으며 지속 시간이 2s의 차이가 크면 클수록 그 가중치가 더 낮다.
녹음 또는 통화할 때에는 일반적으로 동시에 한 사람 또는 2명의 유저만 말하므로, 과다한 음원에 대해 불필요한 최적화 처리를 진행하는 것을 피하고 최적화 과정의 복잡 정도를 감소하기 위해서는 선별하는 소정의 음원 수를 설정할 수 있다. 예를 들면, 동일한 시간에 최대 3개의 소정의 음원을 선별하고, 그 후, 동일한 시간에 최대 3개의 음원에서 발신한 음성 신호에 대해서만 최적화를 진행한다.
단계 206에서, 위치 결정에 의하여 취득된 당해 소정의 음원의 공간 위치에 기반하여 당해 단말기가 수집한 음성신호중에서 당해 소정의 음원이 발신한 음성 신호를 결정한다.
단말기는 수신한 음성 신호를 처리할때 소정의 음원의 공간 위치에 의하여 당해 소정의 음원이 발신하는 음성 신호에 대하여만 처리를 진행할 수 있다.
단계 208에서, 소정의 음원이 발신한 음성 신호 강도를, 미리 설정한 제1강도 역치 및 당해 제1강도 역치 이하의 제2강도 역치와 비교한다.
단계 210에서, 당해 소정의 음원이 발신한 음성 신호 강도가 당해 제1강도 역치보다 클 경우, 당해 소정의 음원이 발신한 음성 신호 강도를 당해 제1강도 역치까지 저하시킨다.
단계 212에서, 당해 소정의 음원이 발신한 음성 신호 강도가 당해 제2강도 역치보다 작을 경우, 당해 소정의 음원이 발신한 음성 신호 강도를 당해 제2강도 역치까지 증가시킨다.
당해 소정의 음원이 발신한 음성 신호 강도가 당해 제1강도 역치이상, 또한 당해 제2강도 역치 이하일 경우, 소정의 음원이 발신한 음성 신호 강도에 대하여 처리를 진행하지 않을 수 있다.
단말기는 사람이 보통 말할 때의 음성 신호 강도에 따라 제1강도 역치와 제2강도 역치를 설정할 수 있으며, 소정의 음원의 음성 신호 강도가 비교적 클 경우 당해 소정의 음원의 음성 신호 강도를 저하시키고, 소정의 음원의 음성 신호 강도가 비교적 작을 경우 당해 소정의 음원의 음성 신호 강도를 증가시키고, 소정의 음원의 음성 신호 강도가 적당할 경우, 소정의 음원의 음성 신호 강도에 대하여 처리를 진행하지 않는다. 따라서, 유저일 가능성 있는 소정의 음원이 발신한 음성 신호 강도를 너무 높지도 않고 너무 낮지도 않은 소정의 범위 내에 유지시킴으로써 녹음 또는 통화시의 효과를 최적화 한다.
예컨대, 유저 A와 유저 B가 스마트 폰을 이용하여 원격 전화 회의를 하거나 또는 휴대 전화를 이용하여 회의 녹음을 할 경우를 예로 한다. 스마트 폰을 제어하여 녹음 상태 또는 통화 상태에 진입할 경우, 스마트 폰을 회의 녹음 모드로 전한다, 이 때 스마트 폰은 적어도 2개의 마이크에 의하여 주위의 음성을 수집하고, 또한 각 음원의 위치를 결정한다. 유저 A또는 유저 B가 발언할 때 스마트 폰이 발언자를 소정의 음원으로 선별하고, 당해 발언자가 말할 때 발신한 음성 신호를 최적화 한다. 당해 발언자가 말할 때 발신한 음성 신호 강도가 30데시벨보다 작을 경우 당해 발언자가 말할 때 발신한 음성 신호 강도를 30데시벨까지 증가시키고 당해 발언자가 말할 때 발신한 음성 신호 강도가 50데시벨보다 클 경우 당해 화자가 말할 때 한 음성 신호 강도를 50데시벨까지 낮추고 30데시벨 내지 50데시벨까지 음성 신호에 대하여는 어떤 처리도 진행하지 않는다. 따라서, 스마트 폰과의 거리가 부동한 각 유저의, 녹음 또는 원격 단말기에 의하여 청취된 말의 음량이 모두 적당한 범위 내에 있도록 확보 함으로써 녹음 효과 또는 전화 회의시의 통화 효과를 확보할 수 있다.
요컨대, 본 발명의 실시예에서 제공된 음성 신호 최적화 방법에 따르면, 적어도 2개의 음성 수집 유닛을 통하여 단말기 주변의 음원에 대해 위치 결정을 진행하고, 위치 결정된 각 음원중에서 소정의 음원을 선별하고, 위치 결정에 의하여 취득된 당해 소정의 음원의 공간 위치에 기반하여, 당해 단말기가 수집한 음성 신호중에서 당해 소정의 음원이 발신한 음성 신호를 결정하고, 당해 소정의 음원이 발신한 음성 신호 강도를, 미리 설정한 2개의 강도 역치 사이에 있도록 조절하고, 단말기가 수집한 소정의 음원에서 발신한 음성 신호 강도를 적절한 범위 내에 있도록 조정함으로써, 단말기의 녹음 또는 통화시의 음성 신호에 대한 수집 효과를 향상한다.
기타 선택 가능한 실시예로서, 상술의 도 2에 도시한 실시예중의 단계 206을 실행하기 전에, 도 4에 도시한 이득 보상 방법에 관한 흐름도의 단계 205a~단계 205c를 더 실행할 수 있다.
단계 205a에서, 당해 단말기중의 자세 센서를 통하여 당해 단말기의 정면과 수평면 사이의 협각을 포함하는 당해 단말기의 자세를 취득한다.
일반적으로, 녹음 또는 전화 회의시, 단말기는 테이블 위에 정면을 위로 하여 수평으로 방치되지만, 단말기의 자세가 수평을 이루지 못하는 경우도 있다. 예를 들면, 단말기가 책 또는 기타 물체 위에 걸쳐 질 경우 그 정면은 수평 상태가 아니라 이때의 단말기의 정면과 수평면 사이는 일정한 협각을 이루며, 단말기가 수집한 음성 신호는 이상적인 상태에서 수집한 음성 신호와 일정한 편차가 존재하며, 단말기의 정면이 수평 상태에 있는 경우 수집한 음성 신호와 비해 작아진다.
이에 대해, 단말기가 수집한 음성 신호중에서 소정의 음원이 발신한 음성 신호를 결정하기 전에 또한 최적화 처리를 진행하기 전에, 우선 현재의 자세로 수집한 음성 신호에 대하여 약간의 보상을 진행할 수 있다.
단계 205b에서, 당해 단말기의 정면과 수평면 사이의 협각에 기반하여 당해 협각에 정비례 하는 보상 수치를 결정한다.
단말기의 정면과 수평면 사이의 협각이 크면 클수록, 단말기가 수집한 음성 신호와 이상적인 상태(즉, 단말기의 정면이 수평 상태에 있는 경우)에서의 음성신호와의 편차도 크다. 따라서, 단말기는 단말기의 정면과 수평면 사이의 협각에 기반하여 미리 알고리즘을 설정함으로써 보상 수치를 산출하거나 미리 저장된 대응 관계를 통하여 보상 수치를 조회할 수 있다.
단계 205c에서, 당해 보상 수치에 기반하여 당해 단말기가 수집한 음성 신호에 대하여 이득 보상을 진행한다.
단말기는 보상 수치를 결정한 뒤, 수집한 전부의 음성 신호에 대하여 이득 보상을 진행한다.
여기서, 단말기는 그 단말기가 수집한 음성 신호중에서 당해 소정의 음원이 발신한 음성 신호를 결정할 경우, 이득 보상한 후의 음성 신호중에서 당해 소정의 음원이 발신한 음성 신호를 확정할 수 있다.
요컨대, 본 발명의 실시예에서 제공되는 방법에 따르면, 수집한 음성 신호중에서 소정의 음원의 음성 신호를 결정하고 최적화를 진행하기 전에 단말기의 자세를 취득하고, 단말기의 자세에 기반하여 단말기가 수집한 음성 신호에 대하여 이득 보상을 진행함으로써 단말기의 녹음 또는 통화시의 음성 신호에 대한 수집 효과를 더욱더 향상한다.
이하는 본 발명에 따른 장치 실시예이며, 본 발명에 따른 방법 실시예를 실행하는데 사용된다. 본 발명에 따른 장치 실시예에서 공개되지 않은 세부적인 내용에 관해서는 본 발명에 따른 방법 실시예를 참고하기로 한다.
도 5는 예시적인 일 실시예에 따른 음성 신호 최적화　장치의 블럭도이다. 당해 음성 신호 최적화 장치는 적어도 2개의 음성 수집 유닛을 갖는 단말기에 이용할 수 있으며, 당해 단말기는 스마트 폰, 태블릿 PC, 전자 서적 리더 및 스마트 레코더 등의 음성 통화 또는 녹음 기능을 지원하는 스마트 단말기일 수 있으며 도 1내지 도 4중 어느 하나에 도시된 방법을 실행한다. 도 5에 도시한 바와 같이, 당해 음성 신호 최적화 장치는 위치 결정 모듈 501, 선별 모듈 502, 음성 신호 결정 모듈 503및 최적화 모듈504를 포함하지만, 이들에 한정되지 않는다.
상기 위치 결정 모듈 501은 상기 적어도 2개의 음성 수집 유닛을 통하여 상기 단말기 주변의 음원에 대하여 위치 결정을 진행 하도록 구성된다.
상기 선별 모듈 502는 위치 결정된 각 음원중에서 소정의 음원을 선별하도록 구성된다.
상기 음성 신호 결정 모듈 503은 위치 결정에 의하여 취득된 상기 소정의 음원의 공간 위치에 기반하여 상기 단말기가 수집한 음성 신호중에서 상기 소정의 음원이 발신한 음성 신호를 결정하도록 구성된다.
상기 최적화 모듈 504는 상기 소정의 음원이 발신한 음성 신호에 대하여, 음량을 최적화 하도록 구성된다.
요컨대, 본 발명의 실시예에서 제공된 음성 신호 최적화 방법에 따르면, 적어도 2개의 음성 수집 유닛을 통하여 단말기 주변의 음원에 대해 위치 결정을 진행하고, 위치 결정된 각 음원중에서 소정의 음원을 선별하고, 위치 결정에 의하여 취득된 당해 소정의 음원의 공간 위치에 기반하여, 당해 단말기가 수집한 음성 신호중에서 당해 소정의 음원이 발신한 음성 신호를 결정하고, 당해 소정의 음원이 발신한 음성 신호에 대하여 음량을 최적화 하고; 단말기가 음성 신호를 수집할 때 주위의 음원에 대해 선별을 진행하고, 선별한 음원이 발신한 음성 신호에 대하여 최적화를 실시함으로써, 단말기의 음성 신호에 대한 수집 효과를 향상한다.
도 6은 예시적인 일 실시예에 따른 음성 신호 최적화 장치의 블럭도이다. 당해 음성 신호 최적화 장치는 적어도 2개의 음성 수집 유닛을 갖는 단말기에 이용할 수 있으며, 당해 단말기는 스마트 폰, 태블릿 PC, 전자 서적 리더 및 스마트 레코더 등의 음성 통화 또는 녹음 기능을 지원하는 스마트 단말기 일수 있으며 도 1내지 도 4중 어느 하나에 도시된 방법을 실행한다. 도 6에 도시한 바와 같이, 당해 음성 신호 최적화 장치는 위치 결정 모듈 501, 선별 모듈 502, 음성 신호 결정 모듈 503및 최적화 모듈504를 포함하지만, 이들에 한정되지 않는다.
당해 위치 결정 모듈 501은 당해 적어도 2개의 음성 수집 유닛을 통하여 당해 단말기 주변의 음원에 대하여 위치 결정을 진행 하도록 구성된다.
당해 선별 모듈 502는 위치 결정된 각 음원중에서 소정의 음원을 선별하도록 구성된다.
당해 음성 신호 결정 모듈 503은 위치 결정에 의하여 취득된 당해 소정의 음원의 공간 위치에 기반하여 당해 단말기가 수집한 음성 신호중에서 당해 소정의 음원이 발신한 음성 신호를 결정하도록 구성된다.
당해 최적화 모듈 504는 당해 소정의 음원이 발신한 음성 신호에 대하여, 음량을 최적화 하도록 구성된다.
당해 최적화 모듈 504는 비교 서브 모듈 504a, 저하 서브 모듈 504b및 증가 서브 모듈 504c을 포함할 수 있다.
당해 비교 서브 모듈 504a는, 당해 소정의 음원이 발신한 음성 신호 강도를, 미리 설정한 제1강도 역치 및 당해 제1강도 역치 이하의 제2강도 역치와 비교하도록 구성된다.
당해 저하 서브 모듈 504b는, 당해 소정의 음원이 발신한 음성 신호 강도가 당해 제1강도 역치보다 클 경우, 당해 소정의 음원이 발신한 음성 신호 강도를 당해 제1강도 역치까지 저하 시키도록 구성된다.
당해 증가 서브 모듈 504c는, 당해 소정의 음원이 발신한 음성 신호 강도가 당해 제2강도 역치보다 작을 경우, 당해 소정의 음원이 발신한 음성 신호 강도를 당해 제2강도 역치까지 증가 시키도록 구성된다.
당해 위치 결정 모듈 501은, 취득 서브 모듈 501a및 위치 결정 서브 모듈 501b를 포함 할 수 있다.
당해 취득 서브 모듈 501a는, 하나의 음원에서 발신한 음성 신호가 당해 적어도 2개의 음성 수집 유닛에 도달하는 시간 차와 위상 차를 취득하도록 구성된다.
당해 위치 결정 서브 모듈 501b는, 당해 음원에서 발신한 음성 신호가 당해 적어도 2개의 음성 수집 유닛에 도달하는 시간 차와 위상 차에 기반하여 당해 단말기에 대한 당해 음원의 공간 위치를 결정하도록 구성된다.
당해 선별 모듈 502는, 당해 각 음원의 음성 신호 강도 및/또는 음성 신호의 연속성에 기반하여, 당해 각 음원중에서 당해 소정의 음원을 선별하도록 구성 될 수 있다.
당해 장치는 자세 취득 모듈 505와 보상 모듈 506을 더 포함할 수 있다.
당해 자세 취득 모듈 505는, 당해 음성 신호 결정 모듈 503이 당해 단말기가 수집한 음성 신호중에서 당해 소정의 음원이 발신한 음성 신호를 결정하기 전에, 당해 단말기중의 자세 센서를 통하여 당해 단말기의 자세를 취득 하도록 구성된다.
당해 보상 모듈 506은, 당해 단말기의 자세에 기반하여 당해 단말기가 수집한 음성 신호에 대하여 이득 보상을 진행 하도록 구성된다.
당해 음성 신호 결정 모듈 503은, 이득 보상 후의 음성 신호중에서 당해 소정의 음원이 발신한 음성 신호를 결정하도록 구성된다.
당해 보상 모듈 506은, 수치 확정 서브 모듈 506a및 보상 서브 모듈 506b를 포함 할 수 있다.
당해 수치 확정 서브 모듈 506a는, 당해 단말기의 정면과 수평면 사이의 협각에 기반하여 당해 협각에 정비례 하는 보상 수치를 결정한다.
당해 보상 서브 모듈 506b는, 당해 보상 수치에 기반하여 당해 단말기가 수집한 음성 신호에 대하여 이득 보상을 진행 하도록 구성된다.
여기서, 당해 단말기의 자세는 당해 단말기의 정면과 수평면 사이의 협각을 포함한다.
요컨대, 본 발명의 실시예에서 제공된 음성 신호 최적화 방법에 따르면, 적어도 2개의 음성 수집 유닛을 통하여 단말기 주변의 음원에 대해 위치 결정을 진행하고, 위치 결정된 각 음원중에서 소정의 음원을 선별하고, 위치 결정에 의하여 취득된 당해 소정의 음원의 공간 위치에 기반하여, 당해 단말기가 수집한 음성 신호중에서 당해 소정의 음원이 발신한 음성 신호를 결정하고, 당해 소정의 음원이 발신한 음성 신호 강도를, 미리 설정한 2개의 강도 역치 사이에 있도록 조절하고, 단말기가 수집한 소정의 음원에서 발신한 음성 신호 강도를 적절한 범위 내에 있도록 조정함으로써, 단말기의 녹음 또는 통화시의 음성 신호에 대한 수집 효과를 향상한다.
그 외, 본 발명의 실시예에서 제공된 장치에 따르면, 수집한 음성 신호중에서소정의 음원의 음성 신호를 결정하고 최적화를 진행하기 전에, 단말기의 자세를 취득하고 단말기의 자세에 기반하여 단말기가 수집한 음성 신호에 대하여 이득 보상을 진행함으로써단말기의 녹음 또는 통화시의 음성 신호에 대한 수집 효과를 더욱더 향상한다.
도 7은 예시적인 일 실시예에 따른 장치(700)의 블럭도이며, 당해 장치에는 적어도2개의 음성 수집 유닛이 포함된다. 예를 들면, 장치(700)는 휴대폰, 컴퓨터, 디지털 방송 단말기, 멧세지 송수신 장치, 게임기, 태블릿 PC, 의료 설비, 피트니스 장비, PDA (Personal Digital Assistant) 등일 수 있다.
도 7을 참조하면, 장치(700)는 처리 어셈블리(702), 메모리(704), 전원 어셈블리(706), 멀티미디어 어셈블리(708), 오디오 어셈블리(710), 입력/출력(I/O) 인터페이스(712), 센서 어셈블리(714) 및 통신 어셈블리(716) 중의 하나 또는 복수의 어셈블리를 포함할 수 있다.
처리 어셈블리(702)는 일반적으로 예를 들어 표시, 전화 호출, 데이터 통신, 카메라 조작 및 기록 조작과 관련되는 조작 등과 같은 장치(700)의 전체적인 조작을 제어하기 위한것이다. 처리 어셈블리(702)는 하나 또는 복수의 프로세서(718)를 포함할 수 있고, 이들에 의하여 인스트럭션을 실행함으로써 당해 방법의 전부 또는 일부의 단계를 완성할 수 있다. 또한, 처리 어셈블리(702)는 하나 또는 복수의 모듈을 포함할 수 있고, 이들에 의하여 처리 어셈블리(702)와 그 외의 어셈블리와의 사이의 상호작용(Interaction)이 편리하게 된다. 예를 들면, 처리 어셈블리(702)는 멀티미디어 어셈블리(708)와 처리 어셈블리(702) 사이의 상호작용(Interaction)의 편의상 멀티미디어 모듈을 포함할 수 있다.
메모리(704)는 여러가지 종류의 데이터를 기억하여 장치(700)의 조작을 지원하도록 구성된다. 예를 들면, 이러한 데이터에는 장치(700)에서 동작하는 임의의 어플리케이션 또는 방법의 인스트럭션(Instruction), 연락처 데이터, 전화번호부 데이터, 멧세지, 이미지, 동영상등을 포함한다. 메모리(704)는, 예를 들어 SRAM, EEPROM, EPROM, PROM, ROM, 자기 메모리, 플래쉬 메모리, 자기 디스크 또는 광디스크 등과 같은 임의의 유형의 휘발성 또는 비휘발성의 기억장치, 또는 이들의 조합에 의하여 실현될 수 있다. 메모리(704) 중에는 또한 하나 또는 복수의 모듈이 저장되어 있고, 당해 하나 또는 복수의 모듈은 하나 또는 복수의 프로세서(718)에 의하여 실행되고 당해 도1 내지 도4중의 어느 하나가 도시한 방법의 전부 또는 일부 단계를 완성하도록 배치된다.
전원 어셈블리(706)는 장치(700)의 각 어셈블리에 전력을 제공하기 위한 것이다. 전원 어셈블리(706)는 전원 관리 시스템, 하나 또는 복수의 전원 및 장치(700)를 위하여 전력을 발성, 관리 및 할당하는것과 관련되는 다른 어셈블리를 포함할 수 있다.
멀티미디어 어셈블리(708)는 당해 장치(700)와 유저 사이에 하나의 출력 인터페이스를 제공하는 디스플레이를 포함한다. 일부의 실시예에 있어서, 디스플레이는 액정 디스플레이(LCD)와 터치 패널(TP)을 포함할 수 있다. 디스플레이가 터치 패널을 포함하는 경우, 디스플레이는 유저로부터의 입력 신호를 수신할 수 있는 터치 스크린으로 구현될 수 있다. 터치 패널은 하나 또는 복수의 터치 센서를 포함하고 있어 터치, 슬라이드 및 터치 패널상의 손 움직임을 감지할 수 있다. 당해 터치 센서는, 터치 또는 슬라이드 동작의 경계위치를 감지할 뿐만 아니라, 당해 터치 또는 슬라이드 동작과 관련되는 지속 시간과 압력을 검출할 수 있다. 일부의 실시예에 있어서, 멀티미디어 어셈블리(708)는, 하나의 프론트 카메라 및/또는 리어 카메라를 포함한다. 장치(700)가 조작 모드 예를 들어 촬영 모드 또는 동영상 모드에 있을 경우, 프론트 카메라 및/또는 리어 카메라는 외부로부터의 멀티미디어 데이터를 수신할 수 있다. 각 프론트 카메라와 리어 카메라는 하나의 고정된 광학 렌즈 시스템일 수도 있으며, 촛점거리와 광학 줌 기능을 구비할 수도 있다.
오디오 어셈블리(710)는 오디오 신호를 출력 및/또는 입력하도록 구성된다. 예를 들면, 오디오 어셈블리(710)는 하나의 마이크로폰(MIC)을 포함하며, 마이크로폰은 장치(700)가 예를 들어 호출 모드, 기록 모드 및 음성 인식 모드등과 같은조작 모드에 있을 경우, 외부로부터의 오디오 신호를 수신하도록 구성된다. 수신된 오디오 신호는 더 나아가 메모리(704)에 기억되거나 또는 통신 어셈블리(716)를 통하여 송신될 수 있다. 일부의 실시예에 있어서, 오디오 어셈블리(710)는 오디오 신호를 출력하기 위한 하나의 스피커를 더 포함할 수 있다.
I/O인터페이스(712)는 처리 어셈블리(702)와 주변의 인터페이스 모듈 사이에 인터페이스를 제공하며, 당해 주변의 인터페이스 모듈은 키보드, 클릭 휠, 버튼등일 수도 있다. 이러한 버튼에는 홈 버튼, 음성 버튼, 시작 버튼 및 잠금 버튼이 포함될 수 있지만, 이에 한정되는 것은 아니다.
센서 어셈블리(714)는, 장치(700)를 위하여 각 방면의 상태 평가를 제공하기 위한 하나 또는 복수의 센서를 포함할 수 있다. 예를 들면, 센서 어셈블리(714)는, 장치(700)의 온/오프 상태, 어셈블리의 상대적 포지셔닝을 검출할 수 있으며, 당해 어셈블리는　예를 들어　장치(700)의 표시장치와 키패드이다. 센서 어셈블리(714)는　또한 장치(700) 또는 장치(700)의 하나의 어셈블리의 위치 변경, 유저와 장치(700)의 접촉 유무, 장치(700)의 방향 또는 가속/감속 및 장치(700)의 온도 변화를 검출할 수 있다. 센서 어셈블리(714)는 근접 센서를 포함할 수 있으며, 당해 근접 센서는 아무런 물리적인 접촉이 없이 부근 물체의 유무를 검출할 수 있도록 구성된다. 센서 어셈블리(714)는 결상 응용에 쓰이는 광 센서 예컨대 CMOS 또는 CCD 화상 센서를 더 포함할 수 있다. 일부의 실시예에 있어서, 당해 센서 어셈블리(714)는 가속도 센서, 자이로 센서, 자기 센서, 압력 센서 또는 온도 센서를 더 포함할 수 있다.
통신 어셈블리(716)는 장치(700)와 기타 설비 사이의 유선 또는 무선 방식에 의한 통신에 편리하도록 구성된다. 장치(700)는 통신 기준에 기초하는 무선 네트워크 예컨대 WiFi, 2G 또는 3G, 또는 이들의 조합에 의하여 접속될 수 있다. 예시적인 일 실시예에 있어서, 통신 어셈블리(716)는 방송 채널을 통하여 외부 방송 관리 시스템으로부터의 방송 신호 또는 방송과 관련되는 정보를 수신한다. 예시적인 일 실시예에 있어서, 당해 통신 어셈블리(716)는 근거리 무선통신(NFC) 모듈을 포함함으로써 근거리 통신을 촉진한다. 예를 들면, NFC 모듈은 무선 자동 식별(RFID) 기술, 적외선 통신(IrDA) 기술, 초 광대역(UWB) 기술, 블루투스(BT) 기술 및 기타 기술에 기반하여 실현될 수 있다.
예시적인 실시예에 있어서, 장치(700)는, 상술한 방법을 실행하기 위하여, 하나 또는 복수의 특정 용도 집적회로(ASIC), 디지탈 신호 프로세서(DSP), 디지탈 신호 처리 설비(DSPD), 프로그램 가능 논리 회로(PLD), 필드 프로그래머블 게이트 어레이(FPGA), 컨트롤러, 마이크로 컨트롤러, 마이크로 프로세서 또는 기타 전자소자에 의하여 실현될 수 있다.
또한, 예시적인 실시예에 있어서, 인스트럭션을 포함한 비일시적인 컴퓨터 판독 가능한 저장 매체 예를 들어 인스트럭션을 포함한 메모리(704)를 제공한다. 당해 인스트럭션은, 장치(700)의 프로세서(718)에 의하여 실행되며, 이로서 상술한 방법을 실행할 수 있다. 예를 들면, 당해 비일시적 컴퓨터 판독 가능한 저장 매체는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크 및 광 데이터 저장장치등일 수 있다.
상술한 실시예중의 장치에 관하여, 각 모듈의 구체적인 조작 실행 형태에 대해서는 관련된 방법 실시예에서 상세한 설명을 진행하였으므로 자세한 설명은 생략하기로 한다.
본 발명은, 위에서 설명되고 또한 도면에 의하여 구현된 정확한 구조에 한정되지 않으며, 그 범위를 이탈하지 않는 한 다양한 변형 및 수정을 실시할 수 있다는 것을 이해하여야 한다. 본 발명의 범위는 첨부된 특허 청구 범위에 의해서만 한정된다.

Claims (13)

  1. 적어도 2개의 음성 수집 유닛을 갖는 단말기에 사용되며,
    상기 적어도 2개의 음성 수집 유닛을 통하여 상기 단말기 주변의 음원에 대하여 위치 결정을 진행하는 단계;
    위치 결정된 각 음원중에서 소정의 음원을 선별하는 단계;
    위치 결정에 의하여 취득된 상기 소정의 음원의 공간 위치에 기반하여 상기 단말기가 수집한 음성 신호중에서 상기 소정의 음원이 발신한 음성 신호를 결정하는 단계; 및
    상기 소정의 음원이 발신한 음성 신호에 대하여 음량을 최적화하는 단계
    를 포함하는 것을 특징으로 하는 음성 신호 최적화 방법.
  2. 제 1항에 있어서,
    상기 소정의 음원이 발신한 음성 신호에 대하여 음량을 최적화 하는 단계는,
    상기 소정의 음원이 발신한 음성 신호 강도를, 미리 설정한 제1강도 역치 및 상기 제1강도 역치 이하의 제2강도 역치와 비교하는 단계;
    상기 소정의 음원이 발신한 음성 신호 강도가 상기 제1강도 역치보다 클 경우, 상기 소정의 음원이 발신한 음성 신호 강도를 상기 제1강도 역치까지 저하시키는 단계; 및
    상기 소정의 음원이 발신한 음성 신호 강도가 상기 제2강도 역치보다 작을 경우, 상기 소정의 음원이 발신한 음성 신호 강도를 상기 제2강도 역치까지 증가시키는 단계
    를 포함하는 것을 특징으로 하는 음성 신호 최적화 방법.
  3. 제 1항에 있어서,
    상기 적어도 2개의 음성 수집 유닛을 통하여 상기 단말기 주변의 음원에 대하여 위치 결정을 진행하는 단계는,
    하나의 음원에서 발신한 음성 신호가 상기 적어도 2개의 음성 수집 유닛에 도달하는 시간 차와 위상 차를 취득하는 단계; 및
    상기 음원에서 발신한 음성 신호가 상기 적어도 2개의 음성 수집 유닛에 도달하는 시간 차와 위상 차에 기반하여 상기 단말기에 대한 상기 음원의 공간 위치를 결정하는 단계
    를 포함하는 것을 특징으로 하는 음성 신호 최적화 방법.
  4. 제 1항에 있어서,
    위치 결정된 각 음원중에서 소정의 음원을 선별하는 단계는,
    상기 각 음원의 음성 신호 강도 및/또는 음성 신호의 연속성에 기반하여 상기 각 음원중에서 상기 소정의 음원을 선별하는 단계를 포함하는 것을 특징으로 하는 음성 신호 최적화 방법.
  5. 제 1항에 있어서,
    상기 단말기가 수집한 음성 신호중에서 상기 소정의 음원이 발신한 음성 신호를 결정하는 단계를 실행하기 전에,
    상기 단말기중의 자세 센서를 통하여 상기 단말기의 자세를 취득하는 단계; 및
    상기 단말기의 자세에 기반하여 상기 단말기가 수집한 음성 신호에 대하여 이득 보상을 진행하는 단계를 더 포함하며,
    상기 단말기가 수집한 음성 신호중에서 상기 소정의 음원이 발신한 음성 신호를 결정하는 단계는,
    이득 보상 후의 음성 신호중에서 상기 소정의 음원이 발신한 음성 신호를 결정하는 단계를 포함하는 것을 특징으로 하는 음성 신호 최적화 방법.
  6. 제 1항에 있어서,
    상기 단말기의 자세에는 상기 단말기의 정면과 수평면 사이의 협각이 포함되고,
    상기 단말기의 자세에 기반하여 상기 단말기가 수집한 음성 신호에 대하여 이득 보상을 진행하는 단계는,
    상기 단말기의 정면과 수평면 사이의 협각에 기반하여 상기 협각에 정비례 하는 보상 수치를 결정하는 단계; 및
    상기 보상 수치에 기반하여 상기 단말기가 수집한 음성 신호에 대하여 이득 보상을 진행하는 단계
    를 포함하는 것을 특징으로 하는 음성 신호 최적화 방법.
  7. 적어도 2개의 음성 수집 유닛을 갖는 단말기에 사용되며,
    상기 적어도 2개의 음성 수집 유닛을 통하여 상기 단말기 주변의 음원에 대하여 위치 결정을 진행하기 위한 위치 결정 모듈;
    위치 결정된 각 음원중에서 소정의 음원을 선별하기 위한 선별 모듈;
    위치 결정에 의하여 취득된 상기 소정의 음원의 공간 위치에 기반하여 상기 단말기가 수집한 음성 신호중에서 상기 소정의 음원이 발신한 음성 신호를 결정하기 위한 음성 신호 결정 모듈; 및
    상기 소정의 음원이 발신한 음성 신호에 대하여 음량을 최적화 하기 위한 최적화 모듈
    을 포함하는 것을 특징으로 하는 음성 신호 최적화 장치.
  8. 제 7항에 있어서,
    상기 최적화 모듈은,
    상기 소정의 음원이 발신한 음성 신호 강도를, 미리 설정한 제1강도 역치 및 상기 제1강도 역치 이하의 제2강도 역치와 비교하기 위한 비교 서브 모듈;
    상기 소정의 음원이 발신한 음성 신호 강도가 상기 제1강도 역치보다 클 경우, 상기 소정의 음원이 발신한 음성 신호 강도를 상기 제1강도 역치까지 저하시키기 위한 저하 서브 모듈; 및
    상기 소정의 음원이 발신한 음성 신호 강도가 상기 제2강도 역치보다 작을 경우, 상기 소정의 음원이 발신한 음성 신호 강도를 상기 제2강도 역치까지 증가 시키기 위한 증가 서브 모듈
    을 포함하는 것을 특징으로 하는 음성 신호 최적화 장치.
  9. 제 7항에 있어서,
    상기 위치 결정 모듈은,
    하나의 음원에서 발신한 음성 신호가 상기 적어도 2개의 음성 수집 유닛에 도달하는 시간 차와 위상 차를 취득하기 위한 취득 서브모듈; 및
    상기 음원에서 발신한 음성 신호가 상기 적어도 2개의 음성 수집 유닛에 도달하는 시간 차와 위상 차에 기반하여 상기 단말기에 대한 상기 음원의 공간 위치를 결정하기 위한 위치 결정 서브모듈
    을 포함하는 것을 특징으로 하는 음성 신호 최적화 장치.
  10. 제 7항에 있어서,
    상기 선별 모듈은,
    상기 각 음원의 음성 신호 강도 및/또는 음성 신호의 연속성에 기반하여 상기 각 음원중에서 상기 소정의 음원을 선별하는 것을 특징으로 하는 음성 신호 최적화 장치.
  11. 제 7항에 있어서,
    상기 음성 신호 최적화 장치는,
    상기 음성 신호 결정 모듈이 상기 단말기가 수집한 음성 신호중에서 상기 소정의 음원이 발신한 음성 신호를 결정하기 전에, 상기 단말기중의 자세 센서를 통하여 상기 단말기의 자세를 취득하기 위한 자세 취득 모듈; 및
    상기 단말기의 자세에 기반하여 상기 단말기가 수집한 음성 신호에 대하여 이득 보상을 진행 하기 위한 보상 모듈을 더 포함하며,
    상기 음성 신호 결정 모듈은 이득 보상 후의 음성 신호중에서 상기 소정의 음원이 발신한 음성 신호를 결정하는 것을 특징으로 하는 음성 신호 최적화 장치.
  12. 제 11항에 있어서,
    상기 보상 모듈은,
    상기 단말기의 정면과 수평면 사이의 협각에 기반하여 상기 협각에 정비례 하는 보상 수치를 결정하기 위한 수치 확정 서브 모듈; 및
    상기 보상 수치에 기반하여 상기 단말기가 수집한 음성 신호에 대하여 이득 보상을 진행하기 위한 보상 서브 모듈을 포함하며,
    상기 단말기의 자세는 상기 단말기의 정면과 수평면 사이의 협각을 포함하는
    것을 특징으로 하는 음성 신호 최적화 장치.
  13. 적어도 2개의 음성 수집 유닛을 갖는 단말기에 사용되며,
    상기 적어도 2개의 음성 수집 유닛을 통하여 상기 단말기 주변의 음원에 대하여 위치 결정을 하고, 위치 결정된 각 음원중에서 소정의 음원을 선별하고, 위치 결정에 의하여 취득된 상기 소정의 음원의 공간 위치에 기반하여 상기 단말기가 수집한 음성 신호중에서 상기 소정의 음원이 발신한 음성 신호를 결정하고, 상기 소정의 음원이 발신한 음성 신호에 대하여 음량을 최적화 하도록 구성된 프로세서; 및
    상기 프로세서의 실행 가능한 인스트럭션을 저장하기 위한 메모리
    를 포함하는 것을 특징으로 하는 음성 신호 최적화 방법 장치.
KR1020157031849A 2015-05-06 2015-09-22 음성 신호 최적화 방법 및 그 장치, 프로그램 및 저장매체 KR20160142217A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201510226844.2A CN106205628B (zh) 2015-05-06 2015-05-06 声音信号优化方法及装置
CN201510226844.2 2015-05-06
PCT/CN2015/090275 WO2016176951A1 (zh) 2015-05-06 2015-09-22 声音信号优化方法及装置

Publications (1)

Publication Number Publication Date
KR20160142217A true KR20160142217A (ko) 2016-12-12

Family

ID=55952949

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020157031849A KR20160142217A (ko) 2015-05-06 2015-09-22 음성 신호 최적화 방법 및 그 장치, 프로그램 및 저장매체

Country Status (9)

Country Link
US (1) US10499156B2 (ko)
EP (1) EP3091753B1 (ko)
JP (1) JP6314286B2 (ko)
KR (1) KR20160142217A (ko)
CN (1) CN106205628B (ko)
BR (1) BR112015031855A2 (ko)
MX (1) MX361588B (ko)
RU (1) RU2628473C2 (ko)
WO (1) WO2016176951A1 (ko)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106791039B (zh) * 2016-11-30 2019-11-15 努比亚技术有限公司 一种移动终端定位装置及方法
KR20180091319A (ko) * 2017-02-06 2018-08-16 삼성에스디에스 주식회사 사운드 공유 장치 및 방법
US10602296B2 (en) 2017-06-09 2020-03-24 Nokia Technologies Oy Audio object adjustment for phase compensation in 6 degrees of freedom audio
CN107846645B (zh) * 2017-11-02 2019-09-06 长沙东玛克信息科技有限公司 一种基于环境噪声及人体定位音响控制调节方法
CN108461084A (zh) * 2018-03-01 2018-08-28 广东美的制冷设备有限公司 语音识别系统控制方法、控制装置及计算机可读存储介质
CN108648758B (zh) * 2018-03-12 2020-09-01 北京云知声信息技术有限公司 医疗场景中分离无效语音的方法及系统
CN108538320B (zh) * 2018-03-30 2020-09-11 Oppo广东移动通信有限公司 录音控制方法和装置、可读存储介质、终端
CN108766457B (zh) * 2018-05-30 2020-09-18 北京小米移动软件有限公司 音频信号处理方法、装置、电子设备及存储介质
CN111385649B (zh) * 2018-12-28 2022-01-04 深圳Tcl新技术有限公司 一种电视声音传输控制方法、装置、智能电视及存储介质
CN109658758A (zh) * 2019-02-18 2019-04-19 西安科技大学 一种计算机会计教学仿真系统
CN110691300B (zh) * 2019-09-12 2022-07-19 连尚（新昌）网络科技有限公司 音频播放设备及用于提供信息的方法
CN110719545B (zh) * 2019-09-12 2022-11-08 连尚（新昌）网络科技有限公司 音频播放设备及用于播放音频的方法
CN110602595A (zh) * 2019-10-16 2019-12-20 南京沁恒微电子股份有限公司 一种分体式蓝牙耳机及其定位方法
CN112185353A (zh) * 2020-09-09 2021-01-05 北京小米松果电子有限公司 音频信号的处理方法、装置、终端及存储介质

Family Cites Families (55)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US13075A (en) * 1855-06-19 Horatio allen
US288864A (en) * 1883-11-20 Grate
US4864627A (en) * 1986-11-07 1989-09-05 Dugan Daniel W Microphone mixer with gain limiting and proportional limiting
JPS63262576A (ja) * 1987-04-20 1988-10-28 Sony Corp マイクロホン装置
US6001131A (en) * 1995-02-24 1999-12-14 Nynex Science & Technology, Inc. Automatic target noise cancellation for speech enhancement
JPH0946400A (ja) 1995-07-27 1997-02-14 Nec Corp 音声出力レベルの自動調整機能を備えた音声入出 力装置
JPH09252333A (ja) * 1996-03-15 1997-09-22 Kyocera Corp 音声会議装置
KR20020033829A (ko) * 2000-08-01 2002-05-07 요트.게.아. 롤페즈 디바이스를 소리 소스에 겨냥하기
US6594368B2 (en) * 2001-02-21 2003-07-15 Digisonix, Llc DVE system with dynamic range processing
KR20070050058A (ko) * 2004-09-07 2007-05-14 코닌클리케 필립스 일렉트로닉스 엔.브이. 향상된 잡음 억제를 구비한 전화통신 디바이스
RU2312405C2 (ru) * 2005-09-13 2007-12-10 Михаил Николаевич Гусев Способ осуществления машинной оценки качества звуковых сигналов
US8135148B2 (en) * 2006-04-26 2012-03-13 Microsemi Semiconductor Corp. Automatic gain control for mobile microphone
JP4747949B2 (ja) * 2006-05-25 2011-08-17 ヤマハ株式会社 音声会議装置
KR100883652B1 (ko) * 2006-08-03 2009-02-18 삼성전자주식회사 음성 구간 검출 방법 및 장치, 및 이를 이용한 음성 인식시스템
JP2008048342A (ja) * 2006-08-21 2008-02-28 Yamaha Corp 収音装置
JP4854533B2 (ja) * 2007-01-30 2012-01-18 富士通株式会社 音響判定方法、音響判定装置及びコンピュータプログラム
US7742746B2 (en) * 2007-04-30 2010-06-22 Qualcomm Incorporated Automatic volume and dynamic range adjustment for mobile audio devices
DE102007048973B4 (de) * 2007-10-12 2010-11-18 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Erzeugen eines Multikanalsignals mit einer Sprachsignalverarbeitung
EP2144231A1 (en) * 2008-07-11 2010-01-13 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Low bitrate audio encoding/decoding scheme with common preprocessing
KR101499785B1 (ko) 2008-10-23 2015-03-09 삼성전자주식회사 모바일 디바이스를 위한 오디오 처리 장치 및 그 방법
JP4811475B2 (ja) * 2009-02-27 2011-11-09 ソニー株式会社 録音装置、録音方法、音声信号補正回路及びプログラム
CN101510426B (zh) * 2009-03-23 2013-03-27 北京中星微电子有限公司 一种噪声消除方法及系统
KR101166612B1 (ko) 2009-08-19 2012-07-18 엘지전자 주식회사 단말기에서의 음원 처리 방법 및 이를 적용한 단말기
US9094645B2 (en) * 2009-07-17 2015-07-28 Lg Electronics Inc. Method for processing sound source in terminal and terminal using the same
JP2011066805A (ja) * 2009-09-18 2011-03-31 Oki Electric Industry Co Ltd 収音装置および収音方法
JP5246120B2 (ja) 2009-09-29 2013-07-24 沖電気工業株式会社 収音装置、利得制御方法、およびプログラム
JP5391999B2 (ja) * 2009-10-23 2014-01-15 株式会社Ｊｖｃケンウッド ポータブル録音装置、録音自動調整方法、及びプログラム
EP2339574B1 (en) * 2009-11-20 2013-03-13 Nxp B.V. Speech detector
JP5407848B2 (ja) * 2009-12-25 2014-02-05 富士通株式会社 マイクロホンの指向性制御装置
US8502837B2 (en) * 2010-03-04 2013-08-06 Research In Motion Limited System and method for activating components on an electronic device using orientation data
CH703440B1 (it) * 2010-07-12 2014-06-30 Supsi Scuola Universitaria Professionale Della Svizzera Italiana Icimsi Sistema per il trattamento delle acque reflue.
US8711736B2 (en) 2010-09-16 2014-04-29 Apple Inc. Audio processing in a multi-participant conference
US9031256B2 (en) * 2010-10-25 2015-05-12 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for orientation-sensitive recording control
US20120148075A1 (en) 2010-12-08 2012-06-14 Creative Technology Ltd Method for optimizing reproduction of audio signals from an apparatus for audio reproduction
CN102164328B (zh) * 2010-12-29 2013-12-11 中国科学院声学研究所 一种用于家庭环境的基于传声器阵列的音频输入系统
US8525868B2 (en) 2011-01-13 2013-09-03 Qualcomm Incorporated Variable beamforming with a mobile platform
US8989360B2 (en) * 2011-03-04 2015-03-24 Mitel Networks Corporation Host mode for an audio conference phone
US9549251B2 (en) 2011-03-25 2017-01-17 Invensense, Inc. Distributed automatic level control for a microphone array
GB2491173A (en) 2011-05-26 2012-11-28 Skype Setting gain applied to an audio signal based on direction of arrival (DOA) information
US8588434B1 (en) * 2011-06-27 2013-11-19 Google Inc. Controlling microphones and speakers of a computing device
KR20130061935A (ko) * 2011-12-02 2013-06-12 삼성전자주식회사 고도 정보 기반의 사용자 기능 제어 방법 및 이를 지원하는 단말기
JP2013168878A (ja) * 2012-02-16 2013-08-29 Olympus Imaging Corp 録音機器
CN103390410A (zh) * 2012-05-10 2013-11-13 宏碁股份有限公司 远程电话会议系统及方法
US20130332156A1 (en) * 2012-06-11 2013-12-12 Apple Inc. Sensor Fusion to Improve Speech/Audio Processing in a Mobile Device
TWI578755B (zh) * 2012-07-06 2017-04-11 鴻海精密工業股份有限公司 遠端多方會議音量調整系統及方法
JP5930900B2 (ja) * 2012-07-24 2016-06-08 日東電工株式会社 導電性フィルムロールの製造方法
US9001672B2 (en) * 2012-07-27 2015-04-07 Alcatel Lucent System, method and apparatus conforming path cost criteria across multiple ABRs
US9294859B2 (en) * 2013-03-12 2016-03-22 Google Technology Holdings LLC Apparatus with adaptive audio adjustment based on surface proximity, surface type and motion
KR102127640B1 (ko) * 2013-03-28 2020-06-30 삼성전자주식회사 휴대 단말 및 보청기와 휴대 단말에서 음원의 위치를 제공하는 방법
US9225815B2 (en) * 2013-07-23 2015-12-29 Google Technology Holdings LLC Method and device for loudness level determination
GB2520305A (en) * 2013-11-15 2015-05-20 Nokia Corp Handling overlapping audio recordings
US20170004845A1 (en) * 2014-02-04 2017-01-05 Tp Vision Holding B.V. Handheld device with microphone
CN103873977B (zh) * 2014-03-19 2018-12-07 惠州Tcl移动通信有限公司 基于多麦克风阵列波束成形的录音系统及其实现方法
CN104053107B (zh) * 2014-06-06 2018-06-05 重庆大学 一种用于噪声环境下声源分离和定位方法
US10366703B2 (en) * 2014-10-01 2019-07-30 Samsung Electronics Co., Ltd. Method and apparatus for processing audio signal including shock noise

Also Published As

Publication number Publication date
US10499156B2 (en) 2019-12-03
CN106205628B (zh) 2018-11-02
EP3091753A1 (en) 2016-11-09
CN106205628A (zh) 2016-12-07
RU2015155321A (ru) 2017-06-29
BR112015031855A2 (pt) 2017-07-25
JP6314286B2 (ja) 2018-04-18
EP3091753B1 (en) 2020-01-08
RU2628473C2 (ru) 2017-08-17
MX361588B (es) 2018-12-11
JP2017521024A (ja) 2017-07-27
MX2015017147A (es) 2017-04-06
WO2016176951A1 (zh) 2016-11-10
US20160330548A1 (en) 2016-11-10

Similar Documents

Publication Publication Date Title
KR20160142217A (ko) 음성 신호 최적화 방법 및 그 장치, 프로그램 및 저장매체
US10375296B2 (en) Methods apparatuses, and storage mediums for adjusting camera shooting angle
US10498873B2 (en) Screen control method, apparatus, and non-transitory tangible computer readable storage medium
RU2647093C2 (ru) Способ и устройство для управления интеллектуальным устройством посредством речи, устройство управления и интеллектуальное устройство
CN108510987B (zh) 语音处理方法及装置
JP6420493B2 (ja) 音量調整方法、装置および端末
EP3032821B1 (en) Method and device for shooting a picture
KR101834674B1 (ko) 영상 촬영 방법 및 장치
US20170034430A1 (en) Video recording method and device
US9491371B2 (en) Method and device for configuring photographing parameters
WO2017092246A1 (zh) 亮度调整方法及装置
EP3024211B1 (en) Method and device for announcing voice call
EP3125512A1 (en) Silent ring indication while listening music over a headset
CN111128092B (zh) 屏幕亮度调节方法、屏幕亮度调节装置及计算机存储介质
US20170366745A1 (en) Method, device and medium of photography prompts
EP3322227B1 (en) Methods and apparatuses for controlling wireless connection, computer program and recording medium
CN106572268B (zh) 信息显示方法及装置
US20210307104A1 (en) Method and apparatus for controlling intelligent voice control device and storage medium
EP3211879A1 (en) Method and device for automatically capturing photograph, electronic device
CN108629814B (zh) 相机调整方法及装置
CN106101441B (zh) 终端控制方法及装置
CN108206884B (zh) 终端、终端发射通信信号的调整方法和电子设备
US9723218B2 (en) Method and device for shooting a picture
CN112185353A (zh) 音频信号的处理方法、装置、终端及存储介质
CN112019677B (zh) 电子设备控制方法及装置

Legal Events

Date Code Title Description
A201 Request for examination
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
J301 Trial decision

Free format text: TRIAL NUMBER: 2017101003204; TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20170630

Effective date: 20190308