KR20170007451A - 이어폰 출력 스피커로부터의 청각적 측정 - Google Patents

이어폰 출력 스피커로부터의 청각적 측정 Download PDF

Info

Publication number
KR20170007451A
KR20170007451A KR1020167035505A KR20167035505A KR20170007451A KR 20170007451 A KR20170007451 A KR 20170007451A KR 1020167035505 A KR1020167035505 A KR 1020167035505A KR 20167035505 A KR20167035505 A KR 20167035505A KR 20170007451 A KR20170007451 A KR 20170007451A
Authority
KR
South Korea
Prior art keywords
signal
electro
voice signal
output
client terminal
Prior art date
Application number
KR1020167035505A
Other languages
English (en)
Inventor
에드먼드 벤-아미
노암 페트란크
Original Assignee
부가톤 엘티디.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 부가톤 엘티디. filed Critical 부가톤 엘티디.
Publication of KR20170007451A publication Critical patent/KR20170007451A/ko

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/0205Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
    • A61B5/02055Simultaneously evaluating both cardiovascular condition and temperature
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/021Measuring pressure in heart or blood vessels
    • A61B5/02133Measuring pressure in heart or blood vessels by using induced vibration of the blood vessel
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02438Detecting, measuring or recording pulse rate or heart rate with portable devices, e.g. worn by the patient
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/026Measuring blood flow
    • A61B5/0295Measuring blood flow using plethysmography, i.e. measuring the variations in the volume of a body part as modified by the circulation of blood therethrough, e.g. impedance plethysmography
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6802Sensor mounted on worn items
    • A61B5/6803Head-worn items, e.g. helmets, masks, headphones or goggles
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7228Signal modulation applied to the input signal sent to patient or subject; demodulation to recover the physiological signal
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7271Specific aspects of physiological measurement analysis
    • A61B5/7278Artificial waveform generation or derivation, e.g. synthesising signals from measured signals
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/7405Details of notification to user or communication with user or patient ; user input means using sound
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B7/00Instruments for auscultation
    • A61B7/02Stethoscopes
    • A61B7/04Electric stethoscopes
    • A61B7/045Detection of Korotkoff sounds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path
    • G06K9/00
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M9/00Arrangements for interconnection not involving centralised switching
    • H04M9/08Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/10Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1091Details not provided for in groups H04R1/1008 - H04R1/1083
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00Monitoring arrangements; Testing arrangements
    • H04R29/001Monitoring arrangements; Testing arrangements for loudspeakers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/04Circuits for transducers, loudspeakers or microphones for correcting frequency response
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0204Acoustic sensors
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0048Detecting, measuring or recording by applying mechanical forces or stimuli
    • A61B5/0051Detecting, measuring or recording by applying mechanical forces or stimuli by applying vibrations
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/486Bio-feedback
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6813Specially adapted to be attached to a specific body part
    • A61B5/6814Head
    • A61B5/6815Ear
    • A61B5/6817Ear canal
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/15Biometric patterns based on physiological signals, e.g. heartbeat, blood flow

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Surgery (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Cardiology (AREA)
  • Physiology (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • Hematology (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Pulmonology (AREA)
  • Vascular Medicine (AREA)
  • Theoretical Computer Science (AREA)
  • Otolaryngology (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Telephone Function (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Stereophonic System (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Headphones And Earphones (AREA)
  • Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)

Abstract

본 발명의 일부 실시예에 따르면, 2명 및/또는 그 이상의 참가자들간의 전화 통화를 위한 마이크로폰으로서 이어폰 출력 스피커를 이용하는, 또는 사용자의 바이오메트릭 데이터를 측정하기 위한 방법이 제공된다. 이 방법은 수신된 신호를 이어폰의 전기-음향 출력 트랜스듀서에 재생하는 단계를 포함할 수 있다. 이 방법은 로컬 클라이언트 단말기의 오디오 처리 회로에게 동일한 전기-음향 출력 트랜스듀서로부터의 오디오 신호를 기록하도록 지시하는 단계를 포함할 수 있다. 이 방법은, 로컬 클라이언트 단말기의 처리 유닛을 이용하여, 기록된 오디오 신호, 수신된 신호 및 필터링 계수들을 결합하는 함수에 기초하여 음성 신호 및/또는 바이오메트릭 측정치를 계산하는 단계를 포함할 수 있다. 이 방법은 로컬 클라이언트 단말기의 출력 인터페이스를 통해 음성 신호 및/또는 바이오메트릭 측정치를 전송하는 단계를 포함할 수 있다.

Description

이어폰 출력 스피커로부터의 청각적 측정{AURAL MEASUREMENTS FROM EARPHONE OUTPUT SPEAKERS}
본 발명은, 그 일부 실시예에서, 이어폰 출력 스피커를 이용하는 측정에 관한 것으로, 더 구체적으로는, 이어폰의 전기-음향 출력 트랜스듀서로부터의 온도, 바이오메트릭 및/또는 음향 측정에 관한 것이고, 이것으로 제한되는 것은 아니다.
생리학적 및 환경적 측정은 전용 디바이스에 의해 또는 특수 센서를 클라이언트 단말기의 부속 디바이스에 추가함으로써 수행될 수 있다. 예를 들어, 유리 아날로그 및/또는 전자 디지털 온도계가 체온 측정에 이용된다. 이 디바이스는, 피부 접촉으로부터, 또는 적외선 발열 센서를 이용한 외이도(ear canal)를 통해, 체온을 측정하도록 설계될 수 있다. 예를 들어, 음악을 청취하거나 음성 통화에 참여하는 동안 스마트폰 상에서 온도를 측정하기 위해 이어폰에 특수 온도 센서가 추가되었다.
개인용 맥박수 모니터는 펄스 센서 및 전용 전자기기를 이용하여 필요할 때 또는 운동 중에 지속적으로 맥박수를 측정한다. 전용 맥박수 센서는, 흉부 밴드, 손목 밴드 및 이어폰에 통합될 수 있다.
셀룰러 및/또는 무선 전화기 상의 음성 통화 동안에, 마이크로폰은 통화중인 참가자의 음성 신호를 측정하는데 이용되고, 신호는 실시간으로 다른 참가자에게 전송된다. 추가적인 마이크로폰은 음성 신호로부터 배경 및/또는 가우시안 노이즈를 감소시키는데 이용될 수 있다.
모바일 디바이스용 이어폰은, 원격 참가자로부터의 음악 및/또는 음성 신호를 재생하는, 이어폰 출력 스피커라고도 하는 전용 전기-음향 출력 트랜스듀서를 포함한다.
본 발명의 일부 실시예에 따르면, 2명 이상의 참가자 간의 전화 통화를 위한 마이크로폰으로서 이어폰 출력 스피커를 이용하는 방법이 제공된다. 이 방법은 수신된 음성 신호를 하나 이상의 이어폰의 하나 이상의 전기-음향 출력 트랜스듀서에 재생하는 단계를 포함하고, 여기서, 수신된 음성 신호는 원격 클라이언트 단말기로부터 기록된 원격 참가자의 음성이다. 이 방법은 로컬 클라이언트 단말기의 오디오 처리 집적 회로에게 하나 이상의 전기-음향 출력 트랜스듀서로부터의 음성 신호를 기록하도록 지시하는 단계를 포함할 수 있고, 여기서, 음성 신호는 로컬 클라이언트 단말기를 이용하는 로컬 참가자의 음성이다. 이 방법은 로컬 클라이언트 단말기의 처리 유닛을 이용하여, 기록된 음성 신호, 수신된 음성 신호 및 필터링 계수들을 결합하는 함수에 기초하여 전송 음성 신호를 계산하는 단계를 포함할 수 있다. 이 방법은 로컬 클라이언트 단말기의 출력 인터페이스를 통해 전송 음성 신호를 전송함으로써, 전화 통화 통신을 위한 원격 위치의 원격 클라이언트 단말기 상에서 전송 음성 신호의 음향적 음성 재생을 가능하게 하는 단계를 포함할 수 있다.
선택사항으로서, 하나 이상의 전기-음향 출력 트랜스듀서는 이어폰에 접속된 외부 스피커이다.
선택사항으로서, 하나 이상의 전기-음향 출력 트랜스듀서는 클라이언트 단말기의 내부 스피커이다.
선택사항으로서, 음성 신호 기록 및 수신된 음성 신호 재생은 동일한 전기-음향 트랜스듀서로부터 동시에 수행된다.
선택사항으로서, 음성 신호 기록 및 수신된 음성 신호 재생은 동일한 전기-음향 트랜스듀서로부터 교대로 수행되며, 여기서, 제1 기간 동안 재생이 수행되고 제2 기간 동안 들리지 않을 정도로 충분히 짧은 시간에 기록이 수행된다.
본 발명의 일부 실시예의 양태에 따르면, 여기서 설명된 방법들을 수행하도록 구성된 컴퓨터 실행가능한 명령어를 포함하는 컴퓨터 판독가능한 매체가 제공된다.
본 발명의 일부 실시예의 양태에 따르면, 2명 이상의 참가자 간의 전화 통화의 원격 참가자에게 노이즈 감소된 음성 신호를 전송하는 방법이 제공된다. 이 방법은 수신된 음성 신호를 하나 이상의 이어폰의 하나 이상의 전기-음향 출력 트랜스듀서에 재생하는 단계를 포함하고, 여기서, 수신된 음성 신호는 원격 클라이언트 단말기로부터 기록된 원격 참가자의 음성이다. 이 방법은, 로컬 클라이언트 단말기에 통합된 내부 마이크로폰에게 음성 신호를 기록하도록 지시하는 단계를 포함할 수 있고, 여기서, 음성 신호는 로컬 클라이언트 단말기를 이용하는 로컬 참가자의 음성이다. 이 방법은 로컬 클라이언트 단말기의 오디오 처리 집적 회로에게 하나 이상의 전기-음향 출력 트랜스듀서를 이용하여 청각적 오디오 신호를 기록하도록 지시하는 단계를 포함할 수 있다. 이 방법은 로컬 클라이언트 단말기의 처리 유닛을 이용하여, 음성 신호, 청각적 오디오 신호, 수신된 음성 신호 및 필터링 계수들을 결합하는 함수에 기초하여 노이즈 감소된 음성 신호를 계산하는 단계를 포함할 수 있다. 이 방법은 출력 인터페이스를 통해 노이즈 감소된 음성 신호를 전송함으로써, 전화 통화 통신을 위한 원격 위치의 원격 클라이언트 단말기 상에서 노이즈 감소된 음성 신호의 음향 재생을 가능하게 하는 단계를 포함할 수 있다.
선택사항으로서, 청각적 오디오 신호 기록 및 수신된 음성 신호 재생은 동일한 전기-음향 출력 트랜스듀서로부터 동시에 수행된다.
본 발명의 일부 실시예의 양태에 따르면, 맥박수 측정치를 프리젠팅하는 방법이 제공된다. 이 방법은 출력 오디오 신호를 하나 이상의 이어폰의 하나 이상의 전기-음향 출력 트랜스듀서에 재생하는 단계를 포함할 수 있다. 이 방법은 클라이언트 단말기의 오디오 처리 집적 회로에게 하나 이상의 전기-음향 출력 트랜스듀서를 이용하여 청각적 오디오 신호를 기록하도록 지시하는 단계를 포함할 수 있다. 이 방법은, 청각적 오디오 신호, 출력 오디오 신호 및 필터링 계수들을 결합하는 함수에 기초하여 맥박수 측정치를 계산하는 단계를 포함할 수 있다. 이 방법은 맥박수 측정치를 프리젠팅하는 단계를 포함할 수 있다.
선택사항으로서, 청각적 오디오 신호 기록 및 출력 오디오 신호 재생은 동일한 하나 이상의 전기-음향 출력 트랜스듀서로부터 동시에 수행된다.
선택사항으로서, 청각적 오디오 신호 기록 및 출력 오디오 신호 재생은 동일한 하나 이상의 전기-음향 출력 트랜스듀서로부터 교대로 수행되며, 여기서, 제1 기간 동안 재생이 수행되고 제2 기간 동안 들리지 않을 정도로 충분히 짧은 시간에 기록이 수행된다.
선택사항으로서, 전기-음향 트랜스듀서는 청각적 오디오 신호의 기록 동안에 외이도 내부에 위치한다.
선택사항으로서, 맥박수 측정치는, 청각적 오디오 신호와, 하나 이상의 제2 전기-음향 출력 트랜스듀서로부터 기록된 제2 청각적 오디오 신호간의 시간 시프트의 측정치에 기초하여 계산된다.
선택사항으로서, 맥박수 측정치는 외이도의 주파수 응답에서의 변화에 기초하여 계산된다.
선택사항으로서, 맥박수 측정치는 사용자 인터페이스를 통해 사용자에게 프리젠팅된다.
선택사항으로서, 맥박수 측정치는 출력 인터페이스를 통해 원격 디바이스에 프리젠팅된다.
본 발명의 일부 실시예의 양태에 따르면, 온도 측정치를 프리젠팅하는 방법이 제공된다. 이 방법은 출력 오디오 신호를 하나 이상의 전기-음향 트랜스듀서에 재생하는 단계를 포함할 수 있다. 이 방법은 클라이언트 단말기의 오디오 처리 집적 회로에게 하나 이상의 전기-음향 트랜스듀서를 이용하여 오디오 신호를 기록하도록 지시하는 단계를 포함할 수 있다. 이 방법은, 오디오 신호, 출력 오디오 신호 및 필터링 계수들을 결합하는 함수에 기초하여 2개 이상의 온도 측정치를 계산하는 단계를 포함할 수 있다. 이 방법은 2개 이상의 온도 측정치 중 하나 이상을 프리젠팅하는 단계를 포함한다.
선택사항으로서, 하나 이상의 전기-음향 트랜스듀서는 마이크로폰이다.
선택사항으로서, 하나 이상의 전기-음향 트랜스듀서는 이어폰의 출력 스피커이다.
선택사항으로서, 하나 이상의 전기-음향 트랜스듀서는 이어폰에 접속된 외부 스피커이고, 2개 이상의 온도 측정치는 주변 및 내이(inner ear) 온도 측정치를 포함한다.
선택사항으로서, 하나 이상의 전기-음향 트랜스듀서는 클라이언트 단말기의 내부 스피커고, 2개 이상의 온도 측정치는 주변 및 디바이스 온도 측정치를 포함한다.
선택사항으로서, 전기-음향 트랜스듀서는 오디오 신호의 기록 동안에 타겟 사용자의 외이도 내부에 위치하고 2개의 이상의 온도 측정치 중 하나는 타겟 사용자의 체온과 상관된 내이 측정치이다.
선택사항으로서, 2개 이상의 온도 측정치 중 하나 이상은 사용자 인터페이스를 통해 사용자에게 프리젠팅된다.
선택사항으로서, 2개 이상의 온도 측정치 중 하나 이상은 출력 인터페이스를 통해 원격 디바이스에 프리젠팅된다.
본 발명의 일부 실시예의 양태에 따르면, 전송 음성 신호를 전송하기 위한 컴퓨터 프로그램 제품이 제공된다. 이 컴퓨터 프로그램 제품은 컴퓨터 판독가능한 저장 매체를 포함할 수 있다. 이 컴퓨터 프로그램 제품은 수신된 음성 신호를 하나 이상의 이어폰의 하나 이상의 전기-음향 출력 트랜스듀서에 재생하는 제1 프로그램 명령어를 포함할 수 있다. 이 컴퓨터 프로그램 제품은 로컬 클라이언트 단말기의 오디오 처리 집적 회로에게 하나 이상의 전기-음향 출력 트랜스듀서를 이용하여 음성 신호를 기록하도록 지시하는 제2 프로그램 명령어를 포함할 수 있다. 이 컴퓨터 프로그램 제품은 기록된 음성 신호를 결합하는 함수에 기초하여 전송 음성 신호를 계산하는 제3 프로그램 명령어를 포함할 수 있다. 이 컴퓨터 프로그램 제품은 로컬 클라이언트 단말기의 출력 인터페이스를 통해 전송 음성 신호를 전송하는 제4 프로그램 명령어를 포함할 수 있고, 제1, 제2, 제3, 및 제4 프로그램 명령어들은 컴퓨터 판독가능한 저장 매체에 저장될 수 있다.
본 발명의 일부 실시예의 양태에 따르면, 노이즈 감소된 음성 신호를 전송하기 위한 컴퓨터 프로그램 제품이 제공된다. 이 컴퓨터 프로그램 제품은 컴퓨터 판독가능한 저장 매체를 포함할 수 있다. 이 컴퓨터 프로그램 제품은 수신된 음성 신호를 하나 이상의 이어폰의 하나 이상의 전기-음향 출력 트랜스듀서에 재생하는 제1 프로그램 명령어를 포함할 수 있다. 이 컴퓨터 프로그램 제품은 클라이언트 단말기에 통합된 내부 마이크로폰에게 음성 신호를 기록하도록 지시하는 제2 프로그램 명령어를 포함할 수 있다. 이 컴퓨터 프로그램 제품은 클라이언트 단말기의 오디오 처리 집적 회로에게 하나 이상의 전기-음향 출력 트랜스듀서를 이용하여 청각적 오디오 신호를 기록하도록 지시하는 제3 프로그램 명령어를 포함할 수 있다. 이 컴퓨터 프로그램 제품은, 음성 신호, 청각적 오디오 신호 및 필터링 계수들을 결합하는 함수에 기초하여 노이즈 감소된 음성 신호를 계산하는 제4 프로그램 명령어를 포함할 수 있다. 이 컴퓨터 프로그램 제품은 클라이언트 단말기의 출력 인터페이스를 통해 노이즈 감소된 음성 신호를 전송하는 제5 프로그램 명령어를 포함할 수 있고, 제1, 제2, 제3, 제4, 및 제5 프로그램 명령어들은 컴퓨터 판독가능한 저장 매체에 저장될 수 있다.
본 발명의 일부 실시예의 양태에 따르면, 맥박수 측정치를 프리젠팅하기 위한 컴퓨터 프로그램 제품이 제공된다. 이 컴퓨터 프로그램 제품은 컴퓨터 판독가능한 저장 매체를 포함할 수 있다. 이 컴퓨터 프로그램 제품은 출력 오디오 신호를 하나 이상의 이어폰의 하나 이상의 전기-음향 출력 트랜스듀서에 재생하는 제1 프로그램 명령어를 포함할 수 있다. 이 컴퓨터 프로그램 제품은 클라이언트 단말기의 오디오 처리 집적 회로에게 하나 이상의 전기-음향 출력 트랜스듀서를 이용하여 청각적 오디오 신호를 기록하도록 지시하는 제2 프로그램 명령어를 포함할 수 있다. 이 컴퓨터 프로그램 제품은 기록된 청각적 오디오 신호를 결합하는 함수에 기초하여 맥박수 측정치를 계산하는 제3 프로그램 명령어를 포함할 수 있다. 이 컴퓨터 프로그램 제품은 맥박수 측정치를 프리젠팅하는 제4 프로그램 명령어를 포함할 수 있고, 제1, 제2, 제3, 및 제4 프로그램 명령어들은 컴퓨터 판독가능한 저장 매체에 저장된다.
본 발명의 일부 실시예의 양태에 따르면, 온도 측정치를 프리젠팅하기 위한 컴퓨터 프로그램 제품이 제공된다. 이 컴퓨터 프로그램 제품은 컴퓨터 판독가능한 저장 매체를 포함할 수 있다. 이 컴퓨터 프로그램 제품은 출력 오디오 신호를 하나 이상의 이어폰의 하나 이상의 전기-음향 출력 트랜스듀서에 재생하는 제1 프로그램 명령어를 포함할 수 있다. 이 컴퓨터 프로그램 제품은 클라이언트 단말기의 오디오 처리 집적 회로에게 하나 이상의 전기-음향 출력 트랜스듀서를 이용하여 청각적 오디오 신호를 기록하도록 지시하는 제2 프로그램 명령어를 포함할 수 있다. 이 컴퓨터 프로그램 제품은 기록된 청각적 오디오 신호를 결합하는 함수에 기초하여 온도 측정치를 계산하는 제3 프로그램 명령어를 포함할 수 있다. 이 컴퓨터 프로그램 제품은 온도 측정치를 프리젠팅하는 제4 프로그램 명령어를 포함할 수 있고, 제1, 제2, 제3, 및 제4 프로그램 명령어들은 컴퓨터 판독가능한 저장 매체에 저장된다.
본 발명의 일부 실시예의 양태에 따르면, 전화 통화의 원격 참가자에게 음성 신호를 전송하기 위한 디바이스가 제공된다. 이 디바이스는 전화 통화의 로컬 참가자의 로컬 음성 신호를 전송하고 원격 참가자의 원격 음성 신호를 수신하기 위한 인터페이스를 포함할 수 있다. 이 디바이스는 이어폰을 디바이스에 접속하기 위한 오디오 소켓을 포함할 수 있다. 이 디바이스는 수신된 음성 신호를 하나 이상의 이어폰의 하나 이상의 출력 스피커에 재생하는 동작을 수행하기 위한 프로세서 명령어 세트들을 갖춘 하나 이상의 저장 유닛을 포함할 수 있다. 저장 유닛은 오디오 회로에게 이어폰의 하나 이상의 출력 스피커로부터의 청각적 신호를 기록하도록 지시하는 동작을 수행하기 위한 프로세서 명령어 세트들을 포함할 수 있다. 저장 유닛은 청각적 신호로부터 로컬 음성 신호를 계산하는 동작을 수행하기 위한 프로세서 명령어 세트들을 포함할 수 있다. 저장 유닛은 전화 통화에서 로컬 음성 신호를 원격 참가자의 플레이어 디바이스에 전송하는 동작을 수행하기 위한 프로세서 명령어 세트를 포함할 수 있다. 이 디바이스는 하나 이상의 저장 유닛으로부터 프로세서 명령어 세트들을 검색하고 프로세서 명령어 세트를 실행하도록 구성된 하나 이상의 처리 유닛을 포함할 수 있다.
선택사항으로서, 이 디바이스는 마이크로폰을 포함하고, 마이크로폰은 제2 음성 신호를 기록하며, 음성 신호는 청각적 신호 및 제2 음성 신호를 이용하여 계산된 노이즈 감소된 음성 신호이다.
본 발명의 일부 실시예의 양태에 따르면, 바이오메트릭 측정치를 프리젠팅하기 위한 디바이스가 제공된다. 이 디바이스는 이어폰을 디바이스에 접속하기 위한 오디오 소켓을 포함할 수 있다. 이 디바이스는 출력 오디오 신호를 하나 이상의 이어폰의 하나 이상의 출력 스피커에 재생하기 위한 프로세서 명령어 세트들을 포함하는 하나 이상의 저장 유닛을 포함할 수 있다. 저장 유닛은 오디오 회로에게 이어폰의 하나 이상의 출력 스피커로부터의 청각적 신호를 기록하도록 지시하기 위한 프로세서 명령어 세트들을 포함할 수 있다. 저장 유닛은 청각적 신호로부터 하나 이상의 바이오메트릭 측정치를 계산하기 위한 프로세서 명령어 세트를 포함할 수 있다. 저장 유닛은 하나 이상의 바이오메트릭 측정치를 프리젠팅하기 위한 프로세서 명령어 세트를 포함할 수 있다. 이 디바이스는 하나 이상의 저장 유닛으로부터 프로세서 명령어 세트들을 검색하고 프로세서 명령어 세트를 실행하도록 구성된 하나 이상의 처리 유닛을 포함할 수 있다.
선택사항으로서, 이 디바이스는 데이터 인터페이스를 포함하고, 하나 이상의 바이오메트릭 측정치는 데이터 인터페이스를 이용하여 원격 디바이스 상에 프리젠팅된다.
달리 정의되지 않는 한, 본 명세서에서 사용되는 모든 기술적 및/또는 과학적 용어들은 본 발명이 속하는 기술분야의 통상의 기술자가 통상적으로 이해하는 바와 동일한 의미를 가진다. 본 명세서에서 설명된 것과 유사하거나 동등한 임의의 방법 및 재료가 본 발명의 실시나 테스트에 이용될 수 있지만, 이하에서는 예시적인 방법 및/또는 재료가 설명된다. 충돌이 있는 경우, 정의를 포함한 본 특허 명세서가 우선적이다. 또한, 재료, 방법, 및 예들은 단지 예시일 뿐이고 반드시 제한적인 것을 의도하지 않는다.
본 발명의 실시예들의 방법 및/또는 시스템의 구현은 선택된 작업을 수동으로, 자동으로 또는 이들의 조합으로 수행하거나 완료하는 것을 포함할 수 있다. 또한, 본 발명의 방법 및/또는 시스템의 실시예들의 실제 기구 및 장비에 따라, 몇몇 선택된 작업은 하드웨어에 의해, 소프트웨어에 의해 또는 펌웨어에 의해 또는 운영 체제를 이용한 이들의 조합에 의해 구현될 수 있다.
예를 들어, 본 발명의 실시예에 따라 선택된 작업을 수행하기 위한 하드웨어는 칩 또는 회로로서 구현될 수 있다. 소프트웨어로서, 본 발명의 실시예에 따른 선택된 작업은 임의의 적절한 운영 체제를 이용하여 컴퓨터에 의해 실행되는 복수의 소프트웨어 명령어로서 구현될 수 있다. 본 발명의 예시적인 실시예에서, 여기서 설명된 방법 및/또는 시스템의 예시적인 실시예들에 따른 하나 이상의 작업은, 복수의 명령어를 실행하기 위한 컴퓨팅 플랫폼 등의, 데이터 프로세서에 의해 수행된다. 선택사항으로서, 데이터 프로세서는, 명령어 및/또는 데이터를 저장하기 위한 휘발성 메모리, 및/또는 명령어 및/또는 데이터를 저장하기 위한, 자기 하드 디스크 및/또는 착탈식 매체 등의 비휘발성 저장장치를 포함한다. 선택사항으로서, 네트워크 접속이 역시 제공된다. 디스플레이 및/또는 키보드 또는 마우스 등의 사용자 입력 디바이스가 선택사항으로서 역시 제공된다.
본 발명의 일부 실시예들이, 첨부된 도면을 참조하여, 단지 예로서 여기서 설명된다. 이제 도면들을 상세히 참조하여, 도시된 구체적인 사항들은 예로서 및 본 발명의 실시예들의 예시적 논의의 목적을 위해 제시된 것임을 강조한다. 이 점에서, 도면들과 함께 취해지는 설명은 본 발명의 실시예들이 어떻게 실시될 수 있는지를 본 기술분야의 통상의 기술자에게 명백하게 할 것이다.
도면들에서:
도 1a는, 본 발명의 일부 실시예에 따른, 이어폰 출력 스피커로부터 선택사항으로서 노이즈 감소된 음성 신호를 계산하는 시스템 및 디바이스의 개략도이다;
도 1b는, 본 발명의 일부 실시예에 따른, 이어폰 출력 스피커로부터 기록된 청각적 신호로부터 맥박수 및/또는 온도 측정치를 계산하는 시스템 및 디바이스의 개략도이다;
도 2는, 본 발명의 일부 실시예에 따른, 이어폰 출력 스피커로부터 전화 통화 오디오 신호를 생성하는 방법의 흐름도이다;
도 3은, 본 발명의 일부 실시예에 따른, 이어폰 출력 스피커로부터 맥박수를 측정하는 방법의 흐름도이다;
도 4는, 본 발명의 일부 실시예에 따른, 이어폰 출력 스피커로부터 온도를 측정하는 방법의 흐름도이다;
도 5는, 본 발명의 일부 실시예에 따른, 이어폰 출력 스피커로부터의 신호를 기록하고, 신호들을 계산 및/또는 데이터를 측정하며, 데이터를 출력하는 사용자 인터페이스의 개략도이다.
본 발명은, 그 일부 실시예에서, 이어폰 출력 스피커를 이용하는 측정에 관한 것으로, 더 구체적으로는, 이어폰의 전기-음향 출력 트랜스듀서로부터의 온도, 바이오메트릭 및/또는 음향 측정에 관한 것이나, 이것으로 제한되는 것은 아니다.
바이오메트릭 및 청각적 사운드 측정을 위한 현재의 방법은 전용 하드웨어 및 전자기기를 요구하므로, 제품 비용, 개발 시간 및 개발 비용을 증가시킨다. 또한 이들 방법들 중 일부는 측정 디바이스가 배경 노이즈 및 대상의 움직임에 민감하기 때문에 측정 동안에 사용자가 정지해 있을 것을 요구할 수도 있다.
이러한 한계를 극복하기 위해, 이어폰의 하나 이상의 출력 스피커가, 사용자가 동일한 출력 스피커를 이용하여 음악, 사운드 트랙, 전화 통화의 음성 등을 청취하면서 측정을 행하는데 이용될 수 있다. 클라이언트 단말기의 오디오 처리 회로는, 선택사항으로서 리와이어링 어댑터(rewiring adaptor)와 함께, 이어폰 출력 스피커 등의 이어폰 전기-음향 출력 트랜스듀서로부터의 청각적 사운드 신호를 기록하도록 구성될 수 있다. 예를 들어, 이어폰 및 클라이언트 단말기는 기성 제품이고, 클라이언트 단말기에 특별한 하드웨어가 통합되지는 않는다. 청각적 사운드 신호는 클라이언트 단말기의 프로세서에 의해 처리되어 온도, 맥박수, 노이즈 신호 및 음성 신호의 측정치를 생성할 수 있다. 본 명세서에 사용될 때, 용어 클라이언트 단말기란, 스마트폰, 휴대 전화, 휴대형 음악 플레이어, 태블릿, 랩탑, 착용형 디바이스, 개인용 컴퓨터 등을 의미한다. 본 명세서에서 사용될 때, 용어 이어폰이란, 전기-음향 트랜스듀서 등의 적어도 하나의 출력 스피커를 포함하는, 이어폰, 헤드폰, 이어버드(earbud) 등을 말한다. 이어폰은 일상적인 음성 통화 및 음악 재생에 사용되는 일반 이어폰 일 수 있으며, 특별한 센서 또는 하드웨어를 요구하지 않는다.
예를 들어, 청각적 사운드 신호는 원격 참가자와의 전화 통화에서 사용하기 위한 음성 신호를 계산하는데 이용될 수 있다. 또 다른 예에서, 클라이언트 단말기 및/또는 이어폰은 통합된 마이크로폰을 가지며, 청각적 사운드 신호는 전화 통화를 위한 노이즈 감소된 음성 신호를 계산하는데 이용될 수 있다. 또 다른 예에서, 청각적 사운드 신호 음향 특성은 이어폰 전기-음향 출력 트랜스듀서의 내부 및 외부의 온도에 민감하다. 이 예에서, 전용 방법으로 청각적 사운드 신호를 처리하면 내이 및 주변에 대한 온도 측정치를 계산할 수 있다. 또 다른 예에서, 하나 이상의 청각적 사운드 신호의 주기적 특징을 분석하면 맥박수를 계산할 수 있다.
예를 들어, 기존의 온도계 디바이스를 이용하면 대상이 상대적으로 고정되어 있어야 하며 정상적인 일상 활동 중에 오랜 시간 동안 온도를 모니터링하지 못할 수도 있다. 여기서 설명되는 방법들의 일부 실시예를 이용하면, 이어폰 출력 스피커가 이용되어 편리하고 연속적으로 체온을 측정하여, 출산용 체온 모니터링, 건강 모니터링, 감정 모니터링 및/또는 기타의 용도의 적용을 가능하게 한다. 클라이언트 단말기 내부의 출력 스피커로부터 기록된 청각적 사운드 신호를 이용하는 것은 클라이언트 단말기의 온도를 측정하는 것을 허용하고, 온도 측정치에 기초하여 전력 사용량을 결정한다. 클라이언트 단말기 트랜시버, 프로세서 및 디스플레이 사용이 전력 사용량을 설명하지 못한다면, 클라이언트 단말기는 오작동 중일 수 있다. 기록된 청각적 사운드 신호는, 전화 통화 동안에 음악을 재생하거나 및/또는 음성 신호를 청취하는데 이용되는 스피커와 동일한 스피커로부터 기록된다.
본 발명의 일부 실시예에 따르면, 청각적 음향 신호를 기록하고 이들 신호를 이어폰 출력 스피커의 환경의 측정치로 변환하기 위해 이어폰 출력 스피커를 이용하기 위한 컴퓨터화된 방법 및 디바이스가 제공된다. 클라이언트 단말기 디바이스는, 음악 재생에 이용되는 동일한 이어폰 출력 스피커로부터의 신호 기록을 허용하도록 구성될 수 있는, 여기서는 코더/디코더(CODEC)라고 하는, 오디오 처리 집적 회로를 가질 수도 있다. 여기서 사용될 때, 용어 CODEC은, 클라이언트 단말기의 오디오 신호의 입력 및 출력을 처리하는데 이용되는 회로 또는 집적 회로를 포함할 수 있는 오디오 처리 집적 회로를 의미한다. 청각적 음향 신호는 출력 스피커 환경에 관련된 측정치를 계산하기 위해 클라이언트 단말기를 이용하여 처리될 수 있다. 예를 들어, 청각적 음향 신호는, 마이크로폰이 코덱에 접속되어 있지 않은 때에도 전화 통화에 이용하기 위해 모바일 클라이언트 단말기 소유자의 음성 신호를 생성하도록 처리된다. 예를 들어, 음향 신호는 마이크로폰으로부터 수집된 음성 신호로부터 노이즈 감소된 음성 신호를 생성하는데 이용된다. 예를 들어, 청각적 음향 신호는 외이도의 근방 및/또는 그 내부에 위치한 이어폰 출력 스피커로부터의 심장 사운드를 계산하는데 이용된다. 예를 들어, 청각적 음향 신호는 외이도의 근방 및/또는 그 내부에 위치한 이어폰 출력 스피커로부터의 심박수(heart rate)를 계산하는데 이용된다. 예를 들어, 청각적 음향 신호는 외이도의 근방 및/또는 그 내부에 위치한 이어폰 출력 스피커로부터의 체온을 계산하는데 이용된다. 예를 들어, 청각적 음향 신호는 이어폰 출력 스피커로부터의 주변 온도를 계산하는데 이용된다.
선택사항으로서, 리와이어링 어댑터는 CODEC이 이어폰 출력 스피커로부터의 청각적 오디오 신호를 기록할 수 있게하는데 이용된다.
본 발명의 적어도 한 실시예를 상세히 설명하기 전에, 본 발명은 그 응용에 있어서 이하의 상세한 설명에 개시되거나 도면들 및/또는 예들에 도시된 컴포넌트들의 배열 및/또는 방법의 상세사항으로 제한되지 않는다는 점을 이해해야 한다. 본 발명은 다른 실시예들이 가능하거나, 다양한 방식으로 실시 또는 실행될 수 있다.
본 발명은, 시스템, 방법 및/또는 컴퓨터 프로그램 제품일 수 있다. 컴퓨터 프로그램 제품은 프로세서로 하여금 본 발명의 양태들을 실행하게 하기 위한 컴퓨터 판독가능한 프로그램 명령어들을 갖는 컴퓨터 판독가능한 저장 매체(또는 매체)를 포함할 수 있다.
컴퓨터 판독가능한 저장 매체는 명령어 실행 디바이스에 의한 사용을 위한 명령어를 보유하고 저장할 수 있는 유형의 디바이스(tangible device)일 수 있다. 컴퓨터 판독가능한 저장 매체는, 예를 들어, 전자적 저장 디바이스, 자기적 저장 디바이스, 광학적 저장 디바이스, 전자기 저장 디바이스, 반도체 저장 디바이스, 또는 이들의 임의의 적절한 조합일 수 있다. 컴퓨터 판독가능한 저장 매체의 더 구체적인 예에 대한 비제한적 목록은, 휴대형 컴퓨터 디스켓, 하드 디스크, 랜덤 액세스 메모리(RAM), 판독 전용 메모리(ROM), 소거가능한 프로그램가능한 판독 전용 메모리(EPROM 또는 플래시 메모리), SRAM(Static Random Access Memory), 휴대형 콤팩트 디스크 판독 전용 메모리(CD-ROM), DVD(digital versatile disk), 메모리 스틱, 플로피 디스크, 펀치-카드(punch-card) 또는 명령어들이 기록된 그루브 내의 융기 구조(raised structure)와 같은 기계적 인코딩형 디바이스, 및 이들의 임의의 적절한 조합을 포함한다. 컴퓨터 판독가능한 저장 매체는, 여기서 사용될 때, 라디오파 또는 다른 자유로이 전파하는 전자기파, 도파관 또는 기타의 전송 매체를 통해 전파하는 전자기파(예를 들어, 광섬유 케이블을 통과하는 광 펄스), 또는 와이어를 통해 전송되는 전기 신호 등의, 그 자체로 일시적인 신호인 것으로 해석되어서는 안 된다.
여기서 설명되는 컴퓨터 판독가능한 프로그램 명령어는, 네트워크, 예를 들어, 인터넷, 근거리 네트워크, 광역 네트워크 및/또는 무선 네트워크를 통해 컴퓨터 판독가능한 저장 매체로부터 각각의 컴퓨팅/처리 디바이스에 또는 외부 컴퓨터나 외부 저장 디바이스에 다운로드될 수 있다. 네트워크는, 구리 전송 케이블, 광 전송 섬유, 무선 전송, 라우터, 방화벽, 스위치, 게이트웨이 컴퓨터 및/또는 에지 서버(edge server)를 포함할 수 있다. 각각의 컴퓨팅/처리 디바이스의 네트워크 어댑터 카드 또는 네트워크 인터페이스는 네트워크로부터 컴퓨터 판독가능한 프로그램 명령어를 수신하고 각각의 컴퓨팅/처리 디바이스 내의 컴퓨터 판독가능한 저장 매체에 저장하기 위해 컴퓨터 판독가능한 프로그램 명령어를 포워딩한다.
본 발명의 동작을 수행하기 위한 컴퓨터 판독가능한 프로그램 명령어는, 어셈블러 명령어, ISA(instruction-set-architecture) 명령어, 머신 명령어, 머신 의존 명령어, 마이크로코드, 펌웨어 명령어, 상태 설정 데이터, 또는 Smalltalk, C++ 등의 객체 지향 프로그래밍 언어 및 "C" 프로그래밍 언어 또는 유사한 프로그래밍 언어 등의 종래의 절차형 프로그래밍 언어를 포함한 하나 이상의 프로그래밍 언어의 임의의 조합으로 작성된 소스 코드나 오브젝트 코드일 수 있다. 컴퓨터 판독가능한 프로그램 명령어는, 완전히 사용자의 컴퓨터 상에서, 부분적으로 사용자의 컴퓨터 상에서, 독립형 소프트웨어 패키지로서, 부분적으로는 사용자의 컴퓨터상에서 및 부분적으로는 원격 컴퓨터 상에서 또는 완전히 원격 컴퓨터 또는 서버상에서 실행될 수 있다. 후자의 시나리오에서, 원격 컴퓨터는 근거리 네트워크(LAN) 또는 광역 네트워크(WAN)를 포함한 임의 타입의 네트워크를 통해 사용자의 컴퓨터에 접속되거나, 그 접속이 (예를 들어, 인터넷 서비스 제공자를 이용하여 인터넷을 통해) 외부 컴퓨터에 이루어질 수도 있다. 일부 실시예에서, 예를 들어, 프로그래머블 로직 회로, 필드 프로그래머블 게이트 어레이(FPGA) 또는 프로그래머블 로직 어레이(PLA)를 포함하는 전자 회로는, 본 발명의 양태들을 수행하기 위하여, 전자 회로를 맞춤화하는 컴퓨터 판독가능한 프로그램 명령어들의 상태 정보를 이용하여 컴퓨터 판독가능한 프로그램 명령어를 실행할 수 있다.
본 발명의 양태들이, 본 발명의 실시예들에 따른 방법, 장치(시스템) 및 컴퓨터 프로그램 제품의 흐름도 및/또는 블록도를 참조하여 여기서 설명된다. 흐름도 예시 및/또는 블록도의 각 블록, 및 흐름도 예시 및/또는 블록도의 블록들의 조합은 컴퓨터 판독가능한 프로그램 명령어에 의해 구현될 수 있다는 것을 이해할 것이다.
이들 컴퓨터 판독가능한 프로그램 명령어는, 범용 컴퓨터, 특별 목적 컴퓨터, 또는 그 외의 프로그램가능한 데이터 처리 장치의 프로세서에 제공되어, 컴퓨터 또는 기타의 프로그램가능한 데이터 처리 장치의 프로세서를 이용하여 실행되는 명령어들이 흐름도 및/또는 블록도의 블록이나 블록들에 명시된 기능/동작을 구현하기 위한 수단을 생성하게 하는 머신을 생성할 수 있다. 이들 컴퓨터 판독가능한 프로그램 명령어는 또한, 명령어를 저장하고 있는 컴퓨터 판독가능한 저장 매체가 흐름도 및/또는 블록도의 블록이나 블록들에 명시된 기능/동작의 양태들을 구현하는 명령어들을 포함하는 제품을 포함하도록, 컴퓨터, 프로그램가능한 데이터 처리 장치, 및/또는 기타의 디바이스들이 특정한 방식으로 동작하도록 지시할 수 있는 컴퓨터 판독가능한 저장 매체에 저장될 수 있다.
컴퓨터 판독가능한 프로그램 명령어는 또한, 컴퓨터, 프로그램가능한 데이터 처리 장치, 및/또는 기타의 디바이스 상에서 실행되는 명령어들이 흐름도 및/또는 블록도의 블록이나 블록들에 명시된 기능/동작을 구현하도록, 컴퓨터, 프로그램가능한 데이터 처리 장치, 및/또는 기타의 디바이스 상에 로딩되어, 일련의 동작 단계들이 컴퓨터, 프로그램가능한 데이터 처리 장치, 및/또는 기타의 디바이스 상에서 수행되어 컴퓨터 구현된 프로세스를 생성하게 할 수 있다.
도면들 내의 흐름도 및 블록도는, 본 발명의 다양한 실시예들에 따른 시스템, 방법 및 컴퓨터 프로그램 제품의 가능한 구현들의 아키텍처, 기능, 및 동작을 나타낸다. 이 점에서, 흐름도 또는 블록도 내의 각각의 블록은, 명시된 논리적 기능(들)을 구현하기 위한 하나 이상의 실행가능한 명령어들을 포함하는, 모듈, 세그먼트, 또는 명령어들의 일부를 나타낼 수 있다. 일부 대안적 구현에서, 블록에 표기된 기능들은 도면들에 표기된 순서와는 다른 순서로 발생할 수도 있다. 예를 들어, 연속적으로 도시된 2개의 블록은, 사실상, 포함된 기능에 따라, 실질적으로 동시에 실행되거나, 때때로 역순으로 실행될 수도 있다. 블록도 및/또는 흐름도 예시의 각각의 블록, 및 블록도 및/또는 흐름도 예시의 블록들의 조합은, 명시된 기능이나 동작을 수행하는 특별 목적 하드웨어-기반의 시스템, 또는 특별 목적 하드웨어와 컴퓨터 명령어들의 조합에 의해 구현될 수 있다는 점에도 유의한다.
이제, 본 발명의 일부 실시예에 따른, 이어폰 출력 스피커(460)로부터, 선택사항으로서 노이즈 감소된 음성 신호를 계산하는 시스템(400) 및 디바이스(401)의 개략도인 도 1a를 참조한다. 일부 실시예에서, 클라이언트 단말기 디바이스(401)는, 사용자 인터페이스(409), 처리 유닛(402), 오디오 회로(410), 음성 및/또는 데이터 인터페이스(408), 및 오디오 소켓(409)을 포함할 수 있다. 사용자 인터페이스(409)는, 디바이스의 동작을 제어하고, 전화 통화를 개시하는 등의 명령을 내리고, 방법들의 계산 결과를 보는데 이용될 수 있다. 하나 이상의 오디오 소켓(409)은 이어폰(421)의 하나 이상의 오디오 플러그(424)를 클라이언트 단말기(401)에 접속하는데 이용될 수 있다.
처리 유닛(402)은, 저장 유닛(403)으로부터 프로세서 명령어를 검색하고, 오디오 회로(410)를 제어하며, 인터페이스로 또는 인터페이스로부터 데이터를 전송하도록 구성될 수 있다. 저장 유닛(403)은 이어폰 출력 스피커(413)로부터 기록하기 위해 오디오 처리 집적 회로라고도 하는 오디오 회로(410)를 구성하기 위한 프로세서 명령어를 포함함으로써, 이어폰 출력 스피커로부터의 청각적 오디오 신호의 기록을 가능하게 한다. 예를 들어, 청각적 신호(460)는 이어폰(421) 출력 스피커(422)를 이용하여 로컬 전화 통화 참가자(430)의 귀(들)(432)로부터 기록되는 반면, 원격 참가자(461)의 출력 음성 신호는 동일한 귀(들)(432)에 전송된다. 저장 유닛(403)은, 전화 통화에서의 원격 참가자(440)로부터의 음성 신호 등의, 이어폰 출력 스피커(461) 상에서 재생될 출력 오디오 신호(414)를 수신하기 위한 프로세서 명령어를 더 포함할 수 있다. 기록은 원격 참가자 음성 신호를 재생하는데 이용되는 동일한 출력 스피커로부터 수행된다. 저장 유닛(403)은 출력 이어폰으로부터의 청각적 오디오 신호(460)를 기록(415)하기 위한 프로세서 명령어들을 더 포함할 수 있다. 저장 유닛(403)은, 음성 신호가 전화 통화에서 원격 참가자(440)에게 전송하기에 적합하도록, 청각적 오디오 신호(460)로부터 로컬 참가자(430)의 음성 신호(418)를 계산하기 위한 프로세서 명령어를 더 포함할 수 있다. 선택사항으로서, 저장 유닛(403)은, 407에서와 같이, 마이크로폰으로부터의 직접 음성 신호(415)를 기록하기 위한 프로세서 명령어들을 더 포함할 수 있다. 선택사항으로서, 저장 유닛(403)은, 청각적 음성 신호, 직접 음성 신호, 및 필터링 계수에 기초하여 노이즈 감소된 음성 신호(418)를 계산하기 위한 프로세서 명령어를 더 포함할 수 있다. 선택사항으로서, 저장 유닛(403)은 노이즈 감소된 음성 신호를 전화 통화의 원격 참가자(440)에게 전송하는 프로세서 명령어를 더 포함할 수 있다. 선택사항으로서, 마이크로폰은, 헤드셋 등의 이어폰(423)의 일부이다. 저장 유닛(403)은, 선택사항으로서 노이즈 감소된, 음성 신호(416)를 원격 클라이언트 단말기(441)에 전송하기 위한 프로세서 명령어를 더 포함할 수 있다.
디바이스는, 셀룰러 및/또는 이더넷 네트워크 등의 네트워크(450)를 통해 원격 클라이언트 단말기(441)와 전화 통화를 하기 위한 음성 및/또는 데이터 인터페이스(408)를 포함할 수 있다. 디바이스는 이어폰(421)에 접속될 수 있고 이어폰은 하나 이상의 출력 스피커(422) 및 하나 이상의 선택사항적 마이크로폰(423)을 포함할 수 있다.
이제, 본 발명의 일부 실시예에 따른, 이어폰 출력 스피커로부터 기록된 청각적 신호로부터 맥박수 및/또는 온도 측정치를 계산하는 시스템(460) 및 디바이스(401)의 개략도인 도 1b를 참조한다. 일부 실시예에서, 클라이언트 단말기 디바이스(401)는, 사용자 인터페이스(409), 처리 유닛(402), 저장 유닛(403), 오디오 회로(410), 및 오디오 소켓(409)을 포함할 수 있다. 사용자 인터페이스(409)는, 디바이스의 동작을 제어하고, 맥박수 및/또는 온도 측정을 요청하는 등의 명령을 내리고, 계산 결과를 보는데 이용될 수 있다. 오디오 소켓(409)은 이어폰(421)의 하나 이상의 오디오 플러그(424)를 클라이언트 단말기(401)의 오디오 회로(410)에 접속하는데 이용될 수 있다.
저장 유닛(403)은, 오디오 처리 집적 회로라고도 하는 오디오 회로(410)에 이어폰(421) 출력 스피커(422)로부터의 청각적 신호를 기록하도록 지시(413)하기 위한 프로세서 명령어를 포함할 수 있다. 저장 유닛(403)은, 청각적 신호 기록을 수행하고 바이오메트릭 측정치를 계산하면서, 재생될(461) 음악 신호 등의, 이어폰(421) 출력 스피커(들)(422) 상에서 재생될 출력 오디오 신호(414)를 수신하기 위한 프로세서 명령어를 더 포함할 수 있다. 저장 유닛(403)은 이어폰(421) 출력 스피커(들)(422)로부터의 청각적 신호(460)를 기록(415)하기 위한 프로세서 명령어를 더 포함할 수 있다. 저장 유닛(403)은 맥박수 및 온도 측정치 등의 청각적 오디오 신호(460)에 기초하여 바이오메트릭 측정치를 계산(417)하기 위한 프로세서 명령어를 더 포함할 수 있다. 저장 유닛(403)은 클라이언트 단말기(401) 사용자 인터페이스(409)에 바이오메트릭 측정 데이터를 출력(419)하기 위한 프로세서 명령어를 더 포함할 수 있다. 선택사항으로서, 데이터 인터페이스(408)는, 바이오메트릭 데이터의 원격 모니터링에서와 같이, 네트워크(450) 상의 원격 저장장치 및/또는 디스플레이에 바이오메트릭 측정치를 출력하는데 이용될 수 있다.
선택사항으로서, 클라이언트 단말기(401)는 또한, 클라이언트 단말기의 내부 온도 및/또는 클라이언트 단말기 환경의 주변 온도를 측정하기 위한 하나 이상의 내부 출력 스피커(406)를 포함할 수 있다.
전화 통화용 시스템(400) 및 바이오메트릭 측정용 시스템(460)은 시스템 구성 요소의 많은 부분을 공통적으로 포함할 수 있다. 예를 들어, 클라이언트 단말기(401) 및 이어폰(421)은 동일한 하드웨어일 수 있고, 상이한 이용 사례에 적용되고 상이한 계산을 이용할 수 있다. 예를 들어, 클라이언트 단말기(401) 및 이어폰(421)은 양쪽 모두 특별한 하드웨어 기술적 피쳐가 없는 기성 제품이다.
본 발명의 일부 실시예에 따르면, 음성 통화에서 노이즈 감소를 위해 이어폰을 이용하거나 및/또는 음성 통화에서 마이크로폰으로서 이어폰을 이용하기 위한 컴퓨터화된 방법이 제공된다.
이제, 본 발명의 일부 실시예에 따라 이어폰 출력 스피커로부터 전화 통화 음성 신호를 생성하는 방법인 도 2를 참조한다. 클라이언트 단말기(401)의 컴퓨터화된 처리 유닛(402)은 오디오 처리 집적 회로(410)에 이어폰(421) 출력 스피커(422)로부터의 기록(101)할 것을 지시할 수 있다. 원격 음성 신호는, 전화 통화에서 원격 참가자(440)의 원격 클라이언트 단말기(441)로부터 로컬 클라이언트 단말기(401)에 의해 수신되고(105), 이어폰 출력 스피커(461)에서 재생된다(106). 이어폰(421) 상의 원격 음성 신호 출력과 동시에 로컬 이어폰(421) 출력 스피커(422)로부터의 청각적 오디오 신호가 기록(102)된다. 필터링 계수(107)를 수신한 후에, 기록된 오디오 및 별개로 수신된 원격 음성 신호는 처리 유닛(402)에 의해 로컬 음성 신호(103)를 계산하는데 이용될 수 있다. 그 다음, 이 로컬 음성 신호는 처리 유닛(402)에 의해 원격 참가자 클라이언트 단말기(104)에 전송되어, 로컬 클라이언트 단말기 디바이스에 접속된 마이크로폰을 이용하지 않고 음성 신호를 가능하게 한다.
로컬 클라이언트 단말기(401)가 부착된 마이크로폰을 갖는 경우, 이 방법은 처리 유닛(402)에 의해 노이즈 감소된 로컬 음성 신호를 원격 단말기(104)에 전송하는데 이용될 수 있다. 컴퓨터화된 처리 유닛(402)은, 오디오 처리 회로(410)에, 마이크로폰(407)으로부터의 로컬 참가자의 음성 신호를 기록(109)한 다음, 마이크로폰(407)으로부터의 로컬 참가자의 음성 신호를 기록(110)하도록 지시한다. 처리 유닛(402)에 의해 원격 참가자 클라이언트 단말기(441)에 전송(104)되는 노이즈 감소된 로컬 음성 신호를 처리 유닛(402)에 의해 계산(103)하기 위해, 기록된 음성 신호는 로컬 이어폰(421) 출력 스피커(422)로부터의 필터링 계수(107), 원격 음성 신호(105) 및 기록된 오디오 신호(460)와 함께 이용된다.
본 발명의 일부 실시예에 따르면, 오디오 신호를 재생하는데 이용되는 동일한 이어폰 출력 스피커를 이용하여 심장 사운드를 기록하고 및/또는 맥박수를 측정하기 위한 컴퓨터화된 방법이 제공된다.
이제, 본 발명의 일부 실시예에 따른, 이어폰(421) 출력 스피커(422)로부터 맥박수를 측정하는 방법의 흐름도인 도 3을 참조한다. 처리 유닛(402)은 오디오 회로(410)에 이어폰 출력 스피커(422)로부터의 오디오 신호를 기록(201)하고, 후속해서 이어폰 출력 스피커로부터의 오디오 신호를 기록(202)하도록 지시한다. 이전에 수신된 오디오 신호(205)는, 461에서와 같이, 이어폰 출력 스피커(422) 상에 동시에 출력될 수도 있다(206). 필터링 파라미터(207)를 수신한 후에, 기록된 오디오 및 수신된 오디오 출력 신호는 심장 사운드 신호 및/또는 맥박수(203)를 계산하기 위해 처리 유닛(402)에 의해 이용된다. 심장 사운드 신호 및/또는 맥박수는 처리 유닛(402)에 의해 데이터 인터페이스(408)와 인터넷(450)을 통해 사용자 인터페이스(409)에 및/또는 원격 디바이스에 출력(204)된다.
본 발명의 일부 실시예에 따르면, 하나 이상의 이어폰 출력 스피커 등의 출력 오디오 트랜스듀서를 이용하여 온도를 측정하기 위한 컴퓨터화된 방법이 제공된다.
이제, 본 발명의 일부 실시예에 따른, 이어폰 출력 스피커(422)로부터 온도를 측정하는 방법의 흐름도인 도 4를 참조한다. 처리 유닛(402)은 오디오 회로(410)에 이어폰(421) 출력 스피커(422)로부터의 오디오 신호를 기록(301)하고, 후속해서, 460에서와 같이 이어폰 출력 스피커로부터의 오디오 신호를 기록(302)하도록 지시한다. 이전에 수신된 오디오 신호(305)는, 처리 유닛(402)에 의해 동시발생적으로, 예를 들어 동시에 또는 인터리빙되어, 이어폰 출력 스피커 상에 출력(306)될 수 있다. 필터링 파라미터(307)를 수신한 후에, 기록된 오디오 및 수신된 오디오 출력 신호는 내이의 온도 데이터, 사용자의 체온 데이터, 및 이어폰 출력 스피커의 주변 환경의 온도 데이터를 계산(303)하기 위해 처리 유닛(402)에 의해 이용된다. 그 다음, 온도 데이터는 처리 유닛(402)에 의해 데이터 인터페이스(408)와 인터넷(450)을 통해 사용자 인터페이스(409)에 및/또는 원격 디바이스에 출력(304)된다.
본 발명의 일부 실시예에 따르면, 클라이언트 단말기가 마이크로폰 및/또는 이어폰의 음향 출력 트랜스듀서로부터 입력을 수신하기 위한 컴퓨터화된 방법이 제공된다. 이 방법들은, 오디오 처리 회로가 이어폰을 입력 소스로서 이용하여 귀 공간 내에서 사운드를 동시에 또는 인터리빙형으로 기록하도록 구성될 수 있는 경우에 이용될 수 있다. 계산된 신호는, 클라이언트 단말기에 접속된 마이크로폰이 없더라도 음성 신호일 수 있다. 예를 들어, 이어폰의 출력 스피커는 전화 통화 응용에 대한 음성 신호를 기록하는데 이용된다.
이어폰으로부터의 기록된 신호는 음성 신호를 계산하는데, 선택사항으로서 마이크로폰으로부터의 입력과 함께 감소된 노이즈 음성 신호를 생성하는데 이용될 수 있다.
선택사항으로서, 이어폰들의 하나 이상의 스피커로부터 배경 신호가 수집된다.
선택사항으로서, 접속된 마이크로폰 없이 이어폰만을 이용하는 스마트폰에서 음성 통화가 가능하다. 예를 들어, 내부 마이크로폰이 없거나 및/또는 이어폰 마이크로폰이 없는 클라이언트 단말기로서의 음악 플레이어는 이어폰 출력 스피커를 마이크로폰으로서 이용하여 WiFi™ 데이터 연결을 이용해 전화 통화에 참여한다. 이 예에서, 음악 플레이어는 청각적 신호를 기록하고 전화 통화의 원격 참가자에게 전송하기 위한 음성 신호를 계산하도록 구성된다.
본 발명의 실시예들의 일부 양태에 따르면, 이 방법은 이어폰으로부터 클라이언트 단말기의 오디오 처리 회로로 입력 경로를 연결하도록 오디오 회로를 구성한다. 이 방법은 이어폰의 한쪽 또는 양쪽 출력 스피커에서 교대식 또는 동시 기록을 허용할 수 있다. 예를 들어, 청취자가 스피커 음향 출력에서 끊김을 들을 수 없도록, 스피커로의 출력 신호가 정지되는 짧은 구간 동안 번갈아 기록이 이루어질 수 있다. 예를 들어, 동시 기록은 이어폰 출력 스피커로부터 오디오 출력 신호가 재생되고 있는 것과 동시에 이루어질 수도 있다. 노이즈 감소 응용의 경우, 이 방법은 선택사항적인 마이크로폰으로부터의 입력 수신을 허용할 수 있다.
예를 들어, 이제, 노이즈 감소 신호를 계산하기 위한 예시적인 기능을 참조한다. 간소화를 위해 다음과 같이 정의된다:
E는 출력 이어폰(들) 스피커(들)로부터 기록된 입력 신호 벡터를 나타낸다;
A는 이어폰(들)으로 전송되는 출력 오디오 신호 벡터를 나타내며, 여기서, 기록이 인터리빙되는 경우 A = 0이고;
은 마이크로폰(들)에 의해 기록된 입력 신호 벡터를 나타내며;
Ce[N 1 ]은, 이어폰(들) 출력 계수들, N 1개의 요소들의 벡터를 나타내고;
Ve[N 2 ]는, 사용자 및 이어폰(들)마다 캘리브레이트되는 이어폰(들) 변환 상수들, N 2개의 요소들의 벡터를 나타내며;
Cf[N 3 ]은, 필터링 계수들, N 3개의 요소들의 벡터를 나타내고;
T는 마이크로폰 노이즈 감소 계수 벡터를 나타낸다.
마이크로폰 입력이 없을 때, 음성 신호는 Ve*Cf*(E-Ce*A)와 같은 함수를 이용하여 계산될 수 있으며, 여기서, *는 콘볼루션 함수를 나타낸다.
선택사항으로서, 2개 이상의 이어폰으로부터 입력이 수집되고 는 평균 입력 신호를 나타낸다. 예를 들어, 1은 왼쪽 이어폰에서 수집되고 2는 오른쪽 이어폰에서 수집되며, 1 2의 평균을 나타낸다.
선택사항으로서, 1, 2 3은 상이한 값들을 가진다. 이들 차이 값들은 상이한 필터 계수 벡터들의 상이한 주파수 응답 함수들에 대응한다.
예를 들어, 오디오 출력 신호 A가 전송되어 이어폰에 의해 재생될 때, 이어폰의 음향 오디오 출력은 e *A이다.
예를 들어, 가 이어폰 출력 스피커로부터의 귀 내부에서 기록된 오디오 신호일 때, = e*가 음성 신호 사운드이다.
예를 들어, 필터링 계수는 주파수들에 관해 가중치 함수를 구현하며, 여기서, 가중치 0은 두개골이 외부 노이즈를 양호하게 차단하지 않는 낮은 주파수들에 적용되고 음성 스펙트럼 외부의 주파수들에 적용된다. 비제로 가중치들은 두개골이 외부 노이즈를 차단하는 음성 스펙트럼 내부의 주파수들에 적용된다.
음성 신호가 마이크로폰으로부터 수집될 때, 노이즈 감소된 음성 신호는 함수 T*Cf*M을 이용하여 계산될 수 있다.
계수들 T는, 예를 들어 0.1 초 등의 기간 동안 재계산될 수 있다. T는 다음과 같은 수학식으로부터 계산될 수 있다:
Figure pct00001
여기서, argmin은, 괄호 안의 함수가 최소값을 달성하는, 주어진 인자의 값, 이 예에서 T로서 정의된다.
이 함수는 이어폰과 음성 신호의 마이크로폰 기록 간에 상관관계가 있는 최상의 노이즈 감소 필터를 구할 수 있다. 마찬가지로, 2개의 기록은 마이크로폰 기록으로부터 감소될 수 있는 배경 노이즈를 역시 구하는데 이용될 수 있다. 예를 들어, 배경 화이트 노이즈(background white noise)가 마이크로폰 기록으로부터 감소된다. 예를 들어, 열차 및/또는 기타의 자동차 노이즈 등의 반복적인 배경 노이즈(repetitive background noise)가 마이크로폰 기록으로부터 감소된다. 예를 들어, 노이즈 감소된 음성 신호는 수학식
Figure pct00002
를 이용하여 계산될 수 있다.
선택사항으로서, 2개의 오디오 신호 사이에서 상호-상관이 계산되어 백그라운드 사운드를 구하고, 백그라운드 사운드는 음성 신호를 포함하는 오디오 신호로부터 제거되어, 음성 신호가 더 잘 들리게 된다.
선택사항으로서, 비용 함수(cost function)는 수학적 최적화를 이용하여 T를 구하도록 최소화된다. 예를 들어, 비용 함수
Figure pct00003
의 최소값은, 반복적 방법, 휴리스틱 방법을 이용하여, 및/또는 대응하는 선형 방정식을 풀어서 구할 수 있다. 예를 들어, 비용 함수 최소값은, 심플렉스 방법(simplex method), 최소 자승 방법, 뉴턴-랩슨 방법(newton-raphson method), 시뮬레이션된 어닐링 방법, 조합 알고리즘 등을 이용하여 발견될 수 있다.
본 발명의 일부 실시예에 따르면, 이들 오디오 출력 트랜스듀서가 사용자의 귀(들) 내부에 있거나 밀착 배치되어 있는 동안 클라이언트 단말기가 이들 오디오 출력 트랜스듀서를 이용하여 심박수(heart pulse rate)를 측정하기 위한 컴퓨터화된 방법이 제공된다. 예를 들어, 귀에서의 혈압으로부터의 음향 신호를 기록하기 위해 마이크로폰 대신에 출력 트랜스듀서가 이용될 수 있고, 신호는 심박수를 계산하는데 이용된다.
선택사항으로서, 출력 오디오 트랜스듀서로부터의 음향 기록은 동일한 출력 오디오 트랜스듀서로부터의 오디오 신호의 재생과 동시이거나 인터리빙(교대)될 수 있다.
선택사항으로서, 음향 기록은, 한쪽 귀의 트랜스듀서로부터, 양쪽 귀로부터 별개로, 또는 양쪽 귀로부터 함께 수행된다.
선택사항으로서, 3가지 현상이 사용자의 맥박수를 추정하는데 이용될 수 있다.
제1 현상은 정맥 펄스가 귀 내부에서 들릴 수 있다는 것이다. 이 현상은 귀 내부에서 및/또는 인접하여 기록된 오디오는 신호 + 에 의해 모델링될 수 있다고 가정함으로써 이용될 수 있고, 여기서 는 정맥 펄스 신호이고 은 노이즈 신호이다. 오디오 출력 신호를 전송하면서 기록이 수행될 때, 은 전송된 오디오, 사운드 카드로부터의 노이즈 및 백색 노이즈의 합일 수 있다. 기록이 인터리빙될 때, 은 단지 사운드 카드로부터의 노이즈와 백색 노이즈의 합일 수 있다.
신호 1 2의 아래 첨자 1 및 2는 양쪽 귀 각각에서의 정맥파 신호를 나타낸다. 이 신호들은 유사하며 심장에서 각각의 귀의 동맥까지의 상이한 흐름 경로로 인한 시간 시프트를 포함한다.
맥박수를 계산하는데 이용될 수 있는 제2 현상은 1 2 사이의 시간 시프트는 맥박수에 반비례할 수 있다는 것이다. 따라서, 1 2 사이의 시간 시프트를 구하는 것은, 충분히 작은 시간 간격에서 특정 개인에 대한 소정 조건 하에서 시간 시프트와 선형 관계를 가질 수 있기 때문에, 맥박수를 결정할 수 있다. 이 선형 관계는, 나이, 키, 몸무게, 성별 등의 그 사람의 파라미터들이 가정되지 않은 경우 더 복잡할 수 있다. 이 선형 관계는, 펄스 값 범위(pulse value range)가 측정 기간 동안 변할 때 더 복잡할 수 있다. 선택사항으로서, 시간 시프트와 맥박수 사이의 관계의 비선형적인 양태는 각각의 개인에 대해 캘리브레이트된다.
맥박수를 측정하는데 이용되는 제3 현상은 혈압의 변화가 외이도의 체적 변화를 야기할 수 있다는 것이다. 혈압은 외이도의 체적에 반비례할 수 있다. 따라서, 이 외이도 체적에서의 변화를 계산하는 것은 혈압파를 추론하는데 이용될 수 있다. 외이도의 체적에서의 변화는 외이도의 주파수 응답을 변화시킬 수 있다. 외이도 주파수 응답을 계산하는 것은, 귀 내부의 및/또는 귀에 밀착 배치된 트랜스듀서로부터의 오디오 신호를 동시에 재생 및 기록함으로써 이루어질 수 있다.
예를 들어, 이제, 오디오 신호로부터 맥박수를 계산하기 위한 예시적인 함수들을 참조한다. 예를 들어, 함수 ALG. 1 및 ALG. 2는 제1 현상을 이용하는 반면 ALG. 3과 ALG. 4는 제2 현상을 이용한다. 양쪽 귀 각각으로부터의 입력 신호가 기록될 때, ALG. 1 및 ALG. 3이 맥박수를 구하는데 이용될 수 있다. 한 쪽 귀만으로부터의 입력이 기록될 때, 함수 ALG. 1이 맥박수를 구하는데 이용될 수 있다. 양쪽 귀로부터의 기록된 입력들의 합이 알려지면, ALG. 2 및 ALG. 4가 맥박수를 구하는데 이용될 수 있다. 선택사항으로서, 다수의 함수들 및/또는 알고리즘들이 이용되고 평균 결과가 출력된다. 예를 들어, 함수 ALG. 5는 맥박수를 계산하기 위해 제3 현상을 이용한다.
오디오 신호로부터 맥박수를 계산하기 위한 함수는 출력 트랜스듀서로부터의 기록된 오디오 신호의 유사성 패턴을 찾기 위해 윈도우화된 자기상관 함수(windowed autocorrelation function)를 이용할 수 있다. 이러한 윈도우화된 자기상관 함수는, 오디오 기록의 세그먼트의 반복 패턴을 탐색함으로써 기록된 오디오 신호에서 반복적인 심박 사운드를 구할 수 있다.
간소화를 위해, 다음과 같이 추가적으로 정의된다:
Ce[]는 트랜스듀서 계수들 벡터를 나타낸다
[]는 트랜스듀서에 의해 전송된 출력 오디오 신호 벡터를 나타낸다
CV sc[][]는 사운드 카드 노이즈의 공분산 행렬(covariance matrix)을 나타낸다
는 맥박수 측정을 위한 윈도우 구간 길이를 나타낸다
r은 하나의 심박 기간의 0.1에 대응하는 샘플수를 나타낸다
[]는 출력 트랜스듀서로부터의 입력 신호 벡터를 나타낸다
d 1 2 사이의 시프트에 대응하는 샘플수를 나타내고 여기서 d는 심박당 샘플수이다.
[][]은 CV sc = RR'이도록 하는 r×r 행렬을 나타낸다
TC[][]는
Figure pct00004
와 동일한 t×t 행렬을 나타낸다
1 [] 및 2 []는 개개의 트랜스듀서들로부터의 입력 신호 벡터들을 나타낸다
[]는 양쪽 트랜스듀서들로부터의 신호들의 합을 나타낸다
fr은 초당 샘플들에서의 오디오 신호 샘플 레이트를 나타낸다
hr은 분당 심박수를 나타낸다 hr=60×fr/(10× r)
선택사항으로서, ALG. 1은 = i + i로 모델링된 오디오 신호로부터 맥박수를 구하고, i는, 전송된 오디오, 사운드 카드로부터의 노이즈, 및 백색 노이즈의 합이다. 이 모델에서 는 귀들 중 어느 하나로부터의 오디오 신호일 수 있다. 신호의 전체 길이만이 중요하다.
Figure pct00005
라 하고, 연산자 z[x,y]는 인덱스 x와 y(양 끝점 포함) 사이의 z의 서브벡터를 나타낸다. 예를 들어,
Figure pct00006
Figure pct00007
. 이 예에서 상관 함수는 아래와 같다:
Figure pct00008
이 예에서, 다음과 같은 비용 함수를 이용하여 50과 150 사이의 hr 값들에 대해 hr이 계산된다:
Figure pct00009
여기서,
Figure pct00010
이고, 출력은 비용 함수 ALG. 1의 최대 값에 대응하는 hr의 값으로서, rhr 사이의 관계를 고려한다.
예를 들어, 샘플링 레이트는 44 KHz, 즉, 초당 44000 샘플들이고, 10초 동안 신호가 측정되고, 심박수는 초당 1 박동(beat), 즉, 심박(d)당 44000 샘플이다. 따라서 총 샘플은 10*44,000 = 440,000. Dr은 4,400이고 j는 9*4,400(39,600) 내지 11*4,400(48,400)의 값을 가질 수 있다. 가 3 펄스(= 3초)와 같다면, = 3*44,000 = 132,000이고 i 는 1 내지 3의 값을 가질 수 있다.
선택사항으로서, ALG. 2는 E=P 1 +P 2 +N로 모델링된 오디오 신호로부터 맥박수를 구하고, 은, 양쪽 귀로부터 전송된 오디오, 사운드 카드로부터의 노이즈, 및 백색 노이즈의 합을 나타낸다.
이 경우에서 상관 함수는 아래와 같다:
Figure pct00011
이 예에서, 다음과 같은 비용 함수를 이용하여 50과 150 사이의 hr 값들에 대해 hr이 계산된다:
Figure pct00012
여기서, 출력은 비용 함수 ALG. 2의 최대 값에 대응하는 hr의 값으로서, rhr 사이의 관계를 고려한다.
선택사항으로서, ALG. 3은 1 =P 1 +N 1 2 =P 2 +N 2 로 모델링된 오디오 신호로부터 맥박수를 구하고, i는, 전송된 오디오, 사운드 카드로부터의 노이즈, 및 각각의 귀에 대한 백색 노이즈의 합을 나타낸다.
이 예에서 상관 함수는 다음과 같다:
Figure pct00013
이 예에서, 다음과 같은 비용 함수를 이용하여 50과 150 사이의 hr 값들에 대해 hr이 계산된다:
Figure pct00014
여기서, 출력은 비용 함수 ALG. 3의 최대 값에 대응하는 hr의 값으로서, rhr 사이의 관계를 고려한다.
선택사항으로서, ALG. 4는 E=P 1 +P 2 +N으로 모델링된 오디오 신호로부터 맥박수를 구하고, 은, 전송된 오디오, 사운드 카드로부터의 노이즈, 및 백색 노이즈의 합을 나타낸다.
이 경우에서 상관 함수는 다음과 같다:
Figure pct00015
이 예에서, 다음과 같은 비용 함수를 이용하여 50과 150 사이의 hr 값들에 대해 hr이 계산된다:
Figure pct00016
여기서, 출력은 비용 함수 ALG. 4의 최대 값에 대응하는 hr의 값으로서, rhr 사이의 관계를 고려한다.
선택사항으로서, 전송된 오디오 신호는 없고 A[] = 0.
선택사항으로서, 계산된 심박수에 대한 허용공차가 수정된다. 예를 들어, 상기 정의는 r과 10%의 허용공차에 대한 예시적 함수들, 즉, r을 정의한다. 분당 심박에서의 5%의 허용공차, 분당 심박에서의 2%의 허용공차, 분당 심박에서의 1%의 허용공차, 분당 심박에서의 0.1%의 허용공차, 및 이와 유사한 것과 같은, 계산된 심박수에서의 더 높거나 더 낮은 허용공차에 대해 대안적인 정의와 함수가 기재될 수 있다.
선택사항으로서, 로 표기된 심박수를 계산하기 위한 윈도우는 2개 이상의 심박의 샘플수에 대응하는 값을 가진다. 선택사항으로서, 심박수를 계산하기 위한 윈도우는 3 내지 12개의 심박의 샘플수에 대응하는 값을 가진다.
선택사항으로서, 입력 신호 벡터는 특별한 하드웨어 요구조건이 없이 표준의 기성품 이어폰을 갖춘 출력 트랜스듀서로부터 기록된다.
선택사항으로서, 입력 신호 벡터는 대상의 움직임 동안 및/또는 배경 노이즈의 존재하에 출력 트랜스듀서로부터 기록된다.
선택사항으로서, 입력 신호 벡터는 출력 트랜스듀서를 통해 출력 오디오 신호를 재생하는 동안 동일한 출력 트랜스듀서로부터 기록된다.
선택사항으로서, ALG. 5는 혈압 신호로부터 맥박수를 구한다. 혈압 신호는 A[]로 표기된 귀 내부에 배치된 트랜스듀서를 통해 출력 신호를 재생하고, E[]로 표기된 귀 내부에 배치된 동일한 및/또는 또 다른 트랜스듀서를 통해 신호를 기록하고, E[]와 A[]로부터 혈압 신호를 추정하는 알고리즘을 이용함으로써 계산될 수 있다. 이 알고리즘은, E[]가 외이도에 의해 에코(echo)된 A[]를 포함한다는 현상을 활용할 수 있다. 이들 에코는, 혈압 신호와 상관관계가 있는, 외이도 체적의 주파수 응답에 의해 영향을 받는다.
간소화를 위해, 다음과 같이 추가적으로 정의된다:
E[]는 트랜스듀서에 의해 기록된 오디오 신호를 나타낸다;
A[]는 클라이언트 단말기에 의해 재생되는 오디오 신호를 나타낸다;
t[]는 트랜스듀서의 주파수 응답의 계수 벡터를 나타낸다;
e(i)[]는 시간 프레임 i에서 외이도의 주파수 응답의 계수 벡터를 나타낸다;
T[]는 Ce(i)들의 차이와 외이도 신호의 체적 미분 사이의 함수를 나타낸다;
T[]는 미리 실행되는 캘리브레이션 프로세스의 출력이다.
i는 시간 i에서의 혈압 신호의 미분을 나타내고, Di = -<T, Ce(i+1)- Ce(i)>;
BP는 혈압 신호를 나타내며,
Figure pct00017
혈압 신호를 계산하기 위해, 먼저 신호 E[]와 A[]를 초/(5*펄스)와 초/(50*펄스) 사이의 짧은 연속 구간으로 나눈다. i번째 구간을 A(i)와 E(i)로 표기한다. Ce(i)를 다음과 같이 추정한다:
Figure pct00018
다음을 계산한다:
Figure pct00019
여기서, Di는 시간 i에서의 혈압 신호의 미분에 대한 추정일 수 있다:
Figure pct00020
신호 BP로부터 맥박수를 구하는 것은 여기서 설명된 이전의 방법들을 이용하여 이루어질 수 있다. 함수 T[]는, 특정한 이어폰 및/또는 외이도에 대한 출력 신호와 입력 신호 사이의 변환 함수의 선형 근사일 수 있다. 선택사항으로서, T[]는 차수 2 이상의 근사 함수이며, 예를 들어, 2차 함수가 이용된다.
알고리즘 설명
재생되는 오디오가 A[]이고 트랜스듀서에 의해 기록된 오디오가 E[]이면,
Figure pct00021
이고, 여기서, Ct[]는 트랜스듀서에 의해 재생되는 오디오가 Ct*A이도록 하는 계수들의 쇼트 벡터(short vector)이다. Ct는 이어폰이 외이도 내부에 있지 않을 때 사운드를 기록 및 재생함으로써 캘리브레이트될 수 있다.
e[]는 외이도의 주파수 응답 벡터이다. 오디오 신호 X가 귀 내부에서 재생중에 있을 때, 신호 Ce*X가 트랜스듀서에 의해 기록중에 있다. Ce[]은 외이도에 의해 에코중인 X의 결과이다.
이 알고리즘은 주파수 응답 벡터를 추정하기 위해 연속된 짧은 시간 프레임들을 이용할 수 있으며, 여기서, Ce(i)는 i-번째 프레임에 대응하는 벡터일 수 있다. 외이도의 체적 미분은 연속된 시간 프레임들간의 차이의 함수일 수 있다. 대략 선형인 이 함수는, <T,Δi> - 여기서
Figure pct00022
- 와 같은, 시간 I에서 외이도의 체적 미분을 추정할 수 있다. 따라서, 시간 i에서의 혈압 신호의 미분은 <T,Δi>일 수 있다. 각각의 시간 프레임에서의 미분은 혈압 신호, 및 특별히 맥박수를 추정할 수 있다.
본 발명의 일부 실시예에 따르면, 클라이언트 단말기가 이어폰 스피커 등의 오디오 출력 트랜스듀서를 이용하여 온도를 측정하기 위한 컴퓨터화된 방법이 제공된다. 오디오 트랜스듀서를 이용하여 온도를 측정하기 위해, 오디오 트랜스듀서는 오디오 처리 집적 회로의 입력 믹서와 출력 믹서에 동시에 접속될 수 있다. 마이크로폰으로 역할할 때 출력 트랜스듀서에 의해 재생되는 출력 오디오 신호 및 출력 트랜스듀서로부터 기록되는 입력 오디오 신호는 온도를 계산하는데 이용될 수 있다. 예를 들어, 사용자가 착용한 이어폰이 이어폰과의 동시 출력 및 입력 경로를 허용하는 사운드카드를 이용하여 클라이언트 단말기에 접속될 때, 사용자의 체온이 측정된다. 이 예에서, 체온의 계산은 클라이언트 단말기를 이용하여 수행된다. 이어폰의 오디오 출력 트랜스듀서는 출력 오디오 신호를 출력하고 오디오 신호를 기록하는데 동시에 이용될 수 있다. 출력 트랜스듀서에 의해 재생되는 오디오 출력 신호는 임의의 오디오 출력 신호일 수 있다. 예를 들어, 출력 오디오 신호는, 음악 신호, 음성 신호 등이다.
측정된 온도는 트랜스듀서의 주변 환경의 온도일 수 있으며, 이것은 상당히 변할 수 있다. 예를 들어, 측정된 온도는 멤브레인 주변의 평균 온도와 출력 트랜스듀서 뒤쪽 주변의 평균 온도이다. 이들 2개 온도는, 예를 들어 멤브레인 주변의 온도가 사용자의 내이의 온도인 반면, 뒤쪽 캐비티의 주변 온도는 사용자의 외부 귀의 주변 온도일 이어폰의 경우에, 매우 상이할 수 있다.
오디오 트랜스듀서는 []로 표기된 오디오 신호를 기록하는 것과 동시에 A[]로 표시된 오디오 출력 신호를 전송할 수 있다. 예를 들어, 는 마이크로폰으로서 출력 트랜스듀서를 이용하는 오디오 신호 기록이고, 기록된 신호 는 오디오 출력 신호 A의 기록을 포함한다. 벡터 A와 는 대응하는 출력 트랜스듀서의 전면과 후면의 온도를 계산하는데 이용될 수 있다. 선택사항으로서, 오디오 출력 트랜스듀서의 온도는 클라이언트 단말기에 의해 즉시 계산되거나 저장되고, 선택사항적으로 전송될 수 있고, 나중에 및 선택사항적으로 원격 위치에서 계산될 수 있다.
A[]와 [] 사이의 주파수 응답은 온도를 계산하는데 이용될 수 있다. 출력 트랜스듀서의 전면 및 배면 온도를 계산하는 것을 허용하는 물리적 원리는 온도의 함수로서의 이전에 기술된 주파수 응답 변화일 수 있다. 이러한 주파수 응답 변화는 트랜스듀서의 전면과 배면의 온도 변화에 대해 상이할 수 있고, 이로써 2개 온도 사이의 구분을 허용한다.
예를 들어, 이제, A[]와 [] 사이의 주파수 응답을 이용하여 온도를 계산하기 위한 예시적인 함수를 참조한다. 주파수 응답 tf0 , tb0 은 각각 출력 트랜스듀서의 배면 및 전면의 기본 온도 tb 0 tf 0 에서 측정된다. 주파수 응답 tf0 + Δ , tb0 tf0,tb0 + Δ은 트랜스듀서 전면의 tf 0 과는 Δ만큼 상이한 온도들, 또는 트랜스듀서 배면의 tb 0 는 Δ만큼 상이한 온도들에서 측정되며, 그에 따라, tf0,tb0 tf0 + Δ ,tb0 사이의 선형 변환 Δ ,0 tf0,tb0 tf0,tb0 + Δ사이의 선형 변환 0, Δ가 결정된다. Δ ,0 0, Δ는 각각 스피커의 전면 또는 배면의 앞 또는 뒤의 Δ의 변화에 대응하는 선형 변환일 수 있고, 우리는 Δ ,0 T 0, Δ tf0,tb0 에 반복적으로 적용함으로써 tf0tb0에 충분히 근접한 온도들에 대해 거의 일정하다고 가정하기 때문에, 새로운 온도들 tb 0 +k b ·Δ 및 tf 0 +k f ·Δ에서 주파수 응답을 추정할 수 있다. 이 과정을 역으로 수행하면, 측정된 주파수 응답은, 이 주파수 응답을 생성하는 배면 및 전면 온도들을 계산하는데 이용될 수 있다.
예를 들어, 주파수 응답은 출력 트랜스듀서의 전면 및 배면 모두에 대해 섭씨 25도에서 측정되며, 5kHz에서 -2.0dB 감쇠를 수반하며 평탄한 것으로 밝혀졌다. 출력 트랜스듀서의 배면에 대해 25.5℃에서 측정된 주파수 응답은 5 kHz에서 -2.5 dB 감쇠를 수반하며 평탄할 수 있다. 출력 트랜스듀서의 전면에 대해 25.5℃에서 측정된 주파수 응답은 5kHz에서 -2.2dB 감쇠 및 3kHz에서 +0.5dB 감쇠를 수반하며 평탄할 수 있다. 출력 트랜스듀서의 미지의 온도 tb 0 +k b ·Δ 및 tf 0 +k f ·Δ에서 측정된 주파수 응답은 5 kHz에서 -6.4 dB 감쇠와 3 kHz에서 +6.0 dB 감쇠를 수반하며 평탄할 수 있다. 횟수 k b k f 를 구함으로써, 2개의 선형 변환이 적용될 필요가 있으며, 전면과 배면의 온도는 각각 섭씨 37도와 27도로서 계산될 수 있다.
간소화를 위해, 다음과 같이 추가적으로 정의된다:
0 [N]은 베이스라인 온도 tf0,tb0에서의 트랜스듀서 계수 벡터를 나타내며, tb0은 트랜스듀서의 배면 온도이고, tf0은 트랜스듀서의 전면 온도이다.
Figure pct00023
은,
Figure pct00024
가 각각 전면과 배면에서의 온도들
Figure pct00025
Figure pct00026
가 트랜스듀서 계수들이도록 하는 트랜스듀서 계수 벡터의 선형 변환을 나타내고, 여기서, Δ는 선형 변환을 측정하는데 이용되는 온도 스텝이며, k 1k 2는 온도 스텝들의 수이다. 전면 및 배면 온도 모두에 대한 선형 변환은 실제 측정된 신호 E에 도달하기 위해 0에 관해 반복적으로 k 1k 2번 적용된다.
Figure pct00027
는 x의 l2 놈(norm)을 나타낸다.
x*y는 x와 y의 콘볼루션을 나타낸다.
tf, tb는 각각 출력 트랜스듀서의 전면 및 배면에서의 온도를 나타낸다.
f, b는 각각 출력 트랜스듀서의 전면 및 배면의 열 전달 계수를 나타낸다.
이 방법은 다음과 같은 함수를 이용하여 온도 tf, tb
Figure pct00028
Figure pct00029
인 것으로 추정할 수 있다:
Figure pct00030
선택사항으로서, tftb는 0과 동일한 의 미분의 선형 방정식들을 이용하여
Figure pct00031
를 풀어서 구할 수 있고, 그 후,
Figure pct00032
이도록 하는 k 1, k 2를 구한다.
선택사항으로서, Δ1[N][N] 및 Δ2[N][N](여기서, Δ2>>Δ1)에 대한 2개의 상이한 온도 스텝 분해능을 이용하여 온도의 계산이 수행된다. 이 경우, 는 앞서와 같이 계산될 수 있고, k 1, k 2는, k 1,k 2 = argmin ||TΔ1 k 1(TΔ2 k 2(C0))- ||2가 되도록 계산된다. 상이한 분해능 스텝들은 통해 계수 벡터에 미치는 전면 및 배면 온도의 영향들간의 더 양호한 구분을 허용한다.
선택사항으로서, 이 알고리즘은 몇개 세트의 기초 계수들을 이용할 수 있다. 즉, 온도들 tb 0,...tb stf 0,...tf s에서의 트랜스듀서 계수들인 0[N],…, s[N]. 이 경우 는 앞서와 같이 계산될 수 있지만,
Figure pct00033
는 다음 식을 이용하여 계산할 수 있다:
Figure pct00034
상기 식은 선형 방정식을 풀어 계산될 수 있다. 선택사항으로서, 임의의 개수의 기초 온도들이 이용될 수 있다.
선택사항으로서, 온도는 2개 이상의 쌍의 선형 변환으로 계산된다. 예를 들어, Δ1'>>Δ1 및 Δ2'>>Δ2이 되도록 하는 Δ1 , 0[N][N], Δ1 ',0[N][N] 및 0,Δ2[N][N], 0,Δ2'[N][N]. 이 경우, D는 앞서와 같이 계산될 수 있지만, k1,k1',k2,k2'는 다음 식을 이용하여 계산된다:
Figure pct00035
선택사항으로서, 상이한 기초 온도 및 상이한 온도 분해능 스텝들이 함께 이용되어 타겟 온도를 결정한다.
선택사항으로서, tb 및/또는 tf 는 2회 이상 계산되고, 그 값들은 장래의 정상 상태 온도 값에 외삽된다. 예를 들어 A와 E는 지속적으로 수집되어 윈도우들로 세그먼트화되고, tf 및/또는 tb 값은 각각의 윈도우에 대해 계산된다. 예를 들어, 이 프로세스는 x회 반복될 수 있고, 최종 tf 및/또는 tb는 x개의 중간 결과의 외삽으로 간주된다.
여기서 설명된 온도 측정에서의 문제점은, 측정된 온도가 내이 또는 주변의 온도가 아니라, 트랜스듀서의 배면 및 전면의 온도라는 것일 수 있다. 트랜스듀서의 온도가 주변 온도에 도달하는데 오랜 시간이 걸릴 수 있다. 이러한 이유로, 트랜스듀서의 온도 변화 속도는 그 주변 온도를 추정하는데 이용될 수 있다. 선택사항으로서, 열 전달 계수들 HbHf가 이용되고, 전면 및 배면 온도가 tf, tb이고, 이후에는 tf', tb'이면, 그 주변 온도는
Figure pct00036
Figure pct00037
이다.
선택사항으로서, 최종적인 정상 상태 온도는 지수 함수 및 열 전달 계수를 이용하여 외삽된다.
이제, 본 발명의 일부 실시예에 따른, 이어폰 출력 스피커로부터의 신호를 기록하고, 신호들을 계산 및/또는 데이터를 측정하며, 데이터를 출력하는 사용자 인터페이스의 개략도인 도 5를 참조한다. 사용자 인터페이스는 명령 메뉴(501)를 위한 영역을 포함할 수 있다. 사용자 인터페이스는, 체온, 주변 온도, 맥박수, 심장 신호, 전화 정보, 콜 정보, 노이즈 감소 메트릭 등의 측정치를 포함하는 측정치 디스플레이를 위한 영역(502)을 포함할 수 있다. 사용자 인터페이스는 사용자 정의형 버턴을 위한 영역(504)을 포함할 수 있다. 사용자 인터페이스는 클라이언트 단말기의 디스플레이(503) 상에 프리젠팅될 수 있다. 예를 들어, 디스플레이(503)는, 스마트폰, 개인용 컴퓨터, 랩탑, 음악 플레이어, 태블릿 등의 스크린이다.
전술된 방법들은, 집적 회로 칩의 제조에서 이용될 수 있다.
도면들 내의 흐름도 및 블록도는, 본 발명의 다양한 실시예들에 따른 시스템, 방법 및 컴퓨터 프로그램 제품의 가능한 구현들의 아키텍처, 기능, 및 동작을 나타낸다. 이 점에서, 흐름도 또는 블록도 내의 각각의 블록은, 명시된 논리적 기능(들)을 구현하기 위한 하나 이상의 실행가능한 명령어들을 포함하는, 모듈, 세그먼트, 또는 코드의 일부를 나타낼 수 있다. 일부 대안적 구현예에서, 블록 내에 표기된 기능들은 도면들에 표기된 순서와는 다른 순서로 발생할 수 있다는 점에 유의해야 한다. 예를 들어, 연속 도시된 2개의 블록은, 포함된 기능에 따라, 실질적으로 동시에 실행되거나, 때때로 역순으로 실행될 수도 있다. 블록도 및/또는 흐름도의 각 블록과 블록도 및/또는 흐름도 내의 블록들의 조합은 명시된 기능이나 작용을 수행하는 특별 목적 하드웨어-기반의 시스템, 또는 특별 목적 하드웨어와 컴퓨터 명령어들의 조합에 의해 구현될 수 있다는 점에 역시 유의한다.
본 발명의 다양한 실시예의 설명은 예시의 목적을 위해서 제시되었고, 철저히 남김없이 드러내거나 개시된 실시예로 제한하고자 하는 의도는 없다. 설명된 실시예들의 사상과 범위로부터 벗어나지 않고 많은 수정 및 변형이 본 기술분야의 통상의 기술자에게 명백할 것이다. 여기서 사용된 용어는, 실시예들의 원리, 시장에서 발견되는 기술에 대한 실용적인 적용 또는 기술적 개선을 가장 잘 설명하거나, 본 기술분야의 통상의 기술자가 여기서 개시된 실시예들을 이해할 수 있도록 선택되었다.
본 출원으로부터 만기가 되는 특허의 수명 동안 많은 관련된 이어폰이 개발될 것이며, 이어폰이라는 용어의 범위는 이러한 모든 신기술을 선험적으로 포함하기 위한 것이다.
본 명세서에 사용될 때 용어 "약"은 ±10 %를 의미한다.
용어 "포함하다", "포함하는", "내포하다", "내포하는", "갖는" 및 이들의 활용어들(conjugates)은 "포함하지만 이것으로 제한되지 않는다"를 의미한다. 이 용어는 "~으로 구성된" 및 "본질적으로 ~으로 구성된"이라는 용어를 포함한다.
"본질적으로 ~로 구성된"이라는 문구는, 추가의 성분 및/또는 단계들이 청구된 조성 또는 방법의 기본적 및 신규한 특성을 실질적으로 변경시키지 않는 경우에만 조성 또는 방법이 그 추가의 성분 및/또는 단계를 포함할 수 있음을 의미한다.
여기서 사용될 때, 단수 형태("한(a)", "하나(an)", "그 하나(the)")는 문맥상 명확히 달리 나타내지 않는 한 복수 참조를 포함한다. 예를 들어, "화합물" 또는 "적어도 하나의 화합물"이라는 용어는, 그 혼합물을 포함한 복수의 화합물을 포함할 수 있다.
"예시적"이라는 용어는, 여기서는, "예, 사례, 또는 예시로서 역할하는"을 의미하기 위해 사용된다. "예시적인" 것으로 설명된 임의의 실시예는 반드시 다른 실시예보다 바람직하거나 유리한 것으로 해석될 필요가 없고 및/또는 다른 실시예들로부터의 피쳐들의 조합을 배제하는 것으로 해석되지 않아야 한다.
용어 "선택사항으로서"는 "일부 실시예에서는 제공되며 다른 실시예에서는 제공되지 않는다"는 것을 의미하기 위해 사용된다. 본 발명의 임의의 특정 실시예는 복수의 피쳐들이 상충되지 않는 한 이러한 복수의 "선택사항적" 피쳐를 포함 할 수 있다.
본 명세서 전체에 걸쳐, 본 발명의 다양한 실시예가 범위 형식으로 프리젠팅될 수도 있다. 범위 형식의 기재는 단지 편의와 간소화를 위한 것일 뿐이고 본 발명의 범위에 관한 융통성없는 제한으로서 해석되어서는 안 된다는 것을 이해해야 한다. 따라서, 범위의 기재는 모든 가능한 부분적 범위 및 그 범위 내의 개개의 수치를 구체적으로 개시한 것으로 간주되어야 한다. 예를 들어, 1 내지 6 등의 범위의 기재는, 1 내지 3, 1 내지 4, 1 내지 5, 2 내지 4, 2 내지 6, 3 내지 6 등의 하위 범위 뿐만 아니라, 범위 내의 개별 숫자들, 예를 들어, 1, 2, 3, 4, 5, 6 등을 구체적으로 개시한 것으로 간주되어야 한다. 이것은 범위의 폭에 관계없이 적용된다.
본원에서 수치 범위가 표시될 때마다, 그 범위는 그 표시된 범위 내의 임의의 인용된 숫자(분수 또는 정수)를 포함한다는 의미이다. 제1 표시 숫자와 제2 표시 숫자 사이의 "범위/범위들"이라는 구문과 "제1 표시 숫자"로부터 "제2 표시 숫자까지의 범위/범위들"이라는 구문은 본 명세서에서 상호교환가능하게 사용되며, 제1 및 제2 표시 숫자와 그 사이의 모든 분수 및 정수를 포함한다는 의미이다.
명료성을 위해, 별개의 실시예들의 정황에서 설명되는 본 발명의 소정의 피쳐들은 또한 단일 실시예에서 조합하여 제공될 수도 있다는 것을 이해할 것이다. 역으로, 간소화를 위해, 단일 실시예의 정황에서 설명된 본 발명의 다양한 피쳐들은 또한, 개별적으로 또는 임의의 적절한 부조합으로 또는 본 발명의 임의의 다른 설명된 실시예에 적합하게 제공될 수 있다. 다양한 실시예들의 정황에서 설명된 소정의 피쳐들은, 이들 요소들이 없이는 실시예가 동작하지 않는 한, 이들 실시예들의 필수적인 피쳐로서 간주되지 않아야 한다.
본 발명이 특정 실시예들과 연계하여 설명되었지만, 많은 대안, 수정 및 변형이 본 기술분야의 통상의 기술자에게 자명하다는 것은 명백하다. 따라서, 첨부된 청구항들의 사상과 넓은 범위에 드는 이러한 모든 대안, 수정 및 변형들을 포괄하고자 한다.
본 명세서에서 언급된 모든 간행물, 특허 및 특허 출원은, 각각의 개개의 간행물, 특허 또는 특허 출원이 구체적으로 및 개별적으로 참조에 의해 본원에 포함된 것과 동일한 정도로, 참조에 의해 그 전체가 본 명세서에 포함된다. 또한, 본 출원에서의 임의의 참조 문헌의 인용 또는 식별은 그러한 참조 문헌이 본 발명의 선행 기술로서 이용 가능하다는 인정으로 해석되어서는 안 된다. 섹션 표제가 사용되는 범위까지, 이들은 반드시 제한적인 것으로 해석되어서는 안 된다.

Claims (37)

  1. 복수의 참가자 간의 전화 통화를 위한 마이크로폰으로서 이어폰 출력 스피커를 이용하는 방법으로서,
    수신된 음성 신호―상기 수신된 음성 신호는 원격 클라이언트 단말기로부터 기록된 원격 참가자의 음성임―를 적어도 하나의 이어폰의 적어도 하나의 전기-음향 출력 트랜스듀서에 재생하는 단계;
    로컬 클라이언트 단말기의 오디오 처리 집적 회로에게 동일한 상기 적어도 하나의 전기-음향 출력 트랜스듀서로부터의 음성 신호―상기 음성 신호는 상기 로컬 클라이언트 단말기를 이용하는 로컬 참가자의 음성임―를 기록하도록 지시하는 단계;
    상기 로컬 클라이언트 단말기의 처리 유닛을 이용하여, 상기 기록된 음성 신호, 상기 수신된 음성 신호 및 필터링 계수들을 결합하는 함수에 기초하여 전송 음성 신호를 계산하는 단계; 및
    상기 로컬 클라이언트 단말기의 출력 인터페이스를 통해 상기 전송 음성 신호를 전송함으로써, 전화 통화 통신을 위한 원격 위치의 상기 원격 클라이언트 단말기 상에서 상기 전송 음성 신호의 음향적 음성 재생을 가능하게 하는 단계
    를 포함하는 방법.
  2. 제1항에 있어서, 상기 적어도 하나의 전기-음향 출력 트랜스듀서는 이어폰에 접속된 외부 스피커인, 방법.
  3. 제1항에 있어서, 상기 적어도 하나의 전기-음향 출력 트랜스듀서는 상기 클라이언트 단말기의 내부 스피커인, 방법.
  4. 제1항에 있어서, 상기 음성 신호 기록 및 상기 수신된 음성 신호 재생은 동일한 전기-음향 트랜스듀서로부터 동시에 수행되는, 방법.
  5. 제1항에 있어서, 상기 음성 신호 기록 및 상기 수신된 음성 신호 재생은 동일한 전기-음향 트랜스듀서로부터 교대로 수행되며, 제1 기간 동안 재생이 수행되고 제2 기간 동안 들리지 않을 정도로 충분히 짧은 시간에 기록이 수행되는, 방법.
  6. 제1항의 방법을 수행하도록 구성된 컴퓨터 실행가능한 명령어들을 포함하는 컴퓨터 판독가능한 매체.
  7. 복수의 참가자 간의 전화 통화의 원격 참가자에게 노이즈 감소된 음성 신호를 전송하는 방법으로서,
    수신된 음성 신호―상기 수신된 음성 신호는 원격 클라이언트 단말기로부터 기록된 원격 참가자의 음성임―를 적어도 하나의 이어폰의 적어도 하나의 전기-음향 출력 트랜스듀서에 재생하는 단계;
    로컬 클라이언트 단말기에 통합된 내부 마이크로폰에게 음성 신호 ―상기 음성 신호는 상기 로컬 클라이언트 단말기를 이용하는 로컬 참가자의 음성임― 를 기록하도록 지시하는 단계;
    상기 로컬 클라이언트 단말기의 오디오 처리 집적 회로에게 동일한 상기 적어도 하나의 전기-음향 출력 트랜스듀서를 이용하여 청각적 오디오 신호를 기록하도록 지시하는 단계;
    상기 로컬 클라이언트 단말기의 처리 유닛을 이용하여, 상기 음성 신호, 상기 청각적 오디오 신호, 상기 수신된 음성 신호 및 필터링 계수들을 결합하는 함수에 기초하여 노이즈 감소된 음성 신호를 계산하는 단계; 및
    출력 인터페이스를 통해 상기 노이즈 감소된 음성 신호를 전송함으로써, 전화 통화 통신을 위한 원격 위치의 상기 원격 클라이언트 단말기 상에서 상기 노이즈 감소된 음성 신호의 음향 재생을 가능하게 하는 단계
    를 포함하는 방법.
  8. 제7항에 있어서, 상기 청각적 오디오 신호 기록 및 수신된 음성 신호 재생은 동일한 전기-음향 출력 트랜스듀서로부터 동시에 수행되는, 방법.
  9. 제7항에 있어서, 상기 청각적 오디오 신호 기록 및 상기 수신된 음성 신호 재생은 동일한 전기-음향 출력 트랜스듀서로부터 교대로 수행되며, 제1 기간 동안 재생이 수행되고 제2 기간 동안 들리지 않을 정도로 충분히 짧은 시간에 기록이 수행되는, 방법.
  10. 제7항에 있어서, 상기 전기-음향 트랜스듀서는 상기 청각적 오디오 신호의 기록 동안에 외이도(ear canal) 내부에 위치하는, 방법.
  11. 제7항의 방법을 수행하도록 구성된 컴퓨터 실행가능한 명령어들을 포함하는 컴퓨터 판독가능한 매체.
  12. 맥박수 측정치(pulse rate measurement)를 프리젠팅(presenting)하는 방법으로서,
    출력 오디오 신호를 적어도 하나의 이어폰의 적어도 하나의 전기-음향 출력 트랜스듀서에 재생하는 단계;
    클라이언트 단말기의 오디오 처리 집적 회로에게 동일한 상기 적어도 하나의 전기-음향 출력 트랜스듀서를 이용하여 청각적 오디오 신호를 기록하도록 지시하는 단계;
    상기 청각적 오디오 신호, 상기 출력 오디오 신호 및 필터링 계수들을 결합하는 함수에 기초하여 맥박수 측정치를 계산하는 단계; 및
    상기 맥박수 측정치를 프리젠팅하는 단계
    를 포함하는 방법.
  13. 제12항에 있어서, 상기 청각적 오디오 신호 기록 및 상기 출력 오디오 신호 재생은 동일한 상기 적어도 하나의 전기-음향 출력 트랜스듀서로부터 동시에 수행되는, 방법.
  14. 제12항에 있어서, 상기 청각적 오디오 신호 기록 및 상기 출력 오디오 신호 재생은 동일한 상기 적어도 하나의 전기-음향 출력 트랜스듀서로부터 교대로 수행되며, 제1 기간 동안 재생이 수행되고 제2 기간 동안 들리지 않을 정도로 충분히 짧은 시간에 기록이 수행되는, 방법.
  15. 제12항에 있어서, 상기 적어도 하나의 전기-음향 출력 트랜스듀서는 상기 청각적 오디오 신호의 기록 동안에 외이도 내부에 위치하는, 방법.
  16. 제12항에 있어서, 상기 맥박수 측정치는, 상기 청각적 오디오 신호와, 적어도 하나의 제2 전기-음향 출력 트랜스듀서로부터 기록된 제2 청각적 오디오 신호간의 시간 시프트(time shift)의 측정치에 기초하여 계산되는, 방법.
  17. 제12항에 있어서, 상기 맥박수 측정치는 외이도의 주파수 응답에서의 변화에 기초하여 계산되는, 방법.
  18. 제12항에 있어서, 상기 맥박수 측정치는 사용자 인터페이스를 통해 사용자에게 프리젠팅되는, 방법.
  19. 제12항에 있어서, 상기 맥박수 측정치는 출력 인터페이스를 통해 원격 디바이스에 프리젠팅되는, 방법.
  20. 제12항의 방법을 수행하도록 구성된 컴퓨터 실행가능한 명령어들을 포함하는 컴퓨터 판독가능한 매체.
  21. 온도 측정치를 프리젠팅하는 방법으로서,
    출력 오디오 신호를 적어도 하나의 전기-음향 트랜스듀서에 재생하는 단계;
    클라이언트 단말기의 오디오 처리 집적 회로에게 동일한 상기 적어도 하나의 전기-음향 트랜스듀서를 이용하여 오디오 신호를 기록하도록 지시하는 단계;
    상기 오디오 신호, 출력 오디오 신호 및 필터링 계수들을 결합하는 함수에 기초하여 복수의 온도 측정치를 계산하는 단계; 및
    상기 복수의 온도 측정치 중 적어도 하나를 프리젠팅하는 단계
    를 포함하는 방법.
  22. 제21항에 있어서, 상기 적어도 하나의 전기-음향 트랜스듀서는 마이크로폰인, 방법.
  23. 제21항에 있어서, 상기 적어도 하나의 전기-음향 트랜스듀서는 이어폰의 출력 스피커인, 방법.
  24. 제21항에 있어서, 상기 적어도 하나의 전기-음향 트랜스듀서는 이어폰에 접속된 외부 스피커이고, 상기 복수의 온도 측정치는 주변 및 내이(inner ear) 온도 측정치들을 포함하는, 방법.
  25. 제21항에 있어서, 상기 적어도 하나의 전기-음향 트랜스듀서는 클라이언트 단말기의 내부 스피커이고, 상기 복수의 온도 측정치는 주변 및 디바이스 온도 측정치를 포함하는, 방법.
  26. 제21항에 있어서, 상기 전기-음향 트랜스듀서는 상기 오디오 신호의 기록 동안에 타겟 사용자의 외이도 내부에 위치하고 상기 복수의 온도 측정치 중 하나는 상기 타겟 사용자의 체온과 상관된 내이 측정치인, 방법.
  27. 제21항에 있어서, 상기 복수의 온도 측정치 중 적어도 하나는 사용자 인터페이스를 통해 사용자에게 프리젠팅되는, 방법.
  28. 제21항에 있어서, 상기 복수의 온도 측정치 중 적어도 하나는 출력 인터페이스를 통해 원격 디바이스에 프리젠팅되는, 방법.
  29. 제21항의 방법을 수행하도록 구성된 컴퓨터 실행가능한 명령어들을 포함하는 컴퓨터 판독가능한 매체.
  30. 전송 음성 신호를 전송하기 위한 컴퓨터 프로그램 제품으로서,
    컴퓨터 판독가능한 저장 매체;
    수신된 음성 신호를 적어도 하나의 이어폰의 적어도 하나의 전기-음향 출력 트랜스듀서에 재생하는 제1 프로그램 명령어;
    로컬 클라이언트 단말기의 오디오 처리 집적 회로에게 동일한 상기 적어도 하나의 전기-음향 출력 트랜스듀서를 이용하여 음성 신호를 기록하도록 지시하는 제2 프로그램 명령어;
    상기 기록된 음성 신호를 결합하는 함수에 기초하여 전송 음성 신호를 계산하는 제3 프로그램 명령어; 및
    상기 로컬 클라이언트 단말기의 출력 인터페이스를 통해 상기 전송 음성 신호를 전송하는 제4 프로그램 명령어
    를 포함하고,
    상기 제1, 제2, 제3, 및 제4 프로그램 명령어들은 상기 컴퓨터 판독가능한 저장 매체 상에 저장되는, 컴퓨터 프로그램 제품.
  31. 노이즈 감소된 음성 신호를 전송하기 위한 컴퓨터 프로그램 제품으로서,
    컴퓨터 판독가능한 저장 매체;
    수신된 음성 신호를 적어도 하나의 이어폰의 적어도 하나의 전기-음향 출력 트랜스듀서에 재생하는 제1 프로그램 명령어;
    클라이언트 단말기에 통합된 내부 마이크로폰에게 음성 신호를 기록하도록 지시하는 제2 프로그램 명령어;
    상기 클라이언트 단말기의 오디오 처리 집적 회로에게 동일한 상기 적어도 하나의 전기-음향 출력 트랜스듀서를 이용하여 청각적 오디오 신호를 기록하도록 지시하는 제3 프로그램 명령어;
    상기 음성 신호, 상기 청각적 오디오 신호 및 필터링 계수들을 결합하는 함수에 기초하여 노이즈 감소된 음성 신호를 계산하는 제4 프로그램 명령어; 및
    상기 클라이언트 단말기의 출력 인터페이스를 통해 상기 노이즈 감소된 음성 신호를 전송하는 제5 프로그램 명령어
    를 포함하고,
    상기 제1, 제2, 제3, 제4, 및 제5 프로그램 명령어들은 상기 컴퓨터 판독가능한 저장 매체 상에 저장되는, 컴퓨터 프로그램 제품.
  32. 맥박수 측정치를 프리젠팅하기 위한 컴퓨터 프로그램 제품으로서,
    컴퓨터 판독가능한 저장 매체;
    출력 오디오 신호를 적어도 하나의 이어폰의 적어도 하나의 전기-음향 출력 트랜스듀서에 재생하는 제1 프로그램 명령어;
    클라이언트 단말기의 오디오 처리 집적 회로에게 동일한 상기 적어도 하나의 전기-음향 출력 트랜스듀서를 이용하여 청각적 오디오 신호를 기록하도록 지시하는 제2 프로그램 명령어;
    상기 기록된 청각적 오디오 신호를 결합하는 함수에 기초하여 맥박수 측정치를 계산하는 제3 프로그램 명령어; 및
    상기 맥박수 측정치를 프리젠팅하는 제4 프로그램 명령어
    를 포함하고,
    상기 제1, 제2, 제3, 및 제4 프로그램 명령어들은 상기 컴퓨터 판독가능한 저장 매체 상에 저장되는, 컴퓨터 프로그램 제품.
  33. 온도 측정치를 프리젠팅하기 위한 컴퓨터 프로그램 제품으로서,
    컴퓨터 판독가능한 저장 매체;
    출력 오디오 신호를 적어도 하나의 이어폰의 적어도 하나의 전기-음향 트랜스듀서에 재생하는 제1 프로그램 명령어;
    클라이언트 단말기의 오디오 처리 집적 회로에게 동일한 상기 적어도 하나의 전기-음향 트랜스듀서를 이용하여 청각적 오디오 신호를 기록하도록 지시하는 제2 프로그램 명령어;
    상기 기록된 청각적 오디오 신호를 결합하는 함수에 기초하여 온도 측정치를 계산하는 제3 프로그램 명령어; 및
    상기 온도 측정치를 프리젠팅하는 제4 프로그램 명령어
    를 포함하고,
    상기 제1, 제2, 제3, 및 제4 프로그램 명령어들은 상기 컴퓨터 판독가능한 저장 매체 상에 저장되는, 컴퓨터 프로그램 제품.
  34. 전화 통화에서 원격 참가자에게 음성 신호를 전송하기 위한 디바이스로서,
    상기 전화 통화의 로컬 참가자의 로컬 음성 신호를 전송하고 원격 참가자의 원격 음성 신호를 수신하기 위한 인터페이스;
    이어폰을 상기 디바이스에 접속하기 위한 오디오 소켓;
    수신된 음성 신호를 적어도 하나의 이어폰의 적어도 하나의 전기-음향 트랜스듀서에 재생하고;
    오디오 회로에게 상기 이어폰의 동일한 상기 적어도 하나의 전기-음향 트랜스듀서로부터의 청각적 신호를 기록하도록 지시하며;
    상기 청각적 신호로부터 상기 로컬 음성 신호를 계산하고;
    상기 로컬 음성 신호를 상기 전화 통화에서의 상기 원격 참가자의 플레이어 디바이스에 전송하는
    동작들을 수행하기 위한 프로세서 명령어 세트들을 포함하는 적어도 하나의 저장 유닛; 및
    상기 적어도 하나의 저장 유닛으로부터 상기 프로세서 명령어 세트들을 검색하고 상기 프로세서 명령어 세트를 실행하도록 구성된 적어도 하나의 처리 유닛
    을 포함하는 디바이스.
  35. 제34항에 있어서, 상기 디바이스는 마이크로폰을 더 포함하고, 상기 마이크로폰은 제2 음성 신호를 기록하며, 상기 음성 신호는 상기 청각적 신호 및 상기 제2 음성 신호를 이용하여 계산된 노이즈 감소된 음성 신호인, 디바이스.
  36. 바이오메트릭 측정치(biometric measurement)를 프리젠팅하기 위한 디바이스로서,
    이어폰을 상기 디바이스에 접속하기 위한 오디오 소켓;
    출력 오디오 신호를 적어도 하나의 이어폰의 적어도 하나의 전기-음향 트랜스듀서에 재생하고;
    오디오 회로에게 상기 이어폰의 동일한 상기 적어도 하나의 전기-음향 트랜스듀서로부터의 청각적 신호를 기록하도록 지시하며;
    상기 청각적 신호로부터 적어도 하나의 바이오메트릭 측정치를 계산하고;
    상기 적어도 하나의 바이오메트릭 측정치를 프리젠팅하는
    동작들을 수행하기 위한 프로세서 명령어 세트들을 포함하는 적어도 하나의 저장 유닛; 및
    상기 적어도 하나의 저장 유닛으로부터 상기 프로세서 명령어 세트들을 검색하고 상기 프로세서 명령어 세트를 실행하도록 구성된 적어도 하나의 처리 유닛
    을 포함하는 디바이스.
  37. 제36항에 있어서, 상기 디바이스는 데이터 인터페이스를 더 포함하고, 상기 적어도 하나의 바이오메트릭 측정치는 상기 데이터 인터페이스를 이용하여 원격 디바이스 상에 프리젠팅되는, 디바이스.
KR1020167035505A 2014-05-20 2015-05-18 이어폰 출력 스피커로부터의 청각적 측정 KR20170007451A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201462000626P 2014-05-20 2014-05-20
US62/000,626 2014-05-20
PCT/IL2015/050525 WO2015177787A1 (en) 2014-05-20 2015-05-18 Aural measurements from earphone output speakers

Publications (1)

Publication Number Publication Date
KR20170007451A true KR20170007451A (ko) 2017-01-18

Family

ID=54553512

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020167035505A KR20170007451A (ko) 2014-05-20 2015-05-18 이어폰 출력 스피커로부터의 청각적 측정

Country Status (9)

Country Link
US (3) US10142722B2 (ko)
EP (1) EP3146704A4 (ko)
JP (1) JP2017528011A (ko)
KR (1) KR20170007451A (ko)
CN (1) CN106537889B (ko)
AU (2) AU2015262864B2 (ko)
CA (1) CA2949610A1 (ko)
IL (1) IL249051A0 (ko)
WO (1) WO2015177787A1 (ko)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015166482A1 (en) 2014-05-01 2015-11-05 Bugatone Ltd. Methods and devices for operating an audio processing integrated circuit to record an audio signal via a headphone port
US11178478B2 (en) 2014-05-20 2021-11-16 Mobile Physics Ltd. Determining a temperature value by analyzing audio
US10292607B2 (en) 2015-03-26 2019-05-21 Intel Corporation Sensor data transmissions
CN109196879A (zh) 2016-05-27 2019-01-11 布佳通有限公司 确定在用户的耳朵处的耳机存在
WO2019002831A1 (en) 2017-06-27 2019-01-03 Cirrus Logic International Semiconductor Limited REPRODUCTIVE ATTACK DETECTION
GB2563953A (en) 2017-06-28 2019-01-02 Cirrus Logic Int Semiconductor Ltd Detection of replay attack
GB201801526D0 (en) 2017-07-07 2018-03-14 Cirrus Logic Int Semiconductor Ltd Methods, apparatus and systems for authentication
GB201801532D0 (en) 2017-07-07 2018-03-14 Cirrus Logic Int Semiconductor Ltd Methods, apparatus and systems for audio playback
GB201801527D0 (en) * 2017-07-07 2018-03-14 Cirrus Logic Int Semiconductor Ltd Method, apparatus and systems for biometric processes
GB201801664D0 (en) 2017-10-13 2018-03-21 Cirrus Logic Int Semiconductor Ltd Detection of liveness
US10277987B1 (en) * 2017-11-27 2019-04-30 Cirrus Logic, Inc. Personal status monitoring using piezoelectric transducer
US11264037B2 (en) 2018-01-23 2022-03-01 Cirrus Logic, Inc. Speaker identification
CN108391207A (zh) * 2018-03-30 2018-08-10 广东欧珀移动通信有限公司 数据处理方法、装置、终端、耳机及可读存储介质
CN109314813B (zh) * 2018-04-28 2020-07-28 万魔声学科技有限公司 耳机无线通信方法、主耳机、从耳机及耳机系统
US11850087B2 (en) 2018-05-08 2023-12-26 Cardiac Pacemakers, Inc. Heart sound sensing headgear
CN108492890B (zh) * 2018-05-25 2024-03-08 广州嘉元华健康电子科技有限公司 一种人体健康状态监测系统及方法
CN109068217B (zh) * 2018-08-17 2020-08-07 歌尔科技有限公司 一种入耳式耳机的侧音增强方法、装置及入耳式耳机
US10915614B2 (en) 2018-08-31 2021-02-09 Cirrus Logic, Inc. Biometric authentication
US11344206B2 (en) 2018-12-18 2022-05-31 Samsung Electronics Co., Ltd. Electronic device including earphone, and method of controlling the electronic device
JP7127700B2 (ja) * 2018-12-19 2022-08-30 日本電気株式会社 情報処理装置、装着型機器、情報処理方法及び記憶媒体
US20210330279A1 (en) * 2020-04-27 2021-10-28 Ess Technology, Inc. Audio Output as Half Duplex Biometric Detection Device
CN115428474A (zh) 2020-04-29 2022-12-02 惠普发展公司,有限责任合伙企业 基于由扬声器收集的环境噪声对音频信号的修改

Family Cites Families (141)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6017052Y2 (ja) 1979-06-21 1985-05-27 ソニー株式会社 テ−プレコ−ダ
US4458362A (en) 1982-05-13 1984-07-03 Teledyne Industries, Inc. Automatic time domain equalization of audio signals
US5159936A (en) * 1990-08-17 1992-11-03 Mark Yelderman Noncontact infrared tympanic thermometer
CN2162063Y (zh) 1993-05-07 1994-04-13 王建军 录放音耳机
US5787187A (en) 1996-04-01 1998-07-28 Sandia Corporation Systems and methods for biometric identification using the acoustic properties of the ear canal
US5990784A (en) 1996-12-17 1999-11-23 Yosemite Investment, Inc. Schmitt trigger loud alarm with feedback
US7072476B2 (en) 1997-02-18 2006-07-04 Matech, Inc. Audio headset
US5907538A (en) * 1997-02-18 1999-05-25 White; Donald R. Full duplex communication circuit with a transducer for simultaneously generating audio output and receiving audio input
US5919143A (en) * 1998-01-12 1999-07-06 Mdi Instruments, Inc. Apparatus and method for analysis of acoustic reflectance and thermal radiation of an ear
US5951486A (en) * 1998-10-23 1999-09-14 Mdi Instruments, Inc. Apparatus and method for analysis of ear pathologies using combinations of acoustic reflectance, temperature and chemical response
US6126614A (en) * 1998-01-12 2000-10-03 Mdi Instruments, Inc. Apparatus and method for analysis of ear pathologies by detecting fluid in the ear, measuring body temperature and/or determining a characteristic of a fluid
JPH11205166A (ja) 1998-01-19 1999-07-30 Mitsubishi Electric Corp ノイズ検出装置
JP2000059876A (ja) 1998-08-13 2000-02-25 Sony Corp 音響装置およびヘッドホン
JP3064555U (ja) 1999-06-03 2000-01-21 株式会社マイクロエムズ 全二重オ―ディオ通信回路
JP2001157292A (ja) 1999-11-22 2001-06-08 Micro Emuzu:Kk マイク機能を有するイヤホン並びにそれを用いた全二重オーディオ通信回路
US6487916B1 (en) * 2000-02-02 2002-12-03 Bechtel Bxwt Idaho, Llc Ultrasonic flow metering system
US20020133084A1 (en) * 2001-02-22 2002-09-19 Wilson David L. Device for measuring blood flow to the brain
GB2375205A (en) 2001-05-03 2002-11-06 Orange Personal Comm Serv Ltd Determining identity of a user
US7359504B1 (en) * 2002-12-03 2008-04-15 Plantronics, Inc. Method and apparatus for reducing echo and noise
US20100069752A1 (en) * 2002-12-06 2010-03-18 Otosonics, Inc. Ultrasonic detection of ear disorders
TW563995U (en) * 2002-12-20 2003-11-21 Benq Corp Mobile device with auto-answer function
KR100571811B1 (ko) * 2003-05-09 2006-04-17 삼성전자주식회사 귀속형 생체 신호 측정 장치
US20060104451A1 (en) 2003-08-07 2006-05-18 Tymphany Corporation Audio reproduction system
US20050136848A1 (en) 2003-12-22 2005-06-23 Matt Murray Multi-mode audio processors and methods of operating the same
US20060013410A1 (en) 2004-04-20 2006-01-19 Wurtz Michael J Mobile-telephone adapters for automatic-noise-reduction headphones
US9820658B2 (en) * 2006-06-30 2017-11-21 Bao Q. Tran Systems and methods for providing interoperability among healthcare devices
US8315379B2 (en) 2004-11-10 2012-11-20 Matech, Inc. Single transducer full duplex talking circuit
KR100622891B1 (ko) * 2004-12-09 2006-09-19 엘지전자 주식회사 영상인식 센서를 이용한 리시버위치 최적화 기능을 갖는이동통신 단말기 및 그 방법
US7836216B2 (en) 2005-08-23 2010-11-16 Palm, Inc. Connector system for supporting multiple types of plug carrying accessory devices
US7728316B2 (en) * 2005-09-30 2010-06-01 Apple Inc. Integrated proximity sensor and light sensor
US7714265B2 (en) * 2005-09-30 2010-05-11 Apple Inc. Integrated proximity sensor and light sensor
US7633076B2 (en) * 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
US20070116314A1 (en) * 2005-10-11 2007-05-24 Morning Pride Manufacturing, L.L.C. Facemask-earpiece combination
US7453366B2 (en) * 2005-10-11 2008-11-18 Morning Pride Manufacturing, L.L.C. Programmable earpiece
US7733224B2 (en) * 2006-06-30 2010-06-08 Bao Tran Mesh network personal emergency response appliance
GB2434708B (en) 2006-01-26 2008-02-27 Sonaptic Ltd Ambient noise reduction arrangements
US8260380B2 (en) 2006-02-02 2012-09-04 Nvidia Corporation Headset with remote control
US20070197881A1 (en) * 2006-02-22 2007-08-23 Wolf James L Wireless Health Monitor Device and System with Cognition
JP5285434B2 (ja) * 2006-02-28 2013-09-11 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Osdbのために継続的に監視するとともに、音声刺激処置をもたらす外部装置
US20070255115A1 (en) * 2006-04-27 2007-11-01 Anglin Richard L Jr Remote diagnostic & treatment system
US8968195B2 (en) * 2006-05-12 2015-03-03 Bao Tran Health monitoring appliance
US7558622B2 (en) * 2006-05-24 2009-07-07 Bao Tran Mesh network stroke monitoring appliance
US8500636B2 (en) * 2006-05-12 2013-08-06 Bao Tran Health monitoring appliance
US8684922B2 (en) * 2006-05-12 2014-04-01 Bao Tran Health monitoring system
US8323189B2 (en) * 2006-05-12 2012-12-04 Bao Tran Health monitoring appliance
US9060683B2 (en) * 2006-05-12 2015-06-23 Bao Tran Mobile wireless appliance
US7539532B2 (en) * 2006-05-12 2009-05-26 Bao Tran Cuffless blood pressure monitoring appliance
US9814425B2 (en) * 2006-05-12 2017-11-14 Koninklijke Philips N.V. Health monitoring appliance
US7539533B2 (en) * 2006-05-16 2009-05-26 Bao Tran Mesh network monitoring appliance
US8684900B2 (en) * 2006-05-16 2014-04-01 Bao Tran Health monitoring appliance
US9907473B2 (en) * 2015-04-03 2018-03-06 Koninklijke Philips N.V. Personal monitoring system
US7706821B2 (en) 2006-06-20 2010-04-27 Alon Konchitsky Noise reduction system and method suitable for hands free communication devices
US20070297634A1 (en) 2006-06-27 2007-12-27 Sony Ericsson Mobile Communications Ab Earphone system with usage detection
US7773759B2 (en) 2006-08-10 2010-08-10 Cambridge Silicon Radio, Ltd. Dual microphone noise reduction for headset application
US8249265B2 (en) 2006-09-15 2012-08-21 Shumard Eric L Method and apparatus for achieving active noise reduction
US8006002B2 (en) * 2006-12-12 2011-08-23 Apple Inc. Methods and systems for automatic configuration of peripherals
US8652040B2 (en) * 2006-12-19 2014-02-18 Valencell, Inc. Telemetric apparatus for health and environmental monitoring
JP5007561B2 (ja) 2006-12-27 2012-08-22 ソニー株式会社 ノイズ低減装置、ノイズ低減方法、ノイズ低減処理用プログラム、ノイズ低減音声出力装置およびノイズ低減音声出力方法
US7912501B2 (en) 2007-01-05 2011-03-22 Apple Inc. Audio I/O headset plug and plug detection circuitry
GB2445984B (en) 2007-01-25 2011-12-07 Sonaptic Ltd Ambient noise reduction
GB2441835B (en) 2007-02-07 2008-08-20 Sonaptic Ltd Ambient noise reduction system
US7912211B1 (en) * 2007-03-14 2011-03-22 Clearone Communications, Inc. Portable speakerphone device and subsystem
US20080255430A1 (en) * 2007-04-16 2008-10-16 Sony Ericsson Mobile Communications Ab Portable device with biometric sensor arrangement
US8068925B2 (en) * 2007-06-28 2011-11-29 Apple Inc. Dynamic routing of audio among multiple audio devices
US20090003617A1 (en) 2007-06-28 2009-01-01 Goldman Stuart O Noise cancellation for buildings and/or structures
US8655004B2 (en) * 2007-10-16 2014-02-18 Apple Inc. Sports monitoring system for headphones, earbuds and/or headsets
US20090105548A1 (en) * 2007-10-23 2009-04-23 Bart Gary F In-Ear Biometrics
US20090131124A1 (en) * 2007-11-20 2009-05-21 Broadcom Corporation Wireless earpiece determining proximity to user and operation based thereon
EP2214554B1 (en) * 2007-11-27 2012-01-18 Koninklijke Philips Electronics N.V. Aural heart monitoring apparatus and method
US20090180631A1 (en) * 2008-01-10 2009-07-16 Sound Id Personal sound system for display of sound pressure level or other environmental condition
US7813889B2 (en) * 2008-01-16 2010-10-12 Welch Allyn, Inc. Guiding IR temperature measuring device with probe cover
US8160655B2 (en) * 2008-02-19 2012-04-17 Braden Kroll Automatic recharging wireless headset
JP4572945B2 (ja) 2008-03-28 2010-11-04 ソニー株式会社 ヘッドフォン装置、信号処理装置、信号処理方法
JP4710940B2 (ja) 2008-09-09 2011-06-29 ソニー株式会社 情報処理装置及び情報処理方法
ATE548725T1 (de) 2008-10-31 2012-03-15 Austriamicrosystems Ag Aktive rauschsteueranordnung, aktiver rauschsteuerungskopfhörer und kalibrierungsverfahren
US8622919B2 (en) * 2008-11-17 2014-01-07 Sony Corporation Apparatus, method, and computer program for detecting a physiological measurement from a physiological sound signal
KR100986527B1 (ko) 2008-12-04 2010-10-07 한국기술교육대학교 산학협력단 음악선곡시스템 및 그 방법
EP2202998B1 (en) 2008-12-29 2014-02-26 Nxp B.V. A device for and a method of processing audio data
US20100174390A1 (en) 2009-01-02 2010-07-08 Peter Garrett Solid-State Music Player And Host Docking System
JP2010171880A (ja) 2009-01-26 2010-08-05 Sanyo Electric Co Ltd 音声信号処理装置
US8788002B2 (en) * 2009-02-25 2014-07-22 Valencell, Inc. Light-guiding devices and monitoring devices incorporating same
US8700111B2 (en) * 2009-02-25 2014-04-15 Valencell, Inc. Light-guiding devices and monitoring devices incorporating same
US8699719B2 (en) 2009-03-30 2014-04-15 Bose Corporation Personal acoustic device position determination
US8184822B2 (en) 2009-04-28 2012-05-22 Bose Corporation ANR signal processing topology
US20100296666A1 (en) 2009-05-25 2010-11-25 National Chin-Yi University Of Technology Apparatus and method for noise cancellation in voice communication
US20100308999A1 (en) * 2009-06-05 2010-12-09 Chornenky Todd E Security and monitoring apparatus
US8737636B2 (en) 2009-07-10 2014-05-27 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for adaptive active noise cancellation
JP2011023848A (ja) 2009-07-14 2011-02-03 Hosiden Corp ヘッドセット
US8401200B2 (en) 2009-11-19 2013-03-19 Apple Inc. Electronic device and headset with speaker seal evaluation capabilities
US20110137141A1 (en) * 2009-12-03 2011-06-09 At&T Intellectual Property I, L.P. Wireless Monitoring of Multiple Vital Signs
US9253584B2 (en) 2009-12-31 2016-02-02 Nokia Technologies Oy Monitoring and correcting apparatus for mounted transducers and method thereof
US20110181452A1 (en) * 2010-01-28 2011-07-28 Dsp Group, Ltd. Usage of Speaker Microphone for Sound Enhancement
US8858430B2 (en) * 2010-03-09 2014-10-14 Zipline Health, Inc. Ear ailment diagnostic device and method
CN101853667B (zh) * 2010-05-25 2012-08-29 无锡中星微电子有限公司 一种语音降噪装置
US9470584B2 (en) * 2010-05-27 2016-10-18 Exergen Corporation Method and apparatus for accurate detection of fever
US8509882B2 (en) 2010-06-08 2013-08-13 Alivecor, Inc. Heart monitoring system usable with a smartphone or computer
US8774875B1 (en) 2010-10-20 2014-07-08 Sprint Communications Company L.P. Spatial separation-enabled noise reduction
US8888701B2 (en) * 2011-01-27 2014-11-18 Valencell, Inc. Apparatus and methods for monitoring physiological data during environmental interference
AU2011358630A1 (en) * 2011-02-09 2013-09-12 Massachusetts Institute Of Technology Wearable vital signs monitor
US8693700B2 (en) 2011-03-31 2014-04-08 Bose Corporation Adaptive feed-forward noise reduction
WO2012167234A1 (en) 2011-06-02 2012-12-06 Cedars-Sinai Medical Center Earphones and hearing aids
WO2013016007A2 (en) * 2011-07-25 2013-01-31 Valencell, Inc. Apparatus and methods for estimating time-state physiological parameters
US20130196721A1 (en) 2011-07-26 2013-08-01 Aloft Technologies, Inc. Wireless headset
EP3222210B1 (en) * 2011-08-02 2024-09-25 Yukka Magic LLC Systems and methods for variable filter adjustment by heart rate metric feedback
US8750528B2 (en) * 2011-08-16 2014-06-10 Fortemedia, Inc. Audio apparatus and audio controller thereof
US9319768B2 (en) 2011-12-06 2016-04-19 Conexant Systems, Inc. Multi-standard headset support with integrated ground switching
TW201330645A (zh) 2012-01-05 2013-07-16 Richtek Technology Corp 降低雜訊的錄音裝置及其方法
WO2013109390A1 (en) * 2012-01-16 2013-07-25 Valencell, Inc. Reduction of physiological metric error due to inertial cadence
CN104168828A (zh) * 2012-01-16 2014-11-26 瓦伦赛尔公司 生理指标估值的上升和下降极限
US9191761B2 (en) * 2012-01-30 2015-11-17 Etymotic Research, Inc. Hearing testing probe with integrated temperature and humidity sensors and active temperature control
US9211069B2 (en) * 2012-02-17 2015-12-15 Honeywell International Inc. Personal protective equipment with integrated physiological monitoring
US9265427B2 (en) * 2012-03-19 2016-02-23 Welch Allyn, Inc. Systems and methods for determining patient temperature
JP2013202260A (ja) * 2012-03-29 2013-10-07 Sony Corp 情報処理装置、情報処理方法およびコンピュータプログラム
US9185501B2 (en) * 2012-06-20 2015-11-10 Broadcom Corporation Container-located information transfer module
EP3782534A1 (en) * 2012-06-27 2021-02-24 Zipline Health, Inc. Devices, methods and systems for acquiring medical diagnostic information and provision of telehealth services
US20140018779A1 (en) * 2012-07-12 2014-01-16 Worrell, Inc. Telemedicine care system
US9307912B2 (en) * 2012-08-08 2016-04-12 Welch Allyn, Inc. Temperature measurement system
US20140051940A1 (en) * 2012-08-17 2014-02-20 Rare Light, Inc. Obtaining physiological measurements using ear-located sensors
US20140051939A1 (en) * 2012-08-17 2014-02-20 Rare Light, Inc. Obtaining physiological measurements using ear-located sensors
US9332339B2 (en) 2012-10-05 2016-05-03 Qualcomm Incorporated Multi-pin audio plug with retractable nub
US9865176B2 (en) * 2012-12-07 2018-01-09 Koninklijke Philips N.V. Health monitoring system
US9215532B2 (en) 2013-03-14 2015-12-15 Cirrus Logic, Inc. Systems and methods for using a speaker as a microphone in a mobile device
US9467776B2 (en) 2013-03-15 2016-10-11 Cirrus Logic, Inc. Monitoring of speaker impedance to detect pressure applied between mobile device and ear
GB2542965B (en) 2013-04-11 2017-08-09 Cirrus Logic Int Semiconductor Ltd Microphone biasing circuitry and method thereof
US9781521B2 (en) * 2013-04-24 2017-10-03 Oticon A/S Hearing assistance device with a low-power mode
CA2911078A1 (en) 2013-05-02 2014-11-06 Bugatone Ltd. Earphone active noise control
US20150068069A1 (en) * 2013-07-27 2015-03-12 Alexander Bach Tran Personally powered appliance
CN203554657U (zh) * 2013-10-11 2014-04-16 孙文宗 耳机麦克风
WO2015105497A1 (en) 2014-01-09 2015-07-16 Empire Technology Development Llc Repurposable microphone and speaker
US9560445B2 (en) 2014-01-18 2017-01-31 Microsoft Technology Licensing, Llc Enhanced spatial impression for home audio
US20150269825A1 (en) * 2014-03-20 2015-09-24 Bao Tran Patient monitoring appliance
US9557960B2 (en) 2014-04-08 2017-01-31 Doppler Labs, Inc. Active acoustic filter with automatic selection of filter parameters based on ambient sound
US9648436B2 (en) 2014-04-08 2017-05-09 Doppler Labs, Inc. Augmented reality sound system
US9524731B2 (en) 2014-04-08 2016-12-20 Doppler Labs, Inc. Active acoustic filter with location-based filter characteristics
US9825598B2 (en) 2014-04-08 2017-11-21 Doppler Labs, Inc. Real-time combination of ambient audio and a secondary audio source
WO2015166482A1 (en) 2014-05-01 2015-11-05 Bugatone Ltd. Methods and devices for operating an audio processing integrated circuit to record an audio signal via a headphone port
US9674633B2 (en) 2014-05-13 2017-06-06 Crutchfield Corporation Virtual simulation of spatial audio characteristics
FR3021180B1 (fr) 2014-05-16 2016-06-03 Parrot Casque audio a controle actif de bruit anc avec prevention des effets d'une saturation du signal microphonique "feedback"
US20160044429A1 (en) * 2014-07-10 2016-02-11 InAuth, Inc. Computing device identification using device-specific distortions of a discontinuous audio waveform
CN106659936A (zh) * 2014-07-23 2017-05-10 Pcms控股公司 用于确定增强现实应用中音频上下文的系统和方法
WO2016067942A1 (ja) 2014-10-28 2016-05-06 株式会社三菱ケミカルホールディングス 検体情報処理装置、情報処理方法、情報処理プログラム、及び同プログラムを記録したコンピュータ読み取り可能な記録媒体

Also Published As

Publication number Publication date
AU2019203949A1 (en) 2019-06-27
CA2949610A1 (en) 2015-11-26
US20170070834A1 (en) 2017-03-09
US9973870B2 (en) 2018-05-15
CN106537889A (zh) 2017-03-22
CN106537889B (zh) 2019-12-03
EP3146704A4 (en) 2018-01-17
EP3146704A1 (en) 2017-03-29
AU2015262864B2 (en) 2019-03-07
US10142722B2 (en) 2018-11-27
JP2017528011A (ja) 2017-09-21
WO2015177787A1 (en) 2015-11-26
US10555102B2 (en) 2020-02-04
US20170094401A1 (en) 2017-03-30
IL249051A0 (en) 2017-01-31
AU2015262864A1 (en) 2016-12-08
US20180376267A1 (en) 2018-12-27

Similar Documents

Publication Publication Date Title
US10555102B2 (en) Aural measurements from earphone output speakers
US10659867B2 (en) Identifying an acoustic signal for a user based on a feature of an aural signal
KR102045600B1 (ko) 이어폰 능동 노이즈 제어
US11178478B2 (en) Determining a temperature value by analyzing audio
CN103428609A (zh) 用于去除噪声的设备和方法
US10595150B2 (en) Method and apparatus for acoustic crosstalk cancellation
JP2017161775A (ja) 測定装置、フィルタ生成装置、測定方法、及びフィルタ生成方法
US10687144B2 (en) Filter generation device and filter generation method
JP6981330B2 (ja) 頭外定位処理装置、頭外定位処理方法、及びプログラム
CN110301142A (zh) 滤波器生成装置、滤波器生成方法以及程序
CN108605197A (zh) 滤波器生成装置、滤波器生成方法以及声像定位处理方法
JP2017028365A (ja) 音場再生装置、音場再生方法、及びプログラム
JP7115353B2 (ja) 処理装置、処理方法、再生方法、及びプログラム
JP2021100221A (ja) 処理装置、処理方法、フィルタ生成方法、再生方法、及びプログラム