WO2013001836A1 - 不快閾値推定システム、方法およびそのプログラム、補聴器調整システムおよび不快閾値推定処理回路 - Google Patents

不快閾値推定システム、方法およびそのプログラム、補聴器調整システムおよび不快閾値推定処理回路 Download PDF

Info

Publication number
WO2013001836A1
WO2013001836A1 PCT/JP2012/004245 JP2012004245W WO2013001836A1 WO 2013001836 A1 WO2013001836 A1 WO 2013001836A1 JP 2012004245 W JP2012004245 W JP 2012004245W WO 2013001836 A1 WO2013001836 A1 WO 2013001836A1
Authority
WO
WIPO (PCT)
Prior art keywords
sound
event
sound pressure
discomfort threshold
unit
Prior art date
Application number
PCT/JP2012/004245
Other languages
English (en)
French (fr)
Inventor
幸治 森川
信夫 足立
加藤 弓子
小澤 順
Original Assignee
パナソニック株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニック株式会社 filed Critical パナソニック株式会社
Priority to JP2012553114A priority Critical patent/JP5215508B1/ja
Priority to CN201280002600.0A priority patent/CN103081515B/zh
Publication of WO2013001836A1 publication Critical patent/WO2013001836A1/ja
Priority to US13/909,421 priority patent/US9241226B2/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/70Adaptation of deaf aid to hearing loss, e.g. initial electronic fitting
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/12Audiometering
    • A61B5/121Audiometering evaluating hearing capacity
    • A61B5/125Audiometering evaluating hearing capacity objective methods
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/369Electroencephalography [EEG]
    • A61B5/377Electroencephalography [EEG] using evoked responses
    • A61B5/38Acoustic or auditory stimuli
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6802Sensor mounted on worn items
    • A61B5/6803Head-worn items, e.g. helmets, masks, headphones or goggles
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6813Specially adapted to be attached to a specific body part
    • A61B5/6814Head
    • A61B5/6815Ear
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R23/00Transducers other than those covered by groups H04R9/00 - H04R21/00
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/30Monitoring or testing of hearing aids, e.g. functioning, settings, battery power
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R9/00Transducers of moving-coil, moving-strip, or moving-wire type

Definitions

  • This application relates to a technique for evaluating whether or not a speech sound has been comfortably heard. More specifically, in the present application, in a hearing aid or the like, an unpleasant threshold for a pure tone or a speech sound for “fitting” for obtaining a sound of an appropriate magnitude for an individual user by adjusting an amplification amount for each frequency of an external sound.
  • the present invention relates to an estimation apparatus, method, program, and the like.
  • the hearing aid amplifies the amplitude of the sound signal of this specific frequency. This makes it easier for the user to hear the sound.
  • Hearing aids are required to change the amount of sound amplification according to the degree of hearing loss for each user. Therefore, before starting to use the hearing aid, it is necessary to perform “fitting” to adjust the amount of sound amplification in accordance with the hearing ability of each user.
  • the purpose of fitting is to set the sound pressure output by the hearing aid to MCL (most comfortable level).
  • the sound pressure output by the hearing aid is atmospheric pressure fluctuation that can be perceived by humans as sound.
  • MCL is a sound pressure that can be heard comfortably by the user.
  • Hearing aids are required to MCL the output sound pressure for each sound frequency.
  • the sound pressure amplification amount is insufficient, or (2) the sound pressure amplification amount is too large.
  • the amplification amount of the sound pressure is insufficient, the user cannot recognize the voice. In this case, the purpose of using the above-mentioned hearing aid cannot be achieved.
  • the hearing aid may present a voice having a sound pressure higher than necessary to the user. As a result, there is a risk of hurting the user's ear due to the sound having a high sound pressure.
  • ⁇ ⁇ Fitting has two procedures when roughly divided.
  • the first procedure of fitting is audiogram measurement.
  • the “audiogram” is a result of measuring a threshold (HTL) that is the minimum sound pressure of a pure tone that can be heard by the user.
  • the audiogram is, for example, a diagram in which threshold values (decibel values) are plotted for each frequency (for example, 250 Hz, 500 Hz, 1000 Hz, 2000 Hz, and 4000 Hz).
  • the second procedure of fitting is the determination of the amount of sound pressure amplification.
  • the amplification amount is determined for each frequency and for each sound pressure of the input sound, using a function called a fitting theory for estimating the amplification amount of the sound.
  • fitting theory There are several types of fitting theory.
  • the half gain method which is an example of fitting theory, makes the insertion gain of each frequency half of the threshold value of that frequency.
  • the Berger method slightly enhances the amplification from 1000 Hz to 4000 Hz in consideration of the frequency band and level of conversational speech.
  • the POGO method is based on the half gain method and reduces the gains of 250 Hz and 500 Hz, which have a small amount of speech information and a small noise component, by 10 dB and 5 dB, respectively.
  • the NAL-R method amplifies the long term acoustic analysis frequency of words to a comfortable level.
  • the fitting theory includes a method of determining the amount of amplification of sound pressure by utilizing information of threshold value, UCL (uncomfortable level) which is a large sound pressure level that the user feels uncomfortable, and MCL. In that case, measurement or estimation of UCL and MCL is required before determining the amount of sound pressure amplification. In order to avoid the problem (2), it is necessary to measure UCL and set the amplification amount within a range not exceeding UCL.
  • UCL is measured for each frequency in the same way as audiogram measurement.
  • UCL was measured using subjective reports. “Subjective reporting” means that after a user hears a sound, the user reports a subjective impression of the sound. For example, using an audiometer, whether continuous sound or intermittent sound is presented to the user using the ascending method (increase the sound pressure level), and whether the sound pressure is too loud to be heard for a long time. To the user. The sound pressure reported that the user cannot listen for a long time is defined as UCL (Non-Patent Document 1).
  • Non-Patent Document 2 estimates UCL using the relationship between the latency of a V wave included in a brainstem reaction called ABR (auditory brainstem response) and the stimulation intensity. As the sound pressure increases, the latency of the V wave is shortened. When the shortening of the latency of the V wave reaches a peak, the sound pressure of the sound that the user was listening to is specified. A sound pressure obtained by adding a constant (for example, 15 or 10) to the specified sound pressure is defined as UCL.
  • ABR auditory brainstem response
  • MCL most comfortable level
  • Non-Patent Document 1 and Non-Patent Document 2 both present the user with an unpleasant level of sound pressure sound stimulation and then the user becomes uncomfortable. A method of determining whether or not it was UCL was taken. For this reason, when performing hearing evaluation, a strong sound was presented to the user, and there was a problem that the user actually needed to be uncomfortable. This is because the conventional method employs an approach for examining the discomfort threshold depending on whether or not the user is in an uncomfortable state.
  • One non-limiting exemplary embodiment of the present application provides a technique for estimating a user's UCL without letting the user hear a loud sound that feels uncomfortable.
  • a discomfort threshold value estimation system presents a user with a first sound having a sound pressure included in a predetermined sound pressure range, and presents the first sound. After a first predetermined time, an output unit that presents the user with a second sound having the same sound pressure as the first sound, a biological signal measurement unit that measures the user's brain wave signal, and presentation of the second sound
  • An extraction unit that extracts an event-related potential feature quantity of the electroencephalogram signal from an electroencephalogram signal measured from the time until a second predetermined time later, and a predetermined relationship between the event-related potential feature quantity and an unpleasant threshold
  • an estimation unit that estimates a discomfort threshold value corresponding to the extracted feature quantity of the event-related potential.
  • the discomfort threshold value estimation system it is possible to estimate the UCL necessary for adjustment of the hearing aid without listening to a loud sound that the user feels uncomfortable, thereby reducing the burden on the user in adjusting the hearing aid. it can.
  • (A) is a figure which shows the electrode position of an international 10-20 method (10-20 System)
  • (b) is a figure which shows the electrode arrangement
  • (A) is a figure which shows three types of total addition average waveforms obtained based on the event related potential after the 1st sound presentation, (b) is obtained based on the event related potential after the 2nd sound presentation. It is a figure which shows three types of total addition average waveforms.
  • (b) is a figure which shows the results 21 and 22 which plotted the change of the feature-value with respect to each presented sound pressure.
  • FIG. 1 is a block diagram illustrating a configuration of a discomfort threshold estimation system 100 according to an exemplary embodiment. An example of a specific embodiment of the discomfort threshold value estimation system 100 is shown.
  • 2 is a diagram illustrating a hardware configuration of a discomfort threshold estimation system 100 according to an exemplary embodiment.
  • FIG. It is a flowchart which shows the outline
  • FIG. It is a figure which shows the data expression example of a presentation sound list. It is a flowchart of the process of the feature-value extraction part 6.
  • FIG. 1 is a block diagram illustrating a configuration of a discomfort threshold estimation system 100 according to an exemplary embodiment. An example of a specific embodiment of the discomfort threshold value estimation system 100 is shown.
  • 2 is a diagram illustrating a hardware configuration of a discomfort threshold estimation system 100 according to an exemplary embodiment.
  • FIG. It is a flow
  • FIG. It is a schematic diagram which shows the image of the extraction process of the feature-value of an event related electric potential. It is a flowchart of the process of the discomfort threshold value estimation part 8.
  • FIG. It is a figure which shows the output format example of a discomfort threshold value. It is a figure which shows an example of the data structure of reference
  • the conventional techniques for estimating UCL using the electroencephalogram so far have not allowed the user to hear a loud sound that makes the user feel uncomfortable.
  • the present inventors have made the present invention in order to solve the problem.
  • the discomfort threshold value estimation system which is one aspect of the present invention presents a user with a first sound having a sound pressure included in a predetermined sound pressure range, and after the first predetermined time from the time when the first sound is presented, An output unit that presents the user with a second sound having the same sound pressure as the first sound, a biological signal measurement unit that measures the user's electroencephalogram signal, and a second predetermined time after the presentation time of the second sound From the electroencephalogram signal measured in the above, with reference to the extraction unit for extracting the event-related potential feature amount of the electroencephalogram signal and the predetermined relationship between the event-related potential feature amount and the discomfort threshold, And an estimation unit for estimating a discomfort threshold value corresponding to the feature amount of the event-related potential.
  • the discomfort threshold value estimation system determines the predetermined sound pressure range according to a predetermined criterion, and is presented from the output unit at a sound pressure equal to or lower than an upper limit of the sound pressure range.
  • a presentation sound control unit for controlling the first sound and the second sound is further provided.
  • the output unit outputs the first sound and the second sound at a predetermined frequency and sound pressure based on the control of the presentation sound control unit.
  • the output unit based on the control of the presentation sound control unit, presents a word sound having a predetermined sound pressure range as the first sound and the second sound.
  • the output unit presents the second sound after 100 milliseconds or more have elapsed since the time when the first sound was presented.
  • the output unit when the first sound and the second sound are a set of sound stimuli, the output unit outputs at least two sets of sound stimuli, and the presenting sound control unit outputs a sound for each sound stimulus. Change the pressure.
  • the output unit outputs the first set of sound stimuli and the second set of sound stimuli
  • the presented sound control unit Presents the first set of sound stimuli and then controls the sound stimuli to present the second set of sound stimuli within a range of 1000 ms ⁇ 200 ms.
  • the extraction unit performs wavelet transform on the electroencephalogram signal measured up to the second predetermined time after the presentation time of the second sound as a starting point, thereby obtaining a wavelet coefficient related to time and frequency. Extract as a quantity.
  • the estimation unit estimates a discomfort threshold corresponding to the wavelet coefficient obtained as the feature amount with reference to a reference database that defines a relationship between a wavelet coefficient and a discomfort threshold.
  • the second predetermined time is a time during which the N1 component and the P2 component of the event-related potential caused by the second sound can be observed
  • the extraction unit is configured to determine a peak potential of the N1 component and The N1P2 amplitude, which is the absolute value of the difference from the peak potential of the P2 component, is extracted as the feature amount.
  • the estimation unit estimates a discomfort threshold corresponding to the N1P2 amplitude obtained as the feature amount with reference to a reference database that defines a relationship between the N1P2 amplitude and the discomfort threshold.
  • a hearing aid adjustment system receives a hearing aid, a discomfort threshold estimation system according to any one of the embodiments described above, and the discomfort threshold estimated using the discomfort threshold estimation system, A setting unit that sets the discomfort threshold as a maximum output value in the hearing aid.
  • a discomfort threshold value estimation processing circuit is a discomfort threshold value estimation processing circuit that receives a user's brain wave signal measured by a biological signal measurement unit and presents a sound stimulus to an output unit.
  • the first sound having the sound pressure included in the predetermined sound pressure range is presented to the part, and the second sound having the sound pressure is presented after the first predetermined time from the time when the first sound is presented.
  • a presentation sound control unit an extraction unit that extracts a feature quantity of an event-related potential of the electroencephalogram signal from an electroencephalogram signal measured from the presentation time of the second sound to a second predetermined time later, and a predetermined amount
  • An estimation unit that estimates a discomfort threshold value corresponding to the extracted feature value of the event-related potential with reference to a relationship between the feature value of the event-related potential and the discomfort threshold value.
  • the discomfort threshold value estimation method which is still another aspect of the present invention, presents a first sound having a sound pressure included in a predetermined sound pressure range to a user, and a first predetermined time from the time when the first sound is presented. Later, a step of presenting the user with a second sound having the same sound pressure as the first sound, a step of measuring a brain wave signal of the user, and a second predetermined time after the presentation time of the second sound Extracting the event from the measured electroencephalogram signal with reference to the step of extracting the event-related potential feature quantity of the electroencephalogram signal and a predetermined relation between the event-related potential feature quantity and the discomfort threshold Estimating a discomfort threshold value corresponding to a feature quantity of the related potential.
  • a computer program is a computer program executed by a computer provided in the discomfort threshold value estimation processing circuit of the discomfort threshold value estimation system, and the computer program outputs to the computer
  • the first sound having a sound pressure included in the predetermined sound pressure range is presented to the user via the unit, and after the first predetermined time from the time when the first sound is presented, the same sound pressure as the first sound is provided.
  • Presenting the second sound to the user obtaining the user's electroencephalogram signal, and from the electroencephalogram signal measured from the second sound presentation time to a second predetermined time later,
  • the event extracted by referring to the step of extracting the feature quantity of the event-related potential and a predetermined relationship between the feature quantity of the event-related potential and the unpleasant threshold value. And a step of estimating a discomfort threshold value corresponding to the feature quantity of the continuous potential.
  • the discomfort threshold value estimation system which is still another aspect of the present invention, includes a sound pressure range determination unit that determines a sound pressure range to be presented to a user, and the sound pressure and frequency determined by the sound pressure range determination unit are the same.
  • a first sound presenting section and a second sound presenting section for presenting two sounds at predetermined time intervals; a sound stimulus output section for outputting sounds of the first sound presenting section and the second sound presenting section; and the user
  • An event-related potential is obtained from the sound signal output timing of the second sound presenting unit as a starting point from the brain wave measured by the biological signal measuring unit, and the event-related potential is presented as the second sound
  • Event-related potential acquisition accumulating unit that accumulates together with sound pressure, frequency, and examination ear attributes, a reference database that holds a reference for estimating a discomfort threshold from a feature quantity of the event-related potential, and the event-related
  • the data stored in the potential acquisition storage unit It was treated according to the criteria held by the serial reference DB, and a
  • the reference held in the reference database is a reference for a value of an unpleasant threshold value for an event-related potential for sound stimulation of the second sound presenting unit.
  • the reference stored in the reference database is an amplitude amount based on the N1 component and the P2 component with respect to the sound stimulus of the second sound presenting unit, and the larger the amplitude amount, the larger the discomfort threshold value. It is a criterion to be judged.
  • the reference database uses a wavelet coefficient as the feature quantity of the second sound, and determines that the UCL is larger as the coefficient is larger.
  • the sound pressure range determination unit sets the presented sound pressure to 80 dB, 85 dB, and 90 dB regardless of the user.
  • the sound pressure range determination unit sets a predetermined value lower than the UCL value estimated by the fitting theory from the user's minimum audible threshold.
  • the sound pressure range determined by the sound pressure range determination unit is a sound pressure range that is greater than the sound pressure of the user's minimum audible threshold and smaller than the user's assumed discomfort threshold. is there.
  • the upper limit value of the sound pressure determined by the sound pressure range determination unit is a discomfort threshold estimated from the minimum audible threshold of the user.
  • the event-related potential acquisition storage unit acquires an event-related potential at the sound stimulus output timing of the first sound presenting unit in addition to the sound stimulus output timing of the second sound presenting unit, and presents each sound stimulus. Accumulate along with sound pressure and frequency at the time and attributes at the time of inspection.
  • the discomfort threshold value estimation method which is still another aspect of the present invention includes a sound pressure range determination step for determining a sound pressure range to be presented to a user, and the sound pressure and frequency determined by the sound pressure range determination unit 2.
  • a first sound presenting step and a second sound presenting step for presenting the same two sounds at predetermined time intervals, a sound stimulus output step for outputting the sound of the sound presenting step, and a biological signal measuring step for measuring a user's brain wave
  • An event-related potential is obtained from the brain wave measured in the biological signal measurement step as a starting point of the sound stimulus output timing of the second sound presenting step, and the event-related potential is determined as a sound pressure, a frequency, and a test ear when the second sound is presented.
  • An event-related potential acquisition and storage step that accumulates together with the attributes of the event, a reference database that holds a reference for estimating a discomfort threshold from a feature quantity of the event-related potential,
  • the data accumulated in the step include, treated according to the criteria held by said reference database, and a discomfort threshold estimation step of estimating a greater discomfort threshold than the sound pressure range determined by the sound pressure range determination unit.
  • a computer program is a computer program executed by a computer provided in the discomfort threshold value estimation system, and the computer program is for a computer implemented in the discomfort threshold value estimation system.
  • a sound pressure range determining step for determining a sound pressure range to be presented to the user, and a first sound for presenting two sounds having the same sound pressure and frequency determined by the sound pressure range determining unit 2 at predetermined time intervals From the presenting step, the second sound presenting step, the sound stimulus output step for outputting the sound of the sound presenting step, the biological signal measuring step for measuring the user's brain wave, and the brain wave measured in the biological signal measuring step
  • the event-related potential is acquired from the sound stimulus output timing of the sound-presenting step, and the event-related potential is presented as the second sound.
  • An event-related potential acquisition and storage step that accumulates together with the sound pressure, frequency, and examination ear attributes of the test data, and the data stored in the event-related potential acquisition and storage step is used to estimate a discomfort threshold from the feature amount of the event-related potential
  • a discomfort threshold value estimating step for performing a process according to the reference stored in the reference database for storing a reference for estimating a discomfort threshold value larger than the sound pressure range determined by the sound pressure range determination unit.
  • Event-related potential is a change in the potential of an electroencephalogram (EEG) generated in response to a stimulus.
  • Solid stimulation is stimulation by sound presented to the user.
  • N1 component is a potential of a negative component contained in an electroencephalogram up to about 100 ms starting from the time when the sound stimulus is presented. The N1 component is included in the event-related potential.
  • P2 component is a potential of a positive component included in an electroencephalogram after about 200 ms from the time when a sound stimulus was presented. The P2 component is included in the event-related potential.
  • the “latency” is the time until the peak potential of the positive component or negative component appears from the time when the sound stimulus is presented.
  • “Negative component” generally means a potential lower than 0 ⁇ V.
  • “Positive component” generally refers to a potential greater than 0 ⁇ V. However, when there is an object whose potentials are to be compared, a potential having a more negative value is also referred to as a negative component. In addition, when there is an object whose potentials are to be compared, a potential having a more positive value is also referred to as a positive component.
  • Uncomfortable loudness level is a sound pressure that is so high that the user feels uncomfortable.
  • the minimum audible level is the sound pressure of the smallest sound that the user can hear.
  • “Pure tone” is a sound represented by a sine wave that repeats periodic vibration at a single frequency.
  • the discomfort threshold value estimation system can estimate the discomfort threshold value by presenting a presentation sound having a sound pressure of a level that does not make the user feel uncomfortable.
  • the experiment conducted by the inventors of the present application and the result of the experiment will be described.
  • the characteristics of the electroencephalogram-induced reaction that enables the UCL estimation found by the inventors of the present application from the experimental data will be described.
  • the other is an electroencephalogram measurement experiment that measures the response to sound stimulation.
  • a pure tone having the same frequency and the same sound pressure was presented twice at a predetermined interval.
  • the sound stimulation by the pure tone presented twice is also referred to as “pair stimulation”.
  • the event-related potential for this sound stimulus presentation was acquired and used as the data for the UCL value estimation experiment.
  • the inventors of the present invention who considered the experimental results also showed brain wave components (event-related potentials) for the first sound and the second sound even when presenting a pair stimulus having a sound pressure lower than the sound pressure generally evaluated as UCL.
  • the classifier that can estimate the UCL value from the feature quantity of According to this method UCL estimation can be performed in a short time and with high accuracy without presenting a loud sound that makes the user feel uncomfortable.
  • Non-Patent Document 1 a continuous sound was presented by an ascending method using an audiometer, and the sound pressure that was too noisy and uncomfortable was reported, and the sound pressure was defined as UCL.
  • the sound pressure at the start of the experiment was randomly determined from 60, 65, and 70 dB.
  • the sound pressure of the continuous sound was increased by 5 dB. Sound pressures that were too noisy and uncomfortable were reported by raising hands. Immediately after the participants raised their hands, they stopped presenting the sound and recorded the sound pressure.
  • Fig. 1 shows the UCL evaluation results measured by subjective reports.
  • the average value was 91.2 dB.
  • the average value was 94.0 dB.
  • the total average value including the results before and after the electroencephalogram experiment was 92.6 dB.
  • the average value varies and the report value fluctuates even if the same evaluation is repeated. As shown in FIG. 1, the fluctuation amount before and after the experiment is 3.75 ⁇ 3.89 dB, and it can be seen that the UCL evaluation by the subjective report varies to some extent.
  • Electroencephalogram measurement experiment In the electroencephalogram measurement experiment, paired stimuli were presented at multiple sound pressures that were assumed to contain large sound pressures including UCL, and the characteristic changes in event-related potentials for the first and second sounds were examined. It was. Hereinafter, with reference to FIG. 2 to FIG. 6, experimental settings and experimental results of an electroencephalogram measurement experiment will be described.
  • Fig. 2 shows the outline of the procedure for an electroencephalogram measurement experiment.
  • the horizontal axis in FIG. 2 represents time.
  • the sound stimulus was a tone burst sound with a duration of 50 ms.
  • the rise (rise) and fall (fall) of the sound was 3 ms.
  • five types of sound stimuli 80, 85, 90, 95, 100 dB) were prepared for each of three frequencies (1000, 2000, 4000 Hz). Headphones were used to present sound stimuli.
  • the headphones had two speakers applied to each of the two ears, but the sound stimulus was presented one ear instead of both ears.
  • the 1st sound and the 2nd sound which are the same sound stimulation were shown to the ear of the same side of each experiment participant at predetermined intervals.
  • the interval (inter-pair interval) between the first sound and the second sound in one pair stimulus was fixed at 300 ms.
  • the interval between the first sound of a certain pair stimulus and the first sound of the next pair stimulus (inter-stimulus interval) was randomly determined in the range of 1000 ⁇ 200 ms.
  • 750 pair stimulations were made into one block, and two blocks were carried out.
  • the sound stimulus presented as a pair stimulus was determined under the following constraints.
  • a sound stimulus having the same frequency as that of the immediately preceding pair stimulus is not selected.
  • Ears presenting paired stimuli are random on the left and right. However, pair stimulation to either the left or right ear should not be continued more than 4 times.
  • Electroencephalogram was recorded on the scalp based on the nose from Fz, Cz, Pz (international 10-20 method), right eye right, lower right eye, and left and right mastoids.
  • a “mastoid” is the mastoid process of the skull below the base of the back of the ear.
  • FIG. 3 (a) shows the electrode positions of the international 10-20 method (10-20 System).
  • FIG. 3B shows an electrode arrangement in which electrodes are mounted in this experiment. (1) is Fz, (2) is Cz, (3) is Pz, (4) is the left mastoid, (5) is the right mastoid, (6) is the lower right eye, and (7) is the right eye right position.
  • the sampling frequency was 1000 Hz
  • the time constant was 1 second
  • a 30 Hz analog low-pass filter was applied.
  • a 5-20 Hz digital bandpass filter was applied off-line and rescaled to both mastoid coupling standards.
  • waveforms from ⁇ 100 ms to 400 ms were cut out from the time when the first sound and the second sound were presented.
  • ⁇ 100 ms refers to a time point 100 milliseconds before the time when the sound stimulus is presented.
  • FIG. 4A (a) shows three types of total addition average waveforms obtained based on the event-related potential after the first sound presentation.
  • a broken line, a thin solid line, and a thick solid line show the total average waveform of event-related potentials obtained by presenting sound stimuli of 90, 95, and 100 dB, respectively, as examples of the obtained electroencephalogram waveform.
  • FIG. 4A (b) shows three types of total addition average waveforms obtained based on the event-related potential after the second sound presentation.
  • N1 component negative peak
  • the waveform is different between the first sound and the second sound. Can be seen.
  • Each event-related potential is baseline-corrected so that the average potential in the interval from -100 ms to 0 ms is 0 ⁇ V from the presentation timing, and changes from stimulus presentation of each event-related potential can be compared. ing. Since the second sound is presented 300 ms after the start of presentation of the first sound, the event-related potential of the first sound and the event-related potential of the second sound that are acquired partially overlap. However, the waveforms around 300 ms in FIG. 4A (a) and around 0 ms in (b) do not completely match. The reason is that when the event-related potential of the second sound is generated, the baseline correction is performed based on the presentation timing of the second sound. Therefore, it can be considered that each event-related potential includes different information.
  • the inventors of the present application decided to extract features that can be used for estimation of an unpleasant threshold as feature amounts of event-related potentials. More specifically, this feature amount is extracted as a feature amount related to the time change of the frequency of the event-related potential.
  • Wavelet analysis was used as a means for the extraction. This is because the wavelet analysis makes it possible to use not only time information but also specific frequency information in the analysis target time interval.
  • the object to be analyzed is the event-related potential in the section of 10 ms around the time zone where the peak of the N1 component is seen with respect to time, and the output value of 5 Hz to 15 Hz that is expected to include a response to sound in the frequency band. Averaged.
  • FIGS. 4B (a) and 4 (b) show results 21 and 22 in which changes in feature quantities with respect to each presented sound pressure are plotted.
  • the analysis was performed by determining the wavelet coefficient for the response to the first sound and the response to the second sound.
  • FIG. 4B (a) is a graph showing the waveform change of the event-related potential for each sound pressure after the first sound presentation, indicated by the wavelet coefficient.
  • FIG. 4B (b) is a graph showing the waveform change of the event-related potential for each sound pressure after the second sound presentation, indicated by the wavelet coefficient.
  • the horizontal axis of each graph represents a case where a louder sound is presented as it goes to the right with the presented sound pressure, and the vertical axis represents each feature amount (wavelet coefficient value).
  • Each line has 3 lines. This is obtained by dividing the subjects into three groups according to the UCL value according to the subjective report and averaging the feature values of each group. The average of a subject group of UCL 100 dB or more, a subject group of UCL 90 dB units, and a subject group of UCL 90 dB or less is plotted.
  • the inventors of the present application obtained the following points of interest from the data of FIG. 4B.
  • the response to the first sound is that the feature value increases as the presented sound pressure increases.
  • the graph 21 shows that every subject group rises upward and the response to the first sound includes many reactions related to the loudness.
  • the inventors of the present application verified whether the same tendency as the wavelet coefficient described above exists using the N1P2 amplitude.
  • the N1P2 amplitude indicates the absolute value of the difference between the peak potential of the N1 component and the peak potential of the P2 component (unit: ⁇ V). Specifically, the N1P2 amplitude can be obtained as the sum of the absolute value of the peak potential (negative) of N1 and the peak potential (positive) of P2. As a result of obtaining the N1P2 amplitude, the inventors of the present application confirmed the same tendency with respect to the N1P2 amplitude.
  • the change in the feature amount with respect to the change in the sound pressure is not so clear.
  • the magnitude relationship between the feature quantities of the subject groups is relatively clear. For example, in the subject group having the largest UCL value in the subjective report (100 dB or more), the feature amount appears the largest. In the subject group with the smallest UCL value in the subjective report, the feature amount appears smallest. In a subject group with a moderate UCL value in the subjective report (90 dB level), the feature amount appears moderate.
  • the sound stimulation of the second sound is given 300 ms after the presentation of the first sound. Therefore, it can be said that the reaction of the brain derived from the stimulation of the first sound is not sufficiently completed at the time when the sound stimulation of the second sound is given. As a result, it is considered that the reaction caused by the sound stimulation of the second sound is different from the reaction caused by the sound stimulation of the first sound.
  • the reaction caused by the sound stimulation of the first sound is a reaction derived from the loudness of the sound.
  • the waveform is increasing in proportion to the volume of sound as a whole tendency (see the white arrow in FIG. 4B (a)).
  • the reaction caused by the sound stimulation of the second sound does not reflect the loudness.
  • the waveform does not increase in proportion to the volume of the sound as a whole (see the white arrow in FIG. 4B (b)).
  • a signal correlated with UCL is included even when the sound is not loud.
  • the response to the second sound is not a direct response to the loudness of the sound but is related to the strength of the response to the loudness. Therefore, it can be concluded that there is a correlation between the UCL value of the subjective report and the value of the event-related potential corresponding to the response to the second sound.
  • the latency and N1P2 amplitude of the N1 component for pure tone auditory stimuli vary with the intensity and rise time of the sound stimuli (Suzuki et al., 1985, Auditory brainstem reaction-basic and clinical-, Medical View, p. 384-385).
  • the latency of the N1 component is shortened and the N1P2 amplitude is increased as the intensity of the stimulation sound is increased.
  • the sound pressure exceeds a predetermined level
  • the latency of the N1 component is shortened and the N1P2 amplitude is increased.
  • FIG. 4B (a) shows a behavior different from that of the first sound.
  • FIG. 5 is a graph of the UCL estimation result.
  • the horizontal axis indicates in which sound pressure range the event-related potential for the sound stimulus presentation is used to determine the wavelet coefficient. The leftmost is the event-related potential of 80 dB only, the next is the event-related potential of 80 dB and 85 dB, and then the information to be used in sequence is increased, and the rightmost is the event-related potential for all sound pressures of 80 to 100 dB. This is the result when wavelet coefficients are obtained.
  • the vertical axis indicates the degree of coincidence (average of errors) between the UCL estimation result by analysis and the subjective report value. For example, when the subjective report value is 90 dB and the estimated value is 85 dB or 95 dB, the error is calculated as 5 dB.
  • FIG. 5 is a plot of the average estimation error at each frequency for each subject calculated using this concept.
  • FIG. 5 shows two lines.
  • the upper line is a line (S1) obtained using the wavelet coefficient of the event-related potential for the first sound.
  • the lower line is a line (S2) obtained using the wavelet coefficient of the event-related potential for the second sound.
  • the vertical axis in FIG. 5 indicates an error between the UCL value of the subjective report and the estimated UCL value, and the smaller the value, the higher the estimation accuracy. Therefore, it can be said that it is preferable to use the event-related potential for the second sound corresponding to the lower line because the estimation error becomes smaller.
  • the estimation error is reduced by 2 dB, which is closer to the subjective report and can be estimated with high accuracy.
  • UCL was estimated using a discriminant analysis technique.
  • a classifier was configured using a set of event-related potentials and subjective report UCL values of subjects other than the evaluation target as learning data, and UCL estimation of the evaluation target was performed using the configured classifier. .
  • FIG. 5 shows that the error is smaller when the wavelet coefficient for the second sound is used.
  • FIG. 1 also shows that the variation in the subjective report UCL value before and after the experiment is 3.75 ⁇ 3.89 dB.
  • Some UCL estimated using the wavelet coefficient for the second sound has a smaller variation than the subjective report UCL value.
  • the present sound pressure is 80 dB, 85 dB, 90 dB, or more data amount.
  • FIG. 6 shows a comparison result of estimation errors.
  • the horizontal axis shows the data used for estimation.
  • the vertical axis indicates the estimation error in dB from the subjective UCL.
  • the inventors of the present application can estimate the UCL value based on the evoked response when two sounds (the first sound and the second sound) having the same frequency and the same sound pressure are presented. Obtained knowledge. Specifically, the electroencephalogram for the first sound mainly includes a component corresponding to the magnitude of the sound, whereas the electroencephalogram for the second sound includes a component corresponding to the UCL. . By analyzing the electroencephalogram (event-related potential) for the second sound, it was found that the UCL value can be estimated with sufficient accuracy.
  • FIG. 7 shows a configuration of the discomfort threshold estimation system 100.
  • the unpleasant threshold value estimation system 100 includes a sound pressure range determination unit 2, a presentation sound control unit 3, a sound stimulus output unit 4, a biological signal measurement unit 5, a feature amount extraction unit 6, and a reference database (DB) 7.
  • the discomfort threshold value estimation unit 8 is provided.
  • the user 1 is shown for reference.
  • the sound pressure range determination unit 2 determines the sound pressure range of the sound stimulus presented to the user 1.
  • the presenting sound control unit 3 controls the presenting sound according to the sound pressure range determined by the sound pressure range determining unit 2.
  • the presentation sound control unit 3 includes a first sound presentation unit 3a and a second sound presentation unit 3b.
  • the presenting sound control unit 3 controls the first sound presenting unit 3a and the second sound presenting unit 3b, and thereby according to the sound pressure range determined by the sound pressure range determining unit 2, the first sound and the second sound. Control the presentation of This sound pressure range is determined mainly to determine the upper limit of the sound pressure of the presentation sound.
  • the sound stimulus output unit 4 receives the sound signal controlled by the presentation sound control unit 3, and presents the sound stimulus to the user with the frequency and the sound pressure based on the sound signal.
  • the sound stimulus output unit 4 is a device that presents a sound stimulus, such as a headphone or a speaker.
  • the biological signal measurement unit 5 measures the brain wave of the user 1.
  • the biological signal measurement unit 5 includes an electroencephalograph including an electrode attached to the user 1.
  • the feature amount extraction unit 6 receives information on the timing at which the second sound is presented from the second sound presentation unit 3 b included in the presentation sound control unit 3, and obtains an event-related potential from the electroencephalogram acquired from the biological signal measurement unit 5. Acquire and accumulate.
  • An event-related potential is a change in electroencephalogram potential that occurs in response to a stimulus.
  • the event-related potential is determined by (1) the polarity of the potential (positive or negative), (2) the latency (time from the occurrence of the stimulus until the potential fluctuation occurs), (3) the amplitude of the potential, etc.
  • the type of related potential is different. Different types of signals each contain different information about the user 5.
  • the unpleasant threshold value estimation unit 8 refers to the standard for estimating the unpleasant threshold value stored in the standard DB 7 and estimates the unpleasant threshold value using the data accumulated in the feature amount extraction unit 6.
  • the configuration including the sound pressure range determination unit 2, the presentation sound control unit 3, the feature amount extraction unit 6, the reference DB 7, and the discomfort threshold estimation unit 8 can be realized as one signal processing circuit (electronic circuit).
  • a signal processing circuit is referred to as an unpleasant threshold value estimation processing circuit 9.
  • FIG. 8 shows an example of a specific embodiment of the discomfort threshold value estimation system 100.
  • the entire discomfort threshold value estimation system 100 is incorporated in a headphone type housing.
  • Such a discomfort threshold value estimation system 100 is used, for example, when the hearing ability including the discomfort threshold value is evaluated before the user 1 purchases a hearing aid.
  • the user 1 wears the discomfort threshold value estimation system 100 on the head of the user 1.
  • the discomfort threshold value estimation system 100 shown in FIG. 8 includes a sound stimulus output unit 4, a biological signal measurement unit 5, and a discomfort threshold value estimation processing circuit 9.
  • the biological signal measurement unit 5 is connected to at least two electroencephalogram measurement electrodes A and electroencephalogram measurement electrodes B by wire or wirelessly.
  • An electroencephalogram is a potential change on the head. Therefore, in order to measure an electroencephalogram, it is necessary to bring the electrodes A and B into contact with predetermined positions on the head. It is desirable that the shape of the electrode A and the electrode B has a shape that can be easily brought into contact with a predetermined position of the head.
  • the predetermined position of the head means a position suitable for hearing evaluation. The position is, for example, Cz, C3, C4, etc. at the top of the head when using the designation method of the international 10-20 electrode method (FIG. 3A).
  • the lead-out electrode for example, the electroencephalogram measurement electrode A
  • the electroencephalogram measurement electrode A the electroencephalogram measurement electrode A
  • the electrode position can change depending on the brain wave to be acquired.
  • the other electrode electroencephalogram measurement electrode B
  • the unpleasant threshold value estimation system 100 sequentially presents pair stimuli having the same frequency and the same sound pressure to the left ear or the right ear of the user 1, and measuring each of the user 1 measured from the presentation time of the second sound.
  • the discomfort threshold of the user 1 is estimated based on the criterion of the criterion DB 7 that stores the criterion for estimating the UCL.
  • the biological signal measuring unit 5 measures the brain wave of the user 1 corresponding to the potential difference between the electrode A and the electrode B.
  • the biological signal measuring unit 5 transmits information (an electroencephalogram signal) corresponding to the potential difference to the unpleasant threshold value estimation processing circuit 9.
  • the discomfort threshold value estimation processing circuit 9 shown in FIG. 8 is in the same housing as the sound stimulus output unit 4 and the biological signal measurement unit 5. However, the discomfort threshold value estimation processing circuit 9 may be provided in a separate housing. In that case, the electroencephalogram signal measured by the biological signal measuring unit 5 is transmitted to the discomfort threshold value estimation processing circuit 9 wirelessly or by wire.
  • FIG. 9 shows a hardware configuration of the discomfort threshold value estimation system 100 according to this embodiment.
  • the sound stimulus output unit 4, the biological signal measurement unit 5, and the unpleasant threshold value estimation processing circuit 9 are connected to each other via the bus 101 and can exchange data with each other.
  • the unpleasant threshold value estimation processing circuit 9 is realized as a processing circuit having a CPU 9a, a RAM 9b, a program 9c, and a ROM 9d.
  • the CPU 9a reads the program 9c stored in the ROM 9d from the ROM 9d and develops it in the RAM 9b.
  • the CPU 9a executes a computer program 9c stored in the RAM 9b.
  • the computer program 9c an instruction code for causing the CPU 9a to execute processing according to a procedure shown in a flowchart to be described later is described.
  • the CPU 9a functions as the unpleasant threshold value estimation processing circuit 9.
  • the unpleasant threshold value estimation processing circuit 9 performs an estimation of an unpleasant threshold value by using a reference DB 7 separately stored in the same RAM 9b or a recording medium (not shown). This process will be described later.
  • the sound stimulus output unit 4 includes a speaker 4a and a sound output circuit 4b.
  • the sound output circuit 4b outputs sound stimuli to be presented at a designated sound pressure through the speaker 4a in accordance with a command from the CPU 9a.
  • the biological signal measurement unit 5 includes an electrode 5a1, an electrode 5a2, and an electroencephalograph 5b.
  • the electroencephalograph 5 a is connected to electrodes 5 a 1 and 5 a 2, and these electrodes are mounted on the head of the user 1.
  • the measured electroencephalogram data is sent to the CPU 9a via the bus and stored in the RAM 9c in the form of event-related potentials.
  • the discomfort threshold value estimation processing circuit 9 may be realized as hardware such as a DSP in which a computer program is incorporated in one semiconductor circuit. Also, the audio output circuit 4b and the electroencephalograph 5b can be combined and realized on one integrated circuit.
  • the computer program 9c described above can be recorded on a recording medium such as a CD-ROM and distributed as a product to the market, or can be transmitted through an electric communication line such as the Internet.
  • a device for example, a PC
  • FIG. 9 can function as the discomfort threshold value estimation system 100 according to the present embodiment by reading the computer program 9c.
  • FIG. 10 shows an outline of the processing procedure of the discomfort threshold value estimation system 100 according to this embodiment. Steps that are insufficient in the description of only the outline will be described later based on a more detailed flowchart.
  • the sound pressure range determination unit 2 determines a sound pressure range to be presented to the user 1.
  • a range of the presenting sound pressure that does not burden the user 1 is determined.
  • the maximum value of the presenting sound pressure that is, the maximum value of the sound pressure range
  • 80 dB which is a general noise limit value.
  • the range that is considered safe may be determined according to the auditory threshold value (HTL) of the user 1 to be estimated for the unpleasant threshold value.
  • Conventional methods for estimating the UCL from the HTL include the NAL-R method and the MCL mirror method, and a value lower by 10 dB or 20 dB than the estimated UCL value may be used as the maximum value of the presented sound pressure.
  • the minimum value of the presenting sound pressure may be determined as a sound that is 10 dB smaller than the previously determined maximum value of the presenting sound pressure.
  • the maximum value of the presented sound pressure is determined to be 80 dB and the minimum value is determined to be 70 dB.
  • the types of the presenting sound pressure can be determined as three types of 70 dB, 75 dB, and 80 dB.
  • step S30 the presentation sound control unit 3 controls the sound stimulus to be presented to the user 1 within the sound pressure range determined by the sound pressure range determination unit 2.
  • the sound stimulus is presented with two sounds in succession at predetermined intervals.
  • two sound stimuli presented in succession are called pair stimuli.
  • the presented sound control unit 3 controls at least the frequency and sound pressure of the sound.
  • the presenting sound control unit 3 controls which ear of the user 1 the sound stimulus is presented, the interval between the first sound and the second sound in the pair stimulus, the interval between the two pairs, and the like. good.
  • the first sound and the second sound are regarded as having the same sound pressure even when the first sound and the second sound have different sound pressures that cannot be recognized by humans.
  • the interval from when the first sound of the pair stimulus is presented to when the second sound is presented is 300 ms as an example. This is because the interval between the first sound and the second sound of the pair stimulus clearly causes a response to the first sound and a response to the second sound.
  • the purpose is considered to be achieved. Therefore, for example, it may be 200 ms.
  • the N1 component may appear in a range of 100 ⁇ 50 ms after the first sound presentation
  • the second sound may be presented after 150 ms after the first sound presentation. Further, in consideration of individual differences, an error of about 100 ms may be allowed.
  • the discomfort threshold value estimation according to the above-described embodiment is performed.
  • the system 100 and the like can perform the above-described operation.
  • the interval between pairs may be arbitrarily set within 1 second (1000 ms) where it is considered that the intracerebral processing induced by the first sound is continuing.
  • the first sound that is the first sound of the pair stimulation is controlled by the first sound presenting unit 3a, and the second sound that is the next sound is controlled by the second sound presenting unit 3b.
  • the second sound presenting unit 3b outputs a trigger to the feature amount extracting unit 6 in accordance with the sound stimulus presenting time. Information about the left and right ears, frequency, and sound pressure of the presented sound stimulus is also transmitted to the feature amount extraction unit 6 together.
  • step S40 the sound stimulus output unit 4 presents the sound stimulus determined by the presentation sound control unit 3 to the user 1 at the timing determined by the presentation sound control unit 3.
  • step S50 the electroencephalogram measurement unit 5 measures the electroencephalogram and acquires electroencephalogram data.
  • the electroencephalogram measurement unit 5 may measure the electroencephalogram of the user 1 only during a period when electroencephalogram data is necessary, or may constantly measure the electroencephalogram.
  • step S60 the feature quantity extraction unit 6 cuts out the event-related potential waveform from the electroencephalogram waveform and accumulates the data. Thereby, the waveform data of the event-related potential starting from the timing of the sound stimulus presentation sent from the presentation sound control unit 3 is acquired.
  • the event-related potential acquisition interval can be assumed to be -100 milliseconds to 400 milliseconds from the point of time when the environmental sound is generated. -The interval from 100 ms to 0 ms is used for baseline correction, and 0 ms to 400 ms is used for evaluation as a change in event-related potential.
  • This acquisition interval varies depending on the electroencephalogram component to be evaluated. For example, when the N1 component using sound of around 100 milliseconds is viewed mainly, a section from -100 milliseconds to 300 milliseconds may be obtained, and when the latter period component is also used, from -100 milliseconds. An interval such as 600 milliseconds may be acquired.
  • step S61 the feature quantity extraction unit 6 accumulates the waveform data of the event-related potential extracted in step S60 in the existing waveform data held inside the feature quantity extraction unit 6. At this time, the feature quantity extraction unit 6 accumulates information related to the left and right ears of sound stimulation, the frequency, and the sound pressure sent from the presentation sound control unit 3 as related attributes. By accumulating the sound attributes and the electroencephalogram data in association with each other, it is possible to accumulate event-related potentials multiple times for each attribute. Since the electroencephalogram signal is weak and easily mixed with noise, it is necessary to accumulate waveforms multiple times under the same conditions.
  • step S62 the feature amount extraction unit 6 determines whether or not the sound stimulus is presented a sufficient number of times and the event-related potentials for each attribute are sufficiently accumulated. If it is determined that the presentation of the sound stimulus is complete, the process proceeds to step S80, and if not, the process returns to step S30.
  • the “sufficient number of times” is determined by whether or not the accuracy necessary for estimating the discomfort threshold can be ensured. For example, in the present embodiment, the accumulation of event-related potentials 20 times for each condition was set as the termination condition during the above-described experiment.
  • the number of times is determined by the quality of the electroencephalogram signal and the estimation method, and if it is a high quality electroencephalogram signal, the number of additions of 5 or 10 may be sufficient, or an electroencephalogram signal mixed with a lot of noise. If there are, it is assumed that 30 or more additions are required.
  • the discomfort threshold value estimation unit 8 estimates the discomfort threshold value of the user 1.
  • the discomfort threshold value estimation unit 8 calculates the discomfort threshold value of the user 1 from the event-related potential data accumulated in the feature amount extraction unit 6 based on the discomfort threshold value estimation criterion stored in the reference DB 7. Estimate how much.
  • the estimation of the unpleasant threshold is performed, for example, for the frequency of the presenting sound and for each of the left and right ears. When the unpleasant threshold is 100 dB, it means that the user 1 who has heard the sound of 100 dB feels uncomfortable at a sound pressure higher than that. Details of the criteria stored in the criteria DB 7 and the method for estimating the discomfort threshold will be described later.
  • Step S30 the presentation sound control unit 3 (step S30), the feature amount extraction unit 6 (steps S60, S61, and S62), and the unpleasant threshold value estimation unit 8 that are particularly related to the description of the exemplary embodiment.
  • Step S80 the unpleasant threshold value estimation unit 8 that are particularly related to the description of the exemplary embodiment.
  • FIG. 11 shows the details of the processing of the presentation sound control unit 3.
  • FIG. 12 shows a data representation example of the presentation sound list.
  • the presented sound control unit 3 sequentially presents the pair stimulus sounds for the sound pressure range determined by the sound pressure range determining unit 2.
  • the presentation sound control unit 3 reads information indicating the presentation sound state.
  • the “presentation sound state” is a state indicating whether the first sound is present or the second sound is present, and information indicating the state is held in the present sound control unit 3. Value. For example, if the presentation sound state is 0, the first sound is presented. If the presentation sound state is 1, the first sound is already presented and the second sound is presented.
  • step S32 the presentation sound control unit 3 determines whether or not to present the first sound based on the presentation sound state acquired in step S31. If YES in step S32, the process proceeds to step S33 to present the first sound, and if NO, the process proceeds to step S36 to present the second sound.
  • step S35 processing is performed by the first sound presenting unit 3a of the presenting sound control unit 3.
  • step S33 the first sound presenting unit 3a acquires a presenting sound list.
  • the presentation sound list is a record of how many sound stimuli have been presented with respect to the amount of sound stimulus required for evaluation.
  • FIG. 12 shows an example of the presentation sound list.
  • FIG. 12 is an example of a presentation sound list data when it is desired to estimate a discomfort threshold for sounds of frequencies 1000 Hz, 2000 Hz, and 4000 Hz for both ears.
  • the sound stimuli determined in the sound pressure range determination are 70, 75, 80, 85, and 90 dB
  • the number of sounds that have been presented so far is entered in each cell of the table.
  • the number of presentations of the sound stimulus is, for example, 10 times or 20 times, and is determined by the content of evaluation, the device used, the measurement environment, and the like.
  • the presenting sound list obtained at a timing after starting the evaluation For some conditions, the first sound stimulus has been presented (numerical value “1”), and for some conditions, the sound stimulus has never been presented (numerical value “0”). Yes. Each time the presentation of any sound stimulus is completed, the number of the presented cell is incremented by one, and for example, when it reaches 20 under all conditions, the process ends.
  • the first sound presenting unit 3a selects an attribute of the sound stimulus to be presented.
  • the sound stimulation attribute is the right or left of the examination ear
  • the frequency is 1000 Hz, 2000 Hz, or 4000 Hz
  • the presenting sound pressure is 70 dB, 75 dB, 80 dB, 85 dB, or 90 dB.
  • selecting an attribute a random selection is made from among the smallest values of the cells in the table of the presentation sound list. This is to prevent sound stimuli having the same attribute from being selected continuously.
  • step S35 the first sound presenting unit 3a sends the sound stimulus data generated according to the attribute selected in step S34 to the sound stimulus output unit 4.
  • the sound stimulus data is a simple stimulus such as a pure tone, it may be generated by calculation each time, or the sound stimulus data may be stored in the memory in advance and the data corresponding to the attribute may be acquired from the memory. .
  • Steps S36 to S38 are executed by the second sound presenting unit 3b.
  • step S36 the second sound presenting unit 3b sends the sound stimulus data generated according to the attribute selected in step S34 to the sound stimulus output unit 4.
  • the sound stimulus data may be generated by calculation each time, or the sound stimulus data may be stored in the memory in advance and data corresponding to the attribute may be acquired from the memory.
  • step S37 the second sound presenting unit 3b transmits the sound stimulus attribute to the feature amount extracting unit 6.
  • the “sound stimulation attribute” is information indicating at which timing the test target ear, the frequency of the sound stimulation, and the sound pressure were presented.
  • the event-related potential for the second sound is used for estimation of the discomfort threshold, information necessary for acquisition and accumulation of the event-related potential is transmitted.
  • step S38 the second sound presenting unit 3b updates the presenting sound list. As the presentation of the two sound stimuli is completed, the number of the corresponding cell in the presentation sound list is incremented by one.
  • step S39 the presentation sound control unit 3 updates the presentation sound state. If it is after the first sound presentation, the presentation sound state is updated from 0 to 1, and after the second sound presentation, it is updated from 1 to 0.
  • the presenting of the pair stimulus is realized by such processing of the presenting sound control unit 3.
  • As the presentation timing for example, a time interval as shown in FIG. 2 is applicable.
  • FIG. 13 shows a flowchart of the process of the feature quantity extraction unit 6, and FIG. 14 is a schematic diagram showing an image of the process for extracting the feature quantity of the event-related potential.
  • step S61 the feature amount extraction unit 6 acquires the electroencephalogram data measured by the biological signal measurement unit 5.
  • the electroencephalogram data at this time is in the state of a data string obtained continuously according to the sampling frequency.
  • step S62 the feature amount extraction unit 6 acquires information indicating the presentation timing of the second sound from the second sound presentation unit 3b.
  • the electroencephalogram response to the second sound is used for UCL estimation, information on the presentation timing is required.
  • step S63 the feature amount extraction unit 6 acquires an event-related potential for the second sound presentation. From the electroencephalogram data obtained in step S61, for example, a section from ⁇ 100 milliseconds to 400 milliseconds when the time obtained in step S62 is 0 millisecond is cut out and used as the event-related potential.
  • step S64 the feature quantity extraction unit 6 acquires the attribute of the sound stimulus presented as the second sound from the second sound presentation unit 3b.
  • the “sound stimulation attributes” include a test ear, a frequency, and a sound pressure. For each of these attributes, the electroencephalogram data is averaged and used for estimation processing of an unpleasant threshold.
  • step S65 the feature amount extraction unit 6 accumulates the event-related potential cutout results for each attribute acquired in step S64.
  • each attribute is stored in a storage device (not shown) inside the feature amount extraction unit 6.
  • the addition average waveform data may be stored. In this case, less storage capacity is required.
  • the sound stimulus 41 is presented as a pair stimulus 41a at an attribute such as the right ear, 1000 Hz, 75 dB, and the brain wave 42 is constantly measured in parallel therewith.
  • the event-related potential 43 is cut out in relation to the presentation timing of the second sound.
  • the event-related potential 43a is acquired for the paired stimulus 41a.
  • This and the corresponding sound stimulus attribute 44a are accumulated in the accumulation 45, and by repeating this, acquisition and accumulation of the event-related potential are advanced.
  • the event-related potential for the second sound presentation can be stored for each attribute.
  • step S80 of FIG. 10 the unpleasant threshold value estimation process shown in step S80 of FIG. 10 will be described in detail with reference to FIGS. This process is performed by the discomfort threshold value estimation unit 8.
  • the user's discomfort threshold is estimated.
  • FIG. 15 shows a flowchart of processing of the unpleasant threshold value estimation unit 8.
  • FIG. 16 shows an output format example of the discomfort threshold.
  • the discomfort threshold value estimation unit 8 determines an attribute of the discomfort threshold value to be estimated.
  • the “attribute” is a combination of the inspection ear 51 and the frequency 52. This is because, as shown in the example of FIG. 16, the discomfort threshold needs to be estimated individually for each of three types of frequencies for the left and right ears.
  • the estimation of the unpleasant threshold refers to the estimation of the unpleasant threshold 53 for each attribute.
  • step S82 the unpleasant threshold value estimation unit 8 acquires the event-related potential 43 accumulated corresponding to the attribute.
  • the attributes are each inspection ear 51 and frequency 52, and in this case, an event-related potential associated with each presented sound pressure is acquired.
  • the unpleasant threshold value estimation unit 8 calculates a feature amount related to a temporal change in the frequency of the event-related potential. For example, in the event-related potential for each sound pressure of 80 dB, 85 dB, and 90 dB, the feature amount is calculated by calculating the frequency intensity of each time zone by wavelet analysis or the like and combining these coefficients into a vector.
  • the unpleasant threshold value estimation unit 8 performs continuous wavelet transform on the event-related potential waveform in the range of 0 ms to 300 ms for each sound stimulus, and calculates the wavelet coefficient for each frequency for each time.
  • the mother wavelet, Mexican hat function ( ⁇ (t) (1 -t 2) exp (-t 2/2)) is available and the like.
  • the event-related potential waveforms and wavelet coefficients are averaged for each condition, for each individual, for each left and right ear, and for each sound stimulus group from the first sound to the fifth sound for each frequency.
  • a trial including an amplitude of 50 ⁇ V or more in absolute value in any electrode is excluded from the total average and the average because it is assumed to include the influence of noise caused by eye movements and blinks.
  • an average value of the frequency width of 5 Hz to 15 Hz of the addition average wavelet coefficient and the time width every 50 ms is calculated as a feature amount of the event-related potential that can be an index of unpleasant sound pressure, and this is used as the feature amount.
  • This feature amount is sometimes called a wavelet feature amount.
  • step S84 the discomfort threshold value estimation unit 8 obtains a discrimination criterion from the reference DB 7. Discrimination is performed using a method of classifying which UCL value is estimated based on a value obtained by weighted sum of each feature value, and is thus obtained in the form of a coefficient or the like for each feature value at that time. .
  • the discomfort threshold estimation unit 8 performs threshold determination based on the coefficient acquired in step S84, and estimates the discomfort threshold. Specifically, the discomfort threshold value estimation unit 8 performs discriminant analysis, Bayesian estimation, and clustering methods to calculate an estimated discomfort threshold value.
  • the format is estimated by sound pressure such that the discomfort threshold at 1000 Hz for the right ear is 80 dB, for example, as shown in FIG.
  • step S86 the discomfort threshold value estimation unit 8 stores the discomfort threshold value estimated in step S85.
  • the estimation result of the unpleasant threshold is calculated and stored as one value for the attribute selected in step S81 in the format shown in FIG.
  • step S87 the discomfort threshold value estimation unit 8 determines whether estimation of the discomfort threshold value has been completed for all attributes. If YES, the process ends. If NO, the process proceeds to step S81 to select the next attribute.
  • the discomfort threshold is estimated for all the attributes, and finally the result in the form as shown in FIG. 16 is obtained.
  • FIG. 17A shows an example of the data structure of the reference DB 7.
  • the wavelet coefficient for the second sound is used alone, the event-related potential wavelet coefficients for the sound pressures of the presenting sound pressures of 80 dB, 85 dB, and 90 dB are averaged.
  • An example of estimating the UCL from the magnitude of the value will be described.
  • FIG. 17A the relationship between the wavelet coefficient and the UCL estimated value for the second sound calculated from the data of the experiment conducted by the inventors of the present application (graph 22 in FIG. 4B (b)) is stored as a table. . Once the wavelet coefficients are calculated, this table can be referred to based on the wavelet coefficients to obtain the UCL estimation value. For example, if the obtained wavelet coefficient is 5.0, the unpleasant threshold value estimation unit 8 refers to the table and determines that the UCL estimated value is 90 dB.
  • the reference DB 7 is generated by acquiring data from a sufficient number of subjects in advance.
  • the number of subjects collected in advance is required to be at least 10 or more, and more subjects are required to obtain sufficient accuracy.
  • the graph of FIG. 4B (b) shows an outline of the correspondence between the electroencephalogram feature quantity and the subjective UCL value.
  • this discrimination criterion can be generated by reading the vertical axis of the graph 22 of FIG. 4B (b).
  • a machine learning method is used.
  • a threshold needs to be determined. For example, in discriminant analysis, Bayesian estimation, etc., calculation is performed after a coefficient is given to each feature quantity, so it is realized by a more complicated table and calculation method, but an appropriate threshold value is determined by calculation. Is possible.
  • the UCL value can be estimated only from the electroencephalogram data without acquiring the subjective UCL.
  • the wavelet feature quantity is used as the feature quantity regarding the time change of the frequency of the event-related potential.
  • the information for estimating the subjective UCL value is included, other feature amounts can be used.
  • the N1P2 amplitude described in the item (2-2. EEG measurement experiment) can be given. This is considered to reflect the amount of change in response to sound.
  • FIG. 17B is a diagram in which the experimental data performed by the present inventors is analyzed from another viewpoint and the values of the N1P2 feature values for the first sound and the second sound are plotted. This figure corresponds to FIG. 4B in the wavelet feature amount.
  • the subjects are divided into three groups (subjective UCL is 100 dB or more, subjective UCL is 90 dB, subjective UCL is 90 dB or less) according to the magnitude of the UCL value according to the subjective report. The average is plotted.
  • the magnitude relationship between the magnitude of the subjective UCL and the magnitude of the N1P2 amplitude is maintained, and the value of the subjective UCL is estimated by setting an appropriate threshold value. It turns out that it is possible.
  • FIG. 17C shows an example of the discrimination reference DB 7 when the N1P2 amplitude is used as a feature amount.
  • the N1P2 amplitude 56 for the second sound is used alone, and the N1P2 amplitude of the event-related potential for the sound pressures of the presenting sound pressures of 80 dB, 85 dB, and 90 dB is averaged, and finally obtained
  • the UCL value can be estimated from the average value of the amplitude change. For example, when the N1P2 amplitude for the second sound is 1.8, the UCL value can be output as 95 dB.
  • feature quantities other than wavelet coefficients and N1P2 amplitude may be used.
  • the characteristics of the event-related potential appear in the waveform shape, and can be described by the latency (elapsed time from the stimulus presentation timing) and amplitude when the peak appears. If these features are described in terms of time, frequency, or shape, they can be used as features for identification.
  • the wavelet coefficient is an example of information indicating a time change of the frequency of the event-related potential.
  • feature quantities are given as vectors and given to machine learning methods such as discriminant analysis and Bayesian estimation, each parameter is appropriately weighted, so there is no need to narrow down the feature quantities in advance.
  • the sound presented by the presentation sound control unit 3 is not limited to a pure sound, and may be a speech sound.
  • the evaluation is performed for each left and right ear.
  • the presenting sound control unit 3 may hold in advance the presented sound. In that case, the sound pressure range or the average sound pressure of the word sound can be adjusted in advance.
  • FIG. 17D shows an output format example of an unpleasant threshold when speech is used.
  • the relationship between the inspection ear 58 and the discomfort threshold 59 is defined.
  • the discomfort threshold 59 can be output for each of the left and right ears, the discomfort threshold can be used for gain adjustment (volume adjustment) of the entire left and right ears when fitting the hearing aid. For example, even when adjusting the volume of a television or music player or the like, if the discomfort threshold is different for each left and right, a more appropriate sound can be provided by correcting the gain for each left and right.
  • the UCL evaluation result is used as information for setting the maximum output value of the hearing aid when fitting the hearing aid.
  • FIG. 18 shows a configuration of the hearing aid adjustment system 110.
  • the hearing aid adjustment system 110 includes the discomfort threshold value estimation system 100 shown in FIG. 7, a characteristic setting unit 111, and a hearing aid 112.
  • the discomfort threshold value estimation system 100 is an example.
  • a hearing aid adjustment system may be configured using an unpleasant threshold estimation system 101 shown in FIG.
  • the characteristic setting unit 111 receives the discomfort threshold estimated from the discomfort threshold estimation system 100 and the minimum audible value HTL that is the minimum sound pressure of the pure tone that the user 1 can hear.
  • the frequency of the pure tone is, for example, 250 Hz, 500 Hz, 1000 Hz, 2000 Hz, or 4000 Hz.
  • the minimum audible value HTL is defined for each frequency.
  • the minimum audible value HTL is transmitted from a measuring device (audiometer; not shown) of the minimum audible value via a wired, wireless, or recording medium, for example. Then, the characteristic setting unit 111 sets the discomfort threshold as the maximum output value in the hearing aid 112 and sets the minimum audible value HTL as the minimum output value in the hearing aid 112.
  • FIG. 19 is a diagram showing individual differences in UCL based on subjective reports based on the MCL mirror method.
  • the horizontal axis is UCL estimated by the MCL mirror method. Since the target is a normal hearing person, there is little variation in HTL, and the estimated UCL value is almost the same.
  • the vertical axis represents the UCL value obtained by subjective reporting. As can be seen from FIG. 19, it can be seen that the conventional method cannot cope with individual differences in UCL.
  • the output range of the hearing aid can be set correctly based on the estimation result of the UCL, it is considered that the time required for fitting the hearing aid can be shortened as compared with the conventional case. Also, in the setting of the initial fitting value of the hearing aid, it is possible to set a more appropriate initial value than the conventional method.
  • FIG. 20 shows a configuration of the discomfort threshold value estimation system 101 according to a modification of the exemplary embodiment of the present invention.
  • the unpleasant threshold value estimation system 101 is configured by changing the configuration of the unpleasant threshold value estimation system 100 (FIG. 7).
  • the same configurations as those of the unpleasant threshold value estimation system 100 (FIG. 7) are denoted by the same reference numerals, and description thereof is omitted.
  • the unpleasant threshold value estimation system 101 is different from the unpleasant threshold value estimation system 100 in that the number of connections from the first sound presenting unit 3a to the feature amount extraction unit 6 is increased. Therefore, in the following, the detailed operation of the presentation sound control unit 3 and the feature amount extraction unit 6 will be mainly described.
  • FIG. 21 shows a flow of the presentation sound control unit 3 in this modification.
  • the same processing as in FIG. 11 is performed, and the same processing is denoted by the same reference numeral, and the description thereof is omitted.
  • the difference from FIG. 11 is that a new step S37a is added after the first sound presentation in step S35.
  • the sound stimulus attribute of the first sound is transmitted to the feature amount extraction unit 6.
  • the sound stimulus attribute is information indicating at which timing the examination ear, the frequency, and the sound pressure are presented.
  • the operation of the feature quantity extraction unit 6 is slightly different from that of the first embodiment.
  • the basic processing flow is the same as that shown in FIG. 13, and the new point is that the accumulation timing is not only after the second sound presentation but also after the first sound presentation.
  • FIG. 22 shows an example of estimation results using event-related potentials after presentation of sound stimuli of both the first sound and the second sound.
  • the inventors of this application extracted FIG. 22 by extracting an example of high accuracy from a combination of various feature amounts of event-related potentials after the presentation of the first sound and the second sound.
  • the presentation sound pressure uses three types of 80 dB, 85 dB, and 90 dB, and the feature amount includes both the ratio of the amplitude of the event-related potential N1P2 with respect to the first sound and the second sound, and the wavelet coefficient of the event-related potential with respect to the second sound.
  • UCL estimation is performed using In FIG.
  • the horizontal axis is the subjective report value
  • the vertical axis is the estimated value based on the electroencephalogram
  • the diameter of the plotted circle is proportional to the number of applicable cases.
  • This example is an example to show the improvement in accuracy, and there are various ways to calculate the feature values and how to combine them, and feature values and discrimination criteria that can further improve the accuracy can be set by searching extensively. it can.
  • the user's discomfort threshold value can be estimated without presenting a strong sound stimulus, which is useful for adjusting a hearing aid in a hearing aid store or a home. is there.
  • estimating a discomfort threshold in advance for a normal hearing person it can be applied to setting a maximum volume in a television or stereo sound device.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Medical Informatics (AREA)
  • Acoustics & Sound (AREA)
  • Surgery (AREA)
  • Otolaryngology (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Neurosurgery (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Psychiatry (AREA)
  • Psychology (AREA)
  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

 不快と感じるほどの強大音をユーザに聞かせることなく、ユーザが不快に感じる音圧レベル(UCL)を推定する。 不快閾値推定システムは、所定の音圧範囲に含まれる音圧を有する第1音をユーザに呈示し、第1音を呈示した時刻から第1所定時間後に、第1音と同じ音圧を有する第2音をユーザに呈示する出力部と、ユーザの脳波信号を計測する生体信号計測部と、第2音の呈示時刻から第2所定時間後までに計測された脳波信号から、脳波信号の事象関連電位の特徴量を抽出する抽出部と、予め定められた、事象関連電位の特徴量と不快閾値との関係を参照して、抽出した事象関連電位の特徴量に対応する不快閾値を推定する推定部とを備えている。

Description

不快閾値推定システム、方法およびそのプログラム、補聴器調整システムおよび不快閾値推定処理回路
 本願は、語音が快適に聴取できたか否かを評価するための技術に関する。より具体的には、本願は補聴器等において、外部音の周波数ごとの増幅量を調整して個々のユーザにとって適切な大きさの音を得る「フィッティング」のための、純音や語音に対する不快閾値を推定する装置、方法およびプログラム等に関する。
 近年、社会の高齢化に伴い、老人性の難聴者が増加している。大音量の音楽を長時間聴く機会が増えたなどの影響により、音響性の難聴を有する若年者も増加している。また、補聴器の小型化・高性能化に伴い、補聴器の利用することに対して、ユーザが有する抵抗が少なくなってきている。そのため、補聴器を利用するユーザが増加している。
 難聴を有するユーザは、特定の周波数を有する音を聞き取ることが難しい。この特定の周波数は、ユーザ毎に異なる。補聴器は、この特定周波数の音信号の振幅を増幅する。これにより、ユーザが音を聞き取りやすくする。
 補聴器は、ユーザごとの聴力低下の度合いに応じて、音を増幅する量を変更することを求められる。そのため、補聴器の利用を開始する前に、ユーザごとの聴力に合わせて、音の増幅量を調整する「フィッティング」を行うことが必要である。
 フィッティングの目的は、補聴器の出力する音圧を、MCL(most comfortable level)にすることである。ここで、補聴器の出力する音圧とは、音として人間が知覚することができる、大気の圧力変動である。MCLとは、ユーザが快適に聞き取ることができる音圧である。補聴器は、音の周波数毎に、出力する音圧をMCLすることが求められる。
 不適切なフィッティングの例として、(1)音圧の増幅量が不足している場合、または、(2)音圧の増幅量が大きすぎる場合がある。たとえば、音圧の増幅量が不足している場合、ユーザは音声が聞き分けられない。この場合には、上述の補聴器を利用する目的が達成できない。また、音圧の増幅量が大きすぎる場合、ユーザは音声の聞き分けはできるが、音声をうるさく感じる。その結果、ユーザは、補聴器を長時間使用できない。そこで、上記(1)または(2)のいずれにも該当しないように、補聴器のフィッティングを行う必要がある。特に(2)は、補聴器は、ユーザに対して、必要以上に大きい音圧を有する音声を呈示する可能性がある。その結果、大きい音圧を有する音声により、ユーザの耳を傷つける危険性があった。
 フィッティングは、大きく分けると、二つの手順を有する。フィッティングの最初の手順は、オージオグラムの測定である。「オージオグラム」とは、ユーザが聞き取ることができる純音の最小音圧である閾値(hearing threshold level:HTL)を測定した結果である。オージオグラムは、たとえば、閾値(デシベル値)を、周波数(たとえば250Hz、500Hz、1000Hz、2000Hz、4000Hz)ごとに、プロットした図である。
 フィッティングの2つ目の手順は、音圧の増幅量の決定である。例えば、フィッティング理論と呼ばれる音の増幅量を推定するための関数を用いて、周波数ごとに、また、入力音の音圧ごとに増幅量を決定する。複数の種類のフィッティング理論がある。フィッティング理論の例であるハーフゲイン法は、各周波数の挿入利得をその周波数の閾値の半分にする。Berger法は、会話音声の周波数帯域とレベルを考慮して1000Hzから4000Hzの増幅をやや増強する。POGO法は、ハーフゲイン法を基礎とし語音情報が少なく騒音成分が多い250Hzと500Hzの利得をそれぞれ10dB、5dB減じる。NAL-R法は、言葉の長時間音響分析周波数が快適レベルに入るように増幅する。
 また、フィッティング理論は、閾値と、ユーザが不快に感じる大きな音圧レベルであるUCL(uncomfortable level)、及びMCLの情報を活用して、音圧の増幅量を決める方法を含む。その場合には、音圧の増幅量を決める前に、UCLおよびMCLの測定あるいは推定が求められる。上記(2)の問題を回避するためには、UCLを測定し、UCLを超えない範囲に増幅量を設定する必要がある。
 UCLは、オージオグラムの測定と同様に、周波数ごとに測定される。従来、主観報告を用いて、UCLを測定していた。「主観報告」とは、ユーザが音を聞いた後に、ユーザがその音に対する主観的な感想を報告することである。たとえば、オージオメータを用いて、連続音または断続音を、上昇法(段々と音圧レベルを上げる)を用いてユーザに呈示し、うるさすぎて長時間聞いていられない音圧であるか否かをユーザに報告させる。そして、ユーザが長時間聞いていられないと報告した音圧を、UCLとする(非特許文献1)。
 主観報告によるUCL測定は、UCLの基準が個人または言語表現の影響を受けて変動するため難しく、確立された手法は存在しない。そこで、脳波を用いて、客観的にUCLを測定する方法が開発されつつある。たとえば、非特許文献2に開示の技術は、ABR(auditory brainstem response)と呼ばれる脳幹反応に含まれるV波の潜時と刺激強度との関係を用いて、UCLを推定している。音圧の増大に伴い、V波の潜時は短縮する。V波の潜時の短縮が頭打ちになった時に、ユーザが聞いていた音の音圧を特定する。特定した音圧に、定数(たとえば15や10)を足した音圧をUCLとする。
 一方、MCL(most comfortable level)は、一般的に主観報告による測定が難しいため、聴力閾値の半分の傾き(ハーフゲイン)やUCLと聴力閾値の中央値として近似される場合が多い。
 このように、UCLを測定するには、実際にユーザに大きな音を呈示した上で、ユーザからの回答や、ABR等の脳幹反応から算出する必要があった。
君付隆 他、「聴力に異常のない聴覚過敏患者における内耳機能検査の特徴」、Audiology Japan、Vol.52、No.3、P.152-156、2009年 Thornton、A.R.他、「The objective estimation of loudness discomfort level using auditory brainstem evoked responses」、Scandinavian Audiology、Vol.16、No.4、P.219-225、1987年
 しかしながら前記従来の非特許文献1、非特許文献2に開示される構成では、いずれもユーザには、不快なレベルの音圧の音刺激を呈示した上で、ユーザが不快な状態になった後にUCLであったかどうかを判定する方法が取られていた。このため、聴力評価を行う際には、ユーザには強大な音が呈示され、ユーザは実際に不快な状態になる必要があるという課題があった。これは、従来法ではユーザが不快な状態になったかどうかによって、不快閾値を調べるアプローチを採っていたからである。
 本願の、限定的ではない例示的なある実施形態は、不快と感じるほどの強大音をユーザに聞かせることなく、ユーザのUCLを推定する技術を提供する。
 上記課題を解決するために、本発明の一態様である不快閾値推定システムは、所定の音圧範囲に含まれる音圧を有する第1音をユーザに呈示し、前記第1音を呈示した時刻から第1所定時間後に、前記第1音と同じ音圧を有する第2音を前記ユーザに呈示する出力部と、前記ユーザの脳波信号を計測する生体信号計測部と、前記第2音の呈示時刻から第2所定時間後までに計測された脳波信号から、前記脳波信号の事象関連電位の特徴量を抽出する抽出部と、予め定められた、事象関連電位の特徴量と不快閾値との関係を参照して、抽出した前記事象関連電位の特徴量に対応する不快閾値を推定する推定部とを含む。
 上述の一般的かつ特定の態様は、システム、方法およびコンピュータプログラムを用いて実装され、またはシステム、方法およびコンピュータプログラムの組み合わせを用いて実現され得る。
 本発明の一態様にかかる不快閾値推定システムによれば、ユーザが不快と感じるほどの強大音を聞かなくても、補聴器の調整に必要なUCLが推定できるので、補聴器調整におけるユーザの負担を軽減できる。
主観報告によって測定したUCL評価結果を示す図である。 脳波計測実験の手続きの概要を示す。 (a)は国際10-20法(10-20 System)の電極位置を示す図であり、(b)は本実験で電極を装着した電極配置を示す図である。 (a)は第1音呈示後の事象関連電位に基づいて得られた3種類の総加算平均波形を示す図であり、(b)は第2音呈示後の事象関連電位に基づいて得られた、3種類の総加算平均波形を示す図である。 (a)および(b)は、呈示された各音圧に対する特徴量の変化をプロットした結果21および22を示す図である。 UCL推定結果のグラフである。 推定誤差の比較結果を示す図である。 例示的な実施形態による不快閾値推定システム100の構成を示すブロック図である。 不快閾値推定システム100の具体的実施態様の一例を示す。 例示的な実施形態による不快閾値推定システム100のハードウェア構成を示す図である。 例示的な実施形態による不快閾値推定システム100の処理手順の概要を示すフローチャートである。 呈示音制御部3の処理の詳細を示すフローチャートである。 呈示音リストのデータ表現例を示す図である。 特徴量抽出部6の処理のフローチャートである。 事象関連電位の特徴量の抽出処理のイメージを示す模式図である。 不快閾値推定部8の処理のフローチャートである。 不快閾値の出力フォーマット例を示す図である。 基準DB7のデータ構造の一例を示す図である。 本願発明者らが実施した実験データを別の観点で分析し、第1音と第2音に対するN1P2特徴量の値をプロットした図である。 N1P2振幅を特徴量とした場合の判別基準DB7の例を示す図である。 語音を用いた場合の不快閾値の出力フォーマット例を示す図である。 補聴器調整システム110の構成を示すブロック図である。 MCLミラー法に基づく主観報告によるUCLの個人差を示す図である。 本発明の例示的な実施形態の変形例にかかる不快閾値推定システム101の構成を示すブロック図である。 変形例における呈示音制御部3の処理手順を示すフローチャートである。 第1音と第2音の両方の音刺激の呈示後の事象関連電位を使用した推定結果の事例を示す図である。
 これまでの、脳波を用いてUCLを推定する従来技術は、不快と感じるほどの強大音をユーザに聞かせており、ユーザにとって好ましいとは言えなかった。本願発明者らは、その課題を解決するために本願発明をなすに至った。
 本発明の一態様の概要は以下のとおりである。
 本発明の一態様である不快閾値推定システムは、所定の音圧範囲に含まれる音圧を有する第1音をユーザに呈示し、前記第1音を呈示した時刻から第1所定時間後に、前記第1音と同じ音圧を有する第2音を前記ユーザに呈示する出力部と、前記ユーザの脳波信号を計測する生体信号計測部と、前記第2音の呈示時刻から第2所定時間後までに計測された脳波信号から、前記脳波信号の事象関連電位の特徴量を抽出する抽出部と、予め定められた、事象関連電位の特徴量と不快閾値との関係を参照して、抽出した前記事象関連電位の特徴量に対応する不快閾値を推定する推定部とを備えている。
 ある実施形態において、前記不快閾値推定システムは、予め定められた基準にしたがって前記所定の音圧範囲を決定し、前記音圧範囲の上限以下の音圧で前記出力部から呈示されるよう、前記第1音および前記第2音を制御する呈示音制御部をさらに備えている。
 ある実施形態において、前記呈示音制御部の制御に基づいて、前記出力部は、予め定められた周波数および音圧で前記第1音および前記第2音を出力する。
 ある実施形態において、前記呈示音制御部の制御に基づいて、前記出力部は、予め定められた音圧範囲を有する語音を、前記第1音および前記第2音として呈示する。
 ある実施形態において、前記呈示音制御部の制御に基づいて、前記出力部は、前記第1音を呈示した時刻から100ミリ秒以上経過した後に、前記第2音を呈示する。
 ある実施形態において、第1音および第2音を1組の音刺激としたときにおいて、前記出力部は、少なくとも2組の音刺激を出力し、前記呈示音制御部は、音刺激ごとに音圧を変化させる。
 ある実施形態において、第1音および第2音を1組の音刺激としたときにおいて、前記出力部は、第1組の音刺激および第2組の音刺激を出力し、前記呈示音制御部は、前記第1組の音刺激を呈示し、その後、1000ms±200msの範囲内で前記第2組の音刺激を呈示するよう、前記音刺激を制御する。
 ある実施形態において、前記抽出部は、前記第2音の呈示時刻を起点として前記第2所定時間後までに計測された前記脳波信号をウェーブレット変換することにより、時間および周波数に関するウェーブレット係数を前記特徴量として抽出する。
 ある実施形態において、前記推定部は、ウェーブレット係数と不快閾値との関係を規定した基準データベースを参照して、前記特徴量として得られた前記ウェーブレット係数に対応する不快閾値を推定する。
 ある実施形態において、前記第2所定時間は、前記第2音に起因する前記事象関連電位のN1成分およびP2成分が観測可能な時間であり、前記抽出部は、前記N1成分のピーク電位と前記P2成分のピーク電位との差分の絶対値であるN1P2振幅を前記特徴量として抽出する。
 ある実施形態において、前記推定部は、N1P2振幅と不快閾値との関係を規定した基準データベースを参照して、前記特徴量として得られた前記N1P2振幅に対応する不快閾値を推定する。
 本発明の他の一態様である補聴器調整システムは、補聴器と、上述したいずれかの実施形態にかかる不快閾値推定システムと、前記不快閾値推定システムを用いて推定された前記不快閾値を受け取って、前記不快閾値を最大出力値として前記補聴器に設定する設定部とを備えている。
 本発明のさらに他の一態様である不快閾値推定処理回路は、生体信号計測部によって計測されたユーザの脳波信号を受け取り、出力部に音刺激を呈示させる不快閾値推定処理回路であって、出力部に、所定の音圧範囲に含まれる音圧を有する第1音を呈示させ、かつ、前記第1音を呈示した時刻から第1所定時間後に、前記音圧を有する第2音を呈示させる呈示音制御部と、前記第2音の呈示時刻から第2所定時間後までに計測された脳波信号から、前記脳波信号の事象関連電位の特徴量を抽出する抽出部と、予め定められた、事象関連電位の特徴量と不快閾値との関係を参照して、抽出した前記事象関連電位の特徴量に対応する不快閾値を推定する推定部とを備えている。
 本発明のさらに他の一態様である不快閾値推定方法は、所定の音圧範囲に含まれる音圧を有する第1音をユーザに呈示し、前記第1音を呈示した時刻から第1所定時間後に、前記第1音と同じ音圧を有する第2音を前記ユーザに呈示するステップと、前記ユーザの脳波信号を計測するステップと、前記第2音の呈示時刻から第2所定時間後までに計測された脳波信号から、前記脳波信号の事象関連電位の特徴量を抽出するステップと、予め定められた、事象関連電位の特徴量と不快閾値との関係を参照して、抽出した前記事象関連電位の特徴量に対応する不快閾値を推定するステップとを包含する。
 本発明のさらに他の一態様であるコンピュータプログラムは、不快閾値推定システムの不快閾値推定処理回路に設けられたコンピュータによって実行されるコンピュータプログラムであって、前記コンピュータプログラムは、前記コンピュータに対し、出力部を介して、所定の音圧範囲に含まれる音圧を有する第1音をユーザに呈示し、前記第1音を呈示した時刻から第1所定時間後に、前記第1音と同じ音圧を有する第2音を前記ユーザに呈示するステップと、前記ユーザの脳波信号を取得するステップと、前記第2音の呈示時刻から第2所定時間後までに計測された脳波信号から、前記脳波信号の事象関連電位の特徴量を抽出するステップと、予め定められた、事象関連電位の特徴量と不快閾値との関係を参照して、抽出した前記事象関連電位の特徴量に対応する不快閾値を推定するステップとを実行させる。
 本発明のさらに他の一態様である不快閾値推定システムは、ユーザに呈示すべき音圧範囲を決定する音圧範囲決定部と、前記音圧範囲決定部で決定された音圧と周波数が同じ2つの音を所定の時間間隔で呈示する第1音呈示部と第2音呈示部と、前記第1音呈示部と前記第2音呈示部の音を出力する音刺激出力部と、前記ユーザの脳波を計測する生体信号計測部と、前記生体信号計測部で計測された脳波から第2音呈示部の音刺激出力タイミングを起点として事象関連電位を取得し、事象関連電位を第2音呈示時の音圧と周波数と検査耳の属性とともに蓄積する事象関連電位取得蓄積部と、前記事象関連電位の特徴量から不快閾値を推定するための基準を保持する基準データベースと、前記事象関連電位取得蓄積部に蓄積されたデータを、前記基準DBに保持された基準に従って処理し、前記音圧範囲決定部で決定された音圧範囲より大きな不快閾値を推定する不快閾値推定部とを備えている。
 ある実施形態において、前記基準データベースで保持されている基準は、第2音呈示部の音刺激に対する事象関連電位に対する不快閾値の値の基準である。
 ある実施形態において、前記基準データベースで保持されている基準は、第2音呈示部の音刺激に対するN1成分とP2成分に基づく振幅量であり、前記振幅量が大きいほど不快閾値の値が大きいと判断される基準である。
 ある実施形態において、前記基準データベースでは、第2音の特徴量としてウェーブレット係数を使用し、前記係数が大きいほどUCLが大きいと判断する。
 ある実施形態において、前記音圧範囲決定部では、呈示音圧をユーザによらず80dB、85dB、90dBとする。
 ある実施形態において、前記音圧範囲決定部では、ユーザの最小可聴閾値からフィッティング理論によって推定されたUCLの値よりも所定の値だけ低く設定する。
 ある実施形態において、前記音圧範囲決定部で決定されている音圧範囲は、前記ユーザの最小可聴閾値の音圧より大きく、さらに、前記ユーザの想定される不快閾値より小さい音圧の範囲である。
 ある実施形態において、前記音圧範囲決定部で決定される音圧の上限値は、前記ユーザの最小可聴閾値から推定される不快閾値である。
 ある実施形態において、前記事象関連電位取得蓄積部では、第2音呈示部の音刺激出力タイミングに加え第1音呈示部の音刺激出力タイミングでも事象関連電位を取得し、各音刺激の呈示時の音圧と周波数と検査時の属性とともに蓄積する。
 本発明のさらに他の一態様である不快閾値推定方法は、ユーザに呈示すべき音圧範囲を決定する音圧範囲決定ステップと、前記音圧範囲決定部2で決定された音圧と周波数が同じ2つの音を所定の時間間隔で呈示する第1音呈示ステップと第2音呈示ステップと、前記音呈示ステップの音を出力する音刺激出力ステップと、ユーザの脳波を計測する生体信号計測ステップと、前記生体信号計測ステップで計測された脳波から第2音呈示ステップの音刺激出力タイミングを起点として事象関連電位を取得し、事象関連電位を第2音呈示時の音圧と周波数と検査耳の属性とともに蓄積する事象関連電位取得蓄積ステップと、前記事象関連電位の特徴量から不快閾値を推定するための基準を保持する基準データベースと、前記事象関連電位取得蓄積ステップに蓄積されたデータを、前記基準データベースに保持された基準に従って処理し、前記音圧範囲決定部で決定された音圧範囲より大きな不快閾値を推定する不快閾値推定ステップとを包含する。
 本発明のさらに他の一態様であるコンピュータプログラムは、不快閾値推定システムに設けられたコンピュータによって実行されるコンピュータプログラムであって、前記コンピュータプログラムは、前記不快閾値推定システムに実装されるコンピュータに対し、ユーザに呈示すべき音圧範囲を決定する音圧範囲決定ステップと、前記音圧範囲決定部2で決定された音圧と周波数が同じ2つの音を所定の時間間隔で呈示する第1音呈示ステップと第2音呈示ステップと、前記音呈示ステップの音を出力する音刺激出力ステップと、ユーザの脳波を計測する生体信号計測ステップと、前記生体信号計測ステップで計測された脳波から第2音呈示ステップの音刺激出力タイミングを起点として事象関連電位を取得し、事象関連電位を第2音呈示時の音圧と周波数と検査耳の属性とともに蓄積する事象関連電位取得蓄積ステップと、前記事象関連電位取得蓄積ステップに蓄積されたデータを、前記事象関連電位の特徴量から不快閾値を推定するための基準を保持する前記基準データベースに保持された基準に従って処理し、前記音圧範囲決定部で決定された音圧範囲より大きな不快閾値を推定する不快閾値推定ステップとを実行させる。
 本発明の例示的な実施形態の説明に先だって、本明細書において用いられる用語の定義および本願発明者らが行った実験を説明し、その実験の結果から得られた本願発明者らの知見を説明する。その後、本実施形態を説明する。
 まず初めに、本明細書における用語の定義を説明する。
 「事象関連電位(event-related potential:ERP)」とは、刺激に対して発生する脳波(electroencephalogram:EEG)の電位の変動である。
 「音刺激」とは、ユーザに対して呈示した音による刺激である。
 「N1成分」とは、音刺激の呈示した時刻を起点として、約100msまでの脳波に含まれる陰性成分の電位である。N1成分は、事象関連電位に含まれる。
 「P2成分」とは、音刺激を呈示した時刻を起点として、約200ms範囲後の脳波に含まれる陽性成分の電位である。P2成分は、事象関連電位に含まれる。
 「潜時」とは、音刺激が呈示された時刻を起点として陽性成分または陰性成分のピーク電位が出現するまでの時間である。
 「陰性成分」とは、一般的には、0μVよりも小さい電位をいう。
 「陽性成分」とは、一般的には、0μVよりも大きい電位をいう。ただし、電位を比較する対象がある場合には、より負の値を有する電位を陰性成分ともいう。また、電位を比較する対象がある場合には、より正の値を有する電位を陽性成分ともいう。
 「不快閾値(uncomfortable loudness level:UCL)」とは、ユーザが不快に感じる程大きい音圧である。
 「最小可聴値(hearing threshold level:HTL)」とは、ユーザが聞き取ることのできる最も小さい音の音圧である。
 「純音」とは、単一の周波数で周期振動を繰り返す、正弦波で表される音である。
 なお、「事象関連電位(ERP)マニュアル-P300を中心に」(加我君孝ほか編集、篠原出版新社、1995)の30頁に記載の表1によると、一般的に、事象関連電位の波形には、個人ごとに30msから50msの差異(ずれ)が生じる。したがって、本明細書において、「約Xms」又は「Xms付近」という語は、Xmsを中心として前後30から50msの範囲を意味する。例えば、X=100のときは100ms±30ms、X=200のときは200ms±50msである。個人差を考慮して、広い範囲を与える50msのずれが生じるとしてもよい。このとき、「約Xms」は、(X-50)ms以上、(X+50)ms以下を表すと言える。
 以下、添付の図面を参照しながら、本発明の例示的な実施形態による不快閾値推定システムの各実施形態を説明する。
 本発明の例示的な実施形態による不快閾値推定システムは、ユーザが不快と感じない程度の大きさの音圧を有する呈示音を呈示することで、不快閾値が推定できる。推定手法の説明に先立ち、本願発明者らが実施した実験とその実験結果を説明する。そして本願発明者らが実験データから見出したUCL推定を可能にする脳波誘発反応の特性を説明する。
 (実験概要の説明)
1.実験概要
 本願発明者らは、短時間かつ高精度でUCLを客観的に測定する不快閾値推定の実現を目指し、純音に対する不快閾値を推定するための基礎データの収集のために以下の2つの実験を実施した。
 一つは、主観報告に基づいてUCLを測定する主観報告実験である。主観報告実験は、脳波計測実験の前後にそれぞれ実施した。この主観報告実験で得られたUCLデータを脳からの推定目標の基準データとして使用した。
 もう一つは、音刺激に対する反応を計測する脳波計測実験である。音刺激としては同一周波数であり、かつ、同一音圧である純音を、所定の間隔をあけて2回呈示した。以下、2回呈示した純音による音刺激を、「ペア刺激」とも表記する。この音刺激呈示に対する事象関連電位を取得して、UCL値の推定実験のデータとした。
 実験結果を考察した本願発明者らは、一般的にUCLと評価される音圧よりも低い音圧のペア刺激を呈示した場合にも、第1音や第2音に対する脳波成分(事象関連電位)の特徴量からUCL値を推定できる識別器が構成可能であることを発見した。本手法によれば、ユーザが不快に感じるほどの強大音を呈示しなくても短時間かつ高精度なUCL推定が可能になる。
 以下、本願発明者らが実施した実験とその結果、分析により明らかになった脳波特徴を詳細に説明する。その後、実施形態として不快閾値推定システムの概要および、その構成と動作を説明する。
(実験条件の説明)
2.UCL主観報告実験および脳波計測実験
2-1.UCL主観報告実験
 実験参加者は、正常な聴力を有する社会人12名(28から49歳)であった。
 主観報告実験は、脳波計測実験の前後それぞれにおいて実施した。非特許文献1と同様に、オージオメータを用いて連続音を上昇法で呈示し、うるさすぎて不快に感じる音圧を報告させ、その音圧をUCLとした。脳波計測実験で呈示する3周波数(1000、2000、4000Hz)それぞれについて、片耳ずつ両耳の測定を実施した。音圧を予測させないために、実験開始の音圧を60、65、70dBからランダムに決定した。連続音の音圧は5dBずつ上昇させた。うるさすぎて不快に感じる音圧は、挙手によって報告させた。参加者の挙手直後に音呈示をやめ、その音圧を記録した。
 以下、主観報告実験の結果を説明する。
 全ての参加者が健聴者であったが、主観報告実験の結果は、個人ごとに大きく異なった。最も大きい差異は、同一周波数において40dBであった。これは、「うるさすぎて不快に感じる」状態が個人ごとに大きく異なることを示している。
 図1は、主観報告によって測定したUCL評価結果を示す。すべての被験者に対する不快閾値の脳波実験前に行った主観報告実験では、平均値は91.2dBであった。また、脳波実験後に行った主観報告実験では、平均値は94.0dBであった。脳波実験の前後の結果も合わせた全体の平均値は92.6dBであった。主観報告によるUCL評価では、平均値もばらつくことと、同じ評価を繰り返しても報告値が変動することも特徴である。図1に示すように実験前後の変動量は3.75±3.89dBであり、主観報告によるUCL評価はある程度、ばらついていることがわかる。
2-2.脳波計測実験
 脳波計測実験では、UCLを含む大きな音圧が含まれると想定される複数の音圧でペア刺激を呈示し、第1音目と第2音目に対する事象関連電位の特徴変化を調べた。以下、図2から図6を参照しながら、脳波計測実験の実験設定および実験結果を説明する。
 図2は、脳波計測実験の手続きの概要を示す。図2の横軸は、時刻を表す。音刺激は、持続時間50msのトーンバースト音とした。音の立ち上がり(rise)および下がり(fall)は3msとした。周波数ごとおよび音圧ごとの事象関連電位を調べるために、3周波数(1000、2000、4000Hz)のそれぞれについて5種類の音圧(80、85、90、95、100dB)の音刺激を用意した。音刺激の呈示にはヘッドホンを利用した。ヘッドホンは、2つの耳の各々にあてがわれる2つのスピーカを有していたが、音刺激は、両耳ではなく片耳ずつ呈示した。そして、同一の音刺激である第1音および第2音を、所定の間隔をあけて、各実験参加者の同じ側の耳に、呈示した。
 参加者には音刺激に注意を向けなくてもよいと教示した。1つのペア刺激内の第1音と第2音の間隔(ペア間間隔)は、300msに固定した。また、あるペア刺激の第1音と、その次のペア刺激の第1音の間隔(刺激間間隔)は、1000±200msの範囲でランダムに決定した。実験は、750回のペア刺激を1ブロックとして、2ブロック実施した。
 ペア刺激として呈示する音刺激は、次の制約条件で決定した。
(i)直前のペア刺激と同じ周波数の音刺激は選択しない。
(ii)ペア刺激を呈示する耳は左右でランダムとする。ただし、左右どちらかの耳へのペア刺激を4回以上連続させない。
 これらの制約によって、同一ペア刺激の連続呈示による聴覚誘発電位の慣れ(habituation)の影響が低減されると考えた。
 脳波は頭皮上のFz、Cz、Pz(国際10-20法)、右目右、右目下、左右マストイドから鼻を基準に記録した。「マストイド」とは、耳の裏の付け根の下部の頭蓋骨の乳様突起である。図3(a)は、国際10-20法(10-20 System)の電極位置を示す。図3(b)は本実験で電極を装着した電極配置を示す。(1)はFz、(2)はCz、(3)はPz、(4)は左マストイド、(5)は右マストイド、(6)は右目下、(7)は右目右の位置を示す。
 サンプリング周波数は1000Hz、時定数は1秒とし、30Hzのアナログローパスフィルタをかけた。オフラインで5-20Hzのディジタルバンドパスフィルタをかけ、両マストイド連結基準に再基準化した。音刺激に対する事象関連電位として、第1音および第2音が呈示された時刻を起点に、-100msから400msの波形をそれぞれ切り出した。ここで、「-100ms」とは、音刺激を呈示した時刻より100ミリ秒前の時点をいう。
 音圧ごとの全体的な脳波特徴の傾向を調べるために、第1音および第2音に対する事象関連電位を個人ごと、左右耳ごと、周波数ごと、音圧ごとにそれぞれ加算平均した。いずれかの電極において絶対値で50μV以上の振幅を含む試行は、眼電等のノイズの混入の可能性があるため、総加算平均あるいは加算平均から除外した。
 図4A(a)は、第1音呈示後の事象関連電位に基づいて得られた、3種類の総加算平均波形を示している。破線、細実線、太実線はそれぞれ、得られた脳波波形の例として、90、95、100dBの音刺激を呈示して得られた事象関連電位の総加算平均波形を示す。一方、図4A(b)は、第2音呈示後の事象関連電位に基づいて得られた、3種類の総加算平均波形を示している。いずれの音圧の音刺激に対しても、音刺激呈示後約100msにN1成分(陰性のピーク)が生起しているが、その波形は、第1音と第2音とでは異なっていることが見て取れる。
 それぞれの事象関連電位は、呈示タイミングから-100msから0msの区間の平均電位が0μVになるように、ベースライン補正が行われており、各事象関連電位の刺激呈示からの変化が比較可能になっている。第2音は、第1音の呈示開始から300ms後に呈示されるために、取得される第1音の事象関連電位と第2音の事象関連電位とは一部重複している。しかしながら、図4A(a)の300ms周辺および(b)の0ms周辺の波形は完全には一致していない。その理由は、第2音の事象関連電位を生成する場合には、第2音の呈示タイミングを起点にしたベースライン補正が行われているためである。よって、各事象関連電位は異なる情報を含んでいると考えてよい。
 以下、脳波計測実験の結果を説明する。
 本願発明者らは、不快閾値の推定に使用可能な特徴を、事象関連電位の特徴量として抽出することとした。より具体的には、この特徴量は、事象関連電位の周波数の時間変化に関する特徴量として抽出される。その抽出のための手段として、ウェーブレット解析を使用した。ウェーブレット解析により時間情報だけでなく解析対象時区間の特定の周波数情報も使用可能になると考えたためである。解析する対象は、時間に関してはN1成分のピークが見られる時間帯を中心に前後10msの区間の事象関連電位とし、周波数帯域に関しては音に対する反応が含まれると見込まれる5Hzから15Hzの出力値の平均とした。
 図4B(a)および(b)は、呈示された各音圧に対する特徴量の変化をプロットした結果21および22を示す。分析は、第1音に対する反応、および第2音に対する反応を、ウェーブレット係数を求めることによって行った。図4B(a)は、ウェーブレット係数によって示された、第1音呈示後の音圧ごとの事象関連電位の波形変化を示すグラフである。また図4B(b)は、ウェーブレット係数によって示された、第2音呈示後の音圧ごとの事象関連電位の波形変化を示すグラフである。それぞれのグラフの横軸は呈示音圧で右に行くほど大きな音を呈示した場合を示し、縦軸は各特徴量(ウェーブレット係数の値)を示している。
 それぞれのグラフには3本の線が描かれている。これは、被験者を主観報告によるUCL値の大小で3つのグループに分けて、各グループの特徴量をそれぞれ平均したものである。それぞれUCL100dB以上の被験者グループ、UCL90dB台の被験者グループ、UCL90dB以下の被験者グループの平均がプロットされている。
 本願発明者らは図4Bのデータから、以下の着眼点を得た。
 一つ目は、第1音に対する反応は、呈示音圧が大きくなるにつれて、その特徴量も大きくなることである。グラフ21は、どの被験者グループに対しても右肩上がりの上昇が見られ、第1音に対する反応は、音の大きさに関連した反応が多く含まれることがわかる。
 本願発明者らは、N1P2振幅を用いて、上記のウェーブレット係数と同様の傾向が存在するか否かを検証した。N1P2振幅とは、N1成分のピーク電位とP2成分のピーク電位との差分の絶対値を示す(単位:μV)。具体的には、N1P2振幅とは、N1のピーク電位(負)の絶対値とP2のピーク電位(正)との和として得ることができる。N1P2振幅を求めた結果、本願発明者らは、N1P2振幅に関しても同様の傾向を確認した。
 一方、第2音に対する反応は、呈示音圧と特徴量の大きさに明確な関係は読み取れない。グラフ22では、音圧変化に対する特徴量の変化はあまり明確ではない。しかし、被験者グループによる特徴量の大小関係は比較的明確である。たとえば主観報告のUCL値が最も大きい(100dB以上)被験者グループでは、その特徴量は最も大きく現れる。主観報告のUCL値が最も小さい被験者グループでは、その特徴量は最も小さく現れる。主観報告のUCL値が中程度(90dB台)の被験者グループでは、その特徴量は中程度に現れる。
 これらの分析結果から、本願発明者らは以下の知見を見出した。第2音の音刺激は第1音の呈示後300msで与えられる。よって、第2音の音刺激が与えられた時点では、第1音の刺激に由来する脳の反応が十分に完了していないと言える。その結果、第2音の音刺激に起因する反応は、第1音の音刺激に起因する反応時とは異なっていると考えられる。
 この、第1音の音刺激に起因する反応は、音の大きさに由来する反応であるといえる。図4B(a)によれば、全体の傾向として、音の大きさに比例して波形が大きくなっているためである(図4B(a)の白矢印参照)。一方、第2音の音刺激に起因する反応は、音の大きさを反映していない。図4B(b)によれば、全体の傾向として、音の大きさに比例して波形が大きくなっていないためである(図4B(b)の白矢印参照)。先に説明したように、図4B(b)の波形からは、音が大きくない場合にもUCLと相関のある信号が含まれていると言える。ここから第2音に対する反応は、音の大きさを直接反応したものではなく、音の大きさに対する反応の強さに関連していると考えられる。よって、主観報告のUCL値と、第2音に対する反応に対応する事象関連電位の値との間には相関があると結論できる。
 この着眼点に基づけば、たとえば図4B(b)の85dB付近のように、大きな音を呈示していない部分でもUCL値と相関が見られる。よって、強大な音を呈示しなくてもUCL値の推定が可能であるといえる。
 関連研究においては、純音聴覚刺激(トーンピップ、トーンバースト)に対するN1成分の潜時およびN1P2振幅は、音刺激の強度と立ち上がり時間に応じて変化することが知られている(鈴木他、1985、聴性脳幹反応-その基礎と臨床-、メジカルビュー社、p.384-385)。具体的には、所定の音圧よりも小さな音圧の範囲においては、刺激音の強度増大に伴い、N1成分の潜時は短縮し、かつ、N1P2振幅は増大する。また、所定の音圧以上になると、N1成分の潜時短縮およびN1P2振幅の増大は頭打ちになる。図4B(a)においてもこの傾向は見て取れる。しかしながら、第2音圧に対する特徴量は、上記第1音とは異なった挙動を示していることがわかる。
2-3.両実験データに基づくUCLの推定実験
 この考え方に基づき、音刺激の呈示に対する事象関連電位の特徴量を分析してUCLを推定し、主観報告のUCL値との一致度合いを確認する実験を行った。
 図5は、UCL推定結果のグラフである。横軸は、どの音圧範囲の音刺激呈示に対する事象関連電位を使用してウェーブレット係数を求めたかを示している。一番左は80dBの事象関連電位のみ、その隣は80dBと85dBの事象関連電位、その後、順次使用する情報を増やし、一番右は80から100dBの全ての音圧に対する事象関連電位を使用してウェーブレット係数を求めた場合の結果である。縦軸は、分析によるUCL推定結果と主観報告値の一致度(誤差の平均)を示している。例えば、主観報告値が90dBであり、推定値が85dBまたは95dBであるときは、誤差は5dBと算出した。図5は、この考え方で算出した各被験者の各周波数における推定誤差の平均がプロットされている。
 図5には、2本の線が示されている。上側の線は、第1音に対する事象関連電位のウェーブレット係数を用いて求めた線(S1)である。下側の線は、第2音に対する事象関連電位のウェーブレット係数を用いて求めた線(S2)である。
 図5の縦軸は、主観報告のUCL値と推定されたUCL値との誤差を示しているから、その値が小さいほど推定精度が高いことを意味する。よって、下側の線に対応する、第2音に対する事象関連電位を用いたほうが、推定誤差がより小さくなり、好ましいと言える。たとえば、図5横軸の最も右の例(全ての音刺激に対する事象関連電位を用いた例)を検討する。第1音に対する事象関連電位を用いたときと、第2音に対する事象関連電位を用いたときとの差は、約2dBである。よって、推定誤差が2dB小さくなっており、より主観報告に近く、高精度で推定できているといえる。
 判別分析手法を用いて、UCLを推定した。評価には、評価対象者以外の被験者の事象関連電位と主観報告UCL値の組を学習データとして識別器を構成し、その構成された識別器を用いて、評価対象者のUCL推定を行った。
 その結果、図5から読み取れるように、第2音に対するウェーブレット係数を用いた方が、誤差が少ないことがわかる。また、図1には、実験前後において主観報告UCL値のばらつきが、3.75±3.89dBであることが示されている。第2音に対するウェーブレット係数を用いて推定した一部のUCLは、主観報告UCL値よりもばらつきが小さい。具体的には、その呈示音圧は80dB、85dB、90dBを使った場合、及びそれ以上のデータ量を使った場合である。
 図6は、推定誤差の比較結果を示す。横軸には、推定に使用したデータが示してある。縦軸は主観UCLとの推定誤差がdBで示されている。このように、80、85、90dBの音圧に対する事象関連電位のみから推定した場合にも、全ての音圧に対する事象関連電位を用いて推定した場合と同程度の推定ができており、その誤差の大きさは主観報告のばらつき(図1)と同程度なことがわかる。
 以上の実験から、本願発明者らは、同じ周波数、かつ、同じ音圧を有する2つの音(第1音と第2音)を呈示した時の誘発反応に基づいて、UCL値が推定できるという知見を得た。具体的には、第1音に対する脳波は、主に、音の大きさに対応する成分が含まれているのに対して、第2音に対する脳波は、UCLに対応する成分が含まれている。第2音に対する脳波(事象関連電位)を分析することで、十分な精度でUCL値が推定できるという知見を得た。
 以下、本願発明者らが発見したこれらの特性に基づいて構成される不快閾値推定システムの実施の形態の詳細を、図面を用いて説明する。
3.本発明の例示的な実施形態の説明
 図7は、不快閾値推定システム100の構成を示す。不快閾値推定システム100は、音圧範囲決定部2と、呈示音制御部3と、音刺激出力部4と、生体信号計測部5と、特徴量抽出部6と、基準データベース(DB)7と、不快閾値推定部8とを備えている。なお、ユーザ1は参考のために示している。
 音圧範囲決定部2は、ユーザ1に呈示する音刺激の音圧範囲を決定する。
 呈示音制御部3では、音圧範囲決定部2にて決定された音圧範囲にしたがって、呈示音を制御する。呈示音制御部3は第1音呈示部3aおよび第2音呈示部3bを有している。呈示音制御部3は、第1音呈示部3aおよび第2音呈示部3bを制御することにより、音圧範囲決定部2にて決定された音圧範囲にしたがって、第1音および第2音の呈示を制御する。なお、この音圧範囲は、主として呈示音の音圧の上限を決定するために決定される。
 音刺激出力部4は、呈示音制御部3によって制御された音声信号を受け取り、その音声信号に基づく周波数および音圧で、音刺激をユーザに呈示する。音刺激出力部4は、たとえば、ヘッドホンやスピーカなどの、音刺激を呈示する機器である。
 生体信号計測部5は、ユーザ1の脳波を計測する。生体信号計測部5は、ユーザ1に装着した電極を含む脳波計などにより構成される。特徴量抽出部6は、呈示音制御部3に含まれる第2音呈示部3bから第2音が呈示されたタイミングの情報を受け取り、生体信号計測部5から取得された脳波から事象関連電位を取得して蓄積する。事象関連電位は、刺激に対して発生する脳波の電位の変動である。事象関連電位は、(1)電位の極性(正又は負)、(2)潜時(刺激発生から電位変動が生じるまでの時間)、(3)電位の振幅の大きさ等に応じて、事象関連電位の種類が異なる。種類が異なる信号は、それぞれユーザ5に関する異なる情報を含む。不快閾値推定部8は、基準DB7に保持された不快閾値を推定する基準を参照して、特徴量抽出部6に蓄積されたデータを用いて不快閾値が推定する。
 なお、音圧範囲決定部2、呈示音制御部3、特徴量抽出部6、基準DB7、および不快閾値推定部8を含む構成は、1つの信号処理回路(電子回路)として実現され得る。本実施形態では、このような信号処理回路を不快閾値推定処理回路9と呼ぶ。
 図8は、不快閾値推定システム100の具体的実施態様の一例を示す。この例では、不快閾値推定システム100全体がヘッドホン型の筐体に組み込まれている。このような不快閾値推定システム100は、例えば、ユーザ1が補聴器を購入する前に、不快閾値を含む聴力を評価する際に用いられる。ユーザ1は、不快閾値推定システム100をユーザ1の頭部に装着する。
 図8に示す不快閾値推定システム100は、音刺激出力部4と、生体信号計測部5と、不快閾値推定処理回路9とを備えている。
 生体信号計測部5は、少なくとも2つの脳波計測用電極Aおよび脳波計測用電極Bと有線又は無線で接続されている。脳波は、頭部上の電位変化である。したがって、脳波を計測するためには、電極A及び電極Bを頭部の所定の位置に接触させる必要がある。電極A及び電極Bの形状は、頭部の所定の位置に接触させやすい形状を有することが望ましい。頭部の所定の位置は、本願明細書においては、聴力評価に適した位置であることを意味する。その位置とは、国際10-20電極法(図3(a))の指定方法を用いれば、例えば、頭頂部分のCz、C3、C4等である。これらの位置のいずれかに導出電極(たとえば脳波計測用電極A)を接触させれば、音に対する誘発反応を記録しやすいと考えられる。なお、取得したい脳波によっても電極位置が変わり得ることに留意されたい。その他の電極(脳波計測用電極B)は例えば、国際10-20電極法のA2またはA1の位置に接地電極または基準電極として配置すればよい。これにより、脳波を導出可能である。
 不快閾値推定システム100は、ユーザ1の左耳又は右耳に、周波数が共通し、また音圧も共通するペア刺激を順次呈示し、第2音の呈示時刻を起点にそれぞれ計測したユーザ1の脳波(事象関連電位)反応に対して、UCLを推定するための基準を保存している基準DB7の基準に基づいて、ユーザ1の不快閾値を推定する。
 生体信号計測部5は、電極Aと電極Bとの電位差に対応するユーザ1の脳波を計測する。生体信号計測部5は、電位差に対応する情報(脳波信号)を不快閾値推定処理回路9に送信する。図8に示す不快閾値推定処理回路9は、音刺激出力部4および生体信号計測部5と同じ筐体内にある。しかし、不快閾値推定処理回路9は別筐体に設けられていてもよい。その場合には、生体信号計測部5で計測した脳波信号を無線または有線で不快閾値推定処理回路9に送信する。
 図9は、本実施形態による不快閾値推定システム100のハードウェア構成を示す。音刺激出力部4、生体信号計測部5および不快閾値推定処理回路9は、バス101を介して互いに接続されており、相互にデータの授受が可能である。
 不快閾値推定処理回路9は、CPU9a、RAM9b、プログラム9cおよびROM9dを有する処理回路として実現される。たとえばCPU9aはROM9dに格納されたプログラム9cをROM9dから読み出して、RAM9bに展開する。CPU9aは、RAM9bに格納されているコンピュータプログラム9cを実行する。コンピュータプログラム9cには、後述するフローチャートに示される手順に従った処理をCPU9aに実行させるための命令コードが記述されている。この結果、CPU9aは不快閾値推定処理回路9として機能する。後述するように、不快閾値推定処理回路9は、同じRAM9bまたは記録媒体(図示せず)に別途格納されている基準DB7を利用して、不快閾値の推定等を行う。この処理は後述する。
 音刺激出力部4は、スピーカ4aおよび音声出力回路4bを有している。音声出力回路4bは、CPU9aの命令に従って、それぞれ呈示すべき音刺激を指定された音圧でスピーカ4aを介して出力する。
 生体信号計測部5は、電極5a1、電極5a2および脳波計5bを有している。脳波計5aには電極5a1と電極5a2が接続され、これらの電極はユーザ1の頭部に装着されている。計測された脳波データは、バスを経由してCPU9aに送られ、事象関連電位の形式でRAM9cに蓄積される。
 なお、不快閾値推定処理回路9は、1つの半導体回路にコンピュータプログラムを組み込んだDSP等のハードウェアとして実現されてもよい。また、音声出力回路4bや脳波計5bも組合せてひとつの集積回路上で実現することも可能である。
 上述のコンピュータプログラム9cは、CD-ROM等の記録媒体に記録されて製品として市場に流通され、または、インターネット等の電気通信回線を通じて伝送され得る。図9に示すハードウェアを備えた機器(例えばPC)は、当該コンピュータプログラム9cを読み込むことにより、本実施形態による不快閾値推定システム100として機能し得る。
 次に、この不快閾値推定システムの処理を、図10から図21を参照しながら詳細に説明する。
 (処理の全体概要)
 図10は、本実施形態による不快閾値推定システム100の処理手順の概要を示す。概要のみの説明で不十分なステップについては、より詳細なフローチャートに基づいて後に説明する。
 ステップS20では、音圧範囲決定部2は、ユーザ1に呈示する音圧範囲を決定する。ユーザ1の負担の少ない不快閾値の推定のために、ユーザ1の負担にならない程度の呈示音圧の範囲を決定する。呈示音圧の最大値(すなわち音圧範囲の最大値)の決定方法としては、例えば、80dBより大きい音が法律的に騒音とされている場合においては、一般的な騒音の制限値である80dB以下にしてもよいし、不快閾値の推定対象のユーザ1の聴覚閾値(HTL)に応じて、安全と思われる範囲(上限となる閾値)を決定してもよい。HTLからUCLを推定する従来法としてはNAL-R法やMCLミラー法などがあり、これらで想定されるUCL値からさらに10dBや20dB低めの値を呈示音圧の最大値とすれば良い。また、呈示音圧の最小値としては、先に決定した呈示音圧の最大値から10dB小さい音などに決めればよい。こうすると例えば、最初の例では、呈示音圧の最大値が80dB、最小値が70dBと決定される。この場合には、呈示音圧の種類は、70dB、75dB、80dBの3種類と決定できる。
 ステップS30では、呈示音制御部3は、音圧範囲決定部2にて決定された音圧範囲内で、ユーザ1に呈示すべき音刺激を制御する。音の刺激は所定の間隔で2つの音を連続して呈示される。本明細書では連続して呈示される2つの音刺激をペア刺激と呼ぶ。呈示音制御部3は、少なくとも音の周波数及び音圧を制御する。なお、呈示音制御部3は、ユーザ1のどちらの耳に音刺激を呈示するのか、ペア刺激内の第1音と第2音との間隔、2つのペア間の間隔等を制御しても良い。本明細書において、第1音及び第2音は、人間が聞き分けることができない程度に異なる音圧を有している場合でも、第1音及び第2音は、同じ音圧を有するとみなす。
 上述の例示的な実施形態の説明においては、ペア刺激の第1音が呈示された後、第2音が提示されるまでの間隔は、一例として300msであるとした。これは、ペア刺激の第1音と第2音の間隔は、第1音に対する反応と第2音に対する反応を明瞭に生起させるためである。ただし、例えば100ms以上に設定すれば、その目的は達成されると考えられる。よって、たとえば、200msとしてもよい。N1成分は第1音呈示後の100±50msの範囲に出現し得ることに鑑みて、第1音呈示後150ms以降に第2音を呈示してもよい。また、個人差を考慮すると、100ms程度の誤差は許容されてもよい。これらを総合すると、ペア刺激の第1音が呈示された後、第2音が提示されるまでの間隔が100ms以上、400ms以下の範囲に入っていれば、上述の実施形態にかかる不快閾値推定システム100等は上述の動作を行うことが可能である。
 また、ペア間間隔は、第1音に誘発された脳内処理が継続していると考えられる1秒(1000ms)以下で任意に設定してもよい。ペア刺激の最初の音である第1音は第1音呈示部3aにより、次の音である第2音は第2音呈示部3bにより制御される。第2音呈示部3bは、その音刺激呈示時刻に合わせて、トリガを特徴量抽出部6へ出力する。また、呈示した音刺激の左右耳、周波数、音圧に関する情報も、併せて特徴量抽出部6に送信する。
 ステップS40では、音刺激出力部4は呈示音制御部3で決定された音刺激を、呈示音制御部3で決定されたタイミングで、ユーザ1に呈示する。
 ステップS50では、脳波計測部5が脳波を計測して脳波データを取得する。脳波計測部5は、脳波データが必要な期間だけユーザ1の脳波を計測してもよいし、常時脳波を計測しても良い。
 ステップS60では、特徴量抽出部6は、脳波波形から事象関連電位の波形を切り出してそのデータを蓄積する。これにより、呈示音制御部3から送られてくる音刺激呈示のタイミングを起点にした事象関連電位の波形データが取得される。
 事象関連電位の取得区間は、環境音の発生時点から-100ミリ秒から400ミリ秒などが想定できる。-100ミリ秒から0ミリ秒の区間は、ベースライン補正に使用され、0ミリ秒から400ミリ秒は、事象関連電位の変化として評価に用いられる。この取得区間は、評価対象の脳波成分によって変動する。例えば100ミリ秒付近の音声を使うN1成分を中心に見る場合には、-100ミリ秒から300ミリ秒の区間を取得しても良いし、後期成分も使用する場合には-100ミリ秒から600ミリ秒などの区間を取得しても良い。
 ステップS61では、特徴量抽出部6は、ステップS60で切り出された事象関連電位の波形データを特徴量抽出部6の内部に保持する既存の波形データに蓄積する。このとき特徴量抽出部6は、呈示音制御部3から送られてくる、音刺激の左右耳、周波数、音圧に関する情報も関連する属性として、蓄積する。音の属性と脳波データを関連付けて蓄積することで、それぞれの属性における複数回の事象関連電位を蓄積できる。脳波信号は微弱でノイズが混入しやすいため、同一条件で複数回の波形の蓄積が必要になる。
 ステップS62では、特徴量抽出部6は、音刺激が十分な回数呈示されて各属性に対する事象関連電位が十分に蓄積されたかを判定する。音刺激の呈示が完了と判断された場合にはステップS80に進み、そうでない場合にはステップS30戻る。ここでいう「十分な回数」とは、不快閾値推定に必要な精度を確保できるか否かで決定される。例えば本実施形態では、前述の実験時には各条件でそれぞれ20回の事象関連電位の蓄積を終了条件とした。この回数は、脳波信号の品質や、推定方法によって決定され、高品質の脳波信号であればさらに少なく5回や10回の加算回数で十分な場合もあるし、ノイズが多く混入した脳波信号であれば、30回以上の加算が必要になると想定される。
 ステップS80では、不快閾値推定部8はユーザ1の不快閾値を推定する。その具体的な方法として、不快閾値推定部8は、基準DB7に保持された不快閾値推定の基準に基づいて、特徴量抽出部6に蓄積された事象関連電位のデータからユーザ1の不快閾値がどの程度であるかを推定する。不快閾値の推定は、例えば呈示音の周波数、左右の耳ごとに行われ、不快閾値は例えば100dB等と、音圧によって示される。不快閾値が100dBの場合、100dBの音を聞いたユーザ1は、それ以上の音圧では不快に感じることを意味している。基準DB7に保持される基準及び、不快閾値の推定方法の詳細については、後述する。
 次に上記フローのうち、例示的な実施形態の説明内容と特に関連が深い、呈示音制御部3(ステップS30)、特徴量抽出部6(ステップS60、S61、S62)、不快閾値推定部8(ステップS80)については、さらに個別のフローチャートと図面によりその処理の詳細を説明する。
 図11は、呈示音制御部3の処理の詳細を示す。また図12は呈示音リストのデータ表現例を示す。呈示音制御部3は、音圧範囲決定部2で決定された音圧範囲について、ペア刺激音を順次呈示する。
 ステップS31では、呈示音制御部3は、呈示音状態を示す情報を読み出す。ここで「呈示音状態」とは、現在第1音目を呈示する時か、第2音目を呈示する時かを示す状態で、その状態を示す情報が呈示音制御部3内部に保持される値である。例えば、呈示音状態が0であれば第1音目を呈示する状態であり、呈示音状態が1であればすでに第1音目が呈示済で第2音目を呈示する状態である。
 ステップS32では、呈示音制御部3は、ステップS31で取得した呈示音状態に基づき、第1音を呈示するか否かを判定する。ステップS32でYESの場合には、第1音を呈示するためにステップS33に進み、NOの場合には第2音を呈示するためにステップS36に進む。
 ステップS33からステップS35は、呈示音制御部3の第1音呈示部3aにより処理が行われる。
 ステップS33では、第1音呈示部3aは呈示音リストを取得する。呈示音リストとは、評価に必要な音刺激の呈示量に対してどの音刺激が何回呈示済かを記録したものである。図12は呈示音リストの例を示す。
 図12の例では、両耳それぞれに対する周波数1000Hz、2000Hz、4000Hzの音に対する不快閾値を推定したい場合の呈示音リストのデータ例である。音圧範囲決定で決定された音刺激が、70、75、80、85、90dBの5種類である場合に、表の各セルにはこれまでに呈示済の音の回数が記入されている。脳波による不快閾値の推定処理では、加算平均をした後に識別が行われるため、同じ条件で複数回の音刺激が呈示され、事象関連電位が取得される必要がある。音刺激の呈示回数は、一例としては10回、または20回であり、評価の内容や使用する機器、計測環境などによって決定される。図12は、評価を開始してしばらくしたタイミングで得られていた呈示音リストの例である。いくつかの条件に関しては1回目の音刺激が呈示済であり(数値「1」)、いくつかの条件に関してはまだ音刺激を1度も呈示していない(数値「0」)ことを示している。どれかの音刺激の呈示が完了するたびに、呈示されたセルの数字が一つ増加して、すべての条件で例えば20になったときに終了となる。
 ステップS34では、第1音呈示部3aは呈示すべき音刺激の属性を選択する。ここで音刺激の属性とは、図12の例では、検査耳が右か左か、周波数が1000Hz、2000Hz、4000Hzのいずれか、呈示音圧が70dB、75dB、80dB、85dB、90dBのうちのどれであるかを示す。属性の選択にあたっては、呈示音リストのテーブルの各セルの値のうち最も小さいものの中からランダムに選択される。これは、同じ属性の音刺激が続けて選択されないようにするためである。
 ステップS35では、第1音呈示部3aは、ステップS34で選択された属性にしたがって生成した音刺激データを音刺激出力部4に送る。音刺激データは純音等の簡易な刺激であれば、その都度計算により生成しても良いし、あらかじめ音刺激データをメモリに保持しておき、属性に対応したデータをメモリから取得しても良い。
 ステップS36からステップS38は、第2音呈示部3bにより実行される。
 ステップS36では、第2音呈示部3bは、音刺激出力部4に対してステップS34で選択された属性にしたがって生成した音刺激データを送る。音刺激データは、その都度計算により生成しても良いし、あらかじめ音刺激データをメモリに保持しておき、属性に対応したデータをメモリから取得しても良い。
 ステップS37では、第2音呈示部3bは、音刺激属性を特徴量抽出部6に送信する。「音刺激属性」とは、音刺激を与えた、検査対象の耳、音刺激の周波数および音圧がどのタイミングで呈示されたかの情報である。本実施の形態では、第2音に対する事象関連電位を不快閾値の推定に用いるため、この事象関連電位の取得と蓄積に必要な情報を送信している。
 ステップS38では、第2音呈示部3bは呈示音リストを更新する。2つの音刺激の呈示の完了に伴い、呈示音リストの対応するセルの数字を一つ増加させる。
 ステップS39では、呈示音制御部3は、呈示音状態を更新する。第1音呈示後であれば、呈示音状態は、0から1に更新され、第2音呈示後であれば1から0に更新される。
 呈示音制御部3のこのような処理によって、にペア刺激の呈示が実現される。呈示のタイミングとしては、例えば図2のような時間間隔が適用可能である。
 次に、図10のステップS60とステップS61に示される特徴量抽出部6の処理を詳細に説明する。ここで音刺激を呈示されたユーザ1の脳波誘発反応が取得され、音刺激の条件ごとに分類されて蓄積される。以下、図13は特徴量抽出部6の処理のフローチャートを示し、図14は事象関連電位の特徴量の抽出処理のイメージを示す模式図である。
 ステップS61では、特徴量抽出部6は、生体信号計測部5にて計測された脳波データを取得する。この時点の脳波データは、サンプリング周波数にしたがって連続的に取得されたデータ列の状態である。
 ステップS62では、特徴量抽出部6は、第2音呈示部3bから、第2音の呈示タイミングを示す情報を取得する。本実施形態では、第2音に対する脳波反応をUCLの推定に使用するため、その呈示タイミングの情報が必要になる。
 ステップS63では、特徴量抽出部6は、第2音呈示に対する事象関連電位を取得する。ステップS61で得られた脳波データのうち、例えばステップS62で得られた時刻を0ミリ秒とした場合の-100ミリ秒から400ミリ秒の区間を切り出して、事象関連電位として使用する。
 ステップS64では、特徴量抽出部6は、第2音呈示部3bから、第2音として呈示した音刺激の属性を取得する。「音刺激の属性」とは、検査耳、周波数、及び音圧を含む。これらの属性ごとに脳波データは加算平均がされ、不快閾値の推定処理に用いられる。
 ステップS65では、特徴量抽出部6は、事象関連電位の切り出し結果が、ステップS64で取得された属性ごとに蓄積する。ここでは、特徴量抽出部6の内部にある記憶装置(図示せず)に属性ごとに格納される。もしくは、加算平均波形データを格納しても良い。この場合は必要な記憶容量が少なくて済む。
 図14を用いて追加的に特徴量抽出部6の処理を説明する。音刺激41がある属性、例えば右耳、1000Hz、75dBでペア刺激41aとして呈示され、それと平行して脳波42が常時計測されている。ここで、第2音の呈示タイミングに関連して事象関連電位43が切り出される。ペア刺激41aに対しては事象関連電位43aが取得される。これと、対応する音刺激の属性44aと一緒に蓄積45に蓄積され、これを繰り返すことで、事象関連電位の取得と蓄積が進められる。
 このような処理によって、第2音呈示に対する事象関連電位を属性ごとに保存できる。
 次に図10のステップS80に示される不快閾値の推定処理を、図15および図16を参照しながら詳細に説明する。本処理は、不快閾値推定部8にて行われる。ここでユーザの不快閾値が推定される。
 図15は、不快閾値推定部8の処理のフローチャートを示している。また図16は、不快閾値の出力フォーマット例を示している。
 ステップS81にて不快閾値推定部8は、推定すべき不快閾値の属性を決定する。ここでの「属性」とは、検査耳51と周波数52の組合せのことである。図16の例に示すように、不快閾値は、左右の耳に対する各3種類の周波数にして個別に推定されることが必要だからである。本実施形態において不快閾値の推定とは、各属性に対して、それぞれ不快閾値53の推定を行うことを指している。
 ステップS82では、不快閾値推定部8は、属性に対応して蓄積された事象関連電位43を取得する。ここで属性とは各検査耳51と周波数52であり、この場合、各呈示音圧と関連付けられた事象関連電位が取得される。
 ステップS83では、不快閾値推定部8は、事象関連電位の周波数の時間変化に関する特徴量を算出する。特徴量は例えば、80dB、85dB、90dBの各音圧に対する事象関連電位において、各時間帯の周波数強度をウェーブレット解析等によって算出し、それらの係数を結合してベクトルとすることによって行われる。
 さらに特徴量の算出方法を説明する。不快閾値推定部8は、音刺激ごとに、0ms以上300ms以下の範囲の事象関連電位波形に対して、連続ウェーブレット変換を実施し、時間ごと周波数ごとのウェーブレット係数を算出する。マザーウェーブレットとしては、メキシカンハット関数(ψ(t) = (1-t2)exp(-t2/2))等を利用可能である。
 事象関連電位の波形およびウェーブレット係数は、条件ごとに、個人ごと、左右耳ごと、周波数ごとの第1音から第5音までの音刺激群ごとに加算平均される。いずれかの電極において絶対値で50μV以上の振幅を含む試行は、眼球運動や瞬目によるノイズの影響を含むことが想定されるため、総加算平均および加算平均から除外される。そして不快音圧の指標となりうる事象関連電位の特徴量として、加算平均ウェーブレット係数の5Hzから15Hzの周波数幅かつ、50msごとの時間幅の平均値を算出し、これを特徴量として使用する。この特徴量は、ウェーブレット特徴量と呼ばれることもある。
 ステップS84では、不快閾値推定部8は、判別基準を基準DB7より取得する。判別は、各特徴量の値に重み付け和をした値によってどのUCL値に推定されるかのクラス分けを行う手法が用いられるため、その時の各特徴量の値に対する係数等の形で取得される。
 ステップS85では、不快閾値推定部8はステップS84で取得された係数に基づいて閾値判定を行い、不快閾値を推定する。具体的には不快閾値推定部8は、判別分析や、ベイズ推定、クラスタリングの各種手法における計算を行い、不快閾値の推定値を算出する。そのフォーマットは、例えば図16のように、右耳の1000Hzにおける不快閾値は80dBである等、音圧で推定される。
 ステップS86では、不快閾値推定部8はステップS85で推定された不快閾値を格納する。不快閾値の推定結果は、図16のような形式で、ステップS81で選択された属性に対して一つの値として算出されて格納される。
 ステップS87では、不快閾値推定部8は、全ての属性について不快閾値の推定が完了したかを判定する。YESの場合には、処理を終了し、NOの場合には次の属性を選択するためにステップS81に進む。
 以上の手続きにより、全ての属性について不快閾値が推定され、最終的には図16のような形式の結果が得られる。
 図17Aは基準DB7のデータ構造の一例を示す。ここでは最も簡単な推定基準として、第2音に対するウェーブレット係数を単独で用い、呈示音圧80dB、85dB、90dBの音圧に対する事象関連電位のウェーブレット係数を平均し、最終的に得られたひとつの値の大小からUCLを推定する例を説明する。図17Aにおいては、本願発明者らが実施した実験のデータ(図4B(b)のグラフ22)から算出された、第2音に対するウェーブレット係数とUCL推定値との関係がテーブルとして記憶されている。いったんウェーブレット係数が算出されると、そのウェーブレット係数に基づいてこのテーブルを参照し、UCL推定値を取得できる。例えば、得られたウェーブレット係数が5.0であったとすると、不快閾値推定部8はテーブルを参照して、UCL推定値を90dBであると決定する。
 次に、基準DB7の作成方法を説明する。基準DB7は、事前に十分な人数の被験者からのデータ取得により生成される。事前に収集される被験者の数は、最低でも10人以上は必要であり、十分な精度を得るためには、さらに多くの被験者が必要になる。事前実験においては、被験者から脳波と主観UCLの両方を取得し、脳波データと主観UCL値の対応関係から基準が作成可能である。例えば、図4B(b)のグラフは、脳波特徴量と主観UCL値の対応関係の概要を示しており、UCL推定値が小さい場合にはウェーブレット係数も小さい等の傾向が読み取れ、このグラフからでも閾値が決定可能である。
 この判別基準は図17Aの例であれば、図4B(b)のグラフ22の縦軸を読み取ることで生成可能であるが、識別関数が複雑になった場合には、機械学習的な手法によって閾値が決定される必要がある。例えば、判別分析、ベイズ推定等では、各特徴量のそれぞれに係数が与えられた後に演算が行われるので、これよりも複雑なテーブルと演算方式によって実現されるが、計算によって適切な閾値は決定可能である。
 このように基準DB7が事前に作成されていれば、店頭で新しいユーザが来店された場合には、主観UCLを取得することなく、脳波データのみからUCL値が推定可能になる。
 なお、これまでの説明では、事象関連電位の周波数の時間変化に関する特徴量として、ウェーブレット特徴量を用いた。しかしながら、主観UCL値を推定するための情報が含まれていれば、他の特徴量を利用することも可能である。
 たとえば、他の特徴量の例としては、項目(2-2.脳波計測実験)において説明したN1P2振幅が挙げられる。これは、音に対する反応の変化量を反映していると考えられる。
 図17Bは、本願明細者らが実施した実験データを別の観点で分析し、第1音と第2音に対するN1P2特徴量の値をプロットした図である。この図はウェーブレット特徴量における図4Bに対応する。それぞれ、図4Bと同様に被験者を主観報告によるUCL値の大小で3つのグループ(主観UCLが100dB以上、主観UCLが90dB台、主観UCLが90dB以下)に分けて、各グループの特徴量をそれぞれ平均したものがプロットされている。
 図17Bから理解されるように、特に第2音に対するERPでは、主観UCLの大きさと、N1P2振幅の大きさの大小関係が保持されており、適切な閾値の設定によって、主観UCLの値が推定可能であることがわかる。
 図17Cは、N1P2振幅を特徴量とした場合の判別基準DB7の例を示す。ここでは最も簡単な推定基準として、第2音に対するN1P2振幅56を単独で用い、呈示音圧80dB、85dB、90dBの音圧に対する事象関連電位のN1P2振幅を平均し、最終的に得られたその平均値の大小からUCL推定値57を得る場合の例である。これによれば、振幅変化の平均値の大小から、UCL値が推定可能になる。例えば、第2音に対するN1P2振幅が1.8だった場合にはUCL値は95dBと出力できる。
 さらに、ウェーブレット係数やN1P2の振幅以外の特徴量を利用してもよい。事象関連電位の特徴は波形形状に現れ、ピークが現れたときの潜時(刺激呈示タイミングからの経過時間)と振幅によって記述可能である。これらの特徴を時間的、周波数的、もしくは形状的に記述されていれば、識別のための特徴として利用可能である。本明細書においては、ウェーブレット係数は、事象関連電位の周波数の時間変化を示す情報の一例である。また、考えられ得る特徴量をベクトルとして与えて、判別分析、ベイズ推定等の機械学習的手法に与えると、各パラメータが適切に重み付けされるため、特徴量を事前に絞り込む必要もなくなる。
 本実施形態では、純音に対するUCL値の推定の例について説明した。しかしながら、呈示音制御部3が呈示する音は純音に限られず、語音でも良い。語音呈示の場合には、複数の周波数の成分が混在しており、周波数ごとの評価はできないため、左右の耳ごとの評価になる。呈示音制御部3は、呈示される語音を予め保持していてもよい。その場合には、語音の音圧範囲または平均的な音圧は、予め調整可能である。
 図17Dは、語音を用いた場合の不快閾値の出力フォーマット例を示す。検査耳58と不快閾値59との関係が規定されている。左右の耳ごとに不快閾値59が出力できた場合には、補聴器のフィッティングにあたっては、その不快閾値を左右それぞれの耳全体のゲイン調整(ボリューム調整)に使用可能である。例えばテレビや音楽プレーヤ等のボリューム調整等においても、左右ごとに不快閾値が異なる場合には、左右ごとのゲインを修正することでより適切な聞こえを提供可能になる。
 なお、判別分析、ベイズ推定等では、各特徴量のそれぞれに係数が与えられた後に演算が行われるので、これよりも複雑なテーブルと演算方式によって実現されるが、識別基準は実験により得られた脳波データとUCL推定値の対から、学習等によって適切な数値を求めることにより決定される。
 なお、このUCLの評価結果は補聴器のフィッティングの際に、補聴器の最大出力値を設定するための情報として使用される。
 たとえば図18は、補聴器調整システム110の構成を示す。補聴器調整システム110は、図7に示す不快閾値推定システム100と、特性設定部111と、補聴器112とを有している。なお、不快閾値推定システム100は一例である。不快閾値推定システム100に代えて、図19に示す不快閾値推定システム101を用いて補聴器調整システムを構成してもよい。
 特性設定部111は、不快閾値推定システム100から推定された不快閾値、およびユーザ1が聞き取ることができる、純音の最小音圧である最小可聴値HTLを受け取る。純音の周波数は、たとえば、250Hz、500Hz、1000Hz、2000Hz、4000Hzである。最小可聴値HTLは周波数ごとに定義される。最小可聴値HTLは、たとえば最小可聴値の測定器(オージオメータ;図示せず)から有線、無線または記録媒体などを介して送信される。そして、特性設定部111は、不快閾値を最大出力値として補聴器112に設定し、最小可聴値HTLを最小出力値として補聴器112に設定する。
 従来であれば、最大出力値はHTLに応じて所定の値が設定されていた。しかしながら、従来手法(MCLミラー法)によれば、不快閾値が一律100dBと設定される被験者であっても、主観報告によるUCLでは個人差が大きいことがわかっている。図19は、MCLミラー法に基づく主観報告によるUCLの個人差を示す図である。横軸はMCLミラー法で推定したUCLである。健聴者を対象としているために、HTLのばらつきが少なく、推定したUCL値もほとんど同じになっている。縦軸は主観報告によって求められたUCL値である。図19からわかるように、従来の方法ではUCLの個人差に対応できていないことがわかる。このときに、UCLの推定結果により補聴器の出力範囲が正しく設定できれば従来よりも、補聴器のフィッティングに要する時間が短縮できると考えられる。また、補聴器の初期フィッティング値の設定においても、従来の方法よりも適切な初期値が設定可能になる。
 かかる構成にすれば、脳波によって、実際には強大な音を聞かせなくても、被験者が主観で報告するであろうUCL値が推定できる。これにより補聴器フィッティングのための有用な情報として活用できる。
 以下、上述の実施形態の変形例を説明する。具体的には、以下、上述の実施形態に加えて、第1音呈示部の制御によって呈示された第1音に起因して発生した事象関連電位も不快閾値の推定に使用する例を説明する。より多くの情報が追加され精度向上が可能になる。
 図20は、本発明の例示的な実施形態の変形例にかかる不快閾値推定システム101の構成を示す。不快閾値推定システム101は、不快閾値推定システム100(図7)の構成に変更を加えて構成されている。不快閾値推定システム101の構成のうち、不快閾値推定システム100(図7)の構成と同じ構成には同一の参照符号を付し、その説明は省略する。不快閾値推定システム101は、第1音呈示部3aから特徴量抽出部6への結線が増えた点において不快閾値推定システム100と相違する。そこで以下では、呈示音制御部3および特徴量抽出部6の詳細動作を中心に説明する。
 図21は、本変形例における呈示音制御部3のフローを示す。基本的には、図11と同様の処理を行っており、同じ処理については同一の参照符号を付し、その説明は省略する。図11と異なるのは、ステップS35の第1音呈示後に新しいステップS37aが追加されたことである。ステップS37aでは、第1音の音刺激属性が特徴量抽出部6に送信される。ここで音刺激属性とは、検査耳、周波数、音圧が、どのタイミングで呈示されたかの情報のことである。
 特徴量抽出部6の動作も実施の形態1と若干異なる。基本的な処理のフローは図13と同様であり、蓄積のタイミングが第2音呈示後のみならず第1音呈示後にもなされる点が新しい点である。
 図22は、第1音と第2音の両方の音刺激の呈示後の事象関連電位を使用した推定結果の事例を示す。本願発明者らは、第1音と第2音の呈示後の事象関連電位の様々な特徴量の組み合わせの中から精度が高かった例を抽出して図22を作成した。呈示音圧は80dB、85dB、90dBの3種類を用い、特徴量は、第1音と第2音に対する事象関連電位のN1P2の振幅の比と、第2音に対する事象関連電位のウェーブレット係数の両方を用いてUCL推定を行っている。図22において、横軸は主観報告値で、縦軸は脳波による推定値であり、プロットされた円の直径が該当する事例数に比例している。この時、すべて直線に乗っていれば、UCL推定値がすべて正しく主観報告値に対応したと言える。このときの主観報告からのばらつきは3.75±3.89dBであった。また、主観報告との誤差の平均値は3.15±3.05dBであった。この例によれば、実施の形態1で示した第2音のみの反応を用いた場合の3.87±3.09dBよりも精度が向上していると言える。
 なお、この事例は精度の改善を示すための一事例であり、特徴量の算出方法やその組合せ方は様々なものが考えられ、幅広く探索すればさらに精度が改善できる特徴量や判別基準が設定できる。
 このような処理により、第2音呈示に対する事象関連電位に加えて、第1音呈示に対する事象関連電位の情報も付加することで、精度向上や呈示回数の低減が可能になる。本変形例の構成を利用して、図18に示す構成と同様の構成を持つ補聴器調整システムを実現することが可能である。
 なお、精度向上の理由について簡単な考察を示す。第1音では呈示された音の大きさに対する反応が、音呈示後100ミリ秒前後を中心としたN1成分として現れることがわかっているが、精度向上が可能な場合があることから、ある程度はUCLに関する情報も含まれていると考えられる。
 なお、第1音呈示に対する事象関連電位のみでは十分なUCL推定精度が得られないので、第2音に対する事象関連電位の使用は必須であると考えられる。
 本発明の例示的な実施形態にかかる不快閾値推定システムによれば、強大な音刺激を呈示することなくユーザの不快閾値が推定できるために、補聴器店や家庭などでの補聴器の調整に有用である。また、健聴者に対してもあらかじめ不快閾値を推定することで、テレビやステレオの音響装置における最大音量設定等にも応用可能である。
 1 ユーザ
 2 音圧範囲決定部
 3 呈示音制御部
 3a 第1音呈示部
 3b 第2音呈示部
 4 音刺激出力部
 5 生体信号計測部
 6 事象関連電位取得蓄積部
 7 基準DB
 8 不快閾値推定部
 9 不快閾値推定処理部
 100、101 不快閾値推定システム
 110 補聴器調整システム
 111 特性設定部
 112 補聴器

Claims (26)

  1.  所定の音圧範囲に含まれる音圧を有する第1音をユーザに呈示し、前記第1音を呈示した時刻から第1所定時間後に、前記第1音と同じ音圧を有する第2音を前記ユーザに呈示する出力部と、
     前記ユーザの脳波信号を計測する生体信号計測部と、
     前記第2音の呈示時刻から第2所定時間後までに計測された脳波信号から、前記脳波信号の事象関連電位の特徴量を抽出する抽出部と、
     予め定められた、事象関連電位の特徴量と不快閾値との関係を参照して、抽出した前記事象関連電位の特徴量に対応する不快閾値を推定する推定部と
     を備えた不快閾値推定システム。
  2.  予め定められた基準にしたがって前記所定の音圧範囲を決定し、前記音圧範囲の上限以下の音圧で前記出力部から呈示されるよう、前記第1音および前記第2音を制御する呈示音制御部をさらに備えた、請求項1に記載の不快閾値推定システム。
  3.  前記呈示音制御部の制御に基づいて、前記出力部は、予め定められた周波数および音圧で前記第1音および前記第2音を出力する、請求項2に記載の不快閾値推定システム。
  4.  前記呈示音制御部の制御に基づいて、前記出力部は、予め定められた音圧範囲を有する語音を、前記第1音および前記第2音として呈示する、請求項2に記載の不快閾値推定システム。
  5.  前記呈示音制御部の制御に基づいて、前記出力部は、前記第1音を呈示した時刻から100ミリ秒以上経過した後に、前記第2音を呈示する、請求項2に記載の不快閾値推定システム。
  6.  第1音および第2音を1組の音刺激としたときにおいて、前記出力部は、少なくとも2組の音刺激を出力し、
     前記呈示音制御部は、音刺激ごとに音圧を変化させる、請求項2に記載の不快閾値推定システム。
  7.  第1音および第2音を1組の音刺激としたときにおいて、前記出力部は、第1組の音刺激および第2組の音刺激を出力し、
     前記呈示音制御部は、前記第1組の音刺激を呈示し、その後、1000ms±200msの範囲内で前記第2組の音刺激を呈示するよう、前記音刺激を制御する、請求項2に記載の不快閾値推定システム。
  8.  前記抽出部は、前記第2音の呈示時刻を起点として前記第2所定時間後までに計測された前記脳波信号をウェーブレット変換することにより、時間および周波数に関するウェーブレット係数を前記特徴量として抽出する、請求項1に記載の不快閾値推定システム。
  9.  前記推定部は、ウェーブレット係数と不快閾値との関係を規定した基準データベースを参照して、前記特徴量として得られた前記ウェーブレット係数に対応する不快閾値を推定する、請求項8に記載の不快閾値推定システム。
  10.  前記第2所定時間は、前記第2音に起因する前記事象関連電位のN1成分およびP2成分が観測可能な時間であり、
     前記抽出部は、前記N1成分のピーク電位と前記P2成分のピーク電位との差分の絶対値であるN1P2振幅を前記特徴量として抽出する、請求項1に記載の不快閾値推定システム。
  11.  前記推定部は、N1P2振幅と不快閾値との関係を規定した基準データベースを参照して、前記特徴量として得られた前記N1P2振幅に対応する不快閾値を推定する、請求項10に記載の不快閾値推定システム。
  12.  補聴器と、
     請求項1から11のいずれかに記載の不快閾値推定システムと、
     前記不快閾値推定システムを用いて推定された前記不快閾値を受け取って、前記不快閾値を最大出力値として前記補聴器に設定する設定部と
     を備えた、補聴器調整システム。
  13.  生体信号計測部によって計測されたユーザの脳波信号を受け取り、出力部に音刺激を呈示させる不快閾値推定処理回路であって、
     出力部に、所定の音圧範囲に含まれる音圧を有する第1音を呈示させ、かつ、前記第1音を呈示した時刻から第1所定時間後に、前記音圧を有する第2音を呈示させる呈示音制御部と、
     前記第2音の呈示時刻から第2所定時間後までに計測された脳波信号から、前記脳波信号の事象関連電位の特徴量を抽出する抽出部と、
     予め定められた、事象関連電位の特徴量と不快閾値との関係を参照して、抽出した前記事象関連電位の特徴量に対応する不快閾値を推定する推定部と
     を備えた、不快閾値推定処理回路。
  14.  所定の音圧範囲に含まれる音圧を有する第1音をユーザに呈示し、前記第1音を呈示した時刻から第1所定時間後に、前記第1音と同じ音圧を有する第2音を前記ユーザに呈示するステップと、
     前記ユーザの脳波信号を計測するステップと、
     前記第2音の呈示時刻から第2所定時間後までに計測された脳波信号から、前記脳波信号の事象関連電位の特徴量を抽出するステップと、
     予め定められた、事象関連電位の特徴量と不快閾値との関係を参照して、抽出した前記事象関連電位の特徴量に対応する不快閾値を推定するステップと
     を包含する、不快閾値推定方法。
  15.  不快閾値推定システムの不快閾値推定処理回路に設けられたコンピュータによって実行されるコンピュータプログラムであって、
     前記コンピュータプログラムは、前記コンピュータに対し、
     出力部を介して、所定の音圧範囲に含まれる音圧を有する第1音をユーザに呈示し、前記第1音を呈示した時刻から第1所定時間後に、前記第1音と同じ音圧を有する第2音を前記ユーザに呈示するステップと、
     前記ユーザの脳波信号を取得するステップと、
     前記第2音の呈示時刻から第2所定時間後までに計測された脳波信号から、前記脳波信号の事象関連電位の特徴量を抽出するステップと、
     予め定められた、事象関連電位の特徴量と不快閾値との関係を参照して、抽出した前記事象関連電位の特徴量に対応する不快閾値を推定するステップと
     を実行させる、コンピュータプログラム。
  16.  ユーザに呈示すべき音圧範囲を決定する音圧範囲決定部と、
     前記音圧範囲決定部で決定された音圧と周波数が同じ2つの音を所定の時間間隔で呈示する第1音呈示部と第2音呈示部と、
     前記第1音呈示部と前記第2音呈示部の音を出力する音刺激出力部と、
     前記ユーザの脳波を計測する生体信号計測部と、
     前記生体信号計測部で計測された脳波から第2音呈示部の音刺激出力タイミングを起点として事象関連電位を取得し、事象関連電位を第2音呈示時の音圧と周波数と検査耳の属性とともに蓄積する事象関連電位取得蓄積部と、
     前記事象関連電位の特徴量から不快閾値を推定するための基準を保持する基準データベースと、
     前記事象関連電位取得蓄積部に蓄積されたデータを、前記基準DBに保持された基準に従って処理し、前記音圧範囲決定部で決定された音圧範囲より大きな不快閾値を推定する不快閾値推定部と
     を備えた不快閾値推定システム。
  17.  前記基準データベースで保持されている基準は、第2音呈示部の音刺激に対する事象関連電位に対する不快閾値の値の基準である、請求項16に記載の不快閾値推定システム。
  18.  前記基準データベースで保持されている基準は、第2音呈示部の音刺激に対するN1成分とP2成分に基づく振幅量であり、前記振幅量が大きいほど不快閾値の値が大きいと判断される基準である、請求項17に記載の不快閾値推定システム。
  19.  前記基準データベースでは、第2音の特徴量としてウェーブレット係数を使用し、前記係数が大きいほどUCLが大きいと判断する、請求項17に記載の不快閾値推定システム。
  20.  前記音圧範囲決定部では、呈示音圧をユーザによらず80dB、85dB、90dBとする、請求項17に記載の不快閾値推定システム。
  21.  前記音圧範囲決定部では、ユーザの最小可聴閾値からフィッティング理論によって推定されたUCLの値よりも所定の値だけ低く設定する、請求項16に記載の不快閾値推定システム。
  22.  前記音圧範囲決定部で決定されている音圧範囲は、前記ユーザの最小可聴閾値の音圧より大きく、さらに、前記ユーザの想定される不快閾値より小さい音圧の範囲である、請求項16に記載の不快閾値推定システム。
  23.  前記音圧範囲決定部で決定される音圧の上限値は、前記ユーザの最小可聴閾値から推定される不快閾値である、請求項22に記載の不快閾値推定システム。
  24.  前記事象関連電位取得蓄積部では、第2音呈示部の音刺激出力タイミングに加え第1音呈示部の音刺激出力タイミングでも事象関連電位を取得し、各音刺激の呈示時の音圧と周波数と検査時の属性とともに蓄積する、請求項16に記載の不快閾値推定システム。
  25.  ユーザに呈示すべき音圧範囲を決定する音圧範囲決定ステップと、
     前記音圧範囲決定部2で決定された音圧と周波数が同じ2つの音を所定の時間間隔で呈示する第1音呈示ステップと第2音呈示ステップと、
     前記音呈示ステップの音を出力する音刺激出力ステップと、
     ユーザの脳波を計測する生体信号計測ステップと、
     前記生体信号計測ステップで計測された脳波から第2音呈示ステップの音刺激出力タイミングを起点として事象関連電位を取得し、事象関連電位を第2音呈示時の音圧と周波数と検査耳の属性とともに蓄積する事象関連電位取得蓄積ステップと、
     前記事象関連電位の特徴量から不快閾値を推定するための基準を保持する基準データベースと、
     前記事象関連電位取得蓄積ステップに蓄積されたデータを、前記基準データベースに保持された基準に従って処理し、前記音圧範囲決定部で決定された音圧範囲より大きな不快閾値を推定する不快閾値推定ステップと
     を包含する不快閾値推定方法。
  26.  不快閾値推定システムに設けられたコンピュータによって実行されるコンピュータプログラムであって、
     前記コンピュータプログラムは、前記不快閾値推定システムに実装されるコンピュータに対し、
     ユーザに呈示すべき音圧範囲を決定する音圧範囲決定ステップと、
     前記音圧範囲決定部2で決定された音圧と周波数が同じ2つの音を所定の時間間隔で呈示する第1音呈示ステップと第2音呈示ステップと、
     前記音呈示ステップの音を出力する音刺激出力ステップと、
     ユーザの脳波を計測する生体信号計測ステップと、
     前記生体信号計測ステップで計測された脳波から第2音呈示ステップの音刺激出力タイミングを起点として事象関連電位を取得し、事象関連電位を第2音呈示時の音圧と周波数と検査耳の属性とともに蓄積する事象関連電位取得蓄積ステップと、
     前記事象関連電位取得蓄積ステップに蓄積されたデータを、前記事象関連電位の特徴量から不快閾値を推定するための基準を保持する前記基準データベースに保持された基準に従って処理し、前記音圧範囲決定部で決定された音圧範囲より大きな不快閾値を推定する不快閾値推定ステップと
     を実行させるコンピュータプログラム。
PCT/JP2012/004245 2011-06-30 2012-06-29 不快閾値推定システム、方法およびそのプログラム、補聴器調整システムおよび不快閾値推定処理回路 WO2013001836A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2012553114A JP5215508B1 (ja) 2011-06-30 2012-06-29 不快閾値推定システム、方法およびそのプログラム、補聴器調整システムおよび不快閾値推定処理回路
CN201280002600.0A CN103081515B (zh) 2011-06-30 2012-06-29 不适阈值推测系统、方法、助听器调整系统及不适阈值推测处理电路
US13/909,421 US9241226B2 (en) 2011-06-30 2013-06-04 Uncomfortableness threshold value estimation system and method, and a program thereof; hearing aid adjustment system; and uncomfortableness threshold value processing circuit

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011-146092 2011-06-30
JP2011146092 2011-06-30

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US13/909,421 Continuation US9241226B2 (en) 2011-06-30 2013-06-04 Uncomfortableness threshold value estimation system and method, and a program thereof; hearing aid adjustment system; and uncomfortableness threshold value processing circuit

Publications (1)

Publication Number Publication Date
WO2013001836A1 true WO2013001836A1 (ja) 2013-01-03

Family

ID=47423753

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/004245 WO2013001836A1 (ja) 2011-06-30 2012-06-29 不快閾値推定システム、方法およびそのプログラム、補聴器調整システムおよび不快閾値推定処理回路

Country Status (4)

Country Link
US (1) US9241226B2 (ja)
JP (1) JP5215508B1 (ja)
CN (1) CN103081515B (ja)
WO (1) WO2013001836A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017148404A (ja) * 2016-02-26 2017-08-31 日本光電工業株式会社 誘発電位測定装置
JP2017221721A (ja) * 2015-02-24 2017-12-21 国立大学法人大阪大学 痛み測定装置および痛み測定システム
JP2018015212A (ja) * 2016-07-27 2018-02-01 凸版印刷株式会社 脳波信号処理システム、脳波信号処理方法及びプログラム

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014057629A1 (ja) * 2012-10-09 2014-04-17 パナソニック株式会社 不快音圧推定システム、不快音圧推定プロセッサ、不快音圧推定方法およびそのコンピュータプログラム
CN105530565B (zh) * 2014-10-20 2021-02-19 哈曼国际工业有限公司 自动声音均衡装置
HK1207526A2 (en) * 2015-05-27 2016-01-29 力滔有限公司 A hearing device and a method for operating thereof
WO2019060298A1 (en) 2017-09-19 2019-03-28 Neuroenhancement Lab, LLC METHOD AND APPARATUS FOR NEURO-ACTIVATION
JP2019076374A (ja) * 2017-10-24 2019-05-23 日本光電工業株式会社 生体情報測定装置及びプログラム
US11717686B2 (en) 2017-12-04 2023-08-08 Neuroenhancement Lab, LLC Method and apparatus for neuroenhancement to facilitate learning and performance
EP3731749A4 (en) 2017-12-31 2022-07-27 Neuroenhancement Lab, LLC NEURO-ACTIVATION SYSTEM AND METHOD FOR ENHANCING EMOTIONAL RESPONSE
US11364361B2 (en) 2018-04-20 2022-06-21 Neuroenhancement Lab, LLC System and method for inducing sleep by transplanting mental states
WO2020056418A1 (en) 2018-09-14 2020-03-19 Neuroenhancement Lab, LLC System and method of improving sleep
US11786694B2 (en) 2019-05-24 2023-10-17 NeuroLight, Inc. Device, method, and app for facilitating sleep
KR20210007385A (ko) * 2019-07-11 2021-01-20 현대자동차주식회사 오류 모니터링을 이용한 교통 감시 시스템
DE102019219385A1 (de) * 2019-12-11 2021-06-17 Sivantos Pte. Ltd. Verfahren zur Ermittlung der Hörschwelle einer Testperson
CN111479204B (zh) * 2020-04-14 2021-09-03 上海力声特医学科技有限公司 适用于人工耳蜗的增益调节方法
RU2747571C1 (ru) * 2020-05-21 2021-05-07 Акционерное общество «Нейротренд» Способ и система объективной оценки реакции слушателя на аудиоконтент по спектру произвольных аффективных категорий на основе электроэнцефалограммы
WO2023172791A1 (en) * 2022-03-10 2023-09-14 Ice Neurosystems, Inc. Systems and methods for guided eeg stimulation

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2409825A1 (en) * 2000-05-19 2001-11-22 Michael Sasha John System and method for objective evaluation of hearing using auditory steady-state responses
US20040064066A1 (en) * 2000-05-19 2004-04-01 John Michael S. System and method for objective evaluation of hearing using auditory steady-state responses
JP2004179965A (ja) * 2002-11-27 2004-06-24 Chugoku Hochoki Center:Kk 補聴器の自動増幅特性調整装置
WO2008038650A1 (fr) * 2006-09-27 2008-04-03 National University Corporation Chiba University Dispositif et système d'inspection du potentiel évoqué
JP2009288354A (ja) * 2008-05-28 2009-12-10 Japan Science & Technology Agency 音響装置及び音響調整方法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8014870B2 (en) * 2004-08-11 2011-09-06 Seidman Michael D Method and apparatus for the treatment of tinnitus
US20090163828A1 (en) * 2006-05-16 2009-06-25 Board Of Trustees Of Southern Illinois University Tinnitus Testing Device and Method
EP2485644B1 (en) * 2009-10-09 2016-08-24 Auckland Uniservices Limited Tinnitus treatment system and method

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040204659A1 (en) * 2000-05-19 2004-10-14 John Michael S. System and method for objective evaluation of hearing using auditory steady-state responses
CA2409825A1 (en) * 2000-05-19 2001-11-22 Michael Sasha John System and method for objective evaluation of hearing using auditory steady-state responses
EP1284647A2 (en) * 2000-05-19 2003-02-26 Baycrest Centre for Geriatric Care System and method for objective evaluation of hearing using auditory steady-state responses
JP2003533258A (ja) * 2000-05-19 2003-11-11 サシャ ジョン マイケル 聴覚上の定常状態応答を使用した聴力を客観的に評価するためのシステム及び方法
US20040064066A1 (en) * 2000-05-19 2004-04-01 John Michael S. System and method for objective evaluation of hearing using auditory steady-state responses
JP4707920B2 (ja) * 2000-05-19 2011-06-22 ベイクレスト・センター・フォー・ジェリアトリック・ケア 聴覚上の定常状態応答を使用した聴力を客観的に評価するためのシステム及び方法
US20010049480A1 (en) * 2000-05-19 2001-12-06 John Michael Sasha System and methods for objective evaluation of hearing using auditory steady-state responses
DE60135741D1 (de) * 2000-05-19 2008-10-23 Baycrest Ct For Geriatric Care Vorrichtung zur objektiven hörbewertung bei anwendung von auditiven stationären evozierten potentialen
ATE407622T1 (de) * 2000-05-19 2008-09-15 Baycrest Ct For Geriatric Care Vorrichtung zur objektiven hörbewertung bei anwendung von auditiven stationären evozierten potentialen
JP2004179965A (ja) * 2002-11-27 2004-06-24 Chugoku Hochoki Center:Kk 補聴器の自動増幅特性調整装置
JP2005296607A (ja) * 2003-08-05 2005-10-27 Baycrest Centre For Geriatric Care 聴力の定常状態の応答を使用して聴力を客観的に評価するためのシステムおよび方法
EP1541082A1 (en) * 2003-08-05 2005-06-15 Baycrest Centre for Geriatric Care System and method for objective evaluation of hearing using auditory steady-state responses
WO2008038650A1 (fr) * 2006-09-27 2008-04-03 National University Corporation Chiba University Dispositif et système d'inspection du potentiel évoqué
JP2009288354A (ja) * 2008-05-28 2009-12-10 Japan Science & Technology Agency 音響装置及び音響調整方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017221721A (ja) * 2015-02-24 2017-12-21 国立大学法人大阪大学 痛み測定装置および痛み測定システム
JP2017148404A (ja) * 2016-02-26 2017-08-31 日本光電工業株式会社 誘発電位測定装置
US11020039B2 (en) 2016-02-26 2021-06-01 Nihon Kohden Corporation Evoked potential measuring apparatus
JP2018015212A (ja) * 2016-07-27 2018-02-01 凸版印刷株式会社 脳波信号処理システム、脳波信号処理方法及びプログラム

Also Published As

Publication number Publication date
US20130266163A1 (en) 2013-10-10
JP5215508B1 (ja) 2013-06-19
US9241226B2 (en) 2016-01-19
CN103081515A (zh) 2013-05-01
CN103081515B (zh) 2016-12-21
JPWO2013001836A1 (ja) 2015-02-23

Similar Documents

Publication Publication Date Title
JP5215508B1 (ja) 不快閾値推定システム、方法およびそのプログラム、補聴器調整システムおよび不快閾値推定処理回路
JP5042398B1 (ja) 脳波記録装置、補聴器、脳波記録方法およびそのプログラム
JP5406414B2 (ja) 不快音圧推定システム、不快音圧推定装置、不快音圧推定システムの作動方法およびそのコンピュータプログラム
JP5091366B2 (ja) 音圧評価システム、その方法およびそのプログラム
JP5144835B2 (ja) うるささ判定システム、装置、方法およびプログラム
US9712931B2 (en) Hearing aid gain determination system, hearing aid gain determination method, and computer program
JP5215507B1 (ja) 不快音圧決定システム、その方法およびそのプログラム、補聴器調整システムおよび不快音圧決定装置
JP5579352B1 (ja) 不快音圧評価システム、不快音圧評価装置、不快音圧調整装置、不快音圧評価方法およびそのコンピュータプログラム
JP5915944B2 (ja) 不快音圧推定システム、不快音圧推定装置、不快音圧推定方法およびそのコンピュータプログラム
JP5144836B2 (ja) 語音聴取の評価システム、その方法およびそのプログラム
US9439003B2 (en) Uncomfortable sound pressure estimation system, uncomfortable sound pressure estimation processor, uncomfortable sound pressure estimation method, and computer program thereof

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201280002600.0

Country of ref document: CN

ENP Entry into the national phase

Ref document number: 2012553114

Country of ref document: JP

Kind code of ref document: A

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12803888

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12803888

Country of ref document: EP

Kind code of ref document: A1