WO2023074655A1 - 情報処理装置、情報処理方法、プログラムおよび記録媒体 - Google Patents
情報処理装置、情報処理方法、プログラムおよび記録媒体 Download PDFInfo
- Publication number
- WO2023074655A1 WO2023074655A1 PCT/JP2022/039618 JP2022039618W WO2023074655A1 WO 2023074655 A1 WO2023074655 A1 WO 2023074655A1 JP 2022039618 W JP2022039618 W JP 2022039618W WO 2023074655 A1 WO2023074655 A1 WO 2023074655A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- filter
- sound
- unit
- sound collection
- collection environment
- Prior art date
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 60
- 238000003672 processing method Methods 0.000 title claims description 15
- 238000001514 detection method Methods 0.000 claims abstract description 62
- 238000000034 method Methods 0.000 claims description 37
- 230000001568 sexual effect Effects 0.000 claims 1
- 230000001052 transient effect Effects 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 1
- 238000007430 reference method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/20—Speech recognition techniques specially adapted for robustness in adverse environments, e.g. in noise, of stress induced speech
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
Definitions
- the present invention relates to an information processing device, an information processing method, a program, and a recording medium.
- the user's uttered voice, noise, noise, etc. are collected, and filter characteristics for noise removal are determined based on the collected sound. .
- the CPU in order to calculate the filter characteristics, the CPU always needs to perform high-load arithmetic processing, so there is a problem that resource occupancy of the CPU, memory, and the like increases.
- Another example is the problem of increased power consumption due to constant high-speed arithmetic processing.
- the present invention has been made in view of the above-described problems, and provides an information processing apparatus, an information processing method, a program, and a recording medium that reduce the frequency of execution of processing for calculating filter characteristics for removing noise.
- the main purpose is to provide
- the invention according to claim 1 provides a filter characteristic calculation unit for calculating a filter characteristic for removing noise from the sound based on the collected sound, and the filter characteristic calculation unit a filter unit that removes noise from the collected sound based on the filter characteristics calculated by a sound collection environment detection unit that detects a sound collection environment of the sound based on sensor information; and the sound collection environment detection unit. a filter control unit that, when a change in the sound pickup environment detected by the unit is detected, causes the filter characteristic calculation unit to calculate the filter characteristics and sets the filter characteristics in the filter unit be.
- an information processing method in an information processing apparatus including a filter characteristic calculation section, a filter section, a sound pickup environment detection section, and a filter control section, wherein the filter characteristic calculation a first step in which a unit calculates a filter characteristic for removing noise from the sound based on the collected sound; and the filter unit calculates a filter characteristic based on the filter characteristic calculated by the filter characteristic calculation unit.
- a second step of removing noise from the collected sound a third step of detecting the sound pickup environment of the sound based on the sensor information; a fourth step of calculating the filter characteristics in the filter characteristic calculation unit and setting the filter characteristics in the filter unit when a change in the sound collection environment detected by the sound collection environment detection unit is detected;
- a program for causing a computer to execute an information processing method in an information processing apparatus comprising a filter characteristic calculation section, a filter section, a sound pickup environment detection section, and a filter control section. a first step in which the filter characteristic calculation unit calculates a filter characteristic for removing noise from the sound based on the collected sound; a second step of removing noise from the collected sound based on the calculated filter characteristics; and a third step of detecting the sound collection environment of the sound based on the sensor information. and, when the filter control unit detects a change in the sound collection environment detected by the sound collection environment detection unit, the filter characteristic calculation unit calculates the filter characteristic, and the filter characteristic is calculated by the filter unit.
- a program for causing a computer to execute an information processing method comprising:
- a program for causing a computer to execute an information processing method in an information processing apparatus comprising a filter characteristic calculation section, a filter section, a sound pickup environment detection section, and a filter control section.
- a computer-readable non-transitory recording medium recording the first, wherein the filter characteristic calculation unit calculates a filter characteristic for removing noise from the sound based on the collected sound.
- a recording medium recording a program for causing a computer to execute an information processing method comprising a fourth step of calculating the filter characteristics in and setting the filter characteristics in the filter unit.
- FIG. 1 is a diagram showing the configuration of an information processing apparatus according to Example 1 of the present invention
- FIG. It is a figure which shows the processing flow of the filter control part of the information processing apparatus which concerns on Example 1 of this invention.
- FIG. 6 is a diagram illustrating a method of detecting a change in sound pickup environment in the filter control unit of the information processing apparatus according to the first embodiment of the present invention
- FIG. 5 is a diagram showing the configuration of an information processing apparatus according to Example 2 of the present invention; It is the figure which illustrated the filter table of the information processing apparatus which concerns on Example 2 of this invention. It is a figure which shows the processing flow of the filter control part of the information processing apparatus which concerns on Example 2 of this invention.
- FIG. 6 is a diagram illustrating a method of detecting a change in sound pickup environment in the filter control unit of the information processing apparatus according to the first embodiment of the present invention
- FIG. 5 is a diagram showing the configuration of an information processing apparatus according to Example 2 of the present invention
- It is the figure which illustrated the
- FIG. 10 is a diagram illustrating comparison processing between a filter table and a sound pickup environment in the filter control unit of the information processing apparatus according to the second embodiment of the present invention
- FIG. 10 is a diagram illustrating a sound collection environment detected by a sound collection environment detection unit of an information processing apparatus according to another embodiment of the present invention
- the information processing apparatus includes a filter characteristic calculation unit that calculates filter characteristics for removing noise from the sound based on the collected sound, and based on the filter characteristics calculated by the filter characteristic calculation unit: , a filter unit that removes noise from the collected sound, a sound collection environment detection unit that detects the sound collection environment of the sound based on sensor information, and a change in the sound collection environment detected by the sound collection environment detection unit. and a filter control section for causing the filter characteristic calculating section to calculate a filter characteristic when the filter characteristic is calculated, and setting the filter characteristic to the filter section.
- the filter characteristic calculation unit calculates filter characteristics for removing noise from the collected sound based on the collected sound.
- the filter section removes noise from the picked-up sound based on the filter characteristics calculated by the filter characteristic calculation section.
- the sound-collecting environment detection unit detects a sound-collecting environment in which sound is being collected, based on at least an image of the inside of the vehicle and information indicating the running state of the vehicle.
- the filter control unit causes the filter characteristic calculation unit to calculate filter characteristics, and sets the filter characteristics in the filter unit. In other words, when there is no change in the sound pickup environment, there is no significant change in the generated noise, so the filter characteristic calculation process in the filter characteristic calculator is not executed. As a result, it is possible to reduce the execution frequency of the filter characteristic calculation process for removing noise.
- the filter control unit determines that the sound collection environment detected by the sound collection environment detection unit has changed, the filter control unit compares the filter characteristics calculated by the filter characteristic calculation unit with the sound collection environment when the filter characteristics were calculated.
- the linked filter table is referenced, and if the changed sound collection environment is in the filter table, the filter characteristic linked to the changed sound collection environment is set in the filter unit.
- the filter control unit causes the filter characteristic calculation unit to calculate the filter characteristics and sets the filter characteristics in the filter unit if the changed sound collection environment is not in the filter table. do. That is, when the changed sound pickup environment is in the filter table, the filter characteristic calculation process in the filter characteristic calculator is not executed.
- the filter control unit acquires the sound pickup environment when the filter characteristics are calculated by the filter characteristic calculation unit. Add to the filter table by associating with the filter characteristics obtained. That is, since the optimum filter characteristics for each sound pickup environment can be accumulated in the filter table only by operating the information processing device, the filter control unit can obtain the optimum filter characteristics for the filter unit by referring to the filter table. Filter characteristics can be set.
- Example 1 An information processing apparatus 1 according to the present embodiment will be described with reference to FIGS. 1 to 3.
- FIG. 1 An information processing apparatus 1 according to the present embodiment will be described with reference to FIGS. 1 to 3.
- FIG. 1 An information processing apparatus 1 according to the present embodiment will be described with reference to FIGS. 1 to 3.
- FIG. 1 An information processing apparatus 1 according to the present embodiment will be described with reference to FIGS. 1 to 3.
- FIG. 1 An information processing apparatus 1 according to the present embodiment will be described with reference to FIGS. 1 to 3.
- the information processing device 1 includes at least a sound pickup unit 10, a filter unit 20, a filter characteristic calculation unit 30, a sensor unit 40, a sound pickup environment detection unit 50, and a filter control unit 60.
- the sound pickup unit 10 is configured by, for example, a microphone, picks up sound in the vehicle interior, and transmits the picked sound to the filter unit 20 and the filter characteristic calculation unit 30 .
- the sound picked up by the sound pickup unit 10 includes the user's uttered voice, noise generated around the microphone, noise, and the like.
- the sound picked up by the microphone installed in the vehicle cabin includes engine sound, wind noise, road noise, operating sound of the air conditioner, music output from the speaker, etc. ing.
- the microphone may be configured by using, for example, a microphone for hands-free calling installed in the vehicle, as long as it can pick up the voice inside the vehicle.
- the filter unit 20 removes noise from the sound picked up by the sound pickup unit 10 based on filter characteristics received from the filter control unit 60, which will be described later.
- the noise-removed voice is input to a voice recognition engine (not shown) to detect words uttered by the user.
- the filter characteristic calculation unit 30 Upon receiving a calculation instruction from the filter control unit 60, which will be described later, the filter characteristic calculation unit 30 calculates filter characteristics for removing noise from the picked-up sound based on the sound transmitted from the sound pickup unit 10. do. Specifically, the filter characteristic calculation unit 30 divides the sound picked up by the sound pickup unit 10 into, for example, 20 seconds of sound data, and calculates filter characteristics for removing noise for each sound data. The filter characteristics calculated by the filter characteristics calculator 30 are transmitted to the filter controller 60, which will be described later.
- the sensor unit 40 includes at least a camera that captures an image of the inside of the vehicle and a sensor that detects the state of the vehicle, and transmits acquired sensor information to the sound pickup environment detection unit 50 described later.
- the image to be transmitted as sensor information from the sensor unit 40 should be an image inside the vehicle. You may make it Examples of sensor information for detecting the state of the vehicle include vehicle speed pulse, acceleration sensor, GPS signal, and various sensor information connected to an ECU (Electronic Control Unit) of the vehicle.
- ECU Electronic Control Unit
- the sound collection environment detection unit 50 detects the sound collection environment based on sensor information from the sensor unit 40 . Specifically, the sound-collecting environment detection unit 50 analyzes an image captured inside the vehicle, and detects, for example, the boarding position of the passenger, the gender of the passenger, the open/close state of the windows of the vehicle, etc. as the sound-collecting environment. Further, the sound collection environment detection unit 50 detects the running speed of the vehicle, the engine speed, the operating state of the air conditioner, etc. as the sound collection environment based on the sensor information indicating the state of the vehicle. The sound collection environment detection unit 50 transmits the detected sound collection environment to the filter control unit 60 .
- the sound collection environment detection unit 50 also detects the sound collection environment when the filter characteristic calculation unit 30 calculates the filter characteristics, and transmits the detected sound collection environment to the filter control unit 60 .
- the sound collection environment detection unit 50 calculates the average value of the sound collection environment (average value of engine speed, running speed, etc.) during the period when the filter characteristics are being calculated in the filter characteristic calculation unit 30, The sound pickup environment is transmitted to the filter control unit 60 .
- the filter control unit 60 causes the filter characteristic calculation unit 30 to calculate filter characteristics and sets the filter characteristics in the filter unit 20 . In other words, the filter control unit 60 does not transmit an execution instruction of the filter characteristic calculation process to the filter characteristic calculation unit 30 until the change in the sound pickup environment is confirmed. Details of the processing of the filter control unit 60 will be described below.
- step S100 it is determined whether or not the ACC power supply (accessory power supply) of the vehicle is on. If it is determined that the ACC power supply of the vehicle is not on ("NO” in step S100), the process returns to step S100 and shifts to the standby state. On the other hand, if it is determined that the ACC power supply of the vehicle is on ("YES" in step S100), the process proceeds to step S110.
- step S100 When it is determined that the ACC power supply of the vehicle is on ("YES" in step S100), the filter characteristic calculated by the filter characteristic calculator 30 is set in the filter section 20 (step S110).
- the filter control unit 60 acquires the sound collection environment from the sound collection environment detection unit 50 when the filter characteristic calculation unit 30 calculates the filter characteristics (step S110), and stores it in a memory (not shown). (Step S120). Here, in order to determine whether or not the sound pickup environment has changed, the filter control unit 60 stores in the memory the sound pickup environment when the filter characteristics set in the filter unit 20 were last calculated.
- the filter control unit 60 acquires the current sound collection environment from the sound collection environment detection unit 50 (step S130).
- the filter control unit 60 selects the sound pickup environment acquired in step S130 and the sound pickup environment (sound pickup environment stored in a memory (not shown)) when the filter characteristics set in the filter unit 20 were finally calculated. By comparison, it is determined whether or not there is a change in the sound pickup environment (step S140). If it is determined that the sound pickup environment has not changed ("NO” in step S140), the process proceeds to step S170. On the other hand, if it is determined that the sound pickup environment has changed (“YES" in step S140), the process proceeds to step S150.
- the filter characteristic calculation unit 30 executes a filter characteristic calculation process, and the calculated filter characteristic is used as the filter characteristic. It is set in the unit 20 (step S150). That is, the filter control section 60 causes the filter characteristic calculation section 30 to calculate the filter characteristic when the sound pickup environment changes.
- the filter control unit 60 acquires the sound collection environment from the sound collection environment detection unit 50 when the filter characteristic calculation unit 30 calculates the filter characteristics (step S150), and stores it in a memory (not shown). (Step S160).
- the sound collection environment received from the sound collection environment detection unit 50 is compared with the sound collection environment stored in the memory (not shown), and it is determined whether or not the sound collection environment has changed. how to do this.
- the information indicating the sound collection environment acquired from the sound collection environment detection unit 50 there is a sound collection environment whose values change greatly during driving, such as the running speed and the number of revolutions of the engine. Therefore, when determining whether or not there is a change in the sound collection environment, the amount of change between the received sound collection environment value and the sound collection environment value stored in the memory (not shown) is calculated.
- the filter control unit 60 determines that the running speed values K11 and K21 are the same running speed. do.
- the filter control unit 60 determines that there is no change in the sound collection environment (the sound collection environment K1 stored in the memory and the sound collection environment K2 received from the sound collection environment detection unit 50 are determined to be the same).
- the filter control unit 60 It is determined that the sound environment has changed (it is determined that the sound collection environment K1 stored in the memory and the sound collection environment K2 received from the sound collection environment detection unit 50 are not the same).
- step S170 It is determined whether or not the ACC power supply (accessory power supply) of the vehicle is on (step S170). If it is determined that the ACC power supply of the vehicle is on ("YES” in step S170), the process returns to step S130 to continue the process. On the other hand, if it is determined that the ACC power supply of the vehicle is not on ("NO" in step S170), the process is terminated.
- the information processing apparatus 1 includes a filter characteristic calculation unit 30 for calculating filter characteristics for removing noise from the sound based on the sound collected by the sound collection unit 10, and the filter characteristic calculation unit 30
- a filter unit 20 that removes noise from the collected sound based on the calculated filter characteristics
- a sound collection environment detection unit 50 that detects the sound collection environment of the sound based on the sensor information of the sensor unit 40
- a filter control unit 60 that causes the filter characteristic calculation unit 30 to calculate filter characteristics when a change in the sound pickup environment detected by the environment detection unit 50 is detected, and sets the filter characteristics in the filter unit 20.
- the filter characteristic calculation section 30 calculates the filter characteristic and sets the filter characteristic in the filter section 20 . That is, when there is no change in the sound pickup environment, there is no need to change the filter characteristics set in the filter unit 20, so the filter characteristics calculation process in the filter characteristics calculation unit 30 is not executed. As a result, it is possible to reduce the execution frequency of the filter characteristic calculation process for removing noise. In addition, since it is not necessary to constantly execute high-load arithmetic processing to calculate the filter characteristics, the resource occupancy rate of the CPU, memory, and the like can be reduced. In addition, since the information processing apparatus 1 executes the filter characteristic calculation process only when the sound pickup environment of the space where the user speaks changes, the frequency of high-load arithmetic processing is reduced, and the power consumption is reduced. can be done.
- the sensor information of the sensor unit 40 includes at least an image of the interior of the vehicle and information indicating the running state of the vehicle.
- changes in the sound pickup environment such as the riding position, gender, driving speed, engine speed, window open/close status, air conditioner operation status, etc.
- the value of the filter characteristic calculated by the filter characteristic calculator 30 varies greatly depending on the sound pickup environment.
- the engine sound included in the collected sound changes in volume and frequency depending on the engine speed.
- road noise included in the collected sound varies in volume and frequency depending on the running speed.
- the frequency of the utterance voice included in the collected voice changes depending on the gender of the utterer.
- the filter characteristic calculation process is executed only when the sound pickup environment of the space where the user speaks changes, so that the execution frequency of the filter characteristic calculation process for removing noise can be reduced.
- the sound collected by the sound pickup unit 10 includes noise and the user's uttered voice, and the sound from which the noise is removed by the filter unit 20 is transmitted to the speech recognition engine. That is, since the optimum filter characteristic is set in the filter unit 20 under the control of the filter control unit 60, noise can be removed from the sound picked up by the sound pickup unit 10. FIG. As a result, it is possible to improve the speech recognition rate of the speech recognition engine.
- Example 2 An information processing apparatus 1A according to the present embodiment will be described with reference to FIGS. 4 to 7.
- FIG. 1A An information processing apparatus 1A according to the present embodiment will be described with reference to FIGS. 4 to 7.
- FIG. 1A An information processing apparatus 1A according to the present embodiment will be described with reference to FIGS. 4 to 7.
- FIG. 1A An information processing apparatus 1A according to the present embodiment will be described with reference to FIGS. 4 to 7.
- the configuration of the information processing apparatus 1A according to this embodiment will be described with reference to FIG.
- the information processing device 1A includes a sound pickup section 10, a filter section 20, a filter characteristic calculation section 30, a sensor section 40, a sound pickup environment detection section 50, and a filter control section 60A. .
- the filter control unit 60A changes the filter characteristic calculated by the filter characteristic calculation unit 30 and the sound collection environment when the filter characteristic was calculated.
- the linked filter table is referred to, and if the changed sound collection environment is present in the filter table, the filter characteristic linked to the changed sound collection environment is set in the filter unit 20 . That is, when detecting a change in the sound pickup environment, the filter control unit 60A refers to the filter table that associates the filter characteristics calculated by the filter characteristic calculation unit 30 with the sound pickup environment when the filter characteristics were calculated. to determine the filter characteristics to be set in the filter unit 20 .
- the filter unit 20 is set to have filter characteristics associated with the changed sound-collecting environment.
- the filter characteristic calculation unit 30 is caused to calculate the filter characteristic, and the filter characteristic is set in the filter unit 20 .
- the filter control unit 60A associates the changed sound collection environment with the filter characteristics calculated by the filter characteristic calculation unit 30 and adds them to the filter table.
- the sound collection environment (K1 to K5) acquired from the sound collection environment detection unit 50, such as the boarding position, the gender of the occupant, the open/closed state of the vehicle window, the running speed,
- the filter table that links each information such as engine speed, air conditioner operation status, and filter characteristics (F1 to F5), if the same sound pickup environment is not found in the filter table, the changed sound pickup environment and The filter characteristics calculated by the filter characteristics calculator 30 are associated with each other and added to the filter table.
- the filter control unit 60A it is determined whether or not there is a sound collection environment that is the same as the changed sound collection environment among the sound collection environments K1 to K5 that have already been registered in the filter table. If not, the new sound collection environment K6 (changed sound collection environment) and the filter characteristic F6 calculated by the filter characteristic calculator 30 are linked and added to the filter table. Details of the processing of the filter control unit 60A will be described below.
- step S100 it is determined whether or not the ACC power supply (accessory power supply) of the vehicle is on. If it is determined that the ACC power supply of the vehicle is not on ("NO” in step S100), the process returns to step S100 and shifts to the standby state. On the other hand, if it is determined that the ACC power supply of the vehicle is on ("YES" in step S100), the process proceeds to step S110.
- step S100 If it is determined that the ACC power supply of the vehicle is on ("YES" in step S100), the filter characteristics calculated by the filter characteristics calculation unit 30 are acquired, and the filter characteristics are set in the filter unit 20 (step S110).
- the filter control unit 60A acquires the sound collection environment from the sound collection environment detection unit 50 when the filter characteristic calculation unit 30 calculates the filter characteristics (step S110), and stores it in a memory (not shown). (Step S120). In other words, the filter control unit 60A stores in the memory the sound pickup environment when the filter characteristics set in the filter unit 20 were last calculated in order to determine whether or not the sound pickup environment has changed.
- the filter control unit 60A acquires the current sound collection environment from the sound collection environment detection unit 50 (step S130).
- the filter control unit 60A selects the sound pickup environment acquired in step S130 and the sound pickup environment (sound pickup environment stored in a memory (not shown)) when the filter characteristics set in the filter unit 20 were finally calculated. By comparison, it is determined whether or not there is a change in the sound pickup environment (step S140). If it is determined that the sound pickup environment has not changed ("NO” in step S140), the process proceeds to step S170. On the other hand, if it is determined that the sound pickup environment has changed (“YES" in step S140), the process proceeds to step S200.
- step S140 If it is determined that the sound collection environment has changed ("YES" in step S140), it is determined whether or not the same sound collection environment as the changed sound collection environment exists in the filter table (step S200). If it is determined that the filter table has the same sound collection environment as the changed sound collection environment ("YES" in step S200), the process proceeds to step S220. On the other hand, if it is determined that the same sound collection environment as the changed sound collection environment is not in the filter table ("NO" in step S200), the process proceeds to step S150.
- the filter control unit 60A determines that the running speed values K11 and KA1 are the same running speed. do. Also, in the engine speed, if the amount of change calculated in the same manner is smaller than a predetermined value (for example, if the amount of change is ⁇ 200 rpm), the engine speed values K12 and KA2 are the same engine speed. It is determined that Note that, as shown in FIG.
- the sound pickup environment K3 and the changed sound pickup environment KA have the same values for both the traveling speed and the engine speed, and the vehicle position, gender, window open/closed state, and air conditioner operation. Since the situations are the same, the filter control unit 60A determines that the sound collection environment K3 and the changed sound collection environment KA are the same sound collection environment.
- the filter control unit 60A determines that the sound pickup environment that is the same as the changed sound pickup environment is not in the filter table ("NO" in step S200)
- the filter control unit 60A causes the filter characteristic calculation unit 30 to execute the filter characteristic calculation process.
- the calculated filter characteristics are set in the filter unit 20 (step S150).
- the filter control unit 60A acquires the sound collection environment from the sound collection environment detection unit 50 when the filter characteristic calculation unit 30 calculates the filter characteristics (step S150), and stores it in a memory (not shown). (Step S160).
- step S150 the filter characteristics set in the filter unit 20 and the sound collection environment when the filter characteristics were calculated (sound collection environment acquired in step S160) are linked and added to the filter table (step S210). .
- step S200 if it is determined that the same sound collection environment as the changed sound collection environment exists in the filter table ("YES" in step S200), the filter characteristics associated with the same sound collection environment as the changed sound collection environment are set. Acquired from the filter table, the filter characteristics are set in the filter unit 20, and the sound pickup environment acquired in step S130 is stored in a memory (not shown) (step S220).
- step S170 It is determined whether or not the ACC power supply (accessory power supply) of the vehicle is on (step S170). If it is determined that the ACC power supply of the vehicle is on ("YES” in step S170), the process returns to step S130 to continue the process. On the other hand, if it is determined that the ACC power supply of the vehicle is not on ("NO" in step S170), the process is terminated.
- the filter control unit 60A of the information processing apparatus 1A detects a change in the sound collection environment detected by the sound collection environment detection unit 50, the filter characteristic calculated by the filter characteristic calculation unit 30 and the filter characteristic is referred to the filter table linked with the sound collection environment at the time of calculation, and if the changed sound collection environment is in the filter table, the filter characteristic linked to the changed sound collection environment is set in the filter unit 20 do. That is, when the sound pickup environment detected by the sound pickup environment detection unit 50 changes, the filter control unit 60A refers to the filter table and determines the filter characteristics to be set in the filter unit 20.
- the filter characteristic to be set in the filter unit 20 is determined by referring to the filter table without issuing an instruction to execute the filter characteristic calculation process.
- an instruction to calculate the filter characteristics is transmitted to the filter characteristics calculation unit 30 and the calculated filter characteristics are set in the filter unit 20 . Accordingly, when there is a change in the sound pickup environment in the space where the user speaks and when there is no changed sound pickup environment in the filter table, the filter characteristic calculation process is performed. can be executed less frequently. In addition, since it is not necessary to constantly execute high-load arithmetic processing for calculating the filter characteristics, the resource occupancy rate of the CPU, memory, and the like can be reduced. Further, the information processing apparatus 1A executes the filter characteristic calculation process when the sound pickup environment in the space where the user speaks has changed and when there is no changed sound pickup environment in the filter table. Power can be reduced.
- the filter control unit 60A of the information processing apparatus 1A acquires the sound pickup environment when the filter characteristics are calculated by the filter characteristic calculation unit 30, and if the sound pickup environment is not in the filter table, The sound pickup environment and the filter characteristics calculated by the filter characteristics calculator are linked and added to the filter table. Also, the sound pickup environment is detected based on information including at least an image of the interior of the vehicle and information indicating the running state of the vehicle.
- the value of the filter characteristic calculated by the filter characteristic calculator 30 varies greatly depending on the sound pickup environment. For example, the engine sound included in the collected sound changes in volume and frequency depending on the engine speed. In addition, road noise included in the collected sound varies in volume and frequency depending on the running speed.
- the frequency of the utterance voice included in the collected voice changes depending on the gender of the utterer. Therefore, by linking the sound pickup environment when the filter characteristics are calculated and the calculated filter characteristics and accumulating them in the filter table, it is possible to accumulate optimum filter characteristics for the vehicle and the occupant. That is, just by operating the information processing device 1A, the filter characteristics for each sound pickup environment that are optimal for the space can be accumulated in the filter table. filter characteristics can be set.
- Information such as that shown in FIG. 8 may be further acquired as the sound collection environment detected by the sound collection environment detection unit 50 of the information processing apparatus 1 or 1A described above.
- the current weather conditions and the driving conditions of surrounding vehicles may be detected as the sound pickup environment from images of the inside and outside of the vehicle captured by a camera. Since there is a possibility that running noise will increase during rain compared to when it is fine, adding the current weather as a condition for the sound pickup environment makes it possible to set more optimal filter characteristics. In addition, when trucks, motorcycles, etc. are running around the vehicle, there is a possibility that the running noise will increase. Properties can be set.
- the position where the vehicle is currently running may be detected as the sound pickup environment from the GPS (Global Positioning System) information of the own vehicle. For example, since there is noise that occurs peculiar to the traveling position such as highways, residential areas, urban areas, etc., it is possible to set more optimal filter characteristics by grasping the traveling position.
- GPS Global Positioning System
- the above-described sound collection environment detection unit 50 detects the boarding position based on the image captured inside the vehicle, but the position of the speaker is detected as the sound collection environment based on the sound collected by the microphone array. You may do so. As a result, even if a camera for imaging the inside of the vehicle cannot be installed, it is possible to ascertain the boarding position.
- the filter control unit 60A generates the filter table. You can create it. As a result, the load of filter table generation processing in the filter control unit 60A can be eliminated, so that power consumption can be reduced. Moreover, since the capacity of the memory for storing and generating the filter table can be reduced or deleted, the cost of the information processing apparatus 1A can be reduced. Also, the filter table stored in the server may be shared with other users. Specifically, for example, the server aggregates and analyzes the data of the same filter table for each vehicle model, and generates a filter table that can be shared for each vehicle model. As a result, since the filter characteristics can be set by referring to the shared filter table, the optimum filter characteristics can be set when the information processing apparatus 1A is used for the first time.
- the filter control unit 60A described above may change the reference method of the filter table based on the information on the traveling speed and acceleration of the vehicle acquired from the sound collection environment detection unit 50.
- the filter control unit 60A determines that the vehicle is currently running at a constant speed based on the information on the running speed or acceleration of the vehicle acquired from the sound collection environment detection unit 50, the engine speed It may be determined whether or not there is a sound pickup environment in which sound is picked up in the filter table by referring only to the traveling speed value without referring to the value. As a result, it is possible to change the method of referring to the filter table according to the driving conditions of the vehicle, so that more optimal filter characteristics can be determined from the filter table.
- information processing device 1A information processing device 10; sound pickup unit 20; filter unit 30; filter characteristic calculation unit 40;
Landscapes
- Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Quality & Reliability (AREA)
- Signal Processing (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
Abstract
ノイズを除去するためのフィルタ特性の算出処理の実行頻度を下げる情報処理装置を提供する。 収音部１０において収音した音声に基づいて、音声から雑音を除去するためのフィルタ特性を算出するフィルタ特性算出部３０と、フィルタ特性算出部３０によって算出されたフィルタ特性に基づいて、収音した音声から雑音を除去するフィルタ部２０と、センサ部４０のセンサ情報に基づいて音声の収音環境を検出する収音環境検出部５０と、収音環境検出部５０において検出された収音環境の変化を検出したとき、フィルタ特性算出部３０においてフィルタ特性を算出させ、該フィルタ特性をフィルタ部２０に設定するフィルタ制御部６０と、を備えている。
Description
本発明は、情報処理装置、情報処理方法、プログラムおよび記録媒体に関する。
近年、ユーザがウェイクワード（ウェイクアップワードあるいはホットワードともいう）を発話することにより音声アシスタントを起動させ、ユーザの発話により、操作指示や情報検索等を行う機器、例えば、スマートフォン、スマートスピーカ等が普及している。
一般に、この種の機器は、騒音や雑音（ノイズ）が含まれている環境下で動作させると、ユーザが発話した言葉を正しく検出できないことがある。
ここで、この種の機器を車輌に搭載した場合には、走行状態（走行速度、エンジン回転数等）や車両状態（エアコン作動状況、窓開閉状況等）により、騒音や雑音等の大きさが大きく変化するため、収音した音声からノイズを除去し、ユーザの発話した言葉を検出しやすくする技術が開示されている（例えば、特許文献１参照）。
一般に、この種の機器は、騒音や雑音（ノイズ）が含まれている環境下で動作させると、ユーザが発話した言葉を正しく検出できないことがある。
ここで、この種の機器を車輌に搭載した場合には、走行状態（走行速度、エンジン回転数等）や車両状態（エアコン作動状況、窓開閉状況等）により、騒音や雑音等の大きさが大きく変化するため、収音した音声からノイズを除去し、ユーザの発話した言葉を検出しやすくする技術が開示されている（例えば、特許文献１参照）。
上述した先行技術では、ユーザの発話音声、騒音や雑音（ノイズ）等が含まれた音声を収音し、その収音した音声に基づいて、ノイズを除去するためのフィルタ特性を決定している。
しかしながら、フィルタ特性を算出するために、ＣＰＵは、常に高負荷な演算処理を実行する必要があるため、ＣＰＵ、メモリ等のリソース占有率が高くなるという課題が一例として挙げられる。
また、常に高速な演算処理が行われるために、消費電力が増加するという課題も一例として挙げられる。
しかしながら、フィルタ特性を算出するために、ＣＰＵは、常に高負荷な演算処理を実行する必要があるため、ＣＰＵ、メモリ等のリソース占有率が高くなるという課題が一例として挙げられる。
また、常に高速な演算処理が行われるために、消費電力が増加するという課題も一例として挙げられる。
本発明は、上述の一例として挙げられた課題に鑑みてなされたものであり、ノイズを除去するためのフィルタ特性の算出処理の実行頻度を下げる情報処理装置、情報処理方法、プログラムおよび記録媒体を提供することを主な目的とする。
上記課題を解決するために、請求項１に記載の発明は、収音した音声に基づいて、前記音声から雑音を除去するためのフィルタ特性を算出するフィルタ特性算出部と、前記フィルタ特性算出部によって算出された前記フィルタ特性に基づいて、収音した音声から雑音を除去するフィルタ部と、センサ情報に基づいて前記音声の収音環境を検出する収音環境検出部と、前記収音環境検出部において検出された前記収音環境の変化を検出したとき、前記フィルタ特性算出部において前記フィルタ特性を算出させ、該フィルタ特性を前記フィルタ部に設定するフィルタ制御部と、を備える情報処理装置である。
また、請求項６に記載の発明は、フィルタ特性算出部と、フィルタ部と、収音環境検出部と、フィルタ制御部とを備えた情報処理装置における情報処理方法であって、前記フィルタ特性算出部が、収音した音声に基づいて、前記音声から雑音を除去するためのフィルタ特性を算出する第１の工程と、前記フィルタ部が、前記フィルタ特性算出部によって算出された前記フィルタ特性に基づいて、収音した音声から雑音を除去する第２の工程と、前記収音環境検出部が、センサ情報に基づいて前記音声の収音環境を検出する第３の工程と、前記フィルタ制御部が、前記収音環境検出部において検出された前記収音環境の変化を検出したとき、前記フィルタ特性算出部において前記フィルタ特性を算出させ、該フィルタ特性を前記フィルタ部に設定する第４の工程と、を備える情報処理方法である。
また、請求項７に記載の発明は、フィルタ特性算出部と、フィルタ部と、収音環境検出部と、フィルタ制御部とを備えた情報処理装置における情報処理方法をコンピュータに実行させるためのプログラムであって、前記フィルタ特性算出部が、収音した音声に基づいて、前記音声から雑音を除去するためのフィルタ特性を算出する第１の工程と、前記フィルタ部が、前記フィルタ特性算出部によって算出された前記フィルタ特性に基づいて、収音した音声から雑音を除去する第２の工程と、前記収音環境検出部が、センサ情報に基づいて前記音声の収音環境を検出する第３の工程と、前記フィルタ制御部が、前記収音環境検出部において検出された前記収音環境の変化を検出したとき、前記フィルタ特性算出部において前記フィルタ特性を算出させ、該フィルタ特性を前記フィルタ部に設定する第４の工程と、を備える情報処理方法をコンピュータに実行させるためのプログラムである。
また、請求項８に記載の発明は、フィルタ特性算出部と、フィルタ部と、収音環境検出部と、フィルタ制御部とを備えた情報処理装置における情報処理方法をコンピュータに実行させるためのプログラムを記録したコンピュータによって読み取り可能な非一過性の記録媒体であって、前記フィルタ特性算出部が、収音した音声に基づいて、前記音声から雑音を除去するためのフィルタ特性を算出する第１の工程と、前記フィルタ部が、前記フィルタ特性算出部によって算出された前記フィルタ特性に基づいて、収音した音声から雑音を除去する第２の工程と、前記収音環境検出部が、センサ情報に基づいて前記音声の収音環境を検出する第３の工程と、前記フィルタ制御部が、前記収音環境検出部において検出された前記収音環境の変化を検出したとき、前記フィルタ特性算出部において前記フィルタ特性を算出させ、該フィルタ特性を前記フィルタ部に設定する第４の工程と、を備える情報処理方法をコンピュータに実行させるためのプログラムを記録した記録媒体である。
本実施形態に係る情報処理装置は、収音した音声に基づいて、音声から雑音を除去するためのフィルタ特性を算出するフィルタ特性算出部と、フィルタ特性算出部によって算出されたフィルタ特性に基づいて、収音した音声から雑音を除去するフィルタ部と、センサ情報に基づいて音声の収音環境を検出する収音環境検出部と、収音環境検出部において検出された収音環境の変化を検出したとき、フィルタ特性算出部においてフィルタ特性を算出させ、該フィルタ特性をフィルタ部に設定するフィルタ制御部とを備えている。
フィルタ特性算出部は、収音した音声に基づいて、その音声から雑音を除去するためのフィルタ特性を算出する。
フィルタ部は、フィルタ特性算出部において算出されたフィルタ特性に基づいて、収音した音声から雑音を除去する。
収音環境検出部は、少なくとも車両内を撮像した画像と車両の走行状態を示す情報とに基づいて、音声を収音している収音環境を検出する。
フィルタ制御部は、収音環境検出部において検出した収音環境が変化したと判定したときに、フィルタ特性算出部においてフィルタ特性を算出させ、そのフィルタ特性をフィルタ部に設定する。
つまり、収音環境に変化がない場合には、発生している雑音に大きな変化がないため、フィルタ特性算出部におけるフィルタ特性の算出処理を実行しない。
これにより、雑音を除去するためのフィルタ特性の算出処理の実行頻度を下げることができる。
また、フィルタ制御部は、収音環境検出部において検出された収音環境が変化したと判定したとき、フィルタ特性算出部が算出したフィルタ特性と該フィルタ特性を算出したときの収音環境とを紐づけたフィルタテーブルを参照し、変化した収音環境がフィルタテーブルにある場合には、変化した収音環境に紐づいたフィルタ特性をフィルタ部に設定する。
また、フィルタ制御部は、収音環境の変化を検出したとき、変化した収音環境がフィルタテーブルにない場合には、フィルタ特性算出部においてフィルタ特性を算出させ、そのフィルタ特性をフィルタ部に設定する。
つまり、変化した収音環境がフィルタテーブルにある場合には、フィルタ特性算出部におけるフィルタ特性の算出処理を実行しない。
これにより、雑音を除去するためのフィルタ特性の算出処理の実行頻度をさらに下げることができる。
また、フィルタ制御部は、フィルタ特性算出部においてフィルタ特性を算出したときの収音環境を取得し、その収音環境がフィルタテーブルにない場合には、その収音環境とフィルタ特性算出部において算出したフィルタ特性とを紐づけて、フィルタテーブルに追加する。
すなわち、情報処理装置を動作させるだけで、収音環境毎に最適なフィルタ特性を、フィルタテーブルに蓄積することができるため、フィルタ制御部は、フィルタテーブルを参照することにより、フィルタ部に最適なフィルタ特性を設定することができる。
フィルタ特性算出部は、収音した音声に基づいて、その音声から雑音を除去するためのフィルタ特性を算出する。
フィルタ部は、フィルタ特性算出部において算出されたフィルタ特性に基づいて、収音した音声から雑音を除去する。
収音環境検出部は、少なくとも車両内を撮像した画像と車両の走行状態を示す情報とに基づいて、音声を収音している収音環境を検出する。
フィルタ制御部は、収音環境検出部において検出した収音環境が変化したと判定したときに、フィルタ特性算出部においてフィルタ特性を算出させ、そのフィルタ特性をフィルタ部に設定する。
つまり、収音環境に変化がない場合には、発生している雑音に大きな変化がないため、フィルタ特性算出部におけるフィルタ特性の算出処理を実行しない。
これにより、雑音を除去するためのフィルタ特性の算出処理の実行頻度を下げることができる。
また、フィルタ制御部は、収音環境検出部において検出された収音環境が変化したと判定したとき、フィルタ特性算出部が算出したフィルタ特性と該フィルタ特性を算出したときの収音環境とを紐づけたフィルタテーブルを参照し、変化した収音環境がフィルタテーブルにある場合には、変化した収音環境に紐づいたフィルタ特性をフィルタ部に設定する。
また、フィルタ制御部は、収音環境の変化を検出したとき、変化した収音環境がフィルタテーブルにない場合には、フィルタ特性算出部においてフィルタ特性を算出させ、そのフィルタ特性をフィルタ部に設定する。
つまり、変化した収音環境がフィルタテーブルにある場合には、フィルタ特性算出部におけるフィルタ特性の算出処理を実行しない。
これにより、雑音を除去するためのフィルタ特性の算出処理の実行頻度をさらに下げることができる。
また、フィルタ制御部は、フィルタ特性算出部においてフィルタ特性を算出したときの収音環境を取得し、その収音環境がフィルタテーブルにない場合には、その収音環境とフィルタ特性算出部において算出したフィルタ特性とを紐づけて、フィルタテーブルに追加する。
すなわち、情報処理装置を動作させるだけで、収音環境毎に最適なフィルタ特性を、フィルタテーブルに蓄積することができるため、フィルタ制御部は、フィルタテーブルを参照することにより、フィルタ部に最適なフィルタ特性を設定することができる。
＜実施例１＞
図１から図３を用いて、本実施例に係る情報処理装置１について説明する。
図１から図３を用いて、本実施例に係る情報処理装置１について説明する。
＜情報処理装置１の構成＞
図１を用いて、実施例１に係る情報処理装置１の構成について説明する。
情報処理装置１は、収音部１０と、フィルタ部２０と、フィルタ特性算出部３０と、センサ部４０と、収音環境検出部５０と、フィルタ制御部６０と、を少なくとも含んで構成されている。
図１を用いて、実施例１に係る情報処理装置１の構成について説明する。
情報処理装置１は、収音部１０と、フィルタ部２０と、フィルタ特性算出部３０と、センサ部４０と、収音環境検出部５０と、フィルタ制御部６０と、を少なくとも含んで構成されている。
収音部１０は、例えば、マイクロフォンで構成され、車室内の音声を収音し、収音した音声をフィルタ部２０およびフィルタ特性算出部３０に送信する。
収音部１０が収音した音声には、ユーザの発話音声と、マイクロフォン周辺で発生している雑音、騒音等が含まれている。
具体的には、車室内に設置されたマイクロフォンにより収音されている音声には、走行時のエンジン音、風切り音、ロードノイズ、エアコンの作動音、スピーカから出力されている音楽等が含まれている。
なお、マイクロフォンは、上述した車室内の音声を収音できればよいため、車両に設置されている、例えば、ハンズフリー通話用のマイクロフォンを用いて構成してもよい。
収音部１０が収音した音声には、ユーザの発話音声と、マイクロフォン周辺で発生している雑音、騒音等が含まれている。
具体的には、車室内に設置されたマイクロフォンにより収音されている音声には、走行時のエンジン音、風切り音、ロードノイズ、エアコンの作動音、スピーカから出力されている音楽等が含まれている。
なお、マイクロフォンは、上述した車室内の音声を収音できればよいため、車両に設置されている、例えば、ハンズフリー通話用のマイクロフォンを用いて構成してもよい。
フィルタ部２０は、後述するフィルタ制御部６０から受信したフィルタ特性に基づいて、収音部１０において収音した音声から雑音を除去する。
なお、雑音が除去された音声は、図示しない音声認識エンジンに入力され、ユーザの発話した言葉が検出される。
なお、雑音が除去された音声は、図示しない音声認識エンジンに入力され、ユーザの発話した言葉が検出される。
フィルタ特性算出部３０は、後述するフィルタ制御部６０からの算出指示を受信したとき、収音部１０から送信された音声に基づいて、収音した音声から雑音を除去するためのフィルタ特性を算出する。
具体的には、フィルタ特性算出部３０は、収音部１０において収音した音声を、例えば２０秒間毎の音声データに分割し、音声データ毎に雑音を除去するためのフィルタ特性を算出する。
なお、フィルタ特性算出部３０において算出されたフィルタ特性は、後述するフィルタ制御部６０に送信される。
具体的には、フィルタ特性算出部３０は、収音部１０において収音した音声を、例えば２０秒間毎の音声データに分割し、音声データ毎に雑音を除去するためのフィルタ特性を算出する。
なお、フィルタ特性算出部３０において算出されたフィルタ特性は、後述するフィルタ制御部６０に送信される。
センサ部４０は、少なくとも、車両内を撮像するカメラ、車両の状態を検出するセンサにより構成され、取得したセンサ情報を、後述する収音環境検出部５０に送信する。
ここで、センサ部４０からセンサ情報として送信する画像は、車両内の画像が取得できればよいため、所謂、車両に設置されているドライブレコーダが撮像している画像を収音環境検出部５０に送信するようにしてもよい。
また、車両の状態を検出するセンサ情報としては、車速パルス、加速度センサ、ＧＰＳ信号、車両のＥＣＵ（Electronic Control Unit）に接続されている各種センサ情報等を例示することができる。
ここで、センサ部４０からセンサ情報として送信する画像は、車両内の画像が取得できればよいため、所謂、車両に設置されているドライブレコーダが撮像している画像を収音環境検出部５０に送信するようにしてもよい。
また、車両の状態を検出するセンサ情報としては、車速パルス、加速度センサ、ＧＰＳ信号、車両のＥＣＵ（Electronic Control Unit）に接続されている各種センサ情報等を例示することができる。
収音環境検出部５０は、センサ部４０からのセンサ情報に基づいて、収音環境を検出する。
具体的には、収音環境検出部５０は、車両内を撮像した画像を分析し、例えば、乗員の乗車位置、乗員の性別、車両の窓の開閉状態等を収音環境として検出する。
また、収音環境検出部５０は、車両の状態を示すセンサ情報に基づいて、車両の走行速度、エンジン回転数、エアコン作動状況等を収音環境として検出する。
なお、収音環境検出部５０は、検出した収音環境を、フィルタ制御部６０に送信する。
また、収音環境検出部５０は、フィルタ特性算出部３０がフィルタ特性を算出したときの収音環境を検出し、検出した収音環境をフィルタ制御部６０に送信する。
例えば、収音環境検出部５０は、フィルタ特性算出部３０において、フィルタ特性を算出している期間中の収音環境の平均値（エンジン回転数、走行速度等の平均値）を算出して、当該収音環境をフィルタ制御部６０に送信する。
具体的には、収音環境検出部５０は、車両内を撮像した画像を分析し、例えば、乗員の乗車位置、乗員の性別、車両の窓の開閉状態等を収音環境として検出する。
また、収音環境検出部５０は、車両の状態を示すセンサ情報に基づいて、車両の走行速度、エンジン回転数、エアコン作動状況等を収音環境として検出する。
なお、収音環境検出部５０は、検出した収音環境を、フィルタ制御部６０に送信する。
また、収音環境検出部５０は、フィルタ特性算出部３０がフィルタ特性を算出したときの収音環境を検出し、検出した収音環境をフィルタ制御部６０に送信する。
例えば、収音環境検出部５０は、フィルタ特性算出部３０において、フィルタ特性を算出している期間中の収音環境の平均値（エンジン回転数、走行速度等の平均値）を算出して、当該収音環境をフィルタ制御部６０に送信する。
フィルタ制御部６０は、収音環境検出部５０において検出された収音環境の変化を検出したとき、フィルタ特性算出部３０においてフィルタ特性を算出させ、そのフィルタ特性をフィルタ部２０に設定する。
つまり、フィルタ制御部６０は、収音環境の変化を確認するまでは、フィルタ特性算出部３０に対して、フィルタ特性の算出処理の実行指示を送信しない。
なお、フィルタ制御部６０の処理の詳細は、以下に説明する。
つまり、フィルタ制御部６０は、収音環境の変化を確認するまでは、フィルタ特性算出部３０に対して、フィルタ特性の算出処理の実行指示を送信しない。
なお、フィルタ制御部６０の処理の詳細は、以下に説明する。
＜フィルタ制御部６０の処理＞
図２および図３を用いて、フィルタ制御部６０の処理の詳細について説明する。
図２および図３を用いて、フィルタ制御部６０の処理の詳細について説明する。
図２に示すように、車両のＡＣＣ電源（アクセサリ電源）がオン状態であるか否かを判定する（ステップＳ１００）。
車両のＡＣＣ電源がオン状態にないと判定した場合（ステップＳ１００の「ＮＯ」）には、処理をステップＳ１００に戻し、待機状態に移行する。
一方で、車両のＡＣＣ電源がオン状態にあると判定した場合（ステップＳ１００の「ＹＥＳ」）には、処理をステップＳ１１０に移行させる。
車両のＡＣＣ電源がオン状態にないと判定した場合（ステップＳ１００の「ＮＯ」）には、処理をステップＳ１００に戻し、待機状態に移行する。
一方で、車両のＡＣＣ電源がオン状態にあると判定した場合（ステップＳ１００の「ＹＥＳ」）には、処理をステップＳ１１０に移行させる。
車両のＡＣＣ電源がオン状態にあると判定した場合（ステップＳ１００の「ＹＥＳ」）には、フィルタ特性算出部３０において算出させたフィルタ特性を、フィルタ部２０に設定する（ステップＳ１１０）。
フィルタ制御部６０は、フィルタ特性算出部３０がフィルタ特性を算出したとき（ステップＳ１１０）の収音環境を収音環境検出部５０から取得し、図示しないメモリに格納する。（ステップＳ１２０）。
ここで、フィルタ制御部６０は、収音環境に変化があったか否かを判定するために、最後にフィルタ部２０に設定したフィルタ特性が算出されたときの収音環境を、メモリに格納する。
ここで、フィルタ制御部６０は、収音環境に変化があったか否かを判定するために、最後にフィルタ部２０に設定したフィルタ特性が算出されたときの収音環境を、メモリに格納する。
フィルタ制御部６０は、収音環境検出部５０から、現在の収音環境を取得する（ステップＳ１３０）。
フィルタ制御部６０は、ステップＳ１３０において取得した収音環境と、最後にフィルタ部２０に設定したフィルタ特性が算出されたときの収音環境（図示しないメモリに格納されている収音環境）とを比較し、収音環境に変化があったか否かを判定する（ステップＳ１４０）。
収音環境に変化がなかったと判定した場合（ステップＳ１４０の「ＮＯ」）には、処理をステップＳ１７０に移行させる。
一方で、収音環境に変化があったと判定した場合（ステップＳ１４０の「ＹＥＳ」）には、処理をステップＳ１５０に移行させる。
収音環境に変化がなかったと判定した場合（ステップＳ１４０の「ＮＯ」）には、処理をステップＳ１７０に移行させる。
一方で、収音環境に変化があったと判定した場合（ステップＳ１４０の「ＹＥＳ」）には、処理をステップＳ１５０に移行させる。
フィルタ制御部６０が、収音環境に変化があったと判定した場合（ステップＳ１４０の「ＹＥＳ」）には、フィルタ特性算出部３０においてフィルタ特性の算出処理を実行させ、算出されたフィルタ特性をフィルタ部２０に設定する（ステップＳ１５０）。
つまり、フィルタ制御部６０は、収音環境に変化があったときに、フィルタ特性算出部３０においてフィルタ特性を算出させる。
つまり、フィルタ制御部６０は、収音環境に変化があったときに、フィルタ特性算出部３０においてフィルタ特性を算出させる。
フィルタ制御部６０は、フィルタ特性算出部３０がフィルタ特性を算出したとき（ステップＳ１５０）の収音環境を収音環境検出部５０から取得し、図示しないメモリに格納する。（ステップＳ１６０）。
ここで、図３を用いて、収音環境検出部５０から受信した収音環境と、図示しないメモリに格納されている収音環境とを比較し、収音環境に変化があったか否かを判定する方法について説明する。
収音環境検出部５０から取得した収音環境を示す情報の中には、走行速度やエンジン回転数等のように、走行中に大きく値が変化する収音環境がある。
そのため、収音環境に変化があったか否かを判定する場合には、受信した収音環境の値と図示しないメモリに格納された収音環境の値との変化量を算出する。
具体的には、メモリに格納されている収音環境Ｋ１の値と、収音環境検出部５０から受信した収音環境Ｋ２の値との変化量を算出し、その値から変化があったか否かを判定する。
例えば、メモリに格納された収音環境の走行速度に値がＫ１１、収音環境検出部５０から受信した収音環境の走行速度の値がＫ２１であった場合には、変化量＝｜Ｋ１１－Ｋ２１｜となる。
フィルタ制御部６０は、算出した変化量が所定値より小さい場合（例えば、変化量＜１０Ｋｍ／ｈの場合）には、走行速度の値Ｋ１１とＫ２１とは、同じ走行速度であると判定する。
また、エンジン回転数においても、同様に算出した変化量が所定値より小さい場合（例えば、変化量＜２００ｒｐｍの場合）には、エンジン回転数の値Ｋ１２とＫ２２とは、同じエンジン回転数であると判定する。
上述した変化量の判定において、走行速度およびエンジン回転数の双方とも同じであると判定され、さらに、その他の収音環境（乗車位置、性別、窓開閉状態、エアコン作動状況）が同じであると判定された場合には、フィルタ制御部６０は、収音環境に変化がないと判定する（メモリに格納されている収音環境Ｋ１と収音環境検出部５０から受信した収音環境Ｋ２とが同じであると判定する）。
一方で、走行速度、エンジン回転数、その他の収音環境（乗車位置、性別、窓開閉状態、エアコン作動状況）のうち、１つでも変化があった場合には、フィルタ制御部６０は、収音環境に変化があったと判定する（メモリに格納されている収音環境Ｋ１と収音環境検出部５０から受信した収音環境Ｋ２とが同じではないと判定する）。
収音環境検出部５０から取得した収音環境を示す情報の中には、走行速度やエンジン回転数等のように、走行中に大きく値が変化する収音環境がある。
そのため、収音環境に変化があったか否かを判定する場合には、受信した収音環境の値と図示しないメモリに格納された収音環境の値との変化量を算出する。
具体的には、メモリに格納されている収音環境Ｋ１の値と、収音環境検出部５０から受信した収音環境Ｋ２の値との変化量を算出し、その値から変化があったか否かを判定する。
例えば、メモリに格納された収音環境の走行速度に値がＫ１１、収音環境検出部５０から受信した収音環境の走行速度の値がＫ２１であった場合には、変化量＝｜Ｋ１１－Ｋ２１｜となる。
フィルタ制御部６０は、算出した変化量が所定値より小さい場合（例えば、変化量＜１０Ｋｍ／ｈの場合）には、走行速度の値Ｋ１１とＫ２１とは、同じ走行速度であると判定する。
また、エンジン回転数においても、同様に算出した変化量が所定値より小さい場合（例えば、変化量＜２００ｒｐｍの場合）には、エンジン回転数の値Ｋ１２とＫ２２とは、同じエンジン回転数であると判定する。
上述した変化量の判定において、走行速度およびエンジン回転数の双方とも同じであると判定され、さらに、その他の収音環境（乗車位置、性別、窓開閉状態、エアコン作動状況）が同じであると判定された場合には、フィルタ制御部６０は、収音環境に変化がないと判定する（メモリに格納されている収音環境Ｋ１と収音環境検出部５０から受信した収音環境Ｋ２とが同じであると判定する）。
一方で、走行速度、エンジン回転数、その他の収音環境（乗車位置、性別、窓開閉状態、エアコン作動状況）のうち、１つでも変化があった場合には、フィルタ制御部６０は、収音環境に変化があったと判定する（メモリに格納されている収音環境Ｋ１と収音環境検出部５０から受信した収音環境Ｋ２とが同じではないと判定する）。
車両のＡＣＣ電源（アクセサリ電源）がオン状態であるか否かを判定する（ステップＳ１７０）。
車両のＡＣＣ電源がオン状態にあると判定した場合（ステップＳ１７０の「ＹＥＳ」）には、処理をステップＳ１３０に戻し、処理を継続させる。
一方で、車両のＡＣＣ電源がオン状態にないと判定した場合（ステップＳ１７０の「ＮＯ」）には、処理を終了させる。
車両のＡＣＣ電源がオン状態にあると判定した場合（ステップＳ１７０の「ＹＥＳ」）には、処理をステップＳ１３０に戻し、処理を継続させる。
一方で、車両のＡＣＣ電源がオン状態にないと判定した場合（ステップＳ１７０の「ＮＯ」）には、処理を終了させる。
本実施例に係る情報処理装置１は、収音部１０において収音した音声に基づいて、音声から雑音を除去するためのフィルタ特性を算出するフィルタ特性算出部３０と、フィルタ特性算出部３０によって算出されたフィルタ特性に基づいて、収音した音声から雑音を除去するフィルタ部２０と、センサ部４０のセンサ情報に基づいて音声の収音環境を検出する収音環境検出部５０と、収音環境検出部５０において検出された収音環境の変化を検出したとき、フィルタ特性算出部３０においてフィルタ特性を算出させ、該フィルタ特性をフィルタ部２０に設定するフィルタ制御部６０と、を備えている。
フィルタ制御部６０は、収音環境検出部５０において検出した収音環境が変化したと判定したときに、フィルタ特性算出部３０においてフィルタ特性を算出させ、そのフィルタ特性をフィルタ部２０に設定する。
つまり、収音環境に変化がない場合には、フィルタ部２０に設定するフィルタ特性の変更を行う必要がないため、フィルタ特性算出部３０におけるフィルタ特性の算出処理を実行しない。
これにより、雑音を除去するためのフィルタ特性の算出処理の実行頻度を下げることができる。
また、フィルタ特性を算出するために実行する、高負荷な演算処理を、常に実行する必要がないため、ＣＰＵやメモリ等のリソース占有率を低くすることができる。
また、情報処理装置１は、ユーザの発話する空間の収音環境が変化したときのみ、フィルタ特性の算出処理を実行するため、高負荷な演算処理の頻度が低下し、消費電力を低減することができる。
フィルタ制御部６０は、収音環境検出部５０において検出した収音環境が変化したと判定したときに、フィルタ特性算出部３０においてフィルタ特性を算出させ、そのフィルタ特性をフィルタ部２０に設定する。
つまり、収音環境に変化がない場合には、フィルタ部２０に設定するフィルタ特性の変更を行う必要がないため、フィルタ特性算出部３０におけるフィルタ特性の算出処理を実行しない。
これにより、雑音を除去するためのフィルタ特性の算出処理の実行頻度を下げることができる。
また、フィルタ特性を算出するために実行する、高負荷な演算処理を、常に実行する必要がないため、ＣＰＵやメモリ等のリソース占有率を低くすることができる。
また、情報処理装置１は、ユーザの発話する空間の収音環境が変化したときのみ、フィルタ特性の算出処理を実行するため、高負荷な演算処理の頻度が低下し、消費電力を低減することができる。
また、センサ部４０のセンサ情報は、少なくとも車両内を撮像した画像と車両の走行状態を示す情報とを含んでいる。
すなわち、収音した音声に含まれる雑音を除去するフィルタ特性に影響を与える要因である、乗車位置、性別、走行速度、エンジン回転数、窓開閉状態、エアコン動作状況等の収音環境の変化に基づいて、フィルタ部２０に設定するフィルタ特性の算出処理を実行する。
フィルタ特性算出部３０において算出されるフィルタ特性は、収音環境によって、フィルタ特性の値は大きく変化する。
例えば、収音した音声に含まれるエンジン音は、エンジン回転数によって、音の大きさや周波数が変化する。
また、収音した音声に含まれるロードノイズは、走行速度によって、音の大きさや周波数が変化する。
また、収音した音声に含まれる発話音声は、発話する性別によって、音の周波数が変化する。
すなわち、フィルタ特性に影響を与える収音環境に変化がないときには、フィルタ特性を変更する必要がない。
これにより、ユーザの発話する空間の収音環境の変化があったときのみ、フィルタ特性の算出処理を実行するため、雑音を除去するためのフィルタ特性の算出処理の実行頻度を下げることができる。
すなわち、収音した音声に含まれる雑音を除去するフィルタ特性に影響を与える要因である、乗車位置、性別、走行速度、エンジン回転数、窓開閉状態、エアコン動作状況等の収音環境の変化に基づいて、フィルタ部２０に設定するフィルタ特性の算出処理を実行する。
フィルタ特性算出部３０において算出されるフィルタ特性は、収音環境によって、フィルタ特性の値は大きく変化する。
例えば、収音した音声に含まれるエンジン音は、エンジン回転数によって、音の大きさや周波数が変化する。
また、収音した音声に含まれるロードノイズは、走行速度によって、音の大きさや周波数が変化する。
また、収音した音声に含まれる発話音声は、発話する性別によって、音の周波数が変化する。
すなわち、フィルタ特性に影響を与える収音環境に変化がないときには、フィルタ特性を変更する必要がない。
これにより、ユーザの発話する空間の収音環境の変化があったときのみ、フィルタ特性の算出処理を実行するため、雑音を除去するためのフィルタ特性の算出処理の実行頻度を下げることができる。
また、収音部１０の収音した音声には、雑音とユーザの発話音声とが含まれ、フィルタ部２０において雑音が除去された音声は、音声認識エンジンに送信される。
すなわち、フィルタ制御部６０の制御により、最適なフィルタ特性がフィルタ部２０に設定されるため、収音部１０において収音した音声から雑音を除去することができる。
これにより、音声認識エンジンにおける、発話音声の認識率を向上させることができる。
すなわち、フィルタ制御部６０の制御により、最適なフィルタ特性がフィルタ部２０に設定されるため、収音部１０において収音した音声から雑音を除去することができる。
これにより、音声認識エンジンにおける、発話音声の認識率を向上させることができる。
＜実施例２＞
図４から図７を用いて、本実施例に係る情報処理装置１Ａについて説明する。
図４から図７を用いて、本実施例に係る情報処理装置１Ａについて説明する。
＜情報処理装置１Ａの構成＞
図４を用いて、本実施例に係る情報処理装置１Ａの構成について説明する。
情報処理装置１Ａは、収音部１０と、フィルタ部２０と、フィルタ特性算出部３０と、センサ部４０と、収音環境検出部５０と、フィルタ制御部６０Ａと、を含んで構成されている。
図４を用いて、本実施例に係る情報処理装置１Ａの構成について説明する。
情報処理装置１Ａは、収音部１０と、フィルタ部２０と、フィルタ特性算出部３０と、センサ部４０と、収音環境検出部５０と、フィルタ制御部６０Ａと、を含んで構成されている。
フィルタ制御部６０Ａは、収音環境検出部５０において検出された収音環境の変化を検出したとき、フィルタ特性算出部３０が算出したフィルタ特性と該フィルタ特性を算出したときの収音環境とを紐づけたフィルタテーブルを参照し、変化した収音環境がフィルタテーブルにある場合には、変化した収音環境に紐づいたフィルタ特性をフィルタ部２０に設定する。
すなわち、フィルタ制御部６０Ａは、収音環境の変化を検出したとき、フィルタ特性算出部３０が算出したフィルタ特性とそのフィルタ特性を算出したときの収音環境とを紐づけたフィルタテーブルを参照して、フィルタ部２０に設定するフィルタ特性を決定する。
変化した収音環境がフィルタテーブルにある場合には、変化した収音環境に紐づいたフィルタ特性をフィルタ部２０に設定する。
一方で、変化した収音環境がフィルタテーブルにない場合には、フィルタ特性算出部３０においてフィルタ特性を算出させ、そのフィルタ特性をフィルタ部２０に設定する。
すなわち、フィルタ制御部６０Ａは、収音環境の変化を検出したとき、フィルタ特性算出部３０が算出したフィルタ特性とそのフィルタ特性を算出したときの収音環境とを紐づけたフィルタテーブルを参照して、フィルタ部２０に設定するフィルタ特性を決定する。
変化した収音環境がフィルタテーブルにある場合には、変化した収音環境に紐づいたフィルタ特性をフィルタ部２０に設定する。
一方で、変化した収音環境がフィルタテーブルにない場合には、フィルタ特性算出部３０においてフィルタ特性を算出させ、そのフィルタ特性をフィルタ部２０に設定する。
また、フィルタ制御部６０Ａは、変化した収音環境がフィルタテーブルにない場合には、変化した収音環境とフィルタ特性算出部３０において算出したフィルタ特性とを紐づけて、フィルタテーブルに追加する。
具体的には、図５に示すように、収音環境検出部５０から取得した収音環境（Ｋ１～Ｋ５）である、例えば、乗車位置、乗員の性別、車両窓の開閉状態、走行速度、エンジン回転数、エアコン作動状況等の各情報と、フィルタ特性（Ｆ１～Ｆ５）とを紐づけたフィルタテーブルを参照し、フィルタテーブルに同じ収音環境がない場合には、変化した収音環境とフィルタ特性算出部３０において算出したフィルタ特性とを紐づけて、フィルタテーブルに追加する。
より具体的には、例えば、既にフィルタテーブルに登録されている収音環境Ｋ１～Ｋ５の中に、変化した収音環境と同じ収音環境があるか否かを判定し、同じ収音環境が無い場合には、新たな収音環境Ｋ６（変化した収音環境）とフィルタ特性算出部３０において算出したフィルタ特性Ｆ６とを紐づけて、フィルタテーブルに追加する。
なお、フィルタ制御部６０Ａの処理の詳細については、以下に説明する。
具体的には、図５に示すように、収音環境検出部５０から取得した収音環境（Ｋ１～Ｋ５）である、例えば、乗車位置、乗員の性別、車両窓の開閉状態、走行速度、エンジン回転数、エアコン作動状況等の各情報と、フィルタ特性（Ｆ１～Ｆ５）とを紐づけたフィルタテーブルを参照し、フィルタテーブルに同じ収音環境がない場合には、変化した収音環境とフィルタ特性算出部３０において算出したフィルタ特性とを紐づけて、フィルタテーブルに追加する。
より具体的には、例えば、既にフィルタテーブルに登録されている収音環境Ｋ１～Ｋ５の中に、変化した収音環境と同じ収音環境があるか否かを判定し、同じ収音環境が無い場合には、新たな収音環境Ｋ６（変化した収音環境）とフィルタ特性算出部３０において算出したフィルタ特性Ｆ６とを紐づけて、フィルタテーブルに追加する。
なお、フィルタ制御部６０Ａの処理の詳細については、以下に説明する。
＜フィルタ制御部６０Ａの処理＞
図６および図７を用いて、フィルタ制御部６０Ａの処理の詳細について説明する。
図６および図７を用いて、フィルタ制御部６０Ａの処理の詳細について説明する。
図６に示すように、車両のＡＣＣ電源（アクセサリ電源）がオン状態であるか否かを判定する（ステップＳ１００）。
車両のＡＣＣ電源がオン状態にないと判定した場合（ステップＳ１００の「ＮＯ」）には、処理をステップＳ１００に戻し待機状態に移行する。
一方で、車両のＡＣＣ電源がオン状態にあると判定した場合（ステップＳ１００の「ＹＥＳ」）には、処理をステップＳ１１０に移行させる。
車両のＡＣＣ電源がオン状態にないと判定した場合（ステップＳ１００の「ＮＯ」）には、処理をステップＳ１００に戻し待機状態に移行する。
一方で、車両のＡＣＣ電源がオン状態にあると判定した場合（ステップＳ１００の「ＹＥＳ」）には、処理をステップＳ１１０に移行させる。
車両のＡＣＣ電源がオン状態にあると判定した場合（ステップＳ１００の「ＹＥＳ」）には、フィルタ特性算出部３０において算出させたフィルタ特性を取得し、フィルタ部２０にそのフィルタ特性を設定する（ステップＳ１１０）。
フィルタ制御部６０Ａは、フィルタ特性算出部３０がフィルタ特性を算出したとき（ステップＳ１１０）の収音環境を収音環境検出部５０から取得し、図示しないメモリに格納する。（ステップＳ１２０）。
つまり、フィルタ制御部６０Ａは、収音環境に変化があったか否かを判定するために、最後にフィルタ部２０に設定したフィルタ特性が算出されたときの収音環境を、メモリに格納する。
つまり、フィルタ制御部６０Ａは、収音環境に変化があったか否かを判定するために、最後にフィルタ部２０に設定したフィルタ特性が算出されたときの収音環境を、メモリに格納する。
フィルタ制御部６０Ａは、収音環境検出部５０から、現在の収音環境を取得する（ステップＳ１３０）。
フィルタ制御部６０Ａは、ステップＳ１３０において取得した収音環境と、最後にフィルタ部２０に設定したフィルタ特性が算出されたときの収音環境（図示しないメモリに格納されている収音環境）とを比較し、収音環境に変化があったか否かを判定する（ステップＳ１４０）。
収音環境に変化がなかったと判定した場合（ステップＳ１４０の「ＮＯ」）には、処理をステップＳ１７０に移行させる。
一方で、収音環境に変化があったと判定した場合（ステップＳ１４０の「ＹＥＳ」）には、処理をステップＳ２００に移行させる。
収音環境に変化がなかったと判定した場合（ステップＳ１４０の「ＮＯ」）には、処理をステップＳ１７０に移行させる。
一方で、収音環境に変化があったと判定した場合（ステップＳ１４０の「ＹＥＳ」）には、処理をステップＳ２００に移行させる。
収音環境に変化があったと判定した場合（ステップＳ１４０の「ＹＥＳ」）には、変化した収音環境と同じ収音環境がフィルタテーブルにあるか否かを判定する（ステップＳ２００）。
変化した収音環境と同じ収音環境がフィルタテーブルにあると判定した場合（ステップＳ２００の「ＹＥＳ」）には、処理をステップＳ２２０に移行させる。
一方で、変化した収音環境と同じ収音環境がフィルタテーブルにないと判定した場合（ステップＳ２００の「ＮＯ」）には、処理をステップＳ１５０に移行させる。
変化した収音環境と同じ収音環境がフィルタテーブルにあると判定した場合（ステップＳ２００の「ＹＥＳ」）には、処理をステップＳ２２０に移行させる。
一方で、変化した収音環境と同じ収音環境がフィルタテーブルにないと判定した場合（ステップＳ２００の「ＮＯ」）には、処理をステップＳ１５０に移行させる。
ここで、図７を用いて、変化した収音環境と同じ収音環境がフィルタテーブルにあるか否かを判定する方法について説明する。
変化した収音環境と同じ収音環境があるか否かを判定する場合には、変化した収音環境の値と、フィルタテーブルに既に追加されている収音環境の値との変化量を算出する。
具体的には、フィルタテーブルにある収音環境Ｋ１～Ｋ３の各値と、変化した収音環境ＫＡの各値との変化量を算出し、その変化量から変化があったか否かを判定する。
例えば、フィルタテーブルにある収音環境Ｋ１の走行速度の値がＫ１１、変化した収音環境ＫＡの走行速度の値がＫＡ１であった場合には、変化量＝｜Ｋ１１－ＫＡ１｜となる。
フィルタ制御部６０Ａは、算出した変化量が所定値より小さい場合（例えば、変化量＜１０Ｋｍ／ｈの場合）には、走行速度の値Ｋ１１とＫＡ１とは、同じ走行速度であると判定する。
また、エンジン回転数においても、同様に算出した変化量が所定値より小さい場合（例えば、変化量＜２００ｒｐｍの場合）には、エンジン回転数の値Ｋ１２とＫＡ２とは、同じエンジン回転数であると判定する。
なお、図７に示すように、収音環境Ｋ３と変化した収音環境ＫＡとは、走行速度およびエンジン回転数の双方が同じ値であり、かつ、乗車位置、性別、窓開閉状態、エアコン作動状況が同じであるため、フィルタ制御部６０Ａは、収音環境Ｋ３と変化した収音環境ＫＡとは、同じ収音環境であると判定する。
変化した収音環境と同じ収音環境があるか否かを判定する場合には、変化した収音環境の値と、フィルタテーブルに既に追加されている収音環境の値との変化量を算出する。
具体的には、フィルタテーブルにある収音環境Ｋ１～Ｋ３の各値と、変化した収音環境ＫＡの各値との変化量を算出し、その変化量から変化があったか否かを判定する。
例えば、フィルタテーブルにある収音環境Ｋ１の走行速度の値がＫ１１、変化した収音環境ＫＡの走行速度の値がＫＡ１であった場合には、変化量＝｜Ｋ１１－ＫＡ１｜となる。
フィルタ制御部６０Ａは、算出した変化量が所定値より小さい場合（例えば、変化量＜１０Ｋｍ／ｈの場合）には、走行速度の値Ｋ１１とＫＡ１とは、同じ走行速度であると判定する。
また、エンジン回転数においても、同様に算出した変化量が所定値より小さい場合（例えば、変化量＜２００ｒｐｍの場合）には、エンジン回転数の値Ｋ１２とＫＡ２とは、同じエンジン回転数であると判定する。
なお、図７に示すように、収音環境Ｋ３と変化した収音環境ＫＡとは、走行速度およびエンジン回転数の双方が同じ値であり、かつ、乗車位置、性別、窓開閉状態、エアコン作動状況が同じであるため、フィルタ制御部６０Ａは、収音環境Ｋ３と変化した収音環境ＫＡとは、同じ収音環境であると判定する。
フィルタ制御部６０Ａは、変化した収音環境と同じ収音環境がフィルタテーブルにないと判定した場合（ステップＳ２００の「ＮＯ」）には、フィルタ特性算出部３０においてフィルタ特性の算出処理を実行させ、算出されたフィルタ特性をフィルタ部２０に設定する（ステップＳ１５０）。
フィルタ制御部６０Ａは、フィルタ特性算出部３０がフィルタ特性を算出したとき（ステップＳ１５０）の収音環境を収音環境検出部５０から取得し、図示しないメモリに格納する。（ステップＳ１６０）。
ステップＳ１５０において、フィルタ部２０に設定したフィルタ特性と、そのフィルタ特性を算出したときの収音環境（ステップＳ１６０において取得した収音環境）とを紐づけて、フィルタテーブルに追加する（ステップＳ２１０）。
一方で、変化した収音環境と同じ収音環境がフィルタテーブルにあると判定した場合（ステップＳ２００の「ＹＥＳ」）には、変化した収音環境と同じ収音環境に紐づいたフィルタ特性をフィルタテーブルから取得し、そのフィルタ特性をフィルタ部２０に設定し、ステップＳ１３０で取得した収音環境を、図示しないメモリに格納する（ステップＳ２２０）。
車両のＡＣＣ電源（アクセサリ電源）がオン状態であるか否かを判定する（ステップＳ１７０）。
車両のＡＣＣ電源がオン状態にあると判定した場合（ステップＳ１７０の「ＹＥＳ」）には、処理をステップＳ１３０に戻し、処理を継続する。
一方で、車両のＡＣＣ電源がオン状態にないと判定した場合（ステップＳ１７０の「ＮＯ」）には、処理を終了させる。
車両のＡＣＣ電源がオン状態にあると判定した場合（ステップＳ１７０の「ＹＥＳ」）には、処理をステップＳ１３０に戻し、処理を継続する。
一方で、車両のＡＣＣ電源がオン状態にないと判定した場合（ステップＳ１７０の「ＮＯ」）には、処理を終了させる。
本実施例に係る情報処理装置１Ａのフィルタ制御部６０Ａは、収音環境検出部５０において検出された収音環境の変化を検出したとき、フィルタ特性算出部３０が算出したフィルタ特性と該フィルタ特性を算出したときの収音環境とを紐づけたフィルタテーブルを参照し、変化した収音環境がフィルタテーブルにある場合には、変化した収音環境に紐づいたフィルタ特性をフィルタ部２０に設定する。
すなわち、フィルタ制御部６０Ａは、収音環境検出部５０において検出した収音環境が変化したときに、フィルタテーブルを参照し、フィルタ部２０に設定するフィルタ特性を決定する。
変化した収音環境がフィルタテーブルにある場合には、フィルタ特性の算出処理の実行指示を行わず、フィルタテーブルを参照してフィルタ部２０に設定するフィルタ特性を決定する。
一方で、変化した収音環境がフィルタテーブルになかった場合には、フィルタ特性算出部３０に対して、フィルタ特性の算出指示を送信し、算出されたフィルタ特性をフィルタ部２０に設定する。
これにより、ユーザの発話する空間の収音環境の変化があったとき、かつ、フィルタテーブルに変化した収音環境がないときに、フィルタ特性の算出処理が実行されるため、フィルタ特性の算出処理の実行頻度を下げることができる。
また、フィルタ特性を算出するための高負荷な演算処理を、常に実行する必要がないため、ＣＰＵ、メモリ等のリソース占有率を低くすることができる。
また、情報処理装置１Ａは、ユーザの発話する空間の収音環境の変化があったとき、かつ、フィルタテーブルに変化した収音環境がないときに、フィルタ特性の算出処理を実行するため、消費電力を低減することができる。
すなわち、フィルタ制御部６０Ａは、収音環境検出部５０において検出した収音環境が変化したときに、フィルタテーブルを参照し、フィルタ部２０に設定するフィルタ特性を決定する。
変化した収音環境がフィルタテーブルにある場合には、フィルタ特性の算出処理の実行指示を行わず、フィルタテーブルを参照してフィルタ部２０に設定するフィルタ特性を決定する。
一方で、変化した収音環境がフィルタテーブルになかった場合には、フィルタ特性算出部３０に対して、フィルタ特性の算出指示を送信し、算出されたフィルタ特性をフィルタ部２０に設定する。
これにより、ユーザの発話する空間の収音環境の変化があったとき、かつ、フィルタテーブルに変化した収音環境がないときに、フィルタ特性の算出処理が実行されるため、フィルタ特性の算出処理の実行頻度を下げることができる。
また、フィルタ特性を算出するための高負荷な演算処理を、常に実行する必要がないため、ＣＰＵ、メモリ等のリソース占有率を低くすることができる。
また、情報処理装置１Ａは、ユーザの発話する空間の収音環境の変化があったとき、かつ、フィルタテーブルに変化した収音環境がないときに、フィルタ特性の算出処理を実行するため、消費電力を低減することができる。
本実施例に係る情報処理装置１Ａのフィルタ制御部６０Ａは、フィルタ特性算出部３０においてフィルタ特性を算出したときの収音環境を取得し、その収音環境がフィルタテーブルにない場合には、その収音環境とフィルタ特性算出部において算出したフィルタ特性とを紐づけて、フィルタテーブルに追加する。
また、収音環境は、少なくとも車両内を撮像した画像と、車両の走行状態を示す情報とを含んだ情報に基づいて、検出される。
フィルタ特性算出部３０において算出されるフィルタ特性は、収音環境によって、フィルタ特性の値は大きく変化する。
例えば、収音した音声に含まれるエンジン音は、エンジン回転数によって、音の大きさや周波数が変化する。
また、収音した音声に含まれるロードノイズは、走行速度によって、音の大きさや周波数が変化する。
また、収音した音声に含まれる発話音声は、発話する性別によって、音の周波数が変化する。
そのため、フィルタ特性を算出したときの収音環境と、算出されたフィルタ特性とを紐づけて、フィルタテーブルに蓄積することにより、その車両、乗員にとって、最適なフィルタ特性を蓄積することができる。
すなわち、情報処理装置１Ａを動作させるだけで、その空間に最適な収音環境毎のフィルタ特性をフィルタテーブルに蓄積することができるため、フィルタ制御部６０Ａは、フィルタテーブルを参照することにより、最適なフィルタ特性を設定することができる。
また、収音環境は、少なくとも車両内を撮像した画像と、車両の走行状態を示す情報とを含んだ情報に基づいて、検出される。
フィルタ特性算出部３０において算出されるフィルタ特性は、収音環境によって、フィルタ特性の値は大きく変化する。
例えば、収音した音声に含まれるエンジン音は、エンジン回転数によって、音の大きさや周波数が変化する。
また、収音した音声に含まれるロードノイズは、走行速度によって、音の大きさや周波数が変化する。
また、収音した音声に含まれる発話音声は、発話する性別によって、音の周波数が変化する。
そのため、フィルタ特性を算出したときの収音環境と、算出されたフィルタ特性とを紐づけて、フィルタテーブルに蓄積することにより、その車両、乗員にとって、最適なフィルタ特性を蓄積することができる。
すなわち、情報処理装置１Ａを動作させるだけで、その空間に最適な収音環境毎のフィルタ特性をフィルタテーブルに蓄積することができるため、フィルタ制御部６０Ａは、フィルタテーブルを参照することにより、最適なフィルタ特性を設定することができる。
＜その他の実施例＞
上述した情報処理装置１、１Ａの収音環境検出部５０が検出する収音環境として、図８に示すような情報をさらに取得するようにしてもよい。
具体的には、カメラで車両内外を撮像した画像から、現在の天候状態や周辺車両の走行状態を収音環境として検出するようにしてもよい。
降雨時は晴天時に比べ、走行騒音が増える可能性があるため、現在の天候を収音環境の条件として追加することにより、より最適なフィルタ特性を設定することができる。
また、車両周辺にトラックやバイク等が走行している場合には、走行騒音が増える可能性があるため、自車両周辺の走行車両の状態を収音環境として検出することにより、より最適なフィルタ特性を設定することができる。
また、自車両のＧＰＳ（Global Positioning System）情報から、現在車両が走行している位置を収音環境として検出するようにしてもよい。
例えば、高速道路、住宅街、市街地等の走行位置特有に発生する雑音があるため、走行位置を把握することにより、より最適なフィルタ特性を設定することができる。
上述した情報処理装置１、１Ａの収音環境検出部５０が検出する収音環境として、図８に示すような情報をさらに取得するようにしてもよい。
具体的には、カメラで車両内外を撮像した画像から、現在の天候状態や周辺車両の走行状態を収音環境として検出するようにしてもよい。
降雨時は晴天時に比べ、走行騒音が増える可能性があるため、現在の天候を収音環境の条件として追加することにより、より最適なフィルタ特性を設定することができる。
また、車両周辺にトラックやバイク等が走行している場合には、走行騒音が増える可能性があるため、自車両周辺の走行車両の状態を収音環境として検出することにより、より最適なフィルタ特性を設定することができる。
また、自車両のＧＰＳ（Global Positioning System）情報から、現在車両が走行している位置を収音環境として検出するようにしてもよい。
例えば、高速道路、住宅街、市街地等の走行位置特有に発生する雑音があるため、走行位置を把握することにより、より最適なフィルタ特性を設定することができる。
上述した収音環境検出部５０では、車両内を撮像する画像に基づいて、乗車位置を検出したが、マイクアレイにて収音した音声に基づいて、発話者の位置を収音環境として検出するようにしてもよい。
これにより、車両内を撮像するカメラが設置できない場合でも、乗車位置を把握することができる。
これにより、車両内を撮像するカメラが設置できない場合でも、乗車位置を把握することができる。
上述した情報処理装置１Ａでは、フィルタ制御部６０Ａにおいて、フィルタテーブルを生成したが、収音環境検出部５０から受信した収音環境を、インターネット回線を介してサーバに送信し、サーバにおいてフィルタテーブルを作成するようにしてもよい。
これにより、フィルタ制御部６０Ａにおけるフィルタテーブル生成処理の負荷をなくすことができるため、消費電力を低減することができる。
また、フィルタテーブルを格納および生成するためのメモリの容量を小さくすること、もしくは、削除することができるため、情報処理装置１Ａのコストダウンを図ることができる。
また、サーバに保管されたフィルタテーブルを、他のユーザと共有するようにしてもよい。
具体的には、例えば、サーバにおいて、同じ車種毎のフィルタテーブルのデータ集計および分析を行い、車種毎に共有できるフィルタテーブルを生成する。
これにより、共有のフィルタテーブルを参照して、フィルタ特性を設定することができるため、情報処理装置１Ａを初めて使用するときから、最適なフィルタ特性を設定することができる。
これにより、フィルタ制御部６０Ａにおけるフィルタテーブル生成処理の負荷をなくすことができるため、消費電力を低減することができる。
また、フィルタテーブルを格納および生成するためのメモリの容量を小さくすること、もしくは、削除することができるため、情報処理装置１Ａのコストダウンを図ることができる。
また、サーバに保管されたフィルタテーブルを、他のユーザと共有するようにしてもよい。
具体的には、例えば、サーバにおいて、同じ車種毎のフィルタテーブルのデータ集計および分析を行い、車種毎に共有できるフィルタテーブルを生成する。
これにより、共有のフィルタテーブルを参照して、フィルタ特性を設定することができるため、情報処理装置１Ａを初めて使用するときから、最適なフィルタ特性を設定することができる。
一般に、車両が加速しているときには、エンジンから発生するエンジン音が騒音の主要因となる。
また、車両が定速走行しているときには、車両の足回りから発生するロードノイズが騒音の主要因となる。
つまり、上述したフィルタ制御部６０Ａが、収音環境検出部５０から取得した、車両の走行速度、加速度の情報に基づいて、フィルタテーブルの参照方法を変更するようにしてもよい。
具体的には、フィルタ制御部６０Ａが、収音環境検出部５０から取得した、車両の走行速度または加速度の情報に基づいて、現在車両が加速中であると判定した場合には、走行速度の値は参照せず、エンジン回転数の値のみを参照して、フィルタテーブルに収音した収音環境があるか否かを判定するようにしてもよい。
また、フィルタ制御部６０Ａが、収音環境検出部５０から取得した、車両の走行速度または加速度の情報に基づいて、現在車両が定速走行中であると判定した場合には、エンジン回転数の値は参照せず、走行速度の値のみを参照して、フィルタテーブルに収音した収音環境があるか否かを判定するようにしてもよい。
これにより、車両の走行状況に応じて、フィルタテーブルの参照方法を変更することができるため、より最適なフィルタ特性をフィルタテーブルから決定することができる。
また、車両が定速走行しているときには、車両の足回りから発生するロードノイズが騒音の主要因となる。
つまり、上述したフィルタ制御部６０Ａが、収音環境検出部５０から取得した、車両の走行速度、加速度の情報に基づいて、フィルタテーブルの参照方法を変更するようにしてもよい。
具体的には、フィルタ制御部６０Ａが、収音環境検出部５０から取得した、車両の走行速度または加速度の情報に基づいて、現在車両が加速中であると判定した場合には、走行速度の値は参照せず、エンジン回転数の値のみを参照して、フィルタテーブルに収音した収音環境があるか否かを判定するようにしてもよい。
また、フィルタ制御部６０Ａが、収音環境検出部５０から取得した、車両の走行速度または加速度の情報に基づいて、現在車両が定速走行中であると判定した場合には、エンジン回転数の値は参照せず、走行速度の値のみを参照して、フィルタテーブルに収音した収音環境があるか否かを判定するようにしてもよい。
これにより、車両の走行状況に応じて、フィルタテーブルの参照方法を変更することができるため、より最適なフィルタ特性をフィルタテーブルから決定することができる。
以上、この発明の実施例につき、図面を参照して詳述してきたが、具体的な構成はこの実施例に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。
１；情報処理装置
１Ａ；情報処理装置
１０；収音部
２０；フィルタ部
３０；フィルタ特性算出部
４０；センサ部
５０；収音環境検出部
６０；フィルタ制御部
６０Ａ；フィルタ制御部
１Ａ；情報処理装置
１０；収音部
２０；フィルタ部
３０；フィルタ特性算出部
４０；センサ部
５０；収音環境検出部
６０；フィルタ制御部
６０Ａ；フィルタ制御部
Claims (8)
- 収音した音声に基づいて、前記音声から雑音を除去するためのフィルタ特性を算出するフィルタ特性算出部と、
前記フィルタ特性算出部によって算出された前記フィルタ特性に基づいて、収音した音声から雑音を除去するフィルタ部と、
センサ情報に基づいて前記音声の収音環境を検出する収音環境検出部と、
前記収音環境検出部において検出された前記収音環境の変化を検出したとき、前記フィルタ特性算出部において前記フィルタ特性を算出させ、該フィルタ特性を前記フィルタ部に設定するフィルタ制御部と、
を備える情報処理装置。 - 前記フィルタ制御部は、前記収音環境検出部において検出された前記収音環境の変化を検出したとき、前記フィルタ特性算出部が算出した前記フィルタ特性と該フィルタ特性を算出したときの前記収音環境とを紐づけたフィルタテーブルを参照し、変化した前記収音環境が前記フィルタテーブルにある場合には、変化した前記収音環境に紐づいた前記フィルタ特性を前記フィルタ部に設定することを特徴とする請求項１に記載の情報処理装置。
- 前記フィルタ制御部は、前記フィルタ特性算出部においてフィルタ特性を算出したときの前記収音環境を取得し、該収音環境が前記フィルタテーブルに無い場合には、該収音環境と前記フィルタ特性算出部において算出した前記フィルタ特性とを紐づけて、前記フィルタテーブルに追加することを特徴とする請求項２に記載の情報処理装置。
- 前記センサ情報は、少なくとも車両内を撮像した画像と車両の走行状態を示す情報とを含んでいることを特徴とする請求項１から３のいずれか１項に記載の情報処理装置。
- 前記収音した音声には、前記雑音とユーザの発話音声とが含まれ、前記フィルタ部において前記雑音が除去された音声を、音声認識エンジンに送信することを特徴とする請求項１から４のいずれか１項に記載の情報処理装置。
- フィルタ特性算出部と、フィルタ部と、収音環境検出部と、フィルタ制御部とを備えた情報処理装置における情報処理方法であって、
前記フィルタ特性算出部が、収音した音声に基づいて、前記音声から雑音を除去するためのフィルタ特性を算出する第１の工程と、
前記フィルタ部が、前記フィルタ特性算出部によって算出された前記フィルタ特性に基づいて、収音した音声から雑音を除去する第２の工程と、
前記収音環境検出部が、センサ情報に基づいて前記音声の収音環境を検出する第３の工程と、
前記フィルタ制御部が、前記収音環境検出部において検出された前記収音環境の変化を検出したとき、前記フィルタ特性算出部において前記フィルタ特性を算出させ、該フィルタ特性を前記フィルタ部に設定する第４の工程と、を備える情報処理方法。 - フィルタ特性算出部と、フィルタ部と、収音環境検出部と、フィルタ制御部とを備えた情報処理装置における情報処理方法をコンピュータに実行させるためのプログラムであって、
前記フィルタ特性算出部が、収音した音声に基づいて、前記音声から雑音を除去するためのフィルタ特性を算出する第１の工程と、
前記フィルタ部が、前記フィルタ特性算出部によって算出された前記フィルタ特性に基づいて、収音した音声から雑音を除去する第２の工程と、
前記収音環境検出部が、センサ情報に基づいて前記音声の収音環境を検出する第３の工程と、
前記フィルタ制御部が、前記収音環境検出部において検出された前記収音環境の変化を検出したとき、前記フィルタ特性算出部において前記フィルタ特性を算出させ、該フィルタ特性を前記フィルタ部に設定する第４の工程と、を備える情報処理方法をコンピュータに実行させるためのプログラム。 - フィルタ特性算出部と、フィルタ部と、収音環境検出部と、フィルタ制御部とを備えた情報処理装置における情報処理方法をコンピュータに実行させるためのプログラムを記録したコンピュータによって読み取り可能な非一過性の記録媒体であって、
前記フィルタ特性算出部が、収音した音声に基づいて、前記音声から雑音を除去するためのフィルタ特性を算出する第１の工程と、
前記フィルタ部が、前記フィルタ特性算出部によって算出された前記フィルタ特性に基づいて、収音した音声から雑音を除去する第２の工程と、
前記収音環境検出部が、センサ情報に基づいて前記音声の収音環境を検出する第３の工程と、
前記フィルタ制御部が、前記収音環境検出部において検出された前記収音環境の変化を検出したとき、前記フィルタ特性算出部において前記フィルタ特性を算出させ、該フィルタ特性を前記フィルタ部に設定する第４の工程と、を備える情報処理方法をコンピュータに実行させるためのプログラムを記録した記録媒体。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021-175853 | 2021-10-27 | ||
| JP2021175853 | 2021-10-27 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2023074655A1 true WO2023074655A1 (ja) | 2023-05-04 |
Family
ID=86157860
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2022/039618 WO2023074655A1 (ja) | 2021-10-27 | 2022-10-25 | 情報処理装置、情報処理方法、プログラムおよび記録媒体 |
Country Status (1)
| Country | Link |
|---|---|
| WO (1) | WO2023074655A1 (ja) |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005070643A (ja) * | 2003-08-27 | 2005-03-17 | Sony Corp | 監視システム、信号処理装置および方法、並びにプログラム |
| JP2006039267A (ja) * | 2004-07-28 | 2006-02-09 | Nissan Motor Co Ltd | 音声入力装置 |
| JP2006039447A (ja) * | 2004-07-30 | 2006-02-09 | Nissan Motor Co Ltd | 音声入力装置 |
| JP2007019595A (ja) * | 2005-07-05 | 2007-01-25 | Alpine Electronics Inc | 車載オーディオ処理装置 |
| JP2017138416A (ja) * | 2016-02-02 | 2017-08-10 | キヤノン株式会社 | 音声処理装置および音声処理方法 |
| JP2018191145A (ja) * | 2017-05-08 | 2018-11-29 | オリンパス株式会社 | 収音装置、収音方法、収音プログラム及びディクテーション方法 |
-
2022
- 2022-10-25 WO PCT/JP2022/039618 patent/WO2023074655A1/ja unknown
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005070643A (ja) * | 2003-08-27 | 2005-03-17 | Sony Corp | 監視システム、信号処理装置および方法、並びにプログラム |
| JP2006039267A (ja) * | 2004-07-28 | 2006-02-09 | Nissan Motor Co Ltd | 音声入力装置 |
| JP2006039447A (ja) * | 2004-07-30 | 2006-02-09 | Nissan Motor Co Ltd | 音声入力装置 |
| JP2007019595A (ja) * | 2005-07-05 | 2007-01-25 | Alpine Electronics Inc | 車載オーディオ処理装置 |
| JP2017138416A (ja) * | 2016-02-02 | 2017-08-10 | キヤノン株式会社 | 音声処理装置および音声処理方法 |
| JP2018191145A (ja) * | 2017-05-08 | 2018-11-29 | オリンパス株式会社 | 収音装置、収音方法、収音プログラム及びディクテーション方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4134989B2 (ja) | 車載用音響機器 | |
| US7941189B2 (en) | Communicating road noise control system, in-vehicle road noise controller, and server | |
| US9230538B2 (en) | Voice recognition device and navigation device | |
| US20100204987A1 (en) | In-vehicle speech recognition device | |
| CN108630221B (zh) | 基于量化snr分析和自适应维纳滤波的音频信号质量增强 | |
| WO2017081960A1 (ja) | 音声認識制御システム | |
| US10933860B2 (en) | Method and device for operating a hybrid vehicle comprising an electric energy store, an electric motor and an internal combustion engine | |
| US10654468B2 (en) | Method and device for operating a hybrid vehicle comprising an electric energy store, and electric motor and an internal combustion engine | |
| US20160019904A1 (en) | Adaptive Vehicle State-Based Hands-Free Phone Noise Reduction With Learning Capability | |
| US20180096699A1 (en) | Information-providing device | |
| JP2012025270A (ja) | 車両用の音量制御装置および音量制御装置用のプログラム | |
| US20160019890A1 (en) | Vehicle State-Based Hands-Free Phone Noise Reduction With Learning Capability | |
| JP2010283506A (ja) | 車載用音響処理装置 | |
| JP4297186B2 (ja) | 通信型ロードノイズ制御システム、車載ロードノイズ制御装置及びサーバ | |
| WO2023074655A1 (ja) | 情報処理装置、情報処理方法、プログラムおよび記録媒体 | |
| US11557275B2 (en) | Voice system and voice output method of moving machine | |
| CN117476005A (zh) | 基于语音识别车顶帐篷控制方法、系统、车辆及存储介质 | |
| JP5132376B2 (ja) | 音声改善装置および音声改善方法 | |
| JP4016529B2 (ja) | 雑音抑圧装置，音声認識装置及び車両用ナビゲーション装置 | |
| WO2023074654A1 (ja) | 情報処理装置、情報処理方法、プログラムおよび記録媒体 | |
| US11282517B2 (en) | In-vehicle device, non-transitory computer-readable medium storing program, and control method for the control of a dialogue system based on vehicle acceleration | |
| EP1531605A1 (en) | Method and system for noise reduction of a sound signal | |
| JP2007065122A (ja) | 車載用音声認識装置の雑音抑圧装置 | |
| JP2010202073A (ja) | 騒音制御装置及び騒音制御方法 | |
| JP2008070877A (ja) | 音声信号前処理装置、音声信号処理装置、音声信号前処理方法、及び音声信号前処理用のプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 22886982 Country of ref document: EP Kind code of ref document: A1 |