WO2021205493A1 - 記録制御装置及び記録制御方法 - Google Patents

記録制御装置及び記録制御方法 Download PDF

Info

Publication number
WO2021205493A1
WO2021205493A1 PCT/JP2020/015450 JP2020015450W WO2021205493A1 WO 2021205493 A1 WO2021205493 A1 WO 2021205493A1 JP 2020015450 W JP2020015450 W JP 2020015450W WO 2021205493 A1 WO2021205493 A1 WO 2021205493A1
Authority
WO
WIPO (PCT)
Prior art keywords
recording
voice
signal
driver
recording control
Prior art date
Application number
PCT/JP2020/015450
Other languages
English (en)
French (fr)
Inventor
下谷　光生
純也 氏家
裕生 山下
Original Assignee
三菱電機株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 三菱電機株式会社 filed Critical 三菱電機株式会社
Priority to PCT/JP2020/015450 priority Critical patent/WO2021205493A1/ja
Priority to JP2022513703A priority patent/JP7275382B2/ja
Publication of WO2021205493A1 publication Critical patent/WO2021205493A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles

Definitions

  • the present disclosure relates to a recording control device and a recording control method.
  • Patent Document 1 proposes a recording device that records the driver's consciousness and the like.
  • Voices such as vehicle running noise and music from audio equipment act as noise on the driver's voice, so important driver's voice may not be recorded accurately. That is, in the prior art, it is not possible to record the driver's voice so that it can be accurately restored after an event such as an accident. Therefore, there is a problem that various signals for performing appropriate analysis after the event cannot be recorded.
  • an object of the present disclosure is to provide a technique capable of recording a signal for performing an appropriate analysis after an event.
  • the recording control device is a recording control device that controls the recording of the recording device, and is a vehicle outside image acquisition unit that acquires an image around the vehicle as an outside vehicle image signal, and a driver who is a driver of the vehicle.
  • a driver state acquisition unit that acquires a state as a driver state signal
  • a first voice acquisition unit that acquires at least one of the voices inside and outside the vehicle as a first voice signal
  • directivity for voice acquisition Using the voice acquisition device, the second voice acquisition unit that acquires the voice with higher accuracy of the driver's voice than the first voice signal as the second voice signal and the occurrence of a specific event in the vehicle are detected.
  • the event detection unit and the event detection unit detect the occurrence of a specific event, the outside vehicle video signal, the driver status signal, and the first within a predetermined period including the time when the specific event occurs. It includes a recording control unit that controls recording of an audio signal and a second audio signal in a recording device as event recording information.
  • an external video signal, a driver status signal, and a first audio signal within a predetermined period including the time of the occurrence of the specific event are used.
  • the second audio signal is controlled to be recorded in the recording device as event recording information.
  • FIG. It is a block diagram which shows the structure of the recording control apparatus which concerns on Embodiment 1.
  • FIG. It is a block diagram which shows the structure of the recording control apparatus which concerns on Embodiment 2.
  • FIG. It is a block diagram which shows the structure of the microphone array which concerns on Embodiment 2.
  • FIG. It is a figure which shows the recording structure of the recording apparatus which concerns on Embodiment 2.
  • FIG. It is a flowchart which shows the operation of the recording control apparatus which concerns on Embodiment 2.
  • FIG. It is a block diagram which shows the structure of the microphone array which concerns on the modification 5 of Embodiment 2.
  • FIG. 3 It is a block diagram which shows the structure of the recording control apparatus which concerns on Embodiment 3. It is a block diagram which shows the structure of the 2nd sound acquisition part and its periphery which concerns on Embodiment 3.
  • FIG. It is a block diagram which shows the structure of the recording control apparatus which concerns on Embodiment 4.
  • FIG. It is a figure which shows the recording structure of the unit recording block which concerns on Embodiment 5.
  • FIG. 1 is a block diagram showing a configuration of a recording control device 1 according to the first embodiment.
  • the recording control device 1 will be mainly described as being mounted on the vehicle, but it may not be mounted on the vehicle as described later.
  • the recording control device 1 of FIG. 1 is wirelessly or wiredly connected to the recording device 51 so as to control the recording of the recording device 51.
  • the recording device 51 may be provided in the vehicle such as a drive recorder including a recording memory and an EDR, or may be provided outside the vehicle unlike them.
  • the recording control device 1 of FIG. 1 includes an external image acquisition unit 11, a driver state acquisition unit 12, a first audio acquisition unit 13, a second audio acquisition unit 14, an event detection unit 15, and a recording control unit 16. And.
  • the vehicle outside image acquisition unit 11 acquires the image around the vehicle as an outside vehicle image signal.
  • the vehicle exterior image acquisition unit 11 includes, for example, at least one of an vehicle exterior imaging device that captures an image of the surroundings of the vehicle and an vehicle exterior video input unit that is an interface thereof.
  • the image around the vehicle is, for example, an image in front of the vehicle, but is not limited to this.
  • the driver state acquisition unit 12 acquires the driver state, which is the state of the driver of the vehicle, as a driver state signal.
  • the driver state acquisition unit 12 includes, for example, at least one of a driver sensing device that detects a driver state and a driver state input unit that is an interface thereof. An example of the driver state will be described in the second embodiment and the like.
  • the first voice acquisition unit 13 acquires at least one of the voices inside and outside the vehicle as the first voice signal.
  • the second voice acquisition unit 14 uses a voice acquisition device having directivity for voice acquisition to acquire a voice having a higher accuracy of voice on the driver side than the first voice signal as a second voice signal.
  • the first voice acquisition unit 13 includes, for example, at least one of an omnidirectional microphone provided at a specific position of the vehicle and a voice input device as an interface thereof. However, if the first voice acquisition unit 13 can acquire a first voice signal having higher accuracy of voice other than the driver's voice than the second voice signal, the first voice acquisition unit 13 can acquire, for example, the front of the vehicle instead of the omnidirectional microphone. It may include a microphone having directivity to.
  • the second voice acquisition unit 14 includes, for example, at least one of a voice acquisition device having directivity for voice acquisition and a voice input device as an interface thereof.
  • the voice acquisition device is, for example, a microphone array having directivity in sound acquisition by performing beamforming processing on a plurality of microphones, or one or more directional microphones having directivity in sound acquisition by an internal mechanism. be.
  • the voice acquisition device may be provided at a specific position in the vehicle, preferably in front of the driver.
  • the event detection unit 15 detects the occurrence of a specific event in the vehicle.
  • the event detection unit 15 detects the occurrence of a specific event based on the sensor information detected by the sensor of the event detection unit 15 or the sensor provided outside the recording control device 1.
  • the sensor information is, for example, acceleration due to an impact received by the vehicle
  • the specific event is, for example, an event such as an accident of the vehicle to be subject to post-hoc analysis.
  • the recording control unit 16 determines the external video signal, the driver status signal, and the driver status signal within a predetermined period including the time when the specific event occurs. Control is performed to record the first voice signal and the second voice signal in the recording device 51 as event recording information.
  • the recording control device 1 when the occurrence of a specific event is detected, the event recording information within a predetermined period including the time when the specific event occurs can be obtained. It is recorded in the recording device 51.
  • the event recording information includes a first voice signal having a high accuracy of voice other than the voice of the driver side and a second voice signal having a high accuracy of the voice of the driver side. Therefore, according to the above configuration, it is appropriate after the event. It is possible to record signals for performing various analyzes. Further, since the event recording information includes the external video signal and the driver status signal, according to the above configuration, it is possible to record a signal for performing appropriate analysis after the event.
  • the record when a driver's utterance such as "dangerous" is recorded, the record can be used as a material to support when, under what circumstances, and when the driver perceived a dangerous situation, and can contribute to accident analysis. It becomes a material.
  • the record when the driver's utterance such as "from the right” is recorded, the record serves as a material to support that some dangerous element is approaching from the right, and can contribute to accident analysis.
  • FIG. 2 is a block diagram showing the configuration of the recording control device 1 according to the second embodiment.
  • the components that are the same as or similar to the above-mentioned components are designated by the same or similar reference numerals, and different components will be mainly described.
  • the recording control device 1 of FIG. 2 is wirelessly or wiredly connected to the recording device 51, the driver sensing device 52, and the microphone array 53.
  • the recording device 51 is the same as the recording device 51 described in the first embodiment.
  • the driver sensing device 52 detects, for example, a physiological state such as the driver's pulse and respiration, and a psychological state such as the driver's alertness and tension as the driver state described in the first embodiment.
  • the driver sensing device 52 uses, for example, a pulse detecting device that detects a pulse using infrared rays, a respiration detecting device that detects respiration using a millimeter wave radar, and image processing of a driver's facial image. Includes a recognition device that recognizes the degree of arousal and tension from facial expressions.
  • the driver state and the driver sensing device 52 are not limited to the above.
  • FIG. 3 is a block diagram showing a configuration of the microphone array 53 according to the second embodiment.
  • the microphone array 53 is included in the concept of the voice acquisition device described in the first embodiment, and may or may not be provided in the recording control device 1.
  • the microphone array 53 of FIG. 3 includes a plurality of microphones 53a1 to 53a5 and a processing filter 53b that performs beamforming processing on the plurality of microphones 53a1 to 53a5.
  • a processing filter 53b that performs beamforming processing on the plurality of microphones 53a1 to 53a5.
  • the beamforming process for example, the processes described in JP-A-2007-523514 and JP-A-2016-127300 may be used.
  • the outline of the beamforming process according to the second embodiment will be described.
  • the processing filter 53b takes into consideration the phase difference generated according to the difference between the distances between the driver's mouth and each of the plurality of microphones 53a1 to 53a5, and the audio signals MS1 to MS5 output from the plurality of microphones 53a1 to 53a5. Performs a filtering process to add. As a result, at least one of the amplification of the voice signal of the voice from the driver's mouth and the attenuation of the voice signal of the other voice are performed, and the accuracy of the voice on the driver side, that is, the clarity and the S / N ratio. Will be higher. As a result, even if each of the plurality of microphones 53a1 to 53a5 is an omnidirectional microphone, the microphone array 53 as a whole can have directivity in acquiring sound.
  • each of the plurality of microphones 53a1 to 53a5 acquires the voice fn ⁇ S0 (t) ⁇ + gn ⁇ N (t) ⁇ .
  • fn is a transmission characteristic of spoken voice
  • gn is a transmission characteristic of noise voice.
  • the processing filter 53b performs the above beamforming processing on the audio signals MS1 to MS5 of the audio acquired by the plurality of microphones 53a1 to 53a5. As a result, the processing filter 53b generates the voice voice signal SS (t) as the second voice signal by removing the voice signal of the noise voice N (t) from the voice signals MS1 to MS5.
  • This voice signal SS (t) is a voice signal close to the voice signal of only the spoken voice S0 (t), although there is some influence from the noise voice N (t).
  • the recording control device 1 of FIG. 2 includes an external image acquisition unit 11, a driver state acquisition unit 12, a first audio acquisition unit 13, a second audio acquisition unit 14, and an event detection.
  • a unit 15 and a recording control unit 16 are provided.
  • the vehicle outside image acquisition unit 11 acquires the image around the vehicle as an outside vehicle image signal.
  • the driver state acquisition unit 12 acquires the driver state including the physiological state and the psychological state of the driver detected by the driver sensing device 52 as a driver state signal.
  • the first voice acquisition unit 13 acquires at least one voice inside or outside the vehicle as a first voice signal from a microphone (not shown) different from the microphone array 53.
  • the second voice acquisition unit 14 produces voice with higher accuracy of the driver's voice such as spoken voice S0 (t) than the first voice signal, in which the influence of noise voice N (t) is reduced from the microphone array 53. , Acquired as the second voice signal SS (t).
  • the event detection unit 15 detects the occurrence of a specific event in the vehicle.
  • the recording control unit 16 records the event recording information within a predetermined period including the time when the specific event occurs in the recording device 51. I do.
  • the event recording information recorded in the recording device 51 includes not only an external video signal, a driver status signal, a first audio signal, and a second audio signal, but also an event occurrence time and an event occurrence position. Information such as may be included.
  • FIG. 4 is a diagram showing a recording structure of the recording device 51 according to the second embodiment.
  • the recording device 51 includes a constant recording area 51a and a protected recording area 51b.
  • the recording control unit 16 records the recording of event recording information for 6 minutes corresponding to one file in the constant recording area 51a and the protected recording area 51b as one unit recording block 51c.
  • FIG. 5 is a diagram showing a recording structure of the unit recording block 51c.
  • the unit recording block 51c corresponds to 6 minutes of event recording information, that is, 6 minutes of out-of-vehicle video signal, driver status signal, first audio signal, and second audio signal.
  • the first audio signal is recorded as stereo-format L-channel audio
  • the second audio signal is recorded as stereo-format R-channel audio.
  • the first audio signal may be recorded as R channel audio in stereo format
  • the second audio signal may be recorded as L channel audio in stereo format.
  • the recording control unit 16 records the unit recording block 51c in the constant recording area 51a at regular intervals (6 minutes in this example) after the recording control device 1 and the recording device 51 are activated.
  • the recording control unit 16 records the unit recording block 51c in the order of the partial areas LM1, LM2, ..., LM240 shown in FIG. 4 of the constant recording area 51a.
  • the recording control unit 16 stores information for identifying the partial area in which the unit recording block 51c is recorded, and when the power is turned on thereafter, the next of the partial areas is stored.
  • the unit recording block 51c is recorded from the partial area.
  • the recording control unit 16 records the unit recording block 51c in the partial region LM240
  • the recording control unit 16 returns to the partial region LM1 and records the unit recording block 51c by overwriting in the order of the partial regions LM1, LM2, ..., LM240. That is, the recording control unit 16 uses the constant recording area 51a as a ring buffer.
  • the recording control unit 16 protects and records the unit recording block 51c when the specific event occurs among the unit recording blocks 51c recorded in the constant recording area 51a. Record in area 51b. At this time, in addition to the unit recording block 51c when a specific event occurs, the recording control unit 16 has at least one of the unit recording block 51c in the previous partial area and the unit recording block 51c in the subsequent partial area. One may be recorded in the protected recording area 51b.
  • the recording control unit 16 overwrites the unit recording block 51c recorded in the constant recording area 51a with a new unit recording block 51c.
  • the recording control unit 16 prohibits erasing of the unit recording block 51c recorded in the protected recording area 51b by overwriting or the like until a predetermined condition is satisfied.
  • the predetermined conditions include, for example, the operation of a button (not shown) and the elapse of a certain period such as one month from the recording.
  • the recording period of the event recording information recorded in the protected recording area 51b when the occurrence of a specific event is detected is recorded in the constant recording area 51a when the occurrence of a specific event is not detected. It will be longer than the recording period of event recording information.
  • the file structure, the recordable time of the constant recording area 51a and the protected recording area 51b, the capacity of the unit recording block 51c, and the role of the folder are not limited to the above.
  • the recordable time and capacity are smaller than the above. It may be large or large.
  • the recording device 51 may be provided on the vehicle or outside the vehicle, for example. Specifically, both the constant recording area 51a and the protection recording area 51b may be provided on the vehicle or outside the vehicle, and one of the constant recording area 51a and the protection recording area 51b may be provided on the vehicle. The other may be provided outside the vehicle.
  • the constant recording area 51a and the protected recording area 51b are separated, but these may not be separated.
  • the protected recording area 51b may be defined in the constant recording area 51a.
  • the unit recording block 51c to which the protection recording area flag is added is substantially the same as the unit recording block 51c recorded in the protection recording area 51b, so that the protection recording area is contained in the constant recording area 51a. 51b will be substantially defined.
  • FIG. 6 is a flowchart showing the operation of the recording control device 1 according to the second embodiment. The operation of FIG. 6 is started when the power of the recording control device 1 and the recording device 51 is turned on, for example, by starting a drive source such as an engine of a vehicle.
  • a drive source such as an engine of a vehicle.
  • step S1 the vehicle exterior video acquisition unit 11 acquires the vehicle exterior video signal.
  • step S2 the driver status acquisition unit 12 acquires the driver status signal.
  • step S3 the first voice acquisition unit 13 acquires the first voice signal.
  • step S4 the second audio acquisition unit 14 acquires the second audio signal. The order of operations in steps S1 to S4 may be changed as appropriate.
  • step S5 the recording control unit 16 records the event recording information obtained by the operations of steps S1 to S4 in the constant recording area 51a.
  • step S6 the recording control unit 16 determines whether or not the event detection unit 15 has detected the occurrence of a specific event. If it is determined that the occurrence of a specific event has been detected, the process proceeds to step S7, and if it is determined that the occurrence of a specific event has not been detected, the process returns to step S1.
  • the recording control device 1 is an emergency power supply and a capacitor capable of supplying electric power in such a case so that the operation after step S6 can be performed even when a specific event such as a vehicle accident occurs. It may be provided in.
  • step S7 the recording control unit 16 records the event recording information within a predetermined period including the time when a specific event occurs in the protected recording area 51b.
  • step S8 the recording control unit 16 determines whether or not the driving in the vehicle has been completed. When it is determined that the operation is completed, the operation of FIG. 6 is completed, and when it is not determined that the operation is completed, the process returns to step S1.
  • the recording period of the event recording information recorded in the protected recording area 51b when the occurrence of a specific event is detected is the constant recording area when the occurrence of a specific event is not detected. It is longer than the recording period of the event recording information recorded in 51a. Therefore, for this reason, it is possible to suppress the erasure of the signal for performing appropriate analysis after the event as much as possible.
  • the voice acquisition device is the microphone array 53, but the present invention is not limited to this.
  • the voice acquisition device may be one directional microphone designed by the driver to have directivity in acquiring voice by an internal mechanism. According to such a configuration, the accuracy of the voice on the driver side is lower than that of the configuration in which the voice acquisition device is the microphone array 53, but the cost can be reduced.
  • the driver state acquired by the driver state acquisition unit 12 includes, but is not limited to, the physiological state and the psychological state of the driver detected by the driver sensing device 52.
  • the driver state acquired by the driver state acquisition unit 12 may include the appearance state (physical state) of the driver's body.
  • the appearance state of the driver's body includes, for example, the opening / closing state of the driver's mouth, the inattentive state of the driver, the line of sight of the driver, the opening / closing state of the driver's eyes, and the tilted state of the driver's body. ..
  • the driver sensing device 52 includes, for example, an image processing device, an ultrasonic sensor, a pressure sensor, and the like. The driver sensing device 52 may determine the presence or absence of voice from the driver based on the opening and closing of the driver's mouth, or the driver issues the driver's mouth by performing lip reading to open and close the driver's mouth. Words may be detected.
  • the driver state acquired by the driver state acquisition unit 12 may include an image of the driver.
  • the driver sensing device 52 includes, for example, an image capturing device.
  • the driver state acquired by the driver state acquisition unit 12 is at least one of a driver's physiological state, a driver's psychological state, a driver's physical appearance state, and an image of the driver. The above may be included.
  • the driver status signal is recorded in a recording area different from the outside video signal, the first audio signal, and the second audio signal.
  • the driver status signal may be recorded in the same recording area as the external video signal by being encryptedly included in the external video signal and recorded in the recording device 51 like a digital watermark.
  • the external video signal, the first audio signal, and the second audio signal can be easily confirmed by a normal video playback application or a normal video playback device, and the driver status signal is a dedicated video playback. It can be analyzed with an application or a dedicated video playback device.
  • the video recording method for external video signals is preferably, for example, general methods such as AVCHD (registered trademark), MPEG2, MPEG4, MP4, JPEG2000, and AVI, but is not limited thereto.
  • the driver status signal may be recorded in the recording device 51 as a video signal.
  • the numerical value of the driver state represented by the driver state signal is recorded as a video signal so that the numerical value of the driver state can be displayed as a graph with time as a parameter, that is, it can be displayed like a voltage waveform display of an oscilloscope. good.
  • the outside video signal occupies 90% of the display area and the driver status signal occupies 10% of the display area so that the display area of the outside video signal is larger than the display area of the driver status signal. You may occupy it.
  • the event detection unit 15 may detect the occurrence of a specific event based on the second voice signal acquired by the second voice acquisition unit 14. For example, the event detection unit 15 recognizes the driver's voice by analyzing the second voice signal, and the driver's voice indicates a fear, a voice instructing the start of recording, and a live condition outside the vehicle. It may be determined whether it is at least one of the sounds to be played. Then, when it is determined that the driver's voice is at least one of the above, it may be determined that the event detection unit 15 has detected the occurrence of a specific event.
  • the event detection unit 15 may detect the occurrence of a specific event based on the image. For example, when it is determined by the analysis of the driver's image that the facial expression of the driver is a facial expression showing fear, it may be determined that the occurrence of a specific event is detected by the event detection unit 15.
  • the first voice acquisition unit 13 acquires the first voice signal from a microphone different from the microphone array 53, but the present invention is not limited to this. As shown in FIG. 7, for example, the first voice acquisition unit 13 is at least one of the inside and outside of the vehicle acquired by any one of the plurality of microphones of the microphone array 53 (microphone 53a3 in FIG. 7). The voice of is may be acquired as the first voice signal. According to such a configuration, the number of microphones can be reduced.
  • FIG. 8 is a block diagram showing the configuration of the recording control device 1 according to the third embodiment.
  • the same or similar components as those described above will be designated by the same or similar reference numerals, and different components will be mainly described.
  • the recording control device 1 of FIG. 8 is not only wirelessly or wiredly connected to the recording device 51, the driver sensing device 52, and the microphone array 53, but is also wirelessly or wiredly connected to the audio device 54. ing.
  • the audio device 54 generates the music sound based on the audio signal for generating the music sound, and outputs the music sound from the speaker 54a which is the sound output unit of the vehicle.
  • the audio device 54 includes, for example, a playback device that reproduces the sound of music from an audio signal such as music data for playback, an amplifier that amplifies the sound signal, and the like.
  • the second voice acquisition unit 14 reduces, preferably deletes, the music voice signal corresponding to the music voice from the second voice signal based on the audio signal for generating the music voice output from the speaker 54a. ..
  • FIG. 9 is a block diagram showing a configuration of the second sound acquisition unit 14 and its surroundings according to the third embodiment.
  • M (t) is the sound of music emitted from the speaker 54a into the vehicle.
  • the voice signal SS (t) of the voice close to the spoken voice S0 (t) and the music voice signal MM (t) corresponding to the music voice M (t) are mixed. Mixed voice is generated.
  • the second voice acquisition unit 14 provisionally acquires the mixed voice from the processing filter 53b as the second voice signal. Further, an audio signal Mo (t) for generating a music sound M (t) is input to the second sound acquisition unit 14.
  • the second voice acquisition unit 14 includes an adaptive filter 14a.
  • the adaptive filter 14a performs a music canceling process for reducing the music audio signal MM (t) from the provisionally acquired second audio signal based on the audio signal Mo (t), thereby performing the second audio signal SSS ( t) is generated. Since the correlation between the audio signal Mo (t) and the music voice signal MM (t) included in the provisionally acquired second voice signal is high, the second voice signal SSS generated by the adaptive filter 14a ( t) is a voice signal close to the voice signal of only the spoken voice S0 (t).
  • FIG. 10 is a block diagram showing the configuration of the recording control device 1 according to the fourth embodiment.
  • the same or similar components as those described above will be designated by the same or similar reference numerals, and different components will be mainly described.
  • the driver sensing device 52 takes an image of the driver and detects the position of the driver's mouth based on the image.
  • the driver sensing device 52 may detect the position of the mouth by using image processing such as image recognition, or may detect the position of the mouth by using an ultrasonic sensor or the like.
  • the microphone array 53 was filtered (beamforming) on the assumption that the position of the driver's mouth was a fixed position.
  • the microphone array 53 adjusts the parameters of the filtering process (beamforming process) based on the position of the driver's mouth so that the directivity of voice acquisition is the position of the mouth. Control the directivity of audio acquisition so as to correspond to.
  • the prediction accuracy of the time difference (phase difference) at which the driver's voice such as the spoken voice S0 (t) reaches each of the plurality of microphones 53a1 to 53a5 can be obtained. Can be enhanced. Therefore, the accuracy of the voice on the driver side can be further improved.
  • the directivity of the microphone array 53 is controlled based on the position of the driver's mouth. According to such a configuration, it is possible to record a second voice signal in which the accuracy of the voice on the driver side is further improved by a relatively simple process.
  • the block configuration of the recording control device 1 according to the fifth embodiment is the same as the block configuration (FIG. 2) of the recording control device 1 according to the second embodiment.
  • the same or similar components as those described above will be designated by the same or similar reference numerals, and different components will be mainly described.
  • the first audio signal was recorded as stereo-format L-channel audio
  • the second audio signal was recorded as stereo-format R-channel audio.
  • a reproduction device not shown
  • at least one of the in-vehicle and out-of-vehicle audio from the L channel and the driver's audio from the R channel are simultaneously reproduced.
  • these voices include voices from different voice sources, voices that are difficult to hear will be reproduced.
  • both the first audio signal and the second audio signal are stereo audio signals, and one of the first audio signal and the second audio signal is recorded as the main audio. , The other of the first audio signal and the second audio signal is recorded as a sub audio.
  • the first audio signal is recorded as the main audio of the L channel and the R channel
  • the second audio signal is recorded as the sub audio of the L channel and the R channel, but the present invention is not limited to this.
  • the second audio signal may be recorded as the main audio of the L channel and the R channel
  • the first audio signal may be recorded as the sub audio of the L channel and the R channel.
  • the first audio acquisition unit 13 may acquire the first audio signal using a stereo microphone.
  • the second audio acquisition unit 14 may acquire the second audio signal using a stereo microphone.
  • one of the first audio signal and the second audio signal is recorded as the main audio
  • the other of the first audio signal and the second audio signal is the sub. Recorded as audio.
  • the sound of the first sound signal and the sound of the second sound signal can be switched and reproduced. Further, by simultaneously reproducing the main audio and the sub audio during the audio reproduction, it is possible to easily compare the audio of the first audio signal with the audio of the second audio signal.
  • the recording control unit 16 may record the event recording information in the recording device 51 in a format that can be directly reproduced by a video reproduction device such as a video reproduction application or a television. According to such a configuration, it is possible to switch between the main sound and the sub sound and to play back the video simply by connecting or inserting the recording device 51 into a video playback device such as a television.
  • the event recording information can be configured only from the video signal and the audio signal, so that the usability of the recording device 51 is improved. be able to.
  • the recording control device 1 and the recording device 51 do not have a reproduction function for reproducing the event recording information, but may have the reproduction function. According to such a configuration, the event recording information can be reproduced without connecting the dedicated reproduction device to the recording control device 1 or the like.
  • the vehicle exterior image acquisition unit 11 and the like are realized by the processing circuit 81 shown in FIG. That is, the processing circuit 81 has an outside image acquisition unit 11 that acquires an image around the vehicle as an outside image signal, and a driver state acquisition unit 12 that acquires the driver state, which is the state of the driver of the vehicle, as a driver state signal. From the first voice signal, using the first voice acquisition unit 13 that acquires at least one of the voices inside and outside the vehicle as the first voice signal, and the voice acquisition device having directionality in acquiring the voice.
  • the event detection unit 15 that detects the occurrence of a specific event in the vehicle, and the event detection unit 15.
  • the outside-vehicle video signal, the driver status signal, the first audio signal, and the second audio signal within a predetermined period including the occurrence of a specific event are transmitted.
  • a recording control unit 16 that controls recording of event recording information in the recording device 51 is provided.
  • Dedicated hardware may be applied to the processing circuit 81, or a processor that executes a program stored in the memory may be applied. Examples of the processor include a central processing unit, a processing unit, an arithmetic unit, a microprocessor, a microcomputer, a DSP (Digital Signal Processor), and the like.
  • the processing circuit 81 may be, for example, a single circuit, a composite circuit, a programmed processor, a parallel programmed processor, an ASIC (Application Specific Integrated Circuit), or an FPGA (Field Programmable Gate). Array), or a combination of these.
  • Each of the functions of each part such as the vehicle exterior image acquisition unit 11 may be realized by a circuit in which processing circuits are dispersed, or the functions of each part may be collectively realized by one processing circuit.
  • the processing circuit 81 When the processing circuit 81 is a processor, the functions of the vehicle exterior image acquisition unit 11 and the like are realized by combining with software and the like.
  • the software and the like correspond to, for example, software, firmware, or software and firmware.
  • Software and the like are described as programs and stored in memory.
  • the processor 82 applied to the processing circuit 81 realizes the functions of each part by reading and executing the program stored in the memory 83. That is, when executed by the processing circuit 81, the recording control device 1 acquires a step of acquiring an image around the vehicle as an outside image signal and a driver state which is the state of the driver of the vehicle as a driver state signal.
  • the driver uses a step of acquiring at least one of the voices inside and outside the vehicle as the first voice signal, and a voice acquisition device having directionality in acquiring the voice, rather than the first voice signal.
  • a memory 83 is provided for storing a program that will be executed as a result.
  • the memory 83 is a non-volatile or non-volatile memory such as a RAM (RandomAccessMemory), a ROM (ReadOnlyMemory), a flash memory, an EPROM (ErasableProgrammableReadOnlyMemory), and an EEPROM (ElectricallyErasableProgrammableReadOnlyMemory). Volatile semiconductor memory, HDD (Hard Disk Drive), magnetic disk, flexible disk, optical disk, compact disk, mini disk, DVD (Digital Versatile Disc), its drive device, etc., or any storage medium that will be used in the future. You may.
  • each function of the vehicle exterior image acquisition unit 11 and the like is realized by either hardware or software has been described above.
  • the present invention is not limited to this, and a configuration may be configured in which a part of the vehicle exterior image acquisition unit 11 or the like is realized by dedicated hardware and another part is realized by software or the like.
  • the external image acquisition unit 11, the driver state acquisition unit 12, the first audio acquisition unit 13, the second audio acquisition unit 14, and the event detection unit 15 are processing circuits 81, interfaces, and receivers as dedicated hardware.
  • the function can be realized by the processing circuit 81 as the processor 82 reading and executing the program stored in the memory 83.
  • the processing circuit 81 can realize each of the above-mentioned functions by hardware, software, or a combination thereof.
  • the recording control device 1 described above includes at least one of a vehicle device such as a DMS (Driver Monitoring System), a communication terminal including a mobile terminal such as a mobile phone, a smartphone and a tablet, and a vehicle device and a communication terminal. It can also be applied to a recording control system constructed as a system by appropriately combining the functions of the installed application and the server. In this case, each function or each component of the recording control device 1 described above may be dispersedly arranged in each device for constructing the system, or may be centrally arranged in any of the devices. good.
  • a vehicle device such as a DMS (Driver Monitoring System)
  • a communication terminal including a mobile terminal such as a mobile phone, a smartphone and a tablet
  • vehicle device and a communication terminal a communication terminal constructed as a system by appropriately combining the functions of the installed application and the server.
  • each function or each component of the recording control device 1 described above may be dispersedly arranged in each device for constructing the system, or may be centrally
  • FIG. 14 is a block diagram showing the configuration of the server 91 according to this modification.
  • the server 91 of FIG. 14 includes a communication unit 91a and a control unit 91b, and can perform wireless communication with a vehicle device 93 such as a DMS device of the vehicle 92.
  • a vehicle device 93 such as a DMS device of the vehicle 92.
  • the vehicle device 93 corresponding to the vehicle exterior video acquisition unit 11, the driver status acquisition unit 12, the first audio acquisition unit 13, and the second audio acquisition unit 14 includes the vehicle exterior video signal, the driver status signal, and the first audio signal. And, the second voice signal is acquired, and the event-related information regarding a specific event is acquired.
  • the communication unit 91a receives the event-related information acquired by the vehicle device 93 by performing wireless communication with the vehicle device 93.
  • the control unit 91b has the same functions as the event detection unit 15 and the recording control unit 16 of FIG. 1 by executing a program stored in a memory (not shown) of the server 91 by a processor (not shown) of the server 91. ing. That is, the control unit 91b detects the occurrence of a specific event in the vehicle based on the event-related information. Then, when the occurrence of a specific event is detected, the control unit 91b provides an external video signal, a driver status signal, and a first audio signal within a predetermined period including the occurrence of the specific event. And the second audio signal are generated as a control signal for controlling recording of the event recording information in the recording device 51. Then, the communication unit 91a transmits the control signal generated by the control unit 91b to the vehicle device 93. According to the server 91 configured in this way, the same effect as that of the recording control device 1 described in the first embodiment can be obtained.
  • FIG. 15 is a block diagram showing the configuration of the communication terminal 96 according to this modification.
  • the communication terminal 96 of FIG. 15 includes a communication unit 96a similar to the communication unit 91a and a control unit 96b similar to the control unit 91b, and can perform wireless communication with the vehicle device 98 of the vehicle 97. ing.
  • the communication terminal 96 is, for example, a mobile terminal such as a mobile phone, a smartphone, or a tablet carried by the driver of the vehicle 97. According to the communication terminal 96 configured in this way, the same effect as that of the recording control device 1 described in the first embodiment can be obtained.
  • 1 recording control device 11 outside vehicle image acquisition unit, 12 driver status acquisition unit, 13 first audio acquisition unit, 14 second audio acquisition unit, 15 event detection unit, 16 recording control unit, 51 recording device, 53 microphone array, 53a Microphone.

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Time Recorders, Dirve Recorders, Access Control (AREA)
  • Traffic Control Systems (AREA)

Abstract

イベント後に適切な解析を行うための信号を記録可能な技術を提供することを目的とする。記録制御装置は、音声の取得に指向性を有する音声取得装置を用いて、第１音声信号よりも運転者側の音声の精度が高い音声を第２音声信号として取得する第２音声取得部と、特定のイベントの発生が検出された場合に、特定のイベントの発生時を含む予め定められた期間内の、車外映像信号と、運転者状態信号と、第１音声信号と、第２音声信号とを、イベント記録情報として記録装置に記録する制御を行う記録制御部とを備える。

Description

記録制御装置及び記録制御方法
　本開示は、記録制御装置及び記録制御方法に関する。
　近年、事故発生要因の事後解析のために事故発生前後の車両周辺の画像と車両内の音声とを記録する、ドライブレコーダやＥＤＲ（Event Data Recorder）などの車両用の記録装置に関する技術が提案されている。例えば、特許文献１には、運転者の意識などを記録する記録装置が提案されている。
特開２０１４－２１７６７号公報
　車両の走行音や音響機器からの音楽などの音声は、運転者の音声に対してノイズとして作用するため、重要な運転者の音声が精度よく記録されないことがある。つまり、従来技術では、事故などのイベント後に精度よく復元できるように、運転者の音声を記録することができない。このため、イベント後に適切な解析を行うための各種信号を記録することができないという問題があった。
　そこで、本開示は、上記のような問題点を鑑みてなされたものであり、イベント後に適切な解析を行うための信号を記録可能な技術を提供することを目的とする。
　本開示に係る記録制御装置は、記録装置の記録を制御する記録制御装置であって、車両周辺の映像を車外映像信号として取得する車外映像取得部と、車両の運転者の状態である運転者状態を運転者状態信号として取得する運転者状態取得部と、車両内及び車両外の少なくともいずれか一方の音声を第１音声信号として取得する第１音声取得部と、音声の取得に指向性を有する音声取得装置を用いて、第１音声信号よりも運転者側の音声の精度が高い音声を第２音声信号として取得する第２音声取得部と、車両での特定のイベントの発生を検出するイベント検出部と、イベント検出部で特定のイベントの発生が検出された場合に、特定のイベントの発生時を含む予め定められた期間内の、車外映像信号と、運転者状態信号と、第１音声信号と、第２音声信号とを、イベント記録情報として記録装置に記録する制御を行う記録制御部とを備える。
　本開示によれば、特定のイベントの発生が検出された場合に、特定のイベントの発生時を含む予め定められた期間内の、車外映像信号と、運転者状態信号と、第１音声信号と、第２音声信号とを、イベント記録情報として記録装置に記録する制御を行う。このような構成によれば、イベント後に適切な解析を行うための信号を記録することができる。
　本開示の目的、特徴、態様及び利点は、以下の詳細な説明と添付図面とによって、より明白となる。
実施の形態１に係る記録制御装置の構成を示すブロック図である。 実施の形態２に係る記録制御装置の構成を示すブロック図である。 実施の形態２に係るマイクロホンアレイの構成を示すブロック図である。 実施の形態２に係る記録装置の記録構造を示す図である。 実施の形態２に係る単位記録ブロックの記録構造を示す図である。 実施の形態２に係る記録制御装置の動作を示すフローチャートである。 実施の形態２の変形例５に係るマイクロホンアレイの構成を示すブロック図である。 実施の形態３に係る記録制御装置の構成を示すブロック図である。 実施の形態３に係る第２音声取得部及びその周辺の構成を示すブロック図である。 実施の形態４に係る記録制御装置の構成を示すブロック図である。 実施の形態５に係る単位記録ブロックの記録構造を示す図である。 その他の変形例に係る記録制御装置のハードウェア構成を示すブロック図である。 その他の変形例に係る記録制御装置のハードウェア構成を示すブロック図である。 その他の変形例に係るサーバの構成を示すブロック図である。 その他の変形例に係る通信端末の構成を示すブロック図である。
　＜実施の形態１＞
　図１は、本実施の形態１に係る記録制御装置１の構成を示すブロック図である。以下、記録制御装置１が、車両に搭載されているものとして主に説明するが、後述するように車両に搭載されていなくてもよい。
　図１の記録制御装置１は、記録装置５１と無線または有線によって通信可能に接続されており、記録装置５１の記録を制御する。記録装置５１は、例えば、記録メモリを含むドライブレコーダ及びＥＤＲなどのように車両に設けられてもよいし、それらと異なり車両外部に設けられてもよい。
　図１の記録制御装置１は、車外映像取得部１１と、運転者状態取得部１２と、第１音声取得部１３と、第２音声取得部１４と、イベント検出部１５と、記録制御部１６とを備える。
　車外映像取得部１１は、車両周辺の映像を車外映像信号として取得する。車外映像取得部１１は、例えば、車両周辺の映像を撮影する車外撮影装置と、そのインターフェースである車外映像入力部との少なくともいずれか１つを含む。車両周辺の映像は、例えば車両前方の映像であるが、これに限ったものではない。
　運転者状態取得部１２は、車両の運転者の状態である運転者状態を運転者状態信号として取得する。運転者状態取得部１２は、例えば、運転者状態を検出するドライバセンシング装置と、そのインターフェースである運転者状態入力部との少なくともいずれか１つを含む。なお、運転者状態の例については実施の形態２などで説明する。
　第１音声取得部１３は、車両内及び車両外の少なくともいずれか一方の音声を第１音声信号として取得する。第２音声取得部１４は、音声の取得に指向性を有する音声取得装置を用いて、第１音声信号よりも運転者側の音声の精度が高い音声を第２音声信号として取得する。
　第１音声取得部１３は、例えば、車両の特定の位置に設けられた無指向性マイクロホンと、そのインターフェースである音声入力装置との少なくともいずれか１つを含む。ただし、第１音声取得部１３は、第２音声信号よりも運転者側の音声以外の音声の精度が高い第１音声信号を取得できるのであれば、無指向性マイクロホンの代わりに、例えば車両前方への指向性を有するマイクロホンなどを含んでもよい。
　第２音声取得部１４は、例えば、音声の取得に指向性を有する音声取得装置と、そのインターフェースである音声入力装置との少なくともいずれか１つを含む。音声取得装置は、例えば、複数のマイクロホンにビームフォーミング処理を行うことにより音声の取得に指向性を有するマイクロホンアレイ、または、内部機構により音声の取得に指向性を有する１つ以上の指向性マイクロホンである。音声取得装置は、車両の特定の位置に設けられればよく、好ましくは運転者の前方に設けられる。
　イベント検出部１５は、車両での特定のイベントの発生を検出する。イベント検出部１５は、イベント検出部１５のセンサ、または、記録制御装置１の外部に設けられたセンサで検出されたセンサ情報に基づいて、特定のイベントの発生を検出する。センサ情報は、例えば車両が受けた衝撃などによる加速度などであり、特定のイベントは、例えば事後解析の対象となる車両の事故などのイベントである。
　記録制御部１６は、イベント検出部１５で特定のイベントの発生が検出された場合に、特定のイベントの発生時を含む予め定められた期間内の、車外映像信号と、運転者状態信号と、第１音声信号と、第２音声信号とを、イベント記録情報として記録装置５１に記録する制御を行う。
　＜実施の形態１のまとめ＞
　以上のような本実施の形態１に係る記録制御装置１によれば、特定のイベントの発生が検出された場合に、特定のイベントの発生時を含む予め定められた期間内のイベント記録情報が記録装置５１に記録される。イベント記録情報は、運転者側の音声以外の音声の精度が高い第１音声信号と、運転者側の音声の精度が高い第２音声信号とを含むので、上記構成によれば、イベント後に適切な解析を行うための信号を記録することができる。また、イベント記録情報は、車外映像信号と、運転者状態信号とを含むので、上記構成によれば、イベント後に適切な解析を行うための信号を記録することができる。例えば、運転者の「あぶない」などの発声が記録された場合、その記録は、運転者が、いつ、どのような状況で、危険な状況を認識したのかを裏付ける材料となり、事故解析に貢献できる材料となる。また、運転者の「右から」などの発声が記録された場合、その記録は、右から何かの危険要素が迫ってきたことを裏付ける材料となり、事故解析に貢献できる材料となる。
　＜実施の形態２＞
　図２は、本実施の形態２に係る記録制御装置１の構成を示すブロック図である。以下、本実施の形態２に係る構成要素のうち、上述の構成要素と同じまたは類似する構成要素については同じまたは類似する参照符号を付し、異なる構成要素について主に説明する。
　図２の記録制御装置１は、記録装置５１、ドライバセンシング装置５２及びマイクロホンアレイ５３と無線または有線によって通信可能に接続されている。記録装置５１は、実施の形態１で説明した記録装置５１と同様である。
　ドライバセンシング装置５２は、実施の形態１で述べた運転者状態として、例えば、運転者の脈拍及び呼吸などの生理状態、及び、運転者の覚醒度及び緊張度などの心理状態を検出する。この場合、ドライバセンシング装置５２は、例えば、赤外線を用いて脈拍を検出する脈拍検出装置、ミリ波レーダを用いて呼吸を検出する呼吸検出装置、並びに、運転者の顔画像の画像処理を用いて表情から覚醒度及び緊張度を認識する認識装置などを含む。なお、運転者状態、及び、ドライバセンシング装置５２は、上記に限ったものではない。
　マイクロホンアレイ５３は、第２音声取得部１４に用いられる。図３は、本実施の形態２に係るマイクロホンアレイ５３の構成を示すブロック図である。このマイクロホンアレイ５３は、実施の形態１で述べた音声取得装置の概念に含まれ、記録制御装置１に備えられてもよいし、記録制御装置１に備えられなくてもよい。
　図３のマイクロホンアレイ５３は、複数のマイクロホン５３ａ１～５３ａ５と、複数のマイクロホン５３ａ１～５３ａ５に対してビームフォーミング処理を行う処理フィルタ５３ｂとを含む。ビームフォーミング処理として、例えば特表２００７－５２３５１４号公報及び特開２０１６－１２７３００号公報に記載された処理が用いられてもよい。以下、本実施の形態２に係るビームフォーミング処理の概要について説明する。
　処理フィルタ５３ｂは、運転者の口と複数のマイクロホン５３ａ１～５３ａ５のそれぞれとの距離同士の差に応じて生じる位相差を考慮して、複数のマイクロホン５３ａ１～５３ａ５から出力された音声信号ＭＳ１～ＭＳ５を加算するフィルタ処理を行う。これにより、運転者の口からの音声の音声信号の増幅、及び、他の音声の音声信号の減衰の少なくともいずれかが行われ、運転者側の音声の精度、つまり明瞭性及びＳ／Ｎ比が高くなる。この結果、複数のマイクロホン５３ａ１～５３ａ５のそれぞれが無指向性マイクロホンであったとしても、マイクロホンアレイ５３全体として音声の取得に指向性を有することが可能となる。
　ここで、図３において、運転者６１からの音声である発話音声がＳ０（ｔ）であり、それ以外の音声であるノイズ音声がＮ（ｔ）である場合について説明する。この場合、複数のマイクロホン５３ａ１～５３ａ５のそれぞれはｆｎ｛Ｓ０（ｔ）｝＋ｇｎ｛Ｎ（ｔ）｝という音声を取得する。なお、ｆｎは発話音声の伝達特性であり、ｇｎはノイズ音声の伝達特性である。
　処理フィルタ５３ｂは、複数のマイクロホン５３ａ１～５３ａ５で取得された音声の音声信号ＭＳ１～ＭＳ５に対して上記ビームフォーミング処理を行う。これにより、処理フィルタ５３ｂは、音声信号ＭＳ１～ＭＳ５からノイズ音声Ｎ（ｔ）の音声信号を除去することによって、音声の音声信号ＳＳ（ｔ）を第２音声信号として生成する。この音声信号ＳＳ（ｔ）は、ノイズ音声Ｎ（ｔ）による多少の影響があるものの、発話音声Ｓ０（ｔ）のみの音声信号に近い音声信号となる。
　図２の記録制御装置１は、実施の形態１と同様に、車外映像取得部１１と、運転者状態取得部１２と、第１音声取得部１３と、第２音声取得部１４と、イベント検出部１５と、記録制御部１６とを備える。
　車外映像取得部１１は、車両周辺の映像を車外映像信号として取得する。運転者状態取得部１２は、ドライバセンシング装置５２で検出された運転者の生理状態及び心理状態を含む運転者状態を、運転者状態信号として取得する。
　第１音声取得部１３は、マイクロホンアレイ５３とは別のマイクロホン（図示せず）から、車両内及び車両外の少なくともいずれか一方の音声を第１音声信号として取得する。第２音声取得部１４は、マイクロホンアレイ５３からノイズ音声Ｎ（ｔ）の影響が低減された、第１音声信号よりも発話音声Ｓ０（ｔ）などの運転者側の音声の精度が高い音声を、第２音声信号ＳＳ（ｔ）として取得する。
　イベント検出部１５は、車両での特定のイベントの発生を検出する。記録制御部１６は、イベント検出部１５で特定のイベントの発生が検出された場合に、特定のイベントの発生時を含む予め定められた期間内のイベント記録情報を、記録装置５１に記録する制御を行う。なお、記録装置５１に記録されるイベント記録情報は、車外映像信号と、運転者状態信号と、第１音声信号と、第２音声信号と含むだけでなく、イベント発生時刻、及び、イベント発生位置などの情報を含んでもよい。
　図４は、本実施の形態２に係る記録装置５１の記録構造を示す図である。記録装置５１は、常時記録エリア５１ａと、保護記録エリア５１ｂとを含む。記録制御部１６は、常時記録エリア５１ａ及び保護記録エリア５１ｂに、１つのファイルに対応する６分間のイベント記録情報の記録を、１つの単位記録ブロック５１ｃとして記録する。
　図５は、単位記録ブロック５１ｃの記録構造を示す図である。単位記録ブロック５１ｃは、６分間のイベント記録情報、つまり、６分間の車外映像信号、運転者状態信号、第１音声信号、及び、第２音声信号に相当する。本実施の形態２では、第１音声信号が、ステレオ形式のＬチャンネル音声として記録され、第２音声信号が、ステレオ形式のＲチャンネル音声として記録される。なお、これとは逆に、第１音声信号が、ステレオ形式のＲチャンネル音声として記録され、第２音声信号が、ステレオ形式のＬチャンネル音声として記録されてもよい。
　図４に戻って、記録制御部１６は、記録制御装置１及び記録装置５１が起動してから一定周期（この例では６分）ごとに、単位記録ブロック５１ｃを常時記録エリア５１ａに記録する。常時記録エリア５１ａでは、例えば２４時間分の単位記録ブロック５１ｃ、すなわち２４０（＝２４時間／６分間）個の単位記録ブロック５１ｃが記録可能となっている。
　記録制御部１６は、常時記録エリア５１ａの図４に示される部分領域ＬＭ１、ＬＭ２、…、ＬＭ２４０の順に、単位記録ブロック５１ｃを記録していく。記録制御装置１及び記録装置５１の電源オフ時には、記録制御部１６は、単位記録ブロック５１ｃが記録されている部分領域を識別する情報を記憶し、その後の電源オン時に、当該部分領域の次の部分領域から単位記録ブロック５１ｃを記録していく。記録制御部１６は、部分領域ＬＭ２４０に単位記録ブロック５１ｃを記録すると、部分領域ＬＭ１に戻って、部分領域ＬＭ１、ＬＭ２、…、ＬＭ２４０の順に、単位記録ブロック５１ｃを上書きで記録していく。つまり、記録制御部１６は、常時記録エリア５１ａをリングバッファとして用いる。
　イベント検出部１５が特定のイベントの発生を検出した場合、記録制御部１６は、常時記録エリア５１ａで記録された単位記録ブロック５１ｃのうち、特定のイベントの発生時の単位記録ブロック５１ｃを保護記録エリア５１ｂに記録する。この際、記録制御部１６は、特定のイベントの発生時の単位記録ブロック５１ｃに加えて、その前の部分領域の単位記録ブロック５１ｃと、その後の部分領域の単位記録ブロック５１ｃとの少なくともいずれか１つを保護記録エリア５１ｂに記録してもよい。
　保護記録エリア５１ｂでは、例えば１０個の単位記録ブロック５１ｃが記録可能となっている。記録制御部１６は、常時記録エリア５１ａに記録された単位記録ブロック５１ｃを、新たな単位記録ブロック５１ｃで上書きした。これに対し、記録制御部１６は、保護記録エリア５１ｂに記録された単位記録ブロック５１ｃに対する上書きなどによる消去を、予め定められた条件が満たされるまで禁止する。予め定められた条件は、例えば、図示しないボタンへの操作などが行われること、及び、記録から１か月などの一定期間が経過したことなどを含む。これにより、特定のイベントの発生が検出された場合に保護記録エリア５１ｂに記録されるイベント記録情報の記録期間は、特定のイベントの発生が検出されなかった場合に常時記録エリア５１ａに記録されるイベント記録情報の記録期間よりも長くなる。
　なお、ファイル構成、常時記録エリア５１ａ及び保護記録エリア５１ｂの記録可能時間、単位記録ブロック５１ｃの容量、フォルダの役割は、上記に限ったものではなく、例えば記録可能時間や容量は上記より小さくてもよいし、大きくてもよい。
　記録装置５１は、例えば、車両に設けられてもよいし、車両外部に設けられてもよい。具体的には、常時記録エリア５１ａ及び保護記録エリア５１ｂの両方が、車両に設けられてもよいし、車両外部に設けられてもよいし、常時記録エリア５１ａ及び保護記録エリア５１ｂの一方が車両に設けられて他方が車両外部に設けられてもよい。
　また、上記の例では、常時記録エリア５１ａと保護記録エリア５１ｂとが分離されていたが、これらは分離されていなくてもよい。例えば、常時記録エリア５１ａ内に保護記録エリア５１ｂが規定されてもよい。具体的には、イベント検出部１５が特定のイベントの発生を検出した場合、記録制御部１６は、常時記録エリア５１ａで記録された単位記録ブロック５１ｃのうち、特定のイベントの発生時の単位記録ブロック５１ｃに、保護記録エリアフラグを付与する。そして、記録制御部１６は、保護記録エリアフラグが付与された単位記録ブロック５１ｃを一定周期の記録から除外する。このような構成では、保護記録エリアフラグが付与された単位記録ブロック５１ｃは、保護記録エリア５１ｂに記録された単位記録ブロック５１ｃと実質的に同じとなるため、常時記録エリア５１ａ内に保護記録エリア５１ｂが実質的に規定されることになる。
　＜動作＞
　図６は、本実施の形態２に係る記録制御装置１の動作を示すフローチャートである。図６の動作は、例えば、車両のエンジンなどの駆動源の始動などによって記録制御装置１及び記録装置５１の電源がオンになった場合に開始される。
　ステップＳ１にて、車外映像取得部１１は車外映像信号を取得する。ステップＳ２にて、運転者状態取得部１２は運転者状態信号を取得する。ステップＳ３にて、第１音声取得部１３は第１音声信号を取得する。ステップＳ４にて、第２音声取得部１４は第２音声信号を取得する。なお、ステップＳ１～ステップＳ４の動作の順序は適宜変更されてもよい。
　ステップＳ５にて、記録制御部１６は、ステップＳ１～ステップＳ４の動作によって得られたイベント記録情報を、常時記録エリア５１ａに記録する。
　ステップＳ６にて、記録制御部１６は、イベント検出部１５で特定のイベントの発生が検出されたか否かを判定する。特定のイベントの発生が検出されたと判定された場合には処理がステップＳ７に進み、特定のイベントの発生が検出されなかったと判定された場合には処理がステップＳ１に戻る。なお、車両の事故などの特定のイベントが発生した場合でもステップＳ６以降の動作を行うことができるように、そのような場合に電力を供給可能な非常用の電源及びキャパシタが、記録制御装置１に設けられてもよい。
　ステップＳ７にて、記録制御部１６は、特定のイベントの発生時を含む予め定められた期間内のイベント記録情報を保護記録エリア５１ｂに記録する。
　ステップＳ８にて、記録制御部１６は、車両における運転が終了したか否かを判定する。運転が終了したと判定された場合には図６の動作が終了し、運転が終了したと判定されなかった場合には処理がステップＳ１に戻る。
　＜実施の形態２のまとめ＞
　以上のような本実施の形態２に係る記録制御装置１によれば、特定のイベントの発生が検出された場合に、特定のイベントの発生時を含む予め定められた期間内のイベント記録情報が記録装置５１に記録される。このため、実施の形態１と同様にイベント後に適切な解析を行うための信号を記録することができる。
　また本実施の形態２では、特定のイベントの発生が検出された場合に保護記録エリア５１ｂに記録されるイベント記録情報の記録期間は、特定のイベントの発生が検出されなかった場合に常時記録エリア５１ａに記録されるイベント記録情報の記録期間よりも長い。このため、このため、イベント後に適切な解析を行うための信号が消去されることをなるべく抑制することができる。
　＜実施の形態２の変形例１＞
　実施の形態２では、音声取得装置はマイクロホンアレイ５３であったがこれに限ったものではない。実施の形態１で説明したように、音声取得装置は、内部機構により音声の取得に指向性を有し、当該指向性が運転者に設計された１つの指向性マイクロホンであってもよい。このような構成によれば、音声取得装置がマイクロホンアレイ５３である構成よりも、運転者側の音声の精度は低くなるが、コストを低減することができる。
　＜実施の形態２の変形例２＞
　実施の形態２では、運転者状態取得部１２で取得される運転者状態は、ドライバセンシング装置５２で検出された運転者の生理状態及び心理状態を含んだが、これに限ったものではない。
　例えば、運転者状態取得部１２で取得される運転者状態は、運転者の身体の外観状態（物理的状態）を含んでもよい。運転者の身体の外観状態は、例えば、運転者の口の開閉状態、運転者の脇見状態、運転者の視線、運転者の目の開閉状態、及び、運転者の体の傾斜状態などを含む。この場合、ドライバセンシング装置５２は、例えば、画像処理装置、超音波センサ、及び、圧力センサなどを含む。なお、ドライバセンシング装置５２は、運転者の口の開閉に基づいて運転者からの音声の有無を判定してもよいし、運転者の口の開閉にリップリーディングを行うことにより運転者が発した言葉を検出してもよい。
　また例えば、運転者状態取得部１２で取得される運転者状態は、運転者を撮影した画像を含んでもよい。この場合、ドライバセンシング装置５２は、例えば、画像撮影装置などを含む。
　また例えば、運転者状態取得部１２で取得される運転者状態は、運転者の生理状態、運転者の心理状態、運転者の身体の外観状態、及び、運転者を撮影した画像の少なくとも１つ以上を含んでもよい。
　＜実施の形態２の変形例３＞
　実施の形態２では、図５に示したように、単位記録ブロック５１ｃでは、運転者状態信号は、車外映像信号、第１音声信号、及び、第２音声信号と別の記録エリアに記録されたがこれに限ったものではない。例えば、運転者状態信号は、電子透かしのように暗号的に車外映像信号に含められて記録装置５１に記録されることにより、車外映像信号と同じ記録エリアに記録されてもよい。この場合、車外映像信号、第１音声信号、及び、第２音声信号は、通常の映像再生アプリケーションや通常の映像再生装置で簡単に確認することができ、運転者状態信号は、専用の映像再生アプリケーションや専用の映像再生装置で解析することができる。
　なお、車外映像信号などの映像記録方式は、例えば、ＡＶＣＨＤ（登録商標）、ＭＰＥＧ２、ＭＰＥＧ４、ＭＰ４、ＪＰＥＧ２０００、及び、ＡＶＩなどの一般的な方式が好ましいが、これらに限ったものではない。
　また、運転者状態信号が車外映像信号に含められて記録装置５１に記録される本変形例３の構成において、運転者状態信号は映像信号として記録装置５１に記録されてもよい。例えば、運転者状態信号で表される運転者状態の数値が、時間をパラメータとしてグラフとして表示できるように、つまりオシロスコープの電圧波形表示のような表示ができるように、映像信号として記録されてもよい。この際、車外映像信号の表示領域が運転者状態信号の表示領域よりも大きくなるように、例えば、車外映像信号が表示領域の９割を占め、運転者状態信号が当該表示領域の１割を占めるようにしてもよい。
　＜実施の形態２の変形例４＞
　イベント検出部１５は、第２音声取得部１４で取得された第２音声信号に基づいて、特定のイベントの発生を検出してもよい。例えば、イベント検出部１５は、第２音声信号を解析することによって運転者の音声を認識し、当該運転者の音声が、恐怖を示す音声、記録開始を命令する音声、及び、車外状況を実況する音声の少なくともいずれか１つであるかを判定してもよい。そして、運転者の音声が上記少なくともいずれか１つであると判定された場合に、イベント検出部１５で特定のイベントの発生が検出されたと判定してもよい。
　また、運転者状態信号で表される運転者状態が、運転者の画像を含む場合には、イベント検出部１５は、当該画像に基づいて、特定のイベントの発生を検出してもよい。例えば、運転者の画像の解析によって、当該運転者の表情が恐怖を示す表情であると判定された場合に、イベント検出部１５で特定のイベントの発生が検出されたと判定してもよい。
　＜実施の形態２の変形例５＞
　実施の形態２では、第１音声取得部１３は、マイクロホンアレイ５３とは別のマイクロホンから第１音声信号を取得したが、これに限ったものではない。図７に示すように、例えば、第１音声取得部１３は、マイクロホンアレイ５３の複数のマイクロホンのいずれか１つ（図７ではマイクロホン５３ａ３）で取得された車両内及び車両外の少なくともいずれか一方の音声を、第１音声信号として取得してもよい。このような構成によれば、マイクロホンの個数を低減することができる。
　＜実施の形態３＞
　図８は、本実施の形態３に係る記録制御装置１の構成を示すブロック図である。以下、本実施の形態３に係る構成要素のうち、上述の構成要素と同じまたは類似する構成要素については同じまたは類似する参照符号を付し、異なる構成要素について主に説明する。
　図８の記録制御装置１は、記録装置５１、ドライバセンシング装置５２及びマイクロホンアレイ５３と無線または有線によって通信可能に接続されているだけでなく、オーディオ装置５４と無線または有線によって通信可能に接続されている。
　オーディオ装置５４は、音楽の音声を生成するためのオーディオ信号に基づいて音楽の音声を生成し、車両の音声出力部であるスピーカ５４ａから音楽の音声を出力する。オーディオ装置５４は、例えば、再生用の音楽データなどのオーディオ信号から音楽の音声を再生する再生装置、及び、音声信号を増幅するアンプなどを含む。
　第２音声取得部１４は、スピーカ５４ａから出力される音楽の音声を生成するためのオーディオ信号に基づいて、第２音声信号から音楽の音声に対応する音楽音声信号を低減し、好ましくは削除する。
　図９は、本実施の形態３に係る第２音声取得部１４及びその周辺の構成を示すブロック図である。Ｍ（ｔ）はスピーカ５４ａから車両内に発せられる音楽の音声である。処理フィルタ５３ｂでビームフォーミング処理が行われると、発話音声Ｓ０（ｔ）に近い音声の音声信号ＳＳ（ｔ）と、音楽の音声Ｍ（ｔ）に対応する音楽音声信号ＭＭ（ｔ）とが混在する混在音声が生成される。
　第２音声取得部１４は、処理フィルタ５３ｂからの混在音声を第２音声信号として暫定的に取得する。また、第２音声取得部１４には、音楽の音声Ｍ（ｔ）を生成するためのオーディオ信号Ｍｏ（ｔ）が入力される。
　本実施の形態３に係る第２音声取得部１４は適応フィルタ１４ａを含む。適応フィルタ１４ａは、オーディオ信号Ｍｏ（ｔ）に基づいて、暫定的に取得した第２音声信号から音楽音声信号ＭＭ（ｔ）を低減するミュージックキャンセリング処理を行うことによって、第２音声信号ＳＳＳ（ｔ）を生成する。なお、オーディオ信号Ｍｏ（ｔ）と、暫定的に取得した第２音声信号に含まれる音楽音声信号ＭＭ（ｔ）との相関性は高いので、適応フィルタ１４ａで生成される第２音声信号ＳＳＳ（ｔ）は、発話音声Ｓ０（ｔ）のみの音声信号に近い音声信号となる。
　＜実施の形態３のまとめ＞
　以上のような本実施の形態３に係る記録制御装置１によれば、第２音声信号から音楽音声信号が低減されるので、音楽の音声が大きくても、運転者側の音声の精度が高い第２音声信号を記録することができる。
　＜実施の形態４＞
　図１０は、本実施の形態４に係る記録制御装置１の構成を示すブロック図である。以下、本実施の形態４に係る構成要素のうち、上述の構成要素と同じまたは類似する構成要素については同じまたは類似する参照符号を付し、異なる構成要素について主に説明する。
　ドライバセンシング装置５２は、運転者の画像を撮影し、当該画像に基づいて運転者の口の位置を検出する。この場合、ドライバセンシング装置５２は、例えば、画像認識などの画像処理を用いて口の位置を検出してもよいし、超音波センサなどを用いて口の位置を検出してもよい。
　実施の形態２では、運転者の口の位置は一定の位置であると想定して、マイクロホンアレイ５３はフィルタ処理（ビームフォーミング処理）を行った。これに対して本実施の形態４では、マイクロホンアレイ５３は、運転者の口の位置に基づいてフィルタ処理（ビームフォーミング処理）のパラメータを調整することにより、音声の取得の指向性が口の位置に対応するように音声の取得の指向性を制御する。このような構成によれば、発話音声Ｓ０（ｔ）などの運転者側の音声が複数のマイクロホン５３ａ１～５３ａ５のそれぞれに到達する時刻差（位相差）の予測精度、ひいては伝達特性の予測精度を高めることができる。このため、運転者側の音声の精度をさらに高めることができる。
　＜実施の形態４のまとめ＞
　以上のような本実施の形態４に係る記録制御装置１によれば、運転者の口の位置に基づいてマイクロホンアレイ５３の指向性が制御される。このような構成によれば、比較的容易な処理で運転者側の音声の精度がさらに高められた第２音声信号を記録することができる。
　＜実施の形態５＞
　本実施の形態５に係る記録制御装置１のブロック構成は、実施の形態２に係る記録制御装置１のブロック構成（図２）と同じである。以下、本実施の形態５に係る構成要素のうち、上述の構成要素と同じまたは類似する構成要素については同じまたは類似する参照符号を付し、異なる構成要素について主に説明する。
　本実施の形態２では、図５に示すように第１音声信号は、ステレオ形式のＬチャンネル音声として記録され、第２音声信号は、ステレオ形式のＲチャンネル音声として記録された。これら音声を図示しない再生装置で音声再生すると、Ｌチャンネルからの車両内及び車両外の少なくともいずれか一方の音声と、Ｒチャンネルからの運転者側の音声とが同時に再生される。しかしながら、これら音声には異なる音声源からの音声が含まれることが想定されるため、聞きづらい音声が再生されることになる。
　そこで本実施の形態５では、図１１に示すように、第１音声信号及び第２音声信号のいずれもステレオ音声信号であり、第１音声信号及び第２音声信号の一方は主音声として記録され、第１音声信号及び第２音声信号の他方は副音声として記録される。図１１では、第１音声信号はＬチャンネル及びＲチャンネルの主音声として記録され、第２音声信号はＬチャンネル及びＲチャンネルの副音声として記録されているが、これに限ったものではない。例えば、第２音声信号がＬチャンネル及びＲチャンネルの主音声として記録され、第１音声信号がＬチャンネル及びＲチャンネルの副音声として記録されてもよい。
　なお、ステレオ形式の第１音声信号を記録するために、第１音声取得部１３はステレオマイクロホンを用いて第１音声信号を取得してもよい。同様に、ステレオ形式の第２音声信号を記録するために、第２音声取得部１４はステレオマイクロホンを用いて第２音声信号を取得してもよい。
　＜実施の形態５のまとめ＞
　以上のような本実施の形態５に係る記録制御装置１によれば、第１音声信号及び第２音声信号の一方は主音声として記録され、第１音声信号及び第２音声信号の他方は副音声として記録される。このような構成によれば、音声再生時に主音声及び副音声を切り替えることによって、第１音声信号の音声及び第２音声信号の音声を切り替えて再生することができる。また、音声再生時に主音声及び副音声の同時再生することによって、第１音声信号の音声と第２音声信号の音声との比較を容易に行うことができる。
　＜実施の形態５の変形例１＞
　記録制御部１６は、イベント記録情報を、映像再生アプリケーションやテレビなどの映像再生装置で直接再生可能なフォーマットで記録装置５１に記録してもよい。このような構成によれば、記録装置５１をテレビなどの映像再生装置に接続したり挿入したりするだけで、主音声及び副音声の切り替えと映像再生とが可能になる。なお、運転者状態信号が車外映像信号に含められて記録装置５１に記録される構成では、イベント記録情報を映像信号と音声信号とからのみ構成することができるので、記録装置５１の使い勝手を高めることができる。
　＜実施の形態５の変形例２＞
　以上の説明では、記録制御装置１及び記録装置５１は、イベント記録情報を再生する再生機能を有していなかったが、当該再生機能を有していてもよい。このような構成によれば、専用の再生装置を記録制御装置１などに接続しなくても、イベント記録情報を再生することができる。
　＜その他の変形例＞
　上述した図１の車外映像取得部１１、運転者状態取得部１２、第１音声取得部１３、第２音声取得部１４、イベント検出部１５、及び、記録制御部１６を、以下「車外映像取得部１１」と記す。車外映像取得部１１等は、図１２に示す処理回路８１により実現される。すなわち、処理回路８１は、車両周辺の映像を車外映像信号として取得する車外映像取得部１１と、車両の運転者の状態である運転者状態を運転者状態信号として取得する運転者状態取得部１２と、車両内及び車両外の少なくともいずれか一方の音声を第１音声信号として取得する第１音声取得部１３と、音声の取得に指向性を有する音声取得装置を用いて、第１音声信号よりも運転者側の音声の精度が高い音声を第２音声信号として取得する第２音声取得部１４と、車両での特定のイベントの発生を検出するイベント検出部１５と、イベント検出部１５で特定のイベントの発生が検出された場合に、特定のイベントの発生時を含む予め定められた期間内の、車外映像信号と、運転者状態信号と、第１音声信号と、第２音声信号とを、イベント記録情報として記録装置５１に記録する制御を行う記録制御部１６と、を備える。処理回路８１には、専用のハードウェアが適用されてもよいし、メモリに格納されるプログラムを実行するプロセッサが適用されてもよい。プロセッサには、例えば、中央処理装置、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、ＤＳＰ（Digital Signal Processor）などが該当する。
　処理回路８１が専用のハードウェアである場合、処理回路８１は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field Programmable Gate Array）、またはこれらを組み合わせたものが該当する。車外映像取得部１１等の各部の機能それぞれは、処理回路を分散させた回路で実現されてもよいし、各部の機能をまとめて一つの処理回路で実現されてもよい。
　処理回路８１がプロセッサである場合、車外映像取得部１１等の機能は、ソフトウェア等との組み合わせにより実現される。なお、ソフトウェア等には、例えば、ソフトウェア、ファームウェア、または、ソフトウェア及びファームウェアが該当する。ソフトウェア等はプログラムとして記述され、メモリに格納される。図１３に示すように、処理回路８１に適用されるプロセッサ８２は、メモリ８３に記憶されたプログラムを読み出して実行することにより、各部の機能を実現する。すなわち、記録制御装置１は、処理回路８１により実行されるときに、車両周辺の映像を車外映像信号として取得するステップと、車両の運転者の状態である運転者状態を運転者状態信号として取得するステップと、車両内及び車両外の少なくともいずれか一方の音声を第１音声信号として取得するステップと、音声の取得に指向性を有する音声取得装置を用いて、第１音声信号よりも運転者側の音声の精度が高い音声を第２音声信号として取得するステップと、車両での特定のイベントの発生を検出するステップと、特定のイベントの発生が検出された場合に、特定のイベントの発生時を含む予め定められた期間内の、車外映像信号と、運転者状態信号と、第１音声信号と、第２音声信号とを、イベント記録情報として記録装置５１に記録する制御を行うステップと、が結果的に実行されることになるプログラムを格納するためのメモリ８３を備える。換言すれば、このプログラムは、車外映像取得部１１等の手順や方法をコンピュータに実行させるものであるともいえる。ここで、メモリ８３は、例えば、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、フラッシュメモリ、ＥＰＲＯＭ（Erasable Programmable Read Only Memory）、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read Only Memory）などの、不揮発性または揮発性の半導体メモリ、ＨＤＤ（Hard Disk Drive）、磁気ディスク、フレキシブルディスク、光ディスク、コンパクトディスク、ミニディスク、ＤＶＤ（Digital Versatile Disc）、そのドライブ装置等、または、今後使用されるあらゆる記憶媒体であってもよい。
　以上、車外映像取得部１１等の各機能が、ハードウェア及びソフトウェア等のいずれか一方で実現される構成について説明した。しかしこれに限ったものではなく、車外映像取得部１１等の一部を専用のハードウェアで実現し、別の一部をソフトウェア等で実現する構成であってもよい。例えば、車外映像取得部１１、運転者状態取得部１２、第１音声取得部１３、第２音声取得部１４、及び、イベント検出部１５については専用のハードウェアとしての処理回路８１、インターフェース及びレシーバなどでその機能を実現し、それ以外についてはプロセッサ８２としての処理回路８１がメモリ８３に格納されたプログラムを読み出して実行することによってその機能を実現することが可能である。
　以上のように、処理回路８１は、ハードウェア、ソフトウェア等、またはこれらの組み合わせによって、上述の各機能を実現することができる。
　また、以上で説明した記録制御装置１は、ＤＭＳ（Driver Monitoring System）などの車両装置と、携帯電話、スマートフォン及びタブレットなどの携帯端末を含む通信端末と、車両装置及び通信端末の少なくとも１つにインストールされるアプリケーションの機能と、サーバとを適宜に組み合わせてシステムとして構築される記録制御システムにも適用することができる。この場合、以上で説明した記録制御装置１の各機能あるいは各構成要素は、前記システムを構築する各機器に分散して配置されてもよいし、いずれかの機器に集中して配置されてもよい。
　図１４は、本変形例に係るサーバ９１の構成を示すブロック図である。図１４のサーバ９１は、通信部９１ａと制御部９１ｂとを備えており、車両９２のＤＭＳ装置などの車両装置９３と無線通信を行うことが可能となっている。
　車外映像取得部１１、運転者状態取得部１２、第１音声取得部１３、及び、第２音声取得部１４に対応する車両装置９３は、車外映像信号、運転者状態信号、第１音声信号、及び、第２音声信号を取得し、かつ、特定のイベントに関するイベント関連情報を取得する。
　通信部９１ａは、車両装置９３と無線通信を行うことにより、車両装置９３で取得されたイベント関連情報を受信する。
　制御部９１ｂは、サーバ９１の図示しないプロセッサなどが、サーバ９１の図示しないメモリに記憶されたプログラムを実行することにより、図１のイベント検出部１５及び記録制御部１６と同様の機能を有している。つまり、制御部９１ｂは、イベント関連情報に基づいて車両での特定のイベントの発生を検出する。そして、制御部９１ｂは、特定のイベントの発生が検出された場合に、特定のイベントの発生時を含む予め定められた期間内の、車外映像信号と、運転者状態信号と、第１音声信号と、第２音声信号とを、イベント記録情報として記録装置５１に記録する制御を行うための制御信号を生成する。そして、通信部９１ａは、制御部９１ｂで生成された制御信号を車両装置９３に送信する。このように構成されたサーバ９１によれば、実施の形態１で説明した記録制御装置１と同様の効果を得ることができる。
　図１５は、本変形例に係る通信端末９６の構成を示すブロック図である。図１５の通信端末９６は、通信部９１ａと同様の通信部９６ａと、制御部９１ｂと同様の制御部９６ｂとを備えており、車両９７の車両装置９８と無線通信を行うことが可能となっている。なお、通信端末９６には、例えば車両９７の運転者が携帯する携帯電話、スマートフォン、及びタブレットなどの携帯端末が適用される。このように構成された通信端末９６によれば、実施の形態１で説明した記録制御装置１と同様の効果を得ることができる。
　なお、各実施の形態及び各変形例を自由に組み合わせたり、各実施の形態及び各変形例を適宜、変形、省略したりすることが可能である。
　上記した説明は、すべての局面において、例示であって、限定的なものではない。例示されていない無数の変形例が、想定され得るものと解される。
　１　記録制御装置、１１　車外映像取得部、１２　運転者状態取得部、１３　第１音声取得部、１４　第２音声取得部、１５　イベント検出部、１６　記録制御部、５１　記録装置、５３　マイクロホンアレイ、５３ａ　マイクロホン。

Claims (13)

  1. 　記録装置の記録を制御する記録制御装置であって、
    　車両周辺の映像を車外映像信号として取得する車外映像取得部と、
    　前記車両の運転者の状態である運転者状態を運転者状態信号として取得する運転者状態取得部と、
    　前記車両内及び前記車両外の少なくともいずれか一方の音声を第１音声信号として取得する第１音声取得部と、
    　音声の取得に指向性を有する音声取得装置を用いて、前記第１音声信号よりも前記運転者側の音声の精度が高い音声を第２音声信号として取得する第２音声取得部と、
    　前記車両での特定のイベントの発生を検出するイベント検出部と、
    　前記イベント検出部で前記特定のイベントの発生が検出された場合に、前記特定のイベントの発生時を含む予め定められた期間内の、前記車外映像信号と、前記運転者状態信号と、前記第１音声信号と、前記第２音声信号とを、イベント記録情報として前記記録装置に記録する制御を行う記録制御部と
    を備える、記録制御装置。
  2. 　請求項１に記載の記録制御装置であって、
    　前記運転者状態は、前記運転者の生理状態及び心理状態の少なくともいずれか１つを含む、記録制御装置。
  3. 　請求項１に記載の記録制御装置であって、
    　前記運転者状態は、前記運転者の身体の外観状態を含む、記録制御装置。
  4. 　請求項１に記載の記録制御装置であって、
    　前記運転者状態は、前記運転者を撮影した画像を含む、記録制御装置。
  5. 　請求項１に記載の記録制御装置であって、
    　前記第２音声取得部は、
    　前記車両の音声出力部から出力される音楽の音声を生成するためのオーディオ信号に基づいて、前記第２音声信号から前記音楽の音声に対応する音楽音声信号を低減する、記録制御装置。
  6. 　請求項１に記載の記録制御装置であって、
    　前記音声取得装置は、前記運転者の口の位置に基づいて前記指向性を制御するマイクロホンアレイを含む、記録制御装置。
  7. 　請求項１に記載の記録制御装置であって、
    　前記運転者状態信号は前記車外映像信号に含められて前記記録装置に記録される、記録制御装置。
  8. 　請求項７に記載の記録制御装置であって、
    　前記運転者状態信号は映像信号として前記記録装置に記録される、記録制御装置。
  9. 　請求項１に記載の記録制御装置であって、
    　前記第１音声信号及び前記第２音声信号の一方は主音声として記録され、前記第１音声信号及び前記第２音声信号の他方は副音声として記録される、記録制御装置。
  10. 　請求項１に記載の記録制御装置であって、
    　前記イベント検出部は、
    　前記第２音声取得部で取得された前記第２音声信号に基づいて、前記特定のイベントの発生を検出する、記録制御装置。
  11. 　請求項１に記載の記録制御装置であって、
    　前記音声取得装置は、複数のマイクロホンを有するマイクロホンアレイを含み、
    　前記第１音声取得部は、
    　前記複数のマイクロホンのいずれか１つで取得された前記車両内及び前記車両外の少なくともいずれか一方の音声を、前記第１音声信号として取得する、記録制御装置。
  12. 　請求項１に記載の記録制御装置であって、
    　前記イベント検出部で前記特定のイベントの発生が検出された場合に前記記録装置に記録される前記イベント記録情報の記録期間は、前記イベント検出部で前記特定のイベントの発生が検出されなかった場合に前記記録装置に記録される前記イベント記録情報の記録期間よりも長い、記録制御装置。
  13. 　記録装置の記録を制御する記録制御方法であって、
    　車両周辺の映像を車外映像信号として取得し、
    　前記車両の運転者の状態である運転者状態を運転者状態信号として取得し、
    　前記車両内及び前記車両外の少なくともいずれか一方の音声を第１音声信号として取得し、
    　音声の取得に指向性を有する音声取得装置を用いて、前記第１音声信号よりも前記運転者側の音声の精度が高い音声を第２音声信号として取得し、
    　前記車両での特定のイベントの発生を検出し、
    　前記特定のイベントの発生が検出された場合に、前記特定のイベントの発生時を含む予め定められた期間内の、前記車外映像信号と、前記運転者状態信号と、前記第１音声信号と、前記第２音声信号とを、イベント記録情報として前記記録装置に記録する制御を行う、記録制御方法。
PCT/JP2020/015450 2020-04-06 2020-04-06 記録制御装置及び記録制御方法 WO2021205493A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/JP2020/015450 WO2021205493A1 (ja) 2020-04-06 2020-04-06 記録制御装置及び記録制御方法
JP2022513703A JP7275382B2 (ja) 2020-04-06 2020-04-06 記録制御装置及び記録制御方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2020/015450 WO2021205493A1 (ja) 2020-04-06 2020-04-06 記録制御装置及び記録制御方法

Publications (1)

Publication Number Publication Date
WO2021205493A1 true WO2021205493A1 (ja) 2021-10-14

Family

ID=78023085

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/015450 WO2021205493A1 (ja) 2020-04-06 2020-04-06 記録制御装置及び記録制御方法

Country Status (2)

Country Link
JP (1) JP7275382B2 (ja)
WO (1) WO2021205493A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009225379A (ja) * 2008-03-18 2009-10-01 Fujitsu Ltd 音声処理装置、音声処理方法、音声処理プログラム
JP2013047055A (ja) * 2011-08-29 2013-03-07 Toshiba Corp 運転状況記録装置
JP2019061624A (ja) * 2017-09-28 2019-04-18 アルパイン株式会社 ドライブレコーダシステム、および、ドライブレコーダシステムによるファイル生成方法
JP2019169043A (ja) * 2018-03-26 2019-10-03 株式会社デンソーテン 画像記録装置及び画像記録方法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4630360B2 (ja) * 2008-08-21 2011-02-09 日本電信電話株式会社 通信システムおよび通信方法
JP2017134646A (ja) * 2016-01-28 2017-08-03 株式会社デンソー 運転状況データ記録装置
JP6929146B2 (ja) * 2017-06-28 2021-09-01 株式会社デンソーテン 閾値設定装置、閾値設定方法、及び閾値設定プログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009225379A (ja) * 2008-03-18 2009-10-01 Fujitsu Ltd 音声処理装置、音声処理方法、音声処理プログラム
JP2013047055A (ja) * 2011-08-29 2013-03-07 Toshiba Corp 運転状況記録装置
JP2019061624A (ja) * 2017-09-28 2019-04-18 アルパイン株式会社 ドライブレコーダシステム、および、ドライブレコーダシステムによるファイル生成方法
JP2019169043A (ja) * 2018-03-26 2019-10-03 株式会社デンソーテン 画像記録装置及び画像記録方法

Also Published As

Publication number Publication date
JP7275382B2 (ja) 2023-05-17
JPWO2021205493A1 (ja) 2021-10-14

Similar Documents

Publication Publication Date Title
US10848872B2 (en) Binaural recording for processing audio signals to enable alerts
EP3081011B1 (en) Name-sensitive listening device
CN105210364A (zh) 在视频回放期间的动态音频空间感改变
WO2018092495A1 (ja) 記録装置、記録方法、再生方法及びプログラム
KR20150049234A (ko) 선택적 음향 차폐가 가능한 전기적 음향창문
WO2021205493A1 (ja) 記録制御装置及び記録制御方法
JP2011254400A (ja) 画像音声記録装置
US11495066B2 (en) Recording device for vehicles, recording method for vehicles, and a non-transitory computer readable medium
US8712211B2 (en) Image reproduction system and image reproduction processing program
JP6451721B2 (ja) 記録装置、再生方法、及びプログラム
WO2022135071A1 (zh) 耳机播放控制方法、装置、电子设备及存储介质
JP2020082955A (ja) コンテンツ再生装置
JP6590063B2 (ja) 記録装置、再生方法、及びプログラム
CN111684498B (zh) 车辆用拍摄记录装置、车辆用拍摄控制方法以及记录介质
WO2005104950A1 (ja) 大脳評価装置
JP6995254B2 (ja) 音場制御装置及び音場制御方法
US10453440B1 (en) Adaptive noise filtering in a locomotive environment
JP5856470B2 (ja) ドライブレコーダ
US10937445B2 (en) Providing alerts for events
JP2021068119A (ja) 車両用記録装置、車両用記録方法及び車両用記録プログラム
JP6822538B2 (ja) 車両用撮像記録装置、車両用撮像制御方法及びプログラム
US11373686B1 (en) Systems and methods for removing commands from sound recordings
JP7474548B2 (ja) オーディオデータの再生の制御
JP6810527B2 (ja) 再生制御装置、再生制御システム、並びに再生制御方法、プログラム及び記録媒体
JP7002954B2 (ja) ドライブレコーダ、車載システム、及び車載装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20929989

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2022513703

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20929989

Country of ref document: EP

Kind code of ref document: A1