WO2017094927A1 - 모노럴 비트 기반 운전자 관리 장치 및 방법 - Google Patents

모노럴 비트 기반 운전자 관리 장치 및 방법 Download PDF

Info

Publication number
WO2017094927A1
WO2017094927A1 PCT/KR2015/012970 KR2015012970W WO2017094927A1 WO 2017094927 A1 WO2017094927 A1 WO 2017094927A1 KR 2015012970 W KR2015012970 W KR 2015012970W WO 2017094927 A1 WO2017094927 A1 WO 2017094927A1
Authority
WO
WIPO (PCT)
Prior art keywords
driver
monaural
bit
vehicle
unit
Prior art date
Application number
PCT/KR2015/012970
Other languages
English (en)
French (fr)
Inventor
홍용표
최갑근
Original Assignee
홍용표
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 홍용표 filed Critical 홍용표
Publication of WO2017094927A1 publication Critical patent/WO2017094927A1/ko

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00Stereophonic arrangements
    • H04R5/02Spatial or constructional arrangements of loudspeakers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver

Definitions

  • the present invention relates to a monaural beat-based driver management apparatus and method, and more particularly, to generate a monaural beat optimized for a user's tone and output it through a speaker configured in a vehicle, thereby driving the driver's drowsiness through brain wave tuning by the monaural beat.
  • a monaural beat-based driver management device that can prevent or relieve anger and stress.
  • Conventional drowsiness driving prevention device is mainly to obtain the image information of the driver to observe the driver's drowsiness, through which the device to prevent drowsy driving of the driver by playing music, opening a window or giving an alarm signal Is most of them.
  • the existing devices of this type are often perceived as drowsy driving even though they are not drowsy driving for drivers whose behaviors such as facial muscles or shaking their heads are consciously repeated rather than behaviors caused by drowsiness. This causes inconvenience to the driver.
  • various devices are provided to which a sound therapy method using a binaural beats to awaken a user or to relieve stress of a user so as to prevent drowsiness is provided.
  • the sound therapy method When the sound therapy method outputs binaural beats, which are different sound frequencies, to the user's ears, the user's brain synthesizes the sound frequencies, and the synthesized frequencies are synchronized with specific brain waves to reduce drowsiness or stress relief. By amplifying the related brain waves, a user's drowsiness arousal or anger may be alleviated.
  • the present invention uses a brain wave tuning method using sound and outputs monaural beats generated by synthesizing different acoustic frequencies in a closed vehicle to amplify a specific brain wave of the driver tuned to the monaural beat, thereby helping the driver. Its purpose is to help keep you awake and prevent drowsy driving, while helping to relieve anger and stress.
  • the present invention is to minimize the user's rejection by outputting a monaural beat optimized for the user's tone, and to significantly improve the effects on maintaining awakening state and anger and stress relief.
  • the present invention provides a headphone or earphone to apply the in head localization phenomenon (binaural beat without interference of noise) generated in the headphone listening in the conventional sound therapy method using binaural beat
  • the object of the present invention is to improve user convenience by awaking the user or ensuring a stress relief effect by simply outputting a monaural beat through a speaker configured in a vehicle without the user wearing the same sound output means on the body.
  • an object of the present invention is to automatically determine a driver's driving state by outputting a monaural bit corresponding to a drowsy driving or anger expression by determining the driver's driving state by itself.
  • a monaural beat-based driver management apparatus includes an input unit for receiving a voice signal and an external input from a driver, a tone analyzer for analyzing a voice band of the driver based on the voice signal, and an external unit through the input unit.
  • a monaural bit generator that selects one of a plurality of preset operation modes based on an input, synthesizes a plurality of sound signals having different frequencies, and generates a monaural bit corresponding to the operation mode, and preset setting information Extracting a tone color parameter corresponding to the voice band according to the selected operation mode, and outputting an equalizer part correcting the monaural bit according to the tone parameter and a monaural bit provided from the equalizer to output means configured in the vehicle; It may include an output unit for adjusting the brain wave of the driver The.
  • the setting information includes information on a tone parameter corresponding to the voice band for each operation mode, and the tone parameter includes at least one of a waveform, an envelope, a frequency, an amplitude, and a pitch. It can be characterized by.
  • the monaural beat-based driver management apparatus extracts and stores an optimal timbre parameter of a driver using the voice signal received through the input unit in conjunction with the equalizer, and pre-uses the monaural beat in advance.
  • the input unit may include a microphone for receiving the voice signal and an interface unit connected to the driver's input or an external device to receive the input of the external device as the external input.
  • each operation mode is configured as a mode for any one of drowsy driving prevention and stress relief
  • the monaural bit generator is a monaural corresponding to a beta wave when an operation mode for preventing drowsy driving is selected. It may be characterized in that to generate a bit, and to generate a monaural bit corresponding to the alpha wave when the operation mode for stress relief is selected.
  • the external input includes information output from any one of a navigation device, a black box device, and an in-vehicle audio device configured in the vehicle, and through the voice analysis when the external input is voice information. It is determined whether the external input is driving-related information including at least one of position information and speed information, or the driving-related information is compared with a plurality of preset driving patterns to determine a matching driving pattern.
  • the controller may further include a controller configured to determine an operation mode of the equalizer unit in a preset operation mode in response to the determination result.
  • the monaural beat-based driver management apparatus may be integrated with any one of the navigation apparatus or the black box apparatus and the in-vehicle audio apparatus for a vehicle.
  • the monaural bit-based driver management apparatus further includes a communication unit communicating with the output unit through short-range wireless communication, and the control unit outputs the monaural bit provided from the equalizer unit through the communication unit. It may be characterized in that the transmission to the means for output.
  • a driver management method of a monaural beat-based driver management apparatus configured to control an EEG of a driver, comprising: receiving a voice signal from a driver, and adjusting a voice band of the driver based on the voice signal Selecting one of a plurality of preset operation modes based on an external input through the input unit, and generating a monaural bit corresponding to the operation mode by synthesizing a plurality of sound signals having different frequencies; And extracting a tone parameter corresponding to the voice band according to preset setting information and the selected operation mode, correcting the monaural beat according to the tone parameter, and outputting the corrected monaural beat to an output means configured in the vehicle.
  • the output may include adjusting the brain wave of the driver.
  • the driver management method may further include measuring a signal-to-noise ratio in the vehicle after the correcting step, and adjusting a gain of the corrected monaural bit according to the signal-to-noise ratio. Can be.
  • the present invention generates a monaural beat by itself and does not need to wear a separate sound output means to provide the driver in the vehicle, thereby awakening the driver in accordance with the driver's brain wave synchronization by the monaural beat to advance drowsy driving in advance. Preventing or reducing the stress of the driver can be induced to prevent the violent driving in advance to ensure the safety of the driver and at the same time has the effect of improving the driver's convenience by adjusting the brain waves of the driver in a non-contact.
  • the present invention provides the driver with the most optimized monaural beats according to the driver's tone and the environment in the vehicle, not only minimizes the driver's rejection, but also ensures that the monaural beats are transmitted to the driver intact. It can greatly improve the effect on drowsiness operation or mental and physical stability.
  • the present invention has the effect of responding appropriately to the driver's condition changed during driving by analyzing the driver's voice or driving pattern in conjunction with the navigation device or the black box device configured in the vehicle and automatically determining the brain waves required by the driver. .
  • the present invention can continuously support the brain wave of the driver or support to maintain a stable state, there is no fear of error due to misrecognition can reduce the driver's discomfort than the drowsiness driving prevention method using the existing image analysis. .
  • FIG. 1 is a block diagram of a monaural bit-based driver management apparatus according to an embodiment of the present invention.
  • FIG. 2 is an operation configuration diagram of a monaural bit-based driver management apparatus according to an embodiment of the present invention.
  • FIG. 3 is an exemplary diagram illustrating a monaural bit generation process of a monaural bit-based driver management apparatus according to an exemplary embodiment of the present invention.
  • FIG. 4 is an exemplary view illustrating a tone parameter extraction process suitable for a driver of a monaural beat based driver management apparatus according to an embodiment of the present invention.
  • FIG. 5 is an exemplary diagram of a GUI configuration of a monaural bit-based driver management apparatus according to an embodiment of the present invention.
  • 6 and 7 are exemplary diagrams for setting an operation mode according to interworking with an external device of a monaural bit-based driver management apparatus according to an exemplary embodiment of the present invention.
  • FIG. 8 is a flowchart illustrating a monaural bit based driver management method according to an embodiment of the present invention.
  • the monaural beat-based driver management apparatus when a user uses a sound output means such as an earphone or a headphone when using sound therapy using existing binaural beats, a user in a vehicle who is difficult to wear the sound output means.
  • the monaural beat-based driver management apparatus synthesizes a plurality of sound signals having different frequencies directly and has a difference frequency according to the synthesis of the different frequencies.
  • monaural beats which are acoustic signals in the form of beats
  • an output means such as a speaker 20 configured in the vehicle
  • the monaural beats are transmitted to the driver through the enclosed vehicle space so that both ears of the driver Drive by adjusting EEG according to the monaural beat heard through Provides control of the awakening and psychological states of the child.
  • EEG tuning refers to a phenomenon in which the monaural beat artificially generated in human brain waves is augmented and amplified a specific EEG, and amplifies a specific EEG associated with the monaural beat to adjust the driver's arousal state and psychological state. Can be.
  • the present invention provides the driver according to the EEG tuning of the driver's alpha wave ( ⁇ -wave), beta wave ( ⁇ -wave) by the monaural beat without having to wear a separate sound output means. Awakening prevents drowsy driving in advance, and relieves driver's stress to help prevent violent driving.
  • FIG. 1 is a detailed configuration diagram of a monaural beat-based driver management apparatus 100 according to an exemplary embodiment of the present invention.
  • the input unit 110, the tone analyzer 120, the monaural beat generator 130, and the equalizer are shown in FIG. It may include an equalizer or EQ unit 140, an output unit 150, an automatic gain control unit 160, a control unit 190, a storage unit 170, and a communication unit 180.
  • the monaural bit-based driver management apparatus 100 may be configured in a vehicle to manage the driver's state using brain wave tuning of the driver.
  • components of the components configured in the monaural bit-based driver management apparatus 100 may be omitted, or a plurality of different components may be configured as one component.
  • first input unit 110 may be provided with an input terminal for connecting an external input device, such as microphone 10,
  • the driver's voice signal may be received from an external input device connected to the input terminal.
  • the microphone 10 may be included in the input unit 110.
  • the input unit 110 may include an interface unit for receiving a driver's input.
  • a physical input device such as a button or an input device for receiving a driver's touch input such as a touch screen may be configured. .
  • the input unit 110 and the output unit 150 may be configured as a touch screen.
  • the tone analyzer 120 may detect the driver's voice band by analyzing the voice signal.
  • the monaural bit generator 130 synthesizes a plurality of sound signals f1 and f2 having different frequencies, and has a monaural frequency having a difference frequency of the different frequencies and representing beats. Can generate bits
  • the monaural beat may have a frequency corresponding to either alpha wave or theta wave, and in general, the alpha wave corresponds to an electroencephalogram to relieve stress, and the beta wave maintains a tension state to prevent drowsiness. Note corresponds to brain waves.
  • the monaural bit generator 130 may set different operation modes in response to different brain waves, and select any one of a plurality of operation modes according to a driver's input through the input unit 110. A monaural bit corresponding to the EEG of the selected operation mode may be generated.
  • the monaural bit generator 130 may generate a monaural bit corresponding to the beta wave when an operation mode for preventing drowsy driving is selected among the plurality of operation modes, and may reduce stress among the plurality of operation modes.
  • a monaural bit corresponding to an alpha wave may be generated.
  • the monaural bit generator 130 may include a plurality of generators, a synthesizer, a synchronization module, and the like, and thus, a plurality of sounds having different frequencies corresponding to operation modes.
  • a monaural bit can be generated by generating a signal and synthesizing it.
  • the operation mode is set and receives the driver's input information through the input unit 110 to recognize the selected operation mode, and controls the oscillator, synthesizer, synchronization module, etc. according to the operation mode, the EEG of the selected operation mode
  • the control module for generating a monaural bit corresponding to may be configured in the monaural bit generator 130.
  • an operation mode may be further added to the monaural bit generator 130 as necessary, and brain waves such as theta wave, delta wave, and gamma wave may be set in correspondence with each operation mode.
  • the equalizer 140 may perform tone correction for the monaural beat provided from the monaural bit generator 130.
  • a person has the best response to a tone having spectral characteristics opposite to his voice band.
  • the equalizer 140 may store setting information in which voice bands having opposite spectrums corresponding to each of different preset voice bands are mutually matched.
  • the setting information may be stored in which a female voice band having a spectrum opposite to a specific voice band of a male is matched with a specific voice band of a male, and corresponds to each voice band. Tone parameters can be set.
  • the tone parameter may include a waveform, an envelope, a frequency, an amplitude, a pitch, and the like.
  • the equalizer 140 is a male driver whose voice band detected through the voice analyzer is 86 to 140 KHz, based on the setting information.
  • a female voice band corresponding to (matched) a voice band may be selected, and a tone parameter set corresponding to the selected female voice band may be extracted based on the setting information.
  • the equalizer 140 may generate a monaural bit most optimized to the driver by correcting the monaural bit based on the extracted tone parameter.
  • the configuration information may be set to different voice bands corresponding to specific voice bands corresponding to different operation modes.
  • the equalizer 140 determines the selected operation mode based on the driver input through the input unit 110 in cooperation with the monaural bit generator 130, and as shown in FIG. 4A.
  • the selected operation mode is operation mode 1 for preventing drowsy driving
  • a tone parameter for a first voice band (matched) corresponding to the driver's voice band is extracted
  • FIG. 1 when the selected operation mode is operation mode 1 for stress relief, a tone parameter for a second voice band corresponding to (matched) the voice band of the driver and different from the first voice band may be extracted.
  • the equalizer 140 may correct the monaural bit using the tone parameter extracted in correspondence with the selected operation mode.
  • the monaural bit generator 130 and the equalizer 140 may be configured as one component.
  • the equalizer 140 may output the corrected monaural bit through the output unit 150.
  • the output unit 150 may include an output terminal for connecting to an output means such as the speaker 20 configured in the vehicle, and the speaker 20 configured in the vehicle by using the corrected monaural bits provided from the equalizer 140. ), So that the driver can be provided with a sound signal corresponding to the monaural beat.
  • the output unit 150 includes a terminal for wired connection with the navigation device, the black box device, and the in-vehicle audio device configured in the vehicle, and the external device of any one of the corresponding navigation device, the black box device, and the in-vehicle audio device for the vehicle.
  • the monaural bit may be output through the speaker of the external device by outputting the monaural bit to the input terminal of the wired connected external device.
  • the output unit 150 may include its own speaker, through which the monaural bit may be output as it is.
  • the acoustic signal may not be properly transmitted to the driver.
  • the automatic gain control unit 160 may be configured in the monaural bit-based driver management apparatus 100.
  • the automatic gain control unit 160 may receive the driver's voice signal including noise from the input unit 110 and analyze the SNR to calculate a signal to noise ratio (SNR) from the driver's voice signal. It may include a unit 161.
  • SNR signal to noise ratio
  • the automatic gain adjuster 160 adjusts the gain of the monaural bit provided from the equalizer 140 based on the signal-to-noise ratio calculated by the SNR analyzer 161 and outputs the gain. Output through the unit 150.
  • the automatic gain control unit 160 extracts an optimal tone parameter of the driver by using the voice signal received through the input unit 110 in cooperation with the equalizer unit 140 to the storage unit 170.
  • the optimal tone parameter stored in advance is called from the storage unit 170 to generate a monaural bit by reflecting the optimal tone of the driver, and the background noise in the vehicle through the SNR analyzer 161. Obtain a signal-to-noise ratio, and adjust the gain of the monaural bit according to the signal-to-noise ratio.
  • controller 190 may control each component configured in the monaural bit-based driver management apparatus 100 and may include a RAM, a ROM, a CPU, a GPU, a bus, and the like.
  • the output unit 150 may be configured as a display or the output unit 150 and the input unit 110 may be configured as a touch screen.
  • GUI graphical user interface
  • the controller 190 As shown in FIG. 5, the GUI-related data stored in the storage unit 170 is displayed through the output unit 150, and the driver is driven through the input unit 110 based on the GUI displayed on the output unit 150.
  • the controller 190 controls the respective components configured in the monaural bit-based driver management device 100 to obtain the voice band, the optimal tone parameters and driver identification information of the driver according to the driver input through the input unit 110. After generating driver-related information on the corresponding driver to be included and stored for each driver in the storage unit 170, the storage unit 170 in accordance with the driver input through the input unit 110 based on the GUI. Each of the components may be controlled to generate a monaural bit corresponding to the selected driver based on the selected driver related information among a plurality of stored driver related information.
  • the controller 190 transmits the monaural beat related sound signal provided from the automatic gain control unit 160 or the equalizer 140 to the external output device supporting near field communication through the communication unit 180.
  • Bluetooth may be applied as an example of the short range wireless communication scheme.
  • various devices such as an in-vehicle audio device, a navigation device, a black box device, a Bluetooth speaker, etc., which are configured in a vehicle and support short-range wireless communication, may be included.
  • the interface unit configured in the input unit 110 of the monaural bit-based driver management apparatus 100 supports the connection with the navigation device 30, the black box device 40, and the in-vehicle audio device (not shown). It may include an input terminal for, it can be connected to the navigation device 30 or the black box device 40 and the in-vehicle audio device.
  • the monaural beat based driver management apparatus 100 may be configured (or embedded) in any one of the navigation device 30, the black box device 40, and the in-vehicle audio device.
  • any one of the navigation device 30, the black box device 40, and the in-vehicle audio device that supports the voice recognition function may input the driver's voice signal to the input unit 110 of the monaural beat-based driver management device 100. Can be sent to.
  • the monaural bit-based driver management device 100 receives the driver's voice signal.
  • the monaural bit may be generated according to the above-described configuration by receiving from one of the navigation device 30, the black box device 40, and the in-vehicle audio device.
  • the controller 190 of the monaural bit-based driver management apparatus 100 may determine the location information through the input unit 110 from one of a navigation device, a black box device, and an in-vehicle audio device. Driving-related information and voice information including speed information, acceleration information, and the like can be received.
  • the controller 190 analyzes the driving related information and extracts a corresponding driving pattern when it matches any one of a plurality of preset driving patterns such as rapid acceleration, sudden stop, or zigzag driving, and automatically generates the corresponding driving pattern.
  • the operation mode of the monaural bit generator 130 and the equalizer 140 is set to a preset operation mode corresponding to the control mode so that a monaural bit for stress relief or drowsy driving prevention is generated and output in relation to the driving pattern. can do.
  • controller 190 may analyze the voice information and set an operation mode of the monaural bit generator 130 and the equalizer 140 to a preset operation mode when the pitch is equal to or greater than a preset reference value.
  • the monaural beat-based driver management apparatus 100 determines the driving pattern by comparing the driving situation of the user with a preset pattern in conjunction with the navigation device, the black box device, and the in-vehicle audio device. Can be determined to be abnormally high, and through this, it is possible to determine whether drowsy driving or violent driving occurs and output a monaural bit to prevent this to induce safe driving by stabilizing or awakening the brain waves through brain wave tuning. .
  • the monaural beat-based driver management apparatus 100 configured in the vehicle to adjust the brain waves of the driver as shown in FIG. 8 receives a voice signal from the driver.
  • the driver may analyze the driver's voice band based on the voice signal (S1).
  • the monaural bit-based driver management apparatus 100 selects one of a plurality of preset operation modes based on an external input (S3), and synthesizes a plurality of sound signals having different frequencies corresponding to the selected operation mode. Generate a monaural beat (S4), extract a tone parameter corresponding to the voice band according to preset setting information and the selected operation mode (S5), and correct the monaural bit according to the tone parameter (S6). ).
  • the monaural bit-based driver management apparatus 100 measures the signal-to-noise ratio in the vehicle, adjusts the gain of the corrected monaural bit according to the signal-to-noise ratio (S7), and outputs it to the output means configured in the vehicle to the monaural bit. EEG tuning of the driver can be made (S8).
  • the present invention generates a monaural beat by itself and provides the driver in the vehicle without having to wear a separate sound output means, thereby arousing the driver according to the driver's brain wave tuning by the monaural beat.
  • the driver can prevent drowsy driving in advance or reduce the driver's stress to prevent violent driving in advance, thereby ensuring driver safety and improving driver comfort by adjusting the brainwaves of the driver in a non-contact manner.
  • the present invention can continuously support the brain wave of the driver or support to maintain a stable state, there is no fear of error due to misrecognition can reduce the driver's discomfort than the drowsiness driving prevention method using the existing image analysis. .
  • CMOS based logic circuitry CMOS based logic circuitry
  • firmware software
  • software or a combination thereof.
  • transistors logic gates, and electronic circuits in the form of various electrical structures.

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Traffic Control Systems (AREA)
  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
  • Navigation (AREA)

Abstract

본 발명은 모노럴 비트 기반 운전자 관리 장치 및 방법에 관한 것으로서, 더욱 상세히는 사용자의 음색에 최적화된 모노럴 비트를 생성하여 차량 내에 구성된 스피커를 통해 출력함으로써 모노럴 비트에 의한 뇌파동조를 통해 운전자의 졸음 운전을 방지하거나 분노 및 스트레스를 완화할 수 있도록 한 모노럴 비트 기반 운전자 관리 장치에 관한 것이다. 본 발명은 운전자가 별도의 음향 출력 수단을 착용할 필요 없이 자체적으로 모노럴 비트를 생성하여 차량 내의 운전자에게 제공하며, 이를 통해 모노럴 비트에 의한 운전자의 뇌파 동조에 따라 운전자를 각성시켜 졸음 운전을 사전에 방지하도록 하거나 운전자의 스트레스를 완화시켜 난폭 운전을 사전에 방지하도록 유도할 수 있어 운전자의 안전을 보장하는 동시에 비접촉으로 운전자의 뇌파를 조절하여 운전자 편의성을 향상시키는 효과가 있다.

Description

모노럴 비트 기반 운전자 관리 장치 및 방법
본 발명은 모노럴 비트 기반 운전자 관리 장치 및 방법에 관한 것으로서, 더욱 상세히는 사용자의 음색에 최적화된 모노럴 비트를 생성하여 차량 내에 구성된 스피커를 통해 출력함으로써 모노럴 비트에 의한 뇌파동조를 통해 운전자의 졸음 운전을 방지하거나 분노 및 스트레스를 완화할 수 있도록 한 모노럴 비트 기반 운전자 관리 장치에 관한 것이다.
종래의 졸음운전 방지 장치는 주로 운전자에 대한 영상정보를 취득하여 운전자의 졸음 여부를 관찰하고, 이를 통해 음악을 재생시키거나 창문을 열거나 또는 알람신호를 주는 방식으로 운전자의 졸음 운전을 방지하는 장치가 대부분이다.
하지만, 이와 같은 방식의 기존 장치들은 졸음에 의해 발현되는 행동이 아닌 의식적으로 안면근육 또는 고개를 떨구는 등의 행위가 반복되는 운전자에 대해서는 졸음 운전이 아닌 상태임에도 불구하고 졸음 운전으로 인식하여 잦은 오인식으로 인해 운전자에게 불편함을 주게 된다.
더군다나, 기존의 장치들은 대부분 운전자의 졸음 상태에 대한 판단이 진행된 이후 후속 조치를 수행하는 방식이므로, 운전자의 졸음운전을 사전에 방지하기 위한 각성 상태를 유지하도록 선행 조치를 수행할 수 없어, 오류 발생시 치명적인 사고로 이어질 수 있는 문제점이 있다.
또한, 인간은 타인의 부당한 행동에 의해 피해를 보게 됐다고 생각하면 일반적으로 분노를 느끼게 된다.
하지만, 특정상황에서 분노를 제어하지 못하면 더 큰 사고로 이어질 수 있는 위험이 있는데 그 상황 중 가장 위험하다고 특정할 수 있는 경우가 자동차를 운전 중인 경우이다.
그러나, 현재 이러한 운전자의 분노 완화 조절을 위한 장치가 제공되지 않아 분노 조절 실패로 인한 사고가 지속적으로 급증하고 있는 추세이다.
한편, 졸음 상태를 방지하도록 사용자를 각성시키거나 사용자의 스트레스 완화를 위한 바이노럴 비트(binaural beats)를 이용한 사운드 테라피(Sound Therapy) 방식이 적용된 다양한 장치가 제공되고 있다.
이러한 사운드 테라피 방식은 사용자의 양귀에 각각 서로 다른 음향 주파수인 바이노럴 비트를 출력하면, 사용자의 뇌에서 상기 각 음향 주파수를 합성하고, 합성된 주파수가 특정 뇌파와 동조하여 졸음 각성 또는 스트레스 완화와 관련된 뇌파를 증폭시킴으로써 사용자의 졸음 각성 또는 분노 완화 효과를 얻을 수 있다.
그러나, 기존의 바이노럴 비트를 이용한 사운드 테라피 방식은 사용자의 양 귀에 전달되는 서로 다른 음향 주파수가 헤드폰 청취시 발생되는 음상의 내재화(In Head Localization) 현상을 이용하여야(잡음에 의한 영향 없이 정확히 전달되어야) 하므로 반드시 사용자가 헤드폰이나 이어폰 같은 음향 출력 수단을 양 귀에 착용하여 해당 수단을 통해 음향 주파수가 출력될 때 효과를 가진다.
이로 인해, 이러한 바이노럴 비트를 이용한 사운드 테라피는 대부분 학습용도나 심리 치료 용도에 적용되며, 차량을 운전하는 운전자는 운전 중에 헤드폰이나 이어폰을 착용할 수 없으므로 운전자에게 이러한 바이노럴 비트를 이용한 사운드 테라피를 적용하는데 어려움이 있다.
따라서, 차량을 운전 중인 운전자에게 졸음 운전을 사전에 방지하거나 분노 발생을 사전에 완화할 수 있도록 선행 조치를 제공하여 안전한 운전이 이루어지도록 지원하는 동시에 비접촉 방식으로 운전자를 각성시켜 운전자의 불편함을 최소화시킬 수 있는 장치의 개발이 요구되고 있다.
[선행기술문헌]
[특허문헌]
한국공개특허 제10-2008-0001573호
본 발명은 음향을 이용한 뇌파동조 방식을 이용하며 서로 다른 음향 주파수를 합성하여 생성된 모노럴 비트(Monaural Beats)를 밀폐된 차량 내에 출력하여 해당 모노럴 비트에 동조되는 운전자의 특정 뇌파를 증폭시킴으로써, 운전자를 각성 상태로 유지하여 졸음 운전을 방지하는 동시에 분노 및 스트레스를 완화시킬 수 있도록 지원하는데 그 목적이 있다.
또한, 본 발명은 사용자의 음색에 최적화된 모노럴 비트를 출력하여 사용자의 거부감을 최소화하는 동시에 각성상태 유지 및 분노와 스트레스 완화에 대한 효과를 크게 향상시키는데 그 목적이 있다.
또한, 본 발명은 종래의 바이노럴 비트를 이용한 사운드 테라피 방식에서 헤드폰 청취시 발생되는 음상의 내재화(In Head Localization)현상을(바이노럴 비트를 잡음의 간섭없이) 적용하기 위해 헤드폰이나 이어폰과 같은 음향 출력 수단을 사용자가 신체에 착용할 필요 없이 차량에 구성된 스피커를 통해 모노럴 비트를 출력하는 것만으로 사용자를 각성시키거나 스트레스 완화 효과를 보장하여 사용자 편의성을 향상시키는데 그 목적이 있다.
더하여, 본 발명은 운전자의 운전 상태를 운전자 스스로 자체 판단하여 졸음 운전이나 분노 표출이 발생한 경우 이에 대응되는 모노럴 비트를 출력함으로써, 운전자의 운전 상태에 적합한 자동 대응이 이루어지도록 하는데 그 목적이 있다.
본 발명의 실시예에 따른 모노럴 비트 기반 운전자 관리 장치는 운전자로부터 음성신호 및 외부 입력을 입력받는 입력부와, 상기 음성신호를 기초로 운전자의 음성 대역을 분석하는 음색 분석부와, 상기 입력부를 통한 외부 입력을 기초로 미리 설정된 복수의 동작 모드 중 어느 하나를 선택하고, 서로 다른 주파수를 가진 복수의 음향신호를 합성하여 상기 동작 모드에 대응되는 모노럴 비트를 생성하는 모노럴 비트 생성부와, 미리 설정된 설정정보 및 상기 선택된 동작 모드에 따라 상기 음성 대역에 대응되는 음색 파라미터를 추출하며, 상기 음색 파라미터에 따라 상기 모노럴 비트를 보정하는 이퀄라이저부 및 상기 이퀄라이저부로부터 제공되는 모노럴 비트를 차량에 구성된 출력 수단으로 출력하여 운전자의 뇌파를 조절하는 출력부를 포함할 수 있다.
본 발명과 관련된 일 예로서, 상기 설정정보는 상기 동작모드별로 상기 음성 대역에 대응되는 음색 파라미터에 대한 정보를 포함하며, 상기 음색 파라미터는 파형, 엔빌로프, 주파수, 진폭, 피치 중 적어도 하나를 포함하는 것을 특징으로 할 수 있다.
본 발명과 관련된 일 예로서, 상기 모노럴 비트 기반 운전자 관리 장치는 상기 이퀄라이저부와 연동하여 상기 입력부를 통해 수신된 상기 음성신호를 이용하여 운전자의 최적 음색 파라미터를 추출하여 저장하고, 상기 모노럴 비트 사용시 미리 저장된 상기 최적 음색 파라미터를 호출하여 운전자의 최적 음색을 반영하여 모노럴 비트를 생성하며, 차량 내의 배경잡음을 취득하여 신호대 잡음비를 계산하고, 상기 신호대 잡음비에 따라 상기 모노럴 비트의 이득을 조절하는 자동 이득 조절부를 더 포함하는 것을 특징으로 할 수 있다.
본 발명과 관련된 일 예로서, 상기 입력부는 상기 음성신호를 입력받기 위한 마이크 및 상기 운전자의 입력 또는 외부 장치와 연결되어 상기 외부 장치의 입력을 상기 외부 입력으로 수신하는 인터페이스부를 포함할 수 있다.
본 발명과 관련된 일 예로서, 상기 각 동작 모드는 졸음운전 방지 및 스트레스 완화 중 어느 하나를 위한 모드로 구성되며, 상기 모노럴 비트 생성부는 졸음운전 방지에 대한 동작모드가 선택된 경우 베타파에 대응되는 모노럴 비트를 생성하고, 스트레스 완화를 위한 동작모드가 선택된 경우 알파파에 대응되는 모노럴 비트를 생성하는 것을 특징으로 할 수 있다.
본 발명과 관련된 일 예로서, 상기 외부 입력은 상기 차량 내에 구성된 내비게이션 장치, 블랙박스 장치 및 차량용 내장 오디오 장치 중 어느 하나로부터 출력되는 정보를 포함하며, 상기 외부 입력이 음성 정보인 경우 음성 분석을 통해 미리 설정된 기준치 이상의 진폭을 가지는지 판단하거나, 상기 외부 입력이 위치정보 및 속도정보 중 적어도 하나를 포함하는 주행 관련 정보인 경우 상기 주행 관련 정보를 미리 설정된 복수의 주행패턴과 비교하여 일치하는 주행 패턴을 판단하고, 판단 결과에 대응되어 미리 설정된 동작 모드로 상기 이퀄라이저부의 동작모드를 설정하는 제어부를 더 포함하는 것을 특징으로 할 수 있다.
본 발명과 관련된 일 예로서, 상기 모노럴 비트 기반 운전자 관리 장치는 상기 내비게이션 장치 또는 블랙박스 장치 및 차량용 내장 오디오 장치 중 어느 하나와 일체로 구성되는 것을 특징으로 할 수 있다.
본 발명과 관련된 일 예로서, 상기 모노럴 비트 기반 운전자 관리 장치는 상기 출력 수단과 근거리 무선통신으로 통신하는 통신부를 더 포함하며, 상기 제어부는 상기 이퀄라이저부로부터 제공되는 모노럴 비트를 상기 통신부를 통해 상기 출력수단으로 전송하여 출력하는 것을 특징으로 할 수 있다.
본 발명의 실시예에 따른 차량 내에 구성되어 운전자의 뇌파를 조절하는 모노럴 비트 기반 운전자 관리 장치의 운전자 관리 방법은, 운전자로부터 음성신호를 입력받는 단계와, 상기 음성신호를 기초로 운전자의 음성 대역을 분석하는 단계와, 상기 입력부를 통한 외부 입력을 기초로 미리 설정된 복수의 동작 모드 중 어느 하나를 선택하고, 서로 다른 주파수 가진 복수의 음향 신호를 합성하여 상기 동작 모드에 대응되는 모노럴 비트를 생성하는 단계와, 미리 설정된 설정정보 및 상기 선택된 동작 모드에 따라 상기 음성 대역에 대응되는 음색 파라미터를 추출하며, 상기 음색 파라미터에 따라 상기 모노럴 비트를 보정하는 단계 및 보정된 상기 모노럴 비트를 차량에 구성된 출력 수단으로 출력하여 운전자의 뇌파를 조절하는 단계를 포함할 수 있다.
본 발명과 관련된 일 예로서, 상기 운전자 관리 방법은 상기 보정하는 단계 이후 차량 내의 신호대 잡음비를 측정하고, 상기 신호대 잡음비에 따라 상기 보정된 모노럴 비트의 이득을 조절하는 단계를 더 포함하는 것을 특징으로 할 수 있다.
본 발명은 운전자가 별도의 음향 출력 수단을 착용할 필요 없이 자체적으로 모노럴 비트를 생성하여 차량 내의 운전자에게 제공하며, 이를 통해 모노럴 비트에 의한 운전자의 뇌파 동조에 따라 운전자를 각성시켜 졸음 운전을 사전에 방지하도록 하거나 운전자의 스트레스를 완화시켜 난폭 운전을 사전에 방지하도록 유도할 수 있어 운전자의 안전을 보장하는 동시에 비접촉으로 운전자의 뇌파를 조절하여 운전자 편의성을 향상시키는 효과가 있다.
또한, 본 발명은 운전자의 음색 및 차량 내 잡은 환경에 따라 운전자에게 가장 최적화된 모노럴 비트를 제공하여, 운전자의 거부감을 최소화할 수 있을 뿐 아니라 모노럴 비트가 온전하게 운전자에게 전달되도록 하여 뇌파 동조에 따른 졸음운전 방지 또는 심신 안정에 대한 효과를 크게 향상시킬 수 있다.
더하여, 본 발명은 차량 내 구성된 내비게이션 장치 또는 블랙박스 장치와 연동하여 운전자의 음성 또는 주행 패턴을 분석한 후 운전자에게 필요한 뇌파를 자동 판단함으로써 주행 중 변화되는 운전자의 상태에 적합한 대응이 이루어지는 효과가 있다.
이외에도, 본 발명은 지속적으로 운전자의 뇌파를 각성시키거나 안정 상태로 유지되도록 지원할 수 있어, 오인식에 따른 오류가 발생할 염려가 없어 기존 영상 분석을 이용한 졸음 운전 방지 방식보다 운전자의 불편을 경감시킬 수 있다.
도 1은 본 발명의 실시예에 따른 모노럴 비트 기반 운전자 관리 장치의 구성도.
도 2는 본 발명의 실시예에 따른 모노럴 비트 기반 운전자 관리 장치의 동작 구성도.
도 3은 본 발명의 실시예에 따른 모노럴 비트 기반 운전자 관리 장치의 모노럴 비트 생성 과정에 대한 예시도.
도 4는 본 발명의 실시예에 따른 모노럴 비트 기반 운전자 관리 장치의 운전자에 적합한 음색 파라미터 추출 과정에 대한 예시도.
도 5는 본 발명의 실시예에 따른 모노럴 비트 기반 운전자 관리 장치의 GUI 구성에 대한 예시도.
도 6 및 도 7은 본 발명의 실시예에 따른 모노럴 비트 기반 운전자 관리 장치의 외부 장치와 연동에 따른 동작 모드 설정에 대한 예시도.
도 8은 본 발명의 실시예에 따른 모노럴 비트 기반 운전자 관리 방법에 대한 순서도.
본 발명은 기존 바이노럴 비트(binaural beats)를 이용한 사운드 테라피(Sound Therapy) 이용시 반드시 이어폰이나 헤드폰과 같은 음향 출력 수단을 사용자가 직접 착용해야함으로 인해 해당 음향 출력 수단을 착용하기 힘든 차량 내 운전자에 대한 적용이 어려운 문제를 개선하여, 본 발명에 따른 모노럴 비트 기반 운전자 관리 장치에서 직접 서로 다른 주파수를 가진 복수의 음향신호를 합성하여 상기 서로 다른 주파수의 합성에 따른 차(差)주파수를 가지며 비트(beats) 형태를 나타내는 음향 신호인 모노럴 비트(monaural beats)를 생성한 후 차량에 구성된 스피커(20)와 같은 출력 수단을 통해 출력함으로써 밀폐된 차량 공간에 의해 운전자에게 모노럴 비트가 고스란히 전달되어 운전자의 양귀를 통해 들리는 모노럴 비트에 따라 뇌파 동조가 이루어지도록 하여 운전자의 각성 상태 및 심리 상태를 조절할 수 있도록 제공한다.
이때, 뇌파 동조는 사람의 뇌파에 인위적으로 발생시킨 상기 모노럴 비트가 보강 간섭되어 특정 뇌파를 증폭시키는 현상을 의미하며, 상기 모노럴 비트와 연관되는 특정 뇌파를 증폭하여 운전자의 각성 상태 및 심리 상태를 조절할 수 있다.
이에 따라, 본 발명은 운전자가 별도의 음향 출력 수단을 착용할 필요 없이 모노럴 비트에 의한 운전자의 알파파(α-wave), 베타파(β-wave) 중 어느 하나에 대한 뇌파 동조에 따라 운전자를 각성시켜 졸음 운전을 사전에 방지하고 운전자의 스트레스를 완화시켜 난폭 운전을 사전에 방지하도록 지원한다.
이하, 상술한 구성을 토대로 본 발명의 실시예에 따른 모노럴 비트 기반 운전자 관리 장치를 상세히 설명한다.
도 1은 본 발명의 실시예에 따른 모노럴 비트 기반 운전자 관리 장치(100)의 상세 구성도로서, 도시된 바와 같이 입력부(110), 음색 분석부(120), 모노럴 비트 생성부(130), 이퀄라이저(equalizer 또는 EQ)부(140), 출력부(150), 자동 이득 조절부(160), 제어부(190), 저장부(170) 및 통신부(180)를 포함할 수 있다.
이때, 상기 모노럴 비트 기반 운전자 관리 장치(100)는 차량 내 구성되어 운전자의 뇌파 동조를 이용하여 운전자의 상태를 관리할 수 있다.
또한, 상기 모노럴 비트 기반 운전자 관리 장치(100)에 구성된 상기 각 구성부 중 일부 구성부는 생략될 수도 있으며, 서로 다른 복수의 구성부가 하나의 구성부로 구성될 수도 있다.
상술한 구성을 토대로 도 2를 통해 각 구성부의 동작을 설명하면, 도시된 바와 같이, 우선 상기 입력부(110)는 마이크(10)와 같은 외부 입력장치의 연결을 위한 입력 단자를 구비할 수 있으며, 상기 입력단자에 연결된 외부 입력 장치로부터 운전자의 음성 신호를 수신할 수 있다.
이때, 상기 입력부(110)에 상기 마이크(10)가 포함될 수도 있다.
또한, 상기 입력부(110)는 운전자의 입력을 수신하기 위한 인터페이스부를 포함할 수 있으며, 일례로 버튼과 같은 물리적인 입력 장치 또는 터치 스크린과 같은 운전자의 터치 입력을 수신하는 입력 장치가 구성될 수도 있다.
또한, 상기 입력부(110)와 출력부(150)가 함께 터치 스크린으로 구성될 수도 있다.
상기 음색 분석부(120)는 상기 음성신호를 분석하여 운전자의 음성 대역을 검출할 수 있다.
상기 모노럴 비트 생성부(130)는 도 3에 도시된 바와 같이 서로 다른 주파수를 가진 복수의 음향신호(f1, f2)를 합성하여 상기 서로 다른 주파수의 차주파수를 가지며 비트(beats) 형태를 나타내는 모노럴 비트를 생성할 수 있다.
이때, 모노럴 비트는 알파파 또는 세타파 중 어느 하나에 대응되는 주파수를 가질 수 있으며, 일반적으로 상기 알파파는 스트레스를 완화시켜주는 뇌파에 해당하고, 상기 베타파는 졸음을 방지할 수 있도록 긴장 상태를 유지시켜주는 뇌파에 해당한다.
이에 따라, 상기 모노럴 비트 생성부(130)는 서로 다른 뇌파에 대응되어 상이한 동작 모드가 설정될 수 있으며, 상기 입력부(110)를 통한 운전자의 입력에 따라 복수의 동작 모드 중 어느 하나를 선택하고, 선택된 동작 모드의 뇌파에 대응되는 모노럴 비트를 생성할 수 있다.
일례로, 상기 모노럴 비트 생성부(130)는 상기 복수의 동작 모드 중 졸음운전 방지를 위한 동작모드가 선택된 경우 상기 베타파에 대응되는 모노럴 비트를 생성할 수 있으며, 상기 복수의 동작 모드 중 스트레스 완화를 위한 동작모드가 선택된 경우 알파파에 대응되는 모노럴 비트를 생성할 수 있다.
이때, 상기 모노럴 비트 생성부(130)는 복수의 발진기(generator), 합성기(synthesizer), 동기화 모듈(synchronizer) 등을 포함할 수 있으며, 이를 통해 동작모드에 대응되는 서로 다른 주파수를 가진 복수의 음향신호를 생성하고 이를 합성하여 모노럴 비트를 생성할 수 있다.
또한, 상기 동작 모드가 설정되고 입력부(110)를 통한 운전자의 입력정보를 수신하여 상기 선택된 동작모드를 인식하며, 동작모드에 따라 상기 발진기, 합성기, 동기화 모듈 등을 제어하여 상기 선택된 동작모드의 뇌파에 대응되는 모노럴 비트가 생성되도록 하는 제어모듈이 상기 모노럴 비트 생성부(130)에 구성될 수도 있다.
더하여, 필요에 따라 상기 모노럴 비트 생성부(130)에 동작 모드가 더 추가될 수 있으며, 각 동작 모드에 대응되어 세타파, 델타파, 감마파 등과 같은 뇌파가 설정될 수 있음은 물론이다.
한편, 상기 모노럴 비트가 그대로 운전자에게 전달될 때 해당 모노럴 비트의 음역대가 운전자가 거부감을 느끼는 음역대인 경우 부작용이 발생할 수 있다.
따라서, 이를 방지하기 위하여 상기 이퀄라이저부(140)는 상기 모노럴 비트 생성부(130)로부터 제공되는 모노럴 비트에 대한 음색 보정을 수행할 수 있다.
일반적으로, 사람은 자신의 음성 대역에 반대되는 스펙트럼 특징을 갖는 음색에 가장 좋은 반응을 가진다.
따라서, 상기 이퀄라이저부(140)에는 미리 설정된 서로 다른 음성 대역 각각에 대응되어 반대되는 스펙트럼을 가진 음성 대역이 상호 매칭된 설정정보가 저장될 수 있다.
일례로, 도 4에 도시된 바와 같이 상기 설정정보는 남성의 특정 음성 대역에 반대되는 스펙트럼을 가진 여성의 음성 대역이 상기 남성의 특정 음성 대역과 상호 매칭되어 저장될 수 있으며, 각 음성 대역에 대응되어 음색 파라미터가 설정될 수 있다.
이때, 상기 음색 파라미터는 파형, 엔빌로프(envelope), 주파수, 진폭, 피치(pitch) 등을 포함할 수 있다.
이에 따라, 상기 이퀄라이저부(140)는 도 4(a)에 도시된 바와 같이 상기 음성 분석부를 통해 검출된 상기 운전자의 음성 대역이 86~140KHz인 남성 운전자인 경우 상기 설정정보를 기초로 해당 운전자의 음성 대역에 대응되는(매칭되는) 여성의 음성 대역을 선택하고, 상기 설정정보를 기초로 선택된 여성의 음성 대역에 대응되어 설정된 음색 파라미터를 추출할 수 있다.
다음, 상기 이퀄라이저부(140)는 추출된 음색 파라미터를 기초로 상기 모노럴 비트를 보정하여 운전자에게 가장 최적화된 모노럴 비트를 생성할 수 있다.
한편, 상기 설정정보는 도 4(a) 및 4(b)에 도시된 바와 같이 서로 다른 동작 모드에 대응되어 특정 음성 대역과 매칭된 음성 대역이 상이하게 설정될 수 있다.
이에 따라, 상기 이퀄라이저부(140)는 상기 모노럴 비트 생성부(130)와 연동하여 상기 입력부(110)를 통한 운전자 입력을 기초로 선택된 동작모드를 판단하고, 도 4(a)에 도시된 바와 같이 상기 설정정보를 기초로 상기 선택된 동작 모드가 졸음운전 방지를 위한 동작모드 1인 경우 운전자의 음성 대역에 대응되는(매칭되는) 제 1 음성대역에 대한 음색 파라미터를 추출하고, 도 4(b)에 도시된 바와 같이 상기 선택된 동작 모드가 스트레스 완화를 위한 동작모드 2인 경우 운전자의 음성 대역에 대응되며(매칭되며) 상기 제 1 음성대역과 상이한 제 2 음성대역에 대한 음색 파라미터를 추출할 수 있다.
이에 따라, 상기 이퀄라이저부(140)는 선택된 동작모드에 대응되어 추출된 음색 파라미터를 이용하여 모노럴 비트를 보정할 수 있다.
상술한 구성에서, 상기 모노럴 비트 생성부(130) 및 이퀄라이저부(140)는 하나의 구성부로 구성될 수도 있음은 물론이다.
한편, 상기 이퀄라이저부(140)는 보정된 모노럴 비트를 출력부(150)를 통해 출력할 수 있다.
이때, 출력부(150)는 차량 내 구성된 스피커(20)와 같은 출력 수단과 연결되기 위한 출력 단자를 포함할 수 있으며, 이퀄라이저부(140)로부터 제공되는 보정된 모노럴 비트를 차량 내 구성된 스피커(20)를 통해 출력하여 운전자에게 모노럴 비트에 대응되는 음향 신호가 제공되도록 할 수 있다.
또한, 출력부(150)는 차량 내에 구성된 내비게이션 장치, 블랙박스 장치 및 차량용 내장 오디오 장치와 유선 연결을 위한 단자를 포함하여, 해당 내비게이션 장치, 블랙박스 장치 및 차량용 내장 오디오 장치 중 어느 하나의 외부 장치와 유선 연결될 수 있으며, 유선 연결된 상기 외부 장치의 입력 단자로 상기 모노럴 비트를 출력하여 상기 외부 장치의 스피커를 통해 상기 모노럴 비트가 출력되도록 할 수도 있다.
더하여, 출력부(150)는 자체 스피커를 포함할 수도 있으며, 이를 통해 모노럴 비트를 그대로 출력할 수도 있다.
한편, 차량 내 잡음이 심한 경우 음향 신호가 운전자에게 제대로 전달되지 않을 수 있다.
이를 방지하기 위해, 상기 자동 이득 조절부(160)가 상기 모노럴 비트 기반 운전자 관리 장치(100)에 구성될 수 있다.
상기 자동 이득 조절부(160)는 상기 입력부(110)로부터 잡음이 포함된 운전자의 음성신호를 수신할 수 있으며, 상기 운전자의 음성신호로부터 신호대 잡음비(SNR: signal to noise ratio)를 산출하는 SNR 분석부(161)를 포함할 수 있다.
이에 따라, 상기 자동 이득 조절부(160)는 상기 SNR 분석부(161)를 통해 산출된 신호대 잡음비를 기초로 상기 이퀄라이저부(140)로부터 제공되는 상기 모노럴 비트의 이득(gain)을 조절하여 상기 출력부(150)를 통해 출력할 수 있다.
더하여, 상기 자동 이득 조절부(160)는 상기 이퀄라이저부(140)와 연동하여 상기 입력부(110)를 통해 수신된 상기 음성신호를 이용하여 운전자의 최적 음색 파라미터를 추출하여 상기 저장부(170)에 저장할 수 있으며, 상기 모노럴 비트 사용시 상기 저장부(170)로부터 미리 저장된 상기 최적 음색 파라미터를 호출하여 운전자의 최적 음색을 반영하여 모노럴 비트를 생성하고, SNR 분석부(161)를 통해 차량 내의 배경잡음을 취득하여 신호대 잡음비를 계산하고, 상기 신호대 잡음비에 따라 상기 모노럴 비트의 이득을 조절할 수 있다.
이를 통해, 차량 내 잡음의 영향을 최소화하여 모노럴 비트가 운전자에게 최대한 온전하게 전달되도록 함으로써, 모노럴 비트에 의한 운전자의 뇌파 동조 효과가 발생할 수 있도록 지원할 수 있다.
한편, 상기 제어부(190)는 상기 모노럴 비트 기반 운전자 관리 장치(100)에 구성된 각 구성부를 제어할 수 있으며, RAM, ROM, CPU, GPU, 버스 등을 포함할 수 있다.
또한, 상기 출력부(150)는 디스플레이로 구성되거나 상기 출력부(150)와 입력부(110)가 터치 스크린으로 구성될 수 있다.
또한, 모노럴 비트 기반 운전자 관리 장치(100)에 구성된 상기 각 구성부의 제어 및 설정을 위한 GUI(graphical user interface) 관련 데이터가 상기 저장부(170)에 저장될 수 있으며, 이에 따라 상기 제어부(190)는 도 5에 도시된 바와 같이 상기 저장부(170)에 저장된 GUI 관련 데이터를 상기 출력부(150)를 통해 표시하고, 상기 출력부(150)에 표시된 GUI를 기반으로 입력부(110)를 통해 운전자 입력정보를 수신하여 상기 각 구성부로 제공함으로써, 각 구성부에 대한 제어를 수행할 수 있다.
한편, 상기 제어부(190)는 모노럴 비트 기반 운전자 관리 장치(100)에 구성된 상기 각 구성부를 제어하여 상기 입력부(110)를 통한 운전자 입력에 따라 상기 운전자의 음성대역, 최적 음색 파라미터 및 운전자 식별정보를 포함하는 해당 운전자에 대한 운전자 관련 정보를 생성한 후 상기 저장부(170)에 운전자별로 매칭 저장할 수 있으며, 상기 GUI를 기반으로 하는 입력부(110)를 통한 운전자 입력에 따라 상기 저장부(170)에 저장된 복수의 운전자 관련 정보 중 선택된 운전자 관련 정보를 기초로 상기 선택된 운전자에 대응되는 모노럴 비트가 생성되도록 상기 각 구성부를 제어할 수 있다.
더하여, 상기 제어부(190)는 상기 자동 이득 조절부(160) 또는 이퀄라이저부(140)로부터 제공되는 모노럴 비트 관련 음향 신호를 상기 통신부(180)를 통해 근거리 무선 통신을 지원하는 외부 출력 장치로 전송하여 출력할 수도 있으며, 이때 상기 근거리 무선 통신 방식의 일례로 블루투스(Bluetooth)가 적용될 수 있다.
이때, 상기 외부 출력 장치의 일례로, 차량 내 구성되어 근거리 무선 통신을 지원하는 차량용 내장 오디오 장치, 내비게이션 장치, 블랙박스 장치, 블루투스 스피커 등과 같은 다양한 장치가 포함될 수 있다.
상술한 구성에 따른 모노럴 비트 기반 운전자 관리 장치(100)의 상기 입력부(110)에 구성된 인터페이스부는 내비게이션 장치(30), 블랙박스 장치(40) 및 차량용 내장 오디오 장치(미도시)와의 연결을 지원하기 위한 입력 단자를 포함할 수 있으며, 이를 통해 상기 내비게이션 장치(30) 또는 블랙박스 장치(40) 및 차량용 내장 오디오 장치와 연결될 수 있다.
또한, 도 6에 도시된 바와 같이 모노럴 비트 기반 운전자 관리 장치(100)는 내비게이션 장치(30), 블랙박스 장치(40) 및 차량용 내장 오디오 장치 중 어느 하나에 구성(또는 내장)될 수도 있다.
이에 따라, 음성인식 기능을 지원하는 내비게이션 장치(30), 블랙박스 장치(40) 및 차량용 내장 오디오 장치 중 어느 하나는 운전자의 음성신호를 상기 모노럴 비트 기반 운전자 관리 장치(100)의 입력부(110)로 전송할 수 있다.
이에 따라, 운전자가 내비게이션 장치(30), 블랙박스 장치(40) 및 차량용 내장 오디오 장치 중 어느 하나를 음성인식을 통해 제어할 때 상기 모노럴 비트 기반 운전자 관리 장치(100)가 운전자의 음성신호를 상기 내비게이션 장치(30), 블랙박스 장치(40) 및 차량용 내장 오디오 장치 중 어느 하나로부터 수신하여 상술한 구성에 따라 모노럴 비트를 생성할 수도 있다.
한편, 도 7에 도시된 바와 같이 상기 모노럴 비트 기반 운전자 관리 장치(100)의 제어부(190)는 내비게이션 장치, 블랙박스 장치 및 차량용 내장 오디오 장치 중 어느 하나로부터 상기 입력부(110)를 통해 위치정보와 속도정보, 가속도정보 등을 포함하는 주행 관련 정보 및 음성 정보를 수신할 수 있다.
이에 따라, 상기 제어부(190)는 상기 주행 관련 정보를 분석하여 급가속이나 급정거 또는 지그재그 운전과 같은 미리 설정된 복수의 주행패턴 중 어느 하나와 일치하는 경우 해당 주행 패턴을 추출하고, 자동으로 해당 주행 패턴에 대응되어 미리 설정된 동작모드로 상기 모노럴 비트 생성부(130) 및 이퀄라이저부(140)의 동작 모드를 설정하여, 주행 패턴과 관련되어 스트레스 완화 또는 졸음 운전 방지를 위한 모노럴 비트가 생성되어 출력되도록 제어할 수 있다.
또한, 상기 제어부(190)는 상기 음성정보를 분석하여 피치가 미리 설정된 기준치 이상인 경우 이에 대응되어 미리 설정된 동작모드로 상기 모노럴 비트 생성부(130) 및 이퀄라이저부(140)의 동작 모드를 설정할 수 있다.
이를 통해, 상기 모노럴 비트 기반 운전자 관리 장치(100)는 내비게이션 장치, 블랙박스 장치 및 차량용 내장 오디오 장치와 연동하여 사용자의 주행 상황을 미리 설정된 패턴과 비교하여 주행 패턴을 판단하거나 운전 중 운전자의 음성 피치가 비정상적으로 높은지 판단할 수 있으며, 이를 통해 졸음운전이나 난폭운전 발생 여부를 판단한 후 이를 방지하기 위한 모노럴 비트를 출력하여 뇌파 동조를 통해 뇌파를 안정시키거나 각성시킴으로써 안전한 운전이 이루어지도록 유도할 수 있다.
도 8은 본 발명의 실시예에 따른 모노럴 비트 기반 운전자 관리 방법에 대한 순서도로서, 도시된 바와 같이 차량 내에 구성되어 운전자의 뇌파를 조절하는 모노럴 비트 기반 운전자 관리 장치(100)는 운전자로부터 음성신호를 입력받아(S1) 상기 음성신호를 기초로 운전자의 음성 대역을 분석할 수 있다(S2).
이후, 모노럴 비트 기반 운전자 관리 장치(100)는 외부 입력을 기초로 미리 설정된 복수의 동작 모드 중 어느 하나를 선택하며(S3), 선택된 동작 모드에 대응되어 서로 다른 주파수를 가진 복수의 음향신호를 합성하여 모노럴 비트를 생성하고(S4), 미리 설정된 설정정보 및 상기 선택된 동작 모드에 따라 상기 음성 대역에 대응되는 음색 파라미터를 추출한 후(S5) 상기 음색 파라미터에 따라 상기 모노럴 비트를 보정할 수 있다(S6).
또한, 모노럴 비트 기반 운전자 관리 장치(100)는 차량 내의 신호대 잡음비를 측정하고, 상기 신호대 잡음비에 따라 상기 보정된 모노럴 비트의 이득을 조절한 후(S7) 차량에 구성된 출력 수단으로 출력하여 모노럴 비트에 의한 운전자의 뇌파 동조가 이루어지도록 할 수 있다(S8).
상술한 바에 따라, 본 발명은 운전자가 별도의 음향 출력 수단을 착용할 필요 없이 자체적으로 모노럴 비트를 생성하여 차량 내의 운전자에게 제공하며, 이를 통해 모노럴 비트에 의한 운전자의 뇌파 동조에 따라 운전자를 각성시켜 졸음 운전을 사전에 방지하도록 하거나 운전자의 스트레스를 완화시켜 난폭 운전을 사전에 방지하도록 유도할 수 있어 운전자의 안전을 보장하는 동시에 비접촉으로 운전자의 뇌파를 조절하여 운전자 편의성을 향상시킬 수 있다.
또한, 본 발명은 지속적으로 운전자의 뇌파를 각성시키거나 안정 상태로 유지되도록 지원할 수 있어, 오인식에 따른 오류가 발생할 염려가 없어 기존 영상 분석을 이용한 졸음 운전 방지 방식보다 운전자의 불편을 경감시킬 수 있다.
본 명세서에 기술된 다양한 장치 및 구성부는 하드웨어 회로(예를 들어, CMOS 기반 로직 회로), 펌웨어, 소프트웨어 또는 이들의 조합에 의해 구현될 수 있다. 예를 들어, 다양한 전기적 구조의 형태로 트랜지스터, 로직게이트 및 전자회로를 활용하여 구현될 수 있다.
전술된 내용은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.

Claims (10)

  1. 운전자로부터 음성신호 및 외부 입력을 입력받는 입력부;
    상기 음성신호를 기초로 운전자의 음성 대역을 분석하는 음색 분석부;
    상기 입력부를 통한 외부 입력을 기초로 미리 설정된 복수의 동작 모드 중 어느 하나를 선택하고, 서로 다른 주파수를 가진 복수의 음향신호를 합성하여 상기 동작 모드에 대응되는 모노럴 비트를 생성하는 모노럴 비트 생성부;
    미리 설정된 설정정보 및 상기 선택된 동작 모드에 따라 상기 음성 대역에 대응되는 음색 파라미터를 추출하며, 상기 음색 파라미터에 따라 상기 모노럴 비트를 보정하는 이퀄라이저부; 및
    상기 이퀄라이저부로부터 제공되는 모노럴 비트를 차량에 구성된 출력 수단으로 출력하여 운전자의 뇌파를 조절하는 출력부
    를 포함하는 모노럴 비트 기반 운전자 관리 장치.
  2. 청구항 1에 있어서,
    상기 설정정보는 상기 동작모드별로 상기 음성 대역에 대응되는 음색 파라미터에 대한 정보를 포함하며, 상기 음색 파라미터는 파형, 엔빌로프, 주파수, 진폭, 피치 중 적어도 하나를 포함하는 것을 특징으로 하는 모노럴 비트 기반 운전자 관리 장치.
  3. 청구항 1에 있어서,
    상기 이퀄라이저부와 연동하여 상기 입력부를 통해 수신된 상기 음성신호를 이용하여 운전자의 최적 음색 파라미터를 추출하여 저장하고, 상기 모노럴 비트 사용시 미리 저장된 상기 최적 음색 파라미터를 호출하여 운전자의 최적 음색을 반영하여 모노럴 비트를 생성하며, 차량 내의 배경잡음을 취득하여 신호대 잡음비를 계산하고, 상기 신호대 잡음비에 따라 상기 모노럴 비트의 이득을 조절하는 자동 이득 조절부를 더 포함하는 것을 특징으로 하는 모노럴 비트 기반 운전자 관리 장치.
  4. 청구항 1에 있어서,
    상기 입력부는
    상기 음성신호를 입력받기 위한 마이크; 및
    상기 운전자의 입력 또는 외부 장치와 연결되어 상기 외부 장치의 입력을 상기 외부 입력으로 수신하는 인터페이스부
    를 포함하는 것을 특징으로 하는 모노럴 비트 기반 운전자 관리 장치.
  5. 청구항 1에 있어서,
    상기 각 동작 모드는 졸음운전 방지 및 스트레스 완화 중 어느 하나를 위한 모드로 구성되며,
    상기 모노럴 비트 생성부는 졸음운전 방지에 대한 동작모드가 선택된 경우 베타파에 대응되는 모노럴 비트를 생성하고, 스트레스 완화를 위한 동작모드가 선택된 경우 알파파에 대응되는 모노럴 비트를 생성하는 것을 특징으로 하는 모노럴 비트 기반 운전자 관리 장치.
  6. 청구항 1에 있어서,
    상기 외부 입력은 상기 차량 내에 구성된 내비게이션 장치, 블랙박스 장치 및 차량용 내장 오디오 장치 중 어느 하나로부터 출력되는 정보를 포함하며,
    상기 외부 입력이 음성 정보인 경우 음성 분석을 통해 미리 설정된 기준치 이상의 진폭을 가지는지 판단하거나, 상기 외부 입력이 위치정보 및 속도정보 중 적어도 하나를 포함하는 주행 관련 정보인 경우 상기 주행 관련 정보를 미리 설정된 복수의 주행패턴과 비교하여 일치하는 주행 패턴을 판단하고, 판단 결과에 대응되어 미리 설정된 동작 모드로 상기 이퀄라이저부의 동작모드를 설정하는 제어부를 더 포함하는 것을 특징으로 하는 모노럴 비트 기반 운전자 관리 장치.
  7. 청구항 6에 있어서,
    상기 모노럴 비트 기반 운전자 관리 장치는 상기 내비게이션 장치 또는 블랙박스 장치 및 차량용 내장 오디오 장치 중 어느 하나와 일체로 구성되는 것을 특징으로 하는 모노럴 비트 기반 운전자 관리 장치.
  8. 청구항 1에 있어서,
    상기 출력 수단과 근거리 무선통신으로 통신하는 통신부를 더 포함하며,
    상기 제어부는 상기 이퀄라이저부로부터 제공되는 모노럴 비트를 상기 통신부를 통해 상기 출력수단으로 전송하여 출력하는 것을 특징으로 하는 모노럴 비트 기반 운전자 관리 장치.
  9. 차량 내에 구성되어 운전자의 뇌파를 조절하는 모노럴 비트 기반 운전자 관리 장치의 운전자 관리 방법에 있어서,
    운전자로부터 음성신호를 입력받는 단계;
    상기 음성신호를 기초로 운전자의 음성 대역을 분석하는 단계;
    상기 입력부를 통한 외부 입력을 기초로 미리 설정된 복수의 동작 모드 중 어느 하나를 선택하고, 서로 다른 주파수 가진 복수의 음향 신호를 합성하여 상기 동작 모드에 대응되는 모노럴 비트를 생성하는 단계;
    미리 설정된 설정정보 및 상기 선택된 동작 모드에 따라 상기 음성 대역에 대응되는 음색 파라미터를 추출하며, 상기 음색 파라미터에 따라 상기 모노럴 비트를 보정하는 단계; 및
    보정된 상기 모노럴 비트를 차량에 구성된 출력 수단으로 출력하여 운전자의 뇌파를 조절하는 단계
    를 포함하는 모노럴 비트 기반 운전자 관리 방법.
  10. 청구항 9에 있어서,
    상기 보정하는 단계 이후 차량 내의 신호대 잡음비를 측정하고, 상기 신호대 잡음비에 따라 상기 보정된 모노럴 비트의 이득을 조절하는 단계를 더 포함하는 것을 특징으로 하는 모노럴 비트 기반 운전자 관리 방법.
PCT/KR2015/012970 2015-12-01 2015-12-01 모노럴 비트 기반 운전자 관리 장치 및 방법 WO2017094927A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020150169779A KR101601957B1 (ko) 2015-12-01 2015-12-01 모노럴 비트 기반 운전자 관리 장치 및 방법
KR10-2015-0169779 2015-12-01

Publications (1)

Publication Number Publication Date
WO2017094927A1 true WO2017094927A1 (ko) 2017-06-08

Family

ID=55537212

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2015/012970 WO2017094927A1 (ko) 2015-12-01 2015-12-01 모노럴 비트 기반 운전자 관리 장치 및 방법

Country Status (2)

Country Link
KR (1) KR101601957B1 (ko)
WO (1) WO2017094927A1 (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10209949B2 (en) * 2016-08-23 2019-02-19 Google Llc Automated vehicle operator stress reduction
KR102430913B1 (ko) * 2020-12-15 2022-08-09 권서현 수면을 돕는 모노럴 비트 레이어링 믹싱 방법
KR20230080260A (ko) 2021-11-29 2023-06-07 주식회사 무니스 수면을 돕는 모노럴 비트 레이어링 믹싱 방법
KR102613615B1 (ko) * 2021-12-23 2023-12-15 한국자동차연구원 바이노럴 비트를 이용한 자율주행 자동차 사용자의 뇌파 자극 시스템 및 그 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060111173A (ko) * 2005-04-22 2006-10-26 주식회사 현대오토넷 차량의 운전자 졸음 방지 시스템 및 방법
KR20110014254A (ko) * 2011-01-25 2011-02-10 주식회사 아이웨어 두피와 두개골 사이의 음파전달 경계조건에 따른 초음파 주파수검파 특징을 역이용한 뇌파동조장치 및 방법과, 이를 이용한 졸음운전 방지장치
KR20110050403A (ko) * 2008-04-11 2011-05-13 다니엘 원철 장 뇌 동조를 위한 방법 및 시스템
KR101085081B1 (ko) * 2009-09-28 2011-11-21 금호타이어 주식회사 알파파 발생 타이어
KR20130052859A (ko) * 2011-11-14 2013-05-23 현대모비스 주식회사 음성 데이터를 이용한 졸음 방지 장치 및 방법

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080001573A (ko) 2006-06-28 2008-01-03 유리 바이노럴비트를 이용한 학습용 오디오 제작방법 및 제작기
KR100941135B1 (ko) * 2009-02-13 2010-02-09 (주)다보산업 뇌파 유도 장치 및 신호 발생 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060111173A (ko) * 2005-04-22 2006-10-26 주식회사 현대오토넷 차량의 운전자 졸음 방지 시스템 및 방법
KR20110050403A (ko) * 2008-04-11 2011-05-13 다니엘 원철 장 뇌 동조를 위한 방법 및 시스템
KR101085081B1 (ko) * 2009-09-28 2011-11-21 금호타이어 주식회사 알파파 발생 타이어
KR20110014254A (ko) * 2011-01-25 2011-02-10 주식회사 아이웨어 두피와 두개골 사이의 음파전달 경계조건에 따른 초음파 주파수검파 특징을 역이용한 뇌파동조장치 및 방법과, 이를 이용한 졸음운전 방지장치
KR20130052859A (ko) * 2011-11-14 2013-05-23 현대모비스 주식회사 음성 데이터를 이용한 졸음 방지 장치 및 방법

Also Published As

Publication number Publication date
KR101601957B1 (ko) 2016-03-09

Similar Documents

Publication Publication Date Title
WO2017094927A1 (ko) 모노럴 비트 기반 운전자 관리 장치 및 방법
US20190387304A1 (en) Hearing protection earphone, hearing protection method and computer program storage medium for the same
CN107683399B (zh) 声音输出装置、电子装置、以及其控制方法
US20200296500A1 (en) Ambient Sound Processing Method And Device
WO2013103247A1 (ko) 오디오 신호 출력 방법 및 장치, 오디오 신호의 볼륨 조정 방법
Nozza et al. Binaural release from masking for a speech sound in infants, preschoolers, and adults
WO2011149282A2 (ko) 골 전도 기반 이어폰, 헤드폰 및 이를 이용한 미디어 기기 조작 방법
WO2015100919A1 (zh) 音频播放装置和方法以及包括音频播放装置的显示装置
US9361906B2 (en) Method of treating an auditory disorder of a user by adding a compensation delay to input sound
US20240172968A1 (en) Hearing diagnostic system
WO2020111512A1 (en) Device and method for improving perceptual ability through sound control
KR200486563Y1 (ko) 음향을 이용한 집중력 향상 장치 및 이를 위한 음향 출력 장치
US20230001127A1 (en) Continuous auditory brain stimulation
CN113015062A (zh) 信息处理系统、存储介质及信息处理方法
JP2002166050A (ja) 脳波のバイオフィードバックによるコンピュータゲームの方法およびその装置
US7236604B2 (en) Hearing aid device
Franken et al. Does passive sound attenuation affect responses to pitch-shifted auditory feedback?
WO2013012124A1 (ko) 파라미터가 적용된 음원을 이용한 보청기 피팅 방법 및 그 방법을 이용한 보청기
CN115550781A (zh) 音量调节方法、装置、设备及可读存储介质
JPH1133121A (ja) 脳波誘導持続装置
WO2017119524A1 (ko) 텔레마케팅용 골전도 헤드셋 장치 및 이를 포함하는 스트레스 모니터링 시스템
EP3905726A1 (en) Binaural beat sound output device having improved sound field and method therefor
KR100778143B1 (ko) 후두 임피던스 신호를 이용하는 넥마이크를 구비한 골도헤드셋
JP2006516744A (ja) 暗記力自己増進トレーニングシステム
WO2022131495A2 (ko) 수면을 돕는 모노럴 비트 레이어링 믹싱 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15909836

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15909836

Country of ref document: EP

Kind code of ref document: A1