JP7410477B2 - 信号処理装置、信号処理方法、制御方法、システム、およびプログラム - Google Patents
信号処理装置、信号処理方法、制御方法、システム、およびプログラム Download PDFInfo
- Publication number
- JP7410477B2 JP7410477B2 JP2022574497A JP2022574497A JP7410477B2 JP 7410477 B2 JP7410477 B2 JP 7410477B2 JP 2022574497 A JP2022574497 A JP 2022574497A JP 2022574497 A JP2022574497 A JP 2022574497A JP 7410477 B2 JP7410477 B2 JP 7410477B2
- Authority
- JP
- Japan
- Prior art keywords
- acoustic signal
- output
- processing device
- signal processing
- modulation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 131
- 238000000034 method Methods 0.000 title claims description 33
- 238000003672 processing method Methods 0.000 title claims description 4
- 230000006870 function Effects 0.000 claims description 55
- 210000004556 brain Anatomy 0.000 claims description 38
- 230000005236 sound signal Effects 0.000 claims description 33
- 230000008859 change Effects 0.000 claims description 22
- 230000000638 stimulation Effects 0.000 claims description 18
- 230000003920 cognitive function Effects 0.000 claims description 17
- 102000013455 Amyloid beta-Peptides Human genes 0.000 claims description 7
- 108010090849 Amyloid beta-Peptides Proteins 0.000 claims description 7
- 201000010099 disease Diseases 0.000 claims description 6
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 claims description 6
- 230000008021 deposition Effects 0.000 claims description 5
- 238000002474 experimental method Methods 0.000 description 50
- 238000010586 diagram Methods 0.000 description 17
- 230000008569 process Effects 0.000 description 11
- 206010012289 Dementia Diseases 0.000 description 9
- 230000006698 induction Effects 0.000 description 9
- 238000005259 measurement Methods 0.000 description 8
- 230000000694 effects Effects 0.000 description 7
- 238000006243 chemical reaction Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 6
- 230000006872 improvement Effects 0.000 description 6
- 230000010365 information processing Effects 0.000 description 6
- 208000005145 Cerebral amyloid angiopathy Diseases 0.000 description 5
- 230000007423 decrease Effects 0.000 description 5
- 230000000630 rising effect Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 238000000540 analysis of variance Methods 0.000 description 3
- 230000003247 decreasing effect Effects 0.000 description 3
- 238000011156 evaluation Methods 0.000 description 3
- 230000001965 increasing effect Effects 0.000 description 3
- 230000003321 amplification Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 230000019771 cognition Effects 0.000 description 2
- 238000000537 electroencephalography Methods 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 230000000763 evoking effect Effects 0.000 description 2
- 230000001939 inductive effect Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000001537 neural effect Effects 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 230000002265 prevention Effects 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 206010008111 Cerebral haemorrhage Diseases 0.000 description 1
- 206010052804 Drug tolerance Diseases 0.000 description 1
- 206010041308 Soliloquy Diseases 0.000 description 1
- 238000010162 Tukey test Methods 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000006933 amyloid-beta aggregation Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 210000004204 blood vessel Anatomy 0.000 description 1
- 238000003372 electrophysiological method Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000026781 habituation Effects 0.000 description 1
- 230000007794 irritation Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000002582 magnetoencephalography Methods 0.000 description 1
- 230000008450 motivation Effects 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 230000010355 oscillation Effects 0.000 description 1
- 230000007170 pathology Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000001020 rhythmical effect Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 229940126585 therapeutic drug Drugs 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/369—Electroencephalography [EEG]
- A61B5/372—Analysis of electroencephalograms
- A61B5/374—Detecting the frequency distribution of signals, e.g. detecting delta, theta, alpha, beta or gamma waves
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/369—Electroencephalography [EEG]
- A61B5/377—Electroencephalography [EEG] using evoked responses
- A61B5/38—Acoustic or auditory stimuli
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/48—Other medical applications
- A61B5/486—Bio-feedback
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/02—Means for controlling the tone frequencies, e.g. attack or decay; Means for producing special musical effects, e.g. vibratos or glissandos
- G10H1/04—Means for controlling the tone frequencies, e.g. attack or decay; Means for producing special musical effects, e.g. vibratos or glissandos by additional modulation
- G10H1/053—Means for controlling the tone frequencies, e.g. attack or decay; Means for producing special musical effects, e.g. vibratos or glissandos by additional modulation during execution only
- G10H1/057—Means for controlling the tone frequencies, e.g. attack or decay; Means for producing special musical effects, e.g. vibratos or glissandos by additional modulation during execution only by envelope-forming circuits
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H5/00—Instruments in which the tones are generated by means of electronic generators
- G10H5/10—Instruments in which the tones are generated by means of electronic generators using generation of non-sinusoidal basic tones, e.g. saw-tooth
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H7/00—Instruments in which the tones are synthesised from a data store, e.g. computer organs
- G10H7/02—Instruments in which the tones are synthesised from a data store, e.g. computer organs in which amplitudes at successive sample points of a tone waveform are stored in one or more memories
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0316—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
- G10L21/0364—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude for improving intelligibility
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/70—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mental therapies, e.g. psychological therapy or autogenous training
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
- G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
- A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
- A61M2021/0027—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the hearing sense
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
- A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
- A61M2021/0044—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense
- A61M2021/005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense images, e.g. video
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M2205/00—General characteristics of the apparatus
- A61M2205/35—Communication
- A61M2205/3576—Communication with non implanted data transmission devices, e.g. using external transmitter or receiver
- A61M2205/3584—Communication with non implanted data transmission devices, e.g. using external transmitter or receiver using modem, internet or bluetooth
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M2205/00—General characteristics of the apparatus
- A61M2205/50—General characteristics of the apparatus with microprocessors or computers
- A61M2205/502—User interfaces, e.g. screens or keyboards
- A61M2205/505—Touch-screens; Virtual keyboard or keypads; Virtual buttons; Soft keys; Mouse touches
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M2205/00—General characteristics of the apparatus
- A61M2205/58—Means for facilitating use, e.g. by people with impaired vision
- A61M2205/581—Means for facilitating use, e.g. by people with impaired vision by audible feedback
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M2230/00—Measuring parameters of the user
- A61M2230/08—Other bio-electrical signals
- A61M2230/10—Electroencephalographic signals
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2220/00—Input/output interfacing specifically adapted for electrophonic musical tools or instruments
- G10H2220/155—User input interfaces for electrophonic musical instruments
- G10H2220/371—Vital parameter control, i.e. musical instrument control based on body signals, e.g. brainwaves, pulsation, temperature, perspiration; biometric information
- G10H2220/376—Vital parameter control, i.e. musical instrument control based on body signals, e.g. brainwaves, pulsation, temperature, perspiration; biometric information using brain waves, e.g. EEG
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2250/00—Aspects of algorithms or signal processing methods without intrinsic musical character, yet specifically adapted for or used in electrophonic musical processing
- G10H2250/541—Details of musical waveform synthesis, i.e. audio waveshape processing from individual wavetable samples, independently of their origin or of the sound they represent
- G10H2250/551—Waveform approximation, e.g. piecewise approximation of sinusoidal or complex waveforms
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H10/00—ICT specially adapted for the handling or processing of patient-related medical or healthcare data
- G16H10/20—ICT specially adapted for the handling or processing of patient-related medical or healthcare data for electronic clinical trials or questionnaires
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Biomedical Technology (AREA)
- Public Health (AREA)
- General Health & Medical Sciences (AREA)
- Acoustics & Sound (AREA)
- Medical Informatics (AREA)
- Psychology (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Heart & Thoracic Surgery (AREA)
- Surgery (AREA)
- Molecular Biology (AREA)
- Psychiatry (AREA)
- Biophysics (AREA)
- Pathology (AREA)
- Multimedia (AREA)
- Primary Health Care (AREA)
- Epidemiology (AREA)
- General Engineering & Computer Science (AREA)
- Quality & Reliability (AREA)
- Biodiversity & Conservation Biology (AREA)
- Computational Linguistics (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Signal Processing (AREA)
- Anesthesiology (AREA)
- Hematology (AREA)
- Child & Adolescent Psychology (AREA)
- Developmental Disabilities (AREA)
- Hospice & Palliative Care (AREA)
- Social Psychology (AREA)
- Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
Description
ガンマ波とは、脳の皮質の周期的な神経活動を、脳波や脳磁図といった電気生理学的手法により捉えた神経振動のうち、周波数がガンマ帯域(25~140Hz)に含まれるものを指す。
音響システムの構成について説明する。図1は、本実施形態の音響システムの構成を示すブロック図である。
音響出力装置30は、信号処理装置10とともに、一装置として構成することもできる。具体的には、信号処理装置10および音響出力装置30は、TV、ラジオ、音楽プレーヤ、AVアンプ、スピーカ、ヘッドホン、イヤホン、スマートフォン、またはPCに実装可能である。信号処理装置10および音響出力装置30は、認知機能改善システムを構成する。
信号処理装置の構成について説明する。図2は、本実施形態の信号処理装置の構成を示すブロック図である。
・OS(Operating System)のプログラム
・情報処理を実行するアプリケーションのプログラム
・情報処理において参照されるデータベース
・情報処理を実行することによって得られるデータ(つまり、情報処理の実行結果)
・CPU(Central Processing Unit)
・GPU(Graphic Processing Unit)
・ASIC(Application Specific Integrated Circuit)
・FPGA(Field Programmable Array)
・DSP(digital signal processor)
入力デバイスは、例えば、音源装置50、物理ボタン、キーボード、ポインティングデバイス、タッチパネル、又は、それらの組合せである。
出力デバイスは、例えば、ディスプレイ21、音響出力装置30、又は、それらの組合せである。
本実施形態の一態様について説明する。図3は、本実施形態の一態様の説明図である。
図3に示すように、信号処理装置10は、音源装置50から入力音響信号を取得する。信号処理装置10は、入力音響信号に対して変調を行うことで、出力音響信号を生成する。変調は、ガンマ波に対応する周波数(例えば35Hz以上45Hz以下の周波数)を持つ変調関数を用いた振幅変調である。これにより、音響信号には、上記周波数に対応する振幅の変化(音量の強弱)が付加される。同じ入力音響信号に対して異なる変調関数を適用すると、出力音響信号の振幅波形は異なる。振幅波形の例については後述する。
図4は、出力音響信号の振幅波形の第1例を示す図である。入力音響信号の変調に用いる変調関数をA(t)とし、変調前の入力音響信号の波形を表す関数をX(t)とした場合に、変調後の出力音響信号の波形を表す関数をY(t)とした場合に、
Y(t)=A(t)・X(t)
となる。
第1例において、変調関数は40Hzの逆ノコギリ波状の波形を有する。入力音響信号は、40Hzより高い一定の周波数を有し、音圧も一定である、均質な音を表す音響信号である。その結果、出力音響信号の振幅波形の包絡線が、逆ノコギリ波に沿った形状となる。
具体的には図4に示すように、出力音響信号の振幅波形は、ガンマ波の周波数に対応する振幅の変化を有し、振幅波形の包絡線Aの立ち上がり部分Cと立ち下がり部分Bとが非対称(つまり、立ち上がりの時間長と立ち下がりの時間長とが異なる。)となっている。
第1例における出力音響信号の振幅波形の包絡線Aの立ち上がりは、立ち下がりと比較して急峻である。言い換えれば、立ち上がりに要する時間が立ち下がりに要する時間に比べて短い。包絡線Aの振幅値は、振幅の最大値まで急上昇した後に、時間の経過ととともに次第に下降する。すなわち、包絡線Aは、逆ノコギリ波状となっている。
出力音響信号の振幅波形の第2例について説明する。図5は、出力音響信号の振幅波形の第2例を示す図である。
具体的には図5に示すように、第2例における出力音響信号の振幅波形の包絡線Aの立ち下がりは、立ち上がりと比較して急峻である。言い換えれば、立ち下がりに要する時間が立ち上がりに要する時間に比べて短い。包絡線Aの振幅値は、振幅の最大値まで時間の経過ととともに次第に上昇した後に、急下降する。すなわち、包絡線Aは、ノコギリ波状となっている。
出力音響信号の振幅波形の第3例について説明する。図6は、出力音響信号の振幅波形の第3例を示す図である。
第3例において、変調関数は40Hzの正弦波状の波形を有する。入力音響信号は、40Hzより高い一定の周波数を有し、音圧も一定である、均質な音を表す音響信号である。その結果、出力音響信号の振幅波形の包絡線が、正弦波に沿った形状となる。
具体的には図6に示すように、第3例における出力音響信号の振幅波形の包絡線Aの立ち上がりと立ち下がりはいずれも滑らかである。すなわち、包絡線Aは、正弦波状となっている。
なお、上記の第1例から第3例において、変調関数は40Hzの周期性を有するものとしたが、変調関数の周波数はこれに限定されず、例えば35Hz以上45Hz以下の周波数であってもよい。また、上記の第1例から第3例において、包絡線Aの振幅値の絶対値は周期的に0になるものとしたが、これに限らず、包絡線Aの振幅値の最小絶対値が0より大きい値(例えば最大絶対値の2分の1又は4分の1)になるような変調関数が用いられてもよい。
(2-5―1)実験の概要
本開示の技術による効果を検証するために行った実験について説明する。
本実験では、男性18名、女性8名の被験者に対して、40Hzの変調関数を用いて変調された音響信号に基づく出力音を聴かせ、その際に感じる心理反応、および脳内のガンマ波の誘発の程度を評価した。また、比較のために、40Hzのパルス波状の波形を有する音響信号に基づく出力音を聞かせた場合の心理反応とガンマ波の誘発の程度も評価した。心理反応は、被験者の主観を基準に、アンケートの回答(7段階尺度)により評価した。ガンマ波の誘発の程度は、被験者の頭部に装着した複数の電極により計測した。変調された音響信号に応じて出力音を生成する音響出力装置30としては、被験者の頭部に装着されるヘッドホンを採用した。
・実験A…それぞれ異なる変調関数と入力音響信号に応じた複数種類の出力音を聞いた際の不快感を被験者が回答する実験
・実験B…それぞれ異なる変調関数と入力音響信号に応じた複数種類の出力音を聴いた際の被験者の脳波を測定する実験
・実験C…それぞれ異なる変調関数と入力音響信号に応じた複数種類の出力音を聴いた際の被験者の脳波を測定する実験(実験Bとは音の長さが異なる。)
・不快に感じる
・苛立たしさを感じる
・音声は不自然だ
・音声が聞き取りにくい
本開示の技術による効果を検証するための上述の実験について、さらに詳細に説明する。なお、以下では上述の実験Aと実験Bを中心に説明し、実験Cについては省略する。本実験では、誘発すべきガンマ波として40Hzの周波数を有する脳波に着目する。本実験で使用した音刺激(出力音)のリストを図9に示す。列901は音刺激の識別番号(以降「刺激番号」と呼ぶ。)を示し、列902は変調前の音信号(正弦波)の周波数を示し、列903は変調有無及び変調に用いた変調関数を示し、列904は変調関数の周波数を示し、列905は変調度を示す。
本実施形態の音響信号処理について説明する。図8は、本実施形態の信号処理装置10による音響信号処理の全体フローを示す図である。図8の処理は、信号処理装置10のプロセッサ12が、記憶装置11に記憶されたプログラムを読み出して実行することによって実現される。なお、図8の処理の少なくとも一部が、1又は複数の専用の回路により実現されてもよい。
・他の処理又は外部からの指示によって図8の音響信号処理が呼び出された。
・ユーザが図8の音響信号処理を呼び出すための操作を行った。
・信号処理装置10が所定の状態(例えば電源投入)になった。
・所定の日時が到来した。
・所定のイベント(例えば、信号処理装置10の起動、または図8の音響信号処理の前回の実行)から所定の時間が経過した。
具体的には、信号処理装置10は、音源装置50から送出される入力音響信号を受け付ける。
ステップS110において、信号処理装置10は、入力音響信号のA/D変換をさらに行ってもよい。
・音楽コンテンツ(例えば、歌唱、演奏、またはそれらの組み合わせ(つまり、楽曲)。動画コンテンツに付随する音声コンテンツを含み得る。)
・音声コンテンツ(例えば、朗読、ナレーション、アナウンス、放送劇、独演、会話、独言、またはそれらの組み合わせの音声など。動画コンテンツに付随する音声コンテンツを含み得る。)
・他の音響コンテンツ(例えば、電子音、環境音、または機械音)
ただし、歌唱、または音声コンテンツは、人間の発声器官により発せられる音声に限られず、音声合成技術により生成された音声を含み得る。
ステップS110の後に、信号処理装置10は、変調方法の決定(S111)を実行する。
具体的には、信号処理装置10は、ステップS110において取得した入力音響信号から出力音響信号を生成するために用いる変調方法を決定する。ここで決定される変調方法には、例えば、変調処理に用いる変調関数と、変調による振幅の変化の程度に対応する変調度との、少なくとも何れかが含まれる。一例として、信号処理装置10は、図4から図6を用いて説明した3種類の変調関数のうち何れを用いるかを選択する。いずれの変調関数を選択するかは、ユーザもしくは他者による入力操作又は外部からの指示に基づいて決定されてもよいし、アルゴリズムによって決定されてもよい。
・ユーザの家族、友人、または知人
・医療関係者(例えばユーザの担当医)
・入力音響信号に対応するコンテンツの作成者、または提供者
・信号処理装置10の提供者
・ユーザが利用する施設の管理者
具体的には、信号処理装置10は、S110において取得した入力音響信号に対して、S111において決定した変調方法に応じた変調処理を行う。一例として、信号処理装置10は、入力音響信号に対して、ガンマ波に対応する周波数(例えば、35Hz以上45Hz以下の周波数)を持つ変調関数を用いた振幅変調を行う。これにより、入力音響信号には、上記周波数に対応する振幅の変化が付加される。
ステップS112において、信号処理装置10は、出力音響信号の増幅、音量調節、またはD/A変換の少なくとも1つをさらに行ってよい。
具体的には、信号処理装置10は、ステップS112において生成した出力音響信号を音響出力装置30へ送出する。音響出力装置30は、出力音響信号に応じた音を発生する。
信号処理装置10は、ステップS113を以て、図8の音響信号処理を終了する。
なお、信号処理装置10は、一定の再生期間を有する入力音響信号(例えば1曲の音楽コンテンツ)に対して図8の処理をまとめて行ってもよいし、入力音響信号の所定の再生区間ごと(例えば100msごと)に図8の処理を繰り返し行ってもよい。あるいは、信号処理装置10は、例えばアナログ信号処理による変調のように、入力される音響信号に対して連続的に変調処理を行って変調済みの音響信号を出力してもよい。図8に示す処理は、特定の終了条件(例えば、一定時間が経過したこと、ユーザ操作が行われたこと、または変調済みの音の出力履歴が所定の状態に達したこと)に応じて終了してもよい。
また、信号処理装置10による処理の順番は図8に示す例に限定されず、例えば変調方法の決定(S111)が入力音響信号の取得(S110)より前に行われてもよい。
以上説明したように、本実施形態の信号処理装置10は、入力音響信号に対して振幅変調を行うことで、ガンマ波の周波数に対応する振幅の変化を有する出力音響信号を生成する。出力音響信号においては、振幅波形の包絡線の立ち上がりと立ち下がりが非対称である。信号処理装置10は、生成した出力音響信号を音響出力装置30に向けて出力する。これにより、聴者に与える不快感を抑制しながら音響信号の振幅を所定の周期で増減させることができる。そして、音響出力装置30が、かかる出力音響信号に応じた音をユーザに聴かせることで、ユーザの脳内において出力音響信号の振幅の変動に起因してガンマ波が誘発される。その結果、ユーザの認知機能の改善(例えば、認知症の治療、または予防)の効果を期待できる。
記憶装置11は、ネットワークNWを介して、信号処理装置10と接続されてもよい。ディスプレイ21は、信号処理装置10に内蔵されてもよい。
また、信号処理装置10は、変調済み入力音響信号とその他の音響信号とを、合成することなく同時に音響出力装置30に送出してもよい。
・変調関数を示す情報
・変調度を示す情報
・音量を示す情報
これにより、外部装置は、変調処理の内容に応じて音響信号の再生方法を変更することができる。
また、信号処理装置10は、入力音響信号と共に付加情報(例えばMP3ファイルにおけるID3タグ)を取得した場合に、当該付加情報を変更して出力音響信号と共に外部装置へ出力してもよい。
10 :信号処理装置
11 :記憶装置
12 :プロセッサ
13 :入出力インタフェース
14 :通信インタフェース
21 :ディスプレイ
30 :音響出力装置
50 :音源装置
Claims (14)
- 入力音響信号を受け付ける手段と、
前記入力音響信号の少なくとも一部に35Hz以上45Hz以下の周期性を有する変調関数を乗じる振幅変調をすることで、35Hz以上45Hz以下の周波数に対応する振幅の変化を有する出力音響信号であって振幅波形の包絡線が逆ノコギリ波状である出力音響信号を生成する手段と、
生成された前記出力音響信号を出力する手段と、
を備え、
前記出力音響信号を生成する手段は、前記入力音響信号の少なくとも一部に35Hz以上45Hz以下の周期性を有しない変調関数を乗じる振幅変調を行わない、
信号処理装置。 - 入力音響信号を受け付ける手段と、
前記入力音響信号の少なくとも一部に35Hz以上45Hz以下の周期性を有する変調関数を乗じる振幅変調をすることで、35Hz以上45Hz以下の周波数に対応する振幅の変化を有する出力音響信号であって振幅波形の包絡線がノコギリ波状である出力音響信号を生成する手段と、
生成された前記出力音響信号を出力する手段と、
を備え、
前記出力音響信号を生成する手段は、前記入力音響信号の少なくとも一部に35Hz以上45Hz以下の周期性を有しない変調関数を乗じる振幅変調を行わない、
信号処理装置。 - 前記入力音響信号は、音楽コンテンツと音声コンテンツとの少なくとも何れかを含む音響信号である、請求項1または請求項2に記載の信号処理装置。
- ユーザの認知機能を改善するためのシステムであって、
信号処理装置と、
前記信号処理装置により出力される出力音響信号に応じた音をユーザに聞かせる手段と、
を備え、
前記信号処理装置は、
入力音響信号を受け付ける手段と、
前記入力音響信号の少なくとも一部に35Hz以上45Hz以下の周期性を有する変調関数を乗じる振幅変調をすることで、35Hz以上45Hz以下の周波数に対応する振幅の変化を有する出力音響信号であって振幅波形の包絡線が逆ノコギリ波状である出力音響信号を生成する手段と、
生成された前記出力音響信号を出力する手段と、
を備える、
システム。 - ユーザの認知機能を改善するためのシステムであって、
信号処理装置と、
前記信号処理装置により出力される出力音響信号に応じた音をユーザに聞かせる手段と、
を備え、
前記信号処理装置は、
入力音響信号を受け付ける手段と、
前記入力音響信号の少なくとも一部に35Hz以上45Hz以下の周期性を有する変調関数を乗じる振幅変調をすることで、35Hz以上45Hz以下の周波数に対応する振幅の変化を有する出力音響信号であって振幅波形の包絡線がノコギリ波状である出力音響信号を生成する手段と、
生成された前記出力音響信号を出力する手段と、
を備える、
システム。 - ユーザの認知機能を改善するためのシステムであって、
信号処理装置と、
前記信号処理装置により出力される出力音響信号に応じた音をユーザに聞かせる手段と、
を備え、
前記信号処理装置は、
入力音響信号を受け付ける手段と、
前記入力音響信号の少なくとも一部に35Hz以上45Hz以下の周期性を有する変調関数を乗じる振幅変調をすることで、35Hz以上45Hz以下の周波数に対応する振幅の変化を有する出力音響信号であって振幅波形の包絡線が正弦波状である出力音響信号を生成する手段と、
生成された前記出力音響信号を出力する手段と、
を備える、
システム。 - アミロイドβの増加又は沈着が原因となる疾患の治療又は予防のためのシステムであって、
入力音響信号を受け付ける手段と、
前記入力音響信号の少なくとも一部に35Hz以上45Hz以下の周期性を有する変調関数を乗じる振幅変調をすることで、35Hz以上45Hz以下の周波数に対応する振幅の変化を有する出力音響信号であって振幅波形の包絡線が逆ノコギリ波状である出力音響信号を生成する手段と、
生成された前記出力音響信号を出力することで、ユーザの脳に作用する音刺激を生み出す手段と、を備える、
システム。 - アミロイドβの増加又は沈着が原因となる疾患の治療又は予防のためのシステムであって、
入力音響信号を受け付ける手段と、
前記入力音響信号の少なくとも一部に35Hz以上45Hz以下の周期性を有する変調関数を乗じる振幅変調をすることで、35Hz以上45Hz以下の周波数に対応する振幅の変化を有する出力音響信号であって振幅波形の包絡線がノコギリ波状である出力音響信号を生成する手段と、
生成された前記出力音響信号を出力することで、ユーザの脳に作用する音刺激を生み出す手段と、を備える、
システム。 - アミロイドβの増加又は沈着が原因となる疾患の治療又は予防のためのシステムであって、
入力音響信号を受け付ける手段と、
前記入力音響信号の少なくとも一部に35Hz以上45Hz以下の周期性を有する変調関数を乗じる振幅変調をすることで、35Hz以上45Hz以下の周波数に対応する振幅の変化を有する出力音響信号であって振幅波形の包絡線が正弦波状である出力音響信号を生成する手段と、
生成された前記出力音響信号を出力することで、ユーザの脳に作用する音刺激を生み出す手段と、を備える、
システム。 - 前記入力音響信号は、音楽コンテンツと音声コンテンツとの少なくとも何れかを含む音響信号である、請求項4から請求項9の何れか1項に記載のシステム。
- 入力音響信号を受け付け、
前記入力音響信号の少なくとも一部に35Hz以上45Hz以下の周期性を有する変調関数を乗じる振幅変調をすることで、35Hz以上45Hz以下の周波数に対応する振幅の変化を有する出力音響信号であって振幅波形の包絡線が逆ノコギリ波状である出力音響信号を生成し、
生成された前記出力音響信号を出力し、
前記入力音響信号の少なくとも一部に35Hz以上45Hz以下の周期性を有しない変調関数を乗じる振幅変調を行わない、
信号処理方法。 - 入力音響信号を受け付け、
前記入力音響信号の少なくとも一部に35Hz以上45Hz以下の周期性を有する変調関数を乗じる振幅変調をすることで、35Hz以上45Hz以下の周波数に対応する振幅の変化を有する出力音響信号であって振幅波形の包絡線がノコギリ波状である出力音響信号を生成し、
生成された前記出力音響信号を出力し、
前記入力音響信号の少なくとも一部に35Hz以上45Hz以下の周期性を有しない変調関数を乗じる振幅変調を行わない、
信号処理方法。 - ユーザの認知機能を改善するためのシステムの制御方法であって、
前記システムは、
信号処理装置と、
前記信号処理装置により出力される出力音響信号に応じた音をユーザに聞かせる手段と、
を備え、
前記信号処理装置に、
入力音響信号を受け付けることと、
前記入力音響信号の少なくとも一部に35Hz以上45Hz以下の周期性を有する変調関数を乗じる振幅変調をすることで、35Hz以上45Hz以下の周波数に対応する振幅の変化を有する出力音響信号であって振幅波形の包絡線が正弦波状である出力音響信号を生成することと、
生成された前記出力音響信号を出力することと、
を実行させる、
制御方法。 - コンピュータを、請求項1または請求項2に記載の信号処理装置の各手段として機能させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023067070A JP2023107248A (ja) | 2021-10-25 | 2023-04-17 | 信号処理装置、認知機能改善システム、信号処理方法、及びプログラム |
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021173634 | 2021-10-25 | ||
JP2021173634 | 2021-10-25 | ||
JP2022077088 | 2022-05-09 | ||
JP2022077088 | 2022-05-09 | ||
PCT/JP2022/039422 WO2023074594A1 (ja) | 2021-10-25 | 2022-10-24 | 信号処理装置、認知機能改善システム、信号処理方法、及びプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023067070A Division JP2023107248A (ja) | 2021-10-25 | 2023-04-17 | 信号処理装置、認知機能改善システム、信号処理方法、及びプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JPWO2023074594A1 JPWO2023074594A1 (ja) | 2023-05-04 |
JPWO2023074594A5 JPWO2023074594A5 (ja) | 2023-09-27 |
JP7410477B2 true JP7410477B2 (ja) | 2024-01-10 |
Family
ID=86159892
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022574497A Active JP7410477B2 (ja) | 2021-10-25 | 2022-10-24 | 信号処理装置、信号処理方法、制御方法、システム、およびプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20230190174A1 (ja) |
JP (1) | JP7410477B2 (ja) |
WO (1) | WO2023074594A1 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5732497B2 (ja) | 2013-02-08 | 2015-06-10 | 太陽光電能源科技股▲ふん▼有限公司Big Sun Energy Technology Inc. | 太陽光追尾装置を備えた建築物 |
JP2020501853A (ja) | 2016-11-17 | 2020-01-23 | コグニート セラピューティクス,インク. | 視覚刺激を介した神経刺激のための方法およびシステム |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5531595Y1 (ja) * | 1970-10-26 | 1980-07-28 | ||
US4160402A (en) * | 1977-12-19 | 1979-07-10 | Schwartz Louis A | Music signal conversion apparatus |
JPS5732497A (en) * | 1980-08-06 | 1982-02-22 | Matsushita Electric Ind Co Ltd | Echo adding unit |
JP2011251058A (ja) * | 2010-06-03 | 2011-12-15 | Panasonic Corp | 聴性定常反応測定方法および測定装置 |
JP7175120B2 (ja) * | 2018-07-26 | 2022-11-18 | 株式会社フェイス | 音楽療法のための歌唱補助装置 |
-
2022
- 2022-10-24 WO PCT/JP2022/039422 patent/WO2023074594A1/ja active Application Filing
- 2022-10-24 JP JP2022574497A patent/JP7410477B2/ja active Active
-
2023
- 2023-02-21 US US18/171,844 patent/US20230190174A1/en active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5732497B2 (ja) | 2013-02-08 | 2015-06-10 | 太陽光電能源科技股▲ふん▼有限公司Big Sun Energy Technology Inc. | 太陽光追尾装置を備えた建築物 |
JP2020501853A (ja) | 2016-11-17 | 2020-01-23 | コグニート セラピューティクス,インク. | 視覚刺激を介した神経刺激のための方法およびシステム |
Non-Patent Citations (3)
Title |
---|
「Audacity 2.2.2 Manual」(Internet Archive、2018年2月22日)、https://web.archive.org/web/20180222152155/https://manual.audacityteam.org/ |
安井希子、三浦雅展、「AM音の振幅形状がRoughness知覚を変えるのか?」、日本音響学会講演論文集、2011年3月、2-1-4、p.1013-1016 |
安井希子、三浦雅展、「振幅包絡の形状がRoughnessに与える影響」、日本音響学会講演論文集、2010年9月、2-7-2、p.861~864 |
Also Published As
Publication number | Publication date |
---|---|
WO2023074594A1 (ja) | 2023-05-04 |
US20230190174A1 (en) | 2023-06-22 |
JPWO2023074594A1 (ja) | 2023-05-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Chatterjee et al. | Processing F0 with cochlear implants: Modulation frequency discrimination and speech intonation recognition | |
Bergstrom et al. | Using music as a signal for biofeedback | |
US20150005661A1 (en) | Method and process for reducing tinnitus | |
Zelechowska et al. | Headphones or speakers? An exploratory study of their effects on spontaneous body movement to rhythmic music | |
Roman et al. | Relationship between auditory perception skills and mismatch negativity recorded in free field in cochlear-implant users | |
Kuribayashi et al. | High-resolution audio with inaudible high-frequency components induces a relaxed attentional state without conscious awareness | |
Petersen et al. | The CI MuMuFe–a new MMN paradigm for measuring music discrimination in electric hearing | |
Zhang et al. | Spatial release from informational masking: evidence from functional near infrared spectroscopy | |
Marozeau et al. | The acoustic and perceptual cues affecting melody segregation for listeners with a cochlear implant | |
Cartocci et al. | Frontal brain asymmetries as effective parameters to assess the quality of audiovisual stimuli perception in adult and young cochlear implant users | |
Arndt | Neural correlates of quality during perception of audiovisual stimuli | |
Schmidt et al. | Neural representation of loudness: cortical evoked potentials in an induced loudness reduction experiment | |
Hann et al. | Strategies for the selection of music in the short-term management of mild tinnitus | |
Van Eeckhoutte et al. | Objective binaural loudness balancing based on 40-Hz auditory steady-state responses. Part II: Asymmetric and bimodal hearing | |
JP7410477B2 (ja) | 信号処理装置、信号処理方法、制御方法、システム、およびプログラム | |
JP6883716B2 (ja) | 耳鳴治療器および耳鳴治療プログラム | |
JP3868326B2 (ja) | 睡眠導入装置及び心理生理効果授与装置 | |
Böckmann-Barthel et al. | Time course of auditory streaming: do CI users differ from normal-hearing listeners? | |
JP2023107248A (ja) | 信号処理装置、認知機能改善システム、信号処理方法、及びプログラム | |
WO2014083375A1 (en) | Entrainment device | |
JP7307929B1 (ja) | 信号処理装置、認知機能改善システム、信号処理方法、及びプログラム | |
Erkens et al. | Hearing impaired participants improve more under envelope-transcranial alternating current stimulation when signal to noise ratio is high | |
JP5603281B2 (ja) | 聴覚検査装置、方法およびコンピュータプログラム、補聴器調整システム | |
US20220095067A1 (en) | Binaural beat sound output device having improved sound field and method therefor | |
WO2024004926A1 (ja) | 信号処理装置、認知機能改善システム、信号処理方法、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221202 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221202 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20221202 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221220 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230119 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20230124 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230417 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20230425 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20230602 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231027 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231211 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7410477 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |