CN104133879A - 脑电信号与音乐进行匹配的方法及其系统 - Google Patents

脑电信号与音乐进行匹配的方法及其系统 Download PDF

Info

Publication number
CN104133879A
CN104133879A CN201410360309.1A CN201410360309A CN104133879A CN 104133879 A CN104133879 A CN 104133879A CN 201410360309 A CN201410360309 A CN 201410360309A CN 104133879 A CN104133879 A CN 104133879A
Authority
CN
China
Prior art keywords
music
eeg signals
window width
sequence
default window
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410360309.1A
Other languages
English (en)
Other versions
CN104133879B (zh
Inventor
刘冬冬
张博
杨晓文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Liu Dongdong
Yang Xiaowen
Zhang Bo
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201410360309.1A priority Critical patent/CN104133879B/zh
Priority to PCT/CN2014/086917 priority patent/WO2016011703A1/zh
Priority to TW103137036A priority patent/TWI530822B/zh
Publication of CN104133879A publication Critical patent/CN104133879A/zh
Priority to US14/957,415 priority patent/US10210878B2/en
Application granted granted Critical
Publication of CN104133879B publication Critical patent/CN104133879B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/022Blocking, i.e. grouping of samples in time; Choice of analysis windows; Overlap factoring
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/54Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for retrieval
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165Evaluating the state of mind, e.g. depression, anxiety
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/369Electroencephalography [EEG]
    • A61B5/375Electroencephalography [EEG] using biofeedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/61Indexing; Data structures therefor; Storage structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/63Querying
    • G06F16/635Filtering based on additional data, e.g. user or group profiles
    • G06F16/636Filtering based on additional data, e.g. user or group profiles by using biological or physiological data
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/03Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
    • G10L25/06Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being correlation coefficients
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/66Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for extracting parameters related to health condition

Abstract

本发明公开一种根据脑电信号提供相匹配音乐的方法及其系统,所述方法包括:S1.根据测量的脑电信号,得到所述脑电信号的定标指数α;S2.对预设音乐库中的音乐进行分析,得到所述音乐的长程相关指数β;S3.根据所述定标指数α与所述长程相关指数β,对所述脑电信号与所述音乐进行匹配。本实施例公开的脑电信号与音乐进行匹配的方法及其系统通过测量人的脑电信号而快速自动化地找到符合人当前情绪状态的乐曲,这对于缓解压力、放松平复心情有很重要的作用。

Description

脑电信号与音乐进行匹配的方法及其系统
技术领域
本发明涉及神经科学技术领域,具体涉及脑电信号与音乐进行匹配的方法及其系统。
背景技术
在自然界中存在着许多蕴含丰富信息的符号序列,例如人们创造的语言,人们所定义的乐音(如音乐)、噪音,或者在自然过程中形成的例如基因序列和神经传导信号等。在这些不同类型的符号序列中,可以通过发现一些共性元素来实现不同序列间的对应。
音乐是最“直接表达人的感情”的艺术形式之一,对人的情绪、情感的发展有着重要的影响和促进作用。音乐引起人的情绪反应所内在的脑机制的研究已成为发展认知神经科学、教育学和心理学等领域的热点之一。现代研究已经证实,音乐可以影响人的脑电波,且不同类型的音乐,对大脑产生的刺激不同,所引起的人脑的兴奋模式也不同。因此,如何选择音乐来缓解人的压力、放松平复心情有重要意义。
当前的研究多集中于探讨不同类型音乐对大脑所带来的不同影响。
现有技术存在的问题是在无法合理选择音乐来缓解人的压力、放松平复心情。
发明内容
本发明所要解决的技术问题是现有技术无法合理选择音乐来缓解人的压力、放松平复心情。
为此目的,第一方面,本发明提出一种脑电信号与音乐进行匹配的方法,所述方法包括:
S1.根据测量的脑电信号,得到所述脑电信号的定标指数α;
S2.对预设音乐库中的音乐进行分析,得到所述音乐的长程相关指数β;
S3.根据所述定标指数α与所述长程相关指数β,对所述脑电信号与所述音乐进行匹配。
可选的,所述步骤S1包括:
S11.对测量的脑电信号进行数字化处理,得到脑电信号的离散时间序列{xi,i=1,2,...,N},xi为第i个脑电信号,N为脑电信号的个数;
S12.滤去所述离散时间序列{xi,i=1,2,...,N}的平均值<x>,得到序列{yi,i=1,2,...,N},所述yi为:
y i = &Sigma; k = 1 i ( x k - < x > ) , i = 1 . . . N ,
其中, < x > = 1 N &Sigma; i = 1 N x i ;
S13.对所述序列{yi,i=1,2,...,N}进行经验模态分解EMD,得到n个固有模态函数IMF和一个剩余量R,其中n为正整数,n的取值由所述EMD确定;
S14.计算所述n个固有模态函数IMF中每一个固有模态函数的峰峰值间隔;
S15.将所述峰峰值间隔在预设范围s内的IMF对应的波形合并为一组波形,得到合并波形Pvalues(k),其中10(m-1)≤s≤10m,m=1,2,…,mmax,mmax的大小取决于序列{yi,i=1,2,...,N}的长度N,k表示合并波形中的每一个数据点,k=1,2,...,kmax,kmax的大小由预设范围s和落在所述预设范围s内的峰峰值间隔对应的波形长度确定;
S16.对每组合并波形的进行平均均方根计算,获得波动函数F:
F = [ 1 Q &Sigma; k = 1 Q Pvalue s 2 ( k ) ] 1 / 2
其中<s>表示对不同的预设范围s求均值,所述F∝sα,∝表示成比例,其中,α为定标指数;
S17.根据所述F∝sα,得到定标指数α。
可选的,所述步骤S2包括:
S21.将预设音乐库中的音乐进行数字化处理,得到数字化音乐信号序列{Ui,i=1,2,...,M},i为所述数字化音乐信号序列中第i个时间点,M为所述数字化音乐信号序列的总长度;
S22.以预设窗宽对所述数字化音乐信号序列{Ui,i=1,2,...,M}进行无重叠的移窗并计算标准差,得到序列{vj,j=1,2,…,M/(预设窗宽)},vj为所述序列{vj,j=1,2,…,M/(预设窗宽)}的第j个数据;
S23.根据所述序列{vj,j=1,2,…,M/(预设窗宽)},得到平均音强序列{(vj)2,j=1,2,…,M/(预设窗宽)};
S24.根据所述平均音强序列{(vj)2,j=1,2,…,M/(预设窗宽)},得到一维随机游走序列{zb,b=1,2,…,M/(预设窗宽)},zb为所述序列{zb,b=1,2,…,M/(预设窗宽)}的第b个数据,所述zb为:
z b = &Sigma; j = 1 b ( v j ) 2 - < v 2 > ;
S25.以所述预设窗宽将所述波动序列{zb,b=1,2,…,M/(预设窗宽)}进行有重叠的移窗,得到多个子序列,所述重叠的长度为预设值τ;
S26.利用线性回归得到每个所述子序列的线性趋势
S27.根据所述序列{zb,b=1,2,…,M/(预设窗宽)}及每个所述子序列的线性趋势,得到去趋势波动其中<(δz)2>表示对(δz)2进行平均;
S28.根据所述去趋势波动函数FD(预设窗宽),得到音乐音强的长程相关指数β,所述β为:
其中,为将去趋势波动函数与预设窗宽所决定的时间尺度之间的关系表示在log-log平面。
可选的,所述步骤S3包括:
S31.根据所述定标指数α与所述长程相关指数β,计算γ,所述γ=|α-β|;
S32.如果所述γ在预设范围二内,则所述α对应的脑电信号与是的对所述脑电信号与所述β对应的音乐进行匹配。
第二方面,本发明还提出一种脑电信号与音乐进行匹配的系统,所述系统包括:
脑电信号定标装置,用于根据测量的脑电信号,得到所述脑电信号的定标指数α并将所述α传输到匹配装置;
音乐分析装置,用于对预设音乐库中的音乐进行分析,得到所述音乐的长程相关指数β并将所述β传输到匹配装置;
匹配装置,用于根据所述定标指数α与所述长程相关指数β,对所述脑电信号与所述音乐进行匹配。
可选的,所述系统还包括:脑电信号测量装置,用于测量脑电信号并将所述脑电信号传输到所述脑电信号定标装置。
可选的,所述脑电信号定标装置具体用于:
S11.对测量的脑电信号进行数字化处理,得到脑电信号的离散时间序列{xi,i=1,2,...,N},xi为第i个脑电信号,N为脑电信号的个数;
S12.滤去所述离散时间序列{xi,i=1,2,...,N}的平均值<x>,得到序列{yi,i=1,2,...,N},所述yi为:
y i = &Sigma; k = 1 i ( x k - < x > ) , i = 1 . . . N ,
其中, < x > = 1 N &Sigma; i = 1 N x i ;
S13.对所述序列{yi,i=1,2,...,N}进行经验模态分解EMD,得到n个固有模态函数IMF和一个剩余量R,其中n为正整数,n的取值由所述EMD确定;
S14.计算所述n个固有模态函数IMF中每一个固有模态函数的峰峰值间隔;
S15.将所述峰峰值间隔在预设范围s内的IMF对应的波形合并为一组波形,得到合并波形Pvalues(k),其中10(m-1)≤s≤10m,m=1,2,…,mmax,mmax的大小取决于序列{yi,i=1,2,...,N}的长度N,k表示合并波形中的每一个数据点,k=1,2,...,kmax,kmax的大小由预设范围s和落在所述预设范围s内的峰峰值间隔对应的波形长度确定;
S16.对每组合并波形的进行平均均方根计算,获得波动函数F:
F = [ 1 Q &Sigma; k = 1 Q Pvalue s 2 ( k ) ] 1 / 2
其中<s>表示对不同的预设范围s求均值,所述F∝sα,∝表示成比例,其中,α为定标指数;
S17.根据所述F∝sα,得到定标指数α。
可选的,所述音乐分析装置具体用于:
S21.将预设音乐库中的音乐进行数字化处理,得到数字化音乐信号序列{Ui,i=1,2,...,M},i为所述数字化音乐信号序列中第i个时间点,M为所述数字化音乐信号序列的总长度;
S22.以预设窗宽对所述数字化音乐信号序列{Ui,i=1,2,...,M}进行无重叠的移窗并计算标准差,得到序列{vj,j=1,2,…,M/(预设窗宽)},vj为所述序列{vj,j=1,2,…,M/(预设窗宽)}的第j个数据;
S23.根据所述序列{vj,j=1,2,…,M/(预设窗宽)},得到平均音强序列{(vj)2,j=1,2,…,M/(预设窗宽)};
S24.根据所述平均音强序列{(vj)2,j=1,2,…,M/(预设窗宽)},得到一维随机游走序列{zb,b=1,2,…,M/(预设窗宽)},zb为所述序列{zb,b=1,2,…,M/(预设窗宽)}的第b个数据,所述zb为:
z b = &Sigma; j = 1 b ( v j ) 2 - < v 2 > ;
S25.以所述预设窗宽将所述波动序列{zb,b=1,2,…,M/(预设窗宽)}进行有重叠的移窗,得到多个子序列,所述重叠的长度为预设值τ;
S26.利用线性回归得到每个所述子序列的线性趋势
S27.根据所述序列{zb,b=1,2,…,M/(预设窗宽)}及每个所述子序列的线性趋势,得到去趋势波动其中<(δz)2>表示对(δz)2进行平均;
S28.根据所述去趋势波动函数FD(预设窗宽),得到音乐音强的长程相关指数β,所述β为:
其中,为将去趋势波动函数与预设窗宽所决定的时间尺度之间的关系表示在log-log平面。
可选的,所述匹配装置具体用于:
S31.根据所述定标指数α与所述长程相关指数β,计算γ,所述γ=|α-β|;
S32.如果所述γ在预设范围二内,则所述α对应的脑电信号与是的对所述脑电信号与所述β对应的音乐进行匹配。
本发明提出的脑电信号与音乐进行匹配的方法及系统根据不同的脑电信号来选择对应类型音乐,通过测量人的脑电信号而快速自动化地找到符合人当前心情的乐曲,这对于缓解压力、放松平复心情有很重要的作用。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了实施例一中脑电信号与音乐进行匹配的方法流程图;
图2示出了实施例二中脑电信号与音乐进行匹配的系统结构图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例一:
本实施例公开一种脑电信号与音乐进行匹配的方法,如图1所示,该方法包括:
S1.根据测量的脑电信号,得到所述脑电信号的定标指数α;
S2.对预设音乐库中的音乐进行分析,得到所述音乐的长程相关指数β;
S3.根据所述定标指数α与所述长程相关指数β,对所述脑电信号与所述音乐进行匹配。
所述步骤S1可包括图1中未示出的以下步骤:
S11.对测量的脑电信号进行数字化处理,得到脑电信号的离散时间序列{xi,i=1,2,...,N},xi为第i个脑电信号,N为脑电信号的个数;
S12.滤去所述离散时间序列{xi,i=1,2,...,N}的平均值<x>,得到序列{yi,i=1,2,...,N},所述yi为:
y i = &Sigma; k = 1 i ( x k - < x > ) , i = 1 . . . N ,
其中, < x > = 1 N &Sigma; i = 1 N x i ;
S13.对所述序列{yi,i=1,2,...,N}进行经验模态分解EMD,得到n个固有模态函数IMF和一个剩余量R,其中n为正整数,n的取值由所述EMD确定;
S14.计算所述n个固有模态函数IMF中每一个固有模态函数的峰峰值间隔;
S15.将所述峰峰值间隔在预设范围s内的IMF对应的波形合并为一组波形,得到合并波形Pvalues(k),其中10(m-1)≤s≤10m,m=1,2,…,mmax,mmax的大小取决于序列{yi,i=1,2,...,N}的长度N,k表示合并波形中的每一个数据点,k=1,2,...,kmax,kmax的大小由预设范围s和落在所述预设范围s内的峰峰值间隔对应的波形长度确定;
S16.对每组合并波形的进行平均均方根计算,获得波动函数F:
F = [ 1 Q &Sigma; k = 1 Q Pvalue s 2 ( k ) ] 1 / 2
其中<>表示对范围s求均值,针对不同的尺度范围s,所述F∝sα,∝表示成比例,其中,α为定标指数;
S17.根据所述F∝sα,得到定标指数α。
所述步骤S2可包括图1中未示出的以下步骤:
S21.将预设音乐库中的音乐进行数字化处理,得到数字化音乐信号序列{Ui,i=1,2,...,M},i为所述数字化音乐信号序列中第i个时间点,M为所述数字化音乐信号序列的总长度;
S22.以预设窗宽对所述数字化音乐信号序列{Ui,i=1,2,...,M}进行无重叠的移窗并计算标准差,得到序列{vj,j=1,2,…,M/(预设窗宽)},vj为所述序列{vj,j=1,2,…,M/(预设窗宽)}的第j个数据;
S23.根据所述序列{vj,j=1,2,…,M/(预设窗宽)},得到平均音强序列{(vj)2,j=1,2,…,M/(预设窗宽)};
S24.根据所述平均音强序列{(vj)2,j=1,2,…,M/(预设窗宽)},得到一维随机游走序列{zb,b=1,2,…,M/(预设窗宽)},zb为所述序列{zb,b=1,2,…,M/(预设窗宽)}的第b个数据,所述zb为:
z b = &Sigma; j = 1 b ( v j ) 2 - < v 2 > ;
S25.以所述预设窗宽将所述波动序列{zb,b=1,2,…,M/(预设窗宽)}进行有重叠的移窗,得到多个子序列,所述重叠的长度为预设值τ;
S26.利用线性回归得到每个所述子序列的线性趋势所述其中a和c通过线性回归拟合得到,多个子序列对应多个每个中的a和c均不同;
S27.根据所述序列{zb,b=1,2,…,M/(预设窗宽)}及每个所述子序列的线性趋势得到去趋势波动序列其中<(δz)2>表示对(δz)2进行平均;
S28.根据所述去趋势波动函数FD(预设窗宽),得到音乐音强的长程相关指数β,所述β为:
其中,为将去趋势波动函数与预设窗宽所决定的时间尺度之间的关系表示在log-log平面。
所述步骤S3可包括图1中未示出的以下步骤:
S31.根据所述定标指数α与所述长程相关指数β,计算γ,所述γ=|α-β|;
S32.如果所述γ在预设范围二内,则所述α对应的脑电信号与是的对所述脑电信号与所述β对应的音乐进行匹配。
本实施例公开的脑电信号与音乐进行匹配的方法通过将脑电信号的定标指数α和音乐的长程相关指数β进行比较,两者之间最为接近的则表明两者最匹配,从而可以实现通过脑电信号自动匹配音乐的效果,通过测量人的脑电信号而快速自动化地找到符合人当前心情的乐曲,这对于缓解压力、放松平复心情有很重要的作用。
实施例二:
本实施例公开一种脑电信号与音乐进行匹配的系统,如图1所示,该系统包括:
脑电信号定标装置,用于根据测量的脑电信号,得到所述脑电信号的定标指数α并将所述α传输到匹配装置;
音乐分析装置,用于对预设音乐库中的音乐进行分析,得到所述音乐的长程相关指数β并将所述β传输到匹配装置;
匹配装置,用于根据所述定标指数α与所述长程相关指数β,对所述脑电信号与所述音乐进行匹配。
所述系统还包括图2未示出的脑电信号测量装置,所述脑电信号测量装置用于测量脑电信号并将所述脑电信号传输到所述脑电信号定标装置。
具体应用中,所述脑电信号定标装置具体用于:
S11.对测量的脑电信号进行数字化处理,得到脑电信号的离散时间序列{xi,i=1,2,...,N},xi为第i个脑电信号,N为脑电信号的个数;
S12.滤去所述离散时间序列{xi,i=1,2,...,N}的平均值<x>,得到序列{yi,i=1,2,...,N},所述yi为:
y i = &Sigma; k = 1 i ( x k - < x > ) , i = 1 . . . N ,
其中, < x > = 1 N &Sigma; i = 1 N x i ;
S13.对所述序列{yi,i=1,2,...,N}进行经验模态分解EMD,得到n个固有模态函数IMF和一个剩余量R,其中n为正整数,n的取值由所述EMD确定;
S14.计算所述n个固有模态函数IMF中每一个固有模态函数的峰峰值间隔;
S15.将所述峰峰值间隔在预设范围s内的IMF对应的波形合并为一组波形,得到合并波形Pvalues(k),其中10(m-1)≤s≤10m,m=1,2,…,mmax,mmax的大小取决于序列{yi,i=1,2,...,N}的长度N,k表示合并波形中的每一个数据点,k=1,2,...,kmax,kmax的大小由预设范围s和落在所述预设范围s内的峰峰值间隔对应的波形长度确定;
S16.对每组合并波形的进行平均均方根计算,获得波动函数F:
F = [ 1 Q &Sigma; k = 1 Q Pvalue s 2 ( k ) ] 1 / 2
其中<>表示对范围s求均值,针对不同的尺度范围s,所述F∝sα,∝表示成比例,其中,α为定标指数;
S17.根据所述F∝sα,得到定标指数α。
所述音乐分析装置具体用于:
S21.将预设音乐库中的音乐进行数字化处理,得到数字化音乐信号序列{Ui,i=1,2,...,M},i为所述数字化音乐信号序列中第i个时间点,M为所述数字化音乐信号序列的总长度;
S22.以预设窗宽对所述数字化音乐信号序列{Ui,i=1,2,...,M}进行无重叠的移窗并计算标准差,得到序列{vj,j=1,2,…,M/(预设窗宽)},vj为所述序列{vj,j=1,2,…,M/(预设窗宽)}的第j个数据;
S23.根据所述序列{vj,j=1,2,…,M/(预设窗宽)},得到平均音强序列{(vj)2,j=1,2,…,M/(预设窗宽)};
S24.根据所述平均音强序列{(vj)2,j=1,2,…,M/(预设窗宽)},得到一维随机游走序列{zb,b=1,2,…,M/(预设窗宽)},zb为所述序列{zb,b=1,2,…,M/(预设窗宽)}的第b个数据,所述zb为:
z b = &Sigma; j = 1 b ( v j ) 2 - < v 2 > ;
S25.以所述预设窗宽将所述波动序列{zb,b=1,2,…,M/(预设窗宽)}进行有重叠的移窗,得到多个子序列,所述重叠的长度为预设值τ;
S26.利用线性回归得到每个所述子序列的线性趋势
S27.根据所述序列{zb,b=1,2,…,M/(预设窗宽)}及每个所述子序列的线性趋势,得到去趋势波动其中<(δz)2>表示对(δz)2进行平均;
S28.根据所述去趋势波动函数FD(预设窗宽),得到音乐音强的长程相关指数β,所述β为:
其中,为将去趋势波动函数与预设窗宽所决定的时间尺度之间的关系表示在log-log平面。
所述匹配装置具体用于:
S31.根据所述定标指数α与所述长程相关指数β,计算γ,所述γ=|α-β|;
S32.如果所述γ在预设范围二内,则所述α对应的脑电信号与是的对所述脑电信号与所述β对应的音乐进行匹配。
本实施例公开的脑电信号与音乐进行匹配的系统通过测量人的脑电信号而快速自动化地找到符合人当前心情的乐曲,这对于缓解压力、放松平复心情有很重要的作用。
虽然结合附图描述了本发明的实施方式,但是本领域技术人员可以在不脱离本发明的精神和范围的情况下做出各种修改和变型,这样的修改和变型均落入由所附权利要求所限定的范围之内。

Claims (9)

1.一种脑电信号与音乐进行匹配的方法,其特征在于,所述方法包括:
S1.根据测量的脑电信号,得到所述脑电信号的定标指数α;
S2.对预设音乐库中的音乐进行分析,得到所述音乐的长程相关指数β;
S3.根据所述定标指数α与所述长程相关指数β,对所述脑电信号与所述音乐进行匹配。
2.根据权利要求1所述的方法,其特征在于,所述步骤S1包括:
S11.对测量的脑电信号进行数字化处理,得到脑电信号的离散时间序列{xi,i=1,2,...,N},xi为第i个脑电信号,N为脑电信号的个数;
S12.滤去所述离散时间序列{xi,i=1,2,...,N}的平均值<x>,得到序列{yi,i=1,2,...,N},所述yi为:
y i = &Sigma; k = 1 i ( x k - < x > ) , i = 1 . . . N ,
其中, < x > = 1 N &Sigma; i = 1 N x i ;
S13.对所述序列{yi,i=1,2,...,N}进行经验模态分解EMD,得到n个固有模态函数IMF和一个剩余量R,其中n为正整数,n的取值由所述EMD确定;
S14.计算所述n个固有模态函数IMF中每一个固有模态函数的峰峰值间隔;
S15.将所述峰峰值间隔在预设范围s内的IMF对应的波形合并为一组波形,得到合并波形Pvalues(k),其中10(m-1)≤s≤10m,m=1,2,…,mmax,mmax的大小取决于序列{yi,i=1,2,...,N}的长度N,k表示合并波形中的每一个数据点,k=1,2,...,kmax,kmax的大小由预设范围s和落在所述预设范围s内的峰峰值间隔对应的波形长度确定;
S16.对每组合并波形的进行平均均方根计算,获得波动函数F:
F = [ 1 Q &Sigma; k = 1 Q Pvalue s 2 ( k ) ] 1 / 2
其中<s>表示对不同的预设范围s求均值,所述F∝sα,∝表示成比例,其中,α为定标指数;
S17.根据所述F∝sα,得到定标指数α。
3.根据权利要求1所述的方法,其特征在于,所述步骤S2包括:
S21.将预设音乐库中的音乐进行数字化处理,得到数字化音乐信号序列{Ui,i=1,2,...,M},i为所述数字化音乐信号序列中第i个时间点,M为所述数字化音乐信号序列的总长度;
S22.以预设窗宽对所述数字化音乐信号序列{Ui,i=1,2,...,M}进行无重叠的移窗并计算标准差,得到序列{vj,j=1,2,…,M/(预设窗宽)},vj为所述序列{vj,j=1,2,…,M/(预设窗宽)}的第j个数据;
S23.根据所述序列{vj,j=1,2,…,M/(预设窗宽)},得到平均音强序列{(vj)2,j=1,2,…,M/(预设窗宽)};
S24.根据所述平均音强序列{(vj)2,j=1,2,…,M/(预设窗宽)},得到一维随机游走序列{zb,b=1,2,…,M/(预设窗宽)},zb为所述序列{zb,b=1,2,…,M/(预设窗宽)}的第b个数据,所述zb为:
z b = &Sigma; j = 1 b ( v j ) 2 - < v 2 > ;
S25.以所述预设窗宽将所述波动序列{zb,b=1,2,…,M/(预设窗宽)}进行有重叠的移窗,得到多个子序列,所述重叠的长度为预设值τ;
S26.利用线性回归得到每个所述子序列的线性趋势z
S27.根据所述序列{zb,b=1,2,…,M/(预设窗宽)}及每个所述子序列的线性趋势,得到去趋势波动函数其中<(δz)2>表示对(δz)2进行平均;
S28.根据所述去趋势波动函数FD(预设窗宽),得到音乐音强的长程相关指数β,所述β为:
其中,为将去趋势波动函数与预设窗宽所决定的时间尺度之间的关系表示在log-log平面。
4.根据权利要求1所述的方法,其特征在于,所述步骤S3包括:
S31.根据所述定标指数α与所述长程相关指数β,计算γ,所述γ=|α-β|;
S32.如果所述γ在预设范围二内,则所述α对应的脑电信号与是的对所述脑电信号与所述β对应的音乐进行匹配。
5.一种脑电信号与音乐进行匹配的系统,其特征在于,所述系统包括:
脑电信号定标装置,用于根据测量的脑电信号,得到所述脑电信号的定标指数α并将所述α传输到匹配装置;
音乐分析装置,用于对预设音乐库中的音乐进行分析,得到所述音乐的长程相关指数β并将所述β传输到匹配装置;
匹配装置,用于根据所述定标指数α与所述长程相关指数β,对所述脑电信号与所述音乐进行匹配。
6.根据权利要求5所述的系统,其特征还在于,所述系统还包括:脑电信号测量装置,用于测量脑电信号并将所述脑电信号传输到所述脑电信号定标装置。
7.根据权利要求5所述的系统,其特征在于,所述脑电信号定标装置具体用于:
S11.对测量的脑电信号进行数字化处理,得到脑电信号的离散时间序列{xi,i=1,2,...,N},xi为第i个脑电信号,N为脑电信号的个数;
S12.滤去所述离散时间序列{xi,i=1,2,...,N}的平均值<x>,得到序列{yi,i=1,2,...,N},所述yi为:
y i = &Sigma; k = 1 i ( x k - < x > ) , i = 1 . . . N ,
其中, < x > = 1 N &Sigma; i = 1 N x i ;
S13.对所述序列{yi,i=1,2,...,N}进行经验模态分解EMD,得到n个固有模态函数IMF和一个剩余量R,其中n为正整数,n的取值由所述EMD确定;
S14.计算所述n个固有模态函数IMF中每一个固有模态函数的峰峰值间隔;
S15.将所述峰峰值间隔在预设范围s内的IMF对应的波形合并为一组波形,得到合并波形Pvalues(k),其中10(m-1)≤s≤10m,m=1,2,…,mmax,mmax的大小取决于序列{yi,i=1,2,...,N}的长度N,k表示合并波形中的每一个数据点,k=1,2,...,kmax,kmax的大小由预设范围s和落在所述预设范围s内的峰峰值间隔对应的波形长度确定;
S16.对每组合并波形的进行平均均方根计算,获得波动函数F:
F = [ 1 Q &Sigma; k = 1 Q Pvalue s 2 ( k ) ] 1 / 2
其中<s>表示对不同的预设范围s求均值,所述F∝sα,∝表示成比例,其中,α为定标指数;
S17.根据所述F∝sα,得到定标指数α。
8.根据权利要求5所述的系统,其特征在于,所述音乐分析装置具体用于:
S21.将预设音乐库中的音乐进行数字化处理,得到数字化音乐信号序列{Ui,i=1,2,...,M},i为所述数字化音乐信号序列中第i个时间点,M为所述数字化音乐信号序列的总长度;
S22.以预设窗宽对所述数字化音乐信号序列{Ui,i=1,2,...,M}进行无重叠的移窗并计算标准差,得到序列{vj,j=1,2,…,M/(预设窗宽)},vj为所述序列{vj,j=1,2,…,M/(预设窗宽)}的第j个数据;
S23.根据所述序列{vj,j=1,2,…,M/(预设窗宽)},得到平均音强序列{(vj)2,j=1,2,…,M/(预设窗宽)};
S24.根据所述平均音强序列{(vj)2,j=1,2,…,M/(预设窗宽)},得到一维随机游走序列{zb,b=1,2,…,M/(预设窗宽)},zb为所述序列{zb,b=1,2,…,M/(预设窗宽)}的第b个数据,所述zb为:
z b = &Sigma; j = 1 b ( v j ) 2 - < v 2 > ;
S25.以所述预设窗宽将所述波动序列{zb,b=1,2,…,M/(预设窗宽)}进行有重叠的移窗,得到多个子序列,所述重叠的长度为预设值τ;
S26.利用线性回归得到每个所述子序列的线性趋势
S27.根据所述序列{zb,b=1,2,…,M/(预设窗宽)}及每个所述子序列的线性趋势,得到去趋势波动函数其中<(δz)2>表示对(δz)2进行平均;
S28.根据所述去趋势波动函数FD(预设窗宽),得到音乐音强的长程相关指数β,所述β为:
其中,为将去趋势波动函数与预设窗宽所决定的时间尺度之间的关系表示在log-log平面。
9.根据权利要求5所述的系统,其特征在于,所述匹配装置具体用于:
S31.根据所述定标指数α与所述长程相关指数β,计算γ,所述γ=|α-β|;
S32.如果所述γ在预设范围二内,则所述α对应的脑电信号与是的对所述脑电信号与所述β对应的音乐进行匹配。
CN201410360309.1A 2014-07-25 2014-07-25 脑电信号与音乐进行匹配的方法及其系统 Active CN104133879B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201410360309.1A CN104133879B (zh) 2014-07-25 2014-07-25 脑电信号与音乐进行匹配的方法及其系统
PCT/CN2014/086917 WO2016011703A1 (zh) 2014-07-25 2014-09-19 脑电信号与音乐进行匹配的方法及其系统
TW103137036A TWI530822B (zh) 2014-07-25 2014-10-27 腦電訊號與音樂進行匹配之方法及其系統
US14/957,415 US10210878B2 (en) 2014-07-25 2015-12-02 Method and system for matching music files with electroencephalogram

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410360309.1A CN104133879B (zh) 2014-07-25 2014-07-25 脑电信号与音乐进行匹配的方法及其系统

Publications (2)

Publication Number Publication Date
CN104133879A true CN104133879A (zh) 2014-11-05
CN104133879B CN104133879B (zh) 2017-04-19

Family

ID=51806557

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410360309.1A Active CN104133879B (zh) 2014-07-25 2014-07-25 脑电信号与音乐进行匹配的方法及其系统

Country Status (4)

Country Link
US (1) US10210878B2 (zh)
CN (1) CN104133879B (zh)
TW (1) TWI530822B (zh)
WO (1) WO2016011703A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105138530A (zh) * 2015-06-18 2015-12-09 刘冬冬 自动音乐匹配方法、装置和应用其的电子装置
CN105744421A (zh) * 2016-03-31 2016-07-06 惠州Tcl移动通信有限公司 通过蓝牙耳机智能推荐音乐的系统及其方法
CN106648107A (zh) * 2016-12-30 2017-05-10 包磊 一种vr场景的控制方法和装置
CN110841169A (zh) * 2019-11-28 2020-02-28 中国科学院深圳先进技术研究院 一种用于睡眠调节的深度声音刺激系统和方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080140716A1 (en) * 2006-12-08 2008-06-12 Mari Saito Information Processing Apparatus, Information Processing Method and Information Processing Program
CN101259015A (zh) * 2007-03-06 2008-09-10 李小俚 一种脑电信号分析监测方法及其装置
KR20080111972A (ko) * 2007-06-20 2008-12-24 단국대학교 산학협력단 감성뇌파신호를 이용한 실시간 멀티미디어 컨텐츠출력시스템 및 방법
CN102446533A (zh) * 2010-10-15 2012-05-09 盛乐信息技术(上海)有限公司 音乐播放器
US20130177883A1 (en) * 2012-01-11 2013-07-11 Axio, Inc. Systems and Methods for Directing Brain Activity
CN103412646A (zh) * 2013-08-07 2013-11-27 南京师范大学 基于脑机交互的音乐情绪化推荐方法
TW201424688A (zh) * 2012-12-28 2014-07-01 Univ Chang Gung 可攜式腦波偵測及音樂播放系統

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9320450B2 (en) * 2013-03-14 2016-04-26 The Nielsen Company (Us), Llc Methods and apparatus to gather and analyze electroencephalographic data

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080140716A1 (en) * 2006-12-08 2008-06-12 Mari Saito Information Processing Apparatus, Information Processing Method and Information Processing Program
CN101259015A (zh) * 2007-03-06 2008-09-10 李小俚 一种脑电信号分析监测方法及其装置
KR20080111972A (ko) * 2007-06-20 2008-12-24 단국대학교 산학협력단 감성뇌파신호를 이용한 실시간 멀티미디어 컨텐츠출력시스템 및 방법
CN102446533A (zh) * 2010-10-15 2012-05-09 盛乐信息技术(上海)有限公司 音乐播放器
US20130177883A1 (en) * 2012-01-11 2013-07-11 Axio, Inc. Systems and Methods for Directing Brain Activity
TW201424688A (zh) * 2012-12-28 2014-07-01 Univ Chang Gung 可攜式腦波偵測及音樂播放系統
CN103412646A (zh) * 2013-08-07 2013-11-27 南京师范大学 基于脑机交互的音乐情绪化推荐方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
SAIM,S.ET AL.: "MyMusicShuffler:Mood-based Music Recommendation with the Practical Usage of Brainwave Signals", 《2014 IEEE INTERNATIONAL CONFERENCE ON CONSUMER ELECTRONICS(ICCE)》 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105138530A (zh) * 2015-06-18 2015-12-09 刘冬冬 自动音乐匹配方法、装置和应用其的电子装置
CN105138530B (zh) * 2015-06-18 2018-09-11 金纽合(北京)科技有限公司 自动音乐匹配方法、装置和应用其的电子装置
CN105744421A (zh) * 2016-03-31 2016-07-06 惠州Tcl移动通信有限公司 通过蓝牙耳机智能推荐音乐的系统及其方法
CN106648107A (zh) * 2016-12-30 2017-05-10 包磊 一种vr场景的控制方法和装置
CN110841169A (zh) * 2019-11-28 2020-02-28 中国科学院深圳先进技术研究院 一种用于睡眠调节的深度声音刺激系统和方法
CN110841169B (zh) * 2019-11-28 2020-09-25 中国科学院深圳先进技术研究院 一种用于睡眠调节的深度学习声音刺激系统和方法

Also Published As

Publication number Publication date
CN104133879B (zh) 2017-04-19
US20160086612A1 (en) 2016-03-24
WO2016011703A1 (zh) 2016-01-28
TW201604718A (zh) 2016-02-01
TWI530822B (zh) 2016-04-21
US10210878B2 (en) 2019-02-19

Similar Documents

Publication Publication Date Title
Bhat et al. Automated diagnosis of autism: in search of a mathematical marker
Markowitz et al. Mesoscopic patterns of neural activity support songbird cortical sequences
CN104133879A (zh) 脑电信号与音乐进行匹配的方法及其系统
Rajendran et al. Midbrain adaptation may set the stage for the perception of musical beat
Tian et al. Analogues of simple and complex cells in rhesus monkey auditory cortex
WO2007007321A3 (en) Method and system for processing an electroencephalograph (eeg) signal
Osorio et al. A phase-synchronization and random-matrix based approach to multichannel time-series analysis with application to epilepsy
Stevenson et al. A nonlinear model of newborn EEG with nonstationary inputs
Zunino et al. Detecting nonlinearity in short and noisy time series using the permutation entropy
Huang et al. Detecting and characterizing high-frequency oscillations in epilepsy: a case study of big data analysis
McLachlan et al. Pitch and plasticity: insights from the pitch matching of chords by musicians with absolute and relative pitch
Rosenblatt et al. A quantitative analysis of an eeg epileptic record based on multiresolution wavelet coefficients
Dombovári et al. In vivo validation of the electronic depth control probes
JP4788956B2 (ja) 脳活動解析方法および装置
Stahn et al. Surrogate-assisted identification of influences of network construction on evolving weighted functional networks
KR20020015547A (ko) 뇌파 분석을 통한 감성 치료용 정보 생성 방법 및 이에이용되는 뇌파 분석장치 및 감성 치료용 정보가 기록된기록매체
CN116473556A (zh) 一种基于多位点皮肤生理响应的情感计算方法及系统
Vallarino et al. Transfreq: A Python package for computing the theta-to-alpha transition frequency from resting state EEG data
Singh et al. Cortical temporal integration window for binaural cues accounts for sluggish auditory spatial perception
Vallarino et al. Transfreq: A Python package for computing the theta‐to‐alpha transition frequency from resting state electroencephalographic data
Stepien New method for analysis of nonstationary signals
Mallikarjun et al. Mental state recognition by using brain waves
Smith et al. Synaptic interactions between forelimb-related motor cortex neurons in behaving primates
Vinutha et al. Classification of normal. focal, and generalized EEG signals using EMD and ANN
Reddy et al. Discrete Wavelet Transform based statistical features for the diagnosis of epilepsy

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20170321

Address after: 100080 Haidian Haidian District Beijing street, No. 4, layer 4001, 1

Applicant after: Gold_NOAH (Beijing) Technology Co.,Ltd.

Address before: 721000 Xianyang province Shaanxi City Weicheng District Yi Lane No. 31

Applicant before: Liu Dongdong

Applicant before: Zhang Bo

Applicant before: Yang Xiaowen

GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20221104

Address after: No. 231, South 3rd Floor, No. 2, Daliushu Road, Haidian District, Beijing 100081

Patentee after: Zhang Bo

Patentee after: Liu Dongdong

Patentee after: Yang Xiaowen

Address before: 100080 4001, Floor 4, No. 1, Haidian Street, Haidian District, Beijing

Patentee before: Gold_NOAH (Beijing) Technology Co.,Ltd.