CN110415711B - 一种电子设备的状态识别方法和电子设备 - Google Patents
一种电子设备的状态识别方法和电子设备 Download PDFInfo
- Publication number
- CN110415711B CN110415711B CN201810399030.2A CN201810399030A CN110415711B CN 110415711 B CN110415711 B CN 110415711B CN 201810399030 A CN201810399030 A CN 201810399030A CN 110415711 B CN110415711 B CN 110415711B
- Authority
- CN
- China
- Prior art keywords
- voiceprint
- electronic equipment
- state
- current
- display screens
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 47
- 230000005236 sound signal Effects 0.000 claims abstract description 92
- 238000004590 computer program Methods 0.000 claims description 23
- 238000010586 diagram Methods 0.000 description 17
- 230000004907 flux Effects 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 238000000605 extraction Methods 0.000 description 7
- 230000001960 triggered effect Effects 0.000 description 5
- 230000002159 abnormal effect Effects 0.000 description 4
- 230000002093 peripheral effect Effects 0.000 description 4
- 238000013500 data storage Methods 0.000 description 3
- 230000005347 demagnetization Effects 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- KLDZYURQCUYZBL-UHFFFAOYSA-N 2-[3-[(2-hydroxyphenyl)methylideneamino]propyliminomethyl]phenol Chemical compound OC1=CC=CC=C1C=NCCCN=CC1=CC=CC=C1O KLDZYURQCUYZBL-UHFFFAOYSA-N 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 201000001098 delayed sleep phase syndrome Diseases 0.000 description 1
- 208000033921 delayed sleep phase type circadian rhythm sleep disease Diseases 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L17/00—Speaker identification or verification techniques
- G10L17/26—Recognition of special voice characteristics, e.g. for use in lie detectors; Recognition of animal voices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
- H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/725—Cordless telephones
Landscapes
- Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Acoustics & Sound (AREA)
- Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Environmental & Geological Engineering (AREA)
- Telephone Function (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明实施例提供了一种电子设备的状态识别方法,所述方法包括:获取麦克风采集到的当前声音信号,获取所述当前声音信号的声纹特征;将所述当前声音信号的声纹特征与预先设置的声纹特征集合中的每种声纹特征进行匹配,所述声纹特征集合中的每种声纹特征与电子设备的一种呈现状态对应,所述电子设备的呈现状态用于表示所述N个显示屏之间的相对位置;在所述当前声音信号的声纹特征与预先设置的声纹特征集合中的第i种声纹特征匹配时,确定所述电子设备的当前呈现状态为:与所述第i种声纹特征对应的电子设备的一种呈现状态;i为大于或等于1的整数。本发明实施例还公开了一种电子设备和计算机可读存储介质。
Description
技术领域
本发明涉及声纹识别领域,尤其涉及一种电子设备的状态识别方法、电子设备和计算机可读存储介质。
背景技术
现有的电子设备如手机可以具有两个或更多的显示屏,在电子设备上的任意两个显示屏可以通过转轴等连接部件进行连接;这里,在电子设备的任意两个显示屏之间的夹角不同时,可以认为电子设备处于不同的呈现状态;而对于电子设备上不同的呈现状态的识别,在现有技术中,可以在上述连接部件如转轴上安装数字霍尔传感器,利用数字霍尔传感器识别显示屏之间的角度,从而确定电子设备的呈现状态,进一步地,还可以根据电子设备的呈现状态,进行电子设备的显示屏的显示模式的切换。
然而,数字霍尔传感器在使用过程中容易出现一些失效问题,例如,高温消磁、转轴松动、轻摔导致的磁铁和数字霍尔传感器距离变化等,这些失效问题可能导致数字霍尔传感器检测的磁通量发生变化;如此,可能导致不能准确识别设置有多屏的电子设备的呈现状态。
发明内容
为解决现有存在的技术问题,本发明实施例提供一种电子设备的状态识别方法、电子设备和计算机可读存储介质,可以利用电子设备的显示屏之间的连接部件的声纹特征,准确识别多屏的电子设备的呈现状态。
为达到上述目的,本发明实施例的技术方案是这样实现的:
第一方面,本发明实施例提供了一种电子设备的状态识别方法,所述电子设备包括通过连接部件相互连接的N个显示屏、以及用于采集连接部件发出的声音信号的麦克风,N为大于1的自然数;所述方法包括:
获取麦克风采集到的当前声音信号,获取所述当前声音信号的声纹特征;
将所述当前声音信号的声纹特征与预先设置的声纹特征集合中的每种声纹特征进行匹配,所述声纹特征集合中的每种声纹特征与电子设备的一种呈现状态对应,所述电子设备的呈现状态用于表示所述N个显示屏之间的相对位置;
在所述当前声音信号的声纹特征与预先设置的声纹特征集合中的第i种声纹特征匹配时,确定所述电子设备的当前呈现状态为:与所述第i种声纹特征对应的电子设备的一种呈现状态;i为大于或等于1的整数。
第二方面,本发明实施例提供了一种电子设备,所述电子设备包括存储器、处理器、通过连接部件相互连接的N个显示屏、以及用于采集连接部件发出的声音信号的麦克风,N为大于1的自然数;其中,
所述存储器用于存储计算机程序;
所述处理器用于执行所述存储器中存储的计算机程序,以实现第一方面所述的方法的步骤。
第三方面,本发明实施例提供了一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现第一方面所述的方法的步骤。
本发明实施例提供的一种电子设备的状态识别方法、电子设备和计算机可读存储介质中,所述电子设备包括通过连接部件相互连接的N个显示屏、以及用于采集连接部件发出的声音信号的麦克风,N为大于1的自然数;所述方法包括:首先,获取麦克风采集到的当前声音信号,获取所述当前声音信号的声纹特征;然后,将所述当前声音信号的声纹特征与预先设置的声纹特征集合中的每种声纹特征进行匹配,所述声纹特征集合中的每种声纹特征与电子设备的一种呈现状态对应,所述电子设备的呈现状态用于表示所述N个显示屏之间的相对位置;最后,在所述当前声音信号的声纹特征与预先设置的声纹特征集合中的第i种声纹特征匹配时,确定所述电子设备的当前呈现状态为:与所述第i种声纹特征对应的电子设备的一种呈现状态;i为大于或等于1的整数。
可以看出,在采用上述技术方案时,可以利用电子设备的显示屏之间的连接部件的声纹特征,准确识别多屏的电子设备的呈现状态。
附图说明
图1为本发明实施例的双屏手机的三种呈现状态的示意图;
图2为本发明实施例的数字霍尔传感器在高温消磁前后的角度与磁通量的关系示意图;
图3为本发明实施例中电子设备的转轴的一个结构示意图;
图4为本发明实施例的电子设备的状态识别方法的流程图一;
图5为本发明实施例的预先采集的三种样本声音信号对应的电子设备的呈现状态的示意图;
图6为本发明实施例的一个示例性的构建声纹特征集合的流程图;
图7为本发明实施例的电子设备的状态识别方法的流程图二;
图8为本发明实施例的一个声纹识别系统的结构示意图;
图9为本发明实施例的另一个声纹识别系统的结构示意图;
图10为本发明实施例的电子设备的硬件结构示意图。
具体实施方式
以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
对于具有多屏的电子设备的呈现状态的识别方式,一种实现方式为通过数字霍尔传感器识别显示屏之间的角度,从而确定电子设备的呈现状态;下面以双屏手机为例进行说明。
双屏手机的两个显示屏可以同转轴进行连接,可以理解的是,双屏手机可以呈现折叠单屏状态、完全展开双屏状态等;在实际应用时,可以根据双屏手机的不同呈现状态,控制双屏手机进入对应的显示模式。
图1为本发明实施例的双屏手机的三种呈现状态的示意图,如图1所示,“CLOSE=0°”表示数字霍尔传感器检测到两个显示屏之间的角度为0°,双屏手机处于折叠单屏状态;“0°<OPEN<180°”表示数字霍尔传感器检测到两个显示屏之间的角度大于0°且小于180°,双屏手机处于非完全展开双屏状态;“OPEN=180°”表示数字霍尔传感器检测到两个显示屏之间的角度等于180°,双屏手机处于完全展开双屏状态。
这里,在进行双屏手机的显示模式的切换时,可以利用数字霍尔传感器进行判断;在双屏手机出厂时,可以针对数字霍尔传感器,在30°和150°两个角度进行校准,分别作为0°和180°的触发阈值;在图1所示的三种显示屏的典型角度的基础上,在一个示例中,双屏手机可以设置如下四种显示模式:
单A显示模式、大A显示模式、A|B显示模式、A|A显示模式。
其中,单A显示模式表示只在一个显示屏显示内容,另一个显示屏不工作;大A显示模式表示将两个显示屏作为一个大的显示屏显示内容;A|B显示模式表示两个显示屏显示不同的内容,例如,一个显示屏显示应用A的界面,另一个显示屏显示应用B的界面;A|A显示模式表示两个显示屏显示相同的内容,例如,两个显示屏均显示应用A的界面。
在一个可选的示例中,可以根据数字霍尔传感检测到的双屏之间的角度,控制进行双屏手机进入相应的显示模式,例如,当双屏之间的夹角为0°时,仅允许双屏手机工作在单A显示模式;当双屏之间的夹角处于(30°,180°]区间时,允许双屏手机工作在A|A显示模式;当双屏之间的夹角处于(150°,180°]区间时,允许双屏手机工作在A|B和大A两种显示模式。
数字霍尔传感器在使用过程中可能出现各种失效问题,进而导致相应角度的磁通量发生异常变化;例如,数字霍尔传感器在高温消磁后可能导致磁通量发生异常变化。
图2为本发明实施例的数字霍尔传感器在高温消磁前后的角度与磁通量的关系示意图,如图2所示,横轴表示两个显示屏的夹角,纵轴表示磁通量,可以看出,在高温消磁前后,相同角度对应的磁通量发生了变化。
数字霍尔传感器检测的磁通量的异常变化,可能导致双屏手机不能准确记性显示模式的切换。例如,当数字霍尔传感器检测的0°磁通量小于30°标准的阈值时,会导致数字霍尔传感器“CLOSE=0°”状态无法触发,双屏手机折叠后无法自动切换到单A显示模式,导致功能失效;当数字霍尔传感器检测的180°磁通量小于150°标准的阈值时,会导致数字霍尔传感器“OPEN=180°”状态无法触发,双屏手机折叠后无法自动切换到A|B或大A的显示模式,导致功能失效。
可以看出,一旦数字霍尔传感器失效后,相应的显示功能可能异常,此时必须将设置由数字霍尔传感器的电子设备进行维修,例如,可以通过带有标定角度(30°-150°)的角度进行重新校准;如此,增加了用户的使用成本,并较低了用户体验。
对于上述记载的通过数字霍尔传感器确定电子设备的呈现状态的方案的问题,提出以下各实施例。
第一实施例
本发明第一实施例记载了一种电子设备的状态识别方法,该电子设备可以包括通过连接部件相互连接的N个显示屏、以及用于采集连接部件发出的声音信号的麦克风,N为大于1的自然数;
显然,当N等于2时,电子设备可以是双屏电子设备,当N大于2时,电子设备为具有两个显示屏以上的电子设备;也就是说,本发明实施例不仅适合双屏电子设备,而且适合两个显示屏以上的电子设备。
这里,连接部件可以是转轴等部件,也就是说,在电子设备上,显示屏可以通过转轴铰接而成,本发明实施例中并不对转轴的具体结构进行限定。
图3为本发明实施例中电子设备的转轴的一个结构示意图,如图3所示,该转轴可以包括相互配合的上凸轮301和下凸轮302,还可以包括弹簧303等器件,可以理解的是,转轴的上凸轮的凸出部与下凸轮的凹槽相互配合,在转轴转动时,发出的声音如上下凸轮的碰撞声可以被麦克风采集;并且,转轴在双屏之间的夹角不同时可以发出不同的声音;如此,可以通过检测转轴发出的声音,来检测电子设备的显示屏之间的夹角,从而确定电子屏的呈现状态,例如,当电子设备为双屏手机时,可以通过检测转轴发出的声音(例如转轴回弹时的声音),来检测双屏手机处于折叠状态还是展开状态,进而触发显示模式的切换。
图4为本发明实施例的电子设备的状态识别方法的流程图一,如图4所示,该流程可以包括:
步骤401:获取麦克风采集到的当前声音信号,获取所述当前声音信号的声纹特征;
在实际实施时,为了提高采集到的声音信号的质量,以及提升匹配识别率,可以将麦克风设置在连接部件的附近,可选的,将麦克风的声音收集端朝向所述连接部件,如此,可以最大程度地避免环境噪声造成的干扰;在一个示例中,连接部件为转轴,利用带有角度的麦克风朝向转轴,使麦克风仅接收到转轴的声音。
示例性的,麦克风采集到的声音可以是上述记载的上凸轮与下凸轮的碰撞声,也可以是齿轮等器件可以发出的特定声音。
步骤402:将所述当前声音信号的声纹特征与预先设置的声纹特征集合中的每种声纹特征进行匹配,所述声纹特征集合中的每种声纹特征与电子设备的一种呈现状态对应,所述电子设备的呈现状态用于表示所述N个显示屏之间的相对位置;
这里,上述记载的N个显示屏之间的相对位置可以包括:所述N个显示屏中任意两个显示屏折叠或展开时呈现的相对位置;示例性地,当N等于2时,上述记载的N个显示屏之间的相对位置可以是:两个显示屏叠或展开时呈现的相对位置。
在实际实施,在获取麦克风采集到的声音信号前,还可以获取所述麦克风在所述电子设备处于多种不同的呈现状态时采集到的样本声音信号,获取每种样本声音信号的声纹特征;之后,利用所获取的各种样本声音信号的声纹特征(也就是说,提取样本声音信号中的声纹特征参数),构建声纹特征集合。在一个示例中,所获取的各种样本声音信号的声纹特征可以呈现为声纹模拟信号的形式。
也就是说,可以预先利用麦克风采集电子设备处于多种不同的呈现状态时连接部件发出的声音信号,从而学习到电子设备处于多种不同的呈现状态时连接部件发出的样本声音信号;例如,连接部件为双屏手机的转轴时,可以学习到双屏手机展开和折叠时转轴发出的声音。
可选的,所获取的各种样本声音信号对应的电子设备的呈现状态包括:所述N个显示屏中的任意两个显示屏的夹角为P度、所述N个显示屏中的任意两个显示屏的夹角为Q度,其中,0≤P≤180,0≤Q≤180,P和Q为两个不同的数值。
一个典型的示例是,P和Q分别取0和180,也就是说,预先采集两个显示屏的夹角为0度和180度时连接部件发出的声音;显然,当P和Q分别取0和180时,对应的两个显示屏分别处于完全折叠(对应图1中“CLOSE=0°”)状态以及完全展开状态(对应图1中“OPEN=180°”),当两个显示屏的夹角为0度和180度,连接部件可以分别发出特定的声音。
进一步地,在预先采集样本声音信号时,除了采集两个显示屏的夹角为0度和180度时连接部件发出的声音,还可以采集两个显示屏的夹角为其他不同角度(非0度和180度)连接部件发出的声音。
在电子设备为双屏手机时,一个可选的示例中,预先采集的三种样本声音信号对应的电子设备的呈现状态如图5所示,即,双屏手机的呈现状态可以包括:折叠单屏状态(对应图5中的“CLOSE=0°状态”)、非完全展开双屏状态(对应图5中的“0°<OPEN<180°”)和完全展开双屏状态(对应图5中的“OPEN=180°状态”)。
特别地,在上述记载的连接部件为转轴时,对于不同转轴,上下凸轮的设计存在一定的公差,需要在生产线进行校准;也就是受,对于两个显示屏的夹角为0度和180度时转轴的声音信号通过特征值提取编码后,得到不同状态下的声纹模板。
可选的,在预先构建声纹特征集合后,可以利用电子设备中的存储器存储该声纹特征集合。
图6为本发明实施例的一个示例性的构建声纹特征集合的流程图,如图6所示,该流程包括:
步骤A1:分别采集两个显示屏的夹角为0度和180度时连接部件发出的声音。
步骤A2:通过特征值提取的方式得出两个显示屏的夹角为0度和180度时连接部件发出的声音的声纹特征。
在步骤A2中,得出声纹特征可以是声纹模拟信号;
显然,两个显示屏的夹角为0度时连接部件发出的声音的声纹特征与两个显示屏的完全折叠状态相对应,进一步地,还可以设置两个显示屏的完全折叠状态(可以称为0度折叠状态)对应的显示模式;同理,两个显示屏的夹角为180度时连接部件发出的声音的声纹特征与两个显示屏的完全展开状态相对应,进一步地,还可以设置两个显示屏的完全展开状态(可以称为180度展开状态)对应的显示模式。
可选的,将两种声纹特征进行匹配可以是:将两种声纹特征进行比较;在一个示例中,可以通过将两种声纹特征进行比较运算,得出两种声纹特征的相似度,在相似度大于或等于第一相似度阈值时,可以认为这两种声纹特征匹配;否则,认为这两种声纹特征不匹配。在一个可选的示例中,所得出的比较结果可以呈现为数字信号。
需要说明的是,上述记载的第一相似度阈值可以根据实际应用需求设置。
步骤403:在所述当前声音信号的声纹特征与预先设置的声纹特征集合中的第i种声纹特征匹配时,确定所述电子设备的当前呈现状态为:与所述第i种声纹特征对应的电子设备的一种呈现状态;i为大于或等于1的整数。
示例性地,当电子设备为双屏手机时,预先设置的声纹特征集合可以包括3种声纹特征,这3种声纹特征分别对应图5所示的电子设备的三种呈现状态;如此,在确定当前声音信号的声纹特征与预先设置的声纹特征集合中的第1种、第2种或第3种声纹特征匹配时,可以确定双屏手机的当前呈现状态为:与第1种、第2种或第3种声纹特征对应的双屏手机的呈现状态(即折叠单屏状态、非完全展开双屏状态或完全展开双屏状态)。
需要说明的是,如果当前声音信号的声纹特征不与预先设置的声纹特征集合中的任意一种声纹特征不匹配,则可以返回至步骤401。
在实际应用中,步骤401至步骤403均可以由电子设备中的处理器实施。
可选的,在确定出当前电子设备的呈现状态后,还可以根据预先设置的电子设备的呈现状态与电子设备的操作方式的对应关系,确定出与电子设备的当前呈现状态对应的电子设备的操作方式;控制所述电子设备,按照确定出的电子设备的操作方式进行操作。
也就是说,可以针对电子设备的各种呈现状态,预先分别设置对应的电子设备的操作方式;在实际实施时,还可以利用存储器存储预先设置的电子设备的呈现状态与电子设备的操作方式的对应关系。
这里,电子设备的操作方式包括但不限于按照一个显示模式进行显示、启动应用程序(APP)、启动电子设备的特定功能、推出应用程序、进行解锁等等。这里,并不限制应用程序的种类,例如,应用程序可以是音乐播放器、视频应用、日程管理软件等等。
在一个示例中,当电子设备为双屏手机时,当电子设备的当前呈现状态为折叠单屏状态时,控制双屏手机工作在单A显示模式;当电子设备的当前程序状态为完全展开双屏状态时,控制双屏手机工作在A|B显示模式或大A显示模式。
在实际应用中,可以由电子设备中的处理器根据预先设置的电子设备的呈现状态与电子设备的操作方式的对应关系,确定出与电子设备的当前呈现状态对应的电子设备的操作方式;控制所述电子设备,按照确定出的电子设备的操作方式进行操作。
可以理解的是,随着电子设备的连接部件的不断使用,连接部件的声音会逐渐发生变化,进而使得连接部件所发出的声音的声纹特征发生变化,因而,需要预先构建的声纹特征集合中,更新对应的声纹特征。
也就是说,在确定出电子设备的当前呈现状态后,可以利用所述当前声音信号的声纹特征,更新所述声纹特征集合中与当前电子设备的呈现状态对应的声纹特征,如此,可以实现声纹特征集合中的声纹特征的实时更新,进而可以提高匹配判断的准确率。
这里,通过增加样本声音信号的自学习过程,实现对声纹特征集合中的声纹特征的实时更新。
在一个示例中,在当前声音信号的声纹特征与预先设置的声纹特征集合中的第i种声纹特征匹配时,可以判断当前声音信号的声纹特征与预先设置的声纹特征集合中的第i种声纹特征是否大于设定值。
需要说明的是,上述记载的设定值可以根据实际应用需求设置,例如,设定值可以是80%、85%、90%等。
在实际应用中,可以由电子设备中的处理器执行更新声纹特征的步骤。
这里,上述记载的电子设备的状态识别方法还可以用图7所示的流程进行说明,图7为本发明实施例的电子设备的状态识别方法的流程图二,如图7所示,该流程可以包括:
步骤701:声纹信号输入。
也就是说,获取所述麦克风在所述电子设备处于多种不同的呈现状态时采集到的样本声音信号,获取每种样本声音信号的声纹特征;之后,利用所获取的各种样本声音信号的声纹特征(也就是说,提取样本声音信号中的声纹特征参数),构建声纹特征集合。
步骤702:利用麦克风进行声音信号采集。
也就是说,获取麦克风采集到的当前声音信号。
步骤703:特征值向量提取。
本步骤中,可以对麦克风采集到的当前声音信号进行特征值向量提取,得出当前声音信号的声纹特征。
步骤702和步骤703的实现方式可以参照步骤401的实现方式,这里不再赘述。
步骤704:判断当前声音信号的声纹特征是否与预先设置的声纹特征集合中的任意一种声纹特征匹配,如果是,则执行步骤705;否则,执行步骤706。
步骤705:控制当前显示模式切换至与匹配的声纹特征对应的显示模式。
步骤706:保持当前的显示模式不变。
在实际应用中,步骤701至步骤706可以由电子设备中的处理器结合麦克风、显示屏等器件实现。
在实际应用中,上述记载的电子设备的状态识别方法可以通过声纹识别系统实现,该声纹识别系统可以设置于上述记载的电子设备上。
图8为本发明实施例的一个声纹识别系统的结构示意图,如图8所示,该声纹识别系统可以包括:声纹模板录入模块801、声纹信号匹配模块802和模式状态切换模块803;其中,
声纹模板录入模块801可以通过麦克风等器件实现,声纹模板录入模块用于通过采集声音信号得到上述记载的声纹特征集合,并用于采集上述记载的当前声音信号;
声纹信号匹配模块802,用于获取所述当前声音信号的声纹特征;将所述当前声音信号的声纹特征与预先设置的声纹特征集合中的每种声纹特征进行匹配;在所述当前声音信号的声纹特征与预先设置的声纹特征集合中的第i种声纹特征匹配时,确定所述电子设备的当前呈现状态为:与所述第i种声纹特征对应的电子设备的一种呈现状态。
模式状态切换模块803,用于根据电子设备的当前呈现状态,控制电子设备的各个显示屏按照对应的显示模式进行显示。
示例性地,以电子设备为双屏手机为例,当处理器确定当前声音信号的声纹特征与折叠单屏状态对应的声纹特征匹配时,可以控制双屏手机按照折叠单屏状态对应的显示模式进行显示;当处理器确定当前声音信号的声纹特征与完全展开双屏状态对应的声纹特征匹配时,可以控制双屏手机按照完全展开双屏状态对应的显示模式进行显示。
这里,声纹模板录入模块801、声纹信号匹配模块802和模式状态切换模块803已经上述记载的电子设备的状态识别方法作出说明,这里不再赘述。
在实际应用中,声纹信号匹配模块802和模式状态切换模块803均可以由电子设备中的处理器等器件实现。
图9为本发明实施例的另一个声纹识别系统的结构示意图,如图9所示,该声纹识别系统可以包括:声纹发声器单元901、声纹采集单元902、特征值提取单元903、数据存储单元904、声纹匹配单元905、处理器单元906、模板更新单元907和模式状态切换单元908;其中,
声纹发声器单元901可以利用电子设备的连接部件实现,可以在电子设备的使用过程中发出声音信号。
声纹采集单元902可以利用电子设备的麦克风实现,用于采集样本声音信号及当前声音信号。
特征值提取单元903,用于通过对采集的样本声音信号和当前声音信号进行特征值提取,得出与样本声音信号对应的声纹特征和与当前声音信号对应的声纹特征。
数据存储单元904,可以利用电子设备的存储器实现,用于存储特征值提取单元得出的声纹特征。
声纹匹配单元905,用于对当前声音信号的声纹特征与每个样本声音信号的声纹特征进行匹配处理,并将匹配结果发送至处理器单元;这里,匹配结果可以是匹配成功或匹配失败。
处理器单元906,用于在匹配结果为匹配成功时,触发模板更新单元907和模式状态切换单元908。
模板更新单元907,用于被触发时,更新所述声纹特征集合中与当前电子设备的呈现状态对应的声纹特征。
模式状态切换单元908,用于在被触发时,根据电子设备的当前呈现状态,控制电子设备的各个显示屏按照对应的显示模式进行显示。
实际应用中,特征值提取单元903、声纹匹配单元905、处理器单元906和模板更新单元907可以由电子设备中的处理器实现,模式状态切换单元908可以由电子设备中的处理器结合显示屏实现。
声纹发声器单元901、声纹采集单元902、特征值提取单元903、数据存储单元904、声纹匹配单元905、处理器单元906、模板更新单元907和模式状态切换单元908的实现方式均已经在上述记载的电子设备的状态识别方法的实施例中作出说明,这里不再赘述。
第二实施例
针对本发明第一实施例的电子设备的状态识别方法,本发明第二实施提出了一种电子设备。
图10为本发明实施例的电子设备的硬件结构示意图,如图10所示,该电子设备可以包括存储器1001、处理器1002、通过连接部件相互连接的N个显示屏1003、以及用于采集连接部件发出的声音信号的麦克风1004,N为大于1的自然数;其中,
所述存储器1001用于存储计算机程序;
所述处理器1002用于执行所述存储器中存储的计算机程序,以实现以下步骤:
获取麦克风采集到的当前声音信号,获取所述当前声音信号的声纹特征;
将所述当前声音信号的声纹特征与预先设置的声纹特征集合中的每种声纹特征进行匹配,所述声纹特征集合中的每种声纹特征与电子设备的一种呈现状态对应,所述电子设备的呈现状态用于表示所述N个显示屏之间的相对位置;
在所述当前声音信号的声纹特征与预先设置的声纹特征集合中的第i种声纹特征匹配时,确定所述电子设备的当前呈现状态为:与所述第i种声纹特征对应的电子设备的一种呈现状态;i为大于或等于1的整数。
可选的,上述电子设备还可以包括发声装置1005以及其他外设1006,这里,发声装置1005可以是上述记载的连接部件,其他外设1006可以是与电子设备连接的任意一种外设,例如,其他外设可以是鼠标、键盘、U盘等。
在实际应用中,上述存储器1001可以是易失性存储器(volatile memory),例如随机存取存储器(RAM,Random-Access Memory);或者非易失性存储器(non-volatilememory),例如只读存储器(ROM,Read-Only Memory),快闪存储器(flash memory),硬盘(HDD,Hard Disk Drive)或固态硬盘(SSD,Solid-State Drive);或者上述种类的存储器的组合,并向处理器1002提供指令和数据。
上述处理器1002可以为特定用途集成电路(ASIC,Application SpecificIntegrated Circuit)、数字信号处理器(DSP,Digital Signal Processor)、数字信号处理装置(DSPD,Digital Signal Processing Device)、可编程逻辑装置(PLD,ProgrammableLogic Device)、现场可编程门阵列(FPGA,Field Programmable Gate Array)、中央处理器(CPU,Central Processing Unit)、控制器、微控制器、微处理器中的至少一种。可以理解地,对于不同的设备,用于实现上述处理器功能的电子器件还可以为其它,本发明实施例不作具体限定。
示例性地,所述处理器1002还用于执行所述存储器中存储的计算机程序,实现以下步骤:
在获取麦克风采集到的声音信号前,获取所述麦克风在所述电子设备处于多种不同的呈现状态时采集到的样本声音信号,获取每种样本声音信号的声纹特征;
利用所获取的各种样本声音信号的声纹特征,构建声纹特征集合。
示例性地,所述处理器1002还用于执行所述存储器中存储的计算机程序,实现以下步骤:
在确定出电子设备的当前呈现状态后,利用所述当前声音信号的声纹特征,更新所述声纹特征集合中与当前电子设备的呈现状态对应的声纹特征。
示例性地,所述处理器1002具体用于执行所述存储器中存储的计算机程序,实现以下步骤:
在所述当前声音信号的声纹特征与预先设置的声纹特征集合中的第i种声纹特征的相似度大于设定值时,利用所述当前声音信号的声纹特征,更新所述声纹特征集合中与当前电子设备的呈现状态对应的声纹特征。
示例性地,所获取的各种样本声音信号对应的电子设备的呈现状态包括:所述N个显示屏中的任意两个显示屏的夹角为P度、所述N个显示屏中的任意两个显示屏的夹角为Q度,其中,0≤P≤180,0≤Q≤180,P和Q为两个不同的数值。
示例性地,所述麦克风的声音收集端朝向所述连接部件。
示例性地,所述N个显示屏之间的相对位置包括:所述N个显示屏中任意两个显示屏折叠或展开时呈现的相对位置。
示例性地,所述处理器1002还用于执行所述存储器中存储的计算机程序,实现以下步骤:
在确定出当前电子设备的呈现状态后,根据预先设置的电子设备的呈现状态与电子设备的操作方式的对应关系,确定出与电子设备的当前呈现状态对应的电子设备的操作方式;控制所述电子设备,按照确定出的电子设备的操作方式进行操作。
第三实施例
本发明第三实施例提出了一种计算机可读存储介质,具体来讲,本实施例中的一种电子设备的状态识别方法对应的计算机程序指令可以被存储在光盘,硬盘,U盘等存储介质上,当存储介质中的与一种电子设备的状态识别方法对应的计算机程序指令被一电子设备读取或被执行时,实现前述实施例的任意一种电子设备的状态识别方法的步骤。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述,仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。
Claims (10)
1.一种电子设备的状态识别方法,其特征在于,所述电子设备包括通过连接部件相互连接的N个显示屏、以及用于采集连接部件发出的声音信号的麦克风,N为大于1的自然数;所述方法包括:
获取麦克风采集到的当前声音信号,获取所述当前声音信号的声纹特征;
将所述当前声音信号的声纹特征与预先设置的声纹特征集合中的每种声纹特征进行匹配,所述声纹特征集合中的每种声纹特征与电子设备的一种呈现状态对应,所述电子设备的呈现状态用于表示所述N个显示屏之间的相对位置;
在所述当前声音信号的声纹特征与预先设置的声纹特征集合中的第i种声纹特征匹配时,确定所述电子设备的当前呈现状态为:与所述第i种声纹特征对应的电子设备的一种呈现状态;i为大于或等于1的整数。
2.根据权利要求1所述的方法,其特征在于,在获取麦克风采集到的声音信号前,所述方法还包括:
获取所述麦克风在所述电子设备处于多种不同的呈现状态时采集到的样本声音信号,获取每种样本声音信号的声纹特征;
利用所获取的各种样本声音信号的声纹特征,构建声纹特征集合。
3.根据权利要求1或2所述的方法,其特征在于,在确定出电子设备的当前呈现状态后,所述方法还包括:
利用所述当前声音信号的声纹特征,更新所述声纹特征集合中与当前电子设备的呈现状态对应的声纹特征。
4.根据权利要求3所述的方法,其特征在于,所述利用所述当前声音信号的声纹特征,更新所述声纹特征集合中与当前电子设备的呈现状态对应的声纹特征,包括:
在所述当前声音信号的声纹特征与预先设置的声纹特征集合中的第i种声纹特征的相似度大于设定值时,利用所述当前声音信号的声纹特征,更新所述声纹特征集合中与当前电子设备的呈现状态对应的声纹特征。
5.根据权利要求2所述的方法,其特征在于,所获取的各种样本声音信号对应的电子设备的呈现状态包括:所述N个显示屏中的任意两个显示屏的夹角为P度、所述N个显示屏中的任意两个显示屏的夹角为Q度,其中,0≤P≤180,0≤Q≤180,P和Q为两个不同的数值。
6.根据权利要求1所述的方法,其特征在于,所述麦克风的声音收集端朝向所述连接部件。
7.根据权利要求1所述的方法,其特征在于,所述N个显示屏之间的相对位置包括:所述N个显示屏中任意两个显示屏折叠或展开时呈现的相对位置。
8.根据权利要求1所述的方法,其特征在于,在确定出当前电子设备的呈现状态后,所述方法还包括:
根据预先设置的电子设备的呈现状态与电子设备的操作方式的对应关系,确定出与电子设备的当前呈现状态对应的电子设备的操作方式;控制所述电子设备,按照确定出的电子设备的操作方式进行操作。
9.一种电子设备,其特征在于,所述电子设备包括存储器、处理器、通过连接部件相互连接的N个显示屏、以及用于采集连接部件发出的声音信号的麦克风,N为大于1的自然数;其中,
所述存储器用于存储计算机程序;
所述处理器用于执行所述存储器中存储的计算机程序,以实现权利要求1至8任一项所述的方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现权利要求1至8任一项所述的方法的步骤。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810399030.2A CN110415711B (zh) | 2018-04-28 | 2018-04-28 | 一种电子设备的状态识别方法和电子设备 |
PCT/CN2019/082684 WO2019205974A1 (zh) | 2018-04-28 | 2019-04-15 | 电子设备的状态识别方法和电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810399030.2A CN110415711B (zh) | 2018-04-28 | 2018-04-28 | 一种电子设备的状态识别方法和电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110415711A CN110415711A (zh) | 2019-11-05 |
CN110415711B true CN110415711B (zh) | 2023-05-26 |
Family
ID=68293804
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810399030.2A Active CN110415711B (zh) | 2018-04-28 | 2018-04-28 | 一种电子设备的状态识别方法和电子设备 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN110415711B (zh) |
WO (1) | WO2019205974A1 (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101063928A (zh) * | 2006-04-28 | 2007-10-31 | 三星电子株式会社 | 控制便携设备的用户界面屏幕方向的方法和装置 |
CN103116455A (zh) * | 2013-02-22 | 2013-05-22 | 珠海全志科技股份有限公司 | 电子阅读设备及其显示方法 |
CN103259908A (zh) * | 2012-02-15 | 2013-08-21 | 联想(北京)有限公司 | 一种移动终端及其智能控制方法 |
CN106101309A (zh) * | 2016-06-29 | 2016-11-09 | 努比亚技术有限公司 | 一种双面屏幕切换装置及方法、移动终端 |
CN107077314A (zh) * | 2016-09-12 | 2017-08-18 | 深圳前海达闼云端智能科技有限公司 | 一种电子设备 |
WO2018001354A1 (zh) * | 2016-06-30 | 2018-01-04 | 中兴通讯股份有限公司 | 定位方法、装置及位置服务系统、存储介质 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10613687B2 (en) * | 2014-01-13 | 2020-04-07 | Beijing Lenovo Software Ltd. | Information processing method and electronic device |
-
2018
- 2018-04-28 CN CN201810399030.2A patent/CN110415711B/zh active Active
-
2019
- 2019-04-15 WO PCT/CN2019/082684 patent/WO2019205974A1/zh active Application Filing
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101063928A (zh) * | 2006-04-28 | 2007-10-31 | 三星电子株式会社 | 控制便携设备的用户界面屏幕方向的方法和装置 |
CN103259908A (zh) * | 2012-02-15 | 2013-08-21 | 联想(北京)有限公司 | 一种移动终端及其智能控制方法 |
CN103116455A (zh) * | 2013-02-22 | 2013-05-22 | 珠海全志科技股份有限公司 | 电子阅读设备及其显示方法 |
CN106101309A (zh) * | 2016-06-29 | 2016-11-09 | 努比亚技术有限公司 | 一种双面屏幕切换装置及方法、移动终端 |
WO2018001354A1 (zh) * | 2016-06-30 | 2018-01-04 | 中兴通讯股份有限公司 | 定位方法、装置及位置服务系统、存储介质 |
CN107077314A (zh) * | 2016-09-12 | 2017-08-18 | 深圳前海达闼云端智能科技有限公司 | 一种电子设备 |
Also Published As
Publication number | Publication date |
---|---|
WO2019205974A1 (zh) | 2019-10-31 |
CN110415711A (zh) | 2019-11-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102623272B1 (ko) | 전자 장치 및 이의 제어 방법 | |
EP3767553A1 (en) | Method and device for detecting anomalies, corresponding computer program product and non-transitory computer-readable carrier medium | |
JP6249919B2 (ja) | 操作入力装置 | |
US11699442B2 (en) | Methods and systems for speech detection | |
WO2017032261A1 (zh) | 身份认证方法、装置及设备 | |
CN106024009A (zh) | 音频处理方法及装置 | |
US9984563B2 (en) | Method and device for controlling subordinate electronic device or supporting control of subordinate electronic device by learning IR signal | |
CN104094192A (zh) | 来自用户的音频输入 | |
US20130154947A1 (en) | Determining a preferred screen orientation based on known hand positions | |
JP7254546B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
CN104503888A (zh) | 告警提示的方法及装置 | |
JP5418579B2 (ja) | 開閉眼検出装置 | |
CN105279499A (zh) | 年龄识别方法及装置 | |
US10770077B2 (en) | Electronic device and method | |
EP2996113A1 (en) | Identifying un-stored voice commands | |
CN104951377A (zh) | 智能家居终端的异常处理方法及装置 | |
US9672677B2 (en) | Method and apparatus for detecting magnetic signal of paper money | |
CN108108671A (zh) | 产品说明信息获取方法及装置 | |
WO2020030018A1 (en) | Method for updating a speech recognition model, electronic device and storage medium | |
CN106778194A (zh) | 验证方法、装置和电子设备 | |
CN110415711B (zh) | 一种电子设备的状态识别方法和电子设备 | |
WO2018207481A1 (ja) | 自動検査装置 | |
CN111338563B (zh) | 存储器的隐藏分区处理方法和装置 | |
CN109286757A (zh) | 图像处理装置和图像处理方法 | |
CN104536642B (zh) | 解锁方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |