CN108900688B - 发声控制方法、装置、电子装置及计算机可读介质 - Google Patents
发声控制方法、装置、电子装置及计算机可读介质 Download PDFInfo
- Publication number
- CN108900688B CN108900688B CN201810746884.3A CN201810746884A CN108900688B CN 108900688 B CN108900688 B CN 108900688B CN 201810746884 A CN201810746884 A CN 201810746884A CN 108900688 B CN108900688 B CN 108900688B
- Authority
- CN
- China
- Prior art keywords
- vibration
- screen
- exciter
- sound production
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000195 production control method Methods 0.000 title abstract description 8
- 238000000034 method Methods 0.000 claims abstract description 40
- 230000000875 corresponding effect Effects 0.000 claims description 69
- 238000004519 manufacturing process Methods 0.000 claims description 51
- 230000001276 controlling effect Effects 0.000 claims description 18
- 230000006870 function Effects 0.000 claims description 8
- 230000001815 facial effect Effects 0.000 claims description 5
- 230000002596 correlated effect Effects 0.000 claims description 2
- 238000012216 screening Methods 0.000 description 15
- 230000002093 peripheral effect Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 238000004891 communication Methods 0.000 description 5
- 238000001514 detection method Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 101150053844 APP1 gene Proteins 0.000 description 4
- 101100189105 Homo sapiens PABPC4 gene Proteins 0.000 description 4
- 102100039424 Polyadenylate-binding protein 4 Human genes 0.000 description 4
- 238000009826 distribution Methods 0.000 description 4
- 238000003825 pressing Methods 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 238000003860 storage Methods 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 230000001413 cellular effect Effects 0.000 description 3
- 230000007547 defect Effects 0.000 description 3
- 210000001061 forehead Anatomy 0.000 description 3
- 238000010295 mobile communication Methods 0.000 description 3
- 239000000919 ceramic Substances 0.000 description 2
- 238000012512 characterization method Methods 0.000 description 2
- 239000013078 crystal Substances 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 210000005069 ears Anatomy 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 229910000838 Al alloy Inorganic materials 0.000 description 1
- 229910000851 Alloy steel Inorganic materials 0.000 description 1
- 101100055496 Arabidopsis thaliana APP2 gene Proteins 0.000 description 1
- 101100016250 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) GYL1 gene Proteins 0.000 description 1
- 102100038359 Xaa-Pro aminopeptidase 3 Human genes 0.000 description 1
- 101710081949 Xaa-Pro aminopeptidase 3 Proteins 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 239000008186 active pharmaceutical agent Substances 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 238000005452 bending Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000005284 excitation Effects 0.000 description 1
- 210000001508 eye Anatomy 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000000366 juvenile effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 229910052751 metal Inorganic materials 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 210000000697 sensory organ Anatomy 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 239000010959 steel Substances 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 210000000707 wrist Anatomy 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/60—Substation equipment, e.g. for use by subscribers including speech amplifiers
- H04M1/6033—Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
- H04M1/6041—Portable telephones adapted for handsfree use
- H04M1/605—Portable telephones adapted for handsfree use involving control of the receiver volume to provide a dual operational mode at close or far distance from the user
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/03—Constructional features of telephone transmitters or receivers, e.g. telephone hand-sets
- H04M1/035—Improving the acoustic characteristics by means of constructional features of the housing, e.g. ribs, walls, resonating chambers or cavities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/60—Substation equipment, e.g. for use by subscribers including speech amplifiers
- H04M1/6016—Substation equipment, e.g. for use by subscribers including speech amplifiers in the receiver circuit
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
- H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
- H04M1/72433—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for voice messaging, e.g. dictaphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
- H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
- H04M1/72439—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for image or video messaging
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
- H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2250/00—Details of telephonic subscriber devices
- H04M2250/12—Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2250/00—Details of telephonic subscriber devices
- H04M2250/52—Details of telephonic subscriber devices including functional features of a camera
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Computer Networks & Wireless Communication (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Environmental & Geological Engineering (AREA)
- Multimedia (AREA)
- Telephone Function (AREA)
Abstract
本申请实施例提供了一种发声控制方法、装置、电子装置及计算机可读介质,涉及电子装置技术领域。所述方法包括:当所述屏幕显示通话接听界面时,获取所述摄像头采集用户的人脸图像;基于所述人脸图像确定振动参数;获取所述用户基于所述通话接听界面输入的振动发声请求;根据所述振动参数控制所述激励器,以驱动所述屏幕振动发声。因此,不仅可以通过屏幕或后盖的振动方式来发声,可以避免在电子装置上设置出音孔,还能够通话接听的时候,根据用户而控制屏幕振动发声,能够提高用户体验度。
Description
技术领域
本申请涉及电子装置技术领域,更具体地,涉及一种发声控制方法、装置、电子装置及计算机可读介质。
背景技术
目前,电子装置,诸如手机,平板电脑等中是通过扬声器发声以将声音信号输出。然而,扬声器的设置占据了较大的设计空间,从而导致电子装置不符合薄型化设计的方向。
发明内容
本申请提出了一种发声控制方法、装置、电子装置及计算机可读介质,以改善上述缺陷。
第一方面,本申请实施例提供了一种发声控制方法,应用于电子装置,所述屏幕、多个用于驱动所述屏幕发声的激励器,所述多个激励器对应所述屏幕的不同位置。所述方法包括:当所述屏幕显示通话接听界面时,获取所述摄像头采集用户的人脸图像;基于所述人脸图像确定振动参数;获取所述用户基于所述通话接听界面输入的振动发声请求;根据所述振动参数控制所述激励器,以驱动所述屏幕振动发声。
第二方面,本申请实施例还提供了一种发声控制装置,应用于电子装置,所述电子装置包括摄像头、屏幕和多个用于驱动所述屏幕发声的激励器,所述多个激励器对应所述屏幕的不同位置。所述发声控制装置包括:第一获取单元、确定单元、第二获取单元和驱动单元。第一获取单元,用于当所述屏幕显示通话接听界面时,获取所述摄像头采集用户的人脸图像。确定单元,同于基于所述人脸图像确定振动参数。第二获取单元,用于获取所述用户基于所述通话接听界面输入的振动发声请求。驱动单元,用于响应所述振动发声请求,根据所述振动参数控制所述激励器,以驱动所述屏幕振动发声。
第三方面,本申请实施例还提供了一种电子装置,包括主体和激励器,所述主体的正面设置有屏幕,所述主体的背面设置有后盖,所述激励器能够驱动所述屏幕和所述后盖振动发声。电子装置还包括:处理器,用于当所述屏幕显示通话接听界面时,获取所述摄像头采集用户的人脸图像,基于所述人脸图像确定振动参数,获取所述用户基于所述通话接听界面输入的振动发声请求,将所述振动参数发送至所述驱动电路。所述驱动电路,用于响应所述振动发声请求,根据所述振动参数控制所述激励器,以驱动所述屏幕振动发声。
第四方面,本申请实施例还提供了一种电子装置,包括摄像头、屏幕和多个用于驱动所述屏幕发声的激励器,所述多个激励器对应所述屏幕的不同位置;还包括存储器和处理器,所述存储器与所述处理器耦合;所述存储器存储指令,当所述指令由所述处理器执行时以使所述处理器执行上述方法。
第五方面,本申请实施例还提供了一种具有处理器可执行的程序代码的计算机可读介质,所述程序代码使所述处理器执行上述方法。
本申请实施例提供的发声控制方法、装置、电子装置及计算机可读介质,在接听电话的时候,接听界面下采集到用户的人脸图像,根据人脸图像确定了振动参数,在根据该振动参数振动屏幕发声。因此,不仅可以通过屏幕或后盖的振动方式来发声,可以避免在电子装置上设置出音孔,还能够通话接听的时候,根据用户而控制屏幕振动发声,能够提高用户体验度。
本申请实施例的其他特征和优点将在随后的说明书阐述,并且,部分地从说明书中变得显而易见,或者通过实施本申请实施例而了解。本申请实施例的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了本申请实施例提供的电子装置的第一视角下的结构示意图;
图2示出了本申请实施例提供的电子装置的第二视角下的结构示意图;
图3示出了本申请一实施例提供的发声控制方法的方法流程图;
图4示出了本申请实施例提供的通话接听界面的示意图;
图5示出了本申请另一实施例提供的发声控制方法的方法流程图;
图6示出了本申请实施例提供的通话状态界面的示意图;
图7示出了本申请又一实施例提供的发声控制方法的方法流程图;
图8示出了本申请实施例提供的发声控制装置的模块框图;
图9示出了本申请一实施例提供的电子装置的模块框图;
图10示出了本申请另一实施例提供的电子装置的模块框图;
图11示出了本申请实施例提供的用于执行本申请实施例提供的方法的电子装置的模块框图。
具体实施方式
下面将结合本申请实施例中附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围,而是仅仅表示本申请的选定实施例。基于本申请的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。同时,在本申请的描述中,术语“第一”、“第二”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
显示屏通常在手机、平板电脑等电子装置中所起到的作用为显示文本、图片、图标或者视频等内容。而伴随着触控技术的发展,越来越多的电子装置所设置的显示屏为触控显示屏,在设置触控显示屏的情况下,当检测到用户在触控显示屏上进行拖拽、单击、双击、滑动等触控操作时,可以对用户的触控操作进行响应。
随着用户对所显示内容的清晰度以及精细度要求越来越高,更多的电子装置采用尺寸较大的触控显示屏。但是,在设置尺寸较大的触控显示屏的过程中,发现电子装置前端所设置的前置摄像头、接近光传感器、听筒等功能器件会影响触控显示屏所能扩展到的区域。
通常电子装置包括前面板、后盖以及边框。在前面板包括顶部区、中部屏幕区和下部按键区。通常,上额区设置有听筒出音孔以及前置摄像头等功能器件,中部屏幕区设置有触控显示屏,下部按键区设置有一到三个物理按键。而随着技术的发展,下部按键区被逐渐取消,原本设置在下部按键区的物理按键由触控显示屏中的虚拟按键替代。
而上额区所设置的听筒出音孔对于手机的功能支持较为重要,不易轻易的取消,所以将触控显示屏的可显示区域拓展到覆盖上额区具有较大的难度。在经过一些列研究后,发明人发现可以通过控制手机的屏幕、边框或者后盖振动的方式来发出声音,从而可以取消听筒出音孔的设置。
示例性地,请参阅图1和2,示出了本申请实施例提供的一种电子装置 100。其中,图1为电子装置的前视图,图2为电子装置的侧视图。
电子装置100包括电子本体部10,所述电子本体部10包括壳体12和设置在所述壳体12的屏幕120,壳体12包括前面板125、后盖127以及边框126,边框126用于连接前面板125和后盖127,屏幕120设置在前面板 125上。
电子装置还包括激励器131,该激励器131用于驱动电子装置的振动部件振动,具体地,振动部件为所述电子装置的屏幕120或壳体12的至少一个,也就是说,振动部件可以是屏幕120,也可以是壳体12,还可以是屏幕120和壳体12的组合。作为一种实施方式,当振动部件为壳体12时,振动部件可以是壳体12的后盖。
电子装置还包括摄像头132,该摄像头设置在壳体12,则可以包括前置摄像头和后置摄像头,如果是前置摄像头,则设置在前面板125上,如果是后置摄像头则设置在后盖127上。
于本申请实施例中,所述振动部件为屏幕120,则激励器131与屏幕 120连接,用于带动屏幕120振动。具体地,所述激励器131贴附于屏幕 120下方,则激励器131可以是压电驱动器或者马达。作为一种实施方式,激励器131为压电驱动器。压电驱动器通过力矩作用将自身形变传递给屏幕120,从而屏幕120振动发声。屏幕120包括触控屏109和显示面板111,显示面板111位于触摸屏109的下方,压电驱动器贴附于显示面板111的下方,即显示面板111的远离触摸屏109的一面。压电驱动器包括多层压电陶瓷片。当一片多层压电陶瓷片发声膨胀和收缩时,其将带动屏幕发生弯曲变形,如此反复,整个屏幕形成弯曲振动,从而屏幕可以推动空气并产生声音。
作为一种实施方式,电子装置100包括驱动电路。激励器131与电子装置的驱动电路连接,驱动电路用于根据振动参数输入控制信号值激励器 131,以驱动激励器131振动,从而带动振动部件振动。具体地,驱动电路可以是电子装置的处理器,也可以是电子装置内的能够产生驱动电压或电流的集成电路。驱动电路输出高低电平的驱动信号至激励器131,激励器 131根据该驱动信号振动,而驱动电路输出的驱动信号的电参数不同,则会导致激励器131的振动参数不同,例如,驱动信号的占空比对应激励器131 的振动频率,驱动信号的幅度对应激励器131的振动幅度等。
在本申请实施例中,多个激励器131可以均匀分布于屏幕120,以使屏幕120均分为多个单独进行发声的区域。例如,激励器的个数为4个,则屏幕可以沿竖直方向以及水平方向的中心线均分为4块方形区域,4个激励器设置于4块方形区域下方,4个激励器与4块方形区域一一对应。当然,激励器的个数在本申请实施例中并不作为限定。
通过上述屏幕振动的方式,用户可以利用屏幕发声的方式,实现音频或视频的播放、通话聊天等,但是,发明人在研究中发现,在播放语音的时候,往往采用预先设定的参数进行播放,其中,参数可以是音量、音色等数据,而预设限定的可以是目前系统对应的音量或者预设定义好的参数等,而未根据针对不同的用户设定不同的振动参数,以实现针对不同的用户采用相对应的振动发声策略。
因此,为了解决上述缺陷,本申请实施例提供了一种发声控制方法,用于解决电子装置在屏幕振动发声的时候,未针对不同的用户而设定不同的振动参数的缺陷,具体地,该方法包括:S301至S304。
S301:当所述屏幕显示通话接听界面时,获取所述摄像头采集用户的人脸图像。
其中,通话接听界面可以是电子装置在获取到通话请求的时候所显示的界面,在该界面内设置有用于接听的接听按钮,则该界面可以是通话请求对应的通话界面,也可以是,视频通话对应的视频聊天界面,还可以是,语音通话对应的语音聊天界面。
具体地,于本申请实施例中,所述通话接听界面可以是来电界面,如图4所示,示出了本申请实施例提供的一种电子装置内的通话界面,该通话界面为电子装置处于通话模式时所显示的界面。
在电子装置处于图4所示的通话界面的情况下,在电子装置能够响应用户输入的通话请求之后,比如,点击通话接听键,电子装置使用预设音量接听通话,即在接听电话的时候,通话音量为预设音量,其中,预设音量为用户预先设定的通话音量。
当电子装置来电时,即电话铃声或者振动提醒响起时,电子装置能够检测到,并在屏幕上显示来电界面。而用户在来电界面内点击接听键,以实现电子装置当前的SIM卡的号码与来电号码建立通话连接。
在电子装置内存储有应用程序运行状态表,该表内包括当前电子装置所安装的所有应用程序的标识和每个应用程序的标识对应的状态,例如,如下表1所示:
表1
应用程序的标识 | 状态 | 时间点 |
APP1 | 前台运行状态 | 2017/11/3/13:20 |
APP2 | 后台运行状态 | 2017/11/4/14:10 |
APP3 | 未运行状态 | 2017/11/5/8:20 |
APP4 | 后台运行状态 | 2017/11/5/10:03 |
APP5 | 后台运行状态 | 2017/11/4/9:18 |
上述表1中,APP1为应用程序的标识,可以是应用程序的名称或者包名等用于指代应用程序身份的内容,对应的时间点为该应用程序切换到所对应的状态时的时间点,例如,表1中的APP1的时间点,标识在2017年 11月3日13点20这个时间点,APP1在电子装置的屏幕上运行,即切换至前台运行状态。
其中,应用程序的状态包括前台运行状态、后台运行状态和未运行状态。前台运行状态,是指应用程序在屏幕上由界面运行,用户能够通过界面与该应用程序互动,例如,输入执行指令或由界面观察到一些信息等。后台运行状态,是指应用程序在系统的资源管理器里运行,但是一般没有界面。而未运行状态是指该应用程序未启动,即不处于前台运行状态,也不处于后台运行状态。
则通话接听界面对应的APP为通话应用,在确定了通话应用在前台运行之后,就能够确定通话应用当前所显示的界面,如果是通话接听界面,则执行获取所述摄像头采集用户的人脸图像的操作。
在电子装置显示通话接听界面时,用户往往需要观察该界面上的来电用户的姓名,因此,可能会将人的脸部对应屏幕,也就是会进入前置摄像头的采集范围内。则当电子装置的屏幕显示通话接听界面时,则开启摄像头,其中,摄像头可以是与屏幕在同一面的摄像头,例如,前置摄像头。
另外,为了避免未采集人脸的时候就执行后续操作,则当所述屏幕显示通话接听界面时,获取所述摄像头采集用户的图像,判断所述摄像头采集的图像内是否包括人脸图像;若包括人脸图像,则执行S302操作。
具体地,摄像头采集的图像为二维图像,通过查找该图像内是否有人脸五官特征点,能够确定是否采集到人脸图像,如果采集到,则将所采集的人脸图像发送给移动终端的处理器,以使处理器能够对人脸图像进行分析并执行屏幕解锁操作。作为另一种实施方式,摄像头包括结构光,则根据结构光所采集的三维信息,确定是否存在人脸三维信息,如果存在,则将所采集的图像发送给移动终端的处理器。
另外,如果所述摄像头采集的图像内不包括人脸图像,则返回继续执行判断所述摄像头采集的图像内是否包括人脸图像的操作,还可以是,发出人脸采集提醒信息,以提醒用户使用所述摄像头采集人脸图像。
S302:基于所述人脸图像确定振动参数。
作为一种实施方式,可以是确定所述人脸图像对应的身份信息,再基于预设的身份信息与振动参数的第一对应关系,查找所述摄像头采集的人脸图像对应的振动参数。具体地,对人脸图像分析以获取特征信息,其中,特征信息可以是五官或者脸型轮廓等,基于该特征信息确定身份信息。
另外,上述的对应关系可以是基于用户而设定的,也可以是,记录每个用户在使用电子装置振动发声的时候所使用的振动参数,例如,记录在每个用户的身份信息对应的振动参数记录表中,在该记录表内获取用户最常使用的振动参数,作为在前述对应关系中,该身份信息对应的振动参数。
作为另一种实施方式,还可以是基于所述人脸图像确定所述用户的年龄阶段,具体地,对所获取的人脸图像信息进行人脸识别,识别出当前用户的脸部特征,系统将人脸图像进行预处理,即在图像中准确标定出人脸的位置,检测出包括人脸的轮廓,肤色,纹理,质地,色彩特征,根据不同的模式特征如直方图特征、颜色特征、模板特征、结构特征及Haar特征等把上述脸部特征中有用的信息挑出来,分析出当前用户的年龄阶段。例如,使用视觉特征、像素统计特征、人脸图像变换系数特征、人脸图像代数特征等,基于知识的表征方法或基于代数特征或统计学习的表征方法针对人脸的某些特征进行特征建模,并根据特征判断当前使用移动终端用户所属年龄类别。
其中,年龄阶段可以包括儿童阶段、少年阶段、青年阶段、中年阶段和老年阶段等,也可以是从10岁开始,每10岁划分一个年龄段,还可以是,指划分两个年龄段,即老年阶段和非老年阶段。而每个年龄阶段对振动发声的要求可能不同,例如,老年阶段需要声音高一些。
根据所述年龄阶段确定所述振动参数,具体地,可以是电子装置内预先设定年龄阶段与振动参数的第二对应关系,该第二对应关系包括多个年龄阶段和每个年龄阶段对应的振动参数,具体地,可以是如表2所示:
表2
年龄阶段 | 振动参数 |
青年阶段 | 第一振动参数 |
中年阶段 | 第二振动参数 |
老年阶段 | 第三振动参数 |
则根据该表,就能够获取到不同的年龄阶段对应的振动参数,作为一种实施方式,振动参数是可以量化的,例如,振动参数包括振动频率和振动强度,该振动频率和振动强度都可以由具体的数值表示。
则基于大数据的考虑,该表2所示的第二对应关系可以由网络上下载,具体地,设置有数据服务器,电子装置与该数据服务器连接,并且还有多个电子装置与该数据服务器连接,而每个电子装置所设定的年龄阶段与振动参数的第二对应关系都能够上传到数据服务器,并且由数据服务器将所有的第二对应关系整合,并且,该第二对应关系可以由用户更改,例如,可以是根据用户的进行更改,作为一种实施方式,用户在使用的时候,电子装置为该用户设置了振动参数,则用户通过调整音量键等方式更改了该振动参数,则同时更新该电子装置内的第二对应关系中,该用户的年龄阶段对应的振动参数。
示例性地,数据服务器连接了三个电子装置,分别为第一电子装置、第二电子装置和第三电子装置。则用户在对每个电子装置配置第二对应关系的时候,第一电子装置内,老年阶段对应的振动参数为音量90,第二电子装置内,老年阶段对应的振动参数为音量80,第三电子装置内,老年阶段对应的振动参数为音量100。则三个电子装置将各自的第二对应关系上传到数据服务器,则数据服务器所获取到的老年阶段对应的振动参数为音量为90、80和100,则可以选择所有音量的平均值,即音量90,并同步更新到每个电子装置,则所有的电子装置内,老年阶段对应的振动参数均为音量90,则一旦某个电子装置内的第二对应关系被修改,则该电子装置将更新后的第二对应关系上传至数据服务器,则数据服务器重新获取第二对应关系,并将调整后的第二对应关系同步更新到每个电子装置内。
作为一种实施方式,振动参数为振动强度,在所述对应关系中,所述年龄阶段与所述振动强度正相关。其中,正相关表示,年龄阶段越大,则振动强度越大,例如,老年阶段对应的振动强度大于青年阶段的振动强度。
S303:获取所述用户基于所述通话接听界面输入的振动发声请求。
其中,振动发声请求为用户指示移动终端,需要控制屏幕振动而发声的信息。作为一种实施方式,振动发声请求可以是提醒信息、也可以是语音播放请求。
其中,提醒信息包括通话提醒信息、短信提醒信息以及闹铃提醒信息等用于提醒用户某些事件已经触发的信息。例如,通话提醒信息用于提醒用户当前有来电,则可以是在获取到提醒信息之后,没有发声之前,电子装置进入振动发声模式,即此时处于等待发声的状态下。然后,在获取到振动参数之后,再控制屏幕或者后盖中的至少一个振动发声,从而发出用于提醒的声音,例如,来电铃声。
作为另一种实施方式,发声请求可以是在移动终端发声的过程中,每次播放语音的请求。则本申请实施例的方法,用于在移动终端发声的过程中,采集环境噪声而调整振动部件的振动,进而来调整发声。
例如,用户点击某个视频APP的播放按钮,且电子装置当前未处于静音状态,则检测到该播放按钮被触发时,就进入屏幕或者后盖中的至少一个振动发声模式,通过屏幕的振动播放视频的语音。
作为一种实施方式,通话界面内设置有接听按键,如图4所示,在该界面内设置有接听键,用户点击该接听键就输入了振动发声请求。
需要说明的是,S302和S303的步骤不限定先后顺序,图3所示的仅仅是一种实施方式,还可以是,先执行S303再执行S302。具体地,则当所述屏幕显示通话接听界面时,获取所述摄像头采集用户的人脸图像之后,先不执行基于人脸图像确定振动参数的操作,等到获取到用户基于所述通话接听界面输入的振动发声请求之后,再执行基于人脸图像确定振动参数的操作。
S304:响应所述振动发声请求,根据所述振动参数控制所述激励器,以驱动所述屏幕振动发声。
电子装置的驱动电路根据该设置后的振动参数调整驱动信号,例如,设置后的振动参数为降低后的振动幅度,则驱动电路降低驱动信号的高电平的电平值,再例如,设置后的振动参数为降低后的振动频率,则驱动电路降低驱动信号的频率。
驱动电路将驱动信号发送至激励器,则激励器根据调整后的驱动信号控制振动部件振动,从而能够调整振动部件的振动频率或幅度等参数,从而能够改变所发出的声音的强度或频率等声音特征信息。
而驱动电路内设置有时钟源,例如是晶振,还设有振荡器,该振荡器能够设置振动频率,例如,对晶振的振荡频率进行倍频或者分频的方式设置不同的振动频率,由此,就可以根据每个所述音频数据的振动频率控制该音频数据对应的目标激励器。而驱动电路内还设置有增益装置,通过该增益装置能够调整输出的电信号的幅度值,从而就能够调整振动强度。
另外,考虑到用户在私人接听的模式下,也就是类似听筒模式,用户需要将耳朵贴近发声位置才能够听到声音,为了提高用户的体验度,可以根据所接触的位置振动发声,具体地,请参阅图5,本申请实施例提供了一种发声控制方法,用于解决电子装置在屏幕振动发声的时候,未针对不同的用户而设定不同的振动参数的缺陷,具体地,该方法包括:S501至S507。
S501:当所述屏幕显示通话接听界面时,获取所述摄像头采集用户的人脸图像。
S502:基于所述人脸图像确定振动参数。
S503:获取所述用户基于所述通话接听界面输入的振动发声请求。
S504:检测所述振动发声请求对应的通话模式。
电子装置的屏幕用于振动发声,且适用于电子装置的非耳机通话模式,其中,非耳机通话模式包括外放模式和私人接听模式,用于播放电子装置在通话、播放视频等情况下发出的语音信号。
其中,所述外放模式的最大输出音量大于所述私人接听模式的最大输出音量。
在私人接听模式下,用户需要将耳部贴近屏幕的某个区域才能够较清楚的听清屏幕发出的声音,而外放模式,所发出的声音比较大,而且用户可以不用将耳部贴近屏幕收听声音,其最大输出音量大于私人接听模式下的最大输出音量,并且,私人接听模式下屏幕的振动区域小于外放模式下的屏幕振动区域。
则在接收到振动发声请求的时候,判断电子装置是否连接有耳机,具体地,可以通过查看电子装置的耳机连接孔的状态来判断,例如,当电子装置的耳机连接孔连接耳机时,返回第一状态值,当连接孔内的耳机被拔出时,返回第二状态值,通过检测第一状态值和第二状态值就能够确定当前电子装置是否连接有耳机。具体地,android系统在耳机插入和拔出的时候都会发送广播,所以,电子装置监听该广播,就能够确定当前电子装置是否连接有耳机。由此,就能够确定电子装置是否处于耳机通话模式。
进一步地,在确定电子装置未处于耳机通话模式时,还可以确定是否处于私人接听模式,具体地,可以通过上述的电话管理器所检测到的通话状态来确定。
另外,用户在通话接听界面点击接听键时,屏幕显示的界面为通话状态界面,如图6所示,在该界面内设置有免提按键,用户点击该免提按键,则显示出选中状态,则电子装置处于外放模式,而在未选中的时候,且未插入耳机的时候,则表示电子装置的通话模式为私人接听模式。
S505:若所述振动发声请求对应的通话模式为私人接听模式,则检测所述屏幕被所述用户的耳部接触的区域,作为私人接听振动发声区域。
然后,检测屏幕被所述用户的耳部接触的区域,具体地,由于屏幕设置有触摸屏,则在人耳贴在屏幕上的时候,屏幕能够检测到被按压的区域,由此就能够检测到是否有人耳贴合在屏幕上,则考虑到用户在使用听筒模式的时候,都会将耳部贴在屏幕上,则获取所述屏幕检测到的触摸区域;判断所述触摸区域是否满足预设标准;若满足,则确定该触摸区域为屏幕被所述用户的耳部接触的区域。
检测屏幕上被按压的所有的触摸点,再根据所有的触摸点整合成触摸区域。再将触摸区域与预设标准比对,其中,预设标准可以是预先获取的人耳与屏幕接触时的所有触摸点的分布规律,也可以是预设触摸区域,该预设触摸区域与人耳触摸屏幕时的区域匹配。
具体地,判断所述触摸区域是否满足预设标准的实施方式可以是,获取所述触摸区域的轮廓线。具体地,在获取到屏幕上被按压的所有的触摸点之后,将所有的触摸点拟合成一个连续的曲线从而获得轮廓线。判断所述轮廓线与预设的人耳轮廓线是否匹配,其中,预设的人耳轮廓线可以是基于大数据而获取的大部分人耳的轮廓线,也可以是预先采集的用户的耳部贴在屏幕上的轮廓线,从而获取到预设的人耳轮廓线。如果触摸区域的轮廓线与预设的人耳轮廓线匹配,则表示屏幕上接触有人耳,即判定所述触摸区域满足预设标准,如果触摸区域的轮廓线与预设的人耳轮廓线不匹配,则表示屏幕上未接触有人耳,即判定所述触摸区域不满足预设标准。
由此,就能够确定屏幕被所述用户的耳部接触的区域,即私人接听振动发声区域。
S506:根据每个所述激励器对应的所述屏幕的位置,确定所述私人接听振动发声区域对应的私人接听激励器。
电子装置的屏幕上对应多个激励器,则电子装置能够记录每个电子装置的位置,在获取到私人接听振动发声区域为位置之后,就能够确定私人接听振动发声区域对应的私人接听激励器。
S507:根据所述振动参数控制所述私人接听激励器,以驱动所述私人接听振动发声区域振动发声。
由此,就能够在私人接听振动发声区域振动发声,并且,用户的耳部接触到哪里,哪里发声,提高用户的体验度。
另外,考虑到用户在外放模式下,用户会对准麦克风输入声音,具体地,请参阅图7,本申请实施例提供了一种发声控制方法,用于解决电子装置在屏幕振动发声的时候,未针对不同的用户而设定不同的振动参数的缺陷,具体地,该方法包括:S701至S707。
S701:当所述屏幕显示通话接听界面时,获取所述摄像头采集用户的人脸图像。
S702:基于所述人脸图像确定振动参数。
S703:获取所述用户基于所述通话接听界面输入的振动发声请求。
S704:检测所述振动发声请求对应的通话模式。
S705:若所述振动发声请求对应的通话模式为外放模式,则根据所述音频采集器的位置确定所述屏幕的外放振动区域。
其中,所述外放模式的最大输出音量大于所述私人接听模式的最大输出音量。
其中,音频采集器用于用户输入语音信号,例如,可以是麦克风。确定电子装置上设置音频采集器的位置,将屏幕上靠近该音频采集器的位置的区域作为外放振动区域。作为一种实施方式,音频采集器的位置为电子装置的正面的底部,则外放振动区域可以是屏幕的底部区域。具体地,所述屏幕包括顶部区域、中部区域和底部区域,其中,以屏幕正对用户的角度,由上至下依次为顶部区域、中部区域和底部区域,则,顶部区域靠近摄像头,而底部区域与顶部区域相对,靠近home键和音频采集器。
S706:根据每个所述激励器对应的所述屏幕的位置,确定所述外放振动区域对应的外放激励器。
将所述外放振动区域对应的激励器作为备选激励器,由备选激励器中选择一个或多个激励器作为外放激励器,其中,外放激励器可以是由从备选激励器随机选择的。
作为另一种实施方式,也可以是根据每个激励器的使用记录而选择外放激励器,具体地,获取所述备选激励器每个激励器对应预设时间段内的使用记录。将所述备选激励器中,使用记录满足预设标准的激励器作为外放激励器。
其中,预设时间段为用户根据需求而设定的时间段,例如,一个周内或则一个月内。另外,电子装置内每个激励器都有对应的标识,而在电子装置振动发声的时候,每个激励器的使用记录都会被记录下来,其中,使用记录包括每一次的使用时间点和使用时间长度,根据每次的使用时间点能够获取在预设时间段内的使用次数,而根据每次使用时间长度能够获取在预设时间段内的使用总时长。
具体地,可以根据使用次数来确定外放激励器。作为一种实施方式,获取备选激励中,每个激励器在预设时间段内的使用次数,将使用次数最多的激励器作为使用记录满足预设标准的激励器,从而该激励器作为外放激励器,由此,就能够使得所选择的激励器更符合用户的使用习惯,找到使用次数较多的激励器作为外放激励器,当然,也可以是将使用次数最少的激励器作为使用记录满足预设标准的激励器,从而该激励器作为外放激励器,由此,能够将使用次数较少的激励器作为外放激励器,从而避免激励器过度使用而损坏。
作为另一种实施方式,还可以是根据预设时间段内的使用总时长来确定外放激励器。具体地,在备选激励器中,选择使用总时长最大的激励器作为使用记录满足预设标准的激励器,从而该激励器作为外放激励器,由此,就能够使得所选择的激励器更符合用户的使用习惯,找到使用时间长度最久的激励器作为外放激励器,当然,也可以是将使用总时长最少的激励器作为使用记录满足预设标准的激励器,从而该激励器作为外放激励器,由此,能够将使用总时长较少的激励器作为外放激励器,从而避免激励器过度使用而损坏。
作为又一种实施方式,可以是根据使用次数和使用总时长确定每个激励器的使用频率,具体地,可以是将每个激励器的使用次数除以使用总时长,以求得使用频率。具体地,在备选激励器中,选择使用频率最大的激励器作为使用记录满足预设标准的激励器,从而该激励器作为外放激励器,由此,就能够使得所选择的激励器更符合用户的使用习惯,找到使用时间长度最久的激励器作为外放激励器,当然,也可以是将使用频率最小的激励器作为使用记录满足预设标准的激励器,从而该激励器作为外放激励器,由此,能够将使用总时长较少的激励器作为外放激励器,从而避免激励器过度使用而损坏。
由此,使用次数、使用总时长或使用频率确定外放激励器。但是,考虑到只使用一个维度的话,由可能会找到多个相同指标的激励器,例如,以外放激励器为例,选择使用次数最多的激励器的时候,可能会选择到多个相同的使用次数的激励器,而如果用户只想选择一个激励器作为外放激励器的话,则需要从多个维度上去筛选。
具体地,以外放激励器为例,可以先根据使用次数、使用总时长或使用频率这三个要素中选择一个要素,作为第一要素,根据第一要素确定外放激励器,如果第一要素确定了多个激励器,例如,第一要素为使用次数,找到使用次数最多或最少的激励器为多个,则用户需要再从这多个激励器中确定出一个激励器,作为外放激励器。则可以从使用次数、使用总时长或使用频率这三个要素中除去第一要素的剩余要素中选择一个要素,作为第二要素,同理,如果第二要素筛选后,还是剩余多个激励器,则再使用第三要素。
在一种实施例中,以外放激励器为例,先在备选激励器中,选择使用次数最多的激励器,作为第一筛选激励器,确定第一筛选激励器中所包含的激励器的个数,如果大于1,则在第一筛选激励器中选择使用总时长最大的激励器,作为第二筛选激励器,若第一筛选激励器中所包含的激励器的个数等于1,则将第一筛选激励器作为外放激励器。
如果第二筛选激励器中所包含的激励器的个数还是大于1,则在第二筛选激励器中选择使用频率最大的激励器,作为第三筛选激励器,若第二筛选激励器中所包含的激励器的个数等于1,则将第二筛选激励器作为外放激励器。
如果第三筛选激励器中所包含的激励器的个数还是大于1,则确定每个激励器在屏幕上的分布位置,选择分布位置最靠近对于区域的边框的激励器作为外放激励器,如果第三筛选激励器中所包含的激励器的个数等于1,则将第三筛选激励器作为外放激励器。其中,以外放激励器为例,第三筛选激励器对应的区域为顶部区域,则将最靠近顶部边框的激励器作为外放激励器,而如果是第二激励器的话,则将最靠近底部边框的激励器作为外放激励器。
S707:根据所述振动参数控制所述外放激励器,以驱动所述外放振动区域振动发声。
需要说明的是,上述步骤中未详细描述的部分,可参考前述实施例,在此不再赘述。
请参阅图8,本申请实施例提供了一种发声控制装置800,具体地,该装置包括:第一获取单元801、确定单元802、第二获取单元803和驱动单元804。
第一获取单元801,用于当所述屏幕显示通话接听界面时,获取所述摄像头采集用户的人脸图像。
确定单元802,同于基于所述人脸图像确定振动参数。
第二获取单元803,用于获取所述用户基于所述通话接听界面输入的振动发声请求。
驱动单元804,用于响应所述振动发声请求,根据所述振动参数控制所述激励器,以驱动所述屏幕振动发声。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
请参阅图9,示出了本申请实施例提供的电子装置,包括:包括屏幕 120、多个用于驱动所述屏幕120发声的激励器131,所述多个激励器131 对应所述屏幕120的不同位置。电子装置100还包括:处理器102、驱动电路901、激励器131和摄像头132。
处理器102,用于当所述屏幕120显示通话接听界面时,获取所述摄像头132采集用户的人脸图像,基于所述人脸图像确定振动参数,获取所述用户基于所述通话接听界面输入的振动发声请求,将所述振动参数发送至所述驱动电路。
所述驱动电路901,用于响应所述振动发声请求,根据所述振动参数控制所述激励器131,以驱动所述屏幕振动发声。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
请参阅图10,示出了本申请实施例提供的电子装置100,包括:存储器104和处理器102,所述存储器104与所述处理器102耦合;所述存储器 104存储指令,当所述指令由所述处理器102执行时以使所述处理器102执行上述方法。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
请参阅图1和2,基于上述的方法和装置,本申请实施例还提供一种电子装置100,示例性的,电子装置100可以为移动或便携式并执行无线通信的各种类型的计算机系统设备中的任何一种(图1和2中只示例性的示出了一种形态)。具体的,电子装置100可以为移动电话或智能电话(例如,基于iPhone TM,基于Android TM的电话),便携式游戏设备(例如Nintendo DS TM,PlayStation Portable TM,Gameboy Advance TM,iPhone TM)、膝上型电脑、PDA、便携式互联网设备、音乐播放器以及数据存储设备,其他手持设备以及诸如手表、耳机、吊坠、耳机等,电子装置100还可以为其他的可穿戴设备(例如,诸如电子眼镜、电子衣服、电子手镯、电子项链、电子纹身、电子设备或智能手表的头戴式设备(HMD))。
电子装置100还可以是多个电子设备中的任何一个,多个电子设备包括但不限于蜂窝电话、智能电话、其他无线通信设备、个人数字助理、音频播放器、其他媒体播放器、音乐记录器、录像机、照相机、其他媒体记录器、收音机、医疗设备、车辆运输仪器、计算器、可编程遥控器、寻呼机、膝上型计算机、台式计算机、打印机、上网本电脑、个人数字助理(PDA)、便携式多媒体播放器(PMP)、运动图像专家组(MPEG-1或MPEG-2)音频层 3(MP3)播放器,便携式医疗设备以及数码相机及其组合。
在一些情况下,电子装置100可以执行多种功能(例如,播放音乐,显示视频,存储图片以及接收和发送电话呼叫)。如果需要,电子装置100 可以是诸如蜂窝电话、媒体播放器、其他手持设备、腕表设备、吊坠设备、听筒设备或其他紧凑型便携式设备的便携式设备。
上述电子装置100其包括电子本体部10,所述电子本体部10包括壳体 12及设置在所述壳体12上的主显示屏120。所述壳体12可采用金属、如钢材、铝合金制成。本实施例中,所述主显示屏120通常包括显示面板111,也可包括用于响应对所述显示面板111进行触控操作的电路等。所述显示面板111可以为一个液晶显示面板(Liquid Crystal Display,LCD),在一些实施例中,所述显示面板111同时为一个触摸屏109。
请同时参阅图11,在实际的应用场景中,所述电子装置100可作为智能手机终端进行使用,在这种情况下所述电子本体部10通常还包括一个或多个(图中仅示出一个)处理器102、存储器104、RF(Radio Frequency,射频)模块106、音频电路110、传感器114、输入模块118、电源模块122。本领域普通技术人员可以理解,图11所示的结构仅为示意,其并不对所述电子本体部10的结构造成限定。例如,所述电子本体部10还可包括比图 11中所示更多或者更少的组件,或者具有与图1和2所示不同的配置。
本领域普通技术人员可以理解,相对于所述处理器102来说,所有其他的组件均属于外设,所述处理器102与这些外设之间通过多个外设接口 124相耦合。所述外设接口124可基于以下标准实现:通用异步接收/发送装置(Universal Asynchronous Receiver/Transmitter,UART)、通用输入/输出(General Purpose Input Output,GPIO)、串行外设接口(Serial Peripheral Interface,SPI)、内部集成电路(Inter-Integrated Circuit,I2C),但不并限于上述标准。在一些实例中,所述外设接口124可仅包括总线;在另一些实例中,所述外设接口124还可包括其他元件,如一个或者多个控制器,例如用于连接所述显示面板111的显示控制器或者用于连接存储器的存储控制器。此外,这些控制器还可以从所述外设接口124中脱离出来,而集成于所述处理器102内或者相应的外设内。
所述存储器104可用于存储软件程序以及模块,所述处理器102通过运行存储在所述存储器104内的软件程序以及模块,从而执行各种功能应用以及数据处理。所述存储器104可包括高速随机存储器,还可包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,所述存储器104可进一步包括相对于所述处理器102远程设置的存储器,这些远程存储器可以通过网络连接至所述电子本体部10或所述主显示屏120。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
所述RF模块106用于接收以及发送电磁波,实现电磁波与电信号的相互转换,从而与通讯网络或者其他设备进行通讯。所述RF模块106可包括各种现有的用于执行这些功能的电路元件,例如,天线、射频收发器、数字信号处理器、加密/解密芯片、用户身份模块(SIM)卡、存储器等等。所述RF模块106可与各种网络如互联网、企业内部网、无线网络进行通讯或者通过无线网络与其他设备进行通讯。上述的无线网络可包括蜂窝式电话网、无线局域网或者城域网。上述的无线网络可以使用各种通信标准、协议及技术,包括但并不限于全球移动通信系统(Global System for Mobile Communication,GSM)、增强型移动通信技术(Enhanced Data GSM Environment,EDGE),宽带码分多址技术(wideband codedivision multiple access,W-CDMA),码分多址技术(Code division access,CDMA)、时分多址技术(time division multiple access,TDMA),无线保真技术 (Wireless,Fidelity,WiFi)(如美国电气和电子工程师协会标准IEEE 802.10A,IEEE 802.11b,IEEE802.11g和/或IEEE 802.11n)、网络电话(Voice over internet protocal,VoIP)、全球微波互联接入(Worldwide Interoperability for Microwave Access,Wi-Max)、其他用于邮件、即时通讯及短消息的协议,以及任何其他合适的通讯协议,甚至可包括那些当前仍未被开发出来的协议。
音频电路110、声音插孔103、麦克风105共同提供用户与所述电子本体部10或所述主显示屏120之间的音频接口。具体地,所述音频电路110 从所述处理器102处接收声音数据,将声音数据转换为电信号,将电信号传输至激励器131,则音频电路110可以作为上述的驱动电路使用。该电信号作为激励器131的驱动信号,则所述激励器131根据电信号控制振动部件的振动,从而将声音数据转换为人耳能听到的声波。所述音频电路110 还从所述麦克风105处接收电信号,将电信号转换为声音数据,并将声音数据传输给所述处理器102以进行进一步的处理。音频数据可以从所述存储器104处或者通过所述RF模块106获取。此外,音频数据也可以存储至所述存储器104中或者通过所述RF模块106进行发送。
所述传感器114设置在所述电子本体部10内或所述主显示屏120内,所述传感器114的实例包括但并不限于:光传感器、压力传感器、加速度传感器114F、接近传感器114J以及其他传感器。
具体地,所述光传感器可包括光线传感器。光线传感器能够根据移动终端所处环境的光线来调节屏幕的亮度。例如,在光线充足的地方屏幕会很亮,相反,如果在暗处,屏幕较暗(与屏幕亮度的设置也有关系),这样既保护了眼睛又节省了电量。
其中,压力传感器可以检测由按压在电子装置100产生的压力的传感器。即,压力传感器检测由用户和移动终端之间的接触或按压产生的压力,例如由用户的耳朵与移动终端之间的接触或按压产生的压力。因此,压力传感器可以用来确定在用户与电子装置100之间是否发生了接触或者按压,以及压力的大小。
请再次参阅图1和2,具体地在图1和2所示的实施例中,所述光线传感器及所述压力传感器邻近所述显示面板111设置。所述光线传感器可在有物体靠近所述主显示屏120时,例如所述电子本体部10移动到耳边时,所述处理器102关闭显示输出。
作为运动传感器的一种,加速度传感器114F可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别所述电子装置100姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等。另外,所述电子本体部10还可配置陀螺仪、气压计、湿度计、温度计等其他传感器,在此不再赘述,
本实施例中,所述输入模块118可包括设置在所述主显示屏120上的所述触摸屏109,所述触摸屏109可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在所述触摸屏109上或在所述触摸屏109附近的操作),并根据预先设定的程序驱动相应的连接装置。可选的,所述触摸屏109可包括触摸检测装置和触摸控制器。其中,所述触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给所述触摸控制器;所述触摸控制器从所述触摸检测装置上接收触摸信息,并将该触摸信息转换成触点坐标,再送给所述处理器102,并能接收所述处理器102发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现所述触摸屏109的触摸检测功能。
所述主显示屏120用于显示由用户输入的信息、提供给用户的信息以及所述电子本体部10的各种图形用户接口,这些图形用户接口可以由图形、文本、图标、数字、视频和其任意组合来构成,在一个实例中,所述触摸屏109可设置于所述显示面板111上从而与所述显示面板111构成一个整体。
所述电源模块122用于向所述处理器102以及其他各组件提供电力供应。具体地,所述电源模块122可包括电源管理系统、一个或多个电源(如电池或者交流电)、充电电路、电源失效检测电路、逆变器、电源状态指示灯以及其他任意与所述电子本体部10或所述主显示屏120内电力的生成、管理及分布相关的组件。
所述电子装置100还包括定位器119,所述定位器119用于确定所述电子装置100所处的实际位置。本实施例中,所述定位器119采用定位服务来实现所述电子装置100的定位,所述定位服务,应当理解为通过特定的定位技术来获取所述电子装置100的位置信息(如经纬度坐标),在电子地图上标出被定位对象的位置的技术或服务。
电子装置100还包括摄像头132,摄像头132可以是能够在其视场内捕获物体的图像的任何装置。摄像头132可以包括图像传感器。图像传感器可以是CMOS(ComplementaryMetal Oxide Semiconductor,互补金属氧化物半导体)传感器,或者CCD(Charge-coupledDevice,电荷耦合元件) 传感器等等。摄像头132可以与处理器102通信并且将图像数据发送到处理器102。摄像头132还可以从处理器102接收设置用于捕获图像的参数的命令信号。其中用于捕获图像的示例性参数可以包括用于设置曝光时间、孔径、图像分辨率/尺寸,视场(例如,放大和缩小)和/或图像的颜色空间(例如,彩色或黑白色)和/或用于执行相机的其他类型的已知功能的参数。处理器102可以获取到摄像头132采集的图像,可以对图像进行处理,例如,图像内的特征提取或者对原始图像进行图像处理,以排除其他物体所形成的光斑状的图形的影响。摄像头132和处理器102可以经由网络连接,总线或其他类型的数据链路(例如,硬线,无线(例如Bluetooth TM) 或本领域已知的其他连接)来连接。
综上所述,本申请实施例提供的发声控制方法、装置、电子装置及计算机可读介质,在接听电话的时候,接听界面下采集到用户的人脸图像,根据人脸图像确定了振动参数,在根据该振动参数振动屏幕发声。因此,不仅可以通过屏幕或后盖的振动方式来发声,可以避免在电子装置上设置出音孔,还能够通话接听的时候,根据用户而控制屏幕振动发声,能够提高用户体验度。
应当理解,本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。此外,在本申请各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。尽管上面已经示出和描述了本申请的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本申请的限制,本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。
最后应说明的是:以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不驱使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。
Claims (9)
1.一种发声控制方法,其特征在于,应用于电子装置,所述电子装置包括摄像头、屏幕和多个用于驱动所述屏幕发声的激励器,所述多个激励器对应所述屏幕的不同位置,所述电子装置还包括音频采集器,所述音频采集器与所述屏幕设置在所述电子装置的同一面,所述方法包括:
当所述屏幕显示通话接听界面时,获取所述摄像头采集的用户的图像;
判断所述摄像头采集的图像内是否包括人脸图像;
若包括人脸图像,检测是否获取到用户基于所述通话接听界面的接听键输入的振动发声请求;
若接收到所述振动发声请求,则基于所述人脸图像确定振动参数;
响应所述振动发声请求,检测所述振动发声请求对应的通话模式;
若所述振动发声请求对应的通话模式为外放模式,则确定所述音频采集器在所述屏幕上的位置;
将所述屏幕上靠近所述音频采集器的位置的区域作为外放振动区域;
根据每个所述激励器对应的所述屏幕的位置,确定所述外放振动区域对应的外放激励器;
根据所述振动参数控制所述外放激励器,以驱动所述外放振动区域振动发声。
2.根据权利要求1所述的方法,其特征在于,所述基于所述人脸图像确定振动参数,包括:
基于所述人脸图像确定所述用户的年龄阶段;
根据所述年龄阶段确定所述振动参数。
3.根据权利要求2所述的方法,其特征在于,所述根据所述年龄阶段确定所述振动参数,包括:
根据预设的年龄阶段与振动参数的对应关系,获取所述用户的年龄阶段对应的振动参数。
4.根据权利要求3所述的方法,其特征在于,所述振动参数为振动强度,在所述对应关系中,所述年龄阶段与所述振动强度正相关。
5.根据权利要求1所述的方法,其特征在于,还包括:
若所述振动发声请求对应的通话模式为私人接听模式,则检测所述屏幕被所述用户的耳部接触的区域,作为私人接听振动发声区域;
根据每个所述激励器对应的所述屏幕的位置,确定所述私人接听振动发声区域对应的私人接听激励器;
根据所述振动参数控制所述私人接听激励器,以驱动所述私人接听振动发声区域振动发声。
6.一种发声控制装置,其特征在于,应用于电子装置,所述电子装置包括摄像头、屏幕和多个用于驱动所述屏幕发声的激励器,所述多个激励器对应所述屏幕的不同位置,所述电子装置还包括音频采集器,所述音频采集器与所述屏幕设置在所述电子装置的同一面,所述发声控制装置包括:
第一获取单元,用于当所述屏幕显示通话接听界面时,获取所述摄像头采集的用户的图像,判断所述摄像头采集的图像内是否包括人脸图像;
确定单元,用于若包括人脸图像,检测是否获取到用户基于所述通话接听界面的接听键输入的振动发声请求;
第二获取单元,用于若接收到所述振动发声请求,则基于所述人脸图像确定振动参数;
驱动单元,用于响应所述振动发声请求,检测所述振动发声请求对应的通话模式;若所述振动发声请求对应的通话模式为外放模式,则确定所述音频采集器在所述屏幕上的位置;将所述屏幕上靠近所述音频采集器的位置的区域作为外放振动区域;根据每个所述激励器对应的所述屏幕的位置,确定所述外放振动区域对应的外放激励器;根据所述振动参数控制所述外放激励器,以驱动所述外放振动区域振动发声。
7.一种电子装置,其特征在于,包括摄像头、屏幕和多个用于驱动所述屏幕发声的激励器,所述多个激励器对应所述屏幕的不同位置;所述电子装置还包括音频采集器,所述音频采集器与所述屏幕设置在所述电子装置的同一面,所述电子装置还包括:处理器和驱动电路,所述驱动电路与所述处理器和所述激励器连接;
处理器,用于当所述屏幕显示通话接听界面时,获取所述摄像头采集的用户的图像,判断所述摄像头采集的图像内是否包括人脸图像,若包括人脸图像,检测是否获取到用户基于所述通话接听界面的接听键输入的振动发声请求,若接收到所述振动发声请求,则基于所述人脸图像确定振动参数,将所述振动参数发送至所述驱动电路;
所述驱动电路,用于响应所述振动发声请求,检测所述振动发声请求对应的通话模式;若所述振动发声请求对应的通话模式为外放模式,则确定所述音频采集器在所述屏幕上的位置;将所述屏幕上靠近所述音频采集器的位置的区域作为外放振动区域;根据每个所述激励器对应的所述屏幕的位置,确定所述外放振动区域对应的外放激励器;根据所述振动参数控制所述外放激励器,以驱动所述外放振动区域振动发声。
8.一种电子装置,其特征在于,包括摄像头、屏幕和多个用于驱动所述屏幕发声的激励器,所述多个激励器对应所述屏幕的不同位置;还包括存储器和处理器,所述存储器与所述处理器耦合;所述存储器存储指令,当所述指令由所述处理器执行时以使所述处理器执行所述权利要求1-5任一项所述方法。
9.一种具有处理器可执行的程序代码的计算机可读介质,其特征在于,所述程序代码使所述处理器执行所述权利要求1-5任一项所述方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810746884.3A CN108900688B (zh) | 2018-07-09 | 2018-07-09 | 发声控制方法、装置、电子装置及计算机可读介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810746884.3A CN108900688B (zh) | 2018-07-09 | 2018-07-09 | 发声控制方法、装置、电子装置及计算机可读介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108900688A CN108900688A (zh) | 2018-11-27 |
CN108900688B true CN108900688B (zh) | 2021-04-13 |
Family
ID=64348268
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810746884.3A Expired - Fee Related CN108900688B (zh) | 2018-07-09 | 2018-07-09 | 发声控制方法、装置、电子装置及计算机可读介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108900688B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111698358B (zh) * | 2020-06-09 | 2021-07-16 | Oppo广东移动通信有限公司 | 电子设备 |
CN112346561B (zh) * | 2020-10-15 | 2022-10-25 | 瑞声新能源发展(常州)有限公司科教城分公司 | 一种振动驱动方法和系统、振动设备以及存储介质 |
CN112637422B (zh) * | 2020-12-31 | 2022-02-22 | Oppo广东移动通信有限公司 | 振动调节方法、装置、存储介质以及电子设备 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103139338A (zh) * | 2013-01-22 | 2013-06-05 | 瑞声科技(南京)有限公司 | 屏幕发声控制系统、方法和移动终端 |
CN103713888A (zh) * | 2012-09-29 | 2014-04-09 | 联想(北京)有限公司 | 一种信息处理的方法及装置 |
CN103778909A (zh) * | 2014-01-10 | 2014-05-07 | 瑞声科技(南京)有限公司 | 屏幕发声系统及其控制方法 |
CN104469632A (zh) * | 2014-11-28 | 2015-03-25 | 上海华勤通讯技术有限公司 | 一种发声方法及发声装置 |
CN105282345A (zh) * | 2015-11-23 | 2016-01-27 | 小米科技有限责任公司 | 通话音量的调节方法和装置 |
CN106502329A (zh) * | 2016-10-28 | 2017-03-15 | 努比亚技术有限公司 | 一种终端设备 |
CN106856582A (zh) * | 2017-01-23 | 2017-06-16 | 瑞声科技(南京)有限公司 | 自动调整音质的方法和系统 |
CN107621800A (zh) * | 2017-10-27 | 2018-01-23 | 成都常明信息技术有限公司 | 一种基于年龄调节音量的智能语音机器人 |
CN107948874A (zh) * | 2017-11-28 | 2018-04-20 | 维沃移动通信有限公司 | 一种终端控制方法、移动终端 |
CN108156280A (zh) * | 2017-12-21 | 2018-06-12 | 广东欧珀移动通信有限公司 | 显示控制方法及相关产品 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106954143B (zh) * | 2017-03-02 | 2018-11-02 | 瑞声科技(南京)有限公司 | 手动调整音质的方法以及电子设备 |
-
2018
- 2018-07-09 CN CN201810746884.3A patent/CN108900688B/zh not_active Expired - Fee Related
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103713888A (zh) * | 2012-09-29 | 2014-04-09 | 联想(北京)有限公司 | 一种信息处理的方法及装置 |
CN103139338A (zh) * | 2013-01-22 | 2013-06-05 | 瑞声科技(南京)有限公司 | 屏幕发声控制系统、方法和移动终端 |
CN103778909A (zh) * | 2014-01-10 | 2014-05-07 | 瑞声科技(南京)有限公司 | 屏幕发声系统及其控制方法 |
CN104469632A (zh) * | 2014-11-28 | 2015-03-25 | 上海华勤通讯技术有限公司 | 一种发声方法及发声装置 |
CN105282345A (zh) * | 2015-11-23 | 2016-01-27 | 小米科技有限责任公司 | 通话音量的调节方法和装置 |
CN106502329A (zh) * | 2016-10-28 | 2017-03-15 | 努比亚技术有限公司 | 一种终端设备 |
CN106856582A (zh) * | 2017-01-23 | 2017-06-16 | 瑞声科技(南京)有限公司 | 自动调整音质的方法和系统 |
CN107621800A (zh) * | 2017-10-27 | 2018-01-23 | 成都常明信息技术有限公司 | 一种基于年龄调节音量的智能语音机器人 |
CN107948874A (zh) * | 2017-11-28 | 2018-04-20 | 维沃移动通信有限公司 | 一种终端控制方法、移动终端 |
CN108156280A (zh) * | 2017-12-21 | 2018-06-12 | 广东欧珀移动通信有限公司 | 显示控制方法及相关产品 |
Also Published As
Publication number | Publication date |
---|---|
CN108900688A (zh) | 2018-11-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109194796B (zh) | 屏幕发声方法、装置、电子装置及存储介质 | |
CN108683761B (zh) | 发声控制方法、装置、电子装置及计算机可读介质 | |
CN109062535B (zh) | 发声控制方法、装置、电子装置及计算机可读介质 | |
CN109032558B (zh) | 发声控制方法、装置、电子装置及计算机可读介质 | |
CN108881568B (zh) | 显示屏发声的方法、装置、电子装置及存储介质 | |
CN108833638B (zh) | 发声方法、装置、电子装置及存储介质 | |
CN108646971B (zh) | 屏幕发声控制方法、装置以及电子装置 | |
CN109189362B (zh) | 发声控制方法、装置、电子设备及存储介质 | |
CN109032556B (zh) | 发声控制方法、装置、电子装置以及存储介质 | |
CN108810198B (zh) | 发声控制方法、装置、电子装置及计算机可读介质 | |
CN109085985B (zh) | 发声控制方法、装置、电子装置以及存储介质 | |
CN109144460B (zh) | 发声控制方法、装置、电子装置以及存储介质 | |
CN108196815B (zh) | 一种通话声音的调节方法和移动终端 | |
CN108958632B (zh) | 发声控制方法、装置、电子设备及存储介质 | |
CN109086023B (zh) | 发声控制方法、装置、电子设备及存储介质 | |
CN108958697B (zh) | 屏幕发声控制方法、装置以及电子装置 | |
CN111343346B (zh) | 基于人机对话的来电代接方法、装置、存储介质及设备 | |
CN108900688B (zh) | 发声控制方法、装置、电子装置及计算机可读介质 | |
CN110798327B (zh) | 消息处理方法、设备及存储介质 | |
CN108810764B (zh) | 发声控制方法、装置以及电子装置 | |
CN109189360B (zh) | 屏幕发声控制方法、装置以及电子装置 | |
CN108712706B (zh) | 发声方法、装置、电子装置及存储介质 | |
CN111613213B (zh) | 音频分类的方法、装置、设备以及存储介质 | |
CN110505335B (zh) | 发声控制方法、装置、电子装置及计算机可读介质 | |
CN111857793B (zh) | 网络模型的训练方法、装置、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20210413 |