CN108881568B - 显示屏发声的方法、装置、电子装置及存储介质 - Google Patents

显示屏发声的方法、装置、电子装置及存储介质 Download PDF

Info

Publication number
CN108881568B
CN108881568B CN201810488097.3A CN201810488097A CN108881568B CN 108881568 B CN108881568 B CN 108881568B CN 201810488097 A CN201810488097 A CN 201810488097A CN 108881568 B CN108881568 B CN 108881568B
Authority
CN
China
Prior art keywords
display screen
user
area
sound
ear
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810488097.3A
Other languages
English (en)
Other versions
CN108881568A (zh
Inventor
张海平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201810488097.3A priority Critical patent/CN108881568B/zh
Publication of CN108881568A publication Critical patent/CN108881568A/zh
Application granted granted Critical
Publication of CN108881568B publication Critical patent/CN108881568B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/03—Constructional features of telephone transmitters or receivers, e.g. telephone hand-sets
    • H04M1/035—Improving the acoustic characteristics by means of constructional features of the housing, e.g. ribs, walls, resonating chambers or cavities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72433—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for voice messaging, e.g. dictaphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/12—Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • H04N2007/145—Handheld terminals

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Environmental & Geological Engineering (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Telephone Function (AREA)

Abstract

本申请实施例公开了一种显示屏发声的方法、装置、电子装置及存储介质，该方法应用于电子装置，电子装置包括显示屏、多个用于驱动显示屏发声的激励器以及多个用于监测显示屏的振动而采集声音的振动监测模块，该方法包括：在用户使用电子装置进行视频通话时，获取用户的耳部对应于显示屏的第一位置以及嘴部对应于显示屏的第二位置；在多个区域中，获取第一位置对应的第一发声区域，以及第二位置对应的第二发声区域；向第一发声区域对应的激励器发送第一驱动信号，驱动第一发声区域进行声音输出；向第二发声区域对应的振动监测模块发送第二驱动信号，以驱动第二发声区域进行声音采集。本方法能保证视频时的通话质量。

Description

显示屏发声的方法、装置、电子装置及存储介质
技术领域
本申请涉及电子装置技术领域，更具体地，涉及一种显示屏发声的方法、装置、电子装置及存储介质。
背景技术
电子装置，例如手机，已经成为人们日常生活中最常用的消费型电子产品之一。同时，随着用户对电子装置的显示效果要求越来越高，更多的电子装置厂商开始对屏幕中的可显示区域进行拓展，以增大可显示区域的占比、实现全面屏的效果，来提升用户的视觉体验。但是，在尽量增大可可显示区域的情况下，听筒等设置于显示屏方向上的元器件会极大的影响显示效果。
发明内容
鉴于上述问题，本申请提出了一种显示屏发声的方法、装置、电子装置及存储介质。
第一方面，本申请实施例提供了一种显示屏发声的方法，应用于电子装置，所述电子装置包括显示屏、多个用于驱动所述显示屏发声的激励器以及多个用于监测所述显示屏的振动而采集声音的振动监测模块，所述多个激励器分别对应所述显示屏的不同区域，所述多个振动监测模块分别对应所述显示屏的不同区域，且所述多个激励器与所述多个振动监测模块一一对应，所述方法包括：在用户使用所述电子装置进行视频通话时，获取所述用户的耳部对应于所述显示屏的第一位置以及所述用户的嘴部对应于所述显示屏的第二位置；在所述多个激励器以及所述多个振动监测模块分别对应的区域中，获取所述第一位置对应的第一发声区域，以及所述第二位置对应的第二发声区域；向所述第一发声区域对应的激励器发送第一驱动信号，以驱动所述第一发声区域进行所述视频通话的声音输出；向所述第二发声区域对应的振动监测模块发送第二驱动信号，以驱动所述第二发声区域进行所述视频通话的声音采集。
第二方面，本申请实施例提供了一种显示屏发声的装置，应用于电子装置，所述电子装置包括显示屏、多个用于驱动所述显示屏发声的激励器以及多个用于监测所述显示屏的振动而采集声音的振动监测模块，所述多个激励器分别对应所述显示屏的不同区域，所述多个振动监测模块分别对应所述显示屏的不同区域，且所述多个激励器与所述多个振动监测模块一一对应，所述装置包括：位置获取模块、区域获取模块、第一驱动模块以及第二驱动模块，其中，所述位置获取模块用于在用户使用所述电子装置进行视频通话时，获取所述用户的耳部对应于所述显示屏的第一位置以及所述用户的嘴部对应于所述显示屏的第二位置；所述区域获取模块用于在所述多个激励器以及所述多个振动监测模块分别对应的区域中，获取所述第一位置对应的第一发声区域，以及所述第二位置对应的第二发声区域；所述第一驱动模块用于向所述第一发声区域对应的激励器发送第一驱动信号，以驱动所述第一发声区域进行所述视频通话的声音输出；所述第二驱动模块用于向所述第二发声区域对应的振动监测模块发送第二驱动信号，以驱动所述第二发声区域进行所述视频通话的声音采集。
第三方面，本申请实施例提供了一种电子装置，包括触摸屏、存储器以及处理器，所述触摸屏与所述存储器耦接到所述处理器，所述存储器存储指令，当所述指令由所述处理器执行时所述处理器执行上述第一方面提供的显示屏发声的方法。
第四方面，本申请实施例还提供了一种具有处理器可执行的程序代码的计算机可读取存储介质，其特征在于，所述程序代码使所述处理器执行上述第一方面提供的显示屏发声的方法。
第五方面，本申请实施例提供了一种电子装置，所述电子装置包括：显示屏；多个激励器，用于驱动所述显示屏发声，所述多个激励器分别对应所述显示屏的不同区域，且所述多个激励器分别与所述对应的区域连接；多个振动监测模块，用于监测所述显示屏的振动而采集声音，所述多个振动监测模块分别对应所述显示屏的不同区域，且所述多个振动监测模块分别与所述对应的区域连接；电路，与所述多个激励器以及所述多个振动监测模块连接，所述电路包括检测电路和驱动电路，所述检测电路用于在用户使用所述电子装置进行视频通话时，获取所述用户的耳部对应于所述显示屏的第一位置以及所述用户的嘴部对应于所述显示屏的第二位置，在所述多个激励器以及所述多个振动监测模块分别对应的区域中，获取所述第一位置对应的第一发声区域，以及所述第二位置对应的第二发声区域，所述驱动电路，用于驱动所述第一发声区域进行所述视频通话的声音输出，驱动所述第二发声区域进行所述视频通话的声音采集。
相对于现有技术，本申请提供的显示屏发声的方法、装置、电子装置及存储介质，通过在用户使用电子装置进行视频通话时，获取用户的耳部对应于所述显示屏的第一位置以及嘴部对应于所述显示屏的第二位置，然后根据第一位置确定第一发声区域，根据第二位置确定第二发声区域，最后向第一发声区域对应的激励器发送驱动信号，驱动第一发声区域进行声音输出，以及向第二发声区域对应的振动监测模块发送驱动信号，驱动第二发声区域进行声音的采集。从而本方法可以实现用户在视频通话时，无论用户以何种姿势朝向电子装置时，均能保证声音输出效果以及声音采集效果，使视频通话的质量得到保障。
本申请的这些方面或其他方面在以下实施例的描述中会更加简明易懂。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1示出了本申请实施例提供的电子装置的一种结构框图；
图2示出了本申请实施例提供的电子装置的另一种结构框图；
图3示出了本申请提出的一种显示屏发声的方法所应用的一种电子装置的电路框图；
图4示出了本申请第一实施例提供的显示屏发声的方法的流程图；
图5示出了本申请第二实施例提供的显示屏发声的方法的流程图；
图6示出了本申请第三实施例提供的显示屏发声的装置的框图；
图7示出了本申请实施例提供的一种电子装置的正面示意图；
图8示出了用于执行根据本申请实施例的显示屏发声的方法的电子装置的框图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
显示屏通常在手机、平板电脑等电子装置中所起到的作用为显示文本、图片、图标或者视频等内容。而伴随着触控技术的发展，越来越多的电子装置所设置的显示屏为触控显示屏，在设置触控显示屏的情况下，当检测到用户在触控显示屏上进行拖拽、单击、双击、滑动等触控操作时，可以对用户的触控操作进行响应。
随着用户对所显示内容的清晰度以及精细度要求越来越高，更多的电子装置采用尺寸较大的触控显示屏。但是，在设置尺寸较大的触控显示屏的过程中，发现电子装置前端所设置的前置摄像头、接近光传感器、听筒等功能器件会影响触控显示屏所能扩展到的区域。
通常电子装置包括前面板、后盖以及边框。在前面板包括上额区、中部屏幕区和下部按键区。通常，上额区设置有听筒出音孔以及前置摄像头等功能器件，中部屏幕区设置有触控显示屏，下部按键区设置有一到三个物理按键。而随着技术的发展，下部按键区被逐渐取消，原本设置在下部按键区的物理按键由触控显示屏中的虚拟按键替代。
而上额区所设置的听筒出音孔对于手机的功能支持较为重要，不易轻易的取消，所以将触控显示屏的可显示区域拓展到覆盖上额区具有较大的难度。在经过一些列研究后，发明人发现可以通过控制手机的屏幕、边框或者后盖振动的方式来发出声音，从而可以取消听筒出音孔的设置。
示例性地，请参阅图1和2，示出了本申请实施例提供的一种电子装置100。其中，图1为电子装置的前视图，图2为电子装置的侧视图。
电子装置100包括电子本体部10，所述电子本体部10包括壳体12和设置在所述壳体12的屏幕120，壳体12包括前面板125、后盖127以及边框126，边框126用于连接前面板125和后盖127，屏幕120设置在前面板125上。其中，屏幕120即为显示屏。
电子装置还包括激励器131，该激励器131用于驱动电子装置的振动部件振动，具体地，振动部件为所述电子装置的屏幕120或壳体12的至少一个，也就是说，振动部件可以是屏幕120，也可以是壳体12，还可以是屏幕120和壳体12的组合。作为一种实施方式，当振动部件为壳体12时，振动部件可以是壳体12的后盖。
于本申请实施例中，所述振动部件为屏幕120，则激励器131与屏幕120连接，用于带动屏幕120振动。具体地，所述激励器131贴附于屏幕120下方，则激励器131可以是压电驱动器或者马达。作为一种实施方式，激励器131为压电驱动器。压电驱动器通过力矩作用将自身形变传递给屏幕120，从而屏幕120振动发声。屏幕120包括触控屏109和显示面板111，显示面板111位于触摸屏109的下方，压电驱动器贴附于显示面板111的下方，即显示面板111的远离触摸屏109的一面。压电驱动器包括多层压电陶瓷片。当一片多层压电陶瓷片发声膨胀和收缩时，其将带动屏幕发生弯曲变形，如此反复，整个屏幕形成弯曲振动，从而屏幕可以推动空气并产生声音。
作为一种实施方式，激励器131与电子装置的驱动电路连接，驱动电路用于根据振动参数输入控制信号至激励器131，以驱动激励器131振动，从而带动振动部件振动。具体地，驱动电路可以是电子装置的处理器，也可以是电子装置内的能够产生驱动电压或电流的集成电路。驱动电路输出高低电平的驱动信号至激励器131，激励器131根据该驱动信号振动，而驱动电路输出的驱动信号的电参数不同，则会导致激励器131的振动参数不同，例如，驱动信号的占空比对应激励器131的振动频率，驱动信号的幅度对应激励器131的振动幅度等。
电子装置还包括振动监测模块132，该振动监测模块132用于监测屏幕120的振动，根据监测屏幕120的振动变化，以实现声音的采集。
于本申请实施例中，振动监测模块132可以与屏幕120连接，用于监测屏幕120的振动。具体地，振动监测模块132可以贴附于屏幕120下方。该振动监测模块132可以由线圈、磁铁以及放大器组成，屏幕120的振动可以带动贴附在屏幕120上的线圈运动，线圈外围有磁铁，由于震动使线圈在磁场中切割磁力线，产生电流，并且设置有放大器对产生的电信号进行放大，从而完成声音的采集。当然，振动监测模块132也可以是其他可以监测屏幕的振动变化，且将振动变化转换为电信号的组件，例如位移传感器等。
作为一种实施方式，如图3所示，电子装置100包括电路200，电路200与多个激励器以及多个振动监测模块连接。电路包括检测电路和驱动电路，所述检测电路用于在用户使用所述电子装置进行视频通话时，获取所述用户的耳部对应于所述显示屏的第一位置以及所述用户的嘴部对应于所述显示屏的第二位置，在所述多个激励器以及所述多个振动监测模块分别对应的区域中，获取所述第一位置对应的第一发声区域，以及所述第二位置对应的第二发声区域，所述驱动电路，用于驱动所述第一发声区域进行所述视频通话的声音输出，驱动所述第二发声区域进行所述视频通话的声音采集。振动监测模块132与电子装置的驱动电路连接，驱动电路用于输入控制信号至振动监测模块132，以驱动振动检测模块132工作，从而对屏幕120的振动进行监测而产生电信号。具体地，驱动电路可以是电子装置的处理器，也可以是电子装置内的能够产生驱动电压或电流的集成电路。电子装置100的音频电路可以从振动监测模块132处接收电信号，将电信号转换为声音数据，并将声音数据传输给处理器以进行进一步的处理。
在本申请实施例中，多个激励器131以及多个振动监测模块132可以均匀分布于屏幕120，以使屏幕120均分为多个单独进行发声的区域，且均分为多个单独进行采集声音的区域。另外，多个激励器131与多个振动监测模块132一一对应，即一个激励器131与一个振动监测模块132共同对应上述均分的区域中的一块区域。例如，激励器131的个数为4个，振动监测模块132的个数为4个，则屏幕120可以沿竖直方向以及水平方向的中心线均分为4块方形区域，4个激励器131以及4个振动监测模块132设置于4块方形区域下方，4个激励器131与4块方形区域一一对应，4个振动监测模块132亦与4块方形区域一一对应，且1个振动监测模块132与1个激励器131对应一个方形区域。当然，激励器131以及振动监测模块132的个数在本申请实施例中并不作为限定。
另外，应当理解的是，屏幕120的每块区域由于既设置有用于发声的激励器131，又设置有用于采集声音的振动监测模块132，为不影响发声和声音采集的功能，同一块区域的激励器131以及振动监测模块132不应在同一时间进行工作，即屏幕120的一块区域在用于发声时，不会进行声音的采集，在用于声音采集时，不会进行发声。
因此，针对听筒等设置于显示屏方向上的元器件会极大的影响显示效果的问题，发明人经过长时间的研究并提出了本申请实施例提供的显示屏发声的方法、装置、电子装置以及存储介质，通过在用户在进行视频通话时，获取用户的耳部以及嘴部对应于显示屏的位置，并根据耳部以及嘴部对应于显示屏的位置确定显示屏上用于发声的区域和用于声音采集的区域，最后控制确定的区域进行发声以及声音的采集，从而实现无论用户以何种姿势进行视频聊天时，均能保证对应的区域进行发声以及声音采集，保证用户的视频通话效果。
下面将结合附图具体描述本申请中的各实施例。
第一实施例
请参阅图4，图4示出了本申请第一实施例提供的显示屏发声的方法的流程示意图。所述显示屏发声的方法通过在用户在进行视频通话时，获取用户的耳部以及嘴部对应于显示屏的位置，并根据耳部以及嘴部对应于显示屏的位置确定显示屏上用于发声的区域和用于声音采集的区域，最后控制确定的区域进行发声以及声音的采集，从而实现视频聊天时能保证对应的区域进行发声以及声音采集，保证用户的视频通话效果。在具体的实施例中，所述显示屏发声的方法应用于如图6所示的显示屏发声的装置200以及配置有所述显示屏发声的装置200的电子装置(图7)。下面将以电子装置为例，说明本实施例的具体流程，当然，可以理解的，本实施例所应用的电子装置可以为智能手机、平板电脑、穿戴式电子设备等，在此不做具体的限定。下面将针对图4所示的流程进行详细的阐述，上述的显示屏发声的方法具体地可以包括以下步骤：
步骤S110：在用户使用所述电子装置进行视频通话时，获取所述用户的耳部对应于所述显示屏的第一位置以及所述用户的嘴部对应于所述显示屏的第二位置。
在用户利用电子装置进行视频通话时，通常用户是以正对显示屏姿态进行视频通话的。另外，大多数的电子装置的麦克风以及扬声器均位于电子装置的底端部分，而人的耳部和嘴部之间具有一定的距离，使得用户的嘴部靠近电子装置的底端时，耳部距离底端的扬声器则有一定距离，反之，用户的耳部靠近电子装置的底端时，嘴部距离底端的麦克风则有一定的距离。从而，导致无法同时满足用户的耳部靠近扬声器以及嘴部靠近麦克风。用户通常需要将电子装置的扬声器的音量设置的较大，才能听到较好的声音效果，致使能电子装置的资源的浪费。
在本申请实施例中，利用显示屏进行声音的输出以及采集。显示屏被划分为多个发声区域，每个发声区域对应有一个激励器以及一个振动监测模块。从而，可以在此硬件基础上确定不同的区域进行声音输出以及声音采集，使用户的耳部靠近声音输出的区域，用户的嘴部靠近声音采集的区域，以保证视频通话质量。
由于需要确定用户的耳部靠近声音输出的区域，以及用户的嘴部靠近声音采集的区域，因此需要检测以获取用户的耳部对应于显示屏的第一位置以及用户的嘴部对应于显示屏的第二位置。
在本申请实施例中，作为一种方式，获取所述用户的耳部对应于所述显示屏的第一位置以及所述用户的嘴部对应于所述显示屏的第二位置，包括：
检测到所述用户于所述显示屏上做出第一预设手势的第一触控操作时，获取所述第一触控操作对应的位置，将所述第一触控操作对应的位置作为所述用户的耳部对应于所述显示屏的第一位置；检测到所述用户于所述显示屏上做出第二预设手势的第二触控操作时，获取所述第二触控操作对应的位置，将所述第二触控操作对应的位置作为所述用户的嘴部对应于所述显示屏的第二位置。
可以理解的是，电子装置中存储有第一预设手势以及第二预设手势。该第一预设手势用于触发选定耳部对应的位置的操作，即用户可以于显示屏上进行手动操作，选取用户认为耳部应该对应的位置，以完成后续耳部对应的用于发声的区域的选取。该第二预设手势用于触发选定嘴部对应的位置的操作，即用户可以于显示屏上进行手动操作，选取用户认为嘴部应该对应的位置，以完成后续嘴部对应的用于声音采集的区域的选取。
在用户利用电子装置进行视频通话时，可以于显示屏上进行滑动的触控操作，在用户做出的上述第一预设手势以及第二预设手势的触控操作被检测到后，触发视频通话过程中显示屏的用于发声的位置的选定以及用于声音采集的位置的选定。因此，可以将用户利用第一预设手势的触控操作选定的位置作为耳部相对于显示屏的位置，将用户利用第二预设手势的触控操作选定的位置作为嘴部相对于显示屏的位置。
上述利用预设手势选定显示屏的用于发声的位置以及用于声音采集的位置的方式，方便快捷，可以根据用户自己的喜好而设定，可以提升用户体验。
作为另一种方式，获取所述用户的耳部对应于所述显示屏的第一位置以及所述用户的嘴部对应于所述显示屏的第二位置，也可以包括：
获取所述用户的用户人脸图像；基于所述用户人脸图像，获取所述用户的耳部对应于所述显示屏的第一位置以及所述用户的嘴部对应于所述显示屏的第二位置。
可以理解的是，通常视频通话时，用户正对显示屏，且离显示屏较近，因此可以根据视频通话时，电子装置采集的用户的人脸图像，来确定用户的耳部对应显示屏的第一位置，以及用户的嘴部对应显示屏的第二位置。例如，可以对拍摄的用户人脸图像进行人脸识别，识别出嘴部区域以及耳部区域，然后将图像于显示屏进行全屏展示时，将耳部区域所对应显示屏的位置作为用户的耳部相对于显示屏的第一位置，将嘴部区域所对应显示屏的位置作为用户的嘴部相对于显示屏的第二位置。
具体的，基于所述用户人脸图像，获取所述用户的耳部对应于所述显示屏的第一位置以及所述用户的嘴部对应于所述显示屏的第二位置，可以包括：
基于所述用户人脸图像，利用单目视觉定位原理获取所述用户的耳部相对所述显示屏的位置以及所述用户的嘴部相对所述显示屏的位置；基于所述用户的耳部相对所述显示屏的位置，获取所述用户的耳部相距所述显示屏最近的位置，将所述耳部相距所述显示屏最近的位置作为所述用户的耳部对应于所述显示屏的第一位置；基于所述用户的嘴部相对所述显示屏的位置，获取所述用户的嘴部相距所述显示屏最近的位置，将所述嘴部相距所述显示屏最近的位置作为所述用户的嘴部对应于所述显示屏的第二位置。
可以理解的是，在进行视频通话时，用户的脸部距离电子装置较近，且距离电子装置的距离在一固定范围内，因此可以标定电子装置的摄像头距离用户的距离。然后，根据视频通话时拍摄的用户人脸图像，利用单目视觉定位原理获取用户的耳部相对显示屏的位置，以及用户的嘴部相对显示屏的位置。
其中，单目视觉定位是通过单个调焦摄像头获取图片并传到计算机利用OpenCV进行预处理、识别、定位、测量等图像处理算法，进而得出目标物体相对摄像头的坐标位置。应当理解的是，利用单目视觉定位原理获得的用户耳部以及嘴部相对显示屏的位置，应当是耳部以及嘴部相对显示屏正面所在一侧的摄像头的位置。
在得到用户的耳部相对于显示屏的位置之后，可以根据用户的耳部相对于显示屏的位置确定该耳部相距显示屏最近的位置。具体可以是，根据用户的耳部相对显示屏的位置，确定出耳部相对显示屏各个位置的方向，然后确定出耳部相对显示屏的各个位置的方向与显示屏的夹角，获取夹角最大的方向所对应的显示屏上的位置，得到耳部相距显示屏最近的位置，将耳部相距显示屏最近的位置作为嘴部对应于显示屏的第二位置。
当然，也可以根据用户的耳部相对显示屏的位置计算出用户的耳部相对显示屏的各个位置的距离，然后根据用户的耳部相对显示屏的各个位置的距离确定出耳部相对显示屏的最近的位置。
另外，在得到用户的嘴部相对显示屏的位置之后，再根据嘴部相对显示屏的位置确定出嘴部相距显示屏的最近的位置，将嘴部相距显示屏的最近的位置作为用户的嘴部相对于显示屏的第二位置。其中，根据嘴部相对显示屏的位置确定嘴部相距显示屏的最近的位置的方式，可以参考上述根据耳部相对显示屏的位置确定耳部相距显示屏的组件的位置的方式。
可以理解的是，取用户的耳部相距显示屏的最近的位置作为用户的耳部相对于显示屏的第一位置，可以使后续根据第一位置确定用于发声的区域，使得用户能听到的声音效果较好。同样的，取用户的嘴部相距显示屏的最近的位置作为用户的嘴部相对于显示屏的第一位置，可以使后续进行声音采集的效果较好。
从而，可以得到用户的耳部对应于显示屏的第一位置以及用户的嘴部对应于显示屏的第二位置，以便于后续确定显示屏上用于发声的区域以及用于声音采集的区域。
步骤S120：在所述多个激励器以及所述多个振动监测模块分别对应的区域中，获取所述第一位置对应的第一发声区域，以及所述第二位置对应的第二发声区域。
在得到用户的耳部对应于显示屏的第一位置以及用户的嘴部对应于显示屏的第二位置之后，可以在显示屏上多个激励器以及振动监测模块分别对应的区域中，确定出第一位置对应的第一发声区域，以便后续进行声音输出，且确定出第二位置的第二发声区域，以便后续进行声音输入。
步骤S130：向所述第一发声区域对应的激励器发送第一驱动信号，以驱动所述第一发声区域进行所述视频通话的声音输出。
在确定出第一位置对应的第一发声区域之后，可以向第一位置对应的第一发声区域发送用于驱动激励器进行工作的第一驱动信号。从而，第一驱动信号驱动第一发声区域的激励器工作，使第一发声区域进行视频通话的声音输出。当然，第一驱动信号的电参数不同，使激励器的振动参数也不同。
步骤S140：向所述第二发声区域对应的振动监测模块发送第二驱动信号，以驱动所述第二发声区域进行所述视频通话的声音采集。
同样的，在确定出第二位置的第二发声区域之后，再向第二位置对应的第二发声区域发送用于驱动振动监测模块进行工作的第二驱动信号。从而，第二驱动信号驱动第二发声区域的振动监测模块工作，使第二发声区域可以进行视频通话中声音的采集。
本申请实施例提供的显示屏发声的方法可以实现用户在视频通话时，无论用户以何种姿势朝向电子装置时，均能保证声音输出效果以及声音采集效果，使视频通话的质量得到保障，解决现有技术中麦克风和扬声器设置于电子装置的底部，使用户视频通话时需要将电子装置的扬声器的音量设置的较大，才能听到较好的声音效果，致使能电子装置的资源的浪费的问题。
第二实施例
请参阅图5，图5示出了本申请第二实施例提供的显示屏发声的方法的流程示意图。下面将针对图5所示的流程进行详细的阐述，所述显示屏发声的方法具体可以包括以下步骤：
步骤S210：在用户使用所述电子装置进行视频通话时，获取所述用户的耳部对应于所述显示屏的第一位置以及所述用户的嘴部对应于所述显示屏的第二位置。
步骤S220：检测所述用户的耳部相距所述显示屏的距离。
在本申请实施例中，在确定第一位置对应的第一发声区域时，由于确定的第一发声区域是后续用于声音输出的区域，因此，可以考虑用户的听觉效果。当用户耳部距离第一发声区域较远时，则听到的声音效果会不太好。
因此，可以检测用户的耳部相距显示屏的距离，以便于后续进行处理，使用户能够听到较好的声音效果。
在本申请实施例中，检测所述用户的耳部相距所述显示屏的距离，包括：
检测所述用户相对于所述显示屏的距离，将所述用户相对于所述显示屏的距离作为所述用户的耳部相距所述显示屏的距离。
由于用户在进行视频通话时，通常用户的脸部与显示屏正对，且用户的头部距离显示屏最近，而无法直接检测耳部相对显示屏的距离。因此，可以通过能测距的传感器检测用户相对于显示屏的距离，将传感器检测的用户相对于显示屏的距离作为用户的人耳相对于显示屏的距离。
进一步的，上述检测用户相对于显示屏的距离的传感器可以是接近传感器、超声波传感器、距离传感器等。当然，用于检测用户相对于显示屏的距离的传感器在本申请实施例中并不作为限定。
步骤S230：判断所述耳部相距所述显示屏的距离是否大于第一预设距离。
在检测得到用户的耳部相距显示屏的距离之后，为确定用户耳部是否距离显示屏较远，以决定是否对声音进行加强等处理。因此，可以判断耳部相距所述显示屏的距离是否大于第一预设距离，其中，第一预设距离为用户距离显示屏较远时的距离。具体的第一预设距离可以根据用户实际的需求而设定，例如，听力较好的用户可以将第一预设距离设置的较大，听力较差的用户可以将第二预设距离设置的较小。
步骤S240：当大于第一预设距离时，在所述多个激励器以及所述多个振动监测模块分别对应的区域中，获取所述第一位置所在的区域以及至少一个与其邻近的区域，作为所述第一位置对应的第一发声区域。
在步骤S230中判断出大于第一预设距离时，表示需要对输出的声音进行加强，则可以在显示屏上多个激励器以及振动监测模块分别对应的多个区域中确定出第一位置所在的区域，以及至少一个与第一位置所在的区域邻近的区域，然后将上述第一位置所在的区域及其邻近区域，作为第一发声区域。可以理解，在用户耳部距离较远时，可以在第一位置所在区域基础上增加邻近区域进行发声，从而提高发声的响度，使用户能听清视频通话中输出的声音。
步骤S250：在所述多个激励器以及所述多个振动监测模块分别对应的区域中，获取所述第二位置所在的区域。
在本申请实施例中，在获取第二位置对应的第二发声区域时，可以考虑通常用户的嘴部靠近电子装置的底部或者顶部等边缘区域。因此，可以判断获得的第二位置所在的区域是否为边缘区域，以确定是否需要调整第二发声区域。
首先，在显示屏上多个激励器以及振动监测模块分别对应的区域中，获取第二位置所在的区域。
步骤S260：判断所述第二位置所在的区域是否为所述显示屏的边缘所在区域。
在得到显示屏上第二位置所在的区域之后，再判断第二位置所在的区域是否为显示屏的边缘区域。
步骤S270：当为所述显示屏的边缘所在区域时，将所述第二位置所在的区域作为所述第二位置对应的第二发声区域，当不为所述显示屏的边缘所在区域时，获取所述第二位置所在的区域的邻近区域中靠近边缘所在区域的区域，作为所述第二位置对应的第二发声区域。
可以理解的是，在步骤S260中判断出显示屏上第二位置所在的区域是显示屏的边缘所在区域时，则表示获取的用户相对显示屏的第二位置满足预设条件，因此可以将第二位置所在的区域作为第二发声区域，以进行视频通话中声音的采集。
在步骤S260中判断出显示屏上第二位置所在的区域不是显示屏的边缘所在区域时，则表示获取的用户相对显示屏的第二位置不满足预设条件，因此可以获取第二位置所在的区域的邻近区域中靠近边缘所在区域的区域，作为第二发声区域，以进行视频通话中声音的采集。
上述将显示屏的边缘区域作为声音的采集的区域，可以使用于声音输出的区域与用于声音采集的区域相离较远，减少两者之间的相互干扰，使声音播放效果以及声音采集效果较佳，进一步提高视频通话质量。
步骤S280：向所述第一发声区域对应的激励器发送第一驱动信号，以驱动所述第一发声区域进行所述视频通话的声音输出。
步骤S290：向所述第二发声区域对应的振动监测模块发送第二驱动信号，以驱动所述第二发声区域进行所述视频通话的声音采集。
本申请第二实施例提供的显示屏发声的方法，在视频通话时，获取用户的耳部以及嘴部相对显示屏的位置之后，在根据用户的耳部以及嘴部相对显示屏的位置确定用于发声的区域以及用于采集声音的区域时，考虑了用户相对显示屏的距离因素，以及进行声音采集的区域通常为边缘区域的因素，使声音输出以及声音采集的效果较佳，提升视频通话的质量。
第三实施例
请参阅图6，图6示出了本申请第三实施例提供的显示屏发声的装置200的模块框图。该显示屏发声的装置200应用于电子装置，所述电子装置包括显示屏、多个用于驱动所述显示屏发声的激励器以及多个用于监测所述显示屏的振动而采集声音的振动监测模块，所述多个激励器分别对应所述显示屏的不同区域，所述多个振动监测模块分别对应所述显示屏的不同区域，且所述多个激励器与所述多个振动监测模块一一对应。下面将针对图6所示的框图进行阐述，所述显示屏发声的装置200包括：位置获取模块210、区域获取模块220、第一驱动模块230以及第二驱动模块240。其中，所述位置获取模块210用于在用户使用所述电子装置进行视频通话时，获取所述用户的耳部对应于所述显示屏的第一位置以及所述用户的嘴部对应于所述显示屏的第二位置；所述区域获取模块220用于在所述多个激励器以及所述多个振动监测模块分别对应的区域中，获取所述第一位置对应的第一发声区域，以及所述第二位置对应的第二发声区域；所述第一驱动模块230用于向所述第一发声区域对应的激励器发送第一驱动信号，以驱动所述第一发声区域进行所述视频通话的声音输出；所述第二驱动模块240用于向所述第二发声区域对应的振动监测模块发送第二驱动信号，以驱动所述第二发声区域进行所述视频通话的声音采集。
在本申请实施例中，位置获取模块210可以包括：第一位置确定单元以及第二位置确定单元。其中，第一位置确定单元用于检测到所述用户于所述显示屏上做出第一预设手势的第一触控操作时，获取所述第一触控操作对应的位置，将所述第一触控操作对应的位置作为所述用户的耳部对应于所述显示屏的第一位置；第二位置确定单元用于检测到所述用户于所述显示屏上做出第二预设手势的第二触控操作时，获取所述第二触控操作对应的位置，将所述第二触控操作对应的位置作为所述用户的嘴部对应于所述显示屏的第二位置。
在本申请实施例中，位置获取模块210也可以包括：用户图像获取单元以及图像处理单元。用户图像获取单元用于获取所述用户的用户人脸图像；图像处理单元用于基于所述用户人脸图像，获取所述用户的耳部对应于所述显示屏的第一位置以及所述用户的嘴部对应于所述显示屏的第二位置。
进一步的，图像处理单元可以具体用于：基于所述用户人脸图像，利用单目视觉定位原理获取所述用户的耳部相对所述显示屏的位置以及所述用户的嘴部相对所述显示屏的位置；基于所述用户的耳部相对所述显示屏的位置，获取所述用户的耳部相距所述显示屏最近的位置，将所述耳部相距所述显示屏最近的位置作为所述用户的耳部对应于所述显示屏的第一位置；基于所述用户的嘴部相对所述显示屏的位置，获取所述用户的嘴部相距所述显示屏最近的位置，将所述嘴部相距所述显示屏最近的位置作为所述用户的嘴部对应于所述显示屏的第二位置。
在本申请实施例中，区域获取模块220可以包括：距离检测单元、第一判断单元以及第一执行单元。其中，距离检测单元用于检测所述用户的耳部相距所述显示屏的距离；第一判断单元用于判断所述耳部相距所述显示屏的距离是否大于第一预设距离；第一执行单元用于当大于第一预设距离时，在所述多个激励器以及所述多个振动监测模块分别对应的区域中，获取所述第一位置所在的区域以及至少一个与其邻近的区域，作为所述第一位置对应的第一发声区域。
进一步的，距离检测单元可以具体用于：检测所述用户相对于所述显示屏的距离，将所述用户相对于所述显示屏的距离作为所述用户的耳部相距所述显示屏的距离。
在本申请实施例中，区域获取模块220还可以包括：区域确定单元、第二判断单元以及第二执行单元。其中，区域确定单元用于在所述多个激励器以及所述多个振动监测模块分别对应的区域中，获取所述第二位置所在的区域；第二判断单元用于判断所述第二位置所在的区域是否为所述显示屏的边缘所在区域；第二执行单元用于当为所述显示屏的边缘所在区域时，将所述第二位置所在的区域作为所述第二位置对应的第二发声区域，当不为所述显示屏的边缘所在区域时，获取所述第二位置所在的区域的邻近区域中靠近边缘所在区域的区域，作为所述第二位置对应的第二发声区域。
综上所述，相对于现有技术，本申请提供的显示屏发声的方法、装置、电子装置及存储介质，通过在用户使用电子装置进行视频通话时，获取用户的耳部对应于所述显示屏的第一位置以及嘴部对应于所述显示屏的第二位置，然后根据第一位置确定第一发声区域，根据第二位置确定第二发声区域，最后向第一发声区域对应的激励器发送驱动信号，驱动第一发声区域进行声音输出，以及向第二发声区域对应的振动监测模块发送驱动信号，驱动第二发声区域进行声音的采集。从而本方法可以实现用户在视频通话时，无论用户以何种姿势朝向电子装置时，均能保证声音输出效果以及声音采集效果，使视频通话的质量得到保障。
需要说明的是，本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。对于装置类实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。对于方法实施例中的所描述的任意的处理方式，在装置实施例中均可以通过相应的处理模块实现，装置实施例中不再一一赘述。
请再次参阅图7，基于上述的显示屏发声的方法、装置，本申请实施例还提供一种电子装置100。
示例性的，电子装置100可以为移动或便携式并执行无线通信的各种类型的计算机系统设备中的任何一种(图7中只示例性的示出了一种形态)。具体的，电子装置100可以为移动电话或智能电话(例如，基于iPhone TM，基于Android TM的电话)，便携式游戏设备(例如Nintendo DS TM，PlayStation Portable TM，Gameboy Advance TM，iPhone TM)、膝上型电脑、PDA、便携式互联网设备、音乐播放器以及数据存储设备，其他手持设备以及诸如手表、耳机、吊坠、耳机等，电子装置100还可以为其他的可穿戴设备(例如，诸如电子眼镜、电子衣服、电子手镯、电子项链、电子纹身、电子设备或智能手表的头戴式设备(HMD))。
电子装置100还可以是多个电子设备中的任何一个，多个电子设备包括但不限于蜂窝电话、智能电话、其他无线通信设备、个人数字助理、音频播放器、其他媒体播放器、音乐记录器、录像机、照相机、其他媒体记录器、收音机、医疗设备、车辆运输仪器、计算器、可编程遥控器、寻呼机、膝上型计算机、台式计算机、打印机、上网本电脑、个人数字助理(PDA)、便携式多媒体播放器(PMP)、运动图像专家组(MPEG-1或MPEG-2)音频层3(MP3)播放器，便携式医疗设备以及数码相机及其组合。
在一些情况下，电子装置100可以执行多种功能(例如，播放音乐，显示视频，存储图片以及接收和发送电话呼叫)。如果需要，电子装置100可以是诸如蜂窝电话、媒体播放器、其他手持设备、腕表设备、吊坠设备、听筒设备或其他紧凑型便携式设备的便携式设备。
如图7所示的电子装置100包括电子本体部10，所述电子本体部10包括壳体12及设置在所述壳体12上的主显示屏120。所述壳体12可采用金属、如钢材、铝合金制成。本实施例中，所述主显示屏120通常包括显示面板111，也可包括用于响应对所述显示面板111进行触控操作的电路等。所述显示面板111可以为一个液晶显示面板(Liquid Crystal Display，LCD)，在一些实施例中，所述显示面板111同时为一个触摸屏109。
请参阅图8，在实际的应用场景中，所述电子装置100可作为智能手机终端进行使用，在这种情况下所述电子本体部10通常还包括一个或多个(图中仅示出一个)处理器102、存储器104、RF(Radio Frequency，射频)模块106、音频电路110、传感器114、输入模块118、电源模块122。本领域普通技术人员可以理解，图8所示的结构仅为示意，其并不对所述电子本体部10的结构造成限定。例如，所述电子本体部10还可包括比图8中所示更多或者更少的组件，或者具有与图7所示不同的配置。
本领域普通技术人员可以理解，相对于所述处理器102来说，所有其他的组件均属于外设，所述处理器102与这些外设之间通过多个外设接口124相耦合。所述外设接口124可基于以下标准实现：通用异步接收/发送装置(Universal Asynchronous Receiver/Transmitter，UART)、通用输入/输出(General Purpose Input Output，GPIO)、串行外设接口(Serial Peripheral Interface，SPI)、内部集成电路(Inter-Integrated Circuit，I2C)，但不并限于上述标准。在一些实例中，所述外设接口124可仅包括总线；在另一些实例中，所述外设接口124还可包括其他元件，如一个或者多个控制器，例如用于连接所述显示面板111的显示控制器或者用于连接存储器的存储控制器。此外，这些控制器还可以从所述外设接口124中脱离出来，而集成于所述处理器102内或者相应的外设内。
所述存储器104可用于存储软件程序以及模块，所述处理器102通过运行存储在所述存储器104内的软件程序以及模块，从而执行各种功能应用以及数据处理。所述存储器104可包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，所述存储器104可进一步包括相对于所述处理器102远程设置的存储器，这些远程存储器可以通过网络连接至所述电子本体部10或所述显示屏120。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
所述RF模块106用于接收以及发送电磁波，实现电磁波与电信号的相互转换，从而与通讯网络或者其他设备进行通讯。所述RF模块106可包括各种现有的用于执行这些功能的电路元件，例如，天线、射频收发器、数字信号处理器、加密/解密芯片、用户身份模块(SIM)卡、存储器等等。所述RF模块106可与各种网络如互联网、企业内部网、无线网络进行通讯或者通过无线网络与其他设备进行通讯。上述的无线网络可包括蜂窝式电话网、无线局域网或者城域网。上述的无线网络可以使用各种通信标准、协议及技术，包括但并不限于全球移动通信系统(Global System for Mobile Communication，GSM)、增强型移动通信技术(Enhanced Data GSM Environment，EDGE)，宽带码分多址技术(wideband codedivision multiple access，W-CDMA)，码分多址技术(Code division access，CDMA)、时分多址技术(time division multiple access，TDMA)，无线保真技术(Wireless，Fidelity，WiFi)(如美国电气和电子工程师协会标准IEEE 802.10A，IEEE 802.11b，IEEE802.11g和/或IEEE 802.11n)、网络电话(Voice over internet protocal，VoIP)、全球微波互联接入(Worldwide Interoperability for Microwave Access，Wi-Max)、其他用于邮件、即时通讯及短消息的协议，以及任何其他合适的通讯协议，甚至可包括那些当前仍未被开发出来的协议。
音频电路110、激励器131、声音插孔103、麦克风105共同提供用户与所述电子本体部10或所述显示屏120之间的音频接口。具体地，所述音频电路110从所述处理器102处接收声音数据，将声音数据转换为电信号，将电信号传输至所述激励器131。所述激励器131将电信号转换为人耳能听到的声波。所述音频电路110还从所述麦克风105处接收电信号，将电信号转换为声音数据，并将声音数据传输给所述处理器102以进行进一步的处理。音频数据可以从所述存储器104处或者通过所述RF模块106获取。此外，音频数据也可以存储至所述存储器104中或者通过所述RF模块106进行发送。
所述传感器114设置在所述电子本体部10内或所述显示屏120内，所述传感器114的实例包括但并不限于：光传感器、运行传感器、压力传感器、重力加速度传感器、以及其他传感器。
具体地，所述传感器114可包括光线传感器114F、压力传感器114G。其中，压力传感器114G可以检测由按压在电子装置100产生的压力的传感器。即，压力传感器114G检测由用户和电子装置之间的接触或按压产生的压力，例如由用户的耳部与电子装置之间的接触或按压产生的压力。因此，压力传感器114G可以用来确定在用户与电子装置100之间是否发生了接触或者按压，以及压力的大小。
请再次参阅图8，具体地在图8所示的实施例中，所述光线传感器114F及所述压力传感器114G邻近所述显示面板111设置。所述光线传感器114F可在有物体靠近所述显示屏120时，例如所述电子本体部10移动到耳边时，所述处理器102关闭显示输出。
作为运动传感器的一种，重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别所述电子装置100姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等。另外，所述电子本体部10还可配置陀螺仪、气压计、湿度计、温度计等其他传感器，在此不再赘述，
本实施例中，所述输入模块118可包括设置在所述显示屏120上的所述触摸屏109，所述触摸屏109可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在所述触摸屏109上或在所述触摸屏109附近的操作)，并根据预先设定的程序驱动相应的连接装置。可选的，所述触摸屏109可包括触摸检测装置和触摸控制器。其中，所述触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给所述触摸控制器；所述触摸控制器从所述触摸检测装置上接收触摸信息，并将该触摸信息转换成触点坐标，再送给所述处理器102，并能接收所述处理器102发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现所述触摸屏109的触摸检测功能。除了所述触摸屏109，在其它变更实施方式中，所述输入模块118还可以包括其他输入设备，如按键107。所述按键107例如可包括用于输入字符的字符按键，以及用于触发控制功能的控制按键。所述控制按键的实例包括“返回主屏”按键、开机/关机按键等等。
所述显示屏120用于显示由用户输入的信息、提供给用户的信息以及所述电子本体部10的各种图形用户接口，这些图形用户接口可以由图形、文本、图标、数字、视频和其任意组合来构成，在一个实例中，所述触摸屏109可设置于所述显示面板111上从而与所述显示面板111构成一个整体。
所述电源模块122用于向所述处理器102以及其他各组件提供电力供应。具体地，所述电源模块122可包括电源管理系统、一个或多个电源(如电池或者交流电)、充电电路、电源失效检测电路、逆变器、电源状态指示灯以及其他任意与所述电子本体部10或所述显示屏120内电力的生成、管理及分布相关的组件。
所述电子装置100还包括定位器119，所述定位器119用于确定所述电子装置100所处的实际位置。本实施例中，所述定位器119采用定位服务来实现所述电子装置100的定位，所述定位服务，应当理解为通过特定的定位技术来获取所述电子装置100的位置信息(如经纬度坐标)，在电子地图上标出被定位对象的位置的技术或服务。
应当理解的是，上述的电子装置100并不局限于智能手机终端，其应当指可以在移动中使用的计算机设备。具体而言，电子装置100，是指搭载了智能操作系统的移动计算机设备，电子装置100包括但不限于智能手机、智能手表、平板电脑，等等。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本申请的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本申请的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本申请的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式光盘只读存储器(CDROM)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。
应当理解，本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。此外，在本申请各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器，磁盘或光盘等。尽管上面已经示出和描述了本申请的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本申请的限制，本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。
最后应说明的是：以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不驱使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (11)

1.一种显示屏发声的方法，其特征在于，应用于电子装置，所述电子装置包括显示屏、多个用于驱动所述显示屏发声的激励器以及多个用于监测所述显示屏的振动而采集声音的振动监测模块，所述多个激励器分别对应所述显示屏的不同区域，所述多个振动监测模块分别对应所述显示屏的不同区域，且所述多个激励器与所述多个振动监测模块一一对应，所述方法包括：
在用户使用所述电子装置进行视频通话时，获取所述用户的耳部对应于所述显示屏上的第一位置以及所述用户的嘴部对应于所述显示屏上的第二位置，其中，所述第一位置为所述显示屏上相距所述用户的耳部最近的位置，所述第二位置为所述显示屏上相距所述用户的嘴部最近的位置；
在所述多个激励器以及所述多个振动监测模块分别对应的区域中，获取所述第一位置对应的第一发声区域，以及所述第二位置对应的第二发声区域；
向所述第一发声区域对应的激励器发送第一驱动信号，以驱动所述第一发声区域进行所述视频通话的声音输出；
向所述第二发声区域对应的振动监测模块发送第二驱动信号，以驱动所述第二发声区域进行所述视频通话的声音采集。
2.根据权利要求1所述的方法，其特征在于，获取所述用户的耳部对应于所述显示屏上的第一位置以及所述用户的嘴部对应于所述显示屏上的第二位置，包括：
检测到所述用户于所述显示屏上做出第一预设手势的第一触控操作时，获取所述第一触控操作对应的位置，将所述第一触控操作对应的位置作为所述用户的耳部对应于所述显示屏上的第一位置；
检测到所述用户于所述显示屏上做出第二预设手势的第二触控操作时，获取所述第二触控操作对应的位置，将所述第二触控操作对应的位置作为所述用户的嘴部对应于所述显示屏上的第二位置。
3.根据权利要求1所述的方法，其特征在于，获取所述用户的耳部对应于所述显示屏上的第一位置以及所述用户的嘴部对应于所述显示屏上的第二位置，包括：
获取所述用户的用户人脸图像；
基于所述用户人脸图像，获取所述用户的耳部对应于所述显示屏上的第一位置以及所述用户的嘴部对应于所述显示屏上的第二位置。
4.根据权利要求3所述的方法，其特征在于，基于所述用户人脸图像，获取所述用户的耳部对应于所述显示屏上的第一位置以及所述用户的嘴部对应于所述显示屏上的第二位置，包括：
基于所述用户人脸图像，利用单目视觉定位原理获取所述用户的耳部相对所述显示屏的位置以及所述用户的嘴部相对所述显示屏的位置；
基于所述用户的耳部相对所述显示屏的位置，获取所述用户的耳部相距所述显示屏最近的位置，将所述耳部相距所述显示屏最近的位置作为所述用户的耳部对应于所述显示屏上的第一位置；
基于所述用户的嘴部相对所述显示屏的位置，获取所述用户的嘴部相距所述显示屏最近的位置，将所述嘴部相距所述显示屏最近的位置作为所述用户的嘴部对应于所述显示屏上的第二位置。
5.根据权利要求1-4中任一项所述的方法，其特征在于，在所述多个激励器以及所述多个振动监测模块分别对应的区域中，获取所述第一位置对应的第一发声区域，包括：
检测所述用户的耳部相距所述显示屏的距离；
判断所述耳部相距所述显示屏的距离是否大于第一预设距离；
当大于第一预设距离时，在所述多个激励器以及所述多个振动监测模块分别对应的区域中，获取所述第一位置所在的区域以及至少一个与其邻近的区域，作为所述第一位置对应的第一发声区域。
6.根据权利要求5所述的方法，其特征在于，检测所述用户的耳部相距所述显示屏的距离，包括：
检测所述用户相对于所述显示屏的距离，将所述用户相对于所述显示屏的距离作为所述用户的耳部相距所述显示屏的距离。
7.根据权利要求1-4中任一项所述的方法，其特征在于，在所述多个激励器以及所述多个振动监测模块分别对应的区域中，获取所述第二位置对应的第二发声区域，包括：
在所述多个激励器以及所述多个振动监测模块分别对应的区域中，获取所述第二位置所在的区域；
判断所述第二位置所在的区域是否为所述显示屏的边缘所在区域；
当为所述显示屏的边缘所在区域时，将所述第二位置所在的区域作为所述第二位置对应的第二发声区域，当不为所述显示屏的边缘所在区域时，获取所述第二位置所在的区域的邻近区域中靠近边缘所在区域的区域，作为所述第二位置对应的第二发声区域。
8.一种显示屏发声的装置，其特征在于，应用于电子装置，所述电子装置包括显示屏、多个用于驱动所述显示屏发声的激励器以及多个用于监测所述显示屏的振动而采集声音的振动监测模块，所述多个激励器分别对应所述显示屏的不同区域，所述多个振动监测模块分别对应所述显示屏的不同区域，且所述多个激励器与所述多个振动监测模块一一对应，所述装置包括：位置获取模块、区域获取模块、第一驱动模块以及第二驱动模块，其中，
所述位置获取模块用于在用户使用所述电子装置进行视频通话时，获取所述用户的耳部对应于所述显示屏上的第一位置以及所述用户的嘴部对应于所述显示屏上的第二位置，其中，所述第一位置为所述显示屏上相距所述用户的耳部最近的位置，所述第二位置为所述显示屏上相距所述用户的嘴部最近的位置；
所述区域获取模块用于在所述多个激励器以及所述多个振动监测模块分别对应的区域中，获取所述第一位置对应的第一发声区域，以及所述第二位置对应的第二发声区域；
所述第一驱动模块用于向所述第一发声区域对应的激励器发送第一驱动信号，以驱动所述第一发声区域进行所述视频通话的声音输出；
所述第二驱动模块用于向所述第二发声区域对应的振动监测模块发送第二驱动信号，以驱动所述第二发声区域进行所述视频通话的声音采集。
9.一种电子装置，其特征在于，包括触摸屏、存储器以及处理器，所述触摸屏与所述存储器耦接到所述处理器，所述存储器存储指令，当所述指令由所述处理器执行时所述处理器执行如权利要求1-7任一项所述的方法。
10.一种具有处理器可执行的程序代码的计算机可读取存储介质，其特征在于，所述程序代码使所述处理器执行如权利要求1-7任一项所述的方法。
11.一种电子装置，其特征在于，所述电子装置包括：显示屏；
多个激励器，用于驱动所述显示屏发声，所述多个激励器分别对应所述显示屏的不同区域，且所述多个激励器分别与所述对应的区域连接；
多个振动监测模块，用于监测所述显示屏的振动而采集声音，所述多个振动监测模块分别对应所述显示屏的不同区域，且所述多个振动监测模块分别与所述对应的区域连接；
电路，与所述多个激励器以及所述多个振动监测模块连接，所述电路包括检测电路和驱动电路，所述检测电路用于在用户使用所述电子装置进行视频通话时，获取所述用户的耳部对应于所述显示屏上的第一位置以及所述用户的嘴部对应于所述显示屏上的第二位置，其中，所述第一位置为所述显示屏上相距所述用户的耳部最近的位置，所述第二位置为所述显示屏上相距所述用户的嘴部最近的位置，在所述多个激励器以及所述多个振动监测模块分别对应的区域中，获取所述第一位置对应的第一发声区域，以及所述第二位置对应的第二发声区域，所述驱动电路，用于驱动所述第一发声区域进行所述视频通话的声音输出，驱动所述第二发声区域进行所述视频通话的声音采集。
CN201810488097.3A 2018-05-17 2018-05-17 显示屏发声的方法、装置、电子装置及存储介质 Active CN108881568B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810488097.3A CN108881568B (zh) 2018-05-17 2018-05-17 显示屏发声的方法、装置、电子装置及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810488097.3A CN108881568B (zh) 2018-05-17 2018-05-17 显示屏发声的方法、装置、电子装置及存储介质

Publications (2)

Publication Number Publication Date
CN108881568A CN108881568A (zh) 2018-11-23
CN108881568B true CN108881568B (zh) 2020-11-20

Family

ID=64333987

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810488097.3A Active CN108881568B (zh) 2018-05-17 2018-05-17 显示屏发声的方法、装置、电子装置及存储介质

Country Status (1)

Country Link
CN (1) CN108881568B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109600470B (zh) * 2018-12-04 2021-11-30 维沃移动通信有限公司 一种移动终端及其发声控制方法
CN109688492B (zh) * 2018-12-28 2020-11-27 上海创功通讯技术有限公司 声音拾取装置及电子设备
CN110225152B (zh) * 2019-04-25 2021-11-09 维沃移动通信有限公司 一种振动结构、振动方法和终端设备
CN112423205A (zh) * 2019-08-22 2021-02-26 Oppo广东移动通信有限公司 电子设备及其控制方法
CN110609589A (zh) * 2019-08-30 2019-12-24 Oppo广东移动通信有限公司 电子设备及其控制方法
CN112911466B (zh) * 2019-11-19 2023-04-28 中兴通讯股份有限公司 声音接收单元选择的方法和装置、终端、电子设备
CN111698358B (zh) * 2020-06-09 2021-07-16 Oppo广东移动通信有限公司 电子设备
CN113590251B (zh) * 2021-08-05 2024-04-12 四川艺海智能科技有限公司 单屏多窗口的数字化互动展示系统及方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103369439A (zh) * 2013-06-13 2013-10-23 瑞声科技（南京）有限公司 屏幕拾取声音系统以及应用该系统的终端设备
CN103778909A (zh) * 2014-01-10 2014-05-07 瑞声科技（南京）有限公司 屏幕发声系统及其控制方法
CN106101365A (zh) * 2016-06-29 2016-11-09 北京小米移动软件有限公司 通话过程中调整麦克风的方法及装置
CN107592592A (zh) * 2017-07-28 2018-01-16 捷开通讯(深圳)有限公司 显示面板、移动终端及屏幕发声控制方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110182443A1 (en) * 2010-01-26 2011-07-28 Gant Anthony W Electronic device having a contact microphone
US9954990B2 (en) * 2013-05-30 2018-04-24 Nokia Technologies Oy Panel speaker ear location

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103369439A (zh) * 2013-06-13 2013-10-23 瑞声科技（南京）有限公司 屏幕拾取声音系统以及应用该系统的终端设备
CN103778909A (zh) * 2014-01-10 2014-05-07 瑞声科技（南京）有限公司 屏幕发声系统及其控制方法
CN106101365A (zh) * 2016-06-29 2016-11-09 北京小米移动软件有限公司 通话过程中调整麦克风的方法及装置
CN107592592A (zh) * 2017-07-28 2018-01-16 捷开通讯(深圳)有限公司 显示面板、移动终端及屏幕发声控制方法

Also Published As

Publication number Publication date
CN108881568A (zh) 2018-11-23

Similar Documents

Publication Publication Date Title
CN109194796B (zh) 屏幕发声方法、装置、电子装置及存储介质
CN108881568B (zh) 显示屏发声的方法、装置、电子装置及存储介质
CN108833638B (zh) 发声方法、装置、电子装置及存储介质
CN108683761B (zh) 发声控制方法、装置、电子装置及计算机可读介质
CN108646971B (zh) 屏幕发声控制方法、装置以及电子装置
CN109032558B (zh) 发声控制方法、装置、电子装置及计算机可读介质
CN109032556B (zh) 发声控制方法、装置、电子装置以及存储介质
CN109189362B (zh) 发声控制方法、装置、电子设备及存储介质
CN109086023B (zh) 发声控制方法、装置、电子设备及存储介质
CN109085985B (zh) 发声控制方法、装置、电子装置以及存储介质
CN108958632B (zh) 发声控制方法、装置、电子设备及存储介质
CN109144460B (zh) 发声控制方法、装置、电子装置以及存储介质
CN109062535B (zh) 发声控制方法、装置、电子装置及计算机可读介质
CN108810198B (zh) 发声控制方法、装置、电子装置及计算机可读介质
CN109040919B (zh) 发声方法、装置、电子装置及计算机可读介质
CN108958697B (zh) 屏幕发声控制方法、装置以及电子装置
CN109086024B (zh) 屏幕发声方法、装置、电子装置及存储介质
CN108900728B (zh) 提醒方法、装置、电子装置及计算机可读介质
CN108810764B (zh) 发声控制方法、装置以及电子装置
CN109189360B (zh) 屏幕发声控制方法、装置以及电子装置
CN108712571A (zh) 显示屏发声的方法、装置、电子装置及存储介质
CN109144249B (zh) 屏幕发声方法、装置、电子装置及存储介质
CN108712706B (zh) 发声方法、装置、电子装置及存储介质
CN109240413B (zh) 屏幕发声方法、装置、电子装置及存储介质
CN108762711A (zh) 屏幕发声的方法、装置、电子装置及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant