CN116723257A - 一种图像显示方法及电子设备 - Google Patents
一种图像显示方法及电子设备 Download PDFInfo
- Publication number
- CN116723257A CN116723257A CN202210806906.7A CN202210806906A CN116723257A CN 116723257 A CN116723257 A CN 116723257A CN 202210806906 A CN202210806906 A CN 202210806906A CN 116723257 A CN116723257 A CN 116723257A
- Authority
- CN
- China
- Prior art keywords
- screen
- camera
- layer
- sensor
- angle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 157
- 230000008569 process Effects 0.000 claims abstract description 63
- 239000010410 layer Substances 0.000 claims description 223
- 230000015654 memory Effects 0.000 claims description 34
- 230000001133 acceleration Effects 0.000 claims description 22
- 238000004590 computer program Methods 0.000 claims description 13
- 239000012792 core layer Substances 0.000 claims description 13
- 238000003860 storage Methods 0.000 claims description 13
- 230000004044 response Effects 0.000 claims description 10
- 238000004891 communication Methods 0.000 description 26
- 230000006854 communication Effects 0.000 description 26
- 238000002360 preparation method Methods 0.000 description 26
- 230000006870 function Effects 0.000 description 23
- 238000010586 diagram Methods 0.000 description 16
- 238000007726 management method Methods 0.000 description 16
- 238000012545 processing Methods 0.000 description 16
- 238000010295 mobile communication Methods 0.000 description 12
- 230000003993 interaction Effects 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 6
- 230000008859 change Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 230000033001 locomotion Effects 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 230000001360 synchronised effect Effects 0.000 description 5
- 230000001960 triggered effect Effects 0.000 description 5
- 238000013528 artificial neural network Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 229920001621 AMOLED Polymers 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 230000003416 augmentation Effects 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 2
- 210000000988 bone and bone Anatomy 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 239000002096 quantum dot Substances 0.000 description 2
- 229920002430 Fibre-reinforced plastic Polymers 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 238000013529 biological neural network Methods 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000011151 fibre-reinforced plastic Substances 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000003238 somatosensory effect Effects 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
- H04M1/026—Details of the structure or mounting of specific components
- H04M1/0266—Details of the structure or mounting of specific components for a display module assembly
- H04M1/0268—Details of the structure or mounting of specific components for a display module assembly including a flexible display panel
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/4401—Bootstrapping
- G06F9/4411—Configuring for operating with peripheral devices; Loading of device drivers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/545—Interprogram communication where tasks reside in different layers, e.g. user- and kernel-space
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
- H04M1/026—Details of the structure or mounting of specific components
- H04M1/0264—Details of the structure or mounting of specific components for a camera module assembly
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
- H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computer Security & Cryptography (AREA)
- Environmental & Geological Engineering (AREA)
- Human Computer Interaction (AREA)
- Computer Networks & Wireless Communication (AREA)
- Telephone Function (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
一种图像显示方法及电子设备,涉及终端技术领域,可以在电子设备的折叠屏切换的过程中,提高目标摄像头的送显效率。该方法应用于具有折叠屏的电子设备,该电子设备包括内屏和外屏,内屏包括第一屏幕和第二屏幕,电子设备包括第一摄像头和第二摄像头,第一摄像头设置在内屏下方,第二摄像头设置在外屏下方,电子设备还包括应用程序框架层和第一层,第一层位于应用程序框架层和电子设备的硬件单元之间,该方法包括:第一层确定第一屏幕和第二屏幕之间的夹角;在第一屏幕和第二屏幕之间的夹角达到预设角度范围的情况下,第一层触发第一摄像头和第二摄像头中的目标摄像头采集的图像送显。
Description
本申请是分案申请,原申请的申请号是202210185763.2,原申请日是2022年02月28日,原申请的全部内容通过引用结合在本申请中。
技术领域
本申请涉及终端技术领域,尤其涉及一种图像显示方法及电子设备。
背景技术
随着电子设备和显示屏的不断发展,以及人们生活需求的提高,显示屏具有折叠功能的电子设备应运而生。目前,相机功能是电子设备提供的常用功能,用户通过电子设备可以进行视频通话、拍照或录像等。具有可折叠屏的电子设备的内外屏摄像头随屏幕折叠和展开动态切换。比如,电子设备的内屏显示和预览图像时,电子设备采用内屏前置摄像头预览和采集图像,电子设备的外屏显示和预览图像时,电子设备采用外屏前置摄像头预览和采集图像。但是,在电子设备的内外屏切换的过程中,存在内外屏摄像头切换速率较慢,导致屏幕切换过程不流畅,画面不连贯等问题。
发明内容
本申请实施例提供一种图像显示方法及电子设备,该图像显示方法应用于具有折叠屏的电子设备,该电子设备包括内屏和外屏,内屏包括第一屏幕和第二屏幕,通过电子设备的硬件抽象层或内核层确定第一屏幕和第二屏幕之间的夹角达到预设角度范围的时,硬件抽象层或内核层直接触发目标摄像头采集的图像送显,从而减少了跨服务/组件交互流程,节省了决策时间,提高了内/外屏前置摄像头的切换效率。此外,当硬件抽象层或内核层确定第一屏幕和第二屏幕之间的夹角满足切换准备阶段的角度阈值时,硬件抽象层或内核层控制目标摄像头进行摄像头初始化操作(比如,上电、配置寄存器序列等操作),从而减少了摄像头送显图像的时间,提升了摄像头切换的效率,提高了用户使用体验。
为达到上述目的,本申请采用如下技术方案:
第一方面,本申请实施例提供一种图像显示方法,该方法应用于具有折叠屏的电子设备,电子设备包括内屏和外屏,内屏包括第一屏幕和第二屏幕,电子设备包括第一摄像头和第二摄像头,第一摄像头设置在内屏下方,第二摄像头设置在外屏下方,电子设备还包括应用程序框架层和第一层,第一层位于应用程序框架层和电子设备的硬件单元之间,包括:第一层确定第一屏幕和第二屏幕之间的夹角;在第一屏幕和第二屏幕之间的夹角达到预设角度范围的情况下,第一层触发第一摄像头和第二摄像头中的目标摄像头采集的图像送显。
其中,第一层可以包括硬件抽象层和/或内核层。假设第一层为硬件抽象层,硬件抽象层获取到内核层发送的传感器采集的信息,硬件抽象层确定第一屏幕和第二屏幕之间的夹角,当硬件抽象层确定第一屏幕和第二屏幕之间的夹角达到某一预设角度范围时,硬件抽象层触发第一摄像头和第二摄像头中的目标摄像头采集的图像送显。假设第一层为内核层,内核层根据传感器采集的信息,内核层确定第一屏幕和第二屏幕之间的夹角,当内核层确定第一屏幕和第二屏幕之间的夹角达到某一预设角度范围时,内核层触发第一摄像头和第二摄像头中的目标摄像头采集的图像送显。
上述第一摄像头可以是内屏的前置摄像头,上述第二摄像头可以是外屏的前置摄像头。
在本申请实施例中,当第一层确定第一屏幕和第二屏幕之间的夹角在预设角度范围内时,由位于应用程序框架层之下的第一层直接触发目标摄像头采集的图像送显,从而减少了跨服务/组件交互流程,节省了决策时间。
在一种可能的实现方式中,在第一层触发第一摄像头和第二摄像头中的目标摄像头采集的图像送显之前,方法还包括:第一层获取电子设备的屏幕状态标识;第一层根据屏幕状态标识从内屏和外屏中确定出呈现图像的目标屏幕;在第一屏幕和第二屏幕之间的夹角达到预设角度范围的情况下,第一层触发第一摄像头和第二摄像头中的目标摄像头采集的图像送显,包括:在第一屏幕和第二屏幕之间的夹角达到预设角度范围的情况下,第一层触发第一摄像头和第二摄像头中的目标摄像头采集的图像在目标屏幕呈现。
其中,屏幕状态标识用于指示电子设备当前由内屏切换至外屏,或者,电子设备当前由外屏切换至内屏。
在本申请实施例中,电子设备通过屏幕状态标识确定呈现图像的目标屏幕,并在第一屏幕和第二屏幕之间的夹角满足角度要求的情况下,将目标摄像头采集的图像在目标屏幕呈现,能够尽可能避免摄像头送显的图像与目标屏幕不匹配的情况发生,能够在一定程度上提高用户体验。
在一实施例中,第一层获取到电子设备的屏幕状态标识后,若第一层根据屏幕状态标识确定电子设备由内屏切换至外屏,则在第一屏幕和第二屏幕之间的夹角达到预设角度范围的情况下,第一层触发目标摄像头采集的图像在外屏呈现。若第一层根据屏幕状态标识确定电子设备由外屏切换至内屏,则在第一屏幕和第二屏幕之间的夹角达到预设角度范围的情况下,第一层触发目标摄像头采集的图像在内屏呈现。在另一种可能的实现方式中,在折叠屏由展开状态切换到折叠状态过程中,在第一屏幕和第二屏幕之间的夹角达到预设角度范围的情况下,第一层触发第一摄像头和第二摄像头中的目标摄像头采集的图像在目标屏幕呈现,包括:在第一屏幕和第二屏幕之间的夹角小于第一预设角度,且由外屏呈现图像的情况下,第一层触发第二摄像头采集的图像在外屏呈现。
可以理解为,在折叠屏由展开状态切换到折叠状态过程中,第一层根据第一屏幕和第二屏幕之间的夹角,确定触发第二摄像头采集的图像在外屏呈现之前,第一层确定电子设备已经由内屏切换至外屏,从而避免了第一层触发第二摄像头采集的图像送显时,外屏未被点亮,导致第二摄像头采集的图像无法及时送显的问题。
在另一种可能的实现方式中,在折叠屏由折叠状态切换到展开状态过程中,在第一屏幕和第二屏幕之间的夹角达到预设角度范围的情况下,第一层触发第一摄像头和第二摄像头中的目标摄像头采集的图像在目标屏幕呈现,包括:在第一屏幕和第二屏幕之间的夹角大于第二预设角度,且由内屏呈现图像的情况下,第一层触发第一摄像头采集的图像在内屏呈现。
可以理解为,在折叠屏由折叠状态切换到展开状态过程中,第一层根据第一屏幕和第二屏幕之间的夹角,确定触发第一摄像头采集的图像在内屏呈现之前,第一层确定电子设备已经由外屏切换至内屏,从而避免了第一层触发第一摄像头采集的图像送显时,内屏未被点亮,导致第一摄像头采集的图像无法及时送显的问题。
在另一种可能的实现方式中,第一层触发第二摄像头采集的图像在外屏呈现之前,上述图像显示方法还可以包括:当第一层确定第一屏幕和第二屏幕之间的夹角小于第三预设角度的情况下,第一层触发第二摄像头进行摄像头初始化操作,其中,第三预设角度大于第一预设角度。
可以理解为,折叠屏由展开状态切换至折叠状态的过程中,第一屏幕和第二屏幕之间的夹角是逐渐减小的,当第一层确定第一屏幕和第二屏幕之间的夹角小于第三预设角度时,第一屏触发第二摄像头进行摄像头初始化操作,比如,第一屏触发第二摄像头进行上电、配置寄存器序列等操作。当第一层确定第一屏幕和第二屏幕之间的夹角小于第一预设角度时,第一屏可以直接触发第二摄像头采集的图像在外屏呈现。由此,第一层可以控制初始化后的第二摄像头采集的图像送显,提高了第二摄像头送显图像的效率。
在另一种可能的实现方式中,第一层触发第一摄像头采集的图像在内屏呈现之前,方法还包括:当第一层确定第一屏幕和第二屏幕之间的夹角大于第四预设角度时,第一层触发第一摄像头进行摄像头初始化操作,其中,第四预设角度小于第二预设角度。
可以理解为,折叠屏由折叠状态切换至展开状态的过程中,第一屏幕和第二屏幕之间的夹角是逐渐增大的,当第一层确定第一屏幕和第二屏幕之间的夹角大于第四预设角度时,第一屏触发第一摄像头进行摄像头初始化操作,比如,第一屏触发第一摄像头进行上电、配置寄存器序列等操作。当第一层确定第一屏幕和第二屏幕之间的夹角大于第二预设角度时,第一屏可以直接触发第一摄像头采集的图像在内屏呈现。由此,第一层可以控制初始化后的第一摄像头采集的图像直接送显,提高了第一摄像头送显图像的效率。
在另一种可能的实现方式中,在第一层触发第二摄像头采集的图像在外屏呈现之前,上述图像显示方法还可以包括:应用程序框架层获取第一屏幕和第二屏幕之间的夹角;在第一屏幕和第二屏幕之间的夹角小于第五预设角度的情况下,应用程序框架层触发外屏进行屏幕初始化操作;在第一屏幕和第二屏幕之间的夹角小于第六预设角度的情况下,应用程序框架触发电子设备将内屏切换成外屏,并确定电子设备的屏幕状态标识为第一标识,第一标识用于指示由外屏呈现显示图像,其中,第六预设角度小于第五预设角度。
其中,屏幕初始化操作包括屏幕的上电、显示参数调整等操作。
在本申请实施例中,折叠屏由展开状态切换至折叠状态的过程中,且外屏呈现图像之前,应用程序框架层可以根据第一屏幕和第二屏幕之间的夹角,触发外屏进行屏幕初始化操作,当应用程序框架层确定第一屏幕和第二屏幕之间的夹角小于第六预设角度时,应用程序框架层直接触发外屏点亮,避免了屏幕初始化的过程,提高了屏幕切换的效率。
此外,应用程序框架层根据折叠屏的屏幕状态,对屏幕状态进行标记,比如,当应用程序框架层确定由外屏呈现图像时,应用程序框架层将屏幕状态标识标记为第一标识,当应用程序框架层确定由内屏呈现图像时,应用程序框架层将屏幕状态标识标记为第二标识。由此,当第一层触发目标摄像头采集的图像在内屏或外屏呈现时,第一层可以从应用程序框架层获取屏幕状态标识,以根据屏幕状态标识从内屏或外屏中确定出呈现图像的目标屏幕。
在另一种可能的实现方式中,在第一层触发第一摄像头采集的图像在内屏呈现之前,上述图像显示方法还可以包括:应用程序框架层获取第一屏幕和第二屏幕之间的夹角;在第一屏幕和第二屏幕之间的夹角大于第七预设角度的情况下,应用程序框架层触发内屏进行屏幕初始化操作;在第一屏幕和第二屏幕之间的夹角大于第八预设角度的情况下,应用程序框架触发电子设备将外屏切换成外屏,并确定电子设备的屏幕状态标识为第二标识,第二标识用于指示由内屏呈现显示图像,其中,第八预设角度大于第七预设角度。
在另一种可能的实现方式中,第一层为硬件抽象层,电子设备还包括内核层,内核层位于硬件抽象层和电子设备的硬件单元之间,第一层确定第一屏幕和第二屏幕之间的夹角,包括:硬件抽象层通过内核层获取传感器采集的信息,传感器包括角度传感器、陀螺仪传感器以及加速度传感器中的至少一个;硬件抽象层根据传感器采集的信息,确定第一屏幕和第二屏幕之间的夹角。
在本申请实施例中,内核层的传感器驱动获取传感器采集的信息后,传感器驱动将传感器采集的信息发送至硬件抽象层,硬件抽象层根据传感器采集的信息,确定第一屏幕和第二屏幕之间的夹角。相较于现有技术中,内核层通过硬件抽象层将传感器采集的信息上传至应用程序框架层,应用程序框架层根据传感器采集的信息确定第一屏幕和第二屏幕之间的夹角,存在跨组件传输信息的问题,本申请实施例中,硬件抽象层无需将传感器采集的信息上传至应用程序框架层,减少了跨组件的交互流程。
在另一种可能的实现方式中,第一层为内核层,第一层确定第一屏幕和第二屏幕之间的夹角,包括:内核层获取传感器采集的信息,传感器包括角度传感器、陀螺仪传感器以及加速度传感器中的至少一个;内核层根据传感器采集的信息,确定第一屏幕和第二屏幕之间的夹角。
在本申请实施例中,内核层的传感器驱动获取到传感器采集的信息后,内核层直接根据传感器采集的信息,确定第一屏幕和第二屏幕之间的夹角。可见,内核层无需与上层交互,可以直接计算出第一屏幕和第二屏幕之间的夹角,提高了计算效率。
在另一种可能的实现方式中,电子设备处于视频通话场景下,折叠屏处于展开状态的情况下,内屏显示第一摄像头采集的图像;或者,折叠屏处于折叠状态的情况下,外屏显示第二摄像头采集的图像。
第二方面,本申请提供一种电子设备,该电子设备具有折叠屏,电子设备包括内屏和外屏,上述内屏包括第一屏幕和第二屏幕,上述电子设备包括第一摄像头和第二摄像头,第一摄像头设置在内屏下方,第二摄像头设置在外屏下方,电子设备还包括应用程序框架层和第一层,第一层位于应用程序框架层和电子设备的硬件单元之间。该第一层用于确定第一屏幕和第二屏幕之间的夹角后,在第一屏幕和第二屏幕之间的夹角达到预设角度范围的情况下,第一层触发第一摄像头和第二摄像头中的目标摄像头采集的图像送显。
第三方面,本申请提供一种电子设备,包括:折叠屏,折叠屏包括至少两个屏幕;一个或多个处理器;存储器;其中,存储器中存储有一个或多个计算机程序,一个或多个计算机程序包括指令,当指令被电子设备执行时,使得电子设备执行如上述第一方面中任一项所述的图像显示方法。
第四方面,本申请提供一种计算机可读存储介质,计算机可读存储介质中存储有指令,当指令在电子设备上运行时,使得电子设备执行如第一方面中任一项所述的图像显示方法。
第五方面,本申请提供一种计算机程序产品,计算机程序产品包括计算机指令,当计算机指令在电子设备上运行时,使得电子设备执行如第一方面中任一项所述的图像显示方法。
可以理解地,上述提供的第二方面和第三方面所述的电子设备、第四方面所述的计算机存储介质,以及第五方面所述的计算机程序产品均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
附图说明
图1为本申请实施例提供的一种折叠屏手机折叠时的示意图;
图2为本申请实施例提供的一种折叠屏手机展开时的示意图;
图3为本申请实施例提供的一种图像显示方法的流程示意图一;
图4为本申请实施例提供的一种图像显示方法的应用场景示意图一;
图5为本申请实施例提供的电子设备的一种结构示意图;
图6为本申请实施例提供的一种计算A屏幕和B屏幕的夹角的原理示意图;
图7为本申请实施例提供的一种地理坐标系的实例示意图;
图8为本申请实施例提供的电子设备的另一种结构示意图;
图9为本申请实施例提供的一种图像显示方法的流程示意图二;
图10为本申请实施例提供的一种图像显示方法的流程示意图三;
图11为本申请实施例提供的一种图像显示方法的应用场景示意图二;
图12为本申请实施例提供的一种图像显示方法的流程示意图四;
图13为本申请实施例提供的一种图像显示方法的应用场景示意图三;
图14为本申请实施例提供的一种图像显示方法的流程示意图五;
图15为本申请实施例提供的一种图像显示方法的流程示意图六;
图16为本申请实施例提供的一种图像显示方法的流程示意图七;
图17为本申请实施例提供的一种图像显示方法的应用场景示意图四;
图18为本申请实施例提供的电子设备的又一种结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述。其中,在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;本文中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本申请实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
在本申请实施例中,“示例性的”或者“例如”等词用于表示作例子、例证或说明。本申请实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
本申请实施例中的电子设备包括可折叠屏,该可折叠屏可以沿折叠轴线展开或者折叠,在不同状态下可以呈现不同的显示区域。以电子设备为折叠屏手机为例,说明电子设备在不同状态下呈现不同的显示区域。
图1为本申请实施例提供的一种折叠屏手机折叠时的示意图。如图1中的(a)所示,折叠屏手机处于完全折叠状态且开启外屏摄像头1时,外屏摄像头1采集的图像由外屏11预览显示。如图1中的(b)所示,折叠屏手机处于折叠状态且开启外屏后置摄像头2时,外屏后置摄像头2采集的图像由外屏11预览显示。
图2为本申请实施例提供的一种折叠屏手机展开时的示意图。折叠屏手机的展开过程如图2中的(a)至图2中的(b)所示。如图2中的(b)所示,假设折叠屏手机处于展开状态且开启内屏前置摄像头3时,内屏前置摄像头3采集的图像可以由第一屏幕21和第二屏幕22构成的大屏预览显示,也可以仅由第一屏幕21或第二屏幕22预览显示,此处不做限定。图2中的折叠屏手机处于完全展开状态时,手机的屏幕角度θ可以为180°或者近似为180°,能够实现大屏显示,可以给用户提供更丰富的信息,带给用户更好的使用体验。其中,手机的屏幕角度θ是第一屏幕21和第二屏幕22(或者,第一屏幕21和第二屏幕22所在的平面)之间的夹角。如图2中的(c)所示,从折叠屏手机的外部来看,可折叠屏呈现外屏23。假设折叠屏手机处于展开状态且开启外屏前置摄像头1时,外屏前置摄像头1采集的图像由外屏23预览显示。其中,外屏23可以设置在第一屏幕21或第二屏幕22的背面,此处不做限定。
需要解释的是,第一屏幕21和第二屏幕22之间的夹角θ的取值范围可以为[0°,180°]。在本申请实施例中,若θ在[0°,X]范围内,可以确定折叠屏手机处于折叠状态,若θ在(X,180°]范围内,可以确定折叠屏手机处于展开状态。其中,X为预设角度阈值。X可以由用户在电子设备中设定,也可以是电子设备根据用户的使用习惯确定的,本申请实施例中对X的取值不做限定。比如,X可以设置为90°,若第一屏幕21和第二屏幕22之间的夹角θ小于或等于90°,则确定折叠屏手机处于折叠状态;若第一屏幕21和第二屏幕22之间的夹角θ大于90°,则确定折叠屏手机处于折叠状态。当然,X也可以设置为其它取值,比如X可以设置为80°、85°或95°等等,此处不做限定。
在一些实施例中,当电子设备的折叠屏处于折叠状态且用户使用外屏前置摄像头进行视频通话或拍摄图像时,电子设备使用外屏前置摄像头采集图像,并由外屏显示由外屏前置摄像头采集的预览图像。若电子设备响应于用户手动打开折叠屏的操作,折叠屏由折叠状态切换至展开状态,则电子设备使用内屏前置摄像头采集图像,并由内屏显示由内屏前置摄像头采集的预览图像。可见,电子设备在视频通话或拍照场景下,电子设备的摄像头随着屏幕状态进行切换,实现了由外屏前置摄像头采集图像切换至内屏前置摄像头采集图像的过程,且实现了由外屏显示预览图像切换至内屏显示预览图像的过程。
同样的,当电子设备的折叠屏处于展开状态且用户使用内屏前置摄像头进行视频通话或拍摄图像时,电子设备使用内屏前置摄像头采集图像,并由内屏显示内屏前置摄像头采集的预览图像。若电子设备响应于用户手动折起折叠屏的操作,折叠屏由展开状态切换至折叠状态,则电子设备使用外屏前置摄像头采集图像,并由外屏显示由外屏前置摄像头采集的预览图像。可见,电子设备在视频通话或拍照场景下,电子设备的摄像头随着屏幕状态进行切换,实现了由内屏前置摄像头采集图像切换至外屏前置摄像头采集图像的过程,且实现了由内屏显示预览图像切换至外屏显示预览图像的过程。
下面对相关技术中在屏幕折叠或展开的过程中,外屏前置摄像头和内屏前置摄像头的相关切换过程进行介绍。
相关技术中,电子设备的应用程序框架层获取至少一个传感器采集的信息后,应用程序框架层根据至少一个传感器采集的信息,确定折叠屏的屏幕状态。应用程序框架层根据折叠屏的屏幕状态确定用于送显图像的目标摄像头。应用程序框架层将目标摄像头信息发送至硬件抽象层(hardware abstract layer,HAL),硬件抽象层触发目标摄像头采集的图像在目标显示屏显示。其中,目标显示屏为折叠屏的屏幕状态对应的显示屏。比如,折叠屏的屏幕状态为展开状态,目标显示屏为由折叠屏的第一屏幕和第二屏幕处于展开状态时组成的显示大屏。
示例性的,下面结合图3以采用应用程序进行视频通话或者拍摄图像的场景为例,对相关技术中折叠屏手机折叠或展开过程中,外屏前置摄像头和内屏前置摄像头的切换过程进行说明。如图3所示,手机中的/>响应于用户的操作,采用前置摄像头进行视频通话或拍摄图像时,传感器驱动可以实时或周期性的获取至少一个传感器采集的数据。传感器驱动将至少一个传感器采集的数据发送至显示决策模块。显示决策模块根据至少一个传感器采集的数据确定折叠屏的第一屏幕和第二屏幕之间的夹角。然后,显示决策模块根据电子设备的第一屏幕和第二屏幕之间的夹角以及角度阈值,确定折叠屏的屏幕状态。显示决策模块将折叠屏的屏幕状态发生至摄像头决策模块。摄像头决策模块根据折叠屏的屏幕状态确定用于送显图像的目标摄像头。摄像头决策模块将目标摄像头的摄像头标识发送至摄像头硬件抽象模块,摄像头硬件抽象模块根据目标摄像头的摄像头标识,控制对应的摄像头驱动触发目标摄像头送显图像。
作为一种示例,假设目标摄像头为内屏前置摄像头,摄像头硬件抽象模块可以向内屏前置摄像头驱动发送该内屏前置摄像头的标识。然后,内屏前置摄像头驱动对该内屏前置摄像头进行上电等操作,启动该内屏前置摄像头。
由图3可知,电子设备切换屏幕以及内外屏前置摄像头显示图像时,整个执行流程涉及到电子设备的内核层、硬件抽象层以及应用程序框架层,显然,电子设备的摄像头随屏幕物理状态进行切换的整个执行流程较长,从而导致摄像头切换时存在送显效率低的缺点。比如,电子设备的折叠屏由折叠状态切换至展开状态,且由外屏前置摄像头采集图像切换至由内屏前置摄像头采集图像后,存在内屏中显示外屏前置摄像头采集的预览图像,或者存在内屏黑屏的情况。
示例性的,如图4中的(a)所示,假设用户采用电子设备在折叠状态时进行视频通话,即电子设备的外屏前置摄像头1采集用户图像,电子设备的外屏显示外屏前置摄像头1采集的用户预览图像。电子设备的折叠屏响应于用户操作由折叠状态切换至展开状态,即电子设备的由外屏显示预览图像切换至内屏显示预览图像。如图4中的(b)所示,电子设备的摄像头并未从外屏前置摄像头1成功切换至内屏前置摄像头3,导致电子设备的内屏中不存在显示内容。
为此,本申请实施例提供一种图像显示方法,应用于具有折叠屏的电子设备,该方法中通过在硬件抽象层或内核层确定第一屏幕和第二屏幕之间的夹角满足切换阶段的角度阈值时,硬件抽象层或内核层直接控制目标摄像头切换送显,从而减少了跨服务/组件交互流程,节省了决策时间,提高了内外屏前置摄像头的切换效率。此外,当硬件抽象层或内核层确定折叠屏的第一屏幕和第二屏幕之间的夹角达到预设角度范围时,硬件抽象层或内核层控制目标摄像头进行切换准备工作(比如,上电、配置寄存器序列等操作),从而减少了摄像头送显图像的时间,提升了摄像头切换的效率,从而提高了用户使用体验。
示例性的,本申请实施例提供的电子设备的显示方法可应用于手机、平板电脑、个人计算机(personal computer,PC)、个人数字助理(personal digital assistant,PDA)、智能手表、上网本、可穿戴电子设备、增强现实技术(augmented reality,AR)设备、虚拟现实(virtual reality,VR)设备、车载设备、智能汽车、智能音响等具有折叠屏的电子设备,本申请实施例对此不做任何限制。
如图5所示,图5为本申请实施例提供的一种电子设备的结构示意图。
电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
可以理解的是,本申请实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
其中,控制器可以是电子设备100的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。I2S接口可以用于音频通信。PCM接口也可以用于音频通信,将模拟信号抽样,量化和编码。UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。
MIPI接口可以被用于连接处理器110与显示屏194,摄像头193等外围器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(displayserial interface,DSI)等。GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。USB接口130是符合USB标准规范的接口,具体可以是Mini USB接口,Micro USB接口,USB Type C接口等。USB接口130可以用于连接充电器为电子设备100充电,也可以用于电子设备100与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如AR设备等。
在本申请实施例中,处理器110可以控制MIPI接口开关关闭内屏前置摄像头,开启内屏前置摄像头的出图通路,或者,控制控制MIPI接口开关关闭外屏前置摄像头,开启内屏前置摄像头的出图通路,从而实现了切换摄像头出图通路的目的。
可以理解的是,本申请实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本申请另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,外部存储器,显示屏194,摄像头193,和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A,受话器170B等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其他设备通信。无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(codedivision multiple access,CDMA),宽带码分多址(wideband code division multipleaccess,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidounavigation satellite system,BDS),准天顶卫星系统(quasi-zenith satellitesystem,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
电子设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备100可以包括1个或N个显示屏194,N为大于1的正整数。
可选地,该电子设备100的显示屏194可以是柔性折叠屏。柔性折叠屏包括采用柔性材质制作的折叠边。该柔性折叠屏的部分或全部采用柔性材质制作。柔性折叠屏被折叠后形成的两个屏是一体结构的一个完整屏,两个屏可以理解为两个显示区域。或者,该电子设备100的可折叠屏可以为多屏折叠屏。该多屏折叠屏可包括多个(两个或两个以上)屏。这多个屏是多个单独的显示屏。这多个屏可依次通过折叠轴连接。每个屏可以绕与其连接的折叠轴转动,实现多屏折叠屏的折叠。
电子设备100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,电子设备100可以包括1个或N个摄像头193,N为大于1的正整数。
在本申请实施例中,摄像头193可以包括外屏前置摄像头,内屏前置摄像头以及后置摄像头等。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行电子设备100的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。
电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。
陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180B检测电子设备100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180B还可以用于导航,体感游戏场景。本申请实施例中,电子设备100的折叠屏可折叠形成多个屏幕。每个屏幕中可以包括陀螺仪传感器180B,用于测量对应屏幕的朝向(即朝向的方向向量)。电子设备100可以根据测量得到的每个屏幕的朝向的角度变化,可以确定出相邻屏幕的夹角。
需要注意的是,本申请实施例中,电子设备包括折叠屏,电子设备被折叠后使得折叠屏分为多个显示区域,每个显示区域称为一个屏。每个屏幕上可以包括陀螺仪传感器180B,用于测量对应屏的朝向(即朝向的方向向量)。例如,如图2中的(a)所示,电子设备被折叠后形成第一屏幕和第二屏幕,第一屏幕和第二屏幕中均设置有陀螺仪传感器180B,可以分别测量第一屏幕和第二屏幕的朝向。电子设备根据测量得到的每个屏幕的朝向角度变化,确定出第一屏幕和第二屏幕的夹角。
例如,电子设备100被折叠形成图6所示的第一屏幕(图示A屏幕)和第二屏幕(图示B屏幕),A屏幕中设置有陀螺仪传感器A,B屏幕设置有陀螺仪传感器B。本申请实施例这里,对陀螺仪传感器A测量A屏幕的朝向(即朝向的方向向量),陀螺仪传感器B测量B屏幕的朝向(即朝向的方向向量)的原理,以及电子设备100根据A屏幕的朝向和B屏幕的朝向计算A屏幕和B屏幕的夹角θ的原理进行说明。
其中,陀螺仪传感器的坐标系是地理坐标系。如图7所示,地理坐标系的原点O位于运载体(即包含陀螺仪传感器的设备,如电子设备100)所在的点,x轴沿当地纬线指向东(E),y轴沿当地子午线线指向北(N),z轴沿当地地理垂线指向上,并与x轴和y轴构成右手直角坐标系。其中,x轴与y轴构成的平面即为当地水平面,y轴与z轴构成的平面即为当地子午面。因此,可以理解的是,陀螺仪传感器的坐标系是:以陀螺仪传感器为原点O,沿当地纬线指向东为x轴,沿当地子午线线指向北为y轴,沿当地地理垂线指向上(即地理垂线的反方向)为z轴。
电子设备100利用每个屏中设置的陀螺仪传感器180B,便可测量得到每个屏在其设置的陀螺仪传感器的坐标系中的朝向的方向向量。例如,参考如图6所示的电子设备的侧视图,电子设备测量得到的A屏幕在陀螺仪传感器A的坐标系中的朝向的方向向量为向量z1,B屏幕在陀螺仪传感器B的坐标系中的朝向的方向向量为向量z2。电子设备100利用公式(1),便可计算出向量z1与向量z2的夹角α。其中,公式(1)如下:
又根据图6可知,由于向量z1与A屏幕垂直,向量z2与B屏幕垂直,因此,可以得到A屏幕与B屏幕的夹角θ=180°-α。即电子设备根据测量得到的A屏幕在陀螺仪传感器A的坐标系中的朝向的方向向量(即向量z1)和B屏幕在陀螺仪传感器B的坐标系中的朝向的方向向量(即向量z2),便可确定出A屏幕与B屏幕的夹角θ。
需要说明的是,虽然A屏幕和B屏幕中设置的陀螺仪传感器的位置并不重叠,即A屏幕和B屏幕的陀螺仪传感器的坐标系的原点并不重叠,但是,两个坐标系的x轴、y轴、z轴是平行的,从而可以认为A屏幕和B屏幕中设置的陀螺仪传感器的坐标系是平行的。这样一来,虽然向量z1和向量z2不在同一个坐标系,但是因为两个坐标系的各轴平行,因此,仍可通过上述公式(1)计算向量z1与向量z2的夹角α。
在一些实施例中,还可以由其他一个或多个传感器配合,测量A屏幕与B屏幕的夹角θ。例如,折叠屏的每个屏幕中均可设置一个加速度传感器180E。电子设备100(如处理器110)可利用加速度传感器测量每个屏幕被转动时的运动加速度;然后根据测量得到的运动加速度计算一个屏相对于另一个屏转动的角度,即A屏幕与B屏幕的夹角θ。
在另一些实施例中,上述陀螺仪传感器180B可以是由其他多个传感器配合形成的虚拟陀螺仪传感器。该虚拟陀螺仪传感器可用于计算折叠屏的相邻屏幕的夹角,即A屏幕与B屏幕的夹角θ。
气压传感器180C用于测量气压。磁传感器180D包括霍尔传感器。电子设备100可以利用磁传感器180D检测翻盖皮套的开合。
加速度传感器180E可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
距离传感器180F,用于测量距离。电子设备100可以通过红外或激光测量距离。接近光传感器180G可以包括例如发光二极管(LED)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定电子设备100附近有物体。当检测到不充分的反射光时,电子设备100可以确定电子设备100附近没有物体。电子设备100可以利用接近光传感器180G检测用户手持电子设备100贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器180G也可用于皮套模式,口袋模式自动解锁与锁屏。
环境光传感器180L用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180L也可用于拍照时自动调节白平衡。环境光传感器180L还可以与接近光传感器180G配合,检测电子设备100是否在口袋里,以防误触。
指纹传感器180H用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。温度传感器180J用于检测温度。
触摸传感器180K,也称“触控面板”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。骨传导传感器180M可以获取振动信号。
按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入,产生与电子设备100的用户设置以及功能控制有关的键信号输入。
马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
SIM卡接口195用于连接SIM卡。SIM卡可以通过插入SIM卡接口195,或从SIM卡接口195拔出,实现和电子设备100的接触和分离。电子设备100可以支持1个或N个SIM卡接口,N为大于1的正整数。SIM卡接口195可以支持Nano SIM卡,Micro SIM卡,SIM卡等。同一个SIM卡接口195可以同时插入多张卡。多张卡的类型可以相同,也可以不同。SIM卡接口195也可以兼容不同类型的SIM卡。SIM卡接口195也可以兼容外部存储卡。电子设备100通过SIM卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,电子设备100采用eSIM,即:嵌入式SIM卡。eSIM卡可以嵌在电子设备100中,不能和电子设备100分离。
电子设备的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本发明实施例以分层架构的Android系统为例,示例性说明电子设备的软件结构。
图8为本申请实施例提供的电子设备的另一种结构示意图。
可以理解的是,分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,Android系统可以包括应用程序层(简称为应用层)和应用程序框架层(简称为框架层),硬件抽象层和内核层。
上述应用程序层可以包括一系列应用程序包。
如图8所示,应用程序包可以包括系统应用。其中,系统应用是指电子设备在出厂之前设置在电子设备内的应用。示例性的,系统应用可以包括相机、图库、日历、音乐、短信息以及通话等程序。
应用程序包还可以包括第三方应用,第三方应用是指用户从应用商店(或者应用市场)下载安装包后安装的应用。例如,地图类应用(例如等)、外卖类应用(例如/>等)、阅读类应用(例如电子书)、社交类应用(例如/>)以及出行类应用(例如/>)等。
上述应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图8所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器,显示决策模块,摄像头决策模块等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供电子设备的通信功能。例如通话状态的管理(包括接通,挂断等)。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,手机振动,指示灯闪烁等。
显示决策模块用于根据电子设备的当前屏幕的角度,确定是否切换电子设备的屏幕显示。
摄像头决策模块用于根据电子设备的当前屏幕的角度,确定是否切换电子设备的内外屏摄像头采集图像。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
HAL是对底层硬件驱动进行了一层封装,向应用程序框架层提供调用驱动的通用接口。在本申请实施例中,硬件抽象层可以包括传感器硬件抽象模块和摄像头硬件抽象模块。
传感器硬件抽象模块用于接收传感器采集的信息后,根据传感器采集的信息确定电子设备的第一屏幕和第二屏幕之间的夹角,并将第一屏幕和第二屏幕之间的夹角发送至摄像头硬件抽象模块和/或显示决策模块。
摄像头硬件抽象模块用于确定电子设备的第一屏幕和第二屏幕之间的夹角满足切换准备阶段的角度阈值时,控制目标摄像头进行摄像头初始化操作,确定电子设备的第一屏幕和第二屏幕之间的夹角满足切换阶段的阈值时,触发已经完成初始化操作的目标摄像头送显图像。
内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动以及传感器驱动。
在一些实施例中,传感器驱动可以用于获取传感器采集的信息后,根据传感器采集的信息确定电子设备的第一屏幕和第二屏幕之间的夹角,并将的第一屏幕和第二屏幕之间的夹角发送至摄像头驱动。
摄像头驱动可以用于确定电子设备的第一屏幕和第二屏幕之间的夹角满足切换准备阶段的角度阈值时,控制目标摄像头进行摄像头初始化操作,确定电子设备的第一屏幕和第二屏幕之间的夹角满足切换阶段的阈值时,触发已经完成初始化操作的目标摄像头送显图像。
在一些实施例中,摄像头驱动可以包括外屏前置摄像头驱动和内屏前置摄像头驱动,其中,外屏前置摄像头驱动可以用于驱动外屏前置摄像头,内屏前置摄像头驱动可以用于驱动内屏前置摄像头。此外,摄像头驱动还可以包括后置摄像头驱动。
为了便于理解,本申请以下实施例将以图5和图8所示的电子设备为例,以下以电子设备为折叠屏手机为例,结合附图对本申请实施例提供的电子设备的显示方法进行具体阐述。
在本申请实施例中,电子设备通过在硬件抽象层确定折叠屏的第一屏幕和第二屏幕之间的夹角达到预设角度范围时,硬件抽象层直接触发目标摄像头采集的图像送显。此外,当硬件抽象层确定折叠屏的第一屏幕和第二屏幕之间的夹角满足切换准备阶段的角度阈值时,硬件抽象层控制目标摄像头进行初始化操作(比如,上电、配置寄存器序列等操作)。
示例性的,如图9所示,手机中的摄像类应用程序响应于用户的拍摄操作(比如,点击或触摸等操作),采用前置摄像头拍摄图像,或者,手机中的社交类应用程序(比如,)响应于用户的操作,采用前置摄像头进行视频通话或拍摄图像。内核层的传感器驱动可以实时或周期性的获取至少一个传感器采集的数据。传感器驱动将至少一个传感器采集的数据发送至传感器硬件抽象模块。传感器硬件抽象模块根据至少一个传感器采集的数据,确定折叠屏的第一屏幕和第二屏幕之间的夹角,并将角度发送至摄像头硬件抽象模块。摄像头硬件抽象模块根据第一屏幕和第二屏幕之间的夹角确定用于送显图像的目标摄像头。摄像头硬件抽象模块将目标摄像头的摄像头标识发送至摄像头驱动,摄像头驱动根据目标摄像头的摄像头标识,控制对应的摄像头驱动触发目标摄像头采集的图像送显。
此外,摄像头硬件抽象模块获取到第一屏幕和第二屏幕之间的夹角后,摄像头硬件抽象模块确定第一屏幕和第二屏幕之间的夹角满足摄像头切换准备阶段的角度阈值时,摄像头硬件抽象模块可以控制目标摄像头进行摄像头初始化操作。其中,摄像头初始化操作包括上电、配置寄存器序列等操作。由此,在摄像头硬件抽象模块确定采用目标摄像头送显图像时,直接触发初始化后的目标摄像头采集的图像显示,节省了摄像头准备工作,提高了摄像头的送显速率。
在一种可能的场景下,当手机响应于用户操作采用外屏前置摄像头拍摄图像时,手机的折叠屏由折叠状态切换至展开状态的过程中,传感器硬件抽象模块根据传感器信息确定折叠屏的第一屏幕和第二屏幕之间的夹角后,将手机当前屏幕的角度发送至摄像头硬件抽象模块。摄像头硬件抽象模块可以根据折叠屏的第一屏幕和第二屏幕之间的夹角,确定手机的折叠屏当前所处的物理状态。比如,摄像类硬件抽象模块可以确定手机的折叠屏是否由折叠状态切换为展开状态。摄像头硬件抽象模块确定第一屏幕和第二屏幕之间的夹角满足切换准备阶段的角度阈值时,可以对内屏前置摄像头做摄像头初始化操作。比如,摄像头硬件抽象模块可以对内屏摄像头进行上电、参数配置等初始化操作。摄像头硬件抽象模块确定第一屏幕和第二屏幕之间的夹角满足切换阶段的角度阈值时,内屏前置摄像头驱动直接驱动该内屏前置摄像头采集的图像送显。具体的实现过程可以示例性的参见如下图10的实现过程。
下面结合图10对上述过程进行详细解释,图10为本申请实施例提供的一种图像显示方法的流程示意图三。
如图10所示,该显示方法可以包括以下步骤:
步骤801,传感器驱动获取传感器采集的数据。
在本申请实施例中,传感器驱动可以实时获取角度传感器,加速度传感器,陀螺仪传感器等至少一个传感器采集的数据。
示例性的,手机可利用加速度传感器测量手机的每个屏幕被转动时的运动加速度。手机可利用陀螺仪传感器测量得到的手机的每个屏幕的朝向角度变化。
步骤802,传感器驱动向传感器硬件抽象模块发送传感器采集的数据。
步骤803,传感器硬件抽象模块根据传感器采集的数据确定第一屏幕和第二屏幕之间的夹角。
步骤803中确定第一屏幕和第二屏幕之间的夹角的过程可以参见上文中图6和图7对应的描述内容。
在本申请实施例中,传感器硬件抽象模块接收到传感器驱动发送的传感器采集的数据后,可以根据传感器采集的数据确定手机第一屏幕和第二屏幕之间的第一屏幕和第二屏幕之间的夹角。作为一种示例,假设传感器硬件抽象模块接收到加速度传感器和陀螺仪传感器采集的数据,传感器硬件抽象模块可以根据加速度传感器和陀螺仪传感器采集的数据,确定手机第一屏幕和第二屏幕之间的夹角。
步骤804,传感器硬件抽象模块向显示决策模块发送第一屏幕和第二屏幕之间的夹角。
步骤805,传感器硬件抽象模块向摄像头硬件抽象模块发送第一屏幕和第二屏幕之间的夹角。
在本申请实施例中,传感器硬件抽象模块确定第一屏幕和第二屏幕之间的夹角后,可以向显示决策模块和摄像头硬件抽象模块发送第一屏幕和第二屏幕之间的夹角。
需要解释的是,传感器硬件抽象模块可以向显示决策模块和摄像头硬件抽象模块同时发送第一屏幕和第二屏幕之间的夹角,或者,也可以向显示决策模块发送第一屏幕与第二屏幕之间的角度后,再向摄像头硬件抽象模块发送第一屏幕和第二屏幕之间的夹角,或者,也可以向摄像头硬件抽象模块发送第一屏幕和第二屏幕之间的夹角后,再向显示决策模块发送第一屏幕和第二屏幕之间的夹角。也就是说,本申请实施例中对上述步骤804和步骤805的执行顺序不做限定。
步骤806,显示决策模块确定夹角大于角度阈值1,对屏幕进行初始化操作,并标记屏幕状态标识。
其中,角度阈值1为手机开始对屏幕进行预切换操作的角度。角度阈值1可以为用户预先设置的角度阈值,也可以为手机根据用户使用屏幕的习惯确定的角度值。比如,角度阈值1可以设定为55°,60°等。
在本申请实施例中,显示决策模块接收到第一屏幕和第二屏幕之间的夹角后,显示决策模块判断夹角是否大于角度阈值1。
在一些实施例中,若显示决策模块确定第一屏幕和第二屏幕之间的夹角小于或等于角度阈值1,则显示决策模块不做任何处理。即手机继续采用外屏显示摄像头采集的图像。
在另一些实施例中,若显示决策模块确定第一屏幕和第二屏幕之间的夹角大于角度阈值1,则显示决策模块对屏幕切换做准备工作。显示决策模块对内屏进行上电等初始化操作,从而在手机采用内屏显示图像信息时,避免了对内屏进行初始化的过程,提高了图像显示效率。
在本申请实施例中,显示决策模块对屏幕状态标识进行标记,以标记用于显示图像的屏幕。其中,屏幕状态标识用于唯一标记当前用于显示图像的屏幕。比如,若显示决策模块确定屏幕状态为展开状态,即显示决策模块确定用于显示图像的屏幕为内屏,则显示决策模块将屏幕状态标识标记为1;若显示决策模块确定屏幕状态为折叠状态,即显示决策模块确定用于显示图像的屏幕为外屏,则显示决策模块将屏幕状态标识标记为0。
步骤807,摄像头硬件抽象模块确定夹角大于角度阈值2,对内屏前置摄像头做预切换操作。
其中,角度阈值2为手机开始对摄像头做预切换操作的角度。角度阈值2与角度阈值1可以相同,也可以不同,此处不做限定。比如,角度阈值2可以为55°,60°,65°等。
在本申请实施例中,摄像头硬件抽象模块确定第一屏幕和第二屏幕之间的夹角大于角度阈值2,摄像头硬件抽象模块触发内屏前置摄像头做切换准备。比如,摄像头硬件抽象模块触发内屏前置摄像头执行上电、配置寄存器序列等操作。
在一些实施例中,若角度阈值1与角度阈值2相同,传感器硬件抽象模块和摄像头硬件抽象模块分别获取到第一屏幕和第二屏幕之间的夹角后,手机可以同步执行上述步骤806和步骤807,从而缩短了屏幕切换和摄像头切换的时间,提高了屏幕切换和摄像头切换的效率。
步骤808,摄像头硬件抽象模块确定夹角大于角度阈值3。
其中,角度阈值3为手机确定由外屏前置摄像头切换为使用内屏前置摄像头采集图像的角度。角度阈值3大于角度阈值2。角度阈值3可以为用户预先设置的角度阈值,也可以为手机根据用户使用屏幕的习惯确定的角度值。比如,角度阈值3可以设定为85°,95°等。
可以理解为,手机的折叠屏由折叠状态切换至展开状态的过程中,当手机的第一屏幕和第二屏幕之间的夹角大于角度阈值3时,手机中用于显示图像的屏幕可以由外屏切换为内屏,并且用于采集图像的摄像头由外屏前置摄像头切换为内屏前置摄像头,从而实现了屏幕和摄像头的同步切换。
步骤809,摄像头硬件抽象模块向显示决策模块发送屏幕状态标识请求。
步骤810,显示决策模块向摄像头硬件抽象模块发送屏幕状态标识。
在本申请实施例中,显示决策模块可以根据屏幕状态标识请求,向摄像头硬件抽象模块发送当前用于显示图像的屏幕对应的屏幕状态标识,从而使得摄像头硬件抽象模块可以根据接收到的屏幕状态标识确定当前显示图像的屏幕。
步骤811,摄像头硬件抽象模块确定屏幕状态标识为内屏,确定采用内屏前置摄像头采集图像,并在内屏送显。
在本申请实施例中,摄像头硬件抽象模块确定第一屏幕和第二屏幕之间的夹角大于角度阈值3,且确定屏幕状态标识为内屏。摄像头硬件抽象模块确定采用内屏前置摄像头采集图像,并确定在内屏送显内屏前置摄像头采集的图像。其中,内屏为由所述第一屏幕与第二屏幕组成的大屏。
步骤812,内屏前置摄像头驱动控制内屏前置摄像头采集图像并送显。
在本申请实施例中,摄像头硬件抽象模块确定对内屏前置摄像头采集的预览图像进行送显时,摄像头驱动确定对内屏前置摄像头采集的预览图像进行送显时,内屏前置摄像头驱动控制内屏前置摄像头采集图像,并在内屏显示内屏前置摄像头采集的预览图像。
比如,内屏前置摄像头驱动可以控制MIPI接口开关关闭外屏前置摄像头的出图通路,开启内屏前置摄像头的出图通路,从而实现了切换摄像头出图通路的目的。
示例性的,当手机的折叠屏处于折叠状态时,手机中的响应于用户操作进行视频通话时,手机的外屏前置摄像头采集用户的图像信息,并将采集的图像信息显示在手机的外屏上,参见图11中的(a)。手机的折叠屏由折叠状态切换至展开状态的过程中,若显示决策模块确定第一屏幕和第二屏幕之间的夹角θ小于或等于角度阈值1(比如,60°),则手机的外屏继续显示外屏前置摄像头采集的图像信息,手机的内屏并未显示图像信息,参见图11中的(b)。若显示决策模块确定第一屏幕和第二屏幕之间的夹角θ大于角度阈值1,显示决策模块对屏幕切换做准备工作。摄像头硬件抽象模块确定手机第一屏幕和第二屏幕之间的夹角θ大于角度阈值2(比如,65°),摄像头硬件抽象模块触发内屏前置摄像头做切换准备工作。摄像头硬件抽象模块确定第一屏幕和第二屏幕之间的夹角θ大于角度阈值3(比如,85°),摄像头硬件抽象模块触发内屏前置摄像头采集图像,并在内屏送显内屏前置摄像头采集的预览图像,参见图11中的(c)。由此,摄像头硬件抽象模块根据第一屏幕和第二屏幕之间的夹角确定是否切换内外屏摄像头,避免了手机由外屏显示图像切换至由内屏显示预览图像后,摄像头切换速度较慢,导致内屏前置摄像头并未送显图像的问题,摄像头硬件抽象模块触发内屏摄像头预先进行初始化操作,提高了内外屏摄像头切换的效率。
由上述可知,在显示决策模块根据第一屏幕和第二屏幕之间的夹角确定是否切换屏幕的过程时,摄像头硬件抽象模块同步根据第一屏幕和第二屏幕之间的夹角确定是否对内屏前置摄像头做切换准备,并确定是否切换至内屏前置摄像头。当摄像头硬件抽象模块确定采用内屏前置摄像头送显图像时,内屏可以直接显示内屏前置摄像头采集的图像,从而解决了相关技术中手机确定采用内屏前置摄像头送显图像时,内屏前置摄像头才开始进行初始化操作,导致摄像头切换时间较长、效率低等问题,提高了摄像头的送显速率。
在另一种可能的场景下,当手机响应于用户操作采用内屏前置摄像头拍摄图像时,手机的折叠屏由展开状态切换至折叠状态的过程中,传感器硬件抽象模块根据传感器信息确定第一屏幕和第二屏幕之间的夹角后,将第一屏幕和第二屏幕之间的夹角发送至摄像头硬件抽象模块。摄像头硬件抽象模块确定第一屏幕和第二屏幕之间的夹角满足切换准备阶段的角度阈值时,可以对外屏前置摄像头进行摄像头初始化操作。比如,摄像头硬件抽象模块可以对外屏摄像头进行上电、参数配置等初始化操作。摄像头硬件抽象模块确定第一屏幕和第二屏幕之间的夹角满足切换准备阶段的角度阈值时,外屏前置摄像头驱动直接触发该外屏前置摄像头采集的图像进行送显。具体的实现过程可以示例性的参见如下图12的实现过程。
下面结合图12对上述过程进行详细解释,图12为本申请实施例提供的一种图像显示方法的流程示意图四。
如图12所示,该显示方法可以包括以下步骤:
步骤1001,传感器驱动获取传感器采集的数据。
步骤1002,传感器驱动向传感器硬件抽象模块发送传感器采集的数据。
步骤1003,传感器硬件抽象模块根据传感器采集的数据确定第一屏幕和第二屏幕之间的夹角。
步骤1004,传感器硬件抽象模块向显示决策模块发送第一屏幕和第二屏幕之间的夹角。
步骤1005,传感器硬件抽象模块向摄像头硬件抽象模块发送第一屏幕和第二屏幕之间的夹角。
在本申请实施例中,步骤1001至步骤1005的实现过程,可以参见上述步骤801至步骤805的实现过程,此处不再赘述。
步骤1006,显示决策模块确定夹角小于角度阈值4,触发屏幕进行屏幕初始化操作,并标记屏幕状态标识。
其中,角度阈值4为手机开始触发屏幕进行屏幕初始化操作的角度。角度阈值4可以为用户预先设置的角度阈值,也可以为手机根据用户使用屏幕的习惯确定的角度值。比如,角度阈值4可以设定为85°,90°等。
在本申请实施例中,显示决策模块接收到第一屏幕和第二屏幕之间的夹角后,显示决策模块判断第一屏幕和第二屏幕之间的夹角是否小于角度阈值4。
在一些实施例中,若显示决策模块确定第一屏幕和第二屏幕之间的夹角大于或等于角度阈值4,则显示决策模块不做任何处理。即手机继续采用内屏显示摄像头采集的图像。
在另一些实施例中,若显示决策模块确定第一屏幕和第二屏幕之间的夹角小于角度阈值4,则显示决策模块对屏幕进行初始化操作。显示决策模块对外屏进行上电、配置寄存器序列等初始化操作,从而在手机确定采用外屏显示图像信息时,缩短了对外屏显示图像的时间,提高了图像显示效率。
在本申请实施例中,显示决策模块对屏幕状态标识进行标记,以标记用于显示图像的屏幕。其中,屏幕状态标识用于唯一标记当前用于显示图像的屏幕。比如,显示决策模块将屏幕状态标识标记为外屏。
步骤1007,摄像头硬件抽象模块确定夹角小于角度阈值5,触发外屏前置摄像头进行初始化操作。
其中,角度阈值5为手机开始对外屏前置摄像头做初始化操作的角度。角度阈值5与角度阈值4可以相同,也可以不同,此处不做限定。比如,角度阈值5可以为85°,90°,95°等。
在本申请实施例中,摄像头硬件抽象模块确定第一屏幕和第二屏幕之间的夹角小于角度阈值5,摄像头硬件抽象模块触发外屏前置摄像头进行摄像头初始化操作。比如,摄像头硬件抽象模块触发外屏前置摄像头执行上电、配置寄存器序列等操作。
在一些实施例中,若角度阈值4与角度阈值5相同,传感器硬件抽象模块和摄像头硬件抽象模块分别获取到第一屏幕和第二屏幕之间的夹角后,手机可以同步执行上述步骤1006和步骤1007,从而缩短了屏幕切换和摄像头切换的时间,提高了屏幕切换和摄像头切换的效率。
步骤1008,摄像头硬件抽象模块确定夹角小于角度阈值6。
其中,角度阈值6为手机的确定由内屏前置摄像头切换为使用外屏前置摄像头采集图像的最大角度。角度阈值6小于角度阈值5。角度阈值6可以为用户预先设置的角度阈值,也可以为手机根据用户使用屏幕的习惯确定的角度值。比如,角度阈值6可以设定为55°,60°,63°等。
可以理解为,手机的折叠屏由展开状态切换至折叠状态的过程中,当手机的第一屏幕和第二屏幕之间的夹角小于角度阈值6时,手机中用于显示图像的屏幕可以由内屏切换为外屏,并且用于采集图像的摄像头由内屏前置摄像头切换为外屏前置摄像头,从而实现了屏幕和摄像头的同步切换。
步骤1009,摄像头硬件抽象模块向显示决策模块发送屏幕状态标识请求。
步骤1010,显示决策模块向摄像头硬件抽象模块发送屏幕状态标识。
步骤1011,摄像头硬件抽象模块确定屏幕状态标识为外屏,确定采用外屏前置摄像头采集图像,并在外屏送显。
在本申请实施例中,摄像头硬件抽象模块确定第一屏幕和第二屏幕之间的夹角小于角度阈值6,且确定屏幕状态标识为外屏。摄像头硬件抽象模块确定采用外屏前置摄像头采集图像,并确定在外屏送显外屏前置摄像头采集的图像。
步骤1012,外屏前置摄像头驱动控制外屏前置摄像头采集图像并送显。
在本申请实施例中,摄像头硬件抽象模块确定对外屏前置摄像头采集的预览图像进行送显时,外屏前置摄像头驱动控制外屏前置摄像头采集图像,并在外屏显示外屏前置摄像头采集的预览图像。
比如,外屏前置摄像头驱动可以控制MIPI接口开关关闭内屏前置摄像头的出图通路,开启外屏前置摄像头的出图通路,从而实现了切换摄像头出图通路的目的。
示例性的,当手机的折叠屏处于展开状态时,手机中的响应于用户操作进行视频通话时,手机的内屏前置摄像头采集用户的图像信息,并将采集的图像信息显示在手机的内屏上,参见图13中的(a)。手机的折叠屏由展开状态切换至折叠状态的过程中,若显示决策模块确定第一屏幕和第二屏幕之间的夹角θ小于角度阈值4(比如,95°),显示决策模块对屏幕切换做准备工作。摄像头硬件抽象模块确定第一屏幕和第二屏幕之间的夹角小于角度阈值5,摄像头硬件抽象模块对外屏前置摄像头做切换准备。此时,手机的内屏继续显示内屏摄像头采集的图像信息,参见图13中的(b)。摄像头硬件抽象模块确定折叠屏的第一屏幕和第二屏幕之间的夹角小于角度阈值6(比如,55°),摄像头硬件抽象模块确定采用外屏前置摄像头采集图像,并确定在外屏送显外屏前置摄像头采集的预览图像,参见图13中的(c)。
由上述可知,在显示决策模块根据当前屏幕的角度确定是否切换屏幕的过程时,摄像头硬件抽象模块同步根据当前屏幕的角度确定是否对外屏前置摄像头做切换准备,并确定是否切换至外屏前置摄像头。当摄像头硬件抽象模块确定采用外屏前置摄像头送显图像时,外屏可以直接显示外屏前置摄像头采集的预览图像,从而解决了相关技术中手机确定采用外屏前置摄像头送显图像时,外屏前置摄像头才开始进行初始化操作,导致摄像头切换时间较长、效率低等问题,提高了摄像头的送显速率。
在本申请实施例中,电子设备通过在内核层确定折叠屏的第一屏幕和第二屏幕之间的夹角满足切换阶段的角度阈值时,内核层直接触发目标摄像头采集的图像送显。此外,当内核层确定第一屏幕和第二屏幕之间的夹角满足切换准备阶段的角度阈值时,内核层控制目标摄像头进行摄像头初始化操作(比如,上电、配置寄存器序列等操作)。
示例性的,如图14所示,手机中的摄像类应用程序响应于用户的拍摄操作(比如,点击或触摸等操作),采用前置摄像头拍摄图像,或者,手机中的社交类应用程序(比如,)响应于用户的操作,采用前置摄像头进行视频通话或拍摄图像。内核层的传感器驱动可以实时或周期性的获取至少一个传感器采集的数据。传感器驱动根据至少一个传感器采集的数据确定第一屏幕和第二屏幕之间的夹角,并将角度发送至内核层。内核层根据第一屏幕和第二屏幕之间的夹角确定用于送显图像的目标摄像头后,内核层触发目标摄像头送显图像。由此,电子设备在内核层即可确定用于送显图像的目标摄像头,无需与硬件抽象层和应用程序框架层进行交互,减少了跨服务/组件交互流程,节省了决策时间,提高了内外屏前置摄像头的切换效率。
此外,内核层获取到第一屏幕和第二屏幕之间的夹角后,内核层确定第一屏幕和第二屏幕之间的夹角满足摄像头切换准备阶段的角度阈值时,内核层可以控制目标摄像头进行摄像头初始化操作。由此,在内核层确定采用目标摄像头送显图像时,直接控制目标摄像头送显图像,节省了摄像头的准备工作,提高了摄像头的送显速率。
在一种可能的场景下,假设手机采用外屏前置摄像头采集图像时,手机响应于用户的操作,手机的折叠屏由折叠状态切换至展开状态的过程中,传感器驱动可以实时或周期性的采集手机中设置的传感器的信息。传感器驱动根据传感器信息确定手机的第一屏幕和第二屏幕之间的夹角后,传感器驱动可以实时或周期性的将第一屏幕和第二屏幕之间的夹角发送至内核层的摄像头驱动。摄像头驱动可以根据第一屏幕和第二屏幕之间的夹角确定是否将外屏前置摄像头切换至内屏前置摄像头。具体的实现过程可以示例性的参见如下图15的实现过程。
下面结合图15对上述过程进行详细解释,图15为本申请实施例提供的一种图像显示方法的流程示意图六。
如图15所示,该显示方法可以包括以下步骤:
步骤1301,传感器驱动获取传感器采集的数据,并根据传感器采集的数据确定第一屏幕和第二屏幕之间的夹角。
在本申请实施例中,传感器驱动可以实时或周期性的获取角度传感器,加速度传感器,陀螺仪传感器等至少一个传感器采集的数据。传感器驱动可以根据获取到的传感器采集的数据确定第一屏幕和第二屏幕之间的夹角。比如,传感器驱动可以获取加速度传感器和陀螺仪传感器采集的数据,然后,传感器驱动根据加速度传感器和陀螺仪传感器确定手机的折叠屏的第一屏幕与第二屏幕之间的角度。传感器驱动根据加速度传感器和陀螺仪传感器确定第一屏幕和第二屏幕之间的夹角的具体实现过程,可以参见上述图6和图7的描述过程,此处不再赘述。
步骤1302,传感器驱动向摄像头驱动发送第一屏幕和第二屏幕之间的夹角。
步骤1303,摄像头驱动确定角度大于角度阈值7,触发内屏前置摄像头进行初始化操作。
在本申请实施例中,传感器驱动实时或周期性的确定折叠屏的第一屏幕和第二屏幕之间的夹角后,传感器驱动可以实时或周期性的向摄像头驱动发送第一屏幕和第二屏幕之间的夹角。摄像头驱动接收到传感器驱动发送的第一屏幕和第二屏幕之间的夹角后,判断第一屏幕和第二屏幕之间的夹角是否大于角度阈值7。若摄像头驱动确定接收到的第一屏幕和第二屏幕之间的夹角大于角度阈值7,则摄像头驱动控制内屏前置摄像头驱动触发内屏前置摄像头进行摄像头初始化操作。比如,摄像头驱动控制内屏前置摄像头进行上电、配置寄存器序列等初始化操作。
步骤1304,摄像头驱动确定夹角大于角度阈值8,控制内屏前置摄像头送显图像。
其中,角度阈值8为手机确定由外屏前置摄像头切换为使用内屏前置摄像头采集图像的角度。角度阈值8大于角度阈值7。角度阈值8可以为用户预先设置的角度阈值,也可以为手机根据用户使用屏幕的习惯确定的角度值。比如,角度阈值8可以设定为85°,95°等。角度阈值8与上述角度阈值3可以相同,也可以不同,此处不做限定。
在本申请实施例中,摄像头驱动实时或周期性的接收传感器驱动发送的第一屏幕和第二屏幕之间的夹角后,摄像头驱动确定第一屏幕和第二屏幕之间的夹角大于角度阈值8时,摄像头驱动直接控制内屏前置摄像头触发内屏前置摄像头送显图像。比如,内屏前置摄像头驱动可以控制MIPI接口开关关闭外屏前置摄像头的出图通路,开启内屏前置摄像头的出图通路,从而实现了切换摄像头出图通路的目的。
可以理解为,手机的折叠屏由折叠状态切换至展开状态的过程中,当手机的第一屏幕和第二屏幕之间的夹角大于角度阈值8时,手机中用于显示图像的屏幕可以由外屏切换为内屏,并且用于采集图像的摄像头由外屏前置摄像头切换为内屏前置摄像头,从而实现了屏幕和摄像头的同步切换。
继续以图11作为示例,当手机的折叠屏处于折叠状态时,手机中的响应于用户操作进行视频通话时,手机的外屏前置摄像头采集用户的图像信息,并将采集的图像信息显示在手机的外屏上,参见图11中的(a)。手机的折叠屏由折叠状态切换至展示状态的过程中,若摄像头驱动确定第一屏幕和第二屏幕之间的夹角大于角度阈值7(比如,65°),摄像头驱动触发内屏前置摄像头做切换准备工作。手机的外屏继续显示外屏的前置摄像头采集的图像信息,手机的内屏并未显示图像信息,参见图11中的(b)。摄像头驱动确定手机第一屏幕和第二屏幕之间的夹角θ大于角度阈值8(比如,85°),摄像头驱动控制内屏前置摄像头驱动触发内屏前置摄像头采集图像,并在内屏送显内屏前置摄像头采集的预览图像,参见图11中的(c)。由此,摄像头驱动根据手机当前屏幕的角度确定是否切换内外屏摄像头,避免了手机由外屏显示图像切换至由内屏显示图像后,摄像头切换速度较慢,导致内屏前置摄像头并未送显图像的问题,摄像头驱动触发内屏摄像头预先进行初始化操作,提高了内外屏摄像头切换的效率。
由上述可知,手机的折叠屏的状态由折叠状态切换至展开状态的过程中,摄像头驱动确定第一屏幕和第二屏幕之间的夹角达到角度阈值7时,摄像头驱动触发内屏前置摄像头做切换准备,从而达到提前对内屏前置摄像头进行初始化的目的。当摄像头驱动确定第一屏幕和第二屏幕之间的夹角达到角度阈值8时,摄像头驱动直接控制内屏前置摄像头送显图像,从而达到了快速切换屏幕送显画面的目的,提高了摄像头切换的效率。此外,传感器驱动确定第一屏幕和第二屏幕之间的夹角后,传感器驱动直接将第一屏幕和第二屏幕之间的夹角发送至摄像头驱动,由摄像头驱动决策是否切换摄像头送显,传感器驱动无需将传感器采集的信息上传至硬件抽象层,减少了跨组件、跨进程的交互流程,提高了摄像头的切换效率。
在另一种可能的场景下,假设手机采用内屏前置摄像头采集图像时,手机响应于用户的操作,手机的折叠屏由展开状态切换至折叠状态的过程中,传感器驱动可以实时或周期性的采集手机中设置的传感器的信息。传感器驱动根据传感器信息确定折叠屏的第一屏幕和第二屏幕之间的夹角后,传感器驱动可以实时或周期性的将第一屏幕和第二屏幕之间的夹角发送至内核层的摄像头驱动。摄像头驱动可以根据第一屏幕和第二屏幕之间的夹角确定是否将内屏前置摄像头切换至外屏前置摄像头。具体的实现过程可以示例性的参见如下图16的实现过程。
下面结合图16对上述过程进行详细解释,图16为本申请实施例提供的一种图像显示方法的流程示意图七。
如图16所示,该显示方法可以包括以下步骤:
步骤1401,传感器驱动获取传感器采集的数据,并根据传感器采集的数据确定第一屏幕和第二屏幕之间的夹角。
步骤1402,传感器驱动向摄像头驱动发送第一屏幕和第二屏幕之间的夹角。
在本申请实施例中,步骤1401至步骤1402的实现过程,可以参见上述步骤1301至步骤1302的实现过程,此处不再赘述。
步骤1403,摄像头驱动确定夹角小于角度阈值9,触发内屏前置摄像头进行初始化操作。
在本申请实施例中,传感器驱动实时或周期性的确定折叠屏的第一屏幕和第二屏幕之间的夹角后,传感器驱动可以实时或周期性的向摄像头驱动发送第一屏幕和第二屏幕之间的夹角。摄像头驱动接收到传感器驱动发送的第一屏幕和第二屏幕之间的夹角后,判断第一屏幕和第二屏幕之间的夹角是否小于角度阈值9。若摄像头驱动确定接收到的第一屏幕和第二屏幕之间的夹角小于角度阈值9,则摄像头驱动控制外屏前置摄像头驱动触发外屏前置摄像头进行初始化操作。比如,摄像头驱动控制外屏前置摄像头进行上电、配置寄存器序列等初始化操作。
步骤1404,摄像头驱动确定夹角小于角度阈值10,控制外屏前置摄像头送显图像。
其中,角度阈值10为手机确定由内屏前置摄像头切换为使用外屏前置摄像头采集图像的角度。角度阈值10小于角度阈值9。角度阈值10可以为用户预先设置的角度阈值,也可以为手机根据用户使用屏幕的习惯确定的角度值。比如,角度阈值10可以设定为85°,95°等。
在本申请实施例中,摄像头驱动实时或周期性的接收传感器驱动发送的第一屏幕和第二屏幕之间的夹角后,摄像头驱动确定第一屏幕和第二屏幕之间的夹角小于角度阈值10时,摄像头驱动直接控制外屏前置摄像头驱动触发外屏前置摄像头送显图像。比如,外屏前置摄像头驱动可以控制MIPI接口开关关闭内屏前置摄像头的出图通路,开启外屏前置摄像头的出图通路,从而实现了切换摄像头出图通路的目的。
可以理解为,手机的折叠屏由折叠状态切换至展开状态的过程中,当手机的第一屏幕和第二屏幕之间的夹角小于角度阈值10时,手机中用于显示图像的屏幕可以由内屏切换为外屏,并且用于采集图像的摄像头由内屏前置摄像头切换为外屏前置摄像头,从而实现了屏幕和摄像头的同步切换。
继续以图13作为示例,当手机的折叠屏处于展开状态时,手机中的响应于用户操作进行视频通话时,手机的内屏前置摄像头采集用户的图像信息,并将采集的图像信息显示在手机的内屏上,参见图13中的(a)。手机的折叠屏由展开状态切换至折叠状态的过程中,若摄像头驱动确定第一屏幕和第二屏幕之间的夹角θ小于角度阈值9,摄像头驱动对外屏前置摄像头做切换准备。此时,手机的内屏继续显示内屏摄像头采集的图像信息,参见图13中的(b)。摄像头驱动确定手机当前屏幕的角度小于角度阈值10(比如,55°),摄像头驱动确定采用外屏前置摄像头采集图像,并确定在外屏送显外屏前置摄像头采集的图像,参见图13中的(c)。
由上述可知,手机的折叠屏的状态由展开状态切换至折叠状态的过程中,摄像头驱动确定手机当前屏幕的角度达到角度阈值9时,摄像头驱动触发外屏前置摄像头做切换准备,从而达到提前对外屏前置摄像头进行初始化的目的。当摄像头驱动确定第一屏幕和第二屏幕之间的夹角达到角度阈值10时,摄像头驱动直接控制外屏前置摄像头送显图像,从而达到了快速切换屏幕送显画面的目的,提高了摄像头切换的效率。此外,传感器驱动确定第一屏幕和第二屏幕之间的夹角后,传感器驱动直接将第一屏幕和第二屏幕之间的夹角发送至摄像头驱动,由摄像头驱动决策是否切换摄像头送显,无需上传至摄像头硬件抽象模块,减少了跨组件、跨进程的交互流程,提高了摄像头的切换效率。
在上述图15和图16中,摄像头驱动控制内外屏前置摄像头切换时,可能存在手机的屏幕并未完成切换,导致摄像头切换完成后存在图像送显错误或者屏幕不送显等情况。为此,在摄像头驱动确定切换内外屏前置摄像头的出图通路时,摄像头驱动可以获取屏幕状态标识。当摄像头驱动确定采用内屏前置摄像头送显图像,并且摄像头驱动确定屏幕状态标识为内屏时,摄像头驱动才采用内屏前置摄像头送显图像。同样的,当摄像头驱动确定采用外屏前置摄像头送显图像,并且摄像头驱动确定屏幕状态标识为外屏时,摄像头驱动才采用外屏前置摄像头送显图像。由此,避免了手机的折叠屏的物理状态发生变化时,存在屏幕送显错误或者屏幕不送显等情况。
在本申请实施例中,传感器驱动确定第一屏幕和第二屏幕之间的夹角后,可以将第一屏幕和第二屏幕之间的夹角通过硬件抽象模块发送至显示决策模块。显示决策模块接收到第一屏幕和第二屏幕之间的夹角后,根据第一屏幕和第二屏幕之间的夹角对屏幕状态进行标记。
在一些实施例中,当手机响应于用户操作采用外屏前置摄像头拍摄图像时,手机的折叠屏由折叠状态切换至展开状态的过程中,手机触发内屏前置摄像头做预切换操作时,手机可以在内屏的第二屏幕显示外屏前置摄像头采集的图像。当手机触发内屏前置摄像头送显图像时,则由第一屏幕和第二屏幕组成的内屏显示内屏前置摄像头采集的图像。由此,手机通过在第二屏幕显示外屏前置摄像头采集的图像,避免了摄像头切换完成后,手机的屏幕切换较慢导致内屏无法及时显示图像出现黑屏或白屏等问题,提高了用户的使用体验。
示例性的,如图17所示,当手机的折叠屏处于折叠状态时,手机中的响应于用户操作进行视频通话时,手机的外屏前置摄像头采集用户的图像信息,并将采集的图像信息显示在手机的外屏上,参见图17中的(a)。手机的折叠屏由折叠状态切换至展示状态的过程中,当手机触发内屏前置摄像头做切换准备工作时,显示决策模块控制手机的第二屏幕显示外屏前置摄像头采集的图像信息,参见图17中的(b)。手机触发内屏前置摄像头采集图像,并在内屏送显内屏前置摄像头采集的图像,手机的第一屏幕和第二屏幕组成的大屏显示内屏前置摄像头采集的图像,参见图17中的(c)。
综上所述,在本申请实施例中,硬件抽象层的摄像头硬件抽象模块根据第一屏幕和第二屏幕之间的夹角满足切换准备阶段的角度阈值时,触发摄像头进行摄像头初始化操作,当摄像头硬件抽象模块确定第一屏幕和第二屏幕之间的夹角满足切换阶段的阈值时,触发已经完成初始化操作的摄像头进行送显图像切换,从而解决了相关技术中应用程序框架层中的摄像头决策模块确定用于送显图像的摄像头后,手机才开始对该摄像头进行初始化操作,导致摄像头切换时间较长、效率低等问题,提高了摄像头的送显速率。此外,由于摄像头已经完成了预切换操作,在摄像头硬件抽象模块基于完成预切换操作的摄像头送显图像时,直接触发该摄像头送显图像,使得摄像头切换更加平滑、流畅。
内核层的摄像头驱动根据第第一屏幕和第二屏幕之间的夹角满足切换准备阶段的角度阈值时,触发摄像头进行摄像头初始化操作,当摄像头驱动确定手机满足切换准备阶段的角度阈值时,触发已经完成初始化操作的目标摄像头进行送显图像切换。可见,传感器驱动无需将传感器采集的信息上传至硬件抽象层和应用程序框架层,内核层中的摄像头驱动决策是否对摄像头进行切换准备和送显图像切换,从而减少了跨组件、跨进程的交互流程,提高了摄像头的切换效率。
相较于相关技术中电子设备的摄像头随屏幕物理状态进行切换时,整个执行流程较长,从而导致摄像头切换时存在送显效率低的缺点。在本申请实施例中,在摄像头硬件抽象模块或摄像头驱动增加目标摄像头的切换准备工作,缩短了摄像头切换的时间。摄像头硬件抽象模块或摄像头驱动确定电子设备的当前屏幕的角度满足切换阶段的角度阈值后,直接控制目标摄像头切换送显,简化了决策流程,减少了跨组件、跨进程的交互流程,提升了摄像头切换的效率,从而提高了用户使用体验。
如图18所示,本申请实施例公开了一种电子设备,该电子设备可以为上述手机。该电子设备具体可以包括:触摸屏1801,所述触摸屏1801包括触摸传感器1806和显示屏1807;一个或多个处理器1802;存储器1803;一个或多个应用程序(未示出);以及一个或多个计算机程序1804,上述各器件可以通过一个或多个通信总线1805连接。其中,上述一个或多个计算机程序1804被存储在上述存储器1803中并被配置为被该一个或多个处理器1802执行,该一个或多个计算机程序1804包括指令,该指令可以用于执行上述实施例中的相关步骤。
可以理解的是,上述电子设备等为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,本申请实施例能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明实施例的范围。
本申请实施例可以根据上述方法示例对上述电子设备等进行功能模块的划分,例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。需要说明的是,本发明实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
在采用对应各个功能划分各个功能模块的情况下,上述实施例中涉及的电子设备的一种可能的组成示意图,该电子设备可以包括:显示单元、传输单元和处理单元等。需要说明的是,上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能模块的功能描述,在此不再赘述。
本申请实施例还提供一种电子设备,包括一个或多个处理器以及一个或多个存储器。该一个或多个存储器与一个或多个处理器耦合,一个或多个存储器用于存储计算机程序代码,计算机程序代码包括计算机指令,当一个或多个处理器执行计算机指令时,使得电子设备执行上述相关方法步骤实现上述实施例中的图像显示方法。
本申请的实施例还提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机指令,当该计算机指令在电子设备上运行时,使得电子设备执行上述相关方法步骤实现上述实施例中的图像显示方法。
本申请的实施例还提供了一种计算机程序产品,该计算机程序产品包括计算机指令,当该计算机指令在电子设备上运行时,使得电子设备执行上述相关方法步骤实现上述实施例中的图像显示方法。
另外,本申请的实施例还提供一种装置,这个装置具体可以是芯片,组件或模块,该装置可包括相连的处理器和存储器;其中,存储器用于存储计算机执行指令,当装置运行时,处理器可执行存储器存储的计算机执行指令,以使装置执行上述各方法实施例中电子设备执行的图像显示方法。
其中,本实施例提供的电子设备、计算机可读存储介质、计算机程序产品或装置均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请实施例各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:快闪存储器、移动硬盘、只读存储器、随机存取存储器、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何在本申请揭露的技术范围内的变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。
Claims (18)
1.一种图像显示方法,所述方法应用于具有折叠屏的电子设备,所述电子设备包括内屏和外屏,以及内屏前置摄像头和外屏前置摄像头,其中,所述内屏包括第一屏幕和第二屏幕,所述方法包括:
接收用户的视频通话操作;
响应于所述用户的视频通话操作,在所述电子设备处于展开状态时,控制所述内屏呈现由所述内屏摄像头采集到的所述用户的图像;
在所述电子设备由展开状态切换到折叠状态过程中,响应于所述第一屏幕和所述第二屏幕之间的夹角小于第三预设角度,控制所述外屏前置摄像头进行摄像头初始化操作;
在所述电子设备由展开状态切换到折叠状态过程中,响应于所述第一屏幕和所述第二屏幕之间的夹角小于第一预设角度,控制所述外屏前置摄像头采集到的所述用户的图像在所述外屏呈现,其中,所述第三预设角度大于所述第一预设角度。
2.根据权利要求1所述的方法,其特征在于,所述控制所述外屏前置摄像头进行摄像头初始化操作,包括:
控制所述外屏前置摄像头进行上电和/或参数配置操作。
3.根据权利要求1所述的方法,其特征在于,所述电子设备还包括应用程序框架层和第一层,所述第一层位于所述应用程序框架层和所述电子设备的硬件单元之间,所述控制所述外屏前置摄像头进行摄像头初始化操作,包括:
所述第一层触发所述外屏前置摄像头进行摄像头初始化操作;
所述控制所述外屏前置摄像头采集到的所述用户的图像在所述外屏呈现,包括:
所述第一层触发所述外屏前置摄像头采集到的所述用户的图像在所述外屏呈现。
4.根据权利要求3所述的方法,其特征在于,在所述第一层触发所述外屏前置摄像头采集到的所述用户的图像在所述外屏呈现之前,所述方法还包括:
所述第一层获取所述电子设备的屏幕状态标识;
所述第一层根据所述屏幕状态标识确定由所述外屏呈现所述用户的图像。
5.根据权利要求3所述的方法,其特征在于,在所述第一层触发所述外屏前置摄像头采集到的所述用户的图像在所述外屏呈现之前,所述方法还包括:
所述应用程序框架层获取所述第一屏幕和所述第二屏幕之间的夹角;
在所述第一屏幕和所述第二屏幕之间的夹角小于第五预设角度的情况下,所述应用程序框架层触发所述外屏进行屏幕初始化操作;
在所述第一屏幕和所述第二屏幕之间的夹角小于第六预设角度的情况下,所述应用程序框架层触发所述电子设备将所述内屏切换成所述外屏,并确定所述电子设备的屏幕状态标识为第一标识,所述第一标识用于指示由所述外屏呈现显示图像,其中,所述第六预设角度小于所述第五预设角度。
6.根据权利要求3所述的方法,其特征在于,所述方法还包括:
所述第一层确定所述第一屏幕和所述第二屏幕之间的夹角。
7.根据权利要求6所述的方法,其特征在于,所述第一层为硬件抽象层,所述电子设备还包括内核层,所述内核层位于所述硬件抽象层和所述电子设备的硬件单元之间,所述第一层确定所述第一屏幕和所述第二屏幕之间的夹角,包括:
所述硬件抽象层通过所述内核层获取传感器采集的信息,所述传感器包括角度传感器、陀螺仪传感器以及加速度传感器中的至少一个;
所述硬件抽象层根据所述传感器采集的信息,确定所述第一屏幕和所述第二屏幕之间的夹角。
8.根据权利要求6所述的方法,其特征在于,所述第一层为内核层,所述第一层确定所述第一屏幕和所述第二屏幕之间的夹角,包括:
所述内核层获取传感器采集的信息,所述传感器包括角度传感器、陀螺仪传感器以及加速度传感器中的至少一个;
所述内核层根据所述传感器采集的信息,确定所述第一屏幕和所述第二屏幕之间的夹角。
9.一种图像显示方法,所述方法应用于具有折叠屏的电子设备,所述电子设备包括内屏和外屏,以及内屏前置摄像头和外屏前置摄像头,其中,所述内屏包括第一屏幕和第二屏幕,所述方法包括:
接收用户的视频通话操作;
响应于所述用户的视频通话操作,在所述电子设备处于折叠状态时,控制所述外屏呈现由所述外屏摄像头采集到的所述用户的图像;
在所述电子设备由折叠状态切换到展开状态过程中,响应于所述第一屏幕和所述第二屏幕之间的夹角大于第四预设角度的情况下,控制所述内屏前置摄像头进行摄像头初始化操作;
在所述电子设备由折叠状态切换到展开状态过程中,响应于所述第一屏幕和所述第二屏幕之间的夹角大于第二预设角度,控制所述内屏前置摄像头采集到的所述用户的图像在所述内屏呈现,其中,所述第四预设角度小于所述第二预设角度。
10.根据权利要求9所述的方法,其特征在于,所述控制所述内屏前置摄像头进行摄像头初始化操作,包括:
控制所述内屏前置摄像头进行上电和/或参数配置操作。
11.根据权利要求9所述的方法,其特征在于,所述电子设备还包括应用程序框架层和第一层,所述第一层位于所述应用程序框架层和所述电子设备的硬件单元之间,所述控制所述外屏前置摄像头进行摄像头初始化操作,包括:
所述第一层触发所述内屏前置摄像头进行摄像头初始化操作;
所述控制所述内屏前置摄像头采集到的所述用户的图像在所述内屏呈现,包括:
所述第一层触发所述内屏前置摄像头采集到的所述用户的图像在所述内屏呈现。
12.根据权利要求11所述的方法,其特征在于,在所述第一层触发所述内屏前置摄像头采集到的所述用户的图像在所述内屏呈现之前,所述方法还包括:
所述第一层获取所述电子设备的屏幕状态标识;
所述第一层根据所述屏幕状态标识确定由所述内屏呈现所述用户的图像。
13.根据权利要求11所述的方法,其特征在于,在所述第一层触发所述内屏前置摄像头采集的图像在所述内屏呈现之前,所述方法还包括:
所述应用程序框架层获取所述第一屏幕和所述第二屏幕之间的夹角;
在所述第一屏幕和所述第二屏幕之间的夹角大于第七预设角度的情况下,所述应用程序框架层触发所述内屏进行屏幕初始化操作;
在所述第一屏幕和所述第二屏幕之间的夹角大于第八预设角度的情况下,所述应用程序框架层触发所述电子设备将所述外屏切换成所述内屏,并确定所述电子设备的屏幕状态标识为第二标识,所述第二标识用于指示由所述内屏呈现显示图像,其中,所述第八预设角度大于所述第七预设角度。
14.根据权利要求11所述的方法,其特征在于,所述方法还包括:
所述第一层确定所述第一屏幕和所述第二屏幕之间的夹角。
15.根据权利要求14所述的方法,其特征在于,所述第一层为硬件抽象层,所述电子设备还包括内核层,所述内核层位于所述硬件抽象层和所述电子设备的硬件单元之间,所述第一层确定所述第一屏幕和所述第二屏幕之间的夹角,包括:
所述硬件抽象层通过所述内核层获取传感器采集的信息,所述传感器包括角度传感器、陀螺仪传感器以及加速度传感器中的至少一个;
所述硬件抽象层根据所述传感器采集的信息,确定所述第一屏幕和所述第二屏幕之间的夹角。
16.根据权利要求14所述的方法,其特征在于,所述第一层为内核层,所述第一层确定所述第一屏幕和所述第二屏幕之间的夹角,包括:
所述内核层获取传感器采集的信息,所述传感器包括角度传感器、陀螺仪传感器以及加速度传感器中的至少一个;
所述内核层根据所述传感器采集的信息,确定所述第一屏幕和所述第二屏幕之间的夹角。
17.一种电子设备,其特征在于,包括:
折叠屏,所述折叠屏包括至少两个屏幕;
一个或多个处理器;
存储器;
其中,所述存储器中存储有一个或多个计算机程序,所述一个或多个计算机程序包括指令,当所述指令被所述电子设备执行时,使得所述电子设备执行如权利要求1-8或者9-16中任一项所述图像显示方法。
18.一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,其特征在于,当所述指令在电子设备上运行时,使得所述电子设备执行如权利要求1-8或者9-16中任一项所述图像显示方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210806906.7A CN116723257A (zh) | 2022-02-28 | 2022-02-28 | 一种图像显示方法及电子设备 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210185763.2A CN114257671B (zh) | 2022-02-28 | 2022-02-28 | 一种图像显示方法及电子设备 |
CN202210806906.7A CN116723257A (zh) | 2022-02-28 | 2022-02-28 | 一种图像显示方法及电子设备 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210185763.2A Division CN114257671B (zh) | 2022-02-28 | 2022-02-28 | 一种图像显示方法及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116723257A true CN116723257A (zh) | 2023-09-08 |
Family
ID=80800070
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210185763.2A Active CN114257671B (zh) | 2022-02-28 | 2022-02-28 | 一种图像显示方法及电子设备 |
CN202210806906.7A Pending CN116723257A (zh) | 2022-02-28 | 2022-02-28 | 一种图像显示方法及电子设备 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210185763.2A Active CN114257671B (zh) | 2022-02-28 | 2022-02-28 | 一种图像显示方法及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (2) | CN114257671B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115037834B (zh) * | 2022-08-09 | 2023-02-07 | 荣耀终端有限公司 | 一种触发皮套模式的方法及电子设备 |
CN117812181A (zh) * | 2022-09-30 | 2024-04-02 | 荣耀终端有限公司 | 显示屏切换方法和电子设备 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN201937641U (zh) * | 2010-12-20 | 2011-08-17 | 上海华勤通讯技术有限公司 | 多屏手机 |
CN105408937B (zh) * | 2013-05-02 | 2018-02-13 | 高通股份有限公司 | 用于便于计算机视觉应用程序初始化的方法 |
CN104699391B (zh) * | 2015-04-07 | 2018-10-12 | 联想(北京)有限公司 | 电子设备及其相机的控制方法 |
CN107368150A (zh) * | 2017-06-30 | 2017-11-21 | 维沃移动通信有限公司 | 一种拍照方法及移动终端 |
CN107748687B (zh) * | 2017-10-10 | 2019-12-31 | 晶晨半导体(上海)股份有限公司 | 一种对智能设备开机显示画面进行控制的方法及智能设备 |
CN109688253B (zh) * | 2019-02-28 | 2021-05-18 | 维沃移动通信有限公司 | 一种拍摄方法及终端 |
CN112115444B (zh) * | 2019-06-21 | 2022-08-26 | 华为技术有限公司 | 一种解锁方法及电子设备 |
CN110995990B (zh) * | 2019-11-27 | 2021-11-23 | 维沃移动通信有限公司 | 一种摄像头控制方法及电子设备 |
CN114237530A (zh) * | 2020-01-21 | 2022-03-25 | 华为技术有限公司 | 一种折叠屏的显示方法及相关装置 |
CN113840070B (zh) * | 2021-09-18 | 2023-05-23 | 维沃移动通信有限公司 | 拍摄方法、装置、电子设备及介质 |
-
2022
- 2022-02-28 CN CN202210185763.2A patent/CN114257671B/zh active Active
- 2022-02-28 CN CN202210806906.7A patent/CN116723257A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
CN114257671A (zh) | 2022-03-29 |
CN114257671B (zh) | 2022-07-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2020259452A1 (zh) | 一种移动终端的全屏显示方法及设备 | |
CN115866121B (zh) | 应用界面交互方法、电子设备和计算机可读存储介质 | |
CN110536004B (zh) | 多传感器应用于具有柔性屏幕的电子设备的方法及电子设备 | |
WO2020000448A1 (zh) | 一种柔性屏幕的显示方法及终端 | |
CN112506386B (zh) | 一种折叠屏显示方法及电子设备 | |
CN112351156B (zh) | 一种镜头切换方法及装置 | |
CN114125130B (zh) | 控制通信服务状态的方法、终端设备和可读存储介质 | |
WO2023103951A1 (zh) | 一种折叠屏的显示方法及相关装置 | |
CN113641271B (zh) | 应用窗口的管理方法、终端设备及计算机可读存储介质 | |
CN114257671B (zh) | 一种图像显示方法及电子设备 | |
CN112087649B (zh) | 一种设备搜寻方法以及电子设备 | |
CN116048358B (zh) | 悬浮球的控制方法和相关装置 | |
CN110609650B (zh) | 一种应用状态切换方法及终端设备 | |
CN116048436B (zh) | 应用界面显示方法、电子设备及存储介质 | |
CN114257670B (zh) | 一种具有折叠屏的电子设备的显示方法 | |
CN117009005A (zh) | 一种显示方法、汽车和电子设备 | |
CN114812381B (zh) | 电子设备的定位方法及电子设备 | |
CN115421619A (zh) | 一种窗口显示方法和电子设备 | |
CN116719569B (zh) | 启动应用的方法及装置 | |
CN116592756B (zh) | 折叠屏夹角的检测方法及电子设备 | |
CN116048350B (zh) | 一种截屏方法及电子设备 | |
CN117389496A (zh) | 一种折叠屏显示方法、电子设备和计算机可读存储介质 | |
CN117692693A (zh) | 多屏显示方法以及相关设备 | |
CN116339569A (zh) | 分屏显示的方法、折叠屏设备和计算机可读存储介质 | |
CN117705094A (zh) | 导航定位方法及终端设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |