CN117369756A - 一种折叠屏的显示方法以及相关设备 - Google Patents
一种折叠屏的显示方法以及相关设备 Download PDFInfo
- Publication number
- CN117369756A CN117369756A CN202210764059.2A CN202210764059A CN117369756A CN 117369756 A CN117369756 A CN 117369756A CN 202210764059 A CN202210764059 A CN 202210764059A CN 117369756 A CN117369756 A CN 117369756A
- Authority
- CN
- China
- Prior art keywords
- screen
- folding
- angle
- folding screen
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 99
- 230000008859 change Effects 0.000 claims description 68
- 230000006870 function Effects 0.000 claims description 68
- 238000012545 processing Methods 0.000 claims description 43
- 230000015654 memory Effects 0.000 claims description 40
- 238000013507 mapping Methods 0.000 claims description 37
- 230000008569 process Effects 0.000 claims description 25
- 230000000007 visual effect Effects 0.000 claims description 23
- 238000004590 computer program Methods 0.000 claims description 9
- 230000001976 improved effect Effects 0.000 abstract description 7
- 230000002452 interceptive effect Effects 0.000 abstract description 5
- 238000009877 rendering Methods 0.000 description 54
- 238000004891 communication Methods 0.000 description 37
- 230000006854 communication Effects 0.000 description 37
- 230000000694 effects Effects 0.000 description 28
- 238000010586 diagram Methods 0.000 description 19
- 238000007726 management method Methods 0.000 description 15
- 230000005236 sound signal Effects 0.000 description 13
- 238000010295 mobile communication Methods 0.000 description 12
- 230000036544 posture Effects 0.000 description 10
- 229940060587 alpha e Drugs 0.000 description 9
- 210000000988 bone and bone Anatomy 0.000 description 9
- 230000001133 acceleration Effects 0.000 description 8
- 230000003287 optical effect Effects 0.000 description 6
- 238000001514 detection method Methods 0.000 description 5
- 238000013528 artificial neural network Methods 0.000 description 4
- 238000005452 bending Methods 0.000 description 4
- 230000001413 cellular effect Effects 0.000 description 4
- 238000011161 development Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000008447 perception Effects 0.000 description 4
- 229920001621 AMOLED Polymers 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 238000011022 operating instruction Methods 0.000 description 3
- 230000009467 reduction Effects 0.000 description 3
- 230000002441 reversible effect Effects 0.000 description 3
- 230000003068 static effect Effects 0.000 description 3
- 238000012549 training Methods 0.000 description 3
- 230000003416 augmentation Effects 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 2
- 230000036772 blood pressure Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 239000002096 quantum dot Substances 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 238000013529 biological neural network Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 210000004027 cell Anatomy 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000010985 leather Substances 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000004660 morphological change Effects 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 230000002138 osteoinductive effect Effects 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 230000010349 pulsation Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000002829 reductive effect Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003238 somatosensory effect Effects 0.000 description 1
- 230000008093 supporting effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
- 230000003313 weakening effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
一种折叠屏的显示方法,应用于包括折叠屏的电子设备,方法包括:在折叠屏的折叠角度为第一角度时,在折叠屏上显示第一对象;检测到折叠屏的折叠角度由第一角度变为第二角度,显示第二对象;其中,第一对象为二维对象的图像,第二对象为二维对象对应的三维对象的图像。本申请使得用户在折叠屏处于半折叠的状态时可以看到内容更丰富的画面,提高了用户的交互体验。
Description
技术领域
本申请涉及电子技术领域,尤其涉及一种折叠屏的显示方法以及相关设备。
背景技术
随着电子设备的不断发展,越来越多具有显示屏的电子设备广泛应用于人们的日常生活和工作中,如具有显示屏的手机等。并且伴随屏幕技术的发展,电子设备的显示屏也变得越来越大,以给用户提供更丰富的信息,带给用户更好的使用体验。
但是,电子设备的显示屏太大,会严重影响其便携性能。因此,近年来所提出的配置有折叠屏的电子设备(例如折叠屏手机)是未来电子设备发展的方向。
在折叠屏处于完全展开的状态时,终端设备按照现有的实现显示二维的画面,用户可以通过俯视折叠屏的视角看到完整的画面,在折叠屏处于半折叠的状态下,终端设备按照现有的实现,在两个屏上分别显示二维的画面,由于折叠屏处于半折叠的状态下不同屏之间存在夹角,导致显示的画面的显示效果较差。
发明内容
本申请实施例提供了一种折叠屏的显示方法,使得用户在折叠屏处于半折叠的状态时可以看到内容更丰富的画面,提高了用户的交互体验。
第一方面,本申请提供了一种折叠屏的显示方法,应用于包括折叠屏的电子设备,方法包括:在折叠屏的折叠角度为第一角度时,在折叠屏上显示第一对象;检测到折叠屏的折叠角度由第一角度变为第二角度,根据第一对象,显示第二对象;其中,第一对象为二维对象的图像,第二对象为二维对象对应的三维对象的图像。
当折叠屏处于半折叠形态时,将显示画面中的内容进行变换和替换(例如将原本的二维显示内容替换为三维显示内容),以使得用户在折叠屏处于半折叠的状态时可以看到内容更丰富的画面,提高了用户的交互体验。
在一种可能的实现中,可以在折叠屏上不显示第一对象的情况下,显示第二对象。
在一种可能的实现中,第一对象为用户界面UI、照片、图标或者字符串。
在一种可能的实现中,第二对象可以包含第一对象的语义信息。例如,在第一对象为具备特定语义信息的字符串,第二对象可以为具备第一对象所具备的特定语义的三维对象。
在一种可能的实现中,第二对象可以包含第一对象的图像信息。
在一种可能的实现中,折叠屏为内折屏,折叠屏包括第一屏和第二屏;方法还包括:基于检测到折叠屏满足第一预设条件,使能第一对象的三维显示功能;第一预设条件包括如下的至少一种:折叠屏处于半折叠状态;或者,第一屏和第二屏中的一个屏与水平面的夹角小于角度阈值;或者,折叠屏的姿态在预设时间内的变化小于阈值;或者,第一屏和第二屏中的一个屏与目标台面紧贴。
在一种可能的实现中,折叠屏为内折屏,折叠屏包括第一屏和第二屏;方法还包括:基于检测到折叠屏满足第二预设条件,使能第一对象的三维显示功能;第二预设条件包括如下的至少一种:折叠屏处于半折叠状态;或者,折叠屏的姿态在预设时间内的变化小于阈值;或者,折叠屏上与折叠线垂直的一侧与目标台面紧贴;或者,折叠屏上与折叠线垂直的一侧与水平面的夹角小于角度阈值。
在一种可能的实现中,折叠屏为外折屏,折叠屏包括第一屏和第二屏;方法还包括:基于检测到折叠屏满足第三预设条件,使能第一对象的三维显示功能;第三预设条件包括如下的至少一种:折叠屏处于半折叠状态;或者,第一屏和第二屏中的一个屏与目标台面紧贴;或者,第一屏和第二屏中的一个屏与水平面的夹角小于角度阈值;或者,折叠屏的姿态在预设时间内的变化小于阈值。
在一种可能的实现中,折叠屏为外折屏,折叠屏包括第一屏和第二屏;方法还包括:基于检测到折叠屏满足第四预设条件,使能第一对象的三维显示功能;第四预设条件包括如下的至少一种:折叠屏处于半折叠状态;或者,折叠屏的姿态在预设时间内的变化小于阈值;或者,折叠屏上远离中心折叠线的两侧与目标台面紧贴;或者,折叠屏上远离中心折叠线的两侧与与水平面的夹角小于角度阈值。
在一种可能的实现中,第二对象为在目标视角下的三维对象映射到折叠屏所在的平面的图像。
在一种可能的实现中,目标视角与第二角度有关。
也就是说,可以维护有各个屏幕夹角和三维对象观看视角之间的映射关系,该映射关系可以是离散数据之间的映射关系,也可以是连续数据之间的映射关系(例如通过一个函数关系来表达),在获取到屏幕夹角之后,可以基于屏幕夹角和三维对象观看视角之间的映射关系,确定第二角度对应的目标视角。在该映射关系是离散数据之间的映射关系时,可以基于屏幕夹角(包括第二角度)和三维对象观看视角之间的映射关系,确定第二角度对应的目标视角。在该映射关系是连续数据之间的映射关系时,可以将第二角度作为映射关系的因变量,确定第二角度对应的目标视角(自变量)。
在一种可能的实现中,映射关系可以指示三维对象观看视角随着屏幕夹角的变化而变化,从显示效果上来看,随着折叠角度的变化,第二对象的画面处于动态的变化状态(折叠屏仍然满足针对于第一对象的三维显示功能的使能条件)。具体的,第二对象可以为目标视角下的第一对象的三维对象的图像,且随着折叠屏的折叠角度的变化,目标视角也相应的进行改变。
在一种可能的实现中,方法还包括:在折叠屏的折叠角度由第一角度变为第二角度的过程中,在折叠屏上显示在不断变化的视角下的三维对象映射到折叠屏所在的平面上的多帧图像;或者,在折叠屏的折叠角度由第一角度变为第二角度的过程中,在折叠屏上显示第一对象,直到折叠屏的折叠角度变为第二角度时,显示第二对象。
在一种可能的实现中,第一角度和第二角度小于或等于180度;在第二角度小于第一角度时,不断变化,包括:向水平视角变化;在第二角度大于第一角度时,不断变化,包括:向竖直视角变化。
在一种可能的实现中,显示第二对象,包括:在第一屏和第二屏上与第一对象相匹配的显示位置上显示第二对象。
在一种可能的实现中,在显示第二对象之前,方法还包括:根据第二角度,确定目标屏幕观看视角;根据目标屏幕观看视角与折叠屏之间的位姿关系,通过对目标视角下三维对象的图像进行拉伸变形处理,以将三维对象映射到折叠屏的平面上,得到第二对象。
在一种可能的实现中,目标屏幕观看视角与第二角度的中心线的差异在预设范围内。
在一种可能的实现中,折叠屏包括第一屏和第二屏,第二对象包括第一子对象和第二子对象,图像包括第一子对象对应的第一图像、以及第二子对象对应的第二图像;通过对图像进行拉伸变形处理,以将图像映射到折叠屏上,包括:根据目标视角与第一屏之间的位置关系,对第一图像进行拉伸变形处理,以将第一图像映射到第一屏上;根据目标视角与第二屏之间的位置关系,对第二图像进行拉伸变形处理,以将第二图像映射到第二屏上。
在一种可能的实现中,折叠屏包括第一屏和第二屏;显示第一对象,包括:在第一屏上显示第一对象,且在第二屏上显示目标画面;显示第二对象,包括:在第一屏上显示第二对象,且在第二屏上显示目标画面。目标画面可以为第二屏上显示的全部内容或者部分内容,和第一对象不同,在折叠前后,第二屏上的目标画面仍然维持二维的显示逻辑。
在一种可能的实现中,在折叠屏的折叠角度为第一角度时,折叠屏处于全展开状态。
第二方面,本申请提供了一种折叠屏的显示装置,应用于包括折叠屏的电子设备,装置包括:
显示模块,用于在折叠屏的折叠角度为第一角度时,在折叠屏上显示第一对象;
检测到折叠屏的折叠角度由第一角度变为第二角度,根据第一对象,显示第二对象;其中,第一对象为二维对象的图像,第二对象为二维对象对应的三维对象的图像。
在一种可能的实现中,第一对象为用户界面UI、照片、图标或者字符串。
在一种可能的实现中,第二对象包含第一对象的语义信息或者图像信息。
在一种可能的实现中,折叠屏为内折屏,折叠屏包括第一屏和第二屏;装置还包括:
使能模块,用于基于检测到折叠屏满足第一预设条件,使能第一对象的三维显示功能;第一预设条件包括如下的至少一种:
折叠屏处于半折叠状态;或者,
第一屏和第二屏中的一个屏与水平面的夹角小于角度阈值;或者,
折叠屏的姿态在预设时间内的变化小于阈值;或者,
第一屏和第二屏中的一个屏与目标台面紧贴。
在一种可能的实现中,折叠屏为内折屏,折叠屏包括第一屏和第二屏;装置还包括:
使能模块,用于基于检测到折叠屏满足第二预设条件,使能第一对象的三维显示功能;第二预设条件包括如下的至少一种:
折叠屏处于半折叠状态;或者,
折叠屏的姿态在预设时间内的变化小于阈值;或者,
折叠屏上与折叠线垂直的一侧与目标台面紧贴;或者,
折叠屏上与折叠线垂直的一侧与水平面的夹角小于角度阈值。
在一种可能的实现中,折叠屏为外折屏,折叠屏包括第一屏和第二屏;装置还包括:
使能模块,用于基于检测到折叠屏满足第三预设条件,使能第一对象的三维显示功能;第三预设条件包括如下的至少一种:
折叠屏处于半折叠状态;或者,
第一屏和第二屏中的一个屏与目标台面紧贴;或者,
第一屏和第二屏中的一个屏与水平面的夹角小于角度阈值;或者,
折叠屏的姿态在预设时间内的变化小于阈值。
在一种可能的实现中,折叠屏为外折屏,折叠屏包括第一屏和第二屏;装置还包括:
使能模块,用于基于检测到折叠屏满足第四预设条件,使能第一对象的三维显示功能;第四预设条件包括如下的至少一种:
折叠屏处于半折叠状态;或者,
折叠屏的姿态在预设时间内的变化小于阈值;或者,
折叠屏上远离中心折叠线的两侧与目标台面紧贴;或者,
折叠屏上远离中心折叠线的两侧与与水平面的夹角小于角度阈值。
在一种可能的实现中,第二对象为在目标视角下的三维对象映射到折叠屏所在的平面的图像。
在一种可能的实现中,目标视角与第二角度有关。
在一种可能的实现中,显示模块,还用于:
在折叠屏的折叠角度由第一角度变为第二角度的过程中,在折叠屏上显示在不断变化的视角下的三维对象映射到折叠屏所在的平面上的多帧图像;或者,
在折叠屏的折叠角度由第一角度变为第二角度的过程中,在折叠屏上显示第一对象,直到折叠屏的折叠角度变为第二角度时,显示第二对象。
在一种可能的实现中,第一角度和第二角度小于或等于180度;
在第二角度小于第一角度时,不断变化,包括:向水平视角变化;
在第二角度大于第一角度时,不断变化,包括:向竖直视角变化。
在一种可能的实现中,显示模块,具体用于:
在第一屏和第二屏上与第一对象相匹配的显示位置上显示第二对象。
在一种可能的实现中,装置还包括:
视角确定模块,用于在显示第二对象之前,根据第二角度,通过折叠屏的屏幕夹角和三维对象观看视角之间的映射关系,确定第二角度对应的目标视角。
在一种可能的实现中,显示模块,还用于:
在显示第二对象之前,根据第二角度,确定目标屏幕观看视角;
根据目标屏幕观看视角与折叠屏之间的位姿关系,通过对目标视角下三维对象的图像进行拉伸变形处理,以将三维对象映射到折叠屏的平面上,得到第二对象。
在一种可能的实现中,目标屏幕观看视角与第二角度的中心线的差异在预设范围内。
在一种可能的实现中,折叠屏包括第一屏和第二屏,第二对象包括第一子对象和第二子对象,图像包括第一子对象对应的第一图像、以及第二子对象对应的第二图像;显示模块,具体用于:
根据目标视角与第一屏之间的位置关系,对第一图像进行拉伸变形处理,以将第一图像映射到第一屏上;
根据目标视角与第二屏之间的位置关系,对第二图像进行拉伸变形处理,以将第二图像映射到第二屏上。
在一种可能的实现中,折叠屏包括第一屏和第二屏;
显示模块,具体用于:
在第一屏上显示第一对象,且在第二屏上显示目标画面;
在第一屏上显示第二对象,且在第二屏上显示目标画面。
在一种可能的实现中,在折叠屏的折叠角度为第一角度时,折叠屏处于全展开状态。
第三方面,本申请提供了一种电子设备,其特征在于,包括:折叠屏,折叠屏在折叠时被折叠线划分为第一屏和第二屏;一个或多个处理器;一个或多个存储器;传感器;
传感器,用于检测数据以使得一个或多个处理器检测第一屏与第二屏的夹角;
一个或多个存储器用于存储计算机程序代码,计算机程序代码包括计算机指令;当计算机指令在处理器上运行时,使得电子设备执行上述第一方面及第一方面中任一项可能实现方式的步骤。
第四方面,本申请提供了一种计算机存储介质,包括计算机指令,当计算机指令在电子设备或服务器上运行时,执行上述第一方面及第一方面中任一项可能实现方式的步骤。
第五方面,本申请提供了一种计算机程序产品,当计算机程序产品在电子设备或服务器上运行时,执行上述第一方面及第一方面中任一项可能实现方式的步骤。
第六方面,本申请提供了一种芯片系统,该芯片系统包括处理器,用于支持执行设备或训练设备实现上述方面中所涉及的功能,例如,发送或处理上述方法中所涉及的数据;或,信息。在一种可能的设计中,芯片系统还包括存储器,存储器,用于保存执行设备或训练设备必要的程序指令和数据。该芯片系统,可以由芯片构成,也可以包括芯片和其他分立器件。
附图说明
图1为本申请实施例提供的一种电子设备的产品形态示意图;
图2为本申请实施例提供的另一种电子设备的产品形态示意图;
图3为本申请实施例提供的一种放置姿态判断流程示意图;
图4A为本申请实施例提供的电子设备处于第一放置姿态的示意图;
图4B为本申请实施例提供的电子设备处于第二放置姿态的示意图;
图4C为本申请实施例提供的电子设备处于第三放置姿态的示意图;
图4D为本申请实施例提供的电子设备处于第四放置姿态的示意图;
图5为申请实施例提供的一种电子设备的结构示意图;
图6A为本申请实施例提供的一种计算A屏和B屏的夹角α的原理示意图;
图6B为本申请实施例提供的一种地理坐标系的实例示意图;
图6C为本申请实施例提供的一种电子设备的软件架构示意图;
图6D为本申请实施例提供的一种A屏或B屏与水平面的位置关系示意图;
图7为本申请实施例提供的一种视角示意;
图8为本申请实施例提供的一种视角示意;
图9-图24A为本申请实施例提供的界面示意图;
图24B为本申请实施例提供的一种折叠屏的显示方法的流程示意;
图25-图37为本申请实施例提供的界面示意图;
图38为本申请实施例提供的一种折叠屏的显示装置的结构示意;
图39为本申请实施例提供的终端设备的一种结构示意图。
具体实施方式
下面结合本发明实施例中的附图对本发明实施例进行描述。本发明的实施方式部分使用的术语仅用于对本发明的具体实施例进行解释,而非旨在限定本发明。
下面结合附图,对本申请的实施例进行描述。本领域普通技术人员可知,随着技术的发展和新场景的出现,本申请实施例提供的技术方案对于类似的技术问题,同样适用。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的术语在适当情况下可以互换,这仅仅是描述本申请的实施例中对相同属性的对象在描述时所采用的区分方式。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,以便包含一系列单元的过程、方法、系统、产品或设备不必限于那些单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它单元。
本申请实施例提供了一种折叠屏的显示方法,该方法可以应用于具有折叠屏的电子设备。该折叠屏可折叠形成至少两个屏。例如,折叠屏可沿折叠边或折叠轴折叠形成两个例如A屏和B屏。
本申请实施例中,电子设备上折叠屏的折叠方式可以分为两类。一类为朝外翻折的折叠屏(简称外折折叠屏、或者外折屏),另一类为朝内翻折的折叠屏(简称内折折叠屏、或者内折屏)。其中,以折叠屏可折叠形成第一屏和第二屏为例。外折折叠屏被折叠后,第一屏和第二屏相背对。内折折叠屏被折叠后,第一屏和第二屏相对。在本申请下述实施例中,第一屏可以被称为A屏、第二屏可以被称为B屏。
例如,请参考图1所示,其示出了本申请实施例提供的一种具有外折折叠屏的电子设备100的产品形态示意图。其中,图1中的(a)是外折折叠屏完全展开的形态示意图。该外折折叠屏可沿折叠边,按照图1中的(a)所示的方向11a和11b翻折,可形成图1中的(b)所示半折叠形态的A屏(即第一屏)和B屏(即第二屏)。该外折折叠屏可沿折叠边,按照图1中的(b)所示的方向12a和12b继续翻折,可形成图1中的(c)所示的折叠状态的外翻折叠屏。如图1中的(c)所示,电子设备100的折叠屏完全被折叠后,A屏(即第一屏)和B屏(即第二屏)相背对,对用户可见。
可以理解,对于具有外折折叠屏的电子设备而言,当折叠屏处于完全折叠形态或半折叠形态时,电子设备100可以在A屏(即第一屏)或B屏(即第二屏)显示界面内容。当折叠屏处于展开状态时,电子设备100可以在A屏(即第一屏)和B屏(即第一屏)上显示界面内容。其中,对折叠屏的展开状态和折叠状态的介绍可以参考以下实施例中的描述,这里不予赘述。
又例如,请参考图2,其示出本申请实施例提供的一种具有内折折叠屏的电子设备100的产品形态示意图。其中,图2中的(a)是内折折叠屏完全展开是的形态示意图。该内折折叠屏可沿折叠边,按照图2中的(a)所示的方向21a和21b翻折,可形成图2中的(b)所示半折叠形态的A屏和B屏。该外折折叠屏可沿折叠边,按照图2中的(b)所示的A屏和B屏。该内折折叠屏可沿折叠边,按照图2中的(b)所示的方向22a和22b继续翻折,可形成图2中的(c)所示的完全折叠形态的外翻折叠屏。如图2中的(c)所示,电子设备100的折叠屏被完全折叠后,A屏和B屏相对,对用户不可见。
在本申请实施例中,电子设备100的折叠屏(包括内折折叠屏和外折折叠屏)的A屏和B屏的夹角α的取值范围为[0°,180°]。其中,如果α∈[0°,P1],电子设备100可以确定折叠屏处于完全折叠形态;如果α∈(P1,P2),电子设备100可以确定折叠屏处于半折叠形态;α∈[P2,180°],电子设备100可以确定折叠屏处于完全展开形态。其中,0°<P1<P2<180°。P1,P2可以是预设角度阈值。P1和P2可以是根据大量用户使用折叠屏的使用习惯确定的;或者,P1、P2可以由用户在电子设备100中设定。
在一些实施例中,按照大多数用户的使用习惯,A屏和B屏的夹角α大于150°时,用户想要将A屏和B屏作为整体(即作为一个完整的显示屏)使用的可能性较高。当A屏和B屏的夹角α小于30度时,用户想要单独使用A屏或者B屏的可能性较高,折叠屏可以处于完全折叠形态。因此,在本申请实施例的预设角度阈值P1的取值范围可以为(0,30°),预设角度阈值P2的取值范围可以为(150°,180°)。例如,预设角度阈值P1可以为5°、10°、15°、20°等。预设角度阈值P2可以为155°、160°、165°或170°等。
需要说明的是,本申请实施例中的折叠屏(包括内折折叠屏和外折折叠屏)被折叠后形成的至少两个屏,可以为独立存在的多个屏,也可以为一体结构的一个完整屏,只是被折叠形成了至少两部分。
例如,折叠屏可以是柔性折叠屏,柔性折叠屏包括采用柔性材质制作的折叠边。该柔性折叠屏的部分或全部采用柔性材质制作。柔性折叠屏被折叠后形成的至少两个屏是一体结构的一个完整屏,只是被折叠形成了至少两部分。
又例如,上述折叠屏可以为多屏折叠屏。该多屏折叠屏可包括多个(两个或两个以上)的屏。这多个屏是多个单独的显示屏。这多个屏可依次通过折叠轴连接。每个屏可以绕与其连接的折叠轴转动,实现多屏折叠屏的折叠。
其中,图1和图2中以折叠屏是柔性折叠屏为例,对本申请实施例中的折叠屏进行说明。并且,本申请后续实施例中也以折叠屏是柔性折叠屏为例,对本申请实施例提供的方法进行说明。
示例性的,本申请实施例中的电子设备100可以是手机、平板电脑、桌面型计算机、膝上型计算机、手持计算机、笔记本电脑、超级移动个人计算机(ultra-mobile personalcomputer,UMPC)、上网本,以及蜂窝电话、个人数字助理(personal digital assistant,PDA)、增强现实(augmented reality,AR)\虚拟现实(virtual reality,VR)设备等包括上述折叠屏的设备,本申请实施例对该电子设备的具体类型不作特殊限制。
下面结合附图对本申请实施例中折叠屏处于半折叠形态下的几种支架模式进行说明。
请参考图3,图3为本申请实施例中电子设备100识别折叠屏的支架模式的流程图。
如图3所示,电子设备100识别折叠屏的支架模式的流程可以如下:
1、电子设备100可以接收用户的折叠操作,响应于用户的折叠操作,电子设备100可以计算折叠屏的折叠角度(即第一屏和第二屏的夹角)α。
当电子设备100判定出折叠屏的折叠角度α∈[0°,P1]时,电子设备100可以确定出折叠屏为完全折叠形态(例如上述图1中的(c)或图2中的(c)所示)。
当电子设备100判定出折叠屏的折叠角度α∈[P2,180°]时,电子设备100可以确定出折叠屏为展开形态(例如上述图1中的(a)或图2中的(a)所示)。
当电子设备100判定出折叠屏的折叠角度α∈(P1,P2)时,电子设备100可以确定出折叠屏为半折叠形态(例如上述图1中的(b)或图2中的(b)所示)。其中,0°<P1<P2<180°。
其中,电子设备100计算折叠屏的折叠角度α的过程可以参考后续实施例,在此不再赘述。
2、在电子设备100判定折叠屏处于半折叠形态后,电子设备100还可以判断折叠屏的折叠方式是外折(如图上述图1中的(b)所示)还是内折(如上述图2中的(b)所示)。
3、在电子设备100判定折叠屏处于半折叠形态且折叠方式为外折后,电子设备100可以判断电子设备100的摆放形态时双屏横屏站立摆放还是单屏水平摆放。
其中,当电子设备100外折成半折叠形态,且双屏横屏站立摆放时,电子设备100可以判定电子设备100处于双人操作支架模式。
当电子设备100外折成半折叠形态,且单屏水平摆放时,电子设备100可以判定电子设备100处于观影支架模式。
4、在电子设备100判定折叠屏处于半折叠形态且折叠方式为内折后,电子设备100可以判断电子设备100的摆放形态为双屏竖屏站立摆放还是为单屏水平摆放。
其中,当电子设备100内折成半折叠形态,且双屏竖屏站立摆放时,电子设备100可以判定电子设备100处于阅读支架模式。
当电子设备100内折成半折叠形态,且单屏水平摆放时,电子设备100可以判定电子设备100处于电脑支架模式。
下面具体介绍本申请实施例中电子设备100在半折叠形态下的四种支架模式(也成为放置姿态)。
1、双人操作支架模式
如图4A所示,当电子设备100上的a边与b边与实物接触,且a边和b边与水平面形成角度β∈[0,P3]时,电子设备100可以判定电子设备100处于双屏横屏站立摆放形态。其中,0°<P3≤30°,a边为电子设备100的A屏上平行于折叠线的外边,b边为电子设备100的B屏上平行于折叠线的外边。
因此,在本申请实施例中,当电子设备100处于双人操作支架模式时,电子设备100的折叠屏外折分为A屏(即第一屏)和B屏(即第二屏),A屏和B屏的夹角α∈(P1,P2),其中,0°<P1<P2<180°。并且,电子设备100上的a边与b边与实物接触,其中,a边和b边与水平面形成的夹角β∈[0,P3],可选的,0°<P3≤30°。
2、观影支架模式
如图4B所示,当电子设备100的A屏或B屏与实物接触,且a边或b边与水平面形成角度β∈[0,P3]时,电子设备100可以判定电子设备100处于单屏水平摆放形态。其中,0°<P3≤30°,a边为电子设备100上在A屏侧平行于折叠线的外边,b边为电子设备100上B屏侧平行于折叠线的外边。
因此,在本申请实施例中,当电子设备100处于观影支架模式时,电子设备100的折叠屏被外折分为A屏(即第一屏)和B屏(即第二屏),A屏和B屏的折叠角度α∈(P1,P2),其中,0°<P1<P2<180°。并且,电子设备100上B屏的显示面与实物接触,其中,a边(即第一侧边)和b边(即第二侧边)与水平面的夹角β∈[0,P3],可选的,0°<P3≤30°。
3、阅读支架模式
如图4C所示,当电子设备100的a边和b边与水平面形成的夹角β∈[P4,90°]时,电子设备100可以判定电子设备100处于双屏竖屏站立摆放形态。其中,60°≤P4<90°,a边为电子设备100的A屏上平行于折叠线的外边,b边为电子设备100的B屏上平行于折叠线的外边。
因此,在本申请实施例中,当电子设备100处于阅读支架模式时,电子设备100的折叠屏内折为A屏(即第一屏)和B屏(即第二屏),A屏和B屏的折叠角度α∈(P1,P2),其中,0°<P1<P2<180°。并且,电子设备100上的a边(即第一侧边)和b边(即第二侧边)与水平面的夹角β∈[P4,90°],可选的,60°≤P4<90°。
4、电脑支架模式
如图4D所示,当电子设备100上B屏的背面与实物接触,且a边和b边与水平面形成的夹角β∈[0,P3]时,电子设备100可以判定电子设备100处于单屏水平摆放形态。其中,0°<P3≤30°,a边为电子设备100的A屏上平行于折叠线的外边,b边为电子设备100的B屏上平行于折叠线的外边。
因此,本申请实施例中,当电子设备100处于电脑支架模式时,电子设备100的折叠屏内折分为A屏(即第一屏)和B屏(即第二屏),A屏和B屏的折叠角度α∈(P1,P2),其中,0°<P1<P2<180°。并且,电子设备100上B屏(即第二屏)的背面与实物接触,其中,a边(即第一侧边)和b边(即第二侧边)与水平面形成的夹角β∈[0,P3],可选的,0°<P3≤30°。
在一种可能的实现中,在折叠屏进行了一定角度的折叠后,折叠屏呈现给用户的视野范围会变大。假设把屏幕当成一扇窗户,把透过窗户观察到的景色当做屏幕的显示图像。当折叠屏手机发生了折叠之后,由于窗户的形状发生了变化,用户透过窗户看到的外界的风景会产生变化。半折叠状态相比完全展开状态具有更大的视角,能够看到更多的风景,即能观察到更大视角的图像。反应到屏幕显示内容上,即半折叠状态下的屏幕相比完全展开状态下,可以提供更大、更立体的显示内容。
以内折屏为例,参考图7和图8,从图7和图8中(a)和(b)的比对可以看出,(b)图的视角完全包括了(a)图的视角,且(b)图的视角更大。因此,在图7中(b)或者图8中(b)的状态下,折叠屏可以呈现跨度更大的显示内容。
应理解,图7和图8中仅显示了内折屏的原理,外折屏也同理,相似之处,这里不再赘述。
在一种可能的实现中,在折叠屏处于完全展开的状态时,用户可以通过俯视折叠屏的视角看到无畸变的画面(以折叠线为短边为例,可以参照图9左侧所示,以折叠线为长边为例,可以参照图11左侧所示),在折叠屏处于半折叠的状态时,用户在观察折叠屏时,折叠屏显示的画面会出现一定的畸变(以折叠线为短边为例,可以参照图9右侧所示,以折叠线为长边为例,可以参照图11右侧所示)。此外,在折叠屏处于半折叠的状态下(例如处于上述介绍的四种放置姿态时、或者是用户手持处于半折叠状态的折叠屏时),用户观看显示画面的最佳视角为和折叠屏所形成的折叠夹角的中线上的视角位置,用户在最佳观看位置观察折叠屏时,并不会通过和某一个折叠屏竖直的视角来观看折叠屏的显示画面,这个时候观看的画面会出现畸变,且由于畸变,会导致不能清楚的看到画面甚至遗失部分显示内容(以折叠线为短边为例,畸变情况具体可以参照图10所示,以折叠线为长边为例,畸变情况具体可以参照图12所示)。
然而,由于在折叠屏处于半折叠的状态下,给用户提供了更大的观察视野,本申请实施例中,在折叠屏处于半折叠的状态时,将显示画面中的内容进行变换和替换(例如将原本的二维显示内容替换为三维显示内容),以使得用户在折叠屏处于半折叠的状态时仍然可以看到无畸变以及内容更丰富的画面。
关于最佳观看位置:
在一种可能的实现中,最佳观看位置可以理解为你用户观看折叠屏手机屏幕时的具有最佳观看效果的位置,对于每个状态的折叠屏来说,其最佳观看位置可以是唯一的。举例来说,当折叠屏手机完全展开时,用户的视线垂直于屏幕所在平面为最佳观看视角,则最佳观看位置位于屏幕中心所在的、垂直于屏幕所在平面的直线上,具体的位置随屏幕大小有所不同。当折叠屏设备的折叠角度改变时,会改变用户使用折叠屏手机时的最佳观看位置。例如,当折叠屏手机的两个分屏折叠成90°后,若再以垂直于某一分屏的视角观看,则只能看见一个分屏的内容,另一个分屏的内容与视线垂直,完全看不到,显然不是最佳的角度。图13示出了从完全展开状态到半折叠状态的最佳观看位置的变化。
在一种可能的实现中,最佳观看位置的确定,可以按照预设的规则来确定。例如,以折叠屏手机的一个分屏所在平面为水平面,每个折叠角度的最佳观看位置和折叠角度之间具有一映射关系,根据该映射关系可以计算出最佳观看位置的坐标。或者可以直接预先存储每个折叠角度对应的最佳观看位置的坐标。
可以理解,当折叠屏手机不放置于平面上时,只需要结合陀螺仪等传感器确定折叠屏的位置,按照相同的原理即可确定出用户观看屏幕时的最佳观看位置。
下面结合附图对本申请实施例中提供的电子设备100进行说明。
图5示出了电子设备100的结构示意图。
下面以电子设备100为例对实施例进行具体说明。应该理解的是,图5所示电子设备100仅是一个范例,并且电子设备100可以具有比图5中所示的更多的或者更少的部件,可以组合两个或多个的部件,或者可以具有不同的部件配置。图5中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
电子设备100可以包括:处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
可以理解的是,本发明实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
其中,控制器可以是电子设备100的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。在一些实施例中,处理器110可以包含多组I2C总线。处理器110可以通过不同的I2C总线接口分别耦合触摸传感器180K,充电器,闪光灯,摄像头193等。例如:处理器110可以通过I2C接口耦合触摸传感器180K,使处理器110与触摸传感器180K通过I2C总线接口通信,实现电子设备100的触摸功能。
I2S接口可以用于音频通信。在一些实施例中,处理器110可以包含多组I2S总线。处理器110可以通过I2S总线与音频模块170耦合,实现处理器110与音频模块170之间的通信。在一些实施例中,音频模块170可以通过I2S接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。
PCM接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频模块170与无线通信模块160可以通过PCM总线接口耦合。在一些实施例中,音频模块170也可以通过PCM接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。所述I2S接口和所述PCM接口都可以用于音频通信。
UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,UART接口通常被用于连接处理器110与无线通信模块160。例如:处理器110通过UART接口与无线通信模块160中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块170可以通过UART接口向无线通信模块160传递音频信号,实现通过蓝牙耳机播放音乐的功能。
MIPI接口可以被用于连接处理器110与显示屏194,摄像头193等外围器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(displayserial interface,DSI)等。在一些实施例中,处理器110和摄像头193通过CSI接口通信,实现电子设备100的拍摄功能。处理器110和显示屏194通过DSI接口通信,实现电子设备100的显示功能。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,GPIO接口可以用于连接处理器110与摄像头193,显示屏194,无线通信模块160,音频模块170,传感器模块180等。GPIO接口还可以被配置为I2C接口,I2S接口,UART接口,MIPI接口等。
USB接口130是符合USB标准规范的接口,具体可以是Mini USB接口,Micro USB接口,USB Type C接口等。USB接口130可以用于连接充电器为电子设备100充电,也可以用于电子设备100与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如AR设备等。
可以理解的是,本发明实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本申请另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,外部存储器,显示屏194,摄像头193,和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A,受话器170B等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(codedivision multiple access,CDMA),宽带码分多址(wideband code division multipleaccess,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidounavigation satellite system,BDS),准天顶卫星系统(quasi-zenith satellitesystem,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
电子设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。该显示屏194是上述外折折叠屏或内折折叠屏。
显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystaldisplay,LCD),有机发光二极管(organic light-emitting diode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrix organic light emitting diode的,AMOLED),柔性发光二极管(flex light-emitting diode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot light emitting diodes,QLED)等。在一些实施例中,电子设备100可以包括1个或N个显示屏194,N为大于1的正整数。
电子设备100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,电子设备100可以包括1个或N个摄像头193,N为大于1的正整数。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行电子设备100的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。
电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听音乐,或收听免提通话。受话器170B,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时,可以通过将受话器170B靠近人耳接听语音。麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170C发声,将声音信号输入到麦克风170C。电子设备100可以设置至少一个麦克风170C。在另一些实施例中,电子设备100可以设置两个麦克风170C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备100还可以设置三个,四个或更多麦克风170C,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the USA,CTIA)标准接口。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180A,电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,电子设备100根据压力传感器180A检测所述触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180B检测电子设备100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180B还可以用于导航,体感游戏场景。
在本申请实施例中,电子设备100的显示屏194可折叠形成多个屏。多个屏中可以设置有陀螺仪传感器180B,用于测量对应屏的朝向(即朝向的方向向量)。电子设备100可以根据陀螺仪传感器180B测量得到的每个屏的朝向角度变化,确定出相邻屏的夹角(例如A屏和B屏的夹角)。
需要说明的是,在本申请实施例中,电子设备100的折叠屏(如上述显示屏194)可折叠形成多个屏。每个屏中可以包括陀螺仪传感器(如上述陀螺仪180B),用于测量对应屏的朝向(即朝向的方向向量)。例如,结合上述图1,电子设备100的显示屏194经折叠可形成A屏(即第一屏)和B屏(即第二屏),那么该A屏和B屏中均包括有陀螺仪传感器180B,分别用于测量A屏和B屏的朝向。电子设备100根据测量得到的每个屏的朝向的角度变化,可以确定出相邻屏的夹角,以及每个屏与水平面的关系。
示例性的,电子设备100的折叠屏可折叠形成图6A所示的A屏和B屏。A屏中设置有陀螺仪传感器A,B屏设置有陀螺仪传感器B。本申请实施例这里,对陀螺仪传感器A测量A屏的朝向(即朝向的方向向量),陀螺仪传感器B测量B屏的朝向(即朝向的反向向量)的原理,以及电子设备100根据A屏的朝向和B屏的朝向计算A屏和B屏的夹角α的原理进行说明。
其中,陀螺仪传感器的坐标系是地理坐标系。如图6B所示,地理坐标系的原点O位于运载体(即包含陀螺仪传感器的设备,如电子设备100)所在的点,X轴沿当地纬线指向东(E),Y轴沿当地子午线指向北(N),Z轴沿当地地理垂线指向上,并与X轴和Y轴构成右手直角坐标系。其中,X轴与Y轴构成的平面即为当地水平面,Y轴与Z轴构成的平面即为当地子午面。因此,可以理解的是,陀螺仪传感器的坐标系是:以陀螺仪传感器为原点O,沿当地纬线指向东为X轴,沿当地子午线指向北为Y轴,沿当地地理垂线指向向上(即地理垂线的反向)为Z轴。
电子设备100利用每个屏中设置的陀螺仪传感器,便可测量得到每个屏在其设置的陀螺仪传感器的坐标系中朝向的方向向量。例如,参考如图6A所示的电子设备100的侧视图,电子设备100测量得到A屏在陀螺仪传感器A的坐标系中的朝向的方向向量为向量z1,B屏在陀螺仪传感器B的坐标系中的朝向的方向向量为向量z2,电子设备100利用如下公式(1),便可计算出向量z1与向量z2的夹角θ:
又根据图6A可知,由于向量z1与A屏垂直,向量z2与B屏垂直,因此,可以得到A屏与B屏的夹角α=180°-θ。即电子设备100可以根据测量得到的A屏在陀螺仪传感器A的坐标系中的朝向的方向向量(即向量z1)和B屏在陀螺仪传感器B的坐标系中的朝向的方向向量(即向量z2),确定出A屏与B屏的夹角α(该夹角可以为本申请实施例中折叠屏之间的折叠角度,例如第一角度和第二角度)。
需要说明的是,虽然A屏和B屏中设置的陀螺仪传感器的位置并不重叠,即A屏和B屏的陀螺仪传感器的坐标系的原点并不重叠,但是,两个坐标系的X轴,Y轴,Z轴是平行的,从而可以认为A屏和B屏中设置的陀螺仪传感器的坐标系是平行的。这样一来,虽然向量z1和向量z2不在同一个坐标系,但是因为两个坐标系的各轴平行,因此,仍可通过上述公式(1)计算向量z1与向量z2的夹角θ。
在一些实施例中,还可以有其他一个或多个传感器配合,测量A屏与B屏的夹角α。例如,折叠屏的每个屏中均可设置一个加速度传感器。电子设备100(如处理器110)可利用加速度传感器测量每个屏被转动时的运动加速度;然后根据测量得到的运动加速度计算一个屏相对于另一个屏转动的角度,即A屏与B屏的夹角α。
在另一些实施例中,上述陀螺仪传感器可以是由其他多个传感器配合形成的虚拟陀螺仪传感器,该虚拟陀螺仪传感器可用于计算折叠屏的相邻屏的夹角,即A屏与B屏的夹角α。
在本申请的一些实施例中,电子设备100还可以通过上述陀螺仪180B测量出A屏上的a边(或B屏上的b边)与水平面的夹角β。其中,对于a边和b边的描述可以参考上述图4A-图4D所示实施例,在此不再赘述。
示例性的,电子设备100的折叠屏可折叠(外折或内折)形成A屏和B屏。电子设备100利用每个屏中设置的陀螺仪传传感器,便可测量得到A屏上a边(或B屏上b边)在其设置的陀螺仪传感器坐标系中的方向向量为向量,其中,a边和b边平行。例如,参考如图6D所示,电子设备100上A屏与水平面的位置示意图。电子设备100可以测量得到A屏的a边在陀螺仪传感器A的坐标系中的方向向量为向量z3,水平面的法线在陀螺仪传感器A的坐标系中的方向向量为z4,因此电子设备100利用如下公式(2),便可计算出向量z3余向量z4的夹角γ:
又根据图6A可知,由于向量z4与水平面垂直,因此,可以得到A屏与B屏的夹角β=90°-γ。即电子设备100可以根据测量得到的电子设备100的a边所在方向向量和水平面的法线向量,确定出a边与水平面的夹角β。由于,电子设备100上的a边与b边平行,因此,a边与水平面的夹角和b边与水平面的夹角相等都为β。同理,电子设备100可以根据测量得到的电子设备100的b边所在方向向量和水平面的法线向量,确定出b边与水平面的夹角β。
气压传感器180C用于测量气压。在一些实施例中,电子设备100通过气压传感器180C测得的气压值计算海拔高度,辅助定位和导航。
磁传感器180D包括霍尔传感器。电子设备100可以利用磁传感器180D检测翻盖皮套的开合。在一些实施例中,当电子设备100是翻盖机时,电子设备100可以根据磁传感器180D检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
加速度传感器180E可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。需要注意的是,在本申请实施例中,电子设备100的显示屏194可折叠形成多个屏。每个屏中可以包括加速度传感器180E,用于测量对应屏的朝向(即朝向的方向向量)。
距离传感器180F,用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中,拍摄场景,电子设备100可以利用距离传感器180F测距以实现快速对焦。
接近光传感器180G可以包括例如发光二极管(LED)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定电子设备100附近有物体。当检测到不充分的反射光时,电子设备100可以确定电子设备100附近没有物体。电子设备100可以利用接近光传感器180G检测用户手持电子设备100贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器180G也可用于皮套模式,口袋模式自动解锁与锁屏。需要说明的是,在本申请实施例中,该接近光传感器180F可以设置于电子设备100的A屏和B屏、a边、b边、电子设备100上A屏的背面、B屏的背面,等位置处。在本申请的一些实施例中,该接近光传感器180F可用于检测电子设备100的A屏、B屏、a边、b边、A屏的背面、B屏的背面各自是否与实物有接触。
环境光传感器180L用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180L也可用于拍照时自动调节白平衡。环境光传感器180L还可以与接近光传感器180G配合,检测电子设备100是否在口袋里,以防误触。
指纹传感器180H用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
温度传感器180J用于检测温度。在一些实施例中,电子设备100利用温度传感器180J检测的温度,执行温度处理策略。例如,当温度传感器180J上报的温度超过阈值,电子设备100执行降低位于温度传感器180J附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,电子设备100对电池142加热,以避免低温导致电子设备100异常关机。在其他一些实施例中,当温度低于又一阈值时,电子设备100对电池142的输出电压执行升压,以避免低温导致的异常关机。
触摸传感器180K,也称“触控面板”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
骨传导传感器180M可以获取振动信号。在一些实施例中,骨传导传感器180M可以获取人体声部振动骨块的振动信号。骨传导传感器180M也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器180M也可以设置于耳机中,结合成骨传导耳机。音频模块170可以基于所述骨传导传感器180M获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于所述骨传导传感器180M获取的血压跳动信号解析心率信息,实现心率检测功能。
按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入,产生与电子设备100的用户设置以及功能控制有关的键信号输入。
马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
SIM卡接口195用于连接SIM卡。SIM卡可以通过插入SIM卡接口195,或从SIM卡接口195拔出,实现和电子设备100的接触和分离。电子设备100可以支持1个或N个SIM卡接口,N为大于1的正整数。SIM卡接口195可以支持Nano SIM卡,Micro SIM卡,SIM卡等。同一个SIM卡接口195可以同时插入多张卡。所述多张卡的类型可以相同,也可以不同。SIM卡接口195也可以兼容不同类型的SIM卡。SIM卡接口195也可以兼容外部存储卡。电子设备100通过SIM卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,电子设备100采用eSIM,即:嵌入式SIM卡。eSIM卡可以嵌在电子设备100中,不能和电子设备100分离。
以下实施例中的方法均可以在具有上述硬件结构的电子设备100中实现。
电子设备100的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本发明实施例以分层架构的系统为例,示例性说明电子设备100的软件结构。
图6C是本申请实施例的电子设备100的软件结构框图。分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android系统分为四层,从上至下分别为应用程序层(简称应用层),应用程序框架层(简称框架层),内核层(也称为驱动层)以及硬件平台。
其中,应用层可以包括一系列应用程序包。如图7所示,应用层可以包括系统应用和第三方应用等多个应用程序包。例如,应用程序包可以为相机、图库、日历、通话,地图,导航,WLAN,蓝牙,音乐,视频,短信息以及桌面启动(luncher)等应用程序。
框架层为应用程序层的应用程序提供应用编程接口(application programinginterface,API)和编程框架。应用程序框框架包括一些预先定义的函数。如图7所示,框架层可以包括事件生成模块、模式识别模块、数据计算模块、数据上报模块、活动管理器(Window manager service,WMS)和活动管理器(activity manager service,AMS)等。可选的,框架层还可以包括内容提供器,视图系统,电话管理器,资源管理器,通知管理器等(附图未示出)。
其中,窗口管理器WMS用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。活动管理器AMS用于负责管理Activity,负责系统中各组件的启动、切换、调度及应用程序的管理和调度等工作。
驱动层(图中未示出)是硬件平台和框架层之间的层。内核层可以包括,显示驱动,输入/输出设备驱动(例如,键盘、触摸屏、耳机、扬声器、麦克风等),摄像头驱动,音频驱动以及传感器驱动等。
硬件平台可以包括陀螺仪传感器、接近光传感器、显示屏等等。硬件平台包括的传感器具体可以参考上述图5中所示的电子设备100的硬件结构示意图。
其中,用户对电子设备100进行输入操作(如对折叠屏的折叠操作),硬件平台可以将陀螺仪传感器、接近光传感器等传感器采集到的传感器数据上报给框架层的数据上报模块,数据上报模块将传感器数据上报给数据计算模块。数据模块计算模块可以根据传感器数据计算出电子设备100折叠屏的折叠角度α、折叠方向、a边和b边与水平面的角度β、实物检测结果等,并上报给模式识别模块。模式识别模块可以根据数据计算模块上报的折叠角度α、折叠方向、实物检测结果等,确定出折叠屏当前所处的折叠形态(例如折叠屏的折叠夹角)以及支架模式。其中,模式识别模块识别折叠屏的支架模式可以参考上述图3所示实施例,在此不再赘述。模式识别模块在识别到折叠屏的折叠形态以及支架模式后,可以上报给事件生成模块。事件生成模块可以上报支架模式事件给应用层。应用层中的系统应用或第三方应用可以调用启动Activity接口,通过活动管理器AMS设置应用的支架模式(例如,双人操作支架模式、观影支架模式、阅读支架模式或电脑支架模式,等等)以及该支架模式下应用显示对象的位置和大小等。框架层的窗口服务器WMS根据AMS的设置绘制对象,然后将对象数据发送给内核层的显示驱动(图中未示出),由显示驱动在折叠屏显示对应的应用界面。
本申请实施例提供一种折叠屏的显示方法,应用于具有折叠屏的电子设备,该折叠屏可被折叠包括第一屏和第二屏,当折叠屏处于半折叠形态时,将显示画面中的内容进行变换和替换(例如将原本的二维显示内容替换为三维显示内容),以使得用户在折叠屏处于半折叠的状态时仍然可以看到无畸变以及内容更丰富的画面,提高了用户的交互体验。
接下来根据应用场景的不同,对本申请实施例中的折叠屏的显示方法进行介绍:
1、手持折叠屏时的折叠过程;在一种可能的实现中,用户在手持折叠屏时,可以对折叠屏进行折叠操作,电子设备可以接收用户的折叠操作,响应于用户的折叠操作,电子设备可以计算折叠屏的折叠角度(即第一屏和第二屏的夹角)α。当电子设备判定出折叠屏的折叠角度α∈(P1,P2)时,电子设备可以确定出折叠屏为半折叠形态(例如上述图1中的(b)或图2中的(b)所示)。其中,0°<P1<P2<180°。例如,P1可以为1度、2度、3度、5度、7度、10度、15度、20度、30度、60度、90度等;P2可以为175度、170度、165度、150度、140度、120度、100度、90度等。
应理解,本申请实施例中,当折叠屏的折叠角度为第一角度时,折叠屏可以显示第一对象,当折叠屏的折叠角度为第二角度时,折叠屏可以显示第二对象。第二角度可以为触发第一对象的三维显示功能的折叠角度范围之内的一个角度,例如在折叠屏处于半折叠状态时的一个折叠角度。
在一种可能的实现中,在用户手持折叠屏时,折叠屏上可以显示有第一对象,电子设备在检测到折叠屏满足预设条件时,可以使能对第一对象的三维显示功能(进而显示第二对象)。接下来针对于第一对象、预设条件以及三维显示功能分别进行介绍:
关于第一对象:
在一种可能的实现中,可视化界面可以包括多种显示元素,不同的显示元素可以显示在相同或不同的图层。本申请实施例中,可以按照显示元素是否可以进行(例如,不同视角的)的三维渲染显示,将显示元素分为立体显示元素和平面显示元素。例如,立体显示元素可以为第一对象。
在一种可能的实现中,平面显示元素,即无论从何种视角观看,都是显示在平面上的对象。平面显示元素不支持单独的渲染,仅能跟随显示界面进行整体的调整,且这种调整不涉及立体的变化。
在一种可能的实现中,所述第一对象为二维对象的图像。
在一种可能的实现中,第一对象可以为用户界面(user interface,UI)、照片、图标以及字符串,接下来分别进行介绍。
1、用户界面UI
在一种可能的实现中,UI可以为应用程序的界面,例如可以为音频类应用程序的UI、视频类应用程序的UI、文本类应用程序的UI、聊天类应用程序的UI、游戏类应用程序的UI、生活服务类应用程序的UI、浏览器类应用程序的UI等等。
在一种可能的实现中,在折叠屏处于完全展开的状态下,用户可以通过俯视折叠屏的视角看到无畸变的UI。在折叠屏处于半展开的状态下,由于第一屏和第二屏之间的折叠角度的改变,从用户的视角来看,显示画面中的UI会出现畸变(例如可以参照图14所示),其中,所谓畸变,是指相对于折叠屏处于完全展开的状态时所看到的显示画面。因此在半折叠或者满足其他预设条件的情况下,可以调整显示画面的内容,以便在用户的视角上看到的UI不出现畸变,且由于半折叠状态下,显示画面的视角范围变大,因此可以将UI转化为立体显示的方式(例如可以参照图15所示)。
2、图标
在一种可能的实现中,图标可以为UI上的一个图案,例如可以为UI界面上的一个提示类图案、UI上的一张图像、表情(例如,静态表情或动态表情)、展示类图像(例如统计类的示意图,例如,柱状图、折线图等)。
在一种可能的实现中,在折叠屏处于完全展开的状态下,用户可以通过俯视折叠屏的视角看到无畸变的UI。在折叠屏处于半展开的状态下,由于第一屏和第二屏之间的折叠角度的改变,从用户的视角来看,显示画面会出现畸变的畸变。因此可以在XX的情况下,可以调整显示画面的内容,以便在用户的视角上,不出现畸变,另一方面,在折叠屏为外折屏的,且由于半折叠状态下,显示画面的视角范围变大,因此可以显示更丰富更立体的内容。
3、字符串
在一种可能的实现中,图标可以为UI上的字符串,例如可以为UI界面上的一段文字或者是链接等。
关于手持状态下的预设条件:
在一种可能的实现中,预设状态可以是折叠屏的折叠角度在预设范围内,例如可以是上述介绍的半折叠状态对应的角度范围。
在一种可能的实现中,在检测到折叠屏满足预设条件后,可以根据第二角度,在折叠屏上显示第二对象,其中,第二对象可以为第一对象的三维对象的图像。
在一种可能的实现中,第二对象可以包含第一对象的语义信息。例如,在第一对象为具备特定语义信息的字符串,第二对象可以为具备第一对象所具备的特定语义的三维对象,例如,第一对象为字符串“A”,第二对象为“A”的立体对象在某个视角上的图像,例如可以参照图16所示。
在一种可能的实现中,第二对象可以包含第一对象的图像信息,例如第一对象为表情A,则第二对象为表情A的立体对象在某个视角上的图像。示例性的,第一对象可以为用于柱状图,其可以表示各个数据的数值大小特征,第二对象可以为立体化的柱状图,具体可以参照图17所示。
关于第二对象的显示位置:
在一种可能的实现中,可以在第一对象在折叠屏上显示位置相匹配的位置显示第二对象。
在一种可能的实现中,“相匹配”可以理解为:第一对象在折叠屏上显示位置和第二对象在折叠屏上显示位置之间的差异可以小于阈值,阈值可以为1个像素偏差、2个像素偏差、3个像素偏差、4个像素偏差、5个像素偏差等。
在一种可能的实现中,在一些场景中,第一对象在折叠屏折叠前与折叠后的显示位置不同,“相匹配”可以理解为:第二对象可以显示在目标位置,目标位置为:若不对第一对象使能三维显示功能时,第一对象在折叠屏上显示位置附近(示例性的,位置差异可以小于阈值)。
在一种可能的实现中,折叠后的折叠屏仍然保持着双屏显示的模式(第一屏和第二屏都显示),在一些场景中,当折叠屏设备从完全展开状态向半折叠态切换时,折叠到一定角度,显示页面会发生变化,两个分屏分别显示一部分原显示界面的内容。例如,在音乐/视频播放界面,当折叠到一定角度后,在一个分屏上显示播放控件,在另一个分屏上显示歌词/视频画面。在这种情况下,第二对象可以显示在第一对象在分屏后原本的显示位置附近(示例性的,位置差异可以小于阈值)。
在一种可能的实现中,折叠后的折叠屏保持着单屏显示的模式(第一屏和第二屏中的一个屏显示,例如在外折折叠屏中,或者是在内折折叠屏的部分情况中),在一些场景中,当折叠屏设备从完全展开状态向半折叠态切换时,折叠到一定角度,显示页面会发生变化,两个分屏中的一个分屏会显示原显示界面的全部或部分内容。在这种情况下,第二对象可以显示在第一对象在分屏后原本的显示位置附近(示例性的,位置差异可以小于阈值)。
在一种可能的实现中,第二对象为二维对象的三维对象在目标视角下的图像,关于如何确定目标视角以及如何在折叠屏上显示第二对象将在后续的实施例中描述。
在一种可能的实现中,在检测到满足针对于第一对象的三维显示功能的使能条件时,可以在折叠屏上显示第二对象,且随着折叠角度的变化,第二对象的画面处于静止状态(折叠屏仍然满足针对于第一对象的三维显示功能的使能条件)。
在一种可能的实现中,在检测到满足针对于第一对象的三维显示功能的使能条件时,可以在折叠屏上显示第二对象,且随着折叠角度的变化,第二对象的画面处于动态的变化状态(折叠屏仍然满足针对于第一对象的三维显示功能的使能条件)。具体的,第二对象可以为目标视角下的第一对象的三维对象的图像,且随着折叠屏的折叠角度的变化,目标视角也相应的进行改变。
在一种可能的实现中,在检测到满足针对于第一对象的三维显示功能的使能条件时,可以在折叠屏上显示第二对象,例如可以由第一对象突变为第二对象,或者是渐变为第二对象,在渐变过程中,随着折叠角度的变化,目标视角也相应的进行改变。
例如,在折叠屏未使能三维显示功能时,第一对象可以为从俯视视角(也就是竖直向下)观察得到的图像,而随着折叠角度的变小(完全展开时折叠角度为180°,折叠角度的变小可以理解为向完全折叠的方向进行折叠),目标视角可以向水平视角变化。进而,可以呈现出动态的效果,增加用户对显示内容的三维显示的感知能力。类似的,随着折叠角度的变大(完全展开时折叠角度为180°,折叠角度的变大可以理解为向完全展开的方向进行折叠),目标视角可以逐渐向竖直向下的视角变化。进而,可以呈现出动态的效果,增加用户对显示内容的三维显示的感知能力。
参照图18至图21,图18至图21为目标视角随着折叠屏的折叠角度的变化而变化的示意,图18为折叠屏处于完全展开状态时的显示界面,图19为折叠屏的折叠角度为角度1时的显示界面,图20为折叠屏的折叠角度为角度2时的显示界面,图21为折叠屏的折叠角度为角度3时的显示界面,其中,角度3小于角度1,角度1小于角度2。
在一种可能的实现中,所述折叠屏为内折屏,所述折叠屏包括第一屏和第二屏;可以基于检测到所述折叠屏满足第一预设条件,使能所述第一对象的三维显示功能;所述第一预设条件包括如下的至少一种:所述折叠屏处于半折叠状态;或者,所述第一屏和所述第二屏中的一个屏与水平面的夹角小于角度阈值;或者,所述折叠屏的姿态在预设时间内的变化小于阈值;或者,所述第一屏和所述第二屏中的一个屏与目标台面紧贴。
在一种可能的实现中,可以在检测到如下条件时,确定进入电脑支架模式:
1)当设备屏幕在半折叠状态下,陀螺仪检测到设备姿态由倾斜变水平,且设备的姿态信息不再变化,则触发设备进入摆台模式。
2)对于具有摄像头、深度传感器的设备,在满足条件1)的情况下,检测到摄像头进光量减弱,深度传感器紧贴台面,可以作为辅助条件提高判定精度。
3)对于具有震动传感器和声音传感器的设备,在满足条件1)的同时,还可以检测手机放置在台面的过程中的震动、撞击声音来作为辅助判断条件。
4)对于具有速度传感器的设备,可以检测设备的移动速度,在检测到移动速度呈下降趋势的时候,使摆台模式进入待触发状态,以使得可以快速进入摆台模式。
在一种可能的实现中,可以在检测到折叠屏处于电脑支架模式时,使能针对于第一对象的三维显示功能,其中,可以在检测到满足如下条件中的一个或多个时,确定折叠屏处于电脑支架模式:所述折叠屏处于半折叠状态、所述第一屏和所述第二屏中的一个屏与目标台面紧贴、所述第一屏和所述第二屏中的一个屏与水平面的夹角小于角度阈值、所述折叠屏的姿态在预设时间内的变化小于阈值。其中,角度阈值可以为[0,P3]的一个角度,0°<P3≤30°。
如图4D所示,当电子设备100上B屏的背面与实物接触,且a边和b边与水平面形成的夹角β∈[0,P3]时,电子设备100可以判定电子设备100处于单屏水平摆放形态。其中,0°<P3≤30°,a边为电子设备100的A屏上平行于折叠线的外边,b边为电子设备100的B屏上平行于折叠线的外边。
因此,本申请实施例中,当电子设备100处于电脑支架模式时,电子设备100的折叠屏内折分为A屏(即第一屏)和B屏(即第二屏),A屏和B屏的折叠角度α∈(P1,P2),其中,0°<P1<P2<180°。并且,电子设备100上B屏(即第二屏)的背面与实物接触,其中,a边(即第一侧边)和b边(即第二侧边)与水平面形成的夹角β∈[0,P3],可选的,0°<P3≤30°。
在一种可能的实现中,所述折叠屏为外折屏,所述折叠屏包括第一屏和第二屏;可以基于检测到所述折叠屏满足第四预设条件,使能所述第一对象的三维显示功能;所述第四预设条件包括如下的至少一种:所述折叠屏处于半折叠状态;或者,所述折叠屏的姿态在预设时间内的变化小于阈值;或者,所述折叠屏上远离中心折叠线的两侧与目标台面紧贴;或者,所述折叠屏上远离中心折叠线的两侧与与水平面的夹角小于角度阈值。
在一种可能的实现中,可以在检测到折叠屏处于双人操作支架模式时,使能针对于第一对象的三维显示功能,其中,可以在检测到满足如下条件中的一个或多个时,确定折叠屏处于双人操作支架模式:所述折叠屏处于半折叠状态、所述折叠屏上远离中心折叠线的两侧与目标台面紧贴、所述折叠屏的姿态在预设时间内的变化小于阈值。其中,角度阈值可以为[0,P3]的一个角度,0°<P3≤30°。
如图4A所示,当电子设备100上的a边与b边与实物接触,且a边和b边与水平面形成角度β∈[0,P3]时,电子设备100可以判定电子设备100处于双屏横屏站立摆放形态。其中,0°<P3≤30°,a边为电子设备100的A屏上平行于折叠线的外边,b边为电子设备100的B屏上平行于折叠线的外边。
因此,在本申请实施例中,当电子设备100处于双人操作支架模式时,电子设备100的折叠屏外折分为A屏(即第一屏)和B屏(即第二屏),A屏和B屏的夹角α∈(P1,P2),其中,0°<P1<P2<180°。并且,电子设备100上的a边与b边与实物接触,其中,a边和b边与水平面形成的夹角β∈[0,P3],可选的,0°<P3≤30°。
参照图22至图24A,图22至图24A为目标视角随着折叠屏的折叠角度的变化而变化的示意,图22为折叠屏的折叠角度为角度1时的显示界面,图23为折叠屏的折叠角度为角度2时的显示界面,图24A为折叠屏的折叠角度为角度3时的显示界面,其中,角度2小于角度1,角度1小于角度3。
在一种可能的实现中,所述折叠屏为外折屏,所述折叠屏包括第一屏和第二屏;可以基于检测到所述折叠屏满足第三预设条件,使能所述第一对象的三维显示功能;所述第三预设条件包括如下的至少一种:所述折叠屏处于半折叠状态;或者,所述第一屏和所述第二屏中的一个屏与目标台面紧贴;或者,所述第一屏和所述第二屏中的一个屏与水平面的夹角小于角度阈值;或者,所述折叠屏的姿态在预设时间内的变化小于阈值。
在一种可能的实现中,可以在检测到折叠屏处于观影支架模式时,使能针对于第一对象的三维显示功能,其中,可以在检测到满足如下条件中的一个或多个时,确定折叠屏处于双人操作支架模式:所述折叠屏处于半折叠状态、所述第一屏和所述第二屏中的一个屏与目标台面紧贴、所述第一屏和所述第二屏中的一个屏与水平面的夹角小于角度阈值、所述折叠屏的姿态在预设时间内的变化小于阈值。其中,角度阈值可以为[0,P3]的一个角度,0°<P3≤30°。
如图4B所示,当电子设备100的A屏或B屏与实物接触,且a边或b边与水平面形成角度β∈[0,P3]时,电子设备100可以判定电子设备100处于单屏水平摆放形态。其中,0°<P3≤30°,a边为电子设备100上在A屏侧平行于折叠线的外边,b边为电子设备100上B屏侧平行于折叠线的外边。
因此,在本申请实施例中,当电子设备100处于观影支架模式时,电子设备100的折叠屏被外折分为A屏(即第一屏)和B屏(即第二屏),A屏和B屏的折叠角度α∈(P1,P2),其中,0°<P1<P2<180°。并且,电子设备100上B屏的显示面与实物接触,其中,a边(即第一侧边)和b边(即第二侧边)与水平面的夹角β∈[0,P3],可选的,0°<P3≤30°。
5、阅读支架模式(即第二预设条件)
在一种可能的实现中,所述折叠屏为内折屏,所述折叠屏包括第一屏和第二屏;可以基于检测到所述折叠屏满足第二预设条件,使能所述第一对象的三维显示功能;所述第二预设条件包括如下的至少一种:所述折叠屏处于半折叠状态;或者,所述折叠屏的姿态在预设时间内的变化小于阈值;或者,所述折叠屏上与折叠线垂直的一侧与目标台面紧贴;或者,所述折叠屏上与折叠线垂直的一侧与水平面的夹角小于角度阈值。
如图4C所示,当电子设备100的a边和b边与水平面形成的夹角β∈[P4,90°]时,电子设备100可以判定电子设备100处于双屏竖屏站立摆放形态。其中,60°≤P4<90°,a边为电子设备100的A屏上平行于折叠线的外边,b边为电子设备100的B屏上平行于折叠线的外边。
因此,在本申请实施例中,当电子设备100处于阅读支架模式时,电子设备100的折叠屏内折为A屏(即第一屏)和B屏(即第二屏),A屏和B屏的折叠角度α∈(P1,P2),其中,0°<P1<P2<180°。并且,电子设备100上的a边(即第一侧边)和b边(即第二侧边)与水平面的夹角β∈[P4,90°],可选的,60°≤P4<90°。
以上从多个应用场景对本申请实施例中的折叠屏的显示方法进行了介绍,接下来从算法的角度详细介绍本申请实施例中的折叠屏的显示方法,参照图24B,本申请实施例中的折叠屏的显示方法,包括:
2401、在所述折叠屏的折叠角度为第一角度时,在所述折叠屏上显示第一对象。
其中,当折叠屏的折叠角度为第一角度时,折叠屏可以显示第一对象,当折叠屏的折叠角度为第二角度时,折叠屏可以显示第二对象。第二角度可以为触发第一对象的三维显示功能的折叠角度范围之内的一个角度,例如在折叠屏处于半折叠状态时的一个折叠角度。
2402、检测到所述折叠屏的折叠角度由第一角度变为第二角度,根据所述第一对象,显示第二对象;其中,所述第一对象为二维对象的图像,所述第二对象为所述二维对象对应的三维对象的图像。
一方面,需要保证第一对象和第二对象之间能够表达出相同或相似的含义,也就是用户在观看第二对象时至少能够获知到不少于第一对象所蕴含的信息(例如,语义信息和/或图像信息)。因此,第二对象为二维对象对应的三维对象的图像,且该三维对象需要具备第一对象所蕴含的信息(例如,语义信息和/或图像信息)。
另一方面,为了能够使得第二对象存在立体的显示效果,第二对象可以为第一对象的立体对象在目标视角上的一个图像(第一对象和第二对象不同),相当于,用户从折叠屏的最佳观看视角看折叠屏时,能够看到第一对象的立体对象在目标视角上的画面。
因此,需要获取到第一对象的立体对象在目标视角上的图像内容,且需要将该图像内容通过一定的图像变换(例如拉伸变形处理)投影到折叠屏上进行显示。之所以不能直接将该图像内容显示在折叠屏上,是因为,折叠屏在处于半折叠状态时的最佳观看视角并不与屏幕垂直,若直接将该图像内容显示在折叠屏上,用户看到的第二对象是畸变的(由于近大远小),且在第二对象的显示区域跨越了两个屏时,这种畸变会更加明显,会使得上下屏显示的内容之间也出现进一步的畸变。例如可以参照图25至图27所示,其中,图25示出了在完全展开的折叠屏上直接显示立体对象在目标视角上的图像内容的示意,图26示出了在半折叠状态下的折叠屏上直接显示立体对象在目标视角上的图像内容的示意(存在畸变),图27示出了在半折叠状态下通过图像变换后显示的立体对象在目标视角上的图像内容的示意(不存在畸变)。
在一种可能的实现中,在确定出目标视角下第一对象的三维对象的图像之前,需要确认目标视角的大小,接下来介绍如何确定目标视角。
在一种可能的实现中,根据所述第二角度,通过所述折叠屏的屏幕夹角和三维对象观看视角之间的映射关系,确定所述第二角度对应的目标视角。
也就是说,可以维护有各个屏幕夹角和三维对象观看视角之间的映射关系,该映射关系可以是离散数据之间的映射关系,也可以是连续数据之间的映射关系(例如通过一个函数关系来表达),在获取到屏幕夹角之后,可以基于屏幕夹角和三维对象观看视角之间的映射关系,确定所述第二角度对应的目标视角。在该映射关系是离散数据之间的映射关系时,可以基于屏幕夹角(包括第二角度)和三维对象观看视角之间的映射关系,确定所述第二角度对应的目标视角。在该映射关系是连续数据之间的映射关系时,可以将第二角度作为映射关系的因变量,确定所述第二角度对应的目标视角(自变量)。
在一种可能的实现中,映射关系可以指示三维对象观看视角随着屏幕夹角的变化而变化,从显示效果上来看,随着折叠角度的变化,第二对象的画面处于动态的变化状态(折叠屏仍然满足针对于第一对象的三维显示功能的使能条件)。具体的,第二对象可以为目标视角下的第一对象的三维对象的图像,且随着折叠屏的折叠角度的变化,目标视角也相应的进行改变。
例如,在折叠屏未使能三维显示功能时,第一对象可以为从俯视视角(也就是竖直向下)观察得到的图像,而随着折叠角度的变小(完全展开时折叠角度为180°,折叠角度的变小可以理解为向完全折叠的方向进行折叠),目标视角可以向水平视角变化。进而,可以呈现出动态的效果,增加用户对显示内容的三维显示的感知能力。类似的,随着折叠角度的变大(完全展开时折叠角度为180°,折叠角度的变大可以理解为向完全展开的方向进行折叠),目标视角可以逐渐向竖直向下的视角变化。进而,可以呈现出动态的效果,增加用户对显示内容的三维显示的感知能力。
应理解,上述映射关系还可以存在其他中间的变量,在一种可能的实现中,可以根据所述第二角度,确定目标屏幕观看视角,通过所述屏幕观看视角和三维对象观看视角之间的映射关系,确定所述目标屏幕观看视角对应的目标视角。
在一种可能的实现中,在确定出目标视角之后,可以根据目标视角,得到在目标视角下三维对象(二维对象对应的三维对象)的图像。
在一种可能的实现中,可以根据目标视角,确定第一对象和第二对象的各个像素点之间的映射关系,本申请实施例可以将上述映射关系称之为整体渲染参数,整体渲染参数是对屏幕显示页面进行整体渲染的一组参数,用于模拟从折叠后的最佳观看位置(也就是上述目标屏幕观看视角)查看折叠前的屏幕时,相较于原来的显示页面,显示页面上各像素点的位置变化。
如图28,将当前显示页面a整体看成一张卡片。假设折叠后的最佳视角为垂直于图4B所示的折叠屏手机的屏幕,图28中的(a)为折叠前的折叠屏手机的状态(完全展开平放于桌面上)。整体渲染参数即用于:将图28中的(b)中的页面a,通过整体渲染参数,调整为从图4B的最佳视角查看图28中的(a)的屏幕中的页面a的形状,即在图28中的(b)的屏幕中显示图28中的(a)形状的页面a,参考图28中的(c)。
参考图28中的(c),通过控制变量(先假设屏幕形状不变),折叠屏手机可以通过模拟三维建模,使折叠屏手机的其中一个边缘重合,然后得到在图28中的(b)的屏幕中显示折叠前的页面a的形状(即图28中的(c)中的深灰色卡片),然后基于图28中的(b)本身的页面a的形状(即图28中的(c)中的浅灰色卡片),得到一组参数组,该参数组指示了从图28中的(b)本身的页面a的形状向在图28中的(b)的屏幕中显示折叠前的页面a的形状的畸变。得到的参数组即为整体渲染参数。通过整体渲染参数,能够将图28中的(c)中的浅灰色卡片的形状调整为图28中的(c)中的深灰色卡片的形状。具体到各个像素点,整体渲染参数即指示了浅灰色卡片上每个像素点和该像素点在深灰色卡片上的对应像素点之间的映射关系。
在一种可能的实现中,可以根据折叠后的最佳观看位置(也就是上述目标屏幕观看视角),确定立体显示元素(也就是二维对象对应的三维对象)的三维呈现角度(也就是目标视角),根据三维呈现角度确定立体显示图像(也就是第二对象)。
对于立体显示元素来说,当观看视角变化时,看到的是立体显示元素的不同侧,因此,最佳视角的变化不仅会导致形状上的畸变,还会导致呈现在屏幕上的图像显示内容的变化。因此,当最佳视角变化时,首先要确定立体显示元素的三维呈现角度,即从折叠后的最佳视角查看到的是立体显示元素的那一侧。
立体显示图像:即从折叠后的最佳观看位置观看到的、立体显示元素的立体视角图像,是一种二维图像。对于立体显示元素来说,只需要在其三维模型中确定一个和折叠后的最佳观看位置相同的方位,该位置视角查看到的立体显示元素的图像,即为最终显示的立体显示图像。
以图28中的(a)中的页面a为例,从图28中的(b)的最佳视角查看图28中的(a)的页面a。假设页面a包括显示元素x、显示元素y和显示元素z,其中x为立体显示元素,y、z为平面显示元素。则如图29的(a)所示,从图28中的(b)的最佳视角看(图29的折叠前的屏幕),显示元素y和显示元素z仅产生形状上的畸变,显示元素x不仅有形状上的畸变,从俯视视角变为立体视角,能够看见更多显示元素x的内容,并会遮挡部分页面a。立体显示元素x的立体显示图像即为从立体视角观察到的圆柱形状的图像。
在折叠屏手机折叠的过程中,存在两个变量——最佳观看位置和屏幕的折叠形态,二者都发生了变化,并且二者的变化都会直接影响到的显示内容的渲染。在渲染过程中,进行控制变量,先假设屏幕的位置不发生变化,确定最佳观看位置变化对显示内容的影响,然后再考虑屏幕的折叠形态变化对显示内容的影响。
使用整体渲染参数对当前页面进行渲染,确定渲染后页面上立体显示元素的位置,将立体显示图像和立体显示元素的位置相对应,得到初次渲染图像;得到整体渲染参数后,使用整体渲染参数对折叠前的当前可视化页面进行整体渲染。以图28为例,渲染的结果是将图28中的(b)的页面a,进行畸变渲染后,得到图28中的(c)中畸变后的页面a。如图30所示。对于立体显示元素来说,由于视角相同,因此,只需要将立体显示图像叠加在畸变后渲染后的页面上的该显示元素所在位置即可。例如,图30中,对于显示元素x,只需要将图29中的显示元素x的图像和图30中的立体显示元素x的位置对应即可。将立体显示图像和立体显示元素的位置相对应,可以在确定立体显示元素的位置后,进行图像的叠加,将立体显示图像叠加到整体渲染后的页面,从而得到初次渲染图像。也可以在确定立体显示元素的位置后,对整体渲染后的页面进行二次处理,进行像素点的替换,使二次处理后的渲染后页面包括立体显示图像。
图31示出了立体显示图像和立体显示元素的位置对应得到初次渲染的过程。由于整个页面和单个的立体显示元素是从同一视角进行观察的,因此,对于立体显示元素x,立体显示图像和整体页面上的显示元素x(该状态下假设显示元素x为平面显示元素)至少有部分在同一位置,这些位置的像素点可以作为参考位置。例如图31中的圆柱的底部,因此,可以根据圆柱的底部的像素点来实现立体显示图像的对应,进行立体显示图像的叠加或者像素点的替换。得到右边的初次渲染图像(也就是目标视角下三维对象的图像)。
在一种可能的实现中,在得到目标视角下三维对象的图像之后,可以根据所述目标屏幕观看视角与所述折叠屏之间的位姿关系,通过对所述目标视角下三维对象的图像进行拉伸变形处理,以将所述三维对象映射到所述折叠屏的平面上,得到所述第二对象。
在上面的步骤中,只考虑了视角的变化,未考虑屏幕的折叠。在下面的步骤中,则将视角固定在折叠后的最佳观看位置,考虑屏幕折叠导致的屏幕形态变化对叠加图像的影响。
在一种可能的实现中,可以确定折叠后的折叠屏手机和折叠前的折叠屏的相对位姿关系,根据折叠后的最佳视角和折叠前后的相对位置关系,分别确定初次渲染图像的二次渲染参数;用户在折叠后的最佳视角查看叠加图像时,具有较好的显示效果。因此,只要确定折叠前后的相对位置关系,然后根据折叠后的最佳视角的视线,将叠加图像投影到折叠后的屏幕上,即可得到在折叠后的屏幕上的图像,分屏渲染参数用于实现将叠加图像渲染为投影到折叠后的屏幕上的图像。
在确定折叠前后的折叠屏手机的相对位置关系时,可以确定一个参照物。具体来说,可以以分屏交界线为参照物,使折叠前后的折叠屏手机的屏幕的分屏交界线重合,即假设分屏交界线不动。这样,可以对两个分屏的图像进行分别处理。本实施例中,折叠前的折叠屏手机处于完全展开状态,折叠后的折叠屏手机处于半折叠状态。使折叠前的折叠屏手机和折叠后的折叠屏手机的分屏交界线重合,如图32所示。
图32中,C1为折叠后的折叠屏手机的屏幕,D1为折叠前的折叠屏手机的屏幕,由于用户在折叠后的最佳观看位置观看屏幕C1上的叠加图像具有较好的视觉效果,因此,只需要保证将屏幕D1上的图像投影到屏幕C1上,能够得到屏幕C1上的叠加图像,则用户查看屏幕C1上的图像也具有较好的视觉效果。因此,根据这种投影关系,可以确定各像素点在折叠后的屏幕上的对应的投影像素点,由各个像素点和投影像素点在屏幕上的位置即可得到二次渲染参数。
当然,也可以确定其他参照物,例如,屏幕顶部边缘或者底部边缘,都可以基于确定的参照物,再根据投影原理确定各像素点的投影像素点,最后得到二次渲染参数。
如果以分屏交界线为参照物,则由于屏幕C1和D1上,上分屏之间的夹角和下分屏之间的夹角可能不同,因此,对上分屏的图像和下分屏的图像分别处理,分别得到上分屏的参数和下分屏的参数。分别对两个分屏进行处理,可以提高渲染的效果。
也就是说,第二对象需要显示在第一屏和第二屏上时(也就是存在跨屏显示的情况下),所述折叠屏包括第一屏和第二屏,所述第二对象包括第一子对象和第二子对象,所述图像包括所述第一子对象对应的第一图像、以及所述第二子对象对应的第二图像;可以根据所述目标视角与所述第一屏之间的位置关系,对所述第一图像进行拉伸变形处理,以将所述第一图像映射到所述第一屏上;根据所述目标视角与所述第二屏之间的位置关系,对所述第二图像进行拉伸变形处理,以将所述第二图像映射到所述第二屏上。
在一种可能的实现中,可以根据二次渲染参数对初次渲染图像进行处理,将处理后的图像显示在折叠后的屏幕上。
确定二次渲染参数后,即可对初次渲染图像进行处理,得到的图像即为将叠加图像反向投影在折叠后的折叠屏手机的屏幕上的图像,将图像显示折叠屏手机的屏幕上即可。其中,上分屏对应的图像显示在上分屏,下分屏对应的图像显示在下分屏。
应理解,对于三维渲染显示功能来说,它可以是实时渲染的,也可以是只在用户完成折叠操作后,进行一次渲染。实时渲染即只要检测到角度发生变化,便对应调整屏幕显示内容,这对用户需要观看连续性动画的场景是有利的,例如,锁屏壁纸的三维渲染。但在一些情况下,用户可能不太关注折叠操作过程中的变化,而是关注折叠操作过后的显示内容,这种情况可以适用单次渲染,以减少算力需求。例如,图表的立体化显示。
在实时渲染方案下,则可以通过一些参数确定用户完成了操作,指代用户操作完成的系列参数可以定义一个预设的模式。
举例来说,屏幕上的显示内容包括了一柱状图,且在满足一定条件下,该柱状图能够以立体视角来进行显示。当用户向从平面柱状图切换成立体视角显示柱状图时,可以先弯折屏幕,然后将折叠屏手机放置在一平面上,以便于观察。则可以将折叠屏手机置于平面上的状态对应的系列参数定义一个预设的模式,例如,称之为摆台模式。当折叠屏手机进入摆台模式后,折叠屏手机将柱状图从平面观察视角调整为立体视角进行显示。
在一些场景下,当折叠屏设备从完全展开状态向半折叠态切换时,折叠到一定角度,显示页面会发生变化,两个分屏分别显示一部分原显示界面的内容。例如,在视音乐/视频播放界面,当折叠到一定角度后,在一个分屏上显示播放控件,在另一个分屏上显示歌词/视频画面。
在这种情况下,首先按照已有的分屏逻辑,对当前可视化页面进行分屏显示,然后对分屏后,两个分屏上的显示界面进行分别渲染。也就是说,折叠后的两个分屏上的显示内容已经由分屏逻辑得到,无需再模拟折叠后的屏幕最佳观看位置来确定初次渲染图。
确定当前可视化页面是否响应折叠操作产生界面变化,进行分屏显示;
若否,则按照上述不分屏的步骤进行处理;
若是,则确定分屏显示后处理后在两个分屏上显示的分屏页面,根据折叠后的最佳观看位置,确定立体显示元素的三维呈现角度,根据三维呈现角度确定立体显示元素的立体显示图像,将立体显示图像和立体显示元素的位置相对应。
如果按照已有的分屏逻辑,可以直接确定分屏显示页面,则无需确定分屏渲染图,直接按照已有逻辑即可直接确定两个分屏的显示页面。只需要确定折叠后的最佳观看位置,然后根据变化后的最佳观看位置对立体显示元素进行处理即可。
对立体显示元素的处理,使立体显示图像与立体显示元素的位置相对应的过程。在确定可以作为参考位置的像素点后,即可以通过图像叠加实现,也可以通过像素点的替换实现。
根据变化后的视角,确定从折叠后的最佳视角查看到立体显示元素的某一侧图像,则该侧图像即为需要呈现在最终分屏上的立体显示图像,然后将该立体显示元素的立体显示图像和该立体显示元素的原来位置(平面显示时的位置)即可。
图36示出了音乐播放界面,在音乐播放界面,按照折叠屏手机的已有逻辑,在折叠到预设角度时,会按照分屏逻辑将原来的可视化界面分成两个分屏界面进行显示,两个分屏界面分别为播放控件界面和歌词界面。然后分别判断两个分屏界面上是否包含立体显示元素,其中,播放控件界面的多个空间为立体显示元素,然后根据变化后的视角,确定(是立体显示元素的)各播放控件的立体显示图像,然后用立体图像替换掉原来平面呈现的控件,使得具有立体显示效果,如右边的图所示。
除此之外,还可能存在一种情形,由于立体显示图像是以立体视角呈现的,相比于现有技术以平面视角呈现的图像,在屏幕上要占据更大的显示面积,因此,在两个分屏交界处,可能会存在跨分屏显示的情况(参考图37的柱形分布图),因此,还可以包括步骤:
确定叠加图像是否跨分屏显示,在存在跨分屏显示时,确定叠加图像的跨分屏显示部分,根据折叠后的折叠屏手机的夹角和变化后的用户视角,确定分屏渲染参数;
根据分屏渲染参数对跨分屏显示部分进行渲染,并显示在另一分屏上。
当存在跨屏显示时,确定跨屏显示部分,即超出立体显示元素所在分屏的部分。如图37所示:
图37中,在将立体显示元素x的立体显示图像叠加到立体显示元素x的位置时,图像超出了下分屏的显示范围,则折叠屏手机首先确定不能在下分屏显示的部分,即图37部分显示元素x01。
若直接将该部分显示元素x显示在上分屏,由于折叠后的两个分屏具有预设的夹角,因此,各自在上分屏和下分屏中的显示的部分显示元素x之间会明显不协调,不能实现三维效果。
假设下分屏向上分屏的背部继续延伸,并将显示在上分屏的该部分显示元素x01显示在延伸到背部的下分屏上,则在折叠后的最佳视角查看时,具有三维渲染效果。因此,只需要将显示在延伸到背部的下分屏上的部分显示元素x01,反向沿着视线投影到上分屏上,也可以具有三维渲染效果。
基于这种视线投影关系,可以确定分屏渲染参数,根据分屏渲染参数对跨分屏显示部分进行处理,然后将处理后得到的图像渲染显示到另一分屏上。即将图37中的x01部分用分屏渲染参数进行处理,然后将得到的图像显示到上分屏上,具体显示位置也根据分屏渲染参数确定。
接下来结合一个具体的示例,介绍本申请中折叠屏的显示方法的一个应用例:
参照图33,图33中的(a)为完整展开的手机屏幕,其以平面的方式显示了一个文档页面。图33中的(b)和图33中的(c)分别为保持手机的下半屏不动,对上半屏进行弯折后的屏幕,弯折前后显示页面没有发生变化,都显示图33中的(a)中相同的文档页面,其中图33中的(b)为现有技术的显示效果,图33中的(c)为根据本方案进行三维渲染后的显示效果。为了方便对比,图33中的(b)和图33中的(c)具有相同的弯折角度。
以下半屏所在平面为x轴、y轴所在平面,构建空间直角坐标系。假设图33中的(a)中,屏幕的最佳观看位置的坐标为(0,0,75),弯折后,图33中的(b)和图33中的(c)中,屏幕的最佳观看位置的坐标为(50,50,50)
在图33中的(b)中,由于文档页面时一个整体屏幕,当屏幕弯折之后,所有显示元素仍然是以平面的形式呈现。而在图33中的(c)中,立体显示元素(柱形分布图)以立体视角进行呈现。
在具体的处理过程中,手机的处理器模拟一个视角,在坐标(50,50,50)查看图33中的(a)屏幕的文档页面和柱形分布图,得到该视角下的初次渲染图。参考图33中的(c),在坐标(50,50,50)观察柱形分布图(立体显示元素)时,不再是俯视角度,而是从侧面立体角度去查看,因此,坐标(50,50,50)看到的是立体图像,最终在初次渲染图像中呈现的是立体图,柱形分布图的呈现角度发生了变化。得到初次渲染图后,将初次渲染图模拟显示在图33中的(a)的屏幕(完全展开状态)上。
然后根据分屏交界线,使图33中的(c)的屏幕与图33中的(a)的屏幕的分屏交界线重叠,使模拟渲染在图33中的(a)的屏幕初次渲染图上所有像素点和最佳观看位置(50,50,50)连线,连线与图33中的(c)屏幕的交点即为投影像素点,所有投影像素点构成显示在图33中的(c)上的显示文档页面。
当前显示界面可以只包括立体显示元素,例如,锁屏界面可以视为显示界面仅显示单个立体显示元素。此时,由于整个页面仅有一个立体显示元素,则只需按照步骤112确定查看三维模型的视角,再进行后续步骤处理即可。图33示出了锁屏界面在屏幕向内和向外两种弯折方向的示例。
本申请实施例提供了一种折叠屏的显示方法,应用于包括折叠屏的电子设备,所述方法包括:在所述折叠屏的折叠角度为第一角度时,在所述折叠屏上显示第一对象;检测到所述折叠屏的折叠角度由第一角度变为第二角度,在所述折叠屏上不显示所述第一对象的情况下,根据所述第一对象,显示第二对象;其中,所述第一对象为二维对象的图像,所述第二对象为所述二维对象对应的三维对象的图像。通过上述方式,当折叠屏处于半折叠形态时,将显示画面中的内容进行变换和替换(例如将原本的二维显示内容替换为三维显示内容),以使得用户在折叠屏处于半折叠的状态时可以看到内容更丰富的画面,提高了用户的交互体验。
本申请还提供了一种折叠屏的显示装置,图像显示装置可以是终端设备,参照图38,图38为本申请实施例提供的一种折叠屏的显示装置的结构示意,如图38中示出的那样,所述折叠屏的显示装置3800包括:
显示模块3801,用于在所述折叠屏的折叠角度为第一角度时,在所述折叠屏上显示第一对象;
检测到所述折叠屏的折叠角度由第一角度变为第二角度,在所述折叠屏上不显示所述第一对象的情况下,根据所述第一对象,显示第二对象;其中,所述第一对象为二维对象的图像,所述第二对象为所述二维对象对应的三维对象的图像。
关于显示模块3801的具体描述可以参照上述实施例中步骤2401的描述,这里不再赘述。
在一种可能的实现中,所述第一对象为用户界面UI、图标或者字符串。
在一种可能的实现中,所述第二对象包含所述第一对象的语义信息或者图像信息。
在一种可能的实现中,所述折叠屏为内折屏,所述折叠屏包括第一屏和第二屏;所述装置还包括:
使能模块3802,用于基于检测到所述折叠屏满足第一预设条件,使能所述第一对象的三维显示功能;所述第一预设条件包括如下的至少一种:
所述折叠屏处于半折叠状态;或者,
所述第一屏和所述第二屏中的一个屏与水平面的夹角小于角度阈值;或者,
所述折叠屏的姿态在预设时间内的变化小于阈值;或者,
所述第一屏和所述第二屏中的一个屏与目标台面紧贴。
在一种可能的实现中,所述折叠屏为内折屏,所述折叠屏包括第一屏和第二屏;所述装置还包括:
使能模块3802,用于基于检测到所述折叠屏满足第二预设条件,使能所述第一对象的三维显示功能;所述第二预设条件包括如下的至少一种:
所述折叠屏处于半折叠状态;或者,
所述折叠屏的姿态在预设时间内的变化小于阈值;或者,
所述折叠屏上与折叠线垂直的一侧与目标台面紧贴;或者,
所述折叠屏上与折叠线垂直的一侧与水平面的夹角小于角度阈值。
在一种可能的实现中,所述折叠屏为外折屏,所述折叠屏包括第一屏和第二屏;所述装置还包括:
使能模块3802,用于基于检测到所述折叠屏满足第三预设条件,使能所述第一对象的三维显示功能;所述第三预设条件包括如下的至少一种:
所述折叠屏处于半折叠状态;或者,
所述第一屏和所述第二屏中的一个屏与目标台面紧贴;或者,
所述第一屏和所述第二屏中的一个屏与水平面的夹角小于角度阈值;或者,
所述折叠屏的姿态在预设时间内的变化小于阈值。
在一种可能的实现中,所述折叠屏为外折屏,所述折叠屏包括第一屏和第二屏;所述装置还包括:
使能模块3802,用于基于检测到所述折叠屏满足第四预设条件,使能所述第一对象的三维显示功能;所述第四预设条件包括如下的至少一种:
所述折叠屏处于半折叠状态;或者,
所述折叠屏的姿态在预设时间内的变化小于阈值;或者,
所述折叠屏上远离中心折叠线的两侧与目标台面紧贴;或者,
所述折叠屏上远离中心折叠线的两侧与与水平面的夹角小于角度阈值。
在一种可能的实现中,所述第二对象为在目标视角下的所述三维对象映射到所述折叠屏上的图像。
在一种可能的实现中,所述目标视角与所述第二角度有关。
在一种可能的实现中,所述显示模块3801,还用于:
在所述折叠屏的折叠角度由所述第一角度变为所述第二角度的过程中,在所述折叠屏上显示在不断变化的视角下的所述三维对象映射到所述折叠屏上的多帧图像。
在一种可能的实现中,所述第一角度和所述第二角度为所述折叠屏的锐夹角;
在所述第二角度小于所述第一角度时,所述不断变化,包括:向水平视角变化;
在所述第二角度大于所述第一角度时,所述不断变化,包括:向竖直视角变化。
在一种可能的实现中,所述显示模块3801,具体用于:
在所述第一屏和所述第二屏上与所述第一对象相匹配的显示位置上显示所述第二对象。
在一种可能的实现中,所述装置还包括:
视角确定模块3803,用于在所述显示第二对象之前,根据所述第二角度,通过所述折叠屏的屏幕夹角和三维对象观看视角之间的映射关系,确定所述第二角度对应的所述目标视角。
在一种可能的实现中,所述显示模块3801,还用于:
在所述显示第二对象之前,根据所述第二角度,确定目标屏幕观看视角;
根据所述目标屏幕观看视角与所述折叠屏之间的位姿关系,通过对所述目标视角下三维对象的图像进行拉伸变形处理,以将所述三维对象映射到所述折叠屏的平面上,得到所述第二对象。
在一种可能的实现中,所述目标屏幕观看视角与所述第二角度的中心线的差异在预设范围内。
在一种可能的实现中,所述折叠屏包括第一屏和第二屏,所述第二对象包括第一子对象和第二子对象,所述图像包括所述第一子对象对应的第一图像、以及所述第二子对象对应的第二图像;所述显示模块,具体用于:
根据所述目标视角与所述第一屏之间的位置关系,对所述第一图像进行拉伸变形处理,以将所述第一图像映射到所述第一屏上;
根据所述目标视角与所述第二屏之间的位置关系,对所述第二图像进行拉伸变形处理,以将所述第二图像映射到所述第二屏上。
在一种可能的实现中,在所述折叠屏的折叠角度为第一角度时,所述折叠屏处于全展开状态。
接下来介绍本申请实施例提供的一种终端设备,终端设备可以为图38中的折叠屏的显示装置,请参阅图39,图39为本申请实施例提供的终端设备的一种结构示意图,终端设备3900具体可以表现为虚拟现实VR设备、手机、平板、笔记本电脑、智能穿戴设备等,此处不做限定。具体的,终端设备3900包括:接收器3901、发射器3902、处理器3903和存储器3904(其中终端设备3900中的处理器3903的数量可以一个或多个,图39中以一个处理器为例),其中,处理器3903可以包括应用处理器39031和通信处理器39032。在本申请的一些实施例中,接收器3901、发射器3902、处理器3903和存储器3904可通过总线或其它方式连接。
存储器3904可以包括只读存储器和随机存取存储器,并向处理器3903提供指令和数据。存储器3904的一部分还可以包括非易失性随机存取存储器(non-volatile randomaccess memory,NVRAM)。存储器3904存储有处理器和操作指令、可执行模块或者数据结构,或者它们的子集,或者它们的扩展集,其中,操作指令可包括各种操作指令,用于实现各种操作。
处理器3903控制终端设备的操作。具体的应用中,终端设备的各个组件通过总线系统耦合在一起,其中总线系统除包括数据总线之外,还可以包括电源总线、控制总线和状态信号总线等。但是为了清楚说明起见,在图中将各种总线都称为总线系统。
上述本申请实施例揭示的方法可以应用于处理器3903中,或者由处理器3903实现。处理器3903可以是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器3903中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器3903可以是通用处理器、数字信号处理器(digital signal processing,DSP)、微处理器或微控制器,还可进一步包括专用集成电路(application specific integratedcircuit,ASIC)、现场可编程门阵列(field-programmable gate array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。该处理器3903可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器3904,处理器3903读取存储器3904中的信息,结合其硬件完成上述方法的步骤。具体的,处理器3903可以读取存储器3904中的信息,结合其硬件完成上述实施例中步骤301至这步骤304中与数据处理相关的步骤,以及上述实施例中步骤3001至这步骤3004中与数据处理相关的步骤。
接收器3901可用于接收输入的数字或字符信息,以及产生与终端设备的相关设置以及功能控制有关的信号输入。发射器3902可用于通过第一接口输出数字或字符信息;发射器3902还可用于通过第一接口向磁盘组发送指令,以修改磁盘组中的数据;发射器3902还可以包括显示屏等显示设备。
本申请实施例中还提供一种包括计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例中图24B对应的实施例中描述的折叠屏的显示方法的步骤。
本申请实施例中还提供一种计算机可读存储介质,该计算机可读存储介质中存储有用于进行信号处理的程序,当其在计算机上运行时,使得计算机执行如前述实施例描述的方法中的折叠屏的显示方法的步骤。
本申请实施例提供的图像显示装置具体可以为芯片,芯片包括:处理单元和通信单元,所述处理单元例如可以是处理器,所述通信单元例如可以是输入/输出接口、管脚或电路等。该处理单元可执行存储单元存储的计算机执行指令,以使执行设备内的芯片执行上述实施例描述的数据处理方法,或者,以使训练设备内的芯片执行上述实施例描述的数据处理方法。可选地,所述存储单元为所述芯片内的存储单元,如寄存器、缓存等,所述存储单元还可以是所述无线接入设备端内的位于所述芯片外部的存储单元,如只读存储器(read-only memory,ROM)或可存储静态信息和指令的其他类型的静态存储设备,随机存取存储器(random access memory,RAM)等。
另外需说明的是,以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。另外,本申请提供的装置实施例附图中,模块之间的连接关系表示它们之间具有通信连接,具体可以实现为一条或多条通信总线或信号线。
通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到本申请可借助软件加必需的通用硬件的方式来实现,当然也可以通过专用硬件包括专用集成电路、专用CPU、专用存储器、专用元器件等来实现。一般情况下,凡由计算机程序完成的功能都可以很容易地用相应的硬件来实现,而且,用来实现同一功能的具体硬件结构也可以是多种多样的,例如模拟电路、数字电路或专用电路等。但是,对本申请而言更多情况下软件程序实现是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在可读取的存储介质中,如计算机的软盘、U盘、移动硬盘、ROM、RAM、磁碟或者光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述的方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。
所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存储的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘(Solid State Disk,SSD))等。
Claims (37)
1.一种折叠屏的显示方法,其特征在于,应用于包括折叠屏的电子设备,所述方法包括:
在所述折叠屏的折叠角度为第一角度时,在所述折叠屏上显示第一对象;
检测到所述折叠屏的折叠角度由第一角度变为第二角度,根据所述第一对象,显示第二对象;其中,所述第一对象为二维对象的图像,所述第二对象为所述二维对象对应的三维对象的图像。
2.根据权利要求1所述的方法,其特征在于,所述第一对象为用户界面UI、照片、图标或者字符串。
3.根据权利要求1或2所述的方法,其特征在于,所述第二对象包含所述第一对象的语义信息或者图像信息。
4.根据权利要求1至3任一所述的方法,其特征在于,所述折叠屏为内折屏,所述折叠屏包括第一屏和第二屏;所述方法还包括:
基于检测到所述折叠屏满足第一预设条件,使能所述第一对象的三维显示功能;所述第一预设条件包括如下的至少一种:
所述折叠屏处于半折叠状态;或者,
所述第一屏和所述第二屏中的一个屏与水平面的夹角小于角度阈值;或者,
所述折叠屏的姿态在预设时间内的变化小于阈值;或者,
所述第一屏和所述第二屏中的一个屏与目标台面紧贴。
5.根据权利要求1至3任一所述的方法,其特征在于,所述折叠屏为内折屏,所述折叠屏包括第一屏和第二屏;所述方法还包括:
基于检测到所述折叠屏满足第二预设条件,使能所述第一对象的三维显示功能;所述第二预设条件包括如下的至少一种:
所述折叠屏处于半折叠状态;或者,
所述折叠屏的姿态在预设时间内的变化小于阈值;或者,
所述折叠屏上与折叠线垂直的一侧与目标台面紧贴;或者,
所述折叠屏上与折叠线垂直的一侧与水平面的夹角小于角度阈值。
6.根据权利要求1至3任一所述的方法,其特征在于,所述折叠屏为外折屏,所述折叠屏包括第一屏和第二屏;所述方法还包括:
基于检测到所述折叠屏满足第三预设条件,使能所述第一对象的三维显示功能;所述第三预设条件包括如下的至少一种:
所述折叠屏处于半折叠状态;或者,
所述第一屏和所述第二屏中的一个屏与目标台面紧贴;或者,
所述第一屏和所述第二屏中的一个屏与水平面的夹角小于角度阈值;或者,
所述折叠屏的姿态在预设时间内的变化小于阈值。
7.根据权利要求1至3任一所述的方法,其特征在于,所述折叠屏为外折屏,所述折叠屏包括第一屏和第二屏;所述方法还包括:
基于检测到所述折叠屏满足第四预设条件,使能所述第一对象的三维显示功能;所述第四预设条件包括如下的至少一种:
所述折叠屏处于半折叠状态;或者,
所述折叠屏的姿态在预设时间内的变化小于阈值;或者,
所述折叠屏上远离中心折叠线的两侧与目标台面紧贴;或者,
所述折叠屏上远离中心折叠线的两侧与与水平面的夹角小于角度阈值。
8.根据权利要求1至7任一所述的方法,其特征在于,所述第二对象为在目标视角下的所述三维对象映射到所述折叠屏所在的平面的图像。
9.根据权利要求8所述的方法,其特征在于,所述目标视角与所述第二角度有关。
10.根据权利要求7或8所述的方法,其特征在于,所述方法还包括:
在所述折叠屏的折叠角度由所述第一角度变为所述第二角度的过程中,在所述折叠屏上显示在不断变化的视角下的所述三维对象映射到所述折叠屏所在的平面上的多帧图像;或者,
在所述折叠屏的折叠角度由所述第一角度变为所述第二角度的过程中,在所述折叠屏上显示所述第一对象,直到所述折叠屏的折叠角度变为所述第二角度时,显示所述第二对象。
11.根据权利要求10所述的方法,其特征在于,所述第一角度和所述第二角度小于或等于180度;
在所述第二角度小于所述第一角度时,所述不断变化,包括:向水平视角变化;
在所述第二角度大于所述第一角度时,所述不断变化,包括:向竖直视角变化。
12.根据权利要求1至11任一所述的方法,其特征在于,所述显示第二对象,包括:
在所述第一屏和所述第二屏上与所述第一对象相匹配的显示位置上显示所述第二对象。
13.根据权利要求8至12任一所述的方法,其特征在于,在所述显示第二对象之前,所述方法还包括:
根据所述第二角度,通过所述折叠屏的屏幕夹角和三维对象观看视角之间的映射关系,确定所述第二角度对应的所述目标视角。
14.根据权利要求8至13任一所述的方法,其特征在于,在所述显示第二对象之前,所述方法还包括:
根据所述第二角度,确定目标屏幕观看视角;
根据所述目标屏幕观看视角与所述折叠屏之间的位姿关系,通过对所述目标视角下三维对象的图像进行拉伸变形处理,以将所述三维对象映射到所述折叠屏的平面上,得到所述第二对象。
15.根据权利要求14所述的方法,其特征在于,所述目标屏幕观看视角与所述第二角度的中心线的差异在预设范围内。
16.根据权利要求14或15所述的方法,其特征在于,所述折叠屏包括第一屏和第二屏,所述第二对象包括第一子对象和第二子对象,所述图像包括所述第一子对象对应的第一图像、以及所述第二子对象对应的第二图像;所述通过对所述图像进行拉伸变形处理,以将所述图像映射到所述折叠屏上,包括:
根据所述目标视角与所述第一屏之间的位置关系,对所述第一图像进行拉伸变形处理,以将所述第一图像映射到所述第一屏上;
根据所述目标视角与所述第二屏之间的位置关系,对所述第二图像进行拉伸变形处理,以将所述第二图像映射到所述第二屏上。
17.根据权利要求1至16任一所述的方法,其特征在于,所述折叠屏包括第一屏和第二屏;
所述显示第一对象,包括:
在所述第一屏上显示第一对象,且在所述第二屏上显示目标画面;
所述显示第二对象,包括:
在所述第一屏上显示第二对象,且在所述第二屏上显示所述目标画面。
18.一种折叠屏的显示装置,其特征在于,应用于包括折叠屏的电子设备,所述装置包括:
显示模块,用于在所述折叠屏的折叠角度为第一角度时,在所述折叠屏上显示第一对象;
检测到所述折叠屏的折叠角度由第一角度变为第二角度,根据所述第一对象,显示第二对象;其中,所述第一对象为二维对象的图像,所述第二对象为所述二维对象对应的三维对象的图像。
19.根据权利要求18所述的装置,其特征在于,所述第一对象为用户界面UI、照片、图标或者字符串。
20.根据权利要求18或19所述的装置,其特征在于,所述第二对象包含所述第一对象的语义信息或者图像信息。
21.根据权利要求18至20任一所述的装置,其特征在于,所述折叠屏为内折屏,所述折叠屏包括第一屏和第二屏;所述装置还包括:
使能模块,用于基于检测到所述折叠屏满足第一预设条件,使能所述第一对象的三维显示功能;所述第一预设条件包括如下的至少一种:
所述折叠屏处于半折叠状态;或者,
所述第一屏和所述第二屏中的一个屏与水平面的夹角小于角度阈值;或者,
所述折叠屏的姿态在预设时间内的变化小于阈值;或者,
所述第一屏和所述第二屏中的一个屏与目标台面紧贴。
22.根据权利要求18至21任一所述的装置,其特征在于,所述折叠屏为内折屏,所述折叠屏包括第一屏和第二屏;所述装置还包括:
使能模块,用于基于检测到所述折叠屏满足第二预设条件,使能所述第一对象的三维显示功能;所述第二预设条件包括如下的至少一种:
所述折叠屏处于半折叠状态;或者,
所述折叠屏的姿态在预设时间内的变化小于阈值;或者,
所述折叠屏上与折叠线垂直的一侧与目标台面紧贴;或者,
所述折叠屏上与折叠线垂直的一侧与水平面的夹角小于角度阈值。
23.根据权利要求18至21任一所述的装置,其特征在于,所述折叠屏为外折屏,所述折叠屏包括第一屏和第二屏;所述装置还包括:
使能模块,用于基于检测到所述折叠屏满足第三预设条件,使能所述第一对象的三维显示功能;所述第三预设条件包括如下的至少一种:
所述折叠屏处于半折叠状态;或者,
所述第一屏和所述第二屏中的一个屏与目标台面紧贴;或者,
所述第一屏和所述第二屏中的一个屏与水平面的夹角小于角度阈值;或者,
所述折叠屏的姿态在预设时间内的变化小于阈值。
24.根据权利要求18至21任一所述的装置,其特征在于,所述折叠屏为外折屏,所述折叠屏包括第一屏和第二屏;所述装置还包括:
使能模块,用于基于检测到所述折叠屏满足第四预设条件,使能所述第一对象的三维显示功能;所述第四预设条件包括如下的至少一种:
所述折叠屏处于半折叠状态;或者,
所述折叠屏的姿态在预设时间内的变化小于阈值;或者,
所述折叠屏上远离中心折叠线的两侧与目标台面紧贴;或者,
所述折叠屏上远离中心折叠线的两侧与与水平面的夹角小于角度阈值。
25.根据权利要求18至24任一所述的装置,其特征在于,所述第二对象为在目标视角下的所述三维对象映射到所述折叠屏所在的平面的图像。
26.根据权利要求25所述的装置,其特征在于,所述目标视角与所述第二角度有关。
27.根据权利要求18至26任一所述的装置,其特征在于,所述显示模块,还用于:
在所述折叠屏的折叠角度由所述第一角度变为所述第二角度的过程中,在所述折叠屏上显示在不断变化的视角下的所述三维对象映射到所述折叠屏所在的平面上的多帧图像;或者,
在所述折叠屏的折叠角度由所述第一角度变为所述第二角度的过程中,在所述折叠屏上显示所述第一对象,直到所述折叠屏的折叠角度变为所述第二角度时,显示所述第二对象。
28.根据权利要求27所述的装置,其特征在于,所述第一角度和所述第二角度小于或等于180度;
在所述第二角度小于所述第一角度时,所述不断变化,包括:向水平视角变化;
在所述第二角度大于所述第一角度时,所述不断变化,包括:向竖直视角变化。
29.根据权利要求18至28任一所述的装置,其特征在于,所述显示模块,具体用于:
在所述第一屏和所述第二屏上与所述第一对象相匹配的显示位置上显示所述第二对象。
30.根据权利要求24至29任一所述的装置,其特征在于,所述装置还包括:
视角确定模块,用于在所述显示第二对象之前,根据所述第二角度,通过所述折叠屏的屏幕夹角和三维对象观看视角之间的映射关系,确定所述第二角度对应的所述目标视角。
31.根据权利要求24至30任一所述的装置,其特征在于,所述显示模块,还用于:
在所述显示第二对象之前,根据所述第二角度,确定目标屏幕观看视角;
根据所述目标屏幕观看视角与所述折叠屏之间的位姿关系,通过对所述目标视角下三维对象的图像进行拉伸变形处理,以将所述三维对象映射到所述折叠屏的平面上,得到所述第二对象。
32.根据权利要求31所述的装置,其特征在于,所述目标屏幕观看视角与所述第二角度的中心线的差异在预设范围内。
33.根据权利要求31或32所述的装置,其特征在于,所述折叠屏包括第一屏和第二屏,所述第二对象包括第一子对象和第二子对象,所述图像包括所述第一子对象对应的第一图像、以及所述第二子对象对应的第二图像;所述显示模块,具体用于:
根据所述目标视角与所述第一屏之间的位置关系,对所述第一图像进行拉伸变形处理,以将所述第一图像映射到所述第一屏上;
根据所述目标视角与所述第二屏之间的位置关系,对所述第二图像进行拉伸变形处理,以将所述第二图像映射到所述第二屏上。
34.根据权利要求18至33任一所述的装置,其特征在于,所述折叠屏包括第一屏和第二屏;
所述显示模块,具体用于:
在所述第一屏上显示第一对象,且在所述第二屏上显示目标画面;
在所述第一屏上显示第二对象,且在所述第二屏上显示所述目标画面。
35.一种电子设备,其特征在于,包括:折叠屏,所述折叠屏在折叠时被折叠线划分为第一屏和第二屏;一个或多个处理器;一个或多个存储器;传感器;
所述传感器,用于检测数据以使得所述一个或多个处理器检测所述第一屏与所述第二屏的夹角;
所述一个或多个存储器用于存储计算机程序代码,所述计算机程序代码包括计算机指令;当所述计算机指令在所述处理器上运行时,使得所述电子设备执行如权利要求1至17中任一项所述的方法。
36.一种计算机可读存储介质,包括程序,当其在计算机上运行时,使得计算机执行如权利要求1至17中任一项所述的方法。
37.一种包含指令的计算机程序产品,其特征在于,当所述计算机程序产品在终端上运行时,使得所述终端执行所述权利要求1-17中任一权利要求所述的方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210764059.2A CN117369756A (zh) | 2022-06-30 | 2022-06-30 | 一种折叠屏的显示方法以及相关设备 |
PCT/CN2023/101661 WO2024001900A1 (zh) | 2022-06-30 | 2023-06-21 | 一种折叠屏的显示方法以及相关设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210764059.2A CN117369756A (zh) | 2022-06-30 | 2022-06-30 | 一种折叠屏的显示方法以及相关设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117369756A true CN117369756A (zh) | 2024-01-09 |
Family
ID=89383269
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210764059.2A Pending CN117369756A (zh) | 2022-06-30 | 2022-06-30 | 一种折叠屏的显示方法以及相关设备 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN117369756A (zh) |
WO (1) | WO2024001900A1 (zh) |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10539806B2 (en) * | 2017-03-02 | 2020-01-21 | SK Commercial Construction, Inc. | Enhanced transparent display screen for mobile device and methods of operation |
CN110347311A (zh) * | 2019-07-02 | 2019-10-18 | 网易(杭州)网络有限公司 | 三维虚拟对象显示方法与装置、存储介质、电子设备 |
CN111338737B (zh) * | 2020-02-28 | 2022-04-08 | 华为技术有限公司 | 内容呈现方法、装置、终端设备及计算机可读存储介质 |
CN114003321B (zh) * | 2020-07-28 | 2023-05-05 | 华为技术有限公司 | 一种显示方法及电子设备 |
-
2022
- 2022-06-30 CN CN202210764059.2A patent/CN117369756A/zh active Pending
-
2023
- 2023-06-21 WO PCT/CN2023/101661 patent/WO2024001900A1/zh unknown
Also Published As
Publication number | Publication date |
---|---|
WO2024001900A1 (zh) | 2024-01-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP4084450B1 (en) | Display method for foldable screen, and related apparatus | |
CN110536004B (zh) | 多传感器应用于具有柔性屏幕的电子设备的方法及电子设备 | |
CN110597510B (zh) | 一种界面的动态布局方法及设备 | |
EP4057136A1 (en) | Method for displaying folding screen and related apparatus | |
CN112506386B (zh) | 一种折叠屏显示方法及电子设备 | |
EP3787298A1 (en) | Flexible screen display method and terminal | |
CN114115587A (zh) | 一种控制屏幕显示的方法和电子设备 | |
CN114115769B (zh) | 一种显示方法及电子设备 | |
WO2023103951A1 (zh) | 一种折叠屏的显示方法及相关装置 | |
CN110798568A (zh) | 具有折叠屏的电子设备的显示控制方法及电子设备 | |
CN110401768B (zh) | 调节电子设备的工作状态的方法和装置 | |
CN112751954A (zh) | 一种操作提示的方法和电子设备 | |
CN114089932A (zh) | 多屏显示方法、装置、终端设备及存储介质 | |
WO2022143180A1 (zh) | 协同显示方法、终端设备及计算机可读存储介质 | |
CN116723257A (zh) | 一种图像显示方法及电子设备 | |
CN116048436B (zh) | 应用界面显示方法、电子设备及存储介质 | |
CN115480849A (zh) | 用户界面布局方法及相关设备 | |
CN116561085A (zh) | 图片分享方法和电子设备 | |
CN117369756A (zh) | 一种折叠屏的显示方法以及相关设备 | |
CN114584652B (zh) | 一种用户图形界面显示方法、装置、计算机设备及存储介质 | |
CN116339569A (zh) | 分屏显示的方法、折叠屏设备和计算机可读存储介质 | |
CN116027886A (zh) | 一种折叠屏的显示方法及电子设备 | |
CN117389496A (zh) | 一种折叠屏显示方法、电子设备和计算机可读存储介质 | |
CN117478859A (zh) | 一种信息显示方法和电子设备 | |
CN117692693A (zh) | 多屏显示方法以及相关设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication |