CN114816617A - 内容呈现方法、装置、终端设备及计算机可读存储介质 - Google Patents

内容呈现方法、装置、终端设备及计算机可读存储介质 Download PDF

Info

Publication number
CN114816617A
CN114816617A CN202210301743.7A CN202210301743A CN114816617A CN 114816617 A CN114816617 A CN 114816617A CN 202210301743 A CN202210301743 A CN 202210301743A CN 114816617 A CN114816617 A CN 114816617A
Authority
CN
China
Prior art keywords
mode
application
display screen
terminal device
content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210301743.7A
Other languages
English (en)
Inventor
华文
徐杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN202210301743.7A priority Critical patent/CN114816617A/zh
Publication of CN114816617A publication Critical patent/CN114816617A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1615Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function
    • G06F1/1616Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function with folding flat displays, e.g. laptop computers or notebooks having a clamshell configuration, with body parts pivoting to an open position around an axis parallel to the plane they define in closed position
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser

Abstract

本申请适用于终端技术领域,尤其涉及一种内容呈现方法、装置、终端设备及计算机可读存储介质。所述方法可以在当前应用的使用过程中,接收用户对终端设备的折叠屏所执行的折叠操作,并可以获取当前应用的内容呈现模式,以根据当前应用的内容呈现模式和用户对折叠屏的折叠操作快速启动当前应用的目标模式(即AR模式、VR模式和3D模式中的至少一种)来进行内容呈现,简化AR模式、VR模式或3D模式的启动操作,提高AR模式、VR模式或3D模式的启动速度,从而提高应用通过AR模式或通过VR模式或通过3D模式进行内容呈现的呈现速度,提升用户体验。

Description

内容呈现方法、装置、终端设备及计算机可读存储介质
本申请是分案申请,原申请的申请号是202010133711.1,原申请日是2020年2月28日,原申请的全部内容通过引用结合在本申请中。
技术领域
本申请属于终端技术领域,尤其涉及一种内容呈现方法、装置、终端设备及计算机可读存储介质。
背景技术
随着终端设备的智能化发展,用户可以在终端设备中安装各种应用来满足日常生活和工作需要。目前,很多应用中都可以使用增强现实AR模式或虚拟现实VR模式或三维3D模式进行内容呈现来帮助用户更沉浸的理解内容和完成任务等。但现有的应用中,用户需要先在应用中找到特定按钮,然后通过点击该特定按钮来启动应用的AR模式或VR模式或3D模式进行内容呈现,操作较为不便,AR模式、VR模式或3D模式呈现内容的速度较慢。
发明内容
本申请实施例提供了一种内容呈现方法、装置、终端设备及计算机可读存储介质,可以简单、快速地启动应用的AR模式、VR模式或3D模式来进行内容呈现。
第一方面,本申请实施例提供了一种内容呈现方法,应用于具有折叠屏的终端设备,所述方法可以包括:
当检测到对所述折叠屏的折叠操作时,获取当前应用的内容呈现模式,所述当前应用为所述终端设备中当前正在使用的应用;
若所述内容呈现模式为普通模式,则启动所述当前应用的目标模式,并通过所述目标模式呈现所述当前应用的内容,所述目标模式为增强现实AR模式、虚拟现实VR模式和三维3D模式中的至少一种。
示例性的,内容呈现模式可以包括普通模式和AR模式,即当前应用可以为含有普通模式和AR模式的应用。或者,内容呈现模式可以包括普通模式和VR模式,即当前应用可以为含有普通模式和VR模式的应用。或者,内容获取模式可以包括普通模式、AR模式和3D模式,即当前应用可以为含有普通模式、AR模式和3D模式的应用,等等。
需要说明的是,当前应用可以为终端设备中直接内置的内置应用,即可以为终端设备的生产商自行开发并直接内置于终端设备中的应用,或者可以为终端设备的生产商与第三方厂商合作开发并直接内置于终端设备中的应用等。
应理解,当前应用也可以为终端设备从外部获取的第三方应用,即当前应用也可以为第三方厂商开发,并由终端设备从第三方厂商中获取并安装于终端设备中的应用。
示例性的,终端设备可以通过重力传感器、加速度传感器和陀螺仪中的一个或多个来检测用户对折叠屏所执行的折叠操作。示例性的,终端设备也可以通过设置在折叠屏的弯折部位的角度传感器来检测用户对折叠屏所执行的折叠操作。示例性的,终端设备还可以通过设置在折叠屏的弯折部位的物理开关来检测用户对折叠屏所执行的折叠操作。本申请实施例对折叠操作的检测方式不作具体限定。
在一些实施例中,在当前应用为终端设备从外部获取并安装于终端设备中的第三方应用时,终端设备中可以配置有与该第三方应用对接的应用接口。在此,终端设备可以通过所配置的应用接口向该第三方应用发送数据或者指令等,以及接收该第三方应用所返回的数据或者指令等。
示例性的,在用户使用该第三方应用的过程中,当终端设备检测到用户将折叠屏折叠至第一角度区间内的任一角度时,终端设备可以通过所配置的应用接口向该第三方应用发送内容呈现模式的获取指令,并可以通过该应用接口接收该第三方应用根据该获取指令所返回的有关内容呈现模式的数据。终端设备则可以根据所接收到的数据判断该第三方应用的内容呈现模式是否为普通模式。在确定该第三方应用的内容呈现模式为普通模式时,终端设备则可以通过该应用接口向该第三方应用发送启动该第三方应用的AR模式或者启动该第三方应用的VR模式或者启动该第三方应用的3D模式的启动指令。该第三方应用接收到该应用接口传递的启动指令后,则可以根据该启动指令启动该第三方应用的AR模式、VR模式或者3D模式,以通过该第三方应用的AR模式、VR模式或者3D来进行内容呈现。
在另一些实施例中,在当前应用为终端设备从外部获取并安装于终端设备中的第三方应用时,终端设备中可以配置有与该第三方应用对接的应用接口。在此,终端设备可以通过所配置的应用接口向该第三方应用发送折叠操作所对应的折叠角度等信息,其中,折叠操作是指触发该第三方应用启动AR模式、VR模式或者3D模式的操作,折叠操作所对应的折叠角度是指折叠后的第一显示屏与第二显示屏之间的夹角。
示例性的,在用户使用该第三方应用的过程中,当终端设备检测到用户将折叠屏折叠至第一角度区间内的任一角度时,终端设备则可以通过所配置的应用接口向该第三方应用发送折叠操作所对应的折叠角度等信息,即可以通过所配置的应用接口将第一显示屏与第二显示屏之间的夹角发送至该第三方应用。该第三方应用接收到该应用接口传递的折叠角度等信息后,则可以首先获取该第三方应用的内容呈现模式,并可以判断该内容呈现模式是否为普通模式。在确定该内容呈现模式为普通模式时,该第三方应用则可以启动该第三方应用的AR模式或者启动该第三方应用的VR模式或者启动该第三方应用的3D模式,以通过该第三方应用的AR模式、VR模式或者3D模式来进行内容呈现。
在一些实施例中,在当前应用为终端设备从外部获取并安装于终端设备中的第三方应用时,终端设备中可以配置有与该第三方应用对接的应用接口。在此,终端设备可以通过所配置的应用接口向该第三方应用实时发送折叠屏当前所对应的第一角度等信息,其中,折叠屏当前所对应的第一角度是指折叠屏在当前形态中的第一显示屏和第二显示屏之间的夹角,折叠屏当前所对应的第一角度可以为能触发该第三方应用启动AR模式、VR模式或3D模式的折叠操作所对应的角度,也可以为不能触发该第三方应用启动AR模式、VR模式或3D模式的折叠操作所对应的角度。
示例性的,在用户使用该第三方应用的过程中,终端设备可以实时检测折叠屏当前所对应的第一角度等信息,并可以通过所配置的应用接口将所检测到的第一角度等信息实时发送至该第三方应用。该第三方应用接收到该应用接口传递的第一角度后,可以首先判断该第一角度是否位于第一角度区间内,若确定该第一角度位于第一角度区间内,该第三方应用则可以获取该第三方应用的内容呈现模式。然后该第三方应用可以继续判断该内容呈现模式是否为普通模式。在确定该内容呈现模式为普通模式时,该第三方应用则可以启动该第三方应用的AR模式或者启动该第三方应用的VR模式或者启动该第三方应用的3D模式,以通过该第三方应用的AR模式、VR模式或者3D模式来进行内容呈现。
在第一方面的一种可能的实现方式中,所述折叠屏可以包括第一显示屏和第二显示屏;
所述通过所述目标模式呈现所述当前应用的内容,可以包括:
在所述第一显示屏中通过所述目标模式呈现所述当前应用的第一内容,并在所述第二显示屏中通过所述普通模式呈现所述当前应用的第二内容。
应理解,所述终端设备可以包括后置的第一摄像装置,所述第一显示屏为所述折叠屏中被折起的区域,所述第二显示屏为所述折叠屏中除所述第一显示屏以外的区域,所述第一摄像装置设置于所述终端设备中与所述第一显示屏相对应的位置处。
需要说明的是,折叠屏可以包括被折叠起来的第一显示屏和未被折叠的第二显示屏。在此,为了提高当前应用中内容呈现的多样性,以方便用户更好地理解当前应用中所呈现的内容,终端设备可以在第一显示屏中通过目标模式呈现当前应用的第一内容,并可以在第二显示屏中通过普通模式呈现当前应用的第二内容。具体地,终端设备可以在第一显示屏中通过AR模式呈现当前应用的第一内容,并可以在第二显示屏中通过普通模式呈现当前应用的第二内容;或者终端设备可以在第一显示屏中通过VR模式呈现当前应用的第一内容,并可以在第二显示屏中通过普通模式呈现当前应用的第二内容;或者终端设备可以在第一显示屏中通过3D模式呈现当前应用的第一内容,并可以在第二显示屏中通过普通模式呈现当前应用的第二内容。
应理解,终端设备可以包括后置的第一摄像装置,即终端设备可以包括后置摄像头。在目标模式为AR模式时,终端设备可以通过第一摄像装置(即后置摄像头)采集当前环境对应的实景图像,以基于实景图像来进行AR模式中内容的呈现。在此,为确保实景图像采集的准确性与有效性,提高AR模式中内容的呈现效果,第一摄像装置可以位于终端设备中被折叠起的部分。具体地,终端设备的折叠屏被折叠后可以形成第一显示屏和第二显示屏,第一显示屏为折叠屏中被折叠起来的区域,第二显示屏为折叠屏中除第一显示屏以外的区域,即第二显示屏为折叠屏中未被折叠起来的区域。第一摄像装置在终端设备中的位置则可以与第一显示屏相对应,即第一摄像装置可以位于终端设备中与第一显示屏相对应的背面。
示例性的,在所述目标模式为AR模式时,所述在所述第一显示屏中通过所述目标模式呈现所述当前应用的第一内容,可以包括:
通过所述第一摄像装置获取当前环境对应的第一实景图像,并根据所述第一实景图像、预设地图以及预设导航路线确定导航标识在所述第一实景图像中的指示位置和指示方向;
在所述指示位置以所述指示方向显示所述导航标识,并在所述第一显示屏中呈现带有所述导航标识的所述第一实景图像。
示例性的,终端设备在确定启动当前应用的AR模式时,可以通过第一摄像装置获取用户当前所在环境的第一实景图像,并可以将所获取的第一实景图像与当前应用中所需呈现的内容进行融合,以将当前应用中所需呈现的内容融合至第一实景图像中,然后可以将融合后的第一实景图像在终端设备的折叠屏中进行呈现。
具体地,在导航场景中,在用户使用地图应用的普通模式(即2D导航模式)进行导航的过程中,当用户想要启动地图应用的AR模式(即实景导航模式)进行导航时,用户可以将终端设备的折叠屏折叠至第一角度区间内的任一角度。终端设备在检测到用户将折叠屏折叠至第一角度区间内的某一角度时,则可以首先通过第一摄像装置获取用户当前所在环境的第一实景图像,然后可以根据所获取的第一实景图像、地图应用中所存储的预设地图以及2D导航模式所确定的预设导航路线,确定导航标识在第一实景图像中的指示位置和指示方向,其中,指示位置可以为第一实景图像中用户当前所在的实时位置,指示方向可以为指示用户行走的方向和/或方位等。然后可以在第一实景图像中的指示位置处以该指示方向显示导航标识,并可以将带有导航标识的第一实景图像呈现于终端设备的折叠屏中,从而通过实景导航更好地帮助用户到达目的位置。其中,导航标识在第一实景图像中的指示方向也可以根据用户的移动方向进行调整。
示例性的,在所述目标模式为AR模式时,所述在所述第一显示屏中通过所述目标模式呈现所述当前应用的第一内容,可以包括:
通过所述第一摄像装置获取当前环境对应的第二实景图像,并获取所述当前应用对应的虚拟图像;
将所述虚拟图像融合至所述第二实景图像,并在所述第一显示屏中呈现融合有所述虚拟图像的所述第二实景图像。
具体地,在游戏场景中,在用户使用游戏应用的普通模式进行游戏的过程中,当用户想要启动游戏应用的AR模式进行游戏时,用户可以将终端设备的折叠屏折叠至第一角度区间内的任一角度。终端设备在检测到用户将折叠屏折叠至第一角度区间内的某一角度时,则可以首先通过第一摄像装置获取用户当前所在环境的第二实景图像,并可以获取游戏应用中游戏当前所对应的虚拟图像(例如游戏画面的前景图像、游戏对象本身等),然后可以将虚拟图像与第二实景图像进行融合,以将虚拟图像融合至第二实景图像中(例如将游戏画面的前景图像融合至第二实景图像中,或者将游戏对象融合至第二实景图像中),并可以将融合有虚拟图像的第二实景图像呈现于终端设备的折叠屏中,使用户可感受在真实环境场景中进行游戏的体验。
在第一方面的一种可能的实现方式中,所述终端设备还可以包括前置的第二摄像装置,所述第二摄像装置设置于所述终端设备中与所述第一显示屏相对应的位置处;
所述方法还可以包括:
通过所述第二摄像装置获取用户的交互手势,并根据所述交互手势与所述当前应用进行交互。
应理解,终端设备还可以包括前置的第二摄像装置。在此,终端设备可以利用第二摄像装置进行手势识别,并可以根据所识别的手势与当前应用进行交互,以提高应用的交互性能,提升用户体验。示例的,为方便用户通过手势与当前应用进行交互,以提高手势交互的便捷性,第二摄像装置可以设置于终端设备中被折叠起来的部分,即第二摄像装置在终端设备中的位置可以与第一显示屏相对应,也就是说,第二摄像装置可以位于终端设备中与第一显示屏相对应的正面。例如,第二摄像装置可以设置于第一显示屏上方的位置,以提高用户进行手势交互的便捷性,提升用户体验。
应理解,所述当检测到对所述折叠屏的折叠操作时,获取当前应用的内容呈现模式,可以包括:
当检测到对所述折叠屏的折叠操作时,获取所述折叠屏对应的第一折叠角度;
若所述第一折叠角度位于预设的第一角度区间内,则获取所述当前应用的内容呈现模式。
需要说明的是,为避免目标模式的误启动,终端设备中可以存储有当前应用对应的第一角度区间,并可结合第一角度区间来确定用户是否想要启动当前应用的目标模式。其中,第一角度区间可以为用户根据实际情况预先设置的角度区间,也可以为终端设备中系统默认设置的角度区间,本申请实施例对此不作任何限定。
示例性的,在所述通过所述目标模式呈现所述当前应用的内容之后,可以包括:
获取所述折叠屏对应的第二折叠角度;
若所述第二折叠角度位于预设的第二角度区间内,则关闭所述目标模式,并通过所述普通模式呈现所述当前应用的内容。
需要说明的是,在当前应用通过AR模式、VR模式或者3D模式进行内容呈现的过程中,终端设备还可以通过接收用户的关闭操作来关闭当前应用的AR模式、VR模式或者3D模式,以返回至当前应用的普通模式。示例的,用户可以通过将折叠屏恢复至原来的形态来关闭当前应用的AR模式、VR模式或者3D模式。例如,用户可以通过将折叠屏恢复至大屏的展开形态来关闭当前应用的AR模式、VR模式或3D模式。即在当前应用的AR模式、VR模式或3D模式的启动过程中,终端设备可以实时获取折叠屏所对应的第二折叠角度,并在确定该第二折叠角度位于预设的第二角度区间内时,则可以关闭当前应用的AR模式、VR模式或3D模式,以通过当前应用的普通模式来对当前应用的内容进行呈现。
其中,第二角度区间可以为用户根据实际情况预先设置的角度区间,也可以为终端设备中系统默认设置的角度区间。示例的,第二角度区间可以为折叠屏为大屏的展开形态所对应的角度区间。
示例性的,当前应用的应用界面中也可以设置有关闭AR模式或者关闭VR模式或者关闭3D模式的虚拟按键,用户也可以通过点击或者触摸该虚拟按键来关闭当前应用的AR模式或者关闭当前应用的VR模式或者关闭当前应用的3D模式。即在AR模式、VR模式或者3D模式的启动过程中,终端设备可以实时检测该虚拟按键的触发状态,并在确定该虚拟按键被触发时,关闭当前应用的AR模式、VR模式或者3D模式。
第二方面,本申请实施例提供了一种内容呈现装置,应用于具有折叠屏的终端设备,所述装置可以包括:
模式获取模块,用于当检测到对所述折叠屏的折叠操作时,获取当前应用的内容呈现模式,所述当前应用为所述终端设备中当前正在使用的应用;
内容呈现模块,用于若所述内容呈现模式为普通模式,则启动所述当前应用的目标模式,并通过所述目标模式呈现所述当前应用的内容,所述目标模式为增强现实AR模式、虚拟现实VR模式和三维3D模式中的至少一种。
在第二方面的一种可能的实现方式中,所述折叠屏可以包括第一显示屏和第二显示屏;
所述内容呈现模块,还用于在所述第一显示屏中通过所述目标模式呈现所述当前应用的第一内容,并在所述第二显示屏中通过所述普通模式呈现所述当前应用的第二内容。
应理解,所述终端设备可以包括后置的第一摄像装置,所述第一显示屏为所述折叠屏中被折起的区域,所述第二显示屏为所述折叠屏中除所述第一显示屏以外的区域,所述第一摄像装置设置于所述终端设备中与所述第一显示屏相对应的位置处。
示例性的,所述内容呈现模块,可以包括:
第一实景图像获取单元,用于通过所述第一摄像装置获取当前环境对应的第一实景图像,并根据所述第一实景图像、预设地图以及预设导航路线确定导航标识在所述第一实景图像中的指示位置和指示方向;
第一内容呈现单元,用于在所述指示位置以所述指示方向显示所述导航标识,并在所述第一显示屏中呈现带有所述导航标识的所述第一实景图像。
示例性的,所述内容呈现模块,还可以包括:
第二实景图像获取单元,用于通过所述第一摄像装置获取当前环境对应的第二实景图像,并获取所述当前应用对应的虚拟图像;
第二内容呈现单元,用于将所述虚拟图像融合至所述第二实景图像,并在所述第一显示屏中呈现融合有所述虚拟图像的所述第二实景图像。
在第二方面的一种可能的实现方式中,所述终端设备还可以包括前置的第二摄像装置,所述第二摄像装置设置于所述终端设备中与所述第一显示屏相对应的位置处;
所述装置,还可以包括:
手势交互模块,用于通过所述第二摄像装置获取用户的交互手势,并根据所述交互手势与所述当前应用进行交互。
应理解,所述模式获取模块,可以包括:
第一折叠角度获取单元,用于当检测到对所述折叠屏的折叠操作时,获取所述折叠屏对应的第一折叠角度;
模式获取单元,用于若所述第一折叠角度位于预设的第一角度区间内,则获取所述当前应用的内容呈现模式。
示例性的,所述装置,还可以包括:
第二折叠角度获取模块,用于获取所述折叠屏对应的第二折叠角度;
目标模式关闭模块,用于若所述第二折叠角度位于预设的第二角度区间内,则关闭所述目标模式,并通过所述普通模式呈现所述当前应用的内容。
第三方面,本申请实施例提供了一种终端设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上述第一方面中任一项所述的内容呈现方法。
第四方面,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如上述第一方面中任一项所述的内容呈现方法。
第五方面,本申请实施例提供了一种计算机程序产品,当计算机程序产品在终端设备上运行时,使得终端设备执行上述第一方面中任一项所述的内容呈现方法。
可以理解的是,上述第二方面至第五方面的有益效果可以参见上述第一方面中的相关描述,在此不再赘述。
本申请实施例与现有技术相比存在的有益效果是:
本申请实施例中,在当前应用的使用过程中,当用户想要启动当前应用的目标模式(即AR模式、VR模式和3D模式中的至少一种)来进行内容呈现时,用户可以对终端设备的折叠屏进行折叠。此时,终端设备可以获取当前应用的内容呈现模式,并可以基于当前应用的内容呈现模式和用户对折叠屏的折叠操作快速启动当前应用的AR模式、VR模式或3D模式来进行内容呈现,以简化AR模式、VR模式或3D模式的启动操作,提高AR模式、VR模式或3D模式的启动速度,从而提高应用通过AR模式或通过VR模式或通过3D模式来进行内容呈现的呈现速度,提升用户体验。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是现有技术中的AR模式启动的示意图;
图2是本申请一实施例提供的内容呈现方法的流程示意图;
图3是折叠屏对应的折叠角度的示意图;
图4a是VR模式进行内容呈现的场景示意图;
图4b是3D模式进行内容呈现的场景示意图;
图5是本申请一实施例提供的应用场景示意图;
图6是本申请另一实施例提供的应用场景示意图;
图7是本申请一实施例提供的应用场景示意图;
图8是本申请另一实施例提供的应用场景的示例图;
图9是本申请实施例提供的内容呈现装置的结构示意图;
图10是本申请实施例提供的终端设备的结构示意图;
图11是本申请一实施例提供的内容呈现方法所适用于的手机的结构示意图;
图12是本申请一实施例提供的内容呈现方法所适用于的软件架构示意图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本申请实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本申请的描述。
应当理解,当在本申请说明书和所附权利要求书中使用时,术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解,在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
如在本申请说明书和所附权利要求书中所使用的那样,术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地,短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。
另外,在本申请说明书和所附权利要求书的描述中,术语“第一”、“第二”、“第三”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
在本申请说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此,在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例,而是意味着“一个或多个但不是所有的实施例”,除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”,除非是以其他方式另外特别强调。
本申请实施例提供的内容呈现方法可以应用于手机、平板电脑、可穿戴设备、车载设备、增强现实(augmented reality,AR)/虚拟现实(virtual reality,VR)设备、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本、个人数字助理(personal digital assistant,PDA)等终端设备上,本申请实施例对终端设备的具体类型不作任何限制。
目前,很多应用中都可以使用增强现实AR技术、虚拟现实VR技术或者三维3D技术进行内容呈现来帮助用户更沉浸的理解内容和完成任务等。也就是说,很多应用中都可以设置有普通模式(即普通2D模式),和基于AR技术的AR模式、基于VR技术的VR模式、基于3D技术的3D模式来供用户进行内容呈现模式的选择,从而可以根据用户所选择的内容呈现模式对应用中的内容进行呈现。但现有应用中,用户往往需要先在应用中找到AR模式、VR模式或者3D模式所对应的特定按钮,然后通过点击或触摸该特定按钮来启动应用的AR模式、VR模式或者3D模式,从而通过AR模式、VR模式或者3D模式进行内容呈现。如图1所示,在用户使用地图应用的普通模式(即2D导航模式)进行导航内容的呈现时,若用户想要通过AR模式(即实景导航模式)进行导航内容的呈现,用户则需要先在地图应用中找到实景导航模式所对应的特定按钮(例如需要先找到图1中的实景导航按钮101),然后通过点击或者触摸实景导航按钮101来进入实景导航模式,从而可以通过实景导航模式进行实景导航内容的呈现。这种通过点击或者触摸特定按钮的方式启动AR模式、VR模式或者3D模式易造成操作上的繁琐与不便,而对于那些特定按钮设置较为隐蔽的应用,这种操作上的繁琐与不便则尤为明显,使得AR模式、VR模式或者3D模式的启动速度较慢,从而使得应用通过AR模式、VR模式或者3D模式进行内容呈现的呈现速度较慢,影响用户体验。
为了解决上述问题,本申请实施例提供了一种内容呈现方法、装置、终端设备及计算机可读存储介质,该内容呈现方法所应用于的终端设备可以为具有折叠屏的终端设备。在用户使用终端设备某一应用的过程中,当用户想要启动该应用的目标模式(即AR模式、VR模式和3D模式中的至少一种)来进行内容呈现时,用户可以对终端设备的折叠屏进行折叠。此时,终端设备则可以获取该应用的内容呈现模式,并可以基于该应用的内容呈现模式和用户对折叠屏的折叠操作快速启动该应用的AR模式、VR模式或者3D模式进行内容呈现,以简化AR模式、VR模式或者3D模式的启动操作,提高AR模式、VR模式或者3D模式的启动速度,从而提高应用通过AR模式或者通过VR模式或者通过3D模式进行内容呈现的呈现速度,提升用户体验。
需要说明的是,本申请实施例提供的内容呈现方法所应用于的终端设备的折叠屏可以采用一个一体的柔性显示屏,也可以采用两个刚性屏以及位于两个刚性屏之间的一个柔性屏组成的显示屏。在使用过程中,折叠屏可以随时在折叠形态下的小屏和展开形态下的大屏之间切换。其中,折叠形态可以是完全折叠,即折叠屏被折叠后所对应的第一显示屏和第二显示屏之间的夹角为0度(实际可能达不到0度,具体以终端设备中的角度传感器等传感器实际上报角度为准),也可以是部分折叠,即折叠屏被折叠后所对应的第一显示屏和第二显示屏之间的夹角大于0度且小于180度。
图2示出了本申请实施例提供的内容呈现方法的示意性流程图。如图2所示,所述内容呈现方法,可以包括:
S201、当检测到对所述折叠屏的折叠操作时,获取当前应用的内容呈现模式,所述当前应用为所述终端设备中当前正在使用的应用。
应理解,当前应用为终端设备中用户当前正在使用的应用,即当前应用为终端设备中正处于前台运行的应用。其中,内容呈现模式可以包括普通模式,以及可以包括AR模式、VR模式和3D模式中的至少一种。
示例性的,内容呈现模式可以包括普通模式和AR模式,即当前应用可以为含有普通模式和AR模式的应用。例如,当前应用可以为含有普通模式(即2D导航模式)和AR模式(即实景导航模式)的地图应用,或者可以为含有普通模式(即普通2D游戏模式)和AR模式(即融合真实场景的游戏模式)的游戏应用。示例性的,内容呈现模式可以包括普通模式和VR模式,即当前应用可以为含有普通模式和VR模式的应用。例如,当前应用可以为含有普通模式和VR模式的租售房应用,或者可以为含有普通模式和VR模式的商品展示(销售)应用。示例性的,内容获取模式还可以包括普通模式、AR模式和3D模式,即当前应用可以为含有普通模式、AR模式和3D模式的应用,等等。
需要说明的是,当前应用可以为终端设备中直接内置的内置应用,即可以为终端设备的生产商自行开发并直接内置于终端设备中的应用,或者可以为终端设备的生产商与第三方厂商合作开发并直接内置于终端设备中的应用等。例如,当前应用可以为终端设备的生产商自行开发并内置于终端设备中的游戏应用。例如,当前应用可以为终端设备的生产商与第三方厂商合作开发并内置于终端设备中的地图应用。
应理解,当前应用也可以为终端设备从外部获取的第三方应用,即当前应用也可以为第三方厂商开发,并由终端设备从第三方厂商中获取并安装于终端设备中的应用。例如,当前应用也可以为终端设备从第三方厂商下载并安装的地图应用。
具体地,在用户使用终端设备的某一应用(即上述所述的当前应用)的过程中,当用户想要启动当前应用的目标模式(即AR模式、VR模式和3D模式中的至少一种模式)进行内容呈现时,如图1所示,在用户使用终端设备中的地图应用进行导航的过程中,当用户想要启动地图应用的AR模式(即实景导航模式)进行导航内容的呈现时,用户可以对终端设备的折叠屏进行折叠,终端设备则可以根据用户对折叠屏的折叠操作,获取地图应用的内容呈现模式,并可以根据地图应用的内容呈现模式来进行AR模式的启动。
示例性的,终端设备可以通过重力传感器、加速度传感器和陀螺仪中的一个或多个来检测用户对折叠屏所执行的折叠操作。示例性的,终端设备还可以通过设置在折叠屏的弯折部位的角度传感器来检测用户对折叠屏所执行的折叠操作。具体地,角度传感器可以实时测量折叠屏中间弯折部位两端所成的夹角(即实时测量第一显示屏和第二显示屏之间的夹角),当该夹角小于或等于预设角度时,终端设备即可以通过角度传感器检测到用户对折叠屏所执行的折叠操作。其中,该预设角度可以根据实际情况进行具体的设置,本申请实施例对此不作具体限定。
在一些实施例中,终端设备也可以通过设置在折叠屏的弯折部位的物理开关来检测用户对折叠屏所执行的折叠操作。例如,当用户对折叠屏执行折叠操作时,设置在终端设备上的物理开关将被触发打开,终端设备根据物理开关的打开即可以检测到用户对折叠屏所执行的折叠操作。
应理解,上述示例的通过重力传感器、加速度传感器、陀螺仪、角度传感器和物理开关来检测用户对折叠屏所执行的折叠操作仅仅用于解释本申请实施例,不应构成对本申请实施例的具体限定。
需要说明的是,为避免目标模式的误启动,终端设备中可以存储有当前应用对应的第一角度区间,并可结合第一角度区间来确定用户是否想要启动当前应用的目标模式。其中,第一角度区间可以为用户根据实际情况预先设置的角度区间,也可以为终端设备中系统默认设置的角度区间,本申请实施例对此不作任何限定。
在此,终端设备中可以针对不同的应用设置有统一的第一角度区间,也可以针对不同的应用设置有不同的第一角度区间,本申请实施例对此不作任何限定。例如,终端设备中可以为含有AR模式的应用A和应用B以及含有VR模式的应用C设置有统一的第一角度区间[50°,70°]。例如,终端设备中可以为含有AR模式的应用A和应用B设置有第一角度区间[50°,70°],可以为含有VR模式的应用C设置有第一角度区间[60°,80°]。例如,终端设备中可以为含有AR模式的应用A设置有第一角度区间[50°,70°],可以为含有AR模式的应用B设置有第一角度区间[60°,80°],可以为含有VR模式的应用C设置有第一角度区间[80°,90°]。
示例性的,终端设备在检测到用户对折叠屏所执行的折叠操作时,可以获取折叠屏对应的第一折叠角度,并可以根据第一折叠角度和第一角度区间来确定用户是否想要启动当前应用的目标模式。具体地,当第一折叠角度位于第一角度区间内时,终端设备则可以确定用户想要启动当前应用的目标模式,此时终端设备则可以获取当前应用的内容呈现模式,以根据当前应用的内容呈现模式来进行目标模式的启动。
需要说明的是,折叠操作可以是将折叠屏往朝着第一显示屏和第二显示屏相面对的方向进行折叠的操作,也可以是将折叠屏往朝着第一显示屏和第二显示屏相背对的方向进行折叠的操作,本申请实施例对此不作任何限定。为了便于理解,本申请实施例中后续将以折叠操作为将折叠屏往朝着第一显示屏和第二显示屏相面对的方向进行折叠的操作为例进行示例性说明。
如图3所示,折叠屏对应的第一折叠角度是指折叠屏对应的第一显示屏(即图3所示的B屏)和第二显示屏(即图3所示的A屏)之间的夹角α。示例性的,终端设备可以通过重力传感器、加速度传感器和陀螺仪中的一个或多个来获取折叠屏对应的第一折叠角度。示例性的,终端设备还可以通过设置在折叠屏的弯折部位处的角度传感器来获取折叠屏对应的第一折叠角度。
例如,在第一角度区间为[50°,70°]的场景中,用户对折叠屏执行折叠操作后,终端设备则可以通过角度传感器获取折叠屏当前对应的第一折叠角度,即可以通过角度传感器测量折叠屏对应的第一显示屏与第二显示屏之间的夹角,而当终端设备获取的第一折叠角度为60°时,终端设备则可以确定用户当前想要启动当前应用的目标模式,此时终端设备即可以获取终端设备中当前应用的内容呈现模式,以根据当前应用的内容呈现模式来启动当前应用的目标模式。
S202、若所述内容呈现模式为普通模式,则启动所述当前应用的目标模式,并通过所述目标模式呈现所述当前应用的内容,所述目标模式为增强现实AR模式、虚拟现实VR模式和三维3D模式中的至少一种。
应理解,目标模式可以为AR模式、VR模式和3D模式中的任一种模式,也可以为AR模式、VR模式和3D模式中的任意两种模式或者三种模式。例如,当用户想要查看物品A在实际环境B中的安装效果时,用户可以在实际环境B中启动应用C(可进行安装效果模拟的应用)的AR模式和3D模式,以通过将物品A以3D模式模拟展示于实际环境B中来查看物品A在实际环境B中的安装效果。
在此,目标模式是AR模式、VR模式和3D模式中的任一种模式,还是AR模式、VR模式和3D模式中的任意两种模式或者三种模式,可以根据实际情况具体确定。示例性的,在当前应用仅支持普通模式和AR模式时,目标模式即为AR模式;在当前应用仅支持普通模式和3D模式时,目标模式即为3D模式;在当前应用支持普通模式、AR模式、VR模式和3D模式时,目标模式可以由用户事先进行自定义设置(例如可以将目标模式自定义设置为AR模式与3D模式的结合),也可以由终端设备系统默认设置(例如可以将目标模式默认设置为AR模式),还可以由终端设备根据实际场景自动确定(例如可以根据实际场景将目标模式自动确定为VR模式),本申请实施例对此不作具体限定。为了便于理解,本申请实施例后续将以目标模式为AR模式、VR模式和3D模式中的任一种模式为例进行示例性说明。
应理解,在当前应用的内容呈现模式已为AR模式、VR模式或者3D模式时,终端设备则可以保持当前应用的AR模式、VR模式或者3D模式,即可以在折叠后的折叠屏中继续通过AR模式、VR模式或者3D模式来呈现当前应用的内容。而在当前应用的内容呈现模式为普通模式时,终端设备则可以启动当前应用的AR模式或者启动当前应用的VR模式或者启动当前应用的3D模式,以在折叠后的折叠屏中通过AR模式、VR模式或者3D模式来对当前应用的内容进行呈现。
需要说明的是,终端设备可以包括后置的第一摄像装置,即终端设备可以包括后置摄像头。在目标模式为AR模式时,终端设备可以通过第一摄像装置(即后置摄像头)采集当前环境对应的实景图像,以基于实景图像来进行AR模式中内容的呈现。在此,为确保实景图像采集的准确性与有效性,提高AR模式中内容的呈现效果,第一摄像装置可以位于终端设备中被折叠起的部分。具体地,终端设备的折叠屏被折叠后可以形成第一显示屏和第二显示屏,第一显示屏为折叠屏中被折叠起来的区域,第二显示屏为折叠屏中除第一显示屏以外的区域,即第二显示屏为折叠屏中未被折叠起来的区域。第一摄像装置在终端设备中的位置则可以与第一显示屏相对应,即第一摄像装置可以位于终端设备中与第一显示屏相对应的背面。
示例性的,终端设备在确定启动当前应用的AR模式时,可以通过第一摄像装置获取用户当前所在环境的第一实景图像,并可以将所获取的第一实景图像与当前应用中所需呈现的内容进行融合,以将当前应用中所需呈现的内容融合至第一实景图像中,然后可以将融合后的第一实景图像在终端设备的折叠屏中进行呈现。
具体地,在导航场景中,在用户使用地图应用的普通模式(即2D导航模式)进行导航的过程中,当用户想要启动地图应用的AR模式(即实景导航模式)进行导航时,用户可以将终端设备的折叠屏折叠至第一角度区间内的任一角度。终端设备在检测到用户将折叠屏折叠至第一角度区间内的某一角度时,则可以首先通过第一摄像装置获取用户当前所在环境的第一实景图像,然后可以根据所获取的第一实景图像、地图应用中所存储的预设地图以及2D导航模式所确定的预设导航路线,确定导航标识在第一实景图像中的指示位置和指示方向,其中,指示位置可以为第一实景图像中用户当前所在的实时位置,指示方向可以为指示用户行走的方向和/或方位等。然后可以在第一实景图像中的指示位置处以该指示方向显示导航标识,并可以将带有导航标识的第一实景图像呈现于终端设备的折叠屏中,从而通过实景导航更好地帮助用户到达目的位置。其中,导航标识在第一实景图像中的指示方向也可以根据用户的移动方向进行调整。
示例性的,终端设备也可以根据所获取的第一实景图像、地图应用中所存储的预设地图以及用户所要到达的目的位置来确定导航标识在第一实景图像中的指示位置和指示方向。具体地,终端设备可首先根据第一实景图像和预设地图确定出第一实景图像中用户当前所在的位置(即上述的指示位置),然后可以根据用户当前所在的位置和用户所要到达的目的位置规划用户的实景导航路线,并可以根据该实景导航路线在第一实景图像中进行导航标识的呈现。
上述示例的“根据所获取的第一实景图像、地图应用中所存储的预设地图以及2D导航模式所确定的预设导航路线,确定导航标识在第一实景图像中的指示位置和指示方向”,以及“根据所获取的第一实景图像、地图应用中所存储的预设地图以及用户所要到达的目的位置来确定导航标识在第一实景图像中的指示位置和指示方向”仅仅用于解释本申请实施例,不应构成对本申请实施例的限定,本申请实施例中当然可以通过现有的任一确定方式来确定实景导航模式中导航标识的指示位置和指示方向等。
具体地,在游戏场景中,在用户使用游戏应用的普通模式进行游戏的过程中,当用户想要启动游戏应用的AR模式进行游戏时,用户可以将终端设备的折叠屏折叠至第一角度区间内的任一角度。终端设备在检测到用户将折叠屏折叠至第一角度区间内的某一角度时,则可以首先通过第一摄像装置获取用户当前所在环境的第二实景图像,并可以获取游戏应用中游戏当前所对应的虚拟图像(例如游戏画面的前景图像、游戏对象本身等),然后可以将虚拟图像与第二实景图像进行融合,以将虚拟图像融合至第二实景图像中(例如将游戏画面的前景图像融合至第二实景图像中,或者将游戏对象融合至第二实景图像中),并可以将融合有虚拟图像的第二实景图像呈现于终端设备的折叠屏中,使用户可感受在真实环境场景中进行游戏的体验。
具体地,在翻译场景中,在用户使用翻译应用的普通模式进行翻译的过程中,当用户想要启动翻译应用的AR模式进行翻译时,用户可以将终端设备的折叠屏折叠至第一角度区间内的任一角度。终端设备在检测到用户将折叠屏折叠至第一角度区间内的某一角度时,则可以首先通过第一摄像装置获取包含待翻译内容的第三实景图像,并可以对第三实景图像中的待翻译内容进行翻译,得到待翻译内容对应的目标翻译内容,然后可以将目标翻译内容融合至第三实景图像中(例如可以将目标翻译内容融合至第三实景图像中的待翻译内容所在的位置,以取代第三实景图像中的待翻译内容),并可以将融合有目标翻译内容的第三实景图像呈现于终端设备的折叠屏中。
具体地,在拍照场景中,在用户使用相机的普通模式进行拍照的过程中,当用户想要启动相机的AR模式进行拍照时,用户可以将终端设备的折叠屏折叠至第一角度区间内的任一角度。终端设备在检测到用户将折叠屏折叠至第一角度区间内的某一角度时,则可以首先通过第一摄像装置获取用户所需拍摄的第四实景图像,并可以获取AR模式所对应的虚拟物体,然后可以将虚拟物体与第四实景图像进行融合呈现于终端设备的折叠屏中,使得用户在执行拍照操作后,可得到融合有虚拟物体的拍照图像,以满足用户的不同拍照需求,提高拍摄的趣味性,提升用户体验。其中,虚拟物体可以为用户自定义选择的物体,也可以为终端设备在启动AR模式中默认选择的物体,还可以为终端设备根据第三实景图像所对应的当前环境自动匹配的物体,本申请实施例对此不作具体限定。
应理解,终端设备还可以包括前置的第二摄像装置,例如前置摄像头。在此,终端设备可以利用第二摄像装置进行手势识别,并可以根据所识别的手势与当前应用进行交互,以提高应用的交互性能,提升用户体验。示例的,为方便用户通过手势与当前应用进行交互,以提高手势交互的便捷性,第二摄像装置可以设置于终端设备中被折叠起来的部分,即第二摄像装置在终端设备中的位置可以与第一显示屏相对应,也就是说,第二摄像装置可以位于终端设备中与第一显示屏相对应的正面。例如,第二摄像装置可以设置于第一显示屏上方的位置,以提高用户进行手势交互的便捷性,提升用户体验。
例如,在游戏场景中,在用户通过游戏应用的AR模式进行游戏的过程中,用户还可以执行相应的交互手势,终端设备则可以通过前置的第二摄像装置获取用户的交互手势,并可以根据所获取的交互手势来与游戏应用中的游戏对象进行交互等,以解锁更多游戏玩法,提升用户的游戏体验。
示例性的,终端设备在确定启动当前应用的VR模式或者3D模式时,可以首先获取当前应用中当前正在呈现的内容,并可以查找该当前正在呈现的内容所对应的VR内容或者3D内容,然后可以在折叠屏中对所查找到的VR内容或者3D内容进行呈现,以通过VR模式或者3D模式来对当前应用的内容进行呈现。
例如,在物品展示场景中,在用户使用租售房应用的普通模式观看房屋平面图的过程中,当用户想要启动租售房应用的VR模式进行房屋查看时,用户可以将终端设备的折叠屏折叠至第一角度区间内的任一角度。终端设备在检测到用户将折叠屏折叠至第一角度区间内的某一角度时,则可以首先获取租售房应用中当前正在呈现的内容(即用户当前正在观看的房屋平面图),并可查找该房屋平面图对应的VR图(即房屋实景图),然后可以在终端设备的折叠屏中呈现所查找到的房屋实景图,以得到图4a中所示的呈现效果图。
例如,在物品展示场景中,在用户使用物品浏览应用的普通模式观看物品平面图的过程中,当用户想要启动物品浏览应用的3D模式进行物品查看时,用户可以将终端设备的折叠屏折叠至第一角度区间内的任一角度。终端设备在检测到用户将折叠屏折叠至第一角度区间内的某一角度时,则可以首先获取物品浏览应用中当前正在呈现的物品内容(即物品平面图),并可以查找该物品平面图对应的3D图,然后可以在终端设备的折叠屏中呈现所查找到的3D图,以得到图4b中所示的呈现效果图。
在一种可能的实现方式中,在当前应用为直接内置于终端设备中的内置应用时,该内置应用可以直接由终端设备进行操作与控制等,即终端设备可以根据所检测到的折叠操作直接对内置于终端设备中的内置应用进行相应的操作与控制等。也就是说,在用户使用内置于终端设备中的内置应用的过程中,当用户将终端设备的折叠屏折叠至第一角度区间内的任一角度时,终端设备则可以直接获取该内置应用的内容呈现模式,并可以确定该内置应用的内容呈现模式是否为普通模式。而在确定该内置应用的内容呈现模式为普通模式时,终端设备可以直接启动该内置应用的AR模式,或者可以直接启动该内置应用的VR模式,或者可以直接启动该内置应用的3D模式,以通过该内置应用的AR模式、VR模式或者3D模式来进行内容呈现。
在另一种可能的实现方式中,在当前应用为终端设备从外部获取并安装于终端设备中的第三方应用时,终端设备中可以配置有与该第三方应用对接的应用接口。在此,终端设备可以通过所配置的应用接口向该第三方应用发送数据或者指令等,以及接收该第三方应用所返回的数据或者指令等。
示例性的,在用户使用该第三方应用的过程中,当终端设备检测到用户将折叠屏折叠至第一角度区间内的任一角度时,终端设备可以通过所配置的应用接口向该第三方应用发送内容呈现模式的获取指令,并可以通过该应用接口接收该第三方应用根据该获取指令所返回的有关内容呈现模式的数据。终端设备则可以根据所接收到的数据判断该第三方应用的内容呈现模式是否为普通模式。在确定该第三方应用的内容呈现模式为普通模式时,终端设备则可以通过该应用接口向该第三方应用发送启动该第三方应用的AR模式或者启动该第三方应用的VR模式的或者启动该第三方应用的3D模式的启动指令。该第三方应用接收到该应用接口传递的启动指令后,则可以根据该启动指令启动该第三方应用的AR模式、VR模式或者3D模式,以通过该第三方应用的AR模式、VR模式或者3D来进行内容呈现。
在一种可能的实现方式中,在当前应用为终端设备从外部获取并安装于终端设备中的第三方应用时,终端设备中可以配置有与该第三方应用对接的应用接口。在此,终端设备可以通过所配置的应用接口向该第三方应用发送折叠操作所对应的折叠角度等信息,其中,折叠操作是指触发该第三方应用启动AR模式、VR模式或者3D模式的操作,折叠操作所对应的折叠角度是指折叠后的第一显示屏与第二显示屏之间的夹角。
示例性的,在用户使用该第三方应用的过程中,当终端设备检测到用户将折叠屏折叠至第一角度区间内的任一角度时,终端设备则可以通过所配置的应用接口向该第三方应用发送折叠操作所对应的折叠角度等信息,即可以通过所配置的应用接口将第一显示屏与第二显示屏之间的夹角发送至该第三方应用。该第三方应用接收到该应用接口传递的折叠角度等信息后,则可以首先获取该第三方应用的内容呈现模式,并可以判断该内容呈现模式是否为普通模式。在确定该内容呈现模式为普通模式时,该第三方应用则可以启动该第三方应用的AR模式或者启动该第三方应用的VR模式或者启动该第三方应用的3D模式,以通过该第三方应用的AR模式、VR模式或者3D模式来进行内容呈现。
在另一种可能的实现方式中,在当前应用为终端设备从外部获取并安装于终端设备中的第三方应用时,终端设备中可以配置有与该第三方应用对接的应用接口。在此,终端设备可以通过所配置的应用接口向该第三方应用实时发送折叠屏当前所对应的第一角度等信息,其中,折叠屏当前所对应的第一角度是指折叠屏在当前形态中的第一显示屏和第二显示屏之间的夹角,折叠屏当前所对应的第一角度可以为能触发该第三方应用启动AR模式、VR模式或3D模式的折叠操作所对应的角度,也可以为不能触发该第三方应用启动AR模式、VR模式或3D模式的折叠操作所对应的角度。
示例性的,在用户使用该第三方应用的过程中,终端设备可以实时检测折叠屏当前所对应的第一角度等信息,并可以通过所配置的应用接口将所检测到的第一角度等信息实时发送至该第三方应用。该第三方应用接收到该应用接口传递的第一角度后,可以首先判断该第一角度是否位于第一角度区间内,若确定该第一角度位于第一角度区间内,该第三方应用则可以获取该第三方应用的内容呈现模式。然后该第三方应用可以继续判断该内容呈现模式是否为普通模式。在确定该内容呈现模式为普通模式时,该第三方应用则可以启动该第三方应用的AR模式或者启动该第三方应用的VR模式或者启动该第三方应用的3D模式,以通过该第三方应用的AR模式、VR模式或者3D模式来进行内容呈现。
由前述描述可知,折叠屏可以包括被折叠起来的第一显示屏和未被折叠的第二显示屏。在此,为提高当前应用中内容呈现的多样性,以方便用户更好的理解当前应用中所呈现的内容,终端设备可以在第一显示屏中通过目标模式呈现当前应用的第一内容,并可以在第二显示屏中通过普通模式呈现当前应用的第二内容。具体地,终端设备可以在第一显示屏中通过AR模式呈现当前应用的第一内容,并可以在第二显示屏中通过普通模式呈现当前应用的第二内容;或者终端设备可以在第一显示屏中通过VR模式呈现当前应用的第一内容,并可以在第二显示屏中通过普通模式呈现当前应用的第二内容;或者终端设备可以在第一显示屏中通过3D模式呈现当前应用的第一内容,并可以在第二显示屏中通过普通模式呈现当前应用的第二内容。
例如,如图5所示,在导航场景中,终端设备可以在第一显示屏中通过AR模式(即实景导航模式)呈现实景导航内容,并可以在第二显示屏中通过普通模式呈现2D导航内容。即在用户使用地图应用的普通模式进行导航的过程中,当用户想要启动地图应用中的AR模式进行导航时,用户可以将终端设备的折叠屏折叠至第一角度区间内的任一角度。终端设备在检测到用户将折叠屏折叠至第一角度区间内的某一角度时,则可以通过第一摄像装置获取用户当前所在环境的第一实景图像,并可以将基于第一实景图像的实景导航内容呈现于终端设备的第一显示屏中。同时,终端设备还可以将原2D导航内容以普通模式呈现于终端设备的第二显示屏中。其中,第一显示屏中呈现的实景导航内容和第二显示屏中呈现的2D导航内容均可以根据用户的移动进行实时调整,例如,可以根据用户的方向变动进行实景导航内容和2D导航内容中导航标识所对应的指示方向的调整等。
例如,如图6所示,在游戏场景中,终端设备可以在第一显示屏中通过AR模式呈现融合真实场景的游戏画面,并可以在第二显示屏中通过普通模式呈现进行游戏操作和/或控制的虚拟功能按键和/或游戏道具等内容。即在用户使用游戏应用的普通模式进行游戏的过程中,当用户想要启动游戏应用的AR模式进行游戏时,用户可以将终端设备的折叠屏折叠至第一角度区间内的任一角度。终端设备在检测到用户将折叠屏折叠至第一角度区间内的某一角度时,则可以通过第一摄像装置获取用户当前所在环境的第二实景图像,以及获取游戏应用中游戏当前所对应的虚拟图像(即为不包括虚拟功能按键和游戏道具的游戏前景画面或者游戏对象),并可以将融合有游戏前景画面或者游戏对象的第二实景图像呈现于终端设备的第一显示屏中。同时,终端设备还可以将进行游戏操作和/或控制的虚拟功能按键和/或游戏道具等内容以普通模式呈现于终端设备的第二显示屏中。
例如,在翻译场景中,终端设备可以在第一显示屏中通过AR模式呈现融合有目标翻译内容的第三实景图像,并可以在第二显示屏中通过普通模式呈现待翻译内容。即在用户使用翻译应用的普通模式进行翻译的过程中,当用户想要启动翻译应用的AR模式进行翻译时,用户可以将终端设备的折叠屏折叠至第一角度区间内的任一角度。终端设备在检测到用户将折叠屏折叠至第一角度区间内的某一角度时,则可以首先通过第一摄像装置获取包含待翻译内容的第三实景图像,并可以对第三实景图像中的待翻译内容进行翻译,然后可以将翻译得到的目标翻译内容融合至第三实景图像中,并可以将融合有目标翻译内容的第三实景图像呈现于终端设备的第一显示屏中。同时,终端设备还可以将待翻译内容以普通模式呈现于终端设备的第三显示屏中。
例如,在拍照场景中,终端设备可以在第一显示屏中通过AR模式呈现融合有虚拟物体的第四实景图像,并可以在第二显示屏中通过普通模式呈现拍照过程中的预览图像(即不含有虚拟物体的图像)。即在用户使用相机的普通模式进行拍照的过程中,当用户想要启动相机的AR模式进行拍照时,用户可以将终端设备的折叠屏折叠至第一角度区间内的任一角度。终端设备在检测到用户将折叠屏折叠至第一角度区间内的某一角度时,则可以首先通过第一摄像装置获取用户所需拍摄的第四实景图像,并可以获取AR模式所对应的虚拟物体,然后可以将虚拟物体与第四实景图像进行融合呈现于终端设备的第一显示屏中。同时,终端设备还可以将拍照过程中所获取的不含有虚拟物体的预览图像呈现于终端设备的第二显示屏中。
例如,如图7所示,在房屋租售场景中,终端设备可以在第一显示屏中通过VR模式呈现房屋的VR图(即房屋实景图),并可以在第二显示屏中通过普通模式呈现房屋平面图。即在用户使用租售房应用的普通模式观看房屋平面图的过程中,当用户想要启动租售房应用的VR模式进行房屋查看时,用户可以将终端设备的折叠屏折叠至第一角度区间内的任一角度。终端设备在检测到用户将折叠屏折叠至第一角度区间内的某一角度时,则可以首先获取租售房应用中当前正在呈现的房屋平面图,并可以查找该房屋平面图所对应的房屋实景图,然后可以在终端设备的第一显示屏中呈现该房屋实景图。同时,终端设备还可以将原房屋平面图以普通模式呈现于终端设备的第二显示屏中。在此,在房屋实景图的呈现过程中,用户可通过滑动第一显示屏来浏览房屋实景图,此时第二显示屏中的房屋平面图也可以随着用户的浏览视角进行旋转,使得用户更加沉浸的使用VR看房功能,了解房屋特性。
例如,如图8所示,在物品展示场景中,终端设备可以在第一显示屏中通过3D模式呈现物品的3D图,并可以在第二显示屏中通过普通模式呈现物品平面图。即在用户使用物品浏览应用的普通模式观看物品平面图的过程中,当用户想要启动物品浏览应用的3D模式进行3D物品查看时,用户可以将终端设备的折叠屏折叠至第一角度区间内的任一角度。终端设备在检测到用户将折叠屏折叠至第一角度区间内的某一角度时,则可以首先获取物品浏览应用中当前正在呈现的物品平面图,并可以查找该物品平面图所对应的3D图,然后可以在终端设备的第一显示屏中呈现该3D图。同时,终端设备还可以将原物品平面图以普通模式呈现于终端设备的第二显示屏中。
需要说明的是,在当前应用通过AR模式、VR模式或3D模式进行内容呈现的过程中,终端设备还可以通过接收用户的关闭操作来关闭当前应用的AR模式、VR模式或3D模式,以返回至当前应用的普通模式。示例的,用户可以通过将折叠屏恢复至原来的形态来关闭当前应用的AR模式、VR模式或3D模式。例如,用户可以通过将折叠屏恢复至大屏的展开形态来关闭当前应用的AR模式、VR模式或3D模式。即在当前应用的AR模式、VR模式或3D模式的启动过程中,终端设备可以实时获取折叠屏所对应的第二折叠角度,并在确定该第二折叠角度位于预设的第二角度区间内时,则可以关闭当前应用的AR模式、VR模式或3D模式,以通过当前应用的普通模式来对当前应用的内容进行呈现。
例如,在导航场景中,终端设备在确定用户将折叠屏恢复至大屏的展开形态时,则可关闭地图应用的AR模式,并可以通过普通模式对地图应用进行2D导航内容的呈现。例如,在游戏场景中,终端设备在确定用户将折叠屏恢复至大屏的展开形态时,则可关闭游戏应用的AR模式,并可以通过普通模式来对游戏画面、虚拟功能按键以及游戏道具等进行呈现。例如,在房屋租售场景中,终端设备在确定用户将折叠屏恢复至大屏的展开形态时,则可关闭房屋租售应用的VR模式,并可以通过普通模式来对房屋平面图进行呈现,等等。
其中,第二角度区间可以为用户根据实际情况预先设置的角度区间,也可以为终端设备中系统默认设置的角度区间。示例的,第二角度区间可以为折叠屏为大屏的展开形态所对应的角度区间。
示例性的,当前应用的应用界面中也可以设置有关闭AR模式或者关闭VR模式或者关闭3D模式的虚拟按键,用户也可以通过点击或者触摸该虚拟按键来关闭当前应用的AR模式或者关闭当前应用的VR模式或者关闭当前应用的3D模式。即在AR模式、VR模式或者3D模式的启动过程中,终端设备可以实时检测该虚拟按键的触发状态,并在确定该虚拟按键被触发时,则可以关闭当前应用的AR模式、VR模式或者3D模式。
本申请实施例中,在当前应用的使用过程中,当用户想要启动当前应用的目标模式(即AR模式、VR模式和3D模式中的至少一种模式)来进行内容呈现时,用户可以对终端设备的折叠屏进行折叠。此时,终端设备即可以获取当前应用的内容呈现模式,并可以基于当前应用的内容呈现模式和用户对折叠屏所执行的折叠操作快速启动当前应用的目标模式来进行内容呈现,简化AR模式、VR模式或3D模式的启动操作,提高AR模式、VR模式或3D模式的启动速度,从而提高应用通过AR模式、VR模式或3D模式进行内容呈现的呈现速度,提升用户体验。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。
对应于上文实施例所述的内容呈现方法,图9示出了本申请实施例提供的内容呈现装置的结构框图,为了便于说明,仅示出了与本申请实施例相关的部分。
参照图9,该内容呈现装置应用于具有折叠屏的终端设备,该装置可以包括:
模式获取模块901,用于当检测到对所述折叠屏的折叠操作时,获取当前应用的内容呈现模式,所述当前应用为所述终端设备中当前正在使用的应用;
内容呈现模块902,用于若所述内容呈现模式为普通模式,则启动所述当前应用的目标模式,并通过所述目标模式呈现所述当前应用的内容,所述目标模式为增强现实AR模式、虚拟现实VR模式和三维3D模式中的至少一种。
在一种可能的实现方式中,所述折叠屏可以包括第一显示屏和第二显示屏;
所述内容呈现模块902,还用于在所述第一显示屏中通过所述目标模式呈现所述当前应用的第一内容,并在所述第二显示屏中通过所述普通模式呈现所述当前应用的第二内容。
应理解,所述终端设备可以包括后置的第一摄像装置,所述第一显示屏为所述折叠屏中被折起的区域,所述第二显示屏为所述折叠屏中除所述第一显示屏以外的区域,所述第一摄像装置设置于所述终端设备中与所述第一显示屏相对应的位置处。
示例性的,所述内容呈现模块902,可以包括:
第一实景图像获取单元,用于通过所述第一摄像装置获取当前环境对应的第一实景图像,并根据所述第一实景图像、预设地图以及预设导航路线确定导航标识在所述第一实景图像中的指示位置和指示方向;
第一内容呈现单元,用于在所述指示位置以所述指示方向显示所述导航标识,并在所述第一显示屏中呈现带有所述导航标识的所述第一实景图像。
示例性的,所述内容呈现模块902,还可以包括:
第二实景图像获取单元,用于通过所述第一摄像装置获取当前环境对应的第二实景图像,并获取所述当前应用的虚拟图像;
第二内容呈现单元,用于将所述虚拟图像融合至所述第二实景图像,并在所述第一显示屏中呈现融合有所述虚拟图像的所述第二实景图像。
在一种可能的实现方式中,所述终端设备还可以包括前置的第二摄像装置,所述第二摄像装置设置于所述终端设备中与所述第一显示屏相对应的位置处;
所述装置,还可以包括:
手势交互模块,用于通过所述第二摄像装置获取用户的交互手势,并根据所述交互手势与所述当前应用进行交互。
应理解,所述模式获取模块901,可以包括:
第一折叠角度获取单元,用于当检测到对所述折叠屏的折叠操作时,获取所述折叠屏对应的第一折叠角度;
模式获取单元,用于若所述第一折叠角度位于预设的第一角度区间内,则获取所述当前应用的内容呈现模式。
示例性的,所述装置,还可以包括:
第二折叠角度获取模块,用于获取所述折叠屏对应的第二折叠角度;
目标模式关闭模块,用于若所述第二折叠角度位于预设的第二角度区间内,则关闭所述目标模式,并通过所述普通模式呈现所述当前应用的内容。
需要说明的是,上述装置/单元之间的信息交互、执行过程等内容,由于与本申请方法实施例基于同一构思,其具体功能及带来的技术效果,具体可参见方法实施例部分,此处不再赘述。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
图10为本申请一实施例提供的终端设备的结构示意图。如图10所示,该实施例的终端设备10包括:至少一个处理器1000(图10中仅示出一个)、存储器1001以及存储在所述存储器1001中并可在所述至少一个处理器1000上运行的计算机程序1002,所述处理器1000执行所述计算机程序1002时实现上述任意各个内容呈现方法实施例中的步骤。
所述终端设备10可以包括,但不仅限于,处理器1000、存储器1001。本领域技术人员可以理解,图10仅仅是终端设备10的举例,并不构成对终端设备10的限定,终端设备10可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如还可以包括输入输出设备、网络接入设备等。
所述处理器1000可以是中央处理单元(Central Processing Unit,CPU),该处理器1000还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器1001在一些实施例中可以是所述终端设备10的内部存储单元,例如终端设备10的硬盘或内存。所述存储器1001在另一些实施例中也可以是所述终端设备10的外部存储设备,例如所述终端设备10上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,所述存储器1001还可以既包括所述终端设备10的内部存储单元也包括外部存储设备。所述存储器1001用于存储操作系统、应用程序、引导装载程序(BootLoader)、数据以及其他程序等,例如所述计算机程序的程序代码等。所述存储器1001还可以用于暂时地存储已经输出或者将要输出的数据。
如上述,本申请实施例涉及的终端设备可以是手机、平板电脑、可穿戴设备等。以所述终端设备为手机为例。图11示出的是与本申请实施例提供的手机的部分结构的框图。参考图11,手机可以包括:射频(Radio Frequency,RF)电路1110、存储器1120、输入单元1130、显示单元1140、传感器1150、音频电路1160、无线保真(wireless fidelity,WiFi)模块1170、处理器1180、以及电源1190等部件。本领域技术人员可以理解,图11中示出的手机结构并不构成对手机的限定,手机可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
下面结合图11对手机的各个构成部件进行具体的介绍:
RF电路1110可以用于收发信息或通话过程中,信号的接收和发送,特别地,将基站的下行信息接收后,给处理器1180处理;另外,将设计上行的数据发送给基站。通常,RF电路1110可以包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(LowNoise Amplifier,LNA)、双工器等。此外,RF电路1110还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议,包括但不限于全球移动通讯系统(Global System of Mobile communication,GSM)、通用分组无线服务(General PacketRadio Service,GPRS)、码分多址(Code Division Multiple Access,CDMA)、宽带码分多址(Wideband Code Division Multiple Access,WCDMA)、长期演进(Long Term Evolution,LTE))、电子邮件、短消息服务(Short Messaging Service,SMS)等。
存储器1120可以用于存储软件程序以及模块,处理器1180通过运行存储在存储器1120的软件程序以及模块,从而执行手机的各种功能应用以及数据处理。存储器1120可以主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可以存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器1120可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
输入单元1130可以用于接收输入的数字或字符信息,以及产生与手机的用户设置以及功能控制有关的键信号输入。具体地,输入单元1130可以包括触控面板1131以及其他输入设备1132。触控面板1131,也称为触摸屏,可以收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1131上或在触控面板1131附近的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触控面板1131可以包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器1180,并能接收处理器1180发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1131。除了触控面板1131,输入单元1130还可以包括其他输入设备1132。具体地,其他输入设备1132可以包括但不限于,物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
显示单元1140可以用于显示由用户输入的信息或提供给用户的信息以及手机的各种菜单。显示单元1140可以包括显示面板1141,可选的,可以采用液晶显示器(LiquidCrystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板1141。进一步的,触控面板1131可以覆盖显示面板1141,当触控面板1131检测到在其上或附近的触摸操作后,传送给处理器1180以确定触摸事件的类型,随后处理器1180根据触摸事件的类型在显示面板1141上提供相应的视觉输出。虽然在图11中,触控面板1131与显示面板1141是作为两个独立的部件来实现手机的输入和输出功能,但是在某些实施例中,可以将触控面板1131与显示面板1141集成而实现手机的输入和输出功能。
在一些实施例中,显示单元1140可以包括1个或N个显示屏,其中,N为大于1的正整数。
在一些实施例中,当显示面板采用OLED、AMOLED、FLED等材料时,上述显示屏可以被弯折。这里,上述显示屏可以被弯折是指显示屏可以在任意部位沿任意轴线被弯折到任意角度,并可以在该角度保持,例如,显示屏可以从中部左右对折,也可以从中部上下对折。本申请实施例中,可以将被弯折的显示屏称为折叠屏。其中,该折叠屏可以是一块屏幕,也可以是多块屏幕拼凑在一起组合成的显示屏,在此不做限定。显示屏还可以是一种柔性屏,具有柔韧性强和可弯曲的特点,可以给用户提供基于可弯折特性的新交互方式,可以满足用户对于折叠屏手机的更多需求。对于配置有折叠屏的手机而言,手机上的折叠屏可以随时在折叠形态下的小屏和展开形态下的大屏之间切换。
示例性的,折叠屏可以至少包括两种物理形态:展开形态和折叠形态。展开形态,即指可以从中部左右对折的该折叠屏的中间弯折部位的左右两端(如果折叠屏是上下折叠,则是折叠屏的中间弯折部位的上下两端)所成的夹角在180度和第一角度之间,其中,第一角度大于0度且小于180度,例如第一角度可以是90度)。折叠形态,即指该折叠屏的中间弯折部位的左右两端(如果折叠屏是上下折叠,则是折叠屏的中间弯折部位的上下两端)所成的夹角在0度和第一角度之间。本申请实施例中,进入展开形态后的该折叠屏的显示区域可以被划分为第一显示屏和第二显示屏。该折叠屏在展开形态下可以朝着第一显示屏和第二显示屏相面对的方向折叠,也可以朝着第一显示屏和第二显示屏相背对的方向折叠。在一些实施例中,折叠屏中部弯折部位的左右两端(如果折叠屏是上下折叠,则是折叠屏的中间弯折部位的上下两端)所成的夹角可以在0度到+180度之间。例如,折叠屏可以往朝着第一显示屏和第二显示屏相面对的方向弯折成夹角为30度的折叠形态,也可以往朝着第一显示屏和第二显示屏相背对的方向弯折成夹角30度的折叠形态。
在一些实施例中,该手机可以通过重力传感器、加速度传感器和陀螺仪中的一个或多个,判断该折叠屏处于折叠形态还是处于展开形态。该手机还可以通过重力传感器、加速度触感器和陀螺仪,检测该折叠屏的弯折的夹角,然后,该手机可以根据该弯折的夹角,判断出该折叠屏处于折叠形态还是处于展开形态。该手机还可以通过重力传感器、加速度传感器和陀螺仪中的一个或多个,判断折叠形态下,该折叠屏的朝向,进而确定出显示系统所输出界面内容的显示区域。例如,当该折叠屏的第一显示屏相对于地面朝向上方时,该手机可以将显示系统输出的界面内容,显示在第一显示屏上。当该折叠屏的第二显示屏相对于地面朝向上方时,该手机可以将显示系统输出的界面内容,显示在第二显示屏上。
在一些实施例中,该手机还可以包括角度传感器(图11中未示出),该角度传感器可以设置在该折叠屏的弯折部位处。该手机可以通过设置在该折叠屏的弯折部位的角度传感器(图11中未示出),测量该折叠屏中间弯折部位两端所成的夹角,当该夹角大于或等于第一角度时,该手机可以通过角度传感器识别出该折叠屏进入展开状态。当该夹角小于或等于第一角度时,该手机可以通过角度传感器识别出该折叠屏进入折叠形态。
在其他一些实施例中,该手机也可以通过设置在该折叠屏的弯折部位的物理开关,识别出该折叠屏是否处于折叠形态。例如,当手机接收到用户对该折叠屏的折叠操作,该设置在该手机上的物理开关被触发打开,该手机可以确定该折叠屏处于折叠形态。当该手机接收到用户对该折叠屏的展开操作,该设置在该手机上的物理开关被触发关闭,手机可以确定该折叠屏处于展开形态。上述示例仅仅用于解释本申请,不应构成限定。
手机还可以包括至少一种传感器1150,比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板1141的亮度,接近传感器可在手机移动到耳边时,关闭显示面板1141和/或背光。作为运动传感器的一种,加速计传感器可以检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于手机还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
音频电路1160、扬声器1161,传声器1162可提供用户与手机之间的音频接口。音频电路1160可将接收到的音频数据转换后的电信号,传输到扬声器1161,由扬声器1161转换为声音信号输出;另一方面,传声器1162将收集的声音信号转换为电信号,由音频电路1160接收后转换为音频数据,再将音频数据输出处理器1180处理后,经RF电路1110以发送给比如另一手机,或者将音频数据输出至存储器1120以便进一步处理。
WiFi属于短距离无线传输技术,手机通过WiFi模块1170可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图11示出了WiFi模块1170,但是可以理解的是,其并不属于手机的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
处理器1180是手机的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器1120内的软件程序和/或模块,以及调用存储在存储器1120内的数据,执行手机的各种功能和处理数据,从而对手机进行整体监控。可选的,处理器1180可包括一个或多个处理单元;优选的,处理器1180可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器1180中。
手机可以还包括给各个部件供电的电源1190(比如电池),优选的,电源可以通过电源管理系统与处理器1180逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
尽管未示出,手机还可以包括摄像头。可选地,摄像头在手机的上的位置可以为前置的,也可以为后置的,本申请实施例对此不作限定。
可选地,手机可以包括单摄像头、双摄像头或三摄像头等,本申请实施例对此不作限定。
例如,手机可以包括三摄像头,其中,一个为主摄像头、一个为广角摄像头、一个为长焦摄像头。
可选地,当手机包括多个摄像头时,这多个摄像头可以全部前置,或者全部后置,或者一部分前置、另一部分后置,本申请实施例对此不作限定。
另外,尽管未示出,手机还可以包括蓝牙模块等,在此不再赘述。
图12是本申请实施例的手机的软件结构示意图。以手机操作系统为Android系统为例,在一些实施例中,将Android系统分为四层,分别为应用程序层、应用程序框架层(framework,FWK)、系统层以及硬件抽象层,层与层之间通过软件接口通信。
如图12所示,所述应用程序层可以一系列应用程序包,应用程序包可以包括短信息,日历,相机,视频,导航,图库,通话等应用程序。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层可以包括一些预先定义的函数,例如用于接收应用程序框架层所发送的事件的函数。
如图12所示,应用程序框架层可以包括窗口管理器、资源管理器以及通知管理器等。窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
应用程序框架层还可以包括:
视图系统,所述视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供手机的通信功能。例如通话状态的管理(包括接通,挂断等)。
系统层可以包括多个功能模块。例如:传感器服务模块,物理状态识别模块,三维图形处理库(例如:OpenGL ES)等。
传感器服务模块,用于对硬件层各类传感器上传的传感器数据进行监测,确定手机的物理状态;
物理状态识别模块,用于对用户手势、人脸等进行分析和识别;
三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
系统层还可以包括:
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
硬件抽象层是硬件和软件之间的层。硬件抽象层可以包括显示驱动,摄像头驱动,传感器驱动等,用于驱动硬件层的相关硬件,如显示屏、摄像头、传感器等。
本申请实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时可实现上述各个内容呈现方法实施例中的步骤。
本申请实施例提供了一种计算机程序产品,当计算机程序产品在终端设备上运行时,使得终端设备执行时可实现上述各个内容呈现方法实施例中的步骤。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实现上述实施例方法中的全部或部分流程,可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读存储介质至少可以包括:能够将计算机程序代码携带到终端设备的任何实体或装置、记录介质、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random AccessMemory)、电载波信号、电信信号以及软件分发介质。例如U盘、移动硬盘、磁碟或者光盘等。在某些司法管辖区,根据立法和专利实践,计算机可读存储介质不可以是电载波信号和电信信号。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
在本申请所提供的实施例中,应该理解到,所揭露的装置/终端设备和方法,可以通过其它的方式实现。例如,以上所描述的装置/终端设备实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
以上所述实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围,均应包含在本申请的保护范围之内。

Claims (13)

1.一种内容呈现方法,其特征在于,应用于具有折叠屏的终端设备,所述折叠屏包括第一显示屏和第二显示屏,所述方法包括:
在所述折叠屏处于展开状态下,所述终端设备以第一模式显示第一应用;
响应于对所述折叠屏的折叠操作,所述折叠屏处于折叠状态;
在所述折叠屏处于折叠状态下,若所述第一模式为普通模式,则在所述第一显示屏中通过目标模式显示所述第一应用的第一内容,并在所述第二显示屏中通过所述普通模式显示所述第一应用的第二内容;所述目标模式为增强现实AR模式、虚拟现实VR模式和三维3D模式中的至少一种。
2.根据权利要求1所述的方法,其特征在于,还包括:
在所述折叠屏处于折叠状态下,若所述第一模式为所述目标模式,则在所述第一显示屏和所述第二显示屏中继续通过所述目标模式显示所述第一应用。
3.根据权利要求1所述的方法,其特征在于,所述终端设备包括第一摄像装置,所述第一显示屏为所述折叠屏中被折起的区域,所述第二显示屏为所述折叠屏中除所述第一显示屏以外的区域,所述第一摄像装置设置于所述终端设备中与所述第一显示屏相背的位置处,所述第一摄像头与所述第一显示屏位于所述终端设备不同的表面。
4.根据权利要求3所述的方法,其特征在于,在所述目标模式为AR模式时,所述在所述第一显示屏中通过所述目标模式显示所述第一应用的第一内容包括:
通过所述第一摄像装置获取当前环境对应的第二实景图像,并获取所述第一应用对应的虚拟图像;
将所述虚拟图像融合至所述第二实景图像,并在所述第一显示屏中显示融合有所述虚拟图像的所述第二实景图像。
5.根据权利要求1至4任一项所述的方法,其特征在于,所述终端设备还包括第二摄像装置,所述第二摄像装置与所述第一显示屏位于所述终端设备共同的表面;
所述方法还包括:
通过所述第二摄像装置获取用户的交互手势,并根据所述交互手势与所述第一应用进行交互。
6.根据权利要求1至5任一项所述的方法,其特征在于,在所述第一显示屏中通过所述目标模式显示所述第一应用的第一内容之后,所述方法包括:
响应于对所述折叠屏的展开操作,所述折叠屏处于展开状态;
关闭所述目标模式,并通过所述普通模式在所述第一显示屏和所述第二显示屏中显示所述第一应用。
7.根据权利要求1至6任一项所述的方法,其特征在于,所述第一应用为地图应用;
所述在所述第一显示屏中通过所述目标模式显示所述第一应用的第一内容,包括:在所述第一显示屏中通过AR模式、VR模式或3D模式显示实景导航内容;
所述在所述第二显示屏中通过所述普通模式显示所述第一应用的第二内容,包括:在所述第二显示屏中通过普通模式显示2D导航内容。
8.根据权利要求7所述的方法,其特征在于,在所述目标模式为AR模式时,所述在所述第一显示屏中通过所述目标模式显示所述第一应用的第一内容包括:
通过所述第一摄像装置获取当前环境对应的第一实景图像,并根据所述第一实景图像、预设地图以及预设导航路线确定导航标识在所述第一实景图像中的指示位置和指示方向;
在所述指示位置以所述指示方向显示所述导航标识,并在所述第一显示屏中呈现带有所述导航标识的所述第一实景图像。
9.根据权利要求1至6任一项所述的方法,其特征在于,所述第一应用为游戏应用;
所述在所述第一显示屏中通过所述目标模式显示所述第一应用的第一内容,包括:在所述第一显示屏中通过AR模式、VR模式或3D模式显示融合真实场景的游戏画面;
所述在所述第二显示屏中通过所述普通模式显示所述第一应用的第二内容,包括:在所述第二显示屏中通过普通模式显示虚拟功能按键或游戏道具。
10.根据权利要求1至6任一项所述的方法,其特征在于,所述第一应用为翻译应用;
所述在所述第一显示屏中通过所述目标模式显示所述第一应用的第一内容,包括:在所述第一显示屏中通过AR模式、VR模式或3D模式显示融合有目标翻译内容的实景图像;
所述在所述第二显示屏中通过所述普通模式显示所述第一应用的第二内容,包括:在所述第二显示屏中通过普通模式显示待翻译内容。
11.根据权利要求1至6任一项所述的方法,其特征在于,所述第一应用为拍照应用;
所述在所述第一显示屏中通过所述目标模式显示所述第一应用的第一内容,包括:在所述第一显示屏中通过AR模式、VR模式或3D模式显示融合有虚拟物体的实景图像;
所述在所述第二显示屏中通过所述普通模式显示所述第一应用的第二内容,包括:在所述第二显示屏中通过普通模式显示不包含虚拟物体的预览图像。
12.一种终端设备,包括存储器、处理器以及存储在所述存储器中的计算机指令,所述处理器执行所述计算机指令,以使得所述终端设备实现如权利要求1至11任一项所述的方法。
13.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时,使得计算机实现如权利要求1至11任一项所述的方法。
CN202210301743.7A 2020-02-28 2020-02-28 内容呈现方法、装置、终端设备及计算机可读存储介质 Pending CN114816617A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210301743.7A CN114816617A (zh) 2020-02-28 2020-02-28 内容呈现方法、装置、终端设备及计算机可读存储介质

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202210301743.7A CN114816617A (zh) 2020-02-28 2020-02-28 内容呈现方法、装置、终端设备及计算机可读存储介质
CN202010133711.1A CN111338737B (zh) 2020-02-28 2020-02-28 内容呈现方法、装置、终端设备及计算机可读存储介质

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN202010133711.1A Division CN111338737B (zh) 2020-02-28 2020-02-28 内容呈现方法、装置、终端设备及计算机可读存储介质

Publications (1)

Publication Number Publication Date
CN114816617A true CN114816617A (zh) 2022-07-29

Family

ID=71182036

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202010133711.1A Active CN111338737B (zh) 2020-02-28 2020-02-28 内容呈现方法、装置、终端设备及计算机可读存储介质
CN202210301743.7A Pending CN114816617A (zh) 2020-02-28 2020-02-28 内容呈现方法、装置、终端设备及计算机可读存储介质

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202010133711.1A Active CN111338737B (zh) 2020-02-28 2020-02-28 内容呈现方法、装置、终端设备及计算机可读存储介质

Country Status (2)

Country Link
CN (2) CN111338737B (zh)
WO (1) WO2021169992A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111338737B (zh) * 2020-02-28 2022-04-08 华为技术有限公司 内容呈现方法、装置、终端设备及计算机可读存储介质
CN114241168A (zh) * 2021-12-01 2022-03-25 歌尔光学科技有限公司 显示方法、显示设备及计算机可读存储介质
CN114827471A (zh) * 2022-04-28 2022-07-29 维沃移动通信有限公司 拍摄方法、显示方法和拍摄装置、显示装置
CN117369756A (zh) * 2022-06-30 2024-01-09 华为技术有限公司 一种折叠屏的显示方法以及相关设备
CN117478859A (zh) * 2022-07-21 2024-01-30 华为技术有限公司 一种信息显示方法和电子设备

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130077228A1 (en) * 2011-09-22 2013-03-28 Jeffrey A. Batio Portable computer assembly
US20140328013A1 (en) * 2013-05-05 2014-11-06 Gerald Lee Heikes Music book
CN106382937A (zh) * 2015-08-25 2017-02-08 深圳视景文化科技有限公司 一种导航方法及导航终端
KR102423145B1 (ko) * 2016-04-12 2022-07-21 삼성전자주식회사 플렉서블 디바이스 및 플렉서블 디바이스의 동작 방법
CN107977080B (zh) * 2017-12-05 2021-03-30 北京小米移动软件有限公司 产品使用展示方法及装置
CN108762875A (zh) * 2018-05-30 2018-11-06 维沃移动通信(深圳)有限公司 一种应用程序显示方法及终端
CN109542380A (zh) * 2018-11-26 2019-03-29 Oppo广东移动通信有限公司 显示模式的控制方法、装置、存储介质及终端
CN110187946A (zh) * 2019-05-06 2019-08-30 珠海格力电器股份有限公司 一种应用程序适配方法、装置及存储介质
CN111338737B (zh) * 2020-02-28 2022-04-08 华为技术有限公司 内容呈现方法、装置、终端设备及计算机可读存储介质

Also Published As

Publication number Publication date
WO2021169992A1 (zh) 2021-09-02
CN111338737B (zh) 2022-04-08
CN111338737A (zh) 2020-06-26

Similar Documents

Publication Publication Date Title
CN111338737B (zh) 内容呈现方法、装置、终端设备及计算机可读存储介质
US9262867B2 (en) Mobile terminal and method of operation
JP2021525430A (ja) 表示制御方法及び端末
CN111309209B (zh) 快速打开应用或应用功能的方法、装置及终端设备
CN109917995B (zh) 一种对象处理方法及终端设备
CN108769374B (zh) 一种图像管理方法及移动终端
CN108632413B (zh) 一种拍照方法及移动终端
CN110109593A (zh) 一种截屏方法及终端设备
CN110795007B (zh) 一种获取截图信息的方法及装置
CN108287655A (zh) 一种界面显示方法、界面显示装置及移动终端
CN111368114B (zh) 信息展示方法、装置、设备及存储介质
CN104238900B (zh) 一种页面定位方法及装置
CN111026350A (zh) 一种显示控制方法及电子设备
CN109032468A (zh) 一种调节设备参数的方法及终端
CN110417960A (zh) 一种可折叠触摸屏的折叠方法及电子设备
CN108388396A (zh) 一种界面切换方法及移动终端
CN109358931A (zh) 一种界面显示方法及终端
CN109901976A (zh) 一种应用程序的管理方法及终端设备
CN109062634A (zh) 一种应用启动方法及移动终端
CN111061530A (zh) 一种图像处理方法、电子设备及存储介质
EP4047464A1 (en) Screenshot display method and apparatus, and terminal device
CN109167872A (zh) 一种应用程序开启方法及移动终端
CN109582266A (zh) 一种显示屏操作方法及终端设备
CN113031838B (zh) 屏幕录制方法、装置及电子设备
CN108650463B (zh) 一种拍照方法及移动终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination