CN107562316A - 界面展示方法、装置及终端 - Google Patents

界面展示方法、装置及终端 Download PDF

Info

Publication number
CN107562316A
CN107562316A CN201710755732.5A CN201710755732A CN107562316A CN 107562316 A CN107562316 A CN 107562316A CN 201710755732 A CN201710755732 A CN 201710755732A CN 107562316 A CN107562316 A CN 107562316A
Authority
CN
China
Prior art keywords
image
view field
terminal
touch control
control operation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710755732.5A
Other languages
English (en)
Other versions
CN107562316B (zh
Inventor
米岚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201710755732.5A priority Critical patent/CN107562316B/zh
Publication of CN107562316A publication Critical patent/CN107562316A/zh
Application granted granted Critical
Publication of CN107562316B publication Critical patent/CN107562316B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Controls And Circuits For Display Device (AREA)

Abstract

本发明公开了一种界面展示方法、装置及终端,属于计算机领域。所述方法包括:获取用于在终端的前面板中显示的目标界面;确定目标界面中显示在投影区域中的第一图像,以及显示在显示屏中的第二图像,第一图像和第二图像拼接构成目标界面;通过终端的投影组件将第一图像投影在投影区域中,并在显示屏中显示所述第二图像;解决了终端通过带有缺口的矩形形状的显示屏展示目标界面时,终端将丢失目标界面中的部分图像的问题,能够在保证高屏占比的情况下展示完整的目标界面,提高了终端的界面的展示效果。

Description

界面展示方法、装置及终端
技术领域
本发明实施例涉及界面显示领域,特别涉及一种界面展示方法、装置及终端。
背景技术
随着手机、平板电脑和MP4等具有显示功能的终端的不断发展,用户使用终端进行娱乐和工作的时间也越来越长。为了更好的显示效果,用户在终端的前面板尺寸确定的情况下,通常愿意使用屏占比较高的终端。
相关技术中,终端的生产厂商针对屏占比的设计目标是1,即显示屏面积等于前面板面积。然而,由于前面板中需要安装一些例如前置摄像头的必要的硬件组件。因此,生产厂商需要在整块前面板作为显示屏的基础上,在显示屏中预留一块用于设置安装前置摄像头等必要的硬件组件的非屏幕区域。由于该非屏幕区域的出现,显示屏的形状呈现为带有缺口的矩形形状。
然而,终端通过带有缺口的矩形形状的显示屏展示目标界面时,终端将丢失目标界面中的部分图像,影响界面的显示效果。
发明内容
本发明提供了一种界面展示方法、装置及终端,可以用于解决终端通过带有缺口的矩形形状的显示屏展示目标界面时,终端将丢失目标界面中的部分图像,影响界面的显示效果的问题。所述技术方案如下:
第一方面,提供了一种界面展示方法,用于终端中,所述终端的前面板包括显示屏和投影区域,所述方法包括:
获取用于在所述终端的前面板中显示的目标界面;
确定所述目标界面中显示在所述投影区域中的第一图像,以及显示在所述显示屏中的第二图像,所述第一图像和所述第二图像拼接构成所述目标界面;
通过所述终端的投影组件将所述第一图像投影在所述投影区域中,并在所述显示屏中显示所述第二图像。
第二方面,提供了一种界面展示装置,应用于终端中,所述终端的前面板包括显示屏和投影区域,所述装置包括:
界面获取模块,用于获取用于在所述终端的前面板中显示的目标界面;
图像确定模块,用于确定所述目标界面中显示在所述投影区域中的第一图像,以及显示在所述显示屏中的第二图像,所述第一图像和所述第二图像拼接构成所述目标界面;
图像显示模块,用于通过所述终端的投影组件将所述第一图像投影在所述投影区域中,并在所述显示屏中显示所述第二图像。
第三方面,提供了一种终端,所述终端包括:处理器、与所述处理器相连的存储器,以及存储在所述存储器上的程序指令,所述处理器执行所述程序指令时实现如第一方面所述的界面展示方法。
第四方面,一种计算机可读介质,其上存储有程序指令,所述程序指令被处理器执行时实现如第一方面所述的界面展示方法。
本发明实施例提供的技术方案带来的有益效果是:
通过获取用于在终端的前面板中显示的目标界面;确定目标界面中显示在投影区域中的第一图像,以及显示在显示屏中的第二图像,第一图像和第二图像拼接构成目标界面;通过终端的投影组件将第一图像投影在投影区域中,并在显示屏中显示第二图像。由于本发明实施例应用在前面板包括显示屏和投影区域的终端中,在前面板展示界面前分别确定了投影在投影区域中的第一图像和显示在显示屏中的第二图像。随后,终端通过投影组件将目标界面中的第一图像投影在投影区域中,并且在显示屏中显示第二图像。其中,该投影区域是前面板中的非屏幕区域,即显示屏的缺口区域,由此,第一图像和第二图像拼接显示为目标界面。因此,本发明实施例可以用于解决终端通过带有缺口的矩形形状的显示屏展示目标界面时,终端丢失目标界面中的部分图像的问题;并能够在保证高屏占比的情况下展示完整的目标界面,提高了终端的界面的展示效果。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了本发明一个示例性实施例提供的终端100的结构方框图;
图2示出了本发明一个示例性实施例提供的终端100的另一种结构方框图;
图3A是本发明一个实施例提供的一种曲面屏的示意图;
图3B是本发明一个实施例提供的一种异型屏的示意图;
图3C是本发明一个实施例提供的另一种异型屏的示意图;
图3D是本发明一个实施例提供的又一种异型屏的示意图;
图3E是本发明一个实施例提供的另一种异型屏的示意图;
图4A示出了本发明的一个示例性实施例提供的一种界面展示方法的流程图;
图4B示出了本发明实施例涉及的一种界面展示的示意图;
图5A示出了本发明的一个示例性实施例提供的一种界面展示方法的流程图;
图5B示出了本发明实施例涉及的一种前面板的区域划分的示意图;
图6A示出了本发明的一个示例性实施例提供的一种目标界面展示方法的流程图;
图6B是基于图6A所示的实施例提供的一种目标界面的交互示意图;
图7示出了本发明的一个示例性实施例提供的另一种目标界面展示方法的流程图;
图8示出了本发明的一个示例性实施例提供的另一种目标界面展示方法的流程图;
图9是本发明一个实施例提供的一种界面展示装置的结构方框图;
图10示出了本发明一个实施例提供的另一种界面展示装置的结构方框图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。
请参考图1和图2,其示出了本发明一个示例性实施例提供的终端100的结构方框图。该终端100可以是手机、平板电脑、笔记本电脑和电子书等。本申请中的终端100可以包括一个或多个如下部件:处理器110、存储器120和触摸显示屏130。
处理器110可以包括一个或者多个处理核心。处理器110利用各种接口和线路连接整个终端100内的各个部分,通过运行或执行存储在存储器120内的指令、程序、代码集或指令集,以及调用存储在存储器120内的数据,执行终端100的各种功能和处理数据。可选地,处理器110可以采用数字信号处理(Digital Signal Processing,DSP)、现场可编程门阵列(Field-Programmable GateArray,FPGA)、可编程逻辑阵列(Programmable Logic Array,PLA)中的至少一种硬件形式来实现。处理器110可集成中央处理器(Central ProcessingUnit,CPU)、图像处理器(Graphics Processing Unit,GPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作系统、用户界面和应用程序等;GPU用于负责触摸显示屏130所需要显示的内容的渲染和绘制;调制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集成到处理器110中,单独通过一块芯片进行实现。
存储器120可以包括随机存储器(Random Access Memory,RAM),也可以包括只读存储器(Read-Only Memory)。可选地,该存储器120包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器120可用于存储代码、代码集、指令、指令集或程序。存储器120可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等;存储数据区可存储根据终端100的使用所创建的数据(比如音频数据、电话本)等。
以操作系统为安卓(Android)系统为例,存储器120中存储的程序和数据如图1所示,存储器120中存储有Linux内核层220、系统运行库层240、应用框架层260和应用层280。Linux内核层220为终端100的各种硬件提供了底层的驱动,如显示驱动、音频驱动、摄像头驱动、蓝牙驱动、Wi-Fi驱动、电源管理等。系统运行库层240通过一些C/C++库来为Android系统提供了主要的特性支持。如SQLite库提供了数据库的支持,OpenGL/ES库提供了3D绘图的支持,Webkit库提供了浏览器内核的支持等。在系统运行库层240中还提供有Android运行时库242(Android Runtime),它主要提供了一些核心库,能够允许开发者使用Java语言来编写Android应用。应用框架层260提供了构建应用程序时可能用到的各种API,开发者也可以通过使用这些API来构建自己的应用程序,比如活动管理、窗口管理、视图管理、通知管理、内容提供者、包管理、通话管理、资源管理以及定位管理。应用层280中运行有至少一个应用程序,这些应用程序可以是操作系统自带的联系人程序、短信程序、时钟程序或相机应用等;也可以是第三方开发者所开发的应用程序,比如即时通信程序或相片美化程序等。
以操作系统为IOS系统为例,存储器120中存储的程序和数据如图2所示,IOS系统包括:核心操作系统层320(Core OS layer)、核心服务层340(Core Services layer)、媒体层360(Media layer)、可触摸层380(Cocoa Touch Layer)。核心操作系统层320包括了操作系统内核、驱动程序以及底层程序框架,这些底层程序框架提供更接近硬件的功能,以供位于核心服务层340的程序框架所使用。核心服务层340提供给应用程序所需要的系统服务和/或程序框架,比如基础(Foundation)框架、账户框架、广告框架、数据存储框架、网络连接框架、地理位置框架、运动框架等等。媒体层360为应用程序提供有关视听方面的接口,如图形图像相关的函数接口、音频技术相关的接口、视频技术相关的函数接口、音视频传输技术的无线播放(AirPlay)接口等。可触摸层380为应用程序开发提供了各种常用的界面相关的框架,可触摸层380负责用户在终端100上的触摸交互操作。比如本地通知服务、远程推送服务、广告框架、游戏工具框架、消息用户界面接口(User Interface,UI)框架、用户界面UIKit框架、地图框架等等。
在图2所示出的框架中,与大部分应用程序有关的框架包括但不限于:核心服务层340中的基础框架和可触摸层380中的UIKit框架。基础框架提供许多基本的对象类和数据类型,为所有应用程序提供最基本的系统服务,和UI无关。而UIKit框架提供的类是基础的UI类库,用于创建基于触摸的用户界面,iOS应用程序可以基于UIKit框架来提供UI,所以它提供了应用程序的基础架构,用于构建用户界面,绘图、处理和用户交互事件,响应手势等等。
触摸显示屏130用于接收用户使用手指、触摸笔等任何适合的物体在其上或附近的触摸操作,以及显示各个应用程序的用户界面。触摸显示屏130通常设置在终端130的前面板。触摸显示屏130可被设计成为异型屏。触摸显示屏130还可被设计成为异型屏与曲面屏的结合,本实施例对此不加以限定。其中:
曲面屏
曲面屏是指触摸显示屏130的屏幕区域不处于一个平面内的屏幕设计。一般的,曲面屏的至少存在这样一个截面:该截面呈弯曲形状,且曲面屏在沿垂直平行于该截面的任意平面方向上的投影为平面的屏幕设计其中,该弯曲形状可以是U型。可选地,曲面屏是指至少一个侧边是弯曲形状的屏幕设计方式。可选地,曲面屏是指触摸显示屏130的至少一个侧边延伸覆盖至终端100的中框上。由于触摸显示屏130的侧边延伸覆盖至终端100的中框,也即将原本不具有显示功能和触控功能的中框覆盖为可显示区域和/或可操作区域,从而使得使用曲面屏的终端具有了更高的屏占比。可选地,如图3A所示的例子中,曲面屏是指左右两个侧边42是弯曲形状的屏幕设计;或者,曲面屏是指上下两个侧边是弯曲形状的屏幕设计;或者,曲面屏是指上、下、左、右四个侧边均为弯曲形状的屏幕设计。在可选的实施例中,曲面屏采用具有一定柔性的触摸屏材料制备。
异型屏
异型屏是外观形状为不规则形状的触摸显示屏,不规则形状不是矩形或圆角矩形。可选地,异型屏是指在矩形或圆角矩形的触摸显示屏130上设置有凸起、缺口和/或挖孔的屏幕设计。可选地,该凸起、缺口和/或挖孔可以位于触摸显示屏130的边缘、屏幕中央或两者均有。当凸起、缺口和/或挖孔设置在一条侧边的边缘时,可以设置在该侧边的边缘的中间位置或两端;当凸起、缺口和/或挖孔设置在屏幕中央时,可以设置在屏幕的正上方区域、左上方区域、左侧中部区域、左下方区域、正下方区域、右下方区域、右侧中部区域、右上方区域中的一个或多个区域中。当设置在多个区域中时,凸起、缺口和挖孔可以集中分布,也可以分散分布;可以对称分布,也可以不对称分布。可选地,该凸起、缺口和/或挖孔的数量也不限。
由于异型屏将触摸显示屏的上额区和/或下额区覆盖为可显示区域和/或可操作区域,使得触摸显示屏在终端的前面板上占据更多的空间,所以使用异型屏的终端也具有更大的屏占比。在一些实施例中,缺口和/或挖孔所在区域的被设置为投影区域,该投影区域中用于容纳至少一种前面板部件,该前面板部件包括投影组件、摄像头、指纹传感器、接近光传感器、距离传感器、听筒、环境光亮度传感器、物理按键、压力传感器或温度传感器(热力传感器)中的至少一种。在终端的前面板目标界面时,投影组件向投影区域中投射用于显示的图像。需要说明的是,接近光传感器和环境光亮度传感器的功能可以由光感器来替代实现。
可选地,该屏幕中设置有缺口和/或挖孔时,该缺口和/或挖孔所形成一开槽,该开槽的底面可以是玻璃盖板,该底面与触摸显示屏所在平面平行。当前面板部件中包括投影组件时,该投影组件可以设置在开槽的底面中,投影图像从终端内部向外投射到底面的盖板玻璃上。可选地,该投影组件还可以设置在开槽的侧面中,从开槽的侧面向盖板玻璃(投影区域)投射出投影图像。
示例性的,该缺口可以设置在一个或多个边缘上,该缺口可以是半圆形缺口、直角矩形缺口、圆角矩形缺口、多边形缺口或不规则形状缺口。示意性的如图3B所示的例子中,异型屏可以是在触摸显示屏130的上边缘的中央位置设置有半圆形缺口43的屏幕设计,该半圆形缺口43所空出的位置用于容纳投影组件,以及摄像头、距离传感器(又称接近传感器)、听筒、环境光亮度传感器、接近光传感器、温度传感器、压力传感器中的至少一种前面板部件;示意性的如图3C所示,异型屏可以是在触摸显示屏130的下边缘的中央位置设置有半圆形缺口44的屏幕设计,该半圆形缺口44所空出的位置用于容纳投影组件,以及物理按键、指纹传感器、麦克风、环境光亮度传感器、接近光传感器、温度传感器、压力传感器中的至少一种部件;示意性的如图3D所示的例子中,异型屏可以是在触摸显示屏130的下边缘的中央位置设置有半椭圆形缺口45的屏幕设计,同时在终端100的前面板上还形成有一个半椭圆型缺口,两个半椭圆形缺口围合成一个椭圆形区域,该椭圆形区域用于容纳物理按键或者指纹识别模组;示意性的如图3E所示的例子中,异型屏可以是在触摸显示屏130中的上半部中设置有至少一个小孔46的屏幕设计,该小孔46所空出的位置用于容纳投影组件,以及摄像头、距离传感器、听筒、环境光亮度传感器、接近光传感器、温度传感器、压力传感器中的至少一种前面板部件。
除此之外,本领域技术人员可以理解,上述附图所示出的终端100的结构并不构成对终端100的限定,终端可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。比如,终端100中还包括射频电路、输入单元、传感器、音频电路、无线保真(Wireless Fidelity,WiFi)模块、电源、蓝牙模块等部件,在此不再赘述。
请参考图4A,其示出了本发明的一个示例性实施例提供的一种界面展示方法的流程图,该方法可以应用于异型屏终端,或者应用于异型屏和曲面屏结合的终端中,在该异型屏终端的投影区域中设置有投影组件。比如应用在图3C中所示的异型屏终端中。如图4A所示,该界面展示方法可以包括:
步骤401,获取用于在终端的前面板中显示的目标界面。
针对该步骤,终端的处理器获取用于在终端的前面板中显示的目标界面。在本发明实施例中,目标界面指在终端的前面板中以视觉可见的图形或者符号向用户显示信息的画面。在本发明实施例中,目标界面是终端的处理器加工终端中的相关信息后,显示在前面板中的画面。
可选地,终端的处理器可以从终端的内存中获取该目标界面,也可以从终端的应用程序的数据文件中获取该目标界面。
步骤402,确定目标界面中显示在投影区域中的第一图像,以及显示在显示屏中的第二图像,第一图像和第二图像拼接构成目标界面。
在本发明实施例中,显示在终端前面板中展示的目标界面分为第一图像和第二图像,第一图像和第二图像拼接在一起构成完整的目标界面。终端在获取到目标界面后,确定该目标界面中属于第一图像那一部分界面,并确定属于第二图像的那一部分界面。
步骤403,通过终端的投影组件将第一图像投影在投影区域中,并在显示屏中显示第二图像。
可选地,在终端确定了第一图像和第二图像后,终端将通过处理器控制投影组件将第一图像投影在投影区域中,通过控制器在显示器中显示第二图像。
比如,请参见图4B,其示出了本发明实施例涉及的一种界面展示的示意图。在图4B所示的终端前面板410中,分为显示屏的显示区域411和投影组件的投影区域412。终端将第一图像显示在投影区域412中,并在显示屏的显示区域411中显示第二图像。当第一图像和第二图像同时显示时,用户将从视觉上感觉到前面板中全屏显示着终端的目标界面,从而实现了在前面板中以全屏显示的效果展示界面。
综上所述,本发明实施例提供的一种界面展示方法,终端通过获取用于在终端的前面板中显示的目标界面,确定目标界面中显示在投影区域中的第一图像,以及显示在显示屏中的第二图像,随后,通过终端的投影组件将第一图像投影在投影区域中,并在显示屏中显示第二图像。通过上述方法,具有异型屏的终端能够分别确定显示在显示屏和非显示屏区域(投影区域)中的图像,之后分别通过显示屏和投影组件显示确定出的图像,实现了在异型屏终端的前面板中完整目标界面的效果,克服了相关技术中由于非显示区域的出现而导致的界面显示不完整的问题,通过启用投影组件令异型屏终端在前面板组件存在情况下,能够在整个前面板中展示终端的目标界面,令显示效果与屏占比为1的终端近似相同,因而提高了终端的显示效果。
请参考图5A,其示出了本发明的一个示例性实施例提供的一种界面展示方法的流程图,该方法可以应用于异型屏终端,或者应用于异型屏和曲面屏结合的终端中,比如应用在图3C中所示的异型屏终端中,在该异型屏终端的投影区域中设置有投影组件。如图5所示,该界面展示方法可以包括:
步骤501,获取用于在终端的前面板中显示的目标界面。
其中,步骤501和步骤401的执行过程相同,详情请参见步骤401,此处不再赘述。
在本公开实施例中,终端的处理器在执行完成步骤501后,可以执行步骤5021、步骤5022和步骤503。其中,步骤5021和步骤5022可以如下:
步骤5021,获取投影区域的第一形状信息,以及显示屏的第二形状信息,第一形状信息包含投影区域的形状数据和尺寸数据,第二形状信息包含显示屏的形状数据和尺寸数据。
在本发明实施例中,终端的处理器将从配置信息中获取投影区域的第一形状信息和显示屏的第二形状信息,上述配置信息可以从终端出厂时内置的配置文件中获取,也可以从云端服务器上下载。第一形状信息用于指示作为平面封闭图形的投影区域的形状以及尺寸,第二形状信息用于指示作为平面封闭图形的显示屏的形状以及尺寸。
可选地,形状数据可以表示的数据包括矩形、圆角矩形、正圆、椭圆、多焦点圆、多弧形、多边形以及其它平面封闭图形。尺寸数据是用来描述作为平面封闭图形的投影区域或显示屏的形状以及各条边的长度,上述形状可以是闭合曲线,该闭合曲线可以由直线段和/或曲线段组成。
步骤5022,根据第一形状信息和第二形状信息将目标界面切分为第一图像和第二图像。
在本发明实施例中,由于目标界面是由第一图像和第二图像拼接构成的,因此第一图像的边缘和第二图像的边缘含有重合的公共边。终端的处理器在获取到第一形状信息和第二形状信息后,可以根据上述获取到的第一形状信息和第二形状信息在目标界面中确定公共边,并沿着上述公共边将目标界面切分为第一图像和第二图像。
在另一种可能的实现方式中,终端的处理器在执行完成步骤501后,也可以执行步骤5023、步骤5024、步骤5025和步骤503。其中,步骤5023至步骤5025可以如下:
步骤5023,确定目标界面的每一个像素点的像素点位置,像素点位置用于指示对应的像素点在前面板中显示的位置。
在本发明实施例中,终端的处理器确定目标界面(即完整的界面图像)中的每一个像素点位置,该像素点位置用于表示像素点在前面板中显示的位置。可选地,该像素点位置可以通过坐标的形式来表示,坐标包括但不限于直角坐标或极坐标。坐标系的原点和参考方向可以是终端的前面板中的一点,例如前面板的中心,前面板的左上角点、前面板的左下角、前面板的右上角或前面板的右下角等点。
可选地,由于本发明实施例中的终端为异型屏终端,该异型屏终端的屏幕在出厂后已经定型,其中的屏幕区域和非屏幕区域(投影区域)之间的相对位置是确定的。在参考坐标系或其它参照无确定的情况下,终端的处理能够获取投影区域在前面板中的第一区域范围,以及显示屏在前面板中的第二区域范围。可选地,当终端在出厂时预先确定了坐标系(例如以前面板中心为原点,分别短边的轴为x轴,平行长边的轴为y轴在前面板所在平面上建立平面直角坐标系)时,第一区域范围和第二区域范围能够以坐标数据的形式写在终端的出厂配置文件中。
可选地,本发明可将该数据烧录在相应的存储芯片中,令该数据无法删除。
步骤5024,将目标界面中,待显示在投影区域中的像素点所组成的图像确定为第一图像。
针对本步骤,当终端的处理器获取了投影区域的范围后,将对目标界面中的各个像素点进行处理,每一个像素点在指定的参考坐标系中具有唯一的坐标。当该像素点的坐标落入投影区域的范围时,获取该坐标。当终端的处理器筛选出全部属于投影区域的范围的像素点后,终端的处理器将上述像素点组成的图像确定为第一图像。
步骤5025,将目标界面中,待显示在显示屏中的像素点所组成的图像确定为第二图像。
针对本步骤,当终端的处理器获取了显示屏的范围后,将对目标界面中的各个像素点进行处理,每一个像素点在指定的参考坐标系中具有唯一的坐标。当该像素点的坐标落入显示屏的范围时,获取该坐标。当终端的处理器筛选出全部属于显示屏的范围的像素点后,终端的处理器将上述像素点组成的图像确定为第二图像。
需要特别说明的是,保证5025和步骤5024可以同时执行,也可以先执行步骤5024,后执行步骤5025;还可以先执行步骤5025,后执行步骤5024。本发明实施例不对步骤5024和步骤5025的执行顺序进行限定。
为了便于理解,本发明实施例提供了一种前面板的示意图,请参见图5B,其示出了本发明实施例涉及的一种前面板的区域划分的示意图。在图5B所示的终端前面板510中,以前面板中心为坐标原点,平行终端短边的轴为x轴,平行终端长边的轴为y轴在前面板所在平面建立平面直角坐标系。其中,前面板的长边的长度为16厘米,前面板的短边长度为9厘米,前面板在底边的短边中部具有半圆形缺口(投影区域)。在该坐标系中,该投影区域的圆心坐标是(0,-8),半径是0.5厘米,即第一区域的范围是圆心为(0,-8)且半径为0.5厘米的半圆形区域。在图5B的设计中,前面中除了第一区域外,全部为第二区域。终端可以将x坐标属于[-4.5,4.5],y坐标属于[-8,8]的点确定为前面板中的点。随后对上述属于前面板中的点进行判断,当该点不属于圆心为(0,-8)且半径为0.5厘米的半圆形区域时,将该点为第二区域中的点。所有属于第二区域中的像素点组成第二区域。
步骤503,通过终端的投影组件将第一图像投影在投影区域中,并在显示屏中显示第二图像。
在本发明实施例中,终端的处理器向投影组件发送第一图像。投影组件将第一图像投影在投影区域中。同时,终端的处理器将在显示屏中显示第二图像。
可选地,投影组件可以采用全息投影(front-projected holographic display)技术、正投影(Front Projection)技术或背投影(Rear Projector)技术。其中,投影组件采用正投影技术时,投影组件可以设置在异型屏前面板的缺口和/或挖孔所形成的开槽的侧面中。投影组件采用背投影技术时,投影组件可以设置在异型屏前面板的缺口和/或挖孔所形成的开槽的底面中。
可选地,当显示在前面板中的界面发生变化时,终端的处理器能够在用户视觉可感受的时间范围内重新确定第一图像和第二图像,并实时同步显示第一图像和第二图像。例如,在前面板中播放视频的应用场景中,每一帧画面即为一个目标界面,每一个目标界面中均存在一对第一图像和第二图像,每一对第一图像和第二图像均同时出现并同时消失,使得视频播放整体界面显示完整流畅。再例如,在前面板中接受到用户拖动界面进行界面切换的应用场景中,终端同样产生界面切换动画,每一帧切换动画对应一对第一图像和第二图像,终端的处理器能够控制投影组件和显示屏同时显示每一帧切换动画中的第一图像和第二图像。
比如,以图3C中所示的异型屏终端为例,介绍一种本发明实施例能够实现的界面展示的应用场景。在该实际的应用场景中,可以由异型屏终端的处理器来执行本发明实施例提供的界面展示方法。在使用上述界面展示方法之前,异型屏终端在使用过程中可以在用户的设置下采用不同的显示方式,例如显示屏显示方式和本发明实施例介绍的界面展示方法。在显示屏显示方式中,异型屏终端关闭投影组件,仅在显示屏中显示能够显示的目标界面,该显示方式能够节省一部分电能。在本发明实施例提供的界面展示方法中,处理器在展示目标界面前,从内存中获取用于展示在前面板中的目标界面。可选地,该目标界面中的内容可以是由操作系统提供的数据单独生成的,也可以由应用程序提供的数据单独生成的,还可以是同时通过操作系统提供的数据和应用程序提供的数据生成的。在获取到该目标界面后,处理器将确定目标界面中每一个像素点的在前面板中的坐标。随后,处理器将确定投影区域在前面板中的范围以及显示屏在前面板中的范围。例如,前面板长16厘米,宽9厘米,除去位于屏幕下边缘中部的半圆形缺口(投影区域)外,均是显示屏所在的区域。其中,以前面板中心为坐标原点,投影区域是圆心是点(0,-8),半径是1厘米的半圆形区域。随后,处理器获取坐标位于上述半圆形区域内的像素点,并利用这些像素点组成第一图像。随后,处理器获取目标界面中除第一图像外的其它像素点,并利用这些像素点组成第二图像。处理器控制显示屏和投影组件,同时显示第二图像和第一图像,以提高显示效果。
另外,除了上述应用场景中提供的确定第一图像和第二图像的方法,本发明实施例还可以在投影区域和显示屏之间出现无法投影的前面板区域时使用。当异型屏终端中出现该无法投影头像的前面板区域时,异型屏终端中的处理器将根据处理器中预先设置的投影区域的范围和显示屏的范围,分别确定第一图像和第二图像。在此基础上,本发明实施例能够提高异型屏的显示效果。
综上所述,本发明实施例提供的界面展示方法,可以应用在异型屏终端中,在异型屏终端中,可以通过获取用于在终端的前面板中显示的目标界面,确定目标界面的每一个像素点的像素点位置,像素点位置用于指示对应的像素点在前面板中显示的位置,获取投影区域在前面板中的第一区域范围,以及显示屏在前面板中的第二区域范围,将目标界面中,像素点位置处于第一区域范围内的像素点所组成的图像获取为第一图像,将目标界面中,像素点位置处于第二区域范围内的像素点所组成的图像获取为第二图像,通过终端的投影组件将第一图像投影在投影区域中,并在显示屏中显示第二图像。由于异形屏终端能够在控制投影组件和显示屏分别展示界面的一部分图像,因此本发明实施例通过确定显示屏和投影区域的各自所占据的区域,确定了属于显示屏显示和投影组件投影的像素点。因此,使得显示屏和投影组件能够准确显示自身所负责的部分图像,使得目标界面显示完整,在保证异型屏终端正常安装前面板部件的情况下,提高了显示效果。
另外,通过获取投影区域的第一形状信息,以及显示屏的第二形状信息,根据第一形状信息和第二形状信息将目标界面切分为第一图像和第二图像。其中,第一形状信息包含投影区域的形状数据和尺寸数据,第二形状信息包含显示屏的形状数据和尺寸数据。终端能够将整幅目标界面切分为分别在投影区域显示的第一图像和在显示屏中显示的第二图像,提高了目标界面的显示效果。
进一步地,本发明实施例在提高了异型屏的显示效果的前提下,还可以提供一种用于确定在异型屏投影区域中接受到触控操作的目标界面展示方法。在该方法中,异型屏终端通过比较中框中的光感器和投影区域中的光感器的亮度数值的大小,判断投影区域中是否存在用户的手指或者手掌。当用户的手指或者手掌位于投影区域时,通过温度传感器采集用户的手指或者手部的温度来确定用户的操作类型和操作位置。
请参见图6A,其示出了本发明的一个示例性实施例提供的一种目标界面展示方法的流程图,该方法可以应用于异型屏终端,或者应用于异型屏和曲面屏结合的终端中,比如应用在图3C中所示的异型屏终端中,在该异型屏终端的投影区域中设置有投影组件、第一光感器和温度传感器,中框中设置有第二光感器。如图6A所示,该界面展示方法可以包括:
步骤601,获取用于在终端的前面板中显示的目标界面。
步骤6021,获取投影区域的第一形状信息,以及显示屏的第二形状信息,第一形状信息包含投影区域的形状数据和尺寸数据,第二形状信息包含显示屏的形状数据和尺寸数据。
步骤6022,根据第一形状信息和第二形状信息将目标界面切分为第一图像和第二图像。
其中,步骤601、步骤6021和步骤6022的执行过程,与步骤501、步骤5021和步骤5022的执行过程相同,详情请参见步骤501、步骤5021和步骤5022,此处不再赘述。
步骤603,获取设置在投影区域中的光感器采集的指定时间段内的第一亮度数值的减少量,检测第一亮度数值的减少量是否大于预设变化量阈值。
在本发明实施例中,该步骤的目的在于检测是否存在针对投影区域的触摸操作。由于光感器在用户的手指遮挡住环境光线时,将采集到较环境光亮度更低的亮度数值。因此,本发明可以通过设置在投影区域中的光感器采集的光线的减少量的情况来确定,是否存在投影区域的第一亮度数值的减少量是否大于预设变化量阈值。
可选地,本发明还可以在设置第一光感器和第二光感器两个光感器来确定,是否存在投影区域的第一亮度数值的减少量是否大于预设变化量阈值。其中,第一光感器设置在触摸区域中,第二光感器设置在终端的中框等用户遮挡较少的位置中。可选地,为了令第二光感器能够采集到环境光的亮度,可以将第二光感器设置在用户持握少的中框位置中,例如中框的顶部。
终端中的处理器将分别获取第一光感器中的第一亮度数值和第二光感器中的第二亮度数值。当第一亮度数值低于第二亮度数值时,说明投影区域中存在遮挡光线的物体。
步骤604,若第一亮度数值的减少量大于预设变化量阈值,则获取温度传感器采集的投影区域中的温度变化信息,温度变化信息用于指示投影区域中的各个子区域在指定时间段内的各个时间点上的温度数值变化情况。
在本公开实施例中,第一亮度数值的减少量大于预设变化量阈值时,终端确定检测到在投影区域执行的触控操作。随后,终端中的处理器获取温度传感器采集的投影区域中的温度变化信息。该温度变化信息能够指示投影区域中的各个子区域在指定时间段内的各个时间点上的温度变化情况。一个子区域的温度变化情况至少由两个不同的时间点上的温度数值确定。例如,a时刻的第一子区域的温度数值是17摄氏度,b时刻的第一子区域的温度数值是23摄氏度,则温度变化信息可以是增加6摄氏度或增加35.29%等数值。
可选地,子区域的大小可以根据使用需求或者温度传感器的灵敏度来确定,例如,一个子区域可能是0.5mm*0.5mm、1mm*1mm或2mm*2mm等大小的方形区域。
具体地,处理器可以通过后台向温度传感器传输信息,控制温度传感器获取温度变化信息,并将获取到的温度变化信息回传至处理器。此外,温度传感器还可以将每个子区域的位置信息一同传回给处理器。
步骤605,根据温度变化信息确定触控操作的操作类型。
在该步骤中,终端中的处理器将温度变化信息来确定触控操作的类型。例如,单个或者位置相邻的至少两个子区域中的温度变化信息指示温度不同于其它子区域,则可以根据温度不同于其它子区域的持续时间判断是短按操作或者长按操作。可选地,为了准确确定触控操作的操作类型,每一个温度变化信息可以仅关联一个触摸操作类型。比如,短按操作、长按操作、滑动操作或拖动操作分别对应一个温度变化信息模版。
步骤606,确定触控操作对应的映射位置,映射位置是触控操作映射在目标界面中的操作位置。
其中,为了确定用户的触控操作针对的可操作对象,终端的处理器确定触控操作对应的映射位置。可选地,该映射位置可以通过坐标点的形式来确定。终端的处理器可以获取投影区域的子区域的坐标,将该坐标确定为触控操作对应的映射位置。
步骤607,根据触控操作的操作类型和映射位置确定触控操作对应的操作指令。
在本发明实施例中,终端的处理器根据触控操作的操作类型和映射位置确定具体的操作指令。其中,可以是终端中搭载的操作系统使用处理器来确定操作指令,也可以是应用程序使用处理器来确定操作指令。在触控操作的操作类型和映射位置确定的情况下,终端可以确定具体的操作指令。
步骤608,执行触控操作对应的操作指令。
其中,终端中的处理器在确定操作指令之后,将执行触控操作对应的操作指令。终端中的处理器将根据触控操作的不同,控制操作系统或者应用程序执行相应的操作。
例如,触控操作的映射位置对应有一个可操作图标,操作类型是短按操作,则终端确定该操作指令是打开该可操作图标对应的应用程序。再例如,触控操作的映射位置对应的是桌面的空白区域,操作类型是滑动操作,则终端确定对应的操作指令是桌面当前目标界面向滑动方向切出,切换到下一个桌面的目标界面。
比如,请参见图6B,其是基于图6A所示的实施例提供的一种目标界面的交互示意图。在图6B中,终端在显示状态610中,投影组件未开启,前面板中仅有显示屏611显示图像,投影区域612中不显示图像。当终端在显示状态620中,投影组件启动,显示屏611显示图像,同时投影组件612中显示有投影组件投射出的影像,可选地,该影像可以从投影区域整下方向上投射,也可以从投影区域的侧边射向投影区域。用户的手指可以在投影区域中进行点击操作或长按操作等触控操作。此时,位于投影区域中的光感器可以通过检测亮度数值的减少量确定触控区域上存在遮挡物,如在显示状态630中的光感器,能够在手指的遮挡下采集到较低的光线亮度。随后温度传感器可以检测各个子区域中温度变化信息来确定用户手指的具体操作类型和触控操作在触控区域中的映射位置。
综上所述,本发明实施例提供的界面展示方法,可以应用在异型屏终端中,在异型屏终端中,可以通过获取用于在终端的前面板中显示的目标界面,获取投影区域的第一形状信息,以及显示屏的第二形状信息,根据第一形状信息和第二形状信息将目标界面切分为第一图像和第二图像,通过终端的投影组件将第一图像投影在投影区域中,并在显示屏中显示第二图像。由于异形屏终端能够在控制投影组件和显示屏分别展示界面的一部分图像,因此本发明实施例通过确定显示屏和投影区域的各自所占据的区域,确定了属于显示屏显示和投影组件投影的像素点。因此,使得显示屏和投影组件能够准确显示自身所负责的部分图像,使得目标界面显示完整,在保证异型屏终端正常安装前面板部件的情况下,提高了显示效果。
另外,本发明实施例可以通过获取设置在投影区域中的光感器采集的指定时间段内的第一亮度数值的减少量,检测第一亮度数值的减少量是否大于预设变化量阈值,若第一亮度数值的减少量大于预设变化量阈值,则获取温度传感器采集的投影区域中的温度变化信息,根据温度变化信息确定触控操作的操作类型,并确定触控操作对应的映射位置。根据操作类型和映射位置确定对应的操作指令并执行。令终端能够使用光感器确定是否存在用户的操作,并在存在用户的操作后通过温度传感器,确定在投影区域中的触控操作的操作类型以及触控操作对应的映射位置,达到了准确确定投影区域中的触控操作的效果。
在本发明实施例中,还设计有一种用于确定在异型屏投影区域中接受到触控操作的目标界面展示方法。在该方法中,异型屏终端通过采集用户的手指或者手部的温度来确定用户的操作类型和操作位置。
请参见图7,其示出了本发明的一个示例性实施例提供的另一种目标界面展示方法的流程图,该方法可以应用于异型屏终端,或者应用于异型屏和曲面屏结合的终端中,比如应用在图3C中所示的异型屏终端中,在该异型屏终端的投影区域中设置有投影组件和温度传感器。如图7所示,该界面展示方法可以包括:
步骤701,获取用于在终端的前面板中显示的目标界面。
步骤7021,获取投影区域的第一形状信息,以及显示屏的第二形状信息,第一形状信息包含投影区域的形状数据和尺寸数据,第二形状信息包含显示屏的形状数据和尺寸数据。
步骤7022,根据第一形状信息和第二形状信息将目标界面切分为第一图像和第二图像。
其中,步骤701、步骤7021和步骤7022的执行过程,与步骤501、步骤5021和步骤5022的执行过程相同,详情请参见步骤501、步骤5021和步骤5022,此处不再赘述。
步骤703,获取温度传感器采集到的温度变化信息。
在本发明实施例中,终端中的处理器将获取温度传感器采集到的温度变化信息,该温度传感器设置在投影区域中,采集到的温度变化信息也是投影区域中的温度变化信息。
可选地,温度变化信息能够指示投影区域中的各个子区域在指定时间段内的各个时间点上的温度变化情况。其中,子区域的大小可以根据使用需求或者温度传感器的灵敏度来确定,例如,一个子区域可能是0.5mm*0.5mm、1mm*1mm或2mm*2mm等大小的方形区域。
步骤704,当温度变化信息是指示人体温度的人体温度变化信息时,确定温度变化信息对应的触控操作的操作类型。
在本发明实施例中,终端中的处理器能够识别人体温度变化信息。可选地,终端的处理器能够在投影区域中的温度高于用户手指温度,以及用户手指温度判断出用户的手指接触了投影区域。
可选地,终端中的温度传感器具备在环境温度的基础上,识别出人体手指的温度的功能。例如,在气温炎热的夏天,户外环境温度在33摄氏度左右时,人体手指的温度在27摄氏度左右,此时温度传感器能够将27摄氏度左右的温度识别为人体手指的温度。在寒冷的冬天,户外环境温度在5摄氏度左右时,人体手指的温度在20摄氏度左右,此时温度传感器能够将20摄氏度左右的温度识别为人体手指的温度。需要说明的是,上述例子仅用于说明温度传感器具有在不同的环境温度下识别人体手指的温度的功能,并不对温度传感器在实际识别人体手指时采用的温度值构成限定。
随后,温度传感器能够根据各个子区域中的温度变化信息确定具体的操作类型。比如,短按操作、长按操作、滑动操作或拖动操作中的至少一个操作。
步骤705,确定触控操作对应的映射位置,映射位置是触控操作映射在目标界面中的操作位置。
步骤706,根据触控操作的操作类型和映射位置确定触控操作对应的操作指令。
步骤707,执行触控操作对应的操作指令。
其中,步骤705至步骤707的执行过程和步骤606至步骤608的执行过程相同,详情请参见步骤606至步骤608,此处不再赘述。
综上所述,本发明实施例提供的界面展示方法,可以应用在异型屏终端中,在异型屏终端中,可以通过获取用于在终端的前面板中显示的目标界面,获取投影区域的第一形状信息,以及显示屏的第二形状信息,根据第一形状信息和第二形状信息将目标界面切分为第一图像和第二图像,通过终端的投影组件将所述第一图像投影在投影区域中,并在显示屏中显示第二图像。由于异形屏终端能够在控制投影组件和显示屏分别展示界面的一部分图像,因此本发明实施例通过确定显示屏和投影区域的各自所占据的区域,确定了属于显示屏显示和投影组件投影的像素点。因此,使得显示屏和投影组件能够准确显示自身所负责的部分图像,使得目标界面显示完整,在保证异型屏终端正常安装前面板部件的情况下,提高了显示效果。
另外,本发明实施例可以通过获取温度传感器采集到的温度变化信息,当温度变化信息是指示人体温度的人体温度变化信息时,确定温度变化信息对应的触控操作的操作类型,并通过温度传感器确定触控操作对应的映射位置,根据触控操作的操作类型和映射位置确定触控操作对应的操作指令,令终端执行触控操作对应的操作指令,使终端能够通过温度变化信息识别出投影区域中的触控操作的操作类型以及映射位置,并提高了触控操作的识别效果。
在本发明实施例中,还设计有一种用于确定在异型屏投影区域中接受到触控操作的目标界面展示方法。在该方法中,异型屏终端通过采集用户的手指或者手部在投影区域上产生的压力的数值来确定用户的操作类型和操作位置。
请参见图8,其示出了本发明的一个示例性实施例提供的另一种目标界面展示方法的流程图,该方法可以应用于异型屏终端,或者应用于异型屏和曲面屏结合的终端中,比如应用在图3C中所示的异型屏终端中,在该异型屏终端的投影区域中设置有投影组件和压力传感器。如图9所示,该界面展示方法可以包括:
步骤801,获取用于在终端的前面板中显示的目标界面。
步骤8021,获取投影区域的第一形状信息,以及显示屏的第二形状信息,第一形状信息包含投影区域的形状数据和尺寸数据,第二形状信息包含显示屏的形状数据和尺寸数据。
步骤8022,根据第一形状信息和第二形状信息将目标界面切分为第一图像和第二图像。
其中,步骤801、步骤8021和步骤8022的执行过程,与步骤501、步骤5021和步骤5022的执行过程相同,详情请参见步骤501、步骤5021和步骤5022,此处不再赘述。
步骤803,获取压力传感器采集的投影区域中的压力变化信息,压力变化信息用于指示投影区域中的各个子区域在指定时间段内的各个时间点上接受到的压力的数值变化情况。
在本发明实施例中,终端的可以在设置在投影区域中的光感器检测到存在用户操作时,执行步骤803。或者,也可以在投影区域中的压力传感器检测到的瞬时压力值超过压力阈值时,执行步骤803。
可选地,终端的处理器获取投影区域中的压力传感器采集的投影区域中的压力变化信息,该压力变化信息是至少两个不同的时间点上,触控操作对投影区域产生的压力的数值。其中,投影区域可以被分为至少两个子区域,每一个子区域中在一段指定时间内均可以被压力传感器检测出其上接受到的压力值。
例如,当投影区域被分为从左到右三个子区域时,压力传感器在连续的t1、t2和t3三个时刻上分别获取到左边子区域的压力值m1、中间子区域的压力值m2和右边子区域的压力值m3。则终端的处理器获取到的信息包括上述时刻、子区域名称以及相应的压力值。
再例如,针对一个子区域时,在t1时刻的压力值是f1,在t2时刻的压力值是f2,则压力变化信息可以表示为(f2-f1)或者(f2-f1)/f1。
步骤804,根据压力变化信息确定触控操作的操作类型。
在本公开实施例中,终端的处理器根据压力变化信息能够确定触控操作的操作类型。为了准确地确定操作的类型,在本公开中终端的处理器将触控操作确定为单一的操作类型。
例如,在一个或者至少两个相邻的子区域中的压力变化信息指示存在长时间(或者短时间)的按压操作,则可以判断操作类型是长按操作(或者短按操作,也称点击操作)。或者在位置相邻的子区域随着时间依次呈现相同或者类似的压力变化信息,则说明操作类型是滑动操作或者拖动操作中的拖动阶段。
步骤805,确定触控操作对应的映射位置,映射位置是触控操作映射在目标界面中的操作位置。
步骤806,根据触控操作的操作类型和映射位置确定触控操作对应的操作指令。
步骤807,执行触控操作对应的操作指令。
其中,步骤805至步骤807的执行过程和步骤606至步骤608的执行过程相同,详情请参见步骤606至步骤608,此处不再赘述。
综上所述,本发明实施例提供的界面展示方法,可以应用在异型屏终端中,在异型屏终端中,可以通过获取用于在终端的前面板中显示的目标界面,获取投影区域的第一形状信息,以及显示屏的第二形状信息,根据第一形状信息和第二形状信息将目标界面切分为第一图像和第二图像,通过终端的投影组件将第一图像投影在投影区域中,并在显示屏中显示第二图像。由于异形屏终端能够在控制投影组件和显示屏分别展示界面的一部分图像,因此本发明实施例通过确定显示屏和投影区域的各自所占据的区域,确定了属于显示屏显示和投影组件投影的像素点。因此,使得显示屏和投影组件能够准确显示自身所负责的部分图像,使得目标界面显示完整,在保证异型屏终端正常安装前面板部件的情况下,提高了显示效果。
另外,本发明实施例可以通过获取压力传感器采集的投影区域中的压力变化信息,压力变化信息用于指示投影区域中接受到的压力的数值,当压力变化信息与预设的压力变化信息模版相匹配时,确定检测到在投影区域执行的触控操作。令终端能够通过压力变化信息检测到投影区域中的触控操作,并准确地确定出触控操作的类型,提高了终端识别针对投影区域的触控操作类型的能力。
下述为本发明装置实施例,可以用于执行本发明方法实施例。对于本发明装置实施例中未披露的细节,请参照本发明方法实施例。
请参考图9,其是本发明一个实施例提供的一种界面展示装置的结构方框图,该界面展示装置可通过软件、硬件或者两者的结合实现成为异型屏终端的部分或者全部。该界面展示装置可以包括:界面获取模块901、图像确定模块902和图像显示模块903。
界面获取模块901,用于获取用于在终端的前面板中显示的目标界面。
图像确定模块902,用于确定目标界面中显示在投影区域中的第一图像,以及显示在显示屏中的第二图像,第一图像和第二图像拼接构成目标界面。
图像显示模块903,用于通过终端的投影组件将第一图像投影在投影区域中,并在显示屏中显示第二图像。
进一步的,请参考图10,其示出了本发明一个实施例提供的另一种界面展示装置的结构方框图。结合图9,在图10所示的装置中:
图像确定模块902,包括:形状获取子模块902a和界面切分子模块902b。
形状获取子模块902a,用于获取投影区域的第一形状信息,以及显示屏的第二形状信息,第一形状信息包含投影区域的形状数据和尺寸数据,第二形状信息包含显示屏的形状数据和尺寸数据;
界面切分子模块902b,用于根据第一形状信息和第二形状信息将目标界面切分为第一图像和第二图像。
可选地,图像确定模块902,包括:位置获取子模块902c、第一确定子模块902d和第二确定子模块902e。
位置获取子模块902c,用于确定目标界面的每一个像素点的像素点位置,像素点位置用于指示对应的像素点在前面板中显示的位置;
第一确定子模块902d,用于将目标界面中,待显示在投影区域中的像素点所组成的图像获取为第一图像;
第二确定子模块902e,用于将目标界面中,待显示在显示屏中的像素点所组成的图像获取为第二图像。
可选地,该界面展示装置还包括:位置确定模块904、指令确定模块905和指令执行模块906。
位置确定模块904,用于检测到在投影区域执行的触控操作时,确定触控操作对应的映射位置,映射位置是触控操作映射在目标界面中的操作位置;
指令确定模块905,用于根据触控操作的操作类型和映射位置确定触控操作对应的操作指令;
指令执行模块906,用于执行触控操作对应的操作指令。
可选地,投影区域中设置有光感器,该界面展示装置还包括:亮度获取模块907、亮度检测模块908和操作确定模块909。
亮度获取模块907,用于获取光感器采集的第一亮度数值;
亮度检测模块908,用于检测第一亮度数值的减少量是否大于预设变化量阈值;
操作确定模块909,用于若第一亮度数值的减少量大于预设变化量阈值,则确定检测到在投影区域执行的触控操作。
可选地,在投影区域中设置有温度传感器,该界面展示装置还包括:温度获取模块910和类型确定模块911。
温度获取模块910,用于获取温度传感器采集的投影区域中的温度变化信息,温度变化信息用于指示投影区域中的各个子区域在指定时间段内的各个时间点上的温度数值变化情况;
类型确定模块911,用于根据温度变化信息确定触控操作的操作类型。
可选地,在投影区域中设置有压力传感器,该装置还包括:压力获取模块912和第二操作确定模块913。
压力获取模块912,用于获取压力传感器采集的投影区域中的压力变化信息,压力变化信息用于指示投影区域中的各个子区域在指定时间段内的各个时间点上接受到的压力的数值;
第二操作确定模块913,用于当压力变化信息与预设的压力变化信息模版相匹配时,确定检测到在投影区域执行的触控操作。
可选地,在本发明实施例提供的界面展示装置中,上述模块在处理时涉及到的触控操作包括:短按操作、长按操作、轻按操作、重按操作、滑动操作或拖动操作中至少一种。
相关细节参见上述方法实施例。
本发明实施例还提供一种计算机可读介质,其上存储有程序指令,程序指令被终端100的处理器110执行时实现上述如图4A、图6A、图7或图8所示的方法实施例中的界面展示方法。
上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本申请的较佳实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

Claims (18)

1.一种界面展示方法,用于终端中,其特征在于,所述终端的前面板包括投影区域和显示屏,所述终端还包括投影组件,所述方法包括:
获取用于在所述终端的前面板中显示的目标界面;
确定所述目标界面中显示在所述投影区域中的第一图像,以及显示在所述显示屏中的第二图像,所述第一图像和所述第二图像拼接构成所述目标界面;
通过所述终端的投影组件将所述第一图像投影在所述投影区域中,并在所述显示屏中显示所述第二图像。
2.根据权利要求1所述的方法,其特征在于,所述确定所述目标界面中显示在所述投影区域中的第一图像,以及显示在所述显示屏中的第二图像,包括:
获取所述投影区域的第一形状信息,以及所述显示屏的第二形状信息,所述第一形状信息包含所述投影区域的形状数据和尺寸数据,所述第二形状信息包含所述显示屏的形状数据和尺寸数据;
根据所述第一形状信息和所述第二形状信息将所述目标界面切分为所述第一图像和所述第二图像。
3.根据权利要求1所述的方法,其特征在于,所述确定所述目标界面中显示在所述投影区域中的第一图像,以及显示在所述显示屏中的第二图像,包括:
确定所述目标界面的每一个像素点的像素点位置,所述像素点位置用于指示对应的像素点在所述前面板中显示的位置;
将所述目标界面中,待显示在所述投影区域中的像素点所组成的图像确定为所述第一图像;
将所述目标界面中,待显示在所述显示屏中的像素点所组成的图像确定为所述第二图像。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
检测到在所述投影区域执行的触控操作时,确定所述触控操作对应的映射位置,所述映射位置是所述触控操作映射在所述目标界面中的操作位置;
根据所述触控操作的操作类型和所述映射位置确定所述触控操作对应的操作指令;
执行所述触控操作对应的操作指令。
5.根据权利要求4所述的方法,其特征在于,所述投影区域中设置有光感器,在所述确定所述触控操作对应的映射位置之前,还包括:
获取所述光感器采集的指定时间段内的第一亮度数值的减少量;
检测所述第一亮度数值的减少量是否大于预设变化量阈值;
若所述第一亮度数值的减少量大于所述预设变化量阈值,则确定检测到在所述投影区域执行的触控操作。
6.根据权利要求4或5所述的方法,其特征在于,所述投影区域中设置有温度传感器,在根据所述触控操作的操作类型和所述映射位置确定所述触控操作对应的操作指令之前,还包括:
获取所述温度传感器采集的所述投影区域中的温度变化信息,所述温度变化信息用于指示所述投影区域中的各个子区域在指定时间段内的各个时间点上的温度数值变化情况;
根据所述温度变化信息确定所述触控操作的操作类型。
7.根据权利要求4或5所述的方法,其特征在于,所述投影区域中设置有压力传感器,所述确定所述触控操作对应的映射位置之前,还包括:
获取所述压力传感器采集的所述投影区域中的压力变化信息,所述压力变化信息用于指示所述投影区域中的各个子区域在指定时间段内的各个时间点上接受到的压力的数值变化情况;
根据所述压力变化信息确定所述触控操作的操作类型。
8.根据权利要求4至7任意一种所述的方法,其特征在于,所述触控操作包括:短按操作、长按操作、轻按操作、重按操作、滑动操作或拖动操作中的至少一种。
9.一种界面展示装置,其特征在于,应用于终端中,所述终端的前面板包括显示屏和投影区域,所述装置包括:
界面获取模块,用于获取用于在所述终端的前面板中显示的目标界面;
图像确定模块,用于确定所述目标界面中显示在所述投影区域中的第一图像,以及显示在所述显示屏中的第二图像,所述第一图像和所述第二图像拼接构成所述目标界面;
图像显示模块,用于通过所述终端的投影组件将所述第一图像投影在所述投影区域中,并在所述显示屏中显示所述第二图像。
10.根据权利要求9所述的装置,其特征在于,所述图像确定模块,包括:
形状获取子模块,用于获取所述投影区域的第一形状信息,以及所述显示屏的第二形状信息,所述第一形状信息包含所述投影区域的形状数据和尺寸数据,所述第二形状信息包含所述显示屏的形状数据和尺寸数据;
界面切分子模块,用于根据所述第一形状信息和所述第二形状信息将所述目标界面切分为所述第一图像和所述第二图像。
11.根据权利要求9所述的装置,其特征在于,所述图像确定模块,包括:
位置获取子模块,用于确定所述目标界面的每一个像素点的像素点位置,所述像素点位置用于指示对应的像素点在所述前面板中显示的位置;
第一确定子模块,用于将所述目标界面中,待显示在所述投影区域中的像素点所组成的图像确定为所述第一图像;
第二确定子模块,用于将所述目标界面中,待显示在所述显示屏中的像素点所组成的图像确定为所述第二图像。
12.根据权利要求9所述的装置,其特征在于,所述装置还包括:
位置确定模块,用于检测到在所述投影区域执行的触控操作时,确定所述触控操作对应的映射位置,所述映射位置是所述触控操作映射在所述目标界面中的操作位置;
指令确定模块,用于根据所述触控操作的操作类型和所述映射位置确定所述触控操作对应的操作指令;
指令执行模块,用于执行所述触控操作对应的操作指令。
13.根据权利要求12所述的装置,其特征在于,所述投影区域中设置有光感器,所述装置还包括:
亮度获取模块,用于获取所述光感器采集的第一亮度数值;
亮度检测模块,用于检测所述第一亮度数值的减少量是否大于预设变化量阈值;
操作确定模块,用于若所述第一亮度数值的减少量大于所述预设变化量阈值,则确定检测到在所述投影区域执行的触控操作。
14.根据权利要求12或13所述的装置,其特征在于,所述投影区域中设置有温度传感器,所述装置还包括:
温度获取模块,用于获取所述温度传感器采集的所述投影区域中的温度变化信息,所述温度变化信息用于指示所述投影区域中的各个子区域在指定时间段内的各个时间点上的温度数值变化情况;
类型确定模块,用于根据所述温度变化信息确定所述触控操作的操作类型。
15.根据权利要求12或13所述的装置,其特征在于,所述投影区域中设置有压力传感器,所述装置还包括:
压力获取模块,用于获取所述压力传感器采集的所述投影区域中的压力变化信息,所述压力变化信息用于指示所述投影区域中的各个子区域在指定时间段内的各个时间点上接受到的压力的数值变化信息;
第二操作确定模块,用于根据所述压力变化信息确定所述触控操作的操作类型。
16.根据权利要求12至15任意一种所述的装置,其特征在于,所述触控操作包括:短按操作、长按操作、轻按操作、重按操作、滑动操作或拖动操作中的至少一种。
17.一种终端,其特征在于,所述终端包括:处理器、与所述处理器相连的存储器,以及存储在所述存储器上的程序指令,所述处理器执行所述程序指令时实现如权利要求1至8任一所述的界面展示方法。
18.一种计算机可读介质,其上存储有程序指令,其特征在于,所述程序指令被处理器执行时实现如权利要求1至8任一所述的界面展示方法。
CN201710755732.5A 2017-08-29 2017-08-29 界面展示方法、装置及终端 Active CN107562316B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710755732.5A CN107562316B (zh) 2017-08-29 2017-08-29 界面展示方法、装置及终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710755732.5A CN107562316B (zh) 2017-08-29 2017-08-29 界面展示方法、装置及终端

Publications (2)

Publication Number Publication Date
CN107562316A true CN107562316A (zh) 2018-01-09
CN107562316B CN107562316B (zh) 2019-02-05

Family

ID=60976168

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710755732.5A Active CN107562316B (zh) 2017-08-29 2017-08-29 界面展示方法、装置及终端

Country Status (1)

Country Link
CN (1) CN107562316B (zh)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108182043A (zh) * 2018-01-19 2018-06-19 维沃移动通信有限公司 一种信息显示方法及移动终端
CN108184000A (zh) * 2018-01-26 2018-06-19 努比亚技术有限公司 全面屏和智能终端
CN108259677A (zh) * 2018-02-12 2018-07-06 中兴通讯股份有限公司 终端及其显示控制方法、装置及计算机存储介质
CN108388387A (zh) * 2018-01-18 2018-08-10 深圳市万普拉斯科技有限公司 信息处理方法、装置、计算机设备及存储介质
CN108427526A (zh) * 2018-03-16 2018-08-21 维沃移动通信有限公司 一种应用程序管理方法及终端
CN108600500A (zh) * 2018-03-02 2018-09-28 广东欧珀移动通信有限公司 图片显示方法、装置、移动终端及存储介质
CN109189517A (zh) * 2018-07-26 2019-01-11 维沃移动通信有限公司 一种显示切换的方法及移动终端
CN109284049A (zh) * 2018-09-27 2019-01-29 Oppo广东移动通信有限公司 显示状态的切换方法、装置、终端及存储介质
CN109375863A (zh) * 2018-09-27 2019-02-22 Oppo广东移动通信有限公司 目标功能的触发方法、装置、终端及存储介质
CN109388309A (zh) * 2018-09-27 2019-02-26 Oppo广东移动通信有限公司 菜单的显示方法、装置、终端及存储介质
CN109525722A (zh) * 2018-11-06 2019-03-26 Oppo广东移动通信有限公司 移动终端控制方法、装置及移动终端
CN110221882A (zh) * 2018-03-02 2019-09-10 广东欧珀移动通信有限公司 显示方法、装置、移动终端以及存储介质
CN110248017A (zh) * 2018-03-07 2019-09-17 深圳天珑无线科技有限公司 电子终端及其图像显示控制方法、装置
CN110297591A (zh) * 2019-06-26 2019-10-01 维沃移动通信有限公司 一种操作方法及终端设备
CN110618771A (zh) * 2019-09-20 2019-12-27 上海闻泰信息技术有限公司 内容显示的方法、装置、终端及存储介质
CN113010133A (zh) * 2021-04-08 2021-06-22 腾讯科技(深圳)有限公司 一种数据显示方法
CN113867522A (zh) * 2021-08-31 2021-12-31 歌尔科技有限公司 一种互动投影控制方法及装置、感应垫、互动投影仪

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050110964A1 (en) * 2002-05-28 2005-05-26 Matthew Bell Interactive video window display system
CN101729657A (zh) * 2008-10-15 2010-06-09 Lg电子株式会社 移动通信终端中的图像投影
CN102763342A (zh) * 2009-12-21 2012-10-31 三星电子株式会社 根据基于图像感测模块的用户交互进行外部输出的移动装置及相关控制方法
CN106716318A (zh) * 2014-09-09 2017-05-24 索尼公司 投影显示单元和功能控制方法
CN106897155A (zh) * 2016-08-29 2017-06-27 阿里巴巴集团控股有限公司 一种界面展示方法及装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050110964A1 (en) * 2002-05-28 2005-05-26 Matthew Bell Interactive video window display system
CN101729657A (zh) * 2008-10-15 2010-06-09 Lg电子株式会社 移动通信终端中的图像投影
CN101729657B (zh) * 2008-10-15 2013-12-25 Lg电子株式会社 移动通信终端中的图像投影
CN102763342A (zh) * 2009-12-21 2012-10-31 三星电子株式会社 根据基于图像感测模块的用户交互进行外部输出的移动装置及相关控制方法
CN106716318A (zh) * 2014-09-09 2017-05-24 索尼公司 投影显示单元和功能控制方法
CN106897155A (zh) * 2016-08-29 2017-06-27 阿里巴巴集团控股有限公司 一种界面展示方法及装置

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108388387A (zh) * 2018-01-18 2018-08-10 深圳市万普拉斯科技有限公司 信息处理方法、装置、计算机设备及存储介质
CN108182043B (zh) * 2018-01-19 2020-06-16 维沃移动通信有限公司 一种信息显示方法及移动终端
CN108182043A (zh) * 2018-01-19 2018-06-19 维沃移动通信有限公司 一种信息显示方法及移动终端
CN108184000A (zh) * 2018-01-26 2018-06-19 努比亚技术有限公司 全面屏和智能终端
CN108259677A (zh) * 2018-02-12 2018-07-06 中兴通讯股份有限公司 终端及其显示控制方法、装置及计算机存储介质
CN108259677B (zh) * 2018-02-12 2021-06-01 中兴通讯股份有限公司 终端及其显示控制方法、装置及计算机存储介质
CN108600500A (zh) * 2018-03-02 2018-09-28 广东欧珀移动通信有限公司 图片显示方法、装置、移动终端及存储介质
CN110221882A (zh) * 2018-03-02 2019-09-10 广东欧珀移动通信有限公司 显示方法、装置、移动终端以及存储介质
CN110248017A (zh) * 2018-03-07 2019-09-17 深圳天珑无线科技有限公司 电子终端及其图像显示控制方法、装置
CN108427526A (zh) * 2018-03-16 2018-08-21 维沃移动通信有限公司 一种应用程序管理方法及终端
CN109189517A (zh) * 2018-07-26 2019-01-11 维沃移动通信有限公司 一种显示切换的方法及移动终端
CN109189517B (zh) * 2018-07-26 2021-08-27 维沃移动通信有限公司 一种显示切换的方法及移动终端
CN109388309A (zh) * 2018-09-27 2019-02-26 Oppo广东移动通信有限公司 菜单的显示方法、装置、终端及存储介质
CN109284049A (zh) * 2018-09-27 2019-01-29 Oppo广东移动通信有限公司 显示状态的切换方法、装置、终端及存储介质
CN109375863A (zh) * 2018-09-27 2019-02-22 Oppo广东移动通信有限公司 目标功能的触发方法、装置、终端及存储介质
CN109388309B (zh) * 2018-09-27 2023-10-10 Oppo广东移动通信有限公司 菜单的显示方法、装置、终端及存储介质
CN109525722A (zh) * 2018-11-06 2019-03-26 Oppo广东移动通信有限公司 移动终端控制方法、装置及移动终端
CN110297591A (zh) * 2019-06-26 2019-10-01 维沃移动通信有限公司 一种操作方法及终端设备
CN110618771A (zh) * 2019-09-20 2019-12-27 上海闻泰信息技术有限公司 内容显示的方法、装置、终端及存储介质
CN110618771B (zh) * 2019-09-20 2022-03-15 昆明闻讯实业有限公司 内容显示的方法、装置、终端及存储介质
CN113010133A (zh) * 2021-04-08 2021-06-22 腾讯科技(深圳)有限公司 一种数据显示方法
CN113010133B (zh) * 2021-04-08 2023-04-07 腾讯科技(深圳)有限公司 一种数据显示方法
CN113867522A (zh) * 2021-08-31 2021-12-31 歌尔科技有限公司 一种互动投影控制方法及装置、感应垫、互动投影仪

Also Published As

Publication number Publication date
CN107562316B (zh) 2019-02-05

Similar Documents

Publication Publication Date Title
CN107562316B (zh) 界面展示方法、装置及终端
CN107577495B (zh) 界面显示方法、装置及终端
CN107547750B (zh) 终端的控制方法、装置和存储介质
CN108958681A (zh) 分屏显示的方法、装置、终端及存储介质
KR102037465B1 (ko) 사용자 단말 장치 및 이의 디스플레이 방법
CN107506086A (zh) 触摸屏控制方法、装置、移动终端及存储介质
CN108415753A (zh) 用户界面显示方法、装置及终端
CN107589900A (zh) 分屏显示方法、装置、终端及存储介质
CN107977141B (zh) 交互控制方法、装置、电子设备及存储介质
CN107577415B (zh) 触摸操作响应方法及装置
CN107704744A (zh) 身份验证方法、装置及移动终端
CN107506123A (zh) 调节操作执行方法、装置及终端
CN107526525B (zh) 一种截屏方法、装置、移动终端及计算机可读存储介质
CN110427151A (zh) 一种控制用户界面的方法及电子设备
CN107562361A (zh) 消息处理方法、装置及终端
CN107613116A (zh) 通知消息处理方法及装置
CN107526509A (zh) 消息显示方法、装置及移动终端
CN107728885A (zh) 多任务的控制方法、装置、移动终端及存储介质
CN107608550B (zh) 触摸操作响应方法及装置
CN107608551B (zh) 触摸操作响应方法及装置
CN111225138A (zh) 摄像头的控制方法、装置、存储介质及终端
WO2019233307A1 (zh) 用户界面显示方法、装置、终端及存储介质
CN107526477B (zh) 屏幕解锁方法、装置及终端
US20150063785A1 (en) Method of overlappingly displaying visual object on video, storage medium, and electronic device
CN107545167A (zh) 屏幕解锁方法、装置及终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 523860 No. 18, Wu Sha Beach Road, Changan Town, Dongguan, Guangdong

Applicant after: OPPO Guangdong Mobile Communications Co., Ltd.

Address before: 523860 No. 18, Wu Sha Beach Road, Changan Town, Dongguan, Guangdong

Applicant before: Guangdong OPPO Mobile Communications Co., Ltd.

GR01 Patent grant
GR01 Patent grant