CN105518587A - 终端设备显示方法和终端设备 - Google Patents

终端设备显示方法和终端设备 Download PDF

Info

Publication number
CN105518587A
CN105518587A CN201480014724.XA CN201480014724A CN105518587A CN 105518587 A CN105518587 A CN 105518587A CN 201480014724 A CN201480014724 A CN 201480014724A CN 105518587 A CN105518587 A CN 105518587A
Authority
CN
China
Prior art keywords
touch point
point data
layer
terminal device
ccf layer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480014724.XA
Other languages
English (en)
Other versions
CN105518587B (zh
Inventor
于波
仇建斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of CN105518587A publication Critical patent/CN105518587A/zh
Application granted granted Critical
Publication of CN105518587B publication Critical patent/CN105518587B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0252—Improving the response speed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00—Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/02—Details of power systems and of start or stop of display operation
    • G09G2330/021—Power management, e.g. power saving

Abstract

本发明实施例提供一种终端设备显示方法和终端设备。本发明终端设备显示方法，包括：通过框架层发送触摸点数据，应用层根据获取到的第一触摸点数据判断终端设备进入滑动状态后，向框架层发送用于指示将滑动绘制控制权转交给框架层的指令信息，并将生成的显示列表发送给框架层，框架层根据指令信息，从共享内存中获取第二触摸点数据，并根据第二触摸点数据和显示列表绘制图像。从而在具有重复性构图的操作时，将滑动绘制控制权从应用模块转移到框架模块，由框架模块进行近屏绘制图像，使得显示路径得到了优化，提高了终端系统的响应速度，同时降低了终端设备的功率损耗。

Description

终端设备显示方法和终端设备
技术领域
本发明实施例涉及电子技术领域，尤其涉及一种终端设备显示方法和终端设备。
背景技术
安卓(Android)原生系统包括平台化层次结构，这种结构包括硬件驱动(kernel)层、框架(applicationframework)层以及应用(applications)层等，可以理解的，分层的好处是使用下层提供的内容为上层提供统一的服务，屏蔽本层及以下层的差异，当本层及以下层发生了变化不会影响到上层。也就是说各层各司其职，各层提供固定的服务接入点SAP(ServiceAccessPoint)。其中，硬件驱动层主要与底层硬件相连，用于向框架层上报硬件反馈信息，反馈信息包括触摸的位置、触摸区域大小等；框架层用于接收硬件驱动层上报的硬件反馈信息，并进行处理、封装，以供应用层调用，例如，框架层可以根据接收到的硬件反馈信息判断用户是否按下了主页键，并将这个信息上报给应用层；应用层则根据框架层上报的信息执行相应的处理，例如，根据框架层上报的主页键按键信息执行打开主页的操作。
在现有技术的触摸——显示事件中，包括如下过程：首先，运行硬件驱动层中的触摸屏驱动去获取触摸事件，触摸事件包括触摸的位置、触摸的时间等；然后，硬件驱动层将触摸事件信息上报给框架层，框架层将触摸事件信息处理、封装，包括，触摸事件的位置、时间、触摸事件的类型(包括落手点、移动点、抬手点)，滑动的速度，加速度等；之后，框架层将处理过的信息上报给应用层，应用层再根据上述信息执行图像数据的处理，例如，执行显示新的图像的操作。具体的，应用层的图像处理包括构图、绘图、图层合成等；最后，应用层将合成好的图像数据再通过框架层发送给硬件驱动层中的显示驱动，在显示屏(例如：液晶显示屏，LiquidCrystalDisplay)上完成图像显示。这个触摸——显示的过程经过层层处理，是一个非常固定的方式。
然而，在处理重复性构图的操作时，按照现有显示流程势必要把每一个触摸动作都从驱动层层层上报到应用层，再由应用层处理后，层层发回到驱动层，最后才能完成显示，这一过程会造成大量的冗余处理操作，消耗大量的系统资源。这里所说的重复性构图，是指连续的多帧构图中大部分构图是重复的，只有少量元素发生变化的构图。
发明内容
本发明实施例提供一种终端设备显示方法和终端设备，以解决使用现有终端设备在触摸——显示流程中处理具有重复性构图的操作时，冗余操作过多、造成系统响应时间长、显示效率低以及功耗消耗大的问题。
第一方面，本发明实施例提供一种终端设备显示方法，包括：
框架层发送第一触摸点数据给应用层；当应用层根据所述第一触摸点数据判断终端设备进入滑动状态后，则向所述框架层发送指令信息，所述指令信息包括指示将滑动绘制控制权转交给所述框架层的信息，并将生成的显示列表发送给所述框架层；所述第一触摸点数据包括第二触摸点数据；
所述框架层根据所述指令信息，从共享内存中获取所述第二触摸点数据，并根据所述第二触摸点数据和所述显示列表绘制图像，所述第二触摸点数据包括触摸点的位置坐标和时间信息。
结合第一方面，在第一方面的第一种可能的实现方式中，所述方法还包括：
所述框架层根据从所述共享内存中获取的所述第二触摸点数据对用户操作的下一个位置进行预测，并根据预测的位置数据和所述显示列表绘制预测图像。
结合第一方面的第一种可能的实现方式，在第一方面的第二种可能的实现方式中，所述方法还包括：
所述框架层若根据从所述共享内存中获取的所述第二触摸点数据获知所述用户操作为急停操作，则停止显示所述预测图像。
结合第一方面或者第一方面的第一种可能的实现方式或者第一方面的第二种可能的实现方式，在第一方面的第三种可能的实现方式中，所述方法还包括：
硬件驱动层获取所述第二触摸点数据后，还将所述第二触摸点数据发送到所述共享内存中。
结合第一方面或者第一方面的第一种可能的实现方式或者第一方面的第二种可能的实现方式，在第一方面的第四种可能的实现方式中，所述方法还包括：
若检测到所述用户操作的抬手状态，所述框架层则向所述应用层发送用于指示将滑动绘制控制权转交给所述应用层的指令信息。
第二方面，本发明实施例提供一种终端设备，包括：
发送模块，用于框架层发送第一触摸点数据给应用层，当应用层根据所述第一触摸点数据判断终端设备进入滑动状态后，则向所述框架层发送指令信息，所述指令信息包括指示将滑动绘制控制权转交给所述框架层的信息，并将生成的显示列表发送给所述框架层；所述第一触摸点数据包括第二触摸点数据；
处理模块，用于所述框架层根据所述指令信息，从共享内存中获取所述第二触摸点数据，并根据所述第二触摸点数据和所述显示列表绘制图像，所述第二触摸点数据包括触摸点的位置坐标和时间信息。
结合第二方面，在第二方面的第一种可能的实现方式中，所述处理模块还包括预测单元，用于所述框架层根据从所述共享内存中获取的所述触摸点数据对用户操作的下一个位置进行预测，并根据预测的位置数据和所述显示列表绘制预测图像。
结合第二方面的第一种可能的实现方式，在第二方面的第二种可能的实现方式中，所述处理模块还包括急停单元，用于所述框架层若根据从所述共享内存中获取的所述第二触摸点数据获知所述用户操作为急停操作，则停止显示所述预测图像。
结合第二方面或者第二方面的第一种可能的实现方式或者第二方面的第二种可能的实现方式，在第二方面的第三种可能的实现方式中，所述终端设备还包括获取模块，用于将硬件驱动层获取的所述第二触摸点数据发送到所述共享内存中。
结合第二方面或者第二方面的第一种可能的实现方式或者第二方面的第二种可能的实现方式，在第二方面的第三种可能的实现方式中，所述处理模块还用于：
若检测到所述用户操作的抬手状态，所述框架层则向所述应用层发送用于指示将滑动绘制控制权转交给所述应用层的指令信息。
本发明实施例提供的终端设备显示方法和终端设备，通过框架层发送触摸点数据，应用层根据获取到的第一触摸点数据判断终端设备进入滑动状态后，向框架层发送用于指示将滑动绘制控制权转交给框架层的指令信息，并将生成的显示列表发送给框架层，框架层根据指令信息，从共享内存中获取第二触摸点数据，并根据第二触摸点数据和显示列表绘制图像，从而在具有重复性构图的操作时，将滑动绘制控制权从应用层转移到框架层，由相比应用层更接近底层硬件的框架层绘制图像(即，近屏绘图)，使得终端设备显示路径得到了优化，提高了终端设备系统的响应速度，同时降低了终端设备的功率损耗。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本发明终端设备显示方法实施例一的流程图；
图2为本发明终端设备显示方法实施例二的流程图；
图3为本发明终端设备显示方法实施例三的流程图；
图4为本发明终端设备实施例一的结构示意图；
图5为本发明终端设备实施例二的结构示意图；
图6为本发明终端设备实施例三的结构示意图；
图7为本发明终端设备实施例四的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例所述的终端设备包括终端、移动电话、平板电脑(TabletPersonalComputer)、膝上型电脑(LaptopComputer)等。
图1为本发明终端设备显示方法实施例一的流程图，如图1所示，本实施例的方法可以包括：
步骤101、框架层发送第一触摸点数据给应用层；当应用层根据所述第一触摸点数据判断终端设备进入滑动状态后，则向框架层发送指令信息，所述指令信息包括指示将滑动绘制控制权转交给框架层的信息，并将生成的显示列表发送给框架层。
其中，框架层接收硬件驱动层发送的触摸点数据包括触摸点的位置坐标和时间信息等，该位置坐标可以为触摸点所处位置的横坐标和纵坐标，框架层接收到触摸点数据后，可以在终端设备框架层中设置相应算法用以根据触摸点的位置坐标和时间信息获取触摸点的横坐标速度和纵坐标速度，或相应方向的加速度，或触摸点是落手点(down)、移动点(move)、抬手点(up)等信息，经过上述处理获得第一触摸点数据，该第一触摸点数据包含触摸点的位置坐标、时间信息，还包括根据框架层设置的相应算法获取的触摸点的横/纵坐标速度、相应方向的加速度、触摸点状态信息(落手点、移动点或者抬手点)等信息，将该第一触摸点数据发送给应用层，即框架层发送给应用层的触摸点数据为经过相应处理后得到的第一触摸点数据。第二触摸点数据为存储于共享内存中的触摸点数据，该第二触摸点数据包含触摸点的位置坐标、时间信息。因此，第一触摸点数据包括第二触摸点数据，即第二触摸点数据为第一触摸点数据的子集。
其中，应用层根据框架层发送的第一触摸点数据判断终端设备是否进入滑动状态包括：根据预先设置的触摸点数据规律模型，根据该规律模型中存储的触摸点数据规律特征及相应的用户操作终端设备模式，获知终端设备是否进入滑动状态，可选的，在预设时间内(例如，0.1秒，0.05秒)，若多个触摸点的坐标在预设范围内发生了移动(例如，触摸点的坐标从屏幕底部移动到了屏幕中部，或者触摸点的坐标从屏幕左侧移动到了屏幕右侧)，则判断所述终端设备进入滑动状态。可以理解的，终端设备进入滑动状态包括用户拉伸的滑动手势、水平、垂直、斜向的滑动手势等。可以理解的，当应用层获得单个触摸点数据时，不会认为终端设备进入滑动状态。
现有技术中，总是由应用层根据触摸点数据和显示列表绘制图像，将绘制图像发送到框架层后进行显示，即使在操作重复性构图时，依然按照上述方法进行显示处理，尤其在用户操作为滑动状态时，重复性构图的情况特别普遍，比如，桌面的左右拨动操作，操作中左右两屏的内容并没有发生构图的改变。而在本实施例中，若终端设备进入滑动状态，则向框架层发送指令信息和生成的显示列表，其中，该指令信息用于指示将滑动绘制控制权由应用层转交到框架层，即框架层根据该指令信息完成终端设备进入滑动状态后的图像绘制，该显示列表包括形成终端设备最终显示的图像的各组件的内容信息。举例而言，在终端设备主屏进行左右滑动，该主屏中包含多个应用图标和主屏背景图，则对应的,在应用层获取到左右滑动对应的触摸点数据时，根据该触摸点数据判断终端设备为滑动状态，则由应用层生成显示列表并发送给框架层，此时的显示列表包含各应用图标、主屏背景图。
步骤102、框架层根据指令信息，从共享内存中获取第二触摸点数据，并根据第二触摸点数据和显示列表绘制图像。
其中，在android系统的硬件驱动层中包含了共享内存驱动(sharedmemorydriver)，框架层可以通过运行共享内存驱动获得共享内存的数据。
其中，框架层根据指令消息从共享内存中获取第二触摸点数据，从而实现主动获取触摸点数据进行图像绘制，以提高终端设备跟手性。该共享内存中存储着用户操作中对应的多个触摸点数据，可以供框架层直接获取。
可选地，框架层根据从共享内存中获取第二触摸点数据对用户操作的下一个位置进行预测，并根据预测的位置数据和显示列表绘制图像绘制预测图像，用以提升终端设备响应速度。根据获取的第二触摸点数据对用户操作的下一个位置进行预测具体可以为，首先获取上一次终端设备垂直同步信号(v-sync)的时间，然后根据当前时间计算下一次垂直同步信号到来的时间，通过第二触摸点数据对应的位置信息和时间信息等对用户操作的下一个位置进行预测。
可选地，在框架层根据预测的位置数据和显示列表绘制预测图像时，框架层根据从共享内存中获取的第二触摸点数据进行判断用户操作是否为急停操作，该急停操作为用户停止在终端设备上的滑动操作但手指并未离开终端设备触摸屏，即此时终端设备仍可以检测到触摸点数据，可以在终端设备中设置相应的算法用以根据触摸点数据判断用户操作是否为急停操作，框架层若根据从共享内存中获取第二触摸点数据获知用户操作为急停操作，则停止显示预测图像，以防预测图像超出用户实际操作。
其中，在上述步骤中，应用层可以获取到用户操作中对应的第一触摸点数据，根据获取到的第一触摸点数据进行滑动状态判断，以及框架层根据滑动绘制控制权转交指令信息，根据从共享内存中获取的第二触摸点数据和显示列表绘制图像，其中应用层获取第一触摸点数据和框架层获取第二触摸点数据的具体实现过程为，终端设备的硬件驱动层获取用户操作中对应的触摸点数据后，将触摸点数据通过框架层发送给应用层的同时，还存储到共享内存中供框架层直接获取触摸点数据，即第一触摸点数据为通过框架层对从硬件驱动层获取的触摸点数据进行处理后的触摸点数据，第二触摸点数据包括硬件驱动层获取的触摸点数据以及将硬件驱动层获取的触摸点数据直接存储于共享内存中的触摸点数据。
进一步地，当用户停止滑动操作，终端设备不再显示重复性构图时，即终端设备需要新的显示列表时，框架层从共享内存中获取第二触摸点数据，根据该第二触摸点数据检测用户操作状态，若检测到用户操作的抬手状态，框架层则向应用层发送用于指示将滑动绘制控制权转交给应用层的指令信息，从而恢复现有技术的显示流程。可选的,根据触摸点面积减小、触摸点位置靠近边界等信息，设置相应的算法用以判断用户操作是否为抬手状态。
本实施例，在应用层根据获取到的第一触摸点数据判断终端设备进入滑动状态后，向框架层发送用于指示将滑动绘制控制权转交给框架层的指令信息，并将生成的显示列表发送给框架层，框架层根据指令信息，从共享内存中获取第二触摸点数据，并根据第二触摸点数据和显示列表绘制图像，从而在具有重复性构图的操作时，将滑动绘制控制权从应用层转移到框架层，由相比应用层更接近底层硬件的框架层绘制图像(即，近屏绘图)，使得终端设备显示路径得到了优化，提高了终端设备系统的响应速度，同时降低了终端设备的功率损耗。
下面采用两个具体的实施例，对图1所示方法实施例的技术方案进行详细说明。
图2为本发明终端设备显示方法实施例二的流程图，如图2所示，本实施例的方法可以包括：
S201、获取触摸事件对应的触摸点数据。
终端设备的输入装置，如触摸屏检测到用户的触摸事件，硬件驱动层运行触摸屏驱动将触摸事件转变为机器可读的触摸点数据，将触摸屏数据通过框架层发送给应用层，同时发送到共享内存中，共享内存对触摸点数据进行保存。
S202、应用层判断所述触摸事件是否为滑动状态，若是则执行S203，若否则执行S206。
具体地，应用层根据获取到的用户操作中对应的触摸点数据判断是否进入滑动状态。
S203、应用层向框架层发送用于指示将滑动绘制控制权转交给框架层的指令信息，并将生成的显示列表发送给框架层。
可选的，还包括步骤S204、框架层判断滑动绘制控制权是否转交，若是则执行S205，若否则执行S206。
具体地，框架层接收应用层发送的用于指示将滑动绘制控制权转交给框架层的指令信息和应用层生成的显示列表，框架层根据上述信息进行场景识别，以识别滑动绘制控制权是否转交，即确定是否应用层根据获取到的用户操作中对应的触摸点数据判断获知进入滑动状态，若是，则使用框架层进行图像绘制，若否，则按照现有技术中的正常图像绘制流程进行处理。
S205、框架层根据指令信息，从共享内存中获取触摸点数据，并根据触摸点数据和显示列表绘制图像。
具体地，在终端设备进入滑动状态，应用层将滑动绘制控制权转交给框架层时，绘制图像显示无需再由硬件驱动层通过框架层向应用层发送触摸点数据后，由应用层进行图像绘制再发送到框架层后进行显示，而是由框架层直接从共享内存中获取触摸点数据，由框架层根据触摸点数据和显示列表进行图像绘制。
S206、应用层根据显示列表和从框架层获取的触摸点数据绘制图像。
S207、显示绘制的图像。
运行显示驱动，将绘制的预测图像转变为绘制图像在显示屏上显示。
本实施例，通过终端设备的硬件驱动层获取到用户操作中对应的触摸点数据，应用层根据该触摸点数据判断是否进入滑动状态，若进入滑动状态，则向框架层发送用于指示将滑动绘制控制权转交给框架层的指令信息和其生成的显示列表，框架层接收上述信息后进一步判断滑动绘制控制权是否转交，若是，则由框架层直接从共享内存中获取触摸点数据，根据触摸点数据和显示列表绘制图像，并进行显示，从而在具有重复性构图的操作时，将滑动绘制控制权从应用层转交到框架层，由框架层进行绘制图像，使得终端设备显示路径得到了优化，提高了终端设备系统的响应速度，同时降低了终端设备的功率损耗。
图3为本发明终端设备显示方法实施例三的流程图，如图3所示，本实施例与图2所示实施例的区别在于框架层会根据触摸点数据和显示列表进行预测绘图，本实施例的方法可以包括：
S301、获取触摸事件对应的触摸点数据。
S302、应用层判断所述触摸事件是否为滑动状态，若是则执行S303，若否，则执行S310。
S303、应用层向框架层发送用于指示将滑动绘制控制权转交给框架层的指令信息，并将生成的显示列表发送给框架层。
可选的，S304、框架层判断滑动绘制控制权是否转交，若是则执行S405，若否，则执行S310。
S305、框架层根据从共享内存中获取的触摸点数据判断用户操作是否为急停操作，若否，则执行S306，若是，则执行S308。
其中，在根据从共享内存中获取的触摸点数据判断用户操作是否为急停操作时，是根据触摸点数据以及预先设置的触摸点数据规律模型进行判断而获知的。该触摸点数据规律模型中存储有触摸点数据特征和与其相对应的用户操作。
S306、框架层根据从共享内存中获取的触摸点数据对用户操作的下一个位置进行预测，并根据预测的位置数据和显示列表绘制预测图像。
通过获取的触摸点数据根据预测算法对用户操作的下一个位置进行预测，并进行预测图像绘制，从而提升终端设备的响应速度和跟手性。
S307、显示绘制的图像。
运行显示驱动，将绘制的预测图像转变为绘制图像在显示屏上显示。
S308、立即停止显示绘制的预测图像。
其中，当判断为急停操作时，则立即停止即将显示到终端设备上的预测画面，防止预测画面超出实际的用户操作。
S309、框架层若检测到用户操作的抬手状态，框架层则向应用层发送用于指示将滑动绘制控制权转交给应用层的指令信息。
即当框架层识别出用户操作的抬手状态，则由应用层控制抬手后的惯性移动过程使用正常流程绘图。
S310、应用层根据显示列表和从框架层获取的触摸点数据绘制图像。
上述S301～S304具体实施过程与实施例二中S201～S204相同，此处不再赘述。
本实施例，在实施例二的基础上，当框架层判断获知滑动绘制控制权下移时，框架层根据从共享内存中获取的触摸点数据对用户操作的下一个位置进行预测，并根据预测的位置数据和显示列表绘制图像绘制预测图像，终端设备显示层对绘制的预测图像进行显示，从而使得当用户操作到达下一个位置时，该用户操作对应的图像可以直接得到显示，从而提升终端设备的响应速度和跟手性，当框架层根据从共享内存中获取的触摸点数据判断用户操作为急停操作，则立即停止对预测图像的显示，从而防止预测画面超出用户实际操作，解决终端设备操作系统中滑动效果的跟手性问题。
图4为本发明终端设备实施例一的结构示意图，如图4所示，本实施例的装置可以包括：发送模块11和处理模块12，其中，发送模块11用于将第一触摸点数据由框架层发送给应用层，当应用层根据所述第一触摸点数据判断终端设备进入滑动状态后，则向所述框架层发送指令信息，所述指令信息包括指示将滑动绘制控制权转交给所述框架层的信息，并将生成的显示列表发送给所述框架层；所述第一触摸点数据包括第二触摸点数据；处理模块12用于所述框架层根据所述指令信息，从共享内存中获取所述第二触摸点数据，并根据所述第二触摸点数据和所述显示列表绘制图像，所述第一触摸点数据包括触摸点的位置坐标和时间信息。
本实施例的装置，可以用于执行图1所示方法实施例的技术方案，其实现原理和技术效果类似，此处不再赘述。
图5为本发明终端设备实施例二的结构示意图，如图5所示，本实施例的装置在图4所示装置结构的基础上，进一步地，所述处理模块12可以包括预测单元121，用于所述框架层根据从所述共享内存中获取的所述触摸点数据对用户操作的下一个位置进行预测，并根据预测的位置数据和所述显示列表绘制预测图像。
本实施例的装置，可以用于执行图1所示方法实施例的技术方案，其实现原理和技术效果类似，此处不再赘述。
图6为本发明终端设备实施例三的结构示意图，如图6所示，本实施例的装置在图5所示装置结构的基础上，进一步地，所述处理模块12可以包括急停单元122，用于所述框架层若根据从所述共享内存中获取的所述第二触摸点数据获知所述用户操作为急停操作，则停止显示所述预测图像。
本实施例的装置，可以用于执行图1所示方法实施例的技术方案，其实现原理和技术效果类似，此处不再赘述。
图7为本发明终端设备实施例四的结构示意图，如图7所示，本实施例的装置在图4、图5和图6所示装置结构的基础上，上述终端设备还可以包括如图7所示的获取模块13，用于将硬件驱动层获取的所述第二触摸点数据发送到所述共享内存中。
本实施例的装置，可以用于执行图1所示方法实施例的技术方案，其实现原理和技术效果类似，此处不再赘述。
在上述图4-图7所示实施例的基础上，所述处理模块12还用于，若检测到所述用户操作的抬手状态，所述框架层则向所述应用层发送用于指示将滑动绘制控制权转交给所述应用层的指令信息。
本实施例的装置，可以用于执行图1所示方法实施例的技术方案，其实现原理和技术效果类似，此处不再赘述。
在本发明所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述该作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元，可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(processor)执行本发明各个实施例所述方法的部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-OnlyMemory，ROM)、随机存取存储器(RandomAccessMemory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
本领域技术人员可以清楚地了解到，为描述的方便和简洁，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。上述描述的装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (10)

1.一种终端设备显示方法，其特征在于，包括：
框架层发送第一触摸点数据给应用层；当应用层根据所述第一触摸点数据判断终端设备进入滑动状态后，则向所述框架层发送指令信息，所述指令信息包括指示将滑动绘制控制权转交给所述框架层的信息，并将生成的显示列表发送给所述框架层；所述第一触摸点数据包括第二触摸点数据；
所述框架层根据所述指令信息，从共享内存中获取所述第二触摸点数据，并根据所述第二触摸点数据和所述显示列表绘制图像，所述第二触摸点数据包括触摸点的位置坐标和时间信息。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
所述框架层根据从所述共享内存中获取的所述第二触摸点数据对用户操作的下一个位置进行预测，并根据预测的位置数据和所述显示列表绘制预测图像。
3.根据权利要求2所述的方法，其特征在于，所述方法还包括：
所述框架层若根据从所述共享内存中获取的所述第二触摸点数据获知所述用户操作为急停操作，则停止显示所述预测图像。
4.根据权利要求1或2或3所述的方法，其特征在于，所述方法还包括：
硬件驱动层获取所述第二触摸点数据后，还将所述第二触摸点数据发送到所述共享内存中。
5.根据权利要求1～4任一所述的方法，其特征在于，所述方法还包括：
若检测到所述用户操作的抬手状态，所述框架层则向所述应用层发送用于指示将滑动绘制控制权转交给所述应用层的指令信息。
6.一种终端设备，其特征在于，包括：
发送模块，用于将第一触摸点数据由框架层发送给应用层，当所述应用层根据所述第一触摸点数据判断所述终端设备进入滑动状态后，则向所述框架层发送指令信息，所述指令信息包括指示将滑动绘制控制权转交给所述框架层的信息，并将生成的显示列表发送给所述框架层；所述第一触摸点数据包括第二触摸点数据；
处理模块，用于所述框架层根据所述指令信息，从共享内存中获取所述第二触摸点数据，并根据所述第二触摸点数据和所述显示列表绘制图像，所述第二触摸点数据包括触摸点的位置坐标和时间信息。
7.根据权利要求6所述的终端设备，其特征在于，所述处理模块还包括预测单元，用于所述框架层根据从所述共享内存中获取的所述触摸点数据对用户操作的下一个位置进行预测，并根据预测的位置数据和所述显示列表绘制预测图像。
8.根据权利要求7所述的终端设备，其特征在于，所述处理模块还包括急停单元，用于所述框架层若根据从所述共享内存中获取的所述第二触摸点数据获知所述用户操作为急停操作，则停止显示所述预测图像。
9.根据权利要求6或7或8所述的终端设备，其特征在于，所述终端设备还包括获取模块，用于将硬件驱动层获取的所述第二触摸点数据发送到所述共享内存中。
10.根据权利要求6～9任一所述的终端设备，其特征在于，所述处理模块还用于：
若检测到所述用户操作的抬手状态，所述框架层则向所述应用层发送用于指示将滑动绘制控制权转交给所述应用层的指令信息。
CN201480014724.XA 2014-05-30 2014-05-30 终端设备显示方法和终端设备 Active CN105518587B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2014/078904 WO2015180124A1 (zh) 2014-05-30 2014-05-30 终端设备显示方法和终端设备

Publications (2)

Publication Number Publication Date
CN105518587A true CN105518587A (zh) 2016-04-20
CN105518587B CN105518587B (zh) 2018-08-21

Family

ID=54697901

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480014724.XA Active CN105518587B (zh) 2014-05-30 2014-05-30 终端设备显示方法和终端设备

Country Status (4)

Country Link
US (1) US10254950B2 (zh)
EP (1) EP3133481B1 (zh)
CN (1) CN105518587B (zh)
WO (1) WO2015180124A1 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105897687A (zh) * 2015-12-30 2016-08-24 乐视致新电子科技（天津）有限公司 一种传输数据的方法和设备
CN106933486A (zh) * 2017-03-13 2017-07-07 广州视源电子科技股份有限公司 用于安卓系统的触控实现方法及装置
WO2018098960A1 (zh) * 2016-12-01 2018-06-07 华为技术有限公司 一种触屏设备操作方法及触屏设备
CN108475284A (zh) * 2016-11-30 2018-08-31 华为技术有限公司 显示图像的方法、装置和终端设备
CN112068761A (zh) * 2020-08-26 2020-12-11 北京小米移动软件有限公司 触屏数据处理方法、触屏数据处理装置及存储介质
US11934652B2 (en) 2020-10-14 2024-03-19 Samsung Electronics Co., Ltd. Display apparatus and control method thereof

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109669783B (zh) * 2017-10-13 2023-09-22 斑马智行网络(香港)有限公司 数据处理方法和设备
CN111324226A (zh) * 2018-12-13 2020-06-23 鸿合科技股份有限公司 一种触控消息处理方法及装置、电子设备
CN110045819B (zh) * 2019-03-01 2021-07-09 华为技术有限公司 一种手势处理方法及设备
CN116661723B (zh) * 2023-06-09 2024-01-12 深圳市黑金工业制造有限公司 一种应用于智慧显示屏的信息评价管理系统及方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102279667A (zh) * 2011-08-25 2011-12-14 中兴通讯股份有限公司 一种响应屏幕触摸事件的方法、装置及通讯终端
CN103176738A (zh) * 2013-02-01 2013-06-26 深圳桑菲消费通信有限公司 一种手机触屏的扩展使用方法、系统和手机
CN103176633A (zh) * 2011-12-21 2013-06-26 珠海全志科技股份有限公司 一种触摸屏防误操作方法、装置和系统
CN103488321A (zh) * 2012-06-14 2014-01-01 腾讯科技（深圳）有限公司 一种在触摸屏终端上识别触摸动作的方法及装置
WO2014052934A2 (en) * 2012-09-28 2014-04-03 Robb Fujioka Tablet computer

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130024778A1 (en) 2011-07-13 2013-01-24 Z124 Dynamic cross-environment application configuration/orientation
US7903115B2 (en) 2007-01-07 2011-03-08 Apple Inc. Animations
US9298260B2 (en) * 2010-03-12 2016-03-29 Broadcom Corporation Tactile communication system with communications based on capabilities of a remote system
CN101980118B (zh) * 2010-10-22 2012-07-04 福建鑫诺通讯技术有限公司 一种在Android平台下实现触摸屏校准的方法
CN101980153B (zh) * 2010-10-22 2015-07-22 中兴通讯股份有限公司 一种识别硬件手势的方法及移动终端
EP3511336B1 (en) 2011-06-28 2023-06-21 Leukocare Ag Method for preventing the unfolding of a (poly)peptide and/or inducing the (re-)folding of a (poly)peptide
KR20140056860A (ko) * 2012-11-01 2014-05-12 주식회사 팬택 광 센서를 구비한 전자 기기 및 이의 제어 방법, 이 전자 기기를 위한 제스처 인식 장치와 방법
KR102059598B1 (ko) * 2013-01-29 2019-12-26 삼성전자주식회사 디지털 촬영 장치 및 그의 제어 방법
GB2524473A (en) * 2014-02-28 2015-09-30 Microsoft Technology Licensing Llc Controlling a computing-based device using gestures

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102279667A (zh) * 2011-08-25 2011-12-14 中兴通讯股份有限公司 一种响应屏幕触摸事件的方法、装置及通讯终端
CN103176633A (zh) * 2011-12-21 2013-06-26 珠海全志科技股份有限公司 一种触摸屏防误操作方法、装置和系统
CN103488321A (zh) * 2012-06-14 2014-01-01 腾讯科技（深圳）有限公司 一种在触摸屏终端上识别触摸动作的方法及装置
WO2014052934A2 (en) * 2012-09-28 2014-04-03 Robb Fujioka Tablet computer
CN103176738A (zh) * 2013-02-01 2013-06-26 深圳桑菲消费通信有限公司 一种手机触屏的扩展使用方法、系统和手机

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105897687A (zh) * 2015-12-30 2016-08-24 乐视致新电子科技（天津）有限公司 一种传输数据的方法和设备
CN108475284A (zh) * 2016-11-30 2018-08-31 华为技术有限公司 显示图像的方法、装置和终端设备
WO2018098960A1 (zh) * 2016-12-01 2018-06-07 华为技术有限公司 一种触屏设备操作方法及触屏设备
CN108604142A (zh) * 2016-12-01 2018-09-28 华为技术有限公司 一种触屏设备操作方法及触屏设备
CN108604142B (zh) * 2016-12-01 2021-05-18 华为技术有限公司 一种触屏设备操作方法及触屏设备
CN106933486A (zh) * 2017-03-13 2017-07-07 广州视源电子科技股份有限公司 用于安卓系统的触控实现方法及装置
CN112068761A (zh) * 2020-08-26 2020-12-11 北京小米移动软件有限公司 触屏数据处理方法、触屏数据处理装置及存储介质
CN112068761B (zh) * 2020-08-26 2022-03-18 北京小米移动软件有限公司 触屏数据处理方法、触屏数据处理装置及存储介质
US11934652B2 (en) 2020-10-14 2024-03-19 Samsung Electronics Co., Ltd. Display apparatus and control method thereof

Also Published As

Publication number Publication date
EP3133481A4 (en) 2017-06-07
WO2015180124A1 (zh) 2015-12-03
US10254950B2 (en) 2019-04-09
EP3133481A1 (en) 2017-02-22
US20170199642A1 (en) 2017-07-13
EP3133481B1 (en) 2018-10-31
CN105518587B (zh) 2018-08-21

Similar Documents

Publication Publication Date Title
CN105518587A (zh) 终端设备显示方法和终端设备
CN109740732B (zh) 神经网络处理器、卷积神经网络数据复用方法及相关设备
CN106406712B (zh) 信息显示方法及装置
KR101229699B1 (ko) 애플리케이션 간의 콘텐츠 이동 방법 및 이를 실행하는 장치
CN108984064B (zh) 分屏显示方法、装置、存储介质和电子设备
CN103955339A (zh) 一种终端操作方法及终端设备
CN102037434A (zh) 利用拖拽操作来平摇内容
CN102609184A (zh) 在触摸屏终端中提供鼠标右击功能的方法和装置
KR20150069801A (ko) 화면 제어 방법 및 그 전자 장치
CN109933252B (zh) 一种图标移动方法及终端设备
CN106293160A (zh) 一种多显示器之间鼠标指针切换的方法及装置
CN103064734A (zh) 终端设备以及多系统输入切换方法
CN104035714B (zh) 一种基于安卓系统的触摸事件处理方法、装置和设备
KR20200102491A (ko) 사용자 인터페이스의 디스플레이 방법, 장치 및 디바이스
CN104035678A (zh) 滚动方法及使用该滚动方法的电子设备
CN108885536A (zh) 一种跟手性补偿方法、装置及终端设备
CN105095259B (zh) 瀑布流对象显示方法及装置
CN110471870B (zh) 多系统运行的方法、装置、电子设备及存储介质
CN105512124A (zh) 在网页中实现文本编辑器悬浮的方法和装置
CN103488424A (zh) 一种信息展示的方法及装置
US10101894B2 (en) Information input user interface
CN104375708A (zh) 触摸输入事件处理方法及设备
CN105278795A (zh) 一种显示功能栏的方法和装置
CN109582084A (zh) 电脑系统及其输入方法
CN109960562B (zh) 一种信息展示方法、装置和计算机可读存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant