CN115033122A - 电子设备的屏幕控制方法、可读介质和电子设备 - Google Patents

电子设备的屏幕控制方法、可读介质和电子设备 Download PDF

Info

Publication number
CN115033122A
CN115033122A CN202110236124.XA CN202110236124A CN115033122A CN 115033122 A CN115033122 A CN 115033122A CN 202110236124 A CN202110236124 A CN 202110236124A CN 115033122 A CN115033122 A CN 115033122A
Authority
CN
China
Prior art keywords
processor
touch
screen
display screen
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110236124.XA
Other languages
English (en)
Inventor
李家文
靳百萍
宋明东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN202110236124.XA priority Critical patent/CN115033122A/zh
Priority to PCT/CN2022/077977 priority patent/WO2022183985A1/zh
Priority to JP2023552060A priority patent/JP2024508830A/ja
Priority to US18/548,519 priority patent/US20240168573A1/en
Priority to EP22762450.9A priority patent/EP4280032A1/en
Publication of CN115033122A publication Critical patent/CN115033122A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547Touch pads, in which fingers can move on a surface
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234Power saving characterised by the action undertaken
    • G06F1/3293Power saving characterised by the action undertaken by switching to a less power-consuming processor, e.g. sub-CPU
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1643Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206Monitoring of events, devices or parameters that trigger a change in power modality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234Power saving characterised by the action undertaken
    • G06F1/325Power saving in peripheral device
    • G06F1/3265Power saving in display device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234Power saving characterised by the action undertaken
    • G06F1/3287Power saving characterised by the action undertaken by switching off individual functional units in the computer system
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请公开了一种电子设备的屏幕控制方法、可读介质和电子设备。该方法包括:电子设备的第二处理器处理显示屏和触摸屏的相关信息;电子设备在检测到用户开始第一触摸操作的情况下,将显示屏的处理权限由第二处理器切换到第一处理器,并将检测到的第一触摸操作的第一触摸数据经由第二处理器发送给第一处理器,并且电子设备在检测到第一触摸操作结束的情况下,将触摸屏的处理权限由第二处理器切换到第一处理器。本申请方案在屏幕切换过程中,先切换显示屏的处理权限再切换触摸屏的处理权限,并且第一处理器通过第二处理器接收触摸数据,使得第一处理器可以接收到完整的触摸数据,进而准确地响应用户的触摸事件,实现无感切换,提升用户体验。

Description

电子设备的屏幕控制方法、可读介质和电子设备
技术领域
本申请涉及终端技术领域,特别涉及一种电子设备的屏幕控制方法、可读介质和电子设备。
背景技术
电子设备的触摸屏作为人机交互的载体,广泛应用于各种智能电子设备中。用户只需用手指触摸智能电子设备的触摸屏,就能实现对电子设备的操作,从而实现更为直观、便捷的人机交互。
为了实现更高的能效比,通常会在电子设备的硬件架构上采用双处理器方案,即一个高性能的主处理器负责操作系统的运行,处理高运算量的任务,如地图,导航,电话等功能。一个低功耗协处理器负责一些低运算量的任务,诸如传感器数据的采集和处理等。这样一来,由于高性能的主处理器和低功耗的协处理器共享一套显示屏和触摸屏,在系统之间切换时,容易造成用户界面的丢点、卡顿等问题。
发明内容
本申请实施例提供了一种电子设备的屏幕控制方法、可读介质和电子设备。本申请方案在屏幕切换过程中,通过先切换显示屏的处理权限,待显示屏切换完成后再切换触摸屏的处理权限。并且在触摸屏切换的过程中,第一处理器通过第二处理器接收触摸数据,使得第一处理器可以接收到完整的触摸数据,从而准确地解析出与该次完整的触摸数据对应的用户的本次操作事件,进而准确地响应用户的本次操作事件。避免在屏幕切换过程中,导致电子设备生成的与用户操作对应的数据的丢失,从而给用户带来滑动不流畅的体验的问题的出现。实现无感切换,提升用户体验。
第一方面,本申请实施例提供了一种电子设备的屏幕控制方法,包括:
电子设备的第二处理器处理显示屏和触摸屏的相关信息;电子设备在检测到用户开始第一触摸操作的情况下,将显示屏的处理权限由第二处理器切换到第一处理器,并将检测到的第一触摸操作的第一触摸数据经由第二处理器发送给第一处理器,并且电子设备在检测到第一触摸操作结束的情况下,将触摸屏的处理权限由第二处理器切换到第一处理器。
其中,显示屏和触摸屏的相关信息包括但不限于:一种或多种类型的数据,例如,对应于用户触摸操作的触摸数据;一种或多种类型的信令,例如,在图5所示的实施例中,协处理器应用层发送给主处理器的唤醒指令;一种或多种类型的消息,例如,在图5所示的实施例中,触摸芯片向协触控驱动发送的中断消息;一种或多种类型的通知,一种或多种类型的请求,一种或多种类型的响应,一种或多种类型的信号等。
例如,在一些实施例中,电子设备在休眠状态时,由第二处理器处理显示屏和触摸屏的相关信息。当电子设备检测到用户开始在屏幕上滑动时,将显示屏的处理权限由第二处理器切换到第一处理器,并将检测到的第一触摸操作的第一触摸数据经由第二处理器发送给第一处理器。并且,当电子设备检测到用户的手指离开屏幕时,确定出用户的本次触摸操作结束,将触摸屏的处理权限由第二处理器切换到第一处理器。在触摸屏切换的过程中,第一处理器通过第二处理器接收触摸数据,使得第一处理器可以接收到完整的触摸数据,从而准确地解析出与该次完整的触摸数据对应的用户的本次操作事件,进而准确地响应用户的本次操作事件。实现无感切换,提升用户体验。
应理解:本文中“显示屏的处理权限”是指显示屏相关信息的处理权限,“触摸屏的处理权限”是指触摸屏相关信息的处理权限。
在上述第一方面的一种可能的实现中,上述方法还包括:电子设备包括虚拟触控驱动,电子设备将第一触摸操作的第一触摸数据经由第二处理器发送给虚拟触控驱动,第一处理器经由虚拟触控驱动接收第一触摸数据。
在一些实施例中,第一处理器为主处理器,可以运行高性能的操作系统,处理使用频率较低的高运算量的任务。例如,主处理器运行
Figure BDA0002960221670000021
系统,支持导航、电话、地图、聊天、音乐播放等功能。
在一些实施例中,第二处理器为协处理器,可以运行低功耗的轻量级的系统,处理使用频率较高的低运算量的任务。例如,协处理器运行轻量级的嵌入式系统,负责传感器数据的采集、处理,支持时间显示、计算器、定时器、闹钟、测心率、计步、测高度等功能。
在一些实施例中,虚拟触控驱动为图3所示的实施例中的主虚拟触控驱动,用于在显示屏的处理权限已经被切换给主处理器,而触摸屏的处理权限依然在协处理器的情况下,主处理器通过主虚拟触控驱动读取由协处理器发来的触摸数据。
在上述第一方面的一种可能的实现中,上述方法还包括:电子设备在检测到用户开始第一触摸操作的情况下,将显示屏的处理权限由第二处理器切换到第一处理器包括:
电子设备在检测到用户开始第一触摸操作的情况下,通过第二处理器向第一处理器发送唤醒指令;第一处理器接收到唤醒指令后,响应唤醒指令,并且向第二处理器发送屏幕切换的中断请求;第二处理器接收到屏幕切换的中断请求后,响应中断请求,将显示屏的处理权限由第二处理器切换到第一处理器。
在一些实施例中,第一处理器为主处理器,第二处理器为协处理器,电子设备通过协处理器应用层向主处理器发送唤醒指令。
在上述第一方面的一种可能的实现中,上述方法还包括:
电子设备的第一处理器处理显示屏和触摸屏的相关信息;电子设备在检测到用户有针对电子设备的设定应用的交互操作的情况下,将显示屏和触摸屏的处理权限由第一处理器切换到第二处理器,由电子设备的第二处理器处理显示屏和触摸屏的相关信息。
其中,设定应用是指需要由第二处理器处理的例如计算器、定时器、闹钟、运动等使用频率较高、运算量较低的应用。由第二处理器代替第一处理器来处理使用频率高、时间长的应用,可以实现降低功耗,提升电子设备的续航能力。
在上述第一方面的一种可能的实现中,上述方法还包括:电子设备在检测到用户有针对电子设备的设定应用的交互操作的情况下,将显示屏和触摸屏的处理权限由第一处理器切换到第二处理器,由电子设备的第二处理器处理显示屏和触摸屏的相关信息包括:
电子设备在检测到用户有针对电子设备的设定应用的交互操作的情况下,将显示屏的处理权限由第一处理器切换到第二处理器;在电子设备确定出显示屏的处理权限由第一处理器切换到第二处理器之后,将触摸屏的处理权限由第一处理器切换到第二处理器。
如此,可以避免在屏幕切换过程中,用户触摸数据的丢失,实现无感切换,提升用户体验。
在上述第一方面的一种可能的实现中,上述方法还包括:电子设备的第一处理器处理显示屏和触摸屏的相关信息;电子设备在检测到用户开始第二触摸操作的情况下,将检测到的第二触摸操作的第二触摸数据发送给第一处理器。
例如,在一些实施例中,当前正在运行电子设备的第一处理器,由第一处理器控制显示屏和触摸屏,当用户的手指在电子设备的屏幕上滑动时,由第一处理器读取由触摸芯片生成的对应于用户本次触摸操作的触摸数据。
在上述第一方面的一种可能的实现中,上述方法还包括:电子设备包括显示屏切换开关,显示屏切换开关电连接显示屏,并且电子设备在检测到用户开始第一触摸操作的情况下,通过以下方式将显示屏的处理权限由第二处理器切换到第一处理器:
电子设备在检测到用户开始第一触摸操作的情况下,控制显示屏切换开关与第二处理器断开连接,并控制显示屏切换开关连通第一处理器。
例如,在一些实施例中,第一处理器和第二处理器的MIPI接口通过开关S2连接到显示屏的MIPI接口上。电子设备在检测到用户开始第一触摸操作的情况下,控制开关S2与第二处理器断开连接,并控制开关S2连通第一处理器。
在上述第一方面的一种可能的实现中,上述方法还包括:电子设备包括触摸屏切换开关,触摸屏切换开关电连接触摸屏,并且电子设备在检测到第一触摸操作结束的情况下,通过以下方式将触摸屏的处理权限由第二处理器切换到第一处理器:
电子设备在检测到第一触摸操作结束的情况下,控制触摸屏切换开关与第二处理器断开连接,并控制触摸屏切换开关连通第一处理器。
例如,在一些实施例中,第一处理器和第二处理器的I2C接口通过开关S1连接到触摸屏的I2C接口上,电子设备在检测到第一触摸操作结束的情况下,控制开关S1与第二处理器断开连接,并控制开关S1连通第一处理器。
第二方面,本申请实施例提供了一种可读介质,可读介质上存储有指令,该指令在电子设备上执行时使电子设备执行上述第一方面以及第一方面的各种可能实现中的任意一种屏幕控制方法。
第三方面,本申请实施例提供了一种电子设备,包括:
屏幕,屏幕包括显示屏和触摸屏;
存储器,用于存储由电子设备的一个或多个处理器执行的指令,以及
第一处理器,是电子设备的处理器之一;
第二处理器,是电子设备的处理器之一,用于与第一处理器配合执行上述第一方面以及第一方面的各种可能实现中的任意一种屏幕控制方法。
附图说明
图1(a)示出了相关技术方案中,电子设备的一次屏幕切换的时序图;
图1(b)根据本申请的一些实施例,示出了电子设备在执行本申请提供的屏幕的切换控制方法的情况下,电子设备的一次屏幕切换的时序图;
图1(c)根据本申请的一些实施例,示出了本申请提供的一种屏幕的切换控制方法的应用场景;
图2根据本申请的一些实施例,示出了图1所示的智能手表的硬件结构框图;
图3根据本申请的一些实施例,示出了图1所示的智能手表的系统架构图;
图4(a)根据本申请的一些实施例,示出了智能手表处于灭屏状态的界面图;
图4(b)根据本申请的一些实施例,示出了用户抬腕/按键后智能手表亮屏的界面图;
图4(c)根据本申请的一些实施例,示出了用户滑动屏幕后智能手表显示的桌面图;
图5根据本申请的一些实施例,示出了本申请提供的一种屏幕的切换控制方法的交互图;
图6根据本申请的一些实施例,示出了协处理器切换显示屏的原理图;
图7(a)根据本申请的一些实施例,示出了用户点击智能手表桌面的运动应用的示意图;
图7(b)根据本申请的一些实施例,示出了用户点击智能手表桌面的运动应用后,进入运动应用的界面图;
图8根据本申请的一些实施例,示出了本申请提供的另一种屏幕的切换控制方法的交互图;
图9根据本申请的一些实施例,示出了本申请提供的一种系统交互方法的流程图。
具体实施方式
本申请的实施例包括但不限于一种电子设备的屏幕控制方法、可读介质和电子设备。
为了解决在具有双处理器的电子设备中进行屏幕切换时出现数据丢失、屏幕卡顿的问题,本申请实施例提供了一种电子设备的屏幕控制方法。具体地,当电子设备在一些场景下进行系统切换时,先切换显示屏的处理权限,待显示屏的处理权限切换完成后再切换触摸屏的处理权限。例如,电子设备为双处理器设备,具有主处理器和协处理器,用户将该电子设备佩戴在手腕上,当用户抬起佩戴有该电子设备的手腕时,会唤醒电子设备的协处理器,由协处理器控制显示屏和触摸屏,当用户的手指在电子设备的屏幕上滑动时,电子设备先将显示屏的处理权限切换给主处理器,待用户的本次滑动操作完成之后,电子设备再将触摸屏的处理权限切换给主处理器。
在相关技术方案中,如图1(a)所示,在t1时刻,当处于灭屏状态的电子设备接收到用户的按键操作后,协处理器被唤醒,由协处理器控制显示屏和触摸屏;在t2时刻,当用户的手指开始在电子设备的屏幕上滑动时,电子设备同时将显示屏和触摸屏的处理权限均切换给主处理器,由主处理器控制显示屏和触摸屏。这样有可能会造成在用户一次完整的触摸操作还未完成的情况下,电子设备将触摸屏的相关信息的处理权限由协处理器切换到主处理器,从而导致在触摸屏的切换过程中,用户的触摸数据部分丢失,从而导致主处理器无法完全接收触摸数据,从而无法准确地解析出与用户触摸数据对应的用户的操作事件,进而无法准确地响应用户的操作事件,而出现屏幕切换过程中的卡顿现象,影响用户体验。
而在本申请的一些实施例中,如图1(b)所示,在t1时刻,当处于灭屏状态的电子设备接收到用户的按键操作后,协处理器被唤醒,由协处理器控制显示屏和触摸屏;在t2时刻,当用户的手指开始在电子设备的屏幕上滑动时,主处理器被唤醒,电子设备先将显示屏的处理权限切换给主处理器,由主处理器控制显示屏,而触摸屏的处理权限依然在协处理器;在t3时刻,当用户的手指从电子设备的屏幕上抬起,即本次滑动操作结束后,电子设备再将触摸屏的处理权限切换给主处理器。
需要说明的是,在本申请的一些实施例中,当显示屏的处理权限被切换给主处理器,而触摸屏的处理权限依然保持在协处理器的情况下,电子设备通过创建对应于主处理器中关于触摸屏的虚拟驱动(为了简化描述,下文简称主虚拟触控驱动),来接收由协处理器发来的触摸数据。从而使得当主处理器已经开始控制显示屏逐帧显示图像,而触摸屏还未完成切换的过程中,主处理器可以通过主虚拟触控驱动接收对应于用户本次触摸操作的完整的触摸数据。进而使得主处理器可以根据接收到的完整的触摸数据,准确地解析出与该次完整的触摸数据对应的用户的本次操作事件,进而准确地响应用户的本次操作事件。避免在系统切换过程中,导致电子设备生成的与用户操作对应的数据的丢失,从而给用户带来滑动不流畅的体验的问题的出现。实现无感切换,提升用户体验。
可以理解的是,当触摸屏的处理权限在主处理器时,由主处理器负责处理电子设备生成的与用户的触摸操作对应的触摸数据;当触摸屏的处理权限在协处理器时,由协处理器负责处理电子设备生成的与用户的触摸操作对应的触摸数据。
下面将结合附图对本申请的实施例作进一步地详细描述。
图1(c)根据本申请的一些实施例,示出了一种本申请提供的屏幕控制方法的应用场景。其中,用户的左手手腕处佩戴着双处理器的智能手表100。智能手表100包括主处理器和协处理器,主处理器和协处理器共用一个屏幕。
其中,主处理器可以运行高性能的操作系统,处理使用频率较低的高运算量的任务。例如,主处理器运行
Figure BDA0002960221670000061
系统,支持导航、电话、地图、聊天、音乐播放等功能。协处理器可以运行低功耗的轻量级的系统,处理使用频率较高的低运算量的任务。例如,协处理器运行轻量级的嵌入式操作系统,负责传感器数据的采集、处理,支持时间显示、计算器、定时器、闹钟、测心率、计步、高度测量等功能。通过低功耗的协处理器来代替主处理器来处理使用频率高、运算量低的任务,从而降低功耗,提升智能手表100的续航能力。
另外,主处理器和协处理器共用一个屏幕,屏幕包括显示屏和触摸屏。在一些实施例中,屏幕可以由触摸屏和显示屏叠在一起组成。基于双处理器的硬件架构,智能手表100处于灭屏状态时,主处理器和协处理器均处于休眠状态,由协处理器控制显示屏和触摸屏;当处于休眠状态的协处理器检测到用户对触摸屏的触摸操作或者用户的按键操作时,将显示屏和触摸屏的处理权限切换给主处理器;在主处理器控制显示屏和触摸屏的过程中,若主处理器检测到用户点击了一些需要协处理器处理的应用时,再将显示屏和触摸屏的处理权限切换给协处理器。
然而在相关技术中,显示屏和触摸屏的处理权限在主处理器和协处理器之间的切换过程中,会出现用户的触摸数据部分缺失,用户对触摸屏的滑动不流畅,出现显示给用户的界面卡顿的现象。
为了解决上述问题,当智能手表100的显示屏和触摸屏的处理权限在主处理器和协处理器之间切换时,智能手表100通过执行本申请实施例提供的屏幕的切换控制方法,先切换显示屏的处理权限,待显示屏的处理权限切换完成后再切换触摸屏的处理权限。例如,在将显示屏和触摸屏的处理权限由协处理器切换到主处理器的过程中,主处理器通过主虚拟触控驱动来接收由协处理器发来的触摸数据。从而保证在显示屏和触摸屏的切换过程中,智能手表100可以完整地获取到触摸屏生成的与用户的触摸操作对应的数据,从而准确地响应用户的触摸操作,执行相应的任务。在降低整机功耗的同时,实现无感切换,提升用户体验。
可以理解的是,本申请的技术方案可以应用于具有双处理器、显示屏和触摸屏的各种电子设备。包括但不限于,智能手表、膝上型计算机、台式计算机、平板计算机、手机、服务器、可穿戴设备、头戴式显示器、移动电子邮件设备、便携式游戏机、便携式音乐播放器、阅读器设备、其中嵌入或耦接有一个或多个处理器的电视机、或能够访问网络的其他电子设备。
在下文的描述中,为了简化说明,以智能手表100为例,介绍本申请的技术方案。
图2根据本申请的一些实施例,示出了图1所示的智能手表100的硬件结构框图。如图2所示,智能手表100包括触摸屏101、显示屏102、主处理器103、协处理器104、存储器105、通信模块106、传感器模块107、电源108、触摸屏101的切换开关S1、显示屏102的切换开关S2、电源管理系统109以及触摸芯片110等。
触摸屏101,也可以称为触控面板,可以采集用户在屏幕上的点击、滑动等的触摸操作。在一些实施例中,触摸屏101可以通过I2C(Inter-Integrated Circuit)总线和主处理器103、协处理器104通信。触摸屏101可以为电阻式、表面电容式、投射电容式、红外线式、表面声波式、弯曲波式、有源数字切换器式以及光学成像式触摸屏。
触摸芯片110与触摸屏101电连接,触摸屏101工作时,触摸芯片110会以一定的扫描频率对触摸屏101进行扫描,以获取用户的触摸数据,例如触摸点的坐标、压力、面积以及切边值等数据。再将获取的用户的触摸数据上报至主处理器103或协处理器104进行处理,主处理器103或协处理器104对触摸数据进行处理后,将对应用户触摸操作的图像逐帧显示出来。
显示屏102可以用于显示用户输入的信息、提供给用户的提示信息、智能手表100上的各种菜单、智能手表100的各种应用程序的操作界面等等。例如,显示屏102可以用于显示当前的时间、健康检测应用测得的用户的心率、运动应用计算的用户运动时的步数等等。在一些实施例中,显示屏102可以通过移动行业处理器接口(Mobile Industry ProcessorInterface,MIPI)总线和主处理器103、协处理器104通信。显示屏102可以包括显示面板,显示面板可以采用液晶显示屏(Liquid Crystal Display,LCD),有机发光二极管(OrganicLight-emitting Diode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(Active-matrix Organic Light-emitting Diode的,AMOLED),柔性发光二极管(FlexLight-emitting Diode,FLED),Mini LED,Micro LED,Micro OLED,量子点发光二极管(Quantum Dot Light-emitting Diodes,QLED)等。
主处理器103包括多个处理单元,可以运行
Figure BDA0002960221670000071
等操作系统,用来处理与导航、电话、地图、聊天、音乐播放等应用相关的任务,以及在智能手表100的触摸屏101和显示屏102的处理权限切换给主处理器103的情况下,处理用户对触摸屏101触摸所产生的数据等。
协处理器104,可以运行轻量级的嵌入式操作系统,用于负责传感器数据的采集、处理,处理与时间显示、计算器、定时器、闹钟、测心率、计步、高度测量等应用相关的任务,以及在智能手表100的触摸屏101和显示屏102的处理权限切换给协处理器104的情况下,处理用户对触摸屏101触摸的数据等。在一些实施例中,协处理器104可以包括数字信号处理器(Digital Signal Processer,DSP)、微控制单元(Microcontroller Unit,MCU)、可编程逻辑器件(Field Programmable Gate Array,FPGA)、专用集成电路(ApplicationSpecific Integrated Circuit,ASIC)等的处理模块或处理电路。
在一些实施例中,主处理器103和协处理器104的I2C接口通过开关S1连接到触摸屏101的I2C接口上,主处理器103和协处理器104的MIPI接口通过开关S2连接到显示屏102的MIPI接口上。并且主处理器103和协处理器104通过通用输入输出(General-purposeinput/output,GPIO)接口(图中未示出)连接到开关S2上,主处理器103通过GPIO接口电平的拉高或拉低,来向协处理器104发送显示屏102的切换请求,待显示屏102的处理权限完成切换后,再切换触摸屏101的处理权限。
存储器105用于存储软件程序以及数据,处理器203通过运行存储在存储器105中的软件程序以及数据,执行智能手表100的各种功能应用以及数据处理。例如,在本申请的一些实施例中,存储器105可以存储用户在运动过程中,传感器采集到的气压、温度等数据;存储用户的睡眠数据、心率数据等等。同时,存储器105也可以存储用户的注册信息、登录信息等。
通信模块106可以用来使智能手表100和其他电子设备进行通信,并通过其他电子设备连接网络。例如,智能手表100通过通信模块106和手机、服务器等电子建立连接,进行数据传输。
传感器模块107可以包括接近光传感器、压力传感器,陀螺仪传感器,气压传感器,磁传感器,加速度传感器,距离传感器,指纹传感器,温度传感器,触摸传感器,环境光传感器,骨传导传感器等。
电源108用于为智能手表100的各个部件供电。电源108可以为电池。
电源管理系统109用于管理电源108的充电以及电源108向其他模块的供电。
可以理解,图2所示的智能手表100仅仅是实现本申请技术方案中智能手表100的功能的一种示例性结构,并不构成对智能手表100的具体限定。在本申请的另一些实施例中,智能手表100可以包括比图2所示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图2所示的部件可以以硬件,软件或软件和硬件的组合实现。
图3根据本申请的一些实施例,示出了图2所示的智能手表100中由主处理器103和协处理器104控制运行的两个操作系统(如
Figure BDA0002960221670000081
系统和轻量级的嵌入式操作系统)的架构图。如图3所示,智能手表100的主处理器103和协处理器104运行的两个操作系统均包括应用层302、驱动层301和器件层300,故在此不做区分,而对各层中具体的原件进行区分。其中,主处理器103和协处理器104共享显示屏102和触摸屏101以及触摸芯片110。
如图3所示,器件层300包括显示屏102、触摸屏101、显示屏102的切换开关S2、触摸屏101的切换开关S1、主处理器103、协处理器104以及触摸芯片110等。器件层300中各个器件的功能请参考上述关于图2部分的文字描述,在此不再赘述。
驱动层301用于驱动上述器件层300中的各个器件,实现对各个器件的读写访问,中断设置等功能。
如图3所示,在协处理器104运行的轻量级的嵌入式操作系统中,驱动层301包括但不限于协触控驱动301a。协触控驱动301a可以是协处理器104运行的轻量级的嵌入式操作系统中用于驱动触摸屏101,并能够读取触摸芯片110生成的触摸数据的软件程序。
例如,在图1(b)所示的实施例中,在t1时刻,当处于灭屏状态的智能手表100接收到用户的按键操作后,协处理器104被唤醒,由协处理器104处理显示屏102和触摸屏101的相关信息,其中,显示屏102和触摸屏101的相关信息包括但不限于:一种或多种类型的数据,例如,对应于用户触摸操作的触摸数据;一种或多种类型的信令,例如,在图5所示的实施例中,协处理器应用层发送给主处理器103的唤醒指令;一种或多种类型的消息,例如,在图5所示的实施例中,触摸芯片110向协触控驱动301a发送的中断消息;一种或多种类型的通知,一种或多种类型的请求,一种或多种类型的响应,一种或多种类型的信号等。协处理器104通过协触控驱动301a驱动触摸屏101,并读取用户的触摸数据。
应理解:本文中“显示屏102的处理权限”是指显示屏101相关信息的处理权限,“触摸屏101的处理权限”是指触摸屏101相关信息的处理权限。
在主处理器103运行的
Figure BDA0002960221670000091
系统中,驱动层301包括但不限于用于接收及发送用户的触摸数据的主虚拟触控驱动301b、主触控驱动301c等。其中,主触控驱动301c是主处理器103中运行的高性能的操作系统中用于驱动触摸屏101的软件程序,并能够在当显示屏102和触摸屏101的处理权限均切换到主处理器103的情况下,读取图3中所示的由触摸芯片110生成的切换后的触摸数据(即显示屏102和触摸屏101的处理权限均已切换到主处理器103后,用户再次触摸屏幕,由触摸芯片110生成的对应用户的再次触摸操作的数据)。
主虚拟触控驱动301b是主处理器103在初始化时,创建的对应于触摸屏101的虚拟驱动,用于在显示屏102的处理权限已经切换到主处理器103,而触摸屏101的处理权限还处于协处理器104时,接收由协处理器应用层302a发来的触摸数据。
例如,在图1(b)所示的实施例中,在t2时刻,当用户的手指开始在智能手表100的屏幕上滑动时,主处理器103被唤醒,智能手表100先将显示屏102的处理权限切换给主处理器103,由主处理器103处理显示屏102的数据,而触摸屏101的处理权限依然在协处理器104。在显示屏102的处理权限已经被切换给主处理器103,而触摸屏101的处理权限依然在协处理器104的情况下,主处理器103通过主虚拟触控驱动301b读取由协处理器104发来的触摸数据。
在t3时刻,当用户的手指从智能手表100的屏幕上抬起,即本次滑动操作结束后,智能手表100再将触摸屏101的处理权限切换给主处理器103。主处理器103通过主触控驱动301c读取由协处理器104发来的触摸数据。
继续参考图3,在一些实施例中,在协处理器104运行的轻量级的嵌入式操作系统中,应用层302包括协处理器应用层302a。协处理器应用层302a用于当显示屏102和触摸屏101的处理权限在协处理器104时,将协处理器104的协触控驱动301a从触摸芯片110读取的触摸数据进行计算,确定出对应该触摸数据的用户的触摸事件类型,再根据确定出的事件类型,通过应用程序进行响应。
例如,在图1(b)所示的实施例中,在t1时刻,当处于灭屏状态的智能手表100接收到用户的按键操作后,协处理器104被唤醒,由协处理器104处理显示屏102和触摸屏101的相关信息。协处理器104通过协触控驱动301a驱动触摸屏101,并读取用户的触摸数据。协处理器应用层302a在接收到协触控驱动301a上报的用户的触摸数据进行计算,确定出对应该触摸数据的用户的触摸事件类型,再根据确定出的事件类型,通过应用程序进行响应。
相应地,在主处理器103运行的
Figure BDA0002960221670000101
系统中,应用层302包括主处理器应用层302b。主处理器应用层302b用于当显示屏102和触摸屏101的处理权限在主处理器103时,将主处理器103的主触控驱动301c从触摸芯片110读取的触摸数据进行计算,确定出对应该触摸数据的用户的触摸事件,再根据确定出的事件,通过应用程序进行响应。
例如,在图1(b)所示的实施例中,在t2时刻,当用户的手指开始在智能手表100的屏幕上滑动时,主处理器103被唤醒,智能手表100先将显示屏102的处理权限切换给主处理器103。在t3时刻,当用户的手指从智能手表100的屏幕上抬起,即本次滑动操作结束后,智能手表100再将触摸屏101的处理权限切换给主处理器103。由主处理器103处理显示屏102和触摸屏101的相关信息,当用户再次点击屏幕时,触摸芯片110生成对应用户该次点击操作的触摸数据。主触控驱动301c从触摸芯片110读取该触摸数据后,将触摸数据上报给主处理器应用层302b。主处理器应用层302b对用户点击屏幕的数据进行识别,确定出用户的操作为点击音乐播放应用的图标,进而打开音乐播放应用。
以下将参考图2至图6,以智能手表100在灭屏状态下,用户抬腕或按键唤醒协处理器104,用户通过手指触摸屏幕的场景下,对本申请方案提供的一种屏幕控制方法进行详细介绍。
例如,在图4(a)所示的实施例中,智能手表100处于灭屏状态,主处理器103和协处理器104都处于休眠状态。在图4(b)所示的实施例中,当用户抬腕或按下智能手表100的按键111后,屏幕亮起,表盘显示时间界面,协处理器104被唤醒,并且显示屏102和触摸屏101的处理权限在协处理器104,由协处理器104处理触摸芯片110生成的用户的触摸数据,协处理器104对触摸数据处理后,控制显示屏102逐帧显示。屏幕亮起后,若超过设定时间未检查到用户的触摸操作,则智能手表100再次灭屏,主处理器103和协处理器104重新进入休眠状态。若在设定时间内检测到用户的触摸操作,例如,用户在图4(b)所示的智能手表100的显示的时间界面上滑动后,进入如图4(c)所示的智能手表100的桌面,其中包括多个应用图标,例如导航图标、运动应用图标、计算器图标、天气图标、设置图标等,则智能手表100通过执行本申请方案提供的屏幕控制方法将显示屏102和触摸屏101的处理权限切换给主处理器103,即由主处理器103处理触摸芯片110生成的用户的触摸数据,主处理器103对触摸数据处理后,控制显示屏102逐帧显示。
具体地,在一些实施例中,如图5所示,当显示屏102和触摸屏101的处理权限在协处理器104,协处理器104在检测到用户的触摸操作的情况下,将显示屏102和触摸屏101的处理权限切换到主处理器103的过程包括以下步骤:
步骤501:智能手表100生成用户的触摸数据。例如,在一些实施例中,用户触摸屏幕,触摸芯片110生成用户触摸点的坐标、压力、面积以及切边值等数据。
此外,可以理解的是用户触摸智能手表100的操作可以为点击、长按、双击、滑动等操作。例如,用户通过手指点击触摸屏101,或者用户的手指从触摸屏101上的一个位置滑动到另一个位置。用户对智能手表100的触摸操作可以是用户通过手指进行的,也可以是用户通过触摸笔或其他触摸设备进行的。
步骤502:智能手表100的触摸芯片110将中断消息上报给协处理器104的协触控驱动301a。
其中,中断消息是指触摸芯片110接收到用户的触摸操作时产生的触发信号。如果存在中断消息,则表明用户开始了对触摸屏101的触摸操作,则进入步骤503;如果没有中断消息,则表明用户未对触摸屏101进行触摸操作,未触发触摸芯片110生成用户的触摸数据,返回步骤501。
步骤503:协处理器104的协触控驱动301a接收中断消息后,从触摸芯片110中读取触摸数据。
例如,在一些实施例中,协处理器104的协触控驱动301a接收中断消息后,通过串行外设接口(Serial Peripheral Interface,SPI)从触摸芯片110中读取触摸数据。
步骤504:协处理器104的协触控驱动301a将读取的触摸数据上报至协处理器104的协处理器应用层302a。协处理器应用层302a在接收到协触控驱动301a上报的触摸数据后,执行步骤505。
步骤505:协处理器104的协处理器应用层302a在接收到触摸数据之后,向主处理器103发送唤醒指令。主处理器103在接收到唤醒指令后,同时执行步骤506和步骤507。
步骤506:主处理器103在接收到唤醒指令后,完成内部MIPI接口的上电。即完成主处理器103与显示屏102的切换开关S2连接的硬件接口的上电,以使当显示屏102的切换开关S2切换到主处理器103时,主处理器103能够通过MIPI接口连通显示屏102的MIPI接口。
步骤507:主处理器103向协处理器104发送中断请求,请求控制屏幕。即请求协处理器104将显示屏102和触摸屏101的处理权限切换给主处理器103。
步骤508:协处理器104在接收到主处理器103发来的中断请求之后,响应该中断请求,先将显示屏102的处理权限切换给主处理器103。
例如,如图6所示,主处理器103可以将用于发送切换请求的GPIO接口电平拉高,协处理器104把控制显示屏102的切换开关S2切换的GPIO接口电平也拉高,则开关S2切换到主处理器103,即显示屏102通过开关S2与主处理器103连通,由主处理器103处理显示屏102的相关信息。当显示屏102的处理权限由协处理器104切换到主处理器103之后,进入步骤509。
步骤509:主处理器103的主虚拟触控驱动301b从协处理器应用层302a读取用户的触摸数据。其中,用户的触摸数据为显示屏102的处理权限从协处理器104成功切换到主处理器103,而触摸屏101暂未完成切换,即显示屏102的处理权限已经切换到主处理器103,而触摸屏101的处理权限保持在协处理器104的过程中,触摸芯片110产生的对应用户触摸操作的数据。
需要说明的是,若在用户一次完整的触摸操作还未完成,例如用户的手指或用户手持的触摸设备还未从屏幕上抬起的情况下,就将触摸屏101的处理权限从协处理器104切换到主处理器103,则会导致用户的触摸数据部分丢失,从而导致主处理器103无法完全接收触摸数据,从而无法准确地解析出与用户触摸数据对应的用户的操作事件,进而无法准确地响应用户的操作事件,出现屏幕切换过程中的卡顿现象,影响用户体验。因此,协处理器104先把显示屏102切换给主处理器103,待用户的一次触摸操作完成后,即用户的手指或用户手持的触摸设备从屏幕上抬起后,再将触摸屏101切换给主处理器103,进入步骤512。
步骤510:主处理器103的主虚拟触控驱动301b将读取的用户的触摸数据上报给主处理器应用层302b。
即在触摸屏101未完成切换之前,触摸屏101的处理权限保持在协处理器104,主处理器103通过主虚拟触控驱动301b从协处理器应用层302a读取到用户的触摸数据之后,再将读取的用户的触摸数据上报给主处理器应用层302b进行处理。
步骤511:主处理器应用层302b在收到用户的触摸数据后,响应用户的触摸操作。
例如,在一些实施例中,主处理器应用层302b在收到用户的触摸数据后,对触摸数据进行计算,确定出对应该触摸数据的用户的触摸事件,再根据确定出的事件进行响应。
例如,在一些实施例中,主处理器应用层302b确定出用户的操作类型为用户的手指用力在同一位置长按时,对应该操作的响应为:对智能手表100的信息记录中的信息进行转发、收藏、编辑、删除、多选或引用等。
步骤512:协处理器104将显示屏102切换给主处理器103之后,判断本次触摸操作是否结束。若结束,表明可以将触摸屏101切换给主处理器103,进入步骤513;否则,表明暂时还不能将触摸屏101切换给主处理器103,返回步骤509。
在一些实施例中,协处理器104可以通过判断用户的手指离开屏幕的时间和用户开始触摸屏幕的时间之间的时间差是否大于设定时间阈值,来判断一次触摸操作是否结束。例如,设定一次滑动操作的时间阈值为10毫秒,若用户的手指离开屏幕的时间和用户开始触摸屏幕的时间之间的时间差大于10毫秒,则协处理器104可以确定一次滑动操作结束;反之,则协处理器104确定一次滑动操作未结束。
步骤513:协处理器104确定本次触摸结束后,将触摸屏101切换给主处理器103。
例如,如图2所示,协处理器104控制触摸屏101的切换开关S1切换到主处理器103,使得触摸屏101的I2C接口和主处理器103的I2C接口连通,即实现将触摸屏101切换给主处理器103。
步骤514:在主处理器103成功控屏(即由主处理器103处理显示屏102和触摸屏101的相关信息)的情况下,即在显示屏102和触摸屏101的处理权限都已被成功切换给主处理器103的情况下,若用户再次触摸屏幕,将由主处理器103从触摸芯片110读取触摸芯片110生成的对应用户再次触摸的触摸数据。
若用户再次触摸屏幕,则智能手表100的触摸芯片110将中断消息上报给主处理器103的主触控驱动301c。其中,中断消息是指用触摸芯片110接收到用户再次触摸操作时产生的触发信号。如果存在中断消息,则表明用户开始了对触摸屏101的触摸操作,则进行步骤515;如果没有中断消息,则表明用户未对触摸屏101再次进行触摸操作,未触发触摸芯片110生成用户的再次触摸数据,结束流程。
步骤515:主处理器103的主触控驱动301c在接收到用户再次触摸的中断消息之后,从触摸芯片110中读取再次触摸数据。
例如,主触控驱动301c接收中断消息后,通过串行外设接口(Serial PeripheralInterface,SPI)从触摸芯片110中读取触摸数据。
步骤516:主处理器103的主触控驱动301c将读取的再次触摸数据上报给主处理器应用层302b进行处理。
步骤517:主处理器应用层302b在收到用户的再次触摸数据后,响应用户的再次触摸操作。
例如,主处理器应用层302b在接收到用户的再次触摸数据后,对该触摸数据进行计算,确定出对应该次触摸数据的用户的触摸事件,再根据确定出的事件进行响应。例如,主处理器应用层302b对用户点击屏幕的数据进行识别,确定出用户的操作为在用户的手指在智能手表100的屏幕上的不同位置连续长按,则,对应该操作的响应为:智能手表100拖动信息记录翻滚,以展示不同时间段的信息记录。
例如,当用户的手指在图4(b)所示的智能手表100的时间界面上滑动后,唤醒主处理器103,智能手表100进入如图4(c)所示的智能手表100的桌面,其中包括多个应用图标,例如导航图标、运动应用图标、计算器图标、天气图标、设置图标等。用户的手指在图4(b)所示的智能手表100的时间界面上滑动的过程中,智能手表100通过执行如图5所示的屏幕控制方法,将显示屏102和触摸屏101的处理权限均切换给主处理器103。之后,当用户再触摸屏幕时,由主处理器103处理触摸芯片110生成的用户的触摸数据,控制显示屏102逐帧显示。
以下将对在主处理器103控屏(即显示屏102和触摸屏101的处理权限在主处理器103)的情况下,用户通过点击智能手表100桌面上的设定应用的图标后,触发主处理器103将显示屏102和触摸屏101的处理权限切换给协处理器104的过程进行详细介绍。
其中,设定应用是指需要由协处理器104处理的例如计算器、定时器、闹钟、运动等使用频率较高、运算量较低的应用。由协处理器104代替主处理器103来处理前述使用频率高、时间长的应用,可以降低功耗,提升智能手表100的续航能力。
例如,在图7(a)所示的实施例中,智能手表100当前显示的界面为桌面,其中包括多个应用的图标,例如导航图标、运动应用的图标、计算器图标、天气图标、设置图标等。当用户点击运动应用的图标112后,智能手表100运行运动应用,进入如图7(b)所示的显示用户跑步的公里数以及配速的界面。而当前显示的用户跑步的公里数以及配速的界面是由协处理器104控制显示屏102显示出来的。由于运动应用是由协处理器104运行的,因此,当用户点击运动应用的图标112后,智能手表100的显示屏102和触摸屏101需要由主处理器103切换到协处理器104。
在一些实施例中,主处理器103和协处理器104分别执行的应用如表1所示。
主处理器103执行的应用 协处理器104执行的应用
导航 运动
电话 计算器
聊天 时钟
购物 天气
车票 科学睡眠
拍照 智能心率
移动支付 血氧饱和度
表1
需要说明的是,表1中列出的导航、电话、聊天、购物、车票、拍照、移动支付等由主处理器执行的应用,通常情况下为第三方应用;而诸如表1中列出的运动、计算器、时钟、天气、科学睡眠、智能心率以及血氧饱和度等应用通常为设备厂商自主研发的应用。可以理解的是,上述表1中示例性地列出的应用名称并不造成对本申请方案的具体限制。
以下将参考图1、图2、图6至8,以用户在智能手表100的桌面上点击运动应用的图标112后,触发主处理器103将显示屏102和触摸屏101的处理权限切换给协处理器104的过程进行详细介绍。
如图1(b)所示,在t3时刻,协处理器104将触摸屏101的处理权限切换给主处理器103之后,由主处理器103处理显示屏102和触摸屏101的相关信息。在t4时刻,当用户点击智能手表100桌面的运动应用的图标112之后,触发主处理器103向协处理器104发送屏幕切换的中断请求,请求协处理器104控制显示屏102和触摸屏101。协处理器104接收到主处理器103发来的中断请求之后,对该中断请求进行响应,控制显示屏102的切换开关S2连通协处理器104,当显示屏102完成切换后,再控制触摸屏101的切换开关S1连通协处理器104。至此,主处理器103将显示屏102和触摸屏101的处理权限切换给协处理器104,由协处理器104负责读取用户的触摸数据并进行处理,控制显示屏102逐帧显示。具体地,如图8所示,用户在智能手表100的桌面上点击运动应用的图标112后,主处理器103将显示屏102和触摸屏101的处理权限切换给协处理器104的过程包括以下步骤:
步骤801:智能手表100的运动应用发送灭屏指令给主处理器103。主处理器103在接收到灭屏指令后,同时执行步骤802和步骤803。
步骤802:主处理器103完成内部MIPI接口下电。即完成主处理器103与显示屏102的切换开关S2连接的硬件接口的下电,以断开主处理器103的MIPI接口和显示屏102的MIPI接口之间的连接。
步骤803:主处理器103向协处理器104发送中断请求,请求切换屏幕,即主处理器103向协处理器104请求将显示屏102和触摸屏101的处理权限由主处理器103切换到协处理器104。
步骤804:协处理器104在接收到切换屏幕的中断请求之后进行响应,将显示屏102的处理权限由主处理器103切换到协处理器104。
例如,如图6所示,主处理器103可以将主处理器103用于发送切换请求的GPIO接口电平拉低,协处理器104把控制显示屏102的切换开关S2切换的GPIO接口电平也拉低,则开关S2切换到协处理器104,即显示屏102通过开关S2连通协处理器104,由协处理器104开始处理显示屏102的相关信息。
步骤805:协处理器104待显示屏102完成切换后,将触摸屏101的处理权限由主处理器103切换到协处理器104。
例如,如图2所示,协处理器104控制触摸屏101的切换开关S1切换到协处理器104,使得触摸屏101的I2C接口和协处理器104的I2C接口连通。从而使得协处理器104连通触摸屏101,当用户触摸智能手表100的屏幕时,由协处理器104读取并处理由触摸芯片110生成的对应用户触摸操作的触摸数据。
如上所述,在介绍了图5所示的显示屏102和触摸屏101的处理权限由协处理器104切换到主处理器103的过程,以及图8所示的显示屏102和触摸屏101的处理权限由主处理器103切换到协处理器104的过程之后。以下将继续以智能手表100为例,介绍本申请提供的一种系统交互的方法。例如,智能手表100通过执行如图9所示的系统交互的方法,实现不同场景下,智能手表100在主处理器103和协处理器104之间的切换。
可以理解的是,当智能手表100在主处理器103和协处理器104之间进行切换时,可以通过执行例如上述图5所示的屏幕控制方法,实现将显示屏102和触摸屏101从协处理器104切换到主处理器103。并且,智能手表100可以通过执行例如上述图8所示的屏幕控制方法,实现将显示屏102和触摸屏101从主处理器103切换到协处理器104。具体地,如图9所示,本申请提供的系统交互的方法包括以下步骤:
步骤901:当处于休眠状态的智能手表100在检测到用户的设定操作之后,唤醒协处理器104,由协处理器104处理与显示屏102和触摸屏101相关信息。
其中,用户的设定操作可以是用户抬起佩戴智能手表100的手腕、用户按下智能手表100的按键以及用户通过语音指令来指示智能手表100唤醒等的操作,本申请对此不作限定。
其中,显示屏102和触摸屏101的相关信息包括但不限于:一种或多种类型的数据,例如,对应于用户触摸操作的触摸数据;一种或多种类型的信令,例如,在图5所示的实施例中,协处理器应用层发送给主处理器的唤醒指令;一种或多种类型的消息,例如,在图5所示的实施例中,触摸芯片110向协触控驱动301a发送的中断消息;一种或多种类型的通知,一种或多种类型的请求,一种或多种类型的响应,一种或多种类型的信号等。
步骤902:协处理器104判断是否有用户的触摸操作。若是,则表明协处理器104检测到用户的触摸操作,则进入步骤903a;若否,则表明协处理器104未检测到用户的触摸操作,进入步骤903b。
例如,在一些实施例中,当触摸芯片110检测到用户的触摸操作之后,触摸芯片110会向协处理器104发送中断消息。其中,中断消息是指触摸芯片110接收到用户的触摸操作时产生的触发信号。如果存在中断消息,则表明用户开始了对触摸屏101的触摸操作,则进行步骤903a;如果没有中断消息,则表明用户未对触摸屏101进行触摸操作,进入步骤903b。
步骤903a:协处理器104在检测到用户的触摸操作之后,唤醒主处理器103,协处理器104将显示屏102和触摸屏101的处理权限切换到主处理器103。
例如,在一些实施例中,触摸芯片110生成触摸数据,并向协处理器104的协触控驱动301a发送中断消息。协触控驱动301a在接收到中断消息后,从触摸芯片110读取触摸数据,并将读取的触摸数据上报给协处理器应用层302a。协处理器应用层302a在接收到触摸数据之后,向主处理器103发送唤醒指令。主处理器103在接收到唤醒指令后完成内部上电,并向协处理器104发送中断请求,即主处理器103请求协处理器104将显示屏102和触摸屏101的处理权限切换给主处理器103。协处理器104在接收到主处理器103发来的中断请求之后,先将显示屏102切换给主处理器103。在显示屏102完成切换,而触摸屏101暂未切换的情况下,为了避免切换过程中出现屏幕卡顿的问题,协处理器应用层302a将触摸数据发送给主处理器103的主虚拟触控驱动301b。待用户的本次触摸结束后,协处理器104再将触摸屏101切换给主处理器103。详细过程请参阅上述关于图5所示的屏幕控制方法部分的文字描述,在此不再赘述。
步骤903b:智能手表100超时灭屏。当协处理器104被唤醒后,若在设定时间内未检测到用户的触摸操作,则协处理器104给显示屏102发送灭屏指令,控制显示屏102灭屏。例如,协处理器104被唤醒后,控制显示屏102亮起,在5秒以内未检测到用户的触摸操作,则协处理器104进行休眠状态,同时主处理器103继续保持休眠状态,显示屏102灭屏。
步骤904:主处理器103判断是否有针对设定应用的交互操作。若是,则表明主处理器103检测到用户针对设定应用的交互操作,进入步骤905;否则,表明主处理器103未检测到用户针对设定应用的交互操作。在一些实施例中,若主处理器103在设定时间内未检测到用户的任何操作,则超时灭屏。
其中,设定应用是指需要由协处理器104处理的例如计算器、定时器、闹钟、运动等使用频率较高、运算量较低的应用。由协处理器104代替主处理器103来处理前述使用频率高、时间长的应用,从而降低功耗,提升智能手表100的续航能力。
步骤905:主处理器103唤醒协处理器104,主处理器103将显示屏102和触摸屏101切换给协处理器104。
例如,用户点击智能手表100的运动应用,智能手表100的运动应用发送灭屏指令给主处理器103。主处理器103在接收到灭屏指令后,完成内部MIPI接口下电,即完成主处理器103与显示屏102的切换开关S2连接的硬件接口的下电,以断开主处理器103的MIPI接口和显示屏102的MIPI接口之间的连接。并且,主处理器103向协处理器104发送中断请求,请求切换屏幕,即请求切换显示屏102和触摸屏101。协处理器104在接收到切换屏幕的中断请求之后进行响应,切换显示屏102。待显示屏102完成切换后,再切换触摸屏101。详细过程请参阅上述关于图8所示的屏幕控制方法部分的文字描述,在此不再赘述。
本申请公开的各实施例可以被实现在硬件、软件、固件或这些实现方法的组合中。本申请的实施例可实现为在可编程系统上执行的计算机程序或程序代码,该可编程系统包括至少一个处理器、存储系统(包括易失性和非易失性存储器和/或存储元件)、至少一个输入设备以及至少一个输出设备。
可将程序代码应用于输入指令,以执行本申请描述的各功能并生成输出信息。可以按已知方式将输出信息应用于一个或多个输出设备。为了本申请的目的,处理系统包括具有诸如例如数字信号处理器(Digital Signal Processor,DSP)、微控制器、专用集成电路(Application Specific Integrated Circuit,ASIC)或微处理器之类的处理器的任何系统。
程序代码可以用高级程序化语言或面向对象的编程语言来实现,以便与处理系统通信。在需要时,也可用汇编语言或机器语言来实现程序代码。事实上,本申请中描述的机制不限于任何特定编程语言的范围。在任一情形下,该语言可以是编译语言或解释语言。
在一些情况下,所公开的实施例可以以硬件、固件、软件或其任何组合来实现。所公开的实施例还可以被实现为由一个或多个暂时或非暂时性机器可读(例如,计算机可读)存储介质承载或存储在其上的指令,其可以由一个或多个处理器读取和执行。例如,指令可以通过网络或通过其他计算机可读介质分发。因此,机器可读介质可以包括用于以机器(例如,计算机)可读的形式存储或传输信息的任何机制,包括但不限于,软盘、光盘、光碟、只读存储器(CD-ROMs)、磁光盘、只读存储器(Read Only Memory,ROM)、随机存取存储器(Randomaccess memory,RAM)、可擦除可编程只读存储器(Erasable Programmable Read OnlyMemory,EPROM)、电可擦除可编程只读存储器(Electrically Erasable ProgrammableRead-Only Memory,EEPROM)、磁卡或光卡、闪存、或用于利用因特网以电、光、声或其他形式的传播信号来传输信息(例如,载波、红外信号数字信号等)的有形的机器可读存储器。因此,机器可读介质包括适合于以机器(例如计算机)可读的形式存储或传输电子指令或信息的任何类型的机器可读介质。
在附图中,可以以特定布置和/或顺序示出一些结构或方法特征。然而,应该理解,可能不需要这样的特定布置和/或排序。而是,在一些实施例中,这些特征可以以不同于说明性附图中所示的方式和/或顺序来布置。另外,在特定图中包括结构或方法特征并不意味着暗示在所有实施例中都需要这样的特征,并且在一些实施例中,可以不包括这些特征或者可以与其他特征组合。
需要说明的是,本申请各设备实施例中提到的各单元/模块都是逻辑单元/模块,在物理上,一个逻辑单元/模块可以是一个物理单元/模块,也可以是一个物理单元/模块的一部分,还可以以多个物理单元/模块的组合实现,这些逻辑单元/模块本身的物理实现方式并不是最重要的,这些逻辑单元/模块所实现的功能的组合才是解决本申请所提出的技术问题的关键。此外,为了突出本申请的创新部分,本申请上述各设备实施例并没有将与解决本申请所提出的技术问题关系不太密切的单元/模块引入,这并不表明上述设备实施例并不存在其它的单元/模块。
需要说明的是,在本专利的示例和说明书中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
虽然通过参照本申请的某些优选实施例,已经对本申请进行了图示和描述,但本领域的普通技术人员应该明白,可以在形式上和细节上对其作各种改变,而不偏离本申请的精神和范围。

Claims (10)

1.一种电子设备的屏幕控制方法,所述电子设备包括屏幕、第一处理器以及第二处理器,其中所述屏幕包括显示屏和触摸屏,其特征在于,包括:
所述电子设备的第二处理器处理所述显示屏和所述触摸屏的相关信息;
所述电子设备在检测到用户开始第一触摸操作的情况下,将所述显示屏的处理权限由所述第二处理器切换到所述第一处理器,并将检测到的所述第一触摸操作的第一触摸数据经由所述第二处理器发送给所述第一处理器,并且
所述电子设备在检测到所述第一触摸操作结束的情况下,将所述触摸屏的处理权限由所述第二处理器切换到所述第一处理器。
2.根据权利要求1所述的方法,其特征在于,所述电子设备包括虚拟触控驱动,所述电子设备将所述第一触摸操作的第一触摸数据经由所述第二处理器发送给所述虚拟触控驱动,所述第一处理器经由所述虚拟触控驱动接收所述第一触摸数据。
3.根据权利要求1或2所述的方法,其特征在于,所述电子设备在检测到用户开始第一触摸操作的情况下,将所述显示屏的处理权限由所述第二处理器切换到所述第一处理器包括:
所述电子设备在检测到用户开始第一触摸操作的情况下,通过所述第二处理器向所述第一处理器发送唤醒指令;
所述第一处理器接收到所述唤醒指令后,响应所述唤醒指令,并且向所述第二处理器发送屏幕切换的中断请求;
所述第二处理器接收到所述屏幕切换的中断请求后,响应所述中断请求,将所述显示屏的处理权限由所述第二处理器切换到所述第一处理器。
4.根据权利要求1至3任一项所述的方法,其特征在于,还包括:
所述电子设备的第一处理器处理所述显示屏和触摸屏的相关信息;
所述电子设备在检测到用户有针对所述电子设备的设定应用的交互操作的情况下,将所述显示屏和触摸屏的处理权限由所述第一处理器切换到所述第二处理器,由所述电子设备的第二处理器处理所述显示屏和所述触摸屏的相关信息。
5.根据权利要求4所述的方法,其特征在于,所述电子设备在检测到用户有针对所述电子设备的设定应用的交互操作的情况下,将所述显示屏和触摸屏的处理权限由所述第一处理器切换到所述第二处理器,由所述电子设备的第二处理器处理所述显示屏和所述触摸屏的相关信息包括:
所述电子设备在检测到用户有针对所述电子设备的设定应用的交互操作的情况下,将所述显示屏的处理权限由所述第一处理器切换到所述第二处理器;
在所述电子设备确定出所述显示屏的处理权限由所述第一处理器切换到所述第二处理器之后,将所述触摸屏的处理权限由所述第一处理器切换到所述第二处理器。
6.根据权利要求1至5任一项所述的方法,其特征在于,还包括:
所述电子设备的第一处理器处理所述显示屏和所述触摸屏的相关信息;
所述电子设备在检测到用户开始第二触摸操作的情况下,将检测到的所述第二触摸操作的第二触摸数据发送给所述第一处理器。
7.根据权利要求1至6任一项所述的方法,其特征在于,所述电子设备包括显示屏切换开关,所述显示屏切换开关电连接所述显示屏,并且
所述电子设备在检测到用户开始第一触摸操作的情况下,通过以下方式将所述显示屏的处理权限由所述第二处理器切换到所述第一处理器:
所述电子设备在检测到用户开始第一触摸操作的情况下,控制所述显示屏切换开关与所述第二处理器断开连接,并控制所述显示屏切换开关连通所述第一处理器。
8.根据权利要求1至6任一项所述的方法,其特征在于,所述电子设备包括触摸屏切换开关,所述触摸屏切换开关电连接所述触摸屏,并且
所述电子设备在检测到所述第一触摸操作结束的情况下,通过以下方式将所述触摸屏的处理权限由所述第二处理器切换到第一处理器:
所述电子设备在检测到所述第一触摸操作结束的情况下,控制所述触摸屏切换开关与所述第二处理器断开连接,并控制所述触摸屏切换开关连通所述第一处理器。
9.一种可读介质,其特征在于,所述可读介质上存储有指令,该指令在电子设备上执行时使电子设备执行权利要求1-8中任一项所述的屏幕控制方法。
10.一种电子设备,其特征在于,包括:
屏幕,所述屏幕包括显示屏和触摸屏;
存储器,用于存储由电子设备的一个或多个处理器执行的指令,以及
第一处理器,是电子设备的处理器之一;
第二处理器,是电子设备的处理器之一,用于与所述第一处理器配合执行权利要求1-8中任一项所述的屏幕控制方法。
CN202110236124.XA 2021-03-03 2021-03-03 电子设备的屏幕控制方法、可读介质和电子设备 Pending CN115033122A (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN202110236124.XA CN115033122A (zh) 2021-03-03 2021-03-03 电子设备的屏幕控制方法、可读介质和电子设备
PCT/CN2022/077977 WO2022183985A1 (zh) 2021-03-03 2022-02-25 电子设备的屏幕控制方法、可读介质和电子设备
JP2023552060A JP2024508830A (ja) 2021-03-03 2022-02-25 電子デバイス画面制御方法、読取可能媒体、及び電子デバイス
US18/548,519 US20240168573A1 (en) 2021-03-03 2022-02-25 Electronic Device Screen Control Method, Readable Medium, and Electronic Device
EP22762450.9A EP4280032A1 (en) 2021-03-03 2022-02-25 Screen control method for electronic device, and readable medium and electronic device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110236124.XA CN115033122A (zh) 2021-03-03 2021-03-03 电子设备的屏幕控制方法、可读介质和电子设备

Publications (1)

Publication Number Publication Date
CN115033122A true CN115033122A (zh) 2022-09-09

Family

ID=83118378

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110236124.XA Pending CN115033122A (zh) 2021-03-03 2021-03-03 电子设备的屏幕控制方法、可读介质和电子设备

Country Status (5)

Country Link
US (1) US20240168573A1 (zh)
EP (1) EP4280032A1 (zh)
JP (1) JP2024508830A (zh)
CN (1) CN115033122A (zh)
WO (1) WO2022183985A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116431418A (zh) * 2023-06-13 2023-07-14 荣耀终端有限公司 屏幕静电检测方法、可读存储介质、电子设备

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140351617A1 (en) * 2013-05-27 2014-11-27 Motorola Mobility Llc Method and Electronic Device for Bringing a Primary Processor Out of Sleep Mode
US10095406B2 (en) * 2015-12-18 2018-10-09 Qualcomm Incorporated Cascaded touch to wake for split architecture
CN110908496A (zh) * 2019-11-28 2020-03-24 出门问问信息科技有限公司 一种系统交互方法及可穿戴设备

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116431418A (zh) * 2023-06-13 2023-07-14 荣耀终端有限公司 屏幕静电检测方法、可读存储介质、电子设备
CN116431418B (zh) * 2023-06-13 2023-10-31 荣耀终端有限公司 屏幕静电检测方法、可读存储介质、电子设备

Also Published As

Publication number Publication date
EP4280032A1 (en) 2023-11-22
US20240168573A1 (en) 2024-05-23
JP2024508830A (ja) 2024-02-28
WO2022183985A1 (zh) 2022-09-09

Similar Documents

Publication Publication Date Title
CN110235086B (zh) 电子设备及电子设备的指纹识别方法
US10712799B2 (en) Intelligent management for an electronic device
US10949012B2 (en) Electronic device comprising force sensor
US10466830B2 (en) Electronic device and method of controlling electronic device
US10146430B2 (en) Mobile terminal device, operation method, program, and storage medium
CN111108506B (zh) 一种提示信息的显示方法及电子设备
KR102429740B1 (ko) 터치 이벤트 처리 방법 및 그 장치
KR20180113428A (ko) 디스플레이로 영상 데이터가 전송되지 않는 구간에 생체 정보를 획득하기 위한 방법 및 전자 장치
KR20180015478A (ko) 전자 장치 및 터치 인식 방법
KR102557125B1 (ko) 전자 장치 및 그 제어 방법
KR20160014481A (ko) Idle 모드에서 동작하는 전자 장치 및 방법
KR20170098111A (ko) 센서 데이터를 이용한 디스플레이 제어 방법 및 장치
WO2019019835A1 (zh) 响应黑屏手势的方法、装置、存储介质及移动终端
US20190324640A1 (en) Electronic device for providing user interface according to electronic device usage environment and method therefor
KR20180014644A (ko) 터치 인식 방법 및 이를 수행하는 전자 장치
KR20170114515A (ko) 화면을 표시하는 전자 장치 및 그 제어 방법
CN109521940B (zh) 移动终端装置、操作方法和存储介质
WO2019091124A1 (zh) 一种终端的用户界面显示方法和终端
CN214896630U (zh) 指纹感测装置
EP4280032A1 (en) Screen control method for electronic device, and readable medium and electronic device
CN110908732B (zh) 应用的任务删除方法及电子设备
CN116996608B (zh) 扫码绑定方法、存储介质及终端设备
CN118069020A (zh) 设备控制方法、装置以及电子设备
KR20180097384A (ko) 전자 장치 및 전자 장치 제어 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination