CN114764300A - 一种窗口页面的交互方法、装置、电子设备以及可读存储介质 - Google Patents
一种窗口页面的交互方法、装置、电子设备以及可读存储介质 Download PDFInfo
- Publication number
- CN114764300A CN114764300A CN202011644145.7A CN202011644145A CN114764300A CN 114764300 A CN114764300 A CN 114764300A CN 202011644145 A CN202011644145 A CN 202011644145A CN 114764300 A CN114764300 A CN 114764300A
- Authority
- CN
- China
- Prior art keywords
- interactive
- window
- operation type
- interactive operation
- target window
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000003993 interaction Effects 0.000 title claims abstract description 120
- 238000000034 method Methods 0.000 title claims abstract description 94
- 238000003860 storage Methods 0.000 title claims abstract description 17
- 230000002452 interceptive effect Effects 0.000 claims abstract description 496
- 230000004044 response Effects 0.000 claims abstract description 71
- 238000003825 pressing Methods 0.000 claims description 28
- 238000004590 computer program Methods 0.000 claims description 23
- 238000005516 engineering process Methods 0.000 abstract description 9
- 238000004891 communication Methods 0.000 description 38
- 230000006854 communication Effects 0.000 description 38
- 239000010410 layer Substances 0.000 description 29
- 238000010586 diagram Methods 0.000 description 28
- 238000012545 processing Methods 0.000 description 28
- 230000006870 function Effects 0.000 description 27
- 238000007726 management method Methods 0.000 description 20
- 230000001976 improved effect Effects 0.000 description 15
- 230000008569 process Effects 0.000 description 13
- 230000005236 sound signal Effects 0.000 description 12
- 238000010295 mobile communication Methods 0.000 description 11
- 210000000988 bone and bone Anatomy 0.000 description 10
- 230000000694 effects Effects 0.000 description 7
- 230000008859 change Effects 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 230000002829 reductive effect Effects 0.000 description 5
- 229920001621 AMOLED Polymers 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 3
- 230000001413 cellular effect Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 238000012002 interactive response technology Methods 0.000 description 3
- 230000036961 partial effect Effects 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000036772 blood pressure Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000001965 increasing effect Effects 0.000 description 2
- 230000000977 initiatory effect Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 238000000638 solvent extraction Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000003213 activating effect Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 230000003416 augmentation Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000010009 beating Methods 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 238000013529 biological neural network Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 239000012792 core layer Substances 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011982 device technology Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 239000010985 leather Substances 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000010349 pulsation Effects 0.000 description 1
- 239000002096 quantum dot Substances 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 238000005096 rolling process Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003238 somatosensory effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72469—User interfaces specially adapted for cordless or mobile telephones for operating the device by selecting functions from two or more displayed items, e.g. menus or icons
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
- G06F3/04855—Interaction with scrollbars
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
- H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
Abstract
本申请适用于设备交互技术领域,提供了一种窗口页面的交互方法、装置、电子设备以及可读存储介质,该方法包括:响应于用户在目标窗口内发起的交互操作,确定交互操作的操作类型;目标窗口内包含至少一个可操作控件;若操作类型为第一操作类型,则识别可操作控件为交互操作的操作对象,并基于交互操作对可操作控件进行控制;第一操作类型是与可操作控件关联的操作类型;若操作类型为第二操作类型,则识别目标窗口为交互操作的操作对象,并基于交互操作对目标窗口进行控制。本申请提供的技术方案可以解决现有的窗口页面的交互技术,在窗口页面包含有可操作控件时,无法确定交互操作的操作对象,导致响应准确率低的问题。
Description
技术领域
本申请属于设备交互技术领域,尤其涉及一种窗口页面的交互方法、装置、电子设备以及可读存储介质。
背景技术
随着电子设备技术的不断发展,电子设备上显示的内容的种类以及形式也逐渐丰富,而电子设备的窗口页面作为电子设备承载显示内容的重要部件之一,在页面显示领域的应用范围越来越广泛。
为了满足现有电子设备的显示需求,电子设备的窗口页面内可以添加有可操作的控件,如可以进行上下滚动切换显示内容的列表控件,或者进行左右翻页的相册控件,然而由于上述可操作控件是附着于窗口页面上进行显示,因此在发起交互操作时,电子设备常常无法判定该交互操作的目标对象是可操作控件抑或是窗口页面,从而降低了交互操作的准确性,并影响了用户的使用体验。
发明内容
本申请实施例提供了一种窗口页面的交互方法、装置、电子设备以及计算机可读存储介质,可以解决现有的窗口页面的交互技术,在窗口页面包含有可操作控件时,无法确定交互操作的操作对象,导致响应准确率低的问题。
第一方面,本申请实施例提供了一种窗口页面的交互方法,包括:
响应于用户在目标窗口内发起的交互操作,确定所述交互操作的操作类型;所述目标窗口内包含至少一个可操作控件;
若所述操作类型为第一操作类型,则识别所述可操作控件为所述交互操作的操作对象,并基于所述交互操作对所述可操作控件进行控制;所述第一操作类型是与所述可操作控件关联的操作类型;
若所述操作类型为第二操作类型,则识别所述目标窗口为所述交互操作的操作对象,并基于所述交互操作对所述目标窗口进行控制。
实施本申请实施例具有以下有益效果:通过在电子设备接收到用户发起的交互操作时,识别该交互操作的操作类型,基于该操作类型确定交互操作对应的操作对象,例如该交互操作的操作类型为第一操作类型,则可以确定该交互操作对应的操作对象为可操作控件,并基于上述交互操作对目标窗口上的可操作控件进行控制,例如向指定方向移动或翻页等;反之,若该交互操作的操作类型为第二操作类型,则可以确定该交互操作对应的操作对象为目标窗口,并基于上述交互操作对目标窗口进行控制。与现有的交互响应技术相比,本申请实施例可以根据交互操作的操作类型区分操作对象是底层的目标窗口或是附着于窗口上的可操作控件,即便可操作控件与目标窗口的显示区域存在重叠,也能够区分对应的操作对象,并对对应的操作对象进行控制,从而提高了交互操作的准确性,以及提升了用户的使用体验。
在第一方面的一种可能实现方式中,在所述响应于用户在目标窗口内发起的交互操作,确定所述交互操作的操作类型之前,还包括:
确定所述可操作控件的可交互信息;所述可交互信息包括可交互范围和/或可交互方向;
基于所述可交互信息确定所述可操作控件关联的所述第一操作类型。
在第一方面的一种可能实现方式中,所述第二操作类型为除所述第一操作类型外的其他操作类型。
在第一方面的一种可能实现方式中,所述响应于用户在目标窗口内发起的交互操作,确定所述交互操作的操作类型,包括:
识别所述交互操作对应的按压时长;
根据所述按压时长确定所述交互操作的所述操作类型。
在第一方面的一种可能实现方式中,所述若所述操作类型为第二操作类型,则识别所述目标窗口为所述交互操作的操作对象,并基于所述交互操作对所述目标窗口进行控制,还包括:
将所述目标窗口对应的窗口事件标识配置为预设的有效位值。
在第一方面的一种可能实现方式中,所述响应于用户在目标窗口内发起的交互操作,确定所述交互操作的操作类型,包括:
响应于所述交互操作,获取所述目标窗口对应的所述窗口事件标识;
若所述窗口事件标识为所述有效位值,则基于所述交互操作对所述目标窗口进行控制。
在第一方面的一种可能实现方式中,在所述响应于所述交互操作,获取所述目标窗口对应的所述窗口事件标识之后,还包括:
若所述窗口事件标识为预设的无效位值,则执行所述确定所述交互操作的操作类型。
在第一方面的一种可能实现方式中,在所述若所述操作类型为第一操作类型,则识别所述可操作控件为所述交互操作的操作对象,并基于所述交互操作对所述可操作控件进行控制之后,还包括:
将所述可操作控件对应的控件事件标识配置为预设的第一位值。
在第一方面的一种可能实现方式中,所述若所述操作类型为第二操作类型,则识别所述目标窗口为所述交互操作的操作对象,并基于所述交互操作对所述目标窗口进行控制,包括:
若所述操作类型为第二操作类型,则确定所述可操作控件对应的控件事件标识;
若所述控件事件标识为预设的第一位值,则结束响应所述交互操作;
若所述控件事件标识为预设的第二位值,则执行所述识别所述目标窗口为所述交互操作的操作对象,并基于所述交互操作对所述目标窗口进行控制。
第二方面,本申请实施例提供了一种窗口页面的交互装置,包括:
操作类型确定单元,用于响应于用户在目标窗口内发起的交互操作,确定所述交互操作的操作类型;所述目标窗口内包含至少一个可操作控件;
第一操作类型响应单元,用于若所述操作类型为第一操作类型,则识别所述可操作控件为所述交互操作的操作对象,并基于所述交互操作对所述可操作控件进行控制;所述第一操作类型是与所述可操作控件关联的操作类型;
第二操作类型响应单元,用于若所述操作类型为第二操作类型,则识别所述目标窗口为所述交互操作的操作对象,并基于所述交互操作对所述目标窗口进行控制。
在第二方面的一种可能实现方式中,窗口页面的交互装置,还包括:
可交互信息确定单元,用于确定所述可操作控件的可交互信息;所述可交互信息包括可交互范围和/或可交互方向;
第一操作类型确定单元,用于基于所述可交互信息确定所述可操作控件关联的所述第一操作类型。
在第二方面的一种可能实现方式中,所述第二操作类型为除所述第一操作类型外的其他操作类型。
在第二方面的一种可能实现方式中,所述操作类型确定单元,包括:
按压时长获取单元,用于识别所述交互操作对应的按压时长;
按压时长对比文件,用于根据所述按压时长确定所述交互操作的所述操作类型。
在第二方面的一种可能实现方式中,所述第二操作类型响应单元,还包括:
窗口事件标识配置单元,用于将所述目标窗口对应的窗口事件标识配置为预设的有效位值。
在第二方面的一种可能实现方式中,所述操作类型确定单元,包括:
窗口事件标识获取单元,用于响应于所述交互操作,获取所述目标窗口对应的所述窗口事件标识;
有效位值响应单元,用于若所述窗口事件标识为所述有效位值,则基于所述交互操作对所述目标窗口进行控制。
在第二方面的一种可能实现方式中,窗口页面的交互装置,还包括:
无效位值响应单元,用于若所述窗口事件标识为预设的无效位值,则执行所述确定所述交互操作的操作类型。
在第二方面的一种可能实现方式中,窗口页面的交互装置,还包括:
控件事件标识配置单元,用于将所述可操作控件对应的控件事件标识配置为预设的第一位值。
在第二方面的一种可能实现方式中,所述第二操作类型响应单元,包括:
控件事件标识识别单元,用于若所述操作类型为第二操作类型,则确定所述可操作控件对应的控件事件标识;
第一位值响应单元,用于若所述控件事件标识为预设的第一位值,则结束响应所述交互操作;
第二位值响应单元,用于若所述控件事件标识为预设的第二位值,则执行所述识别所述目标窗口为所述交互操作的操作对象,并基于所述交互操作对所述目标窗口进行控制。
第三方面,本申请实施例提供了一种电子设备,存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现上述第一方面中任一项所述窗口页面的交互方法。
第四方面,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现上述第一方面中任一项所述窗口页面的交互方法。
第五方面,本申请实施例提供了一种计算机程序产品,当计算机程序产品在电子设备上运行时,使得电子设备执行上述第一方面中任一项所述窗口页面的交互方法。
第六方面,本申请实施例提供一种芯片系统,包括处理器,处理器与存储器耦合,所述处理器执行存储器中存储的计算机程序,以实现如第一方面中任一项所述窗口页面的交互方法。
可以理解的是,上述第二方面至第六方面的有益效果可以参见上述第一方面中的相关描述,在此不再赘述。
附图说明
图1是本申请实施例提供的电子设备的结构示意图;
图2是本申请实施例的电子设备的软件结构框图;
图3是现有的窗口页面的示意图;
图4是电子设备接收到用户发起的交互操作的示意图;
图5是基于专属操作区域实现对窗口页面的可操作控件的控制示意图;
图6是本申请一实施例提供的窗口页面的交互方法的实现流程图;
图7是本申请一实施例提供的多窗口页面的显示示意图;
图8是本申请一实施例提供的分屏显示的显示界面;
图9是本申请一实施例提供的可操作控件的示意图;
图10是本申请另一实施例提供的窗口页面的交互方法的具体实现流程图;
图11是本申请一实施例提供的可交互范围的示意图;
图12是本申请一实施例提供的可交互方向的示意图;
图13是本申请又一实施例提供的窗口页面的交互方法S601的具体实现流程图;
图14是本申请一实施例提供的滑动操作的示意图;
图15是本申请一实施例提供的确定可操作控件的实现示意图;
图16是本申请一实施例提供的抖动范围的示意图;
图17是本申请第二实施例提供的窗口页面的流程示意图;
图18是本申请一实施例提供的交互操作的划分示意图;
图19是本申请第三实施例提供的窗口页面的流程示意图;
图20是本申请第四实施例提供的窗口页面的流程示意图;
图21是本申请一实施例提供的在未满足防抖条件下窗口页面的交互方法的响应流程图;
图22是本申请一实施例提供的在对响应完可操作控件的交互操作后,窗口页面的交互方法的响应流程图;
图23是本申请一实施例提供的在首次对目标窗口进行响应时,窗口页面的交互方法的响应流程图;
图24是本申请一实施例提供的在对响应完目标窗口的交互操作后,窗口页面的交互方法的响应流程图;
图25是本申请实施例提供的页面的显示装置的结构框图;
图26是本申请一实施例提供的电子设备的结构框图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本申请实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本申请的描述。
应当理解,当在本申请说明书和所附权利要求书中使用时,术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解,在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
如在本申请说明书和所附权利要求书中所使用的那样,术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地,短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。
另外,在本申请说明书和所附权利要求书的描述中,术语“第一”、“第二”、“第三”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
在本申请说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此,在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例,而是意味着“一个或多个但不是所有的实施例”,除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”,除非是以其他方式另外特别强调。
本申请实施例提供的窗口页面的交互方法可以应用于手机、平板电脑、可穿戴设备、车载设备、增强现实(augmented reality,AR)/虚拟现实(virtual reality,VR)设备、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本、个人数字助理(personal digital assistant,PDA)等电子设备上,本申请实施例对电子设备的具体类型不作任何限制。
例如,所述电子设备可以是WLAN中的站点(STAION,ST),可以是蜂窝电话、无绳电话、会话启动协议(Session InitiationProtocol,SIP)电话、无线本地环路(WirelessLocal Loop,WLL)站、个人数字处理(Personal Digital Assistant,PDA)设备、具有无线通信功能的手持设备、计算设备或连接到无线调制解调器的其它处理设备、电脑、膝上型计算机、手持式通信设备、手持式计算设备、和/或用于在无线系统上进行通信的其它设备以及下一代通信系统,例如,5G网络中的移动终端或者未来演进的公共陆地移动网络(PublicLand Mobile Network,PLMN)网络中的移动终端等。
图1示出了电子设备100的一种结构示意图。
电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
可以理解的是,本发明实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。在一些实施例中,处理器110可以包含多组I2C总线。处理器110可以通过不同的I2C总线接口分别耦合触摸传感器180K,充电器,闪光灯,摄像头193等。例如:处理器110可以通过I2C接口耦合触摸传感器180K,使处理器110与触摸传感器180K通过I2C总线接口通信,实现电子设备100的触摸功能。
I2S接口可以用于音频通信。在一些实施例中,处理器110可以包含多组I2S总线。处理器110可以通过I2S总线与音频模块170耦合,实现处理器110与音频模块170之间的通信。在一些实施例中,音频模块170可以通过I2S接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。
PCM接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频模块170与无线通信模块160可以通过PCM总线接口耦合。在一些实施例中,音频模块170也可以通过PCM接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。所述I2S接口和所述PCM接口都可以用于音频通信。
UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,UART接口通常被用于连接处理器110与无线通信模块160。例如:处理器110通过UART接口与无线通信模块160中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块170可以通过UART接口向无线通信模块160传递音频信号,实现通过蓝牙耳机播放音乐的功能。
MIPI接口可以被用于连接处理器110与显示屏194,摄像头193等外围器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(displayserial interface,DSI)等。在一些实施例中,处理器110和摄像头193通过CSI接口通信,实现电子设备100的拍摄功能。处理器110和显示屏194通过DSI接口通信,实现电子设备100的显示功能。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,GPIO接口可以用于连接处理器110与摄像头193,显示屏194,无线通信模块160,音频模块170,传感器模块180等。GPIO接口还可以被配置为I2C接口,I2S接口,UART接口,MIPI接口等。
USB接口130是符合USB标准规范的接口,具体可以是Mini USB接口,Micro USB接口,USB Type C接口等。USB接口130可以用于连接充电器为电子设备100充电,也可以用于电子设备100与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如AR设备等。
可以理解的是,本发明实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本申请另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,显示屏194,摄像头193,和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A,受话器170B等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(codedivision multiple access,CDMA),宽带码分多址(wideband code division multipleaccess,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidounavigation satellite system,BDS),准天顶卫星系统(quasi-zenith satellitesystem,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
电子设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备100可以包括1个或N个显示屏194,N为大于1的正整数。显示屏194可包括触控面板以及其他输入设备。
电子设备100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,电子设备100可以包括1个或N个摄像头193,N为大于1的正整数。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别,脸部识别,语音识别,文本理解等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。处理器110通过运行存储在内部存储器121的指令,和/或存储在设置于处理器中的存储器的指令,执行电子设备100的各种功能应用以及数据处理。
电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听音乐,或收听免提通话。
受话器170B,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时,可以通过将受话器170B靠近人耳接听语音。
麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170C发声,将声音信号输入到麦克风170C。电子设备100可以设置至少一个麦克风170C。在另一些实施例中,电子设备100可以设置两个麦克风170C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备100还可以设置三个,四个或更多麦克风170C,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the USA,CTIA)标准接口。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180A,电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,电子设备100根据压力传感器180A检测所述触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180B检测电子设备100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180B还可以用于导航,体感游戏场景。
气压传感器180C用于测量气压。在一些实施例中,电子设备100通过气压传感器180C测得的气压值计算海拔高度,辅助定位和导航。
磁传感器180D包括霍尔传感器。电子设备100可以利用磁传感器180D检测翻盖皮套的开合。在一些实施例中,当电子设备100是翻盖机时,电子设备100可以根据磁传感器180D检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
加速度传感器180E可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
距离传感器180F,用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中,拍摄场景,电子设备100可以利用距离传感器180F测距以实现快速对焦。
接近光传感器180G可以包括例如发光二极管(LED)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定电子设备100附近有物体。当检测到不充分的反射光时,电子设备100可以确定电子设备100附近没有物体。电子设备100可以利用接近光传感器180G检测用户手持电子设备100贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器180G也可用于皮套模式,口袋模式自动解锁与锁屏。
环境光传感器180L用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180L也可用于拍照时自动调节白平衡。环境光传感器180L还可以与接近光传感器180G配合,检测电子设备100是否在口袋里,以防误触。
指纹传感器180H用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
温度传感器180J用于检测温度。在一些实施例中,电子设备100利用温度传感器180J检测的温度,执行温度处理策略。例如,当温度传感器180J上报的温度超过阈值,电子设备100执行降低位于温度传感器180J附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,电子设备100对电池142加热,以避免低温导致电子设备100异常关机。在其他一些实施例中,当温度低于又一阈值时,电子设备100对电池142的输出电压执行升压,以避免低温导致的异常关机。
触摸传感器180K,也称“触控器件”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
骨传导传感器180M可以获取振动信号。在一些实施例中,骨传导传感器180M可以获取人体声部振动骨块的振动信号。骨传导传感器180M也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器180M也可以设置于耳机中,结合成骨传导耳机。音频模块170可以基于所述骨传导传感器180M获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于所述骨传导传感器180M获取的血压跳动信号解析心率信息,实现心率检测功能。
按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入,产生与电子设备100的用户设置以及功能控制有关的键信号输入。
马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
SIM卡接口195用于连接SIM卡。SIM卡可以通过插入SIM卡接口195,或从SIM卡接口195拔出,实现和电子设备100的接触和分离。电子设备100可以支持1个或N个SIM卡接口,N为大于1的正整数。SIM卡接口195可以支持Nano SIM卡,Micro SIM卡,SIM卡等。同一个SIM卡接口195可以同时插入多张卡。所述多张卡的类型可以相同,也可以不同。SIM卡接口195也可以兼容不同类型的SIM卡。SIM卡接口195也可以兼容外部存储卡。电子设备100通过SIM卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,电子设备100采用eSIM,即:嵌入式SIM卡。eSIM卡可以嵌在电子设备100中,不能和电子设备100分离。
电子设备100的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本发明实施例以分层架构的Android系统为例,示例性说明电子设备100的软件结构。
图2是本申请实施例的电子设备的一种软件结构框图。
分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(Android runtime)和系统库,以及内核层。
应用程序层可以包括一系列应用程序包。
如图2所示,应用程序包可以包括相机,图库,日历,通话,地图,导航,WLAN,蓝牙,音乐,视频,短信息等应用程序。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图2所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供电子设备的通信功能。例如通话状态的管理(包括接通,挂断等)。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(Media Libraries),三维图形处理库(例如:OpenGL ES),2D图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
2D图形引擎是2D绘图的绘图引擎。
内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动。
下面结合捕获拍照场景,示例性说明电子设备100软件以及硬件的工作流程。
当触摸传感器180K接收到触摸操作,相应的硬件中断被发给内核层。内核层将触摸操作加工成原始输入事件(包括触摸坐标,触摸操作的时间戳等信息)。原始输入事件被存储在内核层。应用程序框架层从内核层获取原始输入事件,识别该输入事件所对应的控件。以该触摸操作是触摸单击操作,该单击操作所对应的控件为相机应用图标的控件为例,相机应用调用应用框架层的接口,启动相机应用,进而通过调用内核层启动摄像头驱动,通过摄像头193捕获静态图像或视频。
在现有技术中,电子设备可以通过显示模块显示各类型的显示内容,电子设备包括有智能手机、计算机电脑、笔记本电脑、平板电脑等各种类型的电子设备,显示内容包括但不限于:静态图片、动态图片、视频、交互控件、网络页面、文章、短信息、提示信息等,电子设备内的显示内容可以通过窗口页面的形式进行展示。其中,窗口页面具体指的是电子设备安装的应用程序为使用数据而在图形用户界面中设置的基本单元。电子设备的应用程序和电子设备本地存储的数据在窗口页面内实现一体化显示。在窗口页面中,电子设备可以根据用户发起的操作,对窗口页面内显示的应用程序或数据,进行管理、生成和编辑。
在一种可能的实现方式中,窗口页面四周可以设有菜单、图标,窗口页面所需展示的数据可以显示于窗口页面的中央区域,其中,窗口页面具体是指采用窗口形式显示数据、内容等的可操作的页面。随着电子技术的不断发展,窗口页面内展示内容的类型也越来越丰富,示例性地,图3示出了现有的窗口页面的示意图,参见图3所示,窗口页面的显示内容从最开始的文字、图片等不可交互的显示内容,如图3中的(a),到现今的可嵌入视频播放控件、列表控件以及互动小游戏程序等交互性强的显示内容,如图3中的(b),使得展示内容的形式越来越丰富,与用户之间的互动性也越来越强,能够与各种应用场景相适配。
然而,随着窗口页面内显示内容的类型越来越丰富以及可交互性越来越强,一个新的问题逐渐显现。由于窗口页面内的各个显示内容均会占用窗口页面的部分的区域进行显示,即各个显示内容是附着于窗口页面上显示,即窗口页面的显示层级会低于显示内容的显示层级,显示内容会覆盖窗口页面部分的显示区域。基于此,若该窗口页面内的显示内容是可操作的交互控件,则电子设备接收到用户对于窗口页面内发起的交互操作时,由于窗口页面的显示区域与显示内容的显示区域会存在重叠的区域,则电子设备无法确定该交互操作的操作对象是窗口页面内的可操作控件,或是窗口页面。
示例性地,图4示出了电子设备接收到用户发起的交互操作的示意图。参见图4所示,电子设备接收到用户在如图4所示的位置401发起了一个向上滑动的操作,由于位置401位于该电子设备前台显示的窗口页面内的可操作控件402上,该可操作控件402具体为一列表控件,该列表控件可以显示有预设的数据列表,该数据列表可以包含N行数据,而由于列表控件受限于窗口页面的显示区域,因此可以只显示3行数据,可以通过上下滑动的方式改变该列表控件内显示的数据。基于此,电子设备在接收到位于可操作控件402上的向上滑动的操作时,无法确定该交互操作是需要改变该列表控件内显示的数据,抑或是对窗口页面向上移动,从而导致了交互操作的响应不准确,无法识别用户的操作意图,降了操作的准确性以及用户的使用体验。
为了确定用户的操作意图,现有的交互操作的响应技术,可以在可操作控件内配置对应的专属操作区域,即在可操作控件的专属操作区域内发起的交互操作,其对应的操作对象为可操作控件,反之,若发起的交互操作在专属操作区域外,则对应的操作对象为窗口页面,从而区分交互操作的操作对象。
示例性地,图5示出了基于专属操作区域实现对窗口页面的可操作控件的控制示意图。参见图5中的(a)所示,该电子设备内显示有一窗口页面,该窗口页面内包含有一列表控件501,在列表控件501内包含有显示数据列表的区域502,以及该列表控件501对应的专属操作区域503(下一页)和504(上一页),若用户需要对列表控件501进行操作,可以在专属操作区域503内发起交互操作,例如点击上述的专属操作区域503,则列表控件501内的数据列切换显示内容,原本显示的数据列为1—3,切换到下一页的列表内容,列表控件501内显示的数据列可以变更为4-6,如图5中的(b)所示。若用户在专属操作区域503外的其他位置发起了交互操作,则识别该交互操作的操作对象为窗口页面。
上述方式通过为不同的可操作控件配置对应的专属操作区域,以便确定在交互窗口上发起的交互操作对应的操作对象。然而该方式需要在窗口页面内划分专门的区域用于采集可操作控件的交互操作,若该专属操作区域的区域面积较大,则会大大影响窗口页面内各个控件以及显示内容的页面布局,降低了窗口页面的可容纳的信息量;若该专属操作区域的面积较少,则会降低了用户操作的便捷性,增加了错点、误点等无效操作,从而影响用户的使用体验。
由此可见,现有的窗口页面的交互技术,无法同时兼顾区分交互操作的操作对象以及降低对于窗口页面布局的两个方面,从而影响了可操作控件在窗口页面的应用,继而降低了窗口页面展示内容多样性的发展。
实施例一:
因此,为了解决现有窗口页面的交互技术的缺陷,本申请提供一种窗口页面的交互方法,该窗口页面的交互方法的执行主体具体可以为一电子设备,该电子设备可以为一智能手机、平板电脑、计算机、智能手表等电子设备,该电子设备包含有显示模块以及交互模块,通过显示模块显示窗口页面,以及通过交互模块获取用户的交互操作,其中,该显示模块具体可以为一显示器、投影仪等具有显示功能的模块;该交互模块可以为:鼠标、键盘以及控制器等具有人机交互功能的模块,优选地,上述显示模块是具有触控功能的触控屏,在显示窗口页面的同时,可以获取用户发起的交互操作。图6示出了本申请一实施例提供的窗口页面的交互方法的实现流程图,详述如下:
在S601中,响应于用户在目标窗口内发起的交互操作,确定所述交互操作的操作类型;所述目标窗口内包含至少一个可操作控件。
在本实施例中,电子设备可以在显示至少一个窗口页面。该窗口页面可以基于电子设备内安装的应用程序生成的,如应用程序操作界面对应的窗口页面,也可以是基于电子设备的设备系统生成的,如在电子设备接收到系统通知或短信息时生成的弹框窗口等。需要说明的是,电子设备在显示界面内可以同时显示有多个窗口页面,具体可显示的窗口页面的显示个数可以根据电子设备的设备类型、显示模块的尺寸以及设备系统等多个不同因素确定。
在一种可能的实现方式中,若电子设备同时显示有多个窗口页面,即上述同时显示的多个窗口页面均处于前台运行状态,在该情况下,电子设备可以根据上一响应的交互操作对应的窗口页面,确定上述的目标窗口。由于多个窗口页面均处于前台运行,然而根据各个窗口页面的操作次序,可以将最近操作的窗口页面作为正在操作的窗口页面,即上述的目标窗口,而除正在操作的窗口页面外的其他窗口页面,则可以作为待操作的窗口页面。因此,在用户发起交互操作时,若该交互操作并非窗口页面的选择操作,则可以识别该交互操作所需操作的窗口页面为正在操作的窗口页面;反之,若该交互操作为窗口页面的选择操作,则可以根据该交互操作从待操作的窗口页面中确定所需指定的窗口页面,并将交互操作指定的窗口页面激活至显示界面的最上层进行显示,并识别为正在操作的窗口页面。
示例性地,图7示出了本申请一实施例提供的多窗口页面的显示示意图。参见图7中的(a)所示,在电子设备的显示界面上可以同时显示有多个窗口页面,分别为第一窗口701、第二窗口702以及第三窗口703,其中,处于最上层显示的窗口页面为第一窗口701,该第一窗口701为最近操作的窗口页面,即正在操作的窗口页面,而第二窗口702以及第三窗口703是的显示层级低于上述第一窗口701,为待操作的窗口页面。此时,若电子设备接收到用户发起的交互操作,则判断该交互操作是否窗口选择操作,例如点击第二窗口702的显示区域,或点击702对应的图标等,若是,则根据窗口选择操作确定用户所选择的窗口页面,例如在本实施例中,检测到用户点击第二窗口702的显示区域,则判断用户需要对第二窗口702进行操作,将第一窗口701作为待操作的窗口页面,而将第二窗口702切换至最上层进行显示,如图7中的(b),并将第二窗口702作为正在操作的窗口页面。
在一种可能的实现方式中,若电子设备支持分屏功能,则电子设备可以显示有多个独立的子屏幕,图8示出了本申请一实施例提供的分屏显示的显示界面。在该情况下,每个子屏幕可以显示有对应的窗口页面。电子设备可以根据交互操作的点击位置,确定该交互操作所需操作的子屏幕,并将该子屏幕内显示的窗口页面识别为目标窗口。
可选地,电子设备可以根据首次采集到交互操作的坐标确定该交互操作对应的子屏幕。例如,该交互操作可以为一滑动操作,则电子设备可以识别该滑动操作对应的首个触控点的坐标,若该坐标落入到上述分屏显示的某一子屏幕内,则将首个触控点对应的子屏幕识别为该交互操作所需操作的子屏幕,将该子屏幕显示的窗口页面作为目标页面。
可选地,电子设备可以获取上述交互操作对应的坐标信息,若该坐标信息落入到某一窗口页面对应的显示区域,则将该窗口页面识别为上述交互操作对应的目标窗口。
在本实施例中,目标窗口内可以显示有可操作控件,当然,目标窗口除了显示有可操作控件外,还可以显示有其他显示内容,如图片、文字、视频等。该目标窗口内的可操作控件具体是可以基于交互操作执行相应操作的控件。
示例性地,图9示出了本申请一实施例提供的可操作控件的示意图。参见图9中的(a)所示,目标窗口内包含有一列表控件,该列表控件内包含有列表进度滑块901,用于显示当前所显示的数据列在列表内的位置,该列表控件可以根据进行上下滑动用以改变当前显示的内容;参见图9中的(b)所示,目标窗口内包含有一相册控件,该相册控件内可以显示有多个图像,并配置有一图像进度滑块902,用于显示当前所显示的图像在相册内的位置,该相册控件可以根据用户发起的左右滑动操作以改变当前显示的图像,以实现图像切换。当然,可操作控件除了响应用户发起的滑动操作外,还可以响应各类型的交互操作,在此并不对交互操作的操作类型进行限定。
在一种可能的实现方式中,该目标窗口内可以包含一个可操作控件,也可以包含两个或以上的可操作控件。
在一种可能的实现方式中,若该目标窗口不包含任一可操作控件,则无需确定交互操作的操作类型,可以直接基于该交互操作对目标窗口进行控制。基于此,电子设备在执行S601之前可以先确定该目标窗口包含的可操作控件的个数;若该目标窗口内包含的可操作控件的个数为0,则基于交互操作对目标窗口进行控制;反之,若该目标窗口内包含的可操作控件的个数非0,则执行确定交互操作的操作类型的操作。
在本实施例中,电子设备可以通过交互模块接收用户发起的交互操作,若该交互模块具体为一触控屏,则上述交互操作可以包括:按压操作、滑动操作等触控操作;若该交互模块具体为一鼠标,则上述交互操作可以包括:单击操作、双击操作、鼠标滚轮的滚动操作、框取操作等。电子设备可以通过交互模块采集用户发起的交互操作,其中,上述电子设备可以内置于电子设备上,如该电子设备为智能手机,则交互模块可以是电子设备内置的触控屏;该交互模块也可以是一外接设备,通过串行接口接入到电子设备,以便获取用户的交互操作,如鼠标、键盘、控制器等。
在本实施例中,电子设备通过交互模块可以获取用户发起的交互操作,交互模块可以将采集到的交互操作发送给电子设备的处理器,在电子设备的处理器接收到上述的交互操作后,会首先识别该交互操作的操作类型,基于操作类型执行对应的响应流程。
在一种可能的实现方式中,电子设备可以预先记录有可操作控件关联的操作类型,并将上述可操作控件关联的操作类型识别为第一操作类型。同样地,电子设备也可以预先记录有目标窗口关联的操作类型,并将上述目标窗口关联的操作类型识别为第二操作类型。
可选地,电子设备可以将除第一操作类型外的其他操作类型识别为第二操作类型。即电子设备只需记录有可操作控件关联的操作类型,即第一操作类型,而无需记录与目标窗口关联的第二操作类型,只需识别交互操作的操作类型并非第一操作类型时,则可以确定该交互操作的操作类型的第二操作类型。
在一种可能的实现方式中,所有可操作控件对应的第一操作类型可以是相同。举例性地,电子设备可以预设有多个标准手势,不同的标准手势可以控制目标窗口的可操作控件执行指定的操作。基于此,若电子设备检测到用户发起的交互操作与任一标准手势相匹配,则识别该交互操作的操作类型为第一操作类型,执行S602的操作;反之,若交互操作与各个标准手势均不匹配,则识别该交互操作的操作类型为第二操作类型,执行S603的操作。
在一种可能的实现方式中,不同的可操作控件对应的第一操作类型可以是不同的。
在一种可能的实现方式中,第一操作类型与第二操作类型是相互互斥的两个操作类型,即若该交互操作并非第一操作类型,则必然属于第二操作类型。在该情况下,电子设备可以判断交互操作是否属于第一操作类型,若是,则执行S602的操作;反之,若该交互操作并非第一操作类型,则识别该交互操作为第二操作类型,执行S603的操作。当然,电子设备同样可以判断该交互操作是否属于第二操作类型,若是,则执行S603的操作;反之,若该交互操作并非第二操作类型,则识别该交互操作为第一操作类型,执行S602的操作。通过配置两个关系互斥的操作类型,只需判断交互操作是否与某一操作类型相匹配,即可确定该交互操作的操作类型,从而提高了操作类型的识别效率,继而提高了交互操作的响应速度。
在一种可能的实现方式中,电子设备可以配置有预设的防抖条件,该防抖条件具体可以为一抖动范围。电子设备可以获取上述交互操作的实际生成的交互轨迹,并以该交互操作的第一个触控点作为基准点,得到该交互操作对应的抖动范围,例如,上述抖动范围为一圆形区域,则可以以上述交互操作的第一个触控点为圆心,生成一个圆形区域范围作为该交互操作的抖动范围。若该实际生成的交互轨迹在该抖动范围内,则识别该交互操作为无效交互操作,无需对该交互操作进行响应;反之,若该交互操作的交互轨迹在上述抖动范围外,则识别该交互操作为有效交互操作,并确定该交互操作的操作类型。
进一步地,作为本申请的另一实施例,图10示出了本申请另一实施例提供的窗口页面的交互方法的具体实现流程图。参见图10所示,与上一实施例相比,本申请实施例提供的窗口页面的交互方法,在S601之前还可以包括:S1001~S1002,具体描述如下:
进一步地,在所述响应于用户在目标窗口内发起的交互操作,确定所述交互操作的操作类型之前,还包括:
在S1001中,确定所述可操作控件的可交互信息;所述可交互信息包括可交互范围和/或可交互方向。
在本实施例中,电子设备可以根据可操作控件的可交互信息,确定第一操作类型。每个可操作控件在配置于窗口页面时,可以预先设置该可操作控件的可交互信息,该可交互信息可以记录有该可操作控件对应的数据包内,在该情况下,电子设备可以通过读取该数据包对应的配置语段,从而可以获取得到该可操作控件的可交互信息。
在一种可能的实现方式中,在电子设备加载目标窗口时,会对可操作控件的数据包进行解析,并将该可操作控件的数据包缓存于电子设备的存储器的缓存区域内,在该情况下,电子设备可以从缓存区域内获取可操作控件的可交互信息。
在本实施例中,该可交互信息可以包括有可交互范围和/或可交互方向。
其中,上述的可交互范围具体指的是,该可操作控件和/或该可操作控件内的显示内容可以进行交互的范围。示例性地,图11示出了本申请一实施例提供的可交互范围的示意图。参见图11中的(a)所示,该可操作控件可以在目标窗口内进行移动,目标窗口可以为该可操作控件配置对应的可移动区域,上述可移动区域即为该可操作控件对应的可交互范围。参见图11中的(b)所示,该可操作控件配置有虚拟摇杆,该虚拟摇杆有对应的触控区域,该虚拟摇杆的可触控区域即为该可操作控件对应的可交互范围。
其中,上述可交互方向具体指的是,该可操作控件和/或该可操作控件内的显示内容可以进行交互的方向。示例性地,图12示出了本申请一实施例提供的可交互方向的示意图。参见图12中的(a)所示,该可操作控件可以在预设的方向上移动,举例性地,该可操作控件具体为一列表控件,可以通过上下滑动从而改变该列表内显示的数据列,即该列表控件对应的可交互的方向为垂直方向,而由于用户发起交互操作时,无法保证滑动的方向一定在垂直方向上,因此,可以将与垂直方向之间在一定偏差角度内的方向均识别为可以可移动方向。参见图12中的(b),该可操作控件具体为一相册控件,可以通过左右滑动从而切换相册控件内显示的图像,即该相册控件对应的可交互方向为水平方向,同样地,电子设备可以允许一定偏差角度内的水平方向均识别为水平移动的滑动操作。
在一种可能的实现方式中,上述可交互信息具体包括有可操作控件的无效交互方向和/或无效交互范围。对应地,电子设备可以将除可操作控件的无效交互方向和/或无效交互范围外的其他范围,作为可操作控件的可交互方向和/或可交互范围。举例性地,继续参见图12中的(b)所示,该可操作控件具体为一相册控件,可以在左右方向上移动,因此,垂直方向的移动对于该可操作控件而言是无效的移动方向,基于此,可以将垂直方向的移动方向作为该可操作控件对应的无效方向,如图12中的(c)所示,将无效方向外的其他方向作为可操作控件的可交互方向。对应地,基于无效交互范围确定可交互控件的可交互范围也可以参照上述方式实现。
在S1002中,基于所述可交互信息确定所述可操作控件关联的所述第一操作类型。
在本实施例中,电子设备可以根据可操作控件的交互信息确定该可操作控件关联的第一操作类型。具体地,若电子设备采集到用户发起的交互操作与可交互信息相匹配,例如交互操作的操作区域在可操作控件的可操作范围内,和/或交互操作的操作方向为该可操作控件的可操作方向的覆盖范围内,则识别该交互操作的操作类型为第一操作类型。
在一种可能的实现方式中,电子设备同样可以获取目标窗口对应的可交互信息,为了与可操作控件的可交互信息进行区分,以下称目标窗口的可交互信息为第二交互信息。其中,获取上述第二交互信息的方式可以与确定可操作控件的可交互信息的方式相同,在此不再赘述一一赘述。上述的第二交互信息同样可以包括目标窗口的可交互范围和/或可交互方向。对应地,电子设备可以在获取到用户发起的交互操作后,将该交互操作与第二交互信息进行匹配,若交互操作与第二交互信息相匹配,则识别该交互操作为第二操作类型;反之,若该交互操作与第二交互信息不匹配,则识别该交互操作并非第二操作类型。
进一步地,作为本申请的另一实施例,所述第二操作类型为除所述第一操作类型外的其他操作类型。由于第一操作类型为可操作控件的可交互操作,因此对于可操作控件无效的交互操作,必然是对于目标窗口发起的交互操作,从而能够保证不影响可操作控件进行控制的同时,能够实现对操作对象的区分。
在本申请实施例中,通过确定可操作控件的可交互信息,并基于可操作控件的可交互信息确定其对应的第一操作类型,从而保证了第一操作类型均是对于可操作控件而言有效的操作类型,从而实现了对于可操作控件有效的交互操作则对可操作控件进行控制;而对于可操作控件无效的交互操作则对目标窗口进行控制,实现了对交互操作的操作对象的识别。
进一步地,作为本申请的另一实施例,图13示出了本申请又一实施例提供的窗口页面的交互方法S601的具体实现流程图。参见图13所示,与上一实施例相比,本申请实施例提供的窗口页面的交互方法,S601可以包括:S1301~S1302,具体描述如下:
进一步地,所述响应于用户在目标窗口内发起的交互操作,确定所述交互操作的操作类型,包括:
在S1301中,识别所述交互操作对应的按压时长。
在本实施例中,电子设备可以根据交互操作对应的按压时长,确定该交互操作对应的操作类型,即电子设备可以根据用户发起的交互操作的按压时长,识别用户所需操作的操作对象,以实现对操作对象的意图识别。
在一种可能的实现方式中,上述交互操作对应的按压时长,具体指的是该交互操作的首个操作点对应的按压时间。
对于点击操作而言,若该交互操作为点击操作,则确定该交互操作的首个操作点,即上述点击操作对应的点击位置,识别该点击操作在该点击位置对应的停留时间,将该停留时间识别为上述交互操作对应的按压时长。
对于滑动操作而言,若该交互操作为滑动操作,则在交互操作开始时,至滑动开始前之间的时间间隔,则识别为该交互操作对应的按压时长。例如,用户在发起滑动操作的时候,会生成一条连续的滑动路径,而该滑动路径对应的第一个触控点,即为上述“在交互操作开始时,至滑动开始前”对应的触控点,电子设备可以确定第一个触控点对应的停留时长,将该停留时长识别为该交互操作对应的按压时长。通过上述第一个触控点对应的停留时长,可以将滑动操作至少划分为:短按滑动类型以及长按滑动类型。
示例性地,图14示出了本申请一实施例提供的滑动操作的示意图。参见图14中的(a)所示,用户在发起该滑动操作时,第一个触控点即为点A,并从点A开始进行滑动,并生成滑动轨迹1401,其中,在点A停留时间为0.3s,该第一个触控点的停留时间小于预设的时间阈值,因此该滑动轨迹1401为短按滑动类型。
参加图14中的(b)所示,用户在发起滑动操作时,第一个触控点为点B,并从点B开始进行滑动,并生成滑动轨迹1402,其中,在点B停留的时间为1s,该第一个触控点的停留时间大于或等于预设的时间阈值,因此该滑动轨迹1402为长按滑动类型。
可选地,电子设备可以将在第一个触控点的停留时间小于预设的时间阈值的交互操作识别为第一操作类型,即交互操作的操作对象为可操作控件,对应地,电子设备可以将在第一个触控点的停留时间大于或等于预设的时间阈值的交互操作识别为第二操作类型,即交互操作的操作对象为目标窗口。
又或者,电子设备可以将电子设备可以将在第一个触控点的停留时间小于预设的时间阈值的交互操作识别为第二操作类型,即交互操作的操作对象为目标窗口,对应地,电子设备可以将电子设备可以将在第一个触控点的停留时间大于或等于预设的时间阈值的交互操作识别为第一操作类型,即交互操作的操作对象为可操作控件。
在S1302中,根据所述按压时长确定所述交互操作的所述操作类型。
在本实施例中,电子设备在确定交互操作对应的按压时长后,可以根据按压时长的不同,确定该交互操作对应的操作类型。
在一种可能的实现方式中,电子设备可以配置有至少一个时间阈值,从而根据时间阈值将按压时长划分为至少两个时间区间,不同的时间区间可以对应不同的操作类型,电子设备可以识别本次交互操作对应的按压时长所落入的时间区间,并将该时间区间关联的操作类型作为该交互操作对应的操作类型。例如,将按压时长小于预设的时间阈值的交互操作识别为第二操作类型,即该交互操作的操作对象为目标窗口;而将按压时长大于或等于预设的时间阈值的交互操作识别为第一操作类型,即该交互操作的操作对象为可操作窗口。
在本申请实施例中,通过识别交互操作的按压时长,确定该交互操作对应的操作类型,从而实现通过不同的操作方式对不同的操作对象进行控制,无需额外增加对应的操作控件或者操作区域,从而能够提高交互操作准确性的同时,也能够避免对窗口页面布局的影响。
在S602中,若所述操作类型为第一操作类型,则识别所述可操作控件为所述交互操作的操作对象,并基于所述交互操作对所述可操作控件进行控制;所述第一操作类型是与所述可操作控件关联的操作类型。
在本实施例中,电子设备在检测到交互操作与可操作控件关联的第一操作类型相匹配时,则表示该交互操作对应的操作对象为可操作控件,因此,电子设备可以基于该交互操作对可操作控件进行控制。例如,若该交互操作为向上滑动50个像素点pixel,则可以对可操作控件执行上移50pixel;当然,若该交互操作为关闭操作,则可以将可操作控件从目标窗口中移除,因此,对于可操作控件的控制操作具体根据交互操作实际的操作内容确定,在此不对操作内容以及对可操作控件的控制效果进行限定。
在一种可能的实现方式中,该目标窗口还可以包含两个或以上的可操作控件。在该情况下,不同的可操作控件对应不同的操作类型。为了便于区分,将对于可操作控件的操作类型统称为第一操作类型,而对于目标窗口的操作类型统称为第二操作类型。因此,若目标窗口内包含多个可操作控件,则在确定该交互操作的操作对象为可操作控件时,即该交互操作的操作类型为第一操作类型,则可以进一步识别该交互操作对应的可操作控件。
可选地,示例性地,图15示出了本申请一实施例提供的确定可操作控件的实现示意图。电子设备确定交互操作对应的可操作控件的方式可以:
1.参见图15中的(a)所示,根据该交互操作的坐标信息,计算与两个可操作控件之间的位置偏差值,将位置偏差值较小的可操作控件作为该交互操作对应的可操作控件。上述交互操作的坐标信息具体可以为该交互操作第一个触控点的坐标,计算交互操作与可操作控件之间的位置偏差值时,可以获取可操作控件的控件中心对应的坐标,作为该可操作控件的特征坐标,并根据该特征坐标与交互操作的坐标信息计算上述的位置偏差值;当然,也可以获取可操作控件上离交互操作的第一个触控点最近的边界点的坐标,根据该边界点的坐标以及上述第一个触控点的坐标,计算上述的位置偏差值,通过位置偏差值确定交互操作对应的可操作控件。
2.参见图15中的(b)所示,若一个目标窗口包含有多个可操作控件,而由于显示空间的限制,多个可操作控件无法同时在显示界面上完全展示,例如可操作控件1501处于完全展示状态,而可操作控件1502则部分区域被遮挡,当然,当可操作控件较多的情况下,部分可操作控件可以处于隐藏显示的状态,在该情况下,电子设备可以计算各个可显示控件的显示比例,选取显示比例最高的一个可操作控件作为交互操作对应的操作对象;若存在多个可操作控件的显示比例均为100%,即处于完全显示状态,则分别计算上述各个处于完全显示状态的可操作控件与显示界面中心坐标之间的相距距离,选取相距距离最小的可操作控件作为交互操作的操作对象。
可选地,不同的可操作控件可以对应不同的操作类型,例如可操作控件A对应的操作类型为第一操作A类型,而可操作控件B对应的操作类型为第一操作B类型,在该情况下,电子设备在确定交互的操作类型时,可以判断该交互操作类型是第二操作类型,或是第一操作A类型,或是第二操作B类型,继而确定该交互操作对应的可操作控件具体是哪一个。即在确定交互操作的操作类型时,即可以从多个可操作控件中确定所需操作的可操作控件。
进一步地,作为本申请的另一实施例,在确定该交互操作为第一操作类型后,并基于交互操作对可操作控件进行控制之前,可以识别该交互操作是否为有效的交互操作,即将交互操作与预设的抖动范围进行比对。示例性地,图16示出了本申请一实施例提供的抖动范围的示意图。参见图16所示,电子设备可以预设有抖动范围,若该交互操作在上述的抖动范围内,则识别该交互操作为无效操作,如交互操作1;反之,若该交互操作在抖动范围外,则识别该交互操作为有效操作,如交互操作2,对于无效的交互操作可以不进行响应;而对于有效的交互操作则可以进行响应。
在本申请一实施例中,由于用户发起交互操作是存在操作时间的,并且当该交互操作为一滑动操作时,则对应的操作时长则会较长,为了实现电子设备与交互操作的实时响应,电子设备可以在采集用户的交互操作的同时,基于以获取的交互操作对可操作控件进行控制。基于此,电子设备可以设置有多个采集周期,为了实现实时响应,上述采集周期的周期时长可以较短,例如可以为0.1s,用户发起的交互操作的操作时间可以包含N个采集周期,电子设备在采集完第n个(n为小于N的正整数)采集周期对应的交互操作后,则可以识别该交互操作的操作类型,并基于该交互操作对对应的操作对象进行控制。例如该交互操作的操作类型为第一操作类型,则该交互操作的操作对象为可操作控件,在该情况下,在进入第n+1个采集周期时,电子设备可以基于第n个采集周期获取到的交互操作对可操作控件进行控制,并同时在第n+1个采集周期获取用户发起的交互操作,直到交互操作已全部采集完毕,则电子设备会在第N+1个采集周期基于第N个采集周期获取到的交互操作对可操作控件进行控制,从而实现实时响应可操作控件的目的。
在S603中,若所述操作类型为第二操作类型,则识别所述目标窗口为所述交互操作的操作对象,并基于所述交互操作对所述目标窗口进行控制。
在本实施例中,电子设备在检测到交互操作并非可操作控件关联的第一操作类型或确定该交互操作为目标窗口关联的第二操作类型时,则表示该交互操作对应的操作对象为目标窗口,因此,电子设备可以基于该交互操作对目标窗口进行控制。例如,若该交互操作为向上滑动50个像素点pixel,则可以对目标窗口执行上移50pixel;当然,若该交互操作为关闭操作,则可以将关闭目标窗口,因此,对于目标窗口的控制操作具体根据交互操作实际的操作内容确定,在此不对操作内容以及对可操作控件的控制效果进行限定。
在本实施例中,基于交互操作对目标窗口进行控制的方式与对可操作控件进行控制的方式相同,具体可以参见S602的相关描述,在此不再赘述。
以上可以看出,本申请实施例提供的一种窗口页面的交互方法可以通过在电子设备接收到用户发起的交互操作时,识别该交互操作的操作类型,基于该操作类型确定交互操作对应的操作对象,例如该交互操作的操作类型为第一操作类型,则可以确定该交互操作对应的操作对象为可操作控件,并基于上述交互操作对目标窗口上的可操作控件进行控制,例如向指定方向移动或翻页等;反之,若该交互操作的操作类型为第二操作类型,则可以确定该交互操作对应的操作对象为目标窗口,并基于上述交互操作对目标窗口进行控制。与现有的交互响应技术相比,本申请实施例可以根据交互操作的操作类型区分操作对象是底层的目标窗口或是附着于窗口上的可操作控件,即便可操作控件与目标窗口的显示区域存在重叠,也能够区分对应的操作对象,并对对应的操作对象进行控制,从而提高了交互操作的准确性,以及提升了用户的使用体验。
另一方面,由于本申请实施例在确定交互操作的操作对象时,无需在可操作控件内配置对应的专属操作区域,而是可以根据该交互操作的操作类型区分不同的操作对象,并不会对可操作控件在窗口页面上的布局造成影响,降低了窗口页面的布局难度并且提高了窗口页面内区域的利用效率。并且上述交互操作并不限定于在某个指定区域内完成,也进一步提高了交互操作的灵活性。
实施例二:
图17示出本申请第二实施例提供的窗口页面的流程示意图,参见图17所示,与上一实施例相比,实施例二提供的窗口页面的交互方法中,配置有窗口事件标识,该窗口事件标识是在响应了一次操作对象为目标窗口的交互操作后,会对该目标窗口的窗口事件标识进行配置,并在识别该交互操作的操作类型之前,会对该窗口事件标识的位值进行识别,基于窗口事件标识的位值的不同,执行不同的响应流程。具体地,本申请第二实施例提供的窗口页面的交互方法包括:S1701~S1706:
在S1701中,响应于所述交互操作,获取所述目标窗口对应的所述窗口事件标识。
在本实施例中,电子设备在接收到用户发起的交互操作后,可以获取当前显示界面上显示的目标窗口的窗口事件标识。该窗口事件标识用于确定上一关联的交互操作的操作对象是否为目标窗口。
在一种可能的实现方式中,用户在发起交互操作时,电子设备可以判断该交互操作与上一交互操作之间是否存在关联性。例如,用户需要对目标窗口进行拖动时,可以先进行向左拖动,然后在进行向上拖动,即上述两个滑动操作属于关联的交互操作,在该情况下,电子设备会识别该交互操作的操作对象相同。
在一种可能的实现方式中,电子设备可以配置有关联时间阈值,若电子设备检测到任意两个交互操作之间的时间间隔在上述的关联时间阈值内,则识别上述两个交互操作为关联的交互操作,则将上一关联的交互操作的操作对象作为该交互操作的操作对象;反之,若上述两个交互操作之间的时间间隔在上述的关联时间阈值外,则识别上述两个交互操作并非关联的交互操作,则重新获取该交互操作的操作类型,基于操作类型确定该交互操作对应的操作对象。
在一种可能的实现方式中,电子设备可以配置有多个采集周期,用户发起的交互操作可以是一个连续的交互操作,电子设备可以基于上述采集周期,将用户发起的连续的交互操作划分为多个存在关联的交互操作,将存在关联的交互操作的操作对象识别为相同的操作对象。在该情况下,若电子设备识别得到用户的交互操作中断,例如手指离开触摸屏,或松开鼠标的点击按键,则识别该连续的交互操作以完成,此时,可以重置上述的窗口事件标识,例如将窗口事件标识配置为预设的无效位值,以便电子设备重新确定交互操作的操作对象。
示例性地,图18示出了本申请一实施例提供的交互操作的划分示意图。参见图18所示,该交互操作具体为一滑动操作,会在触控屏上生成一个触控轨迹,电子设备可以根据采集周期或者预设的有效移动距离,在采集上述触控轨迹的过程中,会将上述连续的交互操作识别为多个持续时间较短或移动距离较短的交互操作,在此称为子交互操作,即在用户发起一个连续的交互操作的过程中,电子设备会获取得到多个子交互操作,并分别对各个子交互操作执行S1701的操作。对于上述多个隶属于同一连续的交互操作的多个子交互操作,均识别为均在关联的交互操作,并在连续的交互操作完成时,电子设备可以重置上述的窗口事件标识。
在一种可能的实现方式中,电子设备可以为目标窗口以及可操作控件分配不同的线程以处理对应的操作。在该情况下,电子设备在接收到交互操作后,首先将交互操作的事件交由目标窗口的线程进行处理,该目标窗口的线程会获取窗口事件标识,并基于窗口事件标识的值,确定是继续通过目标窗口的线程处理(例如窗口事件标识处于有效位值),或是交由可操作控件的线程处理(例如窗口事件标识处于无效位值)。
在S1702中,若所述窗口事件标识为预设的无效位值,则执行所述确定所述交互操作的操作类型。
在本实施例中,电子设备在识别了窗口事件标识为无效位值时,即表示上一时刻并没有与该交互操作关联的另一操作对目标窗口进行控制,在该情况下,需要重新识别该交互操作对应的操作对象,基于此,需要确定该交互操作的操作类型,并根据该操作类型确定该交互操作的操作对象。具体描述可以参见S601的相关描述,在此不再赘述。
在S1703中,若所述操作类型为第一操作类型,则识别所述可操作控件为所述交互操作的操作对象,并基于所述交互操作对所述可操作控件进行控制;所述第一操作类型是与所述可操作控件关联的操作类型。
在S1704中,若所述操作类型为第二操作类型,则识别所述目标窗口为所述交互操作的操作对象,并基于所述交互操作对所述目标窗口进行控制。
在本实施例中,由于S1703与S602完全相同,S1704与S603完全相同,因此,S1703和S1704的具体实现过程可以参见S602和S603的相关描述,在此不再赘述。
在S1705中,将所述目标窗口对应的窗口事件标识配置为预设的有效位值。
在本实施例中,电子设备在识别得到上述交互操作的操作对象为目标窗口并完成基于交互操作对目标窗口的控制后,电子设备可以将目标窗口对应的窗口事件标识配置为预设的有效值,并在后续电子设备采集到与该交互操作关联的另一交互操作后,可以继续将目标窗口作为另一交互操作的操作对象,对该目标窗口进行控制,而无需再次进行操作对象的识别,保持了交互操作的连续性。
在一种可能的实现方式中,在S1705之后,还包括:若电子设备在预设的有效时间内未接收到新的交互操作,则将所述窗口事件标识重置为预设的无效位值。
在一种可能的实现方式中,在S1705之后,还包括:若电子设备识别得到上述交互操作已完成(例如滑动操作结束,手指离开触控屏,或拖拽操作结束,松开点击按键等等),则将所述窗口事件标识重置为预设的无效位值。
在一种可能的实现方式中,电子设备在基于交互操作对目标窗口进行控制前,会判断该交互操作是否为目标窗口的有效操作,即该目标窗口是否基于交互操作进行响应。由于部分的交互操作对于目标窗口而言,是无效操作,例如目标窗口已经位于屏幕的最左侧,此时发起目标窗口的左移操作,则目标窗口无法基于该交互操作进行响应,则该交互操作是目标窗口的无效操作。因此,若上述交互操作为无效操作,则不执行S1705的操作,而是将窗口事件标识配置为无效位值;反之,若上述交互操作为有效操作,则执行S1705的操作。
在S1706中,若所述窗口事件标识为所述有效位值,则基于所述交互操作对所述目标窗口进行控制。
在本实施例中,电子设备在确定了窗口事件标识为有效位值时,则表示当前采集到的交互操作存在上一关联的交互操作,且该上一关联的交互操作的操作对象为目标窗口,在该情况下,则无需确定该交互操作的操作类型,而是可以根据该交互操作对目标窗口进行控制。
在本申请实施例中,通过配置窗口事件标签,能够在存在关联的上一交互操作的情况下,无需对本次采集得到的交互操作的类型进行识别,并将上一交互操作的操作对象作为本次操作的操作对象,提高了交互操作的连续性,避免了错误切换操作对象的情况发生,提高了操作的准确性。
实施例三:
图19示出本申请第三实施例提供的窗口页面的流程示意图,参见图19所示,与实施例一相比,实施例三提供的窗口页面的交互方法中,配置有控件事件标识,该控件事件标识是在响应了一次操作对象为可操作控件的交互操作后,会对该可操作控件的控件事件标识进行配置,并在识别上述交互操作并非可操作控件的第一操作类型之后,会对该控件事件标识的位值进行识别,基于控件事件标识的位值的不同,执行不同的响应流程。具体地,本申请实施例三提供的窗口页面的交互方法包括:S1901~S1906:
在S1901中,响应于用户在目标窗口内发起的交互操作,确定所述交互操作的操作类型;所述目标窗口内包含至少一个可操作控件。
在本实施例中,S1901的实现方式与S601的实现方式完全相同,S1901的具体描述可以参见S601的相关描述,在此不再赘述。
在S1902中,若所述操作类型为第一操作类型,则识别所述可操作控件为所述交互操作的操作对象,并基于所述交互操作对所述可操作控件进行控制;所述第一操作类型是与所述可操作控件关联的操作类型。
在本实施例中,S1902的实现方式与S602的实现方式完全相同,S1902的具体描述可以参见S602的相关描述,在此不再赘述。
在S1903中,将所述可操作控件对应的控件事件标识配置为预设的第一位值。
在本实施例中,电子设备在对可操作控件进行响应完毕后,可以对该可操作控件的控件事件标识进行配置,将控件事件标识配置为预设的第一位值,在控件事件标识处于第一位值下,则表示该控件事件标识处于有效状态,在后续电子设备采集到与该交互操作关联的另一交互操作后,可以继续将可操作控件作为另一交互操作的操作对象,对该可操作控件进行控制,而无需再次进行操作对象的识别,保持了交互操作的连续性。其中,该控件事件标识用于确定上一关联的交互操作的操作对象是否为可操作控件。
在本实施例中,判断本次采集的交互操作与上一采集的交互操作是否为关联的交互操作,可以参见S1701的相关描述,在此不再赘述。
在一种可能的实现方式中,在S1903之后,还包括:若电子设备在预设的有效时间内未接收到新的交互操作,则将所述控件事件标识重置为预设的第二位值。
在一种可能的实现方式中,在S1903之后,还包括:若电子设备识别得到上述交互操作已完成(例如滑动操作结束,手指离开触控屏,或拖拽操作结束,松开点击按键等等),则将所述控件事件标识重置为预设的第二位值。
在S1904中,若所述操作类型为第二操作类型,则确定所述可操作控件对应的控件事件标识。
在本实施例中,电子设备在判定该交互操作为第二操作类型时,可以获取上述控件事件标识的值,并根据控件事件标识的不同,执行不同的响应操作。具体地,若该控件事件标识为第一位值,则执行S1905的操作;反之,若该控件事件标识为第二位值,则执行S1906的操作。
在一种可能的实现方式中,若第一操作类型为基于可操作控件的可交互信息确定的,即该第一操作类型为可操作控件可响应的操作类型;对应地,第二操作类型即为可操作控件不可响应的操作类型,在该情况下,在确定上述采集到的交互操作为可操作控件不可响应的交互操作时,则确定该可操作控件的控件事件标识。
在S1905中,若所述控件事件标识为预设的第一位值,则结束响应所述交互操作。
在本实施例中,若控件事件标识为预设的第一位值,则表示当前采集的交互操作与上一采集到的交互操作存在关联关系,操作对象均为可操作控件,在该情况下,由于本次采集到的交互操作对于可操作控件而言属于无效的交互操作,在该情况下,则直接结束响应该交互操作。
在S1906中,若所述控件事件标识为预设的第二位值,则执行所述识别所述目标窗口为所述交互操作的操作对象,并基于所述交互操作对所述目标窗口进行控制。
在本实施例中,若控件事件标识为预设的第二位值,则表示当前采集的交互操作与上一采集到的交互操作不存在关联关系,且该交互操作的操作类型并非可操作控件关联的第一操作类型,在该情况下,可以识别目标窗口为交互操作的操作对象,并通过交互操作对目标窗口进行控制。
在一种可能的实现方式中,若电子设备为目标窗口配置有对应的窗口事件标识,则在基于交互操作对目标窗口进行控制时,可以将上述窗口事件标识配置为预设的有效位值,以便后续采集到的交互操作可以将目标窗口识别为操作对象。
在本申请实施例中,通过配置控件事件标签,能够在存在关联的上一交互操作的情况下,能够将上一交互操作的操作对象作为本次操作的操作对象,提高了交互操作的连续性,避免了错误切换操作对象的情况发生,提高了操作的准确性。
实施例四:
图20示出本申请第四实施例提供的窗口页面的流程示意图,参见图20所示,与实施例一相比,实施例四提供的窗口页面的交互方法中,配置有控件事件标识以及窗口事件标识,其中,控件事件标识以及窗口事件标识的作用可以参见实施例二以及实施例三的描述,在此不再赘述。具体地,本申请实施例四提供的窗口页面的交互方法包括:S2001~S2008:
在S2001中,响应于所述交互操作,获取所述目标窗口对应的所述窗口事件标识。
在本实施例中,S2001的实现方式与S1701的实现方式完全相同,S2001的具体描述可以参见S1701的相关描述,在此不再赘述。
在S2002中,若所述窗口事件标识为预设的无效位值,则执行所述确定所述交互操作的操作类型。
在本实施例中,S2002的实现方式与S1702的实现方式完全相同,S2002的具体描述可以参见S1702的相关描述,在此不再赘述。
进一步地,在确定该交互操作的操作类型之前,可以判断该交互操作是否满足预设的防抖条件,即该交互操作是否超出预设的抖动范围,若是,则识别该交互操作为有效操作,执行确定所述交互操作的操作类型的操作;反之,若该交互操作没有超出抖动范围,则识别该交互操作为无效操作,结束响应该交互操作。
在S2003中,若所述操作类型为第一操作类型,则将所述可操作控件对应的控件事件标识配置为预设的第一位值;所述第一操作类型是与所述可操作控件关联的操作类型;所述第一操作类型是与所述可操作控件关联的操作类型。
在本实施例中,S2003的实现方式与S1903的实现方式完全相同,S2003的具体描述可以参见S1903的相关描述,在此不再赘述。
在S2004中,识别所述可操作控件为所述交互操作的操作对象,并基于所述交互操作对所述可操作控件进行控制。
在本实施例中,S2004的实现方式与S602的实现方式完全相同,S2004的具体描述可以参见S602的相关描述,在此不再赘述。
在S2005中,若所述操作类型为第二操作类型,则确定所述可操作控件对应的控件事件标识。
在本实施例中,S2005的实现方式与S1904的实现方式完全相同,S2005的具体描述可以参见S1904的相关描述,在此不再赘述。
在S2006中,若所述控件事件标识为预设的第一位值,则结束响应所述交互操作。
在本实施例中,S2006的实现方式与S1905的实现方式完全相同,S2006的具体描述可以参见S1905的相关描述,在此不再赘述。
在S2007中,若所述控件事件标识为预设的第二位值,则执行所述识别所述目标窗口为所述交互操作的操作对象,并基于所述交互操作对所述目标窗口进行控制。
在本实施例中,S2007的实现方式与S1906的实现方式完全相同,S2007的具体描述可以参见S1906的相关描述,在此不再赘述。
进一步地,上述S2007可以包括:
判断所述目标窗口是否可以基于所述交互操作进行对应的响应操作。
若目标窗口可以基于交互操作进行对应的响应操作,则将所述目标窗口对应的窗口事件标识配置为预设的有效位值,并执行对应的响应操作。
若目标窗口无法基于交互操作进行对应的响应操作,则结束响应操作。
在S2008中,若所述窗口事件标识为所述有效位值,则基于所述交互操作对所述目标窗口进行控制。
在本实施例中,S2008的实现方式与S1706的实现方式完全相同,S2008的具体描述可以参见S1706的相关描述,在此不再赘述。
进一步地,上述S2008可以包括:
判断所述目标窗口是否可以基于所述交互操作进行对应的响应操作。
若目标窗口可以基于交互操作进行对应的响应操作,则将所述目标窗口对应的窗口事件标识配置为预设的有效位值,并执行对应的响应操作。
若目标窗口无法基于交互操作进行对应的响应操作,则结束响应操作。
示例性地,图21示出了本申请一实施例提供的在未满足防抖条件下窗口页面的交互方法的响应流程图。参见图21所示,具体包括以下步骤:
1.电子设备接收到交互操作,并获取窗口事件标识为无效位值,则电子设备可以对交互操作进行防抖识别。
2.电子设备判断该交互操作的操作轨迹并未超出预设的防抖范围,即该交互操作并未满足预设的防抖条件。
3.由于为满足预设的防抖条件,则结束响应上述交互操作。
示例性地,图22示出了本申请一实施例提供的在对响应完可操作控件的交互操作后,窗口页面的交互方法的响应流程图,即控件事件标识被配置为第一位值。参见图22所示,具体包括以下步骤:
1.电子设备接收到交互操作后,可以将交互操作交由目标窗口的线程进行处理,目标窗口的线程在接收到上述分发的事件后,可以获取窗口事件标识,并确定窗口事件标识为无效位值,此时,目标窗口的线程可以将上述的交互操作的事件交由可操作控件的线程进行处理,通过可操作控件的线程对交互操作进行防抖识别。
2.电子设备通过可操作控件的线程判断该交互操作的操作轨迹超出预设的防抖范围,即该交互操作满足预设的防抖条件,可操作控件的线程会进一步确定该交互操作的操作类型。
3.可操作控件的线程若识别到该交互操作的操作类型为第一操作类型,此时,可以将控件事件标识配置为第一位值,并基于交互操作对可操作控件进行控制。当控件时间标识为第一位值后,电子设备接收到的后续关联的交互操作均交由可操作控件的线程进行处理,将操作对象识别为可操作控件,直到上述交互操作的事件完成。
4.可操作控件若识别到该交互操作的操作类型为第二操作类型,则可操作控件的线程会识别控件事件标识,并在识别到该控件事件标识为第一位值时,不对本次交互操作进行响应。
示例性地,图23示出了本申请一实施例提供的在首次对目标窗口进行响应时,窗口页面的交互方法的响应流程图,即窗口事件标识被配置为无效位值且控件事件标识被配置为第二位值。参见图23所示,具体包括以下步骤:
1.电子设备接收到交互操作后,可以将交互操作交由目标窗口的线程进行处理,目标窗口的线程在接收到上述分发的事件后,可以获取窗口事件标识,并确定窗口事件标识为无效位值,此时,目标窗口的线程可以将上述的交互操作的事件交由可操作控件的线程进行处理,通过可操作控件的线程对交互操作进行防抖识别。
2.电子设备通过可操作控件的线程判断该交互操作的操作轨迹超出预设的防抖范围,即该交互操作满足预设的防抖条件,可操作控件的线程会进一步确定该交互操作的操作类型。
3.可操作控件的线程识别到该交互操作的操作类型为第二操作类型,则可操作控件的线程会识别控件事件标识,并在识别到该控件事件标识为第二位值时,将本次的交互操作的事件交由目标窗口的线程进行处理。
4.电子设备可以通过目标窗口的线程可以配置窗口事件标识为第一位值,并基于交互操作对目标窗口进行控制。
示例性地,图24示出了本申请一实施例提供的在对响应完目标窗口的交互操作后,窗口页面的交互方法的响应流程图,即窗口事件标识被配置为有效位值。参见图24所示,具体包括以下步骤:
1.电子设备接收到交互操作后,可以将交互操作交由目标窗口的线程进行处理,目标窗口的线程在接收到上述分发的事件后,可以获取窗口事件标识,并确定窗口事件标识为有效位值,会继续通过目标窗口的线程进行处理。
2.电子设备可以通过目标窗口的线程对目标窗口进行控制,直到交互时间结束。
实施例五:
对应于上文实施例所述的窗口页面的交互方法,图25示出了本申请实施例提供的窗口页面的交互装置的结构框图,为了便于说明,仅示出了与本申请实施例相关的部分。
参照图25,该窗口页面的交互装置包括:
操作类型确定单元251,用于响应于用户在目标窗口内发起的交互操作,确定所述交互操作的操作类型;所述目标窗口内包含至少一个可操作控件;
第一操作类型响应单元252,用于若所述操作类型为第一操作类型,则识别所述可操作控件为所述交互操作的操作对象,并基于所述交互操作对所述可操作控件进行控制;所述第一操作类型是与所述可操作控件关联的操作类型;
第二操作类型响应单元253,用于若所述操作类型为第二操作类型,则识别所述目标窗口为所述交互操作的操作对象,并基于所述交互操作对所述目标窗口进行控制。
可选地,窗口页面的交互装置,还包括:
可交互信息确定单元,用于确定所述可操作控件的可交互信息;所述可交互信息包括可交互范围和/或可交互方向;
第一操作类型确定单元,用于基于所述可交互信息确定所述可操作控件关联的所述第一操作类型。
可选地,所述第二操作类型为除所述第一操作类型外的其他操作类型。
可选地,所述操作类型确定单元251,包括:
按压时长获取单元,用于识别所述交互操作对应的按压时长;
按压时长对比文件,用于根据所述按压时长确定所述交互操作的所述操作类型。
可选地,所述第二操作类型响应单元253,还包括:
窗口事件标识配置单元,用于将所述目标窗口对应的窗口事件标识配置为预设的有效位值。
可选地,所述操作类型确定单元251,包括:
窗口事件标识获取单元,用于响应于所述交互操作,获取所述目标窗口对应的所述窗口事件标识;
有效位值响应单元,用于若所述窗口事件标识为所述有效位值,则基于所述交互操作对所述目标窗口进行控制。
可选地,窗口页面的交互装置,还包括:
无效位值响应单元,用于若所述窗口事件标识为预设的无效位值,则执行所述确定所述交互操作的操作类型。
可选地,窗口页面的交互装置,还包括:
控件事件标识配置单元,用于将所述可操作控件对应的控件事件标识配置为预设的第一位值。
可选地,所述第二操作类型响应单元253,包括:
控件事件标识识别单元,用于若所述操作类型为第二操作类型,则确定所述可操作控件对应的控件事件标识;
第一位值响应单元,用于若所述控件事件标识为预设的第一位值,则结束响应所述交互操作;
第二位值响应单元,用于若所述控件事件标识为预设的第二位值,则执行所述识别所述目标窗口为所述交互操作的操作对象,并基于所述交互操作对所述目标窗口进行控制。
因此,本申请实施例提供的窗口页面的交互装置同样可以通过在电子设备接收到用户发起的交互操作时,识别该交互操作的操作类型,基于该操作类型确定交互操作对应的操作对象,例如该交互操作的操作类型为第一操作类型,则可以确定该交互操作对应的操作对象为可操作控件,并基于上述交互操作对目标窗口上的可操作控件进行控制,例如向指定方向移动或翻页等;反之,若该交互操作的操作类型为第二操作类型,则可以确定该交互操作对应的操作对象为目标窗口,并基于上述交互操作对目标窗口进行控制。与现有的交互响应技术相比,本申请实施例可以根据交互操作的操作类型区分操作对象是底层的目标窗口或是附着于窗口上的可操作控件,即便可操作控件与目标窗口的显示区域存在重叠,也能够区分对应的操作对象,并对对应的操作对象进行控制,从而提高了交互操作的准确性,以及提升了用户的使用体验。
图26为本申请一实施例提供的电子设备的结构示意图。如图26所示,该实施例的电子设备26包括:至少一个处理器260(图26中仅示出一个)处理器、存储器261以及存储在所述存储器261中并可在所述至少一个处理器260上运行的计算机程序262,所述处理器260执行所述计算机程序262时实现上述任意各个窗口页面的交互方法实施例中的步骤。
所述电子设备26可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。该电子设备可包括,但不仅限于,处理器260、存储器261。本领域技术人员可以理解,图26仅仅是电子设备26的举例,并不构成对电子设备26的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如还可以包括输入输出设备、网络接入设备等。
所称处理器260可以是中央处理单元(Central Processing Unit,CPU),该处理器260还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器261在一些实施例中可以是所述电子设备26的内部存储单元,例如电子设备26的硬盘或内存。所述存储器261在另一些实施例中也可以是所述电子设备26的外部存储设备,例如所述电子设备26上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,所述存储器261还可以既包括所述电子设备26的内部存储单元也包括外部存储设备。所述存储器261用于存储操作系统、应用程序、引导装载程序(BootLoader)、数据以及其他程序等,例如所述计算机程序的程序代码等。所述存储器261还可以用于暂时地存储已经输出或者将要输出的数据。
需要说明的是,上述装置/单元之间的信息交互、执行过程等内容,由于与本申请方法实施例基于同一构思,其具体功能及带来的技术效果,具体可参见方法实施例部分,此处不再赘述。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
本申请实施例还提供了一种电子设备,该电子设备包括:至少一个处理器、存储器以及存储在所述存储器中并可在所述至少一个处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述任意各个方法实施例中的步骤。
本申请实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现可实现上述各个方法实施例中的步骤。
本申请实施例提供了一种计算机程序产品,当计算机程序产品在移动终端上运行时,使得移动终端执行时实现可实现上述各个方法实施例中的步骤。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实现上述实施例方法中的全部或部分流程,可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质至少可以包括:能够将计算机程序代码携带到拍照装置/电子设备的任何实体或装置、记录介质、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,RandomAccess Memory)、电载波信号、电信信号以及软件分发介质。例如U盘、移动硬盘、磁碟或者光盘等。在某些司法管辖区,根据立法和专利实践,计算机可读介质不可以是电载波信号和电信信号。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
在本申请所提供的实施例中,应该理解到,所揭露的装置/网络设备和方法,可以通过其它的方式实现。例如,以上所描述的装置/网络设备实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
以上所述实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围,均应包含在本申请的保护范围之内。
Claims (12)
1.一种窗口页面的交互方法,其特征在于,包括:
响应于用户在目标窗口内发起的交互操作,确定所述交互操作的操作类型;所述目标窗口内包含至少一个可操作控件;
若所述操作类型为第一操作类型,则识别所述可操作控件为所述交互操作的操作对象,并基于所述交互操作对所述可操作控件进行控制;所述第一操作类型是与所述可操作控件关联的操作类型;
若所述操作类型为第二操作类型,则识别所述目标窗口为所述交互操作的操作对象,并基于所述交互操作对所述目标窗口进行控制。
2.根据权利要求1所述的交互方法,其特征在于,在所述响应于用户在目标窗口内发起的交互操作,确定所述交互操作的操作类型之前,还包括:
确定所述可操作控件的可交互信息;所述可交互信息包括可交互范围和/或可交互方向;
基于所述可交互信息确定所述可操作控件关联的所述第一操作类型。
3.根据权利要求2所述的交互方法,其特征在于,所述第二操作类型为除所述第一操作类型外的其他操作类型。
4.根据权利要求1所述的交互方法,其特征在于,所述响应于用户在目标窗口内发起的交互操作,确定所述交互操作的操作类型,包括:
识别所述交互操作对应的按压时长;
根据所述按压时长确定所述交互操作的所述操作类型。
5.根据权利要求1所述的交互方法,其特征在于,所述若所述操作类型为第二操作类型,则识别所述目标窗口为所述交互操作的操作对象,并基于所述交互操作对所述目标窗口进行控制,还包括:
将所述目标窗口对应的窗口事件标识配置为预设的有效位值。
6.根据权利要求5所述的交互方法,其特征在于,所述响应于用户在目标窗口内发起的交互操作,确定所述交互操作的操作类型,包括:
响应于所述交互操作,获取所述目标窗口对应的所述窗口事件标识;
若所述窗口事件标识为所述有效位值,则基于所述交互操作对所述目标窗口进行控制。
7.根据权利要求6所述的交互方法,其特征在于,在所述响应于所述交互操作,获取所述目标窗口对应的所述窗口事件标识之后,还包括:
若所述窗口事件标识为预设的无效位值,则执行所述确定所述交互操作的操作类型。
8.根据权利要求1-7任一项所述的交互方法,其特征在于,在所述若所述操作类型为第一操作类型,则识别所述可操作控件为所述交互操作的操作对象,并基于所述交互操作对所述可操作控件进行控制之后,还包括:
将所述可操作控件对应的控件事件标识配置为预设的第一位值。
9.根据权利要求8所述的交互方法,其特征在于,所述若所述操作类型为第二操作类型,则识别所述目标窗口为所述交互操作的操作对象,并基于所述交互操作对所述目标窗口进行控制,包括:
若所述操作类型为第二操作类型,则确定所述可操作控件对应的控件事件标识;
若所述控件事件标识为预设的第一位值,则结束响应所述交互操作;
若所述控件事件标识为预设的第二位值,则执行所述识别所述目标窗口为所述交互操作的操作对象,并基于所述交互操作对所述目标窗口进行控制。
10.一种窗口页面的交互装置,其特征在于,包括:
操作类型确定单元,用于响应于用户在目标窗口内发起的交互操作,确定所述交互操作的操作类型;所述目标窗口内包含至少一个可操作控件;
第一操作类型响应单元,用于若所述操作类型为第一操作类型,则识别所述可操作控件为所述交互操作的操作对象,并基于所述交互操作对所述可操作控件进行控制;所述第一操作类型是与所述可操作控件关联的操作类型;
第二操作类型响应单元,用于若所述操作类型为第二操作类型,则识别所述目标窗口为所述交互操作的操作对象,并基于所述交互操作对所述目标窗口进行控制。
11.一种电子设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至9任一项所述的方法。
12.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至9任一项所述的方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011644145.7A CN114764300B (zh) | 2020-12-30 | 一种窗口页面的交互方法、装置、电子设备以及可读存储介质 | |
EP21913835.1A EP4250078A1 (en) | 2020-12-30 | 2021-12-09 | Window page interaction method and apparatus, electronic device, and readable storage medium |
PCT/CN2021/136899 WO2022143094A1 (zh) | 2020-12-30 | 2021-12-09 | 一种窗口页面的交互方法、装置、电子设备以及可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011644145.7A CN114764300B (zh) | 2020-12-30 | 一种窗口页面的交互方法、装置、电子设备以及可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114764300A true CN114764300A (zh) | 2022-07-19 |
CN114764300B CN114764300B (zh) | 2024-05-03 |
Family
ID=
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100125806A1 (en) * | 2008-11-20 | 2010-05-20 | Canon Kabushiki Kaisha | Information processing apparatus and method of controlling the same |
US20150121301A1 (en) * | 2013-10-28 | 2015-04-30 | Lenovo (Beijing) Co., Ltd. | Information processing method and electronic device |
CN109683766A (zh) * | 2018-12-28 | 2019-04-26 | 努比亚技术有限公司 | 交互界面控制方法、移动终端及计算机可读存储介质 |
CN110427151A (zh) * | 2019-06-28 | 2019-11-08 | 华为技术有限公司 | 一种控制用户界面的方法及电子设备 |
CN110647268A (zh) * | 2019-09-26 | 2020-01-03 | 网易(杭州)网络有限公司 | 一种游戏中显示窗口的操控方法及操控装置 |
CN112130742A (zh) * | 2019-06-25 | 2020-12-25 | 华为技术有限公司 | 一种移动终端的全屏显示方法及设备 |
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100125806A1 (en) * | 2008-11-20 | 2010-05-20 | Canon Kabushiki Kaisha | Information processing apparatus and method of controlling the same |
US20150121301A1 (en) * | 2013-10-28 | 2015-04-30 | Lenovo (Beijing) Co., Ltd. | Information processing method and electronic device |
CN109683766A (zh) * | 2018-12-28 | 2019-04-26 | 努比亚技术有限公司 | 交互界面控制方法、移动终端及计算机可读存储介质 |
CN112130742A (zh) * | 2019-06-25 | 2020-12-25 | 华为技术有限公司 | 一种移动终端的全屏显示方法及设备 |
CN110427151A (zh) * | 2019-06-28 | 2019-11-08 | 华为技术有限公司 | 一种控制用户界面的方法及电子设备 |
CN110647268A (zh) * | 2019-09-26 | 2020-01-03 | 网易(杭州)网络有限公司 | 一种游戏中显示窗口的操控方法及操控装置 |
Also Published As
Publication number | Publication date |
---|---|
WO2022143094A1 (zh) | 2022-07-07 |
EP4250078A1 (en) | 2023-09-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102470275B1 (ko) | 음성 제어 방법 및 전자 장치 | |
CN109814766B (zh) | 一种应用显示方法及电子设备 | |
CN113645351B (zh) | 应用界面交互方法、电子设备和计算机可读存储介质 | |
WO2021000881A1 (zh) | 一种分屏方法及电子设备 | |
CN111176506A (zh) | 一种屏幕显示方法及电子设备 | |
WO2021036770A1 (zh) | 一种分屏处理方法及终端设备 | |
CN113805487B (zh) | 控制指令的生成方法、装置、终端设备及可读存储介质 | |
WO2021052139A1 (zh) | 手势输入方法及电子设备 | |
CN113973189B (zh) | 显示内容的切换方法、装置、终端及存储介质 | |
CN112068907A (zh) | 一种界面显示方法和电子设备 | |
CN113986070B (zh) | 一种应用卡片的快速查看方法及电子设备 | |
CN110955373A (zh) | 一种显示要素的显示方法和电子设备 | |
CN112449101A (zh) | 一种拍摄方法及电子设备 | |
CN115016697A (zh) | 投屏方法、计算机设备、可读存储介质和程序产品 | |
CN114201738A (zh) | 解锁方法及电子设备 | |
CN113448658A (zh) | 截屏处理的方法、图形用户接口及终端 | |
CN113391775A (zh) | 一种人机交互方法及设备 | |
CN114995715B (zh) | 悬浮球的控制方法和相关装置 | |
CN113438366A (zh) | 信息通知的交互方法、电子设备和存储介质 | |
WO2020103091A9 (zh) | 锁定触控操作的方法及电子设备 | |
WO2022166435A1 (zh) | 分享图片的方法和电子设备 | |
WO2022002213A1 (zh) | 翻译结果显示方法、装置及电子设备 | |
CN114764300B (zh) | 一种窗口页面的交互方法、装置、电子设备以及可读存储介质 | |
WO2022143094A1 (zh) | 一种窗口页面的交互方法、装置、电子设备以及可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant |