CN118138813A - 一种光标控制方法和电子设备 - Google Patents
一种光标控制方法和电子设备 Download PDFInfo
- Publication number
- CN118138813A CN118138813A CN202211538582.XA CN202211538582A CN118138813A CN 118138813 A CN118138813 A CN 118138813A CN 202211538582 A CN202211538582 A CN 202211538582A CN 118138813 A CN118138813 A CN 118138813A
- Authority
- CN
- China
- Prior art keywords
- cursor
- electronic device
- screen
- instruction
- state
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 108
- 230000003068 static effect Effects 0.000 claims abstract description 43
- 210000000707 wrist Anatomy 0.000 claims description 62
- 230000033001 locomotion Effects 0.000 claims description 60
- 230000008859 change Effects 0.000 claims description 55
- 230000006870 function Effects 0.000 claims description 48
- 230000015654 memory Effects 0.000 claims description 33
- 230000004044 response Effects 0.000 claims description 26
- 238000004590 computer program Methods 0.000 claims description 7
- 230000000284 resting effect Effects 0.000 claims description 4
- 230000003993 interaction Effects 0.000 abstract description 48
- 238000004891 communication Methods 0.000 description 51
- 230000006854 communication Effects 0.000 description 51
- 230000000875 corresponding effect Effects 0.000 description 40
- 230000001976 improved effect Effects 0.000 description 32
- 238000010586 diagram Methods 0.000 description 25
- 238000012545 processing Methods 0.000 description 25
- 230000001276 controlling effect Effects 0.000 description 17
- 238000013461 design Methods 0.000 description 17
- 238000007726 management method Methods 0.000 description 17
- 230000008569 process Effects 0.000 description 16
- 230000036544 posture Effects 0.000 description 14
- 238000010295 mobile communication Methods 0.000 description 12
- 230000005057 finger movement Effects 0.000 description 10
- 210000004027 cell Anatomy 0.000 description 8
- 230000000694 effects Effects 0.000 description 8
- 238000006073 displacement reaction Methods 0.000 description 7
- 230000001413 cellular effect Effects 0.000 description 4
- 230000000366 juvenile effect Effects 0.000 description 4
- 230000002441 reversible effect Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 3
- 230000006399 behavior Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000002093 peripheral effect Effects 0.000 description 3
- 229920001621 AMOLED Polymers 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 230000003416 augmentation Effects 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 238000001179 sorption measurement Methods 0.000 description 2
- 230000007175 bidirectional communication Effects 0.000 description 1
- 238000013529 biological neural network Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000010267 cellular communication Effects 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 239000013078 crystal Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000002096 quantum dot Substances 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000003238 somatosensory effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000008093 supporting effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Abstract
本申请提供了一种光标控制方法和电子设备,该方法应用于第一电子设备,该方法包括:接收第二电子设备发送的第一指令,并根据第一指令将所述光标显示为静止态;接收第二电子设备发送的第二指令,根据第二指令将所述光标由所述静止态变化为指向态,且将所述光标、所述光标当前停留的焦点和所述第一电子设备屏幕上显示的列表中的至少一个在所述第一电子设备的屏幕上进行移动,以及当所述光标或所述列表停止移动时将所述光标显示为所述静止态;接收第二电子设备发送的第三指令,根据第三指令播放所述光标停留的目标焦点对应的画面。本申请可以解决指向交互难以精准控制的问题,防止用户因误操作而导致的光标抖动,从而实现高效交互,提升用户体验。
Description
技术领域
本申请实施例涉及电子设备领域,尤其涉及一种光标控制方法和电子设备。
背景技术
随着智慧屏的不断发展,越来越多的企业将移动端的应用迁移到智慧屏上,拓展大屏生态。目前业界常用的方式是主动指向方式,用户可以手持遥控器主动指向大屏进行操作,虽然这种主动指向方式简单易学,但是在实际操作过程中用户体验较差,无法实现高效交互。
具体地,当用户手机遥控器主动指向大屏进行操作时,许多非指向行为也会引起遥控器姿态变化,从而导致光标移动。例如,当用户选择播放视频1并在遥控器上进行点击或滑动时,引起遥控器的姿态发生变化,导致本应显示在该视频1上的光标会移动至大屏的其它位置,从而误将光标最终所停留位置的焦点打开,降低用户体验。
发明内容
本申请实施例提供一种光标控制方法和电子设备,可以解决指向交互难以精准控制的问题,实现高效交互,以提升用户体验。
第一方面,提供了一种光标控制方法,所述方法应用于第一电子设备,所述方法包括:接收所述第二电子设备发送的第一指令,并根据所述第一指令将所述光标显示为静止态;接收所述第二电子设备发送的第二指令,根据所述第二指令将所述光标由所述静止态变化为指向态,且将所述光标、所述光标当前停留的焦点和所述第一电子设备屏幕上显示的列表中的至少一个在所述第一电子设备的屏幕上进行移动,以及当所述光标或所述列表停止移动时将所述光标显示为所述静止态,其中,在所述光标显示为所述指向态时,所述光标、所述光标当前停留的焦点、所述列表中至少一个可移动,在所述光标显示为所述静止态时,所述光标、所述光标当前停留的焦点和所述列表不可移动;接收所述第二电子设备发送的第三指令,根据所述第三指令播放所述光标停留的目标焦点对应的画面。
本申请实施例提供的方案,第一电子设备可以根据第二电子设备发送的第一指令将光标显示为静止态,且在光标为静止态的情况下,第一电子设备可以根据第二电子设备发送的第二指令将光标变化为指向态,并将光标、光标当前停留的焦点和第一电子设备屏幕上显示的列表中的至少一个在第一电子设备的屏幕上进行移动,当移动停止时,光标显示为静止态,进一步地,第一电子设备可以根据接收的第三指令播放光标移动停止时停留的目标焦点所对应的画面。本申请实施例提供的方案,通过区分光标的状态且当光标处于指向态时,第一电子设备可以根据接收的指令将光标、光标当前停留的焦点和列表中的至少一个进行移动,当光标处于静止态时,光标、光标当前停留的焦点和列表不可移动,可以解决指向交互难以精准控制的问题,防止用户因误操作而导致的光标抖动,从而实现高效交互,提升用户体验。
结合第一方面,在一些可能的实现方式中,所述第二指令用于指示所述光标按照第一方向移动且移动第一距离;所述根据所述第二指令将所述光标由所述静止态变化为指向态,且所述光标、所述光标当前停留的焦点和所述第一电子设备屏幕上显示的列表中的至少一个在所述第一电子设备的屏幕上进行移动,包括:根据所述第二指令将所述光标由所述静止态变化为所述指向态,且将所述光标在所述第一电子设备的屏幕上按照所述第一方向移动所述第一距离。
本申请实施例提供的方案,第二指令指示光标按照第一方向移动且移动第一距离,此时第一电子设备可以根据该第二指令将光标在第一电子设备的屏幕上按照第一方向移动第一距离,即第一电子设备可以根据第二指令准确地对光标进行移动,可以解决指向交互难以精准控制的问题,从而进一步实现高效交互,提升用户体验。
结合第一方面,在一些可能的实现方式中,处于所述指向态的所述光标呈现第一状态,所述第一状态表征所述光标移动的方向。
本申请实施例提供的方案,处于所述指向态的光标呈现第一状态,该第一状态表征光标移动的方向,通过这样的设计可以更好地向用户反馈交互状态,从而提升用户体验。
结合第一方面,在一些可能的实现方式中,所述第二指令用于指示所述第一电子设备屏幕上显示的列表按照第二方向移动且移动第二距离;所述根据所述第二指令将所述光标由所述静止态变化为指向态,且将所述光标、所述光标当前停留的焦点和所述第一电子设备屏幕上显示的列表中的至少一个在所述第一电子设备的屏幕上进行移动,包括:根据所述第二指令将所述光标由所述静止态变化为所述指向态,且将所述列表在所述第一电子设备的屏幕上按照所述第二方向移动所述第二距离。
本申请实施例提供的方案,第二指令指示第一电子设备屏幕上显示的列表按照第二方向移动且移动第二距离,此时,第一电子设备可以根据第二指令列表在第一电子设备的屏幕上按照第二方向移动第二距离,即第一电子设备可以根据第二指令准确地对第一电子设备屏幕上显示的列表进行移动,可以进一步实现高效交互,提升用户体验。
结合第一方面,在一些可能的实现方式中,处于所述指向态的所述光标呈现第二状态,所述第二状态表征所述列表移动的方向和所述光标形变的幅度。
本申请实施例提供的方案,处于指向态的光标呈现第二状态,该第二状态表征第一电子设备屏幕上显示的列表移动的方向和光标形变的幅度,通过这样的设计可以更好地向用户反馈交互状态,从而提升用户体验。
结合第一方面,在一些可能的实现方式中,所述第二指令包括所述光标按照第三方向移动且移动第三距离;所述根据所述第二指令将所述光标由所述静止态变化为指向态,且将所述光标、所述光标当前停留的焦点和所述第一电子设备屏幕上显示的列表中的至少一个在所述第一电子设备的屏幕上进行移动,包括:根据所述第二指令将所述光标由所述静止态变化为所述指向态,且将所述光标和所述光标当前停留的焦点在所述第一电子设备的屏幕上按照所述第三方向移动所述第三距离。
本申请实施例提供的方案,第二指令指示光标按照第三方向移动且移动第三距离,此时,第一电子设备可以根据第二指令将光标和光标当前停留的焦点在第一电子设备的屏幕上按照第三方向移动第三距离,即第一电子设备可以根据第二指令准确地对光标和光标当前停留的焦点进行移动,可以进一步实现高效交互,提升用户体验。
结合第一方面,在一些可能的实现方式中,所述光标呈现第三状态,所述第三状态表征所述光标和所述光标停留的焦点移动的方向。
本申请实施例提供的方案,处于指向态的光标呈现第三状态,该第三状态表征光标和光标停留的焦点移动的方向,通过这样的设计可以更好地向用户反馈交互状态,从而提升用户体验。
结合第一方面,在一些可能的实现方式中,所述方法还包括:接收所述第二电子设备发送的第四指令,根据所述第四指令显示功能框,所述功能框中包括用于控制所述第一电子设备当前显示的画面的功能键。
本申请实施例提供的方案,第一电子设备可以接收第二电子设备发送的第四指令,并根据第四指令显示功能框,该功能框中包括用于控制第一电子设备当前显示的画面的功能键,本申请实施例提供了一种显示功能框的方法,通过这样的设计可以与指向操作或滑动操作区分开,且通过功能键可以调整当前显示的画面。
结合第一方面,在一些可能的实现方式中,若根据所述第二指令将所述光标移出所述第一电子设备的屏幕,处于所述指向态的所述光标显示第四状态,所述第四状态表征所述光标从所述第一电子设备的屏幕移出的方向和所述光标移出所述第二电子设备的屏幕的幅度;所述方法还包括:接收所述第二电子设备发送的第五指令,根据所述第五指令将所述光标显示在所述第一电子设备的屏幕上。
本申请实施例提供的方案,第一电子设备可以接收第二电子设备发送的第五指令并根据第五指令将光标重新显示在第一电子设备的屏幕上。在第一电子设备在根据第五指令使得光标重新显示在第一电子设备的屏幕上的过程中,光标形态会随之发生变化,光标形变的程度可以表征第二电子设备的姿态偏出第一电子设备的角度,通过这样的动效设计可以更好地向用户反馈交互状态,从而提升用户体验。尤其是,当第一电子设备根据第二指令将光标移出第一电子设备的屏幕时,本申请实施例提供的方案可以使得光标重新显示在第一电子设备的屏幕上,且可以根据光标形变的程度了解第二电子设备的姿态偏出第一电子设备的角度,提升用户体验。
第二方面,提供一种光标控制方法,所述方法应用于第二电子设备,所述方法包括:响应于用户的第一操作,生成第一指令,所述第一指令用于指示显示在第一电子设备上的光标显示静止态;向第一电子设备发送所述第一指令;响应于用户的第二操作,生成第二指令,所述第二指令用于指示光标从所述静止态变化为指向态,且在所述光标显示为所述指向态时所述光标、所述光标当前停留的焦点和所述第一电子设备屏幕上显示的列表中的至少一个在所述第一电子设备的屏幕上移动的方向和/或距离,以及所述光标或所述列表停止移动时所述光标显示为所述静止态,其中,在所述光标显示为所述指向态时,所述光标、所述光标当前停留的焦点、所述列表中至少一个可移动,在所述光标显示为所述静止态时,所述光标、所述光标当前停留的焦点和所述列表不可移动;向所述第一电子设备发送所述第二指令;响应于用户的第三操作,生成第三指令,所述第三指令用于指示播放所述光标停留的目标焦点对应的画面;向所述第一电子设备发送所述第三指令。
本申请实施例提供的方案,响应于用户的第一操作,第二电子设备可以生成第一指令,并将该第一指令发送至第一电子设备,以便于第一电子设备可以根据第一指令将光标显示为静止态;响应于用户的第二操作,第二电子设备可以生成第二指令,并将该第二指令发送至第一电子设备,以便于第一电子设备可以根据第二指令将光标变化为指向态,并将光标、光标当前停留的焦点和第一电子设备屏幕上显示的列表中的至少一个在第一电子设备的屏幕上进行移动,当移动停止时,光标显示为静止态;响应于用户的第三操作,第二电子设备生成第三指令,并将该第三指令发送至第一电子设备,以便于第一电子设备可以根据接收的第三指令播放光标移动停止时停留的目标焦点所对应的画面。本申请实施例提供的方案,第二电子设备可以响应于用户的不同操作生成不同的指令,以便于第一电子设备可以根据接收的指令进行相应地操作,具体地,当光标处于指向态时,将光标、光标当前停留的焦点和列表中的至少一个进行移动,当光标处于静止态时,光标、光标当前停留的焦点和列表不可移动,可以解决指向交互难以精准控制的问题,防止用户因误操作而导致的光标抖动,从而实现高效交互,提升用户体验。
结合第二方面,在一些可能的实现方式中,所述响应于用户的第二操作,生成第二指令,包括:响应于所述第二操作,确定所述第二操作的操作类型,所述操作类型包括指向操作、滑动操作;根据所述第二操作的操作类型生成所述第二指令。
本申请实施例提供的方案,响应于第二操作,第二电子设备可以先确定该第二操作的操作类型,并根据第二操作的操作类型较为准确地生成第二指令并发送给第一电子设备,以便于第一电子设备可以根据第二指令执行相应地动作,由于第二指令是基于第二操作的操作类型生成的,换句话说,第二指令包括的内容可以反映用户对第二电子设备的操作,以便于第一电子设备在根据第二指令执行相应地操作时,可以与用户的第二操作实现同步,例如,第二操作为指向操作,第一电子设备可以根据该指向操作执行光标和/或光标停留的焦点的移动,而不会执行列表的滑动,可以进一步实现高效交互,提升用户体验。
结合第二方面,在一些可能的实现方式中,所述响应于所述第二操作,确定所述第二操作的操作类型,包括:响应于所述第二操作,确定移动轨迹对应的数值与第一阈值的大小,或者,确定角度差值和第二阈值的大小,其中,所述移动轨迹为所述第二操作包括的作用于所述第二电子设备的屏幕上的手指的移动轨迹,所述角度差值为由于所述第二操作导致的所述第二电子设备的姿态角的变化的差值;若所述移动轨迹对应的数值大于所述第一阈值,确定所述第二操作为所述滑动操作;若所述角度差值大于所述第二阈值,确定所述第二操作为所述指向操作。
本申请实施例提供的方案,若第二操作包括的作用于第二电子设备的屏幕上的手指的移动轨迹对应的数值大于第一阈值,第二电子设备可以确定第二操作为滑动操作;若由于所述第二操作导致的所述第二电子设备的姿态角的变化的差值大于第二阈值,第二电子设备可以确定第二操作为指向操作。换句话说,第二电子设备可以根据移动轨迹和姿态角的变化的差值确定第二操作是滑动操作还是指向操作,并根据操作类型生成相应的指令并发送给第一电子设备,以便于第一电子设备可以根据接收的指令执行相应的动作,可以防止由于操作类型不确定而导致生成的第二指令所指示的内容的不准确,导致第一电子设备执行有误,因此,本申请实施例可以实现精准交互,提升用户体验。
结合第二方面,在一些可能的实现方式中,若所述第二操作的操作类型为所述指向操作,所述第二指令用于指示所述光标和/或所述光标当前停留的焦点在所述第一电子设备的屏幕上移动的方向和/或距离;若所述第二操作的操作类型为所述滑动操作,所述第二指令用于指示所述第一电子设备屏幕上显示的列表在所述第一电子设备的屏幕上移动的方向和/或距离。
本申请实施例提供的方案,若第二操作的操作类型为指向操作,第二指令用于指示光标和/或光标当前停留的焦点在第一电子设备的屏幕上移动的方向和/或距离;若第二操作的操作类型为滑动操作,第二指令用于指示第一电子设备屏幕上显示的列表在第一电子设备的屏幕上移动的方向和/或距离。以便于第一电子设备可以根据第二指令准确地对光标、光标当前停留的焦点和第一电子设备屏幕上显示的列表中的至少一个进行移动,可以进一步实现高效交互,提升用户体验。
结合第二方面,在一些可能的实现方式中,所述第一操作为所述用户的手指按住所述第二电子设备的屏幕,所述第二操作为手持所述第二电子设备的所述用户的手腕向第一方向移动;所述第二指令用于指示所述光标按照所述第一方向移动且移动第一距离。
本申请实施例提供的方案,第二指令所指示的具体内容与第一操作和第二操作有关,若第一操作为用户的手指按住第二电子设备的屏幕,第二操作为手持第二电子设备的用户的手腕向第一方向移动,则第二指令可以指示光标按照第一方向移动且移动第一距离,以便于第一电子设备可以根据该第二指令将光标在第一电子设备的屏幕上按照第一方向移动第一距离,即第一电子设备可以根据第二指令准确地对光标进行移动,可以解决指向交互难以精准控制的问题,从而进一步实现高效交互,提升用户体验。
结合第二方面,在一些可能的实现方式中,处于所述指向态的所述光标呈现第一状态,所述第一状态表征所述光标移动的方向。
本申请实施例提供的方案,第二指令还用于指示处于所述指向态的光标呈现第一状态,该第一状态表征光标移动的方向,通过这样的设计可以更好地向用户反馈交互状态,从而提升用户体验。
结合第二方面,在一些可能的实现方式中,所述第一操作为所述用户的手指按住所述第二电子设备的屏幕,所述第二操作为所述用户的手指在所述第二电子设备上的屏幕沿第二方向滑动;所述第二指令用于指示所述第一电子设备屏幕上显示的列表按照第二方向移动且移动第二距离。
本申请实施例提供的方案,第二指令所指示的具体内容与第一操作和第二操作有关,若第一操作为用户的手指按住第二电子设备的屏幕,第二操作为所述用户的手指在第二电子设备上的屏幕沿第二方向滑动;则第二指令可以指示第一电子设备屏幕上显示的列表按照第二方向移动且移动第二距离,以便于第一电子设备可以根据第二指令列表在第一电子设备的屏幕上按照第二方向移动第二距离,即第一电子设备可以根据第二指令准确地对第一电子设备屏幕上显示的列表进行移动,可以进一步实现高效交互,提升用户体验。
结合第二方面,在一些可能的实现方式中,处于所述指向态的所述光标呈现第二状态,所述第二状态表征所述列表移动的方向和所述光标形变的幅度。
申请实施例提供的方案,第二指令还用于指示处于指向态的光标呈现第二状态,该第二状态表征第一电子设备屏幕上显示的列表移动的方向和光标形变的幅度,通过这样的设计可以更好地向用户反馈交互状态,从而提升用户体验。
结合第二方面,在一些可能的实现方式中,所述第一操作为所述用户的手指在所述第二电子设备的屏幕上进行点击后抬起并在抬起后再次点击,所述第二操作为手持所述第二电子设备的所述用户的手腕向第三方向移动;所述第二指令用于指示所述光标按照所述第三方向移动且移动第三距离。
本申请实施例提供的方案,第二指令所指示的具体内容与第一操作和第二操作有关,若第一操作为用户的手指在第二电子设备的屏幕上进行点击后抬起并在抬起后再次点击,第二操作为手持所述第二电子设备的所述用户的手腕向第三方向移动;则第二指令可以指示光标按照第三方向移动且移动第三距离,以便于第一电子设备可以根据第二指令将光标和光标当前停留的焦点在第一电子设备的屏幕上按照第三方向移动第三距离,即第一电子设备可以根据第二指令准确地对光标和光标当前停留的焦点进行移动,可以进一步实现高效交互,提升用户体验。
结合第二方面,在一些可能的实现方式中,处于所述指向态的所述光标呈现第三状态,所述第三状态表征所述光标和所述光标停留的焦点移动的方向。
本申请实施例提供的方案,第二指令还包括处于指向态的光标呈现第三状态,该第三状态表征光标和光标停留的焦点移动的方向,通过这样的设计可以更好地向用户反馈交互状态,从而提升用户体验。
结合第二方面,在一些可能的实现方式中,当所述用户的手指在所述第二电子设备的屏幕上进行点击后抬起并在抬起后再次点击且再次点击停留的时长大于预设阈值时,所述方法还包括:生成第四指令,所述第四指令用于指示所述第一电子设备显示功能框,所述功能框中包括用于控制所述第一电子设备当前显示的画面的功能键;向所述第一电子设备发送所述第四指令。
本申请实施例提供的方案,当用户的手指在第二电子设备的屏幕上进行点击后抬起并在抬起后再次点击且再次点击停留的时长大于预设阈值时,第二电子设备可以生成第四指令并发送给第一电子设备,以便于第一电子设备可以根据第四指令显示功能框,该功能框中包括用于控制第一电子设备当前显示的画面的功能键,本申请实施例提供了一种显示功能框的方法,通过这样的设计可以与指向操作或滑动操作区分开,且通过功能键可以调整当前显示的画面。
结合第二方面,在一些可能的实现方式中,所述方法还包括:响应于用户的第四操作,生成第五指令,所述第五指令用于指示所述光标移动的方向以使得所述光标显示在所述第一电子设备的屏幕上;向所述第一电子设备发送所述第五指令。
本申请实施例提供的方案,第二电子设备可以响应于用户的第四操作生成第五指令并发送给第一电子设备,以便于第一电子设备可以根据第五指令将光标重新显示在第一电子设备的屏幕上。尤其是,当第一电子设备根据第二指令将光标移出第一电子设备的屏幕时,本申请实施例提供的方案可以使得光标重新显示在第一电子设备的屏幕上。
结合第二方面,在一些可能的实现方式中,所述光标和所述光标当前停留的焦点在所述第一电子设备的屏幕上移动的距离与第二电子设备转动的速度有关,所述第一电子设备屏幕上显示的列表在所述第一电子设备的屏幕上移动的距离与所述用户在所述第二电子设备的屏幕上滑动的速度有关。
本申请实施例提供的方案,光标和光标当前停留的焦点在第一电子设备的屏幕上移动的距离与第二电子设备转动的速度有关,第一电子设备屏幕上显示的列表在第一电子设备的屏幕上移动的距离与用户在第二电子设备的屏幕上滑动的速度有关,当第二电子设备转动的速度为固定值时,或者,用户在第二电子设备的屏幕上滑动的速度为固定时,通过调整显控比,可以调整光标或列表的移动距离,可以提升用户体验。
结合第二方面,在一些可能的实现方式中,所述第二电子设备转动的速度越快,所述显控比越大,所述光标和/或所述光标当前停留的焦点在所述第一电子设备的屏幕上移动的距离越大;所述第二电子设备转动的速度越慢,所述显控比越小,所述光标和/或所述光标当前停留的焦点在所述第一电子设备的屏幕上移动的距离越小。
本申请实施例提供的方案,光标和/或光标当前停留的焦点在第一电子设备的屏幕上移动的距离与第二电子设备转动的速度有关,即,第二电子设备转动的速度越快,显控比越大,则光标和/或光标当前停留的焦点在第一电子设备的屏幕上移动的距离越大,第二电子设备转动的速度越慢,显控比越小,则光标和/或光标当前停留的焦点在第一电子设备的屏幕上移动的距离越小。通过根据第二电子设备转动的速度调整显控比进一步调整光标和/或光标当前停留的焦点移动的距离,在一定程度上,可以兼顾移动的速度和精度,具体地,第二电子设备转动的速度越快,则最终光标和/或光标当前停留的焦点在第一电子设备的屏幕上移动的距离越大,可以理解为当第二电子设备转动的速度越快时,优先考虑光标和/或光标当前停留的焦点移动的效率,即将光标和/或光标当前停留的焦点快速移动到相应位置;第二电子设备转动的速度越慢,则最终光标和/或光标当前停留的焦点在第一电子设备的屏幕上移动的距离越小,可以理解为当第二电子设备转动的速度越慢时,优先考虑光标和/或光标当前停留的焦点移动的精度,即将光标和/或光标当前停留的焦点缓慢移动到精确位置。
结合第二方面,在一些可能的实现方式中,所述用户在所述第二电子设备的屏幕上滑动的速度越快,所述显控比越大,所述第一电子设备屏幕上显示的列表在所述第一电子设备的屏幕上移动的距离越大;所述用户在所述第二电子设备的屏幕上滑动的速度越慢,所述显控比越小,所述第一电子设备屏幕上显示的列表在所述第一电子设备的屏幕上移动的距离越小。
本申请实施例提供的方案,第一电子设备屏幕上显示的列表在第一电子设备的屏幕上移动的距离与用户在第二电子设备的屏幕上滑动的速度有关,即,用户在第二电子设备的屏幕上滑动的速度越快,显控比越大,则列表在第一电子设备的屏幕上移动的距离越大,用户在第二电子设备的屏幕上滑动的速度越慢,显控比越小,则列表在第一电子设备的屏幕上移动的距离越小。通过根据用户在第二电子设备的屏幕上滑动的速度调整显控比进一步调整列表移动的距离,在一定程度上,可以兼顾移动的速度和精度,具体地,用户在第二电子设备的屏幕上滑动的速度越快,则最终列表在第一电子设备的屏幕上移动的距离越大,可以理解为当用户在第二电子设备的屏幕上滑动的速度越快时,优先考虑列表移动的效率,即将列表快速移动到相应位置;用户在第二电子设备的屏幕上滑动的速度越慢,则最终列表在第一电子设备的屏幕上移动的距离越小,可以理解为当用户在第二电子设备的屏幕上滑动速度越慢时,优先考虑列表移动的精度,即将列表缓慢移动到精确位置。
第三方面,提供了一种装置,该装置包含在电子设备中,该装置具有实现上述方面及上述方面的可能实现方式中电子设备行为的功能。功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。硬件或软件包括一个或多个与上述功能相对应的模块或单元。
第四方面,提供了一种电子设备,包括:一个或多个处理器;存储器;一个或者多个应用程序;以及一个或多个计算机程序。其中,一个或多个计算机程序被存储在存储器中,一个或多个计算机程序包括指令。当指令被电子设备执行时,使得电子设备执行上述第一方面或第二方面任一项可能的实现中的方法。
第五方面,提供了一种芯片系统,包括至少一个处理器,当程序指令在所述至少一个处理器中执行时,使得上述第一方面或第二方面任一项可能的实现中的方法在电子设备上的功能得以实现。
第六方面,提供了一种计算机存储介质,包括计算机指令,当计算机指令在电子设备上运行时,使得电子设备执行上述第一方面或第二方面任一项可能的实现中的方法。
第七方面,提供了一种计算机程序产品,当计算机程序产品在电子设备上运行时,使得电子设备执行上述第一方面或第二方面任一项可能的设计中的方法。
附图说明
图1为本申请实施例提供的一种电子设备的硬件结构示意图。
图2为本申请实施例提供的一种电子设备的软件结构示意图。
图3为本申请实施例提供的一组GUI的示意图。
图4为本申请实施例提供的另一组GUI的示意图。
图5为本申请实施例提供的又一组GUI的示意图。
图6为本申请实施例提供的再一组GUI的示意图。
图7为本申请实施例提供的一种控制光标显示的方法的示意图。
图8为本申请实施例提供的一种光标显示的示意图。
图9为本申请实施例提供的一种用户基于身体朝向进行指向的示意图。
图10为本申请实施例提供的另一种用户基于身体朝向进行指向的示意图。
图11为本申请实施例提供的基于手机屏幕建立的平面坐标系的示意图。
图12为本申请实施例提供的基于手机屏幕建立的三维直角坐标系的示意图。
图13为本申请实施例提供的一种显控比曲线的示意图。
图14为本申请实施例提供的一种光控控制的方法的示意图。
图15为本申请实施例提供的一种电子设备的示意性框图。
图16为本申请实施例提供的另一种电子设备的示意性框图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述。其中,在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;本文中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,在本申请实施例的描述中,“多个”是指两个或多于两个。
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。
本申请实施例提供的方案可以应用于手机、平板电脑、可穿戴设备、车载设备、增强现实(augmented reality,AR)/虚拟现实(virtual reality,VR)设备、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本、个人数字助理(personal digital assistant,PDA)等电子设备上,本申请实施例对电子设备的具体类型不作任何限制。
示例性的,图1示出了电子设备100的结构示意图。电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
可以理解的是,本申请实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
其中,控制器可以是电子设备100的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。在一些实施例中,处理器110可以包含多组I2C总线。处理器110可以通过不同的I2C总线接口分别耦合触摸传感器180K,充电器,闪光灯,摄像头193等。例如:处理器110可以通过I2C接口耦合触摸传感器180K,使处理器110与触摸传感器180K通过I2C总线接口通信,实现电子设备100的触摸功能。
I2S接口可以用于音频通信。在一些实施例中,处理器110可以包含多组I2S总线。处理器110可以通过I2S总线与音频模块170耦合,实现处理器110与音频模块170之间的通信。在一些实施例中,音频模块170可以通过I2S接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。
PCM接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频模块170与无线通信模块160可以通过PCM总线接口耦合。在一些实施例中,音频模块170也可以通过PCM接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。所述I2S接口和所述PCM接口都可以用于音频通信。
UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,UART接口通常被用于连接处理器110与无线通信模块160。例如:处理器110通过UART接口与无线通信模块160中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块170可以通过UART接口向无线通信模块160传递音频信号,实现通过蓝牙耳机播放音乐的功能。
MIPI接口可以被用于连接处理器110与显示屏194,摄像头193等外围器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(displayserial interface,DSI)等。在一些实施例中,处理器110和摄像头193通过CSI接口通信,实现电子设备100的拍摄功能。处理器110和显示屏194通过DSI接口通信,实现电子设备100的显示功能。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,GPIO接口可以用于连接处理器110与摄像头193,显示屏194,无线通信模块160,音频模块170,传感器模块180等。GPIO接口还可以被配置为I2C接口,I2S接口,UART接口,MIPI接口等。
USB接口130是符合USB标准规范的接口,具体可以是Mini USB接口,Micro USB接口,USB Type C接口等。USB接口130可以用于连接充电器为电子设备100充电,也可以用于电子设备100与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如AR设备等。
可以理解的是,本申请实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本申请另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,外部存储器,显示屏194,摄像头193,和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A,受话器170B等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(codedivision multiple access,CDMA),宽带码分多址(wideband code division multipleaccess,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidounavigation satellite system,BDS),准天顶卫星系统(quasi-zenith satellitesystem,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
电子设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备100可以包括1个或N个显示屏194,N为大于1的正整数。
电子设备100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。摄像头193用于捕获静态图像或视频。视频编解码器用于对数字视频压缩或解压缩。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行电子设备100的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。
电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180A,电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,电子设备100根据压力传感器180A检测所述触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180B检测电子设备100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180B还可以用于导航,体感游戏场景。
加速度传感器180E可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
距离传感器180F,用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中,拍摄场景,电子设备100可以利用距离传感器180F测距以实现快速对焦。
触摸传感器180K,也称“触控面板”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
电子设备100的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本申请实施例以分层架构的Android系统为例,示例性说明电子设备100的软件结构。
图2是本申请实施例的电子设备100的软件结构框图。分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(Android runtime)和系统库,以及内核层。应用程序层可以包括一系列应用程序包。
如图2所示,应用程序包可以包括相机,图库,日历,通话,地图,导航,WLAN,蓝牙,音乐,视频,短信息等应用程序。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图2所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供电子设备100的通信功能。例如通话状态的管理(包括接通,挂断等)。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
Android runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。
系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(media libraries),三维图形处理库(例如:OpenGL ES),2D图形引擎(例如:SGL)等。
为了便于理解本申请的方案,下文先介绍下与本申请相关的技术。
随着智慧屏的不断发展,越来越多的企业将移动端的应用迁移到智慧屏上,拓展大屏生态。目前业界常用的方式是主动指向方式,用户可以手持遥控器主动指向大屏进行操作,虽然这种主动指向方式简单易学,但是在实际操作过程中用户体验较差,无法实现高效交互。
具体地,当用户手机遥控器主动指向大屏进行操作时,许多非指向行为也会引起遥控器姿态变化,从而导致光标移动。例如,当用户选择播放视频1并在遥控器上进行点击或滑动时,引起遥控器的姿态发生变化,导致本应显示在该视频1上的光标会移动至大屏的其它位置,从而误将光标最终所停留位置的焦点打开,降低用户体验。
本申请实施例提供一种光标控制方法,可以解决指向交互难以精准控制的问题,实现高效交互,以提升用户体验。
本申请以下实施例将以具有图1和图2所示结构的电子设备为例,结合附图和应用场景,对本申请实施例提供的光标控制的方法进行具体阐述。
图3示出了电视的一组图形用户界面(graphical user interface,GUI),其中,从图3中的(a)到图3中的(j)示出了用户通过手机控制电视界面上显示的光标的方法。
参见图3中的(a)所示的GUI,该GUI中电视显示的是主界面,该主界面上方显示Tab栏:我的、少儿、精选、VIP等,以及该主界面上还显示了多个视频。当前光标所呈现的状态为●,即光标处于静止态,且光标位于视频1这一焦点中,用户可以通过手机控制电视屏幕上光标的状态和位置,当电视检测到用户的手指按住手机的屏幕301这一操作时,电视可以显示如图3中的(b)所示的GUI。
参见图3中的(b)所示的GUI,可以看出,显示在电视屏幕上的光标所呈现的状态从●变换为即光标从普通态进入了静止态,用户可以将手机对准电视并转动手腕以改变手机的姿态,当电视检测到手机姿态从左往右转动时,电视可以显示如图3中的(c)所示的GUI。
需要说明的是,光标所呈现的状态可以包括普通态、静止态和指向态,在光标处于指向态时,当用户在转动手腕改变手机的姿态时,光标随着手机姿态的变化而移动;在光标处于静止态或普通态时,当用户在转动手腕改变手机的姿态时,光标不会移动。
参见图3中的(c)所示的GUI,可以看出,在手机的姿态从左往右转动的过程中,光标所呈现的状态从变换为/>即光标从静止态进入了指向态,其中,/>表示光标此时正在向右移动。用户可以随时停止转动手腕,当光标停留在用户想要播放的焦点中时,用户可以停止转动手腕,电视可以显示如图3中的(d)所示的GUI。
参见图3中的(d)所示的GUI,可以看出,此时显示在电视屏幕上的光标位于视频2这一焦点中,且光标所呈现的状态为即,光标从指向态回到了静止态,当电视检测到用户的手指再次点击手机的屏幕302这一操作时,电视可以显示如图3中的(e)所示的GUI。
参见图3中的(e)所示的GUI,电视屏幕显示关于视频2的信息,用户手指可以按住手机的屏幕,同时用户转动手腕将光标移动至“播放”这一功能控件的位置,然后在手机屏幕上进行点击后,电视即可播放视频2。
在一些实施例中,用户在转动手腕的过程中,有可能由于手腕转动的幅度过大而导致光标移动到电视的屏幕边缘甚至移出电视的屏幕边缘,本申请实施例提供一种光标显示方式,可以动效告知用户光标偏出的角度,以便于用户反向转动手腕补偿所偏出的角度。
如上述图3中的(c)所示的GUI,在手机的姿态从左往右转动的过程中,光标所呈现的状态从变换为/>当用户停止转动手腕时,光标位于视频2这一焦点中。若用户在转动手腕的过程中,转动的幅度过大,导致光标移动到电视的屏幕边缘,电视可以显示图3中的(f)所示的GUI。
参见图3中的(f)所示的GUI,可以看出,此时,光标所呈现的状态仍然为且光标位于屏幕右侧的边缘位置。若用户的手腕继续向右转动,随之手机也继续向右转动,电视可以显示图3中的(g)所示的GUI。
参见图3中的(g)所示的GUI,可以看出,此时光标已完全移出屏幕,且电视屏幕右侧的边缘显示图标表示光标此时已吸附到右边缘,若用户的手腕继续向右转动,电视可以显示图3中的(h)所示的GUI。
参见图3中的(h)所示的GUI,可以看出,电视屏幕右侧的边缘显示图标且图3中的(h)中右侧边缘显示的图标/>比图3中的(g)中右侧边缘显示的图标/>的高度更高,表示此时光标的吸附效果进一步增强。此时,用户可以反向转动手腕,即用户可以从右向左转动手腕,随之手机也开始向左转动,电视可以显示图3中的(i)所示的GUI。
参见图3中的(i)所示的GUI,可以看出,电视屏幕右侧边缘显示图标且图3中的(i)中右侧边缘显示的图标/>比图3中的(h)中右侧边缘显示的图标/>的高度要低,表示此时光标的吸附效果减弱。此时,用户可以进一步反向转动手腕,即用户继续向左转动手腕,电视可以显示图3中的(j)所示的GUI。
参见图3中的(j)所示的GUI,可以看出,电视屏幕的右侧边缘显示光标说明此时用户将手机偏出的角度通过反向转动手腕已补偿完毕,用户可以继续转动手腕以控制光标的移动。此外,还需要注意的是,由于用户在反向转动手腕的过程中,是从右向左转动手腕的,因此,当光标重新从电视屏幕的右侧边缘出现时,光标/>中的白色圆圈位于整个光标的左侧。
本申请实施例提供的方案,对于光标的状态进行了区分,若光标处于普通或静止态,当用户在转动手腕改变用于控制光标的手机的姿态时,光标不会移动,即光标的位置不会随着手机姿态的改变而改变;若光标处于指向态,当用户在转动手腕改变用于控制光标的手机的姿态时,光标随着手机的移动而移动,即光标的位置会随着手机姿态的改变而改变。与现有技术中由于用户的许多非指向行为引起的手机的姿态变化而导致光标移动的方案相比,本申请实施例通过区分光标的状态且当光标处于指向态时,光标的位置随着用于控制光标的手机的姿态的变化而变化,可以解决指向交互难以精准控制的问题,从而实现高效交互,提升用户体验。此外,本申请实施例还提供了一种反馈光标状态的视觉提示方式,即当光标移出电视屏幕边缘后,光标形态会发生变化,光标形变的程度可以表征手机姿态偏出电视的度数,此时,用户可以通过反向移动或转动手机,以补偿手机姿态偏出的角度,当手机偏出的角度通过反向转动补偿完毕时,光标重新从电视屏幕边缘出现。通过这样的动效设计可以更好地向用户反馈交互状态,从而提升用户体验。
图4示出了电视的另一组GUI,其中,从图4中的(a)到图4中的(e)示出了用户通过手机控制电视界面上显示的光标的方法。
参见图4中的(a)所示的GUI,该GUI中电视显示的是主界面,该主界面上方显示Tab栏:我的、少儿、精选、VIP等,以及该主界面上还显示了多个视频。当前光标所呈现的状态为●,且光标位于视频2这一焦点中,用户可以通过手机控制电视屏幕上光标的状态和位置,当电视检测到用户的手指按住手机的屏幕401这一操作时,电视可以显示如图4中的(b)所示的GUI。
参见图4中的(b)所示的GUI,可以看出,显示在电视屏幕上的光标所呈现的状态从●变换为即光标从普通态进入了静止态,用户手指在手机的屏幕上进行滑动可以使得电视界面的列表滚动起来,当电视检测到用户手指在手机的屏幕上向上滑动402时,电视可以显示如图4中的(c)所示的GUI。
参见图4中的(c)所示的GUI,可以看出,用户手指在手机屏幕上向上滑动的过程中,光标的状态形变为即光标从静止态进入了指向态,其中,/>表示电视界面上的列表(包括电视屏幕上显示的视频1、视频2、视频3、热门推荐、我的应用等)整体正在向上移动,当光标刚好停留在用户想要播放的焦点中时,此时,用户的手指在手机屏幕上可以保持静止不动,电视可以显示如图4中的(d)所示的GUI。
需要说明的是,本申请实施例中,光标形变的幅度与用户在手机屏幕上滑动的距离有关,用户在手机屏幕上滑动的距离越长,光标形变的幅度越大;用户在手机屏幕上滑动的距离越短,光标形变的幅度越小。但值的注意的是,光标形变的幅度存在最大上限值,最大上限值可以为预设值。
参见图4中的(d)所示的GUI,可以看出,此时显示在电视屏幕上的光标位于视频4这一焦点中,且光标所呈现的状态为即,光标从指向态回到了静止态,当电视检测到用户的手指离开电视时,电视可以显示如图4中的(e)所示的GUI。
参见图4中的(e)所示的GUI,可以看出,此时光标位于仍位于视频4这一焦点中,且当前光标所呈现的状态为●,此时,用户可以参考上述图3的方式对视频4进行播放。
本申请实施例提供的方案,用户可以通过在手机屏幕上滑动以使得电视屏幕所显示的视频画面滚动起来,可以使得用户更快地将光标定位到用户想要播放的焦点中,具体地,当用户手指在手机屏幕上滑动的过程中,光标的状态会发生形变,且形变的幅度与用户手机在手机屏幕上滑动的距离有关,即用户在手机屏幕上滑动的距离越长,光标形变的幅度越大;用户在手机屏幕上滑动的距离越短,光标形变的幅度越小。通过这样的动效设计可以更好地向用户反馈交互状态,从而提升用户体验。
图5示出了电视的另一组GUI,其中,从图5中的(a)到图5中的(d)示出了用户通过手机控制电视界面上显示的光标的方法。
参见图5中的(a)所示的GUI,该GUI中电视显示的是主界面,该主界面上方显示Tab栏:我的、少儿、精选、VIP等,以及该主界面上还显示了多个视频。当前光标所呈现的状态为●,且光标位于视频2这一焦点中,用户可以通过手机控制电视屏幕上光标的状态和位置,当电视检测到用户的手指在手机的屏幕上进行点击后抬起并在抬起后再次点击501这一操作时,电视可以显示如图5中的(b)所示的GUI。
参见图5中的(b)所示的GUI,可以看出,显示在电视屏幕上的光标所呈现的状态从●变换为即光标从普通态进入了静止态,其中,/>表示用户可以拖动光标所选择的焦点。用户可以通过转动手腕改变手机的姿态,从而可以拖动焦点的位置,当用户的手腕从左往右转动时,手机的姿态也随之从左往右转动,电视可以显示如图5中的(c)所示的GUI。
参见图5中的(c)所示的GUI,可以看出,在手机的姿态从左往右转动的过程中,光标所呈现的状态从变换为/>即光标从静止态进入了指向态,其中,/>表示表示光标以及视频2这一焦点此时正在统一向右移动。当光标以及视频2这一焦点拖动至用户想要显示的位置时,用户的手指可以离开手机的屏幕,电视可以显示如图5中的(d)所示的GUI。
参见图5中的(d)所示的GUI,可以看出,此时光标所呈现的状态又回到且视频2这一焦点此时位于电视界面的最右侧,而拖动之前位于电视界面最右侧的视频3此时位于拖动之前视频2的位置上,相当于将视频3的位置和视频2的位置进行了调换。
本申请实施例提供的方案,用户可以拖动电视屏幕上的焦点,具体地,当电视检测到用户的手指在手机的屏幕上进行点击后抬起并在抬起后再次点击这一操作时,光标的状态会发生变化,当光标的状态变换为这一状态时,用户可以对电视屏幕上的焦点进行拖动,将某一焦点拖动至用户想要该焦点位于的位置。通过这样的设计,可以实现对电视屏幕上的焦点的拖动,从而提升用户体验。
图6示出了电视的另一组GUI,其中,从图6中的(a)到图6中的(c)示出了用户通过手机控制电视界面上显示的光标的方法。
参见图6中的(a)所示的GUI,该GUI中电视显示的是主界面,该主界面上方显示Tab栏:我的、少儿、精选、VIP等,以及该主界面上还显示了多个视频。当前光标所呈现的状态为●,且光标位于视频2这一焦点中,用户可以通过手机控制电视屏幕上光标的状态和位置,当用户按照上述图3所示的方法播放视频2时,电视可以显示如图6中的(b)所示的GUI。
参见图6中的(b)所示的GUI,界面显示视频2的画面,当电视检测到用户的手指在手机的屏幕上进行点击后抬起并在抬起后再次点击且点击时长超过阈值时,触发长按操作,电视可以显示如图6中的(c)所示的GUI。
参见图6中的(c)所示的GUI,可以看出,此时界面弹出一个功能框,该功能框中包括用于控制该视频2的播放画面的功能键,用户可以通过点击相应的功能键控制视频2的播放。
图7为本申请实施例提供的一种控制光标显示的方法的示意图,本申请实施例以手机和电视为例,该方法可以包括步骤S710~S730。
S710,手指按压在手机屏幕上。
S712,手机是否能判断出操作类型。
若是,则执行步骤S714;若否,则执行步骤S716。
本申请实施例中,步骤S712中的手机判断操作类型可以基于用户在该手机上的操作进行判断,例如,当用户手指按压在手机屏幕上时,若手机监测到用户手持手机且手机自身姿态处于变化中,手机可以判断出操作类型为指向操作;若手机监测到用户手指在手机屏幕上的触摸坐标发生变化,手机可以判断出操作类型为滑动操作。
S714,是否是滑动操作。
若是,则执行步骤S718;若否,则执行步骤S720。
S718,基于触摸坐标变化,对电视屏幕上的列表进行滚动操作。
S720,基于手机姿态变化,控制光标在电视屏幕上进行移动。
本申请实施例中,当手机确定操作类型为滑动操作时,随着用户在手机屏幕上的触摸坐标的变化,电视屏幕上的列表进行滚动。如上述图4中所示出的,当用户手指在手机屏幕上向上滑动时,电视屏幕上的列表随之也向上滚动;类似地,当用户手指在手机屏幕上向下滑动时,电视屏幕上的列表随之也向下滚动。
当确定操作类型为指向操作时,随着手机姿态的变化,显示在电视屏幕上的光标也会进行移动。如上述图3中所示出的,当用户手持手机将手机对准电视并向右转动手腕时,显示在电视屏幕上的光标随之也会向右移动,当用户手持手机将手机对准电视并向左转动手腕时,显示在电视屏幕上的光标随之也会向左移动。当用户手持手机将手机对准电视并向上移动手腕时,显示在电视屏幕上的光标随之也会向上移动,当用户手持手机将手机对准电视并向下移动手腕时,显示在电视屏幕上的光标随之也会向上移动。
在一些实施例中,当确定操作类型为指向操作时,随着手机姿态的变化,除了显示在电视屏幕上的光标进行移动外,该光标所位于的焦点也会同时移动。手机可以通过用户在转动或移动手腕之前用户手指在手机屏幕上的动作进行区分,若用户在转动或移动手腕之前,手指在手机屏幕上进行点击后抬起并在抬起后再次进行点击,则用户在转动或移动手腕时,光标所位于的焦点和光标一起移动。如上述图5中所示的,当用户的手腕从左往右转动时,手机的姿态也随之从左往右转动,光标以及光标位于的视频2这一焦点统一向右移动。
如图8所示,为本申请实施例提供的一种光标显示的示意图。其中,图8中的(a)为光标的普通状态;图8中的(b)为用户的手指在手机的屏幕上进行点击,同时用户转动手腕或移动手腕时,光标的移动状态;图8中的(c)为用户手指在手机屏幕上滑动时,光标的移动状态;图8中的(d)为用户的手指在手机的屏幕上进行点击后抬起并在抬起后再次点击,同时用户转动手腕或移动手腕时,光标的移动状态。
此外,本申请实施例提供的方案,用户可以根据自身朝向,在适合的手腕活动范围内进行指向。
如图9和图10所示,分别为本申请实施例提供的一种用户基于身体朝向进行指向的示意图。
如图9所示,当用户正对着电视屏幕时,用户可以基于图9中所示的活动范围(如图中所示的角度α)朝着电视屏幕进行指向;如图10所示,当用户位于电视屏幕右侧时,用户可以基于所位于的电视屏幕右侧,基于图10中所示的活动范围(如图中所示的角度β)朝着电视屏幕左侧进行指向。
S716,是否是手指刚接触屏幕的第一帧。
若是,则执行步骤S722;若否,则执行步骤S724。
S722,记录初始触摸坐标和手机初始姿态。
本申请实施例中,对于无法判断出操作类型的情况,手机可以判断手指按压在手机屏幕上的这一操作是否是手指刚接触手机屏幕的第一帧,若是,则可以记录手指接触手机屏幕的初始触摸坐标和手机初始姿态,便于计算后续滑动操作的手指移动轨迹以及转动操作的手机姿态变化。
S724,手指移动轨迹的数值是否超过第一阈值。
若是,则执行步骤S726;若否,则执行步骤S728。
S726,进入滑动操作状态。
本申请实施例中,对于手指移动轨迹的数值的计算:可以基于手机屏幕的中心建立平面坐标系,并根据手指触摸的坐标的变化计算手指移动轨迹的数值。
如图11所示,为本申请实施例提供的基于手机屏幕建立的平面坐标系的示意图,假设用户手指的初始触摸位置A的坐标值为(a1,a2),当用户手指滑动至位置B后停止,B的坐标值为(b1,b2),若用户的手指移动轨迹为直线,则用户手指移动轨迹的数值可以表示为
本申请实施例中,在得到手指移动轨迹的数值后,可以判断该数值与第一阈值的大小,若该数值大于第一阈值,则可以认为用户在手机屏幕上进行了滑动,从而可以进入滑动操作状态;若该数值小于或等于第一阈值,则可以进一步判断手机姿态变化值与第二阈值的大小。
当手指移动轨迹的数值大于第一阈值,对于用户手指在手机屏幕上的操作,反映到电视上,电视界面上的列表会向上或向下滚动。具体地,若用户手指在手机屏幕上向上滑动,电视界面上的列表也会向上滚动,若用户手指在手机屏幕上向下滑动,电视界面上的列表也会向下滚动。
S728,手机姿态变化值是否超过第二阈值。
若是,则执行步骤S730,若否,则结束。
S730,进入指向操作状态。
本申请实施例中,对于手机姿态的变化值,可以基于手机屏幕的中心建立三维直角坐标系,并根据手机姿态的变化计算手机转动角度,即手机姿态的变化值。
如图12所示,为本申请实施例提供的基于手机屏幕建立的三维直角坐标系的示意图。
参见图12中的(a),以手机屏幕中心为坐标原点,分别以向右、向里、向上为x轴、y轴、z轴,当手机向右转动某一角度后,坐标轴也会随着手机的转动一起转动,则此时坐标轴会相应地发生变化,如图12中的(b)所示。
参见图12中的(b),可以看出,当手机从图12中的(a)所示的姿态向右转动某一角度后,手机的姿态发生了变化,由于坐标轴随着手机的转动一起转动,此时所呈现的坐标轴与图12中的(a)所呈现的坐标轴有所偏差。
为了弥补这个偏差,当手机转动某一角度后,可以按照新的坐标系(即x’轴、z’轴和y轴)计算手机的姿态,参见图12中的(c),新的坐标系可以理解为与图12中的(a)中所示的坐标系是一致的。
具体在计算时,可以根据以下公式进行计算:
relativeRotation=lastAttitudeinverse*currentaAttitude
其中,R表示相邻两帧设备的相对转动角度,[x,y,z]为用欧拉角形式表示的相对转动角度R,[q0,q1,q2,q3]为用四元数形式表示的相对转动角度R,currentAttitudeRotationQuaternion为翻滚角的旋转四元数,relativeRotation为相邻两帧坐标系的相对转动,currentAttitudeRotationQuaternion_inverse为翻滚角的旋转四元数的逆,roll为旋转后设备相对地球坐标系的翻滚角度,lastAttitude为旋转前设备相对地球坐标系的姿态(四元数形式),lastAttitudeinverse为lastAttitude的逆,currentaAttitude为旋转后设备相对地球坐标系的姿态(四元数形式)。
本申请实施例中,在得到手机姿态变化值后,可以判断该手机姿态变化值与第二阈值的大小,若该姿态变化值大于第二阈值,则可以认为用户手持手机进行了转动,从而可以进入指向操作状态;若该姿态变化值小于或等于第二阈值,则结束判断过程。
当姿态变化值大于第二阈值,对于用户手持手机转动或移动手腕的操作,反映到电视上,显示在电视上的光标会横向或纵向移动。具体地,若用户手持手机向右转动手腕时,显示在电视上的光标会向右移动;若用户手持手机向左转动手腕时,显示在电视上的光标会向左移动;若用户手持手机向上移动手腕时,显示在电视上的光标会向上移动;若用户手持手机向下移动手腕时,显示在电视上的光标会向下移动。
当然,在一些可能的实现方式中,判断手指移动的轨迹和第一阈值的大小与判断手机姿态的变化值和第二阈值的大小这两个判断过程不分先后。换句话说,可以先判断手指移动的轨迹和第一阈值的大小,然后再判断手机姿态的变化值和第二阈值的大小;或者,可以先判断手机姿态的变化值和第二阈值的大小,然后再判断手指移动的轨迹和第一阈值的大小;不予限制。
需要说明的是,虽然上述实施例中示出了手指移动轨迹的数值超过第一阈值时,则可以认为用户在手机屏幕上进行了滑动,在一些实施例中,当手指移动轨迹的数值等于超过第一阈值时,也可以认为用户在手机屏幕上进行了滑动;类似地,当手机姿态变化值等于第二阈值,也可以认为用户手持手机进行了转动。
此外,本申请实施例可以通过手腕的转动速度调整显控比,以控制光标移动的精度和速度。具体地,若手腕的转动速度较低,如手腕的转动速度小于预设值,则可以优先考虑光标显示的精度,即随着用户手腕的转动,光标可以慢慢移动,最终精准停留在用户想要光标所显示的位置;若手腕的转动速度较高,如手腕的转动速度大于该预设值,则可以优先考虑光标显示的效率,即随着用户手腕的转动,光标可以快速移动,并最终停留在用户想要光标所显示的位置的附近。
如图13所示,为本申请实施例提供的一种显控比曲线的示意图。从图中可以看出,对于任一条曲线,用户移动手机的速度越大或用户手指的移动速度越大,显控比越大,则显示在电视屏幕上的光标和/或光标停留的焦点的移动距离越多;用户移动手机的速度越小或用户手指的移动速度越小,显控比越小,则显示在电视屏幕上的光标和/或光标停留的焦点的移动距离越少。
值得注意的是,当用户移动手机的速度越大,则最终光标和/或光标当前停留的焦点在电视的屏幕上移动的距离越大,可以理解为当手机移动的速度越快时,优先考虑光标和/或光标当前停留的焦点移动的效率,即将光标和/或光标当前停留的焦点快速移动到相应位置;当用户移动手机的速度越慢,则最终光标和/或光标当前停留的焦点在电视的屏幕上移动的距离越小,可以理解为当手机移动的速度越慢时,优先考虑光标和/或光标当前停留的焦点移动的精度,即将光标和/或光标当前停留的焦点缓慢移动到精确位置。
此外,图中还示出了多条曲线,这多条曲线主要与光标的灵敏度有关,光标越灵敏,当手机或手指移动的速度越大,则显控比越大,因此,图中所示的曲线1所对应的光标的灵敏度是最大的,曲线2次之,依次类推。
情况一:用户手腕转动手机
具体可以按照以下公式计算显控比:
Gain=loopup(R)
R=max(|Rz|,|Ry|)+min(|Rz|,|Ry|)/2
其中,Gain为显控比,R为手机相邻两帧相对转动的总的转动角度,Rz为手机相邻两帧在水平方向的转动角度,Ry为手机相邻两帧在垂直方向的转动角度。
手机转动了角度R,反映到电视上,显示在电视上的光标移动的位移的大小用d表示:
dx=Rz*Gain
dy=Ry*Gain
其中,dx为光标的横向位移,dy为光标的纵向位移。
需要说明的是,本申请实施例中,同样的手腕动作,对于用户不同的手握手机的姿势,其指向效果是一致的。换句话说,手机的姿态变化值与用户手持手机的姿势无关,仅与手持手机的手的手腕的转动方向有关,当手腕横向转动,显示在电视上的光标横向移动,当手腕纵向转动,显示在电视上的光标纵向移动。
情况二:用户手指在屏幕上滑动
用户手指在手机屏幕上滑动的位移的大小为k,反映到电视上,显示在电视上的光标移动的位移的大小用d表示:
若用户手指上下滑动,则d=Gain*ky
若用户手指左右滑动,则d=Gain*kx
其中,Gain为显控比,ky手指的纵向位移,kx手指的横向位移。
本申请实施例提供的方案,手机通过结合用户手指的操作和手机姿态变化确定用户操作类型,并根据操作类型进入相应的操作状态,具体地,当手机基于用户手指的操作能够判断出操作类型时,可以基于手指在手机屏幕上触摸的坐标的变化,对电视屏幕上的列表进行滚动,或者,可以基于手机姿态的变化,控制光标在电视屏幕上进行移动;当手机基于用户手指的操作无法判断出操作类型时,可以先记录用户手指在手机屏幕上的初始触摸坐标,然后再判断用户手指的移动轨迹的数值与第一阈值的大小,或者,手机姿态变化值与第二阈值的大小,从而较为精准地进入相应的操作状态。通过上述设计可以解决指向交互难以精准控制的问题,从而实现高效交互,提升用户体验。
如图14所示,为本申请实施例提供的一种光控控制的方法的示意图。该方法可以由第一电子设备和第二电子设备执行,该方法可以包括步骤1410~1426。
1410,响应于用户的第一操作,所述第二电子设备生成第一指令,所述第一指令用于指示显示在第一电子设备上的光标显示静止态;
1412,所述第二电子设备向第一电子设备发送所述第一指令;
1414,所述第一电子设备根据所述第一指令显示所述光标为静止态。
本申请实施例中的第一电子设备可以为上述实施例中的电视,第二电子设备可以为上述实施例中的手机。当第一电子设备接收到第二电子设备发送的第一指令,可以根据第一指令将显示在该第一电子设备屏幕上的光标调整为静止态。
1416,响应于用户的第二操作,所述第二电子设备生成第二指令,所述第二指令用于指示所述光标由所述静止态变化为指向态,且在所述光标显示为所述指向态时所述光标、所述光标当前停留的焦点和所述第一电子设备屏幕上显示的列表中的至少一个在所述第一电子设备的屏幕上移动的方向和/或距离,以及所述光标或所述列表停止移动时所述光标显示为所述静止态,其中,在所述光标显示为所述指向态时,所述光标、所述光标当前停留的焦点、所述列表中至少一个可移动,在所述光标显示为所述静止态时,所述光标、所述光标当前停留的焦点和所述列表不可移动;
1418,所述第二电子设备向所述第一电子设备发送所述第二指令。
1420,所述第一电子设备根据所述第二指令将所述光标显示为由所述静止态变化为指向态,且将所述光标、所述光标当前停留的焦点和所述第一电子设备屏幕上显示的列表中的至少一个在所述第一电子设备的屏幕上进行移动,以及当所述光标或所述列表停止移动时将所述光标显示为所述静止态。
本申请实施例中,在光标显示为静止态的情况下,当第一电子设备接收到第二电子设备发送的第二指令,可以根据该第二指令执行相应的操作,例如,可以根据第二指令将光标变化为指向态,并将光标、光标当前停留的焦点和所述第一电子设备屏幕上显示的列表中的至少一个在第一电子设备的屏幕上进行移动。第一电子设备具体执行哪些操作与第二指令具体指示的内容有关,而第二指令具体指示的内容与用户的第二操作有关,具体情况请参考下文中的情况一、情况二、情况三。
1422,响应于用户的第三操作,所述第二电子设备生成第三指令,所述第三指令用于指示播放所述光标停留的目标焦点对应的画面;
1424,所述第二电子设备向所述第一电子设备发送所述第三指令。
1426,所述第一电子设备接收所述第二电子设备发送的第三指令,根据所述第三指令播放所述光标停留的目标焦点对应的画面。
本申请实施例提供的方案,第一电子设备可以根据第二电子设备发送的第一指令将光标显示为静止态,且在光标为静止态的情况下,第一电子设备可以根据第二电子设备发送的第二指令将光标变化为指向态,并将光标、光标当前停留的焦点和第一电子设备屏幕上显示的列表中的至少一个在第一电子设备的屏幕上进行移动,当移动停止时,光标显示为静止态,此时,第二电子设备可以根据用户的第三操作生成第三指令,第一电子设备可以根据接收的第三指令播放光标移动停止时停留的目标焦点所对应的画面。本申请实施例提供的方案,通过区分光标的状态且当光标处于指向态时,第一电子设备可以根据接收的指令将光标、光标当前停留的焦点和列表中的至少一个进行移动,当光标处于静止态时,光标、光标当前停留的焦点和列表不可移动,可以解决指向交互难以精准控制的问题,防止用户因误操作而导致的光标抖动,从而实现高效交互,提升用户体验。
可选地,在一些实施例中,所述响应于用户的第二操作,生成第二指令,包括:
响应于所述第二操作,确定所述第二操作的操作类型,所述操作类型包括指向操作、滑动操作;
根据所述第二操作的操作类型生成所述第二指令。
本申请实施例提供的方案,响应于第二操作,第二电子设备可以先确定该第二操作的操作类型,并根据第二操作的操作类型较为准确地生成第二指令并发送给第一电子设备,从而第一电子设备可以根据第二指令执行相应地动作,由于第二指令是基于第二操作的操作类型生成的,换句话说,第二指令包括的内容可以反映用户对第二电子设备的操作,从而第一电子设备在根据第二指令执行相应地操作时,可以与用户的第二操作实现同步,例如,第二操作为指向操作,第一电子设备可以根据该指向操作执行光标和/或光标停留的焦点的移动,而不会执行列表的滑动,可以进一步实现高效交互,提升用户体验。
可选地,在一些实施例中,所述响应于所述第二操作,确定所述第二操作的操作类型,包括:
响应于所述第二操作,确定移动轨迹对应的数值与第一阈值的大小,或者,确定角度差值和第二阈值的大小,其中,所述移动轨迹为所述第二操作包括的作用于所述第二电子设备的屏幕上的手指的移动轨迹,所述角度差值为由于所述第二操作导致的所述第二电子设备的姿态角的变化的差值;
若所述移动轨迹对应的数值大于所述第一阈值,确定所述第二操作为所述滑动操作;
若所述角度差值大于所述第二阈值,确定所述第二操作为所述指向操作。
本申请实施例提供的方案,若第二操作包括的作用于第二电子设备的屏幕上的手指的移动轨迹对应的数值大于第一阈值,第二电子设备可以确定第二操作为滑动操作;若由于所述第二操作导致的所述第二电子设备的姿态角的变化的差值大于第二阈值,第二电子设备可以确定第二操作为指向操作。换句话说,第二电子设备可以根据移动轨迹和姿态角的变化的差值确定第二操作是滑动操作还是指向操作,并根据操作类型生成相应的指令并发送给第一电子设备,从而第一电子设备可以根据接收的指令执行相应的动作,可以防止由于操作类型不确定而导致生成的第二指令所指示的内容的不准确,导致第一电子设备执行有误,因此,本申请实施例可以实现精准交互,提升用户体验。
可选地,在一些实施例中,若所述第二操作的操作类型为所述指向操作,所述第二指令用于指示所述光标和/或所述光标当前停留的焦点在所述第一电子设备的屏幕上移动的方向和/或距离;
若所述第二操作的操作类型为所述滑动操作,所述第二指令用于指示所述第一电子设备屏幕上显示的列表在所述第一电子设备的屏幕上移动的方向和/或距离。
本申请实施例提供的方案,若第二操作的操作类型为指向操作,第二指令用于指示光标和/或光标当前停留的焦点在第一电子设备的屏幕上移动的方向和/或距离;若第二操作的操作类型为滑动操作,第二指令用于指示第一电子设备屏幕上显示的列表在第一电子设备的屏幕上移动的方向和/或距离。从而第一电子设备可以根据第二指令准确地对光标、光标当前停留的焦点和第一电子设备屏幕上显示的列表中的至少一个进行移动,可以进一步实现高效交互,提升用户体验。
上文指出,响应于用户的第一操作,第二电子设备生成第一指令;响应于用户的第二操作,第二电子设备生成第二指令;其中,第二指令具体指示的内容与第一操作和第二操作有关,具体请参考下文。
情况一:
所述第一操作为所述用户的手指按住所述第二电子设备的屏幕,所述第二操作为手持所述第二电子设备的所述用户的手腕向第一方向移动;
所述第二指令用于指示所述光标按照所述第一方向移动且移动第一距离。
所述根据所述第二指令将所述光标显示为指向态,且将所述光标、所述光标当前停留的焦点和所述第一电子设备屏幕上显示的列表中的至少一个在所述第一电子设备的屏幕上进行移动,包括:
根据所述第二指令将所述光标显示为指向态,且将所述光标在所述第一电子设备的屏幕上按照所述第一方向移动所述第一距离。
关于情况一的内容具体可以参考上述图3所示的内容,不再赘述。
本申请实施例提供的方案,第二指令所指示的具体内容与第一操作和第二操作有关,若第一操作为用户的手指按住第二电子设备的屏幕,第二操作为手持第二电子设备的用户的手腕向第一方向移动,则第二指令可以指示光标按照第一方向移动且移动第一距离,此时第一电子设备可以根据该第二指令将光标在第一电子设备的屏幕上按照第一方向移动第一距离,即第一电子设备可以根据第二指令准确地对光标进行移动,可以解决指向交互难以精准控制的问题,从而进一步实现高效交互,提升用户体验。
可选地,在一些实施例中,所述第二指令还用于指示处于所述指向态的所述光标呈现第一状态,所述第一状态表征所述光标移动的方向。
本申请实施例提供的方案,第二指令还用于指示处于所述指向态的光标呈现第一状态,该第一状态表征光标移动的方向,通过这样的设计可以更好地向用户反馈交互状态,从而提升用户体验。
情况二:
所述第一操作为所述用户的手指按住所述第二电子设备的屏幕,所述第二操作为所述用户的手指在所述第二电子设备上的屏幕沿第二方向滑动;
所述第二指令用于指示所述第一电子设备屏幕上显示的列表按照第二方向移动且移动第二距离。
所述根据所述第二指令将所述光标显示为指向态,且将所述光标、所述光标当前停留的焦点和所述第一电子设备屏幕上显示的列表中的至少一个在所述第一电子设备的屏幕上进行移动,包括:
根据所述第二指令将所述光标显示为指向态,且将所述列表在所述第一电子设备的屏幕上按照所述第二方向移动所述第二距离。
关于情况二的内容具体可以参考上述图4所示的内容,不再赘述。
本申请实施例提供的方案,第二指令所指示的具体内容与第一操作和第二操作有关,若第一操作为用户的手指按住第二电子设备的屏幕,第二操作为所述用户的手指在第二电子设备上的屏幕沿第二方向滑动;则第二指令可以指示第一电子设备屏幕上显示的列表按照第二方向移动且移动第二距离,此时,第一电子设备可以根据第二指令列表在第一电子设备的屏幕上按照第二方向移动第二距离,即第一电子设备可以根据第二指令准确地对第一电子设备屏幕上显示的列表进行移动,可以进一步实现高效交互,提升用户体验。
可选地,在一些实施例中,所述第二指令还用于指示处于所述指向态的所述光标呈现第二状态,所述第二状态表征所述列表移动的方向和所述光标形变的幅度。
本申请实施例提供的方案,第二指令还用于指示处于指向态的光标呈现第二状态,该第二状态表征第一电子设备屏幕上显示的列表移动的方向和光标形变的幅度,通过这样的设计可以更好地向用户反馈交互状态,从而提升用户体验。
情况三:
所述第一操作为所述用户的手指在所述第二电子设备的屏幕上进行点击后抬起并在抬起后再次点击,所述第二操作为手持所述第二电子设备的所述用户的手腕向第三方向移动;
所述第二指令用于指示所述光标按照所述第三方向移动且移动第三距离。
所述根据所述第二指令将所述光标显示为指向态,且将所述光标、所述光标当前停留的焦点和所述第一电子设备屏幕上显示的列表中的至少一个在所述第一电子设备的屏幕上进行移动,包括:
根据所述第二指令将所述光标显示为指向态,且将所述光标和所述光标当前停留的焦点在所述第一电子设备的屏幕上按照所述第三方向移动所述第三距离。
关于情况三的内容具体可以参考上述图5所示的内容,不再赘述。
本申请实施例提供的方案,第二指令所指示的具体内容与第一操作和第二操作有关,若第一操作为用户的手指在第二电子设备的屏幕上进行点击后抬起并在抬起后再次点击,第二操作为手持所述第二电子设备的所述用户的手腕向第三方向移动;则第二指令可以指示光标按照第三方向移动且移动第三距离,此时,第一电子设备可以根据第二指令将光标和光标当前停留的焦点在第一电子设备的屏幕上按照第三方向移动第三距离,即第一电子设备可以根据第二指令准确地对光标和光标当前停留的焦点进行移动,可以进一步实现高效交互,提升用户体验。
可选地,在一些实施例中,所述第二指令还用于指示处于所述指向态的所述光标呈现第三状态,所述第三状态表征所述光标和所述光标停留的焦点移动的方向。
本申请实施例提供的方案,第二指令还包括处于指向态的光标呈现第三状态,该第三状态表征光标和光标停留的焦点移动的方向,通过这样的设计可以更好地向用户反馈交互状态,从而提升用户体验。
可选地,在一些实施例中,当所述用户的手指在所述第二电子设备的屏幕上进行点击后抬起并在抬起后再次点击且再次点击停留的时长大于预设阈值时,所述方法还包括:
所述第二电子设备生成第四指令,所述第四指令用于指示所述第一电子设备显示功能框,所述功能框中包括用于控制所述第一电子设备当前显示的画面的功能键;
所述第二电子设备向所述第一电子设备发送所述第四指令。
所述第一电子设备接收所述第二电子设备发送的第四指令,根据所述第四指令显示功能框,所述功能框中包括用于控制所述第一电子设备当前显示的画面的功能键。
本申请实施例提供的方案,当用户的手指在第二电子设备的屏幕上进行点击后抬起并在抬起后再次点击且再次点击停留的时长大于预设阈值时,第二电子设备可以生成第四指令并发送给第一电子设备,第一电子设备可以根据第四指令显示功能框,该功能框中包括用于控制第一电子设备当前显示的画面的功能键,本申请实施例提供了一种显示功能框的方法,通过这样的设计可以与指向操作或滑动操作区分开,且通过功能键可以调整当前显示的画面。
可选地,在一些实施例中,若根据所述第二指令将所述光标移出所述第一电子设备的屏幕,处于所述指向态的所述光标显示第四状态,所述第四状态表征所述光标从所述第一电子设备的屏幕移出的方向和所述光标移出所述第二电子设备的屏幕的幅度;
所述方法还包括:
响应于用户的第四操作,所述第二电子设备生成第五指令,所述第五指令用于指示所述光标移动的方向以使得所述光标显示在所述第一电子设备的屏幕上;
所述第二电子设备向所述第一电子设备发送所述第五指令。
所述第一电子设备接收所述第二电子设备发送的第五指令,根据所述第五指令将所述光标显示在所述第一电子设备的屏幕上。
本申请实施例提供的方案,若第一电子设备根据第二指令将光标移出第一电子设备的屏幕,处于指向态的光标显示第四状态,该第四状态表征光标从所述第一电子设备的屏幕移出的方向和光标移出所述第二电子设备的屏幕的幅度;第二电子设备可以响应于用户的第四操作生成第五指令并发送给第一电子设备,从而第一电子设备可以根据第五指令将光标重新显示在第一电子设备的屏幕上。在第一电子设备在根据第五指令使得光标重新显示在第一电子设备的屏幕上的过程中,光标形态会随之发生变化,光标形变的程度可以表征第二电子设备的姿态偏出第一电子设备的角度,通过这样的动效设计可以更好地向用户反馈交互状态,从而提升用户体验。
可选地,在一些实施例中,所述光标和所述光标当前停留的焦点在所述第一电子设备的屏幕上移动的距离与第二电子设备转动的速度有关,所述第一电子设备屏幕上显示的列表在所述第一电子设备的屏幕上移动的距离与所述用户在所述第二电子设备的屏幕上滑动的速度有关。
本申请实施例提供的方案,光标和光标当前停留的焦点在第一电子设备的屏幕上移动的距离与第二电子设备转动的速度有关,第一电子设备屏幕上显示的列表在第一电子设备的屏幕上移动的距离与用户在第二电子设备的屏幕上滑动的速度有关,当第二电子设备转动的速度为固定值时,或者,用户在第二电子设备的屏幕上滑动的速度为固定时,通过调整显控比,可以调整光标或列表的移动距离,可以提升用户体验。
可选地,在一些实施例中,所述第二电子设备转动的速度越快,所述显控比越大,所述光标和/或所述光标当前停留的焦点在所述第一电子设备的屏幕上移动的距离越大;
所述第二电子设备转动的速度越慢,所述显控比越小,所述光标和/或所述光标当前停留的焦点在所述第一电子设备的屏幕上移动的距离越小。
本申请实施例提供的方案,光标和/或光标当前停留的焦点在第一电子设备的屏幕上移动的距离与第二电子设备转动的速度有关,即,第二电子设备转动的速度越快,显控比越大,则光标和/或光标当前停留的焦点在第一电子设备的屏幕上移动的距离越大,第二电子设备转动的速度越慢,显控比越小,则光标和/或光标当前停留的焦点在第一电子设备的屏幕上移动的距离越小。通过根据第二电子设备转动的速度调整显控比进一步调整光标和/或光标当前停留的焦点移动的距离,在一定程度上,可以兼顾移动的速度和精度,具体地,第二电子设备转动的速度越快,则最终光标和/或光标当前停留的焦点在第一电子设备的屏幕上移动的距离越大,可以理解为当第二电子设备转动的速度越快时,优先考虑光标和/或光标当前停留的焦点移动的效率,即将光标和/或光标当前停留的焦点快速移动到相应位置;第二电子设备转动的速度越慢,则最终光标和/或光标当前停留的焦点在第一电子设备的屏幕上移动的距离越小,可以理解为当第二电子设备转动的速度越慢时,优先考虑光标和/或光标当前停留的焦点移动的精度,即将光标和/或光标当前停留的焦点缓慢移动到精确位置。
可选地,在一些实施例中,所述用户在所述第二电子设备的屏幕上滑动的速度越快,所述显控比越大,所述第一电子设备屏幕上显示的列表在所述第一电子设备的屏幕上移动的距离越大;
所述用户在所述第二电子设备的屏幕上滑动的速度越慢,所述显控比越小,所述第一电子设备屏幕上显示的列表在所述第一电子设备的屏幕上移动的距离越小。
本申请实施例提供的方案,第一电子设备屏幕上显示的列表在第一电子设备的屏幕上移动的距离与用户在第二电子设备的屏幕上滑动的速度有关,即,用户在第二电子设备的屏幕上滑动的速度越快,显控比越大,则列表在第一电子设备的屏幕上移动的距离越大,用户在第二电子设备的屏幕上滑动的速度越慢,显控比越小,则列表在第一电子设备的屏幕上移动的距离越小。通过根据用户在第二电子设备的屏幕上滑动的速度调整显控比进一步调整列表移动的距离,在一定程度上,可以兼顾移动的速度和精度,具体地,用户在第二电子设备的屏幕上滑动的速度越快,则最终列表在第一电子设备的屏幕上移动的距离越大,可以理解为当用户在第二电子设备的屏幕上滑动的速度越快时,优先考虑列表移动的效率,即将列表快速移动到相应位置;用户在第二电子设备的屏幕上滑动的速度越慢,则最终列表在第一电子设备的屏幕上移动的距离越小,可以理解为当用户在第二电子设备的屏幕上滑动速度越慢时,优先考虑列表移动的精度,即将列表缓慢移动到精确位置。
可以理解的是,电子设备为了实现上述功能,其包含了执行各个功能相应的硬件和/或软件模块。结合本文中所公开的实施例描述的各示例的算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。本领域技术人员可以结合实施例对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本实施例可以根据上述方法示例对电子设备进行功能模块的划分,例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块可以采用硬件的形式实现。需要说明的是,本实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
在采用对应各个功能划分各个功能模块的情况下,图15示出了上述实施例中涉及的电子设备1500的一种可能的组成示意图,如图15所示,该电子设备1500可以包括:收发模块1510和处理模块1520。
当电子设备1500用于实现图14所述方法实施例中第一电子设备的功能时,所述处理模块1520可以用于支持电子设备1500执行上述步骤1414、1420、1426等,和/或用于本文所描述的技术的其他过程。
当电子设备1500用于实现图14所述方法实施例中第二电子设备的功能时,所述收发模块1510可以用于支持电子设备1500执行上述步骤1412、1418、1424等,和/或用于本文所描述的技术的其他过程。
所述处理模块1520可以用于支持电子设备1500执行上述步骤1410、1416、1422等,和/或用于本文所描述的技术的其他过程。
需要说明的是,上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能模块的功能描述,在此不再赘述。
本实施例提供的电子设备,用于执行上述本申请的方法,因此可以达到与上述实现方法相同的效果。
在采用集成的单元的情况下,电子设备可以包括处理模块、存储模块和通信模块。其中,处理模块可以用于对电子设备的动作进行控制管理,例如,可以用于支持电子设备执行上述各个单元执行的步骤。存储模块可以用于支持电子设备执行存储程序代码和数据等。通信模块,可以用于支持电子设备与其他设备的通信。
其中,处理模块可以是处理器或控制器。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框,模块和电路。处理器也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,数字信号处理(digital signal processing,DSP)和微处理器的组合等等。存储模块可以是存储器。通信模块具体可以为射频电路、蓝牙芯片、Wi-Fi芯片等与其他电子设备交互的设备。
在一个实施例中,当处理模块为处理器,存储模块为存储器时,本实施例所涉及的电子设备可以为具有图1所示结构的设备。
图16示出了上述实施例涉及的电子设备800的另一种可能的组成示意图,如图16所示,该电子设备800可以包括通信单元810、输入单元820、处理单元830、输出单元(或也可以称为显示单元)840、外设接口850、存储单元860、电源870、视频解码器880以及音频解码器890。
通信单元810用于建立通信信道,使电子设备800通过所述通信信道以连接至远程服务器,并从所述远程服务器下媒体数据。所述通信单元810可以包括WLAN模块、蓝牙模块、NFC模块、基带模块等通信模块,以及所述通信模块对应的射频(Radio Frequency,简称RF)电路,用于进行无线局域网络通信、蓝牙通信、NFC通信、红外线通信及/或蜂窝式通信系统通信,例如宽带码分多重接入(wideband code division multiple access,W-CDMA)及/或高速下行封包存取(high speed downlink packet access,HSDPA)。所述通信模块810用于控制电子设备中的各组件的通信,并且可以支持直接内存存取。
输入单元820可以用于实现用户与电子设备的交互和/或信息输入到电子设备中。在本申请具体实施方式中,输入单元可以是触控面板,也可以是其他人机交互界面,例如实体输入键、麦克风等,还可是其他外部信息撷取装置,例如摄像头等。
处理单元830为电子设备的控制中心,可以利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储单元内的软件程序和/或模块,以及调用存储在存储单元内的数据,以执行电子设备的各种功能和/或处理数据。如上述步骤1410、1416、1422,或步骤1414、1420、1426等可以通过处理单元1430实现。
输出单元840包括但不限于影像输出单元和声音输出单元。影像输出单元用于输出文字、图片和/或视频。在本申请的具体实施方式中,上述输入单元820所采用的触控面板亦可同时作为输出单元840的显示面板。例如,当触控面板检测到在其上的触摸或接近的手势操作后,传送给处理单元以确定触摸事件的类型,随后处理单元根据触摸事件的类型在显示面板上提供相应的视觉输出。虽然在图16中,输入单元820与输出单元840是作为两个独立的部件来实现电子设备的输入和输出功能,但是在某些实施例中,可以将触控面板与显示面板集成一体而实现电子设备的输入和输出功能。例如,所述影像输出单元可以显示各种图形化用户接口以作为虚拟控制组件,包括但不限于窗口、卷动轴、图标及剪贴簿,以供用户通过触控方式进行操作。
存储单元860可用于存储软件程序以及模块,处理单元通过运行存储在存储单元的软件程序以及模块,从而执行电子设备的各种功能应用以及实现数据处理。
本实施例还提供一种计算机存储介质,该计算机存储介质中存储有计算机指令,当该计算机指令在电子设备上运行时,使得电子设备执行上述相关方法步骤实现上述实施例中的方法。
本实施例还提供了一种计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行上述相关步骤,以实现上述实施例中的方法。
另外,本申请的实施例还提供一种装置,这个装置具体可以是芯片,组件或模块,该装置可包括相连的处理器和存储器;其中,存储器用于存储计算机执行指令,当装置运行时,处理器可执行存储器存储的计算机执行指令,以使芯片执行上述各方法实施例中的方法。
其中,本实施例提供的电子设备、计算机存储介质、计算机程序产品或芯片均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
通过以上实施方式的描述,所属领域的技术人员可以了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是一个物理单元或多个物理单元,即可以位于一个地方,或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器(processor)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read-only memory,ROM)、随机存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上内容,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。
Claims (26)
1.一种光标控制方法,其特征在于,所述方法应用于第一电子设备,所述方法包括:
接收所述第二电子设备发送的第一指令,并根据所述第一指令将所述光标显示为静止态;
接收所述第二电子设备发送的第二指令,根据所述第二指令将所述光标由所述静止态变化为指向态,且将所述光标、所述光标当前停留的焦点和所述第一电子设备屏幕上显示的列表中的至少一个在所述第一电子设备的屏幕上进行移动,以及当所述光标或所述列表停止移动时将所述光标显示为所述静止态,其中,在所述光标显示为所述指向态时,所述光标、所述光标当前停留的焦点、所述列表中至少一个可移动,在所述光标显示为所述静止态时,所述光标、所述光标当前停留的焦点和所述列表不可移动;
接收所述第二电子设备发送的第三指令,根据所述第三指令播放所述光标停留的目标焦点对应的画面。
2.根据权利要求1所述的方法,其特征在于,所述第二指令用于指示所述光标按照第一方向移动且移动第一距离;
所述根据所述第二指令将所述光标由所述静止态变化为指向态,且所述光标、所述光标当前停留的焦点和所述第一电子设备屏幕上显示的列表中的至少一个在所述第一电子设备的屏幕上进行移动,包括:
根据所述第二指令将所述光标由所述静止态变化为所述指向态,且将所述光标在所述第一电子设备的屏幕上按照所述第一方向移动所述第一距离。
3.根据权利要求2所述的方法,其特征在于,处于所述指向态的所述光标呈现第一状态,所述第一状态表征所述光标移动的方向。
4.根据权利要求1所述的方法,其特征在于,所述第二指令用于指示所述第一电子设备屏幕上显示的列表按照第二方向移动且移动第二距离;
所述根据所述第二指令将所述光标由所述静止态变化为指向态,且将所述光标、所述光标当前停留的焦点和所述第一电子设备屏幕上显示的列表中的至少一个在所述第一电子设备的屏幕上进行移动,包括:
根据所述第二指令将所述光标由所述静止态变化为所述指向态,且将所述列表在所述第一电子设备的屏幕上按照所述第二方向移动所述第二距离。
5.根据权利要求4所述的方法,其特征在于,处于所述指向态的所述光标呈现第二状态,所述第二状态表征所述列表移动的方向和所述光标形变的幅度。
6.根据权利要求1所述的方法,其特征在于,所述第二指令包括所述光标按照第三方向移动且移动第三距离;
所述根据所述第二指令将所述光标由所述静止态变化为指向态,且将所述光标、所述光标当前停留的焦点和所述第一电子设备屏幕上显示的列表中的至少一个在所述第一电子设备的屏幕上进行移动,包括:
根据所述第二指令将所述光标由所述静止态变化为所述指向态,且将所述光标和所述光标当前停留的焦点在所述第一电子设备的屏幕上按照所述第三方向移动所述第三距离。
7.根据权利要求6所述的方法,其特征在于,所述光标呈现第三状态,所述第三状态表征所述光标和所述光标停留的焦点移动的方向。
8.根据权利要求6或7所述的方法,其特征在于,所述方法还包括:
接收所述第二电子设备发送的第四指令,根据所述第四指令显示功能框,所述功能框中包括用于控制所述第一电子设备当前显示的画面的功能键。
9.根据权利要求1至8中任一项所述的方法,其特征在于,若根据所述第二指令将所述光标移出所述第一电子设备的屏幕,处于所述指向态的所述光标显示第四状态,所述第四状态表征所述光标从所述第一电子设备的屏幕移出的方向和所述光标移出所述第二电子设备的屏幕的幅度;
所述方法还包括:
接收所述第二电子设备发送的第五指令,根据所述第五指令将所述光标显示在所述第一电子设备的屏幕上。
10.一种光标控制方法,其特征在于,所述方法应用于第二电子设备,所述方法包括:
响应于用户的第一操作,生成第一指令,所述第一指令用于指示显示在第一电子设备上的光标显示静止态;
向第一电子设备发送所述第一指令;
响应于用户的第二操作,生成第二指令,所述第二指令用于指示光标从所述静止态变化为指向态,且在所述光标显示为所述指向态时所述光标、所述光标当前停留的焦点和所述第一电子设备屏幕上显示的列表中的至少一个在所述第一电子设备的屏幕上移动的方向和/或距离,以及所述光标或所述列表停止移动时所述光标显示为所述静止态,其中,在所述光标显示为所述指向态时,所述光标、所述光标当前停留的焦点、所述列表中至少一个可移动,在所述光标显示为所述静止态时,所述光标、所述光标当前停留的焦点和所述列表不可移动;
向所述第一电子设备发送所述第二指令;
响应于用户的第三操作,生成第三指令,所述第三指令用于指示播放所述光标停留的目标焦点对应的画面;
向所述第一电子设备发送所述第三指令。
11.根据权利要求10所述的方法,其特征在于,所述响应于用户的第二操作,生成第二指令,包括:
响应于所述第二操作,确定所述第二操作的操作类型,所述操作类型包括指向操作、滑动操作;
根据所述第二操作的操作类型生成所述第二指令。
12.根据权利要求11所述的方法,其特征在于,所述响应于所述第二操作,确定所述第二操作的操作类型,包括:
响应于所述第二操作,确定移动轨迹对应的数值与第一阈值的大小,或者,确定角度差值和第二阈值的大小,其中,所述移动轨迹为所述第二操作包括的作用于所述第二电子设备的屏幕上的手指的移动轨迹,所述角度差值为由于所述第二操作导致的所述第二电子设备的姿态角的变化的差值;
若所述移动轨迹对应的数值大于所述第一阈值,确定所述第二操作为所述滑动操作;
若所述角度差值大于所述第二阈值,确定所述第二操作为所述指向操作。
13.根据权利要求11或12所述的方法,其特征在于,若所述第二操作的操作类型为所述指向操作,所述第二指令用于指示所述光标和/或所述光标当前停留的焦点在所述第一电子设备的屏幕上移动的方向和/或距离;
若所述第二操作的操作类型为所述滑动操作,所述第二指令用于指示所述第一电子设备屏幕上显示的列表在所述第一电子设备的屏幕上移动的方向和/或距离。
14.根据权利要求10至13中任一项所述的方法,其特征在于,所述第一操作为所述用户的手指按住所述第二电子设备的屏幕,所述第二操作为手持所述第二电子设备的所述用户的手腕向第一方向移动;
所述第二指令用于指示所述光标按照所述第一方向移动且移动第一距离。
15.根据权利要求14所述的方法,其特征在于,处于所述指向态的所述光标呈现第一状态,所述第一状态表征所述光标移动的方向。
16.根据权利要求10至13中任一项所述的方法,其特征在于,所述第一操作为所述用户的手指按住所述第二电子设备的屏幕,所述第二操作为所述用户的手指在所述第二电子设备上的屏幕沿第二方向滑动;
所述第二指令用于指示所述第一电子设备屏幕上显示的列表按照第二方向移动且移动第二距离。
17.根据权利要求16所述的方法,其特征在于,处于所述指向态的所述光标呈现第二状态,所述第二状态表征所述列表移动的方向和所述光标形变的幅度。
18.根据权利要求10至13中任一项所述的方法,其特征在于,所述第一操作为所述用户的手指在所述第二电子设备的屏幕上进行点击后抬起并在抬起后再次点击,所述第二操作为手持所述第二电子设备的所述用户的手腕向第三方向移动;
所述第二指令用于指示所述光标按照所述第三方向移动且移动第三距离。
19.根据权利要求18所述的方法,其特征在于,处于所述指向态的所述光标呈现第三状态,所述第三状态表征所述光标和所述光标停留的焦点移动的方向。
20.根据权利要求18或19所述的方法,其特征在于,当所述用户的手指在所述第二电子设备的屏幕上进行点击后抬起并在抬起后再次点击且再次点击停留的时长大于预设阈值时,所述方法还包括:
生成第四指令,所述第四指令用于指示所述第一电子设备显示功能框,所述功能框中包括用于控制所述第一电子设备当前显示的画面的功能键;
向所述第一电子设备发送所述第四指令。
21.根据权利要求10至20中任一项所述的方法,其特征在于,所述方法还包括:
响应于用户的第四操作,生成第五指令,所述第五指令用于指示所述光标移动的方向以使得所述光标显示在所述第一电子设备的屏幕上;
向所述第一电子设备发送所述第五指令。
22.根据权利要求10至21中任一项所述的方法,其特征在于,所述光标和所述光标当前停留的焦点在所述第一电子设备的屏幕上移动的距离与第二电子设备转动的速度有关,所述第一电子设备屏幕上显示的列表在所述第一电子设备的屏幕上移动的距离与所述用户在所述第二电子设备的屏幕上滑动的速度有关。
23.根据权利要求22所述的方法,其特征在于,所述第二电子设备转动的速度越快,所述显控比越大,所述光标和/或所述光标当前停留的焦点在所述第一电子设备的屏幕上移动的距离越大;
所述第二电子设备转动的速度越慢,所述显控比越小,所述光标和/或所述光标当前停留的焦点在所述第一电子设备的屏幕上移动的距离越小。
24.根据权利要求22所述的方法,其特征在于,所述用户在所述第二电子设备的屏幕上滑动的速度越快,所述显控比越大,所述第一电子设备屏幕上显示的列表在所述第一电子设备的屏幕上移动的距离越大;
所述用户在所述第二电子设备的屏幕上滑动的速度越慢,所述显控比越小,所述第一电子设备屏幕上显示的列表在所述第一电子设备的屏幕上移动的距离越小。
25.一种电子设备,其特征在于,包括:
一个或多个处理器;
一个或多个存储器;
所述一个或多个存储器存储有一个或多个计算机程序,所述一个或多个计算机程序包括指令,当所述指令被所述一个或多个处理器执行时,使得所述电子设备执行如权利要求1至9或10至24中任一项所述的方法。
26.一种计算机存储介质,其特征在于,包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如权利要求1至9或10至24中任一项所述的方法。
Publications (1)
Publication Number | Publication Date |
---|---|
CN118138813A true CN118138813A (zh) | 2024-06-04 |
Family
ID=
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7391102B2 (ja) | ジェスチャ処理方法およびデバイス | |
WO2021013158A1 (zh) | 显示方法及相关装置 | |
CN109445572B (zh) | 全屏显示视频中快速调出小窗口的方法、图形用户接口及终端 | |
CN110045908B (zh) | 一种控制方法和电子设备 | |
EP4131911A1 (en) | Application interface interaction method, electronic device, and computer readable storage medium | |
US11921987B2 (en) | System navigation bar display method, system navigation bar control method, graphical user interface, and electronic device | |
US20200249821A1 (en) | Notification Handling Method and Electronic Device | |
WO2021036770A1 (zh) | 一种分屏处理方法及终端设备 | |
CN110764673A (zh) | 滚动截屏的方法及电子设备 | |
CN113115439A (zh) | 定位方法及相关设备 | |
JP2022501739A (ja) | スタイラスペン検出方法、システムおよび関連装置 | |
WO2021238370A1 (zh) | 显示控制方法、电子设备和计算机可读存储介质 | |
WO2021057699A1 (zh) | 具有柔性屏幕的电子设备的控制方法及电子设备 | |
CN113641271A (zh) | 应用窗口的管理方法、终端设备及计算机可读存储介质 | |
WO2022095906A1 (zh) | 一种按键映射方法、电子设备及系统 | |
EP4057122A1 (en) | Screenshot method and related device | |
CN118138813A (zh) | 一种光标控制方法和电子设备 | |
WO2024114770A1 (zh) | 一种光标控制方法和电子设备 | |
CN116048236B (zh) | 通信方法及相关装置 | |
CN116185245B (zh) | 一种页面显示方法及电子设备 | |
WO2022111690A1 (zh) | 一种共享输入设备的方法、电子设备及系统 | |
CN116204093B (zh) | 一种页面显示方法及电子设备 | |
EP4383246A1 (en) | Icon moving method, related graphical interface, and electronic device | |
WO2022022381A1 (zh) | 生成涂鸦图案的方法、装置、电子设备及存储介质 | |
CN116149501A (zh) | 显示方法和电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication |