CN115516418A - 用于处理在可折叠设备显示屏上检测到的手势的方法和系统 - Google Patents

用于处理在可折叠设备显示屏上检测到的手势的方法和系统 Download PDF

Info

Publication number
CN115516418A
CN115516418A CN202080100610.2A CN202080100610A CN115516418A CN 115516418 A CN115516418 A CN 115516418A CN 202080100610 A CN202080100610 A CN 202080100610A CN 115516418 A CN115516418 A CN 115516418A
Authority
CN
China
Prior art keywords
gesture
foldable device
detected
input
input gesture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080100610.2A
Other languages
English (en)
Inventor
图·哈·特里恩
李维
唐进
马塞洛·佐丹奴
加扎勒·萨尼-蒙法里德
李琛贺
杨斯雯
周轩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of CN115516418A publication Critical patent/CN115516418A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1643Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1647Details related to the display arrangement, including those related to the mounting of the display in the housing including at least an additional display
    • G06F1/1649Details related to the display arrangement, including those related to the mounting of the display in the housing including at least an additional display the additional display being independently orientable, e.g. for presenting information to a second user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1652Details related to the display arrangement, including those related to the mounting of the display in the housing the display being flexible, e.g. mimicking a sheet of paper, or rollable
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0362Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 1D translations or rotations of an operating part of the device, e.g. scroll wheels, sliders, knobs, rollers or belts
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04102Flexible digitiser, i.e. constructional details for allowing the whole digitising part of a device to be flexed or rolled like a sheet of paper
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04806Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

公开了用于管理可折叠设备的用户界面的系统和方法。所述方法包括:根据所述可折叠设备的折叠角,确定所述可折叠设备的折叠状态;检测所述可折叠设备的柔性显示屏的一个或多个触敏显示段上的输入手势;确定与所述检测到的输入手势对应的手势类型;确定所述检测到的输入手势是有效手势还是无效手势;响应于确定所述检测到的输入手势是有效手势,向所述可折叠设备的软件应用程序或操作系统提供与所述检测到的手势对应的所述手势类型、所述可折叠设备的所述折叠状态和显示信息。

Description

用于处理在可折叠设备显示屏上检测到的手势的方法和系统
相关申请案交叉引用
本申请要求于2020年5月15日递交的申请号为16/875,957、发明名称为“用于处理在可折叠设备显示屏上检测到的手势的方法和系统(Method and System for ProcessingGestures Detected on a Display Screen of a Foldable Device)”的美国专利申请的优先权的权益,其全部内容通过引用结合在本申请中。
技术领域
本发明大体涉及具有柔性显示屏的移动设备,更具体地,涉及用于处理在此类移动设备的柔性显示屏上检测到的手势的方法和系统。
背景技术
过去几年来,研究领域和商业领域对于开发具有柔性显示屏的手机兴趣日益浓厚,这种柔性显示屏可以折叠或变形为不同的外形(下文将这种手机称为可折叠设备)。
可折叠设备可以具有两个屏幕,因此可折叠设备的多个用户可以共享可折叠设备。例如,第一用户可以控制在设备的第一屏幕上显示的用户界面,而第二用户可以控制在设备的第二屏幕上显示的另一个用户界面。当可折叠设备打开多用户交互功能时,需要适当的方法和技术来识别多个屏幕上的用户控制,并同时支持单用户场景和多用户场景。
发明内容
根据本发明的一个方面,提供了一种可折叠设备,所述可折叠设备包括:柔性显示屏;处理器;存储器,用于存储指令,在所述处理器执行所述指令时,使所述可折叠设备执行指令以进行以下操作:确定所述可折叠设备的折叠角;检测在一个或多个触敏显示段上做出的手势;确定所述检测到的手势的类型;确定对于所述确定的折叠角,所述手势的类型是否存在于可用手势集中。如果所述手势存在于所述确定的折叠角的可用手势集中,手势识别系统向在所述设备上运行的应用程序提供所述检测到的手势。然后,在所述设备上运行的所述应用程序可以使所述可折叠设备的所述处理器响应于接收所述检测到的手势而执行操作。在所述设备上运行的所述应用程序可以包括预定义手势集与所述应用程序要执行的对应操作之间的映射表。
可以减少用于与可折叠设备进行用户交互的可用手势集中的所述可用手势,仅保留适用于在所述可折叠设备的所述折叠状态下与所述可折叠设备交互的那些手势。所述可折叠设备的所述折叠状态取决于所述可折叠设备的物理结构(即,所述可折叠设备的外形)。根据所述可折叠设备的折叠角,确定所述可折叠设备的所述折叠状态。在操作中,可以确定所述可折叠设备的所述折叠角。根据所述可折叠设备的所述确定的折叠角,所述可折叠设备可以接受或忽略在所述柔性显示屏一个或多个触敏显示段上检测到的输入手势。根据所述可折叠设备的所述显示屏的所述折叠角限制可接受的输入手势,使所述可折叠设备可以更快速高效地识别有效输入手势(尤其是在多用户场景下),更好地处理所述输入手势并相应地作出响应。所公开的实施例还可以在用户长时间使用所述可折叠设备时最大限度地减轻用户疲劳,并且在以下情况下改善用户体验:在所述可折叠设备上运行多个应用程序,并且每个应用程序均可解释和处理输入手势以确定要执行的操作。
根据本发明的另一个方面,提供了一种方法,所述方法包括:根据可折叠设备的折叠角,确定所述可折叠设备的折叠状态;检测所述可折叠设备的柔性显示屏的一个或多个触敏显示段上的输入手势。所述方法还包括:确定与所述检测到的输入手势对应的手势类型;确定所述检测到的输入手势是有效手势还是无效手势;响应于确定所述检测到的输入手势是有效手势,向所述可折叠设备的软件应用程序或操作系统提供与所述检测到的手势对应的所述手势类型、所述可折叠设备的所述折叠状态和显示信息。
根据上述方面,所述方法还包括:响应于确定所述检测到的输入手势的所述手势类型是无效手势,忽略所述检测到的输入手势。
根据上述方面中的任一项,确定所述检测到的输入手势是有效输入手势还是无效输入手势包括:检索与所述可折叠设备的所述折叠状态对应的可用输入手势集;响应于确定与所述可折叠设备的所述折叠状态对应的所述可用输入手势集包含所述检测到的输入手势,确定所述检测到的输入手势是有效输入手势。
根据上述方面中的任一项,检测所述可折叠设备的所述柔性显示屏的所述一个或多个触敏显示段上的输入手势包括:仅检测所述触敏显示段中的一个上的手势;确定与所述检测到的输入手势对应的手势类型包括:确定所述输入手势是简单输入手势。
根据上述方面,所述简单输入手势是以下各项中的一项:点击手势、用力按手势、滑动手势、旋转手势、缩放手势和收缩手势。
根据上述方面,确定所述检测到的输入手势是有效输入手势还是无效输入手势包括:确定所述检测到的输入手势是在所述触敏显示段中的哪一个上检测到的;对于在其上检测到所述检测到的输入手势的所述一个显示段,当与所述可折叠设备的所述折叠状态对应的所述可用输入手势集的子集包含所述检测到的输入手势时,确定所述检测到的输入手势是有效输入手势。
根据上述方面中的至少一些方面,检测所述可折叠设备的所述柔性显示屏的所述一个或多个触敏显示段上的输入手势包括:检测所述触敏显示段中的至少两个上的手势;确定与所述检测到的输入手势对应的手势类型包括:确定所述输入手势是复杂输入手势。
根据上述方面,所述复杂输入手势是以下各项中的一项:跨段单滑动手势、跨段双滑动手势、跨段复合滑动手势、多段多滑动手势。
根据上述方面中的任一项,检测所述可折叠设备的所述柔性显示屏的所述一个或多个触敏显示段上的输入手势包括:检测用于所述检测到的输入手势的输入参数;根据用于所述检测到的输入手势的所述输入参数来确定与所述检测到的输入手势对应的所述手势类型。
根据本发明的另一个方面,提供了一种可折叠设备,所述可折叠设备包括:折叠检测器,用于检测所述可折叠设备的折叠角;柔性显示屏,包括一个或多个触敏显示段;处理器;存储器,用于存储指令,在所述处理器执行存储在所述存储器中的所述指令,使所述可折叠设备执行以下操作:根据所述可折叠设备的所述折叠角,确定所述可折叠设备的折叠状态;检测所述可折叠设备的所述柔性显示屏的所述一个或多个触敏显示段上的输入手势;确定与所述检测到的输入手势对应的手势类型;确定所述检测到的输入手势是有效手势还是无效手势;响应于确定所述检测到的输入手势是有效手势,向所述可折叠设备的软件应用程序或操作系统提供与所述检测到的手势对应的所述手势类型、所述可折叠设备的所述折叠状态和显示信息。
根据本发明的另一个方面,提供了一种存储指令的非瞬时性计算机可读介质,在可折叠设备的处理器执行所述指令时,使所述可折叠设备执行以下操作:根据所述可折叠设备的折叠角,确定所述可折叠设备的折叠状态;检测所述可折叠设备的柔性显示屏的一个或多个触敏显示段上的输入手势;确定与所述检测到的输入手势对应的手势类型;确定所述检测到的输入手势是有效手势还是无效手势;响应于确定所述检测到的输入手势是有效手势,向所述可折叠设备的软件应用程序或操作系统提供与所述检测到的手势对应的所述手势类型、所述可折叠设备的所述折叠状态和显示信息。
阅读本发明的以下具体实现方式说明并结合附图,对于本领域的普通技术人员来说,本发明的其它方面和特征将是显而易见的。
附图说明
现在通过示例,参考示出示例性实现方式的附图,其中:
图1示出了本发明各个方面提供的可折叠设备的前视图;
图2A示出了本发明各个方面提供的图1所示可折叠设备的透视图;
图2B示出了本发明各个方面提供的图1所示可折叠设备在折叠状态下的透视图;
图2C示出了本发明各个方面提供的图1所示可折叠设备在帐篷状态下的侧视图;
图3示出了图1所示可折叠设备的框图;
图4示出了本发明各个方面提供的图1所示可折叠设备的示例性折叠状态;
图5示出了本发明各个方面提供的与图4所定义折叠状态中每一个对应的可用手势集的表;
图6示出了本发明各个方面提供的在所述可折叠设备处于图4所定义折叠状态时点击手势的表;
图7示出了本发明各个方面提供的在所述可折叠设备处于图4所定义折叠状态时用力按手势的表;
图8示出了本发明各个方面提供的在所述可折叠设备处于图4所定义折叠状态时滑动手势的表;
图9示出了本发明各个方面提供的在所述可折叠设备处于图4所定义折叠状态时收缩或缩放手势的表;
图10A至图10C示出了本发明各个方面提供的图1所示可折叠设备的俯视图,所述俯视图中示出了跨段单滑动手势的各种实现方式;
图11示出了本发明各个方面提供的在所述可折叠设备处于图4所定义折叠状态时跨段单滑动手势的表;
图12示出了本发明各个方面提供的跨段双滑动手势的各种实现方式;
图13示出了本发明各个方面提供的在所述可折叠设备处于图4所定义折叠状态时跨段双滑动手势的表;
图14示出了本发明各个方面提供的跨段复合滑动手势的示例性实现方式;
图15示出了本发明各个方面提供的在所述可折叠设备处于图4所定义折叠状态时跨段复合滑动手势的表;
图16示出了本发明各个方面提供的多段滑动手势的示例性实现方式;
图17示出了本发明各个方面提供的在所述设备处于图4所定义折叠状态时多段滑动手势的表;
图18示出了本发明各个方面提供的在所述设备处于图4所定义折叠状态时旋转手势的表;
图19示出了本发明各个方面提供的由可折叠设备执行的方法的流程图。
具体实施方式
参考图1、图2A、图2B和图3,其中示出了可折叠设备100的示例性实施例。所述可折叠设备100是移动通信设备,可以用于与一个或多个通信网络通信。所述可折叠设备100可以用于无线语音通信和无线数据通信。
所述可折叠设备100包括主体105,所述主体105可以用塑料、玻璃、纤维、不锈钢、铝、其它合适的材料或这些材料的任意组合制成。所述主体105包含所述可折叠设备100的多个部件,包括控制所述可折叠设备100整体操作的处理器202。所述处理器202耦合到以下部件并与其交互:存储器204、柔性触敏显示屏102(下文称为“柔性显示屏102”)和折叠检测器208。所述主体105用于容纳和暴露所述柔性显示屏102。所述可折叠设备100还包括背面107,所述背面107具有第一背面部分307和第二背面部分308。所述柔性显示屏102采用柔性聚合物等材料制成,所述材料使所述柔性显示屏102能够沿折叠边缘103折叠。所述柔性显示屏102使所述可折叠设备100能够折叠成扁平配置等各种物理结构(或外形)。所述柔性显示屏102可以沿所述折叠边缘103弯曲、卷曲或折叠,使得所述可折叠设备100的第一背面部分307和第二背面部分308彼此相向移动。所述折叠边缘103可以称为铰链,并且可以用柔性聚合物等可弯曲的柔性材料制成。
所述可折叠设备100的所述柔性显示屏102具有三个触敏显示段,标记如下:第一触敏显示段301(下文称为“第一显示段301”)、第二触敏显示段302(下文称为“第二显示段302”)和边缘触敏显示段303(下文称为“边缘显示段303”)。如图1所示,所述第一显示段301、所述第二显示段302和所述边缘显示段303之间存在边界313和边界323。所述第一显示段301和所述边缘显示段303之间存在第一边界313。所述第二显示段302和所述边缘显示段303之间还存在第二边界323。所述第一边界313和所述第二边界323可以不是物理边界,但可以在逻辑上进行定义并且可以动态移位(或忽略)。应当理解的是,当所述可折叠设备100处于展开状态(即,所述可折叠设备100为扁平设备,所述折叠角205为180度)时,所述第一显示段301、所述第二显示段302和所述边缘显示段303不可区分并且形成一个连续的显示屏。
参考图2A,其中示出了所述可折叠设备100的透视图。例如,可以通过以下方式将所述可折叠设备100沿所述折叠边缘103折叠成角305(下文可以称之为“折叠角305”):用户抓住所述第一显示段301和所述第二显示段302,使所述柔性显示屏102的所述背面彼此相向移动。所述折叠角305是在所述第一背面部分307和所述第二背面部分308之间测量的角。所述折叠角305可以是锐角、钝角、直角、平角或优角。在图2A中,所述可折叠设备100示为具有α度折叠角305。在图2B中,所述可折叠设备100示为处于折叠状态,其中所述折叠角305为0度。
再次参考图3,所述折叠检测器208用于确定所述折叠角305,并向所述处理器202提供指示所述折叠角305的数据。所述折叠检测器208用于根据所述可折叠设备100的所述第一背面部分307与所述可折叠设备100的所述第二背面部分308的接近程度,确定所述折叠角305。所述折叠检测器208向所述处理器202提供指示所述折叠角305的数据。在一个实施例中,所述折叠检测器208是接近传感器(或者称为深度传感器)。所述接近传感器可以包括设置在所述第一背面部分307的红外(infrared,IR)发射器-接收器对。所述IR发射器-接收器对中的IR发射器可以是发光二极管(light-emitting diode,LED),用于发射IR光。所述第二背面部分308反射所述IR发射器发射的IR光。所述IR发射器-接收器对中的IR接收器检测所述反射的IR光。然后,可以根据所述IR发射器传输所述IR光和所述IR接收器接收所述反射的IR光之间间隔的时间,确定所述折叠角305。所述接近传感器也可以称为深度传感器。应当理解的是,所述接近传感器可以设置在所述第二背面部分308,而不设置在所述第一背面部分307,以确定所述可折叠设备100的所述折叠角305。
或者,所述接近传感器可以包括设置在所述第一背面部分307的光发射器-接收器对。所述光发射器-接收器对中的光发射器可以是发光二极管(light-emitting diode,LED),用于发射光。所述第二背面部分308反射所述光发射器发射的光。所述光发射器-接收器对中的光接收器检测所述反射的光。然后,可以根据所述光发射器传输所述光和所述接收器接收所述反射的光之间间隔的时间,确定所述折叠角305。
在接近传感器的另一种实现方式中,可以包括设置在所述第一背面部分307的无线发射器-接收器对。所述无线发射器-接收器对中的无线发射器用于传输无线信号,所述第二背面部分308反射所述无线信号。所述无线发射器-接收器对中的无线接收器检测所述反射的无线信号。然后,可以根据所述无线发射器传输所述无线信号和所述无线接收器接收所述反射的无线信号之间间隔的时间,确定所述折叠角305。
在又一个实施例中,所述折叠检测器208可以包括加速度计或陀螺仪。在本实施例中,所述折叠检测器208设置在所述可折叠设备100的所述主体105上。所述加速度计或陀螺仪用于检测所述设备的方向,并且所述折叠检测器208用于根据所述可折叠设备100的所述检测到的方向来确定所述折叠角305,并且向所述处理器202提供指示所述折叠角305的数据。
在另一个实施例中,所述折叠检测器208可以接收所述可折叠设备100的摄像头(未示出)捕获的数字图像,以确定所述可折叠设备100的所述折叠角305。在本实施例中,所述摄像头(未示出)设置在所述可折叠设备100的所述第一背面部分,并捕获所述可折叠设备100的所述第二背面部分308的数字图像。所述折叠检测器208使用现有计算机视觉技术处理所述捕获的图像,以确定所述可折叠设备100的所述折叠角305,并向所述处理器202提供指示所述折叠角305的数据。
在另一个实施例中,所述折叠检测器208可以包括弯曲传感器,所述弯曲传感器用于检测所述折叠角305。在本实施例中,所述折叠检测器208附接于所述可折叠设备100的可折叠边缘103(例如,沿所述边缘显示段303的非显示侧)。当折叠所述可折叠设备100时,所述弯曲传感器根据阻力读数测量所述可折叠边缘103的偏转量或弯曲量;所述弯曲传感器作为所述可折叠设备100的所述可折叠边缘103的一部分,所述阻力读数与所述弯曲传感器的弯曲程度成比例。
如上所述,所述可折叠设备100在折叠时具有三个显示段(301、302和303)。所述三个触敏显示段(例如,所述第一显示段301、所述第二显示段302和所述边缘显示段303)中的每一个都是所述柔性显示屏102的不同段(即,部分);在每个所述段上,可以呈现一个或多个包括各种用户界面元素的图形用户界面。例如,在所述第一显示段301、所述第二显示段302和所述边缘显示段303中的每一个上,可以呈现不同的图形用户界面。或者,可以在所述第一显示段301和所述第二显示段302两者上呈现第一图形用户界面,并且可以在所述边缘显示段303上呈现第二图形用户界面。
用户可以通过用一根或多根手指触摸所述第一显示段301、所述第二显示段302和所述边缘显示段303中的一个或多个并做出手势,与所述柔性显示屏102交互。用户可以使用单点触摸手势或多点触摸手势与所述可折叠设备100交互。手势识别系统206构成所述可折叠设备100的操作系统(operating system,OS)(未示出)的一部分,用于检测用户在所述第一显示段301、所述第二显示段302和所述边缘显示段303中的一个或多个上做出的手势。用户在所述第一显示段301、所述第二显示段302和所述边缘显示段303中的一个或多个上做出的手势用于与所述可折叠设备100交互并由所述手势检测系统206进行检测,本文将所述手势称为“输入手势”。所述输入手势可以是简单输入手势或复杂输入手势。在本发明中,所述简单输入手势定义为用户仅在所述第一显示段301、所述第二显示段302和所述边缘显示段303中的一个上做出的手势,而所述复杂手势定义为用户在所述显示段(301、302、303)中的两个或多个上做出的手势。例如,所述简单手势可以是在所述显示屏102的所述第一显示段301、所述第二显示段302和所述边缘显示段303中的一个上做出的以下手势:长按手势、点击手势、用力按手势、滑动手势、旋转手势或收缩手势。所述复杂输入手势可以是以下各项:跨段单滑动手势、跨段双滑动手势、跨段复合滑动手势、多段滑动手势。
现在参考图4,其中示出了本发明各个方面提供的可折叠设备100的各种示例性折叠状态。在本发明中,术语“折叠状态”用于指所述可折叠设备100的物理结构,例如,对于图4所示各种折叠角范围中的每个折叠角,折叠状态表示所述可折叠设备100的物理外形。所述可折叠设备100的一种折叠状态(称为“折叠状态”)定义为绕0度折叠角折叠。更具体地,所述折叠状态定义为在以下范围内折叠:即从0度折叠角(例如,如图2b可折叠设备100所示)到具有第一角度(A1)401的折叠角,所述第一角度(A1)401可以是预设值。在一些实施例中,所述第一角度(A1)401的值为30°。
所述可折叠设备100的另一种折叠状态(称为“帐篷状态”)定义为绕90度折叠角折叠。例如,所述帐篷状态可以包括以下三种不同的折叠状态:稳定帐篷状态、第一不稳定帐篷状态(折叠侧)和第二不稳定帐篷状态(展开侧)。更具体地,所述第一不稳定帐篷状态(折叠侧)定义为在以下范围内折叠:即从具有所述第一角度(A1)401的所述折叠角到具有第二角度(A2)402的所述折叠角。所述稳定帐篷状态定义为在以下范围内折叠:即从具有所述第二角度(A2)402的所述折叠角到具有第三角度(A3)403的所述折叠角。所述第二不稳定帐篷状态(未折叠侧)定义为在以下范围内折叠:即从具有所述第三角度(A3)403的所述折叠角到具有第四角度(A4)404的所述折叠角。
所述可折叠设备100的又一种折叠状态(称为“展开状态”)定义为折叠角接近180度的折叠状态。更具体地,所述展开状态定义为在以下范围内折叠:即从具有所述第四角度(A4)404的所述折叠角到180度折叠角。尽管可以认为,当所述可折叠设备平放时,所述可折叠设备并未折叠,但对于本发明,可以认为平放对应于180度的折叠角305。
如上所述,可以通过以下方式将所述可折叠设备100沿所述折叠边缘103折叠:用户抓住所述第一显示段301和所述第二显示段302,使所述柔性显示屏102的所述背面彼此相向移动,形成帐篷状态。如上所述,在本发明中,“折叠状态”用于指所述可折叠设备100的物理结构,例如,对于图4所示各种折叠角范围中的每个折叠角,折叠状态表示所述可折叠设备100的物理外形。当所述可折叠设备100处于帐篷状态时,所述可折叠设备100的所述折叠角305可以是所述第一角度(A1)401和第四角度(A4)404之间的任何值,如图4所示。在一些实施例中,所述第一角度(A1)401可以是30°,并且所述第四角度(A4)404可以是150°。
如下文进一步详述,所述可折叠设备100的所述手势识别系统206从所述折叠检测器208接收指示所述可折叠设备100的所述折叠角305的数据,并根据所述可折叠设备100的所述折叠角305确定所述可折叠设备100的所述折叠状态。例如,当所述折叠角305的值在所述第一角度(A1)401和所述第四角度(A4)404之间的预定义范围内时,所述手势识别系统206确定所述可折叠设备100处于帐篷状态。
在所述帐篷状态下,所述可折叠设备100可以放置在桌子等平坦表面上。图2C示出了位于平坦表面202上的所述可折叠设备100。在所述帐篷状态下,所述可折叠设备100转换成自立式可折叠设备,使得用户能够轻松查看所述可折叠设备100的所述柔性显示屏102上的内容,而不需要用手拿住所述可折叠设备100。如图2C所示,当所述可折叠设备100处于所述帐篷状态时,所述柔性显示屏102分成三个显示段:所述第一显示段301、所述第二显示段302和所述边缘显示段303。一个或多个用户可以使用所述第一显示段301、所述第二显示段302和所述边缘显示段303中的每一个与所述可折叠设备100交互。因此,可以看见所述可折叠设备100支持单用户交互和多用户交互。换言之,所述手势识别系统206用于检测单个用户或多个用户做出的手势(例如,简单输入手势或复杂输入手势)。
在所述帐篷状态下,所述可折叠设备100可用于双人游戏,其中,每个玩家独立地与所述可折叠设备100的所述第一显示段301和所述第二显示段302中的一个交互。所述第一显示段301和所述第二显示段302中的每一个可以针对每个玩家呈现不同内容。所述可折叠设备100的所述帐篷状态可用于查看协作内容。在查看协作内容的示例中,所述第一显示段301和所述第二显示段302上呈现相同的内容。所述可折叠设备100的所述帐篷状态也可以用于多应用程序模式。在多应用程序模式下,所述可折叠设备102上运行的一个软件应用程序在所述第一显示段301上呈现信息、第一GUI和内容中的一项或多项;所述可折叠设备102上运行的第二个独立软件应用程序在所述第二显示段302上呈现信息、第二GUI和内容中的一项或多项。
将所述可折叠设备100置于所述帐篷状态,可开启新的用户交互功能。在传统的不可折叠设备中,GUI的用户界面(user interface,UI)元素(例如:按钮、图标)呈现在显示屏上,而内容也呈现在所述显示屏上。在所述可折叠设备100等可折叠设备中,当所述可折叠设备100处于所述帐篷状态时,在所述柔性显示屏102上呈现UI元素存在三个缺点。以下各项缺点不划分特定顺序,第一个缺点是:所述UI元素可能遮挡在所述柔性显示屏102上呈现的内容,对所述可折叠设备100的用户的内容查看体验产生负面影响。第二个缺点是:在人机工程学上,长时间触摸几乎垂直的触敏显示屏表面(例如:所述第一显示段301)可能有困难,并且可能增加用户疲劳。第三个缺点是:当多个用户同时与UI元素交互时,可能需要在所述第一显示段301和所述第二显示段302上同时呈现所述UI元素。可以认为,这种重复呈现浪费了所述柔性显示屏102的面积。此外,在多个显示段(301、302、303)上呈现每个UI元素中的两个或多个实例,可能需要额外的计算能力和额外的处理时间,这导致所述可折叠设备100的电池更快地耗尽。
为了避免遮挡在所述第一显示段301和所述第二显示段302中的一个或两个上呈现的内容,可以在所述边缘显示段303上呈现GUI,所述GUI包括用于在所述可折叠设备100上运行的OS和一个或多个软件应用程序的UI元素。在所述边缘显示段303上呈现包括UI元素的GUI,可防止遮挡在所述第一显示段301和所述第二显示段302中的一个或两个上呈现的内容,并且便于用户与在所述第一显示段301和所述第二显示段302中的一个或两个上呈现的内容交互。
除了在所述边缘显示段303上呈现包括UI元素的GUI,使一个用户(或多个用户)可以与所述可折叠设备100交互,还可以在预定义的可用输入手势集中包含用户在所述边缘显示屏303上以及在所述第一显示段301和所述第二显示段302中的至少一个上做出的输入手势。然而,当所述可折叠设备100处于所述帐篷状态时,并非所有输入手势都适用。更具体地,某些输入手势可能产生非预期结果。例如,当所述可折叠设备100处于特定帐篷状态(例如:当所述可折叠设备100处于所述折叠角305的值介于A1和A2之间的第一不稳定帐篷状态,或者所述折叠角305的值介于A3和A4之间的第二不稳定帐篷状态时)时,如果输入手势涉及在所述第一显示段301或所述第二显示段302上施力,则可能导致所述可折叠设备100倾翻。
本发明的各个方面涉及根据所述可折叠设备100的所述折叠状态,限制用户与所述可折叠设备100交互可用的输入手势。针对所述可折叠设备的每个折叠状态(例如,所述可折叠设备100的所述折叠角305的每个预定义范围),预定义用于与所述可折叠设备100交互的可用输入手势集。在一些实施例中,所述可折叠设备100的每个折叠状态的可用输入手势集可以包括:所述第一显示段301和所述第二显示段302的可用输入手势的第一子集,以及所述边缘显示段303的可用输入手势的第二子集。所述可用输入手势集存储在所述可折叠设备100的存储器204中。或者,所述可用输入手势集可以远程存储在服务器上,并且可供所述可折叠设备100实时或接近实时地访问。
参考图5,其中示出了与折叠角305的五个预定义范围对应的可用输入手势集的表。所述折叠角305的每个预定义范围与所述可折叠设备100的折叠状态对应。因此,所述表包含所述可折叠设备100的每个折叠状态的可用输入手势集。在一些实施例中,根据在所述第一显示段301、所述第二显示段302和所述边缘显示段303中的哪一个上检测到给定输入手势,所述输入手势可以具有不同的交互效果。例如,所述操作系统可以将所述第一显示段301上的点击手势解释为打开软件应用程序的命令信号,而将所述边缘显示段303上的相同点击手势解释为显示本地日期和时间的命令信号。在一些实施例中,根据所述可折叠设备100的所述折叠状态,给定输入手势可以具有不同的交互效果。例如,当所述可折叠设备100处于所述稳定帐篷状态时,所述OS可以将所述第一显示段301上的点击手势解释为打开软件应用程序的命令信号;当所述可折叠设备100处于所述展开状态时,所述OS可以将所述第一显示段301上的相同点击手势解释为显示最近电话呼叫列表的命令信号。
在图5所示的表的第一列501中,列出了所述第一显示段301和第二显示段302的可用输入手势的第一子集,所述第一子集对应于所述折叠角的每个预定义范围(例如,所述可折叠设备100的每个折叠状态),并且无论所述折叠角如何,所述第一子集包括:点击、用力按、滑动、收缩/缩放、旋转、跨段单滑动、跨段双滑动、跨段复合滑动以及多段滑动。
在图5所示的表的第二列502中,列出了所述边缘显示段303的可用输入手势的第二子集,所述第二子集对应于所述折叠角的每个预定义范围(例如,所述可折叠设备100的每个折叠状态),并且无论所述折叠角如何,所述第二子集包括:点击、用力按、滑动、收缩/缩放、旋转、跨段单滑动、跨段双滑动、跨段复合滑动以及多段滑动。
通过所述可折叠设备100上的所述柔性显示屏102,所述手势识别系统206可以检测和跟踪用户手指(或手写笔)在所述柔性显示屏102的所述第一显示段301、所述第二显示段302和所述边缘显示段303中的一个或多个上的移动,以便确定输入参数,例如触摸次数、方向、力度、速度和触摸持续时间。这些输入参数可用于识别和确定输入手势的类型。例如,所述可折叠设备100上的一个或多个运动传感器可以测量沿所述设备100的X-Y-Z轴的加速力和旋转力。所述运动传感器可以包括加速度计、重力传感器、陀螺仪或旋转矢量传感器。
通过所述柔性显示屏102,在任何给定的时间点(例如,每毫秒或任何其它合适的时间单位),所述手势识别系统206至少跟踪并存储每个检测到的输入手势的时间戳和位置(例如,像素位置)。所述手势识别系统206可以可选地确定和存储每个检测到的输入手势的大小和/或压力。至少根据在给定时间段内每个检测到的输入手势的所述时间戳和位置,所述手势识别系统206可以确定所述检测到的输入手势的类型。例如,如果检测到输入手势仅持续了一秒,并且以所述柔性显示屏102上的相同位置为中心,则所述输入手势可能是点击手势。又例如,如果检测到输入手势持续了两秒并且似乎在所述柔性显示屏102上移动了一小段距离,则所述输入手势可能是滑动手势。
在一些实施例中,所述可折叠设备100可以具有集成到所述柔性显示屏102中的一个或多个压力传感器,用于测量用户指尖(或手写笔)在所述柔性显示屏表面的所述第一显示段301、所述第二显示段302和所述边缘显示段303中的一个上施加的力。所述手势识别系统206可以根据从所述压力传感器接收的测量结果,确定用户指尖(或手写笔)在所述第一显示段301、所述第二显示段302或所述边缘显示段303上施加的力,以便确定所述检测到的输入手势是点击手势还是用力按手势。
上述所有传感器都可以集成到所述设备100的所述主体105中,例如,所述传感器可以是覆盖在所述柔性显示屏102上的玻璃层的一部分,或是覆盖在所述柔性显示屏102上的玻璃层外的塑料或金属层的一部分。
所述可折叠设备100上的一个或多个环境传感器可以测量各种环境参数,例如环境空气温度和压力、照度以及湿度。所述环境传感器可以包括气压计、光度计或温度计。
所述可折叠设备100上的一个或多个位置传感器可以测量所述可折叠设备100的物理位置。所述位置传感器可以包括方向传感器或磁力计。
例如,所述手势识别系统206可以通过检测触摸并确定所述压力传感器测量的所述触摸的力低于预定义阈值,确定用户做出了点击手势。当所述压力超过所述预定阈值时,可以检测为用力按手势。
所述手势识别系统206可以通过检测触摸动作在所述柔性显示屏102表面上移动而未失去与所述柔性显示屏102的接触,确定用户做出了滑动手势。在扁平设备上检测到的滑动手势通常影响整个屏幕(例如,使在所述显示屏102上呈现的UI响应于检测到所述滑动手势而做出改变);然而,如果当所述可折叠设备处于所述帐篷状态时,在所述可折叠设备的所述显示段(301、302、303)中的一个上检测到滑动手势,则所述滑动手势仅影响在其上检测到所述滑动手势的所述显示段。
所述手势识别系统206可以通过检测同时或同步发生并彼此相向拉拢(收缩手势)或背向拉离(缩放手势)的两个单独滑动手势,确定用户做出了收缩或缩放手势。如果在所述可折叠设备100处于展开状态时,检测到收缩或缩放手势,则所述收缩或缩放手势可以使在整个所述柔性显示屏102(例如,所有三个显示段301、302、303)上呈现的GUI做出改变;然而,如果在所述可折叠设备100处于所述帐篷状态时,在所述三个显示段(301、302、303)中的一个上检测到收缩或缩放手势,则所述收缩或缩放手势仅影响在其上检测到所述手势的所述一个显示段上呈现的内容。
所述手势识别系统206可以通过检测两个触摸动作同时发生并且其中一个被拖着绕另一个做圆周运动,确定用户做出了旋转手势。在扁平设备上,旋转手势一般会影响整个屏幕;但是,在处于帐篷状态的可折叠设备的某个显示段上进行旋转时,旋转手势仅影响在其上做出所述手势的屏幕。
在一些示例中,所述可折叠设备100还可以包括触觉反馈技术,用于在用户的手指触摸所述柔性显示屏102的所述第一显示段301、所述第二显示段302和所述边缘段303时,在用户的手指上产生反馈力。反馈力可以让所述用户知道,所述可折叠设备100在施加所述反馈力之前立即检测到了所述用户做出的所述输入手势。
现在描述所述手势识别系统206的操作。所述手势识别系统206从所述折叠检测器208接收指示所述折叠角305的数据,并且根据所述折叠角305确定所述可折叠设备100的折叠状态(即,所述手势识别系统206确定所述折叠角的值处于所述折叠角的哪个范围)。然后,所述手势识别系统206检测所述第一显示段301、所述第二显示段302和所述边缘显示段303中的一个或多个上的手势。接着,如下所述,所述手势识别系统206根据所述可折叠设备100的所述确定的折叠状态,确定所述检测到的输入手势是有效输入手势还是无效输入手势。
首先,所述手势识别系统206确定所述检测到的输入手势是简单输入手势还是复杂输入手势。当所述手势识别系统206确定所述检测到的输入手势是简单输入手势时,所述手势识别系统206确定与所述检测到的简单输入手势对应的手势类型(例如,所述手势识别系统206确定所述检测到的简单输入手势是点击手势、用力按手势、旋转手势、收缩手势还是缩放手势)。然后,所述手势识别系统206检索与所述可折叠设备100的所述确定的折叠状态对应的所述可用输入手势集。如上所述,所述可用输入手势集包括:所述第一显示段301和所述第二显示段302的可用输入手势的第一子集,以及所述边缘显示段303的可用输入手势的第二子集。然后,所述手势识别系统206确定所述检测到的简单输入手势是在所述第一显示段301、所述第二显示段302和所述第三显示段303中的哪个显示段上检测到的。
当确定在所述第一显示段301和所述第二显示段302中的一个上检测到所述检测到的简单输入手势时,所述手势识别系统206确定与所述可折叠设备100的所述确定的折叠状态对应的所述可用输入手势的所述第一子集是否包括与所述检测到的简单输入手势对应的手势类型。当所述手势识别系统206确定与所述可折叠设备100的所述确定的折叠状态对应的所述可用输入手势的所述第一子集包括与所述简单输入手势对应的所述手势类型时,所述手势识别系统206确定所述检测到的简单输入手势是有效输入手势。然后,所述手势识别系统206向在所述可折叠设备100上运行的软件应用程序或OS提供与所述检测到的简单输入手势(例如,点击手势、用力按手势、旋转手势、收缩手势或缩放手势)对应的手势类型,以及所述可折叠设备100的所述折叠状态、显示信息(包括确定是在所述第一显示段301和所述第二显示段302中的哪个显示段上检测到与所述检测到的简单输入手势对应的手势类型的信息)和所述检测到的简单输入手势的位置(例如,所述检测到的简单输入手势的接触点在所述显示段上相对于所述柔性显示屏102的已定义坐标系的x和y坐标)。在所述可折叠设备100上运行的所述软件应用程序或所述OS接收与所述检测到的简单输入手势对应的所述手势类型以及所述可折叠设备100的所述折叠状态和所述显示信息,并根据所述手势类型、所述可折叠设备100的所述折叠状态和所述显示信息确定要执行的操作。然后,所述软件应用程序或所述OS执行所述确定的操作。所述软件应用程序或所述OS执行的操作的示例见图6、图7、图8、图9和图18。
当确定在所述边缘显示段303上检测到所述简单输入手势时,所述手势识别系统206确定与所述可折叠设备100的所述确定的折叠状态对应的所述可用输入手势的所述第二子集是否包括与所述简单输入手势对应的所述手势类型。当所述手势识别系统206确定与所述可折叠设备100的所述确定的折叠状态对应的所述可用输入手势的所述第二子集包括与所述检测到的简单输入手势对应的所述手势类型时,所述手势识别系统206确定所述检测到的简单输入手势是有效输入手势,并且所述手势识别系统206向在所述可折叠设备100上运行的所述软件应用程序或所述OS提供与所述检测到的简单输入手势对应的所述手势类型、所述可折叠设备100的所述折叠状态和显示信息(包括指示是在所述边缘显示段303上检测到所述简单输入手势的信息)以及所述简单输入手势的位置(例如,所述简单输入手势的接触点在所述边缘显示段303上相对于所述柔性显示屏102的已定义坐标系的x和y坐标)。在所述可折叠设备100上运行的所述软件应用程序或所述OS接收与所述检测到的简单输入手势对应的所述手势类型以及所述折叠状态和所述显示信息,并根据所述手势类型、所述可折叠设备100的所述折叠状态和所述显示信息确定要执行的操作。然后,所述软件应用程序或所述OS执行所述确定的操作。所述软件应用程序或所述OS执行的操作的示例见图6、图7、图8、图9和图18。
当确定在所述第一显示段301和所述第二显示段302中的一个上检测到所述简单输入手势,并且所述手势识别系统206确定与所述可折叠设备100的所述确定的折叠状态对应的所述可用输入手势的第一子集不包括与所述简单输入手势对应的所述手势类型时,所述手势识别系统206确定所述检测到的输入手势是无效输入手势(即,不是有效输入手势)。当确定所述检测到的简单输入手势是无效输入手势时,所述手势识别系统206忽略所述检测到的简单输入手势。
当所述手势识别系统206确定所述检测到的输入手势是复杂输入手势时,所述手势识别系统206确定与所述检测到的复杂输入手势对应的手势类型(例如,所述手势识别系统206确定所述检测到的复杂输入手势是否为以下手势:跨段单滑动手势、跨段双滑动手势、跨段复合滑动手势、多段多滑动手势)。然后,所述手势识别系统206检索与所述可折叠设备100的所述确定的折叠状态对应的所述可用输入手势集。然后,所述手势识别系统206确定与所述可折叠设备100的所述确定的折叠状态对应的所述可用输入手势集是否包括与所述复杂输入手势对应的所述检测到的复杂输入手势。当所述手势识别系统206确定与所述可折叠设备100的所述确定的折叠状态对应的所述可用输入手势集包括与所述复杂输入手势对应的所述手势类型时,所述手势识别系统206确定所述检测到的复杂输入手势是有效输入手势,并且向在所述可折叠设备100上运行的所述软件应用程序或所述OS提供与所述检测到的复杂输入手势对应的手势类型,以及所述可折叠设备100的所述折叠状态和显示信息(包括关于在哪个显示段上检测到所述复杂输入手势的信息)。在所述可折叠设备100上运行的所述软件应用程序或所述OS接收与所述检测到的复杂输入手势对应的所述手势类型、所述可折叠设备100的所述折叠状态和所述显示信息,并根据与所述检测到的复杂输入手势对应的所述手势类型、所述可折叠设备100的所述折叠状态和所述显示信息确定要执行的操作。然后,所述软件应用程序或所述OS执行所述确定的操作。所述软件应用程序或所述OS执行的操作的示例见图11、图13、图15和图17。
当与所述可折叠设备100的所述折叠角305对应的所述可用输入手势集不包括与所述检测到的复杂输入手势对应的所述手势类型时,所述手势识别系统206确定所述复杂手势是无效输入手势。当确定与所述检测到的简单复杂手势对应的所述手势类型是无效输入手势时,所述手势识别系统206忽略所述检测到的复杂输入手势。
图6示出了点击手势的表600,所述点击手势用于图4所示折叠角305的五个预定义范围中的每一个。表600包括与图4所示折叠角305的五个预定义范围(即所述可折叠设备的五个状态)中的每一个对应的行。表600示出了,针对所述折叠角305的所述五个预定义范围中的每一个,当在所述第一显示段301和所述第二302(如标题为“主显示段(301、302)”的列中所示)中的一个上检测到点击手势时,或者当在所述边缘显示段303(如标题为“边缘(303)”的列中所示)上检测到点击手势时,所述点击手势是有效手势(以“是”表示)还是无效手势(以“否”表示)。表600还示出了,对于折叠角305的所述五个预定义范围中的每一个,当所述点击手势是有效输入手势并且在所述第一显示段301和所述第二显示段302中的一个上检测到所述点击手势时,在所述可折叠设备100上运行的软件应用程序或OS执行的操作(如标题为“主显示段(301、302)”的列旁边、标题为“用例示例”的列中所示);或是,当所述点击手势是有效输入手势并且在所述边缘显示段303上检测到所述点击手势时,在所述可折叠设备100上运行的软件应用程序或OS执行的操作(如标题为“边缘(303)”的列旁边、标题为“用例示例”的列中所示)。
如表600所示,当所述折叠角305的值介于0°和A1之间(例如,当所述可折叠设备100处于所述折叠状态时),并且在所述边缘显示段303上检测到点击手势时,所述点击手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的OS执行的所述操作包括:在所述可折叠设备100的所述边缘显示分段303上,显示最近关闭的软件应用程序的UI元素。
表600示出了,当所述折叠角305的值介于A1和A2之间(A2≤90°,例如,当所述可折叠设备100处于所述折叠状态时),并且在所述边缘显示段303上检测到点击手势时,所述点击手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的OS执行的所述操作包括:在所述可折叠设备100的所述边缘显示分段303上,显示最近关闭的软件应用程序的UI元素。
表600还示出了,当所述折叠角305的值介于A2和A3之间(A3≤90°,例如,当所述可折叠设备100处于所述稳定帐篷状态时),并且在所述第一显示段301和所述第二显示段302中的一个上检测到点击时,所述点击手势是有效输入手势。在这种情况下,根据从所述手势识别系统206接收的所述点击手势的所述显示信息,在所述可折叠设备100上运行的软件应用程序或OS确定所述点击手势是否是在所述第一显示段和所述第二显示段中的一个上呈现的“返回按钮”UI元素上。如果所述软件应用程序或所述OS确定所述点击手势是在所述“返回按钮”上,则所述软件应用程序或所述OS执行与所述“返回按钮”关联的操作。与所述“返回按钮”关联的操作包括:呈现所述软件应用程序或所述OS之前在所述第一显示段301和所述第二显示段302中的一个上显示的信息。
表600还示出了,当所述折叠角305的值介于A2和A3之间(A3≥90°,例如,当所述可折叠设备100处于所述稳定帐篷状态时),并且在所述边缘显示段303上检测到点击手势时,所述点击手势是有效输入手势。在这种情况下,根据从所述手势识别系统206接收的所述点击手势的所述显示信息,在所述可折叠设备100上运行的所述OS确定所述点击手势是否是在所述边缘显示段303上呈现的UI元素上。如果所述OS确定所述点击手势是在所述边缘显示段303上呈现的UI元素上,则所述OS执行与所述UI元素关联的操作,其中,所述UI元素呈现于检测到所述点击手势的所述边缘显示段303上。例如,所述操作包括:将UI元素突出显示为已选择状态。
表600还示出了,当所述折叠角305的值介于A4和180°之间(例如,当所述可折叠设备100处于所述展开状态时),并且在所述第一显示段301和所述第二显示段302中的一个上检测到点击手势时,所述点击手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的所述OS执行与在所述第一显示段301和所述第二显示段302中的一个上呈现的UI元素关联的动作。所述操作包括:打开与在所述第一显示段301和所述第二显示段302中的一个上呈现的UI元素关联的软件应用程序。
表600还示出了,当所述折叠角305的值介于A4和180°之间(例如,当所述可折叠设备100处于所述展开状态时),并且在所述边缘显示段303上检测到点击手势时,所述点击手势是有效输入手势。在这种情况下,在所述可折叠设备上运行的所述OS执行与在所述显示段上呈现的UI元素关联的操作。所述操作包括:打开与在所述边缘显示段303上呈现的UI元素关联的软件应用程序。
图7示出了用力按手势的表700,所述用力按手势用于图4所示折叠角305的五个预定义范围中的每一个。表700包括与图4所示折叠角305的五个预定义范围(即所述可折叠设备的五个状态)中的每一个对应的行。表700示出了,针对所述折叠角305的五个预定义范围中的每一个,当在所述第一显示段301和所述第二显示段302(如标题为“主显示段(301、302)”的列中所示)中的一个上检测到用力按手势时,或者当在所述边缘显示段303(如标题为“边缘(303)”的列中所示)上检测到用力按手势时,所述用力按手势是有效手势(以“是”表示)还是无效手势(以“否”表示)。表700还示出了,对于折叠角305的五个预定义范围中的每一个,当所述用力按手势是有效输入手势并且在所述第一显示段301和所述第二显示段302中的一个上检测到所述用力按手势时,在所述可折叠设备100上运行的软件应用程序或OS执行的操作(如标题为“主显示段(301、302)”的列旁边、标题为“用例示例”的列中所示);或是,当所述用力按手势是有效输入手势并且在所述边缘显示段303上检测到所述用力按手势时,在所述可折叠设备100上运行的软件应用程序或OS执行的操作(如标题为“边缘(303)”的列旁边、标题为“用例示例”的列中所示)。
如表700所示,当所述折叠角305的值介于0°和A1之间(例如,当所述可折叠设备100处于所述折叠状态时),并且在所述显示段(301、302、303)中的任何一个上检测到用力按手势时,所述用力按手势是无效手势。
表700示出了,当所述折叠角305介于A1和A2之间(当A2≤90°时,例如,当所述可折叠设备100处于所述第一不稳定帐篷状态时),并且在所述边缘显示段303上检测到用力按手势时,所述用力按手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的OS确认应该执行与先前检测到的手势关联的操作,并执行该操作。
表700示出了,当所述折叠角305介于A2和A3之间(当A3≥90°时,例如,当所述可折叠设备100处于所述稳定帐篷状态时),并且在所述第一显示段301和所述第二显示段302中的一个上检测到所述用力按手势时,所述用力按手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的所述OS执行的操作包括:向所述可折叠设备100的用户提供触觉反馈。
表700示出了,当所述折叠角305介于A2和A3之间(当A3≥90°时,例如,当所述可折叠设备100处于所述稳定帐篷状态时),并且在所述边缘显示段303上检测到用力按手势时,所述用力按手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的所述OS执行的操作包括:如果在与所述边缘显示段303上呈现的最近打开的软件应用程序关联的UI元素上检测到所述用力按手势,则关闭所述最近打开的软件应用程序。
表700还示出了,当所述折叠角305的值介于A3和A4之间(例如,当所述可折叠设备100处于所述展开状态),并且在所述第一显示段301和第显示段302中的一个上检测到用力按手势时,所述用力按手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的所述OS执行的操作包括:向所述可折叠设备100的用户提供触觉反馈。
表700还示出了,当所述折叠角305的值介于A4和180°之间(例如,所述可折叠设备100处于展开状态),并且在所述第一显示段301和所述第二显示段302中的一个上检测到用力按手势时,所述用力按手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的所述OS执行的操作包括:向所述可折叠设备100的用户提供触觉反馈。
当所述折叠角305的值介于A4和180°之间并且在所述边缘显示段303上检测到用力按手势时,所述用力按手势是有效输入手势。在这种情况下,所述OS执行与所述用力按关联的操作,例如,确认应该执行与之前检测到的输入手势关联的操作,或者如果在与所述边缘显示段303上呈现的最近打开的应用程序关联的UI元素上检测到所述用力按手势,则关闭所述最近打开的软件应用程序。
图8示出了滑动手势的表800,所述滑动手势用于图4所示折叠角305的五个预定义范围中的每一个。表800包括与图4所示折叠角305的五个预定义范围(即所述可折叠设备的五个状态)中的每一个对应的行。表800示出了,针对所述折叠角305的五个预定义范围中的每一个,当在所述第一显示段301和所述第二显示段302(如标题为“主显示段(301、302)”的列中所示)中的一个上检测到滑动手势时,或者当在所述边缘显示段303(如标题为“边缘(303)”的列中所示)上检测到滑动手势时,所述滑动手势是有效手势(以“是”表示)还是无效手势(以“否”表示)。表800还示出了,对于折叠角305的五个预定义范围中的每一个,当所述滑动手势是有效输入手势并且在所述第一显示段301和所述第二显示段302中的一个上检测到所述滑动手势时,在所述可折叠设备100上运行的软件应用程序或OS执行的操作(如标题为“主显示段(301、302)”的列旁边、标题为“用例示例”的列中所示);或是,当所述滑动手势是有效输入手势并且在所述边缘显示段303上检测到所述滑动手势时,在所述可折叠设备100上运行的软件应用程序或OS执行的操作(如标题为“边缘(303)”的列旁边、标题为“用例示例”的列中所示)。
表800还示出了,当所述折叠角305的值介于0°和A1之间(例如,当所述可折叠设备100处于所述折叠状态时),并且完全在所述第一显示段301和所述第二显示段302中的一个上检测到滑动手势时,所述滑动手势是无效输入手势。
表800示出了,当所述折叠角305的值介于0°和A1之间(例如,当所述可折叠设备100处于所述折叠状态时),并且在所述边缘显示段303上检测到滑动手势时,所述滑动手势是有效输入手势。在这种情况下,在所述可折叠设备上运行的所述OS执行与所述滑动手势关联的操作,例如接听或拒接来电。
表800示出了,当所述折叠角305介于A1和A2之间(当A2<90°时,例如,当所述可折叠设备100处于所述第一稳定帐篷状态时),并且在所述边缘显示段303上检测到滑动手势时,所述滑动手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的软件应用程序(例如,音乐播放应用程序)执行与所述滑动手势关联的操作(例如,播放上一首歌或下一首歌)。
表800示出了,当所述折叠角305介于A2和A3之间(当A3≥90°时,例如,当所述可折叠设备100处于所述稳定帐篷状态时),并且在所述第一显示段301和所述第二显示段302中的一个上检测到滑动手势时,所述滑动手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的软件应用程序(例如,音乐播放应用程序)执行与所述第一显示段301和所述第二显示段302中检测到所述滑动手势的一个上的所述滑动手势关联的操作(例如,播放上一首歌或下一首歌)。
表800还示出了,当所述折叠角305的值介于A3和A4之间(例如,当所述可折叠设备100处于所述第二不稳定帐篷状态时),滑动手势是无效输入手势。
表800还示出了,当所述折叠角305的值介于A4和180°之间(例如,当所述可折叠设备处于所述展开状态时),并且在所述第一显示段301和所述第二显示段302中的一个上检测到滑动手势时,所述滑动手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的软件应用程序(例如,照片应用程序)执行与所述第一显示段301和所述第二显示段302中检测到所述滑动手势的一个上的所述滑动手势关联的操作(例如,显示下一张(多张)照片或上一张(多张)照片)。
表800还示出了,当所述折叠角305的值介于A4和180°之间(例如,当所述可折叠设备处于所述展开状态时),并且在所述边缘显示段303上检测到滑动手势时,所述滑动手势是有效手势。在这种情况下,在所述可折叠设备100上运行的软件应用程序(例如,播放视频的视频播放器应用程序)执行与所述边缘显示段303上的滑动手势关联的操作(例如,后退或前进播放视频)。
图9示出了收缩/缩放手势的表900,所述收缩/缩放手势用于图4所示折叠角305的五个预定义范围中的每一个。表900包括与图4所示折叠角305的五个预定义范围(即所述可折叠设备的五个状态)中的每一个对应的行。表900示出了,针对所述折叠角305的五个预定义范围中的每一个,当在所述第一显示段301和所述第二显示段302(如标题为“主显示段(301、302)”的列中所示)中的一个上检测到收缩/缩放手势时,或者当在所述边缘显示段303(如标题为“边缘(303)”的列中所示)上检测到收缩/缩放手势时,所述收缩/缩放手势是有效手势(以“是”表示)还是无效手势(以“否”表示)。表900还示出了,对于折叠角305的五个预定义范围中的每一个,当所述收缩/缩放手势是有效输入手势并且在所述第一显示段301和所述第二显示段302中的一个上检测到所述收缩/缩放手势时,在所述可折叠设备100上运行的软件应用程序或OS执行的操作(如标题为“主显示段(301、302)”的列旁边、标题为“用例示例”的列中所示);或是,当所述收缩/缩放手势是有效输入手势并且在所述边缘显示段303上检测到所述收缩/缩放手势时,在所述可折叠设备100上运行的软件应用程序或OS执行的操作(如标题为“边缘(303)”的列旁边、标题为“用例示例”的列中所示)。
表900还示出了,当所述折叠角305的值介于0°和A1之间(例如,当所述可折叠设备100处于所述折叠状态时),并且在所述第一显示段301和所述第二显示段302中的一个上检测到收缩/缩放手势时,所述收缩/缩放手势是无效输入手势。
表900示出了,当所述折叠角305的值介于0°和A1之间(例如,当所述可折叠设备100处于所述折叠状态时),并且在所述边缘显示段303上检测到收缩/缩放手势时,所述收缩/缩放手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的所述OS执行与所述边缘显示段303上的所述收缩/缩放手势关联的操作,包括锁定在所述边缘显示段303上呈现的UI。
表900示出了,当所述折叠角305介于A1和A2之间(当A2<90°时,例如,当所述可折叠设备100处于所述第一不稳定帐篷状态时),并且在所述边缘显示段303上检测到收缩/缩放手势时,所述收缩/缩放手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的软件应用程序(例如,音乐应用程序)执行与所述边缘显示段303上的所述收缩/缩放手势关联的操作(例如,播放下一首歌或上一首歌)。
表900示出了,当所述折叠角305介于A2和A3之间(当A3≥90°时,例如,当所述可折叠设备100处于所述稳定帐篷状态时),并且在所述第一显示段301和所述第二显示段302中的一个上检测到收缩/缩放手势时,所述收缩/缩放手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的软件应用程序(例如,照片应用程序)执行与所述第一显示段301和所述第二显示段302中检测到所述收缩/缩放手势的一个上的所述收缩/缩放手势关联的操作(例如,显示下一张(多张)照片或上一张(多张)照片)。
表900示出了,当所述折叠角305介于A2和A3之间(A3≥90°,例如,当所述可折叠设备100处于所述稳定帐篷状态时),并且在所述边缘显示段303上检测到收缩/缩放手势时,所述收缩/缩放手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的软件应用程序(例如,音乐应用程序)执行与所述边缘显示段303上的所述收缩/缩放手势关联的操作(例如,播放下一首歌或上一首歌)。
表900还示出了,当所述折叠角305的值介于A3和A4之间(例如,当所述可折叠设备100处于所述第二不稳定帐篷状态时),收缩/缩放手势是无效输入手势。
表900还示出了,当所述折叠角305的值介于A4和180°之间(例如,当所述可折叠设备100处于展开状态时),并且在所述第一显示段301和所述第二显示段302中的一个上检测到收缩/缩放手势时,所述收缩/缩放手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的软件应用程序(例如,照片应用程序)执行与所述第一显示段301和所述第二显示段302中检测到所述收缩/缩放手势的一个上的所述收缩/缩放手势关联的操作(例如,放大在所述第一显示段301和所述第二显示段302中的一个上呈现的照片)。
表900示出了,当所述折叠角305的值介于A4和180°之间(例如,当所述可折叠设备100处于所述展开状态时),并且在所述边缘显示段303上检测到收缩/缩放手势时,所述收缩/缩放手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的软件应用程序执行与所述边缘显示段303上的所述收缩/缩放手势关联的操作(例如,在所述边缘显示段上呈现更多UI元素)。
图10A、图10B、图10C示出了所述可折叠设备100的三个俯视图(1002、1004、1006),其中示出了跨段滑动手势的各种实现方式。在本发明中,跨段滑动手势是首先在所述第一显示段301、所述第二显示段302和所述边缘显示段303中的一个上检测到,并且随后在相同手势内(即,仍然连续地检测到触摸输入)在所述显示段(301、302、303)中的另一个上检测到的手势。跨段滑动手势可以是跨段单滑动手势(即,在手势期间的任何时间仅在所述第一显示段301、所述第二显示段302和所述边缘段303中的一个上检测到的跨段手势),也可以是跨段复杂滑动手势(即,在手势期间的至少部分时间在所述第一显示段301、所述第二显示段302和所述第三边缘显示段303中的两个或多个上检测到的跨段滑动手势)。图10A示出了一个跨段单滑动手势,所述跨段单滑动手势从所述边缘显示段303上的单次触摸开始,并且所述单次触摸移动到所述第一显示段301。图10B示出了另一个跨段单滑动手势,所述跨段单滑动手势从所述边缘显示段303上的单次触摸开始,并且所述单次触摸移动到所述第二显示段302。图10C示出了又一个跨段单滑动手势,所述跨段单滑动手势从所述第一显示段301上的单次触摸开始,并且所述单次触摸通过所述边缘显示段303移动到所述第二显示段302。
图11示出了跨段单滑动手势的表1100,所述跨段单滑动手势用于图4所示折叠角305的五个预定义范围中的每一个。表1100包括与图4所示折叠角305的五个预定义范围(即所述可折叠设备的五个状态)中的每一个对应的行。表1100示出了,对于折叠角305的五个预定义范围中的每一个,跨段单滑动手势是有效手势(以“是”表示)还是无效手势(以“否”表示)。表1100包括一列(以标题“示例性用例”表示),所述列示出了,对于折叠角305的五个预定义范围中的每一个,在所述可折叠设备100上运行的软件应用程序或OS执行的示例性操作。
如表1100所示,当所述折叠角305的值介于0°和A1之间时(例如,当所述可折叠设备处于所述折叠状态时),以及当所述折叠角的值介于A1和A2之间时(其中A2≤90°,例如,当所述可折叠设备处于所述第一不稳定帐篷状态时),跨段单滑动手势是无效手势。
当所述折叠角305的值介于A2和A3之间(当A3≥90°时,例如,当所述可折叠设备处于所述稳定帐篷状态时),跨段单滑动手势是有效输入手势。当所述手势识别系统206确定所述跨段单滑动手势是有效输入手势时,所述手势识别系统206向在所述可折叠设备上运行的软件应用程序或OS提供所述跨段单滑动手势和指示所述可折叠设备100处于稳定帐篷状态的状态信息,所述软件应用程序或所述OS执行当所述可折叠设备处于稳定帐篷状态时与所述跨段单滑动手势关联的操作。例如,如表1100所示,当所述OS接收到所述跨段单滑动手势和指示所述可折叠设备100处于所述稳定帐篷状态的所述状态信息时,所述OS取消在所述边缘显示段303上显示的通知。
如表1100所示,当所述折叠角的值305介于A3和A4之间时(即,当所述手势识别系统206确定所述可折叠设备100处于所述第二不稳定帐篷状态时),跨段单滑动手势是无效手势。
如表1100所示,当所述折叠角的值305介于A4和180°之间时(即,当所述手势识别系统206确定所述可折叠设备100处于所述第二不稳定帐篷状态时),跨段单滑动操作手势是有效输入手势。当所述手势识别系统206确定所述跨段单滑动操作手势是有效输入手势时,所述手势识别系统206向在所述可折叠设备上运行的软件应用程序或OS提供所述跨段单滑动手势和指示所述可折叠设备100处于所述第二不稳定帐篷状态的所述状态信息。例如,如表1100所示,在所述可折叠设备1100上运行的软件应用程序执行如上文结合图8所述的与滑动手势关联的相同操作。
参考图12A和图12B,其中示出了本发明各个方面提供的两种不同跨段双滑动手势。在图12A中,示出了第一跨段双滑动手势,所述第一跨段双滑动手势包括两个同时滑动手势,所述两个同时滑动手势的第一滑动手势在所述第一显示段301上开始并结束,而所述两个同时滑动手势的第二滑动手势在所述边缘显示段303上开始并结束。在图12B中,示出了第二跨段双滑动手势,所述第二跨段双滑动手势包括两个同时滑动手势,所述两个同时滑动手势的第一滑动手势在所述所述第一显示段301上开始并在所述边缘显示段303上结束,而所述两个同时滑动手势的第二滑动手势在所述边缘显示段303上开始并在所述边缘显示段303上结束。
图13示出了跨段单滑动手势的表1300,所述跨段单滑动手势用于图4所示折叠角305的五个预定义范围中的每一个。表1300包括与图4所示折叠角305的五个预定义范围(即所述可折叠设备的五个状态)中的每一个对应的行。表1300示出了,对于折叠角305的五个预定义范围中的每一个,跨段单滑动手势是有效手势(以“是”表示)还是无效手势(以“否”表示)。表1300还包括一列(以标题“示例性用例”表示),所述列示出了,对于折叠角305的五个预定义范围中的每一个,在所述可折叠设备100上运行的软件应用程序或OS执行的示例性操作。
如表1300所示,当所述折叠角305的值介于0°和A1之间时(例如,当所述可折叠设备100处于所述折叠状态时),跨段双滑动手势是有效输入手势。在这种情况下,所述手势识别系统206向在所述可折叠设备上运行的软件应用程序或OS提供所述跨段双滑动手势和指示所述可折叠设备100的状态的状态信息,以针对所述折叠状态执行与所述跨段双滑动手势关联的操作。例如,当所述跨段双滑动手势的一根手指(或触摸点)保持稳定于所述边缘显示段303上,而另一根手指(或触摸点)滑过所述第一主显示段301或所述第二主显示段302的表面时,所述软件应用程序可以激活快速滑动操作。
表1300示出了,当所述折叠角305的值介于A1和A2之间(当A2<90°时,例如,当所述可折叠设备100处于所述第一不稳定帐篷状态时)或介于A3和A4之间(例如,当所述可折叠设备100处于所述第二不稳定帐篷状态时)时,跨段双滑动手势是无效输入手势。表1300还示出了,当所述折叠角305的值介于A2和A3之间时(当A3≥90°,例如,当所述可折叠设备100处于所述稳定帐篷状态时),跨段双滑动手势是有效输入手势。在这种情况下,所述手势识别系统206向在所述可折叠设备100上运行的软件应用程序或OS提供所述跨段双滑动手势和指示所述可折叠设备100的状态(例如稳定帐篷状态)的状态信息,所述软件应用程序或所述OS针对所述稳定帐篷状态执行与所述跨段双滑动手势关联的操作。例如,当所述跨段双滑动手势的一根手指(或触摸点)保持稳定于所述边缘显示段303上,而另一根手指(或触摸点)向上滑动所述第一主显示段301或所述第二主显示段302的表面时,所述软件应用程序可以将网站收藏到所述边缘显示段303上。
表1300所示还示出了,当所述折叠角305的值介于A4和180°之间时(例如,当所述可折叠设备100处于所述展开状态时),跨段双滑动手势是有效输入手势。在这种情况下,所述手势识别系统206向在所述可折叠设备100上运行的软件应用程序或OS提供所述跨段双滑动手势和指示所述可折叠设备100的状态(例如展开状态)的状态信息,所述软件应用程序或所述OS针对所述展开状态执行与所述跨段双滑动手势关联的操作。例如,在所述可折叠设备100上运行的所述软件应用程序或所述OS执行操作,所述操作类似于与常规手势集的“按住并拖动”手势关联的操作(即,移动所述柔性屏幕102上呈现的UI元素)。
图14示出了本发明各个方面提供的跨段复合滑动手势1405的示例性实现方式。在本发明中,跨段复合手势是跨段复杂手势的子类型,即首先在所述三个显示段(301、302、303)中的一个上检测到,并且随后在相同手势内(即,在仍然连续地检测到触摸输入的情况下)在另外两个不同的显示段(301、302、303)上检测到的跨段复杂手势。在所示出的实现方式中,两个同时滑动手势中的第一个在所述边缘显示段303上的接触点上开始并在所述第一显示段上结束,而所述两个同时滑动手势中的第二个在所述边缘显示段303上的相同接触点上开始并在所述第二显示段302上结束。内角1405是在所述两个同时滑动手势之间形成的角。
图15示出了跨段复合滑动手势的表1500,所述跨段复合滑动手势用于图4所示折叠角305的五个预定义范围中的每一个。表1500包括与图4所示折叠角305的五个预定义范围(即所述可折叠设备的五个状态)中的每一个对应的行。表1500示出了,对于折叠角305的五个预定义范围中的每一个,跨段单滑动手势是有效手势(以“是”表示)还是无效手势(以“否”表示)。表1500还包括一列(以标题“示例性用例”表示),所述列示出了,对于折叠角305的五个预定义范围中的每一个,在所述可折叠设备100上运行的软件应用程序或OS执行的示例性操作。
如表1500所示,当所述折叠角305的值介于0°和A1之间时(即,所述可折叠设备100处于所述折叠状态时),跨段复合滑动手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的软件应用程序或OS执行与所述跨段滑动手势关联的操作。在表1500中,所述软件应用程序或所述OS执行的所述操作包括在所述第一显示段301上呈现用于共享选项的UI元素。
表1500示出了,当所述折叠角305的值介于A1和A2之间(当A2<90°时,即,当所述可折叠设备100处于所述第一不稳定帐篷状态时)或介于A3和A4之间(即,当所述可折叠设备100处于所述第二不稳定帐篷状态时)时,跨段复合滑动手势是无效输入手势。
表1500还示出了,当所述折叠角305的值介于A2和A3之间(当A3≥90°时),跨段复合滑动手势是有效手势。在这种情况下,在所述可折叠设备100上运行的软件应用程序或OS执行与所述跨段复合滑动手势关联的操作,所述操作包括合并在所述第一显示段301和所述第二显示段302上显示的信息。
表1500还示出了,当所述折叠角305的值介于A4和180°之间时(即,确定所述可折叠设备100处于所述展开状态),跨段复合滑动手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的软件应用程序执行与所述跨段复合滑动手势关联的操作。在本实施例中,与所述跨段复合滑动手势关联的操作可以是与常规收缩手势关联的相同操作(例如,放大在整个所述柔性显示屏102上呈现的内容)。
图16示出了本发明各个方面提供的多段多滑动手势的示例性实现方式1602。如所述示例性实现方式1602中所示,可以在所述第一显示段301和所述第二显示段302上同时做出两个滑动手势。
图17示出了多段多滑动手势的表1700,所述多段多滑动手势用于图4所示折叠角305的五个预定义范围中的每一个。表1700包括与图4所示折叠角305的五个预定义范围(即所述可折叠设备的五个状态)中的每一个对应的行。表1700示出了,对于所述折叠角305的五个预定义范围中的每一个,多段多滑动手势是有效手势(以“是”表示)还是无效手势(以“否”表示)。表1500还包括一列(以标题“示例性用例”表示),所述列示出了,对于折叠角305的五个预定义范围中的每一个,在所述可折叠设备100上运行的软件应用程序或OS执行的示例性操作。
如表1700所示,当所述折叠角305的值介于0°和A1之间时(即,所述可折叠设备100处于所述折叠状态时),多段多滑动手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的软件应用程序或OS执行与所述多段多滑动手势关联的操作,所述操作包括快速滚动同时在所述第一显示段301和所述第二显示段302上呈现的内容。
表1700还示出了,当所述折叠角305的值介于A1和A2之间时(A2<90°,即,当所述可折叠设备100处于所述第一不稳定状态时),多段多滑动手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的软件应用程序或OS执行与所述多段多滑动手势关联的操作,所述操作包括快速滚动同时在所述第一显示段301和所述第二显示段302上呈现的内容。
表1700还示出了,当所述折叠角305的值介于A2和A3之间(当A3≥90°时,即,当所述可折叠设备100处于所述稳定帐篷状态时),多段多滑动手势是有效输入手势。在这种情况下,在所述可折叠设备上运行的软件应用程序或OS执行与所述多段多滑动手势关联的操作,所述操作包括快速滚动或大幅度的缩放同时在所述第一显示段301和所述第二显示段302上显示的内容。
表1700还示出了,当所述折叠角305的值介于A3和A4之间时(即,所述可折叠设备100处于所述第二不稳定帐篷状态),多段多滑动手势是无效输入手势。
表1700还示出了,当所述折叠角305的值介于A4和180°之间时(即,所述可折叠设备100处于所述展开状态时),多段多滑动手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的软件应用程序或OS执行与所述多段多滑动手势关联的操作。在本实施例中,与所述跨段复合滑动手势关联的操作可以是常规操作系统(例如安卓TM OS)针对常规双指滑动手势所关联的相同操作。
图18示出了旋转手势的表1800,所述旋转手势用于图4所示折叠角305的五个预定义范围中的每一个。表1800包括与图4所示折叠角305的五个预定义范围(即所述可折叠设备的五个状态)中的每一个对应的行。表1800示出了,针对所述折叠角305的五个预定义范围中的每一个,当在所述第一显示段301和所述第二显示段302(如标题为“主显示段(301、302)”的列中所示)中的一个上检测到旋转手势时,或者当在所述边缘显示段303(如标题为“边缘(303)”的列中所示)上检测到旋转手势时,所述旋转手势是有效手势(以“是”表示)还是无效手势(以“否”表示)。表1800还示出了,对于折叠角305的五个预定义范围中的每一个,当所述旋转手势是有效输入手势并且在所述第一显示段301和所述第二显示段302中的一个上检测到所述旋转手势时,在所述可折叠设备100上运行的软件应用程序或OS执行的操作(如标题为“主显示段(301、302)”的列旁边、标题为“用例示例”的列中所示);或是,当所述旋转手势是有效输入手势并且在所述边缘显示段303上检测到所述旋转手势时,在所述可折叠设备100上运行的软件应用程序或OS执行的操作(如标题为“边缘(303)”的列旁边、标题为“用例示例”的列中所示)。
表1800示出了,当所述折叠角305的值介于0°和A1之间时(即,当所述可折叠设备100处于所述折叠状态时),旋转手势是无效输入手势。表1800还示出了,当所述折叠角305的值介于A1和A2之间(当A2≤90°时,即,当所述可折叠设备100处于所述第一不稳定帐篷状态时),并且在所述第一显示段301和所述第二显示段302中的一个上完全检测到旋转手势时,所述旋转手势是有效输入手势。在这种情况下,在所述可折叠设备上运行的软件应用程序(例如,照片应用程序)执行与所述第一显示段301和所述第二显示段302中检测到所述旋转手势的一个上的所述旋转手势关联的操作(例如,旋转在所述第一显示段301和所述第二显示段302中的一个上呈现的照片)。
表1800还示出了,当所述折叠角305的值介于A2和A3之间(当A3≥90°时,即,当所述可折叠设备100处于所述稳定帐篷状态时),并且在所述第一显示段301和所述第二显示段302中的一个上完全检测到旋转手势时,所述旋转手势是有效输入手势。在这种情况下,在所述可折叠设备上运行的软件应用程序(例如,照片应用程序)执行与所述第一显示段301和所述第二显示段302中检测到所述旋转手势的一个上的所述旋转手势关联的操作(例如,旋转在所述第一显示段301和所述第二显示段302中的一个上呈现的照片)。
表1800还示出了,当所述折叠角305的值介于A2和A3之间(当A3≥90°时,即,当所述可折叠设备100处于所述稳定帐篷状态时),并且在所述边缘显示段303上完全检测到旋转手势时,所述旋转手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的软件应用程序或OS执行与所述边缘显示段303上的旋转手势关联的操作。例如,所述OS可以将操作与用于所述边缘显示段的旋转手势关联,所述操作使得所述第一显示段301上呈现的GUI与所述第二显示段302上呈现的GUI进行交换,反之亦然。
表1800还示出了,当所述折叠角305的值介于A3和A4之间(即,所述可折叠设备100处于所述第一不稳定帐篷状态),并且在所述第一显示段301和所述第二显示段302中的一个上完全检测到旋转手势时,所述旋转手势是有效输入手势。在这种情况下,在所述可折叠设备100上运行的软件应用程序或OS执行与所述第一显示段301和所述第二显示段302中的一个上的所述旋转手势关联的操作。例如,所述OS可以将操作与所述第一显示段301和所述第二显示段302中的一个上的所述旋转手势关联,所述操作使得所述OS从在所述第一显示段301和所述第二显示段302中的一个上呈现所述可折叠设备100上运行的第一软件应用程序的内容,切换为呈现第二软件应用程序的内容。
表1800还示出了,当所述折叠角305的值介于A3和A4之间时,并且在所述边缘显示段303上完全检测到旋转手势时,所述旋转手势是有效手势。在这种情况下,所述OS执行操作,所述操作包括将在所述第一显示段301上呈现的UI与在所述第二显示段302上呈现的UI进行交换,反之亦然。
表1800还示出了,当所述折叠角305的值介于A4和180°之间(例如,当所述可折叠设备100处于所述展开状态时),并且在所述第一显示段301和所述第二显示段302中的一个上完全检测到旋转手势时,所述旋转手势是有效输入手势。在这种情况下,在所述可折叠设备上运行的软件应用程序(例如,照片应用程序)执行与所述第一显示段301和所述第二显示段302中检测到所述旋转手势的一个上的所述旋转手势关联的操作(例如,旋转在所述第一显示段301和所述第二显示段302中的一个上呈现的照片)。
表1800还示出了,当所述折叠角305的值介于A4和180°之间(例如,当所述可折叠设备100处于所述展开状态时),并且在所述边缘显示段303上完全检测到旋转手势时,所述旋转手势是有效输入手势。在这种情况下,在所述可折叠设备上运行的软件应用程序(例如,照片应用程序)执行与检测到所述旋转手势的所述边缘显示段303上的所述旋转手势关联的操作(例如,旋转在所述边缘显示段303上呈现的照片)。
图19示出了本发明各个方面提供的由可折叠设备100执行的方法1900的示例性实施例。所述方法1900可以在软件中实现,例如包括手势识别系统206的所述可折叠设备100的操作系统。所述软件包括计算机可读指令,所述计算机可读指令存储在所述可折叠设备100的存储器204中,并且所述可折叠设备100的处理器202可以执行所述计算机可读指令。对于本领域的普通技术人员来说,本发明中用于执行所述方法1900的软件的编码完全在其能力范围内。所述方法1900包含的操作可以多于或少于本文所示或所描述的操作,并且可以按不同的顺序执行所述操作。在一些实施例中,可以将实现所述方法1900的软件的计算机可读指令存储在计算机可读介质中。应当理解的是,所述方法1900不需要以图19所示的确切顺序执行,并且所述方法1900的各种操作可以并行执行而不是依次执行。
所述方法1900从操作1902开始。在操作1902中,所述处理器202从折叠检测器208接收指示所述可折叠设备100的折叠角305的数据,并根据指示所述可折叠设备100的所述折叠角305的所述数据来确定所述可折叠设备100的折叠状态。所述处理器202可以向所述折叠检测器208传输获取所述折叠角305的请求,并且作为响应,接收指示所述折叠角305的值的数据。或者,所述折叠检测器208可以持续监测所述折叠角305,并周期性地向所述处理器202传输指示所述折叠角305的更新值的数据。在一些示例中,所述折叠检测器208可以仅在所述检测到的折叠角305发生显著变化(例如,大于5度的变化)时,才传输指示所述折叠角305的值的数据。
在所述折叠检测器208的一种实现方式中,所述折叠检测器208通过以下方式检测折叠角305:检测所述可折叠设备100的一侧(非显示侧)的一部分与所述可折叠设备100的另一侧的接近度。
在所述折叠检测器208的另一种实现方式中,所述折叠检测器208使用光学装置检测折叠角305。在所述折叠检测器208的另一种实现方式中,所述折叠检测器208使用雷达形式检测折叠角305。
在所述折叠检测器208的又一种实现方式中,所述折叠检测器208可以使用配备信号发射器-接收器对的接近传感器或深度传感器来检测折叠角305。在一些实施例中,所述折叠检测器208可以使用来自所述可折叠设备100上的一个或多个传感器(例如加速度计和/或陀螺仪传感器)的电子数据,根据所述可折叠设备100的方向来确定折叠角305。
在所述折叠检测器208的又一种实现方式中,所述折叠检测器208可以使用弯曲传感器检测折叠角305;所述弯曲传感器可附接在所述可折叠设备100的可折叠边缘(例如,附接在所述边缘显示段303的所述非显示侧)。当折叠所述可折叠设备100时,所述弯曲传感器可以根据阻力读数测量偏转量或弯曲量;所述弯曲传感器作为所述可折叠设备100的所述可折叠边缘的一部分,所述阻力读数与所述弯曲传感器的弯曲程度成比例。
根据所述检测到的折叠角305,所述手势识别系统206可以确定所述可折叠设备100的所述折叠状态(例如,如图4所示)。
然后,所述方法继续执行操作1904。在操作1904中,所述处理器202根据所述检测到的折叠角305定义一个或多个显示段(301、302和303)。也就是说,所述处理器202可以确定所述第一边界313和所述第二边界323的位置。值得注意的是,所述边界(313、323)不必是直的。此外,根据所述可折叠设备100的所述折叠角305,可能不需要定义所述显示段(301、302、303)和所述边界(313、323)。例如,当所述可折叠设备100处于展开状态时,所述柔性显示屏102可以不需要作为分段显示屏来控制。
在1906中,作为可选步骤,所述处理器202根据所述可折叠设备100的所述折叠状态,调整在所述三个显示段(301、302、303)上呈现的图形用户界面(graphical userinterface,GUI)。在一些实施例中,为了确保在所述边缘显示段303上的GUI中呈现的UI元素可见性,在所述可折叠设备100上运行的所述软件应用程序或所述OS可以根据所述可折叠设备100的所述折叠状态,动态地调整UI元素的位置、方向或视觉外观。例如,当所述OS接收到指示所述可折叠设备100处于帐篷状态的状态信息时,可以在所述边缘显示部分303上呈现一个或多个GUI控件,供用户控制所述可折叠设备100。
然后,所述方法1900继续执行操作1908。在1908中,所述处理器202可以检测所述可折叠设备100的显示段(301、302、303)上的输入手势,并确定所述输入手势是简单输入手势还是复杂输入手势。例如,所述处理器202可以跟踪用户的手指在所述可折叠设备100的所述显示段(301、302、303)中的一个或多个上的移动,以便确定输入参数,例如手指的数量、方向、力度、速度,以及所述检测到的输入手势的触摸持续时间。这些输入参数可用于确定所述检测到的输入手势是简单输入手势还是复杂输入手势。这些输入参数还可以用于确定与所述检测到的输入手势对应的手势类型。在一些实施例中,可以根据所述输入参数,确定所述检测到的输入手势是对应于以下手势类型中的一项的简单输入手势:点击手势、用力按手势、旋转手势、收缩手势或缩放手势。在一些实施例中,可以根据所述输入参数,确定所述检测到的输入手势是对应于以下复杂输入手势类型中的一项的复杂输入手势:跨段单滑动、跨段双滑动、跨段复合滑动和多段滑动。在一些实施例中,可以通过跟踪所述第一显示段301、所述第二显示段302和所述边缘显示段303中的一个或多个上的各个滑动手势,检测复杂输入手势。
然后,所述方法1900继续执行操作1910。在操作1910中,所述处理器202从存储器204检索与所述可折叠设备100的所述折叠状态对应的可用输入手势集(即,与所述可折叠设备100的所述折叠角所属折叠角范围对应的可用输入手势集)。在一些实施例中,从存储器204检索的所述可用输入手势集包括:与所述可折叠设备100的所述折叠状态对应的可用输入手势的第一子集和第二子集。
然后,所述方法1900继续执行操作1912。在操作1912中,所述处理器202确定所述检测到的输入手势是有效输入手势还是无效输入手势。当在操作1908中确定所述检测到的输入手势是简单输入手势时,所述处理器202按如下方式确定与所述检测到的输入手势对应的所述手势类型是有效输入手势还是无效输入手势。首先,所述处理器202确定所述检测到的简单输入手势是在所述第一显示段301、所述第二显示段302和所述第三显示段303中的哪个显示段上检测到的。当确定在所述第一显示段301和所述第二显示段302中的一个上检测到所述检测到的简单输入手势时,所述处理器202确定与所述可折叠设备100的所述确定的折叠状态对应的所述可用输入手势的所述第一子集是否包括与所述检测到的简单输入手势对应的所述手势类型。当所述处理器202确定与所述可折叠设备100的所述确定的折叠状态对应的所述可用输入手势的所述第一子集包括与所述简单输入手势对应的所述手势类型时,所述处理器确定所述检测到的简单输入手势是有效输入手势,并且所述方法继续执行操作1914。
当确定在所述边缘显示段303上检测到所述简单输入手势时,所述处理器202确定与所述可折叠设备100的所述确定的折叠状态对应的可用输入手势的所述第二子集是否包括与所述简单输入手势对应的所述手势类型。当所述处理器202确定与所述可折叠设备100的所述确定的折叠状态对应的可用输入手势的所述第二子集包括与所述检测到的简单输入手势对应的所述手势类型时,所述处理器202确定所述检测到的简单输入手势是有效输入手势,并且所述方法继续执行操作1914。
当确定在所述第一显示段301和所述第二显示段302中的一个上检测到所述简单输入手势,并且所述处理器202确定与所述可折叠设备100的所述确定的折叠状态对应的所述可用输入手势的所述第一子集不包括与所述简单输入手势对应的所述手势类型时,所述处理器202确定所述检测到的简单输入手势是无效输入手势,并且所述方法继续执行操作1916。
当确定在所述边缘显示段303上检测到所述简单输入手势,并且所述处理器202确定与所述可折叠设备100的所述确定的折叠状态对应的可用输入手势的所述第二子集不包括与所述简单输入手势对应的所述手势类型时,所述处理器202确定所述检测到的简单输入手势是无效输入手势,并且所述方法继续执行操作1916。
当在操作1908中确定所述检测到的输入手势是复杂输入手势时,在操作1912中,所述处理器202按如下方式确定与所述检测到的复杂输入手势对应的所述手势类型是有效输入手势还是无效输入手势。首先,所述处理器202检索与所述可折叠设备100的所述确定的折叠状态对应的可用输入手势集。然后,所述处理器202确定与所述可折叠设备100的所述确定的折叠状态对应的所述可用输入手势集是否包括与所述复杂输入手势对应的所述检测到的复杂输入手势。当所述处理器202确定与所述可折叠设备100的所述确定的折叠状态对应的所述可用输入手势集包括与所述复杂输入手势对应的所述手势类型时,所述处理器202确定所述检测到的复杂输入手势是有效输入手势,并且所述方法继续执行操作1914。当所述处理器202确定与所述可折叠设备100的所述确定的折叠状态对应的所述可用输入手势集不包括与所述复杂输入手势对应的所述手势类型时,所述处理器202确定所述检测到的复杂输入手势是无效输入手势,并且所述方法继续执行操作1916。
在操作1914中,在确定所述检测到的输入手势是有效输入手势时,所述处理器202如上所述向在所述可折叠设备100上运行的软件应用程序或OS提供与所述检测到的输入手势对应的所述手势类型、所述可折叠设备100的所述折叠状态和所述显示信息。在接收到与所述检测到的输入手势对应的手势类型、所述可折叠设备的所述折叠状态和所述显示信息后,根据与所述检测到的手势对应的所述手势类型、所述可折叠设备100的所述折叠状态和所述显示信息,所述可折叠设备100上运行的所述软件应用程序或所述OS确定要执行的操作。也就是说,所述处理器202可以根据所述可折叠设备100的所述折叠状态和所述显示信息,执行与对应于所述检测到的输入手势的所述手势类型关联的任何操作,如上文结合图5至图8、图11、图13、图15和图17所述。
在一些实施例中,调整在刚刚检测到所述有效手势的所述显示段(301、302、303)上呈现的UI元素,以响应所述有效输入手势,而其它显示段中的所述UI元素保持不变。例如,在边缘显示段303上接收到滑动手势时,仅响应于所述检测到的有效输入手势修改在所述边缘显示段303上呈现的UI元素,而所述第一显示段301和所述第二显示段302保持不变。作为另一个示例,如果在所述第一显示段301和所述边缘显示段303上检测到跨段双滑动手势(例如,参见图12),并且确定所述跨段双滑动手势是有效输入手势,则当接收到所述跨段双滑动手势和指示所述可折叠设备100的所述折叠状态的状态信息时,在所述可折叠设备100上运行的软件应用程序或OS可以调整在所述第一显示段301和所述边缘显示段303两个显示段上呈现的UI元素。在第二显示段302上的GUI中呈现的UI元素保持不变。
在操作1916中,在确定(在操作1912中)与所述折叠状态100对应的所述可用输入手势集不包括所述检测到的手势时,所述处理器202忽略所述检测到的输入手势(即,不向在所述可折叠设备100上运行的软件应用程序或OS提供与所述检测到的输入手势对应的所述手势类型)。
接着,所述方法1900可以在操作1910中继续检测下一个输入手势(例如,第二输入手势),并且在1912中继续确定与所述可折叠设备100的所述折叠状态对应的所述可用输入手势集是否包括所述第二输入手势。每当所述处理器202检测到新的输入手势时,可以迭代和重复此过程(即,步骤1910至步骤1914或步骤1916)。
尽管本发明描述了某些组件和物理实体执行的功能,但是应当理解的是,在分布式系统中,所述过程中的一些或全部过程可以分布在多个组件和实体中,并且可以在所述分布式系统上执行所述过程的多个实例。
尽管本发明利用呈某种顺序的步骤描述方法和过程、但所述方法和过程的一个或多个步骤可视情况省略或更改、一个或多个步骤视情况可以按除了所描述顺序以外的顺序进行。
尽管就方法而言至少部分地描述了本发明,但本领域普通技术人员将理解,本发明还涉及用于执行所描述的方法的至少一些方面和特征的各种组件,无论是通过硬件组件、软件或两者的任何组合。因此,本发明的技术方案可以以软件产品的形式体现。合适的软件产品可以存储在预先记录的存储设备或其它类似的非易失性或非瞬时性计算机可读介质中,包括DVD、CD-ROM、USB闪存盘、移动硬盘或其它存储介质等。所述软件产品包括有形地存储在其上的指令,这些指令使处理设备(例如,个人计算机、服务器或网络设备)能够执行本文中所公开的方法示例。
本发明可以在不脱离权利要求书的主题的情况下以其它特定形式体现。所描述的示例性实施例在所有方面均被视为仅是说明性的而非限制性的。可以对上述一个或多个实施例中的选定特征进行组合,以创建未明确描述的替代实施例,适合此类组合的特征均理解为落入本发明的范围内。
还公开了所公开范围内的所有值和子范围。此外,虽然本文所公开和示出的系统、设备和过程可以包括特定数量的元件/组件,但是可以修改这些系统、设备和组件以包括更多或更少此类元件/组件。例如,虽然所公开的任何元件/组件可以为单个数量,但是可以修改本文所公开的实施例以包括多个此类元件/组件。本文所述的主题意在涵盖和包括技术上的所有合适更改。

Claims (20)

1.一种方法,其特征在于,所述方法包括:
根据可折叠设备的折叠角,确定所述可折叠设备的折叠状态;
检测所述可折叠设备的柔性显示屏的一个或多个触敏显示段上的输入手势;
确定与所述检测到的输入手势对应的手势类型;
确定所述检测到的输入手势是有效手势还是无效手势;
响应于确定所述检测到的输入手势是有效手势,向所述可折叠设备的软件应用程序或操作系统提供与所述检测到的手势对应的所述手势类型、所述可折叠设备的所述折叠状态和显示信息。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:响应于确定所述检测到的输入手势的所述手势类型是无效手势,忽略所述检测到的输入手势。
3.根据权利要求1或2所述的方法,其特征在于,确定所述检测到的输入手势是有效输入手势还是无效输入手势包括:
检索与所述可折叠设备的所述折叠状态对应的可用输入手势集;
响应于确定与所述可折叠设备的所述折叠状态对应的所述可用输入手势集包含所述检测到的输入手势,确定所述检测到的输入手势是有效输入手势。
4.根据权利要求1至3中任一项所述的方法,其特征在于,检测所述可折叠设备的所述柔性显示屏的所述一个或多个触敏显示段上的输入手势包括:仅检测所述触敏显示段中的一个上的手势;确定与所述检测到的输入手势对应的手势类型包括:确定所述输入手势是简单输入手势。
5.根据权利要求4所述的方法,其特征在于,所述简单输入手势是以下各项中的一项:点击手势、用力按手势、滑动手势、旋转手势、缩放手势和收缩手势。
6.根据权利要求1至5中任一项所述的方法,其特征在于,确定所述检测到的输入手势是有效输入手势还是无效输入手势包括:
确定所述检测到的输入手势是在所述触敏显示段中的哪一个上检测到的;
对于在其上检测到所述检测到的输入手势的所述一个显示段,当与所述可折叠设备的所述折叠状态对应的所述可用输入手势集的子集包含所述检测到的输入手势时,确定所述检测到的输入手势是有效输入手势。
7.根据权利要求1至3中任一项所述的方法,其特征在于,检测所述可折叠设备的所述柔性显示屏的所述一个或多个触敏显示段上的输入手势包括:检测所述触敏显示段中的至少两个上的手势;确定与所述检测到的输入手势对应的手势类型包括:确定所述输入手势是复杂输入手势。
8.根据权利要求7所述的方法,其特征在于,所述复杂输入手势是以下各项中的一项:跨段单滑动手势、跨段双滑动手势、跨段复合滑动手势、多段多滑动手势。
9.根据权利要求1至8中任一项所述的方法,其特征在于,检测所述可折叠设备的所述柔性显示屏的所述一个或多个触敏显示段上的输入手势包括:检测用于所述检测到的输入手势的输入参数;根据用于所述检测到的输入手势的所述输入参数来确定与所述检测到的输入手势对应的所述手势类型。
10.一种可折叠设备,其特征在于,所述可折叠设备包括:
折叠检测器,用于检测所述可折叠设备的折叠角;
柔性显示屏,包括一个或多个触敏显示段;
处理器;
存储器,用于存储指令,在所述处理器执行所述指令时,使所述可折叠设备执行以下操作:
根据所述可折叠设备的所述折叠角,确定所述可折叠设备的折叠状态;
检测所述可折叠设备的所述柔性显示屏的所述一个或多个触敏显示段上的输入手势;
确定与所述检测到的输入手势对应的手势类型;
确定所述检测到的输入手势是有效手势还是无效手势;
响应于确定所述检测到的输入手势是有效手势,向所述可折叠设备的软件应用程序或操作系统提供与所述检测到的手势对应的所述手势类型、所述可折叠设备的所述折叠状态和显示信息。
11.根据权利要求10所述的可折叠设备,其特征在于,所述存储器存储其它指令,当所述处理器执行所述其它指令时,使所述可折叠设备响应于确定所述检测到的输入手势的所述手势类型是无效手势,忽略所述检测到的输入手势。
12.根据权利要求10或11所述的可折叠设备,其特征在于,通过以下方式确定所述输入手势是有效输入手势还是无效输入手势:
检索与所述可折叠设备的所述折叠状态对应的可用输入手势集;
响应于确定与所述可折叠设备的所述折叠状态对应的所述可用输入手势集包含所述检测到的输入手势,确定所述检测到的输入手势是有效输入手势。
13.根据权利要求10至12中任一项所述的可折叠设备,其特征在于,通过以下方式确定所述可折叠设备的所述柔性显示屏的所述一个或多个触敏显示段上的输入手势:仅检测所述触敏显示段中的一个上的手势;通过确定所述检测到的输入手势是简单输入手势,确定与所述输入手势对应的手势类型。
14.根据权利要求13所述的可折叠设备,其特征在于,所述简单输入手势是以下各项中的一项:点击手势、用力按手势、滑动手势、旋转手势、缩放手势和收缩手势。
15.根据权利要求10至14中任一项所述的可折叠设备,其特征在于,通过以下方式确定所述检测到的输入手势是有效输入手势还是无效输入手势:
确定所述检测到的输入手势是在所述触敏显示段中的哪一个上检测到的;
对于在其上检测到所述检测到的输入手势的所述一个显示段,当与所述可折叠设备的所述折叠状态对应的所述可用输入手势集的子集包含所述检测到的输入手势时,确定所述检测到的输入手势是有效输入手势。
16.根据权利要求10至12中任一项所述的可折叠设备,其特征在于,通过以下方式检测所述可折叠设备的所述柔性显示屏的所述一个或多个触敏显示段上的输入手势:检测所述触敏显示段中的至少两个上的手势;通过确定所述检测到的输入手势是复杂输入手势,确定与所述输入手势对应的手势类型。
17.根据权利要求16所述的可折叠设备,其特征在于,所述复杂输入手势是以下各项中的一项:跨段单滑动手势、跨段双滑动手势、跨段复合滑动手势、多段多滑动手势。
18.根据权利要求10至17中任一项所述的可折叠设备,其特征在于,通过以下方式检测所述可折叠设备所述柔性显示屏的所述一个或多个触敏显示段上的输入手势:检测用于所述检测到的输入手势的输入参数;根据用于所述检测到的输入手势的所述输入参数来确定与所述检测到的输入手势对应的所述手势类型。
19.一种存储指令的计算机可读介质,其特征在于,在可折叠设备的处理器执行所述指令时,使所述可折叠设备执行根据权利要求1至9中任一项所述的方法。
20.一种包含指令的计算机程序,其特征在于,在可折叠设备的处理器执行所述指令时,使所述可折叠设备执行根据权利要求1至9中任一项所述的方法。
CN202080100610.2A 2020-05-15 2020-10-26 用于处理在可折叠设备显示屏上检测到的手势的方法和系统 Pending CN115516418A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US16/875,957 2020-05-15
US16/875,957 US11481035B2 (en) 2020-05-15 2020-05-15 Method and system for processing gestures detected on a display screen of a foldable device
PCT/CN2020/123490 WO2021227370A1 (en) 2020-05-15 2020-10-26 Method and system for processing gestures detected on display screen of foldable device

Publications (1)

Publication Number Publication Date
CN115516418A true CN115516418A (zh) 2022-12-23

Family

ID=78512360

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080100610.2A Pending CN115516418A (zh) 2020-05-15 2020-10-26 用于处理在可折叠设备显示屏上检测到的手势的方法和系统

Country Status (5)

Country Link
US (1) US11481035B2 (zh)
EP (1) EP4139783A4 (zh)
KR (1) KR20230007515A (zh)
CN (1) CN115516418A (zh)
WO (1) WO2021227370A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200132008A (ko) * 2019-05-15 2020-11-25 삼성전자주식회사 전자 장치 및 그의 알림 제공 방법
CN112130740B (zh) * 2019-06-24 2023-08-11 中兴通讯股份有限公司 一种屏幕显示方法及装置
US11722762B2 (en) * 2020-09-01 2023-08-08 Motorola Mobility Llc Face tracking dual preview system

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8544722B2 (en) * 2008-08-29 2013-10-01 The Invention Science Fund I, Llc Bendable electronic interface external control system and method
KR20100065418A (ko) * 2008-12-08 2010-06-17 삼성전자주식회사 가요성 표시부를 가지는 단말기 및 그의 데이터 표시 방법
US20110069021A1 (en) * 2009-06-12 2011-03-24 Hill Jared C Reducing false touchpad data by ignoring input when area gesture does not behave as predicted
US8997025B2 (en) * 2010-11-24 2015-03-31 Fuji Xerox Co., Ltd. Method, system and computer readable medium for document visualization with interactive folding gesture technique on a multi-touch display
KR101889838B1 (ko) * 2011-02-10 2018-08-20 삼성전자주식회사 터치 스크린 디스플레이를 구비한 휴대 기기 및 그 제어 방법
JP5661547B2 (ja) 2011-04-26 2015-01-28 京セラ株式会社 携帯端末装置およびプログラム
US20130080932A1 (en) * 2011-09-27 2013-03-28 Sanjiv Sirpal Secondary single screen mode activation through user interface toggle
JP2013117885A (ja) * 2011-12-02 2013-06-13 Nintendo Co Ltd 情報処理プログラム、情報処理装置、情報処理システム及び情報処理方法
KR101661526B1 (ko) * 2012-04-08 2016-10-04 삼성전자주식회사 플렉서블 디스플레이 장치 및 그 ui 방법
US9575708B2 (en) * 2012-05-14 2017-02-21 Lg Electronics Inc. Portable device and method for controlling the same
KR101515623B1 (ko) 2012-05-14 2015-04-28 삼성전자주식회사 벤디드 디스플레이를 갖는 휴대단말의 기능 운용 방법 및 장치
KR102104588B1 (ko) * 2012-07-11 2020-04-24 삼성전자주식회사 플렉서블 디스플레이 장치 및 그 동작 방법
KR101916416B1 (ko) * 2012-07-30 2018-11-08 삼성전자주식회사 플렉서블 디스플레이 장치 및 그 디스플레이 방법
KR102016119B1 (ko) * 2012-08-01 2019-08-30 삼성전자주식회사 플렉서블 디스플레이 장치 및 그 제어 방법
KR102004409B1 (ko) * 2012-08-23 2019-07-29 삼성전자주식회사 플렉서블 디스플레이 장치 및 그 제어 방법
KR102215080B1 (ko) * 2012-09-17 2021-02-10 삼성전자주식회사 플렉서블 디스플레이 장치 및 플렉서블 디스플레이 장치의 제어 방법
US20150212647A1 (en) * 2012-10-10 2015-07-30 Samsung Electronics Co., Ltd. Head mounted display apparatus and method for displaying a content
US20140132626A1 (en) * 2012-11-09 2014-05-15 Samsung Electronics Co., Ltd. Content delivery system with folding mechanism and method of operation thereof
US20140215382A1 (en) * 2013-01-25 2014-07-31 Agilent Technologies, Inc. Method for Utilizing Projected Gesture Completion to Improve Instrument Performance
US9019170B2 (en) 2013-03-14 2015-04-28 Lg Electronics Inc. Display device and method for controlling the same
KR102131825B1 (ko) 2013-03-20 2020-07-09 엘지전자 주식회사 적응적 터치 센서티브 영역을 제공하는 폴더블 디스플레이 디바이스 및 그 제어 방법
US9524030B2 (en) * 2013-04-26 2016-12-20 Immersion Corporation Haptic feedback for interactions with foldable-bendable displays
KR102119843B1 (ko) * 2014-02-10 2020-06-05 삼성전자주식회사 사용자 단말 장치 및 이의 디스플레이 방법
KR20160013748A (ko) * 2014-07-28 2016-02-05 엘지전자 주식회사 휴대 전자기기 및 그것의 제어방법
KR102317525B1 (ko) * 2014-09-05 2021-10-26 엘지전자 주식회사 휴대 전자기기 및 그것의 제어방법
KR20160066873A (ko) 2014-12-03 2016-06-13 삼성전자주식회사 디스플레이 제어방법 및 그 전자 장치
US10254863B2 (en) * 2014-12-19 2019-04-09 Lg Electronics Inc. Mobile terminal
WO2016108439A1 (en) 2014-12-29 2016-07-07 Samsung Electronics Co., Ltd. Foldable device and method of controlling the same
KR20160088764A (ko) * 2015-01-16 2016-07-26 삼성전자주식회사 플렉서블 디바이스 및 그 동작 방법
US9807213B2 (en) * 2015-07-31 2017-10-31 Motorola Mobility Llc Apparatus and corresponding methods for form factor and orientation modality control
TWI628569B (zh) 2015-09-30 2018-07-01 蘋果公司 具有適應性輸入列之鍵盤
EP3493034A4 (en) * 2016-07-27 2020-04-08 Shenzhen Royole Technologies Co., Ltd. DISPLAY INTERFACE CONTROL METHOD AND DEVICE FOR MALFUNCTION PREVENTION, AND TERMINAL
EP3549007A4 (en) * 2017-05-23 2020-01-15 Samsung Electronics Co., Ltd. METHOD AND SYSTEM FOR OPERATING A FLEXIBLE COMPUTING DEVICE
US20190012000A1 (en) * 2017-07-05 2019-01-10 Motorola Mobility Llc Deformable Electronic Device with Methods and Systems for Controlling the Deformed User Interface
KR20190100795A (ko) 2018-02-21 2019-08-29 삼성전자주식회사 광학 센서를 포함하는 플렉서블 전자 장치 및 그 동작 방법
KR102638783B1 (ko) 2018-10-17 2024-02-22 삼성전자주식회사 폴딩 각도에 따라 어플리케이션을 제어하기 위한 전자 장치 및 그에 관한 방법
KR102650857B1 (ko) * 2018-12-17 2024-03-26 삼성전자 주식회사 폴더블 전자 장치 및 폴더블 전자 장치에서 터치 입력을 감지하는 방법
KR20200088997A (ko) * 2019-01-16 2020-07-24 삼성전자주식회사 감겨질 수 있는 플렉서블 디스플레이에서 표시되는 화면을 제어하기 위한 전자 장치 및 방법
EP3699738B1 (en) * 2019-02-19 2024-03-27 Samsung Electronics Co., Ltd. Electronic device and display control method thereof
KR20200122725A (ko) * 2019-04-18 2020-10-28 삼성전자주식회사 분할 화면을 제공하기 위한 객체를 표시하는 전자 장치 및 방법

Also Published As

Publication number Publication date
KR20230007515A (ko) 2023-01-12
WO2021227370A1 (en) 2021-11-18
US20210357034A1 (en) 2021-11-18
EP4139783A4 (en) 2023-10-25
EP4139783A1 (en) 2023-03-01
US11481035B2 (en) 2022-10-25

Similar Documents

Publication Publication Date Title
US11599154B2 (en) Adaptive enclosure for a mobile computing device
CN105335001B (zh) 具有弯曲显示器的电子设备以及用于控制其的方法
US10921975B2 (en) Devices, methods, and user interfaces for conveying proximity-based and contact-based input events
US10775997B2 (en) Presentation of a control interface on a touch-enabled device based on a motion or absence thereof
EP2972727B1 (en) Non-occluded display for hover interactions
KR102090269B1 (ko) 정보 검색 방법, 그와 같은 기능을 갖는 디바이스 및 기록 매체
EP3232315B1 (en) Device and method for providing a user interface
CN115516418A (zh) 用于处理在可折叠设备显示屏上检测到的手势的方法和系统
US20090146968A1 (en) Input device, display device, input method, display method, and program
WO2021057337A1 (zh) 操作方法及电子设备
WO2016145883A1 (zh) 屏幕控制方法、终端和计算机存储介质
US10521101B2 (en) Scroll mode for touch/pointing control
US10684704B2 (en) Devices and method for manipulating user interfaces with stylus and non-stylus contacts
WO2018137276A1 (zh) 数据处理的方法及移动设备
US20210141511A1 (en) Systems And Methods for Gesture Input
CN111338521A (zh) 一种图标显示控制方法及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination