CN105190504A - 由陀螺仪和加速度计修改的基于触摸的手势 - Google Patents

由陀螺仪和加速度计修改的基于触摸的手势 Download PDF

Info

Publication number
CN105190504A
CN105190504A CN201380073287.4A CN201380073287A CN105190504A CN 105190504 A CN105190504 A CN 105190504A CN 201380073287 A CN201380073287 A CN 201380073287A CN 105190504 A CN105190504 A CN 105190504A
Authority
CN
China
Prior art keywords
mobile device
viewpoint
focus
computing equipment
orientation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201380073287.4A
Other languages
English (en)
Inventor
P·S·皮蒙特
M·范奥斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Computer Inc filed Critical Apple Computer Inc
Publication of CN105190504A publication Critical patent/CN105190504A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163Indexing scheme relating to constructional details of the computer
    • G06F2200/1637Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种包括触摸屏显示器的移动设备,所述移动设备呈现三维对象的图像。所述显示器能够并行呈现能够采用虚拟按钮形式的用户界面元素。在设备的用户经由触摸屏触摸并保持指尖与虚拟按钮接触时,移动设备能够在特殊模式下操作,其中围绕物理空间轴线物理倾斜移动设备使得移动设备调节显示器上三维对象图像的表示,使得在对象虚拟占据的虚拟空间中从不同视点呈现对象。移动设备能够基于来自被包含在设备内的陀螺仪和加速度计的反馈检测此类物理倾斜。

Description

由陀螺仪和加速度计修改的基于触摸的手势
优先权要求
本专利申请要求2013年2月19日提交的名称为“TOUCH-BASEDGESTURESMODIFIEDBYGYROSCOPEANDACCELEROMETER”的美国专利申请13/770,947的优先权。
背景技术
本公开总体涉及移动设备,并且具体地,涉及基于与那些移动设备的用户交互以用于操控移动设备用户界面的技术。
移动设备(也称为手持式设备、手持式计算机或简称手持设备)可以是小型手持式计算设备,通常具有显示屏,显示屏具有触摸输入和/或微型键盘。手持式计算设备具有操作系统(OS),并可以运行各种类型的应用软件,应用软件有时称为“应用”。大多手持设备还可以配有Wi-Fi、蓝牙和全球定位系统(GPS)功能。Wi-Fi部件可以允许无线连接到互联网。蓝牙部件可以允许无线连接到其他有蓝牙功能的设备,诸如汽车或麦克风耳机。在这些设备上,与稳定电池电源诸如锂电池一起,通常还可以发现用于视频或音乐文件的相机或媒体播放器特征部。移动设备通常配有触摸屏界面,其充当着输入和输出设备两者。
移动电话是一种移动设备。移动电话(也称为蜂窝电话、移动电话或手机)是一种在宽广地理区域内移动的同时能够通过无线电链路拨打和接听电话的设备。移动电话还可以通过连接到由移动电话运营商提供的蜂窝网络,允许接入到公共电话网络来这样做。除了电话之外,现代移动电话通常还能够支持多种其他服务,诸如文本消息、多媒体消息服务(MMS)、电子邮件、互联网接入、短程无线通信(红外、蓝牙等)、商业应用、游戏和摄影。提供这些和更一般的计算能力的移动电话通常被称为智能电话。
AppleiPhone在其各代中都是一种智能电话。iPhone包括多种部件,诸如GPS、加速度计、罗盘和陀螺仪,iPhone的OS能够使用多种部件以确定iPhone当前的位置、取向、速度和姿态。iPhone的OS能够从这些部件检测事件,并将这些事件传递到在iPhone上执行的应用。这些应用然后能够以对这些应用定制的方式处理事件。例如,利用其内置的部件,iPhone能够检测到其何时被摇动,并能够向注册侦听此类事件的应用传递表示摇动的事件。应用能够对该事件做出响应,例如,通过改变iPhone当前正在其触摸屏上呈现的图像。
像很多移动设备一样,iPhone及其同类产品iPad和iPodTouch配有触摸屏界面,其能够检测到来自移动设备的用户的物理接触并生成对应的事件。例如,iPhone能够检测到用户何时单击屏幕、双击屏幕、相对于屏幕做出捏指运动、在屏幕上做出扫动运动或在屏幕上利用其指尖做出轻弹运动。相对于iPhone的每种这样的用户交互都能够导致生成不同种类的对应事件,供感兴趣的应用消耗。因此,iPhone、iPad和iPodTouch能够检测到用户能够相对于那些设备采取的各种物理交互并做出响应。
移动设备的触摸屏通常是移动设备用户与触摸屏上显示的用户界面元素(例如,图标)交互的主要机制。因此,如果用户希望启动应用,用户可以在移动设备的显示器上示出的应用图标上轻敲。另选地,如果用户希望将图标在用户界面中从一个位置移动到另一个位置,用户可以在显示器上该图标位置处按下并然后在触摸屏上滑动其指尖,到达用户希望放置图标的目的地。更常规计算机诸如台式计算机的用户将可能使用诸如鼠标的独立指向设备来执行类似操作。
附图说明
图1是根据本发明的一个实施例的计算机系统的框图。
图2是示出了根据本发明的一个实施例的移动设备相对于物理空间轴线的初始物理取向的实例的框图,该物理空间轴线水平通过移动设备的触摸屏显示器的中心。
图3是示出了根据本发明的一个实施例的移动设备的相对于物理空间轴线的后续物理取向的实例的框图,该物理空间轴线水平通过移动设备的触摸屏显示器的中心。
图4是示出了根据本发明的一个实施例的技术的实例的流程图,该技术用于从取决于移动设备从初始物理取向沿水平轴线倾斜程度的角度在移动设备的显示器上呈现三维对象。
图5是示出了根据本发明一个实施例的移动设备相对于物理空间轴线的初始物理取向的实例的框图,该物理空间轴线垂直通过移动设备的触摸屏显示器的中心。
图6是示出了根据本发明的一个实施例的移动设备相对于物理空间轴线的后续物理取向的实例的框图,该物理空间轴线垂直通过移动设备的触摸屏显示器的中心。
图7是示出了根据本发明的一个实施例的技术的实例的流程图,该技术用于围绕焦点,以基于移动设备从初始物理取向沿垂直轴线倾斜程度而变化的方向和速度,连续旋转视点,从其角度重新呈现虚拟场景。
图8是示出了根据本发明的一个实施例的技术的流程图。
具体实施方式
本发明的实施例可涉及包括触摸屏显示器的移动设备,触摸屏显示器呈现三维对象的图像。该显示器能够并行呈现能够采用虚拟按钮形式的用户界面元素。在设备的用户通过触摸屏触摸并保持指尖与虚拟按钮接触时,移动设备能够在特殊模式下操作,其中围绕物理空间轴线物理倾斜移动设备使移动设备调节显示器上三维对象图像的表示,使得在对象虚拟占据的虚拟空间中从不同视点呈现对象。移动设备能够基于来自被包含在设备内的陀螺仪和加速度计的反馈检测到此类物理倾斜。
例如,在一个实施例中,在接触虚拟按钮的同时,移动设备能够在特殊模式下操作,其中设备沿水平地通过设备显示器的物理空间轴线的物理倾斜使设备相对于三维对象虚拟所处的虚拟平面以不同角度呈现三维对象。此类倾斜实质上能够根据倾斜是将显示器顶部或底部物理地移动远离还是靠近观察者,使设备将呈现视点相对于对象定位得更接近对象的顶视图或更接近侧视图,同时保持呈现视点距对象的虚拟距离恒定。
作为另一个实例,在一个实施例中,在接触虚拟按钮的同时,移动设备能够在特殊模式下操作,其中设备沿垂直通过设备显示器的物理空间轴线的物理倾斜使设备相对于垂直于对象虚拟所处的虚拟平面,通过三维对象的虚拟空间轴线,以不同角度呈现三维对象。此类倾斜实质上可能使设备在设备保持倾斜的时间内以某一速度,与倾斜反方向地连续围绕这一虚拟空间轴线相对于对象旋转呈现视点,同时保持呈现视点距对象的虚拟距离恒定,使得在旋转期间对象的各个不同侧面被呈现于显示器上。在设备恢复到倾斜之前设备所拥有的初始取向时,设备能够停止绕空间轴线连续旋转呈现视点,使得对象似乎停止了旋转。
在一个实施例中,上述特殊模式仅在保持指尖经由触摸屏接触虚拟按钮的同时才活动。在这样的实施例中,在特殊模式不活动的同时倾斜设备可能不导致对象如上所述以不同方式被呈现。然而,在本发明的另选实施例中,上述特殊模式始终是活动的。在此类另选实施例中,显示器可以完全省略虚拟按钮,倾斜设备能够使在显示对象的同时倾斜设备的任何时候以不同方式呈现对象。
以下具体描述连同附图将提供对本发明的实质和优点的更好理解。
图1示出了根据本发明的一个实施例的计算系统100。计算系统100可以实现为各种计算设备中的任一种,计算设备包括例如台式计算机或膝上型计算机、平板电脑、智能电话、个人数字助理(PDA)或任何其他类型的计算设备,不限于任何特定的形状因数。计算系统100可包括一个或多个处理单元105、存储系统110、输入设备120、显示器125、网络接口135和总线140。计算系统100可以是iPhone或iPad。
一个或多个处理单元105可包括具有一个或多个核的单个处理器,或多个处理器。在一些实施例中,一个或多个处理单元105可包括通用主处理器以及一个或多个专用协处理器,诸如图形处理器、数字信号处理器等。在一些实施例中,一些或全部处理单元105可使用定制电路诸如专用集成电路(ASIC)或现场可编程门阵列(FPGA)来实现。在一些实施例中,此类集成电路执行存储在电路自身上的指令。在其他实施例中,一个或多个处理单元105可执行存储在存储子系统110中的指令。
存储子系统110可包括各种存储器单元,诸如系统存储器、只读存储器(ROM)和永久性存储设备。ROM可存储一个或多个处理单元105以及计算系统100的其他模块所需的静态数据和指令。永久性存储设备可为读写存储器设备。该永久性存储设备可为甚至在计算系统100掉电时也存储指令和数据的非易失性存储器单元。本发明的一些实施例可将海量存储设备(诸如磁盘或光盘或闪存存储器)用作永久性存储设备。其他实施例可将可移除存储设备(例如软盘、闪存驱动器)用作永久性存储设备。系统存储器可为读写存储器设备或易失性读写存储器,诸如动态随机存取存储器。系统存储器可存储处理器在运行时需要的指令和数据中的一些或全部。
存储子系统110可包括计算机可读存储介质的任意组合,计算机可读存储介质包括各种类型的半导体存储器芯片(DRAM、SRAM、SDRAM、闪存存储器、可编程只读存储器)等。还可以使用磁盘和/或光盘。在一些实施例中,存储子系统110可以包括可读和/或可写的可移除存储介质;这种介质的实例包括光盘(CD)、只读数字多功能盘(例如DVDROM、双层DVDROM)、只读可刻录Blu盘、超级密度光盘、闪存卡(例如SD卡、迷你SD卡、微型SD卡等)、“软”磁盘等。计算机可读存储介质不包括无线地或通过有线连接传送的载波和暂态电子信号。
在一些实施例中,存储子系统110可存储将由一个或多个处理单元105执行的一个或多个软件程序。“软件”通常是指在被一个或多个处理单元105执行时使得计算系统100执行各种操作,从而定义对软件程序的操作进行执行和实施的一种或多种特定机器实施的指令序列。指令可存储为驻留在只读存储器中的固件和/或存储在磁性存储装置中的应用,该固件和/或应用可被读取到存储器中以供处理器处理。软件可以实现为单个程序或根据需要进行交互的独立程序或程序模块的集合。程序和/或数据可存储在非易失性存储装置中并在程序执行期间全部或部分地复制到易失性工作存储器中。一个或多个处理单元105可从存储子系统110检索要执行的程序指令以及要处理的数据,以便执行本文所述的各种操作。
用户界面可由一个或多个用户输入设备120、显示设备125和/或一个或多个其他用户输出设备(未示出)提供。输入设备120可以包括用户能够经由其向计算系统100提供信号的任何设备;计算系统100可以将信号解释为表示特定用户请求或信息。在各种实施例中,输入设备120可包括键盘、触摸板、触摸屏、鼠标或其他指向设备、滚轮、点击轮、拨号盘、按钮、开关、小键盘、麦克风等中的任一者或全部。
显示器125可显示由计算系统100生成的图像并且可包括各种图像生成技术,例如阴极射线管(CRT)、液晶显示器(LCD)、包括有机发光二极管(OLED)的发光二极管(LED)、投影系统等,连同支持电子器件(例如数模或模数转换器、信号处理器等)。一些实施例可包括用作输入和输出设备两者的设备,诸如触摸屏。在一些实施例中,可除显示器125之外或替代显示器125提供其他用户输出设备。实例包括指示灯、扬声器、触觉“显示”设备、打印机等。
在一些实施例中,用户界面可提供图形用户界面,其中显示器125的某些区域中的可见图像元素被定义为用户可使用用户输入设备120所选择的活动元素或控制元素。例如,用户可操纵用户输入设备来将屏幕上的光标或指针定位在控制元素上,然后点击按钮以指示该选择。或者,用户可在触摸屏设备上触摸控制元素(例如,使用手指或触笔)。在一些实施例中,用户可以说出与控制元素相关联的一个或多个字(所述字可为例如元素上的标志或与该元素相关联的功能)。在一些实施例中,可以识别用户在触敏设备上的手势并解释成输入命令;可以但未必将这些手势与显示器125中的任何特定阵列相关联。也可以实施其他用户界面。
网络接口135可为计算系统100提供语音和/或数据通信能力。在一些实施例中,网络接口135可包括射频(RF)收发器部件、GPS接收器部件,和/或其他部件,该RF收发器部件用于访问无线语音和/或数据网络(例如使用蜂窝电话技术,诸如3G、4G或EDGE的高级数据网络技术,WiFi(IEEE802.11系列标准),或其他移动通信技术,或它们的任何组合)。在一些实施例中,除了或代替无线接口,网络接口135可以提供有线网络连接性(例如以太网)。网络接口135可以利用硬件(例如天线、调制器/解调器、编码器/解码器,以及其他模拟和/或数字信号处理电路)与软件部件的组合来实现。
总线140可包括通信地连接计算系统100的许多内部设备的各种系统、外围设备和芯片组总线。例如,总线140能够将一个或多个处理单元105与存储子系统110可通信地耦接。总线140还连接到输入设备120和显示器125。总线140也可通过网络接口135将计算系统100耦接到网络。如此,计算系统100可以是多个计算机系统的网络(例如局域网(LAN)、广域网(WAN)、内联网,或网络的网络,诸如互联网)的一部分。计算系统100的任何或所有部件均可与本发明一起使用。
相机145也可以耦接到总线140。相机145可以安装于计算系统100的一侧上,该侧位于与显示器125相反的移动设备侧。相机145可以安装于此类计算系统100的“背面”。因此,相机145可以面对与显示器125相反的方向。
一些实施例包括电子部件,诸如将计算机程序指令存储在计算机可读存储介质中的微处理器、存储装置和存储器。本说明书中所描述的许多特征可以实现为过程,该过程被指定为在计算机可读存储介质上编码的一组程序指令。在由一个或多个处理单元执行这些程序指令时,它们使一个或多个处理单元执行程序指令中所指示的各种操作。程序指令或计算机代码的实例包括机器代码,诸如由编译器产生的机器代码,以及包括由计算机、电子部件或微处理器使用解译器来执行的更高级别代码的文件。
通过合适的编程,一个或多个处理单元105可为计算系统100提供各种功能。例如,一个或多个处理单元105能够执行对设备取向敏感的三维对象呈现应用。在一些实施例中,对设备取向敏感的三维对象呈现应用是一种基于软件的过程,其能够在三维虚拟对象虚拟所处的虚拟空间之内移动呈现视点,以便使对象在显示器125上以不同角度被呈现;可以响应于设备物理倾斜到某种初始物理取向之外而进行视点的这种移动。
应当理解,计算系统100是例示性的,且变型形式和修改形式是可能的。计算系统100可具有未在本文中具体描述的其他能力(例如移动电话、全球定位系统(GPS)、电源管理、用于连接外部设备或附件的各种连接端口,等等)。此外,尽管参考特定块描述了计算系统100,但应当理解,定义这些块是为了方便描述,并非意在暗示部件部分的特定物理布置。此外,块不必对应于物理上不同的部件。可以配置块以执行各种操作,例如通过对处理器编程或提供适当的控制电路,并且根据初始配置是如何获得的,各个块可以是可重新配置的或不可重新配置的。可以在包括利用电路和软件的任何组合实现的电子设备在内的各种装置中实现本发明的实施例。
图2是示出了根据本发明的一个实施例的移动设备200相对于物理空间轴线202的初始物理取向的实例的框图,该物理空间轴线202水平通过移动设备200的触摸屏显示器204的中心。例如,移动设备200可以是智能电话,诸如AppleiPhone。显示器204能够绘示所呈现的三维对象208,如同从对象208占据的虚拟空间中的初始视点看到的那样。可以将这种初始视点定位在距虚拟空间中的焦点特定距离处,并在焦点所在的虚拟平面上方的初始高度处。可以将初始视点想象成虚拟空间中,从焦点向观察者眼睛延伸的光线通过显示器204所在的点。焦点可以位于对象208的基部,例如,使得对象208虚拟地位于焦点所在的虚拟平面上。可以将初始视角定义在(a)从焦点延伸通过初始视点的射线和(b)从焦点向处于该平面上的点延伸且初始视点在其正上方的射线之间。如图2中所示,从初始视点的角度,由于初始视角的原因,对于观察者而言,对象208的部分侧视图、部分顶视图可能是明显的。
移动设备200初始可以具有初始物理取向,设备200在该取向下被保持或通过其他方式定位于物理空间中。可以基于设备200在物理空间轴线202上初始物理倾斜的程度来定义该初始物理取向。例如,初始,设备200可具有由设备200保持绝对直立所描述的物理取向,使得在从观察者的角度考虑时,初始相对于重力方向参考的矢量通过设备200的底表面和顶表面两者。可以使用设备200内的加速度计来确定初始物理取向。
在本发明的一个实施例中,显示器204还可以绘示虚拟按钮206。在一个实施例中,用户指尖经由触摸屏显示器204轻敲虚拟按钮206能够使在设备200上执行的应用执行某种指定的功能,诸如在显示器204上呈现的场景的二维和三维视图之间的切换。在此类实施例中,用户指尖在虚拟按钮206上连续保持接触(例如,持续超过指定阈值量的时间)能够使这种应用执行另选的指定功能。这种另选的指定功能可涉及使应用进入特殊操作模式,其中沿轴线202物理倾斜设备200使设备200以基于设备200沿轴线202从初始物理取向倾斜的程度的方式在显示器204上连续重新呈现对象208。在一个实施例中,在开始连续保持用户指尖接触在虚拟按钮206上的时刻,设备200可以测量并存储其初始物理取向。只要用户指尖经由触摸屏显示器204连续保持接触虚拟按钮206,该应用就可以保持在特殊操作模式内。在一个实施例中,在检测到用户指尖连续接触虚拟按钮206时,并在响应性地确定移动设备200相对于重力方向的初始物理取向时,如果在开始倾斜运动之前,当前取向和相对于重力方向的新位置有任何变化,设备200能够以动画方式使场景呈现到该位置,从而没有任何突然的“跳跃”。
图3是示出了根据本发明的一个实施例的移动设备300的相对于物理空间轴线302的后续物理取向的实例的框图,该物理空间轴线302水平通过移动设备300的触摸屏显示器304的中心。例如,移动设备300可以是智能电话,诸如AppleiPhone。移动设备300可以是图2中所示的相同移动设备200,但从上述初始物理取向倾斜到后续物理取向。显示器304能够绘示所呈现的三维对象308,如同从对象308虚拟占据的虚拟空间中的后续视点看到的那样。可以将这种后续视点定位在距上文结合图2所述的相同焦点相同特定距离处,但在焦点所在虚拟平面上方的不同后续高度。类似于初始视点,可以将后续视点想象成虚拟空间中,从焦点向观察者眼睛延伸的光线通过显示器304所在的点。可以将后续视角定义在(a)从焦点延伸通过后续视点的射线和(b)从焦点向处于该平面上的点延伸且后续视点在其正上方的射线之间。如图3中所示,从后续视点的角度,由于后续视角的原因,对于观察者而言,对象308的完全侧视图可能是明显的。对象308可以具有与上文结合图2所述的对象208相同的三维模型,但是从后续视点而非初始视点的角度呈现的。
围绕物理空间轴线302倾斜的结果是,移动设备300接下来可以具有后续物理取向,设备300在该取向下被保持或通过其他方式定位于物理空间中。可以基于设备300在物理空间轴线302上从初始物理取向物理倾斜的程度来定义这一后续物理取向。例如,在沿轴线302进行一些倾斜之后,相对于初始物理取向并从观察者的角度考虑,设备300可以具有由如下条件描述的物理取向:保持设备300,使得设备300的顶表面移动得距观察者比设备300的底表面更远。可以使用设备300内的加速度计来确定后续物理取向。
在本发明的一个实施例中,显示器304还可以绘示虚拟按钮306,该虚拟按钮306可以与上文结合图2所述的虚拟按钮206相同。在一个实施例中,只要用户指尖经由触摸屏显示器304连续保持接触虚拟按钮306,在显示器304上呈现对象308的应用就可以保留在特殊操作模式中;一旦用户指尖在虚拟按钮306上的接触中断,该应用就可以从特殊操作模式退出。在一个实施例中,在应用保留在特殊操作模式内时,移动设备300连续检测设备300沿轴线302相对于初始物理取向倾斜的程度,并基于该程度在显示器304上重新呈现对象308。在一个实施例中,随着设备300从初始物理取向倾斜的程度增大,使得从观察者的角度考虑,其顶表面从观察者移动得更远和/或向观察者移动得更近,该应用可以减小上述定义的视角,使得视点保持距焦点相同的距离,但视角变得更尖锐。该应用能够基于当前的视点和当前的视角在显示器304上连续重新呈现对象308。应注意,在整个重新呈现过程期间,被呈现的虚拟场景的焦点能够保持恒定,通常在显示器304的中心处,使得由于重新呈现过程的原因,仅有呈现虚拟场景(包括对象308)的角度变化。
在本发明的一个实施例中,只要移动设备300相对于轴线302的物理取向保持恒定,该应用就不会继续相对于焦点所在的虚拟平面修改视角,但该应用可以如下文将论述的在其他方面中调节视点。因此,在本发明的此类实施例中,该应用仅在设备300的用户当前正在改变设备300沿轴线302从初始物理取向倾斜的程度时才继续改变相对于虚拟平面的视角;在此类实施例中,在设备300的用户当前没有在改变设备300沿轴线302从初始物理取向倾斜的程度时(尽管设备300可以相对于初始物理取向沿轴线302保持倾斜位置),该应用不继续改变相对于虚拟平面的视角。这一特征的显著性将在下文的论述中变得明显,在本发明的一个实施例中,以下论述涉及到移动设备如何可对沿另一不同轴线以稍微不同的方式倾斜做出响应。
图4是示出了根据本发明的一个实施例的技术400的实例的流程图,该技术400用于从取决于移动设备从初始物理取向沿水平轴线倾斜程度的视角,在移动设备的显示器上呈现三维对象。例如,可以由图2的移动设备200,或者更具体地,由在移动设备200上执行的应用程序,结合检测到移动设备200的物理取向变化并向该应用程序发送信号的硬件部件,来执行技术400。尽管在技术400中特定操作被描述为按照特定次序执行,但本发明的另选实施例可能涉及以更少、额外或不同操作执行的和/或以不同次序执行那些操作的类似技术。
在方框402中,移动设备能够检测到已经发起对移动设备触摸屏显示器上呈现的虚拟按钮的连续用户接触。在方框404中,响应于检测到已经发起对虚拟按钮的连续用户接触,移动设备可以进入特殊操作模式。在方框406中,移动设备能够确定移动设备相对于物理空间轴线的初始物理取向,从移动设备的观察者角度来看,该物理空间轴线水平通过移动设备的左右侧并通过触摸屏显示器的中心。在方框408中,移动设备能够检测到是否仍然对虚拟按钮保持连续用户接触。如果仍然对虚拟按钮保持连续用户接触,那么控制进行到方框412。否则,控制继续进行到方框410。
在方框410中,响应于确定不再针对虚拟按钮保持连续用户接触,移动设备能够退出特殊操作模式。然后,技术400结束。
或者,在方框412中,响应于确定仍然对虚拟按钮保持连续用户接触,移动设备能够确定移动设备相对于物理空间轴线的当前物理取向。在方框414中,移动设备能够确定移动设备已经沿物理空间轴线从初始物理取向向当前物理取向倾斜的程度。在方框416中,移动设备能够将呈现视点的高度从焦点虚拟所处的虚拟平面调节到基于在方框414中确定的程度的程度,同时维持呈现视点距焦点的虚拟距离恒定。这种调节还修改如上所述的视角。然而,在一个实施例中,在从移动设备显示器上显示的虚拟场景的最近重新呈现开始,如果当前物理取向变化,才进行这种调节。
在方框418中,从呈现视点的新位置的角度来看,移动设备能够在触摸屏显示器上重新呈现在焦点上聚焦的虚拟三维场景。根据移动设备在物理空间轴线上倾斜得更接近还是更远离其初始物理取向,重新呈现的虚拟场景相比于在最近的重新呈现之前在显示器上呈现的虚拟场景,能够从更大程度的顶视图或从更大程度的侧视图出现。然后,控制传递回方框408。
图5是示出了根据本发明的一个实施例的移动设备500的相对于物理空间轴线502的初始物理取向的实例的框图,该物理空间轴线502垂直通过移动设备500触摸屏显示器的中心。例如,移动设备500可以是智能电话,诸如AppleiPhone。显示器504能够绘示所呈现的三维对象508,如同从对象508占据的虚拟空间中的初始视点看到的那样。如图2中那样,可以将这种初始视点定位在距虚拟空间中的焦点特定的距离处,并在焦点所在的虚拟平面上方的特定高度处。可以将初始视点想象成虚拟空间中,从焦点向观察者眼睛延伸的光线通过显示器504所在的点。焦点可以定位于对象508的基部,例如,使得对象508虚拟地位于焦点所在的虚拟平面上。可以利用例如上文结合图2-图4论述的技术确立该视角。如图5中所示,从初始视点的角度,对于观察者而言,对象508的两侧视图可能是明显的。
移动设备500初始可以具有初始物理取向,设备500在该取向下被保持或通过其他方式定位于物理空间中。可以基于设备500在物理空间轴线502上初始物理倾斜的程度来定义这一初始物理取向。例如,初始,设备500的物理取向可以描述为设备500保持垂直于观察者,其中从观察者角度来看几乎没有或没有侧到侧倾斜,使得源自观察者的矢量垂直于设备500的触摸屏显示器表面。可以使用设备500内的陀螺仪来确定初始物理取向。在一个实施例中,设备200内的陀螺仪能够提供粗略的角速率数据,可以通过重传感器过滤将其与加速度计数据组合。这些传感器的组合能够输出设备帧四元组,设备500然后使用它以计算设备500从初始参考位置的倾斜,还利用重力对其进行参考。
在本发明的一个实施例中,显示器504还可以绘示虚拟按钮506,外观和功能类似于上文结合图2所述的虚拟按钮206。在一个实施例中,用户的指尖连续保持接触虚拟按钮506可能导致呈现应用使该应用进入特殊操作模式,其中设备500沿轴线502的物理倾斜导致设备504开始围绕焦点,以基于设备500已经沿轴线502从其初始物理取向倾斜的程度的方向(例如,顺时针或逆时针)和速度连续旋转视点,同时保持视角(即,相对于焦点虚拟所在的平面)和视点距焦点的当前距离两者都恒定。在围绕焦点出现视点的连续旋转时,视点能够保持聚焦在焦点上,使得对象508连续保持在视野内。在发生这种连续旋转的同时,从旋转视点的每个新位置的角度,设备504能够连续在显示器504上重新呈现对象508,从而导致对象508的不同侧面在旋转期间变得明显。在一个实施例中,在开始连续保持用户指尖接触在虚拟按钮506上的时刻,设备500可以测量并存储其初始物理取向。只要用户指尖通过触摸屏显示器504连续保持接触虚拟按钮506,该应用就可以保持在特殊操作模式内。
图6是示出了根据本发明的一个实施例的移动设备600相对于物理空间轴线602的后续物理取向的实例的框图,该物理空间轴线602垂直通过移动设备600的触摸屏显示器的中心。例如,移动设备600可以是智能电话,诸如AppleiPhone。移动设备600可以是图5中所示的相同移动设备500,但从上述初始物理取向倾斜到后续物理取向。显示器604能够绘示所呈现的三维对象608,如同从对象608虚拟占据的虚拟空间中的后续视点看到的那样。可以将这一后续视点定位在距上文结合图5所述的相同焦点相同的特定距离处,并在焦点所在的虚拟平面上方相同的高度处,使得在整个旋转期间,后续视点连续位于悬置于焦点虚拟所处的虚拟平面上方并平行于该虚拟平面的另一虚拟平面上。由于后续视点在围绕焦点的整个旋转期间连续保持在距焦点相同的特定距离处,因此可以将后续视点想象成追随位于这一高悬平行虚拟平面之内的圆形轨道。类似于初始视点,可以将后续视点想象成虚拟空间中,从焦点向观察者眼睛延伸的光线通过显示器604所在的点。如图6中所示,从后续视点的角度,由于后续视点沿圆形轨道的新位置的原因,对于观察者而言,对象608的单侧视图可能是明显的。对象608可以具有与上文结合图5所述的对象608相同的三维模型,但是从后续视点而非初始视点的角度呈现的。
围绕物理空间轴线602倾斜的结果是,移动设备600接下来可以具有后续物理取向,设备600在该取向下被保持或通过其他方式定位于物理空间中。可以基于设备600在物理空间轴线602上从初始物理取向物理倾斜的程度来定义这一后续物理取向。例如,在沿轴线602进行一些倾斜之后,相对于初始物理取向并从观察者的角度考虑,设备600可以具有由如下条件描述的物理取向:保持设备600,使得设备600的右侧表面移动得距观察者比设备600的左侧表面更远。可以使用设备600内的陀螺仪来确定后续物理取向。
在本发明的一个实施例中,显示器604还可以绘示虚拟按钮606,虚拟按钮606可以与上文结合图5所述的虚拟按钮506相同。在一个实施例中,只要用户指尖经由触摸屏显示器604连续保持接触虚拟按钮606,在显示器604上呈现对象608的应用就可以保留在特殊操作模式中;一旦用户指尖在虚拟按钮606上的接触中断,该应用就可以从特殊操作模式退出。在一个实施例中,在应用保持在特殊操作模式内时,移动设备600可以连续检测设备600沿轴线602相对于初始物理取向倾斜的程度,并能够基于该程度连续重新确定旋转方向(例如,根据设备600向左还是向右倾斜,顺时针或逆时针)和旋转速度。该应用可以沿着上述圆形轨迹沿着旋转方向并以旋转速度连续移动视点。在应用通过这种方式沿着圆形轨迹移动视点时,该应用能够基于视点的新位置在显示器604上重新呈现对象608。在一个实施例中,随着设备600从初始物理取向倾斜的程度增大,使得从观察者的角度考虑,其左右侧表面中的一者移动得更加远离观察者,而其左右侧表面的另一者移动得更接近观察者,该应用可以提高如上所述的旋转速度,使得视点因此沿圆形轨道更快移动。该应用能够基于当前的视点在圆形轨道上的位置,在显示器604上连续重新呈现对象608。应注意,在整个重新呈现过程期间,被呈现的虚拟场景的焦点能够保持恒定,通常在显示器604的中心处,使得由于重新呈现过程的原因,仅有呈现虚拟场景(包括对象608)的角度变化。
在本发明的一个实施例中,即使移动设备600相对于轴线602的物理取向保持恒定,该应用仍然能够继续沿上述圆形轨道移动视点。因此,在本发明这样的实施例中,即使设备600的用户当前没有在改变设备600沿轴线602从其初始物理取向倾斜的程度,该应用仍继续绕焦点旋转视点;在这样的实施例中,直到设备600的用户将设备600相对于轴线602恢复到其初始物理取向,或直到用户从虚拟按钮606释放接触,该应用才能够继续沿圆形轨道移动视点。因此,在一个实施例中,移动设备能够通过仅在初始物理取向和后续物理取向之间的差异当前在变化时才移动视点的方式,对沿一个轴线(例如轴线302)的倾斜做出响应,而移动设备能够通过即使初始物理取向和后续物理取向之间的差异当前并未改变也移动视点的方式,对沿另一个轴线(例如,轴线602)的倾斜做出响应。在本发明的一个实施例中,响应于设备600的用户将设备600恢复到其相对于轴线602的初始物理取向,或者响应于用户从虚拟按钮606释放接触,该应用可以逐渐减小旋转速度,直到呈现视点停止移动。该应用于是能够使旋转的减慢和停止变成动画。该实施例可以与另选的实施例形成对比,在另选的实施例中,应用可以突然停止旋转而没有进一步的动画表示。
图7是示出了根据本发明的一个实施例的技术700的实例的流程图,该技术用于围绕焦点,以基于移动设备从初始物理取向沿垂直轴倾斜的程度而变化的方向和速度来连续旋转视点,从其角度重新呈现虚拟场景。例如,可以由图5的移动设备500,或者更具体地,由在移动设备500上执行的应用程序,结合检测到移动设备500的物理取向变化并向该应用程序发送信号的硬件部件,来执行技术700。尽管在技术700中特定操作被描述为按照特定次序执行,但本发明的另选实施例可能涉及以更少、额外或不同操作执行的和/或以不同次序执行那些操作的类似技术。
在方框702中,移动设备能够检测到,已经发起对移动设备触摸屏显示器上呈现的虚拟按钮的连续用户接触。在方框704中,响应于检测到已经发起对虚拟按钮的连续用户接触,移动设备可以进入特殊操作模式。在方框706中,移动设备能够确定移动设备相对于物理空间轴线的初始物理取向,从移动设备的观察者角度来看,该物理空间轴线水平通过移动设备的上下侧并通过触摸屏显示器的中心。在方框708中,移动设备能够检测是否仍然对虚拟按钮保持连续用户接触。如果仍然对虚拟按钮保持连续用户接触,那么控制进行到方框712。否则,控制继续进行到方框710。
在方框710中,响应于确定不再对虚拟按钮保持连续用户接触,移动设备能够退出特殊操作模式。然后,技术700结束。
另选地,在方框712中,响应于确定仍然对虚拟按钮保持连续用户接触,移动设备能够确定移动设备相对于物理空间轴线的当前物理取向。在方框714中,移动设备能够确定移动设备已经沿物理空间轴线从初始物理取向向当前物理取向倾斜的程度。在方框716中,移动设备能够基于在方框714中确定的程度来确定旋转方向和旋转速度。
在方框718中,移动设备能够将呈现视点沿圆形轨道,以在方框716中确定的旋转方向和旋转速度,从其当前位置移动到新位置,同时保持呈现视点距焦点的虚拟距离恒定,该圆形轨道位于悬置于焦点虚拟所处的虚拟平面上方的虚拟平面上。在一个实施例中,即使从移动设备显示器上显示的虚拟场景的最近重新呈现开始,当前物理取向未变化,也进行这种运动。
在方框720中,从呈现视点的新位置的角度来看,移动设备能够在触摸屏显示器上重新呈现在焦点上聚焦的虚拟三维场景。重新呈现的虚拟场景能够示出虚拟场景中三维对象中与在最近的重新呈现之前显示器上呈现的虚拟场景中不同的侧面。然后,控制传递回方框708。
图8是示出了根据本发明的一个实施例的技术800的流程图。在方框802中,可以检测到相对于第一轴线的初始取向。在方框804中,可以检测到相对于第二轴线的初始取向。在方框806中,可以进入特殊操作模式。在方框808中,可以确定沿第一轴线从初始取向倾斜的当前程度。在方框810中,可以基于沿第一轴线从初始取向倾斜的当前程度来设置第一参数的值。在方框812中,可以确定沿第二轴线从初始取向倾斜的当前程度。在方框814中,可以基于沿第二轴线从初始取向倾斜的当前程度来连续修改第二参数的当前值。在方框816中,可以决定是否退出特殊操作模式。如果是,则技术800结束。如果否,则控制传递回方框808。
可使用专用部件和/或可编程处理器和/或其他可编程设备的任意组合来实现本发明的实施例。本文所述的各种过程可以任何组合方式在相同处理器或不同处理器上实现。在部件被描述为被配置为执行某些操作的情况下,可以例如通过设计电子电路以执行操作、通过对可编程电子电路(诸如微处理器)进行编程以执行操作或它们的任何组合,来实现这种配置。另外,尽管上述实施例可参考具体的硬件和软件部件,但本领域的技术人员将会理解,也可以使用硬件和/或软件部件的不同组合,并且被描述为在硬件中实现的特定操作也可以在软件中实现,或反之亦然。
结合本发明的各种特征的计算机程序可以被编码并存储在各种计算机可读存储介质上;合适的介质包括磁盘或磁带、诸如光盘(CD)或DVD(数字多功能盘)的光学存储介质、闪存以及其他非暂态介质。可将用程序代码编码的计算机可读介质与兼容的电子设备封装在一起,或者该程序代码可独立于电子设备提供(例如,经由互联网下载或作为单独封装的计算机可读存储介质)。
因此,尽管已相对于具体实施例描述了本发明,但应当理解,本发明旨在覆盖以下权利要求范围内的所有修改和等同形式。
在一个实施例中,一种方法,其包括:检测到移动设备已经沿第一轴线倾斜;响应于检测到移动设备已经沿第一轴线倾斜,通过修改移动设备相对于焦点显示内容的角度来改变由移动设备显示的内容;检测到移动设备已经沿不同于第一轴线的第二轴线倾斜;以及响应于检测到移动设备已经沿第二轴线倾斜,通过围绕焦点旋转移动设备显示内容所源自的视点,同时保持相对于焦点的视角,来改变由移动设备显示的内容。在一个实施例中,在此类方法中,修改用于移动设备显示内容的角度包括:响应于确定用户保持与由移动设备显示的虚拟按钮的接触来修改所述角度。在一个实施例中,在此类方法中,修改用于移动设备显示内容的角度包括:响应于确定用户保持与虚拟按钮的接触来修改所述角度,所述虚拟按钮基于虚拟按钮是被轻敲还是连续接触来执行不同的功能。在一个实施例中,在此类方法中,检测到移动设备已经沿第一轴线倾斜包括:检测到初始相对于重力方向参考的移动设备显示器的角度已经从初始角度变化。在一个实施例中,在此类方法中,修改用于移动设备显示内容的角度包括:在显示器上重新呈现内容以呈现所述内容的与先前显示的相比包括更多的三维对象侧视图的视图。在一个实施例中,在此类方法中,修过用于移动设备显示所述内容的角度包括:仅在移动设备沿第一轴线倾斜的程度当前正被改变时才修改所述角度。在一个实施例中,在此类方法中,通过围绕焦点旋转移动设备显示内容所源自的视点来改变移动设备显示的内容包括,只要移动设备保持沿第二轴线从初始物理取向倾斜,就绕焦点连续旋转视点。在一个实施例中,在此类方法中,通过围绕焦点旋转移动设备显示内容所源自的视点来改变移动设备显示的内容包括,围绕焦点连续旋转视点,只要移动设备保持沿第二轴线从初始物理取向倾斜,初始物理取向是在移动设备检测到用户接触特定用户界面元素的时刻确定的。在一个实施例中,在此类方法中,通过围绕焦点旋转移动设备显示内容所源自的视点来改变由动设备显示的内容包括:围绕焦点连续旋转视点,直到将移动设备的取向返回到在开始连续旋转视点之前移动设备沿第二轴线取向的初始物理取向。在一个实施例中,在此类方法中,通过围绕焦点旋转移动设备显示内容所源自的视点来改变由移动设备显示的内容包括:以基于移动设备沿第二轴线从初始物理取向倾斜的程度而变化的速度,围绕焦点旋转视点。在一个实施例中,在此类方法中,修过用于移动设备显示内容的角度包括:仅在移动设备的物理取向当前正被改变时才修改所述角度。在一个实施例中,在此类方法中,通过围绕焦点旋转移动设备显示内容所源自的视点来改变由移动设备显示的内容包括:即使在移动设备的物理取向当前未被改变,也围绕焦点连续旋转所述视点。在一个实施例中,在此类方法中,从显示器观察者的角度,第一轴线水平通过移动设备显示器的中心。在一个实施例中,在此类方法中,从显示器观察者的角度,第一轴线垂直通过移动设备显示器的中心。在一个实施例中,在此类方法中,通过相对于焦点修改用于移动设备显示内容的角度来改变移动设备显示的内容包括:从视点的角度,重新呈现显示器上的内容,同时将焦点保持在显示器上的相同位置处。在一个实施例中,在此类方法中,通过围绕焦点旋转移动设备显示内容所源自的视点来改变移动设备显示的内容包括:从视点的角度,重新呈现显示器上的内容,同时将焦点保持在显示器上的相同位置处。在一个实施例中,在此类方法中,检测到移动设备已经沿第一轴线倾斜包括:基于从移动设备的加速度计获得的测量检测到移动设备沿第一轴线倾斜。在一个实施例中,在此类方法中,检测到移动设备已经沿第二轴线倾斜包括:基于从移动设备的陀螺仪获得的测量检测到移动设备沿第二轴线倾斜。在一个实施例中,在此类方法中,围绕焦点旋转视点,同时维持相对于焦点的视角包括:沿圆形轨道移动视点,圆形轨道位于与焦点所在的虚拟平面平行的虚拟平面内。在一个实施例中,此类方法还包括:响应于检测到移动设备已经返回到沿第二轴线倾斜之前移动设备所拥有的取向,逐渐减慢直至停止视点沿圆形轨道的移动。
在一个实施例中,一种计算机可读存储器包括可以由一个或多个处理器执行的特定指令,以使一个或多个处理器执行操作,所述特定指令包括:使计算设备检测到计算设备已经在第一方向上倾斜的指令;使计算设备仅在设备在第一方向上倾斜的程度正在改变时才修改第一参数的指令;使计算设备检测到计算设备已经在不同于第一方向的第二方向上倾斜的指令;以及使计算设备连续修改第二参数,直到计算设备停止沿第二方向倾斜的指令。在一个实施例中,使计算设备连续修改第二参数,直到计算设备停止在第二方向上倾斜的此类指令包括:使所述计算设备修改第二参数,直到计算设备返回到计算设备在第二方向上倾斜之前所拥有的取向的指令。在一个实施例中,使计算设备仅在该设备在第一方向上的倾斜程度当前正在变化时才修改第一参数的指令包括:即使计算设备的取向保持与在第一方向上倾斜之前计算设备所拥有的取向不同,在计算设备的取向当前未在变化时,使计算设备停止改变第一参数的指令。在一个实施例中,使计算设备修改第一参数的指令涉及:基于计算设备的初始取向和计算设备的当前取向之间从上到下的差异,为第一参数计算新值。在一个实施例中,使得计算设备修改第二参数的指令涉及:以基于计算设备的初始取向和计算设备的当前取向之间从左侧到右侧的差异的速率,连续调节第二参数。在一个实施例中,第一参数是音量、亮度和对比度中的一者。在一个实施例中,第二参数是与第一参数不同的参数。
在一个实施例中,一种移动设备,其包括:检测移动设备相对于重力方向倾斜程度的加速度计;检测移动设备与重力方向无关地倾斜程度的陀螺仪;和存储程序的存储器,所述程序被配置为基于来自加速度计的测量修改第一参数,并被配置为基于来自陀螺仪的测量修改第二参数。

Claims (20)

1.一种方法,包括:
检测到移动设备已经沿第一轴线倾斜;
响应于检测到所述移动设备已经沿所述第一轴线倾斜,通过相对于焦点修改所述移动设备显示内容的角度来改变由所述移动设备显示的所述内容;
检测到所述移动设备已经沿与所述第一轴线不同的第二轴线倾斜;以及
响应于检测到所述移动设备已经沿所述第二轴线倾斜,通过围绕所述焦点旋转所述移动设备显示所述内容所源自的视点,同时维持相对于所述焦点的视角,来改变由所述移动设备显示的所述内容。
2.根据权利要求1所述的方法,其中修改所述移动设备显示所述内容的所述角度包括:响应于确定用户正在维持与由所述移动设备显示的虚拟按钮的接触来修改所述角度。
3.根据权利要求1-2中任一项所述的方法,其中修改所述移动设备显示所述内容的所述角度包括:响应于确定用户正在维持与虚拟按钮的接触来修改所述角度,所述虚拟按钮基于所述虚拟按钮是被轻敲还是连续接触来执行不同的功能。
4.根据权利要求1-3中任一项所述的方法,其中检测到所述移动设备已经沿所述第一轴线倾斜包括:检测到初始相对于重力方向参考的所述移动设备的显示器的角度已经从初始角度变化;并且其中修改所述移动设备显示所述内容的所述角度包括:在所述显示器上重新呈现所述内容,以呈现所述内容的与先前显示的相比包括更多的三维对象侧视图的视图。
5.根据权利要求1-4中任一项所述的方法,其中修改所述移动设备显示所述内容的所述角度包括:仅在所述移动设备沿所述第一轴线倾斜的程度当前正在被改变时才修改所述角度。
6.根据权利要求1-5中任一项所述的方法,其中通过围绕所述焦点旋转所述移动设备显示所述内容所源自的所述视点来改变由所述移动设备显示的所述内容包括:只要所述移动设备保持沿所述第二轴线从初始物理取向倾斜,就围绕所述焦点连续旋转所述视点。
7.根据权利要求1-6中任一项所述的方法,其中通过围绕所述焦点旋转所述移动设备显示所述内容所源自的所述视点来改变由所述移动设备显示的所述内容包括:只要所述移动设备保持沿所述第二轴线从初始物理取向倾斜,就围绕所述焦点连续旋转所述视点,所述初始物理取向是在所述移动设备检测到用户接触特定用户界面元素的时刻确立的。
8.根据权利要求1-7中任一项所述的方法,其中通过围绕所述焦点旋转所述移动设备显示所述内容的所述视点来改变由所述移动设备显示的所述内容包括:围绕所述焦点连续旋转所述视点,直到所述移动设备的取向返回到所述移动设备在开始所述视点的所述连续旋转之前沿所述第二轴线取向的初始物理取向。
9.根据权利要求1-8中任一项所述的方法,其中通过围绕所述焦点旋转所述移动设备显示所述内容所源自的所述视点来改变由所述移动设备显示的所述内容包括:以基于所述移动设备沿所述第二轴线从初始物理取向倾斜的程度而变化的速度,围绕所述焦点连续旋转所述视点。
10.根据权利要求1-9中任一项所述的方法,其中修改所述移动设备显示所述内容的所述角度包括:仅在所述移动设备的物理取向当前正在被改变时才修改所述角度;并且其中通过围绕所述焦点旋转所述移动设备显示所述内容所源自的所述视点来改变由所述移动设备显示的所述内容包括:即使在所述移动设备的所述物理取向当前未正在被改变时,也围绕所述焦点连续旋转所述视点。
11.根据权利要求1-10中任一项所述的方法,其中从所述显示器的观察者的角度,所述第一轴线水平通过所述移动设备的显示器的中心;并且其中从所述显示器的所述观察者的所述角度,所述第一轴线垂直通过所述移动设备的所述显示器的所述中心。
12.根据权利要求1-11中任一项所述的方法,其中通过相对于所述焦点修改所述移动设备显示所述内容的所述角度来改变由所述移动设备显示的所述内容包括:从所述视点的角度,在显示器上重新呈现所述内容,同时将所述焦点维持在所述显示器上的相同位置处;并且其中通过围绕所述焦点旋转所述移动设备显示所述内容所源自的所述视点来改变由所述移动设备显示的所述内容包括:从所述视点的所述角度在所述显示器上重新呈现所述内容,同时将所述焦点维持在所述显示器上的所述相同位置处。
13.根据权利要求1-12中任一项所述的方法,其中检测到所述移动设备已经沿所述第一轴线倾斜包括:基于从所述移动设备的加速度计获得的测量,检测到所述移动设备已经沿所述第一轴线倾斜;并且其中检测到所述移动设备已经沿所述第二轴线倾斜包括:基于从所述移动设备的陀螺仪获得的测量,检测到所述移动设备已经沿所述第二轴线倾斜。
14.根据权利要求1-13中任一项所述的方法,其中围绕所述焦点旋转所述视点,同时维持相对于所述焦点的所述视角包括:沿位于与所述焦点所处的虚拟平面平行的虚拟平面内的圆形轨道移动所述视点;并且还包括:响应于检测到所述移动设备已经返回到所述移动设备在沿所述第二轴线倾斜之前所拥有的取向而逐渐减慢直至停止所述视点沿所述圆形轨道的所述移动。
15.一种包括特定指令的计算机可读存储器,所述特定指令能够由一个或多个处理器执行,以使所述一个或多个处理器执行操作,所述特定指令包括:
使计算设备检测到所述计算设备正在第一方向上倾斜的指令;
使所述计算设备仅在所述设备正在所述第一方向上倾斜的程度当前正在变化时才修改第一参数的指令;
使所述计算设备检测到所述计算设备已经在不同于所述第一方向的第二方向上倾斜的指令;和
使所述计算设备连续修改第二参数直到所述计算设备已停止在所述第二方向上倾斜的指令。
16.根据权利要求15所述的计算机可读存储器,使所述计算设备连续修改所述第二参数直到所述计算设备已停止在所述第二方向上倾斜的指令包括:使所述计算设备修改所述第二参数直到所述计算设备已返回到所述计算设备在所述第二方向上倾斜之前所拥有的取向的指令。
17.根据权利要求15-16中任一项所述的计算机可读存储器,其中使所述计算设备仅在所述设备正在所述第一方向上倾斜的程度当前正在变化时才修改所述第一参数的所述指令包括:即使所述计算设备的取向保持与所述计算设备在所述第一方向上倾斜之前所拥有的取向不同,在所述计算设备的所述取向当前未正在变化时,使所述计算设备停止改变所述第一参数的指令。
18.根据权利要求15-17中任一项所述的计算机可读存储器,其中使所述计算设备修改所述第一参数的所述指令涉及:基于所述计算设备的初始取向和所述计算设备的当前取向之间从上到下的差异针对所述第一参数计算新值;并且其中使所述计算设备修改所述第二参数的所述指令涉及:以基于所述计算设备的初始取向和所述计算设备的当前取向之间从左侧到右侧的差异的速率连续调节所述第二参数。
19.根据权利要求15-18中任一项所述的计算机可读存储器,其中所述第一参数是音量、亮度和对比度中的一者;并且其中所述第二参数是与所述第一参数不同的参数。
20.一种移动设备,包括:
加速度计,所述加速度计用于检测所述移动设备相对于重力方向倾斜的程度;
陀螺仪,所述陀螺仪用于检测所述移动设备与所述重力方向无关的倾斜的程度;和
存储器,所述存储器存储程序,所述程序被配置为基于来自所述加速度计的测量修改第一参数,并被配置为基于来自所述陀螺仪的测量修改第二参数。
CN201380073287.4A 2013-02-19 2013-12-31 由陀螺仪和加速度计修改的基于触摸的手势 Pending CN105190504A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/770,947 2013-02-19
US13/770,947 US20140232634A1 (en) 2013-02-19 2013-02-19 Touch-based gestures modified by gyroscope and accelerometer
PCT/US2013/078556 WO2014130163A1 (en) 2013-02-19 2013-12-31 Touch-based gestures modified by gyroscope and accelerometer

Publications (1)

Publication Number Publication Date
CN105190504A true CN105190504A (zh) 2015-12-23

Family

ID=50002874

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380073287.4A Pending CN105190504A (zh) 2013-02-19 2013-12-31 由陀螺仪和加速度计修改的基于触摸的手势

Country Status (3)

Country Link
US (1) US20140232634A1 (zh)
CN (1) CN105190504A (zh)
WO (1) WO2014130163A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107861682A (zh) * 2017-11-03 2018-03-30 网易(杭州)网络有限公司 虚拟对象的移动控制方法和装置
CN109804341A (zh) * 2017-07-31 2019-05-24 腾讯科技(深圳)有限公司 与显示在用户界面上的三维互联网内容的交互

Families Citing this family (64)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8838071B1 (en) 2014-04-30 2014-09-16 Oto Technologies Llc Secure communications smartphone system
US9075508B1 (en) 2014-04-30 2015-07-07 Grandios Technologies, Llc Next application suggestions on a user device
US9078098B1 (en) 2014-06-04 2015-07-07 Grandios Technologies, Llc Geo-fencing based functions
US9538062B2 (en) 2014-06-04 2017-01-03 Grandios Technologies, Llc Camera management system
US9294575B1 (en) 2014-06-04 2016-03-22 Grandios Technologies, Inc. Transmitting appliance-specific content to a user device
US9420477B2 (en) 2014-06-04 2016-08-16 Grandios Technologies, Llc Signal strength management
US9509799B1 (en) 2014-06-04 2016-11-29 Grandios Technologies, Llc Providing status updates via a personal assistant
US9161193B1 (en) 2014-06-04 2015-10-13 Grandios Technologies, Llc Advanced telephone management
US9395754B2 (en) 2014-06-04 2016-07-19 Grandios Technologies, Llc Optimizing memory for a wearable device
US9590984B2 (en) 2014-06-04 2017-03-07 Grandios Technologies, Llc Smartphone fingerprint pass-through system
US9516467B1 (en) 2014-06-04 2016-12-06 Grandios Technologies, Llc Mobile device applications associated with geo-locations
US9509789B2 (en) 2014-06-04 2016-11-29 Grandios Technologies, Llc Managing mood data on a user device
US9391988B2 (en) 2014-06-04 2016-07-12 Grandios Technologies, Llc Community biometric authentication on a smartphone
US9377939B1 (en) 2014-06-04 2016-06-28 Grandios Technologies Application player management
US9491562B2 (en) 2014-06-04 2016-11-08 Grandios Technologies, Llc Sharing mobile applications between callers
US9619159B2 (en) 2014-06-04 2017-04-11 Grandios Technologies, Llc Storage management system
US9584645B2 (en) 2014-06-04 2017-02-28 Grandios Technologies, Llc Communications with wearable devices
US9323421B1 (en) 2014-06-04 2016-04-26 Grandios Technologies, Llc Timer, app, and screen management
US9711146B1 (en) 2014-06-05 2017-07-18 ProSports Technologies, LLC Wireless system for social media management
US8995972B1 (en) 2014-06-05 2015-03-31 Grandios Technologies, Llc Automatic personal assistance between users devices
US9635506B1 (en) 2014-06-05 2017-04-25 ProSports Technologies, LLC Zone based wireless player communications
US10290067B1 (en) 2014-06-05 2019-05-14 ProSports Technologies, LLC Wireless concession delivery
US9648452B1 (en) 2014-06-05 2017-05-09 ProSports Technologies, LLC Wireless communication driven by object tracking
US10592924B1 (en) 2014-06-05 2020-03-17 ProSports Technologies, LLC Managing third party interactions with venue communications
US9965938B1 (en) 2014-07-11 2018-05-08 ProSports Technologies, LLC Restroom queue management
US9474933B1 (en) 2014-07-11 2016-10-25 ProSports Technologies, LLC Professional workout simulator
US10572902B2 (en) 2014-07-11 2020-02-25 ProSports Technologies, LLC Camera-based digital content distribution
US9610491B2 (en) 2014-07-11 2017-04-04 ProSports Technologies, LLC Playbook processor
US9760572B1 (en) 2014-07-11 2017-09-12 ProSports Technologies, LLC Event-based content collection for network-based distribution
US9343066B1 (en) 2014-07-11 2016-05-17 ProSports Technologies, LLC Social network system
WO2016007967A1 (en) 2014-07-11 2016-01-14 ProSports Technologies, LLC Ball tracker snippets
US9655027B1 (en) 2014-07-11 2017-05-16 ProSports Technologies, LLC Event data transmission to eventgoer devices
WO2016007970A1 (en) 2014-07-11 2016-01-14 ProSports Technologies, LLC Whistle play stopper
WO2016007965A1 (en) 2014-07-11 2016-01-14 ProSports Technologies, LLC Ball tracker camera
US9398213B1 (en) 2014-07-11 2016-07-19 ProSports Technologies, LLC Smart field goal detector
WO2016007962A1 (en) 2014-07-11 2016-01-14 ProSports Technologies, LLC Camera feed distribution from event venue virtual seat cameras
US9724588B1 (en) 2014-07-11 2017-08-08 ProSports Technologies, LLC Player hit system
US9305441B1 (en) 2014-07-11 2016-04-05 ProSports Technologies, LLC Sensor experience shirt
US9729644B1 (en) 2014-07-28 2017-08-08 ProSports Technologies, LLC Event and fantasy league data transmission to eventgoer devices
US9892371B1 (en) 2014-07-28 2018-02-13 ProSports Technologies, LLC Queue information transmission
US9607497B1 (en) 2014-08-25 2017-03-28 ProSports Technologies, LLC Wireless communication security system
US9742894B2 (en) 2014-08-25 2017-08-22 ProSports Technologies, LLC Disposable connectable wireless communication receiver
US9699523B1 (en) 2014-09-08 2017-07-04 ProSports Technologies, LLC Automated clip creation
US10264175B2 (en) 2014-09-09 2019-04-16 ProSports Technologies, LLC Facial recognition for event venue cameras
US9417090B2 (en) 2014-09-11 2016-08-16 ProSports Technologies, LLC System to offer coupons to fans along routes to game
US9294679B1 (en) * 2014-11-26 2016-03-22 Visual Supply Company Real-time perspective correction
US10242474B2 (en) 2015-07-15 2019-03-26 Fyusion, Inc. Artificially rendering images using viewpoint interpolation and extrapolation
US10222932B2 (en) 2015-07-15 2019-03-05 Fyusion, Inc. Virtual reality environment based manipulation of multilayered multi-view interactive digital media representations
US10147211B2 (en) 2015-07-15 2018-12-04 Fyusion, Inc. Artificially rendering images using viewpoint interpolation and extrapolation
US11095869B2 (en) 2015-09-22 2021-08-17 Fyusion, Inc. System and method for generating combined embedded multi-view interactive digital media representations
US11006095B2 (en) 2015-07-15 2021-05-11 Fyusion, Inc. Drone based capture of a multi-view interactive digital media
US11783864B2 (en) 2015-09-22 2023-10-10 Fyusion, Inc. Integration of audio into a multi-view interactive digital media representation
TWI567691B (zh) * 2016-03-07 2017-01-21 粉迷科技股份有限公司 立體空間的場景編輯方法與系統
US11202017B2 (en) 2016-10-06 2021-12-14 Fyusion, Inc. Live style transfer on a mobile device
US10437879B2 (en) 2017-01-18 2019-10-08 Fyusion, Inc. Visual search using multi-view interactive digital media representations
CN107205083B (zh) * 2017-05-11 2018-09-04 腾讯科技(深圳)有限公司 信息展示方法及装置
US10313651B2 (en) 2017-05-22 2019-06-04 Fyusion, Inc. Snapshots at predefined intervals or angles
US11069147B2 (en) 2017-06-26 2021-07-20 Fyusion, Inc. Modification of multi-view interactive digital media representation
RU2017144578A (ru) * 2017-12-19 2019-06-20 Александр Борисович Бобровников Способ ввода-вывода информации в пользовательское устройство и конструктивное его выполнение
US10592747B2 (en) 2018-04-26 2020-03-17 Fyusion, Inc. Method and apparatus for 3-D auto tagging
US10802667B1 (en) 2019-06-03 2020-10-13 Bank Of America Corporation Tactile response for user interaction with a three dimensional rendering
US10825245B1 (en) * 2019-06-03 2020-11-03 Bank Of America Corporation Three dimensional rendering for a mobile device
US11379080B2 (en) * 2020-06-05 2022-07-05 International Business Machines Corporation Automatically correcting touchscreen errors
US11688126B2 (en) * 2021-02-09 2023-06-27 Canon Medical Systems Corporation Image rendering apparatus and method

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020140666A1 (en) * 2001-03-29 2002-10-03 Bradski Gary R. Intuitive mobile device interface to virtual spaces
US20090197635A1 (en) * 2008-02-01 2009-08-06 Kim Joo Min user interface for a mobile device
US20100174421A1 (en) * 2009-01-06 2010-07-08 Qualcomm Incorporated User interface for mobile devices
US20100188397A1 (en) * 2009-01-28 2010-07-29 Apple Inc. Three dimensional navigation using deterministic movement of an electronic device
US20110057880A1 (en) * 2009-09-07 2011-03-10 Sony Corporation Information display apparatus, information display method and program
US20120326994A1 (en) * 2011-03-17 2012-12-27 Miyazawa Yusuke Information processing apparatus, information processing method and program

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020140666A1 (en) * 2001-03-29 2002-10-03 Bradski Gary R. Intuitive mobile device interface to virtual spaces
US20090197635A1 (en) * 2008-02-01 2009-08-06 Kim Joo Min user interface for a mobile device
US20100174421A1 (en) * 2009-01-06 2010-07-08 Qualcomm Incorporated User interface for mobile devices
US20100188397A1 (en) * 2009-01-28 2010-07-29 Apple Inc. Three dimensional navigation using deterministic movement of an electronic device
US20110057880A1 (en) * 2009-09-07 2011-03-10 Sony Corporation Information display apparatus, information display method and program
US20120326994A1 (en) * 2011-03-17 2012-12-27 Miyazawa Yusuke Information processing apparatus, information processing method and program

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109804341A (zh) * 2017-07-31 2019-05-24 腾讯科技(深圳)有限公司 与显示在用户界面上的三维互联网内容的交互
US10895953B2 (en) 2017-07-31 2021-01-19 Tencent Technology (Shenzhen) Company Limited Interaction with a three-dimensional internet content displayed on a user interface
CN107861682A (zh) * 2017-11-03 2018-03-30 网易(杭州)网络有限公司 虚拟对象的移动控制方法和装置

Also Published As

Publication number Publication date
US20140232634A1 (en) 2014-08-21
WO2014130163A1 (en) 2014-08-28

Similar Documents

Publication Publication Date Title
CN105190504A (zh) 由陀螺仪和加速度计修改的基于触摸的手势
US10712938B2 (en) Portable device and screen display method of portable device
US10891005B2 (en) Electronic device with bent display and method for controlling thereof
US10470538B2 (en) Portable terminal and display method thereof
JP6031600B2 (ja) 3d相互作用のマルチタッチジェスチャ認識の曖昧性除去
EP3019944B1 (en) User terminal device for supporting user interaction and methods thereof
US9406278B2 (en) Portable device and method for controlling screen brightness thereof
KR102491443B1 (ko) 애플리케이션을 위한 디스플레이 적응 방법 및 장치, 디바이스, 및 저장 매체
TWI590146B (zh) 多顯示裝置及其提供工具的方法
US9218685B2 (en) System and method for highlighting a feature in a 3D map while preserving depth
US9442517B2 (en) Input gestures using device movement
KR101885131B1 (ko) 디스플레이 장치의 화면 스크롤 방법 및 그 장치
KR102378570B1 (ko) 휴대 장치 및 휴대 장치의 화면 변경방법
US20130169579A1 (en) User interactions
KR20170138869A (ko) 복수의 터치스크린을 가지는 휴대 장치 및 복수의 터치스크린을 가지는 휴대 장치의 제어방법
JP2015507783A (ja) ディスプレイ装置及びそれを用いた画面モード変更方法
US9354786B2 (en) Moving a virtual object based on tapping
US9086796B2 (en) Fine-tuning an operation based on tapping
US20140194162A1 (en) Modifying A Selection Based on Tapping
KR102098258B1 (ko) 콘텐츠 편집 방법 및 이를 구현하는 전자기기
TWI668621B (zh) 可攜式終端及其顯示方法
KR20140119546A (ko) 사용자 인터페이스 표시 방법 및 장치
KR102463080B1 (ko) 머리 착용형 디스플레이 장치 및 머리 착용형 디스플레이 장치의 콘텐트 표시방법
CN113243000A (zh) 用于增强现实对象的捕捉范围
KR102508833B1 (ko) 전자 장치, 전자 장치의 문자 입력 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20151223

WD01 Invention patent application deemed withdrawn after publication