CN104520904A - 用于针对增强现实视图的布局的方法和设备 - Google Patents

用于针对增强现实视图的布局的方法和设备 Download PDF

Info

Publication number
CN104520904A
CN104520904A CN201380042384.7A CN201380042384A CN104520904A CN 104520904 A CN104520904 A CN 104520904A CN 201380042384 A CN201380042384 A CN 201380042384A CN 104520904 A CN104520904 A CN 104520904A
Authority
CN
China
Prior art keywords
expression
project
part based
display
mutual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201380042384.7A
Other languages
English (en)
Other versions
CN104520904B (zh
Inventor
A·T·S·菲亚尔霍
F·格布勒
A·派厄科维西
C·卡达尔布
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Here Global BV
Original Assignee
Here Global BV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Here Global BV filed Critical Here Global BV
Publication of CN104520904A publication Critical patent/CN104520904A/zh
Application granted granted Critical
Publication of CN104520904B publication Critical patent/CN104520904B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/10Geometric effects
    • G06T15/20Perspective computation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04806Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Computing Systems (AREA)
  • Geometry (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本公开提供了一种用于在增强现实视图中提供交互式的基于透视的兴趣点布局的方法。所述布局平台至少部分地基于在基于透视显示中的至少一个推交互或至少一个拉交互,确定用于在所述基于透视显示中对一个或多个项目的一个或多个表示进行渲染的至少一个缩放水平。所述布局平台至少部分地基于所述至少一个缩放水平而至少部分地致使对得到一个或多个表示的渲染。

Description

用于针对增强现实视图的布局的方法和设备
背景技术
服务提供商和设备制造商(例如,无线、蜂窝等)不断地受到挑战以通过例如提供引入注目的网络服务来向消费者输送价值和便利性。一个感兴趣领域是用于移动设备(例如,移动电话和/或平板电脑)的增强和/或混合现实应用的开发,其以与特定位置上的兴趣点(POI)相对应的交互式概略信息(例如,联系人信息、工作时间、评级/评论等)为特征。特别地,当交互式内容和概略信息被令人信服地在空间上链接到现实世界环境中的相应POI时,空间沉浸得以实现,从而使得用户感得模拟世界在感觉上是令人信服的并且他或她实际上“在那里”。然而,当在场景内(例如,在移动设备的显示内)发现多个POI时,概略信息可能变得难以管理且常常遮挡或妨碍场景的重要部分(例如,POI、绘图深度线索等)。结果,概略信息减少了空间沉浸潜力和因此减少了增强现实应用的有用性。因此,服务提供商和设备制造商在提供在保持增强现实视图中的空间沉浸的同时有效地传达概略信息的服务时面临显著的技术挑战。
发明内容
因此,需要一种用于在增强现实视图中提供交互式的基于透视的兴趣点布局的方法。
根据一个实施例,一种方法包括至少部分地基于在基于透视显示中的至少一个推交互或至少一个拉交互而确定用于在所述基于透视显示中对一个或多个项目的一个或多个表示进行渲染的至少一个缩放水平。该方法还包括至少部分地基于所述至少一个缩放水平而至少部分地致使对所述一个或多个表示的渲染。
根据另一实施例,一种设备包括至少一个处理器以及至少一个存储器,所述至少一个存储器包括用于一个或多个计算机程序的计算机程序代码,所述至少一个存储器和所述计算机程序代码被配置成利用所述至少一个处理器至少部分地致使所述设备:至少部分地基于在基于透视显示中的至少一个推交互或至少一个拉交互而确定用于在所述基于透视显示中对一个或多个项目的一个或多个表示进行渲染的至少一个缩放水平。该设备还至少部分地基于所述至少一个缩放水平至少部分地致使对所述一个或多个表示的渲染。
根据另一实施例,一种计算机可读存储介质承载一个或多个指令的一个或多个序列,所述指令在由一个或多个处理器执行时至少部分地致使设备:至少部分地基于在基于透视显示中的至少一个推交互或至少一个拉交互而确定用于在所述基于透视显示中对一个或多个项目的一个或多个表示进行渲染的至少一个缩放水平。该设备还至少部分地基于所述至少一个缩放水平至少部分地致使对一个或多个表示的渲染。
根据另一实施例,一种设备包括用于至少部分地基于在基于透视显示中的至少一个推交互或至少一个拉交互而确定用于在基于透视显示中对一个或多个项目的一个或多个表示进行渲染的至少一个缩放水平的装置。所述设备还包括用于至少部分地基于所述至少一个缩放水平而至少部分地致使对所述一个或多个表示的渲染的装置。
另外,对于本发明的各种示例性实施例而言,以下各项是可适用的:一种方法,包括促进对(1)数据和/或(2)信息和/或(3)至少一个信号的处理和/或对其进行处理,所述(1)数据和/或(2)信息和/或(3)至少一个信号至少部分地基于在本申请中公开与本发明的任何实施例有关的方法(或过程)中的任何一个或其任何组合(或至少部分地从其导出)。
对于本发明的各种示例性实施例而言,以下各项也是可适用的:一种方法,包括促进对至少一个接口的访问,所述至少一个接口被配置成允许访问至少一个服务,所述至少一个服务被配置成执行在本申请中公开的网络或服务提供商方法(或过程)中的任何一个或其任何组合。
对于本发明的各种示例性实施例而言,以下各项也是可适用的:一种方法,包括促进创建和/或促进修改(1)至少一个设备用户接口元件和/或(2)至少一个设备用户接口功能,所述(1)至少一个设备用户接口元件和/或(2)至少一个设备用户接口功能至少部分地基于:从在本申请中公开的与本发明的任何实施例有关的方法或过程中的一个或其任何组合得到的数据和/或信息,和/或从在本申请中公开的与本发明的任何实施例有关的方法(或过程)中的一个或任何组合得到的至少一个信号。
对于本发明的各种示例性实施例而言,以下各项也是可适用的:一种方法,包括创建和/或修改(1)至少一个设备用户接口元件和/或(2)至少一个设备用户接口功能,所述(1)至少一个设备用户接口元件和/或(2)至少一个设备用户接口功能至少部分地基于:从在本申请中公开的与本发明的任何实施例有关的方法或过程中的一个或其任何组合得到的数据和/或信息,和/或从在本申请中公开的与本发明的任何实施例有关的方法(或过程)中的一个或任何组合得到的至少一个信号。
在各种示例性实施例中,可以在服务提供商侧,或在移动设备侧,或以在两侧都执行动作的、在服务提供商与移动设备之间的任何共享方式,来实现所述方法(或过程)。
对于各种示例性实施例而言,以下各项是可适用的:一种设备包括用于执行原始提交的权利要求1-10、21-30和46-48中的任一项所述的方法的装置。
根据以下详细描述,简单地通过举例说明许多特定实施例和实施方式,包括设想用于执行本发明的最佳方式,本发明的其他方面、特征以及优点是显而易见的。本发明还能够具有其他且不同的实施例,并且可以在各种明显方面修改其多个细节,而全部均不脱离本发明的精神和范围。因此,可以认为附图和描述本质上是说明性而非限制性的。
附图说明
在说明书附图的各图中以示例的方式而非限制的方式举例说明本发明的实施例。
图1是根据一个实施例的能够在增强现实视图中提供交互式的基于透视的兴趣点布局的系统的示图;
图2是根据一个实施例的布局平台的部件的示图;
图3-图5是根据一个实施例的用于在增强现实视图中提供交互式的基于透视的兴趣点布局的过程的流程图;
图6是根据各种实施例的在图3-5的过程中利用的用户接口的示图;
图7是根据各种实施例的图3和图4的过程的顶视图的示图;
图8是可以用来实现本发明的实施例的硬件的示图;
图9是可以用来实现本发明的实施例的芯片组的示图;以及
图10是可以用来实现本发明的实施例的移动终端(例如,手机)的示图。
具体实施方式
公开了用于在增强现实视图中提供交互式的基于透视兴趣点的布局的方法、设备以及计算机程序的示例。在以下描述中,出于说明的目的,阐述了许多特定细节,以便提供对本发明的实施例的透彻理解。然而,对于本领域的技术人员而言显而易见的是,可以在没有这些特定细节的情况下或用等效布置来实施本发明的实施例。在其他情况下,以框图形式示出了众所周知的结构和设备,以便避免不必要地使本发明的实施例含糊难懂。
图1是根据一个实施例的能够在增强现实视图中提供交互式的、基于透视的兴趣点布局的系统的示图。如先前所讨论的,服务提供商与设备制造商之间的一个感兴趣领域是用于用户设备、诸如移动设备(例如,移动电话和/或平板电脑)的增强和/或混合现实应用的开发,其以与在特定位置的兴趣点(POI)相对应的交互式概略信息(例如,联系人信息、工作时间、评级/评论等)为特征。更特别地,当概略信息被令人信服地在空间链接到现实世界环境中的相应POI时,空间沉浸得以实现从而使得用户感觉到模拟世界在感觉上是令人信服的且他或她实际上“在那里”。然而,当在场景内(例如,在移动设备的显示内)发现多个POI时,概略信息可能变得难以管理且常常遮挡或妨碍场景的重要部分(例如,POI、绘图深度线索等)。结果,概略信息减少了空间沉浸潜力和因此减少了增强现实应用的有用性。
为了解决此问题,图1的系统100引入了在增强现实视图中提供交互式的基于透视的兴趣点布局的能力。在一个实施例中,系统100首先至少部分地基于一个或多个项目与诸如移动设备(例如,移动电话或平板电脑)的用户设备的基于透视显示的查看位置的距离,而至少部分地致使对一个或多个项目(例如,POI)的分类。特别地,所述一个或多个项目至少部分地包括具有已知地理坐标的一个或多个POI(例如,饭店、旅馆、旅游胜地等),并且基于透视显示是地图绘制显示,其至少部分地包括活动视图、捕捉全景、静止图像、三维地图(3D地图)或其组合。举例来说,基于透视显示可以是触摸屏的。此外,在某些实施例中,地图绘制显示还可以包括位于一个或多个界限区域或视场(例如,2m至35m)内的一个或多个项目的雷达状概观。
在一个或多个实施例中,系统100可至少部分地基于由系统100在基于透视显示中或其上(例如,在顶部、中间和/或底部透视平面上)布置的许多等距行,来确定一个或多个项目与查看位置的距离。举例来说,可将“行距”定义为用于每行的起始和结束距离阈值(例如,连续POI之间的距离的中值)。另外,在一个实施例中,底部透视平面可包括例如5行(例如,表示2m至15m),并且顶部透视平面可包括例如4或5行(例如,表示15m至35m)。此外,顶部平面和底部平面可以由系统100使用以下参数中的一个或多个来定义:(1)在平面(顶部或底部)的近端处以像素为单位的一个或多个表示的尺寸;(2)在平面(顶部或底部)的远端处以像素为单位的一个或多个表示的尺寸;(3)对应于一个或多个表示的一个或多个项目的地理位置;以及(4)基于透视显示的屏幕边界。
系统100至少部分地基于行距离的确定,将位于距离“a”与距离“a+b”之间的一个或多个项目或POI表征为“附近项目”或“附近POI,”其中“a”由底部透视平面的第一行中的一个或多个项目或POI确定,其中“b”由底部透视平面的最后一行中的一个或多个项目或POI确定。系统100然后将位于距离“a+b”与距离“c”之间的一个或多个项目表征为“远离项目”或“远离POI”,其中“c”由顶部透视平面行确定,并将位于超过距离“c”处的一个或多个项目表征为“踪迹(scent)项目”或“踪迹POI”。
在一个实施例中,一旦系统100确定了界限区域(例如,在2m与35m之间)内的一个或多个项目,系统100至少部分地基于分类来确定一个或多个项目的一个或多个表示。更特别地,在一个示例性使用情况下,系统100将一个或多个踪迹项目或踪迹POI表示为相对于一个或多个其他表示具有较低不透明度的简化块符号。相反地,系统100用表示相应项目或POI(例如,刀叉、照相机、咖啡杯、床等)的类别图形符号(glyph)将一个或多个远离项目或远离POI表示为简化块符号。此外,系统100用类别细节(例如,饭店、旅馆等)和地点细节(例如,名称、距离、评级等)两者来将一个或多个附近项目或附近POI表示为简化色彩块。
在一个或多个实施例中,系统100还至少部分地基于所述分类、与查看位置的距离或其组合来确定一个或多个项目的一个或多个表示的复杂性。更特别地,除确定与一个或多个表示相关联的视觉复杂性的程度之外,系统100还可以确定交互性程度。举例来说,在一个实施例中,如果用户轻敲一个或多个远离项目或远离POI,则系统100可以至少部分地致使与一个或多个表示、一个或多个相应项目或其组合相关联的地点细节的呈现(例如,名称、距离、评级等)。此外,在一个或多个实施例中,如果用户轻敲一个或多个附近项目或附近POI,系统100可以至少部分地致使与一个或多个项目相关联的附加信息(例如,关于项目或POI的详细信息)的呈现。然而,如果用户轻敲一个或多个踪迹项目,则系统100将不会致使与一个或多个表示、一个或多个相应项目或其组合相关联的附加信息的呈现(即,踪迹项目是不可轻敲的)。然而,一个或多个踪迹项目或踪迹POI仍可被用户拉得更近以便选择一个或多个项目。
在一个实施例中,系统100接下来至少部分地基于查看位置、查看方向或其组合来确定一个或多个表示的一个或多个取向。在一个示例性使用情况下,一个或多个表示被系统100定向成使得一个或多个表示始终面对用户的位置且一个或多个表示的拐角在面对用户时看起来略微旋转。结果,系统100至少部分地基于对查看移动设备(例如,移动电话或平板电脑)的基于透视显示的用户的360度包围,来加强用户的空间沉浸感觉。
在一个或多个实施例中,系统100然后确定用于对一个或多个表示进行定位的一个或多个拼版参数(例如,重叠程度、遮挡程度等),其中,一个或多个表示的渲染至少部分地基于一个或多个插入参数。例如,一个或多个插入参数使得系统100能够控制一个或多个较近项目(例如,POI)和一个或多个较远项目的一个或多个表示的重叠,从而使得始终显示重要信息(例如,标题)。更特别地,系统100布置基于透视显示的固定行,从而使得各行内的一个或多个表示的垂直重叠足以向用户提供绘图深度线索,同时还允许由用户选择一个或多个表示。举例来说,当系统100至少部分地致使一个或多个表示的垂直重叠时,一个或多个表示的大约25%仍是可见的。相反地,当系统100至少部分地致使水平重叠时,相应的一个或多个较远表示的左侧或右侧的约40%仍是可见的。另外,系统100至少部分地致使一个或多个表示的略微向上或向下移位以加强视觉分离。在一个实施例中,系统100在透视平面的最近行上渲染一个或多个表示,除非所述一个或多个表示比当前行距(例如,连续POI之间的距离的中值)更远,或者如果其被同一行中的其他一个或多个表示明显地遮挡。在那种情况下,系统100在后续行中渲染一个或多个表示。
在一个示例性使用情况下,系统100确定用于每行的一个或多个表示的固定尺寸(例如,用于第1行的80px、用于第2行的70px、用于第3行的60px、用于第4行的50px以及用于第5行的40px)。系统100然后可以在使一个或多个表示在受到至少一个推交互或至少一个拉交互式时,对一个或多个表示的尺寸进行内插。在所述至少一个推交互或所述至少一个拉交互之后,系统100至少部分地致使一个或多个表示的咬合以配合相应行布局。此外,在一个实施例中,虽然系统100可根据特定行关联来操纵一个或多个表示的尺寸,但一个或多个表示(例如,附近项目或附近POI)的文本尺寸保持恒定。另外,系统100可以在一个或多个表示重叠超过给定集群阈值(例如,覆盖表示的40%的重叠)时和/或在一个或多个重叠表示在给定集群阈值内(例如,比3m更近)时,将一个或多个表示(例如,附近项目)集群化。更特别地,针对每个集群,系统100可以显示集群的一个或多个表示中的最相关的一个和/或集群内的一个或多个表示的数目(例如,“+3”)。此外,一旦系统100确定了与集群的交互(例如,轻敲),则一个或多个表示的集群可以垂直地扩展以显示包含在集群中的全部的一个或多个表示。
在一个或多个实施例中,一旦系统100确定一个或多个表示的布局逻辑,则系统100至少部分地基于在基于透视显示中的至少一个推交互或至少一个拉交互,来确定用于在基于透视显示中渲染一个项目(例如,附近项目)的一个或多个表示的至少一个缩放水平。特别地,所述至少一个拉交互使得用户能够将一个或多个远离表示(例如,踪迹项目和/或远离项目)拉得更近,并在显示器上将其显示得更大,并且所述至少一个推交互使得用户能够将一个或多个附近表示(例如,附近项目)推到远处并使得其在显示器上更小(即,基于他们在呈现的透视中的相对位置而渲染一个或多个表示的尺寸)。此外,所述至少一个推交互或所述至少一个拉交互使得用户能够根据距离而过滤在基于透视显示中所示的信息。进一步举例来说,用户可在触摸或并未触摸显示器上的一个或多个表示(诸如POI)的情况下,将他或她的手指或触笔放置在用户设备(例如,移动电话或平板电脑)的显示器上的任何位置,并且通过在显示器上向下拉动或拖曳手指来在透视图中将一个或多个表示或一个或多个表示群组移动得更近,并且通过在显示器上向上拉动或拖曳手指来在透视图中将一个或多个表示或一个或多个表示群组移动得更远。进一步举例来说,还可用向上和向下键按钮来驱使一个或多个表示的移动。
在一个实施例中,系统100然后至少部分地基于所述至少一个缩放水平、所述至少一个推交互、所述至少一个拉交互或其组合来确定一个或多个表示沿着基于透视显示的一个或多个平面的一个或多个位置,其中由系统100进行的对一个或多个表示的渲染至少部分地基于所述一个或多个位置。如先前所讨论的,在一个实施例中,系统100在基于透视显示的顶面上布置一个或多个远离表示(例如,踪迹项目和/或远离项目)并在基于透视显示的底面上布置一个或多个附近表示(例如,附近项目)。结果,显示器的中心区域保持没有一个或多个表示,从而允许用户在所述一个或多个表示不遮挡或不妨碍场景的重要部分(例如,POI、绘图深度线索等)的情况下,利用他或她的移动设备来探索现实世界环境。此外,系统100可以将一个或多个表示定位于顶面或底面上,从而使得所述一个或多个表示平行于水平线,并且系统100然后可以根据所述至少一个用户接口的位置来调整一个或多个表示的定位。例如,如果用户在实时视图显示期间将他或她的移动设备(例如,移动电话或平板电脑)倾斜,则系统100可以相应地基本上实时地调整对一个或多个表示或对整个布局的定位。在某些实施例中,系统100还可以确定沿着单个透视平面、例如在基于透视显示的底部上对一个或多个表示进行定位。此外,在至少一个搜索功能期间,系统100可以更多地基于搜索相关性而不是距离在基于透视显示中对一个或多个表示进行定位。例如,系统100可以将最相关的一个或多个表示中的8个定位于第一行中、然后将接下来最相关的一个或多个表示中的6个定位于第二行中、4个定位在下一行中等等。
在一个或多个实施例中,系统100然后至少部分地基于所述至少一个缩放水平而至少部分地致使对所述一个或多个表示的渲染。更特别地,随着通过至少一个拉交互而增加所述至少一个缩放水平,系统100至少部分地致使一个或多个表示的尺寸和不透明度增加至一定程度。特别地,随着用于渲染一个或多个附近项目或附近POI的所述至少一个缩放水平增加(例如,2m至0m),系统100可以至少部分地与对照相机进行变焦类似的方式致使一个或多个表示的渲染,从而使得一个或多个表示的尺寸在不透明度减小的同时增加,直至一个或多个表示从视图消失为止。相反地,系统100在通过至少一个推交互而减小所述至少一个缩放水平时,至少部分地致使一个或多个表示的尺寸和不透明度减小。此外,系统100可以随着一个或多个踪迹项目跨过阈值变成一个或多个远离项目,而至少部分地致使类别图形符号以及简化块符号的渲染。同样地,随着一个或多个远离项目跨过阈值变成一个或多个附近项目,系统100可以至少部分地致使从顶部透视平面下降至底部透视平面且然后扩展以显示地点细节(例如,名称、距离、评级等)的一个或多个远离项目的渲染。更特别地,一个或多个表示(例如,远离项目)从顶部透视平面到底部透视平面的过渡或相反的过渡至少部分地包括由系统100实现的动画,该动画连续地最小化从一个或多个表示(例如,远离项目)的当前状态到一个或多个表示(例如,附近项目)的目标状态的距离且在基于透视显示中按照每帧进行更新。另外,在其中在一个或多个表示处于从一个透视平面到另一个(例如,从顶部透视平面到底部透视平面)的过渡中的同时由系统100确定另外的至少一个推交互或至少一个拉交互的示例性使用情况下,系统100可以停止该动画,并且至少部分地致使从基于透视显示中的一个或多个表示的最后状态开始的相反的动画的渲染。
另外,系统100可以至少部分地致使一个或多个表示的渲染,从而使得所述至少一个推交互或所述至少一个拉交互将沿着在查看位置与一个或多个项目(POI)之间投射的射线的轨迹使一个或多个表示移动得更加接近或更加远离查看位置。此外,基于所述至少一个拉交互,系统100可以至少部分地致使一个或多个表示的渲染,由此,一个或多个表示的最后一行朝着第一行移动,同时由系统100从基于透视显示的顶部平面检索一个或多个表示的下一行。此外,可设想此过程在至少一个推交互之后反向地以相同方式工作。
在一个实施例中,系统100还至少部分地基于所述至少一个推交互或所述至少一个拉交互而至少部分地致使与一个或多个表示相关联的反馈信息的呈现。举例来说,所述至少一个推交互或所述至少一个拉交互可以被系统100渲染为所述至少一个用户接口上的圆圈,并且系统100还可以至少部分地致使在基于透视显示的底部透视平面的顶部上对动画透视网格的渲染。在某些实施例中,系统100还可以至少部分地致使对距离指示符或滚动条以及透视网格的渲染。此外,系统100可以至少部分地致使基于透视显示的左上角中的雷达例如改变为使得至少部分地基于所述至少一个推交互或所述至少一个拉交互而为用户提供关于一个或多个项目或POI中的哪些在所述至少一个界限区域内的线索。
在一个或多个实施例中,系统100可以用来确定关于所述一个或多个用户接口的一个或多个轻扫手势。举例来说,所述一个或多个轻扫手势可至少部分地包括用户将他或她的手指放置在移动设备(例如,移动电话或平板电脑)的用户接口上且然后将他或她的手指从用户接口的一个边缘拖曳至另一个。在一个实施例中,系统100然后至少部分地基于一个或多个轻扫手势来确定要渲染的一个或多个表示。例如,系统100可以至少部分地基于一个或多个轻扫手势来确定要渲染的一个或多个表示的数目或一个或多个表示在基于透视显示内移动的速度。更特别地,系统100可以至少部分地基于一个或多个轻扫手势,以与向上翻页或向下翻页功能类似的方式改变底面上的一个或多个表示中的全部表示。此外,在一个示例性使用情况下,系统100还可以至少部分地基于一个或多个轻扫手势来确定对一个或多个表示的整个视图进行重置。
在一个实施例中,系统100还可以确定与所述至少一个用户接口、所述一个或多个表示、所述一个或多个项目或其组合的至少一个轻敲交互。如先前所讨论的,一个或多个远离项目或远离POI和一个或多个附近项目或附近POI具有可轻敲功能,但是一个或多个踪迹项目或踪迹POI是不可轻敲元件。因此,系统100可以至少部分地基于一个或多个轻敲交互,而至少部分地致使与一个或多个表示、一个或多个项目或其组合相关联的详细信息的呈现。更特别地,如果用户轻敲一个或多个远离项目或远离POI,则系统100可以至少部分地致使与一个或多个相应项目相关联的地点细节(例如,名称、距离、评级等)的呈现。同样地,如果用户轻敲一个或多个附近项目或附近POI,则系统100可以至少部分地致使与一个或多个项目相关联的关于页面或细节页面的呈现,所述关于页面或细节页面临时地替换基于透视显示。例如,细节页面可包括一个或多个项目的深入描述。在一个示例性使用情况下,并非替换基于透视显示,系统100可以将基于透视显示与细节页面结合,以使得用户可以移动一个或多个所选表示(例如,附近项目)以匹配地图的一部分上的项目的现实世界位置。另外,当系统100至少部分地致使一个或多个表示(例如,附近项目或附近POI)的集群化且系统100将集群渲染为扩展栈时,如果用户在除该栈所在位置之外的某处轻敲所述至少一个用户接口,则该系统可以至少部分地致使该扩展栈返回至集群。
在某些实施例中,系统100还可以至少部分地致使一个或多个基于建筑物的遮挡模型的渲染,以减少特定场景或视图中的噪声。举例来说,系统100可以至少部分地致使基于一个或多个图像识别技术而用半透明掩膜来覆盖一个或多个建筑物或POI。更特别地,系统100可以使得用户能够轻敲一个或多个模型,以确定与建筑物、POI或其组合相关联的附加内容(例如,联系人信息、工作时间、评级/评论等)。
如图1中所示,系统100包括具有经由通信网络105到布局平台103的连接性的用户设备(UE)101(例如,移动电话或平板电脑)。UE 101可以包括一个或多个应用107a-107m(也统称为应用107)或与之相关联。举例来说,应用107可包括增强和/或混合现实应用、地图绘制和/或导航应用、社交联网应用等。
在一个实施例中,布局平台103可包括至少一个POI数据库109或与之相关联。在一个示例中,布局平台103可整体地或部分地存在于UE 101内或者独立地存在,并且POI数据库109可整体地或部分地存在于布局平台103内或独立地存在。POI数据库109可包括一个或多个项目或POI(例如,踪迹项目、远离项目和/或附近项目)的一个或多个表示以及一个或多个基于建筑物的遮挡模型。POI数据库109还可包括一个或多个捕捉图像、捕捉全景或其组合。另外,POI数据库109还可包括一个或多个POI布局、POI布局逻辑或其组合,以用于确定一个或多个表示在基于透视显示中的一个或多个位置。此外,POI数据库109还可包括对应于一个或多个项目或POI的一个或多个地点细节和一个或多个关于页面或细节页面。
UE 101还经由通信网络105而连接到服务平台111。服务平台111包括一个或多个服务113a-113n(也统称为服务113)。服务113可包括用于应用107的各种宽泛的内容提供服务。举例来说,服务113可包括地图绘制服务、导航服务、搜索相关服务、社交联网服务(例如,POI的评级/评论)、基于位置服务等。UE 101、服务平台111以及服务113还具有到一个或多个内容提供商115a-115p(也统称为内容提供商115)的连接性。内容供应商115还可向系统100的各部件提供各种宽泛内容(例如,关于页面或细节页面)。
在某些实施例中,一个或多个应用107的布局平台103可利用基于位置技术(例如,全球定位系统(GPS)、蜂窝三角测量、辅助GPS(A-GPS)等)来确定UE 101的位置。例如,UE 101可包括GPS接收机以从卫星117获得地理坐标,以确定其相对于附近区域中的一个或多个项目或POI的当前位置。另外,一个或多个应用107可基于相对于UE 101的位置向服务113和/或内容供应商115中的一个或多个发出针对基于位置数据(例如,POI、距离、地图等)的请求。
举例来说,系统100的通信网络105包括一个或多个网络,诸如数据网络、无线网络、电话网络或其任何组合。可设想数据网络可以是任何局域网(LAN)、城域网(MAN)、广域网(WAN)、公共数据网(例如,因特网)、近程无线网络或任何其他适当的分组交换网,诸如商业所有的专有分组交换网,例如专有电缆或光纤网络等或其任何组合。另外,无线网络可以是例如蜂窝网络,并且可采用各种技术,包括增强数据速率全球演进(EDGE)、通用分组无线电服务(GPRS)、全球移动通信系统(GSM)、网际协议多媒体子系统(IMS)、通用移动电信系统(UMTS)等,以及任何其他适当无线介质,例如全球微波接入互操作(WiMAX)、长期演进(LTE)网络、码分多址(CDMA)、宽带码分多址(WCDMA)、无线保真(WiFi)、无线LAN(WLAN)、Bluetooth网际协议(IP)数据广播、卫星、移动自组网络(MANET)等或其任何组合。
UE 101是任何类型的用户终端、移动终端、固定终端或便携式终端,包括移动手机、站、单元、设备、多媒体计算机、多媒体平板电脑、因特网节点、通信设备、台式计算机、膝上型计算机、笔记本计算机、上网本计算机、平板计算机、个人通信系统(PCS)设备、个人导航设备、个人数字助理(PDA)、音频/视频播放器、数字式照相机/录像摄像机、定位设备、电视接收机、无线电广播接收器、电子书设备、游戏设备或其任何组合,包括这些设备的附件和外围设备或其任何组合。还可设想的是,UE 101可以支持到用户的任何类型的接口(诸如“可穿戴”电子电路等)。
在一个实施例中,布局平台103首先至少部分地基于与UE 101(例如,移动电话或平板电脑)的基于透视显示的查看位置的距离,至少部分地致使对一个或多个项目的分类。更特别地,所述一个或多个项目至少部分地包括具有已知地理坐标的一个或多个POI(例如,饭店、旅馆、旅游胜地等),并且基于透视显示是地图绘制显示,其至少部分地包括实况视图、捕捉全景、静止图像或其组合。另外,布局平台103可至少部分地基于由布局平台103在例如基于透视显示的顶部和底部透视平面上的许多等距行来确定一个或多个项目与查看位置的距离。结果,布局平台103将位于距离“a”与距离“a+b”之间的一个或多个项目表征为附近项目或附近POI;将位于距离“a+b”与距离“c”之间的一个或多个项目表征为远离项目或远离POI;并将超过距离“c”定位的一个或多个项目表征为踪迹项目或踪迹POI。
在一个实施例中,一旦布局平台103确定了界限区域(例如,在2m与35m之间)内的一个或多个项目,布局平台103至少部分地基于所述分类来确定一个或多个项目的一个或多个表示。如先前所讨论的,布局平台103可以将一个或多个踪迹项目或踪迹POI表示为相对于一个或多个其他表示具有较低不透明度的简化块符号。相反地,布局平台103可以用类别图形符号将一个或多个远离项目表示为简化块符号,并用类别图形符号和地点细节两者将一个或多个附近项目表示为简化彩色块。
在一个或多个实施例中,布局平台103至少部分地基于所述分类、与查看位置的距离或其组合来确定一个或多个项目的一个或多个表示的复杂性。更特别地,除确定与一个或多个表示相关联的视觉复杂程度之外,布局平台103还可以确定与一个或多个表示的交互性程度。例如,在一个实施例中,如果用户轻敲一个或多个远离项目或远离POI,则布局平台103可以至少部分地致使与表示、一个或多个相应项目或POI或其组合相关联的地点细节的呈现(例如,名称、距离、评级等)。此外,在一个或多个实施例中,如果用户轻敲一个或多个附近项目,布局平台103可以至少部分地致使与一个或多个项目相关联的附加信息(例如,关于项目或POI的详细信息)的呈现。然而,如果用户轻敲一个或多个踪迹项目,则布局平台103将不会致使与一个或多个表示、一个或多个相应项目或POI或其组合相关联的附加信息的呈现(即,踪迹项目是不可轻敲的)。尽管如此,一个或多个踪迹项目仍可以被用户拉得更近以便选择该一个或多个项目。
在一个实施例中,布局平台103接下来至少部分地基于查看位置、查看方向或其组合来确定一个或多个表示的一个或多个取向。在一个示例性使用情况下,一个或多个表示被布局平台103定向成使得一个或多个表示始终面对用户的位置且一个或多个表示的拐角在面对用户时看起来略微旋转。除一个或多个表示的取向之外,布局平台103还确定用于对一个或多个表示进行定位的一个或多个拼插入参数(例如,重叠程度、遮挡程度等),其中,一个或多个表示的渲染至少部分地基于一个或多个插入参数。如先前所讨论的,布局平台103布置基于透视显示的一个或多个组织行,使得行内的一个或多个表示的垂直重叠足以向用户提供绘图深度线索而不覆盖重要信息,且同时还允许由用户选择一个或多个表示。
在一个或多个实施例中,一旦布局平台103确定一个或多个表示的布局逻辑,则布局平台103可以确定与UE 101的所述至少一个用户接口的至少一个推交互或至少一个拉交互。布局平台103接下来至少部分地基于所述至少一个推交互或所述至少一个拉交互,来确定用于在UE 101的基于透视显示中渲染一个或多个项目(例如,附近项目)的一个或多个表示的至少一个缩放水平。如先前所讨论的,所述至少一个拉交互使得用户能够将一个或多个远离表示(例如,踪迹项目和/或远离项目)拉得更近,且所述至少一个推交互使得用户能够将一个或多个附近表示(例如,附近项目)推到远处。
在一个实施例中,布局平台103然后至少部分地基于所述至少一个缩放水平、所述至少一个推交互、所述至少一个拉交互或其组合,来确定一个或多个表示沿着UE 101的基于透视显示的一个或多个平面的一个或多个位置,其中,由布局平台103进行的一个或多个表示的渲染至少部分地基于所述一个或多个位置。特别地,在一个实施例中,布局平台103在基于透视显示的顶面上布置一个或多个远离表示(例如,踪迹项目和/或远离项目),并在显示的底面上布置一个或多个附近表示(例如,附近项目)。结果,基于透视显示的中心区域保持没有一个或多个表示。
在一个或多个实施例中,布局平台103然后至少部分地基于所述至少一个缩放水平,而至少部分地致使所述一个或多个表示的渲染。更特别地,布局平台103随着通过至少一个拉交互而增加所述至少一个缩放水平,至少部分地致使一个或多个表示的尺寸和不透明度增加至一定程度。相反地,布局平台103在通过至少一个推交互减小所述至少一个缩放水平时至少部分地致使一个或多个表示的尺寸和不透明度减小。此外,布局平台103可以随着一个或多个踪迹项目跨过阈值而变成一个或多个远离项目,至少部分地致使类别图形符号以及简化块符号的渲染。同样地,随着一个或多个远离项目跨过阈值变成一个或多个附近项目,布局平台103可以至少部分地致使从顶部透视平面下降至底部透视平面且然后扩展以显示地点细节(例如,名称、距离、评级等)的一个或多个远离项目的渲染。更特别地,一个或多个表示(例如,远离项目)从顶部透视平面到底部透视平面的过渡或相反的过渡至少部分地包括由布局平台103实现的动画,该动画连续地缩小从一个或多个表示(例如,远离项目)的当前状态到一个或多个表示(例如,附近项目)的目标状态的距离且在基于透视显示中被按照每帧进行更新。另外,在其中在一个或多个表示处于从一个透视平面到另一个(例如,从顶部透视平面到底部透视平面)的过渡中的同时布局平台103确定另外的至少一个推交互或至少一个拉交互的示例性使用情况下,布局平台103可以停止该动画,并且至少部分地致使从基于透视显示中的一个或多个表示的最后状态开始的相反的动画的渲染。
另外,布局平台103可以至少部分地致使一个或多个表示的渲染,以使得所述至少一个推交互或所述至少一个拉交互将使一个或多个表示遵循在查看位置与一个或多个项目(POI)之间所投射的射线的轨迹而移动得更接近或更远离查看位置。此外,基于所述至少一个拉交互,布局平台103可以至少部分地致使一个或多个表示的渲染,以使得一个或多个表示的最后一行朝着第一行移动,同时由布局平台103从基于透视显示的顶面检索一个或多个表示的下一行。如先前所讨论的,可设想此过程在至少一个推交互之后以相同方式反向地工作。
在一个实施例中,布局平台103还至少部分地基于所述至少一个推交互或所述至少一个拉交互,而至少部分地致使与一个或多个表示相关联的反馈信息的呈现。举例来说,所述至少一个推交互或所述至少一个拉交互可被布局平台103渲染为所述至少一个用户接口上的圆圈,并且布局平台103还可以至少部分地致使基于透视显示的底部透视平面的顶部上的动画透视网格的渲染。此外,布局平台103可以至少部分地致使基于透视显示的左上拐角中的雷达例如改变,以使得至少部分地基于所述至少一个推交互或所述至少一个拉交互而为用户提供关于一个或多个项目或POI中的哪个在所述至少一个界限区域内的线索。
在一个或多个实施例中,布局平台103可以确定关于UE 101(例如,移动电话或平板电脑)的所述至少一个用户接口的一个或多个轻扫、轻敲、推、拉和/或拖曳手势。至少部分地基于一个或多个轻扫手势,例如布局平台103然后可以确定要渲染的一个或多个表示。举例来说,布局平台103可以至少部分地基于一个或多个轻扫手势来确定要渲染的一个或多个表示的数目或一个或多个表示在基于透视显示内移动的速度。另外,布局平台103还可以确定与所述至少一个用户接口、所述一个或多个表示、所述一个或多个项目或其组合的至少一个轻敲交互。更特别地,如果用户轻敲一个或多个远离项目或远离POI,则布局平台103可以至少部分地致使与一个或多个项目相关联的地点细节的呈现。同样地,如果用户轻敲一个或多个附近项目或附近POI,则布局平台103可以至少部分地致使与一个或多个项目相关联的关于页面或细节页面的呈现。如先前所讨论的,细节页面可包括一个或多个项目的深入描述。
在某些实施例中,布局平台还103可以至少部分地致使一个或多个基于建筑物的遮挡模型的渲染以减少特定场景或视图中的噪声。此外,布局平台103可以至少部分地致使基于一个或多个图像识别技术而用半透明掩膜对一个或多个建筑物或POI的覆盖。另外,布局平台103可以使得用户能够轻敲一个或多个模型其中之一以确定与建筑物、POI或其组合相关联的附加内容(例如,联系人信息、工作时间、评级/评论等)。
举例来说,UE 101、布局平台103、服务平台111、内容供应商115以及卫星117使用众所周知、新的或仍在开发的协议相互通信以及与通信网络105的其他部件通信。在本文中,协议包括定义通信网络105内的网络节点如何基于通过通信链路发送的信息而彼此相交互的一组规则。从生成并接收各种类型的物理信号、到选择用于传输那些信号的链路、到那些信号所指示的信息的格式、到识别在计算机系统上执行的哪个软件应用发送或接收信息,协议在每个节点内的不同操作层处是有效的。在开放式系统互连(OSI)参考模型中描述了用于通过网络来交换信息的概念上不同协议层。
网络节点之间的通信通常通过交换离散数据分组来实现。每个分组通常包括(1)与特定协议相关联的报头信息,以及(2)有效负荷信息,其在报头信息之后且包含可独立于该特定协议而被处理的信息。在某些协议中,分组包括(3)报尾信息,其在有效负荷之后且指示有效负荷信息的结束。该报头包括诸如分组的源、其目的地、有效负荷长度以及协议所使用的其他性质之类的信息。用于特定协议的有效负荷中的数据常常包括用于与OSI参考模型的不同较高层相关联的不同协议的报头和有效负荷。用于特定协议的报头通常指示用于包含在其自己的有效负荷中的下一协议的类型。高层协议据说是被密封在低层协议中。包括在穿过诸如因特网之类的多个异构网络的分组中的报头通常包括由OSI参考模型定义的物理(层1)报头、数据链路(层2)报头、因特网(层3)报头和传输(层4)报头以及各种应用(层5、层6和层7)报头。
图2是根据一个实施例的布局平台103的部件的图。举例来说,布局平台103包括用于在增强现实视图中提供交互式基于透视兴趣点布局的一个或多个部件。可设想的是,可在一个或多个部件中将这些部件的功能组合或者由等效功能的其他部件来执行。在本实施例中,布局平台103包括控制逻辑201、通信模块203、上下文模块205、分析器模块207、地图绘制模块209、用户接口(UI)模块211、渲染模块213和存储模块215。
控制逻辑201监督任务,包括由通信模块203、上下文模块205、分析器模块207、地图绘制模块209、UI模块211、渲染模块213以及存储模块215执行的任务。例如,虽然其他模块可执行实际任务,但控制逻辑201可以确定何时和如何执行那些任务或指挥其他模块执行任务。通信模块203被用于UE 101、布局平台103、应用107、POI数据库109、服务平台111、服务113、内容提供商115以及卫星117之间的通信。通信模块203还可用来传送命令、请求、数据等。
上下文模块204用来至少部分地基于与基于透视显示的查看位置的距离,来至少部分地致使对一个或多个项目(例如,POI)的分类。更特别地,在一个实施例中,上下文模块205至少部分地基于由上下文模块25布置在例如基于透视显示的顶部和底部透视平面上的许多等距行,而将一个或多个项目表征为踪迹项目、远离项目或附近项目。上下文模块205还可用来至少部分地基于查看位置、查看方向或其组合来确定一个或多个表示的一个或多个取向。
分析器模块207用来至少部分地基于一个或多个项目的分类(例如,踪迹项目、远离项目和/或附近项目)来确定一个或多个项目(例如,POI)的一个或多个表示。分析器模块207还可用来至少部分地基于分类、查看位置的距离或其组合来确定一个或多个表示的复杂性。例如,分析器模块207可确定一个或多个表示中的哪些具有轻敲功能性。
地图绘制模块209用来确定用于对一个或多个表示进行定位的一个或多个插入参数(例如,重叠程度、遮挡成都等)。例如,地图绘制模块209可以控制一个或多个较近项目和一个或多个较远项目的一个或多个表示的重叠,以使得在不覆盖重要信息(例如,标题)的情况下提供绘图深度线索。与UI模块211相结合,该地图绘制模块209还可用来至少部分地基于所述至少一个推交互或所述至少一个拉交互来确定用于在基于透视显示中渲染一个或多个项目的一个或多个表示的至少一个缩放水平。此外,地图绘制模块209还可用来至少部分地基于所述至少一个缩放水平、所述至少一个推交互、所述至少一个拉交互或其组合来确定一个或多个表示沿着基于透视显示的一个或多个平面的一个或多个位置。更特别地,在一个实施例中,地图绘制模块209在基于透视显示的顶面上布置一个或多个远离表示(例如,踪迹项目和/或远离项目)并在基于透视显示的底面上布置一个或多个附近表示(例如,附近项目)。
用户接口(UI)模块211用来确定与描述基于透视显示的所述至少一个用户接口的至少一个推交互或至少一个拉交互。举例来说,用户可在触摸或并未触摸显示器上的一个或多个表示(诸如POI)的情况下,将他或她的手指或触笔放置在用户设备(例如,移动电话或平板电脑)的显示器上的任何位置,并且通过在显示器上向下拉动或拖曳手指,将一个或多个表示或一个或多个表示群组在透视图中移动得更近,并且通过在显示器上向上拉动或拖曳手指将一个或多个表示或一个或多个表示群组在透视图中移动得更远。进一步举例来说,还可以用向上和向下键按钮来驱动一个或多个表示的移动。UI模块211还可用来确定关于所述一个或多个用户接口的一个或多个轻扫手势。例如,所述一个或多个轻扫手势可以至少部分地包括用户将他或她的手指放置在移动设备的用户接口上且然后将他或她的手指从用户接口的一个边缘拖曳至另一个。UI模块211还可用来确定与所述一个或多个用户接口、所述一个或多个表示(例如,踪迹项目、远离项目和/或附近项目)、所述一个或多个项目(例如,POI)或其组合的至少一个轻敲交互。此外,UI模块211还可用来至少部分地基于一个或多个轻敲交互,而至少部分地致使与一个或多个表示、一个或多个项目或其组合相关联的详细信息的呈现。
渲染模块213用来至少部分地基于所述至少一个缩放水平而至少部分地致使一个或多个表示(例如,踪迹项目、远离项目和/或附近项目)的渲染。例如,渲染模块213随着通过所述至少一个拉交互增加所述至少一个缩放水平,而至少部分地致使一个或多个表示的尺寸和不透明度增加至一定程度。相反地,在通过所述至少一个推交互减小所述至少一个缩放水平时,渲染模块213至少部分地致使一个或多个表示的尺寸和不透明度减小。另外,渲染模块213至少部分地基于一个或多个表示的位置而至少部分地致使所述一个或多个表示的视觉复杂性的增加或减小。渲染模块213还可用来至少部分地基于所述至少一个推交互或所述至少一个拉交,互而至少部分地致使与一个或多个表示相关联的反馈信息的呈现。此外,渲染模块213还可用来至少部分地基于一个或多个轻扫手势,来确定要渲染的一个或多个表示。
存储模块215用来管理存储在POI数据库109中的一个或多个基于建筑物的遮挡模型和一个或多个项目或POI(例如,踪迹项目、远离项目和/或附近项目)的一个或多个表示的存储。存储模块215还可用来管理存储在POI数据库109中的一个或多个捕捉图像、一个或多个捕捉全景或其组合的存储。另外,存储模块215还可用来管理存储在POI数据库109中的一个或多个POI布局、一个或多个POI布局逻辑或其组合的存储。此外,存储模块215还可用来管理存储在POI数据库109中的一个或多个地点细节和一个或多个关于页面或细节页面的存储。
图3-5是根据一个实施例的用于在增强现实视图中提供交互式的基于透视兴趣点布局的过程的流程图。图3描述了确定一个或多个表示的布局逻辑的过程300。在一个实施例中,布局平台103执行过程300并例如在包括如图9中所示的处理器和存储器的芯片组中实现。在步骤301中,布局平台103至少部分地基于一个或多个项目与基于透视显示的查看位置的距离,而至少部分地致使一个或多个项目的分类。举例来说,所述一个或多个项目至少部分地包括一个或多个POI(例如,饭店、旅馆、旅游胜地等),并且基于透视显示是地图绘制显示,其至少部分地包括实况视图、捕捉全景、静止图像、3D地图或其组合。另外,布局平台103可至少部分地基于由布局平台103在例如基于透视显示的顶部和底部透视平面上布置的许多等距行,来确定一个或多个项目与查看位置的距离。此外,可由布局平台103使用以下参数中的一个或多个来定义顶部和底部平面:(1)在平面(顶部或底部)的近端处的以像素为单位的一个或多个表示的尺寸;(2)在平面(顶部或底部)的远端处的以像素为单位的一个或多个表示的尺寸;(3)对应于一个或多个表示的一个或多个项目的地理位置;以及(4)基于透视显示的屏幕边界。结果,布局平台103将位于距离“a”与距离“a+b”之间的一个或多个项目表征为附近项目或附近POI;将位于距离“a+b”与距离“c”之间的一个或多个项目表征为远离项目或远离POI;并将超过距离“c”定位的一个或多个项目表征为踪迹项目或踪迹POI。
在步骤303中,布局平台103至少部分地基于所述分类来确定一个或多个项目的一个或多个表示。举例来说,在一个实施例中,布局平台103将一个或多个踪迹项目或踪迹POI表示为相对于一个或多个其他表示具有较低不透明度的简化彩色块符号。相反地,布局平台103用表示相应项目或POI(例如,刀叉、照相机、咖啡店、窗等)的类别图形符号将一个或多个远离项目或远离POI表示为简化彩色块。此外,布局平台103用类别图形符号和地点细节(例如,名称、距离、评级等)两者来将一个或多个附近项目或附近POI表示为简化彩色块。
在步骤305中,布局平台103至少部分地基于分类、与查看位置的距离或其组合来确定一个或多个项目的一个或多个表示的复杂性。更特别地,除确定与一个或多个表示相关联的视觉复杂程度之外,布局平台103还可以确定交互性程度。例如,在一个实施例中,如果用户轻敲一个或多个远离项目或远离POI,则布局平台103可以至少部分地致使与一个或多个表示、一个或多个相应项目或POI或其组合相关联的地点细节的呈现(例如,名称、距离、评级等)。此外,在一个或多个实施例中,如果用户轻敲一个或多个附近项目或附近POI,布局平台103可以至少部分地致使与一个或多个项目相关联的附加信息(例如,关于项目或POI的详细信息)的呈现。然而,如果用户轻敲一个或多个踪迹项目,则布局平台103将不会致使与一个或多个表示、一个或多个相应项目或POI或其组合相关联的附加信息的呈现(即,踪迹项目是不可轻敲的)。尽管如此,一个或多个踪迹项目仍可以被用户拉得更近,以便选择该一个或多个项目。
在步骤307中,布局平台103接下来至少部分地基于查看位置、查看方向或其组合来确定一个或多个表示的一个或多个取向。在一个示例性使用情况下,一个或多个表示被布局平台103定向成使得一个或多个表示始终面对用户的位置且一个或多个表示的拐角在面对用户时看起来略微旋转。因此,布局平台103至少部分地基于对查看移动设备(例如,移动电话或平板电脑)的基于透视显示的用户的360度包围来加强用户的空间沉浸感觉。
在步骤309中,布局平台103确定用于对一个或多个表示进行定位的一个或多个插入参数,其中,所述一个或多个表示的渲染至少部分地基于一个或多个插入参数。举例来说,一个或多个拼版参数可包括重叠程度、遮挡程度等。此外,一个或多个拼版参数使得布局平台103能够控制一个或多个较近项目(例如,POI)和一个或多个较远项目的一个或多个表示的重叠,以使得始终显示重要信息(例如,标题)。更特别地,布局平台103布置基于透视显示的固定行,使得行内的一个或多个表示的垂直重叠足以向用户提供绘图深度线索而不覆盖重要信息且同时还允许由用户选择一个或多个表示。举例来说,当布局平台103至少部分地致使一个或多个表示的垂直重叠时,一个或多个表示的大约25%仍是可见的。相反地,当布局平台103至少部分地致使水平重叠市,相应的一个或多个较远表示的左侧或右侧的约40%仍是可见的。另外,布局平台103至少部分地致使一个或多个表示的略微向上或向下移位以加强视觉分离。此外,在一个实施例中,布局平台103还可以确定在一个或多个表示重叠超过给定集群阈值(例如,覆盖表示的40%的重叠)时和/或一个或多个重叠表示在给定集群阈值内(例如,比3m更近)时,将一个或多个表示(例如,附近项目)集群化。特别地,针对每个集群,布局平台103可显示集群的一个或多个表示中的最相关的一个和/或集群内的一个或多个表示的数目(例如,“+3”)。
图4描述确定与移动设备(例如,移动电话或平板电脑)的至少一个用户接口的一个或多个主要交互的过程400。在一个实施例中,布局平台103执行过程400并例如在包括如图9中所示的处理器和存储器的芯片组中实现。在步骤401中,布局平台103至少部分地基于在基于透视显示中的至少一个推交互或至少一个拉交互,而确定用于在基于透视显示中渲染一个或多个项目的一个或多个表示的至少一个缩放水平。举例来说,如先前所讨论的,用户可在触摸或没有触摸显示器上的一个或多个表示(诸如POI)的情况下,将他或她的手指或触笔放置在用户设备(例如,移动电话或平板电脑)的显示器上的任何位置处,并且通过在显示器上向下拉动或拖曳手指来将一个或多个表示或一个或多个表示群组在透视图中移动得更近,并使得一个或多个表示更大。相反地,通过在显示器上向上拉动或拖曳他或她的手指,用户可将一个或多个表示或者一个或多个表示群组在透视图中移动得更远并使得一个或多个表示更小。进一步举例来说,还可用向上和向下键按钮来驱使一个或多个表示的移动。另外,所述至少一个推交互或所述至少一个拉交互使得用户能够根据透视中的距离而过滤在基于透视显示中所示的信息。
在步骤403中,布局平台103然后至少部分地基于所述至少一个缩放水平、所述至少一个推交互、所述至少一个拉交互或其组合,来确定一个或多个表示沿着基于透视显示的一个或多个平面的一个或多个位置,其中,一个或多个表示的渲染至少部分地基于所述一个或多个位置。在一个示例性使用情况下,布局平台104可以在基于透视显示的顶面上布置一个或多个远离表示(例如,踪迹项目)并在基于透视显示的底面上布置一个或多个附近表示(例如,附近项目)。因此,显示器的中心区域保持没有所述一个或多个表示,从而允许用户在所述一个或多个表示不遮挡或妨碍场景的重要部分(例如,POI、绘图深度线索等)的情况下,用他或她的移动设备来探索现实世界环境。此外,布局平台103可以将一个或多个表示定位于顶面或底面上,以使得所述一个或多个表示平行于水平线,并且布局平台103还可以根据所述至少一个用户接口的位置来调整一个或多个表示的定位。举例来说,如果用户在实时视图显示期间将他或她的移动设备(例如,移动电话或平板电脑)倾斜,则布局平台103可以相应地基本上实时地调整一个或多个表示或整个布局的定位。在某些实施例中,布局平台103还可以确定沿着基于透视显示的底部上的单个透视平面,对一个或多个表示进行定位。
在步骤405中,布局平台103然后至少部分地基于所述至少一个缩放水平而至少部分地致使所述一个或多个表示的渲染。举例来说,随着通过至少一个拉交互增加所述至少一个缩放水平,布局平台103至少部分地致使一个或多个表示的尺寸和不透明度增加至一定程度。更特别地,随着用于渲染一个或多个附近项目或附近POI的所述至少一个缩放水平增加(例如,2m至0m),布局平台103可至少部分地与对照相机进行变焦类似地致使一个或多个表示的渲染,以使得一个或多个表示的尺寸在不透明度减小的同时增加直至一个或多个表示从视图消失为止。相反地,在通过至少一个推交互减小所述至少一个缩放水平时,布局平台103至少部分地致使一个或多个表示的尺寸和不透明度减小。此外,布局平台103可以随着一个或多个踪迹项目跨过阈值变成一个或多个远离项目,而至少部分地致使类别图形符号以及简化块符号的渲染。同样地,随着一个或多个远离项目跨过阈值变成一个或多个附近项目,布局平台103可以至少部分地致使从顶部透视平面下降至底部透视平面且然后扩展以显示地点细节(例如,名称、距离、评级等)的一个或多个远离项目的渲染。更特别地,一个或多个表示从顶部透视平面到底部透视平面或相反的过渡至少部分地包括由布局平台103实现的动画,该动画连续地缩小从一个或多个表示(例如,远离项目)的当前状态到一个或多个表示(例如,附近项目)的目标状态的距离且在基于透视显示中按照每帧进行更新。另外,在其中在一个或多个表示处于从一个透视平面到另一个(例如,从顶部透视平面到底部透视平面)的过渡中的同时由布局平台103确定另外的至少一个推交互或至少一个拉交互的示例性使用情况下,布局平台103可以停止该动画,并且至少部分地致使从基于透视显示中的一个或多个表示的最后状态开始的相反的动画的渲染。
另外,布局平台103可以至少部分地致使一个或多个表示的渲染,以使得所述至少一个推交互或所述至少一个拉交互将使一个或多个表示沿着在查看位置与一个或多个项目(POI)之间所投射的射线的轨迹而移动得更接近或更远离查看位置。此外,基于所述至少一个拉交互,布局平台103可以至少部分地致使一个或多个表示的渲染,由此一个或多个表示的最后一行朝着第一行移动,同时由布局平台103从基于透视显示的顶面检索一个或多个表示的下一行。此外,可设想的是,此过程在至少一个推交互之后以相同方式反向地工作。
在步骤407中,布局平台103还至少部分地基于所述至少一个推交互或所述至少一个拉交互,而至少部分地致使与一个或多个表示相关联的反馈信息的呈现。举例来说,所述至少一个推交互或所述至少一个拉交互可被布局平台103渲染为所述至少一个用户接口上的圆圈,并且布局平台103还可以至少部分地致使基于透视显示的底部透视平面的顶部上的动画透视网格的渲染。在某些实施例中,布局平台103还可以至少部分地致使距离指示符或滚动条以及透视网格的渲染。另外,布局平台103可以至少部分地致使基于透视显示的左上拐角中的雷达例如改变,以使得至少部分地基于所述至少一个推交互或所述至少一个拉交互,而为用户提供关于一个或多个项目或POI中的哪个在所述至少一个界限区域内的线索。
图5描述确定与移动设备的至少一个用户接口的一个或多个辅助交互的过程500。在一个实施例中,布局平台103执行过程500并例如在包括如图9中所示的处理器和存储器的芯片组中实现。在步骤501,布局平台103确定关于所述至少一个用户接口的一个或多个轻扫手势。举例来说,如先前所讨论的,所述一个或多个轻扫手势可至少部分地包括用户将他或她的手指放置在移动设备(例如,移动电话或平板电脑)的用户接口上且然后将他或她的手指从用户接口的一个边缘拖曳至另一个。然后,在步骤503中,布局平台103至少部分地基于一个或多个轻扫手势来确定要渲染的一个或多个表示。例如,布局平台103可以至少部分地基于一个或多个轻扫手势来确定要渲染的一个或多个表示的数目或一个或多个表示在基于透视显示内移动的速度。更特别地,布局平台103可以至少部分地基于一个或多个轻扫手势,以与向上翻页或向下翻页功能类似的方式改变底面上的一个或多个表示中的全部表示。此外,在一个示例性使用情况下,布局平台103还可以至少部分地基于一个或多个轻扫手势来确定对一个或多个表示的整个视图进行重置。
在步骤505中,布局平台103还可以确定与所述至少一个用户接口、所述一个或多个表示、所述一个或多个项目或其组合的至少一个轻敲交互。如先前所讨论的,在一个实施例中,一个或多个远离项目或远离POI和一个或多个附近项目或附近POI具有可轻敲功能,但是一个或多个踪迹项目或踪迹POI是不可轻敲元件。此外,在某些实施例中,布局平台103还可以至少部分地致使一个或多个基于建筑物的遮挡模型的渲染,以减少特定场景或视图中的噪声,并且一个或多个基于建筑物的遮挡模型、一个或多个建筑物或其组合还可具有可轻敲功能性。
在步骤507中,布局平台103至少部分地基于一个或多个轻敲交互,而至少部分地致使与一个或多个表示、一个或多个项目或其组合相关联的详细信息的呈现。举例来说,如果用户轻敲一个或多个远离项目,则布局平台103可以至少部分地致使与一个或多个相应项目相关联的地点细节(例如,名称、距离、评级等)的呈现。同样地,如果用户轻敲一个或多个附近项目,则布局平台103可以至少部分地致使与一个或多个项目相关联的关于页面或细节页面的呈现,以替换基于透视显示。例如,细节页面可包括一个或多个项目的深入描述。如先前所讨论的,在一个示例性使用情况下,并非替换基于透视显示,布局平台103可以将基于透视显示与细节页面结合,以使得用户可以移动一个或多个所选表示(例如,附近项目)以匹配地图的一部分上的项目的现实世界位置。此外,在具有一个或多个基于建筑物的遮挡模型的实施例中,如果用户轻敲一个或多个模型、一个或多个建筑物或其组合,平局平台03可以至少部分地致使与建筑物、POI或其组合相关联的附加内容的呈现(例如,联系人信息、工作时间、评级/评论等)。
图6是根据各个实施例的在图3-5的过程中利用的用户接口的图。如所示,图6的示例性用户接口包括至少部分地基于从相对于图3-5所述的过程(例如,过程300、400和500)得到的信息、数据和/或信号而创建和/或修改的一个或多个用户接口元件和/或功能。更特别地,图6图示出描述基于透视显示中的一个或多个项目(例如,POI)的一个或多个表示和相应反馈信息的两个用户接口(例如,接口601和603)。
在一个实施例中,系统100首先至少部分地基于一个或多个项目与诸如接口601和603(例如,移动电话)的用户设备的基于透视显示的查看位置的距离,而至少部分地致使一个或多个项目(例如,POI)的分类。更特别地,所述一个或多个项目至少部分地包括具有已知地理坐标的一个或多个POI(例如,饭店、旅馆、咖啡店等),并且接口601和603的基于透视显示是地图绘制显示,其至少部分地包括实况视图、捕捉全景、静止图像或其组合。在某些实施例中,地图绘制显示还可包括位于一个或多个界限区域或视场(例如,2m至35m)内的一个或多个项目的雷达状概观605。如先前所讨论的,系统100可至少部分地基于由系统100在例如基于透视显示的顶部和底部透视平面上布置的许多等距行,来确定一个或多个项目与查看位置的距离。结果,系统100将位于距离“a”与距离“a+b”之间的一个或多个项目表征为附近项目或附近POI;将位于距离“a+b”与距离“c”之间的一个或多个项目表征为远离项目或远离POI;并将超过距离“c”定位的一个或多个项目表征为踪迹项目或踪迹POI。
在一个实施例中,一旦系统100确定了界限区域内的一个或多个项目,系统100至少部分地基于分类来确定一个或多个项目的一个或多个表示。举例来说,系统100可以将一个或多个踪迹项目607和609表示为相对于一个或多个其他表示具有较低不透明度的简化块符号。相反地,系统100可以用类别图形符号将一个或多个远离项目611和613表示为简化块符号(例如,运输、刀叉等)并用类别图形符号和地点细节例如,名称、距离、评级等)两者来将一个或多个附近项目615、617和619表示为简化彩色块。例如,如在接口601中描述的附近项目615表示距查看位置30米的具有五星评级中的四星的饭店30。如先前所讨论的,除确定与一个或多个表示(例如,与附近项目615相对比的踪迹项目609)相关联的视觉复杂程度之外,系统100还可以确定与一个或多个表示的交互性程度。举例来说,在一个实施例中,如果用户轻敲一个或多个远离项目611,则系统100例如可以至少部分地致使与表示、相应项目(例如,运输中心)或其组合相关联的地点细节的呈现。此外,在一个或多个实施例中,如果例如用户轻敲附近项目615,系统100可以至少部分地致使与项目(例如,菜单)相关联的附加信息的呈现。然而,如果例如用户轻敲踪迹项目607,则系统100将不会致使与表示、相应项目(例如,药房)或其组合相关联的附加信息的呈现。
在一个或多个实施例中,系统100接下来至少部分地基于查看位置、查看方向或其组合来确定一个或多个表示(例如,附近项目615、617和619)的一个或多个取向。在本示例性使用情况下,所述一个或多个表示(例如,附近项目615、617和619)被系统100定向成使得这或多个表示面对用户的位置,并且所述一个或多个表示的拐角在面对用户时看起来略微旋转。除一个或多个表示的取向之外,系统100确定用于对一个或多个表示进行定位的一个或多个拼版参数(例如,重叠程度、遮挡程度等)。如先前所讨论的,系统100布置基于透视显示的固定行,以使得一个或多个表示(例如,附近项目615、617和619)的垂直重叠足以向用户提供绘图深度线索而不覆盖重要信息(例如,标题)且同时允许由用户选择一个或多个表示。更特别地,在本示例性使用情况下,附近项目615比附近项目617更接近于查看位置,并且虽然附近项目619比附近项目617更接近于查看位置,但仍然看以明显看出该附近项目617的标题是“咖啡馆”。
在一个或多个实施例中,一旦系统100确定一个或多个表示的布局逻辑,则系统100至少部分地基于在基于透视显示中的至少一个推交互或至少一个拉交互,来确定用于在接口601和603的基于透视显示中渲染项目的一个或多个表示的至少一个缩放水平。举例来说,所述至少一个推交互或所述至少一个拉交互可以被系统100渲染为接口601上的圆圈621,并且系统100还可以至少部分地致使在基于透视显示的底部透视平面的顶部上的动画透视网格623的渲染。在图7中描述了所述至少一个推交互或所述至少一个拉交互的说明性示例。特别地,如先前所讨论的,所述至少一个拉交互使得接口603的用户能够将一个或多个远离表示(例如,踪迹项目607和609和/或远离项目611和613)拉得更近并使得一个或多个表示更大,并且所述至少一个推交互使得接口603的用户能够将一个或多个附近表示(例如,附近项目615、617和619)推到远处并使得一个或多个表示更小。
在一个实施例中,系统100然后至少部分地基于所述至少一个缩放水平、所述至少一个推交互、所述至少一个拉交互或其组合来确定一个或多个表示沿着基于透视显示的一个或多个平面的一个或多个位置,其中,所述一个或多个表示的渲染至少部分地基于所述一个或多个位置。如先前所讨论的,在一个实施例中,系统100在基于透视显示的顶面625上布置一个或多个远离表示(例如,踪迹项目607和609及远离项目611和613),并在显示器的底面623上布置一个或多个附近表示(例如,附近项目615、617和619)。特别地,顶面625和底面623由布局平台103使用以下参数中的一个或多个定义:(1)在平面(顶部或底部)的近端处的以像素为单位的一个或多个表示(例如,远离项目611)的尺寸;(2)在平面(顶部或底部)的远端处的以像素为单位的一个或多个表示的尺寸;(3)对应于一个或多个表示的一个或多个项目的地理位置;以及(4)基于透视显示(例如,接口601和603)的屏幕边界。结果,基于透视显示的中心区域627保持没有一个或多个表示,从而允许用户在一个或多个表示不遮挡或妨碍场景的重要部分(例如,POI、绘图深度线索等)的情况下,利用接口601和603来探索现实世界环境。
在一个或多个实施例中,系统100然后至少部分地基于所述至少一个缩放水平而至少部分地致使所述一个或多个表示的渲染。更特别地,随着通过至少一个拉交互增加所述至少一个缩放水平,系统100至少部分地致使一个或多个表示的尺寸和不透明度增加至一定程度(例如,与附近项目619相对比的附近项目615)。此外,系统100可以随着一个或多个踪迹项目(例如,踪迹向609)跨过阈值而变成一个或多个远离项目(例如,远离项目613)而至少部分地致使类别图形符号以及简化块符号(例如,如远离项目613所描绘)的渲染。另外,随着一个或多个远离项目(例如,远离项目613)跨过阈值而变成一个或多个附近项目(例如,附近项目615),系统100可以至少部分地致使从顶部透视平面625下降且然后扩展以显示地点细节(例如,如附近项目615中所描述的)的一个或多个远离项目的渲染。更特别地,一个或多个表示从顶部透视平面到底部透视平面的过渡或相反的过渡至少部分地包括由系统100实现的动画,该动画连续地缩小从一个或多个表示(例如,远离项目613)的当前状态到一个或多个表示(例如,附近项目615)的目标状态的距离且在基于透视显示中按照每帧进行更新。另外,在其中在一个或多个表示处于从一个透视平面到另一个(例如,从顶部透视平面到底部透视平面)的过渡中的同时由系统100确定另外的至少一个推交互或至少一个拉交互的示例性使用情况下,系统100可以停止该动画,并且至少部分地致使从基于透视显示中的一个或多个表示的最后状态开始的相反的动画的渲染。
在一个实施例中,系统100还可以确定关于用户接口601和603的一个或多个轻扫手势。至少部分地基于一个或多个轻扫手势(例如,轻扫接口603),系统100然后可以确定要渲染的一个或多个表示。举例来说,系统100可以至少部分地基于一个或多个轻扫手势,以与向上翻页或向下翻页功能类似的方式改变底面623上的一个或多个表示中的全部表示。如先前所讨论的,系统100还可以确定与接口603、一个或多个表示(例如,远离项目611或附近项目615)、一个或多个项目(例如,建筑物629)或其组合的至少一个轻敲交互。更特别地,如果用户轻敲一个或多个远离项目(例如,远离项目611和613),则系统100可以至少部分地致使与一个或多个相应项目相关联的地点细节(例如,名称、距离、评级等)的呈现。同样地,如果用户轻敲一个或多个附近项目(例如附近项目615,617和619),则系统100可以至少部分地致使与一个或多个项目相关联的关于页面或细节页面的呈现。此外,在某些实施例中,系统100可以使得用户轻敲一个或多个建筑(例如,建筑物629)以确定与建筑物、POI或其组合相关联的附加内容(例如,联系人信息、工作时间、评级/评论等)。
图7是根据各种实施例的图3和4的过程的顶视图的示图。如所示,图7图示出与基于透视显示的用户接口(例如,接口601和603)的至少一个推交互或至少一个拉交互。如先前所讨论的,系统100可以至少部分地致使一个或多个表示701的渲染,以使得如图703所描述的所述至少一个推交互或图705所描述的所述至少拉交互将使一个或多个表示701沿着在查看位置707与一个或多个项目(例如,POI)之间的射线709的轨迹移动而更加接近或更加远离查看位置707。此外,基于所述至少一个拉交互705,系统100可以至少部分地致使一个或多个表示701的渲染,以使得一个或多个移位表示(例如,图703的编号为19和20的表示)的最后一行朝着第一行移动,同时由系统100从基于透视显示的顶面检索一个或多个表示(例如,图705的编号为21和22的表示)的下一行。
本文所述的用于在增强现实视图中提供交互式的基于透视的兴趣点布局的过程可以有利地经由软件、硬件、固件或软件和/或固件和/或硬件的组合来实现。例如,本文所述的过程可有利地经由一个或多个处理器、数字信号处理(DSP)芯片、专用集成电路(ASIC)、现场可编程门阵列(FPGA)等实现。下面详述用于执行所述功能的此类示例性硬件。
图8图示出可以在其上面实现本发明的实施例的计算机系统800。虽然相对于特定器件或设备来描述计算机系统800,但可设想的是,图8内的其他器件或设备(例如,网络元件、服务器等)可以部署系统800的所示硬件和部件。计算机系统800被编程为(例如,经由计算机程序代码或指令)如本文所述在增强现实视图中实现交互式的基于透视的兴趣点布局,并包括用于在计算机系统800的其他内部和外部部件之间传递信息的诸如总线810之类的通信机制。信息(也称为数据)被表示为可测量现象的物理表示,通常为电压,但是在其他实施例中包括诸如磁、电磁、压力、化学、生物、分子、原子、亚原子或量子相互作用之列的现象。例如,南北磁场或零和非零电压表示二进制数字(位)的两种状态(0,1)。其他线性可以表示较高基数的数字。测量之前的多个同时量子态的叠加表示量子比特(qubit)。一个或多个数位的序列组成用来表示用于字符的编号或代码的数字数据。在某些实施例中,用特定范围内的可测量值的近连续流来表示称为模拟数据的信息。计算机系统800或其一部分组成用于执行在增强现实视图中提供交互式的基于透视的兴趣点布局的一个或多个步骤的装置。
总线810包括的一个或多个并行的信息导线,使得在耦合到总线810的设备之间快速地传输信息。用于处理信息的一个或多个处理器802与总线810耦合。
处理器(或多个处理器)802对由相关的计算机程序代码指定的信息执行一组操作,以在增强现实视图中提供交互式的基于透视的兴趣点布局。计算机程序代码是一组指令或说明,其提供用于处理器和/或计算机系统执行指定功能的操作的指令。例如可用被编译成处理器的本地指令集的计算机编程语言来编写代码。还可使用本地指令集(例如,机器语言)来直接地编写代码。该组操作包括从总线810带入信息和将信息放置在总线810上。该组操作通常还包括比较两个或更多信息单元、移动信息单元的位置以及将两个或更多信息单元组合,诸如通过加法或乘法或例如OR、异或(XOR)以及AND之类的逻辑运算。可以由处理器执行的该组操作中的每个操作被用称为指令的信息表示给处理器,诸如一个或多个位的操作代码。将由处理器82执行的操作序列(诸如操作代码序列)组成处理器指令,其也称为计算机系统指令或者简单地称为计算机指令。可特别地将处理器单独地或以组合方式实现为机械、电、磁、光学、化学或量子部件。
计算机系统800还包括被耦合到总线810的存储器804。诸如随机存取存储器(RAM)或任何其他的动态存储器件之类的存储器804存储下述信息,该信息包括用于在增强现实视图中提供交互式的基于透视的兴趣点布局的处理器指令。动态存储器允许由计算机系统800来修改存储在其中的信息。RAM允许独立于相邻地址处的信息来存储和检索存储在称为存储器地址的位置处的信息单元。存储器804还被处理器802用来在处理器指令的执行期间存储临时值。计算机系统800还包括只读存储器(ROM)806或被耦合到总线810的任何其他静态存储器件,以便存储未被计算机系统800修改的静态信息(包括指令)。某个存储器包括当失去电源时丢失存储在其上面的信息的易失性储存器。被耦合到总线810的还有非易失性(持久性)存储器件808,诸如磁盘、光盘或闪速卡,用于存储即使当计算机系统800被关掉或以其他方式失去电源时也仍保持的信息,包括指令。
信息(包括用于在增强现实视图中提供交互式的基于透视的兴趣点布局的指令)被提供给总线810以供处理器从外部输入设备812使用,该外部输入设备诸如是包含由人类用户操作的字母数字键的键盘、麦克风、红外(IR)遥控器、操纵杆、游戏板、触笔、触摸屏或传感器。传感器检测其附近区域中的状况并将那些检测变换成与用来表示计算机系统800中的信息的可测量现象兼容的物理表示。被耦合到总线810、主要用于与人类相交互的其他外部设备包括显示设备814,诸如阴极射线管(CRT)、液晶显示器(LCD)、发光二极管(LED)、显示器、有机LED(OLED)显示器、等离子体屏幕触摸屏或用于呈现文本或图像的打印机,以及定点设备816,诸如鼠标、轨迹球、光标定向键、触摸屏或运动传感器,以用于控制在显示器814上呈现的小光标图像的位置并发布与在显示器814上呈现的图形元素相关联的命令。在某些实施例中,例如,在其中计算机系统800在没有人类输入的情况下自动地执行所有功能的实施例中,省略外部输入设备812、显示设备814和定点设备816中的一个或多个。
在所示实施例中,将诸如专用集成电路(ASIC)820之类的专用硬件耦合到总线810。该专用硬件被配置成执行并未由处理器802足够快速地执行的操作,以用于专用目的。ASIC的示例包括用于显示器814的用于生成图像的图形加速器、用于对在网络上发送的消息进行加密和解密的密码板、语音识别以及到外部设备的接口,所述外部设备诸如是机器人臂和医学扫描设备,其重复地扫描用硬件更高效地实现的操作的某个复杂序列。
计算机系统800还包括被耦合到总线810的通信接口870的一个或多个实例。通信接口870提供耦合到各种外部设备的单向或双向通信,所述各种外部设备用其自己的处理器进行操作,诸如是打印机、扫描仪和外部磁盘。一般地,该耦合是与被耦合到本地网络880的网络链路878的耦合,具有其自己的处理器的多种外部设备被连接到该本地网络880。例如,通信接口870可以是个人计算机上的并行端口或串行端口或通用串行总线(USB)端口。在某些实施例中,通信接口870是综合服务数字网(ISDN)卡或数字订户线(DSL)卡或电话调制解调器,其提供到相应类型的电话线的信息通信连接。在某些实施例中,通信接口870是将总线810上的信号转换成用于同轴电缆上的通信连接的信号或用于光纤电缆上的通信连接的光信号的电缆调制解调器。作为另一示例,通信接口870可以是用以提供到兼容LAN、诸如以太网的数据通信连接的局域网(LAN)卡。还可实现无线链路。对于无线链路而言,通信接口870发送或接收或者发送并接收电、声学或电池信号,包括红外和光学信号,其承载信息流,诸如数字数据。例如,在无线手持式设备中,诸如类似于蜂窝电话的移动电话,通信接口870包括无线电波段电磁发射机和称为无线电收发机的接收机。在某些实施例中,通信接口870使得能够实现到通信网络105的连接以便向UE 101提供增强现实视图中的交互式的基于透视的兴趣点布局。
本文所使用的术语“计算机可读介质”指的是参与向处理器802提供信息、包括用于执行的指令的任何介质。此类介质可采取许多形式,包括但不限于计算机可读存储介质(例如,非易失性介质、易失性介质)以及传输介质。诸如非易失性介质之类的非临时介质包括例如光盘或磁盘,诸如存储器件808。易失性介质包括例如动态存储器804。传输介质包括例如扭绞线电缆、同轴电缆、铜线、光纤电缆以及在没有导线或电缆的情况下穿过空间的载波,诸如声波和电磁波,包括无线电、光学和红外波。信号包括通过传输介质发射的振幅、频率、相位、偏振或其他物理性质的人工瞬态变化。计算机可读介质的一般形式包括例如软盘、软磁盘、硬盘、磁带、任何其他磁介质、CD-ROM、CDRW、DVD、任何其他光学介质、穿孔卡片、纸带、光学标记片、具有孔图案或其他光学可识别标记的任何其他物理介质、RAM、PROM、EPROM、FLASH-EPROM、EEPROM、闪速存储器、任何其他存储器芯片或盒、载波或计算机可以从其进行读取的任何其他介质。术语计算机可读存储介质在本文中用来指示除传输介质之外的任何计算机可读介质。
在一个或多个有形介质中编码的逻辑包括计算机可读存储介质和专用硬件、诸如ASIC 820上的处理器指令中的一者或两者。
网络链路878通常使用传输介质来提供通过一个或多个网络到使用或处理信息的其他设备的信息通信。例如,网络链路878可通过本地网络880提供到主机计算机882或由因特网服务提供商(ISP)操作的设备884的连接。ISP设备884又通过现在一般地称为因特网890的网络的公共、全球分组交换通信网来提供数据通信服务。
连接至因特网的、称为服务器主机892的计算机主控响应于通过因特网接收的信息而提供服务的过程。例如,服务器主机892主控提供代表呈现在显示器814上的视频数据的信息的过程。可以预期的是,系统800的部件可以以各种配置部署在其他计算机系统中,例如,主机882和服务器892。
本发明的至少某些实施例涉及使用计算机系统800以便实现本文所述的技术中的某些或全部。根据本发明的一个实施例,由计算机系统800响应于执行包含在存储器804中的一个或多个处理器指令的一个或多个序列的处理器802,来执行那些技术。也称为计算机指令、软件和程序代码的此类指令可被从诸如存储器件808的另一计算机可读介质或网络链路878读取到存储器804中。包含在存储器804中的指令序列的执行致使处理器802执行本文所述的方法步骤中的一个或多个。在替换实施例中,可以作为用以实现本发明的软件的替代或与之相组合来使用诸如ASIC 820之类的硬件。因此,本发明的实施例不限于硬件和软件的任何特定组合,除非在本文中另外明确地说明。
通过通信接口870在网络链路878及其他网络上发射的信号携带有至计算机系统800或者来自其的信息。计算机系统800可以特别地通过网络链路878和通信接口870,经由网络880、890而发送和接收信息,包括程序代码。在使用因特网890的示例中,服务器主机892通过因特网890、ISP设备884、本地网络880和通信接口870,来发射由从计算机800发送的消息所请求的用于特定应用的程序代码。接收到的代码可在其被接收到时被处理器802执行,或者可存储在存储器804或存储器件808或任何其他非易失性储存器中以供稍后执行,或两者。以这种方式,计算机系统800可以以载波上的信号的形式获得应用代码。
在将指令或数据或两者的一个或多个序列承载到处理器802以供执行时,涉及到各种形式的计算机可读介质。例如,最初可在诸如主机882之类的远程计算机的磁盘上承载指令和数据。远程计算机将指令和数据加载到动态存储器中,并使用调制解调器通过电话线来发送指令和数据。在计算机系统800本地的调制解调器在电话线上接收指令和数据,并使用红外发射机来将指令和数据转换成充当网络链路878的红外载波上的信号。充当通信接口870的红外检测器接收在红外信号中承载的指令和数据,并将表示该指令和数据的信息放置到总线810上。总线810将信息承载到存储器804,处理器802从其进行检索,并使用与指令一起发送的某些数据来执行指令。可在由处理器802执行之前或之后,可选地将在存储器804中接收到的指令和数据存储在存储器件808上。
图9图示出可在其上面实现本发明的实施例的芯片组或芯片900。芯片组900被编程为如本文所述在增强现实视图中提供交互式基于透视兴趣点布局,并包括例如相对于图8所述的结合在一个或多个物理封装(例如,芯片)中的处理器和存储器部件。举例来说,物理包装包括在结构组件(例如,基板)上的一个或多个材料、部件和/或导线的布置以提供一个或多个特性,诸如物理力、尺寸节省和/或电相互作用的限制。可以设想的是,在某些实施例中可在单个芯片中实现芯片组900。还可以设想在某些实施例中可将芯片组或芯片900实现为单个“芯片上系统”。还可设想在某些实施例中,例如将不会使用单独的ASIC,并且如本文公开的所有相关功能将由一个或多个处理器执行。芯片组或芯片900或其一部分组成用于执行提供与功能的可用性相关联的用户接口导航信息的一个或多个步骤的装置。芯片组或芯片900或其一部分组成用于执行在增强现实视图中提供交互式基于透视兴趣点布局的一个或多个步骤的方式。
在一个实施例中,芯片组或芯片900包括用于在芯片组900的部件之间传递信息的诸如总线901之类的通信机制。处理器903具有到总线901的连接,以执行指令和处理存储在例如存储器905中的信息。处理器903可包括一个或多个处理核,每个核被配置成独立地执行。多核处理器使得能够在单个物理封装内实现多重处理。多核处理器的示例包括两个、四个、八个或更大数目的处理核。替换地或另外,处理器903可包括经由总线901而串联地配置的一个或多个微处理器,以支持执行、管线传输以及多线程的独立执行。处理器904还可伴随有一个或多个专用部件以执行某些处理功能和任务,诸如一个或多个数字信号处理器(DSP)907或一个或多个专用集成电路(ASIC)909。DSP 907通常被配置成独立于处理器903而实时地处理现实世界信号(例如,声音)。同样地,可以将ASIC909配置成执行并不容易由更加通用的处理器执行的专用功能。其他有帮助执行本文所述的发明功能的专用部件可包括一个或多个现场可编程门阵列(FPGA)、一个或多个控制器或一个或多个其他专用计算机芯片。
在一个实施例中,芯片组或芯片900仅包括一个或多个处理器以支持和/或涉及和/或用于一个或多个处理器的某些软件和/或固件。
处理器903和所附部件具有经由总线901而到存储器905的连接。存储器905包括用于存储可执行指令的动态存储器(例如,RAM、磁盘、可写光盘等)和静态存储器(例如,ROM、CD-ROM等),该可执行指令在被执行时执行本文所述的发明步骤,以在增强显示视图中提供交互式基于透视兴趣点布局。存储器905还存储与发明步骤的执行相关联或由其生成的数据。
图10是根据一个实施例的用于通信的移动终端(例如,手机)的示例性部件的图,其能够在图1的系统中进行操作。在某些实施例中,移动终端1001或其一部分组成用于执行在增强现实视图中提供交互式基于透视兴趣点布局的一个或多个步骤的装置。一般地,常常在前端和后端特性方面定义无线电接收机。接收机的前端涵盖所有射频(RF),而后端涵盖所有基带处理线路。如在本申请中所使用的术语“电路”指的是以下两者:(1)仅硬件实施方式(诸如在仅模拟和/或数字电路中的实施方式),以及(2)电路和硬件(和/或固件)的组合(诸如,如果适用于特定背景的话,则涉及处理器(多个)(包括数字信号处理器(多个))、软件和存储器(多个)的组合,这些部件一起工作以引起诸如移动电话或服务器之类的设备执行各种功能)。“电路”的此定义适用于此术语在本申请中的所有使用,包括在任何权利要求中。作为另一示例,如在本申请中所使用的且如果适用于特定背景的话,术语“电路”还将覆盖仅仅处理器(或多个处理器)及其所附软件和/或固件的实施方式。术语“电路”还将覆盖(如果适用于特定背景的话)例如移动电话中的基带集成电路或应用处理器集成电路,或者蜂窝式网络设备或其他网络设备中的类似集成电路。
电话的相关内部部件包括主控制单元(MCU)1003、数字信号处理器(DSP)1005以及接收机/发射机单元,包括麦克风增益控制单元和扬声器增益控制单位。主显示单元1007向用户提供显示,其支持执行或支持在增强显示视图中提供交互式基于透视兴趣点布局的步骤的各种应用和移动终端功能。显示器1007包括被配置成显示移动终端(例如,移动电话)的用户接口的至少一部分的显示电路。另外,显示器1007和显示电路被配置成促进移动终端的至少某些功能的用户控制。音频功能电路1009包括麦克风1011和放大从麦克风1011输出的语音信号的麦克风放大器。从麦克风1011输出的已放大语音信号被馈送到编码器/解码器(CODEC)1013。
无线电部1015将功率放大并对频率进行转换,以便经由天线1017与包括在移动通信系统中的基站通信。功率放大器(PA)1019和发射机/调制电路在操作上对MCU 1003进行响应,来自PA 1019的输出被耦合到在本领域中已知的双工器1021或循环器或天线开关。PA 1019还耦合到电池接口和电源控制单元1020。
在使用中,移动终端1001的用户对着麦克风1011说话,并且他或她的语音连同任何所检测本底噪声一起被转换成模拟电压。模拟电压然后通过模数转换器(ADC)1023被转换成数字信号。控制单元1003将数字信号路由到DSP 1005以在其中处理,诸如语言编码、信道编码、加密和交织。在一个实施例中,已处理语音信号由并未单独示出的单元来编码,其使用蜂窝式传输协议,诸如增强数据速率全球演进(EDGE)、通用分组无线电服务(GPRS)、全球移动通信系统(GSM)、网际协议多媒体子系统(IMS)、通用移动电信系统(UMTS)等以及任何其他适当的无线介质,例如微波接入(WiMAX)、长期演进(LTE)网络、码分多址(CDMA)、宽带码分多址(WCDMA)、无线保真(WiFi)、卫星等或其任何组合。
已编码信号然后被路由到均衡器1025,以补偿通过空气在传输期间发生的任何频率相关损害,诸如相位和振幅失真。在补偿位流之后,调制器1027将信号与在RF接口1029中生成的RF信号组合。调制器1027经由频率或相位调制而生成正弦波。为了使信号准备好用于传输,上变频器1031将从调制器1027输出的正弦波与由合成器1033生成的另一正弦波组合以实现期望的传输频率。所述信号然后通过PA 1019被发送以将信号增加至适当的功率水平。在实际系统中,PA 1019充当可变增益放大器,其增益由DSP 1005根据从网络基站接收到的信息来控制。然后在双工器10212中对信号进行滤波,并可选地发送到天线耦合器1035以匹配阻抗,从而提供最大功率传输。最后,经由天线1017将信号发射到本地基站。可以提供自动增益控制(AGC),以控制接收机的最后阶段的增益。可将信号从那里转送到远程电话,其可以是另一蜂窝电话、任何其他移动电话或连接到公共交换电话网(PSTN)或其他电话网络的陆地线的电话。
发射到移动终端1001的语音信号经由天线1017被接收,并立即被低噪声放大器(LNA)1037放大。下变频器1039降低载波频率,同时解调器1014将RF剥离,仅留下数字比特流。信号然后经历均衡器1025并被DSP 1005处理。数模转换器(DAC)1043对信号进行转换,并且结果得到的输出通过扬声器而发射给用户,这全都在可以实现为中央处理单元(CPU)的主控制单元(MCU)1003的控制之下。
MCU 1003接收各种信号,包括来自键盘1047的输入信号。键盘1047和/或MCU 1003与其他用户输入部件(例如,麦克风1011)包括用于管理用户输入的用户接口电路。MCU 1003运行用户接口软件来促进移动终端1001的至少某些功能的用户控制,以在增强现实视图中提供交互式基于透视兴趣点布局。MCU 1003还分别地向显示器1007和语音输出开关控制器输送显示命令和开关命令。此外,MCU 1003与DSP 1005交换信息,并且可以访问可选地并入的SIM卡1049和存储器1051。另外,MCU 1003执行终端所需的各种控制功能。DSP 1005可以根据实施方式而对语音信号执行多种传统数字处理功能中的任何一个。另外,DSP 1005根据由麦克风1011所检测的信号来确定本地环境的本底噪声水平,并将麦克风1011的增益设置成用以补偿移动终端1001的用户的自然趋势的所选水平。
编CODEC 1013包括ADC 1023和DAC 1043。存储器1051存储包括所有输入音调数据的各种数据,并能够存储经由例如全球因特网接收到的其他数据,包括音乐数据。软件模块可以常驻于RAM存储器、闪速存储器、寄存器或本领域中已知的任何其他形式的可写存储介质中。存储器件1051可以是但不限于单个存储器、CD、DVD、ROM、RAM、EEPROM、光学储存器、磁盘储存器、闪速内存储存器或能够存储数字数据的任何其他非易失性存储介质。
可选地并入的SIM卡1049承载例如重要信息,诸如蜂窝电话号码、运营商供应服务、订阅细则以及安全信息。SIM卡1049主要用于在无线电网络上识别移动终端1001。卡1049还包含用于存储个人电话号码登记、文本消息以及用户特定移动终端设置的存储器。
虽然已结合许多实施例和实施方式描述了本发明,但本发明并不局限于此,而是涵盖落在所附权利要求的权限内的各种明显修改和等效布置。虽然以权利要求之间的某些组合的方式表示本发明的特征,可设想到可以以任何组合和顺序来布置这些特征。

Claims (38)

1.一种方法,包括促进(1)数据和/或(2)信息和/或(3)至少一个信号的处理和/或对其进行处理,所述(1)数据和/或(2)信息和/或(3)至少一个信号至少部分地基于以下各项:
至少部分地基于在基于透视显示中的至少一个推交互或至少一个拉交互对用于在所述基于透视显示中渲染一个或多个项目的一个或多个表示的至少一个缩放水平的至少一个确定;以及
至少部分地基于所述至少一个缩放水平对所述一个或多个表示的渲染。
2.根据权利要求1所述的方法,其中,所述(1)数据和/或(2)信息和/或(3)至少一个信号还至少部分地基于以下各项:
至少部分地基于所述至少一个缩放水平、所述至少一个推交互、所述至少一个拉交互或其组合对所述一个或多个表示沿着所述基于透视显示的一个或多个平面的一个或多个位置的至少一个确定,
其中,对所述一个或多个表示的所述渲染至少部分地基于所述一个或多个位置。
3.根据权利要求1和2中的任一项所述的方法,其中,所述(1)数据和/或(2)信息和/或(3)至少一个信号还至少部分地基于以下各项:
至少部分地基于所述一个或多个项目与所述基于透视显示的查看位置的距离对所述一个或多个项目的分类;以及
至少部分地基于所述分类对所述一个或多个项目的所述一个或多个表示的至少一个确定。
4.根据权利要求3所述的方法,其中,所述(1)数据和/或(2)信息和/或(3)至少一个信号还至少部分地基于以下各项:
至少部分地基于所述分类、与所述查看位置的所述距离或其组合对所述一个或多个表示的复杂性的至少一个确定。
5.根据权利要求3和4中的任一项所述的方法,其中,所述(1)数据和/或(2)信息和/或(3)至少一个信号还至少部分地基于以下各项:
至少部分地基于所述查看位置、查看方向或其组合对所述一个或多个表示的一个或多个取向的至少一个确定。
6.根据权利要求1-5中的任一项所述的方法,其中,所述(1)数据和/或(2)信息和/或(3)至少一个信号还至少部分地基于以下各项:
对一个或多个插入参数的至少一个确定,所述一个或多个插入参数用于对所述一个或多个表示进行定位,
其中,对所述一个或多个表示的所述渲染至少部分地基于所述一个或多个插入参数。
7.根据权利要求1-6中的任一项所述的方法,其中,所述(1)数据和/或(2)信息和/或(3)至少一个信号还至少部分地基于以下各项:
对关于所述至少一个用户接口的一个或多个轻扫手势的至少一个确定;以及
至少部分地基于所述一个或多个轻扫手势对要渲染的所述一个或多个表示的至少一个确定。
8.根据权利要求1-7中的任一项所述的方法,其中,所述(1)数据和/或(2)信息和/或(3)至少一个信号还至少部分地基于以下各项:
对与所述至少一个用户接口、所述一个或多个表示、所述一个或多个项目或其组合的至少一个轻敲交互的至少一个确定;以及
至少部分地基于所述一个或多个轻敲交互对与所述一个或多个表示、所述一个或多个项目或其组合相关联的详细信息的呈现。
9.根据权利要求1-8中的任一项所述的方法,其中,所述(1)数据和/或(2)信息和/或(3)至少一个信号还至少部分地基于以下各项:
至少部分地基于所述至少一个推交互或所述至少一个拉交互对与所述一个或多个表示相关联的反馈信息的呈现。
10.根据权利要求1-9中的任一项所述的方法,其中,所述基于透视显示是地图绘制显示;并且其中,所述一个或多个项目至少部分地包括一个或多个兴趣点。
11.一种方法,包括:
至少部分地基于在基于透视显示中的至少一个推交互或至少一个拉交互,确定用于在所述基于透视显示中对一个或多个项目的一个或多个表示进行渲染的至少一个缩放水平;以及
至少部分地基于所述至少一个缩放水平,至少部分地致使对所述一个或多个表示的渲染。
12.根据权利要求11所述的方法,还包括:
至少部分地基于所述至少一个缩放水平、所述至少一个推交互、所述至少一个拉交互或其组合,确定所述一个或多个表示沿着所述基于透视显示的一个或多个平面的一个或多个位置,
其中,对所述一个或多个表示的所述渲染至少部分地基于所述一个或多个位置。
13.根据权利要求11和12中的任一项所述的方法,还包括:
至少部分地基于所述一个或多个项目与所述基于透视显示的查看位置的距离,至少部分地致使对所述一个或多个项目的分类;以及
至少部分地基于所述分类来确定所述一个或多个项目的所述一个或多个表示。
14.根据权利要求13所述的方法,还包括:
至少部分地基于所述分类、与所述查看位置的所述距离或其组合来确定所述一个或多个表示的复杂性。
15.根据权利要求13和14中的任一项所述的方法,还包括:
至少部分地基于所述查看位置、查看方向或其组合来确定所述一个或多个表示的一个或多个取向。
16.根据权利要求11-15中的任一项所述的方法,还包括:
确定一个或多个插入参数,所述一个或多个插入参数用于对所述一个或多个表示进行定位,
其中,对所述一个或多个表示的所述渲染至少部分地基于所述一个或多个插入参数。
17.根据权利要求11-16中的任一项所述的方法,还包括:
确定关于所述至少一个用户接口的一个或多个轻扫手势;以及
至少部分地基于所述一个或多个轻扫手势来确定要渲染的所述一个或多个表示。
18.根据权利要求11-17中的任一项所述的方法,还包括:
确定与所述至少一个用户接口、所述一个或多个表示、所述一个或多个项目或其组合的至少一个轻敲交互;以及
至少部分地基于所述一个或多个轻敲交互而至少部分地致使与所述一个或多个表示、所述一个或多个项目或其组合相关联的详细信息的呈现。
19.根据权利要求11-18中的任一项所述的方法,还包括:
至少部分地基于所述至少一个推交互或所述至少一个拉交互而至少部分地致使与所述一个或多个表示相关联的反馈信息的呈现。
20.根据权利要求11-19中的任一项所述的方法,其中,所述基于透视显示是地图绘制显示;并且其中,所述一个或多个项目至少部分地包括一个或多个兴趣点。
21.一种设备,包括:
至少一个处理器;以及
至少一个存储器,所述至少一个存储器包括用于一个或多个程序的计算机程序代码,
所述至少一个存储器和所述计算机程序代码被配置成利用所述至少一个处理器致使所述设备执行至少以下操作:
至少部分地基于在基于透视显示中的至少一个推交互或至少一个拉交互,确定用于在所述基于透视显示中对一个或多个项目的一个或多个表示进行渲染的至少一个缩放水平;以及
至少部分地基于所述至少一个缩放水平而至少部分地致使对一个或多个表示的渲染。
22.根据权利要求21所述的设备,其中,所述设备还被致使:
至少部分地基于所述至少一个缩放水平、所述至少一个推交互、所述至少一个拉交互或其组合,来确定所述一个或多个表示沿着所述基于透视显示的一个或多个平面的一个或多个位置,
其中,对所述一个或多个表示的所述渲染至少部分地基于所述一个或多个位置。
23.根据权利要求21和22中的任一项所述的设备,其中,所述设备还被致使:
至少部分地基于所述一个或多个项目与所述基于透视显示的查看位置的距离来至少部分地致使对所述一个或多个项目的分类;以及
至少部分地基于所述分类来确定所述一个或多个项目的所述一个或多个表示。
24.根据权利要求23所述的设备,其中,所述设备还被致使:
至少部分地基于所述分类、与所述查看位置的所述距离或其组合来确定所述一个或多个表示的复杂性。
25.根据权利要求23和24中的任一项所述的设备,其中,所述设备还被致使:
至少部分地基于所述查看位置、查看方向或其组合来确定所述一个或多个表示的一个或多个取向。
26.根据权利要求21-25中的任一项所述的设备,其中,所述设备还被致使:
确定一个或多个插入参数,所述一个或多个插入参数用于对所述一个或多个表示进行定位,
其中,对所述一个或多个表示的所述渲染至少部分地基于所述一个或多个插入参数。
27.根据权利要求21-26中的任一项所述的设备,其中,所述设备还被致使:
确定关于所述至少一个用户接口的一个或多个轻扫手势;以及
至少部分地基于所述一个或多个轻扫手势来确定要渲染的所述一个或多个表示。
28.根据权利要求21-27中的任一项所述的设备,其中,所述设备还被致使:
确定与所述至少一个用户接口、所述一个或多个表示、所述一个或多个项目或其组合的至少一个轻敲交互;以及
至少部分地基于所述一个或多个轻敲交互,而至少部分地致使对与所述一个或多个表示、所述一个或多个项目或其组合相关联的详细信息的呈现。
29.根据权利要求21-28中的任一项所述的设备,其中,所述设备还被致使:
至少部分地基于所述至少一个推交互或所述至少一个拉交互而至少部分地致使对与所述一个或多个表示相关联的反馈信息的呈现。
30.根据权利要求21-29中的任一项所述的设备,其中,所述基于透视显示是地图绘制显示;并且其中,所述一个或多个项目至少部分地包括一个或多个兴趣点。
31.根据权利要求21-30中的任一项所述的设备,其中,所述设备是移动电话,所述移动电话还包括:
用户接口电路和用户接口软件,被配置成通过使用显示器来促进对所述移动电话的至少某些功能的用户控制,并被配置成对用户输入进行响应;以及
显示器和显示电路,被配置成显示所述移动电话的用户接口的至少一部分,所述显示器和所述显示电路被配置成促进对所述移动电话的至少某些功能的用户控制。
32.一种计算机可读存储介质,承载一个或多个指令的一个或多个序列,所述指令在由一个或多个处理器执行时致使设备至少执行权利要求1-10或11-20中的任一项所述的方法。
33.一种设备,包括用于执行根据权利要求1-10或11-20中的任一项所述的方法的装置。
34.根据权利要求33所述的设备,其中,所述设备是移动电话,所述移动电话还包括:
用户接口电路和用户接口软件,被配置成通过使用显示器来促进对所述移动电话的至少某些功能的用户控制,并被配置成对用户输入进行响应;以及
显示器和显示电路,被配置成显示所述移动电话的用户接口的至少一部分,所述显示器和所述显示电路被配置成促进对所述移动电话的至少某些功能的用户控制。
35.一种计算机程序产品,包括一个或多个指令的一个或多个序列,所述指令在由一个或多个处理器执行时致使设备至少执行根据权利要求1-10或11-20中的任一项所述的方法的步骤。
36.一种方法,包括促进对至少一个接口的访问的方法,所述至少一个接口被配置成允许对至少一个服务的访问,所述至少一个服务被配置成执行根据权利要求1-10或11-20中的任一项所述的方法。
37.一种方法,包括促进对(1)数据和/或(2)信息和/或(3)至少一个信号的处理和/或对其进行处理,所述(1)数据和/或(2)信息和/或(3)至少一个信号至少部分地基于根据权利要求1-10或11-20中的任一项所述的方法。
38.一种方法,包括促进创建和/或促进修改(1)至少一个设备用户接口元件和/或(2)至少一个设备用户接口功能,所述(1)至少一个设备用户接口元件和/或所述(2)至少一个设备用户接口功能至少部分地基于根据权利要求1-10或11-20中的任一项所述的方法。
CN201380042384.7A 2012-08-10 2013-06-19 用于针对增强现实视图的布局的方法和设备 Active CN104520904B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/572,026 US9870642B2 (en) 2012-08-10 2012-08-10 Method and apparatus for layout for augmented reality view
US13/572,026 2012-08-10
PCT/EP2013/062684 WO2014023463A1 (en) 2012-08-10 2013-06-19 Method and apparatus for layout for augmented reality view

Publications (2)

Publication Number Publication Date
CN104520904A true CN104520904A (zh) 2015-04-15
CN104520904B CN104520904B (zh) 2018-11-02

Family

ID=48703441

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380042384.7A Active CN104520904B (zh) 2012-08-10 2013-06-19 用于针对增强现实视图的布局的方法和设备

Country Status (6)

Country Link
US (1) US9870642B2 (zh)
EP (1) EP2883213B1 (zh)
JP (1) JP6058798B2 (zh)
KR (1) KR101750634B1 (zh)
CN (1) CN104520904B (zh)
WO (1) WO2014023463A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107533375A (zh) * 2015-06-29 2018-01-02 埃西勒国际通用光学公司 场景图像分析模块
CN108474666A (zh) * 2016-01-14 2018-08-31 谷歌有限责任公司 用于在地图显示中定位用户的系统和方法
CN108957742A (zh) * 2017-05-19 2018-12-07 深圳市易瞳科技有限公司 一种实现画面虚拟透明动态调节的增强现实头盔及方法

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6102944B2 (ja) * 2012-12-10 2017-03-29 ソニー株式会社 表示制御装置、表示制御方法およびプログラム
CN103634199B (zh) * 2013-08-26 2017-11-21 华为技术有限公司 通知消息的显示方法及装置
US9501871B2 (en) 2014-04-30 2016-11-22 At&T Mobility Ii Llc Explorable augmented reality displays
CN106293041B (zh) * 2015-06-18 2019-03-29 北京智谷睿拓技术服务有限公司 确定遮挡的方法和装置
EP3291531A1 (en) 2016-09-06 2018-03-07 Thomson Licensing Methods, devices and systems for automatic zoom when playing an augmented reality scene
US10410320B2 (en) * 2016-09-30 2019-09-10 Sony Interactive Entertainment Inc. Course profiling and sharing
US20180150791A1 (en) * 2016-11-29 2018-05-31 Wal-Mart Stores, Inc. Augmented reality-assisted modular set-up and product stocking systems and methods
WO2018237040A2 (en) * 2017-06-20 2018-12-27 Walmart Apollo, Llc SYSTEMS AND METHODS FOR MANAGING INVENTORY AUDITS
WO2019005951A1 (en) 2017-06-29 2019-01-03 Walmart Apollo, Llc SYSTEMS AND METHODS FOR REALIZING AND MONITORING ASSET INSPECTIONS
US11164380B2 (en) * 2017-12-05 2021-11-02 Samsung Electronics Co., Ltd. System and method for transition boundaries and distance responsive interfaces in augmented and virtual reality
US10813169B2 (en) 2018-03-22 2020-10-20 GoTenna, Inc. Mesh network deployment kit
KR102627612B1 (ko) 2019-02-19 2024-01-22 삼성전자주식회사 증강현실을 이용한 주변 정보 표시 방법 및 그 전자 장치
DE102019214283A1 (de) 2019-09-19 2021-03-25 Robert Bosch Gmbh Verfahren und Vorrichtung zum Verarbeiten eines durch eine Kamera aufgenommenen Bildes
US11816757B1 (en) * 2019-12-11 2023-11-14 Meta Platforms Technologies, Llc Device-side capture of data representative of an artificial reality environment
JP7220873B2 (ja) * 2020-02-20 2023-02-13 株式会社メディアバーン 情報提供プログラム、情報提供装置及び、情報提供システム

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101031866A (zh) * 2004-05-28 2007-09-05 新加坡国立大学 交互式系统和方法
CN101189049A (zh) * 2005-04-06 2008-05-28 苏黎士高等院校非金属材料联盟 在移动设备中执行应用程序的方法
US20090228841A1 (en) * 2008-03-04 2009-09-10 Gesture Tek, Inc. Enhanced Gesture-Based Image Manipulation
US20100035637A1 (en) * 2007-08-07 2010-02-11 Palm, Inc. Displaying image data and geographic element data
CN102158684A (zh) * 2010-02-12 2011-08-17 王炳立 具有图像增强功能的自适应场景图像辅助系统
WO2011124757A1 (en) * 2010-04-09 2011-10-13 Nokia Corporation Method and apparatus for generating a virtual interactive workspace
US20120176410A1 (en) * 2009-08-18 2012-07-12 Metaio Gmbh Method for representing virtual information in a real environment

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4096727B2 (ja) 2002-12-20 2008-06-04 カシオ計算機株式会社 電子機器及びその表示制御方法
JP5398970B2 (ja) 2007-09-28 2014-01-29 京セラ株式会社 移動通信装置、制御方法
JP4816748B2 (ja) 2009-03-06 2011-11-16 ソニー株式会社 ナビゲーション装置及びナビゲーション方法
KR101306286B1 (ko) * 2010-12-17 2013-09-09 주식회사 팬택 X-레이 뷰 기반의 증강 현실 제공 장치 및 방법
US20130067420A1 (en) * 2011-09-09 2013-03-14 Theresa B. Pittappilly Semantic Zoom Gestures
US9367959B2 (en) * 2012-06-05 2016-06-14 Apple Inc. Mapping application with 3D presentation

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101031866A (zh) * 2004-05-28 2007-09-05 新加坡国立大学 交互式系统和方法
CN101189049A (zh) * 2005-04-06 2008-05-28 苏黎士高等院校非金属材料联盟 在移动设备中执行应用程序的方法
US20100035637A1 (en) * 2007-08-07 2010-02-11 Palm, Inc. Displaying image data and geographic element data
US20090228841A1 (en) * 2008-03-04 2009-09-10 Gesture Tek, Inc. Enhanced Gesture-Based Image Manipulation
US20120176410A1 (en) * 2009-08-18 2012-07-12 Metaio Gmbh Method for representing virtual information in a real environment
CN102158684A (zh) * 2010-02-12 2011-08-17 王炳立 具有图像增强功能的自适应场景图像辅助系统
WO2011124757A1 (en) * 2010-04-09 2011-10-13 Nokia Corporation Method and apparatus for generating a virtual interactive workspace

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107533375A (zh) * 2015-06-29 2018-01-02 埃西勒国际通用光学公司 场景图像分析模块
CN108474666A (zh) * 2016-01-14 2018-08-31 谷歌有限责任公司 用于在地图显示中定位用户的系统和方法
CN108957742A (zh) * 2017-05-19 2018-12-07 深圳市易瞳科技有限公司 一种实现画面虚拟透明动态调节的增强现实头盔及方法
CN108957742B (zh) * 2017-05-19 2021-09-03 深圳市易瞳科技有限公司 一种实现画面虚拟透明动态调节的增强现实头盔及方法

Also Published As

Publication number Publication date
CN104520904B (zh) 2018-11-02
KR20150041125A (ko) 2015-04-15
JP6058798B2 (ja) 2017-01-11
US20140043365A1 (en) 2014-02-13
JP2015534660A (ja) 2015-12-03
US9870642B2 (en) 2018-01-16
EP2883213A1 (en) 2015-06-17
WO2014023463A1 (en) 2014-02-13
KR101750634B1 (ko) 2017-06-23
EP2883213B1 (en) 2019-09-18

Similar Documents

Publication Publication Date Title
CN104520904A (zh) 用于针对增强现实视图的布局的方法和设备
CN104769393B (zh) 用于从局部地图视图转变到增强现实视图的方法和装置
CN103119544B (zh) 展现基于位置的内容的方法和装置
CN102741797B (zh) 用于转换三维地图对象以呈现导航信息的方法和装置
CN103857989B (zh) 用于在活动用户接口元素中呈现搜索结果的方法和装置
CN103502982B (zh) 用于在基于位置的用户接口中显示交互式预览信息的方法和装置
US9558559B2 (en) Method and apparatus for determining camera location information and/or camera pose information according to a global coordinate system
US9317133B2 (en) Method and apparatus for generating augmented reality content
ES2881687T3 (es) Método y aparato para aumentar la funcionalidad de un dispositivo de usuario en un estado bloqueado
CN104737185B (zh) 用于具有伴随的备注的交互式幻灯片演示的阅读模式的方法、系统、装置和计算机可读存储介质
CN103959288A (zh) 用于基于web的增强现实应用查看器的方法和装置
CN103443589A (zh) 用于确定位置偏移信息的方法和装置
CN103262125A (zh) 用于注解兴趣点信息的方法和装置
EP2798617B1 (en) Method and apparatus for providing perspective-based content placement
US9201974B2 (en) Method and apparatus for incorporating media elements from content items in location-based viewing
CN103906993A (zh) 用于基于感兴趣点(poi)信息构造道路网络的方法和设备
US20150002506A1 (en) Method and apparatus for providing augmented reality display spaces
CN104412557A (zh) 用于经由日常设备提供沉浸式交互的方法和装置
KR20140031482A (ko) 캐릭터 연동 방법, 이를 위한 장치, 이를 위한 단말기 및 이를 위한 시스템
KR20210127077A (ko) 다수 사용자 참여를 위한 증강현실 플랫폼 제공 장치
CN103765416A (zh) 用于生成从一个或者多个来源收集的、可定制并且合并的可查看web内容的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Holland Ian Deho Finn

Applicant after: HERE GLOBAL BV

Address before: Holland Weide Eindhoven

Applicant before: HERE GLOBAL BV

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant