CN114063796B - 提供具有增强现实的路线 - Google Patents

提供具有增强现实的路线 Download PDF

Info

Publication number
CN114063796B
CN114063796B CN202110828902.4A CN202110828902A CN114063796B CN 114063796 B CN114063796 B CN 114063796B CN 202110828902 A CN202110828902 A CN 202110828902A CN 114063796 B CN114063796 B CN 114063796B
Authority
CN
China
Prior art keywords
location
route
computing device
applications
mobile device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110828902.4A
Other languages
English (en)
Other versions
CN114063796A (zh
Inventor
B·查布拉
R·维斯瓦那坦
C·L·克里斯滕森
Z·胡斯埃尼玛卡雷姆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Micron Technology Inc
Original Assignee
Micron Technology Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Micron Technology Inc filed Critical Micron Technology Inc
Publication of CN114063796A publication Critical patent/CN114063796A/zh
Application granted granted Critical
Publication of CN114063796B publication Critical patent/CN114063796B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3635Guidance using 3D or perspective road maps
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/10Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration
    • G01C21/12Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning
    • G01C21/16Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning by integrating acceleration or speed, i.e. inertial navigation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/10Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration
    • G01C21/12Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning
    • G01C21/14Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning by recording the course traversed by the object
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/10Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration
    • G01C21/12Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning
    • G01C21/16Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning by integrating acceleration or speed, i.e. inertial navigation
    • G01C21/165Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning by integrating acceleration or speed, i.e. inertial navigation combined with non-inertial navigation instruments
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/10Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration
    • G01C21/12Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning
    • G01C21/16Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning by integrating acceleration or speed, i.e. inertial navigation
    • G01C21/18Stabilised platforms, e.g. by gyroscope
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/20Instruments for performing navigational calculations
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3667Display of a road map
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/05Geographic models
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/012Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Abstract

描述了与用于提供具有增强现实AR的路线的计算装置相关的方法、装置和系统。实例方法可以包含在计算装置处接收与所述计算装置的第一位置相关联的触发、跟踪所述计算装置相对于所述第一位置的移动,以及提供从在所述跟踪的移动期间到达的第二位置返回所述第一位置的路线。所述路线可以包含显示的AR。

Description

提供具有增强现实的路线
技术领域
本公开总体上涉及计算装置,并且更具体地,涉及与增强现实(AR)相关的方法、设备和系统。
背景技术
计算装置可以是例如个人膝上型计算机、台式计算机、智能手机、平板电脑、腕戴式装置、数码相机、机器人真空吸尘器、汽车内的计算装置、头戴式耳机(例如,虚拟现实/AR)和/或其冗余组合,以及其它类型的计算装置。
AR可以在真实世界(例如,自然)环境中叠加虚拟对象。在一些实例中,AR可以是真实世界环境的交互式体验,其中真实世界对象由计算机生成的感知信息增强。AR可以掩盖真实世界环境的一部分和/或添加到真实世界环境,使得其被感知为真实世界环境的沉浸方面。因此,AR可以改变人对真实世界环境的感知。
发明内容
在一方面,本申请提供了一种方法,包括:在移动装置处接收与计算装置的第一位置相关联的触发;使用移动装置的全球定位系统、移动装置的加速度计、移动装置的陀螺仪或其任何组合来跟踪移动装置相对于第一位置的移动;以及提供从在跟踪的移动期间到达的第二位置返回第一位置的路线,其中路线包括经由移动装置的显示屏显示的增强现实(AR)。
另一方面,本申请提供了一种设备,包括:相机;用户界面;存储器;以及处理器,其经配置以执行存储在存储器中的可执行指令,以:在设备处于第一位置时在设备处接收触发以启动多个增强现实(AR)应用程序;启动多个AR应用程序;在其从第一位置行进到第二位置时跟踪设备的位置;以及使用启动的多个AR应用程序提供从第二位置到第一位置的路线。
另一方面,本申请提供了一种设备,包括:相机;用户界面;存储器;以及处理器,其经配置以执行存储在存储器中的可执行指令,以:在通信地耦合到设备的不同设备处于第一位置时接收触发以启动多个增强现实(AR)应用程序;在设备上启动多个AR应用程序;跟踪不同设备的位置;使用启动的多个AR应用程序为不同设备提供到第二位置的路线;以及经由用户界面显示包含AR的路线。
附图说明
图1图示了根据本公开的数个实施例的用于提供具有增强现实(AR)的路线的计算装置的用户界面的实例。
图2图示了根据本公开的数个实施例的用于提供具有包含通知的AR的路线的计算装置的用户界面的实例。
图3图示了根据本公开的数个实施例的用于提供具有AR的路线的计算装置的实例。
图4图示了根据本公开的数个实施例的用于提供具有AR的路线的计算装置的另一实例。
图5是根据本公开的数个实施例的用于提供具有AR的路线的方法的流程图。
具体实施方式
在计算装置上使用的导航应用程序可以使用全球定位系统(GPS)技术,通过定位来自GPS卫星网络的无线电信号来计算地球表面上的位置。例如,计算装置的用户能够经由跟随道路的描述性路线接收从第一地址到不同地址的方向。然而,用户可能无法接收从没有物理地址的第一位置(诸如停车场中的停车位)到第二位置(有或没有物理地址)的方向。如本文所使用的,物理地址包含街道地址(例如,邮寄地址)。
相反,本公开的实例包括与提供具有AR的路线相关的方法、设备和系统。实例方法包含在计算装置处接收与计算装置的第一位置相关联的触发、跟踪计算装置相对于第一位置的移动,以及提供从在跟踪的移动期间到达的第二位置返回第一位置的路线。路线可以包含显示的AR。
触发可以包含但不限于启动AR相机的请求、启动AR应用程序的请求、计算装置的位置或计算装置的速度变化等。可以使用加速度计、陀螺仪、全球定位系统(GPS)、wi-fi网络或社交媒体应用程序等来确定计算装置的位置和/或速度变化(例如,加速度变化)。路线可以是非描述性的,使得其不跟随道路、步行路径等。AR可以经由用户界面显示并且可以引导用户沿着描述性或非描述性路线从第一位置到第二位置且返回第一位置。
如本文所使用的,“数个”事物可以指一或多个此类事物。例如,数个计算装置可以指一或多个计算装置。“多个”事物意指两个或两个以上。另外,如本文所使用的诸如“Y”的指示符,特别是关于附图中的参考标记,指示如此指定的数个特定特征可以包含在本公开的数个实施例中。
本文的附图遵循编号惯例,其中第一个数字或多个数字对应于附图标记,而其余数字标识附图中的元件或组件。不同附图之间的类似元件或组件可以通过使用类似数字来标识。例如,附图标记102可以指代图1中的元件“02”,并且类似的元件可以指代图2中的202。如将理解的,可以添加、交换和/或消除本文的各种实施例中示出的元件,以便提供本公开的数个附加实施例。另外,附图中提供的元件的比例和相对比例旨在图示本公开的各种实施例,而不用于限制的意义。
图1图示了根据本公开的数个实施例的用于提供具有增强现实(AR)的路线的计算装置100的用户界面102的实例。用户界面102可以由计算装置100生成。用户界面102可以是图形用户界面(GUI),其可以向计算装置100的用户提供信息和/或从其接收信息。用户界面102可以在计算装置100的显示屏上示出。在一些实例中,显示屏可以是触摸屏。
计算装置可以是智能手机、平板电脑或具有一或多个相机和AR能力的其它装置。在数个实施例中,AR可以通过定位服务(例如,GPS、陀螺仪、加速度计等)、一或多个相机(例如,图3中的相机328或图4中的相机428)或其组合来使用。在一些实例中,相机中的一者可以仅用于AR目的(例如,AR特定相机)。在数个实施例中,一或多个光学传感器可以与用于AR的一或多个相机一起使用,或者相反,可以使用一或多个光学传感器来代替用于AR的一或多个相机。
在本公开的一些实例中,用户可能希望返回不具有物理地址的第一位置(例如,停放的汽车、家用电器、物联网装置)的路线。例如,用户可能希望知道如何在大型停车场或停车坪中返回他或她的汽车。在此实例中,不存在物理地址,因此用户无法从不同的位置将地址输入导航应用程序以找到他或她返回汽车的路。另外,用户可能会从第一位置行进到一个以上位置,并且反向跟随同一路线从一个位置到另一位置可能是效率低下和/或不可取的。
在一些实例中,计算装置100可以接收触发以在计算装置上启动AR应用程序,并且可以作为响应启动AR应用程序。例如,用户可以在计算装置100上启动AR应用程序,用户可以在计算装置上启动AR专用相机,或者计算装置可以检测计算装置的速度变化(例如,加速度变化)并且在假设用户已从移动状态(例如,驾驶)变为停止状态(例如,停车)的情况下启动AR应用程序。
在一些情况下,启动AR应用程序可以包含用户经由智能玻璃查看他或她的物理环境以及AR(例如,在汽车显示屏的挡风玻璃上查看AR)、经由计算装置的显示屏(例如,智能手机显示屏、平板电脑显示屏、个人计算机显示屏等)查看AR,或经由头戴式耳机查看AR。AR可能会出现在显示在真实世界中的化身或其它非真实项目。例如,用户可以看到有几辆汽车的停车场,这些汽车实际上存在于停车场中,但是他们也可以看到表示用户的化身或指示用户应该前进的方向的箭头。化身和箭头均不存在于真实世界中。
换言之,启动AR应用程序可以使用户的物理位置可见,并且用户可以看到数字图像或数据在真实世界对象上的呈现。例如,叠加的数字信息可以叠加在用户的物理环境视图上。数字信息可以根据用户的物理位置和任务的上下文(例如,确定路线、跟踪移动等)进行定制,从而帮助用户完成任务。与虚拟现实不同,AR不是对现实的模拟,而是整合并增加用户与真实世界的交互。
一旦启动AR应用程序,计算装置就可以跟踪计算装置相对于第一位置(例如,汽车)的移动。这可以使用GPS、加速度计、陀螺仪或其任何组合等来完成。例如,用户可以从他或她的汽车出发去工作,然后去餐厅。可以跟踪这些移动。当用户准备返回第一位置(例如,他或她的汽车)时,可以基于跟踪的移动提供路线。路线可以包含显示的AR。在一些实例中,可以相对于用户定义的主平台来执行对移动的跟踪。例如,用户可以选择他或她的智能手机作为最频繁使用的计算装置,并选择该计算装置进行自动跟踪。
AR可以将虚拟对象叠加在真实世界环境上以掩盖真实世界环境的一部分和/或添加到真实世界环境,使得其被感知为真实世界环境的沉浸方面。在一些实例中,AR可以显示和/或自动化数个图像和/或增强AR图像以在用户界面102上移动和/或改变。
在实例中,用户可以使用在用户界面102上显示的路线返回他或她停放的汽车。该路线可以包含经过停车场以从餐厅到达停放的汽车。这可以是与先前去工作然后去餐厅所采用的路线不同的路线。当用户走回到他或她停放的汽车时,用户界面102显示包含诸如灌木丛104-1和停车路径104-2的真实对象的路线,并且还显示诸如右箭头108-1和停车标志108-2的AR。AR可以引导用户在沿着停车路径104-1进一步前进之前停止(例如,经由停车标志108-2)并且指示用户向右转(例如,经由右箭头108-1)。例如,该路线可以至少部分地是非描述性的,因为它引导用户沿着停车路径并经过停车场到达特定的停车位置而没有物理位置并且没有跟随指定的街道。非描述性路线还可以包含可以使用AR显示但未以文字描述的路线。例如,路线可能无法描述为“在300英尺内的第二街道左转”,而是使用AR更好地显示。
在一些实例中,计算装置100可以通信地耦合到为其提供路线的不同计算装置。如本文所使用的,“通信地耦合”可以包含经由装置之间的各种有线和/或无线连接进行耦合,使得数据可以在装置之间的各个方向上传送。耦合不需要是直接连接,并且在一些实例中,可以是间接连接。
例如,当检测到不同计算装置的连接时,计算装置100可以接收触发以启动AR应用程序。例如,不同的计算装置可以是无人机。无人机可以包含相机,并且用户界面102可以显示无人机的相机以及AR所看到的内容以帮助用户将无人机引导到所需位置。例如,如果无人机要在没有物理地址的位置将包裹递送给个人或递送到特定位置(例如,家的后院)。例如,出于安全目的,个人可能不希望将包裹递送到他或她的前门,而是递送到有围墙的后院。无人机操作者可以经由用户界面102查看路线并将无人机引导到所需位置。
图2图示了根据本公开的数个实施例的用于提供具有包含通知210的AR的路线的计算装置200的用户界面202的实例。连同关于图1所讨论的显示路线和可视指示器,可以使用其它通知来指引用户沿着正确的路线前进。例如,计算装置200可以在指令即将到来时振动,或者计算装置200可以在显示图1的用户界面102上显示的图像的同时给出“停止并右转”的口头指令。通信地耦合到计算装置200的计算装置还可以指示方向;例如,智能手表可以基于指示用户转向的方向在特定侧振动(例如,在手表的右侧振动以右转)。
可以为有特定需要的用户定制诸如通知210的通知。例如,有视觉障碍的用户可以接收口头指令以及显示在用户界面202上的AR。有听力障碍的用户可以接收附加的视觉指示,例如具有或不具有指示路线指令的文字的闪烁屏幕。诸如振动的物理通知也可以指示指令。上述通知的任何组合,无论是否定制,都可用于指示路线指令。例如,用户可以基于他或她的偏好选择特定设置。
图3图示了根据本公开的数个实施例的用于提供具有AR的路线的计算装置300的实例。计算装置300可以是设备。如图3所图示,计算装置300可以包含处理资源(例如,处理器)322、存储器324、用户界面302和相机328。计算装置300可以是例如个人膝上型计算机、台式计算机、智能手机、平板电脑、腕戴式装置、数码相机和/或其冗余组合,以及其它类型的计算装置。
存储器324可以是可由处理资源322存取以执行本公开的各种实例的任何类型的存储媒体。例如,存储器324可以是其上存储有计算机可读指令(例如,计算机程序指令)的非暂时性计算机可读媒体,该计算机可读指令可由处理资源322执行以在设备处于第一位置时在设备处接收触发以启动多个AR应用程序。例如,从相机、设备的GPS、设备的加速度计、设备的陀螺仪、设备的传感器或其组合接收触发。触发可以是启动相机(例如,通用的或AR专用的);来自GPS、加速度计或陀螺仪的位置或速度变化指示;指示需要创建路线的传感器;收到启动AR应用程序的请求;或其组合。这些指令可以进一步执行以启动多个AR应用程序、在设备从第一位置行进到第二位置时跟踪设备的位置,以及使用启动的多个AR应用程序提供从第二位置到第一位置的路线。
例如,当用户接收到约见朋友喝咖啡的邀请时,他或她可能在公园长椅上。用户可能希望在喝完咖啡后回到公园长椅。在此实例中,用户可以在他或她的计算装置上启动AR应用程序,作为触发。在用户的计算装置从第一位置(例如,公园长椅)行进到第二位置(例如,咖啡店)时,跟踪其位置。喝完咖啡后,例如如果他或她忘记了公园长椅的确切位置或者他或她希望有一条不同的返回路线,向用户提供返回公园长椅的路线。例如,从第二位置到第一位置的路线可以不同于设备从第一位置行进到第二位置的反向路线。路线可以是描述性的、非描述性的,或其组合,并且可以包含引导用户返回公园长椅的AR。例如,当用户查看用户界面302上的真实图像时,可以显示AR,指示用户即将到来的转弯、障碍物等。在一些实例中,AR可以包含要跟随的虚拟路径。
在一些情况下,存储器324可以是其上存储有计算机可读指令的非暂时性计算机可读媒体,计算机可读指令可由处理资源322执行以使用启动的多个AR应用程序来跟踪设备从第二位置到第三位置的位置并提供从第三位置到第一位置的路线。例如,在先前的实例中,用户可以从咖啡店(例如,第二位置)行进到杂货店(例如,第三位置),然后希望返回公园长椅(例如,第一位置)。经由用户界面302提供从杂货店到公园长椅的路线,其中AR经由路径或其它指令引导用户。从第三位置到第一位置的路线可以不同于从第一位置到第二位置和第三位置的路线的反向路线。
在一些实例中,可以经由视觉、口头(例如,可听的)或物理通知向用户通知路线指令。通知可以经由计算装置或不同的计算装置进行。例如,指令可以是可执行的,以指示通信地耦合到设备的可穿戴装置向可穿戴装置的穿戴者提供路线指令的物理指示、口头指示和/或视觉指示。例如,可穿戴装置(例如,智能手表、智能眼镜、健身跟踪器等)可以在出现新的AR时或在用户正在接收方向时振动。可穿戴装置可以发出诸如“此处左转”的口头命令以配合用户界面302的显示屏上的AR。在一些情况下,可穿戴装置还具有用户界面,该用户界面可以在用户左转时显示AR或诸如“向左”的通知。可穿戴装置可以使用指示的任何组合等。虽然本文描述了可穿戴装置,但是其它计算装置可以通信地耦合到该计算装置并接收指示。例如,如果计算装置是智能手机,并且用户在他或她的公文包中具有通信耦合的平板电脑,则平板电脑还可以提供路线指令的指示。
在一些实例中,处理资源322可进一步经配置以执行存储在存储器324中的可执行指令,以在通信地耦合到计算装置的不同计算装置处于第一位置时接收触发以启动多个AR应用程序、在计算装置上启动多个AR应用程序、跟踪不同设备的位置、使用启动的多个AR应用程序为不同计算装置提供到第二位置的路线,以及经由用户界面显示包含AR的路线。例如,不同的计算装置可以包含无人机。计算装置可以接收无人机处于特定位置的指示(例如,准备递送),并且可以启动AR应用程序。无人机可以具有相机和跟踪功能(例如,GPS、陀螺仪、加速度计等)。使用无人机的跟踪功能,计算装置可以跟踪无人机的位置、查看无人机在其相机上接收的内容,以及显示到包含AR的特定位置的路线。例如,无人机操作者可以基于在计算装置上提供的AR的路线指示无人机去哪里。换言之,指令可以是可执行的,以远程控制不同的计算装置(例如,无人机)使用路线行进到第二位置。在一些情况下,第二位置不具有物理位置(例如,家里的露天平台)。
存储器324可以是易失性或非易失性存储器。存储器324还可以是可移动(例如,便携式)存储器或不可移动(例如,内部)存储器。例如,存储器324可以是随机存取存储器(RAM)(例如,动态随机存取存储器(DRAM)和/或相变随机存取存储器(PCRAM))、只读存储器(ROM)(例如,电可擦除可编程只读存储器(EEPROM)和/或光盘只读存储器(CD-ROM))、闪速存储器、激光盘、数字多功能盘(DVD)或其它光学存储,和/或诸如磁带盒、磁带或磁盘等磁性媒体,以及其它类型的存储器。
此外,虽然存储器324被图示为位于计算装置300内,但是本公开的实施例不限于此。例如,存储器324可以位于外部计算资源上(例如,使计算机可读指令能够通过因特网或其它有线或无线连接下载)。
如图3所图示,计算装置300包含用户界面302。计算装置300的用户(例如,操作者)可经由显示屏上示出的用户界面302与计算装置300交互。例如,用户界面302可以经由显示屏向计算装置300的用户提供(例如,显示和/或呈现)信息,和/或从计算装置300的用户(例如,由其输入)接收信息。例如,在一些实施例中,用户界面302可以是能够向计算装置300的用户提供信息和/或从其接收信息的GUI。示出用户界面302的显示屏可以是例如触摸屏(例如,GUI可以包含触摸屏功能)。
图4图示了根据本公开的数个实施例的用于提供具有AR的路线的计算装置400(例如,设备)的另一实例。计算装置400可以对应于图3中的计算装置300。计算装置400可以包含处理资源422、存储器424、用户界面402和相机428。处理资源422、存储器424、用户界面402和相机428可以分别对应于图3中的处理资源322、存储器324、用户界面302和相机328。如图4所图示,计算装置400还可以包含加速度计432、陀螺仪434和GPS 436。
加速度计432、陀螺仪434和/或GPS 436可以位于计算装置400上,如图4所图示,或者在计算装置400的外部。可以经由加速度计432、陀螺仪434和/或GPS 436确定计算装置400的位置和/或加速度或速度变化。
图5是根据本公开的数个实施例的用于提供具有AR的路线的方法540的流程图。方法540可以例如使用诸如关于图3和4描述的计算装置300或400的计算装置来执行。
在542处,方法540包含在诸如移动装置(例如,诸如智能手机或平板电脑的便携式计算装置)的计算装置处接收与计算装置的第一位置相关联的触发。接收触发可以包含例如接收启动计算装置上的AR应用程序的请求、接收启动计算装置上的AR相机的请求,或接收计算装置的加速力的特定变化等。例如,当用户指示他们想要启动AR(例如,经由应用程序或相机)以提供路线时或者当计算装置改变速度以指示停车(诸如停放的汽车)时,存在触发。在一些实例中,响应于触发的接收而在计算装置上启动AR应用程序。当需要返回特定位置的路线时,一或多个AR应用程序可以允许AR引导。
在544处,方法540包含跟踪计算装置相对于第一位置的移动。使用GPS、加速度计或陀螺仪等,可以跟踪计算装置的位置,从而允许确定返回特定位置的路线。在一些实例中,第一位置和/或第二位置不具有物理地址。例如,停放在购物中心停车场的汽车不具有物理地址,因此可能无法提供进出停车场的描述性路线(例如,使用街道名称)。
在546处,方法540包含提供从在跟踪的移动期间到达的第二位置返回第一位置的路线。例如,路线包含显示的AR(例如,经由移动装置的显示屏),其可以指示用户如何返回第一位置(例如,经由非描述性路线)。在一些情况下,可以经由警报向计算装置和/或向与该计算装置相关联的不同计算装置提供该路线。例如,当路线指令发生时,用户可以经由计算装置或与计算装置相关联的可穿戴装置接收振动、口头命令或可视指令。
尽管本文已经图示和描述了特定实施例,但是本领域的普通技术人员将理解,计算为实现相同结果的布置可以替代所示的特定实施例。本公开旨在涵盖本公开的一或多个实施例的修改或变化。应当理解,以上描述是以说明性的方式而不是限制性的方式进行的。通过阅读以上描述,以上实施例的组合以及本文未具体描述的其它实施例对本领域技术人员将是显而易见的。本公开的一或多个实施例的范围包含其中使用上述结构和方法的其它应用。因此,本公开的一或多个实施例的范围应当参考所附权利要求以及这些权利要求所赋予的全部等效范围来确定。
在前述的具体实施方式中,出于简化本公开的目的,将一些特征组合在单个实施例中。本公开的方法不应被解释为反映本公开的公开实施例必须使用比每个权利要求中明确陈述的特征更多的特征的意图。相反,如以下权利要求所反映的,发明主题在于少于单个公开实施例的所有特征。因此,下面的权利要求由此并入具体实施方式中,其中每个权利要求独立地作为单独的实施例。

Claims (17)

1.一种方法,其包括:
在移动装置处接收与计算装置的第一位置相关联的触发;
响应于所述触发的接收而在所述移动装置上启动增强现实AR应用程序;
使用所述移动装置的全球定位系统、所述移动装置的加速度计或所述移动装置的陀螺仪或其任何组合来跟踪所述移动装置相对于所述第一位置的移动;以及
提供从在所述跟踪的移动期间到达的第二位置返回所述第一位置的路线,
其中所述路线包括经由所述AR应用程序和所述移动装置的显示屏显示的所述路线返回的物理环境内的AR;以及
其中所述路线包括跟随包含街道地址的道路的描述性路线和不跟随包含街道地址的道路的非描述性路线的组合。
2.根据权利要求1所述的方法,其中接收所述触发包括接收在所述移动装置上启动AR相机的请求。
3.根据权利要求1所述的方法,其中接收所述触发包括接收所述移动装置的加速力的特定变化。
4.根据权利要求1所述的方法,其进一步包括接收与不具有物理地址的第一位置相关联的所述触发。
5.根据权利要求1所述的方法,其进一步包括经由警报向所述移动装置提供所述路线。
6.根据权利要求1所述的方法,其进一步包括经由警报向与所述移动装置相关联的不同计算装置提供所述路线。
7.一种设备,其包括:
相机;
用户界面;
存储器;以及
处理器,其经配置以执行存储在所述存储器中的可执行指令,以:
在所述设备处于第一位置时在所述设备处接收触发以启动多个增强现实AR应用程序;
启动所述多个AR应用程序;
在所述设备从所述第一位置行进到第二位置时跟踪所述设备的位置;以及
使用启动的多个AR应用程序提供从所述第二位置到所述第一位置的路线,其中:
其中所述路线包括经由所述多个AR应用程序和所述设备的显示屏显示的至所述第二位置的所述路线的物理环境内的AR;以及
其中所述路线包括跟随包含街道地址的道路的描述性路线和不跟随包含街道地址的道路的非描述性路线的组合。
8.根据权利要求7所述的设备,其进一步包括可执行的所述指令以:
跟踪所述设备从所述第二位置到第三位置的位置;以及
使用所述启动的多个AR应用程序提供从所述第三位置到所述第一位置的路线。
9.根据权利要求7所述的设备,其进一步包括可执行的所述指令以从所述相机、所述设备的全球定位系统GPS、所述设备的加速度计、所述设备的陀螺仪、所述设备的传感器或其组合接收所述触发。
10.根据权利要求7所述的设备,其中从所述第二位置到所述第一位置的所述路线不同于所述设备从所述第一位置行进到所述第二位置的反向路线。
11.根据权利要求7所述的设备,其中可执行以提供路线的所述指令包括可执行以指示通信地耦合到所述设备的可穿戴装置向所述可穿戴装置的穿戴者提供路线指令的物理指示的指令。
12.根据权利要求7所述的设备,其中可执行以提供路线的所述指令包括可执行以提供路线指令的口头指示的指令。
13.根据权利要求7所述的设备,其中可执行以提供路线的所述指令包括可执行以经由所述用户界面提供路线指令的视觉指示的指令。
14.一种设备,其包括:
相机;
用户界面;
存储器;以及
处理器,其经配置以执行存储在所述存储器中的可执行指令,以:
在通信地耦合到所述设备的不同设备处于第一位置时接收触发以启动多个增强现实AR应用程序;
在所述设备上启动所述多个AR应用程序;
跟踪所述不同设备的位置;
使用启动的多个AR应用程序为所述不同设备提供到第二位置的路线;以及
经由所述用户界面显示包含AR的所述路线,其中:
所述路线包括经由所述多个AR应用程序显示的至所述第二位置的所述路线的物理环境内的AR;以及
所述路线包括跟随包含街道地址的道路的描述性路线和不跟随包含街道地址的道路的非描述性路线的组合。
15.根据权利要求14所述的设备,其进一步包括可执行以远程控制所述不同设备以使用所述路线行进到所述第二位置的指令。
16.根据权利要求15所述的设备,其中所述不同设备是无人机。
17.根据权利要求16所述的设备,其中所述第二位置不具有物理地址。
CN202110828902.4A 2020-08-07 2021-07-22 提供具有增强现实的路线 Active CN114063796B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US16/988,414 2020-08-07
US16/988,414 US11385071B2 (en) 2020-08-07 2020-08-07 Providing a route with augmented reality

Publications (2)

Publication Number Publication Date
CN114063796A CN114063796A (zh) 2022-02-18
CN114063796B true CN114063796B (zh) 2024-01-16

Family

ID=80114873

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110828902.4A Active CN114063796B (zh) 2020-08-07 2021-07-22 提供具有增强现实的路线

Country Status (2)

Country Link
US (3) US11385071B2 (zh)
CN (1) CN114063796B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105229417A (zh) * 2013-03-14 2016-01-06 三星电子株式会社 具有动态更新机制的导航系统及其操作的方法
CN106462322A (zh) * 2014-06-02 2017-02-22 高通股份有限公司 用于增强现实的设备提供的跟踪数据
CN107356950A (zh) * 2017-07-13 2017-11-17 徐高超 一种基于北斗lbs一键定位导航技术的停车系统
WO2019093193A1 (ja) * 2017-11-08 2019-05-16 ソニー株式会社 情報処理装置、車両、移動体、情報処理方法、及びプログラム
CN109872556A (zh) * 2018-12-27 2019-06-11 福建农林大学 一种基于增强现实的室内停车场寻车系统

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9973899B1 (en) 2011-03-01 2018-05-15 Sozo Innovations, LLC System for location based triggers for mobile devices
US10429191B2 (en) * 2016-09-22 2019-10-01 Amadeus S.A.S. Systems and methods for improved data integration in augmented reality architectures
US10234299B2 (en) * 2016-12-16 2019-03-19 Osvaldo Morales Geo-location tracking system and method
DE102017213177A1 (de) 2017-07-31 2019-01-31 Audi Ag Verfahren zum Betreiben eines Bildschirms eines Kraftfahrzeugs sowie Kraftfahrzeug
KR102434580B1 (ko) * 2017-11-09 2022-08-22 삼성전자주식회사 가상 경로를 디스플레이하는 방법 및 장치
US11044581B2 (en) 2019-01-21 2021-06-22 Qualcomm Incorporated Signaling for round trip time (RTT) based positioning using stronger path tracking
US11148620B2 (en) 2019-01-30 2021-10-19 Toyota Motor Engineering & Manufacturing North America, Inc. Vehicle range maximization based on external factors
US20210034869A1 (en) * 2019-07-30 2021-02-04 Didi Research America, Llc Method and device for using augmented reality in transportation

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105229417A (zh) * 2013-03-14 2016-01-06 三星电子株式会社 具有动态更新机制的导航系统及其操作的方法
CN106462322A (zh) * 2014-06-02 2017-02-22 高通股份有限公司 用于增强现实的设备提供的跟踪数据
CN107356950A (zh) * 2017-07-13 2017-11-17 徐高超 一种基于北斗lbs一键定位导航技术的停车系统
WO2019093193A1 (ja) * 2017-11-08 2019-05-16 ソニー株式会社 情報処理装置、車両、移動体、情報処理方法、及びプログラム
CN109872556A (zh) * 2018-12-27 2019-06-11 福建农林大学 一种基于增强现实的室内停车场寻车系统

Also Published As

Publication number Publication date
CN114063796A (zh) 2022-02-18
US11385071B2 (en) 2022-07-12
US20220316905A1 (en) 2022-10-06
US11674816B2 (en) 2023-06-13
US20220042816A1 (en) 2022-02-10
US20230273037A1 (en) 2023-08-31

Similar Documents

Publication Publication Date Title
US10677609B2 (en) Method and device for providing guidance to street view destination
EP3338136B1 (en) Augmented reality in vehicle platforms
JP7463109B2 (ja) ナビゲーションアプリケーションにおける配車サービスの選択肢のインタラクティブリスト
US9171214B2 (en) Projecting location based elements over a heads up display
KR102021050B1 (ko) 내비게이션 정보를 제공하는 방법, 기계로 읽을 수 있는 저장 매체, 이동 단말 및 서버
JP6717742B2 (ja) ナビゲーション命令を表示する装置及び方法
JP4201758B2 (ja) Gps探索装置
US8711176B2 (en) Virtual billboards
KR20210046592A (ko) 증강 현실 데이터 제시 방법, 장치, 기기 및 저장 매체
US20090319178A1 (en) Overlay of information associated with points of interest of direction based data services
US20190120648A1 (en) Systems and Methods for Controlling Viewport Movement in View of User Context
JP7389211B2 (ja) ナビゲーションアプリケーションにおける配車サービスに関するストリートレベル画像の提供
US10902035B2 (en) Sector-based retrieval of information associated with geographic locations
JP2020537273A (ja) 自動車における表示デバイスの操作方法
CN110720026A (zh) 使用第三方数据在导航应用中自定义可视化
CN114063796B (zh) 提供具有增强现实的路线
US10876853B2 (en) Information presentation device, information presentation method, and storage medium
KR102421370B1 (ko) 위치 기반 ar 서비스에서 지도와 ar 상의 poi 하이라이팅을 연동하는 방법 및 시스템
Tahir Global Positioning System (GPS) Based Location Finder on Android
Betts Software Reviews: See the world through your smartphone
CN114061613A (zh) 用于提供车辆导航服务的方法、装置、介质及车辆

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant