CN101904185B - 移动虚拟和增强现实系统 - Google Patents

移动虚拟和增强现实系统 Download PDF

Info

Publication number
CN101904185B
CN101904185B CN2008801220270A CN200880122027A CN101904185B CN 101904185 B CN101904185 B CN 101904185B CN 2008801220270 A CN2008801220270 A CN 2008801220270A CN 200880122027 A CN200880122027 A CN 200880122027A CN 101904185 B CN101904185 B CN 101904185B
Authority
CN
China
Prior art keywords
equipment
written district
hand
virtual hand
written
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2008801220270A
Other languages
English (en)
Other versions
CN101904185A (zh
Inventor
弗兰切斯卡·舒勒
埃里克·R·布尔克
朱利叶斯·S·吉奥菲
克里斯那·D·约恩纳拉加达
胡安·M·洛佩斯
鱼涵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Motorola Mobility LLC
Google Technology Holdings LLC
Original Assignee
Motorola Mobility LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Motorola Mobility LLC filed Critical Motorola Mobility LLC
Publication of CN101904185A publication Critical patent/CN101904185A/zh
Application granted granted Critical
Publication of CN101904185B publication Critical patent/CN101904185B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/12—Messaging; Mailboxes; Announcements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/021—Services related to particular areas, e.g. point of interest [POI] services, venue services or geofences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/029—Location-based management or tracking services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72439—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for image or video messaging
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72457—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to geographic location
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/20—Services signaling; Auxiliary data signalling, i.e. transmitting data via a non-traffic channel

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Processing Or Creating Images (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

用户可以创建将留给特定设备的“虚拟手写区”，以看作增强现实场景的部分。所述虚拟手写区将被分配到对象的特定物理位置或者部分，所述对象可以是移动的。然后将所述虚拟手写区与位置和个体一起上传到网络服务器，所述个体能够将手写区看作增强现实场景的部分。当被允许查看所述手写区的设备接近所述位置时，所述手写区将被下载到所述设备，并且被显示为增强现实场景的部分。为了进一步加强用户体验，所述虚拟手写区可以是动态的，基于情境而改变。例如，用户可以留下随着例如外部温度、位置、天气状况或者任何其他情境而改变的虚拟手写区消息。

Description

移动虚拟和增强现实系统
技术领域
本发明一般地涉及消息传送，并且尤其涉及在移动虚拟和增强现实系统内的消息传送。
相关申请
本申请涉及2007年8月24日提交的申请号为11/844538、题为“Mobile Virtual and Augmented Reality System”，2007年9月21日提交的申请号为11/858997、题为“Mobile Virtual and Augmented RealitySystem”，以及2007年10月31日提交的申请号为11/930974、题为“MobileVirtual and Augmented Reality System”的申请。
背景技术
消息传送系统已经用于使用户彼此发送和接收消息多年。目前，向另一个个体发送消息的最简单的方式之一是向所述个体的蜂窝电话发送文本消息。近来，已经提出扩展消息传送系统的能力，以使得可以向网络订户提供在特定位置留下特定消息的选择。例如，在US6681107B2“System and method of accessing and recording messages atcoordinate way points”中，作者提出订户可以仅按下在特定位置的按钮，使得设备保存物理位置。然后，他可以按下“记录消息”按钮，其允许他向他的设备中讲出消息。这个消息可以是从特定位置到订户的住所的方向或者任何其他个人消息。所述消息然后被上传到网络，在网络上，其可被其他网络订户获得。创建消息的人可以指定消息对于所有订户、仅在订户的设备中存储的人、在存储器中存储的人的子集或者甚至单个人是否是可获得的。
为了加强用户对上述类型的情境感知消息传送系统的体验，向用户提供的信息类型必须超出简单的文本、图像和视频。因此，需要一种用于在加强用户体验的情境感知系统中进行消息传送的方法和装置。
发明内容
附图说明
图1是情境感知消息传送系统的方框图。
图2图示增强现实场景。
图3是图1的服务器的方框图。
图4是图1的用户设备的方框图。
图5是示出图1的服务器的操作的流程图。
图6是示出当创建静态手写区(graffiti)时图1的用户设备的操作的流程图。
图7是示出当创建非静态手写区时图1的用户设备的操作的流程图。
图8是示出图1的用户设备的操作的流程图。
具体实施方式
为了解决上述需要，在此提供了一种用于在移动虚拟和增强现实系统内进行消息传送的方法和装置。在操作期间，用户可以创建将留给特定设备的“虚拟手写区”，以看作增强现实场景的部分。虚拟手写区将被分配到对象的特定物理位置或部分，所述对象可以是移动的。然后将虚拟手写区与位置和个体一起上传到网络服务器，所述个体能够将所述手写区看作增强现实场景的部分。当被允许查看手写区的设备接近所述位置时，手写区将被下载到所述设备，并且被显示为增强现实场景的部分。为了进一步加强用户体验，虚拟手写区可以是动态的，基于情境而改变。例如，用户可以留下随着例如外部温度、位置、天气状况或者任何其他情境而改变的虚拟手写区消息。
在增强现实场景中，计算机产生的图像或者“虚拟图像”可以被嵌入到用户看到的真实世界情境中或者与其结合，以增强用户与情境的交互或者用户对于情境的感知。在本发明中，用户的增强现实系统将任何虚拟手写区消息与用户看到的真实世界结合。
作为示例，第一用户可能希望向第二用户留下在餐厅尝试特定菜单项的消息。所述消息可以被虚拟地写在餐厅的门上，并且留给第二用户查看。当第二用户到访该餐厅时，他们将接收到有虚拟手写区可用于他们查看的指示。然后当利用第二用户的增强现实系统查看时，在餐厅的门上向第二用户显现所述消息。以类似的方式，用户可能希望为他本人留言。
本发明涵盖一种用于向设备提供虚拟手写区的方法。所述方法包括以下步骤：从第一设备接收表示虚拟手写区的信息以及虚拟手写区的位置；接收第二设备的位置；以及确定已经满足情境触发。当第二设备的位置接近虚拟手写区的位置并且已经满足情境触发时，向第二设备提供虚拟手写区。
本发明涵盖一种方法，该方法包括以下步骤：从第一设备无线地接收虚拟手写区、第一设备的位置和具有查看虚拟手写区的特权的设备列表；存储虚拟手写区、第一设备的位置和具有查看虚拟手写区的特权的设备列表；周期性地从具有查看虚拟手写区的特权的设备接收位置；周期性地接收第一设备的位置；确定第二设备接近第一设备的位置，其中，第二设备在具有查看虚拟手写区的特权的设备列表上；确定已经满足情境触发；以及当第二设备接近第一设备的位置并且已经满足情境触发时，无线地向第二设备提供虚拟手写区。
本发明还涵盖一种装置，该装置包括：接收器，用于从第一设备接收虚拟手写区以及虚拟手写区的位置；个人对象管理器，用于接收第二设备的位置，并确定已经满足情境触发；以及，发射器，用于当第二设备的位置接近虚拟手写区的位置并且已经满足情境触发时，向第二设备提供虚拟手写区。
现在转向附图，其中，相似的附图标记指定相似的部件。图1是情境感知消息传送系统100的方框图。系统100包括虚拟手写区服务器101、网络103和用户设备105-109。在本发明的一个实施例中，网络103包括下一代蜂窝网络，其能够具有高数据率。这样的系统包括在3GPP中的增强的演进通用陆地无线接入(UTRA)或者演进通用陆地无线接入网络(UTRAN)(也称为EUTRA和EUTRAN)以及在其他技术规范产生组织中的通信系统的演进(诸如在3GPP2的“阶段2”和IEEE802.11、802.16、802.20和802.22的演进)。用户设备105-109包括能够对真实世界进行成像并且向用户提供增强虚拟手写区的真实世界图像的设备。
在操作期间，用户(例如，操作用户设备105的用户)确定他希望向另一个用户发送虚拟手写区作为增强现实场景的部分。然后利用用户设备105创建虚拟手写区，并且将虚拟手写区与位置相关联。用户也向设备105提供了将被允许查看虚拟手写区的用户(例如用户107)列表。设备105然后使用网络103向虚拟手写区服务器101提供该信息。
服务器101周期性地监控所有设备105-109的位置以及它们的身份，并且当特定设备接近被提供有虚拟手写区的位置时，服务器101使用网络103来向该设备提供该信息。当特定设备接近其中可查看虚拟手写区的位置时，该设备例如通过蜂鸣来通知用户。然后用户可以使用设备来查看作为增强现实场景的部分的虚拟手写区。具体地，虚拟手写区将被嵌入到用户看到的真实世界中或者与其结合。应当注意，在替代实施例中，不向用户发送通知。然后，由用户负责在他的环境内查找任何虚拟手写区。
图2图示增强现实场景。在这个示例中，用户已经创建了表明“Joe，try the porter”的虚拟手写区203，并且将该手写区附到门的位置。如图2中所示，真实世界门201上没有手写区。但是，如果用户有查看虚拟手写区的特权，则它们的增强现实查看系统将示出其上具有手写区203的门201。因此，虚拟手写区不是对于系统100的所有用户都可获得的。所述手写区仅对于被指定能够查看它的那些(优选地由创建手写区的个体指定)是可获得的。每个设备105-109向它们的用户提供唯一的增强现实场景。例如，第一用户可以查看第一增强现实场景，而第二用户可以查看完全不同的增强现实场景。在图2中图示这一点，其中手写区205与手写区203不同。因此，朝门201看的第一用户可以查看手写区203，而朝同一门201看的第二用户可以查看手写区205。
虽然利用在特定对象(即，门201)上显示的虚拟手写区203提供了上述示例，但是在本发明的替代实施例中，虚拟手写区可以被显示为未附到任何对象。例如，手写区可以被显示为浮在空中或者仅在人的视野之前。
显然，对于能够显示附到特定对象的虚拟手写区的任何特定设备105-109，节点必须能够识别对象的位置，然后在对象的位置显示手写区。存在若干种方法来完成该任务。在本发明的一个实施例中，通过增强现实系统使用视觉识别来试图将原始创建的虚拟手写区与用户的当前环境相匹配，经由在US2007/0024527“Method and Device forAugmented Reality Message Hiding and Revealing”中所述的技术来完成。例如，由用户创建的虚拟手写区可以与手写区周围的图像一起上传到服务器101。可以将手写区周围的图像与手写区下载到用户的增强现实系统。并且当用户的周围匹配手写区的周围的图像时，将适当地显示手写区。
在本发明的另一个实施例中，通过向虚拟手写区分配物理对象的物理坐标(假定为GPS，但是可以是某个其他系统)来完成将虚拟手写区附到物理对象。可以将物理坐标转换为由3D渲染系统使用的虚拟坐标，3D渲染系统将产生增强现实场景(一种这样的3D渲染系统是特别设计用于移动设备上的Java移动3D图形、或者M3G、API)。用于完成坐标转换的最权宜的方式是通过下述方式将虚拟的x坐标设置为经度，将虚拟y坐标设置为纬度，并且将虚拟z坐标设置为高度，从而在虚拟世界中复制了物理世界：通过将虚拟坐标系的原点置于地心，以使得点(0，0，0)对应于投影到地心的、赤道与本初子午线交叉的点。这也便于消除每次处理虚拟手写区消息时需要执行计算复杂度非常高的从物理坐标向虚拟坐标的转换。
如先前所述，假定物理坐标系是GPS，但并不总是可获得GPS(例如在建筑物内)。在这种情况下，可以取代为任何其他适当的定位系统，例如诸如基于WiFi的室内定位系统。这样的系统可以提供相对于其GPS坐标已知的固定基准点(xr，yr，zr)的位置偏移(xo，yo，zo)。不论选择了什么坐标系，结果生成的坐标将总是可被转换为任何其他坐标系。
在获得虚拟手写区的虚拟坐标后，对于3D渲染系统必须建立视点，以能够渲染虚拟场景。也必须在虚拟坐标中指定视点，并且视点完全取决于设备的物理位置和方位(即，视觉方向)。如果视点面向虚拟手写区，则用户将从视点的角度看到虚拟手写区。如果用户向虚拟手写区移动，则虚拟手写区看起来在大小上增大。如果用户在位置上转动180度以背对虚拟手写区，则虚拟手写区将不再可见，并且将不显示虚拟手写区。基于视点通过3D渲染系统来自动地处理所有这些视觉改变。
在给定包含虚拟手写区(在指定的虚拟坐标)的虚拟场景和视点的情况下，3D渲染系统可以产生对于用户唯一的虚拟场景的视图。该虚拟场景必须覆盖在真实世界的视图上以产生增强现实场景。一种用于将虚拟场景覆盖在来自移动设备的摄像机的真实世界的方法是利用M3G背景对象，其允许将任何图像置于虚拟场景之后来作为其背景。使用M3G背景，可以将来自摄像机的连续更新的帧布置在虚拟场景之后，因此使得所述场景看起来覆盖在摄像机的输出上。
在给出上述信息的情况下，确定设备的位置并且将其发送到服务器。服务器确定什么消息—如果有的话—接近所述设备并且可用于所述设备。然后所述设备下载这些消息并进行处理。所述处理包括：将虚拟消息的物理位置转换为虚拟坐标。然后将所述消息布置在那些虚拟坐标处。同时，设备的位置和其方向用于将视点也以虚拟坐标定义到虚拟世界中。如果可从给定的视点看到下载的虚拟消息，则将其渲染在移动设备的显示器上从设备的摄像机看在场景的实况视频的顶部。
因此，如果用户要将虚拟消息布置在对象的顶部，则用户必须识别在将留言的对象顶部上的点的位置。在最简单的情况下，用户可以将他的设备布置在所述对象上，并且捕获位置。然后他向服务器发送虚拟对象的该位置及其相关联的内容(例如啤酒杯，将文本消息“try theporter”应用到啤酒杯的面向南侧)。用户还指定所述消息对于特定用户是可获得的。当特定用户到达酒吧并且在消息的范围内时，他们将从他们的位置(因此从他们的视点)看到消息。如果他们向消息的面向东侧看去，则他们将看到啤酒杯，但是刚好能够知道在面向南侧上有一些文本消息。如果用户希望阅读文本消息，则他们需要移动他们的设备(因此他的视点)，以使得其面向啤酒杯面向南侧。
图3是图1的服务器的方框图。显然，服务器101包括全局对象管理器301、数据库303和个人对象管理器305。在操作期间，全局对象管理器301将从希望在服务器101上存储手写区的任何设备105-109接收虚拟手写区。优选地，通过接收器307无线地接收这个信息。全局对象管理器301负责存储在系统100内存在的所有虚拟手写区。与虚拟手写区一起，全局对象管理器301也将接收手写区的位置以及被允许显示手写区的设备列表。再一次，优选地，通过接收器307来无线地接收这个信息。如果要将手写区附到特定的项(运动或者静止)，则也将接收到用于将虚拟手写区附到对象上所需的信息。对于第一实施例，存储静止项的周围的数字表示；对于第二实施例，将存储运动或者静止虚拟手写区的物理位置。所有上述信息被存储在数据库303中。
虽然在图3中示出了仅一个个人对象管理器305，但可以想象每个订户具有其自身的个人对象管理器305。个人对象管理器305意欲用作在其对应的订户和全局对象管理器301之间的中介。个人对象管理器305周期性地接收其对应的订户的设备的位置。一旦个人对象管理器305已经确定了所述设备的位置，则个人对象管理器305将访问全局对象管理器301以确定在设备的位置或者接近设备的位置对于特定设备是否存在任何虚拟手写区。个人对象管理器305过滤所有可以获得的虚拟手写区，以确定仅与特定设备和设备的位置相关的虚拟手写区。个人对象管理器305然后基于设备的位置向设备提供显示虚拟手写区所需的相关信息，其中，所述相关的虚拟手写区基于设备的身份和位置来改变。通过指令发射器309向设备无线地发射信息来向所述设备提供这个信息。
图4是图1的用户设备的方框图。如所示，用户设备包括增强现实系统415、情境感知电路409、数据库407、逻辑电路405、发射器411、接收器413和用户接口417。情境感知电路409可以包括能够产生用于用户设备的当前情境的任何设备。例如，情境感知电路409可以包括GPS接收器，其能够确定用户设备的位置。或者，电路409可以包括诸如时钟、能够确定外界温度的温度计、诸如心率监控器的生物特征监控器、加速计、气压计、...等。
在操作期间，设备的用户经由用户接口417创建虚拟手写区。在本发明的一个实施例中，用户接口417包括电子图形输入板，其能够接收和创建手写的消息和/或画面。在另一个实施例中，手写的消息、画面、化身、...等被预先创建和存储在数据库407内。在另一个实施例中，从情境感知电路409直接获得虚拟手写区。
一旦逻辑电路405从用户接口417或者数据库407接收到虚拟手写区，则逻辑电路405访问情境感知电路409并且确定创建手写区的位置(用于静止手写区)或者将附虚拟手写区的设备(用于移动手写区)。逻辑电路405也接收具有查看手写区的特权的用户列表。这个列表也通过用户接口417提供给逻辑电路405。
在本发明的一个实施例中，虚拟手写区与物理对象相关联。当这种情况出现时，逻辑电路405也接收用于将手写区附接到对象所需要的信息。最后，通过下述方式来将虚拟手写区提供给虚拟手写区服务器101：由逻辑电路405指令发射器411发射虚拟手写区、位置、能够查看手写区的用户列表，和如果相关，用于将手写区附接到对象所需的信息。如上所述，服务器101周期性地监控所有设备105-109的位置以及它们的身份，并且当特定设备接近具有虚拟手写区的位置时，服务器101使用网络103来向所述设备提供这个信息。
当特定设备接近可查看虚拟手写区的位置时，设备例如通过指令用户接口417蜂鸣来通知用户。然后用户可以使用设备来查看作为增强现实场景的部分的虚拟手写区。因此，当图4的设备接近对于其可获得虚拟手写区的位置时，接收器413将从服务器101接收手写区和手写区的位置。如果相关，则接收器413也接收用于将手写区附接到物理对象所需的信息。这个信息将被传递到逻辑电路405并且被存储在数据库407中。
逻辑电路405周期性地访问情境感知电路409。以获得对其位置的更新，并且将这些更新提供到服务器101。当逻辑电路405确定应当显示虚拟手写区时，其将向用户通知该事实。然后所述用户可以使用增强现实系统415来显示所述手写区。更具体地，成像器403将成像当前的背景，并且将其提供到显示器401。显示器401也从数据库407接收虚拟手写区，并且提供适当地显示手写区的当前背景的图像。因此，虚拟手写区将被嵌入到用户看到的真实世界中或者与其结合。
如上所述，增强现实系统415可以使用视觉识别来试图将原始创建的虚拟手写区与用户的当前环境相匹配。当显示器401确定用户的周围匹配手写区的周围的图像时，将适当地显示例如附接到物理对象的手写区。
动态虚拟手写区
如上所述，为了进一步加强用户体验，虚拟手写区可以是动态的，基于情境而改变。例如，用户可以留下当已经满足情境触发时而改变的虚拟手写区消息。情境触发可以包括一个或多个传感器超过阈值、其中提取用于触发的情境的一个或多个传感器的融合和处理(例如可以从来自多个加速计传感器的融合/处理数据提取行为，其中，所提取的行为是触发)。这样的触发可以包括例如情境条件(温度、太阳光量等)、生物特征信息(心率、水合作用等)、运动传感器(加速计、陀螺仪等)、时间条件(时间、间隔等)、其他应用(例如万维网服务器小服务程序、在移动设备的日历等)。动态虚拟手写区的一些示例是：
·位置触发(仅当用户接近特定位置时显示手写区)：
о高尔夫球手，其向他们的伙伴提供虚拟手写区，所述虚拟手写区包括用于仅在高尔夫球场查看的高尔夫球。
·行为/姿态触发(仅当用户正在执行特定行为时要显示的手写区)：
о例如，高尔夫球手，当他们正在打高尔夫时提供他们当前的分数以供查看。在这种情况下，可以将加速计/陀螺仪数据通过短距离通信从高尔夫俱乐部流送到用户设备，该用户设备确定用户正在打高尔夫。用户设备向服务器101发送行为(高尔夫)，并且服务器发送适当的对象和可变文本。
о例如，用户在锻炼时显示他们当前的心率以监控。
·时间触发(仅在特定的时段期间显示手写区)
о例如，工人，仅在工作时间期间在文件夹上显示作为虚拟手写区的呼吸记录。
·生物特征触发器(仅当满足特定的生物特征条件时显示手写区)
о例如，用户仅在他们锻炼期间，例如当他们的心率在从步程计(3轴加速计)提取的特定间隔和最佳速度的其目标区域内时，向其他健康中心会员示出他们的最佳锻炼情况作为虚拟手写区。
·情境触发(仅当已经满足了情境参数时要显示的手写区)：
о例如，广告客户显示虚拟手写区消息，所述虚拟手写区消息基于外部温度而改变。
·任务触发(在已经完成了任务后要显示的手写区)：
о例如，锻炼的人，在他们将他们的心率保持在特定水平之上一段时间后，其被奖励手写区。
·上述的任何组合：
为了向用户提供动态的虚拟手写区，手写区的创建者需要向全局对象管理器301提供手写区的情境“触发”以及手写区的位置和被允许显示手写区的设备列表。除了周期性地向服务器101提供他们的位置之外，系统的用户还可能需要提供其他的情境信息。例如，可能需要提供当前的温度，或者需要提供特定的生物特征信息。
如上所述，服务器101周期性地监控所有设备105-109的位置以及它们的身份。当正在向用户提供动态虚拟手写区时，也可以需要周期性地监控除了简单位置之外的情境信息。当特定设备接近被提供有虚拟手写区的位置时并且当满足情境触发时，服务器101使用网络103来向所述设备提供手写区。
可设想两种使用情况：
1.其中“移动”手写区基于情境触发而改变的使用情况(其中，情境触发与接收手写区的设备或者布置/留下手写区的设备相关)。
2.其中“固定”手写区基于情境触发而改变的使用情况(其中，情境触发与接收手写区的设备或者布置/留下手写区的设备相关)。
图5是示出对于其中移动或者固定手写区基于情境触发而改变的使用实例(其中，情境触发与接收手写区的设备或者布置/留下手写区的设备相关)图1的服务器的操作的流程图。逻辑流在步骤501开始，其中，全局对象管理器301从第一设备接收表示虚拟手写区的信息、虚拟手写区的位置和能够查看虚拟手写区的用户列表。当正在使用动态虚拟手写区时，也向全局对象管理器301提供情境触发。例如，触发可以是仅当温度高于特定温度时向用户提供手写区，仅当满足特定的生物特征条件时向用户提供手写区、...等。
应当注意，可以将在步骤501接收到的信息更新为现有的信息。例如，当虚拟手写区是“移动”的时，全局对象管理器301可以接收对于手写区的位置的周期性地更新。而且，当虚拟手写区正在改变(例如心率)时，全局对象管理器301可以接收对于手写区的周期性地更新。
继续图5的逻辑流，然后将信息存储在数据库303中(步骤503)。如上所述，个人对象管理器305将周期性地接收包括第一设备的所有设备的位置(例如地理区域)(步骤505)，并且确定设备的位置是否接近任何存储的虚拟手写区(步骤507)。如果在步骤507，个人对象管理器305确定其对应的设备(第二设备)接近能够查看的任何虚拟手写区(其可以附接到第一设备)，则逻辑流继续到步骤509，其中，个人对象管理器305确定是否已经满足情境触发。具体地，确定已经满足情境触发的步骤可以包括诸如确定已经满足位置触发，确定已经满足行为触发，确定已经满足生物特征触发，确定已经满足时间触发(例如时间在特定的时段内)，确定已经满足情境触发(例如温度在阈值之上)以及确定已经满足任务触发的情况。如果已经满足情境触发，则逻辑流继续到步骤511，其中，经由发射器309向第二设备无线地发射手写区和用于查看虚拟手写区的必要信息(例如手写区的位置)。
应当注意，当虚拟手写区为动态时，情况可能改变，因此手写区可能不再可用于查看。例如，如果温度高于预定水平才显示的广告可能在温度低于所述水平时不再被显示。在另一个示例中，仅在工作时间期间可查看的呼吸记录可能在工作时间后变得不可获得。因此，用户可能已经接收到要显示的手写区(温度高于所述水平、时间在工作时间之内、...等)，但是因为不再满足所述条件(温度低于所述水平、时间不在工作时间之内、...等)而不再能够显示手写区。记住这一点，如果在步骤509确定还没有满足情境触发，则逻辑流继续到步骤513，其中，向所述设备发送消息，以指令设备如果先前发送了手写区则移除手写区。逻辑流然后返回到步骤501。
图6是示出当图1的用户设备创建动态的、非移动的手写区(基于情境而在外观上或可用性上改变)时该用户设备的操作的流程图。具体地，图6的逻辑流示出了创建虚拟手写区并且将手写区存储在服务器101上以当满足特定情境触发时供其他人查看所需的步骤。逻辑流在步骤601开始，其中，用户接口417接收从用户输入的虚拟手写区以及具有查看手写区的特权的设备列表和对于要查看的手写区必须有效的情境触发。可以从用户经由用户接口417输入在这种情况下的虚拟手写区，或者在这种情况下的虚拟手写区可以是从情境感知电路409获得的手写区。例如，当情境感知电路包括心率监控器时，手写区可以是从电路409获得的实际心率。
将这个信息传递到逻辑电路405(步骤603)。在步骤605，逻辑电路405访问情境感知电路409，并且检索虚拟手写区的当前位置。逻辑流继续到步骤607，其中，逻辑电路405指令发射器411向服务器101发射位置、手写区的数字表示(例如.jpeg或者.gif图像)、具有查看手写区的特权的用户列表和情境触发。应当注意，在3D虚拟对象的情况下，数字表示可以包括对3D模型和内容(例如照片、音乐文件等)的URL。如果虚拟手写区在外观上正在改变，则逻辑流可以继续到选用的步骤609，其中，逻辑电路405周期性地更新手写区。
图7是示出当图1的用户设备创建动态的、移动的手写区时该用户设备的操作的流程图。具体地，图7的逻辑流示出了创建将被附接到用户设备的动态虚拟手写区并且将手写区存储在服务器101上以供其他人查看所需的步骤。逻辑流在步骤701开始，其中，用户接口417接收从用户输入的虚拟手写区以及具有查看手写区的特权的设备列表和用于指示在什么条件下可以查看手写区的情境触发。将这个信息传递到逻辑电路405(步骤703)。在步骤705，逻辑电路405访问情境感知电路409，并且检索设备的当前位置，其恰好是虚拟手写区的位置。逻辑流继续到步骤707，其中，逻辑电路405指令发射器411向服务器101发射所述位置、手写区的数字表示(例如.jpeg或者.gif图像)、情境触发和具有查看手写区的特权的用户列表。最后在步骤709，其中，逻辑电路405周期性地访问情境感知电路409，并检索所述设备的当前位置，以及通过向服务器101发射所述位置来周期性地更新这个位置。如果虚拟手写区正在改变，则在步骤709另外进行对手写区的周期性地更新。应当注意，在本发明的优选实施例中，仅当所述设备移动时更新所述设备的位置(并因此更新虚拟手写区的位置)，以便节省带宽。因此，当所述设备/虚拟手写区正在移动时，将对设备的位置进行更频繁的更新。
图8是示出图1的用户设备的操作的流程图。具体地，图8的逻辑流示出了用于显示虚拟手写区所需的那些步骤。逻辑流在步骤801开始，其中，逻辑电路405周期性地访问情境感知电路409，并且向发射器411提供位置以发射到服务器101。在步骤803，接收器413接收查看虚拟手写区所需的信息。如上所述，这个信息可以仅包含虚拟手写区的大体位置以及虚拟手写区的表示。在其他实施例中，这个信息可以包含将虚拟手写区附到对象所需的信息。这样的信息可以包含物理对象的数字表示或者虚拟手写区的精确位置。在步骤805，逻辑电路405访问增强现实系统415，并且向系统415提供用于显示虚拟手写区所需的信息。对于3D情况，这将包括设备的方位以指定视点。最后在步骤807，显示器401将虚拟手写区显示为增强现实场景的部分。
虽然已经参考特定实施例具体示出和描述了本发明，但是本领域内的技术人员可以明白，在不偏离本发明的精神和范围的情况下，可以在其中进行在形式和细节上的各种改变。例如，可以同时检测来自多个类别(生物特征、环境、...等)的多个触发，其中，需要数据融合的方法。可以基于满足的一个或多个情境触发来显示手写区。意欲这样的改变在所附权利要求的范围内。

Claims (8)

1.一种用于向设备提供虚拟手写区的方法，所述方法包括以下步骤：
从第一设备接收表示虚拟手写区的信息以及所述虚拟手写区的位置；
接收第二设备的位置；
确定个体正在执行特定行为；以及
当所述第二设备的位置接近所述虚拟手写区的位置并且个体正在执行特定行为时，向所述第二设备提供所述虚拟手写区。
2.根据权利要求1所述的方法，其中，所述虚拟手写区受限于什么设备能够显示所述虚拟手写区。
3.根据权利要求1所述的方法，其中，所述第二设备的位置包括所述第二设备所位于的地理区域。
4.根据权利要求1所述的方法，其中，向所述第二设备提供所述虚拟手写区的步骤包括以下步骤：将所述虚拟手写区无线地发射到所述第二设备。
5.根据权利要求1所述的方法，进一步包括以下步骤：
向所述第二设备提供所述虚拟手写区的位置。
6.根据权利要求1所述的方法，其中，接收所述第二设备的位置的步骤包括以下步骤：从所述第二设备无线地接收所述第二设备的所述位置。
7.一种用于基于情境触发来创建虚拟手写区的方法，包括以下步骤：
从第一设备无线地接收虚拟手写区、所述第一设备的位置和具有查看所述虚拟手写区特权的设备列表；
存储所述虚拟手写区、所述第一设备的位置和具有查看所述虚拟手写区特权的设备列表；
周期性地从具有查看所述虚拟手写区特权的设备接收位置；
周期性地接收所述第一设备的位置；
确定第二设备接近所述第一设备的位置，其中，所述第二设备在具有查看所述虚拟手写区特权的所述设备列表上；
确定个体正在执行特定行为；以及
当所述第二设备接近所述第一设备的位置并且个体正在执行特定行为时，无线地向所述第二设备提供所述虚拟手写区。
8.一种用于基于情境触发来创建虚拟手写区的装置，包括：
接收器，用于从第一设备接收虚拟手写区以及所述虚拟手写区的位置；
个人对象管理器，用于接收第二设备的位置以及确定个体正在执行特定行为；以及
发射器，用于当所述第二设备的位置接近所述虚拟手写区的位置并且用户正在执行特定行为时向所述第二设备提供所述虚拟手写区。
CN2008801220270A 2007-12-21 2008-11-06 移动虚拟和增强现实系统 Active CN101904185B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US11/962,139 US20100214111A1 (en) 2007-12-21 2007-12-21 Mobile virtual and augmented reality system
US11/962,139 2007-12-21
PCT/US2008/082549 WO2009085399A1 (en) 2007-12-21 2008-11-06 Mobile virtual and augmented reality system

Publications (2)

Publication Number Publication Date
CN101904185A CN101904185A (zh) 2010-12-01
CN101904185B true CN101904185B (zh) 2013-09-25

Family

ID=40824623

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008801220270A Active CN101904185B (zh) 2007-12-21 2008-11-06 移动虚拟和增强现实系统

Country Status (4)

Country Link
US (1) US20100214111A1 (zh)
EP (1) EP2225896B1 (zh)
CN (1) CN101904185B (zh)
WO (1) WO2009085399A1 (zh)

Families Citing this family (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007073470A2 (en) 2005-12-23 2007-06-28 Perdiem, Llc System and method for defining an event based on a relationship between an object location and a user-defined zone
US7525425B2 (en) 2006-01-20 2009-04-28 Perdiem Llc System and method for defining an event based on relationship between an object location and a user-defined zone
EP2009868B1 (en) * 2007-06-29 2016-09-07 Alcatel Lucent Method and system for improving the appearance of a person on the RTP stream coming from a media terminal
US9200901B2 (en) 2008-06-19 2015-12-01 Microsoft Technology Licensing, Llc Predictive services for devices supporting dynamic direction information
US8467991B2 (en) 2008-06-20 2013-06-18 Microsoft Corporation Data services based on gesture and location information of device
US8350871B2 (en) * 2009-02-04 2013-01-08 Motorola Mobility Llc Method and apparatus for creating virtual graffiti in a mobile virtual and augmented reality system
US8769442B2 (en) * 2009-07-07 2014-07-01 Microsoft Corporation System and method for allocating digital graffiti objects and canvasses
US8872767B2 (en) * 2009-07-07 2014-10-28 Microsoft Corporation System and method for converting gestures into digital graffiti
DE102009037835B4 (de) * 2009-08-18 2012-12-06 Metaio Gmbh Verfahren zur Darstellung von virtueller Information in einer realen Umgebung
US8544033B1 (en) 2009-12-19 2013-09-24 Cisco Technology, Inc. System and method for evaluating content in a digital signage environment
EP2355472B1 (en) * 2010-01-22 2020-03-04 Samsung Electronics Co., Ltd. Apparatus and method for transmitting and receiving handwriting animation message
JP5573238B2 (ja) * 2010-03-04 2014-08-20 ソニー株式会社 情報処理装置、情報処理法方法およびプログラム
US9135352B2 (en) 2010-06-03 2015-09-15 Cisco Technology, Inc. System and method for providing targeted advertising through traffic analysis in a network environment
ES2745739T3 (es) 2010-09-20 2020-03-03 Qualcomm Inc Un entorno adaptable para realidad aumentada asistida por la nube
KR101690955B1 (ko) * 2010-10-04 2016-12-29 삼성전자주식회사 증강 현실을 이용한 영상 데이터 생성 방법 및 재생 방법, 그리고 이를 이용한 촬영 장치
US8907983B2 (en) 2010-10-07 2014-12-09 Aria Glassworks, Inc. System and method for transitioning between interface modes in virtual and augmented reality applications
CN102123194B (zh) * 2010-10-15 2013-12-18 张哲颖 利用增强实景技术优化移动导航和人机交互功能的方法
WO2012071466A2 (en) 2010-11-24 2012-05-31 Aria Glassworks, Inc. System and method for acquiring virtual and augmented reality scenes by a user
US9041743B2 (en) 2010-11-24 2015-05-26 Aria Glassworks, Inc. System and method for presenting virtual and augmented reality scenes to a user
WO2012071463A2 (en) 2010-11-24 2012-05-31 Aria Glassworks, Inc. System and method for presenting virtual and augmented reality scenes to a user
KR101459175B1 (ko) * 2010-12-23 2014-11-07 주식회사 케이티 이동하는 가상 이미지를 공유하는 단말 장치 및 시스템과 그 방법
US8953022B2 (en) 2011-01-10 2015-02-10 Aria Glassworks, Inc. System and method for sharing virtual and augmented reality scenes between users and viewers
US20120246223A1 (en) * 2011-03-02 2012-09-27 Benjamin Zeis Newhouse System and method for distributing virtual and augmented reality scenes through a social network
US9118970B2 (en) * 2011-03-02 2015-08-25 Aria Glassworks, Inc. System and method for embedding and viewing media files within a virtual and augmented reality scene
US20120249588A1 (en) * 2011-03-22 2012-10-04 Panduit Corp. Augmented Reality Data Center Visualization
US9277374B2 (en) * 2011-06-21 2016-03-01 Cisco Technology, Inc. Delivering wireless information associating to a facility
CN103959241B (zh) * 2011-09-30 2018-05-11 英特尔公司 用于促进计算设备处基于情景感知模型的图像合成及渲染的机制
US9183604B2 (en) * 2011-11-08 2015-11-10 Vidinoti Sa Image annotation method and system
US8792912B2 (en) 2011-12-22 2014-07-29 Cisco Technology, Inc. System and method for providing proximity-based dynamic content in a network environment
US20130201215A1 (en) * 2012-02-03 2013-08-08 John A. MARTELLARO Accessing applications in a mobile augmented reality environment
US9183676B2 (en) 2012-04-27 2015-11-10 Microsoft Technology Licensing, Llc Displaying a collision between real and virtual objects
WO2013191315A1 (ko) * 2012-06-21 2013-12-27 엘지전자 주식회사 디지털 이미지 처리 장치 및 방법
US9417692B2 (en) 2012-06-29 2016-08-16 Microsoft Technology Licensing, Llc Deep augmented reality tags for mixed reality
EP2688318B1 (en) * 2012-07-17 2018-12-12 Alcatel Lucent Conditional interaction control for a virtual object
US9626799B2 (en) 2012-10-02 2017-04-18 Aria Glassworks, Inc. System and method for dynamically displaying multiple virtual and augmented reality scenes on a single display
FR2999004B1 (fr) * 2012-12-03 2016-01-29 Electricite De France Systeme et procede de simulation d'impact d'ouvrage en devenir
CN103105993B (zh) * 2013-01-25 2015-05-20 腾讯科技（深圳）有限公司 基于增强现实技术实现互动的方法和系统
US9214043B2 (en) * 2013-03-04 2015-12-15 Here Global B.V. Gesture based map annotation
US10769852B2 (en) 2013-03-14 2020-09-08 Aria Glassworks, Inc. Method for simulating natural perception in virtual and augmented reality scenes
US8922590B1 (en) * 2013-10-01 2014-12-30 Myth Innovations, Inc. Augmented reality interface and method of use
US10592929B2 (en) 2014-02-19 2020-03-17 VP Holdings, Inc. Systems and methods for delivering content
US10977864B2 (en) 2014-02-21 2021-04-13 Dropbox, Inc. Techniques for capturing and displaying partial motion in virtual or augmented reality scenes
JP2016057814A (ja) * 2014-09-09 2016-04-21 セイコーエプソン株式会社 頭部装着型表示装置、頭部装着型表示装置の制御方法、情報システム、および、コンピュータープログラム
US9940477B2 (en) 2014-12-11 2018-04-10 Agostino Sibillo Geolocation-based encryption method and system
US10413182B2 (en) * 2015-07-24 2019-09-17 Johnson & Johnson Vision Care, Inc. Biomedical devices for biometric based information communication
CN105848286B (zh) * 2016-05-24 2019-05-14 华中科技大学 基于移动终端进行准确定位及触发虚拟场景的方法和系统
US20210056762A1 (en) * 2018-03-23 2021-02-25 Hoverlay, Inc. Design and generation of augmented reality experiences for structured distribution of content based on location-based triggers
US12067683B2 (en) * 2018-09-14 2024-08-20 Streem, Llc Location persistent augmented reality object and annotation placement
JP6521344B1 (ja) * 2018-10-30 2019-05-29 プロファウンド・デザイン・テクノロジー株式会社 仮想落書処理システム
US12088886B2 (en) 2022-04-15 2024-09-10 Tmrw Foundation Ip S. À R.L. System and method enabling private to public media experiences

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6681107B2 (en) * 2000-12-06 2004-01-20 Xybernaut Corporation System and method of accessing and recording messages at coordinate way points
CN1614545A (zh) * 2003-11-06 2005-05-11 三星电子株式会社 提供虚拟手写的装置和方法及用于同样目的的记录介质

Family Cites Families (53)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5659626A (en) * 1994-10-20 1997-08-19 Calspan Corporation Fingerprint identification system
US6222939B1 (en) * 1996-06-25 2001-04-24 Eyematic Interfaces, Inc. Labeled bunch graphs for image analysis
US6317127B1 (en) * 1996-10-16 2001-11-13 Hughes Electronics Corporation Multi-user real-time augmented reality system and method
WO2000022860A1 (en) 1998-10-12 2000-04-20 Janus Friis Degnbol A method and a system for transmitting data between units
US7073129B1 (en) * 1998-12-18 2006-07-04 Tangis Corporation Automated selection of appropriate information based on a computer user's context
US6825550B2 (en) * 1999-09-02 2004-11-30 Micron Technology, Inc. Board-on-chip packages with conductive foil on the chip surface
US7065253B2 (en) * 1999-09-03 2006-06-20 Intel Corporation Wavelet zerotree coding of ordered bits
SE522917C2 (sv) * 1999-09-10 2004-03-16 Ericsson Telefon Ab L M Mobilkommunikationssystem vilket möjliggör positionsassocierade medelanden
US6304898B1 (en) * 1999-10-13 2001-10-16 Datahouse, Inc. Method and system for creating and sending graphical email
US7127087B2 (en) * 2000-03-27 2006-10-24 Microsoft Corporation Pose-invariant face recognition system and process
KR20040041082A (ko) * 2000-07-24 2004-05-13 비브콤 인코포레이티드 멀티미디어 북마크와 비디오의 가상 편집을 위한 시스템및 방법
US7003308B1 (en) * 2000-09-12 2006-02-21 At&T Corp. Method and system for handwritten electronic messaging
US7224991B1 (en) * 2000-09-12 2007-05-29 At&T Corp. Method and system for handwritten electronic messaging
US7176921B2 (en) * 2000-10-20 2007-02-13 Sony Corporation Graphical rewriting system for multimedia descriptions
US6377793B1 (en) * 2000-12-06 2002-04-23 Xybernaut Corporation System and method of accessing and recording messages at coordinate way points
US20020144007A1 (en) * 2001-03-30 2002-10-03 Koninklijke Philips Electronics N.V. Task management system
EP1386448B1 (en) * 2001-05-02 2007-02-14 Symbian Limited Group communication method for a wireless communication device
US7113618B2 (en) * 2001-09-18 2006-09-26 Intel Corporation Portable virtual reality
US6879835B2 (en) * 2001-12-04 2005-04-12 International Business Machines Corporation Location-specific messaging system
TW569148B (en) * 2002-04-09 2004-01-01 Ind Tech Res Inst Method for locating facial features in an image
US6917370B2 (en) * 2002-05-13 2005-07-12 Charles Benton Interacting augmented reality and virtual reality
US7190960B2 (en) * 2002-06-14 2007-03-13 Cingular Wireless Ii, Llc System for providing location-based services in a wireless network, such as modifying locating privileges among individuals and managing lists of individuals associated with such privileges
US7042421B2 (en) * 2002-07-18 2006-05-09 Information Decision Technologies, Llc. Method for advanced imaging in augmented reality
US7050078B2 (en) * 2002-12-19 2006-05-23 Accenture Global Services Gmbh Arbitrary object tracking augmented reality applications
US20050131776A1 (en) * 2003-12-15 2005-06-16 Eastman Kodak Company Virtual shopper device
US20050289590A1 (en) * 2004-05-28 2005-12-29 Cheok Adrian D Marketing platform
JP4677273B2 (ja) * 2004-06-29 2011-04-27 キヤノン株式会社 情報処理方法および情報処理装置
WO2006044939A2 (en) * 2004-10-19 2006-04-27 Rosen James S System and method for location based social networking
US8878851B2 (en) * 2004-11-12 2014-11-04 Synchronica Plc Method and system for streaming documents, e-mail attachments and maps to wireless devices
KR20060057150A (ko) * 2004-11-23 2006-05-26 (주)유비테크놀로지스 주차 정보 무인 안내 시스템
US7450954B2 (en) * 2005-02-07 2008-11-11 Lamoda, Inc. System and method for location-based interactive content
US8850011B2 (en) * 2005-04-21 2014-09-30 Microsoft Corporation Obtaining and displaying virtual earth images
EP1720131B1 (en) * 2005-05-03 2009-04-08 Seac02 S.r.l. An augmented reality system with real marker object identification
US8275397B2 (en) * 2005-07-14 2012-09-25 Huston Charles D GPS based friend location and identification system and method
US8933889B2 (en) * 2005-07-29 2015-01-13 Nokia Corporation Method and device for augmented reality message hiding and revealing
US20070032244A1 (en) * 2005-08-08 2007-02-08 Microsoft Corporation Group-centric location tagging for mobile devices
US20070043828A1 (en) * 2005-08-16 2007-02-22 Toshiba America Research, Inc. Ghost messaging
DE602005005814T2 (de) * 2005-08-17 2009-04-09 Alcatel Lucent Vorrichtung und Verfahren zur Fernaktivierung/-deaktivierung von Diensten für Kommunikationsendgeräte über ein IP Netzwerk
US20070153731A1 (en) * 2006-01-05 2007-07-05 Nadav Fine Varying size coefficients in a wireless local area network return channel
US8027662B1 (en) * 2006-02-22 2011-09-27 Sprint Spectrum L.P. Parental monitoring via cell phones with media capture and location reporting
US20080079751A1 (en) * 2006-10-03 2008-04-03 Nokia Corporation Virtual graffiti
US20080225779A1 (en) * 2006-10-09 2008-09-18 Paul Bragiel Location-based networking system and method
US8243022B2 (en) * 2006-11-27 2012-08-14 Microsoft Corporation Federated virtual graffiti
US20080154697A1 (en) * 2006-12-22 2008-06-26 Microsoft Corporation Like-Minded People Proximity Detection and Interest Matching System
US8019167B2 (en) * 2007-01-03 2011-09-13 Human Monitoring Ltd. Compressing high resolution images in a low resolution video
US20080215974A1 (en) * 2007-03-01 2008-09-04 Phil Harrison Interactive user controlled avatar animations
US10235429B2 (en) * 2007-08-20 2019-03-19 Stephen W. Meehan System and method for organizing data in a dynamic user-customizable interface for search and display
US20090054084A1 (en) * 2007-08-24 2009-02-26 Motorola, Inc. Mobile virtual and augmented reality system
US7844229B2 (en) * 2007-09-21 2010-11-30 Motorola Mobility, Inc Mobile virtual and augmented reality system
US7853296B2 (en) * 2007-10-31 2010-12-14 Motorola Mobility, Inc. Mobile virtual and augmented reality system
US20090237328A1 (en) * 2008-03-20 2009-09-24 Motorola, Inc. Mobile virtual and augmented reality system
US20100066750A1 (en) * 2008-09-16 2010-03-18 Motorola, Inc. Mobile virtual and augmented reality system
US8350871B2 (en) * 2009-02-04 2013-01-08 Motorola Mobility Llc Method and apparatus for creating virtual graffiti in a mobile virtual and augmented reality system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6681107B2 (en) * 2000-12-06 2004-01-20 Xybernaut Corporation System and method of accessing and recording messages at coordinate way points
CN1614545A (zh) * 2003-11-06 2005-05-11 三星电子株式会社 提供虚拟手写的装置和方法及用于同样目的的记录介质

Also Published As

Publication number Publication date
EP2225896A4 (en) 2013-10-23
EP2225896A1 (en) 2010-09-08
CN101904185A (zh) 2010-12-01
US20100214111A1 (en) 2010-08-26
WO2009085399A1 (en) 2009-07-09
EP2225896B1 (en) 2016-07-06

Similar Documents

Publication Publication Date Title
CN101904185B (zh) 移动虚拟和增强现实系统
CN102037485B (zh) 移动虚拟和增强现实系统
US8769437B2 (en) Method, apparatus and computer program product for displaying virtual media items in a visual media
US7853296B2 (en) Mobile virtual and augmented reality system
US20090054084A1 (en) Mobile virtual and augmented reality system
CN102308599B (zh) 在移动虚拟和增强现实系统中创建虚拟涂鸦的方法和装置
US20090081959A1 (en) Mobile virtual and augmented reality system
CN102388406B (zh) 使用便携式电子设备记录产生三维模型
KR101508076B1 (ko) 증강현실을 위한 유연한 데이터 다운로드 모델들
US20170332197A1 (en) Maintaining privacy in location-based operations
CN106815345A (zh) 一种实时数据的显示方法及一种移动终端
JP5512378B2 (ja) オブジェクト表示装置、オブジェクト表示システム及びオブジェクト表示方法
CN109387217A (zh) 导航方法、计算机可读存储介质及导航服务器
CN104770054A (zh) 用于移动设备的统一资源定位符(url)列表的位置感知管理
JP2009176032A (ja) 情報処理装置および方法、並びにプログラム
CN106687944A (zh) 使用语言生成进行的基于活动的文本重写
CN109847331A (zh) 体感游戏实现方法、系统、设备及存储介质
US20170359442A1 (en) Distribution of Location-Based Augmented Reality Captures
JP2014219333A (ja) 投稿情報表示システム、サーバ、端末装置、投稿情報表示方法およびプログラム
JP6164633B2 (ja) 投稿情報表示システム、サーバ、端末装置、投稿情報表示方法およびプログラム
US20140201205A1 (en) Customized Content from User Data
CN110276837B (zh) 一种信息处理方法、电子设备
JP2024132125A (ja) 提供装置、提供方法及びコンピュータープログラム
CN113885983A (zh) 名片展示方法、智能终端及可读存储介质
CN117859154A (zh) 信息处理装置、信息处理方法和程序

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: MOTOROLA MOBILE CO., LTD.

Free format text: FORMER OWNER: MOTOROLA INC.

Effective date: 20110113

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20110113

Address after: Illinois State

Applicant after: MOTOROLA MOBILITY, Inc.

Address before: Illinois State

Applicant before: Motorola, Inc.

C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
C56 Change in the name or address of the patentee
CP01 Change in the name or title of a patent holder

Address after: Illinois State

Patentee after: MOTOROLA MOBILITY LLC

Address before: Illinois State

Patentee before: MOTOROLA MOBILITY, Inc.

TR01 Transfer of patent right

Effective date of registration: 20160704

Address after: California, USA

Patentee after: Google Technology Holdings LLC

Address before: Illinois State

Patentee before: MOTOROLA MOBILITY LLC