CN108604119A - 在增强和/或虚拟现实环境中的虚拟项的共享 - Google Patents

在增强和/或虚拟现实环境中的虚拟项的共享 Download PDF

Info

Publication number
CN108604119A
CN108604119A CN201680081534.9A CN201680081534A CN108604119A CN 108604119 A CN108604119 A CN 108604119A CN 201680081534 A CN201680081534 A CN 201680081534A CN 108604119 A CN108604119 A CN 108604119A
Authority
CN
China
Prior art keywords
virtual
item
user
target
virtual item
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680081534.9A
Other languages
English (en)
Other versions
CN108604119B (zh
Inventor
曼纽尔·克里斯蒂安·克莱蒙特
斯特凡·韦尔克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN108604119A publication Critical patent/CN108604119A/zh
Application granted granted Critical
Publication of CN108604119B publication Critical patent/CN108604119B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/131Protocols for games, networked simulations or virtual reality
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/428Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving motion or position input signals, e.g. signals representing the rotation of an input controller or a player's arm motions sensed by accelerometers or gyroscopes
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/55Controlling game characters or game objects based on the game progress
    • A63F13/57Simulating properties, behaviour or motion of objects in the game world, e.g. computing tyre load in a car race game
    • A63F13/573Simulating properties, behaviour or motion of objects in the game world, e.g. computing tyre load in a car race game using trajectories of game objects, e.g. of a golf ball according to the point of impact
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8082Virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements

Abstract

在用于在增强现实环境和/或虚拟现实环境中共享项的系统和方法中,使用例如扔掷或者投掷运动可以将所选择的虚拟项虚拟地推进到目标接收者,使得在与目标接收者没有直接物理和/或虚拟接触的情况下可以与目标接收者共享所选择的项。可以检测并跟踪用户的手的移动,使得可以基于用户的手的投掷运动的投射轨迹识别用于被共享的项的预期目标接收者。用户与不同目标接收者之间的关联可以使得不同的可能目标接收者为用于共享的用户扔掷或者投掷的特定项展示不同的吸引力或不同的磁性水平,以在可能的目标接收者之间进一步区分,并且解决接收者含糊不清。

Description

在增强和/或虚拟现实环境中的虚拟项的共享
相关申请的交叉引用
本申请是2016年12月21日提交的美国申请No.15/386,614的继续申请并且要求其优先权,其要求于2016年5月5日提交的美国临时申请No.62/332,314的优先权,其全部内容通过引用合并于此。
本申请要求于2016年5月5日提交的美国临时申请No.62/332,314的优先权,其全部内容通过引用合并于此。
技术领域
本申请通常涉及在虚拟现实和/或增强现实环境中的项传输和/或共享。
背景技术
增强现实(AR)系统和/或虚拟现实(VR)系统可以生成三维(3D)沉浸式增强和/或虚拟现实环境。用户可以通过与各种电子设备,诸如头盔或包括显示器、眼镜或护目镜的其他头戴式设备的交互来体验这种沉浸式环境。用户可以穿过并且通过例如手/手臂姿势、可操作地耦合到头戴式设备的外部设备的操纵等等与虚拟环境中的元件以及虚拟空间中的其它用户进行交互。
发明内容
在一个方面中,计算机实现的方法可以包括:由在周围环境中操作的计算设备生成虚拟环境;由计算设备的处理器接收通过与所选择的虚拟项的虚拟接触的选择设备对虚拟项的选择;跟踪与所选择的虚拟项的虚拟接触的选择设备的移动,并且基于所跟踪的与所选择的虚拟项虚拟接触的选择设备的移动投射用于推进所选择的虚拟项的虚拟轨迹;基于所投射的用于推进所选择的虚拟项的虚拟轨迹来识别用于所选择的虚拟项的目标接收者;以及与预期的目标接收者共享所选择的虚拟项。
在另一方面中,计算设备可以包括:存储器,该存储器存储可执行指令;和处理器,该处理器被配置成执行指令。指令的执行可以使计算设备生成虚拟环境;接收通过与所选择的虚拟项的虚拟接触的选择设备对虚拟项的选择;跟踪与所选择的虚拟项接触的选择设备的移动,并且基于所跟踪的所选择的虚拟项的移动投射用于推进所选择的虚拟项的虚拟轨道;基于所投射的用于推进所选择的虚拟项的虚拟轨迹来识别用于被选择的虚拟项的预期目标接收者;并且与预期的目标接收者共享被选择的虚拟项。
在附图和下面的描述中阐述一个或多个实施方式的细节。将从说明书和附图以及从权利要求中其他特征将会是显而易见的。
附图说明
图1A-1D图示根据如在此所描述的实施方式的在增强现实系统和/或虚拟现实系统中的项共享或者投掷的示例实施方式。
图2A-2F和3A-3B图示根据在此所描述的实施方式的通过在增强和/或虚拟现实系统中投掷的项移动和/或排序的示例实施方式。
图4A-4D和5A-5C图示根据如在此所描述的实施方式的基于相对吸引力的项共享和/或投掷到预期目标接收者的示例实施方式。
图6A-6E图示根据如在此所描述的实施方式的用于在增强和/或虚拟现实系统中的智能尺寸调整和/或放置的项共享和/或投掷的示例实施方式。
图7A-7B和图8A-8B图示根据如在此所描述的实施方式的在增强和/或虚拟现实购物环境中的项共享和/或投掷的示例实施方式。
图9图示根据如在此所描述的实施方式的包括头戴式显示设备和控制器的增强现实和/或虚拟现实系统。
图10A和10B是根据如在此描述的实施方式的示例头戴式显示设备的透视图。
图11是根据如在此描述的实施方式的头戴式电子设备和控制器的框图。
图12是根据如在此描述的实施方式的通过在增强现实系统和/或虚拟现实系统中投掷来共享项的方法的流程图。
图13示出能够被使用以实现在此描述的技术的计算机设备及移动计算机设备的实例。
具体实施方式
用户可以体验由例如头戴式显示器(HMD)设备生成的增强现实(AR)环境和/或3D虚拟现实(VR)环境,同时使用例如手和/或手臂姿势、控制器等以操纵和/或与虚拟环境中的虚拟对象交互。为了促进以这种方式在虚拟环境中与虚拟对象交互和/或操纵虚拟对象,可以检测例如用户的手和/或由用户持有的控制器的位置和/或定向,并且用户的手和/或手持控制器在物理现实世界环境中的移动可以被跟踪并且被转换成虚拟环境中的对应移动,用于与虚拟环境中的虚拟对象的交互/操纵。在一些情况下,用户可能想要向或与目标接收者,例如,在虚拟环境中的另一用户、另一设备、用于共享、协作、存储的另一虚拟位置等传递或者共享项。
在用于在虚拟环境中共享的系统和方法中,根据如在此所描述的实施方式,用户可以触发要与诸如另一用户、另一虚拟位置、其它设备等等的目标接收者共享的项的移动,以在没有例如直接手对手项传递或者虚拟手对手项传递的情况下允许在虚拟环境中对项的共享。这种移动可以通过例如抛掷、投掷或以其他方式将项推向目标接受者来触发。这可以允许虚拟项与不必在虚拟环境中紧密接近并且/或者在用户之间的虚拟环境中具有直接联系的目标接收者,并且尤其是在虚拟环境中的用户的虚拟对象以及目标接收者共享以便于从用户将虚拟项传递到目标接收者。在一些实施方式中,用户还可以使用这种类型的虚拟移动(例如,抛掷(tossing)、投掷(throwing)或以其他方式推动(propelling))来对虚拟环境中的各种不同类型的项进行分类、排列、存储、显示等。在一些实施方式中,系统可以基于与例如被移动(例如,抛掷、投掷或推动)的项、可用的目标接收者等等相关联的一个或多个规则来将项的移动朝向特定目标接收者定向(例如,抛掷、投掷或以其他方式推进),使得项与预期接收者的成功共享不仅依赖于朝着预期目标接收者的用户的触发移动的准确性。这可以增强或增加项与预期目标接收者共享的可能性。
在用于在虚拟环境中共享的系统和方法中,根据在此所描述的实施方式,通常不会在现实世界环境中推动(即,抛掷或投掷)的项,例如,具有关联的元数据的项,可以被推动(即,抛掷或投掷)到预期的目标接收者以触发另一个动作。通常不会在真实世界环境中被推动,通常也不会在虚拟环境中投掷它们的虚拟表示的项(例如文件等)可以被推动,以便于在虚拟世界环境中,和/或现实世界环境中触发其他的动作。
在下文中,为了便于讨论和说明,将关于通过用户项的抛掷或投掷类型的移动描述用于共享、分类、显示等等的所选择的项从第一用户到预期目标接收者的移动。然而,用户可以以各种其他方式推进所选择的虚拟项以将选择的项传送到预期的目标接收者。虚拟空间中的虚拟项的选择可以例如通过在被指定的选择设备,诸如在虚拟环境中的用户的手,在下文中被称为“用户的手”、或者另一选择设备与虚拟项之间的虚拟空间中的虚拟接触发生。虚拟环境中的这种类型的接触在下文中将被称为虚拟接触。推进虚拟项(即,虚拟推进)导致虚拟项在虚拟环境中的移动以在虚拟项与用户的手之间的虚拟接触结束之后继续,其中该移动遵循朝着目标接收者的虚拟轨迹。
将会关于被沉浸在虚拟环境V中的真实世界、物理空间P中的第一用户A和虚拟地存在于与第一用户A相同的虚拟空间V中的第二用户B描述在图1A-1D中示出的示例实施方式。第一用户A和第二用户B可以占据相同的物理空间P,或者可以占据单独的物理空间,同时存在于相同的虚拟环境V中。在图1A-1D中示出的示例中,虚拟环境V由用户佩戴的HMD100生成,同时用户的视野被限于由HMD产生的虚拟环境。然而,下面关于图1A-图1D描述的概念和特征也可以应用于其他类型的HMD以及其他类型的虚拟现实环境和/或增强现实环境。
如图1A中所示,用户A可以选择或检索项200,诸如照片、文档、音频文件、视频文件、要在沉浸式虚拟体验中共享的虚拟对象以及其它的这样的项。用户A可以使用例如与用户A可用的项的菜单或目录或文件夹进行交互的手势、对控制器的操纵等从例如项组或项集合中选择项200。一旦用户A已经选择项200,用户可以选择与用户B共享项200。例如,用户A可以将项200抛掷或投掷到用户B以与用户B共享项200,在本示例中用户B是对于项200的用户A的预期目标接收者。例如,如图1B中所示,在一些实施方式中,用户B的手势可以指示从用户A接收项200的意愿和/或接收项200的准备度,并且/或者可以建立用户A和用户B之间的虚拟连接。响应于用户B的手势,用户A可以将项200抛掷或投掷到用户B,如图1C和1D中所示,以与用户B共享项。然后用户B可以查看、存储或以其他方式操纵接收到的项200。
在上面关于图1-1D描述的示例中,用户A操纵并向用户B投掷单个项200,用户B定义用于接收项200的预期目标。在本示例中,用户B建立与用户A的连接,并且通过例如图1B中所示的手势识别准备接收项200。然而,在一些实施方式中,可以通过例如共享虚拟会话的发起、联系人信息的共享等、建立用户B作为用于通过从用户A投掷的要被共享的项的可能的目标接收者,在用户A和用户B之间已经建立连接。
类似地,在上述示例中,响应于用户B的指示接收项200的愿望和/或准备就绪的姿势,用户A抛掷或投掷项200以与目标接收者(在本示例中,用户B)共享项200。然而,在一些实施方式中,在没有目标接收者想要和/或准备接收项200的手势或其他类型的指示的情况下,用户A可以将项200抛掷或投掷给目标接收者(在本示例中,用户B)以与目标接收者共享项。在这种情况下,用户A可以与诸如用户B的目标接收者共享项200,允许用户B访问项200。
在上面关于图1A-1D描述的示例中,可以识别用户A的手和/或用户A所持有的控制器的位置和/或定向,并且用户A的手在物理空间P中的运动可以被跟踪和转换成虚拟环境V中的相应运动。类似地,可以识别用户B的手的位置和定向,并且用户B的手在物理空间P中的运动可以被跟踪和转换成在虚拟环境V中的相应运动。因此,上面关于图1B描述的由用户B进行的手势可以被检测、跟踪和识别为在例如与用户B相对应的目标接收者处准备接收项200的指示。类似地,可以检测和跟踪用户A的手的运动,并且用户A的手的运动轨迹和运动轨迹的延伸可以被识别为对应于项200从用户A到用户B沿着通向与用户B相对应目标接收者的延伸轨迹的运动。
在一些实施方式中,当用户实行类似的抛掷或投掷动作以分类和/或重新排列和/或堆叠和/或选择来自于一组项的一个项或多个项时可以跟踪用户的手的运动,如上所述。例如,如图2A-2F中所示,用户可以使用例如包括如上所述的抛掷或投掷姿势的手势操纵、分类、重新排列、分发等项组250中的一个或多个项251至259。在一些情况下,在与关于图1A-1D在上面描述的用户B共享一个或多个项251-259之前,用户A可以进行这种分类、重新排列等。
在一些实施方式中,当以这种方式分类、重新排列等时,在与目标接收者共享之前,项251-259并且特别地,项251-259的内容可以保持对用户A私有,例如,即使当目标接收者是共享虚拟环境中的用户B时,保持项251-259的内容的隐私性和安全性。在一些实施方式中,当以这种方式分类、重新排列等时,项251-259对于用户A和用户B都是可见的,例如,促进排列、协作、共享等。
如图2A-2B中所图示的示例中,用户可以从项组250中选择项(例如项259)用于移动或分类。一旦被选择,响应于如上所述的抛掷或投掷姿势,所选择的项259可以被抛掷到或投掷到例如目标区域269,如图2C-2D中所示。图2C示出用户的手和虚拟项259之间的虚拟接触,如图2B中所示,已经结束同时在沿着朝向目标区域269的轨迹的虚拟环境中虚拟项259继续移动,如图2D中所示。可以基于例如用户的手运动和相关联的轨迹的跟踪,和/或将在下面更详细地描述的其他因素确定用户预期接收所选择的项259的目标区域269。以这种方式并且根据这里描述的实施方式确定预期的目标区域使得能够在虚拟环境中进行直观、可靠且高效的交互,用于在虚拟环境中朝着目标区域传送所选择的虚拟项。这种类型的交互对于用户而言可能相对直观,因为其对应于虚拟环境中所选项的抛掷或投掷类型的运动,并且因为其能够通过物理抛掷或投掷类型的运动输入被触发和控制。这种类型的交互可能是相对可靠的,因为其不仅仅依赖用户的触发运动的准确性,并且可能相对有效,因为虚拟项被推进使得不要求从所选择的时刻和运动的开始保持虚拟联系直到虚拟项达到其目标。用户可以继续以类似的方式对项251-259进行分类和重新排列,如以图2E中所示的示例序列,其中项258被选择和投掷到对应于目标区域268的位置,并且按照在图2F中示出的示例序列,其中选择项254被选择并且被投掷到与目标区域264相对应的位置。如果基于例如根据上面的跟踪被识别为被跟踪的运动的目标,则目标区域或目标接收者是预期的。
在图2A-2F中所示的示例中,通过投掷所选择的项进行分类每次被示出一个项只是为了便于讨论和说明。然而,在一些实施方向中,可以选择多个项并将其一起投掷,用于分类和/或共享。
在一些实施方式中,图2A-2F中示出的项251-259的分类、重新排列、堆叠等等可以应用于将项分类或分布到文件夹、箱子等,用于共享和/或存储和/或删除/回收等。当以这种方式共享项时,用户B可以例如从共享文件夹或其他共享位置访问由用户A共享的项。不同类型的项可以以类似的方式分类。
例如,系统可以向用户A显示项251-259(例如,如在上面关于图2A-2F所描述的重新排列,或者以不同的排列),并且还可以显示一个或更多目标接收者或目标区域,用于接收如上所述的由用户A抛掷或投掷的一个或多个项。一个或多个目标接收者或目标区域可以包括例如第一箱子或文件夹310,用于收集第一组或类型的项,诸如照片;第二箱子或文件夹320,用于收集第二组或类型的项,诸如文档;第三箱子或文件夹330,用于收集第三组或类型的项,诸如,要共享的项(例如,与用户B,或已经访问第三箱子或文件夹330的其他用户),以及适合于特定用户和环境的其他箱子或文件夹。一个或多个目标接收者还可以包括例如目的地、或到一个或多个网站的链接,例如,社交媒体链接或目的地340、发布链接或目的地350、消息链接或目的地360等等。图3A中所示的文件夹31、320和330,以及链接350、360和370仅仅是可以接收用户抛掷或投掷的项的目标接收者或目标区域的示例。许多其他类型和排列的目标接收者或目标区域可以以下面将要描述的方式接收用户抛掷或投掷的项。
如图3B中图示的序列中所示,用户可以选择项257,并且将所选择的项257向第一文件夹310抛掷或投掷用于存储或共享,所述第一文件夹310是所选择的项257的预期目标接收者。在一些实施方式中,用户可以基于例如与所选择的项257相关联的类型或分类的识别来选择第一文件夹310作为所选择的项257的预期目标接收者,即,用户可以确定项257是照片,并且选择以将项257与其它照片定向到第一文件夹310。当用户在第一文件夹310的方向上实行对所选项257的抛掷或投掷时,系统可以检测并跟踪用户的手的移动,可以将该运动转换成定向到第一文件夹310的轨迹,并且可以基于检测到的轨迹确定对于所选择的项257的预期目标接收者是第一文件夹310。
在一些实施方式中,除了或者替代与用户的手运动相关联的轨迹之外,可以基于用户之间的某些关联和/或是在虚拟环境中引起吸引的虚拟力的与被投掷的项和/或投掷项的用户一起与各个可能的目标接收者关联的吸引力,确定被抛掷或投掷的项的预期接收者。可以基于与正在投掷的项相关联的特征和/或与各种可能的目标接收者相关联的特征,将投掷的项拖动到特定的目标接收者。例如,可以基于用户与不同目标接收者之间的关联、被抛掷的项与不同的目标接收者之间的关联、被抛掷的项与不同的目标接收者之间的共性以及与用户和/或正在投掷的项和/或每个不同的目标接收者相关联的其他类型的吸引力已投掷的项可以被拖动到特定的目标接收者。
在图4A中所示的示例中,项251-259和文件夹310、320和330以及链接350、360和370由系统向用户显示,用于用户的如上所述的操纵。在本示例中,示例项254和259是照片,并且示例项258是文本文档,仅仅是为了便于说明和解释。如上所述的用于用户的操纵、共享等等的系统要显示的项可以包括其他类型的项,例如,电子邮件消息、文本消息、网页和链接、视频文件、音频文件、和其他类型的项。
如果用户选择项254,如图4B中所示,则系统可以检测到用户已经选择照片(基于例如与项254相关联的文件类型、与项254相关联的标签等)。在本示例中,为照片指定第一文件夹310,为文档指定第二文件夹320,并且为要共享的项指定第三文件夹330。针对特定类型的项,文件夹310、320和330中的每一个可以具有相关联的吸引力或相关联的磁性水平,其是在虚拟环境中引起虚拟吸引力的虚拟磁性。例如,响应于检测到所选择的项254是照片,与其他文件夹320和330相比,第一文件夹310可以针对所选择的项254呈现相对较高的吸引力或磁性水平,使项254被拖动到第一文件夹310,因为项在文件夹310、320和330的方向中被投掷。
如果用户,例如,用户A,选择例如项259,如图4C中所示,则系统可以再次检测到用户选择照片。在本示例实施方式中,除了系统检测到所选项259是照片之外,系统还可以检测与所选项259相关联的标签,例如,与用户B相关联的标签,并且确定用户A预期与用户B共享此照片。在本示例中,例如,如果第三文件夹330是与用户B共享的文件夹,则响应于检测到所选择的项259是包括使所选择的项与用户B相关联的标签的照片,则与其他文件夹310和320相比,第三文件夹330可以为所选择的项259呈现具有相对高的吸引力或磁性水平,使项259被拖动到第三文件夹330,因为在文件夹310、320和330的方向项被用户A投掷。然后用户B可以通过访问文件夹330来访问共享项259。
如果用户,例如,用户A,选择例如项254,如在图4D中所示,系统可以再次检测到用户选择照片。在本示例中,除了检测到所选择的项254是照片之外,系统还可以检测与所选项254相关联的标签,例如,社交媒体标签,并且确定用户A预期在社交媒体网站上分享此照片。在本示例中,如果例如检测到的社交媒体标签对应于对于使项254与社交媒体链接350相关联的用户A来说可用的社交媒体链接350,则社交媒体链接350可以展示相对较高的吸引力,使项254被拖动到社交媒体站点以供共享,如在图4D中所示。
虽然在上面描述的示例中的所选项是照片,但是由其他用户识别/关联的其他类型的项可以以类似的方式被拖动到例如共享文件夹330和/或社交媒体站点350中。例如,用户A可以将其他类型的项,甚至未被其它用户具体识别/与另一用户关联的项投掷到共享文件夹330中,用于与其他用户共享。共享文件夹330可以被指定用于一个其他用户(用户B,如在本示例中)或一组其他用户的访问,或者用于传递到另一个位置等。针对多个不同用户、多种不同类型的项等的多个共享文件夹可以促进共享。
在图4A-4D中示出的示例中,通过将所选项投掷到文件夹310/320/330中的一个和/或通过投掷所选项进行分类并且经由链接350/360/370中的一个将所选项定向到网站中的一个进行分类每次被示出一个项,只是为了便于讨论和说明。然而,在一些实施方式中,可以选择多个项并一起投掷,用于如上所述的分类和/或共享。
因此,不仅通过当用户投掷项时基于用户的手的移动的跟踪由系统推测的被投射的轨迹,而且基于在所选择的项与可能的目标接收者之间的各种关联,朝着预期的目标接收者可以引导朝着预期目标接收者(例如,共享相同虚拟空间、文件夹、箱子、共享站点等的另一用户)以在上面描述的方式用户抛掷或者投掷的项。通过一组事先定义的规则可以控制例如基于项的类型、在用户和可能目标接收者之间的预存在的链接、来自于可能的目标接收者的对于特定项的请求等等的各种关联。当在虚拟环境中朝着多个可能的目标接收者投掷项时的这些规则的应用可以促进将被投掷的项精确地递送给预期的目标接收者。
例如,如图5A-5C中所示,多个用户A、B、C和D可以出现在相同的虚拟环境V中。用户A可能希望与共享虚拟环境V中的其他用户B、C或D中的一个共享项500。在图5A-5C中所示的示例中,用户B、C和D由系统在共享虚拟环境V中彼此相对接近地显示。可能的目标接收者(用户B、C和D)的这种相对亲密接近彼此对于项500来说难以被用户A准确地投掷到预期的目标接收者。在这种情况下,各种关联、对特定项的请求等以及上面讨论的相关联的一组先前定义的规则可以增加项500将被递送到预期的目标接收者的可能性或概率,从而促进将用户A投掷的项500准确地递送给预期的目标接收者(即,用户B、C或D中的一个)。
例如,项500可以是由用户A响应于用户C发起的电子邮件消息而生成的电子邮件消息。因此,项500可以包括用户A和用户C之间的关联。当用户A投掷项500时,由于在项500和用户C之间,并且在用户A与用户C之间的关联或链接,项500可以被拖动到用户C,如图5B中所示。在一些实施方式中,在本示例中由用户C展示的用于项500的相对高的吸引力或磁性水平可以使得项500被拖动到用户C,即使当用户投掷项500的被推测的轨迹(基于用户A的手的移动的跟踪)可能由于不准确而在预期接收者中造成一些模糊。
在另一示例中,用户A、B、C和D可以共享相同的虚拟环境V,并且在同一虚拟环境V中链接或者关联可以在一些但不是全部的用户之间存在。例如,在用户A和用户D之间可能存在链接或关联,但不存在于用户A和用户B之间,也不存在于用户A和用户C之间。用户A和用户D之间的这种链接或关联可以基于例如在虚拟体验的同一会话中的注册、先前交换的联系人信息的确认、应用中的其他链接或关联等被建立。如在图5C中所示,用户A可能希望与用户D共享项550,但不一定与用户B或用户C共享项550。因此,当用户A通过向用户D抛掷或者投掷项550来与用户D共享项550时,项550可以保持对于用户B和用户C秘密或隐瞒。由于用户A和用户D之间建立的链接或关联来自于用户A的对于项550展示的相对较高的吸引力或磁性水平,可能使项550被拖动到用户D,即使当用户A投掷项550的推断的轨迹(基于用户的手的移动的轨迹)可能由于投掷的不精确、用户A和用户D的相对移动等等在确定预期接收者中具有以其它方式引起的一些含糊。在一些实施方式中,用户A和用户B和C之间缺少现有的关联或链接可能阻止项550被用户B或用户C拦截。
在在图5A-5C中所示出的示例中,通过投掷所选择的项进行共享每次被示出一个项,仅仅是为了便于讨论和说明。然而,在一些实施方式中,可以选择多个项并将其一起投掷,以便与其他用户分类和/或共享。
在一些实施方式中,可以将一组先前定义的规则应用于由用户抛掷或投掷的项,不仅促进确定预期的目标接收者,而且调整在通过预期的目标接收者项的接收时项的显示。例如,当确定用户对于抛掷或投掷或以其他方式推进的项的预期目标接收者时,可以考虑与项相关联的元数据,该元数据在项移动之后以这种方式与项保持关联,并且元数据可能影响或以其他方式触发预期目标接收者接收到该项时的其他动作。例如,用户可能希望让系统以不同的方式在虚拟环境V中显示选定的项,以供用户进一步操纵和/或与另一用户共享。用户A可以例如从项组600中选择项650,并且可以朝向显示表面660抛掷或投掷所选择的项650,如图6A中所示。在图6A中所示的示例中,显示表面660是虚拟环境V中的墙,该显示表面660限定用于所选项650的预期目标接收者。
可以不仅基于检测到的用户的手和相关联的轨迹的移动,而且基于与显示表面660相关联的使项被拖动到显示表面600的吸引力或磁性水平,将所选择的项650拖动到显示表面660。与要显示在显示表面660上的所选择的项650的特性相比较,特定显示表面660的吸引力或磁性可以通过诸如在显示表面660处可用的可用虚拟显示区域、显示表面660的定向、显示表面660的表面纹理等被定义。
在一些实施方式中,在到达显示表面660时,基于与作为目标接收者的显示表面660相关联的预设规则,系统可以改变或调整所选项650的外观。例如,如图6B中所示,在到达显示表面660时,可以基于显示表面660的尺寸放大所选择的项650,用于用户A的进一步操纵,并且/或者用于与用户B共享和/或用户B的进一步操纵。
在一些实施方式中,然后用户A可以从项组600中选择另一项640,并且可以与项650一起朝向用于显示项640的显示表面660抛掷或投掷所选择的项640,如在图6C中所示。在一些实施方式中,在到达显示表面660时,系统可以基于与作为目标接收者的显示表面660相关联的预设规则改变或者调整所选项640的外观以及所选项650的外观。例如,如图6D中所示,在到达显示表面660时,可以放大所选项640的大小,并且可以基于相关联显示表面660的预设规则调整先前显示项650的大小以适应所选项640的显示。在一些实施方式中,在新选择的项650到达显示表面660时,先前显示的项650可以由新选择的项650代替,如图6中所示。
如在图6A-6E中所示,项可以被拖动到特定的显示表面,并且/或者在到达显示表面时基于与显示表面和被投掷的项的预设的规则调整用户投掷的项在虚拟空间中的特征。图6A-6E中所示的示例实施方式图示在虚拟空间V中垂直表面上的照片显示。然而,也可以以这种方式显示和调整诸如文档等的其他类型的项。此外,项可以在例如虚拟空间V中的水平定向的桌面或桌子上表面、在虚拟空间中显示的虚拟框或窗口内等的其他显示表面上显示,操作等。
在关于图6A-6E上面讨论的示例中,示例性显示表面660是虚拟环境V中的墙,该显示表面660限定所选项640和650的预期目标接收者。然而,在一些实施方式中,特别当在例如增强现实环境中操作时,所选项的目标接收者可以是例如另一设备,例如另一计算设备、电视机或其他类型的显示设备。在这种情况下,例如通过如上所述的投掷的要共享的选定项可以被智能地调整大小并且放置在这种类型的电子显示设备上,定义要共享的项的目标接收者。在一些实施方式中,以这种方式与电子显示设备共享项可以导致在与电子显示设备共享项时执行的进一步的动作。例如,以这种方式共享可以使在通过将这种类型的文件投掷到电子显示设备上共享时音频文件和/或视频文件被自动播放。例如以这种方式共享电子邮件消息或文本消息可能使共享项显示并且电子邮件应用程序或消息应用程序启动。以这种方式共享其他类型的项可能使在接收设备处执行后续动作。
在一些实施方式中,此系统可以被实现以交换或共享诸如第一用户从虚拟商店购买并共享或发送给第二用户的礼物,或者由第一用户购买并共享或发送给第二用户的活动门票使得用户能够与第一用户一起体验该活动的项。
如在图7A中图示的示例中所示,用户A可以从系统生成的虚拟商店700中的虚拟显示器710中选择虚拟项720,例如,虚拟帽,并且可以将所选择的项720抛掷或投掷到用户B以与用户B共享所选择的项720。当联系用户B(预期的目标接收者)时,可以以多种不同的形式向用户B呈现所选择的项720(在本示例中帽720)。例如,在一些实施方式中,用户B可以接收具有相关联的购买和递送信息的用户A已经为用户B购买所选项的通知。在一些实施方式中,用户B可以从用户A接收与项720有关的信息,该信息指示用户A可能对项720感兴趣,并且提供关于如何继续购买项720的信息。在一些实施方式中,项720可以位于相对于用户B的使用位置中,使得用户可以对该项进行评估,例如,用于潜在的购买。例如,作为来自用户A的投掷的结果,虚拟帽720可以定位在用户B的头上,使得用户B允许用户试穿该项。各种其他场景也可以应用,其中用户A从虚拟商店700中选择项,并将所选择的项抛掷或投掷到用户B以供用户B考虑,或作为礼物赠送给用户B,或者用于用户B的进一步动作等。
如图8A中所示,用户A可以沉浸在由系统显示的事件800中,例如,如图8A中图示的示例中所示的棒球游戏,或其他事件。在图8A中所示的情况下,用户B没有获得或购买对事件800的访问,并且因此不能观看事件800,因为用户A能够查看事件800。用户A可以获得访问,例如为用户B购买票820,并向用户B抛掷或投掷票。在联系用户B(预期的目标接收者)时,用户B可能与用户A一起沉浸在事件800中,如图8B中所示。
如上所述,增强现实环境和/或虚拟现实环境可以由包括例如用户佩戴的HMD 100的系统生成,如图9A中所示。如上所述,HMD 100可以由各种不同类型的用户输入来控制,并且用户可以通过各种不同类型的用户输入与由HMD 100生成的增强现实和/或虚拟现实环境进行交互,各种不同类型的用户输入包括,例如,如在上面详细地描述的抛掷或投掷姿势的手/手臂姿势、头部姿势、HMD 100的操纵、可操作地耦合到HMD 100的便携式控制器102的操纵等。
图10A和图10B是示例HMD,例如,在图9中由用户佩戴的HMD 100的透视图。图11是包括与第二电子设备通信的第一电子设备的增强现实和/或虚拟现实系统的框图。第一电子设备300可以是例如生成增强和/或虚拟现实环境的HMD,并且第二电子设备302可以是例如如图4中所示的控制器。
如图10A和图10B中所示,示例性HMD可以包括耦合到框架120的壳体110,具有音频输出设备130,包括例如耦合到框架120的安装在耳机中的扬声器。在图10B中,壳体110的前部110a远离壳体110的基部110b旋转,使得容纳在壳体110中的一些组件是可见的。显示器140可以安装在面向壳体110的前部110a的侧面的内部上。当前部110a针对壳体110的基部110b处于关闭位置时,透镜150可以安装在外壳110中、在用户的眼睛和显示器140之间。在一些实施方式中,HMD 100可以包括感测系统160,其包括各种传感器,例如,音频传感器、图像/光传感器、位置传感器(例如,包括陀螺仪和加速计的惯性测量单元)等。HMD 100还可以包括控制系统170,该控制系统170包括处理器190和各种控制系统设备以促进HMD 100的操作。
在一些实施方式中,HMD 100可以包括相机180以捕捉静止图像和运动图像。相机180捕获的图像可以被用于帮助跟踪用户和/或控制器102的物理位置的跟踪,并且/或者可以在通过模式下在显示器140上向用户显示。在一些实施方式中,HMD 100可以包括注视跟踪设备165,其包括一个或多个图像传感器165A以检测和跟踪用户的眼睛注视。在一些实施方式中,HMD 100可以被配置成使得检测到的注视被处理成用户输入以被转换成增强现实和/或虚拟现实环境中的相对应的交互。
如图11中所示,第一电子设备300可以包括感测系统370和控制系统380,感测系统370和控制系统380可以分别类似于图10A和图10B中所示的感测系统160和控制系统170。感测系统370可以包括例如光传感器、音频传感器、图像传感器、距离/接近传感器、位置传感器和/或其它传感器和/或传感器的不同组合,包括,例如,定位以检测和跟踪用户的眼睛注视的图像传感器,诸如图5B中所示的注视跟踪设备165。控制系统380可以包括例如电力/暂停控制设备、音频和视频控制设备、光学控制设备、转换控制设备和/或其它这样的设备和/或设备的不同组合。取决于具体实施方式,感测系统370和/或控制系统380可以包括更多或更少的设备,并且可以具有所示出的不同的物理排列。第一电子设备300还可以包括与感测系统370和控制系统380通信的处理器390、存储器385和通信模块395,该通信模块395用于提供第一电子设备300与诸如第二电子设备302的另一外部设备之间的通信。
第二电子设备302可以包括提供第二电子设备302与诸如第一电子设备300的另一外部设备之间的通信的通信模块306。第二电子设备302可以包括感测系统304,其包括图像传感器和音频传感器,诸如被包括在例如相机和麦克风中、惯性测量单元、诸如包括在控制器的触摸灵敏表面中的触摸传感器、或智能手机、以及其他这种传感器和/或传感器的不同组合。处理器309可以与感测系统304和第二电子设备302的控制单元305通信,控制单元305具有对存储器308的访问并且控制第二电子设备302的整体操作。
根据在此描述的实施方式,通过在增强现实环境和/或虚拟现实环境中投掷共享项的方法1200在图12中被示出。
用户可以使用例如计算设备(诸如包括关于图9-11如在上面描述的头戴式显示设备的系统)启动增强现实体验和/或虚拟现实体验,以生成增强现实和/或虚拟现实环境(块1210)。用户可以检索用于通过投掷进行分类或共享的一个或多个项(块1220)。例如,当检测到已经选择用于通过投掷进行分类或者共享的一个(或多个)检索到的项时,如关于图2A-图2F在上面所描述的,(块1230),系统可以检测用于所选择的项的可能的目标接收者,例如,如关于图4A-8B在上面所描述的(块1240)。然后系统可以检测吸引力是否与所识别的可能目标接收者相关联,例如,如关于图4A-5C在上面所描述的(块1250)。
如果吸引力与所识别的可能目标接收者中的一个或多个相关联(块1250),则系统可以基于投射的投掷轨迹和与可能的目标接收者相关的吸引力的比较识别对于被投掷的项的预期目标接收者,所述投射的投掷轨迹是基于例如当在虚拟环境中项被投掷时对用户的手的六自由度的跟踪所确定的,如关于图1-图8B在上面所描述的(块1270)。如果确定吸引力不与所识别的可能目标接收者中的一个或多个相关联(块1250),则系统可以基于投射的被投掷的轨迹识别投掷项的预期目标接收者(块1275)。投射的被投掷的轨迹可以基于在虚拟环境中投掷项时用户的手的六自由度的跟踪来确定,例如,如关于图1-图8B在上面所描述的(块1265)。然后可以与预期的目标接收者共享所选择的项(如在块1270或块1275所识别的)(块1280)。
该过程可以继续直到确定当前增强现实和/或虚拟现实体验已经终止(块1290)。
图13示出可以与这里描述的技术一起使用的计算机设备1300和移动计算机设备1350的示例。计算设备1300包括处理器1302、存储器1304、存储设备1306、连接到存储器1304和高速扩展端口1310的高速接口1308以及连接到低速总线1314和存储设备1306的低速接口1312。组件1302、1304、1306、1308、1310和1312中的每一个使用各种总线互连,并且可以适当地安装在公共主板上或以其他方式安装。处理器1302能够处理用于在计算设备1300内执行的指令,包括存储在存储器1304中或存储设备1306上的指令,以在诸如被耦合到高速接口1308的显示器1316的外部输入/输出设备上显示用于GUI的图形信息。在其他实施方向中,可以与多个存储器和多种类型的存储器一起适当地使用多个处理器和/或多个总线。而且,可以连接多个计算设备1300,其中每个设备提供必要操作的部分(例如,作为服务器银行、一组刀片式服务器或多处理器系统)。
存储器1304将信息存储在计算设备1300内。在一个实施方向中,存储器1304是易失性存储器单元或者单元。在另一实施方向中,存储器1304是非易失性存储器单元或者单元。存储器1304也可以是另一种形式的计算机可读介质,诸如磁盘或光盘。
存储设备1306能够为计算设备1300提供大容量存储。在一个实施方向中,存储设备1306可以是或包含计算机可读介质,诸如软盘设备、硬盘设备、光盘设备或磁带设备、闪存或其他类似的固态存储设备、或包括存储设备阵列,包括区域网络中的设备或其他配置。计算机程序产品能够有形地体现在信息载体中。计算机程序产品还可以包含当被执行时执行一个或多个方法的指令,诸如上面描述的那些。信息载体是计算机或机器可读介质,诸如存储器1304、存储设备1306或处理器1302上的存储器。
高速控制器1308管理计算设备1300的带宽密集型操作,而低速控制器1312管理较低带宽密集型操作。这种功能分配仅仅是示例性的。在一个实施方向中,高速控制器1308被耦合到存储器1304、显示器1316(例如,通过图形处理器或加速器),并且被耦合到可以接受各种扩展卡(未示出)的高速扩展端口1310。在实施方式中,低速控制器1312耦合到存储设备1306和低速扩展端口1314。可以包括各种通信端口(例如,USB、蓝牙、以太网、无线以太网)的低速扩展端口可以例如通过网络适配器被耦合到一个或多个输入/输出设备,诸如键盘、指针设备、扫描仪或诸如交换机或路由器的联网设备。
如在附图中所示,计算设备1300可以以多种不同的形式来实现。例如,其可以被实现为标准服务器1320、或者在一组这样的服务器中的多个项。其也可以被实现为机架式服务器系统1324的一部分。另外,其可以在诸如膝上型计算机1322的个人计算机中实现。可替选地,来自计算设备1300的组件可以与诸如设备1350的移动设备中的其他组件(未示出)相组合。这些设备中的每一个可以包含计算设备1300、1350中的一个或多个,并且整个系统可以由彼此通信的多个计算设备1300、1350组成。
除其他组件之外,计算设备1350包括处理器1352、存储器1364、诸如显示器1354的输入/输出设备、通信接口1366和收发器1368。设备1350还可以设置有存储设备,诸如微型硬盘或其他设备,以提供额外的存储。组件1350、1352、1364、1354、1366和1368中的每一个使用各种总线互连,并且数个组件可以被安装在公共主板上或以其他方式适当地安装。
处理器1352能够执行计算设备1350内的指令,包括存储在存储器1364中的指令。处理器可以被实现成包括分离和多个模拟和数字处理器的芯片的芯片集。例如,处理器可以提供设备1350的其他组件的协同,诸如用户界面的控制、设备1350运行的应用以及设备1350的无线通信。
处理器1352可以通过控制接口1358和耦合到显示器1354的显示器接口1356与用户通信。显示器1354可以是,例如,TFT LCD(薄膜晶体管液晶显示器)或OLED(有机发光二极管)显示器或其他适当的显示技术。显示器接口1356可以包括用于驱动显示器1354以向用户呈现图形和其他信息的适当电路。控制接口1358可以接收来自用户的命令并将它们进行转换以提交给处理器1352。另外,可以提供与处理器1352通信的外部接口1362,使得能够进行设备1350与其他设备的近场通信。例如,外部接口1362可以在一些实施方式中提供有线通信,或者在其他实施方式中提供无线通信,并且还可以使用多个接口。
存储器1364将信息存储在计算设备1350内。存储器1364能够被实现为计算机可读介质或媒介、易失性存储器单元或非易失性存储器单元或多个单元中的一个或多个。扩展存储器1374还可以被提供并且通过扩展接口1372连接到设备1350,该扩展接口1372可以包括例如SIMM(单列直插式存储器模块)卡接口。这样的扩展存储器1374可以为设备1350提供额外的存储空间,或者还可以为设备1350存储应用或其他信息。具体而言,扩展存储器1374可以包括执行或补充上述过程的指令,并且还可以包括安全信息。因此,例如,扩展存储器1374可以作为用于设备1350的安全模块来提供,并且可以以允许安全使用设备1350的指令来编程。另外,可以经由SIMM卡提供安全应用以及附加信息,诸如以不可破解的方式在SIMM卡上放置识别信息。
存储器可以包括例如在下面论述的闪存和/或NVRAM存储器。在一个实施方向中,计算机程序产品有形地体现在信息载体中。计算机程序产品包含指令,当被执行时执行一个或多个方法,例如上面描述的那些。信息载体是例如通过收发器1368或外部接口1362可以接收的计算机或机器可读介质,诸如存储器1364、扩展存储器1374或处理器1352上的存储器。
设备1350可以通过通信接口1366进行无线通信,必要时其可以包括数字信号处理电路。通信接口1366可以在诸如GSM语音呼叫、SMS、EMS或MMS消息收发、CDMA、TDMA、PDC、WCDMA、CDMA2000或GPRS等各种模式或协议下提供通信。这种通信可以例如通过射频收发器1368发生。另外,诸如使用蓝牙、Wi-Fi或其他这种收发器(未示出),可以发生短程通信。另外,GPS(全球定位系统)接收器模块1370可以向设备1350提供附加的与导航和位置相关的无线数据,该设备1350可以适当地由设备1350上运行的应用使用。
设备1350还可以使用音频编解码器1360可听地通信,该音频编解码器1360可以从用户接收口头信息并将其转换为可用的数字信息。音频编解码器1360同样可以例如通过扬声器为用户产生可听声音,例如在设备1350的手机中。这种声音可以包括来自语音电话呼叫的声音,可以包括记录的声音(例如,语音消息、音乐文件等等)并且还可以包括由在设备1350上运行的应用程序产生的声音。
计算设备1350可以以多种不同的形式来实现,如在附图中所示。例如,其可以被实现为蜂窝电话1380。其也可以被实现为智能电话1382、个人数字助理或其他类似的移动设备的一部分。
可以在数字电子电路、集成电路、专门设计的ASIC(专用集成电路)、计算机硬件、固件、软件和/或其组合中实现这里描述的系统和技术的各种实施方式。这些各种实施方式能够包括在可编程系统上可执行和/或可解释的一个或多个计算机程序中的实现,该可编程系统包括至少一个可编程处理器,其可以是专用或通用的,被耦合以从存储系统、至少一个输入设备和至少一个输出设备接收数据和指令并且将数据和指令发送到存储系统、至少一个输入设备和至少一个输出设备。
这些计算机程序(也称为程序、软件、软件应用程序或代码)包括用于可编程处理器的机器指令,并且能够以高级过程和/或面向对象的编程语言和/或以汇编/机器语言被实现。如在此所使用的,术语“机器可读介质”、
“计算机可读介质”指的是用于任何计算机程序产品、设备和/或设备(例如,磁盘、光盘、存储器、可编程逻辑器件(PLD)),被用于将机器指令和/或数据提供给可编程处理器,其包括接收机器指令作为机器可读信号的机器可读介质。术语“机器可读信号”指的是用于向可编程处理器提供机器指令和/或数据的任何信号。
为了提供与用户的交互,这里描述的系统和技术能够在具有用于向用户显示信息的显示设备(例如,CRT(阴极射线管)或LCD(液晶显示器)监视器)和通过其用户能够将输入提供给计算机的键盘和指针设备(例如,鼠标或轨迹球)的计算机上实现。其他类型的设备也能够被用于提供与用户的交互;例如,提供给用户的反馈能够是任何形式的感官反馈(例如,视觉反馈、听觉反馈或触觉反馈);并且能够以任何形式接收来自用户的输入,包括声音、语音或触觉输入。
这里描述的系统和技术能够在包括后端组件(例如,作为数据服务器)或者包括中间件组件(例如,应用服务器),或者包括前端组件(例如,具有图形用户界面或Web浏览器的客户端计算机,用户能够通过其与在此描述的系统和技术进行交互),或者这种后端、中间件或前端组件的任何组合的计算系统中被实现。系统的部件能够通过数字数据通信的任何形式或介质(例如,通信网络)互连。通信网络的示例包括局域网(“LAN”)、广域网(“WAN”)和因特网。
计算系统能够包括客户端和服务器。客户端和服务器通常彼此远离并且通常通过通信网络进行交互。客户端和服务器之间的关系通过运行在相应的计算机上并且彼此具有客户端-服务器关系的计算机程序产生。
在一些实施方式中,图13中描绘的计算设备能够包括与虚拟现实对接的传感器(VR头戴式受话器/HMD设备1390)。例如,包括在图13中所描述的计算设备1350或其他计算设备上的一个或多个传感器13能够向VR耳机1390提供输入,或者通常为VR空间提供输入。传感器能够包括但不限于触摸屏、加速计、陀螺仪、压力传感器、生物传感器、温度传感器、湿度传感器和环境光传感器。计算设备1350能够使用传感器以确定然后能够将其用作到VR空间的输入的计算设备在VR空间中的绝对位置和/或检测到的旋转。例如,计算设备1350可作为诸如控制器、激光指示器、键盘、武器等的虚拟对象被合并在VR空间中。当被合并到VR空间中时由用户定位计算设备/虚拟对象能够允许用户定位计算设备使得在VR空间中以某些方式查看虚拟对象。例如,如果虚拟对象表示激光指示器,则用户能够操纵计算设备彷佛其是激光指示器。用户能够左右、上下、成圆圈等等移动计算设备,并且以类似的方式使用激光指示器使用该设备。
在一些实施方式中,包括在计算设备1350上或连接到计算设备1350的一个或多个输入设备能够被用作到VR空间的输入。输入设备能够包括但不限于触摸屏、键盘、一个或多个按钮、触控板、触摸板、指点设备、鼠标、轨迹球、操纵杆、相机、麦克风、具有输入功能的耳机或耳塞、游戏控制器或其他可连接的输入设备。当计算设备被整合到VR空间中时,与包括在计算设备1350上的输入设备交互的用户能够使在VR空间中发生特定动作。
在一些实现中,计算设备1350的触摸屏能够被呈现为VR空间中的触摸板。用户能够与计算设备1350的触摸屏交互。例如,在VR头戴式受话器1390中,交互作为在VR空间中呈现的触摸板上的移动被呈现。呈现的运动能够控制VR空间中的虚拟对象。
在一些实施方式中,计算设备1350上包括的一个或多个输出设备能够向VR空间中的VR头戴式受话器1390的用户提供输出和/或反馈。输出和反馈能够是视觉、触觉或音频的。输出和/或反馈能够包括但不限于振动、一个或多个灯或闪光灯的打开和关闭或闪烁和/或闪光、发出警报、播放铃声、播放歌曲和播放音频文件。输出设备能够包括但不限于振动马达、振动线圈、压电设备、静电设备、发光二极管(LED)、闪光灯和扬声器。
在一些实施方向中,计算设备1350可以在计算机生成的3D环境中作为另一个对象出现。用户与计算设备1350的交互(例如,旋转、摇动、触摸触摸屏、在触摸屏上滑动手指)能够被解释为在VR空间中与对象的交互。在VR空间中的激光指示器的示例中,计算设备1350作为虚拟激光指示器出现在计算机生成的3D环境中。当用户操纵计算设备1350时,VR空间中的用户看到激光指示器的移动。用户在计算设备1350上或者在VR头戴式受话器1390上在VR环境中从与计算设备1350的交互接收反馈。
在一些实施方式中,计算设备1350可以包括触摸屏。例如,用户能够以能够模拟在VR空间中发生的和在触摸屏上发生的特定的方式与触摸屏进行交互。例如,用户可以使用捏合型动作以缩放显示在触摸屏上的内容。触摸屏上的这种捏合型运动能够使VR空间中提供的信息被缩放。在另一示例中,计算设备可以被呈现为计算机生成的3D环境中的虚拟书。在VR空间中,书的页面能够显示在VR空间中,并且用户的手指在触摸屏上的滑动能够被解释为转动/翻转虚拟书的页面。当每个页面被转动/翻转时,除了看到页面内容变化之外,可以向用户提供音频反馈,诸如书中页面转动的声音。
在一些实施方向中,除计算设备(例如,鼠标、键盘)之外的一个或多个输入设备能够在计算机生成的3D环境中被呈现。呈现的输入设备(例如,呈现的鼠标、呈现的键盘)能够被用作在VR空间中呈现以控制VR空间中的对象。
计算设备1300旨在表示各种形式的数字计算机和设备,包括但不限于膝上型计算机、台式计算机、工作站、个人数字助理、服务器、刀片式服务器、大型机和其他适当的计算机。计算设备1350旨在表示各种形式的移动设备,诸如个人数字助理、蜂窝电话、智能电话以及其他类似的计算设备。这里示出的组件,它们的连接和关系以及它们的功能仅意指是示例性的,并且旨在不限制在本文档中描述和/或主张的本发明的实现。
已经描述多个实施例。然而,将会理解,在不脱离说明书的精神和范围的情况下可以进行各种修改。
在下面的示例中概述进一步的实施方式:
示例1:一种计算机实现的方法,包括:由在周围环境中操作的计算设备生成虚拟环境;由计算设备的处理器接收通过与所选择的虚拟项的虚拟接触的选择设备对虚拟项的选择;跟踪与所选择的虚拟项的虚拟接触的选择设备的移动,并且基于在所跟踪的与所选择的虚拟项的虚拟接触的选择设备的移动投射用于推进所选择的虚拟项的虚拟轨迹;基于所投射的用于推进所选择的虚拟项的虚拟轨迹来识别对于所选择的虚拟项的目标接收者;以及与预期的目标接收者共享所选择的虚拟项。
示例2:示例1的方法,识别预期的目标接收者包括检测虚拟环境中的多个可能的目标接收者,并且识别预期的目标接收者包括:检测与多个可能的目标接收者中的每一个可能的目标接收者相关联的吸引力;和基于所投射的用于推进所选择的虚拟项的虚拟轨迹和与多个可能的目标接收者中的每一个可能的目标接收者相关联的吸引力的比较识别预期的目标接收者。
示例3:示例2的方法,检测与多个可能的目标接收者中的每一个可能的目标接收者相关联的吸引力包括检测下述中的至少一个:与多个可能的目标接收者中的一个或多个可能的目标接收者的现有关联;来自多个可能的目标接收者中的一个或多个可能的目标接收者的现有共享请求;与多个可能的目标接收者中的一个或多个可能的目标接收者的共享历史;或与多个可能的目标接收者中的一个或者多个可能的目标接收者共同的格式类型。
示例4:示例1至3中的一个的方法,跟踪选择设备与所选择的虚拟项虚拟接触的所述选择设备的移动包括:通过用户的手的投掷移动跟踪用户的手的六自由度移动;基于被跟踪的用户的手的投掷移动投射用于所选择的虚拟项的虚拟轨迹;以及基于投射的虚拟轨迹到虚拟环境中的多个可能的目标接收者中的一个可能的目标接收者的延伸识别预期的目标接收者。
示例5:示例1至4中的一个的方法,基于所投射的用于推进所选择的虚拟项的虚拟轨迹来识别预期的目标接收者包括:从虚拟环境中的多个可能的目标接收者中识别预期的目标接收者,所述多个可能的目标接收者包括共享虚拟环境的多个附加用户;和检测与虚拟环境中的多个可能的目标接收者中的每个可能的目标接收者相关联的吸引力,与每个可能的目标接收者相关联的吸引力基于下述中的至少一个:用户与可能的目标接收者之间所建立的关联;或由可能的目标接收者对于共享虚拟项的请求。
示例6:示例1至4之一的方法,基于所投射的用于推进所选择的虚拟项的虚拟轨迹来识别预期的目标接收者包括:从虚拟环境中的多个可能的目标接收者中识别预期目标接收者,所述多个可能的目标接收者包括虚拟环境中的多个目标显示区域,多个目标显示区域中的每一个目标显示区域被配置为接收用于在虚拟环境中的显示的虚拟项;基于所投射的用于所选择的虚拟项的虚拟轨迹识别用于显示所选择的虚拟项的多个目标显示区域中的目标显示区域;以及在被识别为预期目标接收者的目标显示区域处将所选择的虚拟项显示在虚拟环境中。
示例7:示例6的方法,识别多个目标显示区域中的目标显示区域包括:检测与多个目标显示区域中的每一个目标显示区域相关联的吸引力,与多个目标显示区域中的每一个目标显示区域相关联的吸引力基于所选择的虚拟项的特性与目标显示区域的特性的比较;和基于所投射的用于所选择的虚拟项的虚拟轨迹和检测到的吸引力,将多个目标显示区域中的目标显示区域识别为用于显示所选择的虚拟项的预期目标接收者。
示例8:示例7的方法,其中目标显示区域的特性包括以下中的至少一个:虚拟目标显示区域的虚拟大小、虚拟目标显示区域的虚拟定向或者虚拟目标显示区域的虚拟纹理。
示例9:示例7或8的方法,在被识别为预期目标接收者的目标显示区域处显示所选择的虚拟项包括下述中的至少一个:对先前显示在被识别为预期目标接收者的目标显示区域处的虚拟项调整大小以适应在被识别为预期目标接收者的目标显示区域处对所选虚拟项的显示;或消除先前显示在被识别为预期目标接收者的目标显示区域处的虚拟项以适应在被识别为预期目标接收者的目标显示区域处对所选择的虚拟项的显示。
示例10:示例1至4之一的方法,基于所投射的用于推进所选择的虚拟项的虚拟轨迹来识别预期的目标接收者,包括:从虚拟环境中的多个可能的目标接收者中识别预期目标接收者,所述多个可能的目标接收者包括虚拟环境中的多个目标存储区域,多个虚拟存储区域中的每一个虚拟存储区域被配置成接收虚拟项用于存储;和基于所投射的用于所选择的虚拟项的虚拟轨迹识别多个目标存储区域中的目标存储区域以接收所选择的虚拟项;以及共享被识别为预期目标接收者的目标存储区域中的所选择的虚拟项。
示例11:示例10的方法,识别多个目标存储区域中的目标存储区域以接收所选择的虚拟项包括:检测与多个目标存储区域中的每一个目标存储区域相关联的吸引力,与多个目标存储区域中的每一个目标存储区域相关联的该吸引力基于所选择的虚拟项的特性与目标存储区域的特性的比较;和基于所投射的所选择的虚拟项的虚拟轨迹和检测到的吸引力将来自多个目标存储区域中的目标存储区域识别为用于接收所选择的虚拟项的预期目标接收者。
示例12:示例11的方法,其中目标存储区域的特性包括中的至少一个:项分类类型、共享设置或指定目的地。
示例13:一种计算设备,包括:存储器,该存储器存储可执行指令;和处理器,该处理器被配置成执行指令,以使计算设备:生成虚拟环境;接收通过与所选择的虚拟项虚拟接触的选择设备对虚拟项的选择;跟踪与所选择的虚拟项接触的选择设备的移动,并且基于所跟踪的所选择的虚拟项的移动投射用于推进所选择的虚拟项的虚拟轨道;基于所投射的用于推进所选择的虚拟项的虚拟轨迹来识别用于被选择的虚拟项的预期目标接收者;并且与预期的目标接收者共享被选择的虚拟项。
示例14:示例13的计算设备,其中,在识别预期的目标接收者中,指令使计算设备:检测虚拟环境中的多个可能的目标接收者;并且从多个可能的目标接收者中识别预期的目标接收者,包括:检测与多个可能的目标接收者中的每一个可能的目标接收者相关联的吸引力;并且基于所投射的用于推进所选择的虚拟项的虚拟轨迹和与多个可能的目标接收者中的每一个可能的目标接收者相关联的吸引力的比较识别预期的目标接收者。
示例15:示例14的计算设备,其中,在检测与多个可能目标接收者中的每一个可能目标接收者相关联的吸引力中,指令使计算设备检测下述中的至少一个:选择设备的用户或被选择的虚拟项和多个可能目标接收者中的一个或多个可能目标接收者之间的现有的关联;来自多个可能的目标接收者中的一个或多个可能目标接收者的现有共享请求;选择设备的用户或所选择的虚拟项与多个可能目标接收者中的一个或多个可能目标接收者之间的共享历史;或在被选择的虚拟项与多个可能目标接收者中的一个或多个可能目标接收者之间的共同格式类型。
示例16:示例14或15的计算设备,其中,在跟踪与所选择的虚拟项虚拟接触的选择设备的移动中,指令使计算设备:通过用户的手的投掷移动跟踪用户的手的六自由度移动;基于所跟踪的用户的手的投掷移动投射所选择的虚拟项的虚拟轨迹;并且基于被投射的虚拟轨迹到虚拟环境中的多个可能的目标接收者中的一个可能的目标接收者的延伸识别预期的目标接收者。
示例17:示例14至16之一的计算设备,其中,在识别预期的目标接收者中,指令使计算设备:从共享虚拟环境的多个附加用户中识别预期的目标接收者;检测与虚拟环境中的多个附加用户中的每一个附加用户相关联的吸引力,与虚拟环境中的附加用户相关联的吸引力是基于下述中的至少一个:在选择设备的用户或所选择的虚拟对象和被识别为预期目标接收者的用户之间所建立的关联;或来自被标识为预期目标接收者的用户的对于共享虚拟项的请求。
示例18:示例14至16中的一个的计算设备,其中,在识别预期的目标接收者中,指令使计算设备:从虚拟环境中的多个虚拟目标显示区域中识别预期的目标接收者,所述多个虚拟目标显示区域中的每一个虚拟目标显示区域被配置成接收用于在虚拟环境中显示的至少一个虚拟项;和基于所投射的用于被选择的虚拟项的虚拟轨迹识别用于显示所选择的虚拟项的所述多个虚拟目标显示区域中的虚拟目标显示区域;并且在被识别为预期目标接收者的虚拟目标显示区域处将所选择的虚拟项显示在虚拟环境中。
示例19:示例18的计算设备,其中,在识别多个虚拟目标显示区域中的虚拟目标显示区域中,指令使计算设备:基于选择的虚拟项的特性与目标显示区域的特性的比较检测与多个虚拟目标显示区域中的每一个虚拟目标显示区域相关联的吸引力;并且基于所投射的用于选择的虚拟项的虚拟轨迹和检测到的吸引力将多个目标显示区域中的虚拟目标显示区域识别为用于显示选择的虚拟项的预期目标接收者。
示例20:示例14至16之一的计算设备,其中,在识别预期的目标接收者中,指令使计算设备:从虚拟环境中的多个虚拟目标存储区域中识别预期的目标接收者,所述多个虚拟目标存储区域中的每一个虚拟目标存储区域被配置成接收虚拟项,用于存储;并且基于所投射的用于被选择的虚拟项的虚拟轨迹和与多个虚拟目标存储区域中的每一个虚拟目标存储区域相关联的吸引力的比较识别多个虚拟目标存储区域中的虚拟目标存储区域以接收所选择的虚拟项;并且共享被识别为预期目标接收者的虚拟目标存储区域中的被选择的虚拟项。
示例21:包含指令的非暂时性计算机可读介质,在由计算机系统的处理器执行指令时,使计算机系统执行根据示例1至12之一的方法。
进一步的示例涉及用于在增强和/或虚拟现实环境中共享项的系统和方法,其中可以使用例如抛掷或投掷动作所选择的虚拟项被虚拟地推进到目标接收者,使得在与目标接收者没有直接物理和/或虚拟接触的情况下所选择的项可以与目标接收者共享。在这些示例中,可以检测和跟踪用户的手的移动,使得可以基于用户的手的投掷运动的投射轨迹识别用于共享项的预期目标接收者。用户与不同目标接收者之间的关联可能导致不同的可能目标接收者针对为了共享用户抛掷或者投掷的特定项展示不同的吸引力或不同的磁性水平,以在可能的目标接收者之间进一步区分,并且解决接收者含糊。
另外,附图中描绘的逻辑流程不要求有被示出的特定顺序或次序以实现期望的结果。另外,可以从所描述的流程提供其他步骤,或者可以消除步骤,并且可以将其他组件添加到所描述的系统或从所描述的系统移除。因此,其他实施例在下述权利要求的范围内。

Claims (20)

1.一种计算机实现的方法,包括:
由在周围环境中操作的计算设备生成虚拟环境;
由所述计算设备的处理器接收通过与所选择的虚拟项虚拟接触的选择设备对虚拟项的选择;
跟踪与所选择的虚拟项虚拟接触的所述选择设备的移动,并且基于所跟踪的与所选择的虚拟项虚拟接触的所述选择设备的移动投射用于推进所选择的虚拟项的虚拟轨迹;
基于所投射的用于推进所选择的虚拟项的虚拟轨迹来识别所选择的虚拟项的目标接收者;以及
与所述目标接收者共享所选择的虚拟项。
2.根据权利要求1所述的方法,识别目标接收者包括:
检测所述虚拟环境中的多个可能的接收者,
检测与所述多个可能的接收者中的每一个可能的接收者相关联的吸引力;以及
基于所投射的用于推进所选择的虚拟项的虚拟轨迹和与所述多个可能的接收者中的每一个可能的接收者相关联的所述吸引力的比较,识别所述目标接收者。
3.根据权利要求2所述的方法,检测与所述多个可能的接收者中的每一个可能的接收者相关联的吸引力包括检测下述中的至少一个:
与所述多个可能的接收者中的一个或多个可能的接收者的现有关联;
来自所述多个可能的接收者中的一个或多个可能的接收者的现有共享请求;
与所述多个可能的接收者中的一个或多个可能的接收者的共享历史;或
与所述多个可能的接收者中的一个或者多个可能的接收者共同的格式类型。
4.根据权利要求1所述的方法,跟踪与所选择的虚拟项虚拟接触的所述选择设备的移动包括:
通过用户的手的投掷移动跟踪所述用户的所述手的六自由度移动;
基于所跟踪的所述用户的所述手的投掷移动,投射所选择的虚拟项的所述虚拟轨迹;以及
基于所投射的虚拟轨迹到所述虚拟环境中的多个可能的接收者中的一个可能的接收者的延伸,识别所预期的目标接收者。
5.根据权利要求1所述的方法,基于所投射的用于推进所选择的虚拟项的虚拟轨迹来识别目标接收者包括:
从所述虚拟环境中的多个可能的接收者中识别所述目标接收者,所述多个可能的接收者包括共享所述虚拟环境的多个附加用户;以及
检测与所述虚拟环境中的所述多个可能的接收者中的每个可能的接收者相关联的吸引力,与每个可能的接收者相关联的所述吸引力是基于下述中的至少一个:
在所述用户与所述可能的接收者之间所建立的关联;或
由所述可能的接收者对于共享所述虚拟项的请求。
6.根据权利要求1所述的方法,基于所投射的用于推进所选择的虚拟项的虚拟轨迹来识别目标接收者包括:
从所述虚拟环境中的多个可能的接收者中识别所述目标接收者,所述多个可能的接收者包括所述虚拟环境中的多个显示区域,所述多个显示区域中的每一个显示区域被配置为接收用于在所述虚拟环境中显示的虚拟项;
基于所投射的用于所选择的虚拟项的虚拟轨迹来识别用于显示所选择的虚拟项的所述多个显示区域中的目标显示区域;以及
在被识别为所述目标接收者的所述目标显示区域处将所选择的虚拟项显示在所述虚拟环境中。
7.根据权利要求6所述的方法,识别所述多个目标显示区域中的目标显示区域包括:
检测与所述多个显示区域中的每一个显示区域相关联的吸引力,与所述多个显示区域中的每一个显示区域相关联的所述吸引力是基于所选择的虚拟项的特性与各自的显示区域的特性的比较;以及
基于所投射的用于所选择的虚拟项的虚拟轨迹和所检测的吸引力,将所述多个显示区域中的所述目标显示区域识别为用于显示所选择的虚拟项的所述目标接收者。
8.根据权利要求7所述的方法,其中所述目标显示区域的所述特性包括以下中的至少一个:所述虚拟目标显示区域的虚拟大小、所述虚拟目标显示区域的虚拟定向或者所述虚拟目标显示区域的虚拟纹理。
9.根据权利要求7所述的方法,在被识别为所述目标接收者的所述目标显示区域处显示所选择的虚拟项包括下述中的至少一个:
对先前显示在被识别为所述目标接收者的所述目标显示区域处的虚拟项调整大小以适应在被识别为所述目标接收者的所述目标显示区域处对所选择的虚拟项的显示;或
消除先前显示在被识别为所述目标接收者的所述目标显示区域处的虚拟项以适应在被识别为所述目标接收者的所述目标显示区域处对所选择的虚拟项的显示。
10.根据权利要求1所述的方法,基于所投射的用于推进所选择的虚拟项的虚拟轨迹来识别目标接收者包括:
从所述虚拟环境中的多个可能的接收者中识别所述目标接收者,所述多个可能的接收者包括所述虚拟环境中的多个存储区域,所述多个虚拟存储区域中的每一个虚拟存储区域被配置成接收虚拟项用于存储;以及
基于所投射的用于所选择的虚拟项的虚拟轨迹识别所述多个存储区域中的目标存储区域以接收所选择的虚拟项;以及
共享被识别为所述目标接收者的所述目标存储区域中的所选择的虚拟项。
11.根据权利要求10所述的方法,识别目标存储区域包括:
检测与所述多个存储区域中的每一个存储区域相关联的吸引力,与所述多个存储区域中的每一个存储区域相关联的所述吸引力是基于所选择的虚拟项的特性与各自的存储区域的特性的比较;以及
基于所投射的所选择的虚拟项的虚拟轨迹和所检测的吸引力,将来自所述多个存储区域中的所述目标存储区域识别为用于接收所选择的虚拟项的所述目标接收者。
12.根据权利要求11所述的方法,其中所述目标存储区域的所述特性包括以下中的至少一个:项分类类型、共享设置或指定目的地。
13.一种计算设备,包括:
存储器,所述存储器存储可执行指令;和
处理器,所述处理器被配置成执行所述指令,以使所述计算设备:
生成虚拟环境;
接收通过与所选择的虚拟项虚拟接触的选择设备对虚拟项的选择;
跟踪与所选择的虚拟项接触的所述选择设备的移动,并且基于所跟踪的所选择的虚拟项的移动投射用于推进所选择的虚拟项的虚拟轨道;
基于所投射的用于推进所选择的虚拟项的虚拟轨迹来识别用于所选择的虚拟项的目标接收者;以及
与所述目标接收者共享所选择的虚拟项。
14.根据权利要求13所述的计算设备,其中,在识别目标接收者中,所述指令使所述计算设备:
检测所述虚拟环境中的多个可能的接收者;并且
从所述多个可能的接收者中识别所述目标接收者,包括:
检测与所述多个可能的接收者中的每一个可能的接收者相关联的吸引力;以及
基于所投射的用于推进所选择的虚拟项的虚拟轨迹和与所述多个可能的接收者中的每一个可能的接收者相关联的所述吸引力的比较,识别所述目标接收者。
15.根据权利要求14所述的计算设备,其中,在检测与所述多个可能的接收者中的每一个可能的接收者相关联的吸引力中,所述指令使所述计算设备检测下述中的至少一个:
在所述选择设备的用户或所选择的虚拟项和所述多个可能的接收者中的一个或多个可能的接收者之间的现有关联;
来自所述多个可能的接收者中的一个或多个可能的接收者的现有共享请求;
在所述选择设备的用户或所选择的虚拟项与所述多个可能的接收者中的一个或多个可能的接收者之间的共享历史;或
在所选择的虚拟项与所述多个可能的接收者中的一个或多个可能的接收者之间的共同格式类型。
16.根据权利要求14所述的计算设备,其中,在跟踪与所选择的虚拟项虚拟接触的所述选择设备的移动中,所述指令使所述计算设备:
通过用户的手的投掷移动跟踪所述用户的所述手的六自由度移动;
基于所跟踪的所述用户的所述手的投掷移动,投射用于所选择的虚拟项的所述虚拟轨迹;以及
基于所投射的虚拟轨迹到所述虚拟环境中的多个可能的接收者中的一个可能的接收者的延伸,识别所述目标接收者。
17.根据权利要求16所述的计算设备,其中,在识别目标接收者中,所述指令使所述计算设备:
从共享所述虚拟环境的多个附加用户中识别所述目标接收者;以及
检测与所述虚拟环境中的所述多个附加用户中的每一个附加用户相关联的所述吸引力,与所述虚拟环境中的每个附加用户相关联的所述吸引力是基于下述中的至少一个:
在所述选择设备的用户或所选择的虚拟项和被识别为所述目标接收者的所述用户之间所建立的关联;或
来自被识别为所述目标接收者的所述用户的用于共享所述虚拟项的请求。
18.根据权利要求16所述的计算设备,其中,在识别目标接收者中,所述指令使所述计算设备:
从所述虚拟环境中的多个虚拟显示区域中识别所述目标接收者,所述多个虚拟显示区域中的每一个虚拟显示区域被配置成接收用于在所述虚拟环境中显示的至少一个虚拟项;以及
基于所投射的用于所选择的虚拟项的虚拟轨迹识别用于显示所选择的虚拟项的所述多个虚拟显示区域中的虚拟目标显示区域;以及
在被识别为所述目标接收者的所述虚拟目标显示区域处将所选择的虚拟项显示在所述虚拟环境中。
19.根据权利要求18所述的计算设备,其中,在识别所述多个虚拟显示区域中的虚拟目标显示区域中,所述指令使所述计算设备:
基于所选择的虚拟项的特性与各自的显示区域的特性的比较检测与所述多个虚拟显示区域中的每一个虚拟显示区域相关联的所述吸引力;并且
基于所投射的用于所选择的虚拟项的虚拟轨迹和所检测的吸引力将所述多个目标显示区域中的所述虚拟目标显示区域识别为用于显示所选择的虚拟项的所述目标接收者。
20.根据权利要求14所述的计算设备,其中,在识别目标接收者中,所述指令使所述计算设备:
从所述虚拟环境中的多个虚拟存储区域中识别所述目标接收者,所述多个虚拟存储区域中的每一个虚拟存储区域被配置成接收虚拟项用于存储;并且
基于所投射的用于所选择的虚拟项的虚拟轨迹和与所述多个虚拟目标存储区域中的每一个虚拟目标存储区域相关联的所述吸引力的比较识别所述多个虚拟目标存储区域中的虚拟目标存储区域以接收所选择的虚拟项;并且
共享被识别为所述目标接收者的所述虚拟目标存储区域中的所选择的虚拟项。
CN201680081534.9A 2016-05-05 2016-12-22 在增强和/或虚拟现实环境中的虚拟项的共享 Active CN108604119B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201662332314P 2016-05-05 2016-05-05
US62/332,314 2016-05-05
US15/386,614 US10250720B2 (en) 2016-05-05 2016-12-21 Sharing in an augmented and/or virtual reality environment
US15/386,614 2016-12-21
PCT/US2016/068255 WO2017192176A1 (en) 2016-05-05 2016-12-22 Sharing of a virtual item in an augmented and/or virtual reality environment

Publications (2)

Publication Number Publication Date
CN108604119A true CN108604119A (zh) 2018-09-28
CN108604119B CN108604119B (zh) 2021-08-06

Family

ID=57851331

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680081534.9A Active CN108604119B (zh) 2016-05-05 2016-12-22 在增强和/或虚拟现实环境中的虚拟项的共享

Country Status (4)

Country Link
US (2) US10250720B2 (zh)
EP (1) EP3400501A1 (zh)
CN (1) CN108604119B (zh)
WO (1) WO2017192176A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111258482A (zh) * 2020-01-13 2020-06-09 维沃移动通信有限公司 信息分享方法、头戴式设备及介质
CN112468865A (zh) * 2020-11-25 2021-03-09 咪咕视讯科技有限公司 一种视频处理方法、vr终端及计算机可读存储介质
CN113318438A (zh) * 2021-06-30 2021-08-31 北京字跳网络技术有限公司 虚拟道具控制方法、装置、设备和计算机可读存储介质
US11392218B2 (en) 2020-08-26 2022-07-19 Institute For Information Industry Data filtering device and data filtering method
CN111258482B (zh) * 2020-01-13 2024-05-10 维沃移动通信有限公司 信息分享方法、头戴式设备及介质

Families Citing this family (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10434415B1 (en) * 2012-07-30 2019-10-08 Yaacov Barki Method of modifying locations
US10250720B2 (en) 2016-05-05 2019-04-02 Google Llc Sharing in an augmented and/or virtual reality environment
US10572005B2 (en) * 2016-07-29 2020-02-25 Microsoft Technology Licensing, Llc Private communication with gazing
US10255658B2 (en) 2016-08-09 2019-04-09 Colopl, Inc. Information processing method and program for executing the information processing method on computer
US10783682B2 (en) 2016-11-02 2020-09-22 United Parcel Service Of America, Inc. Displaying items of interest in an augmented reality environment
US20180150204A1 (en) * 2016-11-30 2018-05-31 Google Inc. Switching of active objects in an augmented and/or virtual reality environment
US11238526B1 (en) * 2016-12-23 2022-02-01 Wells Fargo Bank, N.A. Product display visualization in augmented reality platforms
US11572653B2 (en) * 2017-03-10 2023-02-07 Zyetric Augmented Reality Limited Interactive augmented reality
US11156471B2 (en) * 2017-08-15 2021-10-26 United Parcel Service Of America, Inc. Hands-free augmented reality system for picking and/or sorting assets
US11797910B2 (en) 2017-08-15 2023-10-24 United Parcel Service Of America, Inc. Hands-free augmented reality system for picking and/or sorting assets
WO2019127349A1 (zh) * 2017-12-29 2019-07-04 腾讯科技(深圳)有限公司 一种多媒体信息分享的方法、相关装置及系统
CN108572772A (zh) * 2018-03-27 2018-09-25 麒麟合盛网络技术股份有限公司 图片内容呈现方法及装置
US10684764B2 (en) 2018-03-28 2020-06-16 Microsoft Technology Licensing, Llc Facilitating movement of objects using semantic analysis and target identifiers
US11875012B2 (en) * 2018-05-25 2024-01-16 Ultrahaptics IP Two Limited Throwable interface for augmented reality and virtual reality environments
US20190378334A1 (en) * 2018-06-08 2019-12-12 Vulcan Inc. Augmented reality portal-based applications
US10783712B2 (en) 2018-06-27 2020-09-22 Facebook Technologies, Llc Visual flairs for emphasizing gestures in artificial-reality environments
US10712901B2 (en) * 2018-06-27 2020-07-14 Facebook Technologies, Llc Gesture-based content sharing in artificial reality environments
US10635895B2 (en) 2018-06-27 2020-04-28 Facebook Technologies, Llc Gesture-based casting and manipulation of virtual content in artificial-reality environments
US10996831B2 (en) 2018-06-29 2021-05-04 Vulcan Inc. Augmented reality cursors
US11244381B2 (en) * 2018-08-21 2022-02-08 International Business Machines Corporation Collaborative virtual reality computing system
US10909762B2 (en) * 2018-08-24 2021-02-02 Microsoft Technology Licensing, Llc Gestures for facilitating interaction with pages in a mixed reality environment
USD933079S1 (en) 2018-08-24 2021-10-12 Microsoft Corporation Display screen with animated graphical user interface
USD895664S1 (en) * 2018-08-24 2020-09-08 Microsoft Corporation Display screen with animated graphical user interface
USD915451S1 (en) 2018-08-24 2021-04-06 Microsoft Corporation Display screen with animated graphical user interface
WO2020068861A1 (en) 2018-09-28 2020-04-02 Ocelot Laboratories Llc Transferring a virtual object in an enhanced reality setting
USD896263S1 (en) * 2018-12-11 2020-09-15 Beijing Microlive Vision Technology Co., Ltd. Display screen or portion thereof with a graphical user interface
USD896268S1 (en) * 2018-12-11 2020-09-15 Beijing Microlive Vision Technology Co., Ltd. Display screen or portion thereof with an animated graphical user interface
USD904431S1 (en) * 2019-01-04 2020-12-08 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD904432S1 (en) * 2019-01-04 2020-12-08 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD920997S1 (en) * 2019-01-04 2021-06-01 Samsung Electronics Co., Ltd. Refrigerator with transitional graphical user interface
US10937218B2 (en) * 2019-07-01 2021-03-02 Microsoft Technology Licensing, Llc Live cube preview animation
US11372474B2 (en) * 2019-07-03 2022-06-28 Saec/Kinetic Vision, Inc. Systems and methods for virtual artificial intelligence development and testing
CN111208903B (zh) * 2019-12-31 2022-07-05 维沃移动通信有限公司 信息传输方法、穿戴式设备及介质
CN111330268B (zh) * 2020-02-26 2021-09-28 腾讯科技(深圳)有限公司 虚拟道具的控制方法和装置、存储介质及电子装置
US20210287382A1 (en) * 2020-03-13 2021-09-16 Magic Leap, Inc. Systems and methods for multi-user virtual and augmented reality
JP7439639B2 (ja) * 2020-05-15 2024-02-28 富士フイルムビジネスイノベーション株式会社 情報提示システム及びプログラム
US11562528B2 (en) 2020-09-25 2023-01-24 Apple Inc. Devices, methods, and graphical user interfaces for interacting with three-dimensional environments
US11644902B2 (en) 2020-11-30 2023-05-09 Google Llc Gesture-based content transfer
US11954242B2 (en) 2021-01-04 2024-04-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with three-dimensional environments
US20230161544A1 (en) * 2021-11-23 2023-05-25 Lenovo (United States) Inc. Virtual content transfer
US20230195208A1 (en) * 2021-12-16 2023-06-22 Joshua Steven Noyes Centralized Virtual Reality and Augmented Reality Activity System
CN114885289B (zh) * 2022-05-10 2023-04-07 电子科技大学 一种基于虚拟轨迹生成机制的位置隐私保护方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030156144A1 (en) * 2002-02-18 2003-08-21 Canon Kabushiki Kaisha Information processing apparatus and method
US20090307623A1 (en) * 2006-04-21 2009-12-10 Anand Agarawala System for organizing and visualizing display objects
US20130130758A1 (en) * 2011-11-18 2013-05-23 Verizon Corporate Services Group Inc. Method and system for providing virtual throwing of objects
CN103135898A (zh) * 2011-11-22 2013-06-05 三星电子株式会社 在移动装置中用于管理书相关项的系统和方法
CN105278855A (zh) * 2014-06-25 2016-01-27 Lg电子株式会社 移动终端及其控制方法
CN105393158A (zh) * 2013-06-18 2016-03-09 微软技术许可有限责任公司 共享的和私有的全息物体

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100113140A1 (en) 2007-11-02 2010-05-06 Bally Gaming, Inc. Gesture Enhanced Input Device
US8260883B2 (en) 2009-04-01 2012-09-04 Wimm Labs, Inc. File sharing between devices
US9152306B2 (en) * 2011-03-29 2015-10-06 Intel Corporation Techniques for touch and non-touch user interaction input
US9619567B2 (en) * 2011-06-06 2017-04-11 Nfluence Media, Inc. Consumer self-profiling GUI, analysis and rapid information presentation tools
US20130019184A1 (en) 2011-07-11 2013-01-17 Net Power And Light, Inc. Methods and systems for virtual experiences
WO2013085639A1 (en) 2011-10-28 2013-06-13 Magic Leap, Inc. System and method for augmented and virtual reality
US9392212B1 (en) 2014-04-17 2016-07-12 Visionary Vr, Inc. System and method for presenting virtual reality content to a user
WO2016094807A1 (en) 2014-12-11 2016-06-16 Vishal Sharma Virtual assistant system to enable actionable messaging
US10250720B2 (en) 2016-05-05 2019-04-02 Google Llc Sharing in an augmented and/or virtual reality environment

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030156144A1 (en) * 2002-02-18 2003-08-21 Canon Kabushiki Kaisha Information processing apparatus and method
US20090307623A1 (en) * 2006-04-21 2009-12-10 Anand Agarawala System for organizing and visualizing display objects
US20130130758A1 (en) * 2011-11-18 2013-05-23 Verizon Corporate Services Group Inc. Method and system for providing virtual throwing of objects
CN103135898A (zh) * 2011-11-22 2013-06-05 三星电子株式会社 在移动装置中用于管理书相关项的系统和方法
CN105393158A (zh) * 2013-06-18 2016-03-09 微软技术许可有限责任公司 共享的和私有的全息物体
CN105278855A (zh) * 2014-06-25 2016-01-27 Lg电子株式会社 移动终端及其控制方法

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111258482A (zh) * 2020-01-13 2020-06-09 维沃移动通信有限公司 信息分享方法、头戴式设备及介质
CN111258482B (zh) * 2020-01-13 2024-05-10 维沃移动通信有限公司 信息分享方法、头戴式设备及介质
US11392218B2 (en) 2020-08-26 2022-07-19 Institute For Information Industry Data filtering device and data filtering method
TWI784305B (zh) * 2020-08-26 2022-11-21 財團法人資訊工業策進會 透過六自由度虛擬空間中的軌跡篩選資料之裝置及方法
CN112468865A (zh) * 2020-11-25 2021-03-09 咪咕视讯科技有限公司 一种视频处理方法、vr终端及计算机可读存储介质
CN112468865B (zh) * 2020-11-25 2024-02-23 咪咕视讯科技有限公司 一种视频处理方法、vr终端及计算机可读存储介质
CN113318438A (zh) * 2021-06-30 2021-08-31 北京字跳网络技术有限公司 虚拟道具控制方法、装置、设备和计算机可读存储介质
CN113318438B (zh) * 2021-06-30 2023-08-15 北京字跳网络技术有限公司 虚拟道具控制方法、装置、设备和计算机可读存储介质

Also Published As

Publication number Publication date
US20190182355A1 (en) 2019-06-13
WO2017192176A1 (en) 2017-11-09
US10250720B2 (en) 2019-04-02
US10484508B2 (en) 2019-11-19
CN108604119B (zh) 2021-08-06
EP3400501A1 (en) 2018-11-14
US20170324841A1 (en) 2017-11-09

Similar Documents

Publication Publication Date Title
CN108604119A (zh) 在增强和/或虚拟现实环境中的虚拟项的共享
US11750767B2 (en) Selective identification and order of image modifiers
US10748342B2 (en) Interaction system for augmented reality objects
CN107743604B (zh) 增强和/或虚拟现实环境中的触摸屏悬停检测
US11043031B2 (en) Content display property management
US10083544B2 (en) System for tracking a handheld device in virtual reality
US10356398B2 (en) Method for capturing virtual space and electronic device using the same
US9390561B2 (en) Personal holographic billboard
US20170103440A1 (en) Wearable augmented reality eyeglass communication device including mobile phone and mobile computing via virtual touch screen gesture control and neuron command
TWI581178B (zh) 混合實境顯示器中使用者控制的真實物件的消失
CN105027033B (zh) 用于选择扩增现实对象的方法、装置和计算机可读媒体
CN107209568B (zh) 控制虚拟现实空间中的投影的方法、系统以及其存储介质
CN108885488A (zh) 在增强和/或虚拟现实环境中生成与虚拟对象相关的可视提示
CN107667328A (zh) 用于在增强和/或虚拟现实环境中跟踪手持设备的系统
CN107533374A (zh) 虚拟现实中的头部、手势和触摸输入的动态切换和合并
CN108292146A (zh) 虚拟现实中的激光指示器交互和缩放
CN107787472A (zh) 用于虚拟现实中的凝视交互的悬停行为
WO2017052762A1 (en) Facilitating dynamic monitoring of body dimensions over periods of time based on three-dimensional depth and disparity
CN109074149A (zh) 用于增强或虚拟现实环境的头戴式参考系中的对象跟踪
US10595012B2 (en) Representations of event notifications in virtual reality
CN109906424A (zh) 用于虚拟现实系统的输入控制器稳定技术
US11308698B2 (en) Using deep learning to determine gaze
CN108700944A (zh) 与在虚拟现实环境中的运动有关的系统和方法
KR20120062427A (ko) 휴대 단말기 및 그 동작 방법
CA3175833A1 (en) Digital computing device with transparent display

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant