CN102695032B - 信息处理装置、信息共享方法以及终端设备 - Google Patents

信息处理装置、信息共享方法以及终端设备 Download PDF

Info

Publication number
CN102695032B
CN102695032B CN201210023940.3A CN201210023940A CN102695032B CN 102695032 B CN102695032 B CN 102695032B CN 201210023940 A CN201210023940 A CN 201210023940A CN 102695032 B CN102695032 B CN 102695032B
Authority
CN
China
Prior art keywords
virtual objects
shared
shared region
display
control unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210023940.3A
Other languages
English (en)
Other versions
CN102695032A (zh
Inventor
福地正树
柏谷辰起
本间俊
本间俊一
芦原隆之
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to JP2011027654A priority Critical patent/JP5776201B2/ja
Priority to JP2011-027654 priority
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN102695032A publication Critical patent/CN102695032A/zh
Application granted granted Critical
Publication of CN102695032B publication Critical patent/CN102695032B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04803Split screen, i.e. subdividing the display area or the window area into separate subareas

Abstract

提供一种信息处理装置、信息共享方法以及终端设备。用于共享虚拟对象的装置可以包括通信单元和共享控制单元。通信单元可以被配置为接收指示虚拟对象相对于真实空间的位置的位置数据。共享控制单元可以被配置为将虚拟对象的位置与相对于真实空间限定的共享区域相比较。共享控制单元还可以被配置为基于比较的结果选择性地允许用显示设备显示虚拟对象。

Description

信息处理装置、信息共享方法以及终端设备
[0001] 相关申请的交叉引用
[0002] 本申请要求2011年2月10日提交的日本专利申请2011-027654号的优先权,其整个 内容通过引用合并于此。
技术领域
[0003] 本公开涉及一种信息处理装置、信息共享方法以及终端设备。
背景技术
[0004] 近年来,一种称为增强现实(AR,Augmented Reality)的用于将附加信息叠加在真 实世界上并将其呈现给用户的技术得到了关注。在AR技术中要呈现给用户的信息也被称为 注释,并且可以通过使用各种类型的虚拟对象(诸如文本、图标、动画制作等)将该注释视觉 化。AR技术的主要应用领域之一是真实世界中用户行为的支持。AR技术不仅用于支持单个 用户的行为,而且用于支持多个用户的行为(例如,参见JP 2004-62756A和JP 2005-49996A)。
发明内容
[0005] 然而,当多个用户共享AR空间时,出现了哪一个信息要呈现给哪一个用户的问题。 例如,在真实世界的会议中,很多与会者对他们自己的想法或者会议的内容做笔记,但是他 们不希望其它与会者自由地观看这些笔记。然而,在JP 2004-62756A和JP 2005-49996A中 描述的方法不在要在用户之间共享的信息和个别用户不希望共享的信息之间进行区分,存 在这样的担忧:多个用户将无视用户的意图而能够观看任何信息。
[0006] 在现有AR技术中,可以准备两种类型的AR空间,私人层(分级层)和共享层,并且通 过在这些层之间进行切换来使用这些层,用户被允许分别持有要共享的信息和不期望分享 的信息。然而,对用户来说,这种多层的处理是麻烦的,此外改变层的设置的操作是不直观 且复杂的。
[0007] 考虑到上面的问题,期望提供一种信息处理装置、信息共享方法、程序以及终端设 备,其允许用户容易地处理期望与AR空间中的其它用户共享的信息,以及不期望共享的信 息。
[0008] 因此,公开了一种用于共享虚拟对象的装置。该装置可以包括通信单元和共享控 制单元。通信单元可以被配置为接收指示虚拟对象相对于真实空间的位置的位置数据。共 享控制单元可以被配置为将虚拟对象的位置与相对于真实空间限定的共享区域相比较。共 享控制单元还可以被配置为基于比较的结果选择性地允许用显示设备显示虚拟对象。
[0009] 还公开了一种共享虚拟对象的方法。处理器可以执行程序,以使装置执行该方法。 该程序可以被存储在该装置的存储介质和/或非易失性计算机可读存储介质上。该方法可 以包括接收指示虚拟对象相对于真实空间的位置的位置数据。该方法还可以包括将虚拟对 象的位置与相对于真实空间限定的共享区域相比较。另外,该方法可以包括基于比较的结 果选择性地允许用显示设备显示虚拟对象。
[0010] 根据本公开的信息处理装置、信息共享方法、程序以及终端设备,允许用户容易地 处理期望与AR空间中的其它用户共享的信息,以及不期望共享的信息。
附图说明
[0011] 图IA是示出根据实施例的信息共享系统的概览的说明图;
[0012] 图IB是示出信息共享系统的另一实例的说明图;
[0013] 图2是示出根据实施例的终端设备(S卩,远程设备)的结构的实例的框图;
[0014] 图3是示出根据实施例的由终端设备拍摄的图像的实例的说明图;
[0015] 图4是示出根据实施例的由终端设备显示的图像的实例的说明图;
[0016] 图5是示出根据实施例的信息处理装置的配置的实例的框图;
[0017] 图6是用于描述根据实施例的对象数据的说明图;
[0018] 图7是用于描述根据实施例的共享区域数据的说明图;
[0019] 图8是示出共享区域的第一实例的说明图;
[0020] 图9是示出共享区域的第二实例的说明图;
[0021] 图10是示出共享区域的第三实例的说明图;
[0022] 图11是用于描述共享区域的支持识别的方法的实例的说明图;
[0023] 图12是示出直到实施例中信息共享的开始的过程的流程的实例的序列图;
[0024] 图13是示出根据实施例的共享确定过程的流程的实例的流程图;
[0025] 图14是用于描述虚拟对象的显示位置的计算的说明图;
[0026] 图15是示出实施例中共享信息和非共享信息的实例的说明图;
[0027] 图16是用于描述用于共享图15中非共享的信息的第一场景的说明图;
[0028] 图17是用于描述用于共享图15中非共享的信息的第二场景的说明图;以及
[0029] 图18是示出根据变型实例的信息共享系统的概览的说明图。
具体实施方式
[0030] 下文中,将参照附图来详细地描述本公开的实施例。请注意:在本说明书和附图 中,实质具有相同功能和配置的结构元件用相同的附图标记表示,并且省略这些结构元件 的重复说明。还请注意:如这里使用的,非限定冠词“一”和“一个”意思是“一个或更多”。在 开放式权利要求中包含过渡短语“包括”、“包含”和/或“具有”。
[0031] 此外,在下文中,将按照下面的顺序描述“具体实施方式”。
[0032] 1.系统的概览
[0033] 2.终端设备的示例配置
[0034] 3.信息处理装置的示例配置
[0035] 4.处理流程的实例
[0036] 5.共享信息和非共享信息的实例
[0037] 6.变型实例
[0038] 7.总结
[0039] 〈1.系统的概览〉
[0040] 图IA是示出根据本公开实施例的信息共享系统1的概览的说明图。参考图1A,信息 共享系统1包括:终端设备l〇〇a、IOOb和100c,以及信息处理装置200。在图IA的实例中,用户 Ua、Ub和Uc围绕在作为真实空间中的真实对象的桌子3周围。分别地,用户Ua使用终端设备 100a,用户Ub使用终端设备100b,且用户Uc使用终端设备100c。另外,图IA中所示实例中,三 个用户加入信息共享系统1,但不限于该实例,两个或四个或更多用户可以加入信息共享系 统1。
[0041] 终έ而设备IOOa被连接到女装在用户Ua头部的成像设备102a和显不设备160a。成像 设备102a转向用户Ua的视线的方向,拍摄真实空间,并将一系列输入图像输出到终端设备 100a。显示设备160a向用户Ua显示由终端设备IOOa生成或获取的虚拟对象的图像。显示设 备160a的屏幕可以是视透型(see-through)屏幕或非视透屏幕。在图IA的实例中,显示设备 160a是头带式显示器(HMD)。
[0042] 终端设备IOOb被连接到安装在用户Ub头部的成像设备102b和显示设备160b。成像 设备102b转向用户Ub的视线的方向,拍摄真实空间,并将一系列输入图像输出到终端设备 100b。显示设备160b向用户Ub显示由终端设备IOOb生成或获取的虚拟对象的图像。
[0043] 终端设备IOOc被连接到安装在用户Uc头部的成像设备102c和显示设备160c。成像 设备102c转向用户Uc的视线的方向,拍摄真实空间,并将一系列输入图像输出到终端设备 100c。显示设备160c向用户Uc显示由终端设备IOOc生成或获取的虚拟对象的图像。
[0044] 终端设备100a、IOOb和IOOc经由有线或无线通信连接与信息处理装置200进行通 信。终端设备100a、IOOb和IOOc也可以能够彼此进行通信。终端设备100a、IOOb和IOOc与信 息处理装置200之间的通信例如可以通过P2P (点对点)方法直接进行,或者可以经由诸如路 由器或服务器(未示出)的另一个设备间接进行。
[0045] 终端设备IOOa将用户Ua拥有的信息和在用户Ua、Ub和Uc之间共享的信息叠加在真 实空间上,并将其显示在显示设备160a的屏幕上。终端设备IOOb将用户Ub拥有的信息和在 用户Ua、Ub和Uc之间共享的信息叠加在真实空间上,并将其显示在显示设备160b的屏幕上。 终端设备IOOc将用户Uc拥有的信息和在用户Ua、Ub和Uc之间共享的信息叠加在真实空间 上,并将其显示在显示设备160c的屏幕上。
[0046] 另外,终端设备100a、IOOb和IOOc可以是具有照相机的移动终端,诸如智能手机, 而不限于图IA的实例(见图1B)。在这种情况下,具有照相机的移动终端的照相机拍摄真实 空间,并通过终端的控制单元(即,软件模块、硬件模块,或者软件模块和硬件模块的结合) 进行图像处理,然后,可以将虚拟图像的图像叠加在真实空间的图像上,并显示在终端的屏 幕上。此外,每个终端设备可以是另一种类型的设备,诸如PC (个人计算机)、游戏终端等。 [0047] 在本说明书下面的描述中,在终端设备100a、IOOb和IOOc不需要彼此区分的情况 下,省略附图标记末尾的字母,并将它们统称为终端100。成像设备102a、102b和102c (成像 设备102),显示设备160a、160b和160c (显示设备160)以及其它部件也是如此。
[0048]信息处理装置200是用作支持多个终端设备100之间的信息共享的服务器的装置。 在本实施例中,信息处理装置200保持指示虚拟对象的位置和属性的对象数据。虚拟对象可 以是写入了某种文本信息的文本框,诸如是例如标签、气球或消息签。此外,虚拟对象可以 是例如符号化表达某种信息的图或符号,诸如图标。此外,信息处理装置200保持限定在信 息共享系统1内共同设定的共享区域的共享区域数据。共享区域可以例如与真实空间中的 真实对象(诸如桌子3)相关联地设定,或可以在不与真实对象相关联的情况下被指定为真 实空间的坐标系中的特定区域。此外,信息处理装置200根据每一虚拟对象的属性以及每一 虚拟对象与共享区域的位置关系来控制每一虚拟对象的共享。
[0049] 在下面的部分中详细描述这种信息共享系统1的每一设备的配置的具体例子。
[0050] 〈2.终端设备的示例配置〉
[0051] 图2是示出根据本实施例的终端设备100的配置的实例的框图。参考图2,终端设备 100包括:成像单元102、传感器单元104、输入单元106、通信单元110、存储单元120、图像识 别单元130、位置/姿态估计单元140、对象控制单元150和显示单元160。
[0052] 成像单元102与图IA或图IB中所示终端设备100的成像设备102相对应,其通过拍 摄真实空间获取一系列输入图像。然后,成像单元102将获取的输入图像输出到图像识别单 元130、位置/姿态估计单元140和对象控制单元150。
[0053] 传感器单元104包括陀螺仪传感器、加速度传感器、地磁传感器和GPS (全球定位系 统)传感器。用陀螺仪传感器、加速度传感器或者地磁传感器测量的终端设备100的倾斜角、 3-轴加速度或朝向可以被用来估计终端设备100的姿态。此外,GPS传感器可以被用来测量 终端设备100的绝对位置(炜度、经度和海拔)。传感器单元104将通过每一传感器测量获得 的测量值输出到位置/姿态估计单元140和对象控制单元150。
[0054] 终端设备100的用户使用输入单元106来操作终端设备100,或将信息输入到终端 设备100。输入单元106可以包括例如键盘、按钮、开关或接触面板。此外,输入单元106可以 包括:根据用户发出的嗓音识别操作命令或信息输入命令的语音识别模块,或者识别反映 在输入图像上的用户姿势的姿势识别模块。用户例如通过经由输入单元106的操作(例如, 虚拟对象的拖拽、方向键的按压等)移动显示在显示单元160的屏幕上的虚拟对象。此外,用 户经由输入单元106编辑其拥有的虚拟对象的属性。
[0055] 通信单元110是作为通信设备100和另一个设备之间的通信连接媒介的通信接口。 当终端设备100加入信息共享系统1时,通信单元110建立终端设备100和信息处理装置200 之间的通信连接。此外,通信单元110还可以建立多个终端设备100之间的通信连接。从而使 得能够进行用于在信息共享系统1的用户之间共享信息的通信。
[0056] 存储单元120通过使用诸如硬盘、半导体存储器等的存储介质(S卩非易失性计算机 可读存储介质)存储用于终端设备100进行的处理的程序和数据。例如,存储单元120存储由 对象控制单元150产生的虚拟对象的对象数据,或者经由通信单元110从信息处理装置200 获取的虚拟对象的对象数据。此外,存储单元120存储关于共享区域的共享区域数据,终端 设备100的用户使用该共享区域数据进行登记。
[0057] 图像识别单元130对从成像单元102输入的输入图像进行图像识别处理。例如,图 像识别单元130可以使用已知的图像识别方法(诸如模式匹配)识别输入图像中示出的、且 与共享区域相关联的真实空间中的真实对象(例如,图IA或图IB中所示的桌子3)。可选择 地,图像识别单元130可以在输入图像内识别物理上附到真实对象的标记、QR代码等。
[0058] 位置/姿态估计单元140通过使用从传感器104输入的每一传感器的测量值估计终 端设备100的当前位置和姿态。例如,位置/姿态估计单元140能够通过使用GPS传感器的测 量值估计终端设备100的绝对位置。此外,位置/姿态估计单元140能够通过使用陀螺仪传感 器、加速度传感器或地磁传感器的测量值估计终端设备100的姿态。可选择地,位置/姿态估 计单元140可以基于图像识别单元130进行图像识别的结果估计终端设备100对真实空间中 的真实对象的相对位置或姿态。此外,位置/姿态估计单元140也可以例如根据在Andrew J·Davison的“Real-Time Simultaneous Localization and Mapping with a Single Camera” (Proceedings of the 9th IEEE International Conference on Computer Vision Volume 2,2003,pp. 1403-1410)中描述的SLAM技术的原理,通过使用从成像单元 102输入的输入图像动态地检测终端设备100的位置和姿态。另外,在使用SLAM技术的情况 下,传感器单元104可以从终端设备100的配置中省略。位置/姿态单元140将以上面的方式 估计的终端设备100的位置和姿态输出到对象控制单元150。
[0059] 对象控制单元150控制虚拟对象在终端设备100上的操作和显示。
[0060] 更特别地,对象控制单元150产生表达由用户输入或选择的信息的虚拟对象。例 如,围绕桌子3的三个用户之一经由输入单元106、以文本信息的形式输入关于其在会议或 会议的几分钟期间产生的想法的笔记的信息。然后,对象控制单元150生成示出输入文本信 息的虚拟对象(例如,文本框)。生成了虚拟对象的终端设备100的用户成为虚拟对象的拥有 者。此外,对象控制单元150将生成的虚拟对象与真实空间中的位置相关联。虚拟对象要与 之相关联的位置可以是由用户指定的位置,或者可以是预先设定的位置。然后,对象控制单 元150经由通信单元110将指示生成的对象的位置和属性的对象数据发送到信息处理装置 200 〇
[0061] 此外,对象控制单元150经由通信单元110从信息处理装置200获取关于被允许根 据共享区域和每一虚拟对象之间的位置关系进行显示的虚拟对象的对象数据。然后,对象 控制单元150基于由获取的对象数据指示的每一虚拟对象的三维位置和由位置/姿态估计 单元140估计的终端设备100的位置和姿态来计算每一虚拟对象在屏幕上的显示位置。然 后,对象控制单元150使由显示单元160显示的每一虚拟对象显示在计算出的显示位置。
[0062] 此外,对象控制单元150经由通信单元110从信息处理装置200获取限定设定在真 实空间中的虚拟共享区域的共享区域数据。然后,对象控制单元150使用于允许用户察觉共 享区域的辅助对象(例如,围绕共享区域的半透明区域或框)由显示单元160显示。可以基于 由共享区域数据指示的共享区域的位置和终端设备100的位置和姿态来计算辅助对象的显 示位置。
[0063] 此外,对象控制单元150使由显示单元160显示的虚拟对象根据经由输入单元106 检测到的用户输入进行移动。然后,对象控制单元150经由通信单元110将虚拟对象的移动 后的新位置发送到信息处理装置200。
[0064] 显示单元160与图IA或图IB中所示的终端设备100的显示设备160相对应。显示单 元160将从信息处理装置200获取的虚拟对象叠加在真实空间上由对象控制单元150计算的 显示位置,并显示叠加结果。此外,显示单元160根据从信息处理装置200获取的共享区域数 据将用于允许用户察觉共享区域的辅助对象叠加在真实空间上,并显示叠加结果。
[0065] 图3是示出由终端设备100的成像单元102拍摄的图像的实例的说明图。参考图3, 示出了从用户Ua的观察点拍摄的输入图像ImO。在输入图像ImO中示出了用户Ub和Uc以及桌 子3 〇
[0066] 图4是示出由终端设备100 (IOOa)的显示单元160显示的图像的实例的说明图。参 考图4,多个对象01^11、01^12、01^13、01^21、01^31、01^32和01^4被叠加在真实空间中、图3 的输入图像ImO中示出的桌子3上显示。例如,对象Ob jll、0bjl2和Ob jl3是表达用户Ua已输 入的信息的虚拟对象。对象Ob j 21是表达用户Ub已输入信息的虚拟对象。对象Ob j 31和Ob j 32 是表达用户Uc已输入的信息的虚拟对象。对象ObjA是用于允许用户察觉共享区域的辅助对 象。在信息共享系统1中,利用接下来说明的信息处理装置200的改进,显示这种对象的AR空 间被呈现给用户,并使得能够进行用户之间信息的容易并灵活的共享。
[0067] 〈3.信息处理装置的示例配置〉
[0068] 图5是示出根据本实施例的信息处理装置200的结构的实例的框图。参考图5,信息 处理装置200包括:通信单元210、存储单元220、共享区域设定单元(S卩,共享区域限定单元) 230以及共享控制单元240。
[0069] (3-1)通信单元
[0070] 通信单元210是作为信息处理装置200和终端设备100之间的通信连接媒介的通信 接口。当从终端设备100接收到加入信息共享系统1的请求时,通信单元210建立与终端设备 100的通信连接。从而,使得能够在终端设备100和信息处理装置200之间进行诸如对象数 据、共享区域数据等各种数据的交换。
[0071] (3-2)存储单元
[0072] 存储单元220存储关于叠加在真实空间上、并显示在每一终端设备100的屏幕上的 虚拟对象的对象数据。典型地,对象数据包括:指示每一对象在真实空间中的位置的位置数 据,以及指示每一对象的属性的属性数据。存储单元220还存储限定虚拟地设定在真实空间 中的共享区域的共享区域数据。共享区域数据包括关于每一共享区域在真实空间中的范围 的数据。此外,共享区域数据还可以包括关于使用每一共享区域的用户的数据。
[0073] (对象数据)
[0074] 图6是用于描述本实施例中要由信息处理装置200存储的对象数据的说明图。参考 图6,示出了作为实例的对象数据212。对象数据212包括7个数据项:对象ID、位置、姿态、拥 有者、公共标志、共享标志以及内容。
[0075] “对象ID”是用于每一虚拟对象的唯一标识的标识符。“位置”指示每一虚拟对象在 真实空间中的位置。每一虚拟对象在真实空间中的位置可以例如通过指示诸如炜度、经度 和海拔的绝对位置的全球坐标来表达,或者通过与特定空间(例如,建筑物、会议室等)相关 联设定的本地坐标来表达。“姿态”使用四元数或欧拉角指示每一虚拟对象的姿态。“拥有 者”是用于标识每一对象的拥有者用户的用户ID。在图6的实例中,对象0 b j 11、0 b j 12和 0bjl3的拥有者是用户Ua。另一方面,对象0bj32的拥有者是用户Uc。
[0076] “公共标志”是限定每一虚拟对象的属性(公共或私有)的标志。“公共标识”为“真” 的虚拟对象(即,具有公共属性的虚拟对象)无论虚拟对象的位置在哪儿基本对所有用户是 公共的。另一方面,关于“公共标志”是“假”的虚拟对象(S卩,具有私有属性的虚拟对象),根 据共享标志的值和虚拟对象的位置来确定是否使该虚拟对象成为公共的。
[0077] “共享标志”是能够由每一虚拟对象的拥有者编辑的标志。当特定虚拟对象的“共 享标志”被设定为“真”时,如果该虚拟对象被定位在共享区域中,则使该虚拟对象对拥有者 之外的用户成为公共的(即,其被共享)。另一方面,当特定虚拟对象的“共享标志”被设定为 “假”时,即使该虚拟对象被定位在共享区域中,也不使该虚拟对象对拥有者之外的用户成 为公共的(S卩,其不被共享)。
[0078] “内容”指示要由每一虚拟对象表达的信息,其例如可以包括诸如文本框中的文 本、图标的位图、三维对象的多边形等数据。
[0079] 另外,可以简单地根据虚拟对象是否位于共享区域中来确定允许还是拒绝每一虚 拟对象的显示。在这种情况下,可以从对象数据的数据项中省略“公共标志”和“共享标志”。
[0080] (共享区域数据)
[0081] 图7是用于描述本实施例中由信息处理装置200存储的共享区域数据的说明图。参 考图7,示出了作为实例的共享区域数据214。共享区域数据214包括5个数据项:共享区域 ID、顶点数、顶点坐标、用户数和登记用户。
[0082] “共享区域ID”是用于每一共享区域的唯一标识的标识符。“顶点数”和“顶点坐标” 是关于每一共享区域在真实空间中的范围的数据。在图7的实例中,共享区域SAl被限定为 由位置以坐标Xaii到Xain给出的N个顶点形成的多边形。共享区域SA2由位置以坐标Xa2I到Xa2M 给出的M个顶点形成的多边形限定。共享区域可以是由一组多边形形成的三维区域,或者是 多边形或椭圆形的二维区域。
[0083] “用户数”和“登记用户”是限定使用每一共享区域的用户的组(下文中称为用户 组)的数据。在图7的实例中,共享区域SAl的用户组包括Nu1个登记用户。此外,共享区域SA2 的用户组包括Nu2个登记用户。如果定位在特定共享区域中的虚拟对象的共享标志是“真”, 则可以使该虚拟对象对登记在该虚拟对象用户组中的用户是公共的。另外,可以从共享区 域数据的数据项中省略“用户数”和“登记用户”。
[0084] (3-3)共享区域设定单元
[0085] 共享区域设定单元230设定(S卩,限定)真实空间中的虚拟共享区域。当由共享区域 设定单元230设定了共享区域时,如图7中例示的限定该共享区域的共享区域数据被存储在 存储单元220中。
[0086] (共享区域的实例)
[0087] 图8是示出可以由共享区域设定单元230设定的共享区域的第一实例的说明图。在 第一实例中,共享区域SAl是具有定位在桌子3的表面上的4个顶点Xm1到Xm4的四边平面区 域。
[0088] 图9是示出可以由共享区域设定单元230设定的共享区域的第二实例的说明图。在 第二实例中,共享区域SA2是具有定位在桌子3的上面或上方的8个顶点Xa2^Xa28的三维长 方体区域。
[0089] 图10是示出可以由共享区域设定单元230设定的共享区域的第三实例的说明图。 在第三实例中,共享区域SA3是定位在桌子3表面上的、以点Ca3为中心、Ra3为半径的圆形平 面区域。
[0090] 如图8到图10所示,共享区域设定单元230可以在与真实空间中的预定真实对象相 关联的位置处设定共享区域。预定真实对象可以例如是桌子、白板、PC (个人计算机)的屏 幕、墙壁、地板等。可选择地,共享区域设定单元230还可以在不将共享区域与真实空间中的 真实对象相关联的情况下,将共享区域设定在全球坐标系或本地坐标系中的特定位置。
[0091] 可以预先固定地限定要有共享区域设定单元230设定的共享区域。此外,共享区域 设定单元230可以通过从终端设备100接收新共享区域的限定重新设定共享区域。例如,参 考图11,示出了 QR代码被附到与共享区域的顶点相对应的位置的桌子3。终端设备100通过 拍摄这些QR代码来识别共享区域的顶点,并将要由识别出的顶点形成的共享区域的限定发 送到信息处理装置200。于是,可以用共享区域设定单元230设定如图8中所示的四边平面共 享区域。上面说明的QR代码(或标记等)也可以不布置在共享区域的顶点处,而是布置在共 享区域的中心处。
[0092] (用户组)
[0093] 此外,在本实施例中,共享区域设定单元230为每一共享区域设定通过将使用共享 区域的用户分组获得的用户组。在设定特定共享区域后,共享区域设定单元230可以例如将 信标广播到周边的终端设备100,以邀请要使用已经设定的共享区域的用户。然后,共享区 域设定单元230可以将已经响应信标的终端设备100的用户登记为将使用共享区域的用户 (图7中共享区域数据214的“登记用户”)。可选择地,共享区域设定单元230可以从终端设备 100接收登记到共享区域的请求,并将作为已经接收到的登记请求的发送源的终端设备100 的用户登记为将使用该共享区域的用户。
[0094] (3-4)共享控制单元
[0095] 共享控制单元240控制虚拟对象在呈现用于用户之间的信息共享的AR空间的终端 设备100处的显示。更特别地,共享控制单元240依据每一虚拟对象是否被定位在共享区域 中来允许或拒绝每一虚拟对象在终端设备100处的显示。此外,在本实施例中,共享控制单 元240依据每一虚拟对象的属性允许或拒绝每一虚拟对象在每一终端设备100处的显示。然 后,共享控制单元240向每一终端设备100发布允许在该终端设备100处显示的虚拟对象的 对象数据。可选择地,共享控制单元240不管虚拟对象是否被允许在任何特定终端设备100 处显示,而向每一终端设备100发布虚拟对象的对象数据。在这种实施例中,共享控制单元 240向每一终端设备发布表示允许在终端设备100处显示的虚拟对象的特定朝向的对象数 据。例如,特定朝向可以是面朝上的朝向。共享控制单元240也可以向每一终端设备发布表 示虚拟对象的多个朝向的对象数据,该多个朝向的至少之一只能在被允许显示该虚拟对象 的终端设备100处显示。在一个示例性实施例中,虚拟对象可以是虚拟游戏卡,且多个朝向 可以是面朝上和面朝下的朝向。在这种实施例中,给定终端设备100可能能够显示面朝上朝 向的特定虚拟游戏卡(例如,那些对给定终端设备100的用户“发牌”的虚拟游戏卡),但只能 显示面朝下朝向的其它虚拟游戏卡(例如,那些对给定终端设备100的用户之外的个体“发 牌”的虚拟游戏卡)。
[0096] 例如,无论虚拟对象是否被定位在共享区域中,共享控制单元240都允许特定虚拟 对象在该虚拟对象的拥有者用户的终端设备100处的显示。此外,在特定虚拟对象具有公共 属性的情况下,无论虚拟对象是否被定位在共享区域中,共享控制单元240都允许虚拟对象 在每一终端设备100处的显示。根据“共享标志”的值和虚拟对象的位置确定不具有公共属 性的虚拟对象在该虚拟对象的拥有者用户之外的用户的终端设备100处的显示的允许或拒 绝。
[0097] 例如,当拥有者用户将特定虚拟对象设定为非共享对象时,即使该虚拟对象被定 位在共享区域中,共享控制单元240也拒绝该虚拟对象在拥有者用户之外的用户的终端设 备100处的显示。另一方面,当特定虚拟对象被设定为共享对象时,如果该虚拟对象被定位 在共享区域中,则共享控制单元240允许该虚拟对象在该虚拟对象的拥有者用户之外的用 户的终端设备100处的显示。在这种情况下,允许显示虚拟对象的终端设备100可以是属于 虚拟对象所位于的共享区域的用户组的用户的终端设备100。在虚拟对象被完整地包括在 共享区域中的情况下,共享控制单元240可以确定虚拟对象被定位在共享区域中。可选择 地,在虚拟对象部分地与共享区域交叠的情况下,共享控制单元240可以确定虚拟对象被定 位在共享区域中。
[0098] 此外,共享控制单元240根据在每一终端设备100处检测到的虚拟对象的操作更新 包括在被操作了的虚拟对象的对象数据中的位置和姿态。从而,可以在用户之间容易地共 享虚拟对象,或可以简单地通过用户操作虚拟对象(共享标志为“真”的共享对象)并将虚拟 对象移动到共享区域的内部或外部,来容易地结束该共享。
[0099] 〈4.处理流程的实例〉
[0100] 接下来,将参考图12和图13描述根据本实施例的信息共享系统1处的处理的流程。
[0101] (4-1)概览流程
[0102] 图12是示出直到信息共享系统1中的信息共享开始的过程的流程的实例的序列 图。另外,为了说明简便,这里假设只有两个用户Ua和Ub的终端设备IOOa和IOOb加入信息共 享系统1中。
[0103] 参考图12,首先,终端设备IOOa向信息处理装置200请求共享区域的设定(步骤 S102)。然后,信息处理装置200的共享区域设定单元230设定新的共享区域(步骤S104)。然 后,共享区域设定单元230向终端设备IOOb发送用于为新设定的共享区域邀请用户的信标 (步骤S106)。接收到该信标的终端设备IOOb响应对共享区域的邀请(步骤S108)。这里,假设 终端设备IOOb的用户Ub已经接受了邀请。然后,信息处理装置200的共享区域设定单元230 将用户Ub登记在新共享区域的用户组中(步骤S110)。
[0104] 接下来,终端设备IOOa将在终端设备IOOa处生成的虚拟对象(S卩,拥有者是用户Ua 的虚拟对象)的对象数据发送到信息处理装置200 (步骤S120)。同样地,终端设备IOOb将在 终端设备IOOb处生成的虚拟对象的对象数据发送到信息处理装置200 (步骤S122)。从而将 图6中所例示的对象数据登记(或更新)在信息处理装置200的存储单元220中(步骤S124)。 可以周期性地执行,或者可以以虚拟对象的操作的定时不定期地执行对象数据的这种登记 或更新。
[0105] 接下来,信息处理装置200的共享控制单元240对每一用户执行共享确定处理。例 如,共享控制单元240首先对用户Ua执行共享确定处理(步骤S132),并向终端设备IOOa发布 被允许在终端设备IOOa显示的虚拟对象的对象数据(步骤S134)。接下来,共享控制单元240 对用户Ub执行共享确定处理(步骤S142),并向终端设备IOOb发布被允许在终端设备IOOb处 显示的虚拟对象的对象数据(步骤S144)。
[0106] (4-2)共享确定处理的流程
[0107] 图13是示出由信息处理装置200的共享控制单元240进行的、针对每一用户(下文 中,称为目标用户)的共享确定处理的流程的实例的流程图。针对包括在对象数据212中的 每一虚拟对象执行图13中的步骤S202到S216的处理。
[0108] 首先,共享控制单元240确定目标用户是否是虚拟对象的拥有者(步骤S202)。这 里,在用户是虚拟对象的拥有者的情况下,共享控制单元240允许向目标用户显示虚拟对象 (步骤S216)。另一方面,在目标用户不是虚拟对象的拥有者的情况下,处理进行到步骤 S204。
[0109] 接下来,共享控制单元240确定虚拟对象是否具有公共属性(步骤S204)。这里,在 虚拟对象具有公共属性的情况下,共享控制单元240允许向目标用户显示该虚拟对象(步骤 S216)。另一方面,在虚拟对象不具有公共属性的情况下,处理进行到步骤S206。
[0110] 接下来,共享控制单元240确定虚拟对象的共享是否被使能(步骤S206)。这里,在 虚拟对象的共享不被使能的情况下(即,共享标志是“假”),共享控制单元240拒绝向目标用 户显示该虚拟对象(步骤S214)。另一方面,在虚拟对象的共享被使能的情况下,处理进行到 步骤S208。
[0111] 接下来,共享控制单元240确定虚拟对象是否位于共享区域中(步骤S208)。这里, 在虚拟对象不位于共享区域中的情况下,共享控制单元240拒绝向目标用户显示该虚拟对 象(步骤S214)。另一方面,在虚拟对象位于共享区域中的情况下,处理进行到步骤S212。
[0112] 在步骤S212中,共享控制单元240确定目标用户是否被包括在虚拟对象所位于的 共享区域的用户组中(步骤S212)。这里,在目标用户被包括在用户组中的情况下,共享控制 单元240允许向目标用户显示该虚拟对象(步骤S216)。另一方面,在目标用户不被包括在用 户组中的情况下,共享控制单元240拒绝向目标用户显示该虚拟对象(步骤S214)。
[0113] (4-3)显示位置的计算
[0114] 另外,例如,可以根据诸如下面的公式的针孔模型来执行与信息处理装置200允许 其显示的虚拟对象有关的坐标从由对象数据指示的三维位置到屏幕上的二维显示位置的 转换。
[0115] ACobj=AQ (Xobj-Xc) ··· (1)
[0116] 在公式⑴中,Xobj是指示虚拟对象在全球坐标系或本地坐标系中的三维位置的向 量,X。是指示终端设备100的三维位置的向量,Ω是与终端设备100的姿态相对应的旋转矩 阵,矩阵A是照相机内部参数矩阵,以及λ是用于归一化的参数。此外,Ccibj指示虚拟对象在图 像平面上的二维照相机坐标系(u,v)中的显示位置(见图14)。在虚拟对象的三维位置由距 真实对象的位置Xo的相对位置Vc^给定的情况下,可以用下面的公式计算X+。
[0117] X〇bj=Xo+V〇bj··· (2)
[0118] 根据终端设备100的成像单元102的性质,将照相机内部参数矩阵A预先给出为下 面的公式。
Figure CN102695032BD00131
[0120] 这里,f是焦距,Θ是图像轴的交角(理想值是90度),ku是图像平面的垂直轴的标度 (从真实空间的坐标系到照相机坐标系的标度的改变率),kv是图像平面的水平轴的标度, 且(U。,V。)是图像平面的中心位置。
[0121] 〈5.共享信息和非共享信息的实例〉
[0122] 图15是示出信息共享系统1中的共享信息和非共享信息的实例的说明图。在图15 中,示出了在共享区域SAl内或外布置的多个虚拟对象。另外,这里假设用户Ua、Ub和Uc正参 加信息共享系统1。图中加点的虚拟对象是允许用户Ua观看的对象(S卩,允许显示在终端设 备IOOa处的对象)。另一方面,未加点的虚拟对象是不允许用户Ua观看的对象(S卩,拒绝显示 在终端设备IOOa处的对象)。
[0123] 在图15中所示的虚拟对象中的对象Ob j 11和Ob j 12的拥有者是用户Ua。因此,不管 Ob j 11和Ob j 12的属性如何,它们都可以由用户Ua观看。
[0124] 另一方面,对象0bj21和0bj22的拥有者是用户Ub。对象0bj31、0bj32和0bj33的拥 有者是用户Uc。在这些虚拟对象中,对象Ob j33具有公共属性,因此可以由用户Ua光看。此 夕卜,因为对象0bj21和0bj31的共享标志是“真”,并且它们被定位在共享区域内,所以可以由 用户Ua观看。尽管对象0bj22的共享标志是“真”,其被定位在共享区域之外,因此,用户Ua不 被允许观看对象0bj22。尽管对象0bj32被定位在共享区域内,其共享标志是“假”,因此,用 户Ua不被允许观看对象Ob j32。
[0125] 图16和图17各自是用于描述用于共享图15中非共享信息的场景的说明图。参考图 16,对象Ob j22被用户Ub从共享区域外部移动到内部。于是,使得用户Ua能够观看对象 0bj22。此外,参考图17,对象0bj32的共享标志被用户Uc从“假”改为“真”。于是,使得用户Ua 能够观看对象0bj32。相反,在虚拟对象被从共享区域内部移动到外部的情况下,或在虚拟 对象的共享标志被改为“假”的情况下,先前被共享的虚拟对象不再被共享。
[0126] 〈6.变型例〉
[0127] 在上述实施例中,描述了信息处理装置200被配置为与用户持有或佩戴的终端设 备100分离的设备的实例。然而,如果任何终端设备具有信息处理装置200的服务器功能(主 要是共享区域设定单元230和共享控制单元240的功能),则信息处理装置200可以从信息共 享系统的配置中省略。图18示出根据这种变型例的信息共享系统2的概览。参考图18,信息 共享系统2包括由用户Ua佩戴的终端设备300a和由用户Ub佩戴的终端设备100b。除了上述 终端设备100的功能之外,终端设备300a包括与信息处理装置200相关联描述的服务器功 能。另一方面,终端设备IOOb包括上述终端设备100的功能。此外,利用这种信息共享系统2, 如利用信息共享系统1,使得用户能够容易地处理期望与AR空间中的其它用户共享的信息 以及不期望共享的信息。
[0128] 〈7.总结〉
[0129] 在上文中,参考图IA到图18说明了本公开的实施例(以及其变型例)。根据上述实 施例,依据虚拟对象是否定位在虚拟地设定在真实空间中的共享区域中而允许或拒绝每一 虚拟对象在终端设备处的用于增强现实的显示。因此,用户可以通过执行将指示信息的虚 拟对象简单地移动到共享区域内部的操作共享期望与另一用户共享的信息。这时,不必要 进行诸如切换AR空间的层的复杂操作。
[0130] 根据实施例,提供一种用于共享虚拟对象的装置,包括:通信单元,配置为接收指 示虚拟对象相对于真实空间的位置的位置数据;以及共享控制单元,配置为:将虚拟对象的 位置与相对于真实空间限定的共享区域相比较;以及基于比较的结果选择性地允许用显示 设备显示虚拟对象。
[0131] 根据另一实施例,提供一种共享虚拟对象的方法,包括:接收指示虚拟对象相对于 真实空间的位置的位置数据;将虚拟对象的位置与相对于真实空间限定的共享区域相比 较;以及基于比较的结果选择性地允许用显示设备显示虚拟对象。
[0132] 根据另一实施例,提供一种非易失性、计算机可读存储介质,其存储程序,当由处 理器执行程序时,使装置执行共享虚拟对象的方法,方法包括:接收指示虚拟对象相对于真 实空间的位置的位置数据;将虚拟对象的位置与相对于真实空间限定的共享区域相比较; 以及基于比较的结果选择性地允许用显示设备显示虚拟对象。
[0133] 根据另一实施例,提供一种用于共享虚拟对象的装置,包括:存储程序的存储介 质;以及处理器,配置为执行程序,以使装置执行共享虚拟对象的方法,方法包括:接收指示 虚拟对象相对于真实空间的位置的位置数据;将虚拟对象的位置与相对于真实空间限定的 共享区域相比较;以及基于比较的结果,选择性地允许用显示设备显示虚拟对象。
[0134] 根据另一实施例,一种用于共享虚拟对象的设备,包括:通信装置,用于接收指示 虚拟对象相对于真实空间的位置的位置数据;以及共享装置,用于:将虚拟对象的位置与相 对于真实空间限定的共享区域相比较;以及基于比较的结果,选择性地允许用显示设备显 示虚拟对象。
[0135] 此外,根据实施例,无论虚拟对象是否被定位在共享区域中,都允许特定虚拟对象 在该虚拟对象的拥有者用户的终端处的显示。因此,用户可以自由地布置其已经在共享区 域内或外生成的信息。
[0136] 此外,根据实施例,在特定虚拟对象具有公共属性的情况下,无论虚拟对象是否被 定位在虚拟区域中,都允许虚拟对象在终端设备处的显示。因此,关于信息的特定类型,通 过预先将公共属性附到该信息,可以在不对共享施加限制的情况下使得该信息由多个用户 自由地观看。
[0137] 此外,根据实施例,如果特定虚拟对象被设定为非共享对象,则即使该虚拟对象被 定位在共享区域中,也拒绝该虚拟对象在该虚拟对象的拥有者用户之外的用户的终端设备 处的显示。因此,使得用户能够在不允许其它用户观看其生成的信息中不期望与其它用户 共享的信息的同时,将该信息布置在共享区域中。
[0138] 此外,根据实施例,定位在每一共享区域中的虚拟对象被允许向属于该共享区域 的用户组的用户的终端设备显示。因此,例如,可以防止恰巧路过共享区域的用户无条件地 观看ig息。
[0139] 此外,根据实施例,共享区域可以被设定为与真实空间中的特定真实对象相关联 的位置。即,真实空间中的诸如桌子、白板、PC屏幕、墙壁或地板的真实对象可以被视为用于 使用增加现实的信息共享的空间。在这种情况下,使得用户能够更直观地识别共享区域的 范围。
[0140] 另外,在本说明书中,主要以由多个用户参加的会议的信息共享为例说明了本公 开的实施例。然而,本说明书中描述的技术可以应用于各种其它用途。例如,本技术可以被 应用到物理公告板,且代替将纸别在公告板上,可以将共享区域设定在公告板上,且可以将 指示要共享的信息的虚拟对象布置在共享区域上。此外,本技术可以应用于卡片游戏,且指 示要对其它用户显露的卡片的虚拟对象可以被移动到共享区域的内部。
[0141] 此外,可以通过使用软件、硬件以及软件和硬件的结合中的任一个来实现在本说 明书中描述的每一设备进行的一系列控制处理。例如,构造软件的程序被预先存储在设置 在每一设备之内或之外的存储介质(即,非易失性、计算机可读存储介质)中。例如,在执行 时将每一程序加载到RAM(随机存取存储器)中,并利用诸如CPU (中央处理单元)的处理器来 执行。
[0142] 本领域技术人员应该理解:可能基于设计要求和其它因素发生各种变型、组合、子 组合和改变,只要它们在所附权利要求书或其等同物的范围内。例如,本技术可以采用下面 的配置。
[0143] (1) 一种信息处理装置,包括:
[0144] 存储单元,用于存储指示叠加在真实空间上并显示在至少一个终端设备的屏幕上 的至少一个虚拟对象的位置的位置数据;
[0145] 共享区域设定单元,用于在真实空间中设定至少一个虚拟共享区域;以及
[0146] 控制单元,用于依据每一虚拟对象是否被定位在至少一个共享区域中,允许或拒 绝每一虚拟对象在至少一个终端设备处的显示。
[0147] (2)根据⑴所述的信息处理装置,
[0148] 其中,无论特定虚拟对象是否被定位在至少一个共享区域中,控制单元都允许特 定虚拟对象在该特定虚拟对象的拥有者用户的终端设备处的显示。
[0149] ⑶根据⑴或⑵所述的信息处理装置,
[0150] 其中,在特定虚拟对象具有公共属性的情况下,无论特定虚拟对象是否被定位在 至少一个共享区域中,控制单元都允许特定虚拟对象在每一终端设备处的显示。
[0151] ⑷根据⑴到⑶中任一项所述的信息处理装置,
[0152] 其中,当特定虚拟对象的拥有者用户将该特定对象设定为非共享对象时,即使该 特定虚拟对象被定位在至少一个共享区域中,控制单元也拒绝特定虚拟对象在该特定虚拟 对象的拥有者用户之外的用户的终端设备处的显示。
[0153] ⑶根据⑴到⑷中任一项所述的信息处理装置,
[0154] 其中,共享区域设定单元为至少一个共享区域的每一个设定用户组,以及
[0155] 其中,控制单元允许属于每一共享区域的用户组的用户的终端设备显示定位在共 享区域中的虚拟对象。
[0156] ⑶根据⑴到⑶中任一项所述的信息处理装置,
[0157] 其中,该至少一个共享区域被设定在与真实空间中的特定真实对象相关联的位 置。
[0158] ⑵根据⑴到⑶中任何一项所述的信息处理装置,
[0159] 其中,控制单元根据在每一终端设备处检测到的对虚拟对象的操作,更新已经操 作的虚拟对象的位置数据。
[0160] ⑶根据⑴到⑵中任一项所述的信息处理装置,
[0161] 其中,该信息处理装置是多个终端设备之一。
[0162] (9) 一种由信息处理装置执行的信息共享方法,该信息处理装置在存储介质中存 储指示叠加在真实空间上且显示在终端设备屏幕上的至少一个虚拟对象的位置的位置数 据,该方法包括:
[0163] 在真实空间中设定虚拟共享区域;以及
[0164] 依据每一虚拟对象是否被定位在共享区域中来允许或拒绝每一虚拟对象在终端 设备处的显示。
[0165] (10) —种程序,用于使用于控制信息处理装置的计算机作为如下单元操作,其中, 信息处理装置在存储介质中存储指示叠加在真实空间上且显示在终端设备屏幕上的至少 一个虚拟对象的位置的位置数据:
[0166] 共享区域设定单元,用于在真实空间中设定虚拟共享区域;以及
[0167] 控制单元,用于依据每一虚拟对象是否被定位在共享区域中来允许或拒绝每一虚 拟对象在终端设备处的显示。
[0168] (11) 一种终端设备,包括:
[0169] 对象控制单元,用于从存储指示至少一个虚拟对象的位置的位置数据的信息处理 装置中获取虚拟对象,根据设定在真实空间中的虚拟共享区域和虚拟对象之间的位置关系 允许所获取虚拟对象的显示;以及
[0170] 显示单元,用于将由对象控制单元获取的虚拟对象叠加在真实空间上,并显示该 虚拟对象。
[0171] (12)根据(11)所述的终端设备,
[0172] 其中,显示单元还显示用于允许用户察觉共享区域的辅助对象。
[0173] (13)根据(11)或(12)所述的终端设备,
[0174] 其中,对象控制单元使由显示单元显示的虚拟对象根据用户输入进行移动。
[0175] (14)根据(11)到(13)中任一项所述的终端设备,还包括:
[0176] 通信单元,用于将已经根据用户输入移动了的虚拟对象的新位置发送到信息处理 装置。

Claims (18)

1. 一种用于共享虚拟对象的装置,包括: 通信单元,配置为充当所述装置与终端设备之间的通信连接接口媒介的通信接口,以接收指示虚拟对象相对于真实空间的位置的位置数据;以及 共享控制单元,配置为: 将所述虚拟对象的位置与相对于所述真实空间限定的共享区域相比较以确定所述虚拟对象的位置是否在所述共享区域内;以及 基于所述比较的结果、所述虚拟对象的拥有者、所述虚拟对象的公共标志以及所述虚拟对象的共享标志选择性地允许用显示设备显示所述虚拟对象以允许用户处理期望与增强现实空间中的其它用户共享的信息,以及不期望共享的信息,其中,所述虚拟对象的共享标志能够由所述虚拟对象的拥有者编辑。
2. 根据权利要求1所述的装置,其中,所述共享控制单元被配置为通过选择性地将表示所述虚拟对象的对象数据发布到远程设备,选择性地允许所述虚拟对象的显示。
3. 根据权利要求2所述的装置,其中,所述共享控制单元被配置为通过选择性地发布表示所述虚拟对象的特定朝向的对象数据,选择性地允许所述虚拟对象的显示。
4. 根据权利要求3所述的装置,其中,所述共享控制单元被配置为通过选择性地发布表示所述虚拟对象的面朝上朝向的对象数据,选择性地允许所述虚拟对象的显示。
5. 根据权利要求1所述的装置,其中,所述共享控制单元被配置为发布表示所述虚拟对象的多个朝向的对象数据,所述多个朝向中至少之一只能由被允许显示所述虚拟对象的显示设备显示。
6. 根据权利要求1所述的装置,包括共享区域限定单元,所述共享区域限定单元被配置为限定所述共享区域相对于所述真实空间中的真实对象的位置。
7. 根据权利要求6所述的装置,其中,所述共享区域限定单元被配置为存储与至少一个用户相关联的共享区域数据。
8. 根据权利要求1所述的装置,其中,所述共享控制单元被配置为存储指示所述虚拟对象的位置的对象数据。
9. 根据权利要求8所述的装置,其中,所述共享控制单元被配置为: 存储所述虚拟对象的公共标志作为指示所述虚拟对象是公共虚拟对象还是私有虚拟对象的对象数据;以及 当所述虚拟对象是公共虚拟对象时,允许所述显示设备显示在所述共享区域之外的所述虚拟对象,其中,所述显示设备的使用者不是所述虚拟对象的拥有者。
10. 根据权利要求8所述的装置,其中,所述共享控制单元被配置为: 存储指示所述虚拟对象的拥有者的对象数据;以及 允许所述拥有者所使用的显示设备显示所述虚拟对象。
11. 根据权利要求10所述的装置,其中,所述共享控制单元被配置为: 存储所述虚拟对象的公共标志作为指示所述虚拟对象是公共虚拟对象还是私有虚拟对象的对象数据; 存储所述虚拟对象的共享标志作为指示所述虚拟对象是否为可共享虚拟对象的对象数据;以及 当所述虚拟对象是私有虚拟对象且不可共享时,拒绝除所述拥有者所使用的显示设备 之外的显示设备显示所述虚拟对象。
12. 根据权利要求11所述的装置,其中,所述共享控制单元被配置为:当所述虚拟对象是私有的、可共享的并且位于所述共享区域内时,允许除所述拥有者所使用的显示设备之外的显示设备显示所述虚拟对象。
13. 根据权利要求11所述的装置,其中,所述共享控制单元被配置为:当所述虚拟对象是私有的、可共享的并且未位于所述共享区域内时,拒绝除所述拥有者所使用的显示设备之外的显示设备显示所述虚拟对象。
14. 根据权利要求1所述的装置,其中,所述共享控制单元被配置为将所述虚拟对象的位置与相对于所述真实空间限定的圆形共享区域相比较。
15. 根据权利要求1所述的装置,其中,所述共享控制单元被配置为将所述虚拟对象的位置与相对于所述真实空间限定的矩形共享区域相比较。
16. —种共享虚拟对象的方法,包括: 接收指示虚拟对象相对于真实空间的位置的位置数据; 将所述虚拟对象的位置与相对于所述真实空间限定的共享区域相比较以确定所述虚拟对象的位置是否在所述共享区域内;以及 基于所述比较的结果、所述虚拟对象的拥有者、所述虚拟对象的公共标志以及所述虚拟对象的共享标志选择性地允许用显示设备显示所述虚拟对象以允许用户处理期望与增强现实空间中的其它用户共享的信息,以及不期望共享的信息,其中,所述虚拟对象的共享标志能够由所述虚拟对象的拥有者编辑。
17. —种用于共享虚拟对象的装置,包括: 存储程序的存储介质;以及 处理器,配置为执行程序,以使所述装置执行共享虚拟对象的方法,所述方法包括: 接收指示虚拟对象相对于真实空间的位置的位置数据; 将所述虚拟对象的位置与相对于所述真实空间限定的共享区域相比较以确定所述虚拟对象的位置是否在所述共享区域内;以及 基于所述比较的结果、所述虚拟对象的拥有者、所述虚拟对象的公共标志以及所述虚拟对象的共享标志选择性地允许用显示设备显示所述虚拟对象以允许用户处理期望与增强现实空间中的其它用户共享的信息,以及不期望共享的信息,其中,所述虚拟对象的共享标志能够由所述虚拟对象的拥有者编辑。
18. —种用于共享虚拟对象的设备,包括: 通信装置,用于充当作为所述设备与终端设备之间的通信连接接口媒介的通信接口,以接收指示虚拟对象相对于真实空间的位置的位置数据;以及 共享装置,用于: 将所述虚拟对象的位置与相对于所述真实空间限定的共享区域相比较以确定所述虚拟对象的位置是否在所述共享区域内;以及 基于所述比较的结果、所述虚拟对象的拥有者、所述虚拟对象的公共标志以及所述虚拟对象的共享标志选择性地允许用显示设备显示所述虚拟对象以允许用户处理期望与增强现实空间中的其它用户共享的信息,以及不期望共享的信息,其中,所述虚拟对象的共享标志能够由所述虚拟对象的拥有者编辑。
CN201210023940.3A 2011-02-10 2012-02-03 信息处理装置、信息共享方法以及终端设备 Active CN102695032B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2011027654A JP5776201B2 (ja) 2011-02-10 2011-02-10 情報処理装置、情報共有方法、プログラム及び端末装置
JP2011-027654 2011-02-10

Publications (2)

Publication Number Publication Date
CN102695032A CN102695032A (zh) 2012-09-26
CN102695032B true CN102695032B (zh) 2017-06-09

Family

ID=46637877

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210023940.3A Active CN102695032B (zh) 2011-02-10 2012-02-03 信息处理装置、信息共享方法以及终端设备

Country Status (3)

Country Link
US (1) US20120210254A1 (zh)
JP (1) JP5776201B2 (zh)
CN (1) CN102695032B (zh)

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9594767B2 (en) 2012-03-19 2017-03-14 David W. Victor Providing access to documents of friends in an online document sharing community based on whether the friends' documents are public or private
US9355384B2 (en) 2012-03-19 2016-05-31 David W. Victor Providing access to documents requiring a non-disclosure agreement (NDA) in an online document sharing community
US9875239B2 (en) 2012-03-19 2018-01-23 David W. Victor Providing different access to documents in an online document sharing community depending on whether the document is public or private
US9280794B2 (en) 2012-03-19 2016-03-08 David W. Victor Providing access to documents in an online document sharing community
JP5731998B2 (ja) * 2012-03-21 2015-06-10 株式会社東芝 対話支援装置、対話支援方法および対話支援プログラム
US20140085316A1 (en) * 2012-09-25 2014-03-27 Avaya Inc. Follow me notification and widgets
US9323412B2 (en) * 2012-10-26 2016-04-26 Cellco Partnership Briefing tool having self-guided discovery and suggestion box features
US9330431B2 (en) * 2012-12-19 2016-05-03 Jeffrey Huang System and method for synchronizing, merging, and utilizing multiple data sets for augmented reality application
EP2953098B1 (en) * 2013-02-01 2019-03-13 Sony Corporation Information processing device, terminal device, information processing method, and programme
US20140285519A1 (en) * 2013-03-22 2014-09-25 Nokia Corporation Method and apparatus for providing local synchronization of information for augmented reality objects
JP6160154B2 (ja) * 2013-03-22 2017-07-12 セイコーエプソン株式会社 頭部装着型表示装置を利用した情報表示システム、頭部装着型表示装置を利用した情報表示方法、および、頭部装着型表示装置
US10955665B2 (en) * 2013-06-18 2021-03-23 Microsoft Technology Licensing, Llc Concurrent optimal viewing of virtual objects
JP6337907B2 (ja) * 2013-11-13 2018-06-06 ソニー株式会社 表示制御装置、表示制御方法およびプログラム
JP2015192436A (ja) * 2014-03-28 2015-11-02 キヤノン株式会社 送信端末、受信端末、送受信システム、およびそのプログラム
JP6308842B2 (ja) * 2014-03-31 2018-04-11 株式会社日本総合研究所 表示システム及びプログラム
WO2015163913A1 (en) * 2014-04-25 2015-10-29 Nokia Technologies Oy Interaction between virtual reality entities and real entities
CN104093061B (zh) * 2014-07-18 2020-06-02 北京智谷睿拓技术服务有限公司 内容分享方法和装置
US10943111B2 (en) 2014-09-29 2021-03-09 Sony Interactive Entertainment Inc. Method and apparatus for recognition and matching of objects depicted in images
CN104580176B (zh) * 2014-12-26 2018-09-21 深圳市海蕴新能源有限公司 设备共享方法及系统
GB201503113D0 (en) * 2015-02-25 2015-04-08 Bae Systems Plc A mixed reality system adn method for displaying data therein
JP6540108B2 (ja) * 2015-03-09 2019-07-10 富士通株式会社 画像生成方法、システム、装置、及び端末
EP3128413A1 (en) 2015-08-04 2017-02-08 Nokia Technologies Oy Sharing mediated reality content
US9928656B2 (en) 2015-09-11 2018-03-27 Futurewei Technologies, Inc. Markerless multi-user, multi-object augmented reality on mobile devices
CN105407448A (zh) * 2015-10-16 2016-03-16 晶赞广告(上海)有限公司 多屏共用方法及装置
US10095266B2 (en) * 2016-01-28 2018-10-09 Colopl, Inc. System and method for interfacing between a display and a controller
US10373381B2 (en) * 2016-03-30 2019-08-06 Microsoft Technology Licensing, Llc Virtual object manipulation within physical environment
US10843073B2 (en) 2016-06-28 2020-11-24 Rec Room Inc. Systems and method for managing permission for interacting with virtual objects based on virtual proximity
CN110520820A (zh) * 2017-06-06 2019-11-29 麦克赛尔株式会社 混合现实显示系统和混合现实显示终端
CN108769517B (zh) * 2018-05-29 2021-04-16 亮风台(上海)信息科技有限公司 一种基于增强现实进行远程辅助的方法与设备
EP3617846A1 (en) * 2018-08-28 2020-03-04 Nokia Technologies Oy Control method and control apparatus for an altered reality application
CN109660667A (zh) * 2018-12-25 2019-04-19 杭州达现科技有限公司 一种基于相同显示界面的资源共享方法和装置
US10983662B2 (en) 2019-04-01 2021-04-20 Wormhole Labs, Inc. Distally shared, augmented reality space
CN110703966A (zh) * 2019-10-17 2020-01-17 广州视源电子科技股份有限公司 文件共享方法、装置、系统、相应设备及存储介质

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5107443A (en) * 1988-09-07 1992-04-21 Xerox Corporation Private regions within a shared workspace
JP3494451B2 (ja) * 1993-05-27 2004-02-09 株式会社日立製作所 会議画面表示制御方法および電子会議システム
US6313853B1 (en) * 1998-04-16 2001-11-06 Nortel Networks Limited Multi-service user interface
JP4631987B2 (ja) * 1998-10-19 2011-02-23 ソニー株式会社 情報処理端末、情報処理システム及び情報処理方法
JP2004265193A (ja) * 2003-03-03 2004-09-24 Canon Inc 情報処理方法、情報処理装置、サーバ装置の制御方法、サーバ装置
JP2004348440A (ja) * 2003-05-22 2004-12-09 Ricoh Co Ltd 入力装置、携帯型情報機器及び電子会議システム
JP4268093B2 (ja) * 2004-06-04 2009-05-27 株式会社日立製作所 会議遷移制御方法、会議遷移制御サーバおよび会議遷移制御プログラム
JP4738870B2 (ja) * 2005-04-08 2011-08-03 キヤノン株式会社 情報処理方法、情報処理装置および遠隔複合現実感共有装置
US9626667B2 (en) * 2005-10-18 2017-04-18 Intertrust Technologies Corporation Digital rights management engine systems and methods
US8125510B2 (en) * 2007-01-30 2012-02-28 Ankur Agarwal Remote workspace sharing
JP2011504710A (ja) * 2007-11-21 2011-02-10 ジェスチャー テック,インコーポレイテッド メディア嗜好
KR100963238B1 (ko) * 2008-02-12 2010-06-10 광주과학기술원 개인화 및 협업을 위한 테이블탑-모바일 증강현실 시스템과증강현실을 이용한 상호작용방법
JP2009237863A (ja) * 2008-03-27 2009-10-15 Nomura Research Institute Ltd 電子ファイル管理装置および仮想店舗管理装置
US8191001B2 (en) * 2008-04-05 2012-05-29 Social Communications Company Shared virtual area communication environment based apparatus and methods
US9586149B2 (en) * 2008-11-05 2017-03-07 International Business Machines Corporation Collaborative virtual business objects social sharing in a virtual world
JP2010171664A (ja) * 2009-01-21 2010-08-05 Sony Ericsson Mobilecommunications Japan Inc 携帯情報端末、情報表示制御方法、及び、情報表示制御プログラム
JP2010217719A (ja) * 2009-03-18 2010-09-30 Ricoh Co Ltd 装着型表示装置、その制御方法及びプログラム

Also Published As

Publication number Publication date
JP2012168646A (ja) 2012-09-06
US20120210254A1 (en) 2012-08-16
CN102695032A (zh) 2012-09-26
JP5776201B2 (ja) 2015-09-09

Similar Documents

Publication Publication Date Title
US9761057B2 (en) Indicating out-of-view augmented reality images
US20180018792A1 (en) Method and system for representing and interacting with augmented reality content
US10007349B2 (en) Multiple sensor gesture recognition
CN106255943B (zh) 身体锁定增强现实与世界锁定增强现实之间的转换
Arth et al. The history of mobile augmented reality
CN104748746B (zh) 智能机姿态测定及虚拟现实漫游方法
KR102233052B1 (ko) 혼합 현실의 등급을 매긴 정보 전달
US9940720B2 (en) Camera and sensor augmented reality techniques
CN105493155B (zh) 用于表示物理场景的方法和设备
JP2020509633A (ja) 複合現実システムのための位置特定の決定
EP3050030B1 (en) Method for representing points of interest in a view of a real environment on a mobile device and mobile device therefor
US8880606B2 (en) Multi-modal, geo-tempo communications systems
CN105339987B (zh) 针对陆地、空中和/或众包可视化的流形的图像提取和基于图像的渲染
EP2786353B1 (en) Methods and systems for capturing and moving 3d models and true-scale metadata of real world objects
US20190272139A1 (en) Private virtual object handling
EP2506222B1 (en) Augmented reality apparatus, method and program
US9699375B2 (en) Method and apparatus for determining camera location information and/or camera pose information according to a global coordinate system
US8963805B2 (en) Executable virtual objects associated with real objects
JP6602889B2 (ja) 移動体装置ローカリゼーションのためのエリア記述ファイルのクラウドソーシングによる作成および更新
KR20160062294A (ko) 지도 서비스를 제공하는 전자 장치 및 방법
CN104871214B (zh) 用于具扩增实境能力的装置的用户接口
US10311633B2 (en) Method and apparatus for visualization of geo-located media contents in 3D rendering applications
Zhou et al. Trends in augmented reality tracking, interaction and display: A review of ten years of ISMAR
EP2583254B1 (en) Mobile device based content mapping for augmented reality environment
CN102598064B (zh) 用于在真实环境的视图中描绘虚拟信息的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant