CN111373450A - 利用多设备协作确定和投影全息对象路径和对象移动 - Google Patents

利用多设备协作确定和投影全息对象路径和对象移动 Download PDF

Info

Publication number
CN111373450A
CN111373450A CN201880074703.5A CN201880074703A CN111373450A CN 111373450 A CN111373450 A CN 111373450A CN 201880074703 A CN201880074703 A CN 201880074703A CN 111373450 A CN111373450 A CN 111373450A
Authority
CN
China
Prior art keywords
holographic
projection mobile
holographic projection
mobile device
mobile devices
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201880074703.5A
Other languages
English (en)
Other versions
CN111373450B (zh
Inventor
S·拉克西特
M·肯
J·博斯蒂克
J·小甘西
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
International Business Machines Corp
Original Assignee
International Business Machines Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by International Business Machines Corp filed Critical International Business Machines Corp
Publication of CN111373450A publication Critical patent/CN111373450A/zh
Application granted granted Critical
Publication of CN111373450B publication Critical patent/CN111373450B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/26Processes or apparatus specially adapted to produce multiple sub- holograms or to obtain images from them, e.g. multicolour technique
    • G03H1/268Holographic stereogram
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/0005Adaptation of holography to specific applications
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2294Addressing the hologram to an active spatial light modulator
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/0005Adaptation of holography to specific applications
    • G03H2001/0088Adaptation of holography to specific applications for video-holography, i.e. integrating hologram acquisition, transmission and display
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2225/00Active addressable light modulator
    • G03H2225/60Multiple SLMs
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2226/00Electro-optic or electronic components relating to digital holography
    • G03H2226/02Computing or processing means, e.g. digital signal processor [DSP]

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Architecture (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Holo Graphy (AREA)

Abstract

本文描述的实施例提供了用于提供全息投影的解决方案。标识物理区域内的多个全息投影移动设备。确定可使用所标识的全息投影移动设备投影的全息对象路径的集合。从该全息对象路径的集合中选择全息对象路径。由所述多个全息投影移动设备投影根据所述全息对象路径移动的全息对象。

Description

利用多设备协作确定和投影全息对象路径和对象移动
技术领域
本发明总体上涉及全息视觉图像投影。更具体地,本发明涉及使用多个投影设备协作来提供具有对象路径的全息投影。
背景技术
过去,显示视频图像的最常见方式是将图像投影到平面屏幕上,该平面屏幕以二维(2-D)示出图像。近年来,已经开发了模拟三维(3-D)图像的方法。这些方法中的一者包含用户佩戴立体眼镜以允许用户的眼睛中的每一者看到对象的表示的不同视角。理论上,用户的想法组合来自每只眼睛的图像,从而为用户创建3-D深度的外观。然而,由立体眼镜产生的3D效果不能提供精确的深度提示或运动视差。换言之,用户不可能移动他/她的头部并从不同角度观察对象的表示。
相反,全息图可产生更逼真的3D图像。全息图可允许用户从不同角度和位置看到3-D对象的表示的不同视角。全息图可进一步向用户提供关于所表示的对象的大小、形状和颜色的信息。这些全息图通常使用激光器创建,所述激光器可以产生重新创建3D对象所需的复杂光干涉图案,包括空间数据。
全息投影的最新进步已经允许该技术被包括在移动设备中。这些进展可以允许移动设备的用户使用移动设备在空中创建三维视频对象。
发明内容
通常,本文描述的实施例提供了用于提供全息投影的解决方案。标识物理区域内的多个全息投影移动设备。确定可使用所标识的全息投影移动设备来投影的全息对象路径的集合。从该全息对象路径的集合中选择全息对象路径。由所述多个全息投影移动设备投影根据所述全息对象路径移动的全息对象。
本发明的一个方面包括一种用于提供全息投影的方法。该方法包括标识物理区域内的多个全息投影移动设备和确定可使用所述多个全息投影移动设备投影的全息对象路径的集合。所述方法还包括从所述全息对象路径的集合中选择全息对象路径,以及由所述多个全息投影移动设备投影根据所述全息对象路径移动的全息对象。
所述方法可以可选地进一步包括确定所述区域内的所述多个全息投影移动设备中的每一者对应的位置的集合,其中,基于所述位置的集合确定所述全息对象路径的集合。该方法提供了若干优点,包括但不限于允许选择可由全息投影移动设备在其当前所定位时显示的对象路径。
所述方法可以可选地进一步包括确定所述区域内的所述多个全息投影移动设备中的每一者对应的投影范围的集合,其中,基于所述投影范围的集合来确定所述全息对象路径的集合。该方法提供了若干优点,诸如但不限于,允许选择考虑与其相关联的投影范围的全息投影移动设备可以显示的对象路径。
所述方法可以可选地进一步包括:将所述多个全息投影移动设备中的一个全息投影移动设备指定为控制设备节点,并且将未指定的投影移动设备指定为次级设备节点;所述控制设备节点控制所述次级设备节点以执行投影。该方法提供若干优点,诸如但不限于,允许指定对其他全息投影移动设备执行控制的单个全息投影设备来执行投影。
该方法可以可选地进一步包括通过多个全息投影移动设备中的第一全息投影移动设备来投影沿着与第一全息投影移动设备相关联的全息对象路径的第一区段移动的全息对象。该方法进一步包括计算全息对象路径的第一区段和与多个全息投影移动设备中的第二全息投影移动设备相关联的全息对象路径的第二区段之间的过渡点。进一步,该方法包括响应于全息对象到达过渡点而停止通过第一全息投影移动设备投影全息对象,并且响应于全息对象到达过渡点而开始通过第二全息投影移动设备投影全息对象。该方法提供若干优点,诸如但不限于,允许全息对象在其从一个设备的投影范围跨越到另一个设备时继续投影。
所述方法可以可选地进一步包括检测所述区域内的所述多个全息投影移动设备中的重定位的全息投影移动设备的重定位。该方法还包括检测附加的全息投影移动设备到该区域内的多个全息投影移动设备的添加。该方法还包括:检测所述区域内移除的全息投影移动设备从所述多个全息投影移动设备的移除。该方法进一步包括基于对重定位、添加或移除中任一者的检测来修改可以由多个全息投影移动设备投影的全息对象路径的集合。该方法提供若干优点,诸如但不限于响应于全息投影移动设备的添加、移除或重新定位来动态地调整可能的全息对象路径。
该方法可以可选地进一步包括确定被配置为启用新的全息对象路径的新位置的集合。进一步,该方法包括基于所述确定转发全息投影移动设备的新位置的建议。该方法提供若干优点,诸如但不限于,确定和提供关于将实现新的全息对象路径的全息投影移动设备的改进的定位的建议。
本发明的另一方面包括一种用于提供全息投影的计算机系统,该计算机系统包括:全息投影移动设备;由所述全息投影移动设备控制的全息投影仪;全息投影移动设备中的包括程序指令的存储介质;全息投影移动设备中的总线,其耦合到所述存储介质;以及耦合到所述全息投影移动设备中的所述总线的处理器,所述处理器执行所述程序指令,使得所述系统:标识物理区域内的多个全息投影移动设备;确定可使用所述多个全息投影移动设备投影的全息对象路径的集合;从所述全息对象路径集合中选择全息对象路径;以及由所述多个全息投影移动设备投影根据所述全息对象路径移动的全息对象。
本发明的又一方面包括一种用于提供全息投影的计算机程序产品,所述计算机程序产品包括计算机可读存储设备,以及存储在所述计算机可读存储设备上的程序指令,以:标识物理区域内的多个全息投影移动设备;确定可使用所述多个全息投影移动设备投影的全息对象路径的集合;从所述全息对象路径集合中选择全息对象路径;以及由所述多个全息投影移动设备投影根据所述全息对象路径移动的全息对象。
附图说明
从下面结合附图对本发明的各个方面的详细描述,将更容易理解本发明的这些和其他特征,其中:
图1示出了根据本发明的实施例可实现本发明的架构;
图2示出了根据本发明的实施例的系统图;
图3示出了根据本发明的实施例的示例全息投影移动设备的前视图和后视图;
图4示出了根据本发明的实施例的示例多项式曲线的图形;
图5示出了根据本发明的实施例的示例场景;
图6示出了根据本发明的实施例的示例更新场景;
图7示出了根据本发明的实施例的示例全息投影;
图8示出了根据本发明的实施例的示例处理流程图。
附图不一定是按比例的。附图仅是表示,并非旨在描述本发明的特定参数。这些附图旨在仅描绘本发明的典型实施例,并且因此不应当被认为是对范围的限制。在附图中,相同的标号表示相同的元件。
具体实施方式
现在将参考附图在本文中更全面地描述说明性实施例,在附图中示出了说明性实施例。应当理解,本公开可以以许多不同的形式体现,并且不应被解释为限于本文所阐述的说明性实施例。相反,提供这些实施例使得本公开将是彻底和完整的,并且将本公开的范围完全传达给本领域技术人员。
此外,在此使用的术语仅用于描述具体实施例的目的并且不旨在限制本披露。如在此使用的,单数形式“一个/一种(a/an)”和“该(the)”旨在也包括复数形式,除非上下文另外清楚地指示。此外,术语“一个/一种(a/an)”等的使用不表示对量的限制,而是表示存在所提及的项目中的至少一个。此外,在不同图中的类似元件可以被分配类似的元件编号。将进一步理解的是,当在本说明书中使用术语“包括”和/或“包含”等时,或“包括”和/或“包含”等指定所陈述的特征、区域、整数、步骤、操作、元件和/或组件的存在,但不排除一个或多个其他特征、区域、整数、步骤、操作、元件、组件和/或其组的存在或添加。
除非另有明确规定,否则可以认识到诸如“处理”、“检测”、“确定”、“评估”、“接收”等术语是指计算机或计算系统或类似电子数据中心设备的动作和/或过程,这些动作和/或过程将表示为计算系统的寄存器和/或存储器内的物理量(例如,电子)的数据操纵和/或转换为类似地表示为计算系统的存储器、寄存器或其他此类信息存储、传输或查看设备内的物理量的其他数据。实施例不限于该上下文。
如上所述,本文描述的实施例提供了用于提供全息投影的解决方案。标识物理区域内的多个全息投影移动设备。确定可使用所标识的全息投影移动设备投影的全息对象路径集合。从全息对象路径集合中选择全息对象路径。全息对象被多个全息投影移动设备根据全息对象路径投影移动。
现在参考图1,将根据实施例示出并描述用于提供全息投影的计算机化实现方式10。计算机化实现方式10仅是合适实现方式的一个示例,并且不旨在对在此描述的本发明的实施例的使用或功能的范围提出任何限制。无论如何,计算机化实现10能够实现和/或执行上文阐述的功能中的任何一个。
在计算机化实现方式10中,存在与许多其他通用或专用计算系统环境或配置一起操作的计算机系统12。可以适合于与计算机系统12一起使用的众所周知的计算系统、环境和/或配置的示例包括但不限于个人计算机系统、服务器计算机系统、瘦客户机、厚客户机、手持式或膝上型设备、多处理器系统、基于微处理器的系统、机顶盒、可编程消费电子产品、网络PC、小型计算机系统、大型计算机系统和包括以上系统或设备中的任一个的分布式云计算环境等。
这旨在证明,除了别的以外,本发明可以在网络环境(例如,因特网、广域网(WAN)、局域网(LAN)、虚拟专用网(VPN)等)、云计算环境、蜂窝网络或独立计算机系统中实现。遍及网络的通信可以经由不同类型的通信链路的任何组合发生。例如,通信链路可包括可利用有线和/或无线传输方法的任何组合的可寻址连接。在经由互联网进行通信的情况下,连接性可以由常规的基于TCP/IP套接字的协议来提供,并且互联网服务提供商可以用于建立与互联网的连接。再者,计算机系统12旨在证明实现方式10的一些或所有组件可以由服务提供商部署、管理、服务等,该服务提供商为其他人提供实现、部署和/或执行本发明的功能。
计算机系统12旨在表示可在部署/实现本文所引用的教导中实现的任何类型的计算机系统。计算机系统12可在由计算机系统执行的计算机系统可执行指令(诸如程序模块)的一般上下文中描述。一般而言,程序模块可包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、逻辑、数据结构等。在该特定示例中,计算机系统12表示用于提供全息投影的说明性系统。应当理解,在本发明中实现的任何其他计算机可以具有不同的组件/软件,但是可以执行类似的功能。如以上在非限制性实例中所述,计算机系统12可以是服务器。
计算机化实施方式10中的计算机系统12以通用计算设备的形式示出。计算机系统12的组件可以包括但不限于:一个或者多个处理器或者处理单元16,系统存储器28,连接不同系统组件(包括系统存储器28和处理单元16)的总线18。
总线18表示几类总线结构中的一种或多种,包括存储器总线或者存储器控制器,外围总线,图形加速端口,处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说,这些体系结构包括但不限于工业标准体系结构(ISA)总线,微通道体系结构(MAC)总线,增强型ISA总线、视频电子标准协会(VESA)局域总线以及外围组件互连(PCI)总线。
处理单元16总体上是指执行逻辑操作、计算任务、控制功能等的任何设备。处理器可包括一个或多个子系统、组件和/或其他处理器。处理器通常将包括不同逻辑组件,所述逻辑组件使用时钟信号操作以锁存数据、提前逻辑状态、同步计算和逻辑操作和/或提供其他定时功能。在操作期间,处理单元16收集并路由表示外部设备14和输入设备(未示出)之间的输入和输出的信号。信号可以在LAN和/或WAN(例如,T1、T3、56kb、X.25)、宽带连接(ISDN、帧中继、ATM)、无线链路(802.11、蓝牙等)等上传送。在一些实施例中,可以使用例如可信密钥对加密来加密信号。不同的系统可使用不同的通信路径(诸如以太网或无线网络、直接串行或并行连接、USB、
Figure BDA0002497597690000071
Figure BDA0002497597690000072
或其他专用接口)来传送信息。(Firewire是Apple Computer,Inc.的注册商标)。蓝牙是蓝牙特别兴趣小组(SIG)的注册商标。
通常,处理单元16执行计算机程序代码,诸如用于提供全息投影的程序代码,其存储在存储器28、存储系统34和/或程序/实用程序40中。在执行计算机程序代码时,处理单元16可以从/向存储器28、存储系统34和程序/实用工具40读取和/或写入数据。
计算机系统12典型地包括多种计算机系统可读介质。这些介质可以是任何能够被计算机系统12访问的可用介质,包括易失性和非易失性介质,可移动的和不可移动的介质。
系统存储器28可以包括易失性存储器形式的计算机系统可读介质,例如随机存取存储器(RAM)30和/或高速缓存存储器32。计算机系统/服务器12可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质(例如VCR、DVR、RAID阵列、USB硬盘驱动器、光盘记录器、闪存设备和/或用于存储和/或处理数据的任何其它数据处理和存储元件)。仅作为举例,存储系统34可以用于读写不可移动的、非易失性磁介质(图中未显示,通常称为“硬盘驱动器”)。尽管图1中未示出,可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器,以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下,每个驱动器可以通过一个或者多个数据介质接口与总线18相连。存储器28可以包括至少一个程序产品,该程序产品具有一组(例如至少一个)程序模块,这些程序模块被配置以执行本发明各实施例的功能。
可以使用任何适当的介质来传输在计算机可读介质上包含的程序代码,所述介质包括但不限于无线、有线、光纤电缆、射频(RF)等或前述的任何适当组合。
具有一组(至少一个)程序模块42的程序/实用程序40可以作为示例而非限制存储在存储器28中。存储器28还可以具有操作系统、一个或多个应用程序、其他程序模块和/或程序数据。操作系统、一个或多个应用、其它程序模块、程序数据和/或其某种组合中的每一个可包括联网环境的实现。程序模块42通常执行这里描述的本发明实施例的功能和/或方法。
计算机系统/服务器12也可以与一个或多个外部设备14(例如键盘、指向设备、显示器24等)通信,还可与一个或者多个使得用户能与该计算机系统/服务器12交互的设备通信,和/或与使得该计算机系统/服务器12能与一个或多个其它计算设备进行通信的任何设备(例如网卡,调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口22进行。并且,计算机系统/服务器12还可以通过网络适配器20与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。如图所示,网络适配器20通过总线18与计算机系统/服务器12的其它模块通信。应当明白,尽管图中未示出,可以结合计算机系统/服务器12使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
现在参考图2,示出了根据本发明实施例的描述本文讨论的功能性的系统图。应当理解,本文所引用的教导可以在任何类型的联网计算环境70(例如,云计算环境)内实践。图2中仅示出了独立计算机系统/服务器12,仅用于说明目的。如果在联网计算环境70中实践本文所叙述的教导,则每个客户端(例如,全息投影移动设备86A-N)不需要具有全息投影引擎(下文称为“系统72”)。而是,系统72的全部或一部分可加载到与客户端通信(例如,无线地)以为其提供设备保护的服务器或有服务器能力的设备上。无论如何,如所描绘的,系统72被示为在计算机系统/服务器12内,如被体现在全息投影移动设备86A内。通常,系统72可以被实施为图1的计算机系统12上的程序/实用程序40并且可以实现本文叙述的功能。应进一步理解,系统72可并入任何类型的系统内或结合任何类型的系统工作,所述系统接收、处理和/或执行关于在联网计算环境中由全息投影移动设备86A-N投影全息图像的命令。出于简洁的目的,此类其他系统未在图2中示出。
按照这样的思路,系统72可以执行与通用计算机类似的多个功能。具体地,除了其他功能之外,系统72可以通过在联网计算环境70中的多个全息投影移动设备86A-N之间的协作来产生全息投影。为了实现这一点,系统72可包括:全息移动设备标识符90、可能的全息对象路径确定器92、全息对象路径选择器94和路径全息对象投影仪96。在任何情况下,系统72的技术效果是向计算机系统/服务器12提供处理指令以便提供全息投影。
现在参考图3,示出了根据本发明实施例的示例全息投影移动设备86的前视图100A和后视图100B。全息投影移动设备86的一个示范性说明是具有显示屏101和图像俘获单元(例如,相机102)的智能电话100A-B。在另一实施例中,全息投影移动设备86可包含(但不限于)无线订户单元、用户设备(UE)、移动台、寻呼机、蜂窝式电话、电话、个人数字助理(PDA)、平板计算机、器具、上网本、数字音乐播放器、媒体播放器、视频游戏设备、头戴式显示器(HMD)、头盔式显示器(HMD)、眼镜、护目镜或其他合适的电子设备。在任何情况下,如图所示,全息投影移动设备86还包括至少一个全息投影仪108A-B。全息投影仪108A-B可位于全息投影移动设备86(例如,全息投影仪108A)的正面100A上、全息投影移动设备86(例如,全息投影仪108B)的背面100B上、全息投影移动设备86(未示出)的任一侧上、和/或全息投影移动设备86(未示出)的顶部和/或底部上。进一步,多个全息投影仪108A-B可被包括在单个全息投影移动设备86上,以便例如向投影的全息图像110提供更三维的外观。可替代地,全息投影仪108A可以是由全息投影移动设备86控制的外部设备(未示出)的一部分。这样的外部设备的示例可以包括但不限于适于与全息投影移动设备86一起使用的情况、可以与全息投影移动设备86整体连接的模块、可以连接到全息投影移动设备86的外部端口的独立设备等。
在任何情况下,全息投影移动设备86可控制全息投影器108A-B以投影全息图像110。在实施例中,全息投影仪108A-B通过干涉图案投影白光和/或一个或多个激光器,以产生待投射的全息图像110。在一些实施例中,多个全息投影仪108A-B和/或一个或多个全息投影仪108A-B内的旋转反射镜可用于产生改进的三维效果。应理解,全息投影器108A-B所使用的如全息投影移动设备86中所包含的和/或由其控制的上述技术和/或设备旨在是说明性的且不应被视为限制性的。相比之下,应设想现在已知或以后开发的用于生成全息图像的任何解决方案。
本文描述的本发明的发明人已经发现在用于生成全息投影的当前解决方案中的某些缺陷。例如,即使对于具有多个全息投影仪108A-B的全息投影移动设备86,从其投影的全息图像110具有由全息投影移动设备86的位置限制的移动范围。此限制使得使用单个全息投影移动设备86来投影在物理区域内(例如,沿着预定路径)从一个地点行进到另一地点的全息图像即使并非不可能也是困难的。迄今为止,添加附加的全息投影移动设备86A-N对于补救这些缺陷是无效的,因为以前没有办法协调全息投影移动设备86A-N的显示器。
考虑具有多个移动对象的应用。例如,假定多个用户希望在移动设备上玩竞赛游戏且在游戏内彼此竞赛。当前解决方案提供分屏视图,或具有汽车位置的道路或轨道的视图。然而,目前,在具有移动设备的多个用户可参与的环境中并且对象被全息地投影以用于3D可视化的环境中,不可能将诸如赛车的全息对象投影在赛道上。一个原因是由于跨设备确定用于投影的全息对象移动路径的方式的差异,这取决于与移动设备协作的人的数量。
在另一场景中,考虑允许多个用户与多个移动设备协作的商业、社交或游戏应用。例如,智能电话上的两个用户可关于业务应用或游戏进行协作,并且可能需要作为应用的一部分来将3D全息对象从一个设备可视地转移到另一个设备。使用本发明的解决方案,随着数字对象从一个设备移动到另一个设备,用户可在两个设备之间的全息显示器中体验间隙。在两个或更多个设备之间的该间隙可类似地存在于这样的转移通过全息对象由两个设备可视化的情况下。照此,不存在允许全息对象通过全息图的协调投影在设备之间的视觉移动的当前解决方案。因此,需要一种能够确定跨多个设备的无缝或基本无缝的全息对象移动路径,使得全息对象和背景的投影能够基于参与设备的位置动态地示出全息对象的视觉移动的解决方案。
本文描述的方法包含优于目前解决方案的许多优点。例如,本发明允许能够生成全息图像的多个移动设备协作以生成复合全息图像。此合成全息图像包括跨多个移动设备的显示区域无缝行进的一个或多个全息对象,以及可选地,对象行进所沿的路径。基于生成全息投影的移动设备的特性来选择和优化该路径。就此而言,复杂的全息图像可使用可由任何用户拥有的设备来生成,而不需要当前必须使用的复杂的专用全息投影系统。进一步,本文描述的方法促进多相机全息投影系统的设置,而不需要相机的大量反复试验和重新定位,节省时间和资源。
再次参考图2,由计算机系统/服务器12执行的系统72的全息投影移动设备标识符90被配置为标识物理区域内的多个全息投影移动设备86A-N。为了实现这一点,全息投影移动设备标识符90可以使用现在已知或以后开发的任何通信解决方案,包括但不限于:基于设备的通信解决方案,诸如对等Wi-Fi、蓝牙、近场通信、红外通信等。附加地或可替代地,全息投影移动设备标识符90可利用在物理区域内提供的外部通信解决方案,诸如:基于客户端/服务器的Wi-Fi、无线、基于信标的通信、卫星等。在任何情况下,物理区域可以是多个全息投影移动设备86A-N所位于的并且在其中期望投影的全息图像110的任何位置,包括但不限于:住宅中的房间、会议室或可以进行商务会议的其他位置、教室、人聚集的室外空间、体育场或运动场等。
在实施例中,全息投影移动设备标识符90可被配置成检测特定物理距离范围内(例如,10米内)的所有全息投影移动设备86A-N。另外或在替代方案中,其他确定可用于在全息投影移动设备86A-N之间进行选择,包含(但不限于):同一房间内的设备、视觉视线内的设备和/或类似物。可替代地,全息投影移动设备标识符90可被配置成仅检测具有一个或多个特定特性的全息投影移动设备86A-N,其可包括但不限于:特定设备类型(例如,制造、型号等)的设备、具有全息投影能力的设备、具有特定类型的全息投影能力的设备、正在运行特定应用74(例如,被配置成利用全息投影)的设备,等等。
可响应于一个或多个事件发起全息投影移动设备标识符90对全息投影移动设备86A-N的检测。在实施例中,一个或多个全息投影移动设备86A-N可以不断地扫描或周期性地轮询设备周围的物理区域以确定在物理区域内是否存在其他全息投影移动设备86A-N。在一实施例中,利用和/或控制全息投影移动设备86A-N的至少一个全息投影仪108A-B的应用74可在后台操作以执行检测过程。另外或在替代方案中,应用74可响应于用户80激活应用74的请求而起始检测过程。另外或在替代方案中,应用74可包含在被用户80激活时发起检测过程的控件(例如,按钮、开关等)。在任何情况下,应用74(如果存在的话)可以包括以下中的一个或多个:全息设备控制器、多玩家游戏应用、文件传输应用、设备到设备通信/交互应用、协作应用、和/或可以期望多设备全息投影的任何其他应用。
在任何情况下,作为发现过程的一部分,全息投影移动设备标识符90也可收集关于全息投影移动设备86A-N的技术信息。例如,全息投影移动设备标识符90可收集关于与全息投影移动设备86A-N中的每一个相关联的全息投影仪108A-B的技术数据。该技术数据可用于确定与该区域内的多个全息投影移动设备86A-N中的每一个相对应的投影范围的集合。进一步,全息投影移动设备标识符90可查明对应于该区域内的多个全息投影移动设备86A-N中的每一个的位置集合。可以使用存储在设备86A-N自身上的位置数据和/或使用(例如,基于三角测量)由设备86A-N自身来自设备86A-N的信号或在物理区域内提供的外部通信解决方案来确定这些位置。基于此,可确定每个全息投影移动设备86N相对于所有其他全息投影移动设备86A-N的相对位置。
在实施例中,全息投影移动设备86A-N中的单个全息投影移动设备可被指定为控制设备节点86A。此指定可由系统72基于例如以下因素自动执行:设备的品牌/型号、设备的处理器速度、设备的网络连接强度、设备上特定应用74的存在等因素。或者,系统72可将启动应用74的第一设备指定为控制设备节点86。该指定还可以基于一个或多个用户80的指定来做出或改变。例如,用户80可以指定和/或投票哪个设备应当控制设备节点86A,或者一个用户80可以指示与用户相关联的设备要控制设备节点86A。在任何情况下,一旦设备被指定为控制设备节点86A,所有其他(非指定的)设备被指定为次级设备节点86B-N。在实施例中,控制设备节点86A可执行全息投影移动设备标识符90的所有或基本上所有功能,以标识次级设备节点86B-N。
例如,假设具有全息投影移动设备86A-N的一组用户80想要玩多玩家游戏(例如,赛车游戏)。用户可全部与其全息投影移动设备86A-N集合到共同物理区域(例如,房屋的家庭房间)中。一个或多个用户可激活用于操作游戏的应用74,发起通过全息投影移动设备标识符90发现位于同一位置的全息投影移动设备86A-N,并且可选地,将全息投影移动设备86A-N中的一个指定为控制设备节点86A,而将其他设备指定为次级设备86B-N。确定全息投影移动设备86A-N中的每一者的位置,且确定全息投影移动设备86A-N中的每一者的投影范围。
继续参见图2,如由计算机系统/服务器12执行的系统72的可能的全息路径标识符92被配置为确定可使用多个全息投影移动设备投影的全息对象路径88A-N的集合。全息对象路径88A-N是允许全息对象120沿其移动的路径。特定全息对象路径88N可以是在一个位置开始并在另一个位置结束的路径,或者可以是闭环。特定全息对象路径88N在全息投影110内可以是可见的,或者可替代地,可以是不可见的。例如,在先前描述的赛车游戏示例的情况下,全息对象路径88N可包括道路、水路、路径、轨道、景观特征和/或类似特征集合。类似地,如果全息对象120是火车车,则全息对象路径88N可包括铁路轨道、电车轨道、单轨轨道、导线和/或任何其他类似的特征。或者,如果全息对象120是正从一个全息投影移动设备86A发送到其他全息投影移动设备86A-N中的另一个全息投影移动设备的文件或其他数据,则全息对象路径88N可以是不可见的或可包括所示路径(例如,线条、曲线、彩虹、道路、水路或其他图示),其可任选地具有被设计成反映移动的动画(例如,闪耀、闪烁、增加/减小的亮度、颜色改变等)。
在任何情况下,包括在集合中的全息对象路径的数量可取决于多个不同因素,包括但不限于:用于生成全息对象路径88A-N的应用74、由全息投影移动设备标识符90标识的全息投影移动设备86A-N的数量、由全息投影移动设备标识符90标识的全息投影移动设备86A-N的相对位置、由全息投影移动设备标识符90标识的全息投影移动设备86A-N的投影范围等。例如,所选择的特定应用程序74可具有1-n个可能的全息对象路径88A-N,由应用74支持的全息对象120被允许沿着所述路径行进。取决于由全息投影移动设备标识符90标识的全息投影移动设备86A-N的数目,可基于提供对象移动路径在全息投影移动设备86A-N上的无缝或相对无缝的全息投影的能力来限制可用对象移动路径的数目。
就此而言,可能的全息路径标识符92可检索(例如,从数据存储34)由应用74(例如,竞赛游戏)支持的可能的全息对象路径88A-N的集合。这些检索的全息对象路径88A-N可包括显示每个全息对象路径88N所需的尺寸和/或形状设置,包括诸如曲线、直线、垂直高度的变化等的属性。由全息投影移动设备标识符90收集的技术信息然后可被用来确定可能的全息路径88A-N中的哪些可由所标识的全息投影移动设备86A-N投影。例如,如果所使用的全息投影移动设备86A-N的数目相对较小,那么可由全息投影移动设备86A-N投影的全息对象路径88A-N可受到限制。在实施例中,可能的全息路径标识符92可基于由全息投影移动设备标识符90确定的全息投影移动设备86A-N的相对位置来确定哪些全息路径88A-N能够被显示。在实施例中,可能的全息路径标识符92可基于由全息投影移动设备标识符90确定的全息投影移动设备86A-N的投影范围来确定哪些全息路径88A-N能够被显示。
此技术信息可使用曲线拟合技术来分析以计算可用全息对象路径88A-N中的哪一者可由全息投影移动设备86A-N投影。这样的技术可以包括但不限于:线性曲线拟合(线性回归)、多项式曲线拟合、过拟合/欠拟合、指数曲线拟合和/或现在已知或以后开发的任何其他曲线拟合技术。这些技术中的任何一个可用于全息对象路径的全部或可替代地用于全息对象路径的任何段。例如,对于多项式曲线拟合技术的情况,可以使用以下方程获得一阶曲线:
f(x)=ax+b
这可以扩展到任意阶j多项式的曲线,使用方程:
Figure BDA0002497597690000151
在任何情况下,可能的全息对象路径确定器92可将使用任何曲线拟合技术生成的基于全息投影移动设备86A-N的位置的曲线与可能的全息对象路径88A-N的集合进行比较,以确定可由全息投影移动设备86A-N投影的全息对象路径88A-N。这些曲线的计算还可考虑沿全息对象路径88N行进的要被显示的全息对象120(图3)(例如,火车、汽车、摩托车、球等)的相对大小和/或特性。
现在参考图4,示出了根据本发明实施例的使用多项式曲线拟合技术生成的多个多项式曲线210-1、210-2、210-6的示例图200。如所示出的,图表200具有多个数据点206A-N,其中每一数据点206N指示单个全息投影移动设备86N(图2)的位置。还如示出的,一阶(线性)拟合曲线210-1、二阶拟合曲线210-2和六阶拟合曲线210-6已经被绘制在图表200上。
现在参见图5,示出了其中可能的全息对象路径确定器92可根据本发明的实施例操作的示例场景300。另外参见图2,场景300可被认为是上述先前描述的赛车游戏应用74示例的延续。在任何情况下,场景300包括其中存在多个全息投影移动设备86A-F的物理区域310。全息投影移动设备86A-F中的每一个具有通过全息投影移动设备标识符90(图2)从技术信息收集的投影范围312。在场景300的具体情况下,全息投影移动设备86A-F以粗略的大写“I”形状对准,其中,全息投影移动设备86A-B和86E-F被聚集在物理区域310的相对端,并且全息投影移动设备86C-D被安排为朝向物理区域310的中间。场景300还包括由应用支持的可能的全息对象路径320的集合。如图所示,该可能的全息对象路径320的集合包括椭圆形轨迹322、八字形轨迹324和大致梯形轨迹326。基于全息投影移动设备86A-F在物理区域310中的位置和投影范围312,可能的全息对象路径确定器92已确定可能沿八字形轨道324而非沿椭圆形轨道322或大致梯形轨道326中的任一者投影全息对象120(图3)。
为了纠正这个和/或优化当前可显示的全息对象路径324,在实施例中,可能的全息对象路径确定器92被配置为使得能够基于物理区域310中的全息投影移动设备86A-F的当前位置和投影范围312来显示当前不能显示的一个或多个可能的全息对象路径320。例如,在场景300中,当前不能显示的可能的全息对象路径320将包括椭圆形轨迹322和大致梯形轨迹326。为了实现这一点,可能的全息对象路径确定器92(图2)可确定将使得全息投影移动设备86A-F能够显示新的全息对象路径的全息投影移动设备86A-F的新位置的集合。该确定可以自动地做出,或者可替代地,可以响应于对当前不能由用户80显示的全息路径322或326的选择而做出。在任何情况下,在场景300中,显示椭圆形轨道322所必需的新位置集合可能需要全息投影移动设备86C-D从物理空间310的中心部分进一步朝向边缘重定位。
基于该确定,可能的全息对象路径确定器92可转发对全息投影移动设备86C-D中的一个或多个应当被重定位到的新位置的建议,以便能够显示特定全息对象路径320。在实施例中,新位置可通过控制设备节点86A生成且从控制设备节点86A发送到需要重定位的任一次级节点86B-N。在实施例中,用于移动每个节点的方向可以包括在需要被移动的次级节点86N的屏幕上显示箭头或其他方向指示符。
现在参见图6,示出了根据本发明实施例的示例更新场景350。如图所示,全息投影移动设备86C和86D各自已从它们的先前位置重定位到由可能的全息对象路径确定器92(图2)建议的新位置。如图所示,这些重定位已经启用了全息对象120(图3)沿着椭圆形轨道322或大致梯形轨道326中的任一个的投影,但是已经禁用了沿着八字形轨道324投影全息对象120的能力。
再次参考图2,如由计算机系统/服务器12执行的系统72的全息对象路径选择器94被配置为从全息对象路径88A-N的集合中选择全息对象路径88N。就此而言,一旦可能的全息对象路径确定器92已使用全息投影移动设备86A-N的当前配置来确定哪些全息对象路径88A-N能够被显示,则全息对象路径选择器94可使得能够选择全息对象路径88A-N中将沿其显示全息对象120的一者。在实施例中,该选择可包括使用图形用户界面向全息投影移动设备86A-N的一个或多个用户80显示可显示的全息对象路径88A-N,并经由该界面接收对全息对象路径88N的选择。在控制设备节点86A被指定的情况下,该选择可由用户80对控制设备节点86A做出。可替代地,在进行选择时可以考虑多个用户80(通过投票等)的偏好。在替代环境中,全息对象路径选择器94可自动做出选择。这样的自动选择可以基于诸如用户80中的一个或多个的所存储的偏好、哪个全息对象路径86N最复杂、哪个全息对象路径86N在应用74的所有用户中最受欢迎、随机地等等这样的因素来做出。
再次结合图3参照图2,如由计算机系统/服务器12执行的系统72的路径化全息对象投影仪96被配置为通过全息投影移动设备86A-N投影根据所选择的全息对象路径88N移动的全息对象120。在控制设备节点86A被指定的情况下,控制设备节点86A可控制次级设备节点86A-N来执行投影。可替代地,全息投影移动设备86A-N可在对等的基础上协作以投影包含移动全息对象120的全息图像110。为此,如果需要,路径化全息对象投影仪96使全息投影移动设备86A-N能够彼此协作以投影可见的全息移动路径。进一步,路径化全息对象投影仪96允许全息投影移动设备86A-N彼此协作以投影根据(例如,沿着、上方、下方、内部等)所选全息对象路径88N移动的一个或多个全息对象120。照此,全息对象120的移动可看起来是无缝的(例如,当全息对象120的投影在一个全息投影移动设备86N与另一个全息投影移动设备之间转换时不中断)。
为了实现这一点,第一全息投影移动设备84B可投影沿着全息对象路径88的与第一全息投影移动设备84B相关联(例如,在投影范围内)的第一区段移动的全息对象120。路径化全息对象投影仪96可计算全息对象路径88的第一区段与全息对象路径88的与第二全息投影移动设备84C相关联的第二区段之间的过渡点。在已指定控制设备节点84A的情况下,可通过控制设备节点84A计算过渡点的计算。可替代地,第一全息投影移动设备84B和第二全息投影移动设备84C和/或其他全息投影移动设备84A-N可以协作来执行计算。在任何情况下,当全息对象120沿着全息对象路径88的移动使得全息对象120的全部或一部分到达过渡点时,第一全息投影移动设备84B停止其全息对象120的全部或一部分的投影。同时,全息对象120到达过渡点使得第二全息投影移动设备84C开始投影全息对象120的全部或一部分。此后,只要全息对象路径88在其投影范围内,第二全息投影移动设备84C就继续沿着全息对象路径88投影全息对象120,在该点处全息对象120可以使用相同过程转移到第三全息投影移动设备84N。
现在参考图7,示出了根据本发明的实施例的示例性全息投影400。如所图示的,多个全息投影移动设备484A-N正在投影全息对象路径488,其在此情况下为火车轨道。全息投影移动设备484A-N也投影全息对象420,其在此情况下为火车,因为其根据全息对象路径488移动。应当理解,全息投影400不限于单个全息对象420。相反,多个全息对象420可被投影为沿着全息对象路径488移动。在实施例中(例如,在上述赛车游戏示例中),多个全息对象420中的每一个可与全息投影移动设备484A-N中的不同的一个相关联,并且每个全息对象420的移动、速度等的改变可由相应的全息投影移动设备484N控制。
再次结合图3参照图2,路径化全息对象投影仪96还可响应于一个或多个事件暂停根据所选择的全息对象路径88N移动的投影全息对象120。这些事件可包括一个或多个全息投影移动设备86A-N进入物理区域、一个或多个全息投影移动设备86A-N从物理区域退出、或一个或多个全息投影移动设备86A-N在物理区域内的重新定位等。为了实现这一点,全息投影移动设备标识符90可以继续标识物理区域内的全息投影移动设备86A-N。如果全息投影移动设备标识符90检测到一个或多个事件,则可能的全息对象路径确定器92可确定可使用全息投影移动设备86A-N的新配置来投影的全息对象路径88A-N的新的集合。可从新确定的全息对象路径88A-N的集合中选择全息对象路径88N,并且可将全息对象120投影在所选择的全息对象路径88N上。
现在结合图2参照图8,示出了根据本发明实施例的方法流程图500。在510,如由计算机系统/服务器12执行的系统72的全息投影移动设备标识符90标识物理区域内的多个全息投影移动设备86A-N。在520处,如由计算机系统/服务器12执行的系统72的可能的全息对象路径确定器92确定可使用多个全息投影移动设备86A-N投影的全息对象路径88A-N的集合。在530处,全息对象路径选择器94从全息对象路径88A-N的集合中选择全息对象路径88N。在540处,如由计算机系统/服务器12执行的系统72的路径化全息对象投影仪94通过多个全息投影移动设备86A-N投影根据所选择的全息对象路径88N移动的全息对象120。
图8的处理流程图500示出了根据本发明的各种实施例的系统、方法和计算机程序产品的可能实现的架构、功能和操作。对此,流程图或框图中的每个方框可以表示模块、段或指令的一部分,其包括用于实现规定的逻辑功能的一个或多个可执行指令。在一些替代实施例中,框中所标注的功能可以不以图中所标注的次序发生。例如,取决于所涉及的功能,连续示出的两个框实际上可以基本上同时执行,或者这些框有时可以以相反的顺序执行。还将注意的是,框图和/或流程图中的每个框、以及框图和/或流程图中的框的组合可以由基于专用硬件的系统来实现,所述基于专用硬件的系统执行指定的功能或动作或执行专用硬件与计算机指令的组合。
在本说明书中描述的功能组件中的一些已经被标记为系统或单元,以便更具体地强调其实现独立性。例如,系统或单元可被实现为包括定制VLSI电路或门阵列、现成的半导体(诸如逻辑芯片、晶体管或其他分立组件)的硬件电路。系统或单元也可以在诸如现场可编程门阵列、可编程阵列逻辑、可编程逻辑设备等的可编程硬件设备中实现。系统或单元也可以在软件中实现,以便由不同类型的处理器执行。可执行代码的系统或单元或组件可以例如包括计算机指令的一个或多个物理或逻辑块,其可以例如被组织为对象、过程或函数。然而,所标识的系统或单元的可执行文件不需要在物理上位于一起,而是可以包括存储在不同位置中的不同指令,当逻辑上结合在一起时,所述不同指令包括系统或单元并且实现系统或单元的所述目的。
进一步,可执行代码的系统或单元可为单个指令或许多指令,且甚至可分布于若干不同代码段上、不同程序之间和跨越若干存储器设备。类似地,操作数据可以在本文中在模块内被标识和示出,并且可以以任何合适的形式体现和被组织在任何合适类型的数据结构内。操作数据可以作为单个数据集收集,或者可以分布在不同位置上,包括在不一样的存储设备和不同的存储设备上。
此外,系统/单元还可以被实现为软件和一个或多个硬件设备的组合。例如,程序/实用工具40可以被体现在存储在存储器介质(例如,存储器存储设备)上的软件可执行代码的组合中。在进一步的示例中,系统或单元可以是对操作数据集合进行操作的处理器的组合。
如上所述,一些实施例可以硬件实现。硬件可以被称为硬件元件。一般来说,硬件元件可指代经布置以执行某些操作的任何硬件结构。在一个实施例中,例如,硬件元件可以包括在衬底上制造的任何模拟或数字电气或电子元件。可以使用基于硅的集成电路(IC)技术(例如,互补金属氧化物半导体(CMOS)、双极和双极CMOS(BiCMOS)技术)来执行制造。硬件元件的示例可以包括处理器、微处理器、电路、电路元件(例如,晶体管、电阻器、电容器、电感器等)、集成电路、专用集成电路(ASIC)、可编程逻辑器件(PLD)、数字信号处理器(DSP)、现场可编程门阵列(FPGA)、逻辑门、寄存器、半导体器件、芯片、微芯片、芯片组等。然而,实施例不限于该上下文。
本文提供的任何组件可由服务提供商部署、管理、服务等,服务提供商提供关于通过用3-D全息投影跟踪对象来增强对象的视图的过程来部署或集成计算基础设施。由此,本文的实施例公开了用于支持计算机基础设施的过程,包括将计算机可读代码集成、托管、维护和部署到计算系统(例如,计算机系统12)中,其中与计算系统组合的代码能够执行本文所述的功能。
在另一实施例中,本发明提供在订阅、广告和/或费用的基础上执行本发明的处理步骤的方法。即,服务提供者(诸如解决方案集成者)可提供创建、维护、支持等用于通过用3-D全息投影跟踪对象来增强对象的视图的过程。在这种情况下,服务提供者可以为一个或多个客户创建、维护、支持等执行本发明的处理步骤的计算机基础设施。作为回报,服务提供商可以根据订阅和/或费用协议从消费者接收支付,和/或服务提供商可以从广告内容向一个或多个第三方的销售接收支付。
同样如上所述,一些实施例可以软件实现。软件可被称为软件元素。一般来说,软件元素可指代经布置以执行某些操作的任何软件结构。在一个实施例中,例如,软件元件可包括适于由硬件元件(诸如处理器)执行的程序指令和/或数据。程序指令可包含组织的命令列表,所述命令列表包含以预定语法布置的字、值或符号,所述字、值或符号在执行时可致使处理器执行对应的一组操作。
本发明也可以是计算机程序产品。计算机程序产品可以包括计算机可读存储介质,其上载有用于使处理器实现本发明的各个方面的计算机可读程序指令。
计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备,例如硬件存储设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身,诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如,通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备,或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令,并转发该计算机可读程序指令,以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本发明操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据或者以一种或多种编程语言的任意组合编写的源代码或目标代码,所述编程语言包括面向对象的编程语言—诸如Smalltalk、C++等,以及过程式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中,通过利用计算机可读程序指令的状态信息来个性化定制电子电路,例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA),该电子电路可以执行计算机可读程序指令,从而实现本发明的各个方面。
这里参照根据本发明实施例的方法、设备(系统)和计算机程序产品的流程图和/或框图描述了本发明的各个方面。应当理解,流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合,都可以由计算机可读程序指令实现。
这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理设备的处理器,从而生产出一种机器,使得这些指令在通过计算机或其它可编程数据处理设备的处理器执行时,产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的设备。也可以把这些计算机可读程序指令存储在计算机可读存储介质中,这些指令使得计算机、可编程数据处理设备和/或其他设备以特定方式工作,从而,存储有指令的计算机可读介质则包括一个制造品,其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。
也可以把计算机可读程序指令加载到计算机、其它可编程数据处理设备、或其它设备上,使得在计算机、其它可编程数据处理设备或其它设备上执行一系列操作步骤,以产生计算机实现的过程,从而使得在计算机、其它可编程数据处理设备、或其它设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。
附图中的流程图和框图显示了根据本发明的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分,所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
显而易见的是,本文已经提供了用于投影全息对象跟踪器的方法。虽然已经结合示例性实施例具体示出和描述了本发明,但将理解,本领域技术人员将想到变化和修改。因此,应当理解,所附权利要求旨在覆盖落入本发明的真实精神内的所有此类修改和变化。

Claims (9)

1.一种用于提供全息投影的方法,包括:
标识物理区域内的多个全息投影移动设备;
确定可使用所述多个全息投影移动设备投影的全息对象路径的集合;
从所述全息对象路径的集合中选择全息对象路径;以及
由所述多个全息投影移动设备投影根据所述全息对象路径移动的全息对象。
2.根据权利要求1所述的方法,进一步包括:
确定对应于所述区域内的所述多个全息投影移动设备中的每一者的位置的集合,
其中,基于所述位置的集合确定所述全息对象路径的集合。
3.根据权利要求2所述的方法,进一步包括:
确定对应于所述区域内的所述多个全息投影移动设备中的每一者的投影范围的集合,
其中另外基于所述投影范围的集合来确定所述全息对象路径的集合。
4.根据权利要求1所述的方法,进一步包括:
将所述多个全息投影移动设备中的一个全息投影移动设备指定为控制设备节点,并且将未指定的投影移动设备指定为次级设备节点;以及
由所述控制设备节点控制所述次级设备节点以执行所述投影。
5.根据权利要求1所述的方法,所述投影进一步包括:
由所述多个全息投影移动设备中的第一全息投影移动设备投影沿着与所述第一全息投影移动设备相关联的所述全息对象路径的第一区段移动的所述全息对象;
计算所述全息对象路径的所述第一区段与所述全息对象路径的第二区段之间的过渡点,所述全息对象路径的第二区段与所述多个全息投影移动设备中的第二全息投影移动设备相关联;
响应于所述全息对象到达所述过渡点而停止由所述第一全息投影移动设备投影所述全息对象;以及
响应于所述全息对象到达所述过渡点,通过所述第二全息投影移动设备开始所述全息对象的投影。
6.根据权利要求1所述的方法,进一步包括:
检测所述区域内的所述多个全息投影移动设备中的重定位的全息投影移动设备的重定位;
检测附加的全息投影移动设备到所述区域内的所述多个全息投影移动设备的添加;
检测所述区域内移除的全息投影移动设备从所述多个全息投影移动设备的移除;以及
基于对所述重定位、所述添加或所述移除中的任一者的检测,修改可由所述多个全息投影移动设备投影的所述全息对象路径的集合。
7.根据权利要求1所述的方法,进一步包括:
确定被配置成启用新的全息对象路径的新位置的集合;以及基于所述确定转发对全息投影移动设备的新位置的建议。
8.一种用于提供全息投影的计算机系统,所述计算机系统包括:
全息投影移动设备;
由所述全息投影移动设备控制的全息投影仪;
全息投影移动设备中的包括程序指令的存储介质;
全息投影移动设备中的总线,其耦合到所述存储介质;以及
耦合到所述全息投影移动设备中的所述总线的处理器,所述处理器执行所述程序指令,使得所述系统执行根据任一前述权利要求所述的方法。
9.一种计算机程序,包括当所述计算机程序在计算机系统上执行时,用于执行根据任一前述方法权利要求所述的方法的所有步骤的指令。
CN201880074703.5A 2017-12-21 2018-12-13 利用多设备协作确定和投影全息对象路径和对象移动 Active CN111373450B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/850,358 US10571863B2 (en) 2017-12-21 2017-12-21 Determine and project holographic object path and object movement with mult-device collaboration
US15/850,358 2017-12-21
PCT/IB2018/060018 WO2019123139A1 (en) 2017-12-21 2018-12-13 Determine and project holographic object path and object movement with multi-device collaboration

Publications (2)

Publication Number Publication Date
CN111373450A true CN111373450A (zh) 2020-07-03
CN111373450B CN111373450B (zh) 2024-03-26

Family

ID=66951154

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880074703.5A Active CN111373450B (zh) 2017-12-21 2018-12-13 利用多设备协作确定和投影全息对象路径和对象移动

Country Status (6)

Country Link
US (2) US10571863B2 (zh)
JP (1) JP7233805B2 (zh)
CN (1) CN111373450B (zh)
DE (1) DE112018005772B4 (zh)
GB (1) GB2582725B (zh)
WO (1) WO2019123139A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10571863B2 (en) * 2017-12-21 2020-02-25 International Business Machines Corporation Determine and project holographic object path and object movement with mult-device collaboration
CN110333837B (zh) * 2019-07-09 2023-05-16 高创(苏州)电子有限公司 会议系统、通信方法和装置
US11227444B2 (en) 2020-03-09 2022-01-18 International Business Machines Corporation Virtual reality content adaptation
US11423623B2 (en) 2020-06-10 2022-08-23 At&T Intellectual Property I, L.P. Projecting virtual presences along a moving trajectory

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120170089A1 (en) * 2010-12-31 2012-07-05 Sangwon Kim Mobile terminal and hologram controlling method thereof
CN104571512A (zh) * 2014-12-30 2015-04-29 卓易畅想(北京)科技有限公司 一种协助多个投影端进行投影的方法和装置
CN104980722A (zh) * 2014-04-10 2015-10-14 联想(北京)有限公司 一种数据处理方法、装置以及电子设备
US20170337750A1 (en) * 2016-05-17 2017-11-23 Google Inc. Methods and apparatus to project contact with real objects in virtual reality environments
US20170358096A1 (en) * 2016-06-13 2017-12-14 International Business Machines Corporation Object tracking with a holographic projection

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3600056A (en) * 1969-11-24 1971-08-17 Ibm Recording and replication of arrays of holograms
US4333006A (en) * 1980-12-12 1982-06-01 Ncr Corporation Multifocal holographic scanning system
JP2001224840A (ja) 2000-02-15 2001-08-21 Konami Co Ltd ゲームシステム
US6323971B1 (en) 2000-10-23 2001-11-27 Zebra Imaging, Inc. Hologram incorporating a plane with a projected image
JP4904678B2 (ja) 2004-09-24 2012-03-28 株式会社ニコン プロジェクタシステム、携帯電話、カメラ
DE102007005822A1 (de) * 2007-01-31 2008-08-07 Seereal Technologies S.A. Holographisches Rekonstruktionssystem mit optischer Wellennachführung
US8212768B2 (en) * 2007-10-31 2012-07-03 Fimed Properties Ag Limited Liability Company Digital, data, and multimedia user interface with a keyboard
US8380127B2 (en) 2008-10-29 2013-02-19 National Semiconductor Corporation Plurality of mobile communication devices for performing locally collaborative operations
US20110205101A1 (en) * 2010-02-23 2011-08-25 Technology Patents, Llc Systems and/or methods for using coherent electromagnetic waves in a missile defense shield
JP2012039184A (ja) 2010-08-03 2012-02-23 Konica Minolta Business Technologies Inc 映像投影装置及び映像投影システム
KR20130029862A (ko) * 2011-09-16 2013-03-26 엘지전자 주식회사 이동 단말기 및 그 제어방법
US8950096B2 (en) * 2011-10-31 2015-02-10 Sydney Justin, III Sport shirt display apparatus
KR20130085553A (ko) 2011-12-20 2013-07-30 한국전자통신연구원 프로젝션 기반의 디지털 홀로그램 디스플레이 시스템 및 그 방법
US9277321B2 (en) 2012-12-17 2016-03-01 Nokia Technologies Oy Device discovery and constellation selection
US20140368537A1 (en) 2013-06-18 2014-12-18 Tom G. Salter Shared and private holographic objects
US10442355B2 (en) 2014-09-17 2019-10-15 Intel Corporation Object visualization in bowl-shaped imaging systems
WO2016090475A1 (en) * 2014-12-08 2016-06-16 H Plus Technologies Ltd. Apparatus and method for centrally managing human interface sensors and actuators in interactive machines
US9715213B1 (en) * 2015-03-24 2017-07-25 Dennis Young Virtual chess table
US20170023911A1 (en) * 2015-07-20 2017-01-26 Steve Russell Themed Holographic Theater
US10775740B2 (en) * 2017-01-24 2020-09-15 International Business Machines Corporation Holographic projection of digital objects in video content
US10571863B2 (en) * 2017-12-21 2020-02-25 International Business Machines Corporation Determine and project holographic object path and object movement with mult-device collaboration
US10410523B1 (en) * 2018-05-15 2019-09-10 International Business Machines Corporation System and method for holographic communications between vehicles

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120170089A1 (en) * 2010-12-31 2012-07-05 Sangwon Kim Mobile terminal and hologram controlling method thereof
CN104980722A (zh) * 2014-04-10 2015-10-14 联想(北京)有限公司 一种数据处理方法、装置以及电子设备
CN104571512A (zh) * 2014-12-30 2015-04-29 卓易畅想(北京)科技有限公司 一种协助多个投影端进行投影的方法和装置
US20170337750A1 (en) * 2016-05-17 2017-11-23 Google Inc. Methods and apparatus to project contact with real objects in virtual reality environments
US20170358096A1 (en) * 2016-06-13 2017-12-14 International Business Machines Corporation Object tracking with a holographic projection

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
GOKUL RAM.T 等: "Implementation of Holographic View in Mobile Video Calls", pages 764 - 771 *

Also Published As

Publication number Publication date
US10754297B2 (en) 2020-08-25
DE112018005772B4 (de) 2021-12-30
DE112018005772T5 (de) 2020-07-23
JP2021508844A (ja) 2021-03-11
JP7233805B2 (ja) 2023-03-07
WO2019123139A1 (en) 2019-06-27
GB202010400D0 (en) 2020-08-19
GB2582725A (en) 2020-09-30
US10571863B2 (en) 2020-02-25
GB2582725B (en) 2021-06-23
US20190196404A1 (en) 2019-06-27
CN111373450B (zh) 2024-03-26
US20200081400A1 (en) 2020-03-12

Similar Documents

Publication Publication Date Title
CN111373450B (zh) 利用多设备协作确定和投影全息对象路径和对象移动
RU2754991C2 (ru) Система устройства просмотра смешанной реальности и способ для него
US11651555B2 (en) Re-creation of virtual environment through a video call
TWI594174B (zh) 頭戴顯示器之追蹤系統、方法及裝置
EP3332565B1 (en) Mixed reality social interaction
US9606363B2 (en) Head mounted device (HMD) system having interface with mobile computing device for rendering virtual reality content
US11563998B2 (en) Video distribution system for live distributing video containing animation of character object generated based on motion of distributor user, video distribution method, and video distribution program
TWI449953B (zh) 經由至少第一和第二裝置而可觀看之互動空間的產生方法、及用以共享可攜式裝置間之虛擬實境的可攜式裝置
US10105594B2 (en) Wearable garments recognition and integration with an interactive gaming system
US20160133230A1 (en) Real-time shared augmented reality experience
TW202004421A (zh) 用於在hmd環境中利用傳至gpu之預測及後期更新的眼睛追蹤進行快速注視點渲染
US20140267598A1 (en) Apparatus and method for holographic poster display
US20170225069A1 (en) Incorporating and coordinating multiple home systems into a play experience
US11270510B2 (en) System and method for creating an augmented reality interactive environment in theatrical structure
US10916061B2 (en) Systems and methods to synchronize real-world motion of physical objects with presentation of virtual content
KR20150085255A (ko) 증강현실 스테이지, 라이브 댄스 스테이지 및 라이브 오디션을 위한 서비스 시스템 및 서비스 방법
US20220139050A1 (en) Augmented Reality Platform Systems, Methods, and Apparatus
JP2020181263A (ja) 画像生成装置および情報提示方法
US20220358027A1 (en) Tool for mobile app development and testing using a physical mobile device
JP7472912B2 (ja) 情報処理装置、情報処理方法および記録媒体
US10940387B2 (en) Synchronized augmented reality gameplay across multiple gaming environments
KR101734337B1 (ko) 가상 현실 컨텐츠를 제어하는 장치 및 방법
WO2023049870A1 (en) Selfie volumetric video
CN113093915A (zh) 多人互动的控制方法、装置、设备及存储介质
PATTI Reducing motion sickness on mobile phone based VR applications using 6DoF tracking

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant