CN112912151B - 特殊效果可视化技术 - Google Patents

特殊效果可视化技术 Download PDF

Info

Publication number
CN112912151B
CN112912151B CN201980071877.0A CN201980071877A CN112912151B CN 112912151 B CN112912151 B CN 112912151B CN 201980071877 A CN201980071877 A CN 201980071877A CN 112912151 B CN112912151 B CN 112912151B
Authority
CN
China
Prior art keywords
user
location
special effect
special effects
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201980071877.0A
Other languages
English (en)
Other versions
CN112912151A (zh
Inventor
J·施瓦茨
C·瓦莫斯
D·奥尔特
J·黑尔
R·保罗
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Universal City Studios LLC
Original Assignee
Universal City Studios LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Universal City Studios LLC filed Critical Universal City Studios LLC
Publication of CN112912151A publication Critical patent/CN112912151A/zh
Application granted granted Critical
Publication of CN112912151B publication Critical patent/CN112912151B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63GMERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G31/00Amusement arrangements
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63JDEVICES FOR THEATRES, CIRCUSES, OR THE LIKE; CONJURING APPLIANCES OR THE LIKE
    • A63J21/00Conjuring appliances; Auxiliary apparatus for conjurers
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63JDEVICES FOR THEATRES, CIRCUSES, OR THE LIKE; CONJURING APPLIANCES OR THE LIKE
    • A63J5/00Auxiliaries for producing special effects on stages, or in circuses or arenas
    • A63J5/02Arrangements for making stage effects; Auxiliary stage appliances
    • A63J5/021Mixing live action with images projected on translucent screens
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63JDEVICES FOR THEATRES, CIRCUSES, OR THE LIKE; CONJURING APPLIANCES OR THE LIKE
    • A63J5/00Auxiliaries for producing special effects on stages, or in circuses or arenas
    • A63J5/02Arrangements for making stage effects; Auxiliary stage appliances
    • A63J5/025Devices for making mist or smoke effects, e.g. with liquid air
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191Testing thereof
    • H04N9/3194Testing thereof including sensor feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Abstract

一种方法,其可以包括经由捕获系统在第一地点处获取与使用者关联的数据集,经由控制系统在第二地点处检测使用者,响应于检测到在第二地点处或经过第二地点的使用者而经由环境系统在第二地点处显示由数据集生成的一个或更多图像,以及响应于检测到在第二地点处或经过第二地点的使用者而经由特殊效果系统在第二地点处在显示期间触发特殊效果。数据集可以包括使用者的图像数据。

Description

特殊效果可视化技术
技术领域
本公开总体上涉及特殊效果技术,以及更具体地,涉及用于给使用者提供沉浸式体验以模拟使用者到另一地点的传输的系统和方法。
背景技术
某些类型的幻象创造消失的效果。在幻象进行时,传输幻象的观众通常看到表演者从视野中消失。在表演者貌似被传输到在舞台上或在建筑物中的不同地点时,观众可以从远处观看。对于单个表演而言表演者的消失和出现是定时的。然而,观众或观众中的单独的成员通常不被提供有被传输到另一地点的沉浸式体验。所期望的是改进的且更沉浸式的观看体验。
此节旨在向读者介绍可能与本技术的各方面相关的本领域的各方面,其在以下被描述和/或要求保护。相信此论述有助于为读者提供背景信息以促进对本公开的各方面的更好的理解。因此,应当理解,这些表述要从这个角度阅读,并且不作为对现有技术的承认。
发明内容
与原始要求保护的主题的范围相符的某些实施例被概述如下。这些实施例不旨在限制要求保护的主题的范围,而是这些实施例仅旨在提供主题的可能形式的简要概括。实际上,主题可以包含可以类似于或不同于以下阐述的实施例的各种形式。
在一实施例中,特殊效果可视化系统可以具有在第一地点处基于使用者的肖像数据生成与使用者关联的数据集的捕获系统、在不同于第一地点的第二地点处显示一个或更多图像的环境系统、在第二地点处触发特殊效果的特殊效果系统以及通信地耦联到捕获系统、环境系统和特殊效果系统的控制系统。控制系统可以在第二地点处检测使用者的存在,以及响应于在第二地点处检测到使用者的存在而基于数据集向环境系统传递一个或更多控制信号并且向特殊效果系统传递一个或更多附加控制信号。控制信号可以致使环境系统在第二地点处显示一个或更多图像。一个或更多图像可以使用数据集生成。附加控制信号可以致使特殊效果系统在第二地点处在一个或更多图像的显示期间触发特殊效果。
在另一实施例中,特殊效果可视化系统可以具有在第一地点处获取使用者的肖像数据并且基于肖像数据生成数据集的捕获系统、在不同于第一地点的第二地点处基于数据集显示三维(3D)演示的环境系统以及在3D演示的显示期间在第二地点处触发特殊效果的特殊效果系统。3D演示可以具有使用者的肖像。
在又另一个实施例中,方法可以包括经由捕获系统在第一地点处获取与使用者关联的数据集,经由控制系统在第二地点处检测使用者,响应于检测到在第二地点处或经过第二地点的使用者而经由环境系统在第二地点处显示由数据集生成的一个或更多图像,以及响应于检测到在第二地点处或经过第二地点的使用者而在第二地点处在显示期间经由特殊效果系统触发特殊效果。数据集可以包括使用者的图像数据。
附图说明
当参考所附附图阅读以下详细的描述时,本公开的这些和其他特征、方面和优点将变得更好理解,在所述附图中,遍及附图相同的标记表示相同的部分,其中:
图1是根据本公开的方面的由通过特殊效果可视化系统产生的传输幻象的使用者行进的路径和沿着路径由特殊效果可视化触发的一个或更多特殊效果的观看者的位置的示例性实施例的示意图示;
图2是根据本公开的方面的由通过特殊效果可视化系统产生的传输幻象的使用者行进的路径的另一示例性实施例的示意图示;
图3是根据本公开的方面的由通过特殊效果可视化系统产生的传输幻象的使用者行进的路径和沿着路径由特殊效果可视化触发的一个或更多特殊效果的多个使用者的位置的另一示例性实施例的示意图示;
图4是根据本公开的方面的被配置成捕获使用者的肖像并且在使用者沿着路径行进时基于使用者的肖像显示一个或更多特殊效果的特殊效果可视化系统的示例性实施例的图示;
图5是根据本公开的方面的被配置成在使用者沿着路径行进时基于使用者的肖像显示一个或更多特殊效果的图2的特殊效果可视化系统的部分的示例性实施例的图示;
图6是根据本公开的方面的图1的特殊效果可视化系统的示例性实施例;以及
图7是根据本公开的方面的用于提供沉浸式和/或变换式可视化系统的过程的流程图。
具体实施方式
以下将描述本公开的一个或更多具体实施例。为了提供这些实施例的简洁的描述,在说明书中可以不描述实际实施方式的所有特征。应当领会,在任何这样的实际实施方式的开发中,如在任何工程或设计项目中,可以做许多特定于实施方式的决定以实现开发者的特定目标(诸如对系统相关的和商业相关的约束的依从),所述特定目标可能随实施方式的不同发生变化。此外,应当领会这样的开发努力可能是复杂的且耗费时间的,但是对于受益于此公开的那些普通技术人员来说,这将仍然是设计、制作和制造的例行任务。
当介绍本公开的各种实施例的元件时,冠词“一”、“一个”、“该”以及“所述”旨在意指存在一个或更多的元件。术语“包括(comprising)”、“包括(including),”和“具有”旨在是包括的并且意指可以存在除所列出的元件之外的附加元件。本文描述的本实施例的一个或更多具体实施例将在以下描述。为了提供这些实施例的简洁的描述,在说明书中可以不描述实际实施方式的所有特征。应当领会,在任何这样的实际实施方式的开发中,如在任何工程或设计项目中,必须做许多特定于实施方式的决定以实现开发者的特定目标(诸如对系统相关的和商业相关的约束的依从),所述特定目标可能随实施方式的不同发生变化。此外,应当领会这样的开发努力可能是复杂的且耗费时间的,但是对于受益于此公开的那些普通技术人员来说,这将仍然是设计、制作和制造的例行任务。
传输幻象的表演通常由技术的或专业的表演者演出以供观众观看。表演者可以模拟表演者、助手、无生命物体或动物到鉴于观众的另一地点的传输。然而,观众在表演中的有限的参与把观众仅仅作为局外人。因此,可能期望的是,提供给观众沉浸式和/或变换式传输幻象使得观众可以积极地参与(例如,作为使用者)在传输幻象中并且观看另一使用者的传输幻象(例如,作为观看者)。
本公开涉及使用材料致动、传感器数据和/或特殊效果以用传输幻象增强使用者体验和观看者体验的系统和方法。更特别地,本公开涉及特殊效果可视化系统,其包括图像捕获(例如,图像、视频或空间的)和环境显示或投射系统(例如,雾屏幕或显示器、蒸汽屏幕或显示器、烟屏幕或显示器、基于低温的屏幕或显示器、基于沙子的屏幕或显示器或其他基于粒子的屏幕或显示器)。在一些实施例中,周围环境的一个或更多构件(例如,墙、门、顶板、地面、在环境内的物体等等)也可以形成传输幻象的显示的部分。图像捕获和环境投射系统可以模拟使用者远离使用者位置的传输(例如,生成使用者远离使用者位置的传输的幻象)。在一个实施例中,例如,捕获和投射系统可以获取使用者的图像数据,基于图像数据捕获使用者的肖像,基于使用者的肖像生成一个或更多特殊效果,并且当在环境中显示使用者的肖像时触发特殊效果以将与使用者关联的传输幻象提供给任何数量的观看者。也就是说,观看者可以看到使用者的肖像被传输离开(例如,使用者消失)。另外,特殊效果可视化系统可以为使用者提供一个或更多感官刺激,以把使用者被传输离开到另一地点或使用者的环境在改变的感觉带给使用者。例如,特殊效果可视化系统可以在使用者沿着路径行走通过环境(其既给该观看者提供传输幻象又给在范围内的任何观看者提供传输幻象)时触发一个或更多类型的环境效果(例如,嗅觉、热、风、冷、触觉或听觉)。环境效果可以为使用者提供与传输幻象的特别的特点(例如,消失到烟或火焰中、分散成颗粒或行走到虫洞中)关联的各种感官刺激。因此,通过给使用者和观看者提供沉浸式和/或变换式体验,特殊效果可视化系统可以同步地(或基本上同步地)用传输幻象增强使用者的体验和观看者的体验。进一步地,通过使用使用者的肖像数据和使用者-触发的特殊效果,相比于脚本化的或预记录的幻象而言,体验是个性化且动态的。
在某些实施例中,所公开的特殊效果可视化系统被提供在基于地点的娱乐场所(诸如游乐场或主题公园)内。主题公园提供可以与增强沉浸式和/或变换式体验的可存储的效果关联的受控环境。也就是说,特别的景观环境可以具有为特殊效果可视化系统的使用者至少部分地再创造的冰、火、烟、光和其他感官主题元件,来为使用者提供从第一地点传输到第二地点的感觉。因此,在特殊效果的上下文中公开了本公开的某些实施例,所述特殊效果是娱乐故事的部分并且为使用者或观看者增强沉浸式和/或变换式娱乐体验。在一个实施例中,使用者可以采用与在主题公园内的景观关联的人物,诸如具有不同物理特征并且在虚构的外行星环境中操作的宇航员。因此,通信效果和特殊效果被选择并且协调地操作以增强期望的故事。应当理解的是,通信效果和特殊效果可以被选择以适配其他故事环境并且所描述的宇航员故事仅是作为示例。
如本文描述的,“使用者”被称为传输幻象的期望的目标。使用者的肖像被捕获并作为传输幻象的部分被显示以供传输幻象的观看者看到。在一些实施例中,使用者可能不能观看使用者自己的传输幻象。另外,如本文描述的,“观看者”被称为传输幻象的期望的观众。在一些实施例中,观看者被定位在远离传输幻象的某距离处(例如,在范围内)使得在幻象活动的至少部分期间观看者可以看到传输幻象但是看不到使用者的物理身体。进一步地,在一些实施例中,观看者可以变成随后的传输幻象的期望的目标使得观看者变成与随后的传输幻象关联的使用者。在一个实施例中,使用者、第一观看者和第二观看者可以在对于在主题公园处的景观的队列中。使用者在队列中是第一个、第一观看者在队列中是第二个且第二观看者在队列中是第三个。使用者可以是第一传输幻象的期望目标而第一观看者和/或第二观看者可以观看第一传输幻象。在第一传输幻象完成之后,第一观看者可以过渡成与第二传输幻象关联的使用者(例如,期望的目标)的角色而第二观看者可以观看第二传输幻象,以此类推等等。关于在特定的传输幻象期间的使用者和观看者的角色以及角色之间的过渡(例如,从观看者到使用者)的附加细节可以参考图1-4在以下讨论。
现在转向附图,图1是可以实施如本文提供的传输幻象的幻象环境100的示意图示。幻象环境100包括路径108,所述路径108由使用者106通过幻象环境100所行进并且随后地由与沿着路径108的使用者106关联的传输幻象104的观看者102所行进。在图示的实施例中,路径108可以包括路径108的第一区域111,在所述第一区域111中观看者102可以被定位以观看与使用者106关联的传输幻象104。尽管单个观看者102被图示为定位在第一区域111内,应当注意的是,任何数量的观看者102可以被定位在第一区域111内以观看与使用者106关联的传输幻象104。
另外,路径108还可以包括第二区域112(例如,过渡区域或图像捕获区域),通过所述第二区域112使用者106可以朝向第三区域114(例如,幻象区域)移动,在所述第三区域114中特殊效果可视化系统(见图4)将传输幻象104提供给在第一区域111中的观看者102。如本文提供的,在前面的传输幻象104已经完成之后,观看者102可以过渡到使用者106的角色。在这样的过渡期间,第二区域112可以与在其中发生观看者102的角色和使用者106的角色之间的过渡的区域关联。例如,在前面的传输幻象104已经完成之后,观看者102可以通过第二区域112朝向第三区域114移动。随着观看者102移动通过第二区域112,观看者102可以过渡成随后的传输幻象104的使用者106的角色。例如,特殊效果可视化系统可以获取与使用者106(例如,之前的观看者102)关联的图像数据。特殊效果可视化系统可以随后使用图像数据以捕获使用者106的肖像以将在第三区域114中的随后的传输幻象104实现到定位在第一区域111内的附加观看者102。关于与使用者106关联的图像数据的获取的附加细节可以参考图4在以下讨论。
在一些实施例中,第二区域112和第三区域114可以重叠或是相同区域。例如,使用者106的捕获区域和传输幻象104被提供在其中的区域可以是相同区域但是在区域内的不同地点处。
随着使用者106行进通过第三区域114,特殊效果可视化系统可以触发一个或更多环境效果(例如,嗅觉、热、风、冷、触觉或听觉)来为使用者106提供与传输幻象104的特别的特点(例如,消失到烟或火焰中、分散成颗粒或行走到虫洞中)关联的各种感官刺激。也就是说,特殊效果可视化系统可以为使用者106提供环境改变的感觉来为观看者102增强幻象并且来在使用者106行进通过第三区域114时提供使用者106被传输到另一地点的幻象。另外,在使用者106行进通过第三区域114时,特殊效果可视化系统可以在第三区域114中提供与使用者106关联的传输幻象104。例如,特殊效果可视化系统可以在第三区域中触发一个或更多特殊效果并且显示使用者106肖像以将传输幻象104实现到定位在第一区域111中的观看者102。关于由特殊效果可视化系统触发的环境效果、触发的特殊效果和使用者106的肖像的显示的附加细节可以参考图4和图5在以下讨论。
传输幻象104可以发生在第三区域114中的位置115处,所述位置115在第二区域112和使用者106的实时位置之间。也就是说,在当使用者106已经沿着路径108行进经过传输幻象104的位置115时的时间点上,传输幻象104被触发或开始,使得实际使用者106与显示为幻象104的部分的使用者106的显示的肖像重叠或干涉。
在使用者106行进通过第三区域114之后,使用者106可以进入到路径108的第四区域116中。在一些实施例中,使用者106可以经过可移动的墙124从第三区域114移动到第四区域116。在一个实施例中,可移动的墙125可以包括打开或滑动以允许使用者106行进到第四区域116中的一个或更多门。在使用者106已经进入到第四区域116中之后,门可以关闭或滑动回到位置中。在另一实施例中,可移动的墙125可以滑动到左或右以允许使用者106行进到第四区域116中。在另一实施例中,使用者106转弯或移动到另一房间或过道中以移动到第四区域116中。在任何情况下,在使用者106进入到第四区域116中之后,使用者可以继续沿着路径108行进。
从第三区域114到第四区域116的使用者106的通过促进在传输幻象期间和/或在传输幻象之后使用者106从观看者104的阻隔。尽管图1图示了可移动的墙124以帮助促进使用者106的阻隔,应当注意的是,用于在传输幻象104期间和/或在传输幻象104之后阻止观看者102观看使用者106的任何其他合适的方式都可以被使用。例如,使用者106可以经过旋转门或墙(见图3),使用者106可以由平台降低(见图2)或抬升,使用者106可以通过陷阱门降落,可移动的墙126可以在使用者106接近它时向后移动并且另一墙可以被定位在使用者106之后,或用于从观看者102阻隔使用者106的任何其他合适的方式。
如在图1中图示的,路径108可以具有附加区域,例如,定位在第四区域114之后的使用者106可以行进通过并且形成幻象环境100的其他部分的第五区域118、第六区域120。然而,应当注意,在一些实施例中,路径108可以具有在第四区域116之后的使用者106可以经过的任何数量的区域。在一些实施例中,路径108还可以在第三区域114之前具有任何数量的区域。
每个相应区域111、112、114、116、118、120可以具有至少部分地限定路径108的每个区域的一个或更多墙。例如在图示的实施例中,第三区域114可以具有部分地包围第三区域114的墙126、128,使得可以朝向传输幻象104引导观看者102的注意力。第四区域116、第五区域118和第六区域120也可以具有部分地包围每个区域的一个或更多墙130。例如,墙130可以帮助限定供使用者106行进通过的路径108或可以形成幻象环境100的其他特征。
在一些实施例中,各种器具可以用于将观看者102引导到路径108和/或引导使用者106远离路径108。例如,自动扶梯、升降机、移动人行道、楼梯或可以被实施的另一路径。在另一实施例中,可以没有东西将观看者102引导到路径和/引导使用者106远离路径。
还应当注意的是,传输幻象104的观看者102的位置可以不限制于第一区域111。在一些实施例中,观看者102可以被定位在第三区域114之外的任何区域(在其中发生传输幻象104)中,使得观看者102可以观看传输幻象104但是具有对使用者106的物理身体的受阻挡的视野。
图2是使用者106可以行进的路径108和可以由特殊效果可视化系统产生的传输幻象104的另一实施例的示意图示。使用者106可以被降低到一通道,在所述通道中路径108继续。如在图2中图示的,使用者106可以移动到在第四区域116中的平台。平台可以将使用者106降低使得在使用者106的下降期间和/或在使用者106的下降之后观看者102不可以看到使用者106。例如,第三区域的地面、第四区域的后墙和路径108的环境的其他构件可以从观看者102阻隔使用者106。
图3是使用者106可以行进的路径108和可以由特殊效果可视化系统产生的传输幻象104的另一实施例的示意图示。如在图3中图示的,可以存在多个观看者102,所述多个观看者102可以从各种角度观看传输幻象104。多个观看者102可以看到传输幻象104,但是使用者106的视野可以由路径环境的各种构件(例如,墙、门、顶板、地面、在环境中的物体、或其部分)阻隔。另外,使用者106可以经过旋转墙124以从第三区域114移动到第四区域116。旋转墙124帮助促进使用者106从传输幻象104的多个观看者102的阻隔。
尽管图1-3图示了促进瞬间移动(teleportation)幻象104的显示和/或使用者106从观看者102的阻隔的路径108、路径环境的构件(例如,墙或地面)以及各种器具(例如,可移动的墙、旋转墙或门、平台)的各种配置,但是应当注意,路径108、路径环境的构件以及器具的任何其他合适的配置都可以被用来促进瞬间移动幻象104的显示和/或使用者106从观看者102的阻隔。例如,路径108可以包括任何合适数量的转弯、弯曲、高度改变等等以给使用者106和/或观看者提供沉浸式和/或变换式体验。
图4是特殊效果可视化系统202的示例性实施例的图示200,所述特殊效果可视化系统202可以用图1的幻象环境100实施并且被配置成捕获使用者106的肖像并且在使用者106沿着路径108行进时基于使用者106的肖像提供传输幻象104。在图示的实施例中,特殊效果可视化系统202可以包括经由通信网络212联通的控制系统208、环境系统210和捕获系统214。数据集(例如,音频数据、图像数据、空间数据或传感器数据)可以经由通信网络212在特殊效果可视化系统202的构件之间传递。通信网络212可以包括任何数量的输入/输出(I/O)界面和/或网络界面。通信网络可以实现在各种有线或无线网络(诸如个人域网络(PAN)、蓝牙、局域网络(LAN)或无线局域网络(WLAN)(诸如Wi-Fi)和/或用于广域网络(WAN)(诸如蜂窝网络))上的数据传递。
特殊效果可视化系统202的捕获系统214可以在路径108的第二区域112中获取与使用者106关联的图像数据。捕获系统214可以包括一个或更多摄相机以获取与使用者106关联的图像数据。例如,摄相机可以包括一个或更多二维(2D)摄相机、一个或更多三维(3D)摄相机、视频摄相机、一个或更多红外线(IR)摄相机、一个或更多深度摄相机、或代替摄相机的或除摄相机之外的任何其他合适的图像接收装置,以促进与使用者106关联的图像数据的获取。在一个实施例中,摄相机可以被定位在使用者106的上方或前方。在另一实施例中,两个或更多摄相机可以被定位在第二区域112中围绕使用者106的各种点处。在又另一个实施例中,两个或更多摄相机可以被定位在移动轨道上使得摄相机可以在使用者106移动通过第二区域112时从各种角度获取图像数据。在任何情况下,捕获系统214可以获取与使用者106关联的图像数据集。在一些实施例中,图像数据集可以包括移动数据、热数据、体积数据、形状数据、空间数据、视觉数据或可以被用来捕获使用者106的视觉肖像的与使用者106关联的任何其他合适的数据。
在图示的实施例中,在第二区域传感器220已经在路径108的第二区域112中检测使用者106的存在之后,捕获系统214可以获取与使用者关联的图像数据。在一些实施例中,传感器220可以包括一个或更多超声波传感器、一个或更多光传感器、一个或更多压力传感器、一个或更多热传感器、一个或更多IR传感器、一个或更多压电传感器或用于在第二区域中检测使用者106的存在的任何其他合适类型的传感器。
在一些实施例中,捕获系统214可以被定位在除路径108的第二区域112之外的区域中。例如,捕获系统214可以被定位在第三区域114(在其中传输幻象104被提供给观看者)之前的任何合适的区域中。在一个实施例中,在使用者106已经行进到路径108的第二区域112之前,捕获系统214可以在一些预确定的时间或地点处获取与使用者106关联的图像数据集。图像数据集可以被存储在通信地耦联到捕获系统214的数据库中。在这样的实施例中,捕获系统214可以然后获取与使用者106关联的图像数据,例如,当使用者106行进通过时第二区域112时。在一些实施例中,获取的图像数据可以仅对应于存储的图像数据集的子集。例如,捕获系统214可以确定在获取的图像数据中的一个或更多使用者特点,捕获系统214(或数据库)可以使用所述一个或更多使用者特点以确定与在数据库中的存储的图像数据集的匹配。在确定了在获取的图像数据和存储的图像数据集之间的匹配之后,捕获系统214可以从数据库接收匹配的存储的图像数据集以用于实现传输幻象104。
在捕获系统214已经获取与使用者106关联的图像数据集之后,捕获系统214可以基于与使用者关联的图像数据集捕获使用者106的视觉肖像。由捕获系统214捕获的使用者106的视觉肖像可以包括任何合适的数字数据和/或模拟数据以表达使用者106的外表和/或存在,包括但不限制于图像数据、传感器数据等等。照此方式,捕获系统214可以将指示使用者106的视觉肖像的数据集传递到特殊效果可视化系统202的任何构件以用于进一步使用。
在一个实施例中,显示的肖像可以将使用者106的后部或背部图像呈现给观看者以在沿着路径108移动时提供使用者106经历传输的幻象104。例如,如果捕获的图像示出使用者106戴着帽子或背包,显示的肖像使用图像数据的部分到生成的显示的图像以示出背包。在另一实施例中,显示的图像或多个图像可以示出由图像数据生成的使用者前部,其示出使用者的面部仿佛使用者106被转动以面向观看者。照此方式,家庭群组可以观看通过幻象的可认出的家庭成员。
在一些实施例中,捕获系统214可以修改与使用者106关联的图像数据集以完成使用者106的视觉肖像。例如,当捕获系统214获取与使用者106关联的图像数据集时,使用者106可能已经在不期望的定向或位置中(例如,头部处于向下的角度)。捕获系统214可以应用一个或更多算法以处理数据集使得捕获系统214可以随后获取使用者106的正确的视觉肖像以使用在幻象环境100中。
特殊效果可视化系统202的环境系统210可以从捕获系统214接收指示使用者106的肖像的数据集并且在第三区域114中基于使用者106的肖像显示或以其他方式表达传输幻象104。在图示的实施例中,环境系统210可以在第三区域114中在墙126、128之间显示传输幻象104。然而,在一些实施例中,第三区域114可以不由任何墙限定或可以由任何其他合适数量的墙限定。
环境系统210可以操作以呈现或显示基于数据集生成的一个或更多图像以将使用者106的肖像显示或以其他方式表达到传输幻象104的观看者。另外,与使用者106的肖像关联的图像可以与一个或更多支持的特殊效果协调地呈现以在第三区域114中实现传输幻象104。
进一步地,环境系统210可以处理或改变使用者106的视觉肖像以给观看者提供传输幻象104。例如,图像可以呈现变换的(例如,在边缘处被展开的或消褪开的)使用者的面部的特征以增强使用者106被传输到虫洞中的幻象。在另一示例中,图像可以呈现使用者的身体转变成颗粒的特征以增强使用者106正通过分散成颗粒被传输的幻象。在其他实施例中,显示的图像可以是基于从使用者106提取的可辨认的(例如,面部的)特征。环境系统210可以将这些提取的特征引入到与使用者106相像的期望的人物化身(例如,来自故事中的人物)中。某些人物化身可以与特别的特殊效果(诸如在一阵烟中出现/消失)关联,并且化身的图像的显示与特殊效果(例如,烟围绕投射的释放)的触发的组合可以增强通信的某些故事特征。在图示的实施例中,使用者106被呈递或呈现为宇航员。
在第三区域传感器222已经在路径108的第三区域114中检测到使用者106的存在之后,环境系统210可以基于使用者106的肖像显示或以其他方式表达传输幻象104。在一些实施例中,传感器220可以包括一个或更多热传感器、一个或更多IR传感器、一个或更多压电传感器或用于在第三区域中检测使用者106的存在的任何其他合适类型的传感器。
在使用者106已经行进到第四区域116之后,环境系统210可以停止显示传输幻象104。在一个实施例中,第三区域传感器222可以继续操作以在第三区域114中检测使用者106的存在。在第三区域传感器222不再在第三区域114中检测使用者106的存在之后,环境系统210可以停止显示传输幻象104。在另一实施例中,在预确定的和/或可配置的量的时间已经过去之后,环境系统210可以停止显示传输幻象104。例如,基于与使用者106关联的图像数据,捕获系统214可以确定沿着路径108与使用者106关联的移动的速率。环境系统210可以从捕获系统214接收与使用者106关联的移动的速率并且确定合适的时间段,在所述时间段中基于移动的速率显示传输幻象。
在图示的实施例中,可移动的墙124可以(例如,与墙126、128一起)限定第三区域114的部分和/或作用为用于传输幻象104的显示的投射表面。在使用者106接近可移动的墙124时,特殊效果可视化系统202的控制系统208可以向与可移动的墙124关联的一个或更多致动器发送控制信号以沿相应方向228滑动左部分224和右部分226以允许使用者106经过可移动的墙124到第四区域116。在一个实施例中,控制系统208可以向与可移动的墙124关联的致动器发送控制信号以滑动或打开可移动的墙124的仅一个部分224、226以允许使用者106经过。在另一实施例中,控制系统208可以向与可移动的墙124关联的致动器发送控制信号以滑动或打开整个可移动的墙124以允许使用者106经过。
图5是特殊效果可视化系统202的示例性实施例的图示300,所述特殊效果可视化系统202可以基于在路径108的第三区域114中的使用者的视觉肖像显示或以其他方式表达传输幻象104。在图示的实施例中,特殊效果可视化系统202包括控制系统208、环境系统210、实时图形引擎302和可以经由通信网络212联通的特殊效果系统304。
如以上描述的,在使用者从路径108的第二区域移动到路径108的第三区域114之后,环境系统210可以接收指示使用者106的视觉肖像的图像数据的数据集。在图示的实施例中,环境系统210可以在实时图形引擎302已经处理数据集之后从实时图形引擎302接收数据集。例如,实时图形引擎302可以包括存储器线路和处理线路以在将数据集传递到环境系统210之前对数据集进行变更、处理、修改、调整等等。数据集可以包括各种合适的元数据,诸如幻象标识(illusion identifier)等等,以促进数据集的处理以给使用者和/或观看者提供沉浸式和/或变换式体验。例如,实时图形引擎302可以基于幻象标识处理指示使用者的视觉肖像的数据集来修改数据集以对应于与使用者关联的期望的故事,诸如宇航员行进通过虫洞。然后实时图形引擎302可以将修改的数据集传递到环境系统以基于修改的数据集在第三区域114中显示或以其他方式表达传输幻象104。数据集和/或修改的数据集可以被用来生成作为传输幻象104的部分呈现或显示的一个或更多图像。
在一些实施例中,实时图形引擎302可以基于所接收的指示使用者的肖像的数据集生成与提供使用者的3D肖像关联的数据。例如,实时图形引擎302可以从捕获系统接收体积数据、深度数据、形状数据、空间数据、视觉数据等等并且修改所接收的指示使用者的视觉肖像的数据集以提供使用者的3D肖像。在其他实施例中,数据集可以在通过捕获系统处理之后已经指示使用者的3D肖像。
然后环境系统210可以在第三区域114中基于指示使用者106的视觉肖像的数据集显示或以其他方式表达传输幻象104。在图示的实施例中,环境系统210包括一个或更多投射器(例如,投射器306、308)和环境输出装置312。基于指示使用者106的视觉肖像的数据集,环境系统210可以生成一个或更多控制信号并且将所述一个或更多控制信号传递到环境输出装置312以将物理材料提供到第三区域114。例如,物理材料可以形成投射屏幕(例如,投射媒介物),环境系统210可以在所述投射屏幕上显示或以其他方式表达传输幻象104。在一些实施例中,投射屏幕(和物理材料)或表面可以由雾、水、烟、沙子、冰、低温材料(诸如液态氮气、液态氧气和二氧化碳)或任何其他合适的粒子材料构成。尽管传输幻象104在本文被描述为到物理材料屏幕(例如,雾屏幕、水屏幕、烟屏幕、基于低温的屏幕或显示器、基于沙子的屏幕或显示器、或其他基于粒子的屏幕或显示器)上的图像投射,如将领会的,任何合适的投射或演示技术都可以被用来经由特殊效果可视化系统202提供涉及使用者的视觉肖像的传输幻象104。例如,投射器或多个投射器可以将幻象投射到墙或传统的显示屏幕上。
在一些实施例中,第三区域114的环境的构件还可以被用作投射媒介物的部分使用。例如,墙、门、顶板、地面、在环境或第三区域内的一个或更多物体、或其部分,可以形成投射媒介物的部分。因此,在这样的实施例中,环境系统210可以将与使用者106关联的传输幻象104呈现于投射屏幕或媒介物、在环境中的任何物体(在其中瞬间移动幻象104被显示)、环境的构件(在其中瞬间移动幻象104被显示)或其组合上。
环境系统210还可以生成并且将所述一个或更多控制信号传递到投射器(例如,投射器306、308)以基于指示使用者的视觉肖像的数据集呈现一个或更多图像。例如,图像可以将与使用者关联的传输幻象104提供给一个或更多观看者。也就是说,观看者可以看到使用者的视觉肖像被远离第三区域114传输。
应当注意的是,投射器306、308可以包括代替投射器306、308的或除了投射器306、308之外的一个或更多数字光处理(DLP)投射器、一个或更多液态晶体显示(LCD)投射器、一个或更多3D投射器、或任何其他合适的图像显示装置,以促进与使用者106关联的传输幻象104的显示。在一个实施例中,投射器306、308可以被定位在路径108的第三区域114上方。在另一实施例中,投射器306、308可以包括三个投射器、四个投射器或任何其他合适数量的投射器,以促进与使用者106关联的传输幻象104的显示。由环境信号向投射器传递的控制信号可以控制像素、投射系统等等以容许使用者的视觉肖像到任何合适的物理材料或光中、到任何合适的物理材料或光中上或从任何合适的物理材料或光出来的演示。
在一些实施例中,环境系统210可以向投射器306、308传递控制信号以模拟使用者从路径108的第三区域114的传输。传输幻象104可以包括使用者的视觉肖像的2D或3D表示。例如,传输幻象104可以包括一个或更多图像,所述一个或更多图像呈现使用者的面部和/或身体的特征、使用者面部和/或身体的修改的特征、身体轮廓或与期望的故事关联(其与传输幻象104关联)的各种变换。使用者的面部和/或身体的修改的特征可以包括被变换(例如,展开、歪斜或消褪开)以增强使用者被传输到虫洞中的幻象的使用者的面部和/或身体、或转变成颗粒以增强使用者通过分散成颗粒被传输的幻象的使用者的面部和/或身体。应当注意的是,对使用者的面部和/或身体的视觉肖像的任何其他合适的修改可以用于增强与使用者106关联的传输幻象104。另外,与期望的故事关联的各种动画或显示的图像可以包括视觉效果以增强传输幻象104,诸如虫洞、入口、烟、火焰、颗粒或与期望的故事关联的任何其他合适的视觉效果的动画。
另外,与传输幻象104关联的图像可以与一个或更多特殊效果310(例如,感官效果)协调地呈现以把使用者被传输离开到另一地点的感觉带给使用者。也就是说,特殊效果310或感官效果可以为使用者提供与传输幻象的特别的特点(例如,消失到烟或火焰中、分散成颗粒或行走到虫洞中)关联的各种感官刺激。例如,在使用者行走通过路径108的第三区域114时,特殊效果系统304可以与传输幻象104的演示同步地或基本上同步地触发一个或更多类型的特殊效果310或感官效果(例如,嗅觉、热、风、冷、触觉或听觉)。在一个实施例中,特殊效果系统304可以接收与指示使用者的肖像的数据集关联的元数据。例如,特殊效果系统304可以接收幻象标识并且基于接收的幻象标识触发一个或更多特殊效果310或感官效果。
在一些实施例中,特殊效果系统304可以基于与使用者关联的期望的故事触发一个或更多特殊效果310或感官效果。例如,特殊效果系统304可以关于在其中使用者经由一阵火焰或烟传输的故事释放燃烧气味或发出热或烟效果。在另一示例中,特殊效果系统304可以关于在其中使用者在雷霆闪电中传输的故事产生打雷的声音。在任何情况下,特殊效果系统304可以基于与使用者关联的传输幻象104提供任何合适的特殊效果310或感官效果。
因此,通过将沉浸式和/或变换式体验提供给使用者和观看者两者,特殊效果可视化系统202可以用传输幻象同步地(或基本上同步地)增强使用者的体验和观看者的体验。也就是说,在观看者看到使用者的肖像以传输幻象104在路径108的第三区域114中传输时,使用者可以经由与传输幻象104关联的一个或更多感官刺激体验改变的环境的感觉以增强传输离开的幻象。
考虑到前述情况,图6是特殊效果可视化系统202的框图400的示例性实施例。特殊效果可视化系统202可以包括控制系统208、环境系统210、捕获系统214、实时图形引擎302和特殊效果系统304。如以上描述的,特殊效果可视化系统的每个构件208、210、214、302、304可以经由通信网络212与彼此联通。
实时图形引擎302和控制系统208可以包括相应的存储器线路410、418和相应的处理线路412、420以处理在特殊效果可视化系统202的各种构件208、210、214、302、304之间传送的一个或更多数据集。处理线路412、420可以被用来运行程序、执行指令、翻译输入、生成控制信号和/或其他类似的功能,并且可以包括用来做这些的基于硬件的和/或基于软件的功能或应用的组合。存储器线路410、418可以被用来将数据、程序、指令、诊断数据和最终数据等等存储在各种合适的存储器或贮存器类型中,诸如随机存取存储器、只读存储器、闪存存储器、硬盘驱动、在目前时间已知的和未知的两者的未来贮存技术(例如,在脱氧核糖核酸(DNA)上的数据贮存)等等。
数据集(例如,音频数据、图像数据、空间数据和附加传感器数据)可以经由通信网络212在构件208、210、214、302、304之间传递。通信网络212可以包括任何数量的输入/输出(I/O)界面和/或网络界面。通信网络212可以实现在各种有线或无线网络上的数据传递。以此方式,数据集可以在模拟域或数字域中被记录或感知并且在模拟域或数字域或其任何组合中在特殊效果可视化系统202的构件208、210、214、302、304之间传递。
控制系统208可以操作捕获系统214、环境系统210和特殊效果系统304以给使用者和观看者提供与传输幻象关联的沉浸式和/或变换式体验。以此方式,控制系统208可以生成一个或更多控制信号以分别控制捕获系统214、环境系统210和特殊效果系统304的各种功能。例如,控制系统208可以向特殊效果系统304传递一个或更多控制信号以至少部分地基于控制信号触发一个或更多特殊效果。
如以上描述的,捕获系统214可以获取与使用者关联的图像数据集并且捕获使用者的视觉肖像。控制系统208可以向图像捕获装置402传递一个或更多控制信号以获取与使用者关联的图像数据集。例如,图像捕获装置可以包括如本文描述的一个或更多摄相机。在捕获使用者的视觉肖像之后,捕获系统可以经由通信网络212将指示使用者的视觉肖像的图像数据的数据集传递到特殊效果可视化系统202的其他构件(例如,210、302、304)。
环境系统210可以从捕获系统214和/或实时图形引擎302接收指示使用者的肖像的数据集并且基于使用者的肖像显示或以其他方式表达传输幻象。控制系统208可以向环境输出装置312传递一个或更多控制信号以提供由物理材料(例如,雾、水、烟、沙子、冰或低温材料)构成的投射屏幕。控制系统208还可以向视频输出装置406(例如,投射器)传递一个或更多控制信号以将传输幻象显示在由环境输出装置312提供的投射屏幕上。另外,控制系统208可以向音频输出装置408(例如,扬声器、触觉转换器或其他合适的装置)传递一个或更多控制信号以给使用者和/或观看者提供与传输幻象关联的一个或更多声音。在一些实施例中,控制信号可以由环境系统210的子构件(诸如响应所接收的指示使用者的视觉肖像的数据集的驱动线路)生成。环境输出装置312、视频输出装置406和音频输出装置408可以由控制系统208同步地或基本上同步地控制以显示或以其他方式表达传输幻象。
特殊效果系统304可以基于与使用者关联的期望的故事触发一个或更多类型的特殊效果310或感官效果(例如,嗅觉、热、风、冷、触觉或听觉)。控制系统208可以向特殊效果系统304传递一个或更多控制信号以给使用者提供特殊效果或感官效果使得使用者可以感觉仿佛他们被从使用者的位置传输。以此方式,特殊效果或感官效果可以促进用传输幻象将的沉浸式和/或变换式体验提供给使用者。特殊效果系统304可以包括一个或更多特殊效果310(例如,传感器效果)和控制器416。控制器416可以致动或控制构件(诸如阀、致动器、杆等等)以生成特殊效果310。例如,控制器416可以基于与使用者的传输幻象关联的期望的故事释放燃烧气味,发出热,产生打雷的声音,产生一系列的振动等等。在一些实施例中,特殊效果310可以在到房间的入口或出口处被触发。
在一些实施例中,控制系统208可以控制捕获系统214的追踪装置404,所述追踪装置404沿着路径监控使用者的位置并且当使用者在适当位置中时向捕获系统214、环境系统210和/或特殊效果系统304传递一个或更多控制信号以执行如本文描述的每个构件的操作中的一个或更多。例如,追踪装置404可以在路径的第二区域中检测使用者的位置并且将与使用者关联的位置数据集传递到控制系统。基于位置数据集,控制系统208可以向捕获系统214传递一个或更多控制信号以获取使用者的图像数据。在一些实施例中,追踪装置404可以将位置数据集直接传递到捕获系统214。在另一示例中,追踪装置404可以在第三区域中检测使用者的位置并且将与使用者关联的位置数据集传递到控制系统。基于位置数据集,控制系统208可以向环境系统210和/或特殊效果系统304传递一个或更多控制信号以基于使用者的位置激活传输幻象的一个或更多构件。在一个实施例中,特殊效果系统304可以在使用者移动接近路径的第四区域时增加提供给使用者的特殊效果(例如,振动)的强烈程度(例如,以使得使用者感觉好像使用者最初已经被拉到虫洞中并且现在被完全地传输在虫洞中)。在一些实施例中,控制系统214和/或实时图形引擎302可以基于使用者的追踪的位置修改数据集。
如可以领会的,加强处理可以被用来用传输幻象给使用者和观看者提供沉浸式和/或变换式体验。实时图形引擎302和控制系统208可以包括相应处理线路412、420以处理在特殊效果可视化系统202的构件208、210、214、302、304之间传送的一个或更多数据集。以此方式,一个或更多数据集的处理中的一些或全部可以在控制系统208和实时图形引擎302之间共享。在数据传递继续时数据集的处理可以发生。以此方式,数据集可以被用来实时生成控制信号(例如,以致使特殊效果或以驱动与使用者关联的传输幻象的演示)。
图7是用于用传输幻象将沉浸式和/或变换式体验提供给使用者和/或观看者的过程500的流程图。尽管过程500在以下被描述为由特殊效果可视化系统202的控制系统208执行,但是应当理解的是,过程500可以由如本文提供的特殊效果可视化系统202的任何构件210、214、302、304执行。此外,尽管过程500的以下描述被以特别的顺序描述,但是应当注意的是,过程500可以以任何合适的顺序执行。
在框502处,控制系统208可以在步行道的第二区域中检测使用者的存在。控制系统208可以响应于从指示使用者或其部分已经进入步行道的第二区域的一个或更多传感器接收的数据检测使用者。在一些实施例中,控制系统208可以在从与使用者关联的计算装置和/或经由与特殊效果可视化系统202关联的输入装置接收开始输入之后检测使用者。开始输入可以指示到控制系统208以获取与使用者关联的图像数据。此外,控制系统208可以将一个或更多开始输入传递到特殊效果可视化系统202的其他构件210、302、304。
在框504处,控制系统208可以向捕获系统214传递一个或更多控制信号以获取与使用者关联的图像数据。在一些实施例中,图像数据可以包括移动数据、热数据、体积数据、形状数据、空间数据、视觉数据或与使用者关联的任何其他合适的数据。在使用者行进通过步行道的第二区域时,捕获系统214可以获取使用者的图像数据使得可以基于图像数据生成使用者的2D表示或3D表示。
在框506处,在与使用者关联的图像数据已经被获取之后,控制系统208可以向捕获系统214传递一个或更多控制信号以基于图像数据捕获使用者的视觉肖像。例如,捕获系统214可以基于图像数据确定使用者的2D表示或3D表示。在一些实施例中,在与使用者关联的图像数据已经被获取之后,捕获系统214可以自动地处理图像数据以确定使用者的视觉肖像。在任何情况下,在捕获系统214已经获取使用者的视觉肖像之后,捕获系统214可以将指示使用者的视觉肖像106的数据集传递到控制系统208、环境系统210、实时图形引擎302和/或特殊效果系统304。
在框508处,控制系统208可以向环境系统210、实时图形引擎302和/或特殊效果系统304传递一个或更多控制信号以向使用者和/或观看者生成与传输幻象的演示关联的一个或更多控制信号。例如,环境系统可以生成一个或更多控制信号以基于指示使用者的视觉肖像的数据集显示与使用者关联的传输幻象。在一些实施例中,在将数据集传递到环境系统210之前,实时图形引擎302可以基于幻象标识处理指示使用者的视觉肖像的数据集以修改数据集以对应于与使用者关联的期望的故事(例如,宇航员行进通过虫洞)。
特殊效果系统304还可以基于指示使用者的视觉肖像的数据集生成一个或更多控制信号以触发一个或更多特殊效果或感官效果。例如,特殊效果系统304可以接收具有数据集的幻象标识并且基于幻象标识生成控制信号。例如,特殊效果系统304可以生成控制信号以基于在其中使用者被传输,留下烟或火焰的故事释放燃烧气味和/或发出热。在任何情况下,特殊效果系统304可以基于与使用者关联的传输幻象生成一个或更多控制信号以提供任何合适的特殊效果310或感官效果。
在一些实施例中,特殊效果可视化系统202的控制系统208可以接收与传输幻象关联的故事的选择。故事的选择可以经由使用者输入装置(诸如表盘、语音控制、触屏、按钮、呈现在显示装置上的图形的、空间的和/或物理的使用者界面等等)被接收。在一个实施例中,在使用者进入路径的第二区域之前,控制系统208可以接收选择。在另一实施例中,控制系统208可以在路径的第一区域、第二区域或第三区域中接收选择。
在框510处,控制系统208可以在步行道的第三区域中检测使用者的存在。控制系统208可以响应于从指示使用者或其部分已经进入步行道的第三区域的一个或更多传感器接收的数据检测使用者。
在框512处,控制系统208可以向环境系统210和/或特殊效果系统304传递一个或更多控制信号以响应于在步行道的第三区域中检测到使用者的存在而触发如本文描述的一个或更多相应操作。例如,环境系统210可以基于在框508处生成的一个或更多控制信号显示与使用者关联的传输幻象。环境系统210可以向环境输出装置312传递第一控制信号以在第三区域中提供物理材料(例如,雾、水、烟、沙子、冰或低温材料)的投射屏幕,向一个或更多视频输出装置(例如,投射器)传递第二控制信号以将与传输幻象关联的一个或更多图像呈现在投射屏幕上,向一个或更多音频输出装置(例如,扬声器)传递第三控制信号以呈现与传输幻象关联的音频,或其组合。以此方式,环境系统210可以提供可以被一个或更多观看者看到和/或听到的与使用者关联的传输幻象。
另外,特殊效果系统304可以基于在框508处生成的一个或更多控制信号触发与传输幻象关联的一个或更多特殊效果310(例如,感官效果)。也就是说,特殊效果310或感官效果可以为使用者提供与传输幻象的特别的特点关联的各种感官刺激(例如,嗅觉、热、风、冷、触觉或听觉)。在一些实施例中,在传输幻象通过环境幻象提供给观看者时,特殊效果310或感官效果可以同步地或基本上同步地被提供给使用者。以此方式,在使用者行走通过第三区域同时观看者看到使用者的肖像被传输离开时,使用者可以感觉好像使用者被传输另一地点。因此,通过给使用者和观看者两者提供沉浸式和/或变换式体验,特殊效果可视化系统202可以用传输幻象同步地(或基本上同步地)增强使用者的体验和观看者的体验。
在框514处,控制系统208可以确定使用者是否仍在路径的第三区域中。例如,控制系统208可以基于从指示使用者或其部分仍在路径的第三区域中的传感器接收的数据检测使用者的存在。如果控制系统208确定使用者仍在路径的第三区域中,过程500可以进行回到框512并且传输幻象可以由环境系统210和/或特殊效果系统304继续产生。如果控制系统208确定使用者不再在路径的第三区域中,在框518处,控制系统208可以向环境系统210和/或特殊效果系统304传递一个或更多控制信号以在框516处停止提供与使用者关联的传输幻象。在一些实施例中,在从与传输幻象关联的计算系统接收停止命令信号之后,控制系统208可以向环境系统210和/或特殊效果系统304传递控制信号。
另外,某些操作可以被执行以减少或消除在第三区域中由环境输出装置312产生的残余的特殊效果310或物理材料。例如,特殊效果可视化系统202可以操作以从第三区域消除或减少残余的喷雾、雾、水、烟、沙子、冰、低温材料或其他粒子材料以为随后的使用者和/或随后的观看者提供对传输幻象的中性的初始体验。以此方式,随后的使用者和/或随后的观看者可以不体验与之前的传输幻象关联的残余的视觉、音频或感官效果。
在与使用者关联的传输幻象已经被停止并且任何残余的效果被最小化之后,过程500可以可选地回到框502并且为传输幻象的随后的使用者和/或观看者重复。
在一些实施例中,附加构件(诸如镜子或其他反射的表面)可以被包括在特殊效果可视化系统202内或邻近于特殊效果可视化系统202以遮蔽、隐藏、增强、歪曲或复制特殊效果可视化系统202的构件。以此方式,在使用者沿着路径行进通过时,特殊效果可视化系统可以隐藏于使用者。相对于不隐藏装置而言,隐藏特殊效果可视化系统202的一个或更多可以提升使用者体验。
在一些实施例中,面部识别、语音识别、内容加工(例如,言语到文本、文本到言语)和/或用于内容的审查的言语检测(例如,俚语或粗鄙语言的阻止)也可以被用来增强使用者体验。另外,一个或更多传感器已经在本文描述;然而,应当理解的是,任何合适的传感器(包括热传感器、空间传感器、超声波传感器、红外线传感器等等)可以被用在特殊效果可视化系统202中以用传输幻象提供沉浸式和/或变换式体验。
考虑到前述情况,本公开的技术效果包括通过改进可视化系统的能力来用传输幻象为使用者和一个或更多观看者提供沉浸式和/或变换式体验而对可视化系统进行的改进。通过将沉浸式和/或变换式体验提供给使用者和观看者两者,以上描述的技术可以用传输幻象同步地(或基本上同步地)增强使用者的体验和观看者的体验。也就是说,在观看者看到使用者的肖像在路径的第三区域中以传输幻象传输时,使用者可以经由与传输幻象104关联的一个或更多感官刺激体验被传输离开的感觉。
尽管本文已经图示和描述了本公开的仅某些特征,但是对于那些本领域技术人员而言,将出现许多修改和改变。因此,要理解的是,所附权利要求书旨在覆盖如落入本公开的实质精神内的所有这样的修改和改变。
本文所呈现和要求保护的技术被引用和应用到明显改进本技术领域的具有实用性质的实物和具体示例,并且因此不是抽象的、无形的或纯理论的。进一步地,如果附到此说明书的最后的任何权利要求包含被指定为“用于[执行][功能]的装置…”或“用于[执行][功能]的步骤…”的一个或更多要素,它旨在这样的要素要根据35 U.S.C. 112(f)解释。然而,对于包含以任何其他方式指定的要素的任何权利要求,它旨在这样的要素不要根据35U.S.C. 112(f)解释。

Claims (25)

1.一种特殊效果可视化系统,其包括:
捕获系统,其被配置成在第一地点处基于使用者的肖像数据生成与所述使用者关联的数据集;
环境系统,其被配置成在不同于所述第一地点的第二地点处显示一个或更多图像,其中所述一个或更多图像用与所述使用者关联的所述数据集生成;
特殊效果系统,其被配置成在所述第二地点处触发特殊效果;以及
控制系统,其通信地耦联到所述捕获系统、所述环境系统和所述特殊效果系统,其中所述控制系统被配置成:
在所述第二地点处检测所述使用者的存在;以及
响应于在所述第二地点处检测到所述使用者的所述存在:
基于所述数据集向所述环境系统传递一个或更多控制信号,其中所述一个或更多控制信号被配置成致使所述环境系统在所述使用者已经行进经过所述第二地点至不同于所述第二地点的第三地点之后在所述第二地点处显示所述一个或更多图像;以及
向所述特殊效果系统传递一个或更多附加控制信号,其中所述一个或更多附加控制信号被配置成致使所述特殊效果系统在所述第二地点处在所述一个或更多图像的显示期间触发所述特殊效果。
2.根据权利要求1所述的特殊效果可视化系统,其中所述环境系统被配置成通过在所述第二地点处提供投射媒介物并且将所述一个或更多图像显示在所述投射媒介物上而在所述第二地点处显示所述一个或更多图像。
3.根据权利要求2所述的特殊效果可视化系统,其中所述投射媒介物包括至少水、烟、雾、冰、液态氮气、液态氧气或其组合。
4.根据权利要求1所述的特殊效果可视化系统,其中所述一个或更多图像通过修改所述数据集的所述肖像数据以将远离所述第二地点传输的所述使用者的肖像至少展开、分散或消褪而生成。
5.根据权利要求1所述的特殊效果可视化系统,其中所述一个或更多图像呈现所述使用者的肖像。
6.根据权利要求1所述的特殊效果可视化系统,其中所述一个或更多图像包括所述使用者的三维(3D)表示。
7.根据权利要求1所述的特殊效果可视化系统,其中所述控制系统被配置成提取在与所述使用者关联的所述肖像数据中的可辨认特征,并且其中所述一个或更多图像基于所述提取的可辨认特征生成。
8.根据权利要求1所述的特殊效果可视化系统,其中所述特殊效果包括至少嗅觉、热、风、冷、触觉、听觉效果或其组合。
9.根据权利要求1所述的特殊效果可视化系统,其中所述肖像数据包括至少体积数据、深度数据、空间数据、移动数据、视觉数据或形状数据。
10.根据权利要求1所述的特殊效果可视化系统,其中所述捕获系统被配置成响应于所述控制系统在所述第一地点处检测到所述使用者的所述存在而获取所述使用者的所述肖像数据。
11.根据权利要求1所述的特殊效果可视化系统,其中所述控制系统被配置成调整包括所述第一地点、所述第二地点或两者的物理集的配置。
12.根据权利要求1所述的特殊效果可视化系统,其中所述第二地点包括到房间的入口或出口。
13.一种特殊效果可视化系统,其包括:
捕获系统,其被配置成在第一地点处获取使用者的肖像数据并且基于所述肖像数据生成数据集;
环境系统,其被配置成在所述使用者已经行进经过第二地点至不同于所述第二地点的第三地点之后在不同于所述第一地点的第二地点处基于所述数据集显示3D演示,其中所述3D演示包括所述使用者的肖像;以及
特殊效果系统,其被配置成在所述3D演示的显示期间在所述第二地点处触发特殊效果。
14.根据权利要求13所述的特殊效果可视化系统,其包括被配置成在所述第二地点处检测所述使用者的存在的传感器,其中所述环境系统被配置成显示所述3D演示,并且所述特殊效果系统被配置成在所述传感器已经在所述第二地点处检测到所述使用者的所述存在之后触发所述特殊效果。
15.根据权利要求14所述的特殊效果可视化系统,其中所述环境系统被配置成致动可移动的墙以在所述3D演示的显示期间容许所述使用者远离所述第二地点的通过。
16.根据权利要求14所述的特殊效果可视化系统,其中所述传感器包括热传感器、空间传感器、超声波传感器、红外线传感器、压力传感器或其任何组合。
17.根据权利要求13所述的特殊效果可视化系统,其中所述3D演示包括至少颗粒、烟、火或其组合。
18.根据权利要求13所述的特殊效果可视化系统,其中所述特殊效果包括嗅觉、热、风、冷、触觉、听觉效果或其组合。
19.根据权利要求13所述的特殊效果可视化系统,其包括实时图形引擎,所述实时图形引擎被配置成基于与所述3D演示关联的标识修改所述数据集。
20.根据权利要求19所述的特殊效果可视化系统,其中所述实时图形引擎被配置成修改所述数据集以至少变换所述使用者的所述肖像。
21.一种方法,其包括:
经由捕获系统在第一地点处获取与使用者关联的数据集,其中所述数据集包括所述使用者的肖像数据;
经由控制系统在第二地点处检测所述使用者;
响应于在所述第二地点处检测到所述使用者:
在所述使用者已经行进经过所述第二地点至不同于所述第二地点的第三地点之后,经由环境系统在所述第二地点处显示由所述数据集生成的一个或更多图像;以及
经由特殊效果系统在所述第二地点处在显示期间触发特殊效果。
22.根据权利要求21所述的方法,其中在所述第二地点处显示由所述数据集生成的所述一个或更多图像包括在所述第二地点处提供投射媒介物以及在所述投射媒介物上显示所述一个或更多图像。
23.根据权利要求22所述的方法,其中提供所述投射媒介物包括提供至少水屏幕、烟屏幕、雾屏幕、喷雾屏幕、冰屏幕、液态氮气屏幕、液态氧气屏幕、沙子屏幕或其组合。
24.根据权利要求21所述的方法,其中触发所述特殊效果包括触发至少嗅觉、热、风、冷、触觉、听觉效果或其组合。
25.根据权利要求21所述的方法,其包括:
在所述第二地点处或在所述第三地点处追踪所述使用者的位置;
基于所述使用者的所述追踪的位置修改所述数据集;以及
在所述第二地点处显示由所述修改的数据集生成的附加图像。
CN201980071877.0A 2018-10-29 2019-08-20 特殊效果可视化技术 Active CN112912151B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201862752216P 2018-10-29 2018-10-29
US62/752216 2018-10-29
US16/395,089 US11090576B2 (en) 2018-10-29 2019-04-25 Special effects visualization techniques
US16/395089 2019-04-25
PCT/US2019/047319 WO2020091877A1 (en) 2018-10-29 2019-08-20 Special effects visualization techniques

Publications (2)

Publication Number Publication Date
CN112912151A CN112912151A (zh) 2021-06-04
CN112912151B true CN112912151B (zh) 2023-02-03

Family

ID=70327604

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980071877.0A Active CN112912151B (zh) 2018-10-29 2019-08-20 特殊效果可视化技术

Country Status (9)

Country Link
US (1) US11090576B2 (zh)
EP (2) EP4299153A3 (zh)
JP (1) JP7367015B2 (zh)
KR (1) KR20210082510A (zh)
CN (1) CN112912151B (zh)
CA (1) CA3116401A1 (zh)
ES (1) ES2972688T3 (zh)
SG (1) SG11202103442SA (zh)
WO (1) WO2020091877A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4071701A4 (en) * 2019-12-04 2022-12-07 NEC Corporation INFORMATION PRESENTATION SYSTEM, INFORMATION PRESENTATION METHOD, COMPUTER PROGRAM AND AUTHENTICATION SYSTEM
US11559748B2 (en) * 2020-07-31 2023-01-24 Universal City Studios Llc Systems and methods for producing visual effects via transducer-actuated show action equipment

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06110480A (ja) * 1992-09-25 1994-04-22 Yamaha Corp カラオケ装置
CN1443086A (zh) * 2000-07-17 2003-09-17 兰迪·T·斯普劳特 交互式虚拟现实演出剧场娱乐系统
JP2003303356A (ja) * 2002-04-09 2003-10-24 Canon Inc 展示装置
US7555147B2 (en) * 2005-09-30 2009-06-30 Richard Simmons Video recording system for an amusement park ride and associated methods
CN102982525A (zh) * 2011-06-01 2013-03-20 索尼公司 图像处理装置、图像处理方法和程序
US8537154B2 (en) * 2005-09-15 2013-09-17 Dentsu, Inc. Attraction system and attraction providing method
CN106659940A (zh) * 2014-05-21 2017-05-10 环球城市电影有限责任公司 用于游乐园元件的自动化的光学跟踪系统

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5270752A (en) 1991-03-15 1993-12-14 Ushio U-Tech Inc. Method and apparatus for a fog screen and image-forming method using the same
US5830065A (en) 1992-05-22 1998-11-03 Sitrick; David H. User image integration into audiovisual presentation system and methodology
JPH07306955A (ja) 1992-07-24 1995-11-21 Walt Disney Co:The 三次元イリュージョンを生み出す方法およびシステム
KR100416991B1 (ko) * 2001-01-11 2004-02-05 삼성전자주식회사 가상 배경 표시 기능을 갖는 영상 단말 장치 및 그 구현방법
US6857746B2 (en) 2002-07-01 2005-02-22 Io2 Technology, Llc Method and system for free-space imaging display and interface
JP2004289434A (ja) 2003-03-20 2004-10-14 Fuji Photo Film Co Ltd 撮影システム
US7924306B2 (en) * 2006-09-15 2011-04-12 Hewlett-Packard Development Company, L.P. Videoconferencing with enhanced illusion of physical presence in a common space
US8144181B2 (en) * 2008-06-12 2012-03-27 Cisco Technology, Inc. Ad hoc telepresence manager
GB2479522A (en) 2010-03-24 2011-10-19 Barry Blundell Use of non-solid projection screens in immersive environments
US8878894B2 (en) * 2010-09-15 2014-11-04 Hewlett-Packard Development Company, L.P. Estimating video cross-talk
US8567954B2 (en) 2011-06-30 2013-10-29 Disney Enterprises, Inc. 3D display system with rear projection screens formed of water mist or spray
CN102508651B (zh) * 2011-09-29 2015-04-15 深圳超多维光电子有限公司 用户界面的实现方法及系统、电子设备
US20130217487A1 (en) 2012-02-17 2013-08-22 Sg Labs, Llc Character image projection methods and systems
US8795096B2 (en) 2012-05-30 2014-08-05 Daniel James Stoker Motion ride method and apparatus for illusion of teleportation
US9764245B2 (en) 2012-11-09 2017-09-19 Whitewater West Industries Ltd Interactive amusement attraction system and method
US10728496B2 (en) * 2013-09-14 2020-07-28 Taskin Sakarya Virtual transportation machine
US10384144B2 (en) 2015-03-13 2019-08-20 Ventana 3D, Llc Travel case for portable Pepper's Ghost Illusion setup
US9358473B2 (en) 2015-03-24 2016-06-07 Anthony Frolov Interactive amusement attraction
JP6870274B2 (ja) 2016-10-26 2021-05-12 大日本印刷株式会社 画像プリントシステム
US10449462B2 (en) 2016-11-21 2019-10-22 Universal City Studios Llc Amusement park attraction control management system and method

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06110480A (ja) * 1992-09-25 1994-04-22 Yamaha Corp カラオケ装置
CN1443086A (zh) * 2000-07-17 2003-09-17 兰迪·T·斯普劳特 交互式虚拟现实演出剧场娱乐系统
JP2003303356A (ja) * 2002-04-09 2003-10-24 Canon Inc 展示装置
US8537154B2 (en) * 2005-09-15 2013-09-17 Dentsu, Inc. Attraction system and attraction providing method
US7555147B2 (en) * 2005-09-30 2009-06-30 Richard Simmons Video recording system for an amusement park ride and associated methods
CN102982525A (zh) * 2011-06-01 2013-03-20 索尼公司 图像处理装置、图像处理方法和程序
CN106659940A (zh) * 2014-05-21 2017-05-10 环球城市电影有限责任公司 用于游乐园元件的自动化的光学跟踪系统

Also Published As

Publication number Publication date
KR20210082510A (ko) 2021-07-05
EP4299153A2 (en) 2024-01-03
EP3873634B1 (en) 2023-12-13
US11090576B2 (en) 2021-08-17
JP2022505977A (ja) 2022-01-14
SG11202103442SA (en) 2021-05-28
JP7367015B2 (ja) 2023-10-23
ES2972688T3 (es) 2024-06-14
CA3116401A1 (en) 2020-05-07
EP3873634A1 (en) 2021-09-08
WO2020091877A1 (en) 2020-05-07
EP4299153A3 (en) 2024-04-10
CN112912151A (zh) 2021-06-04
US20200129878A1 (en) 2020-04-30

Similar Documents

Publication Publication Date Title
US20210287416A1 (en) Methods and Systems for Creating an Immersive Character Interaction Experience
KR101906002B1 (ko) 가상체험을 위한 다면 부스 시스템 및 방법
US20060192852A1 (en) System, method, software arrangement and computer-accessible medium for providing audio and/or visual information
JP2021530292A (ja) ライトフィールドディスプレイシステムベースの遊園地のアトラクション
US11270510B2 (en) System and method for creating an augmented reality interactive environment in theatrical structure
CN112912151B (zh) 特殊效果可视化技术
US20210038975A1 (en) Calibration to be used in an augmented reality method and system
US20240303947A1 (en) Information processing device, information processing terminal, information processing method, and program
Marner et al. Exploring interactivity and augmented reality in theater: A case study of Half Real
Marsh et al. Using cinematography conventions to inform guidelines for the design and evaluation of virtual off-screen space
Silberman Matrix2
Morishima et al. Hypermask talking head projected onto real object
Casas et al. Romot: A robotic 3D-movie theater allowing interaction and multimodal experiences
US10841536B2 (en) Special effects communication techniques
Ferris Writing Without Frames
Parker Theater as virtual reality
KR102411533B1 (ko) 로봇 인터렉션 홀로그램 디스플레이 시스템 및 방법
CN111615832B (zh) 用于生成平面视频内容的合成现实重构的方法和设备
KR20220077079A (ko) 가상체험을 위한 다면 부스 시스템 및 몰입형 전시체험을 위한 다면스크린의 컨텐츠 제공방법
Dionysus Storytelling in a Frameless Screen: Producing Cinematic Virtual and Augmented Reality Experiences
Jung et al. Interactive Interfaces in Projection Mapping Projects: Participation through Play
Morishima et al. Hypermask: talking head projected onto moving surface
Boitel et al. Theatre/Video and the Crossing of Boundaries: Big Art Group's Flicker (2002-2005): Stitching the Eye/I
O'Brien Spellbound

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40054928

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant