CN114642886A - 移动体 - Google Patents

移动体 Download PDF

Info

Publication number
CN114642886A
CN114642886A CN202111503059.9A CN202111503059A CN114642886A CN 114642886 A CN114642886 A CN 114642886A CN 202111503059 A CN202111503059 A CN 202111503059A CN 114642886 A CN114642886 A CN 114642886A
Authority
CN
China
Prior art keywords
image
window
display
display controller
character
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111503059.9A
Other languages
English (en)
Inventor
川岛睦
宫泽知明
则武雅人
西川信广
来间政人
西川徳行
富田玲子
加藤贵章
富田浩之
加藤大策
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Publication of CN114642886A publication Critical patent/CN114642886A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63GMERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G31/00Amusement arrangements
    • A63G31/02Amusement arrangements with moving substructures
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63GMERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G31/00Amusement arrangements
    • A63G31/16Amusement arrangements creating illusions of travel
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63GMERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G7/00Up-and-down hill tracks; Switchbacks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/203D [Three Dimensional] animation
    • G06T13/403D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/203D [Three Dimensional] animation
    • G06T13/603D [Three Dimensional] animation of natural phenomena, e.g. rain, snow, water or plants
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Abstract

本发明公开移动体。运送特定的预定的区域的利用者的移动体(10)具备:第一显示器(18),在作为设置于移动体(10)的内表面的显示范围的虚拟窗(19)显示影像;以及显示控制器(14),生成使在将所述虚拟窗(19)假设为窗的情况下本来得到的车窗影像(22)部分性地变化的演出影像(24),显示于所述虚拟窗(19)。所述显示控制器(14)为了生成演出影像,既可以将所述车窗影像(22)中包含的人物(30)的身体的一部分或者全部变换为角色,也可以将所述车窗影像(22)中包含的多个人物(30)中的至少1个以上变换为透明。

Description

移动体
相关申请的交叉引用
本申请要求于2020年12月17日提交的日本专利申请No.2020-208948的优先权,该申请通过引用整体并入本文,其包括说明书、权利要求书、附图和摘要。
技术领域
在本说明书中,公开一种运送预定的区域的利用者的移动体。
背景技术
在具有非日常的世界观的预定的区域,例如游园地、主题公园等公园中,利用者为了移动到期望的目的地,有时利用车辆等移动体。在一部分中提出了即使在使用这样的移动体移动的期间中,也进行特定的演出,以使利用者能够欣赏。
例如,在专利文献1中,公开一种沿着车辆的移动路线,配置人工的娱乐装置,例如背景物、水帘、恐龙模型等,伴随车辆的移动使车外的状况变化的技术。根据上述技术,利用者在移动中也能够欣赏处于公园的世界观的演出。
现有技术文献
专利文献
专利文献1:日本特开2000-342858号公报
专利文献2:国际公开2017/208719号
发明内容
然而,在专利文献1的技术中,为了维持公园的世界观,需要在从车辆看见的范围内不存在未意图的人、车辆。因此,在专利文献1的技术的情况下,必须禁止人、车辆进入到车辆的移动路线周边的比较广阔的范围内。换言之,在专利文献1中,为了演出需要专用并且广阔的空间。
此外,在专利文献2中,公开一种在设置于移动体的显示部上,与外部的风景一起重叠显示内容影像的技术。还考虑将该专利文献2的技术应用于在公园内利用的移动体。即,还考虑通过在设置于移动体的显示部上显示适合于公园的世界观的内容影像而使利用者欣赏。但是,在专利文献2中,显示的内容影像是与外部的风景无关的影像例如电影等,与车外的实际的状况没有协作性。因此,在专利文献2中提供的内容影像的情况下,缺乏真实感,无法充分地得到向公园的世界的沉浸感。
因此,在本说明书中,公开一种无需为了演出准备专用的空间而能够进一步提高向预定的区域的世界观的沉浸感的移动体。
在本说明书中公开的移动体是运送预定的区域的利用者的移动体,其特征在于,具备:第一显示器,在作为设置于所述移动体的内表面的显示范围的虚拟窗显示影像;以及显示控制器,生成使在将所述虚拟窗假设为窗的情况下本来得到的车窗影像部分性地变化的演出影像,并显示于所述虚拟窗。
通过做成上述结构,即使在移动体的周围未设置广阔的专用空间,也能够对乘员提供富于娱乐性的车窗。另外,提供的演出影像是使实际的车窗影像的一部分变化的影像,所以真实感出色。其结果,能够对乘员提供如实际来到预定的区域成为主题的想像的世界那样的印象,能够进一步提高乘员向预定的区域的世界的沉浸感。
在该情况下,所述显示控制器也可以为了生成演出影像,将所述车窗影像中包含的人物的身体的一部分或者全部变换为角色。
通过这样将实际处于预定的区域的人物变换为角色,能够提供更具真实感的演出影像。
另外,所述显示控制器也可以为了生成演出影像,将所述车窗影像中包含的多个人物中的至少1个以上变换为透明。
通过做成上述结构,乘员不会被车外的人物打扰到,能够欣赏预定的区域的风景。
在该情况下,所述显示控制器也可以以使所述演出影像中包含的人物或者角色的数量成为规定的基准数以下的方式,决定要变换为所述透明的人物的数量。
通过做成上述结构,能够降低演出影像中的人物以及角色的密度,还能够欣赏预定的区域的风景。
另外,所述预定的区域也可以被分割成具有相互不同的主题的多个地带,所述显示控制器使所述车窗影像的变换内容与所述移动体所处的地带的主题匹配地变化。
通过做成上述结构,乘员能够获得富于变化的演出,能够使乘员更享受。
在该情况下,所述显示控制器也可以在所述移动体位于所述地带的边界附近的情况下,相比于所述移动体位于所述地带的中心的情况,减少所述演出影像中包含的内容要素。
通过做成上述结构,能够使乘员意识到从一个主题的地带转移到不同主题的地带。
另外,也可以还具备与所述演出影像连动地产生感受角色的存在的振动、声音、味道、湿气、风中的至少一个的演出装置。
通过做成上述结构,能够进行仅通过影像无法表现的演出,能够进一步提高真实感。
另外,所述显示控制器也可以在发生了对于乘员而言不愉快的行驶事件时,生成并显示误认为该行驶事件是由于角色的存在而发生的所述演出影像。
通过做成上述结构,能够将对于乘员而言不愉快的行驶事件变更为对于乘员而言愉快的事件。
另外,也可以还具备使影像显示于作为设置于所述移动体的内部的显示范围的虚拟镜的第二显示器,所述显示控制器生成使在将所述虚拟镜假设为镜子的情况下本来得到的镜影像中包含的人物的身体的一部分或者全部变换为角色的虚拟镜图像,并显示于所述虚拟镜。
通过做成上述结构,能够对乘员提供如自己自身成为预定的区域的世界的一部分那样的印象,能够进一步提高乘员向预定的区域的世界观的沉浸感。
根据在本说明书中公开的移动体,无需为了演出而准备专用的空间,能够进一步提高向预定的区域的世界观的沉浸感。
附图说明
图1是示出利用移动体的主题公园的结构的影像图。
图2是示出移动体的结构的框图。
图3是示出车窗影像的一个例子的图。
图4是示出演出影像的一个例子的图。
图5是示出图4的演出影像的生成的流程的影像图。
图6是示出演出影像的另一例子的图。
图7是示出演出影像的另一例子的图。
图8是示出图7的演出影像的生成的流程的影像图。
图9是示出要透明化的人物的选定方法的一个例子的图、且是示出车窗影像的一个例子的图。
图10是示出根据图9的车窗影像生成的演出影像的一个例子的图。
图11是示出产生急刹车的情况的演出影像的一个例子的图。
图12是示出演出装置的结构的一个例子的框图。
图13是示出虚拟镜功能的结构的图。
(符号说明)
10:移动体;12:车辆控制器;14:显示控制器;16:第一摄像机;18:第一显示器;19:虚拟窗;20:演出装置;22:车窗影像;24:演出影像;30:人物;32:固定物;36:演出数据;38:参照数据;39:置换图像;44:演出控制器;46:喷雾器;48:空气喷射器;50:扬声器;52:气味产生器;54:振动产生器;60:第二摄像机;62:第二显示器;63:虚拟镜;64:镜图像;66:虚拟镜图像;100:主题公园;110:行驶路线。
具体实施方式
以下,参照附图,说明移动体10的结构。图1是示出作为利用移动体10的预定的区域的主题公园100的结构的影像图。该移动体10是为了运送预定的主题公园100的利用者而设置的。主题公园100被分割成几个地带,针对每个地带设定有主题。以下,将具有以猫为主题的第一地带A1、以天使为主题的第二地带A2、以及以机器人为主题的第三地带A3的主题公园100作为例子进行说明。
在该主题公园100中,设置有跨越三个地带A1~A3的环状的行驶路线110。移动体10沿着该行驶路线110行驶。另外,在行驶路线110中设置有多个停留站(未图示)。移动体10为了使利用者乘降,在各停留站停车。因此,在本例子中,移动体10作为将不特定多数的利用者运送到停留站的合乘巴士发挥功能。
但是,移动体10的运用方式不限定于上述,也可以适当地变更。因此,移动体10也可以没有规定的行驶路线,而能够根据利用者的指示自由地选择行驶路线。另外,移动体10也可以并不是由不特定多数的人利用,而是能够仅由预先分配的个人或者群组(例如家族等)利用。另外,本例子的移动体10是可手动或者自动行驶的车辆。但是,移动体10只要能够运送利用者,则不限于车辆,也可以是其他方式,例如船舶。在移动体10是船舶的情况下,以构成运河的方式,在行驶路线110中引入水。
移动体10具有某种程度封闭的内部空间。移动体10针对处于该内部空间的利用者提供能够提高向公园的世界的沉浸感的演出。图2是示出移动体10的结构的框图。此外,在图2中,仅图示与演出提供相关的要素。以下,说明各要素。
第一显示器18在车辆的内表面,例如侧表面、前表面等上显示演出影像。演出影像是对在将第一显示器18的显示范围假设为窗的情况下得到的车窗影像实施演出处理而得到的影像,在后面详细说明。因此,第一显示器18的显示范围作为放映移动体10的外部的样子的虚拟窗19发挥功能。该第一显示器18既可以是一个,也可以设置多个。上述第一显示器18例如也可以具有液晶显示器、有机EL显示器以及投影仪中的至少一个。另外,第一显示器18也可以具有在不显示影像的状态下,作为透明的窗发挥功能的透明显示器。
第一摄像机16拍摄移动体10的外侧,取得在将第一显示器18的显示范围假设为窗的情况下得到的车窗影像。一个车窗影像既可以用单一的第一摄像机16取得,也可以合成由多个第一摄像机16得到的多个影像而取得一个车窗影像。不论在哪一个情况下,该第一摄像机16的个数以及配置根据第一显示器18的显示范围(即虚拟窗19)的位置、姿势以及尺寸设定。
显示控制器14控制第一显示器18的显示。具体而言,显示控制器14生成使车窗影像部分性地变化的演出影像,显示于第一显示器18。显示控制器14是物理上具有处理器14a和存储器14b的计算机。在该“计算机”中,还包括将计算机系统嵌入到一个集成电路的微型控制器。另外,处理器14a是指广义上的处理器,包括通用性的处理器(例如CPU:CentralProcessing Unit(中央处理单元)等)、专用的处理器(例如GPU:Graphics ProcessingUnit(图形处理单元)、ASIC:Application Specific Integrated Circuit(专用集成电路)、FPGA:Field Programmable Gate Array(现场可编程门阵列)、可编程逻辑器件等)。另外,以下叙述的处理器14a的动作不仅是由1个处理器完成的,也可以是由存在于物理上分离的位置的多个处理器协作而完成的。同样地,存储器14b也无需物理上是一个要素,也可以由存在于物理上分离的位置的多个存储器构成。另外,存储器14b也可以包括半导体存储器(例如RAM、ROM、固态驱动器等)以及磁盘(例如硬盘驱动器等)中的至少一个。另外,一个计算机可以作为显示控制器14发挥功能,并且还作为后述车辆控制器12或者演出控制器44发挥功能。
在显示控制器14的存储器14b中,存储有各种图像处理程序。处理器14a依照这些图像处理程序执行运算,由此生成演出影像。另外,在显示控制器14的存储器14b中,还存储有在生成演出影像时利用的各种数据。关于由这样的显示控制器14生成演出影像24,在后面详细说明。
移动体10还具有车辆控制器12以及演出装置20。车辆控制器12控制移动体10的行驶。该车辆控制器12也与显示控制器14同样地是具有处理器和存储器的计算机。在该车辆控制器12中,根据从操作人员输入的指示以及各种传感器中的探测结果,控制移动体10的驱动系统。在此,操作人员是进行移动体10的行驶操作的人,既可以是乘坐移动体10的驾驶员,也可以是在设置于移动体10的外部的管理中心远程地进行行驶操作的人。另外,传感器包括检测移动体10的驱动系统的状态的传感器(例如车速传感器等)以及检测移动体10的外部环境的传感器(例如红外线传感器、Lider、位置传感器、光学传感器等)。车辆控制器12依照操作人员的指示,根据这些各种传感器的检测值使移动体10自主地行驶。
车辆控制器12的控制内容、传感器中的检测值根据需要被输出到显示控制器14。例如,如后所述,显示控制器14根据移动体10的位置,使演出影像的演出的内容变化。为了使这样的演出内容可变化,车辆控制器12随时将位置传感器(例如GPS等)中的检测值输出给显示控制器14。另外,显示控制器14还根据移动体10的行驶状态,例如有无急刹车等,使演出影像的演出的内容变化。因此,车辆控制器12将针对驱动系统输出的指示内容的至少一部分随时输出给显示控制器14。
演出装置20是产生感受角色的存在的振动、声音、味道、湿气以及风中的至少一个的装置。该演出装置20具有产生振动等的产生装置和控制这些产生装置的驱动的控制器,详细的结构后述。
接下来,说明在这样的移动体10中提供的演出。图3是示出车窗影像22的一个例子的图,图4是示出演出影像24的一个例子的图。如上所述,在本例子中,在作为虚拟窗19发挥功能的第一显示器18的显示范围,显示使车窗影像22部分性地变化的演出影像24。
车窗影像22是在将第一显示器18的显示范围假设为窗的情况下得到的车窗的影像。该车窗影像22如图3所示包括建筑物、道路、树木等固定物32和作为主题公园100的利用者的人物30。演出影像24是如图4所示将包含于车窗影像的人物30的身体的一部分或者全部变换为预定的角色的影像。在图4的例子中,演出影像24包括身体的一部分被变换为猫的角色的人物30*。
这样,通过将实施了遵循主题公园100的主题的演出的影像显示于虚拟窗19,从而移动体10的乘员能够享受移动时间,并且能够更可靠地沉浸到主题公园100的世界观。另外,演出影像24是使车窗影像22的一部分变化的影像。换言之,演出影像24是包含车窗影像22这样的现实的影像。因此,演出影像24的真实性变高,能够进一步提高向主题公园100的世界观的沉浸感。
图5是示出这样的演出影像24的生成的流程的一个例子的影像图。显示控制器14为了生成演出影像24,预先存储有演出数据36。该演出数据36是为了演出而向车窗影像22追加或者重叠的内容的数据。在上述演出数据36中,例如包括遵循主题公园100的主题的角色的各配件(例如耳、服装等)的三维形状信息。在此,用演出数据36处理的角色既可以是一个种类,也可以是多个种类。在角色存在多个种类的情况下,将各角色与其特性,例如性别、体型、年龄等对应起来存储。
在生成演出影像24的情况下,显示控制器14首先取得车窗影像22。车窗影像22可以是用第一摄像机16拍摄的影像本身,但也可以编辑第一摄像机16的拍摄影像来生成车窗影像22。例如,根据第一摄像机16的配置、视场角,有在拍摄影像与车窗影像22之间产生背离的情况。在该情况下,也可以合成用多个第一摄像机16得到的多个拍摄影像,生成车窗影像22。
如果得到车窗影像22,则接下来显示控制器14从该车窗影像22抽出人物30。在该人物30的抽出中,能够使用已知的脸检测或者人检测技术,例如Histograms of OrientedGradients(方向梯度直方图)等技术。另外,也可以利用Tracking-by-Detection(检测跟踪)等技术,跟踪一次检测到的人物30。
不论在哪一个情况下,显示控制器14如果能够抽出人物30,则接下来确定该人物30的姿势以及特征。人物30的特征包括性别、体型、年龄中的至少一个。这样的人物30的姿势以及特征能够根据所抽出的人物图像中包含的特征点(例如眼、鼻、颌等)的位置关系、身体的轮廓形状等确定。显示控制器14根据确定的人物30的特征,选定适合于该人物30的角色。例如,在人物30为女性的情况下,选定女性的角色。接下来,显示控制器14根据人物30的姿势,生成对该人物30的图像重叠的角色的图像。例如,在人物30是侧向的姿势的情况下,根据角色的三维形状信息,生成在该角色也同样地成为侧向时看见的各配件的图像。
如果能够生成角色的图像,则显示控制器14在车窗影像22的人物30的前表面重叠角色图像,生成为演出影像24。生成的演出影像24显示于第一显示器18的显示范围,即虚拟窗19。
此外,应用的角色的种类也可以根据移动体10所处的地带而变化。具体而言,在显示控制器14的存储器14b中,作为演出数据36记录有多个种类的角色的信息,但对各角色对应有地带。例如,对与猫相关的角色对应有以猫为主题的第一地带A1,对与天使相关的角色对应有以天使为主题的第二地带A2。移动体10在选择应用于车窗影像22中包含的人物30的角色时,确定当前的移动体10所处的地带。然后,从与该地带对应的角色中,选择应用于人物30的角色。因此,例如,在移动体10位于以猫为主题的第一地带A1的情况下,人物30如图4所示变换为与猫相关的角色。另一方面,在移动体10位于以天使为主题的第二地带A2的情况下,人物30如图6所示被变换为与天使相关的角色。这样,根据地带实施不同的演出,从而乘员能够获得各种演出,娱乐性提高。另外,根据移动体10的实际的位置而演出内容不同,所以乘员能够明确地掌握自己当前处于何处。
另外,在此前的说明中,在车窗影像22中仅使人物30变化,但也可以除了人物30以外或者代替人物30,使人物30以外的部分变化。例如,也可以对车窗影像22中包含的植物重叠与眼、口对应的图像,像有智慧的角色那样显示植物。另外,也可以进一步追加车窗影像22中未包含的内容。例如,也可以为了生成演出影像,对车窗影像22重叠巨大的猫的图像、在天上飞的天使的图像等。这样,通过对车窗影像22新追加内容要素,能够生成娱乐性更高的演出影像。
另外,也可以并不是将人物30变换为角色,而使人物30透明化。即,在得到如图3所示的映入人物30的车窗影像22的情况下,也可以将以不存在该人物30的方式实施图像处理而得到的影像生成为演出影像24。图7是示出从图3的车窗影像22生成的演出影像24的一个例子的图。这样,通过从车窗影像22去掉人物30,利用者能够不被其他人物妨碍而观看主题公园100的风景。
图8是示出这样的演出影像24的生成的流程的一个例子的影像图。显示控制器14为了生成如图7所示的演出影像24,预先存储有参照数据38。参照数据38是与代替人物30的图像而显示的图像有关的数据。上述参照数据38既可以是在主题公园100存在的大量的固定物32的三维图像数据,也可以是在主题公园100的闭园时间拍摄的车窗影像,即未映入有人物的车窗影像。
在生成使人物30透明化的演出影像24的情况下,显示控制器14取得车窗影像22,从该车窗影像22抽出人物30。接下来,显示控制器14根据参照数据38生成代替该人物30显示的图像。具体而言,显示控制器14根据移动体10的当前位置,确定各种固定物32和移动体10的相对位置关系。接下来,根据确定的相对位置关系,从参照数据38抽出在人物30的后侧存在的固定物32的图像(以下称为“置换图像39”)。然后,显示控制器14以车窗影像22的人物30被置换为抽出的置换图像39的方式,对车窗影像22合成置换图像39,生成演出影像24。在该合成时,显示控制器14根据车窗影像22,校正置换图像39的色彩、边缘。即,固定物32的色调等根据实际的天气、时刻、季节而不同。另外,植物等生物随着时间经过,其形状、色彩变化。因此,用参照数据38表示的固定物32的形状以及色彩有时与当前的固定物32的形状以及色彩不同。因此,显示控制器14根据车窗影像22推测当前的固定物32的形状以及色彩,以接近推测的形状以及色彩的方式校正置换图像后,合成到车窗影像22。
这样的人物30的透明化既可以针对映入车窗影像22的所有人物30进行,也可以仅对一部分的人物30进行。另外,参照图7、图8说明的人物30的透明化和参照图4、图5说明的人物30的角色化也可以针对一个车窗影像22同时进行。例如,在车窗影像22中映入10名人物30的情况下,也可以将使其中的5人透明化并将剩余的5人变换为角色而得到的影像生成为演出影像24。通过做成上述结构,能够抑制映入到演出影像24的角色的数量,利用者能够充分欣赏角色以及主题公园100的风景这双方。
显示控制器14也可以为了决定要透明化的人物30,具有预定的基准。例如,显示控制器14也可以以使演出影像24的1帧中包含的人物30(还包括变换为角色的人物30)的数量成为规定的基准数以下的方式,决定要透明化的人物30的数量。例如,相对于基准数为10,在车窗影像22的1帧中包括30名人物30的情况下,显示控制器14使映入该帧的20名人物30透明化。要透明化的人物30既可以随机地选择,也可以以使人物30的分散变得更均等的方式选择。另外,显示控制器14也可以将帧分割为多个块,以使映入各块的人物30的脸成为规定的块上限值以下的方式,选定要透明化的人物30。参照图9、图10,对其进行说明。
图9、图10是示出要透明化的人物30的选定方法的一个例子的图。图9是车窗影像22的一个例子,图10是根据车窗影像22生成的演出影像24的一个例子。构成车窗影像22的各帧都被分割成多个块。在图示例中,车窗影像22的各帧被分割成4×3的12块。以下,用数字表示块的行,用字母表示块的列,将各块用该列的字母以及行的数字的组合显示。例如,在图9中,将最左下的块称为“a1块”,将最右上的块称为“d3块”。在图10中也相同。
另外,在各块内记载的用方形包围的数字表示在该块中设定的人物30的上限值,即块上限值。另外,在相同的块内记载的用圆包围的数字表示在该块中实际上映入的人物30的数量。在图9的例子中,作为块上限值,第1列的块(即a1块、b1块、c1块、d1块)被设定“0人”,第2列的块被设定“1人”,第3列的块被设定“2人”。
显示控制器14确定在各块中映入的人物30的数量。在此,人物30的数量用人物30的“脸”确定。例如,在图9的例子中,a3块中的人物30(正确而言人物30的脸)的数量是“2”,a2块中的人物30的数量是“1”。此外,有一名人物30的脸跨越多个块而映入的情况。例如,图9中的脸80a跨越b1块以及b2块。根据脸80a的位置等,决定将上述脸80a作为哪一个块的脸进行计数即可。例如,也可以比较b1块内的脸80a的面积和b2块内的脸80a的面积,计数为面积更大的块的脸。在图9的例子中,脸80a被计数为b2块的脸。在该情况下,b1块中的人物30的数量是“0”,b2块中的人物30的数量成为“2”。
如果能够对各块中的人物30的数量进行计数,则接下来,显示控制器14关于各块,比较块上限值(在图9中用方形包围的数字)和计数的人物30的数量(在图9中用圆包围的数字)。然后,在人物30的数量超过块上限值的情况下,以成为块上限值以下的方式,决定要透明化的人物30。例如,在图9中,块c2的块上限值是“1”,相对于此,脸的数量为“3”。因此,在该情况下,需要将2名人物30选择为要透明化的人物30。在这样从多个人物30中选择要透明化的人物30的情况下,也可以考虑块内的人物30的脸的位置、面积。例如,也可以从块内的脸的面积更小的人物30起依次透明化。另外,作为其他方式,也可以从块内的脸的位置更远离规定的基准位置(例如块的中心位置等)的人物30起依次透明化。在图9的例子中,从块内的脸的面积更小的人物30起依次透明化。
通过使这样选择的人物30透明化,得到图10所示的演出影像24。如从图10可知,通过以使映入各块的人物30的脸成为块上限值以下的方式选定要透明化的人物30,从而在演出影像24中,人物30适合地分散。其结果,得到更自然且有真实感的演出影像24。
但是,这样的演出影像24包括人物30和建筑物等固定物32。以下,将构成这样的演出影像24的要素称为内容要素。也可以使这样的内容要素的数量根据移动体10的位置而变化。例如,如上所述,主题公园100被分割成多个地带A1~A3。也可以在该地带A1~A3的中心附近,增加内容要素的数量,在地带A1~A3的边界附近,减少内容要素的数量。例如,也可以在移动体10位于图1中的位置P2的情况下,相比于移动体10位于图1中的位置P1的情况,减少包含于演出影像24的内容要素。作为内容要素的减少方法,也可以随着移动体10接近地带的边界,逐渐减少演出影像24中包含的内容要素的个数。另外,作为其他方式,也可以随着移动体10接近地带的边界,逐渐地降低演出影像24的明度,在地带的边界附近,使演出影像24成为黑色。通过做成上述结构,能够使乘员意识到从一个主题的地带转移到不同主题的地带。
另外,在此前的说明中,与移动体10的行驶状态无关地生成演出影像24,但也可以与移动体10的行驶状态连动地变更演出影像24的内容。具体而言,移动体10被要求稳定地行驶,但由于某种理由,有时发生对于乘员不愉快的行驶事件。例如,移动体10有时以避免危险的目的急刹车。这样的急刹车对乘员突然施加大的惯性力,对于乘员而言成为不愉快的行驶事件。在上述情况下,也可以生成误认为该急刹车是由于角色的存在而发生的演出影像24。例如,在急刹车的情况下,也可以如图11所示,在位于移动体10的前表面的虚拟窗19上显示包括如巨大的猫的角色31阻止移动体10的行驶那样的影像的演出影像24。另外,移动体10有时由于在该移动体10的前方横穿的人、信号的影响而临时地停止。这样的临时停止对于乘员而言成为移动时间的长期化的原因,对于乘员而言成为不愉快的行驶事件。在上述情况下,例如,也可以在位于移动体10的前表面的虚拟窗19上显示如巨大的猫的角色在移动体10的前方睡着,误认为由于该猫的原因而移动体10停止那样的演出影像24。
这样,在发生了对于乘员而言不愉快的行驶事件的情况下,通过显示误认为该行驶事件是由于角色的存在而发生的演出影像24,能够使对于乘员而言不愉快的行驶事件成为乘员享受的事件。其结果,能够使乘员更享受主题公园内的移动。特别是,这样的不愉快的行驶事件并不是频繁地产生的,所以可以说与该不愉快的行驶事件连动的演出影像24是稀少性高的影像。通过看上述稀少性高的影像,乘员的满足感进一步提高。
为了生成这样的演出影像24,显示控制器14预先针对对于乘员而言不愉快的每个行驶事件,预先存储对应的事件影像。另外,显示控制器14如上所述,从车辆控制器12接受车辆控制器12针对驱动系统输出的指示内容的至少一部分。然后,显示控制器14根据从车辆控制器12接受的指示内容,监视有无发生对于乘员而言不愉快的行驶事件。监视的结果,在发生了对于乘员而言不愉快的行驶事件的情况下,将与该事件对应起来的事件影像,例如巨大的猫阻止移动体10的影像等合成到使人物30角色化或者透明化后的演出影像24,并显示于第一显示器18。
另外,本例子的移动体10具有与上述演出影像24连动地、或者与演出影像24独立地,进行用听觉、嗅觉、触觉中的至少一个感受角色的存在的演出的演出装置20。图12是示出该演出装置20的结构的一个例子的框图。演出装置20具有喷雾器46、空气喷射器48、扬声器50、气味产生器52、振动产生器54以及控制它们的驱动的演出控制器44。
喷雾器46在移动体10内产生雾,甚至还产生湿气,例如包括将水压缩的泵以及将压缩的水喷射的喷嘴。另外,空气喷射器48向移动体10内喷射空气并产生风,例如包括将空气压缩的压缩机。扬声器50输出声音。气味产生器52具有1个以上的气味源,将通过了该气味源后的空气输出到移动体10内。振动产生器54使移动体10整体或者乘员就坐的座席产生振动,包括马达、液压缸、空压汽缸等致动器。
演出控制器44与显示控制器14同样地是具有处理器和存储器的计算机。该演出控制器44根据来自显示控制器14的指示,驱动喷雾器46等,进行用听觉、嗅觉、触觉中的至少一个感受角色的存在的演出。
例如,也可以为了对乘员提供如小动物的角色快速跑着穿过乘员的脚下那样的印象,用空气喷射器48产生在乘员的脚下附近在水平方向上吹过的风。另外,作为其他方式,也可以为了对乘员提供如角色跳上移动体10的屋顶上那样的印象,用振动产生器54大幅摇动移动体10整体,并且,用扬声器50产生如角色跳上移动体10的屋顶那样的声音。另外,作为其他方式,也可以为了对乘员提供如在附近有带有独特的味道的角色(例如发出花香的花仙子的角色等)那样的印象,用气味产生器52产生该味道。另外,作为其他方式,也可以为了对乘员提供如在附近有处于湿度高的环境下的角色(例如青蛙的角色等)那样的印象,用喷雾器产生雾。
通过设置上述演出装置20,能够进行仅通过影像无法表现的演出,能够进一步提高真实感。而且,作为结果,能够进一步提高利用者向公园的世界观的沉浸感。
另外,本例子的移动体10也可以如图13所示,还具有第二摄像机60以及第二显示器62。第二摄像机60以及第二显示器62是为了对乘员提供虚拟镜功能而设置的。
第二显示器62设置于移动体10的内部,其显示范围作为虚拟镜63发挥功能。在第二显示器62的显示范围,即虚拟镜63上,施加有如镜子的装饰,例如,其周缘用木制的框包围。上述第二显示器62例如也可以具有液晶显示器、有机EL显示器以及投影仪中的至少一个。
第二摄像机60拍摄与虚拟镜63相向的部位,取得在将第二显示器62的显示范围假设为镜子的情况下得到的镜图像64。一个镜图像64也可以将由单一的第二摄像机60取得的影像进行镜像反转而取得。另外,作为其他方式,也可以合成用多个第二摄像机60得到的多个影像,取得一个镜图像64。不论在哪一个情况下,该第二摄像机60的个数以及配置根据虚拟镜63的位置、姿势、尺寸来设定。
如果用第二摄像机60得到镜图像64,则显示控制器14从该镜图像64抽出人物,生成使该人物30的身体的一部分或者全部变换为角色的虚拟镜图像66,用第二显示器62显示。变换的角色的种类既可以在显示控制器14侧自动地决定,也可以各乘员能够自由地选择。
不论在哪一个情况下,通过针对位于虚拟镜63的正面的乘员提供虚拟镜图像66,该乘员能够有如自己自身变身为角色而成为公园的世界的一员那样的印象。而且,由此,能够进一步提高乘员向公园的世界观的沉浸感。
此外,此前说明的结构是一个例子,只要至少在移动体10的内表面上设置的第一显示器18的显示范围(虚拟窗19)显示使车窗影像部分性地变化的演出影像,则其他结构也可以适当地变更。例如,在此前的说明中,以仅在公园内移动的移动体10为例子进行了说明,但只要运送预定的区域的利用者,则移动体10也可以在预定的区域的外部移动。例如,移动体10也可以是处于公园的外侧的设施,例如在停车场、住宿设施与公园之间运送利用者的摆渡巴士。在该情况下,也可以根据移动体10与公园的距离,使施加到车窗影像22的演出量增减。例如,也可以随着移动体10接近公园,使变换为角色的人物30的数量逐渐增加。通过做成上述结构,乘员能够更确实感觉到逐渐接近公园,能够提高向公园的期待感。

Claims (9)

1.一种移动体,运送预定的区域的利用者,其特征在于,该移动体具备:
第一显示器,在作为设置于所述移动体的内表面的显示范围的虚拟窗显示影像;以及
显示控制器,生成使在将所述虚拟窗假设为窗的情况下本来得到的车窗影像部分性地变化的演出影像,并显示于所述虚拟窗。
2.根据权利要求1所述的移动体,其特征在于,
所述显示控制器为了生成演出影像,将所述车窗影像中包含的人物的身体的一部分或者全部变换为角色。
3.根据权利要求1或者2所述的移动体,其特征在于,
所述显示控制器为了生成演出影像,将所述车窗影像中包含的多个人物中的至少1个以上变换为透明。
4.根据权利要求3所述的移动体,其特征在于,
所述显示控制器以使所述演出影像中包含的人物或者角色的数量成为规定的基准数以下的方式,决定要变换为所述透明的人物的数量。
5.根据权利要求1至4中的任意一项所述的移动体,其特征在于,
所述预定的区域被分割成具有相互不同的主题的多个地带,
所述显示控制器使所述车窗影像的变换内容与所述移动体所处的地带的主题匹配地变化。
6.根据权利要求5所述的移动体,其特征在于,
所述显示控制器在所述移动体位于所述地带的边界附近的情况下,相比于所述移动体位于所述地带的中心的情况,减少所述演出影像中包含的内容要素。
7.根据权利要求1至6中的任意一项所述的移动体,其特征在于,
还具备与所述演出影像连动地产生感受角色的存在的振动、声音、味道、湿气、风中的至少一个的演出装置。
8.根据权利要求1至7中的任意一项所述的移动体,其特征在于,
所述显示控制器在发生了对于乘员而言不愉快的行驶事件时,生成并显示误认为该行驶事件是由于角色的存在而发生的所述演出影像。
9.根据权利要求1至8中的任意一项所述的移动体,其特征在于,
还具备使影像显示于作为设置于所述移动体的内部的显示范围的虚拟镜的第二显示器,
所述显示控制器生成使在将所述虚拟镜假设为镜子的情况下本来得到的镜影像中包含的人物的身体的一部分或者全部变换为角色的虚拟镜图像,并显示于所述虚拟镜。
CN202111503059.9A 2020-12-17 2021-12-10 移动体 Pending CN114642886A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020208948A JP2022096058A (ja) 2020-12-17 2020-12-17 移動体
JP2020-208948 2020-12-17

Publications (1)

Publication Number Publication Date
CN114642886A true CN114642886A (zh) 2022-06-21

Family

ID=81992084

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111503059.9A Pending CN114642886A (zh) 2020-12-17 2021-12-10 移动体

Country Status (3)

Country Link
US (1) US20220193562A1 (zh)
JP (1) JP2022096058A (zh)
CN (1) CN114642886A (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7216874B1 (ja) 2021-12-20 2023-02-02 株式会社電通 合成処理装置
US11614619B1 (en) * 2022-04-11 2023-03-28 Voyetra Turtle Beach, Inc. Headset dynamic windowing

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0548934A (ja) * 1991-08-20 1993-02-26 Matsushita Electric Ind Co Ltd ビデオカメラ付き画像記録再生装置
CN102030008A (zh) * 2009-10-02 2011-04-27 福特全球技术公司 情绪咨询系统
WO2011136209A1 (ja) * 2010-04-27 2011-11-03 泉陽興業株式会社 観覧車
CN205901943U (zh) * 2016-07-12 2017-01-18 深圳市远望淦拓科技有限公司 一种可实现影像互动的显示设备
CN109215102A (zh) * 2017-06-29 2019-01-15 连(普雷)株式会社 影像处理方法及系统
CN109960735A (zh) * 2017-12-26 2019-07-02 丰田自动车株式会社 人物搜索系统
JP2020141212A (ja) * 2019-02-27 2020-09-03 沖電気工業株式会社 画像処理システム、画像処理装置、画像処理プログラム、画像処理方法、及び表示装置
CN111698543A (zh) * 2020-05-28 2020-09-22 厦门友唱科技有限公司 基于演唱场景的交互实现方法、介质及系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0548934A (ja) * 1991-08-20 1993-02-26 Matsushita Electric Ind Co Ltd ビデオカメラ付き画像記録再生装置
CN102030008A (zh) * 2009-10-02 2011-04-27 福特全球技术公司 情绪咨询系统
WO2011136209A1 (ja) * 2010-04-27 2011-11-03 泉陽興業株式会社 観覧車
CN205901943U (zh) * 2016-07-12 2017-01-18 深圳市远望淦拓科技有限公司 一种可实现影像互动的显示设备
CN109215102A (zh) * 2017-06-29 2019-01-15 连(普雷)株式会社 影像处理方法及系统
CN109960735A (zh) * 2017-12-26 2019-07-02 丰田自动车株式会社 人物搜索系统
JP2020141212A (ja) * 2019-02-27 2020-09-03 沖電気工業株式会社 画像処理システム、画像処理装置、画像処理プログラム、画像処理方法、及び表示装置
CN111698543A (zh) * 2020-05-28 2020-09-22 厦门友唱科技有限公司 基于演唱场景的交互实现方法、介质及系统

Also Published As

Publication number Publication date
JP2022096058A (ja) 2022-06-29
US20220193562A1 (en) 2022-06-23

Similar Documents

Publication Publication Date Title
US10593126B2 (en) Virtual space display system
CN110352085B (zh) 用于游乐园环境中的分层虚拟特征的系统和方法
US10718943B2 (en) Large mirror inside an autonomous vehicle
CN114642886A (zh) 移动体
US10710608B2 (en) Provide specific warnings to vehicle occupants before intense movements
US10059347B2 (en) Warning a vehicle occupant before an intense movement
Lamarre From animation to anime: drawing movements and moving drawings
KR102588344B1 (ko) 가상 현실 이동식 포드
CN110427682A (zh) 一种基于虚拟现实的交通场景模拟实验平台和方法
US11938410B2 (en) Light field display system based amusement park attraction
JP2008108246A (ja) 閲覧者の位置に従って仮想画像を生成するための方法、システム、およびコンピュータ・プログラム
KR20160025731A (ko) 실감 체험형 4d 라이더 장치 및 방법
US20230186542A1 (en) Information processing apparatus, information processing method, and computer-readable recording medium
Kinane et al. On sensing island spaces and the spatial practice of island-making: introducing island poetics, Part I
US20210192851A1 (en) Remote camera augmented reality system
CN112104857A (zh) 图像生成系统、图像生成方法及信息存储介质
US20230008097A1 (en) Customized animated art
KR101881227B1 (ko) 무인 비행체를 이용한 비행 체험 방법 및 장치
EP3873634B1 (en) Special effects visualization techniques
DE102022105009A1 (de) Informationsverarbeitungsschaltung und informationsverarbeitungsverfahren
CN111656361B (zh) 合成现实布景中的目标实现器
JP7091796B2 (ja) 映像制御装置、車両用撮影装置、映像制御方法およびプログラム
US20230215070A1 (en) Facial activity detection for virtual reality systems and methods
JP2019092094A (ja) 画像生成装置、表示システム、及びプログラム
CN114972691A (zh) 特效互动方法及相关装置、设备、导览车和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination