JP5759110B2 - Ferris wheel - Google Patents

Ferris wheel Download PDF

Info

Publication number
JP5759110B2
JP5759110B2 JP2010102691A JP2010102691A JP5759110B2 JP 5759110 B2 JP5759110 B2 JP 5759110B2 JP 2010102691 A JP2010102691 A JP 2010102691A JP 2010102691 A JP2010102691 A JP 2010102691A JP 5759110 B2 JP5759110 B2 JP 5759110B2
Authority
JP
Japan
Prior art keywords
unit
image
marker
gondola
virtual image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2010102691A
Other languages
Japanese (ja)
Other versions
JP2011229679A (en
Inventor
山田 三郎
三郎 山田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Senyo Kogyo Co Ltd
Original Assignee
Senyo Kogyo Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Senyo Kogyo Co Ltd filed Critical Senyo Kogyo Co Ltd
Priority to JP2010102691A priority Critical patent/JP5759110B2/en
Priority to PCT/JP2011/060142 priority patent/WO2011136209A1/en
Priority to TW100114658A priority patent/TWI441670B/en
Publication of JP2011229679A publication Critical patent/JP2011229679A/en
Application granted granted Critical
Publication of JP5759110B2 publication Critical patent/JP5759110B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63GMERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G27/00Russian swings; Great wheels, e.g. Ferris wheels
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Description

本発明は、観覧車に関するものである。   The present invention relates to a ferris wheel.

従来から、遊園地などに設置された観覧車が知られている(例えば、特許文献1参照)。この観覧車は、回転輪に沿って所定の間隔ごとに設けられた複数のゴンドラを有しており、このゴンドラに搭乗者を乗せた状態で回転輪をゆっくりと回転させる。ゴンドラ内の搭乗者は、ゆっくりとした移動に伴って見え方が変わってゆく風景を楽しんだり、頂上付近における周囲の眺望を楽しんだりすることができる。   Conventionally, a ferris wheel installed in an amusement park or the like is known (for example, see Patent Document 1). This ferris wheel has a plurality of gondola provided at predetermined intervals along the rotating wheel, and slowly rotates the rotating wheel with a passenger on the gondola. Passengers in the gondola can enjoy the scenery that changes in appearance as they move slowly, and enjoy the view of the surroundings near the top.

ところがこの従来の観覧車は、単に、ゴンドラ外に現に見える風景を眺めるだけに過ぎなかったので、人によっては退屈に感じることもあった。特に、その土地を熟知している人や一度乗車した人などにとっては面白みに欠けるものとなっていた。   However, this conventional Ferris wheel was merely looking at the scenery that was actually visible outside the gondola, so some people felt bored. In particular, it was not interesting for those who were familiar with the land and those who once boarded it.

ところで、近年、現実空間と仮想空間とを実時間で融合する複合現実感[Mixed Reality;拡張現実感(Augmented Reality)や拡張仮想感(Augmented Virtuality)も含む]を提示する装置の研究が盛んに行なわれている(例えば、特許文献2,3参照)。この複合現実感を提示する装置は、例えば、カメラ等の撮像部によって現実空間を撮像すると共に、撮像部によって撮られた画像(実画像)に仮想画像を重ね合わせて合成画像を生成し、その合成画像を外部に出力するものであり、この合成画像を見たユーザーに実画像と仮想画像とを融合させた複合現実感を与えることができる。特許文献2,3の装置は、ヘッドマウントディスプレイ(HMD;head mount display)に撮像部が取り付けられており、この撮像部で撮られた実画像にリアルタイムで仮想画像を重畳して合成画像を生成し、この合成画像をこのヘッドマウントディスプレイに映し出すようになっている。そのため、ヘッドマウントディスプレイを装着したまま歩行すると、ユーザーの視点に応じた映像に仮想画像が重畳的に表示されて、あたかも現実空間にその仮想画像が存在しているかのように感じさせることができる。   By the way, in recent years, research on devices that present mixed reality (including augmented reality and augmented virtuality) that fuses real space and virtual space in real time has been active. (For example, refer to Patent Documents 2 and 3). The device that presents the mixed reality senses, for example, a real space by an imaging unit such as a camera, and generates a composite image by superimposing a virtual image on an image (real image) taken by the imaging unit. A composite image is output to the outside, and a mixed reality that combines a real image and a virtual image can be given to a user who has viewed the composite image. In the devices of Patent Documents 2 and 3, an image pickup unit is attached to a head mount display (HMD), and a composite image is generated by superimposing a virtual image on a real image taken by the image pickup unit in real time. The composite image is projected on the head mounted display. Therefore, when walking with the head-mounted display attached, a virtual image is displayed superimposed on the video according to the user's viewpoint, making it feel as if the virtual image exists in the real space. .

しかし単に地上を歩行・走行するだけのユーザーが、このような複合現実感を提示する装置を用いただけであれば、ユーザーは地上から周囲の景色を見渡すことができる範囲でしか複合現実感を味わうことができなかった。   However, if a user who simply walks and runs on the ground can only use a device that presents such a mixed reality, the user can experience mixed reality only within a range where the surrounding scenery can be seen from the ground. I couldn't.

特開2007−167215号公報JP 2007-167215 A 特開2008−293209号公報JP 2008-293209 A 特開2008−275391号公報JP 2008-275391 A

本発明は、上記事情に鑑みてなされたものであり、その目的とするところは、複合現実感の提示範囲を地上からの視点だけでは無くより広範囲なものにさせると共に、ゴンドラの搭乗者に対し単に風景を眺めているだけでは得られなかった面白みを付与させる観覧車を提供することにある。   The present invention has been made in view of the above circumstances, and its purpose is to make the presentation range of mixed reality not only a viewpoint from the ground but also a wider range, and The object is to provide a ferris wheel that provides fun that cannot be obtained simply by looking at the scenery.

上記課題を解決するために本発明の観覧車は以下の構成とする。   In order to solve the above problems, the ferris wheel of the present invention has the following configuration.

本発明は、複数のゴンドラ63を有する観覧車である。この観覧車は、各ゴンドラ63に設けられこのゴンドラ63外の実風景を撮る撮像部1と、各ゴンドラ63内に設けられた表示部2と、撮像部1の位置を検出して、撮像部1の位置を示す撮像部位置情報を出力する位置検出部と、撮像部位置情報に基づいて変形させた仮想画像を生成し、撮像部1により撮られた実画像の所定の位置に仮想画像を重ね合わせることにより合成画像を生成し、その合成画像を表示部2に表示させる制御部3とを備えている。位置検出部は、撮像部1が所定の位置に移動した時点からの経過時間を計測するように構成されているタイマを有しており、このタイマにより計測された前記経過時間およびゴンドラ63の移動速度に基づいて得られた撮像部位置情報を制御部3に出力するように構成されている。 The present invention is a ferris wheel having a plurality of gondola 63. This ferris wheel is provided in each gondola 63 and detects the position of the imaging unit 1 that captures the actual scenery outside the gondola 63, the display unit 2 provided in each gondola 63, and the imaging unit 1. A position detection unit that outputs image capturing unit position information indicating the position of 1 and a virtual image deformed based on the image capturing unit position information, and the virtual image is generated at a predetermined position of the actual image captured by the image capturing unit 1 A control unit 3 is provided that generates a composite image by superimposing and displays the composite image on the display unit 2. The position detection unit includes a timer configured to measure an elapsed time from when the imaging unit 1 moves to a predetermined position, and the elapsed time measured by the timer and the movement of the gondola 63. The imaging unit position information obtained based on the speed is output to the control unit 3.

このように構成したことで、観覧車のゴンドラ63から見える広範囲な視野を利用した複合現実感(拡張現実感や拡張仮想感も含む)をゴンドラ63の搭乗者に与えることができる。しかもゴンドラ63は水平方向だけでなく、高さ方向にも常時移動しているから、地上からの視点だけでは得られなかった複合現実感を与えることが可能となる。   With such a configuration, it is possible to give the passenger of the gondola 63 a mixed reality (including augmented reality and augmented virtual feeling) using a wide field of view visible from the gondola 63 of the ferris wheel. Moreover, since the gondola 63 constantly moves not only in the horizontal direction but also in the height direction, it is possible to give a mixed reality that cannot be obtained only from the viewpoint from the ground.

本発明の観覧車は、制御部3が、仮想画像が記憶された記憶部34と、この記憶部34に記憶された仮想画像の大きさ・角度を、ゴンドラ63の位置に応じて変化させる仮想画像変形手段36と、仮想画像変形手段36により変化させた画像を、撮像部1により撮られた実画像の所定の位置に重ね合わせることにより合成画像を生成する画像合成手段33と、画像合成手段33により生成された画像を表示部に表示させる画像表示手段35とを有していることが好ましい。   In the ferris wheel of the present invention, the control unit 3 is a virtual unit that changes the size and angle of the storage unit 34 in which the virtual image is stored and the virtual image stored in the storage unit 34 according to the position of the gondola 63. An image deforming unit 36, an image composing unit 33 for generating a composite image by superimposing an image changed by the virtual image deforming unit 36 on a predetermined position of a real image taken by the image capturing unit 1, and an image composing unit. It is preferable to have an image display means 35 for displaying the image generated by 33 on the display unit.

このように構成したことで、ゴンドラ63の移動に応じて仮想画像を変形させることができる。これにより合成画像をより現実のものに近づけることができる。   With this configuration, the virtual image can be deformed according to the movement of the gondola 63. As a result, the synthesized image can be made closer to the real one.

また本発明の観覧車は、前記撮像部1の位置を検出する位置検出部と、撮像部1の撮像方向を検出する撮像方向検出部とをさらに備え、前記仮想画像変形手段36は、位置検出部の検出情報と撮像方向検出部の検出情報とに基づいて、前記仮想画像を変化させるものであることが好ましい。   The ferris wheel of the present invention further includes a position detection unit that detects the position of the imaging unit 1 and an imaging direction detection unit that detects the imaging direction of the imaging unit 1, and the virtual image deformation unit 36 includes a position detection unit. It is preferable that the virtual image is changed based on the detection information of the part and the detection information of the imaging direction detection part.

このような構成によれば、実画像と仮想画像との位置合わせを比較的精度よく行なうことができる。   According to such a configuration, the alignment between the real image and the virtual image can be performed with relatively high accuracy.

また本発明の観覧車は、前記制御部3が、前記実画像に含まれる特定の物体をマーカとして認識するマーカ認識手段30と、マーカ認識手段30により認識されたマーカの位置・姿勢を導出する位置・姿勢導出手段32とをさらに備え、前記記憶部34は、前記マーカに前記仮想画像を対応付けて予め記憶してあり、前記仮想画像変形手段36は、位置・姿勢導出手段32により導出されたマーカの位置・姿勢情報に基づいて前記仮想画像を変化させるものであり、制御部3は、前記マーカ認識手段30によりマーカが認識されると、そのマーカに対応する仮想画像を記憶部34から取得すると共にその取得した仮想画像を仮想画像変形手段36により変化させ、その変化させた画像を画像合成手段33により実画像のマーカに対応する部分に重ね合わせて合成画像を生成し、画像表示手段33によりその合成画像を表示部2に表示させるものであることが好ましい。   In the ferris wheel of the present invention, the control unit 3 derives the marker recognition unit 30 that recognizes a specific object included in the actual image as a marker, and the position and orientation of the marker recognized by the marker recognition unit 30. A position / posture deriving unit 32; the storage unit 34 stores the virtual image in association with the marker in advance; and the virtual image deforming unit 36 is derived by the position / posture deriving unit 32. The virtual image is changed based on the position / posture information of the marker, and when the marker is recognized by the marker recognizing means 30, the control unit 3 transmits the virtual image corresponding to the marker from the storage unit 34. The acquired virtual image is changed by the virtual image deformation means 36, and the changed image is changed to a portion corresponding to the marker of the actual image by the image composition means 33. Superimposed to generate a composite image, it is preferable that to display the composite image on the display unit 2 by the image display unit 33.

このような構成によれば、実画像と仮想画像との位置合わせの精度を向上させることができる。   According to such a configuration, it is possible to improve the accuracy of alignment between the real image and the virtual image.

また前記仮想画像が、現在とは異なる時代の風景を模したコンピュータグラフィックス画像であることが好ましい。   Moreover, it is preferable that the virtual image is a computer graphics image imitating a landscape of an era different from the present.

これにより、例えば、その土地における過去の歴史上の建物や未来の予想図等を実画像に重畳させて合成画像を生成することができ、ゴンドラ63の搭乗者に対し面白みを与えることができる。   Thereby, for example, a past historical building in the land, a predicted view of the future, and the like can be superimposed on a real image to generate a composite image, and it can be interesting to the passenger of the gondola 63.

また本発明の観覧車は、記憶部34には複数の異なる年代の仮想画像が記憶されており、前記各ゴンドラ63は、任意の年代の風景に設定可能な設定部52をさらに備え、前記制御部3は、この設定部52により設定された年代に対応する仮想画像を記憶部34から取得し前記実画像に重ね合わせることによって画像を生成し、画像表示手段35によりその合成画像を表示部2に表示させるものであることが好ましい。   In the ferris wheel of the present invention, a plurality of virtual images of different ages are stored in the storage unit 34, and each gondola 63 further includes a setting unit 52 that can be set to a landscape of an arbitrary era, and the control The unit 3 generates an image by acquiring a virtual image corresponding to the age set by the setting unit 52 from the storage unit 34 and superimposing it on the actual image, and the image display means 35 displays the composite image on the display unit 2. It is preferable to be displayed.

これにより、ゴンドラ63の搭乗者の所望の年代における風景を表示部2により表示することができ、搭乗者に対し一層面白みを与えることができる。   Thereby, the scenery in the desired age of the passenger of the gondola 63 can be displayed on the display unit 2, and the passenger can be more interesting.

また本発明の観覧車は、前記撮像部1が、ゴンドラ63の外部に設けられると共に撮像方向を変更可能なカメラであり、前記ゴンドラ63は、前記カメラの撮像方向を変更させる操作部5をさらに備えていることが好ましい。   The ferris wheel of the present invention is a camera in which the imaging unit 1 is provided outside the gondola 63 and the imaging direction can be changed. The gondola 63 further includes an operation unit 5 that changes the imaging direction of the camera. It is preferable to provide.

これにより、ゴンドラ63の搭乗者の所望の視点における実画像と仮想画像とを重畳させ表示させることが可能となり、より広範囲な視野を利用した複合現実感を搭乗者に与えることができる。   As a result, it is possible to superimpose and display the real image and the virtual image at a desired viewpoint of the passenger of the gondola 63, and to give the passenger a mixed reality using a wider field of view.

また本発明の観覧車は、前記表示部2が頭部装着型表示装置に備えられていてもよい。   In the ferris wheel of the present invention, the display unit 2 may be provided in a head-mounted display device.

本発明の観覧車によれば、複合現実感の提示範囲を地上からの視点だけでは無くより広範囲なものにさせると共に、ゴンドラの搭乗者に対し単に風景だけを眺めているだけでは得られなかった面白みを付与することができる。   According to the ferris wheel of the present invention, the range of presentation of mixed reality is not limited to the viewpoint from the ground, and it is not obtained by simply looking at the scenery from the gondola passenger. Interestingness can be imparted.

本発明の一実施形態の制御を示すブロック図である。It is a block diagram which shows control of one Embodiment of this invention. 同上の観覧車の全体を示した正面図である。It is the front view which showed the whole ferris wheel same as the above. 同上のゴンドラ内を示した斜視図である。It is the perspective view which showed the inside of the gondola same as the above. 他の実施形態のゴンドラ内を示した斜視図である。It is the perspective view which showed the inside of the gondola of other embodiment.

以下、本発明の実施形態について添付図面に基づいて説明する。   Hereinafter, embodiments of the present invention will be described with reference to the accompanying drawings.

実施形態1の観覧車は、図2に示されるように、観覧車の設置面Gから1対の支持脚体60が前後に間隔をあけて立設され、1対の支持脚体60の上端間に回転軸61が水平に架設されている。この回転軸61に回転輪62が枢支されており、回転輪62は回転自在となっている。回転輪62は、支持脚体60に設けられた駆動装置(図示せず)によって回転駆動する。回転輪62は、略円形に形成された骨組み体であり、その外周端部には複数のゴンドラ63が円周方向に沿って所定間隔ごとに吊り下げられている。回転輪62の外周端部に吊持された各ゴンドラ63は、回転輪62に対し回動自在に取り付けられており、回転輪62の周囲のどの位置に移動しても常に鉛直姿勢を保持することができる。各ゴンドラ63の回転軌跡は、略円周軌跡状である。ゴンドラ63の回転軌跡の下端部位には、搭乗者がゴンドラ63に乗降するための乗降場64が設けられている。   As shown in FIG. 2, the ferris wheel of the first embodiment is configured such that a pair of support legs 60 stands up and down from the installation surface G of the ferris wheel, and the upper ends of the pair of support legs 60. A rotary shaft 61 is installed horizontally between them. A rotating wheel 62 is pivotally supported on the rotating shaft 61, and the rotating wheel 62 is rotatable. The rotating wheel 62 is rotationally driven by a driving device (not shown) provided on the support leg 60. The rotating wheel 62 is a skeleton that is formed in a substantially circular shape, and a plurality of gondola 63 are suspended at predetermined intervals along the circumferential direction at an outer peripheral end portion thereof. Each gondola 63 suspended from the outer peripheral end of the rotating wheel 62 is rotatably attached to the rotating wheel 62 and always maintains a vertical posture regardless of the position around the rotating wheel 62. be able to. The rotation trajectory of each gondola 63 has a substantially circular trajectory shape. A boarding area 64 for a passenger to get on and off the gondola 63 is provided at the lower end portion of the rotation trajectory of the gondola 63.

各ゴンドラ63は、外形が正面視略円形をしており、内部に搭乗者が搭乗するための空間を有している。各ゴンドラ63は、側面に搭乗者が出入り可能な出入り口65が設けられており、この出入り口65には開閉可能な扉66が設けられている。ゴンドラ63は、外部の下部にゴンドラ63外の風景(実風景)を撮像する撮像部1が取り付けられている。本実施形態の撮像部1は、例えばCCD(Charge Coupled Device)カメラで構成されると共に、撮像方向駆動装置(図示せず)に取り付けられており、撮像方向が水平方向からやや下方に向いた状態のまま全方位(水平方向360°)に変更可能に構成されている。この撮像部1は、後述の制御部3を介してゴンドラ63内に設けられた操作部5と接続されており、操作部5を操作することで、その撮像方向を変更させることができる。この操作部5は、図3に示されるように、ゴンドラ63の出入り口65とは反対側の内側面に設けられており、表示部2に隣接して配置されている。操作部5は、傾倒自在な操作レバー51を有しており、この操作レバー51を傾倒させることで撮像部1の撮像方向を変更させる。表示部2は、モニターから構成されており、上方に向けてやや傾斜することでその表示面が搭乗者の顔の位置する部分に向くように配設されている。この表示部2は、制御部3に接続されており、制御部3により制御される。表示部2は、対向配置された一対の座席67の略中間部に設けられている。ゴンドラ63には座席67よりも上方に透過窓68が取り付けられており、搭乗者はこの透過窓68を通して外部の風景(実風景)を眺めることができる。   Each gondola 63 has a substantially circular outer shape when viewed from the front, and has a space for passengers to ride inside. Each gondola 63 is provided with an entrance / exit 65 through which a passenger can enter and exit, and a door 66 that can be opened and closed is provided at the entrance / exit 65. The gondola 63 has an image pickup unit 1 for picking up an image of the scenery (actual scenery) outside the gondola 63 at the lower part outside. The imaging unit 1 of the present embodiment is configured by, for example, a CCD (Charge Coupled Device) camera and attached to an imaging direction driving device (not shown), and the imaging direction is slightly downward from the horizontal direction. It can be changed to all directions (horizontal direction 360 °). The imaging unit 1 is connected to an operation unit 5 provided in the gondola 63 via a control unit 3 which will be described later. By operating the operation unit 5, the imaging direction can be changed. As shown in FIG. 3, the operation unit 5 is provided on the inner surface of the gondola 63 opposite to the entrance / exit 65, and is disposed adjacent to the display unit 2. The operation unit 5 has an operation lever 51 that can be tilted. By tilting the operation lever 51, the imaging direction of the imaging unit 1 is changed. The display unit 2 is composed of a monitor, and is arranged so that its display surface faces a portion where the face of the occupant is located by being slightly inclined upward. The display unit 2 is connected to the control unit 3 and is controlled by the control unit 3. The display unit 2 is provided in a substantially middle part of the pair of seats 67 arranged to face each other. A transmissive window 68 is attached to the gondola 63 above the seat 67, and a passenger can view an external scenery (actual scenery) through the transmissive window 68.

なお操作部5としては、上記のようにゴンドラ63の内側面に固定的に取り付けられたものに限らず、他例として、例えば、表示部2の側方に配設された電気配線を介して操作部が取り付けられて、この操作部が移動自在となったものであってもよい。また、ゴンドラ63の内側面に受信部(図示せず)を新たに設けると共に、送信部を有する操作部を設け、無線により操作部を操作するようにしてもよい。   The operation unit 5 is not limited to the one fixedly attached to the inner side surface of the gondola 63 as described above. As another example, for example, via an electric wiring disposed on the side of the display unit 2. An operation unit may be attached and the operation unit may be movable. Further, a receiving unit (not shown) may be newly provided on the inner surface of the gondola 63, and an operation unit having a transmission unit may be provided to operate the operation unit wirelessly.

制御部3は、撮像部1により撮られた実画像内の、ある特定の物体に対し、仮想画像を重ね合わせることにより合成画像を生成し、その合成画像を表示部2に表示させる部分である。制御部3は、撮像部1により撮像した画像(実画像)に仮想画像を重畳して新たな画像を生成し、その画像を表示部2に表示させる機能を有する、いわゆる複合現実感(拡張現実感や拡張仮想感も含む)技術を適用したシステムとなっている。本実施形態の制御部3は、風景のある特定の物体をマーカとして認識させ、そのマーカに対応する部分に仮想画像を重畳させるマーカ認識型の複合現実感技術を利用している。制御部3は、図1に示されるように、マーカ認識手段30と、マーカ記憶部31と、位置・姿勢導出手段32と、仮想画像変形手段36と、記憶部34と、画像合成手段33と、画像表示手段35とを有しており、マイクロプロセッサーを主構成要素とするコンピュータによって構成されている。本実施形態の制御部3のコンピュータは、各ゴンドラ63の座席67の内部に格納されている。   The control unit 3 is a part that generates a composite image by superimposing a virtual image on a specific object in the real image taken by the imaging unit 1 and displays the composite image on the display unit 2. . The control unit 3 generates a new image by superimposing a virtual image on the image (actual image) captured by the image capturing unit 1 and displays the image on the display unit 2, so-called mixed reality (augmented reality). (Including feeling and extended virtual feeling). The control unit 3 according to the present embodiment uses marker recognition type mixed reality technology that recognizes a specific object in a landscape as a marker and superimposes a virtual image on a portion corresponding to the marker. As shown in FIG. 1, the control unit 3 includes a marker recognition unit 30, a marker storage unit 31, a position / posture derivation unit 32, a virtual image deformation unit 36, a storage unit 34, and an image composition unit 33. The image display means 35 and a computer having a microprocessor as a main component. The computer of the control unit 3 of this embodiment is stored in the seat 67 of each gondola 63.

マーカ認識手段30は、撮像部1により撮像された実風景に含まれる特定の物体をマーカとして認識する。マーカは、実風景を撮影した画像に仮想画像を重畳させる際の相対位置姿勢の基準となるマークのことであり、実風景に含まれる特定の物体(例えば城跡や展望台など)の3次元形状の特徴に基づいて認識される。この特定の物体の3次元形状の特徴の情報は、マーカ記憶部31にあらかじめ登録されている。このマーカ記憶部31は、メモリから構成されており、複数の異なるマーカの形状情報が格納されている。マーカ認識手段30は、このマーカ記憶部31に記憶された形状情報と、撮像部1により撮像された画像に含まれる特定の物体の形状情報とを照らし合わせることによって、マーカ記憶部31に記憶された複数のマーカのうちのどのマーカに該当するかを認識させる。このマーカ認識手段による処理は、DP(Dynamic programming)マッチングなどの画像比較アルゴリズムで実現可能である。この処理では、撮像部1の解像度を上げることで登録マーカとの比較をより詳細に行なうことが可能となるので、撮像部1の解像度を上げれば、登録マーカの数量を多くすることが可能となる。本実施形態のマーカとしては、実画像内に含まれる城・城跡・展望台・タワー・マンション・遊戯施設・駅・高速道路などが例示される。またマーカの認識は、実画像内に含まれる複数の物体をそれぞれのマーカとして複数箇所ごとに認識させてもよいし、実画像内に含まれる複数の物体を一組のマーカとして認識させるものであってもよい。このマーカ認識手段30により認識されたマーカに関する情報は、位置・姿勢導出手段32と仮想画像変形手段36に送られる。   The marker recognizing unit 30 recognizes a specific object included in the actual landscape imaged by the imaging unit 1 as a marker. A marker is a mark that serves as a reference for a relative position and orientation when a virtual image is superimposed on an image obtained by photographing a real landscape, and a three-dimensional shape of a specific object (such as a castle ruin or an observation deck) included in the real landscape. It is recognized based on the characteristics of Information on the characteristics of the three-dimensional shape of the specific object is registered in advance in the marker storage unit 31. The marker storage unit 31 includes a memory and stores shape information of a plurality of different markers. The marker recognizing means 30 is stored in the marker storage unit 31 by comparing the shape information stored in the marker storage unit 31 with the shape information of a specific object included in the image captured by the imaging unit 1. Which marker among the plurality of markers is recognized. The processing by the marker recognizing means can be realized by an image comparison algorithm such as DP (Dynamic programming) matching. In this process, it is possible to make a comparison with the registered marker in more detail by increasing the resolution of the imaging unit 1, so that if the resolution of the imaging unit 1 is increased, the number of registered markers can be increased. Become. Examples of markers in the present embodiment include castles, castle ruins, observation decks, towers, condominiums, amusement facilities, stations, and highways included in real images. In addition, the recognition of the marker may be performed by recognizing a plurality of objects included in the actual image as respective markers at each of a plurality of locations, or recognizing a plurality of objects included in the actual image as a set of markers. There may be. Information on the marker recognized by the marker recognizing unit 30 is sent to the position / posture deriving unit 32 and the virtual image deforming unit 36.

位置・姿勢導出手段32は、マーカ認識手段30により認識されたマーカの3次元の位置や姿勢を求める。位置・姿勢導出手段32は、例えば、マーカ認識手段30から受け取ったマーカに関する3次元形状の情報と、実画像内のそのマーカに対応した物体の3次元位置・形状とに基づいて、そのマーカの撮像部1に対する位置・姿勢を算出する。すなわち撮像部1から見たマーカに対する距離・角度を導き出すことになる。マーカに対応した物体の3次元位置・形状を特定するための情報としては、例えば、当該マーカの少なくとも3点の特徴点のマーカ内における座標値が挙げられる。なお、マーカの3次元位置・姿勢を計算する手法は、例えば「加藤博一、汐崎徳男、橘啓八郎:テクスチャー画像からオンライン生成されたテンプレートのマッチングに基づく拡張現実感のための位置合わせ手法、日本バーチャルリアリティ学会論文誌、Vol.7, No.2, pp.119-128 (2002)」などにも示されるような公知の手法が用いられる。   The position / posture deriving unit 32 obtains the three-dimensional position and posture of the marker recognized by the marker recognizing unit 30. The position / posture deriving unit 32, for example, based on the three-dimensional shape information received from the marker recognizing unit 30 and the three-dimensional position / shape of the object corresponding to the marker in the real image, The position / orientation with respect to the imaging unit 1 is calculated. That is, the distance / angle with respect to the marker viewed from the imaging unit 1 is derived. The information for specifying the three-dimensional position / shape of the object corresponding to the marker includes, for example, coordinate values in the marker of at least three feature points of the marker. The method for calculating the three-dimensional position and orientation of the marker is, for example, “Hirokazu Kato, Tokuo Amagasaki, Keihachiro Tachibana: a registration method for augmented reality based on matching of templates generated online from texture images, A well-known method is used as shown in the Transactions of the Virtual Reality Society of Japan, Vol.7, No.2, pp.119-128 (2002).

また、その他のマーカの位置・姿勢を導出する方法としては、ゴンドラの位置(すなわち撮像部1の位置)を検出する位置検出部と、撮像部1の撮像方向を検出する撮像方向検出部とを設け、位置検出部の検出情報と撮像方向検出部の検出情報とに基づいて、撮像部1に対するマーカの位置・姿勢を算出する手法が挙げられる。位置検出部は、乗降場64に設けられたトリガ発信器と、各ゴンドラに設けられたトリガ受信器と、トリガ発信器から発せられた信号をトリガ受信器により受けた時点からの時間を計測するタイマとを備えたものが考えられる。タイマにより計測される時間情報と、定常速度で回転する回転輪62の回転速度情報とから、各ゴンドラ63に設けられた制御部3によって各ゴンドラ63の位置を演算することができる。撮像方向検出部としては、撮像部1に取り付ける地磁気センサー、ジャイロセンサー等のセンサーが考えられる。なお観覧車の回転輪62は連続的に回転しており、これにより各ゴンドラ63は一定の速度で移動しているため、実画像に含まれるマーカの位置・姿勢は常時変化する。   As other methods for deriving the position / orientation of the marker, a position detection unit that detects the position of the gondola (that is, the position of the imaging unit 1) and an imaging direction detection unit that detects the imaging direction of the imaging unit 1 are provided. And a method of calculating the position and orientation of the marker with respect to the imaging unit 1 based on the detection information of the position detection unit and the detection information of the imaging direction detection unit. The position detector measures the time from when the trigger transmitter provided at the landing 64, the trigger receiver provided at each gondola, and the signal received from the trigger transmitter is received by the trigger receiver. A thing provided with the timer can be considered. The position of each gondola 63 can be calculated by the control unit 3 provided in each gondola 63 from the time information measured by the timer and the rotational speed information of the rotating wheel 62 rotating at a steady speed. As the imaging direction detection unit, a sensor such as a geomagnetic sensor or a gyro sensor attached to the imaging unit 1 can be considered. In addition, since the rotating wheel 62 of the ferris wheel rotates continuously, and each gondola 63 moves at a constant speed, the position / posture of the marker included in the actual image constantly change.

なお、位置検出部として、いわゆるグローバル・ポジショニング・システム(GPS;Global Positioning System)を利用するものであってもよいのはもちろんである。   Of course, a so-called global positioning system (GPS) may be used as the position detection unit.

この位置・姿勢導出手段32により導出された位置・姿勢情報は、仮想画像変形手段36に送られる。   The position / posture information derived by the position / posture deriving means 32 is sent to the virtual image deformation means 36.

仮想画像変形手段36は、マーカ認識手段30から送られたマーカに関する情報を受け取ると、そのマーカに対応する仮想画像を記憶部34から取得する。この記憶部34は、メモリにより構成されており、特定のマーカと特定の仮想画像とを対応付けて予め記憶しておく部分である。この仮想画像としては、過去の風景(例えば城や都)を模したコンピュータグラフィックス画像(以下、CG画像という)や、未来を予想した風景を模したCG画像など、現在とは異なる時代の風景を模した種々のものが挙げられる。特に過去の風景としては、名所旧跡をマーカとして認識させた場合に、仮想画像としてその場所に以前建っていたとされる城や都などのCG画像を実画像に重畳させたり、戦国時代の戦の様子をCG画像として実画像に重畳させたりすることができる。また戦国時代の戦の様子などに関し、その戦の様子を動画で表現すれば、一層臨場感や面白みを付与することができてより好ましいものとなる。もちろん、さらに遡って、例えば石器時代の住居などをCG画像とすることも可能である。   When receiving the information regarding the marker sent from the marker recognizing unit 30, the virtual image deforming unit 36 acquires a virtual image corresponding to the marker from the storage unit 34. The storage unit 34 includes a memory, and is a part that stores a specific marker and a specific virtual image in association with each other in advance. As this virtual image, a landscape of an era different from the present, such as a computer graphics image (hereinafter referred to as a CG image) simulating a past landscape (for example, a castle or a city) or a CG image simulating a landscape that anticipates the future. There are various types that imitate. In particular, as a past landscape, when a landmark is recognized as a marker, a CG image of a castle or city that was previously built as a virtual image is superimposed on the real image, The state can be superimposed on the actual image as a CG image. In addition, regarding the state of the battle in the Sengoku period, expressing the state of the battle with a moving image is more preferable because it can give a greater sense of realism and interest. Of course, further retroactively, for example, a stone age residence can be used as a CG image.

仮想画像変形手段36は、記憶部34に記憶された仮想画像のその大きさ・角度を、ゴンドラ63の位置に応じて変化させる。具体的には、位置・姿勢導出手段32により導出されたマーカの位置・姿勢情報に基づいて仮想画像を変化させる。仮想画像変形手段36は、マーカ認識手段30から送られたマーカに関する情報を受け取ると、上述のようにそのマーカに対応する仮想画像を記憶部34から取得する。そして、位置・姿勢導出手段32により算出された情報に基づいて、仮想画像の大きさ・角度を特定し、その大きさ・角度特定情報に基づいて、仮想画像を変形させる。この変形としては、地上に3次元の仮想画像が表す物体(例えば城など)が設けられているものと仮定し、空中にあるゴンドラ63の撮像部1から見た当該地上の物体の形状に一致するように、仮想画像を変化させるのが好ましい。   The virtual image deformation unit 36 changes the size and angle of the virtual image stored in the storage unit 34 according to the position of the gondola 63. Specifically, the virtual image is changed based on the marker position / posture information derived by the position / posture deriving means 32. When receiving the information regarding the marker sent from the marker recognizing unit 30, the virtual image deforming unit 36 acquires the virtual image corresponding to the marker from the storage unit 34 as described above. Then, the size / angle of the virtual image is specified based on the information calculated by the position / posture deriving means 32, and the virtual image is deformed based on the size / angle specifying information. As this modification, it is assumed that an object (for example, a castle) represented by a three-dimensional virtual image is provided on the ground, and matches the shape of the object on the ground viewed from the imaging unit 1 of the gondola 63 in the air. Thus, it is preferable to change the virtual image.

また仮想画像変形手段36は、上記のように仮想画像の大きさ・角度を変形したうえで、実風景の明るさに応じてその仮想画像の明るさを補正する補正手段を有していてもよい。つまり補正手段により仮想画像の輝度を操作することで、実画像への仮想画像の重ね合わせをより違和感なく行なうことができる。   Further, the virtual image deforming means 36 may have a correcting means for correcting the brightness of the virtual image in accordance with the brightness of the actual scenery after the size and angle of the virtual image are deformed as described above. Good. That is, by manipulating the brightness of the virtual image by the correcting means, the virtual image can be superimposed on the actual image without any discomfort.

このように仮想画像変形手段36により変形させた仮想画像の情報は、画像合成手段33に送られる。   Information on the virtual image deformed by the virtual image deformation means 36 in this way is sent to the image composition means 33.

画像合成手段33は、仮想画像変形手段36から変形させた仮想画像の情報を取得すると、実画像のそのマーカに対応する部分に、変形後の仮想画像を重ね合わせて、新たな画像(合成画像)を生成する。ここで生成された合成画像の情報は、画像表示手段35に送られる。   When acquiring the information of the deformed virtual image from the virtual image deforming unit 36, the image compositing unit 33 superimposes the deformed virtual image on the part corresponding to the marker of the real image, and creates a new image (composite image). ) Is generated. The information of the composite image generated here is sent to the image display means 35.

画像表示手段35は、画像合成手段33により生成された画像を表示部2に表示させる部分である。画像表示手段35は、画像合成手段33からの合成画像の情報を受け取ると、ゴンドラ63内に配設された表示部2にその合成画像を表示させる。   The image display means 35 is a part that displays the image generated by the image composition means 33 on the display unit 2. When the image display unit 35 receives the composite image information from the image composition unit 33, the image display unit 35 displays the composite image on the display unit 2 disposed in the gondola 63.

このような制御部3における一連の制御は、観覧車のゴンドラ63の移動に伴って連続的に行なわれる。例えばゴンドラ63が上昇していくとマーカの相対的な姿勢も次第に変化してゆくことになるが、仮想画像変形手段36はゴンドラの位置に応じて仮想画像を変化させるため、仮想画像は、ゴンドラ63の上昇に伴って次第に小さくなると共に、上方から眺めた姿勢に変化してゆく。これにより表示部2により表示される画像は、実画像に重畳された画像が仮想画像であったとしても、実際の画像に限りなく近いものとすることができる。   Such a series of controls in the controller 3 is continuously performed as the ferris wheel gondola 63 moves. For example, as the gondola 63 rises, the relative posture of the marker gradually changes. However, since the virtual image deformation means 36 changes the virtual image according to the position of the gondola, the virtual image As it rises 63, it gradually becomes smaller and changes to a posture viewed from above. Thereby, even if the image superimposed on the real image is a virtual image, the image displayed by the display unit 2 can be made as close as possible to the actual image.

また表示部2により表示される画像は、実画像に対し仮想画像が重畳されたものであるため、天候や明るさといった周りの環境と同期する。これにより、例えば、予め収録しておいた録画画像を観覧車の動きに合わせて単に放映するものに比べて、より一層臨場感が増すものとなる。   Further, since the image displayed by the display unit 2 is a virtual image superimposed on the real image, it is synchronized with the surrounding environment such as weather and brightness. Thereby, for example, a sense of reality is further increased as compared with a case where a recorded image recorded in advance is simply broadcast according to the movement of the ferris wheel.

つまり本実施形態の観覧車は、観覧車のゴンドラ63から見える広範囲な視野を利用した複合現実感をゴンドラ63の搭乗者に与えることができる。しかもゴンドラ63は水平方向だけでなく、高さ方向にも常時移動しているから、地上からの視点だけでは得られなかった複合現実感を与えることが可能となる。   That is, the ferris wheel according to the present embodiment can give the passenger of the gondola 63 a mixed reality using a wide field of view that can be seen from the gondola 63 of the ferris wheel. Moreover, since the gondola 63 constantly moves not only in the horizontal direction but also in the height direction, it is possible to give a mixed reality that cannot be obtained only from the viewpoint from the ground.

しかも本実施形態の観覧車は、操作部5に撮像部1の撮像方向を変更自在な操作レバー51が設けられているため、搭乗者の所望の向きの風景に複合現実感を与えることができる。これにより搭乗者はより一層、面白みを感じることができる。   In addition, the ferris wheel of the present embodiment is provided with the operation lever 51 that can change the imaging direction of the imaging unit 1 in the operation unit 5, so that it is possible to give mixed reality to the scenery in the desired direction of the passenger. . Thereby, the passenger can feel even more interesting.

ここで本実施形態の観覧車は、操作部5に、操作レバー51とは別に、仮想画像の内容を設定可能な設定部52がさらに設けられている。この設定部52は、各時代を模して作製された仮想画像のうち設定された時代の仮想画像を表示させる年代設定ボタンや、空想の世界の実在しない各種キャラクター(例えば、怪獣など)を表示させるキャラクター設定ボタンなど、さまざまな設定が可能な設定ボタンを有している。この設定部52は制御部3に接続されており、例えば、年代設定ボタンを操作すると、縄文時代,弥生時代・・・といった過去の風景や未来を表す風景などを選択して表示部2に表示させることができる。記憶部34には、各時代に対応した複数の仮想画像が予め記憶されている。例えば年代設定ボタンにより平安時代が設定されると、設定部52は、画像合成手段33に平安時代が選択された信号を送る。すると制御部3は、その平安時代に対応し且つマーカ認識手段30により認識されたマーカに対応する仮想画像(例えば平安京を模したCG画像)を記憶部34から取得する。そして、仮想画像変形手段36は、位置・姿勢導出手段32による情報に基づいて(つまりゴンドラ63の位置に応じて)その仮想画像の大きさ・姿勢(角度)を変形させ、画像合成手段33によってその変形させた仮想画像を実画像に重畳させて画像を生成する。ここで生成された画像は、画像表示手段35に送られ、表示部2に表示される。   Here, in the ferris wheel of the present embodiment, the operation unit 5 is further provided with a setting unit 52 that can set the contents of the virtual image, in addition to the operation lever 51. The setting unit 52 displays age setting buttons for displaying virtual images of a set era among virtual images created by imitating each era, and various characters (eg, monsters) that do not exist in the fantasy world. It has setting buttons that allow various settings, such as a character setting button. The setting unit 52 is connected to the control unit 3. For example, when the age setting button is operated, a past landscape such as the Jomon period, Yayoi period, or the like is selected and displayed on the display unit 2. Can be made. The storage unit 34 stores a plurality of virtual images corresponding to each era in advance. For example, when the Heian era is set by the age setting button, the setting unit 52 sends a signal indicating that the Heian era is selected to the image composition means 33. Then, the control unit 3 acquires a virtual image (for example, a CG image imitating Heiankyo) corresponding to the marker recognized by the marker recognition unit 30 from the storage unit 34 corresponding to the Heian era. Then, the virtual image deforming unit 36 deforms the size / posture (angle) of the virtual image based on the information from the position / posture deriving unit 32 (that is, according to the position of the gondola 63), and the image synthesizing unit 33 The deformed virtual image is superimposed on the actual image to generate an image. The image generated here is sent to the image display means 35 and displayed on the display unit 2.

このように設定部52によって、表示部2に表示される画像を搭乗者の所望の時代のものに設定することが可能となるので、観覧車から景色を眺めるだけでは得られなかったその土地の歴史に関する学習ができ、また歴史に対する興味を喚起することも可能である。さらに、歴史上の建物などを上方から眺めることができるようになるため、搭乗者は従来にはない面白みを感じることができる。   In this way, the setting unit 52 can set the image displayed on the display unit 2 to the one of the passenger's desired era, so that the land that was not obtained simply by looking at the scenery from the Ferris wheel It is possible to learn about history and to raise interest in history. Furthermore, since a historical building can be viewed from above, the passenger can feel an unprecedented interest.

また本実施形態の観覧車は、コンテンツの変更に当たって、記憶部34に記憶された仮想画像を修正・変更するだけでよいので、定期的に内容の変更を行なえばリピータの獲得も可能である。   In addition, the ferris wheel of the present embodiment only needs to modify and change the virtual image stored in the storage unit 34 when changing the content. Therefore, it is possible to acquire repeaters if the content is periodically changed.

また仮想画像として、マーカに対応する特定の物体(名所旧跡,有名なスポットなど)の名称を示すような画像や、その特定の物体の観光情報や説明文が記載された画像などを適用すれば、表示部2による表示を観覧車による映像ガイドとして利用することもできる。また、仮想画像は、建物の前に企業名を表示させたり、空中へ浮かぶアドバルーンに企業名や商品名やブランド名を記載したりする、いわゆるデジタルサイネージ(電子広告)として利用することも可能である。   In addition, if a virtual image is used, such as an image showing the name of a specific object (such as a historic spot or a famous spot) corresponding to the marker, or an image in which tourist information or explanation of the specific object is written The display by the display unit 2 can also be used as a video guide by a ferris wheel. The virtual image can also be used as a so-called digital signage (electronic advertisement) that displays the company name in front of the building or describes the company name, product name, or brand name in the ad balloon that floats in the air. It is.

さらに仮想画像は、海中・水中の様子や地中の様子を表したものをCG画像として作成したものを利用したり、実風景が夜となった場合に使用するものとして、オーロラ・稲妻・宇宙・星座といった画像をCG画像として作成したものを利用したりしてもよい。   In addition, virtual images can be created using CG images of underwater and underwater conditions or underground conditions, or used in the event that the actual landscape is at night. -You may use what created images, such as a constellation, as a CG image.

次に、実施形態2について図4に基づいて説明する。本実施形態は上記実施形態1と大部分において同じであるため、同じ部分においては同じ符号を付して説明を省略し、主に異なる部分について説明する。   Next, Embodiment 2 will be described with reference to FIG. Since the present embodiment is mostly the same as the first embodiment, the same portions are denoted by the same reference numerals, description thereof is omitted, and different portions are mainly described.

本実施形態の観覧車は、表示部2が頭部装着型表示装置7に備えられている点で上記実施形態と異なっている。この頭部装着型表示装置7は、ヘッドマウントディスプレイ70(Head Mounted Display;HMD)によって構成されている。ヘッドマウントディスプレイ70は、頭部に装着可能なディスプレイであって、搭乗者に装着されると表示部2となるディスプレイが搭乗者の目の前方を覆うようになっている。   The ferris wheel of this embodiment is different from the above embodiment in that the display unit 2 is provided in the head-mounted display device 7. The head-mounted display device 7 is configured by a head mounted display (HMD). The head-mounted display 70 is a display that can be mounted on the head, and the display serving as the display unit 2 covers the front of the passenger's eyes when mounted on the passenger.

本実施形態の観覧車は、操作部5にこのヘッドマウントディスプレイ70を接続するためのコネクタ部71が設けられている。このコネクタ部71は制御部3に接続されている。ヘッドマウントディスプレイ70は、このコネクタ部71に接続されると、制御部3の画像表示手段35から送られた画像信号を受信し、目の前方を覆う表示部2に合成画像を表示する。   The ferris wheel of this embodiment is provided with a connector portion 71 for connecting the head mounted display 70 to the operation portion 5. This connector part 71 is connected to the control part 3. When the head mounted display 70 is connected to the connector unit 71, the head mounted display 70 receives an image signal sent from the image display means 35 of the control unit 3 and displays a composite image on the display unit 2 covering the front of the eyes.

これにより、過去の風景や未来の風景を表示するようにすれば、あたかもタイムマシーンに乗車したかのような時空を超えた景観等を眺めることが可能となる。   As a result, if a past landscape or a future landscape is displayed, it is possible to view a landscape beyond time and space as if the user were on a time machine.

また、ヘッドマウントディスプレイ70の表示部2に表示される内容を、搭乗者が奥行きや立体感を認知できるようにする3D方式を適用したものとしてもよい。すなわち、右目で見える内容と左目で見える内容とで異ならせた画像を生成し、搭乗者に表示部2の表示内容が立体的なものと認知させるための画像を生成する3D画像形成手段を制御部3に設けてもよい。これにより一層臨場感に富んだ観覧車とすることができる。   Moreover, it is good also as what applied the 3D system which enables a passenger | crew to recognize depth and a three-dimensional effect for the content displayed on the display part 2 of the head mounted display 70. FIG. In other words, it controls the 3D image forming means that generates an image that is different between the content that can be seen by the right eye and the content that can be seen by the left eye, and that generates an image that allows the passenger to recognize that the display content of the display unit 2 is three-dimensional. You may provide in the part 3. FIG. This makes it possible to make the Ferris wheel more realistic.

以上、本発明の観覧車を、マーカ認識型の複合現実感技術を利用した観覧車に基づいて説明したが、本発明の観覧車は、任意の画像的特徴点をマーカの代用とする、いわゆるマーカレストラッキング(例えば特開2007−207251に例示される)技術を用いたものであってもよい。この場合には、実施形態1におけるマーカ認識手段30は必ずしも必要な構成ではない。   As described above, the ferris wheel of the present invention has been described based on the ferris wheel using the marker-recognition type mixed reality technology. However, the ferris wheel of the present invention substitutes any image feature point for the marker. A technique using a markerless tracking (for example, exemplified in JP-A-2007-207251) may be used. In this case, the marker recognizing unit 30 in the first embodiment is not necessarily required.

また本発明の仮想画像変形手段は、ゴンドラの位置に応じて画像を変形するものであればよいため、観覧車のゴンドラの定常的な移動に対応させて、仮想画像の大きさ・角度を特定してもよい。このため実施形態1の位置・姿勢導出手段32は、本発明では必ずしも必要な構成ではない。   In addition, since the virtual image deformation means of the present invention only needs to deform the image according to the position of the gondola, the size / angle of the virtual image is specified in accordance with the steady movement of the ferris wheel gondola. May be. For this reason, the position / posture deriving means 32 of the first embodiment is not necessarily required in the present invention.

また、実施形態2のヘッドマウントディスプレイ70を用いるものにおいて、各ゴンドラ63に設けられたヘッドマウントディスプレイ70に撮像部1を設け、この撮像部1の撮像方向を視線と一致させるようにし、この撮像部1に位置検出部と、撮像方向検出部とを設けるように構成してもよい。このようにすれば、搭乗者が実際に向いている方向に対応した複合現実感を提示することができる。なおこの場合、ヘッドマウントディスプレイ70に設けられた撮像部1は、本発明でいう「各ゴンドラに設けられ」た範疇に含まれるのはもちろんである。またヘッドマウントディスプレイ70としては、ワイヤレスのものを用いてもよい。   Further, in the apparatus using the head-mounted display 70 of the second embodiment, the imaging unit 1 is provided in the head-mounted display 70 provided in each gondola 63, and the imaging direction of the imaging unit 1 is made to coincide with the line of sight. The unit 1 may be configured to include a position detection unit and an imaging direction detection unit. In this way, it is possible to present mixed reality corresponding to the direction in which the passenger is actually facing. In this case, of course, the imaging unit 1 provided in the head mounted display 70 is included in the category “provided in each gondola” in the present invention. As the head mounted display 70, a wireless display may be used.

なお実施形態1の観覧車は、制御部3が各ゴンドラ63に設けられていたが、本発明の観覧車は、制御部がゴンドラとは離れた場所(例えば建物の部屋など)に設けられ、各ゴンドラの表示部を遠隔制御するものであってもよい。また実施形態1の観覧車は、設定部52の年代設定ボタンが縄文時代,弥生時代・・・といった各時代に対応するものとなっていたが、本発明の観覧車の設定部は、西暦や歴史上の出来事を選択させるものであってもよい。   In the ferris wheel of the first embodiment, the control unit 3 is provided in each gondola 63. However, in the ferris wheel of the present invention, the control unit is provided in a place away from the gondola (for example, a room of a building). The display unit of each gondola may be remotely controlled. In the ferris wheel according to the first embodiment, the age setting button of the setting unit 52 corresponds to each era such as the Jomon period, Yayoi period, etc. It may be one that selects historical events.

1 撮像部
2 表示部
3 制御部
30 マーカ認識手段
31 マーカ記憶部
32 位置・姿勢導出手段
33 画像合成手段
34 記憶部
35 画像表示手段
36 仮想画像変形手段
5 操作部
51 操作レバー
52 設定部
60 支持脚体
61 回転軸
62 回転輪
63 ゴンドラ
64 乗降場
65 出入り口
66 扉
67 座席
68 透過窓
G 設置面
DESCRIPTION OF SYMBOLS 1 Image pick-up part 2 Display part 3 Control part 30 Marker recognition means 31 Marker memory | storage part 32 Position and attitude | position derivation means 33 Image composition means 34 Storage part 35 Image display means 36 Virtual image deformation | transformation means 5 Operation part 51 Operation lever 52 Setting part 60 Support Leg 61 Rotating shaft 62 Rotating wheel 63 Gondola 64 Boarding place 65 Entrance / exit 66 Door 67 Seat 68 Transparent window G Installation surface

Claims (8)

複数のゴンドラを有する観覧車であって、
各ゴンドラに設けられこのゴンドラ外の風景を撮る撮像部と、
各ゴンドラ内に設けられた表示部と、
前記撮像部の位置を検出して、前記撮像部の位置を示す撮像部位置情報を出力する位置検出部と、
前記撮像部位置情報に基づいて変形させた仮想画像を生成し、前記撮像部により撮られた実画像の所定の位置に前記仮想画像を重ね合わせることにより合成画像を生成し、その合成画像を前記表示部に表示させる制御部と
を備えており、
前記位置検出部は、
前記撮像部が所定の位置に移動した時点からの経過時間を計測するように構成されているタイマを有しており、このタイマにより計測された前記経過時間およびゴンドラの移動速度に基づいて得られた前記撮像部位置情報を前記制御部に出力するように構成されている
ことを特徴とする、観覧車。
A ferris wheel having a plurality of gondola,
An imaging unit that is installed in each gondola and captures the scenery outside the gondola;
A display provided in each gondola;
A position detection unit that detects the position of the imaging unit and outputs imaging unit position information indicating the position of the imaging unit;
Generating a virtual image is deformed on the basis of the image pickup unit position information, the generating a composite image by superimposing the virtual image at a predetermined position of the real image taken by the imaging unit, wherein the composite image A control unit for displaying on the display unit ,
The position detector is
It has a timer configured to measure an elapsed time from the time when the imaging unit moves to a predetermined position, and is obtained based on the elapsed time measured by this timer and the moving speed of the gondola. The ferris wheel is configured to output the imaging unit position information to the control unit .
前記制御部は、
仮想画像が記憶された記憶部と、
この記憶部に記憶された仮想画像の大きさ・角度を、ゴンドラの位置に応じて変化させる仮想画像変形手段と、
仮想画像変形手段により変化させた画像を、撮像部により撮られた実画像の所定の位置に重ね合わせることにより合成画像を生成する画像合成手段と、
画像合成手段により生成された画像を表示部に表示させる画像表示手段と
を有するものである、請求項1記載の観覧車。
The controller is
A storage unit storing virtual images;
Virtual image deformation means for changing the size and angle of the virtual image stored in the storage unit according to the position of the gondola;
Image composition means for generating a composite image by superimposing the image changed by the virtual image deformation means on a predetermined position of the real image taken by the imaging unit;
The ferris wheel according to claim 1, further comprising image display means for displaying an image generated by the image composition means on the display unit.
前記撮像部の位置を検出する位置検出部と、
撮像部の撮像方向を検出する撮像方向検出部と
をさらに備え、
前記仮想画像変形手段は、位置検出部の検出情報と撮像方向検出部の検出情報とに基づいて、前記仮想画像を変化させるものである、
請求項2記載の観覧車。
A position detector for detecting the position of the imaging unit;
An imaging direction detection unit that detects an imaging direction of the imaging unit;
The virtual image deformation means changes the virtual image based on detection information of a position detection unit and detection information of an imaging direction detection unit.
The ferris wheel according to claim 2.
前記制御部は、
前記実画像に含まれる特定の物体をマーカとして認識するマーカ認識手段と、
マーカ認識手段により認識されたマーカの位置・姿勢を導出する位置・姿勢導出手段と
をさらに備え、
前記記憶部は、前記マーカに前記仮想画像を対応付けて予め記憶してあり、
前記仮想画像変形手段は、位置・姿勢導出手段により導出されたマーカの位置・姿勢情報に基づいて前記仮想画像を変化させるものであり、
制御部は、
前記マーカ認識手段によりマーカが認識されると、そのマーカに対応する仮想画像を記憶部から取得すると共にその取得した仮想画像を仮想画像変形手段により変化させ、その変化させた画像を画像合成手段により実画像のマーカに対応する部分に重ね合わせて合成画像を生成し、画像表示手段によりその合成画像を表示部に表示させるものである、
請求項2記載の観覧車。
The controller is
Marker recognition means for recognizing a specific object included in the real image as a marker,
A position / posture deriving unit for deriving the position / posture of the marker recognized by the marker recognizing unit;
The storage unit stores the virtual image in association with the marker in advance,
The virtual image deformation means changes the virtual image based on the marker position / posture information derived by the position / posture derivation means,
The control unit
When the marker is recognized by the marker recognizing unit, a virtual image corresponding to the marker is acquired from the storage unit, the acquired virtual image is changed by the virtual image deforming unit, and the changed image is converted by the image synthesizing unit. A composite image is generated by superimposing on the part corresponding to the marker of the real image, and the composite image is displayed on the display unit by the image display means.
The ferris wheel according to claim 2.
前記仮想画像が、現在とは異なる時代の風景を模したコンピュータグラフィックス画像である、
請求項1乃至請求項4のいずれか一項に記載の観覧車。
The virtual image is a computer graphics image imitating a landscape of an era different from the present,
The ferris wheel according to any one of claims 1 to 4.
前記記憶部には複数の異なる年代の仮想画像が記憶されており、
前記各ゴンドラは、任意の年代の風景に設定可能な設定部をさらに備え、
前記制御部は、この設定部により設定された年代に対応する仮想画像を前記記憶部から取得し前記実画像に重ね合わせることによって画像を生成し、画像表示手段によりその合成画像を表示部に表示させるものである、
請求項5記載の観覧車。
A plurality of virtual images of different ages are stored in the storage unit,
Each of the gondola further includes a setting unit that can be set to a landscape of any age,
The control unit obtains a virtual image corresponding to the age set by the setting unit from the storage unit and superimposes the virtual image on the real image, and displays the composite image on the display unit by the image display unit. Is what
The ferris wheel according to claim 5.
前記撮像部は、ゴンドラの外部に設けられると共に撮像方向を変更可能なカメラであり、
前記ゴンドラは、前記カメラの撮像方向を変更させる操作部をさらに備えている、
請求項1乃至請求項6のいずれか一項に記載の観覧車。
The imaging unit is a camera provided outside the gondola and capable of changing an imaging direction,
The gondola further includes an operation unit that changes an imaging direction of the camera.
The ferris wheel according to any one of claims 1 to 6.
前記表示部が頭部装着型表示装置に備えられている、請求項1乃至請求項7のいずれか一項に記載の観覧車。   The ferris wheel according to any one of claims 1 to 7, wherein the display unit is provided in a head-mounted display device.
JP2010102691A 2010-04-27 2010-04-27 Ferris wheel Active JP5759110B2 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2010102691A JP5759110B2 (en) 2010-04-27 2010-04-27 Ferris wheel
PCT/JP2011/060142 WO2011136209A1 (en) 2010-04-27 2011-04-26 Ferris wheel
TW100114658A TWI441670B (en) 2010-04-27 2011-04-27 Ferris wheel

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010102691A JP5759110B2 (en) 2010-04-27 2010-04-27 Ferris wheel

Publications (2)

Publication Number Publication Date
JP2011229679A JP2011229679A (en) 2011-11-17
JP5759110B2 true JP5759110B2 (en) 2015-08-05

Family

ID=44861507

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010102691A Active JP5759110B2 (en) 2010-04-27 2010-04-27 Ferris wheel

Country Status (3)

Country Link
JP (1) JP5759110B2 (en)
TW (1) TWI441670B (en)
WO (1) WO2011136209A1 (en)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6019680B2 (en) * 2012-04-04 2016-11-02 株式会社ニコン Display device, display method, and display program
JP5870958B2 (en) * 2012-04-27 2016-03-01 キヤノンマーケティングジャパン株式会社 INFORMATION PROCESSING SYSTEM, ITS CONTROL METHOD, AND PROGRAM, AND INFORMATION PROCESSING DEVICE, ITS CONTROL METHOD, AND PROGRAM
JP2014072576A (en) * 2012-09-27 2014-04-21 Kyocera Corp Display device and control method
CN104685869B (en) 2012-09-27 2018-12-28 京瓷株式会社 Display device, control method
JP2014072575A (en) * 2012-09-27 2014-04-21 Kyocera Corp Display device and control method
WO2014053346A1 (en) * 2012-10-02 2014-04-10 Sony Corporation Augmented reality system
JP2014219822A (en) * 2013-05-08 2014-11-20 大日本印刷株式会社 Content display device, content display method, program, and content display system
JP6682624B2 (en) * 2016-05-02 2020-04-15 株式会社ソニー・インタラクティブエンタテインメント Image processing device
JP6648050B2 (en) * 2017-02-21 2020-02-14 東京瓦斯株式会社 Image display device
JP7326740B2 (en) * 2018-12-28 2023-08-16 トヨタ紡織株式会社 Spatial provision system
TWI716256B (en) * 2020-01-08 2021-01-11 志勤 許 Aquatic vehicle for containing amusement apparatus and operating method thereof
JP2022096058A (en) * 2020-12-17 2022-06-29 トヨタ自動車株式会社 Movable body

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0511727A (en) * 1991-07-01 1993-01-22 Fujita Corp Image composition and display deivce
JP2001076168A (en) * 1999-09-02 2001-03-23 Ntt Docomo Inc Information terminal equipment, data base server device, picture display system and control method for the same
JP2003264740A (en) * 2002-03-08 2003-09-19 Cad Center:Kk Observation scope
JP4261882B2 (en) * 2002-11-25 2009-04-30 泉陽興業株式会社 Ferris wheel gondola
JP2007052484A (en) * 2005-08-15 2007-03-01 Dainippon Printing Co Ltd Image processor, image processing method, program for image processing, and information recording medium
JP2009134280A (en) * 2007-10-29 2009-06-18 Interman Corp Method for generating and providing map image for creating virtual space representing real world, server computer, and three-dimensional map image generating device
JP5111210B2 (en) * 2008-04-09 2013-01-09 キヤノン株式会社 Image processing apparatus and image processing method

Also Published As

Publication number Publication date
JP2011229679A (en) 2011-11-17
TWI441670B (en) 2014-06-21
TW201200220A (en) 2012-01-01
WO2011136209A1 (en) 2011-11-03

Similar Documents

Publication Publication Date Title
JP5759110B2 (en) Ferris wheel
CN104781873B (en) Image display device, method for displaying image, mobile device, image display system
EP3592443B1 (en) Augmented ride system and method
CN109478340B (en) Simulation system, processing method, and information storage medium
JP5804571B2 (en) Vehicle system
EP2039402B1 (en) Input instruction device, input instruction method, and dancing simultation system using the input instruction device and method
JP2022036116A (en) Systems and methods for generating augmented reality and virtual reality images
KR101748401B1 (en) Method for controlling virtual reality attraction and system thereof
JP6329343B2 (en) Image processing system, image processing apparatus, image processing program, and image processing method
JP6026088B2 (en) Remote control system
JP6396027B2 (en) Program and game device
JP5410710B2 (en) Program, information storage medium, game system
JP6761340B2 (en) Simulation system and program
CN105359063A (en) Head mounted display with tracking
JP7405734B2 (en) Display system and server
CN103028252B (en) Tourist car
US20220351472A1 (en) Remote camera augmented reality system
JP2022513754A (en) Mediation Extended Systems and Methods for Physical Interactions
JP6566209B2 (en) Program and eyewear
CN112104857A (en) Image generation system, image generation method, and information storage medium
JP6811323B2 (en) Information information system, player side device, control method, and program
JPWO2008132851A1 (en) Entertainment device, computer program, and computer-readable recording medium
JP2017099790A (en) Traveling object operation system
KR20210081194A (en) System for operating stereoscopic game

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130422

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140902

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141104

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150512

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150605

R150 Certificate of patent or registration of utility model

Ref document number: 5759110

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250