JP2015197647A - Projection device - Google Patents

Projection device Download PDF

Info

Publication number
JP2015197647A
JP2015197647A JP2014076675A JP2014076675A JP2015197647A JP 2015197647 A JP2015197647 A JP 2015197647A JP 2014076675 A JP2014076675 A JP 2014076675A JP 2014076675 A JP2014076675 A JP 2014076675A JP 2015197647 A JP2015197647 A JP 2015197647A
Authority
JP
Japan
Prior art keywords
projection
projection position
unit
movement
changing unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2014076675A
Other languages
Japanese (ja)
Inventor
拓真 森川
Takuma Morikawa
拓真 森川
柴谷 一弘
Kazuhiro Shibatani
一弘 柴谷
泰啓 本多
Yasuhiro Honda
泰啓 本多
篤広 野田
Atsuhiro Noda
篤広 野田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konica Minolta Inc
Original Assignee
Konica Minolta Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konica Minolta Inc filed Critical Konica Minolta Inc
Priority to JP2014076675A priority Critical patent/JP2015197647A/en
Publication of JP2015197647A publication Critical patent/JP2015197647A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Projection Apparatus (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Abstract

PROBLEM TO BE SOLVED: To project a video image so that the video image is quick to be accurately superimposed on a complicatedly moving projection object relative to the projection object in real time without using a large-sized and special mechanism high in capability as the mechanism changing a projection position.SOLUTION: A projection device 1 comprises a first projection position change unit 11 and second projection position change unit 12 that can change a projection position of a video image by a projection unit 2 accompanied by a movement of a projection object. The projection position change unit 11 is quicker in a response velocity than the second projection position change unit 12 and high in movement accuracy of the projection position, and the second projection position change unit 12 is wider in a changeable range of the projection position than the first projection position change unit 11 and can change the projection position as to at least one direction. The first projection position change unit 11 can change the projection position to the same direction as a direction of the projection position changed by the second projection position change unit 12.

Description

本発明は、移動する投影対象に映像を投影する投影装置に関するものである。   The present invention relates to a projection apparatus that projects an image on a moving projection target.

近年、プロジェクタ等を用いて現実と仮想現実とを融合させる技術が、特にエンタテインメント分野で広がりつつある。そして、建造物などの立体構造物に映像を投影して、平面スクリーンでは得られない立体感や臨場感を得られるような、いわゆるプロジェクションマッピングと呼ばれる映像表現や、現実の空間にある物体にコンピュータで生成した仮想の映像を重ねることで、ユーザーに様々な付加情報や映像シミュレーション体験を提供するような拡張現実感(AR:Augmented Reality)および複合現実感(MR:Mixed Reality)といった技術が注目されている。   In recent years, a technique for integrating reality and virtual reality using a projector or the like has been spreading particularly in the entertainment field. Projection of images onto 3D structures such as buildings can produce a 3D effect and realism that cannot be obtained with a flat screen, so-called projection mapping, or a computer on an object in real space. Technologies such as Augmented Reality (AR) and Mixed Reality (MR) that provide users with various additional information and video simulation experiences by superimposing virtual images generated in ing.

プロジェクションマッピングとは、実物と映像とをシンクロ(同期)させる映像手法であり、その両者の融合が生み出す魅力的な世界観は、現在世界中で注目を集めている。映像やコンピュータグラフィックス等をスクリーンのような平面に単純投影するのではなく、建築や家具などの立体物、または凹凸のある面にプロジェクタ等で投影する。その際、映像等の素材には、スクリーンとなる対象と同じ立体情報や表面情報を持たせ、投影の際にこれらがぴったり重なり合うようにする。すると、その映像の動きや変化により、対象物が動いたり、変形したり、または自ら光を放つように鑑賞者を感じさせる、幻想的で錯覚的な映像表現ができるようになる。   Projection mapping is an image technique that synchronizes the real object with the image, and the attractive world view created by the fusion of the two is currently attracting attention all over the world. Rather than simply projecting images, computer graphics, or the like onto a flat surface such as a screen, the image is projected onto a three-dimensional object such as architecture or furniture, or an uneven surface with a projector or the like. At this time, the material such as the image has the same three-dimensional information and surface information as the object to be the screen, and these are exactly overlapped at the time of projection. Then, by the movement and change of the image, it becomes possible to create a fantastic and illusionary image expression that makes the viewer feel that the object moves, deforms, or emits light by itself.

プロジェクションマッピングが注目を集めているのは、プロジェクションマッピングが単純に珍しい表現であるという以上に、楽しく夢のある表現であるという点にある。創造的で常に新鮮な表現や感動を生みだすことは、プロジェクションマッピングの世界に求められていることである。   Projection mapping is attracting attention because it is a fun and dreamy expression rather than simply an unusual expression. Creating creative and always fresh expressions and excitement is a requirement of the world of projection mapping.

このような背景のもと、移動する対象にプロジェクションマッピングを行いたいという要望が出てきている。例えば特許文献1では、移動する投影対象(移動体)をカメラにより撮影し、その撮影画像から移動体の位置を認識し、認識した位置に対して映像を投影し、また、映像の投影位置を変えることが可能な機構も併せ持った投影装置が開示されている。   Under such a background, there is a demand for performing projection mapping on a moving object. For example, in Patent Document 1, a moving projection target (moving body) is photographed by a camera, the position of the moving body is recognized from the photographed image, a video is projected to the recognized position, and the projected position of the video is determined. A projection apparatus having a mechanism that can be changed is also disclosed.

特許第4611932号公報(請求項1、段落〔0010〕、図1等参照)Japanese Patent No. 4611932 (see claim 1, paragraph [0010], FIG. 1 etc.)

ところが、特許文献1の技術では、例えば、舞台の上でパフォーマンスをしている人間に対して、映像をリアルタイムですばやくぴったりと重なるように投影することは想定されておらず、このような投影を行うことが困難である。以下、この点についてより詳細に説明する。   However, in the technique of Patent Document 1, for example, it is not assumed that images are projected on human beings performing on the stage so that the images are quickly and precisely overlapped. Difficult to do. Hereinafter, this point will be described in more detail.

特許文献1の投影装置は、映像の投影位置を変えることが可能な機構を搭載してはいるが、ある方向(例えばパン方向)に対して投影位置を変化させる機構が1つしかない。そのため、その方向(パン方向)に対する投影対象の広範囲にわたる大きな移動(以下では「粗動」とも言う)と、狭い範囲での高速な移動(以下では「微動」とも言う)との両方に対して、1つの機構で対応しなければならない。   Although the projection apparatus of Patent Document 1 is equipped with a mechanism that can change the projection position of an image, there is only one mechanism that changes the projection position in a certain direction (for example, the pan direction). Therefore, for both large movements over a wide range of projection objects in the direction (pan direction) (hereinafter also referred to as “coarse movement”) and high-speed movements in a narrow range (hereinafter also referred to as “fine movement”). One mechanism must handle it.

特に、投影対象として人間を選んだ場合、人間の動きには、ある方向に歩いたり走るといった大きな移動(粗動)と、その大きな移動を行う際の体の揺れや振動などといった小さな変位(微動)とが混ざり合っている。ましてや、舞台の上で観客を相手にパフォーマンスをする人間の場合、運動の複雑さはなおさら大きくなる。このため、そのような複雑な運動を行う人間に対して、1つの投影位置変更機構によって映像をリアルタイムですばやくぴったりと重なるように投影することは困難である。   In particular, when a person is selected as the projection target, human movement includes a large movement (coarse movement) such as walking or running in a certain direction and a small displacement (fine movement) such as shaking or vibration of the body when performing the large movement. ) Are mixed together. Even more so, the complexity of the movement is even greater for humans performing on the stage against the audience. For this reason, it is difficult to project images so as to overlap each other quickly and exactly in real time with a single projection position changing mechanism on a person who performs such a complicated motion.

仮に、1つの投影位置変更機構で、広範囲のゆっくりとした移動(粗動)と、狭い範囲のすばやい移動(微動)との両方に対応しようとすると、可動部を駆動するアクチュエータ(モータ等)に高い能力(広範囲の移動に対する高い追従性と分解能(移動精度)で駆動可能な能力)が必要となり、投影位置変更機構が大型になってしまう。また、投影画像の明るさを上げるために大型の投影部(プロジェクタ)を用いた場合には、可動しなければならない部分の重量が増加するため、さらに大きなアクチュエータが必要となる。   For example, if one projection position changing mechanism is used to handle both a wide range of slow movements (coarse movements) and a narrow range of quick movements (fine movements), an actuator (such as a motor) that drives the movable part is used. High capability (capability to drive with high followability and resolution (movement accuracy) for a wide range of movement) is required, and the projection position changing mechanism becomes large. Further, when a large projection unit (projector) is used to increase the brightness of the projected image, the weight of the portion that must be moved increases, and thus a larger actuator is required.

本発明は、上記の問題点を解決するためになされたもので、その目的は、投影位置を変更する機構として大型で能力の高い特殊なものを用いることなく、複雑に移動する投影対象に対して、映像をリアルタイムですばやくぴったりと重なるように投影することができる投影装置を提供することにある。   The present invention has been made in order to solve the above-described problems, and the object of the present invention is to project a projecting object that moves in a complex manner without using a large, high-capacity special mechanism as a mechanism for changing the projection position. Thus, it is an object of the present invention to provide a projection apparatus that can project images so as to overlap each other in real time.

本発明の一側面に係る投影装置は、投影対象に映像を投影する投影部と、前記投影部による映像の投影位置を、前記投影対象の移動に伴って変更可能な2種の投影位置変更部と、前記投影対象の位置を検出する位置検出部と、前記位置検出部にて検出された前記投影対象の位置情報に基づいて、前記各投影位置変更部に対して投影位置を変更するための指令を与える投影位置制御部とを備え、前記各投影位置変更部の一方を第1の投影位置変更部とし、他方を第2の投影位置変更部とすると、前記第1の投影位置変更部は、前記第2の投影位置変更部よりも、前記投影位置制御部によって前記指令が与えられてから投影位置の変更が完了するまでの応答速度が速く、かつ、投影位置の移動精度が高く、前記第2の投影位置変更部は、前記第1の投影位置変更部よりも、変更可能な投影位置の範囲が広く、かつ、少なくとも1方向について投影位置の変更が可能であり、前記第1の投影位置変更部は、少なくとも、前記第2の投影位置変更部による投影位置の変更方向と同じ方向について、投影位置の変更が可能である。   A projection device according to an aspect of the present invention includes a projection unit that projects an image on a projection target, and two types of projection position change units that can change the projection position of the image by the projection unit as the projection target moves. And a position detection unit for detecting the position of the projection target, and for changing the projection position with respect to each projection position change unit based on the position information of the projection target detected by the position detection unit. A projection position control unit that gives a command, and when one of the projection position changing units is a first projection position changing unit and the other is a second projection position changing unit, the first projection position changing unit is , The response speed from when the command is given by the projection position control unit to the completion of the change of the projection position is higher than that of the second projection position changing unit, and the movement accuracy of the projection position is high, The second projection position changing unit is the first projection. The range of projection positions that can be changed is wider than that of the projection position changing unit, and the projection position can be changed in at least one direction. The first projection position changing unit includes at least the second projection position. The projection position can be changed in the same direction as the change direction of the projection position by the changing unit.

上記の構成によれば、投影対象が移動すると、その移動に伴って、投影部による映像の投影位置が、第1および第2の投影位置変更部によって変更される。このとき、第1の投影位置変更部は、第2の投影位置変更部よりも、応答速度が速く(応答性が高く)、かつ、投影位置の移動精度が高い(分解能が高い)。一方で、第2の投影位置変更部は、第1の投影位置変更部よりも、変更可能な投影位置の範囲が広い。このため、投影対象の移動のうち、狭い範囲のすばやい移動(微動)に対しては、第1の投影位置変更部による投影位置の変更により、リアルタイムで精度の高い投影が可能となり、広範囲の大きくゆっくりとした移動(粗動)に対しては、第2の投影位置変更部による投影位置の変更により、リアルタイムで追従性の高い投影が可能となる。   According to the above configuration, when the projection target moves, the projection position of the video by the projection unit is changed by the first and second projection position changing units along with the movement. At this time, the first projection position changing unit has a faster response speed (high responsiveness) and higher projection position movement accuracy (high resolution) than the second projection position changing unit. On the other hand, the second projection position changing unit has a wider range of projection positions that can be changed than the first projection position changing unit. For this reason, among the movements of the projection target, for a quick movement (fine movement) within a narrow range, the projection position is changed by the first projection position changing unit, so that high-accuracy projection can be performed in real time. For slow movement (coarse movement), the projection position is changed by the second projection position changing unit, thereby enabling projection with high follow-up in real time.

しかも、第1の投影位置変更部は、少なくとも、第2の投影位置変更部による投影位置の変更方向と同じ方向について、投影位置の変更が可能であるため、上記方向に粗動と微動とが混ざった態様で投影対象が複雑に移動する場合でも、投影映像を投影対象にうまく追従させることができる。つまり、上記方向における粗動については、第2の投影位置変更部による投影位置の変更で対応し、上記方向における微動については、第1の投影位置変更部による投影位置の変更で対応することで、複雑に移動する投影対象に投影映像をうまく追従させることができる。   In addition, since the first projection position changing unit can change the projection position at least in the same direction as the projection position changing direction by the second projection position changing unit, coarse movement and fine movement are performed in the above direction. Even when the projection target moves in a mixed manner in a mixed manner, the projection image can be made to follow the projection target well. That is, the coarse movement in the direction is handled by changing the projection position by the second projection position changing unit, and the fine movement in the direction is handled by changing the projection position by the first projection position changing unit. The projected video can be made to follow the projection object that moves in a complex manner.

したがって、投影位置を変更する機構として、微動および粗動の両方に対応可能な単一の機構、つまり、大型で能力の高い特殊な機構を用いることなく、複雑に移動する投影対象に対して、映像をリアルタイムですばやくぴったりと重なるように投影することができる。   Therefore, as a mechanism for changing the projection position, a single mechanism that can handle both fine movement and coarse movement, that is, a projection object that moves in a complex manner without using a special mechanism having a large size and high capability, Project images in real time so that they overlap quickly.

前記第1の投影位置変更部は、鏡筒または前記鏡筒に含まれる少なくとも1枚のレンズを光軸に垂直な方向にシフトさせることにより、投影位置を光学的に変更する光学シフト機構で構成されており、前記第2の投影位置変更部は、投影位置をパン方向およびチルト方向に変更するパン・チルト雲台で構成されていてもよい。   The first projection position changing unit includes an optical shift mechanism that optically changes the projection position by shifting the lens barrel or at least one lens included in the lens barrel in a direction perpendicular to the optical axis. The second projection position changing unit may be configured by a pan / tilt head for changing the projection position in the pan direction and the tilt direction.

第1の投影位置変更部を構成する光学シフト機構は、光学系のみをシフトさせる機構であり、例えばパン・チルト雲台に比べて小型、軽量であるため、投影対象の狭い範囲のすばやい移動(微動)に投影位置を追従させる機構として非常に有利である。また、第2の投影位置変更部を構成するパン・チルト雲台は、パン方向およびチルト方向に投影位置を大きく変更することができることから、投影対象の広範囲の移動(粗動)に投影位置を追従させる機構として非常に有利である。   The optical shift mechanism that constitutes the first projection position changing unit is a mechanism that shifts only the optical system. For example, the optical shift mechanism is smaller and lighter than a pan / tilt head, so that the projection target can be quickly moved in a narrow range ( This is very advantageous as a mechanism for causing the projection position to follow (fine movement). In addition, the pan / tilt pan / tilt head constituting the second projection position changing unit can greatly change the projection position in the pan direction and the tilt direction, so that the projection position can be set to a wide range of movement (coarse movement) of the projection target. It is very advantageous as a mechanism for following.

前記第1の投影位置変更部は、全投影領域の一部に映像を表示させるとともに、前記全投影領域の中で、前記映像を表示させる一部の領域をシフトさせることにより、前記映像の投影位置を電子的に変更する電子シフト機構で構成されており、前記第2の投影位置変更部は、投影位置をパン方向およびチルト方向に変更するパン・チルト雲台で構成されていてもよい。   The first projection position changing unit displays an image in a part of the entire projection area, and shifts a part of the entire projection area to display the image, thereby projecting the image. The second projection position changing unit may be constituted by a pan / tilt pan head that changes the projection position in the pan direction and the tilt direction.

第1の投影位置変更部を構成する電子シフト機構は、映像の投影位置を電子的に変更するものであり、パン・チルト雲台のように投影位置を機械的に変更するものではないため、投影対象の狭い範囲のすばやい移動(微動)に投影位置を追従させる機構として非常に有利である。また、第2の投影位置変更部を構成するパン・チルト雲台は、パン方向およびチルト方向に投影位置を大きく変更することができることから、投影対象の広範囲の移動(粗動)に投影位置を追従させる機構として非常に有利である。   The electronic shift mechanism that constitutes the first projection position changing unit electronically changes the projection position of the image, and does not mechanically change the projection position like a pan / tilt head. This is very advantageous as a mechanism for causing the projection position to follow a quick movement (fine movement) within a narrow range of the projection target. In addition, the pan / tilt pan / tilt head constituting the second projection position changing unit can greatly change the projection position in the pan direction and the tilt direction, so that the projection position can be set to a wide range of movement (coarse movement) of the projection target. It is very advantageous as a mechanism for following.

前記第1の投影位置変更部は、前記指令に基づいて、映像の投影倍率を変更してもよい。この場合、投影対象が前後方向、つまり、投影装置に対して近づく方向または遠ざかる方向に移動する場合でも、投影対象の前後方向の位置に応じた大きさで、投影対象に映像を投影することができる。   The first projection position changing unit may change the projection magnification of the video based on the command. In this case, even when the projection target moves in the front-rear direction, that is, in a direction approaching or moving away from the projection apparatus, an image can be projected onto the projection target with a size corresponding to the position of the projection target in the front-rear direction. it can.

前記投影部は、映像を拡大または縮小して投影するためのズームレンズを備えたものであり、前記第1の投影位置変更部は、前記ズームレンズを光軸方向に移動させることにより、前記投影倍率を変更してもよい。ズームレンズの光軸方向への移動により、投影倍率を光学的に変更することができる。   The projection unit includes a zoom lens for projecting an enlarged or reduced image, and the first projection position changing unit moves the zoom lens in an optical axis direction to thereby project the projection. The magnification may be changed. The projection magnification can be optically changed by moving the zoom lens in the optical axis direction.

前記第1の投影位置変更部は、全投影領域の一部に映像を表示させるとともに、前記全投影領域の中で、前記映像を表示させる一部の領域を拡大または縮小させることにより、前記投影倍率を変更してもよい。このように電子的な方法で投影倍率を変更することにより、ズームレンズの移動によって投影倍率を変更する場合に比べて、可動部を減らすことができる。これにより、機械的な故障の発生を低減して装置の信頼性を高めることができ、また、システムコストを低減することもできる。   The first projection position changing unit displays the video in a part of the whole projection area, and enlarges or reduces the part of the whole projection area in which the video is displayed. The magnification may be changed. In this way, by changing the projection magnification by an electronic method, it is possible to reduce the number of movable parts as compared with the case where the projection magnification is changed by moving the zoom lens. As a result, the occurrence of a mechanical failure can be reduced to increase the reliability of the apparatus, and the system cost can also be reduced.

上記の投影装置は、前記第1および第2の投影位置変更部を同時に駆動する第1の駆動モードと、前記第1および第2の投影位置変更部のどちらか一方のみを駆動する第2の駆動モードとを切り替える駆動モード制御部をさらに備えていてもよい。   The projection apparatus includes a first drive mode for simultaneously driving the first and second projection position changing units, and a second mode for driving only one of the first and second projection position changing units. You may further provide the drive mode control part which switches a drive mode.

この場合、投影対象の移動が「微動+粗動」の場合だけでなく、「微動のみ」または「粗動のみ」の場合でも、必要な投影位置変更部のみを駆動して投影位置を変更させることができる。   In this case, not only when the movement of the projection target is “fine movement + coarse movement” but also “fine movement only” or “coarse movement only”, only the necessary projection position changing unit is driven to change the projection position. be able to.

前記駆動モード制御部は、前記位置検出部にて検出された前記投影対象の位置情報の変化に基づいて前記投影対象の移動の態様を判断し、その判断結果に基づいて前記第1の駆動モードと前記第2の駆動モードとを切り替えてもよい。   The drive mode control unit determines a movement mode of the projection target based on a change in position information of the projection target detected by the position detection unit, and based on the determination result, the first drive mode And the second drive mode may be switched.

駆動モード制御部が、投影対象の位置情報の変化に基づいて投影対象の移動の態様、すなわち、上記移動が「粗動のみ」であるか、「微動のみ」であるか、「粗動+微動」であるかを判断し、その判断結果に基づいて第1の駆動モードと第2の駆動モードとを切り替えることにより、投影対象の移動の態様に応じた適切な駆動モードで、必要な投影位置変更部のみを駆動して投影位置を変更させることができる。   The drive mode control unit determines whether the projection target moves based on the change in the position information of the projection target, that is, whether the movement is “coarse motion only”, “fine motion only”, or “coarse motion + fine motion”. , And by switching between the first drive mode and the second drive mode based on the determination result, the necessary projection position can be obtained in an appropriate drive mode according to the mode of movement of the projection target. Only the changing unit can be driven to change the projection position.

上記の構成によれば、投影位置を変更する機構として、微動および粗動の両方に対応可能な単一の機構、つまり、大型で能力の高い特殊な機構を用いることなく、複雑に移動する投影対象に対して、映像をリアルタイムですばやくぴったりと重なるように投影することができる。   According to the above configuration, as a mechanism for changing the projection position, a single mechanism that can cope with both fine movement and coarse movement, that is, a projection that moves in a complex manner without using a special mechanism having a large size and high capability. Images can be projected quickly and exactly on the target in real time.

本発明の実施の形態に係る投影装置の概略の構成を示すブロック図である。It is a block diagram which shows the schematic structure of the projection apparatus which concerns on embodiment of this invention. 上記投影装置が備える投影位置変更部の外観を模式的に示す斜視図である。It is a perspective view which shows typically the external appearance of the projection position change part with which the said projection apparatus is provided. 上記投影位置変更部の他の構成を示す斜視図である。It is a perspective view which shows the other structure of the said projection position change part. 上記投影位置変更部のさらに他の構成を示す斜視図である。It is a perspective view which shows the further another structure of the said projection position change part. 投影対象である人が舞台上を歩いて移動するシーンを模式的に示す説明図である。It is explanatory drawing which shows typically the scene where the person who is a projection object moves on the stage and moves. 図5のシーンを粗動と微動とに分別した状態を示す説明図である。It is explanatory drawing which shows the state which divided the scene of FIG. 5 into coarse motion and fine motion. 上記投影装置が備える制御部の詳細な構成を示すブロック図である。It is a block diagram which shows the detailed structure of the control part with which the said projection apparatus is provided. 上記投影装置の他の構成を示すブロック図である。It is a block diagram which shows the other structure of the said projection apparatus. 図8の構成におけるパン・チルト雲台の斜視図である。FIG. 9 is a perspective view of a pan / tilt head in the configuration of FIG. 8. 上記投影装置のさらに他の構成を示すブロック図である。It is a block diagram which shows other structure of the said projection apparatus.

本発明の実施の一形態について、図面に基づいて説明すれば、以下の通りである。   An embodiment of the present invention will be described below with reference to the drawings.

〔投影装置の構成〕
図1は、本実施形態の投影装置1の概略の構成を示すブロック図である。投影装置1は、移動する投影対象に映像を投影するものであり、投影部2と、投影位置変更部3と、位置検出センサ4と、制御部5とを備えている。
[Configuration of Projector]
FIG. 1 is a block diagram showing a schematic configuration of a projection apparatus 1 of the present embodiment. The projection apparatus 1 projects an image on a moving projection target, and includes a projection unit 2, a projection position change unit 3, a position detection sensor 4, and a control unit 5.

移動する投影対象としては、例えば舞台の上でパフォーマンスをしている人間を想定することができるが、移動するものであれば人間以外の動物や物(例えばボール)であってもよい。また、投影対象の移動には、微動および粗動が含まれる。投影対象の微動とは、投影対象の移動範囲の狭い、比較的速い動きを指し、粗動とは、投影対象の移動範囲の広い、比較的遅い動きを指す。このような投影対象の移動には、投影対象全体(例えば人間の体全体)の移動も含まれるし、投影対象の一部の部位(例えば人間の手)の移動も含まれるものとする。以下、投影装置1の各構成について説明する。   As a moving projection target, for example, a human performing on the stage can be assumed, but an animal or an object other than a human (for example, a ball) may be used as long as it moves. The movement of the projection target includes fine movement and coarse movement. The fine movement of the projection target refers to a relatively fast movement with a narrow movement range of the projection target, and the coarse movement refers to a relatively slow movement with a wide movement range of the projection target. Such movement of the projection target includes movement of the entire projection target (for example, the entire human body) and also includes movement of a part of the projection target (for example, a human hand). Hereinafter, each configuration of the projection apparatus 1 will be described.

投影部2は、投影対象に映像を投影するものであり、例えばプロジェクタで構成される。つまり、投影部2は、光源、光変調素子(例えば液晶パネル)、その他の光学部品を収容する本体2a(図2参照)と、投影レンズを保持した鏡筒2b(図2参照)とを有して構成されている。   The projection unit 2 projects an image on a projection target, and is configured by a projector, for example. That is, the projection unit 2 includes a main body 2a (see FIG. 2) that houses a light source, a light modulation element (for example, a liquid crystal panel), and other optical components, and a lens barrel 2b (see FIG. 2) that holds a projection lens. Configured.

投影位置変更部3は、投影部2による映像の投影位置を変更するものであり、2種の投影位置変更部で構成されている。ここでは便宜的に、一方の投影位置変更部3を第1の投影位置変更部11とし、他方の投影位置変更部3を第2の投影位置変更部12とする。第1の投影位置変更部11および第2の投影位置変更部12は、投影対象の移動に伴って投影位置を変更することが可能となっている。また、第2の投影位置変更部12は、少なくとも1方向(例えばパン方向)について投影位置の変更が可能となっており、第1の投影位置変更部11は、少なくとも、第2の投影位置変更部12による投影位置の変更方向と同じ方向(例えばパン方向)について、投影位置の変更が可能である。なお、投影位置変更部3の詳細については後述する。   The projection position changing unit 3 changes the projection position of the video image by the projection unit 2 and is composed of two types of projection position changing units. Here, for convenience, one projection position changing unit 3 is a first projection position changing unit 11, and the other projection position changing unit 3 is a second projection position changing unit 12. The first projection position changing unit 11 and the second projection position changing unit 12 can change the projection position as the projection target moves. Further, the second projection position changing unit 12 can change the projection position in at least one direction (for example, the pan direction), and the first projection position changing unit 11 can at least change the second projection position. The projection position can be changed in the same direction (for example, the pan direction) as the change direction of the projection position by the unit 12. Details of the projection position changing unit 3 will be described later.

位置検出センサ4は、投影対象の位置を検出する位置検出部であり、例えばパターン投影やTOF(time of flight)により3次元の位置情報を得るIR(infrared)カメラで構成されるが、その他、レーザーレーダー、超音波センサ、デジタルカメラなどで構成されてもよい。   The position detection sensor 4 is a position detection unit that detects the position of the projection target. For example, the position detection sensor 4 includes an IR (infrared) camera that obtains three-dimensional position information by pattern projection or TOF (time of flight). You may comprise a laser radar, an ultrasonic sensor, a digital camera, etc.

制御部5は、CPU(Central Processing Unit)などの演算部で構成されており、位置検出センサ4にて検出された投影対象の位置情報に基づいて、第1の投影位置変更部11および第2の投影位置変更部12に対して投影位置を変更するための指令を与える投影位置制御部である。なお、制御部5の詳細な構成については後述する。   The control unit 5 includes a calculation unit such as a CPU (Central Processing Unit), and based on the position information of the projection target detected by the position detection sensor 4, the first projection position change unit 11 and the second projection position change unit 11. This is a projection position control unit that gives a command for changing the projection position to the projection position changing unit 12. The detailed configuration of the control unit 5 will be described later.

〔投影位置変更部の詳細について〕
図2は、投影位置変更部3の外観を模式的に示す斜視図である。第1の投影位置変更部11は、投影位置を光学的に変更する光学シフト機構11aで構成されている。
[Details of the projection position changing unit]
FIG. 2 is a perspective view schematically showing the external appearance of the projection position changing unit 3. The first projection position changing unit 11 includes an optical shift mechanism 11a that optically changes the projection position.

光学シフト機構11aによるシフト方式としては、本実施形態では、鏡筒シフト方式を採用している。鏡筒シフト方式とは、図2に示すように、投影部2の鏡筒2bをレンズの光軸に垂直な方向にシフトさせることにより、投影位置を光学的に変更する方式である。この光学シフト機構11aは、鏡筒2bを移動させるための後述する微動用アクチュエータ32a(図7参照)と、微動用アクチュエータ32aを駆動するための微動用ドライバ32b(図7参照)とを含む。   In this embodiment, the lens barrel shift method is adopted as the shift method by the optical shift mechanism 11a. As shown in FIG. 2, the lens barrel shift method is a method in which the projection position is optically changed by shifting the lens barrel 2b of the projection unit 2 in a direction perpendicular to the optical axis of the lens. The optical shift mechanism 11a includes a fine movement actuator 32a (see FIG. 7) described later for moving the lens barrel 2b, and a fine movement driver 32b (see FIG. 7) for driving the fine movement actuator 32a.

上記シフト方式としては、鏡筒シフト方式以外にも、図3に示す単レンズシフト方式や、図4に示すレンズ群シフト方式を採用することもできる。単レンズシフト方式とは、鏡筒2bに含まれる複数のレンズのうちの1枚のレンズLのみを光軸に垂直な方向にシフトさせることにより、投影位置を光学的に変更する方式である。また、レンズ群シフト方式とは、鏡筒2bに含まれる複数のレンズのうち、2枚以上のレンズからなるレンズ群Gを光軸に垂直な方向にシフトさせることにより、投影位置を光学的に変更する方式である。単レンズシフト方式およびレンズ群シフト方式は、鏡筒シフト方式よりもさらに被駆動部分の重量が軽くなっている。単レンズやレンズ群を駆動するアクチュエータとしては、例えばVCM(ボイスコイルモータ)、圧電超音波リニアアクチュエータ(SIDM:Smooth Impact Drive Mechanism)、STM(ステッピングモータ)などを適用することが可能である。なお、光学シフト機構11aは、鏡筒シフト方式と単レンズシフト方式またはレンズ群シフト方式とを組み合わせて投影位置を変更することも勿論可能である。   As the shift method, in addition to the lens barrel shift method, a single lens shift method shown in FIG. 3 or a lens group shift method shown in FIG. 4 can be adopted. The single lens shift method is a method in which the projection position is optically changed by shifting only one lens L of the plurality of lenses included in the lens barrel 2b in a direction perpendicular to the optical axis. The lens group shift method is a method in which the projection position is optically shifted by shifting a lens group G composed of two or more lenses among a plurality of lenses included in the lens barrel 2b in a direction perpendicular to the optical axis. It is a method to change. In the single lens shift method and the lens group shift method, the weight of the driven part is further lighter than that of the lens barrel shift method. As an actuator for driving a single lens or a lens group, for example, a VCM (voice coil motor), a piezoelectric ultrasonic linear actuator (SIDM: Smooth Impact Drive Mechanism), an STM (stepping motor), or the like can be applied. Of course, the optical shift mechanism 11a can change the projection position by combining the lens barrel shift method and the single lens shift method or the lens group shift method.

このように、第1の投影位置変更部11を光学シフト機構11aで構成することにより、第2の投影位置変更部12よりも、応答性が高く、分解能も高い第1の投影位置変更部11を実現することができる。ここで、応答性とは、制御部5によって投影位置を変更する指令が与えられてから投影位置の変更が完了するまでの応答速度のことである。したがって、応答性が高いとは、上記応答速度が速いことを指す。また、分解能とは、投影位置を変更する際の移動精度のことであり、分解能が高いとは、移動精度が高い、すなわち、変更後の投影位置と目標位置とのズレが小さいことを指す。   In this way, by configuring the first projection position changing unit 11 with the optical shift mechanism 11a, the first projection position changing unit 11 has higher responsiveness and higher resolution than the second projection position changing unit 12. Can be realized. Here, the responsiveness is a response speed from when a command to change the projection position is given by the control unit 5 to when the change of the projection position is completed. Therefore, high response means that the response speed is high. Further, the resolution is the movement accuracy when changing the projection position, and the high resolution means that the movement accuracy is high, that is, the deviation between the changed projection position and the target position is small.

一方、第2の投影位置変更部12は、投影位置をパン方向(左右方向)およびチルト方向(上下方向)に変更するパン・チルト雲台12aで構成されている。本実施形態では、パン・チルト雲台12aに投影部2および第1の投影位置変更部11が搭載されており、これらを一体としてパン方向およびチルト方向に回転可能となっている。パン・チルト雲台12aの可動範囲は、パン方向に約180度、チルト方向に約90度である。これにより、第1の投影位置変更部11よりも第2の投影位置変更部12のほうが、変更可能な投影位置の範囲が広く確保されている。なお、パン・チルト雲台12aは、搭載物をパン方向およびチルト方向に移動(回転)させるための後述する粗動用アクチュエータ31a(図7参照)と、粗動用アクチュエータ31aを駆動するための粗動用ドライバ31b(図7参照)とを含む。   On the other hand, the second projection position changing unit 12 includes a pan / tilt head 12a that changes the projection position in the pan direction (left-right direction) and the tilt direction (up-down direction). In the present embodiment, the projection unit 2 and the first projection position changing unit 11 are mounted on the pan / tilt pan head 12a, and these can be integrally rotated in the pan direction and the tilt direction. The movable range of the pan / tilt head 12a is about 180 degrees in the pan direction and about 90 degrees in the tilt direction. As a result, the second projection position changing unit 12 has a wider range of changeable projection positions than the first projection position changing unit 11. The pan / tilt pan head 12a has a coarse motion actuator 31a (see FIG. 7) described later for moving (rotating) the load in the pan direction and the tilt direction, and a coarse motion actuator for driving the coarse motion actuator 31a. Driver 31b (see FIG. 7).

〔投影動作について〕
図5は、投影対象である人が、舞台上をX方向(舞台左端Aから舞台右端Bに向かう方向)に歩いて移動する様子(シーン)を模式的に示している。ここでは、例として、舞台上を歩きながら移動する人の右手の甲に、映像として“☆”マークを投影することを考える。
[Projection operation]
FIG. 5 schematically shows a situation (scene) in which a person to be projected walks and moves on the stage in the X direction (direction from the stage left end A toward the stage right end B). Here, as an example, consider projecting a “☆” mark as an image on the back of the right hand of a person who is walking on the stage.

この場合の左から右に移動するといった運動を粗動とし、歩く際の(肩を支点とした)右手の振り子のような運動を、微動とする。図6は、図5のシーンを粗動と微動とに分別した状態を示している。本実施形態では、人の移動を検出して、これを粗動と微動とに分別し、粗動に対する投影位置の変更と、微動に対する投影位置の変更とを別々の投影位置変更部によって行うことで、移動する人の右手の甲に、映像としての“☆”マークをぴったりと投影するようにしている。   In this case, the movement of moving from the left to the right is defined as coarse movement, and the movement such as a pendulum of the right hand when walking (with the shoulder as a fulcrum) is defined as fine movement. FIG. 6 shows a state where the scene of FIG. 5 is divided into coarse motion and fine motion. In this embodiment, the movement of a person is detected, and this is classified into coarse movement and fine movement, and the projection position change for the coarse movement and the projection position change for the fine movement are performed by separate projection position changing units. The "☆" mark as a video is projected exactly on the back of the right hand of the moving person.

より詳しく説明すると、制御部5は、位置検出センサ4(例えばカメラ)により撮影した複数の映像(時間的にずれた各フレームの映像)から、対応する追従対象(ここでは舞台上の人)を抽出する作業を繰り返し、その追従対象の位置情報と各フレーム間の時間差)とから、人の運動(変位およびその方向、速度、加速度)を把握する。このとき、制御部5は、図5のシーンにおいて、舞台上のある基準位置に対する人の重心の運動を抽出することで、粗動を把握することができ、その重心を基準とした腕の運動を抽出することで微動を把握することができる。なお、人の運動の速度は、変位を微分することで得ることができ、運動の加速度は、速度を微分することで得ることができる。   More specifically, the control unit 5 selects a corresponding target to be tracked (here, a person on the stage) from a plurality of images (images of frames shifted in time) taken by the position detection sensor 4 (for example, a camera). The extraction operation is repeated, and the movement (displacement and its direction, speed, acceleration) of the person is grasped from the position information of the tracking target and the time difference between the frames. At this time, the control unit 5 can grasp the coarse motion by extracting the motion of the center of gravity of the person with respect to a certain reference position on the stage in the scene of FIG. 5, and the motion of the arm with reference to the center of gravity. It is possible to grasp microtremors by extracting. The speed of human movement can be obtained by differentiating the displacement, and the acceleration of movement can be obtained by differentiating the speed.

次に、制御部5は、抽出された粗動と微動に対して、粗動用の第2の投影位置変更部12と微動用の第1の投影位置変更部11に、投影位置を変更するための指令(指令値)をそれぞれ与えてこれらを駆動し、投影位置を変更させる。これにより、移動する人に対して映像(“☆”マーク)をぴったりと投影することができる。その理由は以下の通りである。   Next, the control unit 5 changes the projection position to the second projection position changing unit 12 for coarse movement and the first projection position changing unit 11 for fine movement with respect to the extracted coarse movement and fine movement. These commands (command values) are given and driven to change the projection position. As a result, it is possible to accurately project the image (“☆” mark) to the moving person. The reason is as follows.

例えば、投影位置を変更する機構としてパン・チルト雲台だけを用いて、上記シーンでの投影を行おうとした場合、そのパン・チルト雲台だけで粗動と微動に対応した投影位置に投影部の向きを変更しなければならない。そのため、パン・チルト雲台には、粗動と微動の両方に対応できる応答性・分解能・可動範囲が要求され、結果として投影位置変更機構が大型(もしくは高性能)になってしまう。また、明るい映像を投影するために大型のプロジェクタを用いた場合、投影位置変更機構が駆動しなければならない部分の重量が増大し、さらに大型(もしくは高性能)な投影位置変更機構が必要となる。   For example, when only the pan / tilt pan head is used as a mechanism for changing the projection position and projection is performed in the above scene, the projection unit can project the projection position corresponding to the coarse motion and the fine motion with only the pan / tilt pan head. The direction of the must be changed. For this reason, the pan / tilt head is required to have responsiveness, resolution, and movable range that can cope with both coarse movement and fine movement, resulting in a large (or high performance) projection position changing mechanism. Further, when a large projector is used to project a bright image, the weight of the portion that the projection position changing mechanism must drive increases, and a larger (or higher performance) projection position changing mechanism is required. .

しかし、本実施形態のように、投影位置変更機構として、図2で示したように、第1の投影位置変更部11および第2の投影位置変更部12を有する投影位置変更部3を用い、第1の投影位置変更部11に、追従範囲(投影位置の変更可能範囲)は狭いが、高い応答性および分解能を持たせ、第2の投影位置変更部12に、応答性および分解能は低いが、広い追従範囲を持たせることにより、人がステージ上を歩いて移動する運動(粗動)については、第2の投影位置変更部12によって広範囲で追従しながら、振り子運動をする人の手の甲の運動(微動)については、第1の投影方向変更部11によって応答性よく、かつ高い移動精度で追従することができる。   However, as in the present embodiment, as the projection position changing mechanism, as shown in FIG. 2, the projection position changing unit 3 having the first projection position changing unit 11 and the second projection position changing unit 12 is used. Although the first projection position changing unit 11 has a narrow follow-up range (changeable range of the projection position), it has high responsiveness and resolution, and the second projection position changing unit 12 has low responsiveness and resolution. By providing a wide tracking range, the movement of the person walking on the stage (coarse movement) can be traced over a wide range by the second projection position changing unit 12 while performing the pendulum movement. The movement (fine movement) can be followed by the first projection direction changing unit 11 with high responsiveness and high movement accuracy.

しかも、第1の投影位置変更部11は、少なくとも、第2の投影位置変更部12による投影位置の変更方向と同じ方向について、投影位置の変更が可能であるので、投影位置変更部3は、同一方向における粗動と微動との両方に対応することができる。つまり、ある方向の粗動については第2の投影位置変更部12による投影位置の変更で対応し、上記方向の微動については第1の投影位置変更部11による投影位置の変更で対応することができる。これにより、上記方向に人が複雑に(粗動と微動とが混ざった態様で)移動する場合でも、投影対象である人に投影映像をうまく追従させることができる。   In addition, since the first projection position change unit 11 can change the projection position at least in the same direction as the change direction of the projection position by the second projection position change unit 12, the projection position change unit 3 Both coarse movement and fine movement in the same direction can be handled. That is, coarse movement in a certain direction can be dealt with by changing the projection position by the second projection position changing unit 12, and fine movement in the above direction can be dealt with by changing the projection position by the first projection position changing unit 11. it can. Thereby, even when a person moves in the above direction in a complicated manner (in a mode in which coarse motion and fine motion are mixed), it is possible to cause the projection target person to follow the projection video well.

つまり、本実施形態のように、2種の投影位置変更部(第1の投影位置変更部11、第2の投影位置変更部12)を用い、微動および粗動に適した駆動源(モータ)をこれらに搭載して共働させることにより、投影位置を変更する機構として、投影対象の微動および粗動の両方に対応可能な大型で能力の高い特殊な機構を用いることなく、複雑に移動する投影対象に対して、映像をリアルタイムですばやくぴったりと重なるように投影することができる。   That is, as in the present embodiment, two types of projection position changing units (first projection position changing unit 11 and second projection position changing unit 12) are used, and a driving source (motor) suitable for fine movement and coarse movement. As a mechanism for changing the projection position by mounting them on the screen, it moves in a complex manner without using a large, high-capacity special mechanism that can handle both fine and coarse movements of the projection target. It is possible to project an image so as to quickly and exactly overlap the projection target in real time.

特に、右手の甲のような、移動範囲が狭く、比較的速い運動をする対象に追従するためには、被駆動部分の重量が軽いほうが有利である。その点において、第1の投影位置変更部11を構成する光学シフト機構11aは、投影装置1の構成要素のうち、光学系のみを駆動する方式を採用するため(小型軽量で構成可能なため)有利である。また、光学シフト機構11aは小型で構成可能であることから、第2の投影位置変更部12に加えて第1の投影位置変更部11(光学シフト機構11a)を設けても、粗動と微動の両方に対応できる単一で大型の投影位置変更機構を用いる場合に比べると、投影装置1の大型化を低減することができる。   In particular, in order to follow a subject that has a narrow movement range and a relatively fast movement, such as the back of the right hand, it is advantageous that the weight of the driven part is light. In that respect, the optical shift mechanism 11a constituting the first projection position changing unit 11 employs a method of driving only the optical system among the components of the projection apparatus 1 (because it can be configured with a small size and a light weight). It is advantageous. Further, since the optical shift mechanism 11a can be configured in a small size, even if the first projection position changing unit 11 (optical shift mechanism 11a) is provided in addition to the second projection position changing unit 12, coarse movement and fine movement are possible. Compared to the case of using a single large projection position changing mechanism that can handle both, the enlargement of the projection device 1 can be reduced.

また、パン・チルト雲台12aは、上述したようにパン方向に約180度、チルト方向に約90度と、投影位置を大きく変更することができることから、投影対象の広範囲の移動(粗動)に投影位置を追従させる第2の投影位置変更部12に非常に有効である。   In addition, since the pan / tilt head 12a can change the projection position to about 180 degrees in the pan direction and about 90 degrees in the tilt direction as described above, the projection object can be moved over a wide range (coarse motion). This is very effective for the second projection position changing unit 12 that follows the projection position.

〔制御部の詳細について〕
次に、上述した制御部5の詳細について説明する。図7は、制御部5の詳細な構成を示すブロック図である。制御部5は、粗動/微動分別部21と、粗動目標値算出部22と、微動目標値算出部23と、粗動指令値演算部24と、微動指令値演算部25とを有している。これらは1つのCPUで構成することもできるし、別々のCPUで構成することもできる。
[Details of control unit]
Next, details of the control unit 5 described above will be described. FIG. 7 is a block diagram illustrating a detailed configuration of the control unit 5. The control unit 5 includes a coarse / fine movement classification unit 21, a coarse movement target value calculation unit 22, a fine movement target value calculation unit 23, a coarse movement command value calculation unit 24, and a fine movement command value calculation unit 25. ing. These can be constituted by one CPU or can be constituted by separate CPUs.

粗動/微動分別部21は、位置検出センサ4(カメラ)で撮影された各フレームの画像から投影対象(例えば人)を抽出し、抽出した人の運動を粗動と微動とに分別するとともに、2つのフレームの時間差から、粗動および微動の変位、速度、加速度を求める。なお、粗動と微動との分別は、上述のように、舞台上のある基準位置に対する人の重心の運動の抽出で粗動を把握し、その重心を基準とした腕の運動の抽出で微動を把握することで行うことができる。   The coarse / fine movement classification unit 21 extracts a projection target (for example, a person) from each frame image captured by the position detection sensor 4 (camera), and separates the extracted movement of the person into coarse movement and fine movement. From the time difference between the two frames, the displacement, speed, and acceleration of coarse and fine movements are obtained. As described above, coarse motion and fine motion can be separated by extracting the motion of the center of gravity of the person relative to a certain reference position on the stage, and by detecting the motion of the arm based on the center of gravity. Can be done by grasping.

粗動目標値算出部22は、粗動/微動分別部21で分別された粗動のデータ(変位、速度、加速度)から、粗動の目標の投影位置、目標の速度、目標の加速度をそれぞれ算出する粗動目標位置算出部22a、粗動目標速度算出部22b、粗動目標加速度算出部22cと、これらで算出された情報の少なくともいずれかを粗動指令値演算部24に出力するスイッチング素子22dとを備えている。   The coarse motion target value calculation unit 22 determines the projection position of the coarse motion target, the target speed, and the target acceleration from the coarse motion data (displacement, speed, acceleration) classified by the coarse motion / fine motion classification unit 21, respectively. A coarse motion target position calculation unit 22a, a coarse motion target speed calculation unit 22b, a coarse motion target acceleration calculation unit 22c to be calculated, and a switching element that outputs at least one of the information calculated by these to the coarse motion command value calculation unit 24 22d.

微動目標値算出部23は、粗動/微動分別部21で分別された微動のデータ(変位、速度、加速度)から、微動の目標の投影位置、目標の速度、目標の加速度をそれぞれ算出する微動目標位置算出部23a、微動目標速度算出部23b、微動目標加速度算出部23cと、これらで算出された情報の少なくともいずれかを微動指令値演算部25に出力するスイッチング素子23dとを備えている。   The fine movement target value calculation unit 23 calculates the fine movement target projection position, the target speed, and the target acceleration from the fine movement data (displacement, speed, acceleration) classified by the coarse movement / fine movement classification unit 21. A target position calculation unit 23a, a fine movement target speed calculation unit 23b, a fine movement target acceleration calculation unit 23c, and a switching element 23d that outputs at least one of the information calculated by these to the fine movement command value calculation unit 25 are provided.

粗動指令値演算部24は、粗動目標値算出部22にて算出された、粗動の目標の投影位置、目標の速度、目標の加速度の少なくともいずれかを用い、目標の位置に、あるいは目標の速度、目標の加速度で投影位置が移動するように、投影装置1の現在の位置を加味して、第2の投影位置変更部12を駆動するための指令値を演算する。投影装置1の現在の位置を加味するのは、投影装置1の位置、つまり、投影対象と投影装置1との距離によっては、同じ指令値で第2の投影位置変更部12を駆動しても、投影対象に対する投影位置がずれるためである。なお、位置検出センサ4での投影対象の位置検出と同時に、位置検出センサ4と投影対象との距離も検出できるので、これによって粗動指令値演算部24が投影装置1の位置を把握することは可能である。   The coarse motion command value calculation unit 24 uses at least one of the coarse motion target projection position, the target speed, and the target acceleration calculated by the coarse motion target value calculation unit 22, at the target position, or A command value for driving the second projection position changing unit 12 is calculated in consideration of the current position of the projection apparatus 1 so that the projection position moves at the target speed and the target acceleration. The current position of the projection device 1 is taken into account even if the second projection position changing unit 12 is driven with the same command value depending on the position of the projection device 1, that is, the distance between the projection target and the projection device 1. This is because the projection position with respect to the projection target is shifted. Since the distance between the position detection sensor 4 and the projection target can be detected simultaneously with the position detection of the projection target by the position detection sensor 4, the coarse motion command value calculation unit 24 can grasp the position of the projection device 1. Is possible.

粗動指令値演算部24にて演算された粗動に関する指令値は、第2の投影位置変更部12の粗動用ドライバ31bに入力される。粗動用ドライバ31bが上記指令値に基づいて、粗動用アクチュエータ31aを駆動することにより、第2の投影位置変更部12のパン・チルト雲台12aが駆動され、投影位置が目標の位置に、あるいは目標の速度または加速度で変更される。   The command value related to the coarse motion calculated by the coarse motion command value calculation unit 24 is input to the coarse motion driver 31 b of the second projection position changing unit 12. The coarse movement driver 31b drives the coarse movement actuator 31a based on the command value, thereby driving the pan / tilt pan head 12a of the second projection position changing unit 12 and setting the projection position to the target position or It changes with the target speed or acceleration.

微動指令値演算部25は、微動目標値算出部23にて算出された、微動の目標の投影位置、目標の速度、目標の加速度の少なくともいずれかを用い、目標の位置に、あるいは目標の速度、目標の加速度で投影位置が移動するように、投影装置1の現在の位置を加味して、第1の投影位置変更部11を駆動するための指令値を演算する。投影装置1の現在の位置を加味するのは、上記と同様の理由による。   The fine movement command value calculation unit 25 uses at least one of the projection position of the fine movement target, the target speed, and the target acceleration calculated by the fine movement target value calculation unit 23, to the target position, or to the target speed. The command value for driving the first projection position changing unit 11 is calculated in consideration of the current position of the projection apparatus 1 so that the projection position moves at the target acceleration. The reason why the current position of the projection apparatus 1 is taken into account is the same as described above.

微動指令値演算部25にて演算された微動に関する指令値は、第1の投影位置変更部11の微動用ドライバ32bに入力される。微動用ドライバ32bが上記指令値に基づいて,微動用アクチュエータ32aを駆動することにより、光学シフト機構11aが駆動され、投影位置が目標の位置に、あるいは目標の速度または加速度で変更される。   The command value relating to the fine movement calculated by the fine movement command value calculation unit 25 is input to the fine movement driver 32 b of the first projection position changing unit 11. The fine movement driver 32b drives the fine movement actuator 32a based on the command value, so that the optical shift mechanism 11a is driven, and the projection position is changed to the target position, or at the target speed or acceleration.

〔投影装置の他の構成〕
図8は、投影装置1の他の構成を示すブロック図であり、図9は、図8の構成におけるパン・チルト雲台12aの斜視図である。図8の投影装置1は、第1の投影位置変更部11として電子シフト機構11bを用い、第2の投影位置変更部12を構成するパン・チルト雲台12aが投影部2のみを搭載する構成とした以外は、図1の投影装置1と同様の構成である。
[Other configurations of the projection apparatus]
FIG. 8 is a block diagram showing another configuration of the projection apparatus 1, and FIG. 9 is a perspective view of the pan / tilt head 12a in the configuration of FIG. 8 uses an electronic shift mechanism 11b as the first projection position changing unit 11, and the pan / tilt pan head 12a constituting the second projection position changing unit 12 has only the projection unit 2 mounted thereon. Except for the above, the configuration is the same as that of the projection apparatus 1 of FIG.

電子シフト機構11bは、全投影領域の一部に映像を表示させるとともに、全投影領域の中で、映像を表示させる上記一部の領域をシフトさせることにより、映像の投影位置を電子的に変更するものである。このような電子シフト機構11bは、具体的には、全投影領域の中で一部の映像表示領域がシフトするように投影映像のデータを加工する画像処理部で構成される。このように全投影領域の中の一部を映像表示領域として使用し、他の領域には映像を表示しない(投影光無し=黒にする)ようにして、投影部2を動かさずに映像表示領域を全投影領域の中でシフトさせることにより、投影位置を実質的に変えることができる(電子シフト方式)。   The electronic shift mechanism 11b electronically changes the projection position of the image by displaying the image in a part of the entire projection area and shifting the part of the area in which the image is displayed in the entire projection area. To do. Specifically, the electronic shift mechanism 11b includes an image processing unit that processes projection video data so that a part of the video display area is shifted in the entire projection area. In this way, a part of the entire projection area is used as an image display area, and an image is not displayed in other areas (no projection light = black), and the image is displayed without moving the projection unit 2. By shifting the area within the entire projection area, the projection position can be substantially changed (electronic shift method).

電子シフト機構11bは、上述のように映像の投影位置を電子的に変更するものであり、パン・チルト雲台のように投影位置を機械的に変更するものではないため、投影対象の狭い範囲のすばやい移動(微動)に投影位置を追従させる第1の投影位置変更部11として非常に有効である。   The electronic shift mechanism 11b changes the projection position of the image electronically as described above, and does not change the projection position mechanically like a pan / tilt pan head. This is very effective as the first projection position changing unit 11 for causing the projection position to follow the quick movement (fine movement).

また、電子シフト方式の場合、光軸の可動範囲に相当する全投影領域が必要となるため、鏡筒シフト方式などのように投影位置を物理的に変更する方法と比較して、投影映像の明るさや解像度が劣ることになる。しかし、可動部を減らすことが可能なため、信頼性を高めるとともに、システムコストを低減することが可能である。   In the case of the electronic shift method, since the entire projection area corresponding to the movable range of the optical axis is required, compared with a method of physically changing the projection position, such as a lens barrel shift method, The brightness and resolution will be inferior. However, since it is possible to reduce the number of movable parts, it is possible to improve reliability and reduce system cost.

また、図10は、投影装置1のさらに他の構成を示すブロック図である。図10の投影装置1は、投影部2として、映像を拡大または縮小して投影するためのズームレンズを搭載したものを用いた以外は、図1の投影装置1と同様の構成である。   FIG. 10 is a block diagram showing still another configuration of the projection apparatus 1. The projection apparatus 1 in FIG. 10 has the same configuration as the projection apparatus 1 in FIG. 1 except that the projection unit 2 is mounted with a zoom lens for projecting an enlarged or reduced image.

例えば、舞台上での人のパフォーマンス等において、舞台奥行き方向への移動がないパフォーマンスというのは考えにくい。図1および図8の構成では、舞台の左右方向における投影対象の移動については投影位置を追従させることができるが、舞台奥行き方向(前後方向、投影装置に対して近づく方向または遠ざかる方向)の移動については投影位置を追従させることができない。しかし、図10のように、ズームレンズ搭載型の投影部2を用いることで、舞台奥行き方向への移動に対応した投影位置の追従も可能となり、適用可能な投影シーンの幅(投影のバリエーション)を広げることができる。   For example, it is difficult to imagine a performance that does not move in the depth direction of the stage in the performance of people on the stage. In the configurations of FIGS. 1 and 8, the projection position can follow the movement of the projection target in the left-right direction of the stage, but the movement in the stage depth direction (front-rear direction, direction toward or away from the projection apparatus) Cannot follow the projection position. However, as shown in FIG. 10, by using the projection unit 2 equipped with a zoom lens, it is possible to follow the projection position corresponding to the movement in the stage depth direction, and the width of the applicable projection scene (projection variation). Can be spread.

例えば投影対象が投影装置1から離れる方向に移動した際には、投影倍率を小さくすることで、投影対象に対する投影映像の大きさを保ったまま、投影を続けることが可能であり、逆に、投影対象が投影装置1に近づいてきた場合は、その逆の対応を取ればよい。なお、このような対応は、演出内容次第で行う必要が無い場合もあり、さらに上記とは逆の対応を行う場合も考えられる。   For example, when the projection object moves in a direction away from the projection apparatus 1, it is possible to continue the projection while maintaining the size of the projection image with respect to the projection object by reducing the projection magnification. When the projection target approaches the projection apparatus 1, the opposite is necessary. Such correspondence may not be necessary depending on the contents of the effect, and there may be cases where the opposite is performed.

このように映像の投影倍率(拡大率、縮小率)を変更する方法としては、投影部2のズームレンズを光軸方向に移動させて投影倍率を光学的に変更する方法がある。第1の投影位置変更部11の光学シフト機構11aが、光軸に垂直な方向へのレンズまたは鏡筒のシフトに加えて、光軸方向へのズームレンズの移動も併せて行い、投影倍率を変更することで、舞台奥行き方向に投影対象が移動した場合でも、その移動に投影位置を追従させることができる。   As a method of changing the projection magnification (magnification ratio, reduction ratio) of the video in this way, there is a method of optically changing the projection magnification by moving the zoom lens of the projection unit 2 in the optical axis direction. The optical shift mechanism 11a of the first projection position changing unit 11 moves the zoom lens in the direction of the optical axis in addition to shifting the lens or the lens barrel in the direction perpendicular to the optical axis. By changing, even if the projection target moves in the stage depth direction, the projection position can follow the movement.

ここで、位置検出センサ4は、上述のように、投影対象の位置と投影装置1との距離を検出することができるので、その距離情報を制御部5に供給し、制御部5にて目標となる投影倍率を算出し、これを光学シフト機構11aの駆動のための指令値に含ませればよい。光学シフト機構11aがその指令値に基づいて投影倍率を変更することにより、投影対象の奥行き方向の位置に応じた大きさで映像を投影することができる。   Here, since the position detection sensor 4 can detect the distance between the position of the projection target and the projection apparatus 1 as described above, the distance information is supplied to the control unit 5, and the target is detected by the control unit 5. Is calculated and included in the command value for driving the optical shift mechanism 11a. When the optical shift mechanism 11a changes the projection magnification based on the command value, it is possible to project an image with a size corresponding to the position in the depth direction of the projection target.

また、投影部2がズームレンズを備えていない場合でも、電子的な方法で投影倍率を変更することが可能である。例えば、投影部2がズームレンズを備えていない図8の構成において、電子シフト機構11bが、投影映像のデータを加工して、全投影領域の中の一部を映像領域として使用し、他の領域には映像を表示しない(投影光無し=黒にする)ようにして、投影部2を動かさずに映像表示領域を全投影領域の中で拡大または縮小させることによっても、映像の投影倍率を実質的に変えることができる(電子ズーム方式)。   Even when the projection unit 2 does not include a zoom lens, the projection magnification can be changed by an electronic method. For example, in the configuration of FIG. 8 in which the projection unit 2 does not include a zoom lens, the electronic shift mechanism 11b processes the data of the projection video and uses a part of the entire projection area as the video area. The projection magnification of the image can also be increased by not displaying the image in the region (no projection light = black) and enlarging or reducing the image display region in the entire projection region without moving the projection unit 2. It can be changed substantially (electronic zoom method).

電子ズーム方式では、投影映像の最大拡大率に相当する全投影領域が必要となるため、ズーム光学系を動かすような物理的な手段と比較して投影映像の明るさや解像度が劣ることになるが、可動部を減らして信頼性を高めるとともに、システムコストを低減することが可能である。   With the electronic zoom method, the entire projection area corresponding to the maximum magnification of the projected image is required, so the brightness and resolution of the projected image are inferior compared to physical means such as moving the zoom optical system. It is possible to increase the reliability by reducing the movable parts and reduce the system cost.

〔駆動モードの切り替えについて〕
上記した制御部5は、第1の投影位置変更部11および第2の投影位置変更部12の駆動モードを制御する駆動モード制御部として機能してもよい。より具体的には、第1の投影位置変更部11および第2の投影位置変更部12を同時に駆動するモードを第1の駆動モードとし、第1の投影位置変更部11および第2の投影位置変更部12のどちらか一方のみを駆動するモードを第2の駆動モードとしたとき、制御部5は、第1の駆動モードと第2の駆動モードとを切り替える制御を行ってもよい。
[About switching of drive mode]
The control unit 5 described above may function as a drive mode control unit that controls the drive modes of the first projection position changing unit 11 and the second projection position changing unit 12. More specifically, a mode in which the first projection position changing unit 11 and the second projection position changing unit 12 are driven simultaneously is set as a first drive mode, and the first projection position changing unit 11 and the second projection position are set. When the mode for driving only one of the changing units 12 is set as the second drive mode, the control unit 5 may perform control to switch between the first drive mode and the second drive mode.

投影対象の移動(運動)の態様として、上述したように粗動と微動とが同時に発生する態様もあるが、粗動のみ、または微動のみが発生する態様もある。例えば、その場で足踏みだけをしている人の運動としては、微動のみが発生しており、転がっているボールの運動としては、粗動のみが発生している。したがって、その場で足踏みだけをしている人の足に映像を投影する場合は、微動に対する投影位置の変更で対応でき、転がっているボールに映像を投影する場合は、粗動に対する投影位置の変更で対応できる。   As a mode of movement (movement) of the projection target, there is a mode in which coarse motion and fine motion occur simultaneously as described above, but there is also a mode in which only coarse motion or only fine motion occurs. For example, as a motion of a person who is only stepping on the spot, only a fine motion is generated, and as a motion of a rolling ball, only a rough motion is generated. Therefore, when projecting an image on the foot of a person who is only stepping on the spot, it is possible to respond by changing the projection position for fine movement, and when projecting an image on a rolling ball, It can respond by change.

よって、制御部5が第1の駆動モードと第2の駆動モードとを切り替えることにより、投影対象の移動が「微動+粗動」の場合だけでなく、「微動のみ」または「粗動のみ」の場合でも、必要な投影位置変更部のみを駆動して投影位置を変更させることができる。   Therefore, when the control unit 5 switches between the first drive mode and the second drive mode, not only when the movement of the projection target is “fine movement + coarse movement” but also “fine movement only” or “coarse movement only”. Even in this case, only the necessary projection position changing unit can be driven to change the projection position.

特に、制御部5は、上述したように、位置検出センサ4にて検出された投影対象(人)の各フレーム間での位置情報の変化に基づいて、人の重心の運動から粗動を把握でき、その重心を基準とした腕の運動から微動を把握できる。したがって、制御部5が、上記位置情報の変化に基づいて投影対象の移動の態様(「粗動+微動」、「粗動のみ」、「微動のみ」)を判断し、その判断結果に基づいて第1の駆動モードと第2の駆動モードとを切り替えることにより、投影対象の移動の態様に応じた適切な駆動モードで、必要な投影位置変更部のみを駆動して投影位置を変更させることができる。   In particular, as described above, the control unit 5 grasps coarse movement from the movement of the center of gravity of the person based on the change in position information between the frames of the projection target (person) detected by the position detection sensor 4. It is possible to grasp the fine movement from the movement of the arm based on the center of gravity. Therefore, the control unit 5 determines the mode of movement of the projection target (“coarse motion + fine motion”, “coarse motion only”, “fine motion only”) based on the change in the position information, and based on the determination result. By switching between the first drive mode and the second drive mode, the projection position can be changed by driving only the necessary projection position changing unit in an appropriate drive mode according to the mode of movement of the projection target. it can.

〔その他〕
以上では、人が歩く場合の大きな移動を粗動とし、腕の振りによる変位を微動として説明したが、粗動と微動の定義はこれに限定されるわけではない。追従させたい物体の運動に関して、移動範囲が広く比較的ゆっくりとした動きを粗動とし、移動範囲が狭く比較的速い動きを微動とすることができる。よって、粗動と微動との境界は、投影対象によって異なる。
[Others]
In the above description, a large movement when a person walks is described as coarse movement, and the displacement caused by swinging the arm is described as fine movement. However, the definition of coarse movement and fine movement is not limited to this. With regard to the motion of an object to be followed, a relatively slow movement with a wide movement range can be regarded as a rough movement, and a relatively fast movement with a narrow movement range can be regarded as a fine movement. Therefore, the boundary between coarse movement and fine movement varies depending on the projection target.

なお、例えば図5で示したシーンにおいて、人の手と足にそれぞれ追従する映像を投影したい場合には、投影部2を2台設置して投影を行うことが可能であり、同様に、複数人に映像を投影したい場合には、複数台の投影部2を用いて映像を投影することが可能である。この場合でも、上述した本実施形態の構成および制御を適用することは勿論可能である。   For example, in the scene shown in FIG. 5, when it is desired to project an image that follows the human hand and foot, it is possible to perform projection by installing two projection units 2. When it is desired to project an image on a person, it is possible to project the image using a plurality of projection units 2. Even in this case, it is of course possible to apply the configuration and control of the present embodiment described above.

以上、本実施形態では、主に動体プロジェクションマッピングが可能な投影装置について説明したが、この投影装置は本実施形態で述べた構成に限定されるものではなく、特許請求の範囲の記載及びこれと均等なものの範囲内で様々な変形が可能なことは、当該技術分野における通常の知識を持つ者には明らかである。   As described above, in the present embodiment, the projection apparatus capable of mainly moving object projection mapping has been described, but the projection apparatus is not limited to the configuration described in the present embodiment, and the description of the claims and the description thereof. It will be apparent to those skilled in the art that various modifications are possible within the scope of equivalents.

本発明は、移動する投影対象に映像を投影するプロジェクタ等の投影装置に利用可能である。   The present invention is applicable to a projection apparatus such as a projector that projects an image on a moving projection target.

1 投影装置
2 投影部
3 投影位置変更部
4 位置検出センサ(位置検出部)
5 制御部(投影位置制御部、駆動モード制御部)
11 第1の投影位置変更部
11a 光学シフト機構
11b 電子シフト機構
12 第2の投影位置変更部
12a パン・チルト雲台
DESCRIPTION OF SYMBOLS 1 Projection apparatus 2 Projection part 3 Projection position change part 4 Position detection sensor (position detection part)
5 Control unit (projection position control unit, drive mode control unit)
DESCRIPTION OF SYMBOLS 11 1st projection position change part 11a Optical shift mechanism 11b Electronic shift mechanism 12 2nd projection position change part 12a Pan / tilt pan head

Claims (8)

投影対象に映像を投影する投影部と、
前記投影部による映像の投影位置を、前記投影対象の移動に伴って変更可能な2種の投影位置変更部と、
前記投影対象の位置を検出する位置検出部と、
前記位置検出部にて検出された前記投影対象の位置情報に基づいて、前記各投影位置変更部に対して投影位置を変更するための指令を与える投影位置制御部とを備え、
前記各投影位置変更部の一方を第1の投影位置変更部とし、他方を第2の投影位置変更部とすると、
前記第1の投影位置変更部は、前記第2の投影位置変更部よりも、前記投影位置制御部によって前記指令が与えられてから投影位置の変更が完了するまでの応答速度が速く、かつ、投影位置の移動精度が高く、
前記第2の投影位置変更部は、前記第1の投影位置変更部よりも、変更可能な投影位置の範囲が広く、かつ、少なくとも1方向について投影位置の変更が可能であり、
前記第1の投影位置変更部は、少なくとも、前記第2の投影位置変更部による投影位置の変更方向と同じ方向について、投影位置の変更が可能であることを特徴とする投影装置。
A projection unit that projects an image onto a projection target;
Two types of projection position changing units that can change the projection position of the video by the projection unit as the projection target moves;
A position detector for detecting the position of the projection target;
A projection position control unit that gives a command for changing the projection position to each projection position change unit based on the position information of the projection target detected by the position detection unit;
When one of the projection position changing units is a first projection position changing unit and the other is a second projection position changing unit,
The first projection position changing unit is faster in response speed than the second projection position changing unit until the projection position change is completed after the command is given by the projection position control unit, and The movement accuracy of the projection position is high,
The second projection position change unit has a wider range of changeable projection positions than the first projection position change unit, and can change the projection position in at least one direction.
The projection apparatus, wherein the first projection position changing unit is capable of changing the projection position at least in the same direction as the direction of changing the projection position by the second projection position changing unit.
前記第1の投影位置変更部は、鏡筒または前記鏡筒に含まれる少なくとも1枚のレンズを光軸に垂直な方向にシフトさせることにより、投影位置を光学的に変更する光学シフト機構で構成されており、
前記第2の投影位置変更部は、投影位置をパン方向およびチルト方向に変更するパン・チルト雲台で構成されていることを特徴とする請求項1に記載の投影装置。
The first projection position changing unit includes an optical shift mechanism that optically changes the projection position by shifting the lens barrel or at least one lens included in the lens barrel in a direction perpendicular to the optical axis. Has been
The projection apparatus according to claim 1, wherein the second projection position changing unit includes a pan / tilt head for changing the projection position in a pan direction and a tilt direction.
前記第1の投影位置変更部は、全投影領域の一部に映像を表示させるとともに、前記全投影領域の中で、前記映像を表示させる一部の領域をシフトさせることにより、前記映像の投影位置を電子的に変更する電子シフト機構で構成されており、
前記第2の投影位置変更部は、投影位置をパン方向およびチルト方向に変更するパン・チルト雲台で構成されていることを特徴とする請求項1に記載の投影装置。
The first projection position changing unit displays an image in a part of the entire projection area, and shifts a part of the entire projection area to display the image, thereby projecting the image. It consists of an electronic shift mechanism that changes the position electronically,
The projection apparatus according to claim 1, wherein the second projection position changing unit includes a pan / tilt head for changing the projection position in a pan direction and a tilt direction.
前記第1の投影位置変更部は、前記指令に基づいて、映像の投影倍率を変更することを特徴とする請求項1から3のいずれかに記載の投影装置。   The projection apparatus according to claim 1, wherein the first projection position changing unit changes a projection magnification of an image based on the command. 前記投影部は、映像を拡大または縮小して投影するためのズームレンズを備えたものであり、
前記第1の投影位置変更部は、前記ズームレンズを光軸方向に移動させることにより、前記投影倍率を変更することを特徴とする請求項4に記載の投影装置。
The projection unit includes a zoom lens for projecting an image by enlarging or reducing the image,
The projection apparatus according to claim 4, wherein the first projection position changing unit changes the projection magnification by moving the zoom lens in an optical axis direction.
前記第1の投影位置変更部は、全投影領域の一部に映像を表示させるとともに、前記全投影領域の中で、前記映像を表示させる一部の領域を拡大または縮小させることにより、前記投影倍率を変更することを特徴とする請求項4に記載の投影装置。   The first projection position changing unit displays the video in a part of the whole projection area, and enlarges or reduces the part of the whole projection area in which the video is displayed. The projection apparatus according to claim 4, wherein the magnification is changed. 前記第1および第2の投影位置変更部を同時に駆動する第1の駆動モードと、前記第1および第2の投影位置変更部のどちらか一方のみを駆動する第2の駆動モードとを切り替える駆動モード制御部をさらに備えていることを特徴とする請求項1から6のいずれかに記載の投影装置。   Drive that switches between a first drive mode that drives the first and second projection position changing units simultaneously and a second drive mode that drives only one of the first and second projection position changing units The projection apparatus according to claim 1, further comprising a mode control unit. 前記駆動モード制御部は、前記位置検出部にて検出された前記投影対象の位置情報の変化に基づいて前記投影対象の移動の態様を判断し、その判断結果に基づいて前記第1の駆動モードと前記第2の駆動モードとを切り替えることを特徴とする請求項7に記載の投影装置。   The drive mode control unit determines a movement mode of the projection target based on a change in position information of the projection target detected by the position detection unit, and based on the determination result, the first drive mode The projection apparatus according to claim 7, wherein the projection mode and the second drive mode are switched.
JP2014076675A 2014-04-03 2014-04-03 Projection device Pending JP2015197647A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014076675A JP2015197647A (en) 2014-04-03 2014-04-03 Projection device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014076675A JP2015197647A (en) 2014-04-03 2014-04-03 Projection device

Publications (1)

Publication Number Publication Date
JP2015197647A true JP2015197647A (en) 2015-11-09

Family

ID=54547330

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014076675A Pending JP2015197647A (en) 2014-04-03 2014-04-03 Projection device

Country Status (1)

Country Link
JP (1) JP2015197647A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017136809A (en) * 2016-01-29 2017-08-10 株式会社ニコン Molding system, molding method, display device, display method, advertisement device and advertisement method
JP2017163431A (en) * 2016-03-10 2017-09-14 パナソニックIpマネジメント株式会社 Projection apparatus
US10776898B2 (en) 2018-06-14 2020-09-15 Panasonic Intellectual Property Management Co., Ltd. Projection system, image processing device and projection method

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017136809A (en) * 2016-01-29 2017-08-10 株式会社ニコン Molding system, molding method, display device, display method, advertisement device and advertisement method
JP2017163431A (en) * 2016-03-10 2017-09-14 パナソニックIpマネジメント株式会社 Projection apparatus
US10776898B2 (en) 2018-06-14 2020-09-15 Panasonic Intellectual Property Management Co., Ltd. Projection system, image processing device and projection method

Similar Documents

Publication Publication Date Title
US8890812B2 (en) Graphical user interface adjusting to a change of user's disposition
US11513511B2 (en) Techniques for image recognition-based aerial vehicle navigation
US8570372B2 (en) Three-dimensional imager and projection device
EP3106963B1 (en) Mediated reality
WO2018057991A1 (en) Display system having world and user sensors
JPH0785312A (en) Three-dimensional time-varying picture generation device
CN107209854A (en) For the support system and method that smoothly target is followed
JPH1118025A (en) Image display device
WO2005116809A2 (en) System and method for operating in virtual 3d space and system for selecting an operation via a visualizing system
CN116171422A (en) Apparatus, method, and graphical user interface for providing a computer-generated experience
JP2013511075A (en) Transparent autostereoscopic image display apparatus and method
WO2017075966A1 (en) Method and apparatus for displaying list content
JP2015197647A (en) Projection device
EP3881281B1 (en) System and method for processing images for display apparatus
WO2020050103A1 (en) Virtual viewpoint control device and method for controlling same
Broll Augmented reality
US11443487B2 (en) Methods, apparatus, systems, computer programs for enabling consumption of virtual content for mediated reality
JP2021193613A (en) Animation creation method
Bohdal Devices for Virtual and Augmented Reality
US9414051B2 (en) Extensible authoring and playback platform for complex virtual reality interactions and immersive applications
KR101860680B1 (en) Method and apparatus for implementing 3d augmented presentation
JPH0588607A (en) Optical method of lower-side compliance simulation
RE Low cost augmented reality for industrial problems
JP6601392B2 (en) Display control apparatus, display control method, and program
JP7470347B2 (en) Animation Production System