JP7501558B2 - Projection system, projection method, and program - Google Patents

Projection system, projection method, and program Download PDF

Info

Publication number
JP7501558B2
JP7501558B2 JP2022041139A JP2022041139A JP7501558B2 JP 7501558 B2 JP7501558 B2 JP 7501558B2 JP 2022041139 A JP2022041139 A JP 2022041139A JP 2022041139 A JP2022041139 A JP 2022041139A JP 7501558 B2 JP7501558 B2 JP 7501558B2
Authority
JP
Japan
Prior art keywords
image
projection
brightness
light
luminance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022041139A
Other languages
Japanese (ja)
Other versions
JP2023044611A (en
Inventor
昌宏 小川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to US17/944,781 priority Critical patent/US20230092862A1/en
Priority to CN202211132192.2A priority patent/CN115834847A/en
Publication of JP2023044611A publication Critical patent/JP2023044611A/en
Application granted granted Critical
Publication of JP7501558B2 publication Critical patent/JP7501558B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Controls And Circuits For Display Device (AREA)
  • Projection Apparatus (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Description

本発明は、投影システム、投影方法及びプログラムに関する。 The present invention relates to a projection system, a projection method, and a program.

従来、建物の天井等にプロジェクタを取り付けて固定し、当該プロジェクタから壁又は床等の投影面に画像を投影することにより、投影面の周囲にいる人に対して種々の情報を提供する技術が知られている。例えば特許文献１には、エレベーターホールの天井に取り付けたプロジェクタから、エレベーターのドアや床に、エレベーターの運行状況等の案内情報を含む画像を投影する技術が開示されている。 Conventionally, a technology is known in which a projector is attached and fixed to the ceiling of a building, and an image is projected from the projector onto a projection surface such as a wall or floor, thereby providing various information to people around the projection surface. For example, Patent Document 1 discloses a technology in which an image including guidance information such as elevator operation status is projected onto the elevator door or floor from a projector attached to the ceiling of an elevator hall.

特開平９－２６３３６８号公報Japanese Patent Application Laid-Open No. 9-263368

しかしながら、投影面の周囲が明るくなると、投影される画像の視認性が低下する問題がある。上記の従来技術では、画像の投影位置及び輝度等の投影態様が固定されているため、この問題が生じた場合に適切な対処を行うことができない。すなわち、上記の従来技術には、投影面の周囲の明るさによっては、視認しやすい態様で画像を投影することができなくなるという課題がある。 However, there is a problem in that the visibility of the projected image decreases when the surroundings of the projection surface become bright. In the above conventional technology, the projection position of the image and the projection state such as brightness are fixed, so it is not possible to take appropriate measures when this problem occurs. In other words, the above conventional technology has the problem that, depending on the brightness of the surroundings of the projection surface, it is not possible to project the image in a manner that is easy to see.

この発明の目的は、より視認しやすい態様で画像を投影することができる投影システム、投影方法及びプログラムを提供することにある。 The object of this invention is to provide a projection system, projection method, and program that can project an image in a more easily visible manner.

上記課題を解決するため、本発明に係る投影システムは、
光源を有し、投影面に画像を投影する投影部と、
処理部と、
を備え、
前記処理部は、
前記投影面の周囲の明るさに係る明るさ情報を取得し、
前記光源の全光束、前記画像の色域、及び前記画像の大きさのうち少なくとも１つの項目を選択し、
前記明るさ情報に基づいて、選択された前記項目を調整するように構成されており、
前記処理部は、前記光源の全光束の調整による前記画像の輝度の第１の変動量の予測、及び／又は前記画像の色域の調整による前記画像の輝度の第２の変動量の予測、及び／又は前記画像の大きさの調整による前記画像の輝度の第３の変動量の予測に基づいて、前記画像の輝度が適正輝度以上となるような前記第１の変動量、前記第２の変動量、及び前記第３の変動量の組み合わせを特定し、特定した前記組み合わせに対応する項目を、調整する項目として選択する
ことを特徴とする。 In order to solve the above problems, a projection system according to the present invention comprises:
a projection unit having a light source and projecting an image onto a projection surface;
A processing section;
Equipped with
The processing unit includes:
Acquire brightness information relating to the brightness of the surroundings of the projection surface;
Selecting at least one of the total luminous flux of the light source, the color gamut of the image, and the size of the image;
configured to adjust the selected item based on the brightness information;
The processing unit specifies a combination of the first variation amount, the second variation amount, and the third variation amount such that the luminance of the image is equal to or greater than an appropriate luminance based on a prediction of a first variation amount of the luminance of the image due to adjustment of the total luminous flux of the light source, and/or a prediction of a second variation amount of the luminance of the image due to adjustment of the color gamut of the image, and/or a prediction of a third variation amount of the luminance of the image due to adjustment of the size of the image, and selects an item corresponding to the specified combination as an item to be adjusted.
It is characterized by:

また、上記課題を解決するため、本発明に係る投影方法は、
光源を有し、投影面に画像を投影する投影部を備えた投影システムのコンピュータが実行する投影方法であって、
前記投影面の周囲の明るさに係る明るさ情報を取得し、
前記光源の全光束、前記画像の色域、及び前記画像の大きさのうち少なくとも１つの項目を選択し、
前記明るさ情報に基づいて、選択された前記項目を調整し、
前記項目を選択する工程は、前記光源の全光束の調整による前記画像の輝度の第１の変動量の予測、及び／又は前記画像の色域の調整による前記画像の輝度の第２の変動量の予測、及び／又は前記画像の大きさの調整による前記画像の輝度の第３の変動量の予測に基づいて、前記画像の輝度が適正輝度以上となるような前記第１の変動量、前記第２の変動量、及び前記第３の変動量の組み合わせを特定し、特定した前記組み合わせに対応する項目を、調整する項目として選択する工程を含む
ことを特徴とする。 In order to solve the above problems, a projection method according to the present invention includes:
A projection method executed by a computer of a projection system having a light source and a projection unit that projects an image onto a projection surface, comprising:
Acquire brightness information relating to the brightness of the surroundings of the projection surface;
Selecting at least one of the total luminous flux of the light source, the color gamut of the image, and the size of the image;
adjusting the selected item based on the brightness information;
The step of selecting the item includes a step of identifying a combination of the first variation amount, the second variation amount, and the third variation amount that makes the luminance of the image equal to or greater than an appropriate luminance based on a prediction of a first variation amount of the luminance of the image due to adjustment of the total luminous flux of the light source, and/or a prediction of a second variation amount of the luminance of the image due to adjustment of the color gamut of the image, and/or a prediction of a third variation amount of the luminance of the image due to adjustment of the size of the image, and selecting an item corresponding to the identified combination as an item to be adjusted.
It is characterized by:

また、上記課題を解決するため、本発明に係るプログラムは、
光源を有し、投影面に画像を投影する投影部を備えた投影システムのコンピュータに、
前記投影面の周囲の明るさに係る明るさ情報を取得させ、
前記光源の全光束、前記画像の色域、及び前記画像の大きさのうち少なくとも１つの項目を選択させ、
前記明るさ情報に基づいて、選択された前記項目を調整させ、
前記項目を選択させる処理は、前記光源の全光束の調整による前記画像の輝度の第１の変動量の予測、及び／又は前記画像の色域の調整による前記画像の輝度の第２の変動量の予測、及び／又は前記画像の大きさの調整による前記画像の輝度の第３の変動量の予測に基づいて、前記画像の輝度が適正輝度以上となるような前記第１の変動量、前記第２の変動量、及び前記第３の変動量の組み合わせを特定し、特定した前記組み合わせに対応する項目を、調整する項目として選択させる処理を含む
ことを特徴とする。 In order to solve the above problems, the program according to the present invention comprises:
A computer of a projection system including a projection unit having a light source and projecting an image onto a projection surface,
acquiring brightness information relating to the brightness of the surroundings of the projection surface;
Selecting at least one of the total luminous flux of the light source, the color gamut of the image, and the size of the image;
adjusting the selected item based on the brightness information;
The process of selecting the item includes a process of specifying a combination of the first variation amount, the second variation amount, and the third variation amount such that the luminance of the image is equal to or greater than an appropriate luminance, based on a prediction of a first variation amount of the luminance of the image due to adjustment of the total luminous flux of the light source, and/or a prediction of a second variation amount of the luminance of the image due to adjustment of the color gamut of the image, and/or a prediction of a third variation amount of the luminance of the image due to adjustment of the size of the image, and selecting an item corresponding to the specified combination as an item to be adjusted.
It is characterized by:

本発明によれば、より視認しやすい態様で画像を投影することができる。 The present invention allows images to be projected in a more easily visible manner.

投影システムを示す図である。FIG. 1 illustrates a projection system. プロジェクタ、ミラー装置及びモニタ装置の機能構成を示すブロック図である。FIG. 2 is a block diagram showing functional configurations of a projector, a mirror device, and a monitor device. 投影部の一実施形態を示す図である。FIG. 2 illustrates an embodiment of a projection unit. 蛍光体ホイールの構成を示す図である。FIG. 2 is a diagram showing a configuration of a phosphor wheel. 色重視モードにおける投影部の動作を説明する図である。11A and 11B are diagrams illustrating the operation of a projection unit in a color-important mode. 輝度重視モードにおける投影部の動作を説明する図である。11A and 11B are diagrams illustrating the operation of a projection unit in a brightness priority mode. 輝度重視モードにおける投影部の動作の他の例を説明する図である。13A and 13B are diagrams illustrating another example of the operation of the projection unit in the brightness priority mode. 人と画像との位置関係が適正条件を満たさない場合の例を示す図である。13A and 13B are diagrams illustrating an example in which the positional relationship between a person and an image does not satisfy an appropriate condition. 画像の投影位置及び大きさを変更した状態の例を示す図である。13A and 13B are diagrams illustrating examples of a state in which the projection position and size of an image have been changed. ズームレンズの焦点距離と画像の投影態様との関係を示す図である。1 is a diagram showing the relationship between the focal length of a zoom lens and the manner in which an image is projected. 広角状態のズームレンズを介して投影された画像の例を示す図である。FIG. 13 is a diagram showing an example of an image projected through a zoom lens in a wide-angle state. 望遠状態のズームレンズを介して投影された縮小画像の例を示す図である。FIG. 13 is a diagram showing an example of a reduced image projected through a zoom lens in a telephoto state. 画像投影処理の制御手順を説明するフローチャートである。11 is a flowchart illustrating a control procedure for an image projection process. 投影調整処理の制御手順を示すフローチャートである。10 is a flowchart showing a control procedure of a projection adjustment process. 変形例１に係る投影システムの動作を説明する図である。10A to 10C are diagrams illustrating the operation of a projection system according to a first modified example. 変形例１に係る投影調整処理の制御手順を示すフローチャートである。10 is a flowchart showing a control procedure of a projection adjustment process according to Modification 1. 変形例２に係る投影システムの動作を説明する図である。10A and 10B are diagrams illustrating the operation of a projection system according to Modification 2. 変形例２に係る投影システムの動作を説明する図である。10A and 10B are diagrams illustrating the operation of a projection system according to Modification 2. 変形例２に係る投影調整処理の制御手順を示すフローチャートである。10 is a flowchart showing a control procedure of a projection adjustment process according to Modification 2.

以下、本発明に係る実施の形態を図面に基づいて説明する。 The following describes an embodiment of the present invention with reference to the drawings.

＜投影システムの概要＞
図１は、本実施形態の投影システム１を示す図である。
投影システム１は、プロジェクタ１０、ミラー装置２０及びモニタ装置３０を備える。投影システム１は、例えば商業施設や公共施設などの建物の内部又は外部に設けられる。投影システム１は、行き先の案内や施設の運営状況などの情報を含む画像４０を投影面２に投影することにより、投影面２の周囲にいる人Ｐ（施設の利用者等）に対して情報を提供する。本実施形態の投影システム１は、エレベーターホールに設けられており、エレベーターを待っている人Ｐに対して案内を行うための画像４０を床の投影面２に投影するものとする。投影システム１の設置場所は、上述の施設等に限られず、例えば住宅内などに設けられてもよい。一例を挙げると、キッチンに設けた投影システム１によりレシピ等の情報を含む画像４０を投影面２に投影してもよい。 <Projection system overview>
FIG. 1 is a diagram showing a projection system 1 of the present embodiment.
The projection system 1 includes a projector 10, a mirror device 20, and a monitor device 30. The projection system 1 is installed inside or outside a building such as a commercial facility or a public facility. The projection system 1 projects an image 40 including information such as destination guidance and facility operation status onto the projection surface 2, thereby providing information to a person P (such as a facility user) around the projection surface 2. The projection system 1 of this embodiment is installed in an elevator hall, and projects an image 40 for providing guidance to a person P waiting for an elevator onto the projection surface 2 on the floor. The installation location of the projection system 1 is not limited to the above-mentioned facilities, and may be installed, for example, inside a house. As an example, the projection system 1 installed in a kitchen may project an image 40 including information such as a recipe onto the projection surface 2.

プロジェクタ１０は、画像データに応じた強度分布の光を高指向性で出射することにより画像４０を投影する投影装置である。プロジェクタ１０は、例えば天井や壁などに取り付けられている。プロジェクタ１０の取り付け態様は、図１に示すように天井から吊り下げる態様に限られず、例えば天井や壁に本体が埋め込まれ、天井や壁に設けられた開口から光を室内に出射する態様などであってもよい。また、プロジェクタ１０は、台などの上に載置されていてもよい。 Projector 10 is a projection device that projects image 40 by emitting light with high directivity having an intensity distribution according to image data. Projector 10 is attached to, for example, a ceiling or a wall. The attachment mode of projector 10 is not limited to hanging from the ceiling as shown in FIG. 1, but may be, for example, a mode in which the main body is embedded in the ceiling or wall and light is emitted into the room from an opening provided in the ceiling or wall. Projector 10 may also be placed on a stand or the like.

ミラー装置２０は、プロジェクタ１０から出射された光を反射するミラー２５を備える。プロジェクタ１０から出射された光は、ミラー２５により反射されて投影面２に導かれ、当該投影面２に画像４０が投影される。ミラー２５は、光の反射面の角度（以下、単にミラー２５の角度と記す）を変更可能に設けられており、ミラー装置２０においてミラー２５の角度が調整されることにより、画像４０の投影位置を調整することができる。ミラー装置２０は、例えば天井や壁などに取り付けられている。投影面２は、本実施形態では床面であるが、これに限られず、壁面又は所定のスクリーンなどであってもよい。本明細書において、投影面２は、画像４０を投影可能な面のうち、画像４０が投影されている（又は投影される）部分を指すものとする。 The mirror device 20 includes a mirror 25 that reflects the light emitted from the projector 10. The light emitted from the projector 10 is reflected by the mirror 25 and guided to the projection surface 2, where an image 40 is projected. The mirror 25 is provided so that the angle of the light reflection surface (hereinafter simply referred to as the angle of the mirror 25) can be changed, and the projection position of the image 40 can be adjusted by adjusting the angle of the mirror 25 in the mirror device 20. The mirror device 20 is attached to, for example, a ceiling or a wall. In this embodiment, the projection surface 2 is a floor surface, but is not limited to this and may be a wall surface or a predetermined screen. In this specification, the projection surface 2 refers to the part of the surface on which the image 40 can be projected, on which the image 40 is projected (or will be projected).

モニタ装置３０は、投影面２の周囲を撮影して撮影画像を生成し、また投影面２の周囲の明るさを検出する。モニタ装置３０は、例えば天井や壁などに取り付けられている。モニタ装置３０により生成された撮影画像、及びモニタ装置３０による明るさの検出結果から、投影面２の周囲の環境に係る環境データ（環境情報）が取得される。投影システム１では、この環境データに基づいて、画像４０の投影態様が調整される。調整される投影態様は、画像４０の大きさ、画像４０の色域、及び後述する投影部１４の光源１４１（図３参照）の全光束のうち少なくとも１つを含む。調整される投影態様は、画像４０の投影位置、及び画像４０の内容の少なくとも一方をさらに含んでいてもよい。上記における画像４０の色域は、プロジェクタ１０により投影される画像４０において表示可能な（表現可能な）色の範囲である。また、光源１４１の全光束は、光源１４１から発される光束の全体であり、単位時間当たりに光源１４１から発せられる全光量と言い換えることもできる。例えば、投影面２の周囲における明るさに応じて、画像４０が視認されやすいように光源１４１の全光束を増減させることにより画像４０の輝度が調整される。また、投影面２の周囲における人Ｐの位置に応じて、人Ｐと画像４０とが重ならないように画像４０の投影位置や大きさが調整される。画像４０の表示態様の調整動作については、後に詳述する。 The monitor device 30 captures the surroundings of the projection surface 2 to generate a captured image, and detects the brightness of the surroundings of the projection surface 2. The monitor device 30 is attached to, for example, a ceiling or a wall. Environmental data (environmental information) related to the environment around the projection surface 2 is acquired from the captured image generated by the monitor device 30 and the brightness detection result by the monitor device 30. In the projection system 1, the projection mode of the image 40 is adjusted based on this environmental data. The projection mode to be adjusted includes at least one of the size of the image 40, the color gamut of the image 40, and the total luminous flux of the light source 141 (see FIG. 3) of the projection unit 14 described later. The projection mode to be adjusted may further include at least one of the projection position of the image 40 and the contents of the image 40. The color gamut of the image 40 in the above is the range of colors that can be displayed (represented) in the image 40 projected by the projector 10. In addition, the total luminous flux of the light source 141 is the entire luminous flux emitted from the light source 141, and can also be rephrased as the total amount of light emitted from the light source 141 per unit time. For example, the luminance of image 40 is adjusted by increasing or decreasing the total luminous flux of light source 141 so that image 40 is easily visible, depending on the brightness around projection surface 2. Also, the projection position and size of image 40 are adjusted so that person P and image 40 do not overlap, depending on the position of person P around projection surface 2. The adjustment operation of the display mode of image 40 will be described in detail later.

＜投影システムの構成＞
図２は、プロジェクタ１０、ミラー装置２０及びモニタ装置３０の機能構成を示すブロック図である。
プロジェクタ１０は、ＣＰＵ１１（Central Processing Unit）と、ＲＡＭ（Random Access Memory）１２と、記憶部１３と、投影部１４と、通信Ｉ／Ｆ１５などを備え、これらの各部はバス１６により接続されている。 <Configuration of Projection System>
FIG. 2 is a block diagram showing the functional configuration of the projector 10, the mirror device 20, and the monitor device 30. As shown in FIG.
The projector 10 includes a CPU (Central Processing Unit) 11 , a RAM (Random Access Memory) 12 , a storage unit 13 , a projection unit 14 , a communication I/F 15 , and the like, and these units are connected to each other via a bus 16 .

ＣＰＵ１１は、記憶部１３に記憶されているプログラム１３１を読み出して実行し、各種演算処理を行うことで、プロジェクタ１０の各部、ミラー装置２０、及びモニタ装置３０の動作を制御するプロセッサである。ＣＰＵ１１は、プロジェクタ１０の各部、ミラー装置２０及びモニタ装置３０を動作させて、投影部１４による画像４０の投影態様を制御する。詳しくは、ＣＰＵ１１は、モニタ装置３０による撮影画像及び明るさの検出結果に基づいて、投影面２の周囲の環境に係る環境情報を取得し、取得した環境情報に基づいて、投影部１４による画像４０の投影態様としての投影位置、輝度、大きさ、及び内容のうち少なくとも１つを調整する。本実施形態では、ＣＰＵ１１が「処理部」に相当する。なお、処理部は、複数のプロセッサ（例えば複数のＣＰＵ）を有していてもよく、ＣＰＵ１１が実行する複数の処理を、当該複数のプロセッサが実行してもよい。この場合には、複数のプロセッサが「処理部」に相当する。この場合において、複数のプロセッサが共通の処理に関与してもよいし、あるいは、複数のプロセッサが独立に異なる処理を並列に実行してもよい。 The CPU 11 is a processor that reads and executes the program 131 stored in the storage unit 13 and performs various arithmetic processing to control the operation of each part of the projector 10, the mirror device 20, and the monitor device 30. The CPU 11 operates each part of the projector 10, the mirror device 20, and the monitor device 30 to control the projection mode of the image 40 by the projection unit 14. In detail, the CPU 11 acquires environmental information related to the environment around the projection surface 2 based on the captured image and brightness detection result by the monitor device 30, and adjusts at least one of the projection position, brightness, size, and content as the projection mode of the image 40 by the projection unit 14 based on the acquired environmental information. In this embodiment, the CPU 11 corresponds to a "processing unit". Note that the processing unit may have multiple processors (e.g., multiple CPUs), and the multiple processors may execute the multiple processes executed by the CPU 11. In this case, the multiple processors correspond to a "processing unit". In this case, the multiple processors may be involved in a common process, or the multiple processors may independently execute different processes in parallel.

ＲＡＭ１２は、ＣＰＵ１１に作業用のメモリ空間を提供し、一時データを記憶する。 RAM 12 provides working memory space for CPU 11 and stores temporary data.

記憶部１３は、コンピュータとしてのＣＰＵ１１により読み取り可能な非一時的な記録媒体であり、プログラム１３１及び各種データを記憶する。記憶部１３は、例えばフラッシュメモリ等の不揮発性メモリを含む。プログラムは、コンピュータ読み取り可能なプログラムコードの形態で記憶部１３に格納されている。記憶部１３に記憶されるデータとしては、投影する画像４０に係る画像データ１３２、及び投影面２の周囲の環境に係る環境データ１３３（環境情報）などがある。環境データ１３３は、後述する移動体データ１３３１及び明るさデータ１３３２を含む。 The storage unit 13 is a non-transitory recording medium readable by the CPU 11 as a computer, and stores the program 131 and various data. The storage unit 13 includes a non-volatile memory such as a flash memory. The program is stored in the storage unit 13 in the form of computer-readable program code. The data stored in the storage unit 13 includes image data 132 relating to the image 40 to be projected, and environmental data 133 (environmental information) relating to the environment around the projection surface 2. The environmental data 133 includes moving object data 1331 and brightness data 1332, which will be described later.

投影部１４は、光源１４１、表示素子１４６、及び光学系駆動部１４８などを備える。投影部１４は、光源１４１から出力された光の強度分布を、画像データ１３２に応じて表示素子１４６により調整し、投影レンズ群を通してプロジェクタ１０の外部に出射することで画像４０を投影する。 The projection unit 14 includes a light source 141, a display element 146, and an optical system drive unit 148. The projection unit 14 adjusts the intensity distribution of the light output from the light source 141 using the display element 146 in accordance with the image data 132, and projects the image 40 by emitting the light to the outside of the projector 10 through a projection lens group.

図３は、投影部１４の一実施形態を示す図である。
投影部１４は、第１発光素子としてのレーザーダイオード（ＬＤ１４１１）と、第２発光素子としての発光ダイオード（ＬＥＤ１４１２）とを有するハイブリッドタイプの光源１４１を備え、ＬＤ１４１１及びＬＥＤ１４１２を光源としてＲＧＢの光を出射する。ＬＤ１４１１は、青色の波長帯域の光（以下、「青色光」と記す）を発する。ここでは、例えば、ＴＯ－ＣＡＮ型のＬＤ１４１１が４個並んでおり、平行に光を出射する。ＬＥＤ１４１２は、赤色の波長帯域の光（以下、「赤色光」と記す）を発する。緑色波長帯域の光（以下、「緑色光」と記す）は、青色光を蛍光体ホイール１４４の蛍光体層に照射することにより得られる。図３において、青色光の光経路を実線で示し、緑色光の光経路を一点鎖線で示し、赤色光の光経路を破線で示す。光源１４１の全光束は、ＬＤ１４１１及びＬＥＤ１４１２に供給される駆動電流を増減させることにより調整することができる。光源１４１の全光束の調整は、ＣＰＵ１１の制御により行われる。 FIG. 3 is a diagram showing an embodiment of the projection unit 14. As shown in FIG.
The projection unit 14 includes a hybrid type light source 141 having a laser diode (LD 1411) as a first light emitting element and a light emitting diode (LED 1412) as a second light emitting element, and emits RGB light using the LD 1411 and the LED 1412 as light sources. The LD 1411 emits light in a blue wavelength band (hereinafter referred to as "blue light"). Here, for example, four TO-CAN type LDs 1411 are arranged and emit light in parallel. The LED 1412 emits light in a red wavelength band (hereinafter referred to as "red light"). Light in a green wavelength band (hereinafter referred to as "green light") is obtained by irradiating the phosphor layer of the phosphor wheel 144 with blue light. In FIG. 3, the optical path of the blue light is indicated by a solid line, the optical path of the green light is indicated by a dashed line, and the optical path of the red light is indicated by a broken line. The total luminous flux of the light source 141 can be adjusted by increasing or decreasing the drive current supplied to the LD 1411 and the LED 1412. The adjustment of the total luminous flux of the light source 141 is performed under the control of the CPU 11.

光経路上には、各種の光学デバイスが位置している。ここでは、光学デバイスには、反射ミラー群１４２１と、集光レンズ１４２２、１４２３、１４２８、１４２９と、集光レンズ群１４２５と、ダイクロイックフィルタ１４２４、１４３０と、異形レンズ１４２６と、反射ミラー１４２７などが含まれる。また、青色光の光経路上には、モーター１４４１により回転する蛍光体ホイール１４４が位置している。 Various optical devices are located on the optical path. Here, the optical devices include a group of reflecting mirrors 1421, condenser lenses 1422, 1423, 1428, and 1429, a group of condenser lenses 1425, dichroic filters 1424 and 1430, an irregular lens 1426, and a reflecting mirror 1427. In addition, a phosphor wheel 144 rotated by a motor 1441 is located on the optical path of the blue light.

蛍光体ホイール１４４に入射した青色光の一部は、蛍光体ホイール１４４を透過する。また、青色光の他の一部は、蛍光体ホイール１４４の蛍光体層に照射され、当該照射に応じて励起された緑色光が、青色光の進行方向とは逆向きの成分を有する方向に進行する。 A portion of the blue light incident on phosphor wheel 144 is transmitted through phosphor wheel 144. Another portion of the blue light is irradiated onto the phosphor layer of phosphor wheel 144, and the green light excited in response to this irradiation travels in a direction having a component opposite to the traveling direction of the blue light.

蛍光体ホイール１４４を透過した青色光は、異形レンズ１４２６に入射され、さらに、反射ミラー１４２７、集光レンズ１４２８、ダイクロイックフィルタ１４３０を経て合流導光部１４５へ導かれる。 The blue light that passes through the phosphor wheel 144 is incident on the irregular lens 1426, and is then guided to the merging and guiding section 145 via the reflecting mirror 1427, the condensing lens 1428, and the dichroic filter 1430.

蛍光体ホイール１４４の蛍光体層から出射された緑色光は、集光レンズ群１４２５へ戻り、ダイクロイックフィルタ１４２４で反射されて集光レンズ１４２９を透過した後、ダイクロイックフィルタ１４３０で反射されて合流導光部１４５へ導かれる。 The green light emitted from the phosphor layer of the phosphor wheel 144 returns to the condenser lens group 1425, is reflected by the dichroic filter 1424, passes through the condenser lens 1429, and is then reflected by the dichroic filter 1430 and guided to the merging light guide section 145.

ＬＥＤ１４１２から出射された赤色光は、集光レンズ１４２３で拡散が絞られてダイクロイックフィルタ１４２４を通過し、次いでダイクロイックフィルタ１４３０で反射されて、合流導光部１４５へ導かれる。 The red light emitted from the LED 1412 is diffused by the focusing lens 1423 and passes through the dichroic filter 1424, and is then reflected by the dichroic filter 1430 and guided to the merging light guide section 145.

ダイクロイックフィルタ１４３０で３色の光が合波された（合流した）後には、この光は、合流導光部１４５と、表示素子１４６と、ズームレンズ１４７と、を経て出射される。合流導光部１４５は、合波された各色の平行光を反射させて適宜な向きで表示素子１４６へ導く。 After the three colors of light are combined (joined) by the dichroic filter 1430, this light is emitted via the combining light guide 145, the display element 146, and the zoom lens 147. The combining light guide 145 reflects the combined parallel light of each color and guides it to the display element 146 in the appropriate direction.

表示素子１４６は、空間的光変調素子（ＳＯＭ：Spatial Optical Modulator）であり、例えば、デジタルマイクロミラー素子（ＤＭＤ）である。ＤＭＤは、アレイ状に配列された複数の微小ミラーの各傾斜角度を、画像データ１３２の画素値に応じて個々に高速で切り替えて、各画素単位各画像フレーム単位でズームレンズ１４７への光反射の有無を定めることで、その反射光により、光像を形成する。なお、必ずしも光源１４１の全光束が表示素子１４６に入射しなくてもよい。光源１４１の全光束のうち表示素子１４６に入射した光束により画像４０が投影される。 The display element 146 is a spatial optical modulator (SOM), such as a digital micromirror device (DMD). The DMD individually switches the tilt angle of a plurality of micromirrors arranged in an array at high speed according to the pixel value of the image data 132, and determines whether or not light is reflected to the zoom lens 147 for each pixel unit and each image frame unit, thereby forming an optical image with the reflected light. Note that the entire light flux of the light source 141 does not necessarily have to be incident on the display element 146. The image 40 is projected by the light flux that is incident on the display element 146 out of the entire light flux of the light source 141.

ズームレンズ１４７は、表示素子１４６から出射された光像を所定の出力方向に導いて出射する。ズームレンズ１４７は、複数のレンズを有し、当該複数のレンズの位置関係を変更することなどにより、焦点距離及び出力画像の拡大率（ズーム倍率）などを調整することが可能となっている。 The zoom lens 147 guides the optical image emitted from the display element 146 in a predetermined output direction and emits it. The zoom lens 147 has multiple lenses, and it is possible to adjust the focal length and the magnification ratio (zoom magnification) of the output image by changing the positional relationship of the multiple lenses.

光学系駆動部１４８（図２）は、ＣＰＵ１１から送信される制御信号に応じて、ズームレンズ１４７を構成する複数のレンズを移動させて、ズームレンズ１４７の焦点距離及びズーム倍率を調整する。光学系駆動部１４８は、複数のレンズの各々を光軸方向に移動させるアクチュエータを備える。光学系駆動部１４８は、ＣＰＵ１１から送信される制御信号に応じてアクチュエータを動作させることで、複数のレンズの光軸方向についての位置関係を変更し、ズームレンズ１４７の焦点距離及びズーム倍率を調整する。 The optical system driver 148 (FIG. 2) moves the multiple lenses that make up the zoom lens 147 in response to a control signal sent from the CPU 11 to adjust the focal length and zoom magnification of the zoom lens 147. The optical system driver 148 includes an actuator that moves each of the multiple lenses in the optical axis direction. By operating the actuator in response to a control signal sent from the CPU 11, the optical system driver 148 changes the positional relationship of the multiple lenses in the optical axis direction and adjusts the focal length and zoom magnification of the zoom lens 147.

ここで、蛍光体ホイール１４４の構成について説明する。
図４は、蛍光体ホイール１４４の構成を示す図である。
蛍光体ホイール１４４は、円盤状の金属板であるホイール板１４４２と、ホイール板１４４２に積層された蛍光体層１４４４とを有する。ホイール板１４４２には、蛍光体ホイール１４４の円周方向について約１／３の範囲にわたって、光を透過させる開口部１４４３が設けられている。開口部１４４３には、透過光を拡散させる光透過性の部材が設けられていてもよい。また、ホイール板１４４２には、蛍光体ホイール１４４の円周方向について、開口部１４４３の形成範囲を除いた約２／３の範囲にわたって、蛍光体層１４４４が設けられている。なお、開口部１４４３の形成範囲は必ずしも円周方向について１／３でなくてもよく、例えば１／４程度であってもよい。この場合には、残りの約３／４の範囲に蛍光体層１４４４が設けられてもよい。 Here, the configuration of the phosphor wheel 144 will be described.
FIG. 4 is a diagram showing the configuration of the phosphor wheel 144. As shown in FIG.
The phosphor wheel 144 has a wheel plate 1442, which is a disk-shaped metal plate, and a phosphor layer 1444 laminated on the wheel plate 1442. The wheel plate 1442 is provided with an opening 1443 that transmits light over a range of about 1/3 of the circumference of the phosphor wheel 144. The opening 1443 may be provided with a light-transmitting member that diffuses the transmitted light. The wheel plate 1442 is provided with a phosphor layer 1444 over a range of about 2/3 of the circumference of the phosphor wheel 144, excluding the range where the opening 1443 is formed. The range where the opening 1443 is formed does not necessarily have to be 1/3 of the circumference, and may be, for example, about 1/4. In this case, the phosphor layer 1444 may be provided in the remaining range of about 3/4.

蛍光体ホイール１４４は、モーター１４４１により駆動されて、中心Ｃを通りホイール板１４４２に垂直な回転軸を中心に回転する。蛍光体ホイール１４４の回転周期のうち、青色光の光経路上に開口部１４４３が位置する期間では、青色光は開口部１４４３を透過する。また、回転周期のうち、青色光の光経路上に蛍光体層１４４４が位置する期間では、青色光に基づいて緑色光が励起されて、青色光の進行方向とは逆向きの成分を有する方向に緑色光が進行する。なお、図４の構成では、蛍光体ホイール１４４の回転周期の２／３の期間において緑色光が励起されるが、励起された緑色光を表示素子１４６に導く期間を調整することが可能となっている。当該調整の方法は、特には限られないが、例えば青色光の光経路上に蛍光体層１４４４が位置する期間のうち一部の期間においてＬＤ１４１１の発光をオフ（停止）する方法であってもよい。 The phosphor wheel 144 is driven by the motor 1441 and rotates around a rotation axis that passes through the center C and is perpendicular to the wheel plate 1442. During the period during which the opening 1443 is located on the optical path of the blue light during the rotation period of the phosphor wheel 144, the blue light passes through the opening 1443. During the period during which the phosphor layer 1444 is located on the optical path of the blue light during the rotation period, the green light is excited based on the blue light, and the green light travels in a direction having a component in the opposite direction to the traveling direction of the blue light. In the configuration of FIG. 4, the green light is excited during a period that is 2/3 of the rotation period of the phosphor wheel 144, but it is possible to adjust the period during which the excited green light is guided to the display element 146. The method of this adjustment is not particularly limited, but may be, for example, a method of turning off (stopping) the emission of the LD 1411 during a part of the period during which the phosphor layer 1444 is located on the optical path of the blue light.

緑色光が励起される期間（回転周期の２／３の期間）のうち半分の期間において緑色光を表示素子１４６に入射させ（すなわち、蛍光体ホイール１４４の１／３を使用して生成された緑色光を表示素子１４６に入射させ）、残りの半分の期間（蛍光体ホイール１４４の回転周期の１／３の期間）において赤色光を表示素子１４６に入射させることで、赤色光、緑色光及び青色光をそれぞれ回転周期の１／３の期間ずつ、順番に表示素子１４６に入射させることができる。このように、本実施形態のプロジェクタ１０は、赤色光、緑色光及び青色光を時分割で表示素子１４６に照射するフィールドシーケンシャル方式で画像を投影する。 By making green light incident on the display element 146 for half the period during which the green light is excited (i.e., making green light generated using 1/3 of the phosphor wheel 144 incident on the display element 146) and making red light incident on the display element 146 for the remaining half of the period (1/3 of the rotation period of the phosphor wheel 144), it is possible to make red light, green light, and blue light incident on the display element 146 in sequence, each for 1/3 of the rotation period. In this way, the projector 10 of this embodiment projects an image using a field sequential method in which red light, green light, and blue light are irradiated on the display element 146 in a time-division manner.

ここで、投影部１４の動作モードについて説明する。投影部１４は、投影する画像４０の色域の広さ（色再現性）を優先する色重視モード（第１モード）、及び画像４０の輝度の最大値を色重視モードよりも高くした輝度重視モード（第２モード）の間で動作モードを切り替え可能となっている。色重視モードでは、画像４０を投影中の任意の時点において赤色光、緑色光及び青色光（３色の光）のうち１色の光が用いられる。輝度重視モードでは、画像４０を投影中の少なくとも一部の期間において赤色光、緑色光及び青色光のうち２色の光が同時に用いられることで、画像４０の輝度の最大値が色重視モードよりも高められる。一方、輝度重視モードでは、色重視モードよりも表示可能な色域が狭くなる。投影部１４の動作モードの切り替えは、ＣＰＵ１１が行う。 Here, the operation modes of the projection unit 14 will be described. The projection unit 14 can switch between a color-emphasis mode (first mode) that prioritizes the width of the color gamut (color reproducibility) of the image 40 to be projected, and a brightness-emphasis mode (second mode) that sets the maximum brightness of the image 40 higher than in the color-emphasis mode. In the color-emphasis mode, one of three colors of light (red, green, and blue) is used at any time during the projection of the image 40. In the brightness-emphasis mode, two colors of light (red, green, and blue) are used simultaneously during at least a portion of the projection of the image 40, thereby increasing the maximum brightness of the image 40 compared to the color-emphasis mode. On the other hand, in the brightness-emphasis mode, the color gamut that can be displayed is narrower than in the color-emphasis mode. The operation modes of the projection unit 14 are switched by the CPU 11.

図５は、色重視モードにおける投影部１４の動作を説明する図である。
図５の表における３つの列は、それぞれフィールドシーケンシャル方式の表示動作における特定の色の表示期間を表している。色重視モードでは、赤色光のみが表示に用いられるＲ期間、緑色光のみが表示に用いられるＧ期間、及び青色光のみが表示に用いられるＢ期間が繰り返されて画像４０が形成される。Ｒ期間では、赤色光が表示に用いられ（ＯＮ）、緑色光及び青色光は用いられない（ＯＦＦ）。Ｇ期間では、緑色光が表示に用いられ（ＯＮ）、赤色光及び青色光は用いられない（ＯＦＦ）。Ｂ期間では、青色光が表示に用いられ（ＯＮ）、赤色光及び緑色光は用いられない（ＯＦＦ）。色重視モードでは、上述のように、蛍光体ホイール１４４の１／３（蛍光体層１４４４の１／２）を使用して緑色光を生成して表示素子１４６に入射させる。 FIG. 5 is a diagram illustrating the operation of the projection unit 14 in the color priority mode.
Each of the three columns in the table of FIG. 5 represents a display period of a specific color in the display operation of the field sequential method. In the color-oriented mode, an R period in which only red light is used for display, a G period in which only green light is used for display, and a B period in which only blue light is used for display are repeated to form an image 40. In the R period, red light is used for display (ON), and green light and blue light are not used (OFF). In the G period, green light is used for display (ON), and red light and blue light are not used (OFF). In the B period, blue light is used for display (ON), and red light and green light are not used (OFF). In the color-oriented mode, as described above, 1/3 of the phosphor wheel 144 (1/2 of the phosphor layer 1444) is used to generate green light and make it incident on the display element 146.

図６は、輝度重視モードにおける投影部１４の動作を説明する図である。
図６に示す輝度重視モードでは、赤色光及び緑色光を重ね合わせたイエロー光が表示に用いられるＹ期間、及び赤色光及び青色光を重ね合わせたマゼンタ光が表示に用いられるＭ期間が繰り返されて画像４０が形成される。Ｙ期間では、赤色光及び緑色光が表示に用いられ（ＯＮ）、青色光は用いられない（ＯＦＦ）。Ｍ期間では、赤色光及び青色光が表示に用いられ（ＯＮ）、緑色光は用いられない（ＯＦＦ）。輝度重視モードでは、より高い輝度が得られるよう、蛍光体ホイール１４４の２／３（蛍光体層１４４４の全体）を使用して緑色光を生成して表示素子１４６に入射させる。すなわち、Ｙ期間のＤｕｔｙ比（画像４０の投影期間のうちＹ期間が占める割合）は２／３であり、Ｍ期間のＤｕｔｙ比は１／３である。 FIG. 6 is a diagram illustrating the operation of the projection unit 14 in the brightness priority mode.
In the brightness-oriented mode shown in FIG. 6, the image 40 is formed by repeating a Y period in which yellow light obtained by superimposing red light and green light is used for display, and an M period in which magenta light obtained by superimposing red light and blue light is used for display. In the Y period, red light and green light are used for display (ON), and blue light is not used (OFF). In the M period, red light and blue light are used for display (ON), and green light is not used (OFF). In the brightness-oriented mode, in order to obtain higher brightness, green light is generated using 2/3 of the phosphor wheel 144 (the entire phosphor layer 1444) and is made to enter the display element 146. That is, the duty ratio of the Y period (the ratio of the Y period to the projection period of the image 40) is 2/3, and the duty ratio of the M period is 1/3.

図６の輝度重視モードでは、全期間で赤色光が用いられるため、赤色光の光量は、色重視モードの３倍となる。
また、図６の輝度重視モードでは、緑色光が使用されるＹ期間のＤｕｔｙ比（２／３）が、色重視モードにおける緑色光の使用期間のＤｕｔｙ比（１／３）の２倍となる。このため、図６の輝度重視モードにおける緑色光の光量は、色重視モードの２倍となる。
また、図６の輝度重視モードでは、青色光が使用されるＭ期間のＤｕｔｙ比（１／３）が、色重視モードにおける青色光の使用期間のＤｕｔｙ比（１／３）と同一であるため、青色光の光量は、色重視モードと同一となる。
このように、図６の輝度重視モードでは、表示可能な色がイエロー及びマゼンタの重ね合わせによる色に限られることで表示可能な色域が色重視モードよりも狭くなる反面、赤色光及び緑色光の光量が増大するため、色重視モードよりも輝度の最大値を高めることができる。すなわち、本実施形態の投影システム１において、表示可能な色域の広さと、画像４０の輝度との間には、負の相関がある。 In the luminance-important mode of FIG. 6, red light is used throughout the entire period, so the amount of red light is three times that in the color-important mode.
In addition, in the luminance-important mode of Fig. 6, the duty ratio (2/3) of the Y period in which green light is used is twice the duty ratio (1/3) of the period in which green light is used in the color-important mode. Therefore, the amount of green light in the luminance-important mode of Fig. 6 is twice that of the color-important mode.
In addition, in the brightness-focused mode of Figure 6, the duty ratio (1/3) of the M period in which blue light is used is the same as the duty ratio (1/3) of the period in which blue light is used in the color-focused mode, so the amount of blue light is the same as in the color-focused mode.
6, the displayable colors are limited to colors obtained by overlapping yellow and magenta, so that the displayable color gamut is narrower than in the color-oriented mode, but the amount of red and green light is increased, so that the maximum brightness can be increased compared to the color-oriented mode. In other words, in the projection system 1 of this embodiment, there is a negative correlation between the width of the displayable color gamut and the brightness of the image 40.

なお、輝度重視モードは、画像４０を投影中の少なくとも一部の期間において赤色光、緑色光及び青色光のうち２色の光が同時に用いられるものであればよく、図６に示した動作に限られない。
図７は、輝度重視モードにおける投影部１４の動作の他の例を説明する図である。
図７に示す輝度重視モードでは、赤色光のみが表示に用いられるＲ期間、赤色光及び緑色光を組み合わせたイエロー光が表示に用いられるＹ期間、及び赤色光及び青色光を組み合わせたマゼンタ光が表示に用いられるＭ期間が繰り返されて画像４０が形成される。図７の輝度重視モードでは、蛍光体ホイール１４４の１／３（蛍光体層１４４４の半分）を使用して緑色光を生成して表示素子１４６に入射させる。 The brightness priority mode is not limited to the operation shown in FIG. 6 as long as two colors of light out of red light, green light, and blue light are used simultaneously during at least a portion of the period during which the image 40 is projected.
FIG. 7 is a diagram illustrating another example of the operation of the projection unit 14 in the brightness priority mode.
7, an R period in which only red light is used for display, a Y period in which yellow light, a combination of red light and green light, is used for display, and an M period in which magenta light, a combination of red light and blue light, is used for display are repeated to form an image 40. In the brightness-important mode of FIG. 7, one-third of phosphor wheel 144 (half of phosphor layer 1444) is used to generate green light and cause it to enter display element 146.

図７の輝度重視モードでは、全期間で赤色光が用いられるため、赤色光の光量は、色重視モードの３倍となる。
また、図７の輝度重視モードでは、緑色光が使用されるＹ期間のＤｕｔｙ比（１／３）が、色重視モードにおける緑色光の使用期間のＤｕｔｙ比（１／３）と同一であるため、緑色光の光量は、色重視モードと同一となる。
また、図７の輝度重視モードでは、青色光が使用されるＭ期間のＤｕｔｙ比（１／３）が、色重視モードにおける青色光の使用期間のＤｕｔｙ比（１／３）と同一であるため、青色光の光量は、色重視モードと同一となる。
図７の輝度重視モードでは、赤、イエロー及びマゼンタの重ね合わせによる色を表示可能であるため、画像４０の色域は、色重視モードより狭く、図６の輝度重視モードより広い。また、赤色光の光量が増大するため、輝度の最大値は、図６の輝度重視モードと比較すると低いものの、色重視モードよりも高くなる。 In the luminance-important mode of FIG. 7, red light is used throughout the entire period, so the amount of red light is three times that in the color-important mode.
In addition, in the brightness-focused mode of Figure 7, the duty ratio (1/3) of the Y period in which green light is used is the same as the duty ratio (1/3) of the period in which green light is used in the color-focused mode, so the amount of green light is the same as in the color-focused mode.
In addition, in the brightness-focused mode of Figure 7, the duty ratio (1/3) of the M period in which blue light is used is the same as the duty ratio (1/3) of the period in which blue light is used in the color-focused mode, so the amount of blue light is the same as in the color-focused mode.
In the brightness priority mode of Fig. 7, it is possible to display colors obtained by overlapping red, yellow, and magenta, so the color gamut of the image 40 is narrower than in the color priority mode, but wider than in the brightness priority mode of Fig. 6. In addition, because the amount of red light increases, the maximum brightness is lower compared to the brightness priority mode of Fig. 6, but higher than in the color priority mode.

このように、投影部１４の動作モードを色重視モードと輝度重視モードとの間で切り替えることで、表示可能な色域が変更され、これに伴って画像４０の輝度を調整することができる。 In this way, by switching the operating mode of the projection unit 14 between the color-emphasis mode and the brightness-emphasis mode, the displayable color gamut can be changed, and the brightness of the image 40 can be adjusted accordingly.

図２に戻り、通信Ｉ／Ｆ１５（通信インターフェース）は、ミラー装置２０及びモニタ装置３０との間でデータの送受信を行う手段であり、例えば各種シリアルインターフェース、各種パラレルインターフェースのいずれか又はこれらの組み合わせで構成される。また、プロジェクタ１０は、ミラー装置２０及びモニタ装置３０以外の外部機器とデータ通信を行う通信部を有していてもよい。 Returning to FIG. 2, the communication I/F 15 (communication interface) is a means for transmitting and receiving data between the mirror device 20 and the monitor device 30, and is configured, for example, with any one of various serial interfaces, various parallel interfaces, or a combination of these. In addition, the projector 10 may have a communication unit that performs data communication with external devices other than the mirror device 20 and the monitor device 30.

ミラー装置２０は、ＣＰＵ２１、ＲＡＭ２２、記憶部２３、ミラー駆動部２４、ミラー２５及び通信Ｉ／Ｆ２６などを備え、これらの各部はバス２７により接続されている。 The mirror device 20 includes a CPU 21, a RAM 22, a memory unit 23, a mirror driver 24, a mirror 25, and a communication I/F 26, and these components are connected by a bus 27.

ＣＰＵ２１は、プロジェクタ１０のＣＰＵ１１から送信される制御信号に基づいて、記憶部２３に記憶されているプログラムを読み出して実行し、各種演算処理を行うことで、ミラー装置２０の各部の動作を制御するプロセッサである。 The CPU 21 is a processor that controls the operation of each part of the mirror device 20 by reading and executing programs stored in the memory unit 23 based on control signals sent from the CPU 11 of the projector 10 and performing various arithmetic processing.

ＲＡＭ２２は、ＣＰＵ２１に作業用のメモリ空間を提供し、一時データを記憶する。 RAM 22 provides working memory space for CPU 21 and stores temporary data.

記憶部２３は、コンピュータとしてのＣＰＵ２１により読み取り可能な非一時的な記録媒体であり、プログラム及び各種データを記憶する。 The storage unit 23 is a non-transitory recording medium that can be read by the CPU 21 as a computer, and stores programs and various data.

ミラー駆動部２４は、図示略のミラー駆動モーターを有し、ＣＰＵ２１から送信される制御信号に基づいてミラー駆動モーターを動作させることで、ミラー２５の角度を変更する。ミラー駆動モーターの例として、サーボモーターやステッピングモーターなどの位置を制御できるモーターが挙げられる。ミラー駆動部２４及びミラー２５は、例えばガルバノミラーであってもよい。 The mirror driver 24 has a mirror driver motor (not shown) and changes the angle of the mirror 25 by operating the mirror driver motor based on a control signal sent from the CPU 21. Examples of the mirror driver motor include a motor whose position can be controlled, such as a servo motor or a stepping motor. The mirror driver 24 and the mirror 25 may be, for example, a galvanometer mirror.

通信Ｉ／Ｆ２６は、プロジェクタ１０との間でデータの送受信を行う手段であり、例えば各種シリアルインターフェース、各種パラレルインターフェースのいずれか又はこれらの組み合わせで構成される。 The communication I/F 26 is a means for transmitting and receiving data to and from the projector 10, and is composed of, for example, any of various serial interfaces, various parallel interfaces, or a combination of these.

モニタ装置３０は、ＣＰＵ３１、ＲＡＭ３２、記憶部３３、撮像部３４、明るさ検出部３５及び通信Ｉ／Ｆ３６などを備え、これらの各部はバス３７により接続されている。 The monitor device 30 includes a CPU 31, a RAM 32, a memory unit 33, an image capture unit 34, a brightness detection unit 35, and a communication I/F 36, and these units are connected by a bus 37.

ＣＰＵ３１は、プロジェクタ１０のＣＰＵ１１から送信される制御信号に基づいて、記憶部３３に記憶されているプログラムを読み出して実行し、各種演算処理を行うことで、モニタ装置３０の各部の動作を制御するプロセッサである。 The CPU 31 is a processor that controls the operation of each part of the monitor device 30 by reading and executing programs stored in the memory unit 33 based on control signals transmitted from the CPU 11 of the projector 10 and performing various arithmetic processing.

ＲＡＭ３２は、ＣＰＵ３１に作業用のメモリ空間を提供し、一時データを記憶する。 RAM 32 provides working memory space for CPU 31 and stores temporary data.

記憶部３３は、コンピュータとしてのＣＰＵ３１により読み取り可能な非一時的な記録媒体であり、プログラム及び各種データを記憶する。 The memory unit 33 is a non-transitory recording medium that can be read by the CPU 31 as a computer, and stores programs and various data.

撮像部３４は、入射光をその強度に応じた電気信号に変換する複数の撮像素子と、当該撮像素子に入射光を導く光学系などを有するカメラである。撮像部３４は、静止画に加えて、又は静止画に代えて、動画を撮影可能であってもよい。撮像部３４は、ＣＰＵ３１による制御下で、撮像素子及び光学系により定まる撮影範囲を撮影して撮影画像データを生成し、記憶部３３に記憶させる。 The imaging unit 34 is a camera having a plurality of imaging elements that convert incident light into an electrical signal according to its intensity, and an optical system that guides the incident light to the imaging elements. The imaging unit 34 may be capable of capturing video in addition to or instead of still images. Under the control of the CPU 31, the imaging unit 34 captures an image within a range determined by the imaging elements and the optical system, generates captured image data, and stores the captured image data in the memory unit 33.

明るさ検出部３５は、投影面２の周囲の明るさを検出し、検出結果をＣＰＵ３１に出力する。明るさ検出部３５は、入射光の強度に応じた電気信号を出力する光学素子、例えばフォトダイード又はフォトトランジスタ等を備える。なお、撮像部３４による撮影画像から投影面２の周囲における明るさの情報を所望の精度で取得可能である場合には、明るさ検出部３５を省略してもよい。 The brightness detection unit 35 detects the brightness around the projection surface 2 and outputs the detection result to the CPU 31. The brightness detection unit 35 includes an optical element, such as a photodiode or phototransistor, that outputs an electrical signal according to the intensity of the incident light. Note that if information on the brightness around the projection surface 2 can be obtained with the desired accuracy from the image captured by the imaging unit 34, the brightness detection unit 35 may be omitted.

通信Ｉ／Ｆ３６は、プロジェクタ１０との間でデータの送受信を行う手段であり、例えば各種シリアルインターフェース、各種パラレルインターフェースのいずれか又はこれらの組み合わせで構成される。 The communication I/F 36 is a means for transmitting and receiving data to and from the projector 10, and is composed of, for example, any of various serial interfaces, various parallel interfaces, or a combination of these.

＜投影システムの動作＞
次に、投影システム１の動作について説明する。
投影システム１では、プロジェクタ１０による画像４０の投影と並行して、定期的に、又はリアルタイムで、モニタ装置３０による撮影と明るさの検出が行われる。このうちモニタ装置３０による撮影画像からは、投影面２の周囲における人Ｐの位置（画像４０と人Ｐとの位置関係）、人Ｐの顔の向き、及び人Ｐの数などに係る情報（以下、「移動体情報」と記す）を取得することができる。人Ｐは、「移動体」の一態様である。取得された移動体情報は、プロジェクタ１０の記憶部１３に移動体データ１３３１として記憶される。また、モニタ装置３０による明るさの検出結果からは、投影面２の周囲における明るさに係る情報（以下、「明るさ情報」と記す）を取得することができる。取得された明るさ情報は、プロジェクタ１０の記憶部１３に明るさデータ１３３２として記憶される。移動体情報及び明るさ情報は、投影面２の周囲の環境に係る「環境情報」の一態様である。ここで、「投影面２の周囲」の範囲は、適宜定めることができるが、例えば、画像４０を視認可能な範囲としてもよいし、画像４０から所定の距離範囲内としてもよい。あるいは、モニタ装置３０の撮像部３４により、画像４０が中心となるように投影面２を撮影したときの撮影可能範囲内（画角の範囲内）としてもよい。 <Projection System Operation>
Next, the operation of the projection system 1 will be described.
In the projection system 1, the monitor device 30 captures images and detects brightness periodically or in real time in parallel with the projection of the image 40 by the projector 10. From the captured image by the monitor device 30, information related to the position of the person P around the projection surface 2 (the positional relationship between the image 40 and the person P), the face direction of the person P, the number of the person P, and the like (hereinafter referred to as "mobile body information") can be obtained. The person P is one aspect of a "mobile body". The acquired mobile body information is stored in the storage unit 13 of the projector 10 as mobile body data 1331. In addition, from the brightness detection result by the monitor device 30, information related to the brightness around the projection surface 2 (hereinafter referred to as "brightness information") can be obtained. The acquired brightness information is stored in the storage unit 13 of the projector 10 as brightness data 1332. The mobile body information and brightness information are one aspect of "environment information" related to the environment around the projection surface 2. Here, the range of "the periphery of the projection surface 2" can be appropriately determined, but may be, for example, a range in which the image 40 is visible, or may be within a predetermined distance range from the image 40. Alternatively, it may be within a photographable range (within the angle of view) when the projection surface 2 is photographed by the imaging unit 34 of the monitor device 30 so that the image 40 is at the center.

投影システム１では、移動体データ１３３１及び明るさデータ１３３２に基づいて、画像４０の投影態様（画像４０の投影位置、輝度、大きさ、及び内容等）が調整される。以下では、画像４０の投影態様の調整動作について説明する。 In the projection system 1, the projection mode of the image 40 (projection position, brightness, size, content, etc. of the image 40) is adjusted based on the moving body data 1331 and the brightness data 1332. The adjustment operation of the projection mode of the image 40 will be described below.

（移動体情報に基づく画像の投影態様の調整）
移動体情報が取得されて移動体データ１３３１が生成されると、当該移動体データ１３３１に基づいて、画像４０と人Ｐとの位置関係が所定の適正条件を満たしているか否かが判別される。本実施形態では、画像４０と人Ｐとが重なっているか、又は画像４０と人Ｐとの距離が所定の基準距離未満である場合に、適正条件が満たされていないと判別される。ただし、これは例示であり、適正条件は、画像４０の使用目的などに応じて適宜定めることができる。 (Adjustment of Image Projection Mode Based on Mobile Object Information)
When the mobile object information is acquired and the mobile object data 1331 is generated, it is determined whether or not the positional relationship between the image 40 and the person P satisfies a predetermined appropriate condition based on the mobile object data 1331. In this embodiment, if the image 40 and the person P overlap, or if the distance between the image 40 and the person P is less than a predetermined reference distance, it is determined that the appropriate condition is not satisfied. However, this is merely an example, and the appropriate condition can be appropriately determined depending on the purpose of use of the image 40, etc.

図８は、人Ｐと画像４０との位置関係が適正条件を満たさない場合の例を示す図である。図８の状態では、人Ｐが画像４０と重なっているため、適正条件が満たされていないと判別される。図８に示すように画像４０と人Ｐとが重なっている場合には、画像４０の一部が視認できなくなってしまう。また、画像４０と人Ｐとが重なっていない場合であっても、画像４０と人Ｐとの距離が基準距離未満である場合には、人Ｐが移動することによって、画像４０と人Ｐとが重なる状態となりやすい。このため、人Ｐと画像４０との位置関係に係る適正条件が満たされていないと判別された場合には、適正条件を満たす状態となるように、画像４０の位置及び大きさの少なくとも一方が調整される。画像４０の位置及び大きさの調整手順は、調整後に適正条件が満たされる状態となるものであれば、特には限定されないが、画像４０の位置及び大きさの調整手順の例を以下に示す。 8 is a diagram showing an example of a case where the positional relationship between the person P and the image 40 does not satisfy the appropriateness condition. In the state of FIG. 8, since the person P overlaps with the image 40, it is determined that the appropriateness condition is not satisfied. When the image 40 and the person P overlap as shown in FIG. 8, a part of the image 40 becomes invisible. Even if the image 40 and the person P do not overlap, if the distance between the image 40 and the person P is less than the reference distance, the image 40 and the person P are likely to overlap when the person P moves. Therefore, when it is determined that the appropriateness condition related to the positional relationship between the person P and the image 40 is not satisfied, at least one of the position and size of the image 40 is adjusted so that the appropriateness condition is satisfied. The procedure for adjusting the position and size of the image 40 is not particularly limited as long as the appropriateness condition is satisfied after the adjustment, but an example of the procedure for adjusting the position and size of the image 40 is shown below.

例えば、画像４０の位置調整によって適正条件を充足可能である場合には、ミラー装置２０のミラー２５の角度を変更することにより、画像４０の投影位置が調整される。すなわち、画像４０と、投影面２の周囲における人Ｐとの最短距離が増大するように（最短距離が基準距離以上となるように）、ミラー２５の角度が変更され、画像４０の投影位置が調整される。投影位置の調整と併せて、公知の方法により画像４０の台形補正が行われてもよい。 For example, if the appropriate conditions can be met by adjusting the position of the image 40, the projection position of the image 40 is adjusted by changing the angle of the mirror 25 of the mirror device 20. That is, the angle of the mirror 25 is changed and the projection position of the image 40 is adjusted so that the shortest distance between the image 40 and the person P around the projection surface 2 increases (so that the shortest distance is equal to or greater than the reference distance). In addition to adjusting the projection position, keystone correction of the image 40 may be performed using a known method.

また、画像４０の位置調整のみでは適正条件を充足できない場合には、画像４０の投影位置の調整とともに、画像４０の大きさを縮小して、適正条件を充足させてもよい。すなわち、画像４０と、投影面２の周囲における人Ｐとの最短距離が増大するように（最短距離が基準距離以上となるように）、画像４０の大きさを調整（縮小）してもよい。図９は、画像４０の投影位置及び大きさを変更した状態の例を示す図である。詳しくは、図９は、図８の状態から画像４０の投影位置を調整し、画像４０の幅Ｗ２を、縮小前の幅Ｗ１よりも小さくした状態を示す。以下では、縮小後の画像４０を、縮小画像４０ａとも記す。 In addition, if the appropriateness conditions cannot be met by adjusting the position of the image 40 alone, the size of the image 40 may be reduced in addition to adjusting the projection position of the image 40 to satisfy the appropriateness conditions. That is, the size of the image 40 may be adjusted (reduced) so that the shortest distance between the image 40 and the person P around the projection surface 2 increases (so that the shortest distance is equal to or greater than the reference distance). FIG. 9 is a diagram showing an example of a state in which the projection position and size of the image 40 have been changed. In more detail, FIG. 9 shows a state in which the projection position of the image 40 has been adjusted from the state shown in FIG. 8, and the width W2 of the image 40 has been made smaller than the width W1 before the reduction. Hereinafter, the image 40 after the reduction is also referred to as a reduced image 40a.

画像４０の縮小は、プロジェクタ１０の光学系駆動部１４８により、ズームレンズ１４７によるズーム倍率を増大させることにより（ズームレンズ１４７の焦点距離を増大する制御により）行われる。 The reduction of the image 40 is performed by increasing the zoom magnification of the zoom lens 147 (by controlling the focal length of the zoom lens 147 to increase) using the optical system drive unit 148 of the projector 10.

図１０は、ズームレンズ１４７の焦点距離と画像４０の投影態様との関係を示す図である。
図１０では、ズームレンズ１４７の焦点距離を１６ｍｍとした「広角状態」、及び焦点距離を３１ｍｍとした「望遠状態」における、ズームレンズ１４７の「Ｆｎｏ．」、「画像４０の大きさ」、及び画像４０の「輝度（単位面積当たりの明るさ）」が示されている。このうち「Ｆｎｏ．」は、ズームレンズ１４７の焦点距離を入射瞳径で除した値であり、小さいほど明るいレンズであることを示す。また、輝度については、広角状態における輝度を「１」としたときの相対値で、望遠状態における画像４０の輝度が表されている。 FIG. 10 is a diagram showing the relationship between the focal length of the zoom lens 147 and the projection state of the image 40. As shown in FIG.
10 shows the "Fno." of the zoom lens 147, the "size of the image 40," and the "brightness (brightness per unit area)" of the image 40 in a "wide-angle state" where the focal length of the zoom lens 147 is 16 mm, and in a "telephoto state" where the focal length is 31 mm. Among these, "Fno." is a value obtained by dividing the focal length of the zoom lens 147 by the entrance pupil diameter, and the smaller the value, the brighter the lens. Regarding brightness, the brightness of the image 40 in the telephoto state is expressed as a relative value when the brightness in the wide-angle state is set to "1."

図１０における「画像の大きさ」の行に示すように、「広角状態」から「望遠状態」に変更することで、画像４０の画角が小さくなるため、画像４０の大きさは、画角の変化に応じて小さくなる。 As shown in the "Image Size" row in FIG. 10, by changing from the "wide-angle state" to the "telephoto state," the angle of view of image 40 becomes smaller, and the size of image 40 becomes smaller in accordance with the change in the angle of view.

また、図１０の最下段に示すように、望遠状態における画像４０の輝度は、広角状態における画像４０の輝度の２．０７倍に増大する。この輝度の増大率は、画像の大きさが縮小することによる寄与（３．７５倍）と、ズームレンズ１４７のＦｎｏ．の増大による寄与（０．５５倍）とを掛け合わせた値である。このうち、画像の大きさが縮小することによる寄与は、焦点距離の変化率の２乗（＝（３１／１６）２）から導出される。また、ズームレンズ１４７のＦｎｏ．の増大による寄与は、Ｆｎｏ．の変化率の逆数の２乗（＝（２．３／３．１）２）から導出される。 10, the brightness of the image 40 in the telephoto state increases to 2.07 times the brightness of the image 40 in the wide-angle state. This increase in brightness is a product of the contribution from the reduction in image size (3.75 times) and the contribution from the increase in the Fno. of the zoom lens 147 (0.55 times). Of these, the contribution from the reduction in image size is derived from the square of the rate of change of the focal length (=(31/16) 2 ). Moreover, the contribution from the increase in the Fno. of the zoom lens 147 is derived from the square of the reciprocal of the rate of change of the Fno. (=(2.3/3.1) 2 ).

このように、ズームレンズ１４７の焦点距離（ズーム倍率）を増大させて画像４０を縮小することで、画像４０の大きさを縮小させ、かつ、画像４０の輝度を増大させることができる。なお、画像４０の投影位置の調整を行わずに、画像４０の大きさを縮小することで適正条件を充足させてもよい。 In this way, by increasing the focal length (zoom magnification) of the zoom lens 147 and reducing the size of the image 40, it is possible to reduce the size of the image 40 and increase the brightness of the image 40. Note that the appropriate conditions may be satisfied by reducing the size of the image 40 without adjusting the projection position of the image 40.

また、画像４０を縮小させると、画像４０に含まれる情報が視認しにくくなるため、画像４０の縮小に応じて、画像４０に含まれる情報の量が低減するように画像４０の内容を変更してもよい。ここで、画像４０に含まれる情報の量は、例えば、画像４０に含まれる文字の数が少ないほど少なくなり、画像４０の色数（又は、画像の各画素の階調数）が少ないほど少なくなり、画像４０に含まれる写真の数（又はデータ量）が少ないほど少なくなる。 In addition, since reducing the size of image 40 makes it difficult to visually recognize the information contained in image 40, the content of image 40 may be changed so that the amount of information contained in image 40 is reduced in accordance with the reduction in size of image 40. Here, the amount of information contained in image 40 will be less, for example, the fewer the number of characters contained in image 40, the fewer the number of colors (or the number of gradations for each pixel of the image) in image 40, and the fewer the number of photos (or the amount of data) contained in image 40.

図１１は、広角状態のズームレンズ１４７を介して投影された画像４０の例を示す図である。
図１２は、望遠状態のズームレンズ１４７を介して投影された縮小画像４０ａの例を示す図である。
図１１に示す広角状態における画像４０は、エレベーターホールでエレベーターを待っている人Ｐへの案内を行うためのものであり、５階－２０階行きの上りのエレベーターが来る旨の表示と、６階において実施されている「ＡＢＣ展」の案内表示と、が含まれている。 FIG. 11 is a diagram showing an example of an image 40 projected through the zoom lens 147 in a wide-angle state.
FIG. 12 is a diagram showing an example of a reduced image 40a projected through the zoom lens 147 in the telephoto state.
The wide-angle image 40 shown in FIG. 11 is intended to provide guidance to a person P waiting for an elevator in the elevator hall, and includes a display indicating that an elevator going up from the 5th to 20th floors is approaching, and a guide sign for the "ABC Exhibition" being held on the 6th floor.

一方、図１２に示す縮小画像４０ａは、図１１に示す画像４０の大きさを縮小する調整を行った後の画像である。図１２に示す縮小画像４０ａでは、「ＡＢＣ展」の案内表示が省略され、５階－２０階行きの上りのエレベーターが来る旨の表示のみが含まれている。このように画像４０の縮小に応じて画像４０に含まれる情報の量を低減することで、画像４０の大きさが縮小されても、情報を読み取りやすくすることができる。 On the other hand, reduced image 40a shown in FIG. 12 is an image after adjustment has been made to reduce the size of image 40 shown in FIG. 11. In reduced image 40a shown in FIG. 12, the "ABC Exhibition" guide display is omitted, and only a display indicating that an elevator going up to floors 5-20 is approaching is included. In this way, by reducing the amount of information contained in image 40 as it is reduced, the information can be made easier to read even if the size of image 40 is reduced.

なお、図１１及び図１２に示す画像４０は例示であり、画像４０の内容はこれらに限られない。例えば、拡大前の画像４０において、カラー写真又はカラーイラストなどが含まれていてもよい。この画像４０を縮小して縮小画像４０ａを表示させる際に、カラー写真及びカラーイラストを削除してもよい。拡大前の画像４０においてカラー写真又はカラーイラストなどが含まれる場合には、当該画像４０を色重視モードで投影することが好ましい。また、縮小画像４０ａにおいてカラー写真及びカラーイラストを削除する場合には、縮小画像４０ａの表示の際に、投影部１４の動作モードを色重視モードから輝度重視モードに切り替えてもよい。これにより、画像４０及び縮小画像４０ａの表示色に違和感を生じさせずに縮小画像４０ａの輝度を高めることができる。また、縮小画像４０ａは、文字情報及びモノクロ画像（モノクロアイコン等）のみを含んでいてもよい。また、画像４０の内容に基づいて色重視モード及び輝度重視モードを選択してもよい。例えば、画像データに予め投影部１４の動作モードを指定する情報を紐付けておき、ＣＰＵ１１が画像データに紐付けられた動作モードに係る情報に基づいて動作モードを選択してもよい。具体的には、エレベーターの行先等の簡単な情報を通知するための画像４０には、輝度重視モードを指定する情報を紐付けておき、当該画像４０の投影開始時から輝度重視モードで投影してもよい。 11 and 12 are merely examples, and the contents of the image 40 are not limited thereto. For example, the image 40 before enlargement may include color photographs or color illustrations. When the image 40 is reduced to display the reduced image 40a, the color photographs and color illustrations may be deleted. When the image 40 before enlargement includes color photographs or color illustrations, it is preferable to project the image 40 in a color-emphasis mode. When the color photographs and color illustrations are deleted from the reduced image 40a, the operation mode of the projection unit 14 may be switched from the color-emphasis mode to the brightness-emphasis mode when the reduced image 40a is displayed. This makes it possible to increase the brightness of the reduced image 40a without causing discomfort in the display colors of the image 40 and the reduced image 40a. The reduced image 40a may include only text information and monochrome images (monochrome icons, etc.). The color-emphasis mode and the brightness-emphasis mode may be selected based on the contents of the image 40. For example, information specifying the operation mode of the projection unit 14 may be linked to the image data in advance, and the CPU 11 may select the operation mode based on the information related to the operation mode linked to the image data. Specifically, an image 40 for notifying simple information such as the elevator destination may be associated with information specifying the brightness priority mode, and the image 40 may be projected in the brightness priority mode from the start of projection.

上記では、人Ｐの位置（人Ｐと画像４０との位置関係）に基づいて画像４０の投影態様を調整したが、これに限られず、移動体情報のうち人Ｐの数に係る情報に基づいて画像４０の投影態様を調整してもよい。例えば、投影面２の周囲における人Ｐの数が多いほど、人Ｐと画像４０との位置関係に係る適正条件が満たされなくなる可能性が高くなるため、人Ｐの数に応じて、画像４０の大きさ及び位置の少なくとも一方を調整してもよい。例えば、画像４０の投影位置の調整のみによって適正条件を充足可能である場合であっても、人Ｐの数が所定の基準数以上である場合には、併せて予め画像４０の大きさを人Ｐの数に応じた所定の基準サイズ以下となるまで縮小することとしてもよい。上記基準サイズは、予め設定されて記憶部１３に記憶されている。基準サイズは、人Ｐの数を変数とする関数により毎回導出してもよいし、人Ｐの数ごとに予め対応付けられて記憶されていてもよい。 In the above, the projection mode of the image 40 is adjusted based on the position of the person P (the positional relationship between the person P and the image 40), but this is not limited thereto. The projection mode of the image 40 may be adjusted based on information related to the number of people P among the moving body information. For example, the more people P there are around the projection surface 2, the more likely it is that the appropriate condition related to the positional relationship between the person P and the image 40 will not be satisfied. Therefore, at least one of the size and the position of the image 40 may be adjusted according to the number of people P. For example, even if the appropriate condition can be satisfied only by adjusting the projection position of the image 40, if the number of people P is equal to or greater than a predetermined reference number, the size of the image 40 may also be reduced in advance to a predetermined reference size or less according to the number of people P. The above reference size is set in advance and stored in the storage unit 13. The reference size may be derived each time by a function with the number of people P as a variable, or may be stored in advance in association with each number of people P.

また、移動体データ１３３１に人Ｐの顔の向きに係る情報が含まれる場合には、当該情報に基づいて画像４０の投影態様を調整してもよい。顔の向きは、モニタ装置３０による撮影画像に対して、顔を認識する公知の画像解析処理を行うことなどにより特定することができる。例えば、図１に示すように、投影面２の周囲において、画像４０の方を向いている人Ｐが検出されている場合において、画像４０を構成する光の進行方向と、人Ｐの顔に向かう方向と、がなす最小の角度ａが増大するように、画像４０の投影位置及び大きさの少なくとも一方を調整してもよい。ここで、画像４０を構成する光の進行方向は、図１に示すように、ミラー２５により反射された光により画像４０が構成される場合には、ミラー２５における当該光の反射位置と、画像４０とを結ぶ線の方向である。また、人Ｐの顔に向かう方向は、図１に示すようにミラー２５により反射された光により画像４０が構成される場合には、ミラー２５における当該光の反射位置と、人Ｐの顔とを結ぶ線の方向である。画像４０を構成する光の進行方向と、人Ｐの顔に向かう方向と、がなす最小の角度ａを増大させることで、人Ｐが感じる眩しさを低減することができる。 In addition, if the moving body data 1331 includes information on the direction of the face of the person P, the projection mode of the image 40 may be adjusted based on the information. The direction of the face can be identified by performing a known image analysis process for recognizing the face on the image captured by the monitor device 30. For example, as shown in FIG. 1, when a person P facing the image 40 is detected around the projection surface 2, at least one of the projection position and size of the image 40 may be adjusted so that the minimum angle a between the traveling direction of the light constituting the image 40 and the direction toward the face of the person P increases. Here, the traveling direction of the light constituting the image 40 is the direction of the line connecting the reflection position of the light on the mirror 25 and the image 40 when the image 40 is composed of light reflected by the mirror 25 as shown in FIG. 1. In addition, the direction toward the face of the person P is the direction of the line connecting the reflection position of the light on the mirror 25 and the face of the person P when the image 40 is composed of light reflected by the mirror 25 as shown in FIG. 1. By increasing the minimum angle a between the direction of travel of the light that constitutes image 40 and the direction toward the face of person P, the glare felt by person P can be reduced.

（明るさ情報に基づく画像の投影態様の調整）
次に、明るさ情報に基づく画像の投影態様の調整動作について説明する。
投影されている画像４０の輝度が一定である状態で投影面２の周囲の明るさが増大すると、相対的に画像４０の視認性が低下する。このため、モニタ装置３０の検出結果に基づいて明るさ情報が取得され、明るさデータ１３３２が生成されると、当該明るさデータ１３３２に基づいて、画像４０の輝度が、投影面２の周囲の明るさに応じた適正輝度以上であるか否かが判別され、画像４０の輝度が適正輝度未満であると判別されると、画像４０の輝度を増大させる調整が行われる。すなわち、明るさ情報から特定される投影面２の周囲の明るさが増大するに従って画像４０の輝度が高くなるように、画像の輝度が調整される。 (Adjustment of Image Projection Mode Based on Brightness Information)
Next, the operation of adjusting the projection mode of an image based on brightness information will be described.
When the brightness of the surroundings of the projection surface 2 increases while the brightness of the projected image 40 remains constant, the visibility of the image 40 decreases relatively. Therefore, when brightness information is acquired based on the detection result of the monitor device 30 and brightness data 1332 is generated, it is determined whether the brightness of the image 40 is equal to or higher than the appropriate brightness according to the brightness of the surroundings of the projection surface 2 based on the brightness data 1332, and if it is determined that the brightness of the image 40 is less than the appropriate brightness, an adjustment is made to increase the brightness of the image 40. In other words, the brightness of the image is adjusted so that the brightness of the image 40 increases as the brightness of the surroundings of the projection surface 2 specified from the brightness information increases.

投影面２の周囲の明るさに応じた適正輝度は、予め設定されて記憶部１３に記憶されている。適正輝度は、周囲の明るさを変数とする関数により毎回導出してもよいし、周囲の明るさを表す明るさレベルごとに予め対応付けられて記憶されていてもよい。 The appropriate brightness according to the brightness of the surroundings of the projection surface 2 is preset and stored in the storage unit 13. The appropriate brightness may be derived each time using a function with the brightness of the surroundings as a variable, or may be stored in advance in association with each brightness level representing the brightness of the surroundings.

画像４０の明るさを増大させる方法としては、例えば以下の３つの方法が挙げられる。
第１の方法は、光源１４１に供給する電力（ＬＤ１４１１及びＬＥＤ１４１２に流す駆動電流）を増大させて、光源１４１の全光束を増大させる方法である。光源１４１の全光束を増大させることにより、表示素子１４６に入射する光束が増大する。これにより、表示素子１４６からの反射光により形成される光像の輝度が増大し、投影される画像４０の輝度が増大する。
第２の方法は、ズームレンズ１４７の焦点距離を増大させて画像４０を縮小する方法である。図１０を用いて説明したとおり、画像４０を縮小することで画像４０の輝度が増大する。
第３の方法は、投影部１４の動作モードを、色重視モードから輝度重視モードに切り替える方法である。上述のとおり、投影部１４の表示モードを切り替えると表示可能な色域が変動し、色域の増大に応じて輝度が低減するように画像４０の輝度が変動する。
なお、第１～第３の方法のうち２つ以上を組み合わせてもよい。
また、画像４０の明るさを低減させる場合には、上記とは逆の制御を行えばよい。 As a method for increasing the brightness of the image 40, for example, the following three methods can be given.
The first method is to increase the power supplied to the light source 141 (the driving current flowing through the LD 1411 and the LED 1412) to increase the total luminous flux of the light source 141. By increasing the total luminous flux of the light source 141, the luminous flux incident on the display element 146 increases. This increases the luminance of the optical image formed by the reflected light from the display element 146, and increases the luminance of the projected image 40.
The second method is to increase the focal length of the zoom lens 147 to reduce the image 40. As described with reference to Fig. 10, reducing the image 40 increases the brightness of the image 40.
The third method is to switch the operation mode of the projection unit 14 from the color-important mode to the brightness-important mode. As described above, when the display mode of the projection unit 14 is switched, the displayable color gamut changes, and the brightness of the image 40 changes so that the brightness decreases as the color gamut increases.
Two or more of the first to third methods may be combined.
Moreover, in order to reduce the brightness of the image 40, the opposite control to the above may be performed.

（画像投影処理）
次に、画像４０の投影態様の調整処理を含む画像投影処理の制御手順について説明する。 (Image projection processing)
Next, a control procedure for the image projection process including the adjustment process for the projection mode of the image 40 will be described.

図１３は、画像投影処理の制御手順を説明するフローチャートである。
画像投影処理は、投影システム１による画像４０の投影を開始する場合に実行される。
画像投影処理が開始されると、プロジェクタ１０のＣＰＵ１１は、モニタ装置３０に制御信号を送信して、明るさ検出部３５により明るさの検出を行わせる。そして、ＣＰＵ１１は、明るさ検出部３５による検出結果を取得し、投影面２の周囲における明るさに係る明るさ情報を取得する（ステップＳ１０１）。また、ＣＰＵ１１は、当該明るさ情報を含む明るさデータ１３３２を記憶部１３に記憶させる。 FIG. 13 is a flowchart illustrating a control procedure of the image projection processing.
The image projection process is executed when the projection system 1 starts to project the image 40 .
When the image projection process is started, the CPU 11 of the projector 10 transmits a control signal to the monitor device 30 to cause the brightness detection unit 35 to detect the brightness. Then, the CPU 11 acquires the detection result by the brightness detection unit 35 and acquires brightness information related to the brightness around the projection surface 2 (step S101). The CPU 11 also stores the brightness data 1332 including the brightness information in the storage unit 13.

ＣＰＵ１１は、モニタ装置３０に制御信号を送信して撮像部３４により撮影を行わせ、撮影画像をモニタ装置３０から取得する（ステップＳ１０２）。詳しくは、ＣＰＵ１１は、ステップＳ１０１で生成した明るさデータ１３３２に基づいて撮像部３４の感度を調整し、画像４０が投影される予定位置の周囲を撮影させる。 The CPU 11 transmits a control signal to the monitor device 30 to cause the imaging unit 34 to capture an image, and acquires the captured image from the monitor device 30 (step S102). In more detail, the CPU 11 adjusts the sensitivity of the imaging unit 34 based on the brightness data 1332 generated in step S101, and causes the imaging unit 34 to capture an image of the surroundings of the intended position where the image 40 is to be projected.

ＣＰＵ１１は、取得した撮影画像に対して画像解析を行って、撮影画像において移動体としての人Ｐが検出されたか否かを判別し（ステップＳ１０３）、人Ｐが検出されていないと判別された場合には（ステップＳ１０３で“ＮＯ”）、処理をステップＳ１０１に戻す。 The CPU 11 performs image analysis on the acquired captured image to determine whether or not a person P has been detected as a moving object in the captured image (step S103), and if it is determined that a person P has not been detected ("NO" in step S103), the process returns to step S101.

一方、人Ｐが検出されたと判別された場合には（ステップＳ１０３で“ＹＥＳ”）、ＣＰＵ１１は、投影する画像４０を選択し、選択した画像４０の画像データ１３２に基づいて投影部１４を動作させ、所定の初期輝度で当該画像４０の投影を開始させる（ステップＳ１０４）。初期輝度は予め定められており、画像４０と人Ｐとが重なったときに人Ｐが眩しさを感じない程度に十分に低い輝度である。ステップＳ１０２で取得された撮影画像は、画像４０の投影開始前のものであるため、この撮影画像から、画像４０の投影が開始されたときの画像４０と人Ｐとの位置関係を正確に推定することができない。よって、ステップＳ１０４で投影を開始する画像４０と人Ｐとが重なる可能性があるため、眩しさを感じにくいように予め輝度を抑えることが望ましい。また、ステップＳ１０４では、ＣＰＵ１１は、色重視モードで投影部１４を動作させて画像４０を投影させる。ただし、上述したように、一実施形態では、画像データ等に基づいて投影開始時から輝度重視モードで画像４０を投影してもよい。また、投影面２の周囲の環境の状況等によっては、最初から情報量を低減させた縮小画像４０ａを投影してもよい。 On the other hand, if it is determined that a person P has been detected ("YES" in step S103), the CPU 11 selects an image 40 to be projected, operates the projection unit 14 based on the image data 132 of the selected image 40, and starts projecting the image 40 at a predetermined initial brightness (step S104). The initial brightness is predetermined and is a brightness that is low enough that the person P does not feel glare when the image 40 overlaps with the person P. Since the captured image acquired in step S102 is an image before the projection of the image 40 starts, the positional relationship between the image 40 and the person P when the projection of the image 40 starts cannot be accurately estimated from this captured image. Therefore, since the image 40 to be projected in step S104 may overlap with the person P, it is desirable to suppress the brightness in advance so that the person P does not feel glare. Also, in step S104, the CPU 11 operates the projection unit 14 in a color-emphasis mode to project the image 40. However, as described above, in one embodiment, the image 40 may be projected in a brightness-emphasis mode from the start of projection based on image data, etc. Also, depending on the environmental conditions around the projection surface 2, a reduced image 40a with a reduced amount of information may be projected from the start.

ＣＰＵ１１は、モニタ装置３０に制御信号を送信して撮像部３４により撮影を行わせ、撮影画像をモニタ装置３０から取得する。そして、ＣＰＵ１１は、取得した撮影画像に対して画像解析を行って、投影面２の周囲における人Ｐに係る情報を含む移動体情報を取得する（ステップＳ１０５）。また、ＣＰＵ１１は、取得した移動体情報を含む移動体データ１３３１を生成して記憶部１３に記憶させる。 The CPU 11 transmits a control signal to the monitor device 30 to cause the imaging unit 34 to capture an image, and acquires the captured image from the monitor device 30. The CPU 11 then performs image analysis on the acquired captured image to acquire moving body information including information related to the person P around the projection surface 2 (step S105). The CPU 11 also generates moving body data 1331 including the acquired moving body information, and stores it in the storage unit 13.

ＣＰＵ１１は、取得した撮影画像及び移動体データ１３３１に基づいて、画像４０（投影面２）の周囲に移動体としての人Ｐが検出されたか否かを判別し（ステップＳ１０６）、人Ｐが検出されていないと判別された場合には（ステップＳ１０６で“ＮＯ”）、処理をステップＳ１０１に戻す。このとき、画像４０を視認する人Ｐが投影面２の周囲にいないので、画像４０の投影を一旦中止してもよい。 Based on the acquired captured image and moving body data 1331, the CPU 11 determines whether or not a person P has been detected as a moving body around the image 40 (projection surface 2) (step S106), and if it is determined that a person P has not been detected ("NO" in step S106), the process returns to step S101. At this time, since there is no person P around the projection surface 2 viewing the image 40, the projection of the image 40 may be temporarily stopped.

一方、画像４０（投影面２）の周囲に人Ｐが検出されたと判別された場合には（ステップＳ１０６で“ＹＥＳ”）、ＣＰＵ１１は、投影調整処理を実行する（ステップＳ１０７）。 On the other hand, if it is determined that a person P has been detected around the image 40 (projection surface 2) ("YES" in step S106), the CPU 11 executes a projection adjustment process (step S107).

図１４は、投影調整処理の制御手順を示すフローチャートである。
投影調整処理が呼び出されると、ＣＰＵ１１は、移動体データ１３３１に基づいて、画像４０と、移動体としての人Ｐとの位置関係が上述の適正条件を満たすか否かを判別する（ステップＳ２０１）。適正条件を満たさないと判別された場合には（ステップＳ２０１で“ＮＯ”）、ＣＰＵ１１は、移動体データ１３３１に基づいて、画像４０の投影位置、画像４０の大きさ、及び画像４０の内容のうち、適正条件を充足させるために調整する項目を選択する（ステップＳ２０２）。ここでは、調整対象の項目として１つの項目が選択されてもよいし、２以上の項目が選択されてもよい。ただし、３つの項目のうち画像の内容は、画像４０の大きさを変更する場合に、付随的に選択され得る。調整対象の項目は、画像４０と人Ｐとの位置関係に基づいて、選択した項目の総合的な調整結果により適正条件が充足されるように選択される。例えば、画像４０と人Ｐとの位置関係の変化について、画像４０の投影位置の調整による第１の変化と、画像４０の大きさの調整による第２の変化とを予測し、画像４０と人Ｐとの位置関係が適正条件を満たすような第１の変化及び第２の変化の組み合わせ（第１の変化及び第２の変化の少なくとも一方）を特定し、特定した組み合わせに対応する項目を、調整する項目として選択する。また、項目の選択には、さらに人Ｐの数が所定数未満であるか否かが考慮されてもよい。 FIG. 14 is a flowchart showing a control procedure for the projection adjustment process.
When the projection adjustment process is called, the CPU 11 determines whether or not the positional relationship between the image 40 and the person P as a moving object satisfies the above-mentioned appropriateness condition based on the moving object data 1331 (step S201). If it is determined that the appropriateness condition is not satisfied ("NO" in step S201), the CPU 11 selects items to be adjusted to satisfy the appropriateness condition from among the projection position of the image 40, the size of the image 40, and the contents of the image 40 based on the moving object data 1331 (step S202). Here, one item may be selected as the item to be adjusted, or two or more items may be selected. However, among the three items, the image contents may be selected incidentally when changing the size of the image 40. The items to be adjusted are selected based on the positional relationship between the image 40 and the person P so that the appropriateness condition is satisfied by the overall adjustment result of the selected items. For example, regarding a change in the positional relationship between the image 40 and the person P, a first change due to adjustment of the projection position of the image 40 and a second change due to adjustment of the size of the image 40 are predicted, a combination of the first change and the second change (at least one of the first change and the second change) that satisfies the appropriate condition for the positional relationship between the image 40 and the person P is specified, and an item corresponding to the specified combination is selected as an item to be adjusted. In addition, in selecting the item, it may be further considered whether the number of the persons P is less than a predetermined number.

ＣＰＵ１１は、調整する項目として画像４０の投影位置を選択したか否かを判別する（ステップＳ２０３）。調整する項目として画像４０の投影位置を選択したと判別された場合には（ステップＳ２０３で“ＹＥＳ”）、ＣＰＵ１１は、ミラー装置２０に制御信号を送信してミラー駆動部２４を動作させ、ミラー２５の角度を変更する（ステップＳ２０４）。ＣＰＵ１１は、このミラー２５の角度の変更により、画像４０と、移動体としての人Ｐとの最短距離が増大するように画像４０の投影位置を調整する。また、ＣＰＵ１１は、投影部１４の光学系を調整して画像４０のフォーカスを合わせる。 The CPU 11 determines whether the projection position of the image 40 has been selected as an item to be adjusted (step S203). If it is determined that the projection position of the image 40 has been selected as an item to be adjusted ("YES" in step S203), the CPU 11 sends a control signal to the mirror device 20 to operate the mirror driver 24 and change the angle of the mirror 25 (step S204). By changing the angle of the mirror 25, the CPU 11 adjusts the projection position of the image 40 so that the shortest distance between the image 40 and the person P as a moving object increases. The CPU 11 also adjusts the optical system of the projection unit 14 to focus the image 40.

ステップＳ２０４が終了した場合、又は、ステップＳ２０３において、調整する項目として画像４０の投影位置を選択していないと判別された場合には（ステップＳ２０３で“ＮＯ”）、ＣＰＵ１１は、調整する項目として画像４０の大きさを選択したか否かを判別する（ステップＳ２０５）。調整する項目として画像４０の大きさを選択したと判別された場合には（ステップＳ２０５で“ＹＥＳ”）、ＣＰＵ１１は、ズームレンズ１４７の焦点距離を変更して画像４０の大きさを調整する（ステップＳ２０６）。また、ＣＰＵ１１は、投影部１４の光学系を調整して画像４０のフォーカスを合わせる。ステップＳ２０６では、通常、画像４０と、移動体としての人Ｐとの最短距離が増大するように画像４０を縮小させるが、例えば、投影調整処理の開始時点で縮小した画像４０（縮小画像４０ａ）が表示されている場合に画像４０を拡大させてもよいし、ステップＳ２０４における投影位置の調整を行っている場合において、調整後の投影位置と人Ｐとの位置関係によっては、画像４０と人Ｐとの位置関係が上記適正条件を充足する限りにおいて、画像４０を拡大する調整を行ってもよい。 When step S204 is completed, or when it is determined in step S203 that the projection position of the image 40 has not been selected as an item to be adjusted ("NO" in step S203), the CPU 11 determines whether or not the size of the image 40 has been selected as an item to be adjusted (step S205). When it is determined that the size of the image 40 has been selected as an item to be adjusted ("YES" in step S205), the CPU 11 changes the focal length of the zoom lens 147 to adjust the size of the image 40 (step S206). The CPU 11 also adjusts the optical system of the projection unit 14 to focus the image 40. In step S206, typically, image 40 is reduced so as to increase the shortest distance between image 40 and person P as a moving object. However, for example, image 40 may be enlarged if a reduced image 40 (reduced image 40a) is displayed at the start of the projection adjustment process, or, if the projection position is adjusted in step S204, depending on the positional relationship between the adjusted projection position and person P, adjustment may be made to enlarge image 40 as long as the positional relationship between image 40 and person P satisfies the above-mentioned appropriate conditions.

ステップＳ２０６が終了した場合には、ＣＰＵ１１は、調整する項目として画像４０の内容を選択したか否かを判別する（ステップＳ２０７）。調整する項目として画像４０の内容を選択したと判別された場合には（ステップＳ２０７で“ＹＥＳ”）、ＣＰＵ１１は、投影部１４に供給する画像データを差し替えて、投影する画像４０の内容を変更する（ステップＳ２０８）。ステップＳ２０８では、ステップＳ２０６において画像４０が縮小されている場合に、当該縮小に応じて画像４０の情報の量が低減するように画像４０の内容が変更される。ただし、ステップＳ２０６において画像４０が拡大されている場合には、当該拡大に応じて画像４０の情報の量が増大するように画像４０の内容が変更されてもよい。 When step S206 is completed, the CPU 11 determines whether or not the contents of the image 40 have been selected as the item to be adjusted (step S207). When it is determined that the contents of the image 40 have been selected as the item to be adjusted ("YES" in step S207), the CPU 11 replaces the image data to be supplied to the projection unit 14 to change the contents of the image 40 to be projected (step S208). In step S208, if the image 40 has been reduced in step S206, the contents of the image 40 are changed so that the amount of information in the image 40 is reduced in accordance with the reduction. However, if the image 40 has been enlarged in step S206, the contents of the image 40 may be changed so that the amount of information in the image 40 is increased in accordance with the enlargement.

ステップＳ２０８が終了した場合、ステップＳ２０５において調整する項目として画像４０の大きさを選択していないと判別された場合（ステップＳ２０５で“ＮＯ”）、ステップＳ２０７において調整する項目として画像４０の内容を選択していないと判別された場合（ステップＳ２０７で“ＮＯ”）、又は、ステップＳ２０１において適正条件を満たすと判別された場合には（ステップＳ２０１で“ＹＥＳ”）、ＣＰＵ１１は、画像４０の輝度が、投影面２の周囲の明るさに応じた適正輝度未満であるか否かを判別する（ステップＳ２０９）。ここで、投影面２の周囲の明るさは、ステップＳ１０１で生成した明るさデータ１３３２から特定される。あるいは、ステップＳ２０９の実行時に明るさ情報を再取得して（明るさデータ１３３２を更新して）周囲の明るさを特定してもよい。また、画像４０の輝度は、ステップＳ１０５で取得した撮影画像から特定することができる。あるいは、ステップＳ２０９の実行時に撮影画像を再取得して画像４０の輝度を特定してもよい。特に、ステップＳ２０６において画像４０の大きさが調整され、これに伴って画像４０の輝度が変化している場合には、ステップＳ２０９の実行時に撮影画像を再取得して画像４０の輝度を特定することが好ましい。画像４０の輝度は、例えば、撮影画像の画素値（階調値）を輝度に換算する方法で特定することができる。輝度の換算に用いる画素値は、例えば、撮影画像のうち画像４０に対応する領域内の画素値の最大値を用いてもよい。画素値から輝度への換算は、画像４０の輝度の実測値に基づいて特定された輝度と画素値との対応関係が記録されているテーブルデータを参照する方法で行ってもよいし、上記の輝度と画素値との対応関係などに基づいて予め生成された換算式に従って算出する方法で行ってもよい。上記のテーブルデータ及び換算式は、モニタ装置３０の撮像部３４の感度ごとに定められていてもよく、あるいは撮像部３４の感度の変更に応じて都度調整されてもよい。 When step S208 is completed, when it is determined that the size of the image 40 has not been selected as an item to be adjusted in step S205 ("NO" in step S205), when it is determined that the content of the image 40 has not been selected as an item to be adjusted in step S207 ("NO" in step S207), or when it is determined that the appropriate condition is satisfied in step S201 ("YES" in step S201), the CPU 11 determines whether the luminance of the image 40 is less than the appropriate luminance according to the brightness of the surroundings of the projection surface 2 (step S209). Here, the brightness of the surroundings of the projection surface 2 is specified from the brightness data 1332 generated in step S101. Alternatively, the brightness information may be reacquired (the brightness data 1332 may be updated) when step S209 is executed to specify the brightness of the surroundings. The luminance of the image 40 can also be specified from the captured image acquired in step S105. Alternatively, the captured image may be reacquired when step S209 is executed to specify the luminance of the image 40. In particular, when the size of the image 40 is adjusted in step S206 and the brightness of the image 40 changes accordingly, it is preferable to reacquire the captured image when performing step S209 to determine the brightness of the image 40. The brightness of the image 40 can be determined, for example, by converting the pixel values (gradation values) of the captured image to brightness. The pixel value used for the brightness conversion may be, for example, the maximum pixel value in the area of the captured image corresponding to the image 40. The pixel value may be converted to brightness by referring to table data in which the correspondence between the brightness and pixel value determined based on the actual measurement value of the brightness of the image 40 is recorded, or by calculating according to a conversion formula generated in advance based on the above-mentioned correspondence between the brightness and pixel value. The above-mentioned table data and conversion formula may be determined for each sensitivity of the imaging unit 34 of the monitor device 30, or may be adjusted each time the sensitivity of the imaging unit 34 is changed.

画像４０の輝度が、投影面２の周囲の明るさに応じた適正輝度未満であると判別された場合には（ステップＳ２０９で“ＹＥＳ”）、ＣＰＵ１１は、明るさデータ１３３２（明るさデータ１３３２から特定される周囲の明るさ）及び画像４０の輝度に基づいて、光源１４１の全光束、投影部１４の動作モード、画像４０の大きさ、及び画像４０の内容のうち、画像４０の輝度を適正輝度以上とするために調整する項目を選択する（ステップＳ２１０）。ここでは、調整対象の項目として１つの項目が選択されてもよいし、２以上の項目が選択されてもよい。ただし、４つの項目のうち画像の内容は、画像４０の大きさを変更する場合に、付随的に選択され得る。調整対象の項目は、画像４０の輝度、及び周囲の明るさに応じた適正輝度に基づいて、選択した項目の総合的な調整結果により画像４０の輝度が適正輝度以上となるように選択される。例えば、光源１４１の全光束の調整による画像４０の輝度の第１の変動量の予測と、投影部１４の動作モードの変更による画像４０の輝度の第２の変動量の予測と、画像４０の大きさの調整による画像４０の輝度の第３の変動量の予測と、に基づいて、画像４０の輝度が適正輝度以上となるような第１～第３の変動量の組み合わせを特定し、特定した組み合わせに対応する項目を、調整する項目として選択する。さらに一実施形態では、画像４０の内容に応じて輝度に関する調整項目を選択してもよい。例えば、画像に含まれる情報量の多さに係る所定の情報量条件が満たされているか否かに応じて調整項目を選択してもよい。ここで、情報量条件は、画像に含まれる文字の数が第１閾値以上である場合に満たされることとしてもよい。また、情報量条件は、画像の色数（又は、画像の階調数）が第２閾値以上である場合に満たされることとしてもよい。また、情報量条件は、画像に写真が含まれる場合に満たされることとしてもよい。また、情報量条件は、画像に含まれる文字の数が第１閾値以上であること、画像の色数が第２閾値以上であること、及び画像に写真が含まれること、のうちの２つ以上が成り立つ場合に満たされることとしてもよい。情報量条件が満たされている場合には、全光束の調整を優先的に選択し、情報量条件が満たされてない場合には、投影部１４の動作モードまたは、画像４０の大きさを選択してもよい。画像４０の内容に基づいて調整項目を選択する場合など、明るさデータ１３３２に基づかずに調整項目を選択する場合には、調整項目の選択後に、明るさデータ１３３２に基づいて、画像４０の輝度が適正輝度以上となるように調整項目の調整内容が決定される。また、明るさデータ１３３２に基づいて、画像４０の輝度が適正輝度以上となるように調整項目の調整内容を決定した後、さらに、画像４０の内容（情報量条件）に基づいて輝度に関する調整項目を選択してもよい。 If it is determined that the luminance of the image 40 is less than the appropriate luminance according to the brightness of the surroundings of the projection surface 2 ("YES" in step S209), the CPU 11 selects items to be adjusted from the total luminous flux of the light source 141, the operating mode of the projection unit 14, the size of the image 40, and the contents of the image 40 to make the luminance of the image 40 equal to or greater than the appropriate luminance based on the brightness data 1332 (the brightness of the surroundings identified from the brightness data 1332) and the luminance of the image 40 (step S210). Here, one item may be selected as the item to be adjusted, or two or more items may be selected. However, among the four items, the image contents may be selected incidentally when changing the size of the image 40. The items to be adjusted are selected based on the luminance of the image 40 and the appropriate luminance according to the brightness of the surroundings, so that the luminance of the image 40 is equal to or greater than the appropriate luminance as a result of the overall adjustment of the selected items. For example, based on a prediction of a first variation amount of the luminance of the image 40 due to adjustment of the total luminous flux of the light source 141, a prediction of a second variation amount of the luminance of the image 40 due to a change in the operation mode of the projection unit 14, and a prediction of a third variation amount of the luminance of the image 40 due to adjustment of the size of the image 40, a combination of the first to third variation amounts that makes the luminance of the image 40 equal to or greater than the appropriate luminance is specified, and an item corresponding to the specified combination is selected as an item to be adjusted. Furthermore, in one embodiment, an adjustment item related to the luminance may be selected according to the contents of the image 40. For example, an adjustment item may be selected according to whether or not a predetermined information amount condition related to the amount of information contained in the image is satisfied. Here, the information amount condition may be satisfied when the number of characters contained in the image is equal to or greater than a first threshold value. In addition, the information amount condition may be satisfied when the number of colors (or the number of gradations) of the image is equal to or greater than a second threshold value. In addition, the information amount condition may be satisfied when the image includes a photograph. The information amount condition may be satisfied when two or more of the following conditions are satisfied: the number of characters included in the image is equal to or greater than a first threshold, the number of colors in the image is equal to or greater than a second threshold, and the image includes a photograph. If the information amount condition is satisfied, the adjustment of the total luminous flux may be selected preferentially, and if the information amount condition is not satisfied, the operation mode of the projection unit 14 or the size of the image 40 may be selected. If the adjustment item is selected not based on the brightness data 1332, such as when selecting an adjustment item based on the content of the image 40, the adjustment content of the adjustment item is determined based on the brightness data 1332 after the adjustment item is selected so that the brightness of the image 40 is equal to or greater than the appropriate brightness. Furthermore, after the adjustment content of the adjustment item is determined based on the brightness data 1332 so that the brightness of the image 40 is equal to or greater than the appropriate brightness, an adjustment item related to brightness may be selected based on the content of the image 40 (information amount condition).

ＣＰＵ１１は、調整する項目として光源１４１の全光束を選択したか否かを判別する（ステップＳ２１１）。調整する項目として光源１４１の全光束を選択したと判別された場合には（ステップＳ２１１で“ＹＥＳ”）、ＣＰＵ１１は、光源１４１への供給電力（ＬＤ１４１１及びＬＥＤ１４１２に流す駆動電流）を変更して光源１４１の全光束を調整する（ステップＳ２１２）。ここでは、通常、供給電力を増大させて光源１４１の全光束を増大させるが、例えばステップＳ２１４及び／又はステップＳ２１６における調整により画像４０の輝度が過剰に高くなる場合等において、供給電力を減少させて光源１４１の全光束を減少させる調整を行ってもよい。 The CPU 11 determines whether or not the total luminous flux of the light source 141 has been selected as the item to be adjusted (step S211). If it is determined that the total luminous flux of the light source 141 has been selected as the item to be adjusted ("YES" in step S211), the CPU 11 adjusts the total luminous flux of the light source 141 by changing the power supplied to the light source 141 (the driving current passed through the LD 1411 and the LED 1412) (step S212). Here, the total luminous flux of the light source 141 is usually increased by increasing the supplied power, but in cases where the brightness of the image 40 becomes excessively high due to the adjustment in step S214 and/or step S216, for example, the supply power may be decreased to reduce the total luminous flux of the light source 141.

ステップＳ２１２が終了した場合、又は、ステップＳ２１１において、調整する項目として光源１４１の全光束を選択していないと判別された場合には（ステップＳ２１１で“ＮＯ”）、ＣＰＵ１１は、調整する項目として投影部１４の動作モードを選択したか否かを判別する（ステップＳ２１３）。調整する項目として投影部１４の動作モードを選択したと判別された場合には（ステップＳ２１３で“ＹＥＳ”）、ＣＰＵ１１は、投影部１４の動作モードを、色重視モードと輝度重視モードとの間で切り替える（ステップＳ２１４）。ここでは、通常、色重視モードから輝度重視モードへの切り替えが行われるが、例えば、投影調整処理の開始時点で輝度重視モードとなっており、かつ、ステップＳ２１２及び／又はステップＳ２１６における調整により画像４０の輝度が過剰に高くなる場合等において、輝度重視モードから色重視モードへの切り替えが行われてもよい。 When step S212 is completed, or when it is determined in step S211 that the total luminous flux of the light source 141 is not selected as an item to be adjusted ("NO" in step S211), the CPU 11 determines whether or not the operation mode of the projection unit 14 is selected as an item to be adjusted (step S213). When it is determined that the operation mode of the projection unit 14 is selected as an item to be adjusted ("YES" in step S213), the CPU 11 switches the operation mode of the projection unit 14 between the color-emphasis mode and the brightness-emphasis mode (step S214). Here, the color-emphasis mode is usually switched to the brightness-emphasis mode, but the brightness-emphasis mode may be switched to the color-emphasis mode, for example, when the brightness-emphasis mode is set at the start of the projection adjustment process and the brightness of the image 40 becomes excessively high due to the adjustment in step S212 and/or step S216.

なお、ステップＳ２１３では、ＣＰＵ１１は、ステップＳ２１２における光源１４１の全光束の調整によって適正輝度を満たすことができているか否かを判別し、全光束の調整のみでは適正輝度を満たすことができない場合（光源１４１の駆動電流値が上限に達しても適正輝度を満たすことができない場合）に“ＹＥＳ”に分岐させてステップＳ２１４を実行してもよい。この場合に実行されるステップＳ２１４では、画像４０の輝度が増大するように、投影部１４の動作モードが色重視モードから輝度重視モードに切り替えられる。ステップＳ２１３では、全光束の調整によって適正輝度を満たすことができているか否かの判別のために、撮像部３４により画像４０を撮影させて、撮影画像から画像４０の輝度を特定してもよい。 In step S213, the CPU 11 determines whether the appropriate brightness can be met by adjusting the total luminous flux of the light source 141 in step S212, and if the appropriate brightness cannot be met by adjusting the total luminous flux alone (if the appropriate brightness cannot be met even if the drive current value of the light source 141 reaches the upper limit), the process may branch to "YES" and execute step S214. In this case, in step S214, the operation mode of the projection unit 14 is switched from the color-oriented mode to the brightness-oriented mode so that the brightness of the image 40 is increased. In step S213, in order to determine whether the appropriate brightness can be met by adjusting the total luminous flux, the image 40 may be captured by the imaging unit 34, and the brightness of the image 40 may be identified from the captured image.

ステップＳ２１４が終了した場合、又は、ステップＳ２１３において、調整する項目として投影部１４の動作モードを選択していないと判別された場合には（ステップＳ２１３で“ＮＯ”）、ＣＰＵ１１は、調整する項目として画像４０の大きさを選択したか否かを判別する（ステップＳ２１５）。調整する項目として画像４０の大きさを選択したと判別された場合には（ステップＳ２１５で“ＹＥＳ”）、ＣＰＵ１１は、ズームレンズ１４７の焦点距離を変更して画像４０の大きさを調整する（ステップＳ２１６）。また、ＣＰＵ１１は、投影部１４の光学系を調整して画像４０のフォーカスを合わせる。ステップＳ２１６では、通常、画像４０の輝度が増大するように画像４０を縮小させるが、例えばステップＳ２１２及び／又はステップＳ２１４における調整により画像４０の輝度が過剰に高くなる場合等において、画像４０の輝度が減少するように画像４０を拡大させてもよい。 When step S214 is completed, or when it is determined in step S213 that the operation mode of the projection unit 14 is not selected as an item to be adjusted ("NO" in step S213), the CPU 11 determines whether or not the size of the image 40 is selected as an item to be adjusted (step S215). When it is determined that the size of the image 40 is selected as an item to be adjusted ("YES" in step S215), the CPU 11 changes the focal length of the zoom lens 147 to adjust the size of the image 40 (step S216). The CPU 11 also adjusts the optical system of the projection unit 14 to focus the image 40. In step S216, the image 40 is usually reduced so that the brightness of the image 40 is increased, but the image 40 may be enlarged so that the brightness of the image 40 is reduced, for example, when the brightness of the image 40 becomes excessively high due to the adjustment in step S212 and/or step S214.

なお、ステップＳ２１５では、ＣＰＵ１１は、以下の第１の場合～第３の場合のいずれかに該当するか否かを判別し、第１の場合～第３の場合のいずれかに該当すると判別された場合に“ＹＥＳ”に分岐させてステップＳ２１６を実行してもよい。第１の場合は、ステップＳ２１０において調整する項目として光源１４１の全光束が選択され、かつ投影部１４の動作モードが選択されていない場合において、ステップＳ２１２における光源１４１の全光束の調整のみでは適正輝度を満たすことができていない場合である。第２の場合は、ステップＳ２１０において調整する項目として光源１４１の全光束が選択されておらず、かつ投影部１４の動作モードが選択されている場合において、ステップＳ２１４における投影部１４の動作モードの変更のみでは適正輝度を満たすことができていない場合である。第３の場合は、ステップＳ２１０において調整する項目として光源１４１の全光束及び投影部１４の動作モードが選択されている場合において、ステップＳ２１２における光源１４１の全光束の調整、及びステップＳ２１４における投影部１４の動作モードの変更では適正輝度を満たすことができていない場合である。これらの場合に実行されるステップＳ２１６では、画像４０の輝度が増大するように、画像４０が縮小される。ステップＳ２１５では、適正輝度を満たすことができているか否かの判別のために、撮像部３４により画像４０を撮影させて、撮影画像から画像４０の輝度を特定してもよい。 In step S215, the CPU 11 may determine whether the item falls under any of the following first to third cases, and may branch to "YES" to execute step S216 if it is determined that the item falls under any of the first to third cases. In the first case, when the total luminous flux of the light source 141 is selected as the item to be adjusted in step S210 and the operation mode of the projection unit 14 is not selected, the appropriate brightness cannot be satisfied only by adjusting the total luminous flux of the light source 141 in step S212. In the second case, when the total luminous flux of the light source 141 is not selected as the item to be adjusted in step S210 and the operation mode of the projection unit 14 is selected, the appropriate brightness cannot be satisfied only by changing the operation mode of the projection unit 14 in step S214. In the third case, when the total luminous flux of the light source 141 and the operation mode of the projection unit 14 are selected as the items to be adjusted in step S210, the appropriate brightness cannot be satisfied by adjusting the total luminous flux of the light source 141 in step S212 and changing the operation mode of the projection unit 14 in step S214. In these cases, step S216 is performed to reduce the size of the image 40 so that the brightness of the image 40 is increased. In step S215, in order to determine whether the appropriate brightness is satisfied, the image 40 may be captured by the imaging unit 34, and the brightness of the image 40 may be determined from the captured image.

ステップＳ２１６が終了した場合には、ＣＰＵ１１は、調整する項目として画像４０の内容を選択したか否かを判別する（ステップＳ２１７）。調整する項目として画像４０の内容を選択したと判別された場合には（ステップＳ２１７で“ＹＥＳ”）、ＣＰＵ１１は、投影部１４に供給する画像データを差し替えて、投影する画像４０の内容を変更する（ステップＳ２１８）。ステップＳ２１８では、ステップＳ２１６において画像４０が縮小されている場合に、当該縮小に応じて画像４０の情報の量が低減するように画像４０の内容が変更される。ただし、ステップＳ２１６において画像４０が拡大されている場合には、当該拡大に応じて画像４０の情報の量が増大するように画像４０の内容が変更されてもよい。 When step S216 is completed, the CPU 11 determines whether or not the contents of the image 40 have been selected as the item to be adjusted (step S217). When it is determined that the contents of the image 40 have been selected as the item to be adjusted ("YES" in step S217), the CPU 11 replaces the image data to be supplied to the projection unit 14 to change the contents of the image 40 to be projected (step S218). In step S218, if the image 40 has been reduced in step S216, the contents of the image 40 are changed so that the amount of information in the image 40 is reduced in accordance with the reduction. However, if the image 40 has been enlarged in step S216, the contents of the image 40 may be changed so that the amount of information in the image 40 is increased in accordance with the enlargement.

ステップＳ２１８が終了した場合、ステップＳ２１５において調整する項目として画像４０の大きさを選択していないと判別された場合（ステップＳ２１５で“ＮＯ”）、ステップＳ２１７において調整する項目として画像４０の内容を選択していないと判別された場合（ステップＳ２１７で“ＮＯ”）、又は、ステップＳ２０９において画像４０の輝度が適正輝度以上であると判別された場合には（ステップＳ２０９で“ＮＯ”）、ＣＰＵ１１は、投影調整処理を終了させて、処理を画像投影処理に戻す。投影調整処理が終了した段階では、画像４０と人Ｐとの位置関係が適正条件を満たし、画像４０の輝度が適正輝度以上となっている。 When step S218 is completed, when it is determined in step S215 that the size of image 40 has not been selected as an item to be adjusted ("NO" in step S215), when it is determined in step S217 that the content of image 40 has not been selected as an item to be adjusted ("NO" in step S217), or when it is determined in step S209 that the brightness of image 40 is equal to or greater than the appropriate brightness ("NO" in step S209), CPU 11 ends the projection adjustment process and returns the process to the image projection process. When the projection adjustment process is completed, the positional relationship between image 40 and person P satisfies the appropriate condition, and the brightness of image 40 is equal to or greater than the appropriate brightness.

なお、ステップＳ２０３～Ｓ２０８における画像４０の投影位置、画像４０の大きさ、及び画像４０の内容の調整順序は、図１４に示した順序に限られず、適宜入れ替えてもよいし、２以上の項目の調整を並行して行ってもよい。
また、ステップＳ２１１～Ｓ２１８における光源１４１の全光束、投影部１４の動作モード、画像４０の大きさ、及び画像４０の内容の調整順序は、図１４に示した順序に限られず、適宜入れ替えてもよいし、２以上の項目の調整を並行して行ってもよい。
上記の投影調整処理によれば、例えば、画像４０の投影位置を変更せずに画像４０の大きさを変更する制御が行われ得る。また、画像４０の大きさを調整することで画像４０の輝度を調整する制御が行われ得る。 It should be noted that the order of adjustment of the projection position of image 40, the size of image 40, and the contents of image 40 in steps S203 to S208 is not limited to the order shown in FIG. 14, and may be rearranged as appropriate, or adjustment of two or more items may be performed in parallel.
In addition, the order of adjustment of the total luminous flux of the light source 141, the operating mode of the projection unit 14, the size of the image 40, and the contents of the image 40 in steps S211 to S218 is not limited to the order shown in FIG. 14, and may be changed as appropriate, or adjustment of two or more items may be performed in parallel.
According to the above-described projection adjustment process, for example, control can be performed to change the size of the image 40 without changing the projection position of the image 40. Also, control can be performed to adjust the brightness of the image 40 by adjusting the size of the image 40.

図１３に戻り、投影調整処理（ステップＳ１０７）が終了すると、ＣＰＵ１１は、画像４０の投影を終了するか否かを判別する（ステップＳ１０８）。ここでは、ＣＰＵ１１は、例えば投影システム１の操作者から画像４０の投影を終了する指示がなされている場合などにおいて、画像４０の投影を終了すると判別する。ＣＰＵ１１は、画像４０の投影を終了しないと判別した場合には（ステップＳ１０８で“ＮＯ”）、処理をステップＳ１０４に戻し、画像４０の投影を終了すると判別した場合には（ステップＳ１０８で“ＹＥＳ”）、画像投影処理を終了させる。 Returning to FIG. 13, when the projection adjustment process (step S107) is completed, the CPU 11 determines whether or not to end the projection of the image 40 (step S108). Here, the CPU 11 determines to end the projection of the image 40 when, for example, an instruction to end the projection of the image 40 is given by the operator of the projection system 1. If the CPU 11 determines not to end the projection of the image 40 ("NO" in step S108), the process returns to step S104, and if the CPU 11 determines to end the projection of the image 40 ("YES" in step S108), the image projection process ends.

なお、図１４に示した投影調整処理は、一例であり、上記で説明した画像４０の投影態様の種々の調整方法に応じて適宜変更可能である。例えば、投影調整処理において、画像４０を構成する光の進行方向と、人Ｐの顔に向かう方向と、がなす最小の角度ａが増大するように、画像４０の投影位置及び大きさの少なくとも一方を調整するステップを設けてもよい。一実施形態では、投影調整処理において、移動体情報に基づく画像の投影態様の調整（ステップＳ２０１～ステップＳ２０８）のみを実施してもよく、明るさ情報（及び／又は画像４０の内容）に基づく画像の投影態様の調整（ステップＳ２０９～Ｓ２１８）のみを実施してもよい。さらに一実施形態では、明るさ情報（及び／又は画像４０の内容）に基づく画像の投影態様の調整を、移動体情報に基づく画像の投影態様の調整の前に実行してもよい。 The projection adjustment process shown in FIG. 14 is an example, and can be appropriately changed according to various adjustment methods of the projection mode of the image 40 described above. For example, in the projection adjustment process, a step of adjusting at least one of the projection position and size of the image 40 may be provided so that the minimum angle a between the traveling direction of the light constituting the image 40 and the direction toward the face of the person P is increased. In one embodiment, in the projection adjustment process, only the adjustment of the projection mode of the image based on the moving body information (steps S201 to S208) may be performed, or only the adjustment of the projection mode of the image based on the brightness information (and/or the contents of the image 40) (steps S209 to S218) may be performed. Furthermore, in one embodiment, the adjustment of the projection mode of the image based on the brightness information (and/or the contents of the image 40) may be performed before the adjustment of the projection mode of the image based on the moving body information.

（変形例１）
次に、上記実施形態の変形例１について説明する。本変形例は、移動体としての人Ｐの移動方向を推定して画像の投影位置を調整する点で上記実施形態と異なる。以下では、上記実施形態との相違点について説明し、上記実施形態と共通する点については説明を省略する。 (Variation 1)
Next, a first modified example of the above embodiment will be described. This modified example differs from the above embodiment in that the projection position of the image is adjusted by estimating the moving direction of a person P as a moving body. Below, the differences from the above embodiment will be described, and the description of the points in common with the above embodiment will be omitted.

図１５は、変形例１に係る投影システム１の動作を説明する図である。
本変形例では、異なる２以上の時点においてモニタ装置３０による撮影が行われ、撮影が行われた時点ごとに、撮影画像に基づいて、投影面２の周囲における移動体としての人Ｐの位置、人Ｐの顔の向きを含む移動体情報が取得されて移動体データ１３３１に記憶される。そして、各時点における人Ｐの位置の変化に基づいて、人Ｐの移動方向が推定され、推定された移動方向に基づいて画像の投影位置が調整される。人Ｐの移動方向の推定には、互いに異なる位置に設けられた複数のモニタ装置３０による撮影画像が用いられてもよい。 FIG. 15 is a diagram illustrating the operation of the projection system 1 according to the first modification.
In this modification, images are captured by the monitor device 30 at two or more different time points, and for each time point captured, moving body information including the position of the person P as a moving body around the projection surface 2 and the facial orientation of the person P is acquired based on the captured image and stored in the moving body data 1331. Then, based on the change in the position of the person P at each time point, the moving direction of the person P is estimated, and the projection position of the image is adjusted based on the estimated moving direction. Images captured by multiple monitor devices 30 provided at different positions may be used to estimate the moving direction of the person P.

図１５に示す例では、時点ｔ１における撮影画像に基づいて４人の人Ｐ１～Ｐ４の位置及び顔の向きが特定され、時点ｔ１よりも後の時点ｔ２における撮影画像に基づいて人Ｐ１～Ｐ４の位置及び顔の向きが特定されて、それぞれの特定結果が移動体データ１３３１に記憶される。また、人Ｐ１～Ｐ４の各々について、時点ｔ１と時点ｔ２との間での位置の変化に基づいて推定の移動方向を表す個別予測線（不図示）が導出される。個別予測線は、例えば、ある人Ｐの時点ｔ１における第１位置と、時点ｔ２における第２位置とを通り、第１位置から第２位置に向かう方向に延長した線とすることができる。４人の個別予測線が導出されると、当該４人の個別予測線を代表する１つの予測線Ｌが導出される。予測線Ｌは、例えば、各個別予測線（本実施形態では、４つの個別予測線）の位置を平均することで導出してもよい。あるいは、時点ｔ１における複数の人Ｐ（本実施形態では、人Ｐ１～Ｐ４）の位置を代表する位置と、時点ｔ２における複数の人Ｐ（本実施形態では、人Ｐ１～Ｐ４）の位置を代表する位置と、を結ぶ線を予測線Ｌとしてもよい。そして、導出された予測線Ｌ上の位置に画像５０が投影されるように、画像５０の投影位置が調整される。ここで、予測線Ｌ上の位置とは、鉛直方向（床面の鉛直方向）から見て予測線Ｌと重なる位置を指す。また、予測線Ｌ上の位置に画像５０が投影される、とは、鉛直方向から見て、予測線Ｌと、画像５０の投影範囲とが交差することをいう。なお、図１５に示す例では、２つの時点ｔ１、ｔ２の間の位置の変化を用いたが、３つ以上の時点における人Ｐの位置の変化に基づいて移動方向（個別予測線及び予測線Ｌ）を推定してもよい。この場合における個別予測線及び予測線Ｌは、曲線であってもよい。また、いずれか１人の個別予測線上の位置に画像５０が投影されるように画像５０の投影位置を調整してもよい。 In the example shown in FIG. 15, the positions and facial orientations of four people P1 to P4 are identified based on the image captured at time t1, and the positions and facial orientations of people P1 to P4 are identified based on the image captured at time t2, which is later than time t1, and the respective identification results are stored in the moving body data 1331. In addition, for each of people P1 to P4, an individual prediction line (not shown) representing an estimated movement direction is derived based on the change in position between time t1 and time t2. The individual prediction line can be, for example, a line passing through a first position of a certain person P at time t1 and a second position at time t2, and extending in a direction from the first position to the second position. When the individual prediction lines of the four people are derived, one prediction line L representing the individual prediction lines of the four people is derived. The prediction line L may be derived, for example, by averaging the positions of each individual prediction line (in this embodiment, four individual prediction lines). Alternatively, the predicted line L may be a line connecting a position representing the positions of the multiple people P (in this embodiment, people P1 to P4) at time t1 and a position representing the positions of the multiple people P (in this embodiment, people P1 to P4) at time t2. Then, the projection position of the image 50 is adjusted so that the image 50 is projected at a position on the derived predicted line L. Here, the position on the predicted line L refers to a position that overlaps with the predicted line L when viewed from the vertical direction (vertical direction of the floor surface). Moreover, the image 50 being projected at a position on the predicted line L means that the predicted line L intersects with the projection range of the image 50 when viewed from the vertical direction. In the example shown in FIG. 15, the change in position between two times t1 and t2 is used, but the movement direction (individual predicted line and predicted line L) may be estimated based on the change in the position of the person P at three or more times. In this case, the individual predicted line and predicted line L may be curved. Moreover, the projection position of the image 50 may be adjusted so that the image 50 is projected at a position on the individual predicted line of any one person.

また、撮影画像から特定された人Ｐの顔の向きに基づいて、画像５０が視認しやすくなるように、画像５０の投影位置が調整されてもよい。例えば、最新の撮影画像（図１５に示す例では、時点ｔ２における撮影画像）に基づいて、人Ｐの集団における先頭の人Ｐの顔の向き（先頭が複数人である場合には、当該複数人の平均の顔の向き）に基づいて画像５０の投影位置を調整してもよい。図１５に示す例では、集団の先頭に位置する人Ｐ１及び人Ｐ３の顔の向きが、予測線Ｌに対して若干左方を向いていることに基づいて、画像５０の中心が、予測線Ｌよりも左方に位置するように画像５０の投影位置が調整されている。なお、人Ｐの推定の移動方向に基づかずに、人Ｐの顔の向きのみに基づいて画像５０の投影位置を調整してもよい。 Also, the projection position of the image 50 may be adjusted based on the facial orientation of the person P identified from the captured image so that the image 50 is easily visible. For example, the projection position of the image 50 may be adjusted based on the facial orientation of the person P at the head of the group of people P (if there are multiple people at the head, the average facial orientation of the multiple people) based on the latest captured image (in the example shown in FIG. 15, the image captured at time t2). In the example shown in FIG. 15, the projection position of the image 50 is adjusted so that the center of the image 50 is located to the left of the predicted line L based on the facial orientation of the person P1 and person P3 at the head of the group being slightly to the left of the predicted line L. Note that the projection position of the image 50 may be adjusted based only on the facial orientation of the person P, not based on the estimated moving direction of the person P.

なお、最新の撮影画像から特定される人Ｐの顔の向きに代えて、異なる複数の時点での複数の撮影画像から特定される人Ｐの平均の顔の向きを用いてもよい。また、人Ｐの顔の向きに代えて、人Ｐの体の向き（例えば、両肩を結ぶ直線の法線方向）に基づいて画像５０の投影位置を調整してもよい。
また、人Ｐを所定の誘導方向に誘導するために画像５０を投影する場合には、人Ｐの顔の向きに基づいて調整された画像の投影位置を、さらに誘導方向にずらしてもよい。これにより、人Ｐに対し、直感的に分かりやすく誘導方向を認識させることができる。 Note that, instead of the facial orientation of person P identified from the latest captured image, an average facial orientation of person P identified from a plurality of captured images at different times may be used. Also, instead of the facial orientation of person P, the projection position of image 50 may be adjusted based on the body orientation of person P (for example, the normal direction of the line connecting both shoulders).
Furthermore, when the image 50 is projected to guide the person P in a predetermined guide direction, the projection position of the image adjusted based on the face direction of the person P may be further shifted toward the guide direction. This allows the person P to intuitively and easily recognize the guide direction.

図１６は、変形例１に係る投影調整処理の制御手順を示すフローチャートである。
変形例１に係る投影調整処理が開始されると、ＣＰＵ１１は、モニタ装置３０に、異なる２以上の時点で投影面２の周囲の撮影画像を撮影させる。そして、得られた複数の撮影画像から、各時点における移動体としての人Ｐの位置及び顔の向きを特定し、特定結果を移動体データ１３３１に記憶させる（ステップＳ３０１）。なお、投影調整処理の開始前から定期的にモニタ装置３０による撮影を実行させておき、ステップＳ３０１の開始時点において既に撮影されている複数の撮影画像に基づいて人Ｐの位置及び顔の向きを特定してもよい。 FIG. 16 is a flowchart showing a control procedure of the projection adjustment process according to the first modification.
When the projection adjustment process according to the first modification is started, the CPU 11 causes the monitor device 30 to capture images of the periphery of the projection surface 2 at two or more different points in time. Then, from the multiple captured images obtained, the position and facial orientation of the person P as a moving object at each point in time are identified, and the identification results are stored in the moving object data 1331 (step S301). Note that the monitor device 30 may be caused to periodically capture images before the start of the projection adjustment process, and the position and facial orientation of the person P may be identified based on the multiple captured images that have already been captured at the start of step S301.

ＣＰＵ１１は、移動体データ１３３１を参照し、異なる２以上の時点の各々における移動体としての人Ｐの位置から特定される人Ｐの位置の変化に基づいて、投影面２の周囲にいる人Ｐの移動方向を推定する（ステップＳ３０２）。ここでは、ＣＰＵ１１は、人Ｐの移動方向を表す個別予測線を導出し、人Ｐが集団を形成している場合には、当該集団に含まれる複数の人Ｐの個別予測線に基づいて集団の予測線Ｌを導出する。 The CPU 11 refers to the moving body data 1331 and estimates the movement direction of the person P around the projection surface 2 based on the change in the position of the person P identified from the position of the person P as a moving body at each of two or more different points in time (step S302). Here, the CPU 11 derives an individual prediction line representing the movement direction of the person P, and if the people P form a group, derives a group prediction line L based on the individual prediction lines of the multiple people P included in the group.

ＣＰＵ１１は、移動体データ１３３１から、移動方向を推定した人Ｐの顔の向きを取得する（ステップＳ３０３）。また、複数の人Ｐが集団を形成している場合には、ＣＰＵ１１は、上述の方法で、その複数の人Ｐの代表の顔の向きを導出する。 The CPU 11 obtains the face direction of the person P whose movement direction has been estimated from the moving body data 1331 (step S303). Furthermore, if multiple people P form a group, the CPU 11 derives the face direction of a representative person among the multiple people P using the method described above.

ＣＰＵ１１は、ステップＳ３０２で導出した予測線Ｌ上の位置に画像５０が投影されるように、画像５０の投影位置を調整する（ステップＳ３０４）。また、ＣＰＵ１１は、ステップＳ３０３で取得した人Ｐの顔の向きに基づいて画像５０の投影位置を調整する（ステップＳ３０５）。ステップＳ３０４、Ｓ３０５では、ＣＰＵ１１は、図１４に示す投影調整処理のステップＳ２０４と同様に、ミラー装置２０に制御信号を送信してミラー駆動部２４を動作させ、ミラー２５の角度を変更することで、画像５０の投影位置を調整する。また、ＣＰＵ１１は、投影部１４の光学系を調整して画像５０のフォーカスを合わせる。なお、ステップＳ３０４、Ｓ３０５の調整は必ずしも別個に行う必要はなく、予測線Ｌ及び顔の向きに基づいて、ステップＳ３０４、Ｓ３０５の調整を一括して行ってもよい。 The CPU 11 adjusts the projection position of the image 50 so that the image 50 is projected at a position on the predicted line L derived in step S302 (step S304). The CPU 11 also adjusts the projection position of the image 50 based on the face direction of the person P acquired in step S303 (step S305). In steps S304 and S305, the CPU 11 sends a control signal to the mirror device 20 to operate the mirror driver 24 and change the angle of the mirror 25, as in step S204 of the projection adjustment process shown in FIG. 14, thereby adjusting the projection position of the image 50. The CPU 11 also adjusts the optical system of the projection unit 14 to focus the image 50. The adjustments in steps S304 and S305 do not necessarily need to be performed separately, and may be performed together based on the predicted line L and the face direction.

なお、ステップＳ３０４、Ｓ３０５では、画像５０の投影位置の調整に加えて、画像５０の向きを調整してもよい。また、図１４に示す投影調整処理のステップＳ２０６と同様に、ズームレンズ１４７の焦点距離を変更して画像５０の大きさを調整してもよい。また、図１４に示す投影調整処理のステップＳ２０８と同様に、投影部１４に供給する画像データを差し替えて、投影する画像５０の内容を変更してもよい。 In addition to adjusting the projection position of image 50, in steps S304 and S305, the orientation of image 50 may be adjusted. Also, similar to step S206 of the projection adjustment process shown in FIG. 14, the focal length of zoom lens 147 may be changed to adjust the size of image 50. Also, similar to step S208 of the projection adjustment process shown in FIG. 14, the image data supplied to projection unit 14 may be replaced to change the content of image 50 to be projected.

ステップＳ３０５の調整が終了すると、ＣＰＵ１１は、図１４に示す投影調整処理のステップＳ２０９～Ｓ２１８を実行する（ステップＳ３０６）。すなわち、ＣＰＵ１１は、画像５０の輝度と周囲の明るさとの関係（及び／又は画像４０の内容）に応じて、光源１４１の全光束の調整（ステップＳ２１２）、投影部１４の動作モードの切り替え（ステップＳ２１４）、ズームレンズ１４７の焦点距離を変更することによる画像５０の大きさの調整（ステップＳ２１６）、及び画像５０の内容の変更（ステップＳ２１８）を行う。
ステップＳ３０６が終了すると、ＣＰＵ１１は、投影調整処理を終了させる。 After completing the adjustment in step S305, the CPU 11 executes steps S209 to S218 of the projection adjustment process shown in Fig. 14 (step S306). That is, the CPU 11 adjusts the total luminous flux of the light source 141 (step S212), switches the operation mode of the projection unit 14 (step S214), adjusts the size of the image 50 by changing the focal length of the zoom lens 147 (step S216), and changes the content of the image 50 (step S218) in accordance with the relationship between the luminance of the image 50 and the brightness of the surroundings (and/or the content of the image 40).
When step S306 ends, the CPU 11 ends the projection adjustment process.

（変形例２）
次に、上記実施形態の変形例２について説明する。本変形例は、移動体としての人Ｐの位置及び向き、並びに画像を投影する時刻に基づいて画像の内容、投影位置、及び向きのうちの少なくとも１つを調整する点で上記実施形態と異なる。以下では、上記実施形態との相違点について説明し、上記実施形態と共通する点については説明を省略する。変形例２は、変形例１と組み合わせてもよい。 (Variation 2)
Next, a second modification of the above embodiment will be described. This modification differs from the above embodiment in that at least one of the content, projection position, and orientation of the image is adjusted based on the position and orientation of the person P as a moving body and the time when the image is projected. Below, differences from the above embodiment will be described, and explanations of points in common with the above embodiment will be omitted. Modification 2 may be combined with modification 1.

図１７及び図１８は、変形例２に係る投影システム１の動作を説明する図である。
本変形例では、モニタ装置３０による撮影画像に基づいて、投影面２の周囲における移動体としての人Ｐの位置、及び向きを含む移動体情報が取得されて移動体データ１３３１に記憶される。そして、取得された人Ｐの位置及び向きと、画像６０を投影する時刻と、に基づいて、その時刻における適切な内容の画像６０が、人Ｐの位置及び向きに応じた位置に投影される。時刻は、各種公知の方法により取得することができる。例えば、プロジェクタ１０に、クロック信号を分周した所定周波数の信号を計数して現在日時を計数、保持する計時回路を設け、ＣＰＵ１１が、この計時回路から時刻を取得できるようにしてもよい。 17 and 18 are diagrams illustrating the operation of the projection system 1 according to the second modification.
In this modification, based on an image captured by the monitor device 30, moving body information including the position and orientation of the person P as a moving body around the projection surface 2 is acquired and stored in the moving body data 1331. Then, based on the acquired position and orientation of the person P and the time at which the image 60 is projected, the image 60 with appropriate content at that time is projected at a position according to the position and orientation of the person P. The time can be acquired by various known methods. For example, the projector 10 may be provided with a clock circuit that counts a signal of a predetermined frequency obtained by dividing a clock signal to count and hold the current date and time, and the CPU 11 may be able to acquire the time from the clock circuit.

例えば、図１７は、あるイベントが開始される前の時刻Ｔ１において、当該イベントに参加するためにイベントの会場に向かう複数の人Ｐが通路７１を移動している状況を表している。イベントの会場は、通路７１の突き当りを左折して通路７２を進んだ先にあるものとする。このような状況において、ＣＰＵ１１は、複数の人Ｐの位置及び向きに基づいて、複数の人Ｐの前方の床面（投影面２）に画像６０を投影させる。また、ＣＰＵ１１は、画像６０を投影する時刻Ｔ１が、イベントの開始前の時刻であることに基づいて、複数の人Ｐをイベントの会場に誘導する内容の画像６０（ここでは、通路７２の方に左折することを促す画像）を投影させる。 For example, FIG. 17 shows a situation where, at time T1 before a certain event starts, multiple people P are moving down passage 71 toward the event venue to participate in the event. The event venue is located at the end of passage 71, after turning left and proceeding down passage 72. In this situation, CPU 11 projects image 60 onto the floor surface (projection surface 2) in front of the multiple people P based on the positions and orientations of the multiple people P. Also, CPU 11 projects image 60 with content guiding the multiple people P to the event venue (here, an image encouraging them to turn left toward passage 72) based on the fact that time T1 at which image 60 is projected is before the start of the event.

一方、図１８は、上記のイベントが終了した後の時刻Ｔ２において、当該イベントの会場から退出して施設の出口に向かう複数の人Ｐが通路７２を移動している状況を表している。施設の出口は、通路７２を右折して通路７１に入り、通路７１を進んだ先にあるものとする。このような状況において、ＣＰＵ１１は、複数の人Ｐの位置及び向きに基づいて、複数の人Ｐの前方に画像６０を投影させる。すなわち、ＣＰＵ１１は、画像６０の投影位置を、図１７に示す通路７１の前方の床面から、図１８に示す通路７２の前方の床面に変更し、画像６０の向きを、図１７に示す向きから時計回りに９０度回転させる。また、ＣＰＵ１１は、画像６０を投影する時刻Ｔ２が、イベントが終了した後の時刻であることに基づいて、複数の人Ｐを出口に誘導する内容の画像６０（ここでは、通路７１の方に右折することを促す画像）を投影させる。 On the other hand, FIG. 18 shows a situation where, at time T2 after the event ends, multiple people P are moving through passage 72 to leave the venue of the event and head toward the exit of the facility. The exit of the facility is located at the end of passage 71, which the people turn right at passage 72. In this situation, the CPU 11 projects an image 60 in front of the multiple people P based on the positions and orientations of the multiple people P. That is, the CPU 11 changes the projection position of the image 60 from the floor surface in front of passage 71 shown in FIG. 17 to the floor surface in front of passage 72 shown in FIG. 18, and rotates the orientation of the image 60 by 90 degrees clockwise from the orientation shown in FIG. 17. In addition, the CPU 11 projects an image 60 (here, an image encouraging the multiple people P to turn right toward passage 71) with content guiding the multiple people P to the exit, based on the fact that time T2 at which the image 60 is projected is after the event ends.

図１９は、変形例２に係る投影調整処理の制御手順を示すフローチャートである。
変形例２に係る投影調整処理が開始されると、ＣＰＵ１１は、移動体データ１３３１から、投影面２の周囲にいる移動体としての人Ｐの位置及び向きを取得する（ステップＳ４０１）。人Ｐが集団を形成している場合には、当該集団に含まれる複数の人Ｐの平均の位置及び向きを導出してもよい。また、ＣＰＵ１１は、現在時刻を取得する（ステップＳ４０２）。 FIG. 19 is a flowchart showing a control procedure of the projection adjustment process according to the second modification.
When the projection adjustment process according to the second modification is started, the CPU 11 acquires the position and orientation of a person P as a moving object around the projection surface 2 from the moving object data 1331 (step S401). When the people P form a group, the average position and orientation of the people P included in the group may be derived. The CPU 11 also acquires the current time (step S402).

ＣＰＵ１１は、取得された移動体としての人Ｐの位置、向き、及び時刻に基づいて、画像６０の投影位置、向き及び内容のうち少なくとも１つを調整する（ステップＳ４０３）。画像６０の投影位置を調整する場合には、ＣＰＵ１１は、図１４に示す投影調整処理のステップＳ２０４と同様に、ミラー装置２０に制御信号を送信してミラー駆動部２４を動作させ、ミラー２５の角度を変更することで、画像６０の投影位置を調整する。また、画像６０の向きは、例えば、画像６０の画像データを、画像６０の向きの変更量（例えば、９０°）に応じて回転変換する画像処理を実行することで調整してもよい。あるいは、プロジェクタ１０及びミラー２５を、取付対象（本実施形態では、天井）に対して回転可能な構成とし、画像６０の向きの変更量に応じた角度だけプロジェクタ１０及びミラー２５を回転させることで画像６０の向きを調整してもよい。また、ＣＰＵ１１は、投影部１４の光学系を調整して画像６０のフォーカスを合わせる。また、画像６０の内容を変更する場合には、ＣＰＵ１１は、図１４に示す投影調整処理のステップＳ２０８と同様に、投影部１４に供給する画像データを差し替えて、投影する画像６０の内容を変更する。 The CPU 11 adjusts at least one of the projection position, orientation, and content of the image 60 based on the acquired position, orientation, and time of the person P as a moving body (step S403). When adjusting the projection position of the image 60, the CPU 11 sends a control signal to the mirror device 20 to operate the mirror driver 24 and change the angle of the mirror 25, as in step S204 of the projection adjustment process shown in FIG. 14, to adjust the projection position of the image 60. The orientation of the image 60 may also be adjusted, for example, by executing image processing that rotates and converts the image data of the image 60 according to the change amount of the orientation of the image 60 (for example, 90°). Alternatively, the projector 10 and the mirror 25 may be configured to be rotatable with respect to the mounting target (the ceiling in this embodiment), and the orientation of the image 60 may be adjusted by rotating the projector 10 and the mirror 25 by an angle according to the change amount of the orientation of the image 60. The CPU 11 also adjusts the optical system of the projection unit 14 to focus the image 60. Furthermore, when changing the content of the image 60, the CPU 11 replaces the image data supplied to the projection unit 14 to change the content of the image 60 to be projected, similar to step S208 of the projection adjustment process shown in FIG. 14.

ステップＳ４０３の調整が終了すると、ＣＰＵ１１は、図１４に示す投影調整処理のステップＳ２０９～Ｓ２１８を実行する（ステップＳ４０４）。すなわち、ＣＰＵ１１は、画像６０の輝度と周囲の明るさとの関係（及び／又は画像４０の内容）に応じて、光源１４１の全光束の調整（ステップＳ２１２）、投影部１４の動作モードの切り替え（ステップＳ２１４）、ズームレンズ１４７の焦点距離を変更することによる画像６０の大きさの調整（ステップＳ２１６）、及び画像６０の内容の変更（ステップＳ２１８）を行う。
ステップＳ４０４が終了すると、ＣＰＵ１１は、投影調整処理を終了させる。 After completing the adjustment in step S403, the CPU 11 executes steps S209 to S218 of the projection adjustment process shown in Fig. 14 (step S404). That is, the CPU 11 adjusts the total luminous flux of the light source 141 (step S212), switches the operation mode of the projection unit 14 (step S214), adjusts the size of the image 60 by changing the focal length of the zoom lens 147 (step S216), and changes the content of the image 60 (step S218) in accordance with the relationship between the luminance of the image 60 and the brightness of the surroundings (and/or the content of the image 40).
When step S404 ends, the CPU 11 ends the projection adjustment process.

なお、図１６及び図１９に示した投影調整処理は、一例である。
例えば、図１６において、明るさ情報（及び／または画像４０の内容）に基づく画像の投影態様の調整（ステップＳ３０６）を、ステップＳ３０１～Ｓ３０５の前に実行してもよく、テップＳ３０１～Ｓ３０５のみを実行してもよい。また、図１６の投影調整処理において、図１４のステップＳ２０１～Ｓ２０８のうち少なくとも一部の処理を併せて実行してもよい。一例を挙げると、画像４０と人Ｐとの位置関係（人Ｐの現在の位置に基づく位置関係、又は推定した移動方向における人Ｐの予測の位置に基づく位置関係）が適正条件を満たさないと判別された場合に（ステップＳ２０１で“ＮＯ”）、ミラー２５の角度の変更により、画像４０と人Ｐとの最短距離（現在の位置に基づく最短距離、又は上記の予測の位置に基づく最短距離）が増大するように画像４０の投影位置を調整する処理（ステップＳ２０４）、及び、画像４０と人Ｐとの最短距離（現在の位置に基づく最短距離、又は上記の予測の位置に基づく最短距離）が増大するように画像４０の大きさを調整する処理（ステップＳ２０６）の少なくとも一方を行ってもよい。
また、図１９において、明るさ情報（及び／または画像４０の内容）に基づく画像の投影態様の調整（ステップＳ４０４）を、ステップＳ４０１～Ｓ４０３の前に実行してもよく、テップＳ４０１～Ｓ４０３のみを実行してもよい。また、図１９の投影調整処理において、図１４のステップＳ２０１～Ｓ２０８のうち少なくとも一部の処理を併せて実行してもよい。一例を挙げると、画像４０と人Ｐとの位置関係が適正条件を満たさないと判別された場合に（ステップＳ２０１で“ＮＯ”）、ミラー２５の角度の変更により、画像４０と人Ｐとの最短距離が増大するように画像４０の投影位置を調整する処理（ステップＳ２０４）、及び、画像４０と人Ｐとの最短距離が増大するように画像４０の大きさを調整する処理（ステップＳ２０６）の少なくとも一方を行ってもよい。 The projection adjustment process shown in FIGS. 16 and 19 is just an example.
For example, in Fig. 16, adjustment of the projection mode of the image based on the brightness information (and/or the contents of the image 40) (step S306) may be performed before steps S301 to S305, or only steps S301 to S305 may be performed. Also, in the projection adjustment process in Fig. 16, at least a part of the processes in steps S201 to S208 in Fig. 14 may be performed together. As an example, when it is determined that the positional relationship between the image 40 and the person P (the positional relationship based on the current position of the person P, or the positional relationship based on the predicted position of the person P in the estimated direction of movement) does not satisfy the appropriate conditions ("NO" in step S201), at least one of the following processes may be performed: a process of adjusting the projection position of the image 40 so that the shortest distance between the image 40 and the person P (the shortest distance based on the current position, or the shortest distance based on the above-mentioned predicted position) is increased by changing the angle of the mirror 25 (step S204); and a process of adjusting the size of the image 40 so that the shortest distance between the image 40 and the person P (the shortest distance based on the current position, or the shortest distance based on the above-mentioned predicted position) is increased (step S206).
In addition, in Fig. 19, the adjustment of the projection mode of the image based on the brightness information (and/or the contents of the image 40) (step S404) may be performed before steps S401 to S403, or only steps S401 to S403 may be performed. In addition, in the projection adjustment process of Fig. 19, at least a part of the processes of steps S201 to S208 of Fig. 14 may be performed together. As an example, when it is determined that the positional relationship between the image 40 and the person P does not satisfy the appropriate condition ("NO" in step S201), at least one of the processes of adjusting the projection position of the image 40 so that the shortest distance between the image 40 and the person P increases by changing the angle of the mirror 25 (step S204) and adjusting the size of the image 40 so that the shortest distance between the image 40 and the person P increases (step S206) may be performed.

＜効果＞
以上のように、本実施形態に係る投影システム１は、光源１４１を有し、投影面２に画像４０を投影する投影部１４と、処理部としてのＣＰＵ１１と、を備え、ＣＰＵ１１は、投影面２の周囲の明るさに係る明るさデータ１３３２（明るさ情報）を取得し、光源１４１の全光束、画像４０の色域、及び画像４０の大きさのうち少なくとも１つの項目を選択し、明るさデータ１３３２に基づいて、選択された項目を調整する。これにより、投影面２の周囲の明るさに応じて画像４０の投影態様を柔軟に調整することができる。よって、より視認しやすい態様で画像４０を投影することができ、画像４０の投影によってより分かりやすく情報を伝えることができる。 ＜Effects＞
As described above, the projection system 1 according to the present embodiment includes the projection unit 14 having the light source 141 and projecting the image 40 onto the projection surface 2, and the CPU 11 as a processing unit, and the CPU 11 acquires brightness data 1332 (brightness information) related to the brightness of the surroundings of the projection surface 2, selects at least one item from the total luminous flux of the light source 141, the color gamut of the image 40, and the size of the image 40, and adjusts the selected item based on the brightness data 1332. This makes it possible to flexibly adjust the projection mode of the image 40 according to the brightness of the surroundings of the projection surface 2. Therefore, the image 40 can be projected in a more easily visible manner, and information can be conveyed more clearly by the projection of the image 40.

また、ＣＰＵ１１は、明るさデータ１３３２から特定される投影面２の周囲の明るさが増大するに従って画像４０の輝度が高くなるように、光源１４１の全光束、画像４０の色域、及び画像４０の大きさのうち少なくとも１つの項目を選択し、選択された項目を調整する。これにより、投影面２の周囲が明るくなることによって画像４０を視認性が低下する問題を生じにくくすることができる。 The CPU 11 also selects at least one of the total luminous flux of the light source 141, the color gamut of the image 40, and the size of the image 40, and adjusts the selected item so that the luminance of the image 40 increases as the brightness of the surroundings of the projection surface 2 specified from the brightness data 1332 increases. This makes it possible to prevent the problem of reduced visibility of the image 40 caused by the surroundings of the projection surface 2 becoming brighter.

また、投影部１４は、光源１４１が出力する互いに異なる３色の光の組み合わせを用いて画像４０を投影し、ＣＰＵ１１は、画像４０を投影中の任意の時点において３色の光のうち１色の光が用いられる色重視モード（第１モード）、及び、画像４０を投影中の少なくとも一部の期間において３色の光のうち２色の光が同時に用いられ、画像４０の輝度の最大値が色重視モードよりも高い輝度重視モード（第２モード）で投影部１４を動作させることが可能であり、選択された項目が画像４０の色域である場合に、投影部１４の動作モードを色重視モードと輝度重視モードとの間で切り替える制御により画像４０の色域を調整する。これにより、表示モードを切り替える簡易な制御で画像４０の色域を調整することができる。この色域の変動に応じて、色域の増大に応じて輝度が低減するように画像４０の輝度を調整することができる。よって、光源１４１の全光束（光源１４１への供給電力）を増大させずに画像４０の輝度を高めることができる。 The projection unit 14 projects the image 40 using a combination of three different colors of light output by the light source 141, and the CPU 11 can operate the projection unit 14 in a color-emphasis mode (first mode) in which one of the three colors of light is used at any time during the projection of the image 40, and a brightness-emphasis mode (second mode) in which two of the three colors of light are used simultaneously during at least a portion of the projection of the image 40, and the maximum brightness of the image 40 is higher than that in the color-emphasis mode. When the selected item is the color gamut of the image 40, the operation mode of the projection unit 14 is switched between the color-emphasis mode and the brightness-emphasis mode to adjust the color gamut of the image 40. This allows the color gamut of the image 40 to be adjusted by simple control for switching the display mode. In response to this change in the color gamut, the brightness of the image 40 can be adjusted so that the brightness decreases as the color gamut increases. Therefore, the brightness of the image 40 can be increased without increasing the total luminous flux of the light source 141 (the power supplied to the light source 141).

また、３色の光は、赤色光、緑色光及び青色光であり、輝度重視モードで投影部１４が動作している期間は、赤色光及び緑色光が同時に用いられる期間と、赤色光及び青色光が同時に用いられる期間と、を含む。これにより、青色のＬＤ１４１１、及び赤色のＬＥＤ１４１２を有するハイブリッドの光源１４１を備えたプロジェクタ１０において、輝度重視モードを実現することができる。 The three colors of light are red, green, and blue, and the period during which the projection unit 14 operates in the brightness-emphasis mode includes a period during which red and green lights are used simultaneously, and a period during which red and blue lights are used simultaneously. This allows the brightness-emphasis mode to be realized in a projector 10 equipped with a hybrid light source 141 having a blue LD 1411 and a red LED 1412.

また、ＣＰＵ１１は、投影面２の周囲の移動体としての人Ｐに係る移動体データ１３３１（移動体情報）をさらに取得し、取得した移動体データ１３３１に基づいて、画像４０と、投影面２の周囲における人Ｐとの最短距離が増大するように画像４０の投影位置及び画像４０の大きさの少なくとも一方を調整する。これにより、画像４０と人Ｐとが重なって画像４０が視認しにくくなる問題を生じにくくすることができる。 The CPU 11 also acquires moving body data 1331 (moving body information) related to person P as a moving body around the projection surface 2, and adjusts at least one of the projection position and the size of image 40 so as to increase the shortest distance between image 40 and person P around the projection surface 2 based on the acquired moving body data 1331. This makes it possible to prevent the problem of image 40 becoming difficult to view due to overlapping between image 40 and person P from occurring.

また、変形例１において、ＣＰＵ１１は、投影面２の周囲の移動体としての人Ｐに係る移動体データ１３３１（移動体情報）をさらに取得し、移動体データ１３３１は、投影面２の周囲にいる人の、異なる２以上の時点における位置に係る情報を含み、ＣＰＵ１１は、取得した移動体データ１３３１から特定される、投影面２の周囲にいる人Ｐの位置の変化に基づいて、投影面２の周囲にいる人Ｐの移動方向を推定し、推定した移動方向に基づいて画像５０の投影位置を調整する。これにより、人Ｐの移動状況に応じた適切な位置に画像５０を投影することができる。よって、人Ｐに、画像５０の内容を認識させやすくすることができる。 In addition, in the first variant, the CPU 11 further acquires moving body data 1331 (moving body information) relating to person P as a moving body around the projection surface 2, the moving body data 1331 including information relating to the positions of people around the projection surface 2 at two or more different points in time, and the CPU 11 estimates the movement direction of person P around the projection surface 2 based on the change in the position of person P around the projection surface 2 identified from the acquired moving body data 1331, and adjusts the projection position of image 50 based on the estimated movement direction. This makes it possible to project image 50 at an appropriate position according to the movement status of person P. This makes it easier for person P to recognize the contents of image 50.

また、変形例１において、ＣＰＵ１１は、投影面２の周囲の移動体としての人Ｐに係る移動体データ１３３１（移動体情報）をさらに取得し、移動体データ１３３１は、投影面２の周囲における人Ｐの位置及び人Ｐの顔の向きに係る情報を含み、ＣＰＵ１１は、取得した移動体データ１３３１から特定される人Ｐの顔の向きに基づいて画像５０の投影位置を調整する。これによれば、人Ｐにとってより視認しやすい位置に画像５０を投影することができる。 In addition, in the first modification, the CPU 11 further acquires moving body data 1331 (moving body information) related to the person P as a moving body around the projection surface 2, the moving body data 1331 including information related to the position of the person P around the projection surface 2 and the direction of the person P's face, and the CPU 11 adjusts the projection position of the image 50 based on the direction of the person P's face identified from the acquired moving body data 1331. This allows the image 50 to be projected at a position that is easier for the person P to see.

また、変形例２において、ＣＰＵ１１は、投影面２の周囲の移動体としての人Ｐに係る移動体データ１３３１（移動体情報）をさらに取得し、移動体データ１３３１は、投影面２の周囲における人Ｐの位置及び向きに係る情報を含み、ＣＰＵ１１は、取得した移動体データ１３３１から特定される人Ｐの位置及び向きと、画像６０を投影する時刻と、に基づいて、画像６０の投影位置、向き及び内容のうちの少なくとも１つを調整する。これにより、その時刻における適切な内容の画像６０を、人Ｐの位置及び向きに応じた適切な位置に投影することができる。 In addition, in the second modification, the CPU 11 further acquires moving body data 1331 (moving body information) related to the person P as a moving body around the projection surface 2, the moving body data 1331 including information related to the position and orientation of the person P around the projection surface 2, and the CPU 11 adjusts at least one of the projection position, orientation and content of the image 60 based on the position and orientation of the person P identified from the acquired moving body data 1331 and the time at which the image 60 is projected. This allows the image 60 with the appropriate content at that time to be projected at an appropriate position according to the position and orientation of the person P.

また、投影システム１は、投影部１４から出射された、画像４０を構成する光を反射させて投影面２に導くミラー２５を備え、ミラー２５は、光の反射面の角度を変更可能に設けられており、ＣＰＵ１１は、ミラー２５の反射面の角度を変更する制御により画像４０の投影位置を調整する。これにより、ミラー２５の角度を変更する簡易な制御、及び小さな可動範囲の動作により、画像４０の投影位置を調整することができる。 The projection system 1 also includes a mirror 25 that reflects the light that constitutes the image 40 and is emitted from the projection unit 14 and directs it to the projection surface 2. The mirror 25 is provided so that the angle of the light reflecting surface can be changed, and the CPU 11 adjusts the projection position of the image 40 by controlling to change the angle of the reflecting surface of the mirror 25. This makes it possible to adjust the projection position of the image 40 by simple control to change the angle of the mirror 25 and by operating it in a small range of motion.

また、投影部１４は、画像４０を構成する光を所定方向に導く、焦点距離を調整可能なズームレンズ１４７を有し、ＣＰＵ１１は、選択された項目が画像４０の大きさである場合に、ズームレンズ１４７の焦点距離を変更する制御により画像４０の大きさを調整する。これにより、ズームレンズ１４７の焦点距離を変更する簡易な制御で画像４０の大きさを調整することができる。また、この画像４０の大きさの変動に応じて、画像４０が小さいほど輝度が増大するように画像４０の輝度を調整することができる。よって、ズームレンズ１４７の焦点距離を増大させることで、画像４０の大きさを縮小して画像４０と人Ｐとの距離を大きく確保しつつ、画像４０の輝度を増大させて視認性を向上させることができる。 The projection unit 14 also has a zoom lens 147 with an adjustable focal length that guides the light that constitutes the image 40 in a predetermined direction, and the CPU 11 adjusts the size of the image 40 by controlling to change the focal length of the zoom lens 147 when the selected item is the size of the image 40. This allows the size of the image 40 to be adjusted by simple control that changes the focal length of the zoom lens 147. In addition, the brightness of the image 40 can be adjusted in accordance with the change in size of the image 40 so that the smaller the image 40, the greater the brightness. Therefore, by increasing the focal length of the zoom lens 147, the size of the image 40 can be reduced to ensure a large distance between the image 40 and the person P, while the brightness of the image 40 can be increased to improve visibility.

また、ＣＰＵ１１は、選択された項目が画像４０の大きさであり、画像４０の大きさを変更する場合に、画像４０の大きさの減少に応じて当該画像４０に含まれる情報の量が低減するように画像４０の内容を変更する。これにより、画像４０が縮小された場合においても、画像４０の投影によってより分かりやすく情報を伝えることができる。 In addition, when the selected item is the size of the image 40 and the size of the image 40 is changed, the CPU 11 changes the contents of the image 40 so that the amount of information contained in the image 40 is reduced in accordance with the reduction in the size of the image 40. This makes it possible to convey information more clearly by projecting the image 40, even when the image 40 is reduced.

また、ＣＰＵ１１は、画像４０の内容に応じて画像４０の色域を変更する。これにより、例えば色に係る情報が重要でない単純な画像４０を投影する場合に、色域が小さく輝度の高い輝度優先モードで投影することで画像４０の輝度を確保するといった動作が可能となる。よって、より視認しやすい態様で画像４０を投影することができ、画像４０の投影によってより分かりやすく情報を伝えることができる。 The CPU 11 also changes the color gamut of the image 40 depending on the contents of the image 40. This allows, for example, when projecting a simple image 40 in which color information is not important, to ensure the brightness of the image 40 by projecting it in a brightness priority mode with a small color gamut and high brightness. This allows the image 40 to be projected in a more easily visible manner, and information can be conveyed more clearly by projecting the image 40.

また、ＣＰＵ１１は、画像４０に含まれる情報量の多さに係る情報量条件が満たされているか否かを判別し、情報量条件が満たされていると判別された場合には、光源１４１の全光束を調整し、情報量条件が満たされていないと判別された場合には、画像４０の色域、及び画像４０の大きさのうち少なくとも一方を調整する。これにより、画像４０に含まれる情報量が多い場合には、光源１４１の全光束を調整することで、情報の把握しやすさを維持しつつ、画像４０を適切な明るさに調整することができる。また、画像４０に含まれる情報量が多い場合には、画像４０の色域、及び画像４０の大きさのうち少なくとも一方を調整することで、より柔軟に画像４０の明るさを調整することができる。 The CPU 11 also determines whether an information amount condition related to the amount of information contained in the image 40 is satisfied, and if it is determined that the information amount condition is satisfied, adjusts the total luminous flux of the light source 141, and if it is determined that the information amount condition is not satisfied, adjusts at least one of the color gamut of the image 40 and the size of the image 40. In this way, when the amount of information contained in the image 40 is large, the total luminous flux of the light source 141 can be adjusted to an appropriate brightness while maintaining the ease of grasping the information by adjusting the total luminous flux of the light source 141. Furthermore, when the amount of information contained in the image 40 is large, the brightness of the image 40 can be adjusted more flexibly by adjusting at least one of the color gamut of the image 40 and the size of the image 40.

また、本実施形態に係る投影方法は、投影システム１のコンピュータとしてのＣＰＵ１１が実行する投影方法であって、投影面２の周囲の明るさに係る明るさデータ１３３２（明るさ情報）を取得し、光源１４１の全光束、画像４０の色域、及び画像４０の大きさのうち少なくとも１つの項目を選択し、明るさデータ１３３２に基づいて、選択された項目を調整する。これにより、投影面２の周囲の明るさに応じて画像４０の投影態様を柔軟に調整することができる。よって、より視認しやすい態様で画像４０を投影することができ、画像４０の投影によってより分かりやすく情報を伝えることができる。 The projection method according to this embodiment is executed by the CPU 11 as the computer of the projection system 1, and acquires brightness data 1332 (brightness information) relating to the brightness of the surroundings of the projection surface 2, selects at least one item from the total luminous flux of the light source 141, the color gamut of the image 40, and the size of the image 40, and adjusts the selected item based on the brightness data 1332. This makes it possible to flexibly adjust the projection mode of the image 40 according to the brightness of the surroundings of the projection surface 2. Therefore, the image 40 can be projected in a more easily visible manner, and information can be conveyed more clearly by projecting the image 40.

また、本実施形態に係るプログラム１３１は、投影システム１のコンピュータとしてのＣＰＵ１１に、投影面２の周囲の明るさに係る明るさデータ１３３２（明るさ情報）を取得させ、光源１４１の全光束、画像４０の色域、及び画像４０の大きさのうち少なくとも１つの項目を選択させ、明るさデータ１３３２に基づいて、選択された項目を調整させる。これにより、投影面２の周囲の明るさに応じて画像４０の投影態様を柔軟に調整することができる。よって、より視認しやすい態様で画像４０を投影することができ、画像４０の投影によってより分かりやすく情報を伝えることができる。 The program 131 according to this embodiment also causes the CPU 11, which serves as the computer of the projection system 1, to acquire brightness data 1332 (brightness information) relating to the brightness of the surroundings of the projection surface 2, select at least one item from the total luminous flux of the light source 141, the color gamut of the image 40, and the size of the image 40, and adjust the selected item based on the brightness data 1332. This allows the projection mode of the image 40 to be flexibly adjusted according to the brightness of the surroundings of the projection surface 2. Therefore, the image 40 can be projected in a more easily visible manner, and information can be conveyed more clearly by the projection of the image 40.

＜その他＞
なお、上記実施形態における記述は、本発明に係る情報処理装置、プログラム及び情報処理方法の一例であり、これに限定されるものではない。
例えば、処理部として、プロジェクタ１０のＣＰＵ１１を例示し、当該ＣＰＵ１１によりミラー装置２０及びモニタ装置３０の動作が制御される例を用いて説明したが、これに限られない。例えば、プロジェクタ１０とは別個の情報処理装置（例えば、パーソナルコンピュータ）に処理部を設けて、当該処理部がプロジェクタ１０、ミラー装置２０及びモニタ装置３０を制御してもよい。また、処理部は、ミラー装置２０又はモニタ装置３０に設けられてもよい。さらに一実施形態では、プロジェクタ１０とは別個の情報処理装置に複数のプロセッサのうちの少なくとも１つが設けられていてもよい。この場合、処理部は、プロジェクタ１０に設けられた少なくとも１つのプロセッサと、情報処理装置に設けられた少なくとも１つのプロセッサとを含む。また、投影部１４は、上述した実施形態に限定されない。例えば、少なくとも一種類の光源と、回転するカラーホイールと、蛍光体などによってＲＧＢの光を出射するように構成されていてもよく、光源と液晶パネルを用いてＲＧＢの光を出射する液晶型のプロジェクタの一部であってもよい。 ＜Other＞
The above-described embodiment is merely an example of the information processing device, the program, and the information processing method according to the present invention, and the present invention is not limited to this.
For example, the CPU 11 of the projector 10 is exemplified as the processing unit, and the operation of the mirror device 20 and the monitor device 30 is controlled by the CPU 11. However, the present invention is not limited to this. For example, a processing unit may be provided in an information processing device (for example, a personal computer) separate from the projector 10, and the processing unit may control the projector 10, the mirror device 20, and the monitor device 30. The processing unit may also be provided in the mirror device 20 or the monitor device 30. In addition, in one embodiment, at least one of the multiple processors may be provided in an information processing device separate from the projector 10. In this case, the processing unit includes at least one processor provided in the projector 10 and at least one processor provided in the information processing device. The projection unit 14 is not limited to the above-mentioned embodiment. For example, the projection unit 14 may be configured to emit RGB light by at least one type of light source, a rotating color wheel, and a phosphor, or may be a part of a liquid crystal type projector that emits RGB light using a light source and a liquid crystal panel.

また、プロジェクタ１０の内部に、画像４０の投影位置を調整可能な光学系が設けられている場合や、ＣＰＵ１１の制御に従ってプロジェクタ１０の向きを調整する調整機構が設けられており、この調整機構によってプロジェクタ１０の向きを調整することで画像４０の投影位置を調整可能である場合等においては、ミラー装置２０を省略し、プロジェクタ１０から直接投影面２に画像４０を投影してもよい。 In addition, in cases where the projector 10 is provided with an optical system capable of adjusting the projection position of the image 40, or where an adjustment mechanism is provided for adjusting the orientation of the projector 10 under the control of the CPU 11, and where the projection position of the image 40 can be adjusted by adjusting the orientation of the projector 10 using this adjustment mechanism, the mirror device 20 may be omitted, and the image 40 may be projected directly from the projector 10 onto the projection surface 2.

また、モニタ装置３０の構成をプロジェクタ１０に含めて、モニタ装置３０を省略してもよい。 The configuration of the monitor device 30 may also be included in the projector 10, and the monitor device 30 may be omitted.

また、画像４０の投影態様の調整として、画像４０の投影位置、輝度、大きさ及び内容の調整を例示したが、これに限定する趣旨ではなく、環境情報に応じて、画像４０の向き、解像度、及びフレームレート等の任意の投影態様を調整してもよい。 In addition, adjustments to the projection mode of image 40 have been exemplified by adjusting the projection position, brightness, size, and content of image 40, but this is not intended to be limiting, and any projection mode such as the orientation, resolution, and frame rate of image 40 may be adjusted according to environmental information.

また、環境情報として、移動体情報及び明るさ情報を例示したが、これに限定する趣旨ではなく、環境情報は、天候、気温、湿度等の、投影面２の周囲の環境に係る任意の情報を含んでいてもよい。 In addition, moving object information and brightness information have been given as examples of environmental information, but this is not intended to be limiting, and environmental information may include any information related to the environment around the projection surface 2, such as weather, temperature, humidity, etc.

また、上記実施形態では、移動体として人Ｐを例示したが、これに限られない。例えば、移動体は、ロボットや車などであってもよい。 In addition, in the above embodiment, a person P is given as an example of a moving body, but this is not limited to this. For example, the moving body may be a robot, a car, etc.

また、以上の説明では、本発明に係るプログラムのコンピュータ読み取り可能な媒体として記憶部１３を使用した例を開示したが、この例に限定されない。その他のコンピュータ読み取り可能な媒体として、ＨＤＤ、ＳＳＤ、フラッシュメモリ、ＣＤ－ＲＯＭ等の情報記録媒体を適用することが可能である。また、本発明に係るプログラムのデータを通信回線を介して提供する媒体として、キャリアウエーブ（搬送波）も本発明に適用される。 In the above explanation, an example has been disclosed in which the storage unit 13 is used as a computer-readable medium for the program according to the present invention, but the present invention is not limited to this example. As other computer-readable media, information recording media such as HDD, SSD, flash memory, and CD-ROM can be applied. In addition, carrier waves can also be applied to the present invention as a medium for providing data for the program according to the present invention via a communication line.

また、上記実施形態におけるプロジェクタ１０、ミラー装置２０及びモニタ装置３０の構成要素の細部構成及び細部動作に関しては、本発明の趣旨を逸脱することのない範囲で適宜変更可能であることは勿論である。 Furthermore, the detailed configurations and operations of the components of the projector 10, mirror device 20, and monitor device 30 in the above embodiment may of course be modified as appropriate without departing from the spirit and scope of the present invention.

本発明の実施の形態を説明したが、本発明の範囲は、上述の実施の形態に限定するものではなく、特許請求の範囲に記載された発明の範囲とその均等の範囲を含む。
以下に、この出願の願書に最初に添付した特許請求の範囲に記載した発明を付記する。付記に記載した請求項の項番は、この出願の願書に最初に添付した特許請求の範囲の通りである。
〔付記〕
＜請求項１＞
光源を有し、投影面に画像を投影する投影部と、
処理部と、
を備え、
前記処理部は、
前記投影面の周囲の明るさに係る明るさ情報を取得し、
前記光源の全光束、前記画像の色域、及び前記画像の大きさのうち少なくとも１つの項目を選択し、
前記明るさ情報に基づいて、選択された前記項目を調整する、
ことを特徴とする投影システム。
＜請求項２＞
前記処理部は、前記明るさ情報から特定される前記投影面の周囲の明るさが増大するに従って前記画像の輝度が高くなるように、前記光源の全光束、前記画像の色域、及び前記画像の大きさのうち少なくとも１つの前記項目を選択し、選択された前記項目を調整することを特徴とする請求項１に記載の投影システム。
＜請求項３＞
前記投影部は、前記光源が出力する互いに異なる３色の光の組み合わせを用いて前記画像を投影し、
前記処理部は、
前記画像を投影中の任意の時点において前記３色の光のうち１色の光が用いられる第１モード、及び、前記画像を投影中の少なくとも一部の期間において前記３色の光のうち２色の光が同時に用いられ、前記画像の輝度の最大値が前記第１モードよりも高い第２モードで前記投影部を動作させることが可能であり、
選択された前記項目が前記画像の色域である場合に、前記投影部の動作モードを前記第１モードと前記第２モードとの間で切り替える制御により前記画像の色域を調整することを特徴とする請求項１又は２に記載の投影システム。
＜請求項４＞
前記３色の光は、赤色光、緑色光及び青色光であり、
前記第２モードで前記投影部が動作している期間は、前記赤色光及び前記緑色光が同時に用いられる期間と、前記赤色光及び前記青色光が同時に用いられる期間と、を含むことを特徴とする請求項３に記載の投影システム。
＜請求項５＞
前記処理部は、
前記投影面の周囲の移動体に係る移動体情報をさらに取得し、
前記取得した移動体情報に基づいて、前記画像と、前記投影面の周囲における移動体との最短距離が増大するように前記画像の投影位置及び前記画像の大きさの少なくとも一方を調整することを特徴とする、請求項１～４のいずれか一項に記載の投影システム。
＜請求項６＞
前記処理部は、前記投影面の周囲の移動体に係る移動体情報をさらに取得し、
前記移動体情報は、前記投影面の周囲の移動体の、異なる２以上の時点における位置に係る情報を含み、
前記処理部は、
前記取得した移動体情報から特定される、前記投影面の周囲にいる移動体の位置の変化に基づいて、前記投影面の周囲にいる移動体の移動方向を推定し、
前記推定した移動方向に基づいて前記画像の投影位置を調整することを特徴とする、請求項１～５のいずれか一項に記載の投影システム。
＜請求項７＞
前記処理部は、前記投影面の周囲の移動体に係る移動体情報をさらに取得し、
前記移動体は、人であり、
前記移動体情報は、前記投影面の周囲における人の位置及び人の顔の向きに係る情報を含み、
前記処理部は、前記取得した移動体情報から特定される前記人の顔の向きに基づいて前記画像の投影位置を調整することを特徴とする、請求項１～６のいずれか一項に記載の投影システム。
＜請求項８＞
前記処理部は、前記投影面の周囲の移動体に係る移動体情報をさらに取得し、
前記移動体情報は、前記投影面の周囲の移動体の位置及び移動体の向きに係る情報を含み、
前記処理部は、前記取得した移動体情報から特定される前記移動体の位置及び向きと、前記画像を投影する時刻と、に基づいて、前記画像の投影位置、向き及び内容のうちの少なくとも１つを調整することを特徴とする、請求項１～７のいずれか一項に記載の投影システム。
＜請求項９＞
前記投影部から出射された、前記画像を構成する光を反射させて前記投影面に導くミラーを備え、
前記ミラーは、光の反射面の角度を変更可能に設けられており、
前記処理部は、前記ミラーの前記反射面の角度を変更する制御により前記画像の投影位置を調整することを特徴とする、請求項５～８のいずれか一項に記載の投影システム。
＜請求項１０＞
前記投影部は、前記画像を構成する光を所定方向に導く、焦点距離を調整可能なズームレンズを有し、
前記処理部は、選択された前記項目が前記画像の大きさである場合に、前記ズームレンズの焦点距離を変更する制御により前記画像の大きさを調整することを特徴とする請求項１～９のいずれか一項に記載の投影システム。
＜請求項１１＞
前記処理部は、選択された前記項目が前記画像の大きさであり、前記画像の大きさを変更する場合に、前記画像の大きさの減少に応じて当該画像に含まれる情報の量が低減するように前記画像の内容を変更することを特徴とする請求項１～１０のいずれか一項に記載の投影システム。
＜請求項１２＞
前記処理部は、前記画像の内容に応じて前記画像の色域を変更することを特徴とする請求項１～１１のいずれか一項に記載の投影システム。
＜請求項１３＞
前記処理部は、
前記画像に含まれる情報量の多さに係る情報量条件が満たされているか否かを判別し、
前記情報量条件が満たされていると判別された場合には、前記光源の全光束を調整し、
前記情報量条件が満たされていないと判別された場合には、前記画像の色域、及び前記画像の大きさのうち少なくとも一方を調整することを特徴とする請求項１～１２のいずれか一項に記載の投影システム。
＜請求項１４＞
光源を有し、投影面に画像を投影する投影部を備えた投影システムのコンピュータが実行する投影方法であって、
前記投影面の周囲の明るさに係る明るさ情報を取得し、
前記光源の全光束、前記画像の色域、及び前記画像の大きさのうち少なくとも１つの項目を選択し、
前記明るさ情報に基づいて、選択された前記項目を調整する、
ことを特徴とする投影方法。
＜請求項１５＞
光源を有し、投影面に画像を投影する投影部を備えた投影システムのコンピュータに、
前記投影面の周囲の明るさに係る明るさ情報を取得させ、
前記光源の全光束、前記画像の色域、及び前記画像の大きさのうち少なくとも１つの項目を選択させ、
前記明るさ情報に基づいて、選択された前記項目を調整させる、
ことを特徴とするプログラム。 Although the embodiments of the present invention have been described, the scope of the present invention is not limited to the above-described embodiments, but includes the scope of the invention described in the claims and its equivalents.
The inventions described in the claims originally attached to this application are set forth below. The claim numbers in the appended claims are the same as those in the claims originally attached to this application.
[Additional Notes]
<Claim 1>
a projection unit having a light source and projecting an image onto a projection surface;
A processing section;
Equipped with
The processing unit includes:
Acquire brightness information relating to the brightness of the surroundings of the projection surface;
Selecting at least one of the total luminous flux of the light source, the color gamut of the image, and the size of the image;
adjusting the selected item based on the brightness information;
1. A projection system comprising:
<Claim 2>
2. The projection system according to claim 1, wherein the processing unit selects at least one of the total luminous flux of the light source, the color gamut of the image, and the size of the image, and adjusts the selected item so that the luminance of the image increases as the brightness of the surroundings of the projection surface identified from the brightness information increases.
<Claim 3>
the projection unit projects the image using a combination of three different colors of light output from the light source;
The processing unit includes:
The projection unit can be operated in a first mode in which one of the three colors of light is used at any time during projection of the image, and in a second mode in which two of the three colors of light are used simultaneously during at least a portion of the time during projection of the image, and a maximum value of the luminance of the image is higher than that in the first mode,
The projection system according to claim 1 or 2, characterized in that when the selected item is the color gamut of the image, the color gamut of the image is adjusted by controlling the operation mode of the projection unit to switch between the first mode and the second mode.
<Claim 4>
the three colors of light are red light, green light, and blue light,
4. The projection system according to claim 3, wherein the period during which the projection unit operates in the second mode includes a period during which the red light and the green light are used simultaneously, and a period during which the red light and the blue light are used simultaneously.
<Claim 5>
The processing unit includes:
Further acquiring moving object information relating to moving objects around the projection surface;
The projection system according to any one of claims 1 to 4, characterized in that at least one of the projection position and the size of the image is adjusted based on the acquired moving body information so as to increase the shortest distance between the image and the moving body around the projection surface.
<Claim 6>
The processing unit further acquires moving object information related to a moving object around the projection surface,
the moving object information includes information relating to positions of moving objects around the projection surface at two or more different points in time;
The processing unit includes:
estimating a moving direction of a moving object around the projection surface based on a change in position of the moving object around the projection surface, the change being identified from the acquired moving object information;
6. The projection system according to claim 1, wherein the projection position of the image is adjusted based on the estimated movement direction.
<Claim 7>
The processing unit further acquires moving object information related to a moving object around the projection surface,
the moving object is a person,
the moving object information includes information related to a position of a person around the projection surface and a direction of a person's face,
The projection system according to any one of claims 1 to 6, wherein the processing unit adjusts the projection position of the image based on the direction of the person's face identified from the acquired moving object information.
<Claim 8>
The processing unit further acquires moving object information related to a moving object around the projection surface,
the moving object information includes information related to a position of a moving object around the projection surface and an orientation of the moving object,
The projection system according to any one of claims 1 to 7, characterized in that the processing unit adjusts at least one of the projection position, orientation, and content of the image based on the position and orientation of the moving body identified from the acquired moving body information and the time at which the image is projected.
<Claim 9>
a mirror that reflects light that constitutes the image and is emitted from the projection unit and directs it to the projection surface;
The mirror is provided so that an angle of a light reflecting surface can be changed,
9. The projection system according to claim 5, wherein the processing unit adjusts the projection position of the image by controlling to change an angle of the reflecting surface of the mirror.
<Claim 10>
the projection unit has a zoom lens with an adjustable focal length that guides light constituting the image in a predetermined direction;
The projection system according to any one of claims 1 to 9, characterized in that, when the selected item is the size of the image, the processing unit adjusts the size of the image by controlling a change in the focal length of the zoom lens.
<Claim 11>
The projection system according to any one of claims 1 to 10, characterized in that the selected item is the size of the image, and when the size of the image is changed, the processing unit changes the content of the image so that the amount of information contained in the image is reduced in accordance with the reduction in the size of the image.
<Claim 12>
12. The projection system according to claim 1, wherein the processing unit changes a color gamut of the image depending on the content of the image.
<Claim 13>
The processing unit includes:
determining whether an information amount condition relating to the amount of information contained in the image is satisfied;
If it is determined that the information amount condition is satisfied, adjusting the total luminous flux of the light source;
The projection system according to any one of claims 1 to 12, characterized in that, when it is determined that the information amount condition is not satisfied, at least one of the color gamut of the image and the size of the image is adjusted.
<Claim 14>
A projection method implemented by a computer for a projection system including a projection unit having a light source and projecting an image onto a projection surface, comprising:
Acquire brightness information relating to the brightness of the surroundings of the projection surface;
Selecting at least one of the total luminous flux of the light source, the color gamut of the image, and the size of the image;
adjusting the selected item based on the brightness information;
A projection method comprising:
<Claim 15>
A computer of a projection system including a projection unit having a light source and projecting an image onto a projection surface,
acquiring brightness information relating to the brightness of the surroundings of the projection surface;
Selecting at least one of the total luminous flux of the light source, the color gamut of the image, and the size of the image;
adjusting the selected item based on the brightness information;
A program characterized by:

１ 投影システム
２ 投影面
１０ プロジェクタ
１１ ＣＰＵ（処理部）
１２ ＲＡＭ
１３ 記憶部
１３１ プログラム
１３２ 画像データ
１３３ 環境データ（環境情報）
１３３１ 移動体データ（移動体情報、環境情報）
１３３２ 明るさデータ（明るさ情報、環境情報）
１４ 投影部
１４１ 光源
１４４ 蛍光体ホイール
１４４１ モーター
１４４２ ホイール板
１４４３ 開口部
１４４４ 蛍光体層
１４６ 表示素子
１４７ ズームレンズ
１４８ 光学系駆動部
１５ 通信Ｉ／Ｆ
１６ バス
２０ ミラー装置
２１ ＣＰＵ
２４ ミラー駆動部
２５ ミラー
３０ モニタ装置
３１ ＣＰＵ
３４ 撮像部
３５ 明るさ検出部
４０、５０、６０ 画像
４０ａ 縮小画像
７１、７２ 通路
Ｌ 予測線
Ｐ、Ｐ１～Ｐ４ 人（移動体） 1 Projection system 2 Projection surface 10 Projector 11 CPU (processing unit)
12 RAM
13 Storage unit 131 Program 132 Image data 133 Environmental data (environmental information)
1331 Mobile data (mobile information, environmental information)
1332 Brightness data (brightness information, environmental information)
14 Projection unit 141 Light source 144 Phosphor wheel 1441 Motor 1442 Wheel plate 1443 Opening 1444 Phosphor layer 146 Display element 147 Zoom lens 148 Optical system driving unit 15 Communication I/F
16 Bus 20 Mirror device 21 CPU
24 Mirror driving unit 25 Mirror 30 Monitor device 31 CPU
34 Imaging unit 35 Brightness detection unit 40, 50, 60 Image 40a Reduced image 71, 72 Passage L Prediction line P, P1 to P4 Person (moving object)

Claims (13)

光源を有し、投影面に画像を投影する投影部と、
処理部と、
を備え、
前記処理部は、
前記投影面の周囲の明るさに係る明るさ情報を取得し、
前記光源の全光束、前記画像の色域、及び前記画像の大きさのうち少なくとも１つの項目を選択し、
前記明るさ情報に基づいて、選択された前記項目を調整するように構成されており、
前記処理部は、前記光源の全光束の調整による前記画像の輝度の第１の変動量の予測、及び／又は前記画像の色域の調整による前記画像の輝度の第２の変動量の予測、及び／又は前記画像の大きさの調整による前記画像の輝度の第３の変動量の予測に基づいて、前記画像の輝度が適正輝度以上となるような前記第１の変動量、前記第２の変動量、及び前記第３の変動量の組み合わせを特定し、特定した前記組み合わせに対応する項目を、調整する項目として選択する
ことを特徴とする投影システム。 a projection unit having a light source and projecting an image onto a projection surface;
A processing section;
Equipped with
The processing unit includes:
Acquire brightness information relating to the brightness of the surroundings of the projection surface;
Selecting at least one of the total luminous flux of the light source, the color gamut of the image, and the size of the image;
configured to adjust the selected item based on the brightness information;
The processing unit specifies a combination of the first variation amount, the second variation amount, and the third variation amount such that the luminance of the image is equal to or greater than an appropriate luminance based on a prediction of a first variation amount of the luminance of the image due to adjustment of the total luminous flux of the light source, and/or a prediction of a second variation amount of the luminance of the image due to adjustment of the color gamut of the image, and/or a prediction of a third variation amount of the luminance of the image due to adjustment of the size of the image, and selects an item corresponding to the specified combination as an item to be adjusted.
1. A projection system comprising: 前記投影部は、前記光源が出力する互いに異なる３色の光の組み合わせを用いて前記画像を投影し、
前記処理部は、
前記画像を投影中の任意の時点において前記３色の光のうち１色の光が用いられる第１モード、及び、前記画像を投影中の少なくとも一部の期間において前記３色の光のうち２色の光が同時に用いられ、前記画像の輝度の最大値が前記第１モードよりも高い第２モードで前記投影部を動作させることが可能であり、
選択された前記項目が前記画像の色域である場合に、前記投影部の動作モードを前記第１モードと前記第２モードとの間で切り替える制御により前記画像の色域を調整することを特徴とする請求項１に記載の投影システム。 the projection unit projects the image using a combination of three different colors of light output from the light source;
The processing unit includes:
The projection unit can be operated in a first mode in which one of the three colors of light is used at any time during projection of the image, and in a second mode in which two of the three colors of light are used simultaneously during at least a portion of the time during projection of the image, and a maximum value of the luminance of the image is higher than that in the first mode,
The projection system according to claim 1, characterized in that, when the selected item is the color gamut of the image, the color gamut of the image is adjusted by controlling the operation mode of the projection unit to switch between the first mode and the second mode. 前記３色の光は、赤色光、緑色光及び青色光であり、
前記第２モードで前記投影部が動作している期間は、前記赤色光及び前記緑色光が同時に用いられる期間と、前記赤色光及び前記青色光が同時に用いられる期間と、を含むことを特徴とする請求項２に記載の投影システム。 the three colors of light are red light, green light, and blue light,
3. The projection system according to claim 2, wherein the period during which the projection unit operates in the second mode includes a period during which the red light and the green light are used simultaneously, and a period during which the red light and the blue light are used simultaneously . 前記処理部は、
前記投影面の周囲の移動体に係る移動体情報をさらに取得し、
前記取得した移動体情報に基づいて、前記画像と、前記投影面の周囲における移動体との最短距離が増大するように前記画像の投影位置及び前記画像の大きさの少なくとも一方を調整することを特徴とする、請求項１～３のいずれか一項に記載の投影システム。 The processing unit includes:
Further acquiring moving object information related to moving objects around the projection surface;
4. The projection system according to claim 1, further comprising: a projection position of the image and/or a size of the image adjusted based on the acquired moving body information so as to increase a minimum distance between the image and a moving body around the projection surface. 前記処理部は、前記投影面の周囲の移動体に係る移動体情報をさらに取得し、
前記移動体情報は、前記投影面の周囲の移動体の、異なる２以上の時点における位置に係る情報を含み、
前記処理部は、
前記取得した移動体情報から特定される、前記投影面の周囲にいる移動体の位置の変化に基づいて、前記投影面の周囲にいる移動体の移動方向を推定し、
前記推定した移動方向に基づいて前記画像の投影位置を調整することを特徴とする、請求項１～３のいずれか一項に記載の投影システム。 The processing unit further acquires moving object information related to a moving object around the projection surface,
the moving object information includes information relating to positions of moving objects around the projection surface at two or more different points in time;
The processing unit includes:
estimating a moving direction of a moving object around the projection surface based on a change in position of the moving object around the projection surface, the change being identified from the acquired moving object information;
4. The projection system according to claim 1 , further comprising: a projection position of the image being adjusted based on the estimated direction of movement. 前記処理部は、前記投影面の周囲の移動体に係る移動体情報をさらに取得し、
前記移動体は、人であり、
前記移動体情報は、前記投影面の周囲における人の位置及び人の顔の向きに係る情報を含み、
前記処理部は、前記取得した移動体情報から特定される前記人の顔の向きに基づいて前記画像の投影位置を調整することを特徴とする、請求項１～３のいずれか一項に記載の投影システム。 The processing unit further acquires moving object information related to a moving object around the projection surface,
the moving object is a person,
the moving object information includes information related to a position of a person around the projection surface and a direction of a person's face,
4. The projection system according to claim 1 , wherein the processing unit adjusts the projection position of the image based on a face direction of the person identified from the acquired moving object information. 前記処理部は、前記投影面の周囲の移動体に係る移動体情報をさらに取得し、
前記移動体情報は、前記投影面の周囲の移動体の位置及び移動体の向きに係る情報を含み、
前記処理部は、前記取得した移動体情報から特定される前記移動体の位置及び向きと、前記画像を投影する時刻と、に基づいて、前記画像の投影位置、向き及び内容のうちの少なくとも１つを調整することを特徴とする、請求項１～３のいずれか一項に記載の投影システム。 The processing unit further acquires moving object information related to a moving object around the projection surface,
the moving object information includes information related to a position of a moving object around the projection surface and an orientation of the moving object,
The projection system according to any one of claims 1 to 3, characterized in that the processing unit adjusts at least one of a projection position, a direction, and a content of the image based on a position and a direction of the moving object identified from the acquired moving object information and a time when the image is projected. 前記投影部から出射された、前記画像を構成する光を反射させて前記投影面に導くミラーを備え、
前記ミラーは、光の反射面の角度を変更可能に設けられており、
前記処理部は、前記ミラーの前記反射面の角度を変更する制御により前記画像の投影位置を調整することを特徴とする、請求項４～７のいずれか一項に記載の投影システム。 a mirror that reflects light that constitutes the image and is emitted from the projection unit and directs it to the projection surface;
The mirror is provided so that an angle of a light reflecting surface can be changed,
8. The projection system according to claim 4 , wherein the processing unit adjusts the projection position of the image by controlling to change an angle of the reflective surface of the mirror. 前記投影部は、前記画像を構成する光を所定方向に導く、焦点距離を調整可能なズームレンズを有し、
前記処理部は、選択された前記項目が前記画像の大きさである場合に、前記ズームレンズの焦点距離を変更する制御により前記画像の大きさを調整することを特徴とする請求項１～８のいずれか一項に記載の投影システム。 the projection unit has a zoom lens with an adjustable focal length that guides light constituting the image in a predetermined direction;
The projection system according to any one of claims 1 to 8, characterized in that, when the selected item is the size of the image, the processing unit adjusts the size of the image by controlling to change the focal length of the zoom lens. 前記処理部は、選択された前記項目が前記画像の大きさであり、前記画像の大きさを変更する場合に、前記画像の大きさの減少に応じて当該画像に含まれる情報の量が低減するように前記画像の内容を変更することを特徴とする請求項１～９のいずれか一項に記載の投影システム。 The projection system according to any one of claims 1 to 9, characterized in that the selected item is the size of the image, and when the size of the image is changed, the processing unit changes the content of the image so that the amount of information contained in the image is reduced in accordance with the reduction in the size of the image. 前記処理部は、前記画像の内容に応じて前記画像の色域を変更することを特徴とする請求項１～１０のいずれか一項に記載の投影システム。 11. The projection system according to claim 1, wherein the processing unit changes a color gamut of the image depending on the content of the image. 光源を有し、投影面に画像を投影する投影部を備えた投影システムのコンピュータが実行する投影方法であって、
前記投影面の周囲の明るさに係る明るさ情報を取得し、
前記光源の全光束、前記画像の色域、及び前記画像の大きさのうち少なくとも１つの項目を選択し、
前記明るさ情報に基づいて、選択された前記項目を調整し、
前記項目を選択する工程は、前記光源の全光束の調整による前記画像の輝度の第１の変動量の予測、及び／又は前記画像の色域の調整による前記画像の輝度の第２の変動量の予測、及び／又は前記画像の大きさの調整による前記画像の輝度の第３の変動量の予測に基づいて、前記画像の輝度が適正輝度以上となるような前記第１の変動量、前記第２の変動量、及び前記第３の変動量の組み合わせを特定し、特定した前記組み合わせに対応する項目を、調整する項目として選択する工程を含む
ことを特徴とする投影方法。 A projection method executed by a computer of a projection system having a light source and a projection unit that projects an image onto a projection surface, comprising:
Acquire brightness information relating to the brightness of the surroundings of the projection surface;
Selecting at least one of the total luminous flux of the light source, the color gamut of the image, and the size of the image;
adjusting the selected item based on the brightness information;
The step of selecting the item includes a step of identifying a combination of the first variation amount, the second variation amount, and the third variation amount that makes the luminance of the image equal to or greater than an appropriate luminance based on a prediction of a first variation amount of the luminance of the image due to adjustment of the total luminous flux of the light source, and/or a prediction of a second variation amount of the luminance of the image due to adjustment of the color gamut of the image, and/or a prediction of a third variation amount of the luminance of the image due to adjustment of the size of the image, and selecting an item corresponding to the identified combination as an item to be adjusted.
A projection method comprising: 光源を有し、投影面に画像を投影する投影部を備えた投影システムのコンピュータに、
前記投影面の周囲の明るさに係る明るさ情報を取得させ、
前記光源の全光束、前記画像の色域、及び前記画像の大きさのうち少なくとも１つの項目を選択させ、
前記明るさ情報に基づいて、選択された前記項目を調整させ、
前記項目を選択させる処理は、前記光源の全光束の調整による前記画像の輝度の第１の変動量の予測、及び／又は前記画像の色域の調整による前記画像の輝度の第２の変動量の予測、及び／又は前記画像の大きさの調整による前記画像の輝度の第３の変動量の予測に基づいて、前記画像の輝度が適正輝度以上となるような前記第１の変動量、前記第２の変動量、及び前記第３の変動量の組み合わせを特定し、特定した前記組み合わせに対応する項目を、調整する項目として選択させる処理を含む
ことを特徴とするプログラム。 A computer of a projection system including a projection unit having a light source and projecting an image onto a projection surface,
acquiring brightness information relating to the brightness of the surroundings of the projection surface;
Selecting at least one of the total luminous flux of the light source, the color gamut of the image, and the size of the image;
adjusting the selected item based on the brightness information;
The process of selecting the item includes a process of specifying a combination of the first variation amount, the second variation amount, and the third variation amount such that the luminance of the image is equal to or greater than an appropriate luminance, based on a prediction of a first variation amount of the luminance of the image due to adjustment of the total luminous flux of the light source, and/or a prediction of a second variation amount of the luminance of the image due to adjustment of the color gamut of the image, and/or a prediction of a third variation amount of the luminance of the image due to adjustment of the size of the image, and selecting an item corresponding to the specified combination as an item to be adjusted.
A program characterized by:
JP2022041139A 2021-09-17 2022-03-16 Projection system, projection method, and program Active JP7501558B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US17/944,781 US20230092862A1 (en) 2021-09-17 2022-09-14 Projecting system, projecting method, and storage medium
CN202211132192.2A CN115834847A (en) 2021-09-17 2022-09-16 Projection system, projection method, and recording medium

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021152127 2021-09-17
JP2021152127 2021-09-17

Publications (2)

Publication Number Publication Date
JP2023044611A JP2023044611A (en) 2023-03-30
JP7501558B2 true JP7501558B2 (en) 2024-06-18

Family

ID=85725524

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022041139A Active JP7501558B2 (en) 2021-09-17 2022-03-16 Projection system, projection method, and program

Country Status (1)

Country Link
JP (1) JP7501558B2 (en)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030179192A1 (en) 2002-03-20 2003-09-25 Allen William J. Method and apparatus for image display
JP2006047334A (en) 2004-07-30 2006-02-16 Olympus Corp Projector apparatus and zooming control method
JP2006337997A (en) 2005-05-02 2006-12-14 Semiconductor Energy Lab Co Ltd Display device
JP2007094108A (en) 2005-09-29 2007-04-12 Casio Comput Co Ltd Projector device and light source control method thereof
JP2008170900A (en) 2007-01-15 2008-07-24 Ricoh Co Ltd Information processor, information browsing method, information browsing program, and recording medium
WO2016103541A1 (en) 2014-12-25 2016-06-30 パナソニックＩｐマネジメント株式会社 Projection device
JP2017053980A (en) 2015-09-09 2017-03-16 パナソニックＩｐマネジメント株式会社 Projection system and projection controller
WO2020031740A1 (en) 2018-08-10 2020-02-13 ソニー株式会社 Control device, control method, and program

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030179192A1 (en) 2002-03-20 2003-09-25 Allen William J. Method and apparatus for image display
JP2006047334A (en) 2004-07-30 2006-02-16 Olympus Corp Projector apparatus and zooming control method
JP2006337997A (en) 2005-05-02 2006-12-14 Semiconductor Energy Lab Co Ltd Display device
JP2007094108A (en) 2005-09-29 2007-04-12 Casio Comput Co Ltd Projector device and light source control method thereof
JP2008170900A (en) 2007-01-15 2008-07-24 Ricoh Co Ltd Information processor, information browsing method, information browsing program, and recording medium
WO2016103541A1 (en) 2014-12-25 2016-06-30 パナソニックＩｐマネジメント株式会社 Projection device
JP2017053980A (en) 2015-09-09 2017-03-16 パナソニックＩｐマネジメント株式会社 Projection system and projection controller
WO2020031740A1 (en) 2018-08-10 2020-02-13 ソニー株式会社 Control device, control method, and program

Also Published As

Publication number Publication date
JP2023044611A (en) 2023-03-30

Similar Documents

Publication Publication Date Title
JP6613458B2 (en) Projection device
JP6186599B1 (en) Projection device
US9151471B2 (en) Light source device and projector
US20160188123A1 (en) Projection device
JP5669211B2 (en) Projector and control method thereof
US11188170B2 (en) Image display apparatus and method for controlling the same
US10502962B2 (en) Projection type display device and projection control method
US20070165194A1 (en) Image display apparatus and control method therefor
JP2011134172A (en) Evacuation guidance device and evacuation system
JP7501558B2 (en) Projection system, projection method, and program
CN104698726A (en) Optical unit, projection display apparatus and imaging apparatus
JP6307706B2 (en) Projection device
US20230092862A1 (en) Projecting system, projecting method, and storage medium
JP2020194117A (en) Virtual image display device
JP2015121571A (en) Display device and method for controlling display device
WO2011105228A1 (en) Projection image display device
WO2016147236A1 (en) Illumination device
JP6007533B2 (en) Light source device and projector device
JP2012108232A (en) Electronic device
JP2005258292A (en) Projector
JP6927159B2 (en) Head-up display device
JP2012150260A (en) Multi-projection system, projector and control method of image projection
JP2024002016A (en) Projection system, projection method and program
JP7127459B2 (en) Image projection device and its control method
JP2010134052A (en) Image display apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220915

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230728

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230905

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231101

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240206

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240315

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240507

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240520

R150 Certificate of patent or registration of utility model

Ref document number: 7501558

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150