JP6865552B2 - Video projection system - Google Patents

Video projection system Download PDF

Info

Publication number
JP6865552B2
JP6865552B2 JP2016185741A JP2016185741A JP6865552B2 JP 6865552 B2 JP6865552 B2 JP 6865552B2 JP 2016185741 A JP2016185741 A JP 2016185741A JP 2016185741 A JP2016185741 A JP 2016185741A JP 6865552 B2 JP6865552 B2 JP 6865552B2
Authority
JP
Japan
Prior art keywords
image
image projection
sub
unit
range
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016185741A
Other languages
Japanese (ja)
Other versions
JP2018049217A (en
Inventor
貴夫 齋藤
貴夫 齋藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Stanley Electric Co Ltd
Original Assignee
Stanley Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Stanley Electric Co Ltd filed Critical Stanley Electric Co Ltd
Priority to JP2016185741A priority Critical patent/JP6865552B2/en
Publication of JP2018049217A publication Critical patent/JP2018049217A/en
Application granted granted Critical
Publication of JP6865552B2 publication Critical patent/JP6865552B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Controls And Circuits For Display Device (AREA)
  • Mechanical Optical Scanning Systems (AREA)
  • Projection Apparatus (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Lighting Device Outwards From Vehicle And Optical Signal (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Description

本発明は、複数台の映像投射装置で構成される前照灯に関する。 The present invention relates to a headlight composed of a plurality of image projection devices.

近年、複数台の映像投射装置を用いて1つの映像を形成するシステムが開発され、従来のマルチモニターディスプレイシステムの置き換えとして、あるいは、建物等の外壁をスクリーンとしたプロジェクションマッピングとして、様々な演出のために用いられている。複数台の映像投射装置を用いた投影方法としては、投射された複数の映像の重畳投影により部分的に映像の解像度を変更する方法が知られている。 In recent years, a system that forms one image using multiple image projection devices has been developed, and various effects can be produced as a replacement for the conventional multi-monitor display system or as projection mapping using the outer wall of a building as a screen. Is used for. As a projection method using a plurality of image projection devices, a method of partially changing the resolution of an image by superimposing and projecting a plurality of projected images is known.

例えば、下記の特許文献1は、全体投影用プロジェクタと局所投影用プロジェクタの2台を用いて映像の重畳部を作り、部分的に解像度を変更することができる投影方法を採用している(段落0005,図1)。複数のプロジェクタよって前方に映像を投射する技術は、車両用前照灯に適用されている。 For example, Patent Document 1 below employs a projection method in which an image superimposing portion is created by using two projectors, a projector for whole projection and a projector for local projection, and the resolution can be partially changed (paragraph). 0005, FIG. 1). The technique of projecting an image forward by a plurality of projectors is applied to vehicle headlights.

近年は、車両の前方を監視するカメラを備えた自動車が登場している。その代表的なシステム例として、カメラの撮像画像から歩行者等を認識したときに警告音を出力すると共に、ダッシュボード付近に設けられたモニタの映像に警告マークを重ねて表示するものがある。 In recent years, automobiles equipped with a camera that monitors the front of the vehicle have appeared. As a typical example of the system, there is a system in which a warning sound is output when a pedestrian or the like is recognized from an image captured by a camera, and a warning mark is superimposed on an image of a monitor provided near the dashboard.

しかし、ドライバーが警告マークを確認するために、視線を車両前方からモニタに移動することは好ましくない。そこで、認識された歩行者に対してスポット光(マーキングランプ)を当てることにより、ドライバーの視線を車両前方に維持しつつ、ドライバーに歩行者の存在を認識させるようにしたシステムが提案されている。 However, it is not preferable for the driver to move his / her line of sight from the front of the vehicle to the monitor in order to confirm the warning mark. Therefore, a system has been proposed in which a spotlight (marking lamp) is applied to a recognized pedestrian to keep the driver's line of sight in front of the vehicle and to make the driver recognize the presence of the pedestrian. ..

特開2004−070257号公報Japanese Unexamined Patent Publication No. 2004-070257

しかしながら、車両用前照灯のように所定範囲を照射するシステムに、スポット光を照射する機能を追加するとシステム構成が複雑になり、コストも上昇するという問題があった。 However, if a function of irradiating a spot light is added to a system that irradiates a predetermined range such as a headlight for a vehicle, there is a problem that the system configuration becomes complicated and the cost increases.

本発明は、このような事情に鑑みてなされたものであり、簡易な構成により、投射範囲の所定領域に視認者の視線を誘導させることができる前照灯を提供することを目的とする。 The present invention has been made in view of such circumstances, and an object of the present invention is to provide a headlight capable of guiding a viewer's line of sight to a predetermined area of a projection range by a simple configuration.

本発明の前照灯は、複数台のラスタースキャン方式の映像投射装置と、前記複数台の映像投射装置から投射される投射範囲が異なる複数のサブ映像を組み合せて、1つの合成映像を生成する合成映像生成部と、前記サブ映像の輝度を調整する輝度調整部と、前記合成映像に所定の注目領域を設定する注目領域設定部と、を備えた前照灯であって、前記合成映像は、前記注目領域設定部により前記複数のサブ映像のうち最大輝度が最も高いサブ映像の映像投射範囲外に前記注目領域が設定されていない通常時において前記合成映像を構成する前記複数のサブ映像の映像投射範囲のそれぞれにおいて、中央部の輝度が最も高く、外周部にいくにつれて徐々に輝度が低くなる輝度分布を有し、前記輝度調整部は、前記注目領域設定部により前記複数のサブ映像のうち最大輝度が最も高いサブ映像の領域外に前記注目領域が設定された場合に、複数の前記映像投射装置のうち少なくとも1つから投射される前記サブ映像について、前記通常時の前記合成映像を生成する映像分配処理から、前記サブ映像の映像投射範囲全体の輝度を所定レベルとした後、前記サブ映像の当該映像投射範囲の外周部から前記注目領域に向かって、時間の経過に伴い徐々に当該映像投射範囲を収束させる視線誘導処理へ切り替えることを特徴とする。 The headlight of the present invention combines a plurality of raster scan type image projection devices and a plurality of sub-images projected from the plurality of image projection devices having different projection ranges to generate one composite image. The headlight includes a composite image generation unit, a brightness adjustment unit that adjusts the brightness of the sub image, and an attention area setting unit that sets a predetermined area of interest in the composite image. The plurality of sub-images constituting the composite image in a normal time when the attention area is not set outside the image projection range of the sub-image having the highest maximum brightness among the plurality of sub-images by the attention area setting unit. In each of the image projection ranges, the luminance distribution in the central portion is the highest, and the luminance gradually decreases toward the outer peripheral portion. when the region of interest outside the region of the inner maximum luminance is the highest sub-picture is set for the sub-image projected from at least one of the plurality of the image projection apparatus, the combined image at the time of the normal From the generated video distribution process, the brightness of the entire image projection range of the sub image is set to a predetermined level, and then gradually from the outer peripheral portion of the image projection range of the sub image toward the area of interest with the passage of time. It is characterized by switching to the line-of-sight guidance process for converging the image projection range.

本発明の前照灯は、投射範囲が異なる複数台の映像投射装置で構成され、合成映像生成部が各映像投射装置からのサブ映像を組み合せて、1つの合成映像を生成する。 The headlight of the present invention is composed of a plurality of image projection devices having different projection ranges, and a composite image generation unit combines sub-images from each image projection device to generate one composite image.

また、注目領域設定部により注目領域が設定されるが、注目領域が複数のサブ映像のうち最大輝度が最も高いサブ映像の領域外に設定された場合には、注目領域の輝度を高くしても、元々輝度が高い部分との差が小さいため、視認者の注意を引き難い。 Further, the attention area is set by the attention area setting unit, but when the attention area is set outside the area of the sub image having the highest maximum brightness among the plurality of sub images, the brightness of the attention area is increased. However, since the difference from the originally high brightness part is small, it is difficult to attract the attention of the viewer.

そこで、輝度調整部は、まず、少なくとも1つの映像投射装置について、通常時の合成映像を生成する映像分配処理を行う。さらに、輝度調整部は、映像投射範囲全体の輝度を所定レベルまで引き上げた後、映像投射範囲の外周部から注目領域に向かって、時間の経過に伴って徐々に映像投射範囲が収束していく視線誘導処理を行う。一度、前方の合成映像が明るくなることで視認者の注意を引いて、さらに、合成映像の外周部から徐々に暗くなって最終的に明るい部分が注目領域に収束していくので、本前照灯は、視認者の視線を注目領域に誘導させることができる。 Therefore, the luminance adjusting unit first performs a video distribution process for generating a composite video at the normal time for at least one video projection device. Further, the brightness adjusting unit raises the brightness of the entire image projection range to a predetermined level, and then the image projection range gradually converges with the passage of time from the outer peripheral portion of the image projection range toward the region of interest. Performs line-of-sight guidance processing . Once to draw attention of the viewer by the front of the composite video image becomes brighter, further, since the gradual darkened finally bright portion from the outer peripheral portion of the combined image is gradually converged to the target area, the headlamps The light can guide the line of sight of the viewer to the region of interest.

本発明の前照灯において、前記映像投射装置は、光源と、該光源からの光を反射する回動式のミラー部と、該ミラー部の振れ角範囲を制御するミラー制御部と、を備え、前記輝度調整部は、前記ミラー制御部により前記振れ角範囲を時間の経過に伴い徐々に小さくする制御を行うことにより、前記サブ映像の外周部を前記通常時の初期状態から前記注目領域に向かって、徐々に前記映像投射範囲を収束させることが好ましい。 In the headlight of the present invention, the image projection device includes a light source, a rotary mirror unit that reflects light from the light source, and a mirror control unit that controls a swing angle range of the mirror unit. The brightness adjusting unit controls the mirror control unit to gradually reduce the swing angle range with the passage of time, so that the outer peripheral portion of the sub image is changed from the initial state in the normal state to the attention region. It is preferable to gradually converge the image projection range toward the end.

この構成によれば、輝度調整部は、各映像投射装置のミラー制御部を制御して輝度を調整することができる。具体的には、合成映像の外周部から注目領域に向かって徐々に映像投射範囲を収束させる場合に、ミラー部の振れ角範囲が時間の経過に伴い徐々に小さくなるように制御する。これにより、本前照灯は、明るい部分が徐々に注目領域に収束していく効果が得られる。 According to this configuration, the brightness adjusting unit can control the mirror control unit of each image projection device to adjust the brightness. Specifically, when the image projection range is gradually converged from the outer peripheral portion of the composite image toward the region of interest, the deflection angle range of the mirror portion is controlled to gradually decrease with the passage of time. As a result, the headlight has the effect that the bright part gradually converges on the region of interest.

また、本発明の前照灯において、前記複数のサブ映像の投射範囲に映像を投射する映像投射装置を、所定条件により切り替える担当投射範囲切替部をさらに備えることが好ましい。 Further, in the headlight of the present invention, it is preferable to further include a projection range switching unit in charge of switching the image projection device for projecting an image into the projection range of the plurality of sub-images according to a predetermined condition.

比較的広い投射範囲を担当する映像投射装置は、常にミラー部の振れ角が大きいため、装置にかかる負荷が大きくなる。この構成によれば、担当投射範囲切替部が各サブ映像の投射範囲に映像を投射する映像投射装置を所定条件により切り替えることで、各映像投射置の負荷が分散される。これにより、本前照灯は、製品寿命(使用可能期間)を延ばすことができる。 Since the image projection device that is in charge of a relatively wide projection range always has a large deflection angle of the mirror portion, the load on the device is large. According to this configuration, the load of each image projection position is distributed by the responsible projection range switching unit switching the image projection device that projects the image into the projection range of each sub image according to a predetermined condition. As a result, the product life (usable period) of this headlight can be extended.

実施形態の映像投射システムの概要図。The schematic diagram of the image projection system of an embodiment. 実施形態の映像投射システムの映像投射装置の概要図。The schematic diagram of the image projection apparatus of the image projection system of embodiment. 実施形態の映像投射装置の映像信号処理部の説明図。The explanatory view of the image signal processing part of the image projection apparatus of embodiment. 実施形態の映像投射装置に用いられるMEMSの斜視図。The perspective view of the MEMS used for the image projection apparatus of an embodiment. 半導体光源と、MEMSミラーと、映像投射装置から投射された映像投射範囲との関係を示す図。The figure which shows the relationship between the semiconductor light source, the MEMS mirror, and the image projection range projected from the image projection apparatus. 時間経過に対する、副走査方向に回動するMEMSミラー及び半導体光源の駆動信号の波形変化を示す図。The figure which shows the waveform change of the drive signal of the MEMS mirror and the semiconductor light source which rotates in the sub-scanning direction with the passage of time. 時間経過に対する、主走査方向に回動するMEMSミラー及び半導体光源の駆動信号の波形変化を示す図。The figure which shows the waveform change of the drive signal of the MEMS mirror and the semiconductor light source rotating in the main scanning direction with the passage of time. 図6A及び図6Bに示された、MEMSミラー及び半導体光源の駆動信号に基づく投射映像の描画範囲と、走査軌跡との関係を示す図。6A and 6B are diagrams showing the relationship between the drawing range of the projected image based on the drive signals of the MEMS mirror and the semiconductor light source and the scanning locus. 各映像投射装置の投射角度範囲(映像投射範囲)と、最大輝度との関係を示す図。The figure which shows the relationship between the projection angle range (image projection range) of each image projection apparatus, and the maximum brightness. 入力映像の輝度分布と第1映像投射装置〜第4映像投射装置の映像投射範囲との関係を示す図。The figure which shows the relationship between the luminance distribution of an input image, and the image projection range of the 1st image projection apparatus to the 4th image projection apparatus. 視線誘導処理の例を説明する図(1)。The figure (1) explaining the example of the line-of-sight guidance processing. 視線誘導処理の例を説明する図(2)。The figure (2) explaining the example of the line-of-sight guidance processing. 視線誘導処理の例を説明する図(3)。The figure (3) explaining the example of the line-of-sight guidance processing. 映像投射システムの映像投射範囲を示す図。The figure which shows the image projection range of an image projection system. 第1映像投射装置〜第4映像投射装置の映像投射範囲の切り替えを説明する図。The figure explaining the switching of the image projection range of the 1st image projection apparatus to the 4th image projection apparatus.

以下、本実施形態の映像投射システム1が車両用前照灯、車載カメラ、その画像処理部等と共に搭載されている車両を例に説明する。 Hereinafter, a vehicle in which the image projection system 1 of the present embodiment is mounted together with a vehicle headlight, an in-vehicle camera, an image processing unit thereof, and the like will be described as an example.

図1に示されるように、映像投射システム1は、第1〜第4映像投射装置10A〜10D(以下、映像投射装置10という場合がある。)と、入力映像を表す映像信号及び後述するMP信号が入力されて、映像投射範囲の輝度分布を表す個別映像信号及び後述するオフセット信号を、各映像投射装置10に出力する映像信号分配部20とを備える。以下では、本実施形態の映像投射システムを、4台の映像投射装置を備える映像投射システムを用いて説明するが、装置数は4台に限定されず、2台以上であればよい。 As shown in FIG. 1, the video projection system 1 includes first to fourth video projection devices 10A to 10D (hereinafter, may be referred to as a video projection device 10), a video signal representing an input video, and an MP described later. A video signal distribution unit 20 that receives a signal and outputs an individual video signal representing a brightness distribution in the video projection range and an offset signal described later to each video projection device 10 is provided. Hereinafter, the image projection system of the present embodiment will be described using an image projection system including four image projection devices, but the number of devices is not limited to four, and may be two or more.

初めに、本実施形態の映像信号分配部20(本発明の「合成映像生成部」、「輝度調整部」、「注目領域設定部」及び「担当投射範囲切替部」に相当する)は、CPU、ROM、RAM並びにI/O回路及びA/D回路等の電子回路等により構成され(図示省略)、映像ソースから得られた映像信号により表現される入力映像の輝度分布から各映像投射装置10に与える映像投射範囲の輝度分布を抽出する。そして、映像信号分配部20は、抽出された映像投射範囲の輝度分布を表す個別映像信号を各映像投射装置10に出力する。 First, the video signal distribution unit 20 of the present embodiment (corresponding to the "synthetic image generation unit", "luminance adjustment unit", "attention area setting unit", and "charged projection range switching unit" of the present invention) is a CPU. , ROM, RAM, and electronic circuits such as I / O circuits and A / D circuits (not shown), and each image projection device 10 is based on the luminance distribution of the input image expressed by the image signal obtained from the image source. The brightness distribution of the image projection range given to is extracted. Then, the video signal distribution unit 20 outputs an individual video signal representing the brightness distribution of the extracted video projection range to each video projection device 10.

また、映像信号分配部20は、入力映像の輝度分布の最高輝度点の位置を特定し、各映像投射装置10の映像投射範囲の中心を最高輝度点の位置に設定可能なオフセット信号を、個別映像信号と共に各映像投射装置10に出力する。 Further, the video signal distribution unit 20 identifies the position of the highest luminance point in the brightness distribution of the input video, and individually sets an offset signal capable of setting the center of the video projection range of each video projection device 10 to the position of the highest luminance point. It is output to each image projection device 10 together with the image signal.

オフセット信号とは、後述するMEMSミラー106の振れ角の制限に由来する映像投射可能な範囲を有する映像投射装置に対して、映像投射範囲を描画範囲のうちの所望の範囲にオフセットする(位置付ける)信号である。具体的には、オフセット信号は、映像が投射される画面全体の中心を基準位置として、基準位置から水平方向及び垂直方向に移動させる変位量を示す信号である。 The offset signal is used to offset (position) the image projection range to a desired range of the drawing range with respect to the image projection device having a range in which the image can be projected due to the limitation of the deflection angle of the MEMS mirror 106 described later. It is a signal. Specifically, the offset signal is a signal indicating the amount of displacement to be moved in the horizontal and vertical directions from the reference position with the center of the entire screen on which the image is projected as the reference position.

各映像投射装置10は、オフセット信号に応じて投射する映像を上下左右方向に移動できるようになっている。投射映像の上下左右方向への移動は、各映像投射装置10にステッピングモータ等を用いた移動機構を設けることにより実施される。 Each image projection device 10 can move the image to be projected in response to the offset signal in the up, down, left, and right directions. The movement of the projected image in the vertical and horizontal directions is carried out by providing each image projection device 10 with a moving mechanism using a stepping motor or the like.

また、映像信号分配部20は、映像投射範囲内の特定領域(マーキングポイント)の輝度を高くして、ドライバーの視線を特定領域に誘導するためのMP信号を受信して、個別映像信号を各映像投射装置10に出力する。 Further, the video signal distribution unit 20 increases the brightness of a specific region (marking point) within the video projection range, receives an MP signal for guiding the driver's line of sight to the specific region, and transmits each individual video signal. Output to the image projection device 10.

MP信号は、車載カメラ40の撮像画像を元に画像処理部50で処理された信号であり、マーキングポイントの映像投射範囲(最大範囲)における座標情報を含んでいる。 The MP signal is a signal processed by the image processing unit 50 based on the image captured by the vehicle-mounted camera 40, and includes coordinate information in the image projection range (maximum range) of the marking point.

図2に示されるように、本実施形態の各映像投射装置10は、MEMSミラー106、半導体光源112、MEMSミラー106及び半導体光源112に信号を出力する制御部30とから構成され、後述するラスタースキャンを行う装置である。 As shown in FIG. 2, each image projection device 10 of the present embodiment includes a MEMS mirror 106, a semiconductor light source 112, a MEMS mirror 106, and a control unit 30 that outputs a signal to the semiconductor light source 112, and is a raster described later. It is a device that performs scanning.

各映像投射装置10の制御部30は、パーソナルコンピュータ、カメラシステム等の映像ソースから出力された映像信号に基づいて生成された個別映像信号が入力される個別映像信号入力部102と、受信した個別映像信号を処理するために所定ビット毎に書き込み・読み出しが行われる個別映像信号蓄積部104と、MEMSミラー106に対して交流波の駆動信号を出力するMEMS駆動部108と、駆動信号に応じてMEMSミラー106が回動軸線周りを回動したとき、MEMSミラー106の振れ角に応じた電圧を出力するセンサからの信号が入力されるセンサ信号入力部110と、MEMESミラー106に光を照射するLEDや半導体レーザ等の半導体光源112に対して画素データを出力する光源駆動部114と、個別映像信号を処理して各映像投射装置10の制御を行う個別映像信号処理部116とから構成される。 The control unit 30 of each image projection device 10 is an individual image signal input unit 102 into which an individual image signal generated based on an image signal output from an image source such as a personal computer or a camera system is input, and an individual received individual image signal input unit 102. An individual video signal storage unit 104 that writes / reads each predetermined bit to process a video signal, a MEMS drive unit 108 that outputs an AC wave drive signal to the MEMS mirror 106, and a MEMS drive unit 108 that outputs an AC wave drive signal to the MEMS mirror 106, depending on the drive signal. When the MEMS mirror 106 rotates around the rotation axis, the sensor signal input unit 110 to which a signal from a sensor that outputs a voltage corresponding to the deflection angle of the MEMS mirror 106 is input and the MEMES mirror 106 are irradiated with light. It is composed of a light source driving unit 114 that outputs pixel data to a semiconductor light source 112 such as an LED or a semiconductor laser, and an individual video signal processing unit 116 that processes individual video signals and controls each image projection device 10. ..

ここでは、説明の便宜のため、MEMSミラー106を駆動する交流波の駆動信号として正弦波形状の駆動信号を用いて説明するが、正弦波形状の駆動信号に対して90°位相が遅れた余弦波形状の信号等を用いてもよい。 Here, for convenience of explanation, a sine wave-shaped drive signal will be used as the AC wave drive signal for driving the MEMS mirror 106, but a cosine whose phase is delayed by 90 ° with respect to the sine wave-shaped drive signal. A wave-shaped signal or the like may be used.

個別映像信号入力部102は、映像信号を処理するために、入力された個別映像信号を個別映像信号処理部116に出力する。個別映像信号入力部102としては、VGA(アナログRGB)、DVI、HDMI(登録商標)、Display Port等の映像信号レシーバを用いることができる。 The individual video signal input unit 102 outputs the input individual video signal to the individual video signal processing unit 116 in order to process the video signal. As the individual video signal input unit 102, a video signal receiver such as VGA (analog RGB), DVI, HDMI (registered trademark), DisplayPort or the like can be used.

個別映像信号蓄積部104では、個別映像信号入力部102から出力された個別映像信号を処理するために信号の書き込み、読み出しが行われる。個別映像信号蓄積部104としては、SDRAM等を用いることができる。本実施形態の映像投射システムでは、映像信号は高速信号として生成されるため、DDR2-SDRAM、DDR3-SDRAMが好適である。 The individual video signal storage unit 104 writes and reads signals in order to process the individual video signal output from the individual video signal input unit 102. As the individual video signal storage unit 104, SDRAM or the like can be used. In the video projection system of the present embodiment, since the video signal is generated as a high-speed signal, DDR2- SDRAM and DDR3-SDRAM are suitable.

MEMS駆動部108(本発明の「ミラー制御部」に相当する)は、MEMSミラー106に対する駆動信号を出力するために、個別映像信号処理部116からのデジタル信号をアナログ信号に変換するD/Aコンバーターと、その出力信号をMEMSミラー106の駆動電圧レベルまで増幅するオペアンプから構成される。 The MEMS drive unit 108 (corresponding to the “mirror control unit” of the present invention) is a D / A that converts a digital signal from the individual video signal processing unit 116 into an analog signal in order to output a drive signal to the MEMS mirror 106. It consists of a converter and an operational amplifier that amplifies its output signal to the drive voltage level of the MEMS mirror 106.

センサ信号入力部110は、駆動信号に応じてMEMSミラー106が回動軸線周りに回動し、走査方向に回動したときのMEMSミラー106の振れ角に応じた電圧を出力するセンサからの信号が入力される信号入力部である。センサ信号入力部110は、受信したアナログ信号を個別映像信号処理部116に出力されるデジタル信号に変換するA/Dコンバーターと、A/Dコンバーターに対する適切な入力レベルを確保するオペアンプとから構成される。 The sensor signal input unit 110 is a signal from the sensor that outputs a voltage corresponding to the deflection angle of the MEMS mirror 106 when the MEMS mirror 106 rotates around the rotation axis in response to the drive signal and rotates in the scanning direction. Is the signal input unit to which is input. The sensor signal input unit 110 includes an A / D converter that converts the received analog signal into a digital signal output to the individual video signal processing unit 116, and an operational amplifier that secures an appropriate input level for the A / D converter. To.

光源駆動部114は、個別映像信号処理部116から出力されたデジタル信号をアナログ信号に変換する高速D/Aコンバーターと、RGB各色の半導体光源112を駆動できるだけの電流容量を持つドライバトランジスタ等とから構成される。 The light source drive unit 114 is composed of a high-speed D / A converter that converts a digital signal output from the individual video signal processing unit 116 into an analog signal, a driver transistor having a current capacity that can drive the semiconductor light source 112 of each RGB color, and the like. It is composed.

個別映像信号処理部116は、個別映像信号を処理して各映像投射装置10の制御を行う。個別映像信号処理部116は、例えば、FPGA(Field-Programmable Gate Array)、マイクロプロセッサ、又はこれらのハイブリッドデバイス(EPP(Extensible Processing Platform)やSoC(System on Chip))等を用いることができる。 The individual video signal processing unit 116 processes the individual video signals and controls each video projection device 10. The individual video signal processing unit 116 can use, for example, an FPGA (Field-Programmable Gate Array), a microprocessor, or a hybrid device (EPP (Extensible Processing Platform) or SoC (System on Chip)) thereof.

また、図3に示されるように、個別映像信号処理部116は、個別映像信号を個別映像信号入力部102から個別映像信号蓄積部104に出力するインターフェースとしての入力映像処理部120と、個別映像信号蓄積部104から出力された信号等に基づいて、MEMS駆動部108へ送出するMEMSミラー106の駆動信号及び光源駆動部114に送出する画素データ抽出の基礎となる信号等を生成する駆動信号生成部122と、センサ信号入力部110及び駆動信号生成部122から出力された信号に基づいて、共振周波数追従制御を行い、画素データ抽出部126に信号を送出する駆動信号演算処理部124と、駆動信号生成部122及び駆動信号演算処理部124から出力された信号に基づいて、光源駆動部114に送出する画素データを抽出する画素データ抽出部126と、これらの各信号処理の制御パラメータに対する制御を行うと共に、スイッチ、UART(Universal Asynchronous Receiver Transmitter)等の図示しない外部制御手段とのインターフェースとしての機能を果たす総合制御部128とから構成される。 Further, as shown in FIG. 3, the individual video signal processing unit 116 includes an input video processing unit 120 as an interface for outputting the individual video signal from the individual video signal input unit 102 to the individual video signal storage unit 104, and the individual video. Based on the signal output from the signal storage unit 104, the drive signal is generated to generate the drive signal of the MEMS mirror 106 to be sent to the MEMS drive unit 108 and the signal to be the basis of pixel data extraction to be sent to the light source drive unit 114. A drive signal calculation processing unit 124 that performs resonance frequency tracking control and sends a signal to the pixel data extraction unit 126 based on the signals output from the sensor signal input unit 110 and the drive signal generation unit 122. The pixel data extraction unit 126 that extracts the pixel data to be sent to the light source drive unit 114 based on the signals output from the signal generation unit 122 and the drive signal calculation processing unit 124, and the control parameters for each of these signal processing are controlled. It is composed of a comprehensive control unit 128 that functions as an interface with an external control means (not shown) such as a switch and a UART (Universal Asynchronous Receiver Transmitter).

また、図4に示されるように、本実施形態のMEMSミラー106を備えるMEMS130は、反射面を有するMEMSミラー106を一対のトーションバー131A,131Bにより支持する第1支持部132と、MEMSミラー106を第1支持部132に対して一対のトーションバー131A,131B、すなわち、主走査方向(Y軸周り)に回動させる第1のアクチュエータ134,136と、第1支持部132を支持する第2支持部138と、第1支持部132を第2支持部138に対して副走査方向(X軸周り)に回動させる第2のアクチュエータ140,142とを備え、2次元走査が可能な2軸型光偏向器である。 Further, as shown in FIG. 4, the MEMS 130 including the MEMS mirror 106 of the present embodiment has a first support portion 132 in which the MEMS mirror 106 having a reflecting surface is supported by a pair of torsion bars 131A and 131B, and a MEMS mirror 106. The pair of torsion bars 131A and 131B with respect to the first support portion 132, that is, the first actuators 134 and 136 that rotate in the main scanning direction (around the Y axis) and the second support portion 132. A two-axis capable of two-dimensional scanning provided with a support portion 138 and second actuators 140 and 142 that rotate the first support portion 132 with respect to the second support portion 138 in the sub-scanning direction (around the X-axis). It is a type light deflector.

MEMS130を備える各映像投射装置10は、後述する映像投射範囲のうち描画範囲のみが2次元走査に応じて光が投射されるように、半導体光源112が点灯されるので、光の利用効率の向上を図ることができる。 In each image projection device 10 provided with the MEMS 130, the semiconductor light source 112 is turned on so that light is projected only in the drawing range in the image projection range described later in accordance with the two-dimensional scanning, so that the light utilization efficiency is improved. Can be planned.

MEMS130のアクチュエータとしては、圧電方式、静電方式、電磁形式のアクチュエータを用いることができる。本実施形態では、第1のアクチュエータ134,136として、圧電アクチュエータを採用している。また、第2のアクチュエータ140,142はそれぞれ、4つの圧電カンチレバーが連結されて構成されている。圧電カンチレバー140A〜140D,142A〜142Dは、支持体と、下部電極と、圧電体と、上部電極とから構成された積層体を含む。 As the actuator of the MEMS 130, a piezoelectric type, an electrostatic type, or an electromagnetic type actuator can be used. In this embodiment, a piezoelectric actuator is adopted as the first actuators 134 and 136. Further, each of the second actuators 140 and 142 is configured by connecting four piezoelectric cantilever levers. The piezoelectric cantilever 140A to 140D and 142A to 142D include a laminate composed of a support, a lower electrode, a piezoelectric body, and an upper electrode.

映像信号に基づく映像の投射は、水平方向の高速走査、垂直方向の低速走査によって実行される。そのため、MEMSミラー106は、高速動作に対応した第1のアクチュエータ134,136の共振駆動により主走査方向に回動し、低速動作に対応した第2のアクチュエータ140,142の非共振駆動により副走査方向に回動する。 The projection of the image based on the image signal is executed by high-speed scanning in the horizontal direction and low-speed scanning in the vertical direction. Therefore, the MEMS mirror 106 rotates in the main scanning direction by the resonance drive of the first actuators 134 and 136 corresponding to the high-speed operation, and the sub-scanning is performed by the non-resonant drive of the second actuators 140 and 142 corresponding to the low-speed operation. Rotate in the direction.

本実施形態では、副走査方向の回動は低速動作であるため、非共振駆動のアクチュエータを用いたが、これに限定されず、共振駆動のアクチュエータを用いてもよい。 In the present embodiment, since the rotation in the sub-scanning direction is a low-speed operation, a non-resonant drive actuator is used, but the present invention is not limited to this, and a resonance drive actuator may be used.

MEMSミラー106の回動状態を検出するために、第1支持部132には、トーションバー131A,131Bと隣接する位置にセンサ144が、また、第2のアクチュエータ140,142の近傍にセンサ146が設けられている。位置センサとしては、圧電効果を用いたセンサやピエゾ抵抗効果を用いたセンサを採用することができる。圧電効果を用いたセンサは、MEMSミラー106の振れ角の変位量に対して微分値を返す速度センサとして動作する。また、ピエゾ抵抗効果を用いたセンサは、MEMSミラー106の振れ角の変位量に比例した値を返す位置センサとして動作する。 In order to detect the rotational state of the MEMS mirror 106, the first support portion 132 has a sensor 144 at a position adjacent to the torsion bars 131A and 131B, and a sensor 146 near the second actuators 140 and 142. It is provided. As the position sensor, a sensor using the piezoelectric effect or a sensor using the piezoresistive effect can be adopted. The sensor using the piezoelectric effect operates as a velocity sensor that returns a differential value with respect to the displacement amount of the deflection angle of the MEMS mirror 106. Further, the sensor using the piezoresistive effect operates as a position sensor that returns a value proportional to the displacement amount of the deflection angle of the MEMS mirror 106.

なお、同一の製造プロセスでアクチュエータ及びセンサの積層構造を形成できるという点では、圧電効果を用いたアクチュエータ及びセンサを用いることが好ましい。 It is preferable to use an actuator and a sensor using a piezoelectric effect in that a laminated structure of an actuator and a sensor can be formed by the same manufacturing process.

また、センサ144,146はそれぞれ、少なくとも1つ設ける必要があるが、MEMSミラー106の主走査方向及び副走査方向の回動安定性及び差動信号のノイズキャンセリング効果の向上のために、図4に示されるように、Y軸及びX軸を中心として線対称に2つ設けることが好ましい。 Further, at least one of the sensors 144 and 146 needs to be provided, respectively, but in order to improve the rotational stability of the MEMS mirror 106 in the main scanning direction and the sub-scanning direction and the noise canceling effect of the differential signal, FIG. As shown in 4, it is preferable to provide two lines symmetrically about the Y-axis and the X-axis.

次に、図5〜図7を参照して、主に半導体光源112と、MEMS130のMEMSミラー106とを用いたラスタースキャンについて説明する。 Next, a raster scan mainly using the semiconductor light source 112 and the MEMS mirror 106 of the MEMS 130 will be described with reference to FIGS. 5 to 7.

図5に示されるように、半導体光源112からMEMSミラー106に入射して反射された光は、映像投射範囲に映像(走査軌跡)を描画する。映像の描画に関して、副走査方向に回動するMEMSミラー106により、図5の映像投射範囲において垂直方向の走査が実行される。本実施形態の副走査方向に回動するMEMSミラー106の駆動信号の波形は、図6Aに示される鋸波形状とするのが好ましい。 As shown in FIG. 5, the light incident on and reflected from the semiconductor light source 112 on the MEMS mirror 106 draws an image (scanning locus) in the image projection range. Regarding the drawing of the image, the MEMS mirror 106 that rotates in the sub-scanning direction executes the scanning in the vertical direction in the image projection range of FIG. The waveform of the drive signal of the MEMS mirror 106 rotating in the sub-scanning direction of the present embodiment preferably has a sawtooth shape shown in FIG. 6A.

副走査方向に回動するMEMSミラー106は低速駆動されるので、共振駆動のアクチュエータと非共振駆動のアクチュエータの何れも用いることができるが、非共振駆動のアクチュエータに好適な鋸波形状の駆動信号を用いて有効描画時間を長く確保することにより、映像投射範囲の明るさの向上を図ることができる。 Since the MEMS mirror 106 rotating in the sub-scanning direction is driven at a low speed, either a resonance drive actuator or a non-resonance drive actuator can be used, but a sawtooth-shaped drive signal suitable for the non-resonance drive actuator can be used. By securing a long effective drawing time by using the above, it is possible to improve the brightness of the image projection range.

具体的には、鋸波形状の駆動信号には、時間経過に対する駆動信号の波形の傾きが緩やかな区間と、急峻な区間とが交互に現れる(図6A参照)。そして、鋸波形状の駆動信号の傾きが緩やかな区間で半導体光源112を点灯して描画を行い(描画区間)、傾きが急峻な区間で半導体光源112を消灯する非描画区間(垂直帰線区間)を設ける。 Specifically, in the sawtooth-shaped drive signal, a section in which the slope of the waveform of the drive signal is gentle with respect to the passage of time and a section in which the slope is steep appear alternately (see FIG. 6A). Then, the semiconductor light source 112 is turned on and drawn in a section where the sawtooth-shaped drive signal has a gentle slope (drawing interval), and the semiconductor light source 112 is turned off in a section where the slope is steep (vertical blanking interval). ) Is provided.

鋸波形状の駆動信号の傾きが変化する頂点付近では、副走査方向の回動するMEMSミラー106は非常に低速な駆動状態になるため、当該頂点付近の区間に対応する描画部分は描画範囲の他の部分と比較すると特に明るく見える。そのため、当該頂点付近の区間では、半導体光源112を消灯することにより、描画範囲で表される画面全体の明るさの均一性を実現し得る。 In the vicinity of the apex where the inclination of the sawtooth-shaped drive signal changes, the MEMS mirror 106 rotating in the sub-scanning direction is in a very low-speed drive state, so that the drawing portion corresponding to the section near the apex is the drawing range. It looks particularly bright when compared to other parts. Therefore, in the section near the apex, the uniformity of the brightness of the entire screen represented by the drawing range can be realized by turning off the semiconductor light source 112.

一方、主走査方向に回動するMEMSミラー106により、図5の映像投射範囲において水平方向の走査が実行される。本実施形態の主走査方向に回動するMEMSミラー106の駆動信号の波形は、図6Bに示される交流波、例えば、正弦波形状とするのが好ましい。主走査方向に回動するMEMSミラー106は高速駆動されるので、共振駆動のアクチュエータを用いることが好ましく、また、正弦波形状の駆動信号は、共振駆動のアクチュエータに適しているためである。 On the other hand, the MEMS mirror 106 that rotates in the main scanning direction performs horizontal scanning in the image projection range of FIG. The waveform of the drive signal of the MEMS mirror 106 rotating in the main scanning direction of the present embodiment is preferably an AC wave shown in FIG. 6B, for example, a sine wave shape. Since the MEMS mirror 106 rotating in the main scanning direction is driven at high speed, it is preferable to use a resonance-driven actuator, and the sinusoidal drive signal is suitable for the resonance-driven actuator.

具体的には、正弦波形状の駆動信号には、時間経過に対する駆動信号の波形の頂点付近の区間と、それ以外の区間とが交互に現れる(図6B参照)。そのため、図5に示されるように、往復走査、すなわち、右方向走査及び左方向走査の両方で描画を行うことが、有効描画時間の確保の点から好適である。片側走査、例えば、右方向走査(左方向走査)のみで描画を行い、左方向走査(右方向走査)においては非描画区間(水平帰線区間)を設ける方式と比較して、往復走査、すなわち、右方向走査と左方向走査の両方で描画を行い、有効描画時間を長く確保することができる。 Specifically, in the sinusoidal drive signal, a section near the apex of the waveform of the drive signal with respect to the passage of time and a section other than the apex appear alternately (see FIG. 6B). Therefore, as shown in FIG. 5, it is preferable to perform drawing by reciprocating scanning, that is, both rightward scanning and leftward scanning, from the viewpoint of ensuring an effective drawing time. One-sided scanning, for example, drawing is performed only in the right direction (left direction scanning), and in the left direction scanning (right direction scanning), reciprocating scanning, that is, as compared with a method in which a non-drawing section (horizontal return section) is provided. , Drawing can be performed by both right-hand scanning and left-hand scanning, and a long effective drawing time can be secured.

さらに、正弦波形状の駆動信号の頂点付近(水平折返区間)では、主走査方向に回動するMEMSミラー106は非常に低速な駆動状態になるため、当該頂点付近の区間に対応する描画部分は描画範囲の他の部分と比較すると特に明るく見える。描画範囲で表される画面全体の明るさの均一性を実現し得るため、図6Bに示されるように、経過時間に対して隣り合う当該頂点付近の区間(水平折返区間)の間の区間で半導体光源112を点灯して図5の水平方向の走査軌跡の1ライン分の描画を行い、水平折返区間で半導体光源112を消灯して非描画区間を設ける。 Further, in the vicinity of the apex of the sinusoidal drive signal (horizontal folding section), the MEMS mirror 106 rotating in the main scanning direction is in a very low speed driving state, so that the drawing portion corresponding to the section near the apex is It looks particularly bright when compared to other parts of the drawing range. In order to realize the uniformity of the brightness of the entire screen represented by the drawing range, as shown in FIG. 6B, in the section between the sections near the apex adjacent to the elapsed time (horizontal folding section). The semiconductor light source 112 is turned on to draw one line of the scanning locus in the horizontal direction of FIG. 5, and the semiconductor light source 112 is turned off in the horizontal folding section to provide a non-drawing section.

上述したラスタースキャンを実施することにより、図7に示されるように、被走査面での走査軌跡全体から水平方向及び垂直方向において、図5の映像投射範囲の周縁領域が切り取られた描画範囲が得られる。 By performing the above-mentioned raster scan, as shown in FIG. 7, the drawing range in which the peripheral region of the image projection range of FIG. 5 is cut out in the horizontal and vertical directions from the entire scanning locus on the scanned surface is obtained. can get.

次に、映像信号分配部20による分配処理による映像について説明する。映像信号分配部20の分配処理では、画面内に1点存在する最高輝度点を中心に、水平方向、垂直方向の輝度が共に単調減少する分布を持った映像信号を処理する。 Next, the video produced by the distribution processing by the video signal distribution unit 20 will be described. In the distribution processing of the video signal distribution unit 20, a video signal having a distribution in which the brightness in the horizontal direction and the brightness in the vertical direction decrease monotonically is processed centering on the highest brightness point existing on the screen.

図8は、本実施形態の映像投射システム1の第1〜第4映像投射装置10A〜10Dにより、MEMSミラー106の水平方向及び垂直方向の振れ角で表された投射角度範囲(映像投射範囲)と、相対輝度で表された最大輝度との関係を例示した図である。 FIG. 8 shows a projection angle range (image projection range) represented by the horizontal and vertical deflection angles of the MEMS mirror 106 by the first to fourth image projection devices 10A to 10D of the image projection system 1 of the present embodiment. It is a figure which illustrated the relationship with the maximum brightness expressed by a relative brightness.

図8に示されるように、第1〜第4映像投射装置10A〜10Dの投射角度範囲と最大輝度は、相対輝度の上限値である最大輝度が大きい映像投射装置から順に、投射角度範囲が狭くなるように設定されている。なお、第1〜第4映像投射装置10A〜10Dの画素ピッチは、制御し易さの観点から同一に設定されているが、特にこれに限定されず、各装置により画素ピッチを異なる値に設定してもよい。第1〜第4映像投射装置10A〜10Dの画素ピッチが異なる値に設定された場合、各装置において解像度のスケーリングを行う。 As shown in FIG. 8, the projection angle range and the maximum brightness of the first to fourth image projection devices 10A to 10D are narrower in order from the image projection device having the largest maximum brightness, which is the upper limit of the relative brightness. It is set to be. The pixel pitches of the first to fourth image projection devices 10A to 10D are set to be the same from the viewpoint of ease of control, but the pixel pitch is not particularly limited to this, and the pixel pitch is set to a different value depending on each device. You may. When the pixel pitches of the first to fourth image projection devices 10A to 10D are set to different values, the resolution is scaled in each device.

次に、図9に、映像信号分配部20により通常時に行われる、一連の映像分配処理結果を示す。第1映像投射装置10Aは、最大輝度が最も低く、投射角度範囲が最も広い第1の映像投射範囲の投射を担当する。また、第2〜第4映像投射装置10B〜10Dは、それぞれ第2〜第4の映像投射範囲の投射を担当する。そして、第1〜第4映像投射装置10A〜10Dに出力される個別映像信号で表現される輝度分布の映像(サブ映像)を結合して、最終的な映像(合成映像)が生成される。 Next, FIG. 9 shows a series of video distribution processing results that are normally performed by the video signal distribution unit 20. The first image projection device 10A is in charge of projecting the first image projection range having the lowest maximum brightness and the widest projection angle range. Further, the second to fourth image projection devices 10B to 10D are in charge of projection of the second to fourth image projection ranges, respectively. Then, the images (sub-images) of the luminance distribution represented by the individual image signals output to the first to fourth image projection devices 10A to 10D are combined to generate the final image (composite image).

第1〜第4映像投射装置10A〜10Dから投射される映像は、中央部が最も明るく(最高輝度点)、周辺部にいくにつれて徐々に暗くなる輝度分布となる。輝度分布は、必ずしも上下・左右が対称である必要はなく、部分的に非投射範囲(マスク部X)があってもよい。 The images projected from the first to fourth image projection devices 10A to 10D have a luminance distribution in which the central portion is the brightest (highest luminance point) and gradually becomes darker toward the peripheral portions. The brightness distribution does not necessarily have to be symmetrical in the vertical and horizontal directions, and there may be a partial non-projection range (mask portion X).

なお、各映像投射範囲は排他的である必要はなく、むしろ積極的に重ね合わせることで、仮に第1〜第4映像投射装置10A〜10Dの何れかに外部から振動が加わった場合等にも、分配による映像の継ぎ目が目立たなくなるという利点が生じる。 It should be noted that each image projection range does not have to be exclusive, but rather by positively superimposing, even if vibration is applied from the outside to any of the first to fourth image projection devices 10A to 10D. , There is an advantage that the seam of the image due to the distribution becomes inconspicuous.

ここで、本発明の輝度調整部で実行される処理(視線誘導処理)について説明する。視線誘導処理は、車載カメラ40の撮像画像から(図1参照)、相対輝度の低い映像投射範囲内に人や動物等の監視対象物が認識された場合に行われる処理である。また、視線誘導処理は、映像信号分配部20が上述したMP信号を受信することによって実行される。 Here, a process (line-of-sight guidance process) executed by the luminance adjusting unit of the present invention will be described. The line-of-sight guidance process is a process performed when a monitored object such as a person or an animal is recognized within an image projection range having low relative brightness from an image captured by the vehicle-mounted camera 40 (see FIG. 1). Further, the line-of-sight guidance process is executed by the video signal distribution unit 20 receiving the above-mentioned MP signal.

想定されるケースとしては、車両用前照灯の使用時にドライバーの死角から歩行者が現れた場合である。図9においては、ドライバーの視線を誘導するマーキングポイントMPが、投射角度範囲が比較的広く、相対輝度が低い第2の映像投射範囲内にある。 A possible case is when a pedestrian appears from the driver's blind spot when using the vehicle headlights. In FIG. 9, the marking point MP that guides the driver's line of sight is within the second image projection range in which the projection angle range is relatively wide and the relative brightness is low.

画像処理部50からMP信号を受信した映像信号分配部20は、まず、マーキングポイントMPが合成映像のどこに位置するかを把握する。次に、局所輝度を実現するために、第1〜第4映像投射装置10A〜10Dのうち、少なくとも1つの装置について、通常時の合成映像を生成する映像分配処理から視線誘導処理へと切り替える。 The video signal distribution unit 20 that has received the MP signal from the image processing unit 50 first grasps where the marking point MP is located in the composite video. Next, in order to realize the local brightness, at least one of the first to fourth image projection devices 10A to 10D is switched from the image distribution process for generating the composite image at the normal time to the line-of-sight guidance process.

通常、合成映像の形成に最も影響の少ない第1映像投射装置10Aを局所輝度の担当とするが、特にこれに限定されず、場合によっては2以上の装置に担当させてもよい。局所輝度の担当となった装置(今回、第1映像投射装置10A)は、その後、後述する各処理を行う。 Normally, the first image projection device 10A, which has the least influence on the formation of the composite image, is in charge of the local luminance, but the region is not particularly limited to this, and in some cases, two or more devices may be in charge. The device in charge of the local luminance (this time, the first image projection device 10A) performs each process described later.

次に、図10〜図12を参照して、視線誘導処理の例を説明する。 Next, an example of the line-of-sight guidance process will be described with reference to FIGS. 10 to 12.

映像信号分配部20において、MP信号に基づいて生成された個別映像信号は、第1映像投射装置10Aの個別映像信号入力部102に入力される(図2参照)。これにより、個別映像信号処理部116でMEMS130の駆動信号が生成される。 In the video signal distribution unit 20, the individual video signal generated based on the MP signal is input to the individual video signal input unit 102 of the first video projection device 10A (see FIG. 2). As a result, the individual video signal processing unit 116 generates a drive signal for the MEMS 130.

その後、図10に示されるように、一旦、合成映像(映像投射範囲全体)の輝度を最大に設定する。これにより、ドライバーが歩行者に気付いていない場合であっても、車両用前照灯の例外的な照射によりドライバーの注意が引き立てられる。なお、このときの輝度は最大輝度に限られず、一定以上のレベルであればよい。 After that, as shown in FIG. 10, the brightness of the composite image (the entire image projection range) is once set to the maximum. This draws the driver's attention with the exceptional illumination of the vehicle headlights, even if the driver is unaware of the pedestrian. The brightness at this time is not limited to the maximum brightness, and may be at a certain level or higher.

輝度が最大となるのは一瞬であるが、この時点でドライバーが未だ歩行者の存在に気付かない場合もある。そこで、この後、合成映像の外周部からマーキングポイントMP(注目領域)に向かって、時間の経過に伴って徐々に輝度を低下させていく。 The maximum brightness is momentary, but at this point the driver may not yet be aware of the presence of pedestrians. Therefore, after that, the brightness is gradually reduced with the passage of time from the outer peripheral portion of the composite image toward the marking point MP (attention region).

具体的は、図11に示されるように、マーキングポイントMPを残して第1の映像投射範囲を縮小していく。映像投射範囲の垂直方向は、MEMSミラー106の副走査方向(X軸周り)振れ角に依存するが、徐々にMEMSミラー106の振幅が小さくなるように制御する。映像投射範囲をマーキングポイントMPに収束させて輝度を向上させると共に、ズームインのような演出を行うようにすれば、視線誘導効果の更なる向上が見込まれる。 Specifically, as shown in FIG. 11, the first image projection range is reduced while leaving the marking point MP. The vertical direction of the image projection range depends on the sub-scanning direction (around the X-axis) runout angle of the MEMS mirror 106, but the amplitude of the MEMS mirror 106 is gradually reduced. If the image projection range is converged to the marking point MP to improve the brightness and an effect such as zooming in is performed, the line-of-sight guidance effect is expected to be further improved.

なお、本実施形態おいては、第1〜第4映像投射装置10A〜10Dは基本的に同一性能であるため、映像投射範囲と最大輝度は反比例の関係にある。すなわち、映像投射範囲を縮小していくことにより、たとえ相対輝度が最も低い第1の映像投射範囲であっても、最も相対輝度が高い第4の映像投射範囲と同等の輝度(相対輝度2048)を得ることが可能である。 In the present embodiment, since the first to fourth image projection devices 10A to 10D have basically the same performance, the image projection range and the maximum brightness are in an inversely proportional relationship. That is, by reducing the image projection range, even if the first image projection range has the lowest relative brightness, the brightness is equivalent to the fourth image projection range having the highest relative brightness (relative brightness 2048). It is possible to obtain.

その後、図12に示されるように、マーキングポイントMPを含む狭小領域まで第1の映像投射範囲を縮小していく。これにより、ドライバーの視線はマーキングポイントMPに誘導されて、必ず歩行者の存在に気付くようになる。 After that, as shown in FIG. 12, the first image projection range is reduced to a narrow area including the marking point MP. As a result, the driver's line of sight is guided to the marking point MP, and the presence of a pedestrian is always noticed.

映像投射範囲の水平方向は、MEMSミラー106の主走査方向(Y軸周り)の振れ角に依存するため、マーキングポイントMPを含む領域であって、MEMSミラー106の振幅中心に対する対称位置までしか映像投射範囲を狭めることができない。 Since the horizontal direction of the image projection range depends on the deflection angle of the MEMS mirror 106 in the main scanning direction (around the Y axis), the image is in the region including the marking point MP and only up to a position symmetrical with respect to the amplitude center of the MEMS mirror 106. The projection range cannot be narrowed.

なお、第1映像投射装置10Aにステッピングモータを用いた移動機構を設けることで、第1の映像投射範囲を水平方向に移動させることもできる。水平方向への移動によりMEMSミラー106の振幅中心がずれるので、最終的な第1の映像投射範囲をさらに狭めることができる。 By providing the first image projection device 10A with a moving mechanism using a stepping motor, the first image projection range can be moved in the horizontal direction. Since the amplitude center of the MEMS mirror 106 is deviated by the movement in the horizontal direction, the final first image projection range can be further narrowed.

この歩行者が道路を横断しようとして動作した場合には、歩行者を追従するようにマーキングポイントMPを移動させてもよい。また、このとき、歩行者が車両用前照灯の光に幻惑されないように、顔の部分のみマスク部としてもよい。 When the pedestrian moves to cross the road, the marking point MP may be moved to follow the pedestrian. Further, at this time, only the face portion may be used as the mask portion so that the pedestrian is not dazzled by the light of the vehicle headlight.

最後に、図13,図14を参照して、映像投射システム1の映像投射範囲の切り替えについて説明する。 Finally, switching of the image projection range of the image projection system 1 will be described with reference to FIGS. 13 and 14.

本実施形態の映像投射システム1では、第1〜第4映像投射装置10A〜10Dが担当する映像投射範囲を所定のタイミングで切り替えることができる。第1映像投射装置10Aは、最大輝度が最も低く、投射角度範囲が最も広い映像投射範囲a(図13参照)の投射を担当している。また、第2映像投射装置10Bは映像投射範囲b、第3映像投射装置10Cは映像投射範囲cの投射を担当し、第4映像投射装置10Dは、最大輝度が最も高く、投射角度範囲が最も狭い映像投射範囲dの投射を担当している(図14の「状態1」)。 In the image projection system 1 of the present embodiment, the image projection range in charge of the first to fourth image projection devices 10A to 10D can be switched at a predetermined timing. The first image projection device 10A is in charge of projecting the image projection range a (see FIG. 13) having the lowest maximum brightness and the widest projection angle range. Further, the second image projection device 10B is in charge of projection of the image projection range b, the third image projection device 10C is in charge of projection of the image projection range c, and the fourth image projection device 10D has the highest maximum brightness and the highest projection angle range. It is in charge of projecting a narrow image projection range d (“state 1” in FIG. 14).

ここで、最も投射面積が広い映像投射範囲aを担当する第1映像投射装置10Aは、MEMSミラー106の振れ角が常に大きいことから、装置にかかる負荷も大きい状態である。従って、例えば、映像の投射が中断されたタイミングで映像投射範囲の切り替えを行う。具体的には、映像信号分配部20のRAMに、第1〜第4映像投射装置10A〜10Dの状態を記憶しておき、投射が再開される際に状態の情報を読み出して、各装置に前回の担当とは異なる映像投射範囲を割り当てるようにする。 Here, the first image projection device 10A, which is in charge of the image projection range a having the widest projection area, has a large load on the device because the deflection angle of the MEMS mirror 106 is always large. Therefore, for example, the image projection range is switched at the timing when the image projection is interrupted. Specifically, the RAM of the video signal distribution unit 20 stores the states of the first to fourth video projection devices 10A to 10D, and when the projection is restarted, the state information is read out and stored in each device. Assign a different image projection range from the one in charge of the previous time.

図14に示されるように、「状態1」〜「状態4」の4種類を定めて、第1〜第4映像投射装置10A〜10Dの映像の投射が中断されたタイミングで状態を切り替える。「状態1」の次に「状態2」移行する場合、第1映像投射装置10Aは、映像投射範囲aから映像投射範囲bに切り替わり、第2〜第4映像投射装置も所定の順番で映像投射範囲が切り替わる。「状態1」〜「状態4」は、それぞれ同程度の期間で切り替えるようにすることが好ましい。これにより、映像投射システム1では、第1〜第4映像投射装置10A〜10Dにかかる負荷を分散させて、製品寿命(使用可能期間)を延ばすことができる。 As shown in FIG. 14, four types of "state 1" to "state 4" are defined, and the states are switched at the timing when the image projection of the first to fourth image projection devices 10A to 10D is interrupted. When shifting to "state 2" after "state 1", the first image projection device 10A switches from the image projection range a to the image projection range b, and the second to fourth image projection devices also project images in a predetermined order. The range switches. It is preferable to switch between "state 1" and "state 4" in the same period. As a result, in the image projection system 1, the load applied to the first to fourth image projection devices 10A to 10D can be dispersed to extend the product life (usable period).

上記の実施形態は、本発明の一例であり、これ以外にも様々な変形例が考えられる。映像投射システム1は、4つの映像投射装置で構成されていたため、映像投射範囲も4つであったが、2つ以上の映像投射装置で構成され、その数に応じた映像投射範囲がある映像投射システムであればよい。 The above embodiment is an example of the present invention, and various other modifications can be considered. Since the image projection system 1 was composed of four image projection devices, the image projection range was also four, but the image is composed of two or more image projection devices and has an image projection range corresponding to the number of the image projection devices. It may be a projection system.

図9以降の説明では、第2の映像投射範囲にマーキングポイントMPが存在する例を示したが、これに限られない。第1の映像投射範囲内又は第3の映像投射範囲内、第1の映像投射範囲と第2の映像投射範囲の境界部分にマーキングポイントMPが存在する場合であっても、局所輝度を担当する1の映像投射装置により、同様の視線誘導処理を行うことができる。 In the description after FIG. 9, an example in which the marking point MP exists in the second image projection range is shown, but the present invention is not limited to this. Responsible for local brightness even when the marking point MP exists in the boundary portion between the first image projection range and the second image projection range within the first image projection range or the third image projection range. The same line-of-sight guidance process can be performed by the image projection device of 1.

1…映像投射システム、10,10A,10B,10C,10D…映像投射装置、20…映像信号分配部(合成映像生成部、輝度調整部、注目領域設定部、担当投射領域切替部)、30…制御部、40…車載カメラ、50…画像処理部、106…MEMSミラー、112…半導体光源、130…MEMS(光偏向器)、131A,131B…トーションバー、134,136…第1のアクチュエータ、140,142…第2のアクチュエータ、144,146…センサ。 1 ... Video projection system, 10, 10A, 10B, 10C, 10D ... Video projection device, 20 ... Video signal distribution unit (composite video generation unit, brightness adjustment unit, attention area setting unit, responsible projection area switching unit), 30 ... Control unit, 40 ... In-vehicle camera, 50 ... Image processing unit, 106 ... MEMS mirror, 112 ... Semiconductor light source, 130 ... MEMS (optical deflector), 131A, 131B ... Torsion bar, 134, 136 ... First actuator, 140 , 142 ... Second actuator, 144, 146 ... Sensor.

Claims (3)

複数台のラスタースキャン方式の映像投射装置と、
前記複数台の映像投射装置から投射される投射範囲が異なる複数のサブ映像を組み合せて、1つの合成映像を生成する合成映像生成部と、
前記サブ映像の輝度を調整する輝度調整部と、
前記合成映像に所定の注目領域を設定する注目領域設定部と、を備えた前照灯であって、
前記合成映像は、前記注目領域設定部により前記複数のサブ映像のうち最大輝度が最も高いサブ映像の映像投射範囲外に前記注目領域が設定されていない通常時において前記合成映像を構成する前記複数のサブ映像の映像投射範囲のそれぞれにおいて、中央部の輝度が最も高く、外周部にいくにつれて徐々に輝度が低くなる輝度分布を有し、
前記輝度調整部は、前記注目領域設定部により前記複数のサブ映像のうち最大輝度が最も高いサブ映像の領域外に前記注目領域が設定された場合に、複数の前記映像投射装置のうち少なくとも1つから投射される前記サブ映像について、前記通常時の前記合成映像を生成する映像分配処理から、前記サブ映像の映像投射範囲全体の輝度を所定レベルとした後、前記サブ映像の当該映像投射範囲の外周部から前記注目領域に向かって、時間の経過に伴い徐々に当該映像投射範囲を収束させる視線誘導処理へ切り替えることを特徴とする前照灯。
Multiple raster scan type video projection devices and
A composite image generation unit that generates one composite image by combining a plurality of sub-images with different projection ranges projected from the plurality of image projection devices.
A brightness adjustment unit that adjusts the brightness of the sub image,
A headlight provided with a region of interest setting unit for setting a predetermined region of interest in the composite image.
The composite image constitutes the composite image in a normal time when the attention area is not set outside the image projection range of the sub image having the highest maximum brightness among the plurality of sub images by the attention area setting unit. In each of the image projection ranges of the sub-images of the above, the luminance distribution in the central portion is the highest, and the luminance gradually decreases toward the outer peripheral portion.
When the attention area is set outside the area of the sub-image having the highest maximum brightness among the plurality of sub-images by the attention area setting unit, the brightness adjusting unit is at least one of the plurality of image projection devices. for the sub-image projected from One, the from the composite video distribution processing for generating an image of a normal, after the luminance of the entire image projection range of the sub-image with a predetermined level, the video projection range of the sub-picture A headlight characterized by switching to a line-of-sight guidance process that gradually converges the image projection range with the passage of time from the outer peripheral portion of the headlight toward the region of interest.
請求項1に記載の前照灯において、
前記映像投射装置は、光源と、該光源からの光を反射する回動式のミラー部と、該ミラー部の振れ角範囲を制御するミラー制御部と、を備え、
前記輝度調整部は、前記ミラー制御部により前記振れ角範囲を時間の経過に伴い徐々に小さくする制御を行うことにより、前記サブ映像の外周部を前記通常時の初期状態から前記注目領域に向かって、徐々に前記映像投射範囲を収束させることを特徴とする前照灯。
In the headlight according to claim 1,
The image projection device includes a light source, a rotary mirror unit that reflects light from the light source, and a mirror control unit that controls a swing angle range of the mirror unit.
The brightness adjusting unit controls the swing angle range to be gradually reduced with the passage of time by the mirror control unit, so that the outer peripheral portion of the sub image is directed from the initial state at the normal time to the attention region. A headlight characterized by gradually converging the image projection range.
請求項1又は2に記載の前照灯において、
前記複数のサブ映像の投射範囲に映像を投射する映像投射装置を、所定条件により切り替える担当投射範囲切替部をさらに備えることを特徴とする前照灯。
In the headlight according to claim 1 or 2.
A headlight that further includes a projection range switching unit in charge of switching an image projection device that projects an image into a projection range of the plurality of sub-images according to a predetermined condition.
JP2016185741A 2016-09-23 2016-09-23 Video projection system Active JP6865552B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016185741A JP6865552B2 (en) 2016-09-23 2016-09-23 Video projection system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016185741A JP6865552B2 (en) 2016-09-23 2016-09-23 Video projection system

Publications (2)

Publication Number Publication Date
JP2018049217A JP2018049217A (en) 2018-03-29
JP6865552B2 true JP6865552B2 (en) 2021-04-28

Family

ID=61767543

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016185741A Active JP6865552B2 (en) 2016-09-23 2016-09-23 Video projection system

Country Status (1)

Country Link
JP (1) JP6865552B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7048443B2 (en) * 2018-07-19 2022-04-05 スタンレー電気株式会社 Light projection device
WO2024135389A1 (en) * 2022-12-22 2024-06-27 パナソニックIpマネジメント株式会社 Image generation device

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004136838A (en) * 2002-10-21 2004-05-13 Toyota Industries Corp Vehicular projecting device and display device
JP2004356919A (en) * 2003-05-29 2004-12-16 Sharp Corp Projector, program and recording medium
JP4961852B2 (en) * 2006-06-19 2012-06-27 セイコーエプソン株式会社 Multi-projection system, image display method, and projector
JP2011157022A (en) * 2010-02-03 2011-08-18 Sharp Corp Headlamp and moving body
JP5959822B2 (en) * 2011-10-06 2016-08-02 株式会社小糸製作所 Vehicle spot lamp control device and vehicle spot lamp system
JP5986198B2 (en) * 2012-05-30 2016-09-06 パイオニア株式会社 Display device, head mounted display, display method, display program, and recording medium
JP6144682B2 (en) * 2012-08-08 2017-06-07 株式会社小糸製作所 Vehicle lighting
JP6530904B2 (en) * 2014-10-22 2019-06-12 スタンレー電気株式会社 Video projection system
JP6454951B2 (en) * 2014-10-24 2019-01-23 スタンレー電気株式会社 Vehicle headlamp

Also Published As

Publication number Publication date
JP2018049217A (en) 2018-03-29

Similar Documents

Publication Publication Date Title
JP6703747B2 (en) Information display device, information providing system, mobile device, information display method and program
JP6252883B1 (en) Head-up display device and vehicle
JP6535834B2 (en) Method and system for controlling a laser based lighting system
JP2017206094A (en) Vehicular lighting fixture
JP2019056840A (en) Head-up display device, and vehicle
JP6364312B2 (en) Video projection device
JP6972549B2 (en) HUD device, vehicle device and display method
WO2017073111A1 (en) Light radiation device and light radiation method
WO2018003650A1 (en) Head-up display
JP7396404B2 (en) Display control device and display control program
US20160255316A1 (en) Display device
US10162176B2 (en) Head-up display device
JP6865552B2 (en) Video projection system
JP7114993B2 (en) DISPLAY DEVICE, DISPLAY SYSTEM, MOBILE, DISPLAY BRIGHTNESS CONTROL METHOD AND PROGRAM
WO2018105585A1 (en) Head-up display
JP6873799B2 (en) Vehicle display device
JP6845988B2 (en) Head-up display
WO2017159443A1 (en) Screen member and image display device
JP6530904B2 (en) Video projection system
JP6580328B2 (en) Head-up display device for vehicle
JP6758090B2 (en) Image projection system
JP2018054752A (en) Picture projection system
JP6569318B2 (en) Optical scanning device
JP6943079B2 (en) Image processing unit and head-up display device equipped with it
JP7469174B2 (en) Display device and display method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190809

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200812

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200908

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201026

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210126

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210302

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210323

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210406

R150 Certificate of patent or registration of utility model

Ref document number: 6865552

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250