JP2016119640A - Image control device and image control system using the same - Google Patents

Image control device and image control system using the same Download PDF

Info

Publication number
JP2016119640A
JP2016119640A JP2014259761A JP2014259761A JP2016119640A JP 2016119640 A JP2016119640 A JP 2016119640A JP 2014259761 A JP2014259761 A JP 2014259761A JP 2014259761 A JP2014259761 A JP 2014259761A JP 2016119640 A JP2016119640 A JP 2016119640A
Authority
JP
Japan
Prior art keywords
determination unit
image
image control
vehicle
side glass
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014259761A
Other languages
Japanese (ja)
Other versions
JP6021888B2 (en
Inventor
健太 大西
Kenta Onishi
健太 大西
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2014259761A priority Critical patent/JP6021888B2/en
Publication of JP2016119640A publication Critical patent/JP2016119640A/en
Application granted granted Critical
Publication of JP6021888B2 publication Critical patent/JP6021888B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Closed-Circuit Television Systems (AREA)

Abstract

PROBLEM TO BE SOLVED: To obtain an image control device that projects a video on a lateral side when a driver desires to check the lateral side.SOLUTION: An imaging signal receiving part 11 receives an imaging signal from a camera 2 attached to a side mirror so as to photograph a lateral side of a vehicle; an in-vehicle camera photographs the face and a line of sight of a driver; when a driving state determination part 12 determines that the driver has an intention to watch a lateral side, a projection mode determination part 13 processes the imaging signal received by the imaging signal receiving part 11 and determines the mode of a video projected on a side window; an image output circuit 14 outputs the imaging signal to a projector 4; the projector 4 projects the video on a side window on which the driver desires to watch the video.SELECTED DRAWING: Figure 1

Description

この発明は、車両の側方の映像を撮像し、車両内部の表示部にその映像を投影する画像制御装置およびこれを用いた画像制御システムに関するものである。   The present invention relates to an image control device that captures an image of a side of a vehicle and projects the image on a display unit inside the vehicle, and an image control system using the image control device.

従来の側方や後方の死角画像を運転者に提示するシステムとして、特許文献1に示される車両用表示装置がある。
特許文献1では、サイドミラーと車体内部に備え付けられたディスプレイを用いて、側方、後方の死角となる部分を運転者に違和感なく把握させることが目的の装置が提案されている。
また、特許文献2では、運転者の視線の移動から死角を表示する場所を動的に変更し、運転者に確実に認知させることを目的とした技術が提案されている。
As a conventional system for presenting a driver with a blind spot image on the side or rear side, there is a vehicle display device disclosed in Patent Document 1.
Japanese Patent Application Laid-Open No. 2004-133620 proposes an apparatus that aims to allow the driver to grasp the side and rear blind spots without a sense of incongruity using a side mirror and a display provided inside the vehicle body.
Further, Patent Document 2 proposes a technique for dynamically changing a place where a blind spot is displayed based on movement of a driver's line of sight so that the driver can be surely recognized.

特開2007−81590号公報(第8〜12頁、第1図)JP 2007-81590 A (pages 8 to 12, FIG. 1) 特開2010−18201号公報(第3〜8頁、第3図)JP 2010-18201 (pages 3-8, FIG. 3)

しかしながら、特許文献1や特許文献2に示される技術では、運転者が側方や死角を確認する、しないにかかわらず、常に映像が撮像され、運転者に認知させるため、運転者が側方を確認しない、する必要がない場合は、運転者の視界の邪魔になり、視認性を下げるという問題があった。   However, in the techniques shown in Patent Document 1 and Patent Document 2, regardless of whether or not the driver confirms the side or blind spot, images are always captured and the driver recognizes the side. If there is no need to check, there is a problem that the driver's view is obstructed and the visibility is lowered.

この発明は、上述のような課題を解決するためになされたものであり、運転者が側方を確認したいときに側方の映像を投影するようにした画像制御装置およびこれを用いた画像制御システムを得ることを目的とする。   The present invention has been made to solve the above-described problems, and an image control device that projects a side image when the driver wants to confirm the side, and image control using the image control device. The purpose is to obtain a system.

この発明に係わる画像制御装置においては、車両の側方および後方を撮像するように配置されたカメラからの撮像信号を受領する撮像信号受領部、車両の運転の状況を判断する運転状況判断部、この運転状況判断部の判断に応じて、撮像信号受領部により受領された撮像信号を処理し、車両のサイドガラスに投影する映像の態様を決定する投影態様決定部、およびこの投影態様決定部により決定された映像の態様で撮像信号をプロジェクタを介してサイドガラスに投影する画像出力部を備えたものである。   In the image control apparatus according to the present invention, an imaging signal receiving unit that receives an imaging signal from a camera arranged to image the side and rear of the vehicle, a driving status determination unit that determines the driving status of the vehicle, In accordance with the determination of the driving situation determination unit, the imaging signal received by the imaging signal reception unit is processed, and the projection mode determination unit that determines the mode of the image projected on the side glass of the vehicle, and the projection mode determination unit determines An image output unit that projects an image pickup signal onto a side glass through a projector in the form of a video image is provided.

この発明によれば、車両の側方および後方を撮像するように配置されたカメラからの撮像信号を受領する撮像信号受領部、車両の運転の状況を判断する運転状況判断部、この運転状況判断部の判断に応じて、撮像信号受領部により受領された撮像信号を処理し、車両のサイドガラスに投影する映像の態様を決定する投影態様決定部、およびこの投影態様決定部により決定された映像の態様で撮像信号をプロジェクタを介してサイドガラスに投影する画像出力部を備えたので、サイドミラーで視認するときよりも広い部分の映像を運転者が確認することができる。   According to the present invention, the imaging signal receiving unit that receives an imaging signal from a camera arranged to image the side and the rear of the vehicle, the driving status determining unit that determines the driving status of the vehicle, and the driving status determination A projection mode determining unit that processes the imaging signal received by the imaging signal receiving unit according to the determination of the unit and determining a mode of the image to be projected on the side glass of the vehicle, and of the video determined by the projection mode determining unit Since the image output unit for projecting the image pickup signal onto the side glass through the projector is provided in this manner, the driver can check a wider portion of the image than when viewed with the side mirror.

この発明の実施の形態1〜3による画像制御装置を示すブロック図である。It is a block diagram which shows the image control apparatus by Embodiment 1-3 of this invention. この発明の実施の形態1〜3による画像制御装置のサイドミラーの先端部分にカメラを取り付けた際の一例と、サイドガラスに実際に映す映像を示す図である。It is a figure which shows an example at the time of attaching a camera to the front-end | tip part of the side mirror of the image control apparatus by Embodiment 1-3 of this invention, and the image | video actually reflected on a side glass. この発明の実施の形態1〜3による画像制御装置のサイドミラーのカメラによる撮像範囲を示す図である。It is a figure which shows the imaging range by the camera of the side mirror of the image control apparatus by Embodiment 1-3 of this invention. この発明の実施の形態1による画像制御装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the image control apparatus by Embodiment 1 of this invention. この発明の実施の形態1による画像制御装置のサイドガラスへの投影を示す概略図である。It is the schematic which shows the projection to the side glass of the image control apparatus by Embodiment 1 of this invention. この発明の実施の形態2による画像制御装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the image control apparatus by Embodiment 2 of this invention. この発明の実施の形態2による画像制御装置のサイドガラスへの投影を示す概略図である。It is the schematic which shows the projection to the side glass of the image control apparatus by Embodiment 2 of this invention. この発明の実施の形態3による画像制御装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the image control apparatus by Embodiment 3 of this invention. この発明の実施の形態3による画像制御装置における側方後方から他車が迫ってきた状態を示す図である。It is a figure which shows the state which the other vehicle approached from the side back in the image control apparatus by Embodiment 3 of this invention. この発明の実施の形態3による画像制御装置のサイドガラスへの投影を示す概略図である。It is the schematic which shows the projection to the side glass of the image control apparatus by Embodiment 3 of this invention. この発明の実施の形態3による画像制御装置におけるシートのヘッドレストおよびシート本体にプロジェクタを設置するときの範囲を示す図である。It is a figure which shows the range when installing a projector in the headrest and sheet | seat main body of a sheet | seat in the image control apparatus by Embodiment 3 of this invention. この発明の実施の形態3による画像制御装置におけるサイドガラスに投影するプロジェクタの光の反射を示す図である。It is a figure which shows reflection of the light of the projector projected on the side glass in the image control apparatus by Embodiment 3 of this invention.

実施の形態1.
以下、この発明の実施の形態1について、図を用いて説明する。
図1は、この発明の実施の形態1による画像制御装置を示すブロック図である。
図1において、カメラ2は、側方を撮像するために、サイドミラー等の後方を一定以上の角度で撮像できる部分に取り付けられる。センサ群3は、視界不良や、他車接近を判断するための信号を取得するために車両に配置されている。プロジェクタ4は、短焦点プロジェクタであり、カメラ2により撮像された映像をサイドガラスに投影するように配置されている。
Embodiment 1 FIG.
Embodiment 1 of the present invention will be described below with reference to the drawings.
FIG. 1 is a block diagram showing an image control apparatus according to Embodiment 1 of the present invention.
In FIG. 1, the camera 2 is attached to a portion where the rear side of a side mirror or the like can be imaged at a certain angle or more in order to image the side. The sensor group 3 is arranged in the vehicle in order to acquire a signal for determining poor visibility or approaching another vehicle. The projector 4 is a short focus projector, and is disposed so as to project an image captured by the camera 2 onto a side glass.

画像制御装置1は、次のように構成されている。
撮像信号受領部11は、カメラ2の撮像信号を受領する。運転状況判断部12は、運転者の前方に取り付けた車内カメラにより、顔の向き、視線を検出することや、ウィンカの状態を取得することで、運転者の側方確認の意図を検出する。運転状況判断部12が運転者の側方確認の意図を検出した場合、サイドミラーに設置したカメラ2から撮像信号を受領し、投影態様決定部13と画像出力回路14(画像出力部)を介して、当該サイドミラーのある方向のサイドガラス上に、プロジェクタ4によりカメラ2で取得した映像を投影する。
運転状況判断部12は、カメラ2およびセンサ群3からの信号に基づき、視界不良かどうかを判断する視界不良判断部121(実施の形態2で後述する。)と、他車が接近しているかどうかを判断する他車接近判断部122(実施の形態3で後述する。)とを有する。
投影態様決定部13は、サイドガラス上の所定部分(実施の形態1では下半分)に映像を投影するように撮像信号を処理して、画像出力回路14を介して出力する。これにより、運転者が直接側方を確認したいときでも、実際の側方の状態は、サイドガラスの上半分から見ることができるため、運転者の意図に沿って側方確認の支援を行うことができる。
The image control apparatus 1 is configured as follows.
The imaging signal receiving unit 11 receives the imaging signal of the camera 2. The driving situation determination unit 12 detects the driver's intention to confirm the side by detecting the face direction and line of sight and acquiring the blinker state with an in-vehicle camera attached in front of the driver. When the driving situation determination unit 12 detects the driver's intention to confirm the side, the imaging signal is received from the camera 2 installed on the side mirror, and the image is output via the projection mode determination unit 13 and the image output circuit 14 (image output unit). Thus, the image acquired by the camera 2 is projected by the projector 4 onto the side glass in a certain direction of the side mirror.
The driving condition determination unit 12 is based on signals from the camera 2 and the sensor group 3, and is a visibility failure determination unit 121 (described later in Embodiment 2) for determining whether the visibility is poor, and whether another vehicle is approaching. Another vehicle approach determination unit 122 (described later in Embodiment 3) for determining whether or not.
The projection mode determination unit 13 processes the imaging signal so as to project an image onto a predetermined portion on the side glass (lower half in the first embodiment), and outputs the processed image signal via the image output circuit 14. As a result, even when the driver wants to check the side directly, the actual side state can be seen from the upper half of the side glass, so the side check can be supported according to the driver's intention. it can.

図2は、この発明の実施の形態1による画像制御装置のサイドミラーの先端部分にカメラを取り付けた際の一例と、サイドガラスに実際に映す映像を示す図である。
図2(a)は、カメラ2のサイドミラー51への取り付けの様子を示す図、図2(b)は、カメラ2の撮像した映像をサイドガラス52に投影した投影映像41を示している。
図2において、カメラ2はサイドミラー51に取り付けられ、その撮像した映像はサイドガラス52に投影される。後方の他車6は投影映像41に含まれている。
FIG. 2 is a diagram showing an example when a camera is attached to the tip portion of the side mirror of the image control apparatus according to Embodiment 1 of the present invention, and an image actually shown on the side glass.
FIG. 2A is a diagram illustrating a state in which the camera 2 is attached to the side mirror 51, and FIG. 2B illustrates a projected image 41 obtained by projecting an image captured by the camera 2 onto the side glass 52.
In FIG. 2, the camera 2 is attached to a side mirror 51, and the captured image is projected onto a side glass 52. The other vehicle 6 behind is included in the projected image 41.

図3は、この発明の実施の形態1による画像制御装置のサイドミラーのカメラによる撮像範囲を示す図である。
図3において、自車5のサイドミラー51に取り付けられたカメラ2の撮像範囲21を示している。撮像範囲21には自車5の後方にある他車6が含まれている。
FIG. 3 is a diagram showing an imaging range of the side mirror camera of the image control apparatus according to Embodiment 1 of the present invention.
In FIG. 3, the imaging range 21 of the camera 2 attached to the side mirror 51 of the host vehicle 5 is shown. The imaging range 21 includes the other vehicle 6 behind the host vehicle 5.

図5は、この発明の実施の形態1による画像制御装置のサイドガラスへの投影を示す概略図であり、車内でのドライバーの横を向く動作と、プロジェクタ等の動作を示している。
図5において、4は図1におけるものと、52は図2におけるものとそれぞれ同一のものである。プロジェクタ4は、サイドガラス52の下部の投影範囲42に画像を投影する。運転者8の前方に、フロントガラス53と、ルームミラー54と、運転者8を撮像するための車内カメラ55が設置されている。図には、前方車線7が示されている。
FIG. 5 is a schematic diagram showing the projection onto the side glass of the image control apparatus according to the first embodiment of the present invention, showing the operation of facing the driver in the vehicle and the operation of the projector and the like.
In FIG. 5, 4 is the same as in FIG. 1, and 52 is the same as in FIG. The projector 4 projects an image on a projection range 42 below the side glass 52. A windshield 53, a room mirror 54, and an in-vehicle camera 55 for imaging the driver 8 are installed in front of the driver 8. The front lane 7 is shown in the figure.

次に、動作について説明する。
実施の形態1は、運転者が側方を確認したいという運転状況における動作についてのものである。
実施の形態1では、側方を撮像するカメラ2は、サイドミラー等、後方を一定以上の角度で撮像できる部分に取り付けられる。図2(a)は、カメラ2をサイドミラー51に取り付けた場合の図であり、図2(b)は、カメラ2により撮像された映像をサイドガラス52に投影した投影映像41を示す図であり、そのときの側方後方の撮像範囲21が図3に示されている。
Next, the operation will be described.
The first embodiment relates to an operation in a driving situation where the driver wants to confirm the side.
In the first embodiment, the camera 2 that images the side is attached to a portion that can image the rear at an angle greater than a certain angle, such as a side mirror. 2A is a diagram when the camera 2 is attached to the side mirror 51, and FIG. 2B is a diagram illustrating a projected image 41 obtained by projecting the image captured by the camera 2 onto the side glass 52. FIG. The imaging range 21 at the rear side is shown in FIG.

次に、図4を用いて、実施の形態1の画像制御装置1の動作について説明する。
まず、車内に搭載した車内カメラ55により、運転者8の顔の向きおよび視線を撮像する(ステップS1)。また、ウィンカの情報を取得する(ステップS2)。視線や顔の向きが左右どちらかに向いたとき、もしくはウィンカの左右どちらかが点いている際に、運転状況判断部12は、運転者8が左右どちらかを確認したいという意図を検知し、左右どちらを確認したいかを判断する(ステップS3)。
運転状況判断部12が、運転者8が左右どちらかの映像を確認したいかを判断できなければ(ステップS4)、ステップS1、S2に戻り、判断できれば(ステップS4)、ステップS5に進む。
Next, the operation of the image control apparatus 1 according to the first embodiment will be described with reference to FIG.
First, the face direction and line of sight of the driver 8 are imaged by the in-vehicle camera 55 mounted in the vehicle (step S1). In addition, information on the winker is acquired (step S2). When the line of sight or face is directed to the left or right, or when either the left or right of the blinker is on, the driving situation determination unit 12 detects the intention that the driver 8 wants to confirm either the left or right, It is determined whether to check left or right (step S3).
If the driving state determination unit 12 cannot determine whether the driver 8 wants to check the left or right image (step S4), the process returns to steps S1 and S2, and if it can be determined (step S4), the process proceeds to step S5.

投影態様決定部13は、サイドミラー51に取り付けたカメラ2から撮像した映像を受領する撮像信号受領部11から受け取った映像を、運転状況判断部12が下した運転者8が左右どちらの映像を確認したいかという判断のもと、当該方向のサイドガラス52に投影するように映像の形態を決定する。
その際、サイドガラス52の下半分の投影範囲42に、プロジェクタ4により投影する。図5は、実際にどのように出力させているかの様子を示している。
このとき、投影態様決定部13は、サイドガラス52上の下半分に投影するべく、映像を、車が映っている高さまでのものにするように映像の上部を切り取る処理を行う。
なお、映像の態様には、投影範囲、画像の輝度、投影するかしないかという判断を含むものとする。
運転者8は、サイドガラス52に投影された映像を見ることで、運転者8の側方確認時の視野が広がり、視認性を改善することができる。
The projection mode determination unit 13 receives the image received from the imaging signal reception unit 11 that receives the image captured from the camera 2 attached to the side mirror 51, and the driver 8 that the driving situation determination unit 12 has displayed is either the left or the right image. Based on the determination to confirm, the form of the image is determined so as to project onto the side glass 52 in the direction.
At that time, the image is projected by the projector 4 onto the lower half projection range 42 of the side glass 52. FIG. 5 shows how the output is actually performed.
At this time, the projection mode determination unit 13 performs a process of cutting the upper part of the video so that the video is up to the height at which the car is reflected, so as to project onto the lower half of the side glass 52.
Note that the video mode includes the projection range, the brightness of the image, and whether or not to project.
The driver 8 sees the image projected on the side glass 52, so that the field of view when the driver 8 checks the side is widened, and the visibility can be improved.

実施の形態1によれば、運転者が側方確認したいときに側方ないしは側方後方の映像をサイドガラスに投影することにより、サイドミラーで視認したときよりも広い部分の映像を運転者が確認することができ、運転者の側方ないしは側方後方の視認性を改善する効果がある。
また、映像を投影するに際して、常にサイドガラスに投影するのではなく、あくまで運転者が側方確認したいときに投影するようにしたので、運転者に側方を確認する意図がないときには運転者の視界内にサイドガラス上の映像が映らなくなるため、運転者の注意を削がれずに済む。
また、カメラと短焦点プロジェクタだけで本発明を実現できるため、スクリーンやモニタを準備するよりも低価格で実現することができる。
According to the first embodiment, when the driver wants to confirm the side, the driver confirms a wider image than when viewed by the side mirror by projecting the image of the side or rear side to the side glass. This has the effect of improving the visibility of the driver's side or rear side.
In addition, when projecting images, it is not always projected on the side glass, but only when the driver wants to check the side, so when the driver does not intend to check the side, the driver's view The video on the side glass will not appear inside, so the driver's attention will not be lost.
In addition, since the present invention can be realized with only a camera and a short focus projector, it can be realized at a lower price than a screen or a monitor.

実施の形態2.
実施の形態2は、雨天時やサイドガラスが曇り、側方確認が困難な運転状況の場合についてのものである。
なお、実施の形態2の画像制御装置の構成は、図1におけるものと同じである。
Embodiment 2. FIG.
The second embodiment is for a driving situation when it is raining or the side glass is cloudy and it is difficult to confirm the side.
The configuration of the image control apparatus according to the second embodiment is the same as that in FIG.

図7は、この発明の実施の形態2による画像制御装置のサイドガラスへの投影を示す概略図である。
図7において、4、42、52〜55、7、8は図5におけるものと同一のものである。図7では、プロジェクタ4の投影範囲42は、サイドガラス52の上端部以外の部分になっている。車内カメラ55は、運転者8とサイドガラス52を撮像する。
FIG. 7 is a schematic diagram showing projection onto the side glass of the image control apparatus according to the second embodiment of the present invention.
7, 4, 42, 52-55, 7, and 8 are the same as those in FIG. In FIG. 7, the projection range 42 of the projector 4 is a portion other than the upper end portion of the side glass 52. The in-vehicle camera 55 images the driver 8 and the side glass 52.

次に、図6を用いて、実施の形態2の画像制御装置の視界不良の場合の動作について説明する。
まず、車内カメラ55でサイドガラス52を撮像する(ステップS11)。また、並行して運転状況判断部12が、ワイパーの運転の有無を判断する(ステップS12)。
車内カメラ55の撮像結果およびワイパーの運転の有無により、運転状況判断部12内の視界不良判断部121が、現在、運転者の視界不良かどうかを判断する(ステップS13)。この判断では、車内外の温度差を含めて行うようにしてもよい。
視界不良判断部121が視界不良と判断した際、運転状況判断部12は、投影態様決定部13に視界不良である状態を伝える。
投影態様決定部13は、視界不良という状態を取得すると、撮像信号受領部11から受け取った映像をサイドガラス52の上端部以外の部分に投射するよう映像を処理して、当該方向のサイドガラス52に取得した映像を投影する(ステップS14)。
Next, the operation in the case of poor visibility of the image control apparatus according to the second embodiment will be described with reference to FIG.
First, the side glass 52 is imaged by the in-vehicle camera 55 (step S11). In parallel, the driving state determination unit 12 determines whether or not the wiper is operating (step S12).
Based on the imaging result of the in-vehicle camera 55 and the presence or absence of driving of the wiper, the poor visibility determination unit 121 in the driving condition determination unit 12 determines whether the driver's visibility is currently poor (step S13). In this determination, the temperature difference between the inside and outside of the vehicle may be included.
When the visibility failure determination unit 121 determines that the visibility is poor, the driving situation determination unit 12 notifies the projection mode determination unit 13 of the state of visibility failure.
When acquiring the state of poor visibility, the projection mode determining unit 13 processes the video so that the video received from the imaging signal receiving unit 11 is projected on a portion other than the upper end of the side glass 52, and acquires it on the side glass 52 in the direction. The projected image is projected (step S14).

実施の形態2では、左右への側方確認の意図の有無に拘らず、視界不良の状態の際は、常にサイドガラス52上に映像を投影し続ける。図7に、サイドガラス52上に投影する様子を示す。   In the second embodiment, images are always projected onto the side glass 52 in the case of poor visibility regardless of the intention of lateral confirmation to the left and right. FIG. 7 shows a state of projection onto the side glass 52.

実施の形態2によれば、サイドガラスの視界が悪く、運転者が側方の確認ができないときに、運転者がサイドミラーを見るのと似た動作で側方の状態を確認することができる。
また、側方の視界が悪いときに側方ないしは側方後方の映像をサイドガラスに投影することにより、サイドミラーで視認したときよりも広い部分の映像を運転者が確認することができ、運転者の側方ないしは側方後方の視認性を改善する効果がある。
According to the second embodiment, when the side glass has poor visibility and the driver cannot check the side, the driver can check the side state with an operation similar to that of the driver looking at the side mirror.
In addition, by projecting the image of the side or rear side to the side glass when the side view is poor, the driver can check a wider image than when viewed with the side mirror. There is an effect of improving the visibility of the side or rear side.

実施の形態3.
実施の形態3は、側方後方から他車が迫ってくるという運転状況の場合についてのものである。
なお、実施の形態3の画像制御装置の構成は、図1におけるものと同じである。
Embodiment 3 FIG.
The third embodiment is for a driving situation in which another vehicle approaches from the rear side.
The configuration of the image control apparatus according to the third embodiment is the same as that in FIG.

図9は、この発明の実施の形態3による画像制御装置における側方後方から他車が迫ってきた状態を示す図である。
図9において、5、6は図3におけるものと同一のものである。図9では、自車5のセンサで他車6を検知している。
FIG. 9 is a diagram showing a state in which another vehicle approaches from the rear side in the image control apparatus according to Embodiment 3 of the present invention.
9, 5 and 6 are the same as those in FIG. In FIG. 9, the other vehicle 6 is detected by the sensor of the own vehicle 5.

図10は、この発明の実施の形態3による画像制御装置のサイドガラスへの投影を示す概略図である。
図10において、4、42、52〜55、7、8は図5におけるものと同一のものである。図10では、プロジェクタ4の投影範囲42は、サイドガラス52の上端部以外の部分になっている。車内カメラ55は、運転者8を撮像する。
FIG. 10 is a schematic diagram showing projection onto a side glass of an image control apparatus according to Embodiment 3 of the present invention.
10, 4, 42, 52-55, 7, and 8 are the same as those in FIG. In FIG. 10, the projection range 42 of the projector 4 is a portion other than the upper end portion of the side glass 52. The in-vehicle camera 55 images the driver 8.

図11は、この発明の実施の形態3による画像制御装置におけるシートのヘッドレストおよびシート本体にプロジェクタを設置するときの範囲を示す図である。
図11において、プロジェクタ4を取り付ける範囲を示すプロジェクタ取付エリア43は、シート56の上部およびヘッドレスト57に設けられている。
FIG. 11 is a diagram showing a range when the projector is installed on the seat headrest and the seat body in the image control apparatus according to Embodiment 3 of the present invention.
In FIG. 11, a projector attachment area 43 indicating a range where the projector 4 is attached is provided on the upper portion of the seat 56 and the headrest 57.

図12は、この発明の実施の形態3による画像制御装置におけるサイドガラスに投影するプロジェクタの光の反射を示す図である。
図12において、4、8、52は図10におけるものと、56、57は図11におけるものとそれぞれ同一のものである。運転者8の前方にハンドル58が図示されている。プロジェクタ4の光は、サイドガラス52で反射されて運転者8に入る。
FIG. 12 is a diagram showing light reflection of the projector projected onto the side glass in the image control apparatus according to Embodiment 3 of the present invention.
12, 4, 8, and 52 are the same as those in FIG. 10, and 56 and 57 are the same as those in FIG. A handle 58 is shown in front of the driver 8. The light from the projector 4 is reflected by the side glass 52 and enters the driver 8.

次に、図8を用いて、実施の形態3の画像制御装置の他車接近の場合の動作について説明する。
まず、車体後部に取り付けられたセンサから、左右どちらかの側方から他車6が接近してきたかを他車接近判断部122が判断する(ステップS21)。
他車接近判断部122が、他車6の接近を検知した際(ステップS22)、運転状況判断部12が、投影態様決定部13に他車接近の状態を伝える。このとき、接近が感知される他車6は隣の車線の車である。1車線より遠い車は検知しても投影態様決定部13には伝えない。投影態様決定部13は、その他車接近の状態を受けて、撮像信号受領部11から受け取った映像をサイドガラス52上に投影するべく処理する。
投影態様決定部13は、迫っている後方の他車6とその周りの風景が映し出されるように映像を切り取る処理を行う。その映像をサイドガラス52上の一部分に投影するべく画像出力回路14に送り、当該方向のサイドガラス52上に映像が投影される(ステップS23)。
なお、投影態様決定部13は、このとき投影する映像を警告色にしてもよい。
他車6が自車5に迫ってきたときの様子を図9に示す。また、実際のサイドガラス52上に投影する様子を図10に示す。
Next, the operation in the case of approaching another vehicle of the image control apparatus according to the third embodiment will be described with reference to FIG.
First, the other vehicle approach determination unit 122 determines whether the other vehicle 6 has approached from either the left or right side from a sensor attached to the rear of the vehicle body (step S21).
When the other vehicle approach determination unit 122 detects the approach of the other vehicle 6 (step S <b> 22), the driving state determination unit 12 notifies the projection mode determination unit 13 of the approach state of the other vehicle. At this time, the other vehicle 6 whose approach is detected is a vehicle in the adjacent lane. Even if a car far from one lane is detected, it is not transmitted to the projection mode determination unit 13. In response to other vehicle approaching conditions, the projection mode determination unit 13 processes the image received from the imaging signal reception unit 11 to be projected onto the side glass 52.
The projection mode determination unit 13 performs a process of cutting the video so that the other vehicle 6 in the rear and the scenery around it are projected. The video is sent to the image output circuit 14 to be projected onto a part of the side glass 52, and the video is projected on the side glass 52 in the direction (step S23).
Note that the projection mode determination unit 13 may change the image projected at this time to a warning color.
FIG. 9 shows a state when the other vehicle 6 approaches the host vehicle 5. FIG. 10 shows a state of projection onto the actual side glass 52.

実施の形態3によれば、後方から他車が迫ってきたとき、その状況をサイドガラスに投影するようにしたので、サイドミラーで視認したときよりも広い部分の映像を運転者が確認することができ、運転者の側方ないしは側方後方の視認性を改善する効果がある。   According to the third embodiment, when another vehicle approaches from behind, the situation is projected onto the side glass, so that the driver can check a wider image than when viewed with the side mirror. This is effective in improving the visibility of the driver's side or side.

なお、実施の形態1〜3におけるプロジェクタ4は、短焦点プロジェクタであり、ヘッドレスト、天井、シート、ルームミラーに取り付けることができる。
プロジェクタは、サイドガラスの垂直方向を含む所定範囲内の方向から画像を投影する。この所定範囲内は、画像のゆがみ補正が現実的に困難な範囲を除外するものとする。
図11に、プロジェクタ4をシート56、またはヘッドレスト57に取り付ける場合の取付範囲であるプロジェクタ取付エリア43を示し、図12に、プロジェクタ4が投影する光の角度とその反射の様子を示している。
In addition, the projector 4 in Embodiments 1-3 is a short focus projector, and can be attached to a headrest, a ceiling, a sheet | seat, and a room mirror.
The projector projects an image from a direction within a predetermined range including the vertical direction of the side glass. Within this predetermined range, a range where it is practically difficult to correct image distortion is excluded.
FIG. 11 shows a projector attachment area 43 that is an attachment range when the projector 4 is attached to the seat 56 or the headrest 57, and FIG. 12 shows the angle of light projected by the projector 4 and its reflection state.

なお、本発明は、その発明の範囲内において、各実施の形態を自由に組み合わせたり、各実施の形態を適宜、変形、省略することが可能である。   It should be noted that the present invention can be freely combined with each other within the scope of the invention, and each embodiment can be appropriately modified or omitted.

1 画像制御装置、2 カメラ、3 センサ群、4 プロジェクタ、5 自車、6 他車、
7 前方車線、8 運転者、11 撮像信号受領部、12 運転状況判断部、
13 投影態様決定部、14 画像出力回路、21 撮像範囲、41 投影映像、
42 投影範囲、43 プロジェクタ取付エリア、51 サイドミラー、
52 サイドガラス、53 フロントガラス、54 ルームミラー、55 車内カメラ、56 シート、57 ヘッドレスト、58 ハンドル、121 視界不良判断部、
122 他車接近判断部。
1 image control device, 2 camera, 3 sensor group, 4 projector, 5 own vehicle, 6 other vehicle,
7 forward lane, 8 driver, 11 imaging signal receiving unit, 12 driving condition judging unit,
13 projection mode determination unit, 14 image output circuit, 21 imaging range, 41 projection video,
42 Projection range, 43 Projector mounting area, 51 Side mirror,
52 side glass, 53 windshield, 54 rearview mirror, 55 in-vehicle camera, 56 seats, 57 headrest, 58 handle, 121 poor visibility determination unit,
122 Another vehicle approach determination unit.

この発明に係わる画像制御装置においては、車両の側方および後方を撮像するように配置されたカメラからの撮像信号を受領する撮像信号受領部、車両の運転の状況を判断する運転状況判断部、この運転状況判断部の判断に応じて、撮像信号受領部により受領された撮像信号を処理し、車両のサイドガラスに投影する映像の態様を決定する投影態様決定部、およびこの投影態様決定部により決定された映像の態様で撮像信号をプロジェクタを介してサイドガラスに投影する画像出力部を備え、運転状況判断部は、運転者の側方確認の意図を検出するように構成され、投影態様決定部は、運転状況判断部が運転者の側方確認の意図を検出した場合に、当該側方方向のサイドガラスに投影するように映像の態様を決定するとともに、運転状況判断部によって判断された運転状況に応じて、サイドガラス上の投影範囲を変化させるものである。 In the image control apparatus according to the present invention, an imaging signal receiving unit that receives an imaging signal from a camera arranged to image the side and rear of the vehicle, a driving status determination unit that determines the driving status of the vehicle, In accordance with the determination of the driving situation determination unit, the imaging signal received by the imaging signal reception unit is processed, and the projection mode determination unit that determines the mode of the image projected on the side glass of the vehicle, and the projection mode determination unit determines Provided with an image output unit that projects an imaging signal on a side glass through a projector in the form of a video image , the driving situation determination unit is configured to detect the driver's side confirmation intention, and the projection mode determination unit includes: When the driving situation determination unit detects the driver's intention to confirm the side, the driving situation determination is performed while determining the mode of the image to be projected on the side glass in the side direction. Depending on the driving situation is determined by, thereby changing the projection range on the side glass.

この発明によれば、車両の側方および後方を撮像するように配置されたカメラからの撮像信号を受領する撮像信号受領部、車両の運転の状況を判断する運転状況判断部、この運転状況判断部の判断に応じて、撮像信号受領部により受領された撮像信号を処理し、車両のサイドガラスに投影する映像の態様を決定する投影態様決定部、およびこの投影態様決定部により決定された映像の態様で撮像信号をプロジェクタを介してサイドガラスに投影する画像出力部を備え、運転状況判断部は、運転者の側方確認の意図を検出するように構成され、投影態様決定部は、運転状況判断部が運転者の側方確認の意図を検出した場合に、当該側方方向のサイドガラスに投影するように映像の態様を決定するとともに、運転状況判断部によって判断された運転状況に応じて、サイドガラス上の投影範囲を変化させるので、サイドミラーで視認するときよりも広い部分の映像を運転者が確認することができる。 According to the present invention, the imaging signal receiving unit that receives an imaging signal from a camera arranged to image the side and the rear of the vehicle, the driving status determining unit that determines the driving status of the vehicle, and the driving status determination A projection mode determining unit that processes the imaging signal received by the imaging signal receiving unit according to the determination of the unit and determining a mode of the image to be projected on the side glass of the vehicle, and of the video determined by the projection mode determining unit The image output unit that projects the imaging signal onto the side glass via the projector in a manner , the driving situation determination unit is configured to detect the driver's intention of side confirmation, and the projection manner determination unit determines the driving situation When the unit detects the driver's intention to confirm the side, the video mode is determined so as to be projected onto the side glass in the side direction, and the operation determined by the driving situation determination unit is performed. Depending on the situation, since changing the projection range on the side window, the driver an image of wider portion than when viewing the side mirror can be confirmed.

Claims (9)

車両の側方および後方を撮像するように配置されたカメラからの撮像信号を受領する撮像信号受領部、
上記車両の運転の状況を判断する運転状況判断部、
この運転状況判断部の判断に応じて、上記撮像信号受領部により受領された撮像信号を処理し、上記車両のサイドガラスに投影する映像の態様を決定する投影態様決定部、
およびこの投影態様決定部により決定された映像の態様で上記撮像信号をプロジェクタを介して上記サイドガラスに投影する画像出力部を備えたことを特徴とする画像制御装置。
An imaging signal receiving unit that receives an imaging signal from a camera arranged to image the side and rear of the vehicle;
A driving situation determination unit for judging the driving situation of the vehicle,
A projection mode determination unit that processes the imaging signal received by the imaging signal reception unit in accordance with the determination of the driving situation determination unit and determines the mode of the image projected on the side glass of the vehicle,
An image control apparatus comprising: an image output unit configured to project the imaging signal onto the side glass through a projector in a video mode determined by the projection mode determination unit.
上記投影態様決定部は、上記運転状況判断部によって判断された運転状況に応じて、上記サイドガラス上の投影範囲を変化させることを特徴とする請求項1に記載の画像制御装置。   The image control apparatus according to claim 1, wherein the projection mode determination unit changes the projection range on the side glass in accordance with the driving situation determined by the driving situation determination unit. 上記運転状況判断部は、運転者の側方確認の意図を検出するように構成され、
上記投影態様決定部は、上記運転状況判断部が上記運転者の側方確認の意図を検出した場合に、当該側方方向のサイドガラスに投影するように上記映像の態様を決定することを特徴とする請求項1または請求項2に記載の画像制御装置。
The driving situation determination unit is configured to detect the intention of the driver's side confirmation,
The projection mode determination unit determines the mode of the video so as to project onto the side glass in the lateral direction when the driving situation determination unit detects the driver's intention to confirm the side. The image control apparatus according to claim 1 or 2.
サイドガラスの視界不良を判断する視界不良判断部を備え、
上記投影態様決定部は、上記視界不良判断部により視界不良が判断された場合に、上記サイドガラスに投影するように上記映像の態様を決定することを特徴とする請求項1から請求項3のいずれか一項に記載の画像制御装置。
Provided with a poor visibility judgment section for judging poor visibility of the side glass,
4. The projection mode determination unit according to claim 1, wherein the projection mode determination unit determines the mode of the image so that the projection is performed on the side glass when the visibility failure determination unit determines that the visibility failure is detected. The image control device according to claim 1.
他車両の接近を判断する他車接近判断部を備え、
上記投影態様決定部は、上記他車接近判断部により他車両の接近が判断された場合に、上記サイドガラスに投影するように上記映像の態様を決定することを特徴とする請求項1から請求項4のいずれか一項に記載の画像制御装置。
Other vehicle approach determination unit that determines the approach of other vehicles,
The projection mode determination unit determines the mode of the image so as to project onto the side glass when an approach of another vehicle is determined by the other vehicle approach determination unit. 5. The image control device according to any one of 4.
上記投影態様決定部は、少なくとも上記サイドガラスの上端部以外の領域を映像の投影範囲とすることを特徴とする請求項1から請求項5のいずれか一項に記載の画像制御装置。   The image control apparatus according to claim 1, wherein the projection mode determination unit sets at least a region other than an upper end portion of the side glass as a projection range of an image. 請求項1から請求項6のいずれか一項に記載の画像制御装置、
およびこの画像制御装置の上記画像出力部から上記撮像信号を出力され、上記サイドガラスに投影するプロジェクタを備え、
上記プロジェクタは、上記サイドガラスに対し、所定範囲内の方向から上記映像を投影するように配置されることを特徴とする画像制御システム。
The image control device according to any one of claims 1 to 6,
And a projector that outputs the imaging signal from the image output unit of the image control device and projects the image on the side glass,
The image control system, wherein the projector is arranged to project the video from a direction within a predetermined range with respect to the side glass.
上記プロジェクタは、上記車両のヘッドレスト、シートおよび天井のいずれかに配置されることを特徴とする請求項7に記載の画像制御システム。   The image control system according to claim 7, wherein the projector is disposed on any one of a headrest, a seat, and a ceiling of the vehicle. 上記プロジェクタは、短焦点プロジェクタであることを特徴とする請求項7または請求項8に記載の画像制御システム。   9. The image control system according to claim 7, wherein the projector is a short focus projector.
JP2014259761A 2014-12-24 2014-12-24 Image control apparatus and image control system using the same Active JP6021888B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014259761A JP6021888B2 (en) 2014-12-24 2014-12-24 Image control apparatus and image control system using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014259761A JP6021888B2 (en) 2014-12-24 2014-12-24 Image control apparatus and image control system using the same

Publications (2)

Publication Number Publication Date
JP2016119640A true JP2016119640A (en) 2016-06-30
JP6021888B2 JP6021888B2 (en) 2016-11-09

Family

ID=56244498

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014259761A Active JP6021888B2 (en) 2014-12-24 2014-12-24 Image control apparatus and image control system using the same

Country Status (1)

Country Link
JP (1) JP6021888B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11407359B2 (en) 2018-07-10 2022-08-09 Samsung Electronics Co., Ltd Method and system of displaying multimedia content on glass window of vehicle

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1037252A (en) * 1996-07-22 1998-02-10 Shin Caterpillar Mitsubishi Ltd Displaying method and device of peripheral sides of vehicle
JP2000071877A (en) * 1998-08-26 2000-03-07 Nissan Motor Co Ltd Vehicular display device
JP2008193339A (en) * 2007-02-02 2008-08-21 Toyota Motor Corp Rear monitoring system
JP2011011620A (en) * 2009-07-01 2011-01-20 Caterpillar Sarl Vehicle periphery confirmation device of working machine
JP2011189775A (en) * 2010-03-12 2011-09-29 Koito Mfg Co Ltd Posterolateral checking apparatus for vehicle
JP2011213186A (en) * 2010-03-31 2011-10-27 Equos Research Co Ltd Electronic side mirror device
JP2013119268A (en) * 2011-12-06 2013-06-17 Yazaki Corp Vehicular display system
JP2015174643A (en) * 2014-03-18 2015-10-05 パイオニア株式会社 display control device

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1037252A (en) * 1996-07-22 1998-02-10 Shin Caterpillar Mitsubishi Ltd Displaying method and device of peripheral sides of vehicle
JP2000071877A (en) * 1998-08-26 2000-03-07 Nissan Motor Co Ltd Vehicular display device
JP2008193339A (en) * 2007-02-02 2008-08-21 Toyota Motor Corp Rear monitoring system
JP2011011620A (en) * 2009-07-01 2011-01-20 Caterpillar Sarl Vehicle periphery confirmation device of working machine
JP2011189775A (en) * 2010-03-12 2011-09-29 Koito Mfg Co Ltd Posterolateral checking apparatus for vehicle
JP2011213186A (en) * 2010-03-31 2011-10-27 Equos Research Co Ltd Electronic side mirror device
JP2013119268A (en) * 2011-12-06 2013-06-17 Yazaki Corp Vehicular display system
JP2015174643A (en) * 2014-03-18 2015-10-05 パイオニア株式会社 display control device

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11407359B2 (en) 2018-07-10 2022-08-09 Samsung Electronics Co., Ltd Method and system of displaying multimedia content on glass window of vehicle

Also Published As

Publication number Publication date
JP6021888B2 (en) 2016-11-09

Similar Documents

Publication Publication Date Title
US10596970B2 (en) Auto-switch display intelligent rearview mirror system
US20180015879A1 (en) Side-view mirror camera system for vehicle
EP3079948B1 (en) Method for operating a rearview camera system of a motor vehicle after detection of a headlight flasher, rearview camera system and motor vehicle
JP2010130646A (en) Vehicle periphery checking system
CN101585347B (en) Rear view system for automobile and automobile therewith
KR101552444B1 (en) Visual system
US10460703B2 (en) Display control apparatus, display control method, and camera monitoring system
US20200130583A1 (en) Smart camera mode intelligent rearview mirror
JP2009073250A (en) Vehicle backsight display device
US20040212676A1 (en) Optical detection system for vehicles
JP6021888B2 (en) Image control apparatus and image control system using the same
US20180077330A1 (en) Vehicular visual recognition device
TWM586439U (en) Vehicle rear guidance imaging system
KR102010407B1 (en) Smart Rear-view System
US10889245B2 (en) Vehicle imaging system
KR100882689B1 (en) Monitering system of side-rear area of car and the control method
JP4007274B2 (en) Vehicle night vision system
JP4033170B2 (en) Vehicle display device
JP2015089799A (en) Drive support apparatus
JP4285229B2 (en) Vehicle display device
KR102381861B1 (en) Camera module, apparatus and method for driving information of a car including the same
JP2021172243A (en) Rear view check assistance system
JP4746932B2 (en) Image display device for vehicle
TWI398371B (en) Rearview system and vehicle same
JP2019110390A (en) Vehicle periphery monitoring device

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160329

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160422

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160906

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161004

R151 Written notification of patent or utility model registration

Ref document number: 6021888

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250