WO2013094345A1 - 撮影領域明示装置 - Google Patents

撮影領域明示装置 Download PDF

Info

Publication number
WO2013094345A1
WO2013094345A1 PCT/JP2012/079405 JP2012079405W WO2013094345A1 WO 2013094345 A1 WO2013094345 A1 WO 2013094345A1 JP 2012079405 W JP2012079405 W JP 2012079405W WO 2013094345 A1 WO2013094345 A1 WO 2013094345A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
explicit
region
captured
displayed
Prior art date
Application number
PCT/JP2012/079405
Other languages
English (en)
French (fr)
Inventor
丸岡哲也
角屋明
本多浩一郎
池田圭吾
Original Assignee
アイシン精機株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2011282207A external-priority patent/JP5825091B2/ja
Priority claimed from JP2011282208A external-priority patent/JP5765575B2/ja
Application filed by アイシン精機株式会社 filed Critical アイシン精機株式会社
Publication of WO2013094345A1 publication Critical patent/WO2013094345A1/ja

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/28—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with an adjustable field of view
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/306—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using a re-scaling of images
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/168—Driving aids for parking, e.g. acoustic or visual feedback on parking space
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Definitions

  • the image displayed on the display device is the captured image (the image before being cut out) acquired by the captured image acquisition unit, or the captured image of interest generated based on the captured image. Whether it is an image (image after being cut out) can be clearly shown to the driver.
  • the captured image acquisition unit 11 acquires a captured image G obtained by capturing a scene behind the vehicle 1.
  • the vehicle 1 is provided with a camera 5.
  • the camera 5 in the present embodiment includes a digital camera that incorporates an image sensor such as a charge coupled device (CCD) or a CMOS image sensor (CIS) and outputs captured information as moving image information.
  • CCD charge coupled device
  • CIS CMOS image sensor
  • FIG. 2A such a camera 5 is located behind the vehicle 1 in the vicinity of the license plate provided at the outer rear part of the vehicle 1 or in the vicinity of the emblem provided at the outer rear part of the vehicle 1. It is arrange
  • the camera 5 includes a wide-angle lens (not shown). Thereby, the scene around the vehicle 1 can be photographed over the rear of the vehicle 1 over approximately 180 degrees. Such an imaging range is shown as “wide viewing angle” in FIG.
  • the camera 5 has a performance of outputting a moving image as a captured image G in real time. Such a captured
  • the narrow-field region N is close to the advanceable range when the vehicle 1 moves backward, it is referred to as a “focused captured image” because it is a region that should be particularly noted in the captured image G.
  • a noticeable photographed image C corresponds to a display image displayed on the monitor 50 described later (see FIG. 2C).
  • the “focused captured image” is described as an image of a “narrow field of view”.
  • the composite image generation unit 18 synthesizes one of the photographed image G and the noticeable photographed image C and the photographed region explicit image S and displays them on the monitor 50. As described above, one of the captured image G and the focused captured image C is displayed on the monitor 50. The composite image generation unit 18 combines one of these and the shooting region explicit image S. Which of the captured image G and the noticeable captured image C is used is specified based on the determination result from the image determination unit 16 described above.
  • the shooting area explicit image S is generated by the shooting area explicit image generation unit 17 based on the determination result by the image determination unit 16 and transmitted to the composite image generation unit 18. As described above, the composite image generation unit 18 combines the predetermined image and the shooting region explicit image S. As a result, an appropriate image is displayed on the monitor 50.
  • the composite image generation unit 18 selects the image determined in step # 3 from the captured image G acquired in step # 1 and the focused captured image C generated in step # 2, and sets the selected image as the selected image. Then, a composite image is generated by superimposing the imaging region explicit image S generated in step # 4 (step # 5). The generated composite image is displayed on the monitor 50 (step # 6). In this way, by displaying the captured region explicit image S superimposed on the captured image G or the focused captured image C, it is possible to clearly indicate the captured range of the image displayed on the monitor 50 to the passenger of the vehicle 1.
  • the noticeable photographed image generation unit 12 creates the central part of the acquired photographed image G as the noticeable photographed image C (step # 12).
  • the image determination unit 16 determines whether the image displayed on the monitor 50 is the captured image G or the focused captured image C (step # 13).
  • the shooting area explicit image generation unit 17 generates a shooting area explicit image S (step # 14).
  • the boundary explicit image generation unit 19 generates a boundary explicit image K indicating the boundary between the first explicit region S1 and the second explicit region S2 (step # 15).

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

　表示装置に表示される画像が、切り出す前の画像であるか、或いは切り出した後の画像であるかを運転者に明示することが可能な撮影領域明示装置を提供する。このような撮影領域明示装置は、車両の後方の情景を撮影した撮影画像に基づいて注目撮影画像を生成する注目撮影画像生成部と、モニタに表示されている画像の撮影領域が、撮影画像に対応する撮影領域か注目撮影画像に対応する撮影領域かを明示する撮影領域明示画像を生成すると共に、モニタの表示が、撮影画像から注目撮影画像に変更される場合に、撮影領域明示画像のうち、注目撮影画像に対応する撮影領域のみを拡大する撮影領域明示画像生成部と、撮影画像及び注目撮影画像の一方と、撮影領域明示画像とを合成してモニタに表示させる合成画像生成部と、を備える。

Description

撮影領域明示装置
　本発明は、車両の表示画面に表示される画像の撮影領域を明示する撮影領域明示装置に関する。
　車両の周囲には運転者の位置から視認できない死角があり、運転者は車両の運転にあたり当該車両の周囲に細心の注意を払う必要がある。特に、車両を後退して駐車させる場合には、駐車自体に苦手意識を持っているユーザも多く、精神的疲労も少なくない。そこで、従来、車両の周囲の障害物を監視する技術が利用されてきた（例えば特許文献１及び２）。
　特許文献１に記載の車両の障害物警報装置は、横移動障害物検出手段と、横移動方向検出手段と、横移動情報提供手段とを備えて構成される。横移動障害物検出手段は車両前方において進行方向を横切る方向に移動する障害物を検出する。横移動方向検出手段は横移動障害物検出手段により検出された障害物の横移動方向を検出する。横移動情報提供手段は横移動方向検出手段により検出された障害物の横移動方向に関する情報をドライバーに提供する。この際、横移動情報提供手段は表示部に横移動方向検出手段により検出された横移動方向を表わす矢印をディスプレイに表示する。
　特許文献２に記載の車両周囲監視装置は、撮像手段と、障害物検出手段と、表示手段とを備えて構成される。撮像手段は自車両の一部を含む車両周囲を撮像する。障害物検出手段は車両周囲に位置する障害物を検出し、検出した障害物と自車両との距離を算出する。表示手段は撮像手段によって撮像された撮像画像と障害物検出手段によって算出された距離を示す障害物表示画像とを１つの画面に表示する。
特開平１１－１１５６６０号公報 特開２００９－２１７７４０号公報
　特許文献１や特許文献２に記載の技術のように車両の周囲の障害物を検出し、当該障害物を明示する情報（矢印等）を画面表示することで運転者に車両の周囲の障害物の存在を報知することが可能である。しかしながら、車両に搭載されるディスプレイ（表示手段）の画面サイズは大きいものではない。このため、ディスプレイに表示される車両の周囲の状況を示す画像上に矢印等を表示すると、車両の周囲の状況が見難くなったり障害物を把握できなくなったりする可能性がある。
　そこで、広視野角で撮影して取得された画像から所定の領域を切り出して表示する形態が考えられる。しかしながら、このような形態の場合には、広視野角で撮影した画像を表示しているのか、切り出した画像を表示しているのか、直感的に把握し難い。
　本発明の目的は、上記問題に鑑み、表示装置に表示される画像が、切り出す前の画像であるか、或いは切り出した後の画像であるかを運転者に明示することが可能な撮影領域明示装置を提供することにある。
　上記目的を達成するための本発明に係る撮影領域明示装置の特徴構成は、
　車両の後方の情景を撮影した撮影画像を取得する撮影画像取得部と、
　前記撮影画像に基づいて注目撮影画像を生成する注目撮影画像生成部と、
　表示画面に表示されている画像の撮影領域が、前記撮影画像に対応する撮影領域か前記注目撮影画像に対応する撮影領域かを明示する撮影領域明示画像を生成すると共に、前記表示画面の表示が、前記撮影画像から前記注目撮影画像に変更される場合に、前記撮影領域明示画像のうち、前記注目撮影画像に対応する撮影領域のみを拡大する撮影領域明示画像生成部と、
　前記撮影画像及び前記注目撮影画像の一方と、前記撮影領域明示画像とを合成して前記表示画面に表示させる合成画像生成部と、
を備えている点にある。
　このような特徴構成とすれば、車両の表示装置（モニタ）に表示されている画像と共に、当該画像の撮影領域を示す撮影領域明示画像が表示されているので、車両の乗員は撮影領域明示画像を見ることにより表示装置に表示されている画像の撮影領域を直感的に認識することができる。したがって、画像内に存在する物体の車両に対する位置関係を容易に認識することが可能となる。また、画面を変更する前に、変更後の画面に対応する撮影領域明示画像を表示するので、車両の乗員が、画面が切り替わることを事前に認識することが可能となる。したがって、乗員が混乱することを防止できる。このように、本発明によれば、表示装置に表示される画像が、撮影画像取得部により取得された撮影画像（切り出す前の画像）であるか、或いは撮影画像に基づいて生成された注目撮影画像（切り出した後の画像）であるかを運転者に明示することができる。
　また、前記撮影領域明示画像生成部は、前記撮影領域を拡大する前に、前記撮影領域明示画像の少なくとも一部を点滅させる構成とすると好適である。
　このような構成とすれば、車両の乗員に対して、撮影領域明示画像の拡大が行われることを事前に明示することができる。したがって、乗員の混乱を防止できる。
　また、前記撮影領域明示画像は半透明であり、前記表示画面に表示されている画像に重畳して表示されると好適である。
　このような構成とすれば、撮影領域明示画像が重畳された撮影画像や注目撮影画像が見えなくなることを防止できる。したがって、撮影領域明示画像を表示したことによる車両の周囲の情景の見落としを避けることができる。
　また、前記撮影領域明示画像には、少なくとも前記車両の後部の鳥瞰画像が含まれると好適である。
　このような構成とすれば、表示画面に表示される画像と撮影領域との位置関係が直感的に把握し易くなる。
　また、前記撮影領域明示画像は、前記表示画面の上部に配置されると好適である。
　一般的に、表示画面の上部には空が映る。したがって、撮影領域明示画像を表示画面の上部に配置した場合には、車両の周囲の情景が隠れることを防ぐことができる。
　また、前記表示画面に前記撮影画像に対応する撮影領域を示す撮影領域明示画像が表示されている際に、前記注目撮影画像に対応する撮影領域の境界を明示する境界明示画像を表示する境界明示画像生成部を備えると好適である。
　このような構成とすれば、車両の表示装置に撮影画像取得部により取得された撮影画像が表示されている場合には撮影領域明示画像内に境界明示画像を含んで表示され、表示装置に撮影画像取得部により取得された撮影画像に基づいて生成された注目撮影画像が表示されている場合には撮影領域明示画像内に境界明示画像が含まれないので、車両の乗員は境界明示画像の有無により表示装置に表示されている画像の種別を特定することが可能となる。このため、乗員が表示装置に表示されている画像の撮影領域を直感的に認識し易くなる。
第１の実施形態に係る撮影領域明示装置の構成を模式的に示したブロック図である。 第１の実施形態に係る撮影領域明示装置の処理の一例を示した図である。 第１の実施形態に係る合成画像の一例を示した図である。 第１の実施形態に係る撮影領域明示装置の処理を模式的に示した図である。 第２の実施形態に係る撮影領域明示装置の構成を模式的に示したブロック図である。 第２の実施形態に係る撮影領域明示装置の処理の一例を示した図である。 第２の実施形態に係る合成画像の一例を示した図である。 第２の実施形態に係る撮影領域明示装置の処理を模式的に示した図である。
１．第１の実施形態
　以下、本発明の第１の実施の形態について、詳細に説明する。本発明に係る撮影領域明示装置１００は、車両のモニタにカメラで撮影して取得した画像を表示する際、撮影領域を明示する機能を備えている。以下、図面を用いて説明する。
　図１は、撮影領域明示装置１００の構成を模式的に示したブロック図である。図１に示されるように、撮影領域明示装置１００は、撮影画像取得部１１、注目撮影画像生成部１２、画像決定部１６、撮影領域明示画像生成部１７、合成画像生成部１８の各機能部を備えて構成される。各機能部はＣＰＵを中核部材として車両１の乗員にモニタ５０に表示される画像の撮影領域を明示する種々の処理を行うための上述の機能部がハードウェア又はソフトウェア或いはその両方で構築されている。
　撮影画像取得部１１は、車両１の後方の情景を撮影した撮影画像Ｇを取得する。ここで、車両１にはカメラ５が備えられる。本実施形態におけるカメラ５は、ＣＣＤ（charge coupled device）やＣＩＳ（CMOS image sensor）などの撮像素子を内蔵するとともに、撮影した情報を動画情報として出力するデジタルカメラにより構成される。このようなカメラ５は、図２（ａ）に示されるように、車両１の外側後部に備えられるライセンスプレートの近傍、或いは車両１の外側後部に備えられるエンブレムの近傍等に、車両１の後方に向けてやや俯角を有して配設される。また、カメラ５は広角レンズ（図示せず）を備えて構成される。これにより、車両１の後方を略１８０度に亘って、車両１の周囲の情景を撮影することができる。このような撮影範囲は、図２（ａ）の「広視野角」として示される。このカメラ５は、リアルタイムで動画を撮影画像Ｇとして出力する性能を有する。このような撮影画像Ｇは、撮影画像取得部１１に伝達される。
　このような撮影画像Ｇの一例が図２（ｂ）に示される。図２（ｂ）の全幅は、図２（ａ）の広視野角に対応する。ここで、撮影画像Ｇは、図２（ａ）に示されるような車両１から後方を見て左側にいる物体７が、図２（ｂ）に示されるように撮影画像Ｇ内の右側にいるように鏡像処理が行われる。これは、モニタ５０に車両１の後方の情景を表示する際、車両１の運転者が撮影画像Ｇに含まれる物体７が車両１の左側にいるのか右側にいるのかを感覚的に理解し易くするためである。
　図１に戻り、注目撮影画像生成部１２は、撮影画像Ｇに基づいて注目撮影画像Ｃを生成する。本実施形態では、撮影画像Ｇの撮影範囲は広視野角である。このため、注目撮影画像生成部１２は、撮影画像Ｇの中央部分である狭視野領域Ｎを注目撮影画像Ｃとして生成する。撮影画像Ｇは上述の撮影画像取得部１１から伝達される。本実施形態では、注目撮影画像Ｃは、図２（ｂ）に示される撮影画像Ｇの横方向の中央部分が相当する。このような狭視野領域Ｎは、図１（ａ）の「狭視野角」のような例えば車両１の後方１２０～１３０度程度の領域とすると好適である。また、狭視野領域Ｎは車両１が後退する際の進行可能範囲に近いので、撮影画像Ｇのうち特に注目すべき領域であることから「注目撮影画像」と称される。このような注目撮影画像Ｃは、後述するモニタ５０に表示される表示画像に対応する（図２（ｃ）参照）。なお、本実施形態では、「注目撮影画像」は「狭視野領域」の画像であるとして説明する。
　画像決定部１６は、モニタ５０に撮影画像Ｇを表示するか、注目撮影画像Ｃを表示するかを決定する。この決定は、車両１の乗員によるスイッチの操作に応じて行っても良いし、本撮影領域明示装置１００の上位システムからの命令により行ってもよい。乗員のスイッチの操作による場合には、図示はしないがメカ的なスイッチを設けることも可能であるし、モニタ５０をタッチパネルで構成した場合には当該タッチパネルへのタッチ入力による形態とすることも可能である。画像決定部１６によるいずれの画像を表示するかを示す決定結果は撮影領域明示画像生成部１７及び合成画像生成部１８に伝達される。
　撮影領域明示画像生成部１７は、表示画面（モニタ５０）に表示されている画像の撮影領域が、撮影画像Ｇに対応する撮影領域か注目撮影画像Ｃに対応する撮影領域かを明示する撮影領域明示画像Ｓを生成する。モニタ５０に撮影画像Ｇが表示されているか又は注目撮影画像Ｃが表示されているかは、上述の画像決定部１６から伝達される検出結果に基づき特定することが可能である。撮影領域明示画像Ｓは、車両１の乗員にモニタ５０に表示されている画像の撮影領域を示す画像である。
　撮影領域明示画像Ｓには、少なくとも車両１の後部の鳥瞰画像が含まれる。本実施形態では、図２（ｃ）に示されるように、車両１の後部の鳥瞰画像が示される。この鳥瞰画像は、予め自車の写真を取得しておいたものを表示しても良いし、或いは写真ではないイメージ画像を表示しても良い。本実施形態では、イメージ画像として自車イメージ画像ＣＩが表示される。撮影領域明示画像Ｓは、モニタ５０の横方向中央部に注目撮影領域の撮影領域を示す第１明示領域Ｓ１と、当該第１明示領域Ｓ１の横方向両側に当該第１明示領域Ｓ１と共に撮影画像Ｇの撮影領域を示す第２明示領域Ｓ２とで構成される。すなわち、第１明示領域Ｓ１で注目撮影画像Ｃの撮影領域を示し、第１明示領域Ｓ１及び第２明示領域Ｓ２で撮影画像Ｇの撮影領域を示す。
　したがって、モニタ５０に撮影画像Ｇが表示されている場合には撮影領域明示画像Ｓとして、第１明示領域Ｓ１、第２明示領域Ｓ２、及び自車イメージ画像ＣＩが表示される。一方、モニタ５０に注目撮影画像Ｃが表示されている場合には撮影領域明示画像Ｓとして、第１明示領域Ｓ１及び自車イメージ画像ＣＩが表示される。
　また、撮影領域明示画像生成部１７は、モニタ５０の表示が、撮影画像Ｇから注目撮影画像Ｃに変更される場合に、撮影領域明示画像Ｓのうち、注目撮影画像Ｃに対応する撮影領域のみを拡大する。ここで、モニタ５０に表示される画像のサイズは、モニタ５０の表示サイズに合わせて拡大または縮小して表示される。このため、モニタ５０の表示を、広視野角の撮影画像Ｇから当該狭視野角の注目撮影画像Ｃに切り替える場合には、撮影画像Ｇの一部が切り出されて拡大して表示されることになる。したがって、撮影画像Ｇ及び注目撮影画像Ｃに同一の物体７が含まれる場合には、当該物体７の表示画面内のサイズは撮影画像Ｇの場合よりも注目撮影画像Ｃの場合の方が大きくなる。
　撮影領域明示画像生成部１７は、このように撮影画像Ｇから注目撮影画像Ｃに切り替える場合には、事前に第１明示領域Ｓ１及び自車イメージ画像ＣＩを拡大して表示し、その後、注目撮影画像Ｃに切り替える。これにより、乗員に前もってモニタ５０の表示が、撮影画像Ｇから注目撮影画像Ｃに切り替えられることを暗示することが可能となる。
　本実施形態では、このような撮影領域明示画像生成部１７は、第１明示領域Ｓ１を拡大する前に、撮影領域明示画像Ｓの少なくとも一部を点滅させる。本実施形態では、第１明示領域Ｓ１を所定時間点滅させる。これにより、乗員に対して第１明示領域Ｓ１が拡大されることを暗示できると共に、その後、注目撮影画像Ｃが表示されることを暗示することが可能となる。
　合成画像生成部１８は、撮影画像Ｇ及び注目撮影画像Ｃの一方と、撮影領域明示画像Ｓとを合成してモニタ５０に表示させる。上述のように、モニタ５０には、撮影画像Ｇ及び注目撮影画像Ｃの一方が表示される。合成画像生成部１８は、これらのうちの一方と撮影領域明示画像Ｓを合成する。撮影画像Ｇ及び注目撮影画像Ｃのいずれを用いるかは、上述の画像決定部１６からの決定結果に基づき特定される。また、撮影領域明示画像Ｓは、画像決定部１６による決定結果に基づき撮影領域明示画像生成部１７により生成され、合成画像生成部１８に伝達される。以上により、合成画像生成部１８は、所定の画像と、撮影領域明示画像Ｓとを合成する。これによりモニタ５０に適切な画像が表示される。
　ここで、撮影領域明示画像Ｓは半透明であり、モニタ５０に表示されている画像に重畳して表示される。これにより、車両１の周囲の状況を示す撮影画像Ｇ又は注目撮影画像Ｃに撮影領域明示画像Ｓを重畳した場合でも、乗員が車両１の周囲の状況の視認性が妨げられることはない。
　また、撮影領域明示画像Ｓは、表示画面の上部に配置される。ここで、一般的にモニタ５０に表示される画面の上部には、空が表示される。したがって、このような空の部分に撮影領域明示画像Ｓを表示することにより、車両１の周囲の状況の視認性が悪化することを防止できる。
　このような撮影領域明示画像Ｓを重畳して表示する一連の画像の一例が、図３に示される。図３においては、ステップ＃ａ１、ステップ＃ｂ１、ステップ＃ｃ１、ステップ＃ｄ１、ステップ＃ｅ１、ステップ＃ｆ１の順で時間が経過するように示している。ステップ＃ａ１においては、広視野角の撮影画像Ｇが表示されている。この場合には、表示画面の上部に、撮影画像Ｇの撮影領域を示す第１明示領域Ｓ１及び第２明示領域Ｓ２も表示される。更には、自車イメージ画像ＣＩも表示される。
　この状態で、乗員により注目撮影画像Ｃへの切り替え操作が行われると、ステップ＃ａ１及びステップ＃ｂ１を所定の回数だけ繰り返すことにより第１明示領域Ｓ１の点滅が行われる。これにより、撮影画像Ｇが注目撮影画像Ｃに切り替えられることを暗示することができる。その後、第１明示領域Ｓ１が表示画面の横方向のサイズになるまで徐々に拡大される（ステップ＃ｃ１－ステップ＃ｅ１）。
　第１明示領域Ｓ１が拡大されると、その後、車両１の後方の状況を示す画像も、撮影画像Ｇから注目撮影画像Ｃに切り替えられる（ステップ＃ｆ１）。このような撮影領域明示画像Ｓを表示画面内に表示することにより、車両１の乗員が表示画面に表示される画像の撮影範囲を直感的に把握することができる。したがって、画像に含まれる物体７の位置を適切に認識することが可能となる。
　次に、撮影領域明示装置１００が、撮影領域明示画像Ｓを撮影画像Ｇ又は注目撮影画像Ｃに重畳した合成画像をモニタ５０に表示する一連の処理について、図４の模式図を用いて説明する。まず、撮影画像取得部１１が、車両１のカメラ５により撮影された撮影画像Ｇを取得する（ステップ＃１）。
　次に、注目撮影画像生成部１２が、取得された撮影画像Ｇの中央部分を注目撮影画像Ｃとして生成する（ステップ＃２）。一方、画像決定部１６が、モニタ５０に表示する画像を撮影画像Ｇにするか、或いは注目撮影画像Ｃにするかを決定する（ステップ＃３）。また、撮影領域明示画像生成部１７により、撮影領域明示画像Ｓが生成される（ステップ＃４）。
　合成画像生成部１８は、ステップ＃１において取得された撮影画像Ｇ、及びステップ＃２において生成された注目撮影画像Ｃから、ステップ＃３により決定された画像を選択し、当該選択された画像に、ステップ＃４で生成された撮影領域明示画像Ｓを重畳して合成画像を生成する（ステップ＃５）。生成された合成画像は、モニタ５０に表示される（ステップ＃６）。このように撮影画像Ｇ又は注目撮影画像Ｃに撮影領域明示画像Ｓを重畳して表示することにより車両１の乗員にモニタ５０に表示される画像の撮影範囲を明示することが可能となる。
　このように本発明に係る撮影領域明示装置１００によれば、車両１のモニタ５０に表示されている画像と共に、当該画像の撮影領域を示す撮影領域明示画像Ｓが表示されているので、車両１の乗員は撮影領域明示画像Ｓを見ることによりモニタ５０に表示されている画像の撮影領域を直感的に認識することができる。したがって、画像内に存在する物体７の車両１に対する位置関係を容易に認識することが可能となる。また、画面を変更する前に、変更後の画面に対応する撮影領域明示画像Ｓを表示するので、車両１の乗員が、画面が切り替わることを事前に認識することが可能となる。したがって、乗員が混乱することを防止できる。このように、本発明によれば、モニタ５０に表示される画像が、カメラ５で撮影した画像（撮影画像Ｇ）であるのか、或いは撮影画像Ｇの一部の画像（注目撮影画像）であるかを運転者に明示することができる。
２．第２の実施形態
　次に、撮影領域明示装置１００の第２の実施形態について説明する。図５には、本実施形態に係る撮影領域明示装置１００の構成を模式的に示したブロック図が示される。図５に示されるように、撮影領域明示装置１００は、撮影画像取得部１１、注目撮影画像生成部１２、画像決定部１６、撮影領域明示画像生成部１７、合成画像生成部１８、境界明示画像生成部１９の各機能部を備えて構成される。各機能部はＣＰＵを中核部材として車両１の乗員にモニタ５０に表示される画像の撮影領域を明示する種々の処理を行うための上述の機能部がハードウェア又はソフトウェア或いはその両方で構築されている。
　ここで、撮影画像取得部１１、注目撮影画像生成部１２、画像決定部１６、撮影領域明示画像生成部１７、合成画像生成部１８の各機能部については、上述の第１の実施形態と同様であるので説明は省略する。以下では、主に異なる点である、境界明示画像生成部１９及び撮影領域明示装置１００による処理について説明する。
　境界明示画像生成部１９は、モニタ５０に撮影画像Ｇに対応する撮影領域を示す撮影領域明示画像Ｓが表示されている際に、注目撮影画像Ｃに対応する撮影領域の境界を明示する境界明示画像Ｋを表示する。撮影画像Ｇに対応する撮影領域を示す撮影領域明示画像Ｓとは、第１明示領域Ｓ１及び第２明示領域Ｓ２である。一方、モニタ５０に注目撮影画像Ｃが表示されている場合には、当該注目撮影画像Ｃに対応する撮影領域を示す第１明示領域Ｓ１が表示される。したがって、注目撮影画像Ｃに対応する撮影領域の境界とは、第１明示領域Ｓ１と第２明示領域Ｓ２との境界が相当する。境界明示画像生成部１９は、このような第１明示領域Ｓ１と第２明示領域Ｓ２との境界に境界明示画像Ｋを表示する。このような境界明示画像Ｋが図６（ｃ）に示される。本実施形態では、境界明示画像Ｋは、第１明示領域Ｓ１と第２明示領域Ｓ２との境界において、カメラ５で撮影して取得された画像をそのまま表示させる無色透明の画像である。
　このような境界明示画像Ｋを重畳して表示する一連の画像の一例が、図７に示される。図７においては、ステップ＃ａ２、ステップ＃ｂ２、ステップ＃ｃ２、ステップ＃ｄ２、ステップ＃ｅ２、ステップ＃ｆ２の順で時間が経過するように示している。ステップ＃ａ２においては、広視野角の撮影画像Ｇが表示されている。この場合には、表示画面の上部に、撮影画像Ｇの撮影領域を示す第１明示領域Ｓ１及び第２明示領域Ｓ２も表示される。更には、自車イメージ画像ＣＩも表示される。また、第１明示領域Ｓ１と第２明示領域Ｓ２との間には、境界明示画像Ｋが表示される。
　この状態で、乗員により注目撮影画像Ｃへの切り替え操作が行われると、ステップ＃ａ２及びステップ＃ｂ２を所定の回数だけ繰り返すことにより第１明示領域Ｓ１の点滅が行われる。これにより、撮影画像Ｇが注目撮影画像Ｃに切り替えられることを暗示することができる。その後、第１明示領域Ｓ１が表示画面の横方向のサイズになるまで徐々に拡大される（ステップ＃ｃ２－ステップ＃ｅ２）。
　第１明示領域Ｓ１が拡大されると、その後、車両１の後方の状況を示す画像も、撮影画像Ｇから注目撮影画像Ｃに切り替えられる（ステップ＃ｆ２）。このような境界明示画像Ｋを表示画面内に表示することにより、車両１の乗員が表示画面に表示される画像の種別を直感的に把握することができる。
　また、モニタ５０に注目撮影画像Ｃが表示される場合には、上述のように撮影領域明示画像Ｓとして、第１明示領域Ｓ１のみが表示され、第２明示領域Ｓ２が表示されないので、境界明示画像Ｋは表示されない（ステップ＃ｆ２参照）。
　次に、撮影領域明示装置１００が、境界明示画像Ｋを表示する一連の処理について、図８の模式図を用いて説明する。まず、撮影画像取得部１１が、車両１のカメラ５により撮影された撮影画像Ｇを取得する（ステップ＃１１）。
　次に、注目撮影画像生成部１２が、取得された撮影画像Ｇの中央部分を注目撮影画像Ｃとして生成する（ステップ＃１２）。一方、画像決定部１６が、モニタ５０に表示する画像を撮影画像Ｇにするか、或いは注目撮影画像Ｃにするかを決定する（ステップ＃１３）。また、撮影領域明示画像生成部１７により、撮影領域明示画像Ｓが生成される（ステップ＃１４）。更に、また、境界明示画像生成部１９が、第１明示領域Ｓ１と第２明示領域Ｓ２との境界を示す境界明示画像Ｋを生成する（ステップ＃１５）。
　合成画像生成部１８は、ステップ＃１１において取得された撮影画像Ｇ、及びステップ＃２において生成された注目撮影画像Ｃから、ステップ＃１３により決定された画像を選択し、当該選択された画像に、ステップ＃１４で生成された撮影領域明示画像Ｓを重畳して合成画像を生成する（ステップ＃１６）。この際、画像決定部１６により、撮影画像Ｇが表示されると決定された場合には、境界明示画像生成部１９により生成された境界明示画像Ｋも合成される。生成された合成画像は、モニタ５０に表示される（ステップ＃１７）。このように撮影画像Ｇ又は注目撮影画像Ｃに撮影領域明示画像Ｓを重畳して表示することにより車両１の乗員にモニタ５０に表示される画像の撮影範囲を明示することが可能となる。
　このような第２の実施形態に係る撮影領域明示装置１００は、車両１の後方の情景を撮影した撮影画像Ｇを取得する撮影画像取得部１１と、撮影画像Ｇに基づいて注目撮影画像Ｃを生成する注目撮影画像生成部１２と、表示画面に表示されている画像の撮影領域が、撮影画像Ｇに対応する撮影領域か注目撮影画像Ｃに対応する撮影領域かを明示する撮影領域明示画像Ｓを生成する撮影領域明示画像生成部１７と、表示画面に撮影画像Ｇに対応する撮影領域を示す撮影領域明示画像Ｓが表示されている際に、注目撮影画像Ｃに対応する撮影領域の境界を明示する境界明示画像Ｋを表示する境界明示画像生成部１９と、を備えて構成されると記載することができる。
　このような撮影領域明示装置１００によれば、車両１のモニタ５０（表示装置）に撮影画像取得部１１により取得された撮影画像Ｇが表示されている場合には撮影領域明示画像Ｓ内に境界明示画像Ｋを含んで表示され、モニタ５０（表示装置）に撮影画像取得部１１により取得された撮影画像Ｇに基づいて生成された注目撮影画像Ｃが表示されている場合には撮影領域明示画像Ｓ内に境界明示画像Ｋが含まれないので、車両１の乗員は境界明示画像Ｋの有無によりモニタ５０（表示装置）に表示されている画像の種別を特定することが可能となる。このため、乗員がモニタ５０（表示装置）に表示されている画像の撮影領域を直感的に認識し易くなる。このように、撮影領域明示装置１００によれば、モニタ５０（表示装置）に表示される画像が、カメラ５（撮影画像取得部１１）により取得された撮影画像Ｇ（切り出す前の画像）であるのか、或いは撮影画像Ｇに基づいて生成された注目撮影画像Ｃ（切り出した後の画像）であるかを運転者に明示することができる。
３．その他の実施形態
　上記実施形態では、撮影領域明示画像生成部１７は、第１明示領域Ｓ１の拡大を行う前に、第１明示領域Ｓ１を点滅させるとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。第１明示領域Ｓ１を点滅させないように構成することも当然に可能である。或いは、第１明示領域Ｓ１を点灯させるように構成することも当然に可能である。また、撮影領域明示画像Ｓ全体を点滅させるように構成することも可能である。
　また、撮影領域明示画像生成部１７は、第１明示領域Ｓ１の拡大を行う前に、第１明示領域Ｓ１を点滅させるだけでなく、モニタ５０の表示を注目撮影画像Ｃから撮影画像Ｇに切り替える際において、第１明示領域Ｓ１の縮小を行う前に、第１明示領域Ｓ１を点滅させる構成とすることも当然に可能である。
　上記実施形態では、撮影領域明示画像Ｓは半透明であるとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。撮影領域明示画像Ｓを半透明にすることなく、すなわち透明度を０％として構成することも当然に可能である。また、半透明とは、透明度が５０％に限定されるものではなく、フレキシブルに変更することが可能である（０％＜透明度＜１００％に変更することが可能である）。
　上記実施形態では、撮影領域明示画像Ｓは、表示画面の上部に配置されるとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。撮影領域明示画像Ｓを表示画像の上部以外の位置に表示することも当然に可能である。
　上記実施形態では、画像決定部１６は乗員のスイッチ操作や上位システムによりモニタ５０に表示する画像を決定するとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。例えば、車両１に当該車両１に接近する物体７を検知する物体検知手段を備え、当該物体検知手段が物体７を検知した場合に画像を切り替える構成とすることも可能である。このような物体検知手段として、カメラ５により取得された撮影画像Ｇを用いて画像認識処理を行って物体７を検知する構成とすることも可能であるし、車両１に例えばソナーを搭載し、当該ソナーの検出結果に基づき物体７を検知する構成とすることも可能である。もちろん、他の検知手段を備えて検知する構成とすることも当然に可能である。
　上記実施形態では、撮影領域明示画像Ｓに、少なくとも車両１の後部の鳥瞰画像が含まれるとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。撮影領域明示画像Ｓに、車両１の後部の鳥瞰画像を含まずに構成することも可能であるし、撮影領域明示画像Ｓに、車両１の全体の鳥瞰画像を含んで構成することも可能である。
　（付記項）車両の後方の情景を撮影した撮影画像を取得する撮影画像取得部と、撮影画像に基づいて注目撮影画像を生成する注目撮影画像生成部と、表示画面に表示されている画像の撮影領域が、撮影画像に対応する撮影領域か注目撮影画像に対応する撮影領域かを明示する撮影領域明示画像を生成する撮影領域明示画像生成部と、表示画面に撮影画像に対応する撮影領域を示す撮影領域明示画像が表示されている際に、注目撮影画像に対応する撮影領域の境界を明示する境界明示画像を表示する境界明示画像生成部と、を備える撮影領域明示装置。係る場合でも、車両の乗員が境界明示画像の有無によりモニタに表示されている画像の種別を特定することが可能となる。したがって、乗員がモニタに表示されている画像の撮影領域を直感的に認識し易くなる。
　本発明は、車両に接近する障害物の存在を乗員に明示する撮影領域明示装置に関する。
　１：車両
　１１：撮影画像取得部
　１２：注目撮影画像生成部
　１７：撮影領域明示画像生成部
　１８：合成画像生成部
　１９：境界明示画像生成部
　１００：撮影領域明示装置
　Ｃ；注目撮影画像
　Ｇ：撮影画像
　Ｓ：撮影領域明示画像
　Ｋ：境界明示画像

Claims (6)

  1. 　車両の後方の情景を撮影した撮影画像を取得する撮影画像取得部と、
    　前記撮影画像に基づいて注目撮影画像を生成する注目撮影画像生成部と、
    　表示画面に表示されている画像の撮影領域が、前記撮影画像に対応する撮影領域か前記注目撮影画像に対応する撮影領域かを明示する撮影領域明示画像を生成すると共に、前記表示画面の表示が、前記撮影画像から前記注目撮影画像に変更される場合に、前記撮影領域明示画像のうち、前記注目撮影画像に対応する撮影領域のみを拡大する撮影領域明示画像生成部と、
    　前記撮影画像及び前記注目撮影画像の一方と、前記撮影領域明示画像とを合成して前記表示画面に表示させる合成画像生成部と、
    を備える撮影領域明示装置。
  2. 　前記撮影領域明示画像生成部は、前記撮影領域を拡大する前に、前記撮影領域明示画像の少なくとも一部を点滅させる請求項１に記載の撮影領域明示装置。
  3. 　前記撮影領域明示画像は半透明であり、前記表示画面に表示されている画像に重畳して表示される請求項１又は２に記載の撮影領域明示装置。
  4. 　前記撮影領域明示画像には、少なくとも前記車両の後部の鳥瞰画像が含まれる請求項１から３のいずれか一項に記載の撮影領域明示画像。
  5. 　前記撮影領域明示画像は、前記表示画面の上部に配置される請求項１から４のいずれか一項に記載の撮影領域明示装置。
  6. 　前記表示画面に前記撮影画像に対応する撮影領域を示す撮影領域明示画像が表示されている際に、前記注目撮影画像に対応する撮影領域の境界を明示する境界明示画像を表示する境界明示画像生成部を備える請求項１から５のいずれか一項に記載の撮影領域明示装置。
PCT/JP2012/079405 2011-12-22 2012-11-13 撮影領域明示装置 WO2013094345A1 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2011-282208 2011-12-22
JP2011-282207 2011-12-22
JP2011282207A JP5825091B2 (ja) 2011-12-22 2011-12-22 撮影領域明示装置
JP2011282208A JP5765575B2 (ja) 2011-12-22 2011-12-22 撮影領域明示装置

Publications (1)

Publication Number Publication Date
WO2013094345A1 true WO2013094345A1 (ja) 2013-06-27

Family

ID=48668244

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/079405 WO2013094345A1 (ja) 2011-12-22 2012-11-13 撮影領域明示装置

Country Status (1)

Country Link
WO (1) WO2013094345A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006270267A (ja) * 2005-03-22 2006-10-05 Nissan Motor Co Ltd 映像表示装置及び映像表示方法
JP2008301091A (ja) * 2007-05-30 2008-12-11 Aisin Seiki Co Ltd 車両用周辺監視装置
JP2011205514A (ja) * 2010-03-26 2011-10-13 Aisin Seiki Co Ltd 車両周辺監視装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006270267A (ja) * 2005-03-22 2006-10-05 Nissan Motor Co Ltd 映像表示装置及び映像表示方法
JP2008301091A (ja) * 2007-05-30 2008-12-11 Aisin Seiki Co Ltd 車両用周辺監視装置
JP2011205514A (ja) * 2010-03-26 2011-10-13 Aisin Seiki Co Ltd 車両周辺監視装置

Similar Documents

Publication Publication Date Title
JP6014442B2 (ja) 画像生成装置、画像表示システム、および、画像生成方法
CN107351764B (zh) 车辆后方监视系统
JP5099451B2 (ja) 車両周辺確認装置
JP5692403B2 (ja) 障害物警報装置
JP2011055480A (ja) 車両周辺画像生成装置
WO2013065341A1 (ja) 障害物警報装置
JP2010130647A (ja) 車両周辺確認装置
JPWO2019216087A1 (ja) 画像処理装置、移動装置、および方法、並びにプログラム
JP5131152B2 (ja) 視覚支援装置
JP5977130B2 (ja) 画像生成装置、画像表示システム、および、画像生成方法
JP5861449B2 (ja) 障害物警報装置
JP5660395B2 (ja) 障害物警報装置
JP5974476B2 (ja) 障害物警報装置
JP5704416B2 (ja) 障害物警報装置
JP5845909B2 (ja) 障害物警報装置
WO2013065122A1 (ja) 障害物警報装置
JP5787168B2 (ja) 障害物警報装置
JP5754605B2 (ja) 障害物警報装置
JP5825091B2 (ja) 撮影領域明示装置
JP5765575B2 (ja) 撮影領域明示装置
WO2013094345A1 (ja) 撮影領域明示装置
JP5765576B2 (ja) 障害物警報装置
JP6555240B2 (ja) 車両用撮影表示装置及び車両用撮影表示プログラム
JP5704417B2 (ja) 障害物警報装置
JP4285229B2 (ja) 車両用表示装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12860981

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12860981

Country of ref document: EP

Kind code of ref document: A1