JP4977482B2 - Image providing apparatus, vehicle, and image providing method - Google Patents

Image providing apparatus, vehicle, and image providing method Download PDF

Info

Publication number
JP4977482B2
JP4977482B2 JP2007015483A JP2007015483A JP4977482B2 JP 4977482 B2 JP4977482 B2 JP 4977482B2 JP 2007015483 A JP2007015483 A JP 2007015483A JP 2007015483 A JP2007015483 A JP 2007015483A JP 4977482 B2 JP4977482 B2 JP 4977482B2
Authority
JP
Japan
Prior art keywords
image
vehicle
user
processing
head
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2007015483A
Other languages
Japanese (ja)
Other versions
JP2008182591A (en
Inventor
洋平 石井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sanyo Electric Co Ltd
Original Assignee
Sanyo Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sanyo Electric Co Ltd filed Critical Sanyo Electric Co Ltd
Priority to JP2007015483A priority Critical patent/JP4977482B2/en
Publication of JP2008182591A publication Critical patent/JP2008182591A/en
Application granted granted Critical
Publication of JP4977482B2 publication Critical patent/JP4977482B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Image Analysis (AREA)

Description

本発明は、画像提供装置、車両、および画像提供方法に関する。   The present invention relates to an image providing device, a vehicle, and an image providing method.

従来、車載カメラにより車両外側を撮像し画像表示することで車両周辺の安全確認を支援する画像提供装置が知られている。これらの装置では、複数のカメラにより取得した画像を合成したり広角カメラを用いたりすることで、車内モニタに広範囲の画像を表示するようにしている(特許文献1および非特許文献1参照)。   2. Description of the Related Art Conventionally, there has been known an image providing apparatus that assists in confirming safety around a vehicle by capturing the outside of the vehicle with an in-vehicle camera and displaying the image. In these devices, a wide range of images are displayed on the in-vehicle monitor by combining images acquired by a plurality of cameras or using a wide-angle camera (see Patent Document 1 and Non-Patent Document 1).

また、撮像方向を変更可能な移動機構を有するカメラからの撮像データを処理する画像提供装置が提案されている。この装置では、カメラの撮像方向を移動させるスイッチを有しているため、運転者が望む方向の画像をモニタに表示させることができる(特許文献2参照)。   In addition, an image providing apparatus that processes imaging data from a camera having a moving mechanism capable of changing the imaging direction has been proposed. Since this apparatus has a switch for moving the imaging direction of the camera, an image in the direction desired by the driver can be displayed on the monitor (see Patent Document 2).

また、複数のカメラにより車両後方を撮像し、後部座席のシートバック付近に設けられた表示装置に、複数のカメラにより得られた撮像データを合成して表示させる画像提供装置が提案されている。この装置では、実際に運転者が車内から車両後方を視認したときに認識される車外の様子を表示装置に表示させるようになっている。さらに、この装置では、運転者の視点位置に応じて表示領域を調整するようになっている。このため、大柄な運転者や小柄な運転者であっても、適切な車両後方の画像を提供できることとなる(特許文献3参照)。   There has also been proposed an image providing apparatus that captures the rear of the vehicle with a plurality of cameras and displays the combined image data obtained by the plurality of cameras on a display device provided near the seat back of the rear seat. In this device, a state outside the vehicle recognized when the driver visually recognizes the rear of the vehicle from the inside of the vehicle is displayed on the display device. Further, in this device, the display area is adjusted according to the viewpoint position of the driver. For this reason, even a large driver or a small driver can provide an appropriate vehicle rear image (see Patent Document 3).

また、運転者の頭部の移動によって、モニタに表示させる画像を切り替える画像提供装置が提案されている。この装置では、車両左側方に設置されたカメラからの画像と、カーナビ画像とが切り替えられる構成となっている(特許文献4参照)。
特開2002−83285号公報 特開2003−284056号公報 特開2006−135797号公報 特開2005−51403号公報 大久保聡著、“アルプス電気190度カメラ”、〔online〕、平成18年10月4日、日経エレクトロニクス、〔平成18年12月1日検索〕、インターネット<URL:http://techon.nikkeibp.co.jp/article/NEWS/20061004/121928/>
In addition, an image providing apparatus that switches an image to be displayed on a monitor by moving the driver's head has been proposed. This device is configured to switch between an image from a camera installed on the left side of the vehicle and a car navigation image (see Patent Document 4).
JP 2002-83285 A JP 2003-284056 A JP 2006-135797 A JP 2005-51403 A Written by Kei Okubo, “Alps Electric 190 Degree Camera”, [online], October 4, 2006, Nikkei Electronics, [searched on December 1, 2006], Internet <URL: http: //techon.nikkeibp. co.jp/article/NEWS/20061004/121928/ >

しかし、従来のように画像をモニタ表示する場合、車両周辺の障害物等がモニタに小さく表示されてしまうと、障害物等を視認し難くなってしまう。特に、この問題は、特許文献1および非特許文献1に記載の装置のように、広範囲の画像をモニタ表示する場合に一層顕著となる。そして、この問題は、上記装置等に特許文献2〜特許文献4に記載の技術を適用したとしても解消されることはない。なお、このような問題は、車両に搭載される画像表示装置に限らず、他の用途に用いられる画像表示装置についても共通ものである。   However, when an image is displayed on a monitor as in the prior art, if an obstacle or the like around the vehicle is displayed small on the monitor, it becomes difficult to visually recognize the obstacle or the like. In particular, this problem becomes more prominent when a wide range of images are displayed on a monitor as in the devices described in Patent Document 1 and Non-Patent Document 1. And this problem is not solved even if the technique of patent documents 2-patent documents 4 is applied to the above-mentioned device. Such a problem is not limited to an image display device mounted on a vehicle, but is common to image display devices used for other purposes.

本発明は、上記の問題に鑑み、視認性を向上させることが可能な画像提供装置、車両、および画像提供方法を提供することを目的とする。   In view of the above problems, an object of the present invention is to provide an image providing device, a vehicle, and an image providing method capable of improving visibility.

本発明の画像提供装置は、撮像して得られた撮像データを処理する処理手段と、処理手段による処理に応じて利用者に対して画像表示する表示手段と、表示手段の設置位置に対する利用者頭部の前後位置を検出する頭部位置検出手段と、を備え、処理手段は、頭部位置検出手段により検出された利用者頭部の前後位置に応じて、撮像データに基づく撮像画像の一部を拡大して表示させる拡大処理を実行することを特徴とする。   An image providing apparatus according to the present invention includes a processing unit that processes captured image data obtained by imaging, a display unit that displays an image for a user in accordance with processing by the processing unit, and a user for an installation position of the display unit. Head position detection means for detecting the front and back position of the head, and the processing means is a captured image based on the imaging data in accordance with the front and back position of the user head detected by the head position detection means. An enlargement process for enlarging and displaying a part is executed.

本発明の画像提供装置によると、利用者の頭部の前後位置に応じて画像が拡大することとなる。このため、例えば利用者が表示手段の設置位置に顔を近づけるという直感的且つ自然な動きによって、画像が拡大され、利用者にとって見やすい画像が表示されることとなる。従って、視認性を向上させることができる。   According to the image providing apparatus of the present invention, the image is enlarged according to the front-rear position of the user's head. For this reason, for example, the image is enlarged by an intuitive and natural movement in which the user brings his / her face close to the installation position of the display means, and an image easy to see for the user is displayed. Therefore, visibility can be improved.

また、本発明の画像提供装置において、頭部位置検出手段は、表示手段の設置位置に対する利用者頭部の左右位置を検出し、処理手段は、頭部位置検出手段により検出された利用者頭部の左右位置に応じて、撮像画像のうち拡大して表示させる領域の位置を変更する位置変更処理を実行することが好ましい。   In the image providing apparatus of the present invention, the head position detecting means detects the left and right positions of the user's head relative to the installation position of the display means, and the processing means is the user head detected by the head position detecting means. It is preferable to execute a position changing process for changing the position of the area to be enlarged and displayed in the captured image according to the left and right positions of the unit.

この画像提供装置によると、利用者の頭部の左右位置に応じて画像拡大箇所が移動することとなり、利用者の直感的且つ自然な頭部の横移動により利用者が望む箇所を拡大表示させることができる。従って、一層視認性を向上させることができる。   According to this image providing apparatus, the image enlargement portion moves according to the left and right positions of the user's head, and the user's intuitive and natural head lateral movement causes the portion desired by the user to be enlarged and displayed. be able to. Therefore, the visibility can be further improved.

また、本発明の画像提供装置において、利用者に操作される操作機器にされた操作を検出する操作検出手段をさらに備え、処理手段は、操作検出手段により検出された操作に応じて、拡大処理、および、位置変更処理の少なくとも一方を実行することが好ましい。   The image providing apparatus according to the present invention further includes an operation detection unit that detects an operation performed on an operation device operated by a user, and the processing unit performs an enlargement process according to the operation detected by the operation detection unit. It is preferable to execute at least one of the position changing process.

この画像提供装置によると、利用者の操作機器への操作に応じて、画像拡大および拡大箇所の移動の少なくとも一方が行われることとなり、利用者の操作が画像拡大を望むものと推定される場合に画像拡大させたり、利用者の操作が拡大箇所の移動を望むものと推定される場合に拡大箇所の移動をさせたりすることが可能となる。従って、利便性を向上させることができる。   According to this image providing apparatus, when at least one of the image enlargement and the movement of the enlarged portion is performed according to the user's operation on the operation device, it is estimated that the user's operation desires the image enlargement. It is possible to enlarge the image or to move the enlarged portion when it is estimated that the user's operation desires to move the enlarged portion. Therefore, convenience can be improved.

また、本発明の画像提供装置において、利用者に操作される移動体の動作を検出する動作検出手段をさらに備え、処理手段は、動作検出手段により検出された動作に応じて、拡大処理、および、位置変更処理の少なくとも一方を実行することが好ましい。   The image providing apparatus according to the present invention further includes an operation detection unit that detects an operation of the moving body operated by the user, and the processing unit performs an enlargement process according to the operation detected by the operation detection unit, and It is preferable to execute at least one of the position change processing.

この画像提供装置によると、移動体の動作に応じて、画像拡大および拡大箇所の移動の少なくとも一方が行われることとなり、移動体の動作から画像拡大が適切と判断される場合に画像拡大させたり、移動体の動作から拡大箇所の変更が適切と判断される場合に拡大箇所の移動をさせたりすることが可能となる。従って、利便性を向上させることができる。   According to this image providing apparatus, at least one of image enlargement and movement of the enlarged portion is performed according to the operation of the moving body, and the image enlargement is performed when it is determined that the image enlargement is appropriate from the operation of the moving body. When the change of the enlarged portion is determined to be appropriate from the operation of the moving body, the enlarged portion can be moved. Therefore, convenience can be improved.

また、本発明の画像提供装置において、利用者に操作される移動体の停止を検出する停止検出手段をさらに備え、処理手段は、停止検出手段により車両の停止が検出された場合のみに、拡大処理、および、位置変更処理の少なくとも一方を実行することが好ましい。   The image providing apparatus of the present invention further includes stop detection means for detecting the stop of the moving body operated by the user, and the processing means is enlarged only when the stop of the vehicle is detected by the stop detection means. It is preferable to execute at least one of the process and the position change process.

この画像提供装置によると、移動体の停止時のみに画像拡大および拡大箇所の移動の少なくとも一方が行われることとなり、利用者が移動体を移動させつつ画像を確認してしまうという事態を防止することができる。   According to this image providing apparatus, at least one of the image enlargement and the movement of the enlarged portion is performed only when the moving body is stopped, and the situation where the user confirms the image while moving the moving body is prevented. be able to.

また、本発明の車両は、車両に設置されたカメラと、車両に搭載され、カメラにより撮像された撮像データを入力する上記画像提供装置とを備えることを特徴とする。   In addition, a vehicle according to the present invention includes a camera installed in the vehicle, and the above-described image providing device that is mounted on the vehicle and inputs imaging data captured by the camera.

本発明の車両によると、利用者は画像表示によって車両周囲の安全確認などを行うことができる。   According to the vehicle of the present invention, the user can confirm safety around the vehicle by displaying images.

また、本発明の画像提供方法は、撮像して得られた撮像データを処理する処理ステップと、処理ステップにおける処理に応じて、画像表示機能を備える表示手段に画像表示させる表示ステップと、表示手段の設置位置に対する利用者頭部の前後位置を検出する頭部位置検出ステップと、を有し、処理ステップでは、頭部位置検出ステップにおいて検出された利用者頭部の前後位置に応じて、撮像データに基づく撮像画像の一部を拡大して表示手段に表示させる拡大処理が実行されることを特徴とする。   In addition, the image providing method of the present invention includes a processing step for processing imaging data obtained by imaging, a display step for displaying an image on a display unit having an image display function according to the processing in the processing step, and a display unit A head position detection step for detecting a front and back position of the user's head relative to the installation position, and in the processing step, imaging is performed according to the front and back position of the user head detected in the head position detection step. An enlargement process for enlarging a part of the captured image based on the data and displaying it on the display means is performed.

本発明の画像提供方法によると、利用者の頭部の前後位置に応じて画像が拡大することとなる。このため、例えば利用者が表示手段の設置位置に顔を近づけるという直感的且つ自然な動きによって、画像が拡大され、利用者にとって見やすい画像が表示されることとなる。従って、視認性を向上させることができる。   According to the image providing method of the present invention, the image is enlarged according to the front and back positions of the user's head. For this reason, for example, the image is enlarged by an intuitive and natural movement in which the user brings his / her face close to the installation position of the display means, and an image easy to see for the user is displayed. Therefore, visibility can be improved.

本発明によると、視認性を向上させることができる。   According to the present invention, visibility can be improved.

次に、図面を用いて、本発明の実施の形態を説明する。図1は、本実施形態に係る画像提供装置を含む車両周囲画像提供システムの概略構成図であり、図2は、図1に示した車両周囲画像提供システムの設置状態および表示画像例を示す図である。なお、図2においては、図1に示した構成の一部を省略して図示するものとする。また、以下の実施形態においては画像提供装置が車両に搭載される場合を例に説明するが、画像提供装置は車両に設けられなくともよく、他の移動体に搭載されてもよいし、移動体に搭載されていなくともよい。   Next, embodiments of the present invention will be described with reference to the drawings. FIG. 1 is a schematic configuration diagram of a vehicle surrounding image providing system including an image providing apparatus according to the present embodiment, and FIG. 2 is a diagram showing an installation state and a display image example of the vehicle surrounding image providing system shown in FIG. It is. In FIG. 2, a part of the configuration shown in FIG. 1 is omitted. Further, in the following embodiments, a case where the image providing device is mounted on a vehicle will be described as an example. However, the image providing device may not be provided on the vehicle, may be mounted on another moving body, or may be moved. It does not have to be mounted on the body.

図1に示すように、車両周囲画像提供システム1は、車外カメラ(カメラ)10と、車内カメラ11と、画像提供装置20とを備えている。車外カメラ10は、図2(a)に示すように車両後方を撮像するように車体に取り付けられている。また、車外カメラ10は、車両後方の広範囲を撮像可能な広角カメラにより構成されている。なお、本実施形態において車外カメラ10は車両後方を撮像しているが、特に後方に限るものではなく、他の方向を撮像してもよい。   As shown in FIG. 1, the vehicle surrounding image providing system 1 includes an outside camera (camera) 10, an in-vehicle camera 11, and an image providing device 20. The vehicle exterior camera 10 is attached to the vehicle body so as to image the rear of the vehicle as shown in FIG. The vehicle exterior camera 10 is configured by a wide-angle camera that can image a wide range behind the vehicle. In addition, in this embodiment, although the vehicle exterior camera 10 is image | photographing the vehicle back, it is not restricted to back especially, You may image another direction.

車内カメラ11は、車室内に設けられ、運転者の頭部を撮像する構成となっている。この車内カメラ11は、例えば赤外線カメラにより構成されており、夜間運転時など車室内が暗くなる場合においても運転者頭部を撮像できるように構成されている。   The in-vehicle camera 11 is provided in the passenger compartment and is configured to image the driver's head. The in-vehicle camera 11 is configured by, for example, an infrared camera, and is configured to be able to capture the driver's head even when the interior of the vehicle is dark, such as during night driving.

画像提供装置20は、車外カメラ10により撮像された撮像データを処理し、利用者に対して画像表示するものである。この画像提供装置20は、画像処理部(処理手段)21と、モニタ(表示手段)22と、頭部位置検出部(頭部位置検出手段)23と、車載機器検出部(操作検出手段)24と、車輪動作検出部(動作検出手段)25と、車速検出部(停止検出手段)26とを備えている。   The image providing device 20 processes image data captured by the outside camera 10 and displays an image for the user. The image providing apparatus 20 includes an image processing unit (processing unit) 21, a monitor (display unit) 22, a head position detection unit (head position detection unit) 23, and an in-vehicle device detection unit (operation detection unit) 24. And a wheel motion detector (motion detector) 25 and a vehicle speed detector (stop detector) 26.

画像処理部21は、車外カメラ10により撮像して得られた撮像データを処理するものである。モニタ22は、画像処理部21による処理に応じて、利用者に対して画像を表示するものである。図2(b)は表示画像の一例を示している。図2(b)に示すように、車両後方には障害物O1〜O3が存在している。この場合、モニタ22には、障害物O1〜O3を含む画像が表示される。なお、車外カメラ10は広角カメラであるため、モニタ22に表示される障害物O1〜O3は、一つ一つがモニタ22に小さく表示される。   The image processing unit 21 processes imaging data obtained by imaging with the outside camera 10. The monitor 22 displays an image for the user according to the processing by the image processing unit 21. FIG. 2B shows an example of a display image. As shown in FIG. 2B, obstacles O1 to O3 exist behind the vehicle. In this case, an image including the obstacles O1 to O3 is displayed on the monitor 22. Since the vehicle exterior camera 10 is a wide-angle camera, the obstacles O1 to O3 displayed on the monitor 22 are displayed small on the monitor 22 one by one.

頭部位置検出部23は、モニタ22の設置位置に対する利用者頭部の前後位置および左右位置を検出するものである。この頭部位置検出部23は、車内カメラ11により撮像された画像データに基づいて、利用者頭部の前後位置および左右位置を検出する。ここで、モニタ22はインストルメントパネルの中央部に設けられている。このため、頭部位置検出部23は、インストルメントパネルの中央部に対する利用者頭部の前後位置および左右位置を検出することとなる。利用者頭部位置を検出するにあたり、頭部位置検出部23は、3次元空間内で楕円形状の物体の動きを追跡してもよいし、肌色領域を追跡してもよい。また、頭部位置検出部23は、車内カメラ11の撮像により得られた撮像画像のうち、顔が存在する可能性が高い候補領域を切り出し、候補領域内を画像処理して頭部(顔)を追跡するようにしてもよい。   The head position detection unit 23 detects the front and rear positions and the left and right positions of the user's head relative to the installation position of the monitor 22. The head position detector 23 detects the front and rear positions and the left and right positions of the user's head based on the image data captured by the in-vehicle camera 11. Here, the monitor 22 is provided in the center of the instrument panel. For this reason, the head position detection part 23 will detect the front-back position and left-right position of a user's head with respect to the center part of an instrument panel. In detecting the user head position, the head position detection unit 23 may track the movement of an elliptical object in the three-dimensional space, or may track a skin color region. Further, the head position detection unit 23 cuts out a candidate area where a face is highly likely to be present from the captured image obtained by the imaging of the in-vehicle camera 11, performs image processing in the candidate area, and performs a head (face) May be tracked.

なお、本実施形態において頭部位置検出部23は、車内カメラ11からの画像に基づいて利用者頭部の位置を検出しているが、画像処理技術に限らず、超音波センサなどからの信号により利用者頭部の位置を検出してもよい。   In the present embodiment, the head position detection unit 23 detects the position of the user's head based on the image from the in-vehicle camera 11, but is not limited to the image processing technique, and a signal from an ultrasonic sensor or the like. Thus, the position of the user's head may be detected.

車載機器検出部24は、車両に搭載されて利用者に操作される操作機器にされた操作を検出するものである。ここで、車載機器とは、ナビゲーション装置やオーディオ装置の他に、ステアリング、アクセルペダル等のペダル類、およびシフトレバーなどを含めていうものである。すなわち、車載機器とは、車両の走行に係わる機器および走行に係わらない機器の双方を含めていうものである。車載機器検出部24は、これらの機器にされた操作を検出する構成となっている。   The in-vehicle device detection unit 24 detects an operation performed on an operation device mounted on a vehicle and operated by a user. Here, the in-vehicle device includes a steering device, pedals such as an accelerator pedal, a shift lever, and the like in addition to the navigation device and the audio device. That is, the in-vehicle device includes both a device related to traveling of the vehicle and a device not related to traveling. The in-vehicle device detection unit 24 is configured to detect operations performed on these devices.

車輪動作検出部25は、車両(利用者に操作される移動体)の動作を検出するものであり、具体的には車輪の回転および車輪の向く方向を検出するものである。車速検出部26は、車両(利用者に操作される移動体)の停止を検出するものであり、具体的には車両の速度を検出するものである。これら車輪動作検出部25および車速検出部26は、車輪近傍に取り付けられたセンサに接続され、センサからの出力信号によって車両の動作や車速を検出する構成となっている。   The wheel motion detection unit 25 detects the motion of the vehicle (moving body operated by the user), and specifically detects the rotation of the wheel and the direction in which the wheel faces. The vehicle speed detection unit 26 detects the stop of the vehicle (a moving body operated by the user), and specifically detects the speed of the vehicle. The wheel motion detection unit 25 and the vehicle speed detection unit 26 are connected to a sensor attached in the vicinity of the wheel, and are configured to detect the operation and the vehicle speed of the vehicle based on an output signal from the sensor.

なお、画像提供装置20は、車輪動作検出部25および車速検出部26を備えているが、これらは機能が共通化され1つの検出部によって車輪の回転および車輪の向く方向を検出し、且つ、車速を検出するように構成されていてもよい。   The image providing device 20 includes a wheel motion detection unit 25 and a vehicle speed detection unit 26. These functions are shared, and the rotation of the wheel and the direction of the wheel are detected by one detection unit, and The vehicle speed may be detected.

また、画像提供装置20は、車輪動作検出部25および車速検出部26に代えて他の検出部を備えていてもよい。一例を挙げると、例えば画像提供装置20は、車輪動作検出部25に代えて、ナビゲーション装置からの信号に基づいて車両の動きを検出する検出部を備えていてもよい。また、画像提供装置20は、車速検出部26に代えて、シフトレバーがパーキングポジションにあるか否か等を検出するシフトレバー検出部を備えていてもよい。   Further, the image providing device 20 may include another detection unit instead of the wheel motion detection unit 25 and the vehicle speed detection unit 26. For example, the image providing device 20 may include a detection unit that detects the movement of the vehicle based on a signal from the navigation device, instead of the wheel motion detection unit 25. Further, the image providing device 20 may include a shift lever detection unit that detects whether or not the shift lever is in the parking position, instead of the vehicle speed detection unit 26.

さらに、画像処理部21は、撮像データに基づく撮像画像(すなわち図2(b)に示すような画像)の一部を拡大してモニタ22に表示させる拡大処理と、撮像画像のうち拡大して表示させる領域の位置を変更する位置変更処理とを実行するように構成されている。具体的に画像提供装置20は、頭部位置検出部23により検出された利用者頭部の前後位置に応じて撮像画像の一部を拡大する拡大処理を実行する。また、画像提供装置20は、頭部位置検出部23により検出された利用者頭部の左右位置に応じて、撮像画像のうち拡大して表示させる領域の位置を変更する位置変更処理を実行する。   Further, the image processing unit 21 enlarges a part of a captured image based on the captured data (that is, an image as shown in FIG. 2B) and displays the enlarged image on the monitor 22, and enlarges the captured image. A position changing process for changing the position of the area to be displayed is executed. Specifically, the image providing device 20 executes an enlargement process for enlarging a part of the captured image according to the front and back positions of the user's head detected by the head position detection unit 23. In addition, the image providing device 20 executes a position changing process for changing the position of the area to be enlarged and displayed in the captured image according to the left and right positions of the user's head detected by the head position detecting unit 23. .

図3は、拡大処理および位置変更処理が行われたときのモニタ22の表示例を示す図である。図3(a)に示すような画像、すなわち撮像データ全体に基づく撮像画像が表示されているとする。ここで、利用者がモニタ22に顔を近づけるとすると、画像処理部21は、拡大処理を実行する。このとき、図3(a)に示す画像のうち領域T1が拡大され、図3(b)に示す画像が表示される。これにより、障害物O2が拡大して表示されることとなり、利用者は、障害物O2を確認しやすくなって視認性が向上することとなる。   FIG. 3 is a diagram illustrating a display example of the monitor 22 when the enlargement process and the position change process are performed. Assume that an image as shown in FIG. 3A, that is, a captured image based on the entire captured data is displayed. Here, when the user brings his face close to the monitor 22, the image processing unit 21 executes enlargement processing. At this time, the region T1 in the image shown in FIG. 3A is enlarged, and the image shown in FIG. 3B is displayed. As a result, the obstacle O2 is enlarged and displayed, and the user can easily check the obstacle O2, thereby improving the visibility.

また、利用者がモニタ22に対して頭部を右(または左)に動かしたとすると、画像処理部21は、位置変更処理を実行する。このとき、図3(a)に示す領域T1が右に移動することとなる。すなわち、図3(a)に示す領域T2が拡大され、図3(c)に示すような画像がモニタ22に表示されることとなる。これにより、利用者は、障害物O1を確認しやすくなり、視認性が向上することとなる。   If the user moves his / her head to the right (or left) with respect to the monitor 22, the image processing unit 21 executes position change processing. At this time, the region T1 shown in FIG. 3A moves to the right. That is, the area T2 shown in FIG. 3A is enlarged, and an image as shown in FIG. 3C is displayed on the monitor 22. As a result, the user can easily check the obstacle O1, and the visibility is improved.

なお、頭部位置検出部23が利用者頭部の上下位置を検出し、画像処理部21が利用者頭部の上下位置に応じて位置変更処理を実行してもよい。これにより、さらに視認性が向上することとなる。   The head position detection unit 23 may detect the vertical position of the user's head, and the image processing unit 21 may execute position change processing according to the vertical position of the user's head. Thereby, the visibility is further improved.

また、画像処理部21は、車載機器センサ24により検出された操作に応じて拡大処理および位置変更処理の少なくとも1つを実行してもよい。例えば利用者が車両のステアリングを右に切ったとする。この場合、利用者は車両の右側を注視したいと推定できる。このため、画像処理部21は、図3(b)に示すように画像を拡大すると共に、図3(c)に示すように拡大箇所を右側に変更する。このように、利用者の操作が画像拡大を望むものと推定される場合に画像拡大させたり、利用者の操作が拡大箇所の移動を望むものと推定される場合に拡大箇所の移動をさせたりすることが可能となる。   Further, the image processing unit 21 may execute at least one of an enlargement process and a position change process in accordance with an operation detected by the in-vehicle device sensor 24. For example, assume that the user turns the steering of the vehicle to the right. In this case, it can be estimated that the user wants to watch the right side of the vehicle. For this reason, the image processing unit 21 enlarges the image as shown in FIG. 3B and changes the enlarged portion to the right side as shown in FIG. In this way, when it is estimated that the user's operation wants to enlarge the image, the image is enlarged, or when the user's operation is expected to move the enlarged portion, the enlarged portion is moved. It becomes possible to do.

また、画像処理部21は、車輪動作検出部25により検出された車両の動きに応じて拡大処理および位置変更処理の少なくとも1つを実行してもよい。例えば車両が右車線に車線変更しようとしているとする。この場合、利用者は車両の右側を注視したいと推定できる。このため、画像処理部21は、図3(b)に示すように画像を拡大すると共に、図3(c)に示すように拡大箇所を右側に変更する。このように、移動体の動作から画像拡大が適切と判断される場合に画像拡大させたり、移動体の動作から拡大箇所が適切と判断される場合に拡大箇所の移動をさせたりすることが可能となる。   The image processing unit 21 may execute at least one of an enlargement process and a position change process in accordance with the movement of the vehicle detected by the wheel motion detection unit 25. For example, assume that the vehicle is about to change lanes to the right lane. In this case, it can be estimated that the user wants to watch the right side of the vehicle. For this reason, the image processing unit 21 enlarges the image as shown in FIG. 3B and changes the enlarged portion to the right side as shown in FIG. In this way, it is possible to enlarge the image when it is determined that the image enlargement is appropriate from the movement of the moving body, or to move the enlargement portion when the enlargement portion is determined to be appropriate from the movement of the moving body. It becomes.

さらに、画像処理部21は、車速検出部26により車両の停止が検出された場合のみに、拡大処理および位置変更処理の少なくとも1つを実行してもよい。これにより、車両の停止時のみに画像拡大および拡大箇所の移動の少なくとも一方が行われることとなり、利用者が車両を運転しつつ画像を確認してしまうという事態を防止することができる。   Furthermore, the image processing unit 21 may execute at least one of the enlargement process and the position change process only when the vehicle speed detection unit 26 detects the stop of the vehicle. Accordingly, at least one of image enlargement and movement of the enlarged portion is performed only when the vehicle is stopped, and a situation in which the user confirms the image while driving the vehicle can be prevented.

図4は、本実施形態に係る画像提供方法の一例を示すフローチャートである。図4に示すように、まず、画像提供装置20は車外カメラ10の撮像により得られた撮像データを入力する(ステップS1)。次に、車速検出部26は、車両が停止しているか否かを判断する(ステップS2)。   FIG. 4 is a flowchart illustrating an example of an image providing method according to the present embodiment. As shown in FIG. 4, first, the image providing device 20 inputs imaging data obtained by imaging with the outside camera 10 (step S <b> 1). Next, the vehicle speed detection unit 26 determines whether or not the vehicle is stopped (step S2).

車両が停止していないと判断した場合(ステップS2:NO)、画像処理部21は、車外カメラ10により得られた撮像データ全体に対して画像処理を行い(ステップS8)、撮像画像全体を表示させる(ステップS9)。その後、処理はステップS1に移行する。   When it is determined that the vehicle is not stopped (step S2: NO), the image processing unit 21 performs image processing on the entire captured data obtained by the vehicle camera 10 (step S8), and displays the entire captured image. (Step S9). Thereafter, the process proceeds to step S1.

一方、車両が停止していると判断した場合(ステップS2:YES)、画像提供装置20は、前回頭部位置を判定してから所定時刻経過したか否か(例えば前回頭部位置を判定してから1秒経過したか否か)を判断する(ステップS3)。所定時刻経過してないと判断した場合(ステップS3:NO)、処理はステップS6に移行する。   On the other hand, when it is determined that the vehicle is stopped (step S2: YES), the image providing device 20 determines whether or not a predetermined time has elapsed since the previous head position was determined (for example, the previous head position is determined). Whether one second has elapsed since then) (step S3). If it is determined that the predetermined time has not elapsed (step S3: NO), the process proceeds to step S6.

また、所定時刻経過したと判断した場合(ステップS3:YES)、頭部位置検出部23は、車内カメラ11からの撮像データに基づいて頭部位置を判定し、記憶する(ステップS4)。次いで、頭部位置検出部23は、前回判定されて記憶された頭部位置と、今回判定された頭部位置とに基づいて、頭部位置の移動量を判定する(ステップS5)。これにより、頭部位置検出部23は、利用者頭部がどの方向に移動したかを判定する。そして、処理はステップS6に移行する。   If it is determined that the predetermined time has elapsed (step S3: YES), the head position detection unit 23 determines and stores the head position based on the imaging data from the in-vehicle camera 11 (step S4). Next, the head position detection unit 23 determines the amount of movement of the head position based on the head position determined and stored last time and the head position determined this time (step S5). Thereby, the head position detector 23 determines in which direction the user's head has moved. Then, the process proceeds to step S6.

ステップS6において、操作機器検出部24は、利用者によってなされた操作機器への操作を検出する(ステップS6)。次に、車輪動作検出部25は、車輪の動作を検出する(ステップS7)。   In step S6, the operating device detection unit 24 detects an operation on the operating device performed by the user (step S6). Next, the wheel motion detection unit 25 detects the motion of the wheel (step S7).

その後、画像処理部21は、画像処理を行う(ステップS8)。このとき、画像処理部21は、ステップS5において判定された頭部の前後移動量が所定の閾値を超えているか否かを判断し、所定の閾値を超える場合に拡大処理を実行する。また、画像処理部21は、ステップS5において判定された頭部の上下左右の移動量が所定の閾値を超えているか否かを判断し、所定の閾値を超える場合に位置変更処理を実行する。さらに、画像処理部21は、ステップS6において検出された操作機器への操作内容、および、ステップS7において検出された車輪動作に基づき、拡大処理や位置変更処理を実行する。   Thereafter, the image processing unit 21 performs image processing (step S8). At this time, the image processing unit 21 determines whether or not the head back-and-forth movement amount determined in step S5 exceeds a predetermined threshold value, and executes the enlargement process when it exceeds the predetermined threshold value. Further, the image processing unit 21 determines whether or not the amount of movement of the head up, down, left, and right determined in step S5 exceeds a predetermined threshold value, and executes the position changing process when it exceeds the predetermined threshold value. Furthermore, the image processing unit 21 executes an enlargement process and a position change process based on the operation content to the operation device detected in step S6 and the wheel operation detected in step S7.

その後、モニタ22は、ステップS8の処理に応じた画像表示を行う(ステップS9)。これにより、モニタ22には、画像の一部が拡大されたり、拡大箇所の位置を変更されたりした画像が表示されることとなる。そして、処理はステップS1に移行し、上記処理は繰り返し実行されることとなる。なお、上記処理は、例えば車両エンジンが停止した場合などに終了する。   Thereafter, the monitor 22 displays an image according to the process of step S8 (step S9). Thereby, an image in which a part of the image is enlarged or the position of the enlarged portion is changed is displayed on the monitor 22. Then, the process proceeds to step S1, and the above process is repeatedly executed. Note that the above process ends when the vehicle engine stops, for example.

このようにして、本実施形態に係る画像提供装置20および画像提供方法によれば、利用者の頭部の前後位置に応じて画像が拡大することとなる。このため、例えば利用者がモニタ22の設置位置に顔を近づけるという直感的且つ自然な動きにより画像が拡大され、利用者にとって見やすい画像が表示されることとなる。従って、視認性を向上させることができる。   Thus, according to the image providing device 20 and the image providing method according to the present embodiment, the image is enlarged according to the front and back positions of the user's head. For this reason, for example, the image is enlarged by an intuitive and natural movement in which the user brings his face close to the installation position of the monitor 22, and an image easy to see for the user is displayed. Therefore, visibility can be improved.

また、本実施形態によれば、利用者の頭部の左右位置に応じて画像拡大箇所が移動することとなり、利用者の直感的且つ自然な動きにより利用者が望む箇所を拡大表示させることができる。従って、一層視認性を向上させることができる。   Further, according to the present embodiment, the image enlargement location moves according to the left and right positions of the user's head, and the location desired by the user can be enlarged and displayed by the user's intuitive and natural movement. it can. Therefore, the visibility can be further improved.

また、本実施形態によれば、利用者の操作機器への操作に応じて、画像拡大および拡大箇所の移動の少なくとも一方が行われることとなる。このため、利用者の操作が画像拡大を望むものと推定される場合に画像拡大させたり、利用者の操作が拡大箇所の移動を望むものと推定される場合に拡大箇所の移動をさせたりすることが可能となる。従って、利便性を向上させることができる。   Further, according to the present embodiment, at least one of the image enlargement and the movement of the enlarged portion is performed according to the user's operation on the operation device. For this reason, when it is estimated that the user's operation wants to enlarge the image, the image is enlarged, or when the user's operation is expected to move the enlarged portion, the enlarged portion is moved. It becomes possible. Therefore, convenience can be improved.

また、本実施形態によれば、車両の動作に応じて、画像拡大および拡大箇所の移動の少なくとも一方が行われることとなる。このため、車両の動作から画像拡大が適切と判断される場合に画像拡大させたり、移動体の動作から拡大箇所の変更が適切と判断される場合に拡大箇所の移動をさせたりすることが可能となる。従って、利便性を向上させることができる。   Further, according to the present embodiment, at least one of image enlargement and movement of the enlarged portion is performed according to the operation of the vehicle. For this reason, it is possible to enlarge the image when it is determined that the image enlargement is appropriate from the operation of the vehicle, or to move the enlarged portion when it is determined that the change of the enlarged portion is appropriate from the operation of the moving body. It becomes. Therefore, convenience can be improved.

また、本実施形態によれば、車両の停止時のみに画像拡大および拡大箇所の移動の少なくとも一方が行われることとなり、利用者が車両を移動させつつ画像を確認してしまうという事態を防止することができる。   Further, according to the present embodiment, at least one of the image enlargement and the movement of the enlarged portion is performed only when the vehicle is stopped, and the situation where the user confirms the image while moving the vehicle is prevented. be able to.

また、本実施形態に係る車両によれば、利用者が画像表示によって車両周囲の安全確認などを行うことができる。   In addition, according to the vehicle according to the present embodiment, the user can confirm safety around the vehicle by displaying an image.

以上、実施形態に基づき本発明を説明したが、本発明は上記実施形態に限られるものではなく、本発明の趣旨を逸脱しない範囲で、変更を加えてもよい。例えば、上記実施形態では画像についてのみ説明したが、画像が連続する映像についても同様に視認性を向上させることができる。   As described above, the present invention has been described based on the embodiment, but the present invention is not limited to the above embodiment, and may be modified without departing from the gist of the present invention. For example, although only the image has been described in the above embodiment, the visibility can be similarly improved for a video in which images are continuous.

例えば、本実施形態において画像提供装置20は広角カメラにより撮像された撮像データをモニタ22に表示させているが、これに限らず、複数のカメラにより撮像された撮像データを合成して広範囲の画像を利用者に提供するものであってもよい。また、車外カメラ10は広角カメラでなく、通常の画角を有するカメラであってもよい。   For example, in the present embodiment, the image providing apparatus 20 displays the image data captured by the wide-angle camera on the monitor 22, but the present invention is not limited to this. May be provided to the user. Further, the vehicle exterior camera 10 may be a camera having a normal angle of view instead of a wide-angle camera.

また、本実施形態では、利用者頭部がモニタ22に接近したときに画像を拡大させているが、利用者の頭部がモニタ22から離れた場合に画像を拡大させてもよい。さらに、利用者頭部のモニタ22への接近度合い(または離間度合い)に応じて、画像の拡大率を変更させてもよいし、頭部の上下左右への移動量に応じて拡大箇所の移動量を変更してもよい。また、拡大率は段階的に変更されてもよいし、段階的ではなくてもよい。拡大箇所の移動量についても段階的に変更されもよいし、段階的ではなくてもよい。   In this embodiment, the image is enlarged when the user's head approaches the monitor 22, but the image may be enlarged when the user's head moves away from the monitor 22. Furthermore, the enlargement ratio of the image may be changed according to the degree of approach (or the degree of separation) of the user's head to the monitor 22, and the movement of the enlarged portion may be changed according to the amount of movement of the head up, down, left, or right The amount may be changed. Further, the enlargement ratio may be changed step by step or may not be stepwise. The amount of movement of the enlarged portion may be changed step by step or may not be stepwise.

また、本実施形態では乗用車を例にしたが、本発明はこれに限らず、トラックなどの大型車にも適用可能であるし、フォークリフトなどの産業用車両にも適用可能である。さらには、他の移動体にも適用可能であるし、移動体に設置されない場合にも適用可能である。   Further, in the present embodiment, a passenger car is taken as an example, but the present invention is not limited to this, and can be applied to a large vehicle such as a truck or an industrial vehicle such as a forklift. Furthermore, the present invention can be applied to other mobile bodies, and can be applied to a case where the mobile body is not installed.

本実施形態に係る画像提供装置を含む車両周囲画像提供システムの概略構成図である。1 is a schematic configuration diagram of a vehicle surrounding image providing system including an image providing apparatus according to the present embodiment. 図1に示した車両周囲画像提供システムの設置状態および表示画像例を示す図であり、(a)は設置状態を示しており、(b)は表示例を示している。It is a figure which shows the installation state and display image example of the vehicle surrounding image provision system shown in FIG. 1, (a) has shown the installation state, (b) has shown the example of a display. 拡大処理および位置変更処理が行われたときのモニタ22の表示例を示す図であり、(a)は撮像画像を示し、(b)は拡大処理後の画像を示し、(c)は位置変更処理後の画像を示している。It is a figure which shows the example of a display of the monitor 22 when an expansion process and a position change process are performed, (a) shows a captured image, (b) shows the image after an expansion process, (c) is a position change. The image after processing is shown. 本実施形態に係る画像提供方法の一例を示すフローチャートである。It is a flowchart which shows an example of the image provision method which concerns on this embodiment.

符号の説明Explanation of symbols

10…車外カメラ
11…車内カメラ
20…画像提供装置
21…画像処理部
22…モニタ
23…頭部位置検出部
24…車載機器検出部
25…車輪動作検出部
26…車速検出部
DESCRIPTION OF SYMBOLS 10 ... Outside camera 11 ... In-vehicle camera 20 ... Image provision apparatus 21 ... Image processing part 22 ... Monitor 23 ... Head position detection part 24 ... In-vehicle apparatus detection part 25 ... Wheel motion detection part 26 ... Vehicle speed detection part

Claims (5)

撮像して得られた撮像データを処理する処理手段と、
前記処理手段による処理に応じて利用者に対して画像表示する表示手段と、
前記表示手段の設置位置に対する利用者頭部の前後位置を検出する頭部位置検出手段と、を備え、
前記処理手段は、前記頭部位置検出手段により検出された利用者頭部の前後位置に応じて、前記撮像データに基づく撮像画像の一部を拡大して前記表示手段に表示させる拡大処理を実行し、
利用者に操作される移動体の停止を検出する停止検出手段をさらに備え、
前記処理手段は、前記停止検出手段により車両の停止が検出された場合のみに、前記拡大処理、および、前記位置変更処理の少なくとも一方を実行し、
前記処理手段は、前記停止検出手段により車両の停止が検出されなかった場合には、撮像画像全体を表示させる処理を実行する
ことを特徴とする画像提供装置。
Processing means for processing imaging data obtained by imaging;
Display means for displaying an image to the user in accordance with processing by the processing means;
Head position detecting means for detecting front and back positions of the user's head with respect to the installation position of the display means,
The processing means executes an enlargement process for enlarging a part of a captured image based on the imaging data and displaying the enlarged image on the display means according to the front and back positions of the user's head detected by the head position detecting means. And
It further comprises stop detection means for detecting the stop of the moving body operated by the user,
The processing means executes at least one of the enlargement process and the position change process only when a stop of the vehicle is detected by the stop detection means,
The image processing apparatus according to claim 1, wherein the processing unit executes a process of displaying the entire captured image when the stop of the vehicle is not detected by the stop detection unit.
前記頭部位置検出手段は、前記表示手段の設置位置に対する利用者頭部の左右位置を検出し、
前記処理手段は、前記頭部位置検出手段により検出された利用者頭部の左右位置に応じて、前記撮像画像のうち前記撮像画像のうち拡大して表示させる領域の位置を変更する位置変更処理を実行する
ことを特徴とする請求項1に記載の画像提供装置。
The head position detection means detects the left and right positions of the user's head relative to the installation position of the display means,
The processing means changes a position of a region to be enlarged and displayed in the captured image of the captured image according to the left and right positions of the user's head detected by the head position detecting means. The image providing apparatus according to claim 1, wherein:
利用者に操作される操作機器にされた操作を検出する操作検出手段をさらに備え、
前記処理手段は、前記操作検出手段により検出された操作に応じて、前記拡大処理、および、前記位置変更処理の少なくとも一方を実行する
ことを特徴とする請求項2に記載の画像提供装置。
It further comprises operation detection means for detecting an operation performed on the operation device operated by the user,
The image providing apparatus according to claim 2, wherein the processing unit executes at least one of the enlargement process and the position change process in accordance with an operation detected by the operation detection unit.
車両に設置されたカメラと、
前記車両に搭載され、カメラにより撮像された撮像データを入力する請求項1〜請求項のいずれか1項に記載の画像提供装置と、
を備えることを特徴とする車両。
A camera installed in the vehicle;
The image providing device according to any one of claims 1 to 3 , wherein the image providing device is mounted on the vehicle and inputs imaging data captured by a camera.
A vehicle comprising:
撮像して得られた撮像データを処理する処理ステップと、
前記処理ステップにおける処理に応じて、画像表示機能を備える表示手段に画像表示させる表示ステップと、
前記表示手段の設置位置に対する利用者頭部の前後位置を検出する頭部位置検出ステップと、を有し、
前記処理ステップでは、前記頭部位置検出ステップにおいて検出された利用者頭部の前後位置に応じて、前記撮像データに基づく撮像画像の一部を拡大して前記表示手段に表示させる拡大処理が実行され
利用者に操作される移動体の停止を検出する停止検出ステップをさらに備え、
前記処理ステップは、前記停止検出ステップにより車両の停止が検出された場合のみに、前記拡大処理、および、前記位置変更処理の少なくとも一方を実行し、
前記処理ステップは、前記停止検出手段により車両の停止が検出されなかった場合には、撮像画像全体を表示させる処理を実行する
ことを特徴とする画像提供方法。
Processing steps for processing imaging data obtained by imaging;
In accordance with the processing in the processing step, a display step of displaying an image on a display unit having an image display function;
A head position detecting step for detecting front and back positions of the user's head relative to an installation position of the display means,
In the processing step, an enlargement process for enlarging a part of the captured image based on the imaging data and displaying the enlarged image on the display unit according to the front and rear position of the user's head detected in the head position detecting step is executed. It is,
It further comprises a stop detection step for detecting a stop of the moving body operated by the user,
The processing step executes at least one of the enlargement process and the position change process only when a stop of the vehicle is detected by the stop detection step,
The image providing method is characterized in that the processing step executes a process of displaying the entire captured image when a stop of the vehicle is not detected by the stop detection means .
JP2007015483A 2007-01-25 2007-01-25 Image providing apparatus, vehicle, and image providing method Active JP4977482B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007015483A JP4977482B2 (en) 2007-01-25 2007-01-25 Image providing apparatus, vehicle, and image providing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007015483A JP4977482B2 (en) 2007-01-25 2007-01-25 Image providing apparatus, vehicle, and image providing method

Publications (2)

Publication Number Publication Date
JP2008182591A JP2008182591A (en) 2008-08-07
JP4977482B2 true JP4977482B2 (en) 2012-07-18

Family

ID=39726139

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007015483A Active JP4977482B2 (en) 2007-01-25 2007-01-25 Image providing apparatus, vehicle, and image providing method

Country Status (1)

Country Link
JP (1) JP4977482B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5423339B2 (en) * 2009-11-18 2014-02-19 船井電機株式会社 Video display device
CN103101486A (en) * 2012-11-12 2013-05-15 蒋荣华 Lifting vehicular camera
JP6770330B2 (en) * 2016-04-25 2020-10-14 本田技研工業株式会社 Image display device
JP7423388B2 (en) * 2020-03-31 2024-01-29 本田技研工業株式会社 Information provision device

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03189683A (en) * 1989-12-19 1991-08-19 Mita Ind Co Ltd Information processor
JPH06321011A (en) * 1993-05-17 1994-11-22 Mitsubishi Electric Corp Peripheral visual field display
JPH0744143A (en) * 1993-07-27 1995-02-14 Canon Inc Information processor
JP3417134B2 (en) * 1995-04-21 2003-06-16 日産自動車株式会社 Vehicle side monitoring device
JPH115488A (en) * 1997-06-18 1999-01-12 Nissan Motor Co Ltd Device for displaying peripheral condition of vehicle
JP3298851B2 (en) * 1999-08-18 2002-07-08 松下電器産業株式会社 Multi-function vehicle camera system and image display method of multi-function vehicle camera
DE10131720B4 (en) * 2001-06-30 2017-02-23 Robert Bosch Gmbh Head-Up Display System and Procedures
JP2005247224A (en) * 2004-03-05 2005-09-15 Sumitomo Electric Ind Ltd Vehicular display device
JP2005328181A (en) * 2004-05-12 2005-11-24 Mitsubishi Electric Corp Periphery confirming apparatus

Also Published As

Publication number Publication date
JP2008182591A (en) 2008-08-07

Similar Documents

Publication Publication Date Title
US10131277B2 (en) Surroundings monitoring apparatus
JP6806156B2 (en) Peripheral monitoring device
EP2974909B1 (en) Periphery surveillance apparatus and program
EP2981077B1 (en) Periphery monitoring device and program
JP5321267B2 (en) Vehicular image display device and overhead image display method
JP6020507B2 (en) Vehicle image display device and vehicle image display method
JP5187369B2 (en) Reverse parking assist device for vehicle and program for reverse parking assist device
JP5003946B2 (en) Parking assistance device
EP2583868B1 (en) Drive assist device
JP2001006097A5 (en)
JP6642306B2 (en) Perimeter monitoring device
CN107925746B (en) Peripheral monitoring device
JP5852076B2 (en) Vehicle periphery display device
JP5067169B2 (en) Vehicle parking assistance apparatus and image display method
JP5991112B2 (en) Parking assistance device, control method, and program
JP2007090939A (en) Parking support device
JP2017094922A (en) Periphery monitoring device
JP4977482B2 (en) Image providing apparatus, vehicle, and image providing method
JP2012147285A (en) Back monitor apparatus
JP2007091047A (en) Vehicle parking assisting device
JP2010184606A (en) Vehicle surroundings display device
JP5943207B2 (en) Video display device for vehicle parking operation support
JP2007193639A (en) Driving support device
JP2007283862A (en) Vehicle periphery monitoring device
JP6130625B2 (en) Vehicle driving support device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20091222

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20111003

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111025

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111220

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120321

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120416

R151 Written notification of patent or utility model registration

Ref document number: 4977482

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150420

Year of fee payment: 3