JP2006020141A

JP2006020141A - 表示制御装置

Info

Publication number: JP2006020141A
Application number: JP2004196774A
Authority: JP
Inventors: Toshinori Kasai; 俊典笠井
Original assignee: Denso Corp
Current assignee: Denso Corp
Priority date: 2004-07-02
Filing date: 2004-07-02
Publication date: 2006-01-19
Also published as: DE102005030857A1

Abstract

【課題】ユーザに車両周辺の情報を適切に提供する。
【解決手段】表示制御装置１は、魚眼レンズカメラ３により撮影された撮影画像にあってレンズ端付近の箇所を切出して表示する場合には、その箇所を画像処理により回転させて表示する。例えば通行人が通行している態様を表す撮影画像を表示する場合には、その撮影画像を通行人が垂直方向から傾くことなく通行しているように回転させて表示することにより、通行人が通行している態様をユーザに多大な違和感を与えること無く適切に伝えることができ、ユーザに車両周辺の情報を適切に提供することができる。
【選択図】図１

Description

本発明は、車両周辺の撮影画像の表示を制御する表示制御装置に関する。

車両周辺を監視するものとして、複数のカメラが車両に搭載された構成のものや（例えば特許文献１参照）、魚眼レンズカメラや広角レンズカメラがドアミラーに内蔵された構成のものがある（例えば特許文献２参照）。
特開平１１−７８６９２号公報特開２０００−１６１８１号公報

ところで、魚眼レンズや広角レンズを用いたカメラでは、短焦点レンズの特徴でもある広範囲を一度に撮影することができるものの、その一方で、撮影された撮影画像においては歪曲収差である大きな樽型歪、つまり、レンズ中心の垂線から水平方向になす角度が大きくなる程に垂直方向からの歪みの程度が大きくなるという事情がある。そのため、レンズ中心付近である撮影画像の中心部を切出して表示装置に表示する場合には、垂直方向からの歪みの程度は小さいものの、レンズ端付近である撮影画像の端部を切出して表示装置に表示する場合には、垂直方向からの歪みの程度が大きく、ユーザに多大な違和感を与えてしまうという問題がある。一例としては、通行人が通行している態様を表す撮影画像を表示する場合であれば、通行人が垂直方向から傾いて通行しているように表示してしまうことになり、通行人が通行している態様をユーザに適切に伝えることができないという問題がある。

本発明は、上記した事情に鑑みてなされたものであり、その目的は、ユーザに多大な違和感を与えること無く撮影画像を適切に表示することができ、ユーザに車両周辺の情報を適切に提供することができる表示制御装置を提供することにある。

請求項１に記載した表示制御装置によれば、表示制御手段は、撮影画像が撮影手段により撮影されると、その撮影画像の一部または全体が乗員の目線を基準として水平方向からずれている場合に、その撮影画像にあって乗員の目線を基準として水平方向からずれている一部または全体が乗員の目線を基準として水平方向に表示されるように制御する。これにより、例えば通行人が通行している態様を表す撮影画像を表示する場合であれば、その撮影画像を通行人が垂直方向から傾くことなく通行しているように表示することにより、通行人が通行している態様をユーザに多大な違和感を与えること無く適切に伝えることができ、ユーザに車両周辺の情報を適切に提供することができる。

請求項２に記載した表示制御装置によれば、撮影手段は、魚眼レンズカメラまたは広角レンズカメラから構成され、表示手段は、撮影手段により撮影された撮影画像の一部を表示し、表示制御手段は、撮影手段により撮影された撮影画像の一部を画像処理により回転させる画像処理手段から構成されている。これにより、レンズ端付近の撮影画像の一部を
表示する場合、そのレンズ端付近の撮影画像の一部を画像処理して回転させることにより、例えば通行人が通行している態様を表す撮影画像を表示する場合であれば、通行人が通行している態様をユーザに多大な違和感を与えること無く適切に伝えることができ、ユーザに車両周辺の情報を適切に提供することができる。

請求項３に記載した表示制御装置によれば、表示制御手段は、撮影手段および表示手段のうち少なくとも一方を機械的に回転させる回転機構から構成されている。これにより、撮影手段および表示手段のうち少なくとも一方を機械的に回転させることにより、例えば
通行人が通行している態様を表す撮影画像を表示する場合であれば、通行人が通行している態様をユーザに多大な違和感を与えること無く適切に伝えることができ、ユーザに車両周辺の情報を適切に提供することができる。

以下、本発明の一実施形態について、図面を参照して説明する。まず、図１は、表示制御装置の全体構成を機能ブロック図として示している。表示制御装置１は、演算ユニット２、魚眼レンズカメラ３（本発明でいう撮影手段）、操作部４および表示装置５（本発明でいう表示手段）を備えて構成されている。演算ユニット２は、カメラインターフェース部６および画像処理部７（本発明でいう表示制御手段、画像処理手段）を備えて構成されている。

魚眼レンズカメラ３は、図２に示すように、車両９の左側方を撮影するように車両９の左側部（左側ドアミラーの脇）に取付けられている。この魚眼レンズカメラ３は、短焦点レンズの特徴でもある広範囲を一度に撮影可能であり、撮影された撮影画像においては歪曲収差である大きな樽型歪、つまり、レンズ中心の垂線から水平方向になす角度が大きくなる程に垂直方向からの歪みの程度が大きくなる特性を有している。つまり、魚眼レンズカメラ３により撮影された撮影画像（原画像）においては、図２に示すように、魚眼レンズカメラ３からの距離が遠ざかる程に（遠方になればなる程に）垂直方向からの歪みの程度が大きくなっている。

尚、図２に示す撮影画像は、一例として２ドアタイプの車両９が路上に引かれている白線で仕切られた駐車エリアに駐車され、その駐車中の車両９の左側を車両９の前方から後方へ向かって通行人が歩いており、車両９の左側に建物が建っている態様を示す画像であり、「ａ」は路上に引かれている白線、「ｂ」は車両９の左側ボデー、「ｂ１」は左側ドアの前端部、「ｂ２」は左側ドアの後端部、「ｂ３」は左側ドアのドアノブ、「ｂ４」は左側前輪、「ｂ５」は左側後輪、「ｃ」は通行人、「ｄ」は建物に相当する。

カメラインターフェース部６は、魚眼レンズカメラ３から撮影画像が入力されると、その入力された撮影画像を画像処理部７に出力する。操作部４は、本実施形態では、ユーザが撮影画像を拡大（ズーム）表示したりスクロール表示したりする場合に操作されるもので、ユーザにより操作されると、その操作内容を表す操作検出信号を演算ユニット２に出力する。尚、この操作部４は、例えば機械的な幾つかのキー（ボタン）が規則的に配設されて構成されていても良いし、表示装置５に表示されるタッチキー（タッチボタン）から構成されていても良い。

画像処理部７は、操作部４から演算ユニット２へ操作検出信号が出力されると、その操作検出信号の内容を解析し、魚眼レンズカメラ３からカメラインターフェース部６を通じて入力された撮影画像を当該操作検出信号に基づいて画像処理する。ここでいう画像処理とは、撮影画像を拡大させる処理やスクロールさせる処理や必要に応じて回転させる処理である。尚、上記した構成において、演算ユニット２、操作部４および表示装置５は、その一部が車両に搭載されているカーナビゲーション装置のもので代用されて構成されていても良い。

次に、上記した構成の作用について、図３ないし図５を参照して説明する。ここで、図３は、演算ユニット２が行う処理をフローチャートとして示している。演算ユニット２は、魚眼レンズカメラ３から撮影画像が入力されると（撮影画像を取込むと）（ステップＳ１）、ユーザにより撮影画像の拡大表示を指示する操作が行われたか否かを判定する（ステップＳ２）。

ここで、演算ユニット２は、ユーザにより撮影画像の拡大表示を指示する操作が行われなかった旨を検出すると（ステップＳ２にて「ＮＯ」）、魚眼レンズカメラ３から入力された撮影画像を画像処理部７により何ら画像処理することなく原画像を表示装置５に表示させる（ステップＳ３）。
一方、演算ユニット２は、ユーザにより撮影画像の拡大表示を指示する操作が行われた旨を検出すると（ステップＳ２にて「ＹＥＳ」）、魚眼レンズカメラ３から入力された撮影画像をユーザ操作に応じた所定の拡大率にしたがって画像処理部７により拡大処理させ（ステップＳ４）、ユーザにより撮影画像のスクロール表示を指示する操作が行われたか否かを判定する（ステップＳ５）。

ここで、演算ユニット２は、ユーザにより撮影画像のスクロール表示を指示する操作が行われなかった旨を検出すると（ステップＳ５にて「ＮＯ」）、拡大処理された画像を表示装置５に表示させる（ステップＳ８）。
一方、演算ユニット２は、ユーザにより撮影画像のスクロール表示を指示する操作が行われた旨を検出すると（ステップＳ５にて「ＹＥＳ」）、魚眼レンズカメラ３から入力されて拡大処理された撮影画像をユーザ操作に応じた所定の位置へ画像処理部７によりスクロール処理させる（ステップＳ６）。そして、この場合、演算ユニット２は、撮影画像の中心部からスクロールした距離を判定し、そのスクロールされた距離に応じて撮影画像を垂直方向からの歪みを緩和するように画像処理部７により回転させ（ステップＳ７）、その拡大処理、スクロール処理および回転処理された画像を表示装置５に表示させる（ステップＳ８）。

具体的に説明すると、演算ユニット２は、撮影画像にあってレンズ端付近である側後方に対応する図４中破線「Ａ１」にて示す領域を切出して表示させる場合には、その領域を単に切出して表示するのではなく、その領域を切出した後に、この場合であれば、撮影画像の中心部からスクロールされた距離に応じた回転角度で時計回り方向へ回転させることにより、撮影画像における垂直方向からの歪みを緩和する。すなわち、演算ユニット２は、このような撮影画像の回転処理を実施しなければ、図５（ａ）に示すような撮影画像、つまり、通行人が垂直方向から傾いて（一点鎖線「Ｐ１」参照）通行している違和感の有る撮影画像を表示装置５に表示させてしまうことになるが、本実施形態では、上記したような撮影画像の回転処理を実施することにより、図５（ｄ）に示すような撮影画像、つまり、通行人が垂直方向から傾くことなく（一点鎖線「Ｐ２」参照）通行している違和感の無い撮影画像を表示装置５に表示させることが可能となる。

これと同様にして、演算ユニット２は、撮影画像にあってレンズ端付近である側前方に対応する図４中破線「Ａ３」にて示す領域を切出して表示させる場合には、その領域を単に切出して表示させるのではなく、その領域を切出した後に、この場合であれば、撮影画像の中心部からスクロールされた距離に応じた回転角度で反時計回り方向へ回転させることにより、撮影画像における垂直方向からの歪みを緩和する。すなわち、演算ユニット２は、このような撮影画像の回転処理を実施しなければ、図５（ｃ）に示すような撮影画像、つまり、建造物が垂直方向から傾いて（一点鎖線「Ｑ１」参照）建っている違和感の有る撮影画像を表示装置５に表示させてしまうことになるが、本実施形態では、上記したような撮影画像の回転処理を実施することにより、図５（ｆ）に示すような撮影画像、つまり、建造物が垂直方向から傾くことなく（一点鎖線「Ｑ２」参照）建っている違和感の無い撮影画像を表示装置５に表示させることが可能となる。

尚、上記した撮影画像を回転させる処理では、撮影画像の中心部からスクロールされた距離が大きい程に（レンズ端部へ向かう程に）回転角度が大きくなり、表示エリアの中心点（表示エリアのコーナーを結ぶ２本の対角線が交差する点）が回転中心となる。

以上に説明したように本実施形態によれば、表示制御装置１において、魚眼レンズカメラ３により撮影された撮影画像にあってレンズ端付近の箇所を切出して表示する場合には、その箇所を画像処理により回転させて表示するように構成したので、例えば通行人が通行している態様を表す撮影画像を表示する場合には、その撮影画像を通行人が垂直方向から傾くことなく通行しているように回転させて表示することにより、通行人が通行している態様をユーザに多大な違和感を与えること無く適切に伝えることができ、ユーザに車両周辺の情報を適切に提供することができる。また、このようにして撮影画像のレンズ端付近をユーザに多大な違和感を与えること無く提供することができるので、魚眼レンズカメラ３を回動させる必要がなく、また、魚眼レンズカメラ３を回動させるための機械的な回動機構を必要とすることもなく、ユーザに広範囲な車両周辺の情報を適切に提供することができる。

本発明は、上記した実施形態にのみ限定されるものではなく、以下のように変形または拡張することができる。
撮影手段として、魚眼レンズカメラが採用された構成に限らず、広角レンズカメラが採用された構成であっても良い。また、複数個の魚眼レンズカメラや広角レンズカメラが車両に搭載されている構成であっても良い。

撮影画像をソフトウェア上で画像処理により回転させる構成に限らず、カメラを機械的に回転させるための回転機構が設けられ、予め撮影画像が乗員の目線を基準として水平方向に表示されるように回転軸を計算しておき、カメラを当該計算された回転軸を回転中心として機械的に回転させた状態で車両周辺を撮影することにより、最終的に表示される撮影画像が乗員の目線を基準として水平方向になるように表示される構成であっても良い。また、表示装置を機械的に回転させるための回転機構が設けられ、表示装置を撮影画像が乗員の目線を基準として水平方向に表示されるように機械的に回転させて撮影画像を表示する構成であっても良い。また、このようなカメラを機械的に回転させる技術と表示装置を機械的に回転させる技術とを組み合わせて撮影画像を表示する構成であっても良いし、さらに、撮影画像をソフトウェア上で画像処理により回転させる技術とカメラや表示装置を機械的に回転させる技術とを組み合わせて撮影画像を表示する構成であっても良い。尚、これらの構成では、カメラや表示装置を機械的に回転させるための回転機構が本発明でいう表示制御手段に相当する。

本発明の一実施形態を示す機能ブロック図撮影画像（原画像）を概略的に示す図演算ユニットが行う処理を表すフローチャート撮影画像の表示領域が切出される態様を概略的に示す図撮影画像が表示される態様を概略的に示す図

符号の説明

図面中、１は表示制御装置、３は魚眼レンズカメラ（撮影手段）、５は表示装置（表示手段）、７は画像処理部（表示制御手段、画像処理手段）である。

Claims

車両周辺を撮影する撮影手段と、
前記撮影手段により撮影された撮影画像を表示する表示手段と、
前記撮影手段により撮影された撮影画像の一部または全体が乗員の目線を基準として水平方向からずれている場合に、その撮影画像にあって乗員の目線を基準として水平方向からずれている一部または全体が乗員の目線を基準として水平方向に表示されるように制御する表示制御手段とを備えたことを特徴とする表示制御装置。
請求項１に記載した表示制御装置において、
前記撮影手段は、魚眼レンズカメラまたは広角レンズカメラから構成され、
前記表示手段は、前記撮影手段により撮影された撮影画像の一部を表示し、
前記表示制御手段は、前記撮影手段により撮影された撮影画像の一部を画像処理により回転させる画像処理手段から構成されていることを特徴とする表示制御装置。
請求項１に記載した表示制御装置において、
前記表示制御手段は、前記撮影手段および前記表示手段のうち少なくとも一方を機械的に回転させる回転機構から構成されていることを特徴とする表示制御装置。