JP2010116124A - Display control system, display control method, and display control program - Google Patents
Display control system, display control method, and display control program Download PDFInfo
- Publication number
- JP2010116124A JP2010116124A JP2008292800A JP2008292800A JP2010116124A JP 2010116124 A JP2010116124 A JP 2010116124A JP 2008292800 A JP2008292800 A JP 2008292800A JP 2008292800 A JP2008292800 A JP 2008292800A JP 2010116124 A JP2010116124 A JP 2010116124A
- Authority
- JP
- Japan
- Prior art keywords
- state information
- vehicle
- display control
- visual field
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Closed-Circuit Television Systems (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
Description
本発明は、表示制御システム、表示制御方法、及び表示制御プログラムに関する。 The present invention relates to a display control system, a display control method, and a display control program.
従来、ドライバの姿勢に合わせた映像を、車両の天井を支持する柱(以下、ピラー)に表示することができる運転支援装置が提案されている。この運転支援装置は、車両に取り付けられたカメラを用いて、ピラーによって生じる死角領域の映像を撮影し、撮影された映像をピラーの内側に表示する。この際、ドライバの頭部の位置を検出し、ピラーに対する頭部の位置に応じて死角の角度を算出して、ピラーの内側に表示される映像を制御する(例えば、特許文献1参照)。 2. Description of the Related Art Conventionally, a driving support device has been proposed that can display an image in accordance with a driver's posture on a pillar (hereinafter referred to as a pillar) that supports the ceiling of the vehicle. This driving support apparatus uses a camera attached to a vehicle to take an image of a blind spot area caused by a pillar, and displays the taken image on the inside of the pillar. At this time, the position of the head of the driver is detected, the angle of the blind spot is calculated according to the position of the head with respect to the pillar, and the image displayed inside the pillar is controlled (for example, see Patent Document 1).
ところで、運転中のドライバの頭部の動き方は、例えば直進走行時や右左折走行時などの走行状況に応じて異なるが、上述の如き従来の装置では、このような走行状況による差異を考慮せずにドライバの頭部の位置を検出していた。このため、頭部が細動していた場合に、その頭部の位置の検出結果に基づいてピラーの内側に表示される映像も細動してしまい、ドライバに不快感を与えてしまう可能性があった。 By the way, how the driver's head moves during driving differs depending on the driving situation, for example, when driving straight ahead or turning left and right, the conventional apparatus as described above takes into account such differences due to the driving situation. Without detecting the position of the driver's head. For this reason, when the head is fibrillated, the image displayed inside the pillar is also fibrillated based on the detection result of the position of the head, which may cause discomfort to the driver. was there.
本発明は、上記に鑑みてなされたものであって、走行状況に応じた最適な映像の表示制御が可能な表示制御システム、表示制御方法、及び表示制御プログラムを提供することを目的とする。 The present invention has been made in view of the above, and an object of the present invention is to provide a display control system, a display control method, and a display control program capable of optimal display control of an image according to a traveling situation.
上述した課題を解決し、目的を達成するために、請求項1に記載の表示制御システムは、車両の周辺の画像を取得する周辺画像取得手段と、前記車両のドライバの視野に関する状態を特定する視野状態情報を取得する視野状態情報取得手段と、前記視野状態情報に基づいて、前記画像における切取範囲を設定する切取範囲設定手段と、前記画像のうち前記切取範囲に対応する画像を表示する表示手段と、を備える表示制御システムであって、前記視野状態情報の変化が閾値以上である場合に前記視野状態情報に基づいて前記切取範囲を変更する切取範囲変更手段と、前記車両の状態を特定する車両状態情報を取得する車両状態情報取得手段と、前記車両状態情報に基づいて、前記閾値を設定する閾値設定手段と、を備えることを特徴とする。
In order to solve the above-described problems and achieve the object, the display control system according to
また、請求項2に記載の表示制御システムは、請求項1に記載の表示制御システムにおいて、前記車両状態情報は、前記車両の速度を特定する速度情報であることを特徴とする。
The display control system according to claim 2 is the display control system according to
また、請求項3に記載の表示制御システムは、請求項1又は2に記載の表示制御システムにおいて、前記車両状態情報は、前記車両の現在位置を特定する位置情報であることを特徴とする。 According to a third aspect of the present invention, in the display control system according to the first or second aspect, the vehicle state information is position information that specifies a current position of the vehicle.
また、請求項4に記載の表示制御システムは、請求項1から3のいずれか一項に記載の表示制御システムにおいて、前記車両状態情報は、前記車両のステアリングの操舵角を特定するステアリング情報であることを特徴とする。
The display control system according to claim 4 is the display control system according to any one of
また、請求項5に記載の表示制御システムは、請求項1から4のいずれか一項に記載の表示制御システムにおいて、前記車両状態情報に基づいて、前記視野状態情報取得手段が前記視野状態情報を取得するサンプリング周期を設定するサンプリング周期設定手段を備えることを特徴とする。
Moreover, the display control system according to
また、請求項6に記載の表示制御方法は、車両の周辺の画像を取得する周辺画像取得ステップと、前記車両のドライバの視野に関する状態を特定する視野状態情報を取得する視野状態情報取得ステップと、前記視野状態情報に基づいて、前記画像における切取範囲を設定する切取範囲設定ステップと、前記画像のうち前記切取範囲に対応する画像を表示手段に表示させる表示ステップと、を含む表示制御方法であって、前記視野状態情報の変化が所定の閾値以上である場合に前記視野状態情報に基づいて前記切取範囲を変更する切取範囲変更ステップと、前記車両の状態を特定する車両状態情報を取得する車両状態情報取得ステップと、前記車両状態情報に基づいて、前記閾値を設定する閾値設定ステップと、を含むことを特徴とする。 The display control method according to claim 6 includes a peripheral image acquisition step of acquiring an image around the vehicle, and a visual field state information acquisition step of acquiring visual field state information for specifying a state related to the visual field of the driver of the vehicle. A display control method comprising: a cutout range setting step for setting a cutout range in the image based on the visual field state information; and a display step for causing a display unit to display an image corresponding to the cutout range among the images. A cut range changing step for changing the cut range based on the visual field state information when the change in the visual field state information is greater than or equal to a predetermined threshold; and vehicle state information for specifying the vehicle state. A vehicle state information acquisition step; and a threshold value setting step for setting the threshold value based on the vehicle state information.
また、請求項7に記載の表示制御プログラムは、請求項6に記載の方法をコンピュータに実行させることを特徴とする。 A display control program according to claim 7 causes a computer to execute the method according to claim 6.
請求項1に記載の表示制御システム、請求項6に記載の表示制御方法、及び請求項7に記載の表示制御プログラムによれば、視野状態情報の変化が車両状態情報に基づいて設定された閾値以上である場合に、視野状態情報に基づいて、車両の周辺の画像における切取範囲を変更するので、走行状況に応じた切取範囲の設定が可能となり、走行状況に応じた最適な表示制御を行うことができる。
According to the display control system according to
また、請求項2に記載の表示制御システムによれば、車両状態情報は、車両の速度を特定する速度情報であるので、車両の速度によって異なる出力制御を行うことができる。例えば、ドライバの頭部の動きが小さい高速走行時に閾値を大きくする等により、表示手段の不必要な細動を低減することができる。 According to the display control system of the second aspect, since the vehicle state information is speed information for specifying the speed of the vehicle, different output control can be performed depending on the speed of the vehicle. For example, unnecessary fibrillation of the display means can be reduced by increasing the threshold during high-speed driving with a small movement of the driver's head.
また、請求項3に記載の表示制御システムによれば、車両状態情報は、車両の現在位置を特定する位置情報であるので、車両の現在位置によって異なる出力制御を行うことができる。例えば、ドライバの頭部の動きが小さい高速道路走行時に閾値を大きくする等により、表示手段の不必要な細動を低減することができ、ドライバの頭部の動きが大きい交差点内や駐車場では閾値を小さくすることにより、ドライバの頭部の動きに追随させて滑らかに映像を表示手段に表示させることができる。 According to the display control system of the third aspect, since the vehicle state information is position information for specifying the current position of the vehicle, different output control can be performed depending on the current position of the vehicle. For example, it is possible to reduce unnecessary fibrillation of the display means by increasing the threshold value when driving on a highway where the driver's head is small, and in an intersection or parking lot where the driver's head moves largely By reducing the threshold value, it is possible to smoothly display an image on the display means following the movement of the driver's head.
また、請求項4に記載の表示制御システムによれば、車両状態情報は、車両のステアリングの操舵角を特定するステアリング情報であるので、車両のステアリングの操舵角によって異なる出力制御を行うことができる。例えば、ステアリングの操舵角が小さい場合に閾値を大きくする等により、表示手段の不必要な細動を低減することができる。 According to the display control system of the fourth aspect, since the vehicle state information is steering information for specifying the steering angle of the vehicle steering, different output control can be performed depending on the steering angle of the vehicle steering. . For example, unnecessary fibrillation of the display means can be reduced by increasing the threshold when the steering angle is small.
また、請求項5に記載の表示制御システムによれば、車両状態情報に基づいて、視野状態情報取得手段が視野状態情報を取得するサンプリング周期を設定するので、走行状況に応じて適切なサンプリング周期で視野状態情報を取得できる。例えば、高速走行時にサンプリング周期を大きくすることにより、ドライバの一瞬のわき見によって切取範囲が変化してしまうことを防止することができる。 According to the display control system of the fifth aspect, since the visual field state information acquisition unit sets the sampling period for acquiring the visual field state information based on the vehicle state information, an appropriate sampling period according to the traveling state Visual field state information can be acquired. For example, by increasing the sampling period during high-speed traveling, it is possible to prevent the cutout range from changing due to a momentary driver's look.
以下、本発明に係る表示制御システム、表示制御方法、及び表示制御プログラムの各実施の形態について図面を参照しつつ詳細に説明する。ただし、各実施の形態によって本発明が限定されるものではない。 Hereinafter, embodiments of a display control system, a display control method, and a display control program according to the present invention will be described in detail with reference to the drawings. However, the present invention is not limited to each embodiment.
〔実施の形態1〕
最初に、実施の形態1について説明する。この形態は、切取範囲の変更を行う閾値を設定する形態である。
[Embodiment 1]
First, the first embodiment will be described. In this form, a threshold value for changing the cutout range is set.
(構成)
図1は実施の形態1に係る表示制御システムを例示するブロック図である。図1に示すように、この表示制御システム1は、ステアリングセンサ10、車速センサ20、車両周辺カメラ30、ドライバカメラ40、現在地検出処理部50、ディスプレイ60、及び表示制御装置70を備えている。
(Constitution)
FIG. 1 is a block diagram illustrating a display control system according to the first embodiment. As shown in FIG. 1, the
(構成−ステアリングセンサ)
ステアリングセンサ10は、車両のステアリングホイールの操舵角を検出し、当該検出値を表示制御装置70に出力するものであり、公知のステアリングセンサを用いることができる。
(Configuration-steering sensor)
The
(構成−車速センサ)
車速センサ20は、車輪の回転速度等を表示制御装置70に出力するものであり、公知の車速センサを用いることができる。
(Configuration-vehicle speed sensor)
The
(構成−車両周辺カメラ)
車両周辺カメラ30は、車両の周辺の画像を取得する周辺画像取得手段である。この車両周辺カメラ30は、例えば運転席側のフロントピラー外側(以下では特記する場合を除いて、「フロントピラー」を単に「ピラー」と称する。また、車両の外部に面する側を「外側」、車両の内部に面する側を「内側」と称する)に一台又は複数台設置され、車両の前方及び側方を撮影する。車両周辺カメラ30が取得した映像データは、表示制御装置70に出力される。なお、車両周辺カメラ30の具体的な構成は任意で、例えばCMOSイメージセンサやCCDイメージセンサ等の公知の撮像素子、及び魚眼レンズやプリズム等の公知の光学系部品を用いて構成されている。
(Configuration-Vehicle Perimeter Camera)
The vehicle
(構成−ドライバカメラ)
ドライバカメラ40は、ドライバの画像を撮影するためのものである。このドライバカメラ40は、例えば車両内部においてピラーの内側や天井等に設置され、ドライバの頭部を撮影する。ドライバカメラ40が取得した映像データは、表示制御装置70に出力される。なお、ドライバカメラ40の具体的な構成は任意で、車両周辺カメラ30と同様に、公知の撮像素子、及び公知の光学系部品を用いて構成されている。
(Configuration-Driver camera)
The
(構成−現在地検出処理部)
現在地検出処理部50は、表示制御装置70が取り付けられた車両の現在位置を検出する現在位置検出手段である。具体的には、現在地検出処理部50は、GPS、地磁気センサ、距離センサ、又はジャイロセンサ(いずれも図示省略)の少なくとも一つを有し、現在の車両の位置(座標)及び方位等を公知の方法にて検出する。
(Configuration-Current location detection processing unit)
The current position
(構成−ディスプレイ)
ディスプレイ60は、車両の周辺の画像のうち、表示制御装置70によって設定された切取範囲に対応する画像を表示する表示手段である。このディスプレイ60は、例えば車両前方のピラー内側に運転席に向けて配置され、表示制御装置70から出力された画像データを表示する。ディスプレイ60の具体的な構成は任意であり、公知の液晶ディスプレイや有機ELディスプレイの如きフラットパネルディスプレイを使用することができる。あるいは、ピラーの内側や天井等をスクリーンとし、車両内部の任意の位置に設けたプロジェクタから投影光を当該スクリーンに投影することにより、スクリーン上に画像データを表示させることもできる。
(Configuration-Display)
The
(構成−表示制御装置)
表示制御装置70は、制御部71及びデータ記録部72を備えている。
(Configuration-Display control device)
The
(構成−表示制御装置−制御部)
制御部71は、表示制御装置70を制御する制御手段であり、具体的には、CPU、当該CPU上で解釈実行される各種のプログラム(OSなどの基本制御プログラムや、OS上で起動され特定機能を実現するアプリケーションプログラムを含む)、及びプログラムや各種のデータを格納するためのRAMの如き内部メモリを備えて構成されるコンピュータである。特に、本実施の形態に係る表示制御プログラムは、任意の記録媒体又はネットワークを介して表示制御装置70にインストールされることで、制御部71の各部を実質的に構成する。
(Configuration-Display control device-Control unit)
The
この制御部71は、機能概念的に、視野状態情報取得部71a、表示制御部71b、車両状態情報取得部71c、及び閾値設定部71dを備えている。視野状態情報取得部71aは、車両のドライバの視野に関する状態を特定する視野状態情報を取得する視野状態情報取得手段である。表示制御部71bは、視野状態情報に基づいて、車両の周辺の画像における切取範囲を設定する切取範囲設定手段であり、視野状態情報の変化が閾値以上である場合に視野状態情報に基づいて切取範囲を変更する切取範囲変更手段であり、ディスプレイ60の出力制御を行う表示制御手段である。車両状態情報取得部71cは、車両の状態を特定する車両状態情報を取得する車両状態情報取得手段である。閾値設定部71dは、車両状態情報に基づいて、閾値を設定する閾値設定手段である。ここで、「視野」とは、ドライバの目に見える範囲であり、ドライバの頭部位置、顔の方向、視線方向等の動きに連動して変化するため、ドライバの視野に関連する状態を特定する情報である「視野状態情報」は、ドライバの頭部位置、顔の方向、視線方向等、例えばドライバカメラ40により撮影された画像に基づいて取得される。「閾値」とは、表示制御部71bが切取範囲の変更を実行するか否かの基準となる視野状態情報の値である。例えば、ドライバの頭部位置座標の変化量や、顔の方向ベクトルの変化量等について閾値を設定し、これらの変化量が設定した閾値以上である場合に、表示制御部71bに切取範囲の変更を行わせることができる。「車両状態情報」とは、車両の状態を特定するための情報であり、例えば、車速、ステアリングの操舵角、車両の現在位置等を特定する情報を含んでいる。これらの制御部71の各構成要素によって実行される処理の詳細については後述する。
The
(構成−表示制御装置−データ記録部)
データ記録部72は、表示制御装置70の動作に必要なプログラム及び各種のデータを記録する記録手段であり、例えば、外部記憶装置としてのハードディスク(図示省略)を用いて構成されている。ただし、ハードディスクに代えてあるいはハードディスクと共に、磁気ディスクの如き磁気的記録媒体、又はDVDやブルーレイディスクの如き光学的記録媒体を含む、その他の任意の記録媒体を用いることができる。
(Configuration-Display control device-Data recording unit)
The
このデータ記録部72は、制御テーブル72a、及び地図情報データベース72b(以下、データベースを「DB」と称する)を備えている。制御テーブル72aは、表示制御部71bがディスプレイ60の出力制御を実行する際に参照するためのものである。図2は、制御テーブル72aに格納されている情報を例示した表である。図2に示したように、制御テーブル72aは、テーブル項目として項目「車両状態」及び項目「視野状態情報閾値」を備え、これらに対応する情報が相互に対応付けて格納されている。項目「車両状態」に対応して格納される情報は車両状態情報であり、例えば、車両の速度を特定する速度情報、車両の現在位置を特定する位置情報、車両のステアリングの操舵角を特定するステアリング情報等の車両状態情報を格納することができる(図2では「車速」について「50km/h以上」、「50km/h未満」、あるいは「現在位置」について「交差点内」、「交差点外」等)。項目「視野状態情報閾値」に対応して格納される情報は、表示制御部71bが切取範囲の変更を実行するか否かの基準となる値であり、例えば、ディスプレイ60に対する表示制御部71bによる出力制御開始のトリガとなるドライバの頭部位置の変化量を格納することができる(図2では「車速」が「50km/h未満」の場合に「1cm」、「50km/h以上」の場合に「5cm」等)。
The
図1に戻り、地図情報DB72bは、地図情報を格納する地図情報格納手段である。「地図情報」とは、交差点、高速道路、駐車場等の位置の特定に必要な情報であり、例えば、交差点データ(交差点座標等)、道路データ(道路種別、車線数、制限速度、道路座標、道路番号等)、地図をモニタ(図示省略)に表示するための地図表示データ等を含んで構成されている。
Returning to FIG. 1, the
(処理)
次に、このように構成される表示制御システム1によって実行される処理について、閾値設定処理と表示制御処理とに大別して説明する。
(processing)
Next, processing executed by the
(処理−閾値設定処理)
まず、閾値設定処理について説明する。図3は閾値設定処理のフローチャートである(以下の各処理の説明ではステップを「S」と略記する)。この閾値設定処理は、例えば、自車両のエンジン始動後に自動的に起動される。エンジン始動後、車両状態情報取得部71cは、ステアリングセンサ10、車速センサ20、現在地検出処理部50等を介して、ステアリングの操舵角、車速、現在位置等の車両状態情報を取得する(SA1)。また、取得した車両状態情報と、地図情報DB72bに格納されている地図情報とに基づいて、地図上での自車の位置を特定する(SA2)。
(Processing-threshold setting processing)
First, the threshold setting process will be described. FIG. 3 is a flowchart of the threshold setting process (in the following description of each process, step is abbreviated as “S”). This threshold value setting process is automatically started after the engine of the host vehicle is started, for example. After the engine is started, the vehicle state
続いて、閾値設定部71dは制御テーブル72aを参照し、車両状態情報取得部71cが取得した車両状態情報及び地図上での自車の位置に基づいて、ディスプレイ60に対する表示制御部71bによる切取範囲変更の閾値を決定し、当該表示制御部71bに閾値を設定する(SA3)。この閾値の決定基準は任意であり、例えば図2において、車速が50km/h以上であり、現在位置が交差点外又は高速道路であり、ステアリングの操舵角が10度未満であるとの全ての条件が満たされた場合に、閾値を5cmに決定し、それ以外の場合、例えば車速が50km/h未満の場合や、現在位置が交差点内の場合等は、閾値を1cmに決定することができる。また、車速、現在位置、またはステアリングの操舵角のいずれか一つの値に基づいて閾値を決定してもよく、あるいはこれらの車両状態情報に対応する閾値の中で最も多い閾値を採用したり、車両状態情報に対応する閾値の平均値を採用してもよい。例えば、車速が50km/h未満、現在位置が交差点内、ステアリングの操舵角が10度未満であった場合、車速及び現在位置に対応する閾値が1cm、ステアリングの操舵角に対応する閾値が5cmであるので、最も多い閾値を採用する場合には、閾値=1cmを採用し、平均値を採用する場合には、閾値=7/3=2.3cmを採用する。以降、同様に、SA1からSA3を繰り返す。
Subsequently, the
(処理−表示制御処理)
次に、表示制御処理について説明する。図4は表示制御処理のフローチャートである。この表示制御処理は、例えば、閾値設定処理と同時に自車両のエンジン始動後所定周期毎(例えば0.2秒毎)に起動される。表示制御処理の起動後、表示制御部71bは、車両周辺カメラ30によって車両の周辺の画像を取得させる(SB1)。次に、視野状態情報取得部71aは、ドライバカメラ40を介して、ドライバの頭部位置等の視野状態情報を取得する(SB2)。
(Processing-Display control processing)
Next, the display control process will be described. FIG. 4 is a flowchart of the display control process. This display control process is started, for example, every predetermined period (for example, every 0.2 seconds) after the engine of the host vehicle is started simultaneously with the threshold setting process. After the display control process is activated, the
表示制御部71bは、ディスプレイ60に画像を表示させているか否かを判定し(SB3)、例えば表示制御処理の起動直後のため、画像を表示させていない場合(SB3、No)、車両周辺カメラ30が取得した画像における、視野状態情報に応じた切取範囲を設定すると共に、当該設定した切取範囲をRAM等に記憶させる(SB4)。切取範囲を設定する場合、表示制御部71bは、例えば、SB2で取得したドライバの頭部位置等に基づき、ピラー等で遮蔽されることにより生じるドライバ視野の死角を算出する。そして、算出した死角に対応する範囲を車両周辺カメラ30によって撮影された画像における切取範囲として設定する。
The
一方、既にディスプレイ60に画像を表示させている場合(SB3、Yes)、表示制御部71bは、閾値設定処理のSA3で設定された閾値を基準として、SB2で取得された視野状態情報の値と前回取得された視野状態情報の値との差分値が当該閾値以上であるか否かを判定する(SB5)。その結果、前回取得された視野状態情報の値との差分値が当該閾値以上である場合(SB5、Yes)、表示制御部71bは既に設定されている切取範囲をSB2で今回取得された視野状態情報に基づいて変更し、当該変更した切取範囲をRAM等に記憶させる(SB6)。また、前回取得された視野状態情報の値との差分値が当該閾値未満である場合(SB5、No)、前回以前の処理にて記憶された切取範囲をRAM等から読み出し、車両周辺カメラ30によって撮影された画像における切取範囲として設定する(SB7)。
On the other hand, when an image is already displayed on the display 60 (SB3, Yes), the
SB4、SB5、又はSB7の処理の後、表示制御部71bは、設定されている切取範囲に対応する画像を車両周辺カメラ30によって撮影された画像から抽出し(SB8)、当該抽出した画像をディスプレイ60に表示させる(SB9)。以降同様に、SB1からSB9を繰り返す。
After the process of SB4, SB5, or SB7, the
このように、車速が大きい場合や高速道路を走行中の場合等、ドライバが車両の前方を注視している割合が多く頭部の動きが小さい場合に閾値を大きくすることにより、ディスプレイ60に表示される映像がドライバの頭部の僅かな動きにまで追随して画面が不必要に細動することを低減でき、ドライバに与える不快感を低減することができる。一方、車速が小さい場合や交差点を走行中の場合等、ドライバが車両の左右にも注意を払うために頭部の動きが大きくなる場合に閾値を小さくすることにより、ドライバの頭部の動きに追随させて滑らかに映像をディスプレイ60に表示させることができ、適切な運転支援をドライバに提供することができる。
Thus, when the vehicle speed is high or the vehicle is traveling on a highway, the threshold is increased when the driver is gazing at the front of the vehicle and the head movement is small. Therefore, it is possible to reduce the unnecessary motion of the screen following the slight movement of the driver's head, and to reduce discomfort given to the driver. On the other hand, when the driver's head movement increases to pay attention to the left and right of the vehicle, such as when the vehicle speed is low or when driving at an intersection, the threshold value is reduced to reduce the driver's head movement. The image can be smoothly displayed on the
(効果)
このように本実施の形態1によれば、視野状態情報の変化が車両状態情報に基づいて変更された所定の閾値以上である場合に、視野状態情報に基づいて、車両の周辺の画像における切取範囲を表示制御部71bが変更するので、走行状況に応じて異なる視野状態に基づいて切取範囲を変更することができ、走行状況に応じた最適な表示制御を行うことができる。
(effect)
As described above, according to the first embodiment, when the change in the visual field state information is equal to or greater than the predetermined threshold value changed based on the vehicle state information, the cropping in the image around the vehicle is performed based on the visual field state information. Since the
また、車両状態情報は、車両の速度を特定する速度情報であるので、車両の速度によって異なるドライバの頭部の動き方等を考慮に入れた出力制御を行うことができる。例えば、ドライバの頭部の動きが小さい高速走行時に閾値を低速走行時より大きくする等により、ディスプレイ60の不必要な細動を低減することができる。
Further, since the vehicle state information is speed information for specifying the speed of the vehicle, it is possible to perform output control that takes into account how the head of the driver varies depending on the speed of the vehicle. For example, unnecessary fibrillation of the
また、車両状態情報は、車両の現在位置を特定する位置情報であるので、車両の現在位置によって異なるドライバの頭部の動き方等を考慮に入れた出力制御を行うことができる。例えば、ドライバの頭部の動きが小さい高速道路走行時に閾値を一般道路走行時よりも大きくする等により、ディスプレイ60の不必要な細動を低減することができ、ドライバの頭部の動きが大きい交差点内や駐車場では閾値を小さくすることにより、ドライバの頭部の動きに追随させて滑らかに映像をディスプレイ60に表示させることができる。
Further, since the vehicle state information is position information for specifying the current position of the vehicle, output control can be performed in consideration of how the head of the driver varies depending on the current position of the vehicle. For example, unnecessary fibrillation of the
また、車両状態情報は、車両のステアリングの操舵角を特定するステアリング情報であるので、車両のステアリングの操舵角によって異なるドライバの頭部の動き方等を考慮に入れた出力制御を行うことができる。例えば、ドライバの頭部の動きが小さいステアリングの操舵角が小さい場合に閾値を操舵角が大きい場合よりも大きくする等により、ディスプレイ60の不必要な細動を低減することができる。
In addition, since the vehicle state information is steering information that specifies the steering angle of the vehicle steering, output control can be performed in consideration of the way the head of the driver varies depending on the steering angle of the vehicle steering. . For example, unnecessary fibrillation of the
〔実施の形態2〕
次に、実施の形態2について説明する。この形態は、視野状態情報取得手段が視野状態情報を取得するサンプリング周期を走行状況に応じて設定する形態である。なお、実施の形態2及びそれ以降の実施の形態の構成は、特記する場合を除いて、実施の形態1の構成と略同一であり、実施の形態1の構成と略同一の構成についてはこの実施の形態1で用いたものと同一の符号及び/又は名称を必要に応じて付して、その説明を省略する。
[Embodiment 2]
Next, a second embodiment will be described. This form is a form in which the visual field state information acquisition means sets the sampling period for acquiring the visual field state information in accordance with the traveling state. The configurations of the second embodiment and the subsequent embodiments are substantially the same as the configurations of the first embodiment unless otherwise specified, and this configuration is substantially the same as the configuration of the first embodiment. The same reference numerals and / or names as those used in
(構成−表示制御装置−制御部)
まず、実施の形態2に係る表示制御システム1の構成について説明する。実施の形態2に係る制御部71は、実施の形態1で説明した制御部71の各構成要素に加えて、機能概念的に、サンプリング周期設定部を備えている。サンプリング周期設定部は、視野状態情報取得部71aが視野状態情報を取得するサンプリング周期を設定するサンプリング周期設定手段である。これらの制御部71の各構成要素によって実行される処理の詳細については後述する。
(Configuration-Display control device-Control unit)
First, the configuration of the
(構成−表示制御装置−制御テーブル)
図5は、制御テーブル72aに格納されている情報を例示した表である。図5に示したように、実施の形態2に係る制御テーブル72aは、実施の形態1の制御テーブル72aが備えるテーブル項目に加えて、項目「サンプリング周期」を備え、これらに対応する情報が項目「車両状態」に格納されている情報と相互に対応付けて格納されている。項目「サンプリング周期」に対応して格納される情報は、視野状態情報取得部71aが視野状態情報を取得する周期であり、例えば、「車速」が「50km/h未満」の場合に「0.2sec」、「50km/h以上」の場合に「3sec」等の値を格納することができる。
(Configuration-Display control device-Control table)
FIG. 5 is a table illustrating information stored in the control table 72a. As shown in FIG. 5, the control table 72a according to the second embodiment includes an item “sampling period” in addition to the table items included in the control table 72a of the first embodiment, and information corresponding to these items is an item. It is stored in association with the information stored in “vehicle state”. The information stored corresponding to the item “sampling cycle” is a cycle in which the visual field state
(処理)
次に、実施の形態2に係る表示制御システム1によって実行される処理について説明する。本実施の形態2においては、表示制御システム1によって実行される処理はサンプリング周期設定処理と表示制御処理とに大別される。以下、各処理について説明する。
(processing)
Next, processing executed by the
(処理−サンプリング周期設定処理)
まず、サンプリング周期設定処理について説明する。なお、本実施の形態2におけるサンプリング周期設定処理は、以下に説明する内容を除いて実施の形態1で説明した閾値設定処理と同様であるので、フローチャートの図示を省略する。実施の形態1で説明した閾値設定処理のSA3において閾値設定部71dが閾値の決定及び設定を行う際、サンプリング周期設定部は制御テーブル72aを参照し、車両状態情報取得部71cが取得した車両状態情報及び自車の位置に基づいて、視野状態情報取得部71aが視野状態情報を取得するサンプリング周期Tを決定し、当該視野状態情報取得部71aにサンプリング周期Tを設定する。例えば図5において、車速が50km/h以上であり、現在位置が交差点外又は高速道路であり、ステアリングの操舵角が10度未満であるとの全ての条件が満たされた場合に、サンプリング周期設定部はサンプリング周期Tを3secに決定する。また、実施の形態1における閾値の決定と同様に、車速、現在位置、またはステアリングの操舵角のいずれか一つの値に基づいてサンプリング周期Tを決定してもよく、あるいはこれらの車両状態情報に対応するサンプリング周期Tの中で最も多い値や平均値等を採用してもよい。
(Processing-Sampling cycle setting process)
First, the sampling cycle setting process will be described. Note that the sampling cycle setting process in the second embodiment is the same as the threshold setting process described in the first embodiment except for the contents described below, and thus the illustration of the flowchart is omitted. When the
(処理−表示制御処理)
次に、表示制御処理について説明する。図6は表示制御処理のフローチャートである。なお、本実施の形態2に係る表示制御処理におけるSC7からSC11までの各処理の内容は、上述の実施の形態1に係る表示制御処理におけるSB5からSB9までの各処理と同様であるので、詳細な説明を省略する。
(Processing-Display control processing)
Next, the display control process will be described. FIG. 6 is a flowchart of the display control process. Note that the contents of each process from SC7 to SC11 in the display control process according to the second embodiment are the same as the processes from SB5 to SB9 in the display control process according to the first embodiment described above. The detailed explanation is omitted.
表示制御処理が、例えば、サンプリング周期設定処理と同時に自車両のエンジン始動後所定周期毎(例えば0.2秒毎)に起動されると、表示制御部71bは、車両周辺カメラ30によって車両の周辺の画像を取得させる(SC1)。次に、表示制御部71bは、ディスプレイ60に画像を表示させているか否かを判定し(SC2)、既にディスプレイ60に画像を表示させている場合(SC2、Yes)、視野状態情報取得部71aによって視野状態情報が前回取得された時からの経過時間を計時するタイマのタイマ値nと、サンプリング周期設定処理にて設定されたサンプリング周期Tとを比較する(SC3)。
For example, when the display control process is started at a predetermined period (for example, every 0.2 seconds) after the engine of the host vehicle is started simultaneously with the sampling period setting process, the
その結果、タイマ値nがサンプリング周期T以上であった場合(SC3、Yes)、又はSC2においてディスプレイ60に画像を表示させていなかった場合(SC2、No)、視野状態情報の取得タイミングが到来したものとし、視野状態情報取得部71aは、タイマ値をリセットし(SC4)、タイマの計測を開始させると共に(SC5)、ドライバカメラ40を介してドライバの頭部位置等の視野状態情報を取得する(SC6)。その後、表示制御部71bは、SC5で取得された視野状態情報の値と前回取得された視野状態情報の値との差分値が閾値以上であるか否かを判定する(SC7)。
As a result, when the timer value n is equal to or greater than the sampling period T (SC3, Yes), or when no image is displayed on the
一方、タイマ値nがサンプリング周期T未満であった場合(SC3、No)、前回以前の処理にて記憶された切取範囲をRAM等から読み出し、車両周辺カメラ30によって撮影された画像における切取範囲として設定する(SC9)。以降同様に、所定の周期(例えば0.2秒毎)でSC1からSC11を繰り返す。
On the other hand, when the timer value n is less than the sampling period T (SC3, No), the cutout range stored in the previous process is read from the RAM or the like, and the cutout range in the image taken by the vehicle
このように、車速が大きい場合や高速道路を走行中の場合等、ドライバが車両の前方を注視している割合が多く頭部の動きが小さい場合に、サンプリング周期を大きくすることにより、ディスプレイ60に表示される映像の不必要な細動を低減でき、ドライバに与える不快感を低減することができる。一方、車速が小さい場合や交差点を走行中の場合等、ドライバが車両の左右にも注意を払うために頭部の動きが大きくなる場合にサンプリング周期を小さくすることにより、ドライバの頭部の動きに追随させて滑らかに映像をディスプレイ60に表示させることができ、適切な運転支援をドライバに提供することができる。
Thus, when the vehicle speed is high or the vehicle is traveling on a highway, the
(効果)
このように実施の形態2によれば、車両状態情報に基づいて、視野状態情報取得部71aが視野状態情報を取得するサンプリング周期を設定するので、走行状況に応じて適切なサンプリング周期で視野状態情報を取得できる。例えば、高速走行時にサンプリング周期を大きくすることにより、ドライバの一瞬のわき見によって切取範囲が変化してしまうことを防止することができる。
(effect)
As described above, according to the second embodiment, since the visual field state
〔各実施の形態に対する変形例〕
以上、本発明に係る各実施の形態について説明したが、本発明の具体的な構成及び手段は、特許請求の範囲に記載した各発明の技術的思想の範囲内において、任意に改変及び改良することができる。以下、このような変形例について説明する。
[Modifications to Embodiments]
Although the embodiments of the present invention have been described above, the specific configuration and means of the present invention are arbitrarily modified and improved within the scope of the technical idea of each invention described in the claims. be able to. Hereinafter, such a modification will be described.
(解決しようとする課題や発明の効果について)
まず、発明が解決しようとする課題や発明の効果は、上述の内容に限定されるものではなく、発明の実施環境や構成の細部に応じて異なる可能性があり、上述した課題の一部のみを解決したり、上述した効果の一部のみを奏することがある。
(About problems to be solved and effects of the invention)
First, the problems to be solved by the invention and the effects of the invention are not limited to the above-mentioned contents, and may vary depending on the implementation environment and details of the configuration of the invention. May be solved, or only some of the effects described above may be achieved.
(閾値設定処理及び表示制御処理について)
上記実施の形態2では、実施の形態1で説明した閾値設定処理において閾値設定部71dが閾値の決定及び設定を行う際、サンプリング周期設定部はサンプリング周期を設定すると説明したが、閾値の設定を行わずにサンプリング周期のみの設定を行い、当該設定したサンプリング周期に基づき、視野状態情報取得部71aが視野状態情報を取得するようにしてもよい。
(About threshold setting processing and display control processing)
In the second embodiment, it has been described that when the
(制御テーブルについて)
制御テーブル72aの具体的な設定内容は任意に変更することができる。例えば、車両状態として、方向指示器の操作状態を加えてもよく、方向指示器が操作されている場合には、方向指示器が操作されてない場合に比べて、閾値、又はサンプリング周期を小さくしてもよい。また、閾値、又はサンプリング周期は、絶対値ではなく、基準値(デフォルト値)に対する相対値として設定してもよい。
(About the control table)
Specific setting contents of the control table 72a can be arbitrarily changed. For example, the operation state of the direction indicator may be added as the vehicle state, and when the direction indicator is operated, the threshold value or the sampling period is made smaller than when the direction indicator is not operated. May be. Further, the threshold value or the sampling period may be set as a relative value with respect to a reference value (default value) instead of an absolute value.
1 表示制御システム
10 ステアリングセンサ
20 車速センサ
30 車両周辺カメラ
40 ドライバカメラ
50 現在地検出処理部
60 ディスプレイ
70 表示制御装置
71 制御部
71a 視野状態情報取得部
71b 表示制御部
71c 車両状態情報取得部
71d 閾値設定部
72 データ記録部
72a 制御テーブル
72b 地図情報DB
DESCRIPTION OF
Claims (7)
前記車両のドライバの視野に関する状態を特定する視野状態情報を取得する視野状態情報取得手段と、
前記視野状態情報に基づいて、前記画像における切取範囲を設定する切取範囲設定手段と、
前記画像のうち前記切取範囲に対応する画像を表示する表示手段と、を備える表示制御システムであって、
前記視野状態情報の変化が閾値以上である場合に前記視野状態情報に基づいて前記切取範囲を変更する切取範囲変更手段と、
前記車両の状態を特定する車両状態情報を取得する車両状態情報取得手段と、
前記車両状態情報に基づいて、前記閾値を設定する閾値設定手段と、
を備えることを特徴とする表示制御システム。 Peripheral image acquisition means for acquiring an image around the vehicle;
Visual field state information acquisition means for acquiring visual field state information for specifying a state related to the visual field of the driver of the vehicle;
A cutting range setting means for setting a cutting range in the image based on the visual field state information;
A display control system comprising: display means for displaying an image corresponding to the cutout range of the image,
Cutting range changing means for changing the cutting range based on the visual field state information when the change in the visual field state information is a threshold value or more,
Vehicle state information acquisition means for acquiring vehicle state information for specifying the state of the vehicle;
Threshold setting means for setting the threshold based on the vehicle state information;
A display control system comprising:
を特徴とする請求項1に記載の表示制御システム。 The vehicle state information is speed information for specifying a speed of the vehicle;
The display control system according to claim 1.
を特徴とする請求項1又は2に記載の表示制御システム。 The vehicle state information is position information for specifying a current position of the vehicle;
The display control system according to claim 1 or 2.
を特徴とする請求項1から3のいずれか一項に記載の表示制御システム。 The vehicle state information is steering information for specifying a steering angle of the steering of the vehicle;
The display control system according to any one of claims 1 to 3, wherein:
を特徴とする請求項1から4のいずれか一項に記載の表示制御システム。 Based on the vehicle state information, the visual field state information acquisition unit includes a sampling period setting unit that sets a sampling period for acquiring the visual field state information;
The display control system according to any one of claims 1 to 4, wherein:
前記車両のドライバの視野に関する状態を特定する視野状態情報を取得する視野状態情報取得ステップと、
前記視野状態情報に基づいて、前記画像における切取範囲を設定する切取範囲設定ステップと、
前記画像のうち前記切取範囲に対応する画像を表示手段に表示させる表示ステップと、を含む表示制御方法であって、
前記視野状態情報の変化が所定の閾値以上である場合に前記視野状態情報に基づいて前記切取範囲を変更する切取範囲変更ステップと、
前記車両の状態を特定する車両状態情報を取得する車両状態情報取得ステップと、
前記車両状態情報に基づいて、前記閾値を設定する閾値設定ステップと、
を含むことを特徴とする表示制御方法。 A peripheral image acquisition step of acquiring an image around the vehicle;
Visual field state information acquisition step for acquiring visual field state information for specifying a state related to the visual field of the driver of the vehicle;
A cutting range setting step for setting a cutting range in the image based on the visual field state information;
A display step of displaying on the display means an image corresponding to the cutout range of the image,
A cutting range changing step of changing the cutting range based on the visual field state information when the change in the visual field state information is a predetermined threshold or more,
Vehicle state information acquisition step for acquiring vehicle state information for specifying the state of the vehicle;
A threshold setting step for setting the threshold based on the vehicle state information;
A display control method comprising:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008292800A JP5263519B2 (en) | 2008-11-14 | 2008-11-14 | Display control system, display control method, and display control program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008292800A JP5263519B2 (en) | 2008-11-14 | 2008-11-14 | Display control system, display control method, and display control program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010116124A true JP2010116124A (en) | 2010-05-27 |
JP5263519B2 JP5263519B2 (en) | 2013-08-14 |
Family
ID=42304056
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008292800A Expired - Fee Related JP5263519B2 (en) | 2008-11-14 | 2008-11-14 | Display control system, display control method, and display control program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5263519B2 (en) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010179850A (en) * | 2009-02-06 | 2010-08-19 | Toyota Motor Corp | Vehicular display device |
JP2014534697A (en) * | 2011-10-14 | 2014-12-18 | コンチネンタル オートモーティブ システムズ インコーポレイテッドContinental Automotive Systems, Inc. | Virtual display system for vehicles |
JP2015162901A (en) * | 2014-02-27 | 2015-09-07 | ハーマン インターナショナル インダストリーズ インコーポレイテッド | Virtual see-through instrument cluster with live video |
WO2017056495A1 (en) * | 2015-09-28 | 2017-04-06 | 京セラ株式会社 | Image processing device, imaging device, camera monitor system and image processing method |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0796768A (en) * | 1993-09-27 | 1995-04-11 | Nissan Motor Co Ltd | Forward watching degree detector |
JP2004064131A (en) * | 2002-07-24 | 2004-02-26 | Honda Motor Co Ltd | Display for vehicle |
JP2007253748A (en) * | 2006-03-22 | 2007-10-04 | Takata Corp | Object detection system, drive gear and vehicle |
JP2008022267A (en) * | 2006-07-12 | 2008-01-31 | Aisin Aw Co Ltd | Drive assisting method and drive assisting device |
-
2008
- 2008-11-14 JP JP2008292800A patent/JP5263519B2/en not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0796768A (en) * | 1993-09-27 | 1995-04-11 | Nissan Motor Co Ltd | Forward watching degree detector |
JP2004064131A (en) * | 2002-07-24 | 2004-02-26 | Honda Motor Co Ltd | Display for vehicle |
JP2007253748A (en) * | 2006-03-22 | 2007-10-04 | Takata Corp | Object detection system, drive gear and vehicle |
JP2008022267A (en) * | 2006-07-12 | 2008-01-31 | Aisin Aw Co Ltd | Drive assisting method and drive assisting device |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010179850A (en) * | 2009-02-06 | 2010-08-19 | Toyota Motor Corp | Vehicular display device |
JP2014534697A (en) * | 2011-10-14 | 2014-12-18 | コンチネンタル オートモーティブ システムズ インコーポレイテッドContinental Automotive Systems, Inc. | Virtual display system for vehicles |
JP2015162901A (en) * | 2014-02-27 | 2015-09-07 | ハーマン インターナショナル インダストリーズ インコーポレイテッド | Virtual see-through instrument cluster with live video |
WO2017056495A1 (en) * | 2015-09-28 | 2017-04-06 | 京セラ株式会社 | Image processing device, imaging device, camera monitor system and image processing method |
JPWO2017056495A1 (en) * | 2015-09-28 | 2018-03-01 | 京セラ株式会社 | Image processing apparatus, imaging apparatus, camera monitor system, and image processing method |
US10503989B2 (en) | 2015-09-28 | 2019-12-10 | Kyocera Corporation | Image processing apparatus, imaging apparatus, camera monitor system, and image processing method |
Also Published As
Publication number | Publication date |
---|---|
JP5263519B2 (en) | 2013-08-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5798392B2 (en) | Parking assistance device | |
US10124728B2 (en) | Image processing apparatus | |
US10061995B2 (en) | Imaging system to detect a trigger and select an imaging area | |
JP2009071375A5 (en) | ||
JP6711137B2 (en) | Display control program, display control method, and display control device | |
JP5263519B2 (en) | Display control system, display control method, and display control program | |
JP2016134129A (en) | Video display system, processing apparatus, video display method, and video display program | |
US10362231B2 (en) | Head down warning system | |
JP6890288B2 (en) | Image processing equipment, image display system and image processing method | |
JP2009099033A (en) | Vehicle peripheral image photographing controller and program used therefor | |
JP2004173048A (en) | Onboard camera system | |
JP2011022952A (en) | Drive assist device, drive assist method, and drive assist program | |
JP5263520B2 (en) | Display control system, display control method, and display control program | |
JP4857159B2 (en) | Vehicle driving support device | |
JP2005214730A (en) | Image display device, method, and program for vehicle | |
JP2010233080A (en) | Driving support device, driving support method, and driving support program | |
JP2008128867A (en) | Device for identifying tire direction | |
KR20170011817A (en) | Image processing apparatus and METHOD USING THE SAME | |
JP2010009491A (en) | Driving assist system, driving assist method, and driving assist program | |
WO2017213244A1 (en) | Image processing device, image processing program, and recording medium | |
JP2007218655A (en) | Navigation device | |
JP2007052114A (en) | Photographing device, photographing controller and photographing system | |
JP2023001977A (en) | Vehicle peripheral information display device, and vehicle peripheral information display method | |
WO2020144949A1 (en) | Recording control device, recording control system, recording control method, and program | |
JP2003323699A (en) | Safe driving supporting device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110308 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20121031 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20121031 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121226 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130403 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130416 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |