JP2016025615A - Information processing device, information processing method and program - Google Patents

Information processing device, information processing method and program Download PDF

Info

Publication number
JP2016025615A
JP2016025615A JP2014150633A JP2014150633A JP2016025615A JP 2016025615 A JP2016025615 A JP 2016025615A JP 2014150633 A JP2014150633 A JP 2014150633A JP 2014150633 A JP2014150633 A JP 2014150633A JP 2016025615 A JP2016025615 A JP 2016025615A
Authority
JP
Japan
Prior art keywords
captured image
luminance
change amount
information processing
parameter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014150633A
Other languages
Japanese (ja)
Other versions
JP5804155B1 (en
Inventor
規景 今中
Norihiro Imanaka
規景 今中
孝光 渡辺
Takamitsu Watanabe
孝光 渡辺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Oki Electric Industry Co Ltd
Original Assignee
Oki Electric Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Oki Electric Industry Co Ltd filed Critical Oki Electric Industry Co Ltd
Priority to JP2014150633A priority Critical patent/JP5804155B1/en
Application granted granted Critical
Publication of JP5804155B1 publication Critical patent/JP5804155B1/en
Publication of JP2016025615A publication Critical patent/JP2016025615A/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Studio Devices (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a technique for accurately selecting parameters for detecting a vehicle from a photographed image.SOLUTION: An information processing device 20 includes: a change amount detection part 215 for detecting an entire luminance change amount Vt in a photographed image by making the whole of a predetermined reference image to be a reference and a luminance change amount Vr of a setting region R in a photographed image by making a predetermined setting region R of the reference image to be a reference; and a parameter selection part 216 for selecting a luminance range for detecting a vehicle from the photographed image on the basis of the luminance change amount Vt and the luminance change amount Vr.SELECTED DRAWING: Figure 3

Description

本発明は、情報処理装置、情報処理方法およびプログラムに関するものである。   The present invention relates to an information processing apparatus, an information processing method, and a program.

近年、撮像画像から車両を検出する技術が開発されている。ここで、撮像画像への車両の映り具合は一定であるとは限らず、例えば、環境(天候など)の変化に応じて変化され得る。そこで、撮像画像から車両を検出するためのパラメータを、環境の変化に応じて変化させる技術が知られている。例えば、ネットワークを介して環境の変化に関する情報を取得し、環境の変化に関する情報に応じて動物体を検出するための領域を変化させる技術が開示されている(例えば、特許文献1参照)。   In recent years, techniques for detecting vehicles from captured images have been developed. Here, the degree of reflection of the vehicle in the captured image is not necessarily constant, and can be changed according to changes in the environment (such as weather), for example. Therefore, a technique for changing a parameter for detecting a vehicle from a captured image according to a change in environment is known. For example, a technique is disclosed in which information regarding environmental changes is acquired via a network, and a region for detecting a moving object is changed according to the information regarding environmental changes (see, for example, Patent Document 1).

特開2009−27651号公報JP 2009-27651 A

しかしながら、撮像画像への車両の映り具合の変化の要因は、環境の変化以外にも存在し得る。一例として、撮像画像を撮像する撮像装置自体に設定されるパラメータ(以下、「撮像条件」とも言う。)の変化によっても撮像画像への車両の映り具合が変化され得る。したがって、環境の変化を考慮するだけでは、車両を検出するためのパラメータを高精度に選択することが困難である。   However, the cause of the change in the appearance of the vehicle in the captured image may exist in addition to the change in the environment. As an example, the degree of reflection of the vehicle on the captured image can be changed by a change in a parameter (hereinafter also referred to as “imaging condition”) set in the imaging apparatus itself that captures the captured image. Therefore, it is difficult to select a parameter for detecting a vehicle with high accuracy only by considering changes in the environment.

そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、撮像画像から車両を検出するためのパラメータをより高精度に選択する技術を提供することにある。   Accordingly, the present invention has been made in view of the above problems, and an object of the present invention is to provide a technique for selecting a parameter for detecting a vehicle from a captured image with higher accuracy. .

上記問題を解決するために、本発明のある観点によれば、所定の基準画像を基準とした撮像画像の輝度変化量および前記基準画像における所定の設定領域を基準とした前記撮像画像における前記設定領域の輝度変化量を検出する変化量検出部と、前記撮像画像から車両を検出するための所定のパラメータを、前記撮像画像の前記輝度変化量および前記撮像画像における前記設定領域の前記輝度変化量に基づいて選択するパラメータ選択部と、を備える、情報処理装置が提供される。   In order to solve the above problem, according to an aspect of the present invention, the luminance change amount of a captured image based on a predetermined reference image and the setting in the captured image based on a predetermined setting area in the reference image A change amount detection unit that detects a luminance change amount of a region, and a predetermined parameter for detecting a vehicle from the captured image, the luminance change amount of the captured image, and the luminance change amount of the setting region in the captured image And an information processing apparatus including a parameter selection unit that performs selection based on the information.

あるいは、撮像画像における所定の設定領域の輝度変化量を検出する変化量検出部と、前記撮像画像から車両を検出するための所定のパラメータを、前記撮像画像における前記設定領域の前記輝度変化量の輝度範囲に基づいて選択するパラメータ選択部と、を備える、情報処理装置が提供される。   Alternatively, a change amount detection unit that detects a luminance change amount of a predetermined setting area in the captured image, and a predetermined parameter for detecting a vehicle from the captured image are set as the luminance change amount of the setting area in the captured image. There is provided an information processing apparatus including a parameter selection unit that selects based on a luminance range.

前記パラメータ選択部は、前記撮像画像における前記設定領域の前記輝度変化量が第1の規定範囲を超える場合、かつ、前記撮像画像の前記輝度変化量が第2の規定範囲に収まる場合に、第1のパラメータを選択してよい。   The parameter selection unit is configured such that when the luminance change amount of the setting area in the captured image exceeds a first specified range, and when the luminance change amount of the captured image falls within a second specified range, One parameter may be selected.

前記パラメータ選択部は、前記撮像画像の前記輝度変化量が前記第2の規定範囲を超える場合に、前記第1のパラメータとは異なる第2のパラメータを選択してよい。   The parameter selection unit may select a second parameter different from the first parameter when the luminance change amount of the captured image exceeds the second specified range.

前記撮像画像は、撮像条件が自動的に調整される撮像装置によって撮像され、前記パラメータ選択部は、前記撮像画像における前記設定領域の前記輝度変化量および前記撮像画像の前記輝度変化量に応じた前記撮像条件に対応する前記パラメータを選択してよい。   The captured image is captured by an imaging device whose imaging conditions are automatically adjusted, and the parameter selection unit corresponds to the luminance change amount of the setting region and the luminance change amount of the captured image in the captured image. The parameter corresponding to the imaging condition may be selected.

前記撮像条件は、ISO感度、絞りおよびシャッタスピードのうち少なくとも何れか一つを含んでよい。   The imaging condition may include at least one of ISO sensitivity, aperture, and shutter speed.

前記撮像画像における前記設定領域の前記輝度変化量は、前記基準画像における前記設定領域の平均輝度を基準とした前記撮像画像における前記設定領域の平均輝度の変化量であり、前記撮像画像の前記輝度変化量は、前記基準画像の平均輝度を基準とした前記撮像画像の平均輝度の変化量であってよい。   The luminance change amount of the setting region in the captured image is a change amount of the average luminance of the setting region in the captured image with reference to the average luminance of the setting region in the reference image, and the luminance of the captured image The change amount may be a change amount of the average luminance of the captured image with reference to the average luminance of the reference image.

前記パラメータは、前記撮像画像から前記車両を検出するための輝度範囲を少なくとも含んでよい。   The parameter may include at least a luminance range for detecting the vehicle from the captured image.

前記基準画像から車両を検出するためのパラメータに含まれる前記輝度範囲の閾値を基準として、前記第1のパラメータに含まれる前記輝度範囲の閾値は、前記第2のパラメータに含まれる前記輝度範囲の閾値よりも大きく変化された値であってよい。   With reference to the threshold value of the luminance range included in the parameter for detecting the vehicle from the reference image, the threshold value of the luminance range included in the first parameter is the threshold value of the luminance range included in the second parameter. It may be a value that is changed more than the threshold value.

前記基準画像から車両を検出するためのパラメータに含まれる前記輝度範囲の幅を基準として、前記第1のパラメータに含まれる前記輝度範囲の幅は、前記第2のパラメータに含まれる前記輝度範囲の幅よりも大きく変化された値であってよい。   With reference to the width of the luminance range included in the parameter for detecting the vehicle from the reference image, the width of the luminance range included in the first parameter is the width of the luminance range included in the second parameter. It may be a value changed more than the width.

前記情報処理装置は、車両が走行する領域を含む所定の領域を前記設定領域として設定する領域設定部を備えてよい。   The information processing apparatus may include a region setting unit that sets a predetermined region including a region where the vehicle travels as the setting region.

前記領域設定部は、過去に撮像された撮像画像群から抽出されるオプティカルフローまたは前記撮像画像群に適用される背景差分法に基づいて、前記設定領域を設定してよい。   The area setting unit may set the setting area based on an optical flow extracted from a group of captured images captured in the past or a background difference method applied to the group of captured images.

前記情報処理装置は、前記基準画像の輝度および前記基準画像における前記設定領域の輝度を算出する基準値算出部を備えてよい。   The information processing apparatus may include a reference value calculation unit that calculates the luminance of the reference image and the luminance of the setting area in the reference image.

前記基準値算出部は、過去に撮像された撮像画像群において対応する画素ごとに平均輝度を算出することにより前記基準画像の各画素の輝度を算出してよい。   The reference value calculation unit may calculate the luminance of each pixel of the reference image by calculating an average luminance for each corresponding pixel in the captured image group captured in the past.

また、本発明のある観点によれば、所定の基準画像を基準とした撮像画像の輝度変化量および前記基準画像における所定の設定領域を基準とした前記撮像画像における前記設定領域の輝度変化量を検出するステップと、前記撮像画像から車両を検出するための所定のパラメータを、前記撮像画像の前記輝度変化量および前記撮像画像における前記設定領域の前記輝度変化量に基づいて選択するステップと、を含む、情報処理方法が提供される。   Further, according to an aspect of the present invention, the luminance change amount of the captured image with reference to a predetermined reference image and the luminance change amount of the setting region in the captured image with reference to the predetermined setting region in the reference image are determined. Detecting, and selecting a predetermined parameter for detecting a vehicle from the captured image based on the luminance change amount of the captured image and the luminance change amount of the setting region in the captured image. An information processing method is provided.

また、本発明のある観点によれば、コンピュータを、所定の基準画像を基準とした撮像画像の輝度変化量および前記基準画像における所定の設定領域を基準とした前記撮像画像における前記設定領域の輝度変化量を検出する変化量検出部と、前記撮像画像から車両を検出するための所定のパラメータを、前記撮像画像の前記輝度変化量および前記撮像画像における前記設定領域の前記輝度変化量に基づいて選択するパラメータ選択部と、を備える、情報処理装置として機能させるためのプログラムが提供される。   Further, according to an aspect of the present invention, a computer is used to change the luminance change amount of a captured image with reference to a predetermined reference image and the luminance of the setting region in the captured image with reference to a predetermined setting region in the reference image. A change amount detection unit that detects a change amount, and a predetermined parameter for detecting a vehicle from the captured image, based on the brightness change amount of the captured image and the brightness change amount of the setting area in the captured image. A program for functioning as an information processing apparatus is provided, including a parameter selection unit to select.

以上説明したように本発明によれば、撮像画像から車両を検出するためのパラメータをより高精度に選択することが可能である。   As described above, according to the present invention, it is possible to select a parameter for detecting a vehicle from a captured image with higher accuracy.

本発明の実施形態に係る車両検出システムの構成例を示す図である。It is a figure which shows the structural example of the vehicle detection system which concerns on embodiment of this invention. 同実施形態に係る撮像装置の機能構成例を示す図である。It is a figure showing an example of functional composition of an imaging device concerning the embodiment. 同実施形態に係る情報処理装置の機能構成例を示す図である。It is a figure showing an example of functional composition of an information processor concerning the embodiment. 同実施形態に係る撮像装置によって撮像された撮像画像の例を示す図である。It is a figure which shows the example of the captured image imaged with the imaging device which concerns on the embodiment. 設定領域の設定動作の流れを示すフローチャートである。It is a flowchart which shows the flow of the setting operation | movement of a setting area | region. 撮像条件が変更された場合における画像全体の輝度変化の例を示す図である。It is a figure which shows the example of the luminance change of the whole image when an imaging condition is changed. 撮像条件が変更された場合における設定領域の輝度変化の例を示す図である。It is a figure which shows the example of the brightness | luminance change of the setting area | region when an imaging condition is changed. 環境光が変更された場合における画像全体の輝度変化の例を示す図である。It is a figure which shows the example of the luminance change of the whole image when environmental light is changed. 環境光が変更された場合における設定領域の輝度変化の例を示す図である。It is a figure which shows the example of the luminance change of a setting area | region when environmental light is changed. 撮像条件の変更時において選択される輝度範囲の例を示す図である。It is a figure which shows the example of the luminance range selected when an imaging condition is changed. 環境光の変更時において選択される輝度範囲の例を示す図である。It is a figure which shows the example of the luminance range selected at the time of change of ambient light. 車両検出動作の流れを示すフローチャートである。It is a flowchart which shows the flow of vehicle detection operation | movement.

以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。   Exemplary embodiments of the present invention will be described below in detail with reference to the accompanying drawings. In the present specification and drawings, components having substantially the same functional configuration are denoted by the same reference numerals, and redundant description is omitted.

また、本明細書および図面において、実質的に同一の機能構成を有する複数の構成要素を、同一の符号の後に異なるアルファベットまたは数字を付して区別する場合もある。ただし、実質的に同一の機能構成を有する複数の構成要素の各々を特に区別する必要がない場合、同一符号のみを付する。   In the present specification and drawings, a plurality of constituent elements having substantially the same functional configuration may be distinguished by attaching different alphabets or numbers after the same reference numeral. However, when it is not necessary to particularly distinguish each of a plurality of constituent elements having substantially the same functional configuration, only the same reference numerals are given.

[構成の説明]
まず、本発明の実施形態の構成を説明する。図1は、本発明の実施形態に係る車両検出システム1の構成例を示す図である。図1に示すように、本発明の実施形態に係る車両検出システム1は、撮像装置10および情報処理装置20を備える。撮像装置10と情報処理装置20との間は、有線または無線によって接続されている。
[Description of configuration]
First, the configuration of the embodiment of the present invention will be described. FIG. 1 is a diagram illustrating a configuration example of a vehicle detection system 1 according to an embodiment of the present invention. As shown in FIG. 1, a vehicle detection system 1 according to an embodiment of the present invention includes an imaging device 10 and an information processing device 20. The imaging device 10 and the information processing device 20 are connected by wire or wireless.

図1に示すように、撮像装置10は、道路平面を撮像可能に設置されており、撮像した画像を情報処理装置20に提供することが可能である。図1に示した例では、道路平面上を車両Mが走行している。情報処理装置20は、撮像装置10から提供された撮像画像から車両Mを検出する。   As illustrated in FIG. 1, the imaging device 10 is installed so as to be able to capture a road plane, and can provide the captured image to the information processing device 20. In the example shown in FIG. 1, the vehicle M is traveling on a road plane. The information processing apparatus 20 detects the vehicle M from the captured image provided from the imaging apparatus 10.

ここで、撮像画像への車両の映り具合は一定であるとは限らず、例えば、環境の変化に応じて変化され得る。そこで、撮像画像から車両Mを検出するためのパラメータを、環境の変化に応じて変化させる技術が知られている。例えば、ネットワークを介して環境の変化に関する情報を取得し、環境の変化に関する情報に応じて動物体を検出するための領域を変化させる技術が開示されている。   Here, the degree of reflection of the vehicle on the captured image is not necessarily constant, and can be changed according to a change in the environment, for example. Therefore, a technique is known in which a parameter for detecting the vehicle M from the captured image is changed according to a change in the environment. For example, a technique is disclosed in which information related to environmental changes is acquired via a network, and an area for detecting a moving object is changed according to the information related to environmental changes.

しかしながら、撮像画像への車両Mの映り具合の変化の要因は、環境の変化以外にも存在し得る。一例として、撮像条件の変化によっても撮像画像への車両Mの映り具合が変化され得る。したがって、環境の変化を考慮するだけでは、車両Mを検出するためのパラメータを高精度に選択することが困難である。   However, the cause of the change in the appearance of the vehicle M in the captured image may exist in addition to the change in the environment. As an example, the appearance of the vehicle M in the captured image can be changed by changing the imaging condition. Therefore, it is difficult to select a parameter for detecting the vehicle M with high accuracy only by considering changes in the environment.

そこで、本明細書においては、撮像画像から車両Mを検出するためのパラメータをより高精度に選択する技術を主に提案する。なお、本明細書においては、環境の例として撮像装置10によって検知される環境光を用い、撮像条件として撮像素子の露出を決定するための条件を用いて説明する。具体的に、撮像条件は、ISO(International Organization for Standardization)感度、絞りおよびシャッタスピードのうち少なくとも何れか一つを含んでよい。以上、車両検出システム1の構成例について説明した。   Therefore, in the present specification, a technique for selecting a parameter for detecting the vehicle M from the captured image with higher accuracy is mainly proposed. In the present specification, description will be made using environmental light detected by the imaging device 10 as an example of the environment, and conditions for determining the exposure of the imaging element as imaging conditions. Specifically, the imaging conditions may include at least one of ISO (International Organization for Standardization) sensitivity, aperture, and shutter speed. The configuration example of the vehicle detection system 1 has been described above.

続いて、撮像装置10の機能構成例を説明する。図2は、本発明の実施形態に係る撮像装置10の機能構成例を示す図である。図2に示すように、本発明の実施形態に係る撮像装置10は、制御部110、撮像部120、操作部130、記憶部140および出力部150を備える。   Subsequently, a functional configuration example of the imaging apparatus 10 will be described. FIG. 2 is a diagram illustrating a functional configuration example of the imaging device 10 according to the embodiment of the present invention. As illustrated in FIG. 2, the imaging apparatus 10 according to the embodiment of the present invention includes a control unit 110, an imaging unit 120, an operation unit 130, a storage unit 140, and an output unit 150.

制御部110は、撮像装置10の動作全体を制御する機能を有する。また、撮像部120は、実空間を撮像することにより撮像画像を取得する機能を有し、例えば、単眼カメラにより構成される。操作部130は、ユーザからの各種操作の入力を受け付ける機能を有する。   The control unit 110 has a function of controlling the entire operation of the imaging device 10. The imaging unit 120 has a function of acquiring a captured image by imaging a real space, and is configured by, for example, a monocular camera. The operation unit 130 has a function of receiving input of various operations from the user.

記憶部140は、制御部110を動作させるためのプログラムやデータを記憶することができる。また、記憶部140は、制御部110の動作の過程で必要となる各種データを一時的に記憶することもできる。出力部150は、制御部110による制御に従って出力を行う機能を有する。出力部150の種類は特に限定されず、表示装置であってもよいし、音声出力装置であってもよいし、情報処理装置20への情報送信を行う通信装置であってもよい。   The storage unit 140 can store a program and data for operating the control unit 110. In addition, the storage unit 140 can temporarily store various data necessary for the operation of the control unit 110. The output unit 150 has a function of performing output according to control by the control unit 110. The type of the output unit 150 is not particularly limited, and may be a display device, an audio output device, or a communication device that transmits information to the information processing device 20.

なお、図2に示した例では、撮像部120、操作部130、記憶部140および出力部150は、撮像装置10の内部に存在するが、撮像部120、操作部130、記憶部140および出力部150の全部または一部は、撮像装置10の外部に備えられていてもよい。以上、本発明の実施形態に係る撮像装置10の機能構成例について説明した。   In the example illustrated in FIG. 2, the imaging unit 120, the operation unit 130, the storage unit 140, and the output unit 150 exist inside the imaging apparatus 10, but the imaging unit 120, the operation unit 130, the storage unit 140, and the output All or part of the unit 150 may be provided outside the imaging apparatus 10. The function configuration example of the imaging device 10 according to the embodiment of the present invention has been described above.

続いて、本発明の実施形態に係る情報処理装置20の機能構成について説明する。図3は、本発明の実施形態に係る情報処理装置20の機能構成例を示す図である。図3に示すように、本発明の実施形態に係る情報処理装置20は、制御部210、記憶部280および出力部290を備える。   Subsequently, a functional configuration of the information processing apparatus 20 according to the embodiment of the present invention will be described. FIG. 3 is a diagram illustrating a functional configuration example of the information processing apparatus 20 according to the embodiment of the present invention. As illustrated in FIG. 3, the information processing apparatus 20 according to the embodiment of the present invention includes a control unit 210, a storage unit 280, and an output unit 290.

制御部210は、情報処理装置20の動作全体を制御する機能を有する。記憶部280は、制御部210を動作させるためのプログラムやデータを記憶することができる。また、記憶部280は、制御部210の動作の過程で必要となる各種データを一時的に記憶することもできる。出力部290は、制御部210による制御に従って情報(車両の検出結果など)の出力を行う機能を有する。出力部290の種類は特に限定されず、表示装置であってもよいし、音声出力装置であってもよいし、撮像装置10への情報送信を行う通信装置であってもよい。   The control unit 210 has a function of controlling the entire operation of the information processing apparatus 20. The storage unit 280 can store a program and data for operating the control unit 210. In addition, the storage unit 280 can temporarily store various data necessary in the course of the operation of the control unit 210. The output unit 290 has a function of outputting information (such as vehicle detection results) according to control by the control unit 210. The type of the output unit 290 is not particularly limited, and may be a display device, an audio output device, or a communication device that transmits information to the imaging device 10.

なお、図3に示した例では、記憶部280および出力部290は、情報処理装置20の内部に存在するが、記憶部280および出力部290の全部または一部は、情報処理装置20の外部に備えられていてもよい。また、制御部210は、画像取得部211と、領域設定部212と、基準値算出部213と、出力制御部214と、変化量検出部215と、パラメータ選択部216と、車両検出部217とを備える。制御部210が備えるこれらの各機能部の詳細については、後に説明する。以上、本発明の実施形態に係る情報処理装置20の機能構成例について説明した。   In the example illustrated in FIG. 3, the storage unit 280 and the output unit 290 exist inside the information processing device 20, but all or part of the storage unit 280 and the output unit 290 are external to the information processing device 20. May be provided. In addition, the control unit 210 includes an image acquisition unit 211, a region setting unit 212, a reference value calculation unit 213, an output control unit 214, a change amount detection unit 215, a parameter selection unit 216, and a vehicle detection unit 217. Is provided. Details of these functional units included in the control unit 210 will be described later. The functional configuration example of the information processing apparatus 20 according to the embodiment of the present invention has been described above.

[設定領域の設定]
続いて、本発明の実施形態の詳細を説明する。図4は、本発明の実施形態に係る撮像装置10によって撮像された撮像画像Img−pの例を示す図である。図4に示すように、撮像装置10によって撮像された撮像画像Img−pには、道路平面を走行している車両Mが映っている。撮像装置10によって撮像された撮像画像Img−pは、撮像装置10から情報処理装置20に提供される。
[Setting area settings]
Next, details of the embodiment of the present invention will be described. FIG. 4 is a diagram illustrating an example of a captured image Img-p captured by the imaging device 10 according to the embodiment of the present invention. As shown in FIG. 4, the captured image Img-p captured by the imaging device 10 shows the vehicle M traveling on the road plane. The captured image Img-p captured by the imaging device 10 is provided from the imaging device 10 to the information processing device 20.

続いて、情報処理装置20の機能詳細について説明する。まず、撮像装置10によって撮像された撮像画像Img−pが画像取得部211によって取得される。そして、領域設定部212によって撮像画像Img−pのうち車両Mが走行する領域を設定領域Rとして設定する処理が行われる。ここで、領域設定部212による設定領域Rの設定手法は特に限定されない。例えば、領域設定部212は、過去に撮像された撮像画像群から抽出されるオプティカルフローまたは撮像画像群に適用される背景差分法に基づいて、設定領域Rを設定してよい。   Next, details of functions of the information processing apparatus 20 will be described. First, the captured image Img-p captured by the imaging device 10 is acquired by the image acquisition unit 211. Then, the region setting unit 212 performs processing for setting the region in which the vehicle M travels in the captured image Img-p as the setting region R. Here, the setting method of the setting region R by the region setting unit 212 is not particularly limited. For example, the region setting unit 212 may set the setting region R based on an optical flow extracted from a captured image group captured in the past or a background difference method applied to the captured image group.

例えば、領域設定部212は、オプティカルフローまたは背景差分法に基づいて検出した移動領域を設定領域Rとすればよい。なお、本明細書においては、領域設定部212が車両Mの走行領域自体を設定領域Rとして設定する例を説明するが、設定領域Rは、車両Mが走行する領域を含む所定の領域であればよい。具体的には、オプティカルフローまたは背景差分法に基づいて検出される移動領域は、車両Mの走行領域より大きくてもよい。   For example, the region setting unit 212 may set the moving region detected based on the optical flow or the background difference method as the setting region R. In the present specification, an example in which the region setting unit 212 sets the traveling region of the vehicle M as the setting region R will be described. The setting region R may be a predetermined region including a region where the vehicle M travels. That's fine. Specifically, the moving area detected based on the optical flow or the background difference method may be larger than the traveling area of the vehicle M.

領域設定部212によって設定領域Rが設定されると、基準値算出部213は、撮像装置10によって撮像された所定の基準画像における設定領域Rの輝度を算出するとともに、基準画像における全体の輝度を算出する。   When the setting region R is set by the region setting unit 212, the reference value calculation unit 213 calculates the luminance of the setting region R in a predetermined reference image captured by the imaging device 10, and calculates the overall luminance in the reference image. calculate.

なお、本明細書においては、基準画像における設定領域Rの輝度として、基準画像における設定領域Rの平均輝度を用い、基準画像における全体の輝度として、基準画像における全体の平均輝度を用いることにする。また、基準値算出部213は、撮像装置10によって過去に撮像された1枚の撮像画像を基準画像としてもよいし、撮像装置10によって過去に撮像された撮像画像群において対応する画素ごとに平均輝度を算出することにより基準画像の各画素の輝度を算出してもよい。   In this specification, the average luminance of the setting region R in the reference image is used as the luminance of the setting region R in the reference image, and the entire average luminance in the reference image is used as the total luminance of the reference image. . In addition, the reference value calculation unit 213 may use a single captured image captured in the past by the imaging device 10 as a reference image, or average for each corresponding pixel in the captured image group captured in the past by the imaging device 10. The luminance of each pixel of the reference image may be calculated by calculating the luminance.

続いて、設定領域Rの設定動作の流れについて説明する。図5は、設定領域Rの設定動作の流れを示すフローチャートである。なお、図5に示したフローチャートは、設定領域Rの設定動作の一例を示したに過ぎない。したがって、設定領域Rの設定動作は、図5のフローチャートによって示される動作例に限定されない。   Next, the flow of setting operation for the setting region R will be described. FIG. 5 is a flowchart showing the flow of the setting operation for the setting region R. The flowchart shown in FIG. 5 only shows an example of the setting region R setting operation. Therefore, the setting operation of the setting region R is not limited to the operation example shown by the flowchart of FIG.

まず、画像取得部211は、撮像装置10によって撮像された過去の撮像画像群を取得し、領域設定部212は、取得された過去の撮像画像群に基づいて設定領域Rを設定する(ステップS11)。続いて、基準値算出部213は、基準画像における設定領域Rの平均輝度を算出する(ステップS12)。また、基準値算出部213は、基準画像における全体の平均輝度を算出する(ステップS13)。   First, the image acquisition unit 211 acquires a past captured image group captured by the imaging device 10, and the region setting unit 212 sets a setting region R based on the acquired past captured image group (step S11). ). Subsequently, the reference value calculation unit 213 calculates the average luminance of the setting region R in the reference image (Step S12). Further, the reference value calculation unit 213 calculates the overall average luminance in the reference image (step S13).

出力制御部214は、領域設定部212および基準値算出部213によって算出された各種情報を出力部290に出力させてもよい。続いて、制御部210は、設定領域Rの設定動作を継続する場合には(ステップS14において「Yes」)、ステップS11に動作を移行させるが、設定領域Rの設定動作を継続しない場合には(ステップS14において「No」)、動作を終了させる。以上、設定領域Rの設定動作の流れについて説明した。   The output control unit 214 may cause the output unit 290 to output various information calculated by the region setting unit 212 and the reference value calculation unit 213. Subsequently, when the setting operation of the setting region R is continued (“Yes” in step S14), the control unit 210 shifts the operation to step S11, but when the setting operation of the setting region R is not continued. (“No” in step S14), the operation is terminated. The flow of the setting region R setting operation has been described above.

[車両の検出]
以上に説明したようにして、あらかじめ設定領域Rが設定され得る。その後は、撮像装置10によって撮像された撮像画像から車両検出が行われるが、基準画像が撮像されてからは、撮像条件が自動的に(あるいは手動により)変更される場合もあれば、環境光が変更される場合もある。ここで、撮像条件の変更と環境光の変更とは、基準画像の輝度を基準として撮像画像の輝度を変化させる要因となり得る。
[Vehicle detection]
As described above, the setting region R can be set in advance. After that, vehicle detection is performed from the captured image captured by the imaging device 10, but after the reference image is captured, the imaging condition may be changed automatically (or manually), or the ambient light May be changed. Here, the change of the imaging condition and the change of the ambient light can be a factor for changing the luminance of the captured image on the basis of the luminance of the reference image.

ここで、撮像条件の変更による輝度変化と環境光の変更による輝度変化とは相違する。以下では、まず、撮像条件の変更による輝度変化と環境光の変更による輝度変化との相違について説明する。   Here, the luminance change due to the change of the imaging condition is different from the luminance change due to the change of the ambient light. In the following, first, a difference between a luminance change due to a change in imaging conditions and a luminance change due to a change in ambient light will be described.

図6は、撮像条件が変更された場合における画像全体の輝度変化の例を示す図である。図6を参照すると、撮像条件が変更された場合において、基準画像および撮像画像それぞれにおける全体の輝度分布の例が示されており、基準画像における全体の平均輝度を基準とした撮像画像における全体の平均輝度の変化量が輝度変化量Vtとして示されている。   FIG. 6 is a diagram illustrating an example of a change in luminance of the entire image when the imaging condition is changed. Referring to FIG. 6, when the imaging condition is changed, an example of the overall luminance distribution in each of the reference image and the captured image is shown. The entire captured image in the captured image based on the average average luminance in the reference image is shown. The change amount of the average luminance is shown as the luminance change amount Vt.

ここで、変化量検出部215は、基準画像における全体の平均輝度を基準とした撮像画像における全体の平均輝度の輝度変化量Vtを検出し、基準画像における設定領域Rの平均輝度を基準とした撮像画像における設定領域Rの平均輝度の輝度変化量Vrを検出する。   Here, the change amount detection unit 215 detects the luminance change amount Vt of the overall average brightness in the captured image with the overall average brightness in the reference image as a reference, and uses the average brightness of the setting region R in the reference image as a reference. A luminance change amount Vr of the average luminance of the setting region R in the captured image is detected.

また、図7は、撮像条件が変更された場合における設定領域Rの輝度変化の例を示す図である。図7を参照すると、撮像条件が変更された場合において、基準画像および撮像画像それぞれにおける設定領域Rの輝度分布の例が示されており、基準画像における設定領域Rの平均輝度を基準とした撮像画像における設定領域Rの平均輝度が輝度変化量Vrとして示されている。   FIG. 7 is a diagram illustrating an example of a change in luminance of the setting region R when the imaging condition is changed. Referring to FIG. 7, when the imaging condition is changed, an example of the luminance distribution of the setting region R in each of the reference image and the captured image is shown, and imaging based on the average luminance of the setting region R in the reference image is shown. The average luminance of the setting region R in the image is shown as the luminance change amount Vr.

図6を参照すると、撮像条件が変更された場合においては、基準画像における全体の平均輝度を基準とした撮像画像における全体の平均輝度の輝度変化量Vtが規定範囲A2を超えていない。一方、図7を参照すると、撮像条件が変更された場合においては、基準画像における設定領域Rの平均輝度を基準とした撮像画像における設定領域Rの平均輝度の輝度変化量Vrが規定範囲A1を超えている。   Referring to FIG. 6, when the imaging condition is changed, the luminance change amount Vt of the overall average brightness in the captured image based on the overall average brightness in the reference image does not exceed the specified range A2. On the other hand, referring to FIG. 7, when the imaging condition is changed, the luminance change amount Vr of the average luminance of the setting region R in the captured image with the average luminance of the setting region R in the reference image as a reference is within the specified range A1. Over.

撮像条件が変更された場合に、設定領域である道路部分の輝度の分布の形状が、全体の輝度の分布に比べて急峻になるのは、以下の理由である。即ち、露光時間が長くする等の撮影条件の変更が発生するのは、日没等により撮影環境全体が暗くなった場合である。撮影環境全体が暗くなると、道路を走行している車両のライトや街路灯の点灯によりハレーションが発生するため、道路部分は白くなり、輝度の分布は値の大きいところで急峻になる。一方、道路以外の部分は、上記のハレーションは発生しないため、露光時間が長くなっても依然として暗く映り、輝度の分布は値の大きいいところで急峻になることはない。   When the imaging conditions are changed, the shape of the luminance distribution of the road portion that is the setting area is steeper than the entire luminance distribution for the following reason. That is, the change of the shooting condition such as the longer exposure time occurs when the entire shooting environment becomes dark due to sunset or the like. When the entire photographing environment becomes dark, halation occurs due to lighting of a vehicle traveling on the road or lighting of a street lamp, so that the road portion becomes white and the luminance distribution becomes steep at a large value. On the other hand, since the above-mentioned halation does not occur in portions other than the road, the image remains dark even if the exposure time is long, and the luminance distribution does not become steep where the value is large.

また、図8は、環境光が変更された場合における画像全体の輝度変化の例を示す図である。図8を参照すると、環境光が変更された場合において、基準画像および撮像画像それぞれにおける全体の輝度分布の例が示されており、基準画像における全体の平均輝度を基準とした撮像画像における全体の平均輝度の変化量が輝度変化量Vtとして示されている。   FIG. 8 is a diagram illustrating an example of a change in luminance of the entire image when the ambient light is changed. Referring to FIG. 8, when the ambient light is changed, an example of the overall luminance distribution in each of the reference image and the captured image is shown. The entire captured image in the captured image based on the average average brightness in the reference image is shown. The change amount of the average luminance is shown as the luminance change amount Vt.

また、図9は、環境光が変更された場合における設定領域Rの輝度変化の例を示す図である。図9を参照すると、環境光が変更された場合において、基準画像および撮像画像それぞれにおける設定領域Rの輝度分布の例が示されており、基準画像における設定領域Rの平均輝度を基準とした撮像画像における設定領域Rの平均輝度が輝度変化量Vrとして示されている。   FIG. 9 is a diagram illustrating an example of a change in luminance of the setting region R when the ambient light is changed. Referring to FIG. 9, an example of the luminance distribution of the setting region R in each of the reference image and the picked-up image when the ambient light is changed is shown. The image pickup is based on the average luminance of the setting region R in the reference image. The average luminance of the setting region R in the image is shown as the luminance change amount Vr.

図8を参照すると、環境光が変更された場合において、基準画像における全体の平均輝度を基準とした撮像画像における全体の平均輝度の輝度変化量Vtが規定範囲A2を超えている。一方、図9を参照すると、環境光が変更された場合において、基準画像における設定領域Rの平均輝度を基準とした撮像画像における設定領域Rの平均輝度の輝度変化量Vrが規定範囲A1を超えていない。   Referring to FIG. 8, when the ambient light is changed, the luminance change amount Vt of the overall average brightness in the captured image with the overall average brightness in the reference image as a reference exceeds the specified range A2. On the other hand, referring to FIG. 9, when the ambient light is changed, the luminance change amount Vr of the average luminance of the setting region R in the captured image based on the average luminance of the setting region R in the reference image exceeds the specified range A1. Not.

したがって、パラメータ選択部216は、車両検出部217が撮像画像から車両を検出するための輝度範囲を、撮像画像における全体の輝度変化量Vtおよび撮像画像における設定領域Rの輝度変化量Vrに基づいて選択するのがよい。   Therefore, the parameter selection unit 216 sets the luminance range for the vehicle detection unit 217 to detect the vehicle from the captured image based on the overall luminance change amount Vt in the captured image and the luminance change amount Vr of the setting region R in the captured image. It is good to choose.

これにより、パラメータ選択部216は、撮像条件が自動的に(または手動により)変更される場合に、撮像画像における設定領域Rの輝度変化量Vrおよび撮像画像における全体の輝度変化量Vtに応じた撮像条件に対応する輝度範囲を選択することができる。そのため、車両検出のための輝度範囲がより高精度に選択され得る。   Thereby, the parameter selection unit 216 responds to the luminance change amount Vr of the setting region R in the captured image and the overall luminance change amount Vt in the captured image when the imaging condition is automatically (or manually) changed. A luminance range corresponding to the imaging condition can be selected. Therefore, the luminance range for vehicle detection can be selected with higher accuracy.

図10は、撮像条件の変更時において選択される輝度範囲D1の例を示す図である。図10に示すように、パラメータ選択部216は、撮像画像における設定領域Rの輝度変化量Vrが規定範囲A1を超える場合、かつ、撮像画像における全体の輝度変化量Vtが規定範囲A2に収まる場合に、輝度範囲D1を選択するとよい。   FIG. 10 is a diagram illustrating an example of the luminance range D1 selected when the imaging condition is changed. As shown in FIG. 10, the parameter selection unit 216, when the luminance change amount Vr of the setting region R in the captured image exceeds the specified range A1, and when the entire luminance change amount Vt in the captured image falls within the specified range A2. In addition, the luminance range D1 may be selected.

また、図11は、環境光の変更時において選択される輝度範囲D2の例を示す図である。図11に示すように、パラメータ選択部216は、撮像画像における全体の輝度変化量Vtが規定範囲A2を超える場合に、輝度範囲D1とは異なる輝度範囲D2を選択するとよい。   FIG. 11 is a diagram illustrating an example of the luminance range D2 selected when the ambient light is changed. As illustrated in FIG. 11, the parameter selection unit 216 may select a luminance range D2 different from the luminance range D1 when the entire luminance change amount Vt in the captured image exceeds the specified range A2.

なお、図10および図11を参照すると、基準画像から車両を検出するための輝度範囲D0が示されており、撮像条件の変更時における輝度変化は、環境光の変更時における輝度変化よりも大きくなっている。したがって、図10および図11に示したように、撮像画像の平均輝度が基準画像の平均輝度を基準として上がった場合には、輝度範囲D0の下限値を基準として、輝度範囲D1の下限値は、輝度範囲D2の下限値よりも大きく変化された値であるとよい。   10 and 11, a luminance range D0 for detecting the vehicle from the reference image is shown, and the luminance change when the imaging condition is changed is larger than the luminance change when the environmental light is changed. It has become. Therefore, as shown in FIGS. 10 and 11, when the average luminance of the captured image rises with reference to the average luminance of the reference image, the lower limit value of the luminance range D1 is based on the lower limit value of the luminance range D0. It is preferable that the value be changed to be larger than the lower limit value of the luminance range D2.

また、図10および図11を参照すると、撮像条件の変更時における輝度分布は、環境光の変更時における輝度分布よりも狭い範囲に偏っている。したがって、輝度範囲D0の幅を基準として、輝度範囲D1の幅は、輝度範囲D2の幅よりも大きく変化された値であるとよい。より具体的には、図10および図11に示したように、撮像画像の平均輝度が基準画像の平均輝度を基準として上がった場合には、輝度範囲D0の幅を基準として、輝度範囲D1の幅は、輝度範囲D2の幅よりも広いとよい。   10 and 11, the luminance distribution when the imaging condition is changed is biased to a narrower range than the luminance distribution when the ambient light is changed. Therefore, the width of the luminance range D1 may be a value that is changed to be larger than the width of the luminance range D2, with reference to the width of the luminance range D0. More specifically, as shown in FIGS. 10 and 11, when the average luminance of the captured image increases with the average luminance of the reference image as a reference, the width of the luminance range D <b> 1 is used as a reference. The width is preferably wider than the width of the luminance range D2.

車両検出部217は、パラメータ選択部216によって設定された輝度範囲に基づいて撮像画像から車両を検出する。より具体的には、車両検出部217は、撮像画像のうち、パラメータ選択部216によって設定された輝度範囲に輝度が収まる領域から車両を検出する。車両検出の手法も特に限定されない。例えば、車両検出部217は、撮像画像から背景差分法に基づいて車両シルエット領域を抽出することによって車両を検出してもよいし、他の手法によって車両を検出してもよい。   The vehicle detection unit 217 detects the vehicle from the captured image based on the luminance range set by the parameter selection unit 216. More specifically, the vehicle detection unit 217 detects a vehicle from an area where the luminance falls within the luminance range set by the parameter selection unit 216 in the captured image. The vehicle detection method is not particularly limited. For example, the vehicle detection unit 217 may detect the vehicle by extracting the vehicle silhouette region from the captured image based on the background difference method, or may detect the vehicle by another method.

続いて、車両検出動作の流れについて説明する。図12は、車両検出動作の流れを示すフローチャートである。なお、図12に示したフローチャートは、車両検出動作の一例を示したに過ぎない。したがって、車両検出動作は、図12のフローチャートによって示される動作例に限定されない。   Subsequently, the flow of the vehicle detection operation will be described. FIG. 12 is a flowchart showing the flow of the vehicle detection operation. Note that the flowchart shown in FIG. 12 merely shows an example of the vehicle detection operation. Therefore, the vehicle detection operation is not limited to the operation example shown by the flowchart of FIG.

まず、変化量検出部215は、基準画像における全体の平均輝度を基準とした撮像画像における全体の平均輝度の変化量Vtを検出する(ステップS21)。続いて、パラメータ選択部216は、変化量Vtが規定範囲A2を超える場合には(ステップS22において「Yes」)、車両検出のための輝度範囲D2を選択して(ステップS23)、ステップS27に動作を移行させる。一方、パラメータ選択部216は、変化量Vtが規定範囲A2を超えない場合には(ステップS22において「No」)、ステップS24に動作を移行させる。   First, the change amount detection unit 215 detects the change amount Vt of the overall average brightness in the captured image with the overall average brightness in the reference image as a reference (step S21). Subsequently, when the change amount Vt exceeds the specified range A2 (“Yes” in step S22), the parameter selection unit 216 selects the luminance range D2 for vehicle detection (step S23), and the process proceeds to step S27. Transition operation. On the other hand, when the change amount Vt does not exceed the specified range A2 (“No” in step S22), the parameter selection unit 216 shifts the operation to step S24.

続いて、変化量検出部215は、基準画像における設定領域Rの平均輝度を基準とした撮像画像における設定領域Rの平均輝度の変化量Vrを検出する(ステップS24)。パラメータ選択部216は、変化量Vtが規定範囲A1を超える場合には(ステップS25において「Yes」)、車両検出のための輝度範囲D1を選択して(ステップS26)、ステップS27に動作を移行させる。一方、パラメータ選択部216は、変化量Vtが規定範囲A1を超えない場合には(ステップS25において「No」)、ステップS27に動作を移行させる。   Subsequently, the change amount detection unit 215 detects the change amount Vr of the average luminance of the setting region R in the captured image with reference to the average luminance of the setting region R in the reference image (step S24). When the change amount Vt exceeds the specified range A1 (“Yes” in step S25), the parameter selection unit 216 selects the luminance range D1 for vehicle detection (step S26), and proceeds to step S27. Let On the other hand, when the change amount Vt does not exceed the specified range A1 (“No” in step S25), the parameter selection unit 216 shifts the operation to step S27.

続いて、車両検出部217は、パラメータ選択部216によって設定された輝度範囲に基づいて撮像画像から車両を検出する。出力制御部214は、車両検出部217によって検出された車両検出の結果を出力部290に出力させてもよい。続いて、制御部210は、車両検出動作を継続する場合には(ステップS28において「Yes」)、ステップS21に動作を移行させるが、車両検出動作を継続しない場合には(ステップS28において「No」)、動作を終了させる。以上、車両検出動作について説明した。   Subsequently, the vehicle detection unit 217 detects the vehicle from the captured image based on the luminance range set by the parameter selection unit 216. The output control unit 214 may cause the output unit 290 to output the vehicle detection result detected by the vehicle detection unit 217. Subsequently, when the vehicle detection operation is continued (“Yes” in step S28), the control unit 210 shifts the operation to step S21, but when the vehicle detection operation is not continued (“No” in step S28). )), The operation is terminated. The vehicle detection operation has been described above.

[効果の説明]
以上に説明したように、本発明の実施形態によれば、所定の基準画像における全体を基準とした撮像画像における全体の輝度変化量Vtおよび基準画像における所定の設定領域Rを基準とした撮像画像における設定領域Rの輝度変化量Vrを検出する変化量検出部215と、撮像画像から車両を検出するための輝度範囲を、輝度変化量Vtおよび輝度変化量Vrに基づいて選択するパラメータ選択部216と、を備える、情報処理装置20が提供される。かかる構成によれば、車両検出のための輝度範囲がより高精度に選択され得る。
[Description of effects]
As described above, according to the embodiment of the present invention, the captured image based on the entire luminance change amount Vt in the captured image based on the entire predetermined reference image and the predetermined setting region R in the reference image. A change amount detection unit 215 that detects the luminance change amount Vr of the setting region R in the image area, and a parameter selection unit 216 that selects a luminance range for detecting the vehicle from the captured image based on the luminance change amount Vt and the luminance change amount Vr. An information processing apparatus 20 is provided. According to such a configuration, the luminance range for vehicle detection can be selected with higher accuracy.

[変形例の説明]
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
[Description of modification]
The preferred embodiments of the present invention have been described in detail above with reference to the accompanying drawings, but the present invention is not limited to such examples. It is obvious that a person having ordinary knowledge in the technical field to which the present invention pertains can come up with various changes or modifications within the scope of the technical idea described in the claims. Of course, it is understood that these also belong to the technical scope of the present invention.

例えば、上記では、パラメータ選択部216が、撮像画像から車両を検出するための輝度範囲を、撮像画像における全体の輝度変化量Vtおよび撮像画像における設定領域Rの輝度変化量Vrに基づいて選択する例を示した。しかし、パラメータ選択部216によって選択されるパラメータは、車両を検出するための輝度範囲に限定されない。したがって、パラメータ選択部216によって選択されるパラメータは、車両を検出するための輝度範囲を含んでもよいし、車両を検出するための輝度範囲を含まなくてもよい。   For example, in the above, the parameter selection unit 216 selects the luminance range for detecting the vehicle from the captured image based on the entire luminance change amount Vt in the captured image and the luminance change amount Vr of the setting region R in the captured image. An example is shown. However, the parameter selected by the parameter selection unit 216 is not limited to the luminance range for detecting the vehicle. Therefore, the parameter selected by the parameter selection unit 216 may include a luminance range for detecting the vehicle or may not include a luminance range for detecting the vehicle.

また、上記では、基準画像における全体の平均輝度および撮像画像における全体の平均輝度を用いる例を説明したが、基準画像における全体の平均輝度の代わりに、基準画像における所定領域の平均輝度が用いられ、撮像画像における全体の平均輝度の代わりに、撮像画像における所定領域の平均輝度が用いられてもよい。かかる場合、所定領域は設定領域R以外の領域を含む領域であればよい。   In the above description, the overall average brightness in the reference image and the overall average brightness in the captured image have been described. However, instead of the overall average brightness in the reference image, the average brightness of a predetermined area in the reference image is used. Instead of the overall average brightness in the captured image, the average brightness of a predetermined area in the captured image may be used. In such a case, the predetermined area may be an area including an area other than the setting area R.

また、上記実施の形態では、所定の基準画像を基準とした撮像画像の輝度変化量および、基準画像における所定の設定領域を基準とした撮像画像における設定領域の輝度変化量を、パラメータの選択に利用しているが、所定の設定領域の輝度変化量のみを用いて、パラメータを選択する構成も、実現できる。即ち、上述したように、撮像条件が変更された場合、設定領域である道路部分の輝度変化量の輝度範囲が変化する。よって、撮影条件が変更された場合の輝度範囲の変化傾向を予め測定しておく等の処理を行ない、パラメータ選択部216に登録しておくことで、撮影条件の変更と環境光の変更を判別し、最適なパラメータの選択を行うことが可能になる。   In the above embodiment, the luminance change amount of the captured image based on the predetermined reference image and the luminance change amount of the setting area in the captured image based on the predetermined setting area in the reference image are selected as parameters. Although used, it is possible to realize a configuration in which the parameter is selected using only the luminance change amount of the predetermined setting area. That is, as described above, when the imaging condition is changed, the luminance range of the luminance change amount of the road portion that is the setting area changes. Therefore, processing such as measuring the change tendency of the luminance range when the shooting condition is changed is performed in advance and registered in the parameter selection unit 216, so that the change of the shooting condition and the change of the ambient light are discriminated. Thus, it is possible to select an optimum parameter.

制御部110を構成する各ブロックは、例えば、CPU(Central Processing Unit)、RAM(Random Access Memory)などから構成され、記憶部180により記憶されているプログラムがCPUによりRAMに展開されて実行されることにより、その機能が実現され得る。あるいは、制御部110を構成する各ブロックは、専用のハードウェアにより構成されていてもよいし、複数のハードウェアの組み合わせにより構成されてもよい。   Each block configuring the control unit 110 includes, for example, a CPU (Central Processing Unit), a RAM (Random Access Memory), and the like, and a program stored in the storage unit 180 is expanded on the RAM and executed by the CPU. Thus, the function can be realized. Or each block which comprises the control part 110 may be comprised by the hardware for exclusive use, and may be comprised by the combination of several hardware.

制御部210を構成する各ブロックは、例えば、CPU(Central Processing Unit)、RAM(Random Access Memory)などから構成され、記憶部280により記憶されているプログラムがCPUによりRAMに展開されて実行されることにより、その機能が実現され得る。あるいは、制御部210を構成する各ブロックは、専用のハードウェアにより構成されていてもよいし、複数のハードウェアの組み合わせにより構成されてもよい。   Each block constituting the control unit 210 includes, for example, a CPU (Central Processing Unit), a RAM (Random Access Memory), and the like, and a program stored in the storage unit 280 is expanded into the RAM and executed by the CPU. Thus, the function can be realized. Or each block which comprises the control part 210 may be comprised by the hardware for exclusive use, and may be comprised by the combination of several hardware.

尚、本明細書において、フローチャートに記述されたステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的に又は個別的に実行される処理をも含む。また時系列的に処理されるステップでも、場合によっては適宜順序を変更することが可能であることは言うまでもない。   In this specification, the steps described in the flowcharts are executed in parallel or individually even if they are not necessarily processed in time series, as well as processes performed in time series in the described order. Including processing to be performed. Further, it goes without saying that the order can be appropriately changed even in the steps processed in time series.

1 車両検出システム
10 撮像装置
20 情報処理装置
110 制御部
120 撮像部
130 操作部
140 記憶部
150 出力部
180 記憶部
210 制御部
211 画像取得部
212 領域設定部
213 基準値算出部
214 出力制御部
215 変化量検出部
216 パラメータ選択部
217 車両検出部
280 記憶部
290 出力部
M 車両
R 設定領域

DESCRIPTION OF SYMBOLS 1 Vehicle detection system 10 Imaging device 20 Information processing apparatus 110 Control part 120 Imaging part 130 Operation part 140 Storage part 150 Output part 180 Storage part 210 Control part 211 Image acquisition part 212 Area setting part 213 Reference value calculation part 214 Output control part 215 Change detection unit 216 Parameter selection unit 217 Vehicle detection unit 280 Storage unit 290 Output unit M Vehicle R Setting region

また、図10および図11を参照すると、撮像条件の変更時における輝度分布は、環境光の変更時における輝度分布よりも狭い範囲に偏っている。したがって、輝度範囲D0の幅を基準として、輝度範囲D1の幅は、輝度範囲D2の幅よりも大きく変化された値であるとよい。より具体的には、図10および図11に示したように、撮像画像の平均輝度が基準画像の平均輝度を基準として上がった場合には、輝度範囲D0の幅を基準として、輝度範囲D1の幅は、輝度範囲D2の幅よりも狭いとよい。


10 and 11, the luminance distribution when the imaging condition is changed is biased to a narrower range than the luminance distribution when the ambient light is changed. Therefore, the width of the luminance range D1 may be a value that is changed to be larger than the width of the luminance range D2, with reference to the width of the luminance range D0. More specifically, as shown in FIGS. 10 and 11, when the average luminance of the captured image increases with the average luminance of the reference image as a reference, the width of the luminance range D <b> 1 is used as a reference. The width is preferably narrower than the width of the luminance range D2.


Claims (16)

所定の基準画像を基準とした撮像画像の輝度変化量および前記基準画像における所定の設定領域を基準とした前記撮像画像における前記設定領域の輝度変化量を検出する変化量検出部と、
前記撮像画像から車両を検出するための所定のパラメータを、前記撮像画像の前記輝度変化量および前記撮像画像における前記設定領域の前記輝度変化量に基づいて選択するパラメータ選択部と、
を備える、情報処理装置。
A change amount detection unit for detecting a luminance change amount of a captured image based on a predetermined reference image and a luminance change amount of the setting region in the captured image based on a predetermined setting region in the reference image;
A parameter selection unit that selects a predetermined parameter for detecting a vehicle from the captured image based on the luminance change amount of the captured image and the luminance change amount of the setting region in the captured image;
An information processing apparatus comprising:
撮像画像における所定の設定領域の輝度変化量を検出する変化量検出部と、
前記撮像画像から車両を検出するための所定のパラメータを、前記撮像画像における前記設定領域の前記輝度変化量の輝度範囲に基づいて選択するパラメータ選択部と、
を備える、情報処理装置。
A change amount detection unit that detects a luminance change amount of a predetermined setting area in the captured image;
A parameter selection unit that selects a predetermined parameter for detecting a vehicle from the captured image based on a luminance range of the luminance change amount of the setting region in the captured image;
An information processing apparatus comprising:
前記パラメータ選択部は、前記撮像画像における前記設定領域の前記輝度変化量が第1の規定範囲を超える場合、かつ、前記撮像画像の前記輝度変化量が第2の規定範囲に収まる場合に、第1のパラメータを選択する、
請求項1に記載の情報処理装置。
The parameter selection unit is configured such that when the luminance change amount of the setting area in the captured image exceeds a first specified range, and when the luminance change amount of the captured image falls within a second specified range, Select 1 parameter,
The information processing apparatus according to claim 1.
前記パラメータ選択部は、前記撮像画像の前記輝度変化量が前記第2の規定範囲を超える場合に、前記第1のパラメータとは異なる第2のパラメータを選択する、
請求項3に記載の情報処理装置。
The parameter selection unit selects a second parameter different from the first parameter when the luminance change amount of the captured image exceeds the second specified range.
The information processing apparatus according to claim 3.
前記撮像画像は、撮像条件が自動的に調整される撮像装置によって撮像され、
前記パラメータ選択部は、前記撮像画像における前記設定領域の前記輝度変化量および前記撮像画像の前記輝度変化量に応じた前記撮像条件に対応する前記パラメータを選択する、
請求項1に記載の情報処理装置。
The captured image is captured by an imaging device whose imaging conditions are automatically adjusted,
The parameter selection unit selects the parameter corresponding to the imaging condition according to the luminance change amount of the setting region and the luminance change amount of the captured image in the captured image.
The information processing apparatus according to claim 1.
前記撮像条件は、ISO感度、絞りおよびシャッタスピードのうち少なくとも何れか一つを含む、
請求項5に記載の情報処理装置。
The imaging conditions include at least one of ISO sensitivity, aperture, and shutter speed.
The information processing apparatus according to claim 5.
前記撮像画像における前記設定領域の前記輝度変化量は、前記基準画像における前記設定領域の平均輝度を基準とした前記撮像画像における前記設定領域の平均輝度の変化量であり、
前記撮像画像の前記輝度変化量は、前記基準画像の平均輝度を基準とした前記撮像画像の平均輝度の変化量である、
請求項1に記載の情報処理装置。
The luminance change amount of the setting area in the captured image is a change amount of the average luminance of the setting area in the captured image with reference to the average luminance of the setting area in the reference image,
The brightness change amount of the captured image is a change amount of the average brightness of the captured image based on the average brightness of the reference image.
The information processing apparatus according to claim 1.
前記パラメータは、前記撮像画像から前記車両を検出するための輝度範囲を少なくとも含む、
請求項4に記載の情報処理装置。
The parameter includes at least a luminance range for detecting the vehicle from the captured image.
The information processing apparatus according to claim 4.
前記基準画像から車両を検出するためのパラメータに含まれる前記輝度範囲の閾値を基準として、前記第1のパラメータに含まれる前記輝度範囲の閾値は、前記第2のパラメータに含まれる前記輝度範囲の閾値よりも大きく変化された値である、
請求項8に記載の情報処理装置。
With reference to the threshold value of the luminance range included in the parameter for detecting the vehicle from the reference image, the threshold value of the luminance range included in the first parameter is the threshold value of the luminance range included in the second parameter. It is a value changed more than the threshold value,
The information processing apparatus according to claim 8.
前記基準画像から車両を検出するためのパラメータに含まれる前記輝度範囲の幅を基準として、前記第1のパラメータに含まれる前記輝度範囲の幅は、前記第2のパラメータに含まれる前記輝度範囲の幅よりも大きく変化された値である、
請求項8に記載の情報処理装置。
With reference to the width of the luminance range included in the parameter for detecting the vehicle from the reference image, the width of the luminance range included in the first parameter is the width of the luminance range included in the second parameter. The value is changed more than the width,
The information processing apparatus according to claim 8.
前記情報処理装置は、車両が走行する領域を含む所定の領域を前記設定領域として設定する領域設定部を備える、
請求項1又は2に記載の情報処理装置。
The information processing apparatus includes an area setting unit that sets a predetermined area including an area where the vehicle travels as the setting area.
The information processing apparatus according to claim 1 or 2.
前記領域設定部は、過去に撮像された撮像画像群から抽出されるオプティカルフローまたは前記撮像画像群に適用される背景差分法に基づいて、前記設定領域を設定する、
請求項11に記載の情報処理装置。
The region setting unit sets the setting region based on an optical flow extracted from a captured image group captured in the past or a background difference method applied to the captured image group.
The information processing apparatus according to claim 11.
前記情報処理装置は、前記基準画像の輝度および前記基準画像における前記設定領域の輝度を算出する基準値算出部を備える、
請求項1に記載の情報処理装置。
The information processing apparatus includes a reference value calculation unit that calculates the luminance of the reference image and the luminance of the setting area in the reference image.
The information processing apparatus according to claim 1.
前記基準値算出部は、過去に撮像された撮像画像群において対応する画素ごとに平均輝度を算出することにより前記基準画像の各画素の輝度を算出する、
請求項13に記載の情報処理装置。
The reference value calculation unit calculates the luminance of each pixel of the reference image by calculating an average luminance for each corresponding pixel in a captured image group captured in the past;
The information processing apparatus according to claim 13.
所定の基準画像を基準とした撮像画像の輝度変化量および前記基準画像における所定の設定領域を基準とした前記撮像画像における前記設定領域の輝度変化量を検出するステップと、
前記撮像画像から車両を検出するための所定のパラメータを、前記撮像画像の前記輝度変化量および前記撮像画像における前記設定領域の前記輝度変化量に基づいて選択するステップと、
を含む、情報処理方法。
Detecting a luminance change amount of a captured image based on a predetermined reference image and a luminance change amount of the setting region in the captured image based on a predetermined setting region in the reference image;
Selecting a predetermined parameter for detecting a vehicle from the captured image based on the luminance change amount of the captured image and the luminance change amount of the setting area in the captured image;
Including an information processing method.
コンピュータを、
所定の基準画像を基準とした撮像画像の輝度変化量および前記基準画像における所定の設定領域を基準とした前記撮像画像における前記設定領域の輝度変化量を検出する変化量検出部と、
前記撮像画像から車両を検出するための所定のパラメータを、前記撮像画像の前記輝度変化量および前記撮像画像における前記設定領域の前記輝度変化量に基づいて選択するパラメータ選択部と、
を備える、情報処理装置として機能させるためのプログラム。
Computer
A change amount detection unit for detecting a luminance change amount of a captured image based on a predetermined reference image and a luminance change amount of the setting region in the captured image based on a predetermined setting region in the reference image;
A parameter selection unit that selects a predetermined parameter for detecting a vehicle from the captured image based on the luminance change amount of the captured image and the luminance change amount of the setting region in the captured image;
A program for causing an information processing apparatus to function.
JP2014150633A 2014-07-24 2014-07-24 Information processing apparatus, information processing method, and program Expired - Fee Related JP5804155B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014150633A JP5804155B1 (en) 2014-07-24 2014-07-24 Information processing apparatus, information processing method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014150633A JP5804155B1 (en) 2014-07-24 2014-07-24 Information processing apparatus, information processing method, and program

Publications (2)

Publication Number Publication Date
JP5804155B1 JP5804155B1 (en) 2015-11-04
JP2016025615A true JP2016025615A (en) 2016-02-08

Family

ID=54544748

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014150633A Expired - Fee Related JP5804155B1 (en) 2014-07-24 2014-07-24 Information processing apparatus, information processing method, and program

Country Status (1)

Country Link
JP (1) JP5804155B1 (en)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3419919B2 (en) * 1994-11-22 2003-06-23 富士通株式会社 Moving object detection device
JP4151571B2 (en) * 2003-12-12 2008-09-17 日産自動車株式会社 In-vehicle obstacle detection device
JP2005318408A (en) * 2004-04-30 2005-11-10 Nissan Motor Co Ltd Vehicle surrounding monitoring apparatus and method
JP2006017676A (en) * 2004-07-05 2006-01-19 Sumitomo Electric Ind Ltd Measuring system and method
JP2006234779A (en) * 2005-02-21 2006-09-07 Sigma Denki Kogyo Kk Method of detecting position of headlight and tail lamp at night, and method of measuring vehicle traveling at night

Also Published As

Publication number Publication date
JP5804155B1 (en) 2015-11-04

Similar Documents

Publication Publication Date Title
US20200404160A1 (en) Modifying image parameters using wearable device input
JP5177147B2 (en) Imaging apparatus, imaging method, and imaging program
EP2549738B1 (en) Method and camera for determining an image adjustment parameter
US11089228B2 (en) Information processing apparatus, control method of information processing apparatus, storage medium, and imaging system
JP2013097082A (en) Image signal processing device
JP6477876B2 (en) Signal detection device and signal detection method
JP6944272B2 (en) Motion detector and its control method
US20200084356A1 (en) Image monitoring device, image monitoring method, and recording medium
JP6460829B2 (en) IMAGING DEVICE, ELECTRONIC DEVICE, AND METHOD FOR CALCULATION OF LIGHT CHANGE CHARACTERISTICS
JP2009017474A (en) Image processing unit and image processing method
US10972676B2 (en) Image processing method and electronic device capable of optimizing hdr image by using depth information
US10694110B2 (en) Image processing device, method
WO2013114803A1 (en) Image processing device, image processing method therefor, computer program, and image processing system
JP5800288B2 (en) Image processing apparatus for vehicle
KR102630836B1 (en) Real-time calculation of atmospheric precipitation rates from digital images of the environment in which atmospheric precipitation occurs
JP2013258596A (en) Image pick-up device
JP2009225345A (en) Program, device, and method for correcting image
JP4523629B2 (en) Imaging device
US20170364765A1 (en) Image processing apparatus, image processing system, vehicle, imaging apparatus and image processing method
JP5804155B1 (en) Information processing apparatus, information processing method, and program
KR20140147211A (en) Method for Detecting Fog for Vehicle and Apparatus therefor
JP2017225073A (en) Imaging device and control method for the same, program and imaging system
JP2015233202A (en) Image processing apparatus, image processing method, and program
JP6784254B2 (en) Retained object detection system, retained object detection method and program
JP6525723B2 (en) Imaging device, control method therefor, program, and storage medium

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150804

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150817

R150 Certificate of patent or registration of utility model

Ref document number: 5804155

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees