JP7598697B2 - IMAGE CAPTURE INFORMATION STORAGE DEVICE, IMAGE CAPTURE INFORMATION STORAGE METHOD, AND PROGRAM - Google Patents

IMAGE CAPTURE INFORMATION STORAGE DEVICE, IMAGE CAPTURE INFORMATION STORAGE METHOD, AND PROGRAM Download PDF

Info

Publication number
JP7598697B2
JP7598697B2 JP2023204294A JP2023204294A JP7598697B2 JP 7598697 B2 JP7598697 B2 JP 7598697B2 JP 2023204294 A JP2023204294 A JP 2023204294A JP 2023204294 A JP2023204294 A JP 2023204294A JP 7598697 B2 JP7598697 B2 JP 7598697B2
Authority
JP
Japan
Prior art keywords
imaging information
frame rate
unit
information
traffic light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2023204294A
Other languages
Japanese (ja)
Other versions
JP2024015157A (en
Inventor
洋一 今枝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pioneer Corp
Original Assignee
Pioneer Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pioneer Corp filed Critical Pioneer Corp
Priority to JP2023204294A priority Critical patent/JP7598697B2/en
Publication of JP2024015157A publication Critical patent/JP2024015157A/en
Priority to JP2024209182A priority patent/JP2025023146A/en
Application granted granted Critical
Publication of JP7598697B2 publication Critical patent/JP7598697B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Time Recorders, Dirve Recorders, Access Control (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)
  • Navigation (AREA)
  • Television Signal Processing For Recording (AREA)
  • Closed-Circuit Television Systems (AREA)

Description

本発明は、撮像情報記憶装置、撮像情報記憶方法及びプログラムに関する。 The present invention relates to an imaging information storage device, an imaging information storage method, and a program.

下記特許文献1には、ドライブレコーダ及びその画像取得タイミング制御方法が開示されている。このドライブレコーダでは、LED(Light Emitting Diode)方式を採用する信号機の滅灯のタイミングに対して、画像キャプチャを行うタイミングをずらすか、又は録画フレーム数を減らす制御がなされている。録画フレーム数を減らす制御では、30 FPS(Frames Per Second)から29 FPSへ、フレームレートを減らすことが開示されている。 The following Patent Document 1 discloses a drive recorder and its image capture timing control method. In this drive recorder, control is performed to shift the timing of image capture relative to the timing of turning off traffic lights that use the LED (Light Emitting Diode) system, or to reduce the number of recorded frames. In the control to reduce the number of recorded frames, it is disclosed that the frame rate is reduced from 30 FPS (Frames Per Second) to 29 FPS.

特開2008-134844号公報JP 2008-134844 A

上記ドライブレコーダ及びその画像取得タイミング制御方法では、LED方式を採用する信号機の点灯状態にある映像を録画することができる。
しかしながら、上記ドライブレコーダ及びその画像取得タイミング制御方法では、録画容量を適正に抑制しつつ、信号機が存在する所定の範囲内において録画情報量を増やす点について、配慮がなされていなかった。これは、発明が解決しようとする課題の一例として挙げられる。
The drive recorder and image acquisition timing control method thereof can record video of a traffic light that employs an LED system when the traffic light is turned on.
However, the above drive recorder and image acquisition timing control method did not take into consideration the fact that the amount of recorded information is increased within a predetermined range where traffic lights are present while appropriately suppressing the recording capacity. This is one example of the problem that the invention is intended to solve.

本発明は、上記課題に鑑みてなされたものであり、撮像情報の記憶容量を適正に抑制しつつ、信号機が存在する所定の範囲内において撮像情報量を増やすことができる撮像情報記憶装置、撮像情報記憶方法及びプログラムを提供する。 The present invention has been made in consideration of the above problems, and provides an image information storage device, an image information storage method, and a program that can increase the amount of image information within a specified range where traffic lights are present while appropriately suppressing the storage capacity of the image information.

請求項1に記載の発明は、撮像情報記憶装置において、撮像された撮像情報を所定フレームレートにおいて生成する撮像情報生成部と、撮像情報生成部により生成された撮像情報を記憶する記憶部と、自装置の位置情報を取得する位置情報取得部と、信号機の位置情報を有する地図情報と前記自装置の位置情報とに基づいて、信号機が設置された位置から所定の範囲内に前記自装置が存在するか否かを判定し、所定の範囲内に前記自装置が存在すると判定されたときに所定フレームレートに比し高い高フレームレートにおいて撮像情報を生成するフレームレート制御部と、を備えている。 The invention described in claim 1 is an imaging information storage device that includes an imaging information generation unit that generates captured imaging information at a predetermined frame rate, a storage unit that stores the imaging information generated by the imaging information generation unit, a position information acquisition unit that acquires position information of the device itself, and a frame rate control unit that determines whether the device itself is located within a predetermined range from the position where the traffic light is installed based on map information having position information of the traffic light and the position information of the device itself, and generates imaging information at a high frame rate higher than the predetermined frame rate when it is determined that the device itself is located within the predetermined range.

請求項5に記載の発明は、撮像情報記憶装置において、撮像された撮像情報を所定フレームレートにおいて生成する撮像情報生成部と、撮像情報生成部により生成された撮像情報を所定フレームレートに比し低い低フレームレートに変換する撮像情報処理部と、撮像情報処理部により生成された撮像情報を記憶する記憶部と、自装置の位置情報を取得する位置情報取得部と、信号機の位置情報を有する地図情報と前記自装置の位置情報とに基づいて、信号機が設置された位置から所定の範囲内に前記自装置が存在するか否かを判定し、所定の範囲内に前記自装置が存在すると判定されたときに撮像情報処理部において所定フレームレートにより撮像情報を生成し、撮像情報を記憶部に記憶させるフレームレート制御部と、を備えている。 The invention described in claim 5 is an imaging information storage device that includes an imaging information generation unit that generates captured imaging information at a predetermined frame rate, an imaging information processing unit that converts the imaging information generated by the imaging information generation unit to a frame rate lower than the predetermined frame rate, a storage unit that stores the imaging information generated by the imaging information processing unit, a position information acquisition unit that acquires position information of the own device, and a frame rate control unit that determines whether the own device is located within a predetermined range from the position where the traffic light is installed based on map information having position information of the traffic light and the position information of the own device, and when it is determined that the own device is located within the predetermined range, generates imaging information at the predetermined frame rate in the imaging information processing unit and stores the imaging information in the storage unit.

請求項7に記載の発明は、撮像情報生成部、記憶部、位置情報取得部及びフレームレート制御部を備えた撮像情報記憶装置における撮像情報記憶方法であって、前記撮像情報生成部が、撮像された撮像情報を所定フレームレートにおいて生成する撮像情報生成工程と、前記記憶部が、前記撮像情報生成工程において生成された前記撮像情報を記憶する記憶工程と、前記位置情報取得部が、前記撮像情報記憶装置の位置情報を取得する位置情報取得工程と、前記フレームレート制御部が、信号機の位置情報を有する地図情報と前記撮像情報記憶装置の前記位置情報とに基づいて、信号機が設置された位置から所定の範囲内に前記撮像情報記憶装置が存在するか否かを判定し、前記所定の範囲内に前記撮像情報記憶装置が存在すると判定されたときに前記所定フレームレートに比し高い高フレームレートにおいて前記撮像情報を生成するフレームレート制御工程と、を備えている。 The invention described in claim 7 is an imaging information storage method in an imaging information storage device including an imaging information generation unit, a storage unit, a position information acquisition unit, and a frame rate control unit, and includes an imaging information generation step in which the imaging information generation unit generates captured imaging information at a predetermined frame rate, a storage step in which the storage unit stores the imaging information generated in the imaging information generation step, a position information acquisition step in which the position information acquisition unit acquires position information of the imaging information storage device, and a frame rate control step in which the frame rate control unit determines whether the imaging information storage device is located within a predetermined range from a position where a traffic light is installed based on map information having position information of a traffic light and the position information of the imaging information storage device, and generates the imaging information at a frame rate higher than the predetermined frame rate when it is determined that the imaging information storage device is located within the predetermined range.

請求項8に記載の発明は、撮像情報生成部、記憶部、位置情報取得部及びフレームレート制御部を備えた撮像情報記憶装置における撮像情報記憶方法をコンピュータに実行させるためのプログラムであって、撮像情報生成部が、撮像された撮像情報を所定フレームレートにおいて生成する工程と、記憶部が、撮像情報生成部により生成された撮像情報を記憶する工程と、位置情報取得部が、撮像情報記憶装置の位置情報を取得する工程と、フレームレート制御部が、信号機の位置情報を有する地図情報と撮像情報記憶装置の位置情報とに基づいて、信号機が設置された位置から所定の範囲内に撮像情報記憶装置が存在するか否かを判定し、所定の範囲内に撮像情報記憶装置が存在すると判定されたときに所定フレームレートに比し高い高フレームレートにおいて撮像情報を生成する工程と、を備えている。 The invention described in claim 8 is a program for causing a computer to execute an imaging information storage method in an imaging information storage device having an imaging information generation unit, a storage unit, a position information acquisition unit, and a frame rate control unit, and includes a step in which the imaging information generation unit generates captured imaging information at a predetermined frame rate, a step in which the storage unit stores the imaging information generated by the imaging information generation unit, a step in which the position information acquisition unit acquires position information of the imaging information storage device, and a step in which the frame rate control unit determines whether or not an imaging information storage device is present within a predetermined range from the position where the traffic light is installed based on map information having position information of the traffic light and the position information of the imaging information storage device, and generates imaging information at a high frame rate higher than the predetermined frame rate when it is determined that an imaging information storage device is present within the predetermined range.

図1は本発明の第1実施例に係る撮像情報記憶装置のブロック構成図である。FIG. 1 is a block diagram showing the configuration of an image information storage device according to a first embodiment of the present invention. 図2は、図1に示される撮像情報記憶装置の撮像情報記憶方法並びにその方法を実行するプログラムにおいて、信号機が設置された位置と撮像情報記憶装置の位置との位置関係を説明する、道路交差点の一形態を上方から見た概要図である。FIG. 2 is a schematic diagram of one type of road intersection viewed from above, illustrating the positional relationship between the locations of traffic lights and the location of an image information storage device in the image information storage method of the image information storage device shown in FIG. 1 and the program for executing that method. 図3は、図1に示される撮像情報記憶装置の撮像情報記憶方法並びにその方法を実行するプログラムにおいて、信号機が設置された位置と撮像情報記憶装置の位置との位置関係を説明する、道路を側方から見た概要図である。FIG. 3 is a schematic diagram of a road viewed from the side, illustrating the positional relationship between the locations of traffic lights and the location of an image information storage device in the image information storage method of the image information storage device shown in FIG. 1 and the program for executing that method. 図4は図1に示される撮像情報記憶装置の撮像情報記憶方法並びにその方法を実行するプログラムのフローチャートである。FIG. 4 is a flow chart showing a method for storing image information in the image information storage device shown in FIG. 1 and a program for executing the method. 図5は本発明の第2実施例に係る撮像情報記憶装置のブロック構成図である。FIG. 5 is a block diagram showing the configuration of an image information storage device according to a second embodiment of the present invention.

本発明の第1実施態様に係る撮像情報記憶装置は、撮像された撮像情報を所定フレームレートにおいて生成する撮像情報生成部と、撮像情報生成部により生成された撮像情報を記憶する記憶部と、自装置の位置情報を取得する位置情報取得部と、信号機の位置情報を有する地図情報と前記自装置の位置情報とに基づいて、信号機が設置された位置から所定の範囲内に前記自装置が存在するか否かを判定し、所定の範囲内に前記自装置が存在すると判定されたときに所定フレームレートに比し高い高フレームレートにおいて撮像情報を生成するフレームレート制御部と、を備えている。 The imaging information storage device according to the first embodiment of the present invention includes an imaging information generation unit that generates captured imaging information at a predetermined frame rate, a storage unit that stores the imaging information generated by the imaging information generation unit, a position information acquisition unit that acquires position information of the device itself, and a frame rate control unit that determines whether the device itself is located within a predetermined range from the position where the traffic light is installed based on map information having position information of the traffic light and the position information of the device itself, and generates imaging information at a high frame rate higher than the predetermined frame rate when it is determined that the device itself is located within the predetermined range.

第1実施態様に係る撮像情報記憶装置は、撮像情報生成部と、記憶部と、位置情報取得部と、を備える。
撮像情報生成部は撮像された撮像情報を所定フレームレートにおいて生成する。記憶部は撮像情報生成部により生成された撮像情報を記憶する。位置情報取得部は自装置の位置情報を取得する。
ここで、撮像情報記憶装置は、更にフレームレート制御部を備える。フレームレート制御部は、信号機の位置情報を有する地図情報と前記自装置の位置情報とに基づいて、信号機が設置された位置から所定の範囲内に前記自装置が存在するか否かを判定する。そして、フレームレート制御部は、所定の範囲内に前記自装置が存在すると判定されたときに、所定フレームレートに比し高い高フレームレートにおいて、撮像情報を生成する。
このため、信号機が設置された位置から所定の範囲を超えるときには、所定フレームレートにおいて撮像情報が生成され、かつ、この撮像情報が記憶されるので、撮像情報の記憶容量を適正に抑制することができる。一方、信号機が設置された位置から所定の範囲内では、所定フレームレートに比し高い高フレームレートにおいて撮像情報が生成され、かつ、この撮像情報が記憶されるので、信号機が設置された位置から所定の範囲内での撮像情報を増やすことができる。従って、撮像情報の記憶容量を適正に抑制しつつ、信号機が設置された位置から所定の範囲内において撮像情報量を増やすことができる撮像情報記憶装置を提供することができる。
The imaging information storage device according to the first embodiment includes an imaging information generating section, a storage section, and a position information acquiring section.
The imaging information generating unit generates imaging information of captured images at a predetermined frame rate. The storage unit stores the imaging information generated by the imaging information generating unit. The position information acquiring unit acquires position information of the own device.
Here, the imaging information storage device further includes a frame rate control unit that determines whether the device is located within a predetermined range from a position where a traffic light is installed based on map information having position information of a traffic light and the device's position information. When it is determined that the device is located within the predetermined range, the frame rate control unit generates imaging information at a frame rate higher than the predetermined frame rate.
Therefore, when the vehicle exceeds a predetermined range from the position where the traffic light is installed, imaging information is generated at a predetermined frame rate and stored, so that the storage capacity of imaging information can be appropriately suppressed. Meanwhile, within a predetermined range from the position where the traffic light is installed, imaging information is generated at a high frame rate compared to the predetermined frame rate and stored, so that the imaging information within the predetermined range from the position where the traffic light is installed can be increased. Thus, it is possible to provide an imaging information storage device that can increase the amount of imaging information within a predetermined range from the position where the traffic light is installed while appropriately suppressing the storage capacity of imaging information.

本発明の第2実施態様に係る撮像情報記憶装置は、第1実施態様に係る撮像情報記憶装置において、位置情報取得部により取得された位置情報のずれを地図情報に基づいて補正するマップマッチング処理部を更に備えている。 The imaging information storage device according to the second embodiment of the present invention is the imaging information storage device according to the first embodiment, further comprising a map matching processing unit that corrects the deviation of the position information acquired by the position information acquisition unit based on map information.

第2実施態様に係る撮像情報記憶装置は、マップマッチング処理部を備える。マップマッチング処理部は、位置情報取得部により取得された位置情報のずれを地図情報に基づいて補正する。
このため、撮像情報記憶装置において、位置情報と地図情報とを一致させることができるので、信号機が設置された位置の精度、この位置から所定の範囲を演算する精度並びに撮像情報記憶装置の位置精度を向上させることができる。
The imaging information storage device according to the second embodiment includes a map matching processing section that corrects a deviation of the position information acquired by the position information acquisition section based on map information.
As a result, the location information and map information can be matched in the imaging information storage device, thereby improving the accuracy of the location where the traffic light is installed, the accuracy of calculating a specified range from this location, and the position accuracy of the imaging information storage device.

本発明の第3実施態様に係る撮像情報記憶装置では、第1実施態様又は第2実施態様に係る撮像情報記憶装置において、撮像情報生成部は、それぞれ撮像された複数種類の撮像情報を所定フレームレートにおいて生成し、記憶部は、撮像情報生成部により生成された複数種類の撮像情報を記憶し、フレームレート制御部は、前記自装置が所定の範囲内に存在すると判定されたときに高フレームレートにおいて複数種類の撮像情報を生成する。 In the imaging information storage device according to the third embodiment of the present invention, in the imaging information storage device according to the first or second embodiment, the imaging information generation unit generates multiple types of imaging information captured at a predetermined frame rate, the storage unit stores the multiple types of imaging information generated by the imaging information generation unit, and the frame rate control unit generates the multiple types of imaging information at a high frame rate when it is determined that the device itself is present within a predetermined range.

第3実施態様に係る撮像情報記憶装置では、撮像情報生成部は、それぞれ撮像された複数種類の撮像情報を所定フレームレートにおいて生成する。記憶部は、撮像情報生成部により生成された複数種類の撮像情報を記憶する。そして、フレームレート制御部は、撮像情報記憶装置が所定の範囲内に存在とすると判定されたときに、高フレームレートにおいて複数種類の撮像情報を生成する。
このため、複数種類の撮像情報は、信号機が設置された位置から所定の範囲内では同一の高フレームレートにより生成され、所定の範囲を超えると同一の所定フレームレートにより生成される。従って、複数種類の撮像情報を同時に再生するときに、再生ずれが生じないので、撮像情報を再生した映像を見るユーザの違和感を軽減することができる。
In the imaging information storage device according to the third embodiment, the imaging information generating unit generates a plurality of types of imaging information at a predetermined frame rate, the storage unit stores the plurality of types of imaging information generated by the imaging information generating unit, and the frame rate control unit generates the plurality of types of imaging information at a high frame rate when it is determined that the imaging information storage device is present within a predetermined range.
Therefore, the multiple types of imaging information are generated at the same high frame rate within a predetermined range from the position where the traffic light is installed, and are generated at the same predetermined frame rate beyond the predetermined range. Therefore, when the multiple types of imaging information are played back simultaneously, no playback lag occurs, and it is possible to reduce the discomfort felt by the user when watching the video of the played back imaging information.

本発明の第4実施態様に係る撮像情報記憶装置では、第3実施態様に係る撮像情報記憶装置において、撮像情報生成部は、車両室外が撮像された室外撮像情報と、車両室内が撮像された室内撮像情報とを含む複数種類の撮像情報を所定フレームレートにおいて生成する。 In the imaging information storage device according to the fourth embodiment of the present invention, in the imaging information storage device according to the third embodiment, the imaging information generating unit generates multiple types of imaging information at a predetermined frame rate, including exterior imaging information in which the exterior of the vehicle is imaged, and interior imaging information in which the interior of the vehicle is imaged.

第4実施態様に係る撮像情報記憶装置では、撮像情報生成部が、車両室外が撮像された室外撮像情報と、車両室内が撮像された室内撮像情報とを含む複数種類の撮像情報を生成する。
このため、信号機が設置された位置から所定の範囲を超える位置、所定の範囲の位置、所定の範囲内の信号機が設置された位置に至る道路において、道路状態、周囲の環境状態等の室外撮像情報と、車両に搭乗する搭乗者の表情や安全確認動作、健康状態等の室内撮像情報とを同時に記憶することができる。
In the imaging information storage device according to the fourth embodiment, the imaging information generating section generates a plurality of types of imaging information including exterior imaging information capturing an image of the exterior of the vehicle and interior imaging information capturing an image of the interior of the vehicle.
Therefore, on roads that extend from the location where the traffic light is installed to a location beyond a specified range, a location within the specified range, or a location where a traffic light is installed within the specified range, it is possible to simultaneously store outdoor image information such as road conditions and surrounding environmental conditions, as well as indoor image information such as the facial expressions, safety check actions, and health condition of the vehicle occupants.

本発明の第5実施態様に係る撮像情報記憶装置は、撮像された撮像情報を所定フレームレートにおいて生成する撮像情報生成部と、撮像情報生成部により生成された撮像情報を所定フレームレートに比し低い低フレームレートに変換する撮像情報処理部と、撮像情報処理部により生成された撮像情報を記憶する記憶部と、自装置の位置情報を取得する位置情報取得部と、信号機の位置情報を有する地図情報と前記自装置の位置情報とに基づいて、信号機が設置された位置から所定の範囲内に前記自装置が存在するか否かを判定し、所定の範囲内に前記自装置が存在すると判定されたときに撮像情報処理部において所定フレームレートにより撮像情報を生成し、撮像情報を記憶部に記憶させるフレームレート制御部と、を備えている。 The imaging information storage device according to the fifth embodiment of the present invention includes an imaging information generation unit that generates captured imaging information at a predetermined frame rate, an imaging information processing unit that converts the imaging information generated by the imaging information generation unit to a frame rate lower than the predetermined frame rate, a storage unit that stores the imaging information generated by the imaging information processing unit, a position information acquisition unit that acquires position information of the own device, and a frame rate control unit that determines whether the own device is located within a predetermined range from the position where the traffic light is installed based on map information having position information of the traffic light and the position information of the own device, and generates imaging information at a predetermined frame rate in the imaging information processing unit when it is determined that the own device is located within the predetermined range, and stores the imaging information in the storage unit.

第5実施態様に係る撮像情報記憶装置は、撮像情報生成部と、撮像情報処理部と、記憶部と、位置情報取得部と、を備える。
撮像情報生成部は、撮像された撮像情報を所定フレームレートにおいて生成する。撮像情報処理部は、撮像情報生成部により生成された撮像情報を所定フレームレートに比し低い低フレームレートに変換する。記憶部は、撮像情報処理部により生成された撮像情報を記憶する。位置情報取得部は、自装置の位置情報を取得する。
ここで、撮像情報記憶装置は、更にフレームレート制御部を備える。フレームレート制御部は、信号機の位置情報を有する地図情報と前記自装置の位置情報とに基づいて、信号機が設置された位置から所定の範囲内に前記自装置が存在するか否かを判定する。そして、フレームレート制御部は、所定の範囲内に前記自装置が存在すると判定されたときに、撮像情報処理部において所定フレームレートにより撮像情報を生成し、撮像情報を記憶部に記憶させる。
このため、信号機が設置された位置から所定の範囲を超えるとき、低フレームレートにおいて撮像情報が生成され、かつ、この撮像情報が記憶されるので、撮像情報の記憶容量を適正に抑制することができる。一方、信号機が設置された位置から所定の範囲内では、低フレームレートに比し高い所定フレームレートにおいて撮像情報が生成され、かつ、この撮像情報が記憶されるので、信号機が設置された位置から所定の範囲内での撮像情報を増やすことができる。従って、撮像情報の記憶容量を適正に抑制しつつ、信号機が設置された位置から所定の範囲内において撮像情報量を増やすことができる撮像情報記憶装置を提供することができる。
さらに、撮像情報生成部では、撮像情報処理部において撮像情報が低フレームレートに変換されるまで、低フレームレートに比し高い所定フレームレートにおいて撮像情報が生成される。このため、撮像情報記憶装置では、低フレームレートに変換される前の、撮像情報量が多い撮像情報を利用することができる。
The imaging information storage device according to the fifth embodiment includes an imaging information generating section, an imaging information processing section, a storage section, and a position information acquiring section.
The imaging information generating unit generates captured imaging information at a predetermined frame rate. The imaging information processing unit converts the imaging information generated by the imaging information generating unit into a low frame rate that is lower than the predetermined frame rate. The storage unit stores the imaging information generated by the imaging information processing unit. The position information acquiring unit acquires position information of the own device.
Here, the imaging information storage device further includes a frame rate control unit. The frame rate control unit determines whether the device is located within a predetermined range from a position where a traffic light is installed based on map information having position information of a traffic light and the position information of the device. When it is determined that the device is located within the predetermined range, the frame rate control unit generates imaging information at a predetermined frame rate in the imaging information processing unit and stores the imaging information in the storage unit.
Therefore, when the vehicle is beyond a predetermined range from the position where the traffic light is installed, imaging information is generated at a low frame rate and this imaging information is stored, so that the storage capacity of the imaging information can be appropriately suppressed. On the other hand, within a predetermined range from the position where the traffic light is installed, imaging information is generated at a predetermined frame rate higher than the low frame rate and this imaging information is stored, so that the imaging information within the predetermined range from the position where the traffic light is installed can be increased. Therefore, it is possible to provide an imaging information storage device that can increase the amount of imaging information within a predetermined range from the position where the traffic light is installed while appropriately suppressing the storage capacity of the imaging information.
Furthermore, in the imaging information generating section, imaging information is generated at a predetermined frame rate higher than the low frame rate until the imaging information is converted to the low frame rate in the imaging information processing section, so that the imaging information storage device can utilize imaging information with a large amount of imaging information before it is converted to the low frame rate.

本発明の第6実施態様に係る撮像情報記憶装置は、第1実施態様に係る撮像情報記憶装置において、撮像情報生成部により生成された撮像情報に基づく画像解析により信号機が存在するか否かを認識する信号機認識部を更に備え、フレームレート制御部は、信号機が所定の範囲内に存在すると判定されたとき、又は信号機認識部により信号機が認識されたときに、高フレームレートにおいて撮像情報を生成する。 The imaging information storage device according to the sixth embodiment of the present invention is the imaging information storage device according to the first embodiment, further comprising a traffic light recognition unit that recognizes whether or not a traffic light is present by image analysis based on the imaging information generated by the imaging information generation unit, and the frame rate control unit generates imaging information at a high frame rate when it is determined that a traffic light is present within a predetermined range or when a traffic light is recognized by the traffic light recognition unit.

第6実施態様に係る撮像情報記憶装置は、更に信号機認識部を備える。信号機認識部は、撮像情報に基づく画像解析により信号機が存在するか否かを認識する。そして、フレームレート制御部は、信号機が所定の範囲内に存在すると判定されたとき、又は信号認識部により信号機が認識されたとき、高フレームレートにおいて撮像情報を生成する。
このため、フレームレート制御部では、信号機が所定の範囲内に存在するか否かの判定又は信号機の認識のいずれか一方を用いて信号機の存在を確認することができ、いずれか他方を信号機の存在の確認の補助として使用することができる。例えば、仮に信号機の認識ができなかったとき、信号機が所定の範囲内に存在するか否かの判定により信号機の存在を確認し、高フレームレートにおいて撮像情報を生成することができる。これにより、撮像情報記憶装置では、信号機の存在の判定精度を向上させることができる。
The imaging information storage device according to the sixth embodiment further includes a traffic light recognition unit that recognizes whether or not a traffic light is present by image analysis based on the imaging information. The frame rate control unit generates imaging information at a high frame rate when it is determined that a traffic light is present within a predetermined range or when a traffic light is recognized by the traffic light recognition unit.
Therefore, the frame rate control unit can confirm the presence of a traffic light by either determining whether or not the traffic light is present within a predetermined range or by recognizing the traffic light, and the other can be used as an aid in confirming the presence of the traffic light. For example, if the traffic light cannot be recognized, the presence of the traffic light can be confirmed by determining whether or not the traffic light is present within a predetermined range, and imaging information can be generated at a high frame rate. This allows the imaging information storage device to improve the accuracy of determining the presence of a traffic light.

本発明の第7実施態様に係る撮像情報記憶方法は、所定フレームレートにおいて撮像された撮像情報を生成する工程と、撮像情報を記憶する工程と、撮像情報記憶装置の位置情報を取得する工程と、信号機の位置情報を有する地図情報と撮像情報記憶装置の位置情報とに基づいて、信号機が設置された位置から所定の範囲内に撮像情報記憶装置が存在するか否かを判定し、所定の範囲内に撮像情報記憶装置が存在すると判定されたときに所定フレームレートに比し高い高フレームレートにおいて撮像情報を生成する工程と、を備えている。 The imaging information storage method according to the seventh embodiment of the present invention includes a step of generating imaging information captured at a predetermined frame rate, a step of storing the imaging information, a step of acquiring position information of the imaging information storage device, and a step of determining whether or not an imaging information storage device is present within a predetermined range from the position where the traffic light is installed based on map information having position information of the traffic light and the position information of the imaging information storage device, and generating imaging information at a frame rate higher than the predetermined frame rate when it is determined that an imaging information storage device is present within the predetermined range.

第7実施態様に係る撮像情報記憶方法では、所定フレームレートにおいて撮像された撮像情報が生成され、撮像情報が記憶される。一方、撮像情報記憶装置の位置情報が取得される。そして、信号機の位置情報を有する地図情報と撮像情報記憶装置の位置情報とに基づいて、信号機が設置された位置から所定の範囲内に撮像情報記憶装置が存在するか否かが判定される。所定の範囲内に撮像情報記憶装置が存在すると判定されたときに、所定フレームレートに比し高い高フレームレートにおいて撮像情報が生成される。
このため、信号機が設置された位置から所定の範囲を超えるとき、所定フレームレートにおいて撮像情報が生成され、かつ、この撮像情報が記憶されるので、撮像情報の記憶容量を適正に抑制することができる。一方、信号機が設置された位置から所定の範囲内では、所定フレームレートに比し高い高フレームレートにおいて撮像情報が生成され、かつ、この撮像情報が記憶されるので、信号機が設置された位置から所定の範囲内での撮像情報を増やすことができる。従って、撮像情報の記憶容量を適正に抑制しつつ、信号機が設置された位置から所定の範囲内において撮像情報量を増やすことができる撮像情報記憶方法を提供することができる。
In the imaging information storage method according to the seventh embodiment, imaging information captured at a predetermined frame rate is generated and the imaging information is stored. Meanwhile, location information of the imaging information storage device is acquired. Then, based on map information having location information of the traffic light and the location information of the imaging information storage device, it is determined whether or not the imaging information storage device is present within a predetermined range from the location where the traffic light is installed. When it is determined that the imaging information storage device is present within the predetermined range, imaging information is generated at a frame rate higher than the predetermined frame rate.
Therefore, when the vehicle exceeds a predetermined range from the position where the traffic light is installed, imaging information is generated at a predetermined frame rate and stored, so that the storage capacity of imaging information can be appropriately suppressed. Meanwhile, within a predetermined range from the position where the traffic light is installed, imaging information is generated at a frame rate higher than the predetermined frame rate and stored, so that the imaging information within the predetermined range from the position where the traffic light is installed can be increased. Thus, it is possible to provide an imaging information storage method that can increase the amount of imaging information within a predetermined range from the position where the traffic light is installed while appropriately suppressing the storage capacity of imaging information.

本発明の第8実施態様に係るプログラムは、撮像情報生成部、記憶部、位置情報取得部及びフレームレート制御部を備えた撮像情報記憶装置における撮像情報記憶方法をコンピュータに実行させるためのプログラムであって、撮像情報生成部が、撮像された撮像情報を所定フレームレートにおいて生成する工程と、記憶部が、撮像情報生成部により生成された撮像情報を記憶する工程と、位置情報取得部が、撮像情報記憶装置の位置情報を取得する工程と、フレームレート制御部が、信号機の位置情報を有する地図情報と撮像情報記憶装置の位置情報とに基づいて、信号機が設置された位置から所定の範囲内に撮像情報記憶装置が存在するか否かを判定し、所定の範囲内に撮像情報記憶装置が存在すると判定されたときに所定フレームレートに比し高い高フレームレートにおいて撮像情報を生成する工程と、を備えている。 The program according to the eighth embodiment of the present invention is a program for causing a computer to execute an imaging information storage method in an imaging information storage device that includes an imaging information generation unit, a storage unit, a position information acquisition unit, and a frame rate control unit, and includes the steps of: the imaging information generation unit generating captured imaging information at a predetermined frame rate; the storage unit storing the imaging information generated by the imaging information generation unit; the position information acquisition unit acquiring position information of the imaging information storage device; and the frame rate control unit determining whether or not an imaging information storage device is present within a predetermined range from the position where the traffic light is installed based on map information having position information of the traffic light and the position information of the imaging information storage device, and generating imaging information at a high frame rate higher than the predetermined frame rate when it is determined that an imaging information storage device is present within the predetermined range.

第8実施態様に係るプログラムでは、撮像情報生成部が撮像された撮像情報を所定フレームレートにおいて生成し、記憶部が撮像情報生成部により生成された撮像情報を記憶する。一方、位置情報取得部が撮像情報記憶装置の位置情報を取得する。そして、フレームレート制御部は、信号機の位置情報を有する地図情報と撮像情報記憶装置の位置情報とに基づいて、信号機が設置された位置から所定の範囲内に撮像情報記憶装置が存在するか否かを判定する。フレームレート制御部では、所定の範囲内に撮像情報記憶装置が存在すると判定されたときに、所定フレームレートに比し高い高フレームレートにおいて撮像情報が生成される。
このため、信号機が設置された位置から所定の範囲を超えるとき、所定フレームレートにおいて撮像情報が生成され、かつ、この撮像情報が記憶されるので、撮像情報の記憶容量を適正に抑制することができる。一方、信号機が設置された位置から所定の範囲内では、所定フレームレートに比し高い高フレームレートにおいて撮像情報が生成され、かつ、この撮像情報が記憶されるので、信号機が設置された位置から所定の範囲内での撮像情報を増やすことができる。従って、撮像情報の記憶容量を適正に抑制しつつ、信号機が設置された位置から所定の範囲内において撮像情報量を増やすことができるプログラムを提供することができる。
In the program according to the eighth embodiment, the imaging information generating unit generates captured imaging information at a predetermined frame rate, and the storage unit stores the imaging information generated by the imaging information generating unit. Meanwhile, the position information acquiring unit acquires position information of the imaging information storage device. Then, the frame rate control unit determines whether or not the imaging information storage device is present within a predetermined range from the position where the traffic light is installed, based on map information having position information of the traffic light and the position information of the imaging information storage device. When it is determined that the imaging information storage device is present within the predetermined range, the frame rate control unit generates imaging information at a frame rate higher than the predetermined frame rate.
Therefore, when the vehicle exceeds a predetermined range from the position where the traffic light is installed, imaging information is generated at a predetermined frame rate and the imaging information is stored, so that the storage capacity of the imaging information can be appropriately suppressed. Meanwhile, within a predetermined range from the position where the traffic light is installed, imaging information is generated at a high frame rate compared to the predetermined frame rate and the imaging information is stored, so that the imaging information within the predetermined range from the position where the traffic light is installed can be increased. Thus, it is possible to provide a program that can increase the amount of imaging information within a predetermined range from the position where the traffic light is installed while appropriately suppressing the storage capacity of the imaging information.

[第1実施例]
以下、図1~図4を用いて、第1実施例に係る撮像情報記憶装置1、撮像情報記憶方法及びその方法をコンピュータに実行させるためのプログラムについて説明する。
なお、図中、適宜、示される矢印FRは一例としての普通自動車を対象とする車両の前方方向を示し、矢印Wは車両の幅方向を示す。また、矢印UPは車両上方を示している。これらの方向は、実施例を説明するために便宜的に使用される方向であって、本発明における方向を限定するものではない。
[First embodiment]
Hereinafter, an imaging information storage device 1 according to a first embodiment, an imaging information storage method, and a program for causing a computer to execute the method will be described with reference to FIGS.
In the drawings, the arrow FR indicates the forward direction of the vehicle, which is an example of a standard automobile, and the arrow W indicates the width direction of the vehicle. The arrow UP indicates the upward direction of the vehicle. These directions are used for the convenience of explaining the embodiment, and do not limit the directions in the present invention.

(撮像情報記憶装置1及び撮像情報記憶システム100の構成)
図1に示されるように、撮像情報記憶装置1は、ドライブレコーダ部3を主要部として備え、車両の停止中や走行中における車両室外及び車両室内を撮像した撮像情報を記憶する構成とされている。表現を代えると、撮像情報記憶装置1は、車両室外及び車両室内を撮影した映像を録画する構成とされている。
なお、車両として、ここでは普通自動車を一例として説明する。本実施例では、車両として、バス、トラック、二輪車、自転車が少なくとも含まれる。
撮像情報記憶装置1は、更にインターフェイス部2と、信号機認識部4と、マップアプリケーション部5と、コンピュータとしての中央演算処理ユニット(CPU)6と、第1記憶部7と、第2記憶部8とを備えている。これらの撮像情報記憶装置1を構築するインターフェイス部2等の各構成要素は、共通バス9を通して相互に電気的に接続されている。
さらに、撮像情報記憶装置1には外部装置としての撮像装置10が組み込まれ、撮像情報記憶装置1及び撮像装置10は撮像情報記憶システム100を構築している。
以下、撮像情報記憶システム100の各構成要素について説明する。
(Configuration of the imaging information storage device 1 and imaging information storage system 100)
1, the image data storage device 1 includes a drive recorder unit 3 as a main component, and is configured to store image data captured of the exterior and interior of the vehicle while the vehicle is stopped or traveling. In other words, the image data storage device 1 is configured to record video captured of the exterior and interior of the vehicle.
In this embodiment, the vehicle is an ordinary car, but the vehicle may be at least a bus, a truck, a motorcycle, or a bicycle.
The image data storage device 1 further includes an interface section 2, a traffic light recognition section 4, a map application section 5, a central processing unit (CPU) 6 as a computer, a first storage section 7, and a second storage section 8. The interface section 2 and other components constituting the image data storage device 1 are electrically connected to each other via a common bus 9.
Furthermore, an imaging device 10 is incorporated as an external device in the imaging information storage device 1 , and the imaging information storage device 1 and the imaging device 10 constitute an imaging information storage system 100 .
Each component of the imaging information storage system 100 will now be described.

(撮像装置10の構成)
図1に示されるように、撮像装置10は、車室外用カメラ(アウターカメラ)11と、車室内用カメラ(インナーカメラ)12とを含んで構成されている。車室外用カメラ11は、例えば車両室内のフロントウインドウガラスに近接した位置に車両前方に向けて装着され、車両前方の撮像を行い、この撮像による室外撮像情報を生成する。車室内用カメラ12は、例えば車室外用カメラ11と同様の位置に車両後方に向けて装着され、車室内の撮像を行い、この撮像による室内撮像情報を生成する。なお、実施例では、室外撮像情報と室内撮像情報とを総称して、単に「撮像情報」として説明する場合がある。
車室外用カメラ11、車室内用カメラ12は、いずれも、例えば二次元イメージセンサを主要な撮像デバイスとして構成されている。二次元イメージセンサには、例えばCCD(Charge Coupled Device)イメージセンサ又はCMOS(Complementary Metal Oxide Semiconductor)イメージセンサを実用的に使用することができる。
本実施例では、車両に車室外用カメラ11及び車室内用カメラ12の2つのカメラが装着されているが、車室外用カメラ11だけが車両に装着されていてもよい。また、本実施例では、車室外用カメラ11及び車室内用カメラ12に加えて、車両後方を撮像する車室外用カメラとしてのバックカメラ、車両側方後側を撮像する車室外用カメラとしてのサイドバックカメラの少なくともいずれか1つが設けられてもよい。
(Configuration of imaging device 10)
As shown in Fig. 1, the imaging device 10 includes an exterior camera (outer camera) 11 and an interior camera (inner camera) 12. The exterior camera 11 is mounted facing the front of the vehicle at a position close to the windshield inside the vehicle, captures an image of the area in front of the vehicle, and generates exterior imaging information based on the captured image. The interior camera 12 is mounted facing the rear of the vehicle at a position similar to that of the exterior camera 11, captures an image of the interior of the vehicle, and generates interior imaging information based on the captured image. In the embodiment, the exterior imaging information and the interior imaging information may be collectively referred to simply as "imaging information".
Both the exterior camera 11 and the interior camera 12 are configured with, for example, a two-dimensional image sensor as a main imaging device. For the two-dimensional image sensor, for example, a charge coupled device (CCD) image sensor or a complementary metal oxide semiconductor (CMOS) image sensor can be practically used.
In this embodiment, two cameras, an exterior camera 11 and an interior camera 12, are mounted on the vehicle, but the vehicle may be equipped with only the exterior camera 11. In this embodiment, in addition to the exterior camera 11 and the interior camera 12, at least one of a back camera serving as an exterior camera for capturing an image behind the vehicle and a side back camera serving as an exterior camera for capturing an image on the side rear of the vehicle may be provided.

(撮像情報記憶装置1の構成)
(1)インターフェイス部2の構成
インターフェイス部2は、車室外用カメラ11、車室内用カメラ12のそれぞれに接続され、更に撮像情報記憶装置1の共通バス9に接続されている。インターフェイス部2では、車室外用カメラ11、車室内用カメラ12のそれぞれにおいて生成された撮像情報を撮像情報記憶装置1に取り込むことができる。
(Configuration of the imaging information storage device 1)
(1) Configuration of Interface Unit 2 The interface unit 2 is connected to each of the exterior camera 11 and the interior camera 12, and is further connected to a common bus 9 of the image data storage device 1. The interface unit 2 can import the image data generated by each of the exterior camera 11 and the interior camera 12 into the image data storage device 1.

(2)ドライブレコーダ部3の構成
ドライブレコーダ部3は、撮像情報生成部31と、記録部32とを備えている。ドライブレコーダ部3は更にフレームレート制御部33を備えているが、このフレームレート制御部33の説明は後に詳しく説明する。
撮像情報生成部31では、車室外用カメラ11、車室内用カメラ12のそれぞれからインターフェイス部2及び共通バス9を通して伝送される撮像情報に基づいて、所定フレームレートにおいて撮像情報が生成される。ここで、所定フレームレートは例えば1 FPSに設定され、撮像情報の記憶容量が適正に抑制されている。
記録部32は、撮像情報生成部31において生成された撮像情報を、順次、共通バス9を通して第2記憶部8へ伝送する。第2記憶部8では、記録部32から伝送された撮像情報が撮像情報記憶部81に記憶される。
(2) Configuration of the Drive Recorder Unit 3 The drive recorder unit 3 includes an imaging information generating unit 31 and a recording unit 32. The drive recorder unit 3 further includes a frame rate control unit 33, which will be described in detail later.
The imaging information generating unit 31 generates imaging information at a predetermined frame rate based on imaging information transmitted from each of the exterior camera 11 and the interior camera 12 via the interface unit 2 and the common bus 9. Here, the predetermined frame rate is set to, for example, 1 FPS, and the storage capacity of the imaging information is appropriately suppressed.
The recording unit 32 sequentially transmits the imaging information generated in the imaging information generating unit 31 to the second storage unit 8 through the common bus 9. In the second storage unit 8, the imaging information transmitted from the recording unit 32 is stored in an imaging information storage unit 81.

(3)信号機認識部4の構成
信号機認識部4は、撮像情報解析部41と、信号機検知部42とを含んで構成されている。撮像情報解析部41は、車室外用カメラ11からインターフェイス部2及び共通バス9を通して伝送される車両前方側の撮像情報に基づいて、「信号機」が存在するか否かを画像解析により解析する。信号機検知部42では、撮像情報解析部41の解析結果に基づいて、「信号機」が存在するか否かが判定される。つまり、信号機認識部4では、「信号機」の存在を認識することができる。
(3) Configuration of Traffic Light Recognition Unit 4 The traffic light recognition unit 4 is configured to include an image information analysis unit 41 and a traffic light detection unit 42. The image information analysis unit 41 performs image analysis to determine whether or not a "traffic light" is present, based on image information of the front side of the vehicle transmitted from the exterior camera 11 through the interface unit 2 and the common bus 9. The traffic light detection unit 42 determines whether or not a "traffic light" is present, based on the analysis result of the image information analysis unit 41. In other words, the traffic light recognition unit 4 can recognize the presence of a "traffic light."

ここで、図2に示されるように、一般的に、紙面を上下方向に延びる道路R1と紙面を左右方向へ延びる道路R2との交差部位が「道路交差点C」とされている。道路R1は、自車両Vが走行する走行車線L1と、この走行車線L1に隣接して平行に延びる反対車線L2とを有する。道路R2は、自車両Vが右折した際に走行する走行車線L3と、この走行車線L3に隣接して平行に延びる反対車線L4とを有する。なお、道路R2では、自車両Vが左折した際には、反対車線L4が走行車線L5とされ、走行車線L3が反対車線L6とされる。
信号機T1~T8は、道路交差点Cの道路脇であって、例えば各角部分に設置されている。信号機T1及び信号機T2は道路R1の走行車線L1に沿って設置されている。信号機T3及び信号機T4は道路R1の反対車線L2に沿って設置されている。信号機T5及び信号機T6は道路R2の走行車線L3及び反対車線L6に沿って設置されている。そして、信号機T7及び信号機T8は道路R2の走行車線L5及び反対車線L4に沿って設置されている。
なお、「信号機」は、「道路交差点C」だけではなく、横断歩道等に近接する位置にも設置されている。
Here, as shown in Fig. 2, generally, an intersection between a road R1 extending vertically on the paper and a road R2 extending horizontally on the paper is defined as a "road intersection C". The road R1 has a driving lane L1 on which the host vehicle V is traveling, and an opposite lane L2 extending parallel to the driving lane L1. The road R2 has a driving lane L3 on which the host vehicle V is traveling when turning right, and an opposite lane L4 extending parallel to the driving lane L3. Note that on the road R2, when the host vehicle V turns left, the opposite lane L4 becomes the driving lane L5, and the driving lane L3 becomes the opposite lane L6.
Traffic lights T1 to T8 are installed on the side of the road at the intersection C, for example at each corner. Traffic lights T1 and T2 are installed along the driving lane L1 of road R1. Traffic lights T3 and T4 are installed along the oncoming lane L2 of road R1. Traffic lights T5 and T6 are installed along the driving lane L3 and oncoming lane L6 of road R2. And traffic lights T7 and T8 are installed along the driving lane L5 and oncoming lane L4 of road R2.
In addition, traffic lights are installed not only at road intersections C, but also in locations close to pedestrian crossings, etc.

図3に示されるように、道路R1の走行車線L1において、自車両Vが道路交差点Cへ向かって走行していると仮定する。このとき、自車両Vに装着された撮像情報記憶システム100の車室外用カメラ11(図1参照)により生成される撮像情報では、信号機T1が設置された位置からの距離に応じて、信号機T1のサイズに違いが生じる。
ここで、信号機T1のサイズを道路R1の表面から信号機T1の上端までの高さ寸法Hとすれば、信号機T1の設置位置からの距離が長くなれば、車室外用カメラ11において撮像された撮像情報における信号機T1の高さ寸法は小さくなる。当然、信号機T1自体の横幅寸法w及び高さ寸法hは小さくなる。逆に、信号機T1の設置位置からの距離が短くなれば、撮像情報における信号機T1の高さ寸法は大きくなり、信号機T1自体の横幅寸法w及び高さ寸法hは大きくなる。
As shown in Fig. 3, it is assumed that the vehicle V is traveling in a lane L1 of a road R1 toward a road intersection C. At this time, in the image information generated by the exterior camera 11 (see Fig. 1) of the image information storage system 100 mounted on the vehicle V, the size of the traffic light T1 varies depending on the distance from the position where the traffic light T1 is installed.
If the size of traffic light T1 is defined as the height H from the surface of road R1 to the top end of traffic light T1, then as the distance from the installation position of traffic light T1 increases, the height of traffic light T1 in the image information captured by exterior camera 11 decreases. Naturally, the width w and height h of traffic light T1 itself decrease. Conversely, as the distance from the installation position of traffic light T1 decreases, the height of traffic light T1 in the image information increases, and the width w and height h of traffic light T1 itself increase.

図1に示される撮像情報解析部41により画像解析がなされた撮像情報に基づいて、信号機検知部42による「信号機」の存在の認識を開始する距離が、本実施例では、信号機T1が設置された位置から「所定の範囲L」とされる。「所定の範囲L」とは、ここでは「所定の距離」である。
図3に戻って、所定の範囲Lを超える走行車線L1の位置P1に自車両Vに装着された車室外用カメラ11が位置するとき、信号機T1は信号機T11として撮像される。この信号機T11の高さ寸法H1は小さく、小さな横幅寸法w1及び高さ寸法h1を有する信号機T1の撮像情報が生成される。この信号機T1のサイズでは、信号機検知部42は「信号機T1」の存在を認識しない設定とされている。
一方、所定の範囲Lに一致する走行車線L1の位置P2に自車両Vに装着された車室外用カメラ11が位置するとき、信号機T1は信号機T12として撮像される。この信号機T12の高さ寸法H2が高さ寸法H1に比し所定のサイズまで大きくなる撮像情報が生成される。位置P2においては、大きな横幅寸法w2及び高さ寸法h2を有する信号機T1の撮像情報が生成される。この信号機T12のサイズになった段階において、信号機検知部42は「信号機T1」の存在の認識を開始する。位置P2に比し、更に信号機T1が設置された位置に近づくときにも、同様に、信号機検知部42は「信号機T1」の存在を認識する。
In this embodiment, the distance at which the traffic light detection unit 42 starts to recognize the presence of a "traffic light" based on the image information analyzed by the image information analysis unit 41 shown in Fig. 1 is set to a "predetermined range L" from the position where the traffic light T1 is installed. The "predetermined range L" here means a "predetermined distance."
Returning to Fig. 3, when the exterior camera 11 mounted on the vehicle V is located at a position P1 on the driving lane L1 that exceeds a predetermined range L, the traffic light T1 is captured as a traffic light T11. The height dimension H1 of this traffic light T11 is small, and image information is generated for the traffic light T1 that has a small width dimension w1 and height dimension h1. With the size of this traffic light T1, the traffic light detection unit 42 is set not to recognize the presence of "traffic light T1".
On the other hand, when the exterior camera 11 mounted on the vehicle V is located at position P2 on the travel lane L1 that coincides with the predetermined range L, the traffic light T1 is captured as a traffic light T12. Image information is generated in which the height dimension H2 of this traffic light T12 is larger than the height dimension H1 to a predetermined size. At position P2, image information is generated of a traffic light T1 having a large width dimension w2 and height dimension h2. At the stage where the size of the traffic light T12 is reached, the traffic light detection unit 42 begins to recognize the presence of "traffic light T1". Similarly, when approaching the position where the traffic light T1 is installed further from position P2, the traffic light detection unit 42 recognizes the presence of "traffic light T1".

ここで、日本国内において、一般道路の法定制限速度は例えば時速60 Kmとされている。この法定制限速度を維持して走行すれば、自車両Vは1 秒間に約16.66 mの距離を走行する。図1に示される撮像情報生成部31では、所定フレームレートを例えば1 FPSに設定して撮像情報が生成されている。図3に戻って、位置P2又はその直後の1 FPSにおける撮像情報において、画像解析による「信号機T1」の存在が認識されなかったことを想定して、少なくとも2 FPSにおいて信号機T1が設置された位置に至るまでに「信号機T1」を認識する必要がある。表現を代えると、撮像情報による「信号機T1」の認識の取り溢しを補正するために、所定フレームレートにおいて複数の撮像情報が必要とされる。このため、本実施例では、「所定の範囲L」が30 m~35 mの範囲内に設定され、複数の撮像情報に基づいて「信号機T1」が認識されている。
すなわち、信号機認識部4では、所定の範囲Lに相当する位置P2に到達したときに、信号機T1の高さ寸法Hが高さ寸法H2において撮像される信号機T12を認識し、所定の範囲Lを経た先に信号機T1が設置されていることが認識可能とされている。信号機T1が認識されると、信号機検知部42は共通バス9を通してフレームレート制御部33へ「フレームレート制御信号FCS1」を出力する。
また、信号機認識部4では、所定の範囲Lを超える位置P1に自車両Vが走行しているとき、高さ寸法H1において撮像される信号機T11は認識されず、先に信号機T1が設置されていることが認識されない。
なお、信号機認識部4は、位置P2における信号機T12の横幅寸法w2及び高さ寸法h2の少なくとも一方のサイズに基づいて、「信号機T1」を認識してもよい。
Here, in Japan, the legal speed limit on general roads is, for example, 60 km per hour. If the vehicle V travels at this legal speed limit, it travels a distance of about 16.66 m per second. In the imaging information generating unit 31 shown in FIG. 1, the imaging information is generated by setting the predetermined frame rate to, for example, 1 FPS. Returning to FIG. 3, assuming that the presence of the "traffic light T1" is not recognized by image analysis in the imaging information at position P2 or 1 FPS immediately thereafter, it is necessary to recognize the "traffic light T1" at least at 2 FPS before reaching the position where the traffic light T1 is installed. In other words, multiple pieces of imaging information are required at the predetermined frame rate to correct the oversight of the recognition of the "traffic light T1" by the imaging information. For this reason, in this embodiment, the "predetermined range L" is set to a range of 30 m to 35 m, and the "traffic light T1" is recognized based on multiple pieces of imaging information.
That is, when the traffic light recognition unit 4 reaches a position P2 corresponding to the predetermined range L, it recognizes the traffic light T12, which is imaged at a height dimension H2 of the traffic light T1, and is capable of recognizing that the traffic light T1 is installed beyond the predetermined range L. When the traffic light T1 is recognized, the traffic light detection unit 42 outputs a "frame rate control signal FCS1" to the frame rate control unit 33 via the common bus 9.
In addition, when the vehicle V is traveling at a position P1 that exceeds the specified range L, the traffic light recognition unit 4 does not recognize the traffic light T11 that is imaged at the height dimension H1, and does not recognize that a traffic light T1 is installed earlier.
In addition, the traffic light recognition unit 4 may recognize the "traffic light T1" based on at least one of the width dimension w2 and the height dimension h2 of the traffic light T12 at the position P2.

(4)マップアプリケーション部5の構成
図1に戻って、マップアプリケーション部5は、位置情報取得部51と、マップマッチング処理部52と、信号機接近判定部53とを含んで構成されている。
位置情報取得部51は、全地球測位システム(GPS: Global Positioning System)を用いる衛星航法に基づいて、複数の衛星55からの信号を受信して自車両V(正確には撮像情報記憶装置1)の位置情報を取得する。
マップマッチング処理部52は、位置情報取得部51により取得された自車両Vの位置情報のずれを地図情報に基づいて補正する。地図情報は、図2に示される信号機T1~T8が設置された位置の位置情報を備えている。この地図情報は、図1に示される第2記憶部8の地図情報記憶部82に格納されている。
信号機接近判定部53は、自車両Vの位置情報と信号機の位置情報とに基づいて、図2又は図3に示されるように、信号機T1が設置された位置から所定の範囲Lに、又は所定の範囲L内に自車両Vが存在するか否かを判定する。「所定の範囲L」とは、ここでは信号機認識部4における「所定の範囲L」と同一の範囲(閾値)とされ、この閾値は信号機接近判定部53に予め記憶させている。信号機接近判定部53は、自車両Vが所定の範囲L内に存在すると判定すると、共通バス9を通してフレームレート制御部33へ「フレームレート制御信号FCS2」を出力する。
(4) Configuration of Map Application Unit 5 Returning to FIG. 1, the map application unit 5 includes a location information acquisition unit 51, a map matching processing unit 52, and a traffic light approach determination unit 53.
The position information acquisition unit 51 receives signals from multiple satellites 55 based on satellite navigation using the Global Positioning System (GPS) to acquire position information of the vehicle V (more precisely, the imaging information storage device 1).
The map matching processing unit 52 corrects the deviation of the position information of the vehicle V acquired by the position information acquisition unit 51 based on the map information. The map information includes the position information of the positions where the traffic lights T1 to T8 shown in Fig. 2 are installed. This map information is stored in the map information storage unit 82 of the second storage unit 8 shown in Fig. 1.
The traffic light approach determination unit 53 determines whether or not the host vehicle V is present within a predetermined range L from the position where the traffic light T1 is installed, as shown in Fig. 2 or 3, based on the position information of the host vehicle V and the position information of the traffic light. The "predetermined range L" here is the same range (threshold value) as the "predetermined range L" in the traffic light recognition unit 4, and this threshold value is stored in advance in the traffic light approach determination unit 53. When the traffic light approach determination unit 53 determines that the host vehicle V is present within the predetermined range L, it outputs a "frame rate control signal FCS2" to the frame rate control unit 33 via the common bus 9.

なお、位置情報取得部51は、自車両Vに装着された図示省略の各種センサにより、車速、方位、加速度等の情報を取得し、これらの情報から自車両Vの位置情報を算出する自律航法による位置情報を取得してもよい。
また、地図情報は、図示省略の通信機器を介してインターネット経由により外部サーバから取得してもよい。
In addition, the position information acquisition unit 51 may acquire information such as vehicle speed, direction, acceleration, etc. from various sensors (not shown) attached to the vehicle V, and acquire position information using autonomous navigation to calculate the position information of the vehicle V from this information.
The map information may also be acquired from an external server via the Internet through a communication device (not shown).

(5)中央演算処理ユニット6、第1記憶部7及び第2記憶部8の構成
図1に示されるように、中央演算処理ユニット(CPU)6は、共通バス9に接続され、共通バス9を介して撮像情報記憶装置1のドライブレコーダ部3、信号機認識部4、マップアプリケーション部5等の各構成要素の動作を制御する。
第1記憶部7は、例えば読出し専用記憶回路(例えば、ROM: Read Only Memory)及び書込み読出し記憶回路(例えば、RAM: Random Access Memory)を含んで構成されている。第1記憶部7は共通バス9に接続されている。第1記憶部7には、撮像情報記憶装置1の動作制御に必要なプログラムが格納され、又、中央演算処理ユニット6において実行中の情報が一時的に格納される。
第2記憶部8は、撮像情報記憶部81と、地図情報記憶部82とを含んで構成され、共通バス9に接続されている。撮像情報記憶部81は、ドライブレコーダ部3の記録部32から出力される撮像情報を格納し、保存する。地図情報記憶部82には、マップアプリケーション部5のマップマッチング処理部52へ出力する、信号機が設置された位置情報を有する地図情報が格納されている。第2記憶部8には、例えば不揮発性記憶装置、ハードディスク等、大記憶容量を有する記憶装置が使用されている。
(5) Configuration of the central processing unit 6, the first memory unit 7, and the second memory unit 8 As shown in FIG. 1, the central processing unit (CPU) 6 is connected to a common bus 9, and controls the operation of each component of the imaging information storage device 1, such as the drive recorder unit 3, the traffic light recognition unit 4, the map application unit 5, etc., via the common bus 9.
The first storage unit 7 includes, for example, a read only storage circuit (e.g., ROM: Read Only Memory) and a write and read storage circuit (e.g., RAM: Random Access Memory). The first storage unit 7 is connected to a common bus 9. The first storage unit 7 stores programs necessary for controlling the operation of the imaging information storage device 1, and also temporarily stores information being executed by the central processing unit 6.
The second storage unit 8 includes an imaging information storage unit 81 and a map information storage unit 82, and is connected to the common bus 9. The imaging information storage unit 81 stores and preserves imaging information output from the recording unit 32 of the drive recorder unit 3. The map information storage unit 82 stores map information having position information on where traffic signals are installed, which is output to the map matching processing unit 52 of the map application unit 5. The second storage unit 8 uses a storage device having a large storage capacity, such as a non-volatile storage device or a hard disk.

(6)フレームレート制御部33の構成
図1に示されるように、撮像情報記憶装置1はドライブレコーダ部3の一部の構成要素としてフレームレート制御部33を備えている。フレームレート制御部33は共通バス9に接続されている。
フレームレート制御部33は、マップアプリケーション部5の信号機接近判定部53から出力されるフレームレート制御信号FCS2に基づいて、動作を開始する。フレームレート制御部33では、信号機の位置情報を有する地図情報と自車両V(正確には撮像情報記憶装置1)の位置情報とに基づいて、図2に示されるように、信号機T1が設置された位置から所定の範囲L内に自車両Vが存在するか否かが判定される。地図情報には、地図情報記憶部82からマップマッチング処理部52に出力された地図情報が使用される。また、自車両Vの位置情報には、位置情報取得部51において取得された位置情報のずれをマップマッチング処理部52において補正した位置情報が使用される。
そして、フレームレート制御部33では、所定の範囲L内に自車両Vが存在すると判定されたとき、撮像情報生成部31を制御して所定フレームレートに比し高い高フレームレートにおいて撮像情報が生成される。高フレームレートは例えば15.5 FPSに設定されている。このフレームレートに設定された撮像情報はLED方式を採用する信号機の滅灯タイミングに同期しないので、信号機が点灯状態にある撮像情報を生成することができる。
1, the imaging information storage device 1 includes a frame rate control unit 33 as a part of the drive recorder unit 3. The frame rate control unit 33 is connected to the common bus 9.
The frame rate control unit 33 starts operation based on a frame rate control signal FCS2 output from the traffic light approach determination unit 53 of the map application unit 5. Based on map information having position information of traffic lights and position information of the vehicle V (more precisely, the image capture information storage device 1), the frame rate control unit 33 determines whether the vehicle V is present within a predetermined range L from the position where the traffic light T1 is installed, as shown in Fig. 2. The map information used is map information output from the map information storage unit 82 to the map matching processing unit 52. The position information used for the vehicle V is position information obtained by correcting the deviation of the position information acquired by the position information acquisition unit 51 in the map matching processing unit 52.
When it is determined that the vehicle V is present within the predetermined range L, the frame rate control unit 33 controls the imaging information generating unit 31 to generate imaging information at a high frame rate that is higher than the predetermined frame rate. The high frame rate is set to, for example, 15.5 FPS. Since the imaging information set to this frame rate is not synchronized with the timing of turning off a traffic light that employs an LED system, imaging information can be generated when the traffic light is turned on.

さらに、フレームレート制御部33は、図1に示される信号機認識部4の信号機検知部42から出力されるフレームレート制御信号FCS1に基づいても、動作を開始する。このとき、フレームレート制御部33では、図3に示されるように、信号機認識部4により信号機T1(信号機T12)が認識されたときに、撮像情報生成部31を制御して高フレームレートにおいて撮像情報が生成される。ここでの高フレームレートは、フレームレート制御信号FCS2に基づいて制御される高フレームレートと同一に設定されている。 Furthermore, the frame rate control unit 33 also starts operating based on the frame rate control signal FCS1 output from the traffic light detection unit 42 of the traffic light recognition unit 4 shown in Figure 1. At this time, as shown in Figure 3, when traffic light T1 (traffic light T12) is recognized by the traffic light recognition unit 4, the frame rate control unit 33 controls the imaging information generation unit 31 to generate imaging information at a high frame rate. The high frame rate here is set to be the same as the high frame rate controlled based on the frame rate control signal FCS2.

フレームレート制御部33は、車室外用カメラ11を用いて撮像された室外撮像情報を高フレームレートにおいて生成するが、本実施例では車室内用カメラ12を用いて撮像された室内撮像情報も高フレームレートにおいて生成される。高フレームレートにおいて生成された室内撮像情報は室外撮像情報と同期されている。
また、フレームレート制御部33では、信号機検知部42から出力されるフレームレート制御信号FCS1、信号機接近判定部53から出力されるフレームレート制御信号FCS2のいずれか一方が入力されたタイミングにおいて動作が開始される設定とされている。動作が開始されると、いずれか他方の入力はキャンセルされる。
The frame rate control unit 33 generates the exterior image information captured by the exterior camera 11 at a high frame rate, and in this embodiment, the interior image information captured by the interior camera 12 is also generated at a high frame rate. The interior image information generated at the high frame rate is synchronized with the exterior image information.
Furthermore, the frame rate control unit 33 is set to start operating at the timing when either the frame rate control signal FCS1 output from the traffic light detection unit 42 or the frame rate control signal FCS2 output from the traffic light approach determination unit 53 is input. When the operation is started, the input of the other one is canceled.

(撮像情報記憶方法及びプログラム)
図1~図3を参照しつつ、図4を用いて、撮像情報記憶装置1を用いた撮像情報記憶方法を説明すると共に、併せて撮像情報記憶方法を実行するためのプログラムについて説明する。
(Method and program for storing image information)
1 to 3, an imaging information storage method using the imaging information storage device 1 will be described using FIG. 4, and a program for executing the imaging information storage method will also be described.

まず、撮像情報記憶システム100が起動される(ステップS1)。撮像情報記憶システム100が起動されると、撮像装置10の車室外用カメラ11、車室内用カメラ12のそれぞれが起動される。
車室外用カメラ11では自車両Vの車両前方側が撮像され、この撮像情報(室外撮像情報)は撮像情報記憶装置1においてインターフェイス部2、共通バス9のそれぞれを通してドライブレコーダ部3へ伝送される。一方、車室内用カメラ12では自車両Vの車室内が撮像され、この撮像情報(室内撮像情報)は同様にドライブレコーダ部3へ伝送される。
First, the imaging information storage system 100 is started (step S1). When the imaging information storage system 100 is started, the exterior camera 11 and the interior camera 12 of the imaging device 10 are each started.
The exterior camera 11 captures an image of the front side of the vehicle V, and this image information (exterior image information) is transmitted to the drive recorder unit 3 through the interface unit 2 and the common bus 9 in the image information storage device 1. On the other hand, the interior camera 12 captures an image of the interior of the vehicle V, and this image information (interior image information) is similarly transmitted to the drive recorder unit 3.

ドライブレコーダ部3の撮像情報生成部31では、伝送された撮像情報が所定フレームレートにおいて生成される。この所定フレームレートにおいて生成された撮像情報は記録部32を経て第2記憶部8へ伝送され、撮像情報は第2記憶部8の撮像情報記憶部81に格納され、保存される。 The imaging information generating unit 31 of the drive recorder unit 3 generates the transmitted imaging information at a predetermined frame rate. The imaging information generated at this predetermined frame rate is transmitted to the second storage unit 8 via the recording unit 32, and the imaging information is stored and saved in the imaging information storage unit 81 of the second storage unit 8.

信号機認識部4では、撮像装置10から伝送された撮像情報が取得される(ステップS2)。ここで取得される撮像情報は、車室外用カメラ11を用いて撮像された室外撮像情報である。取得した撮像情報は撮像情報解析部41において画像解析により解析される(ステップS3)。解析された撮像情報は信号機検知部42に伝送され、信号機検知部42では、自車両Vの車両前方に信号機T1が存在するか否かを認識する(ステップS4)。 The traffic light recognition unit 4 acquires the imaging information transmitted from the imaging device 10 (step S2). The imaging information acquired here is exterior imaging information captured using the exterior camera 11. The acquired imaging information is analyzed by image analysis in the imaging information analysis unit 41 (step S3). The analyzed imaging information is transmitted to the traffic light detection unit 42, which recognizes whether or not a traffic light T1 is present ahead of the host vehicle V (step S4).

図3に示されるように、道路R1の走行車線L1を走行する自車両Vが、信号機T1が設置された位置から所定の範囲Lを超える位置P1にあるとき、高さ寸法H1を有する信号機T11が撮像情報に存在する。信号機検知部42では、予め設定されたサイズに達していないので、信号機T11は信号機T1として認識しない。信号機T1が認識されないとき、ステップS2へ戻る。
また、信号機検知部42では、自車両Vが、所定の範囲Lである位置P2に到達したとき、予め設定されたサイズに相当する高さ寸法H2を有する信号機T12が、車両前方側に設置されている信号機T1であると認識する。信号機T1が認識されると、信号機検知部42はフレームレート制御部33へフレームレート制御信号FCS1を出力する。
3, when the vehicle V traveling on the lane L1 of the road R1 is at a position P1 that is beyond a predetermined range L from the position where the traffic light T1 is installed, a traffic light T11 having a height dimension H1 is present in the image information. The traffic light detection unit 42 does not recognize the traffic light T11 as the traffic light T1 because it has not reached the preset size. When the traffic light T1 is not recognized, the process returns to step S2.
Furthermore, when the vehicle V reaches position P2 within the predetermined range L, the traffic light detection unit 42 recognizes that a traffic light T12 having a height dimension H2 corresponding to a preset size is the traffic light T1 installed on the front side of the vehicle. When the traffic light T1 is recognized, the traffic light detection unit 42 outputs a frame rate control signal FCS1 to the frame rate control unit 33.

一方、マップアプリケーション部5では、位置情報取得部51において、衛星航法に基づいて、自車両Vの位置情報が取得される(ステップS5)。位置情報が取得されないときには、再度、位置情報が取得される。位置情報取得部51において取得された位置情報はマップマッチング処理部52に伝送される。
マップマッチング処理部52は、第2記憶部8の地図情報記憶部82から信号機が設置された位置情報を有する地図情報を取得する(ステップS6)。マップマッチング処理部52では、マップマッチング処理が実行され、取得した自車両Vの位置情報のずれが地図情報に基づいて補正される(ステップS7)。
On the other hand, in the map application unit 5, the position information acquisition unit 51 acquires the position information of the vehicle V based on the satellite navigation (step S5). When the position information is not acquired, the position information is acquired again. The position information acquired by the position information acquisition unit 51 is transmitted to the map matching processing unit 52.
The map matching processor 52 acquires map information having location information of traffic signals from the map information memory 82 of the second memory 8 (step S6). The map matching processor 52 executes a map matching process, and corrects the deviation of the acquired location information of the vehicle V based on the map information (step S7).

信号機接近判定部53では、補正された自車両Vの位置情報と、地図情報の信号機が設置された位置情報とに基づいて、図2に示されるように、信号機T1が設置された位置から所定の範囲L内に自車両Vが存在するか否かが判定される(ステップS8)。自車両Vが所定の範囲Lを超えて道路R1の走行車線L1を走行しているとき、ステップS5に戻る。
信号機接近判定部53において、信号機T1が設置された位置から所定の範囲L内に自車両Vが存在すると判定されると、信号機接近判定部53はフレームレート制御部33へフレームレート制御信号FCS2を出力する。
Based on the corrected position information of the vehicle V and the position information of the traffic light in the map information, the traffic light approach determination unit 53 determines whether the vehicle V is within a predetermined range L from the position where the traffic light T1 is installed, as shown in Fig. 2 (step S8). When the vehicle V has exceeded the predetermined range L and is traveling in the driving lane L1 of the road R1, the process returns to step S5.
When the traffic light approach determination unit 53 determines that the vehicle V is present within a predetermined range L from the position where the traffic light T1 is installed, the traffic light approach determination unit 53 outputs a frame rate control signal FCS2 to the frame rate control unit 33.

信号機検知部42から出力されたフレームレート制御信号FCS1、信号機接近判定部53から出力されたフレームレート制御信号FCS2のいずれか一方がフレームレート制御部33に入力されたか否かが判定される(ステップS9)。入力されていないと判定されたとき、ステップS2及びステップS5に戻る。
入力されたと判定されたとき、フレームレート制御部33は撮像情報生成部31のフレームレートを変化させ、撮像情報生成部31では高フレームレートにおいて撮像情報が生成される(ステップS10)。この生成された撮像情報は、第2記憶部8の撮像情報記憶部81に格納され、保存される(ステップS11)。
It is determined whether or not either the frame rate control signal FCS1 output from the traffic light detection unit 42 or the frame rate control signal FCS2 output from the traffic light approach determination unit 53 has been input to the frame rate control unit 33 (step S9). If it is determined that the signal has not been input, the process returns to steps S2 and S5.
When it is determined that the input has been received, the frame rate control unit 33 changes the frame rate of the imaging information generating unit 31, and the imaging information generating unit 31 generates imaging information at the high frame rate (step S10). The generated imaging information is stored and saved in the imaging information storage unit 81 of the second storage unit 8 (step S11).

次に、撮像情報記憶システム100の動作を終了させるか否かが判定される(ステップS12)。動作を終了させないと判定されたとき、ステップS2及びステップS5に戻る。動作を終了させると判定されたとき、撮像情報記憶システム100の動作は終了し、本実施例に係る撮像情報記憶方法並びにその方法を実行するためのプログラムは終了する。 Next, it is determined whether or not to terminate the operation of the imaging information storage system 100 (step S12). If it is determined not to terminate the operation, the process returns to steps S2 and S5. If it is determined to terminate the operation, the operation of the imaging information storage system 100 is terminated, and the imaging information storage method according to this embodiment and the program for executing the method are terminated.

(作用効果)
本実施例に係る撮像情報記憶装置1は、図1に示されるように、撮像情報生成部31と、第2記憶部8(記憶部)と、位置情報取得部51と、を備える。
撮像情報生成部31は撮像された撮像情報を所定フレームレートにおいて生成する。第2記憶部8は撮像情報生成部31により生成された撮像情報を記憶する。位置情報取得部51は位置情報を取得する。
ここで、撮像情報記憶装置1は、更にフレームレート制御部33を備える。フレームレート制御部33は、信号機の位置情報を有する地図情報と自車両Vの位置情報とに基づいて、信号機T1が設置された位置から所定の範囲L内に撮像情報記憶装置1が存在するか否かを判定する(図2参照)。そして、フレームレート制御部33は、所定の範囲L内に撮像情報記憶装置1が存在すると判定されたときに、所定フレームレートに比し高い高フレームレートにおいて、撮像情報を生成する。
このため、信号機T1が設置された位置から所定の範囲Lを超えると、所定フレームレートにおいて撮像情報が生成され、かつ、この撮像情報が記憶されるので、撮像情報の記憶容量を適正に抑制することができる。一方、信号機T1が設置された位置から所定の範囲L内では、所定フレームレートに比し高い高フレームレートにおいて撮像情報が生成され、かつ、この撮像情報が記憶されるので、信号機T1が設置された位置から所定の範囲L内での撮像情報を増やすことができる。
一般的に、道路交差点Cでの事故発生率は道路交差点C以外での事故発生率に比し多いので、道路交差点Cへ自車両Vが進入するときの撮像情報量を増やすことができる。従って、撮像情報の記憶容量を適正に抑制しつつ、信号機T1が設置された位置から所定の範囲L内において撮像情報量を増やすことができる撮像情報記憶装置1を提供することができる。
(Action and Effect)
As shown in FIG. 1, the imaging information storage device 1 according to this embodiment includes an imaging information generating section 31, a second storage section 8 (storage section), and a position information acquiring section 51.
The imaging information generating unit 31 generates imaging information of captured images at a predetermined frame rate. The second storage unit 8 stores the imaging information generated by the imaging information generating unit 31. The position information acquiring unit 51 acquires position information.
Here, the imaging information storage device 1 further includes a frame rate control unit 33. The frame rate control unit 33 determines whether or not the imaging information storage device 1 is located within a predetermined range L from the position where the traffic light T1 is installed, based on map information having position information of the traffic light and position information of the vehicle V (see FIG. 2). Then, when it is determined that the imaging information storage device 1 is located within the predetermined range L, the frame rate control unit 33 generates imaging information at a frame rate higher than the predetermined frame rate.
Therefore, when the traffic light T1 is beyond the predetermined range L from the position where the traffic light T1 is installed, imaging information is generated at a predetermined frame rate and this imaging information is stored, so that the storage capacity of the imaging information can be appropriately suppressed. On the other hand, within the predetermined range L from the position where the traffic light T1 is installed, imaging information is generated at a frame rate higher than the predetermined frame rate and this imaging information is stored, so that the imaging information within the predetermined range L from the position where the traffic light T1 is installed can be increased.
Generally, the accident occurrence rate at road intersections C is higher than the accident occurrence rate at other road intersections C, so it is possible to increase the amount of image information when the vehicle V enters the road intersection C. Therefore, it is possible to provide an image information storage device 1 that can increase the amount of image information within a predetermined range L from the position where the traffic light T1 is installed while appropriately suppressing the storage capacity of the image information.

また、撮像情報記憶装置1は、図1に示されるように、マップマッチング処理部52を備える。マップマッチング処理部52は、位置情報取得部51により取得された位置情報のずれを地図情報に基づいて補正する。
このため、撮像情報記憶装置1において、位置情報と地図情報とを一致させることができるので、信号機が設置された位置の精度、この位置から所定の範囲Lを演算する精度並びに撮像情報記憶装置1の位置精度を向上させることができる。
1, the imaging information storage device 1 further includes a map matching processing section 52. The map matching processing section 52 corrects the deviation of the position information acquired by the position information acquisition section 51 on the basis of map information.
As a result, the location information and map information can be matched in the imaging information storage device 1, thereby improving the accuracy of the location where the traffic light is installed, the accuracy of calculating a specified range L from this location, and the position accuracy of the imaging information storage device 1.

さらに、撮像情報記憶装置1では、図1に示されるように、撮像情報生成部31は、それぞれ撮像された複数種類の撮像情報を所定フレームレートにおいて生成する。第2記憶部8は、撮像情報生成部31により生成された複数種類の撮像情報を記憶する。そして、フレームレート制御部33は、撮像情報記憶装置1が所定の範囲L内に存在とすると判定されたときに、高フレームレートにおいて複数種類の撮像情報を生成する。
このため、複数種類の撮像情報は、信号機T1が設置された位置から所定の範囲L内では同一の高フレームレートにより生成され、所定の範囲Lを超えると同様に同一の所定フレームレートにより生成される。従って、複数種類の撮像情報を同時に再生するときに、再生ずれが生じないので、撮像情報を再生した映像を見るユーザの違和感を軽減することができる。
1, in the imaging information storage device 1, the imaging information generating section 31 generates a plurality of types of imaging information at a predetermined frame rate, each of which is captured. The second storage section 8 stores the plurality of types of imaging information generated by the imaging information generating section 31. Then, when it is determined that the imaging information storage device 1 is present within a predetermined range L, the frame rate control section 33 generates a plurality of types of imaging information at a high frame rate.
Therefore, the multiple types of imaging information are generated at the same high frame rate within a predetermined range L from the position where the traffic light T1 is installed, and are similarly generated at the same predetermined frame rate beyond the predetermined range L. Therefore, when the multiple types of imaging information are played back simultaneously, no playback lag occurs, which reduces the sense of discomfort felt by the user when watching the video of the played back imaging information.

また、撮像情報記憶装置1では、図1に示されるように、撮像情報生成部31が、車両室外が撮像された室外撮像情報と、車両室内が撮像された室内撮像情報とを含む複数種類の撮像情報を生成する。
このため、信号機T1が設置された位置から所定の範囲Lを超える位置P1、所定の範囲Lである位置P2、そして所定の範囲L内の道路交差点Cに至る道路R1において(図2参照)、道路状態、周囲の環境状態等の室外撮像情報と、搭乗者の表情や安全確認動作、健康状態等の室内撮像情報とを同時に記憶させることができる。
In addition, in the imaging information storage device 1, as shown in Figure 1, the imaging information generation unit 31 generates multiple types of imaging information including exterior imaging information in which the exterior of the vehicle is imaged, and interior imaging information in which the interior of the vehicle is imaged.
Therefore, at a position P1 beyond the predetermined range L from the position where the traffic light T1 is installed, to a position P2 which is within the predetermined range L, and then to a road R1 leading to a road intersection C within the predetermined range L (see Figure 2), outdoor image information such as road conditions and surrounding environmental conditions, and indoor image information such as the facial expressions, safety check actions, and health condition of the occupants can be stored simultaneously.

さらに、撮像情報記憶装置1は、図1に示されるように、更に信号機認識部4を備える。信号機認識部4は、撮像情報に基づく画像解析により信号機Tが存在するか否かを認識する(図3参照)。そして、フレームレート制御部33は、信号機T1が所定の範囲L内に存在すると判定されたとき、又は信号機認識部4により信号機T1が認識されたとき、高フレームレートにおいて撮像情報を生成する。
このため、フレームレート制御部33では、信号機Tが所定の範囲L内に存在するか否かの判定又は信号機T1の認識のいずれか一方を用いて信号機T1の存在を確認することができ、いずれか他方を信号機T1の存在の確認の補助として使用することができる。例えば、信号機の存在しない道路や側道、駐車場から交差点に進入する場合など、仮に信号機T1の認識ができなかったとき、信号機T1が所定の範囲L内に存在するか否かの判定により信号機T1の存在を確認し、高フレームレートにおいて撮像情報を生成することができる。これにより、撮像情報記憶装置1では、信号機T1の存在の判定精度を向上させることができる。
1, the imaging information storage device 1 further includes a traffic light recognition unit 4. The traffic light recognition unit 4 recognizes whether or not a traffic light T is present by image analysis based on the imaging information (see FIG. 3). Then, when it is determined that the traffic light T1 is present within a predetermined range L, or when the traffic light T1 is recognized by the traffic light recognition unit 4, the frame rate control unit 33 generates imaging information at a high frame rate.
Therefore, the frame rate control unit 33 can confirm the presence of the traffic light T1 by either judging whether the traffic light T is within the predetermined range L or recognizing the traffic light T1, and can use the other as an aid in confirming the presence of the traffic light T1. For example, when entering an intersection from a road, side road, or parking lot where no traffic light exists, if it is not possible to recognize the traffic light T1, it is possible to confirm the presence of the traffic light T1 by judging whether the traffic light T1 is within the predetermined range L and generate imaging information at a high frame rate. This allows the imaging information storage device 1 to improve the accuracy of judging the presence of the traffic light T1.

また、撮像情報記憶方法では、所定フレームレートにおいて撮像された撮像情報が撮像情報生成部31により生成され、撮像情報が第2記憶部8に記憶される(図1参照)。
一方、図1及び図4に示されるように、位置情報取得部51により位置情報が取得される(ステップS5)。そして、信号機T1の位置情報を有する地図情報と自車両V(正確には撮像情報記憶装置1)の位置情報とに基づいて、信号機T1が設置された位置から所定の範囲L内に撮像情報記憶装置1が存在するか否かが判定される(ステップS8)。所定の範囲L内に撮像情報記憶装置1が存在すると判定されたときに、所定フレームレートに比し高い高フレームレートにおいて撮像情報が生成される(ステップS10)。
このため、信号機T1が設置された位置から所定の範囲Lを超えると、所定フレームレートにおいて撮像情報が生成され、かつ、この撮像情報が記憶されるので、撮像情報の記憶容量を適正に抑制することができる。一方、信号機T1が設置された位置から所定の範囲L内では、所定フレームレートに比し高い高フレームレートにおいて撮像情報が生成され、かつ、この撮像情報が記憶されるので、信号機T1が設置された位置から所定の範囲L内での撮像情報を増やすことができる。従って、撮像情報の記憶容量を適正に抑制しつつ、信号機T1が設置された位置から所定の範囲L内において撮像情報量を増やすことができる撮像情報記憶方法を提供することができる。
In the imaging information storage method, imaging information captured at a predetermined frame rate is generated by the imaging information generating section 31, and the imaging information is stored in the second storage section 8 (see FIG. 1).
1 and 4, the position information is acquired by the position information acquisition unit 51 (step S5). Then, based on the map information having the position information of the traffic light T1 and the position information of the vehicle V (more precisely, the image data storage device 1), it is determined whether the image data storage device 1 is located within a predetermined range L from the position where the traffic light T1 is installed (step S8). When it is determined that the image data storage device 1 is located within the predetermined range L, imaging information is generated at a frame rate higher than the predetermined frame rate (step S10).
Therefore, when the predetermined range L from the position where the traffic light T1 is installed is exceeded, imaging information is generated at a predetermined frame rate and this imaging information is stored, so that the storage capacity of the imaging information can be appropriately suppressed. On the other hand, within the predetermined range L from the position where the traffic light T1 is installed, imaging information is generated at a high frame rate higher than the predetermined frame rate and this imaging information is stored, so that the imaging information within the predetermined range L from the position where the traffic light T1 is installed can be increased. Therefore, it is possible to provide an imaging information storage method that can increase the amount of imaging information within the predetermined range L from the position where the traffic light T1 is installed while appropriately suppressing the storage capacity of the imaging information.

さらに、撮像情報記憶方法を実行するためのプログラムでは、図1及び図4に示されるように、撮像情報生成部31が撮像された撮像情報を所定フレームレートにおいて生成し、第2記憶部8が撮像情報生成部31により生成された撮像情報を記憶する。
一方、位置情報取得部51が位置情報を取得する(ステップS5)。そして、フレームレート制御部33は、信号機T1の位置情報を有する地図情報と自車両V(正確には撮像情報記憶装置1)の位置情報とに基づいて、図2に示されるように、信号機T1が設置された位置から所定の範囲L内に撮像情報記憶装置1が存在するか否かを判定する(ステップS8)。フレームレート制御部33では、所定の範囲L内に撮像情報記憶装置1が存在すると判定されたときに、所定フレームレートに比し高い高フレームレートにおいて撮像情報が生成される(ステップS10)。
このため、信号機T1が設置された位置から所定の範囲Lを超えると、所定フレームレートにおいて撮像情報が生成され、かつ、この撮像情報が記憶されるので、撮像情報の記憶容量を適正に抑制することができる。一方、信号機T1が設置された位置から所定の範囲L内では、所定フレームレートに比し高い高フレームレートにおいて撮像情報が生成され、かつ、この撮像情報が記憶されるので、信号機T1が設置された位置から所定の範囲L内での撮像情報を増やすことができる。従って、撮像情報の記憶容量を適正に抑制しつつ、信号機T1が設置された位置から所定の範囲L内において撮像情報量を増やすことができるプログラムを提供することができる。
Furthermore, in a program for executing the imaging information storage method, as shown in Figures 1 and 4, the imaging information generation unit 31 generates the captured imaging information at a predetermined frame rate, and the second memory unit 8 stores the imaging information generated by the imaging information generation unit 31.
On the other hand, the position information acquisition unit 51 acquires position information (step S5). Then, the frame rate control unit 33 determines whether the image capture information storage device 1 is located within a predetermined range L from the position where the traffic light T1 is installed, as shown in Fig. 2, based on the map information having the position information of the traffic light T1 and the position information of the vehicle V (more precisely, the image capture information storage device 1) (step S8). When it is determined that the image capture information storage device 1 is located within the predetermined range L, the frame rate control unit 33 generates imaging information at a frame rate higher than the predetermined frame rate (step S10).
Therefore, when the predetermined range L from the position where the traffic light T1 is installed is exceeded, imaging information is generated at a predetermined frame rate and this imaging information is stored, so that the storage capacity of the imaging information can be appropriately suppressed. On the other hand, within the predetermined range L from the position where the traffic light T1 is installed, imaging information is generated at a high frame rate higher than the predetermined frame rate and this imaging information is stored, so that the imaging information within the predetermined range L from the position where the traffic light T1 is installed can be increased. Therefore, it is possible to provide a program that can increase the amount of imaging information within the predetermined range L from the position where the traffic light T1 is installed while appropriately suppressing the storage capacity of the imaging information.

(変形例1)
上記実施例に係る撮像情報記憶装置1、撮像情報記憶方法及びプログラムでは、図2に示されるように、道路交差点Cに差し掛かる直前の信号機T1の設置位置から所定の範囲Lが設定されている。これに対して、変形例に係る撮像情報記憶装置1、撮像情報記憶方法及びプログラムでは、道路交差点Cを超えた信号機T2の設置位置から所定の範囲Lが設定されている。この場合、所定の範囲Lは、道路R2の道幅に相当する分、距離を長くすれば、道路交差点Cに進入前から抜けるまで、撮像情報を増やすことができる。
なお、撮像情報記憶装置1、撮像情報記憶方法及びプログラムでは、対象とする信号機は自車両Vの走行に直接関係する信号機とされ、この信号機から所定の範囲L内に自車両が存在するときに、高フレームレートにおいて撮像情報が生成されている。対象とする信号機が自車両Vの走行に直接関係する信号機とされることにより、撮像情報の記憶容量を適正に抑制することができる。
また、撮像情報記憶装置1、撮像情報記憶方法及びプログラムでは、信号機の対象が拡大されてもよい。信号機の対象が拡大されても、撮像情報の記憶容量を訂正に抑制することができる。例えば、自車両Vの走行に直接関係しないが、自車両Vからも視認可能である歩行者専用の信号機が対象とされてもよい。この場合、運転者の管理上において、或いは事故の際に、証拠となる撮像情報を適切に増やすことができる。
(Variation 1)
2, in the image data storage device 1, image data storage method, and program according to the above embodiment, a predetermined range L is set from the installation position of traffic light T1 immediately before approaching road intersection C. In contrast, in the image data storage device 1, image data storage method, and program according to the modified example, a predetermined range L is set from the installation position of traffic light T2 beyond road intersection C. In this case, if the predetermined range L is lengthened by a distance equivalent to the width of road R2, it is possible to increase the amount of image data from before entering road intersection C to before exiting it.
In the image data storage device 1, the image data storage method, and the program, the target traffic light is a traffic light that is directly related to the traveling of the vehicle V, and the image data is generated at a high frame rate when the vehicle V is present within a predetermined range L from the traffic light. By setting the target traffic light as a traffic light that is directly related to the traveling of the vehicle V, the storage capacity of the image data can be appropriately suppressed.
Furthermore, in the image data storage device 1, the image data storage method, and the program, the target of traffic lights may be expanded. Even if the target of traffic lights is expanded, the storage capacity of the image data can be appropriately suppressed. For example, pedestrian-only traffic lights that are not directly related to the driving of the vehicle V but are visible from the vehicle V may be targeted. In this case, the amount of image data that serves as evidence can be appropriately increased for the driver's management or in the event of an accident.

(変形例2)
上記実施例に係る撮像情報記憶装置1、撮像情報記憶方法及びプログラムでは、高フレームレートの撮像情報の生成の継続、生成の終了の制御方法を変更することができる。この制御方法を実行するには、図1に示される撮像情報解析部41において、図4に示される撮像情報を解析する(ステップS3)際のプログラムが変更される。
この制御方法を詳しく説明すると、撮像情報解析部41は、停止位置を画像認識しているとき、高フレームレートにおいて撮像情報を生成させ、停止位置を画像認識できなくなった後、所定の時間が経過するまで、高フレームレートにおいて撮像情報を生成させる。所定の時間の経過後では、所定フレームレートにおいて撮像情報が生成される。所定の時間とは、例えば、横断歩道のみの交差点や片側一車線道路の交差点では10秒に設定され、片側二車線以上の交差点では20秒に設定される。
また、高フレームレートの撮像情報の生成の継続、生成の終了の制御方法には、図1に示される地図情報記憶部82に格納されている地図情報の信号機の位置情報が使用されてもよい。この場合、信号機の位置情報から一定の範囲内では、高フレームレートにおいて撮像情報が生成される。「一定の範囲」は、場所毎に決められていてもよいし、一律に決められていてもよい。若しくは、「一定の範囲」は、地図情報に含まれていてもよいし、撮像情報記憶装置1側において設定される構成としてもよい。
さらに、「一定の範囲」は、地図情報において、リンクやノードに対して定義されていてもよい。この「一定の範囲」とは、一次元の距離情報に限定されるものではなく、信号機が設置された交差点の領域を表す二次元の面(円、矩形等の面)を用いて定義されていてもよい。
また、撮像情報、位置情報等に基づいて、自車両Vの交差点内への進入方向が検知され、予め設定された方向から進入したときに、高フレームレートにおいて撮像情報が生成されてもよい。
さらに、「一定の範囲」は、一時停止位置を中心として、円形状の面として範囲が設定されてもよい。
(Variation 2)
In the imaging information storage device 1, imaging information storage method, and program according to the above embodiment, the control method for continuing and terminating the generation of imaging information at a high frame rate can be changed. To execute this control method, the program for analyzing the imaging information (step S3) shown in Fig. 4 is changed in the imaging information analysis unit 41 shown in Fig. 1.
To explain this control method in detail, the image information analysis unit 41 generates image information at a high frame rate when the stop position is recognized by image, and generates image information at the high frame rate until a predetermined time has elapsed after the stop position cannot be recognized by image. After the predetermined time has elapsed, image information is generated at the predetermined frame rate. The predetermined time is set to, for example, 10 seconds at an intersection with only a pedestrian crossing or an intersection with one lane in each direction, and 20 seconds at an intersection with two or more lanes in each direction.
Further, the method of controlling the continuation and end of generation of imaging information at a high frame rate may use position information of traffic lights in map information stored in the map information storage unit 82 shown in Fig. 1. In this case, imaging information is generated at a high frame rate within a certain range from the position information of the traffic lights. The "certain range" may be determined for each location, or may be determined uniformly. Alternatively, the "certain range" may be included in the map information, or may be configured to be set on the imaging information storage device 1 side.
Furthermore, the "certain range" may be defined for a link or node in map information. This "certain range" is not limited to one-dimensional distance information, but may be defined using a two-dimensional surface (such as a circle or a rectangle) that represents the area of an intersection where a traffic light is installed.
In addition, the direction in which the vehicle V enters the intersection may be detected based on imaging information, position information, etc., and imaging information may be generated at a high frame rate when the vehicle V enters the intersection from a predetermined direction.
Furthermore, the "certain range" may be set as a circular surface centered on the pause position.

(変形例3)
上記実施例に係る撮像情報記憶装置1、撮像情報記憶方法及びプログラムでは、交差点に進入する際に遵守すべき信号機を通過した直後に、高フレームレートにおける撮像情報の生成が終了してもよい。この場合、遵守すべき信号機の信号表示に従った走行をしたか否かの撮像情報を高フレームレートにおいて生成することができ、信号機を通過した直後は所定フレームレートにおいて撮像情報が生成されるので、記憶容量を適正により一層抑制することができる。
(Variation 3)
In the imaging information storage device 1, imaging information storage method, and program according to the above embodiment, the generation of imaging information at the high frame rate may be terminated immediately after passing a traffic light that should be observed when entering an intersection. In this case, imaging information indicating whether or not the vehicle has traveled in accordance with the signal display of the traffic light that should be observed can be generated at a high frame rate, and imaging information is generated at a predetermined frame rate immediately after passing the traffic light, so that the storage capacity can be appropriately further reduced.

[第2実施例]
図5を用いて、第2実施例に係る撮像情報記憶装置1、撮像情報記憶方法及びその方法をコンピュータに実行させるためのプログラムについて説明する。
なお、本実施例において、第1実施例に係る撮像情報記憶装置1の構成要素と同一の構成要素又は実質的に同一の構成要素には同一符号を付し、重複する説明は省略する。撮像情報記憶方法又はプログラムのステップついても、同様である。
[Second embodiment]
The imaging information storage device 1 according to the second embodiment, the imaging information storage method, and a program for causing a computer to execute the method will be described with reference to FIG.
In this embodiment, the same components as or substantially the same components as those of the image pickup information storage device 1 according to the first embodiment are denoted by the same reference numerals, and duplicated explanations are omitted. The same applies to steps of the image pickup information storage method or program.

(撮像情報記憶装置1及び撮像情報記憶システム100の構成)
本実施例に係る撮像情報記憶装置1は、図5に示されるように、ドライブレコーダ部3に、撮像情報処理部34を備えている。ここで、ドライブレコーダ部3の撮像情報生成部31では、所定フレームレートにおいて撮像情報が生成されるが、所定フレームレートは例えば15.5 FPSの高フレームレートに設定されている。撮像情報処理部34では、撮像情報生成部31において生成された撮像情報が、所定フレームレートに比し低い低フレームレートに変換される。低フレームレートは例えば1 FPSに設定されている。この変換された撮像情報は第2記憶部8の撮像情報記憶部81に格納され、保存される。
(Configuration of the imaging information storage device 1 and imaging information storage system 100)
As shown in Fig. 5, the imaging information storage device 1 according to this embodiment includes an imaging information processing section 34 in the drive recorder section 3. Here, the imaging information generating section 31 of the drive recorder section 3 generates imaging information at a predetermined frame rate, which is set to a high frame rate of, for example, 15.5 FPS. The imaging information processing section 34 converts the imaging information generated in the imaging information generating section 31 into a low frame rate that is lower than the predetermined frame rate. The low frame rate is set to, for example, 1 FPS. This converted imaging information is stored and saved in the imaging information storage section 81 of the second storage section 8.

フレームレート制御部33では、信号機検知部42からフレームレート制御信号FCS1が出力されると、又は信号機接近判定部53からフレームレート制御信号FCS2が出力されると、所定フレームレートを維持した状態において撮像情報が生成される。この撮像情報は、第2記憶部8に格納され、保存される。 When the frame rate control signal FCS1 is output from the traffic light detection unit 42, or when the frame rate control signal FCS2 is output from the traffic light approach determination unit 53, the frame rate control unit 33 generates imaging information while maintaining a predetermined frame rate. This imaging information is stored and saved in the second storage unit 8.

(撮像情報記憶方法及びプログラム)
本実施例に係る撮像情報記憶方法並びにこの方法を実行するためのプログラムは、フレームレートの設定が逆になるだけで、前述の図4を用いて説明した第1実施例に係る撮像情報記憶方法並びにプログラムと実質的に同一であるので、説明を省略する。
(Method and program for storing image information)
The image capture information storage method and the program for executing this method according to this embodiment are essentially the same as the image capture information storage method and program according to the first embodiment described above using FIG. 4, except that the frame rate is set inversely, so a description thereof will be omitted.

(作用効果)
本実施例に係る撮像情報記憶装置1、撮像情報記憶方法並びにこの方法を実行するためのプログラムでは、第1実施例に係る撮像情報記憶装置1、撮像情報記憶方法並びにプログラムにより得られる作用効果と同様の作用効果を得ることができる。
(Action and Effect)
The imaging information storage device 1, imaging information storage method, and program for executing this method of the present embodiment can obtain the same effects as those obtained by the imaging information storage device 1, imaging information storage method, and program of the first embodiment.

また、撮像情報記憶装置1は、図5に示されるように、撮像情報生成部31と、撮像情報処理部34と、第2記憶部8と、位置情報取得部51と、を備える。
撮像情報生成部31は、撮像された撮像情報を所定フレームレートにおいて生成する。ここでの所定フレームレートは高フレームレートである。撮像情報処理部34は、撮像情報生成部31により生成された撮像情報を所定フレームレートに比し低い低フレームレートに変換する。第2記憶部8は撮像情報処理部34により生成された撮像情報を記憶する。位置情報取得部51は位置情報を取得する。
ここで、撮像情報記憶装置1は、更にフレームレート制御部33を備える。フレームレート制御部33は、信号機の位置情報を有する地図情報と自車両V(正確には撮像情報記憶装置1)の位置情報とに基づいて、前述の図2に示される信号機T1が設置された位置から所定の範囲L内に撮像情報記憶装置1が存在するか否かを判定する。そして、フレームレート制御部33は、所定の範囲L内に撮像情報記憶装置1が存在すると判定されたときに、低フレームレートに変換することなく、撮像情報処理部34において所定フレームレートにより撮像情報を生成し、撮像情報を第2記憶部8に記憶させる。
このため、信号機T1が設置された位置から所定の範囲Lを超えると、低フレームレートにおいて撮像情報が生成され、かつ、この撮像情報が記憶されるので、撮像情報の記憶容量を適正に抑制することができる。一方、信号機T1が設置された位置から所定の範囲L内では、低フレームレートに比し高い所定フレームレートにおいて撮像情報が生成され、かつ、この撮像情報が記憶されるので、信号機T1が設置された位置から所定の範囲L内での撮像情報を増やすことができる。従って、撮像情報の記憶容量を適正に抑制しつつ、信号機T1が設置された位置から所定の範囲L内において撮像情報量を増やすことができる撮像情報記憶装置1を提供することができる。
As shown in FIG. 5, the imaging information storage device 1 further includes an imaging information generating section 31, an imaging information processing section 34, a second storage section 8, and a position information acquiring section 51. The imaging information generating section 31 generates imaging information based on the imaging information.
The imaging information generating unit 31 generates captured imaging information at a predetermined frame rate. The predetermined frame rate here is a high frame rate. The imaging information processing unit 34 converts the imaging information generated by the imaging information generating unit 31 into a low frame rate that is lower than the predetermined frame rate. The second storage unit 8 stores the imaging information generated by the imaging information processing unit 34. The position information acquiring unit 51 acquires position information.
Here, the imaging information storage device 1 further includes a frame rate control unit 33. The frame rate control unit 33 determines whether the imaging information storage device 1 is present within a predetermined range L from the position where the traffic light T1 shown in Fig. 2 is installed based on map information having position information of traffic lights and position information of the vehicle V (more precisely, the imaging information storage device 1). Then, when it is determined that the imaging information storage device 1 is present within the predetermined range L, the frame rate control unit 33 generates imaging information at the predetermined frame rate in the imaging information processing unit 34 without converting to a low frame rate, and stores the imaging information in the second storage unit 8.
Therefore, when the predetermined range L from the position where the traffic light T1 is installed is exceeded, imaging information is generated at a low frame rate and this imaging information is stored, so that the storage capacity of the imaging information can be appropriately suppressed. On the other hand, within the predetermined range L from the position where the traffic light T1 is installed, imaging information is generated at a predetermined frame rate higher than the low frame rate and this imaging information is stored, so that the imaging information within the predetermined range L from the position where the traffic light T1 is installed can be increased. Therefore, it is possible to provide an imaging information storage device 1 that can increase the amount of imaging information within the predetermined range L from the position where the traffic light T1 is installed while appropriately suppressing the storage capacity of the imaging information.

さらに、撮像情報記憶装置1では、撮像情報生成部31は、撮像情報処理部34において撮像情報が低フレームレートに変換されるまで、低フレームレートに比し高い所定フレームレートにおいて撮像情報が生成される。このため、撮像情報記憶装置1では、低フレームレートに変換される前の、撮像情報量が多い撮像情報を利用することができる。例えば、撮像情報生成部31から撮像情報処理部34へ至る伝送経路において、数秒から数十秒程度、シリアルに一時的に撮像情報を保存する回路が配設されれば、経時的に遡って高フレームレートの撮像情報を得ることができる。 Furthermore, in the imaging information storage device 1, the imaging information generation unit 31 generates imaging information at a predetermined frame rate higher than the low frame rate until the imaging information is converted to a low frame rate in the imaging information processing unit 34. Therefore, the imaging information storage device 1 can use imaging information with a large amount of imaging information before it is converted to a low frame rate. For example, if a circuit is provided in the transmission path from the imaging information generation unit 31 to the imaging information processing unit 34 to temporarily store imaging information serially for several to several tens of seconds, it is possible to go back in time and obtain imaging information at a high frame rate.

[その他の実施例]
本発明は、上記実施例に限定されるものではなく、その要旨を逸脱しない範囲において、種々変形可能である。
例えば、上記実施例では、ドライブレコーダ部3、信号機認識部4、マップアプリケーション部5、第2記憶部8等の各構成要素を内蔵回路として撮像情報記憶装置1が構築されている。本発明では、少なくとも1つの構成要素が外付け装置として組み付けられ、撮像情報記憶装置1が構築されてもよい。
[Other Examples]
The present invention is not limited to the above-described embodiment, and various modifications are possible without departing from the spirit and scope of the present invention.
For example, in the above embodiment, the imaging information storage device 1 is constructed with each of the components, such as the drive recorder unit 3, the traffic light recognition unit 4, the map application unit 5, and the second storage unit 8, as built-in circuits. In the present invention, the imaging information storage device 1 may be constructed with at least one of the components attached as an external device.

1 撮像情報記憶装置
10 撮像装置
11 車室外用カメラ
12 車室内用カメラ
100 撮像情報記憶システム
2 インターフェイス部
3 ドライブレコーダ部
31 撮像情報生成部
32 記録部
33 フレームレート制御部
34 撮像情報処理部
4 信号機認識部
41 撮像情報解析部
42 信号機検知部
5 マップアプリケーション部
51 位置情報取得部
52 マップマッチング部
53 信号機接近判定部
6 中央演算処理ユニット(コンピュータ)
7 第1記憶部
8 第2記憶部
81 撮像情報記憶部
82 地図情報記憶部
9 共通バス
T1~T8 信号機
V 自車両
Reference Signs List 1: Image capture information storage device 10: Image capture device 11: Vehicle exterior camera 12: Vehicle interior camera 100: Image capture information storage system 2: Interface unit 3: Drive recorder unit 31: Image capture information generation unit 32: Recording unit 33: Frame rate control unit 34: Image capture information processing unit 4: Traffic light recognition unit 41: Image capture information analysis unit 42: Traffic light detection unit 5: Map application unit 51: Position information acquisition unit 52: Map matching unit 53: Traffic light approach determination unit 6: Central processing unit (computer)
7 First storage unit 8 Second storage unit 81 Image information storage unit 82 Map information storage unit 9 Common buses T1 to T8 Traffic lights V Vehicle

Claims (9)

撮像された撮像情報を所定フレームレートにおいて生成する撮像情報生成部と、
前記撮像情報生成部により生成された前記撮像情報を記憶する記憶部と、
自装置の位置情報を取得する位置情報取得部と、
信号機の位置情報を有する地図情報と前記自装置の前記位置情報とに基づいて、信号機が設置された位置から所定の範囲内に前記自装置が存在するか否かを判定し、前記所定の範囲内に前記自装置が存在すると判定されたときに前記所定フレームレートに比し高い高フレームレートにおいて前記撮像情報を生成するフレームレート制御部と、
を備えている撮像情報記憶装置。
an imaging information generating unit that generates imaging information of captured images at a predetermined frame rate;
a storage unit that stores the imaging information generated by the imaging information generation unit;
A location information acquisition unit that acquires location information of the device itself;
a frame rate control unit that determines whether the device is located within a predetermined range from a position where the traffic light is installed based on map information having position information of a traffic light and the position information of the device, and generates the imaging information at a high frame rate higher than the predetermined frame rate when it is determined that the device is located within the predetermined range;
An imaging information storage device comprising:
前記位置情報取得部により取得された前記位置情報のずれを前記地図情報に基づいて補正するマップマッチング処理部
を更に備えている請求項1に記載の撮像情報記憶装置。
The imaging information storage device according to claim 1 , further comprising a map matching processing unit that corrects a deviation of the position information acquired by the position information acquisition unit based on the map information.
前記撮像情報生成部は、それぞれ撮像された複数種類の撮像情報を前記所定フレームレートにおいて生成し、
前記記憶部は、前記撮像情報生成部により生成された複数種類の前記撮像情報を記憶し、
前記フレームレート制御部は、前記自装置が前記所定の範囲内に存在すると判定されたときに前記高フレームレートにおいて複数種類の前記撮像情報を生成する
請求項1又は請求項2に記載の撮像情報記憶装置。
the imaging information generation unit generates a plurality of types of imaging information at the predetermined frame rate,
the storage unit stores a plurality of types of the imaging information generated by the imaging information generation unit;
The imaging information storage device according to claim 1 , wherein the frame rate control unit generates a plurality of types of the imaging information at the high frame rate when it is determined that the device itself is present within the predetermined range.
前記撮像情報生成部は、車両室外が撮像された室外撮像情報と、前記車両室内が撮像された室内撮像情報とを含む複数種類の撮像情報を前記所定フレームレートにおいて生成する
請求項3に記載の撮像情報記憶装置。
The imaging information storage device according to claim 3 , wherein the imaging information generating unit generates a plurality of types of imaging information including exterior imaging information capturing an image of an exterior of a vehicle and interior imaging information capturing an image of an interior of the vehicle at the predetermined frame rate.
撮像された撮像情報を所定フレームレートにおいて生成する撮像情報生成部と、
前記撮像情報生成部により生成された前記撮像情報を前記所定フレームレートに比し低い低フレームレートに変換する撮像情報処理部と、
前記撮像情報処理部により生成された前記撮像情報を記憶する記憶部と、
自装置の位置情報を取得する位置情報取得部と、
信号機の位置情報を有する地図情報と前記自装置の前記位置情報とに基づいて、信号機が設置された位置から所定の範囲内に前記自装置が存在するか否かを判定し、前記所定の範囲内に前記自装置が存在すると判定されたときに前記所定フレームレートにより生成された前記撮像情報を前記記憶部に記憶させるフレームレート制御部と、
を備えている撮像情報記憶装置。
an imaging information generating unit that generates imaging information of captured images at a predetermined frame rate;
an imaging information processing unit that converts the imaging information generated by the imaging information generating unit into a low frame rate that is lower than the predetermined frame rate;
a storage unit that stores the imaging information generated by the imaging information processing unit;
A location information acquisition unit that acquires location information of the device itself;
a frame rate control unit that determines whether the device is located within a predetermined range from a position where a traffic light is installed based on map information having position information of a traffic light and the position information of the device, and stores the imaging information generated at the predetermined frame rate in the storage unit when it is determined that the device is located within the predetermined range;
An imaging information storage device comprising:
前記撮像情報生成部により生成された前記撮像情報に基づく画像解析により前記信号機が存在するか否かを認識する信号機認識部を更に備え、
前記フレームレート制御部は、前記信号機が前記所定の範囲内に存在すると判定されたとき、又は前記信号機認識部により前記信号機が認識されたときに、前記高フレームレートにおいて前記撮像情報を生成する
請求項1に記載の撮像情報記憶装置。
A traffic light recognition unit that recognizes whether or not the traffic light is present by image analysis based on the imaging information generated by the imaging information generation unit,
The imaging information storage device according to claim 1 , wherein the frame rate control unit generates the imaging information at the high frame rate when it is determined that the traffic light is present within the predetermined range or when the traffic light is recognized by the traffic light recognition unit.
.
撮像情報生成部、記憶部、位置情報取得部及びフレームレート制御部を備えた撮像情報記憶装置における撮像情報記憶方法であって、
前記撮像情報生成部が、撮像された撮像情報を所定フレームレートにおいて生成する撮像情報生成工程と、
前記記憶部が、前記撮像情報生成工程において生成された前記撮像情報を記憶する記憶工程と、
前記位置情報取得部が、前記撮像情報記憶装置の位置情報を取得する位置情報取得工程と、
前記フレームレート制御部が、信号機の位置情報を有する地図情報と前記撮像情報記憶装置の前記位置情報とに基づいて、信号機が設置された位置から所定の範囲内に前記撮像情報記憶装置が存在するか否かを判定し、前記所定の範囲内に前記撮像情報記憶装置が存在すると判定されたときに前記所定フレームレートに比し高い高フレームレートにおいて前記撮像情報を生成するフレームレート制御工程と、
を備える撮像情報記憶方法。
An imaging information storage method in an imaging information storage device including an imaging information generating unit, a storage unit, a position information acquiring unit, and a frame rate control unit, comprising:
an imaging information generating step in which the imaging information generating unit generates imaging information of captured images at a predetermined frame rate;
a storage step in which the storage unit stores the imaging information generated in the imaging information generating step;
a position information acquiring step in which the position information acquiring unit acquires position information of the imaging information storage device;
a frame rate control step in which the frame rate control unit determines whether the imaging information storage device is present within a predetermined range from a position where a traffic light is installed based on map information having position information of a traffic light and the position information of the imaging information storage device, and generates the imaging information at a high frame rate higher than the predetermined frame rate when it is determined that the imaging information storage device is present within the predetermined range;
An imaging information storage method comprising:
撮像情報生成部、記憶部、位置情報取得部及びフレームレート制御部を備えた撮像情報記憶装置における撮像情報記憶方法をコンピュータに実行させるためのプログラムであって、
前記撮像情報生成部が、撮像された撮像情報を所定フレームレートにおいて生成する工程と、
前記記憶部が、前記撮像情報生成部により生成された前記撮像情報を記憶する工程と、
前記位置情報取得部が、前記撮像情報記憶装置の位置情報を取得する工程と、
前記フレームレート制御部が、信号機の位置情報を有する地図情報と前記撮像情報記憶装置の前記位置情報とに基づいて、信号機が設置された位置から所定の範囲内に前記撮像情報記憶装置が存在するか否かを判定し、前記所定の範囲内に前記撮像情報記憶装置が存在すると判定されたときに前記所定フレームレートに比し高い高フレームレートにおいて前記撮像情報を生成する工程と、
を備えているプログラム。
A program for causing a computer to execute an imaging information storage method in an imaging information storage device including an imaging information generating unit, a storage unit, a position information acquiring unit, and a frame rate control unit, the program comprising:
a step of generating captured imaging information at a predetermined frame rate by the imaging information generating unit;
a step of storing the imaging information generated by the imaging information generating unit in the storage unit;
a step of the position information acquisition unit acquiring position information of the imaging information storage device;
the frame rate control unit determines whether the imaging information storage device is present within a predetermined range from a position where a traffic light is installed based on map information having position information of a traffic light and the position information of the imaging information storage device, and generates the imaging information at a high frame rate higher than the predetermined frame rate when it is determined that the imaging information storage device is present within the predetermined range;
A program that has:
前記フレームレート制御部は、前記フレームレート制御部において前記所定の範囲内に前記自装置が存在すると判定されたときに前記撮像情報処理部において前記所定フレームレートにより前記撮像情報を生成し、この撮像情報を前記記憶部に記憶させる請求項5に記載の撮像情報記憶装置。
6. The imaging information storage device according to claim 5, wherein the frame rate control unit generates the imaging information at the predetermined frame rate in the imaging information processing unit when the frame rate control unit determines that the device is present within the predetermined range, and stores the imaging information in the storage unit.
JP2023204294A 2019-01-04 2023-12-01 IMAGE CAPTURE INFORMATION STORAGE DEVICE, IMAGE CAPTURE INFORMATION STORAGE METHOD, AND PROGRAM Active JP7598697B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2023204294A JP7598697B2 (en) 2019-01-04 2023-12-01 IMAGE CAPTURE INFORMATION STORAGE DEVICE, IMAGE CAPTURE INFORMATION STORAGE METHOD, AND PROGRAM
JP2024209182A JP2025023146A (en) 2019-01-04 2024-11-30 IMAGE CAPTURE INFORMATION STORAGE DEVICE, IMAGE CAPTURE INFORMATION STORAGE METHOD, AND PROGRAM

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019000247A JP2020109569A (en) 2019-01-04 2019-01-04 Imaging information storage device, imaging information storage method, and program
JP2023204294A JP7598697B2 (en) 2019-01-04 2023-12-01 IMAGE CAPTURE INFORMATION STORAGE DEVICE, IMAGE CAPTURE INFORMATION STORAGE METHOD, AND PROGRAM

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2019000247A Division JP2020109569A (en) 2019-01-04 2019-01-04 Imaging information storage device, imaging information storage method, and program

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2024209182A Division JP2025023146A (en) 2019-01-04 2024-11-30 IMAGE CAPTURE INFORMATION STORAGE DEVICE, IMAGE CAPTURE INFORMATION STORAGE METHOD, AND PROGRAM

Publications (2)

Publication Number Publication Date
JP2024015157A JP2024015157A (en) 2024-02-01
JP7598697B2 true JP7598697B2 (en) 2024-12-12

Family

ID=71570083

Family Applications (3)

Application Number Title Priority Date Filing Date
JP2019000247A Pending JP2020109569A (en) 2019-01-04 2019-01-04 Imaging information storage device, imaging information storage method, and program
JP2023204294A Active JP7598697B2 (en) 2019-01-04 2023-12-01 IMAGE CAPTURE INFORMATION STORAGE DEVICE, IMAGE CAPTURE INFORMATION STORAGE METHOD, AND PROGRAM
JP2024209182A Pending JP2025023146A (en) 2019-01-04 2024-11-30 IMAGE CAPTURE INFORMATION STORAGE DEVICE, IMAGE CAPTURE INFORMATION STORAGE METHOD, AND PROGRAM

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2019000247A Pending JP2020109569A (en) 2019-01-04 2019-01-04 Imaging information storage device, imaging information storage method, and program

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2024209182A Pending JP2025023146A (en) 2019-01-04 2024-11-30 IMAGE CAPTURE INFORMATION STORAGE DEVICE, IMAGE CAPTURE INFORMATION STORAGE METHOD, AND PROGRAM

Country Status (1)

Country Link
JP (3) JP2020109569A (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7734615B2 (en) * 2022-03-30 2025-09-05 本田技研工業株式会社 Reproduction system, reproduction method, and reproduction program

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008056052A (en) 2006-08-30 2008-03-13 Xanavi Informatics Corp On-vehicle device
JP2010286944A (en) 2009-06-10 2010-12-24 Clarion Co Ltd Drive recorder system, constant-recording type drive recorder, and navigation device
JP2012155516A (en) 2011-01-26 2012-08-16 Hitachi Automotive Systems Ltd Vehicle behavior recording system
JP2016139233A (en) 2015-01-27 2016-08-04 オオトエイブルズ株式会社 Operation recording device, operation recording system, and operation management system

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4979933B2 (en) * 2005-12-16 2012-07-18 株式会社オートネットワーク技術研究所 In-vehicle camera and drive recorder
JP2012034275A (en) * 2010-08-02 2012-02-16 Clarion Co Ltd Drive recorder and drive recorder system
US10275669B2 (en) * 2015-09-09 2019-04-30 Lightmetrics Technologies Pvt. Ltd. System and method for detecting objects in an automotive environment

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008056052A (en) 2006-08-30 2008-03-13 Xanavi Informatics Corp On-vehicle device
JP2010286944A (en) 2009-06-10 2010-12-24 Clarion Co Ltd Drive recorder system, constant-recording type drive recorder, and navigation device
JP2012155516A (en) 2011-01-26 2012-08-16 Hitachi Automotive Systems Ltd Vehicle behavior recording system
JP2016139233A (en) 2015-01-27 2016-08-04 オオトエイブルズ株式会社 Operation recording device, operation recording system, and operation management system

Also Published As

Publication number Publication date
JP2024015157A (en) 2024-02-01
JP2020109569A (en) 2020-07-16
JP2025023146A (en) 2025-02-14

Similar Documents

Publication Publication Date Title
EP3700198B1 (en) Imaging device, image processing apparatus, and image processing method
JP6649738B2 (en) Parking lot recognition device, parking lot recognition method
US8089512B2 (en) Driving support device, driving support method and computer program
CN111243332A (en) Information providing system and method, server, in-vehicle device, and storage medium
JP7598697B2 (en) IMAGE CAPTURE INFORMATION STORAGE DEVICE, IMAGE CAPTURE INFORMATION STORAGE METHOD, AND PROGRAM
CN115179863B (en) Control devices and methods for mobile bodies, storage media, and vehicles
CN115088248A (en) Image pickup apparatus, image pickup system, and image pickup method
JP2026002986A (en) Image capture information storage device, image capture information storage method, and program
CN115147787A (en) Image processing device and image processing method, vehicle control device, and storage medium
US12437417B2 (en) Feature detection device, feature detection method, and computer program for detecting feature
JP2006295676A (en) Imaging device for mobile unit
JP7245653B2 (en) Traffic light recognition method and traffic light recognition device
US11967007B2 (en) Vehicle surroundings information displaying system and vehicle surroundings information displaying method
JP7540375B2 (en) Vehicle control device, vehicle control method, and vehicle control computer program
WO2022153888A1 (en) Solid-state imaging device, control method for solid-state imaging device, and control program for solid-state imaging device
JP2024152819A (en) IMAGE CAPTURE INFORMATION STORAGE DEVICE, IMAGE CAPTURE INFORMATION STORAGE METHOD, AND PROGRAM
US20240223897A1 (en) Imaging setting apparatus, image pickup apparatus, vehicle, and imaging setting method
US12304531B2 (en) Device and method for generating trajectory, and non-transitory computer-readable medium storing computer program therefor
US12555389B2 (en) Apparatus, method, and computer program for estimating road edge
JP7631062B2 (en) Vehicle, control device and control method thereof
KR102734763B1 (en) System for analyzing intersection and operating method thereof
JP7639694B2 (en) OBJECT RECOGNITION CONTROL DEVICE AND OBJECT RECOGNITION METHOD
JP2020109570A (en) Imaging information storage device, imaging information storage method, and program
US20220203893A1 (en) Driver assistance apparatus, a vehicle, and a method of controlling a vehicle
CN115179864A (en) Control device and control method for moving body, storage medium, and vehicle

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20231201

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20241105

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20241130

R150 Certificate of patent or registration of utility model

Ref document number: 7598697

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150