WO2017006583A1 - 画像処理装置およびこれを備えた交通違反管理システム - Google Patents

画像処理装置およびこれを備えた交通違反管理システム Download PDF

Info

Publication number
WO2017006583A1
WO2017006583A1 PCT/JP2016/057316 JP2016057316W WO2017006583A1 WO 2017006583 A1 WO2017006583 A1 WO 2017006583A1 JP 2016057316 W JP2016057316 W JP 2016057316W WO 2017006583 A1 WO2017006583 A1 WO 2017006583A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
violation
traffic
color
unit
Prior art date
Application number
PCT/JP2016/057316
Other languages
English (en)
French (fr)
Inventor
谷口 正宏
浩輝 上野
光司 滝沢
Original Assignee
オムロン株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オムロン株式会社 filed Critical オムロン株式会社
Priority to CN201680022166.0A priority Critical patent/CN107534717B/zh
Publication of WO2017006583A1 publication Critical patent/WO2017006583A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/017Detecting movement of traffic to be counted or controlled identifying vehicles
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/04Detecting movement of traffic to be counted or controlled using optical or ultrasonic detectors

Definitions

  • the present invention relates to an image processing apparatus and a traffic violation management system including the same.
  • a vehicle recognition device that discriminates a vehicle, a driver, and the like using a captured image of the vehicle captured by an imaging device such as a camera.
  • Such a vehicle recognition device is considered to be effective for use in traffic violation control, accident response, criminal investigation (finding of vehicles used in crimes), and the like.
  • a captured image an infrared image obtained by irradiating a subject such as a vehicle with near infrared light and capturing the reflected light is used. This is because an image can be acquired even in a dark situation such as at night.
  • Patent Document 1 discloses a technique for irradiating a subject with infrared light having a plurality of different wavelengths, performing color estimation using reflection characteristics of each wavelength from the subject, and colorizing an infrared image. Yes.
  • An object of the present invention is to provide an image processing apparatus capable of suppressing the data processing amount of color arrangement processing and a traffic violation management system including the image processing apparatus.
  • An image processing apparatus includes an image acquisition unit, a violation detection unit, a selection unit, and a color setting unit.
  • the image acquisition unit acquires a plurality of monochrome images captured by the imaging device.
  • the violation detection unit detects whether there is a traffic violation of the vehicle.
  • the selection unit selects a monochrome image that satisfies a condition necessary for specifying the traffic violation of the vehicle from the plurality of monochrome images acquired by the image acquisition unit. Select.
  • the color setting unit performs color arrangement processing on the monochrome image selected by the selection unit, and outputs a color image represented by a plurality of colors.
  • a plurality of infrared images captured by an imaging device that captures infrared reflected light emitted to a subject including a vehicle traveling at an intersection or the like is acquired.
  • a traffic violation of a vehicle included in a monochrome image such as an infrared image
  • a monochrome image satisfying a condition necessary for verifying the traffic violation is selected from the plurality of monochrome images.
  • a color image that has been subjected to color arrangement processing with a plurality of selected monochrome images is output.
  • the monochrome image acquired by the imaging device may be an image captured intermittently at a predetermined time interval, or may be an image captured continuously like moving image shooting.
  • a traffic violation can be detected using a sensor that detects the state of the vehicle such as the traveling speed of the vehicle, an acquired monochrome image, and the like.
  • traffic violations detected here include, for example, ignoring traffic lights, overspeeding, traffic prohibition violations, traffic classification violations, overtaking prohibition violations, designated place temporary suspension, neglected parking violations, traffic zone violations, route buses, etc. This includes various violations such as traffic zone violations, inability to maintain distances between vehicles, no lights, and the use of mobile phones. Traffic violations can be detected by appropriately changing the violation detection settings based on sensors and images in accordance with the violations stipulated by the laws of each country.
  • an image acquired by an imaging means such as a camera, or the like is used for the verification of the detected traffic violation.
  • an image suitable for detection of violation content, a violation vehicle, a violated driver, etc. from among a plurality of monochrome images continuously captured, The optimum one is selected based on the position of the vehicle included in the image, the clearness of the image of the traffic light, the driver, and the like. And as an image selected, one sheet may be sufficient according to the contents of traffic violation, etc., and plural may be sufficient as it.
  • the color arrangement process for the selected monochrome image means a process of forming a color image by reflecting a plurality of colors assigned in accordance with the distribution of infrared intensity in the monochrome monochrome image to each part in the image. is doing. Specifically, for example, the reflection intensity of near-infrared rays having a plurality of different wavelengths irradiated from the illumination unit is detected, and color arrangement processing is performed using a plurality of colors assigned according to each reflection intensity.
  • a color image can be formed by various known methods (see Patent Documents 1 to 6 above).
  • the color arrangement processing for the monochrome image is selectively performed by selecting an image that satisfies the conditions necessary for verifying the traffic violation. For this reason, it is possible to reduce the data processing amount and reduce the processing load as compared with the case where the color arrangement processing is performed on all monochrome images.
  • An image processing apparatus is the image processing apparatus according to the first invention, and the color setting unit performs color arrangement processing only on a portion related to a traffic violation in the monochrome image selected by the selection unit.
  • the color arrangement processing is performed only on the portion related to the traffic violation on the monochrome image selected by the selection unit.
  • backgrounds not related to traffic violations, roads, etc. are not subjected to color schemes.
  • locations related to traffic violations such as violation vehicles, vehicle numbers (number plates), traffic lights, driver's clothing, etc. Only the color scheme is applied.
  • vehicle tires that always have the same color are excluded from the color arrangement process.
  • the location where the color arrangement process is performed may be changed according to the type of detected traffic violation, for example.
  • An image processing device is the image processing device according to the second invention, wherein the color setting unit is a color of a vehicle subject to traffic violation control, a color of a vehicle number (number plate), At least one color arrangement process is performed among the colors of the traffic lights.
  • the color of the vehicle subject to traffic violation control, the color of the vehicle number (number plate), and the color of the traffic light are subjected to color arrangement processing to be colored.
  • An image processing apparatus is the image processing apparatus according to the first aspect, wherein the color setting unit performs a color arrangement process on the entire monochrome image selected by the selection unit.
  • the color arrangement process is performed on the entire monochrome image selected by the selection unit.
  • An image processing apparatus is the image processing apparatus according to any one of the first to fourth aspects, wherein the first memory for storing the color image that has been subjected to the color arrangement processing in the color setting unit. The unit is further provided.
  • a color image selected from a plurality of captured monochrome images and subjected to color arrangement processing is stored in the first storage unit.
  • the traffic violation control can be implemented afterwards using the color image stored in the first storage unit as evidence.
  • the capacity of the first storage unit is large. The increase can be avoided.
  • An image processing device is the image processing device according to any one of the first to fifth inventions, wherein the anti-detection unit detects the state of the vehicle subject to traffic violation control. Sensor.
  • a traffic violation is detected using a speed sensor installed at an intersection, a straight road, or the like together with the imaging device.
  • traffic violations that can be detected using sensors include, for example, overspeed, signal ignorance, traffic prohibition violation, traffic classification violation, overtaking prohibition violation, designated place temporary stoppage, neglected parking violation, traffic zone violation, route It includes various violations such as violations of priority traffic zones such as buses, non-retention distances and no lights. Accordingly, the traffic violation can be efficiently controlled by converting the monochrome image including the detected traffic violation vehicle into a color image while detecting the presence or absence of the traffic violation by the sensor.
  • An image processing device is the image processing device according to any one of the first to sixth inventions, wherein the violation detection unit images the vehicle that is a target of traffic violation control.
  • a traffic violation is detected using an imaging device installed at an intersection or the like.
  • traffic violations detected by the imaging device include, for example, signal ignorance, overspeed, traffic prohibition violation, traffic classification violation, overtaking prohibition violation, designated place temporary stoppage, neglected parking violation, traffic zone violation, route bus This includes violations that can be detected using images, such as violations of equal priority lanes, inability to maintain a distance between vehicles, no light, use of mobile phones, etc.
  • the imaging device for detecting a traffic violation may be the same as the imaging device for capturing the monochrome image described above, or an imaging device dedicated to detecting a traffic violation may be used.
  • an imaging device dedicated to detecting a traffic violation may be used.
  • An image processing apparatus is the image processing apparatus according to any one of the first to seventh inventions, wherein the selection unit performs a color arrangement process from a plurality of monochrome images.
  • a second storage unit that stores conditions necessary for identifying traffic violations.
  • conditions necessary for selecting a monochrome image to be subjected to the color arrangement process selected by the selection unit are stored in the second storage unit.
  • the conditions necessary for selecting a monochrome image are, for example, an image including a traffic signal when the traffic violation is a signal ignorance, and an image including a violation vehicle and a driver when the traffic violation is an overspeed violation. It is included.
  • the control corresponding to various traffic violations can be implemented by selecting a monochrome image to be subjected to color arrangement processing and forming a color image based on the conditions stored in the second storage unit. .
  • An image processing apparatus is the image processing apparatus according to any one of the first to eighth inventions, wherein the selection unit includes an object reflected in a monochrome image, a subject, contents, Based on the sharpness, a monochrome image that satisfies the conditions necessary for identifying the traffic violation is selected.
  • the selection unit selects a monochrome image
  • a monochrome image that satisfies the conditions necessary for specifying the traffic violation such as the clarity of an image including a vehicle or a person related to the traffic violation, is selected and extracted.
  • An image processing device is the image processing device according to any one of the first to ninth inventions, wherein the violation detection unit is an overspeed of the vehicle, a signal is ignored, a traffic prohibition violation, a traffic Detects at least one of classification violation, overtaking prohibition violation, designated crossing prohibition violation, designated location temporary stoppage, parking stop prohibition, overloading.
  • An image processing apparatus is the image processing apparatus according to any one of the first to tenth aspects, wherein the monochrome image includes an infrared image.
  • an infrared image is used as a monochrome image acquired by an imaging device such as a camera.
  • an imaging device such as a camera.
  • a traffic violation management system includes an image processing device according to any one of the first to eleventh inventions, an illumination unit that irradiates a vehicle with infrared light, and an illumination unit that applies an object to the subject. And an imaging device that images reflected light of the infrared light irradiated on the infrared light.
  • traffic violation management includes the above-described image processing device, an illumination unit that irradiates the vehicle with infrared light to detect traffic violations, and an imaging device that captures reflected light of the infrared light. Build the system.
  • the illumination unit and the imaging device may be installed in a place where traffic violations are frequent, such as an intersection or a straight road.
  • the image processing apparatus may be installed, for example, in a police station that controls traffic violations, or a part of the image processing apparatus (such as an image acquisition unit) may be installed outdoors where an imaging apparatus or the like is installed. May be installed.
  • the traffic violation management system can efficiently control traffic violations and minimize the amount of data processing.
  • An image processing apparatus includes an image acquisition unit, a selection unit, and a color setting unit.
  • the image acquisition unit acquires a plurality of infrared images (an example of a monochrome image) acquired by the imaging device.
  • the selection unit selects a monochrome image corresponding to the predetermined condition from a plurality of monochrome images such as infrared images acquired by the image acquisition unit when the predetermined condition is satisfied.
  • the color setting unit performs color arrangement processing on the monochrome image selected by the selection unit, and outputs a color image represented by a plurality of colors.
  • a plurality of monochrome images captured by an imaging device such as a traffic monitoring camera installed at an intersection or the like, another monitoring camera, or a security camera installed in the city are acquired.
  • an imaging device such as a traffic monitoring camera installed at an intersection or the like, another monitoring camera, or a security camera installed in the city are acquired.
  • a monochrome image that satisfies the predetermined condition is selected from the plurality of monochrome images.
  • a color image that has been subjected to color arrangement processing with a plurality of selected monochrome images is output.
  • the monochrome image acquired by the imaging device may be an image captured intermittently at a predetermined time interval, or may be an image captured continuously like moving image shooting.
  • the predetermined condition may be, for example, when an accident occurs at an intersection or the like, or a person involved in an incident such as a suspect is reflected in a monochrome image.
  • the accident details, accident vehicle, driver, etc. from a plurality of monochrome images taken continuously, etc.
  • an optimal one is selected based on the position of the vehicle included in the image, the clearness of the image of a traffic light, a driver, a person concerned, and the like.
  • the selected image may be one image or a plurality of images.
  • the color arrangement processing for the selected monochrome image is performed by various known methods such as detecting near-infrared reflection intensities having a plurality of different wavelengths and performing color arrangement processing according to the respective reflection intensities. Can be formed (see Patent Documents 1 to 6 above). As a result, compared to the case where monochrome images are used when verifying an accident or incident at a police station, police officers, etc. are more concerned with the color of the accident vehicle or traffic light, the person involved in the accident or incident, etc. A lot of information can be obtained by color images.
  • the color arrangement processing for the monochrome image is selectively performed by selecting an image satisfying a predetermined condition from a large number of acquired monochrome images. For this reason, it is possible to reduce the data processing amount and reduce the processing load as compared with the case where the color arrangement processing is performed on all monochrome images. As a result, incidents and accidents can be efficiently verified, and the data processing amount can be minimized.
  • An image processing device is the image processing device according to the thirteenth invention, wherein the selection unit selects at least one of a vehicle traffic violation, a bicycle traffic violation, and a pedestrian traffic violation. Select a monochrome image that meets the requirements for verification.
  • an image that satisfies the conditions necessary for detecting traffic violations of vehicles, bicycles, and pedestrians from among a plurality of monochrome images captured by traffic monitoring cameras, security cameras, etc. installed on roads and streets. Select and extract.
  • An image processing apparatus is the image processing apparatus according to the thirteenth aspect of the present invention, wherein the selection unit selects a monochrome image that satisfies a condition necessary for specifying a specific vehicle and person.
  • the selection unit selects a monochrome image that satisfies a condition necessary for specifying a specific vehicle and person.
  • a monochrome image satisfying a condition necessary for specifying a specific vehicle or person related to an accident or an incident is selected, and a color arrangement process is performed.
  • the conditions for specifying a specific vehicle and person are, for example, the vehicle in the case of an accident or incident, searching for an image in which a party (perpetrator, victim, suspect, etc.) is reflected.
  • the color, the clothes of the person, the hairstyle, etc. are set. Thereby, it is possible to efficiently select a monochrome image including an accident or incident party and output the image as a color image subjected to color arrangement processing.
  • the image processing apparatus of the present invention According to the image processing apparatus of the present invention, the data processing amount of the color arrangement process can be suppressed.
  • (A) And (b) is a figure which shows the display aspect of the traffic violation containing the color image displayed on the display part of the image processing apparatus contained in the traffic violation management system of FIG.
  • the flowchart which shows the flow of the color scheme process of the infrared image by the traffic violation management system of FIG.
  • a traffic violation management system 100 including an image processing apparatus 10 according to an embodiment of the present invention will be described below with reference to FIGS.
  • the near-infrared reflection component irradiated to the vehicles A1 and A2 passing through the intersection is imaged using the camera (imaging device) 103, and the traffic violation is performed at a police station or the like.
  • the traffic violation management system 100 includes a sensor 101, an illumination unit 102, a camera (imaging device) 103, and an image processing device 10.
  • the sensor 101 is, for example, a speed detection sensor that detects the speeds of the traveling vehicles A ⁇ b> 1 and A ⁇ b> 2, and transmits a traffic violation detection result to the violation detection unit 11 included in the image processing apparatus 10.
  • the sensor 101 is attached to the support
  • the illumination unit 102 is, for example, a device that emits near-infrared rays having a plurality of different wavelengths.
  • the illumination unit 102 is attached to a column 111 installed at an intersection as shown in FIG. .
  • the illumination part 102 irradiates near infrared rays with respect to vehicle A1, A2, etc. which become the object of traffic violation.
  • the illumination unit 102 is controlled in irradiation timing and the like by an illumination control unit 12 included in the image processing apparatus 10.
  • the near infrared ray irradiated from the illumination unit 102 means an electromagnetic wave having a wavelength of 0.7 to 2.5 ⁇ m that is close to red visible light.
  • the near infrared ray is used for an infrared camera or the like by utilizing the property close to visible light.
  • the camera 103 captures the reflection of near-infrared rays irradiated from the illumination unit 102 to the vehicle A1 and the like. And the camera 103 is attached to the support
  • the camera 103 may be switched to acquire an image including visible light during a bright time period and to capture an image including near infrared light during a dark time period. Moreover, the imaging of images by the camera 103 may be performed continuously, or may be performed as needed when a traffic violation is detected. In this embodiment, an infrared image is used as a monochrome image acquired by the camera 103, but another monochrome image may be used.
  • the image processing apparatus 10 selects an image to be subjected to color arrangement processing from monochrome infrared images (a type of monochrome image) captured by the camera 103, and performs color arrangement processing on all or part of the selected image. To generate a color image.
  • the image processing apparatus 10 is installed in, for example, a police station that controls traffic violations. Further, as shown in FIG. 1, the image processing apparatus 10 includes a violation detection unit 11, an illumination control unit 12, an image acquisition unit 13, a selection unit 14, a color setting unit 15, a second storage unit 16, and a first storage unit 17. And a display unit 18.
  • the violation detection unit 11 receives the detection result of the speed detection sensor 101 of the traveling vehicles A1 and A2 installed at an intersection or the like, and detects the presence or absence of a traffic violation.
  • the violation detection unit 11 includes a DB (database) 11a and a determination unit 11b, as shown in FIG.
  • the DB 11a stores information related to the traffic violation verification conditions.
  • the verification conditions include, for example, information on the installation location of the sensor 101, the speed limit of the installation location, the lower limit speed for performing control as an overspeed violation in the case of an overspeed violation.
  • information on conditions and the like necessary to prove each traffic violation is stored according to the contents of various traffic violations for which control is performed.
  • the determining unit 11b refers to the various traffic violation verification conditions stored in the DB 11a and the detection result (sensor output) received from the sensor 101 to determine whether or not a traffic violation has occurred. For example, in the case of an overspeed violation, if the traveling speed of 76 km / h is detected by the sensor 101 and the speed limit of this road is 40 km / h, it is determined as an overspeed violation of 36 km / h.
  • the determination means 11b outputs violation detection information with respect to the illumination control part 12 and the image acquisition part 13 that generation
  • the illumination control unit 12 controls the illumination unit 102 that irradiates the vehicles A1 and A2 with near infrared rays. Specifically, when the violation detection information is received from the determination unit 11b of the violation detection unit 11, the illumination unit is configured to immediately irradiate near-infrared rays to the traveling vehicle A1 or the like that is subject to the traffic violation. 102 is controlled.
  • the image acquisition unit 13 acquires a plurality of infrared images captured by the camera 103. And the image acquisition part 13 will receive the violation detection information from the determination means 11b of the violation detection part 11, and the image containing reflection of the near infrared rays irradiated with respect to the running vehicle A1 etc. which are the object of the traffic violation An imaging command is transmitted to the camera 103 so as to capture the image. Then, the image acquisition unit 13 receives, from the camera 103, a continuously captured image such as an infrared image related to a traffic violation captured in response to a capturing command or a continuously captured moving image.
  • a continuously captured image such as an infrared image related to a traffic violation captured in response to a capturing command or a continuously captured moving image.
  • the selection unit 14 selects one or a plurality of infrared images that satisfy the conditions necessary for detecting a traffic violation for the plurality of infrared images acquired by the image acquisition unit 13. Specifically, as illustrated in FIG. 4, the selection unit 14 first relates to a traffic violation based on a plurality of infrared images received from the image acquisition unit 13 and violation detection information (presence or absence of traffic violation). Select the infrared image to be used. Next, the selection unit 14 further selects an optimal infrared image as a traffic violation evidence image based on the selection condition stored in the second storage unit 16.
  • the infrared image selected in the selection part 14 may be one sheet, or may combine several sheets according to the kind of traffic violation, the state of an infrared image, etc.
  • storage part 16 explained in full detail in the back
  • the contents (signals, license plates, etc.) that must be reflected in the infrared image may be stored in association with the type of traffic violation.
  • the selection unit 14 outputs the selected infrared image information and the remaining non-selected infrared images separately.
  • the color setting unit 15 performs a color arrangement process on the infrared image related to the traffic violation selected by the selection unit 14.
  • the color setting unit 15 includes an area setting unit 15 a that sets an area (color arrangement area) for performing color arrangement processing.
  • the region setting unit 15a performs color arrangement processing on the whole or a part of the infrared image including the vehicle A1 and the like based on a preset condition or the like.
  • the color setting unit 15 receives information on the selected infrared image and the remaining non-selected infrared images, and performs a color arrangement process on the selected infrared image. . Then, the color setting unit 15 transmits the color image subjected to the color arrangement process and the non-selected infrared image to the first storage unit 17 and stores them. The color setting unit 15 also outputs the color image subjected to the color arrangement process to the display unit 18 such as a liquid crystal display.
  • the entire infrared image including the background may be colored, or the color of the vehicle body of the vehicle A1 that has exceeded the speed, the color of the vehicle number (number plate), Coloring may be limited to the driver's face, traffic lights, and the like.
  • the region setting unit 15 a displays a vehicle body region C 1, a vehicle number (number plate) region C 2, a traffic light region C 3, and a driver region C 4 in the violation specifying image P 1. Set as a color scheme area. Then, the color setting unit 15 performs color arrangement processing on the color arrangement area.
  • the conditions for setting the color arrangement area are stored in advance in the first storage unit 17 and the like, and the object (vehicle, person, etc.) included in the infrared image is stored in the area setting unit 15a. ) Is set as a color arrangement region.
  • the other areas such as the area D1 including the background and the road surface have little influence on the presence or absence of traffic violation, the identification of the violating vehicle, the driver, etc. Let it be a color scheme area.
  • the second storage unit 16 stores information related to conditions for performing the optimum infrared image selection in the selection unit 14 described above.
  • the image condition necessary for detecting the traffic violation stored in the second storage unit 16 is, for example, an image including the violation vehicle A1 and the driver when the traffic violation is an overspeed violation. Etc.
  • the image may include a traffic light.
  • the captured object is clearly imaged and can be used for license plate character recognition, driver face recognition, and the like.
  • the first storage unit 17 stores the color image subjected to color arrangement processing received from the color setting unit 15 and the non-selected infrared image.
  • the display unit 18 is, for example, a liquid crystal display or a PC monitor installed in a police station or the like that controls traffic violations.
  • the display unit 18 relates to color images or traffic violations that have undergone color arrangement processing in the color setting unit 15. Display information.
  • various information related to traffic violations including color images are displayed in the following display manner on the display unit 18 installed in a police station or the like that controls traffic violations. .
  • the display when displaying information related to one traffic violation across the plurality of display screens of the display unit 18. Screens S1 and S2 are displayed.
  • the display screen S1 has three display areas: a violation content display area 31, a specifying image display area 32, and an image information display area.
  • the violation content display area 31 displays the violation content and the violation location.
  • the specifying image display area 32 a color image that has been subjected to a color arrangement process for verifying the violation content displayed in the violation content display area 31 is displayed.
  • the violation specifying speed violation is verified using the violation specifying image P1 and the person specifying image P2, and one of them is displayed in the display screen S1. Is done. Then, by clicking the triangular switch button 35 shown in FIG. 7A, the person specifying image P2 or the like is displayed.
  • the image information display area 34 year, month, day, second is described as the imaging date and time of the infrared image that is the basis of the color image displayed on the display screen S1.
  • the display screen S2 is displayed when the “next” switching button 35 is further clicked from the display state of the second violation specifying image P1.
  • the display screen S3 has three display areas: a violation content display area 31, a specifying image display area 32, and an image information display area.
  • the violation content display area 31 the violation content (for example, overspeed) and the violation location are displayed as in the display screen S ⁇ b> 1.
  • the specifying image display area 32 a person specifying image P2 for verifying a person related to the violation displayed in the violation content display area 31 is displayed.
  • a driver who has committed a violation of overspeed using one person specifying image P2 is proved. Then, by clicking the triangular switch button 35 (previous, next) shown in FIG. 7B, the previous screen (display screen S1) or the next screen is displayed.
  • the display contents displayed on the next screen As the display contents displayed on the next screen, as information related to this violation, the remaining violation specifying image, data of a claim document for violation of the driver or owner of the violating vehicle, and the like can be considered. Note that the order in which the color images are displayed can be changed as appropriate. (When signal is ignored) Further, when the traffic violation is a signal ignorance, as shown in FIG. 8, a display screen S3 for displaying all information relating to one traffic violation in one screen is shown.
  • the display screen S ⁇ b> 3 has three display areas: a violation content display area 31, an identification image display area 32, and a person information display area 33.
  • the violation content display area 31 displays violation content (for example, ignoring a red signal), the violation location, and the date and time of capturing an infrared image that is the basis of the color image.
  • violation content for example, ignoring a red signal
  • the violation location for example, ignoring a red signal
  • the date up to the date when each color image was captured is described.
  • a violation image displayed in the violation content display area 31 and a color image that has been subjected to color arrangement processing to verify a person are displayed.
  • one violation specifying image P1 and two person specifying images P2 and P3 are displayed.
  • the violation specifying image P1 shows a state where the target vehicle is traveling in the intersection in a state where the signal of the oncoming lane is a red signal.
  • the signal of the opposite lane and the signal of the lane in which the target vehicle is traveling are displayed in synchronism with each other. For this reason, this color image is extracted as a violation specifying image P1 as it is determined that the violation can be verified.
  • the person specifying image P2 is an enlarged display of the vehicle number (number plate) portion of the color image in front of the violating vehicle determined to be ignored in the violation specifying image P1 by image processing.
  • the vehicle number of the violating vehicle By specifying the vehicle number of the violating vehicle with this color image, it is possible to specify the name of the owner of the violating vehicle or the name of the user (company) by referring to pre-registered vehicle inspection information, etc. it can.
  • the person specifying image P3 is an enlarged display of the vicinity of the driver's seat by image processing among the color images in front of the violating vehicle determined to be ignored in the violation specifying image P1.
  • the driver's name of the violating vehicle and the passenger's name are specified by referring to the face photo information etc. of the license registered in advance. be able to.
  • the person information display area 33 information related to the person (driver, owner, user, etc.) specified using the person specifying images P2, P3 displayed in the specifying image display area 32 is displayed.
  • the displayed driver information includes data such as the driver's name, address, license number, violation history, and deduction points.
  • the color arrangement processing is selectively performed on an image that is optimal for detecting a traffic violation from among a large amount of infrared images received from the image acquisition unit 13. We are carrying out.
  • the burden of data processing required for the color arrangement process can be significantly reduced.
  • the first storage unit 17 in which the infrared image and the color image are stored has a large storage capacity compared to the case of storing the color image in which the color arrangement processing is performed on all the infrared images. Can be reduced.
  • color setting is performed on one or more infrared images selected by the selection unit 14 from among a large number of infrared images acquired by the camera 103 in the image processing apparatus 10.
  • the unit 15 performs color arrangement processing.
  • a well-known method such as a method disclosed in Japanese Patent Application Laid-Open No. 2011-50049P can be used.
  • near-infrared rays having a plurality of wavelength regions are irradiated from the illumination unit 102 to the subject, and an infrared image corresponding to the near-infrared wavelength intensity is acquired by the camera 103.
  • R red
  • a color arrangement process is performed by assigning G (green) to a region having a large amount of infrared light in the second wavelength region close to visible light, and assigning B (blue) to a region having a large amount of infrared light in the third wavelength region farthest from the visible light.
  • the image processing apparatus 10 sets conditions necessary for detecting a traffic violation, identifying a violation vehicle, etc. from the infrared image acquired by the camera 103 according to the flowchart shown in FIG. Select an infrared image to be filled and perform color arrangement processing.
  • step S ⁇ b> 11 for example, a sensor 101 detects a vehicle that has violated overspeed violation. Then, the sensor 101 transmits violation detection information to the violation detection unit 11 of the image processing apparatus 10. Next, in step S12, the violation detector 11 determines whether or not a traffic violation has been detected with reference to various conditions stored in the DB 11a.
  • step S13 If it is determined that a traffic violation has occurred, the process proceeds to step S13. On the other hand, if it is determined that no traffic violation has occurred, the process returns to step S11 again.
  • step S ⁇ b> 13 the illumination control unit 12 that has received the violation detection information from the violation detection unit 11 issues an illumination command to the illumination unit 102.
  • step S14 the illumination unit 102 that has received the illumination command from the illumination control unit 12 irradiates the offending vehicle with near infrared rays.
  • step S ⁇ b> 15 the camera 103 acquires one or a plurality of infrared images including the violating vehicle in synchronization with the timing at which near-infrared rays are emitted from the illumination unit 102.
  • step S ⁇ b> 16 conditions necessary for the verification of the traffic violation stored in the second storage unit 16 by the selection unit 14 from the plurality of infrared images captured by the camera 103 and acquired by the image acquisition unit 13. , Etc., one or a plurality of infrared images that are equivalent to the color arrangement processing are selected.
  • step S17 the color setting unit 15 performs color arrangement processing on a part of the regions C1 to C4 of the infrared image selected by the selection unit 14 using a known technique.
  • step S ⁇ b> 18 the color setting unit 15 generates a color image in which the color arrangement processing is performed on the area set as the color arrangement area in the area setting unit 15 a and stores the color image in the first storage unit 17.
  • a color image is output to the display unit 18 installed at the police station.
  • the content of traffic violations or the like from the plurality of infrared images captured continuously or intermittently at a police station or the like that controls traffic violations. Select important images that provide evidence to identify violating vehicles, drivers, etc.
  • a color image is formed on at least a part of the selected one or more infrared images to form a color image.
  • the traffic violation management system 200 and the image processing apparatus 210 according to this embodiment will be described below with reference to FIG.
  • the traffic violation management system 200 according to this embodiment is different from the first embodiment in that a traffic violation is detected using an infrared image captured by the camera 103 instead of a sensor.
  • Other configurations have the same functions as the configurations described in the first embodiment, and therefore the same reference numerals are given here, and detailed descriptions thereof are omitted.
  • near-infrared irradiation by the illumination unit 102 and imaging by the camera 103 are continuously performed.
  • the image acquisition unit 13 receives infrared images continuously captured by the camera 103 and transmits them to the violation detection unit 11 and the selection unit 14.
  • the violation detection unit 11 determines whether there is a traffic violation of the vehicle included in the infrared image, and transmits the determination result to the selection unit 14.
  • the violation detection in the violation detection unit 11 is performed by the determination unit 11b with reference to various conditions stored in the DB 11a, as in the first embodiment.
  • the selection unit 14 receives the determination result that the traffic violation has been detected from the violation detection unit 11, the infrared image that satisfies the conditions necessary for the verification of the traffic violation is selected from the infrared images used when the traffic violation is detected. An image is selected and transmitted to the color setting unit 15.
  • the color setting unit 15 performs a color arrangement process on a part or the whole of the infrared image selected by the selection unit 14 to generate a color image. Then, the color setting unit 15 stores the generated color image in the first storage unit 17 and outputs it to the display unit 18.
  • the violation vehicle and the driver can be efficiently identified when the traffic violation is controlled without using a sensor or the like for detecting the traffic violation.
  • the same effect as the first embodiment can be obtained.
  • the data processing amount is significantly reduced compared to the case where the color arrangement process is performed on all infrared images acquired by the camera 103.
  • color scheme processing is performed only on a part of the area necessary for identifying traffic violations, etc. Enforcement efficiency can be improved.
  • the traffic violation management system 300 includes the third storage unit 19 that temporarily stores all infrared image data continuously captured by the camera 103. 2 is different. Further, the present embodiment is common to the second embodiment in that a traffic violation is detected using an infrared image captured by the camera 103 instead of a sensor.
  • the violation detection unit 11 uses the infrared image continuously acquired from the third storage unit 19 to determine whether or not there is a traffic violation in the vehicle when conducting a traffic violation control at a police station or the like. And the determination result is transmitted to the selection unit 14. At this time, the infrared image stored in the third storage unit 19 is also transmitted to the selection unit 14.
  • violation detection in the violation detection unit 11 is performed by the determination unit 11b with reference to various conditions stored in the DB 11a, as in the first and second embodiments.
  • the selection unit 14 receives the determination result that the traffic violation has been detected from the violation detection unit 11, the infrared image that satisfies the conditions necessary for the verification of the traffic violation is selected from the infrared images used when the traffic violation is detected. An image is selected and transmitted to the color setting unit 15.
  • the color setting unit 15 performs a color arrangement process on a part or the whole of the infrared image selected by the selection unit 14 to generate a color image. Then, the color setting unit 15 stores the generated color image in the first storage unit 17 and outputs it to the display unit 18.
  • the traffic violation management system 300 of this embodiment it is possible to efficiently identify a vehicle and a driver when the traffic violation is controlled afterwards without using a sensor or the like for detecting the traffic violation.
  • the effect similar to the said Embodiment 1, 2 that it can implement can be acquired. Furthermore, since only the minimum necessary infrared image is extracted and the color arrangement process is performed, the data processing amount is significantly reduced compared to the case where the color arrangement process is performed on all infrared images acquired by the camera 103. There is also an effect that it can be done. In addition, even in selected infrared images that are subjected to color scheme processing, by performing color scheme processing only on some areas necessary for identifying traffic violations, etc. The enforcement efficiency of traffic violations to be implemented can be improved.
  • the traffic violation management system 400 of this embodiment is common to the first embodiment in that it detects a traffic violation such as an overspeed violation using the sensor 101.
  • the third storage unit 19 temporarily stores all infrared image data continuously captured by the camera 103 and is common to the third embodiment. is doing.
  • the sensor 101 detects the presence or absence of a traffic violation.
  • Near-infrared irradiation by the illumination unit 102 and imaging of an infrared image by the camera 103 are continuously performed as in the second and third embodiments.
  • the image acquisition unit 13 receives the infrared images continuously captured by the camera 103 regardless of whether or not the traffic violation is detected by the violation detection unit 11, and temporarily stores all the infrared images. Send to.
  • the violation detection unit 11 continuously acquired from the third storage unit 19 with reference to the time when the traffic violation was detected by the sensor 101 when the traffic violation was subsequently controlled at a police station or the like. A part of the infrared image is used to determine whether or not the vehicle has a traffic violation, and the determination result is transmitted to the selection unit 14.
  • the infrared image stored in the third storage unit 19 is also transmitted to the selection unit 14.
  • violation detection in the violation detection unit 11 is performed by the determination unit 11b with reference to various conditions stored in the DB 11a, as in the first to third embodiments.
  • the selection unit 14 receives the determination result that the traffic violation has been detected from the violation detection unit 11, the infrared image that satisfies the conditions necessary for the verification of the traffic violation is selected from the infrared images used when the traffic violation is detected. An image is selected and transmitted to the color setting unit 15.
  • the conditions necessary for verifying the traffic violation in the selection unit 14 are stored in the second storage unit 16 as in the first to third embodiments.
  • the color setting unit 15 performs a color arrangement process on a part or the whole of the infrared image selected by the selection unit 14 to generate a color image. Then, the color setting unit 15 stores the generated color image in the first storage unit 17 and outputs it to the display unit 18.
  • the traffic violation management system 400 of this embodiment it is possible to detect in real time whether or not a traffic violation has occurred using a sensor or the like for detecting the traffic violation. Then, when implementing traffic violation control after the fact, it is most suitable for verifying traffic violations from among a plurality of infrared images and infrared video images taken at the time when the traffic violation was detected by the sensor 101. Select an infrared image.
  • the violation vehicle and the driver can be identified efficiently. Furthermore, since only the minimum necessary infrared image is extracted and the color arrangement process is performed, the data processing amount is significantly reduced compared to the case where the color arrangement process is performed on all infrared images acquired by the camera 103. There is also an effect that it can be done. In addition, even in selected infrared images that are subjected to color scheme processing, by performing color scheme processing only on some areas necessary for identifying traffic violations, etc. The enforcement efficiency of traffic violations to be implemented can be improved.
  • the traffic violation management system 500 and the image processing device 510 may have a configuration as shown in FIG. 13, for example.
  • the traffic violation management system 500 is connected to an external traffic violation control device (camera 103) by a network N such as the Internet, a LAN (Local Area Network), or a WAN (Wide Area Network). Connected.
  • the traffic violation management system 500 is connected to the storage device 160.
  • the traffic violation management system 500 includes a computer terminal, and includes a CPU (Central Processing Unit) 150, a RAM (Random Access Memory) 151, an output unit 152, a communication unit 153, an input unit 154, an image processing device 510, and the like. Yes.
  • the CPU 150 executes various arithmetic processes and the like, and executes a predetermined control program that is read into the RAM 151 and expanded. By this control program, the function of each component included in the traffic violation management system 500 is executed.
  • the RAM 151 is configured by a memory element such as SRAM (Static RAM) or DRAM (Dynamic RAM), and stores data generated during the processing of the CPU 150.
  • the output unit 152 has a connection terminal for connecting a cable or the like for transmitting an analog signal such as an image and sound or a digital signal. And the output part 152 is connected to the display part 18 of each embodiment mentioned above via these cables.
  • the output unit 152 converts various types of information read from the storage device 160 into image signals in accordance with instructions from a display control unit (not shown), and outputs the image signals to the display unit 18 via a cable.
  • the communication unit 153 has a connection terminal or a wireless communication interface for connecting a communication cable, and is connected to the network N.
  • the communication unit 153 transmits / receives data to / from a traffic violation control apparatus (sensor 101, camera 103, etc.) connected to the network N.
  • the input unit 154 includes (a mouse, a keyboard, a touch panel operated on a screen, etc.). The input unit 154 accepts input of information by user operation, menu selection, and the like, and notifies the CPU 150 of the accepted operation content.
  • the storage device 160 includes a semiconductor memory, a magnetic recording medium, an optical recording medium, and the like. Note that the first, second, and third storage units 16, 17, and 19 of the above-described embodiments may be included in the storage device 160, or may be separately connected mass storage devices. May be.
  • the storage device 160 may be connected to the traffic violation management system 500 via a network.
  • the areas C1 to C4 are the areas to be subjected to color arrangement processing by the image processing apparatus 10. It was explained as an example. However, the present invention is not limited to this.
  • the color arrangement process may be performed on the entire selected infrared image instead of performing the color arrangement process on a part of the monochrome infrared image as in the first embodiment.
  • a color image including the background and the like can be obtained, additional information including the weather and road surface conditions at the time of the traffic violation or traffic accident can also be acquired.
  • the color arrangement processing is performed only in the minimum area necessary for traffic violation control as in the above embodiment. .
  • an infrared image acquired by installing a camera in the direction of imaging the rear of the traveling vehicle
  • an infrared image that satisfies the conditions necessary for identifying the content of the traffic violation, the offending vehicle, and the owner of the offending vehicle May be selected.
  • the owner since the driver of the violating vehicle cannot be specified from the image, the owner may be specified from the vehicle number of the violating vehicle.
  • the camera when the camera is installed in the direction in which the rear portion of the traveling vehicle is imaged, it is possible to capture so that the front of the traffic light 110 and the offending vehicle are included in one image. In this case, there is a possibility that the violating vehicle ignoring the signal and its owner can be identified from the single image. Therefore, when the identification of the driver is not an indispensable condition for certifying as a traffic violation, the camera may be installed in a direction in which the rear portion of the traveling vehicle is imaged.
  • the traffic violation management system 100, 200, 300, 400 has been described by taking as an example a configuration including the display unit 18 such as a liquid crystal display.
  • the present invention is not limited to this.
  • the traffic violation management system and the image processing apparatus of the present invention may be configured as a system that does not include a display unit such as a liquid crystal display.
  • a display means such as a liquid crystal display as an external device, it is possible to obtain the same effect as described above that it is possible to efficiently control traffic violations with a simple configuration.
  • one sensor or camera may be installed for a plurality of lanes, and an image for specifying the violation content may be acquired.
  • a violation vehicle can be effectively detected from the target vehicles traveling in the plurality of lanes. Therefore, the system configuration can be further simplified.
  • the shooting direction of the camera is not limited to a direction along the road traveling direction.
  • a camera is installed on a support post at the corner of an intersection, and the entire intersection is photographed. Using the image, the contents of the traffic violation, the vehicle in violation, the driver and owner of the vehicle in violation are identified. May be.
  • a camera is installed on the traffic light pole provided at the corner of the intersection and the entire intersection is photographed, and the image of the traffic violation, the violation vehicle, the driver and owner of the violation vehicle, etc. are used. You may specify. In this case, since the camera can capture the entire intersection, there is a possibility that the violating vehicle that committed the violation of prohibition of turning right and left, the driver, and the like can be identified.
  • traffic violations that can be detected and managed in this system include traffic prohibition / U-turn prohibition violation, traffic classification violation, reverse running, overtaking prohibition violation, designated crossing prohibition violation, designated place temporary stoppage, neglected parking violation, This includes violations of traffic zones, priority traffic zone violations such as route buses, non-retention distances, no lights, and the use of mobile phones.
  • traffic violations that can be detected by sensors, cameras, etc. can be detected and managed according to the laws stipulated in each country. It is.
  • the present invention is not limited to this.
  • the present invention may be applied to a traffic violation management system for controlling traffic violations of bicycles and pedestrians. Even in this case, traffic violations caused by bicycles or pedestrians can be efficiently controlled with the minimum necessary processing load as in the above embodiments.
  • the image processing apparatus of the present invention selects an image that satisfies a predetermined condition from an infrared image (monochrome image) acquired by a surveillance camera, a security camera, or the like, and obtains a color image by color arrangement processing.
  • a predetermined condition from an infrared image (monochrome image) acquired by a surveillance camera, a security camera, or the like.
  • It may be applied to criminal investigations. More specifically, the presence or absence of specific vehicles, traffic accidents, the presence or absence of pedestrians, the discovery of wanted criminals (arrangement vehicles), the presence or absence of bicycles, the passage of railroads (such as within a railroad crossing), and specific information such as children and elderly
  • the presence or absence of a person in the age group is detected, and a color arrangement process is performed on the automatically selected infrared image.
  • the image processing apparatus achieves an effect that the amount of data processing can be suppressed to a minimum by performing a color arrangement process on a minimum necessary monochrome image to obtain a color image.
  • the present invention can be widely applied to various apparatuses that acquire images.
  • Image Processing Device 11 Violation Detection Unit 11a DB 11b Determination means 12 Illumination control unit 13 Image acquisition unit 14 Selection unit 15 Color setting unit 15a Area setting unit 16 Second storage unit 17 First storage unit 18 Display unit 19 Third storage unit 31 Violation content display region 32 Specific image display Area 33 Person information display area 34 Image information display area 35 Switching button 100 Traffic violation management system 101 Sensor 102 Illumination section 103 Camera (imaging device) 110 traffic light 111 post 150 CPU (Central Processing Unit) 151 RAM (Random Access Memory) 152 Output unit 153 Communication unit 154 Input unit 160 Storage device 200 Traffic violation management system 210 Image processing device 300 Traffic violation management system 310 Image processing device 400 Traffic violation management system 410 Image processing device 500 Traffic violation management system 510 Image processing device A1, A2 Vehicle C1, C2, C3, C4 area (color scheme area) D1, D2 area (non-colored area) P1 Violation specifying image P2, P3 Person specifying image S1, S2, S3 screen

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Traffic Control Systems (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

画像処理装置(10)は、画像取得部(13)、違反検出部(11)、選択部(14)、色設定部(15)を備えている。画像取得部(13)は、カメラ(103)によって撮像された複数の赤外線画像を取得する。違反検出部(11)は、車両の交通違反の有無を検出する。選択部(14)は、違反検出部(11)において車両の交通違反が検出された場合には、画像取得部(13)において取得された複数の赤外線画像の中から、当該車両の交通違反の特定に必要な条件を満たす赤外線画像を選択する。色設定部(15)は、選択部(14)において選択された赤外線画像に対して配色処理を行い、複数色によって表されるカラー画像を出力する。

Description

画像処理装置およびこれを備えた交通違反管理システム
 本発明は、画像処理装置およびこれを備えた交通違反管理システムに関する。
 従来、カメラ等の撮像装置で撮像した車両の撮像画像を用いて、その車両、運転者等を判別する車両認識装置が提案されている。このような車両認識装置は、交通違反の取り締まりや、事故対応、犯罪捜査(犯罪に使用された車両の発見)等への利用が有効と考えられている。
 一般的に、このような撮像画像としては、車両等の被写体に対して近赤外線を照射し、その反射光を撮像した赤外線画像が用いられる。これは、夜間などの暗い状況でも、画像を取得可能とするためである。
 ここで、赤外線は可視光線ではないため、赤外線画像はモノクロ画像となる。よって、事故対応や犯罪捜査においては、白黒の画像では車両の色や車両番号等、十分な情報が得られないおそれがある。
 例えば、特許文献1には、複数の異なる波長の赤外光を被写体へ照射し、被写体からの各波長の反射特性を利用して色推定を行い、赤外線画像をカラー化する技術が開示されている。
 しかしながら、上記従来の技術を交通違反の検出に適用した場合には、以下に示すような問題点を有している。
 すなわち、上記公報に開示された技術では、交通違反の検出等に使用される複数の赤外線画像に対して配色処理を実施してカラー画像を得ることは可能である。しかし、例えば、事故の多い交差点等を動画撮影して交通違反の検出を行う場合等、連続的に大量の赤外線画像を取得する際には、全ての赤外線画像に配色処理を実施してカラー画像を得ることになるため、データ処理量が膨大となってしまうという問題がある。
特開2011-50049号公報 特開2014-236371号公報 特開2002-171519号公報 特開2005-45559号公報 特開2001-36916号公報 特開2012-65312号公報 特開2003-242440号公報 特開平8-55296号公報 特開2008-299645号公報 特開2014-115799号公報
 本発明の課題は、配色処理のデータ処理量を抑制することが可能な画像処理装置およびこれを備えた交通違反管理システムを提供することにある。
 第1の発明に係る画像処理装置は、画像取得部と、違反検出部と、選択部と、色設定部と、を備えている。画像取得部は、撮像装置によって撮像された複数のモノクロ画像を取得する。違反検出部は、車両の交通違反の有無を検出する。選択部は、違反検出部において車両の交通違反が検出された場合には、画像取得部において取得された複数のモノクロ画像の中から、当該車両の交通違反の特定に必要な条件を満たすモノクロ画像を選択する。色設定部は、選択部において選択されたモノクロ画像に対して配色処理を行い、複数色によって表されるカラー画像を出力する。
 ここでは、例えば、交差点等を走行する車両を含む被写体に対して照射された赤外線の反射光を撮像する撮像装置によって撮像された複数の赤外線画像(モノクロ画像の一例)が取得される。そして、赤外線画像等のモノクロ画像に含まれる車両の交通違反が検出されると、これら複数のモノクロ画像の中から、交通違反の立証に必要な条件を満たすモノクロ画像が選択される。さらに、選択されたモノクロ画像複数色で配色処理が施されたカラー画像が出力される。
 ここで、撮像装置によって取得されるモノクロ画像は、所定時間間隔で断続的に撮像された画像であってもよいし、動画撮影のように連続的に撮像された画像であってもよい。
 また、交通違反の検出は、車両の走行速度等の車両の状態を検知するセンサ、取得されたモノクロ画像等を用いて行うことができる。また、ここで検出される交通違反としては、例えば、信号無視、速度超過、通行禁止違反、通行区分違反、追い越し禁止違反、指定場所一時不停止、放置駐車違反、通行帯違反、路線バス等優先通行帯違反、車間距離不保持、無灯火、携帯電話使用等の各種違反が含まれる。なお、交通違反については、各国の法律等で規定された違反内容に合わせて、適宜、センサや画像に基づく違反検出の設定を変更することで検出が可能である。
 さらに、検出された交通違反の立証には、例えば、交通違反が発生しやすい交差点や直進道路に設置されたセンサの検知結果やカメラ等の撮像手段によって取得された画像等が用いられる。また、立証に必要な条件を満たすために、例えば、連続的に撮像された複数のモノクロ画像の中から違反内容、違反車両、違反した運転者等の検出に適した画像を選択する際に、画像に含まれる車両の位置、信号機、運転者等の画像の鮮明さ等に基づいて、最適なものが選択される。そして、選択される画像としては、交通違反の内容等に応じて、1枚であってもよいし複数であってもよい。
 そして、選択されたモノクロ画像に対する配色処理とは、モノクロのモノクロ画像における赤外線強度の分布に応じて割り当てられた複数の色を、画像中の各部分に反映させてカラー画像を形成する処理を意味している。具体的には、例えば、照明部から照射された複数の異なる波長を持つ近赤外線の反射強度を検出して、それぞれの反射強度に応じて割り当てられた複数の色を用いて配色処理を行う等、種々の公知の手法によってカラー画像を形成することができる(上記特許文献1~6参照)。
 これにより、警察署等において交通違反を検出する際に、モノクロのモノクロ画像と比較して、警察官等は、違反車両の色、車両番号(ナンバープレート)や運転者等、より多くの情報をカラー画像によって得ることができる。
 また、モノクロ画像に対する配色処理は、交通違反の立証に必要な条件を満たす画像を選択して選択的に実施される。このため、全てのモノクロ画像に対して配色処理を実施する場合と比較して、データ処理量を低減して処理負担を軽減することができる。
 この結果、交通違反の取締りを効率よく実施するとともに、データ処理量を最小限に抑制することができる。
 第2の発明に係る画像処理装置は、第1の発明に係る画像処理装置であって、色設定部は、選択部において選択されたモノクロ画像における交通違反に関連する箇所のみ配色処理を行う。
 ここでは、選択部によって選択されたモノクロ画像に対して、交通違反に関連する箇所のみ配色処理が施される。
 すなわち、交通違反に関連しない背景、道路等の部分については配色処理が施されることなく、例えば、違反車両、車両番号(ナンバープレート)、信号機、運転者の服装等の交通違反に関連する箇所のみ配色処理が施される。また、常に同じ色となる車両のタイヤ等についても同様に、配色処理の対象外とされる。
 なお、配色処理が施される箇所は、例えば、検出された交通違反の種類に応じて変更されてもよい。
 これにより、交通違反に関連する箇所のみ配色処理されたカラー画像を得ることで、交通違反の取締り効率を向上させることができるとともに、選択された画像の全体に配色処理する場合と比較して、さらにデータ処理量を低減して処理負担を軽減することができる。
 第3の発明に係る画像処理装置は、第2の発明に係る画像処理装置であって、色設定部は、交通違反の取締りの対象となる車両の色、車両番号(ナンバープレート)の色、信号機の色のうち少なくとも1つの配色処理を行う。
 ここでは、交通違反の取締りの対象となる車両の色、車両番号(ナンバープレート)の色、信号機の色に関して、配色処理を施してカラー化する。
 これにより、必要最小限の処理により、交通違反に関連する箇所をカラー画像として得ることができる。
 第4の発明に係る画像処理装置は、第1の発明に係る画像処理装置であって、色設定部は、選択部において選択されたモノクロ画像の全体に配色処理を行う。
 ここでは、選択部によって選択されたモノクロ画像の全体に対して配色処理を行う。
 これにより、選択されたモノクロ画像をカラー画像として得ることで、モノクロのモノクロ画像をそのまま用いる場合と比較して、交通違反に関するより多くの情報を得ることができる。
 第5の発明に係る画像処理装置は、第1から第4の発明のいずれか1つに係る画像処理装置であって、色設定部において配色処理が施されたカラー画像を保存する第1記憶部を、さらに備えている。
 ここでは、撮像された複数のモノクロ画像の中から選択されて配色処理されたカラー画像を、第1記憶部に保存する。
 これにより、警察署等において、第1記憶部に保存されたカラー画像を証拠として用いて、事後的に、交通違反の取締りを実施することができる。
 また、上述のように、大量に取得されたモノクロ画像の中から選択された最小限の枚数、あるいは1枚の画像中の一部だけが配色処理されているため、第1記憶部の容量が増大してしまうことを回避することができる。
 第6の発明に係る画像処理装置は、第1から第5の発明のいずれか1つに係る画像処理装置であって、反検出部は、交通違反の取締りの対象となる車両の状態を検出するセンサである。
 ここでは、撮像装置とともに交差点や直進道路等に設置された速度センサを用いて、交通違反の検出を行う。
 ここで、センサを用いて検出可能な交通違反としては、例えば、速度超過、信号無視、通行禁止違反、通行区分違反、追い越し禁止違反、指定場所一時不停止、放置駐車違反、通行帯違反、路線バス等優先通行帯違反、車間距離不保持、無灯火等の各種違反が含まれる。
 これにより、センサによって交通違反の有無を検出しつつ、検出された交通違反の違反車両を含むモノクロ画像をカラー画像化することで、効率よく交通違反の取締りを実施することができる。
 第7の発明に係る画像処理装置は、第1から第6の発明のいずれか1つに係る画像処理装置であって、違反検出部は、交通違反の取締りの対象となる車両を撮像する撮像装置である。
 ここでは、交差点等に設置された撮像装置を用いて、交通違反の検出を行う。
 ここで、撮像装置によって検出される交通違反としては、例えば、信号無視、速度超過、通行禁止違反、通行区分違反、追い越し禁止違反、指定場所一時不停止、放置駐車違反、通行帯違反、路線バス等優先通行帯違反、車間距離不保持、無灯火、携帯電話使用等、画像を用いて検出可能な各種違反が含まれる。
 また、交通違反を検出するための撮像装置は、上述したモノクロ画像を撮像するための撮像装置と共通であってもよいし、交通違反の検出専用の撮像装置を用いてもよい。
 これにより、画像を用いて交通違反の有無を検出しつつ、検出された交通違反の違反車両を含むモノクロ画像をカラー画像化することで、効率よく交通違反の取締りを実施することができる。
 第8の発明に係る画像処理装置は、第1から第7の発明のいずれか1つに係る画像処理装置であって、選択部において複数のモノクロ画像の中から配色処理が施されるモノクロ画像を選択する際に、交通違反の特定に必要な条件を記憶した第2記憶部を、さらに備えている。
 ここでは、選択部において選択される配色処理が施されるべきモノクロ画像の選択に必要な条件を、第2記憶部に格納している。
 ここで、モノクロ画像の選択に必要な条件とは、例えば、交通違反が信号無視の場合には信号機が含まれる画像であること、速度超過違反の場合には違反車両および運転者が含まれる画像であること、等が含まれる。
 これにより、第2記憶部に保存された条件に基づいて、配色処理が施されるべきモノクロ画像を選択してカラー画像を形成することで、各種交通違反に対応する取締りを実施することができる。
 第9の発明に係る画像処理装置は、第1から第8の発明のいずれか1つに係る画像処理装置であって、選択部は、モノクロ画像に映り込んだ対象物、対象者、内容、鮮明さに基づいて、交通違反の特定に必要な条件を満たすモノクロ画像を選択する。
 ここでは、選択部におけるモノクロ画像の選択時には、交通違反に関係する車両や人物を含む画像の鮮明さ等、交通違反の特定に必要な条件を満たすモノクロ画像を選択して抽出する。
 これにより、交通違反の検出を効果的に実施することができる。
 第10の発明に係る画像処理装置は、第1から第9の発明のいずれか1つに係る画像処理装置であって、違反検出部は、車両の速度超過、信号無視、通行禁止違反、通行区分違反、追い越し禁止違反、指定横断等禁止違反、指定場所一時不停止、駐停車禁止、過積載のうち、少なくとも1つを検出する。
 ここでは、上記の各種交通違反を検出して、違反の立証に必要な条件を満たすモノクロ画像に配色処理を施してカラー画像を得る。
 これにより、各種交通違反の取締りを効果的に実施することができる。
 第11の発明に係る画像処理装置は、第1から第10の発明のいずれか1つに係る画像処理装置であって、モノクロ画像には、赤外線画像が含まれる。
 ここでは、カメラ等の撮像装置によって取得されるモノクロ画像として、赤外線画像を用いる。
 これにより、例えば、近赤外線の反射光を赤外線カメラ等で撮像して得られる赤外線画像に対して配色処理を実施することで、交通違反の取締りを効果的に実施するとともに、データ処理量を低減して処理負担を軽減することができる。
 第12の発明に係る交通違反管理システムは、第1から第11の発明のいずれか1つに係る画像処理装置と、車両に対して赤外光を照射する照明部と、照明部から被写体に対して照射された赤外光の反射光を撮像する撮像装置と、を備えている。
 ここでは、上述した画像処理装置と、交通違反の検出を行うために、車両に対して赤外光を照射する照明部と、赤外光の反射光を撮像する撮像装置とを含む交通違反管理システムを構築する。
 ここで、照明部および撮像装置は、例えば、交差点や直進道路等、交通違反が多い場所に設置されていればよい。一方、画像処理装置は、例えば、交通違反の取締りを行う警察署等に設置されていてもよいし、画像処理装置の一部(画像取得部等)を、撮像装置等が設置された屋外に設置してもよい。
 これにより、本交通違反管理システムによって、交通違反の取締りを効率よく実施するとともに、データ処理量を最小限に抑制することができる。
 第13の発明に係る画像処理装置は、画像取得部と、選択部と、色設定部と、を備えている。画像取得部は、撮像装置によって取得された複数の赤外線画像(モノクロ画像の一例)を取得する。選択部は、所定の条件を満たした場合に、画像取得部において取得された複数の赤外線画像等のモノクロ画像の中から、所定の条件に該当するモノクロ画像を選択する。色設定部は、選択部において選択されたモノクロ画像に対して配色処理を行い、複数色によって表されるカラー画像を出力する。
 ここでは、例えば、交差点等に設置された交通監視カメラ、その他の監視カメラや街中に設置された防犯カメラ等の撮像装置によって撮像された複数のモノクロ画像が取得される。そして、所定の条件を満たした場合には、これら複数のモノクロ画像の中から、所定の条件に該当するモノクロ画像が選択される。さらに、選択されたモノクロ画像複数色で配色処理が施されたカラー画像が出力される。
 ここで、撮像装置によって取得されるモノクロ画像は、所定時間間隔で断続的に撮像された画像であってもよいし、動画撮影のように連続的に撮像された画像であってもよい。
 また、所定の条件とは、例えば、交差点等での事故発生時や容疑者等の事件の関係者がモノクロ画像中に映り込んでいる等、が考えられる。
 さらに、交通事故や事件の関係車両、関係者等を特定するために、例えば、連続的に撮像された複数のモノクロ画像の中から事故内容、事故車両、運転者等、あるいは事件の関係者等の検出に適した画像を選択する際には、画像に含まれる車両の位置、信号機、運転者、関係者等の画像の鮮明さ等に基づいて、最適なものが選択される。そして、選択される画像としては、1枚であってもよいし複数であってもよい。
 そして、選択されたモノクロ画像に対する配色処理は、例えば、複数の異なる波長を持つ近赤外線の反射強度を検出してそれぞれの反射強度に応じた配色処理を行う等、種々の公知の手法によってカラー画像を形成することができる(上記特許文献1~6参照)。
 これにより、警察署等において事故や事件の検証を行う際に、モノクロのモノクロ画像を用いる場合と比較して、警察官等は、事故車両や信号機の色、事故や事件の関係者等、より多くの情報をカラー画像によって得ることができる。
 また、モノクロ画像に対する配色処理は、大量に取得されたモノクロ画像の中から、所定の条件を満たす画像を選択して選択的に実施される。このため、全てのモノクロ画像に対して配色処理を実施する場合と比較して、データ処理量を低減して処理負担を軽減することができる。
 この結果、事件や事故の検証を効率よく実施するとともに、データ処理量を最小限に抑制することができる。
 第14の発明に係る画像処理装置は、第13の発明に係る画像処理装置であって、選択部は、車両の交通違反、自転車の交通違反、歩行者の交通違反のうち、少なくとも1つを立証するために必要な条件を満たすモノクロ画像を選択する。
 ここでは、道路や街中に設置された交通監視カメラや防犯カメラ等によって撮像された複数のモノクロ画像の中から、車両、自転車、歩行者の交通違反を検出するために必要な条件を満たす画像を選択して抽出する。
 これにより、配色処理が施されたカラー画像を用いて、車両や自転車、歩行者による各種の交通違反を効果的に検出することができる。
 第15の発明に係る画像処理装置は、第13の発明に係る画像処理装置であって、選択部は、特定の車両、人物を特定するために必要な条件を満たすモノクロ画像を選択する。
 ここでは、事故や事件等に関係する特定の車両、人物を特定するために必要な条件を満たすモノクロ画像を選択し、配色処理を実施する。
 ここで、特定の車両、人物を特定するための条件とは、例えば、事故や事件の当事車両、当事者(加害者、被害者、容疑者等)が映り込んだ画像を探す際に、車両の色や人物の服装、髪型等の条件が設定される。
 これにより、事故や事件の当事者を含むモノクロ画像を効率よく選択して、その画像を配色処理が施されたカラー画像として出力することができる。
 この結果、出力されたカラー画像を用いて、事故や事件の解決に効果的に貢献することができる。
(発明の効果)
 本発明に係る画像処理装置によれば、配色処理のデータ処理量を抑制することができる。
本発明の一実施形態に係る画像処理装置を含む交通違反管理システムの構成を示す図。 図1の交通違反管理システムに含まれるカメラやセンサ等の交差点における設置位置を示す図。 図1の交通違反管理システムに含まれる画像処理装置の違反検出部における処理内容を示すブロック図。 図1の交通違反管理システムに含まれる画像処理装置の選択部における処理内容を示すブロック図。 図1の交通違反管理システムに含まれる画像処理装置の色設定部における処理内容を示すブロック図。 図5の色設定部によって配色処理される赤外線画像の領域を示す図。 (a)および(b)は、図1の交通違反管理システムに含まれる画像処理装置の表示部に表示されるカラー画像を含む交通違反の表示態様を示す図。 図1の交通違反管理システムに含まれる画像処理装置の表示部に表示されるカラー画像を含む交通違反の表示態様を示す図。 図1の交通違反管理システムによる赤外線画像の配色処理の流れを示すフローチャート。 本発明の他の実施形態に係る画像処理装置を含む交通違反管理システムの構成を示す図。 本発明のさらに他の実施形態に係る画像処理装置を含む交通違反管理システムの構成を示す図。 本発明のさらに他の実施形態に係る画像処理装置を含む交通違反管理システムの構成を示す図。 本発明のさらに他の実施形態に係る交通違反管理システムの構成例を示す図。
 (実施形態1)
 本発明の一実施形態に係る画像処理装置10を備えた交通違反管理システム100について、図1~図9を用いて説明すれば以下の通りである。
 本実施形態に係る交通違反管理システム100では、交差点を通過する車両A1,A2に対して照射された近赤外線の反射成分をカメラ(撮像装置)103を用いて撮像し、警察署等において交通違反の取締りを実施する。
 <交通違反管理システム100の構成>
 交通違反管理システム100は、図1に示すように、センサ101と、照明部102と、カメラ(撮像装置)103と、画像処理装置10と、を備えている。
 センサ101は、例えば、走行中の車両A1,A2の速度を検出する速度検知センサであって、交通違反の検知結果を、画像処理装置10に含まれる違反検出部11へと送信する。そして、センサ101は、例えば、図2に示すように、交差点に設置された支柱111に取り付けられている。
 照明部102は、例えば、複数の異なる波長を持つ近赤外線を照射する装置であって、例えば、センサ101と同様に、図2に示すように、交差点に設置された支柱111に取り付けられている。そして、照明部102は、交通違反の対象となる車両A1,A2等に対して近赤外線を照射する。また、照明部102は、画像処理装置10に含まれる照明制御部12によって、照射タイミング等を制御される。
 なお、本実施形態において、照明部102から照射される近赤外線とは、赤色の可視光線に近い0.7~2.5μmの波長を持つ電磁波を意味している。ここで、近赤外線は、可視光線に近い特性を持つことを利用して、赤外線カメラ等に使用される。
 カメラ103は、照明部102から車両A1等へ照射された近赤外線の反射を撮像する。そして、カメラ103は、例えば、センサ101および照明部102と同様に、図2に示すように、交差点に設置された支柱111に取り付けられている。
 なお、カメラ103は、明るい時間帯は可視光を含む画像を取得し、暗い時間帯は近赤外線含む画像を撮像するように切り替えられてもよい。また、カメラ103による画像の撮像は、連続的に行われてもよいし、交通違反を検出した際に随時、行われてもよい。
 また、本実施形態では、カメラ103によって取得されるモノクロ画像として、赤外線画像を用いているが、他のモノクロ画像を用いてもよい。
 <画像処理装置10の構成>
 画像処理装置10は、カメラ103によって撮像されたモノクロの赤外線画像(モノクロ画像の一種)の中から配色処理を施す画像を選択して、その選択された画像の全体あるいは一部に対して配色処理を施して、カラー画像を生成する。そして、画像処理装置10は、例えば、交通違反の取り締まりを行う警察署等に設置される。また、画像処理装置10は、図1に示すように、違反検出部11、照明制御部12、画像取得部13、選択部14、色設定部15、第2記憶部16、第1記憶部17および表示部18を備えている。
 違反検出部11は、交差点等に設置された走行中の車両A1,A2の速度検出用のセンサ101における検知結果を受信して、交通違反の有無を検出する。
 具体的には、違反検出部11は、図3に示すように、DB(データベース)11aと、判定手段11bと、を有している。
 DB11aには、交通違反の立証条件に関する情報が保存されている。立証条件としては、例えば、速度超過違反の場合には、センサ101の設置場所、その設置場所の制限速度、速度超過違反として取締りを行うための下限速度等の情報が含まれる。DB11aには、取締りを実施する各種交通違反の内容に応じて、それぞれの交通違反の立証に必要な条件等に関する情報が保存される。
 判定手段11bは、DB11aに保存された各種交通違反の立証条件と、センサ101から受信した検知結果(センサ出力)とを参照して、交通違反が発生しているか否かを判定する。例えば、速度超過違反の場合には、センサ101において76km/hの走行速度が検知され、この道路の制限速度が40km/hだったとすると、36km/hの速度超過違反として判定する。
 そして、判定手段11bは、速度超過違反の発生有りとして、照明制御部12および画像取得部13に対して違反検出情報を出力する。
 照明制御部12は、車両A1,A2に対して近赤外線を照射する照明部102を制御する。具体的には、違反検出部11の判定手段11bから違反検出情報を受信すると、その交通違反の対象となる走行中の車両A1等に対して、即座に近赤外線を照射するように、照明部102を制御する。
 画像取得部13は、カメラ103によって撮像された複数の赤外線画像を取得する。そして、画像取得部13は、違反検出部11の判定手段11bから違反検出情報を受信すると、その交通違反の対象となる走行中の車両A1等に対して照射された近赤外線の反射を含む画像を撮像するようにカメラ103に撮影指令を送信する。そして、画像取得部13は、撮影指令を受けて撮像された交通違反に関係する赤外線画像、あるいは連続的に撮像された動画等の連続撮像画像を、カメラ103から受信する。
 選択部14は、画像取得部13において取得された複数の赤外線画像について、交通違反の検出に必要な条件を満たす1枚または複数枚の赤外線画像を選択する。
 具体的には、選択部14は、まず、図4に示すように、画像取得部13から受信した複数の赤外線画像と、違反検出情報(交通違反の有無)とに基づいて、交通違反に関連する赤外線画像を選択する。次に、選択部14は、第2記憶部16に保存された選択条件に基づいて、交通違反の証拠画像として最適な赤外線画像をさらに選択する。
 なお、選択部14において選択される赤外線画像は、交通違反の種類や赤外線画像の状態等に応じて、1枚であってもよいし複数枚を組み合わせてもよい。
 ここで、後段にて詳述する第2記憶部16は、交通違反の証拠画像として適した画像の条件を記憶している。例えば、交通違反の種類に対して、赤外線画像に映っていなければならない内容(信号機やナンバープレート等)が対応付けて記憶されていればよい。
 また、本実施形態では、選択部14は、選択された赤外線画像の情報と、残りの非選択の赤外線画像とを分けて出力する。
 色設定部15は、選択部14において選択された交通違反に関連する赤外線画像に対して、配色処理を実施する。
 具体的には、色設定部15は、図5に示すように、配色処理を行う領域(配色領域)を設定する領域設定部15aを有している。領域設定部15aは、予め設定された条件等に基づいて、例えば、車両A1等を含む赤外線画像の全体、あるいは一部だけに配色処理を行う。
 そして、色設定部15は、図5に示すように、選択された赤外線画像の情報と、残りの非選択の赤外線画像とを受信して、選択された赤外線画像に対して配色処理を実施する。そして、色設定部15は、配色処理されたカラー画像と、非選択の赤外線画像とを、第1記憶部17へ送信して保存させる。また、色設定部15は、配色処理されたカラー画像を、液晶表示ディスプレイ等の表示部18にも出力する。
 ここで、色設定部15によって配色処理される赤外線画像は、背景も含めて画像全体がカラー化されてもよいし、速度超過した車両A1の車体の色、車両番号(ナンバープレート)の色、運転者の顔、信号機等に限定してカラー化してもよい。
 具体的には、領域設定部15aが、図6に示すように、違反特定用画像P1における車体の領域C1、車両番号(ナンバープレート)の領域C2、信号機の領域C3、運転者の領域C4を、配色領域として設定する。そして、色設定部15が、その配色領域に対して配色処理を実施する。
 なお、配色処理される領域C1~C4については、予め第1記憶部17等に配色領域とする条件等を記憶させておき、領域設定部15aにおいて、赤外線画像に含まれる物体(車両、人物等)の形状等に応じて、配色領域として設定される。
 ここで、背景や路面を含む領域D1等、その他の領域については、交通違反の有無、違反車両、運転者の特定等にはほとんど影響を及ぼさないため、配色処理の対象にはせず、非配色領域とする。
 また、車両のタイヤ部分の領域D2については、車両の種類によらず、常に黒色であることが確定している。このため、この領域D2についても同様に、配色処理の対象にはせず、非配色領域とする。
 なお、色設定部15における配色処理の具体的な流れについては、後段にて詳述する。
 第2記憶部16は、上述した選択部14において最適な赤外線画像の選択を実施するための条件に関する情報を保存している。
 ここで、第2記憶部16に保存されている交通違反の検出に必要な画像条件とは、例えば、交通違反が速度超過違反の場合には違反車両A1および運転者が含まれる画像であること等がある。また、交通違反が信号無視の場合には、信号機が含まれる画像であること等がある。そして、いずれの交通違反であっても、撮像された対象物が鮮明に撮像されており、ナンバープレートの文字認識や運転者の顔認識等に利用できること、等も含まれる。
 第1記憶部17は、色設定部15から受信した配色処理されたカラー画像と、非選択の赤外線画像とを保存する。
 表示部18は、例えば、交通違反の取締りを行う警察署等に設置された液晶表示ディスプレイやPC用のモニタ等であって、色設定部15において配色処理が施されたカラー画像や交通違反に関する情報を表示する。
 <表示部18における表示態様>
 本実施形態の交通違反管理システム100では、交通違反の取締りを実施する警察署等に設置された表示部18において、以下のような表示態様で、カラー画像を含む交通違反に関する各種情報を表示させる。
 (速度超過の場合)
 例えば、交通違反が速度超過の場合には、図7(a)および図7(b)に示すように、表示部18の複数の表示画面にわたって、1つの交通違反に関する情報を表示する際の表示画面S1,S2を表示する。
 表示画面S1は、図7(a)に示すように、違反内容表示領域31、特定用画像表示領域32、および画像情報表示領域34という3つの表示領域を有している。
 違反内容表示領域31には、違反内容、違反場所が表示される。
 特定用画像表示領域32には、違反内容表示領域31に表示された違反内容を立証するために配色処理が施されたカラー画像が表示される。本実施形態では、図7(a)に示すように、違反特定用画像P1および人物特定用画像P2を用いて速度超過の違反を立証しており、そのうちの1枚が表示画面S1内に表示される。そして、図7(a)に示す三角形の切替ボタン35をクリックすることで、人物特定用画像P2等が表示される。
 画像情報表示領域34には、表示画面S1に表示されたカラー画像の元になる赤外線画像の撮像日時として、年月日秒が記載されている。そして、速度超過の違反の場合、測定された車速および制限速度からの超過速度が記載されている。
 表示画面S2は、2枚目の違反特定用画像P1の表示状態から、さらに「次へ」の切替ボタン35をクリックすると表示される。表示画面S3は、図7(b)に示すように、違反内容表示領域31、特定用画像表示領域32、および画像情報表示領域34という3つの表示領域を有している。
 違反内容表示領域31には、表示画面S1と同様に、違反内容(例えば、速度超過)、違反場所が表示されている。
 特定用画像表示領域32には、違反内容表示領域31に表示された違反に関連する人物を立証するための人物特定用画像P2が表示される。本実施形態では、図7(b)に示すように、1枚の人物特定用画像P2を用いて速度超過の違反を犯した運転者等が立証されている。そして、図7(b)に示す三角形の切替ボタン35(前へ、次へ)をクリックすることで、前画面(表示画面S1)か、次画面かが表示される。
 次画面に表示される表示内容としては、この違反に関連する情報として、残りの違反特定用画像や、違反車両の運転者、あるいは所有者に対する違反金の請求書類のデータ等が考えられる。なお、カラー画像を表示する順番は、適宜変更することが可能である。
 (信号無視の場合)
 また、交通違反が信号無視の場合には、図8に示すように、1つの交通違反に関する情報を1つの画面内に全て表示する際の表示画面S3を示している。
 表示画面S3は、図8に示すように、違反内容表示領域31、特定用画像表示領域32、および人物情報表示領域33という3つの表示領域を有している。
 違反内容表示領域31には、違反内容(例えば、赤信号無視)、違反場所、カラー画像の元になる赤外線画像の撮像日時が表示されている。本実施形態では、図8に示すように、3枚のカラー画像を用いて違反を立証しているため、それぞれのカラー画像が撮像された年月日秒まで記載される。
 特定用画像表示領域32には、違反内容表示領域31に表示された違反内容および人物を立証するために配色処理が施されたカラー画像が表示される。本実施形態では、図8に示すように、1枚の違反特定用画像P1、2枚の人物特定用画像P2,P3が表示されている。
 違反特定用画像P1は、対向車線の信号が赤信号である状態で、交差点内を対象車両が走行している状態を示している。通常、対向車線の信号と対象車両の走行している車線の信号とは、同期して同じ表示になっている。このため、このカラー画像は違反特定用画像P1として、違反の立証が可能と判定され抽出される。
 人物特定用画像P2は、違反特定用画像P1において信号無視と判定された違反車両の前面のカラー画像のうち、画像処理によって車両番号(ナンバープレート)の部分を拡大して表示している。このカラー画像によって、違反車両の車両番号を特定することで、予め登録されている車検情報等を参照し、違反車両の所有者の氏名、あるいは使用者(企業)の名称等を特定することができる。
 人物特定用画像P3は、違反特定用画像P1において信号無視と判定された違反車両の前面のカラー画像のうち、画像処理によって運転席付近を拡大して表示している。このカラー画像によって、違反車両の運転者、同乗者の顔を特定することで、予め登録されている免許証の顔写真情報等を参照し、違反車両の運転者、同乗者の氏名を特定することができる。
 人物情報表示領域33には、特定用画像表示領域32に表示された人物特定用画像P2,P3を用いて特定された人物(運転者、所有者、使用者等)に関する情報を表示する。例えば、表示される運転者情報としては、運転者の氏名、住所、免許証番号、違反の履歴、減点数等のデータが含まれる。
 ここで、本実施形態の交通違反管理システム100では、上述したように、画像取得部13から受信した大量の赤外線画像の中から交通違反の検出に最適な画像に対して選択的に配色処理を実施している。
 これにより、赤外線画像の全てに配色処理を施す場合と比較して、配色処理に要するデータ処理の負担を大幅に低減することができる。
 そして、最終的に、赤外線画像とカラー画像とが保存される第1記憶部17は、赤外線画像の全てに配色処理が施されたカラー画像を保存する場合と比較して、記憶容量を大幅に削減することができる。
 <配色処理について>
 本実施形態の交通違反管理システム100では、画像処理装置10において、カメラ103によって取得された大量の赤外線画像の中から、選択部14において選択された1または複数の赤外線画像に対して、色設定部15が配色処理を実施する。
 色設定部15における配色処理は、例えば、特開2011-50049P号公報に開示された方法等、公知技術として周知の方法を用いることができる。
 具体的には、複数の波長領域を持つ近赤外線を照明部102から被写体に対して照射するとともに、カメラ103において近赤外線の波長強度に応じた赤外線画像を取得する。
 そして、3つの波長領域(第1波長領域~第3波長領域)に対応するそれぞれの赤外線画像を用いて、最も可視光線に近い第1波長領域の赤外線が多い領域にR(赤)、次に可視光線に近い第2波長領域の赤外線が多い領域にG(緑)、最も可視光線から離れた第3波長領域の赤外線が多い領域にB(青)を割り当てて配色処理を実施する。
 これにより、モノクロの赤外線画像を用いて、カラー画像を得ることができる。
 なお、モノクロの赤外線画像をカラー画像化する技術としては、この方法に限らず、他の公知技術を用いてもよい(上記特許文献2~6参照)。
 <本実施形態の配色処理フロー>
 本実施形態の交通違反管理システム100では、画像処理装置10において、図9に示すフローチャートに従って、カメラ103によって取得した赤外線画像の中から、交通違反の検出、違反車両の特定等に必要な条件を満たす赤外線画像を選択して配色処理を行う。
 具体的には、図9に示すように、まず、ステップS11において、センサ101において、例えば、速度超過違反の違反車両を検出する。そして、センサ101は、違反検知情報を、画像処理装置10の違反検出部11へと送信する。
 次に、ステップS12において、違反検出部11において、DB11aに保存された各種条件等を参照して、交通違反の検出の有無について判定を行う。
 ここで、交通違反の発生有りと判定した場合には、ステップS13へと進む。一方、交通違反の発生無しと判定した場合には、再び、ステップS11へと戻る。
 次に、ステップS13において、違反検出部11から違反検出情報を受信した照明制御部12が照明部102に照明指令を出す。
 次に、ステップS14において、照明制御部12から照明指令を受信した照明部102は、違反車両に対して近赤外線を照射する。
 次に、ステップS15において、照明部102から近赤外線が照射されるタイミングに同期して、カメラ103が違反車両を含む赤外線画像を1または複数取得する。
 次に、ステップS16において、カメラ103において撮像され画像取得部13において取得された複数の赤外線画像の中から、選択部14が、第2記憶部16に保存された交通違反の立証に必要な条件等を参照して、配色処理の対等となる赤外線画像を1または複数枚選択する。
 次に、ステップS17において、選択部14において選択された赤外線画像の一部の領域C1~C4に対して、色設定部15が公知技術を用いて配色処理を実施する。
 次に、ステップS18において、色設定部15が、領域設定部15aにおいて配色領域として設定された領域に対して配色処理が施されたカラー画像を生成し、第1記憶部17に保存する。
 そして、警察署等において交通違反の取締りを実施する際には、警察署に設置された表示部18に対して、カラー画像を出力する。
 本実施形態の交通違反管理システム100では、以上のように、交通違反の取締りを実施する警察署等において、連続的あるいは断続的に撮像された複数の赤外線画像の中から、交通違反の内容や違反車両、運転者等を特定するための証拠となる重要な画像を選択する。そして、選択された一または複数の赤外線画像の少なくとも一部に配色処理を実施して、カラー画像を形成する。
 これにより、交通違反の取締りを実施する際に、違反車両や運転者の特定を効率よく実施することができる。さらに、必要最小限の赤外線画像だけを抽出して、配色処理を実施するため、カメラ103によって取得された全ての赤外線画像に配色処理を実施する場合と比較して、データ処理量を大幅に低減することができる。
 また、配色処理が施される選択済みの赤外線画像においても、交通違反の特定等に必要な一部の領域だけに配色処理を実施することで、データ処理量をさらに低減しつつ、交通違反の取締り効率を向上させることができる。
 (実施形態2)
 本実施形態に係る交通違反管理システム200および画像処理装置210について、図10を用いて説明すれば以下の通りである。
 なお、本実施形態の交通違反管理システム200では、センサではなく、カメラ103によって撮像された赤外線画像を用いて交通違反の検出を行う点で、上記実施形態1とは異なっている。その他の構成については、上記実施形態1で説明した構成と同一の機能を有することから、ここでは同じ符号を付し、その詳細な説明を省略する。
 本実施形態の交通違反管理システム200では、照明部102による近赤外線の照射、カメラ103による撮像は連続的に行われる。
 そして、画像取得部13は、カメラ103において連続的に撮像された赤外線画像を受信して、違反検出部11および選択部14へと送信する。
 違反検出部11では、赤外線画像に含まれる車両の交通違反の有無について判定を行い、判定結果を選択部14へと送信する。
 なお、違反検出部11における違反検出は、上記実施形態1と同様に、DB11aに保存された各種条件を参照して、判定手段11bによって行われる。
 選択部14では、違反検出部11から交通違反の検出有りとの判定結果を受信した場合に、その交通違反の検出時に使用された赤外線画像のうち、交通違反の立証に必要な条件を満たす赤外線画像を選択し、色設定部15へと送信する。
 なお、選択部14における交通違反の立証に必要な条件は、上記実施形態1と同様に、第2記憶部16に保存されている。
 色設定部15では、選択部14において選択された赤外線画像の一部あるいは全体に対して配色処理を実施して、カラー画像を生成する。そして、色設定部15は、生成したカラー画像を第1記憶部17に保存するとともに、表示部18へ出力する。
 本実施形態の交通違反管理システム200によれば、交通違反を検出するためのセンサ等を用いることなく、交通違反の取締りを実施する際に、違反車両や運転者の特定を効率よく実施することができるという、上記実施形態1と同様の効果を得ることができる。さらに、必要最小限の赤外線画像だけを抽出して、配色処理を実施するため、カメラ103によって取得された全ての赤外線画像に配色処理を実施する場合と比較して、データ処理量を大幅に低減することができるという効果も奏する。
 また、配色処理が施される選択済みの赤外線画像においても、交通違反の特定等に必要な一部の領域だけに配色処理を実施することで、データ処理量をさらに低減しつつ、交通違反の取締り効率を向上させることができる。
 (実施形態3)
 本実施形態に係る交通違反管理システム300および画像処理装置310について、図11を用いて説明すれば以下の通りである。
 なお、本実施形態の交通違反管理システム300では、カメラ103によって連続的に撮像された赤外線画像のデータを、一旦、全て保存する第3記憶部19を備えている点で、上記実施形態1,2とは異なっている。
 また、本実施形態では、センサではなく、カメラ103によって撮像された赤外線画像を用いて交通違反の検出を行う点で、上記実施形態2と共通である。
 その他の構成については、上記実施形態1,2で説明した構成と同一の機能を有することから、ここでは同じ符号を付し、その詳細な説明を省略する。
 本実施形態の交通違反管理システム300では、上記実施形態2と同様に、照明部102による近赤外線の照射、カメラ103による撮像は連続的に行われる。
 そして、画像取得部13は、カメラ103において連続的に撮像された赤外線画像を受信して、全ての赤外線画像を一旦保存する第3記憶部19へと送信する。
 違反検出部11では、警察署等において交通違反の取締りを実施する際に、第3記憶部19から連続的に取得された赤外線画像を用いて、事後的に、車両の交通違反の有無について判定を行い、判定結果を選択部14へと送信する。
 なお、このとき、第3記憶部19に保存された赤外線画像は、選択部14へも送信される。
 ここで、違反検出部11における違反検出は、上記実施形態1,2と同様に、DB11aに保存された各種条件を参照して、判定手段11bによって行われる。
 選択部14では、違反検出部11から交通違反の検出有りとの判定結果を受信した場合に、その交通違反の検出時に使用された赤外線画像のうち、交通違反の立証に必要な条件を満たす赤外線画像を選択し、色設定部15へと送信する。
 なお、選択部14における交通違反の立証に必要な条件は、上記実施形態1,2と同様に、第2記憶部16に保存されている。
 色設定部15では、選択部14において選択された赤外線画像の一部あるいは全体に対して配色処理を実施して、カラー画像を生成する。そして、色設定部15は、生成したカラー画像を第1記憶部17に保存するとともに、表示部18へ出力する。
 本実施形態の交通違反管理システム300によれば、交通違反を検出するためのセンサ等を用いることなく、事後的に交通違反の取締りを実施する際に、違反車両や運転者の特定を効率よく実施することができるという、上記実施形態1,2と同様の効果を得ることができる。さらに、必要最小限の赤外線画像だけを抽出して、配色処理を実施するため、カメラ103によって取得された全ての赤外線画像に配色処理を実施する場合と比較して、データ処理量を大幅に低減することができるという効果も奏する。
 また、配色処理が施される選択済みの赤外線画像においても、交通違反の特定等に必要な一部の領域だけに配色処理を実施することで、データ処理量をさらに低減しつつ、事後的に実施される交通違反の取締り効率を向上させることができる。
 (実施形態4)
 本実施形態に係る交通違反管理システム400および画像処理装置410について、図12を用いて説明すれば以下の通りである。
 なお、本実施形態の交通違反管理システム400では、センサ101を用いて速度超過違反等の交通違反の検出を行う点で、上記実施形態1と共通している。そして、カメラ103によって連続的に撮像された赤外線画像のデータを、一旦、全て保存する第3記憶部19を備えている点で、上記実施形態1,2とは異なり、上記実施形態3と共通している。
 その他の構成については、上記実施形態1~3で説明した構成と同一の機能を有することから、ここでは同じ符号を付し、その詳細な説明を省略する。
 本実施形態の交通違反管理システム400では、センサ101によって交通違反の有無を検出する。
 照明部102による近赤外線の照射およびカメラ103による赤外線画像の撮像は、上記実施形態2,3と同様に、連続的に行われる。
 画像取得部13は、違反検出部11における交通違反の検出の有無に関わらず、カメラ103において連続的に撮像された赤外線画像を受信して、全ての赤外線画像を一旦保存する第3記憶部19へと送信する。
 違反検出部11では、警察署等において事後的に交通違反の取締りを実施する際に、センサ101において交通違反が検出された時間等を参照して第3記憶部19から連続的に取得された赤外線画像の一部を用いて、車両の交通違反の有無について判定を行い、判定結果を選択部14へと送信する。
 なお、このとき、第3記憶部19に保存された赤外線画像は、選択部14へも送信される。
 ここで、違反検出部11における違反検出は、上記実施形態1~3と同様に、DB11aに保存された各種条件を参照して、判定手段11bによって行われる。
 選択部14では、違反検出部11から交通違反の検出有りとの判定結果を受信した場合に、その交通違反の検出時に使用された赤外線画像のうち、交通違反の立証に必要な条件を満たす赤外線画像を選択し、色設定部15へと送信する。
 なお、選択部14における交通違反の立証に必要な条件は、上記実施形態1~3と同様に、第2記憶部16に保存されている。
 色設定部15では、選択部14において選択された赤外線画像の一部あるいは全体に対して配色処理を実施して、カラー画像を生成する。そして、色設定部15は、生成したカラー画像を第1記憶部17に保存するとともに、表示部18へ出力する。
 本実施形態の交通違反管理システム400では、交通違反を検出するためのセンサ等を用いて交通違反の発生の有無をリアルタイムで検出することができる。そして、事後的に交通違反の取締りを実施する際には、このセンサ101によって交通違反が検出された時間帯に撮像された複数の赤外線画像や赤外線動画の中から、最も交通違反の立証に適した赤外線画像等を選択する。
 これにより、違反車両や運転者の特定を効率よく実施することができるという、上記実施形態1~3と同様の効果を得ることができる。さらに、必要最小限の赤外線画像だけを抽出して、配色処理を実施するため、カメラ103によって取得された全ての赤外線画像に配色処理を実施する場合と比較して、データ処理量を大幅に低減することができるという効果も奏する。
 また、配色処理が施される選択済みの赤外線画像においても、交通違反の特定等に必要な一部の領域だけに配色処理を実施することで、データ処理量をさらに低減しつつ、事後的に実施される交通違反の取締り効率を向上させることができる。
 [他の実施形態]
 以上、本発明の一実施形態について説明したが、本発明は上記実施形態に限定されるものではなく、発明の要旨を逸脱しない範囲で種々の変更が可能である。
 (A)
 本発明の他の実施形態に係る交通違反管理システム500および画像処理装置510は、例えば、図13に示すような構成であってもよい。
 具体的には、交通違反管理システム500は、図13に示すように、インターネットやLAN(Local Area Network)、WAN(Wide Area Network)等のネットワークNによって外部の交通違反取締装置(カメラ103)に接続される。また、交通違反管理システム500は、記憶装置160に接続される。
 交通違反管理システム500は、コンピュータ端末により構成され、CPU(Central Processing Unit)150、RAM(Random Access Memory)151、出力部152、通信部153、入力部154、および画像処理装置510等を備えている。
 CPU150は、各種の演算処理等を実行するとともに、RAM151に読み込まれて展開される所定の制御プログラムを実行する。この制御プログラムにより、交通違反管理システム500に含まれる各構成の機能が実行される。
 RAM151は、SRAM(Static RAM)またはDRAM(Dynamic RAM)等のメモリ素子によって構成され、CPU150の処理過程で発生したデータ等の記憶を行う。
 出力部152は、画像および音声等のアナログ信号またはデジタル信号を伝送するケーブルなどを接続する接続端子を有している。そして、出力部152は、これらのケーブルを介して、上述した各実施形態の表示部18に接続されている。出力部152は、表示制御手段(図示せず)の指令に応じて記憶装置160から読み出された各種の情報を画像信号に変換し、ケーブルを介して表示部18へ出力する。
 通信部153は、通信ケーブルを接続するための接続端子あるいは無線通信インターフェースを有し、ネットワークNに接続される。通信部153は、ネットワークNに接続された交通違反取締装置(センサ101、カメラ103等)との間でデータの送受信を行う。
 入力部154は、(マウス、キーボード、画面上で操作するタッチパネル等)により構成される。入力部154は、ユーザの操作による情報の入力およびメニューの選択等を受け付けて、受け付けた操作内容をCPU150へ通知する。
 記憶装置160は、半導体メモリ、磁気記録媒体、光記録媒体等によって構成される。なお、上述した各実施形態の第1・第2・第3記憶部16,17,19は、この記憶装置160に含まれるものであってもよいし、別途接続された大容量記憶装置であってもよい。また、記憶装置160はネットワークを介して交通違反管理システム500に接続されていてもよい。
 (B)
 上記実施形態では、画像処理装置10による配色処理の対象となる領域として、違反車両、車両番号(ナンバープレート)、信号機、運転者等の交通違反に関連する領域C1~C4(図6参照)を例として挙げて説明した。しかし、本発明はこれに限定されるものではない。
 例えば、上記実施形態1のようにモノクロの赤外線画像の一部に絞って配色処理を実施するのではなく、選択された赤外線画像の全体に配色処理を施してもよい。
 この場合には、背景等も含めてカラー化された画像を得ることができるため、交通違反や交通事故発生当時の天候や路面状況等を含む付加情報も取得することができる。
 ただし、画像処理装置における配色処理の負荷を最小限とする観点では、上記実施形態のように、交通違反の取締りに必要な最小限の領域だけに絞って、配色処理が施されることが好ましい。
 (C)
 上記実施形態では、交通違反の検出時には、赤外線の照射タイミングに合わせてカメラ103によって複数の赤外線画像を取得する例を挙げて説明した。しかし、本発明はこれに限定されるものではない。
 例えば、動画撮影時のように、連続的に交差点内の状況を撮像した複数の赤外線画像をカメラによって取得してもよい。
 この場合には、交通違反とは直接関係のない赤外線画像が大量に取得されることになる。このため、本発明の適用時には、全ての赤外線画像に配色処理を実施する場合と比較して、データ処理量の低減効果もより大きくなり、第1記憶部17の記憶容量の増大も抑制できるという点で、より好ましい。
 (D)
 上記実施形態では、カメラ103によって走行車両の正面から撮像された赤外線画像を用いて、交通違反の内容、違反車両、運転者等の人物を特定するために必要な条件を満たす赤外線画像を選択して配色処理を行う例を挙げて説明した。しかし、本発明はこれに限定されるものではない。
 例えば、走行車両の後部を撮像する方向にカメラを設置して取得された赤外線画像を用いて、交通違反の内容、違反車両、違反車両の所有者を特定するために必要な条件を満たす赤外線画像を選択してもよい。
 この場合には、違反車両の運転者は画像から特定できないため、違反車両の車両番号等から所有者を特定すればよい。
 また、走行車両の後部を撮像する方向にカメラを設置した場合には、信号機110の正面と違反車両とが1枚の画像中に含まれるように撮像することができる。この場合には、この1枚の画像から、信号無視の違反車両とその所有者とを特定することができる可能性がある。
 よって、運転者の特定が交通違反として認定するための必須条件でない場合には、走行車両の後部を撮像する方向にカメラを設置してもよい。
 (E)
 上記実施形態では、交通違反管理システム100,200,300,400が、液晶ディスプレイ等の表示部18を含む構成を例として挙げて説明した。しかし、本発明はこれに限定されるものではない。
 例えば、液晶ディスプレイ等の表示部を含まないシステムとして、本発明の交通違反管理システムおよび画像処理装置を構成してもよい。
 この場合には、外部装置として、液晶ディスプレイ等の表示手段を用いることで、簡素な構成により効率よく交通違反の取締りを実施することができるという、上記と同様の効果を得ることができる。
 (F)
 上記実施形態では、図2に示すように、1車線に対して1つのセンサ101やカメラ103等を設置して、交通違反の検出と赤外線画像の取得を行う例を挙げて説明した。しかし、本発明はこれに限定されるものではない。
 例えば、複数の車線に対して1台のセンサやカメラを設置して、違反内容等を特定するための画像を取得してもよい。
 この場合には、複数の車線をカバーする視野範囲および解像度を持つカメラを設置することで、複数車線を走行する対象車両の中から違反車両を効果的に検出することができる。よって、システムの構成をより簡素化することができる。
 さらに、カメラの撮影方向は、道路の走行方向に沿った方向に限定されるものではない。
 例えば、交差点の曲がり角の部分に設けられた支柱等にカメラを設置して交差点全体を撮影し、その画像を用いて、交通違反の内容、違反車両、違反車両の運転者や所有者等を特定してもよい。
 あるいは、交差点の曲がり角の部分に設けられた信号機の支柱にカメラを設置して交差点全体を撮影し、その画像を用いて、交通違反の内容、違反車両、違反車両の運転者や所有者等を特定してもよい。
 この場合には、カメラが交差点の全体を撮影できるため、右左折の禁止違反を犯した違反車両とその運転者等とを特定することができる可能性がある。
 (G)
 上記実施形態では、本システムにおいて検出・管理される交通違反の例として、速度超過、信号無視を例として挙げて詳細に説明した。しかし、本発明はこれに限定されるものではない。
 例えば、本システムにおいて検出・管理可能な交通違反としては、通行禁止・Uターン禁止違反、通行区分違反、逆走、追い越し禁止違反、指定横断等禁止違反、指定場所一時不停止、放置駐車違反、通行帯違反、路線バス等優先通行帯違反、車間距離不保持、無灯火、携帯電話使用等も含まれる。
 つまり、本システムにおいては、上記例示した交通違反以外にも、センサやカメラ等で検出可能な交通違反であって、各国で定められた法律等で規定された各種交通違反の検出・管理が可能である。
 (H)
 上記実施形態では、交通違反の取締りを実施する場所としてために、センサ101やカメラ103等を交差点に設置した例を挙げて説明した。しかし、本発明はこれに限定されるものではない。
 例えば、速度超過違反の取締りを実施する場合には、見通しがよく走行速度が上がりやすい直進道路等にセンサやカメラ等を設置してもよい。
 その他の交通違反についても同様に、その交通違反が発生しやすい道路の周辺に、センサやカメラ等を設置することで、取り締まりの効率を向上させることができる。
 (I)
 上記実施形態では、車両の交通違反の取締りを行う交通違反管理システムに対して、本発明を適用する例を挙げて説明した。しかし、本発明はこれに限定されるものではない。
 例えば、自転車や歩行者の交通違反を取り締まるための交通違反管理システムに対して、本発明が適用されてもよい。
 この場合でも、上記各実施形態と同様に、必要最小限の処理負担により、自転車や歩行者による交通違反を効率よく取り締まることができる。
 (J)
 上記実施形態では、車両の交通違反の取締りを行う交通違反管理システムに対して、本発明を適用する例を挙げて説明した。しかし、本発明はこれに限定されるものではない。
 例えば、本発明の画像処理装置は、監視カメラや防犯カメラ等によって取得された赤外線画像(モノクロ画像)に対して、所定の条件を満たした画像を選択して配色処理によってカラー画像を得ることで、犯罪捜査等に適用されてもよい。
 より具体的には、特定の車両の有無、交通事故、歩行者の有無、指名手配犯(手配車両)の発見、自転車の有無、鉄道の通過(踏切内等)、子供や老人等の特定の年齢層の人物の有無、等を検出して、自動的に選択された赤外線画像に対して配色処理を実施する。
 この場合でも、事故や事件の犯人や被害者の特定等に関する情報をより多く得ることができるため、犯罪捜査における捜査効率を向上させることができる。
 なお、防犯カメラや監視カメラによって取得された赤外線画像に配色処理を実施する場合には、特定の人物や車両等を特定するために必要な条件を満たす赤外線画像を選択して、上述した配色処理を実施すればよい。
 (K)
 上記実施形態では、カメラによって撮像された複数の赤外線画像の中から、所定の条件を満たす1または複数の赤外線画像を選択して配色処理を実施する例を挙げて説明した。しかし、本発明はこれに限定されるものではない。
 例えば、カメラによって動画撮影をしている場合には、所定の条件を満たす動画の一部だけを切り取って、この一部の動画を構成する複数の赤外線画像を選択して配色処理を実施してもよい。
 この場合には、例えば、交通違反の検出に関係する動画の一部をカラー画像として生成することができるため、交通違反の取締り効率を向上させるとともに、データ処理負担を最小限に抑制することができる。
 本発明の画像処理装置は、必要最小限のモノクロ画像に対して配色処理を実施してカラー画像を得ることで、データ処理量を最小限に抑制することができるという効果を奏することから、モノクロ画像を取得する各種装置に対して広く適用可能である。
 10   画像処理装置
 11   違反検出部
 11a  DB
 11b  判定手段
 12   照明制御部
 13   画像取得部
 14   選択部
 15   色設定部
 15a  領域設定部
 16   第2記憶部
 17   第1記憶部
 18   表示部
 19   第3記憶部
 31   違反内容表示領域
 32   特定用画像表示領域
 33   人物情報表示領域
 34   画像情報表示領域
 35   切替ボタン
100   交通違反管理システム
101   センサ
102   照明部
103   カメラ(撮像装置)
110   信号機
111   支柱
150   CPU(Central Processing Unit)
151   RAM(Random Access Memory)
152   出力部
153   通信部
154   入力部
160   記憶装置
200   交通違反管理システム
210   画像処理装置
300   交通違反管理システム
310   画像処理装置
400   交通違反管理システム
410   画像処理装置
500   交通違反管理システム
510   画像処理装置
A1,A2 車両
C1,C2,C3,C4 領域(配色領域)
D1,D2 領域(非配色領域)
 P1   違反特定用画像
P2,P3 人物特定用画像
S1,S2,S3 画面

Claims (15)

  1.  撮像装置によって撮像された複数のモノクロ画像を取得する画像取得部と、
     車両の交通違反の有無を検出する違反検出部と、
     前記違反検出部において前記車両の交通違反が検出された場合には、前記画像取得部において取得された複数の前記モノクロ画像の中から、当該車両の前記交通違反の特定に必要な条件を満たすモノクロ画像を選択する選択部と、
     前記選択部において選択されたモノクロ画像に対して配色処理を行い、複数色によって表されるカラー画像を出力する色設定部と、
    を備えている画像処理装置。
  2.  前記色設定部は、前記選択部において選択された前記モノクロ画像における交通違反に関連する箇所のみ配色処理を行う、
    請求項1に記載の画像処理装置。
  3.  前記色設定部は、交通違反の取締りの対象となる車両の色、ナンバープレートの色、信号機の色のうち少なくとも1つの配色処理を行う、
    請求項2に記載の画像処理装置。
  4.  前記色設定部は、前記選択部において選択された前記モノクロ画像の全体に配色処理を行う、
    請求項1に記載の画像処理装置。
  5.  前記色設定部において配色処理が施された前記カラー画像を保存する第1記憶部を、
    さらに備えている、
    請求項1から4のいずれか1項に記載の画像処理装置。
  6.  前記違反検出部は、交通違反の取締りの対象となる前記車両の状態を検出するセンサである、
    請求項1から5のいずれか1項に記載の画像処理装置。
  7.  前記違反検出部は、交通違反の取締りの対象となる前記車両を撮像する撮像装置である、
    請求項1から5のいずれか1項に記載の画像処理装置。
  8.  前記選択部において複数の前記モノクロ画像の中から配色処理が施されるモノクロ画像を選択する際に、前記交通違反の特定に必要な条件を記憶した第2記憶部を、
    さらに備えている、
    請求項1から7のいずれか1項に記載の画像処理装置。
  9.  前記選択部は、前記モノクロ画像に映り込んだ対象物、対象者、内容、鮮明さに基づいて、交通違反の特定に必要な条件を満たすモノクロ画像を選択する、
    請求項1から8のいずれか1項に記載の画像処理装置。
  10.  前記違反検出部は、前記車両の速度超過、信号無視、通行禁止違反、通行区分違反、追い越し禁止違反、指定横断等禁止違反、指定場所一時不停止、駐停車禁止、過積載のうち、少なくとも1つを検出する、
    請求項1から9のいずれか1項に記載の画像処理装置。
  11.  前記モノクロ画像には、赤外線画像が含まれる、
    請求項1から10のいずれか1項に記載の画像処理装置。
  12.  請求項1から11のいずれか1項に記載の画像処理装置と、
     前記車両に対して赤外光を照射する照明部と、
     前記照明部から被写体に対して照射された赤外光の反射光を撮像する撮像装置と、
    を備えている交通違反管理システム。
  13.  撮像装置によって取得された複数のモノクロ画像を取得する画像取得部と、
     所定の条件を満たした場合に、前記画像取得部において取得された複数の前記モノクロ画像の中から、前記所定の条件に該当するモノクロ画像を選択する選択部と、
     前記選択部において選択されたモノクロ画像に対して配色処理を行い、複数色によって表されるカラー画像を出力する色設定部と、
    を備えている画像処理装置。
  14.  前記選択部は、車両の交通違反、自転車の交通違反、歩行者の交通違反のうち、少なくとも1つを立証するために必要な条件を満たす前記モノクロ画像を選択する、
    請求項13に記載の画像処理装置。
  15.  前記選択部は、特定の車両、人物を特定するために必要な条件を満たす前記モノクロ画像を選択する、
    請求項13に記載の画像処理装置。
PCT/JP2016/057316 2015-07-08 2016-03-09 画像処理装置およびこれを備えた交通違反管理システム WO2017006583A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201680022166.0A CN107534717B (zh) 2015-07-08 2016-03-09 图像处理装置及具有该图像处理装置的交通违章管理系统

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015-136961 2015-07-08
JP2015136961A JP6459808B2 (ja) 2015-07-08 2015-07-08 画像処理装置およびこれを備えた交通違反管理システム

Publications (1)

Publication Number Publication Date
WO2017006583A1 true WO2017006583A1 (ja) 2017-01-12

Family

ID=57686206

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/057316 WO2017006583A1 (ja) 2015-07-08 2016-03-09 画像処理装置およびこれを備えた交通違反管理システム

Country Status (3)

Country Link
JP (1) JP6459808B2 (ja)
CN (1) CN107534717B (ja)
WO (1) WO2017006583A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110738857A (zh) * 2018-07-18 2020-01-31 杭州海康威视数字技术股份有限公司 一种车辆违章取证方法、装置及设备

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106710232A (zh) * 2017-02-13 2017-05-24 吉林师范大学 行驶机动车驾驶员驾驶证自动识别平台及使用方法
JP6945490B2 (ja) * 2018-04-27 2021-10-06 三菱電機株式会社 ナンバープレート分類装置、ナンバープレート分類システムおよびナンバープレート分類プログラム
JP7218535B2 (ja) 2018-10-12 2023-02-07 トヨタ自動車株式会社 交通違反車両識別システム及びサーバ
CN109658707A (zh) * 2018-12-23 2019-04-19 郑州威科姆华大北斗导航科技有限公司 电动车高架违章记录方法和系统
CN112528924A (zh) * 2020-12-21 2021-03-19 上海眼控科技股份有限公司 一种车辆掉头检测方法、装置、设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05143892A (ja) * 1991-11-22 1993-06-11 Matsushita Electric Ind Co Ltd 交通信号無視取締り装置
JPH11243538A (ja) * 1998-02-25 1999-09-07 Nissan Motor Co Ltd 車両用視認装置
JP2000353292A (ja) * 1999-06-11 2000-12-19 Toshiba Corp 信号識別装置及びその方法
JP2002171519A (ja) * 2000-11-29 2002-06-14 Yuutekku:Kk 赤外線カラー画像形成装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5001558A (en) * 1985-06-11 1991-03-19 General Motors Corporation Night vision system with color video camera
JP2006333133A (ja) * 2005-05-26 2006-12-07 Sony Corp 撮像装置、撮像方法、プログラム、プログラム記録媒体並びに撮像システム
JP5874116B2 (ja) * 2009-07-30 2016-03-02 国立研究開発法人産業技術総合研究所 画像撮影装置および画像撮影方法
JP6015946B2 (ja) * 2013-03-29 2016-10-26 マツダ株式会社 車両用撮像装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05143892A (ja) * 1991-11-22 1993-06-11 Matsushita Electric Ind Co Ltd 交通信号無視取締り装置
JPH11243538A (ja) * 1998-02-25 1999-09-07 Nissan Motor Co Ltd 車両用視認装置
JP2000353292A (ja) * 1999-06-11 2000-12-19 Toshiba Corp 信号識別装置及びその方法
JP2002171519A (ja) * 2000-11-29 2002-06-14 Yuutekku:Kk 赤外線カラー画像形成装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110738857A (zh) * 2018-07-18 2020-01-31 杭州海康威视数字技术股份有限公司 一种车辆违章取证方法、装置及设备

Also Published As

Publication number Publication date
CN107534717A (zh) 2018-01-02
CN107534717B (zh) 2020-11-20
JP2017022484A (ja) 2017-01-26
JP6459808B2 (ja) 2019-01-30

Similar Documents

Publication Publication Date Title
JP6459808B2 (ja) 画像処理装置およびこれを備えた交通違反管理システム
JP6795030B2 (ja) 撮像制御装置及び撮像制御方法、並びに撮像装置
KR102189569B1 (ko) 다기능 스마트 객체인식 사고방지 표지 안내판 및 그것을 이용한 사고방지방법
US6411328B1 (en) Method and apparatus for traffic incident detection
JP4221158B2 (ja) 交通標識識別装置および識別方法
JP3876288B2 (ja) 状態認識システムおよび状態認識表示生成方法
US20060269105A1 (en) Methods, Apparatus and Products for Image Capture
CN104900088A (zh) 一种用于弯道会车预警的预警系统
US20140307087A1 (en) Methods and systems for preventing traffic accidents
JP6252693B2 (ja) 表示装置およびこれを備えた交通違反管理システム
CN204990743U (zh) 一种超高车辆预警系统
WO2016113973A1 (ja) 交通違反管理システムおよび交通違反管理方法
JP6459809B2 (ja) 画像処理装置およびこれを備えた交通管理システム、画像処理方法
CN105336160A (zh) 一种基于人脸识别的行人闯红灯一体化信号灯装置
JP2016130932A (ja) 交通違反管理システムおよび交通違反管理方法
EP3642793A1 (en) Platform for the management and validation of contents of video images, pictures or similars, generated by different devices
TW201724052A (zh) 車輛監控系統及其方法
CN107784843A (zh) 智能交通信号灯系统及其图像处理方法
Wang et al. On the application of cameras used in autonomous vehicles
WO2017038128A1 (ja) 違反者特定装置およびこれを備えた違反者特定システム
WO2017022268A1 (ja) 車両特定装置およびこれを備えた車両特定システム
KR102483250B1 (ko) 해양도시 인프라의 효율적 관제를 위한 영상 ai 기반 안전관리 통합장치
JP6418089B2 (ja) 画像処理装置およびこれを備えた交通管理システム、画像処理方法
JP2007069777A (ja) 障害物検出システム
KR101936004B1 (ko) 지능형 보행자 검출 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16821054

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16821054

Country of ref document: EP

Kind code of ref document: A1