WO2007139003A1 - 車両判別装置、車両判別方法、車両判別プログラム、および車両判別プログラムを格納したプログラム記録媒体 - Google Patents

車両判別装置、車両判別方法、車両判別プログラム、および車両判別プログラムを格納したプログラム記録媒体 Download PDF

Info

Publication number
WO2007139003A1
WO2007139003A1 PCT/JP2007/060679 JP2007060679W WO2007139003A1 WO 2007139003 A1 WO2007139003 A1 WO 2007139003A1 JP 2007060679 W JP2007060679 W JP 2007060679W WO 2007139003 A1 WO2007139003 A1 WO 2007139003A1
Authority
WO
WIPO (PCT)
Prior art keywords
vehicle
vertical projection
change
value
specific
Prior art date
Application number
PCT/JP2007/060679
Other languages
English (en)
French (fr)
Inventor
Sahoko Hata
Atsuyoshi Ando
Kenji Kodama
Takako Shinjo
Kunikazu Takahashi
Original Assignee
Fujitsu Limited
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Limited filed Critical Fujitsu Limited
Priority to CN2007800194838A priority Critical patent/CN101454815B/zh
Priority to DE602007010454T priority patent/DE602007010454D1/de
Priority to EP07744113A priority patent/EP2023309B1/en
Publication of WO2007139003A1 publication Critical patent/WO2007139003A1/ja
Priority to US12/266,388 priority patent/US8433099B2/en

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/017Detecting movement of traffic to be counted or controlled identifying vehicles
    • G08G1/0175Detecting movement of traffic to be counted or controlled identifying vehicles by photographing vehicles, e.g. when violating traffic rules
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/015Detecting movement of traffic to be counted or controlled with provision for distinguishing between two or more types of vehicles, e.g. between motor-cars and cycles

Definitions

  • Vehicle discrimination device Vehicle discrimination method, vehicle discrimination program, and program recording medium storing vehicle discrimination program
  • the present invention relates to an apparatus for discriminating a vehicle by using a captured image force information processing technique of the vehicle.
  • This first background art is a camera for obtaining continuous images by continuously capturing a road surface and a vehicle passing through a set area on the road surface, and calculating a luminance histogram for each of the continuous images.
  • a difference calculating means for calculating the difference between the two previous and next luminance histograms is compared with the vehicle by comparing the difference with a preset threshold value.
  • This is a traffic flow measurement system comprising vehicle detection means for determining the presence of a vehicle.
  • the vehicle presence can be quantified with high accuracy.
  • This second background art is a method of differentiating image data of a vehicle to be identified, thereby extracting a contour line extracting means for extracting the contour line of the vehicle and the contour line extracting means.
  • a feature amount extraction means for extracting the feature amount of the contour line
  • a vehicle that is acquired in advance as an identification criterion Storage means for storing the reference feature quantity and information indicating the vehicle type of the vehicle in association with each other, the feature quantity extracted by the feature quantity extraction means, and the reference feature quantity stored by the storage means By matching each other
  • This is a vehicle type identification device provided with feature amount matching means for identifying the vehicle type of the vehicle.
  • the contour line of the vehicle is extracted by the contour line extracting unit, and the feature amount of the contour line is extracted by the feature amount extracting unit.
  • the feature amount matching means performs matching between the feature amount and the reference feature amount acquired in advance, and the vehicle type of the vehicle is identified. Therefore, since the vehicle type is identified based on the feature amount of the contour line of each part of the vehicle, which is simply an apparent size as in the past, the difference in brightness between the vehicle and the background part is a problem. Vehicle type can be identified without any problem, and the accuracy of vehicle type identification can be improved.
  • the third background art includes image input means for holding an image on the road imaged by the input TV camera power, and image analysis means for analyzing the luminance distribution of the image on the road.
  • the image power on the road that is sequentially input Pattern matching is performed on the extracted template, the vehicle tracking means for tracking the vehicle, the pattern matching result force, the tracking distance of the vehicle is calculated, and the value of the calculation result is predetermined. If it is greater than the value, the vehicle determination means for determining that the vehicle is a passing vehicle, and if it is determined that the vehicle is a passing vehicle, the image of the predetermined vehicle type determination area is differentiated in the vertical direction, and the differentiated image is projected in the horizontal direction.
  • a traffic flow measuring device having vehicle type determination means for determining the vehicle type of the vehicle based on the vehicle type.
  • Patent Document 1 Japanese Unexamined Patent Publication No. 2000-149181
  • Patent Document 2 JP 2002-8186 A
  • Patent Document 3 Japanese Patent No. 3453952
  • the first background art is for moving images. If it is a moving image (within a continuous image), only a moving object is extracted using a difference method, and pattern matching is performed to determine whether the vehicle is a motorcycle. There is no power that can be judged. However, in the case of a still image, it is not composed of multiple still images like a movie, and it is impossible to extract only moving objects by comparing still images, so it is determined where the motorcycle is located. There is a problem that it is not possible to determine the presence or absence of a vehicle without the determination means.
  • the second background art occupies a certain area when extracting a single color still image force four-wheeled vehicle, and therefore, the edges in the image are extracted and the intervals between the edges are extracted. Force vehicle position such as distance and characteristics can be estimated.
  • a motorcycle occupies a smaller area in a still image than a four-wheeler, the method using only edges is not effective.
  • the problem is that it cannot be accurately determined.
  • the third background technology is also premised on a moving image as in the first background technology, and if it is not a moving image, the vehicle tracking means will not function and the subsequent processing cannot be executed. There is a problem that the vehicle cannot be recognized.
  • An object of the present invention is to provide a vehicle discriminating device that can discriminate by a high-speed process when discriminating a large amount of vehicle still image data for each vehicle type.
  • a differential filter When a differential filter is used in normal image recognition, it is used for contour extraction and the like. At that time, a differential filter is applied to all pixels in the image.
  • the differential filter is applied to the I component of HSI (Hue 'Saturation. Intensity) in the image (vertically in the horizontal direction, n in the horizontal direction, in the vertical direction). n), and using the calculated brightness value in the image obtained from it, it is possible to discriminate between the two-wheeler image and the other images and realize a high-speed processing.
  • I component of HSI Human 'Saturation. Intensity
  • a differential filter is applied to the obtained I component to obtain a density change in the image.
  • the fine filter is applied only to the vertexes of the grid specified on the image, that is, the intersections of the grid lines constituting the grid.
  • the vehicle is a motorcycle. Determined as a vehicle.
  • a vehicle discrimination device is a vehicle discrimination device for discriminating a vehicle on the basis of an image of the vehicle, and includes pixels corresponding to grid points set in advance in the image, and A feature extraction unit for extracting the brightness components of the surrounding pixels and a differentiation process based on the value of the brightness component extracted by the feature extraction unit to obtain a change amount of the brightness component of the pixel corresponding to the grid point And a specific change amount calculation means for determining the number of change amounts that are not less than a first threshold value determined by the differentiation means. Vehicle discriminating means for discriminating a vehicle based on the number of change amounts obtained by the specific change amount calculating means.
  • pixels at equally spaced positions in a captured image and surrounding pixels are converted into lightness components, and a difference filter is obtained by applying a differential filter to pixels at equally spaced positions. Therefore, count how many of the calculated changes are larger than a certain level and Based on the current value, the vehicle is picked up in the target image and discriminates the vehicle. Therefore, the count value also changes according to the size of the target imaged in the captured image. The larger the occupied area is, the smaller the count value is, so that the vehicle can be correctly identified. It is possible to roughly discriminate between four-wheeled vehicles and other vehicles, but among four-wheeled vehicles, large-sized vehicles, medium-sized vehicles, small-sized vehicles, etc. can also be distinguished. It can also identify motorbikes, bicycles, pedestrians, animals, etc.
  • the "peripheral pixels” are pixels around pixels at equal intervals in the horizontal direction and vertical direction on the target image. It is a pixel with the value of the required brightness component. For example, if the differential filter is represented by a determinant of 3 rows and 3 columns, 3 pixels in the vertical direction and 3 in the horizontal direction are centered on pixels at equally spaced positions in the horizontal and vertical directions on the target image, respectively.
  • the value of the lightness component of one pixel is the value of the lightness component required for the differentiation means in the next process, and “the surrounding pixels” are pixels at equal intervals in the horizontal and vertical directions on the target image. Excluding four.
  • the "first threshold value” is usually a value of the amount of change obtained at a position where the object of the target image is not imaged and a value of the amount of change of the position where the object of the target image is imaged. Set between. Since the amount of change varies depending on the imaging environment, it is desirable to set it when constructing the apparatus.
  • the feature extraction means may obtain the value of the brightness component of all pixels.
  • the vehicle discriminating means of the vehicle discriminating apparatus provides the vehicle when the number of change amounts obtained by the specific change amount calculating means is equal to or greater than a second threshold value determined in advance. It is desirable to determine that the vehicle is a four-wheeled vehicle.
  • the number of changes varies greatly between the four-wheeled vehicle and the others,
  • the smallest of all four-wheeled vehicles, even a light vehicle, is larger than a motorcycle that would be the largest of all four-wheeled vehicles, that is, the number of changes between the four-wheeled vehicle and the other.
  • the values are greatly separated, and the discrimination is easy and has the effect that it can be performed accurately.
  • the “second threshold value” is usually the number of changes when the object in the target image is a four-wheeled vehicle and the change when the target object in the target image is other than a four-wheeled vehicle. Set between quantity. Since the value of the number of changes differs depending on the imaging environment, it is desirable to set it when constructing the device.
  • a vehicle discrimination device is a vehicle discrimination device for discriminating a vehicle on the basis of an image of the vehicle.
  • Feature extraction means for extracting the brightness components of the pixels corresponding to the grid points that are the intersections of the horizontal grid lines and the surrounding pixels, and differential processing based on the values of the brightness components extracted by the feature extraction means
  • the difference means for determining the amount of change in the brightness component of the pixel corresponding to the grid point, and the amount of change obtained by the difference means are integrated along the vertical grid line to obtain the vertical projection value, and the vertical projection value is A predetermined number is extracted in descending order, and the vertical projection values accumulated along the adjacent vertical grid lines among the extracted vertical projection values are integrated to obtain a specific vertical projection value.
  • the specific vertical projection value ratio calculating means for determining the ratio of the specific vertical projection value to the integrated value of the vehicle and the vehicle determination based on the ratio of the specific vertical projection value obtained by the specific vertical projection value ratio calculating means. And include vehicle discrimination means to do.
  • the pixels at equal intervals in the captured image are converted into lightness components, applied with a differential filter, and the obtained change amount is integrated along the vertical grid lines to obtain the vertical projection value.
  • the vertical grid lines are adjacent to each other, and the value among the obtained vertical projection values is large.
  • Multiple vertical projection values are added to obtain a specific vertical projection value, and divided by the total change amount.
  • the ratio of the specific vertical projection value of the object with a narrow width direction is large, while the ratio of the specific vertical projection value of the object with a large width direction is small. Therefore, the vehicle can be correctly identified. It is possible to roughly discriminate between motorcycles and other motorcycles, but among motorcycles, motorcycles, motorized bicycles, bicycles, pedestrians, and animals can be distinguished. Among four-wheeled vehicles, large vehicles, Medium and small cars can also be distinguished.
  • the vehicle discrimination means of the vehicle discrimination device is characterized in that the ratio of the specific vertical projection value obtained by the specific vertical projection value ratio calculation means is determined by the third threshold value. If this is the case, it is desirable to determine that the vehicle is a motorcycle.
  • the ratio of the specific vertical projection value is It differs greatly depending on whether it is a motorcycle or not, and even the largest motorcycle among two-wheeled vehicles has a smaller width than a mini vehicle, which is the smallest among four-wheeled vehicles, and is the smallest bicycle among two-wheeled vehicles.
  • a length in the vertical direction that is, the ratio of the specific vertical projection value is greatly separated between the two-wheeled vehicle and the other, and the discrimination is easy and accurate. It has the effect that it can be performed.
  • a condition for discriminating from a two-wheeled vehicle a condition in which the number of specific change amounts is equal to or smaller than a fourth threshold value can be obtained. At this time, it is desirable that the fourth threshold value is less than or equal to the second threshold value of [2].
  • the “third threshold value” is usually the ratio of the specific vertical projection value when the object in the target image is a two-wheeled vehicle, and the specific vertical distance when the target object in the target image is other than a two-wheeled vehicle.
  • the ratio of the direct projection value Since the ratio of the specific vertical projection value differs depending on the imaging environment, it is desirable to set it when constructing the device.
  • [0036] By applying the above [1] and [3] to form a single device, it is possible to more accurately determine the vehicle. In other words, the result discriminated in [1] and the result discriminated in [3] are collated, and if the result is the same, the discrimination result can be output as correct. If the results are different, there is a high possibility that one of the determination results is incorrect, so that the determination can be made separately and output separately. Furthermore, depending on the type of vehicle, [1] and [3] depend on the type of vehicle, such as the correct answer rate of the discrimination result in [3] is high for other vehicle types where the correct answer rate of the discrimination result in [1] is high.
  • the correct answer rate of the determination result may differ, and a configuration in which a determination result with a high correct answer rate of the determination result is output preferentially may be adopted.
  • the discrimination result in [1] is a light car
  • the correct answer rate of [1] so far is 95 [%] for the light car
  • the discrimination result in [3] is a normal passenger car.
  • the discrimination result of [1] is output with priority.
  • the condition values of the same imaging environment that change with time can also be used as parameters. For example, record the correct answer rate under each weather condition, and target imaging This means that the correct answer rate of the weather condition that matches the weather condition at the time of image capture is read.
  • the apparatus will be mainly described.
  • the present invention can also be implemented as a program, system, and method usable on a computer.
  • the present invention can be implemented in hardware, software, or software and hardware embodiments.
  • the program can be recorded on any computer-readable medium such as a hard disk, CD-ROM, DVD-ROM, optical storage device, or magnetic storage device.
  • the program can be recorded on other computers via the network.
  • FIG. 1 is an explanatory diagram of an imaging environment according to the first embodiment of the present invention.
  • FIG. 2 is a system configuration diagram and a hardware configuration diagram of the vehicle discrimination device according to the first embodiment of the present invention.
  • FIG. 3 is a block configuration diagram of the vehicle discrimination device according to the first embodiment of the present invention.
  • FIG. 5 is a captured image (taken by a four-wheeled vehicle) captured by the imaging apparatus according to the first embodiment of the present invention. When imaged).
  • FIG. 6 is an operation flowchart of the vehicle discrimination device according to the first embodiment of the present invention.
  • FIG. 7 is a detailed flowchart of a specific variation number calculation process of the vehicle determination device according to the first embodiment of the present invention.
  • FIG. 8 is a detailed flowchart of a specific vertical projection value ratio calculation process of the vehicle determination device according to the first embodiment of the present invention.
  • FIG. 9 is a graph showing values calculated by vertically projecting the amount of change of all horizontal pixels of a grid line according to another embodiment at each horizontal position.
  • FIG. 10 is a graph of values calculated by vertically projecting the amount of change of all horizontal pixels of a grid line according to another embodiment at each horizontal position.
  • FIG. 1 is an explanatory diagram of an imaging environment according to the present embodiment.
  • the imaging device 10 is arranged on the side of a road laid in the factory site, and the vehicle discrimination device 200 is arranged in the factory mother room.
  • the captured image captured by the imaging device 10 is transmitted to the vehicle determination device 200 via a communication path connecting the imaging device 10 and the vehicle determination device 200, and the vehicle determination device 200 performs information processing on the received captured image.
  • the vehicle discrimination results are counted by the management computer 30 operated by the manager, and the number of vehicles entering the site is displayed for each four-wheeled vehicle and two-wheeled vehicle.
  • Such information can be used, for example, for security purposes or when designing a facility expansion.
  • FIG. 2 is a system configuration diagram and a hardware configuration diagram of the vehicle discrimination device according to the present embodiment.
  • the hardware configuration of the vehicle discrimination device 200 is a general computer configuration, such as a CPU (Central Processing Unit) 210, a main memory 220 such as DRAM (Dynamic Random Access Memory), a hard disk 230 that is an external storage device, a display It consists of a display 240 as a device, a keyboard 250 and a mouse 260 as input devices, a LAN card 270 as an expansion card for connecting to a network, a CD-ROM drive 280, and the like.
  • a CPU Central Processing Unit
  • main memory 220 such as DRAM (Dynamic Random Access Memory)
  • a hard disk 230 that is an external storage device
  • a display It consists of a display 240 as a device, a keyboard 250 and a mouse 260 as input devices, a LAN card 270 as an expansion card for connecting to a network, a CD-ROM drive
  • a vehicle discrimination program stored in a storage medium such as a CD-ROM or a vehicle discrimination program that transmits other computer power via a network is copied to the hard disk 230 of the computer and is appropriately stored in the main memory 220.
  • the computer is installed so as to be readable, and a general computer constitutes a vehicle discrimination device.
  • the vehicle discriminating apparatus can be configured using not only a general computer but also nodeware specialized for the vehicle discriminating apparatus.
  • the logic on the vehicle discriminating device can be implemented by an ASIC (Application Specific IC), and the vehicle discriminating device can be configured by a system LSI together with a plurality of LSIs such as a memory.
  • ASIC Application Specific IC
  • the management computer 30 also has a hardware configuration similar to that of the vehicle determination device 200, which is a general computer configuration.
  • the vehicle discriminating apparatus 200 and the management computer 30 can be constructed on the same computer.
  • FIG. 3 is a block configuration diagram of the vehicle discrimination device according to the present embodiment.
  • the vehicle discrimination device 200 includes an input unit 211 that captures a captured image from the imaging device 10, a feature extraction unit 212 that extracts an I component by performing HSI conversion on an RGB-format captured image, and an extracted I component of the HSI format.
  • a differential filter part 213 that applies a differential filter only to a specific point to only extracted data, and a specific change number calculation unit 214 that calculates the number of changes in which the change amount constituting the filter data is greater than or equal to a first threshold value. Then, the specific vertical projection value is obtained by further accumulating the values satisfying the specific condition among the accumulated values obtained by accumulating the change amounts constituting the filter data having the same horizontal position on the captured image data.
  • the specific vertical projection value ratio calculation unit 215 that calculates the ratio of the specific vertical projection value by dividing the value by the integrated value of all changes, and whether the calculated specific change amount and specific vertical projection value ratio satisfy the predetermined condition But now targeted A vehicle discrimination part 216 that ⁇ Ru captured image data to be imaged Ru vehicle to determine whether two-wheeled automobile, a configuration and an output unit 217 that outputs vehicle discrimination data.
  • the block configuration diagram here is an example, and it is a matter of course that a so-called person skilled in the art can change the block configuration within a range without changing the essential part of the invention by appropriately modifying the design. . In other words, the way functional blocks are understood depends on the implementer, implementation environment and specifications.
  • FIG. 4 shows a case where a wheel is captured in a captured image captured by the imaging apparatus according to the present embodiment.
  • FIG. 5 is a captured image (when a four-wheeled vehicle is captured) captured by the imaging apparatus according to the present embodiment.
  • a CCD camera corresponds to the imaging device.
  • horizontal grid lines 110 and vertical grid lines 120 are shown on the captured image. The intersection of the horizontal grid line 110 and the vertical grid line 120 is a grid point 130, and a grid 140 is constituted by four adjacent grid points 130. The same applies to Fig. 5.
  • the technology for converting the RGB-format captured image used by the feature extraction unit 212 to the HSI format is a known technique and will not be described in detail here.
  • the feature extraction unit 212 needs to calculate the H component, S component, and I component of the HSI format. In other words, since there are only I components, it is not necessary to obtain H and S components. By not obtaining these components! Unnecessary arithmetic processing can be avoided.
  • I component of the pixels that are necessary for applying the differential filter it is only necessary to obtain only the I component of the pixels that are necessary for applying the differential filter, so that it is not necessary to obtain the I component for all the pixels of the captured image data.
  • This minimum I component also depends on the size of the differential filter. In the case of a 3-by-3 differential filter, there are a total of 3 top and bottom and 3 left and right for each target point including the target point. I component of 5 pixels is required. In general, in the case of an n-by-n differential filter, (2n-1) [pieces] of I components are required. Of course, if the required I component overlaps, it is not necessary to obtain the I component redundantly.
  • the target points are vertices of a plurality of grids formed by the vertical grid lines and the horizontal grid lines shown in FIG. 4 or FIG. By doing so, target points can be arranged at equal intervals in the captured image.
  • FIGS. 4 and 5 there are five vertical grid lines and five horizontal grid lines, but the present invention is not limited to this. Each of them may be n, or n and m, respectively.
  • the number of grid lines is reduced, the number of computation processes is reduced and the processing speed is increased.
  • the number of grid lines differs in each imaging environment and can be optimized during operation. The operator can manually set the reference result while referring to the correct answer rate.However, the number of grid lines can be increased or decreased from the initial number of correct check results. It would be desirable to have a control unit that
  • the imaging environment is the surrounding environment of the imaging device 10 (road surface, time of day (morning, noon, night, etc.), weather (sunny weather, rainy weather, cloudy weather, etc.), season, etc.) 10 itself's imaging performance. It is desirable to construct and use a Yule network, SOM (Self-Organizing Map), etc., with these parameters as input data and output data as the number of vertical grid lines and horizontal grid lines.
  • the difference in the differential value is the point where the density in the image changes. (The greater the gradient of the concentration value, the greater the differential value changes.)
  • the differential filter 1 is a filter that uses a new coefficient at each point of the image data as a pixel value. Actually, since it is a digital image, the difference is considered.
  • the filter coefficient has a horizontal component and a vertical component.
  • the magnitude of the derivative is used. After obtaining the horizontal component gh (i, j) and the vertical component gv (i, j),
  • the differential filter is generally called a Sobel filter (reference: Mikio Takagi, Yoshihisa Shimoda, “New Image Analysis Handbook” (pl231), University of Tokyo Press).
  • the amount of change of the pixel at the lattice point which is the vertex of the lattice formed from the vertical lattice line and the horizontal lattice line on the captured image
  • the amount of change having a value equal to or greater than a predetermined threshold is counted. It can be estimated that a point having a change amount of a certain value or more in the captured image is located in the two-wheeled vehicle or the four-wheeled vehicle reflected in the captured image among the lattice points. And for motorcycles When comparing the grid points located on the four-wheeled vehicle with the four-wheeled vehicle, the four-wheeled vehicle occupies a larger area in the captured image than the two-wheeled vehicle. Therefore, it is possible to discriminate whether the object reflected in the numerical image of the grid point located at this position is a four-wheeled vehicle or the other.
  • the vertical projection value is obtained by integrating the amount of change of the pixel at the grid point on each vertical grid line on the captured image.
  • a predetermined vertical projection value is obtained by adding a predetermined number of vertical projection values from a large value among the vertical projection values.
  • the specific vertical projection value ratio is obtained by dividing the total vertical projection value obtained by integrating all the vertical projection values, that is, the specific vertical projection value by the total change amount.
  • the line segments that pass through the pixels of the vertical projection value that constitute the specific vertical projection value must be continuous.
  • the third vertical grid line and the fourth vertical grid line are laterally continuous, and the vertical projection values of the third vertical grid line and the fourth vertical grid line can be integrated.
  • the first vertical grid line and the third vertical grid line are not continuous in the lateral direction, and adding the vertical projection values of the first vertical grid line and the third vertical grid line is the second vertical grid line. If you can't do it unless it is continuous.
  • the two-wheeled vehicle captured in the captured image When the two-wheeled vehicle captured in the captured image is viewed, it overlaps with several vertical grid lines among the total vertical grid lines (first characteristic). On the other hand, looking at the four-wheeled vehicle captured in the captured image, it overlaps with most of the vertical grid lines.
  • the amount of change in the pixels located in the two-wheeled vehicle and the four-wheeled vehicle is larger than that of the road surface not located on the object.
  • a predetermined value or more of the total change amount of the lattice point on the captured image is an integrated value of the change amount of the lattice point located on the object reflected in the captured image.
  • the integrated value of the change amounts of the lattice points on several vertical lattice lines among all the vertical lattice lines occupies a predetermined value or more among the total change amounts of the lattice points. If this condition is satisfied, it can be estimated that the vehicle is a motorcycle. Conversely, if an object other than the object such as a two-wheeled vehicle is imaged, it can be estimated that the vehicle is a four-wheeled vehicle. Where imaging Although the description has been made on the assumption that the target object is captured in the image, in the case of a captured image in which the target is not captured, the above condition is not satisfied, so it is included in the estimation result with the four-wheeled vehicle.
  • the predetermined conditions that the specific change amount and the specific vertical projection value ratio should satisfy in the determination by the vehicle determination unit 216 differ in detail in the imaging environment, but can be set based on the predetermined conditions described below.
  • the first condition is that the specific change amount number is equal to or greater than the second threshold value
  • the second condition is that the specific vertical projection value ratio is equal to or greater than the third threshold value.
  • This predetermined condition is based on the theory described in the explanations in [4. Specific change amount calculation processing] and [5. Specific vertical projection value ratio calculation processing]. If the first condition is satisfied, the vehicle is a four-wheeled vehicle. If the first condition is not satisfied, the vehicle is only a motorcycle and the road surface. If the second condition is satisfied, the vehicle is a two-wheeled vehicle. If the second condition is not satisfied, the vehicle is only a four-wheeled vehicle and the road surface.
  • a four-wheeled vehicle can be determined under the first condition
  • a two-wheeled vehicle can be determined under the second condition
  • a four-wheeled vehicle and a two-wheeled vehicle can be determined under the first and second conditions.
  • non-four-wheeled vehicle includes only pedestrians, animals, and road surfaces other than motorcycles (motorcycles, motorbikes and bicycles) and motorcycles.
  • the four-wheeled vehicle in the present invention includes ordinary vehicles such as sedans and large vehicles such as buses and large trucks. Naturally, this includes a vehicle in which four or more tires are arranged only by a vehicle in which four tires are arranged, and a vehicle in which four or less tires are arranged.
  • a vehicle with four or more tires is an example of a large truck, and a vehicle with four or less tires is an example of a tricycle.
  • the present invention can determine whether or not the vehicle reflected in the target image is a vehicle having an occupied space of a predetermined area or more, and departs from the gist of the present invention.
  • Nah ! I can interpret a four-wheeled vehicle in the range.
  • FIG. 6 is an operation flowchart of the vehicle determination device according to the present embodiment
  • FIG. 7 is a detailed flowchart of the specific change amount calculation process of the vehicle determination device according to the present embodiment
  • FIG. 8 is a specification of the vehicle determination device according to the present embodiment. It is a detailed flowchart of a vertical projection value ratio calculation process.
  • the CPU 210 receives and captures a captured image from the imaging device 10 as the input unit 211 (step S 100).
  • the imaging device 10 can transmit the captured image to the vehicle determination device 200 in real time immediately after imaging, or may transmit the imaging image a predetermined number of times or after a predetermined time.
  • the CPU 210 converts the vertex of the grid in the captured image and the periphery of the grid vertex required by the differential filter from the RGB component to the I component as the feature extraction unit 212 (step S200).
  • the CPU 210 executes a smoothing process (step S300).
  • a smoothing filter there is a filter of the following equation (4).
  • n is greater than 1.
  • weighted average filter and median filter there are weighted average filter and median filter.
  • step S200 the I component of the pixel around the vertex of the lattice required for the differential filter is also obtained, and a smoothing filter can be applied.
  • n ⁇ m when the differential filter is n rows and n columns and the smoothing filter is m rows and m columns.
  • a smoothing process may be performed between the step S100 and the step S200 that have been subjected to the smoothing process in step S300.
  • a smoothing process may be performed on all pixels of the captured image, but a configuration in which the smoothing process is performed only on the pixels used in the differential filter, and step S200 is performed only on the pixels that have been subjected to the smoothing process. It may be.
  • the CPU 210 applies a differential filter to the extracted data of the I component that has been subjected to the smoothing process as the differential filter part 213 (step S400). By doing so, the amount of change at the apex of each grid is obtained as filter data.
  • the CPU 210 executes a predefined specific change number calculation process in step S500 and a predefined specific vertical projection value ratio calculation process in step S600. Details of each process will be described later.
  • the CPU 210 determines whether the vehicle in which the specific change amount and the specific vertical projection value ratio force are also captured as the vehicle determination unit 216, and creates vehicle determination data (step S700). Specifically, if the number of specific changes is less than or equal to the second threshold, it is determined that the vehicle is not a four-wheeled vehicle, the number of specific changes is less than or equal to the fourth threshold, and the specific vertical projection value ratio is the third threshold [% ] If it is above, it will be judged as a motorcycle.
  • the vehicle discrimination data is a flag force indicating the type of motorcycle or automobile.
  • the CPU 210 outputs the vehicle discrimination data as the output unit 217 to the management computer 30 which is a totaling device together with the captured image, the captured time, and the captured location identification information (step S800).
  • the management computer 30 adds up the number of two-wheeled vehicles and four-wheeled vehicles for each imaging device 10. Then, by subtracting the integration result of the imaging device 10 that captures the leaving vehicle from the integration result of the imaging device 10 that images the entering vehicle, the number of vehicles currently entering the factory is reduced to two and four wheels. The car is distinguished and displayed on the display 240 of the management computer 30.
  • the CPU 210 extracts the amount of change in the intermediate force of the filter data obtained by the differential filter part 213 as the specific change amount calculation unit 214 (step S501), and determines whether or not the change amount force is greater than the extracted change amount (step S502). If n is greater than or equal to n, the number of specific changes is counted up (step S503). Next, it is determined whether or not the extracted change amount is the last change amount power (step S504). If it is the last change amount, the process ends. Otherwise, the process returns to step S501.
  • the CPU 210 integrates the amount of change at the nth horizontal position as the specific vertical projection value ratio calculation unit 215. That is, the amount of change of pixels on the nth vertical grid line is integrated (the initial value of step S60D on is 1.
  • the CPU 210 determines whether n is equal to N (step S602). In this case, n is incremented by 1 and the process returns to step S601, and if it is equal, the process proceeds to the next process.
  • the integrated values obtained by CPU 210 are arranged in descending order by the size of the integrated values (step S611).
  • T can be set arbitrarily. In Figure 4, T is 2, for example.
  • CPU210 force S Continuously excludes the vertical grid line integration value from the extracted vertical grid line, and calculates the specific vertical projection value by adding the integration value (step S613) . If an object is present in the captured image, whether it is a four-wheeled vehicle or a two-wheeled vehicle, it will occupy a certain area continuously and will not exist discretely in the captured image. Noise can be removed by not adding the integrated values of the grid lines that are not present. For example, in FIG.
  • the third vertical grid line and the grid points on the fourth vertical grid line overlap the two-wheeled vehicle and the two-wheeled vehicle operator, and normally the integrated value of the third vertical grid line or the fourth vertical grid line
  • the accumulated value of the vertical grid line is the first and second largest integrated value, but even if the first vertical grid line becomes the second largest vertical grid line due to noise, Not added by step S613.
  • the integrated value of the third vertical grid line or the integrated value of the fourth vertical grid line is integrated.
  • the integrated value of T vertical grid lines that are continuous in the horizontal direction including the vertical grid line centered on the vertical grid line with the highest integrated value can be integrated to obtain a specific vertical projection value.
  • the CPU 210 divides the specific vertical projection value by the value obtained by integrating all the integrated values to obtain the ratio of the specific vertical projection value (step S621).
  • the captured image force captured from the imaging device 10 is extracted at the specific point, the differential component is applied to the extracted I component, and the specific amount of change is applied.
  • the specific vertical projection value ratio is determined, and whether the vehicle reflected in the captured image is a two-wheeled vehicle or a four-wheeled vehicle is determined based on whether or not the calculated specific change amount and specific vertical projection value ratio satisfy the predetermined condition. can do.
  • the pixels for image processing in the captured image are limited to specific pixels, and the vehicle can be identified at high speed.
  • the amount of change in the density of the lattice points is obtained for the captured image of the two-wheeled vehicle in FIG. 4 and the captured image of the four-wheeled vehicle in FIG. Table 1 (four-wheeled vehicle) and table 2 (two-wheeled vehicle) are obtained.
  • 4 and 5 are line drawings, but they are actually RGB images, and experiments were performed using these RGB images.
  • the value of the n-th row and the m-th column in the table is the rate of change in density of the pixel at the intersection of the n-th horizontal grid line and the m-th vertical grid line.
  • Table 3 and Table 4 are the sum of each row in Table 1 and Table 2, respectively.
  • Figures 9 and 10 are graphs showing the values calculated by vertically projecting the amount of change in all horizontal pixels of the grid line at each horizontal position.
  • Fig. 9 shows the motorcycle and
  • Fig. 10 shows the motorcycle.
  • the vehicle is determined using the amount of change in the skipped pixels of the horizontal grid line.
  • the amount of pixel change corresponding to the intersection of the horizontal and vertical grid lines has been used.
  • Figures 9 and 10 show the vertical projections of the changes in all the pixels on the horizontal grid line. In other words, this corresponds to the case where the vertical grid lines are provided by the number of horizontal pixels.
  • FIG. 9 and FIG. 10 in the case of a two-wheeled vehicle, one large mountain is formed, and the amount of change is concentrated in a certain width direction. In some cases, a plurality of mountains are formed, and the amount of change is dispersed. This also supports the theory of the present invention described in the first embodiment for the specific vertical projection value ratio.
  • the specific vertical projection value was obtained by multiplication, but it was parallel to the Y-axis direction as shown in Fig. 9 and Fig. 10. This is a configuration in which multiple straight lines are drawn, the amount of change is accumulated between the areas defined by the straight line, the largest integrated value is the specific vertical projection value, and the ratio is calculated by dividing by the total amount of change. It can also be.
  • the vertical projection values are grouped into a predetermined number so that the line segments passing through the pixels having the same vertical projection value are continuous, and the vertical projection values are integrated in the group, and the integrated value is the largest. It is also possible to determine the ratio of the specific vertical projection value, which is the integrated value of the vertical projection values of a large group, in the total amount of change, and determine the vehicle based on that ratio.
  • the differential value may be obtained by using force Fourier transform in which the differential value is obtained by using a differential filter. For example, a Fourier transform is applied to the captured image, and the low-frequency component is removed and only the high-frequency component is used to obtain the inverse Fourier transform.
  • the specific change point is a place where two-wheeled vehicles, four-wheeled vehicles and the like are estimated to exist. However, two-wheeled vehicles, four-wheeled vehicles, etc. continuously occupy a specific area in the captured image and do not exist discretely. Therefore, a specific change point that is more than a predetermined distance away from a specific change point that forms a set indicates that there is a two-wheeled vehicle, four-wheeled vehicle, etc. Very expensive. In other words, more accurate vehicle discrimination can be realized by performing vehicle discrimination while ignoring such specific change point separated by a predetermined distance or more. This is preferably done between step S400 and step S500.
  • the “specific change point separated by a predetermined distance or more from the specific change point forming a certain set” is used, but the closest specified change point is that the specific change point is a predetermined distance or more. You can also.
  • the distance between the specific change amount points is obtained to determine whether the force is greater than a predetermined distance and the specific change amounts located discretely are specified, but a clustering method can also be used.
  • a clustering method a known clustering method can be used.
  • the K-means method references: Mikio Takagi, Yoshihisa Shimoda, “New Image Analysis Handbook” (pl577-pl579), The University of Tokyo Press
  • clusterin It is also possible to specify a small ⁇ cluster with one element, etc., among the clusters formed by using the grouping method and ignore the elements of this cluster as discrete specific change points.

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Traffic Control Systems (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

【課題】大量の車両静止画像データを車種ごとに判別させる際に、高速処理にて判別できる車両判別装置を提供する。  【解決手段】撮像画像の等間隔の位置の画素を明度成分に変換し、微分フィルターをかけ、求めた変化量の中で一定以上大きいものが何個存在するかをカウントし、そのカウント値に基づいて対象画像に撮像されている車両を判別するので、撮像画像中で撮像される対象物の大きさに従いカウント値も変化し、占有領域の大きいものはカウント値も大きく、占有領域の小さいものはカウント値も小さく、それによって車両を正しく判別することができる。 

Description

明 細 書
車両判別装置、車両判別方法、車両判別プログラム、および車両判別プ ログラムを格納したプログラム記録媒体
技術分野
[0001] 本発明は車両の撮像画像力 情報処理技術を用いて車両を判別する装置に関す る。
背景技術
[0002] 本発明の第 1の背景技術として、特開 2000— 149181号公報に開示されるものが ある。
[0003] この第 1の背景技術は、路面及び路面上の設定領域を通過する車両を連続して撮 影することにより連続画像を得るためのカメラと、前記連続画像についてそれぞれに 輝度ヒストグラムを計算により求めるための輝度ヒストグラム計算手段と、前記輝度ヒス トグラムの時系列差分を計算するための差分計算手段と、設定時間中に変化がな ヽ 前記輝度ヒストグラムを路面データとして保存するための保存手段と、前記設定時間 中に前記輝度ヒストグラムに変化があるときに、前後の 2つの輝度ヒストグラムの差分 を計算するための差分計算手段と、前記差分と予め設定したしきい値とを比較して車 両の存在の判別を行うための車両検知手段とからなる交通流計測システムである。
[0004] この第 1の背景技術によれば、車両存在を高精度に数値化することができる。
本発明の第 2の背景技術として、特開 2002— 8186号公報に開示されるものがあ る。
[0005] この第 2の背景技術は、識別対象となる車両の画像データを微分処理することによ り、当該車両の輪郭線を抽出する輪郭線抽出手段と、上記輪郭線抽出手段にて抽 出された輪郭線の所定領域内における所定抽出方向成分の頻度を算出することに より、当該輪郭線の特徴量を抽出する特徴量抽出手段と、予め取得された、識別基 準となる車両の基準特徴量と当該車両の車種を示す情報とを、相互に関連付けて記 憶する記憶手段と、上記特徴量抽出手段にて抽出された特徴量と、上記記憶手段 にて記憶された基準特徴量とを相互にマッチングすることにより、上記識別対象とな る車両の車種を識別する特徴量マッチング手段とを備えた車種識別装置である。
[0006] このように第 2の背景技術によれば、輪郭線抽出手段にて車両の輪郭線が抽出さ れ、特徴量抽出手段にて輪郭線の特徴量が抽出される。そして、特徴量マッチング 手段にて、この特徴量と、予め取得された基準特徴量とのマッチングが行なわれ、車 両の車種が識別される。したがって、従来のように単なる見かけ上の大きさでなぐ車 両各部の輪郭線の特徴量に基づ 、て車種の識別が行なわれるので、車両と背景部 分との輝度の差を問題にすることなく車種を識別でき、車種識別の精度を向上させる ことができる。
[0007] 本発明の第 3の背景技術として、特許第 3453952号公報に記述されるものがある
[0008] この第 3の背景技術は、入力されたテレビカメラ力ゝら撮像された道路上の画像を保 持する画像入力手段と、前記道路上の画像の輝度分布を解析する画像解析手段と 、順次入力された道路上の画像力 切り出されたテンプレートに対してパターンマツ チングし、車両を追跡する車両追跡手段と、前記パターンマッチング結果力 車両の 追跡距離を計算し、計算結果の値が所定値より大きい場合、通過車両と判定する車 両判定手段と、前記通過車両と判定された場合、予め定めた車種判定領域の画像 を垂直方向に微分し、微分した画像を水平方向に投影して加算された波形を得て、 前記波形のピークで最も離れた 2つを選択し、選択された 2つのピークの各々の垂直 方向の座標に基づいて 2つのテンプレートを登録し、前記 2つのテンプレートの中心 座標の差力 車両前面部を道路上に投影した投影長を算出し、算出された複数地 点の投影長の変化率力 前記車両の高さを判定し、判定された高さに基づいて前記 車両の車種を判定する車種判定手段とを有する交通流計測装置である。
[0009] このように第 3の背景技術によれば、車両の影をテンプレートで切り出すことがなぐ 又 2台の車両を 1つのテンプレートで切り出すことがないため、車両の影に影響される ことなぐ並行する車両が重なっている場合でも精度良く車両を認識することができる 。また、背景画像を必要としないため、混雑時でも精度良く車両を追跡することができ る。
特許文献 1 :特開 2000— 149181号公報 特許文献 2 :特開 2002— 8186号公報
特許文献 3:特許第 3453952号公報
発明の開示
発明が解決しょうとする課題
[0010] 前記第 1の背景技術は動画を対象とし、動画 (連続画像内)であれば、差分法を用 いて、動体のみを抽出し、そのパターンマッチングを行うことで、二輪車か否かを判定 できる力もしれない。し力しながら、静止画の場合は動画のように複数枚の静止画か ら構成されておらず静止画同士を比較して動体のみを抽出することができないため、 二輪車がどこにあるかを判定する必要があり、その判定手段がなく車両の有無を判 定することができな 、と 、う課題を有する。
[0011] また、前記第 2の背景技術は、一枚のカラー静止画像力 四輪車の抽出を行う場 合、ある程度の面積を占めているため、画像内のエッジを抽出し、そのエッジ間距離 や特性など力 車両位置を推定できる。し力しながら、二輪車は、四輪車に比べて、 静止画像内に占める面積が小さいため、エッジのみを利用した方法は有効ではなく
、正確に判定することができな 、と 、う課題を有する。
[0012] さらに、前記第 3の背景技術も、前記第 1の背景技術と同様に、動画を前提としてお り、動画でなければ、車両追跡手段が機能せず、以降の処理を実行できないため、 車両を認識することができな 、と 、う課題を有する。
[0013] 本発明は、大量の車両静止画像データを車種ごとに判別させる際に、高速処理に て判別できる車両判別装置を提供することを目的とする。
課題を解決するための手段
[0014] 通常画像認識にて微分フィルターを使用する際、輪郭線抽出等に使用される。そ のとき画像内のすべての画素に対して微分フィルターはかけられる。
[0015] ところで、四輪車には、数多くの複雑な形状をした部品から構成されているため複 雑なエッジ群を構成する。一方二輪車は画像に占める面積の割合も小さぐ四輪車 に比べエッジ群は限られて 、る。
[0016] よって、四輪車および二輪車画像におけるエッジ群の特徴抽出は画像内全てに微 分フィルターをかけなくても得ることができる。 [0017] 本発明では、画像中の HSI (色相 (Hue)'彩度 (Saturation).明度 (Intensity))の I成分 に対して微分フィルターを格子の頂点(水平方向へ n本、垂直方向へ n本)にかけ、 それから得られた画像中の輝度の算出値を使用することで二輪車画像とそれ以外の 画像との判別を行いその処理の高速ィ匕を実現することができる。
[0018] (1)車両が撮影されたカラー静止画像の RGBヒストグラムを取り出し、その RGBか ら HSIの I成分 (輝度)を計算し求める。
[0019] (2)求めた I成分に微分フィルターをかけ画像内での濃度変化を求める。このとき微 分フィルタ一は画像上に指定した格子の頂点、つまり、格子を構成する格子線の交 点だけにかけられる。
[0020] (3) 1枚の画像につき、画像を左端'中央'右端の 3つにわけ、各領域の全変化量 が全領域の全変化量に対して占めて 、る変化量の割合を求める。
[0021] (4)変化量が第 1の閾値よりも大きい変化量数が第 2の閾値より少ない、また上記の 変化量割合が所定条件に該当していれば二輪車、それ以外なら二輪車以外の車両 と判別する。
[0022] さらに、(2)で求めた濃度 (輝度)変化に平滑ィ匕を施すことで変化量を滑らかにし、 ノイズを除去することもできる。
[0023] [1] 本発明に係る車両判別装置は、車両の画像に基づいて車両の判別を行うた めの車両判別装置であって、画像中のあらかじめ設定された格子点に対応する画素 及びその周辺の画素の明度成分を抽出するための特徴抽出手段と、特徴抽出手段 によって抽出された明度成分の値に基づいて微分処理を行い、格子点に対応する 画素の明度成分の変化量を求めるための微分手段と、微分手段によって求められた 変化量のうち、あら力じめ定められた第 1の閾値以上の値となる変化量の個数を求め るための特定変化量数算出手段と、特定変化量数算出手段によって求められた変 化量の個数に基づいて車両の判別を行うための車両判別手段とを含むことを特徴と する。
[0024] このように本発明によれば、撮像画像の等間隔の位置の画素およびその周辺の画 素を明度成分に変換し、等間隔の位置の画素に微分フィルターをかけて変化量を求 め、求めた変化量の中で一定以上大きいものが何個存在するかをカウントし、その力 ゥント値に基づ 、て対象画像に撮像されて 、る車両の判別を行うので、撮像画像中 で撮像される対象物の大きさに従いカウント値も変化し、占有領域の大きいものは力 ゥント値も大きぐ占有領域の小さいものはカウント値も小さぐそれによつて車両を正 しく判別することができるという効果を奏する。大まかに四輪車とそれ以外とを判別す ることができるが、四輪車の中でも、大型車、中型車、小型車等を判別することもでき 、四輪車以外であっても、自動二輪車、原動機付自転車、自転車、歩行者、動物等 を判別することもできる。
[0025] 「その周辺の画素」とは、対象画像上の水平方向及び垂直方向のそれぞれに等間 隔の位置の画素の周辺の画素であり、必要最小限としては、次工程の微分手段で必 要となる明度成分の値の画素である。たとえば、微分フィルターが 3行 3列の行列式 で示されるならば、対象画像上の水平方向及び垂直方向のそれぞれに等間隔の位 置の画素を中心として垂直方向に 3つ、水平方向に 3つの画素の明度成分の値が次 工程の微分手段で必要となる明度成分の値であり、「その周辺の画素」は対象画像 上の水平方向及び垂直方向のそれぞれに等間隔の位置の画素を除いた、 4つであ る。
[0026] 「第 1の閾値」は、通常、対象画像の対象物が撮像されていない位置で求まる変化 量の値と、対象画像の対象物が撮像されている位置の変化量の値との間に設定する 。撮像環境により変化量の値が異なるので、装置構築時に設定することが望ましい。
[0027] 勿論、特徴抽出手段は、全画素の明度成分の値を求めてもよい。
[2] 本発明に係る車両判別装置の車両判別手段は、特定変化量数算出手段に よって求められた変化量の個数があら力じめ定められた第 2の閾値以上である場合 に、車両が四輪車であると判別するようにすることが望まし 、。
[0028] このように本発明によれば、撮像装置が撮像する対象物は多種あるが、撮像画像を 占有する領域の観点からすると、変化量数は四輪車かそれ以外かで大きく異なり、四 輪車の中でも最も小さ 、軽自動車であっても、四輪車以外の中でもっとも大き 、であ ろう自動二輪車と比べると大きぐつまり、四輪車とそれ以外との間に変化量数につ いて大きく値が離隔しており、その判別は容易であって、正確に行うことができるとい う効果を有する。 [0029] したがって、「第 2の閾値」は、通常、対象画像中の対象物が四輪車である場合の 変化量数と、対象画像中の対象物が四輪車以外である場合の変化量数との間に設 定する。撮像環境により変化量数の値が異なるので、装置構築時に設定することが 望ましい。
[0030] [3] 本発明に係る車両判別装置は、車両の画像に基づいて車両の判別を行うた めの車両判別装置であって、画像中のあら力じめ設定された垂直格子線および水平 格子線の交点となる格子点に対応する画素及びその周辺の画素の明度成分を抽出 するための特徴抽出手段と、特徴抽出手段によって抽出された明度成分の値に基 づいて微分処理を行い、格子点に対応する画素の明度成分の変化量を求めるため の微分手段と、微分手段によって求められた変化量を垂直格子線に沿って積算して 垂直投影値を求め、垂直投影値を値が大きい順にあらかじめ定められた個数だけ抽 出し、抽出された垂直投影値のうち隣接する垂直格子線に沿って積算された垂直投 影値を積算して特定垂直投影値を求め、全格子点に対応する画素の明度成分の変 化量の積算値に対する特定垂直投影値の比率を求めるための特定垂直投影値比 率算出手段と、特定垂直投影値比率算出手段によって求められた特定垂直投影値 の比率に基づ 、て車両の判別を行うための車両判別手段とを含むようにしてもょ 、。
[0031] このように本発明によれば、撮像画像の等間隔の位置の画素を明度成分に変換し 、微分フィルターをかけ、求めた変化量を垂直格子線に沿って積算して垂直投影値 を求め、垂直格子線同士が隣接関係にあり、且つ、求めた垂直投影値の中で値が大 き ヽ複数個の垂直投影値を積算して特定垂直投影値を求め、全変化量で除法する ことで特定垂直投影値の比率を求めるので、幅方向が細 、対象物の特定垂直投影 値の比率は大きぐ一方、幅方向が太い対象物の特定垂直投影値の比率は小さぐ それによつて車両を正しく判別することができるという効果を奏する。大まかに二輪車 とそれ以外とを判別することができるが、二輪車の中でも、自動二輪車、原動機付自 転車、自転車、歩行者、動物を判別することもでき、四輪車の中でも、大型車、中型 車、小型車を判別することもできる。
[0032] [4] 本発明に係る車両判別装置の車両判別手段は、特定垂直投影値比率算出 手段によって求められた特定垂直投影値の比率があら力じめ定められた第 3の閾値 以上である場合に、車両が二輪車であると判別するようにすることが望まし 、。
[0033] このように本発明によれば、撮像装置が撮像する対象物は多種あるが、縦方向に 一定の長さを有する幅方向の長さの観点力 すると、特定垂直投影値の比率は二輪 車かそれ以外かで大きく異なり、二輪車の中でも最も大きい自動二輪車であっても、 四輪車の中でもっとも小さいであろう軽自動車と比べると幅がなぐ並びに、二輪車の 中でも小さい自転車であっても、歩行者と比べると縦方向の長さがあり、つまり、二輪 車とそれ以外の間に特定垂直投影値の比率について大きく値が離隔しており、その 判別は容易であって、正確に行うことができるという効果を有する。
[0034] さらに、二輪車と判別するための条件として、特定変化量数が第 4の閾値以下であ る条件をカ卩えることもできる。このときの、第 4の閾値は、 [2]の第 2の閾値以下である ことが望ましい。
[0035] したがって、「第 3の閾値」は、通常、対象画像中の対象物が二輪車である場合の 特定垂直投影値の比率と、対象画像中の対象物が二輪車以外である場合の特定垂 直投影値の比率との間に設定する。撮像環境により特定垂直投影値の比率の値が 異なるので、装置構築時に設定することが望ましい。
[0036] 前記 [1]及び [3]を適用して 1つの装置とすることで、より正確に車両の判別を実行 することができる。つまり、 [1]で判別された結果と [3]で判別された結果とを照合し、 同じ結果である場合にはその判別結果が正しいものとして出力することができる。異 なる結果であれば、一方の判別結果が誤っている可能性が高いので、判別未確定と して別途出力することもできる。さらに、ある車両の種別について [1]の判別結果の正 答率が高ぐ他の車両の種別について [3]の判別結果の正答率が高いといった、車 両の種別によって [1]と [3]の判別結果の正答率が異なることもあり、判別結果の正 答率の高い判別結果を出した方を優先的に出力する構成にすることもできる。たとえ ば、 [1]の判別結果が軽自動車であり、軽自動車について [1]のこれまでの正答率 は 95 [%]であり、一方、 [3]の判別結果が普通乗用車であり、普通乗用車について [ 3]のこれまでの正答率は 60[%]であるときは、 [1]の判別結果を優先して出力する 。さらに、同じ撮像環境の条件値でも時間によって変化するものもパラメータとして用 いることもできる。たとえば、各天候条件での正答率も記録しておき、対象とする撮像 画像の撮像時の天候条件に合致する天候条件の正答率を読み出す構成とすること ちでさる。
[0037] 前記の発明は、装置として説示してきたが、当業者であれば明らかな通り、プロダラ ム、方法、システムとしても把握することができる。
[0038] これら前記の発明の概要は、本発明に必須となる特徴を列挙したものではなぐこ れら複数の特徴のサブコンビネーションも発明となり得る。
発明の効果
[0039] 大量の車両静止画像データが車両判別装置に入力された際、二輪車が撮像され ている撮像画像を高速に判別することができる。
発明を実施するための最良の形態
[0040] ここで、本発明は多くの異なる形態で実施可能である。したがって、下記の実施形 態の記載内容のみで解釈すべきではない。また、実施形態の全体を通して同じ要素 には同じ符号を付けている。
[0041] 実施形態では、主に装置について説明するが、所謂当業者であれば明らかな通り 、本発明はコンピュータで使用可能なプログラム、システム、方法としても実施できる。 また、本発明は、ハードウェア、ソフトウェア、または、ソフトウェア及びハードウェアの 実施形態で実施可能である。プログラムは、ハードディスク、 CD-ROM, DVD-R OM、光記憶装置または磁気記憶装置等の任意のコンピュータ可読媒体に記録でき る。さらに、プログラムはネットワークを介した他のコンピュータに記録することができる 図面の簡単な説明
[0042] [図 1]本発明の第 1の実施形態に係る撮像環境の説明図である。
[図 2]本発明の第 1の実施形態に係るシステム構成図及び車両判別装置のハードウ エア構成図である。
[図 3]本発明の第 1の実施形態に係る車両判別装置のブロック構成図である。
圆 4]本発明の第 1の実施形態に係る撮像装置で撮像された撮像画像に輪車が撮 像された場合)である。
[図 5]本発明の第 1の実施形態に係る撮像装置で撮像された撮像画像 (四輪車が撮 像された場合)である。
[図 6]本発明の第 1の実施形態に係る車両判別装置の動作フローチャートである。
[図 7]本発明の第 1の実施形態に係る車両判別装置の特定変化量数算出処理の詳 細フローチャートである。
[図 8]本発明の第 1の実施形態に係る車両判別装置の特定垂直投影値比率算出処 理の詳細フローチャートである。
[図 9]その他の実施形態に係る格子線の全水平画素の変化量を各水平位置で垂直 投影して算出した値をグラフ化した図である。
[図 10]その他の実施形態に係る格子線の全水平画素の変化量を各水平位置で垂直 投影して算出した値をグラフ化した図である。
符号の説明
10 撮像装置
30 管理コンピュータ
200 車両判別装置
210 CPU (プロセッサ)
211 入力部
212 特徴抽出部
213 微分フィルタ一部
214 特定変化量数算出部
215 特定垂直投影値比率算出部
216 車両判別部
217 出力部
220 DRAM
230 ハードディスク
240 ディスプレイ
250 キーボード
260 マウス
270 LANカード 280 CD— ROMドライブ
(本発明の第 1の実施形態)
[1.システム構成]
図 1は本実施形態に係る撮像環境の説明図である。本実施形態では撮像装置 10 を工場敷地内に敷設された道路脇に配置し、工場母屋内に車両判別装置 200を配 置している。撮像装置 10で撮像された撮像画像は、撮像装置 10と車両判別装置 20 0を結ぶ通信路を介して車両判別装置 200に送信され、車両判別装置 200は受信し た撮像画像に情報処理を施して車両判別結果を出力する。車両判別結果は管理者 が操作する管理コンピュータ 30で集計され、敷地内に入場している車両数を四輪車 と二輪車毎に表示する。これらの情報は、例えば、警備上用いることができる他、ェ 場施設増設の設計時に用いることができる。
[0044] 図 2は本実施形態に係るシステム構成図及び車両判別装置のハードウェア構成図 である。車両判別装置 200のハードウェアの構成は、一般のコンピュータの構成であ り、 CPU(Central Processing Unit)210、 DRAM(Dynamic Random Access Memory) 等のメインメモリ 220、外部記憶装置であるハードディスク 230、表示装置であるディ スプレイ 240、入力装置であるキーボード 250及びマウス 260、ネットワークに接続す るための拡張カードである LANカード 270、 CD—ROMドライブ 280等からなる。つ まり、 CD—ROM等の記憶媒体に格納された車両判別プログラム、または、ネットヮ ークを介して他のコンピュータ力も送信される車両判別プログラムを、コンピュータの ハードディスク 230に複製しメインメモリ 220に適切に読み出し可能な状態にするイン ストールが実行され、一般のコンピュータが車両判別装置を構成している。なお、一 般のコンピュータではなく車両判別装置に特ィ匕したノヽードウエアを用いて車両判別 装置を構成することもできる。具体的には、車両判別装置上のロジックを ASIC (Appli cation Specific IC)で実装し、メモリ等の複数の LSIと共にシステム LSIで車両判別装 置を構成することもできる。
[0045] 管理コンピュータ 30もハードウェアの構成は、車両判別装置 200と同様に、一般の コンピュータの構成である。ここで、車両判別装置 200と管理コンピュータ 30とを同一 のコンピュータ上に構築することもできる。 [0046] 図 3は本実施形態に係る車両判別装置のブロック構成図である。車両判別装置 20 0は、撮像装置 10からの撮像画像を取り込む入力部 211と、 RGB形式の撮像画像を HSI変換して I成分を抽出する特徴抽出部 212と、抽出された HSI形式の I成分のみ の抽出データに対して特定点のみに微分フィルターをあてる微分フィルタ一部 213と 、フィルターデータを構成する変化量が第 1の閾値以上ある変化量数を算出する特 定変化量数算出部 214と、撮像画像データ上の水平位置が同じフィルターデータを 構成する変化量を積算して積算した値の中で特定の条件を満たす値をさらに積算し て特定垂直投影値を求め、この特定垂直投影値を全変化量の積算値で除算して特 定垂直投影値の比率を求める特定垂直投影値比率算出部 215と、求めた特定変化 量数及び特定垂直投影値比率が所定条件を満たすか否かで、現在対象となって ヽ る撮像画像データに撮像されて ヽる車両が四輪車か二輪車かを判別する車両判別 部 216と、車両判別データを出力する出力部 217とを備える構成である。ここでのブ ロック構成図は一例であり、所謂当業者であれば適宜設計変更を実施して発明の本 質的部分を変更しな 、範囲でブロック構成を変えることができるのは勿論である。つ まり、機能ブロックの捉え方は実装者、実装環境及び仕様によって異なるからである
[0047] 撮像装置 10は 2台あり、 1台は入場する車両を撮像すべく入場方向の所定範囲を 撮像し、残り 1台は退場する車両を撮像すべく退場方向の所定範囲を撮像する。図 4 は本実施形態に係る撮像装置で撮像された撮像画像に輪車が撮像された場合)で ある。図 5は本実施形態に係る撮像装置で撮像された撮像画像(四輪車が撮像され た場合)である。撮像装置は例えば CCDカメラが該当する。図 4では撮像画像上に 水平格子線 110および垂直格子線 120が記載されて ヽる。水平格子線 110および 垂直格子線 120の交点が格子点 130であり、隣接する 4つの格子点 130によって格 子 140が構成される。図 5も同様である。
[2.特徴抽出の処理]
特徴抽出部 212が使用する RGB形式の撮像画像を HSI形式に変換する技術は周 知'慣用技術であり、ここで、詳説しない。
[0048] 特徴抽出部 212が求める必要があるのは、 HSI形式の H成分、 S成分、 I成分のう ち、 I成分のみであるので、 H成分、 S成分は求める必要がない。これらの成分を求め な!、ことで、不必要な演算処理を回避することができる。
[0049] また、撮像画像データの全ての画素について、 I成分を求める必要もなぐ最小限、 微分フィルターを適用するにあたって必要となる画素の I成分のみを求めるだけでよ い。この最小限の I成分は、微分フィルターの大きさにも依存し、 3行 3列の微分フィル ターの場合には、対象点毎に、対象点も含めて上下 3個、左右 3個の計 5個の画素の I成分が必要となる。一般的には、 n行 n列の微分フィルターの場合には(2n— 1) [個 ]の I成分が必要となる。勿論、必要となる I成分が重複する場合には、重複して I成分 を求める必要はない。
[0050] 本実施形態では、対象点は、図 4又は図 5に示す垂直格子線と水平格子線で形成 される複数格子の頂点である。そうすることで、撮像画像中に等間隔に対象点を配置 することができる。図 4及び図 5では、垂直格子線及び水平格子線それぞれ 5本ずつ であるが、本発明はこれに限定されない。それぞれ、 n本ずつであってもよいし、それ ぞれ n本、 m本であってもよい。
[0051] 格子線数が減れば演算処理数が減るため高速になるが、最低限必要となる格子線 数が存在する。この格子線数は各撮像環境で異なり、運用中に最適化が図られる。 運用者が手動で判別結果の正答率を参照しながら設定することもできるが、初期状 態の格子線数から目標となる判別結果の正答率に基づき格子線数を増カロさせたり減 少させたりする制御部を備えることが望ま 、。
[0052] 撮像環境は撮像装置 10の配設周辺環境 (路面、時刻 (朝、昼、夜等)、天候 (晴天 、雨天、曇天等)、季節等)、撮像装置 10の撮像領域、撮像装置 10自体の撮像性能 等である。これらパラメータを入力データとし、出力データを垂直格子線及び水平格 子線の数とする-ユールネットワーク、 SOM(Self- Organizing Map)等を構築して用い ることが望ましい。
[3.微分フィルターの処理]
微分値に差があるところは画像内の濃度が変化して 、る点である。(濃度値の傾き が大きいほど微分値は大きく変化する。 )
差が大きければ大き 、ほど急激に濃度が変わって 、る点であるから、その差がある 点付近に路面以外のものが映っていると推測できる。
[0053] 二輪車の場合路面情報が多いため、四輪車に比べて濃度変化が起きている点が 少ない。よって、この濃度変化が起きている点に着目し、これらの点がある一定値より も多ければ四輪車少なければ二輪車、と判別できる。
[0054] 微分フィルタ一は、画像データの各点での微係数を新し 、画素値とするフィルター である。実際には、ディジタル画像であるから差分を考えることになる。フィルター係 数には水平方向成分と垂直方向成分がある。
[0055] 水平方向のフィルター係数は次の通り。
[0056] [数 1]
Figure imgf000015_0001
[0057] 垂直方向のフィルター係数は次の通り。
[0058] [数 2]
Figure imgf000015_0002
[0059] 本実施形態は微係数の大きさを用いる。水平方向成分 gh(i,j)、垂直方向成分 gv(i,j) を求めた後、
[0060] [数 3]
8(i ) = sh 2(i,j) + gv 2(i · · ( 3 )
[0061] によって、 g(i,j)を求める。
前記微分フィルタ一は、一般的に、 Sobelフィルターと呼ばれる (参考文献:高木幹 雄、下田陽久、「新編 画像解析ハンドブック」(pl231)、東京大学出版会)。
[4.特定変化量数算出処理]
撮像画像上の垂直格子線と水平格子線から形成される格子の頂点である格子点 の画素の変化量のうち、所定閾値以上の値を有する変化量をカウントする。撮像画 像中で一定値以上の変化量を有する点は、前記格子点の中でも撮像画像に写り込 んでいる二輪車、四輪車に位置するものと推定することができる。そして、二輪車に 位置する格子点と四輪車に位置する格子点を比較した場合、四輪車の方が二輪車 に比べ撮像画像中に占める面積が大きいため、位置する格子点の数も多くなる。し たがって、この位置する格子点の数力 撮像画像中に写りこむ対象物が四輪車かそ れ以外かを判別することができる。
[5.特定垂直投影値比率算出処理]
撮像画像上の各垂直格子線上の格子点の画素の変化量を積算したものが、垂直 投影値である。この垂直投影値の中で大きい値から予め定められている個数の垂直 投影値を積算して特定垂直投影値を求める。そして、全ての垂直投影値を積算した 全垂直投影値、つまり、全変化量で特定垂直投影値を除法して特定垂直投影値比 率を求める。なお、特定垂直投影値を構成する垂直投影値の画素を通過する線分 は連続している必要がある。つまり、たとえば、第 3の垂直格子線と第 4の垂直格子線 は横方向に連続しており第 3の垂直格子線と第 4の垂直格子線の垂直投影値を積算 することはできるが、第 1の垂直格子線と第 3の垂直格子線は横方向に連続しておら ず第 1の垂直格子線と第 3の垂直格子線の垂直投影値を積算することは第 2の垂直 格子線も含めて連続して 、ない限りはできな 、と 、うことである。
[0062] 撮像画像に撮像されている二輪車を見ると、全垂直格子線のうち数本の垂直格子 線と重なる (第 1の特性)。一方、撮像画像に撮像されている四輪車を見ると、全垂直 格子線のうちほとんどの垂直格子線と重なる。ところで、 [4.特定変化量数算出処理 ]で前説したように、四輪車に位置する格子点が二輪車に位置する格子点よりも多い 。そして、二輪車、四輪車に位置する画素の変化量は、対象物に位置しない路面と 比べその値が大きい。また、撮像画像上の格子点の全変化量のうち所定以上は撮像 画像に写り込んでいる対象物に位置する格子点の変化量の積算値である。そうする と、二輪車が撮像される撮像画像においても格子点の全変化量のうち所定以上を占 めるのは二輪車に位置する格子点の変化量の積算値となる(第 2の特性)。
[0063] したがって、第 1の特性及び第 2の特性から、全垂直格子線のうち数本の垂直格子 線上の格子点の変化量の積算値が、格子点の全変化量のうち所定以上占めるという 条件を満たせば、二輪車等であると推定することができる。逆に、二輪車等の対象物 以外が撮像されているとすれば、四輪車であると推定することができる。ここで、撮像 画像には対象物が撮像されていることを前提に説明したが、対象物が撮像されてい な 、撮像画像の場合には、前記条件を満たさな 、ので四輪車との推定結果に含ま れることになる。四輪車との推定結果に含ませたくない場合には、格子点の全変化量 の値を閾値判断することで、取り除くことができる。つまり、対象物が撮像されていな いほとんど路面のみ力もなる撮像画像は各格子点での変化量も少なく積算した全変 化量の値も少ないからである。同様に、変化量数が所定以下か否かで路面のみから なる撮像画像カゝ否かを判断することもできる。
[6.車両判別]
車両判別部 216による判定において特定変化量数及び特定垂直投影値比率が満 たすべき所定条件も、詳細には撮像環境で異なるが、以下説示する所定条件を基準 にして設定することができる。
[0064] この所定条件は、第 1の条件が特定変化量数が第 2の閾値以上であり、第 2の条件 が特定垂直投影値比率が第 3の閾値以上である。この所定条件は [4.特定変化量 数算出処理]及び [ 5.特定垂直投影値比率算出処理]での説示事項に記載した理 論に基づく。第 1の条件を満たせば四輪車であり、第 1の条件を満たさなければ二輪 車、路面のみである。第 2の条件を満たせば二輪車であり、第 2の条件を満たさなけ れば四輪車、路面のみである。路面のみで対象物が撮像されていない撮像画像は 前記した方法で取り除くことができるので、二輪車と四輪車とを判別することができる 。より正確には第 1の条件で四輪車を判別でき、第 2の条件で二輪車を判別でき、第 1の条件及び第 2の条件で、四輪車及び二輪車を判別することができる。
[0065] ここで、四輪車以外とは、二輪車(自動二輪車、原動機付自転車、自転車)、二輪 車以外に歩行者、動物、路面のみが含まれる。なお、本発明における四輪車とは、セ ダン等の普通自動車、バスや大型トラック等の大型自動車を含む。当然ながらタイヤ が四個配設された車両だけでなぐ四個以上のタイヤが配設された車両、四個以下 のタイヤが配設された車両を含むものである。タイヤが四個以上配設された車両とは 大型トラックが一例であり、タイヤが四個以下配設された車両とは三輪車が一例であ る。すなわち、対象画像に写り込んだ車両が所定領域以上の占有スペースを有する 車両か否かを本発明は判別することができるものであり、この本発明の要旨を逸脱し な!、範囲で四輪車を解釈することができる。
[0066] また、特定変化量数が第 2の閾値以下という条件に該当する場合には、二輪車以 外に歩行者、動物、路面のみが含まれるが、特定垂直投影値比率が第 3の閾値以上 であれば、路面のみは含まれない。第 3の閾値の調整次第によつては、二輪車をさら に詳細に判別することもできる。
[7.フローチャートによる動作説明]
図 6は本実施形態に係る車両判別装置の動作フローチャート、図 7は本実施形態 に係る車両判別装置の特定変化量数算出処理の詳細フローチャート及び図 8は本 実施形態に係る車両判別装置の特定垂直投影値比率算出処理の詳細フローチヤ ートである。
[0067] CPU210が入力部 211として撮像装置 10から撮像画像を受信して取り込む (ステ ップ S 100)。撮像装置 10は撮像画像を撮像直後にリアルタイムに車両判別装置 20 0に送信することもできるし、所定回数の撮像回数又は所定時間後に送信してもよい
[0068] CPU210が特徴抽出部 212として撮像画像中格子の頂点及び微分フィルターで 必要となる格子の頂点の周辺について RGB成分から I成分に変換する (ステップ S2 00)。
[0069] CPU210が平滑化処理を実行する(ステップ S300)。平滑化処理は、様々な公知 •慣用技術があり、当業者であれば適宜実装することができるので、ここでの詳説は 省略する。例えば、平滑ィ匕用のフィルタ一として、次の式 (4)のフィルターがある。 nは 1より大きい。この他、加重平均フィルター、メディアンフィルターがある。なお、ステツ プ S200では、微分フィルターで必要となる格子の頂点の周辺の画素の I成分も求め ており、平滑ィ匕用のフィルターを適用することができる。ただし、微分フィルターが n行 n列、平滑化用のフィルターが m行 m列のとき、 n≥mである。 n<mのときは、ステツ プ S200で、平滑化フィルター用に I成分を求める必要がある。
[0070] [数 4]
Figure imgf000019_0001
[0071] また、ステップ S 300で平滑化処理を施した力 ステップ S100とステップ S200の間 に平滑化処理を施してもょ ヽ。撮像画像の全画素に対して平滑化処理を実行しても よいが、微分フィルターで使用する画素についてのみ平滑ィ匕処理を施し、平滑化処 理を施した画素についてのみステップ S200を実行する構成であってもよい。
[0072] CPU210が微分フィルタ一部 213として平滑ィ匕処理を施した I成分の抽出データに 対して微分フィルターをかける(ステップ S400)。そうすることで、各格子の頂点での 変化量がフィルターデータとして求まる。
[0073] 次に、 CPU210がステップ S500の定義済み特定変化量数算出処理及びステップ S600の定義済み特定垂直投影値比率算出処理を実行する。それぞれの処理の詳 細については後説する。
[0074] CPU210が車両判別部 216として特定変化量数及び特定垂直投影値比率力も撮 像されている車両が二輪車か四輪車かを判別し、車両判別データを作成する (ステツ プ S700)。具体的には、特定変化量数が第 2の閾値以下であれば四輪車以外と判 断し、特定変化量数が第 4の閾値以下かつ特定垂直投影値比率が第 3の閾値 [%] 以上であれば二輪車であると判断する。車両判別データは、二輪車、四輪車の種別 を示すフラグ力 なる。
[0075] CPU210が出力部 217として車両判別データを、撮影画像、撮影時刻及び撮影 場所識別情報と共に集計装置である管理コンピュータ 30に出力する (ステップ S800
) o
[0076] 管理コンピュータ 30は、撮像装置 10毎に二輪車と四輪車の数を積算する。そして 、入場する車両を撮像する撮像装置 10の積算結果から退場する車両を撮像する撮 像装置 10の積算結果を減算することで、現在工場内に入場している車両数を二輪 車と四輪車を区別して管理コンピュータ 30のディスプレイ 240に表示する。
(特定変化量数算出処理) CPU210が特定変化量数算出部 214として微分フィルタ一部 213で求まったフィ ルターデータの中力も変化量を取り出し (ステップ S501)、取り出した変化量力 以 上か否かを判断する (ステップ S502)。 n以上であれば特定変化量数をカウントアツ プし (ステップ S503)、 n以上でなければ次に進む。次に、取り出した変化量が最後 の変化量力否かを判断する (ステップ S504)。最後の変化量であれば終了し、そうで なければステップ S501に戻る。
(特定垂直投影値比率算出処理)
CPU210が特定垂直投影値比率算出部 215として第 nの水平位置にある変化量 を積算する。つまり、第 nの垂直格子線上の画素の変化量を積算する (ステップ S60 D o nの初期値は 1である。 CPU210が nが Nと等しいか否かを判断する(ステップ S6 02)。等しくない場合には、 nを 1インクリメントしてステップ S601に戻る。等しい場合 には次の処理に進む。
[0077] CPU210が求めた積算値を積算値の大きさで降順に整列させる (ステップ S611)
[0078] CPU210が 1番目力 T番目の積算値を取り出す (ステップ S612)。 Tは任意に設 定することができる。図 4であれば Tは例えば 2である。
[0079] CPU210力 S取り出した積算値の垂直格子線の中で連続して 、な 、垂直格子線の 積算値を除外して、積算値を積算して特定垂直投影値を求める (ステップ S613)。四 輪車であれ二輪車であれ対象物が撮像画像中に存在する場合には、ある領域を連 続して占めることになり、撮像画像中に離散して存在することはないため、連続してい ない格子線の積算値を加算しないことでノイズを除去することができる。たとえば、図 4では、第 3の垂直格子線と第 4の垂直格子線上の格子点が二輪車及び二輪車の運 転者に重なり、通常であれば、第 3の垂直格子線の積算値若しくは第 4の垂直格子 線の積算値が、 1番及び 2番目に積算値が大きな値となるが、ノイズによって、第 1の 垂直格子線が 2番目に積算値が大きい垂直格子線となったとしても、ステップ S613 によって加算されない。ここで、 T個の積算値にするために、 T番目以降の隣接関係 にある積算値を取り出す構成にすることもできる。そうすることで、先程の図 4の例で 言えば、第 3の垂直格子線の積算値若しくは第 4の垂直格子線の積算値が積算され て特定垂直投影値となる。他に、もっとも高い積算値の垂直格子線を中心としてこの 垂直格子線を含んで横方向に連続した T本の垂直格子線の積算値を積算して特定 垂直投影値とすることもできる。
[0080] CPU210が特定垂直投影値を全ての積算値を積算した値で除算して特定垂直投 影値の比率を求める (ステップ S621)。
[8.本実施形態の効果]
このように本実施形態に係る車両判別装置によれば、撮像装置 10から取り込んだ 撮像画像力 特定の点の I成分を抽出し、抽出した I成分に対して微分フィルターを かけ、特定変化量数及び特定垂直投影値比率を求め、この求めた特定変化量数及 び特定垂直投影値比率が所定条件を満たす力否かで撮像画像に写り込んでいる車 両が二輪車か四輪車かを判別することができる。特に、撮像画像中で画像処理する 画素が特定の画素に限られ、高速に車両を判別することができる。
[9.具体例]
実際に、図 4の二輪車が撮像されている撮像画像と、図 5の四輪車が撮像されてい る撮像画像に対して、格子点の濃度変化量を求め、全濃度変化量での割合を求め たものが、表 1 (四輪車)、表 2 (二輪車)となる。なお、図 4及び図 5は線画であるが、 実際は RGB画像であり、その RGB画像を用いて実験した。表の n行 m列の値は、第 n水平格子線と第 m垂直格子線の交点の画素の濃度変化量の割合である。
[0081] [表 1]
Figure imgf000021_0001
[0082] [表 2]
Figure imgf000021_0002
[0083] [表 3] 2.891278
43.64986
46.79046
2.365718
4.516278
[0084] [表 4]
11.19418
24.83159
50.4443
5.298608
8.808046
[0085] 表 3と表 4はそれぞれ表 1と表 2の各行の合計である。
表 1と表 2のそれぞれにおいて、濃度変化量の割合値の最大値を求め、最大値を 含む行のみで最大値の比率を求めると、四輪車が 45.19382であるのに対し、二輪車 が 70.46907であり、十分に判別できる程値が離隔している。
(その他の実施形態)
[グループ化による特定垂直投影値の算出方法]
図 9および図 10は格子線の全水平画素の変化量を各水平位置で垂直投影して算 出した値をグラフ化した図例である。図 9が二輪車についてであり、図 10が四輪車に ついてである。
[0086] 前記第 1の実施形態では、水平格子線の飛び飛びの画素の変化量を用いて車両 を判別してきた。つまり、水平格子線と垂直格子線の交点に相当する画素の変化量 を用いてきた。図 9および図 10は水平格子線上の全ての画素の変化量を求めて垂 直投影したものである。言い換えれば、垂直格子線を横側の画素数分だけ設けた場 合に相当する。この図 9および図 10を参照するとわ力るように、二輪車の場合には大 きな山が一つ形成され、変化量が一定の幅方向に集中しているのに対し、四輪車の 場合には複数の山が形成され、変化量が分散している。このことは特定垂直投影値 比率について前記第 1の実施形態で説明した本発明の理論を裏付けるものでもある
[0087] ところで、前記第 1の実施形態では、特定垂直投影値比率算出処理で、垂直投影 値の中で大き!/、値から予め定められて 、る個数の連続関係にある垂直投影値を積 算して特定垂直投影値を求めたが、図 9および図 10に示すように Y軸方向に平行す る直線を複数本引いて、その直線によって画定される領域同士で変化量を積算し、 最も大きな積算値を特定垂直投影値とし、全変化量で除法して特定垂直投影値の 比率を求める構成にすることもできる。
[0088] すなわち、同じ垂直投影値の画素を通過する線分が連続であるように垂直投影値 を所定個数にグループィ匕し、グループの中で垂直投影値を積算してその積算値が 最も大きいグループの垂直投影値の積算値である特定垂直投影値の全変化量での 比率を求め、その比率に基づき車両を判別することもできる。
[微分フィルターの代替技術]
前記第 1の実施形態においては、微分フィルターを用いて微分値を求めた力 フー リエ変換を用いて微分値を求めてもよい。たとえば、撮像画像に対してフーリエ変換 を施し、低周波成分を取り除き高周波成分のみとして逆フーリエ変換をしても求める ことちでさる。
[所定距離以上離隔した特定変化量点の無視]
特定変化量点は、二輪車、四輪車等が存在していると推定される箇所である。とこ ろで、二輪車、四輪車等は撮像画像中で特定領域を連続して占有しており、離散し て存在することはない。よって、ある集合を形成している特定変化量点から所定距離 以上離隔した特定変化量点は、二輪車、四輪車等が存在している点を示しているの ではなぐノイズの可能性が非常に高い。すなわち、このような所定距離以上離隔し た特定変化量点を無視して、車両判別を実施することで、より精度の高い車両判別 を実現することができる。これは、ステップ S400とステップ S 500の間に実施すること が望ましい。ここで、「ある集合を形成している特定変化量点から所定距離以上離隔 した特定変化量点」としたが、最も近 、特定変化量点が所定距離以上である特定変 化量点とすることもできる。
[0089] ここでは、特定変化量点同士の距離を求めて所定距離以上力否かを判断して離散 して位置する特定変化量を特定したが、クラスタリング手法を用いることもできる。クラ スタリング手法としては、公知技術であるクラスタリング手法を使用することができるが 、例えば、 K-means法 (参考文献:高木幹雄、下田陽久、「新編 画像解析ハンドブッ ク」(pl577— pl579)、東京大学出版会)を使用することができる。つまり、クラスタリン グ手法を用いて形成されたクラスタの中で、要素が 1つ等の少な ヽクラスタを特定して このクラスタの要素を離散した特定変化量点として無視する構成にすることもできる。 以上の前記各実施形態により本発明を説明したが、本発明の技術的範囲は実施 形態に記載の範囲には限定されず、これら各実施形態に多様な変更又は改良を加 えることが可能である。そして、力 うな変更又は改良を加えた実施の形態も本発明 の技術的範囲に含まれる。このことは、請求の範囲及び課題を解決する手段力 も 明らかなことである。

Claims

請求の範囲
[1] 車両の画像に基づ!、て該車両の判別を行うための車両判別装置であって、
前記画像中のあら力じめ設定された格子点に対応する画素及びその周辺の画素 の明度成分を抽出するための特徴抽出手段と、
前記特徴抽出手段によって抽出された明度成分の値に基づいて微分処理を行 い、前記格子点に対応する画素の明度成分の変化量を求めるための微分手段と、 前記微分手段によって求められた変化量のうち、あら力じめ定められた第 1の閾 値以上の値となる変化量の個数を求めるための特定変化量数算出手段と、
前記特定変化量数算出手段によって求められた変化量の個数に基づいて前記 車両の判別を行うための車両判別手段と
を含むことを特徴とする車両判別装置。
[2] 請求項 1に記載された車両判別装置であって、
前記車両判別手段は、前記特定変化量数算出手段によって求められた変化量 の個数があら力じめ定められた第 2の閾値以上である場合に、前記車両が四輪車で あると判別することを特徴とする車両判別装置。
[3] 車両の画像に基づ!/、て該車両の判別を行うための車両判別装置であって、
前記画像中のあら力じめ設定された垂直格子線および水平格子線の交点となる 格子点に対応する画素及びその周辺の画素の明度成分を抽出するための特徴抽 出手段と、
前記特徴抽出手段によって抽出された明度成分の値に基づいて微分処理を行 い、前記格子点に対応する画素の明度成分の変化量を求めるための微分手段と、 前記微分手段によって求められた変化量を前記垂直格子線に沿って積算して垂 直投影値を求め、該垂直投影値を値が大きい順にあらかじめ定められた個数だけ抽 出し、抽出された垂直投影値のうち隣接する垂直格子線に沿って積算された垂直投 影値を積算して特定垂直投影値を求め、全格子点に対応する画素の明度成分の変 化量の積算値に対する該特定垂直投影値の比率を求めるための特定垂直投影値 比率算出手段と、
前記特定垂直投影値比率算出手段によって求められた特定垂直投影値の比率 に基づいて前記車両の判別を行うための車両判別手段と
を含むことを特徴とする車両判別装置。
[4] 請求項 3に記載された車両判別装置であって、
前記車両判別手段は、前記特定垂直投影値比率算出手段によって求められた 特定垂直投影値の比率があらかじめ定められた第 3の閾値以上である場合に、前記 車両が二輪車であると判別することを特徴とする車両判別装置。
[5] 車両の画像に基づ!/、て該車両の判別を行うための車両判別装置であって、
前記画像中のあら力じめ設定された垂直格子線および水平格子線の交点となる 格子点に対応する画素及びその周辺の画素の明度成分を抽出するための特徴抽 出手段と、
前記特徴抽出手段によって抽出された明度成分の値に基づいて微分処理を行 い、前記格子点に対応する画素の明度成分の変化量を求めるための微分手段と、 前記微分手段によって求められた変化量のうち、あら力じめ定められた第 1の閾 値以上の値となる変化量の個数を求めるための特定変化量数算出手段と、
前記微分手段によって求められた変化量を前記垂直格子線に沿って積算して垂 直投影値を求め、該垂直投影値を値が大きい順にあらかじめ定められた個数だけ抽 出し、抽出された垂直投影値のうち隣接する垂直格子線に沿って積算された垂直投 影値を積算して特定垂直投影値を求め、全格子点に対応する画素の明度成分の変 化量の積算値に対する該特定垂直投影値の比率を求めるための特定垂直投影値 比率算出手段と、
前記特定変化量数算出手段によって求められた変化量の個数および前記特定 垂直投影値比率算出手段によって求められた特定垂直投影値の比率に基づいて前 記車両の判別を行うための車両判別手段と
を含むことを特徴とする車両判別装置。
[6] 請求項 5に記載された車両判別装置であって、
前記車両判別手段は、前記特定変化量数算出手段によって求められた変化量 の個数があら力じめ定められた第 2の閾値以上である場合に、前記車両が四輪車で あると判別し、前記特定垂直投影値比率算出手段によって求められた特定垂直投影 値の比率があら力じめ定められた第 3の閾値以上である場合に、前記車両が二輪車 であると判別することを特徴とする車両判別装置。
[7] コンピュータに車両の画像に基づく該車両の判別を実行させるための車両判別プロ グラムであって、該コンピュータを、
前記画像中のあら力じめ設定された格子点に対応する画素及びその周辺の画素 の明度成分を抽出するための特徴抽出手段と、
前記特徴抽出手段によって抽出された明度成分の値に基づいて微分処理を行 い、前記格子点に対応する画素の明度成分の変化量を求めるための微分手段と、 前記微分手段によって求められた変化量のうち、あら力じめ定められた第 1の閾 値以上の値となる変化量の個数を求めるための特定変化量数算出手段と、
前記特定変化量数算出手段によって求められた変化量の個数に基づいて前記 車両の判別を行うための車両判別手段
として機能させることを特徴とする車両判別プログラム。
[8] コンピュータに車両の画像に基づく該車両の判別を実行させるための車両判別プロ グラムであって、該コンピュータを、
前記画像中のあら力じめ設定された垂直格子線および水平格子線の交点となる 格子点に対応する画素及びその周辺の画素の明度成分を抽出するための特徴抽 出手段と、
前記特徴抽出手段によって抽出された明度成分の値に基づいて微分処理を行 い、前記格子点に対応する画素の明度成分の変化量を求めるための微分手段と、 前記微分手段によって求められた変化量を前記垂直格子線に沿って積算して垂 直投影値を求め、該垂直投影値を値が大きい順にあらかじめ定められた個数だけ抽 出し、抽出された垂直投影値のうち隣接する垂直格子線に沿って積算された垂直投 影値を積算して特定垂直投影値を求め、全格子点に対応する画素の明度成分の変 化量の積算値に対する該特定垂直投影値の比率を求めるための特定垂直投影値 比率算出手段と、
前記特定垂直投影値比率算出手段によって求められた特定垂直投影値の比率 に基づいて前記車両の判別を行うための車両判別手段 として機能させることを特徴とする車両判別プログラム。
[9] 車両の画像に基づ!/、て該車両の判別を行うための車両判別装置が実行する車両判 別方法であって、
前記画像中のあら力じめ設定された格子点に対応する画素及びその周辺の画素 の明度成分を抽出する特徴抽出ステップと、
前記特徴抽出ステップにお 、て抽出された明度成分の値に基づ 、て微分処理を 行い、前記格子点に対応する画素の明度成分の変化量を求める微分ステップと、 前記微分ステップにお 、て求められた変化量のうち、あら力じめ定められた第 1の 閾値以上の値となる変化量の個数を求める特定変化量数算出ステップと、
前記特定変化量数算出ステップにおいて求められた変化量の個数に基づいて前 記車両の判別を行うための車両判別ステップと
を含むことを特徴とする車両判別方法。
[10] 車両の画像に基づ!/、て該車両の判別を行うための車両判別装置が実行する車両判 別方法であって、
前記画像中のあら力じめ設定された垂直格子線および水平格子線の交点となる 格子点に対応する画素及びその周辺の画素の明度成分を抽出する特徴抽出ステツ プと、
前記特徴抽出ステップにお 、て抽出された明度成分の値に基づ 、て微分処理を 行い、前記格子点に対応する画素の明度成分の変化量を求める微分ステップと、 前記微分ステップにおいて求められた変化量を前記垂直格子線に沿って積算し て垂直投影値を求め、該垂直投影値を値が大きい順にあらかじめ定められた個数だ け抽出し、抽出された垂直投影値のうち隣接する垂直格子線に沿って積算された垂 直投影値を積算して特定垂直投影値を求め、全格子点に対応する画素の明度成分 の変化量の積算値に対する該特定垂直投影値の比率を求める特定垂直投影値比 率算出ステップと、
前記特定垂直投影値比率算出ステップにおいて求められた特定垂直投影値の 比率に基づいて前記車両の判別を行うための車両判別ステップと
を含むことを特徴とする車両判別方法。
[11] コンピュータに車両の画像に基づく該車両の判別を実行させるための車両判別プロ グラムを格納し、該コンピュータによって読み取り可能なプログラム記録媒体であって 、該車両判別プログラムは該コンピュータを、
前記画像中のあら力じめ設定された格子点に対応する画素及びその周辺の画素 の明度成分を抽出するための特徴抽出手段と、
前記特徴抽出手段によって抽出された明度成分の値に基づいて微分処理を行 い、前記格子点に対応する画素の明度成分の変化量を求めるための微分手段と、 前記微分手段によって求められた変化量のうち、あら力じめ定められた第 1の閾 値以上の値となる変化量の個数を求めるための特定変化量数算出手段と、
前記特定変化量数算出手段によって求められた変化量の個数に基づいて前記 車両の判別を行うための車両判別手段
として機能させることを特徴とするプログラム記録媒体。
[12] コンピュータに車両の画像に基づく該車両の判別を実行させるための車両判別プロ グラムを格納し、該コンピュータによって読み取り可能なプログラム記録媒体であって 、該車両判別プログラムは該コンピュータを、
前記画像中のあら力じめ設定された垂直格子線および水平格子線の交点となる 格子点に対応する画素及びその周辺の画素の明度成分を抽出するための特徴抽 出手段と、
前記特徴抽出手段によって抽出された明度成分の値に基づいて微分処理を行 い、前記格子点に対応する画素の明度成分の変化量を求めるための微分手段と、 前記微分手段によって求められた変化量を前記垂直格子線に沿って積算して垂 直投影値を求め、該垂直投影値を値が大きい順にあらかじめ定められた個数だけ抽 出し、抽出された垂直投影値のうち隣接する垂直格子線に沿って積算された垂直投 影値を積算して特定垂直投影値を求め、全格子点に対応する画素の明度成分の変 化量の積算値に対する該特定垂直投影値の比率を求めるための特定垂直投影値 比率算出手段と、
前記特定垂直投影値比率算出手段によって求められた特定垂直投影値の比率 に基づいて前記車両の判別を行うための車両判別手段 として機能させることを特徴とするプログラム記録媒体。
PCT/JP2007/060679 2006-05-26 2007-05-25 車両判別装置、車両判別方法、車両判別プログラム、および車両判別プログラムを格納したプログラム記録媒体 WO2007139003A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN2007800194838A CN101454815B (zh) 2006-05-26 2007-05-25 车辆判别装置和车辆判别方法
DE602007010454T DE602007010454D1 (de) 2006-05-26 2007-05-25 Fahrzeugunterscheidungseinrichtung, fahrzeugunterscheidungsverfahren, fahrzeugunterscheidungsprogramm und programmaufzeichnungsmedium mit darin gespeichertem fahrzeugunterscheidungsprogramm
EP07744113A EP2023309B1 (en) 2006-05-26 2007-05-25 Vehicle discriminating device, vehicle discriminating method, vehicle discriminating program, and program recording medium with the vehicle discriminating program stored therein
US12/266,388 US8433099B2 (en) 2006-05-26 2008-11-06 Vehicle discrimination apparatus, method, and computer readable medium storing program thereof

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2006-147240 2006-05-26
JP2006147240A JP4973008B2 (ja) 2006-05-26 2006-05-26 車両判別装置及びそのプログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US12/266,388 Continuation US8433099B2 (en) 2006-05-26 2008-11-06 Vehicle discrimination apparatus, method, and computer readable medium storing program thereof

Publications (1)

Publication Number Publication Date
WO2007139003A1 true WO2007139003A1 (ja) 2007-12-06

Family

ID=38778523

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2007/060679 WO2007139003A1 (ja) 2006-05-26 2007-05-25 車両判別装置、車両判別方法、車両判別プログラム、および車両判別プログラムを格納したプログラム記録媒体

Country Status (6)

Country Link
US (1) US8433099B2 (ja)
EP (1) EP2023309B1 (ja)
JP (1) JP4973008B2 (ja)
CN (1) CN101454815B (ja)
DE (1) DE602007010454D1 (ja)
WO (1) WO2007139003A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES2330499A1 (es) * 2007-12-31 2009-12-10 Imagsa Technologies, S.A. Procedimiento y sistema de deteccion de objetos en movimiento.
JP2015028696A (ja) * 2013-07-30 2015-02-12 アルパイン株式会社 車両後側方警報装置、車両後側方警報方法および他車両距離検出装置

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101301868B1 (ko) * 2010-06-23 2013-09-02 대한민국 차종분석 시스템 및 그 방법
JP2012243049A (ja) * 2011-05-19 2012-12-10 Fuji Heavy Ind Ltd 環境認識装置および環境認識方法
JP5666987B2 (ja) * 2011-05-25 2015-02-12 株式会社デンソー 移動物体検出装置
JP5681080B2 (ja) * 2011-10-13 2015-03-04 株式会社大日本科研 マーク検出方法
JP5505440B2 (ja) * 2012-02-22 2014-05-28 住友電気工業株式会社 移動体判定装置、コンピュータプログラム及び移動体判定方法
DE102013007039B4 (de) * 2013-04-24 2018-04-19 Jenoptik Robot Gmbh Verfahren zur Fokussierung eines optischen Abbildungssystems
CN103646546B (zh) * 2013-11-23 2015-12-30 安徽蓝盾光电子股份有限公司 一种具有大型车辆禁行功能的智能交通系统
US9418546B1 (en) * 2015-11-16 2016-08-16 Iteris, Inc. Traffic detection with multiple outputs depending on type of object detected
US10536646B2 (en) * 2017-07-28 2020-01-14 Panasonic Intellectual Property Corporation Of America Imaging control device and imaging control method
CN109389012B (zh) * 2017-08-10 2023-04-07 纵目科技(上海)股份有限公司 基于响应点及车位线的车位扩展方法和存储介质
TWI640964B (zh) * 2017-08-17 2018-11-11 National Applied Research Laboratories 以影像為基礎之車輛計數與分類系統
WO2024022863A1 (fr) * 2022-07-28 2024-02-01 L'air Liquide, Societe Anonyme Pour L'etude Et L'exploitation Des Procedes Georges Claude Procédé et installation de comptage d'objets présents dans un véhicule en déplacement
CN118015850A (zh) * 2024-04-08 2024-05-10 云南省公路科学技术研究院 一种多目标车辆车速同步估算方法、系统、终端及介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62222391A (ja) * 1986-03-24 1987-09-30 松下電工株式会社 異常監視装置
JPH06309588A (ja) * 1993-04-27 1994-11-04 Omron Corp 車種判別装置
JPH0855294A (ja) * 1994-08-11 1996-02-27 Mitsubishi Heavy Ind Ltd 車種判別装置
JP2000149181A (ja) 1998-11-04 2000-05-30 Mitsubishi Heavy Ind Ltd 交通流計測システム
JP2001216598A (ja) * 2000-02-04 2001-08-10 Mitsubishi Electric Corp 交通流計測装置
JP2002008186A (ja) 2000-06-23 2002-01-11 Mitsubishi Heavy Ind Ltd 車種識別装置
JP3453952B2 (ja) 1995-09-29 2003-10-06 株式会社日立製作所 交通流計測装置

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2183878B (en) * 1985-10-11 1989-09-20 Matsushita Electric Works Ltd Abnormality supervising system
JP3349002B2 (ja) * 1995-01-13 2002-11-20 ダイハツ工業株式会社 先行車両認識方法
US5845007A (en) * 1996-01-02 1998-12-01 Cognex Corporation Machine vision method and apparatus for edge-based image histogram analysis
JP2002042113A (ja) * 2000-07-21 2002-02-08 Nri & Ncc Co Ltd 車両通行量測定システム
US7151854B2 (en) * 2001-09-06 2006-12-19 Digimarc Corporation Pattern recognition of objects in image streams
JP2003217084A (ja) * 2002-01-18 2003-07-31 Mitsubishi Heavy Ind Ltd 車両検知方法及び装置
JP3895238B2 (ja) * 2002-08-28 2007-03-22 株式会社東芝 障害物検出装置及びその方法
JP2004235711A (ja) * 2003-01-28 2004-08-19 Nissan Motor Co Ltd 対象物追跡システムおよび対象物追跡方法
US7298898B2 (en) * 2003-04-15 2007-11-20 Honeywell International Inc. System and method for image segmentation
JP4361381B2 (ja) * 2004-01-26 2009-11-11 三菱電機株式会社 車両検出装置
US7809197B2 (en) * 2004-12-09 2010-10-05 Eastman Kodak Company Method for automatically determining the acceptability of a digital image
JP4784932B2 (ja) * 2005-10-31 2011-10-05 富士通株式会社 車両判別装置及びそのプログラム

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62222391A (ja) * 1986-03-24 1987-09-30 松下電工株式会社 異常監視装置
JPH06309588A (ja) * 1993-04-27 1994-11-04 Omron Corp 車種判別装置
JPH0855294A (ja) * 1994-08-11 1996-02-27 Mitsubishi Heavy Ind Ltd 車種判別装置
JP3453952B2 (ja) 1995-09-29 2003-10-06 株式会社日立製作所 交通流計測装置
JP2000149181A (ja) 1998-11-04 2000-05-30 Mitsubishi Heavy Ind Ltd 交通流計測システム
JP2001216598A (ja) * 2000-02-04 2001-08-10 Mitsubishi Electric Corp 交通流計測装置
JP2002008186A (ja) 2000-06-23 2002-01-11 Mitsubishi Heavy Ind Ltd 車種識別装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
"Handbook of Image Analysis", UNIVERSITY OF TOKYO PRESS, pages: 1231
"Handbook of Image Analysis", UNIVERSITY OF TOKYO PRESS, pages: 1577 - 1579

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES2330499A1 (es) * 2007-12-31 2009-12-10 Imagsa Technologies, S.A. Procedimiento y sistema de deteccion de objetos en movimiento.
JP2015028696A (ja) * 2013-07-30 2015-02-12 アルパイン株式会社 車両後側方警報装置、車両後側方警報方法および他車両距離検出装置

Also Published As

Publication number Publication date
US20090060279A1 (en) 2009-03-05
EP2023309A4 (en) 2010-03-03
US8433099B2 (en) 2013-04-30
JP4973008B2 (ja) 2012-07-11
JP2007317025A (ja) 2007-12-06
CN101454815B (zh) 2012-04-04
EP2023309A1 (en) 2009-02-11
CN101454815A (zh) 2009-06-10
DE602007010454D1 (de) 2010-12-23
EP2023309B1 (en) 2010-11-10

Similar Documents

Publication Publication Date Title
WO2007139003A1 (ja) 車両判別装置、車両判別方法、車両判別プログラム、および車両判別プログラムを格納したプログラム記録媒体
Mithun et al. Detection and classification of vehicles from video using multiple time-spatial images
JP6000455B2 (ja) フォーム認識方法及びフォーム認識装置
CN112528878A (zh) 检测车道线的方法、装置、终端设备及可读存储介质
CN112287912B (zh) 基于深度学习的车道线检测方法以及装置
US8737747B2 (en) Method for automated tire detection and recognition
CN111626277B (zh) 一种基于治超站交调指标分析的车辆跟踪方法及装置
CN111008600B (zh) 一种车道线检测方法
CN105005766B (zh) 一种车身颜色识别方法
JP4364275B2 (ja) 画像処理方法、画像処理装置及びコンピュータプログラム
US20090245582A1 (en) Lane recognition apparatus for vehicle, vehicle thereof, and lane recognition program for vehicle
CN113627228B (zh) 一种基于关键点回归与多尺度特征融合的车道线检测方法
WO2009116590A1 (ja) 縞模様検知システム、縞模様検知方法および縞模様検知用プログラム
KR101483742B1 (ko) 지능형 차량의 차선 검출방법
US20130300897A1 (en) Image processing device, image processing method, and image processing program
JP5423764B2 (ja) 移動体検出装置、コンピュータプログラム及び移動体検出方法
JP5983729B2 (ja) 白線検出装置、白線検出フィルタ装置及び白線検出方法
US8681221B2 (en) Vehicular image processing device and vehicular image processing program
JP5370375B2 (ja) 画像認識装置
CN108460348A (zh) 基于三维模型的道路目标检测方法
JP4784932B2 (ja) 車両判別装置及びそのプログラム
JP2754937B2 (ja) 概略画像作成方法および装置
WO2022269946A1 (ja) 処理装置、処理方法及びプログラム
JP7438547B2 (ja) 車両管理システム
CN117542223B (zh) 基于计算机视觉的停车管理方法及系统

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 200780019483.8

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 07744113

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2007744113

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE