WO2020170745A1 - 走行路認識装置 - Google Patents
走行路認識装置 Download PDFInfo
- Publication number
- WO2020170745A1 WO2020170745A1 PCT/JP2020/003317 JP2020003317W WO2020170745A1 WO 2020170745 A1 WO2020170745 A1 WO 2020170745A1 JP 2020003317 W JP2020003317 W JP 2020003317W WO 2020170745 A1 WO2020170745 A1 WO 2020170745A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- road
- traveling
- traveling road
- point
- determination unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
- B60W40/06—Road conditions
- B60W40/076—Slope angle of the road
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W60/00—Drive control systems specially adapted for autonomous road vehicles
- B60W60/001—Planning or execution of driving tasks
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/93—Lidar systems specially adapted for specific applications for anti-collision purposes
- G01S17/931—Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2552/00—Input parameters relating to infrastructure
- B60W2552/15—Road slope, i.e. the inclination of a road segment in the longitudinal direction
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2552/00—Input parameters relating to infrastructure
- B60W2552/53—Road markings, e.g. lane marker or crosswalk
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2556/00—Input parameters relating to data
- B60W2556/40—High definition maps
Definitions
- the present invention relates to a roadway device that recognizes a travelable area in a vehicle traveling environment.
- Patent Document 1 is a road lane marking recognition device that includes an image capturing unit that captures an image of a vehicle periphery and that recognizes a road lane marking by analyzing an image captured by the image capturing unit.
- a road that includes a first target position specifying unit that specifies the position of a first target laid on the road, and is partitioned by the first target and a second target different from the first target.
- the position corresponds to the position of the first target specified by the first target position specifying unit.
- a road marking line characterized by setting a second target recognition image analysis region for recognizing the second target on a front side and/or a back side of a position on the captured image of the image capturing means. The technology of the recognition device is disclosed.
- Patent Document 1 discloses a marking line recognition device using a camera, and it is described that it is possible to realize a driving support function such as lane keeping and lane change by using the recognition result. is there.
- the present invention has been made in view of the above points, and an object of the present invention is to provide a traveling road recognition device capable of accurately recognizing a traveling road end of a traveling road on which a vehicle travels. Is.
- the traveling road recognition device of the present invention for solving the above-mentioned problems is a traveling road recognition device for recognizing a traveling road end of a traveling road on which a vehicle travels, and irradiates a laser from the vehicle to the traveling road.
- a laser radar and a road surface determination unit that obtains a cross slope of the traveling road based on coordinate values of a point group obtained by the laser radar, and a slope angle changes in the cross slope of the travel road obtained by the road surface determination unit.
- a road edge determination unit that determines a coordinate value of at least one traveling road end on both sides in the transverse direction of the traveling road on the basis of the coordinate value of the changing point.
- FIG. 6 is a yz plan view showing an example of a search range of a point cloud and a cross slope.
- FIG. 6 is a yz plan view showing an example of a range in which feature point candidates are extracted.
- the traveling road recognition device of the present embodiment is for recognizing a traveling road end of a traveling road on which the host vehicle travels, and is mounted on the host vehicle that performs automatic driving.
- the information on the traveling road edge recognized by the traveling road recognition device is supplied to the vehicle control unit of the own vehicle and used for controlling the automatic driving.
- FIG. 1 is a diagram showing a hardware configuration example of a traveling road recognition apparatus according to an embodiment of the present invention.
- the traveling road recognition device 100 of the present embodiment includes a laser radar 101 for monitoring the surroundings of a vehicle, a storage device 103 for storing map information and the like, a CPU 104, and a memory 105.
- the traveling road recognition device 100 will be described as an example in which the laser radar 101 is also included in the configuration, but the configuration may be such that the laser radar 101 is not included and data is acquired from the laser radar 101.
- the laser radar 101 is mounted on the host vehicle, irradiates a laser from the host vehicle, and acquires data by using the reflected wave.
- a laser For example, LiDAR is used.
- the laser radar 101 stacks a plurality of lasers in a layered form in the vertical direction, irradiates them while rotating them, and uses the reflected waves to obtain data such as three-dimensional coordinates of the positions where the lasers are reflected and reflection intensity. .. This data is generally called point cloud data.
- the laser radar 101 acquires point cloud data for each of a plurality of layers at a predetermined interval in a direction away from the vehicle. Unlike a camera, the laser radar 101 can obtain point cloud data without depending on the brightness of the surroundings, and can detect an object regardless of day or night.
- the point cloud data obtained by the laser radar 101 is sent from the CPU 104 to the memory 105 and is stored in, for example, a buffer having the data structure of the point cloud data shown in FIG.
- the laser radar 101 can irradiate a layered laser from the own vehicle and acquire a plurality of point cloud data in each layer.
- the CPU 104 processes the point cloud data obtained by the laser radar 101, and stores in the memory 105 the data necessary for the process and the processing result. Then, the processing result information is sent from the CAN_I/F 106 to the CAN bus 107 and sent to the vehicle control unit 102 via the CAN bus 107.
- the vehicle control unit 102 controls the traveling direction and speed of the vehicle, and this is realized by fetching the processing result of the traveling road recognition processing by the CPU 104. Further, the CPU 104 can also acquire dead reckoning information such as the traveling direction and speed of the vehicle created and stored by the vehicle control unit 102 through the CAN_I/F 106.
- FIG. 2 is a diagram showing an example of the software configuration of the roadway recognition apparatus according to the embodiment of the present invention.
- the traveling road recognition device 100 includes a point cloud storage unit 201, a point cloud DB 202, a road surface determination unit 203, and a road edge determination unit 204.
- the point cloud storage unit 201, the point cloud DB 202, the road surface determination unit 203, and the road edge determination unit 204 are embodied as internal functions of the CPU 104 when the software for running road recognition is executed by hardware such as the CPU 104. To be done.
- the point cloud storage unit 201 stores the point cloud data acquired by the laser radar 101 in the point cloud DB 202.
- the road surface determination unit 203 uses the point cloud data stored in the point cloud DB 202 to obtain the cross slope of the traveling road.
- the crossing gradient of the traveling road is a gradient in the transverse direction of the traveling road on which the host vehicle travels, that is, a gradient in the road width direction that is a direction orthogonal to the preset traveling direction of the traveling road.
- the road surface of a traveling road such as a road is provided with a gentle slope along the transverse direction in order to improve drainage. This slope is the cross slope of the road, and is obtained by the road surface determination unit 203 using the point cloud data.
- the road edge determination unit 204 obtains a change point at which the gradient angle changes in the cross slope of the traveling road, and based on the coordinate value of the changing point, the coordinate value of at least one traveling road end on both sides in the transverse direction of the traveling road. Ask for.
- the traveling road on which the vehicle can travel is between the traveling road ends on both sides in the transverse direction.
- the concept of the road edge includes, for example, at least one of a change point of a cross slope of the road, a structure such as a curb or a shoulder, and a marking line. The determination method by the road edge determination unit 204 will be described later.
- FIG. 3 is a diagram illustrating an example of a coordinate system used in this embodiment.
- a coordinate system in which the position of the host vehicle 301 is the origin is used.
- the traveling direction of the host vehicle 301 is the x-axis, and the direction perpendicular to the x-axis and along the vehicle width direction is the y-axis.
- Z-axis is perpendicular to the road surface.
- the y-axis is positive in the direction from right to left in the traveling direction of the host vehicle 301.
- FIG. 4 is a flowchart of the overall processing of the roadway recognition apparatus according to the embodiment of the present invention.
- step S401 point cloud data is acquired from the laser radar 101, and in step S402, the acquired point cloud data is stored in the point cloud DB 202.
- step S403 the coordinate values of the existing point cloud data are updated. Since the point cloud data stored in the point cloud DB 202 in step S402 is a coordinate system in which the position of the host vehicle 301 is the origin, the coordinate values of the existing point cloud data also indicate the position of the host vehicle 301 after movement. It needs to be refocused. This will be described later with reference to FIG. After these processes are completed, the point cloud data in each layer is processed in step S404 to obtain the road edge in each layer. The process of step S404 will also be described later.
- FIG. 5 is a flowchart of the process of updating the coordinate values of the point cloud data in step S403.
- dead reckoning is a process of obtaining the vehicle position based on the traveling direction of the vehicle and the traveling distance. Information on dead reckoning is provided from the CAN 107 to the CPU 104 through the CAN_I/F 106.
- step S501 the difference between the traveling distance and the traveling direction from the time when the previous vehicle position was measured is obtained.
- step S502 a rotation matrix and a translation matrix are obtained using the obtained data reckoning data. Then, these matrices are applied to all of the existing data in the point cloud DB 202 to perform coordinate conversion.
- step S503 coordinate value information is obtained from the point cloud data, and in step S504 it is determined whether the coordinate values are within a predetermined range. Specifically, for example, a range such as a radius of 60 m or less is determined in advance based on the previous vehicle position. If the coordinate value is within the predetermined range, the process proceeds to step S505, and the coordinate value is converted by applying the matrix obtained in step S502.
- step S506 the process proceeds to step S506, and the corresponding coordinate value is deleted from the point cloud DB 202.
- the amount of data stored in the point cloud DB 202 can be saved. Further, by making it possible to refer to only the point cloud data obtained most recently, only the point cloud data around the current position of the vehicle is used.
- FIG. 6 is an example of a flow of processing for obtaining the road edge in step S404, and is a flowchart of processing for obtaining the road edge from the change point of the transverse gradient of the road.
- the process of obtaining the road edge is performed by the road edge determination unit 204.
- a loop for the number of layers is entered.
- a loop for the number of point cloud data is further entered.
- step S601 it is determined whether the z coordinate of the point cloud data is within the predetermined range. This is to roughly judge whether or not the position of the point cloud is on the road surface, and the range predicted to be the data on the road surface is determined in advance for the predetermined range.
- the voting space used in Hough conversion has a configuration shown in FIG. 17, for example.
- FIG. 17 is a diagram illustrating a voting space used in Hough conversion and its data structure. Since the Hough conversion has a high processing cost, it is necessary to narrow the angle range for voting or set the angle increment value in advance so that the processing time can be within a desired processing time. The details are omitted here.
- step S603 the coordinate value that is the point cloud data of the point cloud whose z coordinate is within the predetermined range is stored in the buffer.
- This buffer is a buffer for storing point cloud data on the road surface of the traveling road.
- step S605 the line segment information is stored in the buffer.
- This buffer is for storing line segment information, and has the same data structure as the cell information 1700 of FIG. 17, for example.
- the intersections of the line segments stored in the buffer are obtained. This intersection point corresponds to the change point of the cross slope of the traveling road, and is the end of the traveling road.
- intersections 721 and 722 (see FIG. 7) will be obtained for the number of layers. By connecting these, it becomes possible to finally obtain the road edge. By storing this in time series, it is possible to obtain higher density road edge data.
- the road edge determination unit 204 detects the road surface of the traveling road and a structure installed at at least one traveling road edge of the traveling road based on the coordinate values of the point cloud, and detects the road surface of the traveling road and the structure.
- the process calculates the coordinate value of the change point of the height between and, and calculates the position of the road edge based on the coordinate value of the change point. By this processing, it is possible to detect the space between the road surface of the traveling road and the structure installed at the traveling road edge, and determine the traveling road edge.
- FIG. 7 is a yz plan view showing an example of the point cloud data and the transverse gradient, and is an example in which the point cloud 703 whose Z coordinate is determined to be within the predetermined range in step S601 is shown on the yz plane.
- Line segments 711, 712, and 713 are obtained by the processing up to step S605 for the point cloud data of the point cloud 703.
- the line segment 711 is a line segment obtained by a structure such as a curb arranged on the left side of the host vehicle 301.
- the line segment 712 is a line segment obtained by the road surface of the vehicle lane (traveling road).
- the line segment 713 is a line segment obtained by the road surface of the opposite lane.
- the intersection point 721 is a change point of the height between the road surface of the traveling road and the structure, and the intersection point 722 is a change point at which the gradient angle changes in the transverse gradient of the traveling road.
- the intersections 721 and 722 indicate coordinate values of the ends of the traveling road on both sides in the transverse direction of the traveling road, and the width between the intersections 721 and 722 is a width in which the vehicle can travel. Therefore, it is possible to recognize the minimum travel path on which the host vehicle can travel.
- the road drains rainwater, so it has a gentle slope from one end of the road in the transverse direction to the other end of the road in the other direction.
- an inclination of about 1° is added so that the height gradually decreases as the road lane transitions from the center of the road between the vehicle lane and the oncoming lane toward the road edge. ..
- the laser radar 101 By detecting this inclination with the laser radar 101, it is possible to determine the own vehicle lane and the oncoming lane.
- the line segment 712 is the own vehicle lane and the line segment 713 is the oncoming lane.
- the intersection 722 of the line segments 712 and 713 becomes the center of the road.
- the lane markings include, for example, a lane boundary line (a so-called center line) between the own vehicle lane and the oncoming lane, and an outside roadway line located on the opposite side of the lane boundary line with the own vehicle lane in between.
- FIG. 8 is a diagram showing an example of the software configuration of the roadway recognition device when using lane markings.
- the road edge determination unit 204 includes a road edge calculation unit 801, a feature point candidate extraction unit 802, a feature point determination unit 803, and a lane marking recognition as processing modules when using the lane markings. Section 804.
- the road edge calculation unit 801 obtains the cross slope of the traveling road and its change point, and obtains the traveling road edge based on the coordinate position of the change point.
- the feature point candidate extraction unit 802 obtains feature point candidates that form the lane markings based on the coordinate values and the reflection intensity of the point cloud data obtained by irradiating the road surface with the laser.
- the feature point candidate extraction unit 802 performs a process of extracting point cloud data having a reflection intensity higher than a threshold value from the point cloud data obtained by the laser radar 101 as a feature point candidate of the marking line displayed on the road surface.
- the feature point determination unit 803 obtains the feature point of the lane marking from the feature point candidates based on the traveling road edge coordinate values obtained by the road edge calculation unit 801.
- the feature point determination unit 803 narrows down the feature point candidates obtained by the feature point candidate extraction unit 802 to the feature point candidates existing near the road edge obtained by the road edge calculation unit 801, and narrows down the feature point candidates.
- the selected feature point candidates are determined as feature points.
- road surface paint such as an arrow present at the center position of the traveling road can be excluded from the candidates for the traveling road edge.
- the lane marking recognition unit 804 recognizes the lane marking using the feature points obtained by the feature point determination unit 803, and performs the process of using the lane marking as the road edge.
- FIG. 9 is a flowchart of a process of obtaining a lane marking that becomes the road edge, and corresponds to the process of step S404.
- step S901 the cross slope of the road is calculated. This processing will be described later with reference to FIGS. 12 and 13.
- step S902 a loop for the number of layers is entered, and feature point candidates of road surface paint are extracted in step S902.
- a reflective material is mixed in the road surface paint, and it is possible to obtain a high reflection intensity when the laser radar 101 irradiates a laser. Feature point candidates are extracted using this high reflection intensity. This will be described later with reference to FIG.
- step S903 the feature point candidates extracted in step S902 are narrowed down to the vicinity of the intersections 721 and 722.
- the neighborhood means a margin closer to the own vehicle than the intersections 721 and 722, and means within a predetermined range set in advance.
- This is a process for the feature point candidates obtained in step S903.
- the Hough transform is an example of the process, and the algorithm for extracting the line segment is not limited to this.
- FIG. 10 is a processing flow for obtaining a cross slope in step S901, and is a flowchart for explaining a point cloud search method.
- the search coordinate range of the layer 1 in the z-axis direction (search z coordinate range) is set to ⁇ 10 cm.
- the layer numbers are set in ascending order from the side closer to the host vehicle 301 to the side farther away, and the layer 1 is the layer closest to the host vehicle 301.
- the search coordinate range (search y coordinate range) in the y-axis direction of all layers is set to ⁇ 1.5 m. This means that each side is 1.5 m, which is equivalent to the width of the own vehicle lane. Note that this value is not limited to 1.5 m and may be set arbitrarily according to the situation.
- step S1003 the number of point groups (coordinate points) extracted in the layer is checked. When the number of point groups is 1 or less (NO), the cross slope of the traveling road cannot be calculated, and therefore the process in the layer is not executed. If the number of point groups is 2 or more, the process proceeds to step S1004 and subsequent steps in order to calculate the cross slope of the road.
- step S1004 the point cloud data of the point cloud included in the search yz coordinate range is stored in the buffer. This can be performed by searching all the point clouds detected in each layer.
- the buffer has a data structure as shown in FIG. 16, but it is preferable to secure a memory area different from the point cloud DB 202.
- step S1006 the search yz coordinate range of the next layer is set based on b. In this embodiment, it is set to b ⁇ 10 cm. This is to cope with the case of an uphill or a downhill. That is, since the suitable search yz coordinate range differs depending on the layer, the process of step S1006 for setting the search yz coordinate range of the next layer based on b is necessary.
- the margin value for b can be arbitrarily set according to the situation and is not limited to 10 cm.
- FIG. 11 is an example of the yz plane in a certain layer, and is a yz plan view showing an example of the search coordinate range and cross gradient of the point cloud.
- Reference numeral 1101 denotes a point cloud
- an area 1102 is a search yz coordinate range area in which y is set to ⁇ 1.5 m and z is set to ⁇ 10 cm.
- step S1004 the point group 1101 existing in the area 1102 is obtained, and in step S1005, an approximate straight line 1103 is obtained from the point group 1101 existing in the area 1102. This makes it possible to calculate the approximate straight line of the feature point candidate.
- FIG. 12 is a flowchart of a process for obtaining feature point candidates for road surface painting.
- the process shown in FIG. 12 corresponds to the process of step S902.
- Step S902 is processing for each layer, and the same applies to FIG.
- step S1201 the number of point groups (coordinate points) on the road surface of the layer is checked. If the number of road surface points is 1 or less, the cross slope of the traveling road should not have been calculated, and the subsequent processing is not executed.
- step S1202 it is determined whether or not the point cloud is within a predetermined z coordinate range.
- processing for narrowing down feature point candidates to a predetermined range from the edge of the road is performed based on the cross slope of the road.
- ay+b is the equation of the cross slope of the road surface in the layer.
- it is determined whether or not the vehicle is on the road surface by considering a margin of 5 cm above and below the equation of the cross slope of the road surface.
- the margin of 5 cm can be set arbitrarily, and is not limited to this value.
- step S1203 the reflection intensity at the coordinate point is determined. As described above, since the road surface paint contains the reflecting material, when the laser emitted from the laser radar 101 hits the road surface paint, the reflection intensity higher than that of the surrounding road surface can be obtained. In step S1203, it is determined whether the reflection intensity is higher than the threshold value. If it is higher than the threshold value, it is considered to be road surface paint and is stored in the buffer in step S1204.
- the threshold value may be arbitrarily set as long as it can distinguish between road surface and road surface paint.
- FIG. 13 is the same yz plane as that shown in FIG.
- the area 1301 is defined by setting a region of ⁇ 5 cm with respect to the value ay+b of the z coordinate of the approximate straight line 1103 at each y coordinate.
- the point cloud having the reflection intensity higher than the threshold value is recognized as the feature point in the area 1301.
- FIG. 14 is a diagram showing an example of the relationship between the reflection intensity and the gradient change.
- the upper part of FIG. 14 shows the position of the point group on the yz plane, and the lower part of FIG. 14 shows the relationship between the y coordinate of the point group and the reflection intensity.
- a point group 1401 whose reflection intensity is higher than a threshold appears near the y coordinate of the intersection 721.
- a point group 1402 whose reflection intensity is higher than the threshold value also appears. Therefore, these point groups 1401 and 1402 become feature point candidates for lane markings, and it is necessary to determine whether or not these are really lane markings.
- a margin 1410 having a preset distance (10 cm in the present embodiment) from each of the intersections 721 and 722 along the y-direction to the side closer to the own vehicle is set, and the margin 1410 is further set closer to the own vehicle. It is determined whether or not a point cloud having a reflection intensity higher than a threshold is included in the created width range (width range of 30 cm in this embodiment) 1411. If the point cloud having the reflection intensity higher than the threshold value is included in the width range 1411, it is considered that the point group constitutes the lane marking, and if it is not included in the width range 1411, the lane marking is not a lane marking. In the example of FIG.
- the point group 1401 whose reflection intensity is higher than the threshold is not included in the width range 1411 and is determined not to be a division line, and the point group 1402 whose reflection intensity is higher than the threshold is included in the width range 1411. , Is considered to compose the lane markings.
- the value of the margin 1410 may be set arbitrarily according to the situation and is not limited to these values.
- step S904 by determining the relationship between the gradient change point and the reflection intensity, the structure and the road surface paint can be distinguished.
- the possibility of white lines is high, and therefore the marking line recognition processing is executed. This corresponds to the process of step S904.
- FIG. 15 is a diagram illustrating a process of recognizing a lane marking using the lane marking feature points.
- the upper part of FIG. 15 shows the relationship between the y coordinate of the point cloud for each layer and the reflection intensity
- the lower part of FIG. 15 is a diagram in which the point cloud 1402 whose reflection intensity is higher than the threshold value in FIG. 15 is developed on the xy plane for all layers. is there.
- the point group 1402 determined to be a lane marking has three-dimensional coordinates, but when recognizing a lane marking, it is treated as a point on the road surface, so only xy coordinates are used. This is shown in the lower part of FIG. Note that the point group handled in the lower part of FIG. 15 is the latest feature point obtained in all layers at that time and the feature point acquired in the past. By doing so, even a laser radar with sparse data can handle the amount of feature points required for lane marking recognition. Then, the line segment 1501 is obtained by performing the process of step S904 on these feature points, and this is set as the traveling road end of the traveling road.
- FIG. 16 shows the data structure of the point cloud DB 202.
- the data is a list of layer information 1600, and has layer information 1600 for each layer.
- the layer information 1600 includes a layer number 1601, a score 1602, and point group information 1610.
- the point cloud information 1610 is an enumeration of points 1602.
- the point cloud information 1610 includes an x coordinate 1611, ay coordinate 1612, az coordinate 1613, and a reflection intensity 1614.
- the x coordinate 1611, the y coordinate 1612, and the z coordinate 1613 follow the coordinate system of FIG.
- FIG. 17 shows the voting space used in Hough conversion and its data structure.
- the voting space 1750 holds ⁇ cells 1751 for the extraction of lines.
- the cell 1751 holds cell information 1700.
- the cell information 1700 is composed of a vote count 1701, an end point 1 coordinate 1710, an end point 2 coordinate 1720, and a voting point group 1730.
- the voting point group 1730 is an enumeration of 1701 votes.
- the end point 1 coordinate 1710 holds an x coordinate 1711 and ay coordinate 1712.
- the end point 2 coordinate 1720 holds an x coordinate 1721 and ay coordinate 1722
- the voting point group 1730 holds an x coordinate 1731 and ay coordinate 1732.
- FIG. 18 shows an example of software configuration.
- This is a map data 1801 added to the configuration of FIG.
- the map data 1801 holds a high-precision map that enables route guidance by automatic driving. This is preferably held in the form of GDF (Geographic Data Files) which is a kind of map format which is an ISO international standard.
- GDF Geographic Data Files
- FIG. 19 is a processing flow when the map data 1801 is used. This is to determine whether the vehicle position is an intersection or an ordinary straight road, and execute the road recognition only when the vehicle is a straight road.
- description will be made on the assumption that the map data 1801 is stored in the GDF 5.0 format.
- step S1901 The position of the vehicle is acquired by GNSS (Global Navigation Satellite System), dead reckoning, etc.
- step S1902 map matching is executed. As a result, the position on the map data 1801 of the own vehicle position obtained in step S1901 can be known.
- the feature of the own vehicle position in the map data 1801 is obtained in step S1903.
- the GDF 5.0 format all objects on the map are called Features.
- Features are defined such as Road for roads and Intersection for intersections. Therefore, by judging this, the attribute of the traveling position of the own vehicle can be known.
- the Feature is determined in step S1904. If Feature is Intersection, the vehicle position is determined to be an intersection, and the process ends without doing anything. If Feature is Road, it is determined that the vehicle position is on a straight road, the process proceeds to step S404 (see FIG. 4), and processing for obtaining the road edge is executed. Therefore, the processing for obtaining the traveling road edge can be performed only while the host vehicle 301 is traveling on the straight road, and the processing for obtaining the traveling road edge can be omitted at the intersection. Therefore, it is possible to reduce the calculation load on the device and realize the configuration with a lower specification.
- the traveling road recognition apparatus of the present embodiment obtains the transverse gradient of the traveling road based on the point cloud data obtained by the laser radar 101, and the coordinates of the traveling road edge based on the coordinate value of the change point at which the angle of the gradient changes. Seeking value. According to the traveling road recognition apparatus of the present embodiment, the traveling road end of the traveling road on which the own vehicle is traveling can be accurately recognized, and the autonomous driving vehicle can be safely operated.
- the camera With a conventional camera, it is possible to recognize the size of an object whose shape is clearly visible to the human eye, such as a structure. It is almost impossible to recognize small gradients in a surface. Further, the camera has a weak point that its recognition performance greatly changes depending on the surrounding brightness and the weather.
- the roadway recognition device of the present embodiment by using the laser radar, the cross slope of the road that cannot be recognized by the conventional camera is obtained, and the coordinate value of the road end is calculated from the cross slope. Seeking. Therefore, it is possible to easily measure the three-dimensional coordinates and the reflection intensity of the detection target without depending on the surrounding brightness and weather unlike the conventional camera, and more robust recognition performance can be expected.
- the traveling road recognition apparatus of the present embodiment recognizes the road surface paint by using the reflection intensity, and determines whether or not the road surface paint is a marking line based on the relationship with the position of the change point.
- these are drawn using the same paint, so it is not possible to distinguish between marking lines and markings on the road surface only by reflection intensity, and objects other than marking lines such as vehicles It is difficult to distinguish it from.
- the lane markings cannot be detected due to faintness, and in that case, it becomes difficult to recognize the road edge.
- the roadway recognition apparatus of the present embodiment it is possible to distinguish between the marking line and the road marking based on the positional relationship between the reflection intensity and the change point, and it is possible to prevent erroneous detection of the roadside edge. Become.
- even when the lane marking cannot be detected due to faint paint or the like it is possible to recognize the traveling road edge and accurately grasp the traveling road in automatic driving, and avoid the situation where the vehicle deviates from the road. ..
- each of the above-mentioned configurations, functions, processing units, processing means, etc. may be realized in hardware by designing a part or all of them with, for example, an integrated circuit.
- the above-described respective configurations, functions and the like may be realized by software by a processor interpreting and executing a program that realizes each function.
- Information such as a program, a table, and a file that realizes each function can be placed in a memory, a recording device such as a hard disk and SSD (Solid State Drive), or a recording medium such as an IC card, an SD card, and a DVD.
- control lines and information lines are shown to be necessary for explanation, and not all control lines and information lines are shown on the product. In reality, it may be considered that almost all the configurations are connected to each other.
- 101 laser radar 201 point group storage section, 202 point group DB, 203 road surface determination section, 204 road edge determination section, 801, road edge calculation section, 802 feature point candidate extraction section, 803 feature point determination section, 804 lane marking recognition section
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Automation & Control Theory (AREA)
- Electromagnetism (AREA)
- Computer Networks & Wireless Communication (AREA)
- Mechanical Engineering (AREA)
- Transportation (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Mathematical Physics (AREA)
- Human Computer Interaction (AREA)
- Traffic Control Systems (AREA)
- Navigation (AREA)
- Optical Radar Systems And Details Thereof (AREA)
Abstract
自車両が走行する走行路の走行路端を的確に認識することができる走行路認識装置を得ること。本発明の走行路認識装置は、自車両301が走行する走行路の走行路端を認識する走行路認識装置であって、自車両301から走行路に向かってレーザを照射するレーザレーダ101と、レーザレーダ101により得られる点群の座標値に基づいて、走行路の横断勾配を求める路面判定部203と、路面判定部203により求めた走行路の横断勾配において勾配角度が変化する変化点を求め、変化点の座標値に基づいて走行路の横断方向両側のうちの少なくとも一方の走行路端の座標値を求める道路端判定部204とを有する。
Description
本発明は、車両走行環境における走行可能領域を認識する走行路装置に関する。
本技術分野の背景技術として、特許文献1には、車両周辺を撮像する撮像手段を備え、該撮像手段の撮像画像を解析することにより道路区画線を認識する道路区画線認識装置であって、道路に敷設された第1物標の位置を特定する第1物標位置特定手段を備え、前記第1物標、及び前記第1物標とは異なる第2物標により区画されている道路において、前記撮像手段の撮像画像における前記第2物標の位置に基づいて道路区画線を認識する際には、前記第1物標位置特定手段により特定された前記第1物標の位置に相当する前記撮像手段の撮像画像上の位置の、手前側及び/又は奥側に、前記第2物標を認識するための第2物標認識用画像解析領域を設定することを特徴とする道路区画線認識装置の技術が開示されている。
自動運転車両による自動運転においては、車線変更・車線維持に適用可能な高精度な車線認識が要求されている。特許文献1には、カメラを用いた区画線認識装置が開示されており、この認識結果を使うことにより、車線維持、車線変更等の運転支援機能を実現することが可能になる旨の記載がある。
しかし、認識手段としてカメラを用いた場合、カメラによる認識性能が周辺の明るさや天候等の環境に依存して大きく変化するという弱点がある。環境によっては自車両が走行する走行路の走行路端を的確に認識することができずに自車両の自動運転制御に影響を与えるおそれがある。
本発明は、上記の点に鑑みてなされたものであり、その目的とするところは、自車両が走行する走行路の走行路端を的確に認識することができる走行路認識装置を提供することである。
上記課題を解決する本発明の走行路認識装置は、自車両が走行する走行路の走行路端を認識する走行路認識装置であって、前記自車両から前記走行路に向かってレーザを照射するレーザレーダと、該レーザレーダにより得られる点群の座標値に基づいて、前記走行路の横断勾配を求める路面判定部と、該路面判定部により求めた前記走行路の横断勾配において勾配角度が変化する変化点を求め、該変化点の座標値に基づいて前記走行路の横断方向両側のうちの少なくとも一方の走行路端の座標値を求める道路端判定部と、を有することを特徴とする。
本発明によれば、自車両が走行する走行路の走行路端を的確に認識することができる。したがって、自動運転車両の安全な運行が可能になる。本発明に関連する更なる特徴は、本明細書の記述、添付図面から明らかになるものである。また、上記した以外の、課題、構成及び効果は、以下の実施形態の説明により明らかにされる。
次に、本発明の走行路認識装置が適用される実施形態の走行路認識装置について説明する。
本実施形態の走行路認識装置は、自車両が走行する走行路の走行路端を認識するものであり、自動運転を行う自車両に搭載されている。走行路認識装置によって認識された走行路端の情報は、自車両の車両制御ユニットに供給され、自動運転の制御に使用される。
本実施形態の走行路認識装置は、自車両が走行する走行路の走行路端を認識するものであり、自動運転を行う自車両に搭載されている。走行路認識装置によって認識された走行路端の情報は、自車両の車両制御ユニットに供給され、自動運転の制御に使用される。
図1は、本発明の実施形態に係る走行路認識装置のハードウェアの構成例を示す図である。
本実施形態の走行路認識装置100は、車両周辺を監視するためのレーザレーダ101と、地図情報等を記憶するための記憶装置103と、CPU104と、メモリ105を備えている。本実施形態では、走行路認識装置100は、レーザレーダ101も構成に含む場合を例に説明するが、レーザレーダ101を含まずに、レーザレーダ101からデータを取得する構成とすることもできる。
レーザレーダ101は、自車両に搭載されて、自車両からレーザを照射し、反射波を利用してデータを取得する構成を有しており、例えばLiDARが用いられる。レーザレーダ101は、複数のレーザを垂直方向にレイヤ状に重ね、それを回転させながら照射し、その反射波を用いて、レーザが反射された位置の3次元座標や反射強度等のデータを得る。このデータを一般に点群データと呼ぶ。
レーザレーダ101は、自車両から離間する方向に所定間隔をおいて複数のレイヤごとに点群データを取得する。レーザレーダ101は、カメラとは異なり、周辺の明るさに依存せずに点群データを得ることが可能であり、昼夜関係なく物体を検知することが可能になる。レーザレーダ101により得られた点群データは、CPU104からメモリ105に送られ、例えば図16に示す点群データのデータ構造を持つバッファに格納される。レーザレーダ101は、自車両からレイヤ状にレーザを照射し、それぞれのレイヤにおいて複数の点群データを取得することができる。
CPU104は、レーザレーダ101で得られた点群データを処理し、その過程で必要となるデータや処理結果をメモリ105に記憶させる。そして、処理結果の情報をCAN_I/F106からCANバス107に流し、CANバス107を通じて車両制御ユニット102に送る処理を行わせる。車両制御ユニット102は、車両の進行方向や速度を制御するものであり、これは、CPU104による走行路認識処理の処理結果を取り込むことにより実現される。また、CPU104は、車両制御ユニット102にて作成・格納される車両の進行方向や速度等のデッドレコニング情報を、CAN_I/F106を通じて取得することも可能とする。
図2は、本発明の実施形態に係る走行路認識装置のソフトウェアの構成例を示す図である。
走行路認識装置100は、点群格納部201、点群DB202、路面判定部203、および、道路端判定部204を有する。点群格納部201、点群DB202、路面判定部203、および、道路端判定部204は、CPU104等のハードウェアにおいて走行路認識用のソフトウェアが実行されることにより、CPU104の内部機能として具現化される。
点群格納部201は、レーザレーダ101で取得された点群データを点群DB202に格納する。路面判定部203は、点群DB202に格納された点群データを用いて走行路の横断勾配を求める。走行路の横断勾配とは、自車両が走行する走行路の横断方向の勾配、つまり、走行路の予め設定されている走行方向に直交する方向である路幅方向の勾配である。一般的に、道路等の走行路の路面には、排水性を向上させるために、横断方向に沿って緩やかな傾斜が付けられている。この傾斜が走行路の横断勾配であり、点群データを用いて路面判定部203によって求められる。
道路端判定部204は、走行路の横断勾配において勾配角度が変化する変化点を求め、変化点の座標値に基づいて、走行路の横断方向両側のうちの少なくとも一方の走行路端の座標値を求める。ここで走行路の横断方向両側の走行路端の座標値が得られた場合、横断方向両側の走行路端の間が、自車両が走行可能な走行路となる。走行路端の概念には、例えば走行路の横断勾配の変化点、縁石や路肩等の構造物、および区画線の少なくとも一つが含まれる。道路端判定部204による判定方法については後述する。
図3は、本実施形態において使用する座標系の例を説明する図である。
本実施形態では、自車両301の位置を原点とした座標系を使用しており、自車両301の進行方向をx軸、x軸に垂直な方向であって車幅方向に沿う方向をy軸、路面と垂直な方向をz軸とする。尚、y軸は、自車両301の進行方向に向かって右から左へ向かう方向を正とする。
本実施形態では、自車両301の位置を原点とした座標系を使用しており、自車両301の進行方向をx軸、x軸に垂直な方向であって車幅方向に沿う方向をy軸、路面と垂直な方向をz軸とする。尚、y軸は、自車両301の進行方向に向かって右から左へ向かう方向を正とする。
図4は、本発明の実施形態に係る走行路認識装置の全体処理のフローチャートである。
まず、ステップS401で、レーザレーダ101から点群データを取得し、ステップS402では、取得した点群データを点群DB202に格納する。次に、ステップS403で、既存の点群データの座標値を更新する。ステップS402において点群DB202に格納される点群データは、自車両301の位置を原点とした座標系であるため、既存の点群データの座標値についても、移動後の自車両301の位置を中心したものに直す必要がある。これについては、図5を用いて後述する。これらの処理が終わってから、ステップS404で各レイヤにおける点群データを処理し、各レイヤにおける走行路端を求める。
ステップS404の処理に関しても、以降で述べる。
まず、ステップS401で、レーザレーダ101から点群データを取得し、ステップS402では、取得した点群データを点群DB202に格納する。次に、ステップS403で、既存の点群データの座標値を更新する。ステップS402において点群DB202に格納される点群データは、自車両301の位置を原点とした座標系であるため、既存の点群データの座標値についても、移動後の自車両301の位置を中心したものに直す必要がある。これについては、図5を用いて後述する。これらの処理が終わってから、ステップS404で各レイヤにおける点群データを処理し、各レイヤにおける走行路端を求める。
ステップS404の処理に関しても、以降で述べる。
図5は、ステップS403の、点群データの座標値を更新する処理のフローチャートである。
まず、ステップS501で、デッドレコニングの情報を得る。デッドレコニングは、自車の進行方向と走行距離によって自車位置を求める処理である。デッドレコニングの情報は、CAN107からCAN_I/F106を通じてCPU104に提供される。ステップS501では、前回の自車位置を計測した時点からの走行距離と進行方向の差分を得る。
まず、ステップS501で、デッドレコニングの情報を得る。デッドレコニングは、自車の進行方向と走行距離によって自車位置を求める処理である。デッドレコニングの情報は、CAN107からCAN_I/F106を通じてCPU104に提供される。ステップS501では、前回の自車位置を計測した時点からの走行距離と進行方向の差分を得る。
次に、ステップS502で、得られたデータレコニングのデータを用いて回転行列と平行移動行列を求める。そして、点群DB202の既存データのすべてに対してこれらの行列を適用し、座標変換する。ステップS503では、点群データから座標値の情報を得て、ステップS504で座標値が所定範囲か否かを判定する。具体的には、例えば、前回の自車位置を基準に半径60m以内といった範囲をあらかじめ決めておく。座標値が所定範囲内であれば、ステップS505へ進み、ステップS502で求めた行列を適用して座標値を変換する。所定範囲外であればステップS506へ進み、当該の座標値を点群DB202から消去する。このように所定範囲外の座標値を点群DB202から消去することで、点群DB202に記憶するデータ量を節約することが可能になる。また、直近に得られた点群データだけを参照できるようにすることで、自車の現在地周辺の点群データだけを用いるようにする。
図6は、ステップS404において走行路端を求める処理のフローの一例であり、走行路の横断勾配の変化点から走行路端を求める処理のフローチャートである。
走行路端を求める処理は、道路端判定部204において行われる。走行路端を求める処理では、図6のフローに示すように、まず、レイヤ数の分のループに入る。そして、その中で、更に点群データ数の分のループに入る。ステップS601で点群データのz座標が所定範囲か否かを判定する。これは、点群の位置が路面上か否かを大まかに判断するものであり、所定範囲については、路面上のデータであると予測される範囲を事前に決めておく。
走行路端を求める処理は、道路端判定部204において行われる。走行路端を求める処理では、図6のフローに示すように、まず、レイヤ数の分のループに入る。そして、その中で、更に点群データ数の分のループに入る。ステップS601で点群データのz座標が所定範囲か否かを判定する。これは、点群の位置が路面上か否かを大まかに判断するものであり、所定範囲については、路面上のデータであると予測される範囲を事前に決めておく。
所定範囲内であればステップS602に進み、Hough変換を実行する。Hough変換で用いる投票空間は、例えば図17に示す構成を有する。図17は、Hough変換で用いる投票空間とそのデータ構造を説明する図である。なお、Hough変換は処理コストが高いため、所望の処理時間に収まるよう、予め、投票する角度範囲を絞り込んだり、角度の刻み値を設定したりする必要がある。ここではその詳細は割愛する。
次に、ステップS603に進み、z座標が所定範囲内である点群の点群データである座標値をバッファに格納する。このバッファは、走行路の路面上の点群データを格納するためのバッファである。
すべての座標点について上記の処理を終えたら、Hough変換で得られた線分の数の分のループに入る。Hough変換で線分を得るには、投票数の閾値を予め決めたり、当該の線分に投票された点の密度を判定したりする。この判定がステップS604である。
投票数や点の密度が条件を満たしていれば、ステップS605に進み、当該の線分情報をバッファに格納する。このバッファは、線分情報を格納するためのものであり、例えば図17のセル情報1700と同様のデータ構造を持つ。すべての線分に対する処理を終了したら、バッファに格納された線分同士の交点を求める。この交点が走行路の横断勾配の変化点に相当し、走行路端となる。
この処理をすべてのレイヤについて実行すれば、交点721、722(図7参照)がレイヤ数分だけ求められることになる。これをつなぎ合わせることで最終的に走行路端を求めることが可能になる。尚、これを時系列で保存しておくことで、より密度が高い走行路端のデータを得ることが可能である。
また、道路端判定部204では、点群の座標値に基づいて、走行路の路面と走行路の少なくとも一方の走行路端に設置された構造物とを検知し、走行路の路面と構造物との間における高さの変化点の座標値を求め、変化点の座標値に基づいて走行路端の位置を求める処理を行う。この処理により、走行路の路面と走行路端に設置された構造物との間を検知し、走行路端とすることができる。
図7を用い、図6の処理について更に説明する。図7は、点群データと横断勾配の例を示すyz平面図であり、ステップS601で、Z座標が所定範囲と判定された点群703を、yz平面上に表した例である。点群703の点群データに対し、ステップS605までの処理によって得られたのが、線分711、712、713である。
線分711は、自車両301の左側方に配置されている縁石等の構造物によって得られた線分である。線分712は、自車レーン(走行路)の路面によって得られた線分である。線分713は対向レーンの路面によって得られた線分である。交点721は、走行路の路面と構造物との間における高さの変化点となり、交点722は、走行路の横断勾配において勾配角度が変化する変化点となる。交点721、722は、走行路の横断方向両側の走行路端の座標値を示すものであり、交点721と722との間は自車両が走行可能な幅となる。したがって、自車両が走行可能な最低限の走行路が認識できる。
通常、道路は雨水等を排水するため、走行路の横断方向一方側の走行路端から走行路の横断方向他方側の走行路端に向かって緩やかに下る傾斜を有している。例えば、片側一車線道路においては、自車レーンと対向レーンとの間の道路中央から道路端に向かって移行するにしたがって漸次高さが低くなるように、1°程度の傾斜が付けられている。この傾斜をレーザレーダ101で検知することで、自車レーンと対向レーンを判断することが可能である。図7の例では、線分712が自車レーン、線分713が対向レーンとなる。そして、線分712と713の交点722が道路中央となる。
次に、走行路端を求める他の処理の例について説明する。図6では、走行路の横断勾配の変化点から走行路端を求める処理の一例について説明したが、さらに精度よく走行路端を求めるために、区画線の判断を加えることができる。区画線には、例えば自車レーンと対向レーンとの間の車線境界線(いわゆるセンターライン)や、自車レーンを間に介して車線境界線と反対側に位置する車道外側線が含まれる。
図8は、区画線を用いる場合の走行路認識装置のソフトウェアの構成例を示す図である。道路端判定部204は、図8に示すように、区画線を用いた場合の処理モジュールとして、道路端算出部801と、特徴点候補抽出部802と、特徴点判定部803と、区画線認識部804とを備えている。
道路端算出部801は、走行路の横断勾配とその変化点を求め、変化点の座標位置に基づいて走行路端を求める。特徴点候補抽出部802は、レーザを路面上に照射して得られる点群データの座標値と反射強度に基づき、区画線を構成する特徴点候補を求める。特徴点候補抽出部802は、レーザレーダ101により得られる点群データの中から反射強度が閾値よりも高い点群データを、路面に表示された区画線の特徴点候補として抽出する処理を行う。特徴点判定部803は、道路端算出部801で求めた走行路端の座標値に基づいて特徴点候補の中から区画線の特徴点を求める。
例えば、特徴点判定部803は、特徴点候補抽出部802によって得られた特徴点候補の中から道路端算出部801で得られた走行路端の近傍に存在する特徴点候補に絞り込み、その絞り込まれた特徴点候補を特徴点として決定する。この絞り込みにより、例えば走行路の中央位置に存在する矢印などの路面ペイントを走行路端の候補から除外することができる。区画線認識部804は、特徴点判定部803で得られた特徴点を用いて区画線を認識し、その区画線を走行路端とする処理を行う。
次に、道路端判定部204の処理について説明する。
図9は、走行路端となる区画線を求める処理のフローチャートであり、ステップS404の処理に相当する。路面に区画線が存在する場合は、区画線の位置を走行路端とすることが望ましい。そして、路面に区画線が存在しない場合は、図6の処理で求めた交点721、722を走行路端とすることができる。
まず、ステップS901にて、走行路の横断勾配を求める。この処理については、図12、図13を用いて改めて後述する。
その後、レイヤ数の分のループに入り、ステップS902にて路面ペイントの特徴点候補を抽出する。路面ペイントには反射材が混ぜられており、レーザレーダ101でレーザを照射した場合に、高い反射強度を得ることが可能である。この高い反射強度を用いて特徴点候補を抽出する。これは、図12を用いて改めて後述する。
次にステップS903にて、ステップS902で抽出した特徴点候補を、交点721、722の近傍に絞り込む。近傍というのは、交点721、722よりも自車に近い側へマージンをとり、予め設定された所定範囲内を意味する。
レイヤ数のループを抜け、ステップS904でHough変換を用いて線分を抽出する。これは、ステップS903で得られた特徴点候補に対する処理である。尚、Hough変換は処理の一例であり、線分を抽出するアルゴリズムはこれに限らない。
図10は、ステップS901における横断勾配を求める処理フローであり、点群の探索方法を説明するフローチャートである。まず、ステップS1001で、レイヤ1のz軸方向の探索座標範囲(探索z座標範囲)を±10cmに設定する。ここで、レイヤの番号は自車両301に近い側から遠く離れる側に向かって昇順するように設定されており、レイヤ1は自車両301に一番近いレイヤになる。また、ステップS1002にて、全レイヤのy軸方向の探索座標範囲(探索y座標範囲)を±1.5mに設定する。これは、自車の横に1.5mずつということになり、自車レーンの幅に相当する。尚、この値は1.5mに限らず、状況に応じて任意に設定してよい。
次に、レイヤ数のループに入り、各レイヤにおける走行路の横断勾配を求める。レイヤ数のループでは、レイヤ数が小さい方から大きい方に順番に処理が行われる。まず、ステップS1003で、当該レイヤにて抽出された点群の数(座標点数)をチェックする。点群の数が1以下の場合(NO)は、走行路の横断勾配を計算できないので、当該レイヤにおける処理は実行しない。点群の数が2以上あれば、走行路の横断勾配を計算すべく、ステップS1004以降に進む。
ステップS1004では、探索yz座標範囲に含まれる点群の点群データをバッファに格納する。これは、各レイヤにおいて検知した点群をすべて探索することで実施可能である。バッファは、図16のようなデータ構造を持っているが、点群DB202とは別のメモリ領域を確保するのが好適である。
次にステップS1005にて、yz平面上で最小二乗法を実行し、z=ay+bのパラメータを保存する。具体的にはaとbの値である。これは、レイヤ数の分だけ保持することになる。次に、ステップS1006にて、次のレイヤの探索yz座標範囲をbを基準に設定する。本実施形態では、b±10cmに設定する。これは、上り坂や下り坂の場合に対応するためである。つまり、好適な探索yz座標範囲は、レイヤによって異なるため、bを基準にして次のレイヤの探索yz座標範囲を設定するステップS1006の処理が必要となる。尚、bに対するマージンの値については、状況に応じて任意に設定することが可能であり、10cmに限らない。
図10の処理について、図11を参照しながら更に述べる。図11は、あるレイヤにおけるyz平面の例であり、点群の探索座標範囲と横断勾配の一例を示すyz平面図である。1101は点群であり、エリア1102は、yが±1.5m、zが±10cmに設定された探索yz座標範囲の領域である。ステップS1004では、前記エリア1102に存在する点群1101を求め、ステップS1005では、エリア1102に存在する点群1101から近似直線1103を求める。これによって、特徴点候補の近似直線を算出することが可能になる。
図12は、路面ペイントの特徴点候補を求める処理のフローチャートである。図12に示す処理は、ステップS902の処理に相当する。ステップS902は、各レイヤについての処理であり、図12も同様である。まず、ステップS1201で、レイヤの路面上の点群の数(座標点数)をチェックする。路面点数が1以下ならば、走行路の横断勾配が計算できていないはずなので、以降の処理は実行しない。
走行路の横断勾配が計算できている場合は、当該レイヤの点群の数(座標点数)の分のループに入る。ステップS1202では、点群が所定のz座標の範囲に入っているか否かを判定する。ここでは、走行路の横断勾配に基づいて特徴点候補を走行路端から所定範囲に絞り込む処理を行う。具体的には、ステップS1205で求めた当該レイヤにおけるaとbの値を用いて、z座標がay+b±5cmの範囲に入っているかを判定する。ay+bというのは、当該レイヤにおける路面の横断勾配の方程式である。本実施形態では、この路面の横断勾配の方程式に対して上下に5cmのマージンを考慮することで、路面上か否かを判定している。尚、マージンの5cmについては、任意に設定することが可能であり、この値に限らない。
このマージンの範囲に入っていれば路面上の点であるとみなし、ステップS1203に進む。ステップS1203では、当該座標点における反射強度を判定する。前述したように、路面ペイントには反射材が含まれているため、レーザレーダ101から照射されたレーザが当たれば、周囲の路面よりも高い反射強度が得られる。ステップS1203では、その反射強度が閾値よりも高いか否かを判定する。閾値よりも高ければ路面ペイントであるとみなし、ステップS1204にてバッファに格納する。閾値については、路面と路面ペイントのいずれであるかが区別できる値であれば任意に設定してよい。
図12の処理について、図13を参照しながら更に述べる。図13は、図11で示したものと同一のyz平面である。ステップS1202においては、各y座標における近似直線1103のz座標の値ay+bに対して、±5cmの領域を設定することでエリア1301を定義する。このエリア1301に入っており、かつ、ステップS1203にて、反射強度が閾値より高い点群が特徴点として認識されることになる。
次に、ステップS903の処理に関して、図14、図15を用いて更に説明する。図14は、反射強度と勾配変化の関係の一例を示す図である。図14上は点群のyz平面における位置を示し、図14下は点群のy座標と反射強度の関係を示す。
この関係図において、交点721のy座標近傍に、反射強度が閾値より高い点群1401が出現している。また、交点722の近傍にも同様に、反射強度が閾値より高い点群1402が出現している。したがって、これらの点群1401、1402が区画線の特徴点候補となり、これらが本当に区画線か否かを判定する必要がある。
これについては、各交点721、722からy方向に沿って自車に近い側に予め設定された距離(本実施形態では10cm)のマージン1410をとり、そこから更に自車に近い側に予め設定された幅範囲(本実施形態では30cmの幅範囲)1411に、反射強度が閾値より高い点群が入っているか否かを判定する。そして、反射強度が閾値より高い点群が幅範囲1411に入っていれば当該の点群が区画線を構成するとみなし、幅範囲1411に入っていなければ区画線ではないとする。図14の例では、反射強度が閾値より高い点群1401は幅範囲1411に入っておらず、区画線ではないと判断され、反射強度が閾値より高い点群1402は幅範囲1411に入っており、区画線を構成するとみなされる。尚、上記のマージン1410の値は、状況に応じて任意に設定してよく、これらの値に限らない。
上記のように、勾配変化点と反射強度の関係を判定することで、構造物と路面ペイントが区別できることになる。そして、路面ペイントの場合は白線の可能性が高いので、区画線認識の処理を実行する。これはステップS904の処理に相当する。
図15は、区画線特徴点を用いて区画線を認識する処理を説明する図である。
図15上は、レイヤごとの点群のy座標と反射強度の関係を示し、図15下は、図15上において反射強度が閾値より高い点群1402を全レイヤについてxy平面に展開した図である。
図15上は、レイヤごとの点群のy座標と反射強度の関係を示し、図15下は、図15上において反射強度が閾値より高い点群1402を全レイヤについてxy平面に展開した図である。
区画線と判定された点群1402は3次元座標を有しているが、区画線の認識の際は路面上の点として扱うため、xy座標だけを用いる。この様子が図15下の図になる。尚、図15下で扱う点群は、その時点で全レイヤにて得られた最新の特徴点と、過去に取得された特徴点である。こうすることによって、データが疎なレーザレーダであっても、区画線認識に必要となる量の特徴点を扱うことが可能になる。そして、これら特徴点に対してステップS904の処理を施すことで線分1501が得られ、これを走行路の走行路端とする。
図16は、点群DB202のデータ構造を示す。データはレイヤ情報1600の羅列であり、レイヤごとにレイヤ情報1600を持つ。レイヤ情報1600は、レイヤ番号1601、点数1602、点群情報1610を含んでいる。点群情報1610は、点数1602の分の羅列である。
点群情報1610は、x座標1611、y座標1612、z座標1613、反射強度1614を含んでいる。x座標1611、y座標1612、z座標1613は、図3の座標系にしたがう。
図17は、Hough変換で用いる投票空間とそのデータ構造を示す。投票空間1750は、線の抽出に必要な分のρθセル1751を保持している。セル1751はセル情報1700を保持している。
セル情報1700は、投票数1701、端点1座標1710、端点2座標1720、投票点群1730から構成されている。投票点群1730は、投票数1701の分の羅列である。端点1座標1710はx座標1711、y座標1712を保持する。同様に端点2座標1720はx座標1721、y座標1722を保持し、投票点群1730は、x座標1731、y座標1732を保持する。
次に、自動運転で使用する高精度地図を用いることで、走行路端認識の要否を判断する実施例について説明する。
図18は、ソフトウェア構成の例を示す。これは、図2の構成に地図データ1801を追加したものである。地図データ1801は、自動運転による経路誘導を可能とする高精度地図を保持する。これは、例えばISOの国際標準である地図フォーマットの一種であるGDF(Geographic Data Files)の形態で保持されることが好適である。
図19は、地図データ1801を用いた場合の処理フローである。これは、自車位置が交差点か通常の直進路かを判定し、直進路の場合にのみ、走行路認識を実行するものである。ここでは、地図データ1801がGDF5.0フォーマットで格納されていることを前提に説明する。
まず、ステップS1901で自車位置を得る。自車両の位置は、GNSS(Global Navigation Satellite System)やデッドレコニングなどにより取得する。次に、ステップS1902でマップマッチングを実行する。これによって、ステップS1901で得られた自車位置の、地図データ1801上における位置がわかる。
地図データ1801上での自車位置がわかったら、ステップS1903で、地図データ1801における自車位置のFeatureを得る。GDF5.0フォーマットでは、地図上のオブジェクトはすべてFeatureと呼ばれている。道路にはRoad、交差点にはIntersectionなどのようにFeatureが定義されている。したがって、これを判定することによって自車の走行位置の属性がわかる。
そこで、ステップS1904でFeatureを判定する。FeatureがIntersectionであれば、自車位置が交差点であると判断し、何もせずに終了する。FeatureがRoadであれば、自車位置が直進路上であると判断し、ステップS404(図4参照)に進み、走行路端を求める処理を実行する。したがって、自車両301が直進路を走行中にのみ走行路端を求める処理を行うことができ、交差点では走行路端を求める処理を省略することができる。したがって、装置の演算負担を軽減し、より低いスペックの構成で実現することができる。
本実施形態の走行路認識装置は、レーザレーダ101により得られる点群データに基づいて走行路の横断勾配を求めて、勾配の角度が変化する変化点の座標値に基づいて走行路端の座標値を求めている。本実施形態の走行路認識装置によれば、自車両が走行している走行路の走行路端を的確に認識することができ、自動運転車両の安全な運行が可能になる。
従来のカメラでは、構造物のように人の目で見ても明らかに形状がわかる対象物であれば大きさを認識することは可能であるが、道路の横断勾配等、一見して平坦な面の小さな勾配を認識することはほぼ不可能である。また、カメラは、認識性能が周辺の明るさや天候に依存して大きく変化するという弱点がある。
これに対し、本実施形態の走行路認識装置では、レーザレーダを用いることで、従来のカメラでは認識することができなかった走行路の横断勾配を求め、横断勾配から走行路端の座標値を求めている。したがって、従来のカメラのように周辺の明るさや天候に依存せずに、検出対象の3次元座標および反射強度を容易に計測可能であり、よりロバストな認識性能が期待できる。
また、本実施形態の走行路認識装置は、反射強度を用いて路面ペイントを認識し、変化点の位置との関係から、その路面ペイントが区画線であるか否かを判定している。路面上の道路標示や区画線を認識する場合、これらは同じ塗料を用いて描かれているため、反射強度だけでは区画線と路面標示との区別がつかず、車両等の区画線以外の物体との区別もつきにくい。かすれ等によって区画線を検知できない場合もあり、そのときは道路端を認識することが困難となる。
これに対し、本実施形態の走行路認識装置では、反射強度と変化点との位置関係に基づいて区画線と路面標示の区別をすることができ、走行路端の誤検知の防止が可能になる。
また、ペイントのかすれ等によって区画線を検知できないなどの不検知時においても、走行路端を認識し、自動運転における走行路を正確に把握でき、車両の路外逸脱という状況を免れることができる。
また、ペイントのかすれ等によって区画線を検知できないなどの不検知時においても、走行路端を認識し、自動運転における走行路を正確に把握でき、車両の路外逸脱という状況を免れることができる。
尚、本発明は上記した実施例に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。
また、ある実施例の構成の一部を他の実施例の構成に置き換えることが可能であり、また、ある実施例の構成に他の実施例の構成を加えることも可能である。また、各実施例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。
また、上記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によりハードウェアで実現してもよい。また、上記の各構成、機能等は、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行することによりソフトウェアで実現してもよい。各機能を実現するプログラム、テーブル、ファイル等の情報は、メモリや、ハードディスク、SSD(Solid State Drive)等の記録装置、または、ICカード、SDカード、DVD等の記録媒体に置くことができる。
また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際には殆ど全ての構成が相互に接続されていると考えてもよい。
以上、本発明の実施形態について詳述したが、本発明は、前記の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の精神を逸脱しない範囲で、種々の設計変更を行うことができるものである。例えば、前記した実施の形態は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施形態の構成の一部を他の実施形態の構成に置き換えることが可能であり、また、ある実施形態の構成に他の実施形態の構成を加えることも可能である。さらに、各実施形態の構成の一部について、他の構成の追加・削除・置換をすることが可能である。
101 レーザレーダ、201 点群格納部、202 点群DB、203 路面判定部、204 道路端判定部、801 道路端算出部、802 特徴点候補抽出部、803 特徴点判定部、804 区画線認識部
Claims (6)
- 自車両が走行する走行路の走行路端を認識する走行路認識装置であって、
前記自車両から前記走行路に向かってレーザを照射するレーザレーダと、
該レーザレーダにより得られる点群の座標値に基づいて、前記走行路の横断勾配を求める路面判定部と、
該路面判定部により求めた前記走行路の横断勾配において勾配角度が変化する変化点を求め、該変化点の座標値に基づいて前記走行路の横断方向両側のうちの少なくとも一方の走行路端の座標値を求める道路端判定部と、
を有することを特徴とする走行路認識装置。 - 前記道路端判定部は、前記点群の座標値に基づいて、前記走行路の路面と前記走行路の少なくとも一方の走行路端に設置された構造物とを検知し、前記走行路の路面と前記構造物との間における高さの変化点の座標値を求め、該変化点の座標値に基づいて前記走行路端の位置を求めることを特徴とする請求項1に記載の走行路認識装置。
- 前記レーザレーダにより得られる点群の中から反射強度が閾値よりも高い点群を、前記走行路に表示された区画線の特徴点候補として抽出する特徴点候補抽出部と、
前記走行路端の座標値に基づいて前記特徴点候補の中から前記区画線の特徴点を求める特徴点判定部と、
該特徴点判定部により求めた前記特徴点に基づいて前記区画線を認識する区画線認識部と、
を有することを特徴とする請求項1に記載の走行路認識装置。 - 前記特徴点判定部は、前記走行路の横断勾配に基づいて前記特徴点候補を所定範囲に絞り込むことで前記特徴点候補の中から前記区画線の特徴点を求めることを特徴とする請求項3に記載の走行路認識装置。
- 前記自車両が走行している領域に関する地図情報を有し、
前記路面判定部は、前記地図情報を用いて前記自車両が走行している走行路が直進路と交差点のいずれであるかを判定し、
前記道路端判定部は、前記路面判定部により前記直進路であると判定された場合に前記走行路端の座標値を求める処理を実行することを特徴とする請求項1に記載の走行路認識装置。 - 前記レーザレーダは、前記自車両から離間する方向に所定間隔をおいて複数のレイヤごとに点群のデータを取得し、
前記路面判定部は、前記複数のレイヤごとに前記点群を探索する探索座標範囲を設定し、該探索座標範囲内に存在する点群を用いて前記走行路の横断勾配を求めることを特徴とする請求項1に記載の走行路認識装置。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US17/426,775 US12479442B2 (en) | 2019-02-21 | 2020-01-30 | Travel road recognition device |
| CN202080006348.5A CN113424240B (zh) | 2019-02-21 | 2020-01-30 | 行驶道路识别装置 |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019029840A JP7257814B2 (ja) | 2019-02-21 | 2019-02-21 | 走行路認識装置 |
| JP2019-029840 | 2019-02-21 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2020170745A1 true WO2020170745A1 (ja) | 2020-08-27 |
Family
ID=72144930
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2020/003317 Ceased WO2020170745A1 (ja) | 2019-02-21 | 2020-01-30 | 走行路認識装置 |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US12479442B2 (ja) |
| JP (1) | JP7257814B2 (ja) |
| CN (1) | CN113424240B (ja) |
| WO (1) | WO2020170745A1 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115375956A (zh) * | 2021-05-20 | 2022-11-22 | 华为技术有限公司 | 一种车道线的检测方法及相关装置 |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7414603B2 (ja) * | 2020-03-19 | 2024-01-16 | トヨタ自動車株式会社 | 走路境界決定装置および走路境界決定方法 |
| JP2022150929A (ja) | 2021-03-26 | 2022-10-07 | 本田技研工業株式会社 | 軸ずれ推定装置 |
| CN116153057A (zh) * | 2022-09-12 | 2023-05-23 | 东北林业大学 | 基于激光雷达点云估算车道宽度的方法 |
| CN115617934B (zh) * | 2022-10-17 | 2025-10-28 | 武汉中海庭数据技术有限公司 | 一种高精度地图车道组作用范围生成方法及系统 |
| CN116381730A (zh) * | 2023-04-17 | 2023-07-04 | 常熟理工学院 | 一种基于三维激光雷达的非结构化道路检测方法 |
| CN116913081A (zh) * | 2023-06-20 | 2023-10-20 | 苏州大学 | 一种基于路侧激光雷达的车辆排队长度检测方法 |
| JP7847179B2 (ja) * | 2024-09-04 | 2026-04-16 | 本田技研工業株式会社 | 外界認識装置 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2008099915A1 (ja) * | 2007-02-16 | 2008-08-21 | Mitsubishi Electric Corporation | 道路地物計測装置、地物識別装置、道路地物計測方法、道路地物計測プログラム、計測装置、計測方法、計測プログラム、計測位置データ、計測端末装置、計測サーバ装置、作図装置、作図方法、作図プログラムおよび作図データ |
| US20110309967A1 (en) * | 2009-03-03 | 2011-12-22 | Tok Son Choe | Apparatus and the method for distinguishing ground and obstacles for autonomous mobile vehicle |
| JP2017015409A (ja) * | 2015-06-26 | 2017-01-19 | シャープ株式会社 | 路面検知装置、移動体、路面検知方法、および路面検知プログラム |
| WO2018105476A1 (ja) * | 2016-12-05 | 2018-06-14 | パナソニックIpマネジメント株式会社 | 撮像装置、及びそれに用いられる固体撮像素子 |
Family Cites Families (27)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4294145B2 (ja) * | 1999-03-10 | 2009-07-08 | 富士重工業株式会社 | 車両の進行方向認識装置 |
| JP2008165610A (ja) | 2006-12-28 | 2008-07-17 | Toyota Motor Corp | 道路区画線認識装置 |
| US8099213B2 (en) * | 2008-07-18 | 2012-01-17 | GM Global Technology Operations LLC | Road-edge detection |
| JP2011196699A (ja) * | 2010-03-17 | 2011-10-06 | Denso Corp | 道路端検出装置 |
| JP5389002B2 (ja) * | 2010-12-07 | 2014-01-15 | 日立オートモティブシステムズ株式会社 | 走行環境認識装置 |
| KR101884018B1 (ko) * | 2012-02-21 | 2018-08-29 | 현대엠엔소프트 주식회사 | 라이다 데이터를 이용한 도로의 곡선반경, 종단 및 횡단 경사도 산출 방법 |
| DE102013220303A1 (de) * | 2013-10-08 | 2015-04-09 | Ford Global Technologies, Llc | Verfahren zum Ermitteln einer relativen Fahrbahnsteigung |
| US20150120244A1 (en) * | 2013-10-31 | 2015-04-30 | Here Global B.V. | Method and apparatus for road width estimation |
| CN103711050B (zh) * | 2013-12-31 | 2016-04-06 | 中交第二公路勘察设计研究院有限公司 | 一种激光雷达道路改扩建勘测设计方法 |
| CN104636763B (zh) * | 2014-12-01 | 2018-10-09 | 北京工业大学 | 一种基于无人驾驶车的道路与障碍物检测方法 |
| CN104569998B (zh) * | 2015-01-27 | 2017-06-20 | 长春理工大学 | 基于激光雷达的车辆安全行驶区域的检测方法及装置 |
| CN104597453B (zh) * | 2015-01-27 | 2017-06-20 | 长春理工大学 | 惯性测量装置校正的车辆安全行驶区域检测方法及装置 |
| CN104950313B (zh) * | 2015-06-11 | 2017-11-07 | 同济大学 | 一种路面提取及道路坡度识别方法 |
| US9710714B2 (en) * | 2015-08-03 | 2017-07-18 | Nokia Technologies Oy | Fusion of RGB images and LiDAR data for lane classification |
| RU2686279C1 (ru) | 2015-08-04 | 2019-04-24 | Ниссан Мотор Ко., Лтд. | Устройство обнаружения уступов и способ обнаружения уступов |
| JP6561670B2 (ja) | 2015-08-10 | 2019-08-21 | 日産自動車株式会社 | 段差検出装置及び段差検出方法 |
| US10528055B2 (en) * | 2016-11-03 | 2020-01-07 | Ford Global Technologies, Llc | Road sign recognition |
| CN108242168A (zh) * | 2016-12-24 | 2018-07-03 | 钱浙滨 | 一种监控车辆行驶的方法及装置 |
| CN107300013A (zh) * | 2017-07-11 | 2017-10-27 | 吉林工程技术师范学院 | 一种自动变速器道路坡度识别方法及系统 |
| US10620638B2 (en) * | 2017-08-18 | 2020-04-14 | Wipro Limited | Method, system, and device for guiding autonomous vehicles based on dynamic extraction of road region |
| CN111033593B (zh) * | 2017-08-30 | 2021-04-27 | 日产自动车株式会社 | 驾驶辅助车辆的位置误差校正方法及位置误差校正装置 |
| JP7044513B2 (ja) * | 2017-10-23 | 2022-03-30 | 株式会社Soken | 道路認識装置 |
| JP6704890B2 (ja) * | 2017-11-08 | 2020-06-03 | 本田技研工業株式会社 | 車両制御装置、車両制御方法、およびプログラム |
| JP6997005B2 (ja) * | 2018-02-26 | 2022-01-17 | 本田技研工業株式会社 | 車両制御装置、車両制御方法、及びプログラム |
| CN109017780B (zh) * | 2018-04-12 | 2020-05-05 | 深圳市布谷鸟科技有限公司 | 一种车辆智能驾驶控制方法 |
| JP7119724B2 (ja) * | 2018-08-01 | 2022-08-17 | トヨタ自動車株式会社 | 軸ずれ検出装置及び車両 |
| WO2020157533A1 (ja) * | 2019-01-31 | 2020-08-06 | 日産自動車株式会社 | 車両の走行制御方法及び走行制御装置 |
-
2019
- 2019-02-21 JP JP2019029840A patent/JP7257814B2/ja active Active
-
2020
- 2020-01-30 US US17/426,775 patent/US12479442B2/en active Active
- 2020-01-30 WO PCT/JP2020/003317 patent/WO2020170745A1/ja not_active Ceased
- 2020-01-30 CN CN202080006348.5A patent/CN113424240B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2008099915A1 (ja) * | 2007-02-16 | 2008-08-21 | Mitsubishi Electric Corporation | 道路地物計測装置、地物識別装置、道路地物計測方法、道路地物計測プログラム、計測装置、計測方法、計測プログラム、計測位置データ、計測端末装置、計測サーバ装置、作図装置、作図方法、作図プログラムおよび作図データ |
| US20110309967A1 (en) * | 2009-03-03 | 2011-12-22 | Tok Son Choe | Apparatus and the method for distinguishing ground and obstacles for autonomous mobile vehicle |
| JP2017015409A (ja) * | 2015-06-26 | 2017-01-19 | シャープ株式会社 | 路面検知装置、移動体、路面検知方法、および路面検知プログラム |
| WO2018105476A1 (ja) * | 2016-12-05 | 2018-06-14 | パナソニックIpマネジメント株式会社 | 撮像装置、及びそれに用いられる固体撮像素子 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115375956A (zh) * | 2021-05-20 | 2022-11-22 | 华为技术有限公司 | 一种车道线的检测方法及相关装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113424240B (zh) | 2023-11-17 |
| CN113424240A (zh) | 2021-09-21 |
| US12479442B2 (en) | 2025-11-25 |
| JP2020134367A (ja) | 2020-08-31 |
| JP7257814B2 (ja) | 2023-04-14 |
| US20220126836A1 (en) | 2022-04-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7257814B2 (ja) | 走行路認識装置 | |
| US11423677B2 (en) | Automatic detection and positioning of pole-like objects in 3D | |
| JP6875365B2 (ja) | 電子地図における交差点を認識するための方法及び装置 | |
| CN110866433B (zh) | 用于确定道路标线的方法和设备 | |
| CN109214248B (zh) | 用于识别无人驾驶车辆的激光点云数据的方法和装置 | |
| US8811748B2 (en) | Collaborative feature extraction system for three dimensional datasets | |
| Omar et al. | Detection of roads potholes using YOLOv4 | |
| WO2018068653A1 (zh) | 点云数据处理方法、装置及存储介质 | |
| KR102218881B1 (ko) | 차량 위치 결정 방법 및 시스템 | |
| CN114763999B (zh) | 地图生成装置、地图生成方法以及地图生成用计算机程序 | |
| US20230221136A1 (en) | Roadmap generation system and method of using | |
| EP2120009A1 (en) | Road/feature measuring device, feature identifying device, road/feature measuring method, road/feature measuring program, measuring device, measuring method, measuring program, measured position data, measuring terminal, measuring server device, drawing device, drawing method, drawing program, and drawing data | |
| US20250014355A1 (en) | Road obstacle detection method and apparatus, and device and storage medium | |
| US12056920B2 (en) | Roadmap generation system and method of using | |
| CN115139303A (zh) | 一种栅格井盖检测方法、装置、设备及存储介质 | |
| WO2022021982A1 (zh) | 可行驶区域判定的方法、智能驾驶系统和智能汽车 | |
| WO2019239477A1 (ja) | 地図生成装置および地図生成システム | |
| CN109544443A (zh) | 一种路线图生成方法及装置 | |
| EP3452785B1 (en) | Method and apparatus for disambiguating location probe points within an ambiguous probe region of a road network | |
| CN115597577B (zh) | 车辆在停车设施中的自定位 | |
| KR20210041304A (ko) | 도로 경계 추출 장치 및 방법 | |
| CN114092419A (zh) | 一种基于地表点位的点云空间位置质量自动检查方法 | |
| Chang et al. | The implementation of semi-automated road surface markings extraction schemes utilizing mobile laser scanned point clouds for HD maps production | |
| CN112435336A (zh) | 一种弯道类型识别方法、装置、电子设备及存储介质 | |
| CN121582454A (zh) | 一种在役高速公路全寿命周期模型参数化建模方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 20759441 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 20759441 Country of ref document: EP Kind code of ref document: A1 |
|
| WWG | Wipo information: grant in national office |
Ref document number: 17426775 Country of ref document: US |