WO2017010209A1 - 周辺環境認識装置、及びコンピュータプログラム製品 - Google Patents

周辺環境認識装置、及びコンピュータプログラム製品 Download PDF

Info

Publication number
WO2017010209A1
WO2017010209A1 PCT/JP2016/067630 JP2016067630W WO2017010209A1 WO 2017010209 A1 WO2017010209 A1 WO 2017010209A1 JP 2016067630 W JP2016067630 W JP 2016067630W WO 2017010209 A1 WO2017010209 A1 WO 2017010209A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
travel
vehicle
environmental element
surrounding environment
Prior art date
Application number
PCT/JP2016/067630
Other languages
English (en)
French (fr)
Inventor
勇樹 堀田
茂規 早瀬
工藤 真
Original Assignee
日立オートモティブシステムズ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日立オートモティブシステムズ株式会社 filed Critical 日立オートモティブシステムズ株式会社
Priority to US15/737,849 priority Critical patent/US20190001986A1/en
Priority to CN201680034899.6A priority patent/CN107683234B/zh
Priority to EP16824189.1A priority patent/EP3323689A4/en
Publication of WO2017010209A1 publication Critical patent/WO2017010209A1/ja

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/04Traffic conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/095Predicting travel path or likelihood of collision
    • B60W30/0953Predicting travel path or likelihood of collision the prediction being responsive to vehicle dynamic parameters
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/095Predicting travel path or likelihood of collision
    • B60W30/0956Predicting travel path or likelihood of collision the prediction being responsive to traffic or environmental parameters
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • G05D1/0219Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory ensuring the processing of the whole working surface
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems

Definitions

  • the present invention relates to a surrounding environment recognition device and a computer program product.
  • An object is to provide an environment recognition device.
  • the present application discloses a plurality of means for solving the above-described problem.
  • a travel route information acquisition unit that acquires travel route information indicating a travel route of a vehicle to be mounted, and the periphery of the vehicle
  • the surrounding environment element information acquisition unit for acquiring the surrounding environment element information including the positional relationship information on the space indicating the positional relationship with the vehicle in relation to the environmental element of the vehicle, based on the travel route information and the positional relationship information on the space
  • the environment element travel relationship calculation unit for calculating the relationship between the environmental element and the vehicle travel, and the environment element travel relationship calculation unit provides information on the environmental element based on the relationship between the vehicle travel calculated by the environment element travel relationship calculation unit.
  • the necessity of recognition information is determined with high accuracy so as not to provide unnecessary information, so that it is possible to reduce the calculation processing load and memory consumption on the control side.
  • FIG. 2 is an example of a functional block diagram of a surrounding environment recognition system 1.
  • FIG. It is an example of surrounding environment element information. It is an example of the data structure regarding the obstacle information of the surrounding environment element information data group 121. It is an example of the data structure regarding the road information of the surrounding environment element information data group 121. It is an example of the data structure regarding the environmental element travel relationship data group.
  • 6 is an example of a flowchart of a surrounding environment recognition process 500.
  • 5 is an example of a flowchart of a travel related area determination process 600. It is an example of the scene for demonstrating a travel related area. It is an example of a travel recommendation lane. It is an example of a travel related area. It is an example of the flowchart of the environmental element travel relationship calculation process 700.
  • FIG. 10 is an example of a flowchart of a surrounding environment information provision process 800. It is an example of a format of a surrounding environment information provision message. It is an example of the scene for demonstrating the road information contained in surrounding environment information. It is a figure which shows a mode that a program is provided to onboard equipment.
  • FIG. 1 is a functional block diagram showing an example of the configuration of the surrounding environment recognition system 1 according to the first embodiment of the present invention.
  • the surrounding environment recognition system 1 is a system that is mounted on a vehicle 2 and recognizes the state of an obstacle such as a traveling road or a surrounding vehicle around the vehicle 2.
  • the surrounding environment recognition device 10 is, for example, an ECU (Electronic Control Unit) mounted on the vehicle 2, and includes a processing unit 100, a storage unit 120, and a communication unit 130.
  • ECU Electronic Control Unit
  • the surrounding environment recognition apparatus 10 includes a processing unit 100, a storage unit 120, and a communication unit 130.
  • the processing unit 100 includes, for example, a memory such as a CPU (Central Processing Unit) and a RAM (Random Access Memory), and executes a predetermined operation program stored in the storage unit 120. Thus, processing for realizing the function of the surrounding environment recognition apparatus 10 is performed.
  • a memory such as a CPU (Central Processing Unit) and a RAM (Random Access Memory)
  • CPU Central Processing Unit
  • RAM Random Access Memory
  • the storage unit 120 includes a storage device such as an HDD (Hard Disk Drive), a flash memory, and a ROM (Read Only Memory), for example, and a program executed by the processing unit 100 and data necessary for realizing the system Stores groups.
  • a storage device such as an HDD (Hard Disk Drive), a flash memory, and a ROM (Read Only Memory), for example, and a program executed by the processing unit 100 and data necessary for realizing the system Stores groups.
  • a related information acquisition unit 101 that acquires information related to various types of processing from an external device or the like;
  • a peripheral environment element integration processing unit 102 that integrates various peripheral environment element information acquired from an external device into a consistent form without duplication,
  • a travel-related area determining unit 103 that determines an area related to future travel of the vehicle 2;
  • An environmental element travel relationship calculation unit 104 that calculates the relationship of each environmental element to the travel of the vehicle 2 based on the acquired surrounding environment element information around the vehicle 2 and the determined information related to the travel of the vehicle 2;
  • An environmental element travel relevance calculating unit 105 that calculates the relevance of each environmental element to the travel of the vehicle 2;
  • the surrounding environment element information data group 121 is a collection of data related to the surrounding environment recognized by the vehicle 2, for example, from digital road map data relating to roads around the vehicle 2, from the outside world sensor group 40 and the wireless communication unit 20. The acquired recognition data around the vehicle 2 and data generated by integrating them are included.
  • the peripheral environment element information data group 121 includes a plurality of “environment elements”.
  • the environmental element means an information element that affects the traveling of the vehicle 2, such as obstacles such as surrounding vehicles, pedestrians, and falling objects, road shapes such as lane centerlines and lane boundaries, speed restrictions, and the like. Traffic rules such as traffic and traffic lights are included. Although these information elements have various properties, they all have a common point that they give meaning to a position or region in the space around the vehicle 2. Therefore, in this specification, these information elements are treated as “environment elements” in a common framework.
  • the own vehicle information data group 122 is a collection of data related to the vehicle 2. For example, in addition to information related to the position and state of the vehicle 2 acquired from the vehicle position determination device 30 and the vehicle sensor group 50, information related to travel route information, control plan information, and the like is included.
  • the travel route information is, for example, information acquired from the route generation device 60, and is a list of road sections that the vehicle 2 is scheduled to travel from now on.
  • the control plan information is information on how to control the vehicle 2 determined by the driving support device 70 from now on, and includes, for example, information related to a traveling track and a speed plan.
  • the travel related area data group 123 is a collection of data related to an area (travel related area) related to future travel of the vehicle 2.
  • the travel-related area may be, for example, the travel route information or the control plan information itself of the own vehicle information data group 122, or may be an extended definition of the area based on them.
  • the environmental element travel relationship data group 124 is a collection of data representing the relationship between each environmental element and the travel related area.
  • the communication unit 130 includes, for example, a network card conforming to a communication standard such as Ethernet (registered trademark) or CAN (Controller Area Network), and data based on other devices mounted on the vehicle 2 and various protocols. Send and receive.
  • a network card conforming to a communication standard such as Ethernet (registered trademark) or CAN (Controller Area Network)
  • data based on other devices mounted on the vehicle 2 and various protocols. Send and receive.
  • the connection form between the communication unit 130 and other devices mounted on the vehicle 2 is not limited to a wired connection such as Ethernet, but is not limited to Bluetooth (registered trademark) or a wireless LAN (Local Area Network). It may be a short-range wireless connection.
  • the wireless communication unit 20 includes, for example, a network card that conforms to a long-range wireless communication standard such as LTE (Long Term Evolution) or a short-range wireless communication standard such as a wireless LAN or DSRC (Dedicated Short Range Communications), For example, a center (not shown) that supports traveling of one or more vehicles (not shown), a roadside machine (not shown) installed on one or more roads, mounted on one or more other vehicles.
  • the wireless communication unit 20 is configured to be able to perform data communication with at least one of communication terminals (not shown) held by one or a plurality of persons.
  • the own vehicle position determination device 30 is a device that measures the geographical position of the vehicle 2 and provides the information, and corresponds to, for example, a global navigation satellite system (GNSS) reception device.
  • the own vehicle position determination device 30 may be configured to simply provide a positioning result based on the radio wave received from the GNSS satellite, or the external sensor group 40 such as the moving speed and the traveling azimuth angle of the vehicle 2 Information that can be acquired from the vehicle sensor group 50 may be used to perform position interpolation and error correction.
  • GNSS global navigation satellite system
  • the external sensor group 40 is a sensor group that can recognize obstacles (other vehicles, bicycles, pedestrians, fallen objects, etc.) and characteristic objects (road signs, white lines, landmarks, etc.) around the vehicle 2. Yes, for example, a camera device, radar, laser radar, sonar, etc.
  • the external sensor group 40 outputs information on obstacles and features around the detected vehicle 2 (for example, relative distance and relative angle from the vehicle 2) to the in-vehicle network, and the surrounding environment recognition device 10 is in-vehicle. It is configured so that output results can be obtained over a network.
  • the external sensor group 40 is configured to detect an obstacle or a feature.
  • the external sensor group 40 outputs data without processing, and the surrounding environment recognition device 10. For example, the detection process may be performed by another device.
  • the vehicle sensor group 50 is a device group that detects the state of various components of the vehicle 2 (for example, travel speed, steering angle, accelerator operation amount, brake operation amount, etc.), for example, on an in-vehicle network such as CAN. In addition, the detected state quantity is periodically output.
  • a device connected to the in-vehicle network including the peripheral environment recognition device 10 is configured to be able to acquire state quantities of various components.
  • the route generation device 60 is a device that generates a travel route on the road of the vehicle 2, and corresponds to, for example, a navigation device.
  • the route generation device 60 includes, for example, digital road map data for an entire predetermined area or around the vehicle 2, and based on the position information of the vehicle 2 determined by the own vehicle position determination device 30, the map position of the vehicle 2 (running) The road is identified. Further, based on the specified map position of the vehicle 2 and the digital road map data, an appropriate route for reaching the destination designated by the user is calculated and travel route information is generated, through the in-vehicle HMI device 80 and the like. The travel route information is notified to the user, and the travel route information is also provided to the surrounding environment recognition device 10.
  • the driving support device 70 is an ECU for realizing, for example, an advanced driving support system (ADAS: Advanced Driver Assistance Systems) of the vehicle 2, and recognizes the surrounding environment for the purpose of improving fuel efficiency, safety, and convenience. Based on the surrounding environment recognition information output from the device 10, for example, an instruction is given to the actuator group 90 to automatically control acceleration / deceleration and steering of the vehicle 2, and information is provided to the driver via the in-vehicle HMI device 80. And output warnings.
  • ADAS Advanced Driver Assistance Systems
  • the in-vehicle HMI device 80 is, for example, a display device or the like mounted on the vehicle 2, and includes peripheral environment recognition information output from the peripheral environment recognition device 10 and information related to driving support output from the driving support device 70. It is configured to notify the driver through voice or a screen.
  • the actuator group 90 is a device group that controls control elements such as steering, brake, and accelerator that determine the movement of the vehicle 2, and is output from the driver's operation information such as the steering wheel, brake pedal, and accelerator pedal, and the driving support device 70. The movement of the vehicle 2 is controlled based on the target control value.
  • FIG. 2 is an explanatory diagram of an example of information stored in the surrounding environment element information data group 121 of the present embodiment.
  • the surrounding environment element information data group 121 is expressed by integrating digital road map data related to roads around the vehicle 2, recognition data around the vehicle 2 acquired from the external sensor group 40 and the wireless communication unit 20, and the like. Is. There are no particular restrictions on the granularity of the expression, and it may be a format in which the environmental elements are expressed in macros in units of roads as in the lower left part 4000 in FIG. A form in which the shape and the positional relationship between the obstacles are expressed in detail in space coordinates may be used.
  • the environmental elements included in the surrounding environmental element information data group 121 include obstacles, road shapes, traffic rules, and the like.
  • Obstacles include, for example, vehicles (5000 to 5007), pedestrians (5010 to 5012), bicycles (not shown), fallen objects (not shown), buildings (not shown), and the like. These are data mainly dynamically recognized by the external sensor group 40 and the wireless communication unit 20.
  • the road shape is a representation of the space shape of various road surface attributes on or near the road (such as a sidewalk).
  • Each shape information is represented by, for example, a point sequence or a line.
  • the ID of the lane center line is also handled as the lane ID. For example, a lane corresponding to the lane center line indicated by 6201 in FIG.
  • a traffic rule is information that restricts the travel of a vehicle.
  • lane attribute accessible direction, exclusive for bus, accessible time zone, etc.
  • lane boundary attribute Lane change availability, overtaking availability, etc.
  • the surrounding environment element information data group 121 is mainly composed of two pieces of obstacle information and road information. Information regarding traffic rules is expressed in a form incorporated in road information as described above. First, the data structure of the obstacle information will be described with reference to FIG.
  • the type 202 represents the type of the environmental element related to the data entry, and includes, for example, a car (four wheels), a car (two wheels), a bicycle, a pedestrian, a fallen object, and the like.
  • the azimuth 204 and the speed 205 indicate the traveling direction and speed of the environmental element related to the data entry, respectively.
  • the road information is classified into area information representing road section information, lane information, and other environmental element information.
  • the road section information corresponds to, for example, map data of a conventional navigation device, and expresses the shape of each road, the connection relation of road sections, information about intersections connecting a plurality of road sections, and the like.
  • ID 211 and type 212 represent the identifier and type of the environmental element, like ID 201 and type 201 of the obstacle information.
  • types there are road lanes and intersection lanes, road lanes represent lanes of road sections, and intersection lanes represent travel lanes recommended within the intersection as virtual lanes.
  • the lane boundary line 214 is, for example, a point sequence representation of the shape of the boundary line of the lane, and has a list structure similar to the center line 213. Note that the lane boundary line 214 includes a plurality of position information lists because the lane boundary line 214 may be expressed as a plurality of lines as a shape in addition to being present on the left and right sides of the lane.
  • connection information 215 indicates the connection relationship of the lane with respect to other lanes, and is represented by, for example, a list of connection point type 215-1, connection point road position 215-2, and connection destination ID 215-3.
  • connection point type 215-1 represents the type of connection point.
  • start point and end point of the lane (respectively “start point” and “end point"), a connection point that branches from the lane or joins the lane ( “Branch”, “Merge”) etc. are included respectively.
  • connection point road position 215-2 is information indicating the position near the road along the road road, similar to the road position information 206 of the obstacle information.
  • the connection destination ID 215-3 is an identifier indicating which lane the connection point is connected to.
  • the second connection information of the lane 6202 in FIG. 4 indicates that the lane 6203 is branched from the lane 6202.
  • the lane attribute 216 indicates a speed limit and an attribute (passable direction, exclusive use for buses, passable time zone, etc.) in the lane.
  • a list of lane attribute information range 216-1 and lane attribute information 216-2 It is represented by
  • the boundary attribute 217 indicates an attribute related to the boundary line of the lane, and is represented by, for example, a list of boundary line direction 217-1, boundary attribute information range 217-2, and boundary attribute information 217-3.
  • the boundary line direction 217-1 is an identifier indicating whether the boundary line information entry is related to the left side or the right side.
  • the boundary attribute information 217-3 includes, for example, the IDs of adjacent lanes that are in contact with each other through the boundary line, whether or not the vehicle is allowed to protrude beyond the lane, change lanes, or pass (line type information such as a solid line or a broken line). But is also possible).
  • the ID 221 and the type 222 represent the identifier and the type of the environment element, like the IDs 201 and 211 and the types 202 and 212 of the obstacle information and the lane information.
  • the region shape 223 is, for example, a point sequence representation of the shape of the region, and has a list structure in which position information of each shape point is stored.
  • the stop line 6301 is represented by the coordinates of two points as a line segment and the coordinates of five points as a quadrilateral (closed section) having a width on a pedestrian crossing.
  • the on-road position information 224, the on-road traveling direction 225, and the lane ID 226 are the same as 206 to 208 in the obstacle information.
  • the additional information 227 is information accompanying the area information. For example, since the information of the signal 6303 is linked to the stop line 6301, information such as the current (observed) color of the signal 6303 and future switching timing is stored.
  • each data entry of lane information and area information is managed in association with a data entry of related road section information.
  • the lane 6202 and the stop line 6301 belong to the road section 4001, they are associated with the data entry of road section information corresponding to the road section 4001. Therefore, it is configured such that related lane information and area information can be easily referred to from road unit information.
  • the lane information and the area information are basically configured based on information of the digital road map data, but may be configured based on information recognized by the external sensor group 40 or the like.
  • information expressed in a coordinate system in space and information expressed in a coordinate system along a road are respectively represented as “spatial information” and “road It will be called “Nari Information”.
  • the position information 203 and the bearing 204 are “spatial information”
  • the speed 205 to the lane ID 208 are “road information”
  • the lane information of FIG. 4 includes the center line 213 and the lane boundary line 214.
  • the connection information 215 to the boundary attribute 217 are “road information”
  • the area information in FIG. 4 is the “space information”
  • the on-road position information 224 to the additional information 227 are “road information”.
  • the spatial information is expressed in two dimensions (or three dimensions)
  • a lot of information is required at a place that changes two-dimensionally, such as a curve.
  • the road information is expressed in one dimension along the road, the accuracy of the information can be expressed with a small amount of information without depending on the road shape although the accuracy of the information is lowered.
  • ID 301 is an identifier of an environment element related to the data entry, and corresponds to IDs 201, 211, and 221 of the surrounding environment element information data group 121 shown in FIGS.
  • the related area information 303 represents a point, a section, or an area on the travel route of the vehicle 2 in which the environmental element is related to the future travel of the vehicle 2.
  • the road distance 304 represents a distance along the road from the vehicle 2 to the point, section, or area indicated by the related area information 303.
  • the range that overlaps the travel route of the vehicle 2 has a width, but it may be expressed as a range of distance along the road, and the closest point when viewed from the vehicle 2 is the reference point. It may be expressed as a straight road.
  • the estimated arrival time 305 represents a time estimated to reach the point, section, or area indicated by the related area information 303.
  • the surrounding environment recognition device 10 of the surrounding environment recognition system 1 in the present embodiment is based on the surrounding environment element information acquired from various external devices 20 to 60 and the like, and information related to the own vehicle, and the driving support device 70 and the in-vehicle HMI device 80.
  • the surrounding environment element information necessary for the above is extracted and the surrounding environment recognition process to be output is executed.
  • FIG. 6 shows a surrounding environment recognition processing flow 500 executed in the surrounding environment recognition system 1 of the present embodiment.
  • the various types of information acquired in S502 are vehicle information such as position information and sensor information acquired from the vehicle position determination device 30 and the vehicle sensor group 50 of the vehicle 2, which are necessary for the subsequent processing, and a wireless communication unit. 20, recognition data obtained from the external sensor group 40 and the like, digital road map data related to roads around the vehicle 2 obtained from the route generation device 60 and the like, and the surrounding environment element information data group 121 of the storage unit 120 and the own vehicle Obtained from the information data group 122.
  • the surrounding environment element information data group 121 and the own vehicle information data group 122 are acquired and updated by the related information acquisition unit 101 from the external device or the like at an appropriate timing via the vehicle network or the like. And
  • step S503 the surrounding environment element integration processing unit 102 integrates information on the same object with respect to various types of information acquired by different means (so-called sensor fusion), or associates recognition data with digital road map data ( So-called map matching). Thereby, as a general rule, there is consistent and integrated peripheral environment element information without duplication. It is assumed that the generated peripheral environment element information is stored in the peripheral environment element information data group 121.
  • the travel related area determination unit 103 executes a travel related area determination process 600 that determines a travel related area that is an area related to future travel of the vehicle 2. Details of the travel related area determination processing 600 will be described below with reference to FIGS.
  • the environmental element travel relationship calculation unit 104 calculates the relationship between each environmental element and the vehicle 2 based on the travel related area determined in S504.
  • the calculation process 700 (S505) is executed. Details of the environmental element travel relationship calculation processing 700 will be described below with reference to FIG.
  • the surrounding environment information providing unit 106 transmits a part of the information in the surrounding environment element information data group 121 to the driving support device 70, the in-vehicle HMI device 80, and the like.
  • the surrounding environment information provision process 800 (S506) output as information is executed. Thereafter, the process returns to S501 and the above-described processing is repeatedly executed. Details of the surrounding environment information provision processing 800 will be described below with reference to FIGS.
  • FIG. 7 shows an example of a flowchart of the travel related area determination processing 600.
  • the travel related area determination unit 103 acquires travel route information from the own vehicle information data group 122 in S601. If the travel route information exists (Yes in S602), the process proceeds to S603. On the other hand, if there is no travel route information (No in S602), the travelable area is determined based on the surrounding environment element information generated in S503 (S611).
  • the travelable area means a geographical range in which the vehicle 2 may travel within a predetermined time or a predetermined distance range in the future.
  • the travelable area may be defined as the entire roadway area (area sandwiched by the roadway boundary line shape) within a predetermined distance range from the position of the vehicle 2 with respect to the traveling direction of the vehicle 2.
  • the definition may be focused on the lane area portion in the traveling direction instead of the entire road area, or the entire road area within a predetermined distance range regardless of the traveling direction.
  • the method for determining the travelable area may be changed according to the road environment and the control mode. For example, while driving on a highway, it is determined that the entire roadway area is within a predetermined distance range with respect to the traveling direction, while when traveling in a parking lot (or when the control mode is parked), it is necessary to overlook not only the traveling direction but also the whole. Therefore, it is possible to determine the entire road area within a predetermined distance range regardless of the traveling direction.
  • an area having a margin d1 ( ⁇ 0) at the boundary of the travelable area determined in S611 is determined as a travel related area (S612), and the travel related area is set in the travel related area data group 123. (S605), and the process ends.
  • the recommended travel lane is determined in S603.
  • the travel route information and the recommended travel lane will be described with reference to FIG. In FIG. 8, the vehicle 5000 is expressed as if it were the host vehicle.
  • the travel route information is expressed in units of roads, for example, as indicated by 6501 in the lower left diagram 4100 of FIG. 8.
  • the host vehicle 5000 after traveling on the road section 4001, the host vehicle 5000 makes a right turn at the next intersection and selects a route traveling on the road section 4002.
  • the road unit route is converted into a lane route.
  • this route in lane units is referred to as a recommended travel lane.
  • the traveling lane position of the own vehicle with reference to the surrounding environment element information data group 121 and the own vehicle information data group 122, the traveling lane position of the own vehicle, the lane connection information of the adjacent road section on the route, the attribute of the lane boundary line (lane change The restriction condition for reaching the next road section on the route is solved by using the lane attribute (travelability direction, bus exclusive use, travelable time zone, etc.) and the like.
  • the vehicle can move from the current vehicle position (lane 6202) to the lane 6203. Identify the lane range.
  • the connection information of the lane 6202 the branch point 6211 to the lane 6203 is 35m ahead (because the position information on the road of the vehicle 5000 is 4001: 150m and the position information of the branch point is 4001: 185m), and the branch point is a boundary attribute. Since it is impossible to change the lane to the lane 6203 at other points, the route for changing the lane to the lane 6203 at the branch point is specified as the lane unit route in the road section 4001.
  • a route to advance to a lane 6205 of 4002 is specified as a recommended travel lane of the vehicle 5000.
  • the recommended travel lane is not necessarily selected as one lane in the same road section, and a plurality of lanes may be selected.
  • a plurality of lanes may be selected.
  • the recommended travel lane includes a plurality of lanes as indicated by a thick line 6511 in the left diagram of FIG.
  • not only the restriction conditions based on the traffic rules of the road but also the restriction conditions as driving behavior such as limiting the number of unnecessary lane changes may be taken into consideration.
  • a recommended travel lane as indicated by a thick line 6512 in the right diagram of FIG. 9 is calculated.
  • the travel route in units of lanes it is possible to narrow the area related to the travel of the vehicle 2 as compared with the travel route in units of roads.
  • the information on the recommended driving lane is expressed by one-dimensional information as well as the road information.
  • each corresponding lane section in the recommended travel lane is represented by a pair of a lane ID and a distance range from the starting point of the corresponding road section, such as (6202: 150 m to 185 m).
  • the recommended travel lane in FIG. 8 is expressed as (6202: 150 m to 185 m), (6203: 185 m to 240 m), (6204: 0 m to 20 m), (6205: 0 m to Xm),.
  • a travel-related area is defined as a travel recommended lane having a margin d2 ( ⁇ 0).
  • the portion corresponding to the lane center line of the recommended travel lane is the travel related region.
  • the travel-related area is a range including adjacent lanes.
  • the road-related route information is refined into the lane-by-lane route information called the recommended travel lane, and the travel-related area is defined on the space.
  • An area may be defined.
  • the travel-related area may be defined based on the control plan information acquired from the driving support device 70.
  • the driving support device 70 determines the track and speed at which the vehicle 2 is controlled. These pieces of information are called control plan information.
  • This control plan information corresponds to a travel route at a short distance, and the processing steps (S601 to S604) for the travel route as described above can be similarly applied. Note that the control plan information does not necessarily need to be confirmed, and can be applied to a group of plan candidates (a set of a plurality of trajectory plans and speed plans) before confirmation.
  • FIG. 11 shows an example of a flowchart of the environmental element travel relationship calculation processing 700.
  • the environment element travel relationship calculation unit 104 acquires a list of surrounding environment element information generated in S503 from the surrounding environment element information data group 121 (S701), and acquires the travel related area information determined in S504. (S702).
  • the environmental element travel relationship calculation unit 104 confirms whether or not the subsequent processing has been executed for all the surrounding environment element information included in the acquired list of surrounding environment element information (S703). If the subsequent processing has been executed for all the surrounding environment element information (Yes in S703), this processing ends. On the other hand, when that is not right (it is No at S703), one surrounding environment element information which is not selected by this processing flow from the list of surrounding environment element information is selected (S704), and the subsequent processes are performed.
  • the environmental element travel relationship calculation unit 104 calculates the related area of the environmental element corresponding to the selected surrounding environmental element information (S705).
  • the related area of the environmental element is a position range where the environmental element is assumed to exist now or in the future.
  • the related area of the environmental element is the current position (observation position) of the environmental element, movement information (speed, traveling direction, acceleration, etc.), environmental element type (vehicle, pedestrian, etc.), road environment (lane shape, obstacle, etc.) ) Is determined using one or more pieces of information. For example, from the movement information of the environmental element and the road environment, the movement trajectory of the environmental element within a predetermined time in the future may be estimated, and the movement trajectory itself may be used as a related area, or the movement trajectory has a margin.
  • the movement trajectory of the environmental element is time series data related to the estimated value of the future position of the environmental element, and may be expressed as a continuous value as a function of position coordinates and time, or at discrete points in time (time). It may be expressed as a list of position coordinate values.
  • an area within a predetermined distance from the current position of the environmental element may be used as the related area. This is effective when it is difficult to estimate an accurate moving trajectory with a randomness in the moving direction like a pedestrian.
  • a merged region generated by each moving trajectory may be used as the related region.
  • the related area may be defined for each road accordingly.
  • the environmental element travel relationship calculation unit 104 compares the positional relationship between the relevant area of the environmental element and the travel related area of the vehicle 2, and calculates an overlapping area between the two (S706). If an overlap area exists (Yes in S707), the process proceeds to S708. On the other hand, when there is no overlapping area (No in S707), the traveling relevance level of the environmental element is set to “0” (S711), and the process returns to S703.
  • the overlapping area is determined based on whether or not there is an overlap in the road section specified in each area.
  • the travel related area corresponds to the route 6501 and the related area of the vehicle 5005 corresponds to 6502
  • the related area 6503 of the vehicle 5008 and the related area 6504 of the vehicle 5004 do not intersect with the travel related area 6501, and therefore it is determined that there is no overlapping area.
  • the travel related area and the related area are defined by the spatial coordinates, it is determined by whether each area has an overlap.
  • the travel related area corresponds to the recommended travel lane 6601
  • the related area of the vehicle 5005 corresponds to the assumed track 6602
  • the two intersect at a point 5505, so it is determined that there is an overlap area.
  • the vehicle 5007 is also on the travel-related area, it is similarly determined that there is an overlapping area.
  • other vehicles and pedestrians 5010 and 5011 are determined to have no overlapping area because the related area (assumed trajectory) does not overlap with the travel related area.
  • the environmental element travel relationship calculation unit 104 calculates the road distance or range from the vehicle 2 with respect to the overlapping area calculated in S706.
  • the distance along the road is not a linear distance in space but a length of a road along the travel route from the position of the vehicle 2 with respect to the target reference point.
  • the range is expressed by a start point (30 m) and an end point (40 m) at the road distance, for example, (30 m, 40 m).
  • a start point closest to the vehicle 2 along the road may be used as a representative point, and may be expressed as a road distance with respect to the representative point.
  • the road information is configured based on the road information in the surrounding environment element information data group 121 shown in FIGS. 3 and 4.
  • the road information in the surrounding environment element information data group 121 expresses the position of the environmental element by the road distance based on the starting point of the road, but the road position information of the vehicle 2 (the road ID and the road ID) By taking the difference from the road distance), it is possible to convert the vehicle 2 of the vehicle 2 into information with the origin as the origin. Further, by accumulating the lengths of roads that pass through according to the travel route of the vehicle 2, it is possible to calculate the road distance along the route.
  • the environmental element travel relevance calculation unit 105 calculates the travel relevance with the environmental element based on the travel relation with the environmental element calculated so far (S709).
  • the degree of traveling relevance corresponds to the numerical value of the degree of traveling relationship with the environmental element, and the more the overlapping area is closer to the route or the shorter the time to reach the overlapping area, the more Set to a higher degree.
  • the road distance calculated in S708 is dr
  • it is calculated in the form of a ⁇ (1 / dr) (a is a constant) and in inverse proportion to the road distance.
  • the time to reach the overlapping region is t
  • the calculation is performed in a form inversely proportional to the arrival time to the overlapping region by an equation b ⁇ (1 / t) (b is a constant).
  • the formula is not limited to the formula described above as long as the formula is such that the degree of relevance increases as the road distance to the overlapping region or the arrival time is shorter.
  • a formula that takes both into account such as a ⁇ (1 / dr) + b ⁇ (1 / t), may be used.
  • Various parameters and calculation methods may be changed according to the type of environmental element.
  • FIG. 12 shows an example of a flowchart of the surrounding environment information provision process 800.
  • the data entries included in the environmental element travel relationship data group 124 are acquired as a list (S801), and the list is sorted in descending order of travel relevance (S802). Subsequently, environmental element travel relationship data entries are selected one by one in descending order of travel relevance from the list (S803), and the following processing is performed.
  • an environmental element in which the travel related area of the vehicle 2 and the related area do not overlap is set to 0 as the travel related degree. Therefore, when T1> 0, those environmental elements are excluded from the provision targets. For example, when the travel route of the vehicle 2 is defined as a travel-related region, an environmental element that does not overlap the travel route of the vehicle 2 and the moving track is excluded from the provision target. Further, since the travel relevance decreases as the road distance or arrival time to the overlapping area becomes longer, environmental elements farther than a predetermined distance are also excluded from the provision targets.
  • the surrounding environment element information having the corresponding ID 201 is acquired from the surrounding environment element information data group 121 using the ID 301 as a search key (S805). Further, if the degree of travel relevance is equal to or greater than a predetermined threshold T2 (> T1) (Yes in S806), the surrounding environment element information is referred to and a message including both spatial information and road information is generated (S807) 2 is transmitted to an appropriate destination as the surrounding environment information (S808).
  • T1 or more and less than T2 are transmitted without the spatial information.
  • the space information of the environmental element is necessary for the vehicle control when calculating the traveling track related to the steering. In a road environment that changes from moment to moment, the running trajectory is effective for about 5 to 10 seconds at most. Therefore, it is not necessary to provide spatial information on environmental elements beyond that range.
  • the road information of environmental elements is used for judgment of driving behavior and acceleration / deceleration control.
  • the optimal driving behavior plan (estimating the situation about 20-30 seconds ahead) is obtained by macroscopically understanding obstacles, traffic conditions, and traffic rules along the road lane structure. For example, it is necessary to calculate a lane change) and a speed plan. Therefore, it is necessary to provide information relatively far away. For this reason, in the case where the degree of travel relevance is lower than a predetermined value (that is, farther than a predetermined distance range or a reachable range within a predetermined time), while satisfying the requirements on the control side by transmitting the space information omitted, The amount of data to be provided can be reduced.
  • FIG. 14 shows an example of road information corresponding to the spatial information shown in FIG.
  • the road information is generated along the route, and the positional relationship with each environmental element is expressed by the lane ID related to the road distance with the vehicle position of the vehicle 2 as the origin.
  • the surrounding environment element information that is the target of the road information basically corresponds to the road information in the surrounding environment element information data group 121 of FIGS. 3 and 4, and is a fault linked to the route.
  • Lane information such as object information, lane boundary attributes (lane change possibility, etc.), lane connection points (lane branching point 6211, lane intersection 5505, etc.), stop line 6301, pedestrian crossing 6302, signal information 6403 (in signal 6303 information) Corresponding), traffic rules such as speed limit information 6404 (corresponding to road sign 6304), recommended travel lane (6601) determined in the travel-related area determining process of FIG.
  • the shape of a curve or slope may be expressed as a curvature value or a gradient value, and may be included as a combination with a road distance or as a function of a road distance. good.
  • spatial information is not expressed, so detailed environment recognition around the host vehicle cannot be performed, but by comparing the lane ID and the road distance, it is necessary for driving action planning and acceleration / deceleration control, with the lane as the axis. It is possible to easily (at high speed) refer to the environmental information on the front, rear, left and right of the vehicle.
  • FIG. 13 is an explanatory diagram of an example of a format 900 of the surrounding environment information provision message transmitted by the surrounding environment recognition device 10 of the present embodiment. However, illustration of header information related to the communication protocol is omitted.
  • the surrounding environment information provision message includes information on each environmental element.
  • the environmental element information included in the message includes, for example, an environmental element ID 901, an environmental element type 902, an information presence / absence flag 903, spatial information 904, road information 905, other information 906, and the like.
  • the environment element ID 901 and the environment element type 902 correspond to the obstacle information ID 201 and type 202 or the road information ID 211 and type 212 in FIG.
  • the information presence / absence flag 903 is information indicating whether spatial information 904, road information 905, or other information 906 is included in the message.
  • the spatial information 904 is a data group related to the spatial information of the environment element. For example, position coordinates (absolute coordinates such as latitude and longitude, or relative coordinates from the vehicle 2), direction, future The position coordinates of the traveling trajectory, etc. are included.
  • the road information 905 is a group of data related to the road information of the environmental element. For example, the road distance or distance range from the vehicle 2 regarding the position related to the environmental element, (road road) speed, lane ID, etc. Is included.
  • the other information 906 is a data group related to information whose position is not related in the environmental element. For example, if the environmental element is a vehicle, the vehicle type, the vehicle width, the internal state of the vehicle (such as the blinker operating state), and the like are applicable.
  • information on each environment element is transmitted as an individual message.
  • a plurality of environment elements may be aggregated and transmitted in one message.
  • the information related to the recommended travel lane may be transmitted in S808 in the same manner as the environmental element information.
  • the travel recommended lane is managed in a format expressed by a pair of a lane ID and a distance range from the starting point of the corresponding road section.
  • the road distance expressed as the transmitted road information is not the road distance in road sections, but the road distance in road sections along the route. It is assumed that it has been converted to the sum of.
  • the information on the recommended travel lane in the example of FIG. 8 is accumulated along the route (6202: 0 m to 35 m), (6203: 35 m to 90 m), (6204: 90 m to 110 m), (6205: 110 m to Xm), it can be seen that there is a need to move to the lane 6203 because the recommended travel range of the lane 6202 is ended up to 35 m. Further, by referring to the connection information of the lane information transmitted as the road information, it is understood that the lane 6202 and the lane 6203 are the same road section, and it is necessary to change the lane at the 35 m point.
  • the driving support device 70 can easily grasp the constraint conditions of the driving action plan, such as whether the lane change is necessary or the lane changeable section, and is calculated only from the lane information.
  • the processing load can be reduced as compared with the case where it is done.
  • N1 is set when the environment of the transmission destination of the surrounding environment information is limited in the number of received messages due to restrictions on memory and processing performance.
  • the number of message transmissions is calculated for all environment elements. However, the number of message transmissions and the maximum number of transmissions may be defined separately for each type of environmental element. .
  • the surrounding environment recognition device 10 of the vehicle 2 determines the relationship between the travel plan information such as the travel route information or the control plan information of the vehicle 2 and each environmental element, and the relationship Depending on the nature, the environmental elements to be provided are determined.
  • the vehicle Since the necessity of providing each environmental element is determined in consideration of the future behavior of the vehicle 2, the vehicle is more accurately compared with the case where the determination is based on the state at that time such as the relative distance. It is possible to extract information necessary for traveling control. In other words, information on environmental elements that are unnecessary for the control can be excluded with high accuracy, and the processing load and memory consumption related to the control can be reduced.
  • the relationship between the environmental elements is quantified as the degree of travel relevance according to the relative distance (road) from the vehicle 2 to the relevant point with the environment element or the arrival time, and the travel related
  • the transmission priority of information is determined according to the degree. Therefore, even when there is a restriction on the number of environmental elements that can receive information on the control side, it is possible to preferentially provide information on environmental elements closer to the vehicle 2 that have a large influence on the traveling of the vehicle 2. For example, since there are many other vehicles on the route of the vehicle 2 when there is a traffic jam, if all other vehicle information is transmitted, the calculation processing load and memory consumption on the control side increase.
  • the travel relevance is higher than the second threshold ( ⁇ first threshold). If it is too low, the spatial information is omitted from the provided information.
  • the spatial information of the environmental element is necessary for the control side in the vicinity (about 5 to 10 seconds) in which the traveling track needs to be calculated, and is not necessary for the distance farther than that. For this reason, by providing the data farther than the predetermined distance range or the reachable range within the predetermined time without providing the spatial information, it is possible to reduce the amount of data to be provided while satisfying the requirements on the control side.
  • the travel route is uniquely determined, but a plurality of travel routes may exist. For example, when a person is driving (when not in the automatic driving mode), even if the recommended route is set by the navigation device, the person does not always drive according to the route.
  • a plurality of possible route candidates that are generated and given the probability of selecting each route may be used as the travel route information.
  • the selection probability is calculated based on, for example, the travel history of the person, statistical information on the traffic flow of the road, and the like. Then, by taking the probability into consideration as the weight of the traveling relevance, the mechanism as described above can be applied.
  • each process of the surrounding environment recognition apparatus 10 is realized by executing a predetermined operation program using a processor and a RAM, but is realized by original hardware as necessary. It is also possible.
  • the surrounding environment recognition device, the wireless communication unit, the own vehicle position determination device, the external sensor group, the vehicle sensor group, the route generation device, the driving support device, the in-vehicle HMI device, and the actuator group are separated from each other. However, it may be realized by combining any two or more as necessary.
  • information such as an operation program, a table, and a file for realizing each process includes a nonvolatile semiconductor memory, a hard disk drive, an SSD (Solid State). Drive) or a computer-readable non-transitory data storage medium such as an IC card, SD card, or DVD.
  • FIG. 15 is a diagram illustrating a state in which information such as the above-described operation program, table, and file is provided to the vehicle-mounted device through a recording medium and a data signal.
  • the vehicle-mounted device 400 is mounted on a vehicle and has a processor that can execute various programs.
  • the in-vehicle device 400 receives information such as an operation program for realizing the above-described processes via the CD-ROM 404.
  • the vehicle-mounted device 400 can be operated as the peripheral environment recognition device 10 having the configuration shown in FIG. Further, the vehicle-mounted device 400 has a connection function with the communication line 401.
  • a computer 402 is a server computer that provides information such as the operation program described above, and stores the information in a recording medium such as a hard disk 403.
  • the communication line 401 is a communication line such as the Internet or personal computer communication, or a dedicated communication line.
  • the computer 402 reads out information such as an operation program using the hard disk 403 and transmits it to the vehicle-mounted device 400 via the communication line 401. That is, the program is transmitted as a data signal via a carrier wave and via the communication line 401.
  • the program for operating the vehicle-mounted device 400 as the surrounding environment recognition device 10 can be supplied as a computer-readable computer program product in various forms such as a recording medium and a data signal (carrier wave).
  • control lines and information lines considered necessary for describing the embodiment are shown, and all control lines and information lines included in an actual product to which the present invention is applied are not necessarily shown. Not necessarily. Actually, it may be considered that almost all the components are connected to each other.
  • 1 surrounding environment recognition system
  • 2 vehicle
  • 10 surrounding environment recognition device
  • 20 wireless communication unit
  • 30 own vehicle position determination device
  • 40 external sensor group
  • 50 vehicle sensor group
  • 60 route generation device
  • 70 Driving support device
  • 80 In-vehicle HMI device
  • 90 Actuator group
  • 105 environmental element travel relevance calculation unit
  • 106 surrounding environment information providing unit
  • 120 storage unit
  • 121 surrounding environment element information data group
  • 122 own vehicle information data group
  • 123 travel Related area data group
  • 124 environmental element travel relationship data group
  • 130 communication unit

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Navigation (AREA)

Abstract

車両に搭載される周辺環境認識装置は、車両の走行経路を示す走行経路情報を取得する走行経路情報取得部と、車両の周辺の環境要素に関する、車両との空間上の位置関係を示す空間上の位置関係情報を含む周辺環境要素情報を取得する周辺環境要素情報取得部と、走行経路情報と空間上の位置関係情報に基づき、環境要素における車両の走行との関係性を算出する環境要素走行関係性算出部と、環境要素走行関係性算出部が算出した車両の走行との関係性に基づき、環境要素に関する情報を提供する周辺環境情報提供部と、を備える。

Description

周辺環境認識装置、及びコンピュータプログラム製品
 本発明は、周辺環境認識装置、及びコンピュータプログラム製品に関する。
 レーダやカメラ等の車載外界センサや車車間通信により取得したデータや道路地図データを用いて車両周辺の状況を認識し、車両の走行を自動制御するシステムが知られている。このようなシステムでは、自動運転のように自動制御内容の高度化のため、車載外界センサの装着数の増加、道路地図データの高精細化が進展し、さらには車車間通信対応車両の普及に伴い、今後車両周辺に関する認識情報のデータ量が増加していくと想定される。そのため、自動制御に係る演算処理負荷や当該演算処理に必要な認識情報を格納するメモリ消費量が増加していき、自動制御の動作環境を圧迫するという課題がある。
 それに対し、特許文献1では、車車間通信で受信した他車両の情報に関する処理において、相対距離や相対進行方向に応じて当該他車両の監視重要度を設定し、監視重要度が低いものは軽い処理のみ実行する技術が開示されている。
日本国特開2012-27553号公報
 しかし、上記特許文献1では、相対距離が近く同一方向に走行中の他車両情報を重要と判定するため、交差点や分岐・合流時に誤って重要度を設定してしまうという問題がある。例えば、交差点において当該車両が右折する場合、対向車線から交差点に入ってくる他車両や、右折先の横断歩道上の歩行者や自転車、右折先の道路上の他車両、等の情報が重要となるが、それらは自車両と同一方向に走行しているわけではないため、特許文献1の方式では低い重要度に設定してしまい、重要な情報を提供できない可能性がある。また、例えば、交差点を右折する場合、左折方向や直進方向に進んでいる他車両は自車両の走行とは無関係にもかかわらず、相対距離が近いと高い優先度を設定してしまい、不要情報を排除できない可能性がある。
 以上を踏まえ、本発明では、認識情報の要否を高精度に判定して不要情報を提供しないようにすることにより、当該制御に係る演算処理負荷やメモリ消費量を軽減することが可能な周辺環境認識装置を提供することを目的とする。
 本願は上記課題を解決するための複数の手段を開示しているが、その一例を示すと、搭載される車両の走行経路を示す走行経路情報を取得する走行経路情報取得部と、車両の周辺の環境要素に関する、車両との空間上の位置関係を示す空間上の位置関係情報を含む周辺環境要素情報を取得する周辺環境要素情報取得部と、走行経路情報と空間上の位置関係情報に基づき、環境要素における車両の走行との関係性を算出する環境要素走行関係性算出部と、環境要素走行関係性算出部が算出した車両の走行との関係性に基づき、環境要素に関する情報を提供する周辺環境情報提供部と、を備えた周辺環境認識装置を提供することにより上記課題を解決することができる。
 本発明によれば、認識情報の要否を高精度に判定して不要情報を提供しないようにするため、制御側の演算処理負荷やメモリ消費量を軽減することができる。
周辺環境認識システム1の機能ブロック図の一例である。 周辺環境要素情報の一例である。 周辺環境要素情報データ群121の障害物情報に関するデータ構造の一例である。 周辺環境要素情報データ群121の道路情報に関するデータ構造の一例である。 環境要素走行関係性データ群124に関するデータ構造の一例である。 周辺環境認識処理500のフローチャートの一例である。 走行関連領域決定処理600のフローチャートの一例である。 走行関連領域を説明するためのシーンの一例である。 走行推奨車線の一例である。 走行関連領域の一例である。 環境要素走行関係性算出処理700のフローチャートの一例である。 周辺環境情報提供処理800のフローチャートの一例である。 周辺環境情報提供メッセージのフォーマットの一例である。 周辺環境情報に含まれる道なり情報を説明するためのシーンの一例である。 プログラムを車載器に提供する様子を示す図である。
 以下、図面を参照して、本発明の実施形態について説明する。
 図1は、本発明の第1実施形態による周辺環境認識システム1の構成の一例を示す機能ブロック図である。
 図1に示すように、本実施形態に係る周辺環境認識システム1は、車両2に搭載され、車両2の周辺における走行道路や周辺車両等の障害物の状況を認識するためのシステムであり、周辺環境認識装置10、無線通信部20、自車位置決定装置30、外界センサ群40、車両センサ群50、経路生成装置60、運転支援装置70、車載用HMI装置80、アクチュエータ群90、等を含んで構成される。
 周辺環境認識装置10は、例えば、車両2に搭載されたECU(Electronic Control Unit)等であり、処理部100と、記憶部120と、通信部130と、を有する。なお、周辺環境認識装置10の形態に特に制限はなく、例えば、運転支援装置70や外界センサ群40の装置に統合されていてもよいし、車両2のユーザが車両ネットワークに接続したスマートフォン等の外部装置でもよい。
 処理部100は、例えば、CPU(Central Processing Unit:中央演算処理装置)及びRAM(Random Access Memory)などのメモリなどを含んで構成され、記憶部120に格納されている所定の動作プログラムを実行することで、周辺環境認識装置10の機能を実現する処理を行う。
 記憶部120は、例えば、HDD(Hard Disk Drive)、フラッシュメモリ、ROM(Read Only Memory)などの記憶装置を含んで構成され、処理部100が実行するプログラム、及び本システムの実現に必要なデータ群などを格納している。
 本実施形態では、
 各種処理に関連する情報を外部装置等から取得する関連情報取得部101、
 外部装置などから取得した各種周辺環境要素情報を重複がなく一貫性のある形に統合する周辺環境要素統合処理部102、
 車両2の将来の走行に関連する領域を決定する走行関連領域決定部103、
 取得した車両2周辺の周辺環境要素情報と決定した車両2の走行関連領域に関する情報に基づき、各環境要素の車両2の走行に対する関係性を算出する環境要素走行関係性算出部104、
 各環境要素の車両2の走行に対する関連度を算出する環境要素走行関連度算出部105、
 周辺環境要素に関する情報を周辺環境認識装置10内の機能や他装置に提供する周辺環境情報提供部106、等を処理部100に実現させるためのプログラム、及び、
 周辺環境要素情報データ群121、自車情報データ群122、走行関連領域データ群123、環境要素走行関係性データ群124、等が記憶部120に格納される。
 以後では説明を簡単にするため、処理部100が記憶部120に記憶されているプログラムに従い演算することで発現される関連情報取得部101等の動作を、処理部100ではなく関連情報取得部101等を主語にして説明を行う。
 周辺環境要素情報データ群121は、車両2が認識している周辺環境に関するデータの集合体であり、例えば、車両2周辺の道路に関するデジタル道路地図データや、外界センサ群40や無線通信部20から取得された車両2周辺の認識データ、それらを統合して生成されたデータが含まれる。周辺環境要素情報データ群121は、複数の「環境要素」で構成される。
 環境要素とは、車両2の走行に影響を与える情報要素を意味し、例えば、周辺車両や歩行者、落下物等の障害物、車線中心線や車線境界線等の道路形状、速度規制や一方通行、信号等の交通ルール、等が含まれる。これらの情報要素は、性質としては様々であるが、いずれも車両2周辺の空間上の位置あるいは領域に意味を与えるものであるという共通点を持つ。そのため、本明細書では、これらの情報要素を「環境要素」として共通の枠組みで扱うものとする。
 自車情報データ群122は、車両2に関するデータの集合体である。例えば、自車位置決定装置30や車両センサ群50から取得される車両2の位置や状態に関する情報の他に、走行経路情報、制御計画情報、等に関する情報が含まれる。走行経路情報とは、例えば、経路生成装置60から取得される情報であり、車両2がこれから走行する予定の道路区間のリストである。制御計画情報とは、運転支援装置70が決定する車両2をこれからどのように制御するかという情報であり、例えば、走行軌道や速度計画に関する情報が含まれる。
 走行関連領域データ群123は、車両2の今後の走行に関連する領域(走行関連領域)に関するデータの集合体である。走行関連領域は、例えば、自車情報データ群122の走行経路情報あるいは制御計画情報そのものであっても良いし、それらをベースに領域を拡張定義したものであっても良い。
 環境要素走行関係性データ群124は、各環境要素と走行関連領域の関係性を表すデータの集合体である。
 通信部130は、例えば、Ethernet(登録商標)又はCAN(Controller Area Network)等の通信規格に準拠したネットワークカード等を含んで構成され、車両2に搭載された他の装置と各種プロトコルに基づきデータの送受信を行う。なお、通信部130と車両2に搭載された他の装置との間の接続形態は、Ethernetのような有線接続に限定されることはなく、Bluetooth(登録商標)や無線LAN(Local Area Network)などの近距離無線接続であってもよい。
 無線通信部20は、例えば、LTE(Long Term Evolution)等の長距離無線通信規格、あるいは無線LAN、DSRC(Dedicated Short Range Communications)等の近距離無線通信規格に準拠したネットワークカード等を有し、例えば、1台又は複数台の車両の走行を支援するセンタ(図示省略)、1台又は複数台の道路上に設置される路側機(図示省略)、1台又は複数台の他車両に搭載された無線通信部20、1台又は複数台の人等が保有する通信端末(図示省略)、等の少なくともいずれかとデータ通信が可能となるように構成される。
 自車位置決定装置30は、車両2の地理的な位置を測位し、その情報を提供する装置であり、例えば、全地球航法衛星システム(GNSS)受信装置が相当する。自車位置決定装置30は、単純にGNSS衛星から受信する電波に基づいた測位結果を提供するように構成されていても良いし、車両2の移動速度及び進行方位角等、外界センサ群40や車両センサ群50から取得可能な情報を活用して位置補間及び誤差補正を行うように構成されていても良い。
 外界センサ群40は、車両2周辺の一定範囲の障害物(他車両、自転車、歩行者、落下物等)や特徴物(道路標識、白線、ランドマーク等)を認識することができるセンサ群であり、例えば、カメラ装置、レーダ、レーザーレーダ、ソナー等が該当する。外界センサ群40は、検出した車両2周辺の障害物や特徴物の情報(例えば、車両2からの相対距離と相対角度等)を車載ネットワーク上に出力しており、周辺環境認識装置10は車載ネットワークを通じて出力結果を取得できるように構成されている。なお、本実施形態では、外界センサ群40で障害物や特徴物を検出する処理を実施する構成になっているが、外界センサ群40が未処理のままデータを出力し、周辺環境認識装置10等の他装置で検出処理を行っても良い。
 車両センサ群50は、車両2の各種部品の状態(例えば走行速度、操舵角、アクセルの操作量、ブレーキの操作量等)を検出している装置群であり、例えば、CAN等の車載ネットワーク上に、検出した状態量を定期的に出力している。周辺環境認識装置10を含む車載ネットワークに接続された装置は、各種部品の状態量を取得することが可能となるように構成されている。
 経路生成装置60は、車両2の道路上の走行経路を生成する装置であり、例えば、ナビゲーション装置が該当する。経路生成装置60は、例えば、所定の地域全体あるいは車両2周辺のデジタル道路地図データを備え、自車位置決定装置30で決定された車両2の位置情報に基づき、車両2の地図位置(走行中の道路等)を特定するように構成されている。また、特定した車両2の地図位置とデジタル道路地図データに基づき、ユーザから指定された目的地に到達するための適切な経路を算出して走行経路情報を生成し、車載用HMI装置80等を通じてユーザに走行経路情報を通知すると共に、周辺環境認識装置10にも走行経路情報を提供するように構成されている。
 運転支援装置70は、例えば、車両2の先進運転支援システム(ADAS:Advanced Driver Assistance Systems)を実現するためのECUであり、燃費性能や安全性、利便性を高めることを目的として、周辺環境認識装置10から出力される周辺環境認識情報に基づいて、例えば、アクチュエータ群90に指示を出して車両2の加減速や操舵を自動で制御したり、車載用HMI装置80を介してドライバに情報提供や警告を出力したりする。
 車載用HMI装置80は、例えば、車両2に搭載されたディスプレイ装置等であり、周辺環境認識装置10から出力される周辺環境認識情報や、運転支援装置70から出力される運転支援に関する情報を、音声や画面を通じてドライバに通知するように構成されている。
 アクチュエータ群90は、車両2の動きを決定する操舵、ブレーキ、アクセル等の制御要素を制御する装置群であり、運転者によるハンドル、ブレーキペダル、アクセルペダル等の操作情報や運転支援装置70から出力される目標制御値に基づいて、車両2の動きを制御するように構成されている。
 図2は、本実施形態の周辺環境要素情報データ群121に格納されている情報の一例の説明図である。
 周辺環境要素情報データ群121は、車両2周辺の道路に関するデジタル道路地図データや、外界センサ群40や無線通信部20から取得された車両2周辺の認識データ、等が統合され、表現されているものである。その表現の粒度について特に制約はなく、図2の左下部分4000のように、環境要素を道路単位でマクロに表現するような形式でも良いし、それに加えてさらに図2の右部分のように道路形状や障害物の位置関係を空間座標で詳細に表現するような形式でも良い。
 これらの粒度は、車両2に搭載される装置の機能レベルやアプリケーションの要件に応じて変わる。例えば、従来のナビゲーション装置の地図データのように、道路単位の粒度でしか道路形状を参照できない場合は、図2の左下部分4000の粒度で表現することになる。例えば、自動運転のように周辺環境認識に高い精度が求められる場合は、図2の右部分のような空間座標で詳細に表現することが必要となる。
 周辺環境要素情報データ群121に含まれる環境要素としては、障害物、道路形状、交通ルール、等が含まれる。
 障害物とは、例えば、車両(5000~5007)、歩行者(5010~5012)、自転車(非記載)、落下物(非記載)、建造物(非記載)等である。これらは、主に外界センサ群40や無線通信部20により動的に認識されたデータである。
 道路形状とは、道路上あるいはその近傍(歩道等)の各種路面属性の空間形状を表現したものであり、車線の車線中心線形状(6201~6205)や車線境界線形状(6101~6104)、車線分岐・合流点(6211)、道路区間内の路肩の形状(6011、6012)、車道部境界線形状(7001、7002)、停止線形状(6301)、横断歩道形状(6302)、等である。各形状情報は、例えば、点列あるいは線で表現される。なお、本明細書では、車線中心線のIDを、車線のIDとしても扱うものとする。例えば、図2の6201で示される車線中心線に該当する車線を、車線6201と表現する。
 交通ルールとは、車両の走行を制約する情報であり、例えば、信号(6303)、速度規制(6304)、車線の属性(通行可能方向、バス専用、通行可能時間帯等)、車線境界属性(車線変更可否、追い越し可否等)、等が含まれる。これらは、基本的に前記道路形状に紐づけられる形で管理される。例えば、信号6303は、停止線6301の通過可否を規定するものなので、停止線6301の属性情報として管理される。同様にして、速度規制、車線属性、車線境界属性は、該当する車線に紐づけられて管理される。
 周辺環境要素情報データ群121のデータ構造の一例を、図3及び図4を用いて説明する。
 周辺環境要素情報データ群121は、大きく障害物情報と道路情報の2つで構成される。交通ルールに関する情報は、上述のように道路情報に組込まれる形で表現されている。まず、図3を用いて、障害物情報のデータ構造について説明する。
 ID201は、当該データエントリに関連する環境要素の識別子である。
 種別202は、当該データエントリに関連する環境要素の種別を表し、例えば、自動車(四輪)、自動車(二輪)、自転車、歩行者、落下物、等が含まれる。
 位置情報203は、当該データエントリに関連する環境要素の空間位置情報を示す。図3の例のように緯度、経度のような絶対座標で表現しても良いし、車両2を中心とした相対座標で表現しても良い。
 方位204、速度205は、それぞれ当該データエントリに関連する環境要素の進行方位、速度を示す。
 道路上位置情報206、道路上進行方向207、車線ID208は、当該データエントリに関連する環境要素の道路上における位置及び移動に関する情報を示す。道路上位置情報206は、道路の道なりに沿ってどの位置付近に存在するかを示す情報であり、道路区間の識別子である道路区間IDと当該道路区間の起点からの道なり距離のセットで示す。例えば、図3のIDが5000の障害物は、道路区間4001の起点から150mの位置付近に存在することを意味している。
 道路上進行方向207とは、道路上位置情報206の示す道路区間の基準方向に対して、どちらの方向に進んでいるのかを示す情報である。図2の左下部分4000で表されるように、本明細書における道路区間(4001~4004)は、両方向の車線を含むため、道路区間IDだけでは進行方向を特定することができない。そのため、道路区間情報の基準方向に対する相対方向を併せて含めることにより、当該環境要素の道路上の進行方向を特定している。車線ID208は、当該環境要素が存在する車線の識別子である。当該環境要素の車線位置が特定されている場合に設定される。なお、それぞれ必ずしも値を特定できるものではなく、特定できない場合は無効値「N/A」が格納される。
 次に、図4を用いて、道路情報のデータ構造について説明する。道路情報は、道路区間情報と、車線情報と、それ以外の環境要素の情報を表現する領域情報に分類される。道路区間情報とは、例えば、従来のナビゲーション装置の地図データに相当し、道路単位での形状や道路区間の接続関係、複数の道路区間を繋ぐ交差点に関する情報、等を表現したものである。
 まず、車線情報について説明する。ID211、種別212は、障害物情報のID201および種別201と同様、当該環境要素の識別子及び種別を表す。種別としては、道路車線と交差点車線があり、道路車線は、道路区間の車線、交差点車線は交差点内で推奨される走行軌道を仮想的な車線として表すものである。
 中心線213は、例えば、当該車線の中心線の形状を点列表現したものであり、それぞれの形状点の位置情報を格納したリスト構造をしている。
 車線境界線214は、例えば、当該車線の境界線の形状を点列表現したものであり、中心線213と同様のリスト構造をしている。なお、車線境界線214は、車線の左右に存在することに加え、形状として複数の線に分かれて表現される場合があるため、複数の位置情報リストが含まれる。
 接続情報215は、当該車線における他の車線に対する接続関係を示すものであり、例えば、接続点種別215-1、接続点道なり位置215-2、接続先ID215-3のリストで表される。
 接続点種別215-1は、接続点の種別を表し、例えば、当該車線の始端、終端(それぞれ「始端」、「終端」)、当該車線から分岐するあるいは当該車線に対して合流する接続点(それぞれ「分岐」、「合流」)等が含まれる。
 接続点道なり位置215-2は、障害物情報の道路上位置情報206と同様、道路の道なりに沿ってどの位置付近に存在するかを示す情報である。
 接続先ID215-3は、当該接続点がどの車線に接続しているかを示す識別子である。例えば、図4における車線6202の2番目の接続情報は、車線6203が車線6202から分岐していることを示している。
 車線属性216は、当該車線における制限速度や属性(通行可能方向、バス専用、通行可能時間帯等)を示すものであり、例えば、車線属性情報範囲216-1、車線属性情報216-2のリストで表される。
 車線属性情報範囲216-1は、道路の道なりに沿った範囲で表現される。例えば、(4001:0m、4001:240m)とは、道路区間4001の0~240mの範囲を意味している。そして、その範囲における当該車線の制限速度や属性情報を216-2で表現する。
 境界属性217は、当該車線の境界線に関する属性を示すものであり、例えば、境界線方向217-1、境界属性情報範囲217-2、境界属性情報217-3のリストで表される。
 境界線方向217-1とは、当該境界線情報エントリが左側に関するものか、右側に関するものかの識別子である。
 境界属性情報範囲217-2は、道路の道なりに沿った範囲で表現され、その範囲における当該境界線属性に関する情報が境界属性情報217-3で表現される。
 境界属性情報217-3は、例えば、当該境界線を介して接している隣接車線のID、当該車線を越えてはみ出しや車線変更、追越しをして良いかどうか(実線、破線等の線種情報でも可)、等が含まれる。
 次に、領域情報について説明する。ID221、種別222は、障害物情報や車線情報のID201、211および種別202、212と同様、当該環境要素の識別子及び種別を表す。
 領域形状223は、例えば、当該領域の形状を点列表現したものであり、それぞれの形状点の位置情報を格納したリスト構造をしている。例えば、停止線6301は、線分として2点の座標、横断歩道では幅を持った四角形(閉区間)として5点の座標で表される。
 道路上位置情報224、道路上進行方向225、車線ID226については、障害物情報における206~208と同様である。
 付加情報227は、当該領域情報に付随する情報である。例えば、停止線6301には、信号6303の情報が紐づけられているため、信号6303の現在(観測時)の色や今後の切替えタイミング等の情報が格納される。
 なお、本明細書では記載していないが、車線情報と領域情報の各データエントリは、関連する道路区間情報のデータエントリと関連付けられて管理されているものとする。例えば、車線6202や停止線6301は道路区間4001に属しているため、道路区間4001に相当する道路区間情報のデータエントリに関連付けられている。そのため、道路単位の情報から関連する車線情報や領域情報を容易に参照可能なように構成されている。
 また、車線情報及び領域情報は、基本的にはデジタル道路地図データの情報に基づき構成されるが、さらに外界センサ群40等により認識された情報に基づいて構成されてもよい。
 以上に示した各周辺環境要素情報において、本実施形態では、空間上の座標系で表現される情報と、道なりに沿った座標系で表現される情報を、それぞれ「空間情報」と「道なり情報」と呼ぶことにする。例えば、図3の障害物情報では、位置情報203、方位204が「空間情報」、速度205~車線ID208が「道なり情報」、図4の車線情報では、中心線213、車線境界線214が「空間情報」、接続情報215~境界属性217が「道なり情報」、図4の領域情報では、領域形状223が「空間情報」、道路上位置情報224~付加情報227が「道なり情報」として扱われるものとする。
 なお、空間情報は、2次元(あるいは3次元)で表現するため、カーブ等のように2次元的に変化する箇所では、多くの情報を必要とする。それに対し、道なり情報は道なりに沿って1次元で表現するため、情報の正確性は下がるものの道路形状に依存せず少ない情報量で表現できるという特徴を持つ。
 環境要素走行関係性データ群124のデータ構造の一例を、図5を用いて説明する。
 ID301は、当該データエントリに関連する環境要素の識別子であり、図3及び図4で示される周辺環境要素情報データ群121のID201、211、221に対応するものである。
 走行関連度302は、当該環境要素が車両2の将来の走行に関連する度合を数値化したものである。数値が高いものほど関連性が高いことを意味している。
 関連領域情報303とは、当該環境要素が車両2の将来の走行に関連する車両2の走行経路上の地点あるいは区間あるいは領域を表す。
 道なり距離304とは、車両2から関連領域情報303で示される地点あるいは区間あるいは領域までの道なりに沿った距離を表す。なお、区間あるいは領域の場合は車両2の走行経路と重なる範囲には幅があるが、それを道なり距離の範囲として表現しても良いし、車両2から見て最も近い点を基準点とした道なり距離として表現しても良い。
 想定到達時間305とは、関連領域情報303で示された地点あるいは区間あるいは領域に到達すると想定される時間を表す。
 続いて、周辺環境認識システム1の動作について説明する。本実施形態における周辺環境認識システム1の周辺環境認識装置10は、各種外部装置20~60等から取得した周辺環境要素情報や自車に関する情報に基づいて、運転支援装置70や車載用HMI装置80等に必要となる周辺環境要素情報を抽出し、出力する周辺環境認識処理を実行する。
 本実施形態の周辺環境認識システム1において実行される周辺環境認識処理フロー500を図6に示す。
 関連情報取得部101は、まず、所定時間待機後(ステップ(S)501)、周辺環境認識処理に必要な各種情報を取得する(S502)。ここでの所定時間待機とは、周辺環境要素情報の生成のトリガーがかかるまでの時間を待機することである。同トリガーは、一定時間毎に実施されるようにタイマーでかけても良いし、周辺環境要素情報の更新の必要性を検知してオンデマンドにかけても良い。
 S502で取得する各種情報とは、以降の処理に必要となる、車両2の自車位置決定装置30及び車両センサ群50から取得される位置情報やセンサ情報等の自車情報や、無線通信部20及び外界センサ群40等から得られる認識データ、経路生成装置60等から取得される車両2周辺の道路に関するデジタル道路地図データ等であり、記憶部120の周辺環境要素情報データ群121及び自車情報データ群122から取得される。なお、周辺環境要素情報データ群121や自車情報データ群122は、関連情報取得部101によって車両ネットワーク等を介して適切なタイミングで外部装置等から最新のデータが取得され、更新されているものとする。
 次にS503で、周辺環境要素統合処理部102は、異なる手段により取得された各種情報に関して、同一対象物に関する情報を統合したり(所謂、センサフュージョン)、認識データとデジタル道路地図データの関連付け(所謂、マップマッチング)をしたりする。これにより、原則として、重複がなく一貫性のある統合された周辺環境要素情報が生成される。生成された周辺環境要素情報は、周辺環境要素情報データ群121に格納されるものとする。
 続いて、S504で、走行関連領域決定部103は、車両2の今後の走行に関連する領域である走行関連領域を決定する走行関連領域決定処理600を実行する。走行関連領域決定処理600の詳細は図7~10を用いて以下で説明する。
 走行関連領域決定処理(S504)が完了すると、環境要素走行関係性算出部104は、S504で決定した走行関連領域に基づいて、各環境要素と車両2の関係性を算出する環境要素走行関係性算出処理700(S505)を実行する。環境要素走行関係性算出処理700詳細は図11を用いて以下で説明する。
 環境要素走行関係性算出処理(S505)が完了すると、周辺環境情報提供部106は、運転支援装置70や車載用HMI装置80等に、周辺環境要素情報データ群121の一部の情報を周辺環境情報として出力する周辺環境情報提供処理800(S506)を実行する。そして、その後はS501に戻り、上述した処理を繰り返し実行する。周辺環境情報提供処理800の詳細は図12~14を用いて以下で説明する。
 《走行関連領域決定処理600(S504)》
 図7に走行関連領域決定処理600のフローチャートの一例を示す。
 まず、走行関連領域決定部103は、S601で自車情報データ群122から走行経路情報を取得する。もしも走行経路情報が存在していた場合は(S602でYes)S603に進む。他方、走行経路情報が存在しなかった場合は(S602でNo)、S503で生成した周辺環境要素情報に基づいて走行可能領域を決定する(S611)。走行可能領域とは、今後所定時間内あるいは所定距離範囲内において、車両2が走行する可能性がある地理的な範囲を意味する。
 例えば、走行可能領域とは、車両2の位置から車両2の進行方向に対して所定距離範囲内にある車道領域全体(車道部境界線形状で挟まれている領域)と定義しても良いし、車道領域全体でなく進行方向の車線領域部分に絞って定義しても良いし、進行方向に関係なく所定距離範囲内の車道領域全体としても良い。この走行可能領域の決定方法は、道路環境や制御モードに応じて変更しても良い。例えば、高速道路走行中は進行方向に対して所定距離範囲内にある車道領域全体と決定する一方で、駐車場走行中(あるいは制御モードが駐車)は、進行方向だけでなく全体を見渡す必要があるため、進行方向に関係なく所定距離範囲内の車道領域全体と決定することも可能である。
 そして次に、S611で決定した走行可能領域の境界にマージンd1(≧0)を持たせた領域を走行関連領域として決定し(S612)、走行関連領域データ群123に該走行関連領域を設定して(S605)、処理を終了する。
 走行経路情報が存在した場合は(S602でYes)、S603で走行推奨車線を決定する。図8を用いて走行経路情報と走行推奨車線について説明する。なお、図8では、車両5000を自車両と見立てて表現している。
 走行経路情報は、図8の左下図4100の6501で示すように、例えば、道路単位で表現される。図8の例では、自車両5000は、道路区間4001の走行後、次の交差点を右折し、道路区間4002を走行する経路を選択している。S603では、この道路単位の経路を車線単位の経路に変換する。本明細書では、この車線単位の経路を走行推奨車線と呼ぶものとする。具体的には、周辺環境要素情報データ群121や自車情報データ群122を参照し、自車両の走行車線位置、経路上の隣接する道路区間の車線接続情報、車線境界線の属性(車線変更可否等)、車線属性(進行可能方向、バス専用、走行可能時間帯等)等を用いて、経路上の次の道路区間に到達するための制約条件を解く。
 例えば、図8において、車両5000は道路区間4001(図2参照)を走行中であり、道路区間4002を走行する経路が選択されているため、図4の車線情報の接続情報215を参照して道路区間4002における進行方向の車線である車線6205を終端とする交差点車線を検索する。これにより検索される交差点車線は、交差点車線6204と、車線6221から左折して車線6205に入るための交差点車線と、直進して車線6205に入るための交差点車線である。さらにこれらの交差点車線の始端の接続情報を参照して、道路区間4001の車線と接続しているものを選定すると、交差点車線6204だけが、道路区間4001に属する車線6203と接続されていることがわかる。一方、車両5000の走行車線は6202であるため、道路区間4002に向かうためには、道路区間4001内で車線6202から車線6203に移動する必要がある。
 そこで、道路区間4001に属する車線群(6201、6202,6203)に関する、図4の車線情報の接続情報215や境界属性217を参照し、現在の車両位置(車線6202)から車線6203に移動可能な車線範囲を特定する。車線6202の接続情報として車線6203への分岐点6211が35m先(車両5000の道路上位置情報が4001:150mで、分岐点の位置情報が4001:185mのため)があり、境界属性として分岐点以外での車線6203への車線変更は不可であるため、当該分岐点で車線6203に車線変更する経路が、道路区間4001における車線単位の経路として特定される。
 以上により、図8の右側の図の太線6601で表されるように、車線6202の区間150m~185mを走行後、分岐点6211で車線6203に移動し、交差点車線6204を経由して、道路区間4002の車線6205に進む、という経路が車両5000の走行推奨車線として特定される。
 なお、走行推奨車線は必ずしも同一道路区間で一つの車線が選択されるわけではなく、複数の車線が選択される場合もある。例えば、図9のような5車線の道路において、いずれの車線も経路上の次の道路区間に接続されている場合、車線境界線6041において車線変更不可であること以外は特に制約はないので、走行推奨車線は図9左図の太線6511で示されるように複数の車線を含むようになる。また、道路の交通ルールによる制約条件だけでなく、不要な車線変更の回数を限定する等、運転行動としての制約条件を考慮に入れても良い。
 例えば、不要な車線変更回数<1という制約条件が加わると、図9右図の太線6512で示されるような走行推奨車線が算出される。以上のように、車線単位で走行経路を特定することで、道路単位の走行経路と比較して、車両2の走行に関連する領域を絞ることが可能となる。
 走行推奨車線の情報は、道なり情報と同様に1次元情報で表現される。例えば、走行推奨車線における各該当車線区間を、(6202:150m~185m)のように、車線IDと該当道路区間の起点からの距離範囲のペアで表現する。例えば、図8の走行推奨車線は、(6202:150m~185m)、(6203:185m~240m)、(6204:0m~20m)、(6205:0m~Xm)、…と表現される。
 続いて、S603で決定した走行推奨車線に従い走行関連領域を決定後(S604)、走行関連領域データ群123に該走行関連領域を設定し(S605)、処理を終了する。具体的には、走行推奨車線にマージンd2(≧0)を持たせたものを走行関連領域とする。
 マージンd1、マージンd2が0の場合は、走行推奨車線の車線中心線に相当する部分が走行関連領域となる。マージンd1、マージンd2を図10の例に示すような値に設定した場合は、走行関連領域は隣接車線も含む範囲になる。人が運転するとき、たとえ特定の車線に沿って走行中であったとしても、隣接する車線あるいは隣接する路肩や歩道等の状況を鑑みて運転行動を決定している。そこで、走行推奨車線にマージンd1、マージンd2を持たせることにより、近接領域も走行関連領域として考慮されるようにしている。
 なお、本処理フローでは、道路単位の経路情報を走行推奨車線という車線単位の経路情報に詳細化した上で空間上に走行関連領域を定義したが、道路単位の経路情報のままマクロに走行関連領域を定義しても良い。
 また、本処理フローでは記載していないが、運転支援装置70から取得される制御計画情報に基づいて走行関連領域を定義してもよい。車両2が自動運転モードで動作している場合、運転支援装置70が車両2をどのような軌道、速度で車両を制御するかを決定している。これらの情報を制御計画情報と呼ぶ。この制御計画情報は、いわば近距離での走行経路に相当し、上述したような走行経路に対する処理ステップ(S601~S604)を同じように適用することが可能である。なお、制御計画情報は、必ずしも確定したものである必要はなく、確定前の計画候補群(複数の軌道計画、速度計画のセット)に対して適用することも可能である。
 《環境要素走行関係性算出処理700(S505)》
 図11に環境要素走行関係性算出処理700のフローチャートの一例を示す。
 まず、環境要素走行関係性算出部104は、周辺環境要素情報データ群121からS503で生成された周辺環境要素情報のリストを取得し(S701)、S504で決定された走行関連領域情報を取得する(S702)。
 続いて、環境要素走行関係性算出部104は、取得した周辺環境要素情報のリストに含まれる全ての周辺環境要素情報に対して、以降の処理を実行したかどうかを確認する(S703)。もしも、全ての周辺環境要素情報に対して以降の処理を実行済であれば(S703でYes)、本処理を終了する。一方で、そうでない場合は(S703でNo)、周辺環境要素情報のリストから本処理フローで選択されていない周辺環境要素情報を1つ選択し(S704)、以降の処理を実行する。
 環境要素走行関係性算出部104は、選択した周辺環境要素情報に対応する環境要素の関連領域を算出する(S705)。環境要素の関連領域とは、当該環境要素が現在あるいは将来的に存在すると想定される位置範囲のことである。環境要素の関連領域は、当該環境要素の現在位置(観測位置)、移動情報(速度、進行方向、加速度等)、環境要素種別(車両、歩行者等)、道路環境(車線形状、障害物等)のいずれか1つ以上の情報を用いて決定される。例えば、当該環境要素の移動情報と道路環境から、今後所定時間以内の当該環境要素の移動軌道を推定し、その移動軌道そのものを関連領域としても良いし、その移動軌道にマージンを持たせた領域を関連領域としても良い。なお、環境要素の移動軌道とは、当該環境要素の将来位置の推定値に関する時系列データであり、位置座標と時間の関数として連続値で表現しても良いし、離散的な時点(時刻)での位置座標値のリストとして表現しても良い。
 あるいは、例えば、当該環境要素の現在位置から所定距離範囲の領域を関連領域としても良い。これは、歩行者のように移動方向にランダム性を伴い、正確な移動軌道を推定するのが困難な場合に有効である。あるいは、例えば、交差点前の車両のように、複数の移動軌道の候補がある場合は、個々の移動軌道により生成される領域をマージしたものを関連領域としても良い。あるいは、例えば、S504で決定された走行関連領域が、道路単位でマクロに定義されている場合、それに合わせて関連領域も道路単位で定義しても良い。
 次に、環境要素走行関係性算出部104は、当該環境要素の関連領域と車両2の走行関連領域の位置関係を比較し、両者の重複領域を算出する(S706)。もしも、重複領域が存在する場合は(S707でYes)、S708に進む。一方、重複領域がない場合は(S707でNo)、当該環境要素の走行関連度を「0」に設定し(S711)、S703に戻る。
 重複領域の判断の例として、走行関連領域や当該環境要素の関連領域が道路単位で定義されている場合、各領域で指定された道路区間に重なりがあるかどうかで重複領域が判定される。図8の左下図4100において、走行関連領域が経路6501に相当し、車両5005の関連領域が6502に相当する場合、両者の線が交差しているため、重複領域ありと判定される。一方で、車両5008の関連領域6503や車両5004の関連領域6504は、走行関連領域6501と線が交差していないため、重複領域なしと判定される。
 また、重複領域の判断の例として、走行関連領域や関連領域が空間座標で定義されている場合、各領域に重なりがあるかどうかで判定される。図8の右図においては、走行関連領域は走行推奨車線6601に相当し、車両5005の関連領域が想定軌道6602に相当する場合、両者は点5505において交差するため、重複領域ありと判定される。
 車両5007も、走行関連領域上に載っているので、同様に重複領域ありと判定される。一方で、それ以外の車両や、歩行者5010、5011は、関連領域(想定軌道)が走行関連領域と重複しないので、重複領域なしと判定される。
 このように、走行関連領域や関連領域の定義の粒度に制限はないが、粒度が細かいほど重複領域の有無をより高精度に判定することが可能となる。
 次に、S708に進むと、環境要素走行関係性算出部104は、S706で算出した重複領域に対する、車両2からの道なり距離あるいはその範囲を算出する。道なり距離とは、空間上の直線距離ではなく、対象の基準点に対する車両2の位置からの走行経路に沿った道のりの長さである。もしも当該重複領域が道なりに沿って幅を持つ場合は、例えば、(30m、40m)のように道なり距離における開始点(30m)と終了点(40m)で、その範囲を表現する。なお、重複領域が幅を持つ場合でも、例えば、道なりに沿って最も車両2に近い点を代表点とし、それに対する道なり距離で表現しても良い。
 なお、これらの道なり情報は、図3及び図4に示した周辺環境要素情報データ群121の道なり情報に基づいて構成される。周辺環境要素情報データ群121の道なり情報は、道路の始点を基準とした道なり距離で環境要素の位置を表現されているが、車両2の道路位置情報(道路IDとその道路上での道なり距離)との差分を取ることにより、車両2の車両位置を原点とした情報に変換することが可能である。また、車両2の走行経路に従って、経由する道路分の長さを積算していくことにより、経路に沿った道なり距離を算出することができる。
 続いて、環境要素走行関連度算出部105は、これまで算出してきた当該環境要素との走行関係性に基づいて、当該環境要素との走行関連度を算出する(S709)。走行関連度とは、当該環境要素との走行関係性の度合を数値化したものに相当し、重複領域が経路上近いものであるほど、または重複領域に到達するまでの時間が短いほど、関連度が高くなるように設定する。
 例えば、S708で算出した道なり距離をdrとすると、a×(1/dr)(aは定数)という数式で、道なり距離に反比例する形で算出する。または、例えば、重複領域に到達するまでの時間をtとすると、b×(1/t)(bは定数)という数式で、重複領域までの到達時間に反比例する形で算出する。なお、いずれの場合も、重複領域までの道なり距離あるいは到達時間が短いほど関連度が高くなるような数式であれば、前述の式に限ることはない。
 また、a×(1/dr)+b×(1/t)のように、両方を考慮した数式にしても良い。また、環境要素の種別に応じて、各種パラメータや算出方式を変更しても良い。
 S709の処理が完了すると、算出済の道なり距離と走行関連度を環境要素走行関係性データ群124の当該環境要素のエントリにセットして、S703に戻る。その後、全ての周辺環境要素情報に関して処理が完了するまで同様の処理を実行し、本処理フローを終了する。
 《周辺環境情報提供処理800(S506)》
 図12に周辺環境情報提供処理800のフローチャートの一例を示す。
 まず、環境要素走行関係性データ群124に含まれるデータエントリをリストとして取得し(S801)、走行関連度の高い順にリストをソートする(S802)。続いて、同リストから走行関連度の高い順に環境要素走行関係性データエントリを1つずつ選択し(S803)、以下の処理を行う。
 まず、選択した環境要素走行関係性データエントリの走行関連度302が所定の閾値T1以上であった場合(S804でYes)、S805に進む。一方、所定の閾値T1を下回った場合(S804でNo)、本処理を終了する。これは、車両2の走行にあまり関連しない情報を提供対象から除外する効果を持つ。
 例えば、図11の環境要素走行関係性算出フロー700において、車両2の走行関連領域と関連領域が重複しない環境要素は走行関連度として0が設定されている。そのため、T1>0の場合は、それらの環境要素は提供対象から除外される。例えば、車両2の走行経路を走行関連領域として定義した場合は、車両2の走行経路と移動軌道が重ならない環境要素が提供対象から除外される。また、走行関連度は重複領域までの道なり距離あるいは到達時間が長いほど小さくなるため、所定以上遠方の環境要素も提供対象から除外される。
 当該情報の走行関連度が所定の閾値T1以上の場合、ID301を検索キーとして、周辺環境要素情報データ群121から対応するID201を有する周辺環境要素情報を取得する(S805)。さらに走行関連度が所定の閾値T2(>T1)以上だったら(S806でYes)、当該周辺環境要素情報を参照し、空間情報及び道なり情報の両方を含むメッセージを生成し(S807)、車両2の周辺環境情報として、適切な宛先に対して送信する(S808)。一方、走行関連度が所定の閾値T2未満(かつT1以上)の場合は(S806でNo)、空間情報を省いた道なり情報をベースとしたメッセージを生成し(S810)、車両2の周辺環境情報として、適切な宛先に対して送信する(S808)。
 これは、走行関連度が比較的低い(T1以上かつT2未満)環境要素に関しては、空間情報を省いて送信することを意味する。車両の制御において環境要素の空間情報が必要になるのは、操舵が関係する走行軌道の算出時である。時々刻々と変化する道路環境では、走行軌道が有効なのはせいぜい5~10秒程度である。そのため、その範囲を超えて環境要素の空間情報を提供する必要性は低い。
 一方、環境要素の道なり情報は、運転行動や加減速制御の判断に利用される。運転行動や加減速制御は、道路の車線構造に沿って前後左右の障害物や交通状況、交通ルールをマクロに把握し、約20~30秒先の状況を推定しながら最適な運転行動計画(例えば、どのタイミングで車線変更をするか)や速度計画を算出する必要がある。そのため、比較的遠方まで情報提供が必要となる。そのため、このように走行関連度が所定値よりも低い(所定の距離範囲あるいは所定時間内の到達範囲よりも遠い)ものは、空間情報を省いて送信することにより、制御側の要件を満たしつつ、提供するデータ量を削減することが可能となる。
 図14は、図8で表される空間情報に相当する道なり情報の一例を図示したものである。道なり情報は、経路に沿って生成され、各環境要素との位置関係を、車両2の車両位置を原点とした道なり距離と関連する車線IDで表現する。道なり情報の対象となる周辺環境要素情報としては、基本的には図3及び図4の周辺環境要素情報データ群121の道なり情報に相当するものであり、経路上に紐づけられた障害物情報、車線境界線属性(車線変更可否等)、車線接続点(車線分岐点6211、車線交差点5505等)等の車線情報、停止線6301、横断歩道6302、信号情報6403(信号6303の情報に該当)、制限速度情報6404(道路標識6304に該当)等の交通ルール、図7の走行関連領域決定処理で決定される走行推奨車線(6601)、等が該当する。
 なお、本実施形態では示していないが、カーブや坂道の形状を曲率値や勾配値として表現し、それを道なり距離との組合せ、あるいは道なり距離との関数として表現したものを含めても良い。このような表現形態では空間情報が表現されないため自車両周辺の詳細な環境認識はできないが、車線IDと道なり距離の比較によって、運転行動計画や加減速制御に必要となる、車線を軸にした自車両の前後左右の環境情報を容易に(高速に)参照することが可能である。
 図13は、本実施形態の周辺環境認識装置10が送信する周辺環境情報提供メッセージのフォーマット900の一例の説明図である。ただし、通信プロトコルに関するヘッダ情報等の図示は割愛した。
 周辺環境情報提供メッセージには、各環境要素の情報が含まれる。メッセージに含まれる環境要素の情報は、例えば、環境要素ID901、環境要素種別902、情報有無フラグ903、空間情報904、道なり情報905、その他情報906、等を含む。環境要素ID901、環境要素種別902は、図3の障害物情報のID201、種別202、あるいは、道路情報のID211、種別212に該当する。情報有無フラグ903とは、空間情報904、道なり情報905あるいはその他情報906がメッセージ内に含まれているかを示す情報である。
 例えば、空間情報904に該当するフラグが立っていない場合は、空間情報904部分は省略される。空間情報904は、当該環境要素の空間情報に関するデータ群であり、例えば、当該環境要素に関連する位置座標(緯度、経度のような絶対座標、あるいは、車両2からの相対座標)、方位、将来の走行軌道の位置座標、等が含まれる。道なり情報905は、当該環境要素の道なり情報に関するデータ群であり、例えば、当該環境要素に関連する位置に関する車両2からの道なり距離あるいは距離範囲、(道なり)速度、車線ID、等が含まれる。その他情報906は、当該環境要素において、位置が関係しない情報に関するデータ群である。例えば、当該環境要素が車両であれば、車種、車幅、車両の内部状態(ウィンカー動作状態等)等が該当する。
 なお、本実施形態では、各環境要素の情報を個別のメッセージで送信するようにしているが、複数の環境要素を1つのメッセージ内に集約して送信しても良い。
 また、走行推奨車線に関する情報も、環境要素の情報と同様にしてS808で送信してもよい。走行推奨車線は、上述のように、車線IDと該当道路区間の起点からの距離範囲のペアで表現される形式で管理されている。
 ただし、S808では、他の環境要素と同様に、送信される道なり情報として表現される道なり距離は、道路区間単位での道なり距離ではなく、経路に沿って道路区間単位の道なり距離を積算したものに変換されているものとする。この走行推奨車線に関する情報を提供することにより、運転支援装置70が運転行動計画を算出する際に、車線変更要否やどこの区間で車線変更可能なのかを容易に把握することができる。
 例えば、図8の例における走行推奨車線に関する情報は、経路に沿って積算されて(6202:0m~35m)、(6203:35m~90m)、(6204:90m~110m)、(6205:110m~Xm)と表現されるが、車線6202の走行推奨範囲が35mまでで終了しているため、車線6203に移動する必要性があることがわかる。また、道なり情報として送信されている車線情報の接続情報を参照することにより、車線6202と車線6203が同一の道路区間であり、35m地点で車線変更する必要があることがわかる。
 一方、車線6203から車線6204に移動する必要性があることも同様だが、車線情報の接続情報を参照することで、両者が道なりに沿って接続しているため車線変更の必要性がないことがわかる。なお、例えば、図9のように、走行推奨車線として複数車線を有する場合は、(6033:0m~X1m)、(6032:0m~X2m)、…のように、異なる車線で走行推奨範囲に重複区間が生じるが、この重複区間を参照することにより、車線変更可能区間を把握することが可能である。
 このように、走行推奨車線に関する情報を提供することにより、運転支援装置70が車線変更要否や車線変更可能区間等、運転行動計画の制約条件を容易に把握することができ、車線情報のみから算出した場合と比較し、処理負荷を軽減することが可能である。
 図12の処理フロー800に戻る。もしも、本処理内においてメッセージ送信数が所定数(N1)以上になったら(S809でYes)、本処理フローを終了する。メッセージ送信数が所定数(N1)未満だったら(S809でNo)、S803に戻り、同様の処理を実行する。
 N1は、周辺環境情報の送信先の環境が、メモリや処理性能等の制約により、メッセージ受信数に制限がある際に設定される。本処理では、走行関連度の高い順を対象に送信する仕組みになっているため、送信可能な情報量に制約はある環境でも、車両2の走行に影響を与える情報を優先的に提供することが可能である。なお、本実施形態では、すべての環境要素に対してメッセージ送信数を算出しているが、環境要素の各種別に対して、別々にメッセージ送信数の算出や最大送信数の定義をしても良い。
 以上のように、本実施形態によれば、車両2の周辺環境認識装置10は、車両2の走行経路情報あるいは制御計画情報等の走行計画情報と各環境要素の関係性を決定し、その関係性に応じて、情報提供対象とする環境要素を決定している。
 車両2の将来の行動を考慮した上で各環境要素の提供要否を判断しているため、相対距離等のようにその時点の状態に基づいて判断する場合と比較し、より高精度に車両の走行制御に必要な情報を抽出することができる。すなわち、制御に不要な環境要素の情報を高精度に排除可能となり、当該制御に係る演算処理負荷やメモリ消費量を軽減することが可能となる。
 また、本実施形態によれば、環境要素の関係性を、車両2から当該環境要素との関連地点までの相対距離(道なり)あるいは到達時間に応じて走行関連度として定量化し、その走行関連度に応じて情報の送信優先度を決定している。そのため、制御側で情報を受信可能な環境要素数に制約がある場合でも、車両2の走行に与える影響が大きい、車両2により近い環境要素の情報を優先的に提供することが可能となる。例えば、渋滞時には車両2の経路上に多くの他車両が存在するため、全ての他車両情報を送信すると、制御側の演算処理負荷やメモリ消費量が増加する。
 一方、渋滞時は近傍の他車両に進路を阻まれるため、経路上の遠方の他車両による車両2の走行に対する影響は少ない。このように、経路に沿ってより近い環境要素の情報から優先的に送信し、所定数を超えたら送信しないようにする仕組みにより、渋滞のように混雑している環境でも、必要以上の環境要素に関する情報の提供を抑制することが可能である。
 また、本実施形態によれば、走行関連度が第1の閾値よりも低い環境要素の情報は提供対象から除外することに加え、走行関連度が第2の閾値(<第1の閾値)よりも低い場合は、提供情報から空間情報を省いて提供している。上述のように、制御側にとって環境要素の空間情報が必要となるのは、走行軌道を算出する必要がある近傍(約5~10秒)であり、それよりも遠方については不要である。そのため、所定の距離範囲あるいは所定時間内の到達範囲よりも遠いものは、空間情報を省いて提供することにより、制御側の要件を満たしつつ、提供するデータ量を削減することが可能となる。
 なお、以上で説明した実施形態は一例であり、本発明はこれに限られない。すなわち、様々な応用が可能であり、あらゆる実施の形態が本発明の範囲に含まれる。
 例えば、上記実施形態では、走行経路は一意に決定されることを前提としているが、走行経路は複数存在しても良い。例えば、人が運転している場合(自動運転モードではない場合)、たとえナビゲーション装置により推奨経路が設定されていたとしても、その経路通り人が運転するとは限らない。
 そこで、経路を一つに特定するのではなく、取り得る経路の候補を複数生成し、それぞれの経路を選択する確率を付与したものを、走行経路情報としても良い。その選択確率は、例えば、その人の走行履歴やその道路の交通流の統計情報等に基づいて算出される。そして、その確率を走行関連度の重みづけとして考慮に入れることにより、上述したような仕組みを適用することが可能である。
 例えば、上記実施形態では、周辺環境認識装置10の各処理を、プロセッサとRAMを用いて、所定の動作プログラムを実行することで実現しているが、必要に応じて独自のハードウェアで実現することも可能である。また、上記の実施形態では、周辺環境認識装置、無線通信部、自車位置決定装置、外界センサ群、車両センサ群、経路生成装置、運転支援装置、車載用HMI装置、アクチュエータ群を個別の装置として記載しているが、必要に応じて任意のいずれか2つ以上を組合せて実現することも可能である。
 上記の各処理が、プロセッサが所定の動作プログラムを実行することで実現される場合、各処理を実現する動作プログラム、テーブル、ファイル等の情報は、不揮発性半導体メモリ、ハードディスクドライブ、SSD(Solid State Drive)等の記憶デバイス、または、ICカード、SDカード、DVD等の計算機読み取り可能な非一時的データ記憶媒体に格納することができる。
 図15は、上述した動作プログラム、テーブル、ファイル等の情報を、記録媒体やデータ信号を通じて車載器に提供する様子を示す図である。車載器400は、車両に搭載されるものであり、各種プログラムを実行可能なプロセッサを有する。車載器400は、CD-ROM404を介して、上記の各処理を実現するための動作プログラム等の情報の提供を受ける。この動作プログラムを車載器400のプロセッサで実行することにより、車載器400を図1に示した構成を有する周辺環境認識装置10として動作させることができる。また、車載器400は通信回線401との接続機能を有する。コンピュータ402は上記の動作プログラム等の情報を提供するサーバーコンピュータであり、ハードディスク403などの記録媒体に情報を格納する。通信回線401は、インターネット、パソコン通信などの通信回線、あるいは専用通信回線などである。コンピュータ402はハードディスク403を使用して動作プログラム等の情報を読み出し、通信回線401を介して車載器400に送信する。すなわち、プログラムをデータ信号として搬送波を介して、通信回線401を介して送信する。このように、車載器400を周辺環境認識装置10として動作させるためのプログラムは、記録媒体やデータ信号(搬送波)などの種々の形態のコンピュータ読み込み可能なコンピュータプログラム製品として供給できる。
 また、図面には、実施形態を説明するために必要と考えられる制御線及び情報線を示しており、必ずしも、本発明が適用された実際の製品に含まれる全ての制御線及び情報線を示しているとは限らない。実際にはほとんど全ての構成が相互に接続されていると考えてもよい。
 次の優先権基礎出願の開示内容は引用文としてここに組み込まれる。
 日本国特許出願2015年第139317号(2015年7月13日出願)
 1:周辺環境認識システム、2:車両、10:周辺環境認識装置、20:無線通信部、30:自車位置決定装置、40:外界センサ群、50:車両センサ群、60:経路生成装置、70:運転支援装置、80:車載用HMI装置、90:アクチュエータ群、100:処理部、101:関連情報取得部、102:周辺環境要素統合処理部、103:走行関連領域決定部、104:環境要素走行関係性算出部、105:環境要素走行関連度算出部、106:周辺環境情報提供部、120:記憶部、121:周辺環境要素情報データ群、122:自車情報データ群、123:走行関連領域データ群、124:環境要素走行関係性データ群、130:通信部

Claims (14)

  1.  車両に搭載される周辺環境認識装置であって、
     前記車両の走行経路を示す走行経路情報を取得する走行経路情報取得部と、
     前記車両の周辺の環境要素に関する、前記車両との空間上の位置関係を示す空間上の位置関係情報を含む周辺環境要素情報を取得する周辺環境要素情報取得部と、
     前記走行経路情報と前記空間上の位置関係情報に基づき、前記環境要素における前記車両の走行との関係性を算出する環境要素走行関係性算出部と、
     前記環境要素走行関係性算出部が算出した前記車両の走行との関係性に基づき、前記環境要素に関する情報を提供する周辺環境情報提供部と、
    を備えた周辺環境認識装置。
  2.  請求項1に記載の周辺環境認識装置であって、
     前記環境要素走行関係性算出部が算出する前記車両の走行との関係性は、前記環境要素が関係する前記走行経路上の地点あるいは区間あるいは領域に係る情報を含み、
     前記周辺環境情報提供部は、前記環境要素が関係する前記走行経路上の地点あるいは区間あるいは領域が存在しない場合に、前記環境要素に関する情報を提供しない、
    周辺環境認識装置。
  3.  請求項2に記載の周辺環境認識装置であって、
     前記車両の走行との関係性は、さらに、前記車両と、前記環境要素が関係する前記走行経路上の地点あるいは区間あるいは領域と、の道なり上の位置関係に係る道なり上の位置関係情報を含み、
     前記周辺環境情報提供部が提供する前記環境要素に関する情報とは、前記道なり上の位置関係情報に係る情報を含む、
    周辺環境認識装置。
  4.  請求項2または3に記載の周辺環境認識装置であって、さらに
     前記周辺環境要素情報を用いて、前記環境要素の将来位置を推定する環境要素将来位置推定部を備え、
     前記環境要素走行関係性算出部は、前記環境要素将来位置推定部が推定した前記環境要素の将来位置が、前記走行経路と重複する点あるいは区間あるいは領域を算出し、
     前記環境要素が関係する前記走行経路上の地点あるいは区間あるいは領域とは、前記走行経路と重複する点あるいは区間あるいは領域である、
    周辺環境認識装置。
  5.  請求項1から4のいずれか一項に記載の周辺環境認識装置であって、
     前記環境要素走行関係性算出部が算出する前記車両の走行との関係性は、前記環境要素と前記車両の走行との関係性の度合を数値化した走行経路関連度に係る情報を含み、
     前記周辺環境情報提供部は、前記走行経路関連度に応じて前記環境要素に関する情報の提供要否を判定する、
    周辺環境認識装置。
  6.  請求項5に記載の周辺環境認識装置であって、
     前記周辺環境情報提供部は、前記走行経路関連度が第1の閾値未満の場合は前記環境要素に関する情報を提供不要と判定する、
    周辺環境認識装置。
  7.  請求項3に記載の周辺環境認識装置であって、
     前記環境要素走行関係性算出部が算出する前記車両の走行との関係性は、前記環境要素と前記車両の走行との関係性の度合を数値化した走行経路関連度に係る情報を含み、
     前記周辺環境情報提供部は、前記走行経路関連度が第1の閾値以上かつ第2の閾値未満の場合は、前記道なり上の位置関係情報は提供し、前記空間上の位置関係情報は提供しない、
    周辺環境認識装置。
  8.  請求項5から7のいずれか一項に記載の周辺環境認識装置であって、
     前記環境要素走行関係性算出部は、前記環境要素が関係する前記走行経路上の地点あるいは区間あるいは領域までの道なり上の距離、または、前記環境要素が関係する前記走行経路上の地点あるいは区間あるいは領域に前記車両が到達するまでの時間、またはこれらの組合せ、に基づいて前記走行経路関連度を算出する、
    周辺環境認識装置。
  9.  請求項8に記載の周辺環境認識装置であって、
     前記環境要素走行関係性算出部は、前記環境要素が関係する前記走行経路上の地点あるいは区間あるいは領域までの道なり上の距離が短いほど、あるいは、前記環境要素が関係する前記走行経路上の地点あるいは区間あるいは領域に前記車両が到達するまでの時間が短いほど、前記走行経路関連度の値が大きくなるように算出する、
    周辺環境認識装置。
  10.  請求項2から4のいずれか一項に記載の周辺環境認識装置であって、さらに、
     前記走行経路情報に基づいて、前記車両の走行に関連する領域を算出する走行関連領域算出部を備え、
     前記環境要素走行関係性算出部は、前記車両の走行に関連する領域に基づいて、前記環境要素が関係する前記走行経路上の地点あるいは区間あるいは領域に係る情報を算出する、
    周辺環境認識装置。
  11.  請求項10に記載の周辺環境認識装置であって、さらに、
     前記車両に搭載された走行制御部が計画している走行軌道情報を含む制御計画情報を取得する制御計画情報取得部を備え、
     前記環境要素走行関係性算出部は、前記制御計画情報取得部が取得した制御計画情報に基づいて、前記車両の走行に関連する領域を算出する、
    周辺環境認識装置。
  12.  請求項10または11に記載の周辺環境認識装置であって、
     前記周辺環境要素情報は、前記車両の走行経路上の車線情報を含み、
     前記周辺環境認識装置は、さらに、
     前記車両の走行経路上の車線情報に基づいて、前記車両が前記車両の走行経路を辿るために推奨される車線の範囲を示す走行推奨車線情報を算出する走行推奨車線算出部を備え、
     前記環境要素走行関係性算出部は、前記走行推奨車線算出部が算出した走行推奨車線情報に基づいて、前記車両の走行に関連する領域を算出する、
    周辺環境認識装置。
  13.  請求項12に記載の周辺環境認識装置であって、
     前記周辺環境情報提供部が提供する前記環境要素に関する情報とは、前記走行推奨車線情報を含む、
    周辺環境認識装置。
  14.  車両に搭載される車載器を、
     前記車両の走行経路を示す走行経路情報を取得する走行経路情報取得部と、
     前記車両の周辺の環境要素に関する、前記車両との空間上の位置関係を示す空間上の位置関係情報を含む周辺環境要素情報を取得する周辺環境要素情報取得部と、
     前記走行経路情報と前記空間上の位置関係情報とに基づき、前記環境要素における前記車両の走行との関係性を算出する環境要素走行関係性算出部と、
     前記環境要素走行関係性算出部が算出した前記車両の走行との関係性に基づき、前記環境要素に関する情報を提供する周辺環境情報提供部と、
    を備えた周辺環境認識装置として動作させるコンピュータプログラム製品。
PCT/JP2016/067630 2015-07-13 2016-06-14 周辺環境認識装置、及びコンピュータプログラム製品 WO2017010209A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US15/737,849 US20190001986A1 (en) 2015-07-13 2016-06-14 Surrounding environment recognition device and computer program product
CN201680034899.6A CN107683234B (zh) 2015-07-13 2016-06-14 周边环境识别装置以及计算机程序产品
EP16824189.1A EP3323689A4 (en) 2015-07-13 2016-06-14 DEVICE FOR RECOGNIZING PERIPHERAL ENVIRONMENT AND COMPUTER PROGRAM PRODUCT

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015-139317 2015-07-13
JP2015139317A JP2017019421A (ja) 2015-07-13 2015-07-13 周辺環境認識装置、及び周辺環境認識プログラム

Publications (1)

Publication Number Publication Date
WO2017010209A1 true WO2017010209A1 (ja) 2017-01-19

Family

ID=57756900

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/067630 WO2017010209A1 (ja) 2015-07-13 2016-06-14 周辺環境認識装置、及びコンピュータプログラム製品

Country Status (5)

Country Link
US (1) US20190001986A1 (ja)
EP (1) EP3323689A4 (ja)
JP (1) JP2017019421A (ja)
CN (1) CN107683234B (ja)
WO (1) WO2017010209A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018216278A1 (ja) * 2017-05-26 2018-11-29 住友電気工業株式会社 車両制御装置、車両制御システム、コンピュータプログラム及び車両制御方法
US11262210B2 (en) 2017-06-13 2022-03-01 Nissan Motor Co., Ltd. Map data storage method and device

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11835343B1 (en) * 2004-08-06 2023-12-05 AI Incorporated Method for constructing a map while performing work
KR102254973B1 (ko) * 2017-04-25 2021-05-24 현대모비스 주식회사 주행 차선 안내 장치 및 그 제어 방법
KR102317546B1 (ko) * 2017-06-13 2021-10-27 주식회사 만도모빌리티솔루션즈 주행제어장치 및 주행제어방법
KR101973627B1 (ko) 2017-07-11 2019-04-29 엘지전자 주식회사 차량에 구비된 차량 제어 장치 및 차량의 제어방법
EP3690850A4 (en) * 2017-09-29 2021-06-30 Pioneer Corporation INFORMATION GENERATION DEVICE, INFORMATION GENERATION PROCESS AND PROGRAM FOR INFORMATION GENERATION DEVICE
JP7328740B2 (ja) * 2017-11-16 2023-08-17 株式会社ゼンリン 運転支援装置及び運転支援システム
JP7016276B2 (ja) * 2018-03-05 2022-02-04 株式会社日立製作所 列車位置推定装置
JP6995671B2 (ja) * 2018-03-14 2022-01-14 本田技研工業株式会社 車両制御装置、車両制御方法、およびプログラム
JP2019214319A (ja) * 2018-06-13 2019-12-19 本田技研工業株式会社 認識処理装置、車両制御装置、認識処理方法、およびプログラム
KR102611927B1 (ko) * 2018-07-11 2023-12-08 르노 에스.아.에스. 주행 환경 정보의 생성 방법, 운전 제어 방법, 주행 환경 정보 생성 장치
EP3842304A3 (en) 2018-08-14 2021-09-15 Mobileye Vision Technologies Ltd. Systems and methods for navigating with safe distances
JP7132037B2 (ja) * 2018-08-29 2022-09-06 フォルシアクラリオン・エレクトロニクス株式会社 車載処理装置
US11001256B2 (en) 2018-09-19 2021-05-11 Zoox, Inc. Collision prediction and avoidance for vehicles
US11495028B2 (en) * 2018-09-28 2022-11-08 Intel Corporation Obstacle analyzer, vehicle control system, and methods thereof
DE102018127061B3 (de) * 2018-10-30 2019-11-14 Daimler Ag Verfahren zum Betrieb eines Assistenzsystems eines Fahrzeuges, Vorrichtung zur Durchführung des Verfahrens und Fahrzeug
JP6827026B2 (ja) * 2018-11-19 2021-02-10 本田技研工業株式会社 車両制御装置、車両制御方法、及びプログラム
CN111469835A (zh) * 2019-01-22 2020-07-31 观致汽车有限公司 基于拓扑地图的车辆辅助驾驶系统和方法
JP7210334B2 (ja) * 2019-03-07 2023-01-23 本田技研工業株式会社 車両制御装置、車両制御システム、車両制御方法、およびプログラム
US11353878B2 (en) * 2019-03-26 2022-06-07 Baidu Usa Llc Soft-boundary based path optimization for complex scenes for autonomous driving vehicles
JP7223629B2 (ja) * 2019-05-13 2023-02-16 日立Astemo株式会社 車載システム、外界認識センサ、電子制御装置
JP2021123178A (ja) * 2020-02-03 2021-08-30 株式会社デンソー 経路計画装置、経路計画方法、経路計画プログラム
CN112455465B (zh) * 2020-12-08 2022-02-01 广州小鹏自动驾驶科技有限公司 一种行驶环境感知方法、装置、电子设备和存储介质
CN114750808B (zh) * 2022-04-29 2023-04-25 西门子交通技术(北京)有限公司 一种列车的动态限速方法、系统及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006031602A (ja) * 2004-07-21 2006-02-02 Nippon Soken Inc 車両用自動運転システム
JP2008134458A (ja) * 2006-11-28 2008-06-12 Toyota Motor Corp 認知地図形成補助装置
JP2014517399A (ja) * 2011-05-31 2014-07-17 ローベルト ボッシュ ゲゼルシャフト ミット ベシュレンクテル ハフツング 運転者支援システム、及び、運転者支援システムを駆動する方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7840342B1 (en) * 1997-10-22 2010-11-23 Intelligent Technologies International, Inc. Road physical condition monitoring techniques
JP4525670B2 (ja) * 2006-11-20 2010-08-18 トヨタ自動車株式会社 走行制御計画生成システム
JP2010140186A (ja) * 2008-12-10 2010-06-24 Toyota Central R&D Labs Inc 経路推定装置及び運転支援装置
US8244408B2 (en) * 2009-03-09 2012-08-14 GM Global Technology Operations LLC Method to assess risk associated with operating an autonomic vehicle control system
DE102009045286A1 (de) * 2009-10-02 2011-04-21 Robert Bosch Gmbh Verfahren zur Abbildung des Umfelds eines Fahrzeugs
US8493198B1 (en) * 2012-07-11 2013-07-23 Google Inc. Vehicle and mobile device traffic hazard warning techniques
DE102013015028A1 (de) * 2013-09-10 2015-03-12 Daimler Ag Verfahren zum Betrieb eines Fahrzeuges
JP6190758B2 (ja) * 2014-05-21 2017-08-30 本田技研工業株式会社 物体認識装置及び車両

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006031602A (ja) * 2004-07-21 2006-02-02 Nippon Soken Inc 車両用自動運転システム
JP2008134458A (ja) * 2006-11-28 2008-06-12 Toyota Motor Corp 認知地図形成補助装置
JP2014517399A (ja) * 2011-05-31 2014-07-17 ローベルト ボッシュ ゲゼルシャフト ミット ベシュレンクテル ハフツング 運転者支援システム、及び、運転者支援システムを駆動する方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018216278A1 (ja) * 2017-05-26 2018-11-29 住友電気工業株式会社 車両制御装置、車両制御システム、コンピュータプログラム及び車両制御方法
US11262210B2 (en) 2017-06-13 2022-03-01 Nissan Motor Co., Ltd. Map data storage method and device

Also Published As

Publication number Publication date
EP3323689A4 (en) 2019-03-06
US20190001986A1 (en) 2019-01-03
EP3323689A1 (en) 2018-05-23
JP2017019421A (ja) 2017-01-26
CN107683234A (zh) 2018-02-09
CN107683234B (zh) 2020-11-20

Similar Documents

Publication Publication Date Title
WO2017010209A1 (ja) 周辺環境認識装置、及びコンピュータプログラム製品
CN110325935B (zh) 用于自动驾驶车辆的路径规划的基于驾驶场景的车道引导线
JP6819177B2 (ja) 運転支援方法及び運転支援装置
US10431094B2 (en) Object detection method and object detection apparatus
JP6553930B2 (ja) 車両情報処理装置、及び車両情報処理プログラム
JP5900454B2 (ja) 車両用車線案内システム及び車両用車線案内方法
JP6392734B2 (ja) 情報処理装置、車両の情報処理装置、情報処理方法及び車両の情報処理方法
JP2019536690A (ja) 自律車両制御システムのための場所特定支援
RU2661963C1 (ru) Устройство вычисления маршрута движения
RU2719080C2 (ru) Способ и устройство помощи при вождении
CN113313933B (zh) 用于自动驾驶车辆的基于车道的路线选择系统
RU2660425C1 (ru) Устройство вычисления маршрута движения
JP7186241B2 (ja) 車両の走行支援方法、車両走行支援装置及び自動運転システム
JP7325412B2 (ja) 走行支援方法及び走行支援装置
JP7362733B2 (ja) 道路環境情報の自動化クラウドソーシング
JPWO2018066133A1 (ja) 車両判定方法、走行経路補正方法、車両判定装置、及び走行経路補正装置
US11935417B2 (en) Systems and methods for cooperatively managing mixed traffic at an intersection
JP2022041923A (ja) 接続されたデータ分析プラットフォームを用いた車両経路指定
RU2721436C1 (ru) Способ помощи вождению и устройство помощи вождению
CN109425861B (zh) 本车位置可信度运算装置
KR102562381B1 (ko) 차량 호라이즌에서 오브젝트를 컨텍스트화 하기 위한 시스템 및 방법
WO2016170683A1 (ja) 走行制御装置およびデータ構造
JP7123645B2 (ja) 走行支援方法及び走行支援装置
JP2020052673A (ja) 運転制御方法及び運転制御装置
JPWO2019003992A1 (ja) 情報管理装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16824189

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2016824189

Country of ref document: EP