WO2022096255A1 - Method for operating a driving assistance system, computer program product, driving assistance system, pairing and retrofit kit - Google Patents
Method for operating a driving assistance system, computer program product, driving assistance system, pairing and retrofit kit Download PDFInfo
- Publication number
- WO2022096255A1 WO2022096255A1 PCT/EP2021/078895 EP2021078895W WO2022096255A1 WO 2022096255 A1 WO2022096255 A1 WO 2022096255A1 EP 2021078895 W EP2021078895 W EP 2021078895W WO 2022096255 A1 WO2022096255 A1 WO 2022096255A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- trailer
- vehicle
- optical sensor
- feature
- optically detectable
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 44
- 238000004590 computer program Methods 0.000 title claims description 12
- 230000003287 optical effect Effects 0.000 claims abstract description 61
- 230000008878 coupling Effects 0.000 claims abstract description 29
- 238000010168 coupling process Methods 0.000 claims abstract description 29
- 238000005859 coupling reaction Methods 0.000 claims abstract description 29
- 238000001514 detection method Methods 0.000 claims description 8
- 230000008859 change Effects 0.000 claims description 6
- 238000009420 retrofitting Methods 0.000 claims description 2
- 239000003550 marker Substances 0.000 claims 1
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 6
- 238000005259 measurement Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 240000004050 Pentaglottis sempervirens Species 0.000 description 3
- 238000005452 bending Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000007792 addition Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000005670 electromagnetic radiation Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
- B62D—MOTOR VEHICLES; TRAILERS
- B62D13/00—Steering specially adapted for trailers
- B62D13/06—Steering specially adapted for trailers for backing a normally drawn trailer
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60D—VEHICLE CONNECTIONS
- B60D1/00—Traction couplings; Hitches; Draw-gear; Towing devices
- B60D1/24—Traction couplings; Hitches; Draw-gear; Towing devices characterised by arrangements for particular functions
- B60D1/245—Traction couplings; Hitches; Draw-gear; Towing devices characterised by arrangements for particular functions for facilitating push back or parking of trailers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60D—VEHICLE CONNECTIONS
- B60D1/00—Traction couplings; Hitches; Draw-gear; Towing devices
- B60D1/58—Auxiliary devices
- B60D1/62—Auxiliary devices involving supply lines, electric circuits, or the like
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/46—Indirect determination of position data
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
Definitions
- the present invention relates to a method for operating a driver assistance system, a computer program product, a driver assistance system, a vehicle combination and a retrofit kit.
- Driving assistance systems which support the driver of a vehicle when driving with a trailer attached to the vehicle. For example, a probable trajectory of the trailer is determined when reversing. To do this, the driver assistance system requires certain dimensions of the trailer, which are entered manually by the driver, for example, or are estimated by the driver assistance system on the basis of different measurement data.
- US 2017/0083773 A1 discloses a driver assistance system that determines an angle between the trailer and the vehicle on the basis of a marking attached to a front side of the trailer and a camera image recorded by a rear-facing camera of the vehicle, in which the marking is contained.
- US 2014/0160276 A1 discloses a system that is intended to determine an angle between a vehicle and a trailer and a length and width of the trailer on the basis of camera images and a comparison of features detected therein.
- one object of the present invention is to improve the operation of a driver assistance system when driving with a coupled trailer.
- a method for operating a driver assistance system for a vehicle that has a trailer device for coupling a trailer to the vehicle is proposed.
- an optical sensor signal is nal received, which comprises at least one item of information of an optically detectable feature arranged on one side of a trailer coupled to the vehicle.
- a geometric feature of the optically detectable feature is determined as a function of the received sensor signal.
- a buckling angle of the coupled trailer is detected.
- a geometric parameter of the trailer is determined as a function of the determined geometric feature, the detected articulation angle and a predefined geometric property of the vehicle.
- This method has the advantage that a trajectory of the trailer can be determined automatically and with a high level of accuracy on the basis of the determined geometric parameters. Manual input of the geometric parameter is therefore not necessary.
- the optical sensor signal is, for example, an image from a rear-facing camera, preferably a camera arranged in the area of an exterior mirror.
- the image includes at least a portion of a side of the trailer in which the optically detectable feature is located.
- the optically detectable feature can be a marking that has been specially attached to the tag for this purpose, but can also be a feature of the tag that has been attached to the tag for another purpose, such as a mechanical device, a security device, or the like .
- the optically detectable feature may include a sticker, retroreflector, engraving, or the like.
- the optically detectable feature leaves a specific signature in the optical sensor signal.
- the specific signature can be present in an infrared wavelength range, a visual wavelength range and/or in an ultraviolet wavelength range.
- a side of the coupled trailer is understood to mean, in particular, a right and a left side of the trailer relative to a direction of travel. This means that a front and/or a back of the tag are not understood as "side of the tag" in particular. One can also say that the side is a lateral side.
- the geometric feature of the optically detectable feature includes in particular an angle at which the optically detectable feature is visible in the optical sensor signal, a distance of the optically detectable feature from the optical sensor device, a height and/or a width of the optically detectable feature in the optical sensor signal and the like.
- the optical sensor signal includes an image of the optically detectable feature
- an angle between a line of sight to the feature and a direction of travel can be inferred, for example by means of an image transformation from the position of the feature in the image, provided that the optical properties of the optical sensor device and its Arrangement on the vehicle are known.
- the articulation angle of the coupled trailer is, for example, the angle between a longitudinal axis of the vehicle and a longitudinal axis of the trailer.
- the articulation angle is preferably detected and output by a separate articulation angle sensor.
- the kink angle can also be determined on the basis of the optical sensor signal.
- the geometric parameter of the tag to be determined includes in particular a length and a width of the tag at the point at which the optically detectable feature is arranged.
- the length of the trailer is understood to mean a distance of the optically detectable feature from a coupling point of the trailer to the trailer device along the longitudinal axis of the trailer.
- the width of the trailer is a distance of the optically detectable feature from a center point of an axis of the trailer ngers understood perpendicular to the longitudinal axis. In this case, the width only refers to one side of the trailer. If the trailer has an axisymmetric structure, the overall width can be derived from this.
- the optically detectable feature is arranged at a rear end of the trailer, for example, then the overall length of the trailer can be determined. If the optically detectable feature is arranged, for example, at the level of an axle of the trailer, then a wheelbase of the trailer can be determined.
- the wheelbase is understood to mean, in particular, a distance between the axle and the coupling point.
- the wheelbase of the trailer is a geometric parameter that is advantageous for determining a trajectory of the trailer.
- the predetermined geometric property of the vehicle includes in particular a relative arrangement of the optical sensor device in relation to the coupling point of the trailer. This can be given, for example, as a distance along a longitudinal axis of the vehicle and a distance perpendicular to the longitudinal axis of the vehicle, or as a distance from the coupling point and an angle between the line connecting the coupling point to the optical sensor device and the longitudinal axis of the vehicle.
- a trajectory of the trailer is determined on the basis of the determined geometric parameter of the trailer in order to support the user of the vehicle when driving and/or to automatically drive along the determined trajectory.
- further geometric properties of the vehicle are advantageously specified, such as a position at the edge of the vehicle and a distance of the coupling point from a rear axle of the vehicle.
- odometry data such as a wheel speed and a steering angle are preferably also recorded.
- step b) includes determining a
- the angle can be determined in relation to the longitudinal axis and/or in relation to the transverse axis.
- steps a), b) and c) are carried out for at least two different positions of the coupled trailer relative to the vehicle, with a change in the determined geometric feature in the two different positions and a change in the detected articulation angle in the two different positions is determined and/or a ratio of these changes is determined, and step d) is carried out as a function of the respective change determined and/or as a function of the ratio determined.
- step d) includes determining a length of the trailer from a coupling point to the optically detectable feature and/or a width of the trailer at the position of the optically detectable feature.
- the optical sensor signal includes a camera image.
- the optical properties, such as a resolution, an angle of view, an alignment of the camera, and the like, of the camera capturing the camera image are preferably specified. Pixels can then be assigned directions in a coordinate system of the vehicle by means of an image transformation.
- the optical sensor signal includes a lidar signal.
- the distance between the optical sensor device and the optically detectable feature can be determined directly on the basis of the lidar signal.
- a radar signal can also be provided, from which the distance can also be determined directly.
- the optically detectable feature comprises a marking with a specific structure.
- the marking effects a modulation of light incident on the marking in a manner determined by the structure.
- the specific structure includes, for example, a specific surface structure that reflects and/or absorbs incident electromagnetic radiation in a specific manner.
- the marking has different colors and/or is particularly reflective in a predetermined spectral range.
- the marking can also act as an optical grating, in which case a reflection maximum can be determined as a function of a wavelength at certain angles.
- the specified structure may also include a geometric figure, such as a cross, circle, square, and the like, and combinations thereof.
- the marking is designed, for example, as a sticker that is attached to the side of the trailer.
- the distance to the marking can be inferred from the image of the marking in the optical sensor signal, for example using the theorem of rays. Since the image of the mark due to the oblique view in is distorted in a certain manner dependent on the articulation angle, the articulation angle can also be inferred if an angle between the plane in which the marking extends and the longitudinal axis of the trailer is known. In this case, the bending angle can be recorded without a separate measuring device.
- the optically detectable feature can have a rotationally symmetrical structure. This can be advantageous if the feature is arranged, for example, on a wheel of the trailer and rotates with the wheel while driving.
- the predefined property of the vehicle includes a length of the vehicle from the optical sensor device to the coupling point of the trailer along a vehicle axis.
- a position of the optically detectable feature on the tag is specified.
- the predetermined position is, for example, a rear end point of the side of the trailer, an axle position of the trailer and/or a position of the trailer at which it has the greatest width.
- optically detectable features are provided, which are arranged at different predetermined positions of the trailer.
- the position has a predetermined distance from a wheel axle and/or from an end point of the trailer.
- the optical sensor signal also includes optically encoded information about a geometric parameter of the trailer.
- the optically detectable feature has a barcode, a QR code, a
- the optically encoded information includes in particular a wheelbase, an overall length and/or a width of the trailer.
- an additional optically detectable marking for this purpose is arranged on the front of the trailer, which is opposite the rear of the vehicle.
- This additional marking can be detected, for example, by a rear-facing camera, such as a rear camera of the vehicle, and the information contained can thus be read.
- a computer program product which comprises instructions which, when the program is executed by a computer, cause the latter to execute the method according to the first aspect.
- a computer program product such as a computer program means
- a server in a network, for example, as a storage medium such as a memory card, USB stick, CD-ROM, DVD, or in the form of a downloadable file. This can be done, for example, in a wireless communication network by transferring a corresponding file with the computer program product or the computer program means.
- a driver assistance system for a vehicle which has a trailer device for coupling a trailer to the vehicle.
- the driver assistance system includes a receiving unit for receiving an optical sensor signal, which includes at least one piece of information of an optically detectable feature arranged on one side of a trailer coupled to the vehicle, a determination unit for determining a geometric feature of the optically detectable feature as a function of the received sensor signal, and a Detection unit for detecting a buckling angle of the coupled trailer.
- the determining unit is further responsive to determining a geometric parameter of the trailer the determined geometric feature, the detected articulation angle and a predetermined geometric property of the vehicle.
- the driver assistance system can be implemented in terms of hardware and/or software.
- the driver assistance system can be embodied, for example, as a computer or as a microprocessor.
- the driver assistance system can be embodied as a computer program product, as a function, as a routine, as part of a program code or as an executable object.
- the driver assistance system can be designed as part of a higher-level control system of the vehicle, such as an ECU (Engine Control Unit).
- the respective unit of the driver assistance system can be implemented in terms of hardware and/or software.
- the unit can be in the form of a computer or a microprocessor, for example.
- the unit can be embodied as a computer program product, as a function, as a routine, as part of a program code or as an executable object.
- a vehicle combination comprising a vehicle with a trailer device for coupling a trailer and a trailer.
- the vehicle includes an optical sensor device for detecting an optical sensor signal, which includes at least one optically detectable feature of a side of the trailer coupled to the vehicle, an articulation angle detection unit for detecting a Articulation angle of the trailer relative to the vehicle, and a driver assistance system according to the third aspect.
- the vehicle is, for example, a passenger car or a truck.
- the vehicle preferably includes a number of sensor units that are set up to detect the driving state of the vehicle and to detect an environment of the vehicle.
- sensor units of the vehicle are image recording devices, such as a camera, a radar (radio detection and ranging) or a lidar (light detection and ranging), ultrasonic sensors, location sensors, wheel angle sensors and/or wheel speed sensors.
- the sensor units are each set up to output a sensor signal, for example to the driver assistance system.
- the trailer is, for example, a trailer for transporting cargo.
- the trailer has, for example, one axle, two axles, or even more axles.
- a retrofit kit for retrofitting a combination comprising a vehicle with a trailer device for coupling a trailer and a trailer.
- the retrofit kit includes an optical sensor device for capturing an image and for outputting an optical sensor signal, wherein the optical sensor device can be arranged on the vehicle in such a way that a captured image includes at least a partial area of a side of the trailer coupled to the vehicle, one in the partial area on a marking that can be arranged on the side of the trailer, and a processing unit that is set up to carry out the method according to the first aspect on the basis of the optical sensor signal output by the optical sensor device.
- the retrofit kit can additionally include an articulation angle detection unit for detecting an articulation angle of the trailer relative to the vehicle.
- FIG. 1 shows a schematic view of a vehicle with a trailer coupled thereto from a bird's eye view
- FIG. 2 shows a further schematic view of a vehicle with a trailer coupled thereto from a bird's eye view
- FIG. 3 schematically shows two views of an embodiment of an optically detectable feature
- FIG. 4 shows a third schematic view of a vehicle with a trailer coupled thereto from a bird's eye view
- FIG. 5 shows a schematic block diagram of an exemplary embodiment of a driver assistance system
- FIG. 6 shows a schematic block diagram of an exemplary embodiment of a method for operating a driver assistance system.
- the vehicle 100 is a car, for example.
- the car 100 has a driver assistance system 110, which is designed, for example, as a control unit.
- a plurality of environment sensor devices 120, 130 are arranged on car 100, these being optical sensors 120 and ultrasonic sensors 130, for example.
- the optical sensors 120 include, for example, visual cameras, a radar and/or a lidar.
- the optical sensors 120 can each capture an image of a respective area from the area surrounding the car 100 and output it as an optical sensor signal.
- the ultrasonic sensors 130 are set up to detect a distance to objects arranged in the surrounding area and to output a corresponding sensor signal. Using the sensor signals detected by sensors 120, 130, driver assistance system 110 may be able to drive car 100 partially or fully autonomously. This applies both to the operation of vehicle 100 with trailer 200 and without trailer 200.
- driver assistance system 110 may be able to drive car 100 partially or fully autonomously. This applies both to the operation of vehicle 100 with trailer 200 and without trailer 200.
- optical sensors 120 and ultrasonic sensors 130 shown in FIG. Examples of this are a microphone, an acceleration sensor, an antenna with a coupled receiver for receiving electromagnetically transmittable data signals, and the like.
- the vehicle 100 has a trailer hitch 102 with which the trailer 200 can be coupled.
- the coupling point KP forms a fixed point in the reference system of the vehicle 100, around which the trailer 200 can rotate.
- the trailer 200 has two wheels (without reference numbers) which are connected to an axle 202 of the trailer 200 . It is, for example, a rigid axle 202.
- a dynamic behavior of the trailer 200 when driving depends in particular on a width AB of the trailer 200 and a wheelbase AR of the trailer 200.
- the wheelbase AR is given here by the distance between the axle 202 and the coupling point KP.
- Another geometric variable that has to be taken into account during a driving maneuver with the trailer 200 is the total length AL of the trailer 200, which is given by the distance between the rear of the trailer 200 and the coupling point KP.
- the trailer has a right side 200A and a left side 200B.
- An optically detectable feature 210 is arranged on each side 200A, 200B, which is designed, for example, as a retroreflector or a surface with a specific pattern or the like (see also FIG. 3).
- a respective side 200A, 200B of the trailer 200 can be detected in particular with the optical sensors 120 arranged on the exterior mirrors of the vehicle 100 . Whether the respective side 200A, 200B of the trailer 200 is visible in a respective detected optical sensor signal depends, for example, on a current articulation angle (p (see Fig. 2) of the trailer 200.
- At least one geometric parameter of the Trailer 200 which relates to the position of the feature 210 can be determined, such as a length LM from the coupling point KP to the feature 210 and a width from the coupling point KP to the feature 210. This is detailed below with reference to Fig. 2 explained.
- FIG. 2 shows a further schematic view of a vehicle 100 with a trailer 200 coupled thereto from a bird's-eye view.
- This is, for example, the vehicle 100 and the trailer 200 of FIG. 1 .
- the vehicle 100 and the trailer 200 are not arranged parallel to one another, but there is a kink angle (p) between the vehicle longitudinal axis 104 and the trailer longitudinal axis 204 greater than 0°.
- the vehicle 100 has cameras 120 arranged on the exterior mirrors. For the camera 120 on the right-hand side of the vehicle (the front of the vehicle points downwards in FIG.
- the right-hand camera 120 captures the right-hand side 200A of the trailer 200.
- Two optically detectable features 210-213 are arranged on each of the sides 200A, 200B of the trailer 200.
- Features 211 and 213 are located at the rear of trailer 200 and features 210 and 212 are located at axle 202 of trailer 200. All features 210-213 are preferably distinguishable, at least the two features 210, 211 and 212, 213 attached to a respective side 200A, 200B are distinguishable from one another.
- d1, d2, a1, a2 of the recorded feature 210, 211 can be determined. These are, in particular, a respective angle a1, a2, at which the respective feature 210, 211 lies in relation to the vehicle longitudinal axis 104 in the captured image.
- a distance d1, d2 of the respective feature 210, 211 can be determined directly by the camera 120, for example if a lidar or a radar is used.
- the distance d1, d2 can be determined on the basis of a captured camera image, for example, if the dimensions of the respective feature 210, 211 are specified and the size of the image of the respective feature 210, 211 is determined.
- the trigonometric considerations are based on the triangle defined by the given geometric properties BO, LO and the triangle determined by the quantities LM, BM (see FIG. 1) sought.
- the two triangles share a common point (the point of attachment) and the kink angle (p) is a variable and measured quantity.
- a second variable measured quantity represents the geometric feature d1 , d2, a1 , a2 that is based on feature 210 - 213 is detected.
- a length LM or width BM which can be determined on the basis of the optical sensor signal, relates to the position of the feature 210-213 on the trailer 200, respectively.
- the feature 210 is attached at the height of the transverse axis 202 of the trailer 200, so the wheelbase AR of the trailer 200 is determined as the length LM, the feature 211 is attached to a rear edge of the trailer 200, so the length LM is an overall length AL of the trailer 200 determined.
- a distance of the respective feature 210-213 from the longitudinal axis 204 of the trailer 200 is additionally determined, from which the width AB of the trailer 200 can be inferred.
- Fig. 3 shows schematically two views (A), (B) of an embodiment of an optically detectable feature 210.
- the optically detectable feature 210 is here as a feature extending essentially in a two-dimensional plane, such as a sticker or an engraving in a flat surface formed.
- Feature 210 shows a circle with a cross drawn in, feature 210 having a diameter B1.
- Shown in view (A) is a top view of feature 210, for example as captured by a camera 120 (see Figures 1, 2 or 4) when feature 210 is in a plane perpendicular to a line of sight to the camera 120 extends. In this case, the feature 210 is imaged in particular in an undistorted manner.
- the feature 210 is shown, for example, as imaged by the camera 120 when the feature 210 extends in a plane that is not perpendicular to the direction of view of the Camera 120 runs, but has, for example, an angle of 60 °.
- the distance d1, d2 can also be inferred if the optical properties of the camera 120, such as a focal length and a pixel size, are known.
- the optical properties of the camera 120 such as a focal length and a pixel size
- ray-optical relationships such as the law of rays, can be applied.
- FIG. 4 shows a third schematic view of a vehicle 100 with a trailer 200 coupled thereto from a bird's-eye view.
- the vehicle 100 and the trailer 200 form a combination 300.
- the trailer 200 is a boat trailer, for example.
- a width of the boat varies along the length of the boat.
- the user of the vehicle 100, the trailer 200, and the boat retrofitted the trailer 300 as follows.
- the user has arranged a rear-facing camera 120 on each exterior mirror of the vehicle 100 and has attached a marking 210 - 215 to the trailer 200 and to the boat at a total of six positions (three per side), which are recorded in one of the cameras 120 image can be seen.
- the markings 210-215 can, for example, have a pattern like the optically detectable feature 210 of FIG.
- the user has provided a processing unit 105 that is set up to execute the method described with reference to FIG. 6 .
- the processing unit 105 can form part of a driver assistance system 110 (see FIG. 1 or 5).
- the processing unit 105 can be embodied in terms of software as a computer program product, as a function, as a routine, as part of a program code or as an executable object.
- the width is indicated only for feature 215.
- three length measurements L13, L14, L15 and three width measurements B15 can be determined for each side of the boat/trailer 200.
- the measurements that can be determined can be helpful in order to predict the driving behavior of the trailer 200 and to determine a trajectory of the trailer 200 .
- the driver of vehicle 100 can thus be effectively assisted, in particular when the combination 300 is reversing. Partially or fully autonomous driving of the combination 300 is also possible.
- Fig. 5 shows a schematic block diagram of an exemplary embodiment of a driver assistance system 110, for example that of vehicle 100 in Fig. 1.
- Vehicle 100 has, in particular, a trailer device 102 (see Fig. 1, 2 or 4) for coupling a trailer 200 (see Fig. 1 , 2 or 4).
- Driver assistance system 110 includes a receiving unit 112 for receiving an optical sensor signal SIG, which contains at least one piece of information of a trailer 200 (see FIG. 1, 2, or 4) coupled to vehicle 100 on one side 200A, 200B (see FIG. 1). arranged optically detectable feature 210 - 215 (see Fig. 1 - 4), a determination unit 114 for determining a geometric feature a1, a2, d1, d2 (see Fig.
- Fig. 6 shows a schematic block diagram of an exemplary embodiment of a method for operating a driver assistance system 110 (see Fig. 1 or 5) for a vehicle 100 (see Fig.
- an optical sensor signal SIG (see Fig. 5) is received, which contains at least one piece of information of an optically detectable feature 210 - 215 arranged on one side 200A, 200B (see Fig. 1) of the trailer 200 coupled to the vehicle 100 (see Figures 1-4).
- a geometric feature a1, a2, d1, d2 (see FIG. 2) of the optically detectable feature 210-215 is determined as a function of the received sensor signal SIG.
- an articulation angle p (see Fig.
- a geometric parameter AB, AL, AR, BM, LM (see Fig. 1) of the trailer 200 in Dependency of the determined geometric feature a1, a2, d1, d2, the detected articulation angle (p and a predetermined geometric property B0, L0 (see Fig. 2) of the vehicle 100 is determined.
- the method is preferably carried out with the driver assistance system 110 according to FIG. 5 and with a vehicle combination 300 according to one of FIGS. 1, 2 or 4.
Landscapes
- Engineering & Computer Science (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Traffic Control Systems (AREA)
Abstract
A method for operating a driving assistance system (110) for a vehicle (100), which has an attachment device (102) for coupling a trailer (200) to the vehicle (100), wherein the method comprises: a) receiving (S1) an optical sensor signal (SIG) that comprises at least one item of information about an optically detectable feature (210) arranged on one side (200A, 200B) of a trailer (200) coupled to the vehicle (100), b) ascertaining (S2) a geometric feature (d1, d2, α1, α2) of the optically detectable feature (210) on the basis of the received sensor signal (SIG), c) detecting (S3) a kink angle (φ) of the coupled trailer (200), and d) ascertaining (S4) a geometric parameter (AB, AL, AR) of the trailer (200) on the basis of the ascertained geometric feature (d1, d2, α1, α2), of the detected kink angle (φ) and of a predefined geometric property (B0, L0) of the vehicle (100).
Description
VERFAHREN ZUM BETREIBEN EINES FAHRASSISTENZSYSTEMS, COMPUTERPROGRAMMPRODUKT, FAHRASSISTENZSYSTEM, GESPANN UND NACHRÜSTSATZ METHOD OF OPERATING A DRIVING ASSISTANCE SYSTEM, COMPUTER PROGRAM PRODUCT, DRIVING ASSISTANCE SYSTEM, HARNESS AND RETROFIT KIT
Die vorliegende Erfindung betrifft ein Verfahren zum Betreiben eines Fahrassistenzsystems, ein Computerprogrammprodukt, ein Fahrassistenzsystem, ein Gespann und einen Nachrüstsatz. The present invention relates to a method for operating a driver assistance system, a computer program product, a driver assistance system, a vehicle combination and a retrofit kit.
Es sind Fahrassistenzsysteme bekannt, die den Fahrer eines Fahrzeugs bei einer Fahrt mit einem an das Fahrzeug angehängten Anhänger unterstützen. Beispielsweise wird bei einer Rückwärtsfahrt eine voraussichtliche Trajektorie des Anhängers ermittelt. Hierzu benötigt das Fahrassistenzsystem bestimmte Maße des Anhängers, die beispielsweise von dem Fahrer manuell eingegeben werden, oder aber von dem Fahrassistenzsystem auf Basis unterschiedlicher Messdaten geschätzt werden. Driving assistance systems are known which support the driver of a vehicle when driving with a trailer attached to the vehicle. For example, a probable trajectory of the trailer is determined when reversing. To do this, the driver assistance system requires certain dimensions of the trailer, which are entered manually by the driver, for example, or are estimated by the driver assistance system on the basis of different measurement data.
US 2017/0083773 A1 offenbart ein Fahrassistenzsystem, das auf Basis einer an einer Stirnseite des Anhängers angebrachten Markierung und eines von einer nach hinten gerichteten Kamera des Fahrzeugs aufgenommenen Kamerabilds, in welchem die Markierung enthalten ist, einen Winkel zwischen dem Anhänger und dem Fahrzeug bestimmt. US 2017/0083773 A1 discloses a driver assistance system that determines an angle between the trailer and the vehicle on the basis of a marking attached to a front side of the trailer and a camera image recorded by a rear-facing camera of the vehicle, in which the marking is contained.
US 2014/0160276 A1 offenbart ein System, das auf Basis von Kamerabildern und einem Vergleich von darin erkannten Merkmalen einen Winkel zwischen einem Fahrzeug und einem Anhänger sowie eine Länge und Breite des Anhängers ermitteln soll. US 2014/0160276 A1 discloses a system that is intended to determine an angle between a vehicle and a trailer and a length and width of the trailer on the basis of camera images and a comparison of features detected therein.
Vor diesem Hintergrund besteht eine Aufgabe der vorliegenden Erfindung darin, den Betrieb eines Fahrassistenzsystems bei einer Fahrt mit einem gekoppelten Anhänger zu verbessern. Against this background, one object of the present invention is to improve the operation of a driver assistance system when driving with a coupled trailer.
Gemäß einem ersten Aspekt wird ein Verfahren zum Betreiben eines Fahrassistenzsystems für ein Fahrzeug, welches eine Anhängevorrichtung zum Koppeln eines Anhängers mit dem Fahrzeug aufweist, vorgeschlagen. In einem ersten Schritt a) wird ein optisches Sensorsig-
nal empfangen, welches wenigstens eine Information eines an einer Seite eines mit dem Fahrzeug gekoppelten Anhängers angeordneten optisch erfassbaren Merkmals umfasst. In einem zweiten Schritt b) wird ein geometrisches Merkmal des optisch erfassbaren Merkmals in Abhängigkeit des empfangenen Sensorsignals ermittelt. In einem dritten Schritt c) wird ein Knickwinkel des gekoppelten Anhängers erfasst. In einem vierten Schritt d) wird ein geometrischer Parameter des Anhängers in Abhängigkeit des ermittelten geometrischen Merkmals, des erfassten Knickwinkels und einer vorgegebenen geometrischen Eigenschaft des Fahrzeugs ermittelt. According to a first aspect, a method for operating a driver assistance system for a vehicle that has a trailer device for coupling a trailer to the vehicle is proposed. In a first step a), an optical sensor signal is nal received, which comprises at least one item of information of an optically detectable feature arranged on one side of a trailer coupled to the vehicle. In a second step b), a geometric feature of the optically detectable feature is determined as a function of the received sensor signal. In a third step c), a buckling angle of the coupled trailer is detected. In a fourth step d), a geometric parameter of the trailer is determined as a function of the determined geometric feature, the detected articulation angle and a predefined geometric property of the vehicle.
Dieses Verfahren weist den Vorteil auf, dass eine Trajektorie des Anhängers automatisch und mit einer hohen Genauigkeit auf Basis des ermittelten geometrischen Parameters ermittelbar ist. Eine manuelle Eingabe des geometrischen Parameters ist damit nicht nötig. This method has the advantage that a trajectory of the trailer can be determined automatically and with a high level of accuracy on the basis of the determined geometric parameters. Manual input of the geometric parameter is therefore not necessary.
Das optische Sensorsignal ist beispielsweise ein Bild einer nach hinten gerichteten Kamera, vorzugsweise einer im Bereich eines Außenspiegels angeordneten Kamera. Das Bild umfasst zumindest einen Teilbereich einer Seite des Anhängers, in dem das optisch erfassbare Merkmal angeordnet ist. The optical sensor signal is, for example, an image from a rear-facing camera, preferably a camera arranged in the area of an exterior mirror. The image includes at least a portion of a side of the trailer in which the optically detectable feature is located.
Das optisch erfassbare Merkmal kann eine Markierung sein, die extra für diesen Zweck an dem Anhänger angebracht wurde, kann aber auch ein Merkmal des Anhängers sein, das für einen anderen Zweck an dem Anhänger angebracht wurde, wie eine mechanische Einrichtung, eine Sicherheitseinrichtung, oder dergleichen. Das optisch erfassbare Merkmal kann einen Aufkleber, einen Retroreflektor, eine Gravur oder dergleichen umfassen. The optically detectable feature can be a marking that has been specially attached to the tag for this purpose, but can also be a feature of the tag that has been attached to the tag for another purpose, such as a mechanical device, a security device, or the like . The optically detectable feature may include a sticker, retroreflector, engraving, or the like.
Das optisch erfassbare Merkmal hat hinterlässt insbesondere eine spezifische Signatur in dem optischen Sensorsignal. Die spezifische Signatur kann in einem infraroten Wellenlängenbereich, einem visuellen Wellenlängenbereich und/oder in einem ultravioletten Wellenlängenbereich vorhanden sein.
Unter einer Seite des gekoppelten Anhängers werden vorliegend insbesondere eine rechte und eine linke Seite des Anhängers relativ zu einer Fahrtrichtung verstanden. Das heißt, dass eine Vorderseite und/oder eine Rückseite des Anhängers insbesondere nicht als "Seite des Anhängers" verstanden werden. Man kann auch sagen, dass die Seite eine seitliche Seite ist. In particular, the optically detectable feature leaves a specific signature in the optical sensor signal. The specific signature can be present in an infrared wavelength range, a visual wavelength range and/or in an ultraviolet wavelength range. In the present case, a side of the coupled trailer is understood to mean, in particular, a right and a left side of the trailer relative to a direction of travel. This means that a front and/or a back of the tag are not understood as "side of the tag" in particular. One can also say that the side is a lateral side.
Das geometrische Merkmal des optisch erfassbaren Merkmals umfasst insbesondere einen Winkel, unter dem das optisch erfassbare Merkmal in dem optischen Sensorsignal sichtbar ist, einen Abstand des optisch erfassbaren Merkmals von der optischen Sensoreinrichtung, eine Höhe und/oder eine Breite des optisch erfassbaren Merkmals in dem optischen Sensorsignal und dergleichen mehr. The geometric feature of the optically detectable feature includes in particular an angle at which the optically detectable feature is visible in the optical sensor signal, a distance of the optically detectable feature from the optical sensor device, a height and/or a width of the optically detectable feature in the optical sensor signal and the like.
Wenn das optische Sensorsignal ein Bild des optisch erfassbaren Merkmals umfasst, dann kann beispielsweise mittels einer Bildtransformation von der Lage des Merkmals in dem Bild auf einen Winkel zwischen einer Sichtlinie zu dem Merkmal und einer Fahrtrichtung geschlossen werden, sofern die optischen Eigenschaften der optischen Sensoreinrichtung und deren Anordnung an dem Fahrzeug bekannt sind. If the optical sensor signal includes an image of the optically detectable feature, then an angle between a line of sight to the feature and a direction of travel can be inferred, for example by means of an image transformation from the position of the feature in the image, provided that the optical properties of the optical sensor device and its Arrangement on the vehicle are known.
Der Knickwinkel des gekoppelten Anhängers ist beispielsweise der Winkel zwischen einer Längsachse des Fahrzeugs und einer Längsachse des Anhängers. Der Knickwinkel wird vorzugsweise von einem separaten Knickwinkelsensor erfasst und ausgegeben. In Ausführungsformen kann der Knickwinkel auch auf Basis des optischen Sensorsignals ermittelt werden. The articulation angle of the coupled trailer is, for example, the angle between a longitudinal axis of the vehicle and a longitudinal axis of the trailer. The articulation angle is preferably detected and output by a separate articulation angle sensor. In embodiments, the kink angle can also be determined on the basis of the optical sensor signal.
Der zu ermittelnde geometrische Parameter des Anhängers umfasst insbesondere eine Länge und eine Breite des Anhängers an der Stelle, an der das optisch erfassbare Merkmal angeordnet ist. Unter der Länge des Anhängers wird hierbei ein Abstand des optisch erfassbaren Merkmals von einem Kopplungspunkt des Anhängers mit der Anhängevorrichtung entlang der Längsachse des Anhängers verstanden. Unter der Breite des Anhängers wird ein Abstand des optisch erfassbaren Merkmals von einem Mittelpunkt einer Achse des Anhä-
ngers senkrecht zu der Längsachse verstanden. Die Breite bezieht sich in diesem Fall nur auf eine Seite des Anhängers. Wenn der Anhänger einen achsensymmetrischen Aufbau aufweist, kann hieraus die Gesamtbreite abgeleitet werden. The geometric parameter of the tag to be determined includes in particular a length and a width of the tag at the point at which the optically detectable feature is arranged. The length of the trailer is understood to mean a distance of the optically detectable feature from a coupling point of the trailer to the trailer device along the longitudinal axis of the trailer. The width of the trailer is a distance of the optically detectable feature from a center point of an axis of the trailer ngers understood perpendicular to the longitudinal axis. In this case, the width only refers to one side of the trailer. If the trailer has an axisymmetric structure, the overall width can be derived from this.
Wenn das optisch erfassbare Merkmal beispielsweise an einem hinteren Ende des Anhängers angeordnet ist, dann kann die Gesamtlänge des Anhängers ermittelt werden. Wenn das optisch erfassbare Merkmal beispielsweise auf Höhe einer Achse des Anhängers angeordnet ist, dann kann ein Radstand des Anhängers ermittelt werden. Unter dem Radstand wird hierbei insbesondere ein Abstand der Achse von dem Kopplungspunkt verstanden. If the optically detectable feature is arranged at a rear end of the trailer, for example, then the overall length of the trailer can be determined. If the optically detectable feature is arranged, for example, at the level of an axle of the trailer, then a wheelbase of the trailer can be determined. In this context, the wheelbase is understood to mean, in particular, a distance between the axle and the coupling point.
Insbesondere der Radstand des Anhängers ist ein geometrischer Parameter, der zum Ermitteln einer Trajektorie des Anhängers von Vorteil ist. In particular, the wheelbase of the trailer is a geometric parameter that is advantageous for determining a trajectory of the trailer.
Die vorgegebene geometrische Eigenschaft des Fahrzeugs umfasst insbesondere eine relative Anordnung der optischen Sensoreinrichtung in Bezug auf den Kopplungspunkt des Anhängers. Diese kann beispielsweise als ein Abstand entlang einer Längsachse des Fahrzeugs und ein Abstand senkrecht zu der Längsachse des Fahrzeugs, oder auch als Abstand von dem Kopplungspunkt und ein Winkel zwischen der Verbindungslinie von Kopplungspunkt zu optischer Sensoreinrichtung und der Längsachse des Fahrzeugs gegeben sein. The predetermined geometric property of the vehicle includes in particular a relative arrangement of the optical sensor device in relation to the coupling point of the trailer. This can be given, for example, as a distance along a longitudinal axis of the vehicle and a distance perpendicular to the longitudinal axis of the vehicle, or as a distance from the coupling point and an angle between the line connecting the coupling point to the optical sensor device and the longitudinal axis of the vehicle.
In bevorzugten Ausführungsformen wird auf Basis des ermittelten geometrischen Parameters des Anhängers eine Trajektorie des Anhängers ermittelt, um den Nutzer des Fahrzeugs bei der Fahrt zu unterstützen und/oder um eine automatische Fahrt entlang der ermittelten Trajektorie durchzuführen. Hierzu sind vorteilhaft weitere geometrische Eigenschaften des Fahrzeugs vorgegeben, wie beispielsweise ein Randstand des Fahrzeugs und ein Abstand des Kopplungspunkts von einer hinteren Achse des Fahrzeugs. Während der Fahrt werden vorzugsweise zusätzlich Odometriedaten erfasst, wie eine Raddrehzahl und ein Lenkwinkel. In preferred embodiments, a trajectory of the trailer is determined on the basis of the determined geometric parameter of the trailer in order to support the user of the vehicle when driving and/or to automatically drive along the determined trajectory. For this purpose, further geometric properties of the vehicle are advantageously specified, such as a position at the edge of the vehicle and a distance of the coupling point from a rear axle of the vehicle. While driving, odometry data such as a wheel speed and a steering angle are preferably also recorded.
Gemäß einer Ausführungsform des Verfahrens umfasst der Schritt b) ein Ermitteln einesAccording to one embodiment of the method, step b) includes determining a
Abstands des optisch erfassbaren Merkmals von einer das optische Sensorsignal ausge-
benden optischen Sensoreinrichtung und/oder eines Winkels zwischen einer Sichtlinie zu dem optisch erfassbaren Merkmal und einer Fahrzeugachse des Fahrzeugs. Distance of the optically detectable feature from an optical sensor signal output bending optical sensor device and / or an angle between a line of sight to the optically detectable feature and a vehicle axis of the vehicle.
Der Winkel kann in Bezug auf die Längsachse und/oder in Bezug auf die Querachse bestimmt sein. The angle can be determined in relation to the longitudinal axis and/or in relation to the transverse axis.
Gemäß einer weiteren Ausführungsform des Verfahrens werden die Schritte a), b) und c) für zumindest zwei unterschiedliche Positionen des gekoppelten Anhängers relativ zu dem Fahrzeug durchgeführt, wobei eine Änderung des ermittelten geometrischen Merkmals bei den beiden unterschiedlichen Positionen und eine Änderung des erfassten Knickwinkels in den beiden unterschiedlichen Positionen ermittelt wird und/oder ein Verhältnis dieser Änderungen ermittelt wird, und wobei der Schritt d) in Abhängigkeit der ermittelten jeweiligen Änderung und/oder in Abhängigkeit des ermittelten Verhältnisses durchgeführt wird. According to a further embodiment of the method, steps a), b) and c) are carried out for at least two different positions of the coupled trailer relative to the vehicle, with a change in the determined geometric feature in the two different positions and a change in the detected articulation angle in the two different positions is determined and/or a ratio of these changes is determined, and step d) is carried out as a function of the respective change determined and/or as a function of the ratio determined.
Bei dieser Ausführungsform kann eine Genauigkeit der Bestimmung verbessert sein, da mehr Messdaten berücksichtigt werden, weshalb die statistische Unsicherheit verringert ist. In this embodiment, since more measurement data is taken into account, an accuracy of the determination can be improved, and therefore the statistical uncertainty is reduced.
Gemäß einer weiteren Ausführungsform des Verfahrens umfasst der Schritt d) ein Ermitteln einer Länge des Anhängers von einem Kupplungspunkt bis zu dem optisch erfassbaren Merkmal und/oder einer Breite des Anhängers an der Position des optisch erfassbaren Merkmals umfasst. According to a further embodiment of the method, step d) includes determining a length of the trailer from a coupling point to the optically detectable feature and/or a width of the trailer at the position of the optically detectable feature.
Gemäß einer weiteren Ausführungsform des Verfahrens umfasst das optische Sensorsignal ein Kamerabild umfasst. According to a further embodiment of the method, the optical sensor signal includes a camera image.
Vorzugsweise sind die optischen Eigenschaften, wie eine Auflösung, ein Bildwinkel, eine Ausrichtung der Kamera, und dergleichen der das Kamerabild erfassenden Kamera vorgegeben. Durch eine Bildtransformation lassen sich Bildpunkten dann Richtungen in einem Koordinatensystem des Fahrzeugs zuordnen.
Gemäß einer weiteren Ausführungsform des Verfahrens umfasst das optische Sensorsignal ein Lidar-Signal umfasst. The optical properties, such as a resolution, an angle of view, an alignment of the camera, and the like, of the camera capturing the camera image are preferably specified. Pixels can then be assigned directions in a coordinate system of the vehicle by means of an image transformation. According to a further embodiment of the method, the optical sensor signal includes a lidar signal.
Auf Basis des Lidar-Signals (Lidar: engl. "light detection and ranging") kann der Abstand der optischen Sensoreinrichtung zu dem optisch erfassbaren Merkmal direkt ermittelbar sein. The distance between the optical sensor device and the optically detectable feature can be determined directly on the basis of the lidar signal.
Alternativ zu einem Lidar-Signal kann auch ein Radar-Signal vorgesehen sein, von dem ausgehend der Abstand ebenfalls direkt ermittelbar ist. As an alternative to a lidar signal, a radar signal can also be provided, from which the distance can also be determined directly.
Gemäß einer weiteren Ausführungsform des Verfahrens umfasst das optisch erfassbare Merkmal eine Markierung mit einer bestimmten Struktur. According to a further embodiment of the method, the optically detectable feature comprises a marking with a specific structure.
Die Markierung bewirkt insbesondere eine Modulation von auf die Markierung einfallendem Licht in einer durch die Struktur bestimmten Weise. In particular, the marking effects a modulation of light incident on the marking in a manner determined by the structure.
Die bestimmte Struktur umfasst beispielsweise eine bestimmte Oberflächenstruktur, die einfallende elektromagnetische Strahlung in einer bestimmten Weise reflektiert und/oder absorbiert. Beispielsweise weist die Markierung unterschiedliche Farben auf und/oder in einem vorgegebenen Spektralbereich besonders reflektiv. Die Markierung kann auch als ein optisches Gitter wirken, wobei ein Reflexionsmaximum in Abhängigkeit einer Wellenlänge unter bestimmten Winkeln ermittelbar ist. The specific structure includes, for example, a specific surface structure that reflects and/or absorbs incident electromagnetic radiation in a specific manner. For example, the marking has different colors and/or is particularly reflective in a predetermined spectral range. The marking can also act as an optical grating, in which case a reflection maximum can be determined as a function of a wavelength at certain angles.
Die bestimmte Struktur kann auch eine geometrische Figur umfassen, wie ein Kreuz, einen Kreis, ein Quadrat, und dergleichen mehr, sowie Kombinationen hiervon. Die Markierung ist beispielsweise als ein Aufkleber ausgebildet, der an der Seite des Anhängers angebracht ist. The specified structure may also include a geometric figure, such as a cross, circle, square, and the like, and combinations thereof. The marking is designed, for example, as a sticker that is attached to the side of the trailer.
Bei einer bestimmten Geometrie, wie beispielsweise einem Kreis oder einem Quadrat, dessen Abmessungen vorgegeben ist, kann von dem Bild der der Markierung in dem optischen Sensorsignal beispielsweise unter Verwendung des Strahlensatzes auf den Abstand zu der Markierung geschlossen werden. Da das Bild der Markierung aufgrund der schrägen Sicht in
bestimmter, vom Knickwinkel abhängiger Weise verzerrt ist, kann auch auf den Knickwinkel geschlossen werden, sofern ein Winkel zwischen der Ebene, in der die Markierung sich erstreckt, zu der Längsachse des Anhängers bekannt ist. In diesem Fall kann der Knickwinkel ohne eine separate Messeinrichtung erfasst werden. With a specific geometry, such as a circle or a square, whose dimensions are predetermined, the distance to the marking can be inferred from the image of the marking in the optical sensor signal, for example using the theorem of rays. Since the image of the mark due to the oblique view in is distorted in a certain manner dependent on the articulation angle, the articulation angle can also be inferred if an angle between the plane in which the marking extends and the longitudinal axis of the trailer is known. In this case, the bending angle can be recorded without a separate measuring device.
In Ausführungsformen kann das optisch erfassbare Merkmale eine rotationssymmetrische Struktur aufweisen. Dies kann vorteilhaft sein, wenn das Merkmal beispielsweise auf einem Rad des Anhängers angeordnet ist und sich während der Fahrt mit dem Rad mit dreht. In embodiments, the optically detectable feature can have a rotationally symmetrical structure. This can be advantageous if the feature is arranged, for example, on a wheel of the trailer and rotates with the wheel while driving.
Gemäß einer weiteren Ausführungsform des Verfahrens umfasst die vorgegebene Eigenschaft des Fahrzeugs eine Länge des Fahrzeugs von der optischen Sensoreinrichtung bis zu dem Kupplungspunkt des Anhängers entlang einer Fahrzeugachse. According to a further embodiment of the method, the predefined property of the vehicle includes a length of the vehicle from the optical sensor device to the coupling point of the trailer along a vehicle axis.
Gemäß einer weiteren Ausführungsform des Verfahrens ist eine Position des optisch erfassbaren Merkmals auf dem Anhänger vorgegeben. According to a further embodiment of the method, a position of the optically detectable feature on the tag is specified.
Die vorgegebene Position ist beispielsweise ein hinterer Endpunkt der Seite des Anhängers, eine Achsenposition des Anhängers und/oder eine Position des Anhängers, an der dieser die größte Breite aufweist. The predetermined position is, for example, a rear end point of the side of the trailer, an axle position of the trailer and/or a position of the trailer at which it has the greatest width.
In Ausführungsformen sind mehrere optisch erfassbare Merkmale vorgesehen, die an unterschiedlichen vorgegebenen Positionen des Anhängers angeordnet sind. In embodiments, several optically detectable features are provided, which are arranged at different predetermined positions of the trailer.
Gemäß einer weiteren Ausführungsform des Verfahrens weist die Position einen vorbestimmten Abstand zu einer Radachse und/oder zu einem Endpunkt des Anhängers auf. According to a further embodiment of the method, the position has a predetermined distance from a wheel axle and/or from an end point of the trailer.
Gemäß einer weiteren Ausführungsform des Verfahrens umfasst das optische Sensorsignal zusätzlich eine optisch kodierte Information eines geometrischen Parameters des Anhä- ngers.
Beispielsweise weist das optisch erfassbare Merkmal einen Barcode, einen QR-Code, einenAccording to a further embodiment of the method, the optical sensor signal also includes optically encoded information about a geometric parameter of the trailer. For example, the optically detectable feature has a barcode, a QR code, a
Text, eine Zahl, ein Hologramm oder dergleichen auf. Die optisch codierte Information umfasst insbesondere einen Radstand, eine Gesamtlänge und/oder ein Breite des Anhängers. text, a number, a hologram, or the like. The optically encoded information includes in particular a wheelbase, an overall length and/or a width of the trailer.
In Ausführungsformen kann vorgesehen sein, dass an der Vorderseite des Anhängers, die dem Heck des Fahrzeugs gegenüberliegt, eine zusätzliche optisch erfassbare Markierung für diesen Zweck angeordnet ist. Diese zusätzliche Markierung kann beispielsweise von einer nach hinten gerichteten Kamera, wie einer Heckkamera des Fahrzeugs, erfassbar sein und somit die enthaltene Information ausgelesen werden. In embodiments it can be provided that an additional optically detectable marking for this purpose is arranged on the front of the trailer, which is opposite the rear of the vehicle. This additional marking can be detected, for example, by a rear-facing camera, such as a rear camera of the vehicle, and the information contained can thus be read.
Gemäß einem zweiten Aspekt wird ein Computerprogrammprodukt vorgeschlagen, welches Befehle umfasst, die bei der Ausführung des Programms durch einen Computer diesen veranlassen, das Verfahren gemäß dem ersten Aspekt auszuführen.] According to a second aspect, a computer program product is proposed which comprises instructions which, when the program is executed by a computer, cause the latter to execute the method according to the first aspect.]
Ein Computerprogrammprodukt, wie z.B. ein Computerprogramm-Mittel, kann beispielsweise als Speichermedium, wie z.B. Speicherkarte, USB-Stick, CD-ROM, DVD, oder auch in Form einer herunterladbaren Datei von einem Server in einem Netzwerk bereitgestellt oder geliefert werden. Dies kann zum Beispiel in einem drahtlosen Kommunikationsnetzwerk durch die Übertragung einer entsprechenden Datei mit dem Computerprogrammprodukt oder dem Computerprogramm-Mittel erfolgen. A computer program product, such as a computer program means, can be made available or supplied by a server in a network, for example, as a storage medium such as a memory card, USB stick, CD-ROM, DVD, or in the form of a downloadable file. This can be done, for example, in a wireless communication network by transferring a corresponding file with the computer program product or the computer program means.
Gemäß einem dritten Aspekt wird ein Fahrassistenzsystem für ein Fahrzeug, welches eine Anhängevorrichtung zum Koppeln eines Anhängers mit dem Fahrzeug aufweist, vorgeschlagen. Das Fahrassistenzsystem umfasst eine Empfangseinheit zum Empfangen eines optischen Sensorsignals, welches wenigstens eine Information eines an einer Seite eines mit dem Fahrzeug gekoppelten Anhängers angeordneten optisch erfassbaren Merkmals umfasst, eine Ermittlungseinheit zum Ermitteln eines geometrischen Merkmals des optisch erfassbaren Merkmals in Abhängigkeit des empfangenen Sensorsignals, und eine Erfassungseinheit zum Erfassen eines Knickwinkels des gekoppelten Anhängers. Die Ermittlungseinheit ist ferner zum Ermitteln eines geometrischen Parameters des Anhängers in Abhängigkeit
des ermittelten geometrischen Merkmals, des erfassten Knickwinkels und einer vorgegebenen geometrischen Eigenschaft des Fahrzeugs eingerichtet. According to a third aspect, a driver assistance system for a vehicle, which has a trailer device for coupling a trailer to the vehicle, is proposed. The driver assistance system includes a receiving unit for receiving an optical sensor signal, which includes at least one piece of information of an optically detectable feature arranged on one side of a trailer coupled to the vehicle, a determination unit for determining a geometric feature of the optically detectable feature as a function of the received sensor signal, and a Detection unit for detecting a buckling angle of the coupled trailer. The determining unit is further responsive to determining a geometric parameter of the trailer the determined geometric feature, the detected articulation angle and a predetermined geometric property of the vehicle.
Die für das vorgeschlagene Verfahren genannten Vorteile und Erläuterungen gelten für das vorgeschlagene Fahrassistenzsystem entsprechend. Die für das vorgeschlagene Verfahren beschriebenen Ausführungsformen und Merkmale gelten für das vorgeschlagene Fahrassistenzsystem entsprechend. The advantages and explanations given for the proposed method apply accordingly to the proposed driver assistance system. The embodiments and features described for the proposed method apply accordingly to the proposed driver assistance system.
Das Fahrassistenzsystem kann hardwaretechnisch und/oder softwaretechnisch implementiert sein. Bei einer hardwaretechnischen Implementierung kann das Fahrassistenzsystem zum Beispiel als Computer oder als Mikroprozessor ausgebildet sein. Bei einer softwaretechnischen Implementierung kann das Fahrassistenzsystem als Computerprogrammprodukt, als eine Funktion, als eine Routine, als Teil eines Programmcodes oder als ausführbares Objekt ausgebildet sein. Insbesondere kann das Fahrassistenzsystem als Teil eines übergeordneten Steuerungssystems des Fahrzeugs, wie beispielsweise eine ECU (Engine Control Unit), ausgebildet sein. The driver assistance system can be implemented in terms of hardware and/or software. In the case of a hardware implementation, the driver assistance system can be embodied, for example, as a computer or as a microprocessor. In the case of a software implementation, the driver assistance system can be embodied as a computer program product, as a function, as a routine, as part of a program code or as an executable object. In particular, the driver assistance system can be designed as part of a higher-level control system of the vehicle, such as an ECU (Engine Control Unit).
Die jeweilige Einheit des Fahrassistenzsystems kann hardwaretechnisch und/oder softwaretechnisch implementiert sein. Bei einer hardwaretechnischen Implementierung kann die Einheit zum Beispiel als Computer oder als Mikroprozessor ausgebildet sein. Bei einer softwaretechnischen Implementierung kann die Einheit als Computerprogrammprodukt, als eine Funktion, als eine Routine, als Teil eines Programmcodes oder als ausführbares Objekt ausgebildet sein. The respective unit of the driver assistance system can be implemented in terms of hardware and/or software. In the case of a hardware implementation, the unit can be in the form of a computer or a microprocessor, for example. In the case of a software implementation, the unit can be embodied as a computer program product, as a function, as a routine, as part of a program code or as an executable object.
Gemäß einem vierten Aspekt wird ein Gespann umfassend ein Fahrzeug mit einer Anhängevorrichtung zum Koppeln eines Anhängers und einen Anhänger vorgeschlagen. Das Fahrzeug umfasst eine optische Sensoreinrichtung zum Erfassen eines optischen Sensorsignals, welches wenigstens ein optisch erfassbares Merkmal einer Seite des mit dem Fahrzeug gekoppelten Anhängers umfasst, eine Knickwinkel-Erfassungseinheit zum Erfassen eines
Knickwinkels des Anhängers relativ zu dem Fahrzeug, und ein Fahrassistenzsystem gemäß dem dritten Aspekt. According to a fourth aspect, a vehicle combination comprising a vehicle with a trailer device for coupling a trailer and a trailer is proposed. The vehicle includes an optical sensor device for detecting an optical sensor signal, which includes at least one optically detectable feature of a side of the trailer coupled to the vehicle, an articulation angle detection unit for detecting a Articulation angle of the trailer relative to the vehicle, and a driver assistance system according to the third aspect.
Das Fahrzeug ist beispielsweise einen Personenkraftwagen oder auch einen Lastkraftwagen. Das Fahrzeug umfasst vorzugsweise eine Anzahl an Sensoreinheiten, die zum Erfassen des Fahrzustands des Fahrzeugs und zum Erfassen einer Umgebung des Fahrzeugs eingerichtet sind. Beispiele für derartige Sensoreinheiten des Fahrzeugs sind Bildaufnahmeeinrichtungen, wie eine Kamera, ein Radar (engl. "radio detection and ranging") oder auch ein Lidar (engl. "light detection and ranging"), Ultraschallsensoren, Ortungssensoren, Radwinkelsensoren und/oder Raddrehzahlsensoren. Die Sensoreinheiten sind jeweils zum Ausgeben eines Sensorsignals eingerichtet, beispielsweise an das Fahrassistenzsystem. The vehicle is, for example, a passenger car or a truck. The vehicle preferably includes a number of sensor units that are set up to detect the driving state of the vehicle and to detect an environment of the vehicle. Examples of such sensor units of the vehicle are image recording devices, such as a camera, a radar (radio detection and ranging) or a lidar (light detection and ranging), ultrasonic sensors, location sensors, wheel angle sensors and/or wheel speed sensors. The sensor units are each set up to output a sensor signal, for example to the driver assistance system.
Der Anhänger ist beispielsweise ein Anhänger zum Transport von Transportgut. Der Anhänger weist beispielsweise eine Achse, zwei Achsen, oder auch noch mehr Achsen auf. The trailer is, for example, a trailer for transporting cargo. The trailer has, for example, one axle, two axles, or even more axles.
Gemäß einem weiteren Aspekt wird ein Nachrüstsatz zum Nachrüsten eines Gespanns umfassend ein Fahrzeug mit einer Anhängevorrichtung zum Koppeln eines Anhängers und einen Anhänger vorgeschlagen. Der Nachrüstsatz umfasst eine optische Sensoreinrichtung zum Erfassen eines Bildes und zum Ausgeben eines optischen Sensorsignals, wobei die optische Sensoreinrichtung derart an dem Fahrzeug anordenbar ist, dass ein erfasstes Bild wenigstens einen Teilbereich einer Seite des mit dem Fahrzeug gekoppelten Anhängers umfasst, eine in dem Teilbereich an der Seite des Anhängers anordenbare Markierung, und eine Verarbeitungseinheit, die zum Ausführen des Verfahrens gemäß dem ersten Aspekt auf Basis des von der optischen Sensoreinrichtung ausgegebenen optischen Sensorsignals eingerichtet ist. According to a further aspect, a retrofit kit for retrofitting a combination comprising a vehicle with a trailer device for coupling a trailer and a trailer is proposed. The retrofit kit includes an optical sensor device for capturing an image and for outputting an optical sensor signal, wherein the optical sensor device can be arranged on the vehicle in such a way that a captured image includes at least a partial area of a side of the trailer coupled to the vehicle, one in the partial area on a marking that can be arranged on the side of the trailer, and a processing unit that is set up to carry out the method according to the first aspect on the basis of the optical sensor signal output by the optical sensor device.
Mit diesem Nachrüstsatz ist es vorteilhaft möglich, das erfindungsgemäße Verfahren auch bei Gespannen einzusetzen, die die notwendigen Einrichtungen noch nicht aufweisen.
In Ausführungsformen kann der Nachrüstsatz zusätzlich eine Knickwinkel-Erfassungseinheit zum Erfassen eines Knickwinkels des Anhängers relativ zu dem Fahrzeug umfassen. With this retrofit kit, it is advantageously possible to use the method according to the invention even with trailers that do not yet have the necessary equipment. In embodiments, the retrofit kit can additionally include an articulation angle detection unit for detecting an articulation angle of the trailer relative to the vehicle.
Weitere mögliche Implementierungen der Erfindung umfassen auch nicht explizit genannte Kombinationen von zuvor oder im Folgenden bezüglich der Ausführungsbeispiele beschriebenen Merkmale oder Ausführungsformen. Dabei wird der Fachmann auch Einzelaspekte als Verbesserungen oder Ergänzungen zu der jeweiligen Grundform der Erfindung hinzufügen. Further possible implementations of the invention also include combinations of features or embodiments described above or below with regard to the exemplary embodiments that are not explicitly mentioned. The person skilled in the art will also add individual aspects as improvements or additions to the respective basic form of the invention.
Weitere vorteilhafte Ausgestaltungen und Aspekte der Erfindung sind Gegenstand der Unteransprüche sowie der im Folgenden beschriebenen Ausführungsbeispiele der Erfindung. Im Weiteren wird die Erfindung anhand von bevorzugten Ausführungsformen unter Bezugnahme auf die beigelegten Figuren näher erläutert. Further advantageous refinements and aspects of the invention are the subject matter of the dependent claims and of the exemplary embodiments of the invention described below. The invention is explained in more detail below on the basis of preferred embodiments with reference to the enclosed figures.
Fig. 1 zeigt eine schematische Ansicht eines Fahrzeugs mit daran gekoppeltem Anhänger aus einer Vogelperspektive; 1 shows a schematic view of a vehicle with a trailer coupled thereto from a bird's eye view;
Fig. 2 zeigt eine weitere schematische Ansicht eines Fahrzeugs mit daran gekoppeltem Anhänger aus einer Vogelperspektive; FIG. 2 shows a further schematic view of a vehicle with a trailer coupled thereto from a bird's eye view; FIG.
Fig. 3 zeigt schematisch zwei Ansichten einer Ausführungsform eines optisch erfassbaren Merkmals; 3 schematically shows two views of an embodiment of an optically detectable feature;
Fig. 4 zeigt eine dritte schematische Ansicht eines Fahrzeugs mit daran gekoppeltem Anhänger aus einer Vogelperspektive; 4 shows a third schematic view of a vehicle with a trailer coupled thereto from a bird's eye view;
Fig. 5 zeigt ein schematisches Blockdiagramm eines Ausführungsbeispiels eines Fahrassistenzsystems; und
Fig. 6 zeigt ein schematisches Blockschaltbild eines Ausführungsbeispiels eines Verfahrens zum Betreiben eines Fahrassistenzsystems. 5 shows a schematic block diagram of an exemplary embodiment of a driver assistance system; and FIG. 6 shows a schematic block diagram of an exemplary embodiment of a method for operating a driver assistance system.
In den Figuren sind gleiche oder funktionsgleiche Elemente mit denselben Bezugszeichen versehen worden, sofern nichts anderes angegeben ist. Elements that are the same or have the same function have been provided with the same reference symbols in the figures, unless otherwise stated.
Fig. 1 zeigt eine schematische Ansicht eines Fahrzeugs 100 mit daran gekoppeltem Anhänger 200 aus einer Vogelperspektive. Das Fahrzeug 100 und der Anhänger 200 bilden ein Gespann 300. Das Fahrzeug 100 ist beispielsweise ein Auto. Das Auto 100 weist ein Fahrassistenzsystem 1 10 auf, das beispielsweise als ein Steuergerät ausgebildet ist. Zudem sind an dem Auto 100 eine Mehrzahl an Umgebungssensoreinrichtungen 120, 130 angeordnet, wobei es sich beispielhaft um optische Sensoren 120 und Ultraschallsensoren 130 handelt. Die optischen Sensoren 120 umfassen beispielsweise visuelle Kameras, ein Radar und/oder ein Lidar. Die optischen Sensoren 120 können jeweils ein Bild eines jeweiligen Bereichs aus der Umgebung des Autos 100 erfassen und als optisches Sensorsignal ausgeben. Die Ultraschallsensoren 130 sind zum Erfassen eines Abstands zu in der Umgebung angeordneten Objekten und zum Ausgeben eines entsprechenden Sensorsignals eingerichtet. Mittels den von den Sensoren 120, 130 erfassten Sensorsignalen kann das Fahrassistenzsystem 110 in der Lage sein, das Auto 100 teilautonom oder auch vollautonom zu fahren. Dies gilt sowohl auf den Betrieb des Fahrzeugs 100 mit dem Anhänger 200 als auch ohne den Anhänger 200. Außer den in der Fig. 1 dargestellten optischen Sensoren 120 und Ultraschallsensoren 130 kann vorgesehen sein, dass das Fahrzeug 100 verschiedene weitere Sensoreinrichtungen 120, 130 aufweist. Beispiele hierfür sind ein Mikrofon, ein Beschleunigungssensor, eine Antenne mit gekoppeltem Empfänger zum Empfangen von elektromagnetisch übertragbarer Datensignale, und dergleichen mehr. 1 shows a schematic view of a vehicle 100 with a trailer 200 coupled thereto from a bird's-eye view. The vehicle 100 and the trailer 200 form a combination 300. The vehicle 100 is a car, for example. The car 100 has a driver assistance system 110, which is designed, for example, as a control unit. In addition, a plurality of environment sensor devices 120, 130 are arranged on car 100, these being optical sensors 120 and ultrasonic sensors 130, for example. The optical sensors 120 include, for example, visual cameras, a radar and/or a lidar. The optical sensors 120 can each capture an image of a respective area from the area surrounding the car 100 and output it as an optical sensor signal. The ultrasonic sensors 130 are set up to detect a distance to objects arranged in the surrounding area and to output a corresponding sensor signal. Using the sensor signals detected by sensors 120, 130, driver assistance system 110 may be able to drive car 100 partially or fully autonomously. This applies both to the operation of vehicle 100 with trailer 200 and without trailer 200. In addition to optical sensors 120 and ultrasonic sensors 130 shown in FIG. Examples of this are a microphone, an acceleration sensor, an antenna with a coupled receiver for receiving electromagnetically transmittable data signals, and the like.
Das Fahrzeug 100 weist eine Anhängevorrichtung 102 auf, mit welcher der Anhänger 200 koppelbar ist. In gekoppeltem Zustand bildet der Kupplungspunkt KP einen Fixpunkt im Bezugssystem des Fahrzeugs 100, um welchen sich der Anhänger 200 drehen kann.
Der Anhänger 200 weist in diesem Beispiel zwei Räder (ohne Bezugszeichen) auf, die mit einer Achse 202 des Anhängers 200 verbunden sind. Es handelt sich beispielsweise um eine starre Achse 202. Ein dynamisches Verhalten des Anhängers 200 bei der Fahrt hängt insbesondere von eine Breite AB des Anhängers 200 und einem Radstand AR des Anhängers 200 ab. Der Radstand AR ist hierbei durch den Abstand der Achse 202 von dem Kupplungspunkt KP gegeben. Eine weitere geometrische Größe, die bei einem Fahrmanöver mit dem Anhänger 200 eine zu berücksichtigende Rolle spielt, ist die Gesamtlänge AL des Anhängers 200, die durch den Abstand des Hecks des Anhängers 200 von dem Kupplungspunkt KP gegeben ist. The vehicle 100 has a trailer hitch 102 with which the trailer 200 can be coupled. In the coupled state, the coupling point KP forms a fixed point in the reference system of the vehicle 100, around which the trailer 200 can rotate. In this example, the trailer 200 has two wheels (without reference numbers) which are connected to an axle 202 of the trailer 200 . It is, for example, a rigid axle 202. A dynamic behavior of the trailer 200 when driving depends in particular on a width AB of the trailer 200 and a wheelbase AR of the trailer 200. The wheelbase AR is given here by the distance between the axle 202 and the coupling point KP. Another geometric variable that has to be taken into account during a driving maneuver with the trailer 200 is the total length AL of the trailer 200, which is given by the distance between the rear of the trailer 200 and the coupling point KP.
Der Anhänger weist eine rechte Seite 200A und eine linke Seite 200B auf. An jeder Seite 200A, 200B ist jeweils ein optisch erfassbares Merkmal 210 angeordnet, das beispielsweise als ein Retroreflektor oder eine Fläche mit einem bestimmten Muster oder dergleichen (siehe auch Fig. 3) ausgebildet ist. Insbesondere mit den an den Außenspiegeln des Fahrzeugs 100 angeordneten optischen Sensoren 120 kann eine jeweilige Seite 200A, 200B des Anhängers 200 erfassbar sein. Ob in einem jeweiligen erfassten optischen Sensorsignal die jeweilige Seite 200A, 200B des Anhängers 200 sichtbar ist, hängt beispielsweise von einem aktuellen Knickwinkel (p (siehe Fig. 2) des Anhängers 200 ab. Auf Basis des erfassten optischen Sensorsignals kann wenigstens ein geometrischer Parameter des Anhängers 200, der sich auf die Position des Merkmals 210 bezieht ermittelt werden, wie beispielsweise eine Länge LM von dem Kupplungspunkt KP bis zu dem Merkmal 210 sowie eine Breite von dem Kupplungspunkt KP zu dem Merkmal 210. Dies ist nachfolgend detailliert anhand der Fig. 2 erläutert. The trailer has a right side 200A and a left side 200B. An optically detectable feature 210 is arranged on each side 200A, 200B, which is designed, for example, as a retroreflector or a surface with a specific pattern or the like (see also FIG. 3). A respective side 200A, 200B of the trailer 200 can be detected in particular with the optical sensors 120 arranged on the exterior mirrors of the vehicle 100 . Whether the respective side 200A, 200B of the trailer 200 is visible in a respective detected optical sensor signal depends, for example, on a current articulation angle (p (see Fig. 2) of the trailer 200. On the basis of the detected optical sensor signal, at least one geometric parameter of the Trailer 200, which relates to the position of the feature 210 can be determined, such as a length LM from the coupling point KP to the feature 210 and a width from the coupling point KP to the feature 210. This is detailed below with reference to Fig. 2 explained.
Fig. 2 zeigt eine weitere schematische Ansicht eines Fahrzeugs 100 mit daran gekoppeltem Anhänger 200 aus einer Vogelperspektive. Es handelt sich beispielsweise um das Fahrzeug 100 und den Anhänger 200 der Fig. 1 . In der Fig. 2 sind das Fahrzeug 100 und der Anhänger 200 nicht parallel zueinander angeordnet, sondern es ist ein Knickwinkel (p zwischen der Fahrzeuglängsachse 104 und der Anhängerlängsachse 204 größer 0° vorhanden. Das Fahrzeug 100 weist an den Außenspiegeln angeordnete Kameras 120 auf. Für die Kamera
120 auf der rechten Fahrzeugseite (die Front des Fahrzeugs weist in der Fig. 2 nach unten) ist deren Abstand LO von dem Kupplungspunkt KP entlang der Fahrzeuglängsachse 104 sowie deren Abstand BO von dem Kupplungspunkt KP senkrecht zu der Fahrzeuglängsachse 104 eingezeichnet. Diese geometrischen Eigenschaften basieren auf der Geometrie der Fahrzeugkarosserie und sind fest vorgegeben. FIG. 2 shows a further schematic view of a vehicle 100 with a trailer 200 coupled thereto from a bird's-eye view. This is, for example, the vehicle 100 and the trailer 200 of FIG. 1 . In Fig. 2, the vehicle 100 and the trailer 200 are not arranged parallel to one another, but there is a kink angle (p) between the vehicle longitudinal axis 104 and the trailer longitudinal axis 204 greater than 0°. The vehicle 100 has cameras 120 arranged on the exterior mirrors. For the camera 120 on the right-hand side of the vehicle (the front of the vehicle points downwards in FIG. 2), its distance LO from the coupling point KP along the vehicle longitudinal axis 104 and its distance BO from the coupling point KP perpendicular to the vehicle longitudinal axis 104 are shown. These geometric properties are based on the geometry of the vehicle body and are fixed.
In der dargestellten Situation erfasst die rechte Kamera 120 die rechte Seite 200A des Anhängers 200. An den Seiten 200A, 200B des Anhängers 200 sind jeweils zwei optisch erfassbare Merkmale 210 - 213 angeordnet. Die Merkmale 211 und 213 sind am Heck des Anhängers 200 und die Merkmale 210 und 212 sind auf Höhe der Achse 202 des Anhängers 200 angebracht. Vorzugsweise sind alle Merkmale 210 - 213 unterscheidbar, zumindest sind die beiden auf einer jeweiligen Seite 200A, 200B angebrachten Merkmale 210, 211 sowie 212, 213 voneinander unterscheidbar. In the situation shown, the right-hand camera 120 captures the right-hand side 200A of the trailer 200. Two optically detectable features 210-213 are arranged on each of the sides 200A, 200B of the trailer 200. Features 211 and 213 are located at the rear of trailer 200 and features 210 and 212 are located at axle 202 of trailer 200. All features 210-213 are preferably distinguishable, at least the two features 210, 211 and 212, 213 attached to a respective side 200A, 200B are distinguishable from one another.
Basierend auf dem erfassten Bild der rechten Kamera 120 können verschiedene geometrische Merkmale d1 , d2, a1 , a2 des erfassten Merkmals 210, 211 bestimmbar sein. Dies sind insbesondere ein jeweiliger Winkel a1 , a2, unter dem das jeweilige Merkmal 210, 211 in Bezug auf die Fahrzeuglängsachse 104 in dem erfassten Bild liegt. Je nach verwendeter Technologie kann ein Abstand d1 , d2 des jeweiligen Merkmals 210, 211 von der Kamera 120 direkt ermittelt werden, beispielsweise wenn ein Lidar oder ein Radar verwendet wird. Auf Basis eines erfassten Kamerabildes kann der Abstand d1 , d2 beispielsweise ermittelbar sein, wenn die Abmessungen des jeweiligen Merkmals 210, 211 vorgegeben sind und die Größe des Abbilds des jeweiligen Merkmals 210, 211 ermittelt wird. Based on the recorded image of the right camera 120, different geometric features d1, d2, a1, a2 of the recorded feature 210, 211 can be determined. These are, in particular, a respective angle a1, a2, at which the respective feature 210, 211 lies in relation to the vehicle longitudinal axis 104 in the captured image. Depending on the technology used, a distance d1, d2 of the respective feature 210, 211 can be determined directly by the camera 120, for example if a lidar or a radar is used. The distance d1, d2 can be determined on the basis of a captured camera image, for example, if the dimensions of the respective feature 210, 211 are specified and the size of the image of the respective feature 210, 211 is determined.
Auf Basis der geometrischen Größen d1 , d2, a1 , a2 lässt sich unter Berücksichtigung der Geometrie B0, L0 des Fahrzeugs 100 und des aktuellen Knickwinkels (p ein geometrisches Merkmal AB, AL, AR (siehe Fig. 1) des Anhängers 200 ermitteln. Dies erfolgt insbesondere basierend auf trigonometrischen Betrachtungen unter Einbeziehung der bekannten oder vorgegebenen Größen B0, L0, der auf Basis des optischen Sensorsignals direkt messbaren geometrischen Größen d1 , d2, a1 , a2 sowie des Knickwinkels rp, der entweder von einer
dedizierten Sensoreinheit (nicht gezeigt) erfasst und ausgegeben wird, oder aber ebenfalls auf Basis des optischen Sensorsignals ermittelbar ist. Die trigonometrischen Betrachtungen basieren auf dem durch die vorgegebenen geometrischen Eigenschaften BO, LO definierten Dreieck und dem durch die gesuchten Größen LM, BM (siehe Fig. 1 ) bestimmten Dreieck. Die beiden Dreiecke weisen einen gemeinsamen Punkt auf (den Kupplungspunkt) und der Knickwinkel (p ist eine veränderliche und gemessene Größe. Eine zweite veränderliche gemessene Größe stellt das geometrische Merkmal d1 , d2, a1 , a2 dar, das basierend auf dem Merkmal 210 - 213 erfasst wird. Based on the geometric variables d1, d2, a1, a2, taking into account the geometry B0, L0 of the vehicle 100 and the current articulation angle (p, a geometric feature AB, AL, AR (see Fig. 1) of the trailer 200 can be determined. This takes place in particular based on trigonometric considerations including the known or predetermined sizes B0, L0, the directly measurable geometric sizes d1, d2, a1, a2 on the basis of the optical sensor signal and the kink angle rp, which is either of a dedicated sensor unit (not shown) is detected and output, or can also be determined on the basis of the optical sensor signal. The trigonometric considerations are based on the triangle defined by the given geometric properties BO, LO and the triangle determined by the quantities LM, BM (see FIG. 1) sought. The two triangles share a common point (the point of attachment) and the kink angle (p) is a variable and measured quantity. A second variable measured quantity represents the geometric feature d1 , d2, a1 , a2 that is based on feature 210 - 213 is detected.
Es sei angemerkt, dass eine Länge LM oder Breite BM, die auf Basis des optischen Sensorsignals ermittelbar ist, sich jeweils auf die Position des Merkmals 210 - 213 an dem Anhänger 200 bezieht. Das Merkmal 210 ist auf Höhe der Querachse 202 des Anhängers 200 angebracht, somit wird als Länge LM der Radstand AR des Anhängers 200 ermittelt, das Merkmal 21 1 ist einer hinteren Kante des Anhängers 200 angebracht, somit wird als Länge LM eine Gesamtlänge AL des Anhängers 200 ermittelt. Für eine jeweilige Position des jeweiligen Merkmals 210 - 213 wird zusätzlich ein Abstand des jeweiligen Merkmals 210 - 213 von der Längsachse 204 des Anhängers 200 ermittelt, woraus auf die Breite AB des Anhängers 200 geschlossen werden kann. It should be noted that a length LM or width BM, which can be determined on the basis of the optical sensor signal, relates to the position of the feature 210-213 on the trailer 200, respectively. The feature 210 is attached at the height of the transverse axis 202 of the trailer 200, so the wheelbase AR of the trailer 200 is determined as the length LM, the feature 211 is attached to a rear edge of the trailer 200, so the length LM is an overall length AL of the trailer 200 determined. For a respective position of the respective feature 210-213, a distance of the respective feature 210-213 from the longitudinal axis 204 of the trailer 200 is additionally determined, from which the width AB of the trailer 200 can be inferred.
Fig. 3 zeigt schematisch zwei Ansichten (A), (B) einer Ausführungsform eines optisch erfassbaren Merkmals 210. Das optisch erfassbare Merkmal 210 ist hierbei als ein sich im Wesentlichen in einer zweidimensionalen Ebene erstreckendes Merkmal, wie beispielsweise ein Aufkleber oder eine Gravur in einer ebenen Fläche, ausgebildet. Das Merkmal 210 zeigt einen Kreis mit eingezeichnetem Kreuz, wobei das Merkmal 210 einen Durchmesser B1 aufweist. In der Ansicht (A) ist eine Draufsicht auf das Merkmal 210 gezeigt, wie es beispielsweise von einer Kamera 120 (siehe Fig. 1 , 2 oder 4) erfasst wird, wenn sich das Merkmal 210 in einer Ebene senkrecht zu einer Blickrichtung zu der Kamera 120 erstreckt. Das Merkmal 210 wird hierbei insbesondere unverzerrt abgebildet. In der Ansicht (B) ist das Merkmal 210 gezeigt, wie beispielsweise von der Kamera 120 abgebildet wird, wenn das Merkmal 210 sich in einer Ebene erstreckt, die nicht senkrecht zu der Blickrichtung zu der
Kamera 120 verläuft, sondern beispielsweise einen Winkel von 60° aufweist. Das Merkmal 210 hat dann die scheinbare Breite B1 wobei der Zusammenhang gilt: sin(a) = B17B1 , wobei der Winkel a der Winkel zwischen der Blickrichtung der Kamera 120 und der Erstreckungsebene des Merkmals 210 ist. Sofern das Merkmal 210 sich in einer Ebene erstreckt, die parallel zu der Längsachse 204 des Anhängers 200 ist, dann stimmt der Winkel a mit dem Winkel a1 , a2 der Fig. 2 überein. Fig. 3 shows schematically two views (A), (B) of an embodiment of an optically detectable feature 210. The optically detectable feature 210 is here as a feature extending essentially in a two-dimensional plane, such as a sticker or an engraving in a flat surface formed. Feature 210 shows a circle with a cross drawn in, feature 210 having a diameter B1. Shown in view (A) is a top view of feature 210, for example as captured by a camera 120 (see Figures 1, 2 or 4) when feature 210 is in a plane perpendicular to a line of sight to the camera 120 extends. In this case, the feature 210 is imaged in particular in an undistorted manner. In view (B), the feature 210 is shown, for example, as imaged by the camera 120 when the feature 210 extends in a plane that is not perpendicular to the direction of view of the Camera 120 runs, but has, for example, an angle of 60 °. The feature 210 then has the apparent width B1, where the relationship applies: sin(a)=B17B1, the angle a being the angle between the viewing direction of the camera 120 and the extension plane of the feature 210. If the feature 210 extends in a plane that is parallel to the longitudinal axis 204 of the trailer 200, then the angle a corresponds to the angle a1, a2 of FIG.
Auf Basis der Größe der Abbildung des Merkmals 210 kann auch auf den Abstand d1 , d2 (siehe Fig. 2) zu dem Merkmal 210 geschlossen werden, wenn die optischen Eigenschaften der Kamera 120, wie eine Brennweite und eine Pixelgröße bekannt sind. Hierzu lassen sich strahlenoptische Zusammenhänge, wie der Strahlensatz, anwenden. Based on the size of the image of the feature 210, the distance d1, d2 (see FIG. 2) to the feature 210 can also be inferred if the optical properties of the camera 120, such as a focal length and a pixel size, are known. For this purpose, ray-optical relationships, such as the law of rays, can be applied.
Fig. 4 zeigt eine dritte schematische Ansicht eines Fahrzeugs 100 mit daran gekoppeltem Anhänger 200 aus einer Vogelperspektive. Das Fahrzeug 100 und der Anhänger 200 bilden ein Gespann 300. Es handelt sich bei dem Anhänger 200 beispielsweise um einen Bootsanhänger. Eine Breite des Bootes variiert entlang der Länge des Bootes. Der Nutzer des Fahrzeugs 100, des Anhängers 200 und des Boots hat beispielsweise das Gespann 300 wie folgt nachgerüstet. An jedem Außenspiegel des Fahrzeugs 100 hat der Nutzer eine nach hinten gerichtete Kamera 120 angeordnet und an dem Anhänger 200 sowie an dem Boot an insgesamt sechs Positionen (drei je Seite) jeweils eine Markierung 210 - 215 angebracht, die in einem von den Kameras 120 erfassten Bild erkennbar sein können. Die Markierungen 210 — 215 können beispielsweise ein Muster wie das optisch erfassbare Merkmal 210 der Fig. 3 aufweisen und als Aufkleber ausgebildet sein. Vorzugsweise sind die Markierungen 210 — 215 voneinander unterscheidbar. Zudem hat der Nutzer eine Verarbeitungseinheit 105 bereitgestellt, die zum Ausführen des anhand der Fig. 6 beschriebenen Verfahrens eingerichtet ist. Die Verarbeitungseinheit 105 kann ein Bestandteil eines Fahrassistenzsystems 1 10 (siehe Fig. 1 oder 5) bilden. Insbesondere kann die Verarbeitungseinheit 105 softwaretechnisch als Computerprogrammprodukt, als eine Funktion, als eine Routine, als Teil eines Programmcodes oder als ausführbares Objekt ausgebildet sein.
Auf Basis der mittels der Kameras 120 optisch erfassbaren Merkmale 210 - 215, die an der Seite des Bootes und auf der Achse 202 des Anhängers 200 angeordnet sind, lassen sich wie anhand der Fig. 2 oder 3 beschrieben eine Länge L13, L14, L15 von dem Kupplungspunkt KP bis zu dem jeweiligen Merkmal 213, 214, 215 entlang einer Längsachse des Anhängers 200 sowie eine Breite B15 von der Längsachse bis zu dem jeweiligen Merkmal 215 ermitteln. In der Fig. 4 ist aus Gründen der Übersicht die Breite nur für das Merkmal 215 angedeutet. FIG. 4 shows a third schematic view of a vehicle 100 with a trailer 200 coupled thereto from a bird's-eye view. The vehicle 100 and the trailer 200 form a combination 300. The trailer 200 is a boat trailer, for example. A width of the boat varies along the length of the boat. For example, the user of the vehicle 100, the trailer 200, and the boat retrofitted the trailer 300 as follows. The user has arranged a rear-facing camera 120 on each exterior mirror of the vehicle 100 and has attached a marking 210 - 215 to the trailer 200 and to the boat at a total of six positions (three per side), which are recorded in one of the cameras 120 image can be seen. The markings 210-215 can, for example, have a pattern like the optically detectable feature 210 of FIG. 3 and can be in the form of a sticker. Preferably, the markings 210-215 are distinguishable from one another. In addition, the user has provided a processing unit 105 that is set up to execute the method described with reference to FIG. 6 . The processing unit 105 can form part of a driver assistance system 110 (see FIG. 1 or 5). In particular, the processing unit 105 can be embodied in terms of software as a computer program product, as a function, as a routine, as part of a program code or as an executable object. Based on the optically detectable features 210 - 215 by means of the cameras 120, which are arranged on the side of the boat and on the axle 202 of the trailer 200, a length L13, L14, L15 of the coupling point KP to the respective feature 213, 214, 215 along a longitudinal axis of the trailer 200 and a width B15 from the longitudinal axis to the respective feature 215. In FIG. 4, for reasons of clarity, the width is indicated only for feature 215.
Bei diesem Beispiel können damit für jede Seite des Bootes/Anhängers 200 drei Längenmaße L13, L14, L15 und drei Breitenmaße B15 ermittelt werden. Die ermittelbaren Maße können hilfreich sein, um das Fahrverhalten des Anhängers 200 vorherzusagen und eine Trajek- torie des Anhängers 200 zu bestimmen. Insbesondere bei einer Rückwärtsfahrt des Gespanns 300 kann der Fahrer des Fahrzeugs 100 damit effektiv unterstützt werden. Es ist auch ein teil- oder vollautonomes Fahren des Gespanns 300 möglich. In this example, three length measurements L13, L14, L15 and three width measurements B15 can be determined for each side of the boat/trailer 200. The measurements that can be determined can be helpful in order to predict the driving behavior of the trailer 200 and to determine a trajectory of the trailer 200 . The driver of vehicle 100 can thus be effectively assisted, in particular when the combination 300 is reversing. Partially or fully autonomous driving of the combination 300 is also possible.
Fig. 5 zeigt ein schematisches Blockdiagramm eines Ausführungsbeispiels eines Fahrassistenzsystems 110, beispielsweise jenes des Fahrzeugs 100 der Fig. 1. Das Fahrzeug 100 weist insbesondere eine Anhängevorrichtung 102 (siehe Fig. 1 , 2 oder 4) zum Koppeln eines Anhängers 200 (siehe Fig. 1 , 2 oder 4) auf. Das Fahrassistenzsystem 110 umfasst eine Empfangseinheit 112 zum Empfangen eines optischen Sensorsignals SIG, welches wenigstens eine Information eines an einer Seite 200A, 200B (siehe Fig. 1) eines mit dem Fahrzeug 100 gekoppelten Anhängers 200 (siehe Fig. 1 , 2, oder 4) angeordneten optisch erfassbaren Merkmals 210 - 215 (siehe Fig. 1 - 4), eine Ermittlungseinheit 114 zum Ermitteln eines geometrischen Merkmals a1 , a2, d1 , d2 (siehe Fig. 2) des optisch erfassbaren Merkmals 210 — 215 in Abhängigkeit des empfangenen Sensorsignals SIG, und eine Erfassungseinheit 116 zum Erfassen eines Knickwinkels (p (siehe Fig. 2) des gekoppelten Anhängers 200. Die Ermittlungseinheit 114 ist ferner zum Ermitteln eines geometrischen Parameters AB, AL, AR, BM, LM (siehe Fig. 1) des Anhängers 200 in Abhängigkeit des ermittelten geometrischen Merkmals a1 , a2, d1 , d2, des erfassten Knickwinkels (p und einer vorgegebenen geometrischen Eigenschaft B0, L0 (siehe Fig. 2) des Fahrzeugs 100 eingerichtet.
Fig. 6 zeigt ein schematisches Blockschaltbild eines Ausführungsbeispiels eines Verfahrens zum Betreiben eines Fahrassistenzsystems 110 (siehe Fig. 1 oder 5) für ein Fahrzeug 100 (siehe Fig. 1 , 2 oder 4), das eine Anhängevorrichtung 102 (siehe Fig. 1 , 2 oder 4) zum Koppeln eines Anhängers 200 (siehe Fig. 1 , 2 oder 4) aufweist. In einem ersten Schritt S1 wird ein optisches Sensorsignal SIG (siehe Fig. 5) empfangen, welches wenigstens eine Information eines an einer Seite 200A, 200B (siehe Fig. 1 ) des mit dem Fahrzeug 100 gekoppelten Anhängers 200 angeordneten optisch erfassbaren Merkmals 210 - 215 (siehe Fig. 1 - 4) umfasst. In einem zweiten Schritt S2 wird ein geometrisches Merkmal a1 , a2, d1 , d2 (siehe Fig. 2) des optisch erfassbaren Merkmals 210 - 215 in Abhängigkeit des empfangenen Sensorsignals SIG ermittelt. In einem dritten Schritt S3 wird ein Knickwinkel (p (siehe Fig. 2) des gekoppelten Anhängers 200 erfasst. In einem vierten Schritt S4 wird ein geometrischer Parameter AB, AL, AR, BM, LM (siehe Fig. 1 ) des Anhängers 200 in Abhängigkeit des ermittelten geometrischen Merkmals a1 , a2, d1 , d2, des erfassten Knickwinkels (p und einer vorgegebenen geometrischen Eigenschaft B0, L0 (siehe Fig. 2) des Fahrzeugs 100 ermittelt. Fig. 5 shows a schematic block diagram of an exemplary embodiment of a driver assistance system 110, for example that of vehicle 100 in Fig. 1. Vehicle 100 has, in particular, a trailer device 102 (see Fig. 1, 2 or 4) for coupling a trailer 200 (see Fig. 1 , 2 or 4). Driver assistance system 110 includes a receiving unit 112 for receiving an optical sensor signal SIG, which contains at least one piece of information of a trailer 200 (see FIG. 1, 2, or 4) coupled to vehicle 100 on one side 200A, 200B (see FIG. 1). arranged optically detectable feature 210 - 215 (see Fig. 1 - 4), a determination unit 114 for determining a geometric feature a1, a2, d1, d2 (see Fig. 2) of the optically detectable feature 210 - 215 depending on the received sensor signal SIG , and a detection unit 116 for detecting an articulation angle (p (see Fig. 2) of the coupled trailer 200. The determination unit 114 is also for determining a geometric parameter AB, AL, AR, BM, LM (see Fig. 1) of the trailer 200 as a function of the determined geometric feature a1, a2, d1, d2, the detected articulation angle (p and a predetermined geometric property B0, L0 (see FIG. 2) of vehicle 100 set up. Fig. 6 shows a schematic block diagram of an exemplary embodiment of a method for operating a driver assistance system 110 (see Fig. 1 or 5) for a vehicle 100 (see Fig. 1, 2 or 4) which has a trailer device 102 (see Fig. 1, 2 or 4) for coupling a trailer 200 (see Figures 1, 2 or 4). In a first step S1, an optical sensor signal SIG (see Fig. 5) is received, which contains at least one piece of information of an optically detectable feature 210 - 215 arranged on one side 200A, 200B (see Fig. 1) of the trailer 200 coupled to the vehicle 100 (see Figures 1-4). In a second step S2, a geometric feature a1, a2, d1, d2 (see FIG. 2) of the optically detectable feature 210-215 is determined as a function of the received sensor signal SIG. In a third step S3, an articulation angle (p (see Fig. 2) of the coupled trailer 200 is detected. In a fourth step S4, a geometric parameter AB, AL, AR, BM, LM (see Fig. 1) of the trailer 200 in Dependency of the determined geometric feature a1, a2, d1, d2, the detected articulation angle (p and a predetermined geometric property B0, L0 (see Fig. 2) of the vehicle 100 is determined.
Das Verfahren wird vorzugsweise mit dem Fahrassistenzsystem 1 10 gemäß der Fig. 5 und mit einem Gespann 300 gemäß einer der Fig. 1 , 2 oder 4 durchgeführt. The method is preferably carried out with the driver assistance system 110 according to FIG. 5 and with a vehicle combination 300 according to one of FIGS. 1, 2 or 4.
Obwohl die vorliegende Erfindung anhand von Ausführungsbeispielen beschrieben wurde, ist sie vielfältig modifizierbar.
Although the present invention has been described using exemplary embodiments, it can be modified in many ways.
BEZUGSZEICHENLISTE REFERENCE LIST
100 Fahrzeug 100 vehicle
102 Anhängevorrichtung102 hitch
104 Längsachse 104 longitudinal axis
105 Verarbeitungseinheit105 processing unit
110 Fahrassistenzsystem110 driver assistance system
112 Empfangseinheit112 receiving unit
114 Ermittlungseinheit114 investigative unit
116 Erfassungseinheit116 registration unit
120 optischer Sensor120 optical sensor
130 Ultraschallsensor130 ultrasonic sensor
200 Anhänger 200 followers
200A Seite 200A side
200B Seite 200B page
202 Achse 202 axis
204 Längsachse 204 longitudinal axis
210 Merkmal 210 feature
211 Merkmal 211 feature
212 Merkmal 212 feature
213 Merkmal 213 feature
214 Merkmal 214 feature
215 Merkmal 215 feature
300 Gespann cd Winkel a2 Winkel cp Knickwinkel 300 team cd angle a2 angle cp articulation angle
AB Breite AB width
AL Länge
AR Radstand AL length AR wheelbase
BO Abstand BO distance
B1 Breite B1 width
B1 ' Breite B15 Breite B1' width B15 width
BM Breite d1 Abstand d2 Abstand BM width d1 distance d2 distance
LO Abstand L13 Länge LO distance L13 length
L14 Länge L14 length
L15 Länge L15 length
LM Länge LM length
KP Kupplungspunkt S1 VerfahrensschrittKP coupling point S1 process step
52 Verfahrensschritt52 process step
53 Verfahrensschritt53 process step
54 Verfahrensschritt
54 process step
Claims
1. Verfahren zum Betreiben eines Fahrassistenzsystems (1 10) für ein Fahrzeug (100), welches eine Anhängevorrichtung (102) zum Koppeln eines Anhängers (200) mit dem Fahrzeug (100) aufweist, wobei das Verfahren umfasst: a) Empfangen (S1 ) eines optischen Sensorsignals (SIG), welches wenigstens eine Information eines an einer Seite (200A, 200B) eines mit dem Fahrzeug (100) gekoppelten Anhängers (200) angeordneten optisch erfassbaren Merkmals (210) umfasst, b) Ermitteln (S2) eines geometrischen Merkmals (d1 , d2, cd , a2) des optisch erfassbaren Merkmals (210) in Abhängigkeit des empfangenen Sensorsignals (SIG), c) Erfassen (S3) eines Knickwinkels (q>) des gekoppelten Anhängers (200), und d) Ermitteln (S4) eines geometrischen Parameters (AB, AL, AR) des Anhängers (200) in Abhängigkeit des ermittelten geometrischen Merkmals (d1 , d2, a1 , a2), des erfassten Knickwinkels (rp) und einer vorgegebenen geometrischen Eigenschaft (B0, L0) des Fahrzeugs (100). 1. A method for operating a driver assistance system (1 10) for a vehicle (100), which has a hitch (102) for coupling a trailer (200) to the vehicle (100), the method comprising: a) receiving (S1) an optical sensor signal (SIG), which comprises at least one piece of information of an optically detectable feature (210) arranged on one side (200A, 200B) of a trailer (200) coupled to the vehicle (100), b) determining (S2) a geometric feature (d1, d2, cd, a2) of the optically detectable feature (210) as a function of the received sensor signal (SIG), c) detecting (S3) a kink angle (q>) of the coupled trailer (200), and d) determining (S4 ) a geometric parameter (AB, AL, AR) of the trailer (200) depending on the determined geometric feature (d1, d2, a1, a2), the detected articulation angle (rp) and a predetermined geometric property (B0, L0) of the vehicle (100).
2. Verfahren nach Anspruch 1 , dadurch gekennzeichnet, dass der Schritt b) ein Ermitteln eines Abstands (d1 , d2) des optisch erfassbaren Merkmals (210) von einer das optische Sensorsignal (SIG) ausgebenden optischen Sensoreinrichtung (120) und/oder eines Winkels (cd , a2) zwischen einer Sichtlinie zu dem optisch erfassbaren Merkmal (210) und einer Fahrzeugachse (104) des Fahrzeugs (100) umfasst. 2. The method according to claim 1, characterized in that step b) determining a distance (d1, d2) of the optically detectable feature (210) from an optical sensor device (120) outputting the optical sensor signal (SIG) and/or an angle (cd, a2) between a line of sight to the optically detectable feature (210) and a vehicle axis (104) of the vehicle (100).
3. Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass die Schritte a), b) und c) für zumindest zwei unterschiedliche Positionen des gekoppelten Anhängers (200) relativ zu dem Fahrzeug (100) durchgeführt werden, wobei eine Änderung des ermittelten geometrischen Merkmals (d1 , d2, cd , a2) bei den beiden unterschiedlichen Positionen und eine Änderung des erfassten Knickwinkels (rp) in den beiden unterschiedlichen Positionen ermittelt wird und/oder ein Verhältnis dieser Änderungen ermittelt wird, und wobei der Schritt d) in Abhängigkeit der ermittelten jeweiligen Änderung und/oder in Abhängigkeit des ermittelten Verhältnisses durchgeführt wird.
3. The method according to claim 1 or 2, characterized in that steps a), b) and c) are performed for at least two different positions of the coupled trailer (200) relative to the vehicle (100), with a change in the determined geometric Feature (d1, d2, cd, a2) in the two different positions and a change in the detected articulation angle (rp) is determined in the two different positions and / or a ratio of these changes is determined, and step d) depending on the determined respective change and / or is carried out as a function of the determined ratio.
4. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass der Schritt d) ein Ermitteln einer Länge des Anhängers (200) von einem Kupplungspunkt (KP) bis zu dem optisch erfassbaren Merkmal (210) und/oder einer Breite des Anhängers (200) an der Position des optisch erfassbaren Merkmals (210) umfasst. 4. The method according to any one of the preceding claims, characterized in that step d) involves determining a length of the trailer (200) from a coupling point (KP) to the optically detectable feature (210) and/or a width of the trailer (200 ) at the position of the optically detectable feature (210).
5. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das optische Sensorsignal (SIG) ein Kamerabild umfasst. 5. The method according to any one of the preceding claims, characterized in that the optical sensor signal (SIG) comprises a camera image.
6. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das optische Sensorsignal (SIG) ein Lidar-Signal umfasst. 6. The method according to any one of the preceding claims, characterized in that the optical sensor signal (SIG) comprises a lidar signal.
7. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das optisch erfassbare Merkmal (210) eine Markierung mit einer bestimmten Struktur umfasst. 7. The method according to any one of the preceding claims, characterized in that the optically detectable feature (210) comprises a marking with a specific structure.
8. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die vorgegebene Eigenschaft (B0, L0) des Fahrzeugs (100) eine Länge des Fahrzeugs (100) von der optischen Sensoreinrichtung (120) bis zu dem Kupplungspunkt (KP) des Anhängers (200) entlang einer Fahrzeugachse (104) umfasst. 8. The method according to any one of the preceding claims, characterized in that the predetermined property (B0, L0) of the vehicle (100) is a length of the vehicle (100) from the optical sensor device (120) to the coupling point (KP) of the trailer ( 200) along a vehicle axis (104).
9. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass eine Position des optisch erfassbaren Merkmals (210) auf dem Anhänger (200) vorgegeben ist. 9. The method according to any one of the preceding claims, characterized in that a position of the optically detectable feature (210) on the trailer (200) is specified.
10. Verfahren nach Anspruch 9, dadurch gekennzeichnet, dass die Position einen vorbestimmten Abstand zu einer Radachse (202) und/oder zu einem Endpunkt des Anhängers (200) aufweist.
10. The method according to claim 9, characterized in that the position has a predetermined distance from a wheel axle (202) and/or from an end point of the trailer (200).
11 . Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das optische Sensorsignal (SIG) zusätzlich eine optisch kodierte Information eines geometrischen Parameters (AB, AL, AR) des Anhängers (200) umfasst. 11 . Method according to one of the preceding claims, characterized in that the optical sensor signal (SIG) additionally includes optically encoded information of a geometric parameter (AB, AL, AR) of the trailer (200).
12. Computerprogrammprodukt, umfassend Befehle, die bei der Ausführung des Programms durch einen Computer diesen veranlassen, das Verfahren nach einem der Ansprüche 1 - 1 1 auszuführen. 12. Computer program product comprising instructions which, when the program is executed by a computer, cause the computer to execute the method according to any one of claims 1-11.
13. Fahrassistenzsystem (110) für ein Fahrzeug (100), welches eine Anhängevorrichtung (102) zum Koppeln eines Anhängers (200) mit dem Fahrzeug (100) aufweist, wobei das Fahrassistenzsystem (110) umfasst: eine Empfangseinheit (112) zum Empfangen eines optischen Sensorsignals (SIG), welches wenigstens eine Information eines an einer Seite (200A, 200B) eines mit dem Fahrzeug (100) gekoppelten Anhängers (200) angeordneten optisch erfassbaren Merkmals (210) umfasst, eine Ermittlungseinheit (1 14) zum Ermitteln eines geometrischen Merkmals (d1 , d2, a1 , a2) des optisch erfassbaren Merkmals (210) in Abhängigkeit des empfangenen Sensorsignals (SIG), eine Erfassungseinheit (1 16) zum Erfassen eines Knickwinkels (rp) des gekoppelten Anhängers (200), wobei die Ermittlungseinheit (114) ferner zum Ermitteln eines geometrischen Parameters (AB, AL, AR) des Anhängers (200) in Abhängigkeit des ermittelten geometrischen Merkmals(d1 , d2, a1 , a2), des erfassten Knickwinkels (rp) und einer vorgegebenen geometrischen Eigenschaft (B0, L0) des Fahrzeugs (100) eingerichtet ist. 13. Driver assistance system (110) for a vehicle (100), which has a hitch (102) for coupling a trailer (200) to the vehicle (100), wherein the driver assistance system (110) comprises: a receiving unit (112) for receiving a optical sensor signal (SIG), which comprises at least one piece of information of an optically detectable feature (210) arranged on one side (200A, 200B) of a trailer (200) coupled to the vehicle (100), a determination unit (1 14) for determining a geometric Feature (d1, d2, a1, a2) of the optically detectable feature (210) as a function of the received sensor signal (SIG), a detection unit (1 16) for detecting an articulation angle (rp) of the coupled trailer (200), wherein the determination unit ( 114) also to determine a geometric parameter (AB, AL, AR) of the trailer (200) depending on the determined geometric feature (d1, d2, a1, a2), the detected articulation angle (rp) and a predetermined geometric property (B0, L0) of the vehicle (100) is set up.
14. Gespann (300) mit einem Fahrzeug (100) mit einer Anhängevorrichtung (102) zum Koppeln eines Anhängers (200) und mit einem Anhänger (200), wobei das Fahrzeug (100) eine optische Sensoreinrichtung (120) zum Erfassen eines optischen Sensorsignals (SIG), welches wenigstens ein optisch erfassbares Merkmal (210) einer Seite (200A, 200B) des mit dem Fahrzeug (100) gekoppelten Anhängers (200) umfasst, eine Knickwinkel-
Erfassungseinheit zum Erfassen eines Knickwinkels (cp) des Anhängers (200) relativ zu dem14. Team (300) with a vehicle (100) with a hitch (102) for coupling a trailer (200) and with a trailer (200), wherein the vehicle (100) has an optical sensor device (120) for detecting an optical sensor signal (SIG) comprising at least one optically detectable feature (210) of a side (200A, 200B) of the trailer (200) coupled to the vehicle (100), an articulation angle Detection unit for detecting a buckling angle (cp) of the trailer (200) relative to the
Fahrzeug (100), und ein Fahrassistenzsystem (110) nach Anspruch 13 umfasst. Vehicle (100), and a driver assistance system (110) according to claim 13.
15. Nachrüstsatz zum Nachrüsten eines Gespanns (300) umfassend ein Fahrzeug (100) mit einer Anhängevorrichtung (102) und einen Anhänger (200), der mittels der Anhängevorrichtung (102) mit dem Fahrzeug (100) koppelbar ist, wobei der Nachrüstsatz umfasst: eine optische Sensoreinrichtung (120) zum Erfassen eines Bildes und zum Ausgeben eines optischen Sensorsignals (SIG), wobei die optische Sensoreinrichtung (120) derart an dem Fahrzeug (100) anordenbar ist, dass ein erfasstes Bild wenigstens einen Teilbereich einer Seite (200A, 200B) des mit dem Fahrzeug (100) gekoppelten Anhängers (200) umfasst, eine in dem Teilbereich an der Seite (200A, 200B) des Anhängers (200) anordenbare Markierung (210), und eine Verarbeitungseinheit (105), die zum Ausführen des Verfahrens nach einem der Ansprüche 1 - 11 auf Basis des von der optischen Sensoreinrichtung (120) ausgegebenen optischen Sensorsignals (SIG) eingerichtet ist.
15. Retrofit kit for retrofitting a combination (300) comprising a vehicle (100) with a trailer hitch (102) and a trailer (200) which can be coupled to the vehicle (100) by means of the trailer hitch (102), the retrofit kit comprising: an optical sensor device (120) for capturing an image and for outputting an optical sensor signal (SIG), wherein the optical sensor device (120) can be arranged on the vehicle (100) in such a way that a captured image shows at least a partial area of a side (200A, 200B ) of the trailer (200) coupled to the vehicle (100), a marker (210) that can be arranged in the partial area on the side (200A, 200B) of the trailer (200), and a processing unit (105) for executing the method according to one of Claims 1 - 11 based on the optical sensor signal (SIG) output by the optical sensor device (120).
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102020129455.7 | 2020-11-09 | ||
DE102020129455.7A DE102020129455A1 (en) | 2020-11-09 | 2020-11-09 | METHOD OF OPERATING A DRIVING ASSISTANCE SYSTEM, COMPUTER PROGRAM PRODUCT, DRIVING ASSISTANCE SYSTEM, HARNESS AND RETROFIT KIT |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2022096255A1 true WO2022096255A1 (en) | 2022-05-12 |
Family
ID=78413984
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/EP2021/078895 WO2022096255A1 (en) | 2020-11-09 | 2021-10-19 | Method for operating a driving assistance system, computer program product, driving assistance system, pairing and retrofit kit |
Country Status (2)
Country | Link |
---|---|
DE (1) | DE102020129455A1 (en) |
WO (1) | WO2022096255A1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP4375142A1 (en) * | 2022-11-23 | 2024-05-29 | Volvo Truck Corporation | Computer system and method for determination a length of a vehicle and related vehicle, computer program, control system and computer storage medium |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20140160276A1 (en) | 2012-09-26 | 2014-06-12 | Magna Electronics Inc. | Vehicle vision system with trailer angle detection |
US20170083773A1 (en) | 2007-03-21 | 2017-03-23 | Ford Global Technologies, Llc | Vehicle trailer angle detection system and method |
US20180056868A1 (en) * | 2016-09-01 | 2018-03-01 | GM Global Technology Operations LLC | Method and apparatus to determine trailer pose |
US20180356214A1 (en) * | 2017-06-09 | 2018-12-13 | Valeo Schalter Und Sensoren Gmbh | Method for characterizing a trailer attached to a towing vehicle, driver assistance system, as well as vehicle/trailer combination |
US20190210418A1 (en) * | 2018-01-08 | 2019-07-11 | Hall Labs Llc | Trailer and a tow vehicle path optimization |
WO2020207572A1 (en) * | 2019-04-09 | 2020-10-15 | Volvo Truck Corporation | Method for estimating wheel base length of a trailer of a vehicle combination comprising more than one articulation angle |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102018120966A1 (en) | 2018-08-28 | 2020-03-05 | Connaught Electronics Ltd. | Method for recognizing a part of a trailer and trailer detection system for a towing vehicle |
-
2020
- 2020-11-09 DE DE102020129455.7A patent/DE102020129455A1/en active Pending
-
2021
- 2021-10-19 WO PCT/EP2021/078895 patent/WO2022096255A1/en active Application Filing
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20170083773A1 (en) | 2007-03-21 | 2017-03-23 | Ford Global Technologies, Llc | Vehicle trailer angle detection system and method |
US20140160276A1 (en) | 2012-09-26 | 2014-06-12 | Magna Electronics Inc. | Vehicle vision system with trailer angle detection |
US20180056868A1 (en) * | 2016-09-01 | 2018-03-01 | GM Global Technology Operations LLC | Method and apparatus to determine trailer pose |
US20180356214A1 (en) * | 2017-06-09 | 2018-12-13 | Valeo Schalter Und Sensoren Gmbh | Method for characterizing a trailer attached to a towing vehicle, driver assistance system, as well as vehicle/trailer combination |
US20190210418A1 (en) * | 2018-01-08 | 2019-07-11 | Hall Labs Llc | Trailer and a tow vehicle path optimization |
WO2020207572A1 (en) * | 2019-04-09 | 2020-10-15 | Volvo Truck Corporation | Method for estimating wheel base length of a trailer of a vehicle combination comprising more than one articulation angle |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP4375142A1 (en) * | 2022-11-23 | 2024-05-29 | Volvo Truck Corporation | Computer system and method for determination a length of a vehicle and related vehicle, computer program, control system and computer storage medium |
Also Published As
Publication number | Publication date |
---|---|
DE102020129455A1 (en) | 2022-05-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP1593552B1 (en) | System and method for monitoring a car trailer | |
EP2551132B1 (en) | Method and device for determining the total length of a trailer | |
DE102011120814B4 (en) | Method and device for determining an angle between a towing vehicle and a trailer coupled thereto | |
WO2018046257A1 (en) | Sensor array for an autonomously operated utility vehicle and method for surround-view image acquisition | |
DE102014219326A1 (en) | Sensor fusion with smartphone in the vehicle | |
DE102016209418A1 (en) | Operating a team by measuring the relative position of an information carrier via a read-out device | |
DE102014216635A1 (en) | TRAILER IDENTIFICATION SYSTEM FOR PENDANT REVERSE AID | |
WO2016026568A1 (en) | Method and axle-counting device for contact-free axle counting of a vehicle and axle-counting system for road traffic | |
DE102008045436A1 (en) | Method for determining inclination angle between tractor and trailer for e.g. lorry, involves automatically determining inclination angle based on comparison of detected image with reference images and reference image inclination angle | |
DE102004050149A1 (en) | Drawbar and trailer angle determining method, involves ascertaining drawbar and trailer`s characteristic edges and lines from video stream of sensor e.g. video camera, and determining angles from geometrical conditions of characteristic | |
DE102014204872B4 (en) | A method and display system for displaying environmental information of a vehicle | |
DE102009032024A1 (en) | A method for determining a position of a trailer attached to a vehicle relative to the vehicle and driver assistance system for a vehicle | |
DE102019106275A1 (en) | Acquisition system and method for determining an articulation angle between two sub-vehicles of a vehicle combination and vehicle combination | |
DE102017223098A1 (en) | Method and device for determining a relative angle between two vehicles | |
EP2949532A2 (en) | Method and driver assistance system for assisting a driver of a commercial vehicle | |
DE102014223141B4 (en) | Determining a position of a trailer hitch head | |
DE102018200861A1 (en) | Method and device for video-based monitoring of a component element of a freight motor vehicle | |
WO2022096255A1 (en) | Method for operating a driving assistance system, computer program product, driving assistance system, pairing and retrofit kit | |
DE102021201525A1 (en) | Method for determining a spatial orientation of a trailer | |
DE102020112549A1 (en) | Method for measuring an add-on part arranged on a vehicle on the basis of images from a mobile terminal, computing device and driver assistance system | |
DE102015210816B4 (en) | Procedure for a trailer shunting assistant | |
WO2006128502A1 (en) | Method for detecting an imminent accident when a vehicle is travelling in front | |
EP4103413A1 (en) | Method and system for ascertaining an orientation of a trailer relative to a tractor vehicle | |
DE102016219390A1 (en) | Method for stabilizing a motor vehicle combination, tractor and motor vehicle combination | |
DE102018001529A1 (en) | Device for maneuvering a vehicle combination |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 21798968 Country of ref document: EP Kind code of ref document: A1 |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 21798968 Country of ref document: EP Kind code of ref document: A1 |