EP3519853A1 - Optical sensor for distance and/or speed measurement, system for mobility monitoring of autonomous vehicles, and method for mobility monitoring of autonomous vehicles - Google Patents

Optical sensor for distance and/or speed measurement, system for mobility monitoring of autonomous vehicles, and method for mobility monitoring of autonomous vehicles

Info

Publication number
EP3519853A1
EP3519853A1 EP17772040.6A EP17772040A EP3519853A1 EP 3519853 A1 EP3519853 A1 EP 3519853A1 EP 17772040 A EP17772040 A EP 17772040A EP 3519853 A1 EP3519853 A1 EP 3519853A1
Authority
EP
European Patent Office
Prior art keywords
optical sensor
light signal
light
identification information
modulation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
EP17772040.6A
Other languages
German (de)
French (fr)
Inventor
Johannes Grabowski
Thilo Grundmann
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Publication of EP3519853A1 publication Critical patent/EP3519853A1/en
Withdrawn legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483—Details of pulse systems
    • G01S7/484—Transmitters
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06—Systems determining position data of a target
    • G01S17/08—Systems determining position data of a target for measuring distance only
    • G01S17/10—Systems determining position data of a target for measuring distance only using transmission of interrupted, pulse-modulated waves
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06—Systems determining position data of a target
    • G01S17/46—Indirect determination of position data
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/50—Systems of measurement based on relative movement of target
    • G01S17/58—Velocity or trajectory determination systems; Sense-of-movement determination systems
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88—Lidar systems specially adapted for specific applications
    • G01S17/93—Lidar systems specially adapted for specific applications for anti-collision purposes
    • G01S17/931—Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles

Definitions

  • Optical sensor for distance and / or speed measurement system for mobility monitoring of autonomous vehicles and method for monitoring the mobility of autonomous vehicles
  • the invention is based on an optical sensor for distance and / or speed measurement according to the preamble of claim 1. Furthermore, the present invention is based on a system for monitoring the mobility of autonomous vehicles according to the preamble of claim 8 and a method for monitoring the mobility of autonomous vehicles according to the preamble of claim 10.
  • optical sensors are already known and are used, for example, to enable autonomous vehicles to be monitored in robotics.
  • autonomously operating industrial trucks such as forklifts are equipped with such sensors, or in the private sector vacuum cleaner robots are provided with such sensors to allow safe navigation and object recognition and / or to secure hazardous zones.
  • the optical sensors can interfere with each other.
  • the detection modules are not able to distinguish between the light signals from different light source modules, and / or the
  • Light signals from different light source modules ie different optical sensors, influence each other and thereby falsify the Distance and / or speed measurement. This can lead to a significant impairment of navigation safety, especially in a variety of vehicles to serious accidents.
  • Mobility monitoring of autonomous vehicles and propose a method for monitoring the mobility of autonomous vehicles, each optical sensor or autonomous vehicle with such an optical sensor is clearly identifiable by its light signal.
  • optical sensor according to the invention, the inventive system and the inventive method according to the independent claims have the advantage over the prior art that the optical sensor has a small space requirement, that each optical sensor based on
  • Identification information is uniquely identifiable and can also perform this identification itself, so that the removal and / or
  • the light signal or the reflected light signal thus transmits information, namely the identification information, by means of which the optical sensor which has generated the light signal, in particular unambiguously, can be identified.
  • the identification information comprises a serial number assigned to the optical sensor.
  • the identification information is a digital information, more preferably the identification information comprises a sequence of bits, most preferably 84bit, 8bit, 16bit, 32bit or 64bit.
  • bit modulation of the identification information can be achieved by intensity modulation.
  • the identification information can have an arbitrary length, which depends, for example, on the number of optical sensors in the system and / or the type of modulation and is limited essentially only by the temporal length of the light signal. Other types of identification information or codes are conceivable.
  • the identification information is repeatedly impressed on the light signal. The distance and / or speed measurement is thereby by the
  • the identification information corresponds descriptively to a digital fingerprint, which makes it possible to associate a light signal and / or a reflected light signal with a specific optical sensor.
  • the modulation can be done both analog and digital.
  • the modulation is an amplitude modulation, a
  • the modulation is particularly preferably a sequence modulation.
  • the light signal has a carrier signal to which a useful signal is modulated, wherein the
  • Carrier signal is a carrier signal frequency and the useful signal a
  • Identification information includes. This means in particular that the modulation frequency is higher than the carrier signal frequency. It is particularly preferred that the light source module emits the light signal at a carrier signal frequency in the range from 1 Hz to 100 Hz, particularly preferably in the range from 10 Hz to 75 Hz, very particularly preferably in the range from 30 Hz to 60 Hz.
  • the carrier signal is preferably used for distance and / or speed measurement, while the useful signal at least partially serves to identify the optical sensor.
  • the length of the identification information is dependent on the modulation frequency, in particular the ratio of carrier signal frequency to modulation frequency. For example, with a carrier signal frequency of 1 Hz and a modulation frequency of 1 kHz, 1000 states can be transmitted.
  • Modulation frequency is higher than a first detection frequency of the
  • the modulation frequency is in the range between 100 Hz to 1 MHz, more preferably between 1 kHz and 100 kHz, most preferably the modulation frequency is 2 kHz.
  • the identification information thus corresponds in particular to a specific modulation of the light signal.
  • the modulation frequency of a light signal is variable over time.
  • the identification information is unique, i.
  • the light signal it is advantageously possible according to the invention for the light signal to be unambiguously identifiable on the one hand by the identification information, ie a specific modulation or a sequence of modulations, and on the other hand the detection of the light signal required for distance and / or speed determination not to be impaired.
  • the identification information ie a specific modulation or a sequence of modulations
  • the optical sensor and in particular the light source module, the detection module and / or the modulator are arranged in a housing.
  • the optical sensor additionally comprises a control module for controlling the
  • the modulator comprises at least one modulation means for modulating the light signal, particularly preferably a diaphragm, a mirror and / or a prism.
  • a modulation is an analog intensity modulation and the mentioned modulation means are also called pulse shapers (choppers) and present a particularly simple type, in particular a rectangular one
  • the diaphragm is a rotating sector shutter and / or the mirror is an angle mirror.
  • the modulation means comprises a motor, in particular an electric motor, for generating a movement of the diaphragm, the mirror and / or the prism.
  • the modulator comprises an electronic and / or digital modulation means.
  • the modulating means is a logical modulating means, i. the modulation is generated by the software.
  • the modulation is an intensity modulation, wherein the intensity is preferably either 0% or 100% of an output intensity of the light signal. More preferably, the intensity modulation varies between three, four, five or six predetermined intensities.
  • Intensity information can be generated in a simple manner, for example by a, in particular variable speed, rotating diaphragm. According to a preferred embodiment, it is provided that the
  • Light source module comprises a laser, in particular, the light signal is a laser signal.
  • the laser is a semiconductor laser.
  • the laser signal has a non-visible wavelength, in particular in the infrared range. Even more preferred is that
  • Light source module for generating a laser signal with a wavelength in Range of 700nm to lOOOnm configured, more preferably in the range of 850nm to 950nm, especially in the range of 900nm to 910nm.
  • the light source module comprises a beam-shaping optical system, in particular at least one lens.
  • Laser signal i. Especially with a laser beam, precise and fast measurements are possible.
  • transit time measurements such as those used for distance or distance measurement and / or speed measurement, can be carried out particularly precisely due to the optical properties of a laser.
  • Detection module comprises a dynamic image processing sensor.
  • the dynamic image processing sensor comprises a plurality of pixels, so-called pixels, wherein the dynamic
  • Image processing sensor is configured such that each pixel detects changes. Most preferably, the pixels capture changes in the microsecond range.
  • a dynamic image processing sensor is available, for example, from the company iniLabs as Dynamic Vision Sensor (DVS).
  • DVD Dynamic Vision Sensor
  • the skilled person understands that in contrast to conventional cameras or image sensors, a sequence of snapshots of all pixels, so-called frames, is not created, but those pixels are detected in which changes are detected. This resembles the
  • the detection module has a first detection frequency, wherein even more preferably the dynamic image processing sensor has a second detection frequency
  • Detection frequency has.
  • the first detection frequency is in
  • the second detection frequency is in the range of 100Hz to 1MHz, more preferably between 1kHz and 100kHz, most preferably the second Detection frequency 2kHz, and is in particular at least as high as the modulation frequency.
  • the dynamic image processing sensor detects individual measured values at the second detection frequency and therefore can detect and preferably demodulate the modulation of the light signal, and these measured values in one
  • Time interval corresponding to the first detection frequency to a frame summarizes or this frame assigns. For example, this indicates
  • Detection module has a first detection frequency of 1 Hz and the dynamic image processing sensor has a second detection frequency of 1 kHz, wherein the first detection frequency corresponds to the carrier signal frequency and the second detection frequency of the modulation frequency.
  • the dynamic image processing sensor detects the identification information of the optical sensor within one frame, in other words one second, and at the same time a distance and / or speed measurement can be performed on the basis of the frames.
  • the detection module it is advantageously possible according to the invention for the detection module to operate very quickly and with a low volume of data.
  • a dynamic image sensor therefore requires smaller amounts of data storage and works with high resolution in terms of time. It is also dynamic
  • Image processing sensor those pixels in which changes are detected over time, be detected separately.
  • the optical sensor is a lidar sensor, in particular a ladar sensor.
  • the lidar sensor is a transit time measurement lidar sensor.
  • Lidar is the abbreviation for "light detection and ranging” based on the principle of the transit time measurement of light.
  • a light signal in the case of a Ladar sensor (abbreviation for "laser detection and ranging”) a laser signal, is given by the Light source module generated and emitted. The light signal is reflected at an object and detected by the detector module. From the term the light signal, which is determined, for example, inteferometrically, the distance to the object can now be determined, as well as the speed of the object in the case of a large number of successive measurements.
  • Runtime measurement lidar sensors are already used, for example, in the speed measurement of vehicles in road traffic.
  • the optical sensor is a structured light sensor, in particular a
  • a projector in this case the light source module, projects different patterns of dark and light stripes, preferably of different width, onto the object to be measured in chronological order an optical means for generating an optical pattern, in the case of fringe projection for producing fringes, such optical means preferably comprise at least one lens and / or aperture: a detector, here the detection module, which is arranged at a defined distance from the projector, detects the optical means.
  • Stripe pattern Due to the known distance and thus the viewing angle between the projector and the detector, the distance to each point of the object to be measured can be determined, i. a structured light sensor based
  • Structured-light method In general, in the case of structured light methods, light is thrown onto an object in the form of temporally successive, predetermined patterns, the light reflected by the object being measured. In each frame, a specific pattern is projected onto the object. In this way, it is advantageously possible according to the invention for a structured light method to be used for distance and / or speed determination as well as for object detection, without several optical sensors interfering with one another.
  • the individual frames, ie patterns are generated in accordance with the carrier signal frequency. Therefore, the first detection frequency must also be at least as high as the carrier signal frequency so as to be able to detect at least each frame for accurate measurement
  • the detection module has a demodulator for demodulating a light signal.
  • the identification information is already recognized by the detection module.
  • the optical sensor comprises a control module for controlling the optical sensor.
  • the control module is particularly preferably configured to determine a difference signal from the light signal generated by the light source module and the light signal detected by the detection module, wherein the difference signal is in particular a difference of the identification information.
  • the difference signal thus refers to the period of a frame.
  • the control module is set up to compensate for reflection losses and absorption losses.
  • the system comprises at least one, in particular immovable, base station, wherein the base station has at least one detection module for detecting a light signal, wherein the detection module for distinguishing light signals based on Identification information and in particular for identifying a
  • Vehicle is configured based on identification information of the associated light signal.
  • a base station it is advantageously possible for a base station to be able to differentiate between different autonomous vehicles and thus to make the operation of the system more efficient. It is also advantageously possible to locate a vehicle in the system. For example, in the case of logistics systems, this is desirable, as thus routes can be planned more efficiently and monitoring is possible.
  • Figure 1 is a schematic diagram of an optical sensor according to a
  • FIG. 2 shows a further schematic diagram of an optical sensor according to an embodiment of the present invention
  • FIG. 3 shows a system according to an embodiment of the present invention in a schematic view
  • Figure 5 shows an optical sensor according to an embodiment of the present invention in a schematic representation
  • FIG. 6 shows an optical sensor according to an embodiment of the present invention in a schematic schematic diagram.
  • FIG. 1 shows a schematic diagram of an optical sensor 1 according to a
  • the optical sensor 1 is here a structured light sensor, for example a
  • Fringe projection sensor It comprises a light source module 2, which is configured to generate a light signal L.
  • the object to be measured is illuminated with a sequence of, in particular different width, stripes which are alternately light and dark. At a given time, a complete set of stripes is projected onto the object. At a subsequent time is a
  • An exemplary light signal L in this case a light beam L, is thereby reflected at the object, from which the reflected light beam L ', corresponding to a light signal L', is formed.
  • Light source module 2 arranged detection module 3 comprises a detector which has a plurality of pixels. This detector now detects the reflected light beam L 'in a particular pixel. Analogously, further light beams emerging from light beams of the light source module 2 are also detected by the detector, whereby the detector receives an image of the object. As a result, on the one hand object recognition, but also a distance measurement to the object is possible.
  • the light source module 2 further includes a
  • modulator 4 which modulates the light signal L such that it has an identification information.
  • This identification information can be recognized by the detection module 3 and thus enables a distinction between light beams of different optical
  • the optical sensor 1, 1 ' According to the actual distance measurement, the optical sensor 1, 1 'according to the invention therefore does not fundamentally differ from already known structured light sensors, since the distance measurement works in the same way.
  • the idea according to the invention thus consists, in particular, in the provision of an additional information level.
  • FIG. 2 shows a further schematic diagram of an optical sensor 1 according to an embodiment of the present invention.
  • the optical sensor 1 measures, for example, in a specific embodiment of the
  • Strip projection sensor of Figure 1 using a light section method is again arranged at a well-defined distance from the light source module 2.
  • the light source module 2 generates an identification information having light beam L, which is guided here along a line on the object, for example by a beam deflection unit of the light source module 2 as an adjustable micromirror, or is already projected by appropriate optical means in the form of a line on the object.
  • the detection module 3 now detects the reflected light beam L 'produced by reflection from the light beam L and on the basis of the known art
  • FIG. 3 shows a system according to an embodiment of the present invention
  • the system here comprises a first vehicle 6 and a second vehicle 7. Both vehicles 6, 7 are in the present case designed as robotic vacuum cleaners. However, the system may additionally or alternatively comprise other autonomous vehicles. By way of example, production robots, automated industrial trucks and / or self-propelled motor vehicles may be mentioned here.
  • the first vehicle 6 has a first optical sensor 1 and the second vehicle 7 has a second optical sensor 1 '.
  • Each of the optical sensors 1, 1 ' comprises a light source module 2, 2' with a modulator 4 and a detection module 3, 3 '.
  • the first optical sensor 1 transmits a light signal L having an identification information including a Allocation to the optical sensor 1 allows, and the second optical sensor 1 'transmits a light signal L "with its own
  • the identification information is as
  • Intensity modulation with a modulation frequency which is significantly higher than the detection frequency of the detection modules 3, 3 'executed.
  • the light signals L, L ', L are modulated with a modulation frequency of about 2 kHz, while the detection modules 3, 3', the light signals L, L ', L" with a
  • the detection modules 3, 3 ' are adapted to also detect these modulations and thus the light signals L, L', L "based on the
  • a base station can preferably assign the light signals L, L ', L "to the optical sensors 1, 1' on the basis of the identification information, thereby knowing which vehicle 6, 7 is currently in the vicinity.
  • FIG. 4 shows a schematic illustration of two identification information according to an embodiment of the present invention.
  • the corresponding light signals L, L correlate, for example, to those in FIG.
  • Intensity modulation of the upper light signal L is different from the modulation of the lower light signal L "over time.”
  • a more or less complex modulation can be selected as identification information.
  • a detection module 3, 3 ' can detect and preferably decode this identification information, so that there is an assignment of a light beam L,
  • L ', L can make an optical sensor 1, 1. However, at least the detection module 3, 3' can receive a light signal L, L ', L originating from the light source module 2, 2', which is assigned to the same optical sensor "identify.
  • FIG. 5 shows a schematic view of an optical sensor 1 according to an embodiment of the present invention.
  • the optical sensor 1 comprises a control module 8 which controls the operation of the optical sensor 1 and, for example, the detected distance and / or speed information to a control unit of a vehicle
  • a light source module 2 which here comprises a laser which is configured to generate a laser signal L.
  • the light source module further comprises a modulator 4, which modulates the laser signal L such that it has a
  • Identification information which, preferably uniquely, points to the optical sensor 1.
  • the control module 8 with a
  • Detection module 5 connected, which for detecting a light signal L ', L " is configured.
  • the detection module here comprises, for example, a dynamic image processing sensor 5.
  • the optical sensor 1 is, for example, a
  • Time-of-flight Ladar sensor (Ladar is an abbreviation for "Laser Detection and Ranging", ie laser-assisted distance measurement.)
  • the optical sensor 1 emits a laser signal L, which is reflected by an object, resulting in a reflected laser signal L 'is detected by the detection module 3 and the transit time of the laser signal L, L' determined, from which the distance to the object can be determined
  • the optical sensor 1 could also be a structured light sensor corresponding to one the embodiments described in connection with Figures 1 and 2.
  • FIG. 6 shows a schematic diagram of an optical sensor 1 according to an embodiment of the present invention.
  • the optical sensor 1 shown here is similar to the one shown in FIG.
  • the optical sensor 1 is provided as a structured light sensor.
  • the optical sensor 1 comprises a control module 8 and connected thereto a light source module 2 with a modulator 4, here for example
  • the detection module 3 here comprises by way of example a dynamic image processing sensor 5.
  • Such a dynamic image processing sensor 5 does not detect how
  • the light source module 2 emits a light beam L, on which the modulator 4 with a modulation frequency, here for example 1 kHz, a Identification information has modulated, here for example in the form of a sequence of different high intensities.
  • An optical means not shown here, for example, a lens and / or a diaphragm throws the light in the form of a pattern on the object to be measured. In this case, the patterns are varied with a carrier signal frequency, in this case for example 1 Hz.
  • the light is reflected, that is, a light signal L 'generated by the
  • Detection module 3 more specifically the dynamic image processing sensor 5, is detected.
  • the dynamic image processing sensor 5 detects at the pixel level the light signal L 'at a second detection frequency that is at least as high as the modulation frequency.
  • the modulation frequency and the second detection frequency are the same. Consequently, the dynamic image processing sensor 5 detects the identification information, that is, the characteristic sequence of the different intensities.
  • the detection module 3 With a first detection frequency, which preferably corresponds to the carrier signal frequency, the detection module 3 detects the projected and reflected pattern. Using triangulation or photogrammetric methods, the distance to the object can now be determined on the one hand in fundamentally known manner.
  • the detection module 3, or in this case the control module 8, is configured to generate a difference signal from the detected light signal L 'of a frame, that is to say a specific pattern, and the transmitted light signal L of this pattern.
  • the control module 8 concludes that the reflected light signal L 'actually originates from the optical sensor 1, the distance measurement was therefore correct.

Abstract

The invention relates to an optical sensor for distance and/or speed measurement, with a light source module for producing a light signal, and a detection module for detecting a light signal, characterised in that the light source module comprises a modulator for modulating the light signal, the modulator being configured such that the light signal contains identification information following the modulation, and the detection module being configured to detect and identify indentification information of the detected light signal.

Description

Beschreibung Titel  Description title
Optischer Sensor zur Entfernungs- und/oder Geschwindigkeitsmessung, System zur Mobilitätsüberwachung von autonomen Fahrzeugen und Verfahren zur Mobilitätsüberwachung von autonomen Fahrzeugen  Optical sensor for distance and / or speed measurement, system for mobility monitoring of autonomous vehicles and method for monitoring the mobility of autonomous vehicles
Stand der Technik State of the art
Die Erfindung geht aus von einem optischen Sensor zur Entfernungs- und/oder Geschwindigkeitsmessung nach dem Oberbegriff des Anspruchs 1. Ferner geht die vorliegende Erfindung aus von einem System zur Mobilitätsüberwachung von autonomen Fahrzeugen gemäß dem Oberbegriff von Anspruch 8 und einem Verfahren zur Mobilitätsüberwachung von autonomen Fahrzeugen gemäß dem Oberbegriff von Anspruch 10. The invention is based on an optical sensor for distance and / or speed measurement according to the preamble of claim 1. Furthermore, the present invention is based on a system for monitoring the mobility of autonomous vehicles according to the preamble of claim 8 and a method for monitoring the mobility of autonomous vehicles according to the preamble of claim 10.
Derartige optische Sensoren sind bereits bekannt und werden beispielsweise eingesetzt, um in der Robotik eine Fahrwegüberwachung autonomer Fahrzeuge zu ermöglichen. So werden beispielsweise in Lagerhallen autonom agierende Flurförderzeuge wie Gabelstapler mit derartigen Sensoren ausgerüstet, oder im Privatbereich werden Staubsaugroboter mit derartigen Sensoren versehen, um eine sichere Navigation und Objekterkennung zu ermöglichen und/oder um Gefahrenzonen abzusichern. Such optical sensors are already known and are used, for example, to enable autonomous vehicles to be monitored in robotics. Thus, for example, in warehouses autonomously operating industrial trucks such as forklifts are equipped with such sensors, or in the private sector vacuum cleaner robots are provided with such sensors to allow safe navigation and object recognition and / or to secure hazardous zones.
Nachteilig ist dabei, dass in einem System mit mehreren derartigen autonomen Fahrzeugen sich die optischen Sensoren gegenseitig behindern können. So sind die Detektionsmodule nicht in der Lage zwischen den Lichtsignalen von unterschiedlichen Lichtquellenmodulen zu unterscheiden, und/oder die The disadvantage here is that in a system with several such autonomous vehicles, the optical sensors can interfere with each other. Thus, the detection modules are not able to distinguish between the light signals from different light source modules, and / or the
Lichtsignale von unterschiedlichen Lichtquellenmodulen, d.h. unterschiedlichen optischen Sensoren, beeinflussen sich gegenseitig und verfälschen dadurch die Entfernung- und/oder Geschwindigkeitsmessung. Dies kann insbesondere bei einer Vielzahl von Fahrzeugen zu einer erheblichen Beeinträchtigung der Navigationssicherheit führen bis hin zu schweren Unfällen. Light signals from different light source modules, ie different optical sensors, influence each other and thereby falsify the Distance and / or speed measurement. This can lead to a significant impairment of navigation safety, especially in a variety of vehicles to serious accidents.
Offenbarung der Erfindung Disclosure of the invention
Es ist eine Aufgabe der vorliegenden Erfindung, einen optischen Sensor zur Entfernungs- und/oder Geschwindigkeitsmessung, ein System zur It is an object of the present invention to provide an optical sensor for distance and / or speed measurement, a system for
Mobilitätsüberwachung von autonomen Fahrzeugen und ein Verfahren zur Mobilitätsüberwachung von autonomen Fahrzeugen vorzuschlagen, wobei jeder optische Sensor bzw. jedes autonome Fahrzeug mit einem solchen optischen Sensor anhand seines Lichtsignals eindeutig identifizierbar ist. Mobility monitoring of autonomous vehicles and propose a method for monitoring the mobility of autonomous vehicles, each optical sensor or autonomous vehicle with such an optical sensor is clearly identifiable by its light signal.
Der erfindungsgemäße optische Sensor, das erfindungsgemäße System und das erfindungsgemäße Verfahren gemäß den nebengeordneten Ansprüchen haben gegenüber dem Stand der Technik den Vorteil, dass der optische Sensor einen geringen Bauraumbedarf hat, dass jeder optische Sensor anhand der The optical sensor according to the invention, the inventive system and the inventive method according to the independent claims have the advantage over the prior art that the optical sensor has a small space requirement, that each optical sensor based on
Identifikationsinformation eindeutig identifizierbar ist und diese Identifizierung auch selbst durchführen kann, so dass zur Entfernungs- und/oder Identification information is uniquely identifiable and can also perform this identification itself, so that the removal and / or
Geschwindigkeitsbestimmung auch stets nur das zugehörige Lichtsignal, bzw. das zugehörige reflektierte Lichtsignal, verwendet wird. Hierdurch ist Speed determination always only the associated light signal, or the associated reflected light signal, is used. This is
vorteilhafterweise eine sichere und störungsfreie Navigation und/oder eine korrekte Objekterkennung möglich. Insbesondere kann in Systemen, in denen eine Basisstation verwendet wird, diese die Fahrzeuge identifizieren und somit lokalisieren. Dies ermöglicht eine bessere Steuerung der Systeme bzw. advantageously a safe and trouble-free navigation and / or a correct object recognition possible. In particular, in systems where a base station is used, these can identify and thus locate the vehicles. This allows better control of the systems or
Fahrzeuge. Vehicles.
Erfindungsgemäß überträgt das Lichtsignal bzw. das reflektierte Lichtsignal also eine Information, nämlich die Identifikationsinformation, mit deren Hilfe derjenige optische Sensor, welcher das Lichtsignal erzeugt hat, insbesondere eindeutig, identifiziert werden kann. Beispielsweise umfasst die Identifikationsinformation eine dem optischen Sensor zugeordnete Seriennummer. Vorzugsweise ist die Identifikationsinformation eine digitale Information, besonders bevorzugt umfasst die Identifikationsinformation eine Abfolge von Bits, ganz besonders bevorzugt 84bit, 8bit, 16bit, 32bit oder 64bit. In vorteilhafter Weise kann durch eine Intensitätsmodulation eine Bit- Kodierung der Identifikationsinformation erreicht werden. Die Identifikationsinformation kann insbesondere eine beliebige Länge aufweisen, die beispielsweise von der Zahl der optischen Sensoren in dem System und/oder der Art der Modulation abhängt und im Wesentlichen lediglich durch die zeitliche Länge des Lichtsignals begrenzt wird. Auch andere Arten von Identifikationsinformationen bzw. Kodierungen sind vorstellbar. Vorzugsweise wird die Identifikationsinformation wiederholt dem Lichtsignal aufgeprägt. Die Entfernungs- und/oder Geschwindigkeitsmessung wird dabei durch die According to the invention, the light signal or the reflected light signal thus transmits information, namely the identification information, by means of which the optical sensor which has generated the light signal, in particular unambiguously, can be identified. By way of example, the identification information comprises a serial number assigned to the optical sensor. Preferably, the identification information is a digital information, more preferably the identification information comprises a sequence of bits, most preferably 84bit, 8bit, 16bit, 32bit or 64bit. Advantageously, bit modulation of the identification information can be achieved by intensity modulation. In particular, the identification information can have an arbitrary length, which depends, for example, on the number of optical sensors in the system and / or the type of modulation and is limited essentially only by the temporal length of the light signal. Other types of identification information or codes are conceivable. Preferably, the identification information is repeatedly impressed on the light signal. The distance and / or speed measurement is thereby by the
Identifikationsinformation nicht beeinträchtigt. Die Identifikationsinformation entspricht also anschaulich gesprochen einem digitalen Fingerabdruck, der eine Zuordnung eines Lichtsignals und/oder eines reflektierten Lichtsignals zu einem bestimmten optischen Sensor ermöglicht. Der Fachmann versteht, dass die Modulation sowohl analog als auch digital erfolgen kann. Insbesondere handelt es sich bei der Modulation um eine Amplitudenmodulation, eine Identification information is not affected. Thus, the identification information corresponds descriptively to a digital fingerprint, which makes it possible to associate a light signal and / or a reflected light signal with a specific optical sensor. The skilled person understands that the modulation can be done both analog and digital. In particular, the modulation is an amplitude modulation, a
Frequenzmodulation und/oder eine Intensitätsmodulation. Besonders bevorzugt ist die Modulation jedoch eine Sequenzmodulation. Frequency modulation and / or intensity modulation. However, the modulation is particularly preferably a sequence modulation.
Vorteilhafte Ausgestaltungen und Weiterbildungen der Erfindung sind den Unteransprüchen, sowie der Beschreibung unter Bezugnahme auf die Advantageous embodiments and developments of the invention are the dependent claims, as well as the description with reference to the
Zeichnungen entnehmbar. Drawings removable.
Gemäß einer bevorzugten Weiterbildung ist vorgesehen, dass das Lichtsignal ein Trägersignal aufweist, auf das ein Nutzsignal aufmoduliert ist, wobei das According to a preferred embodiment, it is provided that the light signal has a carrier signal to which a useful signal is modulated, wherein the
Trägersignal eine Trägersignalfrequenz und das Nutzsignal eine Carrier signal is a carrier signal frequency and the useful signal a
Modulationsfrequenz aufweist, wobei das Nutzsignal wenigstens die Modulation frequency, wherein the useful signal at least the
Identifikationsinformation umfasst. Dies bedeutet insbesondere, dass die Modulationsfrequenz höher ist als die Trägersignalfrequenz. Besonders bevorzugt ist vorgesehen, dass das Lichtquellenmodul das Lichtsignal mit einer Trägersignalfrequenz im Bereich von 1Hz bis 100Hz, besonders bevorzugt im Bereich von 10Hz bis 75Hz, ganz besonders bevorzugt im Bereich von 30Hz bis 60Hz, aussendet. Das Trägersignal dient dabei vorzugsweise der Entfernungsund/oder Geschwindigkeitsmessung, während das Nutzsignal wenigstens teilweise der Identifizierung des optischen Sensors dient. Der Fachmann versteht, dass dies insbesondere bedeutet, dass im Falle einer digitalen Identifikationsinformation die Länge der Identifikationsinformation von der Modulationsfrequenz abhängig ist, insbesondere von dem Verhältnis von Trägersignalfrequenz zu Modulationsfrequenz. So können beispielsweise bei einer Trägersignalfrequenz von 1Hz und einer Modulationsfrequenz von 1kHz 1000 Zustände übertragen werden. Identification information includes. This means in particular that the modulation frequency is higher than the carrier signal frequency. It is particularly preferred that the light source module emits the light signal at a carrier signal frequency in the range from 1 Hz to 100 Hz, particularly preferably in the range from 10 Hz to 75 Hz, very particularly preferably in the range from 30 Hz to 60 Hz. The carrier signal is preferably used for distance and / or speed measurement, while the useful signal at least partially serves to identify the optical sensor. The skilled person understands that this means in particular that in the case of a digital Identification information, the length of the identification information is dependent on the modulation frequency, in particular the ratio of carrier signal frequency to modulation frequency. For example, with a carrier signal frequency of 1 Hz and a modulation frequency of 1 kHz, 1000 states can be transmitted.
Gemäß einer bevorzugten Weiterbildung ist vorgesehen, dass die According to a preferred embodiment, it is provided that the
Modulationsfrequenz höher ist als eine erste Detektionsfrequenz des Modulation frequency is higher than a first detection frequency of the
Detektionsmoduls, und/oder dass die Modulationsfrequenz im Bereich zwischen 100 Hz bis 1 MHz liegt, besonders bevorzugt zwischen 1 kHz und 100kHz, ganz besonders bevorzugt beträgt die Modulationsfrequenz 2 kHz. Der Fachmann versteht, dass somit die Identifikationsinformation insbesondere einer bestimmten Modulation des Lichtsignals entspricht. Besonders bevorzugt ist die Modulationsfrequenz eines Lichtsignals im zeitlichen Verlauf veränderlich. Ganz besonders bevorzugt ist die Identifikationsinformation einzigartig, d.h. Detection module, and / or that the modulation frequency is in the range between 100 Hz to 1 MHz, more preferably between 1 kHz and 100 kHz, most preferably the modulation frequency is 2 kHz. The person skilled in the art will understand that the identification information thus corresponds in particular to a specific modulation of the light signal. Particularly preferably, the modulation frequency of a light signal is variable over time. Most preferably, the identification information is unique, i.
charakteristisch, für den entsprechenden optischen Sensor. characteristic, for the corresponding optical sensor.
Hierdurch ist es erfindungsgemäß vorteilhaft möglich, dass das Lichtsignal einerseits durch die Identifikationsinformation, also eine bestimmte Modulation bzw. eine Abfolge aus Modulationen, eindeutig identifizierbar ist und andererseits die zur Entfernungs- und/oder Geschwindigkeitsbestimmung nötige Detektion des Lichtsignals nicht beeinträchtigt wird. As a result, it is advantageously possible according to the invention for the light signal to be unambiguously identifiable on the one hand by the identification information, ie a specific modulation or a sequence of modulations, and on the other hand the detection of the light signal required for distance and / or speed determination not to be impaired.
Gemäß einer bevorzugten Weiterbildung ist vorgesehen, dass der optische Sensor und insbesondere das Lichtquellenmodul, das Detektionsmodul und/oder der Modulator in einem Gehäuse angeordnet sind. Besonders bevorzugt umfasst der optische Sensor zusätzlich ein Steuermodul zur Steuerung des According to a preferred development it is provided that the optical sensor and in particular the light source module, the detection module and / or the modulator are arranged in a housing. Particularly preferably, the optical sensor additionally comprises a control module for controlling the
Lichtquellenmoduls und/oder des Detektionsmoduls, wobei das Steuermodul ganz besonders bevorzugt ebenfalls in dem Gehäuse angeordnet ist. Light source module and / or the detection module, wherein the control module very particularly preferably also disposed in the housing.
Hierdurch ist es erfindungsgemäß vorteilhaft möglich, dass ein kompakter optischer Sensor bereitgestellt wird, der einfach einzubauen und zu warten ist. As a result, it is advantageously possible according to the invention to provide a compact optical sensor which is easy to install and to maintain.
Gemäß einer bevorzugten Weiterbildung ist vorgesehen, dass der Modulator wenigstens ein Modulationsmittel zur Modulation des Lichtsignals umfasst, besonders bevorzugt eine Blende, einen Spiegel und/oder ein Prisma. Eine derartige Modulation ist eine analoge Intensitätsmodulation und die angeführten Modulationsmittel werden auch als Pulsformer (engl, chopper) bezeichnet und stellen eine besonders einfache Art da, eine insbesondere rechteckige According to a preferred embodiment, it is provided that the modulator comprises at least one modulation means for modulating the light signal, particularly preferably a diaphragm, a mirror and / or a prism. Such a modulation is an analog intensity modulation and the mentioned modulation means are also called pulse shapers (choppers) and present a particularly simple type, in particular a rectangular one
Intensitätsmodulation zu erreichen. Besonders bevorzugt ist die Blende eine rotierende Sektorblende und/oder ist der Spiegel ein Winkelspiegel. Ganz besonders bevorzugt umfasst das Modulationsmittel einen Motor, insbesondere einen Elektromotor, zur Erzeugung einer Bewegung der Blende, des Spiegels und/oder des Prismas. To achieve intensity modulation. Particularly preferably, the diaphragm is a rotating sector shutter and / or the mirror is an angle mirror. Most preferably, the modulation means comprises a motor, in particular an electric motor, for generating a movement of the diaphragm, the mirror and / or the prism.
Hierdurch ist es erfindungsgemäß vorteilhaft möglich, dass in einfacher Weise eine Modulation des Lichtsignals zur Erzeugung der Identifikationsinformation erfolgt, insbesondere mit bereits bekannten Mitteln. As a result, it is advantageously possible according to the invention for a modulation of the light signal to generate the identification information to take place in a simple manner, in particular using already known means.
Gemäß einer bevorzugten Weiterbildung ist vorgesehen, dass der Modulator ein elektronisches und/oder digitales Modulationsmittel umfasst. Insbesondere ist das Modulationsmittel ein logisches Modulationsmittel, d.h. die Modulation wird softwareseitig erzeugt. According to a preferred embodiment, it is provided that the modulator comprises an electronic and / or digital modulation means. In particular, the modulating means is a logical modulating means, i. the modulation is generated by the software.
Gemäß einer bevorzugten Weiterbildung ist vorgesehen, dass die Modulation eine Intensitätsmodulation ist, wobei die Intensität vorzugsweise entweder 0% oder 100% einer Ausgangsintensität des Lichtsignals beträgt. Besonders bevorzugt variiert die Intensitätsmodulation zwischen drei, vier, fünf oder sechs vorbestimmten Intensitäten. Hierdurch ist es erfindungsgemäß vorteilhaft möglich, eine einfache und einfach zu erzeugende Identifikationsinformation bereitzustellen. Eine solche According to a preferred embodiment, it is provided that the modulation is an intensity modulation, wherein the intensity is preferably either 0% or 100% of an output intensity of the light signal. More preferably, the intensity modulation varies between three, four, five or six predetermined intensities. As a result, it is advantageously possible according to the invention to provide simple and easily generated identification information. Such
Intensitätsinformation kann in einfacher Weise beispielsweise durch eine, insbesondere mit variabler Geschwindigkeit, rotierende Blende erzeugt werden. Gemäß einer bevorzugten Weiterbildung ist vorgesehen, dass das Intensity information can be generated in a simple manner, for example by a, in particular variable speed, rotating diaphragm. According to a preferred embodiment, it is provided that the
Lichtquellenmodul einen Laser umfasst, wobei insbesondere das Lichtsignal ein Lasersignal ist. Besonders bevorzugt ist der Laser ein Halbleiterlaser. Ganz besonders bevorzugt weist das Lasersignal eine nicht-sichtbare Wellenlänge, insbesondere im Infrarot-Bereich, auf. Noch mehr bevorzugt ist das  Light source module comprises a laser, in particular, the light signal is a laser signal. Particularly preferably, the laser is a semiconductor laser. Most preferably, the laser signal has a non-visible wavelength, in particular in the infrared range. Even more preferred is that
Lichtquellenmodul zur Erzeugung eines Lasersignals mit einer Wellenlänge im Bereich von 700nm bis lOOOnm konfiguriert, besonders bevorzugt im Bereich von 850nm bis 950nm, insbesondere im Bereich von 900nm bis 910nm. Light source module for generating a laser signal with a wavelength in Range of 700nm to lOOOnm configured, more preferably in the range of 850nm to 950nm, especially in the range of 900nm to 910nm.
Vorzugsweise umfasst das Lichtquellenmodul eine Strahlformungsoptik, insbesondere wenigstens eine Linse. Preferably, the light source module comprises a beam-shaping optical system, in particular at least one lens.
Hierdurch ist es erfindungsgemäß vorteilhaft möglich, dass ein Lichtsignal erzeugt wird, welches stark fokussiert und sehr kohärent ist. Mit einem This makes it advantageously possible according to the invention that a light signal is generated which is highly focused and very coherent. With a
Lasersignal, d.h. insbesondere mit einem Laserstrahl, sind präzise und schnelle Messungen möglich. Insbesondere Laufzeitmessungen, wie sie zur Entfernungs- bzw. Abstandsmessung und/oder Geschwindigkeitsmessung verwendet werden, sind auf Grund der optischen Eigenschaften eines Lasers mit einem solchen besonders präzise durchführbar. Laser signal, i. Especially with a laser beam, precise and fast measurements are possible. In particular, transit time measurements, such as those used for distance or distance measurement and / or speed measurement, can be carried out particularly precisely due to the optical properties of a laser.
Gemäß einer bevorzugten Weiterbildung ist vorgesehen, dass das According to a preferred embodiment, it is provided that the
Detektionsmodul einen dynamischen Bildverarbeitungssensor umfasst. Detection module comprises a dynamic image processing sensor.
Besonders bevorzugt umfasst der dynamische Bildverarbeitungssensor eine Vielzahl von Bildpunkten, sogenannte Pixel, wobei der dynamische  Particularly preferably, the dynamic image processing sensor comprises a plurality of pixels, so-called pixels, wherein the dynamic
Bildverarbeitungssensor derart konfiguriert ist, dass jeder Bildpunkt Änderungen detektiert. Ganz besonders bevorzugt erfassen die Bildpunkte Änderungen im Mikrosekundenbereich. Ein solcher dynamischer Bildverarbeitungssensor ist beispielsweise von der Firma iniLabs als Dynamic Vision Sensor (DVS) erhältlich. Der Fachmann versteht, dass im Unterschied zu konventionellen Kameras bzw. Bildsensoren nicht eine Abfolge von Momentaufnahmen aller Bildpunkte, sogenannte Frames, erstellt wird, sondern diejenigen Bildpunkte erfasst werden, bei denen Änderungen detektiert werden. Damit ähnelt dieImage processing sensor is configured such that each pixel detects changes. Most preferably, the pixels capture changes in the microsecond range. Such a dynamic image processing sensor is available, for example, from the company iniLabs as Dynamic Vision Sensor (DVS). The skilled person understands that in contrast to conventional cameras or image sensors, a sequence of snapshots of all pixels, so-called frames, is not created, but those pixels are detected in which changes are detected. This resembles the
Arbeitsweise eines dynamischen Bildverarbeitungssensors derjenigen des menschlichen Auges bzw. der Retina. Bevorzugt ist vorgesehen, dass das Detektionsmodul eine erste Detektionsfrequenz aufweist, wobei noch mehr bevorzugt der dynamische Bildverarbeitungssensor eine zweite Operation of a dynamic image sensor of those of the human eye or the retina. It is preferably provided that the detection module has a first detection frequency, wherein even more preferably the dynamic image processing sensor has a second detection frequency
Detektionsfrequenz aufweist. Vorzugsweise liegt die erste Detektionsfrequenz imDetection frequency has. Preferably, the first detection frequency is in
Bereich von 1Hz bis 100Hz, besonders bevorzugt im Bereich von 10Hz bis 75Hz, ganz besonders bevorzugt im Bereich von 30Hz bis 60Hz, und ist insbesondere wenigstens so hoch wie die Trägersignalfrequenz. Vorzugsweise liegt die zweite Detektionsfrequenz im Bereich von 100Hz bis 1MHz, besonders bevorzugt zwischen 1kHz und 100kHz, ganz besonders bevorzugt beträgt die zweite Detektionsfrequenz 2kHz, und ist insbesondere wenigstens so hoch wie die Modulationsfrequenz. Dies ist insbesondere derart zu verstehen, dass der dynamische Bildverarbeitungssensor einzelne Messwerte mit der zweiten Detektionsfrequenz erfasst und daher die Modulation des Lichtsignals erfassen und vorzugsweise demodulieren kann, und diese Messwerte in einem Range of 1Hz to 100Hz, more preferably in the range of 10Hz to 75Hz, most preferably in the range of 30Hz to 60Hz, and in particular at least as high as the carrier signal frequency. Preferably, the second detection frequency is in the range of 100Hz to 1MHz, more preferably between 1kHz and 100kHz, most preferably the second Detection frequency 2kHz, and is in particular at least as high as the modulation frequency. This is to be understood in particular such that the dynamic image processing sensor detects individual measured values at the second detection frequency and therefore can detect and preferably demodulate the modulation of the light signal, and these measured values in one
Zeitintervall entsprechend der ersten Detektionsfrequenz zu einem Frame zusammenfasst bzw. diesem Frame zuordnet. Beispielsweise weist das Time interval corresponding to the first detection frequency to a frame summarizes or this frame assigns. For example, this indicates
Detektionsmodul eine erste Detektionsfrequenz von 1Hz auf und der dynamische Bildverarbeitungssensor weist eine zweite Detektionsfrequenz von 1kHz auf, wobei die erste Detektionsfrequenz der Trägersignalfrequenz entspricht und die zweite Detektionsfrequenz der Modulationsfrequenz. In diesem Fall erfasst der dynamische Bildverarbeitungssensor innerhalb eines Frames, hier also einer Sekunde die Identifikationsinformation des optischen Sensors, und zugleich kann anhand der Frames eine Entfernungs- und/oder Geschwindigkeitsmessung durchgeführt werden. Detection module has a first detection frequency of 1 Hz and the dynamic image processing sensor has a second detection frequency of 1 kHz, wherein the first detection frequency corresponds to the carrier signal frequency and the second detection frequency of the modulation frequency. In this case, the dynamic image processing sensor detects the identification information of the optical sensor within one frame, in other words one second, and at the same time a distance and / or speed measurement can be performed on the basis of the frames.
Hierdurch ist es erfindungsgemäß vorteilhaft möglich, dass das Detektionsmodul sehr schnell und mit geringem Datenaufkommen arbeitet. Ein dynamischer Bildverarbeitungssensor benötigt daher geringere Mengen an Datenspeicher und arbeitet zeitlich hochauflösend. Zudem ist es mit einem dynamischen As a result, it is advantageously possible according to the invention for the detection module to operate very quickly and with a low volume of data. A dynamic image sensor therefore requires smaller amounts of data storage and works with high resolution in terms of time. It is also dynamic
Bildverarbeitungssensor vorteilhaft möglich, bewegliche Objekte schneller zu detektieren, da auf Grund der Arbeitsweise eines dynamischen Image processing sensor advantageously possible to detect moving objects faster because due to the operation of a dynamic
Bildverarbeitungssensors diejenigen Bildpunkte, bei denen im Zeitverlauf Änderungen festgestellt werden, gesondert detektiert werden. Image processing sensor those pixels in which changes are detected over time, be detected separately.
Gemäß einer bevorzugten Weiterbildung ist vorgesehen, dass der optische Sensor ein Lidar-Sensor ist, insbesondere ein Ladar-Sensor. Besonders bevorzugt ist der Lidar-Sensor ein Laufzeitmessungs- Lidar-Sensor. Ein solcher Laufzeitmessungs- Lidar-Sensor (engl,„time-of-flight-lidar", kurz TOF-Iidar; wobeiAccording to a preferred development, it is provided that the optical sensor is a lidar sensor, in particular a ladar sensor. Particularly preferably, the lidar sensor is a transit time measurement lidar sensor. Such a time-of-flight lidar (time-of-flight-lidar) sensor, TOF-Iidar for short;
Lidar die Abkürzung ist für engl.„Light detection and ranging") basiert auf dem Prinzip der Laufzeitmessung von Licht. Ein Lichtsignal, im Falle eines Ladar- Sensors (Abkürzung für engl.„Laser detection and ranging") ein Lasersignal, wird durch das Lichtquellenmodul erzeugt und ausgesendet. Das Lichtsignal wird an einem Objekt reflektiert und von dem Detektormodul detektiert. Aus der Laufzeit des Lichtsignals, die beispielsweise inteferometrisch bestimmt wird, kann nun die Entfernung zu dem Objekt bestimmt werden, sowie bei einer Vielzahl von aufeinanderfolgenden Messungen auch die Geschwindigkeit des Objekts. Lidar is the abbreviation for "light detection and ranging" based on the principle of the transit time measurement of light.A light signal, in the case of a Ladar sensor (abbreviation for "laser detection and ranging") a laser signal, is given by the Light source module generated and emitted. The light signal is reflected at an object and detected by the detector module. From the term the light signal, which is determined, for example, inteferometrically, the distance to the object can now be determined, as well as the speed of the object in the case of a large number of successive measurements.
Laufzeitmessungs-Lidar-Sensoren werden bereits beispielsweise bei der Geschwindigkeitsmessung von Fahrzeugen im Straßenverkehr verwendet. Runtime measurement lidar sensors are already used, for example, in the speed measurement of vehicles in road traffic.
Hierdurch ist es erfindungsgemäß vorteilhaft möglich, dass ein bekannter und in der Entfernungs- und Geschwindigkeitsmessung bewährter optischer Sensor eingesetzt wird, der zudem schnelle und präzise Messungen ermöglicht. In this way, it is advantageously possible according to the invention to use a known optical sensor which has proven its worth in distance and speed measurement, and which also enables fast and precise measurements.
Gemäß einer weiteren bevorzugten Weiterbildung ist vorgesehen, dass der optische Sensor ein Strukturiertes-Licht-Sensor ist, insbesondere ein According to a further preferred development, it is provided that the optical sensor is a structured light sensor, in particular a
Streifenprojektionssensor. Derartige Strukturiertes-Licht-Sensoren (engl. Fringe projection sensor. Such structured light sensors (engl.
„Structured Light sensor" ) basieren auf Triangulationsverfahren. Beispielsweise bei einer Streifenprojektion projiziert ein Projektor, hier das Lichtquellenmodul, in zeitlicher Abfolge unterschiedliche Muster von dunklen und hellen Streifen, vorzugsweise mit unterschiedlicher Breite, auf das zu vermessende Objekt. Dazu umfasst der optische Sensor vorzugsweise ein optisches Mittel zur Erzeugung eines optischen Musters, im Falle der Streifenprojektion zur Erzeugung von Streifen. Derartige optische Mittel umfassen vorzugsweise wenigstens eine Linse und/oder eine Blende. Ein Detektor, hier das Detektionsmodul, welcher in einem definierten Abstand zu dem Projektor angeordnet ist, detektiert die For example, in the case of a fringe projection, a projector, in this case the light source module, projects different patterns of dark and light stripes, preferably of different width, onto the object to be measured in chronological order an optical means for generating an optical pattern, in the case of fringe projection for producing fringes, such optical means preferably comprise at least one lens and / or aperture: a detector, here the detection module, which is arranged at a defined distance from the projector, detects the
Streifenmuster. Auf Grund des bekannten Abstandes und damit des Blickwinkels zwischen Projektor und Detektor der Abstand zu jedem Punkt des vermessenen Objekts ermittelt werden, d.h. ein Strukturiertes-Licht-Sensor basiert Stripe pattern. Due to the known distance and thus the viewing angle between the projector and the detector, the distance to each point of the object to be measured can be determined, i. a structured light sensor based
grundsätzlich auf Triangulationsverfahren. Der Fachmann versteht, dass außer den oben beschriebenen Streifen auch andere Muster verwendet werden können. Das Streifenprojektionsverfahren ist somit ein Spezialfall des basically on triangulation. It will be understood by those skilled in the art that other patterns besides the strips described above may be used. The fringe projection method is thus a special case of the
Strukturierten-Licht-Verfahrens. Allgemein wird also bei Strukturierten- Licht- Verfahren Licht in Form von zeitlich aufeinanderfolgenden, vorbestimmten Mustern auf ein Objekt geworfen, wobei das von dem Objekt reflektierte Licht gemessen wird. In jedem Frame wird also ein bestimmtes Muster auf das Objekt projiziert. Hierdurch ist es erfindungsgemäß vorteilhaft möglich, dass ein Strukturiertes- Licht- Verfahren zur Entfernungs- und/oder Geschwindigkeitsbestimmung sowie zur Objekterfassung verwendet wird, ohne dass mehrere optische Sensoren sich gegenseitig beeinträchtigen. Die einzelnen Frames, also Muster, werden entsprechend mit der Trägersignalfrequenz erzeugt. Daher muss die erste Detektionsfrequenz auch mindestens so hoch sein wie die Trägersignalfrequenz, um mindestens jeden Frame erfassen zu können zwecks einer genauen Structured-light method. In general, in the case of structured light methods, light is thrown onto an object in the form of temporally successive, predetermined patterns, the light reflected by the object being measured. In each frame, a specific pattern is projected onto the object. In this way, it is advantageously possible according to the invention for a structured light method to be used for distance and / or speed determination as well as for object detection, without several optical sensors interfering with one another. The individual frames, ie patterns, are generated in accordance with the carrier signal frequency. Therefore, the first detection frequency must also be at least as high as the carrier signal frequency so as to be able to detect at least each frame for accurate measurement
Entfernungs- und/oder Geschwindigkeitsmessung. Distance and / or speed measurement.
Gemäß einer weiteren bevorzugten Weiterbildung ist vorgesehen, dass das Detektionsmodul einen Demodulator zum Demodulieren eines Lichtsignales aufweist. According to a further preferred development, it is provided that the detection module has a demodulator for demodulating a light signal.
Hierdurch ist es vorteilhaft möglich, dass die Identifikationsinformation bereits durch das Detektionsmodul erkannt wird. As a result, it is advantageously possible that the identification information is already recognized by the detection module.
Gemäß einer weiteren bevorzugten Weiterbildung ist vorgesehen, dass der optische Sensor ein Steuermodul zur Steuerung des optischen Sensors umfasst. Besonders bevorzugt ist das Steuermodul dazu eingerichtet, ein Differenzsignal aus dem durch das Lichtquellenmodul erzeugten Lichtsignal und dem durch das Detektionsmodul erfassten Lichtsignal zu ermitteln, wobei das Differenzsignal insbesondere eine Differenz der Identifikationsinformationen ist. Vorzugsweise bezieht sich das Differenzsignal also auf den Zeitraum eines Frames. According to a further preferred development, it is provided that the optical sensor comprises a control module for controlling the optical sensor. The control module is particularly preferably configured to determine a difference signal from the light signal generated by the light source module and the light signal detected by the detection module, wherein the difference signal is in particular a difference of the identification information. Preferably, the difference signal thus refers to the period of a frame.
Hierdurch ist es besonders vorteilhaft möglich, zu bestimmen, ob ein detektiertes Lichtsignal dem optischen Sensor zugeordnet ist. Denn im Falle einer This makes it particularly advantageous possible to determine whether a detected light signal is associated with the optical sensor. Because in the case of one
Übereinstimmung, also einer identischen Identifikationsinformation, ist das Differenzsignal 0. Vorzugsweise ist das Steuermodul dabei zur Kompensation von Reflexionsverlusten und Absorptionsverlusten eingerichtet. Match, ie an identical identification information, is the difference signal 0. Preferably, the control module is set up to compensate for reflection losses and absorption losses.
Gemäß einer bevorzugten Weiterbildung - insbesondere des According to a preferred development - in particular of
erfindungsgemäßen Systems - ist vorgesehen, dass das System wenigstens eine, insbesondere unbewegliche, Basisstation umfasst, wobei die Basisstation wenigstens ein Detektionsmodul zur Detektion eines Lichtsignals aufweist, wobei das Detektionsmodul zur Unterscheidung von Lichtsignalen anhand von Identifikationsinformationen und insbesondere zur Identifizierung eines According to the invention - it is provided that the system comprises at least one, in particular immovable, base station, wherein the base station has at least one detection module for detecting a light signal, wherein the detection module for distinguishing light signals based on Identification information and in particular for identifying a
Fahrzeugs anhand einer Identifikationsinformation des zugehörigen Lichtsignals konfiguriert ist. Vehicle is configured based on identification information of the associated light signal.
Hierdurch ist es erfindungsgemäß vorteilhaft möglich, dass eine Basisstation verschiedene autonome Fahrzeuge unterscheiden kann und somit der Betrieb des Systems effizienter gestaltet werden kann. Auch wird vorteilhafterweise die Lokalisierung eines Fahrzeugs in dem System ermöglicht. Beispielsweise im Falle von Logistiksystemen ist dies wünschenswert, da somit Fahrwege effizienter geplant werden können und eine Überwachung ermöglicht wird. As a result, according to the invention, it is advantageously possible for a base station to be able to differentiate between different autonomous vehicles and thus to make the operation of the system more efficient. It is also advantageously possible to locate a vehicle in the system. For example, in the case of logistics systems, this is desirable, as thus routes can be planned more efficiently and monitoring is possible.
Ausführungsbeispiele der vorliegenden Erfindung sind in den Zeichnungen dargestellt und in der nachfolgenden Beschreibung näher erläutert. Embodiments of the present invention are illustrated in the drawings and explained in more detail in the following description.
Kurze Beschreibung der Zeichnungen Es zeigen Brief description of the drawings It shows
Figur 1 eine Prinzipskizze eines optischen Sensors gemäß einer  Figure 1 is a schematic diagram of an optical sensor according to a
Ausführungsform der vorliegenden Erfindung, Embodiment of the present invention
Figur 2 eine weitere Prinzipskizze eines optischen Sensors gemäß einer Ausführungsform der vorliegenden Erfindung,  FIG. 2 shows a further schematic diagram of an optical sensor according to an embodiment of the present invention,
Figur 3 ein System gemäß einer Ausführungsform der vorliegenden Erfindung in einer schematischen Ansicht,  3 shows a system according to an embodiment of the present invention in a schematic view,
Figur 4 zwei Identifikationsinformationen gemäß einer Ausführungsform der vorliegenden Erfindung in einer schematischen Darstellung,  4 shows two identification information according to an embodiment of the present invention in a schematic representation,
Figur 5 einen optischer Sensor gemäß einer Ausführungsform der vorliegenden Erfindung in einer schematischen Darstellung und Figure 5 shows an optical sensor according to an embodiment of the present invention in a schematic representation and
Figur 6 einen optischen Sensor gemäß einer Ausführungsform der vorliegenden Erfindung in einer schematischen Prinzipskizze.  6 shows an optical sensor according to an embodiment of the present invention in a schematic schematic diagram.
Ausführungsformen der Erfindung In den verschiedenen Figuren sind gleiche Teile stets mit den gleichen Embodiments of the invention In the different figures, the same parts are always the same
Bezugszeichen versehen und werden daher in der Regel auch jeweils nur einmal benannt bzw. erwähnt. In Figur 1 ist eine Prinzipskizze eines optischen Sensors 1 gemäß einer Reference numerals provided and are therefore usually named or mentioned only once in each case. 1 shows a schematic diagram of an optical sensor 1 according to a
Ausführungsform der vorliegenden Erfindung dargestellt. Der optische Sensor 1 ist hier ein Strukturiertes- Licht-Sensor, zum Beispiel ein  Embodiment of the present invention shown. The optical sensor 1 is here a structured light sensor, for example a
Streifenprojektionssensor. Er umfasst ein Lichtquellenmodul 2, welches zur Erzeugung eines Lichtsignals L konfiguriert ist. Bei der Streifenprojektion wird dabei das zu vermessende Objekt mit einer Abfolge von, insbesondere unterschiedlich breiten, Streifen beleuchtet, die abwechselnd hell und dunkel sind. Zu einem bestimmten Zeitpunkt wird ein vollständiger Satz von Streifen auf das Objekt projiziert. Zu einem darauf folgenden Zeitpunkt wird ein Fringe projection sensor. It comprises a light source module 2, which is configured to generate a light signal L. In the stripe projection, the object to be measured is illuminated with a sequence of, in particular different width, stripes which are alternately light and dark. At a given time, a complete set of stripes is projected onto the object. At a subsequent time is a
unterschiedlicher Satz von Streifen auf das Objekt projiziert. Ein beispielhaftes Lichtsignal L, hier ein Lichtstrahl L, wird dabei an dem Objekt reflektiert, woraus der reflektierte Lichtstrahl L', entsprechend einem Lichtsignal L', entsteht. different set of stripes projected onto the object. An exemplary light signal L, in this case a light beam L, is thereby reflected at the object, from which the reflected light beam L ', corresponding to a light signal L', is formed.
Ein in einem festen Abstand und einem festen Blickwinkel zu dem One at a fixed distance and a fixed angle to the
Lichtquellenmodul 2 angeordnetes Detektionsmodul 3 umfasst einen Detektor welcher eine Vielzahl von Bildpunkten aufweist. Dieser Detektor detektiert nun den reflektierten Lichtstrahl L' in einem bestimmten Bildpunkt. Analog werden auch weitere aus Lichtstrahlen des Lichtquellenmoduls 2 hervorgegangene reflektierte Lichtstrahlen von dem Detektor erfasst, wodurch der Detektor ein Abbild des Objektes erhält. Hierdurch ist einerseits eine Objekterkennung, aber auch eine Entfernungsmessung zu dem Objekt möglich. Light source module 2 arranged detection module 3 comprises a detector which has a plurality of pixels. This detector now detects the reflected light beam L 'in a particular pixel. Analogously, further light beams emerging from light beams of the light source module 2 are also detected by the detector, whereby the detector receives an image of the object. As a result, on the one hand object recognition, but also a distance measurement to the object is possible.
Sind nun mehrere derartige optische Sensoren 1, 1' vorhanden, kann es zu Interferenzen zwischen den jeweiligen Lichtstrahlen der Sensoren 1, 1' kommen und eine genaue Objektvermessung bzw. Entfernungsmessung beeinträchtigt oder gar verhindert werden. Daher umfasst das Lichtquellenmodul 2 ferner einenIf a plurality of such optical sensors 1, 1 'are present, interference between the respective light beams of the sensors 1, 1' may occur and an accurate object measurement or distance measurement may be impaired or even prevented. Therefore, the light source module 2 further includes a
- hier nicht dargestellten - Modulator 4, der das Lichtsignal L derart moduliert, dass es eine Identifikationsinformation aufweist. Diese Identifikationsinformation kann von dem Detektionsmodul 3 erkannt werden und ermöglicht somit eine Unterscheidung zwischen Lichtstrahlen der unterschiedlichen optischen - Not shown here - modulator 4, which modulates the light signal L such that it has an identification information. This identification information can be recognized by the detection module 3 and thus enables a distinction between light beams of different optical
Sensoren 1, 1'. Bezüglich der eigentlichen Entfernungsmessung unterscheidet sich der erfindungsgemäße optische Sensor 1, 1' also nicht grundlegend von bereits bekannten Strukturiertes-Licht-Sensoren, da die Entfernungsmessung in derselben Weise funktioniert. Die erfindungsgemäße Idee besteht also insbesondere in der Bereitstellung einer zusätzlichen Informationsebene. Sensors 1, 1 '. With regard to the actual distance measurement, the optical sensor 1, 1 'according to the invention therefore does not fundamentally differ from already known structured light sensors, since the distance measurement works in the same way. The idea according to the invention thus consists, in particular, in the provision of an additional information level.
In Figur 2 ist eine weitere Prinzipskizze eines optischen Sensors 1 gemäß einer Ausführungsform der vorliegenden Erfindung dargestellt. Hier misst der optische Sensor 1 beispielsweise in einer speziellen Ausführungsform des FIG. 2 shows a further schematic diagram of an optical sensor 1 according to an embodiment of the present invention. Here, the optical sensor 1 measures, for example, in a specific embodiment of the
Streifenprojektionssensors aus Figur 1 anhand eines Lichtschnittverfahrens. Dazu ist erneut das Detektormodul 3 in einem wohldefinierten Abstand zu dem Lichtquellenmodul 2 angeordnet. Das Lichtquellenmodul 2 erzeugt einen eine Identifikationsinformation aufweisenden Lichtstrahl L, der hier entlang einer Linie auf dem Objekt geführt wird, beispielsweise durch eine Strahlablenkungseinheit des Lichtquellenmoduls 2 wie ein verstellbarer Mikrospiegel, oder bereits durch entsprechende optische Mittel in Form einer Linie auf das Objekt projiziert wird.  Strip projection sensor of Figure 1 using a light section method. For this purpose, the detector module 3 is again arranged at a well-defined distance from the light source module 2. The light source module 2 generates an identification information having light beam L, which is guided here along a line on the object, for example by a beam deflection unit of the light source module 2 as an adjustable micromirror, or is already projected by appropriate optical means in the form of a line on the object.
Das Detektionsmodul 3 erfasst nun den durch Reflektion aus dem Lichtstrahl L hervorgegangenen reflektierten Lichtstrahl L' und auf Grund der bekanntenThe detection module 3 now detects the reflected light beam L 'produced by reflection from the light beam L and on the basis of the known art
Anordnung zwischen dem Detektionsmodul 3 und dem Lichtquellenmodul 2, insbesondere den eingeschlossenen Winkeln, kann trigonometrisch der Abstand zu dem Objekt bestimmt werden. In Figur 3 ist ein System gemäß einer Ausführungsform der vorliegendenArrangement between the detection module 3 and the light source module 2, in particular the included angles, the distance to the object can be determined trigonometrically. FIG. 3 shows a system according to an embodiment of the present invention
Erfindung in einer schematischen Ansicht dargestellt. Das System umfasst hier ein erstes Fahrzeug 6 und ein zweites Fahrzeug 7. Beide Fahrzeuge 6, 7 sind vorliegend als Roboterstaubsauger ausgeführt. Das System kann aber auch zusätzlich oder alternativ andere autonome Fahrzeuge umfassen. Beispielhaft seien hier Produktionsroboter, automatisierte Flurförderzeuge und/oder selbstfahrende Kraftfahrzeuge genannt. Das erste Fahrzeug 6 weist einen ersten optischen Sensor 1 auf und das zweite Fahrzeug 7 weist einen zweiten optischen Sensor 1' auf. Jeder der optischen Sensoren 1, 1' umfasst ein Lichtquellenmodul 2, 2' mit einem Modulator 4 sowie ein Detektionsmodul 3, 3'. Der erste optische Sensor 1 sendet ein Lichtsignal L mit einer Identifikationsinformation, die eine Zuordnung zu dem optischen Sensor 1 ermöglicht, aus und der zweite optische Sensor 1' sendet ein Lichtsignal L" mit einer ihm eigenen Invention shown in a schematic view. The system here comprises a first vehicle 6 and a second vehicle 7. Both vehicles 6, 7 are in the present case designed as robotic vacuum cleaners. However, the system may additionally or alternatively comprise other autonomous vehicles. By way of example, production robots, automated industrial trucks and / or self-propelled motor vehicles may be mentioned here. The first vehicle 6 has a first optical sensor 1 and the second vehicle 7 has a second optical sensor 1 '. Each of the optical sensors 1, 1 'comprises a light source module 2, 2' with a modulator 4 and a detection module 3, 3 '. The first optical sensor 1 transmits a light signal L having an identification information including a Allocation to the optical sensor 1 allows, and the second optical sensor 1 'transmits a light signal L "with its own
Identifikationsinformation aus. Die Detektionsmodule 3, 3' detektieren einkommende Lichtsignale L, L', L". ImIdentification information. The detection modules 3, 3 'detect incoming light signals L, L', L "
Fall des ersten optischen Sensors 1 kann dies sowohl ein aus dem Lichtsignal L durch Reflektion an einem Objekt hervorgegangenes Lichtsignal L', als auch das (primäre) Lichtsignal L" des zweiten optischen Sensors 1' sein. Um ein Objekt zuverlässig zu erkennen, insbesondere seine Entfernung zu dem optischen Sensor 1 und/oder seine Geschwindigkeit im Falle eines bewegten Objekts zu bestimmen, muss der erste optische Sensor 1 zwischen einem reflektierten Lichtsignal L' und einem (primären) Lichtsignal L" des zweiten optischen Sensors 1' unterscheiden können. Dies ist möglich anhand der Identifikationsinformation der Lichtsignale L, L', L".In the case of the first optical sensor 1, this can be both a light signal L 'resulting from the light signal L by reflection at an object and the (primary) light signal L "of the second optical sensor 1' Distance to the optical sensor 1 and / or to determine its velocity in the case of a moving object, the first optical sensor 1 must be able to distinguish between a reflected light signal L 'and a (primary) light signal L "of the second optical sensor 1'. This is possible on the basis of the identification information of the light signals L, L ', L ".
Vorliegend sind die Identifikationsinformationen dabei als In the present case, the identification information is as
Intensitätsmodulationen mit einer Modulationsfrequenz, die deutlich höher ist als die Detektionsfrequenz der Detektionsmodule 3, 3' ausgeführt. Beispielsweise sind die Lichtsignale L, L', L" mit einer Modulationsfrequenz von ca. 2kHz moduliert, während die Detektionsmodule 3, 3' die Lichtsignale L, L', L" mit einerIntensity modulation with a modulation frequency, which is significantly higher than the detection frequency of the detection modules 3, 3 'executed. For example, the light signals L, L ', L "are modulated with a modulation frequency of about 2 kHz, while the detection modules 3, 3', the light signals L, L ', L" with a
Detektionsfrequenz von ca. 50Hz erfassen. Detect detection frequency of about 50Hz.
Die Detektionsmodule 3, 3' sind dazu eingerichtet, diese Modulationen ebenfalls zu erfassen und somit die Lichtsignale L, L', L" anhand der The detection modules 3, 3 'are adapted to also detect these modulations and thus the light signals L, L', L "based on the
Identifikationsinformationen dem zugehörigen optischen Sensor 1, 1' Identification information to the associated optical sensor 1, 1 '
zuzuordnen, oder zumindest das eigene Lichtsignal L und das daraus durch Reflektion hervorgegangene Lichtsignal L' von anderen Lichtsignalen L" zu unterscheiden. Somit kann eine fehlerfreie Entfernungs- und/oder to assign, or at least the own light signal L and the resulting therefrom by reflection light signal L 'from other light signals L "to distinguish
Geschwindigkeitsmessung durchgeführt werden. Speed measurement are performed.
Ist in dem System zusätzlich eine Basisstation vorgesehen, kann diese vorzugsweise die Lichtsignale L, L', L" anhand der Identifikationsinformationen den optischen Sensoren 1, 1' zuordnen. Hierdurch weiß sie, welches Fahrzeug 6, 7 sich gerade in der Nähe aufhält. In Figur 4 sind zwei Identifikationsinformationen gemäß einer Ausführungsform der vorliegenden Erfindung in einer schematischen Darstellung dargestellt. Dabei entsprechen die zugehörigen Lichtsignale L, L" beispielsweise den im If a base station is additionally provided in the system, it can preferably assign the light signals L, L ', L "to the optical sensors 1, 1' on the basis of the identification information, thereby knowing which vehicle 6, 7 is currently in the vicinity. FIG. 4 shows a schematic illustration of two identification information according to an embodiment of the present invention. The corresponding light signals L, L "correspond, for example, to those in FIG
Zusammenhang mit Figur 3 erläuterten Lichtsignalen L, L'. Dargestellt sind hier insbesondere die Intensitäten der Lichtsignale L, L" im Zeitverlauf. Diesen werden durch die Modulatoren 4 mittels Intensitätsmodulation, hier Connection with Figure 3 explained light signals L, L '. In particular, the intensities of the light signals L, L "are shown over time, which are determined by the modulators 4 by means of intensity modulation, here
beispielsweise mit einer mit variabler Geschwindigkeit rotierenden Sektorblende, Identifikationsinformationen aufgeprägt. Es ist ersichtlich, dass die For example, stamped with a variable speed sector shutter, identification information. It can be seen that the
Intensitätsmodulation des oberen Lichtsignals L sich von der Modulation des unteren Lichtsignals L" im Zeitverlauf unterscheidet. Je nach Vielzahl an optischen Sensoren 1, 1' im System kann eine mehr oder minder komplexe Modulation als Identifikationsinformation gewählt werden. Intensity modulation of the upper light signal L is different from the modulation of the lower light signal L "over time." Depending on the plurality of optical sensors 1, 1 'in the system, a more or less complex modulation can be selected as identification information.
Ein Detektionsmodul 3, 3' kann diese Identifikationsinformationen detektieren und vorzugsweise dekodieren, so dass es eine Zuordnung eines Lichtstrahls L,A detection module 3, 3 'can detect and preferably decode this identification information, so that there is an assignment of a light beam L,
L', L" zu einem optischen Sensor 1, 1' vornehmen kann. Zumindest aber kann das Detektionsmodul 3, 3' ein von dem Lichtquellenmodul 2, 2', welches dem gleichen optischen Sensor zugeordnet ist, stammendes Lichtsignal L, L', L" identifizieren. L ', L "can make an optical sensor 1, 1. However, at least the detection module 3, 3' can receive a light signal L, L ', L originating from the light source module 2, 2', which is assigned to the same optical sensor "identify.
In Figur 5 ist ein optischer Sensor 1 gemäß einer Ausführungsform der vorliegenden Erfindung in einer schematischen Darstellung dargestellt. Der optische Sensor 1 umfasst ein Steuermodul 8, welches den Betrieb des optischen Sensors 1 steuert und beispielsweise die erfassten Entfernungs- und/oder Geschwindigkeitsinformationen an eine Kontrolleinheit eines FahrzeugsFIG. 5 shows a schematic view of an optical sensor 1 according to an embodiment of the present invention. The optical sensor 1 comprises a control module 8 which controls the operation of the optical sensor 1 and, for example, the detected distance and / or speed information to a control unit of a vehicle
6 weiterleitet, um die Daten für eine Objekterkennung und/oder Navigation einzusetzen. 6 to use the data for object recognition and / or navigation.
Verbunden mit dem Steuermodul 8 sind einerseits ein Lichtquellenmodul 2, welches hier einen Laser umfasst, der zur Erzeugung eines Lasersignals L konfiguriert ist. Das Lichtquellenmodul umfasst weiterhin einen Modulator 4, welcher das Lasersignal L derart moduliert, dass es eine Connected to the control module 8 are on the one hand a light source module 2, which here comprises a laser which is configured to generate a laser signal L. The light source module further comprises a modulator 4, which modulates the laser signal L such that it has a
Identifikationsinformation aufweist, die, vorzugsweise eindeutig, auf den optischen Sensor 1 hinweist. Zudem ist das Steuermodul 8 mit einem Identification information, which, preferably uniquely, points to the optical sensor 1. In addition, the control module 8 with a
Detektionsmodul 5 verbunden, welches zur Detektion eines Lichtsignals L', L" konfiguriert ist. Das Detektionsmodul umfasst hier beispielsweise einen dynamischen Bildverarbeitungssensor 5. Detection module 5 connected, which for detecting a light signal L ', L " is configured. The detection module here comprises, for example, a dynamic image processing sensor 5.
Bei dem optischen Sensor 1 handelt es sich beispielsweise um einen The optical sensor 1 is, for example, a
Laufzeitmessungs-Ladar-Sensor (Ladar ist dabei eine Abkürzung für engl.„Laser Detection and Ranging", also laserunterstützte Entfernungsmessung). Im Betrieb sendet der optische Sensor 1 ein Lasersignal L aus, welches an einem Objekt reflektiert wird. Das daraus entstandene reflektierte Lasersignal L' wird von dem Detektionsmodul 3 erfasst und die Laufzeit des Lasersignals L, L' bestimmt. Daraus lässt sich die Entfernung zu dem Objekt ermitteln. Alternativ könnte es sich allerdings bei dem optischen Sensor 1 auch um einen Strukturiertes- Licht- Sensor handeln entsprechend einer der im Zusammenhang mit den Figuren 1 und 2 beschriebenen Ausführungsformen. Time-of-flight Ladar sensor (Ladar is an abbreviation for "Laser Detection and Ranging", ie laser-assisted distance measurement.) In operation, the optical sensor 1 emits a laser signal L, which is reflected by an object, resulting in a reflected laser signal L 'is detected by the detection module 3 and the transit time of the laser signal L, L' determined, from which the distance to the object can be determined Alternatively, however, the optical sensor 1 could also be a structured light sensor corresponding to one the embodiments described in connection with Figures 1 and 2.
In Figur 6 ist ein optischer Sensor 1 gemäß einer Ausführungsform der vorliegenden Erfindung in einer schematischen Prinzipskizze dargestellt. Im Wesentlichen ähnelt der hier dargestellte optische Sensor 1 dabei den im FIG. 6 shows a schematic diagram of an optical sensor 1 according to an embodiment of the present invention. In essence, the optical sensor 1 shown here is similar to the one shown in FIG
Zusammenhang mit den Figuren 1 und 2 beschriebenen optischen Sensoren 1, weswegen auf die diesbezüglichen Ausführungen verwiesen wird. Hier ist der optische Sensor 1 als Strukturiertes-Licht-Sensor vorgesehen. In connection with the Figures 1 and 2 described optical sensors 1, so reference is made to the relevant embodiments. Here, the optical sensor 1 is provided as a structured light sensor.
Der optische Sensor 1 umfasst ein Steuermodul 8 und damit verbunden ein Lichtquellenmodul 2 mit einem Modulator 4, der hier beispielsweise The optical sensor 1 comprises a control module 8 and connected thereto a light source module 2 with a modulator 4, here for example
softwareseitig vorgesehen ist, und ein Detektionsmodul 3. Das Detektionsmodul 3 umfasst hier beispielhaft einen dynamischen Bildverarbeitungssensor 5. provided on the software side, and a detection module 3. The detection module 3 here comprises by way of example a dynamic image processing sensor 5.
Ein solcher dynamischer Bildverarbeitungssensor 5 erfasst nicht wie Such a dynamic image processing sensor 5 does not detect how
konventionelle Kamerasensoren zu einem bestimmten Zeitpunkt ein Gesamtbild mit einer Vielzahl von Bildpunkten, ein sogenanntes Frame, sondern es werden nur diejenigen Bildpunkte registriert, die eine Veränderung zu einem Conventional camera sensors at a given time an overall image with a plurality of pixels, a so-called frame, but only those pixels are registered, which is a change to a
vorhergehenden Zeitpunkt erfassen. Hierdurch wird die Speichermenge deutlich verringert und zudem prinzipbedingt eine Bewegungserkennung vereinfacht. capture the previous time. As a result, the amount of memory is significantly reduced and also simplified inherent motion detection.
Das Lichtquellenmodul 2 sendet einen Lichtstrahl L aus, auf den der Modulator 4 mit einer Modulationsfrequenz, hier zum Beispiel 1kHz, eine Identifikationsinformation aufmoduliert hat, hier beispielhaft in Form einer Sequenz von verschieden hohen Intensitäten. Ein hier nicht weiter dargestelltes optisches Mittel, beispielsweise eine Linse und/oder eine Blende wirft das Licht in Form eines Musters auf das zu vermessende Objekt. Dabei werden die Muster mit einer Trägersignalfrequenz, hier beispielsweise 1 Hz, variiert. An dem Objekt wird das Licht reflektiert, also ein Lichtsignal L' erzeugt, das von dem The light source module 2 emits a light beam L, on which the modulator 4 with a modulation frequency, here for example 1 kHz, a Identification information has modulated, here for example in the form of a sequence of different high intensities. An optical means, not shown here, for example, a lens and / or a diaphragm throws the light in the form of a pattern on the object to be measured. In this case, the patterns are varied with a carrier signal frequency, in this case for example 1 Hz. At the object, the light is reflected, that is, a light signal L 'generated by the
Detektionsmodul 3, genauer dem dynamischen Bildverarbeitungssensor 5, detektiert wird. Detection module 3, more specifically the dynamic image processing sensor 5, is detected.
Der dynamische Bildverarbeitungssensor 5 detektiert auf Pixelebene dabei das Lichtsignal L' mit einer zweiten Detektionsfrequenz, die mindestens so hoch ist wie die Modulationsfrequenz. Vorzugsweise sind die Modulationsfrequenz und die zweite Detektionsfrequenz gleich. Der dynamische Bildverarbeitungssensor 5 erfasst folglich die Identifikationsinformation, also hier die charakteristische Abfolge der unterschiedlichen Intensitäten. The dynamic image processing sensor 5 detects at the pixel level the light signal L 'at a second detection frequency that is at least as high as the modulation frequency. Preferably, the modulation frequency and the second detection frequency are the same. Consequently, the dynamic image processing sensor 5 detects the identification information, that is, the characteristic sequence of the different intensities.
Mit einer ersten Detektionsfrequenz, die vorzugsweise der Trägersignalfrequenz entspricht, erfasst das Detektionsmodul 3 dabei das projizierte und reflektierte Muster. Mit Triangulations- bzw. Photogrammetrieverfahren kann nun einerseits in grundsätzlich bekannter Weise die Entfernung zu dem Objekt bestimmt werden. With a first detection frequency, which preferably corresponds to the carrier signal frequency, the detection module 3 detects the projected and reflected pattern. Using triangulation or photogrammetric methods, the distance to the object can now be determined on the one hand in fundamentally known manner.
Andererseits ist das Detektionsmodul 3, oder hier das Steuermodul 8 dazu eingerichtet, aus dem detektierten Lichtsignal L' eines Frames, also eines bestimmten Musters, und dem gesendeten Lichtsignal L diesen Musters ein Differenzsignal zu erzeugen. On the other hand, the detection module 3, or in this case the control module 8, is configured to generate a difference signal from the detected light signal L 'of a frame, that is to say a specific pattern, and the transmitted light signal L of this pattern.
Da hier die Identifikationsinformation gleich ist und vorliegend die Reflexionsund/oder Absorptionsverluste vernachlässigbar sind, ist das Differenzsignal 0. Daraus schließt das Steuermodul 8, dass das reflektierte Lichtsignal L' tatsächlich von dem optischen Sensor 1 stammt, die Entfernungsmessung also korrekt war. Since here the identification information is the same and in the present case the reflection and / or absorption losses are negligible, the difference signal is 0. From this, the control module 8 concludes that the reflected light signal L 'actually originates from the optical sensor 1, the distance measurement was therefore correct.

Claims

Ansprüche claims
1. Optischer Sensor (1) zur Entfernungs- und/oder 1. Optical sensor (1) for distance and / or
Geschwindigkeitsmessung mit einem Lichtquellenmodul (2) zur  Speed measurement with a light source module (2) for
Erzeugung eines Lichtsignals (L), einem Detektionsmodul (3) zur Detektion eines Lichtsignals (L'), dadurch gekennzeichnet, dass das Lichtquellenmodul (2) einen Modulator (4) zur Modulation des Lichtsignals (L) umfasst, wobei der Modulator (4) derart konfiguriert ist, dass das Lichtsignal (L) nach der Modulation eine Identifikationsinformation aufweist, wobei das Detektionsmodul (3) zur Detektion und Identifizierung einer Identifikationsinformation des detektierten Lichtsignals (L') konfiguriert ist.  Generation of a light signal (L), a detection module (3) for detecting a light signal (L '), characterized in that the light source module (2) comprises a modulator (4) for modulating the light signal (L), wherein the modulator (4) is configured such that the light signal (L) after the modulation has an identification information, wherein the detection module (3) is configured to detect and identify an identification information of the detected light signal (L ').
2. Optischer Sensor (1) nach einem der vorhergehenden Ansprüche, 2. Optical sensor (1) according to one of the preceding claims,
dadurch gekennzeichnet, dass das Lichtquellenmodul (2) einen Laser umfasst, wobei insbesondere das Lichtsignal (L) ein Lasersignal ist.  characterized in that the light source module (2) comprises a laser, wherein in particular the light signal (L) is a laser signal.
3. Optischer Sensor (1) nach einem der vorhergehenden Ansprüche, 3. Optical sensor (1) according to one of the preceding claims,
dadurch gekennzeichnet, dass das Detektionsmodul (3) einen  characterized in that the detection module (3) has a
dynamischen Bildverarbeitungssensor (5) umfasst.  dynamic image processing sensor (5).
4. Optischer Sensor (1) nach einem der vorhergehenden Ansprüche, 4. Optical sensor (1) according to one of the preceding claims,
dadurch gekennzeichnet, dass der Modulator (4) derart konfiguriert ist, dass das Lichtsignal (L) eine Modulationsfrequenz aufweist, die im Bereich zwischen 100 Hz bis 1 MHz liegt, besonders bevorzugt zwischen 1 kHz und 100 kHz, ganz besonders bevorzugt beträgt die  characterized in that the modulator (4) is configured such that the light signal (L) has a modulation frequency which is in the range between 100 Hz to 1 MHz, more preferably between 1 kHz and 100 kHz, very particularly preferably
Modulationsfrequenz 2 kHz.  Modulation frequency 2 kHz.
5. Optischer Sensor (1) nach Anspruch 3, dadurch gekennzeichnet, dass das Detektionsmodul (3) eine erste Detektionsfrequenz aufweist, wobei der dynamische Bildverarbeitungssensor (5) eine zweite 5. An optical sensor (1) according to claim 3, characterized in that the detection module (3) has a first detection frequency, wherein the dynamic image processing sensor (5) has a second
Detektionsfrequenz aufweist, wobei die erste Detektionsfrequenz vorzugsweise im Bereich von 1Hz bis 100Hz, besonders bevorzugt im Bereich von 10Hz bis 75Hz, ganz besonders bevorzugt im Bereich von 30Hz bis 60Hz liegt, und/oder wobei die zweite Detektionsfrequenz vorzugsweise im Bereich von 100Hz bis IM Hz, besonders bevorzugt zwischen 1kHz und 100kHz liegt, wobei insbesondere die zweite Detection frequency, wherein the first detection frequency preferably in the range of 1Hz to 100Hz, more preferably in the range of 10Hz to 75Hz, most preferably in the range of 30Hz to 60Hz, and / or wherein the second detection frequency is preferably in the range of 100Hz to 1Hz, more preferably between 1kHz and 100kHz lies, in particular the second
Detektionsfrequenz wenigstens so hoch ist wie die Modulationsfrequenz.  Detection frequency is at least as high as the modulation frequency.
6. Optischer Sensor (1) nach einem der vorhergehenden Ansprüche, 6. Optical sensor (1) according to one of the preceding claims,
dadurch gekennzeichnet, dass die Modulation eine Frequenzmodulation, eine Amplitudenmodulation und/oder eine Intensitätsmodulation ist.  characterized in that the modulation is a frequency modulation, an amplitude modulation and / or an intensity modulation.
7. Optischer Sensor (1) nach einem der vorhergehenden Ansprüche, 7. An optical sensor (1) according to one of the preceding claims,
dadurch gekennzeichnet, dass der optische Sensor (1) ein Lidar-Sensor, insbesondere ein Ladar-Sensor ist, und/oder dass der optische Sensor (1) ein Strukturiertes- Licht-Sensor ist.  characterized in that the optical sensor (1) is a lidar sensor, in particular a ladar sensor, and / or that the optical sensor (1) is a patterned light sensor.
8. System zur Mobilitätsüberwachung von autonomen Fahrzeugen, mit 8. System for mobility monitoring of autonomous vehicles, with
wenigstens einem ersten Fahrzeug (6) mit einem ersten optischen Sensor (1) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das Detektionsmodul (3) des ersten optischen Sensors (1) zur Unterscheidung eines durch Reflexion aus dem Lichtsignal (L) des ersten optischen Sensors (1) hervorgegangenen Lichtsignal (L') von einem weiteren Lichtsignal (L") eines weiteren optischen Sensors ( ) anhand der Identifikationsinformation konfiguriert ist.  at least a first vehicle (6) with a first optical sensor (1) according to one of the preceding claims, characterized in that the detection module (3) of the first optical sensor (1) for distinguishing one by reflection from the light signal (L) of the first optical signal (L ') of a further light signal (L ") of a further optical sensor () is configured based on the identification information.
9. System nach Anspruch 8, dadurch gekennzeichnet, dass das System wenigstens eine, insbesondere unbewegliche, Basisstation umfasst, wobei die Basisstation wenigstens ein Detektionsmodul (3') zur Detektion eines Lichtsignals (L, L', L") aufweist, wobei das Detektionsmodul (3') zur Unterscheidung von Lichtsignalen anhand von 9. System according to claim 8, characterized in that the system comprises at least one, in particular immovable, base station, wherein the base station at least one detection module (3 ') for detecting a light signal (L, L', L "), wherein the detection module (3 ') for distinguishing light signals based on
Identifikationsinformationen und insbesondere zur Identifizierung eines Fahrzeugs anhand einer Identifikationsinformation des zugehörigen Lichtsignals konfiguriert ist. Identification information and in particular for identifying a vehicle based on an identification information of the associated light signal is configured.
10. Verfahren zur Mobilitätsüberwachung von autonomen Fahrzeugen in einem System nach einem der Ansprüche 8 oder 9, wobei der erste optische Sensor (1) ein Lichtsignal (L) mit einer Identifikationsinformation sendet, wobei das Detektionsmodul (3, 3') des ersten optischen Sensors (1) und/oder der Basisstation ein Lichtsignal (L, L', L") detektiert und den zugehörigen optischen Sensor (1, 1') anhand der 10. A method for mobility monitoring autonomous vehicles in a system according to one of claims 8 or 9, wherein the first optical sensor (1) sends a light signal (L) with an identification information, wherein the detection module (3, 3 ') of the first optical sensor (1) and / or the base station a light signal (L, L ', L ") detected and the associated optical sensor (1, 1') based on
Identifikationsinformation des Lichtsignals (L, L', L") identifiziert.  Identification information of the light signal (L, L ', L ") identified.
EP17772040.6A 2016-09-30 2017-09-22 Optical sensor for distance and/or speed measurement, system for mobility monitoring of autonomous vehicles, and method for mobility monitoring of autonomous vehicles Withdrawn EP3519853A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102016219099.7A DE102016219099A1 (en) 2016-09-30 2016-09-30 Optical sensor for distance and / or speed measurement, system for mobility monitoring of autonomous vehicles and method for monitoring the mobility of autonomous vehicles
PCT/EP2017/074087 WO2018060100A1 (en) 2016-09-30 2017-09-22 Optical sensor for distance and/or speed measurement, system for mobility monitoring of autonomous vehicles, and method for mobility monitoring of autonomous vehicles

Publications (1)

Publication Number Publication Date
EP3519853A1 true EP3519853A1 (en) 2019-08-07

Family

ID=59955564

Family Applications (1)

Application Number Title Priority Date Filing Date
EP17772040.6A Withdrawn EP3519853A1 (en) 2016-09-30 2017-09-22 Optical sensor for distance and/or speed measurement, system for mobility monitoring of autonomous vehicles, and method for mobility monitoring of autonomous vehicles

Country Status (5)

Country Link
US (1) US11525899B2 (en)
EP (1) EP3519853A1 (en)
CN (1) CN109791203A (en)
DE (1) DE102016219099A1 (en)
WO (1) WO2018060100A1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023181308A1 (en) * 2022-03-24 2023-09-28 株式会社ソニー・インタラクティブエンタテインメント Computer system, method, and program
US20240052757A1 (en) * 2022-08-11 2024-02-15 Raytheon Technologies Corporation Detection of gas turbine engine blade abnormalities based on light reflections

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5517201A (en) * 1993-10-19 1996-05-14 Thompson, Jr.; Everett E. Game alert system
CA2189377C (en) * 1996-11-01 2004-07-20 Jacques Dubois Active cooperative tuned identification friend or foe (actiff)
JP3843321B2 (en) * 2002-11-27 2006-11-08 独立行政法人産業技術総合研究所 Information support system
US7307547B2 (en) * 2005-06-01 2007-12-11 Global Traffic Technologies, Llc Traffic preemption system signal validation method
US9002511B1 (en) 2005-10-21 2015-04-07 Irobot Corporation Methods and systems for obstacle detection using structured light
WO2009016551A2 (en) * 2007-08-01 2009-02-05 Koninklijke Philips Electronics N.V. Vehicle positioning measurement system and method
WO2009136309A2 (en) * 2008-05-06 2009-11-12 Koninklijke Philips Electronics N.V. Illumination system and method for processing light
CA2841179C (en) * 2011-07-13 2019-06-25 Hunter Safety Lab, Llc A system for preventing friendly fire accidents
EP2786172B1 (en) * 2011-11-30 2022-01-19 General Electric Company Distance estimation system and method for a railway vehicle
CN104115197A (en) * 2011-12-05 2014-10-22 布莱特瓦维森有限公司 Smart traffic sign system and method
JP6429795B2 (en) * 2013-01-07 2018-11-28 アセンティア イメージング， インコーポレイテッド Optical guidance system
CN203574655U (en) * 2013-04-09 2014-04-30 北京半导体照明科技促进中心 Device and system for transmitting information through visible light and light source
DK3004913T3 (en) * 2013-05-29 2019-11-11 Willem Folkers METHOD AND SYSTEM FOR RETRIEVING LOCATION DATA OF AN OBJECT OVER TIME USING A GNSS RECEIVER FOR ANTI-SPOOFING, AND SIGNALS-IN-SPACE RECEIVER AND READER FOR SEARCH METHOD AND SYSTEM
JP2016524709A (en) * 2013-06-06 2016-08-18 ヘプタゴン・マイクロ・オプティクス・プライベート・リミテッドＨｅｐｔａｇｏｎ Ｍｉｃｒｏ Ｏｐｔｉｃｓ Ｐｔｅ． Ｌｔｄ． Sensor system with active illumination
EP2887009A1 (en) * 2013-12-23 2015-06-24 Universität Zürich Method for reconstructing a surface using spatially structured light and a dynamic vision sensor
DE102014212032A1 (en) * 2014-06-24 2015-12-24 Robert Bosch Gmbh Method for detecting a roadway and corresponding detection system
US9575184B2 (en) 2014-07-03 2017-02-21 Continental Advanced Lidar Solutions Us, Inc. LADAR sensor for a dense environment
US10114112B2 (en) * 2015-03-26 2018-10-30 Qualcomm Incorporated Communicating service information from one light detection and ranging (LIDAR) system to another LIDAR system
CN104931974A (en) * 2015-06-15 2015-09-23 中国科学院上海光学精密机械研究所 Light source modulation and demodulation-based ICMOS high-speed 3D imaging laser radar
US9668322B1 (en) * 2016-03-25 2017-05-30 Tyson York Winarski Smart laser device
US20180074198A1 (en) * 2016-09-15 2018-03-15 Qualcomm Incorporated Optical beam identification using optical demodulation

Also Published As

Publication number Publication date
DE102016219099A1 (en) 2018-04-05
US11525899B2 (en) 2022-12-13
US20190242976A1 (en) 2019-08-08
CN109791203A (en) 2019-05-21
WO2018060100A1 (en) 2018-04-05

Similar Documents

Publication Publication Date Title
EP1788467B1 (en) Safety device
EP1933167B1 (en) Optoelectronic sensor and method for detecting and determining the distance of an object
EP2917762A1 (en) Recording method for at least two tof cameras
EP1926968A1 (en) Method for contactless dynamic detection of the profile of a solid body
EP2025991A1 (en) Device and method for three-dimensional monitoring of a spatial area with at least two image sensors
DE102009034848A1 (en) Optoelectronic sensor
EP3519853A1 (en) Optical sensor for distance and/or speed measurement, system for mobility monitoring of autonomous vehicles, and method for mobility monitoring of autonomous vehicles
DE2215576B2 (en) Indicator for motor vehicle displacement - has photoelectric receiver operating in conjunction with correlator to measure regulate and display movement
EP0290633B1 (en) Method for detecting changes in the driving range of an unmanned vehicle
DE102019115723A1 (en) Driver assistance system for determining a color of an object in a vehicle environment
DE102019202734A1 (en) Collision avoidance method and collision avoidance system
WO2021213788A1 (en) Method and device for identifying blooming in a lidar measurement
DE102014219538A1 (en) Method for operating mobile platforms and mobile platform
EP3809157A1 (en) Distance-measuring optoelectronic sensor and method for detecting a target object
WO2018210986A1 (en) Arrangement and method for contactless distance determination of the type of the light intersection method
EP3837637B1 (en) Identification device, identification system and method for identifying an object
EP1536248A2 (en) Method and system for tracking the location of moving objects
DE202022104107U1 (en) Device for detecting objects
EP4310547A1 (en) Device and method for detecting objects
WO2023247395A1 (en) Method for operating a lidar system with stray light correction, corresponding lidar system, and vehicle
DE102021134150A1 (en) Reliable optical transit time method for determining distance values
DE202022104108U1 (en) Device for detecting objects in a surveillance area
WO2022243089A1 (en) Method for operating a detection device, detection device, and vehicle comprising at least one detection device
WO2023280647A1 (en) Method for correcting optical crosstalk between pixels of an optical detection device, and corresponding detection device
EP3945339A1 (en) Optical detection device for monitoring at least one surveillance area on objects and method for operating an optical detection device

Legal Events

Date Code Title Description
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: UNKNOWN

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE INTERNATIONAL PUBLICATION HAS BEEN MADE

PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE

17P Request for examination filed

Effective date: 20190430

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME

DAV Request for validation of the european patent (deleted)
DAX Request for extension of the european patent (deleted)
RAP1 Party data changed (applicant data changed or rights of an application transferred)

Owner name: ROBERT BOSCH GMBH

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

17Q First examination report despatched

Effective date: 20210706

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION IS DEEMED TO BE WITHDRAWN

18D Application deemed to be withdrawn

Effective date: 20211117