DE102014215843A1 - Driver observation system for a motor vehicle - Google Patents

Driver observation system for a motor vehicle Download PDF

Info

Publication number
DE102014215843A1
DE102014215843A1 DE102014215843.5A DE102014215843A DE102014215843A1 DE 102014215843 A1 DE102014215843 A1 DE 102014215843A1 DE 102014215843 A DE102014215843 A DE 102014215843A DE 102014215843 A1 DE102014215843 A1 DE 102014215843A1
Authority
DE
Germany
Prior art keywords
camera
observation system
driver observation
driver
circuit board
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102014215843.5A
Other languages
German (de)
Inventor
Hoang Trinh
Markus Lindner
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Priority to DE102014215843.5A priority Critical patent/DE102014215843A1/en
Priority to PCT/EP2015/063715 priority patent/WO2016023661A1/en
Publication of DE102014215843A1 publication Critical patent/DE102014215843A1/en
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness

Abstract

Die Erfindung betrifft ein Fahrerbeobachtungssystem (1) für ein Kraftfahrzeug, mit wenigstens einer Kamera (3), die an einem Kombiinstrument (4) zur Fahrerbeobachtung angeordnet/anordenbar ist, und mit einer Recheneinheit (8) zum Auswerten eines Ausgangssignals der Kamera (3). Es ist vorgesehen, dass die Recheneinheit (8) zur Vorprozessierung des Kameraausgangssignals ausgebildet und zusammen mit der Kamera (3) auf einer Leiterplatte (9) angeordnet ist.The invention relates to a driver observation system (1) for a motor vehicle, having at least one camera (3) which can be arranged / arranged on an instrument cluster (4) for driver observation, and having a computing unit (8) for evaluating an output signal of the camera (3). , It is provided that the arithmetic unit (8) is designed for preprocessing the camera output signal and is arranged together with the camera (3) on a printed circuit board (9).

Description

Die Erfindung betrifft ein Fahrerbeobachtungssystem für ein Kraftfahrzeug, mit wenigstens einer Kamera, die an einem Kombiinstrument zur Fahrerbeobachtung angeordnet/anordenbar ist, und mit einer Recheneinheit zum Auswerten eines Kameraausgangssignals.The invention relates to a driver observation system for a motor vehicle, having at least one camera which is arranged / can be arranged on an instrument cluster for driver observation, and having a computing unit for evaluating a camera output signal.

Stand der TechnikState of the art

Fahrerbeobachtungssysteme der Eingangs genannten Art sind aus dem Stand der Technik bekannt. Zur Fahrerbeobachtung, insbesondere um einen Müdigkeitszustand beziehungsweise eine ausreichende Aufmerksamkeit des Fahrers feststellen zu können, ist es bekannt, den Fahrer mittels einer oder mehrerer Kameras zu beobachten und mittels einer Gesichtserkennung auf den Zustand des Fahrers bezüglich Müdigkeit und/oder Aufmerksamkeit zu schließen. Um die von der Kamera erfassten Daten auszuwerten, ist dabei wenigstens eine Recheneinheit vorgesehen, die das Ausgangssignal der Kamera verarbeitet. Driver observation systems of the aforementioned type are known from the prior art. For driver observation, in particular in order to be able to determine a state of tiredness or sufficient attention of the driver, it is known to observe the driver by means of one or more cameras and to close by means of a face recognition on the condition of the driver with regard to fatigue and / or attention. In order to evaluate the data captured by the camera, at least one arithmetic unit is provided which processes the output signal of the camera.

Offenbarung der ErfindungDisclosure of the invention

Das erfindungsgemäße Fahrerbeobachtungssystem mit den Merkmalen des Anspruchs 1 hat den Vorteil, dass eine kompakte Baueinheit zur Verfügung gestellt wird, welche die Kamera und eine Recheneinheit zur Vorprozessierung des Kameraausgangssignals umfasst, wobei die Recheneinheit und die Kamera zusammen auf einer gemeinsamen Leiterplatte angeordnet sind. Hierdurch erfolgt eine Vorauswertung beziehungsweise Vorbearbeitung des Kameraausgangssignals bereits in derselben Baueinheit. Die Baueinheit muss nur noch mit einem Steuergerät oder dergleichen verbunden werden, um das vorprozessierte Kameraausgangssignal verarbeiten und die Fahrerbeobachtung auswerten zu können. Weist das Fahrerbeobachtungssystem mehrere derartige Baueinheiten mit einer Kamera und einer Recheneinheit zur Vorprozession auf, so kann der Rechenaufwand für das Steuergerät zur Auswertung der Fahrerbeobachtung deutlich reduziert und damit die Auswertung insgesamt beschleunigt werden. Erfindungsgemäß ist hierzu vorgesehen, dass die Recheneinheit zur Vorprozessierung des Kameraausgangssignals ausgebildet und zusammen mit der Kamera auf einer Leiterplatte angeordnet ist.The driver observation system according to the invention with the features of claim 1 has the advantage that a compact unit is provided which comprises the camera and a computing unit for preprocessing the camera output signal, wherein the arithmetic unit and the camera are arranged together on a common circuit board. This results in a pre-evaluation or pre-processing of the camera output signal already in the same unit. The assembly only has to be connected to a control unit or the like in order to process the preprocessed camera output signal and to be able to evaluate the driver observation. If the driver observation system has a plurality of such units with a camera and a computing unit for the pre-procession, then the computation outlay for the control unit for evaluating the driver observation can be significantly reduced, and thus the evaluation as a whole can be accelerated. According to the invention, provision is made here for the arithmetic unit to be designed for preprocessing the camera output signal and to be arranged together with the camera on a printed circuit board.

Gemäß einer vorteilhaften Weiterbildung der Erfindung ist vorgesehen, dass das Fahrerbeobachtungssystem eine Steuereinheit zum Auswerten des vorprozessierten Ausgangssignals aufweist, die ebenfalls auf der Leiterplatte angeordnet ist. Dadurch wird eine besonders kompakte Bauweise des Fahrerbeobachtungssystems zur Verfügung gestellt. Darüber hinaus wird die elektrische Verbindung von Steuereinheit, Kamera und Recheneinheit besonders einfach durch Leiterbahnen auf die Leiterplatte dargestellt. Die so bereitgestellte Baueinheit ist auch robust und gewährleistet eine dauerhafte Funktionsfähigkeit, beispielsweise auch bei Auftreten von stärkeren Vibrationen. According to an advantageous development of the invention, it is provided that the driver observation system has a control unit for evaluating the preprocessed output signal, which is likewise arranged on the printed circuit board. As a result, a particularly compact design of the driver observation system is provided. In addition, the electrical connection of the control unit, camera and arithmetic unit is represented particularly simply by printed conductors on the printed circuit board. The structural unit provided in this way is also robust and ensures lasting functionality, for example, even in the event of stronger vibrations.

Gemäß einer bevorzugten Ausführungsform der Erfindung ist vorgesehen, dass die Recheneinheit als „Field Programmable Gate Array“ (Feldprogrammierbare Gatter-Anordnung FPGA) ausgebildet ist. Die Recheneinheit stellt somit einen integrierten Schaltkreis dar, in den eine logische Schaltung programmiert werden kann. Die Recheneinheit ist somit eine einfach ausgebildete Recheneinheit, die auf einfache Art und Weise an ihren jeweiligen Zweck anpassbar ist. Aufgrund ihrer Einfachheit führt sie das jeweilige Programm schnell und effizient aus.According to a preferred embodiment of the invention, it is provided that the arithmetic unit is designed as a "Field Programmable Gate Array" (FPGA). The arithmetic unit thus represents an integrated circuit into which a logic circuit can be programmed. The arithmetic unit is thus a simple arithmetic unit which can be easily adapted to its respective purpose. Due to its simplicity, it executes the respective program quickly and efficiently.

Vorzugsweise ist die Recheneinheit mit mehreren auf der Leiterplatte angeordneten Kameras verbunden. Die Recheneinheit ist somit dazu ausgebildet, das Kameraausgangssignal mehrerer Kameras zu verarbeiten beziehungsweise vorzubearbeiten. Aufgrund des Anwendungsfalls für die Kamera, nämlich der Fahrerbeobachtung, entstehen in der Regel nur geringe Datenmengen, die verarbeitet werden müssen. Dadurch bietet sich auch hier die Ausbildung der Recheneinheit als feldprogrammierbare Gatter-Anordnung an, da sie in diesem Fall ausreichend ist, die Datenmengen schnell und effizient umzusetzen beziehungsweise vorzubearbeiten.Preferably, the arithmetic unit is connected to a plurality of cameras arranged on the printed circuit board. The arithmetic unit is thus designed to process or pre-process the camera output signal of several cameras. Due to the application case for the camera, namely the driver observation, usually only small amounts of data that need to be processed. As a result, the design of the arithmetic unit as a field-programmable gate arrangement is also suitable here, since in this case it is sufficient to implement or pre-process the data volumes quickly and efficiently.

Gemäß einer vorteilhaften Weiterbildung der Erfindung ist vorgesehen, dass der jeweiligen Kamera ein Infrarotstrahler zugeordnet ist. Die jeweilige Kamera ist dabei entsprechend derart ausgebildet, dass sie die an dem Fahrer reflektierte Infrarotstrahlung entsprechend erfasst. Die jeweilige Kamera ist somit vorzugsweise als Infrarotkamera ausgebildet. Hierdurch wird gewährleistet, dass auch eine Fahrerbeobachtung bei dunklen Sichtverhältnissen durchgeführt werden kann, ohne den Fahrer zu stören.According to an advantageous embodiment of the invention, it is provided that the respective camera is associated with an infrared radiator. The respective camera is correspondingly designed in such a way that it detects the infrared radiation reflected by the driver accordingly. The respective camera is thus preferably designed as an infrared camera. This ensures that even a driver observation in dark visibility conditions can be performed without disturbing the driver.

Weiterhin ist bevorzugt vorgesehen, dass die Recheneinheit mit dem jeweiligen Infrarotstrahler, der insbesondere ebenfalls auf der Leiterplatte angeordnet ist, verbunden ist. Die Recheneinheit, insbesondere die feldprogrammierbare Gatter-Anordnung, arbeitet somit bevorzugt mit mehreren Infrarotstrahlern und mit mehreren Kameras zusammen. Wie bereits gesagt, ist dies aufgrund der in der Regel geringen Datenmenge des jeweiligen Kameraausgangssignals problemlos durchführbar. Dadurch, dass nur eine Recheneinheit entsprechender Art vorgesehen wird, ist nur eine niedrige Anzahl von Komponenten des Fahrerbeobachtungssystems nötig und der Verbindungsaufwand der einzelnen Komponenten miteinander ist einfach und kostengünstig.Furthermore, it is preferably provided that the arithmetic unit with the respective infrared radiator, which is in particular also arranged on the circuit board, is connected. The arithmetic unit, in particular the field-programmable gate arrangement, thus preferably works together with a plurality of infrared radiators and with a plurality of cameras. As already stated, this is easily feasible due to the generally small amount of data of the respective camera output signal. Because only one arithmetic unit of the corresponding type is provided, only a low number of components of the driver observation system is necessary and the connection effort of the individual components with each other is simple and inexpensive.

Gemäß einer vorteilhaften Weiterbildung der Erfindung ist außerdem vorgesehen, dass jeweils ein Infrarotstrahler jeweils einer der Kameras zugeordnet ist. Somit wird die Bilderfassung der jeweiligen Kamera verbessert und insgesamt ein gutes Fahrerbeobachtungsergebnis erzielt. Vorzugsweise ist der jeweilige Infrarotstrahler nahe zu der jeweiligen Kamera, insbesondere direkt benachbart zu der jeweiligen Kamera angeordnet, um ein optimales Ergebnis zu erzielen. Insbesondere wird hierdurch erreicht, dass eine homogene Ausleuchtung des zu erfassenden Bildes unter Vermeidung von „harter“ beziehungsweise scharfer Schattenlinien gewährleistet wird. Darüber hinaus wird durch den oder die Infrarotstrahler erreicht, dass die Pupille des Fahrers besser erkennbar ist und dadurch eine Blickverfolgung des Fahrers verlässlich durchführbar ist. Die Blickverfolgung kann beispielsweise auch dazu genutzt werden, ein Head-Up-Display (HUD) anzusteuern, eine Gesichtserkennung beziehungsweise Identifizierung durchzuführen, um beispielsweise Funktionen des Kraftfahrzeugs freizuschalten oder zu sperren, oder um eine Gestenbedienung des Kraftfahrzeugs zu ermöglichen. Die Infrarotstrahler sind insbesondere als Nahfeld-Infrarotstrahler ausgebildet. According to an advantageous development of the invention it is also provided that in each case one infrared radiator is assigned to one of the cameras. Thus, the image capture of the respective camera is improved and achieved a good overall driver observation result. The respective infrared radiator is preferably arranged close to the respective camera, in particular directly adjacent to the respective camera, in order to achieve an optimum result. In particular, this ensures that a homogeneous illumination of the image to be detected while avoiding "hard" or sharp shadow lines is guaranteed. In addition, it is achieved by the infrared radiator (s) that the pupil of the driver is better recognizable and thus a driver's eye tracking can be reliably carried out. The gaze tracking can also be used, for example, to control a head-up display (HUD), perform a face recognition or identification, for example, to unlock or lock functions of the motor vehicle, or to enable gesture operation of the motor vehicle. The infrared radiators are designed in particular as near-field infrared radiators.

Besonders bevorzugt ist vorgesehen, dass das Kombiinstrument die Leiterplatte aufweist, auf welcher die Kamera und die Recheneinheit, und gegebenenfalls auch die Infrarotstrahler wie zuvor beschrieben angeordnet sind. Gegebenenfalls kann auf der Leiterplatte auch die Steuereinheit angeordnet sein. Insbesondere ist vorgesehen, dass es sich bei der Steuereinheit um eine Steuereinheit des Kombiinstruments handelt. Die einzelnen Komponenten des Fahrerbeobachtungssystems sind somit in das Kombiinstrument des Kraftfahrzeugs integriert ausgebildet. Hierdurch ergibt sich eine kompakte Lösung für das Fahrerbeobachtungssystem mit kurzen Verbindungsstrecken und einer einfachen Verbindungsstruktur mittels der Leiterplatte. Dadurch werden das Design, die Verkabelung (Verbindung), die Montage, die Herstellung und die Herstellungskosten optimiert. Insbesondere ist es dadurch möglich, das Fahrerbeobachtungssystem zusammen mit dem Kombiinstrument als Vormontageeinheit bereitzustellen, gegebenenfalls auch bereits zusammen mit dem einen oder den mehreren Infrarotstrahlern. Dadurch ist es auch möglich, das Fahrerbeobachtungssystem einer Prüfung zu unterziehen, bevor das Kombiinstrument in ein Kraftfahrzeug verbaut wird. Particularly preferably, it is provided that the instrument cluster has the circuit board on which the camera and the computing unit, and optionally also the infrared radiators are arranged as described above. Optionally, the control unit can be arranged on the circuit board. In particular, it is provided that the control unit is a control unit of the combination instrument. The individual components of the driver observation system are thus integrated into the instrument cluster of the motor vehicle. This results in a compact solution for the driver observation system with short links and a simple connection structure by means of the circuit board. This optimizes the design, wiring, assembly, manufacturing and manufacturing costs. In particular, this makes it possible to provide the driver observation system together with the instrument cluster as a preassembly unit, possibly also together with the one or more infrared radiators. This also makes it possible to subject the driver observation system to a test before the instrument cluster is installed in a motor vehicle.

Gemäß einer alternativen Ausführungsform der Erfindung ist vorgesehen, dass die Recheneinheit zur Vorprozessierung des jeweiligen Kameraausgangssignals auf einer separaten Leiterplatte vorgesehen ist, und dass jeweils eine Kamera zusammen mit einem Infrarotstrahler eine Vormontageeinheit bilden, die in das Kombiinstrument integrierbar/integriert ist. According to an alternative embodiment of the invention, it is provided that the arithmetic unit for preprocessing the respective camera output signal is provided on a separate circuit board, and that in each case a camera together with an infrared radiator form a pre-assembly unit which can be integrated / integrated in the instrument cluster.

Im Folgenden soll die Erfindung anhand von Ausführungsbeispielen näher erläutert werden. Dazu zeigen:In the following, the invention will be explained in more detail with reference to exemplary embodiments. To show:

1 ein Fahrerbeobachtungssystem eines Kraftfahrzeugs in einer vereinfachten Darstellung, 1 a driver observation system of a motor vehicle in a simplified representation,

2 ein weiteres Ausführungsbeispiel des Fahrerbeobachtungssystems, 2 another embodiment of the driver observation system,

3 das weitere Ausführungsbeispiel des Fahrerbeobachtungssystems in einer schematischen Darstellung, 3 the further embodiment of the driver observation system in a schematic representation,

4 eine vorteilhafte Weiterbildung des Fahrerbeobachtungssystems 4 an advantageous embodiment of the driver observation system

5 die vorteilhafte Weiterbildung des Fahrerbeobachtungssystems in einer schematischen Darstellung. 5 the advantageous development of the driver observation system in a schematic representation.

1 zeigt in einer vereinfachten Darstellung ein Fahrerbeobachtungssystem 1 eines hier nur angedeuteten Kraftfahrzeugs 2. Das Fahrerbeobachtungssystem 1 ist dazu ausgebildet, den Fahrer zu beobachten und beispielsweise darauf zu überwachen, ob er die für den Fahrbetrieb des Kraftfahrzeugs notwendige Aufmerksamkeit oder Ermüdungserscheinungen zeigt. 1 shows in a simplified representation of a driver observation system 1 a motor vehicle only indicated here 2 , The driver observation system 1 is adapted to observe the driver and, for example, to monitor whether he shows the necessary for the driving of the motor vehicle attention or fatigue.

Das Fahrerbeobachtungssystem 1 weist dazu zwei auf den Fahrer gerichtete Kameras 3 auf. Die Kameras 3 sind dabei beide in ein Kombiinstrument 4 im Armaturenbrett des Kraftfahrzeugs 2 integriert. Jeder Kamera 3 ist dabei außerdem ein Infrarotstrahler 5 zugeordnet. Die Kameras 3 sind insofern als Infrarotkameras ausgebildet, die die von den Infrarotstrahlern 5 ausgestrahlten und an dem Fahrer reflektierten Infrarotstrahlen erfassen. Die Infrarotstrahler 5 sind dabei jeweils direkt neben einer der Kameras 3 angeordnet, so dass eine vorteilhafte Ausleuchtung des Fahrers gewährleistet ist. Dabei wird insbesondere erreicht, dass der Fahrer homogen ausgeleuchtet wird und keine scharfen Schatten im Hintergrund entstehen, die eine Auswertung eines Ausgangssignals der jeweiligen Kamera 3 erschweren könnten. Optional sind noch zwei weitere Infrarotstrahler 6 vorgesehen, die jedoch beabstandet zu den Kameras 3 im Bereich des Armaturenbretts des Kraftfahrzeugs außerhalb des Kombiinstruments 4 angeordnet sind und die Infrarotstrahler 5 unterstützen. Die Infrarotstrahler 5, 6 sind dabei mit einer Steuereinheit 7 verbunden, welche die Infrarotstrahler 5, 6 betreibt beziehungsweise ansteuert. Durch das Vorsehen mehrerer Infrarotstrahler 5, 6 und mehrerer Kameras 3 wird gewährleistet, dass der Fahrer durchgehend beobachtet werden kann, auch wenn der Fahrer beispielsweise durch eine Lenkbewegung eine der Kameras 3 mit seinem das Lenkrad betätigenden Arm verdeckt.The driver observation system 1 has two cameras directed at the driver 3 on. The cameras 3 Both are in an instrument cluster 4 in the dashboard of the motor vehicle 2 integrated. Every camera 3 is also an infrared radiator 5 assigned. The cameras 3 In this respect, they are designed as infrared cameras, which are those of the infrared radiators 5 detected radiated and reflected at the driver infrared rays. The infrared radiators 5 are each directly next to one of the cameras 3 arranged so that a favorable illumination of the driver is ensured. In this case, in particular, it is achieved that the driver is illuminated homogeneously and no sharp shadows appear in the background, which is an evaluation of an output signal of the respective camera 3 could complicate. Optionally, there are two more infrared heaters 6 provided, however, spaced to the cameras 3 in the area of the dashboard of the motor vehicle outside of the instrument cluster 4 are arranged and the infrared radiator 5 support. The infrared radiators 5 . 6 are with a control unit 7 connected, which the infrared radiator 5 . 6 operates or drives. By providing several infrared radiators 5 . 6 and several cameras 3 ensures that the driver can be continuously monitored, even if the driver, for example, by a steering movement of one of the cameras 3 covered with his arm activating the steering wheel.

2 zeigt ein weiteres Ausführungsbeispiel des Fahrerbeobachtungssystems 1, wobei bereits bekannte Elemente mit den gleichen Bezugszeichen versehen sind und insofern auf die oben stehende Beschreibung verwiesen wird. Im Folgenden soll im Wesentlichen nur auf die Unterschiede eingegangen werden. 2 shows a further embodiment of the driver observation system 1 , Already known elements are provided with the same reference numerals and insofar reference is made to the above description. In the following, essentially only the differences will be discussed.

Im Unterschied zu dem vorhergehenden Ausführungsbeispiel ist nunmehr vorgesehen, dass in das Kombiinstrument 4 außerdem noch eine Recheneinheit 8 zur Vorprozessierung beziehungsweise Vorbearbeitung der Ausgangssignale der Kameras 3 integriert ist. Insbesondere ist vorgesehen, dass die Recheneinheit 8 auf der gleichen Leiterplatte angeordnet ist wie die Kameras 3 und die Infrarotstrahler 5. Dadurch wird ein kompaktes Fahrerbeobachtungssystem 1 geboten, das aus wenigen Einzelteilen besteht und einfach und kostengünstig herstellbar und montierbar ist. In contrast to the previous embodiment is now provided that in the instrument cluster 4 In addition, another arithmetic unit 8th for preprocessing or pre-processing of the output signals of the cameras 3 is integrated. In particular, it is provided that the arithmetic unit 8th arranged on the same circuit board as the cameras 3 and the infrared radiators 5 , This will make a compact driver observation system 1 offered, which consists of a few individual parts and is easy and inexpensive to produce and assemble.

3 zeigt hierzu in einer vereinfachten Darstellung den Aufbau des Fahrerbeobachtungssystems 1 gemäß 2. Dabei ist vorgesehen, dass auf einer Leiterplatte 9 des Kombiinstruments 4 die beiden Kameras 3 sowie die Infrarotstrahler 5 angeordnet und durch entsprechende Leiterbahnen der Leiterplatte miteinander verbunden sind. Außerdem sind auf der Leiterplatte vorzugsweise eine Anschlussstelle 10 für die außerhalb des Kombiinstruments 4 angeordneten Infrarotstrahler 6 vorgesehen. Bei der Anschlussstelle 10 kann es sich beispielsweise um einen Steckkontakt handeln, so dass die außen liegenden Infrarotstrahler 6 auf einfache Art und Weise mit der Leiterplatte 9 verbindbar sind. Auf der Leiterplatte 9 sind außerdem ein RAM-Speicher 11 und ein Flash-Speicher 12 angeordnet, die bei der Vorbearbeitung der Kameraausgangssignale genutzt werden. Die ebenfalls auf der Leiterplatte 9 angeordnete Recheneinheit 8 ist vorzugsweise als feldprogrammierbare Gatter-Anordnung ausgebildet, die mit den Kameras 3, den Infrarotstrahlern 5, den Speichermodulen 11 und 12 sowie durch den Kontaktanschluss 10 mit den Infrarotstrahlern 6 verbunden ist. Die Recheneinheit 8 führt eine Vorprozessierung der Ausgangssignale der Kameras 3 durch und steuert die Infrarotstrahler 5 beziehungsweise 6 an. 3 shows in a simplified representation of the structure of the driver observation system 1 according to 2 , It is envisaged that on a circuit board 9 of the instrument cluster 4 the two cameras 3 as well as the infrared radiators 5 arranged and connected to each other by corresponding conductor tracks of the circuit board. In addition, preferably a connection point on the circuit board 10 for the outside of the instrument cluster 4 arranged infrared radiator 6 intended. At the junction 10 it may, for example, be a plug contact, so that the external infrared radiator 6 in a simple way with the circuit board 9 are connectable. On the circuit board 9 are also a RAM memory 11 and a flash memory 12 arranged, which are used in the pre-processing of the camera output signals. The same on the circuit board 9 arranged arithmetic unit 8th is preferably designed as a field programmable gate arrangement, which with the cameras 3 , the infrared radiators 5 , the memory modules 11 and 12 as well as through the contact connection 10 with the infrared radiators 6 connected is. The arithmetic unit 8th performs a pre-processing of the output signals of the cameras 3 through and controls the infrared radiators 5 respectively 6 at.

Auf einer separaten Leiterplatte 13 ist die Steuereinheit 7 des Fahrerbeobachtungssystems 1 angeordnet, die die Nachbearbeitung der von der Recheneinheit 8 zur Verfügung gestellten Daten durchführt und anhand dieser Daten auf das Fahrerverhalten beziehungsweise den Fahrerzustand erkennt. Die Steuereinheit 7 ist dazu auf der Leiterplatte 13 ebenfalls mit einem RAM-Speicher 14 und mit einem Flash-Speicher 15 verbunden. Über eine LVDS-Schnittstelle (LVDS=Low Voltage Differential Signaling) erfolgt eine Hochgeschwindigkeitsdatenübertragung von der Recheneinheit 8 zu der Steuereinheit 7, so dass die vorverarbeiteten Ausgangssignale der Kameras 3 schnell durch die Steuereinheit 7 ausgewertet werden können, so dass, beispielsweise bei Erfassen von Müdigkeitserscheinungen des Fahrers, schnell, beispielsweise durch Anzeige einer akustischen oder visuellen Warnmeldung, reagiert werden kann.On a separate circuit board 13 is the control unit 7 the driver observation system 1 arranged, which is the post-processing of the arithmetic unit 8th performed data and recognizes on the basis of this data on the driver behavior or the driver state. The control unit 7 is on the circuit board 13 also with a RAM memory 14 and with a flash memory 15 connected. An LVDS interface (LVDS = Low Voltage Differential Signaling) is used to transmit high-speed data from the arithmetic unit 8th to the control unit 7 , so that the preprocessed output signals of the cameras 3 fast through the control unit 7 can be evaluated, so that, for example, when detecting fatigue symptoms of the driver, can be reacted quickly, for example by displaying an audible or visual warning message.

4 und 5 zeigen eine vorteilhafte Weiterbildung des Fahrerbeobachtungssystems 1, die sich von dem vorhergehenden Ausführungsbeispiel dadurch unterscheidet, dass auch die Steuereinheit 7 auf der gleichen Leiterplatte 9 angeordnet ist wie die Recheneinheit 8, so dass auch die Steuereinheit 7 in das Kombiinstrument 4 integriert ausgebildet ist, wie in 4 gezeigt. 5 zeigt die gemeinsame Anordnung der Kameras 3, der Infrarotstrahler 5, des Kontaktanschlusses 10, der Recheneinheit 8, der RAM-Speicher 11 und 14, der Flash-Speicher 12 und 15 sowie der Steuereinheit 7 auf der Leiterplatte 9 des Kombiinstruments 4. Insbesondere kann es sich bei der Steuereinheit 7 in diesem Fall um die Steuereinheit des Kombiinstruments 4 handeln, so dass keine separate Steuereinheit zum Betreiben des Fahrerbeobachtungssystems 1 notwendig ist. Aufgrund der Vorverarbeitung der Kameraausgangssignale mittels der Recheneinheit 8 ist der Rechenaufwand für die Steuereinheit 7 verhältnismäßig gering, so dass diese sowohl zur Ansteuerung des Kombiinstruments 4 als auch zum Betreiben des Fahrerbeobachtungssystems 1 genutzt werden kann. 4 and 5 show an advantageous embodiment of the driver observation system 1 , which differs from the previous embodiment in that the control unit 7 on the same circuit board 9 is arranged like the arithmetic unit 8th so that also the control unit 7 in the instrument cluster 4 is integrated, as in 4 shown. 5 shows the common arrangement of the cameras 3 , the infrared radiator 5 , the contact connection 10 , the computing unit 8th , the RAM memory 11 and 14 , the flash memory 12 and 15 and the control unit 7 on the circuit board 9 of the instrument cluster 4 , In particular, it may be at the control unit 7 in this case, the control unit of the instrument cluster 4 act, so no separate control unit to operate the driver observation system 1 necessary is. Due to the preprocessing of the camera output signals by means of the arithmetic unit 8th is the computational burden on the control unit 7 relatively low, so that these both to control the instrument cluster 4 as well as to operate the driver observation system 1 can be used.

Claims (7)

Fahrerbeobachtungssystem (1) für ein Kraftfahrzeug, mit wenigstens einer Kamera (3), die an einem Kombiinstrument (4) zur Fahrerbeobachtung angeordnet/anordenbar ist, und mit einer Recheneinheit (8) zum Auswerten eines Ausgangssignals der Kamera (3), dadurch gekennzeichnet, dass die Recheneinheit (8) zur Vorprozessierung des Kameraausgangssignals ausgebildet und zusammen mit der Kamera (3) auf einer Leiterplatte (9) angeordnet ist.Driver observation system ( 1 ) for a motor vehicle, with at least one camera ( 3 ) attached to an instrument cluster ( 4 ) is arranged / can be arranged for driver observation, and with a computing unit ( 8th ) for evaluating an output signal of the camera ( 3 ), characterized in that the arithmetic unit ( 8th ) for preprocessing the camera output signal and together with the camera ( 3 ) on a printed circuit board ( 9 ) is arranged. Fahrerbeobachtungssystem nach Anspruch 1, dadurch gekennzeichnet, dass eine Steuereinheit (7), insbesondere mit mindestens einem Mikrocontroller, zum Auswerten des vorprozessierten Kamerasignals auf der Leiterplatte (9) angeordnet ist.Driver observation system according to claim 1, characterized in that a control unit ( 7 ), in particular with at least one microcontroller, for evaluating the preprocessed camera signal on the printed circuit board ( 9 ) is arranged. Fahrerbeobachtungssystem nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Recheneinheit (8) als feldprogrammierbare Gatter-Anordnung ausgebildet ist.Driver observation system according to one of the preceding claims, characterized in that the arithmetic unit ( 8th ) is designed as a field programmable gate arrangement. Fahrerbeobachtungssystem nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Recheneinheit (8) mit mehreren auf der Leiterplatte (9) angeordneten Kameras (3) verbunden ist. Driver observation system according to one of the preceding claims, characterized in that the arithmetic unit ( 8th ) with several on the circuit board ( 9 ) arranged cameras ( 3 ) connected is. Fahrerbeobachtungssystem nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass der jeweiligen Kamera (3) jeweils ein Infrarotstrahler (5) zugeordnet ist.Driver observation system according to one of the preceding claims, characterized in that the respective camera ( 3 ) in each case an infrared radiator ( 5 ) assigned. Fahrerbeobachtungssystem nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Recheneinheit (8) mit mehreren Infrarotstrahlern (5, 6), die insbesondere auf der Leiterplatte (9) angeordnet sind, verbunden ist. Driver observation system according to one of the preceding claims, characterized in that the arithmetic unit ( 8th ) with several infrared radiators ( 5 . 6 ), in particular on the printed circuit board ( 9 ) are connected. Fahrerbeobachtungssystem nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das Kombiinstrument (4) die Leiterplatte (9) aufweist.Driver observation system according to one of the preceding claims, characterized in that the instrument cluster ( 4 ) the printed circuit board ( 9 ) having.
DE102014215843.5A 2014-08-11 2014-08-11 Driver observation system for a motor vehicle Withdrawn DE102014215843A1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
DE102014215843.5A DE102014215843A1 (en) 2014-08-11 2014-08-11 Driver observation system for a motor vehicle
PCT/EP2015/063715 WO2016023661A1 (en) 2014-08-11 2015-06-18 Driver observation system for a motor vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102014215843.5A DE102014215843A1 (en) 2014-08-11 2014-08-11 Driver observation system for a motor vehicle

Publications (1)

Publication Number Publication Date
DE102014215843A1 true DE102014215843A1 (en) 2016-02-11

Family

ID=53498966

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102014215843.5A Withdrawn DE102014215843A1 (en) 2014-08-11 2014-08-11 Driver observation system for a motor vehicle

Country Status (2)

Country Link
DE (1) DE102014215843A1 (en)
WO (1) WO2016023661A1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102016221324A1 (en) 2016-10-28 2018-05-03 Robert Bosch Gmbh Device for mounting on an assembly
DE102017207206A1 (en) * 2017-04-28 2018-10-31 Robert Bosch Gmbh A method and apparatus for driving a driver observation system to observe a driver of a vehicle

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102018004277A1 (en) 2018-05-29 2018-10-18 Daimler Ag Method for operating a driver camera of a vehicle

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE29623310U1 (en) * 1996-11-15 1998-02-19 Kostal Leopold Gmbh & Co Kg Roof module
DE102007043158A1 (en) * 2006-09-19 2008-04-03 Denso Corp., Kariya Mounting arrangement for a face camera
DE102009012758A1 (en) * 2009-03-12 2010-09-16 Hella Kgaa Hueck & Co. Device and method for detecting at least one object

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102010044449B4 (en) * 2009-12-31 2014-05-08 Volkswagen Ag Recognizing the degree of driving ability of the driver of a motor vehicle
DE102011103302A1 (en) * 2011-06-03 2012-12-06 Conti Temic Microelectronic Gmbh Camera system for a vehicle
DE102012024855A1 (en) * 2012-12-19 2014-06-26 Connaught Electronics Ltd. Camera for installation in or on motor vehicle, has metallic surface that is thermally coupled to electronic component, where heat-conducting element is provided, on which metallic surface is thermally connected to wall of camera body

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE29623310U1 (en) * 1996-11-15 1998-02-19 Kostal Leopold Gmbh & Co Kg Roof module
DE102007043158A1 (en) * 2006-09-19 2008-04-03 Denso Corp., Kariya Mounting arrangement for a face camera
DE102009012758A1 (en) * 2009-03-12 2010-09-16 Hella Kgaa Hueck & Co. Device and method for detecting at least one object

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102016221324A1 (en) 2016-10-28 2018-05-03 Robert Bosch Gmbh Device for mounting on an assembly
WO2018077544A1 (en) 2016-10-28 2018-05-03 Robert Bosch Gmbh Device for mounting on an assembly
DE102017207206A1 (en) * 2017-04-28 2018-10-31 Robert Bosch Gmbh A method and apparatus for driving a driver observation system to observe a driver of a vehicle

Also Published As

Publication number Publication date
WO2016023661A1 (en) 2016-02-18

Similar Documents

Publication Publication Date Title
DE102012214852B4 (en) Method and device for selecting objects in the surroundings of a vehicle
WO2018069405A1 (en) Motor vehicle and method for a 360° detection of the surroundings
EP3198340B1 (en) Motor vehicle comprising an illumination device for projecting an image
DE102013114369B4 (en) CAMERA MODULE FOR A VEHICLE AND SUBSEQUENT MONITORING SYSTEM
EP2431226A1 (en) Rear view device for a motor vehicle
DE102014106035A1 (en) Method for operating a driver assistance system with an electronic rearview mirror, driver assistance system and motor vehicle
DE102017109073A1 (en) Information display device
DE102014015753A1 (en) Method and device for assisting a driver of a vehicle combination, in particular a utility vehicle combination
DE102018212963A1 (en) Safe trailer connection system
DE102014224795A1 (en) Method and system for representing a vehicle environment of a motor vehicle on a display device arranged in the motor vehicle
DE102014215843A1 (en) Driver observation system for a motor vehicle
DE112019006793T5 (en) Driving assistance device
DE102015000794A1 (en) A method of displaying an environment of a vehicle and a surround display device for a vehicle
EP3278318A1 (en) Method for supplying, on a communication interface, height data about an object located in the surroundings of a motor vehicle, sensor device, processing device and motor vehicle
DE102017117094A1 (en) Customizable representation of an environment of a motor vehicle by a driver assistance device
EP3421674B1 (en) Method and device for imaging areas
DE102017205782A1 (en) Control device and method
DE102016103037A1 (en) Method for checking the functionality of a camera-monitor system, camera-monitor system and motor vehicle
DE102017109751A1 (en) Method for overlapping images
DE102017100669A1 (en) Method for detecting an environmental region of a motor vehicle with adaptation of a region of interest as a function of a trailer, computing device, camera system and motor vehicle
EP2565580B1 (en) Method for determining the dimensions of an object in the vicinity of a vehicle, corresponding device and vehicle with such a device
DE102016011246A1 (en) A method of monitoring a condition of at least one occupant of a vehicle
DE102019003907A1 (en) Method for operating a driver assistance system with a multi-axis movable swivel arm and driver assistance system
DE102018213254A1 (en) Lighting device, in particular for a motor vehicle
DE102014220586A1 (en) Exterior mirror replacement system for a tractor-trailer combination

Legal Events

Date Code Title Description
R163 Identified publications notified
R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee