DE102010038056A1 - Image device and image system for imaging a moving object - Google Patents

Image device and image system for imaging a moving object Download PDF

Info

Publication number
DE102010038056A1
DE102010038056A1 DE102010038056A DE102010038056A DE102010038056A1 DE 102010038056 A1 DE102010038056 A1 DE 102010038056A1 DE 102010038056 A DE102010038056 A DE 102010038056A DE 102010038056 A DE102010038056 A DE 102010038056A DE 102010038056 A1 DE102010038056 A1 DE 102010038056A1
Authority
DE
Germany
Prior art keywords
image
area
optical
image sensor
sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102010038056A
Other languages
German (de)
Other versions
DE102010038056A8 (en
Inventor
Masayuki Arai
Yasuhiro Nishikata
Takanori Endo
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Imaging Co Ltd
Original Assignee
Hoya Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2009234303A external-priority patent/JP2011081657A/en
Priority claimed from JP2009234339A external-priority patent/JP2011082855A/en
Priority claimed from JP2009234340A external-priority patent/JP2011082856A/en
Application filed by Hoya Corp filed Critical Hoya Corp
Publication of DE102010038056A1 publication Critical patent/DE102010038056A1/en
Publication of DE102010038056A8 publication Critical patent/DE102010038056A8/en
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/11Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/55Optical parts specially adapted for electronic image sensors; Mounting thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/30Transforming light or analogous information into electric information
    • H04N5/33Transforming infrared radiation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Abstract

Es ist ein Bildsystem mit einem Bildsensor, einem Farbfilter und einem Filter für nicht sichtbares Licht, einem Speicher sowie einer Steuerung vorgesehen. Der Bildsensor hat einen ersten Bildbereich und einen zweiten Bildbereich und nimmt ein optisches Bild auf, das sich auf dem ersten Bildbereich und dem zweiten Bildbereich bewegt. Der Farbfilter ist auf dem ersten Bildbereich angeordnet. Der Filter für nicht sichtbares Licht ist auf dem zweiten Bildbereich angeordnet. Die Steuerung legt fest, ob das optische Bild einer vorbestimmten Bedingung entspricht, oder nicht, auf der Basis eines Bildes, das auf dem ersten Bildbereich oder dem zweiten Bildbereich aufgenommen wurde. Der Bildsensor gibt ein optisches Bild ab, das durch den Farbfilter geleitet wird, und gibt ein Farbbild aus; er nimmt ein optisches Bild auf, das durch den Filter für nicht sichtbares Licht geleitet wird, und gibt ein Bild aus nicht sichtbarem Licht aus. Wenn die Steuerung feststellt, dass das optische Bild einer vorbestimmten Bedingung entspricht, entnimmt die Steuerung aus dem Speicher ein Bild, das zu einer vorbestimmten Zeit vor dem der vorbestimmten Bedingung entsprechenden optischen Bild aufgenommen wurde, und speichert das entnommene Bild in denn Speichermedium.It is an image system with an image sensor, a color filter and a filter for invisible light, a memory and a controller provided. The image sensor has a first image area and a second image area, and captures an optical image that moves on the first image area and the second image area. The color filter is arranged on the first image area. The non-visible light filter is located on the second image area. The controller determines whether or not the optical image satisfies a predetermined condition based on an image taken on the first image area or the second image area. The image sensor outputs an optical image passed through the color filter and outputs a color image; it picks up an optical image passed through the invisible light filter and outputs an image of invisible light. When the controller determines that the optical image corresponds to a predetermined condition, the controller extracts from the memory an image taken at a predetermined time before the optical image corresponding to the predetermined condition and stores the extracted image in the storage medium.

Figure 00000001
Figure 00000001

Description

Hintergrund der ErfindungBackground of the invention

1. Gebiet der Erfindung1. Field of the invention

Die vorliegende Erfindung betrifft ein Bildsystem, das ein bewegtes Objekt fotografiert und ein fotografiertes Bild speichert.The present invention relates to an image system that photographs a moving object and stores a photographed image.

2. Beschreibung der betroffenen Technik2. Description of the technique involved

Die japanische geprüfte Patentanmeldungsveröffentlichung H02-38997 beschreibt ein Abtastsystem für Fahrzeug-Identifikationsnummern, das eine Registriernummer eines bewegten Fahrzeugs abtastet. Das Abtastsystem für die Fahrzeug-Identifikationsnummer enthält eine Kamera und einen Positionssensor für jede Fahrbahn vorgesehen sind. Wenn der Positionssensor ein Fahrzeug erfasst, wird ein Bildbefehl an die über der Fahrbahn angeordnete Kamera abgegeben, die dem Positionssensor entspricht.The Japanese Examined Patent Application Publication No. H02-38997 describes a vehicle identification number scanning system that scans a registration number of a moving vehicle. The vehicle identification number scanning system includes a camera and a position sensor for each lane. When the position sensor detects a vehicle, an image command is issued to the above-ground camera corresponding to the position sensor.

Bei einer solchen Konstruktion muss aber eine Kamera für jede Fahrbahn vorgesehen sein, und deshalb erhöhen sich die Kamerakosten, wenn mehrere Fahrbahnen überwacht werden. Ist eine Kamera für jede Fahrbahn vorgesehen, so kann ferner die Bewegung eines Fahrzeugs nicht richtig aufgezeichnet werden, da der Bildwinkel der Kamera begrenzt ist. Ferner kooperieren die Kameras bei einer Konstruktion, bei der eine Kamera für jede Fahrbahn vorgesehen ist, miteinander und sind unter Berücksichtigung ihres jeweiligen Bildwinkels positioniert. Deshalb erhöhen sich die Kosten für den Aufbau der Kameras.With such a construction, however, one camera must be provided for each lane, and therefore the camera cost increases when multiple lanes are being monitored. Further, if a camera is provided for each lane, the motion of a vehicle can not be properly recorded since the angle of view of the camera is limited. Further, in a construction in which one camera is provided for each lane, the cameras cooperate with each other and are positioned in consideration of their respective image angles. Therefore, the cost of building the cameras increases.

Die japanische Patentanmeldungsveröffentlichung 2001-257923 beschreibt ein Bildgerät, das gleichzeitig mehrere Bilder mit mehreren optischen Systemen aufnimmt. Das Bildgerät enthält ein Teleobjektiv, ein Weitwinkelobjektiv und einen Bildsensor. Dies bedeutet, dass das Bildgerät zwei optische Systeme enthält. Ein optisches Bild durch das Teleobjektiv wird auf der oberen Hälfte des Aufnahmebereichs des Bildsensors aufgenommen. Ein optisches Bild über das Weitwinkelobjektiv wird auf der unteren Hälfte des Aufnahmebereichs des Bildsensors aufgenommen. Das Bildgerät nimmt gleichzeitig ein Telebild und ein Weitwinkelbild auf.The Japanese Patent Application Publication 2001-257923 describes a graphics device that simultaneously captures multiple images with multiple optical systems. The imager includes a telephoto lens, a wide-angle lens, and an image sensor. This means that the imager contains two optical systems. An optical image through the telephoto lens is recorded on the upper half of the imaging area of the image sensor. An optical image through the wide-angle lens is recorded on the lower half of the image sensor's pick-up area. The image device simultaneously captures a telephoto and a wide-angle image.

Bei dem Bildgerät mit zwei optischen Systemen wird jedoch der Bildwinkel eines jeden optischen Systems entsprechend der Entfernung des Objekts bestimmt. Deshalb muss das Bildgerät entsprechend seiner Entfernung zu dem Objekt aufgebaut sein. Die vorbestimmte Baubegrenzung schränkt den Fokussierbereich des Bildgeräts ein. Ferner erhöhen zwei optische Systeme die Kosten des Bildgeräts.However, in the image device having two optical systems, the image angle of each optical system is determined according to the distance of the object. Therefore, the imager must be constructed according to its distance from the object. The predetermined construction limit restricts the focusing area of the imager. Furthermore, two optical systems increase the cost of the imaging device.

Zusammenfassung der ErfindungSummary of the invention

Eine Aufgabe der vorliegenden Erfindung besteht darin, ein Bildsystem anzugeben, das die Bewegung eines bewegten Fahrzeugs aufzeichnet und mit einer Kamera ein Bild des bewegten Fahrzeuges mit hoher Auflösung aufnimmt.An object of the present invention is to provide an image system that records the motion of a moving vehicle and captures a high resolution image of the moving vehicle with a camera.

Eine weitere Aufgabe der vorliegenden Erfindung besteht darin, ein einfaches Bildgerät anzugeben, das gleichzeitig mehrere Objekte aufnimmt und ein optisches System mit mehreren unterschiedlichen Konfigurationen enthält.Another object of the present invention is to provide a simple image device that simultaneously receives a plurality of objects and includes an optical system having a plurality of different configurations.

Es ist ein Bildsystem vorgesehen mit einem Bildsensor, einem Farbfilter, einem Filter für nicht sichtbares Licht, einem Speicher und einer Steuerung. Der Bildsensor hat einen ersten Bildbereich und einen zweiten Bildbereich, der zu dem ersten unterschiedlich ist und der ein optisches Bild aufnimmt, das sich auf dem ersten Bildbereich und dem zweiten Bildbereich bewegt. Der Farbfilter ist auf dem ersten Bildbereich angeordnet. Der Filter für das nicht sichtbare Licht ist auf dem zweiten Bildbereich angeordnet. Der Speicher speichert ein Bild, das mit dem Bildsensor aufgenommen wird. Die Steuerung entnimmt ein Bild aus dem Speicher und speichert das entnommene Bild in einem Speichermedium und bestimmt, ob das optische Bild einer vorbestimmten Bedingung entspricht, abhängig von einem Bild, das auf dem ersten Bildbereich oder dem zweiten Bildbereich aufgenommen wurde. Der Bildsensor nimmt ein optisches Bild auf, das durch den Farbfilter kommt und gibt ein Farbbild ab; und nimmt ein optisches Bild auf, das durch den Filter für nicht sichtbares Licht kommt, und gibt ein Bild aus nicht sichtbarem Licht ab. Wenn die Steuerung erfasst, dass das optische Bild einer vorbestimmten Bedingung entspricht, entnimmt sie dem Speicher ein Bild, das zu einer vorbestimmten Zeit vor dem der vorbestimmten Bedingung entsprechenden optischen Bild aufgenommen wurde, und speichert das entnommene Bild in dem Speichermedium.An image system is provided with an image sensor, a color filter, a non-visible light filter, a memory and a controller. The image sensor has a first image area and a second image area that is different from the first and that captures an optical image that moves on the first image area and the second image area. The color filter is arranged on the first image area. The filter for the invisible light is arranged on the second image area. The memory stores an image that is taken with the image sensor. The controller extracts an image from the memory and stores the extracted image in a storage medium and determines whether the optical image corresponds to a predetermined condition, depending on an image taken on the first image area or the second image area. The image sensor picks up an optical image that passes through the color filter and outputs a color image; and picks up an optical image passing through the invisible light filter and outputs an image of invisible light. When the controller detects that the optical image corresponds to a predetermined condition, it extracts from the memory an image taken at a predetermined time before the optical image corresponding to the predetermined condition, and stores the extracted image in the storage medium.

Kurzbeschreibung der ZeichnungenBrief description of the drawings

Die Merkmale und Vorteile der vorliegenden Erfindung werden besser verständlich aus der folgenden Beschreibung unter Bezugnahme auf die beigefügten Zeichnungen, in denen:The features and advantages of the present invention will become more apparent from the following description with reference to the accompanying drawings, in which:

1 ein Blockdiagramm eines ersten Bildsystems gemäß einem ersten Ausführungsbeispiel ist; 1 Fig. 10 is a block diagram of a first image system according to a first embodiment;

2 eine geschnittene Seitenansicht eines Teils der ersten Bildeinheit ist; 2 a sectional side view of a portion of the first imaging unit is;

3 ein mit der ersten Bildeinheit aufgenommenes Bild ist; 3 is an image taken with the first image unit;

4 ein Flussdiagramm des Aufzeichnungsprozesses eines Fahrbahnwechsels ist; 4 Fig. 10 is a flowchart of the lane change recording process;

5 ein Flussdiagramm eines Initialisierungsprozesses eines Fahrbahnwechsels ist; 5 Fig. 10 is a flowchart of a lane change initialization process;

6 ein Flussdiagramm eines straßenseitigen Verkehrsaufzeichnungsprozesses ist; 6 Fig. 10 is a flowchart of a roadside traffic recording process;

7 ein Flussdiagramm eines Verkehrsinitialisierungsprozesses ist; 7 Fig. 10 is a flowchart of a traffic initialization process;

8 ein Flussdiagramm eines Fahrzeugfarben-Aufzeichnungsprozesses ist; 8th Fig. 10 is a flowchart of a vehicle color recording process;

9 ein Flussdiagramm eines Fahrzeugfarben-Initialisierungsprozesses ist; 9 Fig. 10 is a flowchart of a vehicle color initialization process;

10 ein Flussdiagramm eines Fahrzeugfamilien-Aufzeichnungsprozesses ist; 10 Fig. 10 is a flowchart of a vehicle family recording process;

11 ein Flussdiagramm eines Fahrzeugfamilien-Initialisierungsprozesses ist; 11 Fig. 10 is a flowchart of a vehicle family initialization process;

12 ein Blockdiagramm eines zweiten Bildsystems gemäß dem zweiten Ausführungsbeispiel ist; 12 Fig. 10 is a block diagram of a second image system according to the second embodiment;

13 eine geschnittene Seitenansicht eines Teils der zweiten Bildeinheit ist; 13 a sectional side view of a portion of the second imaging unit is;

14 ein Blockdiagramm eines dritten Bildsystems gemäß dem dritten Ausführungsbeispiel ist; und 14 Fig. 10 is a block diagram of a third image system according to the third embodiment; and

15 eine geschnittene Seitenansicht eines Teils der dritten Bildeinheit ist. 15 is a sectional side view of a part of the third image unit.

Beschreibung der vorzugsweisen AusführungsformenDescription of the preferred embodiments

Die vorliegende Erfindung wird nun unter Bezugnahme auf die in den Zeichnungen dargestellten Ausführungsformen beschrieben. 1 bis 3 zeigen ein erstes Bildsystem gemäß dem ersten Ausführungsbeispiel der vorliegenden Erfindung.The present invention will now be described with reference to the embodiments shown in the drawings. 1 to 3 show a first image system according to the first embodiment of the present invention.

Das erste Bildsystem 100 enthält einen ersten Klienten 200, der zum Fotografieren eines Objekts positioniert ist, und eine Zentralsteuerung 300, die separat zu dem ersten Klienten 200 vorgesehen ist. Der erste Klient 200 enthält ein erstes Bildgerät 210, einen Rechner 220, einen Fahrzeugdetektor 230, eine Nah-Infrarot-Lichtquelle 240, einen Rekorder 250 und ein Kommunikationsgerät 260. Die zentrale Steuerung 300 enthält ein zentrales Kommunikationsgerät 310, einen Alarmgeber 320, einen zentralen Rekorder 330 und einen zentralen Rechner 340.The first image system 100 contains a first client 200 which is positioned to photograph an object, and a central controller 300 separately to the first client 200 is provided. The first client 200 contains a first image device 210 , a calculator 220 , a vehicle detector 230 , a near infrared light source 240 , a recorder 250 and a communication device 260 , The central control 300 contains a central communication device 310 , an alarm device 320 , a central recorder 330 and a central computer 340 ,

Das erste Bildgerät 210 enthält eine Bildoptik 211, die zu einem optischen Abbildungssystem gehört, eine erste CCD 212, die ein Bildsensor ist, einen ersten Sperrfilter 213 für sichtbares Licht, der ein Filter für nicht sichtbares Licht ist, einen ersten Polarisator 214, einen ersten Sperrfilter 215 für Infrarotlicht, der ein Farbfilter ist, und einen Lichtweglängen-Einstellfilter 216.The first image device 210 contains a picture optics 211 belonging to an optical imaging system, a first CCD 212 which is an image sensor, a first notch filter 213 for visible light, which is a filter for invisible light, a first polarizer 214 , a first notch filter 215 for infrared light, which is a color filter, and an optical path length adjusting filter 216 ,

Die Bildoptik 211 hat eine Öffnung und eine Brennweite, die eine große Schärfentiefe erzeugen, so dass das erste Bildgerät 210 Aufnahmen mit großer Schärfentiefe machen kann. Dies bedeutet, dass die Bildoptik 211 gleichzeitig Objekte irgendwo im Bereich einer Entfernung von zehn Meter bis hundert Meter zu dem ersten Bildgerät 210 fokussieren kann.The picture optics 211 has an aperture and a focal length that produce a large depth of field, making the first image device 210 Can take shots with great depth of field. This means that the image optics 211 at the same time objects somewhere in the range of a distance of ten meters to one hundred meters to the first image device 210 can focus.

Die erste CCD 212 hat eine Vielzahl Pixel, die eine Million übersteigt. Eine erste Bildfläche 217 der ersten CCD 212, die rechteckförmig ist, nimmt ein optisches Bild auf, das durch die Bildoptik 211 kommt. Die erste CCD 212 ist in dem ersten Klienten 200 angeordnet und so ausgebildet, dass die Längsrichtung der ersten Bildfläche 217 der Schwerkraftrichtung entspricht, die auf den ersten Klienten 200 einwirkt. Die erste Bildfläche 217 ist durch eine Linie senkrecht zu der Schwerkraftrichtung in eine obere und eine untere Hälfte geteilt. Die obere Hälfte der ersten Bildfläche 217 ist ein Nah-Infrarot-Bildbereich 218, und die untere Hälfte ist ein Bildbereich 219 für sichtbares Licht. Ein optisches Bild wird auf dem Nah-Infrarot-Bildbereich 218 und dem Bildbereich 219 für sichtbares Licht erzeugt. Die erste CCD 212 nimmt gleichzeitig ein optisches Bild auf beiden Bereichen 218 und 219 für Nah-Infrarotlicht und für sichtbares Licht auf. Die erste CCD 212 nimmt ein optisches Bild während einer vorbestimmten Zeit wiederholt auf, z. B. zehn mal in einer Sekunde, so dass die CCD 212 ein bewegtes Bild aus zehn Bildern pro Sekunde an den Rechner 220 und den Rekorder 250 abgibt. Die Bildrate der Aufnahme kann je nach Erfordernis eingestellt werden.The first CCD 212 has a variety of pixels that exceeds one million. A first image area 217 the first CCD 212 , which is rectangular, captures an optical image through the image optics 211 comes. The first CCD 212 is in the first client 200 arranged and formed so that the longitudinal direction of the first image surface 217 the direction of gravity corresponds to that on the first client 200 acts. The first picture surface 217 is divided by a line perpendicular to the direction of gravity into an upper and a lower half. The upper half of the first image area 217 is a near-infrared image area 218 , and the lower half is an image area 219 for visible light. An optical image is taken on the near-infrared image area 218 and the image area 219 generated for visible light. The first CCD 212 at the same time takes an optical picture on both areas 218 and 219 for near-infrared light and for visible light. The first CCD 212 repeatedly captures an optical image for a predetermined time, e.g. B. ten times in a second, so the CCD 212 a moving picture of ten frames per second to the computer 220 and the recorder 250 emits. The frame rate of the recording can be adjusted as required.

Der erste Polarisator 214 ist ein optischer Filter, der nur Licht mit einem vorbestimmten Polarisationszustand durchlässt. Der erste Sperrfilter 213 für sichtbares Licht (der Nah-Infrarot-Filter) lässt sichtbares Licht nicht durch; er ist ein Filter für nicht sichtbares Licht und ein optischer Filter, der nur Nah-Infrarot-Licht durchlässt. Der erste Polarisator 214 ist an der ersten CCD 212 so befestigt, dass er die gesamte Fläche des Nah-Infrarot-Bildbereichs 218 abdeckt. Der erste Sperrfilter 213 für sichtbares Licht ist an einer Fläche des ersten Polarisators 214, die nahe der Bildoptik 211 angeordnet ist, so befestigt, dass er die gesamte Fläche des ersten Polarisators 214 und den Nah-Infrarot-Bildbereich 218 abdeckt.The first polarizer 214 is an optical filter that transmits only light having a predetermined polarization state. The first barrier filter 213 for visible light (the near-infrared filter) does not transmit visible light; it is a filter for invisible light and an optical filter that only lets through near-infrared light. The first polarizer 214 is at the first CCD 212 so attached that it covers the entire area of the near-infrared image area 218 covers. The first barrier filter 213 for visible light is on a surface of the first polarizer 214 close to the visuals 211 is arranged so fastened that it covers the entire surface of the first polarizer 214 and the near-infrared image area 218 covers.

Der erste Infrarot-Sperrfilter 215 ist ein Farbfilter, der Infrarotlicht nicht durchlässt, anderes Licht jedoch überträgt. Der Lichtweglängen-Einstellfilter 216 ist ein optischer Filter, der die Weglänge des durchgelassenen Lichts einstellt und Licht jeder Wellenlänge durchlässt. Der Lichtweglängen-Einstellfilter 216 ist an der ersten CCD 212 so befestigt, dass er die gesamte Fläche des Bildbereichs 219 für sichtbares Licht abdeckt. Der erste Sperrfilter 215 für Infrarotlicht ist an einer Fläche des Lichtweglängen-Einstellfilters 216, die nahe der Bildoptik 211 liegt, so befestigt, dass er die gesamte Fläche des Lichtweglängen-Einstellfilters 216 und die Bildfläche 219 für sichtbares Licht abdeckt. Ein Dickenindex und ein Brechungsindex des Lichtweglängen-Einstellfilters 216 sind unter Berücksichtigung der Dicken und der Brechungsindizes des ersten Sperrfilters 213 für sichtbares Licht, des ersten Polarisators 214 und des ersten Sperrfilters 215 für Infrarotlicht so bemessen, dass die Lichtweglänge, die sich durch Addition der Lichtweglänge des ersten Infrarot-Sperrfilters 215 und der Lichtweglänge des Lichtweglängen-Einstellfilters 216 ergibt, gleich der Lichtweglänge ist, die sich durch Addition der Lichtweglänge des ersten Sperrfilters 213 für sichtbares Licht und der Lichtweglänge des ersten Polarisators 214 ergibt.The first infrared cut filter 215 is a color filter that does not let infrared light through, other light however transmits. The light path length adjustment filter 216 is an optical filter that adjusts the path length of the transmitted light and transmits light of any wavelength. The light path length adjustment filter 216 is at the first CCD 212 fixed so that it covers the entire area of the image area 219 covering for visible light. The first barrier filter 215 for infrared light is at an area of the light path length adjusting filter 216 close to the visuals 211 is located so that it covers the entire area of the light path length adjustment filter 216 and the picture surface 219 covering for visible light. A thickness index and a refractive index of the optical path length adjusting filter 216 are considering the thicknesses and refractive indices of the first stop filter 213 for visible light, the first polarizer 214 and the first barrier filter 215 for infrared light so measured that the optical path length resulting by adding the optical path length of the first infrared cut filter 215 and the optical path length of the optical path length adjusting filter 216 equal to the optical path length which is obtained by adding the optical path length of the first notch filter 213 for visible light and the light path length of the first polarizer 214 results.

Beispielsweise ist das erste Bildgerät 210 über einer Fahrbahn einer Schnellstraße angeordnet, um ein Fahrzeug zu fotografieren, das sich aus großer Entfernung nähert, und es zu überwachen, wenn es sich auf der Fahrbahn bewegt. Die vertikale Richtung eines optischen Bildes auf der ersten Bildfläche 217 wird durch die fotografische Optik 211 invertiert, so dass sie der vertikalen Richtung eines Objekts angepasst ist. Wenn ein Objekt wie ein dem Klienten 200 sich näherndes Fahrzeug eine vergleichsweise große Entfernung hat, wird ein optisches Bild des Fahrzeugs in dem Bildbereich 219 für sichtbares Licht in der unteren Hälfte der ersten Bildfläche 217 aufgenommen. Wenn ein dem Klienten 200 sich näherndes Fahrzeug eine vergleichsweise geringe Entfernung hat, erscheint ein optisches Bild des Fahrzeugs in dem Bildbereich 218 für Nah-Infrarotlicht in der oberen Hälfte der ersten Bildfläche 217. Dadurch nimmt der dritte Klient 600 ein Objekt mit einer vergleichsweisen großen Entfernung auf und gibt ein Farbbild aus, und fotografiert ein in vergleichsweise kurzer Entfernung befindliches Fahrzeug und gibt ein Infrarotbild aus (siehe 3).For example, the first image device 210 Located above a lane of a highway to photograph a vehicle that is approaching from a long distance, and to monitor it when it moves on the road. The vertical direction of an optical image on the first image surface 217 is through the photographic optics 211 inverted so that it is adapted to the vertical direction of an object. If an object like a client 200 approaching vehicle has a comparatively large distance becomes an optical image of the vehicle in the image area 219 for visible light in the lower half of the first image area 217 added. If one to the client 200 As the approaching vehicle has a comparatively short distance, an optical image of the vehicle appears in the image area 218 for near-infrared light in the upper half of the first image area 217 , This takes the third client 600 an object with a comparatively large distance and outputs a color image, and photographs a comparatively short distance vehicle and outputs an infrared image (see 3 ).

Der Fahrzeugdetektor ist eine Schleifenspule im Bildwinkel des ersten Bildgeräts 210 und unter der Straßenfläche zum Erfassen eines passierenden Fahrzeugs angeordnet.The vehicle detector is a loop coil in the field of view of the first imager 210 and disposed below the road surface for detecting a passing vehicle.

Die Nah-Infrarot-Lichtquelle 240 ist an einer solchen Stelle angeordnet, dass sie ein bewegtes Fahrzeug und ein Objekt, dessen optisches Bild auf dem Nah-Infrarot-Bildbereich 218 dargestellt wird, bestrahlen kann. Diese Stelle befindet sich z. B. an einer Verkehrsflussbrücke über einer Fahrbahn oder dem Bankett der Straße.The near infrared light source 240 is arranged at such a position that it is a moving vehicle and an object whose optical image is on the near-infrared image area 218 is shown, can irradiate. This place is z. B. at a traffic flow bridge over a roadway or the banquet of the road.

Der Rechner 220 empfängt ein Fahrzeugerfassungssignal von dem Fahrzeugdetektor 230 und ein bewegtes Bild von der ersten CCD 212 und verarbeitet dann das Bild. Die Bildverarbeitung durch den Rechner 220 enthält den Fahrbahnwechsel-Aufzeichnungsprozess, den Straßenverkehrs-Aufzeichnungsprozess, den Fahrzeugfarben-Aufzeichnungsprozess und den Fahrzeugfamilien-Aufzeichnungsprozess. Die Beschreibungen dieser Prozesse sind weggelassen, da sie bei der ersten Ausführungsform beschrieben werden. In diesen Aufzeichnungsprozessen erzeugt der Rechner 200 ein Stehbild eines Fahrer- und Fahrzeugzulassungsschildes, das auf dem Nah-Infrarot-Bildbereich 218 aufgenommen wird, und sendet das Stehbild an den Rekorder 250.The computer 220 receives a vehicle detection signal from the vehicle detector 230 and a moving picture of the first CCD 212 and then process the picture. The image processing by the computer 220 includes the lane change recording process, the road traffic recording process, the vehicle color recording process, and the vehicle family recording process. The descriptions of these processes are omitted since they will be described in the first embodiment. In these recording processes, the calculator generates 200 a still image of a driver and vehicle registration plate displayed on the near-infrared image area 218 is recorded, and sends the still image to the recorder 250 ,

Der Rekorder 250 ist ein Speicher, der eine Halbleiterspeichervorrichtung wie z. B. eine Speicherplatte oder ein DRAM enthält, und speichert vorübergehend ein bewegtes Bild, das von dem ersten Bildgerät 210 übertragen wird, und ein Stehbild, das von dem Rechner 220 übertragen wird.The recorder 250 is a memory that a semiconductor memory device such. B. a disk or a DRAM contains, and temporarily stores a moving image that from the first image device 210 is transferred, and a still image, by the computer 220 is transmitted.

Das Kommunikationsgerät 260 ist mit der zentralen Steuerung 300 über Leitung oder drahtlos verbunden. Es bestimmt, ob Stehbilder und bewegte Bilder in dem Rekorder 250 eine vorbestimmte Bedingung erfüllen, und es sendet entsprechende Bilder an die zentrale Steuerung 300. Die vorbestimmte Bedingung wird noch beschrieben.The communication device 260 is with the central control 300 connected via wire or wireless. It determines whether still pictures and moving pictures in the recorder 250 satisfy a predetermined condition, and it sends corresponding images to the central controller 300 , The predetermined condition will be described later.

Das zentrale Kommunikationsgerät 310 empfangt ein Stehbild und ein bewegtes Bild und sendet beide an den zentralen Rekorder 330. Außerdem sendet es ein Alarmsignal an das Alarmgerät 320, wenn es ein Stehbild oder ein bewegtes Bild von dem Kommunikationsgerät 260 empfängt.The central communication device 310 receives a still picture and a moving picture and sends both to the central recorder 330 , It also sends an alarm signal to the alarm device 320 if there is a still picture or a moving picture of the communication device 260 receives.

Der zentrale Rekorder 330 ist eine Speichervorrichtung wie eine Speicherplatte, ein Speicher usw., die Stehbilder und bewegte Bilder speichert, welche sie von dem zentralen Kommunikationsgerät 310 empfängt.The central recorder 330 is a storage device such as a storage disk, a memory, etc., which stores still images and moving images from the central communication device 310 receives.

Das Alarmgerät 320 hat einen Lautsprecher, der Schall abgibt, eine Anzeige, die ein Alarmbild erzeugt, oder ein Anzeigelicht, das blinkt, wenn es ein Alarmsignal von dem zentralen Kommunikationsgerät 310 empfängt.The alarm device 320 has a speaker that emits sound, a display that generates an alarm image, or an indicator light that flashes when there is an alarm signal from the central communication device 310 receives.

Der zentrale Rechner 340 tastet die Fahrzeugzulassungsnummer auf einem Fahrzeugzulassungsschild ab, das zu einem Einzelbild gehört, und bestimmt, ob sie einer vorbestimmten Überwachungsnummer entspricht oder nicht.The central computer 340 samples the vehicle registration number on a vehicle registration plate belonging to a frame and determines whether it corresponds to a predetermined surveillance number or not.

Der Fahrbahnwechsel-Aufzeichnungsprozess wird nun unter Bezugnahme auf 4 und 5 beschrieben. The lane change recording process will now be described with reference to FIG 4 and 5 described.

Der Fahrbahnwechsel-Aufzeichnungsprozess wird mit dem Rechner 220 ausgeführt, wenn der erste Klient 200 das Fotografieren eines Bildes beginnt.The lane change recording process is done with the calculator 220 executed when the first client 200 the photographing of an image begins.

In Schritt S401 wird ein Fahrbahnwechsel-Initialisierungsprozess ausgeführt. Der Fahrbahnwechsel-Initialisierungsprozess wählt einen Fahrbahnbereich in einem Bild, das von dem ersten Bildgerät 210 fotografiert wurde, ordnet eine Fahrbahnnummer dem gewählten Fahrbahnbereich zu und wählt ein Bildfeld aus einem bewegten Bild. Der Fahrbahnbereich eines Bildes ist ein Bereich, der von einer Fahrbahn eingenommen wird. Die Einzelheiten des Fahrbahnwechsel-Initialisierungsprozesses werden nun beschrieben. Es sei bemerkt, dass die Fahrbahn ein Bereich auf einer Straße ist, in dem Fahrzeuge fahren und der durch weiße oder gelbe Fahrbahnlinien begrenzt ist. Die Entnahme ist der Prozess des Auswählens eines Bildfeldes aus einem bewegten Bild. Das Bildfeld Nr. 0 ist ein Bildfeld, das in dem Fahrbahnwechsel-Initialisierungsprozess aufgenommen wurde.In step S401, a lane change initialization process is executed. The lane change initialization process selects a lane area in an image from the first image device 210 was photographed, assigns a lane number to the selected lane area and selects an image field from a moving image. The lane area of an image is an area occupied by a lane. The details of the lane change initialization process will now be described. It should be noted that the lane is an area on a road in which vehicles drive and which is bordered by white or yellow lane lines. The extraction is the process of selecting an image field from a moving image. Image field # 0 is an image field captured in the lane change initialization process.

In Schritt S402 wird ein Fahrbahnwechselparameter m mit dem Wert 0 initialisiert. Der Fahrbahnwechselparameter m zeigt die Anzahl der Fahrbahnwechsel durch ein beobachtetes Fahrzeug an.In step S402, a lane change parameter m is initialized with the value 0. The lane change parameter m indicates the number of lane changes by an observed vehicle.

In Schritt S403 wird ein Bildfeldnummer-Parameter n mit dem Wert 1 initialisiert. Der Bildfeldnummer-Parameter n gibt die Bildfeldnummer an und wird inkrementell einem jeden Bildfeld eines bewegten Bildes von dem ersten Bildfeld bis zum letzten Bildfeld zugeordnet.In step S403, a frame number parameter n is initialized with the value 1. The frame number parameter n indicates the frame number and is incrementally assigned to each frame of a moving frame from the first frame to the last frame.

In Schritt S404 werden die Bildfelder n + 1 und n + 2 aus einem bewegten Bild entnommen. Das Bildfeld n + 2 wird zu einer vorbestimmten Zeit nach der Entnahme des Bildfeldes n + 1 entnommen. Beispielsweise ist die vorbestimmte Zeit 100 msec.In step S404, the image fields n + 1 and n + 2 are extracted from a moving image. The image field n + 2 is taken out at a predetermined time after the removal of the image field n + 1. For example, the predetermined time is 100 msec.

In Schritt S405 ist P die Differenz der Bildfeldnummer n + 1 und der Bildfeldnummer 0 oder n, und Q ist die Differenz der Bildfeldnummer n + 2 und der Bildfeldnummer n + 1. Deshalb wird der Wert eines Pixels in einem bestimmten Bildfeld aufgenommen, wenn er gegenüber dem Wert eines entsprechenden Pixels in einem Bildfeld, das dem bestimmten Bildfeld nach einer vorbestimmten Zeit folgt, unterschiedlich ist. Das Pixel, das einen unterschiedlichen Wert hat, entspricht einem mobilen Objekt, d. h. einem Objekt, das sich während der Zeit zwischen der Aufnahme eines bestimmten Bildfeldes und der späteren Aufnahme eines unterschiedlichen Bildfeldes nach einer vorbestimmten Zeit bewegt.In step S405, P is the difference of frame number n + 1 and frame number 0 or n, and Q is the difference of frame number n + 2 and frame number n + 1. Therefore, the value of a pixel is included in a particular frame as it is is different from the value of a corresponding pixel in an image field following the particular image field after a predetermined time. The pixel having a different value corresponds to a mobile object, i. H. an object that moves during the time between the capture of a particular frame and the subsequent capture of a different frame after a predetermined time.

In Schritt S406 werden die Differenzen P und Q mit einem vorbestimmten Schwellenwert binär dargestellt. Dann wird eine logische Multiplikation R mit den binären Differenzen P und Q berechnet. Entsprechend der Binärdarstellung mit einem vorbestimmten Schwellenwert wird ein Pixel, das kein mobiles Objekt darstellt, als Signalrauschen betrachtet und entfernt. Entsprechend der logischen Multiplikation R mit den binären Differenzen P und Q wird ein mobiles Objekt in einem bestimmten Bildfeld und in einem Bildfeld, nach einer vorbestimmten Zeit darauf folgt, spezifiziert. Dieser Spezifizierungsprozess wird als Markieroperation bezeichnet.In step S406, the differences P and Q are binarized at a predetermined threshold. Then, a logical multiplication R is calculated with the binary differences P and Q. According to the binary representation having a predetermined threshold value, a pixel which is not a mobile object is regarded as signal noise and removed. Corresponding to the logical multiplication R with the binary differences P and Q, a mobile object is specified in a specific image field and in an image field after a predetermined time. This specification process is called a marking operation.

In Schritt S407 wird eine Fahrbahnnummer und ein Fahrbahnbereich, in dem sich das in Schritt S406 markierte mobile Objekt befindet, berechnet. Dies spezifiziert die Fahrbahn, auf der sich das mobile Objekt befindet.In step S407, a lane number and a lane area in which the mobile object marked in step S406 is calculated are calculated. This specifies the lane on which the mobile object is located.

In Schritt S408 wird ein Bildfeld aus einem bewegten Bild entnommen, das von dem ersten Bildgerät 210 abgegeben wird. Dann wird der Bildfeldnummerparameter n inkrementell um 1 für jedes nachfolgend entnommene Bildfeld erhöht. Eine Gesamtzahl von drei Bildfeldern wird in Schritt S408 entnommen. Dies bedeutet, dass in Schritt S404 zwei Bildfelder und das weitere in Schritt S408 entnommen werden. Im Folgenden ist das zuletzt entnommene Bildfeld das Bildfeld n + 2, das unmittelbar vor dem Bildfeld n + 2 entnommene Bildfeld das Bildfeld n + 1 und das unmittelbar vor dem Bildfeld n + 1 entnommene Bildfeld das Bildfeld n.In step S408, an image field is extracted from a moving image obtained from the first image device 210 is delivered. Then, the frame number parameter n is incrementally incremented by 1 for each subsequently extracted frame. A total of three frames are taken in step S408. That is, in step S404, two frames and the other are extracted in step S408. In the following, the image field taken last is the image field n + 2, the image field taken directly before the image field n + 2 the image field n + 1 and the image field taken immediately before the image field n + 1 the image field n.

In Schritt S409 wird S als die Differenz des Bildfeldes n + 1 und des Bildfeldes n und Tals Differenz des Bildfeldes n + 2 und des Bildfeldes n + 1 berechnet.In step S409, S is calculated as the difference of the image field n + 1 and the image field n and the difference of the image field n + 2 and the image field n + 1.

Daher wird ein mobiles Objekt erfasst, wenn es sich von dem Zeitpunkt, zu dem ein bestimmtes Bildfeld entnommen wird, bis zur Entnahme eines anderen Bildfeldes zu einem späteren vorbestimmten Zeitpunkt bewegt.Therefore, a mobile object is detected when it moves from the time a particular frame is extracted until another frame is taken at a later predetermined time.

In Schritt S410 werden die Differenzen S und T mit einem vorbestimmten Schwellenwert binär dargestellt. Dann wird eine logische Multiplikation U mit den binären Differenzen S und T ausgeführt. Entsprechend der Binärdarstellung mit einem vorbestimmten Schwellenwert wird ein Pixel, das kein mobiles Objekt repräsentiert, als Rauschen angesehen und entfernt. Entsprechend der logischen Multiplikation U, berechnet mit den binären Differenzen S und T, wird ein mobiles Objekt markiert, wenn es sich in einem bestimmten Bildfeld und in einem nach einer vorbestimmten Zeit darauf folgenden Bildfeld befindet.In step S410, the differences S and T are binarized at a predetermined threshold. Then, a logical multiplication U is performed with the binary differences S and T. According to the binary representation having a predetermined threshold, a pixel representing no mobile object is regarded as noise and removed. Corresponding to the logical multiplication U, calculated with the binary differences S and T, a mobile object is marked if it is in a certain image field and in an image field following it after a predetermined time.

In Schritt S411 werden eine Fahrbahnnummer und ein Fahrbahnbereich, in dem sich das in Schritt S410 markierte mobile Objekt befindet, berechnet. Dies spezifiziert die Fahrbahn, auf der sich das mobile Objekt gegenwärtig befindet.In step S411, a lane number and a lane area in which the in Step S410 marked mobile object is located, calculated. This specifies the lane on which the mobile object is currently located.

In Schritt S412 wird bestimmt, ob die in Schritt S407 berechnete Fahrbahnnummer unterschiedlich zu der in Schritt S411 berechneten Fahrbahnnummer ist. Sind sie verschieden, geht der Prozess zu Schritt S413. Stimmen sie überein, so geht der Prozess zu Schritt S414.In step S412, it is determined whether the lane number calculated in step S407 is different from the lane number calculated in step S411. If they are different, the process goes to step S413. If they match, the process goes to step S414.

In Schritt S413 wird der Fahrbahnwechselparameter m inkrementell um lerhöht. Wenn die Fahrbahnnummer in Schritt S412 geändert ist, zeigt dies nämlich, dass ein bewegtes Objekt die Fahrbahn wechselt.In step S413, the lane change parameter m is incrementally increased by l. Namely, when the lane number is changed in step S412, it indicates that a moving object is changing the lane.

In Schritt S414 wird bestimmt, ob der Fahrbahnwechselparameter m größer als oder gleich einem maximalen Fahrbahnwechselparameter mMAX ist.In step S414, it is determined whether the lane change parameter m is greater than or equal to a maximum lane change parameter mMAX.

Der maximale Fahrbahnwechselparameter mMAX ist ein Maximalwert für die erlaubte Anzahl Fahrbahnwechsel eines mobilen Objekts, und er wird von einem Benutzer vor dem Start des Fahrbahnwechsel-Aufzeichnungsprozesses entschieden. Wenn der Fahrbahnwechselparameter m größer als oder gleich dem maximalen Fahrbahnwechselparameter mMAX ist, geht der Prozess zu Schritt S415, andernfalls kehrt er zu Schritt S408 zurück.The maximum lane change parameter mMAX is a maximum value for the allowed number of lane changes of a mobile object, and is decided by a user before the lane change recording process starts. If the lane change parameter m is greater than or equal to the maximum lane change parameter mMAX, the process goes to step S415, otherwise it returns to step S408.

In Schritt S415 werden mehrere Bildfelder aus einem von dem ersten Bildgerät 210 abgegebenen bewegten Bild entnommen. Das Entnahmeintervall und die Gesamtzahl entnommener Bildfelder werden so festgelegt, dass alle Fahrbahnwechsel eines mobilen Objekts aufgezeichnet werden. In der vorliegenden Ausführungsform werden in jeweils 0,1 Sekunde 10 Bildfelder entnommen.In step S415, multiple frames are extracted from one of the first image device 210 taken out moved moving image. The sampling interval and the total number of extracted image fields are set so that all lane changes of a mobile object are recorded. In the present embodiment, 10 frames are extracted every 0.1 second.

In Schritt S416 werden alle in Schritt S415 entnommenen Bildfelder zu der zentralen Steuerung 300 übertragen, indem sie durch das Kommunikationsgerät 260 geleitet werden. In der zentralen Steuerung 300 speichert der zentrale Rekorder 330 alle erhaltenen Bildfelder. Dann endet der Prozess.In step S416, all frames extracted in step S415 become the central controller 300 transmit by passing through the communication device 260 be directed. In the central control 300 saves the central recorder 330 all received image fields. Then the process ends.

Es wird nun der Fahrbahnwechsel-Initialisierungsprozess beschrieben.The lane change initialization process will now be described.

In Schritt 501 wird der Fahrbahnbereich, der ein von einer Fahrbahn in einem von dem ersten Bildgerät 210 fotografierten Bild eingenommener Bereich ist, bestimmt. Der Fahrbahnbereich wird bemerkbar, wenn der Rechner 200 eine Linie zum Teilen der Fahrbahnen erzeugt. Das Bankett der Fahrbahn wird gleichfalls als Fahrbahn erkannt, so dass ein Fahrzeug erfasst werden kann, wenn es auf das Bankett der Fahrbahn fährt.In step 501 becomes the lane area, which is one from a lane in one of the first image device 210 photographed image is occupied area, determined. The road area becomes noticeable when the calculator 200 generates a line for dividing the roadways. The banquet of the roadway is also recognized as a roadway, so that a vehicle can be detected when it drives on the banquet of the roadway.

In Schritt S502 wird dem ausgewählten Fahrbahnbereich eine Nummer zugeordnet. In der vorliegenden Ausführungsform gemäß 3 wird dem Bankett auf der rechten Seite einer Fahrbahn mit einem mit Nah-Infrarotlicht fotografierten Fahrzeug die Fahrbahnnummer L1 zugeordnet, der am weitesten rechts liegenden Fahrbahn mit einem mit Nah-Infrarotlicht fotografierten Fahrzeug wird die Fahrbahnnummer L2 zugeordnet, der Fahrbahn links von der Fahrbahn L2 wird die Fahrbahnnummer L3 zugeordnet, und der am weitesten links liegenden Fahrbahn ohne ein Fahrzeug wird die Fahrbahnnummer L4 zugeordnet.In step S502, a number is assigned to the selected lane area. In the present embodiment according to 3 At the feast on the right side of a lane with a vehicle photographed with near-infrared light, the lane number L1 is assigned to the banquet, the rightmost lane with a vehicle photographed with near infra-red light is assigned lane number L2, the lane becomes leftward of the lane L2 assigned to the lane number L3, and the leftmost lane without a vehicle is assigned the lane number L4.

In Schritt S503 wird ein Bildfeld aus einem bewegten Bild entnommen. Eine Fahrbahn, auf der kein mobiles Objekt vorhanden ist, wird zuvor fotografiert, so dass ein mobiles Objekt leicht erfasst werden kann. Dann endet der Prozess.In step S503, an image field is extracted from a moving image. A road surface on which no mobile object exists is previously photographed, so that a mobile object can be easily detected. Then the process ends.

Entsprechend dem Fahrbahnwechsel-Aufzeichnungsprozess wird ein Fahrzeug, das die Fahrbahn öfter als oder gleich dem maximalen Fahrbahnwechselparameter mMAX wechselt, automatisch fotografiert und aufgezeichnet.According to the lane change recording process, a vehicle that changes the lane more than or equal to the maximum lane change parameter mMAX is automatically photographed and recorded.

Der Straßenverkehrs-Aufzeichnungsprozess wird nun unter Bezugnahme auf 6 und 7 beschrieben. Der Straßenverkehrs-Aufzeichnungsprozess wird mit dem Rechner 220 ausgeführt, wenn der erste Klient 200 zur fotografischen Aufnahme eines Bildes bereit ist.The road traffic recording process will now be described with reference to 6 and 7 described. The road traffic recording process is done with the calculator 220 executed when the first client 200 ready to photograph a picture.

In Schritt S601 wird ein Verkehrsinitialisierungsprozess ausgeführt. Der Verkehrsinitialisierungsprozess ordnet eine Fahrbahnnummer dem Fahrbahnbereich zu, setzt einen maximalen Strassenpassageparameter mMAX, entnimmt ein Bildfeld aus einem bewegten Bild und erkennt dann das Bankett einer Straße. Die Einzelheiten des Verkehrsinitialisierungsprozesses werden im Folgenden beschrieben. In dem vorliegenden Prozess ist der maximale Straßenpassageparameter mMAX die Maximalzahl der Passagen eines mobilen Objekts auf das Bankett einer Straße; genauer ist dies jedoch eine maximale Periode und wird durch den Benutzer festgelegt. Das Bildfeld 0 ist ein in dem Verkehrsinitialisierungsprozess entnommenes Bildfeld.In step S601, a traffic initialization process is executed. The traffic initiation process allocates a lane number to the lane area, sets a maximum road passage parameter mMAX, extracts an image field from a moving image, and then recognizes the banquet of a road. The details of the traffic initialization process will be described below. In the present process, the maximum road passage parameter mMAX is the maximum number of passages of a mobile object on the banquet of a road; more precisely, this is a maximum period and is set by the user. The image field 0 is an image field taken in the traffic initialization process.

In Schritt S602 wird ein Findeparameter m mit dem Wert 0 initialisiert. Der Findeparameter m ist die Anzahl der Passagen eines beobachteten mobilen Objekts auf das Bankett einer Straße, genauer ist es jedoch eine maximale Periode.In step S602, a find parameter m is initialized with the value 0. The find parameter m is the number of passages of an observed mobile object on the banquet of a road, but more specifically, it is a maximum period.

In Schritt S603 wird der Bildfeldnummer-Parameter n mit dem Wert 1 initialisiert. Der Bildfeldnummer-Parameter n wird inkrementell erhöht, wenn er einem jeden Bildfeld in einem bewegten Bild von dem ersten Bildfeld bis zu dem letzten Bildfeld zugeordnet wird, und er zeigt eine Bildfeldnummer an.In step S603, the frame number parameter n is initialized with the value 1. The frame number parameter n is incrementally incremented when viewed in each frame in a moving image of is assigned to the first frame up to the last frame, and displays a frame number.

In Schritt S604 werden die Bildfelder n + 1 und n + 2 aus einem bewegten Bild entnommen. Das Bildfeld n + 2 wird zu einer vorbestimmten Zeit nach der Entnahme des Bildfeldes n + 1 entnommen. Beispielsweise ist die vorbestimmte Zeit 100 msec.In step S604, the image fields n + 1 and n + 2 are extracted from a moving image. The image field n + 2 is taken out at a predetermined time after the removal of the image field n + 1. For example, the predetermined time is 100 msec.

In Schritt S65 wird eine Differenz P des Bildfeldes n + 1 und des Bildfeldes 0 oder n sowie eine Differenz Q des Bildfeldes n + 2 und des Bildfeldes n + 1 gemessen. Deshalb wird der Wert eines Pixels in einem bestimmten Bildfeld, der gegenüber dem Wert eines Pixels in einem zu einer vorbestimmten Zeit nach dem bestimmten Bildfeld folgenden Bildfeld unterschiedlich ist, erfasst. Das Pixel mit einem unterschiedlichen Wert entspricht einem mobilen Objekt, d. h. einem Objekt, das sich für eine vorbestimmte Zeit nach der Entnahme eines bestimmten Bildfeldes bewegt.In step S65, a difference P of the image field n + 1 and the image field 0 or n and a difference Q of the image field n + 2 and the image field n + 1 are measured. Therefore, the value of a pixel in a particular image field that is different from the value of a pixel in an image frame following a certain time after the particular image field at a predetermined time is detected. The pixel with a different value corresponds to a mobile object, i. H. an object that moves for a predetermined time after the removal of a particular frame.

In Schritt S606 werden die Differenzen P und Q mit einem vorbestimmten Schwellenwert binär dargestellt. Dann wird eine logische Multiplikation R mit den binären Differenzen P und Q ausgeführt. Entsprechend einer Binärdarstellung mit einem vorbestimmten Schwellenwert wird ein Pixel, das kein mobiles Objekt repräsentiert, als Rauschen angesehen und entfernt. Entsprechend der logischen Multiplikation R aus den binären Differenzen P und Q wird ein mobiles Objekt spezifiziert, wenn es in einem bestimmten Bildfeld und in einem zu einer vorbestimmten Zeit danach folgenden Bildfeld auftritt.In step S606, the differences P and Q are binarized at a predetermined threshold. Then, a logical multiplication R is performed with the binary differences P and Q. According to a binary representation having a predetermined threshold value, a pixel representing no mobile object is regarded as noise and removed. Corresponding to the logical multiplication R from the binary differences P and Q, a mobile object is specified when it occurs in a certain frame and in an image frame following it at a predetermined time thereafter.

In Schritt S607 wird der Bildfeldnummerparameter n inkrementell um 1 erhöht.In step S607, the frame number parameter n is incrementally incremented by one.

In Schritt S608 wird ein Bildfeld aus einem von dem ersten Bildgerät 210 abgegebenen Bild entnommen. Nach dem Verarbeitungsschritt S608 werden drei Bildfelder entnommen. Dies bedeutet, dass zwei Bildfelder in Schritt S604 entnommen werden, das weitere in Schritt S608. Im Folgenden ist das letzte entnommene Bildfeld das Bildfeld n + 2, das unmittelbar zuvor entnommene Bildfeld das Bildfeld n + 1 und das unmittelbar vor dem Bildfeld n + 1 entnommene Bildfeld das Bildfeld n.In step S608, an image field becomes one of the first image device 210 taken picture. After the processing step S608, three frames are extracted. This means that two image fields are taken in step S604, the rest in step S608. In the following, the last extracted image field is the image field n + 2, the image field taken immediately before is the image field n + 1, and the image field taken immediately before the image field n + 1 is the image field n.

In Schritt S609 wird S der Differenz des Bildfeldes n + 1 und des Bildfeldes n zugeordnet und T wird der Differenz des Bildfeldes n + 2 und des Bildfeldes n + 1 zugeordnet. Deshalb ist ein mobiles Objekt ein Objekt, das sich für eine vorbestimmte Zeit von der Entnahme eines bestimmten Bildfeldes bis zu der Entnahme eines Bildfeldes aus einem bewegten Bild bewegt.In step S609, S is assigned to the difference of the image field n + 1 and the image field n, and T is assigned to the difference of the image field n + 2 and the image field n + 1. Therefore, a mobile object is an object that moves for a predetermined time from the removal of a particular frame to the removal of a frame from a moving image.

In Schritt S610 werden die Differenzen S und T mit einem vorbestimmten Schwellenwert binär dargestellt. Dann wird eine logische Multiplikation U mit den binären Differenzen S und T ausgeführt. Entsprechend der Binärdarstellung mit einem vorbestimmten Schwellenwert wird ein Pixel, das kein mobiles Objekt repräsentiert, als Rauschen angesehen und entfernt. Entsprechend der logischen Multiplikation U mit den binären Differenzen S und T wird ein mobiles Objekt markiert, wenn es in einem bestimmten Bildfeld und in einem zu einer vorbestimmten Zeit danach folgenden Bildfeld enthalten ist.In step S610, the differences S and T are binarized at a predetermined threshold. Then, a logical multiplication U is performed with the binary differences S and T. According to the binary representation having a predetermined threshold, a pixel representing no mobile object is regarded as noise and removed. Corresponding to the logical multiplication U with the binary differences S and T, a mobile object is marked if it is contained in a specific image field and in an image field following it at a predetermined time.

In Schritt S611 wird der Bildfeldnummer-Parameter n inkrementell um 1 erhöht.In step S611, the frame number parameter n is incremented by 1 incrementally.

In Schritt S612 wird bestimmt, ob sich ein mobiles Objekt auf dem Bankett einer Straße befindet oder nicht. Die Bestimmung erfolgt abhängig davon, ob ein in Schritt S610 markiertes mobiles Objekt in dem Fahrbahnbereich eines Bildfeldes existiert, der dem Bankett einer Straße entspricht. Wenn ein mobiles Objekt auf dem Bankett einer Straße vorhanden ist, geht der Prozess zu Schritt S613, andernfalls kehrt er zu Schritt S608 zurück.In step S612, it is determined whether or not a mobile object is on the banquet of a road. The determination is made according to whether a mobile object marked in step S610 exists in the lane area of an image field corresponding to the banquet of a road. If a mobile object exists on the banquet of a road, the process goes to step S613, otherwise it returns to step S608.

In Schritt S613 wird der Findeparameter m inkrementell um 1 erhöht, da in Schritt S612 ein mobiles Objekt auf dem Bankett der Straße erfasst wurde.In step S613, the finding parameter m is incrementally incremented by 1 because a mobile object has been detected on the banquet of the road in step S612.

In Schritt S614 wird bestimmt, ob der Findeparameter m größer als oder gleich einem maximalen Straßenpassageparameter mMAX ist. Ein Bildfeld wird über einen vorbestimmten Zeitraum entnommen, so dass die Zeit, in der das mobile Objekt auf dem Bankett einer Straße ist, durch Zählen der Bildfelder erfasst werden kann, in denen das mobile Objekt auf dem Bankett fotografiert ist. Wenn der Findeparameter m größer als oder gleich dem maximalen Straßenpassageparameter mMAX ist, geht der Prozess zu Schritt S615, andernfalls kehrt er zu Schritt S608 zurück.In step S614, it is determined whether the finding parameter m is greater than or equal to a maximum road passage parameter mMAX. An image field is extracted over a predetermined period of time so that the time in which the mobile object is on the banquet of a street can be detected by counting the image fields in which the mobile object is photographed on the banquet. If the finding parameter m is greater than or equal to the maximum road passage parameter mMAX, the process goes to step S615, otherwise it returns to step S608.

In Schritt S615 wird abhängig von einem von dem Fahrzeugdetektor abgegebenen Signal bestimmt, ob sich ein mobiles Objekt in einer Position an einem Fotografierpunkt befindet und fotografiert werden kann. Der Fahrzeugdetektor 230 enthält die Schleifenspule und ist an einem Fotografierpunkt angeordnet. Ein mobiles Objekt wird als an dem Fotografierpunkt befindlich bestimmt, wenn der Rechner 220 ein Signal von der Schleifenspule empfängt. Befindet sich ein mobiles Objekt an einem Fotografierpunkt, so geht der Prozess zu Schritt S616, andernfalls kehrt er zu Schritt S608 zurück.In step S615, it is determined whether a mobile object is in a position at a photographing point and can be photographed, depending on a signal output from the vehicle detector. The vehicle detector 230 contains the loop coil and is located at a photographing point. A mobile object is determined to be located at the photographing point when the computer 220 receives a signal from the loop coil. If a mobile object is at a photographing point, the process goes to step S616, otherwise it returns to step S608.

In Schritt S616 werden mehrere Bildfelder aus einem bewegten Bild entnommen, das von dem ersten Bildgerät 210 abgegeben wird. Das Intervall und die Anzahl der Bildfelder werden so festgelegt, dass alle Fahrbahnwechsel eines mobilen Objekts aufgezeichnet werden. In der vorliegenden Ausführungsform werden in jeweils 0,1 Sekunde zehn Bildfelder entnommen.In step S616, a plurality of frames are extracted from a moving picture taken from the first frame 210 is delivered. The interval and the number of image fields are set so that all lane changes of a mobile object are recorded. In the present Embodiment 10 frames are taken in every 0.1 second.

In Schritt S617 werden alle in Schritt S616 entnommenen Bildfelder der zentralen Steuerung 300 zugeführt, indem sie über das Kommunikationsgerät 260 geführt werden. Dann endet der Prozess.In step S617, all frames extracted in step S616 become the central controller 300 fed by using the communication device 260 be guided. Then the process ends.

Es wird nun der Verkehrsinitialisierungsprozess beschrieben.The traffic initiation process will now be described.

Ein Fahrbahnbereich, der ein durch eine Fahrbahn in einem mit dem ersten Bildgerät 210 fotografierten Bild eingenommener Bereich ist, wird in Schritt S701 ausgewählt. Der Rechner 200 erkennt bei einer Bildverarbeitung gelbe und weiße Linien, die die Fahrbahnen unterteilen. Das Bankett einer Straße wird als eine Fahrbahn erkannt, so dass ein Fahrzeug erfasst werden kann, wenn es auf dem Bankett einer Straße fährt. Eine Nummer wird dann dem gewählten Fahrbahnbereich zugeordnet. In dieser Ausführungsform wird die Fahrbahnnummer L1 dem Bankett der Straße auf der rechten Seite der Fahrbahn zugeordnet, auf der sich ein mit Nah-Infrarotlicht fotografiertes Fahrzeug befindet, die Fahrbahnnummer L2 wird der am weitesten rechts liegenden Fahrbahn zugeordnet, auf der sich ein mit Nah-Infrarotlicht fotografiertes Fahrzeug befindet, die Fahrbahnnummer L3 wird der links von der Fahrbahn L2 liegenden Fahrbahn zugeordnet und die Fahrbahnnummer L4 wird der am weitesten links liegenden Fahrbahn zugeordnet (siehe 3).A roadway area, one through a roadway in one with the first image device 210 If the photographed image is the occupied area, it is selected in step S701. The computer 200 recognizes in an image processing yellow and white lines that divide the lanes. The banquet of a road is recognized as a roadway so that a vehicle can be detected when driving on the banquet of a road. A number is then assigned to the selected lane area. In this embodiment, the lane number L1 is assigned to the banquet of the road on the right side of the road on which a vehicle photographed with near-infrared light is located, the lane number L2 is assigned to the right-most lane on which a road near Infrared light photographed vehicle is located, the lane number L3 is assigned to the lane to the left of the lane L2 and the lane number L4 is assigned to the leftmost lane (see 3 ).

In Schritt S702 wird der Maximalparameter mMAX erhalten, der die Maximalpassagen auf der Straße angibt.In step S702, the maximum parameter mMAX indicating the maximum passages on the road is obtained.

In dem nächsten Schritt S703 wird ein Bildfeld aus einem bewegten Bild entnommen. Eine leere Fahrbahn ohne ein mobiles Objekt wird zuvor fotografiert, so dass ein mobiles Objekt leicht erfasst werden kann.In the next step S703, an image field is extracted from a moving image. An empty lane without a mobile object is photographed beforehand, so that a mobile object can be easily detected.

In Schritt S704 wird ein Bereich, der das Bankett der Straße enthält, als ein Straßenbereich erkannt. Dann endet der Prozess.In step S704, an area containing the banquet of the road is recognized as a road area. Then the process ends.

Gemäß dem Straßenverkehrs-Aufzeichnungsprozess wird ein Fahrzeug automatisch fotografiert und aufgezeichnet, das die Fahrbahn öfter oder genau so oft wechselt wie der maximale Fahrbahnwechselparameter mMAX angibt.According to the road traffic recording process, a vehicle is automatically photographed and recorded, changing lanes more often or as often as the maximum lane change parameter mMAX indicates.

Es wird nun unter Bezugnahme auf 8 und 9 der Fahrzeugfarben-Aufzeichnungsprozess beschrieben. Der Fahrzeugfarben-Aufzeichnungsprozess wird mit dem Rechner 220 durchgeführt, wenn der erste Klient 200 das Fotografieren eines Bildes beginnt.It will now be referring to 8th and 9 the vehicle color recording process is described. The vehicle color recording process is done with the calculator 220 performed when the first client 200 the photographing of an image begins.

In Schritt S801 wird ein Fahrzeugfarben-Initialisierungsprozess ausgeführt. Der Fahrzeugfarben-Initialisierungsprozess führt zu einer zu erfassenden Fahrzeugfarbe. Die Einzelheiten des Fahrzeugfarben-Initialisierungsprozesses werden nun beschrieben. Die zu erfassende Fahrzeugfarbe wird durch einen Benutzer vorgegeben.In step S801, a vehicle color initialization process is executed. The vehicle color initialization process results in a vehicle color to be detected. The details of the vehicle color initialization process will now be described. The vehicle color to be detected is specified by a user.

In Schritt S802 wird ein Bildfeldnummer-Parameter n mit dem Wert 0 initialisiert. Der Bildfeldnummer-Parameter n, der die Bildfeldnummer angibt, wird von dem ersten bis zum letzten Bildfeld jeweils inkrementell um 1 erhöht, wenn er einem jeden Bildfeld eines bewegten Bildes zugeordnet wird.In step S802, a frame number parameter n is initialized with the value 0. The frame number parameter n indicating the frame number is incrementally incremented by 1 each from the first frame to the last frame when assigned to each frame of a moving frame.

In Schritt S803 werden die Bildfelder n + 1 und n + 2 aus einem bewegten Bild entnommen. Die Bildfeldnummer n + 2 wird zu einer vorbestimmten Zeit nach der Bildfeldnummer n + 1 entnommen. Beispielsweise ist die vorbestimmte Zeit 100 msec.In step S803, the image fields n + 1 and n + 2 are extracted from a moving image. The frame number n + 2 is taken out at a predetermined time after the frame number n + 1. For example, the predetermined time is 100 msec.

In Schritt S804 repräsentiert P die Differenz der Bildfeldnummer n + 1 und der Bildfeldnummer n, während Q die Differenz der Bildfeldnummer n + 2 und der Bildfeldnummer n + 1 ist. Deshalb wird der Wert eines Pixels in einem bestimmten Bildfeld erfasst, wenn er zu dem Wert eines entsprechenden Pixels in einem nach einer vorbestimmten Zeit auf das bestimmte Bildfeld folgenden Bildfeld unterschiedlich ist. Das Pixel mit einem unterschiedlichen Wert entspricht einem mobilen Objekt, das sich zwischen dem Zeitpunkt, wenn es in einem bestimmten Bildfeld erscheint, und dem Zeitpunkt, wenn ein Bildfeld zu einer vorbestimmten Zeit nach dem bestimmten Bildfeld entnommen wird, bewegt.In step S804, P represents the difference of frame number n + 1 and frame number n, while Q is the difference of frame number n + 2 and frame number n + 1. Therefore, the value of a pixel in a particular frame is detected when it is different from the value of a corresponding pixel in an image frame following the particular frame after a predetermined time. The pixel having a different value corresponds to a mobile object that moves between the time when it appears in a certain frame and the time when an frame is taken at a predetermined time after the particular frame.

In Schritt S805 werden die Differenzen P und Q mit einem vorbestimmten Schwellenwert binär dargestellt. Dann wird eine logische Multiplikation R mit den binären Differenzen P und Q berechnet. Entsprechend der Binärdarstellung mit einem vorbestimmten Schwellenwert wird ein Pixel, das kein mobiles Objekt repräsentiert, als Rauschen angesehen und entfernt. Entsprechend der logischen Multiplikation R, die mit den binären Differenzen P und Q berechnet wird, wird ein mobiles Objekt spezifiziert, das in einem bestimmten Bildfeld und einem Bildfeld enthalten ist, das zu einer vorbestimmten Zeit auf das bestimmte Bildfeld folgt.In step S805, the differences P and Q are binarized at a predetermined threshold. Then, a logical multiplication R is calculated with the binary differences P and Q. According to the binary representation having a predetermined threshold, a pixel representing no mobile object is regarded as noise and removed. Corresponding to the logical multiplication R calculated with the binary differences P and Q, a mobile object is specified which is contained in a certain image field and an image field which follows the particular image field at a predetermined time.

In Schritt S806 wird die Bildfeldnummer n + 1 zu der logischen Multiplikation R addiert, die auf der Basis des markierten mobilen Objekts berechnet wurde, um ein Farberkennungsbild C zu berechnen, das Farbinformation enthält.In step S806, the frame number n + 1 is added to the logical multiplication R calculated on the basis of the marked mobile object to calculate a color recognition image C containing color information.

In Schritt S807 wird bestimmt, ob die Farbe eines mobilen Objekts einer Zielfarbe entspricht oder nicht. Die Zielfarbe ist die Farbe eines gesuchten Zielfahrzeugs. Wenn die Farbe eines mobilen Objekts der Zielfarbe entspricht, geht der Prozess zu Schritt S808, andernfalls kehrt er zu Schritt S802 zurück.In step S807, it is determined whether or not the color of a mobile object corresponds to a target color. The target color is the color of a searched target vehicle. If the color of a mobile object is the target color, the process goes to step S808, otherwise it returns to step S802.

In Schritt S808 wird ein Bildfeld aus einem bewegten Bild entnommen, das von dem ersten Bildgerät 210 abgegeben wird. Das in Schritt S808 entnommene Bildfeld ist ein Farbbild. Deshalb wird ein Farbbild in dem Rekorder 250 gespeichert, so dass er die Farbe eines mobilen Objekt erkennen kann.In step S808, an image field is extracted from a moving image obtained from the first image device 210 is delivered. The image frame extracted in step S808 is a color image. Therefore, a color image is recorded in the recorder 250 stored so that it can recognize the color of a mobile object.

In Schritt S809 wird der Bildfeldnummer-Parameter n inkrementell um 1 erhöht.In step S809, the frame number parameter n is incrementally incremented by one.

In Schritt S810 wird ein Bildfeld aus einem bewegten Bild entnommen, das von dem ersten Bildgerät 210 abgegeben wird. Nach dem Schritt S810 werden vier Bildfelder entnommen. Dies bedeutet, dass drei Bildfelder in den Schritten S803 und S808 entnommen werden, und dass das vierte Bildfeld in Schritt S810 entnommen wird. Der im Folgenden beschriebene Prozess wird mit den drei zuletzt entnommenen Bildfeldern durchgeführt. Im Folgenden ist das letzte entnommene Bildfeld das Bildfeld n + 2, das unmittelbar vor dem Bildfeld n + 2 entnommene Bildfeld ist das Bildfeld n + 1, und das unmittelbar vor dem Bildfeld n + 1 entnommene Bildfeld ist das Bildfeld n.In step S810, an image field is extracted from a moving image obtained from the first image device 210 is delivered. After step S810, four frames are extracted. That is, three frames are extracted in steps S803 and S808, and the fourth frame is extracted in step S810. The process described below is performed with the three most recently extracted image fields. In the following, the last extracted image field is the image field n + 2, the image field taken immediately before the image field n + 2 is the image field n + 1, and the image field taken immediately before the image field n + 1 is the image field n.

In Schritt S811 ist S die Differenz der Bildfeldnummer n + 1 und der Bildfeldnummer n, und T ist die Differenz der Bildfeldnummer n + 2 und der Bildfeldnummer n + 1. Deshalb wird ein mobiles Objekt ausgewählt, wenn es sich von dem Zeitpunkt der Entnahme eines bestimmten Bildfeldes bis zu dem Zeitpunkt eines unterschiedlichen Bildfeldes bewegt, das zu einer vorbestimmten Zeit nach dem bestimmten Bildfeld entnommen wird.In step S811, S is the difference of frame number n + 1 and frame number n, and T is the difference of frame number n + 2 and frame number n + 1. Therefore, a mobile object is selected when it is from the time of extraction of a frame certain frame moved to the time of a different image field, which is taken at a predetermined time after the particular frame.

In Schritt S812 werden die Differenzen S und T mit einem vorbestimmten Schwellenwert binär dargestellt. Eine logische Multiplikation U wird dann mit den binären Differenzen S und T ausgeführt. Entsprechend einer Binärdarstellung mit einem vorbestimmten Schwellenwert wird ein Pixel, das kein mobiles Objekt repräsentiert, als Rauschen angesehen und entfernt. Gemäß der logischen Multiplikation U mit den binären Differenzen S und T wird ein mobiles Objekt markiert, wenn es in einem bestimmten Bildfeld sowie in einem nach einer vorbestimmten Zeit auf das bestimmte Bildfeld folgenden Bildfeld erscheint.In step S812, the differences S and T are binarized at a predetermined threshold. A logical multiplication U is then performed with the binary differences S and T. According to a binary representation having a predetermined threshold value, a pixel representing no mobile object is regarded as noise and removed. According to the logical multiplication U with the binary differences S and T, a mobile object is marked as it appears in a certain image field as well as in an image field following the particular image field after a predetermined time.

Ob ein mobiles Objekt an einem Fotografierpunkt ist oder nicht, wird in Schritt S813 aus einem von dem Fahrzeugdetektor 230 abgegebenen Signal bestimmt. Der Fahrzeugdetektor 230, der eine Schleifenspule enthält, ist an einem Fotografierpunkt angeordnet. Ein mobiles Objekt wird als an dem Fotografierpunkt vorhanden bestimmt, wenn der Rechner 220 ein Signal von der Schleifenspule erhält. Wenn ein mobiles Objekt an einem Fotografierpunkt erfasst wird, geht der Prozess zu Schritt S814, andernfalls kehrt er zu Schritt S809 zurück.Whether or not a mobile object is at a photographing point becomes one of the vehicle detector in step S813 230 determined signal determined. The vehicle detector 230 which includes a loop coil is disposed at a photographing point. A mobile object is determined to be present at the photographing point when the computer 220 receives a signal from the loop coil. If a mobile object is detected at a photographing point, the process goes to step S814, otherwise it returns to step S809.

In Schritt S814 werden mehrere Bildfelder einem von dem ersten Bildgerät 210 abgegebenen bewegten Bild entnommen. Das Intervall der Bildentnahme und die Zahl der entnommenen Bildfelder werden so festgelegt, dass alle Fahrbahnwechsel eines mobilen Objekts aufgezeichnet werden. In dem vorliegenden Ausführungsbeispiel werden zehn Bildfelder in jeweils 0,1 Sekunde entnommen.In step S814, a plurality of frames become one of the first image device 210 taken out moved moving image. The interval of the image removal and the number of extracted image fields are set so that all lane changes of a mobile object are recorded. In the present embodiment, ten frames are taken every 0.1 second.

In Schritt S815 werden alle in Schritt S814 entnommenen Bildfelder der zentralen Steuerung 300 zugeführt, indem sie über das Kommunikationsgerät 260 geleitet werden. Dann endet der Prozess.In step S815, all frames extracted in step S814 become the central controller 300 fed by using the communication device 260 be directed. Then the process ends.

Es wird nun der Fahrzeugfarben-Initialisierungsprozess beschrieben.The vehicle color initialization process will now be described.

In Schritt S901 setzt ein Benutzer eine zu erfassende Fahrzeugfarbe. Die Fahrzeugfarbe wird mit HSV (Farbton, Sättigung, Croma, Helligkeit, Lichtstärke und Wert) oder RGB (rot, grün und blau) usw. gesetzt. Nach dem Setzen der Farbe durch einen Benutzer endet der Prozess.In step S901, a user sets a vehicle color to be detected. The vehicle color is set with HSV (Hue, Saturation, Croma, Brightness, Brightness and Value) or RGB (Red, Green and Blue) and so on. After setting the color by a user, the process ends.

Entsprechend dem Fahrzeugfarben-Aufzeichnungsprozess wird ein Fahrzeug mit der Zielfahrzeugfarbe automatisch fotografiert und aufgezeichnet.According to the vehicle color recording process, a vehicle with the target vehicle color is automatically photographed and recorded.

Der Fahrzeugfamilien-Aufzeichnungsprozess wird nun unter Bezugnahme auf 10 und 11 beschrieben. Der Fahrzeugfamilien-Aufzeichnungsprozess wird mit dem Rechner 220 durchgeführt, wenn der erste Klient 200 das Fotografieren eines Bildes beginnt.The vehicle family recording process will now be described with reference to FIG 10 and 11 described. The vehicle family recording process is done with the calculator 220 performed when the first client 200 the photographing of an image begins.

In Schritt S1001 wird ein Fahrzeugfamilien-Initialisierungsprozess ausgeführt. Der Fahrzeugfamilien-Initialisierungsprozess setzt eine Fahrzeugfamilie und einen maximalen Fahrzeugfamilienparameter mMAX und entnimmt ein Bildfeld aus einem bewegten Bild. Die Einzelheiten des Fahrzeugfamilien-Initialisierungsprozesses werden nun beschrieben. Der maximale Fahrzeugfamilienparameter mMAX ist eine Zahl von Bildfeldern zum Erfassen eines mobilen Objekts entsprechend einer bestimmten Fahrzeugfamilie (Zielfahrzeugfamilie) und wird durch einen Benutzer bestimmt. Das Bildfeld 0 ist ein Bildfeld, das in dem Fahrzeugfamilien-Initialisierungsprozess entnommen wird.In step S1001, a vehicle family initialization process is executed. The vehicle family initialization process sets a vehicle family and a maximum vehicle family parameter mMAX and extracts an image field from a moving image. The details of the vehicle family initialization process will now be described. The maximum vehicle family parameter mMAX is a number of image fields for detecting a mobile object corresponding to a particular vehicle family (target vehicle family), and is determined by a user. The image field 0 is an image field taken in the vehicle family initialization process.

In Schritt S1002 wird ein Findeparameter m mit dem Wert 0 initialisiert. Der Findeparameter m gibt die Zahl der Fotografiervorgänge eines mobilen Objekts an, das einer Zielfahrzeugfamilie entspricht.In step S1002, a find parameter m is initialized with the value 0. The find parameter m indicates the number of photographing operations of a mobile object corresponding to a target vehicle family.

In Schritt S1003 wird ein Bildfeldnummer-Parameter n mit dem Wert 1 initialisiert. Der Bildfeldnummer-Parameter n, der die Bildfeldnummer angibt, wird inkrementell von dem ersten Bildfeld bis zu dem letzten Bildfeld um 1 erhöht, während er einem jeden Bildfeld in einem bewegten Bild zugeordnet wird. In step S1003, a frame number parameter n is initialized with the value 1. The frame number parameter n indicating the frame number is incrementally incremented by 1 from the first frame to the last frame as it is assigned to each frame in a moving frame.

In Schritt S1004 werden die Bildfelder n + 1 und n + 2 aus einem bewegten Bild entnommen. Das Bildfeld n + 2 wird zu einer vorbestimmten Zeit nach dem Entnehmen des Bildfeldes n + 1 entnommen. Beispielsweise ist die vorbestimmte Zeit 100 msec.In step S1004, the image fields n + 1 and n + 2 are extracted from a moving image. The image field n + 2 is taken out at a predetermined time after the extraction of the image field n + 1. For example, the predetermined time is 100 msec.

In Schritt S1005 gibt P eine Differenz der Bildfeldnummer n + 1 und der Bildfeldnummer n an, und Q gibt eine Differenz der Bildfeldnummer n + 2 und der Bildfeldnummer n + 1 an. Deshalb wird der Wert eines Pixels in einem bestimmten Bildfeld aufgenommen, wenn er von dem Wert eines entsprechenden Pixels in einem Bildfeld verschieden ist, das zu einer vorbestimmten Zeit auf das bestimmte Bildfeld folgt. Das Pixel mit dem unterschiedlichen Wert entspricht einem mobilen Objekt, d. h. einem Objekt, das sich während der Zeit zwischen der Entnahme eines bestimmten Bildfeldes und der Entnahme eines weiteren Bildfeldes zu einer vorbestimmten Zeit danach bewegt.In step S1005, P indicates a difference of frame number n + 1 and frame number n, and Q indicates a difference of frame number n + 2 and frame number n + 1. Therefore, the value of a pixel in a particular frame is taken when it is different from the value of a corresponding pixel in a frame that follows the particular frame at a predetermined time. The pixel with the different value corresponds to a mobile object, i. H. an object that moves during the time between the removal of a particular frame and the removal of another frame at a predetermined time thereafter.

In Schritt S1006 werden die Differenzen P und Q mit einem vorbestimmten Schwellenwert binär dargestellt. Dann wird eine logische Multiplikation R mit den binären Differenzen P und Q berechnet. Entsprechend der Binärdarstellung mit einem vorbestimmten Schwellenwert wird ein Pixel, das kein mobiles Objekt repräsentiert, als Rauschen angesehen und entfernt. Entsprechend der logischen Multiplikation R mit den binären Differenzen P und Q wird ein mobiles Objekt spezifiziert, wenn es in einem bestimmten Bildfeld und in einem Bildfeld zu einer vorbestimmten Zeit nach dem bestimmten Bildfeld vorhanden ist.In step S1006, the differences P and Q are binarized at a predetermined threshold. Then, a logical multiplication R is calculated with the binary differences P and Q. According to the binary representation having a predetermined threshold, a pixel representing no mobile object is regarded as noise and removed. Corresponding to the logical multiplication R with the binary differences P and Q, a mobile object is specified if it is present in a specific image field and in an image field at a predetermined time after the specific image field.

In Schritt S1007 wird der Bildfeldnummer-Parameter n inkrementell um 1 erhöht.In step S1007, the frame number parameter n is incremented by 1 incrementally.

In Schritt S1008 wird ein Bildfeld aus einem von dem ersten Bildgerät 210 abgegebenen bewegten Bild entnommen. Nach dem Verarbeitungsschritt S1008 werden drei Bildfelder entnommen. Dies bedeutet, dass in Schritt S1004 zwei Bildfelder entnommen werden und das dritte Bildfeld in Schritt S1008 entnommen wird. Im Folgenden ist das zuletzt entnommene Bildfeld das Bildfeld n + 2, das unmittelbar vor dem Bildfeld n + 2 entnommene Bildfeld ist das Bildfeld n + 1, und das unmittelbar vor dem Bildfeld n + 1 entnommene Bildfeld ist das Bildfeld n.In step S1008, an image field is extracted from one of the first image device 210 taken out moved moving image. After the processing step S1008, three frames are extracted. That is, in step S1004, two frames are extracted and the third frame is extracted in step S1008. In the following, the image field taken last is the image field n + 2, the image field taken directly before the image field n + 2 is the image field n + 1, and the image field taken immediately before the image field n + 1 is the image field n.

In Schritt S1009 wird der Bildfeldnummer-Parameter n inkrementell um 1 erhöht.In step S1009, the frame number parameter n is incrementally incremented by one.

In Schritt S1010 ist S die Differenz der Bildfeldnummer n + 1 und der Bildfeldnummer n und T die Differenz der Bildfeldnummer n + 2 und der Bildfeldnummer n + 1. Deshalb wird ein mobiles Objekt erfasst, wenn es sich in der Zeit zwischen der Entnahme eines bestimmten Bildfeldes und der Entnahme eines weiteren Bildfeldes zu einem vorbestimmten späteren Zeitpunkt bewegt.In step S1010, S is the difference of frame number n + 1 and frame number n and T is the difference of frame number n + 2 and frame number n + 1. Therefore, a mobile object is detected if it is between the time a particular pixel is taken Image field and the removal of another image field moves to a predetermined later date.

In Schritt S1011 werden die Differenzen S und T mit einem vorbestimmten Schwellenwert binär dargestellt. Dann wird eine logische Multiplikation U mit den binären Differenzen S und T berechnet. Entsprechend der Binärdarstellung mit einem vorbestimmten Schwellenwert wird ein Pixel, das kein mobiles Objekt repräsentiert, als Signalrauschen angesehen und entfernt. Entsprechend der logischen Multiplikation U mit den binären Differenzen S und T wird ein mobiles Objekt markiert, wenn es in einem bestimmten Bildfeld und in einem Bildfeld zu einem vorbestimmten Zeitpunkt danach erfasst wird.In step S1011, the differences S and T are binarized at a predetermined threshold. Then a logical multiplication U with the binary differences S and T is calculated. According to the binary representation having a predetermined threshold value, a pixel representing no mobile object is regarded as signal noise and removed. Corresponding to the logical multiplication U with the binary differences S and T, a mobile object is marked when it is detected in a certain image field and in an image field at a predetermined time thereafter.

In Schritt S1012 wird bestimmt, ob ein mobiles Objekt einer Zielfahrzeugfamilie entspricht oder nicht. Die Bestimmung, ob das in Schritt S1010 markierte mobile Objekt einer Zielfahrzeugfamilie entspricht oder nicht, wird auf der Grundlage eines Bildes aus einem Bildfeld durchgeführt. Wenn ein mobiles Objekt einer Zielfahrzeugfamilie entspricht, geht der Prozess zu Schritt S1013, andernfalls geht er zu Schritt S1014.In step S1012, it is determined whether or not a mobile object corresponds to a target vehicle family. The determination as to whether or not the mobile object marked in step S1010 corresponds to a target vehicle family is made on the basis of an image from an image field. If a mobile object corresponds to a target vehicle family, the process goes to step S1013, otherwise it goes to step S1014.

In Schritt S1013 wird der Findeparameter m inkrementell um 1 erhöht, wenn ein bewegliches Objekt in Schritt S1012 als einer Zielfahrzeugfamilie zugehörig erkannt wird, weil ein bewegliches Objekt in Schritt S1012 entsprechend einer Zielfahrzeugfamilie zugehörig bestimmt wird.In step S1013, the finding parameter m is incrementally increased by 1 when a moving object is recognized as belonging to a target vehicle family in step S1012 because a moving object is determined to be associated with a target vehicle family in step S1012.

Ob der Findeparameter m größer als oder gleich dem maximalen Fahrzeugfamilienparameter mMAX ist, wird in Schritt S1014 bestimmt. Nach Zählen der Anzahl Bildfelder, in denen ein bewegliches Objekt aufgenommen ist, wird das bewegliche Objekt als zu einer Zielfahrzeugfamilie gehörend bestimmt, wenn die gezählte Anzahl Bildfelder größer als oder gleich dem maximalen Fahrzeugfamilienparameter mMAX ist. Dieser Prozess erhöht die Genauigkeit der Erfassung einer Fahrzeugfamilie. Wenn der Findeparameter m größer als oder gleich dem maximalen Fahrzeugfamilienparameter mMAX ist, geht der Prozess zu Schritt S1015, andernfalls kehrt er zu Schritt S1008 zurück.Whether the finding parameter m is greater than or equal to the maximum vehicle family parameter mMAX is determined in step S1014. After counting the number of frames in which a moving object is received, the moving object is determined to belong to a target vehicle family if the counted number of frames is greater than or equal to the maximum vehicle family parameter mMAX. This process increases the accuracy of detecting a family of vehicles. If the finding parameter m is greater than or equal to the maximum vehicle family parameter mMAX, the process goes to step S1015, otherwise it returns to step S1008.

Ob ein mobiles Objekt an einem Fotografierpunkt ist oder nicht, wird in Schritt S1015 abhängig von einem von dem Fahrzeugdetektor 230 abgegebenen Signal bestimmt. Der Fahrzeugdetektor hat eine Schleifenspule und ist an einem Fotografierpunkt angeordnet. Ein mobiles Objekt wird als an der Stelle eines Fotografierpunktes vorhanden bestimmt, wenn der Rechner 220 ein Signal von der Schleifenspule empfängt. Ist ein mobiles Objekt an einem Fotografierpunkt, so geht der Prozess zu Schritt S1016, andernfalls kehrt er zu Schritt S1008 zurück.Whether or not a mobile object is at a photographing point is determined in step S1015 depending on one of the vehicle detector 230 determined signal determined. The vehicle detector has a loop coil and is disposed at a photographing point. A mobile object is called in place a photographing point available determines if the calculator 220 receives a signal from the loop coil. If a mobile object is at a photographing point, the process goes to step S1016, otherwise it returns to step S1008.

In Schritt S1016 werden mehrere Bildfelder aus einem bewegten Bild entnommen, das von dem ersten Bildgerät 210 abgegeben wird. Das Intervall der Bildentnahme und die Zahl der zu entnehmenden Bildfelder werden so bestimmt, dass alle Fahrbahnwechsel eines mobiles Objekts aufgezeichnet werden. Im vorliegenden Ausführungsbeispiel werden zehn Bildfelder in jeweils 0,1 Sekunde entnommen.In step S1016, a plurality of frames are extracted from a moving picture taken from the first frame 210 is delivered. The interval of image removal and the number of image fields to be extracted are determined so that all lane changes of a mobile object are recorded. In the present embodiment, ten image fields are taken in every 0.1 second.

In Schritt S1017 werden alle in Schritt S1016 entnommenen Bildfelder der zentralen Steuerung 300 zugeführt, indem sie über das Kommunikationsgerät 260 geleitet werden. Dann endet der Prozess.In step S1017, all frames extracted in step S1016 become the central controller 300 fed by using the communication device 260 be directed. Then the process ends.

Es wird nun der Fahrzeugfamilien-Initialisierungsprozess beschrieben.The vehicle family initialization process will now be described.

In Schritt S1101 setzt ein Benutzer eine zu erfassende Fahrzeugfamilie.In step S1101, a user sets a vehicle family to be detected.

In Schritt S1102 wird der maximale Fahrzeugfamilienparameter mMAX erhalten.In step S1102, the maximum vehicle family parameter mMAX is obtained.

In Schritt S1103 wird ein Bildfeld aus einem bewegten Bild entnommen. Eine Fahrbahn, die kein mobiles Objekt enthält, wird zuvor fotografiert, so dass ein mobiles Objekt leicht erfasst werden kann. Dann endet der Prozess.In step S1103, an image field is extracted from a moving image. A roadway that does not contain a mobile object is photographed beforehand, so that a mobile object can be easily detected. Then the process ends.

Entsprechend denn Fahrzeugfarben-Aufzeichnungsprozess wird ein zu einer gewünschten Fahrzeugfamilie gehörendes Fahrzeug automatisch fotografiert und aufgezeichnet.According to vehicle color recording process, a vehicle belonging to a desired vehicle family is automatically photographed and recorded.

Die vorliegende Ausführungsform überwacht die Bewegung eines Fahrzeugs und erzeugt ein Bild hoher Auflösung durch Aufnahme eines bewegten Fahrzeugs.The present embodiment monitors the movement of a vehicle and generates a high-resolution image by picking up a moving vehicle.

Die vorliegende Ausführungsform teilt den Bildbereich zu gleichen Teilen in den Nah-Infrarotbereich 218 und den Bildbereich 219 für sichtbares Licht durch Erzeugen einer Linie, die die optische Achse der fotografischen Optik 211 teilt. Einer der Bildbereiche kann jedoch auf Kosten des anderen Bildbereichs abhängig von einer fotografischen Bedingung vergrößert werden.The present embodiment divides the image area in equal parts into the near infrared region 218 and the image area 219 for visible light by creating a line representing the optical axis of the photographic optics 211 Splits. However, one of the image areas may be enlarged at the expense of the other image area depending on a photographic condition.

Es wird nun die in 12 und 13 dargestellte zweite Ausführungsform der Erfindung beschrieben. Ausbildungen der zweiten Ausführungsform, die ähnlich der ersten Ausführungsform sind, haben mit dieser übereinstimmende Bezugszeichen und werden nicht weiter erläutert.It will now be the in 12 and 13 illustrated second embodiment of the invention. Embodiments of the second embodiment which are similar to the first embodiment have the same reference numerals and will not be explained further.

Das zweite Bildsystem 400 hat einen zweiten Klienten 500, der sich an einer Position zum Fotografieren eines Objekts befindet und eine zentrale Steuerung 300, die separat zu dem zweiten Klienten 200 vorhanden ist.The second picture system 400 has a second client 500 located at a position for photographing an object and a central controller 300 separately to the second client 200 is available.

Der zweite Klient hat ein zweites Bildgerät 510, einen Rechner 220, einen Fahrzeugdetektor 230, eine Nah-Infrarotlichtquelle 240, einen Rekorder 250 und ein Kommunikationsgerät 260.The second client has a second image device 510 , a calculator 220 , a vehicle detector 230 , a near-infrared light source 240 , a recorder 250 and a communication device 260 ,

Das zweite Bildgerät 510 enthält eine Abbildungsoptik 211, die ein optisches Abbildungssystem ist, eine zweite CCD 512 und eine dritte CCD 515, die Bildsensoren sind, einen zweiten Sperrfilter 516 für sichtbares Licht, der ein Lichtfilter für unsichtbares Licht ist, einen zweiten Polarisator 517, einen zweiten Sperrfilter 514 für Infrarotlicht, der ein Farbfilter ist und einen halbdurchlässigen Spiegel 513.The second image device 510 contains an imaging optics 211 , which is an optical imaging system, a second CCD 512 and a third CCD 515 , which are image sensors, a second notch filter 516 for visible light, which is a light filter for invisible light, a second polarizer 517 , a second notch filter 514 for infrared light, which is a color filter and a semitransparent mirror 513 ,

Die zweite CCD 512 und die dritte CCD 515 haben eine Vielzahl Pixel, die eine Million Pixel übersteigt. Eine zweite Bildfläche 519 und eine dritte Bildfläche 520, auf denen ein optisches Bild durch die Abbildungsoptik 210 aufgenommen wird, sind rechteckförmig und auf der zweiten CCD 512 und der dritten CCD 515 jeweils angeordnet.The second CCD 512 and the third CCD 515 have a multitude of pixels that exceeds one million pixels. A second picture surface 519 and a third image area 520 on which an optical image through the imaging optics 210 are rectangular, and on the second CCD 512 and the third CCD 515 each arranged.

Die zweite CCD 512 ist in dem zweiten Klienten 500 so konfiguriert, dass die Richtung der optischen Achse der fotografischen Optik 211 parallel zu der Richtung der kurzen Seite der zweiten Bildfläche 519 ist, und die Schwerkraft wirkt auf den zweiten Klienten 500 in einer Richtung, die orthogonal zu der zweiten Bildfläche 519 liegt. Die dritte CCD 515 ist in dem zweiten Klienten 500 so konfiguriert, dass die Richtung der optischen Achse der fotografischen Optik 211 orthogonal zu der dritte Bildfläche 520 liegt, und die Schwerkraft wirkt auf den zweiten Klienten 500 in einer Richtung parallel zu der kurzen Seite der dritten Bildfläche 520. Die zweite Bildfläche 519 ist die Bildfläche für sichtbares Licht, die dritte Bildfläche 520 ist die Bildfläche für das Nah-Infrarotlicht. Die zweite und die dritte CCD 512 und 515 nehmen gleichzeitig ein optisches Bild auf, das auf die zweite und die dritte Bildfläche 519 und 520 fällt, die die Bildfläche 519 für sichtbares Licht und die Bildfläche 520 für Nah-Infrarotlicht sind. Die zweite und die dritte CCD 512 und 515 geben ein bewegtes Bild mit zehn Bildfeldern pro Sekunde an den Rechner 220 und den Rekorder 250 ab.The second CCD 512 is in the second client 500 configured so that the direction of the optical axis of the photographic optics 211 parallel to the direction of the short side of the second image area 519 is, and gravity acts on the second client 500 in a direction orthogonal to the second image area 519 lies. The third CCD 515 is in the second client 500 configured so that the direction of the optical axis of the photographic optics 211 orthogonal to the third image area 520 and gravity acts on the second client 500 in a direction parallel to the short side of the third image area 520 , The second picture surface 519 is the image surface for visible light, the third image surface 520 is the image area for the near-infrared light. The second and the third CCD 512 and 515 At the same time, they take on an optical image, that on the second and the third image surface 519 and 520 falls that the picture surface 519 for visible light and the picture surface 520 for near-infrared light. The second and the third CCD 512 and 515 Give a moving image with ten frames per second to the computer 220 and the recorder 250 from.

Der zweite Polarisator 517 ist ein optischer Filter, der nur Licht mit einem vorbestimmten Polarisationszustand durchlässt, und ist an der dritten CCD 515 so befestigt, dass er die gesamte Fläche des Nah-Infrarotbildbereichs 520 abdeckt.The second polarizer 517 is an optical filter that passes only light having a predetermined polarization state, and is at the third CCD 515 so attached that it covers the entire area of the near-infrared image area 520 covers.

Der zweite Sperrfilter 516 für sichtbares Licht ist ein optischer Filter, der nur Nah-Infrarotlicht und nicht sichtbares Licht durchlässt. Der zweite Sperrfilter 516 für sichtbares Licht ist nahe der der Abbildungsoptik 211 zugewandten Seite des zweiten Polarisators 517 so angeordnet, dass er die gesamte Fläche des zweiten Polarisators 517 abdeckt. The second blocking filter 516 Visible light is an optical filter that lets in only near infrared light and invisible light. The second blocking filter 516 for visible light is close to the imaging optics 211 facing side of the second polarizer 517 arranged so that it covers the entire area of the second polarizer 517 covers.

Der zweite Infrarot-Sperrfilter 514 ist ein optischer Filter, der Infrarotlicht nicht durchlässt, jedoch anderes Licht durchlässt, und ist nahe der zweiten CCD 512 so angeordnet, dass er die gesamte Fläche des Bildbereichs 519 für sichtbares Licht abdeckt. Die Dicke und der Brechungsindex des zweiten Infrarot-Sperrfilters 514 sind so bemessen, dass die Lichtweglänge des zweiten Infrarot-Sperrfilters 514 gleich der Lichtweglänge ist, die sich durch Addition der Lichtweglänge des zweiten Sperrfilters 516 für sichtbares Licht und der Lichtweglänge des zweiten Polarisators 517 ergibt.The second infrared cut filter 514 is an optical filter that does not transmit infrared light but transmits other light, and is close to the second CCD 512 arranged so that it covers the entire area of the image area 519 covering for visible light. The thickness and the refractive index of the second infrared cut filter 514 are sized so that the light path length of the second infrared cut filter 514 is equal to the light path length resulting from addition of the light path length of the second notch filter 516 for visible light and the light path length of the second polarizer 517 results.

Der halbdurchlässige Spiegel 513 ist auf der optischen Achse zwischen der fotografischen Optik 211 und der zweiten und der dritten CCD 512 und 515 so angeordnet, dass er einen Winkel von 45 Grad mit der optischen Achse der fotografischen Optik 211 einschließt. Der halbdurchlässige Spiegel 513 reflektiert eine Hälfte des ankommenden Lichtes und lässt die andere Hälfte durch. Licht von einem entfernten Objekt, das durch die fotografische Optik 211 fällt, wird an dem halbdurchlässigen Spiegel 513 auf den Bildbereich 519 für sichtbares Licht reflektiert. Licht von einem nahen Objekt wird durch den halbdurchlässigen Spiegel 513 auf den Bildbereich 520 für Nah-Infrarotlicht durchgelassen. Der Bildbereich 519 für sichtbares Licht und der Bildbereich 520 für Nah-Infrarotlicht liegen orthogonal zu der optischen Achse.The semi-transparent mirror 513 is on the optical axis between the photographic optics 211 and the second and third CCDs 512 and 515 arranged so that it makes an angle of 45 degrees with the optical axis of the photographic optics 211 includes. The semi-transparent mirror 513 reflects one half of the incoming light and lets the other half through. Light from a distant object, through the photographic optics 211 falls, becomes at the half-transparent mirror 513 on the picture area 519 reflected for visible light. Light from a nearby object is transmitted through the semitransparent mirror 513 on the picture area 520 let through for near-infrared light. The picture area 519 for visible light and the image area 520 for near-infrared light are orthogonal to the optical axis.

Entsprechend diesen Konstruktionen nimmt die zweite CCD 512 ein Farbbild eines fernen Objekts und die dritte CCD 515 ein Nah-Infrarotbild eines nahen Objekts auf (siehe 3).According to these constructions, the second CCD takes 512 a color image of a distant object and the third CCD 515 a near-infrared image of a nearby object (see 3 ).

Gemäß der vorliegenden Ausführungsform wird ein kleiner und kostengünstiger Bildsensor verwendet. Außerdem müssen auf einem Bildsensor mehrere Filter angeordnet sein.According to the present embodiment, a small and inexpensive image sensor is used. In addition, several filters must be arranged on an image sensor.

Es wird nun die in 14 und 15 dargestellte Ausführungsform der Erfindung beschrieben. Die Konstruktionen der dritten Ausführungsform, die ähnlich der ersten Ausführungsform sind, haben mit dieser übereinstimmende Bezugszeichen und werden nicht weiter beschrieben.It will now be the in 14 and 15 illustrated embodiment of the invention described. The constructions of the third embodiment which are similar to the first embodiment have the same reference numerals and will not be further described.

Das dritte Bildsystem 900 enthält einen dritten Klienten 600, der an der fotografischen Position eines Objekts angeordnet ist, und eine zentrale Steuerung 300, die separat zu dem dritten Klienten 600 vorgesehen ist.The third picture system 900 contains a third client 600 located at the photographic position of an object and a central controller 300 separately to the third client 600 is provided.

Der dritte Klient 600 enthält ein drittes Bildgerät 610, einen Rechner 220, einen Fahrzeugdetektor 230, eine Nah-Infrarotlichtquelle 240, einen Rekorder 250 und ein Kommunikationsgerät 260.The third client 600 contains a third image device 610 , a calculator 220 , a vehicle detector 230 , a near-infrared light source 240 , a recorder 250 and a communication device 260 ,

Das dritte Bildgerät 610 enthält eine Abbildungsoptik 211, die ein optisches Abbildungssystem ist, eine vierte CCD 612 und eine fünfte CCD 615, die Bildsensoren sind, einen zweiten Polarisator 517 und einen Strahlteiler 813, der ein Prisma ist, zum Teilen eines optischen Weges.The third image device 610 contains an imaging optics 211 which is an optical imaging system, a fourth CCD 612 and a fifth CCD 615 , which are image sensors, a second polarizer 517 and a beam splitter 813 which is a prism, for sharing an optical path.

Die vierte CCD 612 und die fünfte CCD 615 sind so vorgesehen, dass ihre Lichtweglängen ausgehend von der Abbildungsoptik 211 und der beschichteten Fläche 818 übereinstimmen.The fourth CCD 612 and the fifth CCD 615 are provided so that their Lichtweglängen starting from the imaging optics 211 and the coated area 818 to match.

Die vierte CCD 612 und die fünfte CCD 615 haben eine Vielzahl Pixel von mehr als einer Million. Eine vierte Bildfläche 619 und eine fünfte Bildfläche 620, auf denen ein optisches Bild durch die Abbildungsoptik 211 aufgenommen wird, sind rechteckförmig und auf der vierten CCD 612 und der fünften CCD 615 jeweils angeordnet. Die vierte Bildfläche 619 und die fünfte Bildfläche 620 haben übereinstimmende Seitenverhältnisse, Flächen und Pixelzahlen.The fourth CCD 612 and the fifth CCD 615 have a variety of pixels of more than one million. A fourth image area 619 and a fifth image area 620 on which an optical image through the imaging optics 211 are rectangular and on the fourth CCD 612 and the fifth CCD 615 each arranged. The fourth image area 619 and the fifth image area 620 have matching aspect ratios, areas, and pixel counts.

Die vierte CCD 612 ist in dem dritten Klienten 600 so angeordnet, dass die Richtung der optischen Achse der fotografischen Optik 211 parallel zu der kurzen Seite der vierten Bildfläche 619 liegt, und die Richtung der Schwerkraft auf den dritten Klienten 600 liegt orthogonal zu der vierten Bildfläche 619 und der fünften Bildfläche 620. Die fünfte CCD 615 ist in dem dritten Klienten 600 so konfiguriert, dass die Richtung der optischen Achse der fotografischen Optik 211 orthogonal zu der fünften Bildfläche 620 liegt, und die Schwerkraft wirkt auf den dritten Klienten 600 in Richtung parallel zu der kurzen Seite der fünften Bildfläche 620. Die vierte Bildfläche 619 ist die Bildfläche für sichtbares Licht, die fünfte Bildfläche 620 ist die Bildfläche für Nah-Infrarotlicht. Die vierte und die fünfte CCD 612 und 615 nehmen gleichzeitig ein optisches Bild auf, das auf die vierte und die fünfte Bildfläche 619 und 620 fällt, die die Bildfläche 519 für sichtbares Licht und die Bildfläche 520 für Nah-Infrarotlicht sind. Die vierte und die fünfte CCD 612 und 615 geben ein bewegtes Bild mit zehn Bildfeldern pro Sekunde an den Rechner 220 und den Rekorder 250 ab.The fourth CCD 612 is in the third client 600 arranged so that the direction of the optical axis of the photographic optics 211 parallel to the short side of the fourth image area 619 and the direction of gravity on the third client 600 is orthogonal to the fourth image area 619 and the fifth image area 620 , The fifth CCD 615 is in the third client 600 configured so that the direction of the optical axis of the photographic optics 211 orthogonal to the fifth image area 620 and gravity acts on the third client 600 in the direction parallel to the short side of the fifth image area 620 , The fourth image area 619 is the image surface for visible light, the fifth image surface 620 is the image area for near-infrared light. The fourth and the fifth CCD 612 and 615 At the same time, they take on an optical image, that on the fourth and the fifth image surface 619 and 620 falls that the picture surface 519 for visible light and the picture surface 520 for near-infrared light. The fourth and the fifth CCD 612 and 615 Give a moving image with ten frames per second to the computer 220 and the recorder 250 from.

Der zweite Polarisator 517 ist ein optischer Filter, der nur Licht mit einem vorbestimmten Polarisationszustand durchlässt, und ist an der fünften CCD 615 so befestigt, dass er die gesamte Fläche des Bildbereichs 520 für Nah-Infrarotlicht abdeckt.The second polarizer 517 is an optical filter that transmits only light having a predetermined polarization state, and is at the fifth CCD 615 fixed so that it covers the entire area of the image area 520 covering for near infrared light.

Der Strahlteiler 813 ist ein quadratisches Prisma mit einer vierseitigen Grundfläche und durch Verbinden rechtwinkliger Prismen 813a und 813b hergestellt. Die rechtwinkligen Prismen 813a und 813b haben dieselbe Form wie ein Dreieckprisma und haben eine Ober- und eine Unterseite rechtwinkliger Dreiecke, sowie eine Seitenfläche eines Quadrats. Die Seitenfläche, die keinen rechten Winkel mit der Ober- und der Unterseite einschließt, ist die Verbindungsfläche eines Rechtecks. Die Verbindungsfläche eines der rechtwinkligen Prismen 813a oder 813b hat eine rechteckige beschichtete Oberfläche 818, die sichtbares Licht reflektiert und Nah-Infrarotlicht durchlässt. Dies bedeutet, dass die Verbindungsflächen der rechtwinkligen Prismen 813a und 813b unter Einschluss der beschichteten Fläche 818 zwischen ihnen miteinander verbunden sind. Der Strahlteiler 813 ist auf dem Lichtweg so angeordnet, dass die beschichtete Fläche 818 der fotografischen Optik 211 zugewandt ist, und die Lichtwege der Bildflächen der vierten und der fünften CCD 612 und 615 treffen auf die beschichtete Fläche 818.The beam splitter 813 is a square prism with a quadrilateral footprint and by joining rectangular prisms 813a and 813b produced. The right-angled prisms 813a and 813b have the same shape as a triangular prism and have an upper and a lower side of right triangles, and a side surface of a square. The side surface that does not include a right angle with the top and bottom is the interface of a rectangle. The connecting surface of one of the right-angled prisms 813a or 813b has a rectangular coated surface 818 which reflects visible light and transmits near-infrared light. This means that the connecting surfaces of the right-angled prisms 813a and 813b including the coated area 818 between them. The beam splitter 813 is arranged on the light path so that the coated surface 818 the photographic optics 211 and the light paths of the image areas of the fourth and fifth CCDs 612 and 615 hit the coated surface 818 ,

Von der fotografischen Optik 211 auf den Strahlteiler 813 fallendes Licht wird in sichtbares Licht und Nah-Infrarotlicht geteilt. Das sichtbare Licht wird an der beschichteten Fläche 818 auf die vierte CCD 612 reflektiert. Das Nah-Infrarotlicht wird durch die beschichtete Fläche 818 auf die fünfte CCD 615 durchgelassen. Ein Sperrfilter für sichtbares Licht und ein Sperrfilter für Infrarotlicht müssen nicht vorgesehen sein, da die beschichtete Fläche 818 das sichtbare Licht und das Nah-Infrarotlicht teilt.From the photographic optics 211 on the beam splitter 813 Falling light is divided into visible light and near-infrared light. The visible light gets on the coated surface 818 on the fourth CCD 612 reflected. The near-infrared light passes through the coated area 818 on the fifth CCD 615 pass through. A visible light blocking filter and an infrared light blocking filter need not be provided since the coated surface 818 the visible light and the near-infrared light are dividing.

Entsprechend diesen Konstruktionen nimmt die vierte CCD 612 ein Farbbild eines fernen Objekts auf, und die fünfte CCD 615 nimmt ein Nah-Infrarotbild eines nahen Objekts auf (siehe 3).According to these constructions, the fourth CCD takes 612 a color image of a distant object, and the fifth CCD 615 takes a near-infrared image of a nearby object (see 3 ).

Beispielsweise ist das dritte Bildgerät 610 über einer Fahrbahn einer Verkehrsstraße angeordnet, um ein bewegtes Fahrzeug auf der Fahrbahn zu überwachen und ein Fahrzeug zu fotografieren, das sich aus großer Entfernung nähert. Die vertikale Richtung eines auf die vierte und die fünfte Bildfläche 619 und 620 fallenden optischen Bildes wird umgekehrt, so dass sie der vertikalen Richtung eines in die fotografische Optik 211 eintretenden Objekts entspricht. Nähert sich ein mobiles Objekt, beispielsweise ein Fahrzeug, dem dritten Klienten 600, so wird es bei vergleichsweise großer Entfernung erfasst, und es wird ein optisches Bild des sich nähernden Fahrzeugs auf der Bildfläche 619 für sichtbares Licht erzeugt. Nähert sich ein Fahrzeug dem dritten Klienten 600, wenn es eine vergleichsweise geringe Entfernung erreicht, so wird ein optisches Bild des sich nähernden Fahrzeugs auf der Bildfläche 620 für Nah-Infrarotlicht erzeugt. Dadurch gibt der dritte Klient 600 ein Farbbild eines vergleichsweise weit entfernten Objekts sowie ein Infrarotbild eines vergleichsweise nahen Objekts aus (siehe 3).For example, the third image device 610 arranged above a roadway of a traffic road to monitor a moving vehicle on the road and to photograph a vehicle approaching from a long distance. The vertical direction of one on the fourth and the fifth image area 619 and 620 falling optical image is reversed, making it the vertical direction of one in the photographic optics 211 incoming object corresponds. Approaches a mobile object, such as a vehicle, the third client 600 Thus, it is detected at a comparatively large distance, and it becomes an optical image of the approaching vehicle on the image surface 619 generated for visible light. When a vehicle approaches the third client 600 when it reaches a comparatively short distance, so becomes an optical image of the approaching vehicle on the screen 620 generated for near-infrared light. This gives the third client 600 a color image of a comparatively distant object and an infrared image of a comparatively close object (see 3 ).

Der Fahrzeugdetektor 230 ist eine Schleifenspule, die in dem Bildwinkel des dritten Bildgeräts 610 unter der Oberfläche der Straße angeordnet ist und ein passierendes Fahrzeug erfasst.The vehicle detector 230 is a loop coil that is in the field of view of the third imaging device 610 is located below the surface of the road and detects a passing vehicle.

Der Rechner 220 verarbeitet bewegte Bilder, die er von der vierten und der fünften CCD 612 und 615 empfängt, nachdem er ein Fahrzeugerfassungssignal von dem Fahrzeugdetektor 230 erhält. Der Rechner 220 führt den Fahrbahnwechsel-Aufzeichnungsprozess, den Straßenverkehr-Aufzeichnungsprozess, den Fahrzeugfarben-Aufzeichnungsprozess und den Fahrzeugfamilien-Aufzeichnungsprozess während der Bildverarbeitung aus. Sie wurden für die erste Ausführungsform beschrieben und sind hier daher weggelassen. In diesen Aufzeichnungsprozessen nimmt der Rechner 200 Bilder eines Fahrer- und Fahrzeugregistrierschildes auf, die auf der Bildfläche 620 für Nah-Infrarotlicht erzeugt werden, erzeugt ein Stehbild und sendet das Stehbild an den Rekorder 250.The computer 220 He processes moving pictures taken by the fourth and the fifth CCD 612 and 615 after receiving a vehicle detection signal from the vehicle detector 230 receives. The computer 220 executes the lane change recording process, the traffic recording process, the vehicle color recording process, and the vehicle family recording process during image processing. They have been described for the first embodiment and are therefore omitted here. In these recording processes, the calculator takes 200 Images of a driver and vehicle registration plate on the scene 620 for near-infrared light, produces a still image and sends the still image to the recorder 250 ,

Bei der vorliegenden Ausführungsform wird ein kleiner und kostengünstiger Bildsensor zur Überwachung der Bewegung eines Fahrzeugs und zum Aufnehmen eines optischen Bildes des bewegten Fahrzeugs verwendet, um ein Bild hoher Auflösung zu erzeugen.In the present embodiment, a small and inexpensive image sensor is used to monitor the motion of a vehicle and capture an optical image of the moving vehicle to produce a high resolution image.

Außerdem müssen nicht mehrere Filter auf einem Bildsensor vorhanden sein. Ein halbdurchlässiger Spiegel kann eine gewisse Verschlechterung eines optischen Bildes verursachen, da die Rückseite der Lichtaufnahmefläche des halbdurchlässigen Spiegels Licht reflektieren kann, das eine Verschlechterung verursacht. Der Strahlteiler 813 verhindert aber eine Verschlechterung eines optischen Bildes und spart die Kosten eines Sperrfilters für sichtbares Licht und eines Sperrfilters für Infrarotlicht.In addition, there need not be multiple filters on an image sensor. A semitransparent mirror may cause some deterioration of an optical image since the back surface of the light-receiving surface of the semi-transmissive mirror may reflect light causing deterioration. The beam splitter 813 but prevents deterioration of an optical image and saves the cost of a visible light blocking filter and an infrared light blocking filter.

Ein Filter zur Lichtweglängeneinstellung kann zwischen der vierten CCD 612 und dem Strahlteiler 613 angeordnet sein. Der Filter zur Lichtweglängeneinstellung stellt die Lichtweglänge zu der vierten CCD 612 so ein, dass die Lichtweglänge von der beschichteten Fläche oder der fotografischen Optik 211 zu der vierten CCD 612 mit der Lichtweglänge von der beschichteten Fläche oder der fotografischen Optik 211 zu der fünften CCD 615 übereinstimmt. Diese Konstruktion erspart die Kosten der Einstellung der Lichtweglängen.An optical path length adjustment filter may be interposed between the fourth CCD 612 and the beam splitter 613 be arranged. The light path length adjustment filter sets the light path length to the fourth CCD 612 such that the light path length of the coated surface or the photographic optics 211 to the fourth CCD 612 with the optical path length of the coated area or the photographic optics 211 to the fifth CCD 615 matches. This construction saves the cost of setting the Lichtweglängen.

In allen Ausführungsform ist der Bildsensor nicht auf eine CCD beschränkt, er kann auch ein CMOS-Bildsensor usw. sein. Die Pixelanzahl einer CCD muss nicht mehr als eine Million Pixel betragen. Die Fotografierfrequenz muss nicht auf zehn Bilder pro Sekunde begrenzt sein.In all embodiments, the image sensor is not limited to a CCD, it may also be a CMOS image sensor, etc. The pixel count of a CCD need not exceed one million pixels. The photographing frequency does not have to be limited to ten frames per second.

Die Nah-Infrarot-Bildfläche 520 und die Bildfläche 519 für sichtbares Licht müssen nicht übereinstimmende Seitenverhältnisse, Flächeninhalte und Pixelzahlen haben, sie können unterschiedliche Seitenverhältnisse, Flächeninhalte oder Pixelzahlen haben. The near-infrared image area 520 and the picture surface 519 for visible light, there must be mismatching aspect ratios, area and pixel counts, they can have different aspect ratios, area contents, or pixel counts.

Die Schleifenwicklung dient zum Erfassen eines Fahrzeuges bei der vorliegenden Ausführungsform; anstelle der Schleifenspule kann auch der folgende Prozesse vorgesehen sein. Die Position eines Fahrzeugs wird durch Berechnen der Geschwindigkeit und der Richtung eines optischen Bildes des Fahrzeugs auf der CCD 212 erfasst, und der zeitliche Verlauf seiner Annäherung an einen Bereich in denn Nah-Infrarot-Abbildungsbereich wird berechnet entsprechend einem Fotografierpunkt abhängig von der Fahrzeuggeschwindigkeit und – richtung, so dass ein mobiles Objekt mit Nah-Infrarotlicht fotografiert wird.The loop winding is for detecting a vehicle in the present embodiment; Instead of the loop coil, the following processes can also be provided. The position of a vehicle is calculated by calculating the speed and direction of an optical image of the vehicle on the CCD 212 is detected, and the timing of its approach to an area in the near-infrared imaging area is calculated according to a photographing point depending on the vehicle speed and direction, so that a mobile object is photographed with near-infrared light.

Der Fahrzeugdetektor 230 muss keine Schleifenspule sein, es kann auch ein Sensor sein, der die Position eines Fahrzeugs erfassen kann, beispielsweise ein Infrarotsensor oder ein akustischer Sensor.The vehicle detector 230 need not be a loop coil, it may also be a sensor that can detect the position of a vehicle, such as an infrared sensor or an acoustic sensor.

Das Bildsystem kann auch eine Frucht anstelle eines Fahrzeugs überwachen. Es kann eine Frucht abhängig von ihrem Zuckergehalt anstelle eines Fahrzeuges abhängig von dessen Farbe auswählen. Zusätzlich kann es Früchte entsprechend der Art und der Größe anstelle einer Fahrzeugfamilie sortieren.The image system can also monitor a fruit instead of a vehicle. It can select a fruit depending on its sugar content instead of a vehicle depending on its color. In addition, it can sort fruits according to the type and size instead of a vehicle family.

Außerdem kann das Abbildungssystem ein Päckchen anstelle eines Fahrzeugs überwachen. Es kann ein Päckchen entsprechend seinem Bestimmungsort, seiner Größe und seiner Form sortieren.Additionally, the imaging system may monitor a parcel instead of a vehicle. It can sort a packet according to its destination, size and shape.

Obwohl die Ausführungsformen der vorliegenden Erfindung vorstehend unter Bezugnahme auf die beigefügten Zeichnungen beschrieben wurden, sind dem Fachmann offenbar viele Modifikationen und Änderungen möglich, ohne von dem Umfang der Erfindung abzuweichen.Although the embodiments of the present invention have been described above with reference to the accompanying drawings, many modifications and changes will be apparent to those skilled in the art without departing from the scope of the invention.

Die vorliegende Beschreibung betrifft den Inhalt der japanischen Patentanmeldungen 2009-234303 (eingereicht am 8. Oktober 2009), 2009-234339 (eingereicht am B. Oktober 2009) und 2009-234340 (eingereicht am 8. Oktober 2009), der in seiner Gesamtheit hier ausdrücklich einbezogen wird.The present description relates to the content of Japanese Patent Applications 2009-234303 (filed on October 8, 2009), 2009-234339 (filed on October 8, 2009) and 2009-234340 (filed October 8, 2009), which is expressly incorporated herein in its entirety.

ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

  • JP 02-38997 [0002] JP 02-38997 [0002]
  • JP 2001-257923 [0004] JP 2001-257923 [0004]
  • JP 2009-234303 [0171] JP 2009-234303 [0171]
  • JP 2009-234339 [0171] JP 2009-234339 [0171]
  • JP 2009-234340 [0171] JP 2009-234340 [0171]

Claims (31)

Bildsystem, umfassend: einen Bildsensor mit einem ersten Bildbereich und einem zweiten Bildbereich, der gegenüber dem ersten unterschiedlich ist, und der ein optisches Bild aufnimmt, das sich auf dem ersten Bildbereich und dem zweiten Bildbereich bewegt; einen Farbfilter, der auf dem ersten Bildbereich angeordnet ist; einen Filter für nicht sichtbares Licht, der auf dem zweiten Bildbereich angeordnet ist; einen Speicher, der ein Bild speichert, das von dem Bildsensor aufgenommen ist; und eine Steuerung, die ein Bild aus dem Speicher abruft und das abgerufene Bild in einem Speichermedium speichert und bestimmt, ob das optische Bild einer vorbestimmten Bedingung entspricht oder nicht, auf der Basis eines Bildes, das auf dem ersten Bildbereich oder dem zweiten Bildbereich aufgenommen wurde; wobei der Bildsensor ein optisches Bild aufnimmt, das durch den Farbfilter gelangt, und ein Farbbild abgibt; und ein optisches Bild aufnimmt, das durch den Filter für nicht sichtbares Licht gelangt und ein Bild aus nicht sichtbarem Licht abgibt; und wobei in dem Fall, dass die Steuerung bestimmt, dass das optische Bild einer vorbestimmten Bedingung entspricht, die Steuerung aus dem Speicher ein Bild abruft, das zu einer vorbestimmten Zeit vor dem der vorbestimmten Bedingung entsprechenden optischen Bild aufgenommen wurde, und das abgerufene Bild in dem Speichermedium speichert.Image system comprising: an image sensor having a first image area and a second image area different from the first one and receiving an optical image moving on the first image area and the second image area; a color filter disposed on the first image area; a non-visible light filter disposed on the second image area; a memory storing an image picked up by the image sensor; and a controller that retrieves an image from the memory and stores the retrieved image in a storage medium and determines whether or not the optical image conforms to a predetermined condition based on an image taken on the first image area or the second image area; wherein the image sensor captures an optical image passing through the color filter and outputs a color image; and captures an optical image that passes through the invisible light filter and outputs an image of invisible light; and wherein, in the case that the controller determines that the optical image corresponds to a predetermined condition, the controller retrieves from the memory an image taken at a predetermined time before the optical image corresponding to the predetermined condition, and the retrieved image in the Storage medium stores. Bildsystem nach Anspruch 1, ferner enthaltend einen Detektor, der erfasst, ob ein optisches Bild sich von dem ersten Bildbereich oder dem zweiten Bildbereich zu dem jeweils anderen Bereich bewegt oder nicht, und wobei in dem Fall, dass die Steuerung bestimmt, dass das optische Bild einer vorbestimmten Bedingung entspricht und der Detektor erfasst, dass ein optisches Bild sich von einem Bereich zu dem anderen Bereich bewegt, die Steuerung aus dem Speicher ein Bild abruft, das zu einer vorbestimmten Zeit bevor sich das der vorbestimmten Bedingung entsprechende optische Bild sich zu dem anderen Bereich bewegt, aufgenommen wurde, und das abgerufene Bild in dem Speichermedium speichert.The image system of claim 1, further comprising a detector that detects whether or not an optical image moves from the first image area or the second image area to the other area, and wherein in the case that the controller determines that the optical image corresponds to a predetermined condition and the detector detects that an optical image is moving from one area to the other area, the controller retrieves an image from the memory at a predetermined time before the optical image corresponding to the predetermined condition moves to the other one Area moved, was recorded, and stores the retrieved image in the storage medium. Bildsystem nach Anspruch 1, bei dem der Bildsensor ein optisches Bild aufnimmt, das sich von dem ersten Bildbereich zu dem zweiten Bildbereich bewegt, und bei dem die Steuerung auf der Basis des Farbbildes bestimmt, ob das optische Bild einer vorbestimmten Bedingung entspricht, und in dem Fall, dass das optische Bild einer vorbestimmten Bedingung entspricht, die Steuerung das Bild aus nicht sichtbarem Licht in dem Speichermedium speichert.The image system of claim 1, wherein the image sensor captures an optical image that moves from the first image area to the second image area, and wherein the control based on the color image determines whether the optical image conforms to a predetermined condition, and wherein In case the optical image corresponds to a predetermined condition, the controller stores the image of non-visible light in the storage medium. Bildsystem nach Anspruch 3, bei dem die Steuerung das Bild aus nicht sichtbarem Licht und das Farbbild in dem Speichermedium speichert, wenn das optische Bild einer vorbestimmten Bedingung entspricht.An image system according to claim 3, wherein the controller stores the non-visible light image and the color image in the storage medium when the optical image satisfies a predetermined condition. Bildsystem nach Anspruch 1, bei dem die Steuerung virtuell den Bildwinkel des Bildsensors in mehrere Bereiche aufteilt und in dem Fall, dass sich das optische Bild wiederholt von einem Bereich zu einem anderen Bereich bewegt, die Steuerung festlegt, dass das optische Bild der vorbestimmten Bedingung entspricht.An image system according to claim 1, wherein the controller virtually divides the image angle of the image sensor into a plurality of regions, and in the case that the optical image repeatedly moves from one region to another region, the controller determines that the optical image satisfies the predetermined condition , Bildsystem nach Anspruch 1, bei dem in dem Fall, dass das optische Bild durch einen vorbestimmten Punkt in dem Bildwinkel des Bildsensors gelangt, die Steuerung festlegt, dass das optische Bild der vorbestimmten Bedingung entspricht.An image system according to claim 1, wherein in the case that the optical image passes through a predetermined point in the image angle of the image sensor, the controller determines that the optical image corresponds to the predetermined condition. Bildsystem nach Anspruch 1, bei dem in dem Fall, dass das optische Bild eine vorbestimmte Farbe hat, die Steuerung festlegt, dass das optische Bild der vorbestimmten Bedingung entspricht.An image system according to claim 1, wherein in the case that the optical image has a predetermined color, the controller determines that the optical image satisfies the predetermined condition. Bildsystem nach Anspruch 1, bei dem in dem Fall, dass das optische Bild eine vorbestimmte Form hat, die Steuerung bestimmt, dass das optische Bild der vorbestimmten Bedingung entspricht.An image system according to claim 1, wherein in the case that the optical image has a predetermined shape, the controller determines that the optical image satisfies the predetermined condition. Abbildungssystem nach Anspruch 1, bei dem der erste Bildbereich und der zweite Bildbereich auf einem Bildsensor angeordnet sind.The imaging system of claim 1, wherein the first image area and the second image area are disposed on an image sensor. Bildsystem nach Anspruch 1, bei dem der Bildsensor einen ersten Bildsensor und einen zweiten Bildsensor hat, wobei der erste Bildbereich auf dem ersten Bildsensor und der zweite Bildbereich auf dem zweiten Bildsensor angeordnet ist.The image system of claim 1, wherein the image sensor has a first image sensor and a second image sensor, wherein the first image region is disposed on the first image sensor and the second image region is disposed on the second image sensor. Fahrzeugüberwachungssystem, umfassend: einen neben einer Straße positionierten Bildsensor mit einem festen Bildwinkel, einem ersten Bildbereich und einem zweiten, zu dem ersten unterschiedlichen Bildbereich, der ein optisches Bild aufnimmt, das sich auf dem ersten Bildbereich und dem zweiten Bildbereich in einer Richtung bewegt; einen Farbfilter, der auf dem ersten Bildbereich angeordnet ist; einen Filter für nicht sichtbares Licht, der auf dem zweiten Bildbereich angeordnet ist; einen Speicher, der ein mit dem Bildsensor aufgenommenes Bild speichert; und eine Steuerung, die ein Bild aus dem Speicher entnimmt und das entnommene Bild in einem Speichermedium speichert und festlegt, ob das optische Bild eines Fahrzeugs durch einen vorbestimmten Bereich in dem Bildwinkel des Bildsensors gelangt, auf der Basis eines entnommenen Bildes, das auf dem ersten Bildbereich oder dem zweiten Bildbereich aufgenommen wurde; wobei der Bildsensor ein optisches Bild aufnimmt, das durch den Farbfilter gelangt, und ein Farbbild abgibt; und ein optisches Bild aufnimmt, das durch den Filter für nicht sichtbares Licht gelangt, und ein Bild aus nicht sichtbarem Licht abgibt; und wobei in dem Fall, dass die Steuerung festlegt, dass das optische Bild eines Fahrzeugs durch einen vorbestimmten Bereich in dem Bildwinkel des Bildsensors gelangt, die Steuerung ein Bild aus dem Speicher entnimmt, das zu einer vorbestimmten Zeit vor dem einer vorbestimmten Bedingung entsprechenden optischen Bild aufgenommen wurde, und das entnommene Bild in dem Speichermedium speichert.A vehicle monitoring system comprising: an image sensor positioned next to a road having a fixed angle of view, a first image area and a second different image area from the first image area capturing an optical image moving in one direction on the first image area and the second image area; a color filter disposed on the first image area; a non-visible light filter disposed on the second image area; a memory storing an image picked up by the image sensor; and a controller that extracts an image from the memory and stores the extracted image in a storage medium and determines whether the optical image of a vehicle passes through a predetermined area in the image angle of the image sensor based on a extracted image recorded on the image sensor first image area or the second image area was recorded; wherein the image sensor captures an optical image passing through the color filter and outputs a color image; and picking up an optical image passing through the invisible light filter and outputting an image of invisible light; and in the case that the controller determines that the optical image of a vehicle passes through a predetermined range in the image angle of the image sensor, the controller extracts an image from the memory at a predetermined time before the optical image corresponding to a predetermined condition was recorded, and stores the extracted image in the storage medium. Fahrzeugüberwachungssystem, umfassend: einen neben einer Straße positionierten Bildsensor mit einem festen Bildwinkel und einem ersten Bildbereich und einem zweiten, zu dem ersten unterschiedlichen Bildbereich, und der ein optisches Bild aufnimmt, das sich auf dem ersten Bildbereich und dem zweiten Bildbereich in einer Richtung bewegt; einen Farbfilter, der auf dem ersten Bildbereich angeordnet ist; einen Filter für nicht sichtbares Licht, der auf dem zweiten Bildbereich angeordnet ist; einen Speicher, der ein mit dem Bildsensor aufgenommenes Bild speichert; und eine Steuerung, die ein Bild aus dem Speicher entnimmt, das entnommene Bild in einem Speichermedium speichert, virtuell den Bildwinkel des Bildsensors in mehrere Bereiche teilt und festlegt, ob das optische Bild eines Fahrzeugs sich von einem Bildbereich zu einem anderen Bildbereich bewegt, auf der Basis eines Bildes, das auf dem ersten Bildbereich oder dem zweiten Bildbereich aufgenommen wurde; wobei der Bildsensor ein optisches Bild aufnimmt, das durch den Farbfilter gelangt, und ein Farbbild abgibt; wobei der Bildsensor ein optisches Bild aufnimmt, das durch den Filter für nicht sichtbares Licht gelangt, und ein Bild aus nicht sichtbarem Licht abgibt; und wobei in dem Fall, dass die Steuerung festlegt, dass sich das optische Bild eines Fahrzeugs wiederholt von einem Bildbereich zu einem anderen Bildbereich bewegt, die Steuerung aus dem Speicher ein Bild entnimmt, das zu einer vorbestimmten Zeit vor dem einer vorbestimmten Bedingung entsprechenden optischen Bild aufgenommen wurde, und dieses in dem Speichermedium speichert.Vehicle monitoring system comprising: an image sensor positioned next to a road having a fixed image angle and a first image area and a second image area different from the first, and which captures an optical image moving in one direction on the first image area and the second image area; a color filter disposed on the first image area; a non-visible light filter disposed on the second image area; a memory storing an image picked up by the image sensor; and a controller that extracts an image from the memory, stores the extracted image in a storage medium, virtually divides the image angle of the image sensor into a plurality of regions, and determines whether the optical image of a vehicle moves from one image area to another image area on the base an image taken on the first image area or the second image area; wherein the image sensor captures an optical image passing through the color filter and outputs a color image; the image sensor capturing an optical image passing through the non-visible light filter and outputting an image of invisible light; and in the case that the controller determines that the optical image of a vehicle repeatedly moves from one image area to another image area, the controller extracts from the memory an image which at a predetermined time precedes the optical image corresponding to a predetermined condition was recorded, and stores this in the storage medium. Bildgerät umfassend: einen Bildsensor mit einem ersten Bildbereich und einem zweiten, zu dem ersten unterschiedlichen Bildbereich, der ein optisches Bild aufnimmt, das sich auf dem ersten Bildbereich und dem zweiten Bildbereich in einer Richtung bewegt; einen Farbfilter, der auf dem ersten Bildbereich angeordnet ist; und einen Filter für nicht sichtbares Licht, der auf dem zweiten Bildbereich angeordnet ist.Image device comprising: an image sensor having a first image area and a second image area different from the first, which captures an optical image that moves in one direction on the first image area and the second image area; a color filter disposed on the first image area; and a filter for invisible light, which is arranged on the second image area. Bildgerät nach Anspruch 13, bei dem der Bildsensor ein optisches Bild aufnimmt, das sich von dem ersten Bildbereich zu dem zweiten Bildbereich bewegt.The imager of claim 13, wherein the image sensor captures an optical image that moves from the first image area to the second image area. Bildgerät nach Anspruch 13, bei dem der Bildsensor rechteckförmig und in dem Bildgerät so konfiguriert ist, dass die Längsrichtung des Bildsensors parallel zu der Schwerkraftrichtung liegt, der Filter für nicht sichtbares Licht auf einem Lichtweg angeordnet ist, der in Richtung der Schwerkraft zu der oberen Hälfte des Bildsensors führt, der Farbfilter auf einem Lichtweg angeordnet ist, der in Richtung der Schwerkraft zu der unteren Hälfte des Bildsensors führt, die obere Hälfte des Bildsensors ein optisches Bild zu einem Bild aus nicht sichtbarem Licht umsetzt, und die untere Hälfte des Bildsensors ein optisches Bild zu einem Farbbild umsetzt.The image device according to claim 13, wherein the image sensor is rectangular and configured in the image device such that the longitudinal direction of the image sensor is parallel to the direction of gravity. the invisible light filter is disposed on a light path leading in the direction of gravity to the upper half of the image sensor, the color filter is arranged on a light path which leads in the direction of gravity to the lower half of the image sensor, the upper half of the image sensor converts an optical image into a non-visible light image, and the lower half of the image sensor converts an optical image into a color image. Bildgerät nach Anspruch 13, ferner umfassend einen halbdurchlässigen Spiegel auf einem Lichtweg, der von einem Objekt zu dem Bildsensor führt, wobei der Bildsensor einen Farbbildsensor hat, der in dem ersten Bildbereich angeordnet ist, sowie einen Bildsensor für nicht sichtbares Licht hat, der in dem zweiten Bildbereich angeordnet ist, und wobei der halbdurchlässige Spiegel die ferne Seite eines Objektbildes auf den Farbbildsensor reflektiert und die nahe Seite eines Objekts zu dem Bildsensor für nicht sichtbares Licht durchlässt.The imager of claim 13, further comprising a semi-transparent mirror on an optical path leading from an object to the image sensor, the image sensor having a color image sensor disposed in the first image area and having a non-visible light image sensor disposed in the first image area second image area, and wherein the semitransparent mirror reflects the far side of an object image onto the color image sensor and transmits the near side of an object to the non-visible light image sensor. Bildgerät nach Anspruch 16, ferner umfassend eine fotografische Optik, die ein Objektbild zu dem Bildsensor leitet, wobei der Farbbildsensor in dem Bildgerät so angeordnet ist, dass seine Bildfläche parallel zu der optischen Achse der fotografischen Optik liegt, und der Bildsensor für nicht sichtbares Licht in dem Bildgerät so angeordnet ist, dass seine Bildfläche orthogonal zu der optischen Achse der fotografischen Optik liegt.The imager of claim 16, further comprising photographic optics directing an object image to the image sensor, wherein the color image sensor in the imager is arranged so that its image surface is parallel to the optical axis of the photographic optic, and the non-visible light image sensor the image device is arranged so that its image surface is orthogonal to the optical axis of the photographic optics. Bildgerät nach Anspruch 13, bei dem der Farbfilter Infrarotlicht nicht durchlässt.A picture device according to claim 13, wherein the color filter does not transmit infrared light. Bildgerät nach Anspruch 13, bei dem der Filter für nicht sichtbares Licht sichtbares Licht nicht durchlässt.A display apparatus according to claim 13, wherein the non-visible light filter does not transmit visible light. Bildgerät nach Anspruch 13, ferner umfassend einen Polarisator, der auf dem Lichtweg angeordnet ist, welcher sich durch den Filter für nicht sichtbares Licht erstreckt.The imager of claim 13, further comprising a polarizer disposed on the light path extending through the non-visible light filter. Bildgerät nach Anspruch 20, bei dem die Lichtweglänge des Farbfilters mit der Lichtweglänge des Filters für nicht sichtbares Licht und des Polarisators übereinstimmt. A display apparatus according to claim 20, wherein the light path length of the color filter coincides with the light path length of the non-visible light filter and the polarizer. Bildgerät nach Anspruch 20, ferner umfassend einen Filter zur Lichtweglängeneinstellung, der auf dem Lichtweg angeordnet ist, welcher durch den Farbfilter läuft, und wobei die Lichtweglänge des Filters zur Lichtweglängeneinstellung mit der Lichtweglänge des Polarisators übereinstimmt.The image apparatus according to claim 20, further comprising an optical path length adjustment filter disposed on the optical path passing through the color filter, and wherein the optical path length of the optical path length adjustment filter coincides with the optical path length of the polarizer. Bildgerät nach Anspruch 22, bei dem der Filter zur Lichtweglängeneinstellung zwischen dem Farbfilter und dem Bildsensor angeordnet ist.A display apparatus according to claim 22, wherein said light path length adjustment filter is disposed between said color filter and said image sensor. Bildgerät nach Anspruch 13, ferner umfassend eine fotografische Optik, die eine Pan-Fokus-Optik ist, welche ein Objektbild auf den Bildsensor leitet.The imager of claim 13, further comprising a photographic optic that is a pan-focus optic that directs an object image onto the image sensor. Bildgerät, umfassend: einen Farbbildsensor, der sichtbares Licht aufnimmt; einen Bildsensor für nicht sichtbares Licht, der nicht sichtbares Licht aufnimmt; und einen Strahlteiler, der auf einem Lichtweg von einem Objekt zu dem Farbbildsensor und dem Bildsensor für nicht sichtbares Licht angeordnet ist und eine beschichtete Oberfläche hat, die sichtbares Licht reflektiert und nicht sichtbares Licht durchlässt; wobei der Farbbildsensor und der Bildsensor für nicht sichtbares Licht ein optisches Bild aufnehmen, das sich von dem Farbbildsensor zu dem Bildsensor für nicht sichtbares Licht bewegt und einem Objekt entspricht, das sich von einer fernen Seite zu einer nahen Seite bewegt.Image device comprising: a color image sensor that receives visible light; an image sensor for invisible light that receives non-visible light; and a beam splitter disposed on a light path from an object to the color image sensor and the non-visible light image sensor and having a coated surface that reflects visible light and transmits non-visible light; wherein the color image sensor and the nonvisible light image sensor receive an optical image that moves from the color image sensor to the nonvisible light image sensor and corresponds to an object that moves from a far side to a near side. Bildgerät nach Anspruch 25, bei dem der Strahlteiler durch verbundene Prismen gebildet ist, und bei dem die beschichtete Fläche auf einer der verbundenen Flächen der Prismen vorgesehen ist.The imager of claim 25, wherein the beam splitter is formed by connected prisms, and wherein the coated surface is provided on one of the joined surfaces of the prisms. Bildgerät nach Anspruch 25, bei dem der Farbbildsensor in dem Bildgerät so angeordnet ist, dass seine Bildfläche parallel zu dem optischen Weg liegt, und der Bildsensor für nicht sichtbares Licht in dem Bildgerät so vorgesehen ist, dass seine Bildfläche orthogonal zu dem optischen Weg angeordnet ist.The image device according to claim 25, wherein the color image sensor is arranged in the image device so that its image surface is parallel to the optical path, and the non-visible light image sensor is provided in the image device so that its image surface is orthogonal to the optical path , Bildgerät nach Anspruch 25, ferner umfassend eine fotografische Pan-Fokus-Optik, die ein Objektbild zu dem Bildsensor leitet.The imager of claim 25, further comprising a photographic pan-focus optic directing an object image to the image sensor. Bildgerät nach Anspruch 25, ferner umfassend einen Polarisator, der auf dem Lichtweg angeordnet ist, welcher von dem Strahlteiler zu dem Bildsensor für nicht sichtbares Licht führt.The imager of claim 25, further comprising a polarizer disposed on the light path leading from the beam splitter to the non-visible light image sensor. Bildgerät nach Anspruch 25, ferner umfassend einen Filter zur Lichtweglängeneinstellung, der auf dem Lichtweg von dem Strahlteiler zu dem Farbbildsensor angeordnet ist, wobei der Filter zur Lichtweglängeneinstellung die Lichtweglänge von der beschichteten Fläche des Farbbildsensors und die Lichtweglänge von der beschichteten Fläche des Bildsensors für nicht sichtbares Licht so einstellt, dass beide Längen übereinstimmen.The image apparatus of claim 25, further comprising an optical path length adjustment filter disposed on the optical path from the beam splitter to the color image sensor, wherein the optical path length adjustment filter is the optical path length of the coated area of the color image sensor and the optical path length of the non-visible area of the coated area of the image sensor Adjust light so that both lengths match. Bildgerät nach Anspruch 25, bei dem das nicht sichtbare Licht Nah-Infrarotlicht ist.A display apparatus according to claim 25, wherein the non-visible light is near-infrared light.
DE102010038056A 2009-10-08 2010-10-08 Image device and image system for imaging a moving object Withdrawn DE102010038056A1 (en)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP2009234303A JP2011081657A (en) 2009-10-08 2009-10-08 Imaging system
JP2009-234303 2009-10-08
JP2009234339A JP2011082855A (en) 2009-10-08 2009-10-08 Imaging apparatus
JP2009-234340 2009-10-08
JP2009-234339 2009-10-08
JP2009234340A JP2011082856A (en) 2009-10-08 2009-10-08 Imaging apparatus

Publications (2)

Publication Number Publication Date
DE102010038056A1 true DE102010038056A1 (en) 2011-05-26
DE102010038056A8 DE102010038056A8 (en) 2011-11-10

Family

ID=43304260

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102010038056A Withdrawn DE102010038056A1 (en) 2009-10-08 2010-10-08 Image device and image system for imaging a moving object

Country Status (3)

Country Link
CN (1) CN102088553A (en)
DE (1) DE102010038056A1 (en)
GB (1) GB2474557A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102014206677A1 (en) * 2014-04-07 2015-10-08 Robert Bosch Gmbh Camera system and method for detecting an environment of a vehicle

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103609102B (en) 2011-06-15 2016-09-28 微软技术许可有限责任公司 High resolution multispectral image capture
CN104159084A (en) * 2014-08-21 2014-11-19 中南林业科技大学 Monitoring method based on novel monitoring lens and dual image sensors
US9781361B2 (en) 2015-09-01 2017-10-03 Delphi Technologies, Inc. Integrated camera, ambient light detection, and rain sensor assembly
JPWO2017217053A1 (en) * 2016-06-17 2019-01-31 シャープ株式会社 Image pickup apparatus and filter
EP3502775A1 (en) * 2017-12-19 2019-06-26 DURA Operating, LLC A visual recognition system of a vehicle, and a method for implementing such system
CN110189540A (en) * 2019-05-19 2019-08-30 复旦大学 Itellectualized uptown Outdoor Parking total management system
CN113053138A (en) * 2020-11-13 2021-06-29 泰州无印广告传媒有限公司 Annular LED display array driving system and corresponding terminal

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0238997A (en) 1988-06-16 1990-02-08 Cie Generale Des Matieres Nucleares (Cogema) Separation of uranium and plutonium from nuclear fuel regeneration treatment solution
JP2001257923A (en) 2000-03-14 2001-09-21 Denso Corp Image pickup device
JP2009234339A (en) 2008-03-26 2009-10-15 Stanley Electric Co Ltd Turn signal lamp for vehicles, and vehicular turn signal device
JP2009234340A (en) 2008-03-26 2009-10-15 Denso Corp Air-conditioner control method and air-conditioner control device
JP2009234303A (en) 2008-03-26 2009-10-15 Calsonic Kansei Corp Radiator core support

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7023913B1 (en) * 2000-06-14 2006-04-04 Monroe David A Digital security multimedia sensor
US7298484B2 (en) * 2004-03-10 2007-11-20 Raytheon Company Dual-band sensor system utilizing a wavelength-selective beamsplitter
JP2006217441A (en) * 2005-02-07 2006-08-17 Sanyo Electric Co Ltd Color signal processing method
JP2007150826A (en) * 2005-11-29 2007-06-14 Alpine Electronics Inc Imaging apparatus and vehicle peripheral image providing apparatus

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0238997A (en) 1988-06-16 1990-02-08 Cie Generale Des Matieres Nucleares (Cogema) Separation of uranium and plutonium from nuclear fuel regeneration treatment solution
JP2001257923A (en) 2000-03-14 2001-09-21 Denso Corp Image pickup device
JP2009234339A (en) 2008-03-26 2009-10-15 Stanley Electric Co Ltd Turn signal lamp for vehicles, and vehicular turn signal device
JP2009234340A (en) 2008-03-26 2009-10-15 Denso Corp Air-conditioner control method and air-conditioner control device
JP2009234303A (en) 2008-03-26 2009-10-15 Calsonic Kansei Corp Radiator core support

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102014206677A1 (en) * 2014-04-07 2015-10-08 Robert Bosch Gmbh Camera system and method for detecting an environment of a vehicle

Also Published As

Publication number Publication date
CN102088553A (en) 2011-06-08
DE102010038056A8 (en) 2011-11-10
GB201016975D0 (en) 2010-11-24
GB2474557A (en) 2011-04-20

Similar Documents

Publication Publication Date Title
DE102010038056A1 (en) Image device and image system for imaging a moving object
DE102018105301B4 (en) Camera and method for capturing image data
DE60300994T2 (en) Image pickup device with focusing device and exposure system
EP1589484B1 (en) Method for detecting and/or tracking objects
DE102013003778A1 (en) FAST AUTOFOCUS TECHNOLOGIES FOR DIGITAL CAMERAS
EP2690459B1 (en) Device and method for identifying and documenting at least one object passing through an irradiation field
CN106454090A (en) Automatic focusing method and system based on depth camera
WO2010043252A1 (en) Method and system for determining a vehicle speed
DE69829035T2 (en) Optical device with focus adjustment device and focus control circuit
DE102010023108A1 (en) Projector with automatic focusing and imaging process
DE102019133642A1 (en) DIGITAL IMAGING SYSTEM INCLUDING OPTICAL PLENOPTIC DEVICE AND IMAGE DATA PROCESSING METHOD FOR DETECTING VEHICLE OBSTACLES AND GESTURES
DE10154861A1 (en) Localizing system for objects uses transmitter for pulsed emission of laser beams and receiver with sensor to pick up reflected beam pulses and to analyze them regarding their execution time
DE102018220427A1 (en) camera module
EP3147700B1 (en) Method and device to increase the field of view of a camera and camera provided therewith
DE102016118192A1 (en) Focus detection device, prediction method and associated storage medium
WO2006015906A1 (en) Optical module for a driver assistance system
EP3286690B1 (en) Identification document, identification device and corresponding methods
DE602004006752T2 (en) Autofocus System
DE3245675A1 (en) FOCUS DETECTOR
DE60026086T2 (en) Focus detecting device and apparatus using the same
DE102014224903A1 (en) Optical environment sensor for vehicles
EP3724601B1 (en) Distance determination based on different depth of field areas with different focus settings of an objective lens
DE102013020598B4 (en) Magnifying optical device
DE102020214802A1 (en) Method and device for taking infrared and color images
DE102010056406A1 (en) Method for the secure identification of a vehicle detected by a radiation sensor in an image recording

Legal Events

Date Code Title Description
R082 Change of representative

Representative=s name: SCHAUMBURG, THOENES, THURN, LANDSKRON, ECKERT, DE

R081 Change of applicant/patentee

Owner name: PENTAX RICOH IMAGING COMPANY, LTD., JP

Free format text: FORMER OWNER: HOYA CORP., TOKYO, JP

Effective date: 20120529

R082 Change of representative

Representative=s name: PATENTANWAELTE SCHAUMBURG, THOENES, THURN, LAN, DE

Effective date: 20120529

R120 Application withdrawn or ip right abandoned

Effective date: 20130919