DE102015200589B4 - Verbessertes videobasiertes System zur automatisierten Erkennung von Verstössen durch Parken in zweiter Reihe - Google Patents

Verbessertes videobasiertes System zur automatisierten Erkennung von Verstössen durch Parken in zweiter Reihe Download PDF

Info

Publication number
DE102015200589B4
DE102015200589B4 DE102015200589.5A DE102015200589A DE102015200589B4 DE 102015200589 B4 DE102015200589 B4 DE 102015200589B4 DE 102015200589 A DE102015200589 A DE 102015200589A DE 102015200589 B4 DE102015200589 B4 DE 102015200589B4
Authority
DE
Germany
Prior art keywords
vehicle
double
stationary
parked
parking
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
DE102015200589.5A
Other languages
English (en)
Other versions
DE102015200589A1 (de
Inventor
Wencheng Wu
Edgar A. Bernal
Yao Rong Wang
Zhigang Fan
Robert P. Loce
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Conduent Business Services LLC
Original Assignee
Conduent Business Services LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Conduent Business Services LLC filed Critical Conduent Business Services LLC
Publication of DE102015200589A1 publication Critical patent/DE102015200589A1/de
Application granted granted Critical
Publication of DE102015200589B4 publication Critical patent/DE102015200589B4/de
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G06V20/54Surveillance or monitoring of activities, e.g. for recognising suspicious objects of traffic, e.g. cars on the road, trains or boats
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/168Driving aids for parking, e.g. acoustic or visual feedback on parking space
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/22Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/22Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
    • G06V10/23Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition based on positionally close patterns or neighbourhood relationships
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/586Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of parking space
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0108Measuring and analyzing of parameters relative to traffic conditions based on the source of data
    • G08G1/0116Measuring and analyzing of parameters relative to traffic conditions based on the source of data from roadside infrastructure, e.g. beacons
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/14Traffic control systems for road vehicles indicating individual free spaces in parking areas
    • G08G1/145Traffic control systems for road vehicles indicating individual free spaces in parking areas where the indication depends on the parking areas
    • G08G1/147Traffic control systems for road vehicles indicating individual free spaces in parking areas where the indication depends on the parking areas where the parking area is within an open public zone, e.g. city centre
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source

Abstract

System zum Erfassen eines in zweiter Reihe parkenden Fahrzeugs, wobei das System Folgendes umfasst:eine Bestätigungsvorrichtung für Parken in zweiter Reihe, das einen Speicher zum Speichern von Modulen umfasst, umfassend:ein Abschnittsbestimmungsmodul zum Identifizieren eines Parkabschnitts und eines Verbotsabschnitts, der mindestens teilweise den Parkabschnitt umgibt, in einer Folge von Bildern, die von einer Bilderfassungsvorrichtung empfangen wird, die den Parkabschnitt überwacht;ein Fahrzeug-Erfassungsmodul zum Erfassen eines stationären, mutmaßlich in dem Verbotsabschnitt in zweiter Reihe parkenden Fahrzeugs;ein Fahrzeug-Klassifizierungsmodul zum:Feststellen des Eintretens eines Ereignisses in Bezug auf das stationäre, mutmaßlich in zweiter Reihe parkende Fahrzeug,Klassifizieren, in Reaktion auf das festgestellte Eintreten des Ereignisses, des stationären, mutmaßlich in zweiter Reihe parkenden Fahrzeugs als ein in zweiter Reihe parkendes bzw. ein nicht in zweiter Reihe parkendes Fahrzeug;Erfassen, ob die Warnblinkanlage an dem stationären, mutmaßlich in zweiter Reihe parkenden Fahrzeug eingeschaltet ist; undKlassifizieren, in Reaktion auf die eingeschaltete Warnblinkanlage an dem stationären, mutmaßlich in zweiter Reihe parkenden Fahrzeug, des stationären, mutmaßlich in zweiter Reihe parkenden Fahrzeugs als in zweiter Reihe parkend; undeinen Prozessor in Kommunikation mit dem Speicher und zum Steuern der Module.

Description

  • HINTERGRUND
  • Die vorliegende Offenbarung betrifft ein System und ein Verfahren zum Erfassen von Verstößen durch Parken in zweiter Reihe mittels Bestätigen des Eintretens eines Ereignisses in Bezug zu einem erfassten Fahrzeug, das in einem Verbotsabschnitt geparkt wird. Es ist jedoch anzunehmen, dass die vorliegenden beispielhaften Ausführungsformen auch für andere, ähnliche Anwendungen abgewandelt werden können.
  • Gemeinden regulieren das Parken in bestimmten Bereichen aus Gründen der allgemeinen Sicherheit und des erleichterten Zugangs. Zonen, die das Parken und/oder Halten von Fahrzeugen untersagen, sind als Sperrzonen gekennzeichnet. Parken in zweiter Reihe ist als Parken eines Fahrzeugs längs neben einem anderen Fahrzeug definiert, das bereits am Straßenrand geparkt ist, und was den Verkehrsfluss erheblich beeinträchtigen kann.
  • Übertretungen der Bestimmungen zum Parken in zweiter Reihe zählen zu den am häufigsten auftretenden Parkverstößen. In größeren Gemeinden kann etwa ein Drittel der Verstöße in Sperrzonen auftreten. Erhebliche Strafen für die Gesetzesübertreter können deutliche Einnahmen für Gemeinden erzeugen. Da Parken in zweiter Reihe jedoch typischerweise manuell geahndet wird, üblicherweise durch Polizeibeamte, ist das Feststellen von Sperrzonen-Verstößen arbeitsintensiv und kann zu Gewinneinbußen führen, wenn Verstöße unerkannt bleiben. In einem Ansatz, Kosten zu reduzieren und die Effizienz zu verbessern, loten Gemeinden die Verwendung neuer Technologien zur automatischen Durchsetzung von Sperrzonen aus.
  • Nicht-stereoskopische Videokameras wurden vorgeschlagen, um das Parken auf der Straße zu überwachen, wo eine Videokamera in der Nähe eines Parkabschnitts den gesamten Bereich überwachen und nachverfolgen kann. Wartung von Videokameras ist auch weniger störend für den Straßenverkehr. Ein Fahrzeug wird unter Verwendung eines Hintergrundsubtraktionsverfahrens in einer definierten Sperrzone lokalisiert. Dann wird basierend auf einer Anzahl von Bildern, die das erfasste Fahrzeug einschließen, die Dauer berechnet, in der das erfasste Fahrzeug in der Sperrzone stationär geblieben ist. Wenn die Dauer einen Grenzwert erreicht oder überschreitet, wird das stationäre Fahrzeug als in zweiter Reihe parkend klassifiziert.
  • Es besteht ein Bedarf für ein System und ein Verfahren, das Videodaten zur Erkennung von freiwilligen Verstößen durch Parken in zweiter Reihe verwendet. Insbesondere sind ein System und ein Verfahren wünschenswert, die das Auftreten eines weiteren relevanten Ereignisses mit Bezug zu einem erkannten Fahrzeug zu analysieren.
  • Systeme zum Erfassen eines in zweiter Reihe parkenden Fahrzeugs sind im Stand der Technik beispielsweise aus den Patentanmeldeschriften US 2013/0266185 A1 , US 2013/0266190 A1 und US 2014/0036076 A1 bekannt.
  • Die vorliegende Erfindung wird durch Anspruch 1 definiert.
  • Die vorliegende Offenbarung lehrt ein Verfahren zum Erfassen eines in zweiter Reihe parkenden Fahrzeugs. Eine Ausführungsform des Verfahrens umfasst das Identifizieren eines Parkabschnitts in Videodaten, die von einer Bilderfassungsvorrichtung empfangen werden, die den Parkabschnitt überwacht. Das Verfahren umfasst das Definieren eines Verbotsabschnitts, der mindestens teilweise den Parkabschnitt umgibt. Das Verfahren umfasst das Erfassen eines stationären, in zweiter Reihe parkenden Kandidatenfahrzeugs in dem Verbotsabschnitt. Das Verfahren umfasst das Feststellen eines eingetretenen Ereignisses in Bezug auf das stationäre Fahrzeug. In Reaktion auf das festgestellte Eintreten des Ereignisses umfasst das Verfahren das Klassifizieren des stationären Fahrzeugs als eines, das in zweiter Reihe parkt bzw. eines, das nicht in zweiter Reihe parkt.
  • Die Offenbarung lehrt auch ein System zum Erfassen eines in zweiter Reihe parkenden Fahrzeugs. Das System umfasst eine Vorrichtung zum Bestätigen von Parken in zweiter Reihe, das einen Speicher zum Speichern eines Abschnittsbestimmungsmoduls, eines Fahrzeug-Erfassungsmoduls und eines Fahrzeug-Klassifizierungsmoduls umfasst. Ein Prozessor kommuniziert mit dem Speicher und steuert die Ausführung der Module. Das Abschnittsbestimmungsmodul dient dem Identifizieren eines Parkabschnitts und eines Verbotsabschnitts, der mindestens teilweise den Parkabschnitt umfasst, in einer Bildfolge, die von einer Bilderfassungsvorrichtung empfangen wurde, die den Parkabschnitt überwacht. Das Fahrzeug-Erfassungsmodul dient dem Erfassen eines stationären, in zweiter Reihe parkenden Kandidatenfahrzeugs in dem Verbotsabschnitt. Das Fahrzeug-Klassifizierungsmodul arbeitet zum Bestimmen eines eingetretenen Ereignisses in Bezug auf das stationäre Fahrzeug. In Reaktion auf das festgestellte Eintreten des Ereignisses klassifiziert das Fahrzeug-Klassifizierungsmodul das stationäre Fahrzeug als eines, das in zweiter Reihe parkt bzw. eines, das nicht in zweiter Reihe parkt.
  • Figurenliste
    • 1A zeigt ein Beispiel eines Parkabschnitts.
    • 1B zeigt ein Beispiel eines Verbotsabschnitts.
    • 2 ist eine Übersicht über ein Verfahren zum Bestimmen eines Parkverstoßes.
    • 3 ist eine schematische Darstellung eines Systems zum Erfassen von Parken in zweiter Reihe 100 in einer beispielhaften Ausführungsform.
    • 4 ist ein ausführliches Flussdiagramm, das das Verfahren zum Erfassen eines Verstoßes durch Parken in zweiter Reihe beschreibt.
    • 5 zeigt ein Beispiel für ein Fahrzeug, das nachverfolgt wird, während es eine Sperrzone durchquert.
    • 6A zeigt ein Verfahren zur Bestätigung eines Verstoßes eines Kandidatenfahrzeugs durch Parken in zweiter Reihe basierend auf Verkehrssignalen und -zeichen.
    • 6B zeigt ein Verfahren zur Bestätigung eines Verstoßes eines Kandidatenfahrzeugs durch Parken in zweiter Reihe basierend auf Warnblinkleuchten.
    • 6C zeigt ein Verfahren zur Bestätigung eines Verstoßes eines Kandidatenfahrzeugs durch Parken in zweiter Reihe basierend auf Verkehrsmustern.
    • 7A zeigt ein Beispielbild, auf dem Warnblinkleuchten erfasst und als eingeschaltet an einem Kandidatenfahrzeug identifiziert wurden.
    • 7B zeigt ein Beispielbild, auf dem eine Bewegungsbahn ein sich bewegendes Fahrzeug anzeigt, das ein Kandidatenfahrzeug umfährt.
    • 8A zeigt ein Verfahren zum Erkennen eines stationären Fahrzeugs in einer Sperrzone oder in einem Parkabschnitt.
    • 8B zeigt ein Verfahren zum Erkennen eines stationären Fahrzeugs in einer Fahrspur-Sperrzone.
  • AUSFÜHRLICHE BESCHREIBUNG
  • Die vorliegende Offenbarung betrifft ein videobasiertes Verfahren und System zum Erfassen von Verstößen durch Parken in zweiter Reihe mittels Feststellen eines eingetretenen Ereignisses in Bezug auf ein erfasstes Fahrzeug, das in einer Sperrzone parkt. Das System umfasst eine Bilderfassungsvorrichtung, die eine Sperrzone in der Nähe oder in der Nachbarschaft zu einem Parkabschnitt überwacht und Videodaten verarbeitet oder Videodaten an einen zentralen Prozessor überträgt, um zu erfassen, ob ein stationäres, mutmaßlich in zweiter Reihe parkendes Fahrzeug in der Sperrzone in zweiter Reihe parkt.
  • 1A und 1B zeigen ein beispielhaftes Szenario, in dem die vorliegende Offenbarung angewendet werden kann, um zu erfassen, ob ein Fahrzeug in einem Sperrzonen-Verbotsabschnitt in zweiter Reihe parkt. 1A zeigt einen beispielhaften Parkabschnitt, der als virtuelle Abgrenzung P überwacht wird. 1B zeigt einen beispielhaften Verbotsabschnitt, der als virtuelle Abgrenzung E überwacht wird. In dem dargestellten Beispiel ist der Verbotsabschnitt eine Fahrspur, die sich neben der Parkspur befindet. Wenn der Parkabschnitt über eine Strecke voll ist und keine Parkplätze verfügbar sind, können Fahrzeuge versucht sein, vorübergehend in der Fahrspur in der Nähe der oder neben den geparkten Fahrzeugen zu parken. Dessen ungeachtet können Fahrzeuge auch aus anderen Bequemlichkeitsgründen unabhängig von der Belegung des Parkabschnitts versucht sein, in zweiter Reihe zu parken. In den dargestellten Ausführungsformen kann ein Verstoß in der Sperrzone auch auftreten, wenn ein Fahrzeug als in der Sperrzone neben einem Parkabschnitt in zweiter Reihe parkend erkannt wird, unabhängig davon, ob der Parkabschnitt belegt ist oder nicht. Weiterhin muss die Sperrzone nicht neben einem Parkabschnitt angeordnet sind, sondern kann neben einer Einfahrt oder einem Hydranten oder einer Spur, die zum Parken in bestimmten Zeiten und für den Verkehr in anderen Zeiten, wie Hauptverkehrszeit etc., vorgesehen ist. Ein Fahrzeug parkt in einer Sperrzone, wo es als in einem Verbotsabschnitt haltend erkannt wird, der nicht für geparkte Fahrzeuge vorgesehen ist.
  • Von der Bilderfassungsvorrichtung bereitgestellte Bilder werden analysiert, um die Fahrzeuge zu identifizieren, die in dem Verbotsabschnitt in zweiter Reihe parken. Die Verarbeitung kann auf eingebauter Kamera-Hardware oder in einem zentralen Prozessor erfolgen. Ein Teil dieser Analyse umfasst eine Prüfoperation, um zu bestimmen, ob ein mutmaßlich in zweiter Reihe parkendes Fahrzeug tatsächlich in zweiter Reihe parkt und/oder einen Verstoß begeht. 2 ist eine Übersicht der Analyse. Der Prozess beginnt bei S02. Ein Video wird von einem interessierenden Bereich bei S04 erfasst. In jedem analysierten Bild sind die Orte des Parkabschnitts und des Verbotsabschnitts bei S06 definiert. Im Wesentlichen wird der Verbotsabschnitt in bestimmten Ausführungsformen definiert, wobei der Ort des Parkabschnitts ebenfalls in anderen Ausführungsformen definiert wird, wo dies relevant ist. Pixel werden bei S08 analysiert, um festzustellen, ob ein Fahrzeug in dem Verbotsabschnitt angeordnet und stationär ist. Wo der Parkabschnitt gleichzeitig überwacht wird, kann das System bei S09 optional Parkplatzbelegungsinformationen für den Ort des Parkabschnitts erhalten.
  • Die Zeitdauer, über die das erfasste Fahrzeug stationär bleibt, wird bei S10 durch Zählen der Bildanzahl abgeschätzt, in denen sich das erfasste Fahrzeug nicht bewegt. Wenn das Fahrzeug in dem Verbotsabschnitt über eine Zeitdauer parkt, die ein zuvor festgelegten Grenzwert erreicht oder überschreitet, wird das Fahrzeug bei S12 als Kandidaten für einen Verstoß durch Parken in zweiter Reihe gekennzeichnet. Hinweise für das Eintreten eines Ereignisses und ob das Fahrzeug eine Ausnahmegenehmigung besitzt oder nicht, werden bei S14 kontrolliert, um zu bestätigen, dass der Kandidat für einen Verstoß durch Parken in zweiter Reihe tatsächlich in zweiter Reihe parkt. Dieses Ereignis kann z.B. das Erfassen von eingeschalteter Warnblinkleuchten des stationären, mutmaßlich in zweiter Reihe parkenden Fahrzeugs oder von vor dem Fahrzeug anhaltenden Objekten umfassen. Dieses Ereignis kann eine Analyse von Verkehrsmustem um das stationäre Fahrzeug einschließen. Es werden z.B. sich bewegende Fahrzeuge in der Szene nachverfolgt. Wenn ein Ereignis erfasst wird, wird bei S16 eine Verstoßmeldung ausgegeben. Andere Bedingungen können erforderlich sein, bevor eine Verstoßmeldung ausgelöst wird. Der Verstoß kann anschließend bei S18 an eine Vollstreckungseinheit berichtet werden. Beispiele für Ausnahmen umfassen ein Einsatzfahrzeug, identifiziert durch Einsatzbeleuchtung, schriftliche Kennzeichnung oder andere Fahrzeug-Klassifizierungstechniken. In erwogenen Ausführungsformen können Warnblinkleuchten das Eintreten eines Verstoßes anzeigen, wohingegen Einsatzbeleuchtung das Vorliegen einer Ausnahme anzeigen kann.
  • Es ist zu beachten, dass in dem Fall, bei dem der Parkabschnitt überwacht wird (d.h. S09 wird ausgeführt), die erhaltenen Informationen zur Parkplatzbelegung verwendet werden können, um die Verarbeitung bei S10 und/oder S14 anzupassen. Der Timer bei S10 kann z.B. nur starten, wenn die Parkplatzbelegung des Parkabschnitts neben der Verbotszone voll ist. In einem weiteren Beispiel kann die Parkplatzbelegung des Parkabschnitts neben dem oder in der Nähe des stationären, mutmaßlich in zweiter Reihe parkenden Fahrzeugs bei S14 verwendet werden, um die Zuverlässigkeit anzupassen und/oder zu bestätigen, dass das Fahrzeug tatsächlich in zweiter Reihe parkt. Das Verfahren endet bei S20.
  • 3 ist eine schematische Darstellung eines Systems zur Bestimmung von Parken in zweiter Reihe 100 in einer beispielhaften Ausführungsform. Das System umfasst eine Vorrichtung zur Bestätigung von Parken in zweiter Reihe 102 („Bestätigungsvorrichtung“), eine Bilderfassungsvorrichtung 104 und eine Speichervorrichtung 106, die über Kommunikationsschnittstellen, hier als Netz bezeichnet, miteinander verbunden sein können. In einer Ausführungsform kann das System 100 weiterhin mit einer Nutzervorrichtung 108 kommunizieren. Diese Komponenten werden nachstehend ausführlicher beschrieben.
  • Die in 3 dargestellte Bestätigungsvorrichtung 102 umfasst eine Steuerung 110, die Teil der Bestätigungsvorrichtung 102 oder damit verbunden ist. Die beispielhafte Steuerung 110 ist zur Steuerung einer Analyse von Videodaten, die von dem System 100 empfangen wurden, durch Klassifizieren der Pixel in jedem statischen Bild ausgelegt. Die Steuerung 110 umfasst einen Prozessor 112, der den Gesamtbetrieb der Bestätigungsvorrichtung 102 durch Ausführen von Verarbeitungsbefehlen steuert, die in dem Speicher 114 gespeichert sind, der an den Prozessor 112 angeschlossen ist.
  • Der Speicher 114 kann einen beliebigen Typ eines materiellen, computerlesbaren Mediums darstellen, wie einen Random Access Memory (RAM), Read Only Memory (ROM), eine Magnetplatte oder ein Magnetband, eine optische Platte, einen Flash-Speicher oder einen holographischen Speicher. In einer Ausführungsform umfasst der Speicher 114 eine Kombination aus Random Access Memory und Read Only Memory. Der Digitalprozessor 112 kann verschieden ausgeführt sein, wie als einkerniger Prozessor, zweikemiger Prozessor (oder allgemeiner als mehrkerniger Prozessor), als digitaler Prozessor und kooperierender mathematischer Koprozessor, als digitaler Controller oder Ähnliches. Der Digitalprozessor führt, zusätzlich zur Betriebssteuerung der Bestätigungsvorrichtung 102, die in Speicher 114 gespeicherten Befehle zum Ausführen der in den 2, 4, 6A-6C und 8A-8B ausgeführten Teile des Verfahrens aus. In einigen Ausführungsformen können Prozessor 112 und Speicher 114 auf einem einzigen Chip kombiniert sein.
  • Die Bestätigungsvorrichtung 102 kann in einer vernetzten Vorrichtung ausgeführt sein, wie der Bilderfassungsvorrichtung 104, obwohl auch erwogen wird, dass die Bestätigungsvorrichtung 102 an einem anderen Ort in einem Netz angeordnet ist, der mit dem System 100 verbunden ist, wie einem zentralen Server, einem Netzcomputer oder Ähnlichem, oder über das Netz verteilt ist oder anderweitig dafür zugänglich ist. Die hier offenbarten Phasen der Videodatenanalysen und des Erfassens von Parken in zweiter Reihe werden von einem Prozessor 112 gemäß der in dem Speicher 114 enthaltenen Befehle ausgeführt. Insbesondere speichert der Speicher 114 ein Videopuffermodul 116, das Videodaten eines interessierenden Parkabschnitts erfasst; ein Abschnittserfassungsmodul 118, das einen Parkabschnitt und einen Verbotsabschnitt, der mindestens teilweise den Parkabschnitt umgibt, in einer Bildsequenz erfasst, die von einer Bilderfassungsvorrichtung empfangen wird, die den Parkabschnitt überwacht; ein Fahrzeug-Erfassungsmodul 120, das ein stationäres, mutmaßlich in zweiter Reihe in einem Verbotsabschnitt parkendes Fahrzeug erfasst; ein Fahrzeug-Klassifizierungsmodul 122, das das Eintreten eines Ereignissen in Bezug auf ein stationäres Fahrzeug erfasst und das stationäre Fahrzeug als in zweiter Reihe parkend bzw. nicht in zweiter Reihe parkend klassifiziert; und ein Benachrichtigungsmodul 124, das einen Nutzer von dem Verstoß unterrichtet. Ausführungsformen werden erwogen, in denen diese Befehle in einem einzigen Modul oder in mehreren Modulen gespeichert sind, die in den verschiedenen Vorrichtungen ausgeführt sind. Die Module 116-124 werden mit Bezug auf das beispielhafte Verfahren später beschrieben.
  • Die hier verwendeten Softwaremodule sind dazu gedacht, jegliche Sammlung oder jegliches Set von Befehlen, die von der Bestätigungsvorrichtung 102 oder einem anderen digitalen System ausführbar sind, zu erfassen, um den Computer oder ein anderes digitales System zu konfigurieren, um die Aufgabe auszuführen, die der Zweck der Software ist. Der Begriff „Software“, wie hier verwendet, soll solche Befehle umfassen, die auf einem Speichermedium gespeichert sind, wie RAM, Festplatte, optischer Platte usw., und soll auch sogenannte „Firmware“ umfassen, die Software ist, die auf einem ROM oder Ähnlichem gespeichert ist. Solche Software kann auf verschiedene Weise organisiert sein und kann Software-Komponenten umfassen, die als Bibliotheken, internetbasierte Programme, die auf einem entfernten Server oder Ähnlichem gespeichert sind, Quellcode, interpretativerCode, Objektcode, direkt auszuführender Code usw. organisiert sind. Es wird erwogen, dass die Software Systemcode aufrufen kann oder andere Software aufruft, die auf einem Server (nicht gezeigt) oder an einem anderen Ort abgelegt ist, um bestimmte Funktionen auszuführen. Die verschiedenen Komponenten der Bestimmungsvorrichtung 102 können alle mit einem Bus 128 verbunden sein.
  • Weiter mit Bezug auf 3 umfasst die Bestätigungsvorrichtung 102 auch ein oder mehrere Kommunikationsschnittstellen 130, wie Netzschnittstellen, zur Kommunikation mit externen Vorrichtungen. Die Kommunikationsschnittstellen 130 können z.B. ein Modem, einen Router, ein Kabel, eine Ethernet-Schnittstelle etc. umfassen. Die Kommunikationsschnittstellen 130 sind dafür ausgelegt, Video und/oder Videodaten 132 als Eingang zu empfangen.
  • Die Bestätigungsvorrichtung 102 kann ein oder mehrere spezielle oder allgemeine Rechenvorrichtungen umfassen, wie einen Server-Computer oder Digital Front End oder eine beliebige andere Rechenvorrichtung, die Befehle zur Ausführung des beispielhaften Verfahrens ausführen kann.
  • 3 stellt weiter die Bestätigungsvorrichtung 102 dar, die mit einer Bildquelle 104 zur Eingabe und/oder zum Empfang von Videodaten und/oder Bilddaten (hiernach umfassend als „Videodaten“ bezeichnet) in elektronischem Format verbunden ist. Die Bildquelle 104 kann eine Bilderfassungsvorrichtung, wie eine Kamera, umfassen. Die Bildquelle 104 kann ein oder mehrere Überwachungskameras umfassen, die Videodaten des interessierenden Parkabschnitts erfassen. Zur Ausführung des Verfahrens bei Nacht für Parkabschnitte ohne externe Beleuchtungsquellen können die Kameras 104 Nah-Infrarot (NIR)-Fähigkeit im unteren Bereich des Nah-Infrarot-Spektrums (700 nm bis 1000 nm) umfassen. Es gibt keine bestimmten Anforderungen in Bezug auf räumliche oder zeitliche Auflösung. Die Bildquelle kann in einer Ausführungsform eine herkömmliche Überwachungskamera mit einer Video Graphics Array-Größe von mehr als 640 Pixeln in der Breite und 480 Pixeln in der Höhe mit einer Bildrate von fünfzehn (15) oder mehr Bildern pro Sekunde umfassen.
  • In einer Ausführungsform kann die Bildquelle 104 eine Vorrichtung sein, die dafür ausgelegt ist, das von der Kamera erfasste Video an die Bestätigungsvorrichtung 102 weiterzuleiten und/oder zu übertragen. Die Bildquelle 104 kann z.B. einen Scanner, einen Computer oder Ähnliches umfassen. In einer weiteren Ausführungsform können die Videodaten 132 von einer beliebigen, geeigneten Quelle eingegeben werden, wie von einer Arbeitsstation, einer Datenbank, einer Speichervorrichtung, wie einer Platte, oder Ähnlichem. Die Bildquelle 104 kommuniziert mit der Steuerung 110, die Prozessor 112 und Speicher 114 enthält.
  • Weiter mit Bezug auf 3 umfasst das System 100 eine Speichervorrichtung 106, die Teil der Bestätigungsvorrichtung 102 ist oder mit dieser kommuniziert. In einer in Erwägung gezogenen Ausführungsform kann die Bestätigungsvorrichtung 102 mit einem Server (nicht gezeigt) kommunizieren, der eine Verarbeitungsvorrichtung und Speicher umfasst, wie eine Speichervorrichtung 106, oder Zugang zu einer Speichervorrichtung 106 besitzt, um Look-Up-Tabellen (LUTs; Nachschlagetabellen) zu speichern, die Pixeldaten mit aktuellen Abstandsdaten kartieren, um Zeittabellen in Bezug auf Ampeldaten aufzunehmen und um Informationen in Bezug auf Ausnahmen, z.B. für bestimmte Einsatz- oder kommerzielle Fahrzeuge, aufzunehmen. Beispiele für Ausnahmen umfassen Einsatzfahrzeuge, die durch Einsatzbeleuchtung, schriftliche Kennzeichnung oder andere Fahrzeug-Kennzeichnungstechniken identifiziert werden. Es ist anzumerken, dass Warnblinkleuchten das Eintreten eines Verstoßes anzeigen können, wohingegen Einsatzbeleuchtung das Vorliegen einer Ausnahme anzeigen kann. Beispiele für Ausnahmen können auch kommerzielle Fahrzeuge umfassen, die durch Computer-Visionstechniken zur Fahrzeugklassifizierung in Kategorien identifiziert werden können, wie Traktoranhänger, Kastenwagen und Lieferfahrzeuge. Im Wesentlichen können diese Fahrzeuge unter Verwendung von Techniken nach dem Stand der Technik identifiziert werden. Eine beispielhafte Technik umfasst das Extrahieren von Funktionen von einem erfassten Fahrzeug in dem Bild und das Anwenden der Funktionen auf mindestens einen trainierten Fahrzeug-Klassifizierer, der das erfasste Fahrzeug als zu einem bestimmten Fahrzeugtyp und/oder einer bestimmten Fahrzeugkategorie zugehörig klassifiziert.
  • Weiter mit Bezug auf 3 werden die Videodaten 132 durch die Bestätigungsvorrichtung 102 verarbeitet, um eine Feststellung 138 in Bezug auf einen Verstoß durch Parken in zweiter Reihe in einer geeigneten Form auf einer graphischen Benutzeroberfläche (GUI) 140 an einen Anwender oder an eine Nutzervorrichtung 108, wie ein Smartphone eines Fahrers unterwegs oder an einen Fahrzeugcomputer und/oder ein GPS auszugeben, das mit der Bestätigungsvorrichtung 102 kommuniziert. Das GUI 140 kann ein Anzeigemodul zur Anzeige der Informationen für Nutzer sowie eine Nutzer-Eingabevorrichtung, wie eine Tastatur, ein Touchscreen oder ein beschreibbarer Bildschirm, zum Empfangen von Anweisungen als Eingabe und/oder eine Cursor-Steuervorrichtung, wie eine Maus, ein Trackball oder Ähnliches, zur Kommunikation von Nutzer-Eingabeinformationen und Befehlsauswahl an den Prozessor 112 umfassen.
  • 4 ist ein ausführliches Flussdiagramm, das eine Ausführungsform des Verfahrens 400 zum Erfassen eines Verstoßes durch Parken in zweiter Reihe beschreibt. Das Verfahren beginnt bei S402. Das Video-Puffermodul 116 empfängt Videodaten von einer Bildfolge, die von einer Bilderfassungsvorrichtung 104 bei S404 aufgenommen wurde. Das Fahrzeug-Puffermodul 116 erfasst bei S406, ob das aktuelle Bild das erste Bild ist. In Reaktion auf das aktuelle Bild, das das erste Bild in der Folge ist (JA bei S406), überträgt das Video-Puffermodul die Videodaten an ein Abschnittserfassungsmodul 118, das einen Parkabschnitt und/oder einen Verbotsabschnitt bei S408 identifiziert, der mindestens teilweise den Parkabschnitt in einer Bildfolge umgibt. Mit „teilweise umgeben“ ist gemeint, dass sich der Verbotsabschnitt neben dem Parkabschnitt mindestens über einen Teil des Parkabschnitts erstreckt. In einer Ausführungsform wird dieses Feststellen (S408) einmal für das erste Bild in der Folge ausgeführt und kann nur aktualisiert werden, wenn sich das Kamerafeld oder die Sicht ändert (z.B., wenn die Kamera bewegt wird).
  • In einem Szenario, in dem die Parkplatzbelegung überwacht wird, sind sowohl der Parkals auch der Verbotsabschnitt definiert. In der dargestellten Ausführungsform kann der Parkabschnitt eine Parkspur am Straßenrand, und der Verbotsabschnitt kann eine Fahrspur neben der Parkspur sein. In 1B ist der Verbotsabschnitt in Bezug auf den Straßenparkabschnitt definiert. Obwohl 1B ein einspuriges Verkehrsszenario darstellt, kann die Offenbarung leicht auf mehrspurige Verkehrsszenarien erweitert werden. In einer erwogenen Ausführungsform muss jedoch nur die Anordnung des Verbotsabschnitts unabhängig festgelegt werden. Wenn nur Parken in zweiter Reihe festgestellt wird, ist nur die Anordnung des Verbotsabschnitts erforderlich.
  • Eine Erscheinungsform des Abschnittserfassungsmoduls 118, das den oder die Abschnitte identifiziert, ist es, dass der Prozess nur für Pixel durchgeführt werden kann, die in oder benachbart den Abschnitten liegen, so dass die Rechenanforderungen verringert werden. Es werden jedoch Ausführungsformen erwogen, in denen der Prozess an einem gesamten Bild anstelle von in oder in der Nähe von identifizierten Abschnitten ausgeführt wird.
  • In Reaktion auf das erste Bild, das nicht das erste Bild in der Folge ist (NEIN bei S406), überträgt das Video-Puffermodul 116 bei S410 die Videodaten an das Erfassungsmodul für stationäre Fahrzeuge 120 zur Ausführung der Fahrzeugerfassung.
  • Alternativ, wenn ein oder beide Abschnitte manuell (durch Kamerabediener) zum Zeitpunkt der Kamera-Installation, in Betrieb, Offline unter Verwendung von Echtzeit-Videoverarbeitung erfasst werden oder wenn sie periodisch manuell Offline oder in Betrieb aktualisiert werden, identifiziert das Abschnittserfassungsmodul 118 bei S408 nach Empfang der Videodaten bei S404 den Parkabschnitt und/oder den Verbotsabschnitt für die Bildfolge unter Verwendung alternativer Verfahren unabhängig davon, ob das aktuelle Bild ein erstes Bild ist.
  • Es erfolgt hier keine Einschränkung, wie ein stationäres, mutmaßlich in zweiter Reihe parkendes Fahrzeug erfasst wird. Ein Beispielverfahren zum Erfassen eines stationären Fahrzeugs in den definierten Abschnitten ist in 8A gezeigt. Das Verfahren beginnt bei S802. Das Fahrzeugerfassungsmodul 120 erfasst bei S804, ob das aktuelle Bild das erste Bild ist. In Reaktion darauf, dass das aktuelle Bild das erste Bild in der Folge ist (JA bei S804), führt das Modul 120 bei S806 einen Initialisierungsprozess durch Erfassen eines geparkten Fahrzeugs in dem Bild und durch Einstellen des ersten Bildes als Hintergrund aus. Der Initialisierungsprozess berechnet unter Verwendung eines statischen Bildes, das als erstes Bild erfasst wurde, die Fahrzeugbelegung in dem Parkabschnitt und/oder dem Verbotsabschnitt an einem Start der Videoeinspielung oder an einem späteren Bild. Allgemein erfasst der Initialisierungsprozess die Positionen der geparkten Fahrzeuge in dem ersten Bild, um Objekte und/oder Fahrzeuge zu erfassen, die in dem Parkabschnitt bereits vorhanden sind.
  • In Reaktion darauf, dass das aktuelle Bild nicht das erste Bild in der Folge (NEIN bei S804) ist, erfasst das Erfassungsmodul für stationäre Fahrzeuge 120 bei S808 Fahrzeuge, die in dem Verbotsbereich parken oder den Verbotsbereich in folgenden Bildern verlassen. Das Fahrzeugerfassungsmodul 120 erfasst unter Erhalten einer Berechnung des Szenenhintergrunds und durch Ausführen einer bildweisen Hintergrundsubtraktion das Vorhandensein von Fahrzeugen in dem Verbotsabschnitt. Wenn der Hintergrund berechnet ist, werden die Fahrzeuge, die in dem Verbotsbereich parken oder diesen verlassen, nach dem Initialisierungsprozess bei S806 mittels Subtraktion des ausgewählten Bildes von dem berechneten Hintergrund und mittels Anwenden eines Grenzwerts und/oder morphologischer Operationen an dem Differenzbild erfasst. Bei jedem Bild erfasst das Erfassungsmodul für stationäre Fahrzeuge 120 die Bewegung von Fahrzeugen unter Verwendung von Zeitdifferenzverfahren, um zu kontrollieren, ob das erfasste Fahrzeug stationär oder in Bewegung ist.
  • Das Erfassungsmodul für stationäre Fahrzeuge 120 verwendet Klassifikationen, um jedem Pixel Werte zuzuordnen, und verwendet die zugeordneten Werte, um ein binäres Bild zu erzeugen, das das aktuelle Bild darstellt. Das System verwendet bei jedem nächsten Bild der Folge die binären Informationen zur Aktualisierung des Hintergrunds. Der aktualisierte Hintergrund wird von dem System verwendet, um zu bestimmen, wann sich das ursprünglich geparkte Fahrzeug anschließend von dem Parkabschnitt weg bewegt und/oder diesen verlässt, oder wann ein neues Fahrzeug in die Szene eintritt.
  • Durch Erfassen von Bewegung über doppelte Differenzbildung können verdeckte Bereiche, die durch Fahrzeuge verursacht werden, die sich neben dem Parkabschnitt oder neben dem Verbotsabschnitt bewegen, verworfen werden. Verdeckungen, die von stationären Fahrzeugen verursacht werden, können erfasst werden. Und es können Computervisionstechniken an Objekten ausgeführt werden, die sowohl Park- als auch Verbotsabschnitte überspannen. Das Verfahren endet bei S810.
  • 8B zeigt ein weiteres beispielhaftes Verfahren zur Erfassung eines stationären Fahrzeugs in einem Verkehrsspur-Verbotsabschnitt, d.h. dem Verbotsabschnitt für dieses Beispiel. Das Verfahren beginnt bei S820. Das Erfassungsmodul für stationäre Fahrzeuge 120 erfasst durch Erfassen von Bewegung, wo das Fahrzeug in den Verbotsabschnitt einfährt oder darin erscheint, das Vorhandensein eines Fahrzeugs. 1B zeigt die Richtung des Verkehrs, beginnend rechts im Bild und sich nach links fortbewegend, und das Modul 120 sucht an den Rändern des Verbotsbereichs, wo der Verkehr in die Szene bei 50 eintritt oder erstmalig erscheint, nach Bewegung. Insbesondere das Modul 20 sucht bei S822 nach sich bewegenden Objekten, die eine Größe besitzen, die einem zuvor festgelegten Grenzwert entsprechen oder diesen überschreiten. Ein Verfolgungsalgorithmus wird für eine der Funktionen des erfassten Objekts oder für das gesamte erfasste Objekt initialisiert, um bei S824 die Bewegungserfassung auszulösen. Wenn ein Fahrzeug den Verbotsbereich durchquert, entspricht die Anordnung des Verfolgers 52, dargestellt als virtuelle Markierungen in 5, in dem Bild dem Ortsverlauf des Fahrzeugs 54 in der Szene. Das Modul für stationäre Fahrzeuge 120 erfasst ein stationäres Fahrzeug, wenn der Verfolger über mehrere aufeinanderfolgende Bilder bei S826 konstant bleibt. Für diesen Ansatz ist nicht unbedingt ein vollständiger Abschnitt erforderlich, der von einem Fahrzeug eingenommen wird, obwohl Ausführungsformen erwogen werden, in denen das System hinweisende Informationen vor, während oder nach den Analysen zur Ausgabe einer Meldung sammelt. In dieser Ausführungsform kann das System einen ungefähren Abschnitt bestimmen, wo das verfolgte Fahrzeug stationär wird. Durch Bestimmen des gesamten Abschnitts kann das System auch verifizieren, dass das erfasste stationäre Fahrzeug tatsächlich ein Fahrzeug ist, indem Funktionsabmessungen mit einem zuvor festgelegten Größengrenzwert verglichen werden. Alternativ kann Bildsegmentierung verwendet werden.
  • Im Einzelnen wird das Verfolgen durch Identifizieren von Pixel-Clustern (d.h. „Objekten“) erzielt, die unter Verwendung eines bildweisen Differenzbildungsprozesses gefolgt von morphologischem Filtern zur Entfernung zweifelhafter Bewegungsquellen und Rauschen in einem Bewegungserfassungsabschnitt erfasst werden. Insbesondere wird eine Triggermaske ausreichender Größe verwendet, um ein in die Szene eintretendes Fahrzeug zu erfassen. Gleichzeitig werden auch die Bahnverläufe anderer Fahrzeuge, die sich durch die Szene bewegen, verfolgt, um zu bestimmen, ob sich eine Bewegungsbahn auf eine benachbarte Spur und um das erfasste Fahrzeug herum bewegt. Bewegungsrichtung und Abstand jeder Kandidaten-Bewegungsbahn kann algorithmisch untersucht werden, um falsch Positive zu entfernen.
  • Der Verfolgungsalgorithmus kann zeitweise verlorene Verfolger für eine zuvor festgelegte Anzahl von Bildern wieder aufnehmen. In anderen Worten kann das Verfolgen des interessierenden Objekts für eine zuvor festgelegte Zeitspanne verloren gehen, welche der Bildanzahl entspricht. Diese zulässige Abweichung ermöglicht es, dass das System kurzzeitige Verdeckungen verarbeiten kann, da ein anderes Fahrzeug das erfasste stationäre Fahrzeug für eine kurze Zeitspanne verdecken kann, wenn es das erfasste, stationäre Fahrzeug umfährt. Die Verfolgung kann enden, wenn die Bewegungsbahn des interessierenden Objekts für mehr als die zuvor festgelegte Bildanzahl und/oder Zeitspanne verloren geht. Weiterhin kann das Verfolgen enden, wenn die Bewegungsbahn des interessierenden Objekts einen Austrittspunkt in der Szene erreicht, der als eine zuvor festgelegte Anzahl von Pixeln von der Bildgrenze bekannt sein kann. Das Verfahren endet bei S828.
  • Zurück zu 4, startet bei S412 in Reaktion auf das Erfassen eines stationären Fahrzeugs in dem Verbotsabschnitt ein Timer, wenn die Bewegungsbahn stationär wird. Die Erfassung für stationäre Fahrzeuge 120 berechnet bei S414 eine Zeitspanne, in der das erfasste Fahrzeug stationär bleibt. Die Dauer wird berechnet, weil in einer Ausführungsform ein in dem Verbotsabschnitt erfasstes stationäres Fahrzeug ein mutmaßlicher Kandidat für einen Verstoß durch Parken in zweiter Reihe ist, wenn es sich über eine zuvor festgelegte Zeitspanne nicht bewegt. Wenn der Timer startet, wird lokal um den überwachten Punkt ein Bildsegmentierungsalgorithmus angewendet, um den Abschnitt, den das stationäre Fahrzeug einnimmt, weiter zu identifizieren. Ein virtuelles Feld 82, das das Segmentierungsergebnis anzeigt, kann auf dem Bild dargestellt werden, und die Ausgabe 84 des Timers kann ebenfalls dargestellt werden, wie in den beispielhaften Bildern von 7B gezeigt.
  • In der diskutierten Ausführungsform, wo das stationäre Fahrzeug unter Verwendung von Hintergrundberechnung erfasst wird (8A), kann die Zeitspanne, über die das Fahrzeug stationär bleibt, durch Bestimmen einer Bildstelle (von Pixeln) berechnet werden, die einem Ort des Fahrzeugs entspricht, dargestellt als ein Vordergrund-Objekt in einem ersten Bild, entsprechend dem Zeitpunkt, zu dem das Fahrzeug zuerst identifiziert wird und anhält. In folgenden Bildern wird eine normalisierte Kreuzkorrelation zwischen der Bildstelle und Bereichen in und um den Ort ausgeführt, an dem das Fahrzeug ursprünglich identifiziert wurde. In Reaktion darauf, dass die Kreuzkorrelation einen zuvor festgelegten Grenzwert R für ein gegebenes Bild erreicht oder überschreitet, bestimmt das System, dass sich das Fahrzeug wahrscheinlich an dem Ort befindet, an dem es ursprünglich erfasst wurde. In Reaktion darauf, dass die Kreuzkorrelation unterhalb eines zuvor bestimmten Grenzwerts R für das gegebene Bild liegt, bestimmt das System, dass sich das erfasste Fahrzeug von seinem ursprünglichen Ort entfernt hat. In diesem letzteren Fall bewegt sich das Fahrzeug und kann nicht in zweiter Reihe parken.
  • Für die diskutierte Ausführungsform, in der das stationäre Fahrzeug unter Verwendung eines Verfolgungsalgorithmus erfasst wird (8B), berechnet das System die Bildanzahl, in denen keine Bewegung in Bezug auf das erfasste Fahrzeug auftritt.
  • Sowohl Korrelation als auch Verfolgungsoperationen können durch sich bewegende Verdeckungen beeinflusst werden, in welchem Fall weitere Robustheitsmessungen implementiert werden können. Das Erfassen z.B., dass sich ein Fahrzeug von seinem Ort entfernt hat, kann nur ausgeführt werden, wenn der Kreuzkorrelationswert unter dem zuvor festgelegten Grenzwert R für eine gegebene Anzahl aufeinanderfolgender Bilder N liegt.
  • Das Modul berechnet die Bildanzahl, die das Fahrzeug stationär ist, mittels der Bildrate der Bilderfassungsvorrichtung, um bei S414 die Zeitspanne zu berechnen, die das Fahrzeug in dem Verbotsabschnitt stationär geblieben ist. Es besteht jedoch keine Beschränkung für den Prozess, der zum Berechnen der Zeitspanne verwendet wird, die unter Verwendung alternativer Formen der Eingabe anstelle der Bildrate berechnet werden kann. Die Zeitspanne kann z.B. unter Verwendung von Systemuhren und/oder Zeitstempeln bestimmt werden.
  • Das Modul 120 vergleicht bei S416 die berechnete Zeitspanne bis zum einem Zeitgrenzwert T. In Reaktion darauf, dass die Zeitspanne den Zeitgrenzwert (JA bei S416) erreicht und/oder überschreitet, wird das erfasste Fahrzeug bei S418 als mutmaßlicher Verletzer klassifiziert. In Reaktion darauf, dass die Zeitspanne unterhalb des Zeitgrenzwerts liegt (NEIN bei S426), wird das erfasste Fahrzeug bei S426 als nicht in zweiter Reihe parkend klassifiziert.
  • Eine Erscheinungsform der Offenbarung ist es, dass das Fahrzeug zuerst als mutmaßlicher Verletzer gekennzeichnet wird, um zu verhindern, dass falsche Verstöße erstellt werden. Bei gegebenem berechnetem Abschnitt, den das Kandidatenfahrzeug einnimmt, werden bei S420 zusätzliche Verstoßhinweise/-anzeigen analysiert.
  • Die Offenbarung bestätigt einen Verstoß des Kandidatenfahrzeugs durch Parken in zweiter Reihe basierend auf dem Eintritt eines Ereignisses. Dieses Ereignis kann das Vorliegen von betroffenen Verkehrsmustern umfassen, wie eine Ampel in der Nähe, die verursacht, dass ein oder mehrere Fahrzeuge und/oder der Verkehr anhalten und/oder um das Kandidatenfahrzeug herum aufschließen. Dieses Ereignis kann den Betrieb von Warnblinkleuchten an dem erfassten Fahrzeug oder ein anderes erfasstes Fahrzeug hinter dem erfassten Fahrzeug sein, was eine Gefahr anzeigt, da das Fahrzeug in oder in der Nähe des fließenden Verkehrs angehalten wurde. Ein weiteres in Erwägung gezogenes Ereignis kann umfassen, dass sich der Verkehr um das erfasste Fahrzeug herum bewegt, anzeigend, dass das Fahrzeug angehalten hat und der Verkehrsfluss behindert.
  • 6A-6C sind Flussdiagramme, die Verfahrensausführungsformen zum Bestätigen eines Verstoßes durch Parken in zweiter Reihe unter Verwendung von Analysen zeigen, die sich auf Teile des Verbotsabschnitts, Teile um den Verbotsabschnitt und das Fahrzeug selbst konzentrieren. 6A zeigt ein Flussdiagramm zum Bestätigen eines Verstoßes durch Parken in zweiter Reihe unter Verwendung eines Segments des Verbotsabschnitts in der Nähe des erfassten stationären Fahrzeugs. Das Verfahren beginnt bei S602. In einer ersten Ausführungsform bestätigt das Klassifizierungsmodul 122 den mutmaßlichen Verstoß des Fahrzeugs durch Parken in zweiter Reihe mittels Analysieren des Straßenabschnitts und insbesondere des Verbotsabschnitts vor dem stationären Fahrzeug. Die Ergebnisse dieser Analyse können anzeigen, ob das Fahrzeug wegen einer Ampel oder hinter einem weiteren stehenden Fahrzeug angehalten hat. Insbesondere wird die Belegung der Straße vor dem stationären Fahrzeug analysiert, währenddessen verfügbare Ampelinformationen berücksichtigt werden. Zur Bestimmung der Belegung misst das Klassifizierungsmodul 122 bei S604 einen Abstand des erfassten stationären Fahrzeugs zu einem zuvor festgelegten Bezugspunkt. In anderen Worten bestimmt das Modul 122, ob Fahrbahn zwischen dem erfassten, stationären Fahrzeug und dem Bezugspunkt frei ist. Beispielhafte Bezugspunkte können eine Kreuzung, ein Verkehrszeichen, eine Haltelinie und eine Ampel umfassen, wenn die Ampel Rot oder Gelb zeigt, etc. Der Abstand wird durch Berechnen einer Anzahl von Pixeln von der nächsten Kante des berechneten Abschnitts des erfassten, stationären Fahrzeugs (z.B. die Kante, die sich am nächsten entlang der Fahrzeugfront erstreckt) bis zu der zuvor festgelegten Bezugsposition oder Bildgrenze gemessen. Der Pixelabstand wird bei S608 unter Verwendung eines LUT oder eines zuvor festgelegten Algorithmus in einen physikalischen Abstand umgewandelt. Der physikalische Abstand wird bei S608 mit einem Grenzwert verglichen, wo Kamera-Kalibrierdaten verfügbar sind. Alternativ muss die Pixelanzahl nicht in einen physikalischen Abstand umgewandelt werden; der Pixelabstand kann vielmehr mit einem Grenzwert in Pixeleinheiten verglichen werden, wobei der Pixeleinheiten-Grenzwert aus den Videodaten erlernt werden kann, indem Längen von Objekten, die in der Nähe des Verbotsabschnitts vor dem stationären Fahrzeug oder hinter einem Bezugspunkt oder zwischen Fahrzeug und Bezugspunkt in den Bildern erfasst wurden. Diese Grenzwerte können basierend auf Kalibrierinformationen zuvor festgelegt sein, für das System als Anwendereingabe zum Zeitpunkt der Installation oder im Betrieb manuell bereitgestellt oder standardmäßig durch das System bereitgestellt werden. In Reaktion darauf, dass die Länge bzw. der Abstand unterhalb des Grenzwerts liegt (NEIN bei S608), klassifiziert das Modul 122 bei S610 das erfasste, stationäre Fahrzeug als nicht in zweiter Reihe parkend. Wenn die Länge der freien Straße den Grenzwert erreicht oder überschreitet (JA bei S608), klassifiziert das Modul 112 bei S616 das erfasste, stationäre Fahrzeug als gegen eine Verkehrsvorschrift verstoßend (d.h. als parkend in zweiter Reihe). Die freie Straße vor dem Fahrzeug bedeutet, dass sich kein anderes Fahrzeug oder Hindernis vor dem erfassten Fahrzeug befindet, das ursächlich stationär ist. 7A und 7B veranschaulichen dieses Beispiel in Form von Beispielbildern des erfassten Videos. Ein erheblicher Betrag (z.B. mehr als eine Fahrzeuglänge) freien Raums 70 ist vor dem Kandidatenfahrzeug 72 in dem Verbotsabschnitt in 7A zu beobachten.
  • In einer Ausführungsform können Ampeldaten, wie Status oder Zeitverlauf der Signallichter, wie Zeit oder Dauer einer Gelbphase und Rotphase in der Nähe, mit den Analyseergebnissen koordiniert werden, um zu bestimmen, ob das erfasste, stationäre Fahrzeug oder ein erfasstes Fahrzeug vor dem interessierenden Fahrzeug aufgrund einer Ampel angehalten hat. Der Status des Signal- oder Ampellichts kann vorab an das System als Bestandteil von Zeitverlaufs- und Zeitplaninformationen oder in Echtzeit über Kommunikationsschnittstellen mit dem Ampelsteuersystem kommuniziert werden. Alternativ kann der Status des Verkehrssignals unter Verwendung von Bild- und/oder Videoanalyse bestimmt werden, wenn bei S612 eine Ansicht der Ampel verfügbar ist. Wenn daher der Freiraum vor dem Fahrzeug über dem Grenzwert liegt (JA bei S608), aber die Signalinformation anzeigt, dass die Ampel Rot zeigt (JA bei S614), kann das Modul 122 bei S610 das Fahrzeug als nicht in zweiter Reihe parkend klassifizieren. Wenn der Freiraum den Grenzwert erreicht oder überschreitet (JA bei S608) und die Signalinformation anzeigt, dass die Ampel Grün ist (NEIN bei S614), bestimmt das Modul 122 bei S616, dass das Fahrzeug in zweiter Reihe parkt. Es kann berechtigte Gründe geben, weshalb das Fahrzeug in zweiter Reihe parkt. In einer weiteren Ausführungsform bestimmt daher das Modul 122 in Reaktion auf ein Erfassen, dass ein Fahrzeug in zweiter Reihe parkt (JA bei S608 und NEIN bei S614), ob das stationäre Fahrzeug zu einem Typ gehört, für den bei S615 eine Ausnahmegenehmigung gilt. Einsatzfahrzeuge können z.B. zu einem Fahrzeugtyp gehören, für die eine Ausnahmegenehmigung gilt.
  • In einem weiteren Beispiel können z.B. bestimmte kommerzielle Fahrzeuge, wie Lieferfahrzeuge, die Erlaubnis besitzen, zu bestimmten Zeiten für eine zuvor festgelegte Zeitdauer in dem Verbotsabschnitt zu parken. Eine Regelung oder Anordnung kann genehmigen, dass diese Fahrzeuge vorübergehend in Abschnitten parken, die über keinen alternativen Raum verfügen. Die Ausnahmen für den überwachten Verbotsabschnitt sind in der Speichervorrichtung gespeichert und werden von dem Modul 122 bei der Bestimmung, ob das Fahrzeug über eine Ausnahmegenehmigung verfügt, abgefragt. In Reaktion auf das stationäre Fahrzeug mit einer Ausnahme (JA bei S615) klassifiziert das Modul 122 bei S619 das stationäre Fahrzeug als nicht in zweiter Reihe parkend und als nicht eine Verkehrsregel verletzend. In Reaktion darauf, dass das stationäre Fahrzeug nicht über eine Ausnahmegenehmigung verfügt (NEIN bei S615), klassifiziert das Modul 122 bei S616 das stationäre Fahrzeug als in zweiter Reihe parkend und als eine Verkehrsregel verletzend. Das Verfahren endet bei S618.
  • 6B zeigt ein Flussdiagramm zur Bestätigung eines Verstoßes durch Parken in zweiter Reihe mittels Erfassen, ob an dem erfassten, stationären Fahrzeug die Warnblinkleuchten eingeschaltet sind. Im Einzelnen zeigt das Erfassen eines stationären Fahrzeugs mit eingeschalter Warnblinkanlage in dem Verbotsabschnitt an, dass das Fahrzeug in zweiter Reihe parkt oder dass das Fahrzeug möglicherweise anderweitig der Aufmerksamkeit bedarf. Das Verfahren beginnt bei S620. Das Modul 122 identifiziert bei S622 einen Warnblinkleuchtenbereich in der Folge von Bildern, die einen Vorderleuchten- und einen Heckleuchtenbereich an dem erfassten Fahrzeug umgeben. Es wird eine Pixelanalyse mit diesem Bereich durchgeführt, hiernach als ein (z.B. unterer, rechter Quadrant bezeichnet, um eine rechnerisch teure (abhängig von räumlicher und zeitlicher Auflösung des Videos) Verarbeitung über alle Pixel zu vermeiden. Obwohl das Erfassen von Warnblinkleuchten unter Verwendung pixelweiser Fourier-Analyse des Videosegments einer bestimmten Länge (z.B. 50 Bilder für eine 5-fps Video-Erfassung) erzielt werden kann, ersetzt das System die Fourier-Analyse mit einem einfachen Test, basierend auf eine Standardabweichung und einem Verhältnis der Standardabweichung zu dem Bereich (maxmin) des zeitlichen Intensitätssignals für jedes verarbeitete Pixel. Dieser Ansatz beruht auf den Annahmen, dass (1) die pixelweisen Intensitäten, die einem angehaltenen Fahrzeug entsprechen, näherungsweise konstant sind (außer, wenn Verdeckung eintritt oder die Warnblinkleuchten eingeschaltet werden), und dass (2) die Standardabweichung eines periodischen Signals eine skalierte Version der Amplitude dieses periodischen Signals ist. Andere Verfahren zum Erfassen periodischer Intensitätsänderungen können ebenfalls verwendet werden, um eine eingeschaltete Warnblinkanlage zu erfassen, da die zeitlichen Farb-/Intensitätssignale der eingeschalteten Warnblinkleuchten solche periodischen Eigenschaften besitzen. Weiterhin können zusätzliche Verarbeitungen, wie morphologisches Filtern, verbundene Komponentenanalyse, Grenzwertbildung für Größe oder Anzahl von Pixeln etc., auf die resultierende Pixel-Klassifizierung eingeschalteter Warnblinkleuchten angewendet werden, um eine robustere Erfassung der eingeschalteten Warnblinkleuchten zu erzielen.
  • Daher führt das System die pixelweise Analyse mit dem identifizierten Quadranten des berechneten Bereichs aus, der dem erfassten, stehenden Fahrzeug entspricht. Im Einzelnen bestimmt das Modul 122 bei 624 die Pixelfarben in dem Quadranten in der Folge der Bilder. In Reaktion darauf, dass keine Änderungen der Pixelfarben zwischen Bildern auftreten (d.h., die Pixelfarbe ist über die Bilder konstant) (NEIN bei S626), bestimmt das Modul 122 bei S628, dass das erfasste Fahrzeug die Warnblinkanlage nicht eingeschaltet hat und klassifiziert das Fahrzeug als nicht in zweiter Reihe parkend. In Reaktion auf Änderungen in der Pixelfarbe zwischen Bildern (JA bei S626) bestimmt das Modul 122 bei S636, dass das erfasste Fahrzeug die Warnblinkanlage eingeschaltet hat und klassifiziert das Fahrzeug als in zweiter Reihe parkend.
  • 7A zeigt Warnblinkleuchten 74, die als eingeschaltet erfasst wurden. In anderen Worten erhöht das Modul 122 für ein mutmaßlich einen Verstoß begehendes Fahrzeug, das die Warnblinkanlage eingeschaltet hat, den Fahrzeugstatus von „Kandidat“ auf „Verletzer“. Die Warnblinkanlage kann jedoch signalisieren, dass das Fahrzeug Beachtung benötigt. In einer Ausführungsform bestimmt das Modul 122 bei S630 in Reaktion auf ein Erfassen, dass die Warnblinkanlage des Fahrzeugs eingeschaltet ist, ob das stationäre Fahrzeug von einem Typ ist, der über eine Ausnahmegenehmigung verfügt. In Reaktion darauf, dass das stationäre Fahrzeug eine Ausnahmegenehmigung besitzt (JA bei S632), klassifiziert das Modul 122 bei S628 das stationäre Fahrzeug als nicht in zweiter Reihe parkend und als nicht gegen eine Verkehrsregel verstoßend. In Reaktion darauf, dass das stationäre Fahrzeug keine Ausnahmegenehmigung besitzt (NEIN bei S632), klassifiziert das Modul 122 bei S638 das stationäre Fahrzeug als in zweiter Reihe parkend und als gegen eine Verkehrsregel verstoßend.
  • 6C zeigt ein Verfahren zum Bestätigen eines Verstoßes eines Kandidatenfahrzeugs durch Parken in zweiter Reihe basierend auf umgebende Verkehrsmuster in Bezug auf den mutmaßlichen Verletzer. Dass sich z.B. ein weiteres Fahrzeug um das erfasste, stationäre Fahrzeug herum bewegt, würde anzeigen, dass das stationäre Fahrzeug in zweiter Reihe parkt.
  • Da in der Offenbarung das stationäre Kandidatenfahrzeug über einen Verfolgungsprozess erfasst werden kann, kann das Modul 122 Bewegungsbahnen aller Fahrzeuge kontrollieren, die in eine Szene eintreten. Diese Bewegungsbahnen zeigen Fahrzeuge an, die angehalten wurden oder sich auf interessierenden Verkehrsspuren bewegen. Daher verwendet das System die Bewegungsbahnen zur Bestimmung, ob sich ein oder mehrere Fahrzeuge um das Kandidatenfahrzeug herum bewegen. Das Verfahren beginnt bei S640. In Reaktion darauf, dass der erfasste mutmaßliche Verletzer steht, startet das System einen Timer. Der Timer wird verwendet, um bei S642 eine zuvor festgelegte Zeitspanne ab dem Stoppen des Kandidatenfahrzeugs zu messen. In der beispielhaften Ausführungsform beträgt die zuvor festgelegte Zeitspanne 15 Sekunden, aber es wird hier keine Beschränkung der Zeitspanne vorgenommen. Wenn ab Start des Timers die zuvor festgelegte Zeitspanne abgelaufen ist und der Timer weiter läuft, wird bei S644 jede Bewegungsbahn getestet, die die Szene verlassen hat oder verlässt, um zu bestimmen, ob sie mit der berechneten Position des Kandidatenfahrzeugs überlappt, was bedeutet, dass sich ein sich bewegendes Fahrzeug in der Nähe des stationären Fahrzeugs in dem Verbotsabschnitt befindet. In anderen Worten erkennt das System mindestens ein zweites Fahrzeug, das einer weiteren Bewegungsbahn in der Bildfolge entspricht.
  • Gleichzeitig wird jede Bewegungsbahn, die für länger als eine zuvor festgelegte Zeitspanne verloren geht, wie für ein paar Sekunden, insbesondere für 2 Sekunden, auch in Bezug auf die berechnete Position des Kandidatenfahrzeugs getestet. Die Bewegungsbahnen werden analysiert, um bei S646 zu bestimmen, ob sie eine Front des Kandidatenfahrzeugs passieren, d.h. das Fahrzeug umfahren. In 7A ist z.B. die Front eines Kandidatenfahrzeugs als der am weitesten links gelegene Pixel in dem identifizierten Abschnitt 76 dargestellt. Wenn eine Bewegungsbahn und das Kandidatenfahrzeug überlappen (JA bei S646), erfasst das Modul 122 bei S648, dass die Bewegungsbahn zu einem sich bewegenden Fahrzeug gehört, das das Kandidatenfahrzeug umfahren hat, weil das letztere steht und den Verkehrsfluss behindert. 7B zeigt eine Bewegungsbahn 78 eines sich bewegenden Fahrzeugs 80, die virtuell in dem Beispielbild markiert ist und anzeigt, dass der Weg um das Kandidatenfahrzeug 82 herum verläuft. In Reaktion auf das Erfassen des Verkehrsflussmusters um ein Kandidatenfahrzeug herum ändert das Modul 22 den Status des erfassten, stationären Fahrzeugs von „Kandidat“ auf „Verletzer“. Das stationäre, erfasste Fahrzeug wird bei S650 als in zweiter Reihe parkend und als gegen eine Verkehrsregel verstoßend klassifiziert. Es kann jedoch ein triftiger Grund bestehen, weshalb sich das Flussmuster um das Verletzer-Fahrzeug herum bewegt. Das Verletzer-Fahrzeug kann tatsächlich ein Baufahrzeug sein, das in Zusammenhang mit einer Mannschaft steht, die an der Straße oder an den Abflusskanälen neben der Straße arbeitet. In einer Ausführungsform bestimmt das Modul 122 bei S649 in Reaktion auf das Erfassen von Fahrzeugen, die ein Kandidatenfahrzeug (bei S648) umfahren, ob das stationäre Fahrzeug von einem Typ mit Ausnahmegenehmigung ist. In Reaktion darauf, dass das stationäre Fahrzeug über eine Ausnahmegenehmigung verfügt (JA bei S649), klassifiziert das Modul 122 bei S664 das stationäre Fahrzeug als nicht in zweiter Reihe parkend und als nicht gegen eine Verkehrsregel verstoßend. In Reaktion darauf, dass das stationäre Fahrzeug nicht über eine Ausnahmegenehmigung verfügt (NEIN bei S649), klassifiziert das Modul 122 bei S650 das stationäre Fahrzeug als in zweiter Reihe parkend und als gegen eine Verkehrsregel verstoßend.
  • Wenn die Bewegungsbahn und das Kandidatenfahrzeug nicht überlappen (NEIN bei S646), bestimmt das Modul 122 bei S652, dass die Bewegungsbahn zu einem sich bewegenden Fahrzeug gehört, dessen Weg nicht durch das stationäre Fahrzeug behindert wird. Der identifizierte Status des erfassten, stationären Fahrzeugs bleibt bei S654 „Kandidat“.
  • In einer Ausführungsform wird die Anzahl von Fahrzeugen, die sich um das stationäre, erfasste Fahrzeug herum bewegen, gezählt und einem Nutzer angezeigt. 7 zeigt diesen Zählwert auf dem Bild in einem Beispiel an.
  • Obwohl 6A-6C als unabhängige entscheidungstreffende Prozesse beschrieben sind, wobei jeder Prozess schlussfolgert, ob ein mutmaßlicher Verletzer tatsächlich zu einem Verletzer wird oder nicht, kann die endgültige Entscheidung eine Kombination der Ergebnisse aller dreier Prozesse sein. Die endgültige Entscheidung kann z.B. auf einem Mehrheitsvotum aller dreier Prozesse basieren. In einem weiteren Beispiel kann das Kandidatenfahrzeug als Verletzer erklärt werden, wenn das Ergebnis eines beliebigen (oder zweier beliebiger oder aller dreier) Prozesse(s) den Fahrzeugstatus als zu einem verstoßenden Fahrzeug gehörig klassifiziert. In einem weiteren Beispiel kann die Entscheidung auf der Konfidenz einer Kombination erfasster Ereignisse basieren. Die Konfidenz kann unter Verwendung des Abstands zwischen dem Kandidatenfahrzeug und dem Bezugspunkt gemessen werden, der als Teil des für 6A beschriebenen Prozesses bestimmt werden kann; und die Konfidenz kann unter Verwendung der Fahrzeuganzahl, die sich um den mutmaßlichen Verletzer herum bewegen, gemessen werden, welche als Teil des in 6C beschriebenen Prozesses bestimmt werden kann.
  • Obwohl wir 6A-6C als unabhängige entscheidungstreffende Prozesse beschreiben, die in beliebiger Reihenfolge ausgeführt werden können, kann es vorteilhaft sein, sie in der Rechenvorrichtung parallel oder aber in einer bestimmten Reihenfolge auszuführen. So kann z.B. der Prozess von 6A aufgrund seiner einfachen Berechnung zuerst ausgeführt werden. Wenn der Abstand einen Grenzwert überschreitet, abbrechen und einen Verstoß erklären. Wenn nicht, mit 6B fortfahren. Entsprechen kann basierend auf den Ergebnissen und der Zuverlässigkeit der Ergebnisse ein Verstoß erklärt werden oder mit 6C fortgefahren werden.
  • Zusätzlich zu den oben aufgezählten Hinweisen können in mehrspurigen Verkehrsszenarien auch Unterschiede im Verkehrsfluss zwischen Verbotsabschnitt und benachbarter Verkehrsspur als Hinweis auf einen Verstoß verwendet werden. Diese Bestimmung kann anstelle von oder zusätzlich zu der für das einspurige Verkehrsszenario beschriebenen Umfahrungserkennung verwendet werden. Das Verfahren endet bei S656.
  • Zurück zu 4, bestimmt das System, nachdem es das Ereignis bei S420 analysiert hat, ob der Hinweis auf das Ereignis einen Verstoß des Kandidatenfahrzeugs durch Parken in zweiter Reihe basierend auf dem Hinweis bei S422 bestätigt. In Reaktion auf den Hinweis, der das Parken des Kandidatenfahrzeugs in zweiter Reihe bestätigt (JA bei S422), bestimmt das System bei S423, ob das Kandidatenfahrzeug von einem Typ mit einer Ausnahmegenehmigung ist. In Reaktion darauf, dass das stationäre Fahrzeug keine Ausnahmegenehmigung besitzt (NEIN bei S423), gibt das Benachrichtigungsmodul bei S424 über die Kommunikationsschnittstelle eine Verstoßmeldung an einen Nutzer an die Ausgabevorrichtung aus. Die Verstoßmeldung kann in verschiedenen Formen ausgegeben werden. In einer Ausführungsform kann das Verletzer-Fahrzeug unter Verwendung von Bildanalysetechniken zur Erkennung des amtlichen Kennzeichens identifiziert werden. Wenn das amtliche Kennzeichen identifiziert ist, kann ein Bußgeldbescheid oder eine Verwarnung an den Fahrzeughalter verschickt werden. In einer weiteren Ausführungsform wird die Meldung durch das Benachrichtigungsmodul 124 an den Verkehrsbetrieb oder das Ordnungsamt gesendet werden, die die Szene aufsuchen können, um geeignete Maßnahmen einzuleiten. In einer weiteren Ausführungsform kann diese Information an einen Analytiker gesendet werden, der Verkehrsflussmuster überwacht und untersucht. In Reaktion auf das stationäre Fahrzeug mit Ausnahmegenehmigung (JA bei S423) wird das Fahrzeug von dem Fahrzeug-Klassifizierungsmodul 122 bei 426 als nicht in zweiter Reihe parkend klassifiziert.
  • In Reaktion auf den Hinweis, der bestätigt, dass das Kandidatenfahrzeug nicht in zweiter Reihe parkt (NEIN bei S422), wird das Fahrzeug von dem Fahrzeug-Klassifizierungsmodul 122 bei S426 als nicht in zweiter Reihe parkend klassifiziert. Das Verfahren endet bei S428.
  • Eine Erscheinungsform der Offenbarung ist es, dass sie Hinweise weiterer Überlegungen analysiert, um die Robustheit einer Entscheidung in Bezug auf Parken in zweiter Reihe zu erhöhen, um zu bestimmen, ob ein stationäres Fahrzeug in einem Verbotsabschnitt gegen eine Bestimmung verstößt. Insbesondere das Erfassen einer Ampel, freier Straßenabschnitte vor dem erfassten, stationären Fahrzeug, Koordination mit Ampelinformationen, Kenntnis des Abstands zur nächsten Kreuzung und Analyse von Bewegungsmustern des umgebenden Verkehrs können verwendet werden, um die Genauigkeit der Entscheidung zu verbessern. Eine weitere Erscheinungsform dieses Prozesses ist es, dass er größere Flexibilität bei der Definition des Verbotsabschnitts bietet.
  • Obwohl das Verfahren (2, 4, 6A-C und 8A-B) oben in Form einer Reihe von Handlungen oder Ereignissen dargestellt ist, versteht es sich, dass die verschiedenen Verfahren oder Prozesse der vorliegenden Offenbarung nicht durch die dargestellte Reihung solcher Handlungen oder Ereignisse eingeschränkt werden. In diesem Zusammenhang können, außer wenn dies hiernach besonders genannt wird, einige Handlungen oder Ereignisse in anderer Reihenfolge und/oder gleichzeitig mit anderen, hier nicht dargestellten und beschriebenen Handlungen oder Ereignissen gemäß der Offenbarung auftreten. Es wird weiterhin angemerkt, dass nicht alle dargestellten Schritte erforderlich sein müssen, um einen Prozess oder ein Verfahren gemäß der vorliegenden Offenbarung zu implementieren, und es können ein oder mehrere solcher Handlungen kombiniert werden. Die dargestellten Verfahren und weitere Verfahren der Offenbarung können in Hardware, Software oder Kombinationen davon implementiert werden, um die hier beschriebene Steuerfunktion bereitzustellen, und sie können in einem beliebigen System eingesetzt werden, einschließlich, ohne hierauf beschränkt zu sein, in das oben dargestellte System 100, wobei die Offenbarung nicht auf die hier dargestellten und beschriebenen bestimmten Anwendungen und Ausführungsformen beschränkt ist.
  • Es versteht sich, dass Varianten des oben Offenbarten sowie andere Eigenschaften und Funktionen oder Alternativen davon zu vielen weiteren verschiedenen Systemen oder Anwendungen kombiniert werden können. Verschiedene gegenwärtig unvorhergesehene oder nicht in Erwägung gezogene Alternativen, Modifikationen, Variationen oder Verbesserungen daran können anschließend von einem Fachmann vorgenommen werden, und diese sollen ebenfalls von den folgenden Ansprüchen umfasst sein.

Claims (8)

  1. System zum Erfassen eines in zweiter Reihe parkenden Fahrzeugs, wobei das System Folgendes umfasst: eine Bestätigungsvorrichtung für Parken in zweiter Reihe, das einen Speicher zum Speichern von Modulen umfasst, umfassend: ein Abschnittsbestimmungsmodul zum Identifizieren eines Parkabschnitts und eines Verbotsabschnitts, der mindestens teilweise den Parkabschnitt umgibt, in einer Folge von Bildern, die von einer Bilderfassungsvorrichtung empfangen wird, die den Parkabschnitt überwacht; ein Fahrzeug-Erfassungsmodul zum Erfassen eines stationären, mutmaßlich in dem Verbotsabschnitt in zweiter Reihe parkenden Fahrzeugs; ein Fahrzeug-Klassifizierungsmodul zum: Feststellen des Eintretens eines Ereignisses in Bezug auf das stationäre, mutmaßlich in zweiter Reihe parkende Fahrzeug, Klassifizieren, in Reaktion auf das festgestellte Eintreten des Ereignisses, des stationären, mutmaßlich in zweiter Reihe parkenden Fahrzeugs als ein in zweiter Reihe parkendes bzw. ein nicht in zweiter Reihe parkendes Fahrzeug; Erfassen, ob die Warnblinkanlage an dem stationären, mutmaßlich in zweiter Reihe parkenden Fahrzeug eingeschaltet ist; und Klassifizieren, in Reaktion auf die eingeschaltete Warnblinkanlage an dem stationären, mutmaßlich in zweiter Reihe parkenden Fahrzeug, des stationären, mutmaßlich in zweiter Reihe parkenden Fahrzeugs als in zweiter Reihe parkend; und einen Prozessor in Kommunikation mit dem Speicher und zum Steuern der Module.
  2. System nach Anspruch 1, wobei das Fahrzeug-Klassifizierungsmodul weiterhin wirksam ist: einen Warnblinkleuchtenbereich in der Folge von Bildern zu identifizieren, die ein Vorderlicht oder ein Rücklicht umgeben; Pixelfarben in dem Warnblinkleuchtenbereich in der Bildfolge zu bestimmen; in Reaktion auf Änderungen der Pixelfarben zwischen Bildern das stationäre, mutmaßlich in zweiter Reihe parkende Fahrzeug als mit eingeschalteter Warnblinkanlage zu klassifizieren.
  3. System nach Anspruch 1, wobei das Erfassen des Eintretens des Ereignisses weiter Folgendes umfasst: Erfassen, ob das stationäre, mutmaßlich in zweiter Reihe parkende Fahrzeug eine Ausnahmegenehmigung besitzt.
  4. System nach Anspruch 3, wobei die Ausnahme als vorliegend bestimmt wird, wenn das stationäre, in zweiter Reihe parkende Fahrzeug ein Einsatzfahrzeug oder ein kommerzielles Fahrzeug ist.
  5. System nach Anspruch 1, wobei das Fahrzeug-Klassifizierungsmodul weiterhin wirksam ist: ein zweites Fahrzeug in der Bildfolge zu erfassen; eine Bewegungsbahn des zweiten Fahrzeugs über eine Anzahl von Bildern zu erfassen; zu erfassen, ob sich die Bewegungsbahn um das stationäre, mutmaßlich in zweiter Reihe parkende Fahrzeug herum bewegt und in Reaktion darauf, dass sich die Bewegungsbahn um das stationäre, mutmaßlich in zweiter Reihe parkende Fahrzeug herum bewegt, das stationäre, mutmaßlich in zweiter Reihe parkende Fahrzeug als in zweiter Reihe parkend zu klassifizieren.
  6. System nach Anspruch 1, das weiter ein Benachrichtigungsmodul umfasst, das angepasst ist, um: in Reaktion darauf, dass das stationäre, mutmaßlich in zweiter Reihe parkende Fahrzeug als in zweiter Reihe parkend klassifiziert wurde, das stationäre, mutmaßlich in zweiter Reihe parkende Fahrzeug mit einem in zweiter Reihe parkenden Fahrzeug zu verknüpfen und dem Nutzer eine Meldung als Ausgabe bereitzustellen.
  7. System nach Anspruch 1, wobei das Fahrzeug-Klassifizierungsmodul weiterhin wirksam ist: mehrere Ereignisse zum Bestätigen zu berücksichtigen, um zu bestätigen, ob das stationäre, mutmaßlich in zweiter Reihe parkende Fahrzeug in zweiter Reihe parkt.
  8. System nach Anspruch 1, das weiter eine Ausgabevorrichtung zum Bereitstellen der Klassifizierung an einen Nutzer umfasst.
DE102015200589.5A 2014-01-22 2015-01-15 Verbessertes videobasiertes System zur automatisierten Erkennung von Verstössen durch Parken in zweiter Reihe Active DE102015200589B4 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/161,016 2014-01-22
US14/161,016 US11244171B2 (en) 2014-01-22 2014-01-22 Video-based system for automated detection of double parking violations

Publications (2)

Publication Number Publication Date
DE102015200589A1 DE102015200589A1 (de) 2015-07-23
DE102015200589B4 true DE102015200589B4 (de) 2023-03-23

Family

ID=52630848

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102015200589.5A Active DE102015200589B4 (de) 2014-01-22 2015-01-15 Verbessertes videobasiertes System zur automatisierten Erkennung von Verstössen durch Parken in zweiter Reihe

Country Status (3)

Country Link
US (1) US11244171B2 (de)
DE (1) DE102015200589B4 (de)
GB (1) GB2524368B (de)

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9953247B2 (en) * 2015-01-29 2018-04-24 Samsung Electronics Co., Ltd. Method and apparatus for determining eye position information
US10043307B2 (en) * 2015-04-17 2018-08-07 General Electric Company Monitoring parking rule violations
CN106878668B (zh) * 2015-12-10 2020-07-17 微软技术许可有限责任公司 对物体的移动检测
DE102015225413A1 (de) * 2015-12-16 2017-06-22 Robert Bosch Gmbh Verfahren zur Erkennung von Falschparkern
CN105809975B (zh) * 2016-05-30 2018-11-27 北京精英智通科技股份有限公司 一种异常停车判断方法和装置
CN106023594A (zh) * 2016-06-13 2016-10-12 北京精英智通科技股份有限公司 一种车位遮挡的判定方法、装置及车辆管理系统
CN105869182B (zh) * 2016-06-17 2018-10-09 北京精英智通科技股份有限公司 一种停车位状态检测方法和系统
CN107610499A (zh) * 2016-07-11 2018-01-19 富士通株式会社 停车位状态的检测方法、检测装置和电子设备
DE102016214860B4 (de) 2016-08-10 2022-06-02 Audi Ag Verfahren zur Überwachung zumindest eines Fahrzeugs mit mindestens einer Überwachungskamera, Überwachungskamera sowie Fahrzeug
US10776640B2 (en) * 2017-01-06 2020-09-15 International Business Machines Corporation Enhanced vehicle monitoring
CN106878674B (zh) * 2017-01-10 2019-08-30 哈尔滨工业大学深圳研究生院 一种基于监控视频的停车检测方法及装置
US10157476B1 (en) * 2017-06-15 2018-12-18 Satori Worldwide, Llc Self-learning spatial recognition system
DE102017210253A1 (de) * 2017-06-20 2018-12-20 Robert Bosch Gmbh Verfahren und Vorrichtung zum Bearbeiten einer Parkplatzanfrage
KR102460915B1 (ko) 2017-10-27 2022-10-31 한화테크윈 주식회사 교통정보 제공 방법, 장치 및 그러한 방법을 실행하기 위하여 매체에 저장된 컴퓨터 프로그램
JP7150447B2 (ja) * 2018-02-28 2022-10-11 株式会社小松製作所 情報提示装置および情報提示方法
US20180224860A1 (en) * 2018-04-02 2018-08-09 GM Global Technology Operations LLC Autonomous vehicle movement around stationary vehicles
CN110032947B (zh) * 2019-03-22 2021-11-19 深兰科技(上海)有限公司 一种监控事件发生的方法及装置
US11635893B2 (en) 2019-08-12 2023-04-25 Micron Technology, Inc. Communications between processors and storage devices in automotive predictive maintenance implemented via artificial neural networks
US11853863B2 (en) 2019-08-12 2023-12-26 Micron Technology, Inc. Predictive maintenance of automotive tires
US11775816B2 (en) 2019-08-12 2023-10-03 Micron Technology, Inc. Storage and access of neural network outputs in automotive predictive maintenance
US11586194B2 (en) 2019-08-12 2023-02-21 Micron Technology, Inc. Storage and access of neural network models of automotive predictive maintenance
US11748626B2 (en) 2019-08-12 2023-09-05 Micron Technology, Inc. Storage devices with neural network accelerators for automotive predictive maintenance
US11586943B2 (en) 2019-08-12 2023-02-21 Micron Technology, Inc. Storage and access of neural network inputs in automotive predictive maintenance
US11702086B2 (en) 2019-08-21 2023-07-18 Micron Technology, Inc. Intelligent recording of errant vehicle behaviors
US10993647B2 (en) 2019-08-21 2021-05-04 Micron Technology, Inc. Drowsiness detection for vehicle control
US11042350B2 (en) 2019-08-21 2021-06-22 Micron Technology, Inc. Intelligent audio control in vehicles
US11361552B2 (en) * 2019-08-21 2022-06-14 Micron Technology, Inc. Security operations of parked vehicles
US11498388B2 (en) 2019-08-21 2022-11-15 Micron Technology, Inc. Intelligent climate control in vehicles
US11693562B2 (en) 2019-09-05 2023-07-04 Micron Technology, Inc. Bandwidth optimization for different types of operations scheduled in a data storage device
US11409654B2 (en) 2019-09-05 2022-08-09 Micron Technology, Inc. Intelligent optimization of caching operations in a data storage device
US11650746B2 (en) 2019-09-05 2023-05-16 Micron Technology, Inc. Intelligent write-amplification reduction for data storage devices configured on autonomous vehicles
US11435946B2 (en) 2019-09-05 2022-09-06 Micron Technology, Inc. Intelligent wear leveling with reduced write-amplification for data storage devices configured on autonomous vehicles
US11436076B2 (en) 2019-09-05 2022-09-06 Micron Technology, Inc. Predictive management of failing portions in a data storage device
EP3809313A1 (de) * 2019-10-16 2021-04-21 Ningbo Geely Automobile Research & Development Co. Ltd. Fahrzeugparkplatzfinderunterstützungssystem, verfahren und computerprogrammprodukt zum bestimmen, ob sich ein fahrzeug an einer bezugsparkplatzposition befindet
US11250648B2 (en) 2019-12-18 2022-02-15 Micron Technology, Inc. Predictive maintenance of automotive transmission
US11709625B2 (en) 2020-02-14 2023-07-25 Micron Technology, Inc. Optimization of power usage of data storage devices
US11531339B2 (en) 2020-02-14 2022-12-20 Micron Technology, Inc. Monitoring of drive by wire sensors in vehicles
CN111490594A (zh) * 2020-04-16 2020-08-04 广州劲源科技发展股份有限公司 基于变电站应用的视频联动双确认交互方法
CN112071093A (zh) * 2020-04-22 2020-12-11 义硕智能股份有限公司 交通号志灯的控制系统及方法
CN112163544B (zh) * 2020-10-12 2024-02-20 北京易华录信息技术股份有限公司 一种非机动车辆乱摆放的判断方法及系统
CN112419733B (zh) * 2020-10-16 2023-05-05 杭州智行星科技有限公司 一种用户不规范停车的检测方法、装置、设备和存储介质
US11810346B2 (en) * 2021-06-07 2023-11-07 Goodrich Corporation Land use for target prioritization
CN113570872B (zh) * 2021-08-13 2022-10-14 深圳市捷顺科技实业股份有限公司 一种遮挡停车位事件的处理方法及装置
JP7185740B1 (ja) * 2021-08-30 2022-12-07 三菱電機インフォメーションシステムズ株式会社 領域特定装置、領域特定方法及び領域特定プログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130266185A1 (en) 2012-04-06 2013-10-10 Xerox Corporation Video-based system and method for detecting exclusion zone infractions
US20130266190A1 (en) 2012-04-06 2013-10-10 Xerox Corporation System and method for street-parking-vehicle identification through license plate capturing
US20140036076A1 (en) 2012-08-06 2014-02-06 Steven David Nerayoff Method for Controlling Vehicle Use of Parking Spaces by Use of Cameras

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2132515C (en) * 1992-03-20 2006-01-31 Glen William Auty An object monitoring system
DE19926559A1 (de) * 1999-06-11 2000-12-21 Daimler Chrysler Ag Verfahren und Vorrichtung zur Detektion von Objekten im Umfeld eines Straßenfahrzeugs bis in große Entfernung
US20030076417A1 (en) 2001-08-07 2003-04-24 Patrick Thomas Autonomous monitoring and tracking of vehicles in a parking lot to enforce payment rights
US9052386B2 (en) * 2002-02-06 2015-06-09 Nice Systems, Ltd Method and apparatus for video frame sequence-based object tracking
US7382277B2 (en) 2003-02-12 2008-06-03 Edward D. Ioli Trust System for tracking suspicious vehicular activity
US20050104958A1 (en) * 2003-11-13 2005-05-19 Geoffrey Egnal Active camera video-based surveillance systems and methods
US8321122B2 (en) * 2007-11-28 2012-11-27 The Boeing Company System and method for evidential reasoning for transportation scenarios
US8229618B2 (en) * 2008-09-11 2012-07-24 Deere & Company Leader-follower fully autonomous vehicle with operator on side
US8629784B2 (en) * 2009-04-02 2014-01-14 GM Global Technology Operations LLC Peripheral salient feature enhancement on full-windshield head-up display
US9626769B2 (en) * 2009-09-04 2017-04-18 Stmicroelectronics International N.V. Digital video encoder system, method, and non-transitory computer-readable medium for tracking object regions
US8378850B2 (en) * 2009-09-11 2013-02-19 Ford Global Technologies, Llc Vehicle park assist system and method for parking a vehicle using such system
EP2423063B1 (de) * 2010-08-23 2013-03-06 Harman Becker Automotive Systems GmbH Verfahren zur Erfassung des Bremsens eines Fahrzeugs
WO2012059705A1 (en) * 2010-11-05 2012-05-10 Activ8Vps Limited System and method for implementing an exception to a parking restriction
US8766818B2 (en) * 2010-11-09 2014-07-01 International Business Machines Corporation Smart spacing allocation
US20130265419A1 (en) 2012-04-06 2013-10-10 Xerox Corporation System and method for available parking space estimation for multispace on-street parking
US9014914B2 (en) * 2013-04-10 2015-04-21 Here Global B.V. Method and apparatus for establishing a communication session between parked vehicles to determine a suitable parking situation
US9102330B2 (en) * 2013-07-31 2015-08-11 Here Global B.V. Method and apparatus for causing an adjustment in parking position for vehicles
US10025990B2 (en) * 2014-05-21 2018-07-17 Universal City Studios Llc System and method for tracking vehicles in parking structures and intersections

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130266185A1 (en) 2012-04-06 2013-10-10 Xerox Corporation Video-based system and method for detecting exclusion zone infractions
US20130266190A1 (en) 2012-04-06 2013-10-10 Xerox Corporation System and method for street-parking-vehicle identification through license plate capturing
US20140036076A1 (en) 2012-08-06 2014-02-06 Steven David Nerayoff Method for Controlling Vehicle Use of Parking Spaces by Use of Cameras

Also Published As

Publication number Publication date
GB201500930D0 (en) 2015-03-04
DE102015200589A1 (de) 2015-07-23
GB2524368B (en) 2021-01-13
US20150206014A1 (en) 2015-07-23
US11244171B2 (en) 2022-02-08
GB2524368A (en) 2015-09-23

Similar Documents

Publication Publication Date Title
DE102015200589B4 (de) Verbessertes videobasiertes System zur automatisierten Erkennung von Verstössen durch Parken in zweiter Reihe
US8666117B2 (en) Video-based system and method for detecting exclusion zone infractions
DE112017007050B4 (de) Informationsverarbeitungsvorrichtung, Informationsverarbeitungsverfahren und Informationsverarbeitungsprogramm
US9224049B2 (en) Detection of static object on thoroughfare crossings
JP5815910B2 (ja) マルチキュー・オブジェクトの検出および分析のための方法、システム、製品、およびコンピュータ・プログラム(マルチキュー・オブジェクトの検出および分析)
US11380105B2 (en) Identification and classification of traffic conflicts
CN104537841B (zh) 无牌车辆违章检测方法及其检测系统
EP2386092B1 (de) Vorrichtung, verfahren und computerprogramm zum bildbasierten zählen von objekten, die eine zählstrecke in einer vorgegebenen richtung durchschreiten
US20130265423A1 (en) Video-based detector and notifier for short-term parking violation enforcement
US20130266190A1 (en) System and method for street-parking-vehicle identification through license plate capturing
DE102013217570A1 (de) Verfahren zur bekämpfung von stoppschildverletzungen mittels bewegungsvektoren in videoströmen
Sanchez et al. Video-based distance traffic analysis: Application to vehicle tracking and counting
DE102009023326A1 (de) Vorrichtung und Verfahren zum Detektieren eines kritischen Bereiches und Fußgängerdetektionsvorrichtung unter Verwendung derselben
EP2306426A1 (de) Vorrichtung zur Detektion von Fahrzeugen auf einer Verkehrsfläche
EP2521070A2 (de) Verfahren und System zum Erfassen einer statischen oder dynamischen Szene, zum Bestimmen von Rohereignissen und zum Erkennen von freien Flächen in einem Beobachtungsgebiet
EP2341367B1 (de) Verfahren und Anordnung zur Erfassung von Verkehrsverstößen in einem Ampelbereich
Shinde et al. Traffic optimization algorithms in optical networks for real time traffic analysis
KR101936004B1 (ko) 지능형 보행자 검출 방법
Vijayaraj et al. Traffic congestion control of vehicles based on edge detection using image processing
EP1732051A1 (de) Verfahren und Vorrichtung zur Verkehrsüberwachung
Cheewapattananuwong et al. Mitigating traffic congestion and accidents in Thailand with intelligent transportation system technology
Jayasinghe et al. Highways traffic surveillance using internet protocol cameras and open source computer vision library
Noh et al. Vision based pedestrian potential risk analysis based on automated behavior feature extraction for smart and safe city
Gao et al. Crossing road monitoring system based on adaptive decision for illegal situation
KR102640351B1 (ko) 이중 영상을 이용한 주차장 전용 꼬리물기 단속 시스템

Legal Events

Date Code Title Description
R081 Change of applicant/patentee

Owner name: CONDUENT BUSINESS SERVICES, LLC, FLORHAM PARK, US

Free format text: FORMER OWNER: XEROX CORPORATION, NORWALK, CONN., US

Owner name: CONDUENT BUSINESS SERVICES, LLC (N.D.GES.D. ST, US

Free format text: FORMER OWNER: XEROX CORPORATION, NORWALK, CONN., US

R082 Change of representative

Representative=s name: GRUENECKER PATENT- UND RECHTSANWAELTE PARTG MB, DE

R012 Request for examination validly filed
R081 Change of applicant/patentee

Owner name: CONDUENT BUSINESS SERVICES, LLC, FLORHAM PARK, US

Free format text: FORMER OWNER: CONDUENT BUSINESS SERVICES, LLC (N.D.GES.D. STAATES DELAWARE), DALLAS, TEX., US

R082 Change of representative

Representative=s name: GRUENECKER PATENT- UND RECHTSANWAELTE PARTG MB, DE

R016 Response to examination communication
R018 Grant decision by examination section/examining division
R020 Patent grant now final