DE102018109676A1 - Ereignisrekonstruierung durch Bildmeldung - Google Patents

Ereignisrekonstruierung durch Bildmeldung Download PDF

Info

Publication number
DE102018109676A1
DE102018109676A1 DE102018109676.3A DE102018109676A DE102018109676A1 DE 102018109676 A1 DE102018109676 A1 DE 102018109676A1 DE 102018109676 A DE102018109676 A DE 102018109676A DE 102018109676 A1 DE102018109676 A1 DE 102018109676A1
Authority
DE
Germany
Prior art keywords
images
event
traffic incident
remote entities
central entity
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102018109676.3A
Other languages
English (en)
Inventor
Leonard E. Carrier
Seok Lee
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ford Global Technologies LLC
Original Assignee
Ford Global Technologies LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ford Global Technologies LLC filed Critical Ford Global Technologies LLC
Publication of DE102018109676A1 publication Critical patent/DE102018109676A1/de
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/025—Services making use of location information using location based information parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/261—Image signal generators with monoscopic-to-stereoscopic image conversion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/05—Geographic models
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/94—Hardware or software architectures specially adapted for image or video understanding
    • G06V10/95—Hardware or software architectures specially adapted for image or video understanding structured as a network, e.g. client-server architectures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841—Registering performance data
    • G07C5/085—Registering performance data using electronic data carriers
    • G07C5/0866—Registering performance data using electronic data carriers the electronic data carrier being a digital video recorder in combination with video camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/243—Image signal generators using stereoscopic image cameras using three or more 2D image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/06—Selective distribution of broadcast services, e.g. multimedia broadcast multicast service [MBMS]; Services to user groups; One-way selective calling services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30—Services specially adapted for particular environments, situations or purposes
    • H04W4/40—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W2030/082—Vehicle operation after collision
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/01—Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/13—Receivers
    • G01S19/14—Receivers specially adapted for specific applications
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/08—Indexing scheme for image data processing or generation, in general involving all processing steps from image acquisition to 3D model generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30248—Vehicle exterior or interior
    • G06T2207/30252—Vehicle exterior; Vicinity of vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/52—Network services specially adapted for the location of the user terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80—Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Geometry (AREA)
  • Computer Graphics (AREA)
  • Remote Sensing (AREA)
  • Traffic Control Systems (AREA)
  • Alarm Systems (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Studio Devices (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

Ein Verfahren der Verkehrsvorfallrekonstruierung, einschließlich des Erfassens eines Vorfalls eines meldepflichtigen Ereignisses. Es wird eine Nachricht gesendet, die das meldepflichtige Ereignis an entfernte Entitäten identifiziert. Es werden 2-D-Bilder von Kameras erfasst, die an den entfernten Entitäten in der Nähe des meldepflichtigen Ereignisses befestigt sind. Die erfassten Bilder werden von den entfernten Entitäten an eine zentrale Entität übertragen. Es wird ein 3-D-Verkehrsvorfall von der zentralen Entität basierend auf den von den entfernten Entitäten erfassten Bildern erzeugt.

Description

  • STAND DER TECHNIK
  • Die vorliegende Erfindung betrifft im Allgemeinen die Verkehrsvorfallrekonstruierung durch Bildmeldung.
  • Die digitale Bildgebung erlaubt es Benutzern, eine Vielzahl von Bildern eines Verkehrsvorfalls leicht zu erfassen. Bilderfassungsvorrichtungen durch Speichern erlauben es dem Benutzer, die Vielzahl von Bildern zu erfassen und später zu bestimmen, welche Bilder relevant sind, und welche nicht. Der Benutzer ist dabei durch seine Ansichtsperspektive des Verkehrsvorfalls und einen zugeordneten Zeitraum, in dem ein Benutzer ein Bild erfassen kann, limitiert. Falls ein Benutzer z. B. versucht, einen dynamischen Verkehrsvorfall zu erfassen, ist der Benutzer durch den Zeitraum, in dem der Verkehrsvorfall dynamisch ist, und durch die Ansichtsperspektive der Bilderfassungsvorrichtung, limitiert. Alternativ, falls ein Benutzer einen unbeweglichen Verkehrsvorfall erfasst, während der Benutzer dynamisch ist (z. B. in einem Fahrzeug vorbeifährt), ist der Benutzer wiederum durch seine Ansichtsperspektive entlang seines Wegs und durch die Ansichtszeit, während welcher er sich in der Nähe des Verkehrsvorfalls befindet, der erfasst wird, limitiert.
  • Daher kann es beim Erfassen eines meldepflichtigen Ereignisses für einen Benutzer, der sich z. B. einem Verkehrsvorfall (z. B. einem Unfall) annähert, vorteilhaft sein, ein Bild zu erfassen, falls eine Entität es gegebenenfalls wünscht, Informationen über den Verkehrsvorfall zu verwenden, um den Verkehrsvorfall nachzustellen. Der Benutzer ist jedoch durch den kurzen Zeitraum beschränkt, den der Benutzer eventuell hat, um ein oder mehrere Bilder zu erfassen, während er an dem Verkehrsvorfall vorbeifährt. Die Ansichtsperspektive des Benutzers von dem Weg limitiert den Benutzer ferner. Zusätzlich kann es vorkommen, dass der Benutzer aufgrund dessen Aufmerksamkeit auf den Fahrweg nicht in der Lage ist, ein Bild zu erfassen. Infolgedessen kann die Gelegenheit, Details über den Verkehrsvorfall zu erfassen und bereitzustellen, aufgrund verschiedener Faktoren limitiert sein, auch dann, wenn eine Vielzahl von Bildern von dem Benutzer erfasst worden ist.
  • KURZDARSTELLUNG DER ERFINDUNG
  • In einem Aspekt der Erfindung erhält ein System kooperativ eine Vielzahl von zweidimensionalen Bildern eines meldepflichtigen Ereignisses in verschiedenen Ansichtsperspektiven. Das System erzeugt kollektiv einen dreidimensionalen Verkehrsvorfall basierend auf den in verschiedenen Ansichtsperspektiven erfassten zweidimensionalen Bildern. Ein Vorfall des meldepflichtigen Ereignisses wird an entfernte Entitäten übertragen, die einen Ort des Ereignisses identifizieren. Die entfernten Entitäten in der Nähe des Ereignisses erfassen die Bilder des Ereignisses unter Verwendung von an Fahrzeugen befestigten Kameras in den verschiedenen Ansichtsperspektiven. Die erfassten Bilder werden an eine zentrale Entität zum Erzeugen des dreidimensionalen Verkehrsvorfalls übertragen. Der dreidimensionale Verkehrsvorfall kann von verschiedenen Entitäten verwendet werden, um ein besseres Verständnis über die aktuelle Situation des Ereignisses zu erlangen, um zu bestimmen, ob eine Benachrichtigung des Rettungsdienstes erforderlich ist, oder um später zu analysieren, wodurch der Verkehrsvorfall verursacht wurde und wie groß das Ausmaß des durch den Vorfall verursachten Schadens ist.
  • Das wie hierin beschriebene System erlaubt die Verwendung verschiedener Bilder, die sowohl an verschiedenen Zeitpunkten als auch in verschiedenen Ansichtsperspektiven erfasst worden sind, um kooperativ einen dreidimensionalen Verkehrsvorfall des Ereignisses für eine Analyse nachzustellen. Das Erzeugen des dreidimensionalen Verkehrsvorfalls stellt bessere Details bereit, als sie von einem zweidimensionalen Bild erhalten werden können. Zusätzlich, da die Sendung der Nachricht, Bilderfassung und Übertragung der Nachricht autonom durchgeführt werden, wird der Fahrer nicht mit der Aufgabe der Erfassung der Bilder des Ereignisses abgelenkt und kann sich auf das System verlassen, das Ereignis autonom zu erfassen und diese Informationen an eine Verteilerentität weiterzuleiten.
  • Die Beendigung der Bilderfassungsanfrage wird durch eine zentrale Entität durchgeführt, welche die empfangenen Daten analysiert um zu bestimmen, ob eine ausreichende Menge an Bildern zum Rekonstruieren des Verkehrsvorfalls erfasst worden ist. Alternativ kann die Beendigung sowohl basierend auf einem Zeitablauf als auch einer vorbestimmten Anzahl von erfassten Bildern stattfinden.
  • Eine Ausführungsform zieht ein Verfahren einer Verkehrsvorfallrekonstruierung in Betracht, einschließlich des Erfassens eines Vorfalls eines meldepflichtigen Ereignisses. Es wird eine Nachricht an entfernte Entitäten gesendet, die das meldepflichtige Ereignis identifizieren. Zweidimensionale Bilder werden von Kameras erfasst, die an den entfernten Entitäten in der Nähe des meldepflichtigen Ereignisses befestigt sind. Die erfassten Bilder werden von den entfernten Entitäten an eine zentrale Entität übertragen. Es wird ein dreidimensionaler Verkehrsvorfall des meldepflichtigen Ereignisses von der zentralen Entität basierend auf den von den entfernten Entitäten erfassten Bildern erzeugt.
  • Eine Ausführungsform zieht ein Verkehrsvorfallrekonstruierungssystem in Betracht, einschließlich einer Vielzahl von entfernten Entitäten, die Bilder eines meldepflichtigen Ereignisses aus verschiedenen Ansichtsperspektiven erfassen. Eine zentrale Entität erzeugt einen dreidimensionalen Verkehrsvorfall eines meldepflichtigen Ereignisses basierend auf den erfassten Bildern. Ein Kommunikationssystem sendet Nachrichten an entfernte Entitäten, die das meldepflichtige Ereignis identifizieren und fordert das Erfassen von Bildern des meldepflichtigen Ereignisses an. Eine Verteilerentität empfängt den erzeugten dreidimensionalen Verkehrsvorfall und führt eine Untersuchung der Vorgänge des Ereignisses durch.
  • Figurenliste
    • 1 ist ein Blockdiagramm eines kooperativen Bildsammlungs- und Verkehrsvorfallrekonstruierungssystems.
    • 2 ist ein Ablaufdiagramm einer Technik zum Erzeugen eines 3-D-Verkehrsvorfalls eines Ereignisses.
  • DETAILLIERTE BESCHREIBUNG
  • In 1 ist ein Blockdiagramm eines kooperativen Bildsammlungs- und Verkehrsvorfallrekonstruierungssystems dargestellt. Das System beinhaltet eine zentrale Entität 10, die einen Server, eine Pannenhilfeentität, Cloud oder eine Fahrzeugverarbeitungseinheit enthalten kann, jedoch nicht darauf beschränkt ist. Das System kann ferner Bilderfassungsvorrichtungen 12, ein V2X-Kommunikationssystem 14, eine Speichervorrichtung 16 und eine Verteilerentität 18 beinhalten.
  • Die Bilderfassungsvorrichtungen 12 sind an entfernten Entitäten 20 angeordnet und werden als Reaktion auf eine Benachrichtigung oder Erfassung eines stattfindenden Ereignisses (z. B. Unfall, Straftat etc.) aktiviert. Die Bilderfassungsvorrichtungen 12 erfassen Bilder eines Verkehrsvorfalls des Ereignisses, die von der Perspektive jeder entsprechenden Bilderfassungsvorrichtung aufgenommen werden. Jede der Bilderfassungsvorrichtungen 12 ist an den entfernten Entitäten 20 befestigt, einschließlich, jedoch nicht darauf beschränkt, an Fahrzeugen, autonomen Fahrzeugen, Motorrädern, Pannenhilfevorrichtungen, Fußgängern und Fahrrädern. Die von den entfernten Entitäten 20 erfassten Bilder sind typischerweise zweidimensionale (nachfolgend als 2-D bezeichnete) Bilder. Das System sammelt kooperativ verschiedene Bilder, die von verschiedenen Kameraeinstellungen (z. B. Ansichtsperspektive) aufgenommen wurden, um einen Verkehrsvorfall in 3 Dimensionen (nachfolgend als 3-D bezeichnet) nachzustellen, was für die Erklärung der Ursache des Ereignisresultats des Ereignisses oder Personen, die möglicherweise an den Ereignissen beteiligt waren, behilflich ist. Durch Verwendung von entfernten Entitäten 20, die an dem Verkehrsvorfall vorbeikommen, wird das Ereignis in verschiedenen Ansichtsperspektiven erfasst und wenn kollektiv betrachtet, stellen die kollektiven Bilder einen 3-D-Verkehrsvorfall des Ereignisses bereit.
  • Das V2X-Kommunikationssystem 14 wird verwendet, um zwischen den verschiedenen Entitäten zu kommunizieren. Das V2X-Kommunikationssystem 14 kann Fahrzeug-zu-Fahrzeug-Kommunikationen (V2V), Fahrzeug-zu-Infrastruktur (V2I) und Fahrzeug-zu-Fußgänger (V2P) beinhalten, ist jedoch nicht beschränkt darauf. V2V-Kommunikationen können beispielsweise dedizierte Kurzstreckenkommunikationen (Dedicated Short Range Communications - (DSRC)) anwenden, bei denen es sich um drahtlose Zweiwege-Kurz- bis Mittelstreckenkommunikationen handelt, die eine sehr hohe Datenübertragung in aktiven Sicherheitsanwendungen auf Kommunikationsbasis zur Warnung von Fahrzeugen und Entitäten des Ereignisses in der Umgebung erlauben.
  • Wenn das Ereignis einmal identifiziert worden ist, kann die Entität, die das Ereignis identifiziert hat, einen Ort des Ereignisses unter Verwendung von GPS-Koordinaten kommunizieren, die von einem am Fahrzeug befindlichen GPS-System oder von anderen entfernten Entitäten in der Umgebung erhalten werden. Während jede entfernte Entität an dem Ort des Ereignisses vorbeikommt, können Bilder von dem Ereignis aus verschiedenen Ansichtsperspektiven erfasst werden. Es versteht sich, dass die Benachrichtigung der Entitäten in der Umgebung autonom durchgeführt wird, sodass ein Fahrer eines Fahrzeugs nicht durch das Ereignis abgelenkt wird, um selbst manuell Bilder erfassen zu müssen. Anstelle dessen erfasst jede Entität Bilder autonom, während sich diese am Verkehrsvorfallort befindet, basierend auf dem übertragenen GPS-Ort. Infolgedessen kann sich der Fahrer eines Fahrzeugs auf den Straßenweg konzentrieren, während das Bildgebungssystem ein oder mehrere Bilder des Verkehrsvorfalls erfasst.
  • Die von jeder entfernten Entität erfassten Bilder werden zur Verarbeitung an die zentrale Entität 10 kommuniziert. Die zentrale Entität 10 kann ein Serversystem, ein dediziertes Fahrzeug oder eine Cloud zur Verarbeitung der Bilddaten beinhalten. Die zentrale Entität 10 kann die Speichervorrichtung 16 einsetzen, falls zusätzlicher Speicherplatz zum Speichern der Bilddaten benötigt wird.
  • Die zentrale Entität 10 erzeugt einen 3-D-Verkehrsvorfall unter Verwendung der 2-D-Bilder. Wenn eine Aussagewahrscheinlichkeit einen Grenzwert erreicht hat, der signalisiert, dass die gesammelten Bilder ausreichende Details des Ereignisses zum Erzeugen des 3-D-Verkehrsvorfalls bereitstellen, kommuniziert die zentrale Entität 10 an die entfernten Entitäten 20, dass keine weiteren Bilder mehr erforderlich sind. Alternativ können weitere Bedingungen die Feststellung der Bilderfassung auslösen, einschließlich, jedoch nicht beschränkt darauf, eines vorbestimmten Grenzwertlimits der Anzahl von erfassten Bildern oder eines vorbestimmten Zeitdauergrenzwerts. Als Reaktion darauf, dass eine Bedingung den Grenzwert überschreitet, beenden die entfernten Entitäten die Aufnahme von Bildern des Ereignisses. Wenn der 3-D-Verkehrsvorall erzeugt worden ist, wird der Verkehrsvorfall in dem Speicher gespeichert oder wird an eine Verteilerentität 18 bereitgestellt. Die Verteilerentität 18 kann Polizeidienststellen, Feuerwehr- & Krankenwagendienststellen, Krankenhäuser, Versicherungsagenturen, Ermittler oder beteiligte Fahrer beinhalten, ist jedoch nicht auf diese beschränkt.
  • 2 stellt ein Ablaufdiagramm einer Technik zur Nachstellung eines 3-D-Verkehrsvorfalls eines Ereignisses von einer Vielzahl von 2-D-Bildern dar, die von entfernten Entitäten aus verschiedenen Ansichtswinkeln erfasst wurden.
  • In Schritt 30 wird ein Ereignis erfasst, das eine gewisse Aktivität involviert, wobei die von dem Ereignis erfassten Bilder für eine oder mehrere Entitäten nützlich sein können. Zu solchen Ereignissen zählen, jedoch ohne Einschränkung darauf, ein Unfall oder ein Tatort. Die Erfassung eines solchen Ereignisses, wie z. B. eines Unfalls, beinhaltet ein Fahrzeugsystem oder eine Pannenhilfe, das/die Bilder von wenigstens einem stationären Fahrzeug, das an dem Unfall beteiligt war, erfasst, und/oder die Erfassung von Wrackteilen, die auf einen Unfall hindeutet. Die Benachrichtigung eines Ereignisses kann die Erfassung durch einen Bobachter und die Eingabe einer Warnhinweisnachricht in ein Benachrichtigungssystem, Navigationssystem, soziales Mediensystem oder ähnlichem beinhalten. Damit es sich nicht um ein älteres Ereignis handelt, sollte ein stationäres Fahrzeug oder eine andere Aktivität vorhanden sein, die implizieren, dass das Ereignis oder die nachträglich stattgefundenen Vorgänge noch aktuell sind.
  • In Schritt 31 wird als Reaktion auf die Erfassung eines Ereignisses ein Vorgang des Ereignisses autonom an andere Entitäten in der Nähe des Ereignisses gesendet. Zu solchen Entitäten zählen, jedoch ohne Einschränkung darauf, Fahrzeuge, Pannenhilfe, Fußgänger und Fahrräder. Die Kommunikationen können unter Verwendung eines beliebigen V2X-Kommunikationsprotokolls gesendet werden. Das Kommunikationssignal beinhaltet ferner einen Ort (z. B. eine GPS-Koordinate) des Ereignisses.
  • In Schritt 32 erfassen entfernte Entitäten, entweder bei dem Verkehrsvorfall oder bei Annäherung an den Verkehrsvorfall, als Reaktion auf das Ereignis Bilder von dem Ereignis aus verschiedenen Ansichtsperspektiven. Pannenhilfen, die in der Nähe des Verkehrsvorfalls angebracht sind, erfassen Bilder in derselben Ansichtsperspektive. Andere mobile Entitäten, die an dem Verkehrsvorfall vorbeikommen, erfassen Bilder sowohl nach Annäherung an den Verkehrsvorfall als auch beim Verlassen des Verkehrsvorfalls. Solche durch die Entitäten erfassten Bilder sind zweidimensionale Bilder. Unter Verwendung verschiedener mobiler und fixierter Entitäten werden Bilder, die in verschiedenen Ansichtsperspektiven erfasst werden, kollektiv verwendet, um einen 3-D-Verkehrsvorfall des Ereignisses zu erzeugen.
  • In Schritt 33 wird jedes der Bilder an eine designierte Entität übertragen. Die designierte Entität bestimmt, wann eine ausreichende Menge von Bildern zum Erzeugen des 3-D-Verkehrsvorfalls erfasst worden ist.
  • In Schritt 34 wird die Feststellung getroffen, ob eine Aussagewahrscheinlichkeit einen Grenzwert zum Bestimmen erreicht worden ist, ob genügend Bilder erfasst worden sind. Es können verschiedene Feststellungen und entsprechende Grenzwerte verwendet werden um zu bestimmen, ob die erforderliche Menge von Bildern erhalten worden ist. Die designierte Entität kann jedes der Bilder analysieren und eine Feststellung treffen, dass die Bilder, basierend auf verschiedenen Kriterien, kollektiv ausreichende Details bereitstellen, um das 3-D-Bild zu erzeugen. Die zentrale Entität kann die Feststellung treffen, dass jedes der Bilder kollektiv eine ausreichende Menge von Details bereitstellt, um ausgiebige Informationen über das Ereignis bereitzustellen. Als Folge kann ein Aneinanderreihen von Bildern verwendet werden, um einen Verkehrsvorfall im Wesentlichen in Panoramaansicht zu erzeugen. Die zentrale Einheit kann ferner feststellen, dass der Verkehrsvorfall basierend auf der Anzahl von Bildern, die kollektiv von den verschiedenen Entitäten erhalten wurden, ausreichend erfasst ist. Die designierte Entität kann ferner feststellen, dass der Verkehrsvorfall basierend auf dem verstrichenen Zeitraum seit dem ursprünglichen Senden der Benachrichtigung ausreichend erfasst worden ist. Die designierte Entität kann ferner feststellen, dass der Verkehrsvorfall ausreichend erfasst worden ist, falls keine weiteren stationären Entitäten an dem Verkehrsvorfall verbleiben, was darauf hindeutet, dass diese Fahrzeuge, die an dem Ereignis beteiligt waren, sich nicht mehr an dem Verkehrsvorfallort aufhalten.
  • Falls der Grenzwert nicht überschritten wird, dann kehrt die Routine zu Schritt 30 zurück. Falls der Grenzwert überschritten wird, dann fährt die Routine mit Schritt 35 fort.
  • In Schritt 35 kommuniziert die zentrale Entität an die entfernten Entitäten, die Bilderfassung zu beenden. Jede der entfernten Entitäten kann diese Anordnung an die anderen entfernten Entitäten kommunizieren, sodass die entfernten Entitäten, welche die Nachricht ursprünglich empfangen, von dem Beendigungsereignis in Kenntnis gesetzt werden.
  • In Schritt 36 kommuniziert die zentrale Entität den nachgestellten 3-D-Verkehrsvorfall des Ereignisses an die Verteilerentität. Die Verteilerentität kann Polizeidienststellen, Feuerwehr-& Krankenwagendienststellen, Krankenhäuser, Versicherungsagenturen, Ermittler und beteiligte Fahrer beinhalten, ist jedoch nicht auf diese beschränkt. Das dreidimensionale Bild erlaubt den das Ereignis analysierenden Entitäten, andere Merkmale über das Ereignis festzustellen, die nicht aus einem typischen 2-D-Bild zu ermitteln sind.
  • Während bestimmte Ausführungsformen der vorliegenden Erfindung im Detail beschrieben worden sind, erkennt der Fachmann, der mit dem Gebiet, auf das sich diese Erfindung bezieht, vertraut ist, verschiedene alternative Auslegungen und Ausführungsformen zur Ausführung der Erfindung, wie durch die nachfolgenden Ansprüche definiert.

Claims (15)

  1. Verfahren einer Verkehrsvorfallrekonstruierung, umfassend: das Erfassen eines Vorfalls eines meldepflichtigen Ereignisses; das Senden einer Nachricht, die das meldepflichtige Ereignis für entfernte Entitäten identifiziert; das Erfassen von 2-D-Bildern von Kameras, die an den entfernten Entitäten in der Nähe des meldepflichtigen Ereignisses befestigt sind; das Übertragen der erfassten Bilder von den entfernten Entitäten an eine zentrale Entität; das Erzeugen von der zentralen Entität eines 3-D-Verkehrsvorfalls des meldepflichtigen Ereignisses basierend auf den erfassten Bildern von den entfernten Entitäten.
  2. Verfahren nach Anspruch 1, wobei das Erfassen des Vorfalls eines meldepflichtigen Ereignisses das Erfassen eines Unfalls entlang des Fahrwegs beinhaltet.
  3. Verfahren nach Anspruch 1, wobei das Erfassen des Vorfalls des meldepflichtigen Ereignisses das Erfassen einer Straftat entlang des Straßenwegs beinhaltet.
  4. Verfahren nach Anspruch 1, wobei eine GPS-Position des meldepflichtigen Ereignisses in der gesendeten Nachricht enthalten ist, um einen Ort des meldepflichtigen Ereignisses zu identifizieren.
  5. Verfahren nach Anspruch 1, wobei die gesendete Nachricht zum Erfassen von Bildern durch ein V2X-Kommunikationssystem kommuniziert wird.
  6. Verfahren nach Anspruch 1, wobei die zentrale Entität die gesendete Nachricht kommuniziert, um eine Bilderfassung der entfernten Entitäten basierend auf der Feststellung, dass ein vergleichbarer Parameter einen Grenzwert überschreitet, zu beenden.
  7. Verfahren nach Anspruch 1, wobei die zentrale Entität die gesendete Nachricht kommuniziert, um eine Bilderfassung der entfernten Entitäten basierend auf der Feststellung, dass eine ausreichende Menge von Bildern zum Erzeugen des 3-D-Verkehrsvorfalls erhalten worden ist, zu beenden.
  8. Verfahren nach Anspruch 1, wobei die zentrale Einheit die gesendete Nachricht kommuniziert, um die Bilderfassung von den entfernten Entitäten basierend auf einer Feststellung zu beenden, dass eine vorbestimmte Anzahl von Bildern erfasst worden ist.
  9. Verfahren nach Anspruch 1, wobei die zentrale Entität die gesendete Nachricht kommuniziert, um die Bilderfassung von den entfernten Entitäten basierend auf der Feststellung zu beenden, dass sich keine stationären Fahrzeuge mehr an dem Verkehrsvorfall des Ereignisses aufhalten.
  10. Verkehrsvorfallrekonstruierungssystem, umfassend: eine Vielzahl von entfernten Entitäten, die Bilder eines meldepflichtigen Ereignissen aus verschiedenen Ansichtsperspektiven erfasst; eine zentrale Entität, die einen 3-D-Verkehrsvorfall des meldepflichtigen Ereignisses basierend auf den erfassten Bildern erzeugt; ein Kommunikationssystem, das Nachrichten an entfernte Entitäten zum Identifizieren der meldepflichtigen Ereignisse sendet, und um das Erfassen von Bildern des meldepflichtigen Ereignisses abzufragen; und eine Verteilerentität, die den erzeugten 3-D-Verkehrsvorfall empfängt und Ermittlungsbetriebe des Ereignisses durchführt.
  11. Verkehrsvorfallrekonstruierungssystem nach Anspruch 10, wobei wenigstens eine der entfernten Entitäten einen Vorfall des meldepflichtigen Ereignisses erfasst.
  12. Verkehrsvorfallrekonstruierungssystem nach Anspruch 10, wobei das meldepflichtige Ereignis an die zentrale Entität gemeldet wird, wobei die zentrale Entität die Nachricht an die entfernten Entitäten sendet, um 2-D-Bilder von dem meldepflichtigen Ereignis an die entfernten Entitäten zu erfassen.
  13. Verkehrsvorfallrekonstruierungssystem nach Anspruch 10, wobei die zentrale Entität die Nachricht sendet, um die Bilderfassung basierend auf einer Feststellung zu beenden, dass ein vergleichbarer Parameter einen Grenzwert übersteigt.
  14. Verkehrsvorfallrekonstruierungssystem nach Anspruch 10, wobei die zentrale Entität die Nachricht sendet, um die Bilderfassung basierend auf einer Feststellung zu beenden, dass eine ausreichende Menge von Bildern erhalten worden ist, um den 3-D-Verkehrsvorfall zu erzeugen.
  15. Verkehrsvorfallrekonstruierungssystem nach Anspruch 10, wobei die zentrale Entität die Nachricht sendet, um die Bilderfassung basierend auf einer Feststellung zu beenden, dass eine vorbestimmte Anzahl von Bildern erfasst worden ist.
DE102018109676.3A 2017-04-26 2018-04-23 Ereignisrekonstruierung durch Bildmeldung Withdrawn DE102018109676A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/497,599 US20180316901A1 (en) 2017-04-26 2017-04-26 Event reconstruct through image reporting
US15/497,599 2017-04-26

Publications (1)

Publication Number Publication Date
DE102018109676A1 true DE102018109676A1 (de) 2018-10-31

Family

ID=62236042

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102018109676.3A Withdrawn DE102018109676A1 (de) 2017-04-26 2018-04-23 Ereignisrekonstruierung durch Bildmeldung

Country Status (5)

Country Link
US (1) US20180316901A1 (de)
CN (1) CN108810514A (de)
DE (1) DE102018109676A1 (de)
GB (1) GB2563332A (de)
RU (1) RU2018112400A (de)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10825241B2 (en) * 2018-03-16 2020-11-03 Microsoft Technology Licensing, Llc Using a one-dimensional ray sensor to map an environment
JP7151449B2 (ja) * 2018-12-14 2022-10-12 トヨタ自動車株式会社 情報処理システム、プログラム、及び情報処理方法
CN109801494A (zh) * 2019-01-25 2019-05-24 浙江众泰汽车制造有限公司 一种基于v2x的路口动态引导系统和方法
US11308741B1 (en) * 2019-05-30 2022-04-19 State Farm Mutual Automobile Insurance Company Systems and methods for modeling and simulation in vehicle forensics
US11726560B2 (en) * 2019-09-18 2023-08-15 Apple Inc. Eye tracking using eye odometers
JP7363838B2 (ja) * 2021-03-02 2023-10-18 トヨタ自動車株式会社 異常挙動通知装置、異常挙動通知システム、異常挙動通知方法、およびプログラム

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3011369B1 (fr) * 2013-09-30 2016-12-16 Rizze Sarl Systeme de reconstitution de scene en 3d
US20170017734A1 (en) * 2015-07-15 2017-01-19 Ford Global Technologies, Llc Crowdsourced Event Reporting and Reconstruction

Also Published As

Publication number Publication date
GB201806594D0 (en) 2018-06-06
GB2563332A (en) 2018-12-12
CN108810514A (zh) 2018-11-13
US20180316901A1 (en) 2018-11-01
RU2018112400A (ru) 2019-10-08

Similar Documents

Publication Publication Date Title
DE102018109676A1 (de) Ereignisrekonstruierung durch Bildmeldung
DE102016112908A1 (de) Ereignismeldung und –rekonstruktion durch Crowdsourcing
EP3357050B1 (de) Vorrichtung und verfahren zur charakterisierung von objekten
DE102012022207B3 (de) Verfahren zum Bereitstellen von Fahrstreckeninformationen mittels zumindest eines Kraftwagens
DE112013004591T5 (de) Erhebung und Nutzung von erfassten Fahrzeugdaten
US20200027333A1 (en) Automatic Traffic Incident Detection And Reporting System
DE102014211986A1 (de) Kennzeichenschild-Erkennungssystem und Standort-Vorausberechnung
DE112017000997T5 (de) Fahrzeugvorrichtung und Straßenabnormalitäts-Alarmsystem
DE102014211987A1 (de) Kameraaktivitätssystem
DE112019004065T5 (de) Informationsverarbeitungsvorrichtung, endgerät,informationsverarbeitungsverfahren, und informationsverarbeitungsprogramm
DE112006003060T5 (de) System und Verfahren zum Aktualisieren von Verkehrsdaten unter Verwendung von Sondenfahrzeugen mit Aussensensoren
DE102013215496A1 (de) Sicherheitssystem, Programmprodukt für dasselbe und Überwachungsverfahren
DE102021125734A1 (de) Systeme und verfahren zur identifizierung von fahrzeugschaden und vorfallverwaltung
DE102015110334B4 (de) Notrufsystem
DE102022112255A1 (de) Bereitstellen von sicherheit über fahrzeugbasierte überwachung von benachbarten fahrzeugen
WO2018153563A1 (de) Künstliches neuronales netz und unbemanntes luftfahrzeug zum erkennen eines verkehrsunfalls
DE102015015920B4 (de) Servervorrichtung und Verfahren zum Erkennen eines Straßenabschnitts mit erhöhter Unfallwahrscheinlichkeit
DE112014006813T5 (de) Verfahren und vorrichtung zum benachrichtigen von nutzern, ob oder ob nicht sie sich innerhalb eines gesichtsfeldes einer kamera befinden
DE102019202377A1 (de) Verfahren zum Verschlüsseln von Fahrzeugdefektmeldungen
CN108734959A (zh) 一种嵌入式视觉车流分析方法及系统
DE102020122171A1 (de) Verfahren und System zum kooperativen Sammeln von Videodaten von Fahrtenschreibern
DE102020103029A1 (de) Verfahren und vorrichtung zum erhalten von ereignisbezogenen daten
DE102014207768A1 (de) System zum Austausch von Daten zwischen Akteuren des Strassenverkehrs
DE102017219292A1 (de) Verfahren und vorrichtung zum erfassen von ereignisbezogenen daten bezüglich eines fahrzeugs
EP3465650A1 (de) VERFAHREN UND SYSTEM ZUM ERMITTELN VON RISIKOBEREICHEN IM STRAßENVERKEHR

Legal Events

Date Code Title Description
R082 Change of representative

Representative=s name: BONSMANN - BONSMANN - FRANK PATENTANWAELTE, DE

R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee