CN108810514A - 通过图像报告进行的事件重建 - Google Patents

通过图像报告进行的事件重建 Download PDF

Info

Publication number
CN108810514A
CN108810514A CN201810348158.6A CN201810348158A CN108810514A CN 108810514 A CN108810514 A CN 108810514A CN 201810348158 A CN201810348158 A CN 201810348158A CN 108810514 A CN108810514 A CN 108810514A
Authority
CN
China
Prior art keywords
image
event
remote entity
report
message
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810348158.6A
Other languages
English (en)
Inventor
伦纳德·埃贝尔·卡里尔
李硕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ford Global Technologies LLC
Original Assignee
Ford Global Technologies LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ford Global Technologies LLC filed Critical Ford Global Technologies LLC
Publication of CN108810514A publication Critical patent/CN108810514A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/025—Services making use of location information using location based information parameters
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/05—Geographic models
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/261—Image signal generators with monoscopic-to-stereoscopic image conversion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/94—Hardware or software architectures specially adapted for image or video understanding
    • G06V10/95—Hardware or software architectures specially adapted for image or video understanding structured as a network, e.g. client-server architectures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841—Registering performance data
    • G07C5/085—Registering performance data using electronic data carriers
    • G07C5/0866—Registering performance data using electronic data carriers the electronic data carrier being a digital video recorder in combination with video camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/243—Image signal generators using stereoscopic image cameras using three or more 2D image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/06—Selective distribution of broadcast services, e.g. multimedia broadcast multicast service [MBMS]; Services to user groups; One-way selective calling services
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W2030/082—Vehicle operation after collision
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/01—Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/13—Receivers
    • G01S19/14—Receivers specially adapted for specific applications
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/08—Indexing scheme for image data processing or generation, in general involving all processing steps from image acquisition to 3D model generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30248—Vehicle exterior or interior
    • G06T2207/30252—Vehicle exterior; Vicinity of vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/52—Network services specially adapted for the location of the user terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30—Services specially adapted for particular environments, situations or purposes
    • H04W4/40—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80—Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Geometry (AREA)
  • Computer Graphics (AREA)
  • Remote Sensing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Alarm Systems (AREA)
  • Traffic Control Systems (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Studio Devices (AREA)
  • Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)

Abstract

一种场景重建的方法，包括检测可报告事件的发生。向远程实体广播识别可报告事件的消息。通过安装在可报告事件附近的远程实体上的摄像机获取二维图像。获取的图像从远程实体传送到中央实体。基于由远程实体获取的图像，中央实体生成可报告事件的三维场景。

Description

通过图像报告进行的事件重建
技术领域
本发明总体涉及通过图像获取进行的场景重建。
背景技术
数字成像允许用户容易地获取场景的多个图像。通过存储器的图像获取设备允许用户获取多个图像并且稍后确定哪些图像是相关的而哪些不是。用户受其场景的观察角度和用户可获取图像所分配的时间量的限制。例如，如果用户正在试图获取动态场景，则用户受场景处于动态的时间和图像获取设备的观察角度的限制。或者，如果用户在用户处于动态时(例如，在汽车中经过)获取固定场景，则用户再次受到沿其行进路径的观察角度和当其位于其正在获取的场景附近时的观察时间的限制。
因此，当获取可报告事件时，例如接近场景(例如，事故)的用户在某些实体希望利用来自场景的信息来重建场景的情况下可能有利于获取图像。然而，用户受限于用户在经过场景时可能必须获取一个或多个图像的较短的时间。来自行进路径的用户的观察角度进一步限制了用户。另外，由于用户关注行进道路，因此用户可能无法获取图像。结果，即使当用户获取到多个图像时，由于各种因素，获取和提供场景细节的机会也可能受到限制。
发明内容
在本发明的一个方面中，系统以不同观察角度配合地获得可报告事件的多个二维图像。系统基于在不同观察角度获取的二维图像共同生成可报告事件的三维场景。将可报告事件的发生广播给识别事件位置的远程实体。事件附近的远程实体使用车载摄像头以不同的观察角度获取事件的图像。获取的图像被传送到中央实体以生成三维场景。三维场景可以被各种实体使用来理解事件的当前状况以访问是否需要紧急调度，或者用于稍后分析引起事件的原因以及事件造成的损害程度。
如本文所述的系统允许使用在不同时间实例以及不同的观察角度获取的各种图像来配合地重新创建事件的三维场景以用于分析。生成三维场景提供了比从二维图像可以获得的细节更多的细节。另外，由于消息的广播、图像获取和消息的传送是自主执行的，因此驾驶员不会为必须在事件中获取图像而分心，并且可以依靠系统自主地获取事件并且转播这个信息给分发实体。
图像获取请求的终止由中央实体来执行，中央实体分析所接收的数据以判定是否获取足够数量的图像以重建场景。或者，终止可以基于持续时间以及已获取预定数量的图像。
一个实施例设想了一种场景重建的方法，方法包括检测可报告事件的发生。向远程实体广播识别可报告事件的消息。通过安装在可报告事件附近的远程实体上的摄像机获取二维图像。获取的图像从远程实体传送到中央实体。中央实体基于远程实体获取的图像生成可报告事件的三维场景。
一个实施例设想了一种场景重建系统，系统包括从各种观察角度获取可报告事件的图像的多个远程实体。中央实体基于获取的图像生成可报告事件的三维场景。通信系统向识别可报告事件的远程实体广播消息，并请求获取可报告事件的图像。分发实体接收生成的三维场景并执行事件的调查操作。
根据本发明，提供了一种场景重建的方法，包括：
检测可报告事件的发生；
向远程实体广播识别可报告事件的消息；
通过安装在可报告事件附近的远程实体上的摄像机获取二维图像；
将获取的图像从远程实体传送到中央实体；
由中央实体基于由远程实体获取的图像生成可报告事件的三维场景。
根据本发明的一个实施例，其中检测可报告事件的发生包括沿着行进道路检测事故。
根据本发明的一个实施例，其中检测所述可报告事件的发生包括沿着行进道路检测犯罪现场。
根据本发明的一个实施例，其中所述可报告事件的GPS位置被包括在识别所述可报告事件的位置的广播消息中。
根据本发明的一个实施例，其中获取图像的广播消息被通过V2X通信系统传送。
根据本发明的一个实施例，其中所述中央实体基于对照参数超过阈值极限的判定来传送终止来自所述远程实体的图像获取的广播消息。
根据本发明的一个实施例，其中所述中央实体基于获取了足够数量的图像以生成所述三维场景的判定来传送确定终止由所述远程实体进行的图像获取的广播消息。
根据本发明的一个实施例，其中所述中央实体基于获取了预定数量的图像的判定来传送终止由所述远程实体进行的图像获取的广播消息。
根据本发明的一个实施例，其中所述中央实体基于在所述事件的场景处不存在静止车辆的判定而传送终止由远程实体进行的图像获取的广播消息。
根据本发明的一个实施例，其中所述中央实体利用所述二维图像来图像拼接所述事件的大体环绕视图。
根据本发明的一个实施例，其中所述中央实体将所生成的三维场景发送给分发实体以执行所述事件的调查操作。
根据本发明，还提供了一种场景重建系统，包括：
从各种观察角度获取可报告事件的图像的多个远程实体；
基于所获取的图像生成可报告事件的三维场景的中央实体；
通信系统，该通信系统向远程实体广播识别可报告事件并且请求获取可报告事件的图像的消息；和
接收生成的三维场景并且执行事件的调查操作的分发实体。
根据本发明的一个实施例，其中至少一个所述远程实体检测所述可报告事件的发生。
根据本发明的一个实施例，其中所述可报告事件被报告给所述中央实体，其中所述中央实体将远程实体获取可报告事件的二维图像的消息广播到所述远程实体。
根据本发明的一个实施例，其中所述广播消息包括所述可报告事件的GPS位置以识别所述可报告事件的位置。
根据本发明的一个实施例，其中所述通信系统包括用于广播获取所述可报告事件的图像的广播消息的V2X通信系统。
根据本发明的一个实施例，其中所述中央实体基于对照参数超过阈值限制的判定来广播终止图像获取的消息。
根据本发明的一个实施例，其中所述中央实体基于获取了足够数量的图像以生成所述三维场景的判定来广播终止图像获取的消息。
根据本发明的一个实施例，其中所述中央实体基于获取了预定数量的图像的判定来广播终止图像获取的消息。
根据本发明的一个实施例，其中所述中央实体基于在所述事件的场景处不存在静止车辆的判定而广播终止图像获取的消息。
附图说明
图1是配合成像采集和场景重建系统的框图；
图2是用于重新创建事件的三维场景的技术的流程图。
具体实施方式
在图1中示出了配合成像采集和场景重建系统的框图。该系统包括中央实体10，中央实体10可以包括但不限于服务器、路边实体、云或车辆处理单元。该系统还可以包括图像获取设备12、车辆对外界(V2X)通信系统14、存储器设备16和分发实体18。
图像获取设备12被设置在远程实体20上，并响应于发生的事件(例如事故、犯罪等)的通知或检测而被激活。图像获取设备12获取从各个图像获取设备的角度拍摄的事件的场景的图像。每个图像获取设备12安装在远程实体20上，远程实体20包括但不限于车辆、自主车辆、摩托车、路边单元、行人和自行车。由远程实体20获取的图像通常是二维(以下称为2-D)图像。该系统配合地采集从各种摄像机姿态(例如，观察角度)拍摄的各种图像以共同再现三维场景(下文中称为3-D)，三维场景有助于解释事件的事件结果的原因，或者有助于可能涉及这些事件的人。通过利用经过场景的远程实体20，以各种观察角度获取事件，并且当被集合地采用时，集合的图像提供事件的三维场景。
V2X通信系统14被用于在各种实体之间进行通信。V2X通信系统14可以包括但不限于车辆对车辆通信(V2V)、车辆对基础设施通信(V2I)和车辆对行人通信(V2P)。V2V通信可以利用例如专用短距离通信(DSRC)，专用短距离通信(DSRC)是双向短程到中程无线通信，其允许在基于通信的主动安全应用中的非常高的数据传送，以用于警告事件周围的车辆和的实体。
一旦识别了事件，检测事件的实体可以利用由车载GPS系统获得的GPS坐标将事件的位置传送给其他周围的远程实体。当每个远程实体经过事件的位置时，可以以不同的观察角度获取事件的图像。应该理解的是，向周围实体的通知是自主执行的，使得车辆的驾驶员不会被事件分心于必须自己手动获取图像。而是每个实体基于发送的GPS位置在事件现场自主获取图像。结果，当成像系统获取场景的一个或多个图像时，车辆驾驶员可以关注行进道路。
每个远程实体获取的图像被传送给中央实体10进行处理。中央实体10可以包括用于处理图像数据的服务器系统、专用车辆或云。如果需要额外的存储器来存储图像数据，则中央实体10可以利用存储器设备16。
中央实体10利用二维图像生成三维场景。当置信水平达到表示所采集图像提供了用于生成三维场景的事件的足够细节的阈值时，中央实体10将向远程实体20传达不需要额外的图像。或者，其他条件可触发图像获取的终止，包括但不限于关于所获取的图像数目或预定持续时间阈值的预定阈值限制。响应超过阈值的条件，远程实体终止拍摄事件的图像。一旦三维场景被重新创建，场景就将被存储在存储器中或将被提供给分发实体18。分发实体18可以包括但不限于警察机构、消防和救护单位、医院、保险公司、调查人员和相关司机。
图2示出了用于从由远程实体以各种视角获取的多个二维图像重新创建事件的三维场景的技术的流程图。
在步骤30中，检测到涉及一些活动的事件，这里所获取的事件图像可能对一个或多个实体有用。此类事件可能包括但不限于事故或犯罪现场。诸如事故的事件的检测包括车辆系统或路边单元，车辆系统或路边单元获取涉及事故的至少一个静止车辆的图像和/或检测指示事故的碎片。事件的通知可以包括由观察者检测并且将警报消息输入到消息传送系统、导航系统、社交媒体系统或类似物中。为了使事件不会过时，应该有意味着事件或事后事务仍在发生的一个静止的车辆或其他活动。
在步骤31中，响应于事件的检测，将事件的发生自主地广播给事件附近的其他实体。这些实体可以包括但不限于车辆、路边单元、行人和自行车。通信可以使用任何V2X通信协议进行广播。通信信号还包括事件的位置(例如，GPS坐标)。
在步骤32中，响应于事件的通知，在场景处或接近场景的远程实体将从各种观察角度获取事件的图像。固定在场景附近的路边单元将以相同的观察角度获取图像。经过场景的其他移动实体将在接近场景以及离开场景时获取图像。这些实体获取的图像是二维立体图像。利用各种移动和固定实体，可以将各种观察角度下获取的图像集合地用于生成事件的三维场景。
在步骤33中，将每个图像传送到指定的实体。指定的实体判定何时获取了用于再现三维场景的足够数量的图像。
在步骤34中，作出关于置信水平是否超过用于判定是否已获取足够图像的阈值限制的判定。可以使用各种判定和相应的阈值来判定是否获得所需数量的图像。指定的实体可以分析每个图像并且基于各种标准判定图像集合地提供足够的细节来生成三维图像。中央实体可以做出这样的判定：每个图像基于各种观察点集合地提供足够量的细节，以提供关于该事件的深入信息。因此，图像拼接可以用于生成大体环绕的场景。中央实体可以基于由各个实体集合地获得的图像的数量进一步判定场景被充分获取。指定实体可以进一步基于自通知最初发送以来经过的持续时间来判定场景被充分获取。如果没有固定的实体停留在场景处，表明涉及事件的那些车辆不再位于场景处，则指定的实体可以进一步判定场景被充分获取。
如果没有超过阈值限制，则程序返回到步骤30。如果超过了阈值限制，则程序进行到步骤35。
在步骤35中，中央实体与远程实体通信以终止图像获取。每个远程实体可以将该指示传送给其他远程实体，使得最初接收该消息的远程实体知道终止事件。
在步骤36中，中央实体向分发实体传送事件的再生三维场景。分发实体可能包括但不限于警察机构、消防和救护单位、医院、保险公司、调查人员和相关司机。三维图像允许那些分析事件的人员确定关于事件的其他特征，这些特征可能无法从典型的二维图像中确定。
虽然已经详细描述了本发明的某些实施例，但是本发明所属领域的技术人员将认识到用于实施由以下权利要求限定的本发明的各种替代设计和实施例。

Claims (15)

1.一种场景重建的方法，包括：
检测可报告事件的发生；
向远程实体广播识别所述可报告事件的消息；
通过安装在所述可报告事件附近的所述远程实体上的摄像机获取二维图像；
将获取的所述图像从所述远程实体传送到中央实体；
由所述中央实体基于由所述远程实体获取的所述图像生成所述可报告事件的三维场景。
2.根据权利要求1所述的方法，其中检测所述可报告事件的发生包括沿着行进道路检测事故。
3.根据权利要求1所述的方法，其中检测所述可报告事件的发生包括沿着行进道路检测犯罪现场。
4.根据权利要求1所述的方法，其中所述可报告事件的GPS位置被包括在识别所述可报告事件的位置的广播消息中。
5.根据权利要求1所述的方法，其中通过V2X通信系统传送获取图像的广播消息。
6.根据权利要求1所述的方法，其中所述中央实体基于对照参数超过阈值极限的判定来传送终止来自所述远程实体的图像获取的广播消息。
7.根据权利要求1所述的方法，其中所述中央实体基于获得了足够数量的图像以生成所述三维场景的判定来传送确定终止由所述远程实体进行的图像获取的广播消息。
8.根据权利要求1所述的方法，其中所述中央实体基于获取了预定数量的图像的判定来传送终止由所述远程实体进行的图像获取的广播消息。
9.根据权利要求1所述的方法，其中所述中央实体基于在所述事件的场景处不存在静止车辆的判定而传送终止由所述远程实体进行的图像获取的广播消息。
10.一种场景重建系统，包括：
从各种观察角度获取可报告事件的图像的多个远程实体；
基于所获取的图像生成所述可报告事件的三维场景的中央实体；
通信系统，所述通信系统向所述远程实体广播识别所述可报告事件并且请求获取所述可报告事件的图像的消息；和
接收生成的所述三维场景并且执行所述事件的调查操作的分发实体。
11.根据权利要求10所述的场景重建系统，其中至少一个所述远程实体检测所述可报告事件的发生。
12.根据权利要求10所述的场景重建系统，其中所述可报告事件被报告给所述中央实体，其中所述中央实体将远程实体获取所述可报告事件的二维图像的所述消息广播到所述远程实体。
13.根据权利要求10所述的场景重建系统，其中所述中央实体基于对照参数超过阈值限制的判定来广播终止图像获取的消息。
14.根据权利要求10所述的场景重建系统，其中所述中央实体基于获得足够数量的图像以生成所述三维场景的判定来广播终止图像获取的消息。
15.根据权利要求10所述的场景重建系统，其中所述中央实体基于获取了预定数量的图像的判定来广播终止图像获取的消息。
CN201810348158.6A 2017-04-26 2018-04-18 通过图像报告进行的事件重建 Pending CN108810514A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/497,599 2017-04-26
US15/497,599 US20180316901A1 (en) 2017-04-26 2017-04-26 Event reconstruct through image reporting

Publications (1)

Publication Number Publication Date
CN108810514A true CN108810514A (zh) 2018-11-13

Family

ID=62236042

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810348158.6A Pending CN108810514A (zh) 2017-04-26 2018-04-18 通过图像报告进行的事件重建

Country Status (5)

Country Link
US (1) US20180316901A1 (zh)
CN (1) CN108810514A (zh)
DE (1) DE102018109676A1 (zh)
GB (1) GB2563332A (zh)
RU (1) RU2018112400A (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10825241B2 (en) * 2018-03-16 2020-11-03 Microsoft Technology Licensing, Llc Using a one-dimensional ray sensor to map an environment
JP7151449B2 (ja) * 2018-12-14 2022-10-12 トヨタ自動車株式会社 情報処理システム、プログラム、及び情報処理方法
CN109801494A (zh) * 2019-01-25 2019-05-24 浙江众泰汽车制造有限公司 一种基于v2x的路口动态引导系统和方法
US11308741B1 (en) * 2019-05-30 2022-04-19 State Farm Mutual Automobile Insurance Company Systems and methods for modeling and simulation in vehicle forensics
US11442540B2 (en) * 2019-09-18 2022-09-13 Apple Inc. Eye tracking using low resolution images
JP7363838B2 (ja) * 2021-03-02 2023-10-18 トヨタ自動車株式会社 異常挙動通知装置、異常挙動通知システム、異常挙動通知方法、およびプログラム

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3011369B1 (fr) * 2013-09-30 2016-12-16 Rizze Sarl Systeme de reconstitution de scene en 3d
US20170017734A1 (en) * 2015-07-15 2017-01-19 Ford Global Technologies, Llc Crowdsourced Event Reporting and Reconstruction

Also Published As

Publication number Publication date
GB201806594D0 (en) 2018-06-06
DE102018109676A1 (de) 2018-10-31
US20180316901A1 (en) 2018-11-01
GB2563332A (en) 2018-12-12
RU2018112400A (ru) 2019-10-08

Similar Documents

Publication Publication Date Title
CN108810514A (zh) 通过图像报告进行的事件重建
US10489976B2 (en) Incident site investigation and management support system based on unmanned aerial vehicles
KR102464898B1 (ko) 차량과 관련된 영상 정보를 공유하는 방법 및 장치
CA2967638C (en) System and method for detecting a vehicle event and generating review criteria
US20240046653A1 (en) Identifying suspicious entities using autonomous vehicles
US9779311B2 (en) Integrated control system and method using surveillance camera for vehicle
US20160093212A1 (en) Using aerial imaging to provide supplemental information about a location
US11361556B2 (en) Deterioration diagnosis device, deterioration diagnosis system, deterioration diagnosis method, and storage medium for storing program
WO2020031924A1 (ja) 情報処理装置、端末装置、情報処理方法および情報処理プログラム
CN104851295A (zh) 获取路况信息的方法和系统
CN106529401A (zh) 一种车辆反跟踪方法、装置及系统
JP2008102762A (ja) 画像収集システム、記録装置
CN105788280A (zh) 一种基于车联网的智慧城市车辆自动追踪系统
KR101626377B1 (ko) Cctv와 차량내 블랙박스를 활용한 빅데이터 기반의 불법 주정차 단속 시스템
TW201333896A (zh) 使用視訊雷達的遠距交通管理系統
CN109671270B (zh) 行车事故处理方法及装置、存储介质
KR20180024757A (ko) 다시점 블랙박스 카메라 영상을 이용한 도로교통정보 제공시스템
KR20200026492A (ko) IoT기반의 카메라 그룹핑을 이용한 터널 내 유고 감시 시스템
Altekar et al. Infrastructure-based sensor data capture systems for measurement of operational safety assessment (osa) metrics
JP2015210713A (ja) ドライブレコーダおよびこれを用いたクラウド型道路情報等運用システム
KR20140126852A (ko) 사고 영상 수집 시스템 및 그의 사고 영상 수집 방법
KR20160061255A (ko) 네트워크 인터페이스 장치
KR102418635B1 (ko) 도로에서의 데이터 기반 사고 감지 및 영상 전송 시스템
JP6713905B2 (ja) 映像監視システム
Bruyas et al. Naturalistic Observations to Investigate Conflicts Between Drivers and VRUs in the PROSPECT Project

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20181113