CN110738843A - 信息处理方法以及信息处理装置 - Google Patents

信息处理方法以及信息处理装置 Download PDF

Info

Publication number
CN110738843A
CN110738843A CN201910638562.1A CN201910638562A CN110738843A CN 110738843 A CN110738843 A CN 110738843A CN 201910638562 A CN201910638562 A CN 201910638562A CN 110738843 A CN110738843 A CN 110738843A
Authority
CN
China
Prior art keywords
vehicle
vehicles
presentation
information processing
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910638562.1A
Other languages
English (en)
Other versions
CN110738843B (zh
Inventor
穴吹元嗣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2019047427A external-priority patent/JP7308442B2/ja
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Priority to CN202310364949.9A priority Critical patent/CN116343483A/zh
Publication of CN110738843A publication Critical patent/CN110738843A/zh
Application granted granted Critical
Publication of CN110738843B publication Critical patent/CN110738843B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/02Registering or indicating driving, working, idle, or waiting time only
    • G07C5/06Registering or indicating driving, working, idle, or waiting time only in graphical form
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0125Traffic data processing
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0027Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement involving a plurality of vehicles, e.g. fleet or convoy travelling
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0038Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement by providing the operator with simple or augmented images from one or more cameras located onboard the vehicle, e.g. tele-operation
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0137Measuring and analyzing of parameters relative to traffic conditions for specific applications
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096708Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control
    • G08G1/096725Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control where the received information generates an automatic action on the vehicle control
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/123Traffic control systems for road vehicles indicating the position of vehicles, e.g. scheduled vehicles; Managing passenger vehicles circulating according to a fixed timetable, e.g. buses, trains, trams
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/029Location-based management or tracking services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30Services specially adapted for particular environments, situations or purposes
    • H04W4/40Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • H04W4/44Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P] for communication between vehicles and infrastructures, e.g. vehicle-to-cloud [V2C] or vehicle-to-home [V2H]
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0001Details of the control system
    • B60W2050/0002Automatic control, details of type of controller or control system architecture
    • B60W2050/0004In digital systems, e.g. discrete-time systems involving sampling
    • B60W2050/0005Processor details or data handling, e.g. memory registers or chip architecture
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Signal Processing (AREA)
  • Transportation (AREA)
  • Analytical Chemistry (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Chemical & Material Sciences (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Atmospheric Sciences (AREA)
  • Multimedia (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Traffic Control Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Selective Calling Equipment (AREA)

Abstract

信息处理方法,从多个车辆分别获得传感数据,该传感数据是从多个车辆各自具有的传感器获得的数据,利用传感数据的每一个,分别执行物体检测处理的每一个,利用物体检测处理的每一个结果,决定提示的形态,所述提示用于监视或者控制多个车辆,按照被决定的形态,对提示装置的提示进行控制。

Description

信息处理方法以及信息处理装置
技术领域
本公开涉及信息处理方法以及信息处理装置。
背景技术
近几年以自动驾驶的方式使车辆行驶的技术登场,研究开发越来越活跃。今后伴随自动驾驶技术的发展,估计无人自动驾驶车辆会普及。在无人自动驾驶车辆的运行中,从安全性的观点上要求异地的操作员对车辆进行监视。并且与车辆监视有关的技术已经有了一些提案。
例如,在专利文献1公开了在车辆进入远程操作对象区域的情况下,向管制中心进行远程操作请求,管制中心对发出远程操作请求的车辆进行远程操作的远程操作装置进行决定的技术。
此外,在专利文献2公开了根据进入车站的利用乘客数,修改车辆的发车时刻的技术。
(现有技术文献)
(专利文献)
专利文献1:日本特开2017-147626号公报
专利文献2:日本特开2015-182623号公报
然而,在专利文献1公开的现有技术中,操作员在多个车辆进入远程操作对象区域的情况下,将该多个车辆同时作为远程操作对象。但是,一个操作员对多个车辆同时进行远程操作存在困难。
此外,在专利文献2公开的现有技术是面向乘坐在单个车辆的操作员的技术,由一个操作员来同时管理多个车辆不在设想范围内。
发明内容
于是,本公开提供一种信息处理方法以及信息处理装置,通过监视或者控制多个车辆,从而既能确保该多个车辆的安全性,又能减轻进行该监视或者控制的操作员的负担。
为了达到所述目的,本公开的一个方案涉及的信息处理方法,从多个车辆分别获得传感数据,该传感数据是从所述多个车辆各自具有的传感器获得的数据,利用所述传感数据的每一个,分别执行物体检测处理的每一个,利用所述物体检测处理的每一个结果,决定提示的形态,所述提示用于监视或者控制所述多个车辆,按照被决定的所述形态,对提示装置的所述提示进行控制。
另外,这些概括或者具体的方案,可以通过系统、方法、集成电路、计算机程序或者计算机可读取的CD-ROM等记录介质来实现,也可以任意组合系统、方法、集成电路、计算机程序以及记录介质来实现。
通过本公开提供的信息处理方法等,通过监视或者控制多个车辆,从而既能确保多个车辆的安全性,又能减轻进行该监视或者控制的操作员的负担。
附图说明
图1是例示出实施方式1涉及的信息处理系统的方框图。
图2A是例示出实施方式1涉及的优先级信息的图。
图2B是例示出实施方式1涉及的数据库的图。
图2C是例示出实施方式1涉及的数据库的图。
图3是例示出实施方式1涉及的信息处理系统的动作的序列图。
图4A是例示出实施方式1涉及的终端装置的提示的图。
图4B是例示出实施方式1涉及的终端装置的提示的另一图。
图4C是例示出实施方式1涉及的终端装置的提示的另一图。
图4D是例示出实施方式1涉及的终端装置的提示的另一图。
图4E是例示出实施方式1涉及的终端装置的提示的另一图。
图5是例示出在实施方式1涉及的信息处理装置的动作中,决定优先级的流程图。
图6是例示出在实施方式1涉及的信息处理装置的动作中,利用数据库算出上下车结束时刻的流程图。
图7是例示出实施方式2涉及的信息处理系统的方框图。
图8A是例示出实施方式2涉及的数据库的图。
图8B是例示出实施方式2涉及的数据库的另一图。
图8C是例示出实施方式2涉及的数据库的另一图。
图9是例示出实施方式2涉及的信息处理系统的动作的序列图。
图10A是例示出实施方式2涉及的终端装置的提示的图。
图10B是例示出实施方式2涉及的终端装置的提示的另一图。
图10C是例示出实施方式2涉及的终端装置的提示的另一图。
图10D是例示出实施方式2涉及的终端装置的提示的另一图。
图10E是例示出实施方式2涉及的终端装置的提示的另一图。
图10F是例示出实施方式2涉及的终端装置的提示的另一图。
图11是例示出在实施方式2涉及的信息处理装置的动作中,决定优先级的动作的流程图。
具体实施方式
本公开的一个方案涉及的信息处理方法,从多个车辆分别获得传感数据,该传感数据是从所述多个车辆各自具有的传感器获得的数据,利用所述传感数据的每一个,分别执行物体检测处理的每一个,利用所述物体检测处理的每一个结果,决定提示的形态,所述提示用于监视或者控制所述多个车辆,按照被决定的所述形态,对提示装置的所述提示进行控制。
这样,按照利用从物体检测处理的各自获得的结果而决定的形态,进行用于监视或者控制多个车辆(以下总称为监视。)的提示,从而监视多个车辆的操作员,能够容易掌握应该监视的车辆。也就是,既能降低操作员看漏应该监视的车辆的风险,又能减少操作员同时监视的车辆的数量。因而,通过监视多个车辆,既能够确保多个车辆的安全性,又能够减轻进行监视的操作员的负担。
此外,本公开的一个方案涉及的信息处理装置具备:获得部,从多个车辆分别获得传感数据,该传感数据是从所述多个车辆各自具有的传感器获得的数据;检测处理部,利用所述传感数据的每一个,分别执行物体检测处理的每一个;决定部,利用所述物体检测处理的每一个结果,决定提示的形态,所述提示用于监视或者控制所述多个车辆;以及提示控制部,按照被决定的所述形态,对提示装置的所述提示进行控制。
此外,本公开的一个方案涉及的信息处理系统具备信息处理装置以及所述提示装置。
这些信息处理装置以及信息处理系统,也具有与上述同样的作用效果。
此外,本公开的一个方案涉及的信息处理方法,根据所述物体检测处理的每一个结果,决定分别与所述多个车辆对应的多个优先级,按照所述多个优先级,决定所述提示的形态。
这样,为了按照各个车辆的优先级,提示装置进行用于监视或者控制各个车辆的提示,所以监视多个车辆的操作员,能够在多个车辆中掌握应该优先监视的车辆。因此,操作员能够监视优先级比其他车辆高的车辆,从而既能确保车辆的安全性又能减轻操作员的负担。
此外,在本公开的一个方案涉及的信息处理方法中,将所述多个车辆的状态的每一个状态分别从所述多个车辆的每一个车辆获得,根据所述物体检测处理的每一个结果以及所述多个车辆的状态的每一个状态,分别决定所述多个优先级。
这样,不仅利用物体检测处理的各个结果,还利用多个车辆的状态,从而能够更恰当地决定各个车辆的优先级。从而监视多个车辆的操作员,能够更容易掌握多个车辆中的应该优先监视的车辆。因此,操作员能够更容易地监视优先级比其他车辆高的车辆,从而既能确保车辆的安全性又能进一步减轻操作员的负担。
此外,在本公开的一个方案涉及的信息处理方法中,在所述物体检测处理中,检测针对停车中的车辆的上车乘客与下车乘客的至少一方,按照检测出的所述上车乘客与所述下车乘客的至少一方,决定所述提示的形态。
在以往,判断针对车辆乘车结束或者从车辆下车结束,控制发车的定时是很困难的。例如,根据传感数据来对位于车辆附近的人是否为乘车预定者进行判断是有困难的。如果发生错误判断的情况下,可能会给乘客带来危险。另一方面,可以考虑由进行监视的操作员来控制发车的定时,但是常常监视车辆的上下车状况,会增加操作员的负担。对于此,通过本构成,按照乘客来控制用于监视的提示的形态,从而操作员能够容易掌握处于应该监视的状况的车辆。因此,在上下车时,既能够确保多个车辆的安全性,又能够确保操作员的负担。另外,本构成针对自动地控制发车的情况也有效。如上所述的发车是有可能发生危险的状况,所以要求操作员优先监视。
此外,在本公开的一个方案涉及的信息处理方法中,在所述物体检测处理中,检测所述上车乘客与所述下车乘客的至少一方的属性或者数量,按照检测出的所述属性或者所述数量,决定所述提示的形态。
这样,按照与在上下车时的监视的优先级有关的要素的形态进行提示,能够使操作员更正确地掌握应该监视的车辆。
此外,在本公开的一个方案涉及的信息处理方法中,利用所述属性或者所述数量,算出上车与下车的至少一方到结束为止的时间,所述上车是所述上车乘客针对所述停车中的车辆的上车,所述下车是所述下车乘客从所述停车中的车辆的下车,按照算出的所述时间,决定所述提示的形态。
这样,按照上下车时间的形态进行提示,从而能够按照应该监视的定时,来向操作员提示车辆。因此,能够更加实时地提示应该监视的车辆。例如,能够以比起算出的时间长的车辆,优先监视算出的时间短的车辆的方式进行提示。
此外,在本公开的一个方案涉及的信息处理方法中,在所述物体检测处理中,检测行驶中的车辆外部的物体以及所述物体的位置,按照检测出的所述物体以及所述物体的位置,决定所述提示的形态。
在以往存在按照车辆外部的物体的状况,来控制车辆的动作的技术。但是该物体的状况有多种情况,设想所有情况进行控制是有困难的。另一方面,可以考虑进行监视的操作员确认车辆外部,但是常常监视多个车辆的外部会增加负担。对于此,通过本构成,按照车辆外部的物体来控制用于监视的提示的形态,从而能够使操作员容易掌握处于应该监视的状况的车辆。因此,在车辆外部有物体的情况下,既能确保多个车辆的安全性,又能减轻操作员的负担。
此外,在本公开的一个方案涉及的信息处理方法中,利用所述物体以及所述物体的位置,对所述多个车辆分别算出自动驾驶的困难度与所述多个车辆的外部的危险度的至少一方,按照算出的所述困难度与所述危险度的至少一方,决定所述提示的形态。
这样,按照自动驾驶的困难度以及车辆外部的危险度的至少一方的形态进行提示,从而能够使操作员更正确地掌握应该监视的车辆。例如,将自动驾驶的困难度或者车辆外部的危险度的至少一方相对高的车辆,作为应该优先监视的车辆来提示。
此外,在本公开的一个方案涉及的信息处理方法中,所述提示包括显示如下图像,该图像是映出所述多个车辆的每一个车辆的上车门与下车门的至少一方的图像。
因此,操作员能够容易确认上下车时的安全。
此外,在本公开的一个方案涉及的信息处理方法中,所述提示包括显示如下图像,该图像是映出所述多个车辆的每一个车辆的外部的图像。
因此,操作员能够容易确认车辆的外部的安全。
此外,在本公开的一个方案涉及的信息处理方法中,所述提示的形态,以所述多个优先级中的优先级越高,所述提示的视觉确认性越高的方式而被决定。
这样越是优先级高的车辆,视觉确认性也越高,从而操作员能够迅速确认应该监视的车辆的信息。
此外,在本公开的一个方案涉及的信息处理方法中,所述提示的形态,以所述多个优先级中的优先级越高,所述提示的信息量越多的方式而被决定。
这样,优先级越高,提示的信息量越多,从而操作员能够详细掌握应该监视的车辆的信息。
此外,优先级越低,提示的信息量越少,所以能够降低向操作员提示的车辆的帧速率,或者降低画质。因此,能够减轻实现该信息处理方法的装置、车辆、以及提示装置之间的网络负载。
此外,在本公开的一个方案涉及的信息处理方法中,所述提示的形态,以所述多个优先级中的优先级越高,越强调所述提示的方式而被决定。
这样,优先级越高越强调提示,从而操作员能够迅速地确定应该监视的车辆。
此外,在本公开的一个方案涉及的信息处理方法中,所述提示的形态,以在所述多个优先级中的优先级比阈值高时,开始所述提示的方式而被决定。
这样,只提示优先级为阈值以上的车辆,从而操作员能够专注应该监视的车辆。
此外,在本公开的一个方案涉及的信息处理方法中,所述提示的形态,以所述提示的顺序对应于所述多个优先级中的优先级高度的顺序的方式而被决定。
这样,以优先级的高度的顺序来提示车辆,从而操作员能够迅速确定应该监视的车辆。此外,能够预先确认下面应该监视的车辆,能够实现监视操作的效率化。
此外,在本公开的一个方案涉及的信息处理方法中,所述优先级,进一步基于车辆的位置、与所述车辆的位置对应的时刻、上车乘客以及下车乘客到上下车结束为止的所需时间的履历、以及与所述车辆的位置对应的气候信息中的至少一个而被决定。
通过上述,针对多个车辆能够更恰当地设定各个优先级。因此提示装置能够更恰当地提示应该监视的车辆。
另外,这些概括或者具体的方案,可以通过系统、方法、集成电路、计算机程序或者计算机可读取的CD-ROM等记录介质来实现,也可以任意组合系统、方法、集成电路、计算机程序以及记录介质来实现。
以下利用附图来说明本申请的实施方式。以下说明的实施方式均表示本公开的一个具体例子。以下的实施方式示出的数值、形状、材料、构成要素、构成要素的配置位置以及连接形式、步骤、步骤的顺序等都是一个例子,主旨不是限制本公开。此外,在以下实施方式的构成要素中,表示最上位概念的方案中没有记载的构成要素,作为任意的构成要素来说明。
此外,各图是示意图,并非是严谨的图示。此外,在各图中,对实质上相同的构成赋予相同的符号,省略或简化重复说明。
以下说明本公开的实施方式涉及的信息处理方法、信息处理装置以及信息处理系统。
(实施方式1)
[构成]
图1是例示出实施方式1涉及的信息处理系统1的方框图。
信息处理系统1具有车辆3、信息处理装置5、终端装置7。
车辆3是不仅能够通过车辆3的远程操作者的远程操作来行驶,而且在没有远程操作的情况下,能够自动行驶的自动驾驶车辆。车辆3例如是巴士、出租车、电车等。在本实施方式中,将车辆3的一例设想为巴士,并且设想车辆3停留在停车场所(停车站)的情况,记载了如下的本实施方式。下面将车辆3的已上车的人或者将要上车的人称为上车乘客,将从车辆3已下车的人或者将要下车的人称为下车乘客。并且表示上车乘客以及下车乘客这两者的时候称为乘客。
车辆3具有第一获得部31、第二获得部32、第三获得部33、第四获得部34、以及通信部35。
第一获得部31是获得表示上下车开始时刻的信息的装置,例如是表。具体而言上下车开始时刻是在车辆3停在停车场所的时候,表示乘客开始对车辆3进行上下车的时刻。第一获得部31,将表示上下车开始时刻的信息,发送到信息处理装置5。另外,上下车开始时刻,也可以是车辆3通过自动驾驶,停在停车场所的时刻。
第二获得部32获得表示车辆3的现在位置的车辆位置信息(例如,GPS(GlobalPositioning System)信息)。第二获得部32将获得的车辆位置信息发送到信息处理装置5、以及终端装置7。车辆3的现在位置是车辆3的位置的一例。
第三获得部33是获得乘客图像的装置,例如是摄像机等,该乘客图像是拍摄了针对车辆3进行上车和下车的乘客的图像。具体而言,第三获得部33拍摄在车辆3的停车场所等候的人(例如上车乘客)、或者拍摄在车辆内部站起来的人(例如下车乘客),生成乘客图像。第三获得部33,将乘客图像发送到信息处理装置5。第三获得部33是传感器的一例。此外,乘客图像是传感数据的一例。
第四获得部34是获得车辆内外图像的装置,例如是摄像机等,该车辆内外图像是表示车辆内部以及车辆外部的图像。车辆内外图像包括:车辆外部换言之车辆3的外部的步行者、车辆、自行车等信息,车辆内部的乘客的信息、车门口附近的乘客的信息。第四获得部34,将车辆内外图像发送给终端装置7。另外,第四获得部34可以与第三获得部33兼用,乘客图像可以是车辆内外图像。
通信部35是将表示上下车开始时刻的信息、车辆位置信息、以及乘客图像发送到信息处理装置5,并且将车辆位置信息、表示车辆内外图像的信息发送到终端装置7的通信接口。此外,通信部35在车辆3由远程操作者进行远程操作的情况下,接受进行远程操作的控制命令。通信部35向控制车辆3的未图示的执行机构、显示器等,输出控制命令。
在此车辆3存在多辆,所以各个车辆3具有识别各自的车辆ID。通信部35将分别赋予了车辆ID的表示上下车开始时刻的信息、车辆位置信息、以及乘客图像发送到信息处理装置5,或者将被赋予车辆ID的车辆内外图像发送到终端装置7。
信息处理装置5是能够根据位于异地的操作员的指示,对自动驾驶的多个车辆3进行远程控制的装置。信息处理装置5具有检测处理部51、决定部52、存储控制部53、通信部54、提示控制部55。
检测处理部51,分别执行各个物体检测处理。物体检测处理是,检测处于停止中的车辆3的上车乘客以及下车乘客的至少一方,或者检测上车乘客以及下车乘客的至少一方的属性或者数量的处理。具体而言,检测处理部51,从车辆3的第三获得部33获得乘客图像,根据乘客图像,检测乘客的数量、各个乘客的属性等,按照每个车辆3生成乘客信息。乘客的属性示出成人、儿童、老人等信息。检测处理部51,将乘客信息输出到决定部52。
决定部52,利用物体检测处理的每一个结果,决定用于监视或控制多个车辆3的提示的形态。提示的形态的详细在后边说明。
此外,决定部52,获得来自检测处理部51的各个乘客信息,并且从车辆3的第一获得部31、第二获得部32分别获得上下车开始时刻、以及车辆位置信息时,从存储控制部53中存放的数据库,获得过去的上下车数据。具体而言,决定部52针对存储控制部53分别请求与各个乘客信息、上下车开始时刻、以及车辆位置信息类似的过去的上下车数据,并且从存储控制部53获得类似的过去的上下车数据。
决定部52,从存储控制部53获得过去的上下车数据,针对各个车辆3分别决定作为优先监视的指标的优先级。如图2A所示,决定部52,将算出的各个优先级与从各个车辆3获得的车辆ID建立关联的各个优先级信息发送到终端装置7。图2A是例示出实施方式1涉及的优先级信息的图。
存储控制部53存放有被作成数据库的过去的上下车数据。上下车数据是上下车开始时刻、停车场所、乘客的属性以及每个属性的乘客数量、所有人上下车结束为止所需的时间、按照乘客的属性的上下车时间等信息。存储控制部53,按照决定部52的请求,检索与乘客信息类似的过去的上下车数据,将类似的过去的上下车数据发送到决定部52。另外,存储控制部53,可以存放根据过去的上下车数据进行学习的已学习模型,以代替被作成数据库的过去的上下车数据。在这个情况下,存储控制部53,按照决定部52的请求,将已学习模型发送到决定部52。
上下车数据由图2B以及图2C示出。图2B以及图2C是例示出实施方式1涉及的上下车数据的图。如图2B所示,上下车数据由车辆3停在停车场所的“时刻”、停车的“地点”,“乘客的属性以及乘客的数量”、以及全部乘客上下车结束为止的“所需时间”来构成。图2C所示,上下车数据进一步具有乘客的属性中的每一个人的“上下车时间”。
如图1所示,通信部54是接收表示上下车开始时刻的信息、车辆位置信息、以及乘客图像,或者向终端装置7发送优先级信息的通信接口。通信部54是获得部的一例。
提示控制部55,按照由决定部52决定的提示的形态,控制终端装置7的提示的形态。换言之,提示控制部55,以终端装置7基于决定的优先级的形态进行提示的方式,输出控制终端装置7的提示的命令。
终端装置7是用于操作员监视车辆3的行驶状态、操作员对车辆3进行远程操作的操作终端,例如是个人电脑、平板终端等。终端装置7具有提示部71、操作部72、计时部73、通信部74。
提示部71是针对每个车辆3提示车辆内外图像、车辆位置信息等的显示器。具体而言,提示部71,按照每个车辆3提示车辆内部的图像、车辆3的车门口的图像、车辆3的外部(车辆3的周围)的图像、车辆3的优先级、上下车结束时刻、车辆ID、停车场所等与车辆3有关的信息。
提示部71,将与车辆3有关的信息以各种形态来提示。例如,提示部71,将优先级最高的车辆3的信息用面积大的图像来提示、或者从多台车辆3中只提示优先级在阈值以上的车辆3的信息、或者详细提示优先级高的车辆3的信息、或者以相同大小的图像来提示时按照优先级高度的顺序来排列与车辆3有关的信息的方式进行提示、或者在优先级最高的车辆3的图像附上颜色进行强调的方式来提示。
操作部72是用于接受操作员对车辆3进行的远程操作的输入部。操作员,确认全部乘客上下车结束(上下车结束确认),在使车辆3发车时,对操作部72进行操作。操作部72,例如是触摸屏,键盘等。操作部72将进行远程操作的控制命令,经由通信部74发送到车辆3。
计时部73计测时刻,该时刻是由操作员对操作部72进行操作,发送使车辆3发车的控制命令的时间点的时刻,例如是表。
通信部74是向车辆3发送控制命令的通信接口。
另外,在本实施方式中,终端装置7的计时部73在终端装置7不是必须的构成要件,车辆3的第二获得部32在车辆3不是必须的构成要件。因此,可以不设置计时部73以及第二获得部32,可以只设置任意一方。
[动作]
接着说明本实施方式的信息处理方法、信息处理装置5以及信息处理系统1的动作。具体而言说明车辆3停在巴士的停车场所,经过一定期间后车辆3发车为止的期间,信息处理系统1所进行的动作。
图3是示出实施方式1涉及的信息处理系统1的动作的序列图。
如图3所示,车辆3获得表示上下车开始时刻的信息,将获得的各个信息发送到信息处理装置5(步骤S101)。此外,车辆3获得表示车辆3的现在位置的车辆位置信息,将获得的各个信息发送到信息处理装置5、终端装置7(步骤S102)。信息处理装置5的决定部52,接受经由通信部54接收的表示上下车开始时刻的信息、以及车辆位置信息。
此外,车辆3获得表示拍摄了在车辆3上下车的人的图像的乘客图像,将获得的乘客图像发送到信息处理装置5(步骤S103)。信息处理装置5的检测处理部51,通过通信部54接收乘客图像。
另一方面,车辆3获得车辆内外图像,将车辆内外图像发送到终端装置7(步骤S104)。
检测处理部51,根据在步骤S103的乘客图像,生成检测出乘客的人数、乘客的属性等的乘客信息(步骤S105)。检测处理部51,向决定部52输出乘客信息(步骤S106)。
决定部52向存储控制部53请求与获得的乘客信息、上下车开始时刻、车辆位置信息类似的过去的上下车数据(步骤S107)。
存储控制部53,按照来自决定部52的请求,检索与乘客信息、上下车开始时刻、车辆位置信息类似的过去的上下车数据,将类似的过去的上下车数据输出给决定部52(步骤S108)。上下车数据,由图2B以及图2C示出的如下信息来构成,车辆3在停车场所停止的时刻、停车场所、乘客的属性、按照每个乘客的属性的数量、全部乘客开始上下车到完成为止所需要的时间、按照每个乘客的属性的上下车时间等。另外,存储控制部53,按照决定部52的请求,可以将已学习模型发送到决定部52,以代替按照来自决定部52的请求,将类似的过去上下车的数据输出到决定部52。
决定部52,从存储控制部53获得过去的上下车数据,针对每个车辆3设定监视的优先级(步骤S109)。决定部52,根据乘客信息、上下车开始时刻、和车辆位置信息,决定每个车辆3的优先级。关于优先级后述。决定部52将设定的优先级与车辆ID建立关联的优先级信息,发送到终端装置7(步骤S110)。另外,决定部52,可以从存储控制部53获得已学习模型,针对各个车辆3设定监视的优先级,以代替从存储控制部53获得过去的上下车数据。在这个情况下,决定部52,利用获得的已学习模型,决定每个车辆3的优先级。
在此,决定部52,针对使终端装置7提示的与车辆3有关的信息决定为如下的提示形态,即优先级越高,提示的视觉确认性越高的提示形态、或者优先级越高,信息量越增加的提示形态、或者优先级越高越强调提示的形态。此外,决定部52将与车辆3有关的信息的提示形态决定为,按照优先级的高度的顺序来排列。提示控制部55,按照决定的形态来控制终端装置7的提示,换言之,优先级比阈值高时,使终端装置7开始提示与车辆3有关的信息。
接着,终端装置7,接收在步骤S104获得的车辆内外图像、以及在步骤S110获得的优先级信息。终端装置7,进行与优先级对应的提示(步骤S111)。终端装置7,按照优先级以各种形态进行提示。在图4A~图4E中,示出提示部71提示的形态的例子。
图4A是例示出实施方式1涉及的终端装置7的提示的图。如图4A所示,提示部71,将优先级最高的车辆3,用面积大的图像来提示(视觉确认性高的形态来示出)。具体而言,在多台车辆3中,只提示规定的优先级(阈值)以上的车辆3,并且针对优先级最高的车辆3,用面积大的图像来提示。与优先级为第一位的车辆3有关的信息,示出所有人针对车辆3结束上下车为止所需的时间、与车辆3有关的图像、车辆ID、停车场所。与车辆3有关的图像是车辆内部的图像、车辆3的车门的图像,车辆外部的图像等图像。此外,例如优先级为第二位以后的车辆3,只提示比优先级为第一位的车辆3简单的信息,例如只提示一种与车辆3有关的图像,例如降低图像的帧速率,或者降低画质。此外,小于规定的优先级的车辆3,在本实施方式中是优先级为第六位以后的车辆3,提示部71不提示关于该车辆3的信息。
图4B是例示出实施方式1涉及的终端装置7的提示的另一图。如图4B所示,提示部71,从多台车辆3中只提示规定的优先级以上的车辆3有关的信息。在图4B中,只对与上下车结束时刻近的车辆3有关的信息进行优先提示。在本实施方式中,提示表示两台车辆3的信息,不提示与优先级第三位以后的其他车辆3有关的信息。
图4C是例示出实施方式1涉及的终端装置7的提示的另一图。图4C所示,提示部71,将与优先级最高的车辆3有关的信息,用面积大的图像来提示,并且在多台车辆3中只提示规定的优先级以上的车辆3。在图4C中,提示与车辆3有关的图像。
图4D是例示出实施方式1涉及的终端装置7的提示的另一图。如图4D所示,提示部71,以操作员能够通过提示部71视觉确认与各个车辆3有关的信息的程度的大小,全部提示与车辆3有关的图像(增加了信息量的形态来提示)。在图4D中提示的与车辆3有关的信息是,按照优先级高度的顺序而排列的。
图4E是例示出实施方式1涉及的终端装置7的提示的另一图。如图4E所示,提示部71,将优先级最高的车辆3的有关信息附上颜色进行强调地提示。
另外,图4A~图4E的提示只是一例,不限于这些。例如提示可以包括显示如下图像,该图像映出多个车辆3各自的上车门以及下车门的至少一方的图像。此外,提示包含显示如下的图像,该图像映出多个车辆3的各自的外部的图像。
返回图3的序列图的说明。
所有人对车辆3结束上下车时,终端装置7接受操作员的发车指示(步骤S112)。例如,操作员经由终端装置7确认上下车结束。操作员在确认了上下车结束时,向终端装置7输入发车指示。终端装置7,接受被输入的发车指示。另外,上下车结束的确认,可以由终端装置7通过图像识别确认车门口附近有没有人来进行确认。
终端装置7,在接受操作员的发车指示时,向车辆3发送用于使车辆3发车的控制命令(步骤S113)。
车辆3,在接收步骤S113的控制命令时,发车(步骤S114)。
此外,终端装置7,在步骤S112接受发车指示时,计时部73计测与接受发车指示对应的上下车结束时刻,将表示上下车结束时刻的信息,发送到信息处理装置5(步骤S115)。
接着,决定部52,将在步骤S101接收的表示上下车开始时刻的信息,存放在存储控制部53(步骤S116),从而更新存储控制部53的数据库(步骤S118)。
进而,决定部52,根据在步骤S116接收的表示上下车开始时刻的信息、以及步骤S115的表示上下车结束时刻的信息,计算所需时间,存放到存储控制部53,更新存储控制部53的数据库(步骤S118)。另外,决定部52,可以使用时刻、场所、乘客的属性以及乘客的数量以及所需时间等上下车数据,更新已学习模型,从而替代更新上述存储控制部53的数据库。
此外,决定部52,将在步骤S106获得的乘客信息存放到存储控制部53(步骤S117),从而更新存储控制部53的数据库(步骤S118)。
这样,结束该信息处理系统1的处理。另外,在这个信息处理系统1,步骤S115~步骤S118的存储控制部53的数据库更新以及已学习模型的更新,不是必须的处理,可以不进行这样的处理。
接着,利用图5来说明信息处理装置5中的动作。在这里是车辆3停在规定位置时进行的流程。图5是例示出在实施方式1涉及的信息处理装置5的动作中,决定优先级的流程图。
首先如图5所示,信息处理装置5的检测处理部51,从车辆3接收乘客图像(步骤S161)。检测处理部51,根据乘客图像,检测乘客的数量、乘客的属性等,生成乘客信息。检测处理部51,将乘客信息输出到决定部52。
此外,信息处理装置5的决定部52,从车辆3接收表示上下车开始时刻的信息和车辆位置信息(步骤S162)。
决定部52,根据乘客信息,判断对于车辆3是否存在乘客(步骤S163)。具体而言,决定部52判断乘客信息中包含的乘客的人数是否为1名以上。
在乘客信息中存在乘客的情况下(步骤S163中的“是”),决定部52,算出上下车结束时刻。具体而言,根据乘客信息、过去的上下车数据,决定部52算出从所有人开始上下车到结束为止所需的时间。
决定部52,在步骤S162获得的上下车开始时刻加上算出的所需时间,按照每个车辆3算出上下车结束时刻(步骤S164)。
接着,决定部52,在多个车辆3中从现在时刻到上下车结束时刻越近,则设定越高的优先级。决定部52,在车辆3每次停在车站时,设定各个车辆3的优先级,按照上下车结束时刻的顺序,更新各个车辆3的优先级(步骤S165)。现在时刻是时刻的一例。
另一方面,在乘客信息中,没有乘客的情况下(步骤S163中的“否”),决定部52,将判断为没有乘客的车辆3,设定为优先级最高的车辆3(步骤S167)。另外,没有乘客的车辆3有多辆的情况下,决定部52将该车辆3全部设定为优先级最高的车辆3。决定部52,在与步骤S164同样算出上下车结束时刻后,分别决定其他车辆3的优先级,更新各个车辆3的优先级(步骤S168)。
接着,决定部52,经由通信部54将表示各个车辆3的优先级的信息,发送到终端装置7(步骤S166)。而且结束该信息处理装置5的流程。此外,针对下一个停止的规定位置也进行同样的处理。
利用图6来具体说明图5的步骤S164的算出上下车结束时刻的流程。
图6是例示出在实施方式1涉及的信息处理装置5的动作中,利用数据库算出上下车结束时刻的流程图。另外,代替数据库,也可以使用已学习模型,来算出上下车结束时刻。
首先,如图6所示,决定部52,参考存放在存储控制部53的过去的上下车数据(步骤S171)。具体而言,决定部52,对存储控制部53请求与乘客信息、上下车开始时刻、车辆位置信息类似的过去的上下车数据,获得与存储控制部53的请求对应的过去的上下车数据。
决定部52,判断是否存在与乘客信息、上下车开始时刻、车辆位置信息类似的过去的上下车数据(步骤S172)。例如,类似的情况是指乘客信息、上下车开始时刻、车辆位置信息中的至少一个与过去的上下车数据一致的情况,关于上下车开始时刻,例如是从上下车开始时刻在1小时以内等时间上比较近的情况等。
与乘客信息类似的过去的上下车数据存在的情况下(步骤S172中的“是”),决定部52,将所有人开始上下车到结束为止的所需时间(过去的所需时间),采用为所有人从开始上下车到结束为止的现在的所需时间(步骤S173)。
决定部52,将乘车开始时刻与在步骤S173采用的所需时间进行加算,来算出上下车结束时刻(步骤S174)。然后结束这个流程。
另一方面,与乘客信息类似的过去的上下车数据不存在的情况下(步骤S172中的“否”),决定部52,从存放在存储控制部53的过去的上下车数据中,提取乘客的属性、以及与乘客的属性对应的上下车时间(步骤S175)。
决定部52,根据步骤S175,算出从所有人开始上下车到结束为止的所需时间(步骤S176)。决定部52,进入步骤S174,算出上下车结束时刻。然后,结束这个流程。
如上所述,通过信息处理方法、信息处理装置5以及信息处理系统1,在操作员监视停止中的多个车辆3的时候,能够按照每个车辆3根据上车乘客以及下车乘客的各自的数量以及各自的属性,来算出从所有人开始上下车到结束为止所需要的时间。信息处理装置5,根据上下车开始时刻与所需时间,将到上下车结束为止的时间越短的车辆3设为越高的优先级。终端装置7,针对优先级高的车辆3,用面积大的图像来提示、或者只提示优先级在阈值以上的车辆3、或者提示按照优先级高度的顺序来排列的车辆3的有关的信息、或者详细提示与车辆3有关的信息、或者在优先级最高的车辆3的图像附上颜色进行强调的方式来提示。因此,操作员只要监视在终端装置7被提示的多个车辆3,换言之能够容易掌握应该监视的车辆。从而,操作员需要同时监视的车辆3的数量减少,所以能够减轻操作员看漏应该监视的多个车辆3的风险。其结果,通过监视多个车辆3,既能够确保多个车辆3的安全性,又能够减轻监视多个车辆3的操作员的负担。
(实施方式2)
[构成]
在本实施方式中设想车辆130为自动驾驶行驶的情况,记载了以下的实施方式。
本实施方式的信息处理方法、信息处理装置150以及信息处理系统101的构成,在没有特别说明的情况下是与实施方式1同样,相同的构成赋予相同的符号,省略对构成的详细说明。
图7是例示出实施方式2涉及的信息处理系统101的方框图。
如图7所示,信息处理系统101具有车辆130、信息处理装置150、终端装置170。
车辆130具有第五获得部135、第六获得部136、第七获得部137、通信部138。
第五获得部135是获得表示车辆130的状态的车辆状态信息的装置,例如是ECU(Electronic Control Unit)等。车辆状态信息包括行驶中、暂时停止、紧急停止、行驶速度等表示车辆130的状态的信息。第五获得部135,将车辆状态信息发送到信息处理装置150和终端装置170。
第六获得部136,获得表示车辆130的现在位置的车辆位置信息(例如,GPS信息)。第六获得部136,将获得的车辆位置信息发送到信息处理装置150、终端装置170。
第七获得部137执行物体检测处理的每一个。物体检测处理,检测行驶中的车辆外部的物体以及物体的位置。第七获得部137获得表示车辆130的内部的人的样子、车辆130的外部的物体的位置等传感信息。第七获得部137是拍摄车辆130的内部以及外部的摄像机等图像传感器、LIDAR(Laser Imaging Detection and Ranging)等距离传感器等。第七获得部137,将传感信息发送到信息处理装置150、和终端装置170。车辆130的外部物体是例如在车辆130的前方走的人、在车辆130的后方存在的自行车等。第七获得部137是传感器的一例。
通信部138是将车辆状态信息、车辆位置信息、以及传感信息发送到信息处理装置150的通信接口。此外,通信部138,在车辆130处于被远程操作者进行远程操作的状态时,接收进行远程操作的控制命令。
信息处理装置150的检测处理部151,从车辆130的第七获得部137获得传感信息,根据传感信息,生成车辆130的内部的人的样子、车辆130的外部的物体等车辆内外信息。检测处理部151,将车辆内外信息输出到决定部152。
信息处理装置150的决定部152,从检测处理部151获得车辆内外信息时,获得存放在存储控制部153的数据库中的过去的车辆数据。具体而言,决定部152,对存储控制部153请求与车辆内外信息类似的过去的车辆数据,从存储控制部153获得针对请求的过去的车辆数据。另外,决定部152,也可以对存储控制部153请求基于过去的车辆数据而制作的已学习模型,从存储控制部153获得已学习模型,以代替存放在存储控制部153的数据库的过去的车辆数据。
决定部152根据传感信息、过去的车辆数据等,分别算出多个车辆各自的自动驾驶的困难度与多个车辆130的外部危险度的至少一方。自动驾驶的困难度是表示车辆130的行驶容易程度的参数。例如,车辆130在路宽窄的道路行驶的情况、以及车辆130在发生雨、雾等环境下行驶的情况等,自动驾驶的困难度高。多个车辆130的外部的危险度是表示车辆130行驶的地区发生事故的可能性的参数。例如有突然冲出道路的危险地区、施工中等地区的情况下危险度高。下面在本实施方式中,主要使用危险度来说明。另外,决定部152可以使用获得的已学习模型,分别算出多个车辆各自的自动驾驶的困难度、多个车辆130的外部的危险度中的至少一方,以代替使用传感信息以及过去的车辆数据等。
信息处理装置150的存储控制部153是存放有过去的车辆数据的存储装置。车辆数据是标签、与标签对应的场所、与标签对应的推荐的操作、与标签对应的危险度等信息。标签是,针对某个场所的突然冲出道路危险地区、施工中等的说明文。存储控制部153,按照来自决定部152的请求,检索与车辆内外信息类似的过去的车辆数据,将类似的过去的车辆数据发送到决定部152。另外,危险度可以任意变更,例如根据车辆130的外部存在的人的数量,危险度会变动。另外,存储控制部153,可以存放根据过去的车辆数据进行学习的已学习模型,以代替存放过去的车辆数据。
图8A、图8B以及图8C是例示出实施方式2涉及的过去的车辆数据的图。如图8A所示,过去的车辆数据由如下构成:危险状况发生过的“场所”、危险状况的说明文即“标签”、与标签对应的“推荐操作”、以及与标签对应的“危险度”。如图8B所示,过去的车辆数据还具有如下:发动AEB(Autonomous Emergency Braking:自动紧急制动)、暂时停止等的在车辆130发生的“状态”、与状态对应的说明文即“标签”、与状态对应的“推荐操作”、与状态对应的“危险度”。如图8C所示过去的车辆数据还具有:路上的步行者、车辆130的后方的自行车等在车辆130的行驶中发生的车辆130的外部的“状况”、与状况对应的说明文即“标签”、与状况对应的“推荐操作”、与状况对应的“危险度”。
终端装置170的提示部171,经由通信部173接收车辆130的优先级、车辆130的状态、车辆130的内部的图像、车辆130的外部的图像、车辆ID、车辆130的现在位置等与车辆130有关的信息,并且将接收的这些信息按照每个车辆130进行提示。
终端装置170的提示部171,将优先级最高的车辆130用面积大的图像来提示、或者从多台车辆130中只提示优先级在阈值以上的车辆130、或者详细提示车辆130的信息、或者以相同大小的图像来提示按照优先级高度的顺序来排列的车辆130的有关的信息、或者在优先级最高的车辆130的图像附上颜色进行强调的方式来提示。
[动作]
接着说明本实施方式中的信息处理方法、信息处理装置150以及信息处理系统101的动作。具体而言说明在车辆130的行驶中进行的信息处理系统101的动作。
图9是例示出实施方式2涉及的信息处理系统101的动作的序列图。
如图9所示,车辆130获得车辆状态信息,发送到信息处理装置150、以及终端装置170(步骤S201)。信息处理装置150的决定部152,经由通信部154接收车辆状态信息。
此外,车辆130获得表示车辆130的现在位置的车辆位置信息,将车辆位置信息发送到信息处理装置150和终端装置170(步骤S202)。信息处理装置150的决定部152,经由通信部154接收车辆位置信息。
车辆130获得表示车辆130的内部的人的样子、车辆外部换言之车辆130的外部的物体或者物体的位置等的传感信息,将获得的传感信息发送到信息处理装置150和终端装置170(步骤S203)。信息处理装置150的决定部152,经由通信部154接收传感信息。
检测处理部151,根据在步骤S203中的传感信息,生成表示车辆130的内部的人的样子、车辆130的外部的物体的位置等车辆内外信息(步骤S204)。检测处理部151,将车辆内外信息输出到决定部152(步骤S205)。
决定部152,对存储控制部153请求与获得的车辆内外信息类似的过去的车辆数据(步骤S206)。
存储控制部153,按照来自决定部152的请求,检索与车辆内外信息类似的过去的车辆数据,将类似的过去的车辆数据输出到决定部152(步骤S207)。如图8A~图8C的示例,过去的车辆数据是指场所、与标签对应的场所、与标签对应的被推荐的操作、与场所对应的危险度、车辆130的状态、与场所对应的状况等的信息。
决定部152,从存储控制部153获得过去的车辆数据,分别对各个车辆130设定优先监视的优先级(步骤S208)。决定部152,根据危险度决定优先级。关于优先级的决定在后边叙述。决定部152,将决定的表示各个车辆130的优先级的信息,发送到终端装置170(步骤S209)。
接着,终端装置170接收在步骤S201获得的车辆状态信息、车辆内外信息、在步骤S209决定的表示各个车辆130的优先级的信息。终端装置170,按照优先级进行提示(步骤S210)。
终端装置170,按照优先级进行各种形态的提示。在图10A~图10F,例示出提示部171的提示的形态。
图10A是例示出实施方式2涉及的终端装置170的提示的图。如图10A所示,提示部171将优先级最高的车辆130,用面积大的图像来提示。具体而言,只提示在多台车辆130中优先级为规定的优先级以上的车辆130,关于优先级最高的车辆130,使用面积大的图像详细提示。与优先级为第一位的车辆130有关的信息是指如下的信息,车辆130的优先级、车辆130的状态、车辆130的内部的图像、车辆130的外部的图像、车辆ID、车辆130的现在位置等与车辆130有关的信息。此外,例如,针对优先级为第二位以后的车辆130,提示比优先级为第一位的车辆130简单的信息,例如与车辆130有关的图像只提示一种。此外,针对小于规定的优先级的车辆130,在本实施方式中的优先级为第六位以后的车辆130,在提示部171不提示与该车辆130有关的信息。
图10B是例示出实施方式2涉及的终端装置170的提示的另一图。如图10B所示,提示部171,在多台车辆130中只提示优先级为规定的优先级以上的车辆130的有关的信息。在本实施方式中提示了两台车辆130的信息,不提示优先级为第三位以后的其他车辆130的有关的信息。
图10C是例示出实施方式2涉及的终端装置170的提示的另一图。如图10C所示,提示部171将优先级最高的车辆130的有关的信息,用面积大的图像来提示、并且只提示多台车辆130中的优先级为规定的优先级以上的车辆130。在图10C中详细提示与车辆130有关的信息。
图10D是例示出实施方式2涉及的终端装置170的提示的另一图。如图10D所示,提示部171,以操作员能够通过提示部171视觉确认与各个车辆130有关的信息的程度的大小,提示多台车辆130的图像。在图10D中,提示按照优先级的高度的顺序而排列的车辆130的有关的信息。
图10E是例示出实施方式2涉及的终端装置170的提示的另一图。如图10E所示,提示部171,将优先级最高的车辆130的有关信息附加颜色进行强调来提示。
图10F是例示出实施方式2涉及的终端装置170的提示的另一图。如图10F所示,多台车辆130连续地纵型行驶的情况下,将这些车辆130总结为一个,作为1台车辆130来提示。
另外,图10A~图10F的提示只是一例,不限于此。
返回图9的序列图的说明。
终端装置170,接受操作员的动作指令(步骤S211)。例如,操作员从在终端装置170提示的车辆130的各自,确认各个车辆130的运行状况。而且,操作员向终端装置170输入动作指示。终端装置170,接受操作员的动作指示时,针对提示在终端装置170的各个车辆130,发送控制命令(步骤S212)。在这里控制命令是指车辆130的紧急停止、车辆130的暂时停止、车辆130的慢行、车辆130的方向盘操作等控制车辆130的行驶的命令。
车辆130,在接收步骤S212的控制命令时,进行与控制命令对应的动作以及显示(步骤S213)。这样该信息处理系统101的处理结束。
终端装置170生成状况数据,该状况数据表示与在步骤S212发送的控制命令对应的评价。例如,因为A地点的突然冲出道路的行为,慢行驾驶的情况下,终端装置170生成状况数据,即场所为“A地点”、标签为“突然冲出道路的危险”、推荐操作为“慢行驾驶”、危险度为“高”的状况数据。另外,可以通过操作员经由操作部172进行输入,从而生成状况数据。此外,状况数据,也可以由终端装置170自动生成。终端装置170将被生成的状况数据,发送到信息处理装置150(步骤S214)。信息处理装置150的存储控制部153,经由通信部154接收状况数据。由存储控制部153存放状况数据,更新存储控制部153的数据库。
此外,决定部152,根据车辆状态信息、车辆位置信息、以及传感信息,例如,生成表示车辆130停车的位置、那时的车辆130的外部的物体的信息等的行驶信息,并将行驶信息输出到存储控制部153(步骤S215)。
存储控制部153,获得行驶信息,更新存储控制部153的数据库(步骤S216)。而且,在信息处理系统101中,结束该处理。
另外,在该信息处理系统101中,步骤S214~步骤S216中的存储控制部153的数据库的更新,不是必须的处理,可以不进行这样的处理。
在这里,具体说明信息处理装置150中的优先级设定。图11是例示出在实施方式2涉及的信息处理装置150的动作中,利用数据库决定优先级的流程图。另外,代替利用数据库,可以利用已学习模型来决定优先级。
首先,如图11所示,信息处理装置150,获得车辆状态信息、传感信息、以及车辆位置信息(步骤S261)。
信息处理装置150的决定部152,根据车辆状态信息,判断车辆130是否有异常(步骤S262)。具体而言,决定部152判断在车辆状态信息中是否包括例如AEB发动等在车辆130的行驶中表示危险性高的动作的信息。
在车辆130有异常的情况下(步骤S262中的“是”),决定部152,将发送了车辆状态信息的车辆130的优先级设定为“高”(步骤S263)。
决定部152,将表示在步骤S263设定的车辆130的优先级的信息,发送到终端装置170(步骤S264)。
在车辆130没有异常的情况下(步骤S262中的“否”),决定部152,参考存放在存储控制部153的与地区有关的存储控制部153的数据库(步骤S265)。具体而言,决定部152,根据车辆位置信息,参考车辆130现在行驶的场所(地区)是否存在于数据库内。
决定部152,根据车辆位置信息,判断现在行驶的地区是否存在危险的地点(步骤S266)。危险的地点是指例如突然冲出道路的危险性、施工中等地点。
在现在行驶的地区存在危险地点的情况下(步骤S266中的“是”),决定部152,将在步骤S261发送了信息的车辆130的优先级设定为“高”或者“中”(步骤S267),进入步骤S264。
在现在行驶的地区不存在危险地点的情况下(步骤S266中的“否”),决定部152,根据车辆位置信息以及传感信息,参考存放在存储控制部153的与危险场景有关的数据库(步骤S268)。具体而言,决定部152,根据车辆位置信息以及传感信息,参考车辆130现在行驶的地区是否在存储控制部153的数据库内。在这里,危险场景是指位于车辆130进行自动驾驶存在困难的地区,预测车辆130有可能发生危险的场景。例如,危险场景是指,在车辆130行驶的车道有自行车行驶的情况、从后方有自行车接近车辆130的情况、以及因为路上停车死角多,有突然冲出道路的危险性的情况等。
决定部152,根据车辆位置信息以及传感信息,判断在现在行驶的地区是否包括危险场景(步骤S269)。
在现在行驶的地区中包括危险场景的情况下(步骤S269中的“是”),决定部152,将在步骤S261发送了信息的车辆130的优先级设定为“高”或者“中”(步骤S270),进入步骤S264。
在现在行驶的地区不包括危险场景的情况下(步骤S269中的“否”),决定部152,在步骤S261发送了信息的车辆130的优先级设定为“低”(步骤S271),进入步骤S264。这样,信息处理装置150,决定优先级,结束这个处理。在本实施方式中,优先级分为“高”、“中”、“低”的3个等级,但是也可以是2个等级,也可以是4个等级以上。
另外,按照车辆130行驶的地区、该地区的气候等危险度是不同的。因此,例如车辆130行驶路面宽度窄的道路的情况、发生雨和雾等的情况下等,决定部152例如可以将步骤S267以及步骤S270的优先级设定为“高”,可以将步骤S263的优先级设定为“超级高”,也可以将步骤S267的优先级设定为“中”。决定部152,可以经由通信部154,从外部的服务器获得正在行驶的地区的气候信息。
这样通过信息处理方法、信息处理装置150以及信息处理系统101,操作员对行驶中的多个车辆130进行监视时,根据表示各个车辆130的内部以及外部的状态的传感信息,能够按照每个车辆130算出危险度。根据这个危险度,信息处理装置150将危险度越高的车辆130,提示为越优先监视的车辆130。终端装置170,针对优先级高的车辆130,用面积大的图像提示、或者只提示优先级在阈值以上的车辆130、或者提示全部车辆130的详细信息、或者尽可能提示车辆130的信息、或者优先级最高的车辆130的图像附上颜色进行强调地提示。因此,操作员只需要监视在终端装置170提示的多个车辆130,换言之能够更正确地掌握需要监视的车辆130。其结果通过监视多个车辆,能够进一步确保多个车辆的安全性。
(其他变形例)
以上说明了本公开的实施方式1、2涉及的信息处理方法、信息处理装置5、150以及信息处理系统1、101,但是不限定于上述的实施方式1、2。
例如,在所述实施方式1涉及的信息处理方法,信息处理装置5以及信息处理系统1中,说明了按照乘客,来决定用于监视或控制车辆3的提示的形态的例子,但是也可以按照车辆3的拥挤度来决定该提示的形态。例如,检测处理部51,根据从第四获得部34获得的车内外图像,检测车辆3内的乘客人数、空着的座位数等来生成拥挤度信息。决定部52根据拥挤度信息,决定优先级。提示控制部55,根据该优先级,控制所述提示的形态。
此外,在所述实施方式1、2涉及的信息处理方法、信息处理装置5、150以及信息处理系统1、101中,将多个车辆3、130决定为相同的优先级的情况下,信息处理装置5、150可以将该消息通知给车辆3、130侧,根据该通知在车辆3、130内进行广播。
此外,在所述实施方式1、2涉及的信息处理方法、信息处理装置5、150以及信息处理系统1、101中,根据优先级的形态来提示的图像,可以被强调与决定优先级时使用的信息有关的部分,或者能够区分地进行提示。具体而言,决定优先级时使用的信息可以是被检测的物体。例如,在实施方式1中,可以强调显示图像上的乘客。此外,在实施方式2中,可以强调显示图像上的步行者或者车辆。作为强调显示的形态,可以是物体的色彩、图样或者框的附加、物体的亮灭等。
此外,在所述实施方式1、2涉及的信息处理方法、信息处理装置5、150以及信息处理系统1、101中包含的各处理部,典型的是作为集成电路即LSI来实现。可以分别单片化,或者包括一部分或者全部的方式单片化。
此外,集成电路化不限于LSI,可以用专用电路或者通用处理器来实现。也可以使用在LSI制造后可编程的FPGA(Field Programmable Gate Array:现场可编程门阵列)、或者可重构LSI内部的电路单元的连接以及设定的可重构处理器。
另外,在所述各个实施方式1、2中,各个构成要素由专用的硬件来构成、或者由执行适合各构成要素的软件程序来实现。各个构成要素,可以由CPU或者处理器等的程序执行部,读出并执行在硬盘或者半导体存储器等记录介质中记录的软件程序来实现。
此外,所述所采用的数字均为具体说明本公开的例子,本公开的实施方式1、2不受所示出的数字的限制。
此外,方框图中的功能块的分割是一例,可以将多个功能块作为一个功能块来实现,或者将一个功能块分割为多个,或者将一部分功能转移到其他功能块。此外,具有类似的功能的多个功能块的功能,可以由单一硬件或者软件并行或者分时地处理。
此外,流程图中的各个步骤执行的顺序是为了具体说明本公开而示出的例子,也可以是所述以外的顺序。此外,所述步骤的一部分可以与其他步骤同时(并行)地执行。
以上一个或者多个方案涉及的信息处理方法、信息处理装置5、150以及信息处理系统1、101,根据实施方式1、2来进行了说明,但是本公开的实施方式1、2不限定于该多个形式。在不超出本公开的宗旨的范围内,将本领域技术人员想出的各种变形实施在本实施方式1、2、或者将不同实施方式中的构成要素进行组合构筑的形式,也包括在一个或多个方案的范围内。
另外,检测处理部51、151以及决定部52、152进行的处理,如实施方式1、2的记载,可以使用机器学习。机器学习可以举出如下,例如,针对输入信息使用被赋予了标签(输出信息)的教师数据,学习输入与输出的关系的教师学习、通过仅由无标签的输入,构筑数据结构的无教师学习、使用有标签和无标签的任一个的半教师学习、以及针对根据状态的观测结果而选择的行动获得反馈(报酬),从而能够获得最多的报酬的连续的行动的强化学习等。此外,作为机器学习的具体方法有神经网(包括使用多层的神经网的深层学习)、遗传编程、决策树、贝叶斯网络,支持向量机(SVM)等。在本公开中,可以使用以上举出的具体例的任一个。
本公开能够适用于对自动驾驶车辆进行远程操作的装置、提示自动驾驶车辆的状态的终端装置、或者包括这些的系统。尤其用于自动驾驶巴士、自动驾驶出租车、自动驾驶电车等。
符号说明
1,101 信息处理系统
3,130 车辆
5,150 信息处理装置
7,170 终端装置(提示装置)
33 第三获得部(传感器)
51,151 检测处理部
52,152 决定部
54,154 通信部(获得部)
55,155 提示控制部
137 第七获得部(传感器)

Claims (15)

1.一种信息处理方法,
从多个车辆分别获得传感数据,该传感数据是从所述多个车辆各自具有的传感器获得的数据,
利用所述传感数据的每一个,分别执行物体检测处理的每一个,
利用所述物体检测处理的每一个的结果,决定提示的形态,所述提示用于监视或者控制所述多个车辆,
按照被决定的所述形态,对提示装置的所述提示进行控制。
2.如权利要求1所述的信息处理方法,
根据所述物体检测处理的每一个的结果,决定分别与所述多个车辆对应的多个优先级,
按照所述多个优先级,决定所述提示的形态。
3.如权利要求2所述的信息处理方法,
将所述多个车辆的状态的每一个状态分别从所述多个车辆的每一个车辆获得,
根据所述物体检测处理的每一个的结果以及所述多个车辆的状态的每一个状态,分别决定所述多个优先级。
4.如权利要求1至3的任一项所述的信息处理方法,
在所述物体检测处理中,检测针对停车中的车辆的上车乘客与下车乘客的至少一方,
按照检测出的所述上车乘客与所述下车乘客的至少一方,决定所述提示的形态。
5.如权利要求4所述的信息处理方法,
在所述物体检测处理中,检测所述上车乘客与所述下车乘客的至少一方的属性或者数量,
按照检测出的所述属性或者所述数量,决定所述提示的形态。
6.如权利要求5所述的信息处理方法,
利用所述属性或者所述数量,算出上车与下车的至少一方到结束为止的时间,所述上车是所述上车乘客针对所述停车中的车辆的上车,所述下车是所述下车乘客从所述停车中的车辆的下车,
按照算出的所述时间,决定所述提示的形态。
7.如权利要求1至3的任一项所述的信息处理方法,
在所述物体检测处理中,检测行驶中的车辆外部的物体以及所述物体的位置,
按照检测出的所述物体以及所述物体的位置,决定所述提示的形态。
8.如权利要求7所述的信息处理方法,
利用所述物体以及所述物体的位置,对所述多个车辆分别算出自动驾驶的困难度与所述多个车辆的外部的危险度的至少一方,
按照算出的所述困难度与所述危险度的至少一方,决定所述提示的形态。
9.如权利要求4所述的信息处理方法,
所述提示包括显示如下图像,该图像是映出所述多个车辆的每一个车辆的上车门与下车门的至少一方的图像。
10.如权利要求7所述的信息处理方法,
所述提示包括显示如下图像,该图像是映出所述多个车辆的每一个车辆的外部的图像。
11.如权利要求2或者3所述的信息处理方法,
所述提示的形态,以所述多个优先级中的优先级越高,所述提示的视觉确认性越高的方式而被决定。
12.如权利要求2或者3所述的信息处理方法,
所述提示的形态,以所述多个优先级中的优先级越高,所述提示的信息量越多的方式而被决定。
13.如权利要求2或者3所述的信息处理方法,
所述提示的形态,以在所述多个优先级中的优先级比阈值高时,开始所述提示的方式而被决定。
14.如权利要求2或者3所述的信息处理方法,
所述提示的形态,以所述提示的顺序对应于所述多个优先级中的优先级高度的顺序的方式而被决定。
15.一种信息处理装置,具备:
获得部,从多个车辆分别获得传感数据,该传感数据是从所述多个车辆各自具有的传感器获得的数据;
检测处理部,利用所述传感数据的每一个,分别执行物体检测处理的每一个;
决定部,利用所述物体检测处理的每一个的结果,决定提示的形态,所述提示用于监视或者控制所述多个车辆;以及
提示控制部,按照被决定的所述形态,对提示装置的所述提示进行控制。
CN201910638562.1A 2018-07-19 2019-07-16 信息处理方法以及信息处理装置 Active CN110738843B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310364949.9A CN116343483A (zh) 2018-07-19 2019-07-16 信息处理方法以及信息处理装置

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2018136099 2018-07-19
JP2018-136099 2018-07-19
JP2019047427A JP7308442B2 (ja) 2018-07-19 2019-03-14 情報処理方法、情報処理装置及び情報処理システム
JP2019-047427 2019-03-14

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202310364949.9A Division CN116343483A (zh) 2018-07-19 2019-07-16 信息处理方法以及信息处理装置

Publications (2)

Publication Number Publication Date
CN110738843A true CN110738843A (zh) 2020-01-31
CN110738843B CN110738843B (zh) 2023-04-28

Family

ID=67437497

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201910638562.1A Active CN110738843B (zh) 2018-07-19 2019-07-16 信息处理方法以及信息处理装置
CN202310364949.9A Pending CN116343483A (zh) 2018-07-19 2019-07-16 信息处理方法以及信息处理装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202310364949.9A Pending CN116343483A (zh) 2018-07-19 2019-07-16 信息处理方法以及信息处理装置

Country Status (4)

Country Link
US (2) US11145145B2 (zh)
EP (1) EP3598259B1 (zh)
JP (1) JP2023106448A (zh)
CN (2) CN110738843B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113496590A (zh) * 2020-04-02 2021-10-12 丰田自动车株式会社 交通系统、运行管理装置以及运行管理方法
CN113851011A (zh) * 2020-06-28 2021-12-28 本田技研工业株式会社 信息处理装置、信息处理装置的控制方法、通信装置、通信装置的控制方法、以及介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6919804B1 (en) * 2001-05-08 2005-07-19 Vultron Incorporated Passenger detection system for vehicles
US20140267282A1 (en) * 2013-03-14 2014-09-18 Robert Bosch Gmbh System And Method For Context Dependent Level Of Detail Adjustment For Navigation Maps And Systems
WO2016171370A1 (ko) * 2015-04-22 2016-10-27 한국철도기술연구원 열차의 승강장 정차시간 자동 산출 서버, 시스템 및 방법
US20170102855A1 (en) * 2015-10-12 2017-04-13 Lg Electronics Inc. Mobile terminal and method of controlling the same
US20170277191A1 (en) * 2016-03-24 2017-09-28 Waymo Llc Arranging passenger pickups for autonomous vehicles
CN107358484A (zh) * 2017-05-27 2017-11-17 上海与德科技有限公司 一种网约车监控方法及系统
US20170336629A1 (en) * 2016-05-19 2017-11-23 Yuuki Suzuki Information processing system and information display apparatus
WO2018037900A1 (ja) * 2016-08-22 2018-03-01 ソニー株式会社 運転支援装置および方法、移動体、並びにプログラム
US20180096599A1 (en) * 2016-09-30 2018-04-05 Intertrust Technologies Corporation Transit vehicle information management systems and methods
US20180137595A1 (en) * 2015-05-19 2018-05-17 Lg Innotek Co., Ltd. Display device and operation method therefor

Family Cites Families (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100701763B1 (ko) * 2002-09-24 2007-03-29 주식회사 케이티 단거리무선통신망을 이용한 버스 내 승객을 위한 정류소도착소요시간 안내 방법
DE3332582A1 (de) * 1983-09-09 1985-03-28 Wegmann & Co GmbH, 3500 Kassel Einrichtung zur ueberwachung von kampffahrzeugen, insbesondere von kampfpanzern
US5176082A (en) * 1991-04-18 1993-01-05 Chun Joong H Subway passenger loading control system
ES2149569T3 (es) * 1996-04-03 2000-11-01 Inventio Ag Control para varios grupos de ascensores con control de llamada de destino.
JP4040441B2 (ja) * 2002-12-04 2008-01-30 トヨタ自動車株式会社 車両用通信装置
DE102004004302A1 (de) * 2003-02-03 2004-08-12 Denso Corp., Kariya Fernbedienbare Fahrzeugklimaanlage
EP1548683B1 (en) * 2003-12-24 2010-03-17 Pioneer Corporation Notification control device, system and method
CN1961331A (zh) * 2004-03-31 2007-05-09 松下电器产业株式会社 积分计算设备和积分分配系统
US20070197195A1 (en) * 2005-01-13 2007-08-23 Keiji Sugiyama Information notification controller, information notification system, and program
US7595740B2 (en) * 2005-10-26 2009-09-29 Transspot Ltd. Real time navigation and advertising platform for public transportation
GB2436916B (en) * 2006-03-29 2008-09-24 John Turnbull Warning System
JP4321543B2 (ja) * 2006-04-12 2009-08-26 トヨタ自動車株式会社 車両周辺監視装置
US20090106036A1 (en) * 2007-10-22 2009-04-23 Kazuya Tamura Method and system for making automated appointments
KR20110089516A (ko) * 2010-02-01 2011-08-09 김영욱 전동차 출입문 개방잔여 시간 알림장치
WO2011133195A1 (en) * 2010-04-22 2011-10-27 Zipit Wireless, Inc. System and method for administration and operation of one or more mobile electronic communications devices
JP5518213B2 (ja) * 2010-12-20 2014-06-11 三菱電機株式会社 車両内混雑状況表示システムおよび混雑状況案内方法
CN103080990B (zh) * 2011-06-07 2015-04-01 株式会社小松制作所 作业车辆的周边监视装置
EP2820869A4 (en) * 2012-02-29 2015-09-30 Nokia Technologies Oy METHOD AND DEVICE FOR PROVIDING HUB-BASED INDEXING AND SERVICES
US9646427B2 (en) * 2014-10-08 2017-05-09 Innova Electronics Corporation System for detecting the operational status of a vehicle using a handheld communication device
US10298741B2 (en) * 2013-07-18 2019-05-21 Secure4Drive Communication Ltd. Method and device for assisting in safe driving of a vehicle
KR102208110B1 (ko) * 2013-09-11 2021-01-27 엘지전자 주식회사 착용형 컴퓨팅 디바이스 및 사용자 인터페이스 방법
WO2015099679A1 (en) * 2013-12-23 2015-07-02 Intel Corporation In-vehicle authorization for autonomous vehicles
US10023114B2 (en) * 2013-12-31 2018-07-17 Hartford Fire Insurance Company Electronics for remotely monitoring and controlling a vehicle
WO2015115879A1 (es) * 2014-01-30 2015-08-06 Modutram México, S.A. De. C.V. Sistema y método de agrupación de pasajeros en un transporte colectivo automatizado
US20150237351A1 (en) * 2014-02-18 2015-08-20 Penne Lee Techniques for inclusion of region of interest indications in compressed video data
US20150257713A1 (en) * 2014-03-17 2015-09-17 Panasonic Intellectual Property Management Co., Ltd. Health management system, terminal device, display method, and control program
JP6116512B2 (ja) 2014-03-25 2017-04-19 株式会社日立製作所 自動列車運転システム、列車運転支援システム及び列車運行管理システム
JP6331959B2 (ja) * 2014-10-21 2018-05-30 株式会社デンソー 車載装置
JP6646431B2 (ja) * 2014-12-24 2020-02-14 矢崎総業株式会社 表示装置
CN105897856A (zh) * 2015-02-12 2016-08-24 深圳富泰宏精密工业有限公司 机场自动提醒系统、方法及装置
JP6319349B2 (ja) * 2015-04-03 2018-05-09 株式会社デンソー 情報提示装置
US10949656B2 (en) * 2015-09-29 2021-03-16 Sony Corporation Information processing apparatus and information processing method
US20170169373A1 (en) * 2015-12-14 2017-06-15 Xerox Corporation System and method for measuring perceived impact of schedule deviation in public transport
US20170169366A1 (en) * 2015-12-14 2017-06-15 Google Inc. Systems and Methods for Adjusting Ride-Sharing Schedules and Routes
JP6589678B2 (ja) 2016-02-18 2019-10-16 トヨタ自動車株式会社 遠隔操作システム
KR101653797B1 (ko) * 2016-04-15 2016-09-09 스튜디오씨드코리아 주식회사 프로토타입 제작 방법 및 그 장치
US10353523B2 (en) * 2016-05-10 2019-07-16 Westinghouse Air Brake Technologies Corporation Passenger communication lighting
WO2018008192A1 (ja) * 2016-07-06 2018-01-11 三菱電機株式会社 運転支援装置
CN107662869B (zh) * 2016-07-29 2021-06-29 奥的斯电梯公司 用于乘客运送装置的大数据分析处理系统和方法
US9898971B1 (en) * 2016-08-10 2018-02-20 Caterpillar Inc. System, method, and apparatus to selectively control brightness of liquid crystal display
WO2018055774A1 (ja) * 2016-09-26 2018-03-29 株式会社日立国際電気 車両監視システム、管理装置、及び監視方法
GB2555390A (en) * 2016-10-21 2018-05-02 Mclaren Applied Tech Ltd Seat occupancy monitor
JP6458792B2 (ja) * 2016-11-04 2019-01-30 本田技研工業株式会社 車両制御システム、車両制御方法、および車両制御プログラム
JP2018098684A (ja) * 2016-12-15 2018-06-21 住友電気工業株式会社 スイッチ装置、通信制御方法および通信制御プログラム
US10053006B1 (en) * 2017-01-31 2018-08-21 Ford Global Technologies, Llc Illuminated assembly
JP6515125B2 (ja) * 2017-03-10 2019-05-15 株式会社Subaru 画像表示装置
JP6815925B2 (ja) * 2017-04-24 2021-01-20 日立オートモティブシステムズ株式会社 車両の電子制御装置
US11493348B2 (en) * 2017-06-23 2022-11-08 Direct Current Capital LLC Methods for executing autonomous rideshare requests
SG10201705461QA (en) * 2017-07-03 2019-02-27 Nec Asia Pacific Pte Ltd Method and apparatus for estimating capacity of a predetermined area of a vehicle
SG10201705478PA (en) * 2017-07-03 2019-02-27 Nec Asia Pacific Pte Ltd Method and apparatus for adaptively managing a vehicle
US10147320B1 (en) * 2017-12-27 2018-12-04 Christ G. Ellis Self-driving vehicles safety system

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6919804B1 (en) * 2001-05-08 2005-07-19 Vultron Incorporated Passenger detection system for vehicles
US20140267282A1 (en) * 2013-03-14 2014-09-18 Robert Bosch Gmbh System And Method For Context Dependent Level Of Detail Adjustment For Navigation Maps And Systems
WO2016171370A1 (ko) * 2015-04-22 2016-10-27 한국철도기술연구원 열차의 승강장 정차시간 자동 산출 서버, 시스템 및 방법
US20180137595A1 (en) * 2015-05-19 2018-05-17 Lg Innotek Co., Ltd. Display device and operation method therefor
US20170102855A1 (en) * 2015-10-12 2017-04-13 Lg Electronics Inc. Mobile terminal and method of controlling the same
US20170277191A1 (en) * 2016-03-24 2017-09-28 Waymo Llc Arranging passenger pickups for autonomous vehicles
US20170336629A1 (en) * 2016-05-19 2017-11-23 Yuuki Suzuki Information processing system and information display apparatus
WO2018037900A1 (ja) * 2016-08-22 2018-03-01 ソニー株式会社 運転支援装置および方法、移動体、並びにプログラム
US20180096599A1 (en) * 2016-09-30 2018-04-05 Intertrust Technologies Corporation Transit vehicle information management systems and methods
CN107358484A (zh) * 2017-05-27 2017-11-17 上海与德科技有限公司 一种网约车监控方法及系统

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113496590A (zh) * 2020-04-02 2021-10-12 丰田自动车株式会社 交通系统、运行管理装置以及运行管理方法
US11727802B2 (en) 2020-04-02 2023-08-15 Toyota Jidosha Kabushiki Kaisha Transportation system, service management device, and service management method
CN113851011A (zh) * 2020-06-28 2021-12-28 本田技研工业株式会社 信息处理装置、信息处理装置的控制方法、通信装置、通信装置的控制方法、以及介质

Also Published As

Publication number Publication date
CN110738843B (zh) 2023-04-28
EP3598259A1 (en) 2020-01-22
CN116343483A (zh) 2023-06-27
EP3598259B1 (en) 2021-09-01
US20200027284A1 (en) 2020-01-23
JP2023106448A (ja) 2023-08-01
US11145145B2 (en) 2021-10-12
US20210407223A1 (en) 2021-12-30
US11450153B2 (en) 2022-09-20

Similar Documents

Publication Publication Date Title
CN108725432B (zh) 自动驾驶装置以及通知方法
US11112793B2 (en) Mixed-mode driving of a vehicle having autonomous driving capabilities
US20230004157A1 (en) Mixed-mode driving of a vehicle having autonomous driving capabilities
US11269325B2 (en) System and methods to enable user control of an autonomous vehicle
US20190064805A1 (en) Mixed-mode driving of a vehicle having autonomous driving capabilities
CN111361572B (zh) 车辆控制设备、车辆控制方法和车辆控制系统
US20190064800A1 (en) Mixed-mode driving of a vehicle having autonomous driving capabilities
JP7308442B2 (ja) 情報処理方法、情報処理装置及び情報処理システム
US20190064803A1 (en) Mixed-mode driving of a vehicle having autonomous driving capabilities
US20200283022A1 (en) Vehicle control system, vehicle control method, and storage medium
US11645914B2 (en) Apparatus and method for controlling driving of vehicle
JP2023106448A (ja) 情報処理方法及び情報処理装置
US20190064802A1 (en) Mixed-mode driving of a vehicle having autonomous driving capabilities
WO2019046204A1 (en) MIXED-MODE DRIVING OF A VEHICLE HAVING AUTONOMOUS DRIVING CAPABILITIES
JP2020107212A (ja) 車両制御システム、車両制御方法、及びプログラム
JP7240218B2 (ja) 車両制御システム、車両制御方法、及びプログラム
CN112955361A (zh) 对预期行驶行为的预测
CN115427279A (zh) 使用车辆控制器控制状态转变的系统和方法
JP7210336B2 (ja) 車両制御システム、車両制御方法、及びプログラム
US20220283579A1 (en) Information processing method, information processing terminal, and information processing system
CN110168463B (zh) 用于运行用于机动车的安全系统的方法以及安全系统
US20230070046A1 (en) Traffic control apparatus, traffic control system, and traffic control method
CN111796592B (zh) 车辆控制系统、车辆控制方法及存储介质
US20240046778A1 (en) Information providing method, vehicle system and management device
CN117631575A (zh) 移动体的控制方法和控制装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant