JP2018144686A - Occupant support device, method, and program - Google Patents

Occupant support device, method, and program Download PDF

Info

Publication number
JP2018144686A
JP2018144686A JP2017042693A JP2017042693A JP2018144686A JP 2018144686 A JP2018144686 A JP 2018144686A JP 2017042693 A JP2017042693 A JP 2017042693A JP 2017042693 A JP2017042693 A JP 2017042693A JP 2018144686 A JP2018144686 A JP 2018144686A
Authority
JP
Japan
Prior art keywords
vehicle
passenger
destination
state
door
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2017042693A
Other languages
Japanese (ja)
Other versions
JP2018144686A5 (en
Inventor
初美 青位
Hatsumi Aoi
初美 青位
啓 菅原
Hiroshi Sugawara
啓 菅原
岡地 一喜
Kazuyoshi Okaji
一喜 岡地
充恵 鵜野
Mitsue Uno
充恵 鵜野
光司 滝沢
Koji Takizawa
光司 滝沢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Omron Corp
Original Assignee
Omron Corp
Omron Tateisi Electronics Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omron Corp, Omron Tateisi Electronics Co filed Critical Omron Corp
Priority to JP2017042693A priority Critical patent/JP2018144686A/en
Priority to PCT/JP2017/026353 priority patent/WO2018163459A1/en
Priority to DE112017007207.7T priority patent/DE112017007207T5/en
Priority to US16/335,276 priority patent/US20200018100A1/en
Priority to CN201780055827.4A priority patent/CN109689439A/en
Publication of JP2018144686A publication Critical patent/JP2018144686A/en
Publication of JP2018144686A5 publication Critical patent/JP2018144686A5/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • EFIXED CONSTRUCTIONS
    • E05LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05BLOCKS; ACCESSORIES THEREFOR; HANDCUFFS
    • E05B77/00Vehicle locks characterised by special functions or purposes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60JWINDOWS, WINDSCREENS, NON-FIXED ROOFS, DOORS, OR SIMILAR DEVICES FOR VEHICLES; REMOVABLE EXTERNAL PROTECTIVE COVERINGS SPECIALLY ADAPTED FOR VEHICLES
    • B60J5/00Doors
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/3407Route searching; Route guidance specially adapted for specific applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Transportation (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Traffic Control Systems (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide support for an occupant of a vehicle.SOLUTION: An occupant support device makes a state determination part determine whether or not an occupant is in a safe state even when the occupant gets out of a vehicle, on the basis of the result of sensing by a peripheral state detection sensor for detecting a peripheral state of the vehicle, in the case where a destination arrival determination part for determining whether or not the vehicle arrives at the occupant's destination determines that the vehicle arrives at the occupant's destination. The occupant support device makes a door lock control part unlock a door for a get-off/get-on opening of the vehicle, in the case where it is determined that the occupant in the safe state even when the occupant gets off the vehicle.SELECTED DRAWING: Figure 2

Description

この発明は、車両の搭乗者を支援するための搭乗者支援装置、方法及びプログラムに関する。   The present invention relates to a passenger support apparatus, method, and program for supporting a vehicle passenger.

車両の運転操作を支援する自動運転制御装置を搭載した車両が開発され、販売が開始されている。   Vehicles equipped with an automatic driving control device that supports driving operations of vehicles have been developed and sold.

このような自動運転制御装置を搭載した車両において、運転者を支援する支援装置が各種提案されている。例えば、特開2014−044707号公報(以下、特許文献1と記す。)は、運転者の健常性を判定し、運転者の健常性が低下している場合、その低下の度合いに応じて運転者を支援する運転者異常時支援装置を開示している。   In a vehicle equipped with such an automatic driving control device, various types of supporting devices that support the driver have been proposed. For example, Japanese Patent Laying-Open No. 2014-044707 (hereinafter referred to as Patent Document 1) determines the driver's health, and when the driver's health is reduced, driving according to the degree of the decrease. A driver abnormality support device that supports a driver is disclosed.

また、例えば、特開2005−054487号公報(以下、特許文献2と記す。)のように、ユーザーが車両のドアを開けようとしたときに、他の車両が近づいていることに気が付かずにドアを開けてしまうことにより衝突事故が発生することを防止するキーレスエントリー装置が知られている。   Further, for example, as disclosed in Japanese Patent Application Laid-Open No. 2005-054487 (hereinafter referred to as Patent Document 2), when the user tries to open the door of the vehicle, the user is not aware that another vehicle is approaching. There is known a keyless entry device that prevents a collision accident from occurring by opening a door.

特開2014−044707号公報JP, 2014-044707, A 特開2005−054487号公報JP 2005-054487 A

前述のように、運転者を支援する運転者異常時支援装置は前記特許文献1などに開示されている。一方、自動運転制御装置を搭載した車両に乗車するのは、運転者だけではなく、運転を行わない同乗者も含む。よって、運転者に対する支援だけでなく、運転者と同乗者とを含めた全ての車両搭乗者に対して各種の支援を行う搭乗者支援装置も求められる。   As described above, a driver abnormality support device that supports a driver is disclosed in Patent Document 1 and the like. On the other hand, not only the driver but also a passenger who does not drive is included in the vehicle equipped with the automatic driving control device. Therefore, not only support for the driver but also a passenger support device that performs various types of support for all vehicle passengers including the driver and the passengers is also required.

また、前記特許文献2では、ユーザーが車両に乗って運転する直前にドアを開けてしまい、衝突事故が起こることを防ぐ技術は記載されているが、車両が目的地に着いた後に車両搭乗者が車両のドアを開けるときに衝突事故が起こることを防ぐ技術は開示されていない。   In addition, in Patent Document 2, a technique for preventing a collision accident from occurring when a user opens a door immediately before riding in a vehicle is described. However, a vehicle occupant after a vehicle arrives at a destination is described. A technique for preventing a collision accident from occurring when the vehicle door is opened is not disclosed.

この発明は、車両が目的地に到着した後に、車両に搭乗している搭乗者を支援することが可能な搭乗者支援装置、方法及びプログラムを提供しようとするものである。   The present invention is intended to provide an occupant support apparatus, method, and program capable of supporting an occupant on a vehicle after the vehicle has arrived at a destination.

上記課題を解決するため、この発明の第1の態様は、車両に搭乗した搭乗者を支援する搭乗者支援装置であって、前記車両が前記搭乗者の目的地に到着したか否かを判定する目的地到着判定部と、前記目的地到着判定部によって前記車両が前記目的地へ到着したと判定されたとき、前記車両の周囲の状態を検出する周囲状態検出センサのセンシング結果に基づいて、前記搭乗者が降車しても安全な状態にあるか否かを判定する状態判定部と、前記状態判定部により前記搭乗者が降車しても安全な状態にあると判定されたとき、前記車両の乗降車口のドアの施錠を解除するドアロック制御部と、を備える。   In order to solve the above-described problem, a first aspect of the present invention is a passenger support device that supports a passenger who has boarded a vehicle, and determines whether the vehicle has arrived at the destination of the passenger. When the destination arrival determination unit and the destination arrival determination unit determine that the vehicle has arrived at the destination, based on the sensing result of the surrounding state detection sensor that detects the surrounding state of the vehicle, A state determination unit that determines whether or not the passenger is in a safe state even when getting off the vehicle, and the vehicle when the state determination unit determines that the passenger is in a safe state even after getting off the vehicle A door lock control unit for unlocking the door of the doorway.

この発明の第2の態様に係る搭乗者支援装置は、第1の態様に係る搭乗者支援装置において、前記状態判定部は、前記周囲状態検出センサのセンシング結果に基づいて、前記乗降車口近辺に存在する移動物体が前記ドアに対して接近してきているのか否かを判定し、その判定結果により前記搭乗者が降車しても安全な状態にあるか否かを判定する。   The passenger assistance device according to a second aspect of the present invention is the passenger assistance device according to the first aspect, wherein the state determination unit is based on a sensing result of the ambient state detection sensor and near the entrance / exit. It is determined whether or not a moving object existing in the vehicle is approaching the door, and based on the determination result, it is determined whether or not the passenger is in a safe state even when getting off the vehicle.

この発明の第3の態様に係る搭乗者支援装置は、第1又は第2の態様に係る搭乗者支援装置において、前記搭乗者の前記目的地を記憶する目的地記憶部をさらに具備し、前記目的地到着判定部は、前記車両の現在位置を検出する現在位置検出センサのセンシング結果に基づいて、前記車両が前記目的地記憶部に記憶された前記目的地に到着したか否かを判定する。   A passenger support apparatus according to a third aspect of the present invention is the passenger support apparatus according to the first or second aspect, further comprising a destination storage unit that stores the destination of the passenger. The destination arrival determination unit determines whether the vehicle has arrived at the destination stored in the destination storage unit based on a sensing result of a current position detection sensor that detects a current position of the vehicle. .

この発明の第4の態様に係る搭乗者支援装置は、第1又は第2の態様に係る搭乗者支援装置において、前記車両が、自動運転制御装置を有し、前記自動運転制御装置の制御により目的地まで自動運転を行う自動運転車両であるとき、前記目的地到着判定部は、前記自動運転制御装置からの目的地到着信号の有無により、目的地へ到着したか否かを判定する。   A passenger support apparatus according to a fourth aspect of the present invention is the passenger support apparatus according to the first or second aspect, wherein the vehicle has an automatic driving control apparatus, and is controlled by the automatic driving control apparatus. When the vehicle is an autonomous driving vehicle that performs automatic driving to a destination, the destination arrival determination unit determines whether or not the vehicle has arrived at the destination based on the presence or absence of a destination arrival signal from the automatic driving control device.

この発明の第5の態様は、車両に搭乗した搭乗者を支援するための装置が実行する搭乗者支援方法であって、前記車両が前記搭乗者の目的地に到着したか否かを判定する目的地到着判定ステップと、前記目的地到着判定ステップにおいて前記車両が前記目的地へ到着したと判定されたとき、前記車両の周囲の状態を検出する周囲状態検出センサのセンシング結果に基づいて、前記搭乗者が降車しても安全な状態にあるか否かを判定する状態判定ステップと、前記状態判定ステップにおいて前記搭乗者が降車しても安全な状態にあると判定されたとき、前記車両の乗降車口のドアの施錠を解除するドアロック制御ステップと、を備えている。   According to a fifth aspect of the present invention, there is provided a passenger support method executed by an apparatus for supporting a passenger who has boarded a vehicle, wherein the vehicle determines whether or not the vehicle has arrived at a destination of the passenger. When it is determined that the vehicle has arrived at the destination in the destination arrival determination step and the destination arrival determination step, based on the sensing result of the surrounding state detection sensor that detects the surrounding state of the vehicle, A state determination step for determining whether or not the passenger is in a safe state even when getting off the vehicle, and when it is determined in the state determination step that the passenger is in a safe state for getting off the vehicle, A door lock control step for unlocking the door of the entrance / exit.

この発明の第6の態様は、第1乃至第4の態様に係る搭乗者支援装置が備える各部の機能をコンピュータに実行させるプログラムである。   According to a sixth aspect of the present invention, there is provided a program for causing a computer to execute the function of each unit provided in the passenger support apparatus according to the first to fourth aspects.

この発明の第1及び第5の態様によれば、車両が搭乗者の目的地に到着したか否かを判定し、前記車両が前記目的地へ到着したならば、車両の周囲の状態を検出する。そして、搭乗者が降車しても安全な状態にあれば、前記車両の乗降車口のドアの施錠を解除して、搭乗者を降車可能な状態にする。よって、例えば後方から接近してきた自転車などが通り過ぎるまでドアを施錠したまま搭乗者が降車できないようにすることで、自転車などの接近に気がつかずに降車してしまった搭乗者が自転車など衝突することを防止でき、搭乗者の安全を支援することができる。また、搭乗者が不用意に開放したドアに自転車などが衝突することも防止できるので、自転車などの搭乗者の安全を図り得ることは勿論のこと、車両の搭乗者と自転車などの搭乗者との間のトラブル発生を未然に防止できる。   According to the first and fifth aspects of the present invention, it is determined whether or not the vehicle has arrived at the destination of the passenger, and if the vehicle has arrived at the destination, the state around the vehicle is detected. To do. If the passenger is in a safe state even when getting off, the door of the vehicle entrance / exit door is unlocked so that the passenger can get off. Therefore, for example, by preventing the passenger from getting off with the door locked until the bicycle approaching from behind passes by, the passenger who has got off without noticing the approach of the bicycle collides with the bicycle, etc. Can be prevented and passenger safety can be supported. In addition, since it is possible to prevent a bicycle from colliding with a door that is inadvertently opened by the passenger, not only can the safety of the passenger such as a bicycle be secured, but also the passenger of the vehicle and the passenger such as a bicycle Can be prevented in advance.

この発明の第2の態様によれば、移動物体がドアに対して接近してきているのか否かにより搭乗者が降車しても安全な状態にあるか否かを判定するので、自転車などの移動物体が接近してきているときドアを施錠したままにすることができる。   According to the second aspect of the present invention, since it is determined whether or not the passenger is in a safe state even when getting off the vehicle depending on whether or not the moving object is approaching the door, the movement of the bicycle or the like The door can remain locked when an object is approaching.

この発明の第3の態様によれば、事前に取得して記憶しておいた目的地と車両の現在位置とを比較することで、目的地に到着したか否かを容易に判別することができる。   According to the third aspect of the present invention, it is possible to easily determine whether or not the vehicle has arrived at the destination by comparing the destination acquired and stored in advance with the current position of the vehicle. it can.

この発明の第4の態様によれば、自動運転制御装置によって目的地へ到着した際、そのことを、現在位置検出センサを用いること無く知ることができるので、安価に構成できる。   According to the fourth aspect of the present invention, when the automatic operation control apparatus arrives at the destination, it can be known without using the current position detection sensor, so that it can be constructed at low cost.

この発明の第6の態様によれば、第1乃至第4の態様のいずれか一つに係る搭乗者支援装置が備える各部の機能がコンピュータによって実行される。   According to the sixth aspect of the present invention, the function of each unit included in the passenger support apparatus according to any one of the first to fourth aspects is executed by the computer.

すなわち、この発明の各態様によれば、車両に搭乗している搭乗者を支援することが可能な搭乗者支援装置、方法及びプログラムを提供することができる。   That is, according to each aspect of the present invention, it is possible to provide an occupant support apparatus, method, and program capable of supporting an occupant on a vehicle.

この発明の一実施形態に係る搭乗者支援装置を備えた自動運転制御システムの全体構成を示す図である。It is a figure showing the whole automatic operation control system composition provided with the passenger support device concerning one embodiment of this invention. この発明の一実施形態に係る搭乗者支援装置の機能構成を示すブロック図である。It is a block diagram which shows the function structure of the passenger assistance apparatus which concerns on one Embodiment of this invention. 図2に示した搭乗者支援装置による搭乗者支援の手順と支援内容を示すフローチャートである。It is a flowchart which shows the procedure and assistance content of a passenger assistance by the passenger assistance apparatus shown in FIG.

以下、図面を参照してこの発明に係わる一実施形態を説明する。
[一実施形態]
(構成)
図1は、この発明の一実施形態に係る搭乗者支援装置を備えた自動運転制御システムの全体構成を示す図である。この自動運転制御システムは、車両1に搭載される。なお、ここでは、車両1として、運転者が存在しない完全自動運転車両を行うタクシーを例に説明する。
Hereinafter, an embodiment according to the present invention will be described with reference to the drawings.
[One Embodiment]
(Constitution)
FIG. 1 is a diagram showing an overall configuration of an automatic driving control system including a passenger support apparatus according to an embodiment of the present invention. This automatic driving control system is mounted on the vehicle 1. Here, as the vehicle 1, a taxi that performs a fully automatic driving vehicle without a driver will be described as an example.

車両1は、基本設備として、動力源及び変速装置を含むパワーユニット2と、操舵装置3と、を備えている。動力源としては、エンジン又はモータ、あるいはその両方が用いられる。   The vehicle 1 includes a power unit 2 including a power source and a transmission and a steering device 3 as basic equipment. An engine and / or a motor is used as the power source.

車両1は、運転者を必要としない自動運転モードで走行可能に構成されている。自動運転モードは、例えば、車両の走行する道路に沿って自動で車両1を走行させる運転状態を実現するモードであり、運転者が運転操作をすることなく、タクシーの乗客が指定した目的地に向かって自動的に車両を走行させる。なお、車両1は、必要により手動運転モードに切り替えて運転者の運転操作により走行できるように構成されていてもよい。   The vehicle 1 is configured to be able to travel in an automatic driving mode that does not require a driver. The automatic driving mode is a mode that realizes a driving state in which the vehicle 1 is automatically driven along the road on which the vehicle travels, for example, without a driver performing a driving operation, at a destination designated by a taxi passenger. The vehicle is automatically driven toward. Note that the vehicle 1 may be configured to be able to travel by a driver's driving operation by switching to the manual driving mode as necessary.

図1において、車両1はまた、自動運転モードによる運転制御を実行するための自動運転制御装置4を備えている。自動運転制御装置4は、GPS(Global Positioning System)受信機5、ジャイロセンサ6、及び車速センサ7からそれぞれセンシングデータを取得する。自動運転制御装置4は、図示しないナビゲーションシステムで生成される経路情報や、路車間通信により取得される交通情報、周辺の人や車両の位置と動きを監視する周辺モニタリングシステムにより得られる情報をもとに、ステアリング、アクセル及びブレーキを制御することで、車両1の走行を自動制御する。周辺モニタリングシステムは、例えば、車両周辺に存在する物体(車両や人物などの移動物体及び壁などの静止物体)との距離を測定して距離情報を自動運転制御装置4へ出力するレーダセンサ8と、車両周辺を撮像してその映像信号を自動運転制御装置4へ出力する周辺カメラ9と、を備えることができる。   In FIG. 1, the vehicle 1 also includes an automatic driving control device 4 for executing driving control in the automatic driving mode. The automatic driving control device 4 acquires sensing data from a GPS (Global Positioning System) receiver 5, a gyro sensor 6, and a vehicle speed sensor 7, respectively. The automatic driving control device 4 includes route information generated by a navigation system (not shown), traffic information acquired by road-to-vehicle communication, and information obtained by a peripheral monitoring system that monitors the positions and movements of surrounding people and vehicles. In addition, the travel of the vehicle 1 is automatically controlled by controlling the steering, the accelerator, and the brake. The surrounding monitoring system includes, for example, a radar sensor 8 that measures the distance to an object (a moving object such as a vehicle or a person and a stationary object such as a wall) existing around the vehicle and outputs distance information to the automatic driving control device 4. A peripheral camera 9 that images the vehicle periphery and outputs the video signal to the automatic driving control device 4 can be provided.

自動運転制御には、例えば、自動操舵(操舵の自動運転)と自動速度調整(速度の自動運転)がある。自動操舵は、操舵装置3を自動で制御する運転状態である。自動操舵にはLKA(Lane Keeping Assist)が含まれる。LKAは、車両1が走行車線から逸脱しないように自動で操舵装置3を制御する。なお、自動操舵はLKAに限らない。自動速度調整は、車両1の速度を自動で制御する運転状態である。自動速度調整にはACC(Adaptive Cruise Control)が含まれる。ACCとは、例えば、車両1の前方に先行車が存在しない場合は予め設定された設定速度で車両1を定速走行させる定速制御を行い、車両1の前方に先行車が存在する場合には先行車との車間距離に応じて車両1の車速を調整する追従制御を行うものである。なお、自動速度調整は、ACCに限らず、CC(Cruise Control:定速制御)等も含まれる。   The automatic driving control includes, for example, automatic steering (automatic steering operation) and automatic speed adjustment (automatic driving of speed). Automatic steering is an operating state in which the steering device 3 is automatically controlled. Automatic steering includes LKA (Lane Keeping Assist). The LKA automatically controls the steering device 3 so that the vehicle 1 does not deviate from the traveling lane. Note that automatic steering is not limited to LKA. Automatic speed adjustment is an operating state in which the speed of the vehicle 1 is automatically controlled. Automatic speed adjustment includes ACC (Adaptive Cruise Control). For example, when there is no preceding vehicle ahead of the vehicle 1, ACC performs constant speed control that causes the vehicle 1 to travel at a constant speed at a preset speed, and when the preceding vehicle exists ahead of the vehicle 1. Is a follow-up control that adjusts the vehicle speed of the vehicle 1 in accordance with the inter-vehicle distance from the preceding vehicle. The automatic speed adjustment is not limited to ACC but also includes CC (Cruise Control).

本実施形態の自動運転制御システムは、車両1の搭乗者を支援する搭乗者支援システム10を有している。搭乗者支援システム10は、この発明の一実施形態に係る搭乗者支援装置11と、この搭乗者支援装置11にそれぞれ接続された、案内出力装置12とドアロック装置13とを備えている。   The automatic driving control system of the present embodiment includes a passenger support system 10 that supports a passenger of the vehicle 1. The passenger support system 10 includes a passenger support device 11 according to an embodiment of the present invention, and a guidance output device 12 and a door lock device 13 respectively connected to the passenger support device 11.

案内出力装置12は、搭乗者支援装置11からの案内情報を出力する。案内出力装置12は、例えば、スピーカと表示器を有し、搭乗者支援装置11から出力された案内情報の音声信号をスピーカから出力すると共に、案内情報の表示信号を表示器に表示する。案内情報は、少なくとも、車両1が目的地に到達したことを告知する情報を含む。   The guidance output device 12 outputs guidance information from the passenger support device 11. The guidance output device 12 includes, for example, a speaker and a display, and outputs a voice signal of guidance information output from the passenger support device 11 from the speaker and displays a display signal of guidance information on the display. The guidance information includes at least information for notifying that the vehicle 1 has reached the destination.

また、この案内出力装置12は、完全自動運転を行うタクシーが備えるタクシーシステムの一部として、例えば、ナビゲーションシステムにおける画像表示機能やタッチ入力機能及び音声入出力機能と同等の機能を備えることで、搭乗者の操作によって目的地が入力され得るように構成されてもよい。案内出力装置12は、この入力された目的地の情報を搭乗者支援装置11へ出力することができる。   In addition, the guidance output device 12 includes a function equivalent to an image display function, a touch input function, and a voice input / output function in a navigation system, for example, as a part of a taxi system included in a taxi that performs fully automatic operation. You may be comprised so that the destination can be input by operation of a passenger. The guidance output device 12 can output the input destination information to the passenger support device 11.

さらに、案内出力装置12は、タクシーシステムの一部として、例えば、クレジットカードやプリペイドカード、会員カード等から情報を読み取るカードリーダ機能を備え、搭乗者から運賃を徴収することが可能となっていてもよい。また、案内出力装置12は、運賃を現金により支払うための自動現金受取/釣り銭支払い機能を備えてもよい。   Furthermore, the guidance output device 12 has a card reader function that reads information from, for example, a credit card, a prepaid card, a membership card, etc. as part of the taxi system, and can collect a fare from the passenger. Also good. Further, the guidance output device 12 may have an automatic cash receipt / change payment function for paying the fare with cash.

なお、案内出力装置12は、これらの構成の全てを備える必要は無く、少なくとも目的地に車両1が到着した際、その旨を搭乗者に告知可能であれば、どのような構成であっても構わない。   Note that the guidance output device 12 does not have to have all of these configurations, and any configuration can be used as long as the vehicle 1 can be notified to the passenger when the vehicle 1 arrives at the destination. I do not care.

ドアロック装置13は、自動運転車両の各乗降車口のドアに取り付けられており、搭乗者支援装置11の制御により施錠又は施錠解除される。   The door lock device 13 is attached to the door of each entrance of the autonomous driving vehicle, and is locked or unlocked by the control of the passenger support device 11.

搭乗者支援装置11は、搭乗者を支援するもので、以下のように構成される。図2はその機能構成を示すブロック図である。   The passenger support apparatus 11 supports a passenger and is configured as follows. FIG. 2 is a block diagram showing the functional configuration.

搭乗者支援装置11は、入出力インタフェースユニット20と、制御ユニット40と、記憶ユニット60と、を備えている。   The passenger support apparatus 11 includes an input / output interface unit 20, a control unit 40, and a storage unit 60.

入出力インタフェースユニット20は、周辺カメラ9から出力された映像信号を受信してデジタルデータに変換して、制御ユニット40に入力する。入出力インタフェースユニット20はまた、GPS受信機5から車両1の現在位置を示す現在位置情報を受信して制御ユニット40に入力する。入出力インタフェースユニット20はさらに、案内出力装置12から出力された搭乗者の目的地情報を受信して制御ユニット40に入力する。   The input / output interface unit 20 receives the video signal output from the peripheral camera 9, converts it into digital data, and inputs it to the control unit 40. The input / output interface unit 20 also receives current position information indicating the current position of the vehicle 1 from the GPS receiver 5 and inputs it to the control unit 40. The input / output interface unit 20 further receives the passenger's destination information output from the guidance output device 12 and inputs it to the control unit 40.

また、入出力インタフェースユニット20は、制御ユニット40から出力された案内情報を音声信号及び表示信号に変換して案内出力装置12へ出力する。さらに、入出力インタフェースユニット20は、制御ユニット40から出力されたドア制御情報をドア施錠/施錠解除信号に変換してドアロック装置13へ出力する。   The input / output interface unit 20 converts the guidance information output from the control unit 40 into a voice signal and a display signal and outputs the voice signal and the display signal to the guidance output device 12. Further, the input / output interface unit 20 converts the door control information output from the control unit 40 into a door locking / unlocking signal and outputs it to the door lock device 13.

さらに、入出力インタフェースユニット20は、自動運転制御装置4と制御ユニット40との間の情報の授受を行う。   Further, the input / output interface unit 20 exchanges information between the automatic operation control device 4 and the control unit 40.

記憶ユニット60は、記憶媒体として、例えばSSD(Solid State Drive)やHDD(Hard Disk Drive)等の随時書き込み及び読み出しが可能な不揮発性メモリを使用したものである。また、一部はRAMのような揮発性メモリを使用しても構わない。記憶ユニット60は、本実施形態を実施するために使用する記憶領域として、監視映像記憶部61、案内情報記憶部62、目的地記憶部63、及び、周辺状況記憶部64を備えている。ここで、監視映像記憶部61は、車両1の周辺の監視映像を記憶する。案内情報記憶部62は、案内情報を記憶している。目的地記憶部63は、目的地を記憶する。周辺状況記憶部64は、車両1の各乗降車口近辺の状況が搭乗者が降車しても安全な状態にあるか否かを記憶する。   The storage unit 60 uses a non-volatile memory that can be written and read as needed, such as an SSD (Solid State Drive) or HDD (Hard Disk Drive), as a storage medium. Some of them may use a volatile memory such as a RAM. The storage unit 60 includes a monitoring video storage unit 61, a guidance information storage unit 62, a destination storage unit 63, and a surrounding situation storage unit 64 as storage areas used for carrying out the present embodiment. Here, the monitoring video storage unit 61 stores a monitoring video around the vehicle 1. The guide information storage unit 62 stores guide information. The destination storage unit 63 stores the destination. The surrounding situation storage unit 64 stores whether or not the situation in the vicinity of each exit / exit of the vehicle 1 is in a safe state even if the passenger gets off.

制御ユニット40は、本実施形態を実施するために必要な制御機能として、映像取得部41、案内情報出力部42、目的地取得部43、目的地出力部44、自動運転判定部45、周辺状況判定部46、目的地到着判定部47、及び、ドアロック制御部48を備えている。なお、制御ユニット40を、コンピュータを構成するCPU(Central Processing Unit)及びプログラムメモリにより構成して、これらの制御機能はいずれもプログラムメモリに格納されたプログラムをCPUに実行させることにより実現されることもできる。   The control unit 40 includes a video acquisition unit 41, a guidance information output unit 42, a destination acquisition unit 43, a destination output unit 44, an automatic driving determination unit 45, a surrounding situation as control functions necessary for carrying out this embodiment. A determination unit 46, a destination arrival determination unit 47, and a door lock control unit 48 are provided. The control unit 40 is configured by a CPU (Central Processing Unit) and a program memory constituting the computer, and all of these control functions are realized by causing the CPU to execute a program stored in the program memory. You can also.

映像取得部41は、周辺カメラ9から車両1の周辺の監視映像を取得する機能を有している。映像取得部41は、この周辺カメラ9から出力された映像信号のデジタルデータ(周辺監視映像データ)を入出力インタフェースユニット20から取り込み、この取り込んだ周辺監視映像データを記憶ユニット60の監視映像記憶部61に記憶させる。   The video acquisition unit 41 has a function of acquiring a monitoring video around the vehicle 1 from the peripheral camera 9. The video acquisition unit 41 captures digital data (peripheral monitoring video data) of the video signal output from the peripheral camera 9 from the input / output interface unit 20, and stores the captured peripheral monitoring video data in the monitoring video storage unit of the storage unit 60. 61 is stored.

なお、周辺カメラ9又は入出力インタフェースユニット20において、映像信号を所定の符号化方式に応じて符号化するようにしてもよい。このようにすると、周辺監視映像データの情報量を減らして監視映像記憶部61の記憶容量を節約することが可能となる。   In the peripheral camera 9 or the input / output interface unit 20, the video signal may be encoded according to a predetermined encoding method. In this way, it is possible to save the storage capacity of the monitoring video storage unit 61 by reducing the information amount of the peripheral monitoring video data.

また、映像取得部41は、周辺カメラ9からの監視映像の全てを取得することは必要なく、車両1が停車しているとき、又は、車両1が目的地に到着してからのみ、取得すればよい。   Further, the video acquisition unit 41 does not need to acquire all of the monitoring video from the peripheral camera 9 and is acquired only when the vehicle 1 is stopped or only after the vehicle 1 arrives at the destination. That's fine.

案内情報出力部42は、案内情報記憶部62から予め記憶されている案内情報を読み込み、案内出力装置12へ出力する機能を有している。   The guide information output unit 42 has a function of reading the guide information stored in advance from the guide information storage unit 62 and outputting it to the guide output device 12.

目的地取得部43は、搭乗者である乗客の目的地を取得する機能を有している。目的地取得部43は、案内出力装置12により入力された目的地の情報を取り込み、その取り込んだ目的地の情報を記憶ユニット60の目的地記憶部63に記憶させる。   The destination acquisition unit 43 has a function of acquiring a destination of a passenger who is a passenger. The destination acquisition unit 43 takes in the destination information input by the guidance output device 12 and stores the fetched destination information in the destination storage unit 63 of the storage unit 60.

目的地出力部44は、乗客の目的地を自動運転制御装置4へ出力する機能を有している。目的地出力部44は、目的地記憶部63に記憶された目的地の情報を読み出して、自動運転制御装置4へ出力する。   The destination output unit 44 has a function of outputting the passenger's destination to the automatic operation control device 4. The destination output unit 44 reads out the destination information stored in the destination storage unit 63 and outputs the information to the automatic operation control device 4.

自動運転判定部45は、自動運転制御装置4から出力された自動運転に関わる各種情報から、車両1が現在、走行しているのか、停車しているのか、目的地に到着したのか否か、などの自動運転状態を判定する機能を有している。この自動運転判定部45の判定結果に応じて、制御ユニット40は、本実施形態を実施するために、各部を機能させる。   The automatic driving determination unit 45 determines whether the vehicle 1 is currently traveling, stopped, or has arrived at the destination from various information related to automatic driving output from the automatic driving control device 4. It has a function to determine the automatic driving state. In accordance with the determination result of the automatic driving determination unit 45, the control unit 40 causes each unit to function in order to implement this embodiment.

周辺状況判定部46は、車両1の周辺の状況を判定し、乗客が降車しても安全な状態にあるか否かを判定する機能を有している。周辺状況判定部46は、監視映像記憶部61から周辺監視映像データを読み込み、車両1に搭乗している各乗客の乗降車口近辺の状況が、乗客が降車しても安全な状態にあるか否かを判定する。そして、周辺状況判定部46は、この判定結果を、周辺状況記憶部64に記憶させる。   The surrounding state determination unit 46 has a function of determining the surrounding state of the vehicle 1 and determining whether or not the passenger is in a safe state even if the passenger gets off. The surrounding situation determination unit 46 reads the surrounding monitoring video data from the monitoring video storage unit 61, and is the situation in the vicinity of the entrance / exit of each passenger boarding the vehicle 1 in a safe state even if the passenger gets off? Determine whether or not. Then, the surrounding situation determination unit 46 stores the determination result in the surrounding situation storage unit 64.

例えば、周辺状況判定部46は、周辺監視映像データに基づいて、乗降車口から所定の距離に存在する移動物体、例えば自転車や人物がドアに対して接近してきているのか否かを判定し、その判定結果により、乗客が降車しても安全な状態にあるか否かを判定する。具体的には、周辺状況判定部46は、監視映像記憶部61から、現在時点の周辺監視映像データである第1の画像データと、現在時点よりも前の時点の周辺監視映像データである少なくとも一つの第2の画像データとを読み出し、それらに対してパターンマッチング等の既知の移動物体判定手法を実施することで、移動物体の存在と移動方向とを判別する。例えば、第1の画像データ中に占める各移動物体の大きさが少なくとも一つの第2の画像データ中に占める対応する移動物体の大きさよりも大きいとき、その移動物体の移動方向は、ドアに対して接近してきている方向であると判定することができる。   For example, the surrounding state determination unit 46 determines whether or not a moving object, such as a bicycle or a person, existing at a predetermined distance from the entrance / exit is approaching the door based on the surrounding monitoring video data, Based on the determination result, it is determined whether or not the passenger is in a safe state even when getting off. Specifically, the peripheral situation determination unit 46 receives from the monitoring video storage unit 61 first image data that is peripheral monitoring video data at the current time point and at least peripheral monitoring video data at a time point before the current time point. One second image data is read out, and a known moving object determination method such as pattern matching is performed on the second image data, thereby determining the presence and moving direction of the moving object. For example, when the size of each moving object in the first image data is larger than the size of the corresponding moving object in at least one second image data, the moving direction of the moving object is relative to the door. It can be determined that the direction is approaching.

なお、乗降車口からの所定の距離は、経時的に取得した画像データ中に占める移動体の変化率、つまり移動物体の移動速度に応じて、変化させてもよい。すなわち、移動速度が速い移動物体ほど、所定の距離は遠くなる。   Note that the predetermined distance from the entrance / exit may be changed according to the rate of change of the moving object in the image data acquired over time, that is, the moving speed of the moving object. That is, the predetermined distance becomes longer as the moving object moves faster.

目的地到着判定部47は、車両1が乗客の目的地に到着したか否かを判定する機能を有している。目的地到着判定部47は、目的地記憶部63に記憶された目的地の情報を読み出して、これをGPS受信機5から供給される車両1の現在位置を示す現在位置情報と比較することで、目的地へ到着したかどうか判定する。   The destination arrival determination unit 47 has a function of determining whether or not the vehicle 1 has arrived at the passenger's destination. The destination arrival determination unit 47 reads out information on the destination stored in the destination storage unit 63 and compares it with current position information indicating the current position of the vehicle 1 supplied from the GPS receiver 5. Determine if you have arrived at your destination.

ドアロック制御部48は、ドアロック装置13を制御する機能を有している。ドアロック制御部48は、自動運転判定部45による自動運転の開始の判定により、あるいは、目的地出力部44による目的地情報の出力に応じて、ドアロック装置13にドアを施錠させる。即ち、ドアロック制御部48は、少なくとも搭乗者である乗客を乗車させた状態での自動運転による走行開始時には、ドアを施錠させる。また、ドアロック制御部48は、目的地到着判定部47によって車両1が乗客の目的地に到着したと判定されたとき、周辺状況記憶部64に記憶された周辺状況を読み出し、車両1の乗客が使用する乗降車口近辺の状況が、当該乗客が降車しても安全な状態であれば、ドアロック装置13にドアの施錠を解除させる。また、運賃が支払われるまで、シートベルトが解除できないようにシートベルトロック機構を備え、ドアロック制御部48がドアのロック制御と合わせてシートベルトのロック制御も行えるようにしてもよい。   The door lock control unit 48 has a function of controlling the door lock device 13. The door lock control unit 48 causes the door lock device 13 to lock the door according to the determination of the start of automatic driving by the automatic driving determination unit 45 or according to the output of destination information by the destination output unit 44. That is, the door lock control unit 48 locks the door at the start of traveling by automatic driving in a state where at least a passenger who is a passenger is on board. Further, when the destination arrival determination unit 47 determines that the vehicle 1 has arrived at the passenger's destination, the door lock control unit 48 reads out the peripheral state stored in the peripheral state storage unit 64 and reads the passenger of the vehicle 1. If the passenger is in a safe state even if the passenger gets off the door, the door lock device 13 is unlocked. Further, a seat belt lock mechanism may be provided so that the seat belt cannot be released until the fare is paid, and the door lock control unit 48 may perform the seat belt lock control together with the door lock control.

(動作)
次に、前述したように構成された搭乗者支援装置11の動作を説明する。図3はその全体の搭乗者支援の手順と支援内容を示すフローチャートである。
(Operation)
Next, the operation of the passenger support apparatus 11 configured as described above will be described. FIG. 3 is a flowchart showing the entire passenger support procedure and support contents.

なお、このフローチャートは、搭乗者が搭乗したことに応じて、スタートする。それ以前の搭乗者を捕まえる機能は、完全自動運転を行うタクシーが備えるタクシーシステムの機能であるので、ここでは説明を省略する。   This flowchart starts in response to the passenger boarding. Since the function for catching passengers before that time is a function of a taxi system provided in a taxi that performs fully automatic driving, a description thereof is omitted here.

(1)搭乗者乗車
搭乗者支援装置11は、搭乗者が乗車すると、まず、ステップS1において、制御ユニット40のドアロック制御部48によりドアロック装置13を制御して、ドアを施錠する。
(1) Passenger boarding When the passenger gets on, the passenger support device 11 first controls the door lock device 13 by the door lock control unit 48 of the control unit 40 to lock the door in step S1.

(2)目的地への自動運転
その後、ステップS2において、搭乗者支援装置11は、搭乗者の目的地を取得する。例えば、制御ユニット40の目的地取得部43は、案内出力装置12から目的地の情報を取得して、その情報を記憶ユニット60の目的地記憶部63に記憶させる。この場合、例えば、案内出力装置12から乗客の目的地を問い合わせる案内情報を出力させ、案内出力装置12が有するマイクロフォンや表示器とタッチパネルによる目的地の入力を受けつけることで、目的地を取得することができる。
(2) Automatic driving to destination Thereafter, in step S2, the passenger support apparatus 11 acquires the destination of the passenger. For example, the destination acquisition unit 43 of the control unit 40 acquires destination information from the guidance output device 12 and stores the information in the destination storage unit 63 of the storage unit 60. In this case, for example, the guidance output device 12 outputs the guidance information for inquiring about the passenger's destination, and the destination is acquired by receiving the destination input by the microphone, the display, and the touch panel of the guidance output device 12. Can do.

なお、上記ステップS1におけるドアの施錠は、このステップS2の後に行ってもよい。   In addition, you may perform the locking of the door in said step S1 after this step S2.

目的地が取得されたならば、ステップS3において、搭乗者支援装置11は、自動運転制御装置4に乗客の目的地へ自動運転走行を開始するよう指示する。例えば、制御ユニット40の目的地出力部44は、目的地記憶部63より目的地の情報を読み出して、自動運転制御装置4に出力する。自動運転制御装置4は、この出力された目的地の情報に従って、その目的地への自動運転を行う。   If the destination is acquired, in step S3, the passenger assistance device 11 instructs the automatic driving control device 4 to start automatic driving traveling to the passenger's destination. For example, the destination output unit 44 of the control unit 40 reads destination information from the destination storage unit 63 and outputs the information to the automatic operation control device 4. The automatic driving control device 4 performs automatic driving to the destination according to the output destination information.

なお、この自動運転制御装置4の動作はこの実施形態に直接関係しないため、その説明は省略する。   In addition, since the operation | movement of this automatic driving | operation control apparatus 4 is not directly related to this embodiment, the description is abbreviate | omitted.

その後、ステップS4において、搭乗者支援装置11は、目的地へ到着するのを待つ。例えば、制御ユニット40は、目的地到着判定部47により、例えばGPS受信機5で取得した車両1の現在位置情報と目的地記憶部63に記憶された目的地の情報とを比較し、両者が一致したか否かを判定する。両者が一致するまで、このステップを繰り返す。   Thereafter, in step S4, the passenger support apparatus 11 waits for arrival at the destination. For example, the control unit 40 compares the current position information of the vehicle 1 acquired by the GPS receiver 5, for example, with the destination information stored in the destination storage unit 63 by the destination arrival determination unit 47, It is determined whether or not they match. Repeat this step until they match.

そして、目的地に到着したならば、ステップS5において、搭乗者支援装置11は、目的地に到着したことを搭乗者に告知する。例えば、制御ユニット40の案内情報出力部42は、案内出力装置12から目的地へ到着した旨の案内情報を出力する。   If the vehicle arrives at the destination, in step S5, the passenger support apparatus 11 notifies the passenger that the vehicle has arrived at the destination. For example, the guidance information output unit 42 of the control unit 40 outputs guidance information indicating that it has arrived at the destination from the guidance output device 12.

この案内に応じて、乗客より運賃の支払いが行われるが、この運賃徴収機能は、完全自動運転を行うタクシーが備えるタクシーシステムの機能であるので、ここでは説明を省略する。   In accordance with this guidance, the fare is paid by the passenger, but this fare collection function is a function of a taxi system provided in a taxi that performs fully automatic operation, and thus the description thereof is omitted here.

なお、ステップS2、ステップS3及びステップS5の動作は全て、タクシーシステムが実施するようにしてもよい。この場合、搭乗者支援装置11から、目的地取得部43及び目的地出力部44と目的地記憶部63とを省略することができる。   In addition, you may make it a taxi system implement all operation | movement of step S2, step S3, and step S5. In this case, the destination acquisition unit 43, the destination output unit 44, and the destination storage unit 63 can be omitted from the passenger support apparatus 11.

また、ステップS4の目的地へ到着したか否かの判定において、車両1の現在位置は、GPS受信機5からの現在位置情報に限らず、例えば、道路近傍に設置された設置位置情報送信装置からの設置位置情報を受信する設置位置情報受信機を車両1に搭載しておき、この設置位置情報受信機の受信結果を利用するようにしてもよい。このように、目的地到着判定部47は、GPS受信機5や設置位置情報受信機など、現在位置検出センサのセンシング結果である現在位置情報を用いて、目的地への到着を判定することができる。   Further, in determining whether or not the vehicle has arrived at the destination in step S4, the current position of the vehicle 1 is not limited to the current position information from the GPS receiver 5, but, for example, an installation position information transmitting device installed near the road An installation position information receiver that receives installation position information from the vehicle may be mounted on the vehicle 1 and the reception result of the installation position information receiver may be used. As described above, the destination arrival determination unit 47 can determine arrival at the destination using the current position information that is a sensing result of the current position detection sensor such as the GPS receiver 5 or the installation position information receiver. it can.

あるいは、目的地到着判定部47は、自動運転制御装置4からの目的地到着信号の有無により、目的地へ到着したか否かを判定するようにしてもよい。   Alternatively, the destination arrival determination unit 47 may determine whether or not the vehicle has arrived at the destination based on the presence or absence of a destination arrival signal from the automatic operation control device 4.

(3)ドアロック解除
この運賃支払いが終了したならば、搭乗者支援装置11は、乗客が降車しても安全な状態にあることを確認して、ドアの施錠を解除する。これは、例えば、次のようにして行われる。
(3) Door lock release When this fare payment is completed, the passenger support apparatus 11 confirms that the passenger is in a safe state even if the passenger gets off, and releases the door lock. This is performed, for example, as follows.

例えば、制御ユニット40の周辺状況判定部46は、ステップS6において、監視映像記憶部61から周辺監視映像データを読み込み、ドア付近に自転車などの移動物体が近づいてきているか否かを判定する。そして、ドア付近に移動物体が近づいてきているならば、周辺状況判定部46は、乗客が降車しても安全な状態にはないと判定する。これに対して、ドア付近から移動物体が遠ざかりつつあるならば、周辺状況判定部46は、乗客が降車しても安全な状態であると判定する。周辺状況判定部46は、この判定結果を、周辺状況記憶部64に記憶させる。   For example, in step S6, the surrounding state determination unit 46 of the control unit 40 reads the surrounding monitoring video data from the monitoring video storage unit 61 and determines whether or not a moving object such as a bicycle is approaching the vicinity of the door. If the moving object is approaching the vicinity of the door, the surrounding state determination unit 46 determines that the passenger is not in a safe state even if the passenger gets off. On the other hand, if the moving object is moving away from the vicinity of the door, the surrounding state determination unit 46 determines that it is safe even if the passenger gets off. The surrounding situation determination unit 46 stores the determination result in the surrounding situation storage unit 64.

その後、例えば、制御ユニット40のドアロック制御部48は、ステップS7において、周辺状況記憶部64に記憶された周辺状況判定部46の判定結果を読み出して、乗客が降車しても安全な状態であるか否かを確認し、安全な状態でなければ、ドアを施錠したまま維持する。   Thereafter, for example, the door lock control unit 48 of the control unit 40 reads out the determination result of the peripheral state determination unit 46 stored in the peripheral state storage unit 64 in step S7 and is safe even if the passenger gets off. Check if there is, and if it is not safe, keep the door locked.

こうして、ステップS6とステップS7とが繰り返され、乗客が降車しても安全な状態となるまで待つ。   Thus, step S6 and step S7 are repeated, and it waits until it becomes safe even if a passenger gets off.

そして、ステップS7において、周辺状況記憶部64に記憶された周辺状況判定部46の判定結果が、乗客が降車しても安全な状態であるという結果となったことを確認したならば、ドアロック制御部48は、ステップS8において、ドアロック装置13を制御して、ドアの施錠を解除する。   Then, in step S7, if it is confirmed that the determination result of the peripheral condition determination unit 46 stored in the peripheral condition storage unit 64 is a result that the passenger is in a safe state even when getting off, the door lock In step S8, the controller 48 controls the door lock device 13 to release the door lock.

(効果)
以上詳述したように、この発明の一実施形態では、自動運転モードにより完全自動運転で運行しているタクシーにおいて、乗客の目的地において乗客が降車しようとした際に、乗客が降車しても安全な状態であるか否かを確認した上で、ドアの施錠を解除する。よって、例えば後方から接近してきた自転車などが通り過ぎるまでドアを施錠したまま搭乗者が降車できないようにすることができ、自転車などの接近に気がつかずに降車してしまった搭乗者が自転車など衝突することを防止できるので、搭乗者の安全を支援することができる。
(effect)
As described above in detail, in one embodiment of the present invention, in a taxi that operates in fully automatic operation in the automatic operation mode, when a passenger tries to get off at the destination of the passenger, After checking whether it is in a safe state, unlock the door. Therefore, for example, it is possible to prevent the passenger from getting off with the door locked until the bicycle approaching from behind passes, and the passenger who has got off without noticing the approach of the bicycle collides with the bicycle, etc. Since this can be prevented, the safety of passengers can be supported.

さらに、搭乗者が不用意に開放したドアに自転車などが衝突することも防止できるので、自転車などの搭乗者の安全を図り得ることは勿論のこと、車両の搭乗者と自転車などの搭乗者との間のトラブル発生を未然に防止できる。   Furthermore, since it is possible to prevent a bicycle from colliding with the door that the passenger inadvertently opens, not only can the safety of the passenger such as the bicycle be secured, but also the passenger of the vehicle and the passenger such as the bicycle Can be prevented in advance.

また、この発明の一実施形態では、移動物体がドアに対して接近してきているのか否かによって搭乗者が降車しても安全な状態にあるか否かを判定するので、自転車などの移動物体が接近してきているときドアを施錠したままにすることができる。   In one embodiment of the present invention, it is determined whether or not the passenger is in a safe state even if the passenger gets off, depending on whether or not the moving object is approaching the door. When the door is approaching, the door can remain locked.

さらに、この発明の一実施形態では、車両の周辺を撮像する周辺カメラ9によって取得した画像データより、既存の移動物体検出手法を利用して、移動物体の存在と移動方向とを判別するので、移動物体検出を安価に実現することができる。また、自動運転制御装置4による自動運転制御に用いられる周辺カメラ9を、搭乗者支援装置11においても利用できるので、搭乗者支援装置11の搭載にかかるコストを抑制することができる。   Furthermore, in one embodiment of the present invention, since the existing moving object detection method is used to determine the presence and moving direction of the moving object from the image data acquired by the peripheral camera 9 that captures the periphery of the vehicle, Moving object detection can be realized at low cost. Moreover, since the peripheral camera 9 used for the automatic driving control by the automatic driving control device 4 can be used also in the passenger support device 11, the cost for mounting the passenger support device 11 can be suppressed.

[他の実施形態]
周辺状況判定部46は、周辺カメラ9からの周辺監視映像データに加えて、あるいはそれに代えて、車両1の周辺に存在する物体との距離を測定するレーダセンサ8の距離測定結果を用いて、移動物体の存在と移動方向とを判別するようにしもてよい。このように、自動運転制御装置4による自動運転制御に用いられるレーダセンサ8を搭乗者支援装置11においても利用することで、搭乗者支援装置11の搭載にかかるコストを抑制することができる。
[Other Embodiments]
The surrounding state determination unit 46 uses the distance measurement result of the radar sensor 8 that measures the distance to an object existing around the vehicle 1 in addition to or instead of the surrounding monitoring video data from the surrounding camera 9. The presence of the moving object and the moving direction may be determined. In this way, by using the radar sensor 8 used for the automatic driving control by the automatic driving control device 4 also in the passenger support device 11, it is possible to suppress the cost for mounting the passenger support device 11.

また、車両1として、完全自動運転を行うタクシーを例に説明したが、自動運転の自家用車であっても同様に適用可能なことは勿論である。   Moreover, although the taxi which performs fully automatic driving | operation was demonstrated to the example as the vehicle 1, it is needless to say that it is applicable similarly even if it is a self-driving private vehicle.

また、車両1は、自動運転車両に限らず、手動運転モードと自動運転モードとを切り替え可能な車両であってもよい。この場合、支援対象者は、必要に応じて運転を行う運転者も含む。即ち、支援対象者は、運転者と乗客を含む全ての搭乗者である。   Further, the vehicle 1 is not limited to an autonomous driving vehicle, and may be a vehicle capable of switching between a manual driving mode and an automatic driving mode. In this case, the support target person includes a driver who drives as necessary. That is, the support target persons are all passengers including drivers and passengers.

さらに、自動運転モードの無い通常車両においても、レーダセンサ8又は周辺カメラ9と搭乗者支援システム10とを搭載することで、搭乗者を支援可能となる。但し、搭乗者が運転者である場合、降車しようとするときにはパワーユニット2の動力源が停止されるので、動力源の停止後もある一定の時間の間は、レーダセンサ8/周辺カメラ9と搭乗者支援システム10とに動作電源が供給されるよう構成することが必要である。   Furthermore, even in a normal vehicle without an automatic driving mode, it is possible to support a passenger by mounting the radar sensor 8 or the peripheral camera 9 and the passenger support system 10. However, when the occupant is a driver, the power source of the power unit 2 is stopped when trying to get off the vehicle. It is necessary to configure so that operation power is supplied to the person support system 10.

また、ドアの施錠を解除した後、直ちに搭乗者が降車するとは限らないので、ドアの施錠の解除後も周辺状況を監視し、搭乗者がドアを開放する前に安全な状態でなくなった場合、ドアを再び施錠するようにしてもよい。   In addition, since the passenger does not always get off immediately after unlocking the door, the surrounding situation is monitored even after unlocking the door, and the passenger is no longer in a safe state before opening the door The door may be locked again.

その他、車両の種類、自動運転制御装置の機能、搭乗者支援装置の搭乗者支援の手順と支援内容等についても、この発明の要旨を逸脱しない範囲で種々変形して実施可能である。   In addition, the vehicle type, the function of the automatic driving control device, the passenger assistance procedure and assistance contents of the passenger assistance device can be variously modified and implemented without departing from the gist of the present invention.

要するにこの発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態に亘る構成要素を適宜組み合せてもよい。   In short, the present invention is not limited to the above-described embodiment as it is, and can be embodied by modifying the constituent elements without departing from the scope of the invention in the implementation stage. Further, various inventions can be formed by appropriately combining a plurality of constituent elements disclosed in the embodiment. For example, some components may be deleted from all the components shown in the embodiment. Furthermore, you may combine suitably the component covering different embodiment.

上記の実施形態の一部又は全部は、以下の付記のようにも記載され得るが、以下には限られるものではない。
(付記1)
車両に搭乗した搭乗者を支援する搭乗者支援装置であって、ハードウェアプロセッサと、メモリとを有し、
前記ハードウェアプロセッサは、
前記車両が前記搭乗者の目的地に到着したか否かを判定し、
前記車両が前記目的地へ到着したと判定されたとき、前記車両の周囲の状態を検出する周囲状態検出センサのセンシング結果に基づいて、前記搭乗者が降車しても安全な状態にあるか否かを判定し、その判定結果を前記メモリに記憶し、
前記メモリに記憶した前記判定結果により、前記搭乗者が降車しても安全な状態にあるとき、前記車両の乗降車口のドアの施錠を解除する、搭乗者支援装置。
(付記2)
車両に搭乗した搭乗者を支援する装置が実行する搭乗者支援方法であって、
ハードウェアプロセッサを用いて、前記車両が前記搭乗者の目的地に到着したか否かを判定し、
前記ハードウェアプロセッサを用いて、前記車両が前記目的地へ到着したと判定されたとき、前記車両の周囲の状態を検出する周囲状態検出センサのセンシング結果に基づいて、前記搭乗者が降車しても安全な状態にあるか否かを判定し、その判定結果を前記メモリに記憶し、
前記ハードウェアプロセッサを用いて、前記メモリに記憶した前記判定結果により、前記搭乗者が降車しても安全な状態にあるとき、前記車両の乗降車口のドアの施錠を解除する、搭乗者支援方法。
A part or all of the above embodiment can be described as in the following supplementary notes, but is not limited thereto.
(Appendix 1)
A passenger support device for supporting a passenger who has boarded a vehicle, comprising a hardware processor and a memory,
The hardware processor is
Determining whether the vehicle has arrived at the passenger's destination;
When it is determined that the vehicle has arrived at the destination, based on the sensing result of the surrounding state detection sensor that detects the surrounding state of the vehicle, whether or not the passenger is in a safe state even when getting off the vehicle And store the determination result in the memory,
An occupant support device that releases the lock of the door of the entrance of the vehicle when the occupant is in a safe state based on the determination result stored in the memory.
(Appendix 2)
A passenger support method executed by a device for supporting a passenger who has boarded a vehicle,
Using a hardware processor to determine whether the vehicle has arrived at the occupant's destination;
When it is determined that the vehicle has arrived at the destination using the hardware processor, the passenger gets off based on a sensing result of a surrounding state detection sensor that detects a surrounding state of the vehicle. Is determined to be in a safe state, and the determination result is stored in the memory,
Using the hardware processor, the determination result stored in the memory, when the passenger is in a safe state even when getting off, unlocking the door of the entrance of the vehicle, the passenger support Method.

1…車両、 2…パワーユニット、 3…操舵装置、 4…自動運転制御装置、 5…受信機、 6…ジャイロセンサ、 7…車速センサ、 8…レーダセンサ、 9…周辺カメラ、 10…搭乗者支援システム、 11…搭乗者支援装置、 12…案内出力装置、 13…ドアロック装置、 20…入出力インタフェースユニット、 40…制御ユニット、 41…映像取得部、 42…案内情報出力部、 43…目的地取得部、 44…目的地出力部、 45…自動運転判定部、 46…周辺状況判定部、 47…目的地到着判定部、 48…ドアロック制御部、 60…記憶ユニット、 61…監視映像記憶部、 62…案内情報記憶部、 63…目的地記憶部、 64…周辺状況記憶部。     DESCRIPTION OF SYMBOLS 1 ... Vehicle, 2 ... Power unit, 3 ... Steering device, 4 ... Automatic driving control device, 5 ... Receiver, 6 ... Gyro sensor, 7 ... Vehicle speed sensor, 8 ... Radar sensor, 9 ... Peripheral camera, 10 ... Passenger support System: 11 ... Passenger support device, 12 ... Guide output device, 13 ... Door lock device, 20 ... Input / output interface unit, 40 ... Control unit, 41 ... Video acquisition unit, 42 ... Guide information output unit, 43 ... Destination Acquisition unit 44 ... Destination output unit 45 ... Automatic operation determination unit 46 ... Peripheral situation determination unit 47 ... Destination arrival determination unit 48 ... Door lock control unit 60 ... Storage unit 61 ... Monitoring video storage unit 62 ... Guidance information storage unit, 63 ... Destination storage unit, 64 ... Peripheral situation storage unit.

Claims (6)

車両に搭乗した搭乗者を支援する搭乗者支援装置であって、
前記車両が前記搭乗者の目的地に到着したか否かを判定する目的地到着判定部と、
前記目的地到着判定部によって前記車両が前記目的地へ到着したと判定されたとき、前記車両の周囲の状態を検出する周囲状態検出センサのセンシング結果に基づいて、前記搭乗者が降車しても安全な状態にあるか否かを判定する状態判定部と、
前記状態判定部により前記搭乗者が降車しても安全な状態にあると判定されたとき、前記車両の乗降車口のドアの施錠を解除するドアロック制御部と、
を具備する搭乗者支援装置。
A passenger support device for supporting a passenger who has boarded a vehicle,
A destination arrival determination unit for determining whether the vehicle has arrived at the destination of the passenger;
When the destination arrival determination unit determines that the vehicle has arrived at the destination, even if the passenger gets off based on the sensing result of the surrounding state detection sensor that detects the surrounding state of the vehicle. A state determination unit that determines whether or not a safe state;
A door lock control unit that unlocks the door of the entrance of the vehicle when it is determined by the state determination unit that the passenger is in a safe state even when getting off the vehicle;
A passenger support apparatus comprising:
前記状態判定部は、前記周囲状態検出センサのセンシング結果に基づいて、前記乗降車口近辺に存在する移動物体が前記ドアに対して接近してきているのか否かを判定し、その判定結果により前記搭乗者が降車しても安全な状態にあるか否かを判定する、請求項1に記載の搭乗者支援装置。   The state determination unit determines whether or not a moving object existing in the vicinity of the entrance / exit is approaching the door based on a sensing result of the ambient state detection sensor, and the determination result The occupant support device according to claim 1, wherein the occupant support device determines whether or not the occupant is in a safe state even when getting off the vehicle. 前記搭乗者の前記目的地を記憶する目的地記憶部をさらに具備し、
前記目的地到着判定部は、前記車両の現在位置を検出する現在位置検出センサのセンシング結果に基づいて、前記車両が前記目的地記憶部に記憶された前記目的地に到着したか否かを判定する、請求項1又は2に記載の搭乗者支援装置。
A destination storage unit for storing the destination of the passenger;
The destination arrival determination unit determines whether the vehicle has arrived at the destination stored in the destination storage unit based on a sensing result of a current position detection sensor that detects a current position of the vehicle. The occupant support device according to claim 1 or 2.
前記車両が、自動運転制御装置を有し、前記自動運転制御装置の制御により目的地まで自動運転を行う自動運転車両であるとき、前記目的地到着判定部は、前記自動運転制御装置からの目的地到着信号の有無により、目的地へ到着したか否かを判定する、請求項1又は2に記載の搭乗者支援装置。   When the vehicle has an automatic driving control device and is an automatic driving vehicle that performs automatic driving to a destination under the control of the automatic driving control device, the destination arrival determination unit includes a destination from the automatic driving control device. The occupant support device according to claim 1 or 2, wherein it is determined whether or not the vehicle has arrived at a destination based on the presence or absence of a land arrival signal. 車両に搭乗した搭乗者を支援するための装置が実行する搭乗者支援方法であって、
前記車両が前記搭乗者の目的地に到着したか否かを判定する目的地到着判定ステップと、
前記目的地到着判定ステップにおいて前記車両が前記目的地へ到着したと判定されたとき、前記車両の周囲の状態を検出する周囲状態検出センサのセンシング結果に基づいて、前記搭乗者が降車しても安全な状態にあるか否かを判定する状態判定ステップと、
前記状態判定ステップにおいて前記搭乗者が降車しても安全な状態にあると判定されたとき、前記車両の乗降車口のドアの施錠を解除するドアロック制御ステップと、
を備えている搭乗者支援方法。
A passenger support method executed by a device for supporting a passenger who has boarded a vehicle,
A destination arrival determination step for determining whether the vehicle has arrived at the destination of the passenger;
When it is determined in the destination arrival determination step that the vehicle has arrived at the destination, even if the passenger gets off based on the sensing result of the surrounding state detection sensor that detects the surrounding state of the vehicle. A state determination step for determining whether or not a safe state;
When it is determined in the state determination step that the passenger is in a safe state even when getting off the vehicle, a door lock control step for releasing the locking of the door of the vehicle entrance / exit,
A passenger support method comprising:
請求項1乃至4の何れか一つに記載の搭乗者支援装置が備える各部の機能をコンピュータに実行させる搭乗者支援プログラム。   The passenger support program which makes a computer perform the function of each part with which the passenger support apparatus as described in any one of Claims 1 thru | or 4 is provided.
JP2017042693A 2017-03-07 2017-03-07 Occupant support device, method, and program Pending JP2018144686A (en)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2017042693A JP2018144686A (en) 2017-03-07 2017-03-07 Occupant support device, method, and program
PCT/JP2017/026353 WO2018163459A1 (en) 2017-03-07 2017-07-20 Passenger assistance device, method and program
DE112017007207.7T DE112017007207T5 (en) 2017-03-07 2017-07-20 Passenger support device, method and program
US16/335,276 US20200018100A1 (en) 2017-03-07 2017-07-20 Occupant assisting apparatus, method, and program
CN201780055827.4A CN109689439A (en) 2017-03-07 2017-07-20 Passenger auxiliary device, method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017042693A JP2018144686A (en) 2017-03-07 2017-03-07 Occupant support device, method, and program

Publications (2)

Publication Number Publication Date
JP2018144686A true JP2018144686A (en) 2018-09-20
JP2018144686A5 JP2018144686A5 (en) 2019-05-30

Family

ID=63448345

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017042693A Pending JP2018144686A (en) 2017-03-07 2017-03-07 Occupant support device, method, and program

Country Status (5)

Country Link
US (1) US20200018100A1 (en)
JP (1) JP2018144686A (en)
CN (1) CN109689439A (en)
DE (1) DE112017007207T5 (en)
WO (1) WO2018163459A1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020111226A (en) * 2019-01-15 2020-07-27 トヨタ自動車株式会社 Vehicle information processing apparatus and vehicle information processing method
EP3901398A4 (en) * 2018-12-17 2022-01-19 Nissan Motor Co., Ltd. Vehicle control method, vehicle control device, and vehicle control system

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10795356B2 (en) * 2017-08-31 2020-10-06 Uatc, Llc Systems and methods for determining when to release control of an autonomous vehicle
JP7077931B2 (en) * 2018-12-18 2022-05-31 トヨタ自動車株式会社 Vehicle control device, control method and control program
US11001200B2 (en) * 2019-05-30 2021-05-11 Nissan North America, Inc. Vehicle occupant warning system
JP7188300B2 (en) * 2019-07-02 2022-12-13 トヨタ自動車株式会社 Sensor mounting structure

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5429446A (en) * 1977-08-03 1979-03-05 Nippon Denso Co Ltd Method and apparatus for controlling door lock of car
JP2005001643A (en) * 2003-04-14 2005-01-06 Fujitsu Ten Ltd Operation support device
JP2011105058A (en) * 2009-11-13 2011-06-02 Aisin Seiki Co Ltd Multi-function camera system
JP2013216251A (en) * 2012-04-11 2013-10-24 Mitsubishi Motors Corp Surrounding condition monitoring device
JP2016099953A (en) * 2014-11-26 2016-05-30 株式会社デンソー Automatic vehicle operation system
WO2016194157A1 (en) * 2015-06-03 2016-12-08 日産自動車株式会社 Vehicle control device and vehicle control method

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4451096B2 (en) 2003-08-06 2010-04-14 アルパイン株式会社 Keyless entry device and system
US20090177336A1 (en) * 2008-01-07 2009-07-09 Mcclellan Scott System and Method for Triggering Vehicle Functions
JP4656172B2 (en) * 2008-03-28 2011-03-23 アイシン・エィ・ダブリュ株式会社 Door lock control system, door lock control method and program
CN103879403B (en) * 2011-03-16 2017-01-11 丰田自动车株式会社 Remote vehicle operating device
JP6212992B2 (en) 2012-08-01 2017-10-18 日産自動車株式会社 Driver abnormality support device and driver abnormality support method
JP6011445B2 (en) * 2012-12-27 2016-10-19 株式会社デンソー Vehicle theft reporting system
US9248793B2 (en) * 2013-04-19 2016-02-02 GM Global Technology Operations LLC Systems and methods for location based customization
CN104931059B (en) * 2014-03-21 2018-09-11 比亚迪股份有限公司 Vehicle-mounted rescue navigation system and method
CN104157131B (en) * 2014-07-31 2016-11-09 同济大学 A kind of unmanned public transportation system of magnetic navigation
KR101646134B1 (en) * 2015-05-06 2016-08-05 현대자동차 주식회사 Autonomous vehicle and a control method
CN105751999B (en) * 2016-03-31 2018-07-20 汪家琳 Full automatic intelligent pilotless automobile

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5429446A (en) * 1977-08-03 1979-03-05 Nippon Denso Co Ltd Method and apparatus for controlling door lock of car
JP2005001643A (en) * 2003-04-14 2005-01-06 Fujitsu Ten Ltd Operation support device
JP2011105058A (en) * 2009-11-13 2011-06-02 Aisin Seiki Co Ltd Multi-function camera system
JP2013216251A (en) * 2012-04-11 2013-10-24 Mitsubishi Motors Corp Surrounding condition monitoring device
JP2016099953A (en) * 2014-11-26 2016-05-30 株式会社デンソー Automatic vehicle operation system
WO2016194157A1 (en) * 2015-06-03 2016-12-08 日産自動車株式会社 Vehicle control device and vehicle control method

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3901398A4 (en) * 2018-12-17 2022-01-19 Nissan Motor Co., Ltd. Vehicle control method, vehicle control device, and vehicle control system
JP2020111226A (en) * 2019-01-15 2020-07-27 トヨタ自動車株式会社 Vehicle information processing apparatus and vehicle information processing method
JP7110996B2 (en) 2019-01-15 2022-08-02 トヨタ自動車株式会社 Vehicle information processing device and vehicle information processing method
US11485322B2 (en) 2019-01-15 2022-11-01 Toyota Jidosha Kabushiki Kaisha Vehicle information processing device and vehicle information processing method

Also Published As

Publication number Publication date
DE112017007207T5 (en) 2019-12-12
CN109689439A (en) 2019-04-26
US20200018100A1 (en) 2020-01-16
WO2018163459A1 (en) 2018-09-13

Similar Documents

Publication Publication Date Title
WO2018163459A1 (en) Passenger assistance device, method and program
CN109690609B (en) Passenger assist device, method, and program
US10730556B2 (en) Automated valet parking method and device
JP6579903B2 (en) Driving support device, vehicle, and garage cooperative control system
JP6828825B2 (en) Parking control method and parking control device
US10814865B2 (en) Parking device
CN105894810B (en) Method and device for monitoring a vehicle travelling in a parking area
EP2560150A1 (en) Vehicle remote operation system and on-board device
JP2015200933A (en) Autonomous driving vehicle
JP5408344B2 (en) Parking assistance device
JP2015176444A (en) Autonomous driving vehicle
CN111009115A (en) Lost article delivery support device, lost article delivery support system, lost article delivery support method, and storage medium
US20190369636A1 (en) Control system, control method, and non-transitory storage medium
JP2014019390A (en) Emergency evacuation device
JP2016189074A (en) Notification device, notification method, and notification program
JP2007122472A (en) Driving support system and program
US11700522B2 (en) Vehicle that has automatic notification function
JP2018205085A (en) Driving assist device, server, and program for driving assistance
JP6747528B2 (en) Autonomous vehicle
JP2017182347A (en) Vehicle communication system, vehicle peripheral information transmission method, and control program
JP2020093575A (en) Control apparatus and control system
JP2021162959A (en) Accommodation area management apparatus
JP2021162951A (en) Predetermined area managing device
JP2020177700A (en) Autonomous travel vehicle
US10633026B2 (en) Vehicle system and vehicle controller for controlling vehicle

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190312

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190412

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200324

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20200929