WO2018163458A1 - 乗客支援装置、方法及びプログラム - Google Patents
乗客支援装置、方法及びプログラム Download PDFInfo
- Publication number
- WO2018163458A1 WO2018163458A1 PCT/JP2017/026352 JP2017026352W WO2018163458A1 WO 2018163458 A1 WO2018163458 A1 WO 2018163458A1 JP 2017026352 W JP2017026352 W JP 2017026352W WO 2018163458 A1 WO2018163458 A1 WO 2018163458A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- passenger
- state
- destination
- unit
- contact
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 38
- 238000001514 detection method Methods 0.000 claims abstract description 15
- 230000033001 locomotion Effects 0.000 claims description 18
- 230000006870 function Effects 0.000 description 46
- 238000012544 monitoring process Methods 0.000 description 40
- 238000004891 communication Methods 0.000 description 28
- 230000008569 process Effects 0.000 description 18
- 230000002093 peripheral effect Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 6
- 230000004044 response Effects 0.000 description 6
- 238000013459 approach Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 4
- 102220328583 rs111822347 Human genes 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 230000036541 health Effects 0.000 description 2
- 102200048773 rs2224391 Human genes 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 230000029305 taxis Effects 0.000 description 2
- 206010041235 Snoring Diseases 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000037007 arousal Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000008280 blood Substances 0.000 description 1
- 210000004369 blood Anatomy 0.000 description 1
- 230000002301 combined effect Effects 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002250 progressing effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000007958 sleep Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000004936 stimulating effect Effects 0.000 description 1
- 230000000638 stimulation Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
- B60R25/20—Means to switch the anti-theft system on or off
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/0098—Details of control systems ensuring comfort, safety or stability not otherwise provided for
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W60/00—Drive control systems specially adapted for autonomous road vehicles
- B60W60/001—Planning or execution of driving tasks
- B60W60/0025—Planning or execution of driving tasks specially adapted for specific operations
- B60W60/00253—Taxi operations
-
- E—FIXED CONSTRUCTIONS
- E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
- E05F—DEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION; CHECKS FOR WINGS; WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
- E05F15/00—Power-operated mechanisms for wings
- E05F15/70—Power-operated mechanisms for wings with automatic actuation
- E05F15/73—Power-operated mechanisms for wings with automatic actuation responsive to movement or presence of persons or objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/40—Business processes related to the transportation industry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
- G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/02—Alarms for ensuring the safety of persons
- G08B21/06—Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
- G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
- G08B25/08—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using communication transmission lines
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
- B60W2040/0818—Inactivity or incapacity of driver
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/143—Alarm means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2556/00—Input parameters relating to data
- B60W2556/45—External transmission of data to or from the vehicle
- B60W2556/50—External transmission of data to or from the vehicle of positioning data, e.g. GPS [Global Positioning System] data
Definitions
- the present invention relates to a passenger support apparatus, method and program for supporting passengers of an autonomous driving vehicle.
- a vehicle equipped with an automatic driving control device that supports the driving operation of the vehicle has been developed and sold.
- Japanese Unexamined Patent Application Publication No. 2014-044707 discloses a driver abnormality support device that determines the health of a driver and supports the driver according to the degree of the decrease when the health of the driver is reduced. Is disclosed.
- taxis can only be used by a small number of passengers, and there are many opportunities to ride alone.
- all such a small number of passengers are unable to get off, for example, when they have fallen asleep, or when they need to be rescued, for example, when they are suddenly ill, there is a need for a device that assists the passengers.
- the present invention provides a passenger support device, a method, and a program that can support a passenger when a passenger of a vehicle equipped with an automatic driving control device, for example, an autonomous driving vehicle in which no driver exists, becomes incapable of getting off. It is something to try.
- an automatic driving control device for example, an autonomous driving vehicle in which no driver exists
- a first aspect of the present invention is a passenger support device that is attached to an autonomous driving vehicle having an autonomous driving control device and supports a passenger who has boarded the autonomous driving vehicle.
- an awakening support unit that performs an awakening operation of the passenger when the state determination unit determines that the passenger is in a state where the passenger cannot get off.
- the passenger support device may acquire the contact acquired by the passenger information acquisition unit when the state determination unit determines that the passenger is in a state where the passenger cannot get off after the awakening operation by the awakening support unit.
- a contact notification section for notifying ahead is provided.
- the passenger support device is the passenger determination device according to the first aspect, wherein the automatic determination vehicle determines whether or not the autonomous driving vehicle has arrived at or near the destination of the passenger.
- the state determination unit determines whether the passenger is in a state where the passenger can get off when the arrival determination unit determines that the autonomous driving vehicle has arrived at or near the destination of the passenger. Make a decision.
- the passenger support device is a passenger support device according to the first or second aspect, a situation determination unit that determines whether or not a situation has been reached from the contact, When at least the passenger of the autonomous driving vehicle has started to travel, the door of the passenger entrance / exit is locked, and the state determination unit determines that the passenger is in a state where the passenger can get off, or And a door lock control unit that releases the locking of the door when it is determined by the situation determination unit that the contact has been received from the contact.
- the passenger support device is the passenger support device according to the third aspect, wherein the contact notification unit is specific information for confirming the person who has been picked up in the notification to the contact
- the situation determination unit determines that a situation has been reached from the contact based on the presentation of the specific information.
- the passenger assistance device is the passenger assistance device according to the third or fourth aspect, when it is determined by the situation determination unit that the situation is not met from the contact, Alternatively, when the contact notification unit cannot notify the contact, the automatic driving control device moves the automatic driving vehicle to a predetermined destination and the destination to notify the destination. A movement control unit is further provided, and the door lock control unit releases the locking of the door upon arrival at the destination.
- a passenger assistance device is the passenger assistance device according to the fifth aspect, further comprising a destination designation unit for receiving designation of the determined destination.
- a passenger support device is the passenger support device according to any one of the first to sixth aspects, wherein the state determination unit detects the state of the passenger. Based on the sensing result, the state of the passenger is further determined whether or not the state of the wake-up support by the wake-up support unit may be performed, the wake-up support unit, the state determination unit is the state of the passenger The awakening operation is performed only when it is determined that is in a state where the awakening operation may be performed.
- a passenger support method executed by a device that is mounted on an autonomous driving vehicle having an autonomous driving control device and that assists a passenger who has boarded the autonomous driving vehicle.
- the wake-up support step for performing the wake-up operation of the passenger, and after the wake-up operation by the wake-up support step
- a second state determination step for determining whether or not the passenger is in a state where the passenger can get off, and the second state. If the passenger in the determination step is determined to be in a condition not getting off, and a, and contacts notifying step of notifying the contact
- a ninth aspect of the present invention is a program that causes a computer to execute the functions of the respective units included in the passenger assistance device according to the first to seventh aspects.
- contact information such as a telephone number of the destination is acquired in advance. If it is not in a state where it is possible to get off normally, for example, when sleeping, first, the passenger is awakened by giving a stimulus such as sound or vibration to the passenger. Notify the acquired contact and request pick-up. Therefore, when the passenger is not awakened, the passenger can be entrusted to the person who picks up, so that the passenger can be safely and reliably delivered to the destination.
- the autonomous driving vehicle arrives at or near the destination of the passenger, it is determined whether or not the passenger is in a state where the passenger can get off. If it does not arrive at the ground, it is possible to save power by not performing the determination and not performing unnecessary operations. And when it arrives at the destination or when it arrives in the vicinity of the destination, it is determined whether or not the passenger is in a state where the passenger can get off, so that the awakening operation and the notification to the contact information are performed. When it is necessary to determine whether or not it is necessary, it is possible to obtain a determination result indicating whether or not the passenger can get off the passenger.
- the door lock is released after confirming that the greeter has arrived. Therefore, when the passenger is not awakened, if the door is unlocked indefinitely, the passenger may be involved in an incident such as theft. In the third aspect of the present invention, the door is locked. There is no such a fear because it is kept. And when the person who picks up comes, the passenger can be entrusted to the person who picks up by releasing the normality of the door.
- the fourth aspect of the present invention it is possible to confirm that the person is the greeter by transmitting the specific information at the time of the pick-up request and presenting the specific information. Therefore, even if a person other than the person approaching approaches, the door is not unlocked, so that the passenger's safety is protected.
- the pick-up from the contact does not come, when the contact is not made, or when the pick-up is refused, the contracted security facility, police or hospital It is possible to entrust passengers to security guards, police officers, doctors, and the like by moving to predetermined destinations.
- the taxi command center is contacted, or the emergency call telephone number such as the police or the emergency is notified according to the passenger's condition, and the destination is instructed. Since it can be received and moved to the instructed destination, the passenger can be delivered to an appropriate destination considering the distance from the current position, the possibility of correspondence, and the like.
- the awakening operation is performed only when the passenger is in a state where the awakening operation may be performed. That is, the passenger's state may perform the awakening operation.
- the awakening operation for the passenger is not performed. Therefore, passengers are not stimulated in an inappropriate situation, and passenger safety can be achieved.
- the function of each unit provided in the passenger assistance device according to any one of the first to seventh aspects is executed by a computer.
- a passenger support that can support a passenger when a passenger of a vehicle equipped with an automatic driving control device, for example, a passenger of an automatic driving vehicle that does not have a driver, becomes incapable of getting off.
- An apparatus, a method, and a program can be provided.
- FIG. 1 is a diagram showing an overall configuration of an automatic driving control system including a passenger assistance device according to a first embodiment of the present invention.
- FIG. 2 is a block diagram showing a functional configuration of the passenger support apparatus according to the first embodiment of the present invention.
- FIG. 3 is a flowchart showing a passenger support procedure and support contents by the passenger support apparatus shown in FIG.
- FIG. 4 is a block diagram showing a functional configuration of a passenger support apparatus according to the second embodiment of the present invention.
- FIG. 5 is a flowchart showing a passenger support procedure and support contents by the passenger support apparatus shown in FIG.
- FIG. 6 is a flowchart showing a passenger support procedure and support contents by the passenger support apparatus according to the third embodiment of the present invention.
- FIG. 7 is a flowchart showing a passenger support procedure and support contents by the passenger support apparatus according to the fourth embodiment of the present invention.
- FIG. 1 is a diagram showing an overall configuration of an automatic driving control system including a passenger assistance device according to a first embodiment of the present invention.
- This automatic driving control system is mounted on the vehicle 1.
- a taxi that performs fully automatic driving without a driver will be described as an example of the vehicle 1.
- the vehicle 1 includes a power unit 2 including a power source and a transmission and a steering device 3 as basic equipment. An engine and / or a motor is used as the power source.
- the vehicle 1 is configured to be able to travel in an automatic driving mode that does not require a driver.
- the automatic driving mode is a mode that realizes a driving state in which the vehicle 1 is automatically driven along a road on which the vehicle is traveling, for example, toward a destination set by a passenger without driving by the driver. Automatically drive the vehicle.
- the vehicle 1 may be configured to be able to travel by a driver's driving operation by switching to the manual driving mode as necessary.
- the vehicle 1 is also provided with an automatic driving control device 4 for executing driving control in the automatic driving mode.
- the automatic driving control device 4 acquires sensing data from a GPS (Global Positioning System) receiver 5, a gyro sensor 6, and a vehicle speed sensor 7, respectively.
- the automatic driving control device 4 includes route information generated by a navigation system (not shown), traffic information acquired by road-to-vehicle communication, and information obtained by a peripheral monitoring system that monitors the positions and movements of surrounding people and vehicles.
- the travel of the vehicle 1 is automatically controlled by controlling the steering, the accelerator, and the brake.
- the surrounding monitoring system for example, measures a distance to a surrounding vehicle and outputs distance information to the automatic driving control device 4, and images the surroundings of the vehicle and outputs the video signal to the automatic driving control device 4.
- Peripheral camera 9 to be provided.
- the automatic driving control includes, for example, automatic steering (automatic steering operation) and automatic speed adjustment (automatic driving of speed).
- Automatic steering is an operating state in which the steering device 3 is automatically controlled.
- Automatic steering includes LKA (Lane Keeping Assist). The LKA automatically controls the steering device 3 so that the vehicle 1 does not deviate from the traveling lane.
- automatic steering is not limited to LKA.
- Automatic speed adjustment is an operating state in which the speed of the vehicle 1 is automatically controlled.
- Automatic speed adjustment includes ACC (Adaptive Cruise Control). For example, when there is no preceding vehicle ahead of the vehicle 1, ACC performs constant speed control that causes the vehicle 1 to travel at a constant speed at a preset speed, and when the preceding vehicle exists ahead of the vehicle 1. Is a follow-up control that adjusts the vehicle speed of the vehicle 1 in accordance with the inter-vehicle distance from the preceding vehicle.
- the automatic speed adjustment is not limited to ACC but also includes CC (Cruise Control).
- the automatic operation control system of the present embodiment has a passenger support system 10 that supports passengers.
- the passenger support system 10 includes a passenger support device 11 according to the first embodiment of the present invention, a guest room camera 12, a surrounding microphone (hereinafter abbreviated as a microphone) 13, and a guide, which are connected to the passenger support device 11, respectively.
- An output device 14, a door lock device 15, a stimulus output device 16, and a communication device 17 are provided.
- the GPS receiver 5 and the peripheral camera 9 are also connected to the passenger support device 11, and the GPS receiver 5 and the peripheral camera 9 also function as part of the passenger support system 10.
- the guest room camera 12 functions as a passenger state detection sensor for detecting the passenger state.
- the cabin camera 12 is installed in a plurality of positions that can photograph the face and body of each passenger, such as on the dashboard, the back of the headrest of the front seat, the ceiling and the side of the cabin, etc., and images passengers who have boarded each seat Then, the video signal is output to the passenger support device 11.
- the surrounding microphone 13 functions as a sensor that detects sounds around the vehicle 1.
- the surrounding microphone 13 is installed in the vicinity of the door of the passenger's entrance and exit so as to be able to detect sound outside the vehicle, and picks up the voice of the passenger emitted near the door or the person who came to pick up the passenger.
- the voice signal is output to the passenger support device 11.
- the surrounding microphone 13 can also function as a part of the surrounding monitoring system used by the automatic operation control device 4.
- the guidance output device 14 outputs the guidance information from the passenger support device 11.
- the guidance output device 14 includes, for example, a speaker and a display.
- the guidance output device 14 outputs an audio signal of guidance information output from the passenger support device 11 from the speaker, and displays a display signal of guidance information on the display.
- the guidance output device 14 has a microphone, picks up the voice of the destination and the contact address issued from the passenger according to the guidance information for inquiring the destination and the contact address of the passenger, and sends the voice signal to the passenger support device. 11 to output.
- the guidance output device 14 is configured so that the destination and contact information can be input by the operation of the passenger by providing functions equivalent to the image display function, touch input function, and voice input / output function in the navigation system. It is also possible to output the input destination and contact information to the passenger support apparatus 11.
- the guidance output device 14 does not have to have all of these configurations, and may have any configuration as long as it can acquire at least a passenger's destination and contact information.
- the guidance output device 14 has a card reader function for reading information from, for example, a credit card, a prepaid card, a membership card, etc. as part of a taxi system provided in a taxi that performs fully automatic driving. It is possible to collect fares from passengers. By using this function, if the passenger's address information and telephone number information can be acquired via the communication device 17 based on the credit card or membership card information, the destination specified by the passenger is the passenger's address information. Since the telephone number information can be used as a contact address, it is possible to omit the contact address inquiry to the passenger. Further, the guidance output device 14 may include an automatic cash receipt / change payment function for paying the fare by cash.
- the door lock device 15 is attached to the door of the passenger entrance and exit, and is locked or unlocked under the control of the passenger support device 11.
- the stimulus output device 16 gives a stimulus such as sound, light, and vibration to the passenger under the control of the passenger support device 11.
- the device that outputs sound and light may be configured as an independent speaker or lamp, or may be used as the guidance output device 14.
- a device that outputs vibrations for example, a vibrator that minutely vibrates a seat surface of a seat on which a passenger is sitting, a seat belt driving device that repeatedly pulls in / out a seat belt that the passenger is wearing, and the like are provided. .
- the communication device 17 communicates with a predetermined taxi command center under the control of the passenger support device 11, and can notify a contact via a public telephone line if necessary.
- the passenger support device 11 supports a passenger and is configured as follows.
- FIG. 2 is a block diagram showing the functional configuration.
- the passenger support apparatus 11 includes an input / output interface unit 20, a control unit 40, and a storage unit 60.
- the input / output interface unit 20 receives video signals output from the guest room camera 12 and the peripheral camera 9, converts them into digital data, and inputs the digital data to the control unit 40.
- the input / output interface unit 20 receives current position information indicating the current position of the vehicle 1 from the GPS receiver 5 and inputs the current position information to the control unit 40.
- the input / output interface unit 20 also receives audio signals output from the surrounding microphone 13, the guidance output device 14, and the communication device 17, converts them into digital data, and inputs them to the control unit 40.
- the input / output interface unit 20 further receives the destination information and contact information of the passengers output from the guidance output device 14 and inputs them to the control unit 40.
- the input / output interface unit 20 converts the guidance information output from the control unit 40 into a voice signal and a display signal and outputs the voice signal and the display signal to the guidance output device 14. Further, the input / output interface unit 20 converts the door control information output from the control unit 40 into a door locking / unlocking signal and outputs it to the door lock device 15. The input / output interface unit 20 further converts the arousal support information output from the control unit 40 into a stimulus output device drive signal and outputs it to the stimulus output device 16. Further, the input / output interface unit 20 converts the contact information output from the control unit 40 into a telephone number signal and outputs it to the communication device 17, and converts the guidance information output from the control unit 40 into a voice signal. To the communication device 17.
- the input / output interface unit 20 exchanges information between the automatic operation control device 4 and the control unit 40.
- the storage unit 60 uses, as a storage medium, a non-volatile memory that can be written and read at any time, such as SSD (Solid State Drive) or HDD (Hard Disk Drive). Some of them may use a volatile memory such as a RAM.
- the storage unit 60 includes a monitoring video storage unit 61, a conversation voice storage unit 62, a conversation content storage unit 63, a guidance information storage unit 64, a destination and contact address storage unit as storage areas used for carrying out this embodiment. 65, a passenger state storage unit 66, and a surrounding state storage unit 67.
- the monitoring video storage unit 61 stores monitoring video around the cabin and the vehicle 1.
- the conversation voice storage unit 62 stores conversation voice in the cabin or near the door outside the vehicle and by communication.
- the conversation content storage unit 63 stores the conversation content with the passenger and the person picked up from the contact address.
- the guide information storage unit 64 stores guide information.
- the destination and contact address storage unit 65 stores the destination and contact information.
- the passenger state storage unit 66 stores the passenger state.
- the peripheral situation storage unit 67 stores whether or not a person who has been picked up from the contact address has arrived.
- the control unit 40 includes a video acquisition unit 41, a voice acquisition unit 42, a voice recognition unit 43, a guidance information output unit 44, a destination and contact address acquisition unit 45, a purpose as control functions necessary for carrying out this embodiment.
- a ground output unit 46, an automatic driving determination unit 47, an arrival determination unit 48, a passenger state determination unit 49, an awakening support unit 50, a notification output unit 51, a surrounding situation determination unit 52, and a door lock control unit 53 are provided.
- the control unit 40 is configured by a CPU (Central Processing Unit) and a program memory constituting the computer, and these control functions are realized by causing the CPU to execute a program stored in the program memory. You can also.
- CPU Central Processing Unit
- the video acquisition unit 41 has a function of acquiring a monitoring video of passengers who have boarded each seat from the guest room camera 12.
- the video acquisition unit 41 has a function of acquiring a monitoring video around the vehicle 1 from the peripheral camera 9.
- the video acquisition unit 41 takes in the digital data (passenger monitoring video data and surrounding monitoring video data) of the video signals output from the guest room camera 12 and the peripheral camera 9 from the input / output interface unit 20, and each of these captured monitoring video data Is stored in the monitoring video storage unit 61 of the storage unit 60.
- the video signal may be encoded according to a predetermined encoding method. In this way, it is possible to save the storage capacity of the monitoring video storage unit 61 by reducing the amount of information of the monitoring video data.
- the voice acquisition unit 42 has a function of acquiring voice uttered by a person near the vehicle door from the surrounding microphone 13.
- the voice acquisition unit 42 has a function of acquiring voice uttered by a passenger from a microphone included in the guidance output device 14. Furthermore, the voice acquisition unit 42 has a function of acquiring the voice uttered by the person to be called from the communication device 17.
- the voice acquisition unit 42 takes in digital data (speech voice data) of voice signals output from the surrounding microphone 13, the guidance output device 14, and the communication device 17 from the input / output interface unit 20, and stores the fetched conversation voice data. It is stored in the conversation voice storage unit 62 of the unit 60.
- the voice recognition unit 43 has a voice recognition dictionary and has a function of performing voice recognition on voice data and converting the voice data into text data. For example, every time voice is stored in the conversation voice storage unit 62, the voice recognition unit 43 recognizes the stored conversation voice data, and stores the recognized conversation content information in the conversation content storage unit 63 of the storage unit 60.
- the voice recognition unit 43 recognizes the stored conversation voice data, and stores the recognized conversation content information in the conversation content storage unit 63 of the storage unit 60.
- the guidance information output unit 44 has a function of reading the guidance information stored in advance from the guidance information storage unit 64 and outputting it to the guidance output device 14. Which guidance information the guidance information output unit 44 reads out and outputs from the guidance information storage unit 64 is stored in the conversation content stored in the conversation content storage unit 63 and in the passenger state storage unit 66 described later. It determines according to the determination result of the passenger state determination part 49 currently performed.
- the destination and contact information acquisition unit 45 has a function of acquiring a passenger's destination and contact information.
- the destination and contact acquisition unit 45 reads the conversation content with the passenger stored in the conversation content storage unit 63, acquires the destination and contact information, and stores the acquired destination and contact information as a storage unit. 60 destinations and the contact address storage unit 65 are stored.
- the destination and contact information acquisition unit 45 takes in the destination and contact information input by the guidance output device 14, and stores the destination and contact information in the storage unit 60. It can also be stored in the storage unit 65.
- the destination output unit 46 has a function of outputting the passenger's destination to the automatic operation control device 4.
- the destination output unit 46 reads out the destination information stored in the destination and contact address storage unit 65 and outputs the information to the automatic operation control device 4.
- the automatic driving determination unit 47 determines whether the vehicle 1 is currently traveling, stopped, or arrived at the destination from various information related to automatic driving output from the automatic driving control device 4. It has a function to determine the automatic driving state. In accordance with the determination result of the automatic driving determination unit 47, the control unit 40 causes each unit to function in order to implement this embodiment.
- the arrival determination unit 48 has a function of determining whether the vehicle 1 has arrived at the passenger's destination.
- the arrival determination unit 48 reads the destination information stored in the destination and contact address storage unit 65 and compares it with current position information indicating the current position of the vehicle 1 supplied from the GPS receiver 5. Then, it is determined whether or not the destination has been reached.
- the passenger state determination unit 49 has a function of determining the passenger state.
- the passenger state determination unit 49 reads the passenger monitoring video data from the monitoring video storage unit 61, and based on the passenger monitoring video data Processing for determining whether or not the passenger is in a state where the passenger can get off (is in a state where the passenger cannot get off) is performed.
- the state where the passenger cannot get off is a state in which, for example, the passenger has fallen asleep or suddenly becomes ill.
- the passenger state determination unit 49 stores the determination result in the passenger state storage unit 66.
- the passenger state determination unit 49 determines not only the passenger monitoring image data stored in the monitoring image storage unit 61 but also the passenger state (alighting disabling state / alighting disabling state) depending on, for example, whether or not the seat belt is released. ) Can also be determined. That is, since the start of operation of the vehicle 1 is conditional on the passenger wearing a seat belt, if the passenger stays on the seat belt even after arriving at the destination, the passenger is in a state where the passenger cannot get off. Can be determined.
- the awakening support unit 50 has a function of stimulating passengers with the stimulus output device 16.
- the awakening support unit 50 reads the state of the passenger stored in the passenger state storage unit 66 and outputs the awakening support information to the stimulus output device 16 if the passenger is in a state in which the passenger cannot get off. Encourage awakening.
- the notification output unit 51 has a function of performing a notification requesting the contact to be picked up by the communication device 17.
- the notification output unit 51 reads out the passenger state stored in the passenger state storage unit 66, and if the passenger remains in the state where the passenger cannot get off despite the output of the stimulus by the stimulus output device 16, the notification output unit 51
- the telephone number of the passenger's contact address stored in the destination storage unit 65 is read out and output to the communication device 17, so that the communication device 17 calls the contact address.
- the notification output unit 51 reads out the guidance information stored in the guidance information storage unit 64 and outputs the guidance information to the communication device 17 so that the communication device 17 performs voice guidance for requesting the person who picks up the phone. .
- This voice guidance includes specific information such as a password, a personal identification number, and a callback telephone number for confirming whether or not the person has been picked up.
- the callback telephone number may be a number unique to the vehicle 1 or may be a predetermined dedicated number such as a taxi command center.
- the surrounding state determination unit 52 has a function of determining the state of the surroundings of the vehicle 1 and determining whether or not a situation has been reached in which a person greeted from the contact point has come.
- the surrounding situation determination unit 52 reads the surrounding monitoring video data from the monitoring video storage unit 61, and when a person approaches the vicinity of the vehicle door, the conversation content with the person captured by the surrounding microphone 13 is read from the conversation content storage unit 63. Read and determine whether you are picked up from the contact information.
- whether or not the greeted person has come can be determined by whether or not the conversation content includes specific information for confirming that the greeted person is present.
- the surrounding state determination unit 52 makes a telephone call using the surrounding monitoring video data from the monitoring video storage unit 61, and the communication device 17 makes contact information. Whether or not the person has picked up can be confirmed by receiving a call back notification from the other party or a notification of receiving a callback from the taxi command center.
- the surrounding situation determination unit 52 stores the determination result in the surrounding situation storage unit 67.
- the door lock control unit 53 has a function of controlling the door lock device 15.
- the door lock control unit 53 causes the door lock device 15 to lock the door according to the determination of the start of the automatic operation by the automatic operation determination unit 47 or according to the output of the destination information by the destination output unit 46. That is, the door lock control part 53 locks a door at the time of the driving
- the door lock control unit 53 reads out the peripheral situation stored in the peripheral situation storage unit 67, and if the person who is greeted from the contact address has come, the door lock device 15 releases the door lock.
- a seat belt lock mechanism is provided so that the seat belt cannot be released until the fare is paid, and the door lock control unit 53 controls the seat belt lock control together with the door lock control. May also be made possible.
- FIG. 3 is a flowchart showing the overall passenger support procedure and support contents.
- This flowchart starts in response to the passenger getting on. Since the function of catching passengers before that time is a function of a taxi system provided in a taxi that performs fully automatic driving, a description thereof is omitted here.
- passenger support device 11 first controls door lock device 15 by door lock control part 53 of control unit 40 in step S1, and locks a door.
- step S2 the passenger support device 11 acquires the destination and contact information of the passenger.
- the guidance information output unit 44 of the control unit 40 causes the guidance output device 14 to output guidance information for inquiring about the destination and contact information of the passenger, and communicates with the destination by the microphone or display of the guidance output device 14 and the touch panel.
- the destination and contact information acquisition unit 45 acquires the destination and contact information and stores them in the destination and contact storage unit 65 of the storage unit 60.
- the input of the contact information by the passenger can be omitted.
- the destination is a public facility such as a hospital or a public office, the telephone number is well known, so that in this case as well, the input of contact information by the passenger can be omitted.
- step S3 the passenger assistance device 11 instructs the automatic driving control device 4 to start automatic driving traveling to the passenger's destination.
- the destination output unit 46 of the control unit 40 reads the destination information from the destination and contact address storage unit 65 and outputs the information to the automatic operation control device 4.
- the automatic driving control device 4 performs automatic driving to the destination according to the output destination information.
- the description is abbreviate
- step S4 the passenger support device 11 waits for arrival at the destination.
- the control unit 40 compares the current position information of the vehicle 1 acquired by, for example, the GPS receiver 5 with the destination information stored in the destination and contact address storage unit 65 by the arrival determination unit 48, It is determined whether or not the two match. Repeat this step until they match.
- step S5 the passenger assistance apparatus 11 notifies a passenger that it arrived at the destination.
- the guidance information output unit 44 of the control unit 40 outputs guidance information indicating that it has arrived at the destination from the guidance output device 14.
- the passenger assistance apparatus 11 determines whether it is a state in which a passenger can get off. For example, in step S6, the passenger state determination unit 49 of the control unit 40 reads the passenger monitoring video data from the monitoring video storage unit 61, and determines the states of all passengers based on the passenger monitoring video data. The passenger state determination unit 49 causes the passenger state storage unit 66 to store information representing the determination result.
- the passenger state determined by the passenger state determination unit 49 is, for example, whether or not the passenger is sleeping. For example, based on the passenger monitoring video data, detecting whether the passenger's eyes are open, the posture of the passenger, the passenger's static state, etc. Recognize whether you are doing. Moreover, you may use information, such as a passenger snoring, supplementarily by the sound in the guest room acquired by the audio
- the passenger state determination unit 49 determines that the passenger is in a state where the passenger can get off. If all of the passengers are asleep, the passenger state determination unit 49 determines that the passenger is in a state where the passenger cannot get off.
- the passenger assistance apparatus 11 determines whether the information showing the determination result memorize
- step S8 the passenger assistance device 11 performs a passenger awakening operation.
- the awakening support unit 50 of the control unit 40 reads out the passenger state determination result stored in the passenger state storage unit 66, and outputs the awakening support information to the stimulus output device 16 if all passengers are in the state of being unable to get off. To do. Thereby, a stimulus is given to a passenger from stimulus output device 16, and awakening of a passenger is promoted.
- the passenger support device 11 determines again whether or not the passenger is ready to get off. .
- the passenger state determination unit 49 of the control unit 40 reads the passenger monitoring video data from the monitoring video storage unit 61, determines the state of all passengers based on the passenger monitoring video data, and the determination result Is stored in the passenger state storage unit 66.
- the passenger assistance apparatus 11 determines whether the information showing the determination result memorize
- step S ⁇ b> 10 the control unit 40 reads the determination result of the passenger state determination unit 49 stored in the passenger state storage unit 66 and determines whether or not it is in a dismountable state.
- the passenger assistance apparatus 11 advances the process to step S13 described later.
- the passenger assistance device 11 advances the process to the next step S11.
- the passenger support apparatus 11 notifies a passenger's contact information in step S11.
- the notification output unit 51 of the control unit 40 reads out the passenger state determination results stored in the passenger state storage unit 66, and if all passengers remain in the state where they cannot get off, the destination and contact storage unit The telephone number of the contact information of the passenger stored in 65 is read out, and the communication device 17 calls the contact information.
- the notification output part 51 reads guidance information, such as a voice guidance which requests the pick-up memorize
- This voice guidance includes specific information for confirming whether or not the person has been picked up.
- the passenger support device 11 determines whether or not the pick-up is received from the contact address in step S12.
- the surrounding state determination unit 52 of the control unit 40 reads the surrounding monitoring video data from the monitoring video storage unit 61 and determines whether or not a person has approached the vicinity of the vehicle door. If a person approaches the vicinity of the vehicle door, the surrounding situation determination unit 52 reads out the conversation content information of the person picked up by the surrounding microphone 13 from the conversation content storage unit 63, and the specific information is included in it. It is determined whether or not.
- the surrounding state determination unit 52 determines whether or not the person is making a telephone call based on the surrounding monitoring video data from the monitoring video storage unit 61 and has received a callback notification from the communication device 17. That is, the surrounding situation determination unit 52 determines whether or not the person has presented specific information. In this way, it is determined whether or not the contact information has been received based on whether or not the specific information is presented, and the result is stored in the peripheral situation storage unit 67.
- the passenger support device 11 waits for a pickup from the contact address.
- the vehicle 1 is provided with guidance means for outputting guidance information to a person outside the vehicle by voice or display, and the surrounding state determination unit 52 prompts the presentation of the specific information when the person approaches the vicinity of the vehicle door. You may make it output guidance information. Further, the input of the specific information is not limited to voice. For example, a key input unit such as a numeric keypad may be provided on the door so that the specific information can be input.
- the passenger support device 11 controls the door lock device 15 by the door lock control unit 53 of the control unit 40 in step S13 to lock the door. To release.
- the subsequent fare payment function is a function of a taxi system provided in a taxi that performs fully automatic operation, and thus the description thereof is omitted here.
- the door locking is released after confirming that the person who has picked up has come.
- the passenger when the passenger is not awakened, if the door is unlocked indefinitely, the passenger may be involved in an incident such as theft. In this first embodiment, until the passenger arrives. Because the door remains locked, there is no such concern. Then, the door can be unlocked only after the pickup has arrived, and the passenger can be entrusted to the pickup person. Therefore, it becomes possible to deliver a passenger to the destination safely and reliably.
- FIG. 4 is a block diagram showing a functional configuration of the passenger support apparatus 11 according to the second embodiment of the present invention.
- the illustration of a part of the configuration similar to the passenger assistance device 11 according to the first embodiment shown in FIG. 2 is omitted.
- the passenger support device 11 also includes an input / output interface unit 20, a control unit 40, and a storage unit 60, as in the first embodiment.
- the storage unit 60 is a storage area used for carrying out the present embodiment, as in the first embodiment, the monitoring video storage unit 61, the conversation voice storage unit 62, the conversation content storage unit 63, and the guidance information storage.
- the storage unit 60 includes a predetermined contact address storage unit 68 and a designated destination storage unit 69.
- the predetermined contact storage unit 68 stores a predetermined contact used when notification to the contact is impossible.
- the predetermined contact address may be, for example, a network address or a telephone number of a taxi command center, or a telephone number of a security facility with which a taxi company has a contract.
- the predetermined contact information may be a telephone number for emergency calls such as police or emergency.
- the designated destination storage unit 69 stores destinations designated by taxi command centers, security facilities, or emergency call destination operators.
- control unit 40 has the same video acquisition unit 41, voice acquisition unit 42, voice recognition unit 43, guidance information output unit as those of the first embodiment as control functions necessary for carrying out this embodiment. 44, destination and contact information acquisition unit 45, automatic driving determination unit 47, arrival determination unit 48, passenger state determination unit 49, awakening support unit 50, notification output unit 51, surrounding situation determination unit 52, and door lock control unit 53. Moreover, it has the destination and destination output part 54 instead of the destination output part 46 in 1st Embodiment. Further, in the second embodiment, the control unit 40 includes a designated movement destination acquisition unit 55.
- the destination / destination output unit 54 has a function of outputting the destination of the passenger or the designated destination to the automatic operation control device 4.
- the destination and destination output unit 54 reads out the destination information stored in the destination and contact storage unit 65 and outputs the information to the automatic operation control device 4.
- the destination / destination output unit 54 reads out information on the designated destination stored in the designated destination storage unit 69 and outputs the information to the automatic operation control device 4.
- the designated destination acquisition unit 55 takes in the destination information received from the taxi command center by the communication device 17 via the input / output interface unit 20 and stores it in the designated destination storage unit 69 as the designated destination information. Let Further, the designated movement destination acquisition unit 55 reads out the conversation contents with the security facility or the emergency call destination operator stored in the conversation content storage unit 63, acquires the movement destination, and designates the movement as designated movement destination information. It may be stored in the destination storage unit 69.
- the guide information storage unit 64 stores guide information for inquiring about the destination of travel to a security facility or an emergency call destination operator. Then, the notification output unit 51 reads out the guidance information from the guidance information storage unit 64 and outputs the guidance information to the communication device 17, thereby inquiring the destination of the security facility or the emergency call destination operator who answered the phone by the communication device 17. It has a function for voice guidance.
- the passenger state determination unit 49 not only reads the passenger monitoring video data from the monitoring video storage unit 61 and determines whether or not the passenger can get off, but also whether the passenger is suffering, whether blood is shed, etc. Thus, a function of performing a process of determining whether or not the state is an awakening operation permission state in which a stimulus may be given to the passenger (awakening operation disapproval state) is provided.
- FIG. 5 is a flowchart showing the overall passenger support procedure and support contents.
- Steps S1 to S7 in passenger state determination are the same as in the first embodiment. is there.
- the passenger support apparatus 11 may perform the awakening operation in step S21 before the passenger awakening operation is performed.
- the awakening support unit 50 of the control unit 40 reads out the passenger state determination results stored in the passenger state storage unit 66, and when all passengers are in a state in which they cannot get off, further, each passenger is in the awakening operation permission state. It is determined whether or not there is.
- the wake-up support unit 50 outputs the wake-up support information to the stimulus output device 16 in step S8, and gives the stimulus to all the passengers from the stimulus output device 16. , Each passenger can be awakened.
- the awakening support unit 50 applies a stimulus from the stimulus output device 16 to each passenger except the passengers in the state where the awakening operation is not permitted. Can be encouraged.
- step S10 in this (6) notification to contact information is the same as in the first embodiment.
- step S11 is subdivided into step S11A, step S11B, and step S11C in the second embodiment.
- step S11A the notification output unit 51 of the control unit 40 reads the passenger state determination result stored in the passenger state storage unit 66, for example.
- the telephone number of the contact information of the passenger stored in the ground and contact address storage unit 65 is read out, and the communication device 17 calls the contact address.
- step S11B the notification output unit 51 reads out the conversation content with the respondent of the contact address stored in the conversation content storage unit 63, and confirms whether there is a response from the contact address. If it is confirmed that there is a response, the notification output unit 51 reads out guidance information such as voice guidance for requesting pick-up stored in the guidance information storage unit 64 and communicates it in step S11C. It is communicated to the responder who answered the phone via the device 17.
- step S12 and step S13 in the subsequent (7) pick-up confirmation and (8) passenger getting off is the same as in the first embodiment.
- step S11B Moving to the destination
- the passenger assistance device 11 moves Move forward.
- the determination as to whether or not the contact has been received from the contact in step S12 may include determination as to whether or not there was a rejection response to the request for pickup in step S11C. As a result, it is possible to immediately shift to the movement process to the movement destination without waiting for the arrival of a predetermined time.
- the notification output unit 51 of the control unit 40 reads out the predetermined contact stored in the predetermined contact storage unit 68, for example, the network address of the taxi command center, in step S22.
- the communication device 17 notifies the taxi command center of the current position and current status.
- the designated destination acquisition unit 55 of the control unit 40 acquires information on the destination such as the nearest police box, police station, or hospital from the taxi command center through the communication device 17, and the designated destination The data is stored in the storage unit 69.
- the notification output unit 51 may notify the security facility or the emergency call destination in step S22.
- the notification output unit 51 reads out the telephone number of the security facility or the emergency call telephone number as the predetermined contact stored in the predetermined contact storage unit 68 and calls the telephone number by the communication device 17. multiply.
- the guidance information according to the passenger's state is read from the guidance information storage unit 64, and the guidance information is notified to the security facility or the emergency call destination operator together with the current position.
- the designated movement destination acquisition unit 55 determines the movement destination from the information on the conversation content with the security facility or emergency call destination operator acquired via the communication device 17 and stored in the conversation content storage unit 63.
- the police box, the police station, the hospital, etc. designated as are acquired and stored in the designated destination storage unit 69.
- step S24 the passenger assistance device 11 instructs the automatic driving control device 4 to start the automatic driving travel to the designated destination.
- the destination and destination output unit 54 of the control unit 40 reads out information on the address of the designated destination from the designated destination storage unit 69 and outputs the information to the automatic operation control device 4.
- the automatic driving control device 4 performs automatic driving to the destination address according to the output destination information.
- step S25 the passenger assistance device 11 waits for arrival at the designated destination.
- the control unit 40 determines whether or not the vehicle has arrived at the designated destination under the control of the automatic driving determination unit 47, and repeats this step until the destination is reached.
- the passenger support apparatus 11 notifies the destination of arrival at the designated destination in step S26.
- the notification output unit 51 of the control unit 40 reads the telephone number of the designated movement destination stored in the designated movement destination storage unit 69, makes a call to the telephone number by the communication device 17, and guide information storage unit The guidance information for guiding the arrival from 64 is read and notified.
- step S13 the passenger support device 11 controls the door lock device 15 by the door lock control unit 53 of the control unit 40 to release the door lock.
- the door may be unlocked after confirming the pick-up when moving to the designated destination as well as when moving to the destination.
- the subsequent fare payment function is a function of the taxi system provided in taxis that perform fully automatic driving.
- a warning to forget to remove the card will be output, and in the case of cash payment, a charge will be issued.
- a printout of the form and payment method will be performed.
- the passenger's state is a state that may be stimulated. Since the stimulation is given, the passenger is not stimulated in an inappropriate situation, and the passenger can be safe.
- the arrival determination unit 48 determines whether or not the vehicle 1 has arrived near the destination in addition to determining whether or not the vehicle 1 has arrived at the passenger's destination. It has a function to judge.
- the vicinity of the destination means a predetermined distance range such as 100 m from the destination.
- the time until the estimated arrival time calculated according to the distance to the destination and road conditions may be a predetermined time range such as 1 minute.
- the vicinity of the destination is not limited to such a value as 100 m or 1 minute to reach such a destination. This may be set to a distance or time obtained by deep learning of data on a large number of subjects or established academically or statistically so that the passenger's condition does not change.
- the value indicating the vicinity of the destination may be stored in a memory (not shown) provided in the arrival determination unit 48, or may be stored in advance in the destination and contact address storage unit 65, for example.
- FIG. 6 is a flowchart showing the overall passenger support procedure and support contents. Only the parts different from the first embodiment will be described below.
- the arrival determination unit 48 determines that the vehicle 1 has not yet arrived at the destination in step S4 in the first embodiment, the arrival determination unit 48 in step S14. Thus, it is further determined whether or not the vehicle 1 has arrived in the vicinity of the destination.
- the passenger assistance apparatus 11 returns a process to the said step S4.
- the passenger assistance apparatus 11 advances the process to step S6.
- the passenger state determination unit 49 of the control unit 40 reads the passenger monitoring video data from the monitoring video storage unit 61, determines the state of all passengers based on the passenger monitoring video data, and displays information indicating the determination result. It is stored in the passenger state storage unit 66. Thereafter, the passenger assistance device 11 returns the process to step S4.
- step S5 the passenger assistance apparatus 11 notifies a passenger that it arrived at the destination. Thereafter, in the third embodiment, the process proceeds to step S7, and it is determined whether or not the determination result of the passenger state determination unit 49 is in a dismountable state. Steps S7 to S13 are the same as those in the first embodiment.
- the state of the passenger is acquired when arriving near the destination before arriving at the destination, and if it arrives at the destination, the operation according to the acquired passenger state Is to do. This is because, as the vicinity of the destination, even when the vehicle 1 arrives at the destination, a value with a high probability that the passenger state acquired in the vicinity of the destination is maintained is set.
- the state of the passenger is acquired before arrival at the destination, that is, in advance, so that the operation according to the passenger state is immediately started upon arrival at the destination. It is possible to shorten the time from the point of arrival at the destination to the transition to this operation.
- the arrival determination unit 48 has a function of determining whether or not the vehicle 1 has arrived at the passenger's destination, and the vicinity of the destination of the vehicle 1. And a function for determining whether or not the vehicle has arrived.
- FIG. 7 is a flowchart showing the overall passenger support procedure and support contents. Only the parts different from the first embodiment will be described below.
- the passenger assistance device 11 Wait for arrival near the destination.
- the control unit 40 determines whether or not the arrival determination unit 48 has arrived near the destination, and repeats this step until it is determined that the vehicle 1 has arrived near the destination.
- the passenger support device 11 determines the state of all passengers by the passenger state determination unit 49 in step S6.
- the passenger state storage unit 66 stores information representing the determination result.
- step S7 the passenger support device 11 determines whether or not the information indicating the determination result stored in the passenger state storage unit 66 is in a state where the passenger can get off.
- the passenger support device 11 determines whether the vehicle 1 has arrived at the destination by the arrival determination unit 48 in step S4, for example. Determine. And when it determines with not having arrived at the destination yet, the passenger assistance apparatus 11 returns a process to step S6.
- the passenger support apparatus 11 notifies the passenger that the vehicle has arrived at the destination in step S5, and then performs the process in step S13. Proceed to unlock the door.
- step S7 if it is determined in step S7 that the passenger is in a state where the passenger cannot get off, the same processes of steps S8 to S13 as in the first embodiment are performed. However, if it is determined in step S10 that the determination result of the passenger state determination unit 49 is a state where the passenger can get off, the passenger assistance apparatus 11 advances the process to step S4.
- the passenger's state is acquired when arriving in the vicinity of the destination before arriving at the destination, and if it is in a state where the passenger cannot get off, the awakening operation is performed before arriving at the destination. Is what you do.
- the state of the passenger is acquired before arrival at the destination, that is, in advance, and if the passenger's state is incapable of getting off, the awakening operation is performed before arrival at the destination. By shifting to, it is possible to improve the probability that the passenger is awake at the time of arrival at the destination.
- the passenger state determination as to whether or not the passenger is ready to get off is performed when the passenger arrives at the destination or near the destination. However, this determination may always be performed while the passenger is in the vehicle 1.
- the passenger state detection sensor is composed of the cabin camera 12, and the passenger state is determined based on the video signal including the passenger's face obtained by the cabin camera 12.
- the passenger state detection sensor is not limited to the cabin camera 12, and is composed of a sensor biosensor that acquires the biometric information of the passenger, and a biosignal obtained by the biosensor, for example, a pulse wave sensor or a heartbeat sensor.
- the state of the passenger may be determined based on a pulse wave signal or a heartbeat signal, or a signal representing the vertical movement of the diaphragm detected by a pressure sensor.
- a taxi that performs fully automatic driving has been described as an example of the vehicle 1, it is needless to say that it can be similarly applied to a private vehicle that is fully automatic driving.
- the home contact information can be registered in advance, when the destination is home, in the first and second embodiments, it is not necessary to acquire the contact information in step S2. Get better.
- the vehicle type, the function of the automatic driving control device, the passenger assistance procedure and assistance contents of the passenger assistance device, and the like can be variously modified without departing from the gist of the present invention.
- the present invention is not limited to the above-described embodiment, and various modifications can be made without departing from the scope of the invention in the implementation stage.
- the embodiments may be appropriately combined as much as possible, and in that case, the combined effect can be obtained.
- the above embodiments include inventions at various stages, and various inventions can be extracted by appropriately combining a plurality of disclosed constituent elements.
- a passenger support device that is mounted on an automatic driving vehicle having an automatic driving control device and supports a passenger who has boarded the automatic driving vehicle, comprising a hardware processor and a memory, The hardware processor is Obtaining and storing the passenger's destination and contact information in the memory; Based on the sensing result of the passenger state detection sensor that detects the state of the passenger, it is determined whether the passenger is in a state where the passenger can get off, and the determination result is stored in the memory, When the determination result stored in the memory is a determination result that the passenger is in a state in which the passenger cannot get off, the awakening operation of the passenger is performed, After the awakening operation, again, based on the sensing result of the passenger state detection sensor that detects the state of the passenger, it is determined whether or not the passenger is in a state where the passenger can get off, and the determination result is stored in the memory.
- the passenger assistance device that notifies the contact information stored in the memory when the determination result stored in the memory is a determination result that the passenger is still in a state where the passenger cannot get off.
- Appendix 2 A passenger support method executed by a device that is mounted on an automatic driving vehicle having an automatic driving control device and supports a passenger who has boarded the automatic driving vehicle, Using a hardware processor, the passenger's destination and contact information is obtained and stored in memory; Based on the sensing result of the passenger state detection sensor that detects the state of the passenger using the hardware processor, it is determined whether or not the passenger is in a state where the passenger can get off, and the determination result is stored in the memory.
- the hardware processor when the determination result stored in the memory is a determination result that the passenger is in a state where it is impossible to get off, the passenger is awakened, Using the hardware processor, after the awakening operation, again, based on the sensing result of the passenger state detection sensor that detects the state of the passenger, it is determined whether or not the passenger is in a state where the passenger can get off, The determination result is stored in the memory, Passenger support using the hardware processor to notify the contact information stored in the memory when the determination result stored in the memory is a determination result indicating that the passenger is still in a state where the passenger cannot get off. Method.
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Physics & Mathematics (AREA)
- Mechanical Engineering (AREA)
- General Physics & Mathematics (AREA)
- Transportation (AREA)
- Human Computer Interaction (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Emergency Management (AREA)
- Multimedia (AREA)
- Mathematical Physics (AREA)
- Health & Medical Sciences (AREA)
- Tourism & Hospitality (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Economics (AREA)
- General Business, Economics & Management (AREA)
- Traffic Control Systems (AREA)
- Emergency Alarm Devices (AREA)
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
- Alarm Systems (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
乗客支援装置は、乗客情報取得部により、乗客の目的地と連絡先とを取得し、状態判定部により、例えば前記目的地において、前記乗客の状態を検出する乗客状態検出センサのセンシング結果に基づいて、前記乗客が降車可能な状態にあるか否かを判定する。そして、前記乗客が降車不能な状態にあると判定されたとき、覚醒支援部により、前記乗客の覚醒動作を行い、この覚醒動作後も、前記状態判定部により前記乗客が降車不能な状態にあると判定された場合、連絡先通知部によって、前記乗客情報取得部によって取得した前記連絡先へ通知する。
Description
この発明は、自動運転車両の乗客を支援するための乗客支援装置、方法及びプログラムに関する。
車両の運転操作を支援する自動運転制御装置を搭載した車両が開発され、販売が開始されている。
このような自動運転制御装置を搭載した車両において、運転者を支援する支援装置が各種提案されている。例えば、特開2014-044707号公報は、運転者の健常性を判定し、運転者の健常性が低下している場合、その低下の度合いに応じて運転者を支援する運転者異常時支援装置を開示している。
近年、自動運転制御装置の機能をより高めることで、運転者を必要としない自動運転を行う車両の研究が急速に進められており、近い将来、その実現が見込まれている。自動運転車両は、マイカー等の個人所有車両よりは、車両費用の高額化と運転者人件費削減の観点から、まずは、バスやタクシー等の乗り合い車両において先行的に実現されると想定される。
一般に、多数の乗客が乗車するバスとは異なり、タクシーは、少人数の乗客しか乗車できず、一人で乗車する機会も多い。このような少人数の乗客の全てが降車不能な状態、例えば寝てしまった場合や、救援が必要な状態、例えば急病になった場合に、乗客を支援する装置が求められる。
この発明は、自動運転制御装置を搭載した車両、例えば運転者が存在しない自動運転車両の乗客が降車不能状態となったときに乗客を支援することが可能な乗客支援装置、方法及びプログラムを提供しようとするものである。
上記課題を解決するため、この発明の第1の態様は、自動運転制御装置を有する自動運転車両に装着され、前記自動運転車両に乗車した乗客を支援する乗客支援装置であって、前記乗客の目的地と連絡先とを取得する乗客情報取得部と、前記乗客の状態を検出する乗客状態検出センサのセンシング結果に基づいて、前記乗客が降車可能な状態にあるか否かを判定する状態判定部と、前記状態判定部により前記乗客が降車不能な状態にあると判定されたとき、前記乗客の覚醒動作を行う覚醒支援部と、を備える。そしてさらに、前記乗客支援装置は、前記覚醒支援部による前記覚醒動作後も、前記状態判定部により前記乗客が降車不能な状態にあると判定された場合、前記乗客情報取得部によって取得した前記連絡先へ通知する連絡先通知部を備える。
この発明の第2の態様に係る乗客支援装置は、第1の態様に係る乗客支援装置において、前記自動運転車両が前記乗客の目的地又はその近傍に到着したか否かを判定する到着判定部をさらに具備し、前記状態判定部は、前記自動運転車両が前記乗客の目的地又はその近傍に到着したと前記到着判定部が判定したとき、前記乗客が降車可能な状態にあるか否かの判定を行う。
この発明の第3の態様に係る乗客支援装置は、第1又は第2の態様に係る乗客支援装置において、前記連絡先から迎えが来た状況となったか否かを判定する状況判定部と、少なくとも前記自動運転車両の前記乗客を乗車させた走行開始時に前記乗客の乗降車口のドアを施錠し、前記状態判定部により前記乗客が降車可能な状態にあると判定されたとき、又は、前記状況判定部により前記連絡先から迎えが来た状況となったと判定されたとき、前記ドアの前記施錠を解除するドアロック制御部と、をさらに備える。
この発明の第4の態様に係る乗客支援装置は、第3の態様に係る乗客支援装置において、前記連絡先通知部は、前記連絡先への通知に、迎えの者を確認するための特定情報を含め、前記状況判定部は、前記特定情報の提示に基づいて、前記連絡先から迎えが来た状況となったと判定する。
この発明の第5の態様に係る乗客支援装置は、第3又は第4の態様に係る乗客支援装置において、前記状況判定部により前記連絡先から迎えが来た状況とならないと判定されたとき、又は、前記連絡先通知部による前記連絡先への通知が行えないとき、前記自動運転制御装置による前記自動運転車両の決められた移動先への移動と、前記移動先への通知を行う移動先移動制御部をさらに備え、前記ドアロック制御部は、前記移動先への到着により、前記ドアの前記施錠を解除する。
この発明の第6の態様に係る乗客支援装置は、第5の態様に係る乗客支援装置において、前記決められた移動先の指定を受ける移動先指定部をさらに備える。
この発明の第7の態様に係る乗客支援装置は、第1乃至第6の態様の何れか一つに係る乗客支援装置において、前記状態判定部は、前記乗客の状態を検出する乗客状態検出センサのセンシング結果に基づいて、前記乗客の状態が、前記覚醒支援部による前記覚醒動作を行っても良い状態か否かをさらに判定し、前記覚醒支援部は、前記状態判定部が前記乗客の状態が前記覚醒動作を行っても良い状態であると判定したときのみ、前記覚醒動作を行う。
この発明の第8の態様は、自動運転制御装置を有する自動運転車両に装着され、前記自動運転車両に乗車した乗客を支援するための装置が実行する乗客支援方法であって、前記乗客の目的地と連絡先とを取得する乗客情報取得ステップと、前記乗客の状態を検出する乗客状態検出センサのセンシング結果に基づいて、前記乗客が降車可能な状態にあるか否かを判定する第1の状態判定ステップと、前記第1の状態判定ステップにおいて前記乗客が降車不能な状態にあると判定されたとき、前記乗客の覚醒動作を行う覚醒支援ステップと、前記覚醒支援ステップによる前記覚醒動作後、再度、前記乗客状態検出センサのセンシング結果に基づいて、前記乗客が降車可能な状態にあるか否かを判定する第2の状態判定ステップと、前記第2の状態判定ステップにおいて前記乗客が降車不能な状態にあると判定された場合、前記乗客情報取得ステップにおいて取得した前記連絡先へ通知する連絡先通知ステップと、を備えている。
この発明の第9の態様は、第1乃至第7の態様に係る乗客支援装置が備える各部の機能をコンピュータに実行させるプログラムである。
この発明の第1及び第8の態様によれば、自動運転車両に乗車した乗客の、例えば自宅などの目的地に加えて、その目的地の電話番号などの連絡先を取得しておき、乗客が正常に降車可能な状態で無い場合、例えば寝ている場合には、まず、乗客に対して音や振動等の刺激を与えることで乗客の覚醒を促し、それでも寝ている場合には、前記取得した連絡先に通知して迎えを依頼する。よって、乗客が覚醒していない状態のときには、迎えの者に乗客を託すことができるので、乗客を安全且つ確実に目的地に届けることが可能となる。
この発明の第2の態様によれば、前記自動運転車両が前記乗客の目的地又はその近傍に到着したときに前記乗客が降車可能な状態にあるか否かの判定を行うので、未だ当分目的地に到着しない場合には判定を行わず、不必要な動作を行わないことで、省電力化が可能である。そして、目的地に到着したとき、あるいは、目的地の近傍に到着した際には、前記乗客が降車可能な状態にあるか否かの判定を行うことで、覚醒動作や連絡先への通知の要否を判定することが必要なときには、前記乗客の状態の降車可能/不能の判定結果が得られているようにすることができる。
この発明の第3の態様によれば、迎えの者が来たことを確認してドア施錠を解除する。よって、乗客が覚醒していない状態のとき、無制限にドアの施錠を解除してしまうと、乗客が窃盗などの事件に巻き込まれる虞があるが、この発明の第3の態様では、ドアは施錠されたままであるため、そのような虞が無い。そして、迎えの者が来たときに、ドアの正常を解除することで、迎えの者に乗客を託すことができる。
この発明の第4の態様によれば、迎え依頼時に特定情報を伝え、迎えの者がこの特定情報を提示することにより、その人物が迎えの者であることを確認することができる。よって、迎えの者以外の人物が近づいてきても、ドアの施錠は解除されないので、乗客の安全は守られる。
この発明の第5の態様によれば、連絡先からの迎えが来ない場合や、連絡先に繋がらないとき、迎えを拒否された場合などには、契約している警備施設、あるいは警察や病院などの決められた移動先へ移動することで、乗客を警備員又は警察官や医師などに託すことが可能となる。
この発明の第6の態様によれば、例えば、タクシーの指令センターに連絡して、あるいは、乗客の状態に応じて警察や救急などの緊急通報用電話番号に通報して、移動先の指示を受け、その指示された移動先へ移動することができるので、現在位置からの距離や対応可能性等を考慮した適切な移動先へ乗客を届けることができる。
この発明の第7の態様によれば、乗客の状態が覚醒動作を行っても良い状態であるときのみ、覚醒動作を行うようにしているので、つまり、乗客の状態が覚醒動作を行うことが望ましくない場合、例えば乗客が目的地として病院を指定し、病院に行く途中で更に具合が悪くなって降車不能になっているような場合等には、乗客に対する覚醒動作を行わないようにしているので、不適切な状況で乗客に刺激などを与えることはなく、乗客の安全を図ることができる。
この発明の第9の態様によれば、第1乃至第7の態様のいずれか一つに係る乗客支援装置が備える各部の機能がコンピュータによって実行される。
すなわち、この発明の各態様によれば、自動運転制御装置を搭載した車両、例えば運転者が存在しない自動運転車両の乗客が降車不能状態となったときに乗客を支援することが可能な乗客支援装置、方法及びプログラムを提供することができる。
以下、図面を参照してこの発明に係わる実施形態を説明する。
[第1実施形態]
(構成)
図1は、この発明の第1実施形態に係る乗客支援装置を備えた自動運転制御システムの全体構成を示す図である。この自動運転制御システムは、車両1に搭載される。なお、ここでは、車両1として、運転者が存在しない完全自動運転を行うタクシーを例に説明する。
[第1実施形態]
(構成)
図1は、この発明の第1実施形態に係る乗客支援装置を備えた自動運転制御システムの全体構成を示す図である。この自動運転制御システムは、車両1に搭載される。なお、ここでは、車両1として、運転者が存在しない完全自動運転を行うタクシーを例に説明する。
車両1は、基本設備として、動力源及び変速装置を含むパワーユニット2と、操舵装置3と、を備えている。動力源としては、エンジン又はモータ、あるいはその両方が用いられる。
車両1は、運転者を必要としない自動運転モードで走行可能に構成されている。自動運転モードは、例えば、車両の走行する道路に沿って自動で車両1を走行させる運転状態を実現するモードであり、運転者が運転操作をすることなく、乗客によって設定された目的地に向かって自動的に車両を走行させる。なお、車両1は、必要により手動運転モードに切り替えて運転者の運転操作により走行できるように構成されていてもよい。
図1において、車両1はまた、自動運転モードによる運転制御を実行するための自動運転制御装置4を備えている。自動運転制御装置4は、GPS(Global Positioning System)受信機5、ジャイロセンサ6、及び車速センサ7からそれぞれセンシングデータを取得する。自動運転制御装置4は、図示しないナビゲーションシステムで生成される経路情報や、路車間通信により取得される交通情報、周辺の人や車両の位置と動きを監視する周辺モニタリングシステムにより得られる情報をもとに、ステアリング、アクセル及びブレーキを制御することで、車両1の走行を自動制御する。周辺モニタリングシステムは、例えば、周辺の車両との距離を測定して距離情報を自動運転制御装置4へ出力するレーダセンサ8と、車両周辺を撮像してその映像信号を自動運転制御装置4へ出力する周辺カメラ9と、を備えることができる。
自動運転制御には、例えば、自動操舵(操舵の自動運転)と自動速度調整(速度の自動運転)がある。自動操舵は、操舵装置3を自動で制御する運転状態である。自動操舵にはLKA(Lane Keeping Assist)が含まれる。LKAは、車両1が走行車線から逸脱しないように自動で操舵装置3を制御する。なお、自動操舵はLKAに限らない。自動速度調整は、車両1の速度を自動で制御する運転状態である。自動速度調整にはACC(Adaptive Cruise Control)が含まれる。ACCとは、例えば、車両1の前方に先行車が存在しない場合は予め設定された設定速度で車両1を定速走行させる定速制御を行い、車両1の前方に先行車が存在する場合には先行車との車間距離に応じて車両1の車速を調整する追従制御を行うものである。なお、自動速度調整は、ACCに限らず、CC(Cruise Control:定速制御)等も含まれる。
本実施形態の自動運転制御システムは、乗客を支援する乗客支援システム10を有している。乗客支援システム10は、この発明の第1実施形態に係る乗客支援装置11と、この乗客支援装置11にそれぞれ接続された、客室カメラ12、周囲マイクロフォン(以下、マイクと略記する。)13、案内出力装置14、ドアロック装置15、刺激出力装置16、及び通信装置17と、を備えている。また、前記GPS受信機5及び前記周辺カメラ9も前記乗客支援装置11に接続されており、これらGPS受信機5及び周辺カメラ9も、乗客支援システム10の一部として機能する。
客室カメラ12は、乗客の状態を検出する乗客状態検出センサとして機能する。この客室カメラ12は、例えば、ダッシュボード上、前席シートのヘッドレスト背面、客室の天井や側面等、各乗客の顔や体を撮影可能な位置に複数設置され、各シートに搭乗した乗客を撮像してその映像信号を乗客支援装置11へ出力する。
周囲マイク13は、車両1の周囲の音を検出するセンサとして機能する。この周囲マイク13は、例えば、乗客の乗降車口のドア近傍に、車両外の音を検出可能に設置され、ドア付近で発せられた乗客又は乗客を迎えに来た人などの音声をピックアップしてその音声信号を乗客支援装置11へ出力する。なお、この周囲マイク13は、自動運転制御装置4が使用する周辺モニタリングシステムの一部として機能することもできる。
案内出力装置14は、乗客支援装置11からの案内情報を出力する。案内出力装置14は、例えば、スピーカと表示器を有し、乗客支援装置11から出力された案内情報の音声信号をスピーカから出力すると共に、案内情報の表示信号を表示器に表示する。また、この案内出力装置14は、マイクを有し、乗客の目的地や連絡先を問い合わせる案内情報に応じて乗客から発せられる目的地や連絡先の音声をピックアップしてその音声信号を乗客支援装置11へ出力する。さらに、案内出力装置14は、ナビゲーションシステムにおける画像表示機能やタッチ入力機能及び音声入出力機能と同等の機能を備えることで、乗客の操作によって目的地や連絡先が入力され得るように構成されてもよく、それら入力された目的地や連絡先の情報を乗客支援装置11へ出力する。なお、案内出力装置14は、これらの構成の全てを備える必要は無く、少なくとも乗客の目的地と連絡先を取得可能であれば、どのような構成であっても構わない。
また、案内出力装置14は、完全自動運転を行うタクシーが備えるタクシーシステムの一部として、例えば、クレジットカードやプリペイドカード、会員カード等から情報を読み取るカードリーダ機能を備え、通信装置17を介して、乗客から運賃を徴収することが可能となっている。この機能を利用することで、クレジットカードや会員カードの情報に基づいて、通信装置17を介して乗客の住所情報及び電話番号情報が取得可能な場合、乗客が指定した目的地が乗客の住所情報に一致すれば、電話番号情報を連絡先として利用可能であるので、乗客への連絡先の問い合わせを省略することができる。また、案内出力装置14は、運賃を現金により支払うための自動現金受取/釣り銭支払い機能を備えてもよい。
ドアロック装置15は、乗客の乗降車口のドアに取り付けられており、乗客支援装置11の制御により施錠又は施錠解除される。
刺激出力装置16は、乗客支援装置11の制御により乗客に対して、音、光、振動などの刺激を与える。音や光を出力する装置は、独立したスピーカやランプとして構成しても良いし、案内出力装置14を兼用することも可能である。振動を出力する装置としては、例えば、乗客が座っているシートの座面などを微小振動させるバイブレータ、乗客が装着しているシートベルトを微小量繰り返し引き込み/繰り出しするシートベルト駆動装置、などを備える。
通信装置17は、乗客支援装置11の制御により所定のタクシー指令センターとの通信を行うと共に、必要により、公衆電話回線を介して連絡先に通知可能となっている。
乗客支援装置11は、乗客を支援するもので、以下のように構成される。図2はその機能構成を示すブロック図である。
乗客支援装置11は、入出力インタフェースユニット20と、制御ユニット40と、記憶ユニット60と、を備えている。
入出力インタフェースユニット20は、客室カメラ12及び周辺カメラ9から出力された映像信号を受信してデジタルデータに変換して、制御ユニット40に入力する。また、入出力インタフェースユニット20は、GPS受信機5から車両1の現在位置を示す現在位置情報を受信して制御ユニット40に入力する。入出力インタフェースユニット20はまた、周囲マイク13、案内出力装置14及び通信装置17から出力された音声信号を受信してデジタルデータに変換して、制御ユニット40に入力する。入出力インタフェースユニット20はさらに、案内出力装置14から出力された乗客の目的地情報及び連絡先情報を受信して、それらを制御ユニット40に入力する。
また、入出力インタフェースユニット20は、制御ユニット40から出力された案内情報を音声信号及び表示信号に変換して案内出力装置14へ出力する。さらに、入出力インタフェースユニット20は、制御ユニット40から出力されたドア制御情報をドア施錠/施錠解除信号に変換してドアロック装置15へ出力する。入出力インタフェースユニット20はさらに、制御ユニット40から出力された覚醒支援情報を刺激出力装置駆動信号に変換して刺激出力装置16へ出力する。また、入出力インタフェースユニット20は、制御ユニット40から出力された連絡先情報を電話番号信号に変換して通信装置17に出力すると共に、制御ユニット40から出力された案内情報を音声信号に変換して通信装置17に出力する。
さらに、入出力インタフェースユニット20は、自動運転制御装置4と制御ユニット40との間の情報の授受を行う。
記憶ユニット60は、記憶媒体として、例えばSSD(Solid State Drive)やHDD(Hard Disk Drive)等の随時書き込み及び読み出しが可能な不揮発性メモリを使用したものである。また、一部はRAMのような揮発性メモリを使用しても構わない。記憶ユニット60は、本実施形態を実施するために使用する記憶領域として、監視映像記憶部61、会話音声記憶部62、会話内容記憶部63、案内情報記憶部64、目的地及び連絡先記憶部65、乗客状態記憶部66、及び、周辺状況記憶部67を備えている。ここで、監視映像記憶部61は、客室及び車両1の周辺の監視映像を記憶する。会話音声記憶部62は、客室内又は車外ドア付近での及び通信による会話音声を記憶する。会話内容記憶部63は、乗客及び連絡先からの迎えの者との会話内容を記憶する。案内情報記憶部64は、案内情報を記憶している。目的地及び連絡先記憶部65は、目的地及び連絡先を記憶する。乗客状態記憶部66は、乗客の状態を記憶する。周辺状況記憶部67は、連絡先から迎えの者が来た状況か否かを記憶する。
制御ユニット40は、本実施形態を実施するために必要な制御機能として、映像取得部41、音声取得部42、音声認識部43、案内情報出力部44、目的地及び連絡先取得部45、目的地出力部46、自動運転判定部47、到着判定部48、乗客状態判定部49、覚醒支援部50、通知出力部51、周辺状況判定部52、及び、ドアロック制御部53を備えている。なお、制御ユニット40を、コンピュータを構成するCPU(Central Processing Unit)及びプログラムメモリにより構成して、これらの制御機能はいずれもプログラムメモリに格納されたプログラムをCPUに実行させることにより実現されることもできる。
映像取得部41は、客室カメラ12から各シートに搭乗した乗客の監視映像を取得する機能を有している。また、映像取得部41は、周辺カメラ9から車両1の周辺の監視映像を取得する機能を有している。映像取得部41は、これら客室カメラ12及び周辺カメラ9から出力された映像信号のデジタルデータ(乗客監視映像データ及び周辺監視映像データ)を入出力インタフェースユニット20から取り込み、この取り込んだ各監視映像データを記憶ユニット60の監視映像記憶部61に記憶させる。
なお、客室カメラ12及び周辺カメラ9又は入出力インタフェースユニット20において、映像信号を所定の符号化方式に応じて符号化するようにしてもよい。このようにすると、監視映像データの情報量を減らして監視映像記憶部61の記憶容量を節約することが可能となる。
音声取得部42は、周囲マイク13から車両ドア付近の人物が発した音声を取得する機能を有している。また、音声取得部42は、案内出力装置14が備えるマイクから乗客が発した音声を取得する機能を有している。さらに、音声取得部42は、通信装置17から通話先の人物が発した音声を取得する機能を有している。音声取得部42は、これら周囲マイク13、案内出力装置14及び通信装置17から出力された音声信号のデジタルデータ(会話音声データ)を入出力インタフェースユニット20から取り込み、この取り込んだ会話音声データを記憶ユニット60の会話音声記憶部62に記憶させる。
音声認識部43は、音声認識辞書を有し、音声データに対して音声認識を行い、音声データをテキストデータ化する機能を有している。音声認識部43は、例えば会話音声記憶部62に音声が記憶される毎に、その記憶された会話音声データを音声認識し、その認識した会話内容情報を記憶ユニット60の会話内容記憶部63に記憶させる。
案内情報出力部44は、案内情報記憶部64から予め記憶されている案内情報を読み込み、案内出力装置14へ出力する機能を有している。案内情報出力部44が、案内情報記憶部64からいずれの案内情報を読み出して出力するかは、会話内容記憶部63に記憶された乗客との会話内容と、後述する乗客状態記憶部66に記憶されている乗客状態判定部49の判定結果とに応じて決定する。
目的地及び連絡先取得部45は、乗客の目的地と連絡先を取得する機能を有している。目的地及び連絡先取得部45は、会話内容記憶部63に記憶された乗客との会話内容を読み出して、目的地及び連絡先を取得し、それら取得した目的地及び連絡先の情報を記憶ユニット60の目的地及び連絡先記憶部65に記憶させる。また、目的地及び連絡先取得部45は、案内出力装置14により入力された目的地や連絡先の情報を取り込み、それら取り込んだ目的地及び連絡先の情報を記憶ユニット60の目的地及び連絡先記憶部65に記憶させることもできる。
目的地出力部46は、乗客の目的地を自動運転制御装置4へ出力する機能を有している。目的地出力部46は、目的地及び連絡先記憶部65に記憶された目的地の情報を読み出して、自動運転制御装置4へ出力する。
自動運転判定部47は、自動運転制御装置4から出力された自動運転に関わる各種情報から、車両1が現在、走行しているのか、停車しているのか、目的地に到着したのか否か、などの自動運転状態を判定する機能を有している。この自動運転判定部47の判定結果に応じて、制御ユニット40は、本実施形態を実施するために、各部を機能させる。
到着判定部48は、車両1が乗客の目的地に到着したか否かを判定する機能を有している。到着判定部48は、目的地及び連絡先記憶部65に記憶された目的地の情報を読み出して、これをGPS受信機5から供給される車両1の現在位置を示す現在位置情報と比較することで、目的地へ到着したかどうか判定する。
乗客状態判定部49は、乗客の状態を判定する機能を有している。乗客状態判定部49は、到着判定部48によって車両1が目的地に到着していると判定された際に、監視映像記憶部61から乗客監視映像データを読み込み、この乗客監視映像データに基づいて乗客が降車可能状態か否(降車不能状態である)かを判定する処理を行う。なお、降車不能状態とは、例えば、乗客が寝込んでしまったり、急病になってしまったりしたような状態である。乗客状態判定部49は、判定結果を、乗客状態記憶部66に記憶させる。
また、乗客状態判定部49は、監視映像記憶部61に記憶されている乗客監視映像データだけでなく、例えばシートベルトの装着が解除されたか否かにより乗客の状態(降車可能状態/降車不能状態)を判定することも可能である。すなわち、車両1の運転開始は、乗客がシートベルトを装着したことを条件とするので、目的地に到着しても乗客がシートベルトをしたままであれば、乗客が降車不能な状態にあると判定することができる。
覚醒支援部50は、刺激出力装置16によって乗客に刺激を与える機能を有している。覚醒支援部50は、乗客状態記憶部66に記憶されている乗客の状態を読み出し、乗客が降車不能な状態にあれば覚醒支援情報を刺激出力装置16に出力し、乗客へ刺激を与えて乗客の覚醒を促す。
通知出力部51は、通信装置17により連絡先へ迎えを依頼する通知を行う機能を有している。通知出力部51は、乗客状態記憶部66に記憶されている乗客の状態を読み出し、刺激出力装置16による刺激の出力にもかかわらず乗客が降車不能な状態のままであれば、目的地及び連絡先記憶部65に記憶されている乗客の連絡先の電話番号を読み出し、通信装置17に出力することで、通信装置17により連絡先に電話をかける。また、通知出力部51は、案内情報記憶部64に記憶された案内情報を読み出して、通信装置17に出力することで、通信装置17により電話に出た相手に迎えを依頼する音声案内を行う。この音声案内は、迎えの者であるか否かを確認するためのパスワードや暗証番号、コールバックの電話番号などの特定情報を含む。コールバック電話番号は、当該車両1に固有の番号であっても良いし、タクシー指令センターなどの予め決められた専用番号であっても構わない。
周辺状況判定部52は、車両1の周辺の状況を判定し、連絡先から迎えの者が来た状況となったか否かを判定する機能を有している。周辺状況判定部52は、監視映像記憶部61から周辺監視映像データを読み込み、車両ドア付近に人物が近づいてきたとき、周囲マイク13により取り込んだその人物との会話内容を会話内容記憶部63から読み込み、連絡先から迎えの者か否かを判定する。ここで、迎えの者が来たか否かは、会話内容に、迎えの者であることを確認するための特定情報が含まれるか否かにより判定することができる。また、周辺状況判定部52は、車両ドア付近に人物が近づいてきたとき、監視映像記憶部61から周辺監視映像データにより当該人物が電話通話を行っており、且つ、通信装置17により、連絡先の相手からのコールバック又はタクシー指令センターからのコールバック受けの通知を受けたか否かにより、迎えの者が来たか否かを確認することができる。周辺状況判定部52は、判定結果を、周辺状況記憶部67に記憶させる。
ドアロック制御部53は、ドアロック装置15を制御する機能を有している。ドアロック制御部53は、自動運転判定部47による自動運転の開始の判定により、あるいは、目的地出力部46による目的地情報の出力に応じて、ドアロック装置15にドアを施錠させる。即ち、ドアロック制御部53は、少なくとも乗客を乗車させた状態での自動運転による走行開始時に、ドアを施錠させる。また、ドアロック制御部53は、乗客状態記憶部66に記憶された乗客の状態を読み出し、乗客が降車可能な状態にあるとき、ドアロック装置15にドアの施錠を解除させる。さらに、ドアロック制御部53は、周辺状況記憶部67に記憶された周辺状況を読み出し、連絡先から迎えの者が来た状況であれば、ドアロック装置15にドアの施錠を解除させる。また、運賃が現金による支払いの場合には、運賃が支払われるまで、シートベルトが解除できないようにシートベルトロック機構を備え、ドアロック制御部53がドアのロック制御と合わせてシートベルトのロック制御も行えるようにしてもよい。
(動作)
次に、前述したように構成された乗客支援装置11の動作を説明する。図3はその全体の乗客支援の手順と支援内容を示すフローチャートである。
次に、前述したように構成された乗客支援装置11の動作を説明する。図3はその全体の乗客支援の手順と支援内容を示すフローチャートである。
なお、このフローチャートは、乗客が乗車したことに応じて、スタートする。それ以前の乗客を捕まえる機能は、完全自動運転を行うタクシーが備えるタクシーシステムの機能であるので、ここでは説明を省略する。
(1)乗客乗車
乗客支援装置11は、乗客が乗車すると、まず、ステップS1において、制御ユニット40のドアロック制御部53によりドアロック装置15を制御して、ドアを施錠する。
乗客支援装置11は、乗客が乗車すると、まず、ステップS1において、制御ユニット40のドアロック制御部53によりドアロック装置15を制御して、ドアを施錠する。
(2)目的地、連絡先取得
その後、ステップS2において、乗客支援装置11は、乗客の目的地と連絡先を取得する。例えば、制御ユニット40の案内情報出力部44は、案内出力装置14から乗客の目的地や連絡先を問い合わせる案内情報を出力させ、案内出力装置14が有するマイクや表示器とタッチパネルによる目的地と連絡先の入力を受けて、目的地及び連絡先取得部45により目的地と連絡先を取得し、記憶ユニット60の目的地及び連絡先記憶部65に記憶させる。
その後、ステップS2において、乗客支援装置11は、乗客の目的地と連絡先を取得する。例えば、制御ユニット40の案内情報出力部44は、案内出力装置14から乗客の目的地や連絡先を問い合わせる案内情報を出力させ、案内出力装置14が有するマイクや表示器とタッチパネルによる目的地と連絡先の入力を受けて、目的地及び連絡先取得部45により目的地と連絡先を取得し、記憶ユニット60の目的地及び連絡先記憶部65に記憶させる。
なお、目的地が自宅であり、カード情報などから自宅の連絡先が取得可能な場合や、目的地を電話番号により検索する場合には、乗客による連絡先の入力は省略することができる。また、目的地が病院や役所等の公共施設であれば、電話番号が周知のため、この場合にも乗客による連絡先の入力は省略することができる。
なお、上記ステップS1におけるドアの施錠は、このステップS2の後に行ってもよい。
(3)自動運転
目的地及び連絡先が取得されたならば、ステップS3において、乗客支援装置11は、自動運転制御装置4に乗客の目的地へ自動運転走行を開始するよう指示する。例えば、制御ユニット40の目的地出力部46は、目的地及び連絡先記憶部65より目的地の情報を読み出して、自動運転制御装置4に出力する。自動運転制御装置4は、この出力された目的地の情報に従って、その目的地への自動運転を行う。なお、この自動運転制御装置4の動作はこの実施形態に直接関係しないため、その説明は省略する。
目的地及び連絡先が取得されたならば、ステップS3において、乗客支援装置11は、自動運転制御装置4に乗客の目的地へ自動運転走行を開始するよう指示する。例えば、制御ユニット40の目的地出力部46は、目的地及び連絡先記憶部65より目的地の情報を読み出して、自動運転制御装置4に出力する。自動運転制御装置4は、この出力された目的地の情報に従って、その目的地への自動運転を行う。なお、この自動運転制御装置4の動作はこの実施形態に直接関係しないため、その説明は省略する。
その後、ステップS4において、乗客支援装置11は、目的地へ到着するのを待つ。例えば、制御ユニット40は、到着判定部48により、例えばGPS受信機5で取得した車両1の現在位置情報と目的地及び連絡先記憶部65に記憶された目的地の情報とを比較し、両者が一致したか否かを判定する。両者が一致するまで、このステップを繰り返す。
そして、目的地に到着したならば、ステップS5において、乗客支援装置11は、目的地に到着したことを乗客に告知する。例えば、制御ユニット40の案内情報出力部44は、案内出力装置14から目的地へ到着した旨の案内情報を出力する。
(4)乗客状態判定
ここで、乗客支援装置11は、乗客が降車可能な状態であるか否かを判定する。例えば、ステップS6において、制御ユニット40の乗客状態判定部49は、監視映像記憶部61から乗客監視映像データを読み込み、乗客監視映像データに基づいて、全ての乗客の状態を判定する。乗客状態判定部49は、判定結果を表す情報を乗客状態記憶部66に記憶させる。
ここで、乗客支援装置11は、乗客が降車可能な状態であるか否かを判定する。例えば、ステップS6において、制御ユニット40の乗客状態判定部49は、監視映像記憶部61から乗客監視映像データを読み込み、乗客監視映像データに基づいて、全ての乗客の状態を判定する。乗客状態判定部49は、判定結果を表す情報を乗客状態記憶部66に記憶させる。
ここで、乗客状態判定部49が判定する乗客の状態は、例えば、乗客が眠っているか否かである。例えば、乗客監視映像データに基づいて、乗客の眼の開眼の状態、乗客の姿勢、乗客の静動状態、等を検出することで、乗客が眠っているのか、運賃支払いや降車のための動作をしているのかを認識する。また、案内出力装置14が有するマイクから音声取得部42によって取得した客室内の音により、例えば乗客がいびきをかいているなどの情報を補助的に使用しても良い。さらには、シートベルの解除状態なども利用できる。
なお、複数人の乗客が乗車している場合、その内の少なくとも一人が眠っていなければ、乗客状態判定部49は、乗客は降車可能状態であると判定する。乗客の全てが眠っていれば、乗客状態判定部49は、乗客が降車不能状態にあると判定する。
そして、乗客支援装置11は、乗客状態記憶部66に記憶された判定結果を表す情報が降車可能状態となっているか否かを判定する。例えば、ステップS7において、制御ユニット40は、乗客状態記憶部66に記憶されている乗客状態判定部49の判定結果を読み出し、それが降車可能状態となっているか否かを判定する。ここで、乗客状態判定部49の判定結果が降車可能状態となっていれば、乗客支援装置11は、処理を後述するステップS13に進める。これに対し、乗客状態判定部49の判定結果が降車不能状態となっていれば、乗客支援装置11は、処理を次のステップS8に進める。
(5)覚醒動作
乗客支援装置11は、ステップS8において、乗客の覚醒動作を実施する。例えば、制御ユニット40の覚醒支援部50は、乗客状態記憶部66に記憶された乗客の状態判定結果を読み出し、全ての乗客が降車不能状態であれば、覚醒支援情報を刺激出力装置16に出力する。これにより、刺激出力装置16から乗客へ刺激が与えられ、乗客の覚醒が促される。
乗客支援装置11は、ステップS8において、乗客の覚醒動作を実施する。例えば、制御ユニット40の覚醒支援部50は、乗客状態記憶部66に記憶された乗客の状態判定結果を読み出し、全ての乗客が降車不能状態であれば、覚醒支援情報を刺激出力装置16に出力する。これにより、刺激出力装置16から乗客へ刺激が与えられ、乗客の覚醒が促される。
(6)連絡先への通知
前記覚醒動作を開始してから例えば1分後等の所定の時間経過後、乗客支援装置11は、再び、乗客が降車可能な状態であるか否かを判定する。例えば、ステップS9において、制御ユニット40の乗客状態判定部49は、監視映像記憶部61から乗客監視映像データを読み込み、乗客監視映像データに基づいて、全ての乗客の状態を判定し、その判定結果を表す情報を乗客状態記憶部66に記憶させる。そして、乗客支援装置11は、乗客状態記憶部66に記憶された判定結果を表す情報が降車可能状態となっているか否か、つまり、乗客が覚醒したか否かを判定する。例えば、ステップS10において、制御ユニット40は、乗客状態記憶部66に記憶されている乗客状態判定部49の判定結果を読み出し、それが降車可能状態となっているか否かを判定する。ここで、判定結果が降車可能状態となっていれば、乗客支援装置11は、処理を後述するステップS13に進める。これに対し、判定結果が降車不能状態となっていれば、乗客支援装置11は、処理を次のステップS11に進める。
前記覚醒動作を開始してから例えば1分後等の所定の時間経過後、乗客支援装置11は、再び、乗客が降車可能な状態であるか否かを判定する。例えば、ステップS9において、制御ユニット40の乗客状態判定部49は、監視映像記憶部61から乗客監視映像データを読み込み、乗客監視映像データに基づいて、全ての乗客の状態を判定し、その判定結果を表す情報を乗客状態記憶部66に記憶させる。そして、乗客支援装置11は、乗客状態記憶部66に記憶された判定結果を表す情報が降車可能状態となっているか否か、つまり、乗客が覚醒したか否かを判定する。例えば、ステップS10において、制御ユニット40は、乗客状態記憶部66に記憶されている乗客状態判定部49の判定結果を読み出し、それが降車可能状態となっているか否かを判定する。ここで、判定結果が降車可能状態となっていれば、乗客支援装置11は、処理を後述するステップS13に進める。これに対し、判定結果が降車不能状態となっていれば、乗客支援装置11は、処理を次のステップS11に進める。
乗客支援装置11は、ステップS11において、乗客の連絡先へ通知を行う。例えば、制御ユニット40の通知出力部51は、乗客状態記憶部66に記憶された乗客の状態判定結果を読み出し、全ての乗客が降車不能状態のままであるならば、目的地及び連絡先記憶部65に記憶されている乗客の連絡先の電話番号を読み出して、通信装置17により、その連絡先に電話をかける。そして、通知出力部51は、案内情報記憶部64に記憶された迎えを依頼する音声案内等の案内情報を読み出して、これを通信装置17を介して電話に出た相手に伝える。この音声案内は、迎えの者であるか否かを確認するための特定情報を含む。
(7)迎え確認
連絡先への通知後、乗客支援装置11は、ステップS12において、連絡先から迎えが来たか否かを判定する。例えば、制御ユニット40の周辺状況判定部52は、監視映像記憶部61から周辺監視映像データを読み込み、車両ドア付近に人物が近づいてきたか否かを判定する。そして、車両ドア付近に人物が近づいてきたならば、周辺状況判定部52は、周囲マイク13によりピックアップした当該人物の会話内容情報を会話内容記憶部63より読み出し、それに前記特定情報が含まれているか否かを判定する。あるいは、周辺状況判定部52は、監視映像記憶部61から周辺監視映像データにより当該人物が電話通話を行っていて、且つ、通信装置17によるコールバック受けの通知を受けたか否かを判定する。つまり、周辺状況判定部52は、前記人物が特定情報を提示したか否かを判定する。このように、特定情報の呈示の有無により、連絡先からの迎えが来たか否かを判定し、その結果を、周辺状況記憶部67に記憶させる。
連絡先への通知後、乗客支援装置11は、ステップS12において、連絡先から迎えが来たか否かを判定する。例えば、制御ユニット40の周辺状況判定部52は、監視映像記憶部61から周辺監視映像データを読み込み、車両ドア付近に人物が近づいてきたか否かを判定する。そして、車両ドア付近に人物が近づいてきたならば、周辺状況判定部52は、周囲マイク13によりピックアップした当該人物の会話内容情報を会話内容記憶部63より読み出し、それに前記特定情報が含まれているか否かを判定する。あるいは、周辺状況判定部52は、監視映像記憶部61から周辺監視映像データにより当該人物が電話通話を行っていて、且つ、通信装置17によるコールバック受けの通知を受けたか否かを判定する。つまり、周辺状況判定部52は、前記人物が特定情報を提示したか否かを判定する。このように、特定情報の呈示の有無により、連絡先からの迎えが来たか否かを判定し、その結果を、周辺状況記憶部67に記憶させる。
こうして、乗客支援装置11は、連絡先からの迎えが来るのを待つ。
なお、車両1に、車両外の人物に案内情報を音声や表示により出力する案内手段を設け、周辺状況判定部52は、車両ドア付近に人物が近づいてきたとき、前記特定情報の提示を促す案内情報を出力するようにしてもよい。また、特定情報の入力は、音声に限るものではなく、例えばドアにテンキーなどのキー入力部を設けておき、それによって特定情報を入力させるようにしてもよい。
(8)乗客降車
迎えが来たことが確認できたならば、乗客支援装置11は、ステップS13において、制御ユニット40のドアロック制御部53によりドアロック装置15を制御して、ドアの施錠を解除する。
迎えが来たことが確認できたならば、乗客支援装置11は、ステップS13において、制御ユニット40のドアロック制御部53によりドアロック装置15を制御して、ドアの施錠を解除する。
その後の運賃支払い機能は、完全自動運転を行うタクシーが備えるタクシーシステムの機能であるので、ここでは説明を省略する。
(効果)
例えば、乗客が泥酔していて眠ってしまい、その乗客の自宅等の目的地に到着しても、なかなか起きず、運転者が乗客を揺するなどして起こすことがある。運転者が存在する手動運転のタクシーであれば、このように眠り込んだ乗客に対処することができるが、完全自動運転モードによって運行しているタクシーでは、対処が難しい。
そこで、この発明の第1実施形態では、完全自動運転モードにより運行しているタクシーにおいて、乗客の目的地に加えて連絡先を取得しておき、目的地に到着した際に、乗客が正常に降車可能な状態で無い場合、例えば寝ている場合には、まず、乗客に対して音や振動等の刺激を与えることで乗客の覚醒を促し、それでも寝ている場合には、前記取得した連絡先に通知して迎えを依頼する。よって、運転者が存在しない自動運転車両の乗客が降車不能状態となったときに乗客を支援することが可能となる。
例えば、乗客が泥酔していて眠ってしまい、その乗客の自宅等の目的地に到着しても、なかなか起きず、運転者が乗客を揺するなどして起こすことがある。運転者が存在する手動運転のタクシーであれば、このように眠り込んだ乗客に対処することができるが、完全自動運転モードによって運行しているタクシーでは、対処が難しい。
そこで、この発明の第1実施形態では、完全自動運転モードにより運行しているタクシーにおいて、乗客の目的地に加えて連絡先を取得しておき、目的地に到着した際に、乗客が正常に降車可能な状態で無い場合、例えば寝ている場合には、まず、乗客に対して音や振動等の刺激を与えることで乗客の覚醒を促し、それでも寝ている場合には、前記取得した連絡先に通知して迎えを依頼する。よって、運転者が存在しない自動運転車両の乗客が降車不能状態となったときに乗客を支援することが可能となる。
また、この発明の第1実施形態では、迎えの者が来たことを確認した上で、ドア施錠を解除するようにしている。特に、乗客が覚醒していない状態のとき、無制限にドアの施錠を解除してしまうと、乗客が窃盗などの事件に巻き込まれる虞があるが、この第1実施形態では、迎えが来るまではドアは施錠されたままであるため、そのような虞が無い。そして、迎えが来て始めてドアの施錠を解除して、迎えの者に乗客を託すことができる。よって、乗客を安全且つ確実に目的地に届けることが可能となる。
また、特定情報の提示により迎えの者か否かを確認した上でドアの施錠を解除するので、乗客の安全を確実に確保することができる。
[第2実施形態]
(構成)
図4は、この発明の第2実施形態に係る乗客支援装置11の機能構成を示すブロック図である。ここで、図面の簡略化のために、図2に示した第1実施形態に係る乗客支援装置11と同様の構成については、その一部の図示を省略している。
(構成)
図4は、この発明の第2実施形態に係る乗客支援装置11の機能構成を示すブロック図である。ここで、図面の簡略化のために、図2に示した第1実施形態に係る乗客支援装置11と同様の構成については、その一部の図示を省略している。
この第2実施形態に係る乗客支援装置11も、第1実施形態と同様、入出力インタフェースユニット20と、制御ユニット40と、記憶ユニット60と、を備えている。
記憶ユニット60は、本実施形態を実施するために使用する記憶領域として、第1実施形態のそれらと同様の、監視映像記憶部61、会話音声記憶部62、会話内容記憶部63、案内情報記憶部64、目的地及び連絡先記憶部65、乗客状態記憶部66、及び、周辺状況記憶部67を備えている。そしてさらに、この第2実施形態では、記憶ユニット60は、所定連絡先記憶部68と指定移動先記憶部69とを備えている。ここで、所定連絡先記憶部68は、連絡先への通知不可時等に使用する所定連絡先を記憶している。この所定連絡先としては、例えばタクシー指令センターのネットワークアドレスや電話番号でもよいし、タクシー会社が契約している警備施設の電話番号でもよい。さらには、所定連絡先は、警察や救急などの緊急通報用電話番号でもよい。指定移動先記憶部69は、タクシー指令センターや、警備施設又は緊急通報先のオペレータから指示された移動先を記憶する。
また、制御ユニット40は、本実施形態を実施するために必要な制御機能として、第1実施形態のそれらと同様の、映像取得部41、音声取得部42、音声認識部43、案内情報出力部44、目的地及び連絡先取得部45、自動運転判定部47、到着判定部48、乗客状態判定部49、覚醒支援部50、通知出力部51、周辺状況判定部52、及び、ドアロック制御部53を備えている。また、第1実施形態における目的地出力部46の代わりに、目的地及び移動先出力部54を有している。そしてさらに、この第2実施形態では、制御ユニット40は、指定移動先取得部55を備えている。
ここで、目的地及び移動先出力部54は、乗客の目的地又は指定の移動先を自動運転制御装置4へ出力する機能を有している。目的地及び移動先出力部54は、目的地及び連絡先記憶部65に記憶された目的地の情報を読み出して、自動運転制御装置4へ出力する。また、目的地及び移動先出力部54は、指定移動先記憶部69に記憶された指定の移動先の情報を読み出して、自動運転制御装置4へ出力する。
指定移動先取得部55は、通信装置17によりタクシー指令センターから受信した移動先の情報を入出力インタフェースユニット20を介して取り込み、それを指定の移動先の情報として指定移動先記憶部69に記憶させる。また、指定移動先取得部55は、会話内容記憶部63に記憶された警備施設又は緊急通報先のオペレータとの会話内容を読み出して、移動先を取得し、指定の移動先の情報として指定移動先記憶部69に記憶させてもよい。
なお、この第2実施形態においては、案内情報記憶部64は、警備施設又は緊急通報先のオペレータに移動先を問い合わせる案内情報を記憶している。そして、通知出力部51は、この案内情報を案内情報記憶部64から読み出して通信装置17に出力することで、通信装置17により電話に出た警備施設又は緊急通報先のオペレータに移動先を問い合わせる音声案内を行う機能を有している。
また、乗客状態判定部49は、監視映像記憶部61から乗客監視映像データを読み込んで乗客が降車可能状態か否か判定するだけでなく、乗客が苦しんでいるかどうか、血を流しているかどうか等により、乗客に刺激を与えても良い覚醒動作許可状態であるか否(覚醒動作不許可状態)かを判定する処理を行う機能を備える。
(動作)
次に、前述したように構成された乗客支援装置11の動作を説明する。図5はその全体の乗客支援の手順と支援内容を示すフローチャートである。
次に、前述したように構成された乗客支援装置11の動作を説明する。図5はその全体の乗客支援の手順と支援内容を示すフローチャートである。
ここで、(1)乗客乗車、(2)目的地、連絡先取得、(3)自動運転、及び(4)乗客状態判定におけるステップS1乃至ステップS7の処理については、第1実施形態と同様である。
(5)覚醒動作
ステップS7において乗客が降車不能状態にあると判定された場合、乗客支援装置11は、乗客の覚醒動作を実施する前に、ステップS21において、覚醒動作を行っても良いか否かを確認する。例えば、制御ユニット40の覚醒支援部50は、乗客状態記憶部66に記憶された乗客の状態判定結果を読み出し、全ての乗客が降車不能状態である場合、更に、各乗客が覚醒動作許可状態であるか否かを判定する。
ステップS7において乗客が降車不能状態にあると判定された場合、乗客支援装置11は、乗客の覚醒動作を実施する前に、ステップS21において、覚醒動作を行っても良いか否かを確認する。例えば、制御ユニット40の覚醒支援部50は、乗客状態記憶部66に記憶された乗客の状態判定結果を読み出し、全ての乗客が降車不能状態である場合、更に、各乗客が覚醒動作許可状態であるか否かを判定する。
ここで、全ての乗客が覚醒動作許可状態であれば、覚醒支援部50は、ステップS8において、覚醒支援情報を刺激出力装置16に出力して、刺激出力装置16から全ての乗客へ刺激を与え、各乗客の覚醒を促すことができる。また、少なくとも乗客の一人が覚醒動作不許可状態であれば、覚醒支援部50は、その覚醒動作不許可状態の乗客を除いた各乗客へ刺激出力装置16から刺激を与え、それらの乗客の覚醒を促すことができる。
これに対して、全ての乗客が覚醒動作不許可状態であれば、そのような覚醒動作は行わずに、ステップS11の乗客の連絡先への通知の処理へと進む。
(6)連絡先への通知
この(6)連絡先への通知におけるステップS10の処理については、第1実施形態と同様である。
この(6)連絡先への通知におけるステップS10の処理については、第1実施形態と同様である。
一方、ステップS11の処理については、この第2実施形態では、ステップS11A、ステップS11B及びステップS11Cに細分化されている。
まず、ステップS11Aにおいて、制御ユニット40の通知出力部51は、例えば、乗客状態記憶部66に記憶された乗客の状態判定結果を読み出し、全ての乗客が降車不能状態のままであるならば、目的地及び連絡先記憶部65に記憶されている乗客の連絡先の電話番号を読み出して、通信装置17により、その連絡先に電話をかける。その後、ステップS11Bにおいて、通知出力部51は、会話内容記憶部63に記憶された連絡先の応答者との会話内容を読み出して、連絡先から応答があったか否かを確認する。そして、応答があったことが確認できたならば、通知出力部51は、ステップS11Cにおいて、案内情報記憶部64に記憶された迎えを依頼する音声案内等の案内情報を読み出して、これを通信装置17を介して電話に出た応答者に伝える。
その後の(7)迎え確認及び(8)乗客降車におけるステップS12及びステップS13の処理については、第1実施形態と同様である。
(9)移動先への移動
前記ステップS11Bにおいて連絡先から応答が無かった場合、あるいは、前記ステップS12において所定時間内に迎えが来たことを確認できない場合には、乗客支援装置11は、移動先へ移動する。なお、前記ステップS12における連絡先から迎えが来たか否かの判定は、前記ステップS11Cにおける迎え依頼に対する拒否応答か有ったか否かの判定も加えても良い。これにより、所定時間迎えが来るのを待つこと無く、直ちに移動先への移動処理に移行することが可能となる。
前記ステップS11Bにおいて連絡先から応答が無かった場合、あるいは、前記ステップS12において所定時間内に迎えが来たことを確認できない場合には、乗客支援装置11は、移動先へ移動する。なお、前記ステップS12における連絡先から迎えが来たか否かの判定は、前記ステップS11Cにおける迎え依頼に対する拒否応答か有ったか否かの判定も加えても良い。これにより、所定時間迎えが来るのを待つこと無く、直ちに移動先への移動処理に移行することが可能となる。
移動先へ移動するために、例えば、制御ユニット40の通知出力部51は、ステップS22において、所定連絡先記憶部68に記憶されている所定連絡先、例えばタクシー指令センターのネットワークアドレス、を読み出して、通信装置17により、タクシー指令センターに現在位置と現在状況の通知を行う。そして、制御ユニット40の指定移動先取得部55は、ステップS23において、通信装置17により、タクシー指令センターから、最寄りの交番や警察署、病院などの移動先の情報を取得して、指定移動先記憶部69に記憶させる。
あるいは、通知出力部51は、ステップS22において、警備施設又は緊急通報先に通知を行うようにしても良い。この場合、通知出力部51は、所定連絡先記憶部68に記憶されている所定連絡先としての警備施設の電話番号又は緊急通報用電話番号を読み出して、通信装置17により、その電話番号に電話をかける。そして、乗客の状態に応じた案内情報を案内情報記憶部64から読み出して、現在位置と共に案内情報を警備施設又は緊急通報先のオペレータに通知する。その後、指定移動先取得部55は、ステップS23において、会話内容記憶部63に記憶された、通信装置17を介して取得した警備施設又は緊急通報先のオペレータとの会話内容の情報より、移動先として指定された交番や警察署、病院などを取得して、指定移動先記憶部69に記憶させる。
なお、既存のナビゲーションシステムを利用することで、指定移動先の名称、住所及び電話番号の内の一つの情報から、残りの二つの情報を取得することが可能である。
こうして移動先が取得されたならば、ステップS24において、乗客支援装置11は、自動運転制御装置4に指定の移動先へ自動運転走行を開始するよう指示する。例えば、制御ユニット40の目的地及び移動先出力部54は、指定移動先記憶部69より指定の移動先の住所の情報を読み出して、自動運転制御装置4に出力する。自動運転制御装置4は、この出力された移動先の情報に従って、その移動先の住所への自動運転を行う。
その後、ステップS25において、乗客支援装置11は、指定の移動先へ到着するのを待つ。例えば、制御ユニット40は、自動運転判定部47の制御の下、指定の移動先へ到着したか否かを判定し、その移動先へ到着するまで、このステップを繰り返す。
そして、指定の移動先に到着したならば、ステップS26において、乗客支援装置11は、指定の移動先に到着したことをその移動先へ通知する。例えば、制御ユニット40の通知出力部51は、指定移動先記憶部69に記憶されている指定移動先の電話番号を読み出して、通信装置17により、その電話番号に電話をかけ、案内情報記憶部64から到着したことを案内する案内情報を読み出して、通知する。
そして、前記ステップS13に処理を進めて、乗客支援装置11は、制御ユニット40のドアロック制御部53によりドアロック装置15を制御して、ドアの施錠を解除する。なお、この指定移動先への移動時にも、目的地への移動時と同様、迎えを確認した上で、ドアの施錠を解除するようにしてもよい。
その後の運賃支払い機能は、完全自動運転を行うタクシーが備えるタクシーシステムの機能であり、ここでは詳述しないが、カード払いであればカード取り忘れ警告の出力を行い、現金払いの場合には請求書及び支払い方法のプリントアウト出力を行うこととなる。
(効果)
以上詳述したように、この発明の第2実施形態では、前記第1実施形態と同様の効果を奏することに加えて、乗客の状態が刺激を与えても良い状態であるか確認した上で刺激を与えるようにしているので、不適切な状況で乗客に刺激を与えることはなく、乗客の安全を図ることができる。
以上詳述したように、この発明の第2実施形態では、前記第1実施形態と同様の効果を奏することに加えて、乗客の状態が刺激を与えても良い状態であるか確認した上で刺激を与えるようにしているので、不適切な状況で乗客に刺激を与えることはなく、乗客の安全を図ることができる。
また、連絡先からの迎えが来ない場合、あるいは、連絡先に繋がらないときや迎えを拒否された場合に、警察や病院などの決められた移動先へ移動して乗客を警察官や医師に託すことができるので、乗客の安全を損なうこと無く降車させることができ、その後に営業を続けることが可能になる。
さらに、タクシー指令センターと通信して、又は、警備施設の電話番号や緊急通報用電話番号に通報して、移動先の指示を受け、その指示された移動先へ移動することができるので、距離や対応可能性等を考慮した適切な移動先へ乗客を届けることができる。
[第3実施形態]
(構成)
この発明の第3実施形態に係る乗客支援装置11の構成は、前述の第1実施形態に係る乗客支援装置11における図2のそれと同様であるので、その図示は省略する。
(構成)
この発明の第3実施形態に係る乗客支援装置11の構成は、前述の第1実施形態に係る乗客支援装置11における図2のそれと同様であるので、その図示は省略する。
この第3実施形態では、到着判定部48は、車両1が乗客の目的地に到着したか否かを判定することに加えて、車両1がその目的地の近傍に到着したか否かをも判定する機能を有している。ここで、目的地の近傍とは、目的地から例えば100mなどの所定距離範囲を意味する。あるいは、目的地までの距離や道路状況によって計算される到着予定時間までの時間が例えば1分などの所定時間範囲であってもよい。なお、この目的地近傍は、このような目的地まで100mや1分といった値に限定するものではない。これは、多数の被検体についてのデータのディープラーニングによって求められた、あるいは、学術的又は統計学的に確立された、乗客の状態が変化しない距離や時間に設定されればよい。この目的地近傍を示す値は、到着判定部48内に設けた図示しないメモリに記憶しておいてもよいし、例えば目的地及び連絡先記憶部65に予め記憶させておいてもよい。
(動作)
次に、このように構成された乗客支援装置11の動作を説明する。図6はその全体の乗客支援の手順と支援内容を示すフローチャートである。以下、第1実施形態と異なる部分のみを説明する。
次に、このように構成された乗客支援装置11の動作を説明する。図6はその全体の乗客支援の手順と支援内容を示すフローチャートである。以下、第1実施形態と異なる部分のみを説明する。
この第3実施形態では、前述の第1実施形態における前記ステップS4において、到着判定部48により、未だ車両1が目的地に到着していないと判定されたとき、ステップS14において、到着判定部48により、更に、車両1が目的地の近傍に到着したか否かを判定する。ここで、目的地近傍にも到着していないと判定された場合には、乗客支援装置11は、処理を前記ステップS4に戻す。
これに対し、到着判定部48により、車両1が目的地の近傍に到着したと判定された場合には、乗客支援装置11は、処理をステップS6に進める。これにより、制御ユニット40の乗客状態判定部49は、監視映像記憶部61から乗客監視映像データを読み込み、乗客監視映像データに基づいて、全ての乗客の状態を判定し、判定結果を表す情報を乗客状態記憶部66に記憶させる。その後、乗客支援装置11は、処理を前記ステップS4に戻す。
そして、目的地に到着したならば、ステップS5において、乗客支援装置11は、目的地に到着したことを乗客に告知する。その後、この第3実施形態では、ステップS7に処理を進めて、乗客状態判定部49の判定結果が降車可能状態となっているか否かを判定する。このステップS7からステップS13は、前述の第1実施形態と同様である。
つまり、この第3実施形態では、目的地に到着する前の目的地近傍に到着したときに乗客の状態を取得しておき、目的地に到着したならば、その取得した乗客状態に応じた動作を行うものである。これは、目的地近傍として、車両1が目的地に到着したときも、目的地近傍で取得した乗客状態が維持されている確率が高い値が設定されていることによる。
(効果)
以上詳述したように、この発明の第3実施形態では、目的地到着前つまり事前に乗客の状態を取得しておくことで、目的地に到着したならば直ちに乗客状態に応じた動作に移ることができ、目的地到着時点からこの動作へ移行するまでの時間短縮が可能となる。
以上詳述したように、この発明の第3実施形態では、目的地到着前つまり事前に乗客の状態を取得しておくことで、目的地に到着したならば直ちに乗客状態に応じた動作に移ることができ、目的地到着時点からこの動作へ移行するまでの時間短縮が可能となる。
なお、この第3実施形態のような乗客状態の事前は、前述した第2実施形態においても同様に適用可能なことは勿論である。
[第4実施形態]
(構成)
この発明の第4実施形態に係る乗客支援装置11の構成は、前述の第1実施形態に係る乗客支援装置11における図2のそれと同様であるので、その図示は省略する。
(構成)
この発明の第4実施形態に係る乗客支援装置11の構成は、前述の第1実施形態に係る乗客支援装置11における図2のそれと同様であるので、その図示は省略する。
この第4実施形態では、前述の第3実施形態と同様に、到着判定部48は、車両1が乗客の目的地に到着したか否かを判定する機能と、車両1がその目的地の近傍に到着したか否かを判定する機能とを有している。
(動作)
次に、このように構成された乗客支援装置11の動作を説明する。図7はその全体の乗客支援の手順と支援内容を示すフローチャートである。以下、第1実施形態と異なる部分のみを説明する。
次に、このように構成された乗客支援装置11の動作を説明する。図7はその全体の乗客支援の手順と支援内容を示すフローチャートである。以下、第1実施形態と異なる部分のみを説明する。
前述の第1実施形態における前記ステップS3において自動運転制御装置4に乗客の目的地への自動運転走行の開始を指示した後、この第4実施形態では、ステップS14において、乗客支援装置11は、目的地の近傍へ到着するのを待つ。例えば、制御ユニット40は、到着判定部48により、車両1が目的地の近傍に到着したか否かを判定し、目的地近傍に到着したと判定されるまで、このステップを繰り返す。
そして、到着判定部48により、車両1が目的地の近傍に到着したと判定された場合には、乗客支援装置11は、ステップS6において、乗客状態判定部49によって全ての乗客の状態を判定し、判定結果を表す情報を乗客状態記憶部66に記憶させる。
その後、乗客支援装置11は、ステップS7において、乗客状態記憶部66に記憶された判定結果を表す情報が降車可能状態となっているか否かを判定する。ここで、乗客状態判定部49の判定結果が降車可能状態となっていれば、乗客支援装置11は、ステップS4において、例えば、到着判定部48により、車両1が目的地に到着したか否かを判定する。そして、まだ目的地に到着していないと判定された場合には、乗客支援装置11は、処理をステップS6に戻す。これに対して、ステップS4において、目的地に到着したと判定された場合には、乗客支援装置11は、ステップS5にいて目的地に到着したことを乗客に告知した後、ステップS13に処理を進めることで、ドアの施錠を解除する。
また、ステップS7において、乗客の状態が降車不能状態となっていると判定された場合には、前述の第1実施形態と同様のステップS8乃至ステップS13の処理が行われる。但し、ステップS10において、乗客状態判定部49の判定結果が降車可能状態であると判定された場合には、乗客支援装置11は、処理をステップS4に進める。
つまり、この第4実施形態では、目的地に到着する前の目的地近傍に到着したときに乗客の状態を取得し、それが降車不能状態であれば、目的地に到着する前に覚醒動作を行うものである。
(効果)
以上詳述したように、この発明の第4実施形態では、目的地到着前つまり事前に乗客の状態を取得し、乗客の状態が降車不能状態であれば、目的地に到着する以前に覚醒動作に移ることで、目的地に到着した時点では乗客が覚醒している確率を向上させることができる。
以上詳述したように、この発明の第4実施形態では、目的地到着前つまり事前に乗客の状態を取得し、乗客の状態が降車不能状態であれば、目的地に到着する以前に覚醒動作に移ることで、目的地に到着した時点では乗客が覚醒している確率を向上させることができる。
なお、この第4実施形態のような乗客状態の事前は、前述した第2実施形態においても同様に適用可能なことは勿論である。
[他の実施形態]
前記第1乃至第4実施形態では、乗客が降車可能な状態にあるか否かの乗客状態判定は、目的地に到着した際又は目的地近傍に到着した際に行うものとしている。しかし、この判定は、乗客が車両1に乗車している間は常に行うようにしてもよい。
前記第1乃至第4実施形態では、乗客が降車可能な状態にあるか否かの乗客状態判定は、目的地に到着した際又は目的地近傍に到着した際に行うものとしている。しかし、この判定は、乗客が車両1に乗車している間は常に行うようにしてもよい。
また、前記第1乃至第4実施形態では、乗客状態検出センサが客室カメラ12で構成され、客室カメラ12により得られる乗客の顔を含む映像信号に基づいて乗客の状態を判定する場合を例にとって説明した。しかし、乗客状態検出センサは、客室カメラ12に限らず、乗客の生体情報を取得するセンサ生体センサで構成し、生体センサにより得られる生体信号、例えば脈波センサ又は心拍センサにより検出される乗客の脈波信号又は心拍信号や、圧力センサにより検出される横隔膜の上下動を表す信号に基づいて、乗客の状態を判定するようにしてもよい。
また、車両1として、完全自動運転を行うタクシーを例に説明したが、完全自動運転の自家用車であっても同様に適用可能なことは勿論である。この場合、自宅の連絡先は予め登録しておくことができるので、目的地が自宅である場合には、前記第1及び第2実施形態では、前記ステップS2において連絡先を取得しなくてもよくなる。
その他、車両の種類、自動運転制御装置の機能、乗客支援装置の乗客支援の手順と支援内容等についても、この発明の要旨を逸脱しない範囲で種々変形して実施可能である。
要するにこの発明は、上記実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。また、各実施形態は可能な限り適宜組み合わせて実施してもよく、その場合組み合わせた効果が得られる。更に、上記実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適当な組み合わせにより種々の発明が抽出され得る。
上記の実施形態の一部又は全部は、以下の付記のようにも記載され得るが、以下には限られるものではない。
(付記1)
自動運転制御装置を有する自動運転車両に装着され、前記自動運転車両に乗車した乗客を支援する乗客支援装置であって、ハードウェアプロセッサと、メモリとを有し、
前記ハードウェアプロセッサは、
前記乗客の目的地と連絡先とを取得して前記メモリに記憶し、
前記乗客の状態を検出する乗客状態検出センサのセンシング結果に基づいて、前記乗客が降車可能な状態にあるか否かを判定して、その判定結果を前記メモリに記憶し、
前記メモリに記憶された前記判定結果が、前記乗客が降車不能な状態にあるという判定結果であるとき、前記乗客の覚醒動作を行い、
前記覚醒動作後、再度、前記乗客の状態を検出する乗客状態検出センサのセンシング結果に基づいて、前記乗客が降車可能な状態にあるか否かを判定して、その判定結果を前記メモリに記憶し、
前記メモリに記憶された前記判定結果が、未だ前記乗客が降車不能な状態にあるという判定結果である場合、前記メモリに記憶した前記連絡先へ通知する、乗客支援装置。
(付記2)
自動運転制御装置を有する自動運転車両に装着され、前記自動運転車両に乗車した乗客を支援する装置が実行する乗客支援方法であって、
ハードウェアプロセッサを用いて、前記乗客の目的地と連絡先とを取得してメモリに記憶し、
前記ハードウェアプロセッサを用いて、前記乗客の状態を検出する乗客状態検出センサのセンシング結果に基づいて、前記乗客が降車可能な状態にあるか否かを判定して、その判定結果を前記メモリに記憶し、
前記ハードウェアプロセッサを用いて、前記メモリに記憶された前記判定結果が、前記乗客が降車不能な状態にあるという判定結果であるとき、前記乗客の覚醒動作を行い、
前記ハードウェアプロセッサを用いて、前記覚醒動作後、再度、前記乗客の状態を検出する乗客状態検出センサのセンシング結果に基づいて、前記乗客が降車可能な状態にあるか否かを判定して、その判定結果を前記メモリに記憶し、
前記ハードウェアプロセッサを用いて、前記メモリに記憶された前記判定結果が、未だ前記乗客が降車不能な状態にあるという判定結果である場合、前記メモリに記憶した前記連絡先へ通知する、乗客支援方法。
(付記1)
自動運転制御装置を有する自動運転車両に装着され、前記自動運転車両に乗車した乗客を支援する乗客支援装置であって、ハードウェアプロセッサと、メモリとを有し、
前記ハードウェアプロセッサは、
前記乗客の目的地と連絡先とを取得して前記メモリに記憶し、
前記乗客の状態を検出する乗客状態検出センサのセンシング結果に基づいて、前記乗客が降車可能な状態にあるか否かを判定して、その判定結果を前記メモリに記憶し、
前記メモリに記憶された前記判定結果が、前記乗客が降車不能な状態にあるという判定結果であるとき、前記乗客の覚醒動作を行い、
前記覚醒動作後、再度、前記乗客の状態を検出する乗客状態検出センサのセンシング結果に基づいて、前記乗客が降車可能な状態にあるか否かを判定して、その判定結果を前記メモリに記憶し、
前記メモリに記憶された前記判定結果が、未だ前記乗客が降車不能な状態にあるという判定結果である場合、前記メモリに記憶した前記連絡先へ通知する、乗客支援装置。
(付記2)
自動運転制御装置を有する自動運転車両に装着され、前記自動運転車両に乗車した乗客を支援する装置が実行する乗客支援方法であって、
ハードウェアプロセッサを用いて、前記乗客の目的地と連絡先とを取得してメモリに記憶し、
前記ハードウェアプロセッサを用いて、前記乗客の状態を検出する乗客状態検出センサのセンシング結果に基づいて、前記乗客が降車可能な状態にあるか否かを判定して、その判定結果を前記メモリに記憶し、
前記ハードウェアプロセッサを用いて、前記メモリに記憶された前記判定結果が、前記乗客が降車不能な状態にあるという判定結果であるとき、前記乗客の覚醒動作を行い、
前記ハードウェアプロセッサを用いて、前記覚醒動作後、再度、前記乗客の状態を検出する乗客状態検出センサのセンシング結果に基づいて、前記乗客が降車可能な状態にあるか否かを判定して、その判定結果を前記メモリに記憶し、
前記ハードウェアプロセッサを用いて、前記メモリに記憶された前記判定結果が、未だ前記乗客が降車不能な状態にあるという判定結果である場合、前記メモリに記憶した前記連絡先へ通知する、乗客支援方法。
Claims (9)
- 自動運転制御装置を有する自動運転車両に装着され、前記自動運転車両に乗車した乗客を支援する乗客支援装置であって、
前記乗客の目的地と連絡先とを取得する乗客情報取得部と、
前記乗客の状態を検出する乗客状態検出センサのセンシング結果に基づいて、前記乗客が降車可能な状態にあるか否かを判定する状態判定部と、
前記状態判定部により前記乗客が降車不能な状態にあると判定されたとき、前記乗客の覚醒動作を行う覚醒支援部と、
前記覚醒支援部による前記覚醒動作後も、前記状態判定部により前記乗客が降車不能な状態にあると判定された場合、前記乗客情報取得部によって取得した前記連絡先へ通知する連絡先通知部と、
を具備する乗客支援装置。 - 前記自動運転車両が前記乗客の目的地又はその近傍に到着したか否かを判定する到着判定部をさらに具備し、
前記状態判定部は、前記自動運転車両が前記乗客の目的地又はその近傍に到着したと前記到着判定部が判定したとき、前記乗客が降車可能な状態にあるか否かの判定を行う、請求項1に記載の乗客支援装置。 - 前記連絡先から迎えが来た状況となったか否かを判定する状況判定部と、
少なくとも前記自動運転車両の前記乗客を乗車させた走行開始時に前記乗客の乗降車口のドアを施錠し、前記状態判定部により前記乗客が降車可能な状態にあると判定されたとき、又は、前記状況判定部により前記連絡先から迎えが来た状況となったと判定されたとき、前記ドアの前記施錠を解除するドアロック制御部と、
をさらに具備する、請求項1又は2に記載の乗客支援装置。 - 前記連絡先通知部は、前記連絡先への通知に、迎えの者を確認するための特定情報を含め、
前記状況判定部は、前記特定情報の提示に基づいて、前記連絡先から迎えが来た状況となったと判定する、請求項3に記載の乗客支援装置。 - 前記状況判定部により前記連絡先から迎えが来た状況とならないと判定されたとき、又は、前記連絡先通知部による前記連絡先への通知が行えないとき、前記自動運転制御装置による前記自動運転車両の決められた移動先への移動と、前記移動先への通知を行う移動先移動制御部をさらに具備し、
前記ドアロック制御部は、前記移動先への到着により、前記ドアの前記施錠を解除する、請求項3又は4に記載の乗客支援装置。 - 前記決められた移動先の指定を受ける移動先指定部をさらに具備する、請求項5に記載の乗客支援装置。
- 前記状態判定部は、前記乗客の状態を検出する乗客状態検出センサのセンシング結果に基づいて、前記乗客の状態が、前記覚醒支援部による前記覚醒動作を行っても良い状態か否かをさらに判定し、
前記覚醒支援部は、前記状態判定部が前記乗客の状態が前記覚醒動作を行っても良い状態であると判定したときのみ、前記覚醒動作を行う、請求項1乃至6の何れか一つに記載の乗客支援装置。 - 自動運転制御装置を有する自動運転車両に装着され、前記自動運転車両に乗車した乗客を支援するための装置が実行する乗客支援方法であって、
前記乗客の目的地と連絡先とを取得する乗客情報取得ステップと、
前記乗客の状態を検出する乗客状態検出センサのセンシング結果に基づいて、前記乗客が降車可能な状態にあるか否かを判定する第1の状態判定ステップと、
前記第1の状態判定ステップにおいて前記乗客が降車不能な状態にあると判定されたとき、前記乗客の覚醒動作を行う覚醒支援ステップと、
前記覚醒支援ステップによる前記覚醒動作後、再度、前記乗客状態検出センサのセンシング結果に基づいて、前記乗客が降車可能な状態にあるか否かを判定する第2の状態判定ステップと、
前記第2の状態判定ステップにおいて前記乗客が降車不能な状態にあると判定された場合、前記乗客情報取得ステップにおいて取得した前記連絡先へ通知する連絡先通知ステップと、
を備えている乗客支援方法。 - 請求項1乃至7の何れか一つに記載の乗客支援装置が備える各部の機能をコンピュータに実行させる乗客支援プログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US16/334,798 US20200001892A1 (en) | 2017-03-08 | 2017-07-20 | Passenger assisting apparatus, method, and program |
DE112017007189.5T DE112017007189T8 (de) | 2017-03-08 | 2017-07-20 | Insassenunterstützungsvorrichtung,verfahren und programm |
CN201780055626.4A CN109690609B (zh) | 2017-03-08 | 2017-07-20 | 乘客辅助装置、方法以及程序 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017043754A JP6399129B2 (ja) | 2017-03-08 | 2017-03-08 | 乗客支援装置、方法及びプログラム |
JP2017-043754 | 2017-03-08 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2018163458A1 true WO2018163458A1 (ja) | 2018-09-13 |
Family
ID=63448484
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2017/026352 WO2018163458A1 (ja) | 2017-03-08 | 2017-07-20 | 乗客支援装置、方法及びプログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US20200001892A1 (ja) |
JP (1) | JP6399129B2 (ja) |
CN (1) | CN109690609B (ja) |
DE (1) | DE112017007189T8 (ja) |
WO (1) | WO2018163458A1 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019002262A (ja) * | 2017-06-19 | 2019-01-10 | 佐藤 順 | 携帯端末等の位置情報と連動した車両等のシステム |
EP3706447A1 (en) * | 2019-03-07 | 2020-09-09 | Yazaki Corporation | Passenger support system |
JP2021149354A (ja) * | 2020-03-18 | 2021-09-27 | 本田技研工業株式会社 | 管理装置、管理方法、およびプログラム |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6889905B2 (ja) * | 2017-04-03 | 2021-06-18 | 二葉計器株式会社 | タクシーメータ |
JP6769383B2 (ja) * | 2017-04-13 | 2020-10-14 | トヨタ自動車株式会社 | 自動運転装置、及び通知方法 |
US10795356B2 (en) * | 2017-08-31 | 2020-10-06 | Uatc, Llc | Systems and methods for determining when to release control of an autonomous vehicle |
JP7023767B2 (ja) * | 2018-03-27 | 2022-02-22 | パイオニア株式会社 | 支援装置及び支援処理方法 |
JP6992684B2 (ja) * | 2018-06-14 | 2022-01-13 | トヨタ自動車株式会社 | 情報処理装置および情報処理方法 |
DE102019207641A1 (de) * | 2019-05-24 | 2020-11-26 | Ford Global Technologies, Llc | Verfahren und System zum Anliefern und/oder Abholen von Objekten an einem Bestimmungsort |
KR20200136522A (ko) * | 2019-05-27 | 2020-12-08 | 현대자동차주식회사 | 차량 및 그 제어방법 |
US11105645B2 (en) * | 2019-05-28 | 2021-08-31 | Glazberg, Applebaum & co. | Navigation in vehicles and in autonomous cars |
CN110111536A (zh) * | 2019-06-13 | 2019-08-09 | 广州小鹏汽车科技有限公司 | 一种汽车的目的地提醒方法和装置 |
JP7381230B2 (ja) | 2019-06-28 | 2023-11-15 | トヨタ自動車株式会社 | 自動運転車両の操作装置 |
JP7115440B2 (ja) * | 2019-08-07 | 2022-08-09 | トヨタ自動車株式会社 | リモート運転サービス処理装置 |
JP7405067B2 (ja) * | 2020-12-11 | 2023-12-26 | トヨタ自動車株式会社 | 車両の制御装置、及び車両の制御方法 |
JP7517245B2 (ja) | 2021-05-10 | 2024-07-17 | トヨタ自動車株式会社 | タクシーシステム |
TWI785647B (zh) * | 2021-06-15 | 2022-12-01 | 南開科技大學 | 提高搭乘計費交通工具行車安全的系統及其方法 |
CN113743290A (zh) * | 2021-08-31 | 2021-12-03 | 上海商汤临港智能科技有限公司 | 用于车辆的向紧急呼叫中心发送信息的方法及装置 |
CN113990056B (zh) * | 2021-10-27 | 2022-07-29 | 湖南润伟智能机器有限公司 | 基于安卓的pis系统 |
CN116091075A (zh) * | 2021-11-02 | 2023-05-09 | 博泰车联网(武汉)有限公司 | 自动驾驶车辆的控制系统、方法、设备、存储介质及产品 |
CN114789708B (zh) * | 2022-05-01 | 2024-04-16 | 深圳季连科技有限公司 | 一种基于自动驾驶的开门方法及自动驾驶车辆 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015141053A (ja) * | 2014-01-27 | 2015-08-03 | アイシン・エィ・ダブリュ株式会社 | 自動運転支援システム、自動運転支援方法及びコンピュータプログラム |
JP2015176444A (ja) * | 2014-03-17 | 2015-10-05 | 株式会社ニコン | 自律走行車両 |
JP2016115364A (ja) * | 2014-04-01 | 2016-06-23 | みこらった株式会社 | 配車管理システム及び配車管理サーバ |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008227717A (ja) * | 2007-03-09 | 2008-09-25 | Ntt Docomo Inc | 携帯通信端末装置及び到着情報通知システム |
JP2009025949A (ja) * | 2007-07-18 | 2009-02-05 | Nec Fielding Ltd | 交通機関利用者サービスシステム、交通機関利用者サービス方法、プログラム、及び記録媒体 |
US8704669B2 (en) * | 2010-11-08 | 2014-04-22 | Ford Global Technologies, Llc | Vehicle system reaction to medical conditions |
JP2014167438A (ja) * | 2013-02-28 | 2014-09-11 | Denso Corp | 情報通知装置 |
JP6167690B2 (ja) * | 2013-06-25 | 2017-07-26 | 日産自動車株式会社 | 車室内監視装置 |
CN204557804U (zh) * | 2015-05-11 | 2015-08-12 | 宁波萨瑞通讯有限公司 | 一种车辆到站提醒系统 |
WO2017017784A1 (ja) * | 2015-07-28 | 2017-02-02 | 三菱電機株式会社 | 環境制御装置および空調システム |
US9500489B1 (en) * | 2016-03-03 | 2016-11-22 | Mitac International Corp. | Method of adjusting a navigation route based on detected passenger sleep data and related system |
CN106157678A (zh) * | 2016-07-06 | 2016-11-23 | 京东方科技集团股份有限公司 | 信息提示方法及系统 |
-
2017
- 2017-03-08 JP JP2017043754A patent/JP6399129B2/ja not_active Expired - Fee Related
- 2017-07-20 US US16/334,798 patent/US20200001892A1/en not_active Abandoned
- 2017-07-20 CN CN201780055626.4A patent/CN109690609B/zh active Active
- 2017-07-20 DE DE112017007189.5T patent/DE112017007189T8/de active Active
- 2017-07-20 WO PCT/JP2017/026352 patent/WO2018163458A1/ja active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015141053A (ja) * | 2014-01-27 | 2015-08-03 | アイシン・エィ・ダブリュ株式会社 | 自動運転支援システム、自動運転支援方法及びコンピュータプログラム |
JP2015176444A (ja) * | 2014-03-17 | 2015-10-05 | 株式会社ニコン | 自律走行車両 |
JP2016115364A (ja) * | 2014-04-01 | 2016-06-23 | みこらった株式会社 | 配車管理システム及び配車管理サーバ |
JP2016210417A (ja) * | 2014-04-01 | 2016-12-15 | みこらった株式会社 | 自動車及び自動車用プログラム |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019002262A (ja) * | 2017-06-19 | 2019-01-10 | 佐藤 順 | 携帯端末等の位置情報と連動した車両等のシステム |
EP3706447A1 (en) * | 2019-03-07 | 2020-09-09 | Yazaki Corporation | Passenger support system |
US11198448B2 (en) | 2019-03-07 | 2021-12-14 | Yazaki Corporation | Passenger support system |
JP2021149354A (ja) * | 2020-03-18 | 2021-09-27 | 本田技研工業株式会社 | 管理装置、管理方法、およびプログラム |
JP7460404B2 (ja) | 2020-03-18 | 2024-04-02 | 本田技研工業株式会社 | 管理装置、管理方法、およびプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP6399129B2 (ja) | 2018-10-03 |
CN109690609B (zh) | 2023-06-09 |
US20200001892A1 (en) | 2020-01-02 |
DE112017007189T5 (de) | 2019-11-28 |
CN109690609A (zh) | 2019-04-26 |
JP2018147354A (ja) | 2018-09-20 |
DE112017007189T8 (de) | 2020-01-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6399129B2 (ja) | 乗客支援装置、方法及びプログラム | |
JP6882809B2 (ja) | 自動運転車及び自動運転車の盗難防止プログラム | |
US11180116B2 (en) | Vehicle dispatch management system and vehicle dispatch management server | |
US11383663B2 (en) | Vehicle control method, vehicle control system, vehicle control device, passenger watching-over method, passenger watching-over system, and passenger watching-over device | |
US20230282114A1 (en) | Controlling Autonomous Vehicles to Provide Automated Emergency Response Functions | |
US20180075565A1 (en) | Passenger validation systems and methods | |
US20180074494A1 (en) | Passenger tracking systems and methods | |
JP2022526932A (ja) | 車両ユーザの安全性 | |
JP2010128920A (ja) | 車両用安全装置 | |
JP6977545B2 (ja) | 自動運転システム及び移動体、サーバ | |
JP2015200933A (ja) | 自律走行車両 | |
JP2017191371A (ja) | 自動車及び自動車用プログラム | |
JP2021131793A (ja) | 車両の制御装置及び車両の制御システム | |
JP7013776B2 (ja) | 車両制御装置、車両、及び自動配車方法 | |
JP2023156289A (ja) | 支援装置及び支援処理方法 | |
JP2019114267A (ja) | 自律走行車両 | |
JP6762499B2 (ja) | 自動車及び自動車用プログラム | |
JP7519859B2 (ja) | ユーザ支援装置及びユーザ支援方法 | |
JP7353534B2 (ja) | 救急依頼装置 | |
CN113492867B (zh) | 管理装置、管理方法及存储介质 | |
JP2024130235A (ja) | 車両用周辺監視装置 | |
JP2023163584A (ja) | 無人機、情報処理方法、プログラム及び情報処理システム | |
JP2024114272A (ja) | 車両用緊急通報装置及び車両用緊急通報システム | |
CN113743181A (zh) | 车辆控制系统、车辆控制方法和记录介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 17899924 Country of ref document: EP Kind code of ref document: A1 |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 17899924 Country of ref document: EP Kind code of ref document: A1 |