WO2021130880A1 - 遠隔操作装置、および、遠隔操作方法 - Google Patents

遠隔操作装置、および、遠隔操作方法 Download PDF

Info

Publication number
WO2021130880A1
WO2021130880A1 PCT/JP2019/050746 JP2019050746W WO2021130880A1 WO 2021130880 A1 WO2021130880 A1 WO 2021130880A1 JP 2019050746 W JP2019050746 W JP 2019050746W WO 2021130880 A1 WO2021130880 A1 WO 2021130880A1
Authority
WO
WIPO (PCT)
Prior art keywords
remote control
control device
information
switching
delay time
Prior art date
Application number
PCT/JP2019/050746
Other languages
English (en)
French (fr)
Inventor
久雄 中野
真人 武田
卓矢 河野
晃宏 眞田
Original Assignee
三菱電機株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 三菱電機株式会社 filed Critical 三菱電機株式会社
Priority to DE112019007998.0T priority Critical patent/DE112019007998T5/de
Priority to JP2021566622A priority patent/JP7221420B2/ja
Priority to PCT/JP2019/050746 priority patent/WO2021130880A1/ja
Priority to CN201980103150.6A priority patent/CN114868094A/zh
Priority to US17/781,204 priority patent/US20220413489A1/en
Publication of WO2021130880A1 publication Critical patent/WO2021130880A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0022Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement characterised by the communication link
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0016Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement characterised by the operator's input device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30Services specially adapted for particular environments, situations or purposes
    • H04W4/40Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • H04W4/44Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P] for communication between vehicles and infrastructures, e.g. vehicle-to-cloud [V2C] or vehicle-to-home [V2H]
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0038Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement by providing the operator with simple or augmented images from one or more cameras located onboard the vehicle, e.g. tele-operation

Definitions

  • the present invention relates to a remote control device for remotely controlling a moving body and a remote control method.
  • remote driving remote-controlled driving
  • it is required to maintain a state in which the remote control is normally performed.
  • Patent Document 1 describes that the operator is maneuvering.
  • a remote control system is disclosed in which the operator of a moving body is switched to another operator according to the acquired state.
  • Remote control of the mobile is performed by communication.
  • There is a constant communication delay in communication for remote control of a mobile body but the communication delay may become so large that it is not possible to maintain a state in which remote operation is normally performed.
  • a communication delay for remote control of a mobile body may occur so large that it is not possible to maintain a state in which remote operation is normally performed. , Not considered. Therefore, the above-mentioned problems have not yet been solved by the techniques disclosed in Patent Document 1.
  • the present invention has been made to solve the above-mentioned problems, and the communication delay existing in the communication for remotely controlling the mobile body cannot maintain the state in which the remote operation is normally performed. It is an object of the present invention to provide a remote control device for preventing a state in which remote operation is normally performed due to an increase in size.
  • the remote control device is a remote control device capable of remotely controlling a moving body by communication, and a acquisition unit for acquiring information about another remote control device capable of remotely controlling the moving body by communication, and a moving unit.
  • a delay time detection unit that detects the communication delay time in communication with the body, a delay time determination unit that determines whether or not the communication delay time detected by the delay time detection unit exceeds the delay time determination threshold, and a delay time.
  • the determination unit determines that the communication delay time exceeds the delay time determination threshold
  • the other remote control depends on whether or not the switching determination condition is satisfied based on the information about the other remote control device acquired by the acquisition unit.
  • a switching control unit that outputs switching instruction information for remotely controlling a moving body to a switching destination determination unit that determines a switching destination remote control device from among the operation devices and a switching destination remote control device determined by the switching destination determination unit. It is equipped with.
  • the remote operation is normally performed because the communication delay existing in the communication for performing the remote control of the mobile body is so large that the state in which the remote operation is normally performed cannot be maintained. It is possible to prevent the inability to maintain the damaged state.
  • FIG. 3A is a diagram for explaining information acquired by the acquisition unit of the remote control device in the remote control system according to the first embodiment, and FIG. 3A shows the acquisition unit in a state before switching of the remote control device occurs.
  • 3B is a diagram for explaining the information to be acquired, and FIG. 3B is for explaining the information acquired by the acquisition unit when the remote control device 1 is switched from the state shown in FIG. 3A.
  • FIG. 3C is a diagram for explaining information acquired by the acquisition unit in a state in which the remote control device is switched from the state shown in FIG.
  • FIG. 5 is a diagram showing an image in which the switching destination determination unit determines the switching destination remote control device depending on whether or not the switching determination condition is satisfied in the first embodiment.
  • FIG. 5 is a diagram for explaining an image of an example of a flow until the switching control unit determines that the switching timing has been reached based on the difference information output from the difference calculation unit in the first embodiment. It is a flowchart for demonstrating operation of the remote control device which concerns on Embodiment 1, which operates as a switching source remote control device. It is a flowchart for demonstrating the detailed operation in step ST505 of FIG. 6 in Embodiment 1.
  • FIG. 5 is a diagram showing an image in which the switching destination determination unit determines the switching destination remote control device depending on whether or not the switching determination condition is satisfied in the first embodiment.
  • FIG. 5 is a diagram for explaining an image of an example of a flow until the switching control unit determines that the switching timing has been reached based on the difference information output from the difference calculation unit in the first embodiment. It is a flow
  • FIG. 7 It is a figure for demonstrating an example of the image of the switching when the remote control device which performs the remote control of a vehicle is switched as described in the flowchart of FIG. 7 in Embodiment 1.
  • FIG. It is a flowchart for demonstrating the operation of the remote control device which concerns on Embodiment 1, which operates as a candidate remote control device.
  • FIG. 5 is a diagram showing an example of an image in which the remote control device switches the remote control device that remotely controls the vehicle based on the communication delay time in communication with the vehicle in the first embodiment.
  • 12A and 12B are diagrams showing an example of the hardware configuration of the remote control device according to the first embodiment.
  • FIG. 1 is a diagram showing a configuration example of a remote control system including the remote control device 1 according to the first embodiment.
  • the remote control system is a system in which an operator (hereinafter referred to as a "remote operator") can remotely control the vehicle 2 as needed and provide services such as driving the vehicle 2 to a destination.
  • the remote control system includes a vehicle 2 and a remote control device 1. Although only one vehicle 2 is shown in FIG. 1, this is only an example, and the remote control system includes one or more vehicles 2. Further, although FIG. 1 shows three remote control devices 1, this is only an example.
  • the remote control system includes a plurality of remote control devices 1.
  • a plurality of remote control devices 1 may be connected to one vehicle 2.
  • the plurality of remote control devices 1 are also simply referred to as "remote control devices 1".
  • the remote control device 1 can remotely control the vehicle 2 by communication. Specifically, the remote operator operates the remote control device 1 to remotely control the vehicle 2 and remotely drive the vehicle 2. Since the technology for remotely controlling the vehicle 2 by communication is an existing technology, detailed description thereof will be omitted.
  • the remote control device 1 may remotely control the vehicle 2 by using the existing remote control technology.
  • the remote control device 1 is installed at an appropriate place such as an operation center existing on the traveling path of the vehicle 2. However, there is only one remote control device 1 that remotely controls the vehicle 2 at a time for one vehicle 2.
  • the remote control device 1 installed at the location closest to the current position of the vehicle 2 may be the remote control device 1 that first remotely controls the vehicle 2, or when the vehicle 2 has a occupant.
  • the remote control device 1 in which the passenger remotely controls the vehicle 2 may be designated.
  • the plurality of remote control devices 1 capable of communicating with the vehicle 2 use the remote control device 1 that is remotely controlling the vehicle 2. You can grasp it.
  • the determined remote control device 1 is self-reliant with respect to other remote control devices 1 capable of communicating with the vehicle 2. Notify that the device is remotely controlling the vehicle 2.
  • the other remote control device 1 grasps which remote control device 1 is remotely controlling the vehicle 2 by the notification.
  • the remote control devices 1 are connected to each other via a network.
  • the remote control device 1 determines that a communication delay requiring switching of the remote control device 1 has occurred in the communication between the remote control device 1 and the vehicle 2 during the remote control of the vehicle 2, another remote control is performed. Switching is performed so that the device 1 remotely controls the vehicle 2.
  • the communication delay that requires switching of the remote control device 1 means a communication delay that makes it impossible to maintain a state in which the remote control of the vehicle 2 is normally performed.
  • another remote control device 1 remotely controls the vehicle 2. Specifically, the remote operator of the other remote control device 1 operates the other remote control device 1 to remotely control the vehicle 2.
  • the remote control device 1 that is remotely controlling the vehicle 2 is also referred to as a "switching source remote control device".
  • the vehicle is switched from the "switching source remote control device".
  • One or more remote control devices 1 other than the "switching source remote control device” that can be the remote control device 1 that remotely controls 2 are also referred to as “candidate remote control devices”.
  • the candidate remote control device that switches from the "switching source remote control device” to remotely control the vehicle 2 is also referred to as a "switching destination remote control device”.
  • the switching source remote control device determines which candidate remote control device is used as the switching destination remote control device.
  • FIG. 2 is a diagram showing a configuration example of the remote control device 1 according to the first embodiment.
  • the remote control device 1 has the same configuration in principle regardless of whether it is a switching source remote control device or a candidate remote control device.
  • the remote control device 1 is connected to the vehicle 2 and another remote control device 1 via a communication unit (not shown).
  • the remote control device 1 includes an acquisition unit 11, a delay time detection unit 12, a switching control unit 13, an operation control unit 14, a detection unit 15, and an output unit 16.
  • the acquisition unit 11 includes a device information acquisition unit 111, an operator information acquisition unit 112, a vehicle information acquisition unit 113, a preparation operation information acquisition unit 114, and a switching control information acquisition unit 115.
  • the switching control unit 13 includes a delay time determination unit 131, a switching destination determination unit 132, and a difference calculation unit 133.
  • the detection unit 15 includes a device information detection unit 151 and an operator information detection unit 152.
  • the output unit 16 includes a device information output unit 161, an operator information output unit 162, a switching control information output unit 163, an operation information output unit 164, and a preparation operation information output unit 165.
  • the acquisition unit 11 acquires various types of information. For example, when the remote control device 1 is a switching source remote control device, the acquisition unit 11 acquires information about the candidate remote control device from the candidate remote control device.
  • the information about the candidate remote control device acquired by the acquisition unit 11 when the remote control device 1 is the switching source remote control device is information about the state of the candidate remote control device (hereinafter referred to as "device status information") or Includes information on the status of the remote operator who operates the candidate remote control device (hereinafter referred to as "operator status information").
  • the device information acquisition unit 111 of the acquisition unit 11 acquires the device status information
  • the operator information acquisition unit 112 of the acquisition unit 11 acquires the operator status information.
  • the device status information includes, for example, information on a communication delay time in communication between the remote control device 1 and the vehicle 2, information on whether or not the remote control device 1 is operated by a remote operator, or the remote control device 1 is on standby. Contains information on whether or not it is in a state. In the first embodiment, the remote control device 1 is in the standby state, for example, the remote control device 1 can be operated at any time if there is a remote operator who can operate the remote control device 1. It means that it is in.
  • the device information acquisition unit 111 may acquire the device status information of the candidate remote control device from the candidate remote control device by an appropriate method.
  • the device information acquisition unit 111 requests the candidate remote control device for device status information at a preset cycle, and acquires the device status information output from the candidate remote control device in response to the request. It should be. Further, for example, in the candidate remote control device, when the state of the candidate remote control device changes, the candidate remote control device outputs the device status information, and the device information acquisition unit 111 performs the candidate remote control device. The device status information output by the operating device may be acquired.
  • the candidate remote control device detects the device status information. Specifically, in the candidate remote control device, the device information detection unit 151 of the detection unit 15 detects the device status information. The details of the device information detection unit 151 will be described later.
  • the operator status information acquired by the operator information acquisition unit 112 includes, for example, information on whether or not the remote operator who operates the remote control device 1 is seated toward the remote control device 1, and the remote control device 1. It includes information on whether or not the remote operator who operates the vehicle is qualified to remotely control the vehicle 2, or information on the health condition of the remote operator who operates the remote control device 1.
  • the operator information acquisition unit 112 may acquire the operator state information regarding the remote operator of the candidate remote control device from the candidate remote control device by an appropriate method. For example, the operator information acquisition unit 112 requests the candidate remote control device for the operator status information at a preset cycle, and receives the operator status information output from the candidate remote control device in response to the request. You just have to get it.
  • the candidate remote control device when the state of the remote operator of the candidate remote control device changes, the candidate remote control device outputs the operator status information, and the operator information acquisition unit.
  • the 112 may acquire the operator state information output by the candidate remote control device.
  • the candidate remote control device detects the operator status information.
  • the operator information detection unit 152 of the detection unit 15 detects the operator status information. The details of the operator information detection unit 152 will be described later.
  • the acquisition unit 11 acquires information about the vehicle 2 (hereinafter referred to as "vehicle information") from the vehicle 2.
  • vehicle information includes information on the traveling speed of the vehicle 2, information on the distance between the vehicle and another vehicle 2, information on the current position of the vehicle 2, information on the destination of the vehicle 2, or an image pickup device mounted on the vehicle 2. Includes images of the surrounding area.
  • the vehicle information acquisition unit 113 functions regardless of whether the remote control device 1 is the switching source remote control device or the remote control device 1 is the candidate remote control device.
  • the acquisition unit 11 acquires the preparation operation information from the switching destination remote control device.
  • the preparation operation information acquisition unit 114 of the acquisition unit 11 acquires the preparation operation information from the switching destination remote control device when the remote control device 1 is the switching source remote control device.
  • the preparatory operation information is transmitted by the switching source remote control device in the switching destination remote control device. This is operation information for remote control of the vehicle 2 generated in response to the output switching preparation instruction information. Details of the operation information will be described later.
  • the acquisition unit 11 acquires the switching control information from the switching source remote control device.
  • the switching control information acquisition unit 115 of the acquisition unit 11 acquires the switching control information from the switching source remote control device when the remote control device 1 is the switching destination remote control device.
  • the switching control information is information output from the switching source remote control device when switching the remote control device 1 that remotely controls the vehicle 2.
  • the switching control information includes switching preparation instruction information for instructing the switching destination remote control device to prepare for remote control of the vehicle 2 and operation as the switching source remote control device. This includes switching instruction information that instructs the vehicle 2 to be remotely controlled.
  • FIG. 3 is a diagram for explaining information acquired by the acquisition unit of the remote control device 1 in the remote control system according to the first embodiment.
  • the remote control system includes three remote control devices 1 of a remote control device A (1A), a remote control device B (1B), and a remote control device C (1C).
  • the remote control device A (1A) is the switching source remote control device
  • the remote control device B (1B) and the remote control device C (1C) are candidate remote control devices before the switching occurs.
  • the remote control device 1 is switched from the state shown in FIG.
  • FIG. 3A and the remote control device A (1A), which is the switching source remote control device, switches the remote control device B (1B) to the remote control device. Indicates the determined state.
  • the remote control device C (1C) is not shown for convenience of explanation.
  • FIG. 3C shows a state in which the remote control device 1 has been switched from the state shown in FIG. 3B, and the remote control device B (1B) is remotely controlling the vehicle 2 as the switching source remote control device.
  • the acquisition units 11 of the remote control devices A (1A) to C (1C) each acquire vehicle information from the vehicle 2.
  • the acquisition unit 11 of the remote control device A (1A) receives the device state information and the operator state information from the remote control devices B (1B) and C (1C).
  • the device state information and the operator state information are not shown for convenience of explanation.
  • the acquisition units 11 of the remote control devices A (1A) to C (1C) each acquire vehicle information from the vehicle 2.
  • the acquisition unit 11 of the remote control device B (1B) which is the switching source remote control device, receives device status information and operator status information from the remote control devices A (1A) and C (1C), which are candidate remote control devices.
  • operation information for remotely controlling the vehicle 2 is transmitted from the switching source remote control device that remotely controls the vehicle to the vehicle 2.
  • the acquisition unit 11 outputs various acquired information to the delay time detection unit 12, the switching control unit 13, and the operation control unit 14.
  • the delay time detection unit 12 detects the communication delay time in the communication between the remote control device 1 and the vehicle 2.
  • the delay time detection unit 12 functions regardless of whether the remote control device 1 is the switching source remote control device or the remote control device 1 is the candidate remote control device.
  • the delay time detection unit 12 detects the communication delay time by, for example, unidirectional information transmitted from the vehicle 2 to the remote control device 1. Specifically, for example, the delay time detection unit 12 acquires the time measured by the vehicle 2 from the vehicle 2 (hereinafter referred to as “vehicle time”), and remotely controls the vehicle time and the vehicle time. The difference from the time acquired by the device 1 (hereinafter referred to as “device time”) is defined as the communication delay time.
  • the vehicle time information may be included in the vehicle information and may be acquired by the vehicle information acquisition unit 113.
  • the delay time detection unit 12 uses, for example, the time when the vehicle information acquisition unit 113 acquires the vehicle time as the device time. It is assumed that the remote control device 1 and the vehicle 2 are equipped with a clock capable of measuring a high-definition time such as a GPS (Global Positioning System) time.
  • the method of detecting the communication delay time by the delay time detection unit 12 described above is only an example.
  • the delay time detection unit 12 may be able to detect a communication delay time that makes it impossible to normally perform remote operation of the vehicle 2.
  • the delay time detection unit 12 outputs information regarding the detected communication delay time to the switching control unit 13 and the detection unit 15.
  • the switching control unit 13 determines whether or not to switch the remote control device 1 that remotely controls the vehicle 2, and determines that the switching is performed.
  • the switching destination remote control device is determined from the candidate remote control devices, and the switching control information for remotely controlling the vehicle 2 is output to the determined switching destination remote control device.
  • the communication delay time detected by the delay time determination unit 131 of the switching control unit 13 exceeds the preset threshold value (hereinafter referred to as “delay time determination threshold value”). Judge whether or not.
  • the delay time determination unit 131 determines that the remote control device 1 that remotely controls the vehicle 2 is switched, and determines that the communication delay time is the delay time determination threshold value.
  • Information with a delay indicating that the above is exceeded is output to the switching destination determination unit 132 of the switching control unit 13.
  • the switching destination determination unit 132 determines the switching determination condition based on the information regarding the candidate remote control device acquired by the acquisition unit 11.
  • the switching destination remote control device is determined from the candidate remote control devices depending on whether or not the condition is satisfied.
  • the switching determination condition is set in advance. Hereinafter, the specific contents of the switching determination condition will be described with some examples.
  • the switching determination condition is that the communication delay time between the candidate remote control device and the vehicle 2 is equal to or less than a preset threshold value (hereinafter referred to as “other device delay time determination threshold value”).
  • a value equal to or less than the delay time determination threshold is set in advance for the other device delay time determination threshold.
  • the threshold value for determining the delay time of another device may be the same value as the threshold value for determining the delay time.
  • the switching destination determination unit 132 may determine the communication delay time between the candidate remote control device and the vehicle 2 from the device status information acquired by the device information acquisition unit 111.
  • the switching destination determination unit 132 uses the candidate remote control device whose communication delay time between the candidate remote control device and the vehicle 2 is equal to or less than the threshold for determining the delay time of another device as the switch destination remote control device. decide.
  • the switching determination condition is that the state of the remote operator who operates the candidate remote control device is a state in which the candidate remote control device can be operated, and the communication delay time between the candidate remote control device and the vehicle 2 is different. It is equal to or less than the device delay time determination threshold.
  • the switching destination determination unit 132 may determine the state of the remote operator who operates the candidate remote control device from the operator state information acquired by the operator information acquisition unit 112.
  • the state of the remote operator who operates the candidate remote control device is, for example, the following states (1) to (3) where the candidate remote control device can be operated.
  • a state in which the remote operator is seated toward the candidate remote control device (2) A state in which the remote operator is qualified to remotely control the vehicle 2 (3) A state in which the remote operator is a vehicle A healthy state in which the remote operator can normally remotely control the vehicle 2 A healthy state in which the remote operator can normally remotely control the vehicle 2 is, for example, a state in which the remote operator is not drinking or a state in which the remote operator's arousal level is equal to or higher than a predetermined degree. Or, a state in which the remote operator's proficiency level in remote control of the vehicle 2 is equal to or higher than a predetermined degree.
  • the switching destination determination unit 132 for example, among the candidate remote control devices, the state of the remote operator who operates the candidate remote control device satisfies all of the above (1) to (3), and the candidate remote control device and the vehicle 2
  • the candidate remote control device whose communication delay time with and is equal to or less than the threshold for determining the delay time of another device is determined as the switching destination remote control device.
  • states other than the above (1) to (3) may be defined as states in which the remote operator can operate the candidate remote control device. ..
  • the state in which the remote operator can operate the candidate remote control device is the state of the remote operator, and when the remote operator in that state operates the remote control device 1, the vehicle 2 normally operates remotely. It suffices if the state of the remote operator is defined so that it is performed.
  • FIG. 4 is a diagram showing an image in which the switching destination determination unit 132 determines the switching destination remote control device depending on whether or not the switching determination determination condition is satisfied in the first embodiment.
  • the switching determination condition is assumed to be the above-mentioned ⁇ switching determination condition example 2>.
  • FIG. 4 it is assumed that there are four candidate remote control devices, and the states of the four candidate remote control devices and the states of the remote operator operating the four candidate remote control devices are shown by 301 to 304. There is.
  • the switching destination determination unit 132 determines the switching destination remote control device from the four candidate remote control devices.
  • the remote operator of the candidate remote control device in the state shown in 301, the remote operator of the candidate remote control device is not seated. That is, the remote operator of the candidate remote control device does not satisfy the above (1).
  • the remote operator in the state shown in 302, the remote operator is not qualified to remotely control the vehicle 2. That is, the remote operator of the candidate remote control device does not satisfy the above (2).
  • the remote operator of the candidate remote control device in the state shown in FIG. 4, the remote operator of the candidate remote control device is seated, has the qualification for remote control of the vehicle 2, and is in good health. That is, the remote operator of the candidate remote control device satisfies all of the above (1) to (3).
  • the communication delay time between the candidate remote control device and the vehicle 2 exceeds the threshold value for determining the delay time of another device.
  • the switching destination determination unit 132 refers to the above-mentioned ⁇ switching of the candidate remote control device. It is determined that the determination condition example 2> is not satisfied.
  • the candidate remote control device satisfies all of the above (1) to (3), and the communication delay time between the candidate remote control device and the vehicle 2 is determined as the delay time of another device. It is below the threshold value. That is, the candidate remote control device satisfies the above-mentioned ⁇ Switching determination condition example 2>. Therefore, the switching destination determination unit 132 determines the candidate remote control device in the state shown in 304 as the switching destination remote control device.
  • the switching destination determination unit 132 selects one of the candidate remote control devices that satisfy the switching determination condition according to an appropriate determination condition. You just have to decide. For example, assume that the switching determination condition is the above-mentioned ⁇ switching determination condition example 1>, and there are a plurality of candidate remote control devices whose communication delay time with the vehicle 2 is equal to or less than the threshold value for determining the delay time of another device. In this case, the switching destination determination unit 132 determines, for example, the candidate remote control device having the shortest communication delay time between the candidate remote control device and the vehicle 2 among the candidate remote control devices as the switching destination remote control device.
  • the switching destination determination unit 132 remotely controls the switching destination remote control device among the candidate remote control devices, which is on the route to the destination of the vehicle 2 and exists at the location closest to the current location. You may decide on the device.
  • the switching destination determination unit 132 may acquire information on the route to the destination of the vehicle 2 and the current location from the vehicle information acquisition unit 113. Further, the switching destination determination unit 132 may acquire information regarding the location of the candidate remote control device from the device information acquisition unit 111. It is assumed that the device information acquisition unit 111 has acquired the position information of the candidate remote control device as the device status information.
  • the switching destination determination unit 132 may determine the switching destination remote control device as the candidate remote control device having the longest duration in the state where the communication delay time is equal to or less than the threshold for determining the delay time of another device.
  • the switching destination determination unit 132 may acquire the information regarding the duration from the device information acquisition unit 111. It is assumed that the device information acquisition unit 111 has acquired the information regarding the duration as the device status information. If there is no candidate remote control device that satisfies the switching determination condition, the switching destination determination unit 132 does not determine the switching destination remote control device. In this case, the switching source remote control device generates operation information for stopping the vehicle 2, and outputs the generated operation information to the vehicle 2.
  • the switching destination determination unit 132 When the switching destination remote control device is determined, the switching destination determination unit 132 outputs information regarding the determined switching destination remote control device to the switching control unit 13. When the switching destination determination unit 132 outputs information about the switching destination remote control device, the switching control unit 13 outputs switching preparation instruction information to the switching destination remote control device. At this time, the switching control unit 13 adds vehicle information and information that can identify the switching source remote control device to the switching preparation instruction information, and outputs the information to the switching destination remote control device. The switching destination remote control device acquires switching preparation instruction information and generates preparation operation information. Specifically, in the switching destination remote control device, the operation control unit 14 acquires the switching preparation instruction information and generates the preparation operation information. The details of the operation control unit 14 will be described later. In the first embodiment, the operation information generated by the switching destination remote control device in response to the switching preparation instruction information is referred to as "preparation operation information" as described above.
  • the difference calculation unit 133 of the switching control unit 13 calculates the difference between the operation information generated by the operation control unit 14 in the switching source remote control device and the preparation operation information generated by the switching destination remote control device.
  • the preparation operation information acquisition unit 114 acquires the preparation operation information generated by the switching destination remote control device from the switching destination remote control device.
  • the operation information is information for remotely controlling the vehicle 2.
  • the operation information includes one or more types of information as information for remotely controlling the vehicle 2.
  • the operation information includes information on the speed of the vehicle 2, a control amount of the steering angle, or a control amount of the accelerator opening degree.
  • the operation control unit 14 generates operation information.
  • the operation control unit 14 generates operation information based on the vehicle information acquired by the vehicle information acquisition unit 113, for example.
  • the operation information generated by the operation control unit 14 is output to the vehicle 2, the vehicle 2 performs remote driving based on the operation information.
  • the preparation operation information is generated when the switching control information acquisition unit 115 acquires the switching preparation instruction information from the switching source remote control device in the switching destination remote control device among the operation information generated by the operation control unit 14. Operation information.
  • the preparatory operation information is also information for remotely controlling the vehicle 2, but the preparatory operation information is not actually output to the vehicle 2.
  • the operation control unit 14 adds information that is known to be the preparation operation information to the preparation operation information.
  • the remote control device 1 is the switching destination remote control device
  • the operation control unit 14 generates the preparation operation information based on the vehicle information given to the switching preparation instruction information.
  • the explanation returns to the explanation of the difference calculation unit 133.
  • the operation information and the preparation operation information include information on the steering angle and information on the speed of the vehicle 2.
  • the difference calculation unit 133 calculates the difference between the information on the steering wheel steering angle included in the operation information and the information on the steering wheel steering angle included in the preparation operation information, and the information on the speed of the vehicle 2 and the preparation operation included in the operation information. The difference from the information on the speed of the vehicle 2 included in the information is calculated respectively.
  • the difference calculation unit 133 outputs the calculated information regarding the difference between the operation information and the preparation operation information (hereinafter referred to as “difference information”) to the switching control unit 13.
  • the difference calculation unit 133 includes the difference information between the information on the steering wheel steering angle included in the operation information and the information on the steering wheel steering angle included in the preparation operation information, and the speed of the vehicle 2 included in the operation information.
  • the difference information between the information regarding the information and the information regarding the speed of the vehicle 2 included in the preparation operation information is output to the switching control unit 13.
  • the switching control unit 13 determines whether the difference between the operation information and the preparation operation information is within a preset threshold value (hereinafter referred to as “difference determination threshold value”). Judge whether or not. A value allowed as a difference between the operation information and the preparation operation information is set in the difference determination threshold value.
  • the difference determination threshold is set from, for example, a state in which the vehicle 2 is remotely controlled based on the operation information to a state in which the vehicle 2 is remotely controlled based on the preparation operation information when the vehicle 2 has a passenger. Even if it is switched to, the value of the difference between the operation information and the preparation operation information is set so that the passenger can continue boarding without discomfort.
  • the difference determination threshold is set for each type of information included in the operation information or the preparation operation information. In the above example, the difference determination threshold value is set for each of the information regarding the steering angle and the information regarding the speed of the vehicle 2.
  • the switching control unit 13 determines that the difference between the operation information and the preparation operation information is within the difference determination threshold value, the switching control unit 13 presets a state in which the difference between the operation information and the preparation operation information is within the difference determination threshold value. It is determined whether or not the specified time (hereinafter referred to as "difference continuation determination time") is continued.
  • the switching control unit 13 stores the difference information in a storage unit (not shown) in association with the output date and time of the difference information. ..
  • the switching control unit 13 may refer to the storage unit and determine whether or not the state in which the difference between the operation information and the preparation operation information is within the difference determination threshold value continues for the difference continuation determination time.
  • the switching control unit 13 in the switching source remote control device is in the switching destination remote control device. It is determined that the generated preparatory operation information can be used as the operation information for actually performing the remote control of the vehicle 2. In other words, the switching control unit 13 determines that it is time to switch the remote control device 1 that remotely controls the vehicle 2 from the switching source remote control device to the switching destination remote control device. When the switching control unit 13 determines that the switching timing has come, the switching source remote control device outputs switching instruction information to the switching destination remote control device and outputs the switching instruction information to the operation control unit 14 of the switching source remote control device. To prevent the operation information from being generated.
  • the switching control unit 13 outputs the switching instruction information to the switching destination remote control device via the output unit 16 of the switching source remote control device.
  • the switching control unit 13 adds vehicle information to the switching instruction information.
  • vehicle information is acquired from the vehicle 2, and the operation control unit 14 generates operation information based on the vehicle information.
  • the switching destination remote control device switches to the switching source remote control device, outputs the generated operation information to the vehicle 2, and remotely controls the vehicle 2. In this way, the remote control device 1 is switched.
  • FIG. 5 is for explaining an image of an example of the flow until the switching control unit 13 determines that the switching timing has been reached based on the difference information output from the difference calculation unit 133 in the first embodiment. It is a figure.
  • the operation information and the preparatory operation information include information on the control amount of the steering wheel steering angle and the speed of the vehicle 2, as in the above-described example.
  • 401 and 404 show the temporal transition of the operation information generated by the switching source remote control device and currently used for the remote control of the vehicle 2. Specifically, 401 indicates a temporal transition of the control amount of the steering wheel steering angle, and 404 indicates a temporal transition of information regarding the speed of the vehicle 2.
  • 401 indicates a temporal transition of the control amount of the steering wheel steering angle
  • 404 indicates a temporal transition of information regarding the speed of the vehicle 2.
  • 402 and 405 show the temporal transition of the preparatory operation information generated by the switching destination remote control device and not used for the remote control of the vehicle 2. Specifically, 402 shows the temporal transition of the control amount of the steering wheel steering angle, and 405 shows the temporal transition of the information regarding the speed of the vehicle 2.
  • 403 shows the difference information between the steering wheel steering angle control amount indicated by 401 and the steering wheel steering angle control amount indicated by 402, which is output by the difference calculation unit 133.
  • 406 indicates the difference information between the information regarding the speed of the vehicle 2 shown by 403 and the information regarding the speed of the vehicle 2 shown by 404, which is output by the difference calculation unit 133.
  • the difference between the time indicated by A and B and the control amount of the steering wheel steering angle is within the difference determination threshold value, but the state in which the difference in the control amount of the steering wheel steering angle is within the difference determination threshold value is ,
  • the difference continuation judgment time is not continued.
  • the time indicated by D and E and the difference in speed of the vehicle 2 are within the difference determination threshold value, but the state in which the difference in speed of the vehicle 2 is within the difference determination threshold value is the difference continuation determination time.
  • the difference in the control amount of the steering wheel steering angle becomes the difference judgment threshold value, and the state in which the difference in the control amount of the steering wheel steering angle is within the difference judgment threshold value continues for the difference continuation judgment time. There is.
  • the switching control unit 13 determines that the switching timing has come when the time indicated by C has elapsed.
  • the time indicated by F elapses, the difference in the control amount of the steering wheel steering angle and the difference in the speed of the vehicle 2 are both within the difference determination threshold value and the difference continuation determination time is continued.
  • the switching control unit 13 determines that the switching timing has come when the time indicated by F has elapsed.
  • the operation control unit 14 generates the above-mentioned operation information or the above-mentioned preparation operation information.
  • the operation control unit 14 When the remote control device 1 is the switching source remote control device, the operation control unit 14 generates operation information.
  • the remote control device 1 is the switching destination remote control device, the operation control unit 14 generates the preparation operation information.
  • the operation control unit 14 outputs the generated operation information to the vehicle 2 via the output unit 16.
  • the generated operation information is the preparation operation information
  • the operation control unit 14 outputs the preparation operation information to the switching source remote control device via the output unit 16.
  • the preparatory operation information is generated by the switching destination remote control device when the remote control device 1 is determined as the switching destination remote control device, and the switching instruction information is output from the switching source remote control device. Until, it is not output to the vehicle 2. Since the preparation operation information is not output to the vehicle 2, the vehicle 2 is not actually remotely controlled by the preparation operation information.
  • the detection unit 15 detects information about the remote control device 1.
  • the information regarding the remote control device 1 is, for example, device state information or operator state information.
  • the device information detection unit 151 of the detection unit 15 detects the device status information.
  • the device status information relates to, for example, information on whether or not the remote control device 1 is operated by the remote operator, information on whether or not the remote control device 1 is in the standby state, or communication delay time. Contains information.
  • the device information detection unit 151 remotely controls the candidate remote control device by acquiring information on the handle steering angle from, for example, a handle steering angle sensor (not shown).
  • the device information detection unit 151 may detect that the candidate remote control device is in the standby state by detecting, for example, that the candidate remote control device and the vehicle 2 are connected by communication. Further, the device information detection unit 151 may acquire the communication delay time from the delay time detection unit 12, for example.
  • the above-mentioned method for detecting device status information is only an example. The device information detection unit 151 detects the device status information by an appropriate method.
  • the device information detection unit 151 outputs the device status information to the switching source remote control device via the output unit 16.
  • the device information detection unit 151 may detect the device status information at a preset cycle, or may detect the device status information when the switching source control device requests the device status information. Good. Further, the device information detection unit 151 may output the device status information to the switching source remote control device only when the device status information is changed.
  • the switching source remote control device acquires the device status information output from the device information detection unit 151 of the candidate remote control device. Specifically, in the switching source remote control device, the device information acquisition unit 111 acquires the device status information output by the device information detection unit 151.
  • the operator information detection unit 152 of the detection unit 15 detects the operator status information.
  • the operator state information specifically includes, for example, information on whether or not the remote operator who operates the remote control device 1 is seated toward the remote control device 1, the remote control device 1. It includes information on whether or not the remote operator who operates the vehicle is qualified to remotely control the vehicle 2, or information on the health condition of the remote operator who operates the remote control device 1.
  • the operator information detection unit 152 When the remote control device 1 is a candidate remote control device, the operator information detection unit 152 indicates that the OK button is pressed, for example, whether or not the remote operator is seated toward the candidate remote control device. It may be detected by detecting.
  • the operator information detection unit 152 for example, acquires an image captured by the imaging device (not shown) and extracts the remote operator information extracted from the acquired image, and an authentication server (not shown) in advance. By collating the operator information registered in the above, it is sufficient to detect whether or not the remote operator is qualified to remotely control the vehicle 2.
  • the operator information detection unit 152 may extract information on the remote operator from the captured image by using a known image recognition technique.
  • the operator information detection unit 152 may detect the health state of the operator from, for example, the captured image by using a known image recognition technique.
  • the operator information detection unit 152 determines the arousal level or proficiency level of the remote operator using a known technique (see, for example, Japanese Patent Application Laid-Open No. 2018-077649), and remotely determines the determined arousal level or proficiency level. It may be detected as the health condition of the operator. Further, the operator information detection unit 152 may detect whether or not the remote operator is in a drunken state by using, for example, a known technique.
  • the above-mentioned method for detecting the operator status information is only an example.
  • the operator information detection unit 152 detects the operator status information by an appropriate method.
  • the operator information detection unit 152 outputs the operator status information to the switching source remote control device via the output unit 16.
  • the operator information detection unit 152 may detect the remote operator status information at a preset cycle, for example, or when the operator status information is requested from the switching source control device, the operator status information May be detected. Further, the operator information detection unit 152 may output the operator status information to the switching source remote control device only when the operator status information is changed.
  • the switching source remote control device acquires the operator status information output from the operator information detection unit 152 of the candidate remote control device. Specifically, in the switching source remote control device, the operator information acquisition unit 112 acquires the operator status information output by the operator information detection unit 152.
  • the output unit 16 outputs various information.
  • the device information output unit 161 of the output unit 16 outputs the device status information output by the device information detection unit 151 to the switching source remote control device.
  • the operator information output unit 162 of the output unit 16 outputs the operator status information output by the operator information detection unit 152 to the switching source remote control device.
  • the preparation operation information output unit 165 of the output unit 16 outputs the preparation operation information generated by the operation control unit 14 to the switching source remote control device. Since the preparation operation information is provided with information that can be understood to be the preparation operation information, the preparation operation information output unit 165 uses the information to prepare the operation information output from the operation control unit 14. It can be identified as information.
  • the switching control information output unit 163 of the output unit 16 sends the switching preparation instruction information or the switching instruction information output from the switching control unit 13 to the switching destination remote control device. Output.
  • the operation information output unit 164 of the output unit 16 outputs the operation information generated by the operation control unit 14 to the vehicle 2.
  • FIG. 6 is a flowchart for explaining the operation of the remote control device 1 according to the first embodiment, which operates as the switching source remote control device.
  • the delay time detection unit 12 detects the communication delay time in the communication between the switching source remote control device and the vehicle 2 (step ST501).
  • the delay time detection unit 12 outputs information regarding the detected communication delay time to the switching control unit 13 and the detection unit 15.
  • the acquisition unit 11 acquires various types of information. Specifically, for example, the device information acquisition unit 111 of the acquisition unit 11 acquires the device status information from the candidate remote control device, and the operator information acquisition unit 112 of the acquisition unit 11 acquires the operator status from the candidate remote control device. Acquire information (step ST502). The acquisition unit 11 outputs various acquired information to the delay time detection unit 12, the switching control unit 13, and the operation control unit 14.
  • step ST501 the operation of the remote control device 1 is performed in the order of step ST501 and step ST502, but the operation is not limited to this, and the operation of the remote control device 1 is performed in the order of step ST502 and step ST501. It may be.
  • the delay time determination unit 131 of the switching control unit 13 determines whether or not the communication delay time detected by the delay time detection unit 12 in step ST501 exceeds the delay time determination threshold value (step ST503).
  • the delay time determination unit 131 determines in step ST503 that the communication delay time does not exceed the delay time determination threshold value (when “NO” in step ST503), the operation of the remote control device 1 is the operation of step ST501. The process proceeds to the operation after the step ST501.
  • step ST503 When it is determined in step ST503 that the communication delay time exceeds the delay time determination threshold value (when “YES” in step ST503), the delay time determination unit 131 remotely controls the vehicle 2 by the remote control device 1. It is determined that the switching is performed, and the delay presence information indicating that the communication delay time exceeds the delay time determination threshold value is output to the switching destination determination unit 132 of the switching control unit 13.
  • the switching destination determination unit 132 determines the switching destination remote control device from the candidate remote control devices depending on whether or not the switching determination condition is satisfied based on the information about the candidate remote control device acquired by the acquisition unit 11 in step ST502. (Step ST504).
  • the switching destination determination unit 132 outputs information regarding the determined switching destination remote control device to the switching control unit 13. If there is no candidate remote control device that satisfies the switching determination condition in step ST504 and the switching destination determination unit 132 cannot determine the switching destination remote control device, the operation control unit 14 stops the vehicle 2. The operation information is generated, and the generated operation information is output to the vehicle 2 via the output unit 16. Then, the remote control device 1 ends the operation shown in the flowchart of FIG.
  • the switching control unit 13 switches the remote control device 1 that remotely controls the vehicle 2 to the switching destination remote control device determined by the switching destination determination unit 132 in step ST504 (step ST505). Specifically, the switching control unit 13 outputs switching instruction information for remotely controlling the vehicle 2 to the switching destination remote control device.
  • FIG. 7 is a flowchart for explaining the detailed operation in step ST505 of FIG. 6 in the first embodiment.
  • the switching control unit 13 outputs switching preparation instruction information to the switching destination remote control device ( Step ST601).
  • the difference calculation unit 133 of the switching control unit 13 has operation information generated by the operation control unit 14 of the switching source remote control device and preparatory operation information generated by the switching destination remote control device (see step ST804 in FIG. 9 to be described later). ) Is calculated (step ST602). The difference calculation unit 133 outputs the difference information to the switching control unit 13.
  • the switching control unit 13 keeps the difference between the operation information and the preparation operation information within the difference determination threshold value for the difference continuation determination time. It is determined whether or not the information is provided (step ST603).
  • step ST603 determines in step ST603 that the difference between the operation information and the preparation operation information is within the difference determination threshold value does not continue for the difference continuation determination time (“NO” in step ST603). In the case of "), the operation of the remote control device 1 returns to step ST602, and the operations after step ST602 are performed.
  • step ST603 When it is determined in step ST603 that the difference between the operation information and the preparation operation information is within the difference determination threshold value and the difference continuation determination time continues (when “YES” in step ST603), switching is performed.
  • the control unit 13 determines that it is time to switch the remote control of the vehicle 2 to the switch destination remote control device determined by the switch destination determination unit 132 in step ST504 of FIG.
  • the switching control unit 13 determines that the switching timing has come, it outputs switching instruction information to the switching destination remote control device and prevents the operation control unit 14 of the switching source remote control device from generating operation information. (Step ST604). In this way, the remote control device 1 that remotely controls the vehicle 2 is switched.
  • FIG. 8 is for explaining an example of an image of the switching when the remote control device 1 for remotely controlling the vehicle 2 is switched as described in the flowchart of FIG. 7 in the first embodiment. It is a figure of.
  • the vehicle 2 continues to be based on the operation information output from the switching source remote control device. , Remotely controlled (see 701 in FIG. 8).
  • the state in which the difference is within the difference determination threshold is the continuation of the difference continuation determination time. If it is determined that the vehicle 2 is not, the vehicle 2 is continuously operated remotely based on the operation information output from the switching source remote control device (see 702 in FIG. 8).
  • the vehicle 2 When it is determined in the switching source remote control device that the difference between the operation information and the preparation operation information is within the difference determination threshold value and the difference continuation determination time has continued, the vehicle 2 outputs from the switching destination remote control device. Based on the operation information to be performed, remote control will be performed (see 703 in FIG. 8).
  • FIG. 9 is a flowchart for explaining the operation of the remote control device 1 according to the first embodiment, which operates as a candidate remote control device.
  • the detection unit 15 detects information about the remote control device 1, in other words, the candidate remote control device.
  • the device information detection unit 151 detects the device status information.
  • the operator information detection unit 152 detects the operator status information (step ST801).
  • the output unit 16 outputs the information about the candidate remote control device detected by the detection unit 15 in step ST801 to the switching source remote control device (step ST802).
  • the switching control information acquisition unit 115 determines whether or not the switching preparation instruction information (see step ST601 in FIG. 7) output by the switching source remote control device has been acquired from the switching source remote control device (step ST803).
  • step ST803 when the switching control information acquisition unit 115 has not acquired the switching preparation instruction information (when “NO” in step ST803), the operation of the remote control device 1 returns to step ST801, and the operation of the remote control device 1 returns to step ST801 and thereafter. Do the action.
  • the switching control information acquisition unit 115 acquires the switching preparation instruction information in step ST803 (when “YES” in step ST803), the operation control unit 14 generates the preparation operation information. Then, the operation control unit 14 outputs the generated preparation operation information to the switching source remote control device via the output unit 16 (step ST804).
  • the switching control information acquisition unit 115 determines whether or not the switching instruction information (see step ST601 in FIG. 7) output by the switching source remote control device has been acquired from the switching source remote control device (step ST805).
  • step ST805 when the switching control information acquisition unit 115 has not acquired the switching instruction information (when “NO” in step ST805), the operation of the remote control device 1 returns to step ST804, and the operation after the step ST804. I do.
  • the switching control information acquisition unit 115 acquires the switching instruction information in step ST805 (when “YES” in step ST805), the operation control unit 14 generates the operation information.
  • the operation control unit 14 outputs the generated operation information to the vehicle 2 via the output unit 16 (step ST806).
  • the remote control device 1 operates as the remote control device 1 that remotely controls the vehicle 2 (see FIGS. 6 and 7).
  • FIG. 10 shows the operation after the switching source remote control device determines the switching destination remote control device in the first embodiment until the switching destination remote control device is switched to the remote control device 1 that remotely controls the vehicle 2. It is a sequence diagram which shows an image.
  • FIG. 10 shows the operation of the switching source remote control device described using the flowchart of FIG. 7 and the operation of the switching destination remote control device described in steps ST803 to ST806 of FIG.
  • the switching source remote control device determines the switching destination remote control device
  • the switching source remote control device outputs switching preparation instruction information to the switching destination remote control device (step ST901).
  • the switching destination remote control device generates preparation operation information based on the vehicle information given to the switching preparation instruction information.
  • the switching destination remote control device outputs the generated preparation operation information to the switching source remote control device (step ST902).
  • the preparation operation information is not output to the vehicle 2.
  • the vehicle 2 is remotely controlled by the operation information generated by the switching source remote control device based on the vehicle information acquired from the vehicle 2 (steps ST903 to ST904).
  • the switching source remote control device calculates the difference between the operation information and the preparation operation information acquired from the switching destination remote control device (step ST905). Then, the switching source remote control device determines whether or not the state in which the calculated difference is within the difference determination threshold value continues for the difference continuation determination time. In the switching source remote control device, steps ST902 to ST905 are repeated until the difference calculated in step ST905 is within the difference determination threshold value and the difference continuation determination time continues.
  • the switching source remote control device determines that the state in which the difference calculated in step ST905 is within the difference determination threshold value has continued for the difference continuation determination time, the switching source remote control device outputs switching instruction information to the switching destination remote control device ( Step ST906). At this time, the switching source remote control device stops generating operation information. That is, the operation information is not output from the switching source remote control device to the vehicle 2.
  • the switching destination remote control device When the switching destination remote control device acquires the switching instruction information output in step ST906, the switching destination remote control device generates operation information based on the vehicle information acquired from the vehicle 2. The switching destination remote control device outputs the generated operation information to the vehicle 2 (steps ST907 to ST908). At this time, the switching destination remote control device stops generating the preparation operation information.
  • the switching destination remote control device becomes the remote control device 1 that remotely controls the vehicle 2. In this way, the remote control device 1 that remotely controls the vehicle 2 is switched.
  • the remote control device 1 remotely controls the vehicle 2 when the communication delay time in communication with the vehicle 2 exceeds the delay determination threshold value while the vehicle 2 is being remotely controlled. It is determined that the remote control device 1 is switched. Then, the remote control device 1 determines the switching destination remote control device from the candidate remote control devices depending on whether or not the switching determination condition is satisfied based on the information about the candidate remote control device. The remote control device 1 switches the remote control device 1 that remotely controls the vehicle 2 by outputting switching instruction information to the determined switching destination remote control device. Specifically, when the remote control device 1, in other words, the switching source remote control device determines the switching destination remote control device, first, the switching preparation instruction information is output to the switching destination remote control device.
  • the switching source remote control device acquires the preparation operation information generated in response to the switching preparation instruction information from the switching destination remote control device, outputs the information to the vehicle 2, and the operation information for performing the remote control of the vehicle 2. , Calculate the difference from the preparation operation information. Then, the switching source remote control device sends the switching instruction information to the switching destination remote control device when the difference between the operation information and the preparation operation information is within the difference determination threshold value and the difference continuation determination time continues. Is output, and the switching source remote control device does not generate operation information. The switching destination remote control device that has acquired the switching instruction information generates the operation information and outputs it to the vehicle 2. The switching destination remote control device switches to the remote control device 1 that remotely controls the vehicle 2.
  • the remote control device 1 is a remote control device 1 when the communication delay time in communication with the vehicle 2 exceeds the delay determination threshold during remote control of the vehicle 2. Since it is determined that the switching is performed, it is possible to prevent the state in which the remote operation is normally performed cannot be maintained due to the increase in the communication delay existing in the communication for performing the remote control of the vehicle 2.
  • FIG. 11 is an example of an image in which the remote control device 1 switches the remote control device 1 that remotely controls the vehicle 2 based on the communication delay time in communication with the vehicle 2 in the first embodiment. It is a figure which shows.
  • the remote control device 1 (1001), the remote control device 1 (1002), and the remote control device 1 (1003) are installed on the route on which the vehicle 2 travels.
  • the remote control device 1 (1002) installed at the location closest to the current position of the vehicle 2 is determined to be the remote control device 1 that remotely controls the vehicle 2.
  • the distance between the vehicle 2 and the remote control device 1 (1002) increases.
  • the communication delay time in the communication between the vehicle 2 and the remote control device 1 (1002) also becomes large, and eventually the communication delay time exceeds the delay time determination threshold value.
  • the remote control device 1 (1002) determines that the remote control device 1 is switched. Then, the remote control device 1 (1002) determines the remote control device 1 (1003) as the switching destination remote control device, which has a shorter communication delay time with the vehicle 2 than the remote control device 1 (1002).
  • the remote control device 1 (1003) determined as the switching destination remote control device acquires the switching instruction information from the remote control device 1 (1002), the remote control device 1 (1003) remotely controls the vehicle 2.
  • the remote control device 1 is the switching source remote control device, as described above, when the switching destination remote control device is determined, first, the preparation operation information is sent to the switching destination remote control device. Generate.
  • the switching source remote control device acquires the preparation operation information from the switching destination remote control device, and the state in which the difference between the operation information and the preparation operation information is within the difference judgment threshold is not reached until the difference continuation judgment time continues.
  • the remote control device 1 is switched so that the switch destination remote control device operates as the remote control device 1 that remotely controls the vehicle 2.
  • the remote control device 1 is actually switched and the operation information is output to the vehicle 2 from the remote control device 1 which became the switching source remote control device after the switching, the remote control device 1 is already in the remote control device 1.
  • the remote control device 1 does not need to stop the vehicle 2 until the remote control device 1 which has become the switching source remote control device is operated by the remote operator after the switching.
  • the operation efficiency of the vehicle 2 can be improved.
  • the remote control device 1 can increase the operating rate of the vehicle 2 itself because it is not necessary to stop the vehicle 2. ..
  • the remote control device 1 can make the vehicle 2 arrive at the destination quickly because, for example, the vehicle 2 does not need to be stopped. Further, it is generally estimated that when the vehicle 2 stops or starts, the possibility that an abnormal event occurs is high.
  • the remote control device 1 is the switching source remote control device, it is not necessary to stop the vehicle 2 when switching the remote control device 1 that remotely controls the vehicle 2. Therefore, an abnormal event occurs at the time of the switching. Can be reduced. Further, the remote control device 1 is a vehicle even if the remote control device 1 that remotely controls the vehicle 2 changes, in other words, even if the remote operator who operates the remote control device 1 that remotely controls the vehicle 2 changes. It is possible to reduce the sudden large change in the control amount of 2.
  • the remote control device 1 and the vehicle 2 can be connected by, for example, only wireless communication.
  • the remote control device 1 and the vehicle 2 may be connected by a mobile communication network, a public line network such as the Internet, or a dedicated line or the like, which includes communication including wired communication and wireless communication.
  • the remote control device 1 and the vehicle 2 are connected by communication including wireless communication or wired communication, and the remote control device 1 remotely controls the vehicle 2 by communication.
  • the communication delay in the communication between the remote control device 1 and the vehicle 2 is not only the communication delay in the wireless communication between the remote control device 1 and the vehicle 2, but also the communication in the wired communication between the remote control device 1 and the vehicle 2. Including delay.
  • the remote control device 1 determines that the remote control device 1 is switched when the communication delay time in communication with the vehicle 2 exceeds the delay determination threshold while the vehicle 2 is being remotely controlled.
  • the communication delay existing in the communication for performing the remote control of 2 becomes so large that the state in which the remote operation is normally performed cannot be maintained, so that the state in which the remote operation is normally performed cannot be maintained. Can be prevented.
  • the remote control device 1 is provided with the difference calculation unit 133, but the remote control device 1 is not required to include the difference calculation unit 133. If the remote control device 1 does not include the difference calculation unit 133, when the switching destination determination unit 132 determines the switching destination remote control device, the remote control device 1 outputs switching instruction information to the switching destination remote control device. In this case, the remote control device 1 may be configured not to include the preparation operation information acquisition unit 114 and the preparation operation information output unit 165.
  • the target for remote control by the remote control device 1 is the vehicle 2, but this is only an example.
  • the remote control device 1 can apply the above-described first embodiment to any mobile body that can be remotely controlled, and can remotely control the mobile body.
  • FIG. 12A and 12B are diagrams showing an example of the hardware configuration of the remote control device 1 according to the first embodiment.
  • the functions of the acquisition unit 11, the delay time detection unit 12, the switching control unit 13, the operation control unit 14, the detection unit 15, and the output unit 16 are realized by the processing circuit 1101. That is, the remote control device 1 remotely controls the vehicle 2 when the communication delay time in the communication between the remote control device 1 and the vehicle 2 exceeds the delay time determination threshold while the vehicle 2 is being remotely controlled.
  • a processing circuit 1101 for controlling switching of the operating device 1 is provided.
  • the processing circuit 1101 may be dedicated hardware as shown in FIG. 12A, or may be a CPU (Central Processing Unit) 1105 that executes a program stored in the memory 1106 as shown in FIG. 12B.
  • CPU Central Processing Unit
  • the processing circuit 1101 may be, for example, a single circuit, a composite circuit, a programmed processor, a parallel programmed processor, an ASIC (Application Specific Integrated Circuit), or an FPGA (Field-Programmable). Gate Array) or a combination of these is applicable.
  • the functions of the acquisition unit 11, the delay time detection unit 12, the switching control unit 13, the operation control unit 14, the detection unit 15, and the output unit 16 are software, firmware, or It is realized by the combination of software and firmware. That is, the acquisition unit 11, the delay time detection unit 12, the switching control unit 13, the operation control unit 14, the detection unit 15, and the output unit 16 are the CPU 1105 or the CPU 1105 that executes the program stored in the memory 1106 or the like. It is realized by a processing circuit such as a system LSI (Large-Scale Integration).
  • LSI Large-Scale Integration
  • the program stored in the memory 1106 or the like is a computer that describes the procedures and methods of the acquisition unit 11, the delay time detection unit 12, the switching control unit 13, the operation control unit 14, the detection unit 15, and the output unit 16. It can also be said that it is to be executed by.
  • the memory 1106 is, for example, a RAM (Random Access Memory), a ROM (Read Only Memory), a flash memory, an EPROM (Erasable Programmable Read Only Memory), an EEPROM (Electric Memory), etc. This includes sexual or volatile semiconductor memories, magnetic disks, optical disks, and the like.
  • the acquisition unit 11, the delay time detection unit 12, the switching control unit 13, the operation control unit 14, the detection unit 15, and the output unit 16 are realized by dedicated hardware.
  • the part may be realized by software or firmware.
  • the acquisition unit 11 and the output unit 16 are realized by the processing circuit 1101 as dedicated hardware, and the delay time detection unit 12, the switching control unit 13, the operation control unit 14, and the detection unit 15 are provided.
  • the processing circuit 1101 can realize its function by reading and executing the program stored in the memory 1106.
  • the remote control device 1 has an input interface device 1103 and an output interface device 1104 that communicate with the vehicle 2 or another remote control device 1.
  • the communication unit (not shown) is composed of an input interface device 1103 and an output interface device 1104.
  • the remote control device 1 is the remote control device 1 capable of remotely controlling the moving body by communication, and the other remote control device 1 capable of remotely controlling the moving body by communication. Whether the communication delay time detected by the acquisition unit 11 for acquiring information about the above, the delay time detection unit 12 for detecting the communication delay time in communication with the moving object, and the delay time detection unit 12 exceeds the delay time determination threshold.
  • the delay time determination unit 131 for determining whether or not the delay time determination unit 131 and the delay time determination unit 131 determine that the communication delay time exceeds the delay time determination threshold value the remote control device 1 acquired by the acquisition unit 11 is related to the other remote control device 1.
  • the switching destination determination unit 132 that determines the switching destination remote control device from among the other remote control devices 1 and the switching destination remote control determined by the switching destination determination unit 132 depending on whether or not the switching determination condition is satisfied.
  • the device is configured to include a switching control unit 13 that outputs switching instruction information for remotely controlling the moving body. Therefore, in the remote control device 1, the remote operation is normal because the communication delay existing in the communication for performing the remote control of the vehicle 2 becomes so large that the state in which the remote operation is normally performed cannot be maintained. It is possible to prevent it from becoming unable to maintain the state that is performed in Japan.
  • the remote control device 1 is a movement generated by the switching destination remote control device from the operation control unit 14 for generating operation information for remotely controlling the moving body and the switching destination remote control device. Calculates the difference between the operation information generated by the preparation operation information acquisition unit 114 and the operation control unit 14 for acquiring the preparation operation information for remote control of the body, and the preparation operation information acquired by the preparation operation information acquisition unit 114.
  • the switching control unit 13 is provided with the difference calculation unit 133, and the switching control unit 13 refers to the switching destination remote control device when the state in which the difference calculated by the difference calculation unit 133 is within the difference determination threshold continues for the difference continuation determination time. ,
  • the switching instruction information is output, and the operation control unit 14 is configured not to generate the operation information.
  • the remote control device 1 does not need to stop the vehicle 2 until the remote control device 1 after switching is operated by the remote operator after switching. As a result, the operation efficiency of the vehicle 2 can be improved. Further, the remote control device 1 is a vehicle even if the remote control device 1 that remotely controls the vehicle 2 changes, in other words, even if the remote operator who operates the remote control device 1 that remotely controls the vehicle 2 changes. It is possible to reduce the sudden large change in the control amount of 2.
  • the communication delay existing in the communication for performing the remote control of the mobile body becomes so large that the state in which the remote control is normally performed cannot be maintained, so that the remote control can be performed. Since it is configured so as to prevent the state of being normally performed from being unable to be maintained, it can be applied to a remote control device that remotely controls a moving body.
  • 1 remote operation device 11 acquisition unit, 111 device information acquisition unit, 112 operator information acquisition unit, 113 vehicle information acquisition unit, 114 preparation operation information acquisition unit, 115 switching control information acquisition unit, 12 delay time detection unit, 13 switching Control unit, 131 delay time determination unit, 132 switching destination determination unit, 133 difference calculation unit, 14 operation control unit, 15 detection unit, 151 device information detection unit, 152 operator information detection unit, 16 output unit, 161 device information output Unit, 162 operator information output unit, 163 switching control information output unit, 164 operation information output unit, 165 preparation operation information output unit, 1101 processing circuit, 1102 HDD, 1103 input interface device, 1104 output interface device, 1105 CPU, 1106 memory.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Selective Calling Equipment (AREA)

Abstract

通信によって移動体を遠隔操作可能な他の遠隔操作装置(1)、に関する情報を取得する取得部(11)と、移動体との通信における通信遅延時間を検出する遅延時間検出部(12)と、遅延時間検出部(12)が検出した通信遅延時間は遅延時間判定用閾値を超えているか否かを判定する遅延時間判定部(131)と、遅延時間判定部(131)が、通信遅延時間は遅延時間判定用閾値を超えていると判定した場合、取得部(11)が取得した他の遠隔操作装置(1)に関する情報に基づき、切替判定条件を満たすか否かによって、他の遠隔操作装置(1)のうちから切替先遠隔操作装置を決定する切替先決定部(132)と、切替先決定部(132)が決定した切替先遠隔操作装置に対して、移動体を遠隔操作させる切替指示情報を出力する切替制御部(13)を備えた。

Description

遠隔操作装置、および、遠隔操作方法
 この発明は、移動体を遠隔操作する遠隔操作装置、および、遠隔操作方法に関する。
 近年、移動体に対する遠隔操作による運転(以下「遠隔運転」という。)支援サービスの展開が期待されている。遠隔運転においては、当該遠隔運転が正常に行われる状態を維持することが求められる。
 移動体の遠隔操作を行う操縦者が当該移動体を操縦中に操縦続行不可能な状態に陥った場合に遠隔運転を維持する技術としては、例えば、特許文献1に、操縦者の、操縦中の状態を取得し、取得した状態に応じて、移動体の操縦者を、他の操縦者に切り替えるようにした遠隔操作システムが開示されている。
特開2006-301723号公報
 移動体の遠隔操作は、通信によって行われる。移動体の遠隔操作を行うための通信においては定常的に通信遅延が存在するが、当該通信遅延が、遠隔運転が正常に行われる状態を維持することができない程度に大きくなる可能性があるという課題があった。
 特許文献1に開示されているような技術では、移動体の遠隔操作を行うための通信に、遠隔運転が正常に行われる状態を維持することができない程度に大きな通信遅延が発生し得ることについて、考慮されていない。そのため、特許文献1に開示されているような技術では、依然として、上述したような課題は解消されていなかった。
 この発明は上記のような課題を解決するためになされたもので、移動体の遠隔操作を行うための通信に存在する通信遅延が、遠隔運転が正常に行われる状態を維持することができない程度に大きくなったことによって遠隔運転が正常に行われる状態を維持できなくなることを防ぐ遠隔操作装置を提供することを目的とする。
 この発明に係る遠隔操作装置は、通信によって移動体を遠隔操作可能な遠隔操作装置であって、通信によって移動体を遠隔操作可能な他の遠隔操作装置、に関する情報を取得する取得部と、移動体との通信における通信遅延時間を検出する遅延時間検出部と、遅延時間検出部が検出した通信遅延時間は遅延時間判定用閾値を超えているか否かを判定する遅延時間判定部と、遅延時間判定部が、通信遅延時間は遅延時間判定用閾値を超えていると判定した場合、取得部が取得した他の遠隔操作装置に関する情報に基づき、切替判定条件を満たすか否かによって、他の遠隔操作装置のうちから切替先遠隔操作装置を決定する切替先決定部と、切替先決定部が決定した切替先遠隔操作装置に対して、移動体を遠隔操作させる切替指示情報を出力する切替制御部を備えたものである。
 この発明によれば、移動体の遠隔操作を行うための通信に存在する通信遅延が、遠隔運転が正常に行われる状態を維持することができない程度に大きくなったことによって遠隔運転が正常に行われる状態を維持できなくなることを防ぐことができる。
実施の形態1に係る遠隔操作装置を備えた遠隔操作システムの構成例を示す図である。 実施の形態1に係る遠隔操作装置の構成例を示す図である。 実施の形態1に係る遠隔操作システムにおいて、遠隔操作装置の取得部が取得する情報を説明するための図であって、図3Aは、遠隔操作装置の切替が発生する前の状態において取得部が取得する情報を説明するための図であり、図3Bは、図3Aに示す状態から、遠隔操作装置1の切替が発生した状態となった場合に、取得部が取得する情報を説明するための図であり、図3Cは、図3Bで示す状態から、遠隔操作装置の切替がした状態において、取得部が取得する情報を説明するための図である。 実施の形態1において、切替先決定部が、切替判定条件を満たすか否かによって、切替先遠隔操作装置を決定するイメージを示す図である。 実施の形態1において、切替制御部が、差分算出部から出力された差分情報に基づいて切替タイミングになったことを判定するまでの流れの一例のイメージを説明するための図である。 切替元遠隔操作装置として動作する、実施の形態1に係る遠隔操作装置、の動作について説明するためのフローチャートである。 実施の形態1において、図6のステップST505における詳細な動作について説明するためのフローチャートである。 実施の形態1において、図7のフローチャートで説明したように、車両の遠隔操作を行う遠隔操作装置の切替が行われた場合の、当該切替のイメージの一例を説明するための図である。 候補遠隔操作装置として動作する、実施の形態1に係る遠隔操作装置の動作について説明するためのフローチャートである。 実施の形態1において、切替元遠隔操作装置が切替先遠隔操作装置を決定した後、当該切替先遠隔操作装置が、車両を遠隔操作する遠隔操作装置に切り替わるまでの動作のイメージを示すシーケンス図である。 実施の形態1において、遠隔操作装置が、車両との通信における通信遅延時間に基づいて、車両を遠隔操作する遠隔操作装置の切替を行うイメージの一例を示す図である。 図12A,図12Bは、実施の形態1に係る遠隔操作装置のハードウェア構成の一例を示す図である。
 以下、この発明の実施の形態について、図面を参照しながら詳細に説明する。
実施の形態1.
 図1は、実施の形態1に係る遠隔操作装置1を備えた遠隔操作システムの構成例を示す図である。
 遠隔操作システムは、オペレータ(以下「遠隔操作者」という。)が、車両2を、必要に応じて遠隔操作し、当該車両2を目的地まで走行させる等のサービスを提供可能なシステムである。
 遠隔操作システムは、車両2と遠隔操作装置1とを備える。図1では、車両2を1つのみ図示しているが、これは一例に過ぎず、遠隔操作システムは、1つ以上の車両2を備える。また、図1では、遠隔操作装置1を3つ図示しているが、これは一例に過ぎない。遠隔操作システムは、複数の遠隔操作装置1を備える。1つの車両2に対して、複数の遠隔操作装置1が接続され得る。以下の実施の形態1において、複数の遠隔操作装置1を、単に「遠隔操作装置1」ともいう。
 遠隔操作装置1は、通信によって車両2を遠隔操作することができる。具体的には、遠隔操作者が遠隔操作装置1を操作することで車両2を遠隔操作し、当該車両2を遠隔運転させる。通信によって車両2を遠隔操作する技術は、既存の技術であるため、詳細な説明を省略する。遠隔操作装置1は、既存の遠隔操作の技術を用いて、車両2を遠隔操作すればよい。遠隔操作装置1は、車両2の走行経路上に存在するオペレーションセンター等、適宜の場所に設置されている。ただし、1つの車両2に対して、一度に当該車両2の遠隔操作を行う遠隔操作装置1は、1つのみとする。
 遠隔操作システムにおいて、複数の遠隔操作装置1のうち、最初にどの遠隔操作装置1が車両2を遠隔操作するかは、適宜決定される。例えば、車両2の現在位置に一番近い場所に設置されている遠隔操作装置1が最初に車両2を遠隔操作する遠隔操作装置1となってもよいし、車両2に搭乗者がいる場合、当該搭乗者が車両2を遠隔操作する遠隔操作装置1を指定してもよい。
 また、遠隔操作システムにおいて、車両2と通信可能な複数の遠隔操作装置1は、車両2を遠隔操作する遠隔操作装置1が決定されると、当該車両2を遠隔操作中の遠隔操作装置1を把握できるようになっている。具体的には、例えば、車両2を遠隔操作する遠隔操作装置1が決定されると、決定された遠隔操作装置1は、車両2と通信可能な、その他の遠隔操作装置1に対して、自装置が車両2を遠隔操作している旨を通知する。その他の遠隔操作装置1は、当該通知によって、どの遠隔操作装置1が車両2を遠隔操作中であるかを把握する。遠隔操作装置1は、互いにネットワークを介して接続されている。
 遠隔操作装置1は、車両2を遠隔操作中に、当該遠隔操作装置1と車両2との通信において遠隔操作装置1の切替が必要な通信遅延が発生していると判定すると、他の遠隔操作装置1が車両2の遠隔操作を行うよう、切替を行う。実施の形態1において、遠隔操作装置1の切替が必要な通信遅延とは、車両2の遠隔運転が正常に行われる状態を維持できなくなる程度の通信遅延のことをいう。
 遠隔操作装置1の切替が行われると、他の遠隔操作装置1が、車両2の遠隔操作を行う。具体的には、他の遠隔操作装置1の遠隔操作者が当該他の遠隔操作装置1を操作することで、車両2の遠隔操作を行う。
 車両2を遠隔操作中の遠隔操作装置1を「切替元遠隔操作装置」ともいう。また、以下の実施の形態1において、「切替元遠隔操作装置」が、車両2の遠隔運転が正常に行われる状態を維持できなくなった場合に、当該「切替元遠隔操作装置」から切り替わって車両2を遠隔操作する遠隔操作装置1となり得る、「切替元遠隔操作装置」の他の、1つ以上の遠隔操作装置1を、「候補遠隔操作装置」ともいうものとする。また、以下の実施の形態1において、「候補遠隔操作装置」のうち、「切替元遠隔操作装置」から切り替わって車両2を遠隔操作する候補遠隔操作装置を「切替先遠隔操作装置」ともいうものとする。
 なお、候補遠隔操作装置が複数存在する場合、切替元遠隔操作装置が、どの候補遠隔操作装置を切替先遠隔操作装置とするかを決定する。
 図2は、実施の形態1に係る遠隔操作装置1の構成例を示す図である。
 実施の形態1において、遠隔操作装置1は、切替元遠隔操作装置である場合も、候補遠隔操作装置である場合も、原則、同じ構成を有する。
 遠隔操作装置1は、通信部(図示省略)を介して、車両2、および、他の遠隔操作装置1と接続される。
 遠隔操作装置1は、取得部11、遅延時間検出部12、切替制御部13、操作制御部14、検出部15、および、出力部16を備える。
 取得部11は、装置情報取得部111、操作者情報取得部112、車両情報取得部113、準備操作情報取得部114、および、切替制御情報取得部115を備える。
 切替制御部13は、遅延時間判定部131、切替先決定部132、および、差分算出部133を備える。
 検出部15は、装置情報検出部151および操作者情報検出部152を備える。
 出力部16は、装置情報出力部161、操作者情報出力部162、切替制御情報出力部163、操作情報出力部164、および、準備操作情報出力部165を備える。
 取得部11は、各種情報を取得する。
 例えば、取得部11は、遠隔操作装置1が切替元遠隔操作装置である場合、候補遠隔操作装置から当該候補遠隔操作装置に関する情報を取得する。遠隔操作装置1が切替元遠隔操作装置である場合に取得部11が取得する、候補遠隔操作装置に関する情報は、候補遠隔操作装置の状態に関する情報(以下「装置状態情報」という。)、または、候補遠隔操作装置を操作する遠隔操作者の状態に関する情報(以下「操作者状態情報」という。)を含む。具体的には、取得部11の装置情報取得部111が、装置状態情報を取得し、取得部11の操作者情報取得部112が操作者状態情報を取得する。
 装置状態情報は、例えば、遠隔操作装置1と車両2との通信における通信遅延時間に関する情報、遠隔操作装置1が遠隔操作者によって操作されているか否かの情報、または、遠隔操作装置1が待機状態であるか否かの情報を含む。実施の形態1において、遠隔操作装置1が待機状態であるとは、例えば、当該遠隔操作装置1は、当該遠隔操作装置1を操作可能な遠隔操作者がいれば、いつでも稼働することができる状態にあることをいう。
 装置情報取得部111は、候補遠隔操作装置から、適宜の方法で、当該候補遠隔操作装置の、上記装置状態情報を取得すればよい。例えば、装置情報取得部111は、予め設定された周期で、候補遠隔操作装置に対して装置状態情報を要求し、当該要求に応じて候補遠隔操作装置から出力される装置状態情報を取得するようにすればよい。また、例えば、候補遠隔操作装置において、当該候補遠隔操作装置の状態に変化があった場合に、当該候補遠隔操作装置が装置状態情報を出力するようにし、装置情報取得部111は、当該候補遠隔操作装置が出力した装置状態情報を取得するようにしてもよい。
 なお、候補遠隔操作装置では、上記装置状態情報を検出している。具体的には、候補遠隔操作装置において、検出部15の装置情報検出部151が、装置状態情報を検出している。装置情報検出部151の詳細については、後述する。
 操作者情報取得部112が取得する操作者状態情報は、例えば、遠隔操作装置1を操作する遠隔操作者が当該遠隔操作装置1に向かって着座しているか否かの情報、遠隔操作装置1を操作する遠隔操作者が車両2の遠隔操作を行うための資格を有しているか否かの情報、または、遠隔操作装置1を操作する遠隔操作者の健康状態に関する情報を含む。
 操作者情報取得部112は、候補遠隔操作装置から、適宜の方法で、当該候補遠隔操作装置の遠隔操作者に関する上記操作者状態情報を取得すればよい。例えば、操作者情報取得部112は、予め設定された周期で、候補遠隔操作装置に対して操作者状態情報を要求し、当該要求に応じて候補遠隔操作装置から出力される操作者状態情報を取得するようにすればよい。また、例えば、候補遠隔操作装置において、当該候補遠隔操作装置の遠隔操作者の状態に変化があった場合に、当該候補遠隔操作装置が操作者状態情報を出力するようにし、操作者情報取得部112は、当該候補遠隔操作装置が出力した操作者状態情報を取得するようにしてもよい。
 なお、候補遠隔操作装置では、上記操作者状態情報を検出している。具体的には、候補遠隔操作装置において、検出部15の操作者情報検出部152が、操作者状態情報を検出している。操作者情報検出部152の詳細については、後述する。
 また、例えば、取得部11は、車両2から車両2に関する情報(以下「車両情報」という。)を取得する。具体的には、取得部11の車両情報取得部113は、車両情報を取得する。車両情報は、車両2の走行速度、他の車両2との車間距離に関する情報、車両2の現在位置に関する情報、車両2の目的地に関する情報、または、車両2に搭載された撮像装置が車両2周辺を撮像した画像等を含む。なお、車両情報取得部113は、遠隔操作装置1が切替元遠隔操作装置である場合も、遠隔操作装置1が候補遠隔操作装置である場合も、機能する。
 また、例えば、取得部11は、遠隔操作装置1が切替元遠隔操作装置である場合、切替先遠隔操作装置から準備操作情報を取得する。具体的には、取得部11の準備操作情報取得部114は、遠隔操作装置1が切替元遠隔操作装置である場合、切替先遠隔操作装置から、準備操作情報を取得する。準備操作情報は、切替元遠隔操作装置から切替先遠隔操作装置へと、車両2を遠隔操作する遠隔操作装置1の切替を行う場合に、当該切替先遠隔操作装置において、切替元遠隔操作装置が出力した切替準備指示情報に応じて生成された、車両2を遠隔操作するための操作情報である。操作情報の詳細については、後述する。
 また、例えば、取得部11は、遠隔操作装置1が切替先遠隔操作装置である場合、切替元遠隔操作装置から、切替制御情報を取得する。具体的には、取得部11の切替制御情報取得部115は、遠隔操作装置1が切替先遠隔操作装置である場合、切替元遠隔操作装置から、切替制御情報を取得する。切替制御情報は、車両2を遠隔操作する遠隔操作装置1の切替を行う際に、切替元遠隔操作装置から出力される情報である。実施の形態1において、切替制御情報には、切替先遠隔操作装置に対して、車両2を遠隔操作させるための準備を行うことを指示する切替準備指示情報と、切替元遠隔操作装置として動作するよう切り替わり、実際に車両2を遠隔操作させることを指示する切替指示情報とが含まれる。
 ここで、図3は、実施の形態1に係る遠隔操作システムにおいて、遠隔操作装置1の取得部が取得する情報を説明するための図である。図3では、一例として、遠隔操作システムは、遠隔操作装置A(1A)、遠隔操作装置B(1B)、および、遠隔操作装置C(1C)の3つの遠隔操作装置1を備えるものとしている。図3Aは、遠隔操作装置A(1A)が切替元遠隔操作装置であり、遠隔操作装置B(1B)および遠隔操作装置C(1C)は候補遠隔操作装置であって、切替が発生する前の状態を示している。図3Bは、図3Aに示す状態から、遠隔操作装置1の切替が発生し、切替元遠隔操作装置である遠隔操作装置A(1A)が、遠隔操作装置B(1B)を切替先遠隔操作装置に決定した状態を示している。なお、図3Bでは、説明の便宜上、遠隔操作装置C(1C)の図示を省略している。図3Cは、図3Bで示す状態から、遠隔操作装置1の切替が完了し、遠隔操作装置B(1B)が切替元遠隔操作装置として車両2の遠隔操作を行っている状態を示している。
 図3Aに示す状態では、遠隔操作装置A(1A)~C(1C)の取得部11は、それぞれ、車両2から車両情報を取得する。また、切替元遠隔操作装置である遠隔操作装置A(1A)の取得部11は、候補遠隔操作装置である遠隔操作装置B(1B),C(1C)から、装置状態情報および操作者状態情報を取得する。
 図3Bに示す状態では、遠隔操作装置A(1A),B(1B)の取得部11は、それぞれ、車両2から車両情報を取得する。また、切替先遠隔操作装置である遠隔操作装置B(1B)の取得部11は、切替元遠隔操作装置である遠隔操作装置A(1A)から、切替制御情報を取得する。また、切替元遠隔操作装置である遠隔操作装置A(1A)の取得部11は、切替先遠隔操作装置である遠隔操作装置B(1B)から、準備操作情報を取得する。なお、図3Bに示す状態において、切替が完了するまでは、遠隔操作装置A(1A)の取得部11は、遠隔操作装置B(1B),C(1C)から装置状態情報および操作者状態情報を取得するが、図3Bでは当該装置状態情報および操作者状態情報については、説明の便宜上、図示を省略している。
 図3Cに示す状態では、遠隔操作装置A(1A)~C(1C)の取得部11は、それぞれ、車両2から車両情報を取得する。また、切替元遠隔操作装置である遠隔操作装置B(1B)の取得部11は、候補遠隔操作装置である遠隔操作装置A(1A),C(1C)から、装置状態情報および操作者状態情報を取得する。
 なお、図3では、図示を省略しているが、車両を遠隔操作する切替元遠隔操作装置から車両2へは、車両2を遠隔操作するための操作情報が送信されている。
 取得部11は、取得した各種情報を、遅延時間検出部12、切替制御部13、および、操作制御部14に出力する。
 遅延時間検出部12は、遠隔操作装置1と車両2との通信における通信遅延時間を検出する。なお、遅延時間検出部12は、遠隔操作装置1が切替元遠隔操作装置である場合も、遠隔操作装置1が候補遠隔操作装置である場合も、機能する。
 遅延時間検出部12は、例えば、車両2から遠隔操作装置1へ送信される、一方向の情報によって、通信遅延時間を検出する。具体的には、例えば、遅延時間検出部12は、車両2から当該車両2で計測している時刻(以下「車両時刻」という。)を取得し、当該車両時刻と、当該車両時刻を遠隔操作装置1にて取得した時刻(以下「装置時刻」という。)との差分を通信遅延時間とする。例えば、車両時刻の情報は、車両に関する情報に含まれ、車両情報取得部113が取得するようにすればよい。遅延時間検出部12は、例えば、車両情報取得部113が車両時刻を取得した時刻を、装置時刻とする。
 なお、遠隔操作装置1および車両2は、GPS(Global Positioning System)時刻等、高精細な時刻を計ることが可能な時計を備えているものとする。
 上述した、遅延時間検出部12による通信遅延時間の検出方法は一例に過ぎない。遅延時間検出部12は、遠隔操作装置1と車両2との通信において、当該車両2の遠隔運転を正常に行うことができないほどの通信遅延時間を検出できるようになっていればよい。
 遅延時間検出部12は、検出した通信遅延時間に関する情報を、切替制御部13および検出部15に出力する。
 切替制御部13は、遠隔操作装置1が切替元遠隔操作装置である場合、車両2の遠隔操作を行う遠隔操作装置1の切替を行うか否かの判定を行い、当該切替を行うと判定した場合に、候補遠隔操作装置のうちから切替先遠隔操作装置を決定し、決定した切替先遠隔操作装置に対して、車両2を遠隔操作させるための切替制御情報を出力する。
 具体的には、切替制御部13の遅延時間判定部131が、遅延時間検出部12が検出した通信遅延時間は、予め設定された閾値(以下「遅延時間判定用閾値」という。)を超えているか否かを判定する。
 遅延時間判定部131は、通信遅延時間が遅延時間判定用閾値を超えている場合、車両2の遠隔操作を行う遠隔操作装置1の切替を行うと判定し、通信遅延時間が遅延時間判定用閾値を超えている旨を示す遅延有情報を、切替制御部13の切替先決定部132に出力する。
 切替先決定部132は、遅延時間判定部131が、通信遅延時間は遅延時間判定用閾値を超えていると判定した場合、取得部11が取得した候補遠隔操作装置に関する情報に基づき、切替判定条件を満たすか否かによって、候補遠隔操作装置のうちから切替先遠隔操作装置を決定する。
 切替判定条件は、予め設定されている。以下、切替判定条件の具体的な内容について、いくつか例を挙げて説明する。
<切替判定条件例1>
 例えば、切替判定条件は、候補遠隔操作装置と車両2との通信遅延時間が、予め設定された閾値(以下「他装置遅延時間判定用閾値」という。)以下であることである。他装置遅延時間判定用閾値には、予め、遅延時間判定用閾値以下の値が設定されている。他装置遅延時間判定用閾値は、遅延時間判定用閾値と同じ値であってもよい。
 切替先決定部132は、候補遠隔操作装置と車両2との通信遅延時間を、装置情報取得部111が取得した装置状態情報から判定すればよい。
 切替先決定部132は、候補遠隔操作装置のうち、当該候補遠隔操作装置と車両2との通信遅延時間が他装置遅延時間判定用閾値以下である候補遠隔操作装置を、切替先遠隔操作装置に決定する。
<切替判定条件例2>
 例えば、切替判定条件は、候補遠隔操作装置を操作する遠隔操作者の状態が、当該候補遠隔操作装置を操作可能な状態であり、かつ、候補遠隔操作装置と車両2との通信遅延時間が他装置遅延時間判定用閾値以下であることである。
 切替先決定部132は、候補遠隔操作装置を操作する遠隔操作者の状態を、操作者情報取得部112が取得した操作者状態情報から判定すればよい。候補遠隔操作装置を操作する遠隔操作者の状態が、当該候補遠隔操作装置を操作可能な状態とは、例えば、以下の(1)~(3)の状態をいう。
(1)遠隔操作者が候補遠隔操作装置に向かって着座している状態
(2)遠隔操作者が車両2の遠隔操作を行うための資格を有している状態
(3)遠隔操作者が車両2を正常に遠隔操作できる健康状態
 遠隔操作者が車両2を正常に遠隔操作できる健康状態とは、例えば、飲酒していない状態、遠隔操作者の覚醒度が予め決められた度合以上である状態、または、遠隔操作者の車両2の遠隔操作における習熟度が予め決められた度合以上である状態をいう。
 切替先決定部132は、例えば、候補遠隔操作装置のうち、候補遠隔操作装置を操作する遠隔操作者の状態が上記(1)~(3)を全て満たし、かつ、候補遠隔操作装置と車両2との通信遅延時間が他装置遅延時間判定用閾値以下である、候補遠隔操作装置を、切替先遠隔操作装置に決定する。
 なお、上記(1)~(3)は一例に過ぎず、遠隔操作者が候補遠隔操作装置を操作可能な状態には、上記(1)~(3)以外の状態が定義されていてもよい。遠隔操作者が候補遠隔操作装置を操作可能な状態には、遠隔操作者の状態であって、当該状態の遠隔操作者が遠隔操作装置1の操作を行った場合に車両2が正常に遠隔運転されるような、遠隔操作者の状態が定義されているようになっていればよい。
 ここで、図4は、実施の形態1において、切替先決定部132が、切替判定条件を満たすか否かによって、切替先遠隔操作装置を決定するイメージを示す図である。図4では、一例として、切替判定条件は、上述の<切替判定条件例2>であるものとしている。図4において、候補遠隔操作装置は、4つ存在するものとし、当該4つの候補遠隔操作装置の状態および当該4つの候補遠隔操作装置を操作する遠隔操作者の状態を、301~304で示している。切替先決定部132は、4つの候補遠隔操作装置のうちから切替先遠隔操作装置を決定するものとしている。
 図4において、301に示す状態では、候補遠隔操作装置の遠隔操作者は着座していない。すなわち、候補遠隔操作装置の遠隔操作者は上記(1)を満たしていない。
 図4において、302に示す状態では、遠隔操作者は、車両2の遠隔操作を行うための資格を有していない。すなわち、候補遠隔操作装置の遠隔操作者は上記(2)を満たしていない。
 図4において、303に示す状態では、候補遠隔操作装置の遠隔操作者は、着座しており、車両2の遠隔操作を行うための資格を有し、かつ、健康状態も良好である。すなわち、候補遠隔操作装置の遠隔操作者は、上記(1)~(3)については、全て満たしている。しかし、候補遠隔操作装置と車両2との通信遅延時間が他装置遅延時間判定用閾値を超えている。
 よって、切替先決定部132は、候補遠隔操作装置の状態および当該候補遠隔操作装置を操作する遠隔操作者の状態が301~303に示す状態である場合、候補遠隔操作装置について、上述の<切替判定条件例2>を満たさないと判定する。
 一方、図4において、304に示す状態では、候補遠隔操作装置は、上記(1)~(3)を全て満たし、かつ、候補遠隔操作装置と車両2との通信遅延時間は他装置遅延時間判定用閾値以下である。すなわち、候補遠隔操作装置は、上述の<切替判定条件例2>を満たす。
 そこで、切替先決定部132は、304に示す状態における候補遠隔操作装置を、切替先遠隔操作装置に決定する。
 切替先決定部132は、切替判定条件を満たす候補遠隔操作装置が複数存在する場合、適宜の決定条件に従って、当該切替判定条件を満たす候補遠隔操作装置のうちから1つ、切替先遠隔操作装置を決定すればよい。
 例えば、切替判定条件が、上述の<切替判定条件例1>であって、車両2との通信遅延時間が他装置遅延時間判定用閾値以下である候補遠隔操作装置が複数存在するとする。この場合、切替先決定部132は、例えば、候補遠隔操作装置のうち、当該候補遠隔操作装置と車両2との通信遅延時間が最も短い候補遠隔操作装置を、切替先遠隔操作装置に決定する。
 また、例えば、切替先決定部132は、候補遠隔操作装置のうち、車両2の目的地までの経路上であって、現在地から一番近い場所に存在する候補遠隔操作装置を、切替先遠隔操作装置に決定してもよい。なお、切替先決定部132は、車両2の目的地までの経路および現在地の情報を、車両情報取得部113から取得すればよい。また、切替先決定部132は、候補遠隔操作装置の存在する場所に関する情報を、装置情報取得部111から取得すればよい。装置情報取得部111は、装置状態情報として、候補遠隔操作装置の位置情報を取得しているものとする。
 また、切替先決定部132は、通信遅延時間が他装置遅延時間判定用閾値以下となっている状態の継続時間が最も長い候補遠隔操作装置を、切替先遠隔操作装置に決定してもよい。切替先決定部132は、上記継続時間に関する情報を、装置情報取得部111から取得すればよい。装置情報取得部111は、装置状態情報として、上記継続時間に関する情報を取得しているものとする。
 なお、切替判定条件を満たす候補遠隔操作装置が存在しない場合、切替先決定部132は、切替先遠隔操作装置を決定しない。この場合、切替元遠隔操作装置は、車両2を停止させる操作情報を生成し、生成した操作情報を車両2に出力する。
 切替先決定部132は、切替先遠隔操作装置を決定すると、決定した切替先遠隔操作装置に関する情報を、切替制御部13に出力する。
 切替制御部13は、切替先決定部132から切替先遠隔操作装置に関する情報が出力されると、切替先遠隔操作装置に対して、切替準備指示情報を出力する。なお、このとき、切替制御部13は、切替準備指示情報に、車両情報および切替元遠隔操作装置を特定可能な情報を付与して、切替先遠隔操作装置に出力する。
 切替先遠隔操作装置では、切替準備指示情報を取得し、準備操作情報を生成する。具体的には、切替先遠隔操作装置において、操作制御部14が切替準備指示情報を取得し、準備操作情報を生成する。操作制御部14の詳細については、後述する。
 実施の形態1において、切替先遠隔操作装置が、切替準備指示情報を受けて生成した操作情報を、上述のとおり、「準備操作情報」というものとする。
 切替制御部13の差分算出部133は、切替元遠隔操作装置にて操作制御部14が生成した操作情報と、切替先遠隔操作装置にて生成された準備操作情報との差分を算出する。なお、準備操作情報取得部114が切替先遠隔操作装置から、当該切替先遠隔操作装置にて生成された準備操作情報を取得する。
 ここで、操作情報および準備操作情報について、より詳細に説明する。
 操作情報とは、上述のとおり、車両2を遠隔操作するための情報である。操作情報には、車両2を遠隔操作するための情報として、1種類以上の情報が含まれる。具体的には、例えば、操作情報には、車両2の速度に関する情報、ハンドル舵角の制御量、または、アクセル開度の制御量が含まれる。
 操作制御部14が、操作情報を生成する。操作制御部14は、例えば、車両情報取得部113が取得した、車両情報に基づき、操作情報を生成する。
 操作制御部14が生成した操作情報が車両2に出力されると、車両2は、当該操作情報に基づいて遠隔運転を行う。
 準備操作情報とは、操作制御部14によって生成される操作情報のうち、切替先隔操作装置において、切替制御情報取得部115が切替元遠隔操作装置から切替準備指示情報を取得した場合に生成される操作情報である。準備操作情報も、車両2を遠隔操作するための情報ではあるが、当該準備操作情報は、実際に車両2へ出力されることはない。操作制御部14は、準備操作情報を生成した場合、準備操作情報であることがわかる情報を、当該準備操作情報に付与しておく。
 遠隔操作装置1が切替先遠隔操作装置である場合に、操作制御部14は、切替準備指示情報に付与されている、車両情報に基づき、準備操作情報を生成する。
 差分算出部133の説明に戻る。
 例えば、操作情報および準備操作情報には、ハンドル舵角に関する情報、および、車両2の速度に関する情報が含まれているとする。
 差分算出部133は、操作情報に含まれるハンドル舵角に関する情報と準備操作情報に含まれるハンドル舵角に関する情報との差分の算出、および、操作情報に含まれる車両2の速度に関する情報と準備操作情報に含まれる車両2の速度に関する情報との差分の算出を、それぞれ、行う。
 差分算出部133は、算出した、操作情報と準備操作情報との差分に関する情報(以下「差分情報」という。)を、切替制御部13に出力する。上述の例でいうと、差分算出部133は、操作情報に含まれるハンドル舵角に関する情報と準備操作情報に含まれるハンドル舵角に関する情報との差分情報と、操作情報に含まれる車両2の速度に関する情報と準備操作情報に含まれる車両2の速度に関する情報との差分情報を、切替制御部13に出力する。
 切替制御部13は、差分算出部133から差分情報が出力されると、操作情報と準備操作情報との差分は、予め設定された閾値(以下「差分判定用閾値」という。)以内であるか否かを判定する。差分判定用閾値には、操作情報と準備操作情報との差分として許容される値が設定されている。具体的には、差分判定用閾値には、例えば、車両2に搭乗者がいる場合に、車両2が操作情報に基づいて遠隔操作される状態から、準備操作情報に基づいて遠隔操作される状態に切り替わったとしても、当該搭乗者が違和感なく搭乗を続けられる程度の、操作情報と準備操作情報との差分の値が設定されている。
 なお、差分判定用閾値は、操作情報または準備操作情報に含まれる情報の種類ごとに設定されている。上述の例でいうと、ハンドル舵角に関する情報、および、車両2の速度に関する情報それぞれに対して、差分判定用閾値が設定されている。
 切替制御部13は、操作情報と準備操作情報との差分が差分判定用閾値以内であると判定した場合、操作情報と準備操作情報との差分が差分判定用閾値以内である状態が、予め設定された時間(以下「差分継続判定用時間」という。)継続しているか否かを判定する。なお、切替制御部13は、差分算出部133から差分情報が出力されると、当該差分情報を記憶部(図示省略)に、当該差分情報の出力日時と対応付けて記憶させているものとする。切替制御部13は、記憶部を参照して、操作情報と準備操作情報との差分が差分判定用閾値以内である状態が差分継続判定用時間継続しているか否かを判定すればよい。
 操作情報と準備操作情報との差分が差分判定用閾値以内である状態が差分継続判定用時間継続している場合、切替元遠隔操作装置にて、切替制御部13は、切替先遠隔操作装置において生成された準備操作情報が、実際に車両2の遠隔操作を行うための操作情報として使用可能であると判定する。言い換えれば、切替制御部13は、切替元遠隔操作装置から切替先遠隔操作装置へ、車両2の遠隔操作を行う遠隔操作装置1の切替を行ってもよい切替タイミングになったと判定する。
 切替元遠隔操作装置にて、切替制御部13は、切替タイミングになったと判定すると、切替先遠隔操作装置に対して切替指示情報を出力するとともに、切替元遠隔操作装置の操作制御部14に対して、操作情報を生成させないようにする。なお、切替制御部13は、切替指示情報を、切替元遠隔操作装置の出力部16を介して切替先遠隔操作装置に出力する。切替制御部13は、切替指示情報に、車両情報を付与する。
 切替元遠隔操作装置が出力した切替指示情報を取得した切替先遠隔操作装置では、車両2から、車両情報を取得し、操作制御部14が、当該車両情報に基づき、操作情報を生成する。以降、切替先遠隔操作装置が切替元遠隔操作装置へと切り替わって、生成した操作情報を車両2に出力して当該車両2の遠隔操作を行う。このように、遠隔操作装置1の切替が行われる。
 図5は、実施の形態1において、切替制御部13が、差分算出部133から出力された差分情報に基づいて切替タイミングになったことを判定するまでの流れの一例のイメージを説明するための図である。
 図5に示すイメージでは、上述した例と同様、操作情報および準備操作情報には、ハンドル舵角の制御量、および、車両2の速度に関する情報が含まれているとする。
 図5において、401および404は、切替元遠隔操作装置で生成され、現在、車両2の遠隔操作のために用いられている操作情報の時間的な遷移を示している。具体的には、401は、ハンドル舵角の制御量の時間的な遷移を示しており、404は、車両2の速度に関する情報の時間的な遷移を示している。
 図5において、402および405は、切替先遠隔操作装置で生成され、車両2の遠隔操作には用いられていない準備操作情報の時間的な遷移を示している。具体的には、402は、ハンドル舵角の制御量の時間的な遷移を示しており、405は、車両2の速度に関する情報の時間的な遷移を示している。
 図5において、403は、差分算出部133が出力した、401にて示すハンドル舵角の制御量と、402にて示すハンドル舵角の制御量との差分情報を示す。406は、差分算出部133が出力した、403にて示す車両2の速度に関する情報と、404にて示す車両2の速度に関する情報との差分情報を示す。
 図5において、AおよびBで示す時間、ハンドル舵角の制御量の差分は差分判定用閾値以内となっているが、当該ハンドル舵角の制御量の差分が差分判定用閾値以内である状態は、差分継続判定用時間継続していない。
 また、DおよびEで示す時間、車両2の速度の差分は差分判定用閾値以内となっているが、当該車両2の速度の差分が差分判定用閾値以内である状態は、差分継続判定用時間継続していない。
 Cで示す時間では、ハンドル舵角の制御量の差分は差分判定用閾値となり、かつ、当該ハンドル舵角の制御量の差分が差分判定用閾値以内である状態が差分継続判定用時間継続している。しかし、Cで示す時間が経過した時点では、車両2の速度の差分が差分判定用閾値以内である状態が、未だ差分継続判定用時間継続していない。よって、切替制御部13は、Cで示す時間が経過した時点では、切替タイミングになったとは判定しない。
 Fで示す時間が経過した時点で、ハンドル舵角の制御量の差分および車両2の速度の差分が、いずれも差分判定用閾値以内で、かつ、差分継続判定用時間継続した状態になる。切替制御部13は、Fで示す時間が経過すると、切替タイミングになったと判定する。
 図2の説明に戻る。
 操作制御部14は、上述の操作情報、または、上述の準備操作情報を生成する。
 遠隔操作装置1が切替元遠隔操作装置である場合、操作制御部14は、操作情報を生成する。遠隔操作装置1が切替先遠隔操作装置である場合、操作制御部14は、準備操作情報を生成する。
 操作制御部14は、生成した操作情報を、出力部16を介して車両2に出力する。ただし、操作制御部14は、生成した操作情報が、準備操作情報である場合は、当該準備操作情報を、出力部16を介して切替元遠隔操作装置に出力する。
 上述したとおり、準備操作情報は、遠隔操作装置1が切替先遠隔操作装置に決定された場合に、当該切替先遠隔操作装置にて生成され、切替元遠隔操作装置から切替指示情報が出力されるまで、車両2へは出力されない。準備操作情報は、車両2へは出力されないため、実際に、車両2が当該準備操作情報によって遠隔操作されることはない。
 検出部15は、遠隔操作装置1が候補遠隔操作装置である場合、遠隔操作装置1に関する情報を検出する。遠隔操作装置1に関する情報とは、例えば、装置状態情報、または、操作者状態情報である。
 検出部15の装置情報検出部151は、装置状態情報を検出する。
 上述のとおり、装置状態情報は、例えば、遠隔操作装置1が遠隔操作者によって操作されているか否かの情報、遠隔操作装置1が待機状態であるか否かの情報、または、通信遅延時間に関する情報を含む。装置情報検出部151は、遠隔操作装置1が候補遠隔操作装置である場合、例えば、ハンドル舵角センサ(図示省略)から、ハンドル舵角の情報を取得することで、候補遠隔操作装置が遠隔操作者によって操作されているか否かを検出すればよい。また、装置情報検出部151は、例えば、候補遠隔操作装置と車両2とが通信にて接続されていることを検出することで、候補遠隔操作装置が待機状態であることを検出すればよい。また、装置情報検出部151は、例えば、遅延時間検出部12から通信遅延時間を取得すればよい。
 なお、上述した、装置状態情報の検出方法は、一例に過ぎない。装置情報検出部151は、装置状態情報を適宜の方法で検出する。
 装置情報検出部151は、装置状態情報を、出力部16を介して切替元遠隔操作装置に出力する。
 装置情報検出部151は、例えば、予め設定された周期で、装置状態情報を検出してもよいし、切替元制御装置から装置状態情報が要求された場合に、装置状態情報を検出してもよい。また、装置情報検出部151は、装置状態情報に変化があった場合にのみ、装置状態情報を、切替元遠隔操作装置に出力するようにしてもよい。
 切替元遠隔操作装置は、候補遠隔操作装置の装置情報検出部151から出力された装置状態情報を取得する。具体的には、切替元遠隔操作装置において、装置情報取得部111が、装置情報検出部151が出力した装置状態情報を取得する。
 検出部15の操作者情報検出部152は、操作者状態情報を検出する。
 上述のとおり、操作者状態情報は、具体的には、例えば、遠隔操作装置1を操作する遠隔操作者が当該遠隔操作装置1に向かって着座しているか否かの情報、遠隔操作装置1を操作する遠隔操作者が車両2の遠隔操作を行うための資格を有しているか否かの情報、または、遠隔操作装置1を操作する遠隔操作者の健康状態に関する情報を含む。
 操作者情報検出部152は、遠隔操作装置1が候補遠隔操作装置である場合、例えば、遠隔操作者が候補遠隔操作装置に向かって着座しているか否かを、OKボタンが押下されたことを検出することで検出すればよい。操作者情報検出部152は、例えば、撮像装置(図示省略)が遠隔操作者を撮像した撮像画像を取得し、取得した撮像画像から抽出した遠隔操作者の情報と、予め認証サーバ(図示省略)に登録されている操作者情報とを突き合わせることで、遠隔操作者が車両2の遠隔操作を行うための資格を有しているか否かを検出すればよい。操作者情報検出部152は、既知の画像認識技術を用いて、撮像画像から、遠隔操作者の情報を抽出すればよい。
 操作者情報検出部152は、例えば、撮像画像から、既知の画像認識技術を用いて、操作者の健康状態を検出すればよい。操作者情報検出部152は、既知の技術(例えば、特開2018-077649号公報参照)を用いて、遠隔操作者の覚醒度または習熟度を判定し、判定した覚醒度または習熟度を、遠隔操作者の健康状態として検出してもよい。また、操作者情報検出部152は、例えば、既知の技術を用いて、遠隔操作者が酒気帯び状態であるか否かを検出してもよい。
 なお、上述した、操作者状態情報の検出方法は、一例に過ぎない。操作者情報検出部152は、操作者状態情報を適宜の方法で検出する。
 操作者情報検出部152は、操作者状態情報を、出力部16を介して切替元遠隔操作装置に出力する。
 操作者情報検出部152は、例えば、予め設定された周期で、遠隔操作者状態情報を検出してもよいし、切替元制御装置から操作者状態情報が要求された場合に、操作者状態情報を検出してもよい。また、操作者情報検出部152は、操作者状態情報に変化があった場合にのみ、操作者状態情報を、切替元遠隔操作装置に出力するようにしてもよい。
 切替元遠隔操作装置は、候補遠隔操作装置の操作者情報検出部152から出力された操作者状態情報を取得する。具体的には、切替元遠隔操作装置において、操作者情報取得部112が、操作者情報検出部152が出力した操作者状態情報を取得する。
 出力部16は、各種情報を出力する。
 遠隔操作装置1が候補遠隔操作装置である場合、出力部16の装置情報出力部161は、装置情報検出部151が出力した装置状態情報を、切替元遠隔操作装置に出力する。
 遠隔操作装置1が候補遠隔操作装置である場合、出力部16の操作者情報出力部162は、操作者情報検出部152が出力した操作者状態情報を、切替元遠隔操作装置に出力する。
 遠隔操作装置1が候補遠隔操作装置である場合、出力部16の準備操作情報出力部165は、操作制御部14が生成した準備操作情報を、切替元遠隔操作装置に出力する。なお、準備操作情報には、当該準備操作情報であることがわかる情報が付与されているので、準備操作情報出力部165は、当該情報から、操作制御部14から出力された操作情報が準備操作情報であることを特定できる。
 遠隔操作装置1が切替元遠隔操作装置である場合、出力部16の切替制御情報出力部163は、切替制御部13から出力された切替準備指示情報または切替指示情報を、切替先遠隔操作装置に出力する。
 遠隔操作装置1が切替元遠隔操作装置である場合、出力部16の操作情報出力部164は、操作制御部14が生成した操作情報を、車両2に出力する。
 実施の形態1に係る遠隔操作装置1の動作について説明する。
 以下の動作説明では、遠隔操作装置1が切替元遠隔操作装置である場合の動作、および、遠隔操作装置1が切替元遠隔操作装置以外の遠隔操作装置1である場合の動作について、それぞれ、フローチャートを用いて説明する。
 図6は、切替元遠隔操作装置として動作する、実施の形態1に係る遠隔操作装置1、の動作について説明するためのフローチャートである。
 遅延時間検出部12は、切替元遠隔操作装置と車両2との通信における通信遅延時間を検出する(ステップST501)。
 遅延時間検出部12は、検出した通信遅延時間に関する情報を、切替制御部13および検出部15に出力する。
 取得部11は、各種情報を取得する。
 具体的には、例えば、取得部11の装置情報取得部111は、候補遠隔操作装置から装置状態情報を取得し、取得部11の操作者情報取得部112は、候補遠隔操作装置から操作者状態情報を取得する(ステップST502)。
 取得部11は、取得した各種情報を、遅延時間検出部12、切替制御部13、および、操作制御部14に出力する。
 なお、ここでは、ステップST501、ステップST502の順で遠隔操作装置1の動作が行われるものとしたが、これに限らず、ステップST502、ステップST501の順で遠隔操作装置1の動作が行われるようにしてもよい。
 切替制御部13の遅延時間判定部131は、ステップST501にて遅延時間検出部12が検出した通信遅延時間は遅延時間判定用閾値を超えているか否かを判定する(ステップST503)。
 ステップST503にて、遅延時間判定部131が、通信遅延時間は遅延時間判定用閾値を超えていないと判定した場合(ステップST503の“NO”の場合)、遠隔操作装置1の動作は、ステップST501に戻り、当該ステップST501以降の動作に進む。
 ステップST503にて、通信遅延時間が遅延時間判定用閾値を超えていると判定した場合(ステップST503の“YES”の場合)、遅延時間判定部131は、車両2を遠隔操作する遠隔操作装置1の切替を行うと判定し、通信遅延時間が遅延時間判定用閾値を超えている旨を示す遅延有情報を、切替制御部13の切替先決定部132に出力する。
 切替先決定部132は、ステップST502にて取得部11が取得した候補遠隔操作装置に関する情報に基づき、切替判定条件を満たすか否かによって、候補遠隔操作装置のうちから切替先遠隔操作装置を決定する(ステップST504)。
 切替先決定部132は、切替先遠隔操作装置を決定すると、決定した切替先遠隔操作装置に関する情報を、切替制御部13に出力する。
 なお、当該ステップST504において、切替判定条件を満たす候補遠隔操作装置が存在せず、切替先決定部132が切替先遠隔操作装置を決定できなかった場合、操作制御部14は、車両2を停止させる操作情報を生成し、出力部16を介して、生成した操作情報を車両2に出力する。そして、遠隔操作装置1は、図6のフローチャートに示す動作を終了する。
 切替制御部13は、ステップST504にて切替先決定部132が決定した切替先遠隔操作装置へ、車両2の遠隔操作を行う遠隔操作装置1の切替を行う(ステップST505)。具体的には、切替制御部13は、切替先遠隔操作装置に対して、車両2を遠隔操作させる切替指示情報を出力する。
 ここで、図7は、実施の形態1において、図6のステップST505における詳細な動作について説明するためのフローチャートである。
 図6のステップST504にて、切替先決定部132から切替先遠隔操作装置に関する情報が出力されると、切替制御部13は、切替先遠隔操作装置に対して、切替準備指示情報を出力する(ステップST601)。
 切替制御部13の差分算出部133は、切替元遠隔操作装置の操作制御部14が生成した操作情報と、切替先遠隔操作装置にて生成された準備操作情報(後述する図9のステップST804参照)との差分を算出する(ステップST602)。
 差分算出部133は、差分情報を、切替制御部13に出力する。
 切替制御部13は、ステップST602にて差分算出部133から差分情報が出力されると、操作情報と準備操作情報との差分が差分判定用閾値以内である状態が、差分継続判定用時間継続しているか否かを判定する(ステップST603)。
 ステップST603にて、切替制御部13が、操作情報と準備操作情報との差分が差分判定用閾値以内である状態が、差分継続判定用時間継続していないと判定した場合(ステップST603の“NO”の場合)、遠隔操作装置1の動作はステップST602に戻り、当該ステップST602以降の動作を行う。
 ステップST603にて、操作情報と準備操作情報との差分が差分判定用閾値以内である状態が、差分継続判定用時間継続していると判定した場合(ステップST603の“YES”の場合)、切替制御部13は、図6のステップST504にて切替先決定部132が決定した切替先遠隔操作装置へ、車両2の遠隔操作の切替を行ってもよい切替タイミングになったと判定する。
 切替制御部13は、切替タイミングになったと判定すると、切替先遠隔操作装置に対して切替指示情報を出力するとともに、切替元遠隔操作装置の操作制御部14に対して、操作情報を生成させないようにする(ステップST604)。
 このように、車両2の遠隔操作を行う遠隔操作装置1の切替が行われる。
 図8は、実施の形態1において、図7のフローチャートで説明したように、車両2の遠隔操作を行う遠隔操作装置1の切替が行われた場合の、当該切替のイメージの一例を説明するための図である。
 切替元遠隔操作装置において、操作情報と準備操作情報との差分が差分判定用閾値を超えていると判定された場合、車両2は、引き続き、切替元遠隔操作装置から出力される操作情報に基づき、遠隔操作される(図8の701参照)。
 その後、切替元遠隔操作装置において、操作情報と準備操作情報との差分が差分判定用閾値以内となったと判定されても、当該差分が差分判定用閾値以内である状態が差分継続判定用時間継続していないと判定された場合、車両2は、引き続き、切替元遠隔操作装置から出力される操作情報に基づき、遠隔操作される(図8の702参照)。
 切替元遠隔操作装置において、操作情報と準備操作情報との差分が差分判定用閾値以内である状態が差分継続判定用時間継続したと判定されると、車両2は、切替先遠隔操作装置から出力される操作情報に基づき、遠隔操作されるようになる(図8の703参照)。
 図9は、候補遠隔操作装置として動作する、実施の形態1に係る遠隔操作装置1の動作について説明するためのフローチャートである。
 検出部15は、遠隔操作装置1、言い換えれば、候補遠隔操作装置、に関する情報を検出する。具体的には、装置情報検出部151は、装置状態情報を検出する。また、操作者情報検出部152は、操作者状態情報を検出する(ステップST801)。
 出力部16は、ステップST801にて検出部15が検出した、候補遠隔操作装置に関する情報を、切替元遠隔操作装置に出力する(ステップST802)。
 切替制御情報取得部115は、切替元遠隔操作装置から、当該切替元遠隔操作装置が出力した切替準備指示情報(図7のステップST601参照)を取得したか否かを判定する(ステップST803)。
 ステップST803において、切替制御情報取得部115が切替準備指示情報を取得していない場合(ステップST803の“NO”の場合)、遠隔操作装置1の動作は、ステップST801に戻り、当該ステップST801以降の動作を行う。
 ステップST803において、切替制御情報取得部115が切替準備指示情報を取得した場合(ステップST803の“YES”の場合)、操作制御部14は、準備操作情報を生成する。そして、操作制御部14は、生成した準備操作情報を、出力部16を介して切替元遠隔操作装置に出力する(ステップST804)。
 切替制御情報取得部115は、切替元遠隔操作装置から、当該切替元遠隔操作装置が出力した切替指示情報(図7のステップST601参照)を取得したか否かを判定する(ステップST805)。
 ステップST805において、切替制御情報取得部115が切替指示情報を取得していない場合(ステップST805の“NO”の場合)、遠隔操作装置1の動作は、ステップST804に戻り、当該ステップST804以降の動作を行う。
 ステップST805において、切替制御情報取得部115が切替指示情報を取得した場合(ステップST805の“YES”の場合)、操作制御部14は、操作情報を生成する。操作制御部14は、生成した操作情報を、出力部16を介して車両2に出力する(ステップST806)。
 ステップST806にて操作情報を出力すると、遠隔操作装置1は、車両2の遠隔操作を行う遠隔操作装置1として動作するようになる(図6,図7参照)。
 図10は、実施の形態1において、切替元遠隔操作装置が切替先遠隔操作装置を決定した後、当該切替先遠隔操作装置が、車両2を遠隔操作する遠隔操作装置1に切り替わるまでの動作のイメージを示すシーケンス図である。
 図10は、図7のフローチャートを用いて説明した切替元遠隔操作装置の動作、および、図9のステップST803~ステップST806で説明した切替先遠隔操作装置の動作を示している。
 切替元遠隔操作装置にて切替先遠隔操作装置を決定すると、切替元遠隔操作装置は、切替先遠隔操作装置に対して、切替準備指示情報を出力する(ステップST901)。
 切替先遠隔操作装置では、切替準備指示情報に付与されている車両情報に基づき、準備操作情報を生成する。切替先遠隔操作装置は、生成した準備操作情報を、切替元遠隔操作装置に出力する(ステップST902)。
 なお、準備操作情報は、車両2には出力されない。車両2は、切替元遠隔操作装置が車両2から取得した車両情報に基づいて生成した操作情報によって、遠隔操作されている(ステップST903~ステップST904)。
 切替元遠隔操作装置は、操作情報と、切替先遠隔操作装置から取得した準備操作情報との差分を算出する(ステップST905)。そして、切替元遠隔操作装置は、算出した差分が差分判定用閾値以内である状態が、差分継続判定用時間継続しているか否かの判定を行う。
 切替元遠隔操作装置において、ステップST905で算出した差分が差分判定用閾値以内である状態が差分継続判定用時間継続するまで、ステップST902~ステップST905を繰り返す。
 切替元遠隔操作装置は、ステップST905で算出した差分が差分判定用閾値以内である状態が差分継続判定用時間継続したと判定すると、切替先遠隔操作装置に対して、切替指示情報を出力する(ステップST906)。このとき、切替元遠隔操作装置は、操作情報の生成を停止する。すなわち、切替元遠隔操作装置から車両2へ、操作情報が出力されなくなる。
 切替先遠隔操作装置は、ステップST906で出力された切替指示情報を取得すると、車両2から取得した車両情報に基づき、操作情報を生成する。切替先遠隔操作装置は、生成した操作情報を車両2に出力する(ステップST907~ステップST908)。なお、このとき、切替先遠隔操作装置は、準備操作情報の生成を停止する。
 以降、切替先遠隔操作装置が車両2の遠隔操作を行う遠隔操作装置1となる。このようにして、車両2を遠隔操作する遠隔操作装置1の切替が行われる。
 以上のように、実施の形態1に係る遠隔操作装置1は、車両2を遠隔操作中に、車両2との通信における通信遅延時間が遅延判定用閾値を超えている場合、車両2を遠隔操作する遠隔操作装置1の切替を行うと判定する。そして、遠隔操作装置1は、候補遠隔操作装置に関する情報に基づき、切替判定条件を満たすか否かによって、候補遠隔操作装置のうちから、切替先遠隔操作装置を決定する。遠隔操作装置1は、決定した切替先遠隔操作装置に対して、切替指示情報を出力することで、車両2を遠隔操作する遠隔操作装置1の切替を行う。
 具体的には、遠隔操作装置1、言い換えれば、切替元遠隔操作装置は、切替先遠隔操作装置を決定すると、まず、切替先遠隔操作装置に対して、切替準備指示情報を出力する。切替元遠隔操作装置は、切替先遠隔操作装置から、切替準備指示情報に応じて生成された準備操作情報を取得し、車両2に出力して当該車両2の遠隔操作を行っている操作情報と、準備操作情報との差分を算出する。そして、切替元遠隔操作装置は、操作情報と準備操作情報との差分が差分判定用閾値以内である状態が差分継続判定用時間継続した場合に、切替先遠隔操作装置に対して、切替指示情報を出力するとともに、当該切替元遠隔操作装置では操作情報を生成しないようにする。
 切替指示情報を取得した切替先遠隔操作装置では、操作情報を生成し、車両2に出力する。切替先遠隔操作装置は、車両2を遠隔操作する遠隔操作装置1に切り替わる。
 実施の形態1に係る遠隔操作装置1は、上述のとおり、車両2を遠隔操作中に、車両2との通信における通信遅延時間が遅延判定用閾値を超えている場合に、遠隔操作装置1の切替を行うと判定するようにしたため、車両2の遠隔操作を行うための通信において存在する通信遅延が大きくなったことによって遠隔運転が正常に行われる状態を維持できなくなることを防ぐことができる。
 ここで、図11は、実施の形態1において、遠隔操作装置1が、車両2との通信における通信遅延時間に基づいて、車両2を遠隔操作する遠隔操作装置1の切替を行うイメージの一例を示す図である。
 図11では、車両2が走行する経路上に、遠隔操作装置1(1001)、遠隔操作装置1(1002)、および、遠隔操作装置1(1003)が設置されているものとしている。
 最初は、車両2の現在位置に一番に近い場所に設置されている遠隔操作装置1(1002)が、車両2を遠隔操作する遠隔操作装置1に決定されたとする。
 その後、車両2が移動すると、車両2と遠隔操作装置1(1002)との距離は大きくなる。そうすると、車両2と遠隔操作装置1(1002)との通信における通信遅延時間も大きくなり、やがては、当該通信遅延時間が遅延時間判定用閾値を超える。
 車両2と遠隔操作装置1(1002)との通信における通信遅延時間が遅延時間判定用閾値を超えると、遠隔操作装置1(1002)は、遠隔操作装置1の切替を行うと判定する。そして、遠隔操作装置1(1002)は、車両2との通信遅延時間が、遠隔操作装置1(1002)よりも短くなる、遠隔操作装置1(1003)を、切替先遠隔操作装置に決定する。
 切替先遠隔操作装置に決定された遠隔操作装置1(1003)は、遠隔操作装置1(1002)から切替指示情報を取得すると、車両2を遠隔操作する。
 また、実施の形態1に係る遠隔操作装置1は、切替元遠隔操作装置である場合、上述のとおり、切替先遠隔操作装置を決定すると、まず、切替先遠隔操作装置に対して準備操作情報を生成させる。切替元遠隔操作装置は、切替先遠隔操作装置から準備操作情報を取得して、操作情報と準備操作情報との差分が差分判定用閾値以内である状態が差分継続判定用時間継続してはじめて、切替先遠隔操作装置を、車両2を遠隔操作する遠隔操作装置1として動作させるよう、遠隔操作装置1の切替を行う。
 実際に遠隔操作装置1の切替が行われ、切替後に切替元遠隔操作装置となった遠隔操作装置1から車両2に対して操作情報が出力される際には、すでに当該遠隔操作装置1は、遠隔操作者によって操作されている。すなわち、切替後に切替元遠隔操作装置となった遠隔操作装置1を切替後の遠隔操作者が操作するまでの間に、遠隔操作装置1は、車両2を停止させる必要がない。その結果、車両2の運行効率を向上させることができる。具体的には、例えば、車両2がタクシー、バス、または、トラック等である場合、遠隔操作装置1は、車両2を停止させる必要がないことで、車両2自体の稼働率を上げることができる。また、遠隔操作装置1は、例えば、車両2を停止させる必要がないことで、車両2を早く目的地に到着させることができる。
 また、一般に、車両2が停止または発進する際には、異常事象が発生する可能性が高くなると推定される。遠隔操作装置1は、切替元遠隔操作装置である場合、車両2を遠隔操作する遠隔操作装置1の切替を行う際に、車両2を停止させる必要がないため、当該切替の際に、異常事象が発生する可能性を低減することができる。
 また、遠隔操作装置1は、車両2を遠隔操作する遠隔操作装置1が変わったとしても、言い換えれば、車両2を遠隔操作する遠隔操作装置1を操作する遠隔操作者が変わったとしても、車両2の制御量が急に大きく変化することを低減することができる。
 以上の実施の形態1において、遠隔操作装置1と車両2とは、例えば、無線通信のみで接続されるものとすることができる。また、例えば、遠隔操作装置1と車両2とは、モバイル通信網、インターネット等の公衆回線網、または、専用回線等の、有線通信と無線通信とを含む通信によって接続されていてもよい。遠隔操作装置1と車両2とは、無線通信または有線通信を含む通信によって接続され、遠隔操作装置1は、通信によって車両2を遠隔操作する。
 遠隔操作装置1と車両2との間の通信における通信遅延は、遠隔操作装置1と車両2との間の無線通信における通信遅延のみならず、遠隔操作装置1と車両2との有線通信における通信遅延も含む。遠隔操作装置1は、車両2を遠隔操作中に、車両2との通信における通信遅延時間が遅延判定用閾値を超えている場合に、遠隔操作装置1の切替を行うと判定することで、車両2の遠隔操作を行うための通信に存在する通信遅延が、遠隔運転が正常に行われる状態を維持することができない程度に大きくなったことによって遠隔運転が正常に行われる状態を維持できなくなることを防ぐことができる。
 また、以上の実施の形態1では、遠隔操作装置1は、差分算出部133を備えるものとしたが、遠隔操作装置1は、差分算出部133を備えることを必須としない。
 遠隔操作装置1は、差分算出部133を備えない場合、切替先決定部132が切替先遠隔操作装置を決定すると、当該切替先遠隔操作装置に対して、切替指示情報を出力する。
 この場合、遠隔操作装置1は、準備操作情報取得部114および準備操作情報出力部165を備えない構成とすることができる。
 また、以上の実施の形態1では、遠隔操作装置1が遠隔操作を行う対象は車両2としたが、これは一例に過ぎない。遠隔操作装置1は、遠隔操作が可能なあらゆる移動体に対して、以上の実施の形態1を適用し、当該移動体の遠隔操作を行うことができる。
 図12A,図12Bは、実施の形態1に係る遠隔操作装置1のハードウェア構成の一例を示す図である。
 実施の形態1において、取得部11と、遅延時間検出部12と、切替制御部13と、操作制御部14と、検出部15と、出力部16の機能は、処理回路1101により実現される。すなわち、遠隔操作装置1は、車両2を遠隔操作中に、当該遠隔操作装置1と車両2との通信における通信遅延時間が遅延時間判定用閾値を超えた場合に、車両2を遠隔操作する遠隔操作装置1を切り替える制御を行うための処理回路1101を備える。
 処理回路1101は、図12Aに示すように専用のハードウェアであっても、図12Bに示すようにメモリ1106に格納されるプログラムを実行するCPU(Central Processing Unit)1105であってもよい。
 処理回路1101が専用のハードウェアである場合、処理回路1101は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ASIC(Application Specific Integrated Circuit)、FPGA(Field-Programmable Gate Array)、またはこれらを組み合わせたものが該当する。
 処理回路1101がCPU1105の場合、取得部11と、遅延時間検出部12と、切替制御部13と、操作制御部14と、検出部15と、出力部16の機能は、ソフトウェア、ファームウェア、または、ソフトウェアとファームウェアとの組み合わせにより実現される。すなわち、取得部11と、遅延時間検出部12と、切替制御部13と、操作制御部14と、検出部15と、出力部16は、メモリ1106等に記憶されたプログラムを実行するCPU1105、またはシステムLSI(Large-Scale Integration)等の処理回路により実現される。また、メモリ1106等に記憶されたプログラムは、取得部11と、遅延時間検出部12と、切替制御部13と、操作制御部14と、検出部15と、出力部16の手順や方法をコンピュータに実行させるものであるとも言える。ここで、メモリ1106とは、例えば、RAM(Random Access Memory)、ROM(Read Only Memory)、フラッシュメモリ、EPROM(Erasable Programmable Read Only Memory)、EEPROM(Electrically Erasable Programmable Read-Only Memory)等の、不揮発性もしくは揮発性の半導体メモリ、磁気ディスク、光ディスク等が該当する。
 なお、取得部11と、遅延時間検出部12と、切替制御部13と、操作制御部14と、検出部15と、出力部16の機能について、一部を専用のハードウェアで実現し、一部をソフトウェアまたはファームウェアで実現するようにしてもよい。例えば、取得部11および出力部16については専用のハードウェアとしての処理回路1101でその機能を実現し、遅延時間検出部12と、切替制御部13と、操作制御部14と、検出部15については処理回路1101がメモリ1106に格納されたプログラムを読み出して実行することによってその機能を実現することが可能である。
 また、遠隔操作装置1は、車両2または他の遠隔操作装置1との通信を行う、入力インタフェース装置1103、および、出力インタフェース装置1104を有する。図示を省略した通信部は、入力インタフェース装置1103および出力インタフェース装置1104で構成される。
 以上のように、実施の形態1に係る遠隔操作装置1は、通信によって移動体を遠隔操作可能な遠隔操作装置1であって、通信によって移動体を遠隔操作可能な他の遠隔操作装置1、に関する情報を取得する取得部11と、移動体との通信における通信遅延時間を検出する遅延時間検出部12と、遅延時間検出部12が検出した通信遅延時間は遅延時間判定用閾値を超えているか否かを判定する遅延時間判定部131と、遅延時間判定部131が、通信遅延時間は遅延時間判定用閾値を超えていると判定した場合、取得部11が取得した他の遠隔操作装置1に関する情報に基づき、切替判定条件を満たすか否かによって、他の遠隔操作装置1のうちから切替先遠隔操作装置を決定する切替先決定部132と、切替先決定部132が決定した切替先遠隔操作装置に対して、移動体を遠隔操作させる切替指示情報を出力する切替制御部13とを備えるように構成した。そのため、遠隔操作装置1は、車両2の遠隔操作を行うための通信に存在する通信遅延が、遠隔運転が正常に行われる状態を維持することができない程度に大きくなったことによって遠隔運転が正常に行われる状態を維持できなくなることを防ぐことができる。
 また、実施の形態1に係る遠隔操作装置1は、移動体を遠隔操作するための操作情報を生成する操作制御部14と、切替先遠隔操作装置から、切替先遠隔操作装置が生成した、移動体を遠隔操作するための準備操作情報を取得する準備操作情報取得部114と、操作制御部14が生成した操作情報と、準備操作情報取得部114が取得した準備操作情報との差分を算出する差分算出部133とを備え、切替制御部13は、差分算出部133が算出した差分が差分判定用閾値以内である状態が差分継続判定用時間継続した場合に、切替先遠隔操作装置に対して、切替指示情報を出力するとともに、操作制御部14に対して、操作情報を生成させないようにするよう構成した。遠隔操作装置1は、切替後の遠隔操作装置1を、切替後の遠隔操作者が操作するまでの間に、車両2を停止させる必要がない。その結果、車両2の運行効率を向上させることができる。
 また、遠隔操作装置1は、車両2を遠隔操作する遠隔操作装置1が変わったとしても、言い換えれば、車両2を遠隔操作する遠隔操作装置1を操作する遠隔操作者が変わったとしても、車両2の制御量が急に大きく変化することを低減することができる。
 なお、本願発明はその発明の範囲内において、実施の形態の任意の構成要素の変形、もしくは実施の形態の任意の構成要素の省略が可能である。
 この発明に係る遠隔操作装置は、移動体の遠隔操作を行うための通信に存在する通信遅延が、遠隔運転が正常に行われる状態を維持することができない程度に大きくなったことによって遠隔運転が正常に行われる状態を維持できなくなることを防ぐことができるように構成したため、移動体を遠隔操作する遠隔操作装置に適用することができる。
 1 遠隔操作装置、11 取得部、111 装置情報取得部、112 操作者情報取得部、113 車両情報取得部、114 準備操作情報取得部、115 切替制御情報取得部、12 遅延時間検出部、13 切替制御部、131 遅延時間判定部、132 切替先決定部、133 差分算出部、14 操作制御部、15 検出部、151 装置情報検出部、152 操作者情報検出部、16 出力部、161 装置情報出力部、162 操作者情報出力部、163 切替制御情報出力部、164 操作情報出力部、165 準備操作情報出力部、1101 処理回路、1102 HDD、1103 入力インタフェース装置、1104 出力インタフェース装置、1105 CPU、1106 メモリ。

Claims (5)

  1.  通信によって移動体を遠隔操作可能な遠隔操作装置であって、
     前記通信によって前記移動体を遠隔操作可能な他の遠隔操作装置、に関する情報を取得する取得部と、
     前記移動体との前記通信における通信遅延時間を検出する遅延時間検出部と、
     前記遅延時間検出部が検出した通信遅延時間は遅延時間判定用閾値を超えているか否かを判定する遅延時間判定部と、
     前記遅延時間判定部が、前記通信遅延時間は前記遅延時間判定用閾値を超えていると判定した場合、前記取得部が取得した前記他の遠隔操作装置に関する情報に基づき、切替判定条件を満たすか否かによって、前記他の遠隔操作装置のうちから切替先遠隔操作装置を決定する切替先決定部と、
     前記切替先決定部が決定した切替先遠隔操作装置に対して、前記移動体を遠隔操作させる切替指示情報を出力する切替制御部
     とを備えた遠隔操作装置。
  2.  前記取得部は、前記他の遠隔操作装置と前記移動体との通信遅延時間に関する装置状態情報を取得する装置情報取得部を備え、
     前記切替判定条件とは、前記装置情報取得部が取得した、前記他の遠隔操作装置と前記移動体との通信遅延時間が、他装置遅延時間判定用閾値以下であることである
     ことを特徴とする請求項1記載の遠隔操作装置。
  3.  前記取得部は、前記他の遠隔操作装置を操作する遠隔操作者の状態に関する操作者状態情報を取得する操作者情報取得部を備え、
     前記切替判定条件とは、前記操作者情報取得部が取得した、前記他の遠隔操作装置を操作する前記遠隔操作者の状態が、当該他の遠隔操作装置を操縦可能な状態であり、かつ、前記装置情報取得部が取得した、前記他の遠隔操作装置と前記移動体との通信遅延時間が前記他装置遅延時間判定用閾値以下であることである
     ことを特徴とする請求項2記載の遠隔操作装置。
  4.  前記移動体を遠隔操作するための操作情報を生成する操作制御部と、
     前記切替先遠隔操作装置から、当該切替先遠隔操作装置が生成した、前記移動体を遠隔操作するための準備操作情報を取得する準備操作情報取得部と、
     前記操作制御部が生成した前記操作情報と、前記準備操作情報取得部が取得した準備操作情報との差分を算出する差分算出部とを備え、
     前記切替制御部は、
     前記差分算出部が算出した差分が差分判定用閾値以内である状態が差分継続判定用時間継続した場合に、前記切替先遠隔操作装置に対して、前記切替指示情報を出力するとともに、前記操作制御部に対して、前記操作情報を生成させないようにする
     ことを特徴とする請求項1記載の遠隔操作装置。
  5.  通信によって移動体を遠隔操作可能な遠隔操作装置による遠隔操作方法であって、
     取得部が、前記通信によって前記移動体を遠隔操作可能な他の遠隔操作装置、に関する情報を取得するステップと、
     遅延時間検出部が、前記移動体との前記通信における通信遅延時間を検出するステップと、
     遅延時間判定部が、前記遅延時間検出部が検出した通信遅延時間は遅延時間判定用閾値を超えているか否かを判定するステップと、
     切替先決定部が、前記遅延時間判定部が前記通信遅延時間は前記遅延時間判定用閾値を超えていると判定した場合、前記取得部が取得した前記他の遠隔操作装置に関する情報に基づき、切替判定条件を満たすか否かによって、前記他の遠隔操作装置のうちから切替先遠隔操作装置を決定するステップと、
     切替制御部が、前記切替先決定部が決定した切替先遠隔操作装置に対して、前記移動体を遠隔操作させる切替指示情報を出力するステップ
     とを備えた遠隔操作方法。
PCT/JP2019/050746 2019-12-25 2019-12-25 遠隔操作装置、および、遠隔操作方法 WO2021130880A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
DE112019007998.0T DE112019007998T5 (de) 2019-12-25 2019-12-25 Fernbedienungsvorrichtung und Fernbedienungsverfahren
JP2021566622A JP7221420B2 (ja) 2019-12-25 2019-12-25 遠隔操作装置、および、遠隔操作方法
PCT/JP2019/050746 WO2021130880A1 (ja) 2019-12-25 2019-12-25 遠隔操作装置、および、遠隔操作方法
CN201980103150.6A CN114868094A (zh) 2019-12-25 2019-12-25 远程操作装置以及远程操作方法
US17/781,204 US20220413489A1 (en) 2019-12-25 2019-12-25 Remote operation device and remote operation method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2019/050746 WO2021130880A1 (ja) 2019-12-25 2019-12-25 遠隔操作装置、および、遠隔操作方法

Publications (1)

Publication Number Publication Date
WO2021130880A1 true WO2021130880A1 (ja) 2021-07-01

Family

ID=76573127

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/050746 WO2021130880A1 (ja) 2019-12-25 2019-12-25 遠隔操作装置、および、遠隔操作方法

Country Status (5)

Country Link
US (1) US20220413489A1 (ja)
JP (1) JP7221420B2 (ja)
CN (1) CN114868094A (ja)
DE (1) DE112019007998T5 (ja)
WO (1) WO2021130880A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4271003A1 (en) * 2022-04-28 2023-11-01 Faurecia Clarion Electronics Co., Ltd. Communication control apparatus and communication control method

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS60203029A (ja) * 1984-03-28 1985-10-14 Kawasaki Steel Corp 無人運転装置
JP2016018238A (ja) * 2014-07-04 2016-02-01 株式会社デンソー 車両の運転モード制御装置
WO2019077739A1 (ja) * 2017-10-20 2019-04-25 株式会社日立製作所 移動体制御システム

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006301723A (ja) 2005-04-15 2006-11-02 Toyota Motor Corp 遠隔操作システム
JP6650386B2 (ja) 2016-11-09 2020-02-19 本田技研工業株式会社 遠隔運転制御装置、車両制御システム、遠隔運転制御方法、および遠隔運転制御プログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS60203029A (ja) * 1984-03-28 1985-10-14 Kawasaki Steel Corp 無人運転装置
JP2016018238A (ja) * 2014-07-04 2016-02-01 株式会社デンソー 車両の運転モード制御装置
WO2019077739A1 (ja) * 2017-10-20 2019-04-25 株式会社日立製作所 移動体制御システム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4271003A1 (en) * 2022-04-28 2023-11-01 Faurecia Clarion Electronics Co., Ltd. Communication control apparatus and communication control method

Also Published As

Publication number Publication date
JP7221420B2 (ja) 2023-02-13
US20220413489A1 (en) 2022-12-29
JPWO2021130880A1 (ja) 2021-07-01
DE112019007998T5 (de) 2022-12-15
CN114868094A (zh) 2022-08-05

Similar Documents

Publication Publication Date Title
JP6866811B2 (ja) 自動運転車両
US9573522B2 (en) Vehicle seat haptic indication of future planned driving maneuvers
US10717448B1 (en) Automated transfer of vehicle control for autonomous driving
US11256251B2 (en) Enabling remote control of a vehicle
JPH1049230A (ja) 道路条件による制御機能を具備した無人自動車システム
JP2018045274A (ja) 車両制御装置
WO2020142717A1 (en) Methods and systems for increasing autonomous vehicle safety and flexibility using voice interaction
JP2016078530A (ja) 自動運転システム
EP2878347B1 (en) Training system and training method
JP2011177205A (ja) 電動車椅子の走行制御方法
US10703364B2 (en) Vehicle control system
WO2021130880A1 (ja) 遠隔操作装置、および、遠隔操作方法
JP2007249757A (ja) 警報装置
KR20210146488A (ko) 자율 주행 제어 방법 및 장치
JP6742378B2 (ja) 車両制御装置および車両制御方法
JP2019209784A (ja) 状態判定装置、運転支援装置、状態判定方法、及び、運転支援方法
JP7052260B2 (ja) カメラ付き移動体、カメラ付き移動体制御システム、及びプログラム
JP6776535B2 (ja) 車両制御装置
JP2024026539A (ja) 制御装置、方法およびプログラム
JP6607180B2 (ja) 自動運転装置
JP6733572B2 (ja) 駐車支援装置
JP4265992B2 (ja) 運転支援装置
WO2022118476A1 (ja) 自動運転システム、サーバ、および、ダイナミックマップの生成方法
JP2018151937A (ja) 制御プログラム及び移動体
JP2010238182A (ja) 自律移動体及び不審者検知方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19957650

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2021566622

Country of ref document: JP

Kind code of ref document: A

122 Ep: pct application non-entry in european phase

Ref document number: 19957650

Country of ref document: EP

Kind code of ref document: A1