WO2023112501A1 - 移動体端末、無線通信システム、および通信制御プログラム - Google Patents

移動体端末、無線通信システム、および通信制御プログラム Download PDF

Info

Publication number
WO2023112501A1
WO2023112501A1 PCT/JP2022/039872 JP2022039872W WO2023112501A1 WO 2023112501 A1 WO2023112501 A1 WO 2023112501A1 JP 2022039872 W JP2022039872 W JP 2022039872W WO 2023112501 A1 WO2023112501 A1 WO 2023112501A1
Authority
WO
WIPO (PCT)
Prior art keywords
mobile terminal
data
command
time
communication
Prior art date
Application number
PCT/JP2022/039872
Other languages
English (en)
French (fr)
Inventor
憲昭 朝本
Original Assignee
コニカミノルタ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by コニカミノルタ株式会社 filed Critical コニカミノルタ株式会社
Publication of WO2023112501A1 publication Critical patent/WO2023112501A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30Services specially adapted for particular environments, situations or purposes
    • H04W4/40Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • H04W4/44Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P] for communication between vehicles and infrastructures, e.g. vehicle-to-cloud [V2C] or vehicle-to-home [V2H]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W76/00Connection management
    • H04W76/10Connection setup
    • H04W76/15Setup of multiple wireless link connections
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02Terminal devices
    • H04W88/06Terminal devices adapted for operation in multiple networks or having at least two operational modes, e.g. multi-mode terminals

Definitions

  • the present invention relates to mobile terminals, wireless communication systems, and communication control programs.
  • Patent Document 1 for example, as a technology for connecting mobile terminals to networks.
  • a system for roaming between a private communication network such as PHS (Personal Handy-phone System) and a carrier communication network such as LTE (Long Term Evolution) or between a plurality of private communication networks A roaming controller is disclosed.
  • an object of the present invention is to provide a mobile terminal, a wireless communication system, and a communication control program in which no or little delay occurs in acquiring data when the mobile terminal moves between multiple networks. It is to be.
  • a mobile terminal that moves while performing wireless communication with the outside, a connection unit that simultaneously connects to multiple wireless networks; a receiving unit that receives data related to movement of the mobile terminal from the plurality of wireless networks connected by the connecting unit; and a processing unit that executes only the first received data for the same data received via the plurality of wireless networks.
  • the data includes time-series information added at the time of transmission of the data;
  • time-series information includes a time stamp or a sequence number.
  • the processing unit generates a data request for autonomous movement of the mobile terminal; a transmission unit configured to transmit the data request to the plurality of wireless networks connected by the connection unit;
  • the mobile terminal according to any one of (1) to (6) above, wherein the data request includes time series information.
  • a wireless communication system comprising the mobile terminal according to any one of claims 1 to 7, a plurality of wireless networks having wireless communication stations, and an information processing device connected to the wireless networks.
  • (12) further comprising a distribution server that duplicates the data transmitted by the information processing device and transmits the duplicated data to the mobile terminal;
  • the wireless communication system according to any one of (8) to (11) above, wherein the distribution server is connected to the plurality of wireless networks and transmits the same data to the plurality of wireless networks.
  • the wireless network is connected to a mobility management server that performs authentication required for mutual connection between the mobile terminal and the information processing device and/or the neighboring device;
  • the mobile terminal registers connection information with the plurality of wireless networks in the mobility management server that has been mutually authenticated, and the information processing device or the neighboring device obtains the connection information from the mobility management server.
  • the wireless communication system according to (10) above, wherein mutual authentication is performed with the mobile terminal for connection.
  • a communication control program for a mobile terminal that moves while performing wireless communication with the outside (a) simultaneously connecting to a plurality of wireless networks; (b) receiving data relating to movement of said mobile terminal from said plurality of wireless networks connected by said step (a);
  • the data includes time-series information added at the time of transmission of the data;
  • the mobile terminal of the present invention simultaneously connects to multiple wireless networks and executes the first acquired data.
  • the mobile terminal moves, before the communication with the wireless network of the movement source is cut off, the connection with the wireless network of the movement destination is established, so data can be acquired and executed. Therefore, according to the present invention, even if a mobile terminal moves between multiple wireless networks, there is no or little delay in data acquisition.
  • FIG. 1 is a schematic diagram showing the configuration of a radio communication system according to an embodiment
  • FIG. 2 is a block diagram for explaining functions of a mobile terminal
  • FIG. 4 is a block diagram for explaining more detailed functions of a control unit
  • FIG. 4 is a flow chart for explaining a procedure of communication control using a time stamp method
  • 4 is a flowchart for explaining a procedure of communication control using a sequence number method
  • FIG. 4 is an explanatory diagram for explaining a processing example of a mobile terminal
  • 4 is a time chart for explaining roaming and handover
  • FIG. 4 is an explanatory diagram for explaining a first communication pattern performed between a remote control terminal and a mobile terminal
  • FIG. 4 is an explanatory diagram for explaining a first communication pattern performed between a remote control terminal and a mobile terminal;
  • FIG. 4 is an explanatory diagram for explaining a first communication pattern performed between a remote control terminal and a mobile terminal;
  • FIG. 4 is an explanatory diagram for explaining a first communication pattern performed between a remote control terminal and a mobile terminal;
  • FIG. 4 is an explanatory diagram for explaining a second communication pattern performed between a remote control terminal and a mobile terminal;
  • FIG. 4 is an explanatory diagram for explaining a second communication pattern performed between a remote control terminal and a mobile terminal;
  • FIG. 1 is a schematic diagram showing the configuration of a radio communication system according to an embodiment.
  • the wireless communication system 1 includes a mobile terminal 100, a remote control terminal 200, a mobile management server 300, an MEC (Multi-access Edge Computing) server 310 (311 to 313), a distribution It has a server 350 and a plurality of wireless communication stations 400 (401-404).
  • MEC Multi-access Edge Computing
  • the plurality of MEC servers 310 are a first MEC server 311, a second MEC server 312, and a third MEC server 313.
  • the first MEC server 311 to the third MEC server 313 are referred to as the MEC server 310 when they are not distinguished (including when any one of them is indicated without distinction; the same shall apply hereinafter) or collectively.
  • the plurality of wireless communication stations 400 includes a private 5G wireless communication base station (local 5G station 401 (other than millimeter waves)), a private 5G wireless communication base station using millimeter waves (millimeter wave local 5G stations 402), WiFi access point (WiFi AP 403), and the carrier's 5G wireless communication base station (carrier 5G station 404).
  • Local 5G station 401 , mmWave local 5G station 402 , WiFi AP 403 and carrier 5G station 404 are referred to as wireless communication station 400 when not distinguished or collectively referred to.
  • the remote control terminal 200, mobile unit management server 300, second MEC server 312, third MEC server 313, and distribution server 350 are connected to the Internet 510.
  • a first MEC server 311 and a second MEC server 312 are connected to a local 5G station 401 and constitute a local 5G network 501 .
  • the second MEC server 312 is connected to a millimeter wave local 5G station 402 , which constitute a millimeter wave local 5G network 502 .
  • a WiFi AP 403 directly connected to the Internet 510 constitutes a WiFi network 503 .
  • the third MEC server 313 is connected to a carrier 5G station 404, which constitute a carrier 5G network 504.
  • the wireless communication system 1 has multiple wireless networks.
  • the local 5G network 501, the millimeter wave local 5G network 502, the WiFi network 503, and the carrier 5G network 504 are referred to as network 500 when they are not distinguished or collectively referred to.
  • Network 500 also includes the Internet 510 unless otherwise specified.
  • the communicable range of the local 5G station 401 is the local 5G area 4011.
  • the communicable range of the millimeter wave local 5G station 402 is the millimeter wave local 5G area 4021
  • the communicable range of the WiFi AP 403 is the WiFi area 4031
  • the communicable range of the carrier 5G station 404 is the carrier area 4041. is.
  • the carrier area 4041 has a range that overlaps with the local 5G area 4011, the millimeter wave local 5G area 4021, and the WiFi area 4031.
  • An obstacle 800 exists in the millimeter wave local 5G area 4021 . If there is an obstacle, a range 801 where millimeter waves cannot reach occurs due to the characteristics of millimeter waves.
  • the configuration of the network 500 is not particularly limited as long as the remote control terminal 200 and the mobile terminal 100 can communicate in some way. Moreover, depending on the configuration of the network 500, both may not be directly connected. For example, if the mobile terminal 100 exists in a private (local) network 500 , the mobile terminal 100 is assigned a private IP address that is valid only within that network 500 . In such a case, remote control terminal 200 connected to Internet 510, which is a global network, cannot transmit data packets to mobile terminal 100 even if the private IP address of mobile terminal 100 is specified. In that case, the packet is sent by a router present in the local 5G network 501 forwarding the packet to the private IP address of the mobile terminal 100 .
  • the remote control terminal 200 cannot grasp the IP address (care-of address) in the destination network 500 assigned to the mobile terminal 100 .
  • IP address care-of address
  • a home agent to which a permanent home address is assigned is prepared, remote control terminal 200 transmits a packet to the home address, the home agent receives the packet and transfers it to mobile terminal 100. good too.
  • a plurality of communication sessions may be set up directly between the remote control terminal 200 and the mobile terminal 100, or the distribution server 350 may be used to substitute data distribution to a plurality of communication paths.
  • one distribution server 350 may be provided, or a plurality of distribution servers (not shown) may be arranged.
  • the distribution server 350 may exist on the remote control terminal 200 side as viewed from the Internet 510 , or may exist on the mobile terminal 100 side and be directly connected to the network 500 .
  • the distribution server 350 is arranged at an optimum position in consideration of latency, stability of communication, and the like.
  • Distribution server 350 receives data from remote control terminal 200 and stores a copy of the data.
  • Distribution server 350 transmits the duplicated data to mobile terminal 100 . At this time, distribution server 350 sends the data to multiple networks.
  • the distribution server 350 When the distribution server 350 handles a small amount of data such as remote control data (commands), it uses, for example, the MQTT (Message Queuing Telemetry Transport) protocol.
  • An MQTT broker is mounted on the data distribution side (here, the distribution server 350), and an MQTT client is mounted on the data transmission/reception terminal side (here, the remote control terminal 200 and the mobile terminal 100).
  • a client on the transmitting side is called a publisher
  • a client on the receiving side is called a subscriber.
  • remote control terminal 200 transmits remote control data (command) to mobile terminal 100
  • remote control terminal 200 is the publisher and mobile terminal 100 is the subscriber.
  • the mobile terminal 100 transmits status data to the remote control terminal 200
  • the mobile terminal 100 is the publisher and the remote control terminal 200 is the subscriber.
  • a route is constructed from the remote control terminal 200 (MQTT client) to the distribution server 350 (MQTT broker), multiple networks, and the mobile terminal 100 (MQTT client).
  • MQTT client the remote control terminal 200
  • MQTT broker the distribution server 350
  • MQTT client the mobile terminal 100
  • One piece of data is transmitted from the remote control terminal 200 to the MQTT broker, and the multiple pieces of data are generated by the MQTT broker and delivered to the mobile terminal 100 .
  • remote control data commands
  • the mobile terminal 100 via two routes, the local 5G network 501 and the carrier 5G network 504.
  • a route from the mobile terminal 100 to the remote control terminal 200 is determined using a connection request from the mobile terminal 100 to the remote control terminal 200 as a trigger.
  • This path may be selected from statically created paths in advance, or may be dynamically generated.
  • the MQTT client of the mobile terminal 100 registers (subscribes) to the MQTT broker of the distribution server 350 a topic representing the remote control data (command).
  • a bridge is set so that data is transferred between MQTT brokers as necessary. These settings are made for each communication path.
  • the remote control data (command) is transmitted (published) from the remote control terminal 200 (MQTT client) to the distribution server 350
  • the remote control data (command) is duplicated in the distribution server 350 and distributed to the local 5G network 501 and the carrier 5G network. 504 at the same time, and the remote control data (command) reaches the mobile terminal 100 (MQTT client) through two routes.
  • the MQTT broker is implemented in the distribution server 350 here, the MQTT broker may be implemented in the MEC server 310 to have the function of a distribution server.
  • the mobile terminal 100 can be connected to multiple networks 500 simultaneously.
  • the mobile terminal 100 processes data acquired via the network 500 and is remotely operated.
  • the mobile terminal 100 may process data acquired via the network 500 and move autonomously.
  • the mobile terminal 100 is, for example, an automatic guided vehicle (AGV), a movable robot, an aerial drone, an underwater or water drone, or the like.
  • the mobile terminal 100 may be, for example, a smart phone, a tablet computer, or the like that is attached to a vehicle or the like and controls the vehicle.
  • the mobile terminal 100 may include a night vision camera, an infrared camera (including a thermo camera), and other sensors in addition to a visible light camera that takes pictures with visible light.
  • mobile terminal 100 may include a display for displaying information to surrounding people.
  • the remote control terminal 200 is an information processing device for remotely controlling the mobile terminal 100 .
  • the remote control terminal 200 is an information processing device that instructs the mobile terminal 100, which moves autonomously, about a movement route and the like.
  • the remote control terminal 200 is connected to the Internet 510. Also, the remote control terminal 200 may be directly connected to a network 500 other than the Internet 510, the MEC server 310, the distribution server 350, and the like.
  • the remote control terminal 200 transmits a command related to operation to the mobile terminal 100 in real time.
  • a command is remote control data for remotely controlling the mobile terminal 100 .
  • Data transmitted from remote control terminal 200 to mobile terminal 100 is transmitted to mobile terminal 100 via network 500 .
  • the remote control terminal 200 sends one piece of data to multiple networks.
  • the data may also be transmitted to distribution server 350 via Internet 510 or directly, and transmitted from distribution server 350 to mobile terminal 100 .
  • distribution server 350 can be an information processing device.
  • data transmitted from the mobile terminal 100 to the remote control terminal 200 is also transmitted via the network 500.
  • the remote control terminal 200 uploads autonomous movement data necessary for autonomous movement to the mobile terminal 100 .
  • the autonomous movement data transmitted from the remote control terminal 200 is transmitted to the mobile terminal 100 via the network 500 .
  • the remote control terminal 200 receives responses and requests from the mobile terminal 100, as well as data such as images. Data transmitted from mobile terminal 100 is transmitted to remote control terminal 200 via network 500 .
  • the data for autonomous movement may be uploaded from the remote control terminal 200 to the mobile object management server 300 and/or the MEC server 310 via the Internet 510.
  • the data for autonomous movement may be transmitted to the distribution server 350 via the Internet 510 or directly, and then transmitted from the distribution server 350 to the mobile terminal 100 .
  • distribution server 350 can be an information processing device.
  • the data for autonomous movement is, for example, the map of the movement range, the movement route, and the contents of the movement during movement.
  • the remote control terminal 200 may wirelessly communicate directly with the mobile terminal 100 without intervening the network 500 .
  • the remote control terminal 200 functions as one of the wireless communication stations 400 and a separate local 5G network 501 is configured with the mobile terminal 100 .
  • the remote control terminal 200 may be connected to another network 500 that is connected to the network 500 to which the mobile terminal 100 is currently connected via the Internet 510, or may be connected to the same network as the mobile terminal 100. 500 may be connected.
  • the mobile management server 300 is the same, and can be located anywhere as long as it can be accessed from the remote control terminal 200 and the mobile terminal 100 .
  • the mobile management server 300 performs authentication for connecting communication with the mobile terminal 100 and the remote control terminal 200 .
  • the mobile object management server 300 is a cloud server connected to the Internet 510.
  • Mobile object management server 300 stores communication information necessary for communicating with remote control terminal 200 , mobile object management server 300 , MEC server 310 , and mobile terminal 100 .
  • each identification code IP (Internet Protocol) address, MAC (Media Access Control) address, edge device UUID (Universally Unique Identifier, etc.) is stored.
  • the edge device is IoT equipment including the mobile terminal 100 .
  • the communication information to be stored differs depending on the configuration of network 500, the communication mode between wireless communication station 400 and remote control terminal 200, the communication mode between wireless communication station 400 and mobile terminal 100, and the like.
  • the mobile terminal 100 registers connection information with a plurality of networks 500 in the mutually authenticated mobility management server 300 .
  • Remote control terminal 200 or MEC server 310 acquires connection information from mobile management server 300 and performs mutual authentication with mobile terminal 100 to connect.
  • the mobile object management server 300 may store information necessary for autonomous movement.
  • mobile object management server 300 may be directly connected to network 500 other than Internet 510 without intervening Internet 510 .
  • the mobility management server 300 may be connected to another network 500 or the Internet 510 via the connected network 500 .
  • the mobile object management server 300 is not limited to a cloud server.
  • the mobility management server 300 may wirelessly communicate directly with the mobile terminal 100 without intervening the network 500 .
  • the mobility management server 300 functions as one of the plurality of wireless communication stations 400 and configures a separate local 5G network 501 with the mobile terminal 100 .
  • the mobility management server 300, the remote control terminal 200, and the mobile terminal 100 may be connected to the same network 500.
  • the mobile management server 300, the remote control terminal 200, and the mobile terminal 100 may be connected to different networks 500, and the networks to which they are connected may be connected to each other via a dedicated line or the Internet 510. .
  • connection and authentication between the mobile terminal 100 and the remote control terminal 200 may be mutually performed by at least one or both of the mobile terminal 100 and the remote control terminal 200. In such cases, mobility management server 300 may not be provided.
  • MEC server MEC server 310 is located in one of multiple networks 500 .
  • Each MEC server 310 is a neighboring device for mediating communication between mobile terminal 100 and remote control terminal 200 or mobility management server 300 .
  • the MEC server 310 is located in front of the Internet 510 when viewed from the mobile terminal 100 on the communication path. Separate communication sessions may be established between remote control terminal 200 and MEC server 310 and between MEC server 310 and mobile terminal 100 . Therefore, when a direct communication session is not established between the mobile terminal 100 and the remote control terminal 200 or the mobile management server 300, any MEC server 310 in the middle of the communication path acts as an intermediary to transfer the data. Transmission and reception are performed.
  • the MEC server 310 transmits data transmitted from the remote control terminal 200 or the mobile object management server 300 to the mobile terminal 100 in real time via the radio communication station 400 .
  • the MEC server 310 processes the data instead. For example, when the mobile terminal 100 does not have enough CPU power to perform image analysis by AI, the mobile terminal 100 transmits image data to the MEC server 310 .
  • the MEC server 310 performs image analysis on the image data using AI, and transmits (responses) the result to the mobile terminal 100 .
  • the MEC server 310 may transmit data to the mobile terminal 100 based on its own processing results.
  • the data origin is the MEC server 310 .
  • Unique data is an emergency stop command.
  • the transmission of the emergency stop command is, for example, when the signal normally sent from the mobile terminal 100 stops, or when an abnormality is detected within the range of movement of the mobile terminal 100, a signal from the mobile terminal 100 notifying the abnormality. is issued.
  • the MEC server 310 transmits an emergency stop command to the mobile terminal 100 without notifying the remote control terminal 200 of these abnormalities.
  • the present embodiment can quickly stop the mobile terminal 100 without waiting for an instruction from the remote control terminal 200 .
  • the emergency stop command is issued, for example, when the AI installed in the MEC server 310 detects that a person is approaching the mobile terminal 100 as a result of image analysis of the image data.
  • the image data is transmitted to the MEC server 310 from, for example, the mobile terminal 100 or from a camera capturing the moving range of the mobile terminal 100 .
  • the MEC server 310 near the mobile terminal 100 can shorten at least the data transmission time. Therefore, by allowing the MEC server 310 to make a determination of emergency stop, the emergency stop can be made more quickly.
  • MEC server 310 does not necessarily have to be located between the communication path between the remote control terminal 200 and the mobile terminal 100 .
  • MEC server 310 may be connected to at least one network, eg, first MEC server 311 shown in FIG. In this case, first MEC server 311 does not need to relay data from remote control terminal 200 .
  • the MEC server 310 does not have to be installed on the physical path connecting the remote control terminal 200 and the mobile terminal 100.
  • MEC server 310 may be directly connected to remote control terminal 200 without intervening network 500 .
  • MEC server 310 may also be directly connected to mobility management server 300 without intervening network 500 .
  • a plurality of wireless communication stations 400 may be connected to the same network 500 or may be connected to different networks 500 . Also, any one of the radio communication stations 400 may be directly connected to the remote control terminal 200 or the mobility management server 300 .
  • Each wireless communication station 400 is operated for each wireless communication mode.
  • a local 5G station 401 is used with a predetermined range of users.
  • the millimeter wave local 5G station 402 is used at a higher speed and in a directional range by using millimeter waves.
  • WiFi AP 403 is connected to network 500 via a local area network (LAN) or the like.
  • WiFi AP 403 is used in a narrower range than 5G.
  • Carrier 5G stations 404 are available to anyone with a subscription, just like a mobile phone. However, the communication speed and communicable range of each wireless communication station 400 differ depending on the system configuration of the wireless communication station 400 .
  • FIG. 2 is a block diagram for explaining the functions of the mobile terminal 100. As shown in FIG. Mobile terminal 100 has control section 110 , sensor section 120 and drive section 130 . Note that FIG. 2 shows a local 5G station 401 and a carrier 5G station 404 as wireless communication stations 400, and other wireless communication stations 400 are omitted.
  • the sensor unit 120 consists of sensors such as a camera and a positioning sensor, for example. Camera images may be sent to the remote control terminal 200 and the MEC server 310 . Also, as described above, the image may be subjected to image analysis by AI on the MEC server 310 or on the mobile terminal 100 and used to determine the operation of the mobile terminal 100 .
  • the positioning sensor is used to grasp the position when the mobile terminal 100 moves autonomously. Also, when the mobile terminal 100 does not move autonomously only by remote control, the mobile terminal 100 transmits the current position to the remote control terminal 200 based on the signal from the positioning sensor.
  • a positioning sensor for example, a GNSS (Global Navigation Satellite System) may be used. Also, as the positioning sensor, LiDAR (Laser Imaging Detection and Ranging), UWB (Ultra Wide Band), etc. may be used. If the mobile terminal 100 does not move autonomously only by remote control, the positioning sensor may not be provided.
  • GNSS Global Navigation Satellite System
  • LiDAR Laser Imaging Detection and Ranging
  • UWB Ultra Wide Band
  • the drive unit 130 has a motor, gear mechanism, etc. necessary for moving the mobile terminal 100 .
  • Drive unit 130 operates a motor, a gear mechanism, and the like under the control of control unit 110 .
  • the configuration of the driving unit 130 differs depending on the configuration of the mobile terminal 100. FIG.
  • the control unit 110 has a connection unit 101 , a transmission/reception unit 102 , a processing unit 103 and a storage unit 104 .
  • FIG. 3 is a block diagram for explaining more detailed functions of the control unit 110. As shown in FIG.
  • connection unit 101 connects to multiple wireless communication stations 400 at the same time.
  • the connection section 101 has a plurality of communication units, as shown in FIG.
  • the multiple communication units are the first communication unit 111, the second communication unit 112, and the n-th communication unit 11n.
  • a plurality of communication units are provided so that they can be connected to at least two networks 500 at the same time.
  • Each communication unit is provided according to the communication form to be connected. For example, if there is a possibility of connecting to a plurality of 5G wireless communication stations 400 at the same time, a plurality of 5G-compatible communication units are provided.
  • a communication unit corresponding to 5G and a communication unit corresponding to the WiFi AP 403 are provided.
  • the mobile terminal 100 comprises an antenna connected to each communication unit. Antennas are provided in accordance with the wavelength bands of radio waves used by wireless communication stations 400 with which there is a possibility of connection.
  • the first communication unit 111 corresponds to the local 5G station 401
  • the second communication unit 112 corresponds to the carrier 5G station 404
  • the nth communication unit 11n corresponds to other radio stations.
  • the communication station 400 corresponds to the communication station 400 .
  • Each communication unit has a receive buffer 1111 and a transmit buffer 1112 .
  • the reception buffer 1111 temporarily stores data received from the connected wireless communication station 400 .
  • the transmission buffer 1112 temporarily stores data to be transmitted from now on.
  • the transmitting/receiving section 102 receives data via a plurality of networks 500 connected by the connecting section 101 (function of the receiving section). Also, the transmitting/receiving unit 102 transmits data via a plurality of networks 500 connected by the connecting unit 101 (function of the transmitting unit).
  • the transmission/reception unit 102 creates an integrated command queue 1041 after establishing a connection with one of the networks 500 .
  • Integrated command queue 1041 is created in storage unit 104 .
  • the transmitting/receiving section 102 retrieves the data from the receiving buffer 1111 of each communication unit when the data is temporarily stored in the receiving buffer 1111 of each communication unit.
  • the transmitting/receiving unit 102 puts the extracted data into the integrated command queue 1041 in the order of reception. Commands input to the integrated command queue 1041 are sorted based on time-series information (sorting will be described later).
  • the processing unit 103 processes the data input to the integrated command queue 1041 in the order in which they are arranged. Therefore, when the processing unit 103 receives the same data from a plurality of wireless communication stations 400, it processes only the first received data.
  • the processing section 103 comprises a command execution unit 1031 .
  • the command execution unit 1031 executes the first received command.
  • the processing unit 103 uses the time-series information attached to the command so that only the command received first is executed. Time stamps or sequence numbers, for example, are used as time-series information.
  • the processing unit 103 stores the time stamp of the last executed command as information S1.
  • the processing unit 103 also stores the time stamp of the next command acquired from the integrated command queue 1041 as information S2. This time stamp describes the time when the remote control terminal 200 sent the command. After that, the processing unit 103 compares the information S1 and S2, and if the time S2 is the same as or earlier than the time S1, the information S2 received later is not executed.
  • the processing unit 103 when using a sequence number (referred to as a sequence number method), stores the sequence number of the command to be executed next as information S1. The processing unit 103 also stores the sequence number of the command received immediately before as information S2. Then, the processing unit 103 compares the information S1 and S2, and if S1 and S2 are the same, executes the command; does not run.
  • the time-out time may be stored as the information T1, and the current time may be stored as the information T2. After that, the processing unit 103 compares the information T1 and T2, and does not execute the received command when T2 has passed the timeout time T1 (or has become the same). The procedures for these processes will be described later.
  • the processing unit 103 transmits various data according to its own processing results or received data (commands).
  • the data to be sent is generated by command sending unit 1032, for example.
  • the command transmission unit 1032 inputs the generated data, such as a data request command, to the transmission/reception section 102 .
  • Transmitting/receiving unit 102 converts data to be transmitted into a transmittable data format (for example, packet) as a function of a transmitting unit.
  • the transmitting/receiving unit 102 puts data to be transmitted into the transmission buffer 1112 of the connecting unit 101 .
  • Connection unit 101 transmits the data in transmission buffer 1112 to remote control terminal 200 or mobile unit management server 300 via network 500 to which it is connected. At this time, when connecting to a plurality of networks 500 , the connection unit 101 sends the same data to all the networks 500 .
  • control unit 110 The functions of the control unit 110 as described above are achieved by the communication unit and the computer.
  • a computer has a CPU (Central Processing Unit) as an arithmetic element, a ROM (Read Only Memory) and a RAM (Random Access Memory) as a storage unit 104, and the like.
  • a RAM that can operate at high speed is used as the storage unit 104 used for communication control.
  • the storage unit 104 may include a nonvolatile memory such as eMMC (embedded MultiMediaCard), SSD (Solid State Drive), HDD (Hard Disk Drive), or the like.
  • the storage unit 104 may include a portable storage medium such as a memory card. These non-volatile memories are used, for example, to store programs required for communication control and other processing, and to store data that must be saved.
  • Such a computer may consist of a general-purpose CPU, ROM, RAM, etc., and may execute communication functions and various processes by means of software (programs). Further, the computer may be one in which various processes are incorporated in hardware such as SoC (System On Chip) or FPGA (Field Programmable Gate Array).
  • SoC System On Chip
  • FPGA Field Programmable Gate Array
  • FIG. 4 is a flow chart for explaining the communication control procedure by the time stamp method. Communication control is performed by the controller 110 executing a program created according to the procedure described here.
  • connection unit 101 connects to the multiple networks 500 via the nearest wireless communication station 400 using multiple communication units.
  • the connection unit 101 puts the received command into the integrated command queue 1041 .
  • a time stamp attached to the command is also stored together with the command.
  • the connection operation by the connection unit 101 is executed in parallel with the processing by the processing unit 103, which will be described later.
  • connection operation is executed as follows.
  • the remote operator operates the remote control terminal 200 to store necessary information such as connection information with the mobile terminal 100 and authentication information in the mobile management server 300 .
  • the mobile terminal 100 also causes the mobile management server 300 to store connection information with the remote control terminal 200, authentication information, and the like.
  • the remote operator operates the remote control terminal 200 to obtain the connection information of the mobile terminal 100 from the mobile management server 300 and tries to connect to the mobile terminal 100 .
  • the mobile terminal 100 inquires of the mobile management server 300 to authenticate the remote operator and approve the connection (the remote control terminal 200 may also be authenticated). Also, the authentication procedure may be performed directly between the mobile terminal 100 and the remote operator or the remote control terminal 200 without going through the network 500 .
  • control unit 110 performs the authentication operation according to the connection priority of the wireless communication station 400 set in advance.
  • the mobile terminal 100 connects to the radio communication stations 400 connectable at the current position by the determined number of simultaneous connections (the number of connection channels).
  • control unit 110 executes connection with the connectable wireless communication station 400 according to the radio wave condition.
  • the connection between mobile terminal 100 and local 5G station 401 is disconnected during movement.
  • the connection between mobile terminal 100 and carrier 5G station 404 is maintained.
  • the control unit 110 authenticates with the millimeter wave local 5G station 402 and connects with the millimeter wave local 5G station 402 . Therefore, in this state, the mobile terminal 100 is connected to both the carrier 5G network 504 and the millimeter wave local 5G network 502 .
  • the mobility management server 300 periodically inquires whether the mobile terminal 100 is connected through the communication path registered by the mobile terminal 100, or receives a keep-alive signal from the mobile terminal 100. Receive and monitor connection status. After confirming that there is no connection for a certain period of time, the mobile management server 300 deletes the connection information registered by the mobile terminal 100 .
  • the remote operator operates the remote control terminal 200 while viewing the video data sent with the shortest delay among the video data sent from the mobile terminal 100 via the plurality of networks 500 with established connections. do.
  • the video data is video captured by a camera mounted on the mobile terminal 100 .
  • the remote control terminal 200 simultaneously sends commands for operating the mobile terminal 100 to all networks according to the operation of the remote operator. Each command is given a timestamp indicating when it was sent. The time stamp is used to identify whether or not the operation commands are the same.
  • the control unit 110 sorts the commands input to the integrated command queue 1041 in order of time stamp as a function of the processing unit 103 (S101). Also, commands without time stamps are always placed at the head of the integrated command queue 1041 . For example, all commands sent from the MEC server 310 or certain commands sent from the MEC server 310 (interrupt commands) are not timestamped.
  • the head of the integrated command queue 1041 is the position where the integrated command queue 1041 is first taken out.
  • the timestamp method for example, when certain data is missing, the data with a timestamp later than the timestamp attached to the missing command (data) is received first. In that case, the received command is processed first. Then, when a command with a time stamp earlier than the executed command is received later, the command is discarded (steps S104 and S106 described later).
  • each command is received from multiple networks. Therefore, before the previously received command is executed, another command with an earlier time stamp may be received later. In such a case, a plurality of commands before execution are arranged in the order of time stamps by the sorting process of S101.
  • interrupt commands without timestamps are an exception to the sorting process. Only interrupt commands are rearranged by sorting and placed at the head of the integrated command queue 1041 .
  • control unit 110 acquires a command from the head of the integrated command queue 1041 as a function of the processing unit 103 (S102).
  • control unit 110 determines whether the acquired command has a time stamp (S103).
  • a command without a time stamp is an interrupt processing command such as an emergency stop.
  • step S103 if there is no time stamp (S103: NO), the control unit 110 immediately executes the command (S105).
  • the command without a time stamp is an interrupt processing command such as an emergency stop, so immediate execution can cause the mobile terminal 100 to stop urgently or perform interrupt processing.
  • step S103 if there is a time stamp (S103: YES), the control unit 110 compares the information S1 and S2 (S104).
  • the information S1 is the time stamp of the last executed command
  • the information S2 is the time stamp of the next command acquired from the integrated command queue 1041.
  • FIG. Therefore, the information S2 is the time stamp of the data acquired by the step of S102 immediately before executing the step of S104.
  • step S104 if S2 ⁇ S1 is not true (S104: NO), then the control unit 110 executes the acquired command (S105).
  • S2 ⁇ S1 is not satisfied (S104: NO)
  • the time of the time stamp (information S2) of the next command acquired from the integrated command queue 1041 is closer to the time of the time stamp (information S1) of the last executed command. indicates a later time.
  • step S104 if S2 ⁇ S1 (S104: YES), then the control unit 110 discards the acquired command (S106).
  • S2 ⁇ S1 (S104: YES) the time stamp (information S1) of the last executed command and the time stamp (information S2) of the next command acquired from the integrated command queue 1041 are the same.
  • the time stamp (information S2) of the next command acquired from the integrated command queue 1041 indicates an earlier time than the time stamp (information S1) of the last executed command.
  • control unit 110 After that, if there is an end instruction (S107: YES), the control unit 110 ends the process. On the other hand, if there is no end instruction (S107: NO), control unit 110 returns to step S101 and continues the subsequent steps.
  • FIG. 5 is a flow chart for explaining the procedure of communication control by the sequence number method. Communication control is performed by the controller 110 executing a program created according to the procedure described here.
  • connection unit 101 connects to the multiple networks 500 via the nearest wireless communication station 400 using multiple communication units.
  • the connection operation by the connection unit 101 is the same as in the time stamp method described above.
  • sequence number assigned to the command is also stored together with the command.
  • the control unit 110 sorts the commands input to the integrated command queue 1041 in order of sequence number as a function of the processing unit 103 (S201). At this time, commands without sequence numbers are always put at the head of the integrated command queue 1041 . For example, all commands sent from the MEC server 310 or specific commands (interrupt commands) sent from the MEC server 310 are not assigned sequence numbers.
  • the sorting operation is performed as follows.
  • the first communication unit 111 will be described as Ch1 and the second communication unit 112 as Ch2.
  • the command with sequence number 1 is written as 1-1
  • the command with sequence number 2 is written as 1-2
  • the command with sequence number 3 is written as 1-3, and so on.
  • the command with sequence number 1 is expressed as 2-1
  • the command with sequence number 2 is expressed as 2-2
  • the command with sequence number 3 is expressed as 1-3, and so on.
  • the sequence number is assigned to the command at the time of transmission or prior to transmission. Therefore, there is no duplication of sequence numbers.
  • the integrated command queue 1041 contains 1-1, 2-1, 1-3, 1-4 from the left in chronological order at the time of reception. In this state, the command with sequence number 1 has been received from Ch1 and Ch2. On the other hand, at this time, the command with sequence number 2 has not been received.
  • sequence number 2 is received by Ch2 while processing 1-3 in this state (during processing before command execution).
  • the integrated command queue 1041 is in states 2-2 and 1-4.
  • sequence number 2 has not yet been processed, so it is in a waiting state.
  • 1-3 are temporarily returned to the integrated command queue 1041 (S206, S207, S209 described later).
  • they are sorted again so that they are aligned with 2-2, 1-3, and 1-4. This means that if the command is returned to the beginning as it is, 1-3 will be processed next time as well, and the processing will not proceed until timeout. Therefore, in the present embodiment, when returning to the integrated command queue 1041, by returning to the step of S201, the returned commands are sorted.
  • control unit 110 acquires a command from the head of the integrated command queue 1041 as a function of the processing unit 103 (S202).
  • control unit 110 determines whether or not a sequence number is assigned to the acquired command (S203).
  • Commands without sequence numbers include emergency stop and interrupt processing.
  • step S203 if there is no sequence number (S203: NO), the control unit 110 immediately executes the command (S205).
  • step S203 if there is a sequence number (S203: YES), the control unit 110 compares the information S1 and S2 (S204).
  • the information S1 in the sequence number system is the sequence number of the command to be executed next, and the information S2 is the sequence number of the received command. Therefore, the information S2 is the sequence number of the data acquired in the step of S202 immediately before executing the step of S204.
  • step S206 if S2>S1 (S206: YES), then the control unit 110 determines whether T2 ⁇ T1 (S207). As already explained, the information T1 is the timeout time and the information T2 is the current time.
  • step S207 if T2 ⁇ T1 (S207: YES), then the control unit 110 proceeds to S205, executes the command, and updates S1 and T1 (S205).
  • step S206 if S2>S1 is not true (S206: NO), then the control unit 110 discards the received command (S208). After that, the control unit 110 returns to step S201 and continues the subsequent procedures.
  • step S207 if T2 ⁇ T1 is not true (S207: NO), then the control unit 110 returns the received command to the integrated command queue 1041 (S209). After that, the control unit 110 returns to step S201 and continues the subsequent procedures.
  • control unit 110 After that, if there is an end instruction (S210: YES), the control unit 110 ends the process. On the other hand, if there is no end instruction (S210: NO), control unit 110 returns to step S201 and continues the subsequent steps.
  • Mobile terminals 100 such as automatic transporters and drones are expected to be used for unmanned automatic delivery using them and unmanned photography by cameras mounted on them as wireless technology and computer control technology improve.
  • Such a mobile terminal 100 can run/fly autonomously, but it can also be remotely controlled, either manually or automatically. Communication between the mobile terminal 100 and the remote control terminal 200 is not limited to a limited area using a dedicated frequency band. is also about to become possible.
  • Switching the cell or base station (wireless communication station 400) in which the mobile terminal 100 is communicating, or switching the WiFi access point is called handover. Also, switching communication from the network 500 of a certain carrier to the network 500 of another carrier, or switching wireless communication media, such as switching from 5G to WiFi, is called roaming.
  • remote control will not be entirely operated by humans, but will be entrusted to machines with the assistance of computer control using AI.
  • remote operation when danger is sensed such as a person intruding in the traveling direction of the mobile terminal 100, it is possible to automatically take evasive action based on the judgment of AI.
  • the operation of the mobile terminal 100 may be hindered if there is a communication disconnection period of several 100 ms in remote control. Communication is not possible during handover or roaming period. Therefore, during this period of remote operation, in order to receive all the operation commands sent from the remote operator without omission, it is necessary to resend them or wait until communication is restored. In other words, in remote operation, in addition to handover and roaming time, it is necessary to consider the time it takes for a resent or waited command to reach the mobile terminal 100 .
  • 5G communications in Japan can be used by companies and local governments that are not telecommunications carriers through local 5G (private 5G overseas).
  • Radio waves with short wavelengths such as millimeter waves will be used in the future due to the shortage of available frequency bands and the increase in the speed and capacity of communications.
  • shielding objects make it difficult for radio waves to pass around, creating blind spots where radio waves do not reach.
  • radio waves with short wavelengths tend to be attenuated in strength, and the communicable area becomes narrower. Therefore, when using radio waves with short wavelengths, it is necessary to install more base stations.
  • FIG. 6 is an explanatory diagram for explaining a processing example of the mobile terminal 100.
  • FIG. 6 is an explanatory diagram for explaining a processing example of the mobile terminal 100.
  • Mobile terminal 100 is capable of communicating with both local 5G station 401 and carrier 5G station 404 .
  • the local 5G station 401 has little signal delay. However, the communication range of the local 5G station 401 is narrow. Therefore, when the mobile terminal 100 moves, the connection between the mobile terminal 100 and the local 5G station 401 may be disconnected. If the connection is broken, the mobile terminal 100 cannot receive all the transmitted commands.
  • the carrier 5G station 404 has a larger signal delay than the local 5G station 401.
  • Carrier 5G station 404 has a wider coverage area than local 5G station 401 . Therefore, even if the mobile terminal 100 moves, the possibility of disconnection between the mobile terminal 100 and the carrier 5G station 404 is low. Therefore, the mobile terminal 100 can reliably receive the command.
  • the mobile terminal 100 establishes communication with the local 5G station 401 as Ch1 of 5G, and connects through the first communication unit 111 .
  • the mobile terminal 100 connects with the carrier 5G station 404 through the second communication unit 112 using Ch2 of 5G.
  • commands with the same time stamp are sent to each network 500 at the same time.
  • each network 500 with the local 5G station 401 and the network 500 with the carrier 5G station 404 have different signal delay times. Therefore, mobile terminal 100 receives the same command at different times on Ch1 and Ch2.
  • the mobile terminal 100 first receives commands with time stamps 0124 and 0135 from Ch1. Commands with time stamps 0124 and 0135 from Ch1 are temporarily stored in the reception buffer 1111 of the first communication unit 111 . After this, commands with time stamps 0124 and 0135 are also received from Ch2. Commands with time stamps 0124 and 0135 from Ch2 are temporarily stored in the reception buffer 1111 of the second communication unit 112 .
  • the command execution unit 1031 executes the previously received commands with time stamps 0124 and 0135 from Ch1 according to the communication control procedure described above. On the other hand, commands with time stamps 0124 and 0135 received later from Ch2 are discarded.
  • the mobile terminal 100 goes out of the local 5G area 4011 (position B in FIG. 1). Even if the mobile terminal 100 goes out of the local 5G area 4011, it exists within the carrier area 4041.
  • the mobile terminal 100 cannot receive commands from Ch1. On the other hand, it can be received from CH2. Therefore, the command with time stamp 0200 received from CH2 is temporarily stored in the receive buffer 1111 of the second communication unit 112 . The command with timestamp 0200 is executed by command execution unit 1031 .
  • mobile terminal 100 similarly receives the command with time stamp 0244 on Ch2. At this point the mobile terminal 100 is still outside the local 5G area 4011 . The mobile terminal 100 executes the command with the time stamp 0244 as it is.
  • the mobile terminal 100 When the mobile terminal 100 returns to the local 5G area 4011 again, the mobile terminal 100 receives the command with the time stamp 0312 from Ch1. When the mobile terminal 100 receives the command with the time stamp 0312, it executes it. A later command with timestamp 0312 is received from Ch2, but it is discarded.
  • the mobile terminal 100 of the present embodiment executes the command received earlier on Ch1 and Ch2. Then, when the mobile terminal 100 leaves the local 5G area 4011, it receives a command from Ch2 from the carrier 5G station 404 and executes it. During this time, communication from the local 5G station 401 is interrupted, but communication from the carrier 5G station 404 continues. Therefore, since new roaming or handover does not occur as the mobile terminal 100 moves, no data acquisition delay occurs due to roaming or handover.
  • the mobile terminal 100 executes commands in order of sequence numbers.
  • commands with the same sequence number are simultaneously sent to each network 500 in the same manner as the time stamp method.
  • the mobile terminal 100 executes the commands with the sequence numbers 0124 and 0135 received from Ch1 first.
  • the mobile terminal 100 later discards the commands with the same sequence numbers 0124 and 0135 received from Ch2. Therefore, even in the sequence number method, only the command with the first received sequence number is executed, and even if the command with the same sequence number is received later, it is discarded.
  • the mobile terminal 100 executes the command received from that network 500.
  • the mobile terminal 100 executes only the first received command.
  • the command with sequence number 0245 may be received from Ch2 after a delay.
  • timestamp 0312 has already been executed.
  • a time stamp 0245 indicates a time earlier than the time stamp 0312 . Therefore, the command with time stamp 0245 received later is not executed.
  • the mobile terminal 100 can put the command received first into standby processing. .
  • the command with sequence number 0312 received earlier from Ch1 is passed to standby processing.
  • the standby process is a process of waiting for reception of sequence number 0245 to be executed next to sequence number 0244 which has already been executed.
  • the mobile terminal 100 When the mobile terminal 100 receives the command with the sequence number 0245 from Ch2 later, it executes the command. After that, the mobile terminal 100 executes the command with the sequence number 0312, which has been passed to the standby process, after a time-out because the commands with the sequence numbers 0246 to 0311 have not been received.
  • time stamp method for low-delay execution or the sequence number method that considers the certainty (order) of command execution is arbitrary depending on the configuration, operability, operation contents, etc. of the mobile terminal 100. selected for
  • the configuration of the network 500 allows the MEC server 310 to be arranged between the remote control terminal 200 and the mobile terminal 100, as already explained. MEC server 310 once receives a command from remote control terminal 200 and relays it to mobile terminal 100 . Also, the MEC server 310 is not limited to such a relay operation. The MEC server 310 can also transmit its own commands to the mobile terminal 100 in addition to commands from the remote control terminal 200 .
  • the mobile terminal 100 receives the command "xxxx: emergency stop” without a time stamp from Ch1. If the command does not have a time stamp, it is immediately executed as an interrupt command regardless of the execution status of other commands. This causes the mobile terminal 100 to stop functioning, including receiving data from other networks 500 .
  • Such command transmission based on the MEC server's own judgment is performed independently of the judgment of the remote operator.
  • the transmission of this command is determined by the MEC server 310 located near the mobile terminal 100 using, for example, AI. Therefore, the command is transmitted from a position physically close to the mobile terminal 100 and in terms of the communication path. Therefore, when an abnormal situation occurs, the mobile terminal 100 can be quickly stopped.
  • the transmission of the command "xxxx: emergency stop" from the first MEC server 311 is only an example, and the time stamp and sequence number are also sent from the other MEC servers 310, the mobile management server 300, and the remote control terminal 200. If a command without a is sent, the mobile terminal 100 immediately executes the command.
  • FIG. 7 is a time chart for explaining roaming and handover, where (a) is for this embodiment and (b) is for a comparative example.
  • FIG. 7 shows a case of leaving the local 5G area 4011 and roaming to a carrier area 4041 and a case of handover within the local 5G station 401 . It is assumed that the system itself of the local 5G station 401 and the carrier 5G station 404 has the same performance both in this embodiment and in the comparative example.
  • communication connections (communication sessions) are established in advance with both the local 5G station 401 and the carrier 5G station 404. Therefore, in the case of this embodiment, roaming does not occur, and the delay time is only the difference in transmission and reception latency between the local 5G station 401 and the carrier 5G station 404 . After that, even if the mobile terminal 100 leaves the local 5G area 4011 and makes a communication request while waiting for the establishment of a communication session again, the communication session with the carrier 5G station 404 is not established at that time. Therefore, the delay times are the same.
  • the command is transmitted after roaming is completed.
  • the command reception is delayed by the time required from the generation of the transmission request to the completion of roaming plus the difference in the transmission and reception latency between the local 5G station 401 and the carrier 5G station 404. Delay (*2).
  • the delay time in this embodiment is only the difference in transmission and reception latency between the local 5G station 401 and the carrier 5G station 404 . Therefore, in the case of this embodiment, the time required for handover is not affected.
  • the delay time (*1) that occurs in this embodiment is much less than the delay time (*2) that occurs in the comparative example.
  • the remote control terminal 200 There are two communication patterns between the remote control terminal 200 and the mobile terminal 100.
  • a command necessary for remote control is transmitted as data from the remote control terminal 200 to the mobile terminal 100 .
  • remote control terminal 200 transmits requested data to mobile terminal 100 based on a request from mobile terminal 100 .
  • FIG. 8A to 8D are explanatory diagrams for explaining the first communication pattern performed between the remote control terminal 200 and the mobile terminal 100.
  • FIG. 8A to 8D are explanatory diagrams for explaining the first communication pattern performed between the remote control terminal 200 and the mobile terminal 100.
  • the routes of the network 500 here are Ch1, Ch2, Ch3, . . . ChN.
  • the latency is Ch3 ⁇ Ch1 ⁇ ChN ⁇ Ch2.
  • the communicable range is Ch2>ChN>Ch1>Ch3.
  • the remote control terminal 200 addresses the time-stamped command to the mobile terminal 100 and sends it to all the networks 500 (Ch1 to ChN).
  • FIG. 8A shows a state in which Ch3 cannot be connected.
  • the command via the Ch1 network 500 reaches the mobile terminal 100 fastest.
  • the mobile terminal 100 executes the command 01:cmd1 received from Ch1.
  • the mobile terminal 100 subsequently receives command 01:cmd1 from another network 500, the mobile terminal 100 discards the received command.
  • FIG. 8B shows a state in which Ch1 cannot be connected from the state in FIG. 8A.
  • the command via the ChN network 500 reaches the mobile terminal 100 fastest.
  • the mobile terminal 100 executes the command 02:cmd2 received from ChN.
  • the mobile terminal 100 subsequently receives command 02: cmd2 from another network 500, the mobile terminal 100 discards the received command.
  • FIG. 8C shows the state of receiving an interrupt command xx:cmdSP without a timestamp from Ch1.
  • an interrupt command xx:cmdSP via the network 500 of Ch1 reaches the mobile terminal 100 .
  • the mobile terminal 100 immediately executes the interrupt command xx:cmdSP. If the interrupt command xx:cmdSP is an emergency stop command, the mobile terminal 100 stops.
  • FIG. 8D shows a state in which retransmission occurs due to packet loss on Ch1, and as a result, command 01: cmd1 of ChN arrives first.
  • FIG. 9A and 9B are explanatory diagrams for explaining the second communication pattern performed between the remote control terminal 200 and the mobile terminal 100.
  • FIG. 9A and 9B are explanatory diagrams for explaining the second communication pattern performed between the remote control terminal 200 and the mobile terminal 100.
  • the routes of the network 500 of the second communication pattern are Ch1, Ch2, Ch3, . . . ChN.
  • Communication speed differs between uplink and downlink.
  • Uplink is communication when data is transmitted from the mobile terminal 100 to the remote control terminal 200 or the mobile management server 300 .
  • a downlink is communication when data is transmitted from remote control terminal 200 or mobile management server 300 to mobile terminal 100 .
  • the uplink and downlink communication speeds of the network 500 of Ch1 are asymmetrical.
  • the uplink of network 500 on Ch1 is slow and has high delay.
  • the downlink is high-speed, large-capacity and low-delay.
  • the communication speeds of the uplink and downlink of the network 500 of Ch2 are symmetrical.
  • the Ch2 network 500 has medium speed medium capacity and medium delay on both the uplink and downlink.
  • Ch3 network 500 like Ch2, has medium speed medium capacity and medium delay on both the uplink and downlink.
  • the uplink and downlink communication speeds of the ChN network 500 are symmetrical.
  • the ChN network 500 has high speed, high capacity and low latency on both the uplink and downlink.
  • the uplink latency is Ch2 ⁇ ChN ⁇ Ch3 ⁇ Ch1
  • the downlink latency is Ch1 ⁇ ChN ⁇ Ch3 ⁇ Ch2.
  • the communicable range is Ch2>Ch1>ChN>Ch3.
  • Ch3 is disabled for communication.
  • FIG. 9A shows a state in which a data request is made from a mobile unit to the mobile unit management server 300.
  • Ch3 is in a non-connectable state.
  • the mobile terminal 100 sends a data request addressed to the mobility management server 300 to all the networks 500 (Ch1-ChN).
  • the data request 04:req3 via the network 500 of Ch2 reaches the mobile management server 300 the fastest.
  • the mobility management server 300 transmits the requested data to the mobile terminal 100 .
  • mobile object management server 300 when data request 04:req3 arrives from another network 500 thereafter, the received data request is discarded. The process of discarding the data request that arrives later is performed in the same manner as the communication control procedure in the mobile terminal 100 already described.
  • FIG. 9B shows the state of data transmission from the mobile management server 300 to the mobile terminal 100.
  • Ch3 is in the unconnectable state.
  • the video data 05: video via the network 500 of Ch1 reaches the mobile terminal 100 fastest.
  • the mobile terminal 100 immediately processes the video data 05:video. Further, when the mobile terminal 100 receives video data 05: video from another network 500 thereafter, the received video data is discarded.
  • the use of camera video that captures a place that cannot be seen from the mobile terminal 100 that moves autonomously is assumed.
  • the image of the camera is received by mobile management server 300 .
  • the mobile terminal 100 requests video data captured by the camera from the mobile management server 300 .
  • the mobile terminal 100 can analyze and predict in advance the movements of people and objects entering a route that is invisible to the mobile terminal 100, and autonomously take avoidance action. .
  • Determination of avoidance behavior and the like using the received video data is performed, for example, by an AI for autonomous movement mounted on the mobile terminal 100 .
  • an AI for autonomous movement mounted on the mobile terminal 100 may reduce the processing efficiency.
  • the video data may be transmitted without being timestamped.
  • the mobile terminal 100 that has received video data without a time stamp first executes processing related to that video data, similar to interrupt processing.
  • the mobile terminal 100 leaves the wireless communication areas of Ch1 and Ch2 after transmitting a request command from the network 500 of Ch1.
  • the mobile terminal 100 can receive video data via the network 500 of Ch3 being connected at that time.
  • connection between the mobile terminal 100 and the network 500 will be explained by exemplifying the method of issuing a request from the mobile terminal 100 to the mobile management server 300, registering (storing), and then connecting.
  • mobility management server 300 may search for mobile terminal 100 and attempt connection.
  • the mobile unit management server 300 can search for the mobile terminal 100 based on, for example, surveillance camera images and location information issued by the mobile terminal 100 .
  • connection between the remote control terminal 200 and the mobile terminal 100 may be maintained for a certain period of time even if the mobile terminal 100 leaves the target wireless communication area. . This is because roaming or handover occurs as soon as the mobile terminal 100 leaves the radio communication area when it can only be connected to one network 500 .
  • the connection of wireless communication as a backup is maintained (at least not disconnected), and from the viewpoint of delay, which network 500 should be selected and connected is advantageous. Frequent switching can be prevented based on evaluation.
  • the reason for installing the mobile object management server 300 is the unified management of information and security reasons.
  • the remote control terminal 200 may not be able to grasp how many mobile terminals 100 exist where. In such a case, the mobile terminal 100 cannot know in advance from which remote control terminal 200 the communication connection should be trusted to receive data (commands, etc.).
  • Mobile unit management server 300 stores connection information and the like from remote control terminal 200 and mobile unit 100 in advance. As a result, the remote control terminal 200 and the mobile terminal 100 can connect to each other by relying on the registered contents of the mobile management server 300 .
  • a 5G wireless communication base station is used as the wireless communication station 400
  • 3G, 4G (LTE), and 5G wireless communication base stations may be mixed and provided, and further, the wireless communication stations 400 other than 3G, 4G (LTE), and 5G may be provided. may be provided.
  • the information processing program according to the present invention can be realized by a dedicated hardware circuit.
  • this information processing program may be provided by a computer-readable recording medium such as a USB (Universal Serial Bus) memory or a DVD (Digital Versatile Disc)-ROM (Read Only Memory), or may be provided on the Internet 510 regardless of the recording medium. It is also possible to provide online via a network 500 such as. When provided online, this data input control program is recorded on a recording medium such as a magnetic disk in a computer connected to network 500 .
  • 1 wireless communication system 100 mobile terminal, 101 connection, 102 transceiver unit, 103 processing unit, 104 storage unit, 110 control unit, 111 first communication unit, 112 second communication unit, 11n n-th communication unit, 120 sensor unit, 130 drive unit, 200 remote control terminal, 300 mobile management server, 310 MEC Server, 311 First MEC Server, 312 Second MEC Server, 313 3rd MEC Server, 400 Radio Communications Station, 401 local 5G station, 402 millimeter wave local 5G stations, 403 WiFi APs, 404 carrier 5G station, 500 network, 501 local 5G network, 502 mm wave local 5G network, 503 WiFi networks, 504 carrier 5G network, 510 Internet, 1111 receive buffer; 1112 transmit buffer; 4011 local 5G area, 4021 millimeter wave local 5G area, 4031 WiFi area, 4041 Carrier Area.

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

外部と通信を行いながら移動する移動体端末100は、複数の無線ネットワーク500に同時に接続する接続部101と、接続部101によって接続された複数の無線ネットワーク500からデータを受信する受信部と、複数の無線ネットワーク500から同一のデータを受信した場合、最初に受信したデータのみを処理する処理部103と、を有する。

Description

移動体端末、無線通信システム、および通信制御プログラム
 本発明は、移動体端末、無線通信システム、および通信制御プログラムに関する。
 近年、移動体端末の遠隔操作技術としては、移動体端末をネットワークに無線通信によって接続し、ネットワークを介して遠隔操作する技術がある。
 従来、移動体端末をネットワークに接続するための技術としては、たとえば、特許文献1がある。特許文献1においては、PHS(Personal Handy-phone System)等の自営通信網とLTE(Long Term Evolution)等の通信事業者通信網との間や、複数の自営通信網間でローミングを行うためのローミング制御装置が開示されている。
特開2018-14610号公報
 従来の技術においては、自営通信網と通信事業者通信網とのローミングが可能となっている。しかしながら、自営通信網から通信事業者通信網への切り替わり、またはその逆への切り替わりの時に、ハンドオーバーやローミングによって、通信遮断が発生し、データの取得に遅れが生じるという問題があった。
 そこで、本発明の目的は、複数のネットワークの間を移動体端末が移動する際に、データの取得に遅延が発生しない、または遅延が少ない移動体端末、無線通信システム、および通信制御プログラムを提供することである。
 本発明の上記目的は、下記の手段によって達成される。
 (1)外部と無線通信を行いながら移動する移動体端末であって、
 複数の無線ネットワークに同時に接続する接続部と、
 前記接続部によって接続された前記複数の無線ネットワークから前記移動体端末の移動に関するデータを受信する受信部と、
 前記複数の無線ネットワークを介して受信する同一の前記データに対して、最初に受信した前記データのみを実行する処理部と、を有する移動体端末。
 (2)前記データは、前記移動体端末を移動させるためのコマンドおよび自律移動のためのデータのうち、少なくともいずれかを有する、上記(1)に記載の移動体端末。
 (3)前記データは、前記データの送信時に付与された時系列情報を含み、
 前記処理部は、前記時系列情報に基づいて、前記データを重複させずに実行する、上記(1)または(2)に記載の移動体端末。
 (4)前記時系列情報は、タイムスタンプまたはシーケンスナンバーを含む、上記(3)に記載の移動体端末。
 (5)前記処理部は、前記時系列情報を含まない前記データを受信した場合、即時に実行する、上記(3)または(4)に記載の移動体端末。
 (6)前記データは、前記移動体端末を遠隔操作するための遠隔操作データおよび前記移動体端末が自律移動するための自律移動用データの、少なくともいずれかである、上記(1)~(5)のいずれか一つに記載の移動体端末。
 (7)前記処理部は、前記移動体端末が自律移動するためのデータ要求を生成し、
 前記接続部によって接続された前記複数の無線ネットワークへ前記データ要求を送信する送信部を有し、
 前記データ要求は、時系列情報を含む、上記(1)~(6)のいずれか一つに記載の移動体端末。
 (8)請求項1~7のいずれか一つに記載の移動体端末、無線通信局を有する複数の無線ネットワーク、および前記無線ネットワークに接続された情報処理装置を有する、無線通信システム。
 (9)前記情報処理装置は、前記複数の無線ネットワークへ同一のデータを送出する、上記(8)に記載の無線通信システム。
 (10)前記無線ネットワークは、前記移動体端末と前記情報処理装置との間の通信を仲介する近隣装置を有する、上記(8)または(9)に記載の無線通信システム。
 (11)前記近隣装置は、前記近隣装置が起点となるデータを前記移動体端末へ送信する、上記(10)に記載の無線通信システム。
 (12)前記情報処理装置が送出した前記データを複製し、複製した前記データを前記移動体端末に宛てて送信する配信サーバーを、さらに有し、
 前記配信サーバーは、前記複数の無線ネットワークに接続されており、同一のデータを前記複数の無線ネットワークへ送出する、上記(8)~(11)のいずれか一つに記載の無線通信システム。
 (13)前記無線ネットワークには、前記移動体端末と、前記情報処理装置および/または前記近隣装置とが相互に接続するために必要な認証を行う移動体管理サーバーが接続されており、
 前記移動体端末は、相互認証した前記移動体管理サーバーに前記複数の無線ネットワークとの接続情報を登録し、前記情報処理装置または前記近隣装置は、前記移動体管理サーバーから前記接続情報を得て、前記移動体端末と相互認証して接続する、上記(10)に記載の無線通信システム。
 (14)外部と無線通信を行いながら移動する移動体端末における通信制御プログラムであって、
 複数の無線ネットワークに同時に接続する段階(a)と
 前記段階(a)によって接続された前記複数の無線ネットワークから前記移動体端末の移動に関するデータを受信する段階(b)と、
 前記複数の無線ネットワークを介して受信する同一の前記データに対して、最初に受信した前記データのみを実行する段階(c)と、をコンピューターに実行させるための通信制御プログラム。
 (15)前記データは、前記移動体端末を移動させるためのコマンドおよび自律移動のためのデータのうち、少なくともいずれかを有する、上記(14)に記載の通信制御プログラム。
 (16)前記データは、前記データの送信時に付与された時系列情報を含み、
 前記段階(c)は、前記時系列情報に基づいて、前記データを重複させずに実行する、上記(14)または(15)に記載の通信制御プログラム。
 (17)前記時系列情報は、タイムスタンプまたはシーケンスナンバーを含む、上記(16)に記載の通信制御プログラム。
 (18)前記段階(c)は、前記時系列情報を含まない前記データを受信した場合、即時に実行する、上記(16)または(17)に記載の通信制御プログラム。
 (19)前記データは、前記移動体端末を遠隔操作するための遠隔操作データおよび前記移動体端末が自律移動するための自律移動用データの、少なくともいずれかである、上記(14)~(18)のいずれか一つに記載の通信制御プログラム。
 (20)前記移動体端末が自律移動するためのデータ要求を生成する段階(d)と、
 前記段階(a)によって接続された前記複数の無線ネットワークへ前記データ要求を送信する段階(f)と、を有し、
 前記データ要求は、時系列情報を含む、上記(14)~(19)のいずれか一つに記載の通信制御プログラム。
 本発明の移動体端末は、複数の無線ネットワークと同時に接続し、最初に取得したデータを実行する。これにより、移動体端末が移動する際に、移動元の無線ネットワークとの通信が切れる前に、移動先の無線ネットワークとも接続が確立しているため、データを取得して実行できる。したがって、本発明によれば、移動体端末が、複数の無線ネットワークの間を移動しても、データの取得に遅延が発生しないか、または遅延が少なくなる。
実施形態に係る無線通信システムの構成を示す概略図である。 移動体端末の機能を説明するためのブロック図である。 制御部のさらに詳細な機能を説明するためのブロック図である。 タイムスタンプ方式による通信制御の手順を説明するためのフローチャートである。 シーケンスナンバー方式による通信制御の手順を説明するためのフローチャートである。 移動体端末の処理例を説明するための説明図である。 ローミングおよびハンドオーバーについて説明するためのタイムチャートである。 遠隔操作端末と移動体端末の間で行われる第1の通信パターンを説明するための説明図である。 遠隔操作端末と移動体端末の間で行われる第1の通信パターンを説明するための説明図である。 遠隔操作端末と移動体端末の間で行われる第1の通信パターンを説明するための説明図である。 遠隔操作端末と移動体端末の間で行われる第1の通信パターンを説明するための説明図である。 遠隔操作端末と移動体端末の間で行われる第2の通信パターンを説明するための説明図である。 遠隔操作端末と移動体端末の間で行われる第2の通信パターンを説明するための説明図である。
 以下、図面を参照して、本発明の実施形態を詳細に説明する。なお、図面の説明において同一の要素には同一の符号を付し、重複する説明を省略する。また、図面の寸法比率は、説明の都合上誇張されており、実際の比率とは異なる場合がある。
 (無線通信システム)
 図1は、実施形態に係る無線通信システムの構成を示す概略図である。
 図1に示すように、実施形態に係る無線通信システム1は、移動体端末100、遠隔操作端末200、移動体管理サーバー300、MEC(Multi-access Edge Computing)サーバー310(311~313)、配信サーバー350、および複数の無線通信局400(401~404)を有する。
 複数のMECサーバー310は、第1MECサーバー311、第2MECサーバー312、第3MECサーバー313である。第1MECサーバー311から第3MECサーバー313は、これらを区別しない場合(区別せずにいずれか一つを示す場合を含む、以下同様)、または総称する場合、MECサーバー310と称される。
 複数の無線通信局400は、自営の5G無線通信基地局(ローカル5G局401(ミリ波以外))、ミリ波を使用した自営の5G無線通信基地局(ミリ波ローカル5G局402)、WiFiアクセスポイント(WiFiAP403)、および通信事業者の5G無線通信基地局(キャリア5G局404)である。ローカル5G局401、ミリ波ローカル5G局402、WiFiAP403、およびキャリア5G局404は、これらを区別しない場合または総称する場合、無線通信局400と称する。
 遠隔操作端末200、移動体管理サーバー300、第2MECサーバー312、第3MECサーバー313、および配信サーバー350は、インターネット510に接続されている。
 この無線通信システム1において、第1MECサーバー311および第2MECサーバー312は、ローカル5G局401と接続されており、これらはローカル5Gネットワーク501を構成する。
 第2MECサーバー312は、ミリ波ローカル5G局402と接続されており、これらはミリ波ローカル5Gネットワーク502を構成する。
 インターネット510に直接接続されたWiFiAP403は、WiFiネットワーク503を構成する。
 第3MECサーバー313は、キャリア5G局404と接続されており、これらはキャリア5Gネットワーク504を構成する。
 したがって、無線通信システム1は、複数の無線ネットワークを有する。
 ローカル5Gネットワーク501、ミリ波ローカル5Gネットワーク502、WiFiネットワーク503、キャリア5Gネットワーク504は、これらを区別しない場合、または総称する場合、ネットワーク500と称される。また、ネットワーク500は、特に区別しない場合、インターネット510を含む。
 図1に示すように、ローカル5G局401の通信可能範囲は、ローカル5Gエリア4011である。同様に、ミリ波ローカル5G局402の通信可能範囲は、ミリ波ローカル5Gエリア4021であり、WiFiAP403の通信可能範囲は、WiFiエリア4031であり、キャリア5G局404の通信可能範囲は、キャリアエリア4041である。
 キャリアエリア4041は、ローカル5Gエリア4011、ミリ波ローカル5Gエリア4021、およびWiFiエリア4031と重複する範囲を有する。ミリ波ローカル5Gエリア4021には、障害物800が存在する。障害物が存在すると、ミリ波の特性から、ミリ波が到達できない範囲801が発生する。
 遠隔操作端末200と移動体端末100が何らかの形で通信可能であれば、ネットワーク500の構成は、特に限定されない。また、ネットワーク500の構成によっては、両者が直接接続できない場合もある。たとえば、移動体端末100がプライベート(ローカル)なネットワーク500に存在する場合、移動体端末100には、そのネットワーク500内でのみ通用するプライベートIPアドレスが割り当てられている。このような場合、グローバルネットワークであるインターネット510に接続する遠隔操作端末200は、移動体端末100のプライベートIPアドレス宛を指定しても、移動体端末100に対してデータパケットを送信できない。その場合、ローカル5Gネットワーク501に存在するルーターが、移動体端末100のプライベートIPアドレス宛にパケットをフォワーディングすることにより、パケットが送信される。
 また、モバイル(Mobile)IPアドレスの場合、遠隔操作端末200は、移動体端末100に割り当てられる移動先のネットワーク500におけるIPアドレス(ケアオブアドレス)を、把握できない。この場合、不変のホームアドレスが割り当てられているホームエージェントを用意し、遠隔操作端末200はホームアドレス宛にパケットを送信し、そのパケットを、ホームエージェントが受信して移動体端末100へ転送してもよい。
 遠隔操作端末200と移動体端末100の間で直接複数の通信セッションを張ってもよいし、配信サーバー350を使って、複数の通信経路へのデータ配信を代替させることとしてもよい。
 配信サーバー350は、図1に示すように、1台でもよいし、図示しないが複数台配置されてもよい。配信サーバー350は、インターネット510から見て、遠隔操作端末200の側に存在してもよいし、移動体端末100側に存在してネットワーク500に直接接続されていてもよい。配信サーバー350は、レイテンシーや通信の安定性などを考慮して最適な位置に配置される。配信サーバー350は、遠隔操作端末200からのデータを受信して、その複製を記憶する。配信サーバー350は、複製したデータを移動体端末100へ宛てて送信する。このとき、配信サーバー350は、データを複数のネットワークへ送出する。
 配信サーバー350は、遠隔操作データ(コマンド)のような少量のデータを扱う場合は、たとえば、MQTT(Message Queuing Telemetry Transport)プロトコルを使用する。データの配信側(ここでは配信サーバー350)にMQTTブローカー(Broker)、データの送受信端末側(ここでは遠隔操作端末200と移動体端末100)に、MQTTクライアント(Client)が実装される。また、クライアントが送信側になる場合をパブリッシャー(Publisher)、受信側になる場合をサブスクライバー(Subscriber)と呼ぶ。たとえば、遠隔操作端末200が移動体端末100へ遠隔操作データ(コマンド)を送信する場合は、遠隔操作端末200がパブリッシャーで移動体端末100がサブスクライバーである。移動体端末100が遠隔操作端末200へステータスデータを送信する場合は、移動体端末100がパブリッシャーで遠隔操作端末200がサブスクライバーである。
 このプロトコルでは、遠隔操作端末200(MQTTクライアント)が配信サーバー350にデータを送信(Publish)すると、配信サーバー350(MQTTブローカー)に登録(Subscribe)されている複数の移動体端末100(MQTTクライアント)に対して、登録情報(Topic)に基づいたデータが複製されて配信される。また、必要に応じて配信サーバー350(MQTTブローカー)間を接続(Bridge)してデータが転送される。
 つまり、本実施形態では、MQTTプロトコルを使用することで、遠隔操作端末200(MQTTクライアント)から、配信サーバー350(MQTTブローカー)、複数のネットワーク、移動体端末100(MQTTクライアント)という経路が構築される。そして、遠隔操作端末200からMQTTブローカーまでは、1つのデータが送信され、MQTTブローカーでそのデータが複数生成されて、移動体端末100へ配信される。
 ここでは、遠隔操作端末200から、ローカル5Gネットワーク501とキャリア5Gネットワーク504との2経路で移動体端末100に遠隔操作データ(コマンド)を送信する場合を想定する。
 まず、移動体端末100から遠隔操作端末200への接続要求をトリガーとして、移動体端末100から遠隔操作端末200までの経路が決定される。この経路は事前に静的に作成された経路から選択されてもよいし、動的に生成されるものでもよい。その経路に従って、移動体端末100のMQTTクライアントから配信サーバー350のMQTTブローカーへ遠隔操作データ(コマンド)を表すトピックを登録(サブスクライブ)する。また、必要に応じてMQTTブローカー間でデータ転送されるようにブリッジ設定する。これらの設定は各通信経路に対して行われる。
 遠隔操作端末200(MQTTクライアント)から遠隔操作データ(コマンド)が配信サーバー350へ送信(Publish)されると、配信サーバー350で遠隔操作データ(コマンド)が複製されてローカル5Gネットワーク501とキャリア5Gネットワーク504へ同時に配信され、2経路で移動体端末100(MQTTクライアント)に遠隔操作データ(コマンド)が届くようになる。
 移動体端末100から遠隔操作端末200へステータスデータを送信する場合も、上記と同様の手順を実施することにより、複数経路での通信が可能になる。
 なお、ここでは、配信サーバー350にMQTTブローカーを実装することとしたが、MECサーバー310にMQTTブローカーを実装して配信サーバーの機能を持たせてもよい。
 移動体端末100の詳細は後述するが、概略すると、移動体端末100は、複数のネットワーク500と同時接続可能である。移動体端末100は、ネットワーク500を経由して取得したデータを処理し、遠隔操作される。また、移動体端末100は、ネットワーク500を経由して取得したデータを処理し、自律移動するものであってもよい。移動体端末100は、たとえば、自動搬送機(AGV:Automatic Guided Vehicle)や移動可能なロボット、空中ドローン、水中または水上ドローンなどである。また、移動体端末100は、たとえば、車両などに取り付けられ、その車両を制御するスマートフォンやタブレットコンピューターなどであってもよい。また、移動体端末100は、可視光による撮影を行う可視光カメラのほか、暗視カメラや赤外線カメラ(サーモカメラを含む)、その他のセンサーを備えてもよい。さらに、移動体端末100は、周囲の人に対して情報を表示するためのディスプレイを備えてもよい。
 (遠隔操作端末)
 遠隔操作端末200は、移動体端末100を遠隔操作するための情報処理装置である。また、遠隔操作端末200は、自律移動する移動体端末100に対して、移動経路などを指示する情報処理装置である。
 遠隔操作端末200は、インターネット510に接続される。また、遠隔操作端末200は、インターネット510以外のネットワーク500や、MECサーバー310、配信サーバー350などと直接接続されてもよい。
 遠隔操作端末200は、遠隔操作の場合、リアルタイムで操作に関するコマンドを移動体端末100へ送信する。コマンドは、移動体端末100を遠隔操作するための遠隔操作データである。遠隔操作端末200から移動体端末100へ送信されるデータは、ネットワーク500を経由して移動体端末100に送信される。このために、遠隔操作端末200は、1つのデータを複数のネットワークへ送出する。また、データは、インターネット510を介してまたは直接、配信サーバー350に送信され、配信サーバー350から移動体端末100に宛てて送信されてもよい。配信サーバー350から、移動体端末100に宛ててデータが送信される場合、配信サーバー350は情報処理装置となり得る。
 同様に、移動体端末100から遠隔操作端末200へ送信されるデータも、ネットワーク500を経由して送信される。
 遠隔操作端末200は、移動体端末100が自律移動する場合、自律移動に必要な自律移動用データを移動体端末100へアップロードする。遠隔操作端末200から送信された自律移動用データは、ネットワーク500を経由して移動体端末100に送信される。また、遠隔操作端末200は、移動体端末100からの応答やリクエスト、さらに映像などのデータを受信する。移動体端末100から送信されたデータは、ネットワーク500を経由して遠隔操作端末200に送信される。
 自律移動用データは、遠隔操作端末200から、移動体管理サーバー300および/またはMECサーバー310へ、インターネット510を経由してアップロードされてもよい。また、自律移動用データは、インターネット510を介してまたは直接、配信サーバー350に送信され、配信サーバー350から移動体端末100に宛てて送信されてもよい。配信サーバー350から、移動体端末100に宛ててデータが送信される場合、配信サーバー350は情報処理装置となり得る。
 自律移動用データは、たとえば、移動範囲のマップと移動経路、移動中の動作内容などである。
 遠隔操作端末200は、ネットワーク500を介在させずに、直接、移動体端末100と無線通信してもよい。その場合、遠隔操作端末200は、無線通信局400の中の一つとして機能し、移動体端末100との間で、個別のローカル5Gネットワーク501が構成される。
 また、遠隔操作端末200は、移動体端末100が現在接続しているネットワーク500とインターネット510を介して接続された、他のネットワーク500と接続されてもよいし、移動体端末100と同一のネットワーク500に接続されていてもよい。移動体管理サーバー300も同様であり、遠隔操作端末200と移動体端末100からアクセス可能であれば、場所はどこにあってもよい。
 (移動体管理サーバー)
 移動体管理サーバー300は、移動体端末100および遠隔操作端末200との通信を接続するための認証を行う。
 移動体管理サーバー300は、インターネット510に接続されたクラウドサーバーである。移動体管理サーバー300には、遠隔操作端末200、移動体管理サーバー300、MECサーバー310、および移動体端末100との間で通信するのに必要な通信情報が記憶される。具体的には、たとえば、遠隔操作端末200、移動体管理サーバー300、MECサーバー310、および移動体端末100のそれぞれの識別コード(IP(Internet Protocol)アドレス、MAC(Media Access Control)アドレス、エッジデバイスのUUID(Universally Unique Identifier)など)が記憶される。ここでエッジデバイスとは、移動体端末100を含むIoT機器類である。記憶される通信情報は、ネットワーク500の構成、無線通信局400と遠隔操作端末200との間の通信形態、無線通信局400と移動体端末100の間の通信形態などによって異なる。
 移動体端末100は、相互認証した移動体管理サーバー300に、複数のネットワーク500との接続情報を登録する。遠隔操作端末200またはMECサーバー310は、移動体管理サーバー300から接続情報を取得して、移動体端末100と相互認証して接続する。
 また、移動体管理サーバー300には、自律移動に必要な情報が記憶されてもよい。また、移動体管理サーバー300は、インターネット510を介在せずに、インターネット510以外のネットワーク500と直接接続されてもよい。その場合、移動体管理サーバー300は、接続されているネットワーク500を経由して、他のネットワーク500やインターネット510と接続されてもよい。
 また、移動体管理サーバー300は、クラウドサーバーに限定されない。移動体管理サーバー300は、ネットワーク500を介在させずに、直接、移動体端末100と無線通信してもよい。その場合、移動体管理サーバー300は、複数の無線通信局400の中の一つとして機能し、移動体端末100との間で個別のローカル5Gネットワーク501を構成する。
 移動体管理サーバー300、遠隔操作端末200、および移動体端末100は、同じネットワーク500に接続されてもよい。移動体管理サーバー300、遠隔操作端末200、および移動体端末100は、異なるネットワーク500に接続されていて、それぞれが接続されているネットワーク同士が専用線やインターネット510を経由して接続されてもよい。
 なお、移動体端末100と遠隔操作端末200との接続、認証は、移動体端末100および遠隔操作端末200の少なくとも一方または両者によって互いに行われることとしてもよい。そのような場合、移動体管理サーバー300は、設けられなくてもよい。
 (MECサーバー)
 MECサーバー310は、複数のネットワーク500のいずれかに配置される。それぞれのMECサーバー310は、移動体端末100と、遠隔操作端末200または移動体管理サーバー300との間の通信を仲介するための近隣装置である。
 本実施形態において、MECサーバー310は、通信経路上、移動体端末100から見て、インターネット510より手前に位置する。遠隔操作端末200とMECサーバー310の間、およびMECサーバー310と移動体端末100の間には、それぞれ別の通信セッションが確立されてもよい。したがって、移動体端末100と、遠隔操作端末200または移動体管理サーバー300との間で、直接通信セッションが確立されない場合、通信経路の途中にあるいずれかのMECサーバー310が仲介して、データの送受信が行われる。
 MECサーバー310は、遠隔操作端末200または移動体管理サーバー300から送信されたデータを、無線通信局400を介してリアルタイムで、移動体端末100へ送信する。
 また、MECサーバー310は、移動体端末100がデータを処理しきれない場合に、代替してそのデータを処理する。たとえば、移動体端末100でAIによる画像解析を実行する際にCPUパワーが足りない場合、移動体端末100は、MECサーバー310へ画像データを送信する。MECサーバー310は、画像データをAIによる画像解析し、その結果を移動体端末100へ送信(返信)する。
 さらに、MECサーバー310は、独自の処理結果に基づいて、移動体端末100へデータを送信してもよい。この場合、データ起点は、MECサーバー310となる。独自のデータとしては、緊急停止コマンドがある。緊急停止コマンドの送信は、たとえば、移動体端末100から通常送られてくる信号が停止した場合、移動体端末100の移動範囲内に異常が検出された場合、移動体端末100から異常を知らせる信号が発出された場合などに実行される。これらの異常があった場合、MECサーバー310は、遠隔操作端末200へこれらの異常を伝達することなく、緊急停止コマンドを移動体端末100へ送信する。これにより、本実施形態は、移動体端末100を、遠隔操作端末200からの指示を待たずに、いち早く停止させることができる。
 緊急停止コマンドは、たとえば、MECサーバー310に搭載されたAIによって画像データを画像解析した結果、移動体端末100に人が近づいていることを検出した場合に発出される。このとき画像データは、たとえば、移動体端末100から、または移動体端末100の移動範囲を撮影しているカメラからMECサーバー310へ送信される。
 遠隔操作端末200において画像データを処理させる場合、画像データの送信と処理、およびその解析結果の送信に時間がかかる。一方、移動体端末100の近傍にあるMECサーバー310は、少なくともデータの送信時間を、短縮できる。したがって、MECサーバー310によって緊急停止の判断をさせることで、より早く緊急停止できる。
 なお、MECサーバー310は、必ずしも遠隔操作端末200と移動体端末100との通信経路の間にある必要はない。MECサーバー310は、たとえば、図1に示した第1MECサーバー311のように、少なくとも1つのネットワークに接続されていてもよい。この場合、第1MECサーバー311は、遠隔操作端末200からのデータを中継しなくてもよい。
 MECサーバー310は、遠隔操作端末200と移動体端末100を結ぶ物理的な経路上に設けられなくてもよい。たとえば、MECサーバー310は、遠隔操作端末200と、ネットワーク500を介在させずに、直接、接続されていてもよい。MECサーバー310は、移動体管理サーバー300とも、ネットワーク500を介在させずに、直接、接続されていてもよい。
 (無線通信局)
 複数の無線通信局400は、それぞれ同じネットワーク500に接続されていてもよいし、異なるネットワーク500に接続されていてもよい。また、無線通信局400のいずれかは、遠隔操作端末200または移動体管理サーバー300と、直接、接続されていてもよい。各無線通信局400は、それぞれの無線通信形態ごとに運用されている。たとえば、ローカル5G局401は、あらかじめ決められた使用者の範囲で使用される。ミリ波ローカル5G局402は、ローカル5G局401の中でも、ミリ波を使用することで、より高速かつ指向性のある範囲で使用される。WiFiAP403は、ローカルエリアネットワーク(LAN)などを介してネットワーク500と接続される。WiFiAP403は、5Gよりも狭い範囲で使用される。キャリア5G局404は、携帯電話のように加入することで、誰でも使用可能である。ただし、これら各無線通信局400の通信速度や通信可能範囲は、無線通信局400のシステム構成によって異なる。
 (移動体端末)
 図2は、移動体端末100の機能を説明するためのブロック図である。移動体端末100は、制御部110、センサー部120、および駆動部130を有する。なお、図2においては、無線通信局400としてローカル5G局401およびキャリア5G局404を示し、その他の無線通信局400は省略した。
 以下、各部の詳細を説明するが、制御部110の詳細については後述する。
 センサー部120は、たとえば、カメラや測位センサーなどのセンサー類からなる。カメラの映像は遠隔操作端末200やMECサーバー310へ送られることもある。また、前述のように映像は、MECサーバー310上や移動体端末100上でAIによる画像解析が行われて、移動体端末100の動作の決定に使用されることもある。
 測位センサーは、移動体端末100が自律移動する場合の位置把握に使用される。また、移動体端末100が遠隔操作のみで自律移動しない場合、移動体端末100は、測位センサーからの信号に基づいて、現在位置を遠隔操作端末200へ送信する。
 測位センサーとしては、たとえば、GNSS(Global Navigation Satellite System)が使用されてもよい。また、測位センサーとしては、LiDAR(Laser Imaging Detection and Ranging)、UWB(Ultra Wide Band)などが使用されてもよい。なお、移動体端末100が遠隔操作のみで自律移動しない場合、測位センサーは、設けられなくてもよい。
 駆動部130は、移動体端末100を移動させるために必要なモーターやギア機構などを有する。駆動部130は、制御部110からの制御によってモーターやギア機構などを動作させる。駆動部130の構成は、移動体端末100の構成によって異なる。
 制御部110は、接続部101、送受信部102、処理部103、および記憶部104を有する。図3は、制御部110のさらに詳細な機能を説明するためのブロック図である。
 接続部101は、複数の無線通信局400に同時に接続する。このために、接続部101は、図3に示すように、複数の通信ユニットを有する。本実施形態において、複数の通信ユニットは、第1通信ユニット111、第2通信ユニット112、第n通信ユニット11nである。
 通信ユニットは、少なくとも2カ所のネットワーク500と同時に接続できるように、複数備えられている。それぞれの通信ユニットは、接続する通信形態に合わせて備えられる。たとえば、複数の5Gの無線通信局400と同時に接続する可能性がある場合、5Gに対応した複数の通信ユニットが備えられる。また、5Gの無線通信局400とWiFiAP403に同時に接続する可能性がある場合、5Gに対応した通信ユニットと、WiFiAP403に対応した通信ユニットが備えられる。さらに、移動体端末100は、各通信ユニットに接続されたアンテナを備える。アンテナは、接続する可能性のある無線通信局400が使用する電波の波長帯域に合わせて備えられる。
 本実施形態では、図3に示したように、第1通信ユニット111がローカル5G局401に対応し、第2通信ユニット112がキャリア5G局404に対応し、第n通信ユニット11nがその他の無線通信局400に対応する。
 各通信ユニットは、受信バッファ1111および送信バッファ1112を有する。受信バッファ1111は、接続された無線通信局400から受信したデータを一時記憶する。送信バッファ1112は、これから送信するデータを一時記憶する。
 送受信部102は、接続部101によって接続された複数のネットワーク500を経由してデータを受信する(受信部の機能)。また、送受信部102は、接続部101によって接続された複数のネットワーク500を経由してデータを送信する(送信部の機能)。
 送受信部102は、いずれかのネットワーク500との接続が確立後、統合コマンドキュー1041を作成する。統合コマンドキュー1041は、記憶部104の中に作成される。
 送受信部102は、それぞれの通信ユニットの受信バッファ1111にデータが一時記憶された時点で、受信バッファ1111からデータを取り出す。送受信部102は、取り出したデータを、受信された順に、統合コマンドキュー1041へ投入する。統合コマンドキュー1041へ投入されたコマンドは、時系列情報に基づいてソートされる(ソートについては後述する)。
 処理部103は、統合コマンドキュー1041に投入されたデータをその並び順に処理する。したがって、処理部103は、複数の無線通信局400から同一のデータを受信した場合、最初に受信したデータのみを処理する。遠隔操作端末200からのデータを処理するために、処理部103は、コマンド実行ユニット1031を備える。コマンド実行ユニット1031では、最初に受信したコマンドが実行される。
 最初に受信したコマンドのみが実行されるようにするために、処理部103は、コマンドに付与される時系列情報を使用する。時系列情報としては、たとえば、タイムスタンプまたはシーケンスナンバーが使用される。
 タイムスタンプを使用する場合(タイムスタンプ方式と称する)、処理部103(ここではコマンド実行ユニット1031)は、情報S1として、最後に実行したコマンドのタイムスタンプを記憶する。また、処理部103は、情報S2として、統合コマンドキュー1041から取得した次のコマンドのタイムスタンプを記憶する。このタイムスタンプには、遠隔操作端末200がコマンドを送信した時刻が記述されている。その上で、処理部103は、情報S1とS2を対比し、S2が、S1と同じか、またはより早い時刻の場合、後から受信した情報S2は実行しない。
 一方、シーケンスナンバーを使用する場合(シーケンスナンバー方式と称する)、処理部103(ここではコマンド実行ユニット1031)は、情報S1として、次に実行すべきコマンドのシーケンスナンバーを記憶する。また、処理部103は、情報S2として、直前で受信したコマンドのシーケンスナンバーを記憶する。その上で、処理部103は、その上で、処理部103は、情報S1とS2を対比し、S1とS2が同じ場合、コマンドを実行し、それ以外の場合は、後から受信した情報S2は実行しない。また、シーケンスナンバー方式の場合、さらに情報T1として、タイムアウト時刻を記憶し、情報T2として現在時刻を記憶してもよい。その上で、処理部103は、情報T1とT2を対比し、T2がタイムアウト時刻であるT1を過ぎた場合(または同じになった場合)、受信したコマンドを実行しない。なお、これらの処理の手順については、後述する。
 また、処理部103は、自身の処理結果または受信したデータ(コマンド)に応じて、様々なデータを送信する。送信させるデータは、たとえば、コマンド送信ユニット1032によって生成される。コマンド送信ユニット1032では、生成したデータ、たとえばデータ要求コマンドなどを、送受信部102に投入する。送受信部102は、送信部の機能として、送信するデータを送信できるデータ形式(たとえばパケットなど)に変換する。送受信部102は、送信するデータを接続部101の送信バッファ1112に投入する。接続部101は、送信バッファ1112の中のデータを、接続されているネットワーク500を経由して、遠隔操作端末200または移動体管理サーバー300へ送信する。このとき、複数のネットワーク500と接続している場合、接続部101は、同じデータをすべてのネットワーク500へ送出する。
 以上のような制御部110の機能は、通信ユニットおよびコンピューターによって達成される。コンピューターは、周知のように、演算素子となるCPU(Central Processing Unit)、記憶部104となるROM(Read Only Memory)およびRAM(Random Access Memory)などを有する。通信制御のために使用される記憶部104としては、高速動作できるRAMが使用される。
 また、記憶部104としては、たとえば、eMMC(embedded MultMediaCard)、SSD(Solid State Drive)、HDD(Hard Disk Drive)などの不揮発性メモリーを備えてもよい。さらに、記憶部104としては、メモリーカードなどの可搬式の記憶媒体を備えてもよい。これらの不揮発性メモリーは、たとえば、通信制御やその他の処理に必要なプログラムの記憶や、保存が必要なデータの記憶に使用される。
 このようなコンピューターとしては、汎用のCPUやROM、RAMなどで構成され、ソフトウエア(プログラム)によって通信機能や各種処理を実行させてもよい。また、コンピューターとしては、SoC(System On Chip)やFPGA(Field Programmable Gate Array)などのハードウェアに各種処理が組み込まれたものであってもよい。
 (通信制御の手順)
 本実施形態の通信制御の手順を説明する。以下の通信制御の手順においても、時系列情報としては、タイムスタンプ方式またはシーケンスナンバー方式のいずれかを使用する。
 (タイムスタンプ方式)
 図4は、タイムスタンプ方式による通信制御の手順を説明するためのフローチャートである。通信制御は、ここで説明する手順に沿って作成されたプログラムを制御部110が実行することによって行われる。
 まず、制御部110において、接続部101は、複数の通信ユニットによって、最寄りの無線通信局400を介して複数のネットワーク500と接続する。接続部101は、受信したコマンドを統合コマンドキュー1041へ投入する。このとき、コマンドとともに、そのコマンドに付与されているタイムスタンプも記憶される。接続部101による接続動作は、後述する処理部103の処理と並列に実行される。
 接続動作は、以下のように実行される。遠隔操作者は、遠隔操作端末200を操作して、移動体端末100との接続情報や、認証情報などの必要な情報を移動体管理サーバー300に記憶させる。移動体端末100も、遠隔操作端末200との接続情報や認証情報などを移動体管理サーバー300に記憶させる。
 遠隔操作者は、遠隔操作端末200を操作して、移動体管理サーバー300から移動体端末100の接続情報などを得て移動体端末100への接続を試みる。それに対して、移動体端末100は、移動体管理サーバー300に問い合わせて遠隔操作者を認証し、接続を認可する(遠隔操作端末200を認証する場合もある)。また、認証手続きは、ネットワーク500を介さずに、移動体端末100と、遠隔操作者や遠隔操作端末200との間で直接行われてもよい。
 そして、制御部110は、あらかじめ設定された無線通信局400の接続優先順位に従って、認証動作を実行する。これにより、移動体端末100は、現在位置において接続可能な無線通信局400に対して、決められた同時接続数(接続チャネル数)の数だけ接続する。
 たとえば、同時接続数が3の場合(以下同様)、かつ、移動体端末100の現在位置が図1に示したA位置の場合、移動体端末100は、上記認証動作によって、ローカル5G局401とキャリア5G局404の両方に、同時に接続する。したがって、この状態で、移動体端末100は、キャリア5Gネットワーク504とローカル5Gネットワーク501の両方に接続される。
 移動体端末100が移動するなどして電波状況に変化があった場合、制御部110は、電波状況に応じて接続可能な無線通信局400との接続を実行する。
 たとえば、移動体端末100が図1に示したB位置に移動した場合、移動体端末100とローカル5G局401との接続は、切断される。しかし、移動体端末100とキャリア5G局404との接続は、維持される。
 また、たとえば、A位置から、移動体端末100が図1に示したC位置に移動した場合、移動中、移動体端末100とローカル5G局401との接続は、切断される。しかし、移動体端末100とキャリア5G局404との接続は、維持される。そして、制御部110は、ミリ波ローカル5G局402との認証を行って、ミリ波ローカル5G局402と接続する。したがって、この状態で、移動体端末100は、キャリア5Gネットワーク504とミリ波ローカル5Gネットワーク502の両方に接続される。
 さらに、移動体端末100が図1に示したD位置に移動した場合、移動体端末100とミリ波ローカル5G局402との接続は、切断される。しかし、移動体端末100とキャリア5G局404との接続は、維持される。
 なお、移動体管理サーバー300は、移動体端末100によって登録された通信経路で移動体端末100が接続されていることを定期的に問い合わせるか、移動体端末100からのキープアライブ(KeepAlive)信号を受けて接続状態を監視する。移動体管理サーバー300は、一定時間接続がないことを確認すると、移動体端末100によって登録された接続情報を抹消する。
 遠隔操作者は、接続が確立した複数のネットワーク500を経由して移動体端末100から送られてくる映像データのうち、最も低遅延で送られてくる映像データを見ながら遠隔操作端末200を操作する。映像データは、移動体端末100に搭載されたカメラによって撮影された映像である。遠隔操作端末200は、遠隔操作者の操作に従い、たとえば、移動体端末100を操作するためのコマンドを、すべてのネットワーク対して同時に送出する。各コマンドには、いつ送信されたかを示すタイムスタンプが付与されている。タイムスタンプは、同じ操作コマンドか否かの識別に利用される。
 接続の確立後、制御部110は、処理部103の機能として、統合コマンドキュー1041へ投入されたコマンドをタイムスタンプの順にソートする(S101)。また、タイムスタンプのないコマンドは、常に、統合コマンドキュー1041の先頭に配置される。たとえばMECサーバー310から送信されるすべてのコマンド、あるいはMECサーバー310から送信される特定のコマンド(割り込みコマンド)には、タイムスタンプは付与されない。統合コマンドキュー1041の先頭とは、統合コマンドキュー1041から最初に取り出される位置のことである。
 ソート処理について説明する。
 タイムスタンプ方式では、たとえば、あるデータが欠落した場合、その欠落したコマンド(データ)に付与されているタイムスタンプより後の時刻のタイムスタンプが付与されたデータを先に受信することになる。その場合、受信したコマンドが先に処理される。そして、後から、実行されたコマンドよりも前の時刻のタイムスタンプのコマンドが受信された場合、そのコマンドは破棄される(後述S104およびS106のステップ)。
 また、それぞれのコマンドは、複数のネットワークから受信される。このため、先に受信したコマンドが実行される前に、そのコマンドより前の時刻のタイムスタンプの別のコマンドが、後から受信される場合がある。このような場合、S101のソート処理によって、実行前の複数のコマンドは、タイムスタンプの順に並ぶことになる。
 ただし、タイムスタンプのない割り込みコマンドは、ソート処理の例外である。割り込みコマンドだけはソートにより順序を入れ替え、統合コマンドキュー1041の先頭に配置される。
 続いて、制御部110は、処理部103の機能として、統合コマンドキュー1041の先頭からコマンドを取得する(S102)。
 続いて、制御部110は、取得したコマンドにタイムスタンプがあるか否かを判断する(S103)。タイムスタンプのないコマンドとは、緊急停止などの割り込み処理コマンドである。
 S103のステップにおいて、タイムスタンプなし(S103:NO)の場合、制御部110は、即時、コマンドを実行する(S105)。これは、タイムスタンプのないコマンドとは、上述のように、緊急停止などの割り込み処理コマンドであるから、即時実行することで移動体端末100を緊急停止させたり、割り込み処理をさせたりできる。
 S103のステップにおいて、タイムスタンプあり(S103:YES)の場合、制御部110は、情報S1とS2を対比する(S104)。すでに説明したように、情報S1は、最後に実行したコマンドのタイムスタンプであり、情報S2は、統合コマンドキュー1041から取得した次のコマンドのタイムスタンプである。したがって、情報S2は、このS104のステップを実行する直前のS102のステップによって取得されたデータのタイムスタンプである。
 S104のステップにおいて、S2≦S1ではない場合(S104:NO)、続いて、制御部110は、取得したコマンドを実行する(S105)。S2≦S1ではない場合(S104:NO)とは、最後に実行したコマンドのタイムスタンプ(情報S1)の時刻より統合コマンドキュー1041から取得した次のコマンドのタイムスタンプ(情報S2)の時刻の方が、遅い時刻を示している場合である。
 S104のステップにおいて、S2≦S1の場合(S104:YES)、続いて、制御部110は、取得したコマンドを破棄する(S106)。S2≦S1の場合(S104:YES)とは、最後に実行したコマンドのタイムスタンプ(情報S1)の時刻と統合コマンドキュー1041から取得した次のコマンドのタイムスタンプ(情報S2)の時刻が同じ、または最後に実行したコマンドのタイムスタンプ(情報S1)の時刻より統合コマンドキュー1041から取得した次のコマンドのタイムスタンプ(情報S2)の時刻の方が、早い時刻を示している場合である。
 その後、制御部110は、終了指示があれば(S107:YES)、処理を終了する。一方、制御部110は、終了指示がなければ(S107:NO)、S101のステップへ戻り、以降の手順を継続する。
 (シーケンスナンバー方式)
 図5は、シーケンスナンバー方式による通信制御の手順を説明するためのフローチャートである。通信制御は、ここで説明する手順に沿って作成されたプログラムを制御部110が実行することによって行われる。
 まず、制御部110において、接続部101は、複数の通信ユニットによって、最寄りの無線通信局400を介して複数のネットワーク500と接続する。接続部101による接続動作は、上述したタイムスタンプ方式の場合と同じである。このとき、コマンドとともに、そのコマンドに付与されているシーケンスナンバーも記憶される。
 接続の確立後、制御部110は、処理部103の機能として、統合コマンドキュー1041へ投入されたコマンドをシーケンスナンバーの順にソートする(S201)。このとき、シーケンスナンバーのないコマンドは、常に、統合コマンドキュー1041の先頭に投入される。たとえばMECサーバー310から送信されるすべてのコマンド、あるいはMECサーバー310から送信される特定のコマンド(割り込みコマンド)には、シーケンスナンバーは付与されない。
 シーケンスナンバー方式において、ソート動作は、以下のように実行される。ここでは、第1通信ユニット111をCh1、第2通信ユニット112をCh2として説明する。また、たとえば、Ch1で受信した場合、シーケンスナンバー1のコマンドは1-1、シーケンスナンバー2のコマンドは1-2、シーケンスナンバー3のコマンドは1-3、…と表記する。同様に、Ch2で受信した場合、シーケンスナンバー1のコマンドは2-1、シーケンスナンバー2のコマンドは2-2、シーケンスナンバー3のコマンドは1-3、…と表記する。なお、シーケンスナンバーは、送信時に、またはあらかじめ送信前にコマンドに付与されている。このため、シーケンスナンバーの重複はない。
 このような場合において、たとえば、統合コマンドキュー1041には、受信時の時系列順に左から1-1、2-1、1-3、1-4と入っていたとする。この状態は、シーケンスナンバー1のコマンドがCh1と2Chから受信されている。一方、この時点で、シーケンスナンバー2のコマンドは、受信されていない。
 その後、Ch2でシーケンスナンバー2(すなわち2-2)のコマンドが受信されると1-3、1-4が先に受信され、2-2が後から受信されることになる。
 そこで、次にシーケンスナンバーによるソートが実行されることで、統合コマンドキュー1041内は、1-1、2-1、2-2、1-3、1-4と並ぶことになる。そして、重複するシーケンスナンバーのコマンドで、かつ、後から受信した2-1は破棄される(後述S204、S206、S208)。
 また、前述の統合コマンドキュー1041の状態(1-1、2-1、1-3、1-4)で、シーケンスナンバー2のコマンドが受信されない場合、1-1が処理され、2-1が破棄されて、統合コマンドキュー1041には1-3と1-4が残る。
 この状態で1-3を処理中(コマンド実行前までの処理中)に、シーケンスナンバー2がCh2によって受信されたとする。つまり、統合コマンドキュー1041は2-2、1-4の状態になる。この時点では、まだ、シーケンスナンバー2が処理されていないので待ち状態になる。そして、本実施形態では、1-3は、一旦統合コマンドキュー1041に戻される(後述S206、S207、S209)。この時、再び、ソートをかけて2-2、1-3、1-4と並ぶようにする。これは、コマンドを先頭にそのまま戻してしまうと、次もまた1-3を処理することになり、タイムアウトするまで処理が進まなくなる。そこで、本実施形態では、統合コマンドキュー1041に戻す際に、S201のステップへ戻すことにより、戻したコマンドを含めてソートされるようにしている。
 これにより、シーケンスナンバー方式では、必ず、シーケンスナンバーの順にコマンドが実行される。
 続いて、制御部110は、処理部103の機能として、統合コマンドキュー1041の先頭からコマンドを取得する(S202)。
 続いて、制御部110は、取得したコマンドにシーケンスナンバーが付与されているか否かを判断する(S203)。シーケンスナンバーのないコマンドとは、緊急停止や割り込み処理などである。
 S203のステップにおいて、シーケンスナンバーなし(S203:NO)の場合、制御部110は、即時、コマンドを実行する(S205)。
 S203のステップにおいて、シーケンスナンバーあり(S203:YES)の場合、制御部110は、情報S1とS2を対比する(S204)。すでに説明したように、シーケンスナンバー方式における情報S1は、次に実行すべきコマンドのシーケンスナンバーであり、情報S2は、受信したコマンドのシーケンスナンバーである。したがって、情報S2は、このS204のステップを実行する直前のS202のステップによって取得されたデータのシーケンスナンバーである。
 S204のステップにおいて、S2=S1の場合(S204:YES)、続いて、制御部110は、取得したコマンドを実行する。また、制御部110は、S1をインクリメント(S1←S1+1)して更新する。また、制御部110は、T1にT2およびTcを加算して(T1←T2+Tc)更新する(S205)。T1は、タイムアウト時刻であり、T2は現在時刻であり、Tcは所定のタイムアウト時間である。
 S204のステップにおいて、S2=S1ではない場合(S204:NO)、続いて、制御部110は、S2>S1であるか否か判断する(S206)。
 S206のステップにおいて、S2>S1の場合(S206:YES)、続いて、制御部110は、T2≧T1であるか否か判断する(S207)。すでに説明したように、情報T1は、タイムアウト時刻であり、情報T2は、現在時刻である。
 S207のステップにおいて、T2≧T1の場合(S207:YES)、続いて、制御部110は、S205へ進みコマンドを実行し、S1およびT1を更新する(S205)。
 S206のステップにおいて、S2>S1ではない場合(S206:NO)、続いて、制御部110は、受信したコマンドを破棄する(S208)。その後、制御部110は、S201のステップへ戻り、以降の手順を継続する。
 S207のステップにおいて、T2≧T1ではない場合(S207:NO)、続いて、制御部110は、受信したコマンドを統合コマンドキュー1041へ戻す(S209)。その後、制御部110は、S201のステップへ戻り、以降の手順を継続する。
 その後、制御部110は、終了指示があれば(S210:YES)、処理を終了する。一方、制御部110は、終了指示がなければ(S210:NO)、S201のステップへ戻り、以降の手順を継続する。
 (作用)
 本実施形態に係る移動体端末100および無線通信システム1による作用を説明する。
 自動搬送機やドローンなどの移動体端末100は、無線技術やコンピューター制御技術の向上に伴い、それらを使用した無人自動配送、また、それらに搭載したカメラによる無人撮影などへの使用が期待されている。
 そのような移動体端末100は、自律して走行/飛行することもできるが、手動/自動を問わず遠隔操作することもある。移動体端末100と遠隔操作端末200との通信は、専用の周波数帯域を用いた限定されたエリアだけでなく、5Gなどを使ってインターネット510のような世界規模のネットワーク500につなぎ、遠隔操作することも可能になろうとしている。
 5Gなどの無線通信を行って遠隔操作を行う際に問題となるのが、ローミングやハンドオーバーによる遅延である。
 移動体端末100が通信を行っているセルや基地局(無線通信局400)を切り替えること、あるいはWiFiのアクセスポイントを切り替えることは、ハンドオーバーと呼ばれている。また、移動体端末100がある通信事業者のネットワーク500から他の通信事業者のネットワーク500へ通信を切り替えること、あるいは5GからWiFiへの切り替えのように無線通信メディアを切り替えることは、ローミングと呼ばれている。
 通常、ハンドオーバーやローミングを行うには、数100msから数秒の時間がかかる。たとえば、Webブラウジングやバッファリングしながらのストリーミングの場合、これらの遅延時間は、ほとんど気にならない。しかし、遠隔操作においては、大きな問題となることがある。たとえば、遠隔の映像を見ながら操作する場合、100ms以上の遅延があると、人(遠隔操作者)は、違和感を覚える。また、遠隔操作中にハンドオーバーやローミングが発生して通信が遮断されると、人(遠隔操作者)は、制御不能になったと感じることもある。
 また、このような遠隔操作は、将来的に、人がすべて操作するのではなく、AIなどを使ったコンピューター制御のアシストを受けて、機械に任せて行われるようになる。さらに、遠隔操作においては、移動体端末100の進行方向に人が侵入するなどして危険を察知した際に、AIの判断により自動的に回避行動をとることができるようになる。
 このような機械による制御が行われる場合、遠隔操作においては、数100msもの通信切断期間があると、移動体端末100の動作に支障をきたすこともある。また、ハンドオーバーやローミングの期間中は、通信ができない。このため、遠隔操作においては、この期間中、遠隔操作者から送信された操作コマンドを漏れなく受信するために、再送を行うか、通信が回復するまで待たなければならない。つまり、遠隔操作においては、ハンドオーバーやローミングの時間に加えて、再送もしくは待機させたコマンドが移動体端末100に届くまでの時間も考慮して、操作しなければならない。
 また、日本における5Gの通信は、ローカル5G(海外ではプライベート5G)によって、通信事業者でない企業や自治体も利用できる。
 ローカル5Gのエリア内で移動体端末100を操作する場合においても、以下のような理由により、ハンドオーバーやローミングが必要となる。利用可能な周波数帯域の不足と通信の高速大容量化に伴い、ミリ波のような波長の短い電波が、今後利用されるようになる。波長の短い電波においては、遮蔽物があると、電波が回り込み難く、電波が到達しない死角が発生する。また、波長の短い電波においては、電波強度が減衰しやすく、通信可能なエリアもより狭くなる。このため、波長の短い電波を使用する場合は、基地局をより多く設置する必要がある。
 このような問題は、マルチアンテナ(たとえばMassive MIMO)技術やビームフォーミング技術を使った空間分割多元接続(SDMA:Space Division Multiple Access)によって解決することが試みられている。
 しかし、高速で移動する移動体端末100をビームが追跡したり、時々刻々変わる状況で電波干渉を抑えながら電波の死角もしくは電波強度が微弱な場所をなくしたりすることは、容易ではない。したがって、このような環境においてもハンドオーバーやローミングは今後も不可欠な技術である。
 将来的には、現状のAGVやドローンだけでなく、様々な形態の移動体端末100が無線による遠隔操作や自動制御され、それら移動体端末100が無線通信エリア間を高速に移動する場面が想定される。高速に移動すればするほど、ハンドオーバーやローミングにおける遅延の問題が大きくなる。また、移動しながら移動体端末100に取り付けたアームなどをスムーズに動かすためには、遅延を極力小さくすることが求められる。
 本実施形態は、移動体端末100がある無線通信局400を含めたネットワーク500間を移動した場合に、ハンドオーバーやローミング時の通信切断の影響を受けずに、シームレスに通信を持続し、遠隔操作の継続を可能とする。
 図6は、移動体端末100の処理例を説明するための説明図である。
 図6において以下のように想定する。移動体端末100は、ローカル5G局401とキャリア5G局404の両方と通信可能である。
 ローカル5G局401は、信号の遅延が少ない。しかし、ローカル5G局401の通信可能範囲は狭い。このため、移動体端末100が移動すると、移動体端末100とローカル5G局401との接続が、切断される可能性がある。接続が切断されると、移動体端末100は、送信されるコマンドを漏れなく受信することができない。
 一方、キャリア5G局404は、ローカル5G局401より信号の遅延が大きい。キャリア5G局404は、通信可能範囲がローカル5G局401より広い。このため、移動体端末100が移動しても、移動体端末100とキャリア5G局404との接続が、切断される可能性は低い。このため、移動体端末100は、コマンドを確実に受信できる。
 図6において、移動体端末100は、ローカル5G局401との通信を5GのCh1として、第1通信ユニット111によって接続する。移動体端末100は、キャリア5G局404との通信を5GのCh2として、第2通信ユニット112によって接続する。
 遠隔操作端末200からは、同じタイムスタンプのコマンドが、各ネットワーク500へ同時に送出される。各ネットワーク500へ同時に行われる。しかし、上述の通り、ローカル5G局401を有するネットワーク500とキャリア5G局404を有するネットワーク500では、信号の遅延時間が異なる。このため、移動体端末100は、Ch1とCh2で、同じコマンドを異なる時刻に受信する。
 ここでは、まず、移動体端末100が、ローカル5G局401とキャリア5G局404の両方と接続可能な位置に存在すると想定する(図1のA位置)。そうすると、移動体端末100は、タイムスタンプ0124と0135のコマンドを、最初にCh1から受信する。Ch1からのタイムスタンプ0124と0135のコマンドは、第1通信ユニット111の受信バッファ1111に一旦記憶される。この後、タイムスタンプ0124と0135のコマンドが、Ch2からも受信される。Ch2からのタイムスタンプ0124と0135のコマンドは、第2通信ユニット112の受信バッファ1111に一旦記憶される。
 そして、本実施形態では、上述した通信制御の手順によって、コマンド実行ユニット1031(処理部103)が、先に受信したCh1からのタイムスタンプ0124と0135のコマンドを実行する。一方、後から受信したCh2からのタイムスタンプ0124と0135のコマンドは、破棄される。
 その後、移動体端末100がローカル5Gエリア4011の外に出ることを想定する(図1のB位置)。移動体端末100がローカル5Gエリア4011の外に出ても、キャリアエリア4041の中に存在する。
 この状態で、遠隔操作端末200からタイムスタンプ0200のコマンドが送信される。
 そうすると、移動体端末100は、Ch1からのコマンドを受信できない。一方、CH2からは、受信できる。したがって、CH2から受信したタイムスタンプ0200のコマンドは、第2通信ユニット112の受信バッファ1111に一旦記憶される。タイムスタンプ0200のコマンドは、コマンド実行ユニット1031によって実行される。
 続けて、移動体端末100は、タイムスタンプ0244のコマンドを、同様にCh2で受信する。この時点でも、移動体端末100はローカル5Gエリア4011の外である。移動体端末100は、そのままタイムスタンプ0244のコマンドを実行する。
 再び移動体端末100がローカル5Gエリア4011に戻ると、移動体端末100は、タイムスタンプ0312のコマンドをCh1から受信する。移動体端末100は、タイムスタンプ0312のコマンドを受信した時点で、実行する。後からタイムスタンプ0312のコマンドがCh2から受信されるが、これは破棄される。
 このように本実施形態の移動体端末100は、Ch1とCh2で先に受信した方のコマンドを実行する。そして、移動体端末100がローカル5Gエリア4011を外れた際には、キャリア5G局404からのCh2からのコマンドを受信して実行する。この間、ローカル5G局401からの通信は途切れるが、キャリア5G局404からの通信は継続されたままである。したがって、移動体端末100の移動に伴って新たなローミングやハンドオーバーは発生しないので、ローミングやハンドオーバーに伴うデータの取得の遅延が発生しない。
 以上タイムスタンプ方式の場合を説明した。タイムスタンプの代わりにシーケンスナンバーを使用することもできる。
 ここでは、図6におけるタイムスタンプの数値をシーケンスナンバーとして説明する。
 シーケンスナンバー方式において、移動体端末100は、シーケンスナンバーの順にコマンドを実行する。また、遠隔操作端末200からのコマンドは、タイムスタンプ方式同様に、同じシーケンスナンバーのコマンドが、各ネットワーク500へ同時に送出される。
 ここでも、まず、移動体端末100が、ローカル5G局401とキャリア5G局404の両方と接続可能な位置に存在すると想定する(図1のA位置)。そうすると、移動体端末100は、最初にCh1から受信したシーケンスナンバー0124と0135のコマンドを実行する。移動体端末100は、後から、Ch2から受信した、同じシーケンスナンバー0124と0135のコマンドを破棄する。したがって、シーケンスナンバー方式においても、最初に受信したシーケンスナンバーのコマンドのみ実行され、後から同じシーケンスナンバーのコマンドが受信されても破棄される。
 その後は、タイムスタンプ方式の場合と同様であり、いずれか1つのネットワーク500に接続している場合、移動体端末100は、そのネットワーク500から受信したコマンドを実行する。複数のネットワーク500と接続している場合、移動体端末100は、最初に受信したコマンドのみ実行する。
 また、たとえば、シーケンスナンバー方式では、シーケンスナンバー0244の後に、シーケンスナンバー0245というコマンドがあった場合、そのコマンドは、Ch1で受信できない。その後、移動体端末100が、ローカル5Gエリア4011に戻ると、シーケンスナンバー0244のコマンドが実行された後に、Ch1からシーケンスナンバー0312のコマンドが受信されて、実行される。シーケンスナンバー方式では、その後、遅れて、シーケンスナンバー0245のコマンドがCh2から受信される可能性がある。
 このような場合、前述のタイムスタンプ方式では、タイムスタンプ0312がすでに実行されている。タイムスタンプ0245は、タイムスタンプ0312より早い時刻を示している。したがって、後から受信したタイムスタンプ0245のコマンドは実行されない。
 一方、シーケンスナンバー方式においては、最初に受信したコマンドのシーケンスナンバーが、次に実行されるべきシーケンスナンバーと一致しない場合、移動体端末100は、最初に受信したコマンドを待機処理とすることもできる。待機処理する場合、Ch1から、先に受信したシーケンスナンバー0312のコマンドは待機処理に回される。待機処理は、実行済みのシーケンスナンバー0244の次に実行させるべきシーケンスナンバー0245の受信を待つ処理である。
 移動体端末100は、後から、シーケンスナンバー0245のコマンドがCh2から受信された時点で、そのコマンドを実行する。その後に、移動体端末100は、シーケンスナンバーが0246~0311までのコマンドが受信されずにタイムアウトした後に、待機処理に回したシーケンスナンバー0312のコマンドを実行する。
 このように、シーケンスナンバー方式では、番号の不一致によって、受信されていないコマンドがあることを特定した場合、待機処理を実行することによって、コマンドの実行漏れを防止できる。
 なお、低遅延で実行するタイムスタンプ方式にするか、コマンド実行の確実性(順序)を考慮したシーケンスナンバー方式にするかは、移動体端末100の構成、操作性、動作内容などに応じて任意に選択される。
 ネットワーク500の構成は、すでに説明したように、遠隔操作端末200と移動体端末100の間にMECサーバー310を配置することができる。MECサーバー310は、遠隔操作端末200からのコマンドを一旦受信して、それを移動体端末100へ中継する。また、MECサーバー310は、このような中継動作に限定されない。MECサーバー310は、遠隔操作端末200からのコマンドとは別に、MECサーバー310からも独自のコマンドを移動体端末100へ送信できる。
 ここでは、たとえば、第1MECサーバー311からコマンド「xxxx:緊急停止」が移動体端末100へ送信されることを想定する。
 移動体端末100は、タイムスタンプがついていないコマンド「xxxx:緊急停止」をCh1から受信する。タイムスタンプがついていない場合は、割り込みコマンドとして他のコマンドの実行状況にかかわらず、即実行される。これにより、移動体端末100は、他のネットワーク500からのデータの受信を含めて、機能を停止する。
 このようなMECサーバー独自の判断によるコマンドの送信は、遠隔操作者の判断とは独立して行われる。このコマンドの送信は、移動体端末100に近い位置にあるMECサーバー310によって、たとえば、AIなどを用いて判断される。このため、移動体端末100から物理的にも、通信経路的にも近い位置からのコマンド送信となる。したがって、異常事態が発生した場合に、移動体端末100を一早く停止させることができる。なお、第1MECサーバー311からのコマンド「xxxx:緊急停止」の送信は、あくまでも一例であり、他のMECサーバー310や移動体管理サーバー300、また、遠隔操作端末200からも、タイムスタンプやシーケンスナンバーのついていないコマンドが送信された場合、移動体端末100は、そのコマンドを即時実行する。
 次に、本実施形態によるローミングおよびハンドオーバーについて説明する。ここでは、複数のネットワーク500と同時に接続する本実施形態と、常に、1つのネットワーク500としか接続しない比較例とを対比して説明する。
 図7は、ローミングおよびハンドオーバーについて説明するためのタイムチャートであり、(a)は本実施形態の場合、(b)は、比較例の場合である。
 ここでは、ローカル5G局401の方が、キャリア5G局404よりも、送受信のレイテンシーが小さいと仮定する。また、図7は、ローカル5Gエリア4011を外れて、キャリアエリア4041へローミングする場合と、ローカル5G局401内でハンドオーバーする場合を示している。ローカル5G局401とキャリア5G局404のシステム自体は、本実施形態の場合も、比較例の場合も、同一の性能を有しているものとする。
 本実施形態の場合は、図7(a)に示すように、事前に、ローカル5G局401とキャリア5G局404の両方に通信の接続(通信セッション)が確立されている。したがって、本実施形態の場合、ローミングは発生せず、遅延時間は、ローカル5G局401とキャリア5G局404の送受信のレイテンシーの差分だけである。その後、移動体端末100が、ローカル5Gエリア4011を外れて再び通信セッションの確立を待っている間に通信要求が実行された場合も、その時点では、キャリア5G局404と通信セッションが確立しているので、遅延時間は同じである。
 一方、比較例の場合は、図7(b)に示すように、ローミングが完了してからコマンドが送信される。このため、比較例の場合は、送信の要求が発生してからローミング完了までに必要な時間に、ローカル5G局401とキャリア5G局404の送受信のレイテンシーの差分を加えた分だけ、コマンド受信が遅れる(*2)。
 また、本実施形態の場合の遅延時間は、ローカル5G局401とキャリア5G局404の送受信のレイテンシーの差分だけである。したがって、本実施形態の場合、ハンドオーバーに要する時間は影響しない。
 一方、比較例の場合は、ハンドオーバーが完了してからコマンドが送信される。このため、比較例の場合は、送信の要求が発生してからハンドオーバー完了までに必要な時間だけコマンド受信が遅れる。
 これらのことから、本実施形態において発生する遅延時間(*1)は、比較例において発生する遅延時間(*2)より極めて少ないことがわかる。
 次に、本実施形態による遠隔操作端末200と移動体端末100との通信パターンについて説明する。
 遠隔操作端末200と移動体端末100との通信パターンは、2つある。第1の通信パターンは、遠隔操作端末200から移動体端末100へ、データとして遠隔操作に必要なコマンドを送信する。第2の通信パターンは、移動体端末100からの要求に基づいて、遠隔操作端末200から移動体端末100へ、要求されたデータ送信する。
 まず、第1の通信パターンについて説明する。図8A~図8Dは、遠隔操作端末200と移動体端末100の間で行われる第1の通信パターンを説明するための説明図である。
 ここでのネットワーク500の経路は、Ch1、Ch2、Ch3、…ChNである。レイテンシーは、Ch3<Ch1<ChN<Ch2である。通信可能範囲は、Ch2>ChN>Ch1>Ch3である。
 図8A~図8Dにおいて、遠隔操作端末200は、タイムスタンプ付きコマンドを移動体端末100に宛てて、すべてのネットワーク500(Ch1~ChN)へ送出する。
 図8Aは、Ch3が接続不可の状態を示している。この状態では、Ch1のネットワーク500を経由したコマンドが、最も速く移動体端末100に届く。移動体端末100は、Ch1から受信したコマンド01:cmd1を実行する。移動体端末100は、その後、他のネットワーク500からコマンド01:cmd1が届いた場合、受信したコマンドを破棄する。
 図8Bは、図8Aの状態からCh1が接続不可になった状態を示している。この状態では、ChNのネットワーク500を経由したコマンドが、最も速く移動体端末100に届く。移動体端末100は、ChNから受信したコマンド02:cmd2を実行する。移動体端末100は、その後、他のネットワーク500からコマンド02:cmd2が届いた場合、受信したコマンドを破棄する。
 図8Cは、Ch1からタイムスタンプのない割り込みコマンドxx:cmdSPを受信した状態を示している。この状態では、Ch1のネットワーク500を経由した割り込みコマンドxx:cmdSPが、移動体端末100に届く。移動体端末100は、割り込みコマンドxx:cmdSPを即時実行する。割り込みコマンドxx:cmdSPが緊急停止コマンドの場合、移動体端末100は、停止する。
 図8Dは、Ch1でパケットロスのため再送が発生し、結果としてChNのコマンド01:cmd1が最初に届く状態を示している。
 次に、第2の通信パターンについて説明する。図9Aおよび図9Bは、遠隔操作端末200と移動体端末100の間で行われる第2の通信パターンを説明するための説明図である。
 第2の通信パターンのネットワーク500の経路は、Ch1、Ch2、Ch3、…ChNである。通信速度は、アップリンク時とダウンリンク時で異なる。アップリンクとは、移動体端末100から、遠隔操作端末200または移動体管理サーバー300へデータを送信する際の通信である。ダウンリンクとは、遠隔操作端末200または移動体管理サーバー300から移動体端末100へデータを送信する際の通信である。
 たとえば、Ch1のネットワーク500のアップリンクとダウンリンクの通信速度は非対称である。Ch1のネットワーク500のアップリンクは、低速で遅延が大きい。一方、ダウンリンクは、高速大容量で低遅延である。
 Ch2のネットワーク500のアップリンクとダウンリンクの通信速度は対称である。Ch2のネットワーク500は、アップリンクおよびダウンリンクともに、中速中容量で、中程度の遅延である。
 Ch3のネットワーク500のアップリンクとダウンリンクの通信速度は対称である。Ch3のネットワーク500は、Ch2と同様に、アップリンクおよびダウンリンクともに、中速中容量で、中程度の遅延である。
 ChNのネットワーク500のアップリンクとダウンリンクの通信速度は対称である。ChNのネットワーク500は、アップリンクおよびダウンリンクともに、高速高容量で、遅延は少ない。
 すなわち、アップリンクのレイテンシーは、Ch2<ChN<Ch3<Ch1であり、ダウンリンクのレイテンシーは、Ch1<ChN<Ch3<Ch2である。
 なお、通信可能範囲は、Ch2>Ch1>ChN>Ch3である。なお、Ch3は通信不可となっている。
 図9Aは、移動体から移動体管理サーバー300へ、データ要求が行われた状態を示している。また、Ch3は接続不可の状態である。図9Aにおいて、移動体端末100は、データ要求を移動体管理サーバー300に宛てて、すべてのネットワーク500(Ch1~ChN)へ送出する。
 この状態では、Ch2のネットワーク500を経由したデータ要求04:req3が最も速く移動体管理サーバー300へと届く。移動体管理サーバー300は、要求されたデータを移動体端末100へ送信する。また、移動体管理サーバー300においては、その後、他のネットワーク500からデータ要求04:req3が届いた場合、受信したデータ要求を破棄する。このような後から届いたデータ要求を破棄する処理は、すでに説明した移動体端末100における通信制御の手順と同様に行われる。
 図9Bは、移動体管理サーバー300から移動体端末100へのデータ送信の状態を示している。このときも、Ch3が接続不可の状態である。
 この状態では、Ch1のネットワーク500を経由したビデオデータ05:videoが、最も速く移動体端末100に届く。移動体端末100は、ビデオデータ05:videoを即時処理する。また、移動体端末100は、その後、他のネットワーク500からビデオデータ05:videoが届いた場合、受信したビデオデータを破棄する。
 このような映像データの利用としては、たとえば、自律移動する移動体端末100から見えない場所を撮影しているカメラ映像の使用が想定される。カメラの映像は、移動体管理サーバー300によって受信される。移動体端末100は、移動体管理サーバー300へカメラが撮影した映像データを要求する。移動体端末100は、受信した映像データから、自機からは見えない位置の進路へ進入してくる人やものの動きを、事前に解析・予測して、自律的に回避行動をとることができる。
 受信した映像データを使用した回避行動などの判断は、たとえば、移動体端末100に搭載された自律移動のためのAIによって実行される。なお、映像データの場合は、データ量が多いため、タイムスタンプを付けると処理効率が悪くなることがある。そのような場合、タイムスタンプを付けずに映像データを送信してもよい。タイムスタンプのない映像データを受信した移動体端末100は、割り込み処理と同様に、最初にその映像データに関する処理を実行する。
 また、第2の通信パターンでは、別の例として、移動体端末100がCh1のネットワーク500から要求コマンドを送信した後に、Ch1およびCh2の無線通信エリアを外れることが想定される。この場合、移動体端末100は、その時点で接続中のCh3のネットワーク500を経由した映像データを受信できる。
 このように、第2の通信パターンでは、アップリンクとダウンリンクでそれぞれ異なる通信経路を使用した動作が可能である。
 なお、第2の通信パターンにおいても、ローミングやハンドオーバーは、発生しないか、または極めて少ない。
 以上、本発明の実施形態を説明したが、本発明は、上述した実施形態に限定されない。
 上述した実施形態では、移動体端末100とネットワーク500との接続について、移動体端末100から移動体管理サーバー300へ要求を出して、登録(記憶)したのち、接続する方法を例に挙げて説明したが、これに限定されない。たとえば、移動体端末100とネットワーク500との接続において、移動体管理サーバー300が移動体端末100を探し出して接続を試みるようにしてもよい。移動体管理サーバー300は、たとえば、監視カメラの映像や移動体端末100が発する位置情報に基づいて移動体端末100を探すことができる。
 また、遠隔操作端末200と移動体端末100(あるいはMECサーバーと移動体端末100)との間の接続は、移動体端末100が対象の無線通信エリアを外れても、一定時間維持されてもよい。これは、1つのネットワーク500としか接続できない場合、移動体端末100が無線通信エリアから外れると、すぐにローミングやハンドオーバーが発生するためである。この点、実施形態では、バックアップとなる無線通信の接続が持続すること(少なくとも切断されない)と、遅延の観点でどのネットワーク500を選択して接続すれば有利かなどの状況を評価して、その評価に基づき頻繁に切り替えが発生しないようにできる。
 また、移動体管理サーバー300を置く理由は、情報の一元管理とセキュリティ上の理由である。たとえば、遠隔操作端末200において、どのような移動体端末100がどこに何台存在するのか把握できない場合がある。このような場合、移動体端末100においては、どの遠隔操作端末200からの通信接続を信頼してデータ(コマンドなど)を受信すればよいのか事前に把握できない。移動体管理サーバー300は、事前に遠隔操作端末200および移動体端末100から接続情報などを記憶する。これにより、遠隔操作端末200および移動体端末100は、移動体管理サーバー300の登録内容を信頼して相互に接続できる。
 また、上述した実施形態において、無線通信局400として、5G無線通信基地局が用いられる例について説明した。しかし、本発明は、たとえば、3G、4G(LTE)、および5Gの無線通信基地局が混在して設けられてもよいし、さらに3G、4G(LTE)、および5G以外の無線通信局400が設けられてもよい。
 また、本発明に係る情報処理プログラムは、専用のハードウェア回路によって実現することも可能である。また、この情報処理プログラムは、USB(Universal Serial Bus)メモリーやDVD(Digital Versatile Disc)-ROM(Read Only Memory)などのコンピューター読み取り可能な記録媒体によって提供したり、記録媒体によらず、インターネット510などのネットワーク500を介してオンラインで提供したりすることも可能である。オンラインで提供される場合、このデータ入力制御プログラムは、ネットワーク500に接続されたコンピューター内の磁気ディスクなどの記録媒体に記録される。
 また、本発明は、特許請求の範囲に記載された構成に基づき様々な改変が可能であり、それらについても本発明の範疇である。
 本出願は2021年12月17日に出願された日本特許出願(特願2021-204802号)に基づいており、その開示内容は、参照され、全体として組み入れられている。
1 無線通信システム、
100 移動体端末、
101 接続部、
102 送受信部、
103 処理部、
104 記憶部、
110 制御部、
111 第1通信ユニット、
112 第2通信ユニット、
11n 第n通信ユニット、
120 センサー部、
130 駆動部、
200 遠隔操作端末、
300 移動体管理サーバー、
310 MECサーバー、
311 第1MECサーバー、
312 第2MECサーバー、
313 第3MECサーバー、
400 無線通信局、
401 ローカル5G局、
402 ミリ波ローカル5G局、
403 WiFiAP、
404 キャリア5G局、
500 ネットワーク、
501 ローカル5Gネットワーク、
502 ミリ波ローカル5Gネットワーク、
503 WiFiネットワーク、
504 キャリア5Gネットワーク、
510 インターネット、
1111 受信バッファ、
1112 送信バッファ、
4011 ローカル5Gエリア、
4021 ミリ波ローカル5Gエリア、
4031 WiFiエリア、
4041 キャリアエリア。

Claims (20)

  1.  外部と無線通信を行いながら移動する移動体端末であって、
     複数の無線ネットワークに同時に接続する接続部と、
     前記接続部によって接続された前記複数の無線ネットワークから前記移動体端末の移動に関するデータを受信する受信部と、
     前記複数の無線ネットワークを介して受信する同一の前記データに対して、最初に受信した前記データのみを実行する処理部と、を有する移動体端末。
  2.  前記データは、前記移動体端末を移動させるためのコマンドおよび自律移動のためのデータのうち、少なくともいずれかを有する、請求項1に記載の移動体端末。
  3.  前記データは、前記データの送信時に付与された時系列情報を含み、
     前記処理部は、前記時系列情報に基づいて、前記データを重複させずに実行する、請求項1または2に記載の移動体端末。
  4.  前記時系列情報は、タイムスタンプまたはシーケンスナンバーを含む、請求項3に記載の移動体端末。
  5.  前記処理部は、前記時系列情報を含まない前記データを受信した場合、即時に実行する、請求項3または4に記載の移動体端末。
  6.  前記データは、前記移動体端末を遠隔操作するための遠隔操作データおよび前記移動体端末が自律移動するための自律移動用データの、少なくともいずれかである、請求項1~5のいずれか一つに記載の移動体端末。
  7.  前記処理部は、前記移動体端末が自律移動するためのデータ要求を生成し、
     前記接続部によって接続された前記複数の無線ネットワークへ前記データ要求を送信する送信部を有し、
     前記データ要求は、時系列情報を含む、請求項1~6のいずれか一つに記載の移動体端末。
  8.  請求項1~7のいずれか一つに記載の移動体端末、無線通信局を有する複数の無線ネットワーク、および前記無線ネットワークに接続された情報処理装置を有する、無線通信システム。
  9.  前記情報処理装置は、前記複数の無線ネットワークへ同一のデータを送出する、請求項8に記載の無線通信システム。
  10.  前記無線ネットワークは、前記移動体端末と前記情報処理装置との間の通信を仲介する近隣装置を有する、請求項8または9に記載の無線通信システム。
  11.  前記近隣装置は、前記近隣装置が起点となるデータを前記移動体端末へ送信する、請求項10に記載の無線通信システム。
  12.  前記情報処理装置が送出した前記データを複製し、複製した前記データを前記移動体端末に宛てて送信する配信サーバーを、さらに有し、
     前記配信サーバーは、前記複数の無線ネットワークに接続されており、同一のデータを前記複数の無線ネットワークへ送出する、請求項8~11のいずれか一つに記載の無線通信システム。
  13.  前記無線ネットワークには、前記移動体端末と、前記情報処理装置および/または前記近隣装置とが相互に接続するために必要な認証を行う移動体管理サーバーが接続されており、
     前記移動体端末は、相互認証した前記移動体管理サーバーに前記複数の無線ネットワークとの接続情報を登録し、前記情報処理装置または前記近隣装置は、前記移動体管理サーバーから前記接続情報を得て、前記移動体端末と相互認証して接続する、請求項10に記載の無線通信システム。
  14.  外部と無線通信を行いながら移動する移動体端末における通信制御プログラムであって、
     複数の無線ネットワークに同時に接続する段階(a)と
     前記段階(a)によって接続された前記複数の無線ネットワークから前記移動体端末の移動に関するデータを受信する段階(b)と、
     前記複数の無線ネットワークを介して受信する同一の前記データに対して、最初に受信した前記データのみを実行する段階(c)と、をコンピューターに実行させるための通信制御プログラム。
  15.  前記データは、前記移動体端末を移動させるためのコマンドおよび自律移動のためのデータのうち、少なくともいずれかを有する、請求項14に記載の通信制御プログラム。
  16.  前記データは、前記データの送信時に付与された時系列情報を含み、
     前記段階(c)は、前記時系列情報に基づいて、前記データを重複させずに実行する、請求項14または15に記載の通信制御プログラム。
  17.  前記時系列情報は、タイムスタンプまたはシーケンスナンバーを含む、請求項16に記載の通信制御プログラム。
  18.  前記段階(c)は、前記時系列情報を含まない前記データを受信した場合、即時に実行する、請求項16または17に記載の通信制御プログラム。
  19.  前記データは、前記移動体端末を遠隔操作するための遠隔操作データおよび前記移動体端末が自律移動するための自律移動用データの、少なくともいずれかである、請求項14~18のいずれか一つに記載の通信制御プログラム。
  20.  前記移動体端末が自律移動するためのデータ要求を生成する段階(d)と、
     前記段階(a)によって接続された前記複数の無線ネットワークへ前記データ要求を送信する段階(f)と、を有し、
     前記データ要求は、時系列情報を含む、請求項14~19のいずれか一つに記載の通信制御プログラム。
PCT/JP2022/039872 2021-12-17 2022-10-26 移動体端末、無線通信システム、および通信制御プログラム WO2023112501A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021204802 2021-12-17
JP2021-204802 2021-12-17

Publications (1)

Publication Number Publication Date
WO2023112501A1 true WO2023112501A1 (ja) 2023-06-22

Family

ID=86774404

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/039872 WO2023112501A1 (ja) 2021-12-17 2022-10-26 移動体端末、無線通信システム、および通信制御プログラム

Country Status (1)

Country Link
WO (1) WO2023112501A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007180886A (ja) * 2005-12-28 2007-07-12 Mitsubishi Electric Corp 移動体通信方法及びその方法に使用する移動体通信システム
JP2018125685A (ja) * 2017-01-31 2018-08-09 サイレックス・テクノロジー株式会社 無人走行車、走行システム、及び、無人走行車の制御方法
JP2021040654A (ja) * 2020-12-03 2021-03-18 ヤンマーパワーテクノロジー株式会社 農作業車両の自律走行システム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007180886A (ja) * 2005-12-28 2007-07-12 Mitsubishi Electric Corp 移動体通信方法及びその方法に使用する移動体通信システム
JP2018125685A (ja) * 2017-01-31 2018-08-09 サイレックス・テクノロジー株式会社 無人走行車、走行システム、及び、無人走行車の制御方法
JP2021040654A (ja) * 2020-12-03 2021-03-18 ヤンマーパワーテクノロジー株式会社 農作業車両の自律走行システム

Similar Documents

Publication Publication Date Title
EP3456095B1 (en) System and method for cell switching
CN107817814B (zh) 一种无人机群、无人机群的切换方法及装置
US10462260B2 (en) Context-aware and proximity-aware service layer connectivity management
CN115004769A (zh) 无缝边缘应用切换
US20230328683A1 (en) Sensing systems, methods, and apparatus in wireless communication networks
WO2020045896A1 (en) Method and apparatus for enhancing handover procedure for supporting conditional handover in wireless communication system
US20210153041A1 (en) Systems and methods for monitoring performance in distributed edge computing networks
WO2019059836A1 (en) METHODS AND UNITS IN A NETWORK NODE FOR PROCESSING COMMUNICATION WITH A WIRELESS DEVICE
US11044769B2 (en) Wireless communication system, wireless relay device and wireless communication method
US20210127343A1 (en) 5g delay tolerant data services
US20210227428A1 (en) Method for supporting data forwarding during conditional handover and dual stack protocol handover in next-generation mobile communication system
EP3588851A1 (en) Method for configuring an access network node and apparatus for implementing the same
US11218925B2 (en) Data forwarding for inter-radio access technology wireless networks
CN111552279B (zh) 向被控制的设备传送指令数据项的方法和装置
EP3541116A1 (en) Data migration method and device
WO2018036609A1 (en) Traffic control of a vehicle control device
JP2015201728A (ja) 機器制御システム及び機器制御方法
US6763235B2 (en) Method and system for mobile communication, and a computer product
WO2023112501A1 (ja) 移動体端末、無線通信システム、および通信制御プログラム
EP3772227B1 (en) Cellular telecommunications network
CN114342473A (zh) Nr v2x移动性
KR101533027B1 (ko) 소프트웨어 정의 네트워크 기반 프록시 모바일 IPv6에서 핸드오버를 지원하는 오픈플로우 컨트롤러 및 그 제어 방법
WO2022182118A1 (en) Method and user equipment for location management in off-network
WO2015039284A1 (zh) 一种数据传输的方法和相关设备
US10455016B2 (en) Methods and systems for merging isolated networks

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22907035

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2023567587

Country of ref document: JP

Kind code of ref document: A