WO2022014562A1 - 情報処理システム、情報処理装置、情報処理方法、及びプログラム - Google Patents

情報処理システム、情報処理装置、情報処理方法、及びプログラム Download PDF

Info

Publication number
WO2022014562A1
WO2022014562A1 PCT/JP2021/026237 JP2021026237W WO2022014562A1 WO 2022014562 A1 WO2022014562 A1 WO 2022014562A1 JP 2021026237 W JP2021026237 W JP 2021026237W WO 2022014562 A1 WO2022014562 A1 WO 2022014562A1
Authority
WO
WIPO (PCT)
Prior art keywords
vehicle
worker
authentication
server
state
Prior art date
Application number
PCT/JP2021/026237
Other languages
English (en)
French (fr)
Inventor
幸雄 北野
メン トン リ
Original Assignee
アクティア株式会社
東珠株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by アクティア株式会社, 東珠株式会社 filed Critical アクティア株式会社
Priority to JP2022536368A priority Critical patent/JP7158692B2/ja
Publication of WO2022014562A1 publication Critical patent/WO2022014562A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints

Definitions

  • the present invention relates to an information processing system, an information processing device, an information processing method, and a program.
  • Patent Document 1 there is a technique aimed at preventing unauthorized use of a moving body (see, for example, Patent Document 1).
  • the present invention has been made in view of such a situation, and an object of the present invention is to provide a method for accurately managing a vehicle and a worker who operates the vehicle.
  • the information processing system of one aspect of the present invention is A vehicle control device mounted on a vehicle that can be driven only by a registrant having a predetermined authority and that controls the vehicle using the state change function of the vehicle.
  • a communication control device that controls communication between the other device and the vehicle control device by connecting to the other device,
  • a server that communicates with the worker terminal via a network,
  • the worker terminal is As the other device in the communication control device, a vehicle communication control means for controlling communication with the communication control device and a vehicle communication control means.
  • a server communication control means that controls communication with the server, By acquiring an image of the worker's face as a subject as a face image and communicating with the server based on the control of the server communication control means, the worker can use an authentication method using the face image.
  • a face recognition control means that executes control for performing the first authentication to the effect of being a registrant
  • An authority authentication control means that executes control for performing a second authentication to the effect that the worker has the predetermined authority by communicating with the server based on the control of the server communication control means. It is a vehicle state control means that controls the state of the vehicle by communicating with the vehicle control device via the communication control device based on the control of the vehicle communication control means, and is the first certification and the second certification.
  • the vehicle state control means for executing the control to change the state of the vehicle to the state of permission to drive, and otherwise, the control to change the state of the vehicle to the state of prohibition of driving is executed.
  • the first authentication means is executed by the authentication method using the face image, and the result is transmitted to the worker terminal.
  • a second authentication means that executes the second authentication and transmits the result to the worker terminal.
  • FIG. 2 It is a figure which shows the outline of the information processing system to which this invention is applied. It is a block diagram which shows the structure of the information processing system including the server which concerns on one Embodiment of the information processing system of this invention. Of the information processing systems shown in FIG. 2, it is a block diagram showing an example of a hardware configuration of a server. It is a functional block diagram which shows an example of the functional configuration of the server of the information processing system of FIG. It is a figure which shows the management screen which is displayed on the administrator terminal. It is a figure which shows the registration screen displayed on the administrator terminal. It is a flowchart which shows the operation at the time of normal authentication in the information processing system of embodiment.
  • the communication setting change operation access point, baud rate, URL setting, etc.
  • FIG. 1 is a diagram showing an outline of an information processing system to which the present invention is applied.
  • the information processing system of the embodiment includes a CAN control device 41 (denoted as “CAN” in the figure) and a communication module 42 mounted on the construction machine 5, and a worker terminal operated by the worker U. 2, a server 1 that manages information about a plurality of workers U and information about a construction machine 5, and an administrator terminal operated by an administrator K who has the authority to view and edit the information managed by the server 1. 3 and.
  • the construction machine 5 is equipped with a starter cut relay 43 (hereinafter referred to as “relay 43”), a starter motor 44, an engine 45, and the like.
  • the starter cut relay 43 is connected on a circuit connecting the starter motor 44 and the engine 45.
  • the starter cut relay 43 is controlled by the CAN control device 41 to connect / disconnect the starter motor 44 and the engine 45.
  • the CAN control device 41 is a construction machine 5 using a state change function of the construction machine 5 such as a CAN (Controller Area Network) mounted on the construction machine 5 and a relay 43 based on an instruction signal from the worker terminal 2. Take control. Note that some vehicles are not equipped with CAN and the CAN control device 41. In this case, a control function similar to that of the CAN control device 41 is mounted on the communication module 42, and the relay 43 is controlled from the communication module 42 through a control line wired inside the vehicle.
  • the communication module 42 controls communication between the worker terminal 2 and the CAN control device 41 by connecting to another device such as the worker terminal 2 by wire or wireless communication.
  • the starter cut relay 43 in the default state (initial setting state), the contact of the circuit connecting the starter motor 44 and the engine 45 is disconnected (see FIG. 1), and the engine does not start.
  • the server 1 executes multi-step authentication of the worker U, for example, by communicating with the worker terminal 2 via a network such as an LTE communication network.
  • LTE is a registered trademark.
  • Multi-step authentication is an authentication process that combines different authentication methods. For example, there is a combination of character string authentication such as a worker ID and biometric authentication for detecting and collating a part of the human body.
  • the worker management unit 14 of the server 1 manages information including at least the results of face authentication, authority authentication, and the like for each of the plurality of workers U.
  • the presentation unit 15 of the server 1 presents the information managed by the worker management unit 14 for each of the plurality of workers U to the manager K via the manager terminal 3.
  • the worker terminal 2 is operated by a worker U who can drive the construction machine 5.
  • the worker terminal 2 is, for example, a smartphone or the like, and the worker U is authenticated with the server 1 by an application program (hereinafter referred to as “application”) installed in the smartphone body, and based on the authentication result. , Control the operation of the construction machine 5.
  • application an application program
  • the construction machine 5 can be operated by turning on the engine only by a registrant who has a predetermined authority (operation authority on the engine ON can, etc.).
  • the biological information of the worker U is, for example, a face photograph or the like, employee information indicating that the worker U is an employee of a company that manages the construction machine 5, and the worker U who operates the construction machine 5. It is assumed that the operation authority and the like are registered in the server 1 in advance.
  • the worker U When driving the construction machine 5, the worker U inputs his / her worker ID on the screen displayed by starting the application on the worker terminal 2, logs in, and then presses the start-of-use button. Then, since the image pickup function of the worker terminal 2 is activated, the photograph is taken with the face of the worker as the subject.
  • the face image captured with the face of the worker U as the subject and the input worker ID and the like are made a face authentication request by the face authentication control unit 23 of the worker terminal 2, and the server 1 is made through the LET communication I / F22. Will be sent to.
  • the authority authentication control unit 24 of the worker terminal 2 transmits the authority authentication request including the worker ID to the server 1 through the LET communication I / F22.
  • the communication I / F 11 when the communication I / F 11 receives the face authentication request and the authority authentication request transmitted from the worker terminal 2, the communication I / F 11 passes the face authentication request to the face authentication unit 12 and issues the authority authentication request. Pass it to the authority authentication unit 13.
  • the face recognition unit 12 performs matching, that is, face recognition processing, by comparing (matching) the face image included in the face recognition request with the face image of the worker ID registered in the database in advance. If the face images match each other, the authentication is normal, and if the face images do not match, the authentication fails. As a result of face recognition, for example, normal authentication ... OK, authentication failure ... NG, etc. can be obtained.
  • the authority authentication unit 13 has a qualification, a skill level, and a skill level of the worker U set in advance for each construction machine and each function based on the worker ID included in the authority authentication request. Authenticate the operation authority according to the operation history up to, that is, execute the authority authentication process. As the authentication result of the operation authority of the worker U, if the operation authority by the worker U has the operation authority, the authentication success is output. In addition, if there is a stepwise authority (rank), for example, boarding on the construction machine 5 is not possible, only the engine of the construction machine 5 can be turned on, and the operation (movement) function of the construction machine 5 is possible depending on the stage (rank). Information such as only operation is possible (crane operation is not possible) and all functions of the construction machine 5 can be operated is output. The results of the face authentication, the authority authentication, and the like are returned to the worker terminal 2.
  • stepwise authority for example, boarding on the construction machine 5 is not possible, only the engine of the construction machine 5 can be turned on, and the operation (
  • the construction machine control unit 25 controls the construction machine 5 based on the authentication result returned from the server 1. If the face recognition result is OK and the authentication result of the operation authority of the worker U is the engine ON or higher, the construction machine control unit 25 determines that the engine of the construction machine 5 is permitted to be in a startable state. do. Further, other than the above combinations, even if the face authentication result is OK, even if the operation authority of the worker U is the authority of the engine ON or higher, the engine of the construction machine 5 is not made ready to start. That is, it is determined that the engine ON is not permitted, and control is performed so that the subsequent processing is not executed.
  • the construction machine control unit 25 sends a permission signal instructing the construction machine 5 to permit the engine to be turned on by WiFi communication I /. It is transmitted to the construction machine 5 via F21.
  • the communication module 42 of the construction machine device group 4 receives the permission signal transmitted from the worker terminal 2 and passes it to the CAN control device 41.
  • the CAN control device 41 converts the passed permission signal into a protocol, and then controls the starter cut relay 43 through the CAN to allow the engine to be turned on. After that, when the worker U turns on the ignition key, the starter motor 44 operates and the engine 45 of the construction machine 5 starts (starts).
  • the following can be realized.
  • a communication function with the construction machine 5 WiFi communication I / F21
  • a function for controlling the construction machine 5 construction machine control unit 25
  • various data from an in-vehicle network such as CAN can be obtained. Can be acquired and operated.
  • relay control is possible when CAN is not used.
  • various data can be exchanged by cooperating with the worker terminal 2 (for example, a smartphone or the like) by wireless communication or wired communication.
  • the construction machine 5 can be controlled (for example, engine ON / OFF, automatic operation, etc.).
  • an administrator terminal for example, a smartphone, a tablet, etc.
  • application application software
  • an administrator terminal for example, a smartphone, a tablet, etc.
  • each function can be added to the construction machine 5 as a retrofit, so that the smart device can be made smarter.
  • biometric authentication such as face authentication
  • unauthorized use of the construction machine 5 can be prevented.
  • the interlock can be performed by turning on / off the engine of the construction machine 5.
  • various controls such as remote control or automatic operation of the construction machine 5 can be performed.
  • the operating status of the construction machine 5 and the work of the worker U who operates the construction machine 5 can be performed anytime and anywhere. You can manage the situation.
  • a construction equipment management system using cloud computing will be constructed.
  • the information about the worker U for example, the worker ID, the name, the face photograph, the holding qualification, etc.
  • various data for example, information on the physical condition of workers, information on driving skills, etc.
  • various services for example, measures against heat stroke, alcohol test, etc.
  • AI artificial intelligence
  • the dashboard can be provided for the administrator K as an application (Web application) that can be used by the administrator K on the administrator terminal 3 via the network NW.
  • Web application Web application
  • an alarm can be issued (alert notification) to the administrator K.
  • the status of various services can be managed.
  • construction machinery carrier advancement system it is possible to cooperate with the career advancement system of the worker U (hereinafter referred to as "construction machinery carrier advancement system"). This makes it possible to share information with the construction career advancement system.
  • FIG. 2 is a block diagram showing a configuration of an information processing system including a server according to an embodiment of the information processing system of the present invention.
  • the information processing system shown in FIG. 2 is a worker terminal 2-1 to 2 operated by a server 1 that provides a multi-step authentication function and workers U1 to Un (n is an arbitrary integer value of 1 or more).
  • a server 1 that provides a multi-step authentication function and workers U1 to Un (n is an arbitrary integer value of 1 or more).
  • an administrator terminal 3 operated by the administrator K
  • a group of construction equipment groups 4-1 to 4-m arranged in each of the construction equipment 5-1 to 5-m. It is configured.
  • a network NW such as the Internet. It is connected as possible.
  • worker U when it is not necessary to individually distinguish each of the workers U1 to Un, these are collectively referred to as "worker U”.
  • worker terminal 2 when it is not necessary to individually distinguish each of the worker terminals 2-1 to 2-n, these are collectively referred to as "worker terminal 2”.
  • construction equipment group 4 In this embodiment, one administrator terminal 3 is illustrated, but when there are a plurality of administrator Ks having the same authority, there may be a plurality of administrator terminals 3.
  • the server 1 manages the operation of the worker terminal 2.
  • the server 1 executes various processes in order to provide the worker terminal 2 with a multi-step authentication function.
  • the worker terminal 2 is composed of, for example, a smartphone, a tablet, or the like, and is operated by a worker U who can drive the construction machine 5. Further, the worker terminal 2 has a wireless communication function. The worker terminal 2 has a function of executing an authentication process of the worker U with the server 1 by the installed application and controlling the operation of the construction machine 5 based on the authentication result.
  • the expression "worker U operates the worker terminal 2” it means that the worker U activates the application installed on the worker terminal 2 and various types are used. It means to perform an operation.
  • the "instruction from the worker terminal 2" includes the operation of the worker terminal 2 by the worker U and the automatic transmission of a signal from the worker terminal 2.
  • FIG. 3 is a block diagram showing an example of the hardware configuration of the server 1 in the information processing system shown in FIG. 2.
  • the server 1 includes a CPU (Central Processing Unit) 101, a ROM (Read Only Memory) 102, a RAM (Random Access Memory) 103, a bus 104, an input / output interface 105, and an output unit. It includes 106, an input unit 107, a storage unit 108, a communication unit 109, and a drive 110.
  • CPU Central Processing Unit
  • ROM Read Only Memory
  • RAM Random Access Memory
  • the CPU 101 executes various processes according to the program recorded in the ROM 102 or the program loaded from the storage unit 108 into the RAM 103. Data and the like necessary for the CPU 101 to execute various processes are also appropriately stored in the RAM 103.
  • the CPU 101, ROM 102 and RAM 103 are connected to each other via the bus 104.
  • An input / output interface 105 is also connected to the bus 104.
  • An output unit 106, an input unit 107, a storage unit 108, a communication unit 109, and a drive 110 are connected to the input / output interface 105.
  • the output unit 106 is composed of a display such as a liquid crystal display and displays various images.
  • the input unit 107 is composed of various hardware buttons and the like, and inputs various information according to the instruction operation of the operator.
  • the storage unit 108 is composed of a DRAM (Dynamic Random Access Memory) or the like, and stores various data.
  • the communication unit 109 controls communication with another device (worker terminal 2) via a network NW including the Internet.
  • the drive 110 is provided as needed.
  • a removable media 111 made of a magnetic disk, an optical disk, a magneto-optical disk, a semiconductor memory, or the like is appropriately mounted on the drive 110.
  • the program read from the removable media 111 by the drive 110 is installed in the storage unit 108 as needed. Further, the removable media 111 can also store various data stored in the storage unit 108 in the same manner as the storage unit 108.
  • the information processing system of FIG. 2 can have the same configuration as the hardware configuration of the server 1 of FIG. 3 for the worker terminal 2 and the administrator terminal 3, so the description thereof will be described. Omit.
  • the output unit 106 and the input unit 107 include a touch panel, a camera, and the like.
  • the server 1 can provide the worker U and the administrator K with various functions described later.
  • FIG. 4 is a functional block diagram showing an example of the functional configuration of the server of the information processing system of FIG. 2.
  • FIG. 5 is a diagram showing a management screen displayed on the administrator terminal.
  • FIG. 6 is a diagram showing a registration screen displayed on the administrator terminal.
  • a worker DB 401 and an authentication DB 402 are provided as databases.
  • the worker DB 401 stores information about workers U1 to Un as employees of a company working on the construction machine 5 and information about history.
  • the information about the workers U1 to Un is associated with each worker ID of the workers U1 to Un, for example, the name, the operation qualification of the construction machine 5-1 to 5-m, and the construction machine 5-1 to 5-m.
  • the operation authority of each function of m, the operation history of the construction machines 5-1 to 5-m up to now, and the like are stored.
  • the information about the worker is, for example, worker ID, surname, first name, company name, construction machine operation status, face recognition result, profile photo storage path, driving target equipment, driving date and time, face recognition similarity, registration. Includes date, memo, work history, longitude, latitude, construction equipment license, etc.
  • the information related to the history includes, for example, worker ID, driving flag, surname, first name, company name, construction machine operation status, face recognition result, license judgment, profile photo storage pass, face recognition company new storage pass, and driving. Includes target equipment, driving date and time, face recognition similarity, registration date, memo, business history, longitude, latitude, construction machine license, etc.
  • the operation history includes the time when each worker U1 to Un boarded and operated each construction machine 5-1 to 5-m.
  • the driving history includes information that can be used as a judgment material for dangerous driving, such as the number of sudden brakings during driving and the number of occurrences of irregular operations (sudden steering wheel, etc.).
  • the authentication DB 402 stores the types and functions of the construction machine 5 (equipment) that can be used by the worker U in association with the worker ID.
  • the information of the authentication DB 402 may be stored in the worker DB 401, vice versa, or may be one database.
  • the communication I / F11, the face authentication unit 12, and the authority authentication unit 13 are executed.
  • the worker management unit 14 and the presentation unit 15 function.
  • the communication I / F 11 executes LTE communication with the LTE communication I / F 22 on the worker terminal 2 side.
  • LTE is an abbreviation for Long Term Evolution.
  • the face recognition unit 12 executes face authentication (first authentication) by an authentication method using the face image, and transmits the result to the worker terminal 2.
  • the face authentication unit 12 compares and collates the face image of the worker ID received from the worker terminal 2 with the face image of the worker ID registered in the authentication DB 402, and faces each other. If the images match, the authentication success is output as the authentication result.
  • the authority authentication unit 13 verifies the existence of the operation authority of the worker U set in advance for each construction machine and each function registered in the authentication DB 402 based on the worker ID included in the authority authentication request (authentication). ), That is, the authority authentication process is executed.
  • the authority authentication unit 13 executes authority authentication (second authentication) using the worker ID included in the authority authentication request and the model information of the construction machine 5.
  • the result is transmitted to the worker terminal 2.
  • the authority authentication unit 13 reads out the information of the equipment that can be operated by the worker ID registered in the authentication DB 402 based on the worker ID received from the trader terminal 2, and can operate. It is determined whether or not the model information of the construction machine 5 is included in the equipment information.
  • the authority authentication is successful.
  • the operation authority of the worker U if the operator U has the operation authority for the construction machine 5, the authentication success is output.
  • the operation authority of the worker U is divided into ranks in stages, the operation authority according to the rank is output. For example, it is not possible to board the construction machine 5 without operation authority. The lowest rank is only allowed to turn on the engine of the construction machine 5. In the rank above it, only the operation (movement) function of the construction machine 5 can be operated (crane operation is not possible). The highest rank is that all functions of the construction machine 5 can be operated.
  • the presentation unit 15 presents information managed by each of the plurality of workers U1 to Un by the worker management unit 14 to the manager K via the manager terminal 3. Specifically, the presentation unit 15 displays the management screen 301 (see FIG. 5) on the administrator terminal 3 and is based on the date, the worker's name, and the worker ID input to the management screen 301 by the administrator K. Then, from the history information stored in the worker DB 401, information including at least the authentication results of each of the corresponding worker U such as face authentication and authority authentication is read out and presented on the management screen 301 of the worker U. For example, it is possible to display a list of operating statuses of a plurality of workers U1 to Un and browse information on desired workers.
  • the face authentication result screen is displayed in a pop-up.
  • the profile picture of the worker U and the photo of the worker U at the time of work are displayed side by side as the face recognition result, so it is possible to visually compare and confirm each other's pictures. can.
  • the message "matched" and the face recognition similarity are displayed as the face recognition result.
  • the worker management unit 14 manages information including at least the authentication results of each of the face authentication, the authority authentication, and the like for each of the plurality of workers U. Specifically, the worker management unit 14 has already registered new information (affiliated company, worker ID, name, etc.) about the worker U from the management screen 301 and the registration screen (see FIG. 6) transitioning from the management screen 301. It is possible to edit registration information, add operable equipment (management number of construction machine 5 etc.), make notes, change authority settings, etc. For the edited information, by pressing the registration button at the bottom of the screen, the information about the worker U in the worker DB 401 is newly registered or updated.
  • the WiFi communication I / F21 controls communication with the communication module 42 in the construction machine 5.
  • the LTE communication I / F 22 controls communication with the server 1. Specifically, the authentication request is transmitted to the server 1, and the authentication result for the authentication request is received from the server 1.
  • the image acquisition unit 26 controls the camera 53 to acquire an image in which the face of the worker U is a subject as a face image.
  • the face recognition control unit 23 communicates the face image acquired by the image acquisition unit 26 with the server 1 based on the control of the LTE communication I / F 22, and is an authentication method using the face image. Performs control for face recognition to the effect that is the registrant.
  • the control is a control in which a face authentication request is transmitted to the server 1 and the face authentication result by the server 1 is received from the server 1.
  • the image acquisition unit 26 may be included in the face recognition control unit 23.
  • the authority authentication control unit 24 communicates with the server 1 based on the control of the LTE communication I / F 22 to execute control for performing authority authentication to the effect that the worker U has a predetermined authority.
  • the control here is a control in which the worker ID (worker identification information) and the model information of the construction machine 5 are included in the authority authentication request and transmitted to the server 1, and the authority authentication result by the server 1 is received from the server 1. ..
  • the construction machine control unit 25 controls the state of the construction machine 5 by communicating with the CAN control device 41 via the communication module 42 on the construction machine 5 side based on the control of the WiFi communication I / F21.
  • the construction machine control unit 25 changes the state of the construction machine 5 based on the authentication results of the face authentication and the authority authentication received from the server 1. Specifically, for example, when both face authentication and authority authentication are successful, the construction machine control unit 25 executes control to transition the state of the construction machine 5 to the state of operation permission, and in other cases, the construction machine is controlled.
  • the control for transitioning the state of 5 to the operation prohibited state is executed. Before starting the construction machine 5, in the default setting, the engine does not start even if the ignition key is turned, and the operation is prohibited. Therefore, the construction machine control unit 25 performs both face recognition and authority authentication as a result of the authentication. If is successful, the control for transitioning the state of the construction machine 5 to the state of the operation permission is executed.
  • FIGS. 7 to 14 are flowcharts showing the operation at the time of normal authentication in the information processing system of the embodiment.
  • FIG. 9 is a flowchart showing the operation of the information processing system of the embodiment when the authentication fails.
  • 10 to 12 are diagrams showing screen transitions from the start of the application to the authentication and the subsequent end screen.
  • FIG. 13 is a diagram showing a screen at the time of authentication operation when CAN is not connected.
  • FIG. 14 is a diagram showing screen transitions of a communication setting changing operation (access point, baud rate, etc.).
  • step S1 of FIG. 7 the engine cannot be turned on, and the worker U who intends to board the construction machine 5 has the ignition key of the construction machine 5 in step S2.
  • the engine does not start even if the operation to turn on is turned on, and the startup ends in failure.
  • the initial screen 501 (see FIG. 10) of the application is displayed as in step S3.
  • the initial screen 501 is provided with an ID input field, a grayed out "Next" button, and a "QR code” reading button.
  • QR code is a registered trademark.
  • step S4 after inputting the worker ID in the ID input field of the initial screen 501, pressing the "Next" button enabled by the ID input on the screen 502 of FIG. 10 causes step S5.
  • the WiFi connection screen 503 of FIG. 10 is displayed.
  • step S6 a list of currently connectable WiFi spots is displayed on the WiFi connection screen 503. From this, the WiFi spot of the construction machine 5 on which the worker U is about to board is selected and "Connected". Press the button.
  • the WiFi communication I / F 21 of the worker terminal 2 starts the WiFi connection sequence with the WiFi spot (communication module 42) of the construction machine 5.
  • step S7 when the WiFi spot (communication module 42) of the construction machine 5 is connected to WiFi, the screen 504 of FIG. 11 is displayed.
  • the screen 504 is provided with buttons for "connect”, “face recognition”, and “start engine”.
  • a check mark indicating that the WiFi connection with the construction machine 5 is currently enabled is displayed on the "Connect” button.
  • CAN communication is started with the CAN control device 41 of the construction machine 5 by WiFi communication, and CAN data is transmitted from the CAN control device 41.
  • the CAN data includes, for example, construction machine information such as model information of the construction machine 5 (identification number that can uniquely identify an individual of the construction machine 5 and the like).
  • LTE communication is started between the LTE communication I / F22 of the worker terminal 2 and the communication I / F11 of the server 1. To.
  • the face recognition control unit 23 activates the camera 53 (see FIG. 4) of the worker terminal 2, and the function of the activated camera 53 displays the image pickup screen 505 of FIG.
  • the face recognition control unit 23 is in a state of waiting for image capture of the face image (waiting for operation of the image pickup button).
  • the face recognition control unit 23 controls the camera 53 in step S13, and the face within the image pickup range of the camera 53 is set as the subject.
  • a face authentication request including the face image and the worker ID, and the worker ID and the model information of the construction machine 5 (identification that can uniquely identify the individual of the construction machine 5) are taken.
  • the authority authentication request including the number etc.) is transmitted to the server 1 by LTE communication. After capturing the face image, messages such as "confirming " and “verifying" are displayed on the imaging screen 505 of FIG. 11 until both face authentication and authority authentication are determined to be successful.
  • the face authentication unit 12 searches the authentication DB 402 based on the worker ID included in the received face authentication request, reads out the face image associated with the worker ID, and makes the face recognition request. Face recognition is performed by collating with the included face image.
  • the authority authentication unit 13 searches the authentication DB 402 based on the worker ID included in the received authority authentication request, and selects the type of construction machine 5 that can be used by the worker U. The authority authentication of the construction machine 5 that can be operated by the worker U is executed by reading and collating with the model information of the construction machine included in the authority authentication request.
  • step S17 the face authentication unit 12 and the authority authentication unit 13 transmit their respective authentication results to the worker terminal 2 via the communication I / F 11.
  • the screen transitions to the image pickup screen 506 of FIG. 11, and the message is changed to "authentication completed", "verification in progress", or the like. "Authentication completed", 0.2 seconds later, transitions to the screen 507 of FIG. A check mark is displayed in the right corner of the face recognition button on the screen 507. By confirming this check mark, the worker U knows that the authentication was successful.
  • the construction machine control unit 25 when the construction machine control unit 25 receives the data of the state (change) of the construction machine 5, the construction machine control unit 25 indicates that the state of the construction machine 5 has been changed in step S31. Notify server 1. At the same time, the screen of the application changes to the screen 508 of FIG. 12, and the engine mark of the grayed out "engine start” button and the check mark in the right corner of the button are both changed to orange.
  • step S32 the presentation unit 15 displays the state of the construction machine 5 (that the engine 45 has started) on the administrator terminal 3.
  • step S37 when the operator U performs an operation to turn off the ignition key of the construction machine 5, the engine 45 is stopped, and the CAN control device 41 of the construction machine 5 detects this.
  • step S38 the CAN control device 41 executes a sequence for disconnecting the WiFi connection with the WiFi communication I / F 21 of the worker terminal 2. As a result, WiFi is disconnected.
  • the worker terminal 2 notifies the server 1 that the state of the construction machine 5 has changed (ignition key OFF, WiFi disconnection, etc.) in step S39 because the WiFi is disconnected.
  • the screen 508 of the application of FIG. 12 is transitioned to the next screen 509 in which the button group is inactive (grayed out).
  • a message such as "The engine has stopped. Please try again from face recognition.” Is displayed on this screen 509.
  • step S40 the presentation unit 15 displays the state of the construction machine 5 (ignition OFF, WiFi disconnection, etc.) on the administrator terminal 3.
  • step S41 the LTE communication I / F 22 of the worker terminal 2 disconnects the LTE communication with the server 1, and then in step S42, the screen of the application of the worker terminal 2 is displayed in the initial state (FIG. 10). Transition to the initial screen 501).
  • the operation from the start of the application to the authentication is the same as that in FIG. 7, and the description thereof will be omitted.
  • the results of the two authentications, the face authentication in step S15 and the authority authentication in step S16, are transmitted from the server 1 to the worker terminal 2 in step S51 in FIG.
  • the construction machine control unit 25 in step S52 when the authentication result is received from the server 1, if the authentication fails in any one of the received authentication results, the construction machine control unit 25 in step S52 ,
  • the ENG-ON permission request 0, which is an instruction signal for not allowing the engine to be turned on continuously, is transmitted to the CAN control device 41 via the communication module 42 of the construction machine 5.
  • Information indicating the above is transmitted to the worker terminal 2.
  • the worker terminal 2 does not allow the engine of the construction machine 5 to be turned on, so that the worker U is the ignition key. Even if the engine is turned on, the engine does not start, and the worker U who has no pre-registration as an operator or has no authority over the construction machine 5 cannot operate the construction machine 5.
  • the operation of the application when the CAN is not connected will be described with reference to FIGS. 10, 11 and 13.
  • the initial screen 501 of FIG. 10 is displayed.
  • the screen 502 transitions to the WiFi connection screen 503.
  • the screen changes to the screen 504 of FIG. 11 and the "connection" is performed. Since the color of the button changes, it can be seen that the construction machine 5 and WiFi are connected.
  • the CAN control device 41 In the construction machine 5, when the WiFi is connected, the CAN control device 41 normally collects the data of each part of the construction machine 5 from the CAN and transmits the CAN data to the worker terminal 2, but the CAN control device 41 When it is not connected (not connected) to the CAN, the CAN data from the CAN control device 41 is not received by the worker terminal 2. In this case, when the worker U presses the "face recognition" button on the screen 504 of FIG. 11, the screen transitions to the screen 511 of FIG. In this case, an error message such as "CAN has not been connected yet. Please try again after a while.” Is displayed on the screen 511.
  • the communication setting changing operation (access point, baud rate, URL setting, etc.) in the application of the worker terminal will be described with reference to FIGS. 10, 11 and 14.
  • the initial screen 501 of FIG. 10 is displayed.
  • the screen 502 transitions to the WiFi connection screen 503.
  • the worker U selects the WiFi spot of the construction machine 5 from the WiFi spots displayed on the WiFi connection screen 503 and presses the "connect” button, the screen changes to the screen 504 of FIG. 11 and the "connection” is performed. Since the color of the button changes, it can be seen that the construction machine 5 and WiFi are connected.
  • the screen 521 is provided with setting items such as a demo mode, a language, an access point, a baud rate, and a URL setting, and the setting contents of each setting item can be changed.
  • the IP address and Port settings can be changed.
  • To change the settings of the access point setting items edit each value directly, then swipe up on the screen to move to the screen 522 that displays the bottom of the screen, and press the "Update" button. By doing so, the changed contents of the setting items are reflected, and the screen transitions to the screen of screen 523.
  • the setting content can be changed by operating the screens 521 to 522 from the screen 504 of FIG. 11 in the same manner as changing the access point settings.
  • the application mounted on the worker terminal 2 (the application that controls engine ON / OFF by face authentication and authority authentication), and the construction machine device group 4, for example, the following Is feasible.
  • the application of the worker terminal 2 it is possible to connect and control the application of the worker terminal 2 to the control unit of the construction machine 5 (for example, the CAN control device 41 or the like). Specifically, since the application communicates with the communication module 42 mounted on the construction machine 5 and can be connected to the CAN control device 41 through the CAN (network) of the construction machine 5, the vehicle including the construction machine 5 is handled. It is possible to acquire and control CAN data provided by each company.
  • various controls for example, ON / OFF of the engine 45, etc.
  • the control commands for controlling the construction machine 5 shall comply with the CAN specifications of each company. If CAN cannot be used, the engine 45 can be controlled by a control signal and a relay.
  • a communication module and a communication I / F for communicating with the worker terminal 2 are mounted on the construction machine 5 and the server 1.
  • the communication method is not particularly limited, but Bluetooth, WiFi, wired LAN, serial connection, etc. are selected and used according to the situation. Bluetooth is a registered trademark.
  • a calculation node is installed on the side (edge side) of the construction machine 5. This makes it possible to carry out various processes utilizing AI (artificial intelligence) on the construction machine side (edge side). It can also be linked with the cloud as needed.
  • the server 1 cloud computing
  • the worker terminal 2 smart phone
  • an LTE (4G) communication interface communication I / F11, LTE communication I / F22, etc.
  • Wireless communication is possible with and.
  • real-time or asynchronous communication is possible by using a communication network such as 5G communication and WiFi.
  • a communication control module for example, a communication module 42 or the like
  • the application can be made compatible with various OSs (Operating Systems). Specifically, for example, it can correspond to iOS (registered trademark), Android (registered trademark), Windows (registered trademark) and the like.
  • OSs Operating Systems
  • business functions such as schedulers, mailers, and business report tools can be implemented.
  • an operation check device it is possible to adopt a device equipped with an application that can verify whether CAN data or the like can communicate correctly.
  • the authentication for starting the engine of the construction machine 5 is performed based on the face image of the worker U who intends to operate the construction machine 5 and the authority of the worker U who operates the construction machine 5.
  • the information processing system that manages the construction machine 5 and the worker U who operates the construction machine 5 has first information (corresponding to the construction machine ID of the construction machine 5) including information that can uniquely identify the construction machine 5.
  • the second information including at least information about the living body of the worker U (such as the face image associated with the worker ID of the worker U) and the usage authority of the worker U for each function of the construction machine 5 to be performed.
  • the management means managed in association with each other, the first information (construction machine ID, etc.) acquired from the construction machine 5, and the second information (face) of the worker U acquired together with the first information (construction machine ID, etc.).
  • the first information (construction machine ID, etc.) managed by the management means and the second information (face image, etc. associated with the worker ID of the worker U) are provided. If both information match as a result of collation by the collation means for collating with each information registered in advance and the collation means, the function that can be used in the construction machine 5 is determined according to the usage authority of the worker U. It may be provided with a determination means.
  • the construction machine 5 and the worker U who operates the construction machine 5 are accurately managed, and the function of the construction machine 5 suitable for the worker U is used to operate the construction machine 5 and work on the worker U. Can be made to.
  • the combination of face authentication and authority authentication has been described, but in addition to the face, fingerprints of fingers, retinas of eyes, veins of hands, etc. may be authenticated, and the living body of the worker may be authenticated. Just do it.
  • compliance certification or the like may be performed based on whether the worker's work time exceeds a certain work time or the like. Further, from the operation history of the worker of the construction machine, if the combination of the construction machine and the worker has performed dangerous driving more than a predetermined number of times, the certification may be NG so that the construction machine cannot be operated. That is, the construction machine and the worker may be certified by combining a plurality of certification methods with different judgment materials.
  • the construction machine 5 has been described as an example of the vehicle, but in addition to this, it may be an agricultural machine such as a private car or a tractor, and the scope of application of the present invention is limited to the illustrated construction machine 5. Not limited.
  • the case where CAN is used for controlling the construction machine 5 has been described, but the case where the communication module 42 controls ON / OFF of the relay 43 and the like through the control line wired to the construction machine 5 without using CAN. Also applicable to this case. That is, the control function mounted on the vehicle is sufficient as long as it is a vehicle state change function that changes the vehicle state by using the in-vehicle communication line or the communication network.
  • the result of authentication by the server 1 is transmitted to the worker terminal 2, and the CAN control device 41 of the construction machine 5 is controlled from the worker terminal 2.
  • the server 1 may directly control the CAN control device 41 of the construction machine 5.
  • the construction machine control unit 25 shall be arranged on the server 1.
  • the authentication may be performed as follows. For example, after starting the construction machine 5 by the initial authentication, the worker U may suddenly perform face recognition of the worker U even while the construction machine 5 is being operated, periodically or without determining a time interval. ..
  • the operation history of the worker U may be used, but for example, on the server 1 (cloud) side, the operation log of the worker U and the worker U of the supervisor who supervises the worker U are used.
  • a score is given to the worker U based on the evaluation (scoring), and if the value of the scored score does not exceed a preset threshold according to the work site or work environment, face authentication or authority Even if the authentication or qualification authentication (license) is OK, control may be performed so that the state of the vehicle does not change to the state of the driver's license.
  • the WiFi communication I / F21 is used, but the communication is not limited to this, and communication may be performed by, for example, short-range wireless communication such as Bluetooth or physical cable connection such as LAN.
  • the LTE communication I / F22 is used, but the interface is not limited to this, and may be used as an interface for, for example, 5G communication.
  • the series of processes described above can be executed by hardware or software.
  • the functional configuration is merely an example and is not particularly limited.
  • a program constituting the software is installed in a computer or the like from a network or a recording medium.
  • the computer may be a computer embedded in dedicated hardware. Further, the computer may be a computer capable of executing various functions by installing various programs, for example, a general-purpose smartphone or a personal computer in addition to a server.
  • the recording medium containing such a program is not only composed of a removable medium (not shown) distributed separately from the main body of the device in order to provide the program to the operator or the like, but also in a state of being preliminarily incorporated in the main body of the device. It is composed of recording media and the like provided to workers and the like.
  • the steps for describing a program to be recorded on a recording medium are not only processed in chronological order but also in parallel or individually, even if they are not necessarily processed in chronological order. It also includes the processing to be executed.
  • the term of the system means an overall device composed of a plurality of devices, a plurality of means, and the like.
  • the information processing apparatus to which the present invention is applied has the following configuration, and various embodiments can be taken. That is, the information processing system to which the present invention is applied is It is mounted on a vehicle (for example, construction machine 5 in FIG. 1) that can be driven only by a registrant who has a predetermined authority (for example, an authority to start the engine of the vehicle or an authority to use a function installed in the vehicle).
  • a vehicle control device for example, the CAN control device 41 in FIG. 1 that executes control of the vehicle (for example, the construction machine 5 in FIG. 1) using the state change function (CAN, relay 43, etc.) of the vehicle, and the vehicle.
  • a communication control device for example, FIG.
  • a worker terminal for example, a worker terminal 2 or the like in FIG. 1 operated by a worker (for example, a worker U or the like in FIG. 1) who can drive the vehicle (for example, the construction machine 5 or the like in FIG. 1).
  • a server for example, the server 1 in FIG. 4 that communicates with the worker terminal (for example, the worker terminal 2 in FIG. 1) via a network (for example, the network NW in FIG. 2).
  • the worker terminal for example, the worker terminal 2 in FIG.
  • a vehicle communication control means for example, FIG. 4 that controls communication with the communication control device (for example, the communication module 42 in FIG. 4).
  • WiFi communication I / F21 etc. WiFi communication I / F21 etc.
  • a server communication control means for example, LTE communication I / F22 or the like in FIG. 4 that controls communication with the server (for example, server 1 or the like in FIG. 4) and the like.
  • An image of the face of the worker (for example, the worker U in FIG. 1) as a subject is acquired as a face image, and based on the control of the server communication control means (for example, LTE communication I / F22 in FIG. 4).
  • the first is that the worker (for example, the worker U in FIG. 1) is the registrant in the authentication method using the face image by communicating with the server (for example, the server 1 in FIG. 4).
  • Face authentication control means for example, face authentication control unit 23 in FIG. 4) that executes control for authentication (for example, face authentication request to server 1 and reception of face authentication result), and
  • the server for example, the server 1 in FIG. 4
  • the authority authentication control means for example, the authority authentication control unit 24 in FIG. 4) that executes the control for performing the second authentication (for example, the authority authentication) to the effect that the U etc.
  • the vehicle state control device has the predetermined authority, and
  • the vehicle state control device (for example, CAN control in FIG. 4) via the communication control device (for example, the communication module 42 in FIG. 4) based on the control of the vehicle communication control means (for example, WiFi communication I / F21 or the like in FIG. 1).
  • It is a vehicle control means that controls the state of the vehicle (for example, the construction machine 5 in FIG. 1) by communicating with the device 41, etc., and is the first authentication (face authentication) and the second authentication (authority authentication). ) Is successful, the control for transitioning the state of the vehicle (for example, the construction machine 5 in FIG. 1) to the state of the driving permission is executed, and in other cases, the vehicle (for example, the construction machine 5 in FIG. 1) is executed.
  • Etc. vehicle state control means
  • vehicle state control means for example, the construction machine control unit 25 in FIG. 4 that executes control to transition the state to the operation prohibited state.
  • the server for example, the server 1 in FIG. 4
  • the first authentication face authentication or the like
  • the first authentication means for example, the face recognition unit 12 in FIG. 4
  • a second authentication means for example, the authority authentication unit 13 in FIG.
  • the predetermined authority is an authority to permit the operation of the vehicle (for example, the construction machine 5 in FIG. 1).
  • the driving permission state of the vehicle is a state in which the engine of the vehicle (for example, the construction machine 5 and the like in FIG. 1) is started (ON state).
  • the operation prohibited state of the vehicle is a state in which the engine of the vehicle (for example, the construction machine 5 of FIG. 1) is stopped (OFF state).
  • the information processing system according to claim 1.
  • the driving permission state of the vehicle is the state in which the engine of the vehicle is started and the driving prohibition state of the vehicle is the state in which the engine of the vehicle is stopped, if the authentication is not successful, the engine of the vehicle is stopped. Therefore, an unauthorized worker cannot get on and drive the vehicle, and similarly to the above, it is possible to provide a method for accurately managing the vehicle and the worker who operates the vehicle.
  • the server for example, the server 1 in FIG. 4 is further described.
  • the presentation means (for example, the presentation unit 15 and the like in FIG. 4) to be presented to the manager K and the like in FIG. To prepare for.
  • information including at least the results of the first authentication and the second authentication is managed for each of a plurality of workers, and the information managed for each of the plurality of workers is stored in a predetermined terminal (for example, FIG. 4).
  • the administrator can collectively manage a large number of vehicles and a large number of workers on a predetermined terminal.
  • An information processing device, an information processing method, and a program that function as a worker terminal corresponding to the information processing system are also provided as an information processing method and program according to an aspect of the present invention.

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

建機、及び建機を操作する作業者を的確に管理する手法を提供する。 情報処理システムは、建機5、及び建機5を操作する作業者Uを管理する。サーバ1と作業者端末2とを備える。サーバ1は、顔認証部12と権限認証部13を備える。顔認証部12は作業者端末2から顔画像が送信されてきた場合、顔画像を用いる顔画像認証を実行し、その結果を作業者端末2に送信する。権限認証部13は権限認証を実行し、その結果を作業者端末2に送信する。作業者端末2は、顔認証と権限認証の両方の認証が成功した場合、建機5のエンジン45の始動を許可する。

Description

情報処理システム、情報処理装置、情報処理方法、及びプログラム
 本発明は、情報処理システム、情報処理装置、情報処理方法、及びプログラムに関する。
 従来より、移動体の不正使用を防ぐことを目的とした技術は存在する(例えば、特許文献1参照)。
特開2020-69966号公報
 しかしながら、上述の特許文献1に記載の技術を含む従来技術のみでは、建設機械(以下、「車両」と呼ぶ)、及び車両を操作する作業員を的確に管理することはできない。
 本発明は、このような状況を鑑みてなされたものであり、車両、及び車両を操作する作業者を的確に管理する手法を提供することを目的とする。
 上記目的を達成するため、本発明の一態様の情報処理システムは、
 所定権限を有する登録者のみが運転可能な車両に搭載された、当該車両の状態変更機能を用いた当該車両の制御を実行する車両制御装置と、
 他装置と接続することで、当該他装置と前記車両制御装置との間の通信を制御する通信制御装置と、
 前記車両を運転し得る作業者により操作される作業者端末と、
 ネットワークを介して前記作業者端末と通信をするサーバと、
 を含む情報処理システムにおいて、
 前記作業者端末は、
  前記通信制御装置における前記他装置として、当該通信制御装置との間の通信を制御する車両通信制御手段と、
  前記サーバとの間の通信を制御するサーバ通信制御手段と、
  前記作業者の顔を被写体とする画像を顔画像として取得して、前記サーバ通信制御手段の制御に基づいて前記サーバと通信をすることで、当該顔画像を用いる認証方式で、前記作業者が前記登録者である旨の第1認証をするための制御を実行する顔認証制御手段と、
  前記サーバ通信制御手段の制御に基づいて前記サーバと通信をすることで、前記作業者が前記所定権限を有する旨の第2認証をするための制御を実行する権限認証制御手段と、
  前記車両通信制御手段の制御に基づいて前記通信制御装置を介する前記車両制御装置と通信をすることで前記車両の状態を制御する車両状態制御手段であって、前記第1認証及び前記第2認証の両方が成功した場合、前記車両の状態を運転許可の状態に遷移させる制御を実行し、それ以外の場合、前記車両の状態を運転禁止の状態に遷移させる制御を実行する車両状態制御手段と、
 を備え、
 前記サーバは、
  前記作業者端末から前記顔画像が送信されてきた場合、前記顔画像を用いる前記認証方式で前記第1認証を実行し、その結果を前記作業者端末に送信する第1認証手段と、
  前記第2認証を実行し、その結果を前記作業者端末に送信する第2認証手段と、
 を備える。
 本発明の一態様の上記情報処理システムに対応する作業者端末として機能する情報処理装置、情報処理方法及びプログラムも、本発明の一態様の情報処理方法及びプログラムとして提供される。
 本発明によれば、建機、及び建機を操作する作業者を的確に管理する手法を提供することができる。
本発明が適用される情報処理システムの概要を示す図である。 本発明の情報処理システムの一実施形態に係るサーバを含む、情報処理システムの構成を示すブロック図である。 図2に示す情報処理システムのうち、サーバのハードウェア構成の一例を示すブロック図である。 図2の情報処理システムのサーバの機能的構成の一例を示す機能ブロック図である。 管理者端末に表示される管理画面を示す図である。 管理者端末に表示される登録画面を示す図である。 実施形態の情報処理システムにおける正常認証時の動作を示すフローチャートである。 実施形態の情報処理システムにおける正常認証時の動作を示すフローチャートである。 実施形態の情報処理システムの認証失敗時の動作を示すフローチャートである。 アプリの起動から認証、その後の終了画面までの画面遷移を示す図である。 アプリの起動から認証、その後の終了画面までの画面遷移を示す図である。 アプリの起動から認証、その後の終了画面までの画面遷移を示す図である。 CAN未接続時の認証動作時の画面を示す図である。 作業者端末における通信設定変更動作(アクセスポイント、ボーレート、URL設定等)の画面遷移を示す図である。
 以下、本発明の実施形態について、図面を用いて説明する。
 図1は、本発明が適用される情報処理システムの概要を示す図である。
 実施形態の情報処理システムは、図1に示すように、建機5に搭載されたCAN制御装置41(図中「CAN」と記載)及び通信モジュール42と、作業者Uが操作する作業者端末2と、複数の作業者Uに関する情報と建機5に関する情報とを管理するサーバ1と、サーバ1に管理されている情報を閲覧及び編集可能な権限を持つ管理者Kが操作する管理者端末3と、を備える。
 上記の他、建機5には、スターターカットリレー43(以下「リレー43」と呼ぶ)、セルモータ44、エンジン45等が搭載されている。
 スターターカットリレー43は、セルモータ44とエンジン45とを接続する回路上に接続されている。スターターカットリレー43は、CAN制御装置41により制御されて、セルモータ44とエンジン45を接続したり切り離したりする。
 CAN制御装置41は、作業者端末2からの指示信号に基づいて、建機5に搭載されたCAN(Controller Area Network)及びリレー43等の建機5の状態変更機能を用いた建機5の制御を実行する。
 なお、車両によってはCAN及びCAN制御装置41が搭載されていない車両もある。この場合、CAN制御装置41と同様の制御機能を通信モジュール42に実装し、通信モジュール42から車両の内部に配線された制御線を通じてリレー43を制御するものとする。
 通信モジュール42は、作業者端末2等の他装置と有線又は無線通信により接続することで、当該作業者端末2とCAN制御装置41との間の通信を制御する。
 スターターカットリレー43においては、デフォルト(初期設定の状態)では、セルモータ44とエンジン45を接続する回路の接点が切り離されており(図1参照)、エンジンがかからない状態である。
 サーバ1は、例えばLTE通信網等のネットワークを介して作業者端末2と通信をすることで、例えば作業者Uの多段階認証を実行する。LTEは登録商標である。
 多段階認証とは、異なる認証方式を組み合わせた認証処理を言う。例えば作業者ID等の文字列認証と、人体の一部を検出及び照合する生体認証との組み合わせ等がある。
 サーバ1の作業者管理部14は、複数人の作業者U毎に、顔認証及び権限認証等の夫々の結果を少なくとも含む情報を管理する。
 サーバ1の提示部15は、作業者管理部14により複数の作業者U毎に管理される情報を、管理者端末3を介して管理者Kに提示する。
 作業者端末2は、建機5を運転し得る作業者Uにより操作される。作業者端末2は、例えばスマートフォン等であり、スマートフォン本体にインストールされたアプリケーションプログラム(以下「アプリ」と呼ぶ)によりサーバ1との間で作業者Uの認証処理を実行し、認証結果に基づいて、建機5に対する動作の制御を実行する。
 このような構成により、建機5は、所定権限(エンジンON可以上の操作権限等)を有する登録者のみがエンジンをONし運転可能となる。
 この情報処理システムの場合、作業者Uの生体情報として例えば顔写真等、作業者Uが建機5を管理する会社の社員であることを示す社員情報、建機5を操縦する作業者Uの操作権限等をサーバ1に事前に登録しておくものとする。
 作業者Uは、建機5を運転する際に、作業者端末2においてアプリを起動操作して表示される画面に自身の作業者IDを入力してログインした後、利用開始ボタンを押下することで、作業者端末2の撮像機能が起動するので、自身の顔を被写体として写真を撮像する。
 作業者Uの顔を被写体として撮像された顔画像と、入力された作業者ID等は、作業者端末2の顔認証制御部23により顔認証要求とされて、LET通信I/F22を通じてサーバ1へ送信される。
 この際、作業者端末2の権限認証制御部24により作業者IDを含む権限認証要求が、LET通信I/F22を通じてサーバ1へ送信される。
 サーバ1では、作業者端末2から送信されてきた顔認証要求と権限認証要求を通信I/F11が受信すると、通信I/F11は、顔認証要求を顔認証部12に渡し、権限認証要求を権限認証部13に渡す。
 顔認証部12は、顔認証要求に含まれる顔画像を、予めデータベースに登録されている作業者IDの顔画像と比較(照合)することで照合、つまり顔認証処理を実行する。互いの顔画像が合致すれば正常認証とされ、互いの顔画像が合致しなければ認証失敗とされる。
 顔認証の結果としては、例えば正常認証…OK、認証失敗…NG等が得られる。
 また、権限認証部13は、権限認証要求に含まれる作業者IDを基に、予めデータベースに登録されている建機毎及び機能毎に設定されている作業者Uの資格、技能レベルさらにはこれまでの操縦履歴に応じた操作権限を認証、つまり権限認証処理を実行する。
 作業者Uの操作権限の認証結果としては、作業者Uによる操作権限がある場合は認証成功が出力される。この他、段階的な権限(ランク)ありの場合は、段階(ランク)に応じて、例えば建機5への搭乗不可、建機5のエンジンONのみ可、建機5の運転(移動)機能のみ操作可(クレーン操作は不可)、建機5の全機能操作可等の情報が出力される。これら顔認証及び権限認証等の結果は、作業者端末2に返信される。
 作業者端末2では、建機制御部25が、サーバ1から返信されてきた認証結果に基づいて建機5を制御する。
 建機制御部25は、顔認証結果がOKで、かつ作業者Uの操作権限の認証結果がエンジンON以上の権限であれば、建機5のエンジンを起動可能な状態に許可するものと判定する。
 また、上記の組み合わせ以外であれば、顔認証結果がOKであっても、作業者Uの操作権限がエンジンON以上の権限であっても建機5のエンジンを起動可能な状態にはしない。つまりエンジンONを不許可と判定し、この先の処理を実行しないように制御する。
 判定の結果、建機5のエンジンを起動可能な状態に許可するものと判定した場合、建機制御部25は、建機5に対してエンジンONの許可を指示する許可信号をWiFi通信I/F21を介して建機5に送信する。
 建機5では、建機装置群4のうち、通信モジュール42が、作業者端末2から送信された許可信号を受信し、CAN制御装置41に渡す。
 CAN制御装置41は、渡された許可信号をプロトコル変換した後、CANを通じてスターターカットリレー43を制御しエンジンONを許可する。
 以降、作業者UがイグニッションキーをON操作することで、セルモータ44が動作し、建機5のエンジン45がかかる(起動する)。
 このようにこの実施形態の情報処理システムによれば、例えば、次のようなことを実現することができる。
 作業者端末2に、建機5との通信機能(WiFi通信I/F21)と建機5を制御する機能(建機制御部25)を実装することで、CAN等の車載ネットワークからの各種データの取得及び操作が可能となる。また、CANを利用しない場合にはリレー制御が可能となる。また、無線通信又は有線通信で作業者端末2(例えばスマートフォン等)と連携することで各種データをやりとりすることができる。また、建機5のコントロール(例えばエンジンのON/OFFや自動運転等)が可能となる。
 また、建機5を管理するための管理者端末(例えばスマートフォンやタブレット等)にインストールしたアプリケーションソフトウェア(以下、「アプリ」と呼ぶ)により、複数の建機5及び作業者Uを管理することが可能となる。
 これにより、建機5に後付けで各機能を付加することができるので、スマート化を図ることができる。また、通常の作業者認証に加えてライセンス認証や、顔認証等の生体認証を組み合わせることで、建機5の不正利用を防止することができる。
 また、建機5のエンジンのON/OFFによるインターロックが可能となる。また、建機5を遠隔操作又は自動運転する等、各種制御を実施することが可能となる。また、建機5の運転情報を取得し、ネットワーク上のサーバ、つまりクラウドで履歴を管理することで、いつどこからでも、建機5の動作状況と、建機5を操縦する作業者Uの作業状況とを管理することができる。
 また、クラウド・コンピューティングを利用した建機マネジメントシステムが構築される。
 これにより、作業者Uに関する情報(例えば、作業者ID、名前、顔写真、保持資格等)を的確に管理することができる。また、顔認証と権限認証を組み合わせたシステムを実現させることができる。また、各種データ(例えば作業員の体調に関する情報、運転のスキルに関する情報等)の管理が可能となる。また、各種サービス(例えば、熱中症対策、アルコール検査等)の情報提供が可能となる。また、AI(人工知能)による、各種データを利用した建機5や作業者Uの様々な状況の判定や、建機5の自動運転等が可能となる。
 また、管理者KがネットワークNWを介して管理者端末3で利用可能なアプリ(Webアプリ)として、管理者Kのためのダッシュボードを提供することができる。
 これにより、現場や区画毎の状況監視が可能となる。また、建機5の不正使用等があった場合に、管理者Kに警報を発報(アラート通知)することが可能となる。また、各種サービスをステータス管理することができる。また、建機5の自動運転やリモート制御を管理することが可能となる。
 また、作業者Uのキャリアアップシステム(以下、「建機キャリアアップシステム」と呼ぶ)との連携が可能となる。
 これにより、建設キャリアアップシステムとの間における情報の共有が可能となる。
 続いて、図2を参照して本発明の情報処理システムの一実施形態に係るサーバを含む、情報処理システムについて説明する。
 図2は、本発明の情報処理システムの一実施形態に係るサーバを含む、情報処理システムの構成を示すブロック図である。
 図2に示す情報処理システムは、多段階認証の機能を提供するサーバ1と、作業者U1乃至Un(nは1以上の任意の整数値)の夫々が操作する作業者端末2-1乃至2-nの夫々と、管理者Kに操作される管理者端末3と、建機5-1乃至5-mに夫々配置される建機装置群4-1乃至4-mと、を含むように構成されている。
 サーバ1と、作業者端末2-1乃至2-nと、管理者端末3と、建機装置群4-1乃至4-mとは、インターネット(Internet)等のネットワークNWを介して相互に通信可能に接続されている。
 なお、以下、作業者U1乃至Unの夫々を個々に区別する必要がない場合、これらをまとめて「作業者U」と呼ぶ。また、作業者端末2-1乃至2-nの夫々を個々に区別する必要がない場合、これらをまとめて「作業者端末2」と呼ぶ。さらに、建機装置群4-1乃至4-mの夫々を個々に区別する必要がない場合、これらをまとめて「建機装置群4」と呼ぶ。この実施形態では、1台の管理者端末3を図示しているが、同じ権限を有する管理者Kが複数存在する場合は、複数の管理者端末3が存在する場合もある。
 サーバ1は、作業者端末2の動作を管理する。サーバ1は、作業者端末2に多段階認証の機能を提供すべく、各種各様な処理を実行する。
 作業者端末2は、例えばスマートフォン、タブレット等で構成され、建機5を運転し得る作業者Uにより操作される。また、作業者端末2は、無線通信の機能を有する。
 作業者端末2は、インストールされたアプリによりサーバ1との間で作業者Uの認証処理を実行し、認証結果に基づいて、建機5に対する動作の制御を実行する機能を有する。
 なお、以下、断りのない限り、「作業者Uが作業者端末2を操作する」と表現している場合、それは、作業者Uが、作業者端末2にインストールされたアプリを起動して各種操作を行うことを意味している。
 また、「作業者端末2からの指示」には、作業者Uによる作業者端末2の操作も作業者端末2からの自動的な信号の発信も含まれる。
 ここで、図3を参照して、図2に示す情報処理システムのうち、サーバ1のハードウェア構成を説明する。
 図3は、図2に示す情報処理システムのうち、サーバ1のハードウェア構成の一例を示すブロック図である。
 図3に示すように、サーバ1は、CPU(Central Processing Unit)101と、ROM(Read Only Memory)102と、RAM(Random Access Memoy)103と、バス104と、入出力インターフェース105と、出力部106と、入力部107と、記憶部108と、通信部109と、ドライブ110と、を備えている。
 CPU101は、ROM102に記録されているプログラム、又は記憶部108からRAM103にロードされたプログラムに従って各種の処理を実行する。
 RAM103には、CPU101が各種の処理を実行する上において必要なデータ等も適宜記憶される。
 CPU101、ROM102及びRAM103は、バス104を介して相互に接続されている。このバス104にはまた、入出力インターフェース105も接続されている。入出力インターフェース105には、出力部106、入力部107、記憶部108、通信部109及びドライブ110が接続されている。
 出力部106は、液晶等のディスプレイにより構成され、各種画像を表示する。
 入力部107は、各種ハードウェア釦等で構成され、操作者の指示操作に応じて各種情報を入力する。
 記憶部108は、DRAM(Dynamic Random Access Memory)等で構成され、各種データを記憶する。
 通信部109は、インターネットを含むネットワークNWを介して他の装置(作業者端末2)との間で行う通信を制御する。
 ドライブ110は、必要に応じて設けられる。ドライブ110には、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリ等よりなる、リムーバブルメディア111が適宜装着される。ドライブ110によってリムーバブルメディア111から読み出されたプログラムは、必要に応じて記憶部108にインストールされる。また、リムーバブルメディア111は、記憶部108に記憶されている各種データも、記憶部108と同様に記憶することができる。
 なお、図示はしないが、図2の情報処理システムのうち、作業者端末2や管理者端末3も、図3のサーバ1のハードウェア構成と同様の構成とすることができるため、その説明を省略する。
 ただし、作業者端末2や管理者端末3がスマートフォンやタブレットで構成される場合には、出力部106及び入力部107として、タッチパネルやカメラ等を有する。
 このような図3のサーバ1の各種ハードウェアと各種ソフトウェアとの協働により、サーバ1で後述する各種処理の実行が可能になる。その結果、サーバ1は、作業者Uや管理者Kに対し、後述する各種機能を提供することができる。
 図4乃至図6を参照して図2の情報処理システムのサーバの機能的構成について説明する。
 図4は、図2の情報処理システムのサーバの機能的構成の一例を示す機能ブロック図である。
 図5は、管理者端末に表示される管理画面を示す図である。
 図6は、管理者端末に表示される登録画面を示す図である。
 図4に示すように、サーバ1の記憶部108の一領域には、データベースとして、例えば作業者DB401と認証DB402とが設けられている。
 作業者DB401には、建機5で作業を行う会社の社員としての作業者U1乃至Unに関する情報と履歴に関する情報とが記憶されている。
 作業者U1乃至Unに関する情報は、作業者U1乃至Unの夫々の作業者IDに紐付けられて、例えば氏名、建機5-1乃至5-mの運転資格、建機5-1乃至5-mの夫々の機能の操作権限、今までの建機5-1乃至5-mの運転履歴等が記憶されている。
 作業者に関する情報は、具体的には、例えば作業者ID、姓、名、会社名、建機運転ステータス、顔認証結果、プロフィール写真保存パス、運転対象機材、運転日時、顔認証類似度、登録日、メモ、業務経歴、経度、緯度、建機ライセンス等を含む。
 履歴に関する情報は、具体的には、例えば作業者ID、運転フラグ、姓、名、会社名、建機運転ステータス、顔認証結果、ライセンス判定、プロフィール写真保存パス、顔認証社新保存パス、運転対象機材、運転日時、顔認証類似度、登録日、メモ、業務経歴、経度、緯度、建機ライセンス等を含む。
 
 運転履歴には、各作業者U1乃至Unが夫々の建機5-1乃至5-mに搭乗して運転した時間が含まれる。この他、運転履歴には、運転中の急ブレーキの回数やイレギュラーな操作(急ハンドル等)の発生回数等、危険運転の判定材料となる情報が含まれる。
 認証DB402には、事前に登録された認証情報として、例えば作業者U1乃至Unの夫々の作業者IDに紐付けられた作業者U1乃至Unの夫々の顔写真と、作業者U1乃至Unの夫々がアプリにログインするためのログイン情報(作業者ID等)と、上記危険運転を判定するための判定条件(閾値等)とが記憶されている。
 さらに、認証DB402には、作業者IDに対応付けて作業者Uが使用可能な建機5(機材)の種類や機能等が記憶されている。
 なお、認証DB402の情報は、作業者DB401に記憶されていてもよく、その逆であってもよく、1つのデータベースであってもよい。
 また、図4に示すように、サーバ1のCPU101においては、多段階認証による建機5の制御処理が実行される場合には、通信I/F11と、顔認証部12と、権限認証部13と、作業者管理部14と、提示部15と、が機能する。
 通信I/F11は、作業者端末2側のLTE通信I/F22との間でLTE通信を実行する。LTEは、Long Term Evolutionの略称である。
 顔認証部12は、作業者端末2から顔画像が送信されてきた場合、顔画像を用いる認証方式で顔認証(第1認証)を実行し、その結果を作業者端末2に送信する。
 具体的には、顔認証部12は、作業者端末2から受信された作業者IDの顔画像と、認証DB402に登録されている作業者IDの顔画像とを比較及び照合し、互いの顔画像が合致した場合、認証成功を認証結果として出力する。
 権限認証部13は、権限認証要求に含まれる作業者IDを基に、予め認証DB402に登録されている建機毎及び機能毎に設定されている作業者Uの操作権限の有無を検証(認証)、つまり権限認証処理を実行する。
 権限認証部13は、業者端末2から権限認証要求が送信されてきた場合、権限認証要求に含まれる作業者IDと建機5の機種情報を用いる権限認証(第2認証)を実行し、その結果を作業者端末2に送信する。
 具体的には、権限認証部13は、業者端末2から受信された作業者IDに基づいて、認証DB402に登録されている作業者IDが運転可能な機材の情報を読み出し、読み出した運転可能な機材の情報に建機5の機種情報が含まれているか否かを判定する。この結果、運転可能な機材の情報に建機5の機種情報が含まれていた場合、権限認証を成功とする。
 作業者Uの操作権限の認証結果としては、建機5に対して作業者Uに操作権限がある場合は認証成功が出力される。この他、作業者Uの操作権限が段階的にランク分けされている場合は、ランクに応じた操作権限を出力する。
 例えば操作権限無しは建機5への搭乗不可である。最低ランクは、建機5のエンジンONのみ可である。その上のランクは、建機5の運転(移動)機能のみ操作可(クレーン操作は不可)である。一番上のランクは、建機5の全機能操作可である。
 提示部15は、作業者管理部14により複数の作業者U1乃至Unの夫々の管理される情報を、管理者端末3を介して管理者Kに提示する。
 具体的には、提示部15は、管理者端末3に管理画面301(図5参照)を表示し、管理者Kにより管理画面301に入力された日付や作業者の名前や作業者IDに基づいて、作業者DB401に記憶されている履歴情報から、該当する作業者Uの顔認証及び権限認証等の夫々の認証結果を少なくとも含む情報を読み出し、作業者Uの管理画面301に提示する。例えば複数の作業者U1乃至Unの稼働状況一覧を表示させて、所望の作業者の情報を閲覧することができる。
 例えば管理画面301から顔認証結果の情報を読み出すことで、顔認証結果の画面がポップアップ表示される。この顔認証結果の画面には、作業者Uのプロフィール写真と、作業者Uの作業時の写真とが顔認証結果として並べて表示されるので、互いの写真を目視で比較して確認することができる。また、同画面には、顔認証結果として、「一致しました」というメッセージと、顔認証類似度(例えば顔認証類似度:98%等)が表示される。
 作業者管理部14は、複数人の作業者U毎に、顔認証及び権限認証等の夫々の認証結果を少なくとも含む情報を管理する。
 具体的には、作業者管理部14は、管理画面301やその画面から遷移する登録画面(図6参照)から作業者Uに関する情報(所属会社、作業者ID、名前等)の新規登録、既登録の情報の編集や運転可能な機材(建機5の管理番号等)の追加、メモ、権限設定の変更等が可能である。編集された情報は、画面下部の登録ボタンを押下操作することにより、作業者DB401の当該作業者Uに関する情報が新規登録又は更新される。
 作業者端末2のCPU51においては、サーバ1の同様に、多段階認証による建機5の制御処理が実行される場合には、WiFi通信I/F21と、LTE通信I/F22と、顔認証制御部23と、権限認証制御部24と、建機制御部25と、画像取得部26と、が機能する。
 WiFi通信I/F21は、建機5における通信モジュール42との間の通信を制御する。
 LTE通信I/F22は、サーバ1との間の通信を制御する。具体的には、認証要求をサーバ1へ送信し、認証要求に対する認証結果をサーバ1から受信する。
 画像取得部26は、カメラ53を制御して作業者Uの顔を被写体とする画像を顔画像として取得する。
 顔認証制御部23は、画像取得部26により取得される顔画像を、LTE通信I/F22の制御に基づいてサーバ1と通信をすることで、当該顔画像を用いる認証方式で、作業者Uが前記登録者である旨の顔認証をするための制御を実行する。
 制御は、サーバ1へ顔認証要求を送信し、サーバ1による顔認証結果をサーバ1から受信する制御である。画像取得部26については、顔認証制御部23に含めてもよい。
 権限認証制御部24は、LTE通信I/F22の制御に基づいてサーバ1と通信をすることで、作業者Uが所定権限を有する旨の権限認証をするための制御を実行する。ここでの制御は、サーバ1へ作業者ID(作業者識別情報)と建機5の機種情報を権限認証要求に含めて送信し、サーバ1による権限認証結果をサーバ1から受信する制御である。
 建機制御部25は、WiFi通信I/F21の制御に基づいて建機5側の通信モジュール42を介するCAN制御装置41と通信をすることで、建機5の状態を制御する。
 建機制御部25は、サーバ1から受信された顔認証及び権限認証の夫々の認証結果を基に、建機5の状態を遷移させる。
 具体的には、建機制御部25は、例えば顔認証及び権限認証の両方が成功した場合、建機5の状態を運転許可の状態に遷移させる制御を実行し、それ以外の場合、建機5の状態を運転禁止の状態に遷移させる制御を実行する。
 建機5は、始動前、デフォルトの設定では、イグニッションキーを回してもエンジンがかからない運転禁止の状態にされているため、建機制御部25は、認証の結果、顔認証及び権限認証の両方が成功した場合、建機5の状態を運転許可の状態に遷移させる制御を実行する。
 以下、図7乃至図14を参照して実施形態の情報処理システムの動作を説明する。
 図7及び図8は、実施形態の情報処理システムにおける正常認証時の動作を示すフローチャートである。
 図9は、実施形態の情報処理システムの認証失敗時の動作を示すフローチャートである。
 図10乃至図12は、アプリの起動から認証、その後の終了画面までの画面遷移を示す図である。
 図13は、CAN未接続時の認証動作時の画面を示す図である。
 図14は、通信設定変更動作(アクセスポイント、ボーレート等)の画面遷移を示す図である。
 まず、図7及び図8を参照して、この情報処理システムにおいて認証が正常に行われる場合の動作を説明する。
 この場合、建機5の初期設定の状態、図7のステップS1において、エンジンON不可の状態であり、建機5に搭乗しようとする作業者Uが、ステップS2において、建機5のイグニッションキーをONにする操作をしてもエンジンはかからず、起動が失敗に終わる。
 そこで、作業者Uは、作業者端末2のアプリの起動操作をしてアプリを起動すると、ステップS3のようにアプリの初期画面501(図10参照)が表示される。
 初期画面501には、ID入力欄と、グレーアウトした「次へ」のボタンと、「QRコード」の読み取りボタンが設けられている。QRコードは、登録商標である。
 ステップS4において、初期画面501のID入力欄に自身の作業者IDを入力した後、図10の画面502において、ID入力で有効になった「次へ」のボタンを押下すると、ステップS5において、図10のWiFi接続画面503が表示される。
 このWiFi接続画面503には、ステップS6において、現在接続可能なWiFiスポットの一覧が表示されるので、この中から、作業者Uが搭乗しようとしている建機5のWiFiスポットを選択し、「接続」のボタンを押下操作する。
 「接続」のボタンの押下操作により、作業者端末2のWiFi通信I/F21が建機5のWiFiスポット(通信モジュール42)との間でWiFi接続のシーケンスを開始する。
 そして、ステップS7において、建機5のWiFiスポット(通信モジュール42)とWiFi接続されると、図11の画面504が表示される。
 画面504には、「接続」、「顔認証」、「エンジン起動」のボタンが設けられている。「接続」のボタンには、現在、建機5とのWiFi接続が有効となっていることを示すチェックマークが表示されている。
 WiFi接続の後、バックグラウンドでは、WiFi通信により建機5のCAN制御装置41との間でCAN通信が開始され、CAN制御装置41からCANデータが送信されてくる。CANデータには、例えば建機5の機種情報(建機5の個体を一意に識別可能な識別番号等)の建機情報が含まれている。
 ここで、作業者Uが、画面504の「顔認証」のボタンを押下操作すると、作業者端末2のLTE通信I/F22と、サーバ1の通信I/F11との間でLTE通信が開始される。
 そして、ステップS8において、作業者端末2とサーバ1とがLTE通信により接続されると、ステップS9において、建機制御部25からCAN制御装置41へ、エンジンONを許可しない指示信号であるENG-ON許可要求=0等が送信される。このENG-ON許可要求は、顔認証がOKになるまで、継続して送信され、それ以降は100msの周期で送信される。
 CAN制御装置41からは、ステップS10において、建機5の側の情報(エンジン45(図1参照)の状態を含む情報)として、ENG-ON許可要求=0に対する応答として、ENG-ON許可要求信号受信中=0、車両電源ON中=1、ENG始動許可出力中=0、ENG始動スイッチ操作中=0、ENGクランキング中=0、ENG稼働中=0等が返信されてくる。
 また、顔認証制御部23は、作業者端末2のカメラ53(図4参照)を起動し、起動したカメラ53の機能により、図11の撮像画面505が表示される。それ以降、ステップS11において、顔認証制御部23は、顔画像の撮像待ち(撮像ボタンの操作待ち)の状態となる。
 そして、ステップS12において、作業者Uにより撮像ボタンが押下操作されることで、顔認証制御部23は、ステップS13において、カメラ53を制御し、カメラ53の撮像範囲内に入った顔を被写体とする顔画像を撮像し、ステップS14において、その顔画像と、作業者IDとを含む顔認証要求と、作業者IDと建機5の機種情報(建機5の個体を一意に識別可能な識別番号等)とを含む権限認証要求とをLTE通信によりサーバ1へ送信する。
 顔画像を撮像後、顔認証及び権限認証が共に成功と判定されるまで、図11の撮像画面505には、「確認中…」、「照合中」等のメッセージが表示さる。
 サーバ1では、ステップS15において、顔認証部12が、受信された顔認証要求に含まれる作業者IDに基づいて認証DB402を検索し、作業者IDに紐付く顔画像を読み出し、顔認証要求に含まれる顔画像と照合することで、顔認証を実行する。
 また、サーバ1では、ステップS16において、権限認証部13が、受信された権限認証要求に含まれる作業者IDに基づいて認証DB402を検索し、作業者Uが使用可能な建機5の種類を読み出し、権限認証要求に含まれる建機の機種情報と照合することで作業者Uが操作し得る建機5の権限認証を実行する。
 そして、ステップS17において、顔認証部12と権限認証部13は、夫々の認証結果を通信I/F11を介して作業者端末2へ送信する。
 そして、サーバ1から送信されてきた認証結果が作業者端末2に受信されると、ステップS18において、建機制御部25は、顔認証及び権限認証の結果を確認する。
 そして、確認の結果、両方の認証が共に成功していた場合、建機制御部25は、建機5の状態を、運転許可の状態に遷移させるため、ENG-ON許可要求=1等を、建機5の通信モジュール42を介してCAN制御装置41へ送信する。
 これと共に、顔認証及び権限認証が共に成功したことで、図11の撮像画面506に遷移し、「認証完了」「照合中」等のメッセージに変更される。
 「認証完了」、0.2秒で、図12の画面507に遷移する。
 画面507の顔認証のボタンの右隅に、チェックマークが表示されるので、作業者Uは、このチェックマークを確認することで、認証が成功したことが分かる。
 建機5では、ステップS19において、ENG-ON許可要求=1等を受信したCAN制御装置41が、リレー43に対して、エンジンONを可能とする制御を実行する。
 その後、CAN制御装置41は、図8のステップS20において、受信したENG-ON許可要求=1に対する応答として、建機5側の状態(変更)の情報として、ENG-ON許可要求信号受信=1、車両電源ON中=1、ENG始動許可出力中=1、ENG始動スイッチ操作中=0、ENGクランキング中=0、ENG稼働中=0を作業者端末2へ返信する。
 作業者端末2では、建機制御部25が、上記建機5の状態(変更)のデータを受け取ると、ステップS21において、建機5の状態が変更された旨をサーバ1へ通知する。
 その後、ステップS22において、エンジンスイッチの操作待ちの状態となる。
 操作待ちの状態であっても、ステップS23において、建機制御部25は、ENG-ON許可要求=1を、建機5の通信モジュール42を介してCAN制御装置41へ送信する。
 そして、ステップS24において、作業者Uが建機5のイグニッションキーをON操作すると、CAN制御装置41は、ENG-ON許可要求=1に対する応答のタイミング、例えばステップS25において、建機5側の状態(変更)の情報として、ENG-ON許可要求信号受信=1、車両電源ON中=1、ENG始動許可出力中=1、ENG始動スイッチ操作中=1、ENGクランキング中=1、ENG稼働中=0を作業者端末2へ送信する。
 作業者端末2では、建機制御部25が、上記建機5の状態(変更)のデータを受け取ると、ステップS26において、建機5の状態が変更された旨をサーバ1へ通知する。
 その後、ステップS27において、エンジン始動待ちの状態となる。
 エンジン始動待ちの状態であっても、ステップS28において、建機制御部25は、ENG-ON許可要求=1を、建機5の通信モジュール42を介してCAN制御装置41へ送信する。
 そして、ステップS29において、建機5のエンジン45の始動が成功すると、CAN制御装置41は、ENG-ON許可要求=1に対する応答のタイミング、例えばステップS30において、建機5側の状態(変更)の情報として、ENG-ON許可要求信号受信=1、車両電源ON中=1、ENG始動許可出力中=0、ENG始動スイッチ操作中=0、ENGクランキング中=0、ENG稼働中=1を作業者端末2へ送信する。
 作業者端末2では、建機制御部25が、上記建機5の状態(変更)のデータを受け取ると、建機制御部25は、ステップS31において、建機5の状態が変更された旨をサーバ1へ通知する。
 これと同時に、アプリの画面が、図12の画面508に遷移し、グレーアウトしていた「エンジン起動」ボタンのエンジンマークと、ボタン右隅のチェックマークが共に橙色に変えられる。
 サーバ1では、ステップS32において、提示部15が、建機5の状態(エンジン45が始動したこと)を管理者端末3に表示する。
 一方、作業者端末2では、ステップS33において、建機制御部25は、エンジン45が始動したため、ENG-ON許可要求=0を、建機5の通信モジュール42を介してCAN制御装置41へ送信する。
 そして、建機5のCAN制御装置41が、ENG-ON許可要求=0を受信すると、ステップS34において、ENG-ON許可要求=0に対する応答として、ENG-ON許可要求信号受信=0、車両電源ON中=1、ENG始動許可出力中=0、ENG始動スイッチ操作中=0、ENGクランキング中=0、ENG稼働中=1等の建機5側の状態(変更)を示す情報を作業者端末2へ送信する。
 作業者端末2では、ステップS35において、建機制御部25は、100msの間隔で、ENG-ON許可要求=0を、建機5の通信モジュール42を介してCAN制御装置41へ送信する。
 そして、建機5のCAN制御装置41が、ENG-ON許可要求=0を受信すると、ステップS36において、ENG-ON許可要求=0に対する応答として、ENG-ON許可要求信号受信=0、車両電源ON中=1、ENG始動許可出力中=0、ENG始動スイッチ操作中=0、ENGクランキング中=0、ENG稼働中=1等の建機5側の状態(変更)を示す情報を作業者端末2へ送信する。
 その後、ステップS37において、作業者Uにより建機5のイグニッションキーがOFFされる操作が行われると、エンジン45が停止し、これを建機5のCAN制御装置41が検知する。
 CAN制御装置41は、エンジン45の停止を検知すると、ステップS38において、WiFi接続を切断するシーケンスを、作業者端末2のWiFi通信I/F21との間で実行する。これにより、WiFiが切断される。
 作業者端末2では、WiFiが切断されたことで、ステップS39において、サーバ1に対して、建機5の状態が変化した旨(イグニットションキーOFF、WiFi切断等)を通知する。これと共に、図12のアプリの画面508は、ボタン群が非アクティブな状態(グレーアウトした状態)の次の画面509に遷移される。この画面509には「エンジンが停止しました。顔認証から再度実施してください。」等のメッセージが表示される。
 サーバ1では、ステップS40において、提示部15が、建機5の状態(イグニットションOFF、WiFi切断等)を管理者端末3に表示する。
 その後、ステップS41において、作業者端末2のLTE通信I/F22は、サーバ1とのLTE通信を切断した後、ステップS42において、作業者端末2のアプリの画面を初期状態の画面(図10の初期画面501)に遷移させる。
 続いて、図9を参照してこの情報処理システムにおいて認証が失敗したときの動作を説明する。
 この動作において、アプリの起動から認証までの動作は、図7と同じであり、説明は省略する。
 ステップS15の顔認証と、ステップS16の権限認証との2つの認証の結果は、図9のステップS51において、サーバ1から作業者端末2に送信される。
 作業者端末2では、サーバ1から認証の結果が受信されると、受信された認証の結果のうち、いずれか1つでも認証が失敗していた場合、ステップS52において、建機制御部25は、引き続きエンジンONを許可しない指示信号であるENG-ON許可要求=0を、建機5の通信モジュール42を介してCAN制御装置41へ送信する。
 そして、建機5のCAN制御装置41が、ENG-ON許可要求=0を受信すると、ステップS53において、CAN制御装置41は、ENG-ON許可要求=0に対する応答として、ENG-ON許可要求信号受信=0、車両電源ON中=1、ENG始動許可出力中=0、ENG始動スイッチ操作中=0、ENGクランキング中=0、ENG稼働中=0等の建機5側の状態(変更)を示す情報を作業者端末2へ送信する。
 このようにサーバ1において、顔認証と権限認証のうち、いずれか1つでも認証を失敗した場合は、作業者端末2は、建機5のエンジンONを許可しないので、作業者UがイグニッションキーをON操作しても、エンジンはかからず、操作者として事前登録がないか、又は建機5に対する権限のない作業者Uは、建機5を操縦することができない。
 次に、図10、図11及び図13を参照してCAN未接続の場合のアプリの動作を説明する。
 作業者端末2において、アプリを起動すると、図10の初期画面501が表示される。
 作業者Uが、初期画面501のID入力欄に、作業者IDを入力し、画面502の「次へ」のボタンを押下すると、画面502がWiFi接続画面503に遷移する。
 作業者Uは、WiFi接続画面503に表示されたWiFiスポットの中から建機5のWiFiスポットを選択し、「接続」ボタンを押下操作すると、図11の画面504に遷移し、「接続」のボタンの色が変わるので、建機5とWiFiが接続されたことが分かる。
 建機5では、WiFiが接続されると、通常、CAN制御装置41が、建機5の各部のデータをCANから収集し、CANデータを作業者端末2へ送信するが、CAN制御装置41がCANと未連結(未接続)の場合は、CAN制御装置41からのCANデータが作業者端末2に受信されない。
 この場合、作業者Uが、図11の画面504の「顔認証」ボタンを押下操作すると、図13の画面511に遷移する。
 この場合、画面511には、「まだCANが接続できていません。もうしばらくしてもう一度お試しください。」等のエラーメッセージが表示される。
 このように作業者端末2と建機5との間でWiFiが接続できたとしても建機5内のCANが未連結の場合は、建機5の情報が得られないため、作業者Uが「顔認証」のボタンを操作しても「顔認証」を行うことができず、エラーメッセージにより作業者Uに通知される。
 次に、図10、図11及び図14を参照して作業者端末のアプリにおける通信設定変更動作(アクセスポイント、ボーレート、URL設定等)を説明する。
 作業者端末2において、アプリを起動すると、図10の初期画面501が表示される。
 作業者Uが、初期画面501のID入力欄に、作業者IDを入力し、画面502の「次へ」のボタンを押下すると、画面502がWiFi接続画面503に遷移する。
 作業者Uは、WiFi接続画面503に表示されたWiFiスポットの中から建機5のWiFiスポットを選択し、「接続」ボタンを押下操作すると、図11の画面504に遷移し、「接続」のボタンの色が変わるので、建機5とWiFiが接続されたことが分かる。
 ここで、作業者Uが、図11の画面504の下部に設けられているメニュー欄の「設定」ボタンを押下操作すると、図14に示す画面521に遷移する。
 この画面521には、デモモード、言語、アクセスポイント、ボーレート、URL設定等の設定項目が設けられており、夫々の設定項目の設定内容を変更することができる。
 例えばアクセスポイントの設定項目では、IPaddressとPortの設定を変更することができる。
 アクセスポイントの設定項目の設定を変更するには、夫々の値を直接編集した後、画面を上にスワイプ操作して、画面下部を表示する画面522に遷移させて、「更新」ボタンを押下操作することで、設定項目の変更内容が反映され、画面523の画面に遷移する。
 ボーレートやURL設定を変更する際も、アクセスポイントの設定変更と同様に、上記図11の画面504から画面521乃至画面522を操作することにより設定内容を変更することができる。
 本実施形態の情報処理システムのサーバ1と、作業者端末2に実装されるアプリ(顔認証、権限認証によりエンジンON/OFFを制御するアプリ)と建機装置群4によれば、例えば、次のようなことが実現可能となる。
 作業者端末2のアプリから建機5の制御部(例えばCAN制御装置41等)への接続及び制御が可能となる。
 具体的には、アプリが建機5に搭載される通信モジュール42と通信し、建機5のCAN(ネットワーク)を通じてCAN制御装置41と接続が可能となるため、建機5を含む車両を扱う各社が提供するCANデータの取得と制御が可能となる。
 また、各種制御(例えば、エンジン45のON/OFF等)が可能となる。具体的には、CANやリレーを介して建機5を制御(例えば、建機5のエンジン45のON/OFF等)が可能となる。なお、建機5を制御する制御コマンドについては各社のCAN仕様に準拠させるものとする。また、CANが使えない場合は、制御信号とリレーによりエンジン45を制御することができる。
 また、アプリにより建機5の稼働データを取得することが可能になる。これにより、CANから建機5の各種情報を取得することができる。また、CANがない場合は取得できる情報を集約させることができる。
 また、建機5やサーバ1には、作業者端末2と通信するための通信モジュールや通信I/Fが実装される。なお、本実施形態では、通信方式は特に限定されないが、Bluetooth、WiFi、有線LAN、シリアル接続等を状況に応じて選択して利用するものとする。Bluetoothは、登録商標である。
 また、建機5の側(エッジ側)に計算ノードが設置される。これにより、AI(人工知能)を活用した各種の処理を建機側(エッジ側)で実施することが可能となる。また、必要に応じてクラウドと連携させることもできる。
 また、サーバ1(クラウド・コンピューティング)と作業者端末2(スマートフォン)にLTE(4G)通信のインターフェース(通信I/F11やLTE通信I/F22等を備えることにより、クラウド・コンピューティングとスマートフォン等との間で無線通信が可能となる。この他、5G通信、WiFi等の通信網を利用することで、リアルタイムもしくは非同期の通信が可能となる。
 また、スマートフォンにインストールされた専用のアプリによるサービスの利用が可能となる。この場合、スマートフォンと建機5のCANやリレーとの接続には通信制御用のモジュール(例えば通信モジュール42等)が用いられる。また、アプリは、各種のOS(Operating System)に対応させることができる。具体的には例えば、iOS(登録商標)、Android(登録商標)、Windows(登録商標)等に対応させることができる。また、通信制御以外にもスケジューラーやメーラー、業務報告ツール等の業務機能を実装させることができる。
 また、動作確認用機器として、CANデータ等が正しく通信を実施できているかを検証可能なアプリが実装された機器を採用することができる。
 以上、本発明の一実施形態について説明したが、本発明は、上述の実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものである。
 上記実施形態では、建機5を操縦しようとする作業者Uの顔画像と建機5を操作する作業者Uの権限に基づいて建機5のエンジンを起動するための認証をしたが、この他、例えば建機5、及び建機5を操作する作業者Uを管理する情報処理システムは、建機5を一意に特定可能な情報を含む第1情報(建機5の建機IDと対応する建機5の機能毎の作業者Uの使用権限等)と、作業者Uの生体に関する情報を少なくとも含む第2情報(作業者Uの作業者IDに紐付けられた顔画像等)とを対応付けて管理する管理手段と、建機5から取得される第1情報(建機ID等)と、当該第1情報(建機ID等)と共に取得された作業者Uの第2情報(顔画像と作業者ID等)との夫々について、管理手段により管理されている第1情報(建機ID等)と、第2情報(作業者Uの作業者IDに紐づく顔画像等)とを予め登録されている夫々の情報と照合する照合手段と、照合手段による照合の結果、両者の情報が合致した場合、作業者Uの使用権限に応じて建機5において使用可能な機能を判定する判定手段とを備えるようにしてもよい。これにより、建機5、及び建機5を操作する作業者Uを的確に管理し、作業者Uに適した建機5の機能を使用させて建機5を稼働させて作業者Uに作業をさせることができる。
 上記実施形態では、顔認証と権限認証との組み合わせについて説明したが、顔の他、指の指紋や目の網膜、手の静脈等を認証してもよく、作業者の生体の部分を認証すればよい。また、権限以外に、作業者の作業時間が一定の作業時間を超過しているか等を判断材料にしてコンプライアンス認証等をしてもよい。
 また、当該建機の作業者の運転履歴から、当該建機と作業者との組み合わせで、危険運転を所定回数以上していれば、その建機を操縦できないように認証NGとしてもよい。
 即ち、建機と作業者について、異なる判断材料の複数の認証方式を組み合わせて認証すればよい。
 上記実施形態では、車両の一例として建機5を挙げて説明したが、この他、例えば自家用自動車やトラクター等の農機であってもよく、本発明の適用範囲は、例示した建機5だけに限定されるものではない。
 上記実施形態では、建機5の制御にCANを利用した場合について記載したが、CANを利用せず、通信モジュール42が建機5に配線した制御線を通じてリレー43等をON/OFF制御するケースもあり、このケースについても適用可能である。即ち、車両に搭載される制御機能は、車両内通信線または通信網を利用して車両の状態を変更する車両の状態変更機能であれば足りる。
 上記実施形態では、サーバ1で認証した結果を作業者端末2に伝達し、作業者端末2から建機5のCAN制御装置41を制御したが、この他、サーバ1で認証した結果に基づいてサーバ1が直接、建機5のCAN制御装置41を制御してもよい。この場合、サーバ1に建機制御部25を配置するものとする。
 上記実施形態では、建機5を起動する際に、作業者端末2から建機5を遠隔操作して認証することについて説明したが、この他、以下のように認証をしてもよい。
 例えば初期の認証により建機5を起動した後、作業者Uが建機5を操作中にも定期的又は時間間隔を決めずに不意打ち的に作業者Uの顔認証を行うようにしてもよい。この場合、他人が作業者Uとしてなりすまして作業を行う、いわゆる「なりすまし行為」等の不正を防止することができる。
 上記実施形態では、顔認証と権限認証の組み合わせについて説明したが、この他、例えば、運送事業者の場合、顔認証や権限認証に加えて、資格の認証、アルコール検査、体調のモニタリング等を行った結果をさらに追加又は組み合わせを変えて、車両の制御を実施してもよい。つまりサーバ1(クラウド)にある作業者の資格情報や車両の情報以外に、他の要素も組み合わせて判断してもよい。またユースケースに応じて認証の種類や数を増減してもよい。
 上記実施形態では、作業者Uの運転履歴を用いてもよい旨を記載したが、例えばサーバ1(クラウド)側で、作業者Uの運転ログや作業者Uを監督する監督者の作業者Uへの評価に基づいて、作業者Uに点数を付与(スコアリング)し、そのスコアリングしたスコアの値が、作業現場や作業環境に応じて予め設定した閾値を越えない場合は顔認証や権限認証や資格認証(免許)がOKだとしても、車両の状態を運転許可の状態に遷移させない制御を行ってもよい。
 上記実施形態では、WiFi通信I/F21としたが、これに限定されることなく、例えばBluetooth等の近距離無線通信やLAN等の物理的なケーブルの接続により通信を行ってもよい。
 上記実施形態では、LTE通信I/F22としたが、これに限定されることなく、例えば5G通信等のインターフェースとしてもよい。
 また例えば、上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。
 換言すると、機能的構成は例示に過ぎず、特に限定されない。
 一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータ等にネットワークや記録媒体からインストールされる。
 コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。
 また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えばサーバの他汎用のスマートフォンやパーソナルコンピュータであってもよい。
 このようなプログラムを含む記録媒体は、作業者等にプログラムを提供するために装置本体とは別に配布される図示せぬリムーバブルメディアにより構成されるだけでなく、装置本体に予め組み込まれた状態で作業者等に提供される記録媒体等で構成される。
 なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
 また、本明細書において、システムの用語は、複数の装置や複数の手段等より構成される全体的な装置を意味するものとする。
 以上を換言すると、本発明が適用される情報処理装置は、次のような構成を有していれば足り、各種各様な実施の形態を取ることができる。
 即ち、本発明が適用される情報処理システムは、
 所定権限(例えば車両のエンジンを起動する権限や車両に搭載されている機能を利用する権限等)を有する登録者のみが運転可能な車両(例えば図1の建機5等)に搭載された、当該車両の状態変更機能(CANやリレー43等)を用いた当該車両(例えば図1の建機5等)の制御を実行する車両制御装置(例えば図1のCAN制御装置41等)と、
 他装置(例えば作業者端末2等)と接続することで、当該他装置と前記車両制御装置(例えば図1のCAN制御装置41等)との間の通信を制御する通信制御装置(例えば図1の通信モジュール42等)と、
 前記車両(例えば図1の建機5等)を運転し得る作業者(例えば図1の作業者U等)により操作される作業者端末(例えば図1の作業者端末2等)と、
 ネットワーク(例えば図2のネットワークNW等)を介して前記作業者端末(例えば図1の作業者端末2等)と通信をするサーバ(例えば図4のサーバ1等)と、
 を含む情報処理システムにおいて、
 前記作業者端末(例えば図4の作業者端末2等)は、
  前記通信制御装置(例えば図4の通信モジュール42等)における前記他装置として、当該通信制御装置(例えば図4の通信モジュール42等)との間の通信を制御する車両通信制御手段(例えば図4のWiFi通信I/F21等)と、
  前記サーバ(例えば図4のサーバ1等)との間の通信を制御するサーバ通信制御手段(例えば図4のLTE通信I/F22等)と、
  前記作業者(例えば図1の作業者U等)の顔を被写体とする画像を顔画像として取得して、前記サーバ通信制御手段(例えば図4のLTE通信I/F22等)の制御に基づいて前記サーバ(例えば図4のサーバ1等)と通信をすることで、当該顔画像を用いる認証方式で、前記作業者(例えば図1の作業者U等)が前記登録者である旨の第1認証(例えば顔認証等)をするための制御(サーバ1への顔認証要求と顔認証結果の受信等)を実行する顔認証制御手段(例えば図4の顔認証制御部23等)と、
  前記サーバ通信制御手段(例えば図4のLTE通信I/F22等)の制御に基づいて前記サーバ(例えば図4のサーバ1等)と通信をすることで、前記作業者(例えば図1の作業者U等)が前記所定権限を有する旨の第2認証(例えば権限認証)をするための制御を実行する権限認証制御手段(例えば図4の権限認証制御部24等)と、
  前記車両通信制御手段(例えば図1のWiFi通信I/F21等)の制御に基づいて前記通信制御装置(例えば図4の通信モジュール42等)を介する前記車両状態制御装置(例えば図4のCAN制御装置41等)と通信をすることで前記車両(例えば図1の建機5等)の状態を制御する車両制御手段であって、前記第1認証(顔認証)及び前記第2認証(権限認証)の両方が成功した場合、前記車両(例えば図1の建機5等)の状態を運転許可の状態に遷移させる制御を実行し、それ以外の場合、前記車両(例えば図1の建機5等)の状態を運転禁止の状態に遷移させる制御を実行する車両状態制御手段(例えば図4の建機制御部25等)と、
 を備え、
 前記サーバ(例えば図4のサーバ1等)は、
  前記作業者端末(例えば図4の作業者端末2等)から前記顔画像が送信されてきた場合、前記顔画像を用いる前記認証方式で前記第1認証(顔認証等)を実行し、その結果を前記作業者端末(例えば図4の作業者端末2等)に送信する第1認証手段(例えば図4の顔認証部12等)と、
  前記第2認証(権限認証等)を実行し、その結果を前記作業者端末(例えば図4の作業者端末2等)に送信する第2認証手段(例えば図4の権限認証部13等)と、
 を備える。
 このように、所定権限(例えば車両のエンジンを起動する権限や車両に搭載されている機能を利用する権限等)を有する登録者のみが運転可能な車両に作業者が登場しようとする際に、作業者端末で撮像した作業者の顔画像と、作業者の識別情報と、車両の機種情報とをサーバへ送信して、サーバにおいて第1認証(顔認証)及び第2認証(権限認証)の両方が成功した場合、車両の状態を運転許可の状態に遷移させる制御を実行することで、作業者と車両との相互の関係が正しく認証されない場合は作業者は車両を運転できないので、不正な作業者が車両に搭乗して運転することができなくなり、車両(建機)、及び車両(建機)を操作する作業者を的確に管理する手法を提供することができる。
 前記所定権限は、前記車両(例えば図1の建機5等)の運転を許可する権限であり、
 前記車両(例えば図1の建機5等)の運転許可状態は、前記車両(例えば図1の建機5等)のエンジンが起動した状態(ONの状態)であり、
 前記車両(例えば図1の建機5等)の運転禁止状態は、前記車両(例えば図1の建機5等)のエンジンが停止した状態(OFFの状態)である、
 請求項1に記載の情報処理システム。
 このように、車両の運転許可状態が車両のエンジンが起動した状態であり、車両の運転禁止状態が車両のエンジンが停止した状態であれば、認証が成功しない場合は車両のエンジンが停止した状態が維持されるので、不正な作業者は、車両に搭乗して運転することができなくなり、上記同様に、車両、及び車両を操作する作業者を的確に管理する手法を提供することができる。
 前記作業者(例えば図1の作業者U等)は、所定の管理者(例えば図1の管理者K等)により管理される複数人が存在し、
 前記サーバ(例えば図4のサーバ1等)は、さらに、
  前記複数人の作業者毎に、前記第1認証(例えば顔認証等)及び前記第2認証(権限認証等)の夫々の結果を少なくとも含む情報を管理する管理手段(例えば図4の作業者管理部14等)と、
  前記管理手段(例えば図4の作業者管理部14等)により前記複数の作業者毎に管理される前記情報を、所定端末(例えば図4の管理者端末3等)を介して前記管理者(例えば図1の管理者K等)に提示する提示手段(例えば図4の提示部15等)と、
 を備える。
 このように、複数人の作業者毎に、第1認証及び第2認証の夫々の結果を少なくとも含む情報を管理し、複数の作業者毎に管理される情報を、所定端末(例えば図4の管理者端末3等)を介して管理者に提示することで、管理者は、多数の車両と多数の作業者を所定端末で一括して管理することができるようになる。
 上記情報処理システムに対応する作業者端末として機能する情報処理装置、情報処理方法及びプログラムも、本発明の一態様の情報処理方法及びプログラムとして提供される。
 1・・・サーバ、2、2-1乃至2-n・・・作業者端末、3・・・管理者端末、4、4-1乃至4-m・・・建機装置群、5、5-1乃至5-m・・・建機、11・・・通信I/F、12・・・顔認証部、13・・・権限認証部、14・・・作業者管理部、15・・・提示部、21・・・WiFi通信I/F、22・・・LTE通信I/F、23・・・顔認証制御部、24・・・権限認証制御部、25・・・建機制御部、26・・・画像取得部、101・・・CPU、108・・・記憶部、109・・・通信部、110・・・ドライブ、111・・・リムーバブルメディア、401・・・作業者DB、402・・・認証DB

Claims (7)

  1.  所定権限を有する登録者のみが運転可能な車両に搭載された、当該車両の状態変更機能を用いた当該車両の制御を実行する車両制御装置と、
     他装置と接続することで、当該他装置と前記車両制御装置との間の通信を制御する通信制御装置と、
     前記車両を運転し得る作業者により操作される作業者端末と、
     ネットワークを介して前記作業者端末と通信をするサーバと、
     を含む情報処理システムにおいて、
     前記作業者端末は、
      前記通信制御装置における前記他装置として、当該通信制御装置との間の通信を制御する車両通信制御手段と、
      前記サーバとの間の通信を制御するサーバ通信制御手段と、
      前記作業者の顔を被写体とする画像を顔画像として取得して、前記サーバ通信制御手段の制御に基づいて前記サーバと通信をすることで、当該顔画像を用いる認証方式で、前記作業者が前記登録者である旨の第1認証をするための制御を実行する顔認証制御手段と、
      前記サーバ通信制御手段の制御に基づいて前記サーバと通信をすることで、前記作業者が前記所定権限を有する旨の第2認証をするための制御を実行する権限認証制御手段と、
      前記車両通信制御手段の制御に基づいて前記通信制御装置を介する前記車両制御装置と通信をすることで前記車両の状態を制御する車両状態制御手段であって、前記第1認証及び前記第2認証の両方が成功した場合、前記車両の状態を運転許可の状態に遷移させる制御を実行し、それ以外の場合、前記車両の状態を運転禁止の状態に遷移させる制御を実行する車両状態制御手段と、
     を備え、
     前記サーバは、
      前記作業者端末から前記顔画像が送信されてきた場合、前記顔画像を用いる前記認証方式で前記第1認証を実行し、その結果を前記作業者端末に送信する第1認証手段と、
      前記第2認証を実行し、その結果を前記作業者端末に送信する第2認証手段と、
     を備える、
     情報処理システム。
  2.  前記所定権限は、前記車両の運転を許可する権限であり、
     前記車両の運転許可状態は、前記車両のエンジンを起動した状態であり、
     前記車両の運転禁止状態は、前記車両のエンジンを停止した状態である
     請求項1に記載の情報処理システム。
  3.  前記作業者は、所定の管理者により管理される複数人が存在し、
     前記サーバは、さらに、
      前記複数人の作業者毎に、前記第1認証及び前記第2認証の夫々の結果を少なくとも含む情報を管理する管理手段と、
      前記管理手段により前記複数の作業者毎に管理される前記情報を、所定端末を介して前記管理者に提示する提示手段と、
     を備える、
     請求項1又は2に記載の情報処理システム。
  4.  所定権限を有する登録者のみが運転可能な車両に搭載された、当該車両の状態変更機能を用いた当該車両の制御を実行する車両制御装置と、
     他装置と接続することで、当該他装置と前記車両制御装置との間の通信を制御する通信制御装置と、
     前記車両を運転し得る作業者により操作される作業者端末と、
     ネットワークを介して前記作業者端末と通信をして、前記作業者の顔を被写体とする画像が顔画像として前記作業者端末から送信されてきた場合、前記顔画像を用いる前記認証方式で、第1認証を実行し、その結果を前記作業者端末に送信すると共に、前記作業者が前記所定権限を有する旨の第2認証を実行し、その結果を前記作業者端末に送信するサーバと、
     を含む情報処理システムにおける
     前記作業者端末として機能する情報処理装置において、
     前記通信制御装置における前記他装置として、当該通信制御装置との間の通信を制御する車両通信制御手段と、
     前記サーバとの間の通信を制御するサーバ通信制御手段と、
     前記作業者の顔を被写体とする画像を顔画像として取得して、前記サーバ通信制御手段の制御に基づいて前記サーバに送信すると共に前記サーバから送信される第1認証の結果を受信するための制御を実行する顔認証制御手段と、
     前記サーバ通信制御手段の制御に基づいて前記サーバと通信をすることで、前記作業者が前記所定権限を有する旨の第2認証をするための制御を実行する権限認証制御手段と、
     前記車両通信制御手段の制御に基づいて前記通信制御装置を介する前記車両制御装置と通信をすることで前記車両の状態を制御する車両状態制御手段であって、前記第1認証及び前記第2認証の両方が成功した場合、前記車両の状態を運転許可の状態に遷移させる制御を実行し、それ以外の場合、前記車両の状態を運転禁止の状態に遷移させる制御を実行する車両状態制御手段と、
     を備える情報処理装置。
  5.  前記所定権限は、前記車両の運転を許可する権限であり、
     前記車両の運転許可状態は、前記車両のエンジンを起動した状態であり、
     前記車両の運転禁止状態は、前記車両のエンジンを停止した状態である、
     請求項4に記載の情報処理装置。
  6.  所定権限を有する登録者のみが運転可能な車両に搭載された、当該車両の状態変更機能を用いた当該車両の制御を実行する車両制御装置と、
     他装置と接続することで、当該他装置と前記車両制御装置との間の通信を制御する通信制御装置と、
     前記車両を運転し得る作業者により操作される作業者端末であって、前記通信制御装置における前記他装置として、当該通信制御装置との間の通信を制御する車両通信制御手段と、前記サーバとの間の通信を制御するサーバ通信制御手段とを備える前記作業者端末と、
     ネットワークを介して前記作業者端末と通信をして、前記作業者の顔を被写体とする画像が顔画像として前記作業者端末から送信されてきた場合、前記顔画像を用いる前記認証方式で、第1認証を実行し、その結果を前記作業者端末に送信すると共に、前記作業者が前記所定権限を有する旨の第2認証を実行し、その結果を前記作業者端末に送信するサーバと、
     を含む情報処理システムにおける
     前記作業者端末が実行する情報処理方法において、
     前記作業者の顔を被写体とする画像を顔画像として取得して、前記サーバ通信制御手段の制御に基づいて前記サーバに送信すると共に前記サーバから送信される第1認証の結果を受信するための制御を実行する顔認証制御ステップと、
     前記サーバ通信制御手段の制御に基づいて前記サーバと通信をすることで、前記作業者が前記所定権限を有する旨の第2認証をするための制御を実行する権限認証制御ステップと、
     前記車両通信制御手段の制御に基づいて前記通信制御装置を介する前記車両制御装置と通信をすることで前記車両の状態を制御する車両状態制御手段であって、前記第1認証及び前記第2認証の両方が成功した場合、前記車両の状態を運転許可の状態に遷移させる制御を実行し、それ以外の場合、前記車両の状態を運転禁止の状態に遷移させる制御を実行する車両状態制御ステップと、
     を含む情報処理方法。
  7.  所定権限を有する登録者のみが運転可能な車両に搭載された、当該車両の状態変更機能を用いた当該車両の制御を実行する車両制御装置と、
     他装置と接続することで、当該他装置と前記車両制御装置との間の通信を制御する通信制御装置と、
     前記車両を運転し得る作業者により操作される作業者端末であって、前記通信制御装置における前記他装置として、当該通信制御装置との間の通信を制御する車両通信制御手段と、前記サーバとの間の通信を制御するサーバ通信制御手段とを備える前記作業者端末と、
     ネットワークを介して前記作業者端末と通信をして、前記作業者の顔を被写体とする画像が顔画像として前記作業者端末から送信されてきた場合、前記顔画像を用いる前記認証方式で、第1認証を実行し、その結果を前記作業者端末に送信すると共に、前記作業者が前記所定権限を有する旨の第2認証を実行し、その結果を前記作業者端末に送信するサーバと、
     を含む情報処理システムにおける
     前記作業者端末を制御するコンピュータに、
     前記作業者の顔を被写体とする画像を顔画像として取得して、前記サーバ通信制御手段の制御に基づいて前記サーバに送信すると共に前記サーバから送信される第1認証の結果を受信するための制御を実行する顔認証制御ステップと、
     前記サーバ通信制御手段の制御に基づいて前記サーバと通信をすることで、前記作業者が前記所定権限を有する旨の第2認証をするための制御を実行する権限認証制御ステップと、
     前記車両通信制御手段の制御に基づいて前記通信制御装置を介する前記車両制御装置と通信をすることで前記車両の状態を制御する車両状態制御手段であって、前記第1認証及び前記第2認証の両方が成功した場合、前記車両の状態を運転許可の状態に遷移させる制御を実行し、それ以外の場合、前記車両の状態を運転禁止の状態に遷移させる制御を実行する車両状態制御ステップと、
     を含む制御処理を実行させるプログラム。
PCT/JP2021/026237 2020-07-13 2021-07-13 情報処理システム、情報処理装置、情報処理方法、及びプログラム WO2022014562A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022536368A JP7158692B2 (ja) 2020-07-13 2021-07-13 情報処理システム、情報処理装置、情報処理方法、及びプログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020120224 2020-07-13
JP2020-120224 2020-07-13

Publications (1)

Publication Number Publication Date
WO2022014562A1 true WO2022014562A1 (ja) 2022-01-20

Family

ID=79555545

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/026237 WO2022014562A1 (ja) 2020-07-13 2021-07-13 情報処理システム、情報処理装置、情報処理方法、及びプログラム

Country Status (2)

Country Link
JP (1) JP7158692B2 (ja)
WO (1) WO2022014562A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7132679B1 (ja) 2022-03-29 2022-09-07 株式会社オプティム プログラム、情報処理装置、情報処理システム、情報処理方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003214241A (ja) * 2001-11-14 2003-07-30 Hitachi Ltd エンジン始動システム
JP2005036523A (ja) * 2003-07-16 2005-02-10 Nec Corp 電子ロック制御システム及びその方法並びにそれに用いる携帯情報端末及び認証装置
WO2015136938A1 (ja) * 2014-03-14 2015-09-17 株式会社 東芝 情報処理方法および情報処理システム
JP2020009302A (ja) * 2018-07-11 2020-01-16 オムロン株式会社 車載機、運行管理装置、運行管理システム、及び運転者確認方法
JP2020021161A (ja) * 2018-07-30 2020-02-06 トヨタ自動車株式会社 通信装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003214241A (ja) * 2001-11-14 2003-07-30 Hitachi Ltd エンジン始動システム
JP2005036523A (ja) * 2003-07-16 2005-02-10 Nec Corp 電子ロック制御システム及びその方法並びにそれに用いる携帯情報端末及び認証装置
WO2015136938A1 (ja) * 2014-03-14 2015-09-17 株式会社 東芝 情報処理方法および情報処理システム
JP2020009302A (ja) * 2018-07-11 2020-01-16 オムロン株式会社 車載機、運行管理装置、運行管理システム、及び運転者確認方法
JP2020021161A (ja) * 2018-07-30 2020-02-06 トヨタ自動車株式会社 通信装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7132679B1 (ja) 2022-03-29 2022-09-07 株式会社オプティム プログラム、情報処理装置、情報処理システム、情報処理方法
JP2023145962A (ja) * 2022-03-29 2023-10-12 株式会社オプティム プログラム、情報処理装置、情報処理システム、情報処理方法

Also Published As

Publication number Publication date
JP7158692B2 (ja) 2022-10-24
JPWO2022014562A1 (ja) 2022-01-20

Similar Documents

Publication Publication Date Title
CN105405296B (zh) 基于车牌识别的车辆控制进出系统及其方法
US10179591B2 (en) Vehicle use and performance restrictions based on detected users
CN107018119B (zh) 身份验证系统、方法和平台
CN100583114C (zh) 用于远程安全启用的系统和方法
RU2631982C2 (ru) Система контроля доступа к транспортному средству и персонализации по биометрическим параметрам
CN104167040B (zh) 一种电子锁的远程控制方法及系统
EP3427906B1 (de) Verfahren zum betrieb eines sich selbsttätig fortbewegenden roboters
US11171784B2 (en) Systems and methods for providing a secured password and authentication mechanism for programming and updating software or firmware
US20170349139A1 (en) Anti-theft system for driverless vehicle
CN106022046B (zh) 一种特种设备持证操作监管方法
CN106992989A (zh) 智能家居的分享授权方法、服务器及可读存储介质
US10576934B2 (en) Decentralized cloud-based authentication for autonomous vehicles
CN108408513A (zh) 电梯二维码乘梯控制方法、装置以及计算机可读存储介质
US20160127363A1 (en) Method and System for Verifying the Identity of a User of an Online Service
US11104297B2 (en) Systems and methods for multi-keyholder digital lockout
EP3653454A1 (en) Multi-factor authentication for vehicles
WO2022014562A1 (ja) 情報処理システム、情報処理装置、情報処理方法、及びプログラム
DE102021101078A1 (de) Biometrische schlüssel für fahrzeuge zum authentifizieren von benutzern sowie verwendungsverfahren
TWI727396B (zh) 設備驗證系統和方法
WO2018006332A1 (zh) 一种基于移动终端的智能门禁管理方法及系统
CN115019421A (zh) 一种车辆的控制方法
CN113763603A (zh) 信息处理装置、方法、计算机可读存储介质及便携终端
WO2018133594A1 (zh) 数据传输方法及终端
JP2007265218A (ja) ユーザ監視システム
GB2581533A (en) Method for authenticating a user to a digital tachograph of a vehicle by means of a mobile device, digital tachograph, mobile device and data base device

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21842288

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2022536368

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21842288

Country of ref document: EP

Kind code of ref document: A1