WO2010044277A1 - 移動体ナビゲーション装置 - Google Patents

移動体ナビゲーション装置 Download PDF

Info

Publication number
WO2010044277A1
WO2010044277A1 PCT/JP2009/005426 JP2009005426W WO2010044277A1 WO 2010044277 A1 WO2010044277 A1 WO 2010044277A1 JP 2009005426 W JP2009005426 W JP 2009005426W WO 2010044277 A1 WO2010044277 A1 WO 2010044277A1
Authority
WO
WIPO (PCT)
Prior art keywords
unit
moving body
image
marker
moving
Prior art date
Application number
PCT/JP2009/005426
Other languages
English (en)
French (fr)
Inventor
高本陽一
井野重秋
川久保勇次
Original Assignee
株式会社テムザック
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社テムザック filed Critical 株式会社テムザック
Priority to JP2010533839A priority Critical patent/JPWO2010044277A1/ja
Publication of WO2010044277A1 publication Critical patent/WO2010044277A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0268Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means
    • G05D1/0274Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means using mapping information stored in a memory device
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0227Control of position or course in two dimensions specially adapted to land vehicles using mechanical sensing means, e.g. for sensing treated area
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0255Control of position or course in two dimensions specially adapted to land vehicles using acoustic signals, e.g. ultra-sonic singals
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0268Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means
    • G05D1/027Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means comprising intertial navigation means, e.g. azimuth detector
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0268Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means
    • G05D1/0272Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means comprising means for registering the travel distance, e.g. revolutions of wheels

Definitions

  • the present invention relates to a mobile navigation apparatus that transmits action commands related to movement and operation of various mobile bodies such as robots to the mobile body using a communication line.
  • Patent Document 1 a control device is provided that has a guideway laid along a route and controls the conveyance of an article, and has a function of transmitting and receiving data to and from this control device.
  • An unmanned transport facility including at least one unmanned transport vehicle that is guided by a taxiway in accordance with command data from the vehicle and that self-propels and transports articles is disclosed.
  • Patent Document 2 discloses “a security robot that travels in a security area and patrols it”.
  • JP 2006-99726 A Japanese Patent No. 3984493
  • the unmanned conveyance facility of (Patent Document 1) can be visited and monitored in factories and physical distribution facilities in addition to actually conveying articles, and is excellent in functionality and usefulness.
  • a taxiway must be laid in the travel location, the travel location is limited, and the automated guided vehicle needs to be equipped with a line detection sensor that detects the taxiway.
  • the security robot of (Patent Document 2) can get on and off the elevator by autonomous control and move between the levels, does not need to be operated from the outside, and has excellent versatility and usability.
  • the control unit In addition to mounting the image capture unit on the robot itself, the control unit must calculate the three-dimensional position of the target from the image signal captured by the image capture unit, requiring complex control, There was a problem of lack of mass productivity.
  • the present invention has been made in order to solve the above-described problems, and allows a desired operation to be performed while reliably guiding various moving bodies such as robots along a designated route with a simple configuration having a small number of parts. No complicated mechanism or operation is required, anyone can easily use it, easy to create / change routes and set operations, excellent workability, maintainability and versatility, no complicated control required
  • Another object of the present invention is to provide a mobile navigation device that is excellent in operational stability and reliability, and can be used in combination with existing robots and the like, and has excellent versatility and mass productivity.
  • the mobile navigation device of the present invention has the following configuration.
  • An image receiving unit that receives the image via the image processing unit, an image processing unit that creates a navigation image by overlaying a marker indicating the movement path and operation of the moving object on the image, and detects an overlapping position of the moving object and the marker
  • the mobile body position confirmation unit that confirms the position of the mobile body, the behavior command creation unit that creates a behavior command corresponding to the marker placed on the movement path, and the behavior command creation unit
  • a navigation information creation control unit that transmits a behavior command via a communication line; (c) an external display unit that displays the navigation image; and (d) mounted on the mobile body, Navigator It has a communication unit that receives the action command sent from the action command transmitting unit of Shon information creation control unit, a configuration and a. This configuration has the following effects.
  • the navigation information creation control unit includes an image receiving unit that receives an image captured by the image capturing unit via a communication line, and a movement path to be moved by the moving body and a marker that indicates an operation to be performed by the moving body.
  • An image processing unit that creates a navigation image superimposed on the image, and selects an optimal movement path while confirming the navigation image created by the image processing unit based on the image received by the image receiving unit, It is possible to set and specify the operation at the selected location, and it is excellent in operability.
  • the navigation information creation control unit detects a position where the moving object and the marker overlap and confirms the position of the moving object, and an action command corresponding to the marker placed on the moving path. Since the action command creating unit is created, it is possible to confirm the position of the moving body easily and reliably from a remote location and create an action command for the moving body, which is excellent in simplicity and certainty of the action command.
  • the navigation information creation control unit has a behavior command transmission unit that transmits a behavior command created by the behavior command creation unit via a communication line, the behavior command is surely transmitted to a remote moving body.
  • a desired operation can be performed while guiding the moving body, and the reliability of the operation and the versatility are excellent.
  • An emergency stop temporary stop
  • the reliability of the guidance operation is excellent.
  • an action command is sent to the mobile body such as a desired robot equipped with the communication unit. It can be transmitted to instruct the movement route and operation, and is excellent in versatility.
  • the moving body position confirmation unit of the navigation information creation control unit detects the overlapping position of the moving body and the marker on the navigation image and confirms the position of the moving body, the guide path is placed on the actual movement path. There is no need to lay down or attach a sensor for detecting the taxiway to the moving body, which makes it easy to install, and it is possible to construct a navigation system by effectively using existing moving bodies such as robots. Excellent in mass productivity and versatility.
  • the image capturing unit may be any unit that can capture an image of an area where the moving body moves, but a network camera, a web camera, or the like is preferably used.
  • the communication line connecting the image capturing unit and the image receiving unit may be wired or wireless, but wired is preferable from the viewpoint of operational stability.
  • the image capturing unit is preferably installed on a wall or ceiling of a building such as a factory where the moving body moves, a fence surrounding an area where the moving body moves, an outer wall or a roof of a building or the like disposed in the area. .
  • the entire area when it is disposed at a position where the entire area can be looked down from a high place, the entire area can be photographed without any spots with a single network camera, web camera, or the like, and the usability is excellent.
  • the area may be divided into a plurality of parts and photographed by a plurality of network cameras, web cameras, or the like.
  • the image receiving unit selects the image at the current position where the moving object is captured from the images transmitted from the multiple image capturing units.
  • a navigation image may be created.
  • the image processing unit of the navigation information creation control unit creates a navigation image by overlaying a marker indicating the movement route or operation on the image received by the image reception unit.
  • the movement route and operation are prepared in advance ( Pattern) may be called up and used, or the user may input it on the spot.
  • the marker indicates the movement path to be moved by the moving body and the operation to be performed by the moving body on the moving path.
  • the marker for indicating the movement path one straight line or a plurality of straight lines are arranged in parallel. And those in which symbols such as a cross shape, a substantially H shape, and a substantially U shape are continuously arranged are preferably used.
  • the action command creating unit can determine the moving direction of the moving body from the entire moving path and the current position of the moving body, and can create a moving command such as going straight, turning right, turning left, or turning.
  • a marker for indicating an operation a marker that uses a symbol such as an arrow, a circle, a triangle, or a square, a number, a character such as an alphabet, or the like is suitably used.
  • the moving body position confirmation unit detects the current position of the moving body, and the action command creation unit creates (or selects) an action (movement) command corresponding to the marker arranged at the position, and the action command transmission unit
  • An action (movement) command can be transmitted easily and reliably to the moving body. Therefore, if a marker to which an operation for movement is assigned is placed on the movement path, the operation corresponding to each marker can be quickly performed when moving to the position of the marker, and control is easy. Excellent in usability.
  • the moving object position confirmation unit confirms the position of the moving object by detecting that the moving object overlaps the position of the marker.
  • the moving object position confirmation unit confirms the position of the moving object and the marker on the image ( What detects the position of a moving body based on the change of hue, brightness, and saturation of (pixel) is preferably used. It can also be detected by a color difference or luminance change before and after the moving object overlaps the marker position.
  • the action command transmitting unit can cause the moving body to perform a desired operation by transmitting the action command created by the action command creating unit to the communication unit mounted on the moving body.
  • the communication line connecting the action command transmission unit and the communication unit may be wired or wireless, but wireless is preferable in terms of the mobility and operability of the moving body.
  • the external display unit mainly displays the navigation image, but can also display the image received by the image receiving unit and the movement route (marker) independently.
  • the communication unit receives the action command transmitted from the action command transmission unit, but the action command is not limited to the control signal, and may be sound or an image as long as the moving object can be recognized.
  • the communication unit can select a method for outputting an action command to the moving body according to the type of the moving body. For example, when the moving body is a robot, one that directly outputs the received action command as an operation signal to the movement control unit of the moving body is preferably used. In addition, when the moving body is a person (pedestrian) or a car driven by a person, a device that instructs the pedestrian or the driver with a voice or an image is preferably used.
  • the moving body When the moving body is a robot, it may be anything that can act according to the action command received by the communication unit.
  • a robot having a robot motion determination unit and a robot motion creation unit is preferably used as the moving body control unit.
  • the robot motion discrimination unit discriminates the motion of the robot based on the action command.
  • the robot motion creating unit creates a robot motion command corresponding to the motion discriminated by the robot motion discriminating unit, and outputs it to the robot drive control unit.
  • the drive control unit of the robot has, for example, left and right motor drivers and the like, and drives and controls the movement actuator operation unit such as the left and right motors to move the robot with a movement actuator such as wheels.
  • a contact sensor for detecting contact with an obstacle while driving or an ultrasonic sensor for detecting the approach of an obstacle, etc.
  • collisions due to malfunctions should be reliably prevented. Can be used, and is highly safe.
  • the number of mobile bodies that are navigated by this mobile body navigation device may be one or more.
  • the moving object moves along the marker.
  • the position of each moving body to be recognized can be recognized.
  • malfunctions can be prevented by associating each moving body with the moving path in advance.
  • the color of the marker indicating the moving path of each moving body is changed for each moving body, the association between the moving body and the moving path becomes easy, and when a malfunction occurs, the user (operator) immediately Abnormality can be detected and it is excellent in usability.
  • Invention of Claim 2 is a mobile navigation apparatus of Claim 1, Comprising: It has an external input part for inputting the movement path
  • the said navigation information creation control part is According to an input from the external input unit, a behavior instruction map creating unit is provided that creates a behavior instruction map by arranging the markers indicating movement paths and operations of the moving body.
  • a behavior instruction map creating unit is provided that creates a behavior instruction map by arranging the markers indicating movement paths and operations of the moving body.
  • the navigation information creation control unit includes a behavior instruction map creation unit that creates a behavior instruction map by arranging markers indicating movement paths and movements of a moving body in accordance with an input from the external input unit. It is possible to display the movement route and the operation input from the marker with the marker, and it is easy to set and check the movement route and the operation and is excellent in usability.
  • any device that can input a movement route and an operation may be used.
  • a keyboard, a mouse, a touch panel, and the like are preferably used.
  • the position (address) on the image where the movement route or operation is to be set can be selected directly by numerical input. If it is a mouse, it can be selected by clicking a position on the image for which a movement route or operation is desired or by tracing the cursor.
  • a touch panel simply touching the screen of the external display unit with a finger or a dedicated pen, the user can easily select a desired position and set the movement path and operation, requiring no special knowledge and complicated.
  • the action may be selected from a menu prepared in advance.
  • the Invention of Claim 3 is a mobile navigation apparatus of Claim 1 or 2, Comprising:
  • the said navigation information creation control part is provided with the memory
  • the navigation information creation control unit includes a storage unit that stores the action instruction map indicated by the marker, so that it is necessary to recreate the movement route and the like when the movement and operation are repeatedly performed on the same movement route.
  • the navigation image can be easily created simply by reading the stored action instruction map, and the usability is excellent.
  • a storage unit various media such as a magnetic disk and a CD-R can be used in addition to a hard disk.
  • the Invention of Claim 4 is a mobile navigation apparatus of any one of Claim 1 thru
  • the position of the moving body is detected by at least one change in hue, brightness, and saturation of a pixel on the marker when the moving body and the marker overlap.
  • the moving body position confirmation unit of the navigation information creation control unit changes at least one of the hue, lightness, and saturation of the pixel corresponding to the marker position when the moving body and the marker overlap on the navigation image. Since the position of the moving body is detected by this, the position of the moving body can be reliably detected based on the presence or absence of the overlap between the moving body and the marker, and malfunction is unlikely to occur and the usability is excellent.
  • the moving object position confirmation unit recognizes and stores in advance the color (hue, lightness, saturation) of the moving object, the color of the pixel (hue, lightness, saturation) corresponding to the marker position.
  • the color of the moving object can be appropriately selected according to the ambient brightness, the background color, and the like so that a change in pixel color can be easily detected.
  • the ceiling or head of the moving body may be colored in a color that is easy to detect, or a plate or protrusion colored in a color that is easy to detect on the ceiling or head of the moving body may be arranged as the detection body. Good. If an unknown mobile body that has entered the image is likely to interfere with the control target mobile body, an instruction to avoid or stop the control target mobile body from the action command creation section through the action command transmission section By performing this, a collision can be prevented.
  • the navigation information creation control unit has a moving body position storage unit that stores the overlapping position of the moving body and the marker detected by the moving body position confirmation unit in time series, the transition of the position where the moving body and the marker overlap each other Based on the movement history of the moving body, it can be determined whether the moving body is moving on the set moving route or stopped halfway. If a warning is issued when it is determined that the moving body is stopped halfway, it is possible to immediately notify the site of the abnormality of the moving body and perform a recovery operation. In addition, it is possible to select and monitor only the change in the pixel at the current position of the moving body to be controlled from the movement history of the moving body.
  • the moving operation can be temporarily stopped based on the determination of the robot without waiting for a command from the action command transmission unit.
  • the robot transmits a signal notifying that it is suspended to the navigation information creation control section through the communication section mounted on the robot (moving body)
  • the navigation information It is possible to prevent the action command from being repeatedly transmitted from the action command transmission unit of the creation control unit, so that no warning is erroneously issued and the operation reliability is excellent.
  • the Invention of Claim 5 is a moving body navigation apparatus of any one of Claim 1 thru
  • the said marker is the advancing direction position for confirming the advancing direction position of the said moving body A confirmation marker and a displacement confirmation marker for confirming a displacement in the left-right direction of the movable body with respect to the traveling direction, and
  • the movable body position confirmation unit of the navigation information creation control unit includes the movable body A traveling direction position confirmation unit that detects an overlapping position with the traveling direction position confirmation marker and confirms a traveling direction position of the moving body, and detects whether or not the moving body and the positional deviation confirmation marker overlap with each other.
  • the marker has a traveling direction position confirmation marker for confirming the traveling direction position of the moving body, and a positional deviation confirmation marker for confirming a lateral displacement of the moving body with respect to the traveling direction
  • the moving body position confirmation unit of the navigation information creation control unit detects the overlapping position of the moving body and the traveling direction position confirmation marker and confirms the traveling direction position of the moving body, and the positional deviation from the moving body.
  • a positional deviation confirmation unit that detects the positional deviation of the moving body in the left-right direction with respect to the traveling direction position of the moving body by detecting the presence or absence of an overlap with the confirmation marker, not only the traveling direction position of the moving body, The positional deviation in the left-right direction can also be confirmed, the moving body can be reliably moved according to a preset movement route, and the operation reliability is excellent.
  • the misregistration confirmation marker can be arranged at a position that allows a lateral misalignment with respect to the traveling direction position confirmation marker.
  • the traveling direction position confirmation marker is formed in a straight line in the moving direction of the moving body
  • the positional deviation confirmation marker can be arranged parallel to the left and right of the traveling direction position confirmation marker.
  • a plurality of straight lines orthogonal to the moving direction of the moving body are arranged at predetermined intervals as the moving direction position checking markers, and the position deviation checking markers are parallel to the moving direction of the moving body at positions where the left and right position shifts on both sides are allowed. May be arranged.
  • symbols such as a substantially H-shape and a substantially U-shape
  • the invention according to claim 6 is the mobile navigation device according to claim 5, wherein the user moves a line along the movement path along which the mobile body should move on the image from the external input unit.
  • the action instruction map creating unit of the navigation information creation control unit inputs the action, the action having the marker having the traveling direction position confirmation marker and the position deviation confirmation marker arranged along the movement path is arranged.
  • An instruction map is created, the image processing unit of the navigation information creation control unit creates the navigation image in which the action instruction map is superimposed on the image, and the navigation image is displayed on the external display unit have.
  • the action instruction map creation unit of the navigation information creation control unit moves along the movement path.
  • An action instruction map in which markers having a movement direction position confirmation marker and a position deviation confirmation marker are arranged is created, and the image processing unit of the navigation information creation control unit creates a navigation image in which the action instruction map is superimposed on the image. Since the navigation image is displayed on the external display unit, the user can easily and surely input the movement route and operation while creating the navigation image while checking the external display unit. It does not occur easily and has excellent input workability and reliability.
  • the action instruction map creating unit creates an action instruction map in which markers are arranged corresponding to the movement route and movement, but is input by inputting or recognizing the size or movement performance of the moving body in advance. It is determined whether the moving body can enter, pass, turn, etc. according to the moving path and movement. If it is not possible, a warning is issued to prompt the user to correct the moving path or movement. The operation may be corrected. In particular, it is preferable to place a marker for instructing turning at a corner or the like. Thereby, when the moving body position confirmation unit detects the current position of the moving body, if the moving body is positioned on the marker that instructs to turn, the action command for instructing turning is immediately transmitted from the action command creating unit. Even a radius curve that cannot be run as it is can be reliably moved along the movement path by turning, and is excellent in reliability.
  • the action instruction map creation unit of the navigation information creation control unit automatically arranges a marker to which a turn or temporary stop movement command is assigned, creation of the action instruction map is easy.
  • the moving body can be reliably moved along the moving path, and the usability is excellent. In particular, when navigating a plurality of moving bodies, even if the moving paths are close to each other or cross each other, interference and collision between the moving bodies can be prevented, and the reliability of the operation is excellent.
  • a seventh aspect of the present invention is the mobile navigation device according to any one of the first to sixth aspects, wherein any one of the movement amount, the rotation amount, and the turning amount of the mobile body is transmitted through the communication unit.
  • movement amount data having a value of 1 or more
  • an operation status notification signal for notifying that the moving object is moving, operating, or stopped, and that the moving or operation of the moving object is completed
  • at least one of the operation completion notification signals to be transmitted to the navigation information creation control unit.
  • the navigation information creation control unit Transmitting at least one of the operation status notification signal to be performed and the operation completion notification signal to notify the completion of movement or operation of the mobile object to the navigation information creation control unit as data or a signal indicating the operation status of the mobile object.
  • the navigation information creation control unit can detect the position and the like of the moving body based on the image received by the image receiving unit, but it is difficult to detect a detailed operation or a complicated operation of the moving body. In some cases, it may not be possible to grasp whether the action command transmitted from the direction change of the moving body or the action command transmission unit is executed correctly. Therefore, an encoder, a gyro sensor, etc. are mounted on the moving body, the actual moving distance, rotation angle, turning angle, etc. are detected during operation of the moving body, and the values are transmitted as operation amount data. It can be confirmed that it is operating as instructed.
  • the operation status notification signal since the signal is continuously transmitted while the moving body is moving, operating, or stopped, the operating status of the moving body can always be confirmed, and the reliability is excellent. Further, in the case of the operation completion notification signal, the signal only needs to be transmitted when the movement or operation is completed, so the load on the moving body and the navigation information creation control unit can be reduced, and the usability is excellent.
  • the image processing unit of the navigation information creation control unit, the moving body position confirmation unit, or the like has a problem, the accurate position or orientation of the moving body cannot be detected on the image (or the position or direction of the moving body). Even if it is detected by mistake, the mobile unit is not instructed to perform an incorrect operation, and the mobile unit can be prevented from running out of control, resulting in excellent reliability and safety.
  • the navigation information creation control unit can check the operation status of the moving body using any one of the operation amount data, the operation status notification signal, and the operation completion notification signal, and depending on which data or signal is used, Can be provided with at least one of an operation amount confirmation unit, an operation status confirmation unit, and an operation completion confirmation unit.
  • an operation amount confirmation unit is provided in the navigation information generation control unit, and the action command transmitted from the action command transmission unit
  • the movement amount, rotation angle, and turning angle value (instruction amount) based on the actual movement amount data transmitted from the communication unit are compared, and when they match, the operation as instructed is completed. It may be determined that the action command creation unit has started creating a new action command.
  • an operation status confirmation unit is provided in the navigation information creation control unit, and an action command is sent from the action command transmission unit.
  • the action command generation unit Creation of a new action command and transmission of a new action command by the action command transmission unit can be performed.
  • an operation completion notification signal is used to notify the navigation information creation control unit from the communication unit, an operation completion confirmation unit is provided in the navigation information creation control unit, and an action command is sent from the action command transmission unit.
  • the operation completion notification signal After the transmission, until the operation completion notification signal is received, it is determined that the moving body is operating, and the creation of a new behavior command by the behavior command creation unit and the transmission of a new behavior command by the behavior command transmission unit are stopped.
  • the movement completion notification signal is received, it is determined that the movement or movement of the moving body is completed (the moving body is stopped), and a new action command is created by the action command creation unit or a behavior command transmission unit A new action command can be transmitted.
  • the position of the moving object can be reliably detected by using at least one change in the hue, brightness, and saturation of the pixel on the marker when the moving object and the marker overlap on the navigation image. Therefore, it is possible to provide a mobile navigation device that is less likely to malfunction and has excellent usability.
  • Block configuration diagram of the navigation information creation control unit of the mobile navigation device of the first embodiment (A) Schematic diagram showing an image photographed by the image photographing unit of the mobile navigation device of the first embodiment (b) Schematic diagram showing a process of creating an action instruction map of the mobile navigation device of the first embodiment (c) ) Schematic diagram showing a navigation image of the mobile navigation device of the first embodiment.
  • Block configuration diagram of a moving body navigated by the moving body navigation apparatus of the first embodiment Flowchart showing operation on the operation side of the mobile navigation device of the first embodiment. The flowchart which shows the movement operation
  • FIG. 1 is a schematic diagram showing the configuration of the mobile navigation apparatus of the first embodiment.
  • reference numeral 1 denotes a mobile navigation apparatus according to the first embodiment that transmits action commands for various mobile bodies 60 such as remote robots to the mobile body 60 using a communication line
  • 10 denotes a wall surface of a building such as a factory.
  • the image capturing unit 20 of the mobile navigation device 1 using a network camera, a web camera, or the like that captures the image of the image receives the image captured by the image capturing unit 10 via the communication line, and the mobile unit 60 moves.
  • a mobile navigation system that creates an action command for the mobile body 60 based on the travel path and transmits the action command via a communication line while creating a power path and confirming the position of the mobile body 60
  • the navigation information creation control unit 30 of the apparatus 1 uses a mouse, a keyboard, a touch panel, and the like for inputting a movement path to be moved by the moving body 60 and an operation to be performed by the moving body 60 to the navigation information creation control unit 20 from the outside.
  • the external input unit 40 of the mobile navigation apparatus 1 includes a monitor for displaying an image captured by the image capturing unit 10, a moving route, a navigation image for confirming the current position of the mobile body 60, and the like.
  • the external display unit 50 of the mobile navigation apparatus 1 using the mobile device 50 is mounted on the mobile body 60 and receives a behavior command for the mobile body 60 transmitted from the navigation information creation control unit 20 and the mobile body to the navigation information creation control unit 20.
  • 60 is a communication unit that transmits data or signals indicating the operation status of 60.
  • the image capturing unit 10 may be anything that can capture an image of an area in which the moving body 60 moves, but a network camera, a web camera, or the like is preferably used.
  • the image capturing unit 10 can be photographed without any spots with a single network camera or web camera by arranging the image capturing unit 10 at a position overlooking the entire region where the moving body 60 moves from a high place. Excellent.
  • the area may be divided into a plurality of parts and photographed by a plurality of network cameras, web cameras, or the like.
  • helicopters and airplanes equipped with the image capturing unit 10 such as a video camera are used to take images from the sky in places where the image capturing unit 10 such as various cameras is not installed or where disasters occur. May be.
  • FIG. 2 is a block configuration diagram of the navigation information creation control unit of the mobile navigation device of the first embodiment.
  • 21 is an image receiving unit that receives an image captured by the image capturing unit 10 via a communication line
  • 22 is a behavior instruction by arranging a marker indicating a movement route or an operation according to an input from the external input unit 30.
  • An action instruction map creating unit that creates a map
  • 23 is an image processing unit that creates a navigation image by overlaying a marker indicating a moving route of the moving body 60 on the image
  • 24 is an overlapping position of the moving body 60 and the marker.
  • the moving body has a traveling direction position confirmation unit 24a that detects the position in the traveling direction of the moving body 60 and a positional deviation confirmation unit 24b that confirms the lateral displacement of the moving body 60 with respect to the traveling direction position of the moving body 60.
  • a position confirmation unit, 25 is an action command creation unit that creates an action command for the moving body 60 based on a position confirmation result in the mobile body position confirmation unit 24, and 26 is created by the action command creation unit 25
  • Behavioral instruction is action instruction transmitting unit that transmits to the communication unit 50 via a communication line.
  • the communication line connecting the image capturing unit 10 and the image receiving unit 21 may be wired or wireless, but wired is preferable from the viewpoint of operational stability.
  • the behavior instruction map creating unit 22 of the navigation information creation control unit 20 creates a behavior instruction map by arranging markers representing movement paths and operations according to inputs from the external input unit 30. Any external input unit 30 may be used as long as it can input a movement route and an operation. Specifically, a keyboard, a mouse, a touch panel, or the like is preferably used. In the case of a keyboard, it is possible to select a position (address, etc.) on an image for which a movement route or operation is to be set by directly inputting a numerical value.
  • the operation setting may be performed by selecting an operation from a menu prepared in advance.
  • the image processing unit 23 creates a navigation image by superimposing the action instruction map created by the action instruction map creating unit 22 on the image received by the image receiving unit 21, but the movement route and operation are as described above. Instead of input on the spot by the user, the action instruction map that has been stored in the storage unit using various media such as a magnetic disk and CD-R in addition to the hard disk is called and used. Also good.
  • the navigation information creation control unit 20 includes a storage unit that stores the action instruction map, so that it is not necessary to recreate a movement route or the like when repeatedly moving or operating on the same movement route. By simply reading the instruction map, a navigation image can be easily created, which is excellent in usability.
  • the external display unit 40 mainly displays a navigation image for confirming and navigating the current position of the moving body 60, but can also individually display an image captured by the image capturing unit 10 and an action instruction map. .
  • the action command creating unit 25 obtains the moving direction of the moving body 60 from the moving path and the current position of the moving body 60, and can create a moving command such as going straight, turning right, turning left, or turning. However, when a marker to which an operation for movement is assigned in advance is arranged on the movement path, a movement command corresponding to the marker is selected. In addition, even when a marker to which an operation other than movement such as sound generation, utterance, light emission, head swing, arm swing, and image capturing is assigned, an operation command corresponding to the marker is selected.
  • the behavior command transmission unit 26 transmits a behavior command that is a combination of the movement command and the motion command created or selected by the behavior command creation unit 25 to the communication unit 50 mounted on the moving body 60.
  • the communication line connecting the action command transmission unit 26 and the communication unit 50 may be wired or wireless, but wireless is preferable in terms of the mobility and operability of the moving body 60. In the case of wireless, wireless LAN, Bluetooth, mobile communication, etc. can be used.
  • the communication unit 50 receives the action command transmitted from the action command transmission unit 26, but the action command is not limited to the control signal as long as the moving body can recognize it, and may be sound or an image.
  • the communication unit 26 can select a method for outputting an action command to the moving body 60 according to the type of the moving body 60. For example, when the moving body 60 is a robot, a device that directly outputs the received action command to the operation control unit of the moving body 60 as an operation signal is preferably used. In addition, when the moving body 60 is a person (pedestrian) or a car driven by a person, it is preferable to use an instruction that instructs the driver by voice or an image.
  • the communication unit 50 provides operation amount data such as the amount of movement that the mobile body 60 has actually moved, and an operation status notification signal for notifying whether the mobile body 60 is moving, operating, or stopped. Then, at least one data or signal of the operation completion notification signal for notifying that the movement or operation of the moving body 60 is completed is transmitted, and the data or signal is received by the navigation information creation control unit 20.
  • the action command creating unit 25 creates a new action command or action
  • the action command creation unit 25 creates or executes a new action command.
  • So as to start sending a new action instructions by the instruction transmitting unit 26 can prevent the occurrence of malfunction.
  • information (data or signal) indicating an operation state is obtained by mounting an encoder, a gyro sensor, or the like on the moving body 60 and detecting an actual moving distance, a rotation angle, or the like while the moving body 60 is operating.
  • the operation amount data and the operation status notification signal may be transmitted, or the operation completion notification signal may be transmitted when various operations are completed (the operation of the moving body 60 is stopped).
  • FIG. 3A is a schematic diagram showing an image photographed by the image photographing unit of the mobile navigation device of the first embodiment
  • FIG. 3B is an action instruction map of the mobile navigation device of the first embodiment
  • FIG. 3C is a schematic diagram showing a navigation image of the mobile navigation device of the first embodiment.
  • 70 is an image captured by the image capturing unit 10 of the mobile navigation device 1, received by the image receiving unit 21 and displayed on the external display unit 40
  • 70 a is a passage
  • 71 is a user. It is a line input from the external input unit 30 along the movement path of the moving body 60 on the image 70. The user can select a movement route from among the plurality of passages 70a.
  • FIG. 3A 70 is an image captured by the image capturing unit 10 of the mobile navigation device 1, received by the image receiving unit 21 and displayed on the external display unit 40
  • 70 a is a passage
  • 71 is a user. It is a line input from the external input unit 30 along the movement path of the moving body 60 on the image 70
  • 72 is a movement route created by the action instruction map creation unit 22 placing a line-shaped marker in accordance with an input from the external input unit 30, and 72 a is for confirming the traveling direction position of the moving body 60.
  • the plurality of traveling direction position confirmation markers 72b and 72c displayed in the direction orthogonal to the traveling direction of the moving body 60 are the right and left of the traveling direction position confirmation marker 72a in order to confirm the right and left positional deviation of the moving body 60 with respect to the traveling direction.
  • Right and left misalignment confirmation markers displayed on both sides in parallel with the traveling direction of the moving body 60 73 a is a right turn instruction marker arranged at the corner of the movement path 72, and 73 b is a stop arranged at the final arrival position of the movement path 72.
  • reference numeral 72A denotes an action instruction map that is completed with a sound generation instruction marker 73c that instructs sound generation at the start point of the movement path 72 in FIG. 3B according to the input from the external input unit 30, and 75 It is a navigation image created by the image processing unit 23 by superposing the action instruction map 72A on the image 70 and displayed on the external display unit 40.
  • the misregistration confirmation markers 72b and 72c can be respectively arranged at positions that allow a right / left misregistration with respect to the traveling direction position confirmation marker 72a.
  • the shape of the marker 72 is not limited to the present embodiment, and may be a symbol in which symbols such as a cross shape, a substantially H shape, and a substantially U shape are continuously arranged. Further, between the positional deviation confirmation markers 72b and 72c, the traveling direction position confirmation marker may be arranged in a straight line in parallel with these.
  • a right turn instruction marker 73 a and a stop instruction marker 73 b are arranged on the movement path 72. Thereby, the moving body position confirmation unit 24 in FIG.
  • the action command generation unit 25 corresponds to the shapes of the right turn instruction marker 73a and the stop instruction marker 73b arranged at the positions. Then, the action command stored can be selected, and the action command can be transmitted from the action command transmission unit 26 to the moving body 60 simply and reliably. This is effective when the movement route is complicated or when a plurality of movement routes cross each other. In particular, it is possible to prevent malfunction when controlling the plurality of moving bodies 60.
  • a sound generation instruction marker 73c is arranged at the start point of the movement path 72 so that the start of the operation of the moving body 60 is notified to the site periphery.
  • markers to which various operations such as utterance, light emission, head swing, arm swing, and image capture are assigned can be appropriately arranged at any position on the movement path 72.
  • symbols other than triangles and squares, symbols such as circles, numerals, letters such as alphabets, and the like can be used alone or in combination.
  • the moving body position confirmation unit 24 detects the overlapping positions of the moving body 60 and the various markers 72a to 72c and 73a to 73c to confirm the position of the moving body 60.
  • a device that detects the position of the moving body 60 based on changes in the hue, brightness, and saturation of the pixels on the navigation image 70A at the position where the body 60 and various markers 72a to 72c and 73a to 73c overlap is suitably used. It is done.
  • the position detection method of a moving body is demonstrated in detail. First, the image 70 photographed by the image photographing unit 10 is divided into grid (for example, 50 ⁇ 50) image data according to the pixels by the image processing unit 23.
  • color information for example, luminance, hue, color, etc.
  • a default value for example, 0
  • a default value is stored as data at all addresses corresponding to each grid (pixel).
  • various markers 72a to 72c and 73a to 73c are arranged by the action instruction map creating unit 22, and the marker data corresponding to the pixel is arranged.
  • a flag value for example, 1) indicating that various markers 72a to 72c and 73a to 73c are set (arranged) is stored as new data.
  • the image data at the same address as the address where the flag value is stored on the marker data is used to determine the overlap with the moving body 60. Therefore, the mobile object position confirmation unit 24 only needs to read the change in the information of the image data in the pixel corresponding to the position (address) where the various markers 72a to 72c and 73a to 73c are arranged.
  • the processing at 24 can be speeded up.
  • the positions (addresses) on the various markers 72a to 72c and 73a to 73c are not changed. There is no change in the color information stored in the image data.
  • the color of the pixel corresponding to the position (address) (luminance, hue, brightness, saturation, etc.) Changes.
  • the information of the image data changes accordingly, so that the position of the moving body 60 can be detected.
  • the address for monitoring image data such as color is determined by the various markers 72a to 72c and 73a to 73c, and when the image data at the address changes, the various markers 72a to 72c and 73a to 73c are used. It is determined that the moving body 60 is in contact (overlap).
  • the data stored in the image data can be appropriately selected from luminance, hue, brightness, saturation, etc., and an optimum judgment can be made by combining them as necessary.
  • the moving body position confirmation unit 24 recognizes and stores the color (hue, brightness, saturation) of the moving body 60 in advance, the color of the pixel (at the positions of the various markers 72a to 72c and 73a to 73c).
  • the hue, lightness, and saturation change, it is possible to accurately determine whether the moving body 60 is due to overlapping or other than the moving body 60 is present or passed.
  • the ceiling surface or head of the moving body 60 is colored in a color that is easy to detect, or a plate or protrusion colored in a color that is easy to detect on the ceiling surface or head of the moving body 60 is arranged as the detecting body. May be.
  • FIG. 4 is a block configuration diagram of a moving body navigated by the moving body navigation apparatus according to the first embodiment.
  • 61 is a moving body control unit for moving the moving body (robot) 60 according to the action command received by the communication unit 50
  • 61a is a moving body control unit that determines the operation of the moving body 60 based on the action command.
  • 61 a robot operation determination unit
  • 61b an operation command for the moving body 60 corresponding to the operation determined by the robot operation determination unit 61a, and output to the drive control unit 62 of the moving body 60
  • Reference numeral 62 denotes a driving control unit for the moving body 60 having left and right motor drivers 62a and 62b
  • 63 denotes a moving actuator operating unit having left and right motors 63a and 63b driven and controlled by the left and right motor drivers 62a and 62b
  • 64 denotes left and right driving. Actuators having left and right wheels 64a and 64b that are moved by the motors 63a and 63b to move the moving body 60.
  • FIG. 5 is a flowchart showing the operation on the operation side of the mobile navigation apparatus of the first embodiment.
  • the image capturing unit 10 captures an image 70 of an area in which the mobile body 60 moves and transmits the image 70 to the image receiving unit 21 (S1).
  • the image processing unit 23 creates a navigation image 75 by superimposing the action instruction map 72 ⁇ / b> A created by the action instruction map creating unit 22 and the image 70 received by the image receiving unit 21 in accordance with an input from the external input unit 30.
  • S2 And the present position is acquired by the advancing direction position confirmation part 24a of the moving body position confirmation part 24 (S3).
  • markers for example, a right turn instruction marker 73a, a stop instruction marker 73b, and a sound generation instruction marker 73c instructing the operation exist at that position. It is determined whether or not (S4). When it is determined that markers for instructing the movement are arranged, operation commands corresponding to the respective markers are transmitted from the behavior command transmission unit 26 to the communication unit 50 mounted on the moving body 60 (S5).
  • step 4 when it is determined that the marker for instructing the operation is not arranged, and when the operation of the moving object 60 is completed according to the operation command transmitted in step 5, the moving object position confirmation unit 24 It is determined whether or not the current position is the final arrival position indicated by the movement path 72 (S6). When the current position of the moving body 60 is the final arrival position, a stop signal is transmitted from the action command transmission unit 26 and the navigation is terminated (S7).
  • step 6 when the current position of the moving body 60 is not the final arrival position, it is determined whether or not the moving body 60 is hooked on the position deviation confirmation marker 72b on the right side in the traveling direction (S8). If the moving body 60 is hooked on the right displacement confirmation marker 72b, the action command creating unit 25 creates a left action command (S9). In step 8, if the moving body 60 is not hooked on the position deviation confirmation marker 72b, it is next determined whether or not the moving body 60 is hooked on the position deviation confirmation marker 72c on the left side in the traveling direction (S10). If the moving body 60 is placed on the left misalignment confirmation marker 72c, the action command creating unit 25 creates a right action command (S11).
  • step 10 if the moving body 60 is not hung on the misalignment confirmation marker 72c, the action command creating unit 25 creates a straight travel command (S12).
  • the action commands created in steps 9, 11, and 12 are transmitted from the action command transmitting unit 26 to the communication unit 50 mounted on the moving body 60 (S13).
  • the process After a predetermined time has elapsed (according to the moving operation of the moving body 60), the process returns to step 1, the image receiving unit 21 receives a new image 70, and the navigation image 75 is updated in step 2, while the moving body 60 The above operation is repeated until the robot reaches the arrival position.
  • FIG. 6 is a flowchart showing the moving operation of the moving body navigated by the moving body navigation apparatus of the first embodiment.
  • the moving body control unit 61 of the moving body 60 determines whether or not the communication unit 50 has received a signal from the action command transmission unit 26 (S21). When the signal is not received, the moving body control unit 61 transmits a stop signal for stopping the moving actuator operation unit to the drive control unit 62 and returns to Step 21 (S22).
  • the robot motion determination unit 61a determines whether or not the signal is a stop signal (S23). If the received signal is the stop signal in step 5, the moving body control unit 61 transmits a stop signal for stopping the moving actuator operation unit to the drive control unit 62 and ends the moving operation (S24).
  • step 23 the robot motion determination unit 61a determines whether or not the action command signal received from the action command transmission unit 26 is the straight-ahead command in step 10 (S25). If the action command signal is a straight command, the robot motion creation unit 61b creates a motion command for a straight motion (S26). In step 25, if the action command signal is not a straight-ahead command, it is determined whether or not the action command signal is a rightward movement command in step 9 (S27). If the action command signal is a rightward movement command, the robot motion creation unit 61b creates a motion command for rightward movement (S28). In step 27, when the action command signal is not a rightward movement command, the robot motion creation unit 61b creates a motion command for leftward movement (S29).
  • the operation commands created in steps 26, 28, and 29 are output to the drive control unit 62, and the movement actuator operation unit 63 is driven and controlled accordingly (S30).
  • the left and right motor drivers 62a and 62b are controlled so that the left and right motors 63a and 63b of the moving actuator operation unit 63 rotate by the same amount.
  • the left and right motor drivers 62a and 62b are controlled so that the left motor 63a of the movement actuator operation unit 63 rotates more than the right motor 63b.
  • the right motor 63b of the moving actuator operation unit 63 is controlled by the left and right motor drivers 62a and 62b so as to rotate more than the left motor 63a.
  • the moving actuator 64 having the left and right wheels 64a and 64b has been described as the moving means for moving the moving body 60.
  • the moving means only needs to be able to move the moving body 60, and the wheels 64a and 64b.
  • a crawler or the like may be used instead of.
  • the moving body 60 is a robot
  • the moving body 60 is not limited to this, and may be a person (pedestrian) or a car driven by a person.
  • an action command can be instructed to a pedestrian or driver by voice or an image.
  • the moving body 60 is a car, in a parking lot or the like, it is possible to smoothly guide to an empty space or to notify that another car is approaching to prevent a contact accident. Excellent in safety and safety.
  • the mobile navigation device has the following effects. (1) Since the image capturing unit is provided independently of the moving body and captures an image of an area including the moving path along which the moving body moves, the situation of the moving path and the moving body are determined depending on the image captured by the image capturing unit. It is possible to confirm the position of the remote from the remote, and is excellent in reliability. (2)
  • the navigation information creation control unit includes an image receiving unit that receives an image captured by the image capturing unit via a communication line, and a movement path to be moved by the moving body and a marker that indicates an operation to be performed by the moving body.
  • An image processing unit that creates a navigation image superimposed on the image, and selects an optimal movement path while confirming the navigation image created by the image processing unit based on the image received by the image receiving unit, It is possible to set and specify the operation at the selected location, and it is excellent in operability.
  • the navigation information creation control unit detects a position where the moving object and the marker overlap and confirms the position of the moving object, and an action command corresponding to the marker placed on the moving path. Since the action command creating unit is created, it is possible to confirm the position of the moving body easily and reliably from a remote location and create an action command for the moving body, which is excellent in simplicity and certainty of the action command.
  • the navigation information creation control unit has a behavior command transmission unit that transmits a behavior command created by the behavior command creation unit via a communication line, the behavior command is surely transmitted to a remote moving body.
  • a desired operation can be performed while guiding the moving body, and the reliability of the operation and the versatility are excellent.
  • An emergency stop temporary stop
  • the reliability of the guidance operation is excellent.
  • an action command is sent to the mobile body such as a desired robot equipped with the communication unit. It can be transmitted to instruct the movement route and operation, and is excellent in versatility.
  • the moving body position confirmation unit of the navigation information creation control unit detects the overlapping position of the moving body and the marker on the navigation image and confirms the position of the moving body, the guide path is placed on the actual movement path. There is no need to lay down or attach a sensor for detecting the taxiway to the moving body, which makes it easy to install, and it is possible to construct a navigation system by effectively using existing moving bodies such as robots. Excellent in mass productivity and versatility.
  • the navigation information creation control unit includes a behavior instruction map creation unit that creates a behavior instruction map by arranging markers indicating movement paths and movements of a moving body according to an input from the external input unit. It is possible to display the movement route and the operation input from the marker with the marker, and it is easy to set and check the movement route and the operation and is excellent in usability.
  • the moving body position confirmation unit of the navigation information creation control unit moves the moving body by changing at least one of the hue, brightness, and saturation of the pixel on the marker when the moving body and the marker overlap on the navigation image. Therefore, the position of the moving body can be reliably detected based on the presence or absence of the overlap between the moving body and the marker, so that malfunction does not easily occur and the usability is excellent.
  • the marker has a traveling direction position confirmation marker for confirming the traveling direction position of the moving body, and a positional deviation confirmation marker for confirming a lateral displacement of the moving body with respect to the traveling direction,
  • the moving body position confirmation unit of the navigation information creation control unit detects the overlapping position of the moving body and the traveling direction position confirmation marker and confirms the traveling direction position of the moving body, and the positional deviation from the moving body.
  • a positional deviation confirmation unit that detects the positional deviation of the moving body in the left-right direction with respect to the traveling direction position of the moving body by detecting the presence or absence of an overlap with the confirmation marker, not only the traveling direction position of the moving body, The positional deviation in the left-right direction can also be confirmed, the moving body can be reliably moved according to a preset movement route, and the operation reliability is excellent. (12) When the user inputs a line along the movement path that the moving body should move on the image from the external input unit, the action instruction map creation unit of the navigation information creation control unit moves along the movement path.
  • An action instruction map in which markers having a movement direction position confirmation marker and a position deviation confirmation marker are arranged is created, and the image processing unit of the navigation information creation control unit creates a navigation image in which the action instruction map is superimposed on the image. Since the navigation image is displayed on the external display unit, the user can easily and surely input the movement route and operation while creating the navigation image while checking the external display unit. It does not occur easily and has excellent input workability and reliability.
  • the present invention can reliably guide various moving bodies such as robots along a designated route with a simple configuration with a small number of parts, does not require complicated mechanisms and operations, and can be easily used by anyone. It is easy to create and change routes, has excellent workability, maintainability and versatility, does not require complicated control, has excellent operational stability and reliability, and can be used in combination with existing robots. A wide range of mobile navigation devices with excellent versatility and mass productivity can be widely used to reliably and efficiently guide various mobile devices from remote locations. The floors of automated guided vehicles, department stores and other buildings in factories Labor-saving can be achieved by suitably using for navigation of patrol robots, security robots, and cars in parking lots.

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Physics & Mathematics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Remote Sensing (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Electromagnetism (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)

Abstract

簡素な構成でロボット等の各種移動体を指定した経路に沿って確実に案内しながら所望の動作を行わせることができ、複雑な機構や操作が不要で、誰でも簡単に使用でき、経路の作成や変更が容易で作業性、メンテナンス性、汎用性に優れ、複雑な制御が不要で、動作の安定性、確実性に優れ、既存のロボット等とも組合せて利用することができる汎用性、量産性に優れた移動体ナビゲーション装置の提供。 移動体と独立して配設された画像撮影部で移動体が移動する移動経路を含む領域の画像を撮影し、その画像を通信回線を介して画像受信部で受信し、画像処理部で移動体の移動経路や動作を示すマーカを画像上に重ねてナビゲーション画像を作成した後、移動体位置確認部で移動体とマーカとの重なり位置を検出して移動体の位置を確認しながら、行動命令作成部で作成した行動命令を行動命令送信部から移動体に搭載された通信部に送信する。

Description

移動体ナビゲーション装置
 本発明は、ロボット等の各種移動体に対する移動や動作に関する行動命令を通信回線を利用して移動体に送信する移動体ナビゲーション装置に関する。
 従来、ロボット等の各種移動体には、予め作成されたプログラムに従って決まった経路を移動するもの、オペレータの操作に従って指定された経路を移動するもの、自身で障害物の有無などを判別しながら自律して移動するもの等がある。
 例えば、(特許文献1)には、「経路に沿って誘導路が敷設され、物品の搬送を制御する制御装置が設けられ、この制御装置との間でデータの送受信機能を有し、制御装置からの指令データに応じて誘導路に案内されて自走し、物品を搬送する少なくとも1台の無人搬送車を備えた無人搬送設備」が開示されている。
 また、(特許文献2)には、「警備地域内を走行し巡回警備する警備ロボット」が開示されている。
特開2006-99726号公報 特許第3984493号公報
 しかしながら、上記従来の技術は以下のような課題を有していた。
(1)(特許文献1)の無人搬送設備は、実際に物品の搬送を行う以外に、工場や物流設備等を巡回、監視することができ、機能性、有用性に優れるものであるが、走行箇所に誘導路を敷設しなければならず、走行箇所が限定されると共に、無人搬送車には、誘導路を検出するライン検出センサを搭載する必要があり、設置自在性、汎用性、メンテナンス性に欠けるという課題があった。
 また、無人搬送車が移動するルートを変更するためには、煩雑な作業が必要であり、操作性に欠けるという課題があった。
(2)(特許文献2)の警備ロボットは、自律制御でエレベータに乗降し階層間を移動することができ、外部から操作する必要がなく、汎用性、使用性に優れるものであるが、警備ロボット自身に画像取込部を搭載すると共に、制御装置部において、画像取込部により取込まれた画像信号から目標物の三次元位置を算出しなければならず、複雑な制御が必要で、量産性に欠けるという課題があった。
 本発明は上記課題を解決するためになされたものであり、部品点数が少ない簡素な構成でロボット等の各種移動体を指定した経路に沿って確実に案内しながら所望の動作を行わせることができ、複雑な機構や操作が不要で、誰でも簡単に使用することができ、経路の作成や変更、動作の設定が容易で作業性、メンテナンス性、汎用性に優れ、複雑な制御が不要で、動作の安定性、確実性に優れ、既存のロボット等とも組合せて利用することができる汎用性、量産性に優れた移動体ナビゲーション装置を提供することを目的とする。
 上記課題を解決するために本発明の移動体ナビゲーション装置は、以下の構成を有している。
 請求項1に記載の移動体ナビゲーション装置は、移動体に対する行動命令を通信回線を利用して前記移動体に送信する移動体ナビゲーション装置であって、
(a)前記移動体と独立して配設され前記移動体が移動する移動経路を含む領域の画像を撮影する画像撮影部と、(b)前記画像撮影部で撮影された前記画像を通信回線を介して受信する画像受信部と、前記移動体の移動経路や動作を示すマーカを前記画像上に重ねてナビゲーション画像を作成する画像処理部と、前記移動体と前記マーカとの重なり位置を検出して前記移動体の位置を確認する移動体位置確認部と、前記移動経路上に配置されるマーカに対応した行動命令を作成する行動命令作成部と、前記行動命令作成部で作成された前記行動命令を通信回線を介して送信する行動命令送信部と、を有するナビゲーション情報作成制御部と、(c)前記ナビゲーション画像を表示する外部表示部と、(d)前記移動体に搭載され、前記ナビゲーション情報作成制御部の前記行動命令送信部から送信される前記行動命令を受信する通信部と、を備えている構成を有している。
 この構成により、以下のような作用を有する。
(1)移動体と独立して配設され移動体が移動する移動経路を含む領域の画像を撮影する画像撮影部を有するので、画像撮影部で撮影される画像によって移動経路の状況や移動体の位置などを遠隔から確認することができ、信頼性に優れる。
(2)ナビゲーション情報作成制御部が、画像撮影部で撮影された画像を通信回線を介して受信する画像受信部と、移動体の移動すべき移動経路や移動体に行わせる動作を示すマーカを画像上に重ねてナビゲーション画像を作成する画像処理部と、を有するので、画像受信部で受信した画像に基づいて、画像処理部で作成されるナビゲーション画像を確認しながら最適な移動経路を選択、設定することや選択した場所における動作を指定することができ、操作性に優れる。
(3)ナビゲーション情報作成制御部が、移動体とマーカとの重なり位置を検出して移動体の位置を確認する移動体位置確認部と、移動経路上に配置されるマーカに対応した行動命令を作成する行動命令作成部と、を有するので、遠隔から簡便かつ確実に移動体の位置を確認して移動体に対する行動命令を作成することができ、行動指令の簡便性、確実性に優れる。
(4)ナビゲーション情報作成制御部が、行動命令作成部で作成された行動命令を通信回線を介して送信する行動命令送信部を有するので、遠隔にある移動体に対して確実に行動命令を送信して、移動体を案内しつつ所望の動作を行わせることができ、操作の確実性、汎用性に優れる。
(5)ナビゲーション画像を表示する外部表示部を有することにより、移動経路の状況や移動体の位置などを常に確認することができるので、必要に応じて、移動経路や動作の変更、移動体の非常停止(一旦停止)等を行わせることができ、案内操作の信頼性に優れる。
(6)移動体に搭載され、ナビゲーション情報作成制御部の行動命令送信部から送信される行動命令を受信する通信部を有するので、通信部を搭載した所望のロボット等の移動体に行動命令を送信して移動経路や動作を指示することができ、汎用性に優れる。
(7)ナビゲーション情報作成制御部の移動体位置確認部が、ナビゲーション画像上で移動体とマーカとの重なり位置を検出して移動体の位置を確認するので、実際の移動経路上に誘導路を敷設したり、移動体に誘導路を検出するためのセンサを取り付けたりする必要がなく、設置自在性に優れ、既存のロボット等の移動体を有効に利用してナビゲーションシステムを構築することができ、量産性、汎用性に優れる。
 ここで、画像撮影部は、移動体が移動する領域の画像を撮影することができるものであればよいが、ネットワークカメラやウェブカメラ等が好適に用いられる。画像撮影部と画像受信部とをつなぐ通信回線は有線でも無線でもよいが、動作の安定性の面からは有線が好ましい。
 画像撮影部は、移動体が移動する工場等の建物の壁面や天井、移動体が移動する領域を囲む塀、領域内に配設された建造物等の外壁や屋根などに設置することが好ましい。特に、高所から領域全体を見下ろせる位置に配置した場合、1台のネットワークカメラやウェブカメラ等で領域全体を斑無く撮影することができ、使用性に優れる。尚、領域を複数に分割し、複数台のネットワークカメラやウェブカメラ等で撮影してもよい。移動領域が広く、複数のカメラからの画像を切り換えて使用する場合は、複数の画像撮影部から送信される画像の中から移動体が撮影されている現在位置の画像を画像受信部で選択し、ナビゲーション画像を作成すればよい。そして、1つの領域内での移動が完了した時(移動体がその領域内での最終到達位置に達したことを検出した時)に、次に移動すべき領域と移動体を撮影するカメラの画像に切り換えればよい。
 また、各種カメラ等の画像撮影部が設置されていない場所や災害等が発生した場所等にビデオカメラ等の画像撮影部を搭載したヘリコプターや飛行機等を飛翔させて上空から画像を撮影してもよい。
 ナビゲーション情報作成制御部の画像処理部は、移動経路や動作を示すマーカを画像受信部で受信した画像上に重ねてナビゲーション画像を作成するが、移動経路や動作については、予め用意されたもの(パターン)を呼び出して使用してもよいし、使用者がその場で入力してもよい。
 マーカは、移動体の移動すべき移動経路やその移動経路上で移動体に行わせる動作を示すが、移動経路を示す場合のマーカとしては、1本の直線又は複数本の直線を平行に配置したものや十字型,略H字型,略U字型等の記号を連続的に配置したものが好適に用いられる。行動命令作成部は、移動経路全体と移動体の現在位置から、移動体の移動方向を求め、直進、右折、左折、方向転換などの移動命令を作成することができる。
 また、動作を示す場合のマーカとしては、矢印、丸、三角、四角等の記号、数字、アルファベット等の文字などを単独又は組合せて使用するものが好適に用いられる。予めマーカの形状に対応させて、直進,右旋回,左旋回等の移動命令を割り当て、各々のマーカとそれに対応した動作を予めナビゲーション情報作成制御部の記憶部等に記憶させておけば、移動体位置確認部で移動体の現在位置を検出すると共に、行動命令作成部で、その位置に配置されたマーカに対応した行動(移動)命令を作成(又は選択)し、行動命令送信部から移動体に対して簡便かつ確実に行動(移動)命令を送信することができる。
 よって、移動のための動作が割り当てられたマーカが移動経路上に配置されていれば、そのマーカの位置に移動した時に、速やかに各々のマーカに対応した動作を行うことができ、制御が容易で使用性に優れる。
 移動体に行わせる基本的な動作(移動動作)としては、前後進、右左折、旋回、停止などがある。移動のための動作以外に行う動作としては、移動体が頭部や腕等の可動部を有する場合は、それらの可動部を上下や左右に動かす動作を行うことができる。また、移動体から音、声、光を発することや、移動体に搭載したカメラ等で撮影を行うといった動作を行うこともでき、移動体を誘導作業や警備などに利用できる。
 移動体位置確認部は、マーカの位置上に移動体が重なったことを検出して移動体の位置を確認するが、具体的には、移動体とマーカの位置が重なった地点における画像上(画素)の色相,明度,彩度の変化などを元に移動体の位置を検出するものが好適に用いられる。マーカの位置に移動体が重なる前後の色差や輝度の変化によっても検出することができる。
 行動命令送信部は、行動命令作成部で作成された行動命令を移動体に搭載される通信部に送信することにより、移動体に所望の動作を行わせることができる。行動命令送信部と通信部とをつなぐ通信回線は有線でも無線でもよいが、移動体の可動性、操作性の面からは無線が好ましい。
 外部表示部は、主にナビゲーション画像を表示するが、画像受信部で受信した画像や移動経路(マーカ)をそれぞれ単独で表示することもできる。
 通信部は、行動命令送信部から送信される行動命令を受信するが、行動命令は、移動体が認識できるものであればよく、制御信号に限らず、音声や画像でもよい。通信部は、移動体の種類に応じて、移動体への行動命令の出力方法を選択することができる。例えば、移動体がロボットの場合は、受信した行動命令を移動体の動作制御部に操作信号として直接出力するものが好適に用いられる。また、移動体が、人(歩行者)或いは人の運転する車などの場合、行動命令を音声や画像で歩行者や運転者に指示するものが好適に用いられる。
 移動体がロボットの場合は、通信部が受信した行動命令に従って行動できるものであればよい。ロボットは、移動体制御部として、ロボット動作判別部と、ロボット動作作成部と、を有するものが好適に用いられる。ロボット動作判別部では、行動命令に基づいてロボットの動作を判別する。ロボット動作作成部では、ロボット動作判別部で判別された動作に対応したロボットの動作指令を作成し、ロボットの駆動制御部に対して出力する。
 ロボットの駆動制御部は、例えば左右のモータードライバー等を有しており、左右のモーター等の移動アクチュエータ動作部を駆動、制御して車輪等の移動アクチュエータでロボットを移動させる。
 尚、ロボットに、走行中に障害物との接触を検知するための接触センサや障害物等の接近を感知するための超音波センサ等を搭載した場合、誤動作などによる衝突を確実に防止することができ、安全性に優れる。
 この移動体ナビゲーション装置でナビゲーションする移動体は、1台でも複数台でもよい。移動体が複数台の場合、各々の移動体を個別に認識して処理を行う必要があるが、常にマーカに対応する位置での画像上の変化を監視していれば、マーカに沿って移動する各々の移動体の位置を認識することができる。また、複数の移動体が異なる移動経路を移動する場合、各々の移動体と移動経路を予め関連付けしておけば、誤動作を防止できる。尚、各々の移動体の移動経路を示すマーカの色を移動体毎に変えておけば、移動体と移動経路の関連付けが容易になり、誤動作が発生した場合に、使用者(オペレータ)が直ちに異常を察知することができ、使用性に優れる。
 請求項2に記載の発明は、請求項1に記載の移動体ナビゲーション装置であって、前記移動体の移動経路や動作を入力するための外部入力部を備え、前記ナビゲーション情報作成制御部が、前記外部入力部からの入力に従って前記移動体の移動経路や動作を示す前記マーカを配置して行動指示マップを作成する行動指示マップ作成部を備えた構成を有している。
 この構成により、請求項1の作用に加え、以下の作用を有する。
(1)移動体の移動経路や動作を入力するための外部入力部を備えることにより、その場で外部入力部から簡便に移動経路や動作を入力することや変更することができ、移動経路の作成、修正、変更や動作の選択、設定、変更などの入力の作業性、移動経路や動作の設定自在性に優れる。
(2)ナビゲーション情報作成制御部が、外部入力部からの入力に従って移動体の移動経路や動作を示すマーカを配置して行動指示マップを作成する行動指示マップ作成部を備えることにより、外部入力部から入力された移動経路や動作をマーカで表示することができ、移動経路や動作の設定、確認が容易で使用性に優れる。
 ここで、外部入力部としては、移動経路や動作を入力できるものであればよく、具体的には、キーボード、マウス、タッチパネルなどが好適に用いられる。キーボードの場合は、移動経路や動作を設定したい画像上の位置(番地)を直接数値入力などで選択することができる。マウスであれば、移動経路や動作を設定したい画像上の位置をクリックしたり、カーソルを移動させながらなぞったりして選択することができる。また、タッチパネルの場合、指や専用のペンで外部表示部の画面に触れるだけで、簡便に所望の位置を選択して移動経路や動作を設定することができ、特別な知識が不要で、複雑な操作を行う必要がなく、誰でも使用することができ、移動経路や動作の設定や変更が極めて容易で作業性に優れる。尚、動作を設定する場合には、予め用意されたメニューの中から動作を選択すればよい。また、画像撮影部で人やロボット等の移動体が移動(歩行)する様子を撮影しておき、その移動経路に合わせて画像上にマーカを配置して、ナビゲーション画像を作成することもできる。
 請求項3に記載の発明は、請求項1又は2に記載の移動体ナビゲーション装置であって、前記ナビゲーション情報作成制御部が、前記マーカで示された前記行動指示マップを記憶する記憶部を備えた構成を有している。
 この構成により、請求項1又は2の作用に加え、以下の作用を有する。
(1)ナビゲーション情報作成制御部が、マーカで示された行動指示マップを記憶する記憶部を備えることにより、繰り返し同じ移動経路で移動や動作を行う場合などに、移動経路等を作成し直す必要がなく、記憶された行動指示マップを読み込むだけで、簡便にナビゲーション画像を作成することができ、使用性に優れる。
 ここで、記憶部としては、ハードディスクのほか、磁気ディスクやCD-R等の様々な媒体を使用することができる。
 請求項4に記載の発明は、請求項1乃至3の内いずれか1項に記載の移動体ナビゲーション装置であって、前記ナビゲーション情報作成制御部の前記移動体位置確認部が、前記ナビゲーション画像上で前記移動体と前記マーカが重なった時の前記マーカ上の画素の色相,明度,彩度の少なくとも1つ以上の変化により前記移動体の位置を検出する構成を有している。
 この構成により、請求項1乃至3の内いずれか1項の作用に加え、以下の作用を有する。
(1)ナビゲーション情報作成制御部の移動体位置確認部が、ナビゲーション画像上で移動体とマーカが重なった時のマーカの位置に対応する画素の色相,明度,彩度の少なくとも1つ以上の変化により移動体の位置を検出するので、移動体とマーカの重なりの有無に基づいて移動体の位置を確実に検出することができ、誤動作が発生し難く、使用性に優れる。
 ここで、移動体位置確認部に、移動体の色(色相,明度,彩度)を予め認識、記憶させるようにした場合、マーカの位置に対応する画素の色(色相,明度,彩度)が変化した時に、移動体が重なったことによるものか、移動体以外のもの(未知の移動体)が存在又は通過したことによるものかを正確に判別することができる。尚、画素の色の変化を検出し易いように、周囲の明るさ、背景の色などに応じて、適宜、移動体の色を選択できることが好ましい。また、移動体の天井面や頭部を検出し易い色に着色したり、移動体の天井面や頭部に検出し易い色に着色したプレートや突起などを検出体として配置したりしてもよい。もし、画像上に侵入した未知の移動体が制御対象の移動体に干渉しそうになった場合は、行動命令作成部から行動命令送信部を通して制御対象の移動体に対して、回避又は停止の指示を行うことにより、衝突を防ぐことができる。
 尚、ナビゲーション情報作成制御部が、移動体位置確認部で検出した移動体とマーカとの重なり位置を時系列で記憶する移動体位置記憶部を有する場合、移動体とマーカが重なった位置の推移を知ることができ、その移動体の移動の履歴に基づいて、移動体が設定された移動経路を移動中か、途中で停止しているか、を判定することができる。移動体が途中で停止していると判定した時に、警告を発するようにしておけば、現場に直ちに移動体の異常を知らせ、復旧作業を行うことができる。
 また、移動体の移動の履歴から、制御対象の移動体の現在位置の画素の変化のみを選択して監視することができる。これにより、マーカ上の他の位置を人や他の移動体が通過して画素が変化した場合でも、誤認識が発生することがなく、位置検出の確実性に優れる。
 尚、ロボットに接触センサや超音波センサ等を搭載した場合、行動命令送信部からの命令を待つことなく、ロボットの判断で移動動作を一時的に停止することができる。このとき、ロボット(移動体)に搭載した通信部を通して、ロボット(移動体)からナビゲーション情報作成制御部に対して、一時停止中であることを通知する信号を送信するようにすれば、ナビゲーション情報作成制御部の行動命令送信部から行動命令が繰り返し送信されることを防止でき、誤って警告が発せられることもなく、動作の信頼性に優れる。
 請求項5に記載の発明は、請求項1乃至4の内いずれか1項に記載の移動体ナビゲーション装置であって、前記マーカが、前記移動体の進行方向位置を確認するための進行方向位置確認マーカと、進行方向に対する前記移動体の左右方向の位置ずれを確認するための位置ずれ確認マーカと、を有し、前記ナビゲーション情報作成制御部の前記移動体位置確認部が、前記移動体と前記進行方向位置確認マーカとの重なり位置を検出して前記移動体の進行方向位置を確認する進行方向位置確認部と、前記移動体と前記位置ずれ確認マーカとの重なりの有無を検出して前記移動体の進行方向位置に対する前記移動体の左右方向の位置ずれを確認する位置ずれ確認部と、を備えた構成を有している。
 この構成により、請求項1乃至4の内いずれか1項の作用に加え、以下の作用を有する。
(1)マーカが、移動体の進行方向位置を確認するための進行方向位置確認マーカと、進行方向に対する移動体の左右方向の位置ずれを確認するための位置ずれ確認マーカと、を有し、ナビゲーション情報作成制御部の移動体位置確認部が、移動体と進行方向位置確認マーカとの重なり位置を検出して移動体の進行方向位置を確認する進行方向位置確認部と、移動体と位置ずれ確認マーカとの重なりの有無を検出して移動体の進行方向位置に対する移動体の左右方向の位置ずれを確認する位置ずれ確認部と、を備えることにより、移動体の進行方向位置だけでなく、左右方向の位置ずれも確認することができ、予め設定した移動経路に従って確実に移動体を移動させることができ、動作の信頼性に優れる。
 ここで、位置ずれ確認マーカは、進行方向位置確認マーカに対して左右の位置ずれを許容する位置にそれぞれ配置することができる。例えば、進行方向位置確認マーカを移動体の移動方向に一本の直線状に形成した場合、位置ずれ確認マーカは進行方向位置確認マーカの左右に平行に配置することができる。また、進行方向位置確認マーカとして、移動体の移動方向と直交する直線を所定間隔で複数配置し、その両側の左右の位置ずれを許容する位置に移動体の移動方向と平行に位置ずれ確認マーカを配置してもよい。このとき、略H字型や略U字型等の記号を連続的に配置することにより、簡便に進行方向位置確認マーカ及び位置ずれ確認マーカを一体的に形成することができる。
 請求項6に記載の発明は、請求項5に記載の移動体ナビゲーション装置であって、使用者が、前記外部入力部から前記画像上に前記移動体の移動すべき前記移動経路に沿って線を入力することにより、前記ナビゲーション情報作成制御部の前記行動指示マップ作成部が、前記移動経路に沿って前記進行方向位置確認マーカと前記位置ずれ確認マーカとを有する前記マーカが配置された前記行動指示マップを作成し、前記ナビゲーション情報作成制御部の前記画像処理部が、前記画像上に前記行動指示マップを重ねた前記ナビゲーション画像を作成し、前記ナビゲーション画像が前記外部表示部に表示される構成を有している。
 この構成により、請求項5の作用に加え、以下の作用を有する。
(1)使用者が、外部入力部から画像上に移動体の移動すべき移動経路に沿って線を入力することにより、ナビゲーション情報作成制御部の行動指示マップ作成部が、移動経路に沿って進行方向位置確認マーカと位置ずれ確認マーカとを有するマーカが配置された行動指示マップを作成し、ナビゲーション情報作成制御部の画像処理部が、画像上に行動指示マップを重ねたナビゲーション画像を作成し、そのナビゲーション画像が外部表示部に表示されるので、使用者は、外部表示部を確認しながら、簡便かつ確実に移動経路や動作を入力してナビゲーション画像を作成することができ、入力ミスが発生し難く、入力の作業性、信頼性に優れる。
 ここで、行動指示マップ作成部によって移動経路や動作に対応してマーカが配置された行動指示マップが作成されるが、予め移動体の大きさや移動性能等を入力又は認識することにより、入力された移動経路や動作に従って移動体が進入、通過、転向等の動作が可能かどうか判断し、不可能な場合は、警告を発して移動経路や動作の修正を促したり、自動的に移動経路や動作の補正を行ったりしてもよい。特に、曲がり角などには旋回を指示するマーカを配置することが好ましい。これにより、移動体位置確認部で移動体の現在位置を検出した時に、移動体が旋回を指示するマーカ上に位置している場合、行動命令作成部から旋回を指示する行動命令を直ちに送信することができ、そのままでは走行不可能な半径のカーブでも、旋回することによって移動経路に沿って確実に移動することができ信頼性に優れる。
 外部入力部から画像上に移動体の移動すべき移動経路に沿って線を入力する際に、曲がり角や複数の移動経路が交差する位置などで旋回や一旦停止が必要な位置を選択、指示することにより、ナビゲーション情報作成制御部の行動指示マップ作成部が、旋回や一旦停止の移動命令が割り当てられたマーカを自動的に配置するようにしておけば、行動指示マップの作成が容易であり、移動体を確実に移動経路に沿って移動させることができ、使用性に優れる。特に、複数台の移動体をナビゲーションする場合、移動経路が近接したり、交差したりしても、移動体同士の干渉や衝突を防止することができ、動作の確実性に優れる。
 請求項7に記載の発明は、請求項1乃至6の内いずれか1項に記載の移動体ナビゲーション装置であって、前記通信部を通して、前記移動体の移動量、回転量、旋回量のいずれか1以上の値を有する動作量データ、前記移動体が移動中若しくは動作中又は停止中のいずれかであることを通知する動作状況通知信号、前記移動体の移動若しくは動作が完了したことを通知する動作完了通知信号の内の少なくとも1つを前記ナビゲーション情報作成制御部に送信する構成を有している。
 この構成により、請求項1乃至6の内いずれか1項の作用に加え、以下の作用を有する。
(1)通信部を通して、移動体の移動量、回転量、旋回量のいずれか1以上の値を有する動作量データ、移動体が移動中若しくは動作中又は停止中のいずれかであることを通知する動作状況通知信号、移動体の移動若しくは動作が完了したことを通知する動作完了通知信号の内の少なくとも1つを移動体の動作状況を示すデータ又は信号としてナビゲーション情報作成制御部に送信することにより、ナビゲーション情報作成制御部において、移動体の正確な動作状況を確認することができ、行動命令作成部による新たな行動命令の作成や行動命令送信部からの不要な(誤った)行動命令の送信を停止して、移動体の誤動作を防止でき、移動体制御の確実性、信頼性に優れる。
 ここで、ナビゲーション情報作成制御部は画像受信部で受信した画像に基づいて、移動体の位置等を検出することはできるが、移動体の細かな動作や複雑な動作を検出することは困難であり、移動体の方向転換や行動命令送信部から送信した行動命令が正確に実行されているかどうかを把握できないことがある。そこで、移動体にエンコーダやジャイロセンサ等を搭載し、移動体の動作中に実際の移動距離や回転角度、旋回角度などを検出してその値を動作量データとして送信することにより、移動体が命令通りに動作していることを確認することができる。動作状況通知信号の場合は、移動体が移動中若しくは動作中又は停止中の間、信号を送信し続けるので、常に移動体の動作状況を確認することができ、信頼性に優れる。また、動作完了通知信号の場合は、移動若しくは動作が完了した時だけ信号を送信すればよいので、移動体やナビゲーション情報作成制御部の負荷を低減でき、使用性に優れる。
 特に、ナビゲーション情報作成制御部の画像処理部や移動体位置確認部などに不具合が生じる等して、画像上で移動体の正確な位置や向きなどを検出できない場合(或いは移動体の位置や向きを誤って検出した場合)でも、移動体に誤った動作を指示することがなく、移動体の暴走を防ぐことができ、信頼性、安全性に優れる。
 ナビゲーション情報作成制御部は、動作量データ、動作状況通知信号、動作完了通知信号のいずれかを用いて移動体の動作状況を確認することができ、いずれのデータ又は信号を使用するかによって、それぞれに対応した動作量確認部、動作状況確認部、動作完了確認部の少なくとも1つを備えることができる。
 通信部からナビゲーション情報作成制御部に対して動作状況を通知するために、動作量データを使用する場合は、ナビゲーション情報作成制御部に動作量確認部を設け、行動命令送信部から送信した行動命令に基づく移動量、回転角度、旋回角度の値(指示量)と、通信部から送信される実際の移動体の動作量データと、を比較し、それらが一致した時に、指示通りの動作が完了したと判定し、行動命令作成部による新たな行動命令の作成を開始させるようにすればよい。
 通信部からナビゲーション情報作成制御部に対して動作状況を通知するために、動作状況通知信号を使用する場合は、ナビゲーション情報作成制御部に動作状況確認部を設け、行動命令送信部から行動命令を送信した後、通信部から動作状況通知信号を受信している間は、移動体が移動中若しくは動作中又は停止中のいずれかの状態であると判定し、移動体が移動中若しくは動作中であると判定した時には、行動命令作成部による新たな行動命令の作成や行動命令送信部による新たな行動命令の送信を停止し、移動体が停止中であると判定した時には、行動命令作成部による新たな行動命令の作成や行動命令送信部による新たな行動命令の送信を行うことができる。
 通信部からナビゲーション情報作成制御部に対して動作状況を通知するために、動作完了通知信号を使用する場合は、ナビゲーション情報作成制御部に動作完了確認部を設け、行動命令送信部から行動命令を送信した後、動作完了通知信号を受信するまでは移動体が動作中であると判定して、行動命令作成部による新たな行動命令の作成や行動命令送信部による新たな行動命令の送信を停止し、動作完了通知信号を受信した時に、移動体の移動や動作が完了した(移動体が停止中である)と判定して、行動命令作成部による新たな行動命令の作成や行動命令送信部による新たな行動命令の送信を行うことができる。
 請求項1に記載の発明によれば、以下のような効果を有する。
(1)実際の移動経路上に誘導路を敷設したり、移動体に誘導路を検出するためのセンサを取り付けたりする必要がなく、設置自在性に優れ、遠隔から簡便かつ確実に移動体の位置を確認して移動体に対する行動命令を指示することができ、動作指令の簡便性、確実性に優れ、既存の工場内における無人搬送台車やデパート等のフロアその他における巡回ロボットや警備ロボット等の移動体を有効に利用して、ナビゲーションシステムを構築することができる量産性、汎用性に優れた移動体ナビゲーション装置を提供することができる。
 請求項2に記載の発明によれば、請求項1の効果に加え、以下のような効果を有する。
(1)その場で外部入力部から簡便に移動体の移動すべき移動経路や移動体に行わせる動作の入力、変更を行うことができる移動経路や動作の設定、修正、変更などの作業性、移動経路や動作の設定自在性に優れた移動体ナビゲーション装置を提供することができる。
 請求項3に記載の発明によれば、請求項1又は2の効果に加え、以下のような効果を有する。
(1)繰り返し同じ移動経路を使用したり、同じ動作を行わせたりする場合などに、記憶部に記憶された行動指示マップを読み込むだけで、簡便にナビゲーション画像を作成することができ、移動経路や動作を設定し直す必要のない使用性に優れた移動体ナビゲーション装置を提供することができる。
 請求項4に記載の発明によれば、請求項1乃至3の内いずれか1項の効果に加え、以下のような効果を有する。
(1)ナビゲーション画像上で移動体とマーカが重なった時のマーカ上の画素の色相,明度,彩度の少なくとも1つ以上の変化を利用して移動体の位置を確実に検出することができ、誤動作が発生し難く、使用性に優れた移動体ナビゲーション装置を提供することができる。
 請求項5に記載の発明によれば、請求項1乃至4の内いずれか1項の効果に加え、以下のような効果を有する。
(1)移動体と進行方向位置確認マーカとの重なり位置に加え、移動体と位置ずれ確認マーカとの重なりの有無を検出することにより、移動体の進行方向位置だけでなく、左右方向の位置ずれも確認することができ、予め設定した移動経路に従って確実に移動体を移動させることができる動作の信頼性に優れた移動体ナビゲーション装置を提供することができる。
 請求項6に記載の発明によれば、請求項5の効果に加え、以下のような効果を有する。
(1)使用者が、外部表示部を確認しながら、外部入力部から画像上に移動体の移動すべき移動経路に沿って線を入力するだけで、簡便かつ確実に移動経路に沿ってマーカが配置され、外部表示部にナビゲーション画像を表示することができ、入力ミスが発生し難く、入力の作業性、信頼性に優れた移動体ナビゲーション装置を提供することができる。
 請求項7に記載の発明によれば、請求項1乃至6の内いずれか1項の効果に加え、以下のような効果を有する。
(1)通信部を通して、移動体の動作状況を示すデータや信号がナビゲーション情報作成制御部に送信されることにより、ナビゲーション情報作成制御部において、移動体の正確な動作状況を確認することができ、移動体に対して誤った動作を指示することのない移動体制御の確実性、動作の安定性に優れた移動体ナビゲーション装置を提供することができる。
実施の形態1の移動体ナビゲーション装置の構成を示す模式図 実施の形態1の移動体ナビゲーション装置のナビゲーション情報作成制御部のブロック構成図 (a)実施の形態1の移動体ナビゲーション装置の画像撮影部で撮影された画像を示す模式図(b)実施の形態1の移動体ナビゲーション装置の行動指示マップの作成過程を示す模式図(c)実施の形態1の移動体ナビゲーション装置のナビゲーション画像を示す模式図 実施の形態1の移動体ナビゲーション装置でナビゲーションされる移動体のブロック構成図 実施の形態1の移動体ナビゲーション装置の操作側の動作を示すフローチャート 実施の形態1の移動体ナビゲーション装置でナビゲーションされる移動体の移動動作を示すフローチャート
 以下、本発明の実施の形態1における移動体ナビゲーション装置について、以下図面を参照しながら説明する。
(実施の形態1)
 図1は実施の形態1の移動体ナビゲーション装置の構成を示す模式図である。
 図1中、1は遠隔のロボット等の各種移動体60に対する行動命令を通信回線を利用して移動体60に送信する実施の形態1の移動体ナビゲーション装置、10は工場等の建物の壁面や天井、移動体60が移動する領域を囲む塀、領域内に配設された建造物等の外壁や屋根などに移動体60と独立して配設され移動体60が移動する移動経路を含む領域の画像を撮影するネットワークカメラやウェブカメラ等を用いた移動体ナビゲーション装置1の画像撮影部、20は画像撮影部10で撮影された画像を通信回線を介して受信し、移動体60の移動すべき移動経路を作成すると共に、移動体60の位置を確認しながら、移動経路に基づいて移動体60に対する行動命令を作成し、その行動命令を通信回線を介して送信する移動体ナビゲーション装置1のナビゲーション情報作成制御部、30は移動体60の移動すべき移動経路や移動体60に行わせる動作を外部からナビゲーション情報作成制御部20に入力するためのマウス,キーボード,タッチパネル等を用いた移動体ナビゲーション装置1の外部入力部、40は画像撮影部10で撮影された画像や移動経路、移動体60の現在位置を確認してナビゲーションするためのナビゲーション画像等を表示するためのモニタ等を用いた移動体ナビゲーション装置1の外部表示部、50は移動体60に搭載されナビゲーション情報作成制御部20から送信される移動体60に対する行動命令の受信及びナビゲーション情報作成制御部20への移動体60の動作状況を示すデータ又や信号の送信を行う通信部である。
 画像撮影部10は、移動体60が移動する領域の画像を撮影することができるものであればよいが、ネットワークカメラやウェブカメラ等が好適に用いられる。
 画像撮影部10は、高所から移動体60が移動する領域全体を見下ろせる位置に配置することにより、1台のネットワークカメラやウェブカメラ等で領域全体を斑無く撮影することができ、使用性に優れる。尚、領域を複数に分割し、複数台のネットワークカメラやウェブカメラ等で撮影してもよい。また、各種カメラ等の画像撮影部10が設置されていない場所や災害等が発生した場所等にビデオカメラ等の画像撮影部10を搭載したヘリコプターや飛行機等を飛翔させて上空から画像を撮影してもよい。
 次に、実施の形態1の移動体ナビゲーション装置の詳細な構成及び動作について説明する。
 図2は実施の形態1の移動体ナビゲーション装置のナビゲーション情報作成制御部のブロック構成図である。
 図2中、21は画像撮影部10で撮影された画像を通信回線を介して受信する画像受信部、22は外部入力部30からの入力に従って移動経路や動作を表すマーカを配置して行動指示マップを作成する行動指示マップ作成部、23は移動体60の移動すべき移動経路を示すマーカを画像上に重ねてナビゲーション画像を作成する画像処理部、24は移動体60とマーカとの重なり位置を検出して移動体60の進行方向位置を確認する進行方向位置確認部24aと移動体60の進行方向位置に対する移動体60の左右方向の位置ずれを確認する位置ずれ確認部24bを有する移動体位置確認部、25は移動体位置確認部24での位置確認結果に基づいて移動体60に対する行動命令を作成する行動命令作成部、26は行動命令作成部25で作成された行動命令を通信回線を介して通信部50に送信する行動命令送信部である。
 画像撮影部10と画像受信部21とをつなぐ通信回線は有線でも無線でもよいが、動作の安定性の面からは有線が好ましい。
 ナビゲーション情報作成制御部20の行動指示マップ作成部22は、外部入力部30からの入力に従って移動経路や動作を表すマーカを配置して行動指示マップを作成する。外部入力部30としては、移動経路や動作を入力できるものであればよく、具体的には、キーボード、マウス、タッチパネルなどが好適に用いられる。キーボードの場合は、移動経路や動作を設定したい画像上の位置(番地など)を直接数値入力などで選択することができる。マウスであれば、移動経路や動作を設定したい画像上上の位置をクリックしたり、カーソルを移動させながらなぞったりして選択することができる。また、タッチパネルの場合、指や専用のペンで外部表示部30の画面に触れるだけで、簡便に所望の位置を選択して移動経路や動作を設定することができ、特別な知識が不要で、複雑な操作を行う必要がなく、誰でも使用することができ、入力作業性に優れる。尚、動作の設定は、予め用意されたメニューの中から動作を選択すればよい。
 画像処理部23は、行動指示マップ作成部22で作成された行動指示マップを画像受信部21で受信した画像上に重ねてナビゲーション画像を作成するが、移動経路や動作については、前述のように使用者がその場で入力する代わりに、ハードディスクのほか、磁気ディスクやCD-R等の様々な媒体を使用して記憶部に記憶させた作成済みの行動指示マップを呼び出して使用するようにしてもよい。ナビゲーション情報作成制御部20が、行動指示マップを記憶する記憶部を備えることにより、繰り返し同じ移動経路で移動や動作を行う場合などに、移動経路等を作成し直す必要がなく、記憶された行動指示マップを読み込むだけで、簡便にナビゲーション画像を作成することができ、使用性に優れる。
 外部表示部40は、主に移動体60の現在位置を確認してナビゲーションするためのナビゲーション画像を表示するが、画像撮影部10で撮影した画像や行動指示マップをそれぞれ単独で表示することもできる。
 行動命令作成部25は、移動経路と移動体60の現在位置から、移動体60の移動方向を求め、直進、右折、左折、方向転換などの移動命令を作成することができる。ただし、移動経路上に予め移動のための動作が割り当てられたマーカが配置されている場合は、そのマーカに対応した移動命令を選択する。また、発音、発声、発光、首振り、腕振り、画像撮影などの移動以外の動作が割り当てられたマーカが配置されている場合も、そのマーカに対応した動作命令を選択する。
 行動命令送信部26は、行動命令作成部25で作成又は選択された移動命令や動作命令を合わせた行動命令を移動体60に搭載される通信部50に送信する。行動命令送信部26と通信部50とをつなぐ通信回線は有線でも無線でもよいが、移動体60の可動性、操作性の面からは無線が好ましい。無線の場合、無線LAN、ブルートゥース、移動体通信などを使用することができる。
 通信部50は、行動命令送信部26から送信される行動命令を受信するが、行動命令は、移動体が認識できるものであればよく、制御信号に限らず、音声や画像でもよい。通信部26は、移動体60の種類に応じて、移動体60への行動命令の出力方法を選択することができる。例えば、移動体60がロボットの場合は、受信した行動命令を移動体60の動作制御部に操作信号として直接出力するものが好適に用いられる。また、移動体60が、人(歩行者)或いは人の運転する車などの場合、行動命令を音声や画像で運転者に指示するものが好適に用いられる。
 また、通信部50からは、移動体60が実際に移動した移動量等の動作量データ、移動体60が移動中若しくは動作中又は停止中のいずれの状態であるかを通知する動作状況通知信号、移動体60の移動若しくは動作が完了したことを通知する動作完了通知信号の内の少なくとも1つのデータ又は信号を送信し、そのデータ又は信号をナビゲーション情報作成制御部20で受信する。これにより、画像受信部21で受信した画像に基づいて、移動体60の細かな動作や複雑な動作を検出できず、行動命令送信部26から送信した各種行動命令が完了したかどうか(或いは正確に行われているかどうか)を把握できない場合や、移動体60の正確な位置や向きを検出できない場合でも、ナビゲーション情報作成制御部20で受信したデータ又は信号の値や種類などに応じて、移動体60の正確な状況(移動中若しくは動作中又は停止中)を把握することができ、移動体60が移動中若しくは動作と判断した時には、行動命令作成部25による新たな行動命令の作成や行動命令送信部26による新たな行動命令の送信を停止し、移動体60が停止中であると判断した時には、行動命令作成部25による新たな行動命令の作成や行動命令送信部26による新たな行動命令の送信を開始するようにして、誤動作の発生を防止できる。
 具体的には、移動体60にエンコーダやジャイロセンサ等を搭載し、移動体60の動作中に実際の移動距離や回転角度などを検出することにより、動作状況を示す情報(データ又は信号)として、動作量データや動作状況通知信号を送信したり、各種動作が完了した(移動体60の動作が停止した)時に、動作完了通知信号を送信したりすればよい。
 図3(a)は実施の形態1の移動体ナビゲーション装置の画像撮影部で撮影された画像を示す模式図であり、図3(b)は実施の形態1の移動体ナビゲーション装置の行動指示マップの作成過程を示す模式図であり、図3(c)は実施の形態1の移動体ナビゲーション装置のナビゲーション画像を示す模式図である。
 図3(a)中、70は移動体ナビゲーション装置1の画像撮影部10で撮影され、画像受信部21で受信されて外部表示部40に表示された画像、70aは通路、71は使用者が外部入力部30から画像70上に移動体60の移動すべき移動経路に沿って入力した線である。使用者は複数の通路70aの中から移動経路を選択することができる。
 図3(b)中、72は外部入力部30からの入力に従って行動指示マップ作成部22が線路状のマーカを配置して作成した移動経路、72aは移動体60の進行方向位置を確認するために移動体60の進行方向と直交方向に表示された複数の進行方向位置確認マーカ、72b,72cは進行方向に対する移動体60の右左の位置ずれを確認するために進行方向位置確認マーカ72aの右左両側に移動体60の進行方向と平行に表示された右左の位置ずれ確認マーカ、73aは移動経路72の曲がり角に配置された右折指示マーカ、73bは移動経路72の最終到達位置に配置された停止指示マーカである。
 図3(c)中、72Aは外部入力部30からの入力に従って図3(b)の移動経路72のスタート地点に発音を指示する発音指示マーカ73cが配置されて完成した行動指示マップ、75は画像処理部23により、行動指示マップ72Aを画像70上に重ねて作成され、外部表示部40に表示されたナビゲーション画像である。
 位置ずれ確認マーカ72b,72cは、進行方向位置確認マーカ72aに対して右左の位置ずれを許容する位置にそれぞれ配置することができる。尚、マーカ72の形状は、本実施の形態に限られるものではなく、十字型,略H字型,略U字型等の記号を連続的に配置したものでもよい。また、位置ずれ確認マーカ72b,72cの間に、これらと平行に進行方向位置確認マーカを1本の直線状に配置してもよい。
 本実施の形態では、移動経路72上に、右折指示マーカ73a、停止指示マーカ73bを配置した。これにより、図2の移動体位置確認部24で移動体60の現在位置を検出すると共に、行動命令作成部25で、その位置に配置された右折指示マーカ73a、停止指示マーカ73bの形状に対応して記憶された行動命令を選択し、行動命令送信部26から移動体60に対して簡便かつ確実に行動命令を送信することができる。移動経路が複雑な場合や複数の移動経路が交差する場合などに有効であり、特に、複数の移動体60を制御する際の誤動作を防止することができる。
 また、移動経路72のスタート地点には発音指示マーカ73cを配置し、移動体60の動作の開始を現場周辺に知らせるようにした。
 発音指示マーカ73c以外にも、発声、発光、首振り、腕振り、画像撮影などの各種の動作が割り当てられたマーカを移動経路72上の任意の位置に適宜、配置できる。
 尚、各種の動作を示すためのマーカとしては、三角や四角以外の矢印、丸等の記号、数字、アルファベット等の文字などを単独又は組合せて使用することができる。
 図2において、移動体位置確認部24は、移動体60と各種のマーカ72a~72c,73a~73cとの重なり位置を検出して移動体60の位置を確認するが、具体的には、移動体60と各種のマーカ72a~72c,73a~73cが重なった位置におけるナビゲーション画像70A上の画素の色相,明度,彩度の変化などを元に移動体60の位置を検出するものが好適に用いられる。
 以下に、移動体の位置検出方法の一例について、詳細に説明する。
 まず、画像撮影部10で撮影された画像70は、画像処理部23によって画素に合わせて格子状(例えば50×50)の画像データに分割される。そして、各々の格子(画素)に対応した番地(例えば、(0,0)~(49,49))には、その格子(画素)の色情報(例えば、輝度や色相、色など)がデータとして格納される。
 次に、画像70の上に同じサイズと同じ画素数で格子状に分割されたマーカ用データを用意する。各々の格子(画素)に対応した全ての番地には、デフォルト値(例えば0)がデータとして格納される。
 外部入力部30からの入力により選択された画素に対応する位置には、行動指示マップ作成部22によって各種のマーカ72a~72c,73a~73cが配置されると共に、その画素に対応したマーカ用データの番地には、各種のマーカ72a~72c,73a~73cが設定(配置)されたことを示すフラグ値(例えば1)が新たなデータとして格納される。
 マーカ用データ上でフラグ値が格納された番地と同じ番地の画像データを移動体60との重なりの判別に利用する。よって、移動体位置確認部24は、各種のマーカ72a~72c,73a~73cが配置された位置(番地)に対応した画素における画像データの情報の変化のみを読み取ればよく、移動体位置確認部24での処理を高速化することができる。
 各種のマーカ72a~72c,73a~73c上に移動体60が存在せず、背景の画像(色)が変化しない場合、各種のマーカ72a~72c,73a~73c上のそれぞれの位置(番地)で、画像データに格納された色情報に変化は無い。
 しかし、移動体60が各種のマーカ72a~72c,73a~73c上のある位置(番地)に来た時、その位置(番地)に対応した画素の色(輝度、色相或いは明度や彩度など)が変化する。それに応じて画像データの情報も変化するので、移動体60の位置を検出することができる。
 このように、各種のマーカ72a~72c,73a~73cによって、色などの画像データを監視する番地を決め、その番地の画像データに変化があったとき、各種のマーカ72a~72c,73a~73cと移動体60が接触した(重なった)と判断する。
 尚、画像データに格納するデータは、輝度、色相或いは明度や彩度などの中から適宜、選択することができ、必要に応じてこれらを組合せることにより、最適な判断を行うことができる。
 また、移動体位置確認部24に移動体60の色(色相,明度,彩度)を予め認識、記憶させるようにすれば、各種のマーカ72a~72c,73a~73cの位置で画素の色(色相,明度,彩度)が変化した時に、移動体60が重なったことによるものか、移動体60以外のものが存在又は通過したことによるものかを正確に判別することができる。色の変化を検出し易いように、周囲の明るさ、背景の色などに応じて、適宜、移動体60の色を選択することが好ましい。また、移動体60の天井面や頭部を検出し易い色に着色したり、移動体60の天井面や頭部に検出し易い色に着色したプレートや突起などを検出体として配置したりしてもよい。
 次に、図3(c)で示したナビゲーション画像75に従って、移動体60としてロボットをナビゲーションする場合について説明する。
 図4は実施の形態1の移動体ナビゲーション装置でナビゲーションされる移動体のブロック構成図である。
 図4中、61は通信部50が受信した行動命令に従って移動体(ロボット)60を移動させるための移動体制御部、61aは行動命令に基づいて移動体60の動作を判別する移動体制御部61のロボット動作判別部、61bはロボット動作判別部61aで判別された動作に対応した移動体60の動作指令を作成し、移動体60の駆動制御部62に対して出力するロボット動作作成部、62は左右のモータードライバー62a,62bを有する移動体60の駆動制御部、63は左右のモータードライバー62a,62bで駆動、制御される左右のモーター63a,63bを有する移動アクチュエータ動作部、64は左右のモーター63a,63bによって動作し、移動体60を移動させる左右の車輪64a,64bを有する移動アクチュエータである。
 次に、移動体ナビゲーション装置1の操作側の動作について説明する。
 図5は実施の形態1の移動体ナビゲーション装置の操作側の動作を示すフローチャートである。
 使用者が、移動体ナビゲーション装置1の使用を開始すると、画像撮影部10により移動体60が移動する領域の画像70が撮影され、画像受信部21に送信される(S1)。
 画像処理部23では、まず初めに、外部入力部30からの入力に従って行動指示マップ作成部22で作成された行動指示マップ72Aと画像受信部21で受信した画像70を重ねてナビゲーション画像75を作成する。(S2)
 そして、移動体位置確認部24の進行方向位置確認部24aにより現在位置を取得する(S3)。
 また、移動体位置確認部24で移動体60の現在位置を確認した時に、その位置に、動作を指示するマーカ(例えば、右折指示マーカ73a、停止指示マーカ73b、発音指示マーカ73c)が存在しているかどうかを判別する(S4)。
 動作を指示するマーカが配置されていると判断した場合は、各々のマーカに対応した動作命令を行動命令送信部26から移動体60に搭載された通信部50に送信する(S5)。
 ステップ4において、動作を指示するマーカが配置されていないと判断した場合、及びステップ5で送信した動作命令に従って移動体60の動作が完了した時に、移動体位置確認部24は、移動体60の現在位置が移動経路72で指示された最終到達位置か否かを判定する(S6)。
 移動体60の現在位置が最終到達位置である場合、行動命令送信部26から停止信号を送信してナビゲーションを終了する(S7)。
 ステップ6において、移動体60の現在位置が最終到達位置でない場合、移動体60が進行方向右側の位置ずれ確認マーカ72bに掛かっているか否かを判定する(S8)。
 移動体60が右の位置ずれ確認マーカ72bに掛かっていれば、行動命令作成部25は左方向行動命令を作成する(S9)。
 ステップ8において、移動体60が位置ずれ確認マーカ72bに掛かっていなければ、次に、移動体60が進行方向左側の位置ずれ確認マーカ72cに掛かっているか否かを判定する(S10)。
 移動体60が左の位置ずれ確認マーカ72cに掛かっていれば、行動命令作成部25は右方向行動命令を作成する(S11)。
 ステップ10において、移動体60が位置ずれ確認マーカ72cに掛かっていなければ、行動命令作成部25は直進命令を作成する(S12)。
 ステップ9,11,12で作成された行動命令は、行動命令送信部26から移動体60に搭載された通信部50に送信される(S13)。
 所定時間経過後に(移動体60の移動動作に合わせて)、ステップ1に戻り、画像受信部21で新たな画像70を受信し、ステップ2でナビゲーション画像75を更新しながら、移動体60が最終到達位置に移動するまで上記の動作を繰り返す。
 次に、移動体ナビゲーション装置1でナビゲーションされる移動体60の移動動作について説明する。
 図6は実施の形態1の移動体ナビゲーション装置でナビゲーションされる移動体の移動動作を示すフローチャートである。
 移動体60の移動体制御部61は、通信部50が行動命令送信部26からの信号を受信したか否かを判定する(S21)。
 信号を受信していない場合、移動体制御部61は駆動制御部62に対して移動アクチュエータ動作部を停止させる停止信号を送信してステップ21に戻る(S22)。
 ステップ21において、通信部50が行動命令送信部26から信号を受信した場合、ロボット動作判別部61aはその信号が停止信号であるか否かを判定する(S23)。
 受信した信号がステップ5の停止信号であれば、移動体制御部61は駆動制御部62に対して移動アクチュエータ動作部を停止させる停止信号を送信して移動動作を終了する(S24)。
 ステップ23において、ロボット動作判別部61aは行動命令送信部26から受信した行動命令信号がステップ10の直進命令であるか否かを判定する(S25)。
 行動命令信号が直進命令であった場合、ロボット動作作成部61bで直進動作のための動作指令を作成する(S26)。
 ステップ25において、行動命令信号が直進命令でなかった場合、行動命令信号がステップ9の右方向移動命令であるか否かを判定する(S27)。
 行動命令信号が右方向移動命令であった場合、ロボット動作作成部61bで右方向移動のための動作指令を作成する(S28)。
 ステップ27において、行動命令信号が右方向移動命令でなかった場合、ロボット動作作成部61bで左方向移動のための動作指令を作成する(S29)。
 ステップ26,28,29で作成された動作指令は、駆動制御部62に出力され、それに従って移動アクチュエータ動作部63が駆動、制御される(S30)。直進動作の動作指令では、移動アクチュエータ動作部63の左右のモーター63a,63bが同じ量だけ回転するように左右のモータードライバー62a,62bで制御される。また、右方向移動の動作指令では、移動アクチュエータ動作部63の左のモーター63aが右のモーター63bよりも多く回転するように左右のモータードライバー62a,62bで制御され、左方向移動の動作指令では、移動アクチュエータ動作部63の右のモーター63bが左のモーター63aよりも多く回転するように左右のモータードライバー62a,62bで制御される。
 本実施の形態では、移動体60を移動させる移動手段として、左右の車輪64a,64bを有する移動アクチュエータ64を説明したが、移動手段は移動体60を移動させることができればよく、車輪64a,64bの代わりにクローラ等を用いてもよい。
 本実施の形態では、移動体60がロボットである場合について説明したが、移動体60はこれに限定されるものではなく、人(歩行者)或いは人の運転する車などでもよい。その場合、行動命令を音声や画像で歩行者や運転者に指示することができる。例えば、移動体60が車の場合、駐車場などにおいて、空きスペースまでスムーズに案内することや他の車が接近していることを通知して接触事故を防止すること等が可能であり、省力性、安全性に優れる。
 以上のように実施の形態1における移動体ナビゲーション装置によれば、以下の作用を有する。
(1)移動体と独立して配設され移動体が移動する移動経路を含む領域の画像を撮影する画像撮影部を有するので、画像撮影部で撮影される画像によって移動経路の状況や移動体の位置などを遠隔から確認することができ、信頼性に優れる。
(2)ナビゲーション情報作成制御部が、画像撮影部で撮影された画像を通信回線を介して受信する画像受信部と、移動体の移動すべき移動経路や移動体に行わせる動作を示すマーカを画像上に重ねてナビゲーション画像を作成する画像処理部と、を有するので、画像受信部で受信した画像に基づいて、画像処理部で作成されるナビゲーション画像を確認しながら最適な移動経路を選択、設定することや選択した場所における動作を指定することができ、操作性に優れる。
(3)ナビゲーション情報作成制御部が、移動体とマーカとの重なり位置を検出して移動体の位置を確認する移動体位置確認部と、移動経路上に配置されるマーカに対応した行動命令を作成する行動命令作成部と、を有するので、遠隔から簡便かつ確実に移動体の位置を確認して移動体に対する行動命令を作成することができ、行動指令の簡便性、確実性に優れる。
(4)ナビゲーション情報作成制御部が、行動命令作成部で作成された行動命令を通信回線を介して送信する行動命令送信部を有するので、遠隔にある移動体に対して確実に行動命令を送信して、移動体を案内しつつ所望の動作を行わせることができ、操作の確実性、汎用性に優れる。
(5)ナビゲーション画像を表示する外部表示部を有することにより、移動経路の状況や移動体の位置などを常に確認することができるので、必要に応じて、移動経路や動作の変更、移動体の非常停止(一旦停止)等を行わせることができ、案内操作の信頼性に優れる。
(6)移動体に搭載され、ナビゲーション情報作成制御部の行動命令送信部から送信される行動命令を受信する通信部を有するので、通信部を搭載した所望のロボット等の移動体に行動命令を送信して移動経路や動作を指示することができ、汎用性に優れる。
(7)ナビゲーション情報作成制御部の移動体位置確認部が、ナビゲーション画像上で移動体とマーカとの重なり位置を検出して移動体の位置を確認するので、実際の移動経路上に誘導路を敷設したり、移動体に誘導路を検出するためのセンサを取り付けたりする必要がなく、設置自在性に優れ、既存のロボット等の移動体を有効に利用してナビゲーションシステムを構築することができ、量産性、汎用性に優れる。
(8)移動体の移動経路や動作を入力するための外部入力部を備えることにより、その場で外部入力部から簡便に移動経路や動作を入力することや変更することができ、移動経路の作成、修正、変更や動作の選択、設定、変更などの入力の作業性、移動経路や動作の設定自在性に優れる。
(9)ナビゲーション情報作成制御部が、外部入力部からの入力に従って移動体の移動経路や動作を示すマーカを配置して行動指示マップを作成する行動指示マップ作成部を備えることにより、外部入力部から入力された移動経路や動作をマーカで表示することができ、移動経路や動作の設定、確認が容易で使用性に優れる。
(10)ナビゲーション情報作成制御部の移動体位置確認部が、ナビゲーション画像上で移動体とマーカが重なった時のマーカ上の画素の色相,明度,彩度の少なくとも1つ以上の変化により移動体の位置を検出するので、移動体とマーカの重なりの有無に基づいて移動体の位置を確実に検出することができ、誤動作が発生し難く、使用性に優れる。
(11)マーカが、移動体の進行方向位置を確認するための進行方向位置確認マーカと、進行方向に対する移動体の左右方向の位置ずれを確認するための位置ずれ確認マーカと、を有し、ナビゲーション情報作成制御部の移動体位置確認部が、移動体と進行方向位置確認マーカとの重なり位置を検出して移動体の進行方向位置を確認する進行方向位置確認部と、移動体と位置ずれ確認マーカとの重なりの有無を検出して移動体の進行方向位置に対する移動体の左右方向の位置ずれを確認する位置ずれ確認部と、を備えることにより、移動体の進行方向位置だけでなく、左右方向の位置ずれも確認することができ、予め設定した移動経路に従って確実に移動体を移動させることができ、動作の信頼性に優れる。
(12)使用者が、外部入力部から画像上に移動体の移動すべき移動経路に沿って線を入力することにより、ナビゲーション情報作成制御部の行動指示マップ作成部が、移動経路に沿って進行方向位置確認マーカと位置ずれ確認マーカとを有するマーカが配置された行動指示マップを作成し、ナビゲーション情報作成制御部の画像処理部が、画像上に行動指示マップを重ねたナビゲーション画像を作成し、そのナビゲーション画像が外部表示部に表示されるので、使用者は、外部表示部を確認しながら、簡便かつ確実に移動経路や動作を入力してナビゲーション画像を作成することができ、入力ミスが発生し難く、入力の作業性、信頼性に優れる。
(13)通信部を通して、移動体の移動量、回転量、旋回量のいずれか1以上の値を有する動作量データ、移動体が移動中若しくは動作中又は停止中のいずれかであることを通知する動作状況通知信号、移動体の移動若しくは動作が完了したことを通知する動作完了通知信号の内の少なくとも1つを移動体の動作状況を示すデータ又は信号としてナビゲーション情報作成制御部に送信することにより、ナビゲーション情報作成制御部において、移動体の正確な動作状況を確認することができ、移動体に対して誤った動作を指示することがなく、移動体の誤動作を防止でき、移動体制御の確実性、信頼性に優れる。
(14)移動体ナビゲーション装置を用いることにより、移動体を操作(案内)するための複雑なプログラムを作成したり、移動体に移動経路等を記憶させたりする必要がなく、自律走行できない既存の各種ロボット等を誰でも簡便にナビゲーションすることができ、物品の搬送、巡回、警備、災害救助などに活用することができる。また、デパートや展示会場などで来場者の道案内を行ったり、駐車場などでの車の誘導を行ったりすることができ、汎用性に優れる。
 本発明は、部品点数が少ない簡素な構成でロボット等の各種移動体を指定した経路に沿って確実に案内することができ、複雑な機構や操作が不要で、誰でも簡単に使用することができ、経路の作成や変更が容易で作業性、メンテナンス性、汎用性に優れ、複雑な制御が不要で、動作の安定性、確実性に優れ、既存のロボット等とも組合せて利用することができる汎用性、量産性に優れた移動体ナビゲーション装置を広く普及させて各種移動体を遠隔から確実かつ効率的に案内することができ、工場内の無人搬送台車、デパートその他の建造物等のフロアの巡回ロボットや警備ロボット、駐車場内の車などのナビゲーションに好適に利用して省力化を図ることができる。
1 移動体ナビゲーション装置
10 画像撮影部
20 ナビゲーション情報作成制御部
21 画像受信部
22 行動指示マップ作成部
23 画像処理部
24 移動体位置確認部
24a 進行方向位置確認部
24b 位置ずれ確認部
25 行動命令作成部
26 行動命令送信部
30 外部入力部
40 外部表示部
50 通信部
60 移動体
61 移動体制御部
61a ロボット動作判別部
61b ロボット動作作成部
62 駆動制御部
62a,62b モータードライバー
63 移動アクチュエータ動作部
63a,63b モーター
64 移動アクチュエータ
64a,64b 車輪
70 画像
70a 通路
71 線
72 移動経路
72A 行動指示マップ
72a 進行方向位置確認マーカ
72b,72c 位置ずれ確認マーカ
73a 右折指示マーカ
73b 停止指示マーカ
73c 発音指示マーカ
75 ナビゲーション画像

Claims (7)

  1. 移動体に対する行動命令を通信回線を利用して前記移動体に送信する移動体ナビゲーション装置であって、
    (a)前記移動体と独立して配設され前記移動体が移動する移動経路を含む領域の画像を撮影する画像撮影部と、
    (b)前記画像撮影部で撮影された前記画像を通信回線を介して受信する画像受信部と、前記移動体の移動経路や動作を示すマーカを前記画像上に重ねてナビゲーション画像を作成する画像処理部と、前記移動体と前記マーカとの重なり位置を検出して前記移動体の位置を確認する移動体位置確認部と、前記移動経路上に配置されるマーカに対応した行動命令を作成する行動命令作成部と、前記行動命令作成部で作成された前記行動命令を通信回線を介して送信する行動命令送信部と、を有するナビゲーション情報作成制御部と、
    (c)前記ナビゲーション画像を表示する外部表示部と、
    (d)前記移動体に搭載され、前記ナビゲーション情報作成制御部の前記行動命令送信部から送信される前記行動命令を受信する通信部と、
    を備えたことを特徴とする移動体ナビゲーション装置。
  2. 前記移動体の移動経路や動作を入力するための外部入力部を備え、前記ナビゲーション情報作成制御部が、前記外部入力部からの入力に従って前記移動体の移動経路や動作を示す前記マーカを配置して行動指示マップを作成する行動指示マップ作成部を備えたことを特徴とする請求項1に記載の移動体ナビゲーション装置。
  3. 前記ナビゲーション情報作成制御部が、前記マーカで示された前記行動指示マップを記憶する記憶部を備えたことを特徴とする請求項1又は2に記載の移動体ナビゲーション装置。
  4. 前記ナビゲーション情報作成制御部の前記移動体位置確認部が、前記ナビゲーション画像上で前記移動体と前記マーカが重なった時の前記マーカの位置に対応する画素の色相,明度,彩度の少なくとも1つ以上の変化により前記移動体の位置を検出することを特徴とする請求項1乃至3の内いずれか1項に記載の移動体ナビゲーション装置。
  5. 前記マーカが、前記移動体の進行方向位置を確認するための進行方向位置確認マーカと、進行方向に対する前記移動体の左右方向の位置ずれを確認するための位置ずれ確認マーカと、を有し、前記ナビゲーション情報作成制御部の前記移動体位置確認部が、前記移動体と前記進行方向位置確認マーカとの重なり位置を検出して前記移動体の進行方向位置を確認する進行方向位置確認部と、前記移動体と前記位置ずれ確認マーカとの重なりの有無を検出して前記移動体の進行方向位置に対する前記移動体の左右方向の位置ずれを確認する位置ずれ確認部と、を備えたことを特徴とする請求項1乃至4の内いずれか1項に記載の移動体ナビゲーション装置。
  6. 使用者が、前記外部入力部から前記画像上に前記移動体の移動すべき前記移動経路に沿って線を入力することにより、前記ナビゲーション情報作成制御部の前記行動指示マップ作成部が、前記移動経路に沿って前記進行方向位置確認マーカと前記位置ずれ確認マーカとを有する前記マーカが配置された前記行動指示マップを作成し、前記ナビゲーション情報作成制御部の前記画像処理部が、前記画像上に前記行動指示マップを重ねた前記ナビゲーション画像を作成し、前記ナビゲーション画像が前記外部表示部に表示されることを特徴とする請求項5に記載の移動体ナビゲーション装置。
  7. 前記通信部を通して、前記移動体の移動量、回転量、旋回量のいずれか1以上の値を有する動作量データ、前記移動体が移動中若しくは動作中又は停止中のいずれかであることを通知する動作状況通知信号、前記移動体の移動若しくは動作が完了したことを通知する動作完了通知信号の内の少なくとも1つを前記ナビゲーション情報作成制御部に送信することを特徴とする請求項1乃至6の内いずれか1項に記載の移動体ナビゲーション装置。
PCT/JP2009/005426 2008-10-16 2009-10-16 移動体ナビゲーション装置 WO2010044277A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010533839A JPWO2010044277A1 (ja) 2008-10-16 2009-10-16 移動体ナビゲーション装置

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2008-267725 2008-10-16
JP2008267725 2008-10-16

Publications (1)

Publication Number Publication Date
WO2010044277A1 true WO2010044277A1 (ja) 2010-04-22

Family

ID=42106447

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2009/005426 WO2010044277A1 (ja) 2008-10-16 2009-10-16 移動体ナビゲーション装置

Country Status (2)

Country Link
JP (1) JPWO2010044277A1 (ja)
WO (1) WO2010044277A1 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016067467A1 (ja) * 2014-10-31 2016-05-06 三菱電機株式会社 ロボット制御装置、ロボットシステム、ロボット制御方法及びプログラム
JP2017016395A (ja) * 2015-07-01 2017-01-19 株式会社Ihiエアロスペース 経路生成方法とシステム
EP3336642A4 (en) * 2015-08-14 2019-07-31 Sony Corporation MOVEMENT BODY, INFORMATION PROCESSING DEVICE, MOTOR BODY SYSTEM, INFORMATION PROCESSING METHOD AND INFORMATION PROCESSING PROGRAM
CN113467447A (zh) * 2021-06-24 2021-10-01 武汉虹信技术服务有限责任公司 一种基于巡逻机器人的非法人员入侵监测系统及方法
JP2022500725A (ja) * 2018-09-27 2022-01-04 セールスフォース ドット コム インコーポレイティッド 自己意識的な視覚的−テキスト的共グラウンディング・ナビゲーションエージェント

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106610666A (zh) * 2015-10-22 2017-05-03 沈阳新松机器人自动化股份有限公司 一种基于双目视觉的助理机器人及其控制方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6162905A (ja) * 1984-09-04 1986-03-31 Komatsu Ltd 無人車両の自動運転方法
JPS6455606A (en) * 1987-08-27 1989-03-02 Nissan Motor Running controller for automatically guided vehicle
JPH06214639A (ja) * 1993-01-18 1994-08-05 Fujita Corp 移動体の走行制御装置
JPH0981237A (ja) * 1995-09-18 1997-03-28 Matsushita Electric Ind Co Ltd 移動体制御装置
JP2008090827A (ja) * 2006-09-29 2008-04-17 Samsung Electronics Co Ltd 実写基盤移動機器の制御方法、装置および媒体

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6162905A (ja) * 1984-09-04 1986-03-31 Komatsu Ltd 無人車両の自動運転方法
JPS6455606A (en) * 1987-08-27 1989-03-02 Nissan Motor Running controller for automatically guided vehicle
JPH06214639A (ja) * 1993-01-18 1994-08-05 Fujita Corp 移動体の走行制御装置
JPH0981237A (ja) * 1995-09-18 1997-03-28 Matsushita Electric Ind Co Ltd 移動体制御装置
JP2008090827A (ja) * 2006-09-29 2008-04-17 Samsung Electronics Co Ltd 実写基盤移動機器の制御方法、装置および媒体

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016067467A1 (ja) * 2014-10-31 2016-05-06 三菱電機株式会社 ロボット制御装置、ロボットシステム、ロボット制御方法及びプログラム
JPWO2016067467A1 (ja) * 2014-10-31 2017-04-27 三菱電機株式会社 ロボット制御装置、ロボットシステム、ロボット制御方法及びプログラム
JP2017016395A (ja) * 2015-07-01 2017-01-19 株式会社Ihiエアロスペース 経路生成方法とシステム
EP3336642A4 (en) * 2015-08-14 2019-07-31 Sony Corporation MOVEMENT BODY, INFORMATION PROCESSING DEVICE, MOTOR BODY SYSTEM, INFORMATION PROCESSING METHOD AND INFORMATION PROCESSING PROGRAM
US10761533B2 (en) 2015-08-14 2020-09-01 Sony Corporation Mobile body, information processor, mobile body system, information processing method, and information processing program
US11409294B2 (en) 2015-08-14 2022-08-09 Sony Corporation Mobile body, information processor, mobile body system, information processing method, and information processing program
US11886192B2 (en) 2015-08-14 2024-01-30 Sony Group Corporation Mobile body, information processor, mobile body system, information processing method, and information processing program
JP2022500725A (ja) * 2018-09-27 2022-01-04 セールスフォース ドット コム インコーポレイティッド 自己意識的な視覚的−テキスト的共グラウンディング・ナビゲーションエージェント
JP7331084B2 (ja) 2018-09-27 2023-08-22 セールスフォース インコーポレイテッド 自己意識的な視覚的-テキスト的共グラウンディング・ナビゲーションエージェント
CN113467447A (zh) * 2021-06-24 2021-10-01 武汉虹信技术服务有限责任公司 一种基于巡逻机器人的非法人员入侵监测系统及方法

Also Published As

Publication number Publication date
JPWO2010044277A1 (ja) 2012-03-15

Similar Documents

Publication Publication Date Title
JP6870270B2 (ja) 無人運転システムの遠隔操作方法と遠隔操作装置
US10596705B2 (en) Mobile robot with collision anticipation
CN109154827B (zh) 机器人车辆的定位
WO2010044277A1 (ja) 移動体ナビゲーション装置
KR102148592B1 (ko) 네거티브 매핑을 이용한 국부화
JP5498178B2 (ja) 無人移動体の制御方法及び無人移動体
JP5187758B2 (ja) 無人移動体システム
JP6083520B2 (ja) ロボット誘導方法と装置
JP5366711B2 (ja) 半自律型車両の遠隔操縦システム
JP2005242409A (ja) 自律移動ロボットシステム
EP3667450B1 (en) Mobile body and method for control of mobile body
CN107097782A (zh) 用于求取车辆数据的方法和系统与相应的车辆、停车场
JP2009251922A (ja) 自動運転車および自動運転車運行システム
JP5947644B2 (ja) 無人移動体システム
JP5187757B2 (ja) 無人移動体システム
JP2019219734A (ja) 自律移動体、および自律移動体の制御プログラム
JP2018092393A (ja) 自動搬送車コントロールシステム
JP2019219733A (ja) 自律移動体、および自律移動体の制御プログラム
JP2020132431A (ja) 産業車両用走行支援装置
CN115698889A (zh) 自主移动机器人联动系统以及自主移动机器人
JP2006242978A (ja) 移動経路地図作成方法
JP2010176203A (ja) 自律移動ロボットシステム
JP4798493B2 (ja) 車両及び車両の表示装置
US11468770B2 (en) Travel control apparatus, travel control method, and computer program
WO2020170747A1 (ja) 産業車両用走行支援装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09820455

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2010533839

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 09820455

Country of ref document: EP

Kind code of ref document: A1