WO2018158933A1 - 表示制御装置、表示制御方法及び記憶媒体 - Google Patents

表示制御装置、表示制御方法及び記憶媒体 Download PDF

Info

Publication number
WO2018158933A1
WO2018158933A1 PCT/JP2017/008449 JP2017008449W WO2018158933A1 WO 2018158933 A1 WO2018158933 A1 WO 2018158933A1 JP 2017008449 W JP2017008449 W JP 2017008449W WO 2018158933 A1 WO2018158933 A1 WO 2018158933A1
Authority
WO
WIPO (PCT)
Prior art keywords
work machine
automatic work
display
image
work
Prior art date
Application number
PCT/JP2017/008449
Other languages
English (en)
French (fr)
Inventor
大 百澤
Original Assignee
本田技研工業株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 本田技研工業株式会社 filed Critical 本田技研工業株式会社
Priority to JP2019502406A priority Critical patent/JP6815479B2/ja
Priority to EP17899019.8A priority patent/EP3591513A4/en
Priority to PCT/JP2017/008449 priority patent/WO2018158933A1/ja
Publication of WO2018158933A1 publication Critical patent/WO2018158933A1/ja
Priority to US16/553,629 priority patent/US11231708B2/en

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0044Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement by providing the operator with a computer generated representation of the environment of the vehicle, e.g. virtual reality, maps
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • AHUMAN NECESSITIES
    • A01AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
    • A01DHARVESTING; MOWING
    • A01D34/00Mowers; Mowing apparatus of harvesters
    • A01D34/006Control or measuring arrangements
    • A01D34/008Control or measuring arrangements for automated or remotely controlled operation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/008Registering or indicating the working of vehicles communicating information to a remotely located station
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30Services specially adapted for particular environments, situations or purposes
    • H04W4/40Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • AHUMAN NECESSITIES
    • A01AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
    • A01DHARVESTING; MOWING
    • A01D2101/00Lawn-mowers
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/16Use of wireless transmission of display information
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00Specific applications
    • G09G2380/06Remotely controlled electronic signs other than labels

Definitions

  • the present invention relates to a display control device, a display control method, and a storage medium.
  • Patent Document 1 describes that the user can confirm the work area map generated by the automatic work machine with an external device.
  • Patent Document 1 it is possible to confirm a work area map generated by an automatic work machine.
  • One aspect of the present invention allows the user to intuitively understand the state of the automated work machine.
  • a storage medium storing a program, wherein the program, when executed by one or more processors, instructs the one or more processors about a state related to the automatic work machine.
  • a storage medium including an instruction to execute acquiring and displaying an image representing the automatic work machine on a display device in a size according to the state.
  • the user can intuitively understand the state related to the automatic work machine.
  • FIG. 6 is a flow diagram for explaining an example of the operation of the information processing apparatus according to the embodiment of the present invention.
  • FIG. 6 is a view for explaining an example of a display screen of the information processing apparatus according to the embodiment of the present invention.
  • FIG. 6 is a view for explaining an example of a display screen of the information processing apparatus according to the embodiment of the present invention.
  • FIG. 6 is a view for explaining an example of a display screen of the information processing apparatus according to the embodiment of the present invention.
  • FIG. 6 is a view for explaining an example of a display screen of the information processing apparatus according to the embodiment of the present invention.
  • FIG. 6 is a view for explaining an example of a display screen of the information processing apparatus according to the embodiment of the present invention.
  • FIG. 6 is a view for explaining an example of a display screen of the information processing apparatus according to the embodiment of the present invention.
  • movement of the working machine which concerns on embodiment of this invention.
  • An automatic work machine is a device that performs work without the need for real-time instructions from the user.
  • the automatic work machine may work according to a predetermined procedure.
  • the automatic work machine may be self-propelled.
  • Such automatic work machines may also be called unmanned work vehicles. Below, as an example of an unmanned working vehicle, a mobile lawn mower performing a mowing operation will be described.
  • FIG. 1 is a side view schematically showing the configuration of an automatic work machine (hereinafter simply referred to as a work machine) according to some embodiments
  • FIG. 2 is a plan view.
  • the straight direction (length direction) of the working machine in plan view and the vehicle width direction perpendicular to the straight direction are defined as the longitudinal direction and the lateral direction, respectively, and the height direction of the working machine is defined as the vertical direction
  • the straight direction (length direction) of the working machine in plan view and the vehicle width direction perpendicular to the straight direction are defined as the longitudinal direction and the lateral direction, respectively
  • the height direction of the working machine is defined as the vertical direction
  • the configuration of each part will be described according to this definition.
  • the work machine 1 includes a vehicle body 10 having a chassis 11 and a frame 12, a pair of left and right front wheels 13 and a pair of left and right rear wheels 14 that support the vehicle body 10 movably from the ground contact surface GR.
  • the front wheel 13 is rotatably attached to the front side of the chassis 11 via the stay 11 a.
  • the rear wheel 14 has a diameter larger than that of the front wheel 13 and is rotatably attached directly to the rear side of the chassis 11.
  • An input device 25 and a display device 26 are mounted on the top surface of the frame 12.
  • the work machine 1 has a weight and dimensions which can be transported by the user.
  • the overall length (length in the front-rear direction) of the work machine 1 is about 500 mm
  • the overall width is about 300 mm
  • the height is about 300 mm.
  • the input device 25 is a device for receiving an input operation by the user, and includes a ten key, a cursor key, a switch, and the like.
  • the switches include, for example, a main switch that instructs operation start of the work machine 1 and an emergency stop switch that instructs an emergency stop.
  • the display device 26 is a device for providing the user with various information. The user can input various commands via the input device 25 (ten-key, cursor key) while looking at the information displayed on the display device 26.
  • the input device 25 and the display device 26 can also be configured by a touch screen.
  • a working device 16 In the internal space 15 of the working machine 1 surrounded by the chassis 11 and the frame 12, a working device 16, a working motor 17 for driving the working machine, a traveling motor 18 for driving the rear wheel, and a charging unit 19; A battery 20, a control device 23, and a communication device 24 are disposed.
  • the working device 16 has a rotating body and a mowing blade attached to the rotating body, and has a substantially disk shape as a whole.
  • the work device 16 is disposed with the rotation axis at the center of the rotating body facing in the vertical direction, and the height adjustment mechanism 21 is configured to be able to adjust the height of the blade from the ground plane GR.
  • the height adjustment mechanism 21 includes, for example, a screw operable by the user.
  • the work motor 17 is constituted by a traveling motor disposed above the work device 16, and an output shaft of the work motor 17 is connected to the rotation shaft of the rotating body to rotationally drive the blade integrally with the rotating body.
  • the traveling motor 18 is configured by a pair of traveling motors 18L and 18R disposed on the left and right inside of the left and right rear wheels 14.
  • the output shafts of the traveling motors 18L and 18R are respectively connected to the rotation axes of the left and right rear wheels 14, and the traveling motors 18L and 18R rotationally drive the left and right rear wheels 14 independently of each other. That is, the working machine 1 is configured such that the front wheel 13 is a driven wheel and the rear wheel 14 is a driving wheel, and the travel motors 18L and 18R forward and reverse (rotation in the forward direction) or reverse rotation of the left and right rear wheels 14 independently of each other. Make it rotate in the reverse direction.
  • the work implement 1 can turn in any direction by causing a speed difference in the rotation of the left and right rear wheels 14.
  • the work machine 1 when the rotational speed of the right rear wheel 14 is faster than the rotational speed of the left rear wheel 14 when the left and right rear wheels 14 are respectively rotated forward, the work machine 1 is turned left at a swing angle corresponding to the speed difference. Turn towards.
  • the rotational speed of the left rear wheel 14 is faster than the rotational speed of the right rear wheel 14, the work implement 1 turns to the right at a turning angle corresponding to the speed difference.
  • the work implement 1 turns on the spot.
  • the charging unit 19 includes an AC / DC converter, and is connected to a terminal 22 provided at the front end of the frame 12 through a wire, and is connected to the battery 20 through a wire.
  • the terminal 22 has a contact point 22a, and the battery 20 can be charged by connecting the terminal 22 to the charging station 3 (see FIG. 4) via the contact point 22a.
  • the battery 20 is connected to the working motor 17 and the traveling motor 18 via wiring, and the working motor 17 and the traveling motor 18 are driven by the power supplied from the battery 20 via the driver. Further, power is also supplied from the battery 20 to the control device 23, the communication device 24, the input device 25 and the display device 26.
  • a pair of magnetic sensors 51 are disposed at the front of the work machine 1 with a distance in the left-right direction. More specifically, as shown in FIG. 2, a pair of magnetic sensors 51L, 51R are disposed symmetrically with respect to a center line CL passing through the center of the work machine 1 in the vehicle width direction and going straight ahead. Ru.
  • the work machine 1 includes, in addition to the magnetic sensor 51, a Yaw sensor, a G sensor, an azimuth sensor, a GPS sensor, a contact sensor, a pair of left and right wheel speed sensors, and a voltage sensor.
  • the magnetic sensor outputs a signal indicating the magnitude of the magnetic field (magnetic field strength).
  • the yaw sensor is an angular velocity sensor that outputs a signal indicating an angular velocity (yaw rate) generated around an axis (Z axis) in the height direction of the work machine 1.
  • the control device 23 can detect the turning angle around the Z axis of the working machine 1 by the signal from the yaw sensor.
  • the G sensor outputs a signal indicating acceleration in the direction of three orthogonal axes (X axis, Y axis, Z axis) acting on the work machine 1.
  • the orientation sensor is a two-axis or three-axis geomagnetic sensor that outputs a signal according to the geomagnetism.
  • the control device 23 can detect the direction of the work implement 1 with respect to a predetermined direction (for example, north) by the signal from the direction sensor.
  • the GPS sensor receives radio waves from GPS satellites and detects the current position (latitude, longitude) of the work implement 1.
  • the contact sensor outputs an on signal when the work machine 1 approaches or contacts an obstacle or the like.
  • the wheel speed sensors respectively output signals indicating the wheel speeds of the left and right rear wheels 14.
  • the control device 23 can calculate the travel distance of the work machine 1 based on the signal from the wheel speed sensor.
  • the voltage sensor detects the remaining voltage of the battery 20.
  • the communication device 24 is a device for communicating with a device external to the work machine 1 and includes, for example, a transmission / reception antenna and a signal processing circuit that processes a signal transmitted / received via the transmission / reception antenna.
  • the communication device 24 may conform to a near field communication technology such as a wireless LAN or Bluetooth, or may conform to a mobile communication technology such as 3G or LTE.
  • the control device 23 is a device that controls the overall operation of the work machine 1 and is, for example, a microcomputer such as an electronic control unit (ECU).
  • the work machine 1 can communicate with an information processing apparatus 30 located outside the work machine 1.
  • a configuration example of the control device 23 and the information processing device 30 will be described with reference to FIG. In FIG. 3, some components of the work machine 1 are omitted.
  • the control device 23 includes a processing device 27 and a storage device 28.
  • the processing device 27 is a device that executes the processing performed by the control device 23, and is configured of, for example, a processor such as a CPU.
  • the storage device 28 is a device for storing data for performing processing by the control device 23, and is configured by a memory such as a RAM or a ROM, for example.
  • the storage device 28 stores programs and data that define the operation of the work machine 1.
  • the processing device 27 updates the data stored in the storage device 28 based on the user input performed through the input device 25 or the input received from the information processing device 30. Further, the processing device 27 performs display control of the display device 26 and operation control of the work motor 17 and the traveling motor 18 by executing an instruction included in the program stored in the storage device 28. At the time of execution of these controls, the processing device 27 uses various data read from the storage device 28 and data acquired from the various sensors described above mounted on the work machine 1.
  • the information processing device 30 is a device for the user of the work machine 1 to remotely control the work machine 1 and may be, for example, a mobile device such as a mobile phone terminal, a smartphone, or a laptop computer, or a desktop computer It may be a stationary type device such as
  • the information processing device 30 includes a processing device 31, a storage device 32, an input device 33, a display device 34, and a communication device 35.
  • the processing device 31 is a device that executes the processing performed by the information processing device 30, and is configured of, for example, a processor such as a CPU.
  • the storage device 32 is a device for storing data for performing processing by the information processing device 30, and is configured of a memory such as a RAM or a ROM, for example.
  • the storage device 32 stores programs and data that define the operation of the information processing device 30. In some embodiments, storage 32 stores programs as application programs.
  • the processing device 31 updates data stored in the storage device 32 based on a user input performed through the input device 33 or an input received from the work machine 1. Further, the processing device 31 performs display control of the display device 34 and operation control of the work machine 1 by executing an instruction included in the program stored in the storage device 32.
  • the input device 33 is a device for receiving an input operation by the user, and includes a touch panel, a keyboard, and the like.
  • the display device 34 is a device for providing the user with various information. The user can input various commands via the input device 33 while looking at the information displayed on the display device 34.
  • the input device 33 and the display device 34 can also be configured by a touch screen.
  • the communication device 35 is a device for communicating with a device external to the information processing device 30, and includes, for example, a transmission / reception antenna and a signal processing circuit that processes a signal transmitted / received via the transmission / reception antenna.
  • the communication device 35 may conform to a near field communication technology such as wireless LAN or Bluetooth, or may conform to a mobile communication technology such as 3G or LTE.
  • FIG. 4 is a diagram showing an example of the work area AR.
  • the work area AR is defined by, for example, an area wire 2 laid in advance (for example, embedded at a predetermined depth from the ground surface GR).
  • the area wire 2 is laid so as not to include, for example, buildings and obstacles in the site.
  • a current flows through the area wire 2 to generate a magnetic field in the work area AR.
  • a charging station 3 for charging the battery 20 is disposed on the area wire 2.
  • the work area AR defines a travel range of the work machine 1 and may include, in addition to the work scheduled area, a non-work area where no work is performed.
  • a display control method executed by the processing device 31 of the information processing device 30 will be described with reference to the flowchart of FIG. 5.
  • This method is performed by the processing device 31 reading a program (for example, an application program) stored in the storage device 32 and executing an instruction contained therein. That is, in the execution of this method, the information processing device 30 functions as a display control device.
  • This method is started, for example, by the user of the information processing apparatus 30 activating an application program.
  • step S501 the processing device 31 generates a home screen of the application and displays the home screen on the display device 34.
  • the home screen is a screen for visually showing the state of the work machine 1.
  • FIG. 6 shows a home screen 600 which is an example of the home screen. On the upper side of the home screen 600, five buttons for switching the screen are arranged.
  • a button 601 is a button for displaying a home screen. The button 601 is displayed larger than the other buttons 602 to 605 in order to indicate that the currently selected screen is the home screen.
  • a button 602 is a button for displaying a schedule setting screen. In the schedule setting screen, the user can set the work schedule of the work machine 1.
  • a button 603 is a button for displaying a setting screen. On the setting screen, the user can change the settings related to the application.
  • a button 604 is a button for saving the current schedule settings and other settings in the storage device 32.
  • a button 605 is a button for displaying a screen for setting the height of the grass cut.
  • Home screen 600 includes an image display area 606 at its center. As described later, the image display area 606 shows an image relating to the work machine 1. Below the home screen 600, three buttons for the user to directly operate the work machine 1 are arranged.
  • the button 607 is a button for causing the work machine 1 in standby to start work.
  • the button 608 is a button for opening a screen for the user to directly control traveling of the work machine 1.
  • the button 609 is a button for causing the working machine 1 in operation to stop the operation.
  • step S ⁇ b> 502 the processing device 31 acquires the state regarding the work machine 1.
  • the state relating to the work machine 1 includes, for example, the operation state of the work machine 1 (for example, during work, in standby, etc.), the presence or absence of the occurrence of an error in the work machine 1, and The state of communication and the remaining amount of the battery 20 are included.
  • step S503 the processing device 31 determines the state related to the work machine 1. For example, the processing device 31 transmits, to the work machine 1, a request for transmitting information on the operation state of the work machine 1, the presence or absence of an error occurrence, and the remaining amount of the battery 20.
  • the processing device 31 determines that the state regarding the work machine 1 is "impossible to communicate”. When there is a response from the work machine 1 within the predetermined time, the processing device 31 sets the state regarding the work machine 1 based on the content of communication from the work machine 1 to “in work”, “standby”, “on standby” It is determined that the error is one of "error”.
  • FIG. 7 shows a home screen 700 which is an example of the home screen in the case of “in operation”.
  • an image 701 representing the work machine 1 is displayed in the image display area 606 of the home screen 700.
  • the image 701 is an image in which the appearance of the work machine 1 indicates that the work is in progress and is displayed in a standard size.
  • the image 701 may be displayed as an animation to indicate that it is in operation.
  • an image 702 indicating the remaining amount of the battery 20 is also displayed.
  • the processing device 31 updates the home screen being displayed on the display device 34 so that the image representing "standby” is displayed in the standard size in step S505. Do. When the state regarding the work machine 1 is "error”, the processing device 31 updates the home screen being displayed on the display device 34 so as to display the image representing the "error” in a small size in step S506. When the state regarding the work machine 1 is "incommunicable”, at step S507, the processing device 31 updates the home screen being displayed on the display device 34 so as to display an image representing "impossible to communicate” in a small size. Do. FIG. 8 shows a home screen 800 which is an example of the home screen in the case of “communication not possible”.
  • an image 801 indicating the work machine 1 and an image 802 indicating that the work machine 1 and the information processing apparatus 30 can not communicate are displayed.
  • the image 801 is an image displayed in a small size and in a form that indicates that the appearance of the work machine 1 can not communicate.
  • the small size used in steps S506 and S507 is a size smaller than the standard size.
  • the small size may be 20% to 80% of the standard size, for example half (50%). Display an image representing work implement 1 in a small size when the work implement 1 is not operating normally as in the case of "error” or when the state of the work implement 1 can not be acquired properly as in the case of "unable to communicate".
  • the user of the information processing apparatus 30 can intuitively understand such a state.
  • step S ⁇ b> 508 the processing device 31 determines whether the display of a screen other than the home screen is selected by the user. If the display of a screen other than the home screen is selected ("YES” in step S508), the processing device 31 displays the selected screen in step S509. If the display of a screen other than the home screen is not selected (“NO” in step S508), the processing device 31 returns the process to step S502 to update the home screen again.
  • FIGS. 9 to 12 A modification of the home screen displayed in steps S504 and S507 described above will be described with reference to FIGS. 9 to 12.
  • the home screen 900 shown in FIG. 9 is displayed in step S504, and the home screen 1000 shown in FIG. 10 is displayed in step S507.
  • An image 901 representing the work machine 1 on the home screen 900 and an image 1001 representing the work machine 1 on the home screen 1000 are images obtained by deforming the appearance of the work machine 1.
  • the home screen 1100 shown in FIG. 11 is displayed in step S504, and the home screen 1200 shown in FIG. 12 is displayed in step S507.
  • An image 1101 representing the work machine 1 on the home screen 1100 and an image 1201 representing the work machine 1 on the home screen 1200 are images of characters having the appearance of the work machine 1 as a motif.
  • a display control method executed by the processing device 27 of the work machine 1 will be described with reference to the flowchart of FIG.
  • This method is performed by the processing unit 27 reading a program stored in the storage unit 28 and executing an instruction contained therein. That is, in the execution of this method, the control device 23 functions as a display control device. This method starts, for example, when the power of work implement 1 is turned on.
  • the processing device 27 displays the home screen on the display device 26 as in S501.
  • the home screen may be similar to the home screen 600 of FIG. 6 or may be only the image display area 606 of the home screen 600.
  • step S1302 the processing device 27 acquires the state regarding the work machine 1.
  • the state relating to work implement 1 includes, for example, the operation state of work implement 1 (for example, during work, in standby, etc.), the presence or absence of the occurrence of an error in work implement 1, and the remaining amount of battery 20.
  • step S503 the processing device 31 determines the state related to the work machine 1.
  • the processing device 31 is one of “working”, “standby” and “error” regarding the state related to the work machine 1 based on data from various sensors of the work machine 1 and data in the storage device 28. It is determined that
  • steps S1304 to S1306 the processing device 31 updates the home screen being displayed on the display device 26 in the same manner as in steps S504 to S506. Thereafter, in steps S1307 and S1308, the processing device 31 performs the same processing as in steps S508 and S509.
  • the user of the work machine 1 displays such a state as a display device of the work machine 1 by displaying an image representing the work machine 1 in a small size when the work machine 1 is not operating normally as in the case of "error". You will be able to understand 26 intuitively.
  • ⁇ Configuration 2> The one or more processors and the display device are mounted on an information processing apparatus (1) capable of communicating with the automatic work machine.
  • the user can intuitively understand the state related to the automatic work machine by using the information processing apparatus.
  • ⁇ Configuration 3> The size of the image when communication between the automatic work machine and the information processing device is not possible is smaller than the size of the image when communication between the automatic work machine and the information processing device is possible.
  • ⁇ Configuration 4> The size of the said image when the error has generate
  • a display controller (23, 30), One or more processors (27, 31), With memory (28, 32), And one or more programs, The one or more programs are stored in the memory and configured to be executed by the one or more processors, the one or more programs being Obtaining the state of the automatic work machine (1); Displaying an image representing the automatic work machine on a display device in a size according to the state; A display controller, comprising instructions for performing.
  • ⁇ Configuration 6> In the display control unit (23, 30), Obtaining the state of the automatic work machine (1); Displaying an image representing the automatic work machine on a display (26, 34) in a size according to the state; How to have it.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Environmental Sciences (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Lifting Devices For Agricultural Implements (AREA)
  • Digital Computer Display Output (AREA)

Abstract

プログラムを格納した記憶媒体が提供される。プログラムは、1つ以上のプロセッサにより実行された場合に、1つ以上のプロセッサに、自動作業機に関する状態を取得することと、自動作業機を表す画像を、状態に応じたサイズで表示装置に表示することと、を実行させる命令を含む。

Description

表示制御装置、表示制御方法及び記憶媒体
 本発明は、表示制御装置、表示制御方法及び記憶媒体に関する。
 エリアワイヤによって画定された作業領域内を自走して芝刈りを行う自動作業機が知られている。特許文献1では、自動作業機が生成した作業領域マップを外部機器でユーザが確認可能であることが記載されている。
特開2016-186748号公報
 特許文献1に記載された技術では、自動作業機が生成した作業領域マップを確認可能である。しかし、自動作業機に関する状態をユーザが直感的に理解することは困難であった。本発明の1つの側面は、自動作業機に関する状態をユーザが直感的に理解することを可能にする。
 本発明の一部の実施形態では、プログラムを格納した記憶媒体であって、前記プログラムは、1つ以上のプロセッサにより実行された場合に、前記1つ以上のプロセッサに、自動作業機に関する状態を取得することと、前記自動作業機を表す画像を、前記状態に応じたサイズで表示装置に表示することと、を実行させる命令を含む記憶媒体が提供される。
 自動作業機に関する状態をユーザが直感的に理解することが可能になる。
本発明の実施形態に係る作業機の構成を概略的に示す側面図。 本発明の実施形態に係る作業機の構成を概略的に示す平面図。 本発明の実施形態に係る作業機の制御装置及び情報処理装置の構成を示すブロック図。 本発明の実施形態に係る作業機により作業を行う作業領域の一例を示す図。 本発明の実施形態に係る情報処理装置の動作の一例を説明するフロー図。 本発明の実施形態に係る情報処理装置の表示画面例を説明する図。 本発明の実施形態に係る情報処理装置の表示画面例を説明する図。 本発明の実施形態に係る情報処理装置の表示画面例を説明する図。 本発明の実施形態に係る情報処理装置の表示画面例を説明する図。 本発明の実施形態に係る情報処理装置の表示画面例を説明する図。 本発明の実施形態に係る情報処理装置の表示画面例を説明する図。 本発明の実施形態に係る情報処理装置の表示画面例を説明する図。 本発明の実施形態に係る作業機の動作の一例を説明するフロー図。
 添付の図面を参照しつつ本発明の実施形態について以下に説明する。様々な実施形態を通じて同様の要素には同一の参照符号を付し、重複する説明を省略する。また、各実施形態は適宜変更、組み合わせが可能である。本発明の一部の実施形態は自動作業機に関する。自動作業機とは、ユーザからのリアルタイムの指示を必要とせずに作業を行う装置のことである。自動作業機は、事前に定められた手順に従って作業を行ってもよい。自動作業機は自走式であってもよい。このような自動作業機は無人作業車とも呼ばれうる。以下では、無人作業車の一例として、芝刈り作業を行う移動式芝刈り機について説明する。
 図1は、一部の実施形態に係る自動作業機(以下、単に作業機と呼ぶ)の構成を概略的に示す側面図であり、図2は平面図である。以下では、平面視における作業機の直進方向(長さ方向)および直進方向に垂直な車幅方向を、それぞれ前後方向および左右方向と定義するとともに、作業機の高さ方向を上下方向と定義し、この定義に従い各部の構成を説明する。
 図1,2に示すように、作業機1は、シャシ11とフレーム12とを有する車体10と、車体10を接地面GRから走行可能に支持する左右一対の前輪13および左右一対の後輪14とを備える。前輪13は、ステー11aを介してシャシ11の前側に回転可能に取り付けられる。後輪14は、前輪13よりも大径であり、シャシ11の後側に直接、回転可能に取り付けられる。フレーム12の上面には入力装置25と表示装置26とが搭載されている。作業機1は、ユーザ自身が搬送可能な重量および寸法を有する。一例を挙げると、作業機1の全長(前後方向長さ)は500mm程度、全幅は300mm程度、高さは300mm程度である。
 入力装置25は、ユーザによる入力操作を受け付けるための装置であり、テンキーやカーソルキー、およびスイッチ等を含む。スイッチは、例えば作業機1の動作開始等を指令するメインスイッチと非常停止を指令する非常停止スイッチとを含む。表示装置26は、ユーザに各種情報を提供するための装置である。ユーザは、表示装置26に表示された情報を見ながら、入力装置25(テンキー、カーソルキー)を介して各種指令を入力できる。入力装置25と表示装置26とをタッチスクリーンにより構成することもできる。
 シャシ11とフレーム12とで包囲された作業機1の内部空間15には、作業装置16と、作業機駆動用の作業モータ17と、後輪駆動用の走行モータ18と、充電ユニット19と、バッテリ20と、制御装置23と、通信装置24とが配置される。
 作業装置16は、回転体と回転体に取り付けられた芝刈り用のブレードとを有し、全体が略円盤形状を呈する。作業装置16は、回転体中央の回転軸を上下方向に向けて配置され、高さ調節機構21により接地面GRからのブレードの高さを調整可能に構成される。高さ調節機構21は、例えばユーザにより操作可能なねじを備える。作業モータ17は、作業装置16の上方に配置された走行モータにより構成され、その出力軸が回転体の回転軸に連結され、回転体と一体にブレードを回転駆動する。
 走行モータ18は、左右の後輪14の左右内側に配置された一対の走行モータ18L,18Rにより構成される。走行モータ18L,18Rの出力軸は、左右の後輪14の回転軸にそれぞれ連結され、走行モータ18L,18Rは、左右の後輪14を互いに独立に回転駆動する。すなわち、作業機1は、前輪13を従動輪、後輪14を駆動輪として構成され、走行モータ18L,18Rは、左右の後輪14を互いに独立に正転(前進方向への回転)または逆転(後進方向への回転)させる。左右の後輪14の回転に速度差を生じさせることで、作業機1は任意の方向に旋回できる。
 例えば、左右の後輪14をそれぞれ正転させた際に、右後輪14の回転速度が左後輪14の回転速度よりも速いと、その速度差に応じた旋回角で作業機1は左方に旋回する。一方、左後輪14の回転速度が右後輪14の回転速度よりも速いと、その速度差に応じた旋回角で作業機1は右方に旋回する。左右の後輪14を互いに同一速度で一方を正転、他方を逆転させると、作業機1はその場で旋回する。
 充電ユニット19は、AC/DC変換器を含み、フレーム12の前端部に設けられた端子22に配線を介して接続されるとともに、バッテリ20に配線を介して接続される。端子22は、接点22aを有し、端子22が接点22aを介して充電ステーション3(図4参照)に接続することで、バッテリ20に充電できる。バッテリ20は、配線を介して作業モータ17と走行モータ18とに接続され、作業モータ17と走行モータ18とは、ドライバを介してバッテリ20から供給される電力により駆動する。また、制御装置23、通信装置24、入力装置25及び表示装置26へもバッテリ20から電力が供給される。
 作業機1の前部には、左右方向に離間して一対の磁気センサ51(磁気センサ51L,51R)が配置される。より具体的には、図2に示すように、作業機1の車幅方向中心を通り、かつ、直進方向に向かう中心線CLに対して左右対称に、一対の磁気センサ51L,51Rが配置される。
 作業機1は、磁気センサ51の他に、Yawセンサと、Gセンサと、方位センサと、GPSセンサと、接触センサと、左右一対の車輪速センサと、電圧センサとを含む。磁気センサは、磁界の大きさ(磁界強度)を示す信号を出力する。Yawセンサは、作業機1の高さ方向の軸線(Z軸)回りに生じる角速度(ヨーレート)を示す信号を出力する角速度センサである。Yawセンサからの信号により制御装置23は作業機1のZ軸回りの旋回角を検出できる。Gセンサは、作業機1に作用する直交3軸(X軸、Y軸、Z軸)方向の加速度を示す信号を出力する。方位センサは、地磁気に応じた信号を出力する2軸または3軸構造の地磁気センサである。方位センサからの信号により制御装置23は所定方位(例えば北)に対する作業機1の向きを検出できる。GPSセンサは、GPS衛星からの電波を受信し、作業機1の現在位置(緯度、経度)を検出する。接触センサは、作業機1が障害物等に接近または接触するとオン信号を出力する。車輪速センサは、左右の後輪14の車輪速を示す信号をそれぞれ出力する。車輪速センサからの信号により、制御装置23は作業機1の走行距離を算出できる。電圧センサは、バッテリ20の残電圧を検出する。
 通信装置24は、作業機1の外部の装置と通信するための装置であり、例えば送受信アンテナと送受信アンテナを介して送受信した信号を処理する信号処理回路とによって構成される。通信装置24は、無線LANやBluetoothのような近距離無線通信技術に準拠してもよいし、3GやLTEのようなモバイル通信技術に準拠してもよい。
 制御装置23は、作業機1の全体的な動作を制御する装置であり、例えばECU(電子制御ユニット)などのマイクロコンピュータである。作業機1は、作業機1の外部にある情報処理装置30と通信可能である。図3を参照して、制御装置23と情報処理装置30との構成例について説明する。図3では、作業機1の一部の構成要素を省略する。
 制御装置23は、処理装置27と、記憶装置28とを有する。処理装置27は、制御装置23が行う処理を実行する装置であり、例えばCPUなどのプロセッサによって構成される。記憶装置28は、制御装置23による処理を行うためのデータを記憶するための装置であり、例えばRAMやROMなどのメモリで構成される。記憶装置28は、作業機1の動作を規定するプログラムやデータが記憶されている。処理装置27は、入力装置25を通じて行われたユーザ入力や、情報処理装置30から受信した入力に基づいて、記憶装置28に記憶されているデータを更新する。また、処理装置27は、記憶装置28に記憶されているプログラムに含まれる命令を実行することによって、表示装置26の表示制御や、作業モータ17及び走行モータ18の動作制御を行う。これらの制御の実行の際に、処理装置27は、記憶装置28から読み出した各種データや、作業機1に搭載された上述の様々なセンサから取得したデータを使用する。
 情報処理装置30は、作業機1のユーザが作業機1をリモートから制御するための装置であり、例えば携帯電話端末やスマートフォン、ラップトップコンピュータのようなモバイル装置であってもよいし、デスクトップコンピュータのような据え置き型の装置であってもよい。情報処理装置30は、処理装置31と、記憶装置32と、入力装置33と、表示装置34と、通信装置35とを有する。
 処理装置31は、情報処理装置30が行う処理を実行する装置であり、例えばCPUなどのプロセッサによって構成される。記憶装置32は、情報処理装置30による処理を行うためのデータを記憶するための装置であり、例えばRAMやROMなどのメモリで構成される。記憶装置32は、情報処理装置30の動作を規定するプログラムやデータが記憶されている。一部の実施形態では、記憶装置32は、プログラムをアプリケーションプログラムとして記憶している。処理装置31は、入力装置33を通じて行われたユーザ入力や、作業機1から受信した入力に基づいて、記憶装置32に記憶されているデータを更新する。また、処理装置31は、記憶装置32に記憶されているプログラムに含まれる命令を実行することによって、表示装置34の表示制御や、作業機1の動作制御を行う。
 入力装置33は、ユーザによる入力操作を受け付けるための装置であり、タッチパネルやキーボード等を含む。表示装置34は、ユーザに各種情報を提供するための装置である。ユーザは、表示装置34に表示された情報を見ながら、入力装置33を介して各種指令を入力できる。入力装置33と表示装置34とをタッチスクリーンにより構成することもできる。通信装置35は、情報処理装置30の外部の装置と通信するための装置であり、例えば送受信アンテナと送受信アンテナを介して送受信した信号を処理する信号処理回路とによって構成される。通信装置35は、無線LANやBluetoothのような近距離無線通信技術に準拠してもよいし、3GやLTEのようなモバイル通信技術に準拠してもよい。
 以上のように構成された作業機1は、予め定められた作業領域内を自律走行して作業を行う。図4は、作業領域ARの一例を示す図である。作業領域ARは、例えば予め敷設(例えば接地面GRから所定深さに埋設)されたエリアワイヤ2によって画定される。エリアワイヤ2は、例えば敷地内の建物や障害物を含まないように敷設される。エリアワイヤ2には電流が流され、これにより作業領域ARに磁界が発生する。なお、エリアワイヤ2上には、バッテリ20を充電するための充電ステーション3が配置される。作業領域ARは、作業機1の走行範囲を規定し、作業予定領域の他、作業を行わない非作業の領域を含んでもよい。
 続いて、図5のフローチャートを参照して、情報処理装置30の処理装置31が実行する表示制御方法について説明する。この方法は、処理装置31が記憶装置32に格納されているプログラム(例えば、アプリケーションプログラム)を読み出し、これに含まれる命令を実行することによって行われる。すなわち、この方法の実行において、情報処理装置30は表示制御装置として機能する。この方法は、例えば情報処理装置30のユーザがアプリケーションプログラムを起動することによって開始する。
 ステップS501で、処理装置31は、アプリケーションのホーム画面を生成し、ホーム画面を表示装置34に表示する。ホーム画面とは、作業機1に関する状態を視覚的に示すための画面である。図6にホーム画面の一例であるホーム画面600を示す。ホーム画面600の上側には、画面を切り替えるためのボタンが5つ並んでいる。ボタン601は、ホーム画面を表示するためのボタンである。現在選択されている画面がホーム画面であることを示すために、ボタン601が他のボタン602~605よりも大きく表示されている。
 ボタン602は、スケジュール設定画面を表示するためのボタンである。スケジュール設定画面で、ユーザは作業機1の作業スケジュールを設定できる。ボタン603は、設定画面を表示するためのボタンである。設定画面で、ユーザはアプリケーションに関する設定を変更できる。ボタン604は、現在のスケジュール設定やその他の設定を記憶装置32に保存するためのボタンである。ボタン605は、芝のカットの高さを設定する画面を表示するためのボタンである。
 ホーム画面600は、その中央に画像表示領域606を含む。後述するように、画像表示領域606には作業機1に関する状態が画像で示される。ホーム画面600の下側には、ユーザが作業機1を直接に操作するためのボタンが3つ並んでいる。ボタン607は、待機中の作業機1に作業を開始させるためのボタンである。ボタン608は、作業機1の走行をユーザが直接に制御するための画面を開くためのボタンである。ボタン609は、作業中の作業機1に作業を停止させるためのボタンである。
 図5に戻り、ステップS502で、処理装置31は、作業機1に関する状態を取得する。作業機1に関する状態は、例えば、作業機1の動作状態(例えば、作業中、待機中など)と、作業機1におけるエラーの発生の有無と、作業機1と情報処理装置30との間の通信状態と、バッテリ20の残量とを含む。ステップS503で、処理装置31は、作業機1に関する状態を判定する。例えば、処理装置31は、作業機1の動作状態、エラーの発生の有無及びバッテリ20の残量に関する情報の送信を求めるリクエストを作業機1に対して送信する。所定の時間以内に作業機1から応答がない場合に、処理装置31は、作業機1に関する状態が「通信不能」であると判定する。所定の時間以内に作業機1から応答があった場合に、処理装置31は、作業機1からの通信内容に基づいて、作業機1に関する状態を、「作業中」、「待機中」、「エラー」の何れかであると判定する。
 作業機1に関する状態が「作業中」の場合に、ステップS504で、処理装置31は、「作業中」を表す画像を標準サイズで表示するように、表示装置34に表示中のホーム画面を更新する。図7に、「作業中」の場合のホーム画面の一例であるホーム画面700を示す。ホーム画面700の画像表示領域606に、作業機1を表す画像701が表示されている。画像701は、作業機1の外観が作業中を示す形態且つ標準サイズで表示された画像である。画像701は、作業中であることを示すためのアニメーションとして表示されてもよい。画像表示領域606には、バッテリ20の残量を示す画像702も表示されている。
 作業機1に関する状態が「待機中」の場合に、ステップS505で、処理装置31は、「待機中」を表す画像を標準サイズで表示するように、表示装置34に表示中のホーム画面を更新する。作業機1に関する状態が「エラー」の場合に、ステップS506で、処理装置31は、「エラー」を表す画像を小サイズで表示するように、表示装置34に表示中のホーム画面を更新する。作業機1に関する状態が「通信不能」の場合に、ステップS507で、処理装置31は、「通信不能」を表す画像を小サイズで表示するように、表示装置34に表示中のホーム画面を更新する。図8に、「通信不能」の場合のホーム画面の一例であるホーム画面800を示す。ホーム画面800の画像表示領域606に、作業機1を示す画像801と、作業機1と情報処理装置30とが通信不能であることを示す画像802とが表示されている。画像801は、作業機1の外観が通信不能を示す形態且つ小サイズで表示された画像である。
 本実施形態において、ステップS506及びS507で使用される小サイズとは、標準サイズよりも小さなサイズのことである。例えば、小サイズは、標準サイズの20%~80%であってもよく、例えば半分(50%)であってもよい。「エラー」のように作業機1が正常に動作していない場合や「通信不能」のように作業機1の状態を適切に取得できない場合に作業機1を表す画像を小サイズで表示することによって、情報処理装置30のユーザはそのような状態を直感的に理解できるようになる。
 図5に戻り、ステップS508で、処理装置31は、ホーム画面以外の画面の表示がユーザによって選択されたか否かを判定する。ホーム画面以外の画面の表示が選択された場合(ステップS508で「YES」)に、ステップS509で、処理装置31は、選択された画面を表示する。ホーム画面以外の画面の表示が選択されなかった場合(ステップS508で「NO」)に、処理装置31は、ステップS502に処理を戻し、再びホーム画面の更新を行う。
 図9~図12を参照して、上述のステップS504及びS507で表示されるホーム画面の変形例を説明する。第1変形例では、ステップS504で図9に示すホーム画面900が表示され、ステップS507で図10に示すホーム画面1000が表示される。ホーム画面900において作業機1を表す画像901及びホーム画面1000において作業機1を表す画像1001は、作業機1の外観をデフォルメした画像である。第2変形例では、ステップS504で図11に示すホーム画面1100が表示され、ステップS507で図12に示すホーム画面1200が表示される。ホーム画面1100において作業機1を表す画像1101及びホーム画面1200において作業機1を表す画像1201は、作業機1の外観をモチーフにしたキャラクターの画像である。
 続いて、図13のフローチャートを参照して、作業機1の処理装置27が実行する表示制御方法について説明する。この方法は、処理装置27が記憶装置28に格納されているプログラムを読み出し、これに含まれる命令を実行することによって行われる。すなわち、この方法の実行において、制御装置23は表示制御装置として機能する。この方法は、例えば作業機1の電源がオンになるによって開始する。
 S1301で、処理装置27は、S501と同様にして表示装置26にホーム画面を表示する。ホーム画面は図6のホーム画面600と同様であってもよいし、ホーム画面600の画像表示領域606だけであってもよい。
 ステップS1302で、処理装置27は、作業機1に関する状態を取得する。作業機1に関する状態は、例えば、作業機1の動作状態(例えば、作業中、待機中など)と、作業機1におけるエラーの発生の有無と、バッテリ20の残量とを含む。ステップS503で、処理装置31は、作業機1に関する状態を判定する。処理装置31は、作業機1の各種センサからのデータや記憶装置28内のデータに基づいて、作業機1に関する状態を、「作業中」、「待機中」、「エラー」の何れかであると判定する。
 処理装置31は、ステップS1304~S1306で、ステップS504~S506と同様にして、表示装置26に表示中のホーム画面を更新する。その後、処理装置31は、ステップS1307、S1308で、ステップS508、S509と同様の処理を行う。「エラー」のように作業機1が正常に動作していない場合に作業機1を表す画像を小サイズで表示することによって、作業機1のユーザはそのような状態を作業機1の表示装置26を見ても直感的に理解できるようになる。
 <実施形態のまとめ>
<構成1>
 プログラムを格納した記憶媒体(28,32)であって、
 前記プログラムは、1つ以上のプロセッサ(27,31)により実行された場合に、前記1つ以上のプロセッサに、
  自動作業機(1)に関する状態を取得することと、
  前記自動作業機を表す画像(701,801,901,1001,1101,1201)を、前記状態に応じたサイズで表示装置(26,34)に表示することと、
を実行させる命令を含む記憶媒体。
 この構成によれば、自動作業機に関する状態をユーザが直感的に理解することが可能になる。
<構成2>
 前記1つ以上のプロセッサ及び前記表示装置は、前記自動作業機と通信可能な情報処理装置(1)に搭載されており、
 前記自動作業機に関する状態は、前記自動作業機と前記情報処理装置との間の通信状態を含む、構成1に記載の記憶媒体。
 この構成によれば、情報処理装置を利用して自動作業機に関する状態をユーザが直感的に理解することが可能になる。
<構成3>
 前記自動作業機と前記情報処理装置との間が通信不能である場合の前記画像のサイズが、前記自動作業機と情報処理装置との間が通信可能である場合の前記画像のサイズよりも小さい、構成2に記載の記憶媒体。
 この構成によれば、自動作業機と情報処理装置との間が通信不能である場合をユーザが直感的に理解することが可能になる。
<構成4>
 前記自動作業機にエラーが発生している場合の前記画像のサイズが、前記自動作業機が作業中である場合の前記画像のサイズよりも小さい、構成1乃至3の何れか1項に記載の記憶媒体。
 この構成によれば、自動作業機にエラーが発生している場合をユーザが直感的に理解することが可能になる。
<構成5>
 表示制御装置(23,30)であって、
 1つ以上のプロセッサ(27,31)と、
 メモリ(28,32)と、
 1つ以上のプログラムと、を備え、
 前記1つ以上のプログラムは前記メモリに格納され、前記1つ以上のプロセッサにより実行されるように構成され、前記1つ以上のプログラムは、
 自動作業機(1)に関する状態を取得することと、
 前記自動作業機を表す画像を、前記状態に応じたサイズで表示装置に表示することと、
を実行するための命令を含む、表示制御装置。
 この構成によれば、自動作業機に関する状態をユーザが直感的に理解することが可能になる。
<構成6>
 表示制御装置(23,30)において、
 自動作業機(1)に関する状態を取得することと、
 前記自動作業機を表す画像を、前記状態に応じたサイズで表示装置(26,34)に表示することと、
を有する方法。
 この構成によれば、自動作業機に関する状態をユーザが直感的に理解することが可能になる。
 本発明は上記実施の形態に制限されるものではなく、本発明の精神及び範囲から離脱することなく、様々な変更及び変形が可能である。従って、本発明の範囲を公にするために、以下の請求項を添付する。

Claims (6)

  1.  プログラムを格納した記憶媒体であって、
     前記プログラムは、1つ以上のプロセッサにより実行された場合に、前記1つ以上のプロセッサに、
      自動作業機に関する状態を取得することと、
      前記自動作業機を表す画像を、前記状態に応じたサイズで表示装置に表示することと、
    を実行させる命令を含む記憶媒体。
  2.  前記1つ以上のプロセッサ及び前記表示装置は、前記自動作業機と通信可能な情報処理装置に搭載されており、
     前記自動作業機に関する状態は、前記自動作業機と前記情報処理装置との間の通信状態を含む、請求項1に記載の記憶媒体。
  3.  前記自動作業機と前記情報処理装置との間が通信不能である場合の前記画像のサイズが、前記自動作業機と情報処理装置との間が通信可能である場合の前記画像のサイズよりも小さい、請求項2に記載の記憶媒体。
  4.  前記自動作業機にエラーが発生している場合の前記画像のサイズが、前記自動作業機が作業中である場合の前記画像のサイズよりも小さい、請求項1乃至3の何れか1項に記載の記憶媒体。
  5.  表示制御装置であって、
     1つ以上のプロセッサと、
     メモリと、
     1つ以上のプログラムと、を備え、
     前記1つ以上のプログラムは前記メモリに格納され、前記1つ以上のプロセッサにより実行されるように構成され、前記1つ以上のプログラムは、
     自動作業機に関する状態を取得することと、
     前記自動作業機を表す画像を、前記状態に応じたサイズで表示装置に表示することと、
    を実行するための命令を含む、表示制御装置。
  6.  表示制御装置において、
     自動作業機に関する状態を取得することと、
     前記自動作業機を表す画像を、前記状態に応じたサイズで表示装置に表示することと、
    を有する方法。
PCT/JP2017/008449 2017-03-03 2017-03-03 表示制御装置、表示制御方法及び記憶媒体 WO2018158933A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2019502406A JP6815479B2 (ja) 2017-03-03 2017-03-03 表示制御装置、表示制御方法及び記憶媒体
EP17899019.8A EP3591513A4 (en) 2017-03-03 2017-03-03 DISPLAY CONTROL DEVICE, DISPLAY CONTROL METHOD, AND STORAGE MEDIUM
PCT/JP2017/008449 WO2018158933A1 (ja) 2017-03-03 2017-03-03 表示制御装置、表示制御方法及び記憶媒体
US16/553,629 US11231708B2 (en) 2017-03-03 2019-08-28 Display control apparatus, display control method, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2017/008449 WO2018158933A1 (ja) 2017-03-03 2017-03-03 表示制御装置、表示制御方法及び記憶媒体

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US16/553,629 Continuation US11231708B2 (en) 2017-03-03 2019-08-28 Display control apparatus, display control method, and storage medium

Publications (1)

Publication Number Publication Date
WO2018158933A1 true WO2018158933A1 (ja) 2018-09-07

Family

ID=63369922

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/008449 WO2018158933A1 (ja) 2017-03-03 2017-03-03 表示制御装置、表示制御方法及び記憶媒体

Country Status (4)

Country Link
US (1) US11231708B2 (ja)
EP (1) EP3591513A4 (ja)
JP (1) JP6815479B2 (ja)
WO (1) WO2018158933A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110888424A (zh) * 2018-09-11 2020-03-17 苏州宝时得电动工具有限公司 基站及自动行走设备的控制方法
WO2020243219A1 (en) * 2019-05-28 2020-12-03 Mtd Products Inc Device and method for calibrating outdoor power equipment and quality of cut

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101984926B1 (ko) * 2018-01-19 2019-05-31 엘지전자 주식회사 잔디깎기 로봇
US11653593B2 (en) 2019-08-02 2023-05-23 Embankscape Equipment LLC Handheld unit with safety features for remote-control slope mowing system
US11240966B2 (en) 2019-08-02 2022-02-08 Embankscape Equipment LLC Slope mower with safety features
US11234362B2 (en) * 2019-08-02 2022-02-01 Embankscape Equipment LLC Remote-control slope mowing system with safety features
US11229161B1 (en) * 2019-11-19 2022-01-25 Dwayne Patterson Lawn mowing device
CN114115213A (zh) * 2020-08-31 2022-03-01 深圳市杉川机器人有限公司 一种自动工作设备、基于手持终端设置参数的工作设备、控制方法及控制装置
EP4292419A1 (en) * 2022-06-13 2023-12-20 Techtronic Cordless GP Display for controlling and monitoring a robotic garden tool

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001265558A (ja) * 2000-03-17 2001-09-28 Canon Inc データ処理装置およびデータ処理装置の表示処理方法および記憶媒体
JP2013052962A (ja) * 2011-09-02 2013-03-21 Daifuku Co Ltd 物品搬送設備
JP2016186748A (ja) 2015-03-27 2016-10-27 本田技研工業株式会社 無人作業車の制御装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5420510B2 (ja) * 2010-09-30 2014-02-19 本田技研工業株式会社 自律走行作業車の制御装置
JP6240384B2 (ja) * 2012-11-29 2017-11-29 ヤンマー株式会社 自律走行作業システム
GB2527222A (en) * 2013-03-15 2015-12-16 Topcon Positioning Systems Inc Monitoring and control display system and method
EP2870853A1 (en) * 2013-11-11 2015-05-13 Honda Research Institute Europe GmbH Lawn mower with remote control
EP2884364B1 (en) * 2013-12-12 2018-09-26 Hexagon Technology Center GmbH Autonomous gardening vehicle with camera
US9538702B2 (en) * 2014-12-22 2017-01-10 Irobot Corporation Robotic mowing of separated lawn areas
SE538868C2 (en) * 2015-05-04 2017-01-17 Husqvarna Ab Improved error detection and resetting of a robotic work tool
US10034421B2 (en) * 2015-07-24 2018-07-31 Irobot Corporation Controlling robotic lawnmowers
CN204948759U (zh) * 2015-08-24 2016-01-13 宋国丰 一种具有签到功能便于携带的智能割草机
CN204948809U (zh) * 2015-08-24 2016-01-13 何纪江 一种多功能智能割草机

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001265558A (ja) * 2000-03-17 2001-09-28 Canon Inc データ処理装置およびデータ処理装置の表示処理方法および記憶媒体
JP2013052962A (ja) * 2011-09-02 2013-03-21 Daifuku Co Ltd 物品搬送設備
JP2016186748A (ja) 2015-03-27 2016-10-27 本田技研工業株式会社 無人作業車の制御装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110888424A (zh) * 2018-09-11 2020-03-17 苏州宝时得电动工具有限公司 基站及自动行走设备的控制方法
WO2020243219A1 (en) * 2019-05-28 2020-12-03 Mtd Products Inc Device and method for calibrating outdoor power equipment and quality of cut
EP3975685A1 (en) * 2019-05-28 2022-04-06 Mtd Products Inc. Device and method for calibrating outdoor power equipment and quality of cut
US11950527B2 (en) 2019-05-28 2024-04-09 Mtd Products Inc Device and method for calibrating outdoor power equipment and quality of cut

Also Published As

Publication number Publication date
JP6815479B2 (ja) 2021-01-20
US11231708B2 (en) 2022-01-25
US20190384287A1 (en) 2019-12-19
EP3591513A4 (en) 2020-02-19
EP3591513A1 (en) 2020-01-08
JPWO2018158933A1 (ja) 2020-01-09

Similar Documents

Publication Publication Date Title
WO2018158933A1 (ja) 表示制御装置、表示制御方法及び記憶媒体
US12080157B2 (en) Mobile computing device for use in controlling wirelessly controlled vehicles
JP5973608B1 (ja) 無人作業車の制御装置
EP3240997B1 (en) Route selection based on automatic-manual driving preference ratio
US11079751B2 (en) Gesturing for control input for a vehicle
JP5973609B1 (ja) 無人作業車の制御装置
JP6253565B2 (ja) 操作端末
EP3970462A1 (en) Autonomous travel system
JP2014154047A (ja) 指示装置及びプログラム
WO2019138466A1 (ja) 無人航空機制御システム、無人航空機制御方法、及びプログラム
KR20230141453A (ko) 경로 생성 방법, 경로 생성 시스템, 및 경로 생성 프로그램
JP2017222234A (ja) アシストカート
JP2023150413A (ja) 操作支援方法、操作支援システム、及び操作支援プログラム
KR101061363B1 (ko) 내비게이션 시스템에 특화된 3차원 제어시스템 및 그 방법
US12045050B2 (en) Gesturing for control input for a vehicle
JP2024030765A (ja) 経路生成方法、経路生成システム、及び経路生成プログラム
WO2021106361A1 (ja) 領域登録システム
JP2022028520A (ja) 作業支援装置
JP2024004952A (ja) 自動走行作業方法、自動走行作業システム、および、プログラム
JP2022057248A (ja) 作業支援装置
JP2024098044A (ja) 自動走行方法及び自動走行システム
KR101555930B1 (ko) 모바일단말을 이용한 탑승로봇 제어시스템
JP2022029844A (ja) 作業支援装置
CN116893674A (zh) 自动行驶方法、自动行驶系统以及自动行驶程序
JP2018197735A (ja) ドローン姿勢感知装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17899019

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2019502406

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2017899019

Country of ref document: EP