CN113597772A - 远程操作系统 - Google Patents

远程操作系统 Download PDF

Info

Publication number
CN113597772A
CN113597772A CN201980094288.4A CN201980094288A CN113597772A CN 113597772 A CN113597772 A CN 113597772A CN 201980094288 A CN201980094288 A CN 201980094288A CN 113597772 A CN113597772 A CN 113597772A
Authority
CN
China
Prior art keywords
remote
remote operation
state
image
imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201980094288.4A
Other languages
English (en)
Inventor
大谷真辉
佐佐木均
佐伯诚司
山崎洋一郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kobelco Construction Machinery Co Ltd
Original Assignee
Kobelco Construction Machinery Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kobelco Construction Machinery Co Ltd filed Critical Kobelco Construction Machinery Co Ltd
Publication of CN113597772A publication Critical patent/CN113597772A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • E—FIXED CONSTRUCTIONS
    • E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02F—DREDGING; SOIL-SHIFTING
    • E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26—Indicating devices
    • E02F9/261—Surveying the work-site to be treated
    • E02F9/262—Surveying the work-site to be treated with follow-up actions to control the work tool, e.g. controller
    • E—FIXED CONSTRUCTIONS
    • E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02F—DREDGING; SOIL-SHIFTING
    • E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/20—Drives; Control devices
    • E02F9/2025—Particular purposes of control systems not otherwise provided for
    • E02F9/205—Remotely operated machines, e.g. unmanned vehicles
    • E—FIXED CONSTRUCTIONS
    • E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02F—DREDGING; SOIL-SHIFTING
    • E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26—Indicating devices
    • E02F9/261—Surveying the work-site to be treated
    • E—FIXED CONSTRUCTIONS
    • E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02F—DREDGING; SOIL-SHIFTING
    • E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26—Indicating devices
    • E02F9/264—Sensors and their calibration for indicating the position of the work tool
    • E—FIXED CONSTRUCTIONS
    • E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02F—DREDGING; SOIL-SHIFTING
    • E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26—Indicating devices
    • E02F9/264—Sensors and their calibration for indicating the position of the work tool
    • E02F9/265—Sensors and their calibration for indicating the position of the work tool with follow-up actions (e.g. control signals sent to actuate the work tool)
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0038—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement by providing the operator with simple or augmented images from one or more cameras located onboard the vehicle, e.g. tele-operation
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/20—Control system inputs
    • G05D1/22—Command input arrangements
    • G05D1/221—Remote-control arrangements
    • G05D1/222—Remote-control arrangements operated by humans
    • G05D1/224—Output arrangements on the remote controller, e.g. displays, haptics or speakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/30—User interface

Landscapes

  • Engineering & Computer Science (AREA)
  • Civil Engineering (AREA)
  • Structural Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Mining & Mineral Resources (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Operation Control Of Excavators (AREA)
  • Manipulator (AREA)
  • Component Parts Of Construction Machinery (AREA)
  • Selective Calling Equipment (AREA)

Abstract

本发明提供一种系统，从使一位操作员掌握另一位操作员对作业机械的远程操作状态的观点来看，能够对该一位操作员提供适当的信息。在第1远程操作装置(10)中，由被动状态检测器(112)检测第1操作机构(111)的被动状态，并发送与该被动状态对应的操作状态数据。在第2远程操作装置(20)中，根据与操作状态数据对应的第1操作机构(111)的被动状态来控制致动器(212)的动作，由此使第2操作机构(211)主动地进行动作。

Description

远程操作系统
技术领域
本发明涉及用于远程操作作业机械等的系统。
背景技术
已提出有远程操作作业机械的技术(例如，参照专利文献1)。
现有技术文献
专利文献
专利文献1：日本特开2016-076801号公报
发明内容
发明要解决的技术问题
然而，从使作业机械的远程操作技能较差的一位操作员提高其技能的观点来看，优选使其掌握技能优秀的另一位操作员对作业机械的远程操作状态。
于是，从使一位操作员掌握另一位操作员对作业机械的远程操作状态的观点来看，本发明的目的在于提供一种系统，能够对该一位操作员提供适当的信息。
用于解决上述技术问题的方案
本发明的远程操作系统具备：作业机械，具有工作机构及对包含该工作机构的至少一部分的环境进行拍摄的拍摄装置；第1远程操作装置及第2远程装置，具有用于远程操作所述作业机械的操作机构、及显示与通过所述作业机械的所述拍摄装置获取到的拍摄图像数据对应的环境图像的图像显示装置，该远程操作系统的特征在于，所述第1远程操作装置具备：被动状态检测器，检测所述操作机构的被动状态；第1客户控制装置，发送与由所述被动状态检测器检测到的该操作机构的被动状态对应的操作状态数据，所述第2远程操作装置具备：致动器，用于使所述操作机构主动地进行动作；第2客户控制装置，接收所述操作状态数据，根据与该操作状态数据对应的所述第1远程操作装置中的所述操作机构的被动状态，控制所述致动器的动作。
本发明的远程操作服务器具有与第1远程操作装置及第2远程装置分别相互通信的功能，所述第1远程操作装置及第2远程装置具有：操作机构，用于远程操作具有工作机构及对包含该工作机构的至少一部分的环境进行拍摄的拍摄装置的作业机械；图像显示装置，显示与通过所述作业机械的所述拍摄装置获取到的拍摄图像数据对应的环境图像，该远程操作服务器的特征在于，具备第1服务器控制元件，从该第1远程操作装置接收与在所述第1远程操作装置中检测到的所述操作机构的被动状态对应的操作状态数据，还具备第2服务器控制元件，通过对所述第2远程操作装置发送所述操作状态数据，在所述第2远程操作装置中，根据与该操作状态数据对应的所述操作机构的被动状态，来控制用于使所述操作机构主动地进行动作的致动器的动作。
附图说明
图1是关于作为本发明的一实施方式的远程操作系统的构成的说明图。
图2是关于作业机械的构成的说明图。
图3是关于第1远程操作装置的构成的说明图。
图4是关于作为本发明的一实施方式的远程操作系统的功能的说明图。
图5A是关于第1图像输出装置中的图像输出状态的说明图。
图5B是关于第2图像输出装置中的图像输出状态的说明图。
图6A是关于操作状态图像的第1例的说明图。
图6B是关于操作状态图像的第2例的说明图。
图7是关于作为本发明的另一实施方式的远程操作系统的说明图。
具体实施方式
(构成)
作为图1所示的本发明的一实施方式的远程操作系统具备第1远程操作装置10、第2远程操作装置20、作业机械40。共通的作业机械40的远程操作主体可在第1远程操作装置10及第2远程操作装置20之间切换。
(作业机械的构成)
作业机械40具备作业机械控制装置400、拍摄装置401(外侧拍摄装置)、无线通信机器402、工作机构440。作业机械控制装置400由运算处理装置(单核处理器或多核处理器或者构成该处理器的处理器内核)构成，从存储器等存储装置读取必要的数据及软件，以该数据为对象执行根据该软件的运算处理。
作业机械40例如是履带式挖掘机(工程机械)，如图2所示，具备履带式的下部行驶体410、和经由回转机构430可回转地搭载于下部行驶体410的上部回转体420。在上部回转体420的前方左侧部设有驾驶室(司机室)422。在上部回转体220的前方中央部设有作业附件440。
作为工作机构的作业附件440具备：动臂441，可起落地安装于上部回转体420；斗杆443，可转动地连结于动臂441的前端；铲斗445，可转动地连结于斗杆443的前端。在作业附件440安装有由可伸缩的液压油缸构成的动臂油缸442、斗杆油缸444及铲斗油缸446。
动臂油缸442介于该动臂441与上部回转体420之间，使得其通过接受工作油的供给而伸缩，从而使动臂441在起落方向转动。斗杆油缸444介于该斗杆443与该动臂441之间，使得其通过接受工作油的供给而伸缩，从而使斗杆443相对于动臂441绕水平轴转动。铲斗油缸446介于该铲斗445与该斗杆443之间，使得其通过接受工作油的供给而伸缩，从而使铲斗445相对于斗杆443绕水平轴转动。
拍摄装置401例如设置在驾驶室422的内部，透过驾驶室422的前窗对包含至少一部分工作机构440的环境进行拍摄。
在驾驶室422设有：实机侧操作杆，与构成第1远程操作装置10的操作杆(后述)相对应；驱动机构或机器人，从远程操作室接收与各操作杆的操作状态对应的信号，并基于该接收信号使实机操作杆动作。
(第1远程操作装置的构成)
第1远程装置10具备第1客户控制装置100、第1输入接口110、第1输出接口120。第1客户控制装置100由运算处理装置(单核处理器或多核处理器或者构成该处理器的处理器内核)构成，从存储器等存储装置读取需要的数据及软件，以该数据为对象执行根据该软件的运算处理。第1输入接口110具备第1操作机构111、被动状态检测器112。第1输出接口120具备第1图像输出装置121、第1无线通信机器122。
在第1操作机构111包含有行驶用操作装置、回转用操作装置、动臂用操作装置、斗杆用操作装置和铲斗用操作装置。各操作装置具有接受转动操作的操作杆。为了使下部行驶体410动作而操作行驶用操作装置的操作杆(行驶杆)。行驶杆也可以兼作行驶踏板。例如，也可以设置有固定于行驶杆的基部或者下端部的行驶踏板。为了使构成回转机构430的液压式的回转电机动作而操作回转用操作装置的操作杆(回转杆)。为了使动臂油缸442动作而操作动臂用操作装置的操作杆(动臂杆)。为了使斗杆油缸444动作而操作斗杆用操作装置的操作杆(斗杆杆(arm lever))。为了使铲斗油缸446动作而操作铲斗用操作装置的操作杆(铲斗杆)。
构成第1操作机构111的各操作杆例如如图3所示，配置在用于供操作员就座的座椅1100的周围。座椅1100是带扶手的高背椅那样的方式，也可以是没有头枕的低背椅那样的方式、或者是没有靠背的椅子那样的方式等操作员能够就座的任意的方式。
在座椅1100的前方左右并排地配置有与左右的履带对应的左右一对的行驶杆1110。一个操作杆可以兼作多种操作杆。例如，在对图3所示的设置于座椅1100的右侧框体的前方的右侧操作杆1111沿前后方向操作的情况下作为动臂杆发挥功能，并且在沿左右方向操作的情况下作为铲斗杆发挥功能。同样地，在对图3所示的设置于座椅1100的左侧框体的前方的左侧操作杆1112沿前后方向操作的情况下作为斗杆杆发挥功能，并且在沿左右方向操作的情况下作为回转杆发挥功能。可以根据操作员的操作指示任意地变更杆模式。
例如，如图3所示，第1图像输出装置121由分别配置在座椅1100的右斜前方、前方及左斜前方的右斜前方图像输出装置1211、前方图像输出装置1212及左斜前方图像输出装置1213构成。该图像输出装置1211～1213可以进一步具备扬声器(语音输出装置)。
被动状态检测器112例如由设置在驾驶室422的内部的一个或多个拍摄装置1121(内侧拍摄装置)构成，从而将一对行驶杆1110、右侧操作杆1111及左侧操作杆1112分别作为拍摄范围。
被动状态检测器112也可以由传感器与运算处理装置构成，所述传感器输出与由弹簧或弹性部件构成的弹压机构的变形量或位移量对应的信号，所述弹簧或弹性部件以使操作杆复原至与操作量为0相对应的原位置及姿势的方式起作用；所述运算处理装置基于该传感器的输出信号，除了对为了使上部回转体420从上方观察沿逆时针以某个速度回转而操作了回转杆的情况进行推定外，还对操作了动臂、斗杆及铲斗等的情况进行推定。
被动状态检测器112也可以由先导压力传感器与运算处理装置构成，所述先导压力传感器输出与先导压力对应的信号，该先导压力与实机侧操作杆的操作量对应；所述运算处理装置基于该先导压力传感器的输出信号，除了对为了使上部回转体420从上方观察沿逆时针以某个速度回转而操作了回转杆的情况进行推定外，还对操作了动臂、斗杆及铲斗等的情况进行推定。
(第2远程操作装置的构成)
第2远程操作装置20具备第2客户控制装置200、第2输入接口210、第2输出接口220。第2客户控制装置200由运算处理装置(单核处理器或多核处理器或者构成该处理器的处理器内核)构成，从存储器等存储装置读取必要的数据及软件，以该数据为对象执行根据该软件的运算处理。第2输入接口210具备第2操作机构211、致动器212。第2输出接口220具备第2图像输出装置221、第2无线通信机器222。
致动器212是用于主动地驱动第2操作机构211的致动器，由电动式、液压式或气压式的致动器构成。除了被动状态检测器112被省略、以及后文叙述的第2客户控制装置200的功能以外，第2远程操作装置20的其他的构成与第1远程操作装置10的构成几乎相同，因此省略其说明(参照图3)。
(功能)
在第1远程操作装置10中，由第1操作员进行规定的操作(图4/步骤102)。规定的操作例如是构成第1输入接口110或第1操作机构111的按钮或操作杆的操作。与此对应地，由第1客户控制装置100通过第1无线通信机器122从第1远程操作装置10对作业机械40发送操作开始指令(图4/步骤104)。
同样地，在第2远程操作装置20中，由第2操作员进行规定的操作(图4/步骤202)。规定的操作例如是构成第2输入接口210或第2操作机构211的按钮或操作杆的操作。与此对应地，由第2客户控制装置200通过第2无线通信机器222从第2远程操作装置20对作业机械40发送操作开始指令(图4/步骤204)。
在作业机械40中，由作业机械控制装置400通过无线通信机器402接收操作开始指令(图4/步骤402)。与此对应地，作业机械控制装置400对拍摄装置401输出指令，由拍摄装置401根据该指令获取拍摄图像数据(图4/步骤404)。由作业机械控制装置400通过无线通信机器402对第1远程操作装置10及第2远程操作装置20发送表示该拍摄图像的拍摄图像数据(图4/步骤406)。
在第1远程操作装置10中，由第1客户控制装置100通过第1无线通信机器122接收拍摄图像数据(图4/步骤106)。由第1客户控制装置100将与拍摄图像数据对应的环境图像(拍摄图像本身的全部或一部分或者基于此生成的模拟环境图像)显示在第1图像输出装置121(图4/步骤108)。同样地，在第2远程操作装置20中，由第2客户控制装置200通过第2无线通信机器122接收拍摄图像数据(图4/步骤206)。由第2客户控制装置200将与拍摄图像数据对应的环境图像显示在第2图像输出装置221(图4/步骤208)。由此，例如如图5A所示，将包含有作为工作机构的作业附件440的一部分即动臂441、斗杆443、铲斗445及斗杆油缸444的环境图像分别显示于第1图像输出装置121及第2图像输出装置221。
在第1远程操作装置10中，由第1操作员操作第1操作机构111(图4/步骤110)，与此对应地，由第1客户控制装置100通过第1无线通信机器122对作业机械40发送与该操作状态对应的操作指令(图4/步骤112)。
在作业机械40中，由作业机械控制装置400通过无线通信机器402接收操作指令(图4/步骤408)。与此对应地，由作业机械控制装置400控制作业附件440等的动作(图4/步骤410)。例如，执行由铲斗445将作业机械40前方的土铲起、在使上部回转体410回转后从铲斗445将土倒落的作业。
在第1远程操作装置10中，由被动状态检测器112检测由第1操作员操作的第1操作机构111的被动状态(图4/步骤114)。由第1客户控制装置100通过第1无线通信机器122对第2远程操作装置20发送与该被动状态检测结果对应的操作状态数据(图4/步骤116)。
在第2远程操作装置20中，由第2客户控制装置200通过第2无线通信机器222接收操作状态数据(图4/步骤210)。由第2客户控制装置200根据该操作状态数据控制致动器212的动作，主动地驱动第2操作机构211(图4/步骤212)。由此，第1远程操作装置10中的第1操作员操作的第1操作机构111的操作状态或被动状态在第2远程操作装置20中被再现为第2操作机构211的主动状态。
进一步地，由第2客户控制装置200将与操作状态数据对应的操作状态图像显示在第2图像输出装置221(图4/步骤214)。由此，例如如图5B所示，将操作状态图像S重叠在包含有作为工作机构的作业附件440的一部分即动臂441、斗杆443、铲斗445及斗杆油缸444的环境图像上来显示于第2图像输出装置221。
也可以在偏离环境图像的位置显示操作状态图像。也可以是，将环境图像图像显示在前方图像输出装置1212、将操作状态图像显示在右斜前方图像输出装置1211或左斜前方图像输出装置1213等(参照图3)，将环境图像及操作状态图像分别显示在独立的图像输出装置。
例如，如图6A所示，操作状态图像中包含有从上方观察右侧操作杆1111及使其进行动作的第1操作员的右手RH的图像、以及从上方观察左侧操作杆1112及使其进行动作的第1操作员的左手LH的图像。该图像可以通过截取由构成被动状态检测器112的拍摄装置获取到的拍摄图像的一部分来生成，也可以是基于拍摄图像或被动状态检测结果而生成的模拟图像。此外，操作状态图像中包含有表示右侧操作杆1111的从基准状态向前后的倾动角度θx1及向左右的倾动角度θy1、以及左侧操作杆1112的从基准状态向前后的倾动角度θx2及向左右的倾动角度θy2各自的数值的操作状态图像。可以在操作状态图像中省略表现操作量。
如图6B所示，操作状态图像中包含有分别从左方及后方观察左侧操作杆1112的图像。该图像可以通过截取与由构成被动状态检测器112的拍摄装置获取到的拍摄图像数据对应的拍摄图像的一部分来生成，也可以是基于拍摄图像或被动状态检测结果而生成的模拟图像。此外，操作状态图像中包含有表示左侧操作杆1112的从基准状态向前后的倾动角度θx2及向左右的倾动角度θy2各自的数值的操作状态图像。同样地，也可以在操作状态图像中包含有分别从右方及后方观察右侧操作杆1111的图像。可以在操作状态图像中省略表现操作量。
(效果)
根据该构成的远程操作系统，对第2操作员提供第2远程操作装置20中的第2操作机构211的主动动作状态，作为从使通过第2远程操作装置20操作作业机械40的该第2操作员通过触觉掌握通过第1远程操作装置10操作作业机械40的第1操作员对作业机械40的远程操作状态即第1操作机构111的操作状态的观点来看为适当的信息(参照图4/步骤212)。与第1操作员以左右手握住构成第1操作机构111的操作杆同样地，通过使第2操作员以左右手握住构成第2操作机构211的操作杆，从而第2操作员能够通过其手来掌握操作杆的移动，了解第1操作员对操作杆的移动方式或操作状态。
进一步地，对第2操作员提供表示该第1操作员对第1操作机构111的操作状态及操作量的操作状态图像，作为从使该第2操作员通过视觉掌握第1操作员对第1操作机构111的操作状态的观点来看为适当的信息(参照图4/步骤214及图6A～图6B)。第2操作员能够通过视觉辨认第2图像输出装置221中显示的操作状态图像，了解第1操作员对操作杆的移动方式或操作状态。
(本发明的另一实施方式)
在所述实施方式中，第1远程操作装置10、第2远程操作装置20及作业机械40根据无线通信方式直接进行相互通信，但作为另一实施方式，第1远程操作装置10、第2远程操作装置20及作业机械40也可以经由图7所示的远程操作服务器30间接进行相互通信。
远程操作服务器30具备第1服务器运算处理元件31、第2服务器运算处理元件32。第1服务器运算处理元件31从第1远程操作装置10接收与在第1远程操作装置10中检测到的第1操作机构111的被动状态对应的操作状态数据。第2服务器运算处理元件32通过对第2远程操作装置20发送操作状态数据，使第2图像输出装置221显示操作状态图像(参照图6A～图6B)。
附图标记说明
10 第1远程操作装置
20 第2远程操作装置
30 远程操作服务器
31 第1服务器运算处理元件
32 第2服务器运算处理元件
40 作业机械
100 第1客户控制装置
110 第1输入接口
111 第1操作机构
112 被动状态检测器
120 第1输出接口
121 第1图像输出装置
122 第1无线通信机器
200 第2客户控制装置
210 第2输入接口
211 第2操作机构
212 致动器
220 第2输出接口
221 第2图像输出装置
222 第2无线通信机器
401 拍摄装置(外侧拍摄装置)
402 无线通信机器
440 作业附件(工作机构)
1121 拍摄装置(内侧拍摄装置)。

Claims (4)

1.一种远程操作系统，具备：作业机械，具有工作机构及对包含该工作机构的至少一部分的环境进行拍摄的拍摄装置；第1远程操作装置及第2远程装置，具有用于远程操作所述作业机械的操作机构、及显示与通过所述作业机械的所述拍摄装置获取到的拍摄图像数据对应的环境图像的图像显示装置，其特征在于，
所述第1远程操作装置具备：被动状态检测器，检测所述操作机构的被动状态；第1客户控制装置，发送与由所述被动状态检测器检测到的该操作机构的被动状态对应的操作状态数据，
所述第2远程操作装置具备：致动器，用于使所述操作机构主动地进行动作；第2客户控制装置，接收所述操作状态数据，根据与该操作状态数据对应的所述第1远程操作装置中的所述操作机构的被动状态，控制所述致动器的动作。
2.如权利要求1所述的远程操作系统，其特征在于，
所述第1远程操作装置进一步具备内侧拍摄装置，拍摄操作员对所述操作机构的操作状态的情形，所述第1客户控制装置发送由所述内侧拍摄装置获取到的拍摄图像数据，
所述第2客户控制装置接收所述拍摄图像数据，根据该拍摄图像数据将表示所述操作员对所述操作机构的操作状态的操作状态图像显示于所述图像输出装置。
3.如权利要求1或2所述的远程操作系统，其特征在于，
所述第2客户控制装置将与所述操作状态数据对应的、表示作为所述第1远程操作装置中的所述操作机构的被动状态的该操作机构的操作量的操作状态图像显示于所述图像输出装置。
4.一种远程操作服务器，具有与第1远程操作装置及第2远程装置分别相互通信的功能，所述第1远程操作装置及第2远程装置具有：操作机构，用于远程操作具有工作机构及对包含该工作机构的至少一部分的环境进行拍摄的拍摄装置的作业机械；图像显示装置，显示与通过所述作业机械的所述拍摄装置获取到的拍摄图像数据对应的环境图像，其特征在于，
具备第1服务器控制元件，从该第1远程操作装置接收与在所述第1远程操作装置中检测到的所述操作机构的被动状态对应的操作状态数据，
还具备第2服务器控制元件，通过对所述第2远程操作装置发送所述操作状态数据，在所述第2远程操作装置中，根据与该操作状态数据对应的所述操作机构的被动状态，来控制用于使所述操作机构主动地进行动作的致动器的动作。
CN201980094288.4A 2019-03-26 2019-12-02 远程操作系统 Pending CN113597772A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2019-058105 2019-03-26
JP2019058105A JP7287045B2 (ja) 2019-03-26 2019-03-26 遠隔操作システム
PCT/JP2019/047069 WO2020194883A1 (ja) 2019-03-26 2019-12-02 遠隔操作システム

Publications (1)

Publication Number Publication Date
CN113597772A true CN113597772A (zh) 2021-11-02

Family

ID=72609414

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980094288.4A Pending CN113597772A (zh) 2019-03-26 2019-12-02 远程操作系统

Country Status (5)

Country Link
US (1) US11993922B2 (zh)
EP (1) EP3923594B1 (zh)
JP (1) JP7287045B2 (zh)
CN (1) CN113597772A (zh)
WO (1) WO2020194883A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7319633B2 (ja) 2020-01-06 2023-08-02 中国電力株式会社 計測端末の配置間距離設定装置及び配置間距離設定方法
WO2023037966A1 (ja) * 2021-09-09 2023-03-16 国立大学法人名古屋工業大学 複数人によるロボットアバター制御システム、及び制御方法
JP2023103876A (ja) * 2022-01-14 2023-07-27 コベルコ建機株式会社 遠隔操作支援システム

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020049510A1 (en) * 2000-10-25 2002-04-25 Takahiro Oda Remote work supporting system
CN101971112A (zh) * 2009-03-02 2011-02-09 新东工业株式会社 铸造工厂中的远距离支援系统及远距离支援方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3539645B2 (ja) * 1995-02-16 2004-07-07 株式会社日立製作所 遠隔手術支援装置
JP3660887B2 (ja) 2001-03-19 2005-06-15 株式会社日立製作所 手術支援装置
US20100302359A1 (en) * 2009-06-01 2010-12-02 Honeywell International Inc. Unmanned Aerial Vehicle Communication
WO2011151915A1 (ja) * 2010-06-03 2011-12-08 株式会社日立製作所 人操作型作業機械システム
JP6239465B2 (ja) 2014-08-08 2017-11-29 シャープ株式会社 情報機器および制御機器
JP2016076801A (ja) 2014-10-03 2016-05-12 ヤンマー株式会社 遠隔監視システム
JP6777375B2 (ja) * 2015-03-05 2020-10-28 株式会社小松製作所 作業機械の画像表示システム、作業機械の遠隔操作システム及び作業機械
JP6605241B2 (ja) 2015-07-07 2019-11-13 日立建機株式会社 遠隔操縦システム
KR102333772B1 (ko) 2016-04-21 2021-11-30 스미토모 겐키 가부시키가이샤 쇼벨의 표시장치
JP7050573B2 (ja) 2017-06-30 2022-04-08 大成建設株式会社 物品配置システム及び食品盛り付けシステム
WO2019104652A1 (zh) * 2017-11-30 2019-06-06 深圳市大疆创新科技有限公司 一种无人机系统及其通信方法、遥控装置
CN111886195B (zh) * 2018-03-28 2022-11-04 株式会社多田野 操作系统
JPWO2020175645A1 (ja) * 2019-02-28 2021-12-23 住友重機械工業株式会社 表示装置、ショベル、情報処理装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020049510A1 (en) * 2000-10-25 2002-04-25 Takahiro Oda Remote work supporting system
CN101971112A (zh) * 2009-03-02 2011-02-09 新东工业株式会社 铸造工厂中的远距离支援系统及远距离支援方法

Also Published As

Publication number Publication date
US11993922B2 (en) 2024-05-28
US20220220706A1 (en) 2022-07-14
JP2020161934A (ja) 2020-10-01
JP7287045B2 (ja) 2023-06-06
EP3923594A1 (en) 2021-12-15
EP3923594A4 (en) 2022-04-20
WO2020194883A1 (ja) 2020-10-01
EP3923594B1 (en) 2023-05-10

Similar Documents

Publication Publication Date Title
CN113597772A (zh) 远程操作系统
CN112105784B (zh) 远程操作系统
JP6947101B2 (ja) 遠隔操作システム及び主操作装置
JP7318258B2 (ja) 遠隔操作システムおよび遠隔操作サーバ
JP2019214836A (ja) 作業機械の遠隔制御システム
CN113544337B (zh) 作业机械用操作机构以及具备该操作机构的作业机械
JP2019163603A (ja) 建設機械
JP7376440B2 (ja) 遠隔操作装置および遠隔操作システム
CN112823226B (zh) 工程机械的远程操作装置
CN113615164B (zh) 远程操作系统以及远程操作服务器
CN113424521A (zh) 作业机械用周边监视装置
CN114787453B (zh) 远程操作装置及远程操作系统
CN113614317B (zh) 远程操作系统以及远程操作服务器
WO2023026568A1 (ja) 遠隔操作システムおよび遠隔操作複合システム
US20230128501A1 (en) Remote operation assistance device and remote operation assistance method
EP4063571A2 (en) Image capturing function control system and image capturing function control method
WO2021166475A1 (ja) 遠隔操作装置、遠隔操作支援サーバ、遠隔操作支援システムおよび遠隔操作支援方法
JP2023032997A (ja) 遠隔操作システム
CN114902311A (zh) 作业辅助服务器、作业辅助方法以及作业辅助系统
JP2023032998A (ja) 作業支援システムおよび作業支援複合システム
JP2023103876A (ja) 遠隔操作支援システム
JP2022006751A (ja) 作業機械、作業支援システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination