CN105681750A - 远程操控机器人网络延时与机器人实时移动动作同步方法 - Google Patents
远程操控机器人网络延时与机器人实时移动动作同步方法 Download PDFInfo
- Publication number
- CN105681750A CN105681750A CN201610025898.7A CN201610025898A CN105681750A CN 105681750 A CN105681750 A CN 105681750A CN 201610025898 A CN201610025898 A CN 201610025898A CN 105681750 A CN105681750 A CN 105681750A
- Authority
- CN
- China
- Prior art keywords
- time
- newer command
- subcommand
- robot
- video transmission
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 23
- 230000009471 action Effects 0.000 title claims abstract description 18
- 230000005540 biological transmission Effects 0.000 claims abstract description 34
- 230000001360 synchronised effect Effects 0.000 claims abstract description 12
- 238000004364 calculation method Methods 0.000 claims description 9
- 239000000284 extract Substances 0.000 claims description 8
- 230000001186 cumulative effect Effects 0.000 claims description 4
- 238000000605 extraction Methods 0.000 claims description 4
- 238000002372 labelling Methods 0.000 claims description 4
- 230000005012 migration Effects 0.000 claims description 4
- 238000013508 migration Methods 0.000 claims description 4
- 230000009191 jumping Effects 0.000 claims description 3
- 230000008569 process Effects 0.000 abstract description 6
- 125000004122 cyclic group Chemical group 0.000 description 2
- 239000000945 filler Substances 0.000 description 2
- 238000011084 recovery Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 238000010200 validation analysis Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000000523 sample Substances 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Manipulator (AREA)
Abstract
本发明涉及一种远程操控机器人网络延时与机器人实时移动动作同步方法。该方法为：首先，送出用户初始操控命令，等待视频流，等待中用户如有操作，对用户连续两次操控命令进行识别，如是相同命令，判断两命令间时间间隔，大于等于视频传输时延，则送出次命令，如小于视频传输时延则丢弃次命令，如果不是相同命令，判断两命令间时间间隔，大于等于视频传输时延，则送出次命令，如小于视频传输时延则缓存该命令，等时间间隔大于等于视频传输时延时再送出该命令。本发明使的远程机器人的操控的动作与回传的图像尽可能同步，提高用户的使用体验。
Description
技术领域
本发明涉及一种远程操控机器人网络延时与机器人实时移动动作同步方法。
背景技术
远程网络操控机器人实现人在异地也能通过图像实时查看机器人所处环境的真实状况，利用机器人能多向移动的特点，只要机器人能到达的地方，通过远程操控并移到目的地，查看用户想看的目标图像。这种方式从技术上解决了定点监控需布置多个探头才能监视多方位的场景的问题，只要一台机器人就可以360度的范围进行监控。同时移动的场景会对图像的时延提出更高的要求，因网络传输时延的存在，会产生操控动作后与传过来图像不同步的状况，如失步时间过长，给用户会造成比较差的使用体验，也增加机器人的不可操控性。如何使操控的动作与回传的图像尽可能同步，是本发明要解决的技术问题。
发明内容
本发明的目的在于提供一种远程操控机器人网络延时与机器人实时移动动作同步方法，使的远程机器人的操控的动作与回传的图像尽可能同步，提高用户的使用体验。
为实现上述目的，本发明的技术方案是：一种远程操控机器人网络延时与机器人实时移动动作同步方法，包括如下步骤，
S1：送出用户初始操控命令，等待视频流，等待中用户如有操作，对用户连续两次操控命令进行识别，若是相同命令，则执行步骤S2；若不是相同命令，则执行步骤S3；
S2：判断两命令间时间间隔是否大于等于视频传输时延，若是，则送出次命令，跳转至步骤S10；否则，丢弃次命令，跳转至步骤S10；
S3：判断两命令间时间间隔是否大于等于视频传输时延，若是，则送出次命令，否则，缓存次命令，同时启动次命令等待发出计时器；
S4：判断次命令等待发出时间大于等于视频传输时延时是否收到用户的次新命令，若否，则发出缓存的次命令，并跳转至步骤S10；若是，则执行步骤S5；
S5：判断次新命令是否与次命令相同，若是，丢弃该次新命令；若否，缓存该次新命令，同时启动次新命令等待发出计时器；
S6：判断次命令等待发出时间大于等于视频传输时延时是否有新命令输入，若否，则发出缓存的次命令；若是，则执行步骤S8；
S7：判断次新命令等待发出时间大于等于视频传输时延时是否有新命令输入，若否，则发出缓存的次新命令，并跳转至步骤S10；若是，则执行步骤S8；
S8：判断命令缓存是否到达两个，若已到达两个，丢弃新命令，并跳转至步骤S6；否则，执行步骤S9；
S9：将次新命令命名为次命令，新命令命名为次新命令，并跳转至步骤S5；
S10：重新执行步骤S1。
在本发明一实施例中，所述步骤S9中，若存在的为次命令和新命令，则只需将新命令命名为次新命令；若存在的为次新命令和新命令，则需将次新命令命名为次命令，新命令命名为次新命令。
在本发明一实施例中，所述视频传输时延的获取方式为：由操控客户端发起，在操控命令包中插上特殊时间标签字段并标记该字段有效，机器人接收端收到包后先查看特殊时间标签字段是否有效，如是则提取该字段，同时在机器人返回的视音频包中插入提取的特殊时间标签字段，操控客户端在收到机器人视音频包提取返回的特殊时间标签字段，对照本地时钟计算时间偏移。
在本发明一实施例中，所述特殊时间标签字段含有不断累加的操控客户端发送包序列号，收到返回的包序列号时，需与发出的未确认的包序列号比对，未对上则丢弃该特殊时间标签字段，对上了则计算时延，同时删除已确认的包序列号。
相较于现有技术，本发明具有以下有益效果：本发明使机器人的操控的动作与回传的图像尽可能同步，并且提高了用户的使用体验，减小了机器人的不可控性。
附图说明
图1为本发明远程操控机器人网络延时与机器人实时移动动作同步方法流程图。
图2为本发明缓存二三级命令处理流程图。
具体实施方式
下面结合附图，对本发明的技术方案进行具体说明。
如图1所示，本发明的一种远程操控机器人网络延时与机器人实时移动动作同步方法，包括如下步骤，
S1：送出用户初始操控命令，等待视频流，等待中用户如有操作，对用户连续两次操控命令进行识别，若是相同命令，则执行步骤S2；若不是相同命令，则执行步骤S3；
S2：判断两命令间时间间隔是否大于等于视频传输时延，若是，则送出次命令，跳转至步骤S10；否则，丢弃次命令，跳转至步骤S10；
S3：判断两命令间时间间隔是否大于等于视频传输时延，若是，则送出次命令，否则，缓存次命令，同时启动次命令等待发出计时器；
S4：判断次命令等待发出时间大于等于视频传输时延时是否收到用户的次新命令，若否，则发出缓存的次命令，并跳转至步骤S10；若是，则执行步骤S5；
S5：判断次新命令是否与次命令相同，若是，丢弃该次新命令；若否，缓存该次新命令，同时启动次新命令等待发出计时器；
S6：判断次命令等待发出时间大于等于视频传输时延时是否有新命令输入，若否，则发出缓存的次命令；若是，则执行步骤S8；
S7：判断次新命令等待发出时间大于等于视频传输时延时是否有新命令输入，若否，则发出缓存的次新命令，并跳转至步骤S10；若是，则执行步骤S8；
S8：判断命令缓存是否到达两个，若已到达两个，丢弃新命令，并跳转至步骤S6；否则，执行步骤S9；
S9：将次新命令命名为次命令，新命令命名为次新命令（若存在的为次命令和新命令，则只需将新命令命名为次新命令；若存在的为次新命令和新命令，则需将次新命令命名为次命令，新命令命名为次新命令），并跳转至步骤S5；
S10：重新执行步骤S1。
所述视频传输时延的获取方式为：由操控客户端发起，在操控命令包中插上特殊时间标签字段并标记该字段有效，机器人接收端收到包后先查看特殊时间标签字段是否有效，如是则提取该字段，同时在机器人返回的视音频包中插入提取的特殊时间标签字段，操控客户端在收到机器人视音频包提取返回的特殊时间标签字段，对照本地时钟计算时间偏移。所述特殊时间标签字段含有不断累加的操控客户端发送包序列号，收到返回的包序列号时，需与发出的未确认的包序列号比对，未对上则丢弃该特殊时间标签字段，对上了则计算时延，同时删除已确认的包序列号。
以下通过具体实施例讲述本发明技术方案。
如图1所示，本发明的一种远程操控机器人网络延时与机器人实时移动动作同步方法，如下：
1、用户操控移动机器人命令延时处理：送出用户初始操控命令，等待视频流，等待中用户如有操作，对用户连续两次操控命令进行识别，如是相同命令，判断两命令间时间间隔，大于等于视频传输时延，则送出次命令，如小于视频传输时延则丢弃次命令。如果不是相同命令，判断两命令间时间间隔，大于等于视频传输时延，则送出次命令，如小于视频传输时延则缓存该命令，等时间间隔大于等于视频传输时延时再送出该命令。
2、缓存次命令处理：缓存次命令同时启动次命令等待计时器，如未等到时间间隔大于等于视频传输时延时，又收到用户的次新操作命令，则次命令与次新命令比较，如相同则丢弃，如果不同缓存次新命令同时启动次新命令等待计时器。当次命令等待计时器大于或等于视频传输时延时，发出缓存的次命令。未等到时间间隔大于等于视频传输时延时，又收到用户操作命令，查看缓存区有几个不同的新命令，如超出两个，丢弃新输入的命令。
3、视频传输时延计时处理：一个命令发出后，视频传输时延计时器置零，重新开始测定视频传输时延。当收到时延应答包时，计算时延时间，覆盖前一个视频传输时延值。
4、实时获取互联网时延方法：获取网络时延由操控客户端发起，在操控命令包中插上特殊时间标签字段并标记该字段有效，机器人接收端收到包后先查看特殊时间标签字段是否有效，如是则提取该字段，同时在机器人返回的视音频包中插入提取的特殊时间标签字段，操控客户端在收到机器人视音频包提取返回的特殊时间标签字段，对照本地时钟计算时间偏移，即一个网络时延获取过程。特殊时间标签字段同时含有不断累加的操控客户端发送包序列号，收到返回的包序列号时，需与发出的未确认的包序列号比对，未对上则丢弃该时间标签字段，对上了则计算时延，同时删除已确认的包序列号。
本实施例中，采用的数据协议如下：
操控命令包字段格式：
版本(V)：2比特协议版本识别符。
保留(Reserved)：6比特保留后续扩展协议用。
包类型(PT)：8比特
长度（Length）：16比特以32比特字为单位，包的长度减一，包括头和任何填料。(偏移量1保证零值有效，避免了在扫描包长度时可能发生的无限循环，同时以32比特为单位避免了对以4为倍数的有效性检测。)
包序列号（SequenceNumber）：32比特每发送一个操控命令包，序列号增加1。接收方可以依次检测数据包的丢失并恢复数据包序列。
时间标签（Timestamp）:32比特反映操控数据包中的第一个八位组的采样时间。采样时间必须通过时钟及时提供线性无变化增量获取，以支持同步计算
操控命令（Controlcommand）:32比特操控客户端发出的操控命令字段，包括机器人车体各种前后、左右移动等，以及移动的速度、角度等幅值。
视频数据包头字段格式：
版本(V)：2比特协议版本识别符。
保留(Reserved)：6比特保留后续扩展协议用。
包类型(PT)：8比特
长度（Length）：16比特以32比特字为单位,包的长度减一，包括头和任何填料。(偏移量1保证零值有效，避免了在扫描包长度时可能发生的无限循环，同时以32比特为单位避免了对以4为倍数的有效性检测。)
返回的包序列号（ReternedsequenceNumber）：32比特返回的机器人端收到操控命令包中提取的包序列号。
返回的时间标签（Returnedtimestamp）:32比特返回的机器人端收到操控命令包中提取的时间标签。
视频数据包序列号（SendedsequenceNumber）:32比特每发送一个视频数据包，序列号增加1。接收方可以依次检测数据包的丢失并恢复数据包序列。
以上是本发明的较佳实施例，凡依本发明技术方案所作的改变，所产生的功能作用未超出本发明技术方案的范围时，均属于本发明的保护范围。
Claims (4)
1.一种远程操控机器人网络延时与机器人实时移动动作同步方法，其特征在于：包括如下步骤，
S1：送出用户初始操控命令，等待视频流，等待中用户如有操作，对用户连续两次操控命令进行识别，若是相同命令，则执行步骤S2；若不是相同命令，则执行步骤S3；
S2：判断两命令间时间间隔是否大于等于视频传输时延，若是，则送出次命令，跳转至步骤S10；否则，丢弃次命令，跳转至步骤S10；
S3：判断两命令间时间间隔是否大于等于视频传输时延，若是，则送出次命令，否则，缓存次命令，同时启动次命令等待发出计时器；
S4：判断次命令等待发出时间大于等于视频传输时延时是否收到用户的次新命令，若否，则发出缓存的次命令，并跳转至步骤S10；若是，则执行步骤S5；
S5：判断次新命令是否与次命令相同，若是，丢弃该次新命令；若否，缓存该次新命令，同时启动次新命令等待发出计时器；
S6：判断次命令等待发出时间大于等于视频传输时延时是否有新命令输入，若否，则发出缓存的次命令；若是，则执行步骤S8；
S7：判断次新命令等待发出时间大于等于视频传输时延时是否有新命令输入，若否，则发出缓存的次新命令，并跳转至步骤S10；若是，则执行步骤S8；
S8：判断命令缓存是否到达两个，若已到达两个，丢弃新命令，并跳转至步骤S6；否则，执行步骤S9；
S9：将次新命令命名为次命令，新命令命名为次新命令，并跳转至步骤S5；
S10：重新执行步骤S1。
2.根据权利要求1所述的远程操控机器人网络延时与机器人实时移动动作同步方法，其特征在于：所述步骤S9中，若存在的为次命令和新命令，则只需将新命令命名为次新命令；若存在的为次新命令和新命令，则需将次新命令命名为次命令，新命令命名为次新命令。
3.根据权利要求1所述的远程操控机器人网络延时与机器人实时移动动作同步方法，其特征在于：所述视频传输时延的获取方式为：由操控客户端发起，在操控命令包中插上特殊时间标签字段并标记该字段有效，机器人接收端收到包后先查看特殊时间标签字段是否有效，如是则提取该字段，同时在机器人返回的视音频包中插入提取的特殊时间标签字段，操控客户端在收到机器人视音频包提取返回的特殊时间标签字段，对照本地时钟计算时间偏移。
4.根据权利要求3所述的远程操控机器人网络延时与机器人实时移动动作同步方法，其特征在于：所述特殊时间标签字段含有不断累加的操控客户端发送包序列号，收到返回的包序列号时，需与发出的未确认的包序列号比对，未对上则丢弃该特殊时间标签字段，对上了则计算时延，同时删除已确认的包序列号。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610025898.7A CN105681750B (zh) | 2016-01-15 | 2016-01-15 | 远程操控机器人网络延时与机器人实时移动动作同步方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610025898.7A CN105681750B (zh) | 2016-01-15 | 2016-01-15 | 远程操控机器人网络延时与机器人实时移动动作同步方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN105681750A true CN105681750A (zh) | 2016-06-15 |
| CN105681750B CN105681750B (zh) | 2018-09-25 |
Family
ID=56300881
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201610025898.7A Expired - Fee Related CN105681750B (zh) | 2016-01-15 | 2016-01-15 | 远程操控机器人网络延时与机器人实时移动动作同步方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN105681750B (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109991967A (zh) * | 2017-12-29 | 2019-07-09 | 深圳市优必选科技有限公司 | 一种机器人运动的控制方法、系统及终端设备 |
| CN112004060A (zh) * | 2020-09-02 | 2020-11-27 | 深圳市禾启智能科技有限公司 | 用于景区的无人机观光方法 |
| US11991232B2 (en) | 2021-05-28 | 2024-05-21 | Spotify Ab | Command buffering |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN203632802U (zh) * | 2013-12-09 | 2014-06-04 | 深圳市盛思维科技有限公司 | 基于Mesh网络的实时视频传输系统 |
| CN104898652A (zh) * | 2011-01-28 | 2015-09-09 | 英塔茨科技公司 | 与一个可移动的远程机器人相互交流 |
| JP2016072727A (ja) * | 2014-09-29 | 2016-05-09 | 日立建機株式会社 | 建設機械の遠隔操縦用映像伝送システム |
-
2016
- 2016-01-15 CN CN201610025898.7A patent/CN105681750B/zh not_active Expired - Fee Related
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104898652A (zh) * | 2011-01-28 | 2015-09-09 | 英塔茨科技公司 | 与一个可移动的远程机器人相互交流 |
| CN203632802U (zh) * | 2013-12-09 | 2014-06-04 | 深圳市盛思维科技有限公司 | 基于Mesh网络的实时视频传输系统 |
| JP2016072727A (ja) * | 2014-09-29 | 2016-05-09 | 日立建機株式会社 | 建設機械の遠隔操縦用映像伝送システム |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109991967A (zh) * | 2017-12-29 | 2019-07-09 | 深圳市优必选科技有限公司 | 一种机器人运动的控制方法、系统及终端设备 |
| CN112004060A (zh) * | 2020-09-02 | 2020-11-27 | 深圳市禾启智能科技有限公司 | 用于景区的无人机观光方法 |
| US11991232B2 (en) | 2021-05-28 | 2024-05-21 | Spotify Ab | Command buffering |
Also Published As
| Publication number | Publication date |
|---|---|
| CN105681750B (zh) | 2018-09-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110048922B (zh) | 车载系统、网关、中继器、介质、方法、系统及车辆 | |
| CN1937541B (zh) | 一种网络性能测试方法 | |
| CN107223316B (zh) | 用于支持选择性回溯数据录制的系统和方法 | |
| CN105681750A (zh) | 远程操控机器人网络延时与机器人实时移动动作同步方法 | |
| CN109859533A (zh) | 基于视觉的协作冲突避免 | |
| CN104227716B (zh) | 一种基于遥操作的摄像机器人实时控制方法 | |
| CN104079571B (zh) | 一种识别Android模拟器的方法及装置 | |
| CN107925629A (zh) | 一种IPv6网络中数据报文的发送方法及装置 | |
| CN102017574A (zh) | 分组交换网络中对同步通信设备的传递延迟补偿 | |
| CN106302016B (zh) | 小流量快速获取网络物理带宽的方法及系统 | |
| CN103024598A (zh) | 获取网络视频播放流畅度的方法及装置 | |
| CN108319294A (zh) | 一种无人机控制方法 | |
| CN105681265B (zh) | 单边传输控制协议加速方法及装置 | |
| CN104158627A (zh) | 一种异构链路多协议的自动识别系统和方法 | |
| CN107703956A (zh) | 一种基于惯性捕捉技术的虚拟交互系统及其工作方法 | |
| CN112255956A (zh) | 一种无人机多模态通讯控制系统和方法 | |
| CN105357071A (zh) | 一种网络复杂流量识别方法及识别系统 | |
| CN103347075A (zh) | 一种数据多级缓存处理方法 | |
| CN114554250B (zh) | 一种无人机或无人车的视频和位置同步方法 | |
| CN106534220A (zh) | 一种流数据的双向传输方法和装置 | |
| US20210084229A1 (en) | System, method and apparatus for networking independent synchronized generation of a series of images | |
| CN104283849A (zh) | 弹窗数据推送、展示方法及装置、系统 | |
| JP2016174268A (ja) | ネットワークシステム、ネットワークシステムの制御方法、通信装置、及びプログラム | |
| CN108092840B (zh) | 网络速率分段处理方法及装置 | |
| KR101243323B1 (ko) | 수중음향센서 네트워크에서의 패킷 검사방법 및 장치 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20180925 |
|
| CF01 | Termination of patent right due to non-payment of annual fee |