CN102480612A - 用于传输视频数据和触觉数据的方法以及视频采集装置 - Google Patents
用于传输视频数据和触觉数据的方法以及视频采集装置 Download PDFInfo
- Publication number
- CN102480612A CN102480612A CN201010567050XA CN201010567050A CN102480612A CN 102480612 A CN102480612 A CN 102480612A CN 201010567050X A CN201010567050X A CN 201010567050XA CN 201010567050 A CN201010567050 A CN 201010567050A CN 102480612 A CN102480612 A CN 102480612A
- Authority
- CN
- China
- Prior art keywords
- video
- acquisition device
- data
- video acquisition
- strange land
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 37
- 238000004891 communication Methods 0.000 claims abstract description 35
- 230000033001 locomotion Effects 0.000 claims abstract description 18
- 230000011664 signaling Effects 0.000 claims description 20
- 241001269238 Data Species 0.000 claims description 5
- 238000012545 processing Methods 0.000 claims description 4
- 238000005516 engineering process Methods 0.000 abstract description 14
- 229910052799 carbon Inorganic materials 0.000 abstract description 3
- 230000007613 environmental effect Effects 0.000 abstract 1
- 230000005540 biological transmission Effects 0.000 description 15
- 238000012360 testing method Methods 0.000 description 6
- 241001061260 Emmelichthys struhsakeri Species 0.000 description 5
- 230000006872 improvement Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000011160 research Methods 0.000 description 3
- 238000010276 construction Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000004927 fusion Effects 0.000 description 2
- 230000008676 import Effects 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 241001124569 Lycaenidae Species 0.000 description 1
- 240000007594 Oryza sativa Species 0.000 description 1
- 235000007164 Oryza sativa Nutrition 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000007600 charging Methods 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000008846 dynamic interplay Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 235000009566 rice Nutrition 0.000 description 1
- 239000004575 stone Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
- H04N7/185—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
- H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
- H04N7/157—Conference systems defining a virtual conference space and using avatars or agents
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Information Transfer Between Computers (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明涉及一种在可运动的视频采集装置与异地计算机之间经由通信网络传输视频数据和触觉数据的方法,并且还涉及一种视频采集装置,其中在所述通信网络中存在可直接通信的服务器,所述视频数据可被呈现在异地计算机屏幕上供用户观看,所述触觉数据可被用于控制作为用户化身的视频采集装置的运动状态。本发明方法借助P2P技术利用服务器在可联入互联网的计算机与可联入互联网的视频采集装置之间建立用于传输视频数据的第一信道和用于传输触觉数据的第二信道。本发明使得能够形成低成本的、长距离的、多用户对多化身的化身网络,从而减少大量人的出行以有助于低碳环保。
Description
技术领域
本发明涉及一种用于传输视频数据与触觉数据的方法,并涉及一种视频采集装置。
背景技术
随着动力技术与信息技术的融合,集自动控制、计算机、通信技术之大成的设备能够作为人的物理化身(physical avatar)延伸人的视觉(visual)与触觉(haptic),从而实现用户对远方环境的探寻。
利用化身延伸人的视觉与触觉的尝试首先在目前非常普遍的无线局域网上进行。无线局域网的带宽较高,可以流畅地传输视频数据与触觉数据。带有摄像头的视频采集装置可提供视频数据,个人电脑附带的操纵杆(Joystick)可提供触觉数据,所述触觉数据可以被用于控制可运动的视频采集装置的运动速度。一些大学与科研院所进行了通过无线局域网传输视频数据与触觉数据的研究。在局域网内采用client/server架构利用TCP协议或UDP协议进行视频数据与触觉数据的传输。中国山东电力研究院研制出变电站巡检机器人,视频采集装置位于机器人的移动本体上,该机器人的移动本体通过无线局域网与用于人机交互的计算机相连接,所述计算机接收操作人员的各种指令,并将这些指令下达到机器人移动体,另一方面所述计算机分析来自机器人的图像,若分析不正常则向上一级传输数据并发出警报。无线局域网的通信距离较短,限制了通过局域网的用于传输视频数据与触觉数据的技术的应用范围。
随着3G电信网络的发展,通过3G电信网络长距离传输视频数据和触觉数据成为可能,各国的电信运营商已经开始一些尝试。专利公开号为CN200910176998的专利申请公布了一种传输视频数据 与触觉数据的方法和一种视频采集装置。用户通过手机屏幕看到视频采集装置所采集到的视频,而用户可以通过手机键盘输入的前进、后退、左转、右转等触觉数据,这些数据通过3G通信网络被传输到视频采集装置以控制其运动。在该系统中,通过3G网络传输数据的成本较高,并且为了在手机与视频采集装置之间连接数据通道需要复杂的电信级信令(signaling),而且手机键盘输入的触觉信号较简单从而导致对视频采集装置的控制效果不够好。
利用专用通讯线路可以将视频数据与触觉数据传输到更远的地方。月球车就是一例。控制员坐在地面控制中心的屏幕前面,月球车传回月球表面图像显示在屏幕上,地面操作员根据月表图像发出控制命令,包含控制命令的触觉数据被传送给月球车,引导月球车避开障碍前行。由于采用专用通信线路,成本非常高,而且地面计算机与月球车基本上单对单通信,未形成大范围的通信网络。
在互联网上P2P(Peer to Peer)技术正在得到越来越多的应用。借助该技术,没有Internet IP地址(也称为公网IP地址)的两台计算机可以直接传输多媒体文件。所述的计算机借助具有Internet IP地址的路由器联入互联网,所述计算机的IP地址也被称为私网地址。两台计算机都可以与互联网上的服务器进行通信,所述路由器进行网络地址转换(NAT:Network Address Translator),从该计算机发出的UDP数据包的源IP地址和端口号portA被替换成路由器的IP地址和路由器为该计算机分配的端口号portB,并且所述路由器将接收到的目的端口号为portB的数据包发送给所述计算机。在通过服务器获知对方的路由器的公网IP地址和通信端口号portB之后,两台计算机就可以直接传输文件数据了。P2P是熟知的技术,这里不详细描述。所述的两台计算机之间的通信距离可以是较长的,它们可以位于一个城市不同的楼宇内,可以位于不同的城市,也可以位于不同的国家。同时,大多数可访问互联网的计算机都可以利用P2P技术相互传输多媒体文件,形成多对多的网络。
相比于无线局域网,现有的互联网具有长距离的优点。
相比于3G电信网络,现有的互联网具有低成本的优点。
相比于专用线路,现有的互联网具有可接入位置多的特点。
发明内容
有鉴于此,本发明的任务是提供一种用于传输视频数据和触觉数据的方法和一种视频采集装置,以形成低成本的、长距离的、多对多(多用户对多化身)的化身网络,从而减少大量人出行以有助于低碳环保。
该任务通过具有权利要求1所述特征的方法和具有权利要求10所述特征的装置来解决。
在本发明的方法方面,本发明的思想是,在本地的可运动的视频采集装置与异地计算机之间经由通信网络传输视频数据和触觉数据,在所述通信网络中存在可直接通信的服务器,所述视频数据可被呈现在异地计算机屏幕上供用户观看,所述触觉数据可被用于控制视频采集装置的运动状态。本发明方法包括以下步骤:视频采集装置定期在服务器上分别注册视频地址信息和触觉地址信息;用户在异地计算机上输入视频采集装置标识,异地计算机在服务器上分别注册视频地址信息和触觉地址信息,异地计算机将包含视频采集装置标识的请求信令发送给服务器;所述服务器根据所述视频采集装置标识查询到对应于视频采集装置的视频地址信息和触觉地址信息,并将视频地址信息和触觉地址信息通知异地计算机;所述服务器根据所述视频采集装置标识将所述请求信令与对应于异地计算机的视频地址信息和触觉地址信息通知视频采集装置;根据从服务器接收的视频地址信息和触觉地址信息,异地计算机和视频采集装置一起建立用于直接传输视频数据的第一信道和用于直接传输触觉数据的第二信道;视频采集装置利用第一信道直接向异地计算机发送视频数据,异地计算机利用第二信道直接向视频采集终端发送触觉数据,所述触觉数据是一组对状态的采样值。
其中,视频采集装置可被视为坐在异地计算机前的用户的化身。
其中地址信息可以包含IP地址和端口号,通信网络可以是互联网和无线局域网的组合(例如,视频采集装置可以先通过无线局域网与无线路由器通信,而无线路由器直接位于互联网上),异地计算机和视频采集装置可以都不具有Internet IP地址、也即公网IP地址,服务器上记录的地址信息是离视频采集装置或异地计算机最近的互联网上的路由器的公网IP地址和由该路由器分配给异地计算机或视频采集装置的端口号。
由上可以看出,本发明方法将P2P技术用于用户与化身之间的视频和触觉数据的传输,使得可联入互联网的计算机经过长距离向可联入互联网的视频采集装置传输较丰富的触觉信息,而可联入互联网的视频采集装置经过长距离向可联入互联网的计算机传输视频信息。
本发明方法不同于局域网内借助化身延伸人的视觉和触觉的方法,本发明方法可以在较远的距离上借助化身延伸人的视频和触觉。无线局域网的传输距离只有几百米,而互联网的传输距离可以是几千公里,用户和化身终端可以位于一个城市不同的楼宇内,可以位于不同的城市,也可以位于不同的国家。
本发明方法不同于目前3G电信网内借助化身延伸人的视觉和触觉的方法,所传输的触觉信息更加丰富,不再局限与手机键盘输入的诸如前进、后退等简单的触觉信息,利用操纵杆等计算机外围设备可以输入一组对指定运动状态的采样值,诸如给定速度曲线;同时通信成本更低,用于建立用户与化身之间连接的信令更加简单。
本发明方法不同于专用通信线路借助化身延伸人的视觉和触觉的方法,用户的位置和化身的位置所受到的限制更少,只要用户的计算机和视频采集装置可联入互联网并通信网络带宽较高,就可以建立用户与化身之间的联系。而且多个用户和多个化身可以同时联入互联网;同时利用现有互联网和无线局域网的组合,成本更低。
简而言之,相比于现有技术,利用本发明方法形成的化身网络功能更强、成本更低。因此本发明为融合动力技术和信息技术的化身 网络的大规模商用打下基础,进而通过减少大量人的出行来减少碳排放并保护自然环境。
在本发明的一个改进方案中,所述的视频数据包含多个对视频帧的压缩数据,针对视频帧的压缩数据可以被分成匹配于带宽的多组数据包,所述数据包组相隔一定时间被发送,在针对上一视频帧的压缩数据未发送完时针对新采集的视频帧的压缩数据不被发送给异地计算机。由于互联网的带宽相对于局域网的带宽更少,利用该改进方案可以在互联网带宽不够的情况仍传输清晰的视频图像,这有利于用户根据视频信息发出进一步的触觉信息。
在本发明的另一改进方案中,视频采集装置所采集的视频数据被存放在视频采集装置上,所述视频数据的一部分被传送给异地计算机,用户根据所接收到的视频数据将触觉数据发送给视频采集装置。由此,对于传媒等行业而言,用户可以根据部分视频数据控制视频采集装置的运动以记录所期望的内容,在互联网带宽有限的情况下仍可获得在视频采集装置上存放的完整视频数据进行后期处理。
在本发明的又一改进方案中,视频采集装置向异地计算机发送触觉数据。由此,异地计算机可以根据来自操纵杆的给定运动状态和来自视频采集装置的实际运动状态确定要发送的触觉数据,形成闭环网络控制系统。视频采集装置可以通过所配备的传感器来获取针对实际运动状态的一组采样值。
在本发明的另一实施形式中,服务器对于异地计算机与视频采集装置的接入权限进行管理。例如,当异地计算机在服务器上注册地址信息时,只有在注册时输入正确的用户名和密码才允许注册。
在本发明的装置方面,本发明涉及一种可运动的视频采集装置,所述视频采集装置包括用于进行移动的机电单元、用于采集视频数据的输入单元、用于处理视频数据和触觉数据的计算单元以及用于接收与发送视频数据和触觉数据的通信单元,其中,所述视频采集装置根据权利要求1所述的方法接入互联网并传输视频数据和触觉数据。
本发明的其他优点可以从下面的具体实施例中得到。
附图说明
下面参考附图根据实施例更详细地描述本发明。在所述附图中:
图1示出了包含本发明装置的化身网络的系统结构图;
图2示出了根据本发明方法的序列图。
具体实施方式
图1示出了包含本发明装置的化身网络的系统结构图。化身网络包括多个视频采集装置3(出于简化目的在图中仅示出一个)、多个异地计算机2(处于简化目的在图中仅示出一个)、位于互联网上具有公网IP地址的服务器1、和通信网络4。所述通信网络4可以是互联网和有线局域网、无线局域网的组合。视频采集装置3位于内容提供现场内,异地计算机处于异地的用户面前。视频采集装置3与服务器1可通过包含无线局域网和互联网Internet的通信网络4相连接。异地计算机2与服务器1可通过包含有线局域网和互联网Internet的通信网络4相连接。借助于服务器1,按照稍后的围绕图2描述的流程,异地计算机2与视频采集装置3可通过通信网络4相连接,以传输视频数据和触觉数据。
异地计算机2可具有局域网的私网IP地址,通过具有公网IP地址的路由器联入互联网。异地计算机2处于用户的面前,配属有操纵杆21(Joystick)。用户观看异地计算机2屏幕上的现场视频信息,结合自身意愿通过操纵杆21给出触觉信息,所述的触觉信息将影响视频采集装置3的速度与位置,通过视频采集装置3所采集的视频信息随着视频采集装置的运动而改变,因而从现场内容角度看异地的用户与现场形成动态交互,而从用户角度看视频采集装置3可被视为用户的化身。
视频采集装置3作为用户的化身,不是必须具有公网IP地址。视频采集装置3可具有无线局域网的私网IP地址,通过具有无线网 关联入互联网。视频采集装置3包括视频输入单元31、用于处理视频数据和触觉数据的计算单元32、用于根据触觉数据进行移动的机电单元33、和用于传输视频数据和触觉数据的通信单元(未示出)。
所述机电单元33可视为化身的“脚”,机电单元33包含车轮、传动机构、用于驱动车轮的直流电动机和步进电机、用于控制电机的电力电子器件和作为动力源的蓄电池。电力电子器件例如可以从计算单元接收PWM信号,根据PWM信号的占空比来确定直流电动机的转速,进而控制车轮的速率,所述PWM信号根据触觉数据加以生成。
所述视频输入单元31可视为化身的“眼”,视频输入单元包含CCD摄像头或CMOS摄像头、视频采集卡、以及云台。视频采集卡例如可以通过PCI总线与计算单元相连接。计算单元可以给视频采集卡发送与视频采集相关的命令。视频输入单元31可以配备多个摄像头,以便采集多个角度的视频信息或者达到立体的效果。
视频采集装置的计算单元32和通信单元处理和传输与化身的“脚”或“眼”相关的视频数据和触觉数据。它们可以利用工控机和无线网卡来实现。来自视频输入单元的视频帧信息例如被压缩成多个小于1KB的数据包并被发送给异地计算机,从异地计算机接收的包含触觉数据的数据包被转换成PWM信号并被输入到视频采集装置的机电单元。
图2示出了根据本发明方法的序列图,所述序列图描述了本发明方法的流程,整个流程涉及图1中的位于本地的视频采集装置3、异地计算机2和位于公网上的服务器1。
视频采集装置3上电后,应维持至少两条在视频采集装置3与距它最近的具有公网IP地址的路由器之间的UDP通道,第一UDP通道被用于从视频采集装置3向异地计算机2传输视频数据,而第二UDP通道被用于从异地计算机2向视频采集装置3传输触觉数据,另外的UDP通道可以被用于从视频采集装置3向异地计算机2传输触觉数据,也可以被用于传输听觉数据。
为此,在步骤100处,视频采集装置通过发送包含注册信令和化身信息(例如视频采集装置的昵称或者ID号)的数据包而在服务器上注册装置视频端口号,并在没有收到来自异地计算机的请求信令的情况下定期重复注册。每次注册的间隔小于或等于3分钟,以便维持在视频采集装置3与距它最近的具有公网IP地址的路由器之间的第一UDP通道,并且服务器记录针对第一UDP通道的所述路由器的IP地址和视频端口号。
在步骤200处,视频采集装置通过发送包含注册信令和化身信息的数据包而在服务器上注册装置触觉端口号,并在没有收到来自异地计算机的请求信令的情况下定期重复注册。每次注册的间隔小于或等于3分钟,以便维持在视频采集装置3与距它最近的具有公网IP地址的路由器之间的第二UDP通道,并且服务器记录针对第二UDP通道的所述路由器的IP地址和视频端口号。
上述的步骤100与步骤200的次序可以相互调换。服务器在收到包含不同类型注册信令的数据包后分别回应用于确认的数据包给视频采集装置。在注册后,服务器将对应于所述化身信息的视频采集装置视为在线。
用户在异地计算机上输入连接化身的命令,所述命令带有化身信息和用户名(必要时带有密码,而用户名也可从配置文件读取)等参数。同样地,应建立至少两条在异地计算机2与距它最近的具有公网IP地址的路由器之间的UDP通道,异地计算机的第一UDP通道被用于从视频采集装置3向异地计算机2传输视频数据,而异地计算机的第二UDP通道被用于从异地计算机2向视频采集装置3传输触觉数据,异地计算机的其他UDP通道可以被用于从视频采集装置3向异地计算机2传输触觉数据,也可以被用于传输听觉数据。
在步骤300处,异地计算机通过发送包含注册信令和用户名的数据包而在服务器上注册用户视频端口号,服务器记录针对异地计算机第一UDP通道的所述路由器的IP地址和视频端口号。
在步骤400处,异地计算机通过发送包含注册信令和用户名的数 据包而在服务器上注册用户触觉端口号,服务器记录针对异地计算机第二UDP通道的所述路由器的IP地址和触觉端口号。
上述的步骤300与步骤400的次序可以相互调换。服务器在收到来自异地计算机的包含不同类型注册信令的数据包后分别回应用于确认的数据包给异地计算机。在注册后,服务器将对应于所述用户名的位于异地计算机前的用户视为在线。
在异地计算机2在服务器1上注册了视频端口号和触觉端口号之后,在步骤500处,根据用户输入的视频采集装置信息(也即化身信息),异地计算机2将包含视频采集装置信息的请求信令发送给服务器1。
此时,服务器中记录了对应于多个在线视频采集装置3的视频端口号、触觉端口号和公网IP地址。根据请求信令中的化身昵称或ID,服务器找到异地计算机2要连接的视频采集装置的相关记录。必要时,服务器1可以检查对应于所述异地计算机2的用户是否有权限连接所请求的视频采集装置3,并且服务器还可检查所请求的视频采集装置3是否正与其他异地计算机相连接。
如果所请求的视频采集装置不在线或者正与其他异地计算机相连接或者用户权限不够,服务器1将回传请求失败的信息,整个连接流程结束。
如果所请求的视频采集装置在线并且处于空闲而且用户具有连接权限,那么在步骤600处,服务器1回传用于确认请求的数据包,在所述数据包中有对应于视频采集装置的公网IP地址和视频端口号、触觉端口号。
接着在步骤700处,根据对应于视频采集装置3的公网IP地址和端口号,服务器1将将用户的请求信令转发给视频采集装置3,而且查找出对应于发出请求的异地计算机2的公网IP地址和视频端口号、触觉端口号并将其通知视频采集装置3。
在相互知道对方的地址信息之后,在异地计算机2与异地计算机之间应建立两个信道以分别传输视频数据和触觉数据。为此,异地 计算机2利用自身的第一UDP通道向对应于视频采集装置3的公网IP地址和视频端口号发送测试数据包,并利用自身的第二UDP通道向对应于视频采集装置3的公网IP地址和触觉端口号发测试数据包。
同理,视频采集装置3利用自身的第一UDP通道向对应于异地计算机2的IP地址和视频端口号发送测试数据包,并利用自身的第二UDP通道向对应异地计算机2的IP地址和触觉端口号发送测试数据包。
所述测试数据包可能不会到达异地计算机2或视频采集装置3,但借助所述测试数据包将异地计算机2的第一UDP通道、视频采集装置3的第一UDP通道和互联网通路连接成用于传输视频数据的第一信道,并将异地计算机2的第二UDP通道、视频采集装置3的第二UDP通道和互联网通路连接成用于传输触觉数据的第二信道。建立信道的更多细节可参考熟知的P2P技术。
此后在步骤800处,视频采集装置3利用第一信道确认已接收到用户的请求,并等待来自异地计算机的再次确认。一旦收到再次确认,视频采集装置3开始利用第一信道向异地计算机传输视频数据,并在第二信道上等待来自异地计算机的触觉数据。
异地计算机通过第一信道接着到确认信息后在步骤900处通过第一信道向视频采集装置3发出用于再次确认的数据包,并在步骤1000处,向服务器发送用于确认建立连接的数据包。此后,异地计算机在第一信道上等待来自视频采集装置3的视频数据,并且利用第二信道向视频采集装置3发送触觉数据。所述触觉数据是一组对运动状态的采样值,例如可以是对操纵杆倾斜角度、也即给定运动速度的一组采样值。
异地计算机2将从第一信道所接收的视频数据进行处理后呈现给用户,用户根据视频信息来确认化身(也即视频采集装置)下一步的运动状态,并通过操纵杆产生触觉信息,所述触觉信息通过第二信道被传输给视频采集装置3,视频采集装置3对所接收的触觉信 息进行处理,然后按照用户的意愿作为用户的化身“行走”,并将化身所“看到”的视频信息通过第一信道传送给用户。
当用户不再想与自己的化身继续连接时,用户给异地计算机2输入断开连接命令。收到该命令后,异地计算机2停止在第一信道上接收视频数据并停止在第二信道上发送触觉数据。在步骤1100处,异地计算机2向服务器1发送包含断开连接信令的数据包。服务器1在接收该数据包后将视频采集装置3的标识设置为空闲。必要时,服务器1计算出用户与化身之间连接的持续时间,以供计费等后续处理。
此外,异地计算机2在步骤1200处向视频采集装置3发送包含断开连接信令的数据包,视频采集装置3在接收到该数据包后停止在第一信道上发送视频数据并停止在第二信道上接收触觉数据,并定期在服务器上注册视频端口号和触觉端口号,服务器将该视频采集装置3视为在线。
当视频采集装置3在线并空闲时,其他用户可以借助可联入互联网的异地计算机将该视频采集装置3变成自己的化身。
应当理解,上述实施例不是旨在限制本发明,而是旨在说明本发明。在不脱离本发明精神的范围内,本领域的技术人员可以进行多种修改与变更。在附带的权利要求中限定了本发明的保护范围。
附图标记列表
1 服务器
2 异地计算机
21 操纵杆
3 视频采集装置
31 视频输入单元
32 计算单元
33 机电单元
4 通信网络
100 视频采集装置在服务器上注册视频地址信息
200 视频采集装置在服务器上注册触觉地址信息
300 异地计算机在服务器上注册视频端地址信息
400 异地计算机在服务器上注册触觉端地址信息
500 异地计算机发出请求信令
600 服务器回应请求信令
700 服务器转发请求信令
800 视频采集装置向异地计算机确认请求信令
900 异地计算机向视频采集装置再次确认
1100 异地计算机向服务器发出断开连接信令
1200 异地计算机向视频采集装置发出断开连接信令
Claims (10)
1.一种在可运动的视频采集装置(3)与异地计算机(2)之间经由通信网络(4)传输视频数据和触觉数据的方法,其中,在所述通信网络(4)中存在可直接通信的服务器(1),所述视频数据可被呈现在异地计算机(2)屏幕上供用户观看,所述触觉数据可被用于控制视频采集装置(3)的运动状态,
其特征在于,
视频采集装置(3)定期在服务器(1)上分别注册视频地址信息和触觉地址信息;
用户在异地计算机(2)上输入视频采集装置标识,异地计算机(2)在服务器(1)上分别注册视频地址信息和触觉地址信息,异地计算机(2)将包含视频采集装置标识的请求信令发送给服务器(1);
所述服务器(1)根据所述视频采集装置标识查询到对应于视频采集装置(3)的视频地址信息和触觉地址信息,并将所述视频地址信息和触觉地址信息通知异地计算机(2);
所述服务器(1)根据所述视频采集装置标识将所述请求信令与对应于异地计算机(2)的视频地址信息和触觉地址信息通知视频采集装置(3);
根据从服务器(1)接收的视频地址信息和触觉地址信息,异地计算机(2)和视频采集装置(3)一起建立用于直接传输视频数据的第一信道和用于直接传输触觉数据的第二信道;
视频采集装置(3)利用第一信道直接向异地计算机(2)发送视频数据,异地计算机(2)利用第二信道直接向视频采集终端(3)发送触觉数据,所述触觉数据是一组对状态的采样值。
2.如权利要求1所述的方法,其特征在于,
所述的地址信息包含IP地址和端口号。
3.如权利要求1所述的方法,其特征在于,
所述视频数据包含多个针对视频帧的压缩数据,针对视频帧的压缩数据可以被分成匹配于通信网络带宽的多组数据包,所述数据包组相隔一定时间被发送,在针对上一视频帧的压缩数据未发送完时针对新采集的视频帧的压缩数据不被发送给异地计算机(2)。
4.如权利要求1所述的方法,其特征在于,
由视频采集装置(3)所采集的视频数据被存放在视频采集装置(3)上,所述视频数据的一部分被传送给异地计算机(2),用户根据所接收到的视频数据将触觉数据发送给视频采集装置(3)。
5.如权利要求1所述的方法,其特征在于,
所述的运动状态包含运动速率和运动方向。
6.如权利要求1所述的方法,其特征在于,
所述视频采集装置(3)将由传感器所获取的针对实际运动状态的触觉数据发送给异地计算机(2)。
7.如权利要求1所述的方法,其特征在于,
所述视频采集装置标识是视频采集装置的字符串昵称。
8.如权利要求1所述的方法,其特征在于,
所述视频采集装置标识是视频采集装置的数字编号。
9.如权利要求1所述的方法,其特征在于,
所述服务器(1)对异地计算机(2)与视频采集装置(3)的接入权限进行管理。
10.一种可运动的视频采集装置(3),所述视频采集装置包括用于进行移动的机电单元、用于采集视频数据的输入单元、用于处理视频数据和触觉数据的计算单元以及用于接收与发送视频数据和触觉数据的通信单元,其中,所述视频采集装置根据如权利要求1所述的方法接入通信网络(4)并传输视频数据和触觉数据。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201010567050XA CN102480612A (zh) | 2010-11-21 | 2010-11-21 | 用于传输视频数据和触觉数据的方法以及视频采集装置 |
PCT/CN2011/082344 WO2012065560A1 (zh) | 2010-11-21 | 2011-11-17 | 用于传输视频数据与触觉数据的方法以及视频采集装置 |
US13/988,233 US9332171B2 (en) | 2010-11-21 | 2011-11-17 | Method for transmitting video data and haptic data and video acquisition device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201010567050XA CN102480612A (zh) | 2010-11-21 | 2010-11-21 | 用于传输视频数据和触觉数据的方法以及视频采集装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN102480612A true CN102480612A (zh) | 2012-05-30 |
Family
ID=46083505
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201010567050XA Pending CN102480612A (zh) | 2010-11-21 | 2010-11-21 | 用于传输视频数据和触觉数据的方法以及视频采集装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9332171B2 (zh) |
CN (1) | CN102480612A (zh) |
WO (1) | WO2012065560A1 (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103901856A (zh) * | 2014-03-23 | 2014-07-02 | 余浪 | 用于远程控制机器人的方法以及机器人化身网络 |
CN106027945A (zh) * | 2015-09-16 | 2016-10-12 | 展视网(北京)科技有限公司 | 一种融合触觉感知功能的视频聊天移动终端 |
CN106850787A (zh) * | 2017-01-21 | 2017-06-13 | 三峡大学 | 一种基于物联网的文化景观信息采集与传播系统 |
CN106856504A (zh) * | 2015-12-09 | 2017-06-16 | 英默森公司 | 触觉效应信号的公共网络传输 |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103577673A (zh) * | 2012-08-01 | 2014-02-12 | 艾康(上海)信息技术有限公司 | 实时交互远程会诊系统及方法 |
US9619980B2 (en) | 2013-09-06 | 2017-04-11 | Immersion Corporation | Systems and methods for generating haptic effects associated with audio signals |
US9576445B2 (en) | 2013-09-06 | 2017-02-21 | Immersion Corp. | Systems and methods for generating haptic effects associated with an envelope in audio signals |
US9652945B2 (en) * | 2013-09-06 | 2017-05-16 | Immersion Corporation | Method and system for providing haptic effects based on information complementary to multimedia content |
CN104410796A (zh) * | 2014-12-23 | 2015-03-11 | 张家恺 | 一种摄影机器人及其使用方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1913533A (zh) * | 2006-09-05 | 2007-02-14 | 北京天地互连信息技术有限公司 | 基于会话初始化协议的远程视频监控系统及其实现方法 |
CN1913461A (zh) * | 2006-08-30 | 2007-02-14 | 北京天地互连信息技术有限公司 | 基于下一代互联网的远程视频监控系统及其实现方法 |
CN101263535A (zh) * | 2005-09-12 | 2008-09-10 | Igt公司 | 分布式游戏服务 |
CN101552804A (zh) * | 2008-12-22 | 2009-10-07 | 北京大学深圳研究生院 | 网络视频发布系统及其网络视频访问方法 |
CN101699858A (zh) * | 2009-11-06 | 2010-04-28 | 深圳华为通信技术有限公司 | 一种摄像头控制方法及控制终端以及摄像系统 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7305357B2 (en) * | 2002-01-24 | 2007-12-04 | Shaw Cablesystems, G.P. | Method and system for providing and controlling delivery of content on-demand over a cable television network and a data network |
US7508941B1 (en) * | 2003-07-22 | 2009-03-24 | Cisco Technology, Inc. | Methods and apparatus for use in surveillance systems |
CA2455043A1 (en) * | 2004-01-09 | 2005-07-09 | Digital Multitools Inc. | Method and apparatus for facilitating control of a target computer by a remote computer |
KR100618375B1 (ko) * | 2004-08-30 | 2006-08-31 | 삼성전자주식회사 | 웹서비스가 가능한 디지털 영상/음향 처리장치, 그의웹서비스 제공방법 및 웹서비스 시스템 |
CN1845602A (zh) * | 2005-04-08 | 2006-10-11 | 树钢 | 移动远程视频监控双向音频系统及方法 |
US8516050B1 (en) * | 2006-06-28 | 2013-08-20 | Insors Integrated Communications | Methods and program products for communicating file modifications during a collaboration event |
CN101178843A (zh) * | 2006-11-10 | 2008-05-14 | 东莞艺美达电子有限公司 | 基于数字射频传输技术的、依靠机载摄像为方向判别依据的遥控机器人 |
CN201035117Y (zh) * | 2007-05-10 | 2008-03-12 | 北京深浪电子技术有限公司 | 高压输电线路地线巡检机器人 |
US20090204689A1 (en) * | 2008-01-31 | 2009-08-13 | Cyrus Chipman | Method and apparatus for remote surveillance of a premises |
-
2010
- 2010-11-21 CN CN201010567050XA patent/CN102480612A/zh active Pending
-
2011
- 2011-11-17 US US13/988,233 patent/US9332171B2/en active Active
- 2011-11-17 WO PCT/CN2011/082344 patent/WO2012065560A1/zh active Application Filing
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101263535A (zh) * | 2005-09-12 | 2008-09-10 | Igt公司 | 分布式游戏服务 |
CN1913461A (zh) * | 2006-08-30 | 2007-02-14 | 北京天地互连信息技术有限公司 | 基于下一代互联网的远程视频监控系统及其实现方法 |
CN1913533A (zh) * | 2006-09-05 | 2007-02-14 | 北京天地互连信息技术有限公司 | 基于会话初始化协议的远程视频监控系统及其实现方法 |
CN101552804A (zh) * | 2008-12-22 | 2009-10-07 | 北京大学深圳研究生院 | 网络视频发布系统及其网络视频访问方法 |
CN101699858A (zh) * | 2009-11-06 | 2010-04-28 | 深圳华为通信技术有限公司 | 一种摄像头控制方法及控制终端以及摄像系统 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103901856A (zh) * | 2014-03-23 | 2014-07-02 | 余浪 | 用于远程控制机器人的方法以及机器人化身网络 |
CN106027945A (zh) * | 2015-09-16 | 2016-10-12 | 展视网(北京)科技有限公司 | 一种融合触觉感知功能的视频聊天移动终端 |
CN106856504A (zh) * | 2015-12-09 | 2017-06-16 | 英默森公司 | 触觉效应信号的公共网络传输 |
CN106856504B (zh) * | 2015-12-09 | 2020-10-30 | 意美森公司 | 公共网络中发送或接收公共广播和触觉数据的方法及装置 |
CN106850787A (zh) * | 2017-01-21 | 2017-06-13 | 三峡大学 | 一种基于物联网的文化景观信息采集与传播系统 |
CN106850787B (zh) * | 2017-01-21 | 2023-10-27 | 三峡大学 | 一种基于物联网的文化景观信息采集与传播系统 |
Also Published As
Publication number | Publication date |
---|---|
US9332171B2 (en) | 2016-05-03 |
US20140071291A1 (en) | 2014-03-13 |
WO2012065560A1 (zh) | 2012-05-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102480612A (zh) | 用于传输视频数据和触觉数据的方法以及视频采集装置 | |
Fitzek et al. | Computing in communication networks: From theory to practice | |
CN111225375B (zh) | 下一代物联网体系架构设计方法与应用系统 | |
KR20200016193A (ko) | 무선 통신 시스템의 코어셋에서 신호를 수신하는 방법 방법 및 상기 방법을 이용하는 장치 | |
CN101931626B (zh) | 远程控制过程中实现安全审计功能的服务终端 | |
WO2019104652A1 (zh) | 一种无人机系统及其通信方法、遥控装置 | |
CN112352413B (zh) | 低时延数据报响应的计算机网络协议 | |
CN103442224A (zh) | 一种基于nat穿透的视频监控访问策略和实现方法 | |
CN202150183U (zh) | 一种交通管理空中信息采集平台 | |
CN108234523B (zh) | 一种应用于电视台的多层次内外网数据交互系统 | |
CN108200167A (zh) | 一种基于云端的无人机远程多途径组合控制方法 | |
RU2013127235A (ru) | Беспроводной сетевой интерфейс с инфраструктурными и прямыми режимами | |
CN104090538B (zh) | 基于wifi的智能助残轮椅控制系统及控制方法 | |
CN104536411A (zh) | 利用远程接入服务实现对智能家居管理的系统及方法 | |
CN104378410A (zh) | 一种微型私有云存储、传输的系统及方法 | |
CN102045409A (zh) | 网络穿透方法及网络通讯系统 | |
CN104539722B (zh) | 一种远近程通信操控数据的收集方法 | |
CN102724767A (zh) | 一种移动用户的虚拟专用网接入方法及其装置 | |
Moorthy et al. | Cloudraft: A cloud-based framework for remote experimentation for mobile networks | |
CN103685497B (zh) | 一种在线存储共享方法和系统 | |
Krco et al. | Mobile network supported wireless sensor network services | |
CN114845256B (zh) | 一种基于5g+vr的通信网络推演训练方法 | |
CN103065444A (zh) | 无线遥控模型玩具 | |
Casetti | 5G Standalone Deployments Are on the Rise [Mobile Radio] | |
CN114303438A (zh) | 根据5g中的应用服务器的重定位的高效处理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
DD01 | Delivery of document by public notice |
Addressee: Yu Lang Document name: the First Notification of an Office Action |
|
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20120530 |