CN205726125U - 一种新型机器人远程监视系统 - Google Patents
一种新型机器人远程监视系统 Download PDFInfo
- Publication number
- CN205726125U CN205726125U CN201620257611.9U CN201620257611U CN205726125U CN 205726125 U CN205726125 U CN 205726125U CN 201620257611 U CN201620257611 U CN 201620257611U CN 205726125 U CN205726125 U CN 205726125U
- Authority
- CN
- China
- Prior art keywords
- module
- technique
- stereoscopic vision
- robot
- virtual reality
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
本实用新型提供一种基于虚拟现实技术和双目立体视觉技术的机器人远程监视系统,旨在实现机器人的远程全方位3D视角监视。上述机器人远程监视系统包括带有姿态检测的眼镜式视频接收显示模块和云台式双摄像头监视传输模块,该眼镜式视频接收显示模块与云台式双摄像头监视传输模块通过无线传输方式传送数据。云台式双摄像头监视传输模块用于采集机器人视角图像信息并无线发送给眼镜式视频接收显示模块,眼镜式视频接收显示模块接收并向机器人监控者显示机器人视角画面。带有姿态检测的眼镜式视频接收显示模块不断检测佩戴者头部姿态变化,将姿态数据无线发送给云台式双摄像头监视传输模块,云台式双摄像头监视传输模块接收信号并调整云台姿态,从而实现视野跟随。
Description
技术领域
本实用新型涉及机器人技术,尤其是基于虚拟现实技术与双目立体视觉技术的机器人。
背景技术
传统的机器人远程监视系统一般采用平面屏幕监视,平面屏幕只能显示单摄像头影像,且摄像头视角移动不便,无法提供机器人完整的视角和景深效果,不利于进行远程精细操控,人机交互体验不尽人意。最近几年虚拟现实技术发展迅速,虚拟现实设备开始普及,并应用于各种场合。
实用新型内容
本实用新型提供一种基于虚拟现实技术和双目立体视觉技术的机器人远程监视系统,旨在实现机器人的远程全方位3D视角监视。
本实用新型解决其技术问题所采用的技术方案是:
基于虚拟现实技术和双目立体视觉技术的机器人远程监视系统,包括带有姿态检测的眼镜式视频接收显示模块和云台式双摄像头监视传输模块,该眼镜式视频接收显示模块与云台式双摄像头监视传输模块通过无线传输方式传送数据。云台式双摄像头监视传输模块用于采集机器人视角图像信息并无线发送给眼镜式视频接收显示模块,眼镜式视频接收显示模块接收并向机器人监控者显示机器人视角画面。带有姿态检测的眼镜式视频接收显示模块不断检测佩戴者头部姿态变化,将姿态数据无线发送给云台式双摄像头监视传输模块,云台式双摄像头监视传输模块接收信号并调整云台姿态,从而实现视野跟随。
所述带有姿态检测的眼镜式视频接收显示模块是基于虚拟现实技术的眼镜式显示器,该眼镜式显示器包括无线数据收发模块、显示模块、姿态检测模块。上述姿态检测模块为惯性传感器,由加速度、重力场、磁场信息计算姿态,从而监测佩戴者头部运动,进而获得佩戴者的实时视角。
所述云台式双摄像头监视传输模块是基于双目立体视觉技术的云台式摄像头模块,该云台式双摄像头监视传输模块包括无线数据收发模块、双目摄像头模块、云台模块。上述双目摄像头模块基于双目立体视觉技术,通过视差原理采集立体图像,两个摄像头之间距离可调,以适应不同佩戴者的两眼间距,摄像头均为广角摄像头,模拟人眼的视角范围。
附图说明
为了更清楚地说明本实用新型现有技术中的技术方案,下面对现有技术使用附图简单介绍。
图1为本实用新型工作示意图
具体实施方式
本实用新型提供一种基于虚拟现实技术和双目立体视觉技术的机器人远程监视系统,包括带有姿态检测的眼镜式视频接收显示模块和云台式双摄像头监视传输模块。
虚拟现实技术指的是一种由计算机生成的、实时动态的三维立体模拟环境,是通过计算机技术和传感器技术创造的一种新型的人机交互方式。
双目立体视觉技术是机器视觉的一种重要形式,它是基于视差原理并利用成像设备从不同的位置获取被测物体的两幅图像,从而获取物体三维几何信息的方法。融合两只眼睛获得的图像并观察它们之间的差别,使我们可以获得明显的深度感,建立特征间的对应关系,将同一空间物理点在不同图像中的映像点对应起来,这个差别,我们称作视差(Disparity)图像。
上述带有姿态检测的眼镜式视频接收显示模块是基于虚拟现实技术的眼镜式显示器,该眼镜式显示器具有无线数据收发模块、显示模块、姿态检测模块。
无线数据收发模块用于与云台式双摄像头监视传输模块进行无线数据交换,包括接收图像数据和发送姿态传感器姿态数据;显示模块用于将无线数据收发模块接收的视差图像数据向佩戴者显示,显示模块包括两块屏幕,两块屏幕分别显示对应两个摄像头的图像,从而生成三维图像画面;姿态检测模块基于惯性导航技术,通过加速度传感器、陀螺仪传感器、磁场传感器获得的数据计算姿态,实现实时姿态检测,从而监测佩戴者头部运动,获得佩戴者的实时视角,并将实时视角数据通过无线数据收发模块无线发送给云台式双摄像头监视传输模块。
上述云台式双摄像头监视传输模块是基于双目立体视觉技术的云台式摄像头模块,该云台式双摄像头监视传输模块包括无线数据收发模块、双目摄像头模块、云台模块。
无线数据收发模块用于与眼镜式视频接收显示模块进行无线数据交换,包括发送图像数据和接收姿态传感器姿态数据;双目摄像头模块用于通过视差原理获取视差图像,并将视差图像数据通过无线数据收发模块发送给眼镜式视频接收显示模块,上述双目摄像头模块包括两个可以调节间距的摄像头,以适应不同佩戴者的两眼间距,上述摄像头为广角摄像头,以模拟人眼的视角范围;云台模块用于双目摄像头模块与机器人主体的连接,起支撑、稳定、转向的功能,上述云台模块是一种特殊的三轴云台,其相比于传统云台有更强的扭矩,以支撑双目摄像头模块,并带有稳定功能,保证摄像头拍摄画面的稳定,云台模块还能根据由无线数据收发模块接收到的佩戴者实时视角数据不断调整姿态,使双目摄像头模块的视角与佩戴者的视角保持一致。
Claims (8)
1.基于虚拟现实技术和双目立体视觉技术的机器人远程监视系统,其特征在于:包括带有姿态检测的眼镜式视频接收显示模块和云台式双摄像头监视传输模块,该眼镜式视频接收显示模块与云台式双摄像头监视传输模块通过无线传输方式传送数据。
2.根据权利要求1所述基于虚拟现实技术和双目立体视觉技术的机器人远程监视系统,其特征在于:所述带有姿态检测的眼镜式视频接收显示模块为眼镜式3D视频显示模块并带有姿态检测模块、无线数据收发模块。
3.根据权利要求1所述基于虚拟现实技术和双目立体视觉技术的机器人远程监视系统,其特征在于:所述云台式双摄像头监视传输模块为基于双目立体视觉技术的云台式摄像头模块,包括无线数据收发模块、双目摄像头模块、云台模块。
4.根据权利要求2所述基于虚拟现实技术和双目立体视觉技术的机器人远程监视系统,其特征在于:所述眼镜式3D视频显示模块基于虚拟现实技术与双目立体视觉技术,具有双屏幕双透镜,透镜间距与焦距均可调节,以适应不同的佩戴者,眼镜式3D视频显示模块可以向佩戴者显示视差图像。
5.根据权利要求2所述基于虚拟现实技术和双目立体视觉技术的机器人远程监视系统,其特征在于:所述姿态检测模块基于惯性导航技术,包括加速度传感器、陀螺仪传感器、磁场传感器,通过传感器数据计算实现实时姿态检测,从而监测佩戴者头部运动,获得佩戴者的实时视角,并将实时视角数据通过无线数据收发模块无线发送给云台式双摄像头监视传输模块。
6.根据权利要求3所述基于虚拟现实技术和双目立体视觉技术的机器人远程监视系统,其特征在于:所述双目摄像头模块由两个可以调节间距的摄像头构成,以适应不同佩戴者的两眼间距,上述摄像头为广角摄像头,以模拟人眼的视角范围。
7.根据权利要求3所述基于虚拟现实技术和双目立体视觉技术的机器人远程监视系统,其特征在于:所述云台模块一种三轴云台,用于双目摄像头模块与机器人主体的连接,起支撑、稳定、转向的功能,云台模块还能根据由无线数据收发模块接收到的佩戴者实时视角数据不断调整姿态,使双目摄像头模块的视角与佩戴者的视角保持一致。
8.根据权利要求2、3所述基于虚拟现实技术和双目立体视觉技术的机器人远程监视系统,其特征在于:所述无线数据收发模块是具有图像数据传输与姿态数据传输的无线通信模块,根据实际应用可以调节无线数据收发模块的发射功率,并支持加入中继器以提高传输距离。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201620257611.9U CN205726125U (zh) | 2016-03-30 | 2016-03-30 | 一种新型机器人远程监视系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201620257611.9U CN205726125U (zh) | 2016-03-30 | 2016-03-30 | 一种新型机器人远程监视系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN205726125U true CN205726125U (zh) | 2016-11-23 |
Family
ID=57311333
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201620257611.9U Active CN205726125U (zh) | 2016-03-30 | 2016-03-30 | 一种新型机器人远程监视系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN205726125U (zh) |
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107124589A (zh) * | 2017-05-24 | 2017-09-01 | 武汉大学 | 基于Cardboard的360度沉浸式远程视频监控系统及方法 |
CN107199550A (zh) * | 2017-03-15 | 2017-09-26 | 南昌大学 | 基于fpv头戴显示的机械外骨骼式排爆机器人 |
CN107426531A (zh) * | 2017-05-16 | 2017-12-01 | 上海欧忆能源科技有限公司 | 姿态视角遥控遥视智能头盔、方法、摄像装置及系统 |
CN108008818A (zh) * | 2017-12-04 | 2018-05-08 | 中国人民解放军陆军工程大学 | 一种基于虚拟现实的头盔式人机交互系统及方法 |
CN108093244A (zh) * | 2017-12-01 | 2018-05-29 | 电子科技大学 | 一种远程随动立体视觉系统 |
WO2018098867A1 (zh) * | 2016-11-29 | 2018-06-07 | 歌尔科技有限公司 | 摄像装置及其图像处理方法、虚拟现实设备 |
CN108304000A (zh) * | 2017-10-25 | 2018-07-20 | 河北工业大学 | 云台实时vr系统 |
WO2018196184A1 (zh) * | 2017-04-28 | 2018-11-01 | 深圳前海弘稼科技有限公司 | 一种植株的监控方法及监控系统 |
CN108881706A (zh) * | 2017-05-16 | 2018-11-23 | 北京三星通信技术研究有限公司 | 控制多媒体设备工作的方法及装置 |
CN109062407A (zh) * | 2018-07-27 | 2018-12-21 | 江西省杜达菲科技有限责任公司 | 基于vr技术的远程移动终端三维显控系统和方法 |
CN111202663A (zh) * | 2019-12-31 | 2020-05-29 | 浙江工业大学 | 一种基于vr技术的视觉训练学习系统 |
CN112672135A (zh) * | 2019-10-15 | 2021-04-16 | 郑州大学 | 一种基于5g远程控制技术的双摄像头vr视频直播装置 |
CN113115008A (zh) * | 2021-05-17 | 2021-07-13 | 哈尔滨商业大学 | 一种基于快速跟踪注册增强现实技术的管廊主从操作巡检系统及方法 |
CN115190287A (zh) * | 2022-06-22 | 2022-10-14 | 秦皇岛希睿智能科技有限公司 | 一种应用于远程教学的立体视觉随动系统 |
-
2016
- 2016-03-30 CN CN201620257611.9U patent/CN205726125U/zh active Active
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018098867A1 (zh) * | 2016-11-29 | 2018-06-07 | 歌尔科技有限公司 | 摄像装置及其图像处理方法、虚拟现实设备 |
CN107199550A (zh) * | 2017-03-15 | 2017-09-26 | 南昌大学 | 基于fpv头戴显示的机械外骨骼式排爆机器人 |
WO2018196184A1 (zh) * | 2017-04-28 | 2018-11-01 | 深圳前海弘稼科技有限公司 | 一种植株的监控方法及监控系统 |
CN108881706B (zh) * | 2017-05-16 | 2023-10-10 | 北京三星通信技术研究有限公司 | 控制多媒体设备工作的方法及装置 |
CN107426531A (zh) * | 2017-05-16 | 2017-12-01 | 上海欧忆能源科技有限公司 | 姿态视角遥控遥视智能头盔、方法、摄像装置及系统 |
CN108881706A (zh) * | 2017-05-16 | 2018-11-23 | 北京三星通信技术研究有限公司 | 控制多媒体设备工作的方法及装置 |
CN107124589A (zh) * | 2017-05-24 | 2017-09-01 | 武汉大学 | 基于Cardboard的360度沉浸式远程视频监控系统及方法 |
CN108304000B (zh) * | 2017-10-25 | 2024-01-23 | 河北工业大学 | 云台实时vr系统 |
CN108304000A (zh) * | 2017-10-25 | 2018-07-20 | 河北工业大学 | 云台实时vr系统 |
CN108093244A (zh) * | 2017-12-01 | 2018-05-29 | 电子科技大学 | 一种远程随动立体视觉系统 |
CN108093244B (zh) * | 2017-12-01 | 2021-02-09 | 电子科技大学 | 一种远程随动立体视觉系统 |
CN108008818A (zh) * | 2017-12-04 | 2018-05-08 | 中国人民解放军陆军工程大学 | 一种基于虚拟现实的头盔式人机交互系统及方法 |
CN109062407A (zh) * | 2018-07-27 | 2018-12-21 | 江西省杜达菲科技有限责任公司 | 基于vr技术的远程移动终端三维显控系统和方法 |
CN112672135A (zh) * | 2019-10-15 | 2021-04-16 | 郑州大学 | 一种基于5g远程控制技术的双摄像头vr视频直播装置 |
CN111202663A (zh) * | 2019-12-31 | 2020-05-29 | 浙江工业大学 | 一种基于vr技术的视觉训练学习系统 |
CN113115008A (zh) * | 2021-05-17 | 2021-07-13 | 哈尔滨商业大学 | 一种基于快速跟踪注册增强现实技术的管廊主从操作巡检系统及方法 |
CN113115008B (zh) * | 2021-05-17 | 2023-05-19 | 哈尔滨商业大学 | 一种管廊主从操作巡检系统及方法 |
CN115190287A (zh) * | 2022-06-22 | 2022-10-14 | 秦皇岛希睿智能科技有限公司 | 一种应用于远程教学的立体视觉随动系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN205726125U (zh) | 一种新型机器人远程监视系统 | |
JP6642432B2 (ja) | 情報処理装置及び情報処理方法、並びに画像表示システム | |
CN108600733B (zh) | 一种基于人眼跟踪的裸眼3d显示方法 | |
EP2979127B1 (en) | Display method and system | |
EP3070513B1 (en) | Head-mountable display system | |
CN206162398U (zh) | 一种用于重型机械远程无人操作的立体视觉随动显示系统 | |
JP2020537383A (ja) | ヘッドマウントディスプレイ追跡システム | |
US20180246331A1 (en) | Helmet-mounted display, visual field calibration method thereof, and mixed reality display system | |
CN105677011A (zh) | 虚拟实境系统以及虚拟实境系统的操作模式的控制方法 | |
US20190215505A1 (en) | Information processing device, image generation method, and head-mounted display | |
US20150009304A1 (en) | Portable electronic equipment and method of controlling an autostereoscopic display | |
EP3688984A1 (en) | Head-mountable display system | |
CN204669524U (zh) | 一种基于移动互联网的无人机操控系统 | |
CN108093244A (zh) | 一种远程随动立体视觉系统 | |
CN206294286U (zh) | 一种远程虚拟现实的实现系统 | |
CN110121066A (zh) | 一种基于立体视觉的特种车辆辅助驾驶系统 | |
US9372346B2 (en) | Directional light beams for angle detection | |
CN106507090A (zh) | 一种主从遥视系统 | |
JP6649010B2 (ja) | 情報処理装置 | |
KR101665027B1 (ko) | 헤드 마운트 디스플레이용 헤드 트래킹 바 시스템 | |
KR101947372B1 (ko) | Hmd에 위치 보정 영상을 제공하는 방법 및 hmd에 위치 보정 영상을 표시하는 방법, 그리고 이를 이용한 위치 보정 영상을 표시하는 hmd | |
CA2476612A1 (en) | Method and system for displaying stereoscopic image | |
CN105828021A (zh) | 基于增强现实技术的特种机器人图像采集控制方法及系统 | |
EP3673348B1 (en) | Data processing device, method and non-transitory machine-readable medium for detecting motion of the data processing device | |
EP3547081B1 (en) | Data processing |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |