CN105583801A - 带虚拟现实功能的机器人头部控制系统 - Google Patents

带虚拟现实功能的机器人头部控制系统 Download PDF

Info

Publication number
CN105583801A
CN105583801A CN201511033109.6A CN201511033109A CN105583801A CN 105583801 A CN105583801 A CN 105583801A CN 201511033109 A CN201511033109 A CN 201511033109A CN 105583801 A CN105583801 A CN 105583801A
Authority
CN
China
Prior art keywords
information
heart rate
module
robot head
virtual reality
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201511033109.6A
Other languages
English (en)
Inventor
林阳城
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Menghui Intelligent Technology Co Ltd
Original Assignee
Guangzhou Menghui Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Menghui Intelligent Technology Co Ltd filed Critical Guangzhou Menghui Intelligent Technology Co Ltd
Priority to CN201511033109.6A priority Critical patent/CN105583801A/zh
Publication of CN105583801A publication Critical patent/CN105583801A/zh
Pending legal-status Critical Current

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J3/00Manipulators of master-slave type, i.e. both controlling unit and controlled unit perform corresponding spatial movements
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1602Programme controls characterised by the control system, structure, architecture

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Automation & Control Theory (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种带虚拟现实功能的机器人头部控制系统、方法及其装置,包括体感模块、神经模块、头部信息处理模块、机器人头部控制模块、虚拟现实模块,利用体感模块的欧拉变换法及神经模块心率算法,结合头部信息处理模块、机器人头部控制模块和虚拟现实模块,可实现远程机器人头部的体感控制,具有控制精度高、效率快等优点。

Description

带虚拟现实功能的机器人头部控制系统
技术领域
本发明涉及机器人头部控制技术领域,特别是涉及一种带虚拟现实功能的机器人头部控制系统、方法及其装置。
背景技术
机器人头部控制是一种高难度的机器人技术,尤其是通过体感信息控制,是机器人领域中的一个基本且重要的问题。机器人在远端接收操作者的头部体感,并同步操作者的头部动作。
现有的机器人头部控制一般利用摇杆或者键盘控制,效率非常低下。目前还没有自动同步操作者头部动作的装置。
发明内容
基于此,有必要针对上述问题,提供一种带虚拟现实功能的机器人头部控制的系统、方法及其装置。
一种带虚拟现实功能的机器人头部控制系统,包括:
体感模块,用于采集操作者头的部体感信息,并将体感信息传送至头部信息处理模块;
神经模块,用于采集操作者的心率信息,并将心率信息传送至头部信息处理模块;
头部信息处理模块,用于通过2.4G通信模块把头部体感信息和心率信息发送到机器人头部控制模块;
机器人头部控制模块,用于接收操作者的头部体感信息和心率信息,并驱动机器人头部电机和显示心率信息;
虚拟现实模块,用于采集和显示机器人头部摄像头画面。
在其中一个实施例中,所述体感模块包括六轴传感器、嵌入式处理模块,六轴传感器安装头巾上;所述六轴传感器采集操作者头部偏航角及俯仰角,并把头部体感信号发送到头部信息处理模块。
在其中一个实施例中,所述神经模块包括心率采集探头、信号处理模块,两者安装在头巾上;所述心率采集探头采集操作者的心率信号,所述信号处理模块处理心率信息后把心率信息发送到头部信息处理模块。
在其中一个实施例中,所述头部信息处理模块安装在头巾上;所述头部信息处理模块采集头部体感信息和心率信息后把头部体感信息和心率信息通过2.4G通信模块发送到机器人头部控制模块。
在其中一个实施例中,所述机器人头部控制模块安装在机器人头部;所述机器人头部控制模块接收头部体感信息和心率信息,通过舵机同步机器人头部和操作者头部的偏航角及俯仰角,并通过LED显示心率信息。
在其中一个实施例中,所述虚拟现实模块包括摄像头和显示器,摄像头安装在机器人头部,显示器安装在眼罩上;所述虚拟现实模块采集摄像头图像信息,并通过WIFI发送到显示器上,显示器显示图像信息。
一种带虚拟现实功能的机器人头部控制方法,包括以下步骤:
获取操作者头部体感信息,并把头部体感信息发送到嵌入式处理模块;
获取操作者心率信息,并把心率信息发送到嵌入式处理模块;
把头部体感信息和心率信息发送到机器人头部控制模块;
根据头部体感信息,控制机器人头部偏航角和俯仰角;根据心率信息,显示心率次数。
一种带虚拟现实功能的机器人头部控制装置,包括所述带虚拟现实功能的机器人头部控制方法和系统。
上述带虚拟现实功能的机器人头部控制系统、方法和装置,利用体感模块的空间坐标定位,结合虚拟现实系统,运用欧拉变换方法,可实现实时体感控制机器人头部的功能,具有控制精度高、效率快等优点。
附图说明
图1为一实施例中带虚拟现实功能的机器人头部控制系统的结构框图;
图2为一实施例中带虚拟现实功能的机器人头部控制方法的流程图。
具体实施方式
为了便于理解本发明,下面将参照相关附图对本发明带虚拟现实功能的机器人头部控制系统、方法和装置进行更全面的描述。附图中给出了本发明带虚拟现实功能的机器人头部控制系统、方法和装置的首选实施例。但是,本发明带虚拟现实功能的机器人头部控制系统、方法和装置可以以许多不同的形式来实现,并不限于本文所描述的实施例。相反地,提供这些实施例的目的是使本发明的公开内容更加透彻全面。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在说明书中所使用的术语只是为了描述具体的实施例的目的,不是旨在于限制本发明。本文所使用的术语“及/或”包括一个或多个相关的所列项目的任意的和所有的组合。
在一些实施例中,如图1所示,一种带虚拟现实功能的机器人头部控制系统100,包括:
体感模块101,用于采集操作者头的部体感信息,并将体感信息传送至头部信息处理模块。
在一些实施例中,所述体感模块101设置在头巾上;所述体感模块101通过欧拉变换,获取操作者头部的偏航角及俯仰角,并把头部体感信号发送到头部信息处理模块。
神经模块102,用于采集操作者的心率信息,并将心率信息传送至头部信息处理模块。
在一些实施例中,所述神经模块102通过心率算法测出心率BMP信息。
头部处理模块103,用于通过2.4G通信模块把头部体感信息和心率信息发送到机器人头部控制模块。
在一些实施例中,所述头部处理模块103的主板带有4个RS232串口,通过2.4Ghz的TTL串口发送头部体感信息和心率信息。
机器人头部控制模块104,用于通过2.4G通信模块接收头部体感信息和心率信息。
在一些实施例中,所述机器人头部控制模块104的主板带有4个RS232串口和12个PWM接口,通过2.4Ghz的TTL串口接收头部体感信息和心率信息,并通过PWM控制舵机转角。
在其中一个实施例中,由于体感模块的角度测距范围为0到180度,所述电机转动范围为0到180度,设有最小和最大角度限制。
一种带虚拟现实功能的机器人头部控制系统100,还包括虚拟现实模块105。
在一些实施例中,所述虚拟现实模块105包括高清摄像头模组,用于视觉信息,并将视觉信息传送至显示器模块,实现立体视觉。
在一些实施例中,如图2所示,一种带虚拟现实功能的机器人头部控制方法,包括以下步骤:
步骤201,获取操作者头部体感信息,并把头部体感信息发送到嵌入式处理模块。
在一些实施例中,通过欧拉变换,获取操作者头部的偏航角及俯仰角,并把头部体感信号发送到头部信息处理模块。
步骤202,获取操作者心率信息,并把心率信息发送到嵌入式处理模块。
在一些实施例中,通过心率算法测出心率BMP信息。
步骤203,把头部体感信息和心率信息发送到机器人头部控制模块。
在一些实施例中,通过2.4G通信模块把头部体感信息和心率信息发送到机器人头部控制模块。
步骤204,根据头部体感信息,控制机器人头部偏航角和俯仰角;根据心率信息,显示心率次数。
在一些实施例中,通过2.4Ghz的TTL串口接收头部体感信息和心率信息,并通过PWM控制舵机转角
一种带虚拟现实功能的机器人头部控制装置,包括所述带虚拟现实功能的机器人头部控制方法和系统。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (8)

1.一种带虚拟现实功能的机器人头部控制系统,其特征在于,包括:
体感模块,用于采集操作者头的部体感信息,并将体感信息传送至头部信息处理模块;
神经模块,用于采集操作者的心率信息,并将心率信息传送至头部信息处理模块;
头部信息处理模块,用于通过2.4G通信模块把头部体感信息和心率信息发送到机器人头部控制模块;
机器人头部控制模块,用于接收操作者的头部体感信息和心率信息,并驱动机器人头部电机和显示心率信息;
虚拟现实模块,用于采集和显示机器人头部摄像头画面。
2.根据权利要求1所述的带虚拟现实功能的机器人头部控制系统,其特征在于,所述体感模块包括六轴传感器、嵌入式处理模块,六轴传感器安装头巾上;所述六轴传感器采集操作者头部偏航角及俯仰角,并把头部体感信号发送到头部信息处理模块。
3.根据权利要求1所述的带虚拟现实功能的机器人头部控制系统,其特征在于,所述神经模块包括心率采集探头、信号处理模块,两者安装在头巾上;所述心率采集探头采集操作者的心率信号,所述信号处理模块处理心率信息后把心率信息发送到头部信息处理模块。
4.根据权利要求1所述的带虚拟现实功能的机器人头部控制系统,其特征在于,所述头部信息处理模块安装在头巾上;所述头部信息处理模块采集头部体感信息和心率信息后把头部体感信息和心率信息通过2.4G通信模块发送到机器人头部控制模块。
5.根据权利要求1所述的带虚拟现实功能的机器人头部控制系统,其特征在于,所述机器人头部控制模块安装在机器人头部;所述机器人头部控制模块接收头部体感信息和心率信息,通过舵机同步机器人头部和操作者头部的偏航角及俯仰角,并通过LED显示心率信息。
6.根据权利要求1所述的带虚拟现实功能的机器人头部控制系统,其特征在于,所述虚拟现实模块包括摄像头和显示器,摄像头安装在机器人头部,显示器安装在眼罩上;所述虚拟现实模块采集摄像头图像信息,并通过WIFI发送到显示器上,显示器显示图像信息。
7.一种带虚拟现实功能的机器人头部控制方法,其特征在于,包括以下步骤:
获取操作者头部体感信息,并把头部体感信息发送到嵌入式处理模块;
获取操作者心率信息,并把心率信息发送到嵌入式处理模块;
把头部体感信息和心率信息发送到机器人头部控制模块;
根据头部体感信息,控制机器人头部偏航角和俯仰角;根据心率信息,显示心率次数。
8.一种带虚拟现实功能的机器人头部控制装置,其特征在于,权利要求1至7任一项所述的带虚拟现实功能的机器人头部控制方法或系统。
CN201511033109.6A 2015-12-31 2015-12-31 带虚拟现实功能的机器人头部控制系统 Pending CN105583801A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201511033109.6A CN105583801A (zh) 2015-12-31 2015-12-31 带虚拟现实功能的机器人头部控制系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201511033109.6A CN105583801A (zh) 2015-12-31 2015-12-31 带虚拟现实功能的机器人头部控制系统

Publications (1)

Publication Number Publication Date
CN105583801A true CN105583801A (zh) 2016-05-18

Family

ID=55923886

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201511033109.6A Pending CN105583801A (zh) 2015-12-31 2015-12-31 带虚拟现实功能的机器人头部控制系统

Country Status (1)

Country Link
CN (1) CN105583801A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105922262A (zh) * 2016-06-08 2016-09-07 北京行云时空科技有限公司 机器人及其远程控制设备和方法
CN106078747A (zh) * 2016-08-11 2016-11-09 贵州翰凯斯智能技术有限公司 一种基于虚拟现实的延时工业操作控制系统
CN107571271A (zh) * 2017-10-24 2018-01-12 上海佳革智能科技有限公司 一种基于vr的机器人培训示教器

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030023192A1 (en) * 1994-06-16 2003-01-30 Massachusetts Institute Of Technology Inertial orientation tracker having automatic drift compensation using an at rest sensor for tracking parts of a human body
CN102348068A (zh) * 2011-08-03 2012-02-08 东北大学 一种基于头部姿态控制的随动远程视觉系统
CN204360325U (zh) * 2015-01-15 2015-05-27 深圳市掌网立体时代视讯技术有限公司 一种头戴式多通道交互系统
CN204366968U (zh) * 2015-01-04 2015-06-03 广东工业大学 基于三维体感摄影机的多自由度仿人机器人
CN204502269U (zh) * 2015-02-06 2015-07-29 深圳市傅里叶科技有限公司 一种虚拟现实头戴式显示器互动健身车系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030023192A1 (en) * 1994-06-16 2003-01-30 Massachusetts Institute Of Technology Inertial orientation tracker having automatic drift compensation using an at rest sensor for tracking parts of a human body
CN102348068A (zh) * 2011-08-03 2012-02-08 东北大学 一种基于头部姿态控制的随动远程视觉系统
CN204366968U (zh) * 2015-01-04 2015-06-03 广东工业大学 基于三维体感摄影机的多自由度仿人机器人
CN204360325U (zh) * 2015-01-15 2015-05-27 深圳市掌网立体时代视讯技术有限公司 一种头戴式多通道交互系统
CN204502269U (zh) * 2015-02-06 2015-07-29 深圳市傅里叶科技有限公司 一种虚拟现实头戴式显示器互动健身车系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105922262A (zh) * 2016-06-08 2016-09-07 北京行云时空科技有限公司 机器人及其远程控制设备和方法
CN106078747A (zh) * 2016-08-11 2016-11-09 贵州翰凯斯智能技术有限公司 一种基于虚拟现实的延时工业操作控制系统
CN106078747B (zh) * 2016-08-11 2018-11-06 贵州翰凯斯智能技术有限公司 一种基于虚拟现实的延时工业操作控制系统
CN107571271A (zh) * 2017-10-24 2018-01-12 上海佳革智能科技有限公司 一种基于vr的机器人培训示教器

Similar Documents

Publication Publication Date Title
US7839423B2 (en) Image display system with gaze directed zooming
CN105583801A (zh) 带虚拟现实功能的机器人头部控制系统
CN105136036A (zh) 便携式图像与激光融合的三维扫描系统
EP2536156A3 (en) Image processing system, image processing apparatus, and image processing method
JP2015043488A (ja) 遠隔操作装置及びそれを用いた遠隔施工方法
CN105116886A (zh) 一种机器人自主行走的方法
EP2592524A3 (en) Method for controlling rotation of screen and terminal and touch system supporting the same
WO2017146887A3 (en) Method for one-touch translational navigation immersive, virtual reality environments
CN104266585A (zh) 一种具有拍摄角度自调节功能的扫描系统
CN105721789B (zh) 一种低延时全向导航视频多模式显示控制方法
CN113934389A (zh) 三维扫描处理方法、系统、处理设备和存储介质
CN104276102B (zh) 一种基于车辆位置检测的环视系统标定装置
CN104554009A (zh) 双视角倒车摄像方法及系统
US10728522B2 (en) Control device for a camera apparatus, camera arrangement and method for the stereoscopic recording of a monitoring area
CN112118436A (zh) 一种基于增强现实装置的图像呈现方法、装置及系统
CN101097260A (zh) 一种倒车雷达
JP2017010119A (ja) 情報処理装置、画像処理装置、それらの制御方法及びプログラム
CN210277081U (zh) 一种扫地机器人
KR20140080871A (ko) 햅틱 조향휠을 이용한 장애물 경고 장치 및 방법
CN107247424B (zh) 一种基于激光距离传感器的ar虚拟开关的开关方法
KR20160099981A (ko) 패턴을 가지는 입체표식기를 이용한 복수 사용자를 포함하는 쌍방향 인식이 가능한 가상현실 장치
CN104503673A (zh) 一种显示屏可调触控方法
CN205068048U (zh) 一种基于平板电脑Windows系统无线远程控制系统
US20210215811A1 (en) Systems, methods and apparatuses for calibrating sensors mounted on a device
CN203344853U (zh) 基于车辆位置检测的环视系统标定装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160518