CN106708074B - 基于vr眼镜控制无人机的方法及装置 - Google Patents

基于vr眼镜控制无人机的方法及装置 Download PDF

Info

Publication number
CN106708074B
CN106708074B CN201611112772.XA CN201611112772A CN106708074B CN 106708074 B CN106708074 B CN 106708074B CN 201611112772 A CN201611112772 A CN 201611112772A CN 106708074 B CN106708074 B CN 106708074B
Authority
CN
China
Prior art keywords
aerial vehicle
unmanned aerial
glasses
control
rotation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201611112772.XA
Other languages
English (en)
Other versions
CN106708074A (zh
Inventor
刘均
宋朝忠
杨伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Launch Technology Co Ltd
Original Assignee
Shenzhen Launch Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Launch Technology Co Ltd filed Critical Shenzhen Launch Technology Co Ltd
Priority to CN201611112772.XA priority Critical patent/CN106708074B/zh
Priority to PCT/CN2017/071894 priority patent/WO2018103188A1/zh
Publication of CN106708074A publication Critical patent/CN106708074A/zh
Application granted granted Critical
Publication of CN106708074B publication Critical patent/CN106708074B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/10Simultaneous control of position or course in three dimensions
    • G05D1/101Simultaneous control of position or course in three dimensions specially adapted for aircraft
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/0094Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot involving pointing a payload, e.g. camera, weapon, sensor, towards a fixed or moving target
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/08Control of attitude, i.e. control of roll, pitch, or yaw
    • G05D1/0808Control of attitude, i.e. control of roll, pitch, or yaw specially adapted for aircraft

Abstract

本发明公开了一种基于VR眼镜控制无人机的方法,所述VR眼镜设有运动感应组件,所述无人机设有摄像头,且VR眼镜与无人机无线连接,该方法包括:在接收到无人机发送的由所述摄像头拍摄的图像数据后,转化为VR眼镜可播放的VR视频源并在VR眼镜上播放;通过运动感应组件检测VR眼镜佩戴者的头部及肢体动作,并生成相应的运动数据;将该运动数据转换成无人机可识别的控制指令并发送至所述无人机,以控制所述无人机执行相应的控制操作。本发明还公开了一种基于VR眼镜控制无人机的装置。本发明解决了现有技术中只能通过手柄操纵杆来控制无人机,无法根据用户的视角来控制无人机的技术问题,提高了用户的视觉交互体验。

Description

基于VR眼镜控制无人机的方法及装置
技术领域
本发明涉及无人机控制技术领域,尤其涉及一种基于VR眼镜控制无人机的方法及装置。
背景技术
VR(Virtual Reality,虚拟现实)技术是一种可以创建和体验虚拟世界的计算机仿真系统,它利用计算机生成一种模拟环境,是一种多源信息融合的交互式的三维动态视景和实体行为的系统仿真,使用户沉浸到该模拟环境中。
目前,无人机在人们生活中的应用越来越广泛,无人机玩家也越来越多,现有的无人机一般都是通过手柄操控杆或者遥控器来实现一定的遥控操作,遥控操作与传统的遥控玩具飞机并无太大差异,可玩性不强,且无视觉上的交互。例如,在采用无人机进行航拍时,用户只能通过地面终端查看到无人机发送的航拍视频,然后通过无人机手柄操控杆来调节无人机的拍摄方向或者拍摄位置,即无法根据用户的视角来控制无人机的拍摄方向或者拍摄位置,给用户带来的视觉交互体验并不高。
发明内容
本发明的主要目的在于提出一种基于VR眼镜控制无人机的方法及装置,旨在解决现有技术中只能通过手柄操纵杆来控制无人机,无法根据用户的视角来控制无人机的技术问题,提高用户的视觉交互体验。
为实现上述目的,本发明提供一种基于VR眼镜控制无人机的方法,所述VR眼镜设有运动感应组件,所述无人机设有摄像头,且VR眼镜与无人机无线连接,所述基于VR眼镜控制无人机的方法包括:
在接收到无人机发送的由所述摄像头拍摄的图像数据后,将接收到的图像数据转化为所述VR眼镜可播放的VR视频源,并在所述VR眼镜上进行播放;
通过所述运动感应组件检测VR眼镜佩戴者的头部及肢体动作,并生成相应的运动数据;
将生成的运动数据转换成所述无人机可识别的控制指令,并将所述控制指令发送至所述无人机,以控制所述无人机执行相应的控制操作。
优选地,通过所述运动感应组件检测VR眼镜佩戴者的头部及肢体动作,并生成相应的运动数据包括:
当所述运动感应组件检测到VR眼镜佩戴者的头部发生旋转时,则获取VR眼镜佩戴者头部的旋转方向及旋转角度,并生成相应的旋转数据;
当所述运动感应组件检测到VR眼镜佩戴者的肢体发生移动时,则获取VR眼镜佩戴者肢体的移动方向及移动距离,并生成相应的移动数据。
优选地,所述将生成的运动数据转换成所述无人机可识别的控制指令,并将所述控制指令发送至所述无人机,以控制所述无人机执行相应的控制操作的步骤包括:
将所述旋转数据转换成无人机可识别的旋转控制指令,并发送至所述无人机,以控制所述无人机或无人机对应的摄像头执行相应的旋转操作,其中,所述无人机或无人机对应摄像头的旋转方向及旋转角度与所述VR眼镜佩戴者头部的旋转方向及旋转角度相同。
优选地,所述将生成的运动数据转换成所述无人机可识别的控制指令,并将所述控制指令发送至所述无人机,以控制所述无人机执行相应的控制操作的步骤还包括:
将所述移动数据转换成无人机可识别的移动控制指令,并发送至所述无人机,以控制所述无人机执行相应的移动操作,其中,所述无人机的移动方向与所述VR眼镜佩戴者肢体的移动方向相同,所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离相同或成比例关系。
优选地,所述运动感应组件包括陀螺仪与三轴运动传感器;
则所述通过运动感应组件检测VR眼镜佩戴者的头部及肢体动作包括:
当所述陀螺仪检测到VR眼镜佩戴者的头部发生旋转时,则获取所述VR眼镜佩戴者头部的旋转方向及旋转角度,当所述三轴运动传感器检测到VR眼镜佩戴者的肢体发生移动时,则获取所述VR眼镜佩戴者肢体的移动方向与移动距离。
此外,为实现上述目的,本发明还提供一种基于VR眼镜控制无人机的装置,所述VR眼镜设有运动感应组件,所述无人机设有摄像头,且VR眼镜与无人机无线连接,所述基于VR眼镜控制无人机的装置包括:
接收模块,用于在接收到无人机发送的由所述摄像头拍摄的图像数据后,将接收到的图像数据转化为所述VR眼镜可播放的VR视频源,并在所述VR眼镜上进行播放;
检测模块,用于通过所述运动感应组件检测VR眼镜佩戴者的头部及肢体动作,并生成相应的运动数据;
控制模块,用于将生成的运动数据转换成所述无人机可识别的控制指令,并将所述控制指令发送至所述无人机,以控制所述无人机执行相应的控制操作。
优选地,所述检测模块用于:
当所述运动感应组件检测到VR眼镜佩戴者的头部发生旋转时,则获取VR眼镜佩戴者头部的旋转方向及旋转角度,并生成相应的旋转数据;当所述运动感应组件检测到VR眼镜佩戴者的肢体发生移动时,则获取VR眼镜佩戴者肢体的移动方向及移动距离,并生成相应的移动数据。
优选地,所述控制模块包括:
第一控制单元,用于将所述旋转数据转换成无人机可识别的旋转控制指令,并发送至所述无人机,以控制所述无人机或无人机对应的摄像头执行相应的旋转操作,其中,所述无人机或无人机对应摄像头的旋转方向及旋转角度与所述VR眼镜佩戴者头部的旋转方向及旋转角度相同。
优选地,所述控制模块还包括:
第二控制单元,用于将所述移动数据转换成无人机可识别的移动控制指令,并发送至所述无人机,以控制所述无人机执行相应的移动操作,其中,所述无人机的移动方向与所述VR眼镜佩戴者肢体的移动方向相同,所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离相同或成比例关系。
优选地,所述运动感应组件包括陀螺仪与三轴运动传感器;
则所述检测模块用于:
当所述陀螺仪检测到VR眼镜佩戴者的头部发生旋转时,则获取所述VR眼镜佩戴者头部的旋转方向及旋转角度;当所述三轴运动传感器检测到VR眼镜佩戴者的肢体发生移动时,则获取所述VR眼镜佩戴者肢体的移动方向与移动距离。
本发明所提供的基于VR眼镜控制无人机的方法及装置,通过所述运动感应组件检测所述VR眼镜佩戴者的旋转或者移动行为,然后控制无人机执行相同的旋转或者移动操作,使得所述无人机对应摄像头的拍摄视角与所述VR眼镜佩戴者的观影视角保持一致,解决了现有技术中只能通过手柄操纵杆来控制无人机,无法根据用户的视角来控制无人机的技术问题,提高了用户的视觉交互体验。
附图说明
图1为本发明基于VR眼镜控制无人机的方法第一实施例的流程示意图;
图2为本发明中VR眼镜与无人机的连接架构示意图;
图3为本发明基于VR眼镜控制无人机的方法第二实施例的流程示意图;
图4为本发明基于VR眼镜控制无人机的装置第一实施例的模块示意图;
图5为本发明基于VR眼镜控制无人机的装置第二实施例的模块示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
以下结合说明书附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明,并且在不冲突的情况下,本发明中的实施例及实施例中的特征可以相互组合。
本发明提供一种基于VR眼镜控制无人机的方法,该方法主要用于通过VR眼镜来控制无人机的飞行,所述VR眼镜设有运动感应组件,所述无人机设有摄像头,且所述VR眼镜与无人机无线连接。
参照图1,图1为本发明基于VR眼镜控制无人机的方法第一实施例的流程示意图,本实施例中,所述基于VR眼镜控制无人机的方法包括:
步骤S10,在接收到无人机发送的由所述摄像头拍摄的图像数据后,将接收到的图像数据转化为所述VR眼镜可播放的VR视频源,并在所述VR眼镜上进行播放。
本实施例中,所述无人机上安装有摄像头,所述摄像头可以采用全景摄像头,以拍摄到适合VR眼镜播放的3D图像。所述无人机通过无线连接的方式与VR眼镜进行连接,当所述无人机在启动后,所述摄像头便随即开始拍摄图像,并将拍摄到的图像数据通过无人机发送装置实时发送至VR眼镜。当所述VR眼镜在接收到无人机发送的图像数据后,将接收到的图像数据转化为所述VR眼镜可播放的VR视频源,并在所述VR眼镜上进行播放。
步骤S20,通过所述运动感应组件检测VR眼镜佩戴者的头部及肢体动作,并生成相应的运动数据。
本实施例中,所述VR眼镜上设有运动感应组件,通过该运动感应组件可以检测到VR眼镜佩戴者的头部及肢体动作,例如摇头、低头、转向等头部动作以及前进后退等肢体动作。并在检测到VR眼镜佩戴者的头部及肢体发生移动后,生成相应的运动数据。
其中,当VR眼镜佩戴者在观看播放的所述VR视频源时,可以根据个人兴趣或喜好转换视角。例如,VR眼镜佩戴者在观看无人机对应摄像头拍摄的图像时,可以随意改变视角,如通过旋转头部、向前移动肢体等来获取新的图像。上述运动感应组件实时监测VR眼镜佩戴者的头部及肢体动作,然后生成相应的运动数据。
步骤S30,将生成的运动数据转换成所述无人机可识别的控制指令,并将所述控制指令发送至所述无人机,以控制所述无人机执行相应的控制操作。
本实施例中,将生成的运动数据转换成所述无人机可识别的控制指令,该控制指令的类型与无人机原有的手柄操纵杆或遥控设备所发送的控制指令的类型相一致。然后将转换后的所述控制指令发送至所述无人机,所述无人机在接收到该控制指令后读取该控制指令并执行相应的控制操作。
可以理解的是,本实施例中,可以预先通过无人机手柄操纵杆或者遥控设备来控制无人机飞行到用户理想的景物上方,然后便可以将无人机的控制权限分配给所述VR眼镜,使得所述VR眼镜能够控制所述无人机。
具体的,使所述VR眼镜的观影视角与所述无人机对应摄像头的拍摄视角保持一致,且使所述VR眼镜与所述无人机保持联动状态,即当所述VR眼镜佩戴者的头部发生转动时,所述无人机对应摄像头的拍摄视角也会随着发生转动,当所述VR眼镜佩戴者的身体发生移动时,所述无人机对应摄像头的拍摄视角也会随着发生移动。
为了更好的理解本发明,参照图2,图2为本发明中VR眼镜与无人机的连接架构示意图,在图2中,所述无人机1上安装有摄像头2,所述VR眼镜4上安装有运动感应组件3,所述无人机1与所述VR眼镜4进行无线连接。
本实施例所述的基于VR眼镜控制无人机的方法,可以通过所述运动感应组件检测所述VR眼镜佩戴者的旋转或者移动行为,然后控制无人机执行相同的旋转或者移动操作,使得所述无人机对应摄像头的拍摄视角与所述VR眼镜佩戴者的观影视角保持一致,解决了现有技术中只能通过手柄操纵杆来控制无人机,无法根据用户的视角来控制无人机的技术问题,提高了用户的视觉交互体验。
进一步地,基于上述图1所述的实施例,本实施例中,上述步骤S20所述的通过所述运动感应组件检测VR眼镜佩戴者的头部及肢体动作,并生成相应的运动数据包括:
当所述运动感应组件检测到VR眼镜佩戴者的头部发生旋转时,则获取VR眼镜佩戴者头部的旋转方向及旋转角度,并生成相应的旋转数据;当所述运动感应组件检测到VR眼镜佩戴者的肢体发生移动时,则获取VR眼镜佩戴者肢体的移动方向与移动距离,并生成相应的移动数据。
其中,所述运动感应组件包括陀螺仪与三轴运动传感器,则所述通过运动感应组件检测VR眼镜佩戴者的头部及肢体动作包括:
当所述陀螺仪检测到VR眼镜佩戴者的头部发生旋转时,则获取所述VR眼镜佩戴者头部的旋转方向及旋转角度,当所述三轴运动传感器检测到VR眼镜佩戴者的肢体发生移动时,则获取所述VR眼镜佩戴者肢体的移动方向与移动距离。
其中,所述陀螺仪可检测到VR眼镜佩戴者的头部向左或者向右旋转、以及低头或者抬头的动作,并且可同时检测到旋转的角度或者是幅度;所述三轴运动传感器可检测到VR眼镜佩戴者肢体向前后左右的移动,并且也可同时检测到移动的距离。
本实施例所述的基于VR眼镜控制无人机的方法,通过所述运动感应组件来检测VR眼镜佩戴者头部的旋转方向及旋转角度以及肢体的移动方向与移动距离,并生成相应的运动数据,以此来根据生成的运动数据控制无人机执行相同的旋转操作或者移动操作,使得所述无人机对应摄像头的拍摄视角与所述VR眼镜佩戴者的观影视角能够保持一致。
进一步地,参照图3,图3为本发明基于VR眼镜控制无人机的方法第二实施例的流程示意图,基于上述实施例,本实施例中,上述步骤S30所述的将生成的运动数据转换成所述无人机可识别的控制指令,并将所述控制指令发送至所述无人机,以控制所述无人机执行相应的控制操作包括:
步骤S31,将所述旋转数据转换成无人机可识别的旋转控制指令,并发送至所述无人机,以控制所述无人机或无人机对应的摄像头执行相应的旋转操作,其中,所述无人机或无人机对应摄像头的旋转方向及旋转角度与所述VR眼镜佩戴者头部的旋转方向及旋转角度相同。
其中,当所述运动感应组件检测到VR眼镜佩戴者的头部发生旋转时,则获取VR眼镜佩戴者头部的旋转方向及旋转角度,并生成相应的旋转数据,然后将所述旋转数据转换成无人机可识别的旋转控制指令,并发送至所述无人机,以控制所述无人机或无人机对应的摄像头执行相应的旋转操作。
其中,所述无人机或无人机对应摄像头的旋转方向及旋转角度与所述VR眼镜佩戴者头部的旋转方向及旋转角度相同。
例如,当所述运动感应组件检测到VR眼镜佩戴者的头部向右旋转90°后,则向所述无人机发送控制指令,控制所述无人机或无人机对应的摄像头向右旋转90°。其中,可以是保持无人机静止,将所述无人机对应摄像头的拍摄角度向右旋转90°,也可以是保持所述无人机对应摄像头的拍摄角度不变,将所述无人机向右旋转90°。
进一步地,上述步骤S30所述的将生成的运动数据转换成所述无人机可识别的控制指令,并将所述控制指令发送至所述无人机,以控制所述无人机执行相应的控制操作还包括:
步骤S32,将所述移动数据转换成无人机可识别的移动控制指令,并发送至所述无人机,以控制所述无人机执行相应的移动操作,其中,所述无人机的移动方向与所述VR眼镜佩戴者肢体的移动方向相同,所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离相同或成比例关系。
其中,当所述运动感应组件检测到VR眼镜佩戴者的肢体发生移动时,则获取VR眼镜佩戴者肢体的移动方向及移动距离,并生成相应的移动数据,然后将所述移动数据转换成无人机可识别的移动控制指令,并发送至所述无人机,以控制所述无人机执行相应的移动操作。
其中,所述无人机的移动方向与所述VR眼镜佩戴者肢体的移动方向相同,所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离相同或成比例关系。
例如,当所述运动感应组件检测到VR眼镜佩戴者的肢体向正北方向移动了1米,则向所述无人机发送控制指令,控制所述无人机向正北方向移动1米。其中,所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离也可以成比例关系,如当所述比例为1:2时,则所述VR眼镜佩戴者的肢体移动1米时,所述无人机同时移动2米。
本实施例所述的基于VR眼镜控制无人机的方法,通过将生成的所述移动数据转换成无人机可识别的控制指令本发送至所述无人机,能够实现根据VR眼镜佩戴者的旋转或移动来控制无人机的旋转或者移动,且使所述无人机对应摄像头的拍摄视角与所述VR眼镜佩戴者的观影视角保持一致,提高了用户的视觉交互体验。
本发明还提供一种基于VR眼镜控制无人机的装置,该装置可为VR眼镜的一部分,所述VR眼镜设有运动感应组件,所述无人机设有摄像头,且所述VR眼镜与无人机无线连接。
参照图4,图4为本发明基于VR眼镜控制无人机的装置第一实施例的模块示意图,本实施例中,所述基于VR眼镜控制无人机的装置100包括:
接收模块10,用于在接收到无人机发送的由所述摄像头拍摄的图像数据后,将接收到的图像数据转化为所述VR眼镜可播放的VR视频源,并在所述VR眼镜上进行播放。
本实施例中,所述无人机上安装有摄像头,所述摄像头可以采用全景摄像头,以拍摄到适合VR眼镜播放的3D图像。所述无人机通过无线连接的方式与VR眼镜进行连接,当所述无人机在启动后,所述摄像头便随即开始拍摄图像,并将拍摄到的图像数据通过无人机发送装置实时发送至VR眼镜。当所述VR眼镜在接收到无人机发送的图像数据后,将接收到的图像数据转化为所述VR眼镜可播放的VR视频源,并在所述VR眼镜上进行播放。
检测模块20,用于通过所述运动感应组件检测VR眼镜佩戴者的头部及肢体动作,并生成相应的运动数据。
本实施例中,所述VR眼镜上设有运动感应组件,通过该运动感应组件可以检测到VR眼镜佩戴者的头部及肢体动作,例如摇头、低头、转向等头部动作以及前进后退等肢体动作。并在检测到VR眼镜佩戴者的头部及肢体发生移动后,生成相应的运动数据。
其中,当VR眼镜佩戴者在观看播放的所述VR视频源时,可以根据个人兴趣或喜好转换视角。例如,VR眼镜佩戴者在观看无人机对应摄像头拍摄的图像时,可以随意改变视角,如通过旋转头部、向前移动肢体等来获取新的图像。上述运动感应组件实时监测VR眼镜佩戴者的头部及肢体动作,然后生成相应的运动数据。
控制模块30,用于将生成的运动数据转换成所述无人机可识别的控制指令,并将所述控制指令发送至所述无人机,以控制所述无人机执行相应的控制操作。
本实施例中,将生成的运动数据转换成所述无人机可识别的控制指令,该控制指令的类型与无人机原有的手柄操纵杆或遥控设备所发送的控制指令的类型相一致。然后将转换后的所述控制指令发送至所述无人机,所述无人机在接收到该控制指令后读取该控制指令并执行相应的控制操作。
可以理解的是,本实施例中,可以预先通过无人机手柄操纵杆或者遥控设备来控制无人机飞行到用户理想的景物上方,然后便可以将无人机的控制权限分配给所述VR眼镜,使得所述VR眼镜能够控制所述无人机。
具体的,使所述VR眼镜的观影视角与所述无人机对应摄像头的拍摄视角保持一致,且使所述VR眼镜与所述无人机保持联动状态,即当所述VR眼镜佩戴者的头部发生转动时,所述无人机对应摄像头的拍摄视角也会随着发生转动,当所述VR眼镜佩戴者的身体发生移动时,所述无人机对应摄像头的拍摄视角也会随着发生移动。
为了更好的理解本发明,参照图2,图2为本发明中VR眼镜与无人机的连接架构示意图,在图2中,所述无人机1上安装有摄像头2,所述VR眼镜4上安装有运动感应组件3,所述无人机1与所述VR眼镜4进行无线连接。
本实施例所述的基于VR眼镜控制无人机的装置,可以通过所述运动感应组件检测所述VR眼镜佩戴者的旋转或者移动行为,然后控制无人机执行相同的旋转或者移动操作,使得所述无人机对应摄像头的拍摄视角与所述VR眼镜佩戴者的观影视角保持一致,解决了现有技术中只能通过手柄操纵杆来控制无人机,无法根据用户的视角来控制无人机的技术问题,提高了用户的视觉交互体验。
进一步地,基于上述图4所述的实施例,本实施例中,上述检测模块20用于:
当所述运动感应组件检测到VR眼镜佩戴者的头部发生旋转时,则获取VR眼镜佩戴者头部的旋转方向及旋转角度,并生成相应的旋转数据;当所述运动感应组件检测到VR眼镜佩戴者的肢体发生移动时,则获取VR眼镜佩戴者肢体的移动方向与移动距离,并生成相应的移动数据。
其中,所述运动感应组件包括陀螺仪与三轴运动传感器,则所述通过运动感应组件检测VR眼镜佩戴者的头部及肢体动作包括:
当所述陀螺仪检测到VR眼镜佩戴者的头部发生旋转时,则获取所述VR眼镜佩戴者头部的旋转方向及旋转角度,当所述三轴运动传感器检测到VR眼镜佩戴者的肢体发生移动时,则获取所述VR眼镜佩戴者肢体的移动方向与移动距离。
其中,所述陀螺仪可检测到VR眼镜佩戴者的头部向左或者向右旋转、以及低头或者抬头的动作,并且可同时检测到旋转的角度或者是幅度;所述三轴运动传感器可检测到VR眼镜佩戴者肢体向前后左右的移动,并且也可同时检测到移动的距离。
本实施例所述的基于VR眼镜控制无人机的装置,通过所述运动感应组件来检测VR眼镜佩戴者头部的旋转方向及旋转角度以及肢体的移动方向与移动距离,并生成相应的运动数据,以此来根据生成的运动数据控制无人机执行相同的旋转操作或者移动操作,使得所述无人机对应摄像头的拍摄视角与所述VR眼镜佩戴者的观影视角能够保持一致。
进一步地,参照图5,图5为本发明基于VR眼镜控制无人机的装置第二实施例的模块示意图,基于上述实施例,本实施例中,上述控制模块30包括:
第一控制单元31,用于将所述旋转数据转换成无人机可识别的旋转控制指令,并发送至所述无人机,以控制所述无人机或无人机对应的摄像头执行相应的旋转操作,其中,所述无人机或无人机对应摄像头的旋转方向及旋转角度与所述VR眼镜佩戴者头部的旋转方向及旋转角度相同。
其中,当所述运动感应组件检测到VR眼镜佩戴者的头部发生旋转时,则获取VR眼镜佩戴者头部的旋转方向及旋转角度,并生成相应的旋转数据,然后将所述旋转数据转换成无人机可识别的旋转控制指令,并发送至所述无人机,以控制所述无人机或无人机对应的摄像头执行相应的旋转操作。
其中,所述无人机或无人机对应摄像头的旋转方向及旋转角度与所述VR眼镜佩戴者头部的旋转方向及旋转角度相同。
例如,当所述运动感应组件检测到VR眼镜佩戴者的头部向右旋转90°后,则向所述无人机发送控制指令,控制所述无人机或无人机对应的摄像头向右旋转90°。其中,可以是保持无人机静止,将所述无人机对应摄像头的拍摄角度向右旋转90°,也可以是保持所述无人机对应摄像头的拍摄角度不变,将所述无人机向右旋转90°。
进一步地,上述控制模块30还包括:
第二控制单元32,用于将所述移动数据转换成无人机可识别的移动控制指令,并发送至所述无人机,以控制所述无人机执行相应的移动操作,其中,所述无人机的移动方向与所述VR眼镜佩戴者肢体的移动方向相同,所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离相同或成比例关系。
其中,当所述运动感应组件检测到VR眼镜佩戴者的肢体发生移动时,则获取VR眼镜佩戴者肢体的移动方向及移动距离,并生成相应的移动数据,然后将所述移动数据转换成无人机可识别的移动控制指令,并发送至所述无人机,以控制所述无人机执行相应的移动操作。
其中,所述无人机的移动方向与所述VR眼镜佩戴者肢体的移动方向相同,所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离相同或成比例关系。
例如,当所述运动感应组件检测到VR眼镜佩戴者的肢体向正北方向移动了1米,则向所述无人机发送控制指令,控制所述无人机向正北方向移动1米。其中,所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离也可以成比例关系,如当所述比例为1:2时,则所述VR眼镜佩戴者的肢体移动1米时,所述无人机同时移动2米。
本实施例所述的基于VR眼镜控制无人机的装置,通过将生成的所述移动数据转换成无人机可识别的控制指令本发送至所述无人机,能够实现根据VR眼镜佩戴者的旋转或移动来控制无人机的旋转或者移动,且使所述无人机对应摄像头的拍摄视角与所述VR眼镜佩戴者的观影视角保持一致,提高了用户的视觉交互体验。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台终端设备执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种基于VR眼镜控制无人机的方法,其特征在于,所述VR眼镜设有运动感应组件,所述无人机设有摄像头,且VR眼镜与无人机无线连接并被分配所述无人机的控制权限,所述基于VR眼镜控制无人机的方法包括:
所述VR眼镜在接收到无人机发送的由所述摄像头拍摄的图像数据后,将接收到的图像数据转化为所述VR眼镜可播放的VR视频源,并在所述VR眼镜上进行播放;
通过设置在所述VR眼镜上的所述运动感应组件检测VR眼镜佩戴者的头部及肢体动作,并生成相应的运动数据;
将生成的运动数据转换成所述无人机可识别的控制指令,并将所述控制指令发送至所述无人机,以控制所述无人机执行相应的控制操作。
2.如权利要求1所述的基于VR眼镜控制无人机的方法,其特征在于,通过所述运动感应组件检测VR眼镜佩戴者的头部及肢体动作,并生成相应的运动数据包括:
当所述运动感应组件检测到VR眼镜佩戴者的头部发生旋转时,则获取VR眼镜佩戴者头部的旋转方向及旋转角度,并生成相应的旋转数据;
当所述运动感应组件检测到VR眼镜佩戴者的肢体发生移动时,则获取VR眼镜佩戴者肢体的移动方向及移动距离,并生成相应的移动数据。
3.如权利要求2所述的基于VR眼镜控制无人机的方法,其特征在于,所述将生成的运动数据转换成所述无人机可识别的控制指令,并将所述控制指令发送至所述无人机,以控制所述无人机执行相应的控制操作的步骤包括:
将所述旋转数据转换成无人机可识别的旋转控制指令,并发送至所述无人机,以控制所述无人机或无人机对应的摄像头执行相应的旋转操作,其中,所述无人机或无人机对应摄像头的旋转方向及旋转角度与所述VR眼镜佩戴者头部的旋转方向及旋转角度相同。
4.如权利要求3所述的基于VR眼镜控制无人机的方法,其特征在于,所述将生成的运动数据转换成所述无人机可识别的控制指令,并将所述控制指令发送至所述无人机,以控制所述无人机执行相应的控制操作的步骤还包括:
将所述移动数据转换成无人机可识别的移动控制指令,并发送至所述无人机,以控制所述无人机执行相应的移动操作,其中,所述无人机的移动方向与所述VR眼镜佩戴者肢体的移动方向相同,所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离相同或成比例关系。
5.如权利要求1-4任意一项所述的基于VR眼镜控制无人机的方法,其特征在于,所述运动感应组件包括陀螺仪与三轴运动传感器;
则所述通过运动感应组件检测VR眼镜佩戴者的头部及肢体动作包括:
当所述陀螺仪检测到VR眼镜佩戴者的头部发生旋转时,则获取所述VR眼镜佩戴者头部的旋转方向及旋转角度,当所述三轴运动传感器检测到VR眼镜佩戴者的肢体发生移动时,则获取所述VR眼镜佩戴者肢体的移动方向与移动距离。
6.一种基于VR眼镜控制无人机的装置,其特征在于,所述VR眼镜设有运动感应组件,所述无人机设有摄像头,且VR眼镜与无人机无线连接并被分配所述无人机的控制权限,所述基于VR眼镜控制无人机的装置包括:
接收模块,用于所述VR眼镜在接收到无人机发送的由所述摄像头拍摄的图像数据后,将接收到的图像数据转化为所述VR眼镜可播放的VR视频源,并在所述VR眼镜上进行播放;
检测模块,用于通过设置在所述VR眼镜上的所述运动感应组件检测VR眼镜佩戴者的头部及肢体动作,并生成相应的运动数据;
控制模块,用于将生成的运动数据转换成所述无人机可识别的控制指令,并将所述控制指令发送至所述无人机,以控制所述无人机执行相应的控制操作。
7.如权利要求6所述的基于VR眼镜控制无人机的装置,其特征在于,所述检测模块用于:
当所述运动感应组件检测到VR眼镜佩戴者的头部发生旋转时,则获取VR眼镜佩戴者头部的旋转方向及旋转角度,并生成相应的旋转数据;当所述运动感应组件检测到VR眼镜佩戴者的肢体发生移动时,则获取VR眼镜佩戴者肢体的移动方向及移动距离,并生成相应的移动数据。
8.如权利要求7所述的基于VR眼镜控制无人机的装置,其特征在于,所述控制模块包括:
第一控制单元,用于将所述旋转数据转换成无人机可识别的旋转控制指令,并发送至所述无人机,以控制所述无人机或无人机对应的摄像头执行相应的旋转操作,其中,所述无人机或无人机对应摄像头的旋转方向及旋转角度与所述VR眼镜佩戴者头部的旋转方向及旋转角度相同。
9.如权利要求8所述的基于VR眼镜控制无人机的装置,其特征在于,所述控制模块还包括:
第二控制单元,用于将所述移动数据转换成无人机可识别的移动控制指令,并发送至所述无人机,以控制所述无人机执行相应的移动操作,其中,所述无人机的移动方向与所述VR眼镜佩戴者肢体的移动方向相同,所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离相同或成比例关系。
10.如权利要求6-9任意一项所述的基于VR眼镜控制无人机的装置,其特征在于,所述运动感应组件包括陀螺仪与三轴运动传感器;
则所述检测模块用于:
当所述陀螺仪检测到VR眼镜佩戴者的头部发生旋转时,则获取所述VR眼镜佩戴者头部的旋转方向及旋转角度;当所述三轴运动传感器检测到VR眼镜佩戴者的肢体发生移动时,则获取所述VR眼镜佩戴者肢体的移动方向与移动距离。
CN201611112772.XA 2016-12-06 2016-12-06 基于vr眼镜控制无人机的方法及装置 Active CN106708074B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201611112772.XA CN106708074B (zh) 2016-12-06 2016-12-06 基于vr眼镜控制无人机的方法及装置
PCT/CN2017/071894 WO2018103188A1 (zh) 2016-12-06 2017-01-20 基于vr眼镜控制无人机的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611112772.XA CN106708074B (zh) 2016-12-06 2016-12-06 基于vr眼镜控制无人机的方法及装置

Publications (2)

Publication Number Publication Date
CN106708074A CN106708074A (zh) 2017-05-24
CN106708074B true CN106708074B (zh) 2020-10-30

Family

ID=58937618

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611112772.XA Active CN106708074B (zh) 2016-12-06 2016-12-06 基于vr眼镜控制无人机的方法及装置

Country Status (2)

Country Link
CN (1) CN106708074B (zh)
WO (1) WO2018103188A1 (zh)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019095139A1 (zh) * 2017-11-15 2019-05-23 深圳市大疆创新科技有限公司 数据处理方法和设备
CN108873931A (zh) * 2018-06-05 2018-11-23 北京理工雷科电子信息技术有限公司 一种基于主观与客观结合的无人机视觉防撞方法
CN109292103A (zh) * 2018-07-27 2019-02-01 北京臻迪科技股份有限公司 云台调整方法、装置、无人机及云台调整系统
CN109963137A (zh) * 2019-04-01 2019-07-02 赵福涛 一种全新的交互系统及方法
CN110337098B (zh) * 2019-07-05 2023-04-07 视联动力信息技术股份有限公司 一种通信连接的建立方法及装置
CN111031292A (zh) * 2019-12-26 2020-04-17 北京中煤矿山工程有限公司 一种基于vr技术的煤矿安全生产实时监测系统
CN112997508B (zh) * 2019-12-30 2024-03-15 深圳市大疆创新科技有限公司 视频处理方法、装置、控制终端、系统及存储介质
CN111314616A (zh) * 2020-03-16 2020-06-19 维沃移动通信有限公司 图像获取方法、电子设备、介质及可穿戴设备
CN111897417A (zh) * 2020-06-29 2020-11-06 北京农业信息技术研究中心 一种远程在线互动装置及使用方法
CN111857337A (zh) * 2020-07-10 2020-10-30 成都天翼空间科技有限公司 一种vr头控的切换方法
CN112653883A (zh) * 2020-11-30 2021-04-13 江苏奇趣智能科技有限公司 一种基于vr的全景实训装置
CN112822392B (zh) * 2020-12-25 2022-12-13 维沃移动通信有限公司 一种控制摄像模组旋转的方法及装置
CN112887616B (zh) * 2021-01-27 2022-08-26 维沃移动通信有限公司 拍摄方法和拍摄装置
CN115436377A (zh) * 2021-06-04 2022-12-06 同方威视技术股份有限公司 机器人及其控制装置和方法、车辆底盘检测系统和方法
CN113212777A (zh) * 2021-06-17 2021-08-06 广东汇天航空航天科技有限公司 载人飞行器体感控制方法、系统及相关设备
CN113608623B (zh) * 2021-08-27 2023-09-26 江西佳铭特实业有限公司 一种基于人脸识别的车用vr设备
CN113851024A (zh) * 2021-10-26 2021-12-28 东北大学秦皇岛分校 基于vr的四旋翼无人机遥控器训练方法及系统
CN114089784B (zh) * 2021-11-23 2023-03-24 广东工业大学 一种基于mr眼镜的无人机控制方法及系统
CN114137995A (zh) * 2021-11-24 2022-03-04 广东电网有限责任公司 一种无人机控制系统及其控制方法
CN114339189A (zh) * 2021-12-31 2022-04-12 绿城科技产业服务集团有限公司 沉浸式漫游实景vr呈现方法
CN114803858A (zh) * 2022-06-24 2022-07-29 杭州未名信科科技有限公司 智能塔机体感控制系统及智能塔机体感控制方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105763790A (zh) * 2014-11-26 2016-07-13 鹦鹉股份有限公司 用于以沉浸模式来驾驶无人机的视频系统

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103426282A (zh) * 2013-07-31 2013-12-04 深圳市大疆创新科技有限公司 遥控方法及终端
US9324189B2 (en) * 2013-09-27 2016-04-26 Intel Corporation Ambulatory system to communicate visual projections
CN105222761A (zh) * 2015-10-29 2016-01-06 哈尔滨工业大学 借助虚拟现实及双目视觉技术实现的第一人称沉浸式无人机驾驶系统及驾驶方法
CN105334864B (zh) * 2015-11-24 2018-12-07 杨珊珊 一种用于控制无人机的智能眼镜及控制方法
CN105739525B (zh) * 2016-02-14 2019-09-03 普宙飞行器科技(深圳)有限公司 一种配合体感操作实现虚拟飞行的系统
CN205692054U (zh) * 2016-06-22 2016-11-16 国网江西省电力公司南昌供电分公司 一种头部运动监测的无线巡线机
CN106125747A (zh) * 2016-07-13 2016-11-16 国网福建省电力有限公司 基于vr交互的无人机机载第一视角随动吊舱系统
CN106131530B (zh) * 2016-08-26 2017-10-31 万象三维视觉科技(北京)有限公司 一种裸眼3d虚拟现实展示系统及其展示方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105763790A (zh) * 2014-11-26 2016-07-13 鹦鹉股份有限公司 用于以沉浸模式来驾驶无人机的视频系统

Also Published As

Publication number Publication date
CN106708074A (zh) 2017-05-24
WO2018103188A1 (zh) 2018-06-14

Similar Documents

Publication Publication Date Title
CN106708074B (zh) 基于vr眼镜控制无人机的方法及装置
US10639557B2 (en) Synchronized motion simulation for virtual reality
JP6276882B1 (ja) 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム
CN103357177B (zh) 使用便携式游戏装置来记录或修改在主游戏系统上实时运行的游戏或应用
EP2795936B1 (en) User-to-user communication enhancement with augmented reality
US8419545B2 (en) Method and system for controlling movements of objects in a videogame
CN109471842B (zh) 一种图像文件格式及生成方法及装置及应用
US10223064B2 (en) Method for providing virtual space, program and apparatus therefor
CN107533356A (zh) 头像控制系统
US8847879B2 (en) Motionbeam interaction techniques for handheld projectors
US20180196506A1 (en) Information processing method and apparatus, information processing system, and program for executing the information processing method on computer
US20180300926A1 (en) Information processing method and apparatus, and program for executing the information processing method on computer
US20180374275A1 (en) Information processing method and apparatus, and program for executing the information processing method on computer
US20180348531A1 (en) Method executed on computer for controlling a display of a head mount device, program for executing the method on the computer, and information processing apparatus therefor
US20180299948A1 (en) Method for communicating via virtual space and system for executing the method
US20230051703A1 (en) Gesture-Based Skill Search
US20220351472A1 (en) Remote camera augmented reality system
CN111716365A (zh) 基于自然行走的沉浸式远程交互系统及方法
Mangina et al. Drones for live streaming of visuals for people with limited mobility
CN112099529B (zh) 虚拟现实设备控制系统和方法
EP3262624A1 (en) Immersive vehicle simulator apparatus and method
KR101881227B1 (ko) 무인 비행체를 이용한 비행 체험 방법 및 장치
JP6554139B2 (ja) 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム
KR101479410B1 (ko) 완구 부착형 애드온 장치를 이용한 증강현실 컨텐츠 제공 시스템
CN107608522B (zh) 利用移动设备定制虚拟运动场景的方法和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant