CN110666790B - 果园直播机器人及果园直播系统 - Google Patents

果园直播机器人及果园直播系统 Download PDF

Info

Publication number
CN110666790B
CN110666790B CN201910784841.9A CN201910784841A CN110666790B CN 110666790 B CN110666790 B CN 110666790B CN 201910784841 A CN201910784841 A CN 201910784841A CN 110666790 B CN110666790 B CN 110666790B
Authority
CN
China
Prior art keywords
live broadcast
orchard
robot
module
broadcast information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910784841.9A
Other languages
English (en)
Other versions
CN110666790A (zh
Inventor
吴升
郭新宇
温维亮
卢宪菊
王殿亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Research Center for Information Technology in Agriculture
Original Assignee
Beijing Research Center for Information Technology in Agriculture
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Research Center for Information Technology in Agriculture filed Critical Beijing Research Center for Information Technology in Agriculture
Priority to CN201910784841.9A priority Critical patent/CN110666790B/zh
Publication of CN110666790A publication Critical patent/CN110666790A/zh
Application granted granted Critical
Publication of CN110666790B publication Critical patent/CN110666790B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00Manipulators not otherwise provided for
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/02Sensing devices
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/02Sensing devices
    • B25J19/021Optical sensing devices
    • B25J19/023Optical sensing devices including video camera means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1656Programme controls characterised by programming, planning systems for manipulators
    • B25J9/1664Programme controls characterised by programming, planning systems for manipulators characterised by motion, path, trajectory planning
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2355Processing of additional data, e.g. scrambling of additional data or processing content descriptors involving reformatting operations of additional data, e.g. HTML pages
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H04N21/4355Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream involving reformatting operations of additional data, e.g. HTML pages on a television screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Databases & Information Systems (AREA)
  • Manipulator (AREA)

Abstract

本发明实施例提供了一种果园直播机器人及果园直播系统,一方面,可以通过果园直播机器人自动获取到所需要的直播信息,避免了现有技术中通过人工实现对直播信息的获取;另一方面,由于直播信息采集模块中包括全景相机、微距相机以及彩色相机,可以获取到不同类别的图像及视频,满足对不同关键生长阶段对应的不同农事操作进行直播。

Description

果园直播机器人及果园直播系统
技术领域
本发明涉及农业信息采集技术领域,更具体地,涉及果园直播机器人及果园直播系统。
背景技术
目前,随着虚拟现实技术、通信技术和多媒体技术的发展,直播技术已在医疗、教育、会商、娱乐等领域发展得到了应用。农业生产场景和农作物生长在线直播即是人们探索植物生长奥秘的有效途径,也是农产品可视化溯源营销的先进营销模式。特别是,随着果园栽培管理模式的发展,规模化果园已从传统的农业生产单一属性,转变为集果品生产、文化教育、旅游观光等多重属性,提供文化增值服务,从而增加果农收入。因此,果园科普基地建设和果品营销定制化服务有广泛的应用需求。
传统的植物科普教育模式,多采用文字、图片等多媒体形式,在教学过程中存在无法展示植物生长动态信息、无法展示植物生长实时信息、无法展示植物生长细节数据等缺点,同时枯燥无味。有研究人员设计了植物观察科普教学装置,但这种装置是密闭式的,空间比较小,不适合果园大范围尺度。因此,以直播技术为主导的果园科普基地建设和果品营销定制化服务已成为新的应用需求。
目前获取果园农业生产场景和果树生长动态变化过程的直播信息均是通过工作人员在果园内人工获取,而由于果园内果树生长周期长、果树高大、果树在萌芽、开花、抽稍、长叶、结果等关键生长阶段的状态随着时间变化差异较大、果园作业流程多、果园地理环境复杂等特点,而且不同关键生长阶段对应不同的农事操作,会产生大量的人工操作,导致成本较高。
发明内容
为克服上述问题或者至少部分地解决上述问题,本发明实施例提供了一种果园直播机器人及果园直播系统。
第一方面,本发明实施例提供了一种果园直播机器人,包括:机器人本体、机器人控制模块、机器人移动模块以及直播信息采集模块;
所述机器人移动模块固定连接在所述机器人本体下方,所述直播信息采集模块固定连接在所述机器人本体上方,且所述机器人控制模块分别与所述机器人移动模块和所述直播信息采集模块电连接;
所述直播信息采集模块包括直播信息采集组件和激光雷达探路模块,所述直播信息采集组件具体包括全景相机、微距相机以及彩色相机,所述激光雷达探路模块具体包括激光雷达传感器。
优选地,所述直播信息采集组件还包括:感光器,所述感光器设置在所述直播信息采集模块的预设距离范围内;
所述感光器用于获取当前环境的光照强度,并将所述光照强度传输至所述机器人控制模块,所述机器人控制模块用于基于所述光照强度判断当前环境是否满足直播信息采集条件。
优选地,所述果园直播机器人还包括:遮光装置,所述遮光装置固定在所述机器人本体上方,且所述遮光装置的顶端延伸至所述直播信息采集模块上方,所述遮光装置与所述机器人控制器连接;
若所述机器人控制模块判断获知当前环境不满足直播信息采集条件,则所述机器人控制器控制所述遮光装置工作。
优选地,所述遮光装置具体包括:可沿竖直方向伸缩的支撑架以及可沿预设方向伸缩的遮光伞;
所述支撑架竖直固定连接在所述机器人本体上方,所述遮光伞连接在所述支撑架的顶端。
优选地,所述果园直播机器人还包括:存储模块,所述存储模块与所述机器人控制模块连接。
优选地,所述果园直播机器人还包括:供电模块,所述供电模块与所述机器人控制模块连接。
第二方面,本发明实施例中提供了一种果园直播系统,包括:第一方面提供的果园直播机器人、云服务器以及果园直播体验装置;
所述云服务器包括机器人路径规划模块和直播信息处理模块,所述机器人路径规划模块和所述直播信息处理模块分别与所述果园直播机器人中的机器人控制模块通信连接,所述直播信息处理模块还与所述果园直播体验装置通信连接。
优选地,所述机器人路径规划模块具体用于:
基于果园深度图,确定所述果园直播机器人的行走路径;或者,
基于接收到的用户指令,确定所述果园直播机器人的行走路径,所述用户指令由所述果园直播体验装置发送;
所述机器人路径规划模块还用于:
将所述果园直播机器人的行走路径传输至所述机器人控制模块。
优选地,所述直播信息处理模块具体用于:
对所述机器人控制模块传输的直播信息与预先存储的辅助信息进行融合,并对融合后的直播信息进行处理,将处理后的直播信息传输至所述果园直播体验装置。
优选地,所述果园直播体验装置具体为VR一体机或VR手机盒子。
本发明实施例提供的果园直播机器人及果园直播系统,一方面,可以通过果园直播机器人自动获取到所需要的直播信息,避免了现有技术中通过人工实现对直播信息的获取;另一方面,由于直播信息采集模块中包括全景相机、微距相机以及彩色相机,可以获取到不同类别的图像及视频,满足对不同关键生长阶段对应的不同农事操作进行直播。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种果园直播机器人的结构示意图;
图2为本发明实施例提供的一种果园直播机器人的结构示意图;
图3为本发明实施例提供的一种果园直播系统的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1所示,本发明实施例提供了一种果园直播机器人,包括:机器人本体、机器人控制模块、机器人移动模块以及直播信息采集模块;所述机器人移动模块固定连接在所述机器人本体下方,所述直播信息采集模块固定连接在所述机器人本体上方,且所述机器人控制模块分别与所述机器人移动模块和所述直播信息采集模块电连接;
所述直播信息采集模块包括直播信息采集组件和激光雷达探路模块,所述直播信息采集组件具体包括全景相机、微距相机以及彩色相机,所述激光雷达探路模块具体包括激光雷达传感器。
具体地,如图1所示,本发明实施例提供的果园直播机器人5中,包括:机器人本体1、机器人控制模块2、机器人移动模块3以及直播信息采集模块4。机器人移动模块3固定连接在机器人本体1下方,直播信息采集模块4固定连接在器人本体1上方,且机器人控制模块2分别与机器人移动模块3和直播信息采集模块4电连接,具体可以通过导线实现电连接。机器人移动模块3用于支撑机器人本体1并带动机器人本体1在果园内移动,机器人移动模块3具体可以通过车轮或者履带实现带动机器人本体1在果园内移动,本发明实施例中对此不作具体限定,图1中仅示出了机器人移动模块3通过履带实现带动机器人本体1在果园内移动的情况。
机器人移动模块3的结构具体可以包括动力系统和移动机构,动力系统与机器人控制模块2电连接,动力系统为移动机构提供驱动力,移动机构支撑机器人本体1并带动机器人本体1在果园内移动。这里所说的移动机构可以通过车轮或者履带实现支撑和移动功能。
直播信息采集模块4用于采集果园内每一位置的直播信息,果园即直播现场。机器人控制模块2可以用于控制机器人移动模块3的移动动作,进而实现机器人本体1在果园内移动;机器人控制模块2还可以用于控制直播信息采集模块4的采集动作并控制直播信息采集模块4采集到的直播信息传输至机器人控制模块2中。
直播信息采集模块4包括直播信息采集组件和激光雷达探路模块,直播信息采集组件具体包括全景相机41、微距相机42以及彩色相机43,全景相机41用于获取果园的全景图像,微距相机42用于获取果园内果树的吐芽、开花、结果等微距图像及视频,彩色相机43用于获取果园的高清彩色图像及视频。直播信息包括上述的全景图像、微距图像及视频、高清彩色图像及视频等。激光雷达探路模块具体包括激光雷达传感器44,激光雷达传感器44可以预测机器人本体1的前方是否有障碍物,可以通过激光雷达传感器44实现机器人本体1的避障功能。其中,直播信息采集模块4中全景相机41、微距相机42以及彩色相机43的数量可以分别是一个也可以分别是多个,可以根据需要进行设置,本发明实施例中对此不作具体限定。机器人控制模块2在控制直播信息采集模块4的采集动作时,可以分别控制全景相机41、微距相机42或彩色相机43实现采集相应图像及视频,也可以同时控制全景相机41、微距相机42以及彩色相机43中的任意两个,还可以同时控制全景相机41、微距相机42以及彩色相机43三个,本发明实施例中对此不作具体限定,可以根据需要确定机器人控制模块2的控制对象。对于微距相机42,机器人控制模块2可以先确定视频拍摄范围,虚化处理拍摄范围外的景物,提高微距视频的局角度和清晰度,从而形成果树绿叶、开花、结果等过程的微距图像及视频。
本发明实施例中还可以对相机的种类进行扩展,可以根据需要增加相应种类的相机,以实现不同类型图像及视频的采集,例如,可以在直播信息采集模块4中加入红外相机,红外相机与机器人控制模块电连接,以获取果园内的红外影像并传输至机器人控制模块,便于后续分析。
激光雷达探路模块还可以包括报警器45,报警器45与机器人控制模块2电连接,激光雷达传感器44若预测到机器人本体1的前方存在障碍物,则激光雷达传感器44向机器人控制模块2发送障碍物信息,机器人控制模块2控制报警器45进行报警,并控制机器人移动模块3通过履带实现带动机器人本体1在果园内移动。
本发明实施例中提供的果园直播机器人,一方面,可以通过果园直播机器人自动获取到所需要的直播信息,避免了现有技术中通过人工实现对直播信息的获取;另一方面,由于直播信息采集模块中包括全景相机、微距相机以及彩色相机,可以获取到不同类别的图像及视频,满足对不同关键生长阶段对应的不同农事操作进行直播。
在上述实施例的基础上,本发明实施例中提供的果园直播机器人,宽度不小于60cm,长度不小于100cm,高度不小于40cm。果园直播机器人中的机器人控制模块具体可以是电动控制电路板,可以控制机器人移动模块进行前进、后退、拐弯等移动操作。
在上述实施例的基础上,本发明实施例中提供的果园直播机器人,激光雷达传感器具体可以是SICK线阵激光雷达,用于果园直播机器人的视觉判断。
在上述实施例的基础上,本发明实施例中提供的果园直播机器人中,全景相机具体可以采用GOPRO Fusion系列全景相机,但不限于该型号相机。微距相机具体可以采用微距镜头并配置相机。彩色相机具体可以采用高清彩色相机,可以是网络高清摄像机。
在上述实施例的基础上,本发明实施例中提供的果园直播机器人,所述直播信息采集组件还包括:感光器,所述感光器设置在所述直播信息采集模块的预设距离范围内;
所述感光器用于获取当前环境的光照强度,并将所述光照强度传输至所述机器人控制模块,所述机器人控制模块用于基于所述光照强度判断当前环境是否满足直播信息采集条件。
具体地,由于直播信息采集组件中包括各种相机,相机在采集图像以及视频时会受到环境光照的影响,因此本发明实施例中在直播信息采集组件中设置有感光器,感光器设置在直播信息采集模块的预设距离范围内,感光器用于获取当前环境的光照强度并将获取到的光照强度传输至机器人控制模块,机器人控制模块用于基于光照强度判断当前环境是否满足直播信息采集条件。其中,当前环境是指感光器所处的环境,即直播信息采集模块周围的环境。直播信息采集条件是指光照强度所需要满足的采集条件。机器人控制模块的判断功能可以通过如下方式实现:在机器人控制模块内预先存储有保证直播信息采集模块正常采集到直播信息的目标光照强度范围,然后将感光器获取到的当前环境的光照强度与目标光照强度范围进行比对,判断当前环境的光照强度是否处于目标光照强度范围内,若当前环境的光照强度处于目标光照强度范围内,则说明当前环境的光照强度可以保证直播信息采集模块正常采集到直播信息。否则,若当前环境的光照强度高于目标光照强度范围,则说明需要对直播信息采集模块进行遮光处理。
在上述实施例的基础上,本发明实施例中提供的果园直播机器人还包括:遮光装置,所述遮光装置固定在所述机器人本体上方,且所述遮光装置的顶端延伸至所述直播信息采集模块上方,所述遮光装置与所述机器人控制器连接;
若所述机器人控制模块判断获知当前环境不满足直播信息采集条件,则所述机器人控制器控制所述遮光装置工作。
具体地,本发明实施例中,在直播信息采集模块附近的机器人本体上方设置有遮光装置,遮光装置的顶端延伸至直播信息采集模块上方,以实现对直播信息采集模块的遮光处理,保证直播信息采集模块采集到的图像及视频的质量。
在上述实施例的基础上,本发明实施例中提供的果园直播机器人,所述遮光装置具体包括:可沿竖直方向伸缩的支撑架以及可沿预设方向伸缩的遮光伞;
所述支撑架竖直固定连接在所述机器人本体上方,所述遮光伞连接在所述支撑架的顶端。
具体地,如图2所示,本发明实施例中,遮光装置6的结构具体可以包括支撑架61和遮光伞62。其中,支撑架61可沿竖直方向伸缩,自动调节高度。遮光伞62可沿预设方向伸缩,预设方向可以根据太阳光照的方向进行调整,本发明实施例中对此不作具体限定。支撑架61可以竖直固定连接在机器人本体1上方,遮光伞62则连接在支撑架61的顶端。可以通过控制支撑架的高度以及遮光伞的伸缩程度实现对当前环境的光照强度进行控制。本发明实施例中,为有效控制当前环境的光照强度,遮光装置中的支撑架的最大伸缩高度可不小于3米。
在上述实施例的基础上,本发明实施例中提供的果园直播机器人还包括:可沿竖直方向伸缩的采集模块支撑架,采集模块支撑架竖直固定连接在机器人本体上方,直播信息采集模块固定在采集模块支撑架的上部。本发明实施例中,为充分获取到直播信息,遮光装置中的支撑架的最大伸缩高度可不小于3米。
在上述实施例的基础上,本发明实施例中提供的果园直播机器人还包括:存储模块,所述存储模块与所述机器人控制模块连接。
具体地,本发明实施例中的存储模块可以用于存储直播信息采集模块采集得到的直播信息,即各种图像及视频等。本发明实施例中可以将存储模块内嵌至机器人控制模块中,也可以独立于存储模块存在,本发明对此不作具体限定。
在上述实施例的基础上,本发明实施例中提供的果园直播机器人还包括:供电模块,所述供电模块与所述机器人控制模块连接。
具体地,本发明实施例中,由于果园直播机器人在果园内工作,因此为保证果园直播机器人的续航能力,在果园直播机器人上设置供电模块,如图2所示,供电模块7与机器人控制模块2电连接,为机器人控制模块2及与机器人控制模块2电连接的其他模块供电。
本发明实施例中供电模块具体可以包括充电电池71,还可以包括太阳能电路板72,太阳能电路板72设置在充电电池71的上方。当充电电池71缺电后,可以通过太阳能电路板72对充电电池进行充电。
在上述实施例的基础上,本发明实施例中还提供了一种果园直播系统,包括:上述任一实施例中提供的果园直播机器人、云服务器以及果园直播体验装置;
所述云服务器包括机器人路径规划模块和直播信息处理模块,所述机器人路径规划模块和所述直播信息处理模块分别与所述果园直播机器人中的机器人控制模块通信连接,所述直播信息处理模块还与所述果园直播体验装置通信连接。
具体地,如图3所示,本发明实施例中的果园直播系统,包括:上述任一实施例中提供的果园直播机器人5、云服务器8以及果园直播体验装置9。云服务器8包括机器人路径规划模块81和直播信息处理模块82,机器人路径规划模块81和直播信息处理模块82分别与果园直播机器人5中的机器人控制模块2通信连接,机器人路径规划模块81用于对果园直播机器人5的行走路径进行规划,并将规划好的行走路径传输至果园直播机器人5中的机器人控制模块2,使机器人控制模块2控制果园直播机器人5中的机器人移动模块3带动机器人本体1在果园内沿规划好的行走路径移动。直播信息处理模块82用于获取机器人控制模块2得到的直播信息,并对直播信息进行处理。直播信息处理模块82还与果园直播体验装置9通信连接,以使直播信息处理模块82处理后的直播信息可以传输至果园直播体验装置9供用户进行体验。果园直播体验装置9可以设置在客户端,通过手机、平板电脑等移动通信设备,可选的结合VR设备,面向果园科普教育以及新型果品互联网营销应用,向用户提供直播体验服务。另一方面,用户可以将动作指令通过果园直播体验装置9转化为控制指令,控制指令经云服务器8传输至果园直播机器人中的机器人控制模块,实现用户对直播信息采集模块的采集动作的控制。本发明实施例中对用户的性别、年龄以及工作类型等均不作具体限定,具体可以指果园科普教育学习群体和果品溯源营销消费群体。
需要说明的是,可以在机器人控制模块2、云服务器8以及果园直播体验装置9中均分别配置有通信子模块,以实现三者之间的通信连接。本发明实施例中的通信子模块具体可以通过5G实现通信功能。
本发明实施例中提供的果园直播系统,旨在面向果园科普教育以及新型果品互联网营销的应用,利用机器人技术、传感拍摄技术和虚拟交互技术,设计适用于果园直播体验的果园直播系统,实现果园生产管理、果树生长、果品观测在线直播、科普解说和溯源查询云服务应用,从而降低果园科普资源的制作成本,提升果园科普体验的沉浸感,进而构建可信的果品溯源营销在线服务模式,同时也为中小学果园教学实验提供实用的平台系统。
在上述实施例的基础上,本发明实施例中提供的果园直播系统,云服务器还包括:访问资费权限模块,访问资费权限模块内存储有费用与权限之间的对应关系,访问资费权限模块根据用户的付费情况为用户开放相应的直播资源访问权限以及操控果园直播机器人权限。
在上述实施例的基础上,本发明实施例中提供的果园直播系统,所述机器人路径规划模块具体用于:
基于果园深度图,确定所述果园直播机器人的行走路径;或者,
基于接收到的用户指令,确定所述果园直播机器人的行走路径,所述用户指令由所述果园直播体验装置发送;
所述机器人路径规划模块还用于:
将所述果园直播机器人的行走路径传输至所述机器人控制模块。
具体地,本发明实施例中,机器人路径规划模块在对果园直播机器人的行走路径进行规划时,可以有两种方式实现:一种方式是根据果园深度图确定果园直播机器人的行走路径,果园深度图可以是通过无人机在果园上方拍摄得到,具体是指包含深度信息的果园俯视图像。根据果园深度图中包含的深度信息,可以确定出果园内的果树区域,并可进一步通过人工在果树区域内标记出各果树的类别,最终可规划出果园直播机器人的行走路径,也可同时规划出多条果园直播机器人的行走路径备用。另一种方式是根据接收到的用户指令确定果园直播机器人的行走路径,用户指令由果园直播体验装置发送。用户可以向果园直播体验装置输入相应的路径指示,果园直播体验装置将输入的路径指示转化为用户指令并根据用户指令确定出果园直播机器人的行走路径。
相应地,机器人路径规划模块在确定出果园直播机器人的行走路径后,还用于:将果园直播机器人的行走路径传输至机器人控制模块。
在上述实施例的基础上,本发明实施例中提供的果园直播系统,所述直播信息处理模块具体用于:
对所述机器人控制模块传输的直播信息与预先存储的辅助信息进行融合,并对融合后的直播信息进行处理,将处理后的直播信息传输至所述果园直播体验装置。
具体地,本发明实施例中,直播信息处理模块对直播信息进行处理,可以包括将直播信息与预先存储的辅助信息进行融合,辅助信息可以是与直播信息相关的字幕、动画以及语音等信息。对于全景图像,可以形成适合3D体验的VR视频格式。然后,对融合后的直播信息进行处理,具体可以对融合后的直播信息进行码流压缩、裁剪和转码等处理
本发明实施例中,通过直播信息处理模块对机器人控制模块传输的直播信息进行处理,可以使用户的直播体验更好。
在上述实施例的基础上,本发明实施例中提供的果园直播系统,果园直播体验装置具体可以是VR一体机或VR手机盒子。通过VR一体机或VR手机盒子可以向用户提供果园在线直播视频资源、果园生长动态视频资源、果园管理工况时视频资源、果园果品溯源视频资源、果品定制营销直播视频资源,实现直播的沉浸感。
本发明实施例中提供了一种果园直播机器人及果园直播系统,利用机器人技术、传感拍摄技术和虚拟交互技术,设计适用于果园直播机器人,构建果园生长直播技术解决方案,实现果园生产管理、果树生长、果品观测在线直播、科普解说和溯源查询云服务应用。首先,根据果园实际场景,对果园直播机器人进行整合设计,实现了果园直播机器人的自动化、直播信息采集模块的多源化设计,并采用5G传输通信模块,提升了直播视频流的在线通信性能。其次,本发明实施例中采用云服务机制,实时采集直播信息并进行实时处理,降低了系统的维护成本和供用户体验的直播资源制作的人工成本,具有一定的智能性。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (7)

1.一种果园直播系统,其特征在于,包括:果园直播机器人、云服务器以及果园直播体验装置;
所述果园直播机器人包括:机器人本体、机器人控制模块、机器人移动模块以及直播信息采集模块;
所述机器人移动模块固定连接在所述机器人本体下方,所述直播信息采集模块固定连接在所述机器人本体上方,且所述机器人控制模块分别与所述机器人移动模块和所述直播信息采集模块电连接;
所述直播信息采集模块包括直播信息采集组件和激光雷达探路模块,所述直播信息采集组件具体包括全景相机、微距相机以及彩色相机,所述激光雷达探路模块具体包括激光雷达传感器;
所述直播信息采集模块还包括红外相机,所述红外相机与所述机器人控制模块电连接,以获取果园内的红外影像并传输至所述机器人控制模块;
所述直播信息采集组件还包括:感光器,所述感光器设置在所述直播信息采集模块的预设距离范围内;
所述感光器用于获取当前环境的光照强度,并将所述光照强度传输至所述机器人控制模块,所述机器人控制模块用于基于所述光照强度判断当前环境是否满足直播信息采集条件;
所述云服务器包括机器人路径规划模块和直播信息处理模块,所述机器人路径规划模块和所述直播信息处理模块分别与所述果园直播机器人中的机器人控制模块通信连接,所述直播信息处理模块还与所述果园直播体验装置通信连接;
所述直播信息处理模块具体用于:
对所述机器人控制模块传输的直播信息与预先存储的辅助信息进行融合,并对融合后的直播信息进行处理,将处理后的直播信息传输至所述果园直播体验装置。
2.根据权利要求1所述的果园直播系统,其特征在于,还包括:遮光装置,所述遮光装置固定在所述机器人本体上方,且所述遮光装置的顶端延伸至所述直播信息采集模块上方,所述遮光装置与所述机器人控制模块连接;
若所述机器人控制模块判断获知当前环境不满足直播信息采集条件,则所述机器人控制模块控制所述遮光装置工作。
3.根据权利要求2所述的果园直播系统,其特征在于,所述遮光装置具体包括:可沿竖直方向伸缩的支撑架以及可沿预设方向伸缩的遮光伞;
所述支撑架竖直固定连接在所述机器人本体上方,所述遮光伞连接在所述支撑架的顶端。
4.根据权利要求1-3中任一项所述的果园直播系统,其特征在于,还包括:存储模块,所述存储模块与所述机器人控制模块连接。
5.根据权利要求1-3中任一项所述的果园直播系统,其特征在于,还包括:供电模块,所述供电模块与所述机器人控制模块连接。
6.根据权利要求1-3中任一项所述的果园直播系统,其特征在于,所述机器人路径规划模块具体用于:
基于果园深度图,确定所述果园直播机器人的行走路径;或者,
基于接收到的用户指令,确定所述果园直播机器人的行走路径,所述用户指令由所述果园直播体验装置发送;
所述机器人路径规划模块还用于:
将所述果园直播机器人的行走路径传输至所述机器人控制模块。
7.根据权利要求1-3中任一项所述的果园直播系统,其特征在于,所述果园直播体验装置具体为VR一体机或VR手机盒子。
CN201910784841.9A 2019-08-23 2019-08-23 果园直播机器人及果园直播系统 Active CN110666790B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910784841.9A CN110666790B (zh) 2019-08-23 2019-08-23 果园直播机器人及果园直播系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910784841.9A CN110666790B (zh) 2019-08-23 2019-08-23 果园直播机器人及果园直播系统

Publications (2)

Publication Number Publication Date
CN110666790A CN110666790A (zh) 2020-01-10
CN110666790B true CN110666790B (zh) 2021-05-07

Family

ID=69076375

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910784841.9A Active CN110666790B (zh) 2019-08-23 2019-08-23 果园直播机器人及果园直播系统

Country Status (1)

Country Link
CN (1) CN110666790B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111833154A (zh) * 2020-07-22 2020-10-27 玉环睿升自动化技术有限公司 农作物的产销一体系统
CN111861668A (zh) * 2020-07-22 2020-10-30 玉环睿升自动化技术有限公司 一种基于区块链和视频直播的农作物的产销一体系统

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105759540A (zh) * 2016-04-12 2016-07-13 武汉理工大学 三遮光片双热靴座多功能分体式全画幅工业相机
CN105847707A (zh) * 2016-05-25 2016-08-10 新维畅想数字科技(北京)有限公司 一种自动变换光源的同步摄影装置
CN107235131A (zh) * 2017-05-25 2017-10-10 深圳微孚智能信息科技有限公司 一种可直播的水下机器人
WO2017209409A1 (ko) * 2016-06-02 2017-12-07 삼성전자 주식회사 구형 컨텐츠 편집 방법 및 이를 지원하는 전자 장치
CN207326997U (zh) * 2017-08-15 2018-05-08 上海宜硕网络科技有限公司 机器人和机器人服务管理系统
CN108551583A (zh) * 2018-06-25 2018-09-18 王伟涛 视频采集装置、识别标识、服务器、客户端及营销系统
CN208337723U (zh) * 2018-07-17 2019-01-04 北京牡丹视源电子有限责任公司 一种vr移动直播系统
CN109964596A (zh) * 2019-04-01 2019-07-05 华南农业大学 一种基于智能机器人的水稻直播装置与方法
CN110138834A (zh) * 2019-04-15 2019-08-16 叶和 一种基于移动互联网和大数据的种养殖规划管理平台

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5916365B2 (ja) * 2011-12-09 2016-05-11 株式会社ドワンゴ 映像送信システム、映像送信方法及びコンピュータプログラム

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105759540A (zh) * 2016-04-12 2016-07-13 武汉理工大学 三遮光片双热靴座多功能分体式全画幅工业相机
CN105847707A (zh) * 2016-05-25 2016-08-10 新维畅想数字科技(北京)有限公司 一种自动变换光源的同步摄影装置
WO2017209409A1 (ko) * 2016-06-02 2017-12-07 삼성전자 주식회사 구형 컨텐츠 편집 방법 및 이를 지원하는 전자 장치
CN107235131A (zh) * 2017-05-25 2017-10-10 深圳微孚智能信息科技有限公司 一种可直播的水下机器人
CN207326997U (zh) * 2017-08-15 2018-05-08 上海宜硕网络科技有限公司 机器人和机器人服务管理系统
CN108551583A (zh) * 2018-06-25 2018-09-18 王伟涛 视频采集装置、识别标识、服务器、客户端及营销系统
CN208337723U (zh) * 2018-07-17 2019-01-04 北京牡丹视源电子有限责任公司 一种vr移动直播系统
CN109964596A (zh) * 2019-04-01 2019-07-05 华南农业大学 一种基于智能机器人的水稻直播装置与方法
CN110138834A (zh) * 2019-04-15 2019-08-16 叶和 一种基于移动互联网和大数据的种养殖规划管理平台

Also Published As

Publication number Publication date
CN110666790A (zh) 2020-01-10

Similar Documents

Publication Publication Date Title
US11039086B2 (en) Dual lens system having a light splitter
CN107450587B (zh) 一种无人机精细化巡检的智能飞行控制方法及系统
US10979651B2 (en) Imaging system
CN110666790B (zh) 果园直播机器人及果园直播系统
Mademlis et al. Autonomous unmanned aerial vehicles filming in dynamic unstructured outdoor environments [applications corner]
CN105704501A (zh) 一种基于无人机全景视频的虚拟现实直播系统
CN110944107B (zh) 一种实现环视网络摄像机组单屏还原显示计算机系统
CN106648045A (zh) 一种基于虚拟现实技术的实时旅游体验系统
CN112162565B (zh) 一种基于多机协同作业的不间断自主杆塔巡检方法
WO2020103108A1 (zh) 一种语义生成方法、设备、飞行器及存储介质
CN110262476A (zh) 一种植物生长直播云平台
CN104702871A (zh) 无人机投影显示方法、系统及装置
CN210110158U (zh) 智慧城市沙盘演示系统
CN112711900A (zh) 一种农作物数字孪生建模方法
Wang et al. Research on image capture technology of intelligent terminal and multi exposure fusion to improve the resilience of agriculture production systems
Wang et al. Research advance in phenotype detection robots for agriculture and forestry
Li et al. Inter-row information recognition of maize in the middle and late stages via LiDAR supplementary vision
CN117197595A (zh) 基于边缘计算的果树生育期识别方法、装置及管理平台
CN117434965A (zh) 一种无人机多机协同的天然牧场智能管理方法及管理系统
CN108419052A (zh) 一种多台无人机全景成像方法
CN106294428A (zh) 一种虚拟漫游实现方法
CN116938972A (zh) 一种基于5g通信与机器学习的端云协同农情检测系统
Xue et al. Monocular vision obstacle avoidance UAV: a deep reinforcement learning method
CN205283686U (zh) 用于航拍的摄像机及航拍器
CN112417193A (zh) 野外虫草搜寻辨识方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant