CN113341979A - 一种基于ros的超市购物机器人 - Google Patents

一种基于ros的超市购物机器人 Download PDF

Info

Publication number
CN113341979A
CN113341979A CN202110651760.9A CN202110651760A CN113341979A CN 113341979 A CN113341979 A CN 113341979A CN 202110651760 A CN202110651760 A CN 202110651760A CN 113341979 A CN113341979 A CN 113341979A
Authority
CN
China
Prior art keywords
shopping
module
ros
central controller
robot
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110651760.9A
Other languages
English (en)
Inventor
高金凤
汪家琪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University of Technology ZJUT
Original Assignee
Zhejiang University of Technology ZJUT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University of Technology ZJUT filed Critical Zhejiang University of Technology ZJUT
Priority to CN202110651760.9A priority Critical patent/CN113341979A/zh
Publication of CN113341979A publication Critical patent/CN113341979A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • G05D1/0217Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory in accordance with energy consumption, time reduction or distance reduction criteria
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0257Control of position or course in two dimensions specially adapted to land vehicles using a radar

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Electromagnetism (AREA)
  • Manipulator (AREA)

Abstract

本发明公开了一种基于ROS的超市购物机器人,包括远程控制设备、安装了自主结账软件的移动终端和ROS机器人系统;所述ROS机器人系统包括ROS机器人本体和安装在ROS机器人本体上的外部设备。在人体跟随的过程中,所述扫码枪将扫取的商品条形码信息传送给所述的数据采集模块,同将所选商品放入购物篮;然后,安装了自主结账软件的移动终端将获取来自所述的数据采集模块的商品条形码信息并调用相应的API接口,将API响应数据通过JSON解析为想要提取的商品信息;最后,安装了自主结账软件的移动终端可以对所选商品进行计价和结算。

Description

一种基于ROS的超市购物机器人
技术领域
本发明涉及机器人领域,具体涉及一种超市购物机器人。
背景技术
一方面,随着机器人技术的不断发展,机器人的应用场景越来越广。从最初的军事领域到现在的医疗、工业、服务业等领域,实现了机器人的普及化。其中,最具代表性的应该是在服务性领域。在许多大型的超市,传统的手推购物车购物和排队等待人工收银的方式不仅无法满足人们轻松购物的需求,还会给超市造成一定秩序维护和服务成本上的负担。
另一方面,机器人操作系统ROS是构建机器人应用程序的一套软件库和工具库,是编写机器人软件的灵活框架。它是常用机器人工具库、机器人程序库和约定协议的集合,其目的是简化在各种机器人平台上创建复杂而鲁棒的机器人行为的任务。机器人操作系统ROS包含驱动程序、先进的算法、强大的机器人开发工具,而且都是开源的。所以,基于ROS操作系统的超市购物机器人是一个重要的研究方向。
发明内容
针对上述问题,本发明提供一种基于ROS的超市购物机器人,不仅可以解放顾客的双手,使顾客达到轻松购物的需求,还可以有效的避免超市高峰期间购物排队现象,降低超市的服务成本,提高顾客的购物体验。
本发明包括远程控制设备、安装了自主结账软件的移动终端和ROS机器人系统;所述的ROS机器人系统包括ROS机器人本体和安装在ROS机器人本体上的外部设备;所述的ROS机器人本体包括车体、深度摄像头、激光雷达、中央控制器、运动模块、两个主动轮和两个从动轮;所述的车体包括购物层和运动层,购物层设置在运动层的上方,两层之间用四根不锈钢钢管支撑;所述的安装在ROS机器人本体上的外部设备包括购物篮、显示模块、数据采集模块、语音交互模块、购物层供电单元、扫码枪和运动层供电单元。所述的购物篮、显示模块、数据采集模块、语音交互模块、购物层供电单元、扫码枪和深度摄像头均设置在所述的购物层上表面;所述的中央控制器、运动模块和运动层供电单元均设置在所述的运动层上表面;所述的激光雷达设置在所述的中央控制器上表面;所述的两个主动轮和两个从动轮均设置在所述的运动层下表面。所述的远程控制设备通过无线通信模块与所述的中央控制器建立连接;所述的深度摄像头、激光雷达、运动模块、显示模块和语音交互模块均通过USB口与所述的中央控制器建立连接;所述的安装了自主结账软件的移动终端通过无线通信模块与所述的数据采集模块建立连接;所述的扫码枪通过USB口与所述的数据采集模块建立连接。
所述的激光雷达用于采集环境信息后发送给所述的中央控制器,然后在所述的远程控制设备上运行Gmapping算法,所述的中央控制器就会处理采集到的环境信息,并将该环境信息发送给所述的运动模块,从而控制两个主动轮以及在两个从动轮的作用下构建全局电子地图,并将该地图展现在所述的显示模块上。全局电子地图构建完成之后,在所述的远程控制设备上运行语音导航算法,所述的中央控制器就会综合A*全局路径规划器和TEB局部路径规划器结果得到一条到达目标点的最优路径。机器人来到顾客身边后,所述的深度摄像头捕获人体点云图信息后发送给所述的中央控制器,然后在所述的远程控制设备上运行人体跟随算法,所述的中央控制器就会计算一定区域内的点云中心坐标作为目标跟随点,从而根据这个坐标和设置的安全距离控制机器人移动实现人体跟随功能。
在人体跟随的过程中,所述的扫码枪将扫取的商品条形码信息传送给所述的数据采集模块,同将所选商品放入购物篮;然后,安装了自主结账软件的移动终端将获取来自所述的数据采集模块的商品条形码信息并调用相应的API接口,将API响应数据通过JSON解析为想要提取的商品信息;最后,安装了自主结账软件的移动终端可以对所选商品进行计价和结算。
本发明的有益效果主要表现在:在解放顾客双手的同时,还可以有效的避免超市高峰期间购物排队现象,降低超市的服务成本,提高顾客的购物体验。
附图说明
图1为本发明一种基于ROS的超市购物机器人的整体结构侧视图。
图2-1和图2-2为本发明一种基于ROS的超市购物机器人的远程控制设备和安装了自主结账软件的移动终端示意图。
图3为本发明一种基于ROS的超市购物机器人的具体实施流程图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参见图1、图2-1和图2-2,一种基于ROS的超市购物机器人,包括远程控制设备18、安装了自主结账软件的移动终端19和ROS机器人系统17。ROS机器人系统17包括ROS机器人本体和安装在ROS机器人本体上的外部设备。ROS机器人本体包括车体、深度摄像头1、激光雷达11、中央控制器10、运动模块9、两个主动轮15和两个从动轮16;车体包括购物层12和运动层13,购物层12设置在运动层13的上方,两层之间用四根不锈钢钢管14支撑。安装在ROS机器人本体上的外部设备包括购物篮7、显示模块6、数据采集模块5、语音交互模块4、购物层供电单元3、扫码枪2和运动层供电单元8。购物篮7、显示模块6、数据采集模块5、语音交互模块4、购物层供电单元3、扫码枪2和深度摄像头1均设置在购物层12上表面。中央控制器10、运动模块9和运动层供电单元8均设置在运动层13上表面;激光雷达11设置在中央控制器10上表面;两个主动轮15和两个从动轮16均设置在运动层13下表面。远程控制设备18通过无线通信模块与中央控制器10建立连接;深度摄像头1、激光雷达11、运动模块9、显示模块6和语音交互模块4均通过USB口与中央控制器10建立连接;安装了自主结账软件的移动终端19通过无线通信模块与数据采集模块5建立连接;扫码枪2通过USB口与数据采集模块5建立连接。
如图3所示,购物开始,运动层供电单元8和购物层供电单元3被接通。然后,激光雷达11用于采集环境信息后发送给中央控制器10,然后在远程控制设备18上运行Gmapping算法,中央控制器10就会处理采集到的环境信息,并将该环境信息发送给运动模块9,从而控制两个主动轮15以及在两个从动轮16的作用下构建全局电子地图,并将该地图展现在所述的显示模块6上。全局电子地图构建完成之后,在远程控制设备18上运行语音导航算法,中央控制器10就会综合A*全局路径规划器和TEB局部路径规划器结果得到一条到达目标点的最优路径。机器人来到顾客身边后,深度摄像头1捕获人体点云图信息后发送给中央控制器10,然后在远程控制设备18上运行人体跟随算法,中央控制器10就会计算一定区域内的点云中心坐标作为目标跟随点,从而根据这个坐标和设置的安全距离控制机器人移动实现人体跟随功能。
在人体跟随的过程中,扫码枪2将扫取的商品条形码信息传送给数据采集模块5,同将所选商品放入购物篮7;然后,安装了自主结账软件的移动终端19将获取来自数据采集模块5的商品条形码信息并调用相应的API接口,将API响应数据通过JSON解析为想要提取的商品信息;最后,安装了自主结账软件的移动终端19可以对所选商品进行计价和结算。在结账完成之后,在远程控制设备18上运行语音导航算法,控制机器人自主回仓,购物完成。

Claims (1)

1.一种基于ROS的超市购物机器人,其特征在于,包括远程控制设备(18)、移动终端(19)和ROS机器人系统(17),ROS机器人系统(17)包括ROS机器人本体和安装在ROS机器人本体上的外部设备,ROS机器人本体包括车体、深度摄像头(1)、激光雷达(11)、中央控制器(10)、运动模块(9)、两个主动轮(15)和两个从动轮(16);车体包括购物层(12)和运动层(13),购物层(12)设置在运动层(13)的上方,两层之间用四根不锈钢钢管(14)支撑,安装在ROS机器人本体上的外部设备包括购物篮(7)、显示模块(6)、数据采集模块(5)、语音交互模块(4)、购物层供电单元(3)、扫码枪(2)和运动层供电单元(8),购物篮(7)、显示模块(6)、数据采集模块(5)、语音交互模块(4)、购物层供电单元(3)、扫码枪(2)和深度摄像头(1)均设置在购物层(12)上表面,中央控制器(10)、运动模块(9)和运动层供电单元(8)均设置在运动层(13)上表面;激光雷达(11)设置在中央控制器(10)上表面;两个主动轮(15)和两个从动轮(16)均设置在运动层(13)下表面,远程控制设备(18)通过无线通信模块与中央控制器(10)建立连接;深度摄像头(1)、激光雷达(11)、运动模块(9)、显示模块(6)和语音交互模块(4)均通过USB口与中央控制器(10)建立连接;安装了自主结账软件的移动终端(19)通过无线通信模块与数据采集模块(5)建立连接;扫码枪(2)通过USB口与数据采集模块(5)建立连接;
购物开始,运动层供电单元(8)和购物层供电单元(3)被接通,然后,激光雷达(11)用于采集环境信息后发送给中央控制器(10),然后在远程控制设备(18)上运行算法,中央控制器(10)就会处理采集到的环境信息,并将该环境信息发送给运动模块(9),从而控制两个主动轮(15)以及在两个从动轮(16)的作用下构建全局电子地图,并将该地图展现在所述的显示模块(6)上,全局电子地图构建完成之后,在远程控制设备(18)上运行语音导航算法,中央控制器(10)就会综合全局路径规划器和局部路径规划器结果得到一条到达目标点的最优路径,机器人来到顾客身边后,深度摄像头(1)捕获人体点云图信息后发送给中央控制器(10),然后在远程控制设备(18)上运行人体跟随算法,中央控制器(10)就会计算一定区域内的点云中心坐标作为目标跟随点,从而根据这个坐标和设置的安全距离控制机器人移动实现人体跟随功能;
在人体跟随的过程中,扫码枪(2)将扫取的商品条形码信息传送给数据采集模块(5),同将所选商品放入购物篮(7);然后,安装了自主结账软件的移动终端(19)将获取来自数据采集模块(5)的商品条形码信息并调用相应的API接口,将API响应数据解析为想要提取的商品信息;最后,安装了自主结账软件的移动终端(19)可以对所选商品进行计价和结算,在结账完成之后,在远程控制设备(18)上运行语音导航算法,控制机器人自主回仓,购物完成。
CN202110651760.9A 2021-06-11 2021-06-11 一种基于ros的超市购物机器人 Pending CN113341979A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110651760.9A CN113341979A (zh) 2021-06-11 2021-06-11 一种基于ros的超市购物机器人

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110651760.9A CN113341979A (zh) 2021-06-11 2021-06-11 一种基于ros的超市购物机器人

Publications (1)

Publication Number Publication Date
CN113341979A true CN113341979A (zh) 2021-09-03

Family

ID=77476606

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110651760.9A Pending CN113341979A (zh) 2021-06-11 2021-06-11 一种基于ros的超市购物机器人

Country Status (1)

Country Link
CN (1) CN113341979A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114770461A (zh) * 2022-04-14 2022-07-22 深圳技术大学 一种基于单目视觉的移动机器人及其自动抓取方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106444752A (zh) * 2016-07-04 2017-02-22 深圳市踏路科技有限公司 一种基于无线定位的机器人智能跟随系统及智能跟随方法
CN106557791A (zh) * 2016-10-20 2017-04-05 徐州赛欧电子科技有限公司 一种超市购物管理系统及其方法
CN106779857A (zh) * 2016-12-23 2017-05-31 湖南晖龙股份有限公司 一种远程控制机器人的购物方法
CN206344840U (zh) * 2016-08-19 2017-07-21 四川西部动力机器人科技有限公司 一种超市智能购物车
CN107398900A (zh) * 2017-05-27 2017-11-28 芜湖星途机器人科技有限公司 机器人识别人体后主动跟随系统
CN210083399U (zh) * 2019-05-20 2020-02-18 仲恺农业工程学院 一种自动跟随结算购物车
CN110941690A (zh) * 2019-12-06 2020-03-31 西安广源机电技术有限公司 一种商场机器人的导购方法
CN111660313A (zh) * 2020-07-14 2020-09-15 桂林理工大学 基于ros和人工智能算法的超市导购机器人

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106444752A (zh) * 2016-07-04 2017-02-22 深圳市踏路科技有限公司 一种基于无线定位的机器人智能跟随系统及智能跟随方法
CN206344840U (zh) * 2016-08-19 2017-07-21 四川西部动力机器人科技有限公司 一种超市智能购物车
CN106557791A (zh) * 2016-10-20 2017-04-05 徐州赛欧电子科技有限公司 一种超市购物管理系统及其方法
CN106779857A (zh) * 2016-12-23 2017-05-31 湖南晖龙股份有限公司 一种远程控制机器人的购物方法
CN107398900A (zh) * 2017-05-27 2017-11-28 芜湖星途机器人科技有限公司 机器人识别人体后主动跟随系统
CN210083399U (zh) * 2019-05-20 2020-02-18 仲恺农业工程学院 一种自动跟随结算购物车
CN110941690A (zh) * 2019-12-06 2020-03-31 西安广源机电技术有限公司 一种商场机器人的导购方法
CN111660313A (zh) * 2020-07-14 2020-09-15 桂林理工大学 基于ros和人工智能算法的超市导购机器人

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114770461A (zh) * 2022-04-14 2022-07-22 深圳技术大学 一种基于单目视觉的移动机器人及其自动抓取方法
CN114770461B (zh) * 2022-04-14 2023-12-01 深圳技术大学 一种基于单目视觉的移动机器人及其自动抓取方法

Similar Documents

Publication Publication Date Title
CN106557791B (zh) 一种超市购物管理系统及其方法
US10311400B2 (en) Intelligent service robot and related systems and methods
KR20180109107A (ko) 매장 및 창고에서 활용할 수 있는 지능형 카트로봇장치
US11410482B2 (en) Information processing method and apparatus, electronic device, and storage medium
US20170270579A1 (en) Robotic equipment for the location of items in a shop and operating process thereof
CN111098313B (zh) 一种代购机器人及控制方法
CN104637198A (zh) 一种具有自主跟踪功能的智能结算购物车系统
CN113126632B (zh) 虚拟墙划定和作业方法、设备及存储介质
CN110216646A (zh) 一种兜售机器人
Hanooja et al. Human friendly smart trolley with automatic billing system
CN113341979A (zh) 一种基于ros的超市购物机器人
CN109214887A (zh) 一种远程购物系统及方法
CN113011351A (zh) 一种智能购物车的工作方法及智能购物车
US20210216079A1 (en) Cart moving in parallel with installed object and method of moving same
Li et al. A YOLO-GGCNN based grasping framework for mobile robots in unknown environments
JP2022510435A (ja) 顧客支援ロボットピッキング
CN109398463A (zh) 一种购物车及其购物方法
CN116101939A (zh) 货物搬运方法、无人叉车及存储介质
CN209000118U (zh) 基于激光导航的自主售货机器人系统
CN105319531A (zh) 室内机器人定位系统
US12058445B2 (en) Mobile apparatus with computer vision elements for product identifier detection with minimal detection adjustments
CN214446436U (zh) 一种智能购物机器人
KR20210010687A (ko) 스마트 카트
CN110738546A (zh) 用于新零售的购物方法及系统
CN110955243A (zh) 行进控制方法、装置、设备、可读存储介质和移动装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210903

RJ01 Rejection of invention patent application after publication