CN111680944A - 一种物品分发的交互方法及系统 - Google Patents
一种物品分发的交互方法及系统 Download PDFInfo
- Publication number
- CN111680944A CN111680944A CN202010383123.3A CN202010383123A CN111680944A CN 111680944 A CN111680944 A CN 111680944A CN 202010383123 A CN202010383123 A CN 202010383123A CN 111680944 A CN111680944 A CN 111680944A
- Authority
- CN
- China
- Prior art keywords
- human body
- transportation device
- intelligent transportation
- information
- comparison
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 121
- 230000002452 interceptive effect Effects 0.000 title claims abstract description 27
- 230000014509 gene expression Effects 0.000 claims abstract description 42
- 208000035985 Body Odor Diseases 0.000 claims abstract description 41
- 206010040904 Skin odour abnormal Diseases 0.000 claims abstract description 41
- 210000001503 joint Anatomy 0.000 claims abstract description 31
- 230000008569 process Effects 0.000 claims abstract description 19
- 238000009826 distribution Methods 0.000 claims description 21
- 238000003860 storage Methods 0.000 claims description 14
- 238000003032 molecular docking Methods 0.000 claims description 11
- 238000012549 training Methods 0.000 claims description 11
- 238000012360 testing method Methods 0.000 claims description 6
- 238000004817 gas chromatography Methods 0.000 claims description 3
- 230000003993 interaction Effects 0.000 abstract description 8
- 230000008921 facial expression Effects 0.000 abstract description 3
- 230000035943 smell Effects 0.000 description 17
- 238000001514 detection method Methods 0.000 description 12
- 238000005520 cutting process Methods 0.000 description 10
- 238000000605 extraction Methods 0.000 description 6
- 238000013528 artificial neural network Methods 0.000 description 5
- 238000007781 pre-processing Methods 0.000 description 5
- 238000013527 convolutional neural network Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000012790 confirmation Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000003062 neural network model Methods 0.000 description 2
- 238000003825 pressing Methods 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 230000004888 barrier function Effects 0.000 description 1
- 238000004587 chromatography analysis Methods 0.000 description 1
- 238000013145 classification model Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000002716 delivery method Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000012706 support-vector machine Methods 0.000 description 1
- 238000010998 test method Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
- G06Q10/087—Inventory or stock management, e.g. order filling, procurement or balancing against orders
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N30/00—Investigating or analysing materials by separation into components using adsorption, absorption or similar phenomena or using ion-exchange, e.g. chromatography or field flow fractionation
- G01N30/02—Column chromatography
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Business, Economics & Management (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Economics (AREA)
- Quality & Reliability (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Accounting & Taxation (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Entrepreneurship & Innovation (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Development Economics (AREA)
- Finance (AREA)
- General Business, Economics & Management (AREA)
- Tourism & Hospitality (AREA)
- Life Sciences & Earth Sciences (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Biochemistry (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Strategic Management (AREA)
Abstract
本发明提供一种物品分发的交互方法及系统,其中方法包括智能运输装置从云端中心获取相关信息并移动到物品站点,还包括以下步骤:采集对接人员的气味,并进行人体气味比对;所述人员将物品放到所述智能运输装置的箱体中;物品放置完成后,对所述对接人员进行二次认证,二次认证成功后锁定所述智能运输装置的箱体;所述智能运输装置对所述对接人员的表情进行识别;如果所述表情为高兴表情,则将表情照片和装货完成的信息发送给云端中心,等待送货命令。本发明提出的物品分发的交互方法及系统,将人体气味识别和面部表情识别应用于智能运输装置的交互过程,建立智能运输装置和物品发放人员之间临时的一对一关联,保证物品运送的准确运送。
Description
技术领域
本发明涉及快递运输的技术领域,具体地说是一种物品分发的交互方法及系统。
背景技术
随着技术的日益成熟,越来越多的无人驾驶产品开始得到了应用。快递服务已经成为人们生活中不可或缺的一部分,快递服务机器人越来越多的应用于人民的日常生活。然而,随着人们时间价值越来越重要,快递配送的人工费用也越来越高,快递业“最后一公里”问题显得更加突出。由机器代替人工的想法便应运而生。机器人成本低、效费比好、适应性强,拥有许多强于人工的优点,在快递运输领域拥有广阔的前景。在快递机器人装载快件过程中要解决的难点问题是确认装载货物的快递人员和最后确认装载货物完成的快递人员是同一个人员,因此建立快递机器人和装载快件的快件人员之间临时的一对一关联是需要解决的难点问题。本发明的主要背景是快递服务机器人的货物配送问题,解决上述存在的技术难题,更好的应用于快递服务机器人进行最后一公里的自动配送场景。
申请号为CN107094239A的发明专利申请公开了一种基于自动化机器人的智能快递配送方法及其系统,所述步骤包括:分发设备扫描快递单并获取配送信息,将相同区域的快递存储于负责对应区域的第一机器人的存储仓内,服务器将配送信息传输至第一机器人,第一机器人向第一配送地址行走时,检测到交通拥堵则进行实时定位并获取定位数据,搜索预设地图上以定位数据为中心向四周扩散预设半径内是否有第二机器人,有则利用无人机将快递送往第二机器人处并将路线传输至所述第二机器人,第一机器人行走至第二配送地址检测是否有电梯,若有则控制电梯上行至客户所在楼层,第一机器人行走至客户地址并摄取拿取快递的脸部影像分析是否与配送信息内的影像匹配,匹配则控制对应仓门打开并利用扬声器通知客户签收。该方法虽然能够运送快递,但是并不能够解决快递机器人装载快件过程中确认装载货物的快递人员和最后确认装载货物完成的快递人员是同一个人员的难点问题。
发明内容
为了解决上述的技术问题,本发明提出的物品分发的交互方法及系统,将人体气味识别和面部表情识别应用于智能运输装置的交互过程,建立智能运输装置和物品发放人员之间临时的一对一关联,保证物品运送的准确运送。
本发明的第一目的是提供一种物品分发的交互方法,包括智能运输装置从云端中心获取相关信息并移动到物品站点,还包括以下步骤:
步骤1:采集对接人员的气味,并进行人体气味比对;
步骤2:所述人员将物品放到所述智能运输装置的箱体中;
步骤3:物品放置完成后,对所述对接人员进行二次认证,二次认证成功后锁定所述智能运输装置的箱体;
步骤4:所述智能运输装置对所述对接人员的表情进行识别;
步骤5:如果所述表情为高兴表情,则将表情照片和装货完成的信息发送给云端中心,等待送货命令。
优选的是,所述相关信息包括物品的详细信息、GPS位置坐标、所述对接人员的人体气味信息和指纹信息。
在上述任一方案中优选的是,所述采集人体气味的方法为使用气味检测仪扫描所述对接人员的手掌,获取气体味道。
在上述任一方案中优选的是,所述人体气味比对的方法包括图形比对法和/或色谱比对法。
在上述任一方案中优选的是,所述图形比对法包括以下步骤:
步骤01:调用软件包对采集到的气体进行图形描述,获得精确完整的人体点云数据Img 1 并进行存储;
步骤02:从存储单元中调取从所述云端中心获取的所述对接人员的人体气味点云数据Img 0 ;
步骤03:对步骤01和步骤02中得到的所述人体气味点云数据进行相似度计算F(Img 0 ,Img 1 ),如果F(Img 0 ,Img 1 )>x,则认为是同一个人,x为相似度阈值。
在上述任一方案中优选的是,所述色谱比对法包括以下步骤:
步骤11:对采集到的气体进行分离,收集分离出来的有机物气体;
步骤12:制作有机物气体的气相色谱;
步骤13:从存储单元中调取从所述云端中心获取的所述对接人员的原始气相色谱;
步骤14:对步骤11和步骤13中得到的气象色谱进行比对,如果一致,则认为是同一个人。
在上述任一方案中优选的是,所述二次认证包括进行第二次人体气味对比和指纹对比。
在上述任一方案中优选的是,所述第二次人体气味对比的数据源为第一次对比时采集的人体气味和第二次采集的人体气味。
在上述任一方案中优选的是,所述步骤4包括训练过程和测试过程。
在上述任一方案中优选的是,所述训练过程包括以下子步骤:
步骤41:对训练集中的人脸图像进行预处理,包括人脸检测和图像裁剪;
步骤42:将裁减后的图像输入深度卷积神经网络进行特征提取;
步骤43:将分类的结果和正确的表情标签进行对比;
步骤44:迭代到预先设定的次数,得到深度卷积神经网络模型和SVM模型。
在上述任一方案中优选的是,所述图像裁剪为使感兴趣区域的面部填充图像的大部分区域。
在上述任一方案中优选的是,所述图像裁剪为去掉不相关的北京信息,并将所有的面部统一到一个尺度大小。
在上述任一方案中优选的是,所述测试过程包括以下子步骤:
步骤4A:对输入的人脸图像进行预处理,包括人脸检测和图像裁剪;
步骤42:将裁减后的图像输入深度卷积神经网络进行特征提取;
步骤43:将得到的所述输入到SVM中进行表情分类,得到表情的类别。
本发明的第二目的是提供一种物品分发的交互系统,包括云端中心和智能运输装置,所述智能运输装置上安装有控制子模块、导航子模块、摄像头、气味检测仪和指纹采集装置,
所述气味检测仪用于采集人体的气味;
所述控制子模块用于对采集到的气体进行图形描述,获得精确完整的人体点云数据;
所述指纹采集装置用于获取对接人员的指纹信息;
所述系统按照如第一目的所述的方法进行物品分发。
优选的是,所述控制子模块还用于人体点云数据的比对。
在上述任一方案中优选的是,所述控制子模块还用于对采集到的气体进行分离,生成气相色谱。
在上述任一方案中优选的是,所述控制子模块还用于所述气相色谱的比对。
在上述任一方案中优选的是,所述摄像头用于采集所述对接人员的表情。
在上述任一方案中优选的是,所述控制子模块还用于对所述对接人员的表情进行识别。
本发明提出了一种物品分发的交互方法,使园区内收取快递方便快捷,提高人员的工作效率,减少不必要的时间浪费。
附图说明
图1为按照本发明的物品分发的交互方法的一优选实施例的流程图。
图2为按照本发明的物品分发的交互方法的从云端中心获取相关信息的一优选实施例的流程图。
图3为按照本发明的物品分发的交互系统的一优选实施例的模块图。
图4为按照本发明的物品分发的交互方法的人体表情识别的另一优选实施例的流程图。
图5为按照本发明的物品分发的交互方法的表情检测的另一优选实施例的框架图。
具体实施方式
下面结合附图和具体的实施例对本发明做进一步的阐述。
实施例一
如图1所示,执行步骤100,智能运输装置从云端中心获取相关信息并移动到物品站点。相关信息包括物品的详细信息、GPS位置坐标、所述对接人员的人体气味信息和指纹信息。
如图2所示,智能运输装置从云端中心获取相关信息的方法为:执行步骤101,所述物品发放人员将物品信息通过短信发送给物品接收人员;执行步骤102,所述物品接收人员将物品信息上传到所述云端中心;执行步骤103,所述云端中心确认后进行数据存储,并把物品信息和GPS位置坐标传送给所述智能运输装置。
智能运输装置移动到物品站点的方法为所述智能运输装置收到指令后,按照设定的路线自主导航前往快递配送点,所述云端中心实时监控所述智能运输装置的状态,当出现障碍物时,所述智能运输装置进行智能避让。
执行步骤110,采集对接人员的气味,并进行人体气味比对。采集人体气味的方法为使用气味检测仪扫描所述对接人员的手掌,获取气体味道。人体气味比对的方法包括图形比对法和/或色谱比对法。本步骤中的图形比对法包括以下步骤:步骤01:调用软件包对第一次采集到的气体进行图形描述,获得精确完整的人体点云数据Img 1 并进行存储;步骤02:从存储单元中调取从所述云端中心获取的所述对接人员的人体气味点云数据Img 0 ;步骤03:对步骤01和步骤02中得到的所述人体气味点云数据进行相似度计算F(Img 0 ,Img 1 ),如果F(Img 0 ,Img 1 )>x,则认为是同一个人,x为相似度阈值。色谱比对法包括以下步骤:步骤11:对第一次采集到的气体进行分离,收集分离出来的有机物气体;步骤12:制作有机物气体的气相色谱;步骤13:从存储单元中调取从所述云端中心获取的所述对接人员的原始气相色谱;步骤14:对步骤11和步骤13中得到的气象色谱进行比对,如果一致,则认为是同一个人。
执行步骤120,所述人员将物品放到所述智能运输装置的箱体中。
执行步骤130,物品放置完成后,对所述对接人员进行二次认证,二次认证成功后锁定所述智能运输装置的箱体。二次认证包括进行第二次人体气味对比和指纹对比。第二次人体气味对比的数据源为第一次对比时采集的人体气味和第二次采集的人体气味。
本步骤中的图形比对法包括以下步骤:步骤011:调用软件包对第二次采集到的气体进行图形描述,获得精确完整的人体点云数据Img 2 并进行存储;步骤012:从存储单元中调取第一次的人体气味点云数据Img 1 ;步骤013:对步骤011和步骤012中得到的所述人体气味点云数据进行相似度计算F(Img 1 ,Img 2 ),如果F(Img 1 ,Img 2 )>x,则认为是同一个人,x为相似度阈值。色谱比对法包括以下步骤:步骤111:对第二次采集到的气体进行分离,收集分离出来的有机物气体;步骤112:制作有机物气体的气相色谱;步骤113:从存储单元中调取第一次的气相色谱;步骤114:对步骤111和步骤113中得到的气象色谱进行比对,如果一致,则认为是同一个人。
执行步骤140,所述智能运输装置对所述对接人员的表情进行识别,包括训练过程和测试过程。训练过程包括以下子步骤:步骤41:对训练集中的人脸图像进行预处理,包括人脸检测和图像裁剪,图像裁剪为使感兴趣区域的面部填充图像的大部分区域,图像裁剪为去掉不相关的北京信息,并将所有的面部统一到一个尺度大小;步骤42:将裁减后的图像输入深度卷积神经网络进行特征提取;步骤43:将分类的结果和正确的表情标签进行对比;步骤44:迭代到预先设定的次数,得到深度卷积神经网络模型和SVM模型。测试过程包括以下子步骤:步骤4A:对输入的人脸图像进行预处理,包括人脸检测和图像裁剪;步骤42:将裁减后的图像输入深度卷积神经网络进行特征提取;步骤43:将得到的所述输入到SVM中进行表情分类,得到表情的类别。
执行步骤150,如果所述表情为高兴表情,则将表情照片和装货完成的信息发送给云端中心,等待送货命令。
实施例二
如图3所示,一种物品分发的交互系统,包括云端中心200和智能运输装置210,智能运输装置210上安装有控制子模块211、无线通讯子模块212、导航子模块213、摄像头214、气味检测仪215和指纹采集装置216。
控制子模块211用于控制无线通讯子模块212、导航子模块213、摄像头214、气味检测仪215和指纹采集装置,向上述子模块发送控制指令,获取采集数据,进行数据比对。比对方法包括人体点云数据比对和气相色谱比对。
无线通讯子模块212用于与云端中心200进行通讯。
导航子模块213用于按照设定的路线自主导航前往快递配送点,当出现障碍物时,所述智能运输装置进行智能避让。
摄像头214用于拍摄对接人员的表情,并发送给控制子模块。
气味检测仪215用于获取对接人员的身体气味;
指纹采集装置216用于获取对接人员的指纹信息。
实施例三
本发明提出了一种物品分发的交互方法。快递服务机器人作为服务机器人的一种,具有低速、可靠、更加安全等众多优点。该机器人运行于指定环境地点,如校园、高档小区等。本快递服务机器人通过云端数据中心采用GPS进行全局路径规划,结合超声波、深度相机等传感器实现对周围环境的感知及躲避行人及障碍物,到达快递取货点后进行取货。当取货完毕后,快递工作人员做出高兴表情,机器人通过摄像头进行微笑表情识别,将取货完毕的信息上传给云端,等待送货的命令。
本发明提出的物品分发的交互方法操作方便,适用范围广,易于扩展。
实现流程如下:
1.在高等院校、高档小区门口快递点的快递员通过手机短信发送快递取件信息给园内收件人;
2.园内收件人将接收到的快递信息,并将快递信息上传给云端数据控制中心;
3.云端中心接收到命令,确认后进行数据存储,并根据快递信息和GPS位置坐标传输至快递服务机器人;
4.移动机器人收到命令后,按照设定的路线自主导航前往快递配送点,云端可实时监控快递服务机器人状态,出现障碍物可实现智能避让,保护机器人及行人安全;
5.到达后将快递信息显示在屏幕上给快递人员;
6.负责装载快件的快递人员收到命令后和快递机器人进行交互,利用气味检测仪扫描快递人员的手掌,气味检测仪能够调用软件包对气味进行图形描述,获得精确完整的人体气味数据Img1并进行存储;快递人员进行快件装载;装载完毕后,气味检测仪再次检测手掌,再次获得精确完整的人体气味数据Img2并进行存储;气味检测仪对两次的人体气味数据进行相似度计算F(Img1,Img2),如果F(Img1,Img2)>x,x为相似度的阈值,即认为同一个人,则显示屏通知快递员做出高兴表情并通过摄像头拍照;
快递机器人对货物配送完成的表情进行识别,如果检测为高兴表情,则将快递人员配送完成的照片和信息发送给云端中心,等待送货的命令。
实施例四
人体表情识别的流程图如图4所示。
人脸表情识别总体包括两个过程:训练过程和测试过程。(1)在训练过程中,首先对训练集中的人脸图像进行预处理,包括人脸检测和图像剪裁。人脸检测使感兴趣区域的面部填充图像的大部分区域,图像裁剪主要去掉不相关的背景信息,并将所有的面部统一到同一个尺度大小。将裁剪后的图像输入深度卷积神经网络进行特征提取,并将分类的结果和正确的表情标签进行对比,迭代到预先设定的次数,得到深度卷积神经网络的模型和SVM的分类模型。
(2)在测试阶段中,对输入的人脸图像进行预处理,包括人脸检测和图像剪裁。人脸检测使感兴趣区域的面部填充图像的大部分区域,图像裁剪主要去掉不相关的背景信息,并将所有的面部统一到同一个尺度大小。将裁剪后的图像输入深度卷积神经网络进行特征提取,将最后得到的特征输入到SVM分类器中进行表情分类,得到表情的类别。
如图5所示的是基于卷积神经网络与支持向量机的表情检测框架图。
在网络模型的构建过程中,首先对输入的人脸图像进行预处理,包括人脸检测和图像剪裁。人脸检测使感兴趣区域的面部填充图像的大部分区域,图像裁剪主要去掉不相关的背景信息,并将所有的面部统一到同一个域。首先将裁剪后的图像输入深度卷积神经网络进行训练,得到最后一个全连接层的特征,然后将此特征输入到SVM中进行表情的分类。
实施例五
一种物品分发的交互方法的工作流程如下:
1、云端服务器将要去发送的快递站点信息、对接快递员的信息和收货人信息通过无线网络发送给智能运输装置,保存在智能运输装置的存储器。
2、智能运输装置接收到收到命令后,按照设定的路线自主导航前往快递配送点,云端服务器可实时监控智能运输装置状态,出现障碍物可实现智能避让,保护智能运输装置及行人安全。
3、到达后将货物信息显示在屏幕上给对接装货快递员。
4、对接装货快递员看到命令后和智能运输装置进行交互,智能运输装置上的人体气味采集器获取对接装货快递员的气味,与存储器中的对接装货快递员气味信息进行比对,判断是否为对接装货快递员。分别采用图形比对法和色谱比对法进行比较,如果两种方法的比较结果相同,则确认结果;如果两种方法比较的结果不同,则再次提取气体使用两种对比方法进行比较,如果两种方法的比较结果相同,则确认结果;如果两种方法比较的结果依然不同,选用图形对比法的结果作为最终结果。
5、如果是同一个人,则打开智能运输装置的后门,对接装货快递员将货物放在智能运输装置内,当货物装载完毕后,对接装货快递员关闭柜门。
6、智能运输装置上的人体气味采集器再次获取对接装货快递员的气味。
7、控制单元比对两次获取的对接装货快递员的气味是否相同,如果相似度超过阈值,则认为是同一个人,在显示屏上发出指令。要求对接装货快递员按下指纹。对接装货快递员在指纹采集器上按下指纹,确认装货完成并锁定柜门。比对分别采用图形比对法和色谱比对法进行比较,如果两种方法的比较结果相同,则确认结果;如果两种方法比较的结果不同,则再次提取气体使用两种对比方法进行比较,如果两种方法的比较结果相同,则确认结果;如果两种方法比较的结果依然不同,选用图形对比法的结果作为最终结果。
8、智能运输装置通过无线网络告知云端服务器,货物装载完成,云端服务器给收货人发送信息,告知取货时间、取货地点和取货验证码。
9、根据导航路线图前往取货地点,并通过激光雷达和摄像头扫描拍摄路面情况,进行智能避障。
10、到达后将货物信息显示在屏幕上给收货人。
11、收货人在显示屏输入取货验证码,正确后打开智能运输装置的后门,取走货物后并关上后门。智能运输装置内的红外扫描装置启动,扫描智能运输装置中的快件是否已经被取走,取走了几件。
12、全部信息核实完毕后,通过无线网络告知云端服务器,本次货物运送完成。
实施例六
一种物品分发的交互方法的工作流程如下:
1、云端服务器将要去发送的快递站点信息和对接快递员的信息通过无线网络发送给智能运输装置,保存在智能运输装置的存储器。
2、智能运输装置接收到收到命令后,按照设定的路线自主导航前往快递配送点,云端服务器可实时监控智能运输装置状态,出现障碍物可实现智能避让,保护智能运输装置及行人安全。
3、到达后将货物信息显示在屏幕上给对接装货快递员。
4、对接装货快递员看到命令后和智能运输装置进行交互,智能运输装置上的人体气味采集器获取对接装货快递员的气味,与存储器中的对接装货快递员气味信息进行比对,判断是否为对接装货快递员。分别采用图形比对法和色谱比对法进行比较,如果两种方法的比较结果相同,则确认结果;如果两种方法比较的结果不同,则再次提取气体使用两种对比方法进行比较,如果两种方法的比较结果相同,则确认结果;如果两种方法比较的结果依然不同,选用图形对比法的结果作为最终结果。
5、如果是同一个人,则打开智能运输装置的后门,对接装货快递员进行货物装载,当全部货物安装完毕后,对接装货快递员关闭柜门。
6、智能运输装置上的人体气味采集器再次获取对接装货快递员的气味。
7、控制单元比对两次获取的对接装货快递员的气味是否相同,如果相似度超过阈值,则认为是同一个人,在显示屏上发出指令。要求对接装货快递员按下指纹。对接装货快递员在指纹采集器上按下指纹,确认装货完成并锁定柜门。比对分别采用图形比对法和色谱比对法进行比较,如果两种方法的比较结果相同,则确认结果;如果两种方法比较的结果不同,则再次提取气体使用两种对比方法进行比较,如果两种方法的比较结果相同,则确认结果;如果两种方法比较的结果依然不同,选用图形对比法的结果作为最终结果。
8、智能运输装置根据导航路线图前往下一个位置点,并通过激光雷达和摄像头扫描拍摄路面情况,进行智能避障。
9、到达下一位置点后,将快递信息显示在屏幕上给对接收货快递员。
10、对接收货快递员看到命令后和智能运输装置进行交互,智能运输装置上的人体气味采集器获取对接收货快递员的气味,与存储器中的对接收货快递员气味信息进行比对,判断是否为对接收货快递员。分别采用图形比对法和色谱比对法进行比较,如果两种方法的比较结果相同,则确认结果;如果两种方法比较的结果不同,则再次提取气体使用两种对比方法进行比较,如果两种方法的比较结果相同,则确认结果;如果两种方法比较的结果依然不同,选用图形对比法的结果作为最终结果。
11、如果是同一个人,则打开智能运输装置的后门,对接收货快递员取出货物,当全部货物安取出后,对接收货快递员关闭柜门。
12、智能运输装置上的人体气味采集器再次获取对接收货快递员的气味。
13、控制单元比对两次对接收货快递员的气味是否相同,如果相似度超过阈值,则认为是同一个人,在显示屏上发出指令。要求对接收货快递员按下指纹。对接快递员在指纹采集器上按下指纹,确认卸货完成并锁定柜门。分别采用图形比对法和色谱比对法进行比较,如果两种方法的比较结果相同,则确认结果;如果两种方法比较的结果不同,则再次提取气体使用两种对比方法进行比较,如果两种方法的比较结果相同,则确认结果;如果两种方法比较的结果依然不同,选用图形对比法的结果作为最终结果。
14、智能运输装置内的红外扫描装置启动,扫描智能运输装置中的快件是否已经被取走,取走了几件。
15、全部信息核对完毕后,通过无线网络告知云端服务器,本次货物运送完成。
为了更好地理解本发明,以上结合本发明的具体实施例做了详细描述,但并非是对本发明的限制。凡是依据本发明的技术实质对以上实施例所做的任何简单修改,均仍属于本发明技术方案的范围。本说明书中每个实施例重点说明的都是与其它实施例的不同之处,各个实施例之间相同或相似的部分相互参见即可。对于系统实施例而言,由于其与方法实施例基本对应,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
Claims (10)
1.一种物品分发的交互方法,包括智能运输装置从云端中心获取相关信息并移动到物品站点,其特征在于,还包括以下步骤:
步骤1:采集对接人员的气味,并进行人体气味比对;
步骤2:所述人员将物品放到所述智能运输装置的箱体中;
步骤3:物品放置完成后,对所述对接人员进行二次认证,二次认证成功后锁定所述智能运输装置的箱体;
步骤4:所述智能运输装置对所述对接人员的表情进行识别;
步骤5:如果所述表情为高兴表情,则将表情照片和装货完成的信息发送给云端中心,等待送货命令。
2.如权利要求1所述的物品分发的交互方法,其特征在于,所述相关信息包括物品的详细信息、GPS位置坐标、所述对接人员的人体气味信息和指纹信息。
3.如权利要求2所述的物品分发的交互方法,其特征在于,所述采集人体气味的方法为使用气味检测仪扫描所述对接人员的手掌,获取气体味道。
4.如权利要求3所述的物品分发的交互方法,其特征在于,所述人体气味比对的方法包括图形比对法和/或色谱比对法。
5.如权利要求4所述的物品分发的交互方法,其特征在于,所述图形比对法包括以下步骤:
步骤01:调用软件包对采集到的气体进行图形描述,获得精确完整的人体点云数据Img 1 并进行存储;
步骤02:从存储单元中调取从所述云端中心获取的所述对接人员的人体气味点云数据Img 0 ;
步骤03:对步骤01和步骤02中得到的所述人体气味点云数据进行相似度计算F(Img 0 ,Img 1 ),如果F(Img 0 ,Img 1 )>x,则认为是同一个人,x为相似度阈值。
6.如权利要求4所述的物品分发的交互方法,其特征在于,所述色谱比对法包括以下步骤:
步骤11:对采集到的气体进行分离,收集分离出来的有机物气体;
步骤12:制作有机物气体的气相色谱;
步骤13:从存储单元中调取从所述云端中心获取的所述对接人员的原始气相色谱;
步骤14:对步骤11和步骤13中得到的气象色谱进行比对,如果一致,则认为是同一个人。
7.如权利要求5所述的物品分发的交互方法,其特征在于,所述二次认证包括进行第二次人体气味对比和指纹对比。
8.如权利要求7所述的物品分发的交互方法,其特征在于,所述第二次人体气味对比的数据源为第一次对比时采集的人体气味和第二次采集的人体气味。
9.如权利要求1所述的物品分发的交互方法,其特征在于,所述步骤4包括训练过程和测试过程。
10.一种物品分发的交互系统,包括云端中心和智能运输装置,其特征在于,所述智能运输装置上安装有控制子模块、导航子模块、摄像头、气味检测仪和指纹采集装置,
所述气味检测仪用于采集人体的气味;
所述控制子模块用于对采集到的气体进行图形描述,获得精确完整的人体点云数据;
所述指纹采集装置用于获取对接人员的指纹信息;
所述系统按照如权利要求1所述的方法进行物品分发。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010383123.3A CN111680944A (zh) | 2020-05-08 | 2020-05-08 | 一种物品分发的交互方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010383123.3A CN111680944A (zh) | 2020-05-08 | 2020-05-08 | 一种物品分发的交互方法及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111680944A true CN111680944A (zh) | 2020-09-18 |
Family
ID=72451858
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010383123.3A Pending CN111680944A (zh) | 2020-05-08 | 2020-05-08 | 一种物品分发的交互方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111680944A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113569747A (zh) * | 2021-07-29 | 2021-10-29 | 北京金玖银玖数字科技有限公司 | 流转物品一致性鉴定的方法和系统 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101499197A (zh) * | 2008-01-31 | 2009-08-05 | 冲电气工业株式会社 | 自动交易装置和自动交易系统 |
CN105160302A (zh) * | 2015-08-10 | 2015-12-16 | 西安凯虹电子科技有限公司 | 多模态生物识别通用平台及身份认证方法 |
CN106599863A (zh) * | 2016-12-21 | 2017-04-26 | 中国科学院光电技术研究所 | 一种基于迁移学习技术的深度人脸识别方法 |
CN106709582A (zh) * | 2016-11-18 | 2017-05-24 | 福建我家网络科技有限公司 | 一种门禁、电梯、家居智能联动系统及其应用 |
CN110456912A (zh) * | 2019-08-15 | 2019-11-15 | 苏州兆见智能科技有限公司 | 一种基于沉浸式体验的交互系统 |
CN110472909A (zh) * | 2019-07-12 | 2019-11-19 | 坎德拉(深圳)科技创新有限公司 | 智能配送系统、方法、服务器、机器人及存储介质 |
CN210052244U (zh) * | 2019-06-03 | 2020-02-11 | 顺丰科技有限公司 | 移动收发件装置 |
-
2020
- 2020-05-08 CN CN202010383123.3A patent/CN111680944A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101499197A (zh) * | 2008-01-31 | 2009-08-05 | 冲电气工业株式会社 | 自动交易装置和自动交易系统 |
CN105160302A (zh) * | 2015-08-10 | 2015-12-16 | 西安凯虹电子科技有限公司 | 多模态生物识别通用平台及身份认证方法 |
CN106709582A (zh) * | 2016-11-18 | 2017-05-24 | 福建我家网络科技有限公司 | 一种门禁、电梯、家居智能联动系统及其应用 |
CN106599863A (zh) * | 2016-12-21 | 2017-04-26 | 中国科学院光电技术研究所 | 一种基于迁移学习技术的深度人脸识别方法 |
CN210052244U (zh) * | 2019-06-03 | 2020-02-11 | 顺丰科技有限公司 | 移动收发件装置 |
CN110472909A (zh) * | 2019-07-12 | 2019-11-19 | 坎德拉(深圳)科技创新有限公司 | 智能配送系统、方法、服务器、机器人及存储介质 |
CN110456912A (zh) * | 2019-08-15 | 2019-11-15 | 苏州兆见智能科技有限公司 | 一种基于沉浸式体验的交互系统 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113569747A (zh) * | 2021-07-29 | 2021-10-29 | 北京金玖银玖数字科技有限公司 | 流转物品一致性鉴定的方法和系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11983663B1 (en) | Video for real-time confirmation in package tracking systems | |
CN110974088B (zh) | 扫地机器人控制方法、扫地机器人及存储介质 | |
US20220405704A1 (en) | System and method of object tracking using weight confirmation | |
CA3080410C (en) | Autonomously operated mobile locker banks | |
US11057590B2 (en) | Modular shelving systems for package tracking | |
US10083418B2 (en) | Distributed autonomous robot systems and mehtods | |
US20230219763A1 (en) | System and method for automated product sorting and coordinated delivery using autonomous delivery vehicles within a facility | |
CN107097239A (zh) | 一种基于自动化机器人的智能快递配送方法及其系统 | |
DE102020113417A1 (de) | Systeme und verfahren zur automatisierten multimodalen zustellung | |
US12045765B1 (en) | Light-based guidance for package tracking systems | |
US20190077600A1 (en) | Systems and Methods for Yard Management at Distribution Centers | |
CN113085618B (zh) | 一种分离式充电机器人及充电方法 | |
CN111168687B (zh) | 一种服务机器人控制方法及服务机器人 | |
CN113052531B (zh) | 基于动作分析的无人物流车配送方法及系统 | |
CN113657565A (zh) | 机器人跨楼层移动方法、装置、机器人及云端服务器 | |
US12008514B2 (en) | Package tracking systems and methods | |
US20210403053A1 (en) | Method for calling a vehicle to user's current location | |
CN115050080A (zh) | 多无人机协同配送中基于人脸融合的目标识别方法及系统 | |
CN111680944A (zh) | 一种物品分发的交互方法及系统 | |
CN110026976A (zh) | 能上下电梯的机械人以及利用该机械人收送物品的方法 | |
CN111489117A (zh) | 一种基于视觉计算交互的物品分发方法及系统 | |
CN111975776A (zh) | 基于深度学习和卡尔曼滤波的机器人移动跟踪系统及方法 | |
WO2022143181A1 (zh) | 信息处理方法及装置、信息处理系统 | |
CN110473256A (zh) | 一种车辆定位方法及系统 | |
US20200148232A1 (en) | Unmanned Aerial/Ground Vehicle (UAGV) Detection System and Method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200918 |