CN108720208A - 一种可以清点物品的智能旅行箱及其控制方法 - Google Patents
一种可以清点物品的智能旅行箱及其控制方法 Download PDFInfo
- Publication number
- CN108720208A CN108720208A CN201810424193.1A CN201810424193A CN108720208A CN 108720208 A CN108720208 A CN 108720208A CN 201810424193 A CN201810424193 A CN 201810424193A CN 108720208 A CN108720208 A CN 108720208A
- Authority
- CN
- China
- Prior art keywords
- babinet
- article
- intelligent
- taken
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- A—HUMAN NECESSITIES
- A45—HAND OR TRAVELLING ARTICLES
- A45C—PURSES; LUGGAGE; HAND CARRIED BAGS
- A45C5/00—Rigid or semi-rigid luggage
- A45C5/04—Trunks; Travelling baskets
- A45C5/045—Travelling baskets
-
- A—HUMAN NECESSITIES
- A45—HAND OR TRAVELLING ARTICLES
- A45C—PURSES; LUGGAGE; HAND CARRIED BAGS
- A45C13/00—Details; Accessories
- A45C13/001—Accessories
-
- A—HUMAN NECESSITIES
- A45—HAND OR TRAVELLING ARTICLES
- A45C—PURSES; LUGGAGE; HAND CARRIED BAGS
- A45C15/00—Purses, bags, luggage or other receptacles covered by groups A45C1/00 - A45C11/00, combined with other objects or articles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Physics & Mathematics (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- Bioinformatics & Computational Biology (AREA)
- General Engineering & Computer Science (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Multimedia (AREA)
- Purses, Travelling Bags, Baskets, Or Suitcases (AREA)
Abstract
本发明公开了可以清点物品的智能旅行箱,包括:箱体及设置在箱体上的智能识别装置、设置在用户智能终端上的控制模块;智能识别装置包括:状态检测模块,用于检测箱体的开合状态;智能摄像模块,用于当箱体处于打开状态时,探测用户的放入或拿出动作,并拍摄用户放入或拿出箱体的物品图像;图像处理模块,用于对拍摄的物品图像进行图像处理,识别放入或拿出箱体的物品;通信模块,用于将识别出的物品信息发送给用户的智能终端上的控制模块;控制模块,用于接收通信模块发送的放入或拿出箱体的物品信息,更新箱体内的现有物品信息。通过本发明,用户可直观明了的在智能终端上查看该智能旅行箱内的物品信息,从而省去了打开旅行箱清点物品的麻烦。
Description
技术领域
本发明涉及智能箱包领域,尤其涉及一种可以清点物品的智能旅行箱及其控制方法。
背景技术
随着人们生活水平的提高,现有单一功能的旅行箱已不能满足人们日常生活的需求。比如,出差出门时容易忘记将需要的物品放入旅行箱,等装好后如果用户想要查看放置了哪些物品,便于发现哪些物品漏放时,则必须重新打开旅行箱,一件件查看确认方可清点出旅行箱内的物品,费时费力,且翻看时容易翻乱箱内摆放整齐的物品。
现有的智能旅行箱,一般通过在每个物品上加入射频标签等,在放入或取出智能旅行箱时均需扫描该射频标签,从而获得箱内物品信息。但这种通过扫描射频标签识别物品的方案则需要每个物品都加上射频标签,且还需要对这些物品标签进行扫码,过程复杂且成本较高。
发明内容
为解决上述技术缺陷,本发明提供一种可以清点物品的智能旅行箱,具体的,技术方案如下:
一方面,本发明公开了一种可以清点物品的智能旅行箱,包括:箱体及设置在所述箱体上的智能识别装置、设置在用户智能终端上的控制模块;所述智能识别装置包括:状态检测模块,用于检测所述箱体的开合状态;智能摄像模块,用于当所述状态检测模块检测所述箱体处于打开状态时,探测用户的放入或拿出动作;并在探测到所述用户放入或拿出动作时,拍摄所述用户放入或拿出所述箱体的物品图像;图像处理模块,用于对所述智能摄像模块拍摄的物品图像进行图像处理,识别所述放入或拿出所述箱体的物品;通信模块,用于将所述图像处理模块识别出的所述放入或拿出所述箱体的物品信息发送给所述用户的智能终端上的控制模块;所述控制模块,用于接收所述通信模块发送的放入或拿出所述箱体的物品信息,更新所述箱体内的现有物品信息。
优选地,所述状态检测模块包括:放置状态检测子模块,用于通过陀螺仪检测所述箱体的放置状态;开合状态检测子模块,用于当所述放置状态检测子模块检测到所述箱体处于水平放置状态时,通过压力传感器检测所述箱体的打开或关闭状态。
优选地,所述智能摄像模块包括:若干智能探测子模块,设置在所述箱体箱口的不同位置,用于发射探测光线,在所述箱体的不同位置探测是否有用户在所述箱体上做出放入或拿出动作;若干摄像子模块,每个摄像子模块与一个智能探测子模块相连,用于当所述智能探测子模块探测到用户在所述箱体上做出放入或拿出动作时,通过相应的摄像子模块进行拍摄。
优选地,所述智能探测子模块为可旋转红外探测器;所述摄像子模块为可旋转摄像头;其中:所述可旋转红外探测器,用于通过旋转探测所述箱体的不同位置是否有用户在所述箱体上做出放入或拿出动作;并在探测到用户在所述箱体上做出放入或拿出动作时,获取自身旋转的角度位置;所述可旋转摄像头,与相应的可旋转红外探测器相连,用于根据所述旋转位置获取单元获取到的所述可旋转红外探测单元旋转的角度位置,调整所述可旋转摄像头的拍摄角度位置,拍摄放入或拿出所述箱体的物品图像。
优选地,所述物品信息包括所述物品的名称及所述物品的图标;所述图像处理模块包括:图像筛选子模块,用于将所述摄像模块拍摄到的物品的图像进行筛选,获取有效目标图像;图像合成子模块,用于对所述图像筛选子模块筛选出的有效目标图像进行合成,生成所述物品的物品图标;图像识别子模块,用于对所述图像筛选子模块筛选后的有效目标图像进行图像处理,通过训练好的卷积神经网络模型识别所述物品。
优选地,所述物品信息还包括物品的摆放位置;所述图像识别子模块还用于识别放入所述箱体的物品的摆放位置。
另一方面,本发明还公开了一种可以清点物品的智能旅行箱的控制方法,应用本发明所述的可以清点物品的智能旅行箱,所述控制方法包括:
S100检测所述箱体的开合状态;
S200当检测到所述箱体处于打开状态时,探测用户的放入或拿出动作,并拍摄所述用户放入或拿出所述箱体的物品图像;
S300对所述摄像模块拍摄的物品图像进行图像处理,识别所述放入或拿出所述箱体的物品;
S400将识别出的所述放入或拿出所述箱体的物品信息发送给所述用户的智能终端上的控制模块;便于所述控制模块根据所述放入或拿出所述箱体的物品信息,更新所述箱体内的物品信息及状态。
优选地,所述步骤S100包括:
S110通过箱体上设置的陀螺仪检测所述箱体的放置状态;
S120当检测到所述箱体处于水平放置状态时,通过箱体上设置的压力传感器检测所述箱体的打开或关闭状态。
优选地,所述步骤S200包括:
S210当所述箱体处于打开状态时,启动设置在所述箱体上的若干可旋转红外探测器;
S220通过所述若干可旋转红外探测器探测所述箱体的不同位置是否有用户在所述箱体上做出放入或拿出动作;
S230当有可旋转红外探测器探测到所述用户在所述箱体上做出放入或拿出动作时,获取所述可旋转红外探测器旋转的角度位置;
S240根据所述可旋转红外探测器旋转的角度位置,控制相应的可旋转摄像头旋转至相应的角度位置,拍摄放入或拿出所述箱体的物品图像。
优选地,所述步骤S300包括:
S310将从各个角度拍摄到的物品图像进行筛选,获取有效目标图像;
S320对筛选后的有效目标图像进行图像合成,生成所述物品的物品图标;
S330对筛选后的有效目标图像进行图像处理,通过训练好的卷积神经网络模型识别所述物品。
本发明至少具备以下一项技术效果:
(1)本发明基于图像识别技术,通过拍摄放入或取出的物品的图像,并对该物品图像进行图像识别,获取放入或取出的物品信息,最后发送给设置在用户智能终端上的控制模块,便于用户可直观明了的在智能终端上查看该智能旅行箱内的物品信息,无需打开旅行箱查看,从而省去了打开旅行箱清点物品的麻烦。
(2)相对于现有技术中需要对物品添加额外的标识,并通过专门的扫描设备来扫描该标识才能识别出物品信息,本发明无需在物品上加入其它额外的标签,也无需额外的操作,就可以智能完成物品的识别。
(3)本发明在检测到智能旅行箱的箱体处于打开状态,且探测到用户在箱体上执行放入或取出的操作后才启动拍摄物品图像,一方面节省了电能,另一方面避免了大量无效图像的产生,降低了后续图像处理的工作量,提高了识别处理的速度。
(4)本发明通过将拍摄的物品图像进行了筛选处理,从而减少了后续图像识别及物品图标生成处理的图像处理工作量,加快了处理进程,提高了识别效率。且物体图标的生成,便于用户在智能终端根据物品图标确认物品识别的信息,一旦出现错误,可及时纠正,便于智能旅行箱的物品清点管理。
(5)本发明通过在智能旅行箱内设置陀螺仪、压力传感器等装置即可轻松获取到箱体的放置状态和开合状态,便于后续的拍摄装置的启动。陀螺仪、压力传感器等器件成本低,体积小便于安装,且识别精度高。
(6)本发明通过在箱体的不同位置设置相应的智能探测子模块及对应的摄像子模块,当有智能探测子模块探测到用户在箱体上的放入或取出物品操作时,便会启动相对应的摄像子模块进行拍摄,而其它未触发的摄像子模块则处于休眠状态,如此,即达到了节能的目的,有减少了无效照片的数量,减轻了图片识别或合成的处理计算量。
(7)本发明通过设置可旋转的红外探测器和可旋转的摄像头,可以减少箱体上红外探测器和摄像头的布置数量,又不影响探测和拍摄的效果,达到了减少成本的目的。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明一种可以清点物品的智能旅行箱的实施例的示意图;
图2为本发明一种可以清点物品的智能旅行箱的实施例的结构框图;
图3为本发明一种可以清点物品的智能旅行箱的另一实施例的结构框图;
图4为本发明一种可以清点物品的智能旅行箱的另一实施例中红外探测器和摄像头分布示意图;
图5为本发明一种可以清点物品的智能旅行箱的实施例中红外探测器发射探测用的红外线示意图;
图6为本发明一种可以清点物品的智能旅行箱的控制方法实施例流程图;
图7为本发明一种可以清点物品的智能旅行箱的控制方法另一实施例的流程图;
图8为本发明一种可以清点物品的智能旅行箱的控制方法另一实施例的流程图。
附图标记:
1000--箱体;100--智能识别装置;200--控制模块;10--状态检测模块;20--智能摄像模块;30--图像处理模块;40--通信模块;11--放置状态检测子模块;12--开合状态检测子模块;21--智能探测子模块;22--摄像子模块;31--图像筛选子模块;32--图像合成子模块;33--图像识别子模块;201--微型摄像头;202--红外探测器。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作进一步地详细描述,显然,所描述的实施例仅仅是本发明一部份实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
本发明公开了一种可以清点物品的智能旅行箱,如图1所示,包括:箱体1000及设置在所述箱体1000上的智能识别装置100、设置在用户智能终端上的控制模块200;控制模块与智能识别装置通信连接,用户可在智能终端上通过控制模块控制智能旅行箱,也可在智能终端上查看智能旅行箱内的物品信息。具体的,如图2所示,所述智能识别装置包括:状态检测模块10,用于检测所述箱体的开合状态;智能摄像模块20,用于当所述状态检测模块10检测所述箱体处于打开状态时,探测用户的放入或拿出动作;并在探测到所述用户放入或拿出动作时,拍摄所述用户放入或拿出所述箱体的物品图像;图像处理模块30,用于对所述智能摄像模块20拍摄的物品图像进行图像处理,识别所述放入或拿出所述箱体的物品;通信模块40,用于将所述图像处理模块30识别出的所述放入或拿出所述箱体的物品信息发送给所述用户的智能终端上的控制模块200;所述控制模块200,用于接收所述通信模块40发送的放入或拿出所述箱体的物品信息,更新所述箱体内的现有物品信息。
本实施例基于图像识别技术,通过图像识别技术智能识别放入或拿出的物品信息,从而达到智能清点物品的目的。具体的,首先通过状态检测模块检测智能旅行箱的箱体开合状态,因为只有在箱体处于打开状态时,用户才可能在该箱体进行放入或拿出物品的操作。而箱体处于打开状态,并不表示用户一直在对箱体进行物品整放,因此如果只要箱体处于打开状态就开始拍摄的话,则会有大量的无用图像产生。比如在摆放的间隙,或者由于用户忘记关闭箱体的时候拍摄的图像均是无用图像。因此,如果是箱体一打开就开始拍摄的话,一方面,造成大量的无用图像的生成,增加了后续图像处理的工作量;另一方面也不节能。因此只有在箱体处于打开状态下,且通过智能摄像模块探测到用户放入物品到该智能旅行箱或者从该智能旅行箱中拿出物品时,才会进行摄像。拍摄到物品图像后,再通过图像处理模块对物品图像进行图像处理,识别出该物品,然后通过通信模块将该物品信息发送给用户的智能终端(比如手机)上的控制模块(智能旅行箱APP)。然后控制模块就可根据接收的物品信息,更新智能旅行箱的箱体内的物品。用户便也可以直接在自己的智能终端上查看旅行箱内有哪些物品,无需再打开箱体翻看,从而省去了打开旅行箱清点物品的麻烦。
本发明可用于清点物品的智能旅行箱的另一实施例,在上述实施例的基础上,如图3所示,所述状态检测模块10包括:放置状态检测子模块11,用于通过陀螺仪检测所述箱体的放置状态;开合状态检测子模块12,用于当所述放置状态检测子模块11检测到所述箱体处于水平放置状态时,通过压力传感器检测所述箱体的打开或关闭状态。
用户想要从智能旅行箱中取放物品时,需要将旅行箱水平放置,而竖直放置的旅行箱是不便于取放物品的。因此,可以先通过检测旅行箱的放置状态进行初步判断,如果通过放置状态检测子模块检测到旅行箱水平放置的状态,那么再通过开合状态检测子模块来检测箱体的开合状态,因为,只有在箱体处于打开状态时,用户才方便从中取放物品。具体的,通过陀螺仪检测箱体的放置状态,所述陀螺仪设置在所述箱体六面上的任意一面内。再通过压力传感器来检测箱体的打开或关闭状态,所述若干压力传感器可设置在所述箱体箱口的四周或者放置物品的箱体底部。陀螺仪可以用来监测箱体是水平放置还是垂直放置或者是倾斜放置(用户拖着行李箱时,可能会倾斜);当陀螺仪检测到箱体处于水平放置时,再根据压力传感器的压力检测数据判断箱子的开合状态。若干个压力传感器设置在箱体的箱口四周或者箱体底部(箱体底部指箱体水平放置时朝地的那一面)时,箱体打开和关闭状态时压力传感器检测到的压力数据是不同的,因此,可以根据压力传感器检测到的压力数据变化判断箱子是处于打开还是关闭状态。
本发明可用于清点物品的智能旅行箱的另一实施例,在上述任一实施例的基础上,如图3所示,所述智能摄像模块包括:若干智能探测子模块21,设置在所述箱体箱口的不同位置,用于发射探测光线,在所述箱体的不同位置探测是否有用户在所述箱体上做出放入或拿出动作;若干摄像子模块22,每个摄像子模块22与一个智能探测子模块21相连,用于当所述智能探测子模块21探测到用户在所述箱体上做出放入或拿出动作时,通过相应的摄像子模块22进行拍摄。
具体的,智能探测子模块及摄像子模块在箱体上的设置示意图如图4所示,微型摄像头201(摄像子模块)密布在旅行箱的各个位置,且旅行箱两侧有一定数量的红外探测器202(智能探测子模块)。红外探测器202向前方发射红外探测光线,只要用户在取放物品时触碰到了该红外探测光线,则该红外探测器就可以探测到该用户取放物品时的操作位置,从而开启相应的微型摄像头(该红外探测器附近的摄像头)进行拍摄,获得质量较好的物品图像。图5所示的网格线条是旅行箱上设置的红外探测器(箱口位置1-28处设置有红外探测器)发出的红外光束构成的。微型摄像头也密布在旅行箱周围。微型摄像头和红外探测器有对应的关系,例如每个红外探测器和位置附近的数个摄像头是相连的。当用户放物品进旅行箱时,某红外探测感应到物品放入,此时将信号传递给附近的摄像头,摄像头开启对物品拍照,此时拍下的照片大多都是有效照片,其他微型摄像头都处于休眠状态。也就是说,红外探测器探测到人放物品的动作,附近的摄像头启动拍照,其他摄像头处于休眠状态。再将这些照片进行识别匹配处理。这样既达到省电的目的,又减少了无效照片的数量,减轻了图片识别的计算量。
较佳的,所述智能探测子模块为可旋转红外探测器;所述摄像子模块为可旋转摄像头;其中:所述可旋转红外探测器,用于通过旋转探测所述箱体的不同位置是否有用户在所述箱体上做出放入或拿出动作;并在探测到用户在所述箱体上做出放入或拿出动作时,获取自身旋转的角度位置;所述可旋转摄像头,与相应的可旋转红外探测器相连,用于根据所述旋转位置获取单元获取到的所述可旋转红外探测单元旋转的角度位置,调整所述可旋转摄像头的拍摄角度位置,拍摄放入或拿出所述箱体的物品图像。
通过设置可旋转的红外探测器和可旋转的摄像头,可以减少箱体上红外探测器和摄像头的布置数量,又不影响探测和拍摄的效果,达到了减少成本的目的。
本发明可以清点物品的智能旅行箱的另一实施例,在上述任一实施例的基础上,所述物品信息包括所述物品的名称及所述物品的图标。如图3所示,所述图像处理模块30包括:图像筛选子模块31,用于将所述摄像模块拍摄到的物品的图像进行筛选,获取有效目标图像;图像合成子模块32,用于对所述图像筛选子模块31筛选出的有效目标图像进行合成,生成所述物品的物品图标;图像识别子模块33,用于对所述图像筛选子模块31筛选后的有效目标图像进行图像处理,通过训练好的卷积神经网络模型识别所述物品。
本实施例中,在进行图像合成或识别之前,需要先对拍摄的物品图像进行一个筛选,剔除质量不好或者无效图像,留取取放物品时拍摄角度及质量好的物品图像作为有效目标图像。然后再将该有效目标图像交给图像识别子模块和图像合成子模块分别进行处理;图像识别子模块对该有效目标图像进行图像处理及识别,比如根据处理后的物品图像特征,从内部存储的物品库内进行匹配识别,获取图像中的物品信息。而图像合成子模块则根据有效目标图像进行相应的图像合成,将其合成一张清晰的高质量图像作为该物品的物品图标,便于用户可以查看到该物品的图像,一旦出现识别出错的情况,用户也可以根据物品图标进行纠正,及时发现智能旅行箱中物品识别出错的情况。
较佳的,所述物品信息还包括物品的摆放位置;所述图像识别子模块还用于识别放入所述箱体的物品的摆放位置。具体的,箱体的存放空间被划分成了若干存放空间,每个存放空间都有相应的一个存放标号以示区别。当检测到用户放入物品的操作时,智能摄像模块还会拍摄到该物品的摆放位置图像,图像处理模块则进一步根据所述摆放位置图像,获取所述物品在所述箱体的摆放位置,即得到该物品摆放位置所处的存放空间,再通过通信模块将该物品的摆放位置(存放空间)信息发送给智能终端的控制模块,这样,控制模块就会标识出该物品的摆放位置(存放空间),从而便于用户想要取出该物品时,可以通过在智能终端上快速查找到该物品在箱体的位置,从而便于用户有目的性的从箱体中取出该物品,而不用在箱体中四处乱翻查找。
此外,我们还可以通过其它方式获取物品的摆放位置,比如通过在箱体底部遍布若干压力传感器,每个压力传感器均带有自身再箱体的位置信息,当用户在箱体某位置取出或放入物品时,箱体底部相应位置的压力传感器便会有相应的压力数据变化,根据相应的压力传感器的压力数据变化及其自身的位置信息,便可快速确定用户是放入还是取出物品,及放入或取出物品所在箱体的位置信息。
本发明的可以清点物品的智能旅行箱的另一实施例,在旅行箱的箱体内加入几个智能摄像头,当物品放入到旅行箱时,通过摄像头将物品从多角度拍照拍下来,然后识别到物品的品类,上传到手机app里。打开手机APP就可以看到自己放入物品的照片和物品名称。当物品拿出旅行箱时,也会被照片拍到,物品拿出旅行箱以后,APP就会显示物品已被从旅行箱拿出。具体技术方案如下:
本智能旅行箱有蓝牙模块、智能摄像头、压力传感器、光传感器、CPU组成。蓝牙模块主要是传输图片和物品数据;智能摄像头用来拍摄物品;压力传感器用来判定旅行箱是打开状态还是关闭状态;CPU主要用来控制摄像头和传感器的工作。
压力感应器嵌入在旅行箱箱口四周用来监测旅行箱是否处于打开状态,当旅行箱打开以后,压力感应器将发出信号给CPU,CPU给智能相机以唤醒信号,智能摄像头开启,当用户将物品放入旅行箱内的时候,摄像头在不同角度给予物品拍照,将物品与图片库里物品进行匹配,确认物品的种类,再将识别出多张不同角度的照片合成清晰完整的照片,上传到手机APP里;当旅行箱关上以后,压力感应器将旅行箱关闭信号发给CPU,CPU给智能摄像头发送关闭信号,智能摄像头关闭。
其中,旅行箱可以识别出物品是放入旅行箱还是放回旅行箱,实现方式有多种。比如,如图4所示,在旅行箱接近箱口的位置A处有摄像头,在箱口中间位置B处也放置摄像头;放入物品时A点的摄像头先扫描到物品,B点的摄像头后扫描到物品,此时判定物品放入旅行箱,上传照片到app,APP上标定物品名称和放置状态;当物品拿出旅行箱,B点的摄像头会先扫描到物品,A点的摄像头后扫描到物品,此时判定物品处于离开旅行箱的状态。当然,还可以通过其它方式判断用户是放入还是取出物品,比如在箱体底部设置压力传感器,放入物品时,对应的压力传感器获得的压力检测数据会增大,取出物品时,对应的压力传感器获得的压力检测数据会减小。另外,单纯通过摄像头也可以分辨出来,取物品的话则先拍摄到用户的手(伸手去拿),再拍摄到用户手拿物品的图像;而如果放入物品的话,则是先拍摄到用户手拿物品的图像,再拍摄到用户的手(放入后手抽回)等等。
此外,如果当用户忘记合上旅行箱,一段时间后,智能摄像头会自动关闭,当用户接着继续向旅行箱放置物品或者从旅行箱拿出物品时,拿出或放置动作会触发光传感器,光传感器会唤醒休眠的智能摄像头,智能摄像头重新启动拍摄。这样既达到省电的目的,又不影响对旅行箱内物品的记录。
较佳的,本发明智能旅行箱的另一实施例,在上述实施例的基础上,上述的智能摄像头采用微型摄像头,上述的光传感器改为采用红外探测器。微型摄像头密布在旅行箱的各个位置,且旅行箱两侧有一定数量的红外探测器。红外探测器就是探测用户放入物品时的位置。进一步地,微型摄像头也密布在旅行箱周围。微型摄像头和红外探测器有对应的关系,例如每个红外探测器和位置附近的数个摄像头是相连的。当用户放物品进旅行箱时,某位置处的红外探测感应到物品放入,此时将信号传递给附近的摄像头,摄像头开启对物品拍照,此时拍下的照片大多都是有效照片,其他微型摄像头都处于休眠状态。也就是说,红外探测器探测到人放物品的动作,附近的摄像头启动拍照,其他摄像头处于休眠状态。再将这些照片进行识别匹配处理。这样既达到省电的目的,减少了无效照片的数量,减轻了图片识别的计算量。
基于相同的技术构思,本发明还公开了一种可以清点物品的智能旅行箱的控制方法,本发明所述的可以清点物品的智能旅行箱可采用本发明的控制方法来清点智能旅行箱的物品,具体的,如图6所示,所述控制方法包括:
S100检测所述箱体的开合状态;
S200当检测到所述箱体处于打开状态时,探测用户的放入或拿出动作;并拍摄所述用户放入或拿出所述箱体的物品图像;
S300对所述摄像模块拍摄的物品图像进行图像处理,识别所述放入或拿出所述箱体的物品;
S400将识别出的所述放入或拿出所述箱体的物品信息发送给所述用户的智能终端上的控制模块;便于所述控制模块根据所述放入或拿出所述箱体的物品信息,更新所述箱体内的物品信息及状态。
本实施例中,只有在箱体打开且探测到用户手势动作的情况下才会触发拍照,避免了大量五一图像的产生,节能,且降低了后续图像处理的工作量,提高了识别速度。通过图像识别技术可将拍摄的物品图像进行识别,获取物品信息并发送给智能终端上的相应APP,用户则可以随时在智能终端上查看旅行箱内的物品情况,无需打开旅行箱进行翻看,提高了用户体验。
较佳的,上述实施例中,所述步骤S100包括:
S110通过箱体上设置的陀螺仪检测所述箱体的放置状态;
S120当检测到所述箱体处于水平放置状态时,通过箱体上设置的压力传感器检测所述箱体的打开或关闭状态。
一般的,用户放入物品在旅行箱内,或者从旅行箱中取出物品之前,都需要将旅行箱水平放置,且箱体在打开的状态下才能进行。因此,通过陀螺仪检测箱体的放置状态,看是水平放置、垂直放置、还是倾斜放置(用户拖箱子行走时可能倾斜),在水平放置的情况下再通过压力传感器检测箱体的开合状态。当然,压力传感器设置在箱体的位置并没有太多的局限性,但是需要箱体打开和关闭状态压力传感器检测到的压力数据不一致即可。比如,设置在箱口四周,或者设置在箱体放置物品的底部等。
本发明的控制方法的另一实施例,如图7所示,包括:
S100检测所述箱体的开合状态;
S210当所述箱体处于打开状态时,启动设置在所述箱体上的若干可旋转红外探测器;
S220通过所述若干可旋转红外探测器探测所述箱体的不同位置是否有用户在所述箱体上做出放入或拿出动作;
S230当有可旋转红外探测器探测到所述用户在所述箱体上做出放入或拿出动作时,获取所述可旋转红外探测器旋转的角度位置;
S240根据所述可旋转红外探测器旋转的角度位置,控制相应的可旋转摄像头旋转至相应的角度位置,拍摄放入或拿出所述箱体的物品图像;
S300对所述摄像模块拍摄的物品图像进行图像处理,识别所述放入或拿出所述箱体的物品;
S400将识别出的所述放入或拿出所述箱体的物品信息发送给所述用户的智能终端上的控制模块;便于所述控制模块根据所述放入或拿出所述箱体的物品信息,更新所述箱体内的物品信息及状态。
本实施例中通过若干可旋转红外探测器扫描箱体的不同位置,一旦探测到用户的手势,便会开启与该可旋转红外探测器对应的可旋转摄像头,该可旋转摄像头根据该可旋转红外探测器旋转的角度调整自身的位置,从而拍摄出更全面、清晰的照片。此外,通过设置可旋转的红外探测器和可旋转的摄像头,可以减少箱体上红外探测器和摄像头的布置数量,不用像图4或者图5那样在旅行箱上设置很多探测器和摄像头,一般设置2-3个可旋转的红外探测器及可旋转摄像头即可,这几个可旋转红外探测器分别用来旋转探测箱体的不同范围,一旦探测到该范围内有用户手势动作,便会启动相应的可旋转摄像头,旋转到相应位置后进行拍摄,如此,也不影响探测和拍摄的效果,达到了减少成本的目的。
本发明的另一方法实施例,在上述任一实施例的基础上,具体阐述了对拍摄的物品图像的处理,如图8所示,包括:
S110通过箱体上设置的陀螺仪检测所述箱体的放置状态;
S120当检测到所述箱体处于水平放置状态时,通过箱体上设置的压力传感器检测所述箱体的打开或关闭状态;
S200当检测到所述箱体处于打开状态时,探测用户的放入或拿出动作;并拍摄所述用户放入或拿出所述箱体的物品图像;
S310将从各个角度拍摄到的物品图像进行筛选,获取有效目标图像;
S320对筛选后的有效目标图像进行图像合成,生成所述物品的物品图标;
S330对筛选后的有效目标图像进行图像处理,通过训练好的卷积神经网络模型识别所述物品。
S410将所述物品图标及识别出的物品名称发送给所述用户的智能终端上的控制模块;便于所述控制模块根据所述放入或拿出所述箱体的物品信息,更新所述箱体内的物品信息及状态。
本实施例中,获取到物品图像后,会先对图像进行筛选,剔除掉质量不好,拍摄不清晰,或者拍摄不全面的物品图像,留下质量好的,拍摄角度也比较好的物品图像作为有效目标图像。然后再对这些有效目标图像进行图像处理,比如将其合成成物品图标;另外还通过训练好的卷积神经网络模型来识别有效目标图像中的物品;最后将物品图标和物品名称一起发送给智能终端上的控制模块,控制模块据此更新旅行箱内的物品信息。较佳的,还可以根据有效目标图像获取用户放入物品的放置位置,并将该位置信息告知给控制模块,控制模块便会存储该物品的位置信息,用户只需在智能终端上便可查看箱内的各物品,知晓各物品的摆放位置,方便后面取出。
本发明的可以清点物品的智能旅行箱的控制方法与本发明的可以清点物品的智能旅行箱对应,本发明的智能旅行箱的实施例的技术细节同样也适用于本发明的控制方法实施例,为减少重复,不再赘述。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (10)
1.一种可以清点物品的智能旅行箱,其特征在于,包括:箱体及设置在所述箱体上的智能识别装置、设置在用户智能终端上的控制模块;所述智能识别装置包括:
状态检测模块,用于检测所述箱体的开合状态;
智能摄像模块,用于当所述状态检测模块检测所述箱体处于打开状态时,探测用户的放入或拿出动作;并在探测到所述用户放入或拿出动作时,拍摄所述用户放入或拿出所述箱体的物品图像;
图像处理模块,用于对所述智能摄像模块拍摄的物品图像进行图像处理,识别所述放入或拿出所述箱体的物品;
通信模块,用于将所述图像处理模块识别出的所述放入或拿出所述箱体的物品信息发送给所述用户的智能终端上的控制模块;
所述控制模块,用于接收所述通信模块发送的放入或拿出所述箱体的物品信息,更新所述箱体内的现有物品信息。
2.根据权利要求1所述的一种可以清点物品的智能旅行箱,其特征在于,所述状态检测模块包括:
放置状态检测子模块,用于通过陀螺仪检测所述箱体的放置状态;
开合状态检测子模块,用于当所述放置状态检测子模块检测到所述箱体处于水平放置状态时,通过压力传感器检测所述箱体的打开或关闭状态。
3.根据权利要求1所述的一种可以清点物品的智能旅行箱,其特征在于,所述智能摄像模块包括:
若干智能探测子模块,设置在所述箱体箱口的不同位置,用于发射探测光线,在所述箱体的不同位置探测是否有用户在所述箱体上做出放入或拿出动作;
若干摄像子模块,每个摄像子模块与一个智能探测子模块相连,用于当所述智能探测子模块探测到用户在所述箱体上做出放入或拿出动作时,通过相应的摄像子模块进行拍摄。
4.根据权利要求3所述的一种可以清点物品的智能旅行箱,其特征在于,所述智能探测子模块为可旋转红外探测器;所述摄像子模块为可旋转摄像头;其中:
所述可旋转红外探测器,用于通过旋转探测所述箱体的不同位置是否有用户在所述箱体上做出放入或拿出动作;并在探测到用户在所述箱体上做出放入或拿出动作时,获取自身旋转的角度位置;
所述可旋转摄像头,与相应的可旋转红外探测器相连,用于根据所述旋转位置获取单元获取到的所述可旋转红外探测单元旋转的角度位置,调整所述可旋转摄像头的拍摄角度位置,拍摄放入或拿出所述箱体的物品图像。
5.根据权利要求1-4任一项所述的一种可以清点物品的智能旅行箱,其特征在于,所述物品信息包括所述物品的名称及所述物品的图标;所述图像处理模块包括:
图像筛选子模块,用于将所述摄像模块拍摄到的物品的图像进行筛选,获取有效目标图像;
图像合成子模块,用于对所述图像筛选子模块筛选出的有效目标图像进行合成,生成所述物品的物品图标;
图像识别子模块,用于对所述图像筛选子模块筛选后的有效目标图像进行图像处理,通过训练好的卷积神经网络模型识别所述物品。
6.根据权利要求5所述的一种可以清点物品的智能旅行箱,其特征在于,所述物品信息还包括物品的摆放位置;所述图像识别子模块还用于识别放入所述箱体的物品的摆放位置。
7.一种可以清点物品的智能旅行箱的控制方法,其特征在于,应用于权利要求1-6任一所述的可以清点物品的智能旅行箱,所述控制方法包括:
S100检测所述箱体的开合状态;
S200当检测到所述箱体处于打开状态时,探测用户的放入或拿出动作,并拍摄所述用户放入或拿出所述箱体的物品图像;
S300对所述摄像模块拍摄的物品图像进行图像处理,识别所述放入或拿出所述箱体的物品;
S400将识别出的所述放入或拿出所述箱体的物品信息发送给所述用户的智能终端上的控制模块;便于所述控制模块根据所述放入或拿出所述箱体的物品信息,更新所述箱体内的物品信息及状态。
8.根据权利要求7所述的一种可以清点物品的智能旅行箱的控制方法,其特征在于,所述步骤S100包括:
S110通过箱体上设置的陀螺仪检测所述箱体的放置状态;
S120当检测到所述箱体处于水平放置状态时,通过箱体上设置的压力传感器检测所述箱体的打开或关闭状态。
9.根据权利要求7所述的一种可以清点物品的智能旅行箱的控制方法,其特征在于,所述步骤S200包括:
S210当所述箱体处于打开状态时,启动设置在所述箱体上的若干可旋转红外探测器;
S220通过所述若干可旋转红外探测器探测所述箱体的不同位置是否有用户在所述箱体上做出放入或拿出动作;
S230当有可旋转红外探测器探测到所述用户在所述箱体上做出放入或拿出动作时,获取所述可旋转红外探测器旋转的角度位置;
S240根据所述可旋转红外探测器旋转的角度位置,控制相应的可旋转摄像头旋转至相应的角度位置,拍摄放入或拿出所述箱体的物品图像。
10.根据权利要求7-9任一项所述的一种可以清点物品的智能旅行箱的控制方法,其特征在于,所述步骤S300包括:
S310将从各个角度拍摄到的物品图像进行筛选,获取有效目标图像;
S320对筛选后的有效目标图像进行图像合成,生成所述物品的物品图标;
S330对筛选后的有效目标图像进行图像处理,通过训练好的卷积神经网络模型识别所述物品。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810424193.1A CN108720208A (zh) | 2018-05-07 | 2018-05-07 | 一种可以清点物品的智能旅行箱及其控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810424193.1A CN108720208A (zh) | 2018-05-07 | 2018-05-07 | 一种可以清点物品的智能旅行箱及其控制方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108720208A true CN108720208A (zh) | 2018-11-02 |
Family
ID=63937951
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810424193.1A Pending CN108720208A (zh) | 2018-05-07 | 2018-05-07 | 一种可以清点物品的智能旅行箱及其控制方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108720208A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110150838A (zh) * | 2019-05-28 | 2019-08-23 | 四川长虹电器股份有限公司 | 一种多功能智能背包系统 |
CN111093034A (zh) * | 2019-12-31 | 2020-05-01 | 维沃移动通信有限公司 | 物品查找方法及电子设备 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR200443671Y1 (ko) * | 2007-09-21 | 2009-03-06 | 문일호 | 여행용 가방 커버 |
CN104980698A (zh) * | 2015-05-29 | 2015-10-14 | 青岛海尔股份有限公司 | 一种冰箱内食物检测监控系统及方法 |
CN204791086U (zh) * | 2015-07-14 | 2015-11-18 | 小驴科技(北京)有限公司 | 一种具有物品清点功能的箱子 |
CN107307541A (zh) * | 2017-07-26 | 2017-11-03 | 厦门理工学院 | 一种联网共享智能储物箱 |
-
2018
- 2018-05-07 CN CN201810424193.1A patent/CN108720208A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR200443671Y1 (ko) * | 2007-09-21 | 2009-03-06 | 문일호 | 여행용 가방 커버 |
CN104980698A (zh) * | 2015-05-29 | 2015-10-14 | 青岛海尔股份有限公司 | 一种冰箱内食物检测监控系统及方法 |
CN204791086U (zh) * | 2015-07-14 | 2015-11-18 | 小驴科技(北京)有限公司 | 一种具有物品清点功能的箱子 |
CN107307541A (zh) * | 2017-07-26 | 2017-11-03 | 厦门理工学院 | 一种联网共享智能储物箱 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110150838A (zh) * | 2019-05-28 | 2019-08-23 | 四川长虹电器股份有限公司 | 一种多功能智能背包系统 |
CN111093034A (zh) * | 2019-12-31 | 2020-05-01 | 维沃移动通信有限公司 | 物品查找方法及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106020227B (zh) | 无人机的控制方法、装置 | |
JP7078275B2 (ja) | 映像モニタリングに基づく商品検知システムおよび商品検知方法 | |
CN107113415B (zh) | 用于多技术深度图获取和融合的方法和设备 | |
CN105874472B (zh) | 具有虹膜颜色识别的多频带生物识别相机系统 | |
JP6275285B2 (ja) | 物流システム、荷物運搬方法、及びプログラム | |
US20190206031A1 (en) | Facial Contour Correcting Method and Device | |
CN109977739A (zh) | 图像处理方法、装置、存储介质及电子设备 | |
CN108229369A (zh) | 图像拍摄方法、装置、存储介质及电子设备 | |
US20170124384A1 (en) | Progressive radar assisted facial recognition | |
CN110177221A (zh) | 高动态范围图像的拍摄方法及装置 | |
CN107231529A (zh) | 图像处理方法、移动终端及存储介质 | |
CN109639969A (zh) | 一种图像处理方法、终端及服务器 | |
JP2004023158A (ja) | 画像撮像装置 | |
CN108200337B (zh) | 拍照处理的方法、装置、终端及存储介质 | |
CN108720208A (zh) | 一种可以清点物品的智能旅行箱及其控制方法 | |
CN108960179A (zh) | 一种图像数据处理方法及移动终端 | |
CN106899768A (zh) | 一种终端拍照方法和装置 | |
WO2021176081A1 (en) | Quantifying biotic damage on plants, by separating plant-images and subsequently operating a convolutional neural network | |
CN108652161A (zh) | 一种智能识别旅行箱及其控制方法 | |
CN108197279A (zh) | 攻击数据生成方法、装置、系统及计算机可读存储介质 | |
WO2022161011A1 (zh) | 生成图像的方法和电子设备 | |
US8194147B2 (en) | Image presentation angle adjustment method and camera device using the same | |
CN111885302B (zh) | 图像拍摄方法、装置及电子设备 | |
CN205536872U (zh) | 冰箱 | |
CN112153300A (zh) | 多目摄像头曝光方法、装置、设备及介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20181102 |
|
WD01 | Invention patent application deemed withdrawn after publication |