CN113650013A - 洗漱物品的调整方法、系统、装置、电子设备及存储介质 - Google Patents
洗漱物品的调整方法、系统、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN113650013A CN113650013A CN202110915550.6A CN202110915550A CN113650013A CN 113650013 A CN113650013 A CN 113650013A CN 202110915550 A CN202110915550 A CN 202110915550A CN 113650013 A CN113650013 A CN 113650013A
- Authority
- CN
- China
- Prior art keywords
- washing
- position information
- article
- washing article
- type
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000005406 washing Methods 0.000 title claims abstract description 243
- 238000000034 method Methods 0.000 title claims abstract description 43
- 238000012549 training Methods 0.000 claims description 30
- 238000013136 deep learning model Methods 0.000 claims description 20
- 230000001815 facial effect Effects 0.000 claims description 15
- 238000004891 communication Methods 0.000 claims description 14
- 230000009471 action Effects 0.000 claims description 10
- 238000004590 computer program Methods 0.000 claims description 8
- 230000003750 conditioning effect Effects 0.000 claims description 2
- 229940034610 toothpaste Drugs 0.000 description 9
- 239000000606 toothpaste Substances 0.000 description 9
- 238000010586 diagram Methods 0.000 description 6
- 238000012163 sequencing technique Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1679—Programme controls characterised by the tasks executed
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1694—Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
- B25J9/1697—Vision controlled systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Mechanical Engineering (AREA)
- Robotics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- Evolutionary Biology (AREA)
- Bioinformatics & Computational Biology (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Cleaning By Liquid Or Steam (AREA)
- Image Analysis (AREA)
Abstract
本申请涉及一种洗漱物品的调整方法、系统、装置、电子设备及存储介质,涉及智能控制技术领域。该方法包括:获取洗漱台的第一图像信息,所述第一图像信息中包括所述洗漱台的第一洗漱物品和所述第一洗漱物品的当前摆放位置的第一位置信息;根据所述第一洗漱物品的类型和所述第一位置信息确定是否调整所述第一洗漱物品的摆放位置;在确定调整所述第一洗漱物品摆放位置的情况下,控制机械手将所述第一洗漱物品由所述第一位置信息调整至第二位置信息,所述第二位置信息与所述类型匹配。这样,无需用户手动对洗漱台上的洗漱物品进行整理,洗漱台上的洗漱物品就可以按照类型摆放至对应的位置,因此,提高了用户获取洗漱物品的效率。
Description
技术领域
本申请涉及智能控制技术领域,尤其涉及一种洗漱物品的调整方法、系统、装置、电子设备及存储介质。
背景技术
目前,现有的洗漱台上的洗漱物品需要用户手动进行整理,否则会随着洗漱台上洗漱物品的增多,洗漱台变得杂乱无章。这样,当用户需要使用某一洗漱物品时,需要在凌乱的洗漱物品中去寻找,导致用户需要花费较多的时间,才能获取到所需的洗漱物品。
发明内容
本申请提供了一种洗漱物品的调整方法、系统、装置、电子设备及存储介质,以解决现有洗漱台上的洗漱物品杂乱无章,导致获取效率较低的技术问题。
第一方面,本申请提供了一种洗漱物品的调整方法,该方法包括:
获取洗漱台的第一图像信息,所述第一图像信息中包括所述洗漱台的第一洗漱物品和所述第一洗漱物品的当前摆放位置的第一位置信息;
根据所述第一洗漱物品的类型和所述第一位置信息确定是否调整所述第一洗漱物品的摆放位置;
在确定调整所述第一洗漱物品摆放位置的情况下,控制机械手将所述第一洗漱物品由所述第一位置信息调整至第二位置信息,所述第二位置信息与所述类型匹配。
第二方面,本申请还提供了一种洗漱物品的调整系统,所述系统包括摄像头、处理器和机械手,所述处理器分别与所述摄像头和所述机械手连接;
其中,所述摄像头用于获取洗漱台的第一图像信息,所述第一图像信息中包括所述洗漱台的第一洗漱物品和所述第一洗漱物品的当前摆放位置的第一位置信息;
所述处理器用于根据所述第一洗漱物品的类型和所述第一位置信息确定是否调整所述第一洗漱物品的摆放位置;并在确定调整所述第一洗漱物品摆放位置的情况下,控制所述机械手将所述第一洗漱物品由所述第一位置信息调整至第二位置信息,所述第二位置信息与所述类型匹配。
第三方面,本申请还提供了一种洗漱物品的调整装置,所述装置包括:
第一获取模块,用于获取洗漱台的第一图像信息,所述第一图像信息中包括所述洗漱台的第一洗漱物品和所述第一洗漱物品的当前摆放位置的第一位置信息;
第一确定模块,用于根据所述第一洗漱物品的类型和所述第一位置信息确定是否调整所述第一洗漱物品的摆放位置;
控制模块,用于在确定调整所述第一洗漱物品摆放位置的情况下,控制机械手将所述第一洗漱物品由所述第一位置信息调整至第二位置信息,所述第二位置信息与所述类型匹配。
第四方面,本申请还提供了一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现第一方面任一项实施例所述的洗漱物品的调整方法的步骤。
第五方面,提供了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如第一方面任一项实施例所述的洗漱物品的调整方法的步骤。
本申请实施例提供的上述技术方案与现有技术相比具有如下优点:
本申请实施例提供的该方法,能够通过获取到的洗漱台的第一图像信息,确定出该第一洗漱物品的当前摆放位置对应的第一位置信息,进而可以通过该第一洗漱物品的类型和第一位置信息,确定第一洗漱物品的摆放位置是否需要调整,当确定第一洗漱物品的摆放位置需要调整时,控制机械手对该第一洗漱物品的摆放位置进行调整。这样,无需用户手动对洗漱台上的洗漱物品进行整理,洗漱台上的洗漱物品就可以按照类型摆放至对应的位置,因此,提高了用户获取洗漱物品的效率。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种洗漱物品的调整方法的流程示意图;
图2为本申请实施例提供的一种洗漱物品的调整系统的结构图;
图3为本申请实施例提供的一种洗漱物品的调整装置的结构图;
图4为本申请实施例提供的一种电子设备的结构图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请的一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。
参见图1,图1为本申请实施例提供的一种洗漱物品的调整方法的流程示意图。如图1所示,该洗漱物品的调整方法,具体可以包括以下步骤:
步骤101、获取洗漱台的第一图像信息,第一图像信息中包括洗漱台的第一洗漱物品和第一洗漱物品的当前摆放位置的第一位置信息。
该洗漱物品的调整方法应用于洗漱物品的调整系统,该系统可以包括图像采集装置、处理器和机械手。其中,图像采集装置和机械手均与处理器连接。图像采集装置用于获取洗漱台的第一图像信息,并将该第一图像信息发送至处理器。处理器用于接收该第一图像信息,并基于该第一图像信息对洗漱台上的洗漱物品的摆放位置进行分析,确定是否需要调整,然后控制机械手洗漱物品的摆放位置进行调整,以此实现对洗漱物品的自动整理。
具体地,上述第一图像信息是指通过图像采集装置采集到的洗漱台的图像信息,上述第一洗漱物品可以包括一个或多个洗漱物品。此处的图像采集装置可以是摄像头或者安装有摄像头的终端设置等。
获取该第一图像信息的方式,可以通过一个图像采集装置进行获取,也可以通过多个图像采集装置进行获取,本申请不做具体限定。当采用一个图像采集装置进行获取时,可以通过设置在洗漱台置物架上方的图像采集装置进行获取,这样可以获取到洗漱台上所有洗漱物品的第一图像信息。当采用多个图像采集装置进行获取时,可以通过设置在洗漱台的不同方位的图像采集装置获取洗漱台不同角度的多个图像信息,并对该多个图像信息进行合成,得到第一图像信息。这样,当洗漱台包括上下多层置物台,或者包括分布在不同方向的多个置物台时,可以获取到洗漱台上所有洗漱物品的第一图像信息。
步骤102、根据第一洗漱物品的类型和第一位置信息确定是否调整第一洗漱物品的摆放位置。
上述第一洗漱物品的类型可以包括但不限于牙膏、牙刷、洗脸巾、洗面奶、护肤用品、化妆用品等等。其中,每一种洗漱物品的类型均存在一个摆放位置与之对应。例如,类型为牙膏的洗漱物品需要放置在洗漱台的区域A位置,类型为牙刷的洗漱物品需要放置在洗漱台的区域B位置,类型为洗脸巾的洗漱物品需要放置在洗漱台的区域C位置等。当该第一洗漱物品的第一位置信息与上述对应的摆放位置不一致时,则表示该第一洗漱物品的摆放位置不正确,需要进行调整;当该第一洗漱物品的第一位置信息与上述对应的摆放位置一致时,则表示该第一洗漱物品的摆放位置正确,无需调整。
步骤103、在确定调整第一洗漱物品摆放位置的情况下,控制机械手将第一洗漱物品由第一位置信息调整至第二位置信息,第二位置信息与类型匹配。
具体地,上述机械手为安装在洗漱台上的用于对洗漱物品的摆放位置进行调整的结构。上述第二位置信息为与该第一洗漱物品的类型相匹配的位置信息,也就是该第一洗漱物品需要放置的正确的位置信息。当确定第一洗漱物品摆放位置需要调整时,可以控制机械手将第一洗漱物品由第一位置信息调整至第二位置信息,从而使得第一洗漱物品调整至正确的摆放位置。
在本实施例中,能够通过获取到的洗漱台的第一图像信息,确定出该第一洗漱物品的当前摆放位置对应的第一位置信息,进而可以通过该第一洗漱物品的类型和第一位置信息,确定第一洗漱物品的摆放位置是否需要调整,当确定第一洗漱物品的摆放位置需要调整时,控制机械手对该第一洗漱物品的摆放位置进行调整。这样,无需用户手动对洗漱台上的洗漱物品进行整理,洗漱台上的洗漱物品就可以按照类型摆放至对应的位置,因此,提高了用户获取洗漱物品的效率。
进一步地,上述步骤102、根据第一洗漱物品的类型和第一位置信息确定是否调整第一洗漱物品的摆放位置,具体包括一下步骤:
根据预先训练的深度学习模型,确定第一洗漱物品的类型,深度学习模型是基于采集的训练样本训练得到,训练样本包括多个第二图像信息和用于标记第一洗漱物品的类型的标识信息,第二图像信息包括第一洗漱物品;
根据第一洗漱物品的类型,确定第一洗漱物品的第二位置信息;
根据第一位置信息和第二位置信息,确定是否调整第一洗漱物品的摆放位置。
具体地,该深度学习模型可以是由上述洗漱物品的调整系统中的处理器训练得到,也可以是由与该处理器连接的云端服务器训练得到,本申请不做具体限定。该深度学习模型是基于训练样本对待训练模型进行训练得到,其中,训练样本可以包括多个第二图像信息和用于标记第一洗漱物品的类型的标识信息。获取训练样本的方式,可以是由云端服务器从大数据中获取第二图像信息,再基于第二图像信息中的第一洗漱物品进行人工标注,得到每个第二图像对应的标识信息,以此作为训练样本;也可以是将历史的预测后的第一图像信息和预测后的第一图像信息中的第一洗漱物品的类型,共同作为训练样本;当然,还可以是用户通过自定义模块将拍摄的洗漱物品图像信息和标识信息,作为训练样本。
当该深度学习模型是预设在上述洗漱物品的调整系统的处理器中时,处理器可以根据该深度学习模型直接对第一图像信息中的第一洗漱物品的类型进行预测,确定该第一洗漱物品的类型,进而确定该类型对应的第二位置信息,再将该第一洗漱物品的第一位置信息和第二位置信息进行匹配,当第一位置信息和第二位置信息一致时,则处理器可以确定该第一洗漱物品的摆放位置无需调整;当第一位置信息和第二位置信息不一致时,则处理器可以确定该第一洗漱物品的摆放位置需要调整。
当该深度学习模型是预设在云端服务器中时,处理器可以将第一图像信息上传至云端服务器,由云端服务器根据该深度学习模型对第一图像信息中的第一洗漱物品的类型进行预测,确定该第一洗漱物品的类型,进而将该第一洗漱物品的类型发送至处理器,处理器确定该类型对应的第二位置信息,再将该第一洗漱物品的第一位置信息和第二位置信息进行匹配,当第一位置信息和第二位置信息一致时,则处理器可以确定该第一洗漱物品的摆放位置无需调整;当第一位置信息和第二位置信息不一致时,则处理器可以确定该第一洗漱物品的摆放位置需要调整。
在本实施例中,可以通过预先训练的深度学习模型,对第一洗漱物品的类型进行预测,并根据预测的类型确定出第一洗漱物品的第二位置区域,由此可以更加准确地判断第一洗漱物品的摆放位置是否准确,从而提高了摆放位置的准确性。
进一步地,在上述步骤根据预先训练的深度学习模型,确定第一洗漱物品的类型之前,该方法还包括以下步骤:
确定第二图像信息中的第一洗漱物品的类型;
将用于标识第一洗漱物品类型的标识信息和第二图像信息的组合确定为训练样本;
根据训练样本训练得到深度学习模型。
具体地,确定第二图像信息中的第一洗漱物品的类型的方式,可以通过对第二图像信息进行图像识别,然后根据识别后的第二图像信息自动确定洗漱物品的类型;还可以根据用户的输入操作进行确定,例如,用户可以手动为每个第二图像信息设置一个类型与之对应。
这样,每个第二图像信息均有对应的标识信息,每个第二图像信息和其对应的标识信息就可以组成一个训练样本,再基于这些训练样本对待训练模型进行训练,就可以得到深度学习模型,方便后续基于该深度学习模型对第一图像信息进行预测。
进一步地,上述步骤101、获取洗漱台的第一图像信息,具体包括以下步骤:
获取第一语音指令,第一语音指令用于搜索第一洗漱物品;
基于第一语音指令获取第一图像信息。
在一实施例中,处理器可以通过第一语音指令进行唤醒,若用户发送第一语音指令的预设时段后没有再接收到新的第一语音指令,则可以进入休眠待机状态。在该实施例中,当用户需要搜索某一洗漱物品时,可以向处理器发送第一语音指令,此时处理器处于唤醒状态,可以启动图像采集装置获取第一图像信息,再根据第一洗漱物品的类型和第一位置信息确定是否调整第一洗漱物品的摆放位置;在确定调整第一洗漱物品摆放位置的情况下,控制机械手将第一洗漱物品由第一位置信息调整至第二位置信息。这样,洗漱台上的洗漱物品均按照类型调整至对应的位置,方便用户进行寻找。通过第一语音指令对处理器进行唤醒的方式,可以有效节约处理器的资源,避免用户不使用洗漱台时,处理器任处于工作状态。
需要说明的是,该根据第一洗漱物品的类型和第一位置信息确定是否调整第一洗漱物品的摆放位置;在确定调整第一洗漱物品摆放位置的情况下,控制机械手将第一洗漱物品由第一位置信息调整至第二位置信息的步骤,在上述实施例中已经进行了详细的描述,在此不再赘述。
进一步地,该方法还包括:
获取第二语音指令,第二语音指令用于提示当前用户待使用的洗漱动作;
采集并识别用户的面部图像;
根据面部图像,确定当前用户的用户标签;
基于用户标签,确定与待使用的洗漱动作匹配的第二洗漱物品;
控制机械手对第二洗漱物品执行第一操作,其中,第一操作用于控制第二洗漱物品为待使用状态。
在一实施例中,洗漱台上的洗漱物品可以通过类型进行分类摆放,还可以通过类型和用户标签进行摆放。如将类型为牙膏的洗漱物品放置在洗漱台的区域A位置,并根据用户标签的排序对区域A位置的所有牙膏进行排序;类型为牙刷的洗漱物品放置在洗漱台的区域B位置,并根据用户标签的排序对区域B位置的所有牙刷进行排序;类型为洗脸巾的洗漱物品放置在洗漱台的区域C位置,并根据用户标签的排序对区域C位置的所有洗脸巾进行排序。
处理器也可以接收用户的第二语音指令,在接收到第二语音指令后,启动图像采集装置采集用户的面部图像,处理器再将采集的用户的面部图像进行识别,确定当前用户的用户标签,由此确定出与该用户标签和第二语音指令中的待使用的洗漱动作匹配的第二洗漱物品,最后控制机械手打开该第二洗漱物品,以供用户使用。例如,当用户需要刷牙时,用户可以向处理器发送第二语音指令,如“我需要刷牙”,此时,处理器可以启动图像采集装置对用户进行拍照,采集用户的面部图像,进而确定出用户标签,最后可以基于该用户标签,确定出该用户标签对应的牙刷和牙膏的具体摆放位置,还可以通过机械手打开该牙膏的帽盖,挤出牙膏。
需要说明的是,处理器在确定当前用户的用户标签之前,已经预设有各用户的面部图像和对应的用户标签的映射关系。用户在初次使用该系统时,处理器可以获取该用户的面部图像,并将该面部图像和设置的用户标签进行存储。
在本实施例中,可以通过采集用户的面部图像,确定出该面部图像对应的用户标签的洗漱物品,由此可以实现对不同用户所需的洗漱物品的精准提示,提高用户获取所需洗漱物品的效率。
进一步地,在步骤101、获取洗漱台的第一图像信息之后,该方法还包括:
确定第一洗漱物品的使用状态;
在使用状态表征第一洗漱物品待更换的情况的下,发送提示信息。
在一实施例中,在获取第一图像信息之后,可以通过对第一图像信息中的第一洗漱物品的外形进行识别,并将其与云端服务器上的快使用完的第一洗漱物品的图像进行比对,从而确定该第一洗漱物品的使用状态。例如,可以通过识别牙膏、洗面奶等洗漱物品的外形,确定牙膏、洗面奶等的使用状态是否为待更换状态。当然,作为另一种实施方式,还可以根据第一洗漱物品的使用次数和时间等因素,确定第一洗漱物品的使用状态。例如,当用户A通过第二语音指令使用牙刷次数达到100次,则可以认为该用户的牙刷的使用状态为待更换状态。在使用状态表征第一洗漱物品待更换的情况的下,处理器可以向用户发送提示信息。具体地,可以向用户发送语音提示信息,提示用户该第一洗漱物品需要更换;也可以向该用户的移动终端推送该第一洗漱物品相关的推荐信息,如该第一洗漱物品的购买链接等等。这样,可以方便用户了解所使用的洗漱物品的使用状态,及时进行更换。
参见图2,图2为本申请实施例提供的一种洗漱物品的调整系统的结构图。如图2所示,该洗漱物品的调整系统包括摄像头201、处理器202和机械手203,处理器202分别与摄像头201和机械手203连接;
其中,摄像头201用于获取洗漱台的第一图像信息,第一图像信息中包括洗漱台的第一洗漱物品和第一洗漱物品的当前摆放位置的第一位置信息。处理器202用于根据第一洗漱物品的类型和第一位置信息确定是否调整第一洗漱物品的摆放位置;并在确定调整第一洗漱物品摆放位置的情况下,控制机械手203将第一洗漱物品由第一位置信息调整至第二位置信息,第二位置信息与类型匹配。
需要说明的是,该洗漱物品的调整系统可以实现上述洗漱物品的调整方法的各实施例,且能达到相同的技术效果,在此不再赘述。
参见图3,图3为本申请实施例提供的一种洗漱物品的调整装置的结构图。如图3所示,该洗漱物品的调整装置300包括:
第一获取模块301,用于获取洗漱台的第一图像信息,第一图像信息中包括洗漱台的第一洗漱物品和第一洗漱物品的当前摆放位置的第一位置信息;
第一确定模块302,用于根据第一洗漱物品的类型和第一位置信息确定是否调整第一洗漱物品的摆放位置;
控制模块303,用于在确定调整第一洗漱物品摆放位置的情况下,控制机械手将第一洗漱物品由第一位置信息调整至第二位置信息,第二位置信息与类型匹配。
可选地,第一确定模块302包括:
第一确定子模块,用于根据预先训练的深度学习模型,确定第一洗漱物品的类型,深度学习模型是基于采集的训练样本训练得到,训练样本包括多个第二图像信息和用于标记第一洗漱物品的类型的标识信息,第二图像信息包括第一洗漱物品;
第二确定子模块,用于根据第一洗漱物品的类型,确定第一洗漱物品的第二位置信息;
第三确定子模块,用于根据第一位置信息和第二位置信息,确定是否调整第一洗漱物品的摆放位置。
可选地,该洗漱物品的调整装置300还包括:
第二确定模块,用于确定第二图像信息中的第一洗漱物品的类型;
第三确定模块,用于将用于标识第一洗漱物品类型的标识信息和第二图像信息的组合确定为训练样本;
训练模块,用于根据训练样本训练得到深度学习模型。
可选地,第一获取模块301包括:
第一获取子模块,用于获取第一语音指令,第一语音指令用于搜索第一洗漱物品;
第二获取子模块,用于基于第一语音指令获取第一图像信息。
可选地,该洗漱物品的调整装置300还包括:
第二获取子模块,用于获取第二语音指令,第二语音指令用于提示当前用户待使用的洗漱动作;
识别子模块,用于采集并识别用户的面部图像;
第四确定子模块,用于根据面部图像,确定当前用户的用户标签;
第五确定子模块,用于基于用户标签,确定与待使用的洗漱动作匹配的第二洗漱物品;
控制子模块,用于控制机械手对第二洗漱物品执行第一操作,其中,第一操作用于控制第二洗漱物品为待使用状态。
可选地,该洗漱物品的调整装置300还包括:
第四确定模块,用于确定第一洗漱物品的使用状态;
发送模块,用于在使用状态表征第一洗漱物品待更换的情况的下,发送提示信息。
需要说明的是,该洗漱物品的调整装置300可以实现上述洗漱物品的调整方法的各实施例,且能达到相同的技术效果,在此不再赘述。
参见图4,图4为本申请实施例提供的一种电子设备的结构图。如图4所示,该电子设备包括处理器411、通信接口412、存储器413和通信总线414,其中,处理器411,通信接口412,存储器413通过通信总线414完成相互间的通信,
存储器413,用于存放计算机程序;
在本申请一个实施例中,处理器411,用于执行存储器413上所存放的程序时,实现前述任意一个方法实施例提供的洗漱物品的调整方法,包括:
获取洗漱台的第一图像信息,第一图像信息中包括洗漱台的第一洗漱物品和第一洗漱物品的当前摆放位置的第一位置信息;
根据第一洗漱物品的类型和第一位置信息确定是否调整第一洗漱物品的摆放位置;
在确定调整第一洗漱物品摆放位置的情况下,控制机械手将第一洗漱物品由第一位置信息调整至第二位置信息,第二位置信息与类型匹配。
需要说明的是,该电子设备可以实现上述洗漱物品的调整方法的各实施例,且能达到相同的技术效果,在此不再赘述。
本申请实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如前述任意一个方法实施例提供的洗漱物品的调整方法的步骤。
需要说明的是,在本文中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅是本发明的具体实施方式,使本领域技术人员能够理解或实现本发明。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所申请的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种洗漱物品的调整方法,其特征在于,所述方法包括:
获取洗漱台的第一图像信息,所述第一图像信息中包括所述洗漱台的第一洗漱物品和所述第一洗漱物品的当前摆放位置的第一位置信息;
根据所述第一洗漱物品的类型和所述第一位置信息确定是否调整所述第一洗漱物品的摆放位置;
在确定调整所述第一洗漱物品摆放位置的情况下,控制机械手将所述第一洗漱物品由所述第一位置信息调整至第二位置信息,所述第二位置信息与所述类型匹配。
2.根据权利要求1所述的方法,其特征在于,所述根据所述第一洗漱物品的类型和所述第一位置信息确定是否调整所述第一洗漱物品的摆放位置,包括:
根据预先训练的深度学习模型,确定所述第一洗漱物品的类型,所述深度学习模型是基于采集的训练样本训练得到,所述训练样本包括多个第二图像信息和用于标记所述第一洗漱物品的类型的标识信息,所述第二图像信息包括所述第一洗漱物品;
根据所述第一洗漱物品的类型,确定所述第一洗漱物品的第二位置信息;
根据所述第一位置信息和所述第二位置信息,确定是否调整所述第一洗漱物品的摆放位置。
3.根据权利要求2所述的方法,其特征在于,在所述根据预先训练的深度学习模型,确定所述第一洗漱物品的类型之前,所述方法还包括:
确定所述第二图像信息中的第一洗漱物品的类型;
将用于标识所述第一洗漱物品类型的标识信息和所述第二图像信息的组合确定为所述训练样本;
根据所述训练样本训练得到所述深度学习模型。
4.根据权利要求1所述的方法,其特征在于,所述获取洗漱台的第一图像信息,包括:
获取第一语音指令,所述第一语音指令用于搜索所述第一洗漱物品;
基于所述第一语音指令获取所述第一图像信息。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取第二语音指令,所述第二语音指令用于提示当前用户待使用的洗漱动作;
采集并识别所述用户的面部图像;
根据所述面部图像,确定当前用户的用户标签;
基于所述用户标签,确定与所述待使用的洗漱动作匹配的第二洗漱物品;
控制所述机械手对所述第二洗漱物品执行第一操作,其中,所述第一操作用于控制所述第二洗漱物品为待使用状态。
6.根据权利要求1所述的方法,其特征在于,在获取洗漱台的第一图像信息之后,所述方法还包括:
确定所述第一洗漱物品的使用状态;
在所述使用状态表征所述第一洗漱物品待更换的情况的下,发送提示信息。
7.一种洗漱物品的调整系统,其特征在于,所述系统包括摄像头、处理器和机械手,所述处理器分别与所述摄像头和所述机械手连接;
其中,所述摄像头用于获取洗漱台的第一图像信息,所述第一图像信息中包括所述洗漱台的第一洗漱物品和所述第一洗漱物品的当前摆放位置的第一位置信息;
所述处理器用于根据所述第一洗漱物品的类型和所述第一位置信息确定是否调整所述第一洗漱物品的摆放位置;并在确定调整所述第一洗漱物品摆放位置的情况下,控制所述机械手将所述第一洗漱物品由所述第一位置信息调整至第二位置信息,所述第二位置信息与所述类型匹配。
8.一种洗漱物品的调整装置,其特征在于,所述装置包括:
第一获取模块,用于获取洗漱台的第一图像信息,所述第一图像信息中包括所述洗漱台的第一洗漱物品和所述第一洗漱物品的当前摆放位置的第一位置信息;
第一确定模块,用于根据所述第一洗漱物品的类型和所述第一位置信息确定是否调整所述第一洗漱物品的摆放位置;
控制模块,用于在确定调整所述第一洗漱物品摆放位置的情况下,控制机械手将所述第一洗漱物品由所述第一位置信息调整至第二位置信息,所述第二位置信息与所述类型匹配。
9.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求1-6任一项所述的洗漱物品的调整方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-6任一项所述的洗漱物品的调整方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110915550.6A CN113650013B (zh) | 2021-08-10 | 2021-08-10 | 洗漱物品的调整方法、系统、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110915550.6A CN113650013B (zh) | 2021-08-10 | 2021-08-10 | 洗漱物品的调整方法、系统、装置、电子设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113650013A true CN113650013A (zh) | 2021-11-16 |
CN113650013B CN113650013B (zh) | 2023-08-15 |
Family
ID=78479400
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110915550.6A Active CN113650013B (zh) | 2021-08-10 | 2021-08-10 | 洗漱物品的调整方法、系统、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113650013B (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106903706A (zh) * | 2017-03-13 | 2017-06-30 | 广东工业大学 | 一种工作台物品整理系统及方法 |
CN206764760U (zh) * | 2017-05-02 | 2017-12-19 | 广西大学 | 一种货物整理机器人 |
CN108000525A (zh) * | 2017-10-23 | 2018-05-08 | 广东数相智能科技有限公司 | 一种图书管理机器人和基于机器人的图书错放识别方法 |
CN108994815A (zh) * | 2018-10-11 | 2018-12-14 | 泉州市宏恩新能源汽车科技有限公司 | 一种超市孤儿产品归位机器人 |
CN110046545A (zh) * | 2019-03-05 | 2019-07-23 | 深兰科技(上海)有限公司 | 一种物品摆放系统、方法、装置、电子设备及存储介质 |
-
2021
- 2021-08-10 CN CN202110915550.6A patent/CN113650013B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106903706A (zh) * | 2017-03-13 | 2017-06-30 | 广东工业大学 | 一种工作台物品整理系统及方法 |
CN206764760U (zh) * | 2017-05-02 | 2017-12-19 | 广西大学 | 一种货物整理机器人 |
CN108000525A (zh) * | 2017-10-23 | 2018-05-08 | 广东数相智能科技有限公司 | 一种图书管理机器人和基于机器人的图书错放识别方法 |
CN108994815A (zh) * | 2018-10-11 | 2018-12-14 | 泉州市宏恩新能源汽车科技有限公司 | 一种超市孤儿产品归位机器人 |
CN110046545A (zh) * | 2019-03-05 | 2019-07-23 | 深兰科技(上海)有限公司 | 一种物品摆放系统、方法、装置、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN113650013B (zh) | 2023-08-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108805764B (zh) | 一种作业进度监控方法、装置、终端及可读介质 | |
CN109447895B (zh) | 图片生成方法和装置、存储介质及电子装置 | |
RU2018110091A (ru) | Поэтапная консультация по оптимальному использованию устройства для бритья | |
US11132547B2 (en) | Emotion recognition-based artwork recommendation method and device, medium, and electronic apparatus | |
CN106156799B (zh) | 智能机器人的物体识别方法及装置 | |
CN110069650A (zh) | 一种搜索方法和处理设备 | |
CN111508079A (zh) | 虚拟服饰试穿方法、装置、终端设备及存储介质 | |
CN109344395A (zh) | 一种数据处理方法、装置、服务器及存储介质 | |
US20150169942A1 (en) | Terminal configuration method and terminal | |
CN109918574A (zh) | 项目推荐方法、装置、设备及存储介质 | |
CN106204188A (zh) | 一种智能穿衣镜系统 | |
CN107317974B (zh) | 一种美妆拍照方法和装置 | |
CN111451032A (zh) | 淋浴花洒的调控方法、系统、终端设备及可读存储介质 | |
CN108853953A (zh) | 一种形体训练方法、装置、系统、计算机设备及存储介质 | |
WO2014126735A1 (en) | Real time object scanning using a mobile phone and cloud-based visual search engine | |
CN113650013B (zh) | 洗漱物品的调整方法、系统、装置、电子设备及存储介质 | |
CN110717312A (zh) | 一种文本标注方法及装置 | |
CN114022827A (zh) | 产线作业管理与视频处理方法、装置、设备及存储介质 | |
CN110929057A (zh) | 图像处理方法、装置和系统、存储介质及电子装置 | |
CN115481284A (zh) | 基于化妆箱的化妆方法、装置、存储介质及电子装置 | |
CN110390856B (zh) | 快递柜操作引导方法、装置、快递柜及存储介质 | |
CN110019864A (zh) | 一种身体信息分析装置及其推估美容用品剩余容量的方法 | |
CN115471918A (zh) | 手势识别的方法、装置、设备和存储介质 | |
CN109033078A (zh) | 语句类别识别方法及装置、存储介质、处理器 | |
CN111885218B (zh) | 用于管理智能设备的方法及装置、绑定设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |