CN111814695A - 一种清洁设备及音频信息播放方法和装置 - Google Patents
一种清洁设备及音频信息播放方法和装置 Download PDFInfo
- Publication number
- CN111814695A CN111814695A CN202010665089.9A CN202010665089A CN111814695A CN 111814695 A CN111814695 A CN 111814695A CN 202010665089 A CN202010665089 A CN 202010665089A CN 111814695 A CN111814695 A CN 111814695A
- Authority
- CN
- China
- Prior art keywords
- information
- playing
- family members
- image information
- audio information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004140 cleaning Methods 0.000 title claims abstract description 161
- 238000000034 method Methods 0.000 title claims abstract description 38
- 230000003993 interaction Effects 0.000 claims abstract description 16
- 238000004590 computer program Methods 0.000 claims description 11
- 238000010408 sweeping Methods 0.000 claims description 11
- 238000001514 detection method Methods 0.000 claims description 9
- 238000012790 confirmation Methods 0.000 claims description 6
- 230000006870 function Effects 0.000 description 4
- 238000013473 artificial intelligence Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 208000033748 Device issues Diseases 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- A—HUMAN NECESSITIES
- A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
- A47L—DOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
- A47L11/00—Machines for cleaning floors, carpets, furniture, walls, or wall coverings
- A47L11/24—Floor-sweeping machines, motor-driven
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
- G06F16/63—Querying
- G06F16/635—Filtering based on additional data, e.g. user or group profiles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9535—Search customisation based on user profiles and personalisation
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
本发明适用于智能电器技术领域,提供了一种清洁设备及音频信息播放方法和装置,其中,所述方法包括:获取清洁设备周围的图像信息;采用人脸识别算法识别所述图像信息中是否包含家庭成员的人脸信息:如果识别出所述图像信息中包含家庭成员的人脸信息,则根据对所述家庭成员预先配置的播放设置在所述清洁设备上播放音频信息。本发明通过获取清洁设备周围的图像信息进行人脸识别来判断是否存在家庭成员的人脸信息,然后在清洁设备上播放预先与家庭成员进行关联设置的音频信息,实现了清洁设备与家庭成员之间智能交互的用户体验。
Description
技术领域
本发明属于智能电器技术领域,尤其涉及一种清洁设备及音频信息播放方法和装置。
背景技术
现在家庭中,智能电器越来越普遍。例如,扫地机器人就是其中一款被现代家庭普遍使用的智能电器产品。扫地机器人虽然可以根据室内物体的位置关系来选择合理的清扫路径,以实现智能清扫的功能。不过,在实际使用中发现,扫地机器人往往是在室内无人的情况下执行清扫任务,而在室内有人时处于待机状态,这使得用户在家时扫地机器人处于闲置状态,无法与人进行交互或互动,从而显得功能单一,无法带给用户人机交互的体验。
发明内容
本发明实施例提供了一种清洁设备及音频信息播放方法和装置,以解决现有技术中扫地机器人与家庭成员之间缺乏交互性功能的问题。
在第一方面,本发明提供了一种通过清洁设备与家庭成员交互实现的音频信息播放方法,其包括:获取清洁设备周围的图像信息;采用人脸识别算法识别所述图像信息中是否包含家庭成员的人脸信息:如果识别出所述图像信息中包含家庭成员的人脸信息,则根据对所述家庭成员预先配置的播放设置在所述清洁设备上播放音频信息;如果识别出所述图像信息中不包含家庭成员的人脸信息,则返回获取清洁设备周围的图像信息。
优选地,获取清洁设备周围的图像信息,包括:基于清洁设备上的第一图像采集模块获取第一图像信息;所述采用人脸识别算法识别所述图像信息中是否包含家庭成员的人脸信息,包括:采用第一人脸识别算法识别所述第一图像信息中是否包含人像信息:如果识别所述第一图像信息中包含人像信息,则基于清洁设备上的第二图像采集模块获取第二图像信息;如果识别所述第一图像信息中不包含人像信息,则返回基于清洁设备上的第一图像采集模块获取第一图像信息。
优选地,在所述基于清洁设备上的第二图像采集模块获取第二图像信息之后,还包括:采用第二人脸识别算法识别所述第二图像信息中是否包含家庭成员的人脸信息;如果所述第二图像信息中包含家庭成员的人脸信息,则根据对所述家庭成员预先配置的播放设置在所述清洁设备上播放音频信息;否则,返回基于清洁设备上的第一图像采集模块获取第一图像信息。
优选地,所述根据对所述家庭成员预先配置的播放设置在所述清洁设备上播放音频信息,还具体包括:识别所述人脸信息中包含家庭成员的数量:如果识别到家庭成员的数量为一个时,则在所述清洁设备上根据对所述家庭成员的播放设置播放音频信息,并返回获取清洁设备周围的图像信息;如果识别到家庭成员的数量为大于等于两个时,则按对不同家庭成员的优先级设置播放音频信息。
优选地,所述如果识别到家庭成员的数量为一个时,则根据对所述家庭成员的播放设置在所述清洁设备上播放音频信息,并返回获取清洁设备周围的图像信息,包括:所述如果识别到家庭成员的数量为一个时,则判断当前播放信息对应的家庭成员与所识别到的家庭成员是否一致:如果当前播放信息对应的家庭成员与所识别到的家庭成员一致,则返回获取清洁设备周围的图像信息;否则,根据当前所识别到的家庭成员与在播音频信息对应家庭成员的优先级设置播放音频信息。
优选地,如果识别到家庭成员的数量为大于等于两个时,则按对不同家庭成员的优先级设置播放音频信息,还具体包括:如果识别到家庭成员的数量为大于等于两个时,则暂停播放并发送家庭成员播放设置请求的提示信息;如果在指定时间内收到播放设置确认的指令,则在所述清洁设备上根据所述指令播放家庭成员对应的音频信息;如果在指定时间内没有收到播放设置确认的指令,则随机播放所识别到家庭成员对应播放设置的音频信息,或者按对家庭成员预设的优先级播放优先级最高的家庭成员的音频信息。
优选地,在所述清洁设备上播放音频信息的方式包括以下至少一种:播放存储在本地的并与家庭成员关联设置的音频信息;播放通过网络获取的并与家庭成员关联设置的音频信息。
在第二方面,本发明提供了一种通过清洁设备与家庭成员交互实现的音频信息播放装置,其包括:
图像获取模块,被配置为获取清洁设备周围的图像信息;
图像识别模块,被配置为采用人脸识别算法识别所述图像信息中是否包含家庭成员的人脸信息:
播放模块,别配置为如果识别出所述图像信息中包含家庭成员的人脸信息,则根据对所述家庭成员预先配置的播放设置在所述清洁设备上播放音频信息;
循环检测模块,被配置为如果识别出所述图像信息中不包含家庭成员的人脸信息,则返回获取清洁设备周围的图像信息。
在第三方面,本发明提供了一种清洁设备,其包括:至少一个图像采集模组;至少一个扬声器;处理器,分别连接于所述扬声器和图像采集模组;存储器,存储有可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如第一方面中任一项所述方法的步骤。
优选地,所述清洁设备包括扫地机器人。
本发明实施例与现有技术相比存在的有益效果是:本发明通过获取清洁设备周围的图像信息进行人脸识别来判断是否存在家庭成员的人脸信息,然后在清洁设备上播放预先与家庭成员进行关联设置的音频信息,实现了清洁设备与家庭成员之间智能交互的用户体验。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的附图。
图1为可以应用本发明通过清洁设备与家庭成员交互实现的音频信息播放方法或通过清洁设备与家庭成员交互实现的音频信息播放装置的清洁设备的结构示意图;
图2为本发明实施例一提供的通过清洁设备与家庭成员交互实现的音频信息播放方法的流程图;
图3为本发明实施例二提供的图1所示步骤S21的具体流程图;
图4为本发明实施例三提供的图3所示步骤S321之后的流程图;
图5为本发明实施例四提供的图2所示步骤S221的具体流程图;
图6为本发明实施例四提供的图5所示步骤S521的具体流程图;
图7为本发明实施例四提供的图5所示步骤S522的具体流程图;
图8为本发明提供的通过清洁设备与家庭成员交互实现的音频信息播放装置的结构示意图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本发明实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本发明的描述。
在本申请实施例中,提供了通过清洁设备与家庭成员交互实现的音频信息播放方法和通过清洁设备与家庭成员交互实现的音频信息播放装置,在一种可能实现的方式中,所述通过清洁设备与家庭成员交互实现的音频信息播放方法或通过清洁设备与家庭成员交互实现的音频信息播放装置的一些实施例可以但不限于应用于如图1所示的清洁设备中。
如图1所示,所示清洁设备01中可以包括图像采集模组11、扬声器12、存储器14和处理器13,图像采集模组11和扬声器12分别连接于处理器13,存储器14中存储有可在处理器13上执行的计算机程序,所述处理器13执行所述计算机程序时可以实现本申请音频信息播放方法的必要步骤或音频信息播放装置的必要功能。
具体的,所述图像采集模组11可以为摄像头。例如,所述摄像头可以包括单目摄像头、双目摄像头等任一种模组结构。示例性的,所述单目摄像头或双目摄像头可以用于采集清洁设备周围的第一图像信息,此外,在一些集成有人工智能芯片的摄像头中,所述单目摄像头或双目摄像头还可以用于对采集到的第一图像信息进行人脸识别,例如,识别采集到的第一图像信息中是否包含人像信息。
具体的,所述图像采集模组11也可以为结构光模组,可以使用所述结构光模组采集清洁设备周围的第二图像信息,即所述结构光模组可以产生和接收结构光图像,并生成3D图像。一般的,结构光模组集成有人工智能芯片,该人工智能芯片包含对生成的3D图像进行图像识别的算法。例如,利用结构光模组可以直接采集清洁设备周围的第二图像信息,并识别第二图像信息中包含的人脸信息。
当然,在清洁设备上可以同时设置上述摄像头和结构光模组来分别采集不同质量的图像信息进行识别。另外,由于结构光模组在人工智能领域已经是非常成熟的现有产品,故这里不再展开介绍。
应该理解,图1所示清洁设备中的图像采集模组、扬声器、存储器和处理器的各自数量可以为一个,或者也可以为多个,本申请对此不做限制。
图2为本发明实施例一提供的通过清洁设备与家庭成员交互实现的音频信息播放方法的流程图,所述通过清洁设备与家庭成员交互实现的音频信息播放方法可以应用于图1所示的清洁设备中。一般地,所述清洁设备可以具体为扫地机器人。
如图2所示,本实施例提供的通过清洁设备与家庭成员交互实现的音频信息播放方法,至少包括以下步骤:
步骤S21,获取清洁设备周围的图像信息。
具体的,所示图像信息可以为图1所示应用场景中通过摄像头获取的第一图像信息,也可以是通过结构光模组获取的第二图像信息,或者是二者兼有。
步骤S22,采用人脸识别算法识别所述图像信息中是否包含家庭成员的人脸信息。
具体的,人脸识别算法可以快速识别确定清洁设备所采集的图像信息中是否包含有人脸,以及在有人脸时与人脸相关的特征。其中,与本申请相关的,在有人脸时与人脸相关的特征,包括识别出的人脸信息与预先构建或存储的家庭成员的人脸是否一致,即是否为家庭成员。
步骤S221,如果识别出所述图像信息中包含家庭成员的人脸信息,则根据对所述家庭成员预先配置的播放设置在所述清洁设备上播放音频信息。
结合上一步骤S22来说,所述清洁设备播放音频信息所依据的是图像信息中人脸信息是否为家庭成员的识别。具体来说,通过人脸识别算法将图像信息中的人脸信息与家庭成员的人脸数据进行比对即可确定是否存在家庭成员,其中,家庭成员的人脸数据可以是预先构建的。例如,可以通过在手机应用端注册家庭成员的人脸数据,然后将家庭成员的人脸数据发送给清洁设备用于人脸识别。或者,也可以是在应用服务器中注册家庭成员的人脸数据,在清洁设备进行人脸识别时,可以将采集的图像信息发送至应用服务器中进行人脸识别以确定是否存在家庭成员。
需要说明的是,对图像信息进行家庭成员识别所采用的人脸识别算法,其中,可能包括用于实现图像中是否包含已知家庭成员人脸数据的人脸识别算法,也肯能包括用于实现图像中是否包含人像的人脸识别算法,以及还可能包括识别图像信息中包含家庭成员数量的人脸识别算法,甚至一些其他相关的人脸识别算法。对于本领域的技术人员来说,这些人脸识别算法都可以采用现有人脸识别算法模块或模型来实现,故不作赘述。
具体的,对所述家庭成员预先配置的播放设置可以是将家庭成员的标签或人脸信息与音频信息进行映射关联,那么在确定家庭成员后即可播放对应的音频信息。
示例性一,该音频信息可以包括音乐文件、电子书文件。例如,可以为家庭成员分配一个文件夹,在该文件夹中存储有各种可播放的音频信息,当清洁设备识别到某一家庭成员时,即可播放该文件夹内的音频信息。
示例性二,该音频信息还可以包括网络广播、网络新闻、网络音乐、网络节目等音频信息。例如,可以通过手机应用端在服务器中注册家庭成员的信息,然后在手机应用端上为该家庭成员设置收藏/喜欢各种可播放音频信息,当清洁设备识别到某一注册家庭成员时,即可通过网络连接服务器来播放在手机应用端上设置收藏的音频信息。
步骤S222,如果识别出所述图像信息中不包含家庭成员的人脸信息,则返回获取清洁设备周围的图像信息。
本实施例通过获取清洁设备周围的图像信息进行人脸识别来判断是否存在家庭成员的人脸信息,然后在清洁设备上播放预先与家庭成员进行关联设置的音频信息,实现了清洁设备与家庭成员之间智能交互的用户体验。
图3为本发明实施例二提供的图1所示步骤S21的具体流程图,为了带给用户更好的使用体验,可以进一步提高清洁设备识别人脸信息的效率。
如图3所示,在图2中所示步骤S21,即获取清洁设备周围的图像信息,还可以具体包括:
步骤S31,基于清洁设备上的第一图像采集模组获取第一图像信息。
具体的,所述第一图像采集模组可以采用图1所示清洁设备中的摄像头,所述第一图像信息即为2D图像信息。这样不仅可以快速获取清洁设备周围的图像信息,同时也便于快速地识别出清洁设备周围是否存在人像。
再结合图3所示,基于上述步骤S31,在图2中步骤S22,则可以具体的包括:
步骤S32,采用第一人脸识别算法识别所述第一图像信息中是否包含人像信息。
步骤S321,如果识别所述第一图像信息中包含人像信息,则基于清洁设备上的第二图像采集模块获取第二图像信息。
具体的,第二图像采集模组可以为图1所示清洁设备中的结构光模组,对应的,所述第二图像信息则为结构光模组根据产生和接收结构光图像生成的3D图像。
不容易想到的是,本实施例让清洁设备分别采集第一图像信息和第二图像信息来识别周围是否存在人脸信息,其有益效果在于:如果通过一般摄像头来单一获取清洁设备周围的第一图像信息,所述第一图像信息中可能存在不完整或人脸图像质量不高的情况,那么人脸识别算法则可能无法准确识别其中的内容,然而识别图像信息中是否存在人像则对于图像的质量要求并不高,因此先通过第一图像信息来快速判断清洁设备周围是否存在人像,进而再通过第二图像信息来确定存在人像情况下清洁设备周围的人脸情况,从而可以提高清洁设备识别周围人脸信息的效率和准确率。
步骤S322,如果识别所述第一图像信息中不包含人像信息,则返回基于清洁设备上的第一图像采集模块获取第一图像信息。
图4为本发明实施例三提供的图3所示步骤S321之后的流程图,结合图4所示,在图3中步骤S321之后,还可以具体包括下列步骤:
步骤S41,采用第二人脸识别算法识别所述第二图像信息中是否包含家庭成员的人脸信息。
基于上述步骤S41,则在图2中所述步骤S221和222,则可以具体包括:
步骤S421,如果识别出所述第二图像信息中包含家庭成员的人脸信息,则根据对所述家庭成员预先配置的播放设置在所述清洁设备上播放音频信息;
步骤S422,如果识别出所述第二图像信息中不包含家庭成员的人脸信息,则返回基于清洁设备上的第一图像采集模块获取第一图像信息。
应该理解,根据上述人脸识别算法的说明可知,本实施例中的第二人脸识别算法与上述第一人脸识别算法均可采用现有算法或现有技术手段来实现。例如,在一些现有摄像头模组和结构光模组等产品中,本身就集成有人脸识别算法或可以支持人脸识算法定制,本申请对于现有技术的贡献不在于对人脸识别算法的改进,故不作赘述。
图5为本发明实施例四提供的图2所示步骤S221的具体流程图,为了带给用户更好的使用体验,还可以进一步优化清洁设备周围存在不同人脸信息的处置方案。
结合图5所示,上述图2中所示步骤S221中,即所述根据对所述家庭成员预先配置的播放设置在所述清洁设备上播放音频信息,还可以具体包括:
步骤S51,识别所述人脸信息中包含家庭成员的数量。
在识别到含有家庭成员的人脸信息之后,增设识别不同人脸信息的数量的步骤,可以让清洁设备在不止一个家庭成员人脸信息情景下,做出更为符合用户使用体验的播放选择。
步骤S521,如果识别到家庭成员的数量为一个时,则根据对所述家庭成员的播放设置在所述清洁设备上播放音频信息,并返回获取清洁设备周围的图像信息。
在识别到家庭成员只有一个的场景中,即是清洁设备周围只有一个家庭成员,此时并不一定代表家里仅一个家庭成员,还可能存在其他家庭成员在清洁设备无法采集的位置,所以在清洁设备播放音频信息的同时,还可以让清洁设备继续保持周围图像信息的获取与识别,以便在后续识别到存在不同家庭成员时做出更为合理的播放选择,从而给用户带来更好的使用体验。
步骤S522,如果识别到家庭成员的数量为大于等于两个(即不止一个)时,则按对不同家庭成员的优先级设置播放音频信息。
在家庭成员不止一个的场景中,即此时清洁设备周围存在至少两个家庭成员,为了避免出现众口难调的不好体验,本实施例让清洁设备根据优先级设置来播放相关的感兴趣信息,并不再继续识别清洁设备周围图像信息。
图6为本发明实施例四提供的图5所示步骤S521的具体流程图,本实施例可以适应更为复杂多变的场景,以提升用户的使用体验。
如图6所示,所述步骤S521,可以具体包括:
步骤S61,所述如果识别到家庭成员的数量为一个时,则判断当前播放信息对应的家庭成员与所识别到的家庭成员是否一致。
由于家庭成员在家中可能是不固定的,存在来回走动的情况,为此存在在不同时间识别到的家庭成员不是同一个人的情况,本实施例通过在识别到的只有一个家庭成员时,将其与当前播放设置对应的家庭成员进行比对即可克服这一场景下的问题。
步骤S621,如果当前播放信息对应的家庭成员与所识别到的家庭成员一致,则返回获取清洁设备周围的图像信息。
在清洁设备在循环检测中识别到周围是同一个家庭成员时,则继续播放并保持检测,从而不影响用户的使用体验。
步骤S622,如果当前播放信息对应的家庭成员与所识别到的家庭成员不一致,则根据当前所识别到的家庭成员与在播音频信息对应家庭成员的优先级设置播放音频信息。
同样,在清洁设备检测到周围存在两个家庭成员时,选择播放其一家庭成员的播放设置播放音频信息并停止家庭成员识别,这样可以避免在多个家庭成员情况下播放内容不一定让所有人喜欢的问题。
图7为本发明实施例四提供的图5所示步骤S522的具体流程图,本实施例可以适应更为复杂多变的场景,以提升用户的使用体验。
如图7所示,上述步骤S522,还可以具体包括:
步骤S71,如果识别到家庭成员的数量为大于等于两个时,则暂停播放并发送家庭成员播放设置请求的提示信息。
具体的,当清洁设备周围家庭成员不唯一时,播放哪位的设置较为合适,最理想的当然是由现成成员确认。示例性的,在本实施例情景下,可以让清洁设备可以发出“需要我为哪一位家人播放音频信息”的语音提示;或者,向与清洁设备网络连接的手机应用终端发送确定的请求。
步骤S721,如果在指定时间内收到播放设置确认的指令,则在所述清洁设备上根据所述指令播放家庭成员对应的音频信息。
结合上述示例,在清洁设备发出语音提示的情况下,家庭成员可以通过语音指令来回应,即只需说出某一注册的家庭成员的名字,清洁设备通过接收该语音指令来实现播放选择。另外,在手机应用终端连接清洁设备的情况下,也可以通过手机应用终端向清洁设备发送确定指令即可实现播放选择。
步骤S722,如果在指定时间内没有收到播放设置确认的指令,则随机播放所识别到家庭成员对应播放设置的音频信息,或者按对家庭成员预设的优先级播放优先级最高的家庭成员的音频信息。
与上述示例相反,清洁设备在没有收到指令的情况下,则可按优先级设置进行播放选择,或者也可以进行随机播放选择。在具体实施中,无指令回应时,具体如何实现播放选择本发明并不予以限制。
需要说明的是,在清洁设备周围识别到多个家庭成员时,无论是否有指令回应,都不再继续采集图像来检测识别。
进一步的,在所述清洁设备上播放音频信息的方式包括以下至少一种:
播放方式一,播放存储清洁设备在本地的并与家庭成员关联设置的音频信息;
播放方式二,播放清洁设备通过网络获取的并与家庭成员关联设置的音频信息。
图8为本发明提供的通过清洁设备与家庭成员交互实现的音频信息播放装置的结构示意图,在实际应用中,可以将本发明通过清洁设备与家庭成员交互实现的音频信息播放装置安装应用于图1所示的清洁设备中。
如图8所示,所述音频信息播放装置08,至少包括图像获取模块81、图像识别模块82、播放模块83和循环检测模块84,图像获取模块81被配置为获取清洁设备周围的图像信息;图像识别模块82被配置为采用人脸识别算法识别所述图像信息中是否包含家庭成员的人脸信息:播放模块83被配置为如果识别出所述图像信息中包含家庭成员的人脸信息,则根据对所述家庭成员预先配置的播放设置在所述清洁设备上播放音频信息;循环检测模块84被配置为如果识别出所述图像信息中不包含家庭成员的人脸信息,则返回获取清洁设备周围的图像信息。
在一实施例中,所述图像获取模块具体包括:第一图像获取单元,被配置为基于清洁设备上的第一图像采集模组获取第一图像信息。
基于所述第一图像获取单元,则所述图像识别模块可以具体包括:
第一图像识别单元,被配置为采用第一人脸识别算法识别所述第一图像信息中是否包含人像信息;
第二图像获取单元,被配置为如果识别所述第一图像信息中包含人像信息,则基于清洁设备上的第二图像采集模块获取第二图像信息;
第一循环检测单元,被配置为如果识别所述第一图像信息中不包含人像信息,则返回基于清洁设备上的第一图像采集模块获取第一图像信息。
在上述第一图像识别单元的实施例的基础上,本实施例还包括:
第二图像识别单元,被配置为采用第二人脸识别算法识别所述第二图像信息中是否包含家庭成员的人脸信息。
由此,则上述播放模块可以具体包括:第一音频播放单元,被配置为如果识别出所述第二图像信息中包含家庭成员的人脸信息,则根据对所述家庭成员预先配置的播放设置在所述清洁设备上播放音频信息。
同时,上述循环检测模块可以具体包括:第二循环检测单元,被配置为如果识别出所述第二图像信息中不包含家庭成员的人脸信息,则返回基于清洁设备上的第一图像采集模块获取第一图像信息。
在一实施例中,所述播放模块还可以具体包括:
成员数量识别单元,被配置为识别所述人脸信息中包含家庭成员的数量;
第二音频播放单元,被配置为如果识别到家庭成员的数量为一个时,则根据对所述家庭成员的播放设置在所述清洁设备上播放音频信息,并返回获取清洁设备周围的图像信息;
第三音频播放单元,被配置为如果识别到家庭成员的数量为大于等于两个时,则按对不同家庭成员的优先级设置播放音频信息。
在一实施例中,所述播放模块还可以包括:
成员一致判断单元,被配置为如果识别到家庭成员的数量为一个时,则判断当前播放信息对应的家庭成员与所识别到的家庭成员是否一致;
第三循环检测单元,被配置为如果当前播放信息对应的家庭成员与所识别到的家庭成员一致,则返回获取清洁设备周围的图像信息;
第四音频播放单元,被配置为如果当前播放信息对应的家庭成员与所识别到的家庭成员不一致,则根据当前所识别到的家庭成员与在播音频信息对应家庭成员的优先级设置播放音频信息。
在一实施例中,所述播放模块还可以包括:
播放提示单元,被配置为如果识别到家庭成员的数量为大于等于两个时,则暂停播放并发送家庭成员播放设置请求的提示信息;
第五音频播放单元,被配置为如果在指定时间内收到播放设置确认的指令,则在所述清洁设备上根据所述指令播放家庭成员对应的音频信息;
第六音频播放单元,被配置为如果在指定时间内没有收到播放设置确认的指令,则随机播放所识别到家庭成员对应播放设置的音频信息,或者按对家庭成员预设的优先级播放优先级最高的家庭成员的音频信息。
在一实施例中,所述播放模块还可以包括:
本地播放单元,被配置为播放存储在本地的并与家庭成员关联设置的音频信息;或/和,网络播放单元,被配置为播放通过网络获取的并与家庭成员关联设置的音频信息。
由于本实施例与图2所示实施例为相同的发明构思,故二者具体相同的特定技术特征和相同的技术效果,为此这里对通过清洁设备与家庭成员交互实现的音频信息播放装置不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
在本发明所提供的实施例中,应该理解到,所揭露的装置/终端设备和方法,可以通过其它的方式实现。例如,以上所描述的装置/终端设备实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。
以上所述实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。
Claims (10)
1.一种通过清洁设备与家庭成员交互实现的音频信息播放方法,其特征在于,包括:
获取清洁设备周围的图像信息;
采用人脸识别算法识别所述图像信息中是否包含家庭成员的人脸信息:
如果识别出所述图像信息中包含家庭成员的人脸信息,则根据对所述家庭成员预先配置的播放设置在所述清洁设备上播放音频信息;
如果识别出所述图像信息中不包含家庭成员的人脸信息,则返回获取清洁设备周围的图像信息。
2.根据权利要求1所述的通过清洁设备与家庭成员交互实现的音频信息播放方法,其特征在于,获取清洁设备周围的图像信息,包括:
基于清洁设备上的第一图像采集模块获取第一图像信息;
所述采用人脸识别算法识别所述图像信息中是否包含家庭成员的人脸信息,包括:
采用第一人脸识别算法识别所述第一图像信息中是否包含人像信息:
如果识别所述第一图像信息中包含人像信息,则基于清洁设备上的第二图像采集模块获取第二图像信息;
如果识别所述第一图像信息中不包含人像信息,则返回基于清洁设备上的第一图像采集模块获取第一图像信息。
3.根据权利要求2所述的通过清洁设备与家庭成员交互实现的音频信息播放方法,其特征在于,在所述基于清洁设备上的第二图像采集模块获取第二图像信息之后,还包括:
采用第二人脸识别算法识别所述第二图像信息中是否包含家庭成员的人脸信息;
如果所述第二图像信息中包含家庭成员的人脸信息,则根据对所述家庭成员预先配置的播放设置在所述清洁设备上播放音频信息;
否则,返回基于清洁设备上的第一图像采集模块获取第一图像信息。
4.根据权利要求1所述的通过清洁设备与家庭成员交互实现的音频信息播放方法,其特征在于,所述根据对所述家庭成员预先配置的播放设置在所述清洁设备上播放音频信息,还具体包括:
识别所述人脸信息中包含家庭成员的数量:
如果识别到家庭成员的数量为一个时,则在所述清洁设备上根据对所述家庭成员的播放设置播放音频信息,并返回获取清洁设备周围的图像信息;
如果识别到家庭成员的数量为大于等于两个时,则按对不同家庭成员的优先级设置播放音频信息。
5.根据权利要求4所述的通过清洁设备与家庭成员交互实现的音频信息播放方法,其特征在于,所述如果识别到家庭成员的数量为一个时,则根据对所述家庭成员的播放设置在所述清洁设备上播放音频信息,并返回获取清洁设备周围的图像信息,包括:
所述如果识别到家庭成员的数量为一个时,则判断当前播放信息对应的家庭成员与所识别到的家庭成员是否一致:
如果当前播放信息对应的家庭成员与所识别到的家庭成员一致,则返回获取清洁设备周围的图像信息;
否则,根据当前所识别到的家庭成员与在播音频信息对应家庭成员的优先级设置播放音频信息。
6.根据权利要求4所述的通过清洁设备与家庭成员交互实现的音频信息播放方法,其特征在于,如果识别到家庭成员的数量为大于等于两个时,则按对不同家庭成员的优先级设置播放音频信息,还具体包括:
如果识别到家庭成员的数量为大于等于两个时,则暂停播放并发送家庭成员播放设置请求的提示信息;
如果在指定时间内收到播放设置确认的指令,则在所述清洁设备上根据所述指令播放家庭成员对应的音频信息;
如果在指定时间内没有收到播放设置确认的指令,则随机播放所识别到家庭成员对应播放设置的音频信息,或者按对家庭成员预设的优先级播放优先级最高的家庭成员的音频信息。
7.根据权利要求1-6任一项所述的通过清洁设备与家庭成员交互实现的音频信息播放方法,其特征在于,在所述清洁设备上播放音频信息的方式包括以下至少一种:
播放存储在本地的并与家庭成员关联设置的音频信息;
播放通过网络获取的并与家庭成员关联设置的音频信息。
8.一种通过清洁设备与家庭成员交互实现的音频信息播放装置,其特征在于,包括:
图像获取模块,被配置为获取清洁设备周围的图像信息;
图像识别模块,被配置为采用人脸识别算法识别所述图像信息中是否包含家庭成员的人脸信息:
播放模块,别配置为如果识别出所述图像信息中包含家庭成员的人脸信息,则根据对所述家庭成员预先配置的播放设置在所述清洁设备上播放音频信息;
循环检测模块,被配置为如果识别出所述图像信息中不包含家庭成员的人脸信息,则返回获取清洁设备周围的图像信息。
9.一种清洁设备,其特征在于,包括:
至少一个图像采集模组;
至少一个扬声器;
处理器,分别连接于所述扬声器和图像采集模组;
存储器,存储有可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述方法的步骤。
10.根据权利要求9所述的清洁设备,其特征在于,所述清洁设备包括扫地机器人。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010665089.9A CN111814695A (zh) | 2020-07-10 | 2020-07-10 | 一种清洁设备及音频信息播放方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010665089.9A CN111814695A (zh) | 2020-07-10 | 2020-07-10 | 一种清洁设备及音频信息播放方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111814695A true CN111814695A (zh) | 2020-10-23 |
Family
ID=72842273
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010665089.9A Pending CN111814695A (zh) | 2020-07-10 | 2020-07-10 | 一种清洁设备及音频信息播放方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111814695A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114500590A (zh) * | 2021-12-23 | 2022-05-13 | 珠海格力电器股份有限公司 | 智能设备语音播报方法、装置、计算机设备和存储介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102529978A (zh) * | 2010-12-31 | 2012-07-04 | 华晶科技股份有限公司 | 车用设备控制系统及其方法 |
US20140324271A1 (en) * | 2013-04-26 | 2014-10-30 | Samsung Electronics Co., Ltd. | Cleaning robot, home monitoring apparatus, and method for controlling the cleaning robot |
CN104714411A (zh) * | 2013-12-13 | 2015-06-17 | 青岛海尔机器人有限公司 | 一种智能家居机器人 |
CN109285567A (zh) * | 2018-09-10 | 2019-01-29 | 深圳市宇墨科技有限公司 | 卫生间音乐播放控制方法及卫生间管理系统 |
CN109979495A (zh) * | 2019-03-08 | 2019-07-05 | 佛山市云米电器科技有限公司 | 基于人脸识别的音频进度智能跟随播放方法及系统 |
CN110244572A (zh) * | 2019-06-21 | 2019-09-17 | 珠海格力智能装备有限公司 | 机器人及其控制方法、智能家居控制系统 |
CN110738078A (zh) * | 2018-07-19 | 2020-01-31 | 青岛海信移动通信技术股份有限公司 | 一种人脸识别方法及终端设备 |
-
2020
- 2020-07-10 CN CN202010665089.9A patent/CN111814695A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102529978A (zh) * | 2010-12-31 | 2012-07-04 | 华晶科技股份有限公司 | 车用设备控制系统及其方法 |
US20140324271A1 (en) * | 2013-04-26 | 2014-10-30 | Samsung Electronics Co., Ltd. | Cleaning robot, home monitoring apparatus, and method for controlling the cleaning robot |
CN104714411A (zh) * | 2013-12-13 | 2015-06-17 | 青岛海尔机器人有限公司 | 一种智能家居机器人 |
CN110738078A (zh) * | 2018-07-19 | 2020-01-31 | 青岛海信移动通信技术股份有限公司 | 一种人脸识别方法及终端设备 |
CN109285567A (zh) * | 2018-09-10 | 2019-01-29 | 深圳市宇墨科技有限公司 | 卫生间音乐播放控制方法及卫生间管理系统 |
CN109979495A (zh) * | 2019-03-08 | 2019-07-05 | 佛山市云米电器科技有限公司 | 基于人脸识别的音频进度智能跟随播放方法及系统 |
CN110244572A (zh) * | 2019-06-21 | 2019-09-17 | 珠海格力智能装备有限公司 | 机器人及其控制方法、智能家居控制系统 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114500590A (zh) * | 2021-12-23 | 2022-05-13 | 珠海格力电器股份有限公司 | 智能设备语音播报方法、装置、计算机设备和存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109377987B (zh) | 智能语音设备间的交互方法、装置、设备及存储介质 | |
US10123066B2 (en) | Media playback method, apparatus, and system | |
KR101761039B1 (ko) | 다중 채널 오디오 데이터의 비디오 분석 지원형 생성 | |
CN105847099A (zh) | 基于人工智能的物联网实现系统和方法 | |
CN110087131A (zh) | 电视系统中的电视控制方法及主控终端 | |
CN111802963B (zh) | 一种清洁设备及感兴趣信息播放方法和装置 | |
US11475664B2 (en) | Determining a control mechanism based on a surrounding of a remove controllable device | |
CN109388238A (zh) | 一种电子设备的控制方法及装置 | |
CN106997506A (zh) | 用于跨设备营销的同一空间设备的分组方法及其系统 | |
CN110839175A (zh) | 一种基于智能电视的交互方法、存储介质以及智能电视 | |
CN111814695A (zh) | 一种清洁设备及音频信息播放方法和装置 | |
JP6625247B2 (ja) | 分散協調システム、機器行動監視装置及び家電機器 | |
CN110361978B (zh) | 基于物联网操作系统的智能设备控制方法和装置及系统 | |
CN108769799B (zh) | 一种信息处理方法及电子设备 | |
CN111882711A (zh) | 一种门锁控制方法及系统,存储介质、电子装置 | |
CN113537193B (zh) | 光照估计方法、光照估计装置、存储介质与电子设备 | |
CN115473755A (zh) | 基于数字孪生的智能设备的控制方法、装置 | |
CN112597910B (zh) | 利用扫地机器人对人物活动进行监控的方法和装置 | |
US11748017B2 (en) | Inter-device data migration method and device | |
CN111772536B (zh) | 一种清洁设备及应用于清洁设备的监控方法和装置 | |
CN112447174B (zh) | 服务提供方法、装置和系统、计算设备和存储介质 | |
CN109473096A (zh) | 一种智能语音设备及其控制方法 | |
JP2011166572A (ja) | 番組嗜好推定装置、画像視聴システム、番組視聴確認方法、及びプログラム | |
CN111210819B (zh) | 信息处理方法、装置和电子设备 | |
CN113873325B (zh) | 声音处理方法、装置、设备和计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20201023 |