CN107743139A - 节点控制方法及相关产品 - Google Patents

节点控制方法及相关产品 Download PDF

Info

Publication number
CN107743139A
CN107743139A CN201710797093.9A CN201710797093A CN107743139A CN 107743139 A CN107743139 A CN 107743139A CN 201710797093 A CN201710797093 A CN 201710797093A CN 107743139 A CN107743139 A CN 107743139A
Authority
CN
China
Prior art keywords
node
video processing
facial image
gateway
incoming call
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710797093.9A
Other languages
English (en)
Inventor
杜光东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Shenglu IoT Communication Technology Co Ltd
Original Assignee
Shenzhen Shenglu IoT Communication Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Shenglu IoT Communication Technology Co Ltd filed Critical Shenzhen Shenglu IoT Communication Technology Co Ltd
Priority to CN201710797093.9A priority Critical patent/CN107743139A/zh
Publication of CN107743139A publication Critical patent/CN107743139A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2203/00—Aspects of automatic or semi-automatic exchanges
    • H04M2203/20—Aspects of automatic or semi-automatic exchanges related to features of supplementary services
    • H04M2203/2038—Call context notifications

Landscapes

  • Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Medical Informatics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computing Systems (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Image Analysis (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明实施例提供了一种节点控制方法及相关产品，物联网系统包括网关，以及与网关连接的语音处理节点和视频处理节点，视频处理节点还连接多个摄像头，语音处理节点还连接多个麦克风，其中，语音处理节点，用于在移动终端来电后，监听来电的来电铃声，将来电铃声发送给网关；网关，用于确定与来电铃声对应的接听者，并调取接听者的人脸模板，将人脸模板发送给视频处理节点；视频处理节点用于通过多个摄像头获取视频信息，并对视频信息进行解析，得到X个人脸图像，将X个人脸图像与人脸模板进行匹配，得到目标人脸图像，通知目标人脸图像对应的用户接听来电。采用本发明实施例，可以在移动终端不在用户身边的情况下，及时接听电话。

Description

节点控制方法及相关产品
技术领域
本发明涉及互联网技术领域，具体涉及一种节点控制方法及相关产品。
背景技术
随着信息技术的快速发展，物联网越来越深入用户的生活。物联网是新一代信息技术的重要组成部分，也是"信息化"时代的重要发展阶段。其英文名称是：Internet ofthings(IoT)。顾名思义，物联网就是物物相连的互联网。这有两层意思:其一，物联网的核心和基础仍然是互联网，是在互联网基础上的延伸和扩展的网络；其二，其用户端延伸和扩展到了任何物品与物品之间，进行信息交换和通信，也就是物物相息。物联网通过智能感知、识别技术与普适计算等通信感知技术，广泛应用于网络的融合中，也因此被称为继计算机、互联网之后世界信息产业发展的第三次浪潮。物联网是互联网的应用拓展，与其说物联网是网络，不如说物联网是业务和应用。因此，应用创新是物联网发展的核心，以用户体验为核心的创新2.0是物联网发展的灵魂。
生活中，移动终端日趋成为用户必不可少的一部分，较多情况下，移动终端不在身边的话，则无法及时接听电话。
发明内容
本发明实施例提供了一种节点控制方法及相关产品，可以在移动终端不在用户身边的情况下，及时接听电话。
本发明实施例第一方面提供了一种物联网系统，所述物联网系统包括网关，语音处理节点和视频处理节点，所述语音处理节点、所述视频处理节点均与所述网关连接，所述视频处理节点还连接多个摄像头，所述语音处理节点还连接多个麦克风，其中，
所述语音处理节点，用于在移动终端来电后，监听所述来电的来电铃声，将所述来电铃声发送给所述网关；
所述网关，用于确定与所述来电铃声对应的接听者，并调取所述接听者的人脸模板，将所述人脸模板发送给所述视频处理节点；
所述视频处理节点，用于通过所述多个摄像头获取视频信息，并对所述视频信息进行解析，得到X个人脸图像，将所述X个人脸图像与所述人脸模板进行匹配，得到目标人脸图像，通知所述目标人脸图像对应的用户接听来电。
本发明实施例第二方面提供了一种来电处理方法，应用于物联网系统，所述物联网系统包括网关，语音处理节点和视频处理节点，所述语音处理节点、所述视频处理节点均与所述网关连接，所述视频处理节点还连接多个摄像头，所述语音处理节点还连接多个麦克风，包括：
所述语音处理节点在移动终端来电后，监听所述来电的来电铃声，将所述来电铃声发送给所述网关；
所述网关确定与所述来电铃声对应的接听者，并调取所述接听者的人脸模板，将所述人脸模板发送给所述视频处理节点；
所述视频处理节点通过所述多个摄像头获取视频信息，并对所述视频信息进行解析，得到X个人脸图像，将所述X个人脸图像与所述人脸模板进行匹配，得到目标人脸图像，通知所述目标人脸图像对应的用户接听来电。
本发明实施例第三方面提供了一种来电处理装置，应用于物联网系统，所述物联网系统包括网关，语音处理节点和视频处理节点，所述语音处理节点、所述视频处理节点均与所述网关连接，所述视频处理节点还连接多个摄像头，所述语音处理节点还连接多个麦克风，所述来电处理装置包括：语音处理单元，控制单元，来电提示单元，其中，
所述语音处理单元，用于控制所述语音处理节点在移动终端来电后，监听所述来电的来电铃声，将所述来电铃声发送给所述网关；
所述控制单元，用于控制所述网关确定与所述来电铃声对应的接听者，并调取所述接听者的人脸模板，将所述人脸模板发送给所述视频处理节点；
所述来电提示单元，用于控制所述视频处理节点，用于通过所述多个摄像头获取视频信息，并对所述视频信息进行解析，得到X个人脸图像，将所述X个人脸图像与所述人脸模板进行匹配，得到目标人脸图像，通知所述目标人脸图像对应的用户接听来电。
第四方面，本发明实施例提供了一种计算机可读存储介质，其中，所述计算机可读存储介质用于存储计算机程序，其中，所述计算机程序使得计算机执行如本发明实施例第二方面中所描述的部分或全部步骤的指令。
第五方面，本发明实施例提供了一种计算机程序产品，其中，所述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，所述计算机程序可操作来使计算机执行如本发明实施例第二方面中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
实施本发明实施例，具有如下有益效果：
可以看出，本发明实施例应用于物联网系统，所述物联网系统包括网关，语音处理节点和视频处理节点，所述语音处理节点、所述视频处理节点均与所述网关连接，所述视频处理节点还连接多个摄像头，所述语音处理节点还连接多个麦克风，包括：所述语音处理节点在移动终端来电后，监听所述来电的来电铃声，将所述来电铃声发送给所述网关；所述网关确定与所述来电铃声对应的接听者，并调取所述接听者的人脸模板，将所述人脸模板发送给所述视频处理节点；所述视频处理节点通过所述多个摄像头获取视频信息，并对所述视频信息进行解析，得到X个人脸图像，将所述X个人脸图像与所述人脸模板进行匹配，得到目标人脸图像，通知所述目标人脸图像对应的用户接听来电。如此，可以在移动终端不在用户身边的时候，及时提醒用户。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的来电处理系统的网络架构图；
图1-1是本发明实施例提供的来电处理系统的又一网络架构图；
图2本发明实施例提供的一种来电处理方法的实施例流程示意图；
图3本发明实施例提供的一种来电处理方法的实施例流程示意图；
图4a是本发明实施例提供的来电处理装置的结构示意图；
图4b是本发明实施例提供的来电处理装置的又一结构示意图；
图5是本发明实施例提供的一种网关的实施例结构示意图；
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明的说明书和权利要求书及所述附图中的术语“第一”、“第二”、“第三”和“第四”等是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本发明的至少一个实施例中。在说明书中的各个位置展示该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。
本发明实施例所描述的用户可理解为用户本人，或者，用户终端。用户终端可为以下至少一种：智能手机(如Android手机、iOS手机、Windows Phone手机等)、平板电脑、掌上电脑、笔记本电脑、移动互联网设备(MID，Mobile Internet Devices)或穿戴式设备等，当然其也可以包含带有联网功能的其他设备，例如智能电视、智能空调、智能水壶、智能灯、智能开关或一些物联网的智能设备。上述终端仅是举例，而非穷举，包含但不限于上述终端。本发明实施例中的语音处理节点可以理解为专门对语音进行控制的节点，或者，具有音频处理以及控制功能的节点，视频处理节点可以理解为专门处理视频的节点，或者，具有视频处理功能的节点。本发明实施例中将不同节点的功能进行限定，让每一节点均有自身的处理优势，在一定程度上可以提升节点处理能力。
为更好的理解本发明技术方案，下面先对本发明实施例提供的来电处理方法所适用的物联网系统的网络架构进行简要介绍。如图1所示，图1为该网络架构图，所述物联网系统包括网关，语音处理节点和视频处理节点，所述语音处理节点、所述视频处理节点均与所述网关连接，所述视频处理节点还连接多个摄像头，所述语音处理节点还连接多个麦克风，其中，所述语音处理节点，用于在移动终端来电后，监听所述来电的来电铃声，将所述来电铃声发送给所述网关；所述网关，用于确定与所述来电铃声对应的接听者，并调取所述接听者的人脸模板，将所述人脸模板发送给所述视频处理节点；所述视频处理节点，用于通过所述多个摄像头获取视频信息，并对所述视频信息进行解析，得到X个人脸图像，将所述X个人脸图像与所述人脸模板进行匹配，得到目标人脸图像，通知所述目标人脸图像对应的用户接听来电。
可选地，所述网关还用于：
判断所述来电铃声是否存在于预设铃声库，若存在，则执行所述确定与所述来电铃声对应的接听者。
可选地，所述视频处理节点还用于：获取所述接听者的当前位置，在所述通知所述目标人脸图像对应的用户接听来电方面之后，所述视频处理节点还具体用于：
在所述目标人脸图像对应的用户到达所述移动终端的位置时，对所述用户进行人脸识别，在所述人脸识别通过后，接听所述来电。
可选地，在获取所述接听者的当前位置方面，所述视频处理节点具体用于：
确定所述X张人脸图像对应背景信息；
在室内地图中查找与所述背景信息对应的位置，并将所述位置作为所述当前位置。
可选地，在所述确定所述P张人脸图像对应背景信息方面，所述视频处理节点具体用于：
从所述X张人脸图像中获取与当前时间最近的Y张人脸图像，所述Y为小于或等于所述X的正整数；
对所述Y张人脸图像进行图像质量评价，得到所述Y个图像质量评价值；
从所述Y个图像质量评价值中选取最大的图像质量评价值，并获取所述最大的图像质量评价值对应的目标人脸图像；
对所述目标人脸图像进行图像分割，得到所述背景信息。
可选地，如图1-1，图1-1为图1所描述的物联网系统的一种变型结构，所述系统还包括：用户信息接收节点，该用户信息接收节点与网关连接，用于获取用户信息，例如，接收用户发送的指令，又例如，获取用户的心率，所述用户信息接收节点，用于获取所述用户的工作状态，并根据所述工作状态确定提示参数；
在所述通知所述目标人脸图像对应的用户接听来电方面，所述视频处理节点具体用于：
根据所述提示参数通知所述目标人脸图像对应的用户接听来电。
可以看出，本发明实施例应用于物联网系统，所述物联网系统包括网关，语音处理节点和视频处理节点，所述语音处理节点、所述视频处理节点均与所述网关连接，所述视频处理节点还连接多个摄像头，所述语音处理节点还连接多个麦克风，包括：所述语音处理节点在移动终端来电后，监听所述来电的来电铃声，将所述来电铃声发送给所述网关；所述网关确定与所述来电铃声对应的接听者，并调取所述接听者的人脸模板，将所述人脸模板发送给所述视频处理节点；所述视频处理节点通过所述多个摄像头获取视频信息，并对所述视频信息进行解析，得到X个人脸图像，将所述X个人脸图像与所述人脸模板进行匹配，得到目标人脸图像，通知所述目标人脸图像对应的用户接听来电。如此，可以在移动终端不在用户身边的时候，及时提醒用户。
基于图1以及图1-1所描述的网络架构，请参阅图2，为本发明实施例提供的一种来电处理方法的实施例流程示意图。本实施例中所描述的来电处理方法，应用于物联网系统，所述物联网系统包括网关，语音处理节点和视频处理节点，所述语音处理节点、所述视频处理节点均与所述网关连接，所述视频处理节点还连接多个摄像头，所述语音处理节点还连接多个麦克风，其中，包括以下步骤：
201、所述语音处理节点在移动终端来电后，监听所述来电的来电铃声，将所述来电铃声发送给所述网关。
其中，语音处理节点可在移动终端来电之后，可监听该来电的来电铃声，可以对该来电铃声进行语音识别，以判断该来电铃声具体是啥。
可选地，在上述步骤201中，可以按照如下方式执行：
判断所述来电铃声是否存在于预设铃声库，若存在，则执行所述确定与所述来电铃声对应的接听者。
其中，预设铃声库中可以预先存储多个铃声，当来电铃声存在于预设铃声库中，不同铃声可以对应不同的接听者。
本发明实施例所涉及到的移动终端可以包括各种具有无线通信功能的手持设备、车载设备、可穿戴设备、计算设备或连接到无线调制解调器的其他处理设备，以及各种形式的用户设备(User Equipment，UE)，移动台(Mobile Station，MS)，终端设备(terminaldevice)等等。为方便描述，上面提到的设备统称为移动终端。
202、所述网关确定与所述来电铃声对应的接听者，并调取所述接听者的人脸模板，将所述人脸模板发送给所述视频处理节点。
其中，网关可以确定来电铃声对应的接听者，并调取与该接听者对应的人脸模板，当然，网关的存储器中预先存储了与来电铃声绑定的人脸模板，不同的来电铃声可以对应不同的人脸模板。进而，可以将人脸模板发送给视频处理节点。
203、所述视频处理节点通过所述多个摄像头获取视频信息，并对所述视频信息进行解析，得到X个人脸图像，将所述X个人脸图像与所述人脸模板进行匹配，得到目标人脸图像，通知所述目标人脸图像对应的用户接听来电。
其中，视频处理节点可以通过多个摄像头获取视频信息，并对该视频信息进行解析，得到一帧一帧图像，并进一步对其进行人脸识别，得到X个人脸图像，进而，将该X个人脸图像与人脸模板进行匹配，若出目标人脸图像与人脸模板匹配，则通知目标人脸图像对应的用户接听来电。例如，目标人脸图像对应的用户有穿戴设备，则通过穿戴设备加以提醒。
可选地，上述通知所述目标人脸图像对应的用户接听来电，包括：
向语音处理单元发送所述目标人脸图像对应的用户对应的位置信息，由所述语音处理单元控制与所述位置信息最近的麦克风通知所述目标人脸图像对应的用户。
其中，采用上述方式，可以通过麦克风提示用户。
可选地，所述视频处理节点还用于：获取所述接听者的当前位置，在所述通知所述目标人脸图像对应的用户接听来电方面之后，所述视频处理节点还具体用于：
在所述目标人脸图像对应的用户到达所述移动终端的位置时，对所述用户进行人脸识别，在所述人脸识别通过后，接听所述来电。
可选地，在获取所述接听者的当前位置方面，所述视频处理节点具体用于：
A1、确定所述X张人脸图像对应背景信息；
A2、在室内地图中查找与所述背景信息对应的位置，并将所述位置作为所述当前位置。
其中，由于视频处理节点的话，可用于控制多个摄像头，每一摄像头均对应一个监控范围，因此，通过多个摄像头可以在一定程度上覆盖用户的活动区域，通过对活动区域进行监控，可以得到用户的位置以及对应的环境影像。可以通过X张人脸图像获取该用户的背景信息，即用户所在位置的环境信息，并在室内地图中查找与该背景信息对应的位置，将该位置作为当前位置。
进一步地，上述在室内地图中查找与所述背景信息对应的位置，可按照与下方面实施：
获取与所述背景信息对应的摄像头标识；获取与所述摄像头标识对应的室内地图；在所述室内地图中查找所述背景信息对应的位置。
其中，背景信息来自于人脸图像，每一张人脸图像对应有一个摄像头标识，该摄像头标识代表该人脸图像由哪个摄像头拍摄，当然，每一摄像头也有个固定位置，其对应一个区域范围，该区域范围也对应一个室内地图，如此，可以通过背景信息获取与之对应的摄像头标识；并通过摄像头标识获取与之对应的室内地图，并在该室内地图中查找与背景信息对应的位置。
可选地，上述步骤A1，在所述确定所述P张人脸图像对应背景信息方面，所述视频处理节点具体用于：
A11、从所述X张人脸图像中获取与当前时间最近的Y张人脸图像，所述Y为小于或等于所述X的正整数；
A12、对所述Y张人脸图像进行图像质量评价，得到所述Y个图像质量评价值；
A13、从所述Y个图像质量评价值中选取最大的图像质量评价值，并获取所述最大的图像质量评价值对应的目标人脸图像；
A14、对所述目标人脸图像进行图像分割，得到所述背景信息。
其中，X张人脸图像中每一人脸图像对应一个拍摄时间，可以从X张人脸图像中选取与当前时间最近的Y张人脸图像，Y为小于或等于X的正整数，由于与当前时间越近，得到的当前位置越可靠，此处，取Y张，主要考虑到人脸识别的时候，有可能出现图像模糊，则导致人脸识别失败，因此，多张的话，可以提升人脸识别效率，当然，也有可能一张人脸图像也可能人脸识别成功。进一步地，可以对Y张人脸图像进行图像质量评价，得到Y个图像质量评价值，当然图像质量评价值越大，则说明图像质量越好，人脸识别成功的几率也会更高，因此，选取最大的图像质量评价值对应的目标人脸图像，根据该目标人脸图像进行图像分割，得到背景信息，由于人脸图像会包含人脸和背景，除去人脸就剩下背景。
可选地，上述对所述Y张人脸图像进行图像质量评价，得到所述Y个图像质量评价值，可采用如下方式实现：
可采用至少一个图像质量评价值对所述Y张人脸图像进行图像质量评价，得到所述Y个图像质量评价值。
其中，多个图像质量评价指标的话，每一图像质量评价指标也对应一个权重，如此，每一图像质量评价指标对人脸图像进行图像质量评价时，均可得到一个评价结果，最终，进行加权运算，也就得到最终的图像质量评价值。图像质量评价指标可包括但不仅限于：均值、标准差、熵、清晰度、信噪比等等。
需要说明的是，由于采用单一评价指标对图像质量进行评价时，具有一定的局限性，因此，可采用多个图像质量评价指标对图像质量进行评价，当然，对图像质量进行评价时，并非图像质量评价指标越多越好，因为图像质量评价指标越多，图像质量评价过程的计算复杂度越高，也不见得图像质量评价效果越好，因此，在对图像质量评价要求较高的情况下，可采用2～8个图像质量评价指标对图像质量进行评价。具体地，选取图像质量评价指标的个数及哪个指标，依据具体实现情况而定。当然，也得结合具体地场景选取图像质量评价指标，在暗环境下进行图像质量评价和亮环境下进行图像质量评价选取的图像质量指标可不一样。
可选地，在对图像质量评价精度要求不高的情况下，可用一个图像质量评价指标进行评价，例如，以熵对待处理图像进行图像质量评价值，可认为熵越大，则说明图像质量越好，相反地，熵越小，则说明图像质量越差。
可选地，在对图像质量评价精度要求较高的情况下，可以采用多个图像质量评价指标对图像进行评价，在多个图像质量评价指标对图像进行图像质量评价时，可设置该多个图像质量评价指标中每一图像质量评价指标的权重，可得到多个图像质量评价值，根据该多个图像质量评价值及其对应的权重可得到最终的图像质量评价值，例如，三个图像质量评价指标分别为：A指标、B指标和C指标，A的权重为a1，B的权重为a2，C的权重为a3，采用A、B和C对某一图像进行图像质量评价时，A对应的图像质量评价值为b1，B对应的图像质量评价值为b2，C对应的图像质量评价值为b3，那么，最后的图像质量评价值＝a1b1+a2b2+a3b3。通常情况下，图像质量评价值越大，说明图像质量越好。
可以看出，本发明实施例应用于物联网系统，所述物联网系统包括网关，语音处理节点和视频处理节点，所述语音处理节点、所述视频处理节点均与所述网关连接，所述视频处理节点还连接多个摄像头，所述语音处理节点还连接多个麦克风，包括：所述语音处理节点在移动终端来电后，监听所述来电的来电铃声，将所述来电铃声发送给所述网关；所述网关确定与所述来电铃声对应的接听者，并调取所述接听者的人脸模板，将所述人脸模板发送给所述视频处理节点；所述视频处理节点通过所述多个摄像头获取视频信息，并对所述视频信息进行解析，得到X个人脸图像，将所述X个人脸图像与所述人脸模板进行匹配，得到目标人脸图像，通知所述目标人脸图像对应的用户接听来电。如此，可以在移动终端不在用户身边的时候，及时提醒用户。
与上述一致地，请参阅图3，为本发明实施例提供的一种来电处理方法的实施例流程示意图。本实施例中所描述的来电处理方法，所述物联网系统包括网关，语音处理节点和视频处理节点，所述语音处理节点、所述视频处理节点均与所述网关连接，所述视频处理节点还连接多个摄像头，所述语音处理节点还连接多个麦克风，所述物联网系统还包括用户信息接收节点，该用户信息接收节点与网关连接，用于接收用户输入的用户信息，其中，包括以下步骤：
301、所述语音处理节点在移动终端来电后，监听所述来电的来电铃声，将所述来电铃声发送给所述网关。
302、所述网关确定与所述来电铃声对应的接听者，并调取所述接听者的人脸模板，将所述人脸模板发送给所述视频处理节点。
303、所述用户信息接收节点获取所述用户的工作状态，并根据所述工作状态确定提示参数，将所述提示参数发送给所述视频处理节点。
其中，用户的工作状态可以是忙碌或者闲暇，若是忙碌则可以提示用户延迟接听来电，若是闲暇，则可以及时提醒用户。
304、所述视频处理节点通过所述多个摄像头获取视频信息，并对所述视频信息进行解析，得到X个人脸图像，将所述X个人脸图像与所述人脸模板进行匹配，得到目标人脸图像，根据所述提示参数通知所述目标人脸图像对应的用户接听来电。
其中，可以根据提示参数通知目标人脸图像对应的用户接听来电。如此，可进行人性化提醒用户。
可以看出，本发明实施例应用于物联网系统，所述物联网系统包括网关，语音处理节点和视频处理节点，所述语音处理节点、所述视频处理节点均与所述网关连接，所述视频处理节点还连接多个摄像头，所述语音处理节点还连接多个麦克风，包括：所述语音处理节点在移动终端来电后，监听所述来电的来电铃声，将所述来电铃声发送给所述网关；所述网关确定与所述来电铃声对应的接听者，并调取所述接听者的人脸模板，将所述人脸模板发送给所述视频处理节点；所述用户信息接收节点获取所述用户的工作状态，并根据所述工作状态确定提示参数，将所述提示参数发送给所述视频处理节点；所述视频处理节点通过所述多个摄像头获取视频信息，并对所述视频信息进行解析，得到X个人脸图像，将所述X个人脸图像与所述人脸模板进行匹配，得到目标人脸图像，根据所述提示信息通知所述目标人脸图像对应的用户接听来电。如此，可以在移动终端不在用户身边的时候，及时提醒用户。
与上述一致地，以下为实施上述本发明实施例提供的来电处理方法的网关，具体如下：
请参阅图4a，为本发明实施例提供的一种来电处理装置400的实施例结构示意图。应用于物联网系统，所述物联网系统包括网关，语音处理节点和视频处理节点，所述语音处理节点、所述视频处理节点均与所述网关连接，所述视频处理节点还连接多个摄像头，所述语音处理节点还连接多个麦克风，所述来电处理装置包括：语音处理单元，控制单元，来电提示单元，其中，所述来电处理装置400包括：语音处理单元410，控制单元420，来电提示单元430，其中，
所述语音处理单元410，用于控制所述语音处理节点在移动终端来电后，监听所述来电的来电铃声，将所述来电铃声发送给所述网关；
所述控制单元420，用于控制所述网关确定与所述来电铃声对应的接听者，并调取所述接听者的人脸模板，将所述人脸模板发送给所述视频处理节点；
所述来电提示单元430，用于控制所述视频处理节点，用于通过所述多个摄像头获取视频信息，并对所述视频信息进行解析，得到X个人脸图像，将所述X个人脸图像与所述人脸模板进行匹配，得到目标人脸图像，通知所述目标人脸图像对应的用户接听来电。
可选地，所述控制单元420具体用于：
控制所述网关判断所述来电铃声是否存在于预设铃声库，若存在，则执行所述确定与所述来电铃声对应的接听者。
可选地，所述来电提示单元430还具体用于：
控制所述视频处理节点在所述目标人脸图像对应的用户到达所述移动终端的位置时，对所述用户进行人脸识别，在所述人脸识别通过后，接听所述来电。
可选地，所述来电提示单元430还具体用于：
控制所述视频处理节点确定所述X张人脸图像对应背景信息；在室内地图中查找与所述背景信息对应的位置，并将所述位置作为所述当前位置。
可选地，在所述确定所述P张人脸图像对应背景信息方面，所述来电提示单元430还具体用于：
控制所述视频处理节点从所述X张人脸图像中获取与当前时间最近的Y张人脸图像，所述Y为小于或等于所述X的正整数；对所述Y张人脸图像进行图像质量评价，得到所述Y个图像质量评价值；从所述Y个图像质量评价值中选取最大的图像质量评价值，并获取所述最大的图像质量评价值对应的目标人脸图像；对所述目标人脸图像进行图像分割，得到所述背景信息。
可选地如图4b，图4b为图4a所描述的来电处理装置的又一变型结构，其还可以包括，接收单元440，具体如下：
所述接收单元440，用于接收节点获取所述用户的工作状态，并根据所述工作状态确定提示参数，将所述提示参数发送给所述视频处理节点；
进一步地，来电提示单元430通知所述目标人脸图像对应的用户接听来电的具体实现方式为：
根据所述提示参数通知所述目标人脸图像对应的用户接听来电。
可以看出，本发明实施例所描述的来电处理装置，应用于物联网系统，所述物联网系统包括网关，语音处理节点和视频处理节点，所述语音处理节点、所述视频处理节点均与所述网关连接，所述视频处理节点还连接多个摄像头，所述语音处理节点还连接多个麦克风，包括：所述语音处理节点在移动终端来电后，监听所述来电的来电铃声，将所述来电铃声发送给所述网关；所述网关确定与所述来电铃声对应的接听者，并调取所述接听者的人脸模板，将所述人脸模板发送给所述视频处理节点；所述视频处理节点通过所述多个摄像头获取视频信息，并对所述视频信息进行解析，得到X个人脸图像，将所述X个人脸图像与所述人脸模板进行匹配，得到目标人脸图像，通知所述目标人脸图像对应的用户接听来电。如此，可以在移动终端不在用户身边的时候，及时提醒用户。
需要注意的是，本发明装置实施例所描述的来电处理装置是以功能单元的形式呈现。这里所使用的术语“单元”应当理解为尽可能最宽的含义，用于实现各个“单元”所描述功能的对象例如可以是集成电路ASIC，单个电路，用于执行一个或多个软件或固件程序的处理器(共享的、专用的或芯片组)和存储器，组合逻辑电路，和/或提供实现上述功能的其他合适的组件。
举例来说，所述语音处理单元410，用于控制所述语音处理节点在移动终端来电后，监听所述来电的来电铃声，将所述来电铃声发送给所述网关的功能可以由图5所示的网关来实现，具体可以通过处理器3000通过调用存储器4000中的可执行程序代码，用于控制所述语音处理节点在移动终端来电后，监听所述来电的来电铃声，将所述来电铃声发送给所述网关。
与上述一致地，请参阅图5，为本发明实施例提供的一种网关的实施例结构示意图。本实施例中所描述的网关，包括：至少一个输入设备1000；至少一个输出设备2000；至少一个处理器3000，例如CPU；和存储器4000，上述输入设备1000、输出设备2000、处理器3000和存储器4000通过总线5000连接，所述网关应用于物联网系统，所述物联网系统包括网关，语音处理节点和视频处理节点，所述语音处理节点、所述视频处理节点均与所述网关连接，所述视频处理节点还连接多个摄像头，所述语音处理节点还连接多个麦克风。
需要说明的是，这里的处理器3000可以是一个处理元件，也可以是多个处理元件的统称。例如，该处理元件可以是中央处理器(Central Processing Unit，CPU)，也可以是特定集成电路(Application Specific Integrated Circuit，ASIC)，或者是被配置成实施本申请实施例的一个或多个集成电路，例如：一个或多个微处理器(digital singnalprocessor，DSP)，或，一个或者多个现场可编程门阵列(Field Programmable Gate Array，FPGA)。
存储器4000可以是一个存储装置，也可以是多个存储元件的统称，且用于存储可执行程序代码或应用程序运行装置运行所需要参数、数据等。且存储器4000可以包括随机存储器(RAM)，也可以包括非易失性存储器(non-volatile memory)，例如磁盘存储器，闪存(Flash)等。
总线5000可以是工业标准体系结构(Industry Standard Architecture，ISA)总线、外部设备互连(Peripheral Component，PCI)总线或扩展工业标准体系结构(ExtendedIndustry Standard Architecture，EISA)总线等。该总线可以分为地址总线、数据总线、控制总线等。为便于表示，图5中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
上述处理器3000，用于：
控制所述语音处理节点在移动终端来电后，监听所述来电的来电铃声，将所述来电铃声发送给所述网关；
控制所述网关确定与所述来电铃声对应的接听者，并调取所述接听者的人脸模板，将所述人脸模板发送给所述视频处理节点；
控制所述视频处理节点通过所述多个摄像头获取视频信息，并对所述视频信息进行解析，得到X个人脸图像，将所述X个人脸图像与所述人脸模板进行匹配，得到目标人脸图像，通知所述目标人脸图像对应的用户接听来电。
可选地，在所述获取当前位置方面，上述处理器3000具体用于：
控制所述网关判断所述来电铃声是否存在于预设铃声库，若存在，则执行所述确定与所述来电铃声对应的接听者。
可选地，上述处理器3000控制所述视频处理节点获取所述接听者的当前位置，在所述通知所述目标人脸图像对应的用户接听来电方面之后，还具体用于：
在所述目标人脸图像对应的用户到达所述移动终端的位置时，对所述用户进行人脸识别，在所述人脸识别通过后，接听所述来电。
可选地，在所述获取所述接听者的当前位置方面，上述处理器3000控制所述视频处理节点具体用于：
确定所述X张人脸图像对应背景信息；
在室内地图中查找与所述背景信息对应的位置，并将所述位置作为所述当前位置。
可选地，在所述确定所述P张人脸图像对应背景信息方面，上述处理器3000控制所述视频处理节点具体用于：
从所述X张人脸图像中获取与当前时间最近的Y张人脸图像，所述Y为小于或等于所述X的正整数；
对所述Y张人脸图像进行图像质量评价，得到所述Y个图像质量评价值；
从所述Y个图像质量评价值中选取最大的图像质量评价值，并获取所述最大的图像质量评价值对应的目标人脸图像；
对所述目标人脸图像进行图像分割，得到所述背景信息。
本发明实施例还提供一种计算机存储介质，其中，该计算机存储介质可存储有程序，该程序执行时包括上述方法实施例中记载的任何一种来电处理方法的部分或全部步骤。
本发明实施例还提供一种计算机程序产品，所述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，所述计算机程序可操作来使计算机执行如上述方法实施例中记载的任何一种来电处理方法的部分或全部步骤。
尽管在此结合各实施例对本发明进行了描述，然而，在实施所要求保护的本发明过程中，本领域技术人员通过查看所述附图、公开内容、以及所附权利要求书，可理解并实现所述公开实施例的其他变化。在权利要求中，“包括”(comprising)一词不排除其他组成部分或步骤，“一”或“一个”不排除多个的情况。单个处理器或其他单元可以实现权利要求中列举的若干项功能。相互不同的从属权利要求中记载了某些措施，但这并不表示这些措施不能组合起来产生良好的效果。
本领域技术人员应明白，本发明的实施例可提供为方法、网关(设备)、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。计算机程序存储/分布在合适的介质中，与其它硬件一起提供或作为硬件的一部分，也可以采用其他分布形式，如通过Internet或其它有线或无线电信系统。
本发明是参照本发明实施例的方法、网关(设备)和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的网关。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令网关的制造品，该指令网关实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管结合具体特征及其实施例对本发明进行了描述，显而易见的，在不脱离本发明的精神和范围的情况下，可对其进行各种修改和组合。相应地，本说明书和附图仅仅是所附权利要求所界定的本发明的示例性说明，且视为已覆盖本发明范围内的任意和所有修改、变化、组合或等同物。显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种物联网系统，其特征在于，所述物联网系统包括网关，语音处理节点和视频处理节点，所述语音处理节点、所述视频处理节点均与所述网关连接，所述视频处理节点还连接多个摄像头，所述语音处理节点还连接多个麦克风，其中，
所述语音处理节点，用于在移动终端来电后，监听所述来电的来电铃声，将所述来电铃声发送给所述网关；
所述网关，用于确定与所述来电铃声对应的接听者，并调取所述接听者的人脸模板，将所述人脸模板发送给所述视频处理节点；
所述视频处理节点，用于通过所述多个摄像头获取视频信息，并对所述视频信息进行解析，得到X个人脸图像，将所述X个人脸图像与所述人脸模板进行匹配，得到目标人脸图像，通知所述目标人脸图像对应的用户接听来电。
2.根据权利要求1所述的系统，其特征在于，所述网关还用于：
判断所述来电铃声是否存在于预设铃声库，若存在，则执行所述确定与所述来电铃声对应的接听者。
3.根据权利要求1或2所述的系统，其特征在于，所述视频处理节点还用于：获取所述接听者的当前位置，在所述通知所述目标人脸图像对应的用户接听来电方面之后，所述视频处理节点还具体用于：
在所述目标人脸图像对应的用户到达所述移动终端的位置时，对所述用户进行人脸识别，在所述人脸识别通过后，接听所述来电。
4.根据权利要求3所述的系统，其特征在于，在所述获取所述接听者的当前位置方面，所述视频处理节点具体用于：
确定所述X张人脸图像对应背景信息；
在室内地图中查找与所述背景信息对应的位置，并将所述位置作为所述当前位置。
5.根据权利要求4所述的系统，其特征在于，在所述确定所述P张人脸图像对应背景信息方面，所述视频处理节点具体用于：
从所述X张人脸图像中获取与当前时间最近的Y张人脸图像，所述Y为小于或等于所述X的正整数；
对所述Y张人脸图像进行图像质量评价，得到所述Y个图像质量评价值；
从所述Y个图像质量评价值中选取最大的图像质量评价值，并获取所述最大的图像质量评价值对应的目标人脸图像；
对所述目标人脸图像进行图像分割，得到所述背景信息。
6.一种来电处理方法，其特征在于，应用于物联网系统，所述物联网系统包括网关，语音处理节点和视频处理节点，所述语音处理节点、所述视频处理节点均与所述网关连接，所述视频处理节点还连接多个摄像头，所述语音处理节点还连接多个麦克风，包括：
所述语音处理节点在移动终端来电后，监听所述来电的来电铃声，将所述来电铃声发送给所述网关；
所述网关确定与所述来电铃声对应的接听者，并调取所述接听者的人脸模板，将所述人脸模板发送给所述视频处理节点；
所述视频处理节点通过所述多个摄像头获取视频信息，并对所述视频信息进行解析，得到X个人脸图像，将所述X个人脸图像与所述人脸模板进行匹配，得到目标人脸图像，通知所述目标人脸图像对应的用户接听来电。
7.根据权利要求6所述的方法，其特征在于，所述网关用于：
判断所述来电铃声是否存在于预设铃声库，若存在，则执行所述确定与所述来电铃声对应的接听者。
8.根据权利要求6或7所述的方法，其特征在于，在所述获取所述接听者的当前位置，在所述通知所述目标人脸图像对应的用户接听来电方面之后，所述方法还还包括：
在所述目标人脸图像对应的用户到达所述移动终端的位置时，对所述用户进行人脸识别，在所述人脸识别通过后，接听所述来电。
9.一种来电处理装置，其特征在于，应用于物联网系统，所述物联网系统包括网关，语音处理节点和视频处理节点，所述语音处理节点、所述视频处理节点均与所述网关连接，所述视频处理节点还连接多个摄像头，所述语音处理节点还连接多个麦克风，所述来电处理装置包括：语音处理单元，控制单元，来电提示单元，其中，
所述语音处理单元，用于控制所述语音处理节点在移动终端来电后，监听所述来电的来电铃声，将所述来电铃声发送给所述网关；
所述控制单元，用于控制所述网关确定与所述来电铃声对应的接听者，并调取所述接听者的人脸模板，将所述人脸模板发送给所述视频处理节点；
所述来电提示单元，用于控制所述视频处理节点，用于通过所述多个摄像头获取视频信息，并对所述视频信息进行解析，得到X个人脸图像，将所述X个人脸图像与所述人脸模板进行匹配，得到目标人脸图像，通知所述目标人脸图像对应的用户接听来电。
10.一种计算机存储介质，其特征在于，其用于存储计算机程序，其中，所述计算机程序使得计算机执行如权利要求6-8任一项所述的方法。
CN201710797093.9A 2017-09-06 2017-09-06 节点控制方法及相关产品 Pending CN107743139A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710797093.9A CN107743139A (zh) 2017-09-06 2017-09-06 节点控制方法及相关产品

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710797093.9A CN107743139A (zh) 2017-09-06 2017-09-06 节点控制方法及相关产品

Publications (1)

Publication Number Publication Date
CN107743139A true CN107743139A (zh) 2018-02-27

Family

ID=61235469

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710797093.9A Pending CN107743139A (zh) 2017-09-06 2017-09-06 节点控制方法及相关产品

Country Status (1)

Country Link
CN (1) CN107743139A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1303210A (zh) * 2000-01-03 2001-07-11 英业达集团(上海)电子技术有限公司 电话铃声识别装置
EP0999683A3 (en) * 1998-11-02 2004-02-25 Canon Kabushiki Kaisha Communication apparatus
CN1722642A (zh) * 2004-07-16 2006-01-18 乐金电子(中国)研究开发中心有限公司 利用家庭网络的终端接收内容传送方法
CN102131015A (zh) * 2010-01-18 2011-07-20 金宝电子工业股份有限公司 整合照明系统的居家免持通话系统及居家免持通话方法
CN103179524A (zh) * 2013-04-15 2013-06-26 陈财淦 一种基于智能通信终端的智能应答系统
CN104822023A (zh) * 2015-04-23 2015-08-05 太仓红码软件技术有限公司 通过耳机提供视频的方法及其系统
CN106851199A (zh) * 2017-02-07 2017-06-13 深圳云天励飞技术有限公司 一种视频处理方法及装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0999683A3 (en) * 1998-11-02 2004-02-25 Canon Kabushiki Kaisha Communication apparatus
CN1303210A (zh) * 2000-01-03 2001-07-11 英业达集团(上海)电子技术有限公司 电话铃声识别装置
CN1722642A (zh) * 2004-07-16 2006-01-18 乐金电子(中国)研究开发中心有限公司 利用家庭网络的终端接收内容传送方法
CN102131015A (zh) * 2010-01-18 2011-07-20 金宝电子工业股份有限公司 整合照明系统的居家免持通话系统及居家免持通话方法
CN103179524A (zh) * 2013-04-15 2013-06-26 陈财淦 一种基于智能通信终端的智能应答系统
CN104822023A (zh) * 2015-04-23 2015-08-05 太仓红码软件技术有限公司 通过耳机提供视频的方法及其系统
CN106851199A (zh) * 2017-02-07 2017-06-13 深圳云天励飞技术有限公司 一种视频处理方法及装置

Similar Documents

Publication Publication Date Title
CN104038625B (zh) 来电时电话音频的自动路由
CN107871345A (zh) 信息处理方法及相关产品
CN107845062B (zh) 图像生成方法及装置
CN107332981A (zh) 图像处理方法及相关产品
CN105072280A (zh) 一种移动终端自动挂断电话的处理方法及系统
CN107770244A (zh) 数据传输控制方法及相关产品
CN104243665A (zh) 一种拒接来电的方法、系统及移动终端
CN108200421B (zh) 一种白平衡处理方法、终端和计算机可读存储介质
CN108200291A (zh) 通话管理方法、通话管理装置及电子设备
CN107763808A (zh) 设备调节方法及相关产品
CN106068026A (zh) 用于控制语音通信的传送的方法和系统
CN109639996A (zh) 高动态场景成像方法、移动终端及计算机可读存储介质
CN107633235A (zh) 解锁控制方法及相关产品
CN107787015A (zh) 基于大数据的网络调整方法和装置
CN109151428A (zh) 自动白平衡处理方法、装置以及计算机存储介质
CN107222629A (zh) 来电处理方法及相关产品
CN115187824A (zh) 一种模型训练方法、场景识别方法及相关设备
TW201637423A (zh) 來電鈴聲控制系統及方法
CN103731550A (zh) 一种处理来电的方法及终端
CN103685349A (zh) 一种信息处理的方法及一种电子设备
CN107066400A (zh) 电子设备的信号处理方法、装置及电子设备
CN105208337B (zh) 基于拼接墙的图像处理方法及装置
US11418757B1 (en) Controlled-environment facility video communications monitoring system
CN103384287B (zh) 移动电话中的电话呼叫协处理的方法及移动电话
CN109451525A (zh) 一种拥塞判断的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180227

RJ01 Rejection of invention patent application after publication