CN110197171A - 基于用户的动作信息的交互方法、装置和电子设备 - Google Patents

基于用户的动作信息的交互方法、装置和电子设备 Download PDF

Info

Publication number
CN110197171A
CN110197171A CN201910491719.2A CN201910491719A CN110197171A CN 110197171 A CN110197171 A CN 110197171A CN 201910491719 A CN201910491719 A CN 201910491719A CN 110197171 A CN110197171 A CN 110197171A
Authority
CN
China
Prior art keywords
user
image
action message
target user
action
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910491719.2A
Other languages
English (en)
Inventor
李运宁
沈健
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Goodix Technology Co Ltd
Original Assignee
Shenzhen Huiding Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Huiding Technology Co Ltd filed Critical Shenzhen Huiding Technology Co Ltd
Priority to CN201910491719.2A priority Critical patent/CN110197171A/zh
Publication of CN110197171A publication Critical patent/CN110197171A/zh
Priority to US16/703,687 priority patent/US20200387695A1/en
Priority to EP19213643.0A priority patent/EP3748980A1/en
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44218Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/4401Bootstrapping
    • G06F9/4418Suspend and resume; Hibernate and awake
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/70Multimodal biometrics, e.g. combining information from different biometric modalities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/441Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card
    • H04N21/4415Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card using biometric characteristics of the user, e.g. by voice recognition or fingerprint scanning
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4661Deriving a combined profile for a plurality of end-users of the same client, e.g. for family members within a home

Abstract

本申请提供一种基于用户的动作信息的交互方法、装置和电子设备,该方法包括:判断所采集的第一图像中是否包括终端认证的N个用户的面部信息,其中,N为大于或等于2的整数;若第一图像中包括终端认证的N个用户的面部信息,则识别第一图像中N个用户的动作信息;根据N个用户的动作信息和预设动作信息,确定N个用户中的目标用户,目标用户在第一图像中的动作信息与预设动作信息相同;以及根据目标用户在第一图像中的动作信息,显示与目标用户绑定的内容。本申请中根据终端认证的用户的动作信息,准确识别目标用户,进而使得终端能够做出正确的交互响应。

Description

基于用户的动作信息的交互方法、装置和电子设备
技术领域
本申请涉及终端技术领域,尤其涉及一种基于用户的动作信息的交互方法、装置和电子设备。
背景技术
人脸识别技术,是通过采集用户面部的图像,对图像进行特征提取,然后与预设定的人脸特征进行比对来完成身份认证的技术。因人脸具有高唯一性和采集的便利性,人脸识别技术被广泛应用于门禁、考勤、金融及消费电子领域。
当终端识别到与终端的认证用户的面部信息时,可以执行与该用户绑定的动作。但同一终端可以对应多个认证用户,当终端识别到多个认证用户的面部信息时,终端无法确定执行的动作,导致终端响应错误。
发明内容
本申请提供一种基于用户的动作信息的交互方法、装置和电子设备,根据终端认证的用户的动作信息,准确识别目标用户,进而使得终端能够做出正确的交互响应。
本申请的第一方面提供一种基于用户的动作信息的交互方法,包括:
判断所采集的第一图像中是否包括终端认证的N个用户的面部信息,其中,N为大于或等于2的整数;
若所述第一图像中包括所述终端认证的N个用户的面部信息,则识别所述第一图像中所述N个用户的动作信息;
根据所述N个用户的动作信息和预设动作信息,确定所述N个用户中的目标用户,所述目标用户在所述第一图像中的动作信息与所述预设动作信息相同;以及
根据所述目标用户在所述第一图像中的动作信息,显示与所述目标用户绑定的内容。
可选的,所述确定所述N个用户中的目标用户,包括:
若所述N个用户的动作信息中,存在M个用户的动作信息均与对应的预设动作信息相同,则继续采集第二图像,其中,M为大于或等于2的整数,且所述M小于或等于所述N;以及
根据所述第二图像中的所述M个用户的动作信息,确定所述目标用户。
可选的,所述继续采集第二图像之前,还包括:
显示提醒信息,所述提醒信息用于提醒所述M个用户改变动作。
可选的,所述确定所述N个用户中的目标用户,包括:
若所述N个用户的动作信息中,存在单一用户的动作信息与对应的预设动作信息相同,则确定所述单一用户为所述目标用户。
可选的,所述显示与所述目标用户绑定的内容后,还包括:
采集第三图像;
若所述第三图像中包括与终端认证的至少一个用户的面部信息,则根据所述第三图像中所述至少一个用户的动作信息,确定新的目标用户;
判断所述新的目标用户与所述目标用户是否相同;
若否,则显示与所述新的目标用户绑定的内容。
可选的,所述判断所采集的第一图像中是否包括终端认证的N个用户的面部信息之前,还包括:
接收用户输入的唤醒指令,以将所述终端从睡眠状态唤醒进入唤醒状态;以及
采集所述第一图像。
可选的,所述动作信息包括:面部动作和/或肢体动作。
可选的,所述终端为影音设备,与所述目标用户绑定的内容为所述影音设备中的频道或节目。
本申请的第二方面提供一种基于用户的动作信息的交互装置,包括:
处理模块,用于判断所采集的第一图像中是否包括终端认证的N个用户的面部信息,其中,N为大于或等于2的整数;若所述第一图像中包括所述终端认证的N个用户的面部信息,则识别所述第一图像中所述N个用户的动作信息;根据所述N个用户的动作信息和预设动作信息,确定所述N个用户中的目标用户,所述目标用户在所述第一图像中的动作信息与所述预设动作信息相同;
显示模块,用于根据所述目标用户在所述第一图像中的动作信息,显示与所述目标用户绑定的内容。
可选的,所述电子设备还包括:采集模块;
所述采集模块,用于若所述N个用户的动作信息中,存在M个用户的动作信息均与对应的预设动作信息相同,则继续采集第二图像,其中,M为大于或等于2的整数,且所述M小于或等于所述N。
可选的,所述处理模块,具体用于根据所述第二图像中的所述M个用户的动作信息,确定所述目标用户。
可选的,所述显示模块,还用于显示提醒信息,所述提醒信息用于提醒所述M个用户改变动作。
可选的,所述处理模块,具体用于若所述N个用户的动作信息中,存在单一用户的动作信息与对应的预设动作信息相同,则确定所述单一为所述目标用户。
可选的,所述采集模块,还用于采集第三图像。
对应的,所述处理模块,还用于若所述第三图像中包括终端认证的至少一个用户的面部信息,则根据所述第三图像中所述至少一个用户的动作信息,确定新的目标用户;判断所述新的目标用户与所述目标用户是否相同。
所述显示模块,用于新的目标用户与所述目标用户不同时,显示与所述新的目标用户绑定的内容。
可选的,所述电子设备还包括:收发模块;
所述收发模块,用于接收唤醒指令,以将所述终端从睡眠状态唤醒进入唤醒状态。
对应的,所述采集模块,还用于采集所述第一图像。
可选的,所述动作信息包括:面部动作和/或肢体动作。
可选的,所述电子设备为影音设备,与所述目标用户绑定的内容为所述影音设备中的频道或节目。
本申请的第三方面提供一种电子设备,包括:至少一个处理器和存储器;
所述存储器存储计算机执行指令;
所述至少一个处理器执行所述存储器存储的计算机执行指令,使得所述电子设备执行上述基于用户的动作信息的交互方法。
本申请的第四方面提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机执行指令,当所述计算机执行指令被处理器执行时,实现上述基于用户的动作信息的交互方法。
本申请提供一种基于用户的动作信息的交互方法、装置和电子设备,该方法包括:判断所采集的第一图像中是否包括终端认证的N个用户的面部信息,其中,N为大于或等于2的整数;若第一图像中包括终端认证的N个用户的面部信息,则识别第一图像中N个用户的动作信息;根据N个用户的动作信息和预设动作信息,确定N个用户中的目标用户,目标用户在第一图像中的动作信息与预设动作信息相同;以及根据目标用户在第一图像中的动作信息,显示与目标用户绑定的内容。本申请中根据终端认证的用户的动作信息,准确识别目标用户,进而使得终端能够做出正确的交互响应。
附图说明
图1为本申请提供的基于用户的动作信息的交互方法适用的场景示意图;
图2为本申请提供的基于用户的动作信息的交互方法的流程示意图一;
图3为本申请提供的动作的示意图;
图4为本申请提供的识别结果示意图一;
图5为本申请提供的识别结果示意图二;
图6为本申请提供的识别结果示意图三;
图7为本申请提供的基于用户的动作信息的交互方法的流程示意图二;
图8为本申请提供的终端界面示意图;
图9为本申请提供的基于用户的动作信息的交互装置的结构示意图一;
图10为本申请提供的基于用户的动作信息的交互装置的结构示意图二;
图11为本申请提供的电子设备的结构示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合本申请的实施例,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
为了解决现有技术中终端识别到多个认证用户的面部信息,无法做出正确的交互响应的问题,本申请提供了一种基于用户的动作信息的交互方法,根据对多个终端认证的用户的动作信息,确定目标用户,进而达到根据目标用户的动作信息做出正确的交互响应的目的。
图1为本申请提供的基于用户的动作信息的交互方法适用的场景示意图。如图1所示,本申请中提供的基于用户的动作信息的交互方法使用的场景中包括终端。其中,该终端可以为集成有图像采集模块的电子设备。
本申请中的终端包括但不限于为移动终端或固定终端。移动终端包括但不限于手机、个人数字助理(Personal Digital Assistant,简称:PDA)、平板电脑、便携设备(例如,便携式计算机、袖珍式计算机或手持式计算机)等。固定终端包括但不限于台式计算机、影音设备、智能电视等。应理解,图1中以终端为智能电视为例进行示例说明。
示例性的,本申请中的终端可以为集成有图像采集模块的智能电视,该智能电视可以对应有多个认证用户。其中,认证用户可以为该智能电视的注册用户。当智能电视识别到多个认证用户的面部信息时,可以进一步根据认证用户的动作信息确定目标用户,进而播放与目标用户绑定的内容,该内容可以为电视剧、综艺节目等。
示例性的,本申请中的终端可以为集成有图像采集模块的阅读设备,该阅读设备也包括有多个认证用户。当阅读设备识别到多个认证用户的面部信息时,可以进一步根据认证用户的动作信息确定目标用户,进而显示与目标用户绑定的内容,该内容可以为书籍目录,也可以为该目标用户上一次阅读的章节。
本申请中提供的基于用户的动作信息的交互方法也可以适用终端的应用程序中,该应用程序也对应有多个认证用户。当终端运行应用程序时,且能够识别到多个认证用户的面部信息时,可以进一步根据认证用户的动作信息确定目标用户,进而显示与目标用户绑定的内容,该内容可以为该目标用户的账号在应用程序中的登录内容。
应理解,本申请中提供的基于用户的动作信息的交互方法还适用于其他终端对应有多个认证用户的场景中。本申请中的终端对应有多个认证用户,其中,根据应用场景的不同,认证用户可以是该终端的认证用户或该终端中的应用程序的认证用户,两者均可以统称为终端的认证用户。
图2为本申请提供的基于用户的动作信息的交互方法的流程示意图一。图2所示方法流程的执行主体可以为基于用户的动作信息的交互装置(下述实施例中以终端进行示例说明),该基于用户的动作信息的交互装置可由任意的软件和/或硬件实现。如图2所示,本实施例提供的基于用户的动作信息的交互方法可以包括:
S201,判断所采集的第一图像中是否包括终端认证的N个用户的面部信息,其中,N为大于或等于2的整数。
本实施例中的终端具有采集图像的功能。可选的,终端为智能手机时,终端采集的第一图像可以为在智能手机处于唤醒状态下采集的,也可以为智能手机处于唤醒状态且未解锁时,即锁定状态时采集的。可选的,终端为智能电视时,终端采集的第一图像可以为智能电视处于唤醒状态(如智能电视处于开机状态)时采集的。本实施例中对于不同类型的终端,其采集第一图像时的终端的状态不做限制。
本实施例的终端中存储有终端认证的X个用户的面部信息,应理解,X可以为大于或等于N的整数。在终端获取第一图像后,可以获取第一图像中的用户的面部信息,进而根据第一图像中的用户的面部信息和终端认证的X个用户的面部信息进行对比、匹配,以确定第一图像中是否包括与终端认证的用户的面部信息。
可选的,本实施例中终端存储的终端认证的用户的面部信息可以为用户的面部特征。其中,用户的面部特征可以包括:用户的眼睛、鼻子、嘴等的特征。终端在获取第一图像后,可以提取第一图像中包括的每个用户的面部特征,进而将第一图像中包括的每个用户的面部特征与终端认证的每个用户的面部特征进行匹配。若能够与终端绑定的用户的面部特征匹配成功,则确定第一图像中包括的用户中存在与终端绑定的用户。本实施例中对第一图像中是否包括与终端绑定的用户的方法也可以参照其他人脸识别匹配的方法,在此不做赘述。
采样上述面部信息匹配的方式可以判断终端采集的第一图像中是否包括终端认证的N个用户的面部信息,其中,N为大于或等于2的整数。也就是说,判断终端采集的第一图像中是否包括终端认证的至少两个用户的面部信息。
S202,若第一图像中包括终端认证的N个用户的面部信息,则识别第一图像中N个用户的动作信息。
本实施例中,若采集的第一图像中包括终端认证的N个用户的面部信息时,终端可以识别第一图像中N个用户的动作信息。其中,本实施例中的用户的动作信息中可以为用户的动作。终端识别第一图像中N个用户的动作信息,即为终端识别第一图像中N个用户的动作。
图3为本申请提供的动作的示意图。图3中示例性的示出了动作信息可以包括:面部动作和/或肢体动作。例如,面部动作可以包括:眨眼、吐舌头、大笑,嘟嘴等;肢体动作可以包括:比剪刀手、比爱心、跳跃、抬腿、张开手臂等。其中,动作信息中可以仅包括面部动作或肢体动作,也可以包括面部动作和肢体动作的结合。
S203,根据N个用户的动作信息和预设动作信息,确定N个用户中的目标用户,目标用户在第一图像中的动作信息与预设动作信息相同。
本实施例中可以存储有预设动作信息,其中,该预设动作信息为终端认证的用户的预设动作信息。例如,预设动作信息为包括N个用户的预设动作信息。终端可以根据N个用户的动作信息和预设动作信息,确定N个用户中的目标用户。
可选的,终端可以将第一图像中的N个用户的动作信息与该N个用户的预设动作信息进行匹配。若在第一图像中的N个用户的动作信息中,存在有用户的动作信息与其预设动作信息相同,则确定动作信息匹配成功。可选的,本实施例中还可以获取第一图像中的用户的动作信息与预设动作信息的匹配相似度,当匹配相似度大于相似度阈值的动作信息确定为匹配成功。可选的,本实施例中可以将具有最大匹配相似度的第一图像中的用户的动作信息对应的用户作为目标用户。其中,目标用户在第一图像中的动作信息与预设动作信息相同。
为了提高动作信息的匹配成功率,本实施例中可以设置终端认证的每个用户的预设动作信息不同。可选的,用户在终端认证的过程中(如用户注册的过程中),终端可以采集包括用户的面部信息的图像,将该图像中的用户的面部特征和动作信息进行对应存储,该认证过程中终端获取的用户的动作信息即为该用户的预设动作信息。其中,当终端确定具有多个用户的动作信息均与对应的预设动作信息相同时,可以显示提醒信息,以提醒用户改变动作,确定目标用户。
可选的,本实施例中,若第一图像中的N个用户的动作信息中,存在单一用户的动作信息与对应的预设动作信息相同,则确定该单一用户为目标用户。如图1所示,第一图像中包括6个用户,其中用户A、用户B和用户C均为终端认证的用户,而第一图像中用户A和用户B的动作信息为比剪刀手,用户C的动作信息为大笑,假设用户A的预设动作信息为比爱心,用户B的动作信息为眨眼睛,用户C的动作信息为大笑。图4为本申请提供的识别结果示意图一。终端在对第一图像中的用户A、用户B和用户C的动作信息分别与用户A、用户B和用户C的预设动作信息进行匹配后,确定用户C的动作信息与其对应的预设动作信息相同,则确定用户C的动作信息匹配成功,即确定用户C为目标用户。如图4所示,可以在用户C的面部上方标识“用户C匹配成功”的字样。应理解,图4中的方框为终端识别的用户的面部。
可选的,本实施例中,若第一图像中的N个用户的动作信息中,存在多M个用户的动作信息均与对应的预设动作信息相同,则继续采集第二图像;根据第二图像中的多个用户的动作信息,确定目标用户。其中,M为大于或等于2的整数,且M小于或等于N。
例如,第一图像中包括6个用户,其中用户A、用户B和用户C均为终端认证的用户,第一图像中用户A的动作信息为比爱心,用户B的动作信息为眨眼睛,用户C的动作信息为大笑。图5为本申请提供的识别结果示意图二。同理的,终端进行动作信息匹配后,确定用户B和用户C的动作信息分别与用户B和用户C应的预设动作信息相同,则确定用户B和用户C的动作信息匹配成功。如图5所示,可以在用户B和用户C的面部上方标识“用户B匹配成功”、“用户C匹配成功”的字样。
在该种情况下,由于根据第一图像确定的动作信息匹配成功的用户有M个,终端还是不能够正确的进行响应。终端可以继续采集第二图像,再根据第二图像中的M个用户的动作信息与预设的动作信息进行匹配,确定最终的目标用户。应理解,本实施例中在采集第二图像中的M个匹配成功的用户的动作信息时,可以对该M个用户的动作信息进行追踪,获取第二图像中该M个用户的动作信息,而对于其他用户的动作信息则不再进行追踪。可选的,第二图像可以为多个。例如,根据第一图像之后采集的第一个第二图像中M个用户的动作信息还是没有确定目标用户,则可以继续采集第二个第二图像,直至根据第二图像中M个用户的动作信息确定目标用户。
可选的,本实施例中,若第一图像中的N个用户的动作信息中,不存在用户的动作信息与对应的预设动作信息相同,则确定第一图像中不存在目标用户。图6为本申请提供的识别结果示意图三。终端进行动作信息匹配后,确定第一图像中不存在目标用户。如图6所示,可以在终端的显示界面上显示“无绑定用户,无法使用”的字样。
该种情况下,终端可以终端继续采集第二图像,进而根据第二图像中的用户的动作信息,确定目标用户。应理解,该种情况下在第一图像中进行动作信息的匹配,以及在第二图像中确定最终目标用户的方式可以参照上述两种可选的场景中的方式的相关描述,在此不做赘述。
S204,根据目标用户在第一图像中的动作信息,显示与目标用户绑定的内容。
本实施例中的终端中可预先存储有终端认证的每个用户的预设动作信息,以及与预设动作信息绑定的内容。终端在确定目标用户后,可以显示与该目标用户的预设动作信息绑定的内容。
应理解,根据应用场景的不同,与预设动作信息绑定的内容可以不同,即与目标用户绑定的内容不同。可选的,终端为智能手机,若应用场景为智能手机在解锁状态下采集第一图像。智能手机在确定目标用户后显示的与目标用户绑定的内容可以为:与目标用户绑定的应用程序。若应用场景为智能手机在处于唤醒状态需要解锁时采集第一图像,则智能手机确定目标用户后显示的与目标用户绑定的内容为:终端进入与目标用户绑定的工作模式(如进入目标用户对应的限制使用权限的工作模式)。
可选的,终端为智能电视时,智能电视处于开机状态时采集第一图像,则智能电视确定目标用户后显示的与目标用户绑定的内容可以为:与目标用户绑定的电视剧或综艺节目等。
可选的,终端认证的同一个用户可以通过不同的动作信息,绑定不同的内容。例如,用户A为终端认证的用户,用户A可以对应有多个预设动作信息,每个预设动作信息对应不同的绑定的内容。在该种情况下,终端在第一图像中确定终端认证的用户后,可以根据用户的动作信息与该用户对应的多个预设动作信息进行匹配,进而可以在多个预设动作信息对应的内容中,显示匹配成功的预设动作信息绑定的内容。
例如,用户A的预设动作信息包括:比爱心、眨眼睛、大笑。对应的,与预设动作信息“比爱心”绑定的内容可以为“电视剧1”,与预设动作信息“眨眼睛”绑定的内容可以为“电视剧2”,与预设动作信息“大笑”绑定的内容可以为“综艺节目3”。当确定图像中的用户A的动作信息为比爱心时,通过与预设动作信息的匹配,可以显示与“比爱心”绑定的“电视剧1”。
本申请提供的基于用户的动作信息的交互方法包括:判断所采集的第一图像中是否包括终端认证的N个用户的面部信息,其中,N为大于或等于2的整数;若第一图像中包括终端认证的N个用户的面部信息,则识别第一图像中N个用户的动作信息;根据N个用户的动作信息和预设动作信息,确定N个用户中的目标用户,目标用户在第一图像中的动作信息与预设动作信息相同;以及根据目标用户在第一图像中的动作信息,显示与目标用户绑定的内容。本申请中在终端识别到多个认证的用户的面部信息时,进一步根据图像中的用户的动作信息,准确识别目标用户,进而使得终端能够做出正确的响应。
下面结合图7对该种场景下的基于用户的动作信息的交互方法进行进一步说明,图7为本申请提供的基于用户的动作信息的交互方法的流程示意图二。如图7所示,本实施例提供的基于用户的动作信息的交互方法可以包括:
S701,接收用户输入的唤醒指令,以将终端从睡眠状态唤醒进入唤醒状态。
本实施例中的终端可以为影音设备,对应的,与目标用户绑定的内容为影音设备中的频道或节目。
应理解,用户可以通过输入语音的方式向终端输入唤醒指令,例如,用户通过说出固定的唤醒词,触发终端接收到唤醒指令。或者,用户可以通过手动按压唤醒按钮的方式,向终端输入唤醒指令。本实施例中对于用户如何唤醒终端的方式不做限制。其中,唤醒指令用于指示终端从睡眠状态唤醒进入唤醒状态,并开始采集第一图像。应理解,用户可以为与终端绑定的用户,或者未与终端绑定的用户。
对应的,终端在接收到唤醒指令后,从睡眠状态唤醒进入唤醒状态。例如,影音设备可以是从关机状态进入开机状态,并显示影音设备的主界面。
S702,采集第一图像。
影音设备在进入唤醒状态后,可以采集第一图像。其中该第一图像可以为影音设备实时采集的,也可以为影音设备周期性的采集的。
S703,判断所采集的第一图像中是否包括终端认证的N个用户的面部信息。
S704,若第一图像中包括终端认证的N个用户的面部信息,则识别第一图像中N个用户的动作信息。
S705,若N个用户的动作信息中,存在M个用户的动作信息均与对应的预设动作信息相同,则显示提醒信息,提醒信息用于提醒M个用户改变动作。
本实施例中若N个用户的动作信息中,存在M个用户的动作信息均与对应的预设动作信息相同的场景进行说明,其中,M为大于或等于2的整数,且M小于或等于N。
若第一图像中N个用户的动作信息中,存在M个用户的动作信息均与对应的预设动作信息相同,则终端需要进一步确定最终的目标用户,因为档第一图像中存在多个终端认证的用户的动作信息匹配成功时,终端还是不能正确的进行响应。
在上述实施例中,第一图像中N个用户的动作信息中,存在M个用户的动作信息均与对应的预设动作信息相同时,终端可以继续采集第二图像,进而根据第二图像中的M个用户的动作信息,确定目标用户。该种情况下,有可能M个用户的动作信息可能未发生改变,导致终端可能需要采集多个第二图像,不断进行动作信息的匹配才能确定目标用户。
为了提高终端确定目标用户的效率,本实施例中在第一图像中N个用户的动作信息中,存在M个用户的动作信息均与对应的预设动作信息相同时,可以显示提醒信息。其中,该提醒信息用于提醒M个用户改变动作,以达到避免采集多个第二图像的问题。
图8为本申请提供的终端界面示意图。如图8所示,终端可以显示提醒信息,图8中示例性的示出了提醒信息为“用户A和用户B均匹配成功,请两位改变动作”的字样,以提醒用户A和用户B改变动作,以确定目标用户。例如,用户A和用户B在第一图像中的动作信息均与对应的预设动作信息相同,但其实真正用户期望显示的是与用户A绑定的内容。对应的,用户A和用户B看到提醒信息后,用户A可以不改变动作,而用户B可以改变为与其预设动作信息不同的动作信息。可选的,用户B还可以通过离开图像采集区域、转头等方式改变动作,以使终端确定用户A为目标用户。应理解,图8中示例性的以终端为智能手机为例进行说明。据此,在用户看到显示的提醒信息后,会改变动作,进而避免了终端采集多个第二图像才能确定目标用户的问题。
S706,继续采集第二图像,根据第二图像中的M个用户的动作信息,确定目标用户。
本实施例中,终端可以继续采集第二图像,根据第二图像中的M个用户的动作信息确定目标用户的方式可以与上述实施例中在第一图像中确定目标用户的方式相同,在此不做赘述。
S707,根据目标用户的动作信息,显示与目标用户绑定的内容。
本实施例中的S703-S704和S707中的实施方式具体可以参照上述实施例中的S201-S202和S203中的相关描述,在此不做赘述。
S708,采集第三图像。
可选的,本实施例中终端在显示与目标用户绑定的内容后,还可以继续采集第三图像,以满足在终端显示内容的过程中用户想要继续切换显示的内容的需求。
S709,若第三图像中包括终端认证的至少一个用户的面部信息,则根据第三图像中至少一个用户的动作信息,确定新的目标用户。
本实施例中在第三图像中确定新的目标用户的方法与上述实施例中在第一图像中确定目标用户的方式可以相同,在此不做赘述。
S710,判断新的目标用户与目标用户是否相同;若是,则返回执行S707,若否,则执行S711。
本实施例中在第三图像中确定新的目标用户后,可以判断新的目标用户与目标用户是否为同一用户。可选的,可以根据新的目标用户的面部信息和目标用户的面部信息进行匹配的方式,判断新的目标用户与目标用户是否相同。其中,若新的目标用户的面部信息和目标用户的面部信息匹配成功,则确定新的目标用户与目标用户相同,若新的目标用户的面部信息和目标用户的面部信息匹配失败,则确定新的目标用户与目标用户不同。
S711,显示与新的目标用户绑定的内容。
终端在确定新的目标用户后,可以根据新的目标用户在第三图像中的动作信息,显示与新的目标用户绑定的内容。其中,新的目标用户绑定的内容为:预先存储在终端中的与新的目标用户在第三图像中的动作信息对应的内容。
本实施例中,在第一图像中获取的N个用户的动作信息中,存在M个用户的动作信息均与对应的预设动作信息相同时,可以显示提醒信息,提醒信息用于提醒M个用户改变动作,继续采集第二图像,根据第二图像中的M个用户的动作信息,确定目标用户,进一步的显示与目标用户绑定的内容。本实施例中提供的基于用户的动作信息的交互方法可以快速、有效地确定目标对象,提高交互效率。另,本实施例中还可以在显示与目标用户绑定的内容后,根据继续采集的第三图像确定目标用户是否发生变化,能够实现在目标用户发生变化时,切换显示的内容,提高了交互过程的灵活性。
图9为本申请提供的基于用户的动作信息的交互装置的结构示意图一。该基于用户的动作信息的交互装置可以为终端或设置在终端中的芯片。如图9所示,该基于用户的动作信息的交互装置900包括:处理模块901和显示模块902。
处理模块901,用于判断所采集的第一图像中是否包括终端认证的N个用户的面部信息,其中,N为大于或等于2的整数;若第一图像中包括终端认证的N个用户的面部信息,则识别第一图像中N个用户的动作信息;根据N个用户的动作信息和预设动作信息,确定N个用户中的目标用户,目标用户在第一图像中的动作信息与预设动作信息相同。
显示模块902,用于根据目标用户在第一图像中的动作信息,显示与目标用户绑定的内容。
本实施例提供的基于用户的动作信息的交互装置与上述基于用户的动作信息的交互方法实现的原理和技术效果类似,在此不作赘述。
可选的,图10为本申请提供的基于用户的动作信息的交互装置的结构示意图二。如图10所示,该基于用户的动作信息的交互装置900还包括:收发模块903和采集模块904。
可选的,采集模块904,用于若N个用户的动作信息中,存在M个用户的动作信息均与对应的预设动作信息相同,则继续采集第二图像,其中,M为大于或等于2的整数,且M小于或等于N。
可选的,处理模块901,具体用于根据第二图像中的多个用户的动作信息,确定目标用户。
可选的,显示模块902,还用于显示提醒信息,提醒信息用于提醒多个用户改变动作。
可选的,处理模块901,具体用于若N个用户的动作信息中,存在单一用户的动作信息与对应的预设动作信息相同,则确定单一用户为目标用户。
可选的,采集模块904,还用于采集第三图像。
对应的,处理模块901,还用于若第三图像中包括终端认证的至少一个用户的面部信息,则根据第三图像中至少一个用户的动作信息,确定新的目标用户;判断新的目标用户与目标用户是否相同。
显示模块902,还用于在新的目标用户与目标用户不同时,显示与新的目标用户绑定的内容。
收发模块903,用于接收唤醒指令,以将终端从睡眠状态唤醒进入唤醒状态。
对应的,采集模块904,用于在终端进唤醒状态后,采集第一图像。
可选的,动作信息包括:面部动作和/或肢体动作。
可选的,电子设备为影音设备,与目标用户绑定的内容为影音设备中的频道或节目。
图11为本申请提供的电子设备的结构示意图。该电子设备例如可以是终端设备,比如智能手机、平板电脑、计算机、影音设备等。如图11所示,该电子设备1100包括:存储器1101和至少一个处理器1102。
存储器1101,用于存储程序指令。
处理器1102,用于在程序指令被执行时实现本实施例中的基于用户的动作信息的交互方法,具体实现原理可参见上述实施例,本实施例此处不再赘述。
该电子设备1100还可以包括及输入/输出接口1103。
输入/输出接口1103可以包括独立的输出接口和输入接口,也可以为集成输入和输出的集成接口。其中,输出接口用于输出数据,输入接口用于获取输入的数据。
本申请还提供一种可读存储介质,可读存储介质中存储有执行指令,当电子设备的至少一个处理器执行该执行指令时,当计算机执行指令被处理器执行时,实现上述实施例中的基于用户的动作信息的交互方法。
本申请还提供一种程序产品,该程序产品包括执行指令,该执行指令存储在可读存储介质中。电子设备的至少一个处理器可以从可读存储介质读取该执行指令,至少一个处理器执行该执行指令使得电子设备实施上述的各种实施方式提供的基于用户的动作信息的交互方法。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个模块或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或模块的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理模块,即可以位于一个地方,或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能模块可以集成在一个处理模块中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用硬件加软件功能模块的形式实现。
上述以软件功能模块的形式实现的集成的模块,可以存储在一个计算机可读取存储介质中。上述软件功能模块存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(英文:processor)执行本申请各个实施例所述方法的部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(英文:Read-Only Memory,简称:ROM)、随机存取存储器(英文:Random Access Memory,简称:RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
在上述终端设备的实施例中,应理解,处理器可以是中央处理单元(英文:CentralProcessing Unit,简称:CPU),还可以是其他通用处理器、数字信号处理器(英文:DigitalSignal Processor,简称:DSP)、专用集成电路(英文:Application Specific IntegratedCircuit,简称:ASIC)等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

Claims (18)

1.一种基于用户的动作信息的交互方法,其特征在于,包括:
判断所采集的第一图像中是否包括终端认证的N个用户的面部信息,其中,N为大于或等于2的整数;
若所述第一图像中包括所述终端认证的N个用户的面部信息,则识别所述第一图像中所述N个用户的动作信息;
根据所述N个用户的动作信息和预设动作信息,确定所述N个用户中的目标用户,所述目标用户在所述第一图像中的动作信息与所述预设动作信息相同;以及
根据所述目标用户在所述第一图像中的动作信息,显示与所述目标用户绑定的内容。
2.根据权利要求1所述的方法,其特征在于,所述确定所述N个用户中的目标用户,包括:
若所述N个用户的动作信息中,存在M个用户的动作信息均与对应的预设动作信息相同,则继续采集第二图像,其中,M为大于或等于2的整数,且所述M小于或等于所述N;以及
根据所述第二图像中的所述M个用户的动作信息,确定所述目标用户。
3.根据权利要求2所述的方法,其特征在于,所述继续采集第二图像之前,还包括:
显示提醒信息,所述提醒信息用于提醒所述M个用户改变动作。
4.根据权利要求1所述的方法,其特征在于,所述确定所述N个用户中的目标用户,包括:
若所述N个用户的动作信息中,存在单一用户的动作信息与所述的预设动作信息相同,则确定所述单一用户为所述目标用户。
5.根据权利要求1所述的方法,其特征在于,所述显示与所述目标用户绑定的内容后,还包括:
采集第三图像;
若所述第三图像中包括终端认证的至少一个用户的面部信息,则根据所述第三图像中所述至少一个用户的动作信息,确定新的目标用户;
判断所述新的目标用户与所述目标用户是否相同;以及
若否,则显示与所述新的目标用户绑定的内容。
6.根据权利要求1所述的方法,其特征在于,所述判断所采集的第一图像中是否包括终端认证的N个用户的面部信息之前,还包括:
接收用户输入的唤醒指令,以将所述终端从睡眠状态唤醒进入唤醒状态;以及
采集所述第一图像。
7.根据权利要求1所述的方法,其特征在于,所述动作信息包括:面部动作和/或肢体动作。
8.根据权利要求1所述的方法,其特征在于,所述终端为影音设备,与所述目标用户绑定的内容为所述影音设备中的频道或节目。
9.一种基于用户的动作信息的交互装置,其特征在于,包括:
处理模块,用于判断所采集的第一图像中是否包括终端认证的N个用户的面部信息,其中,N为大于或等于2的整数;若所述第一图像中包括所述终端认证的N个用户的面部信息,则识别所述第一图像中所述N个用户的动作信息;根据所述N个用户的动作信息和预设动作信息,确定所述N个用户中的目标用户,所述目标用户在所述第一图像中的动作信息与所述预设动作信息相同;
显示模块,用于根据所述目标用户在所述第一图像中的动作信息,显示与所述目标用户绑定的内容。
10.根据权利要求9所述的装置,其特征在于,所述装置还包括:采集模块;
所述采集模块,用于若所述N个用户的动作信息中,存在M个用户的动作信息均与对应的预设动作信息相同,则继续采集第二图像,其中,M为大于或等于2的整数,且所述M小于或等于所述N;
所述处理模块,具体用于根据所述第二图像中的所述M个用户的动作信息,确定所述目标用户。
11.根据权利要求10所述的装置,其特征在于,所述显示模块,还用于显示提醒信息,所述提醒信息用于提醒所述M个用户改变动作。
12.根据权利要求9所述的装置,其特征在于,所述处理模块,具体用于若所述N个用户的动作信息中,存在单一用户的动作信息与对应的预设动作信息相同,则确定所述单一用户为所述目标用户。
13.根据权利要求9所述的装置,其特征在于,所述采集模块,还用于采集第三图像;
所述处理模块,还用于若所述第三图像中包括与所述终端认证的至少一个用户的面部信息,则根据所述第三图像中所述至少一个用户的动作信息,确定新的目标用户,并判断所述新的目标用户与所述目标用户是否相同;
所述显示模块,还用于在新的目标用户与所述目标用户不同时,显示与所述新的目标用户绑定的内容。
14.根据权利要求9所述的装置,其特征在于,所述装置还包括:收发模块和采集模块;
所述收发模块,用于接收用户输入的唤醒指令,以以将所述终端从睡眠状态唤醒进入唤醒状态;以及
所述采集模块,用于采集所述第一图像。
15.根据权利要求9所述的装置,其特征在于,所述动作信息包括:面部动作和/或肢体动作。
16.根据权利要求9所述的装置,其特征在于,所述终端为影音设备,与所述目标用户绑定的内容为所述影音设备中的频道或节目。
17.一种电子设备,其特征在于,包括:至少一个处理器和存储器;
所述存储器存储计算机执行指令;
所述至少一个处理器执行所述存储器存储的计算机执行指令,使得所述电子设备执行权利要求1-8任一项所述的方法。
18.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机执行指令,当所述计算机执行指令被处理器执行时,实现权利要求1-8任一项所述的方法。
CN201910491719.2A 2019-06-06 2019-06-06 基于用户的动作信息的交互方法、装置和电子设备 Pending CN110197171A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201910491719.2A CN110197171A (zh) 2019-06-06 2019-06-06 基于用户的动作信息的交互方法、装置和电子设备
US16/703,687 US20200387695A1 (en) 2019-06-06 2019-12-04 Interactive method and apparatus based on user action information, and electronic device
EP19213643.0A EP3748980A1 (en) 2019-06-06 2019-12-04 Interactive method and apparatus based on user action information, and electronic device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910491719.2A CN110197171A (zh) 2019-06-06 2019-06-06 基于用户的动作信息的交互方法、装置和电子设备

Publications (1)

Publication Number Publication Date
CN110197171A true CN110197171A (zh) 2019-09-03

Family

ID=67754179

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910491719.2A Pending CN110197171A (zh) 2019-06-06 2019-06-06 基于用户的动作信息的交互方法、装置和电子设备

Country Status (3)

Country Link
US (1) US20200387695A1 (zh)
EP (1) EP3748980A1 (zh)
CN (1) CN110197171A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113743282A (zh) * 2021-08-30 2021-12-03 深圳Tcl新技术有限公司 内容搜索方法、装置、电子设备和计算机可读存储介质
WO2022214004A1 (zh) * 2021-04-08 2022-10-13 华为技术有限公司 一种目标用户确定方法、电子设备和计算机可读存储介质

Citations (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103258556A (zh) * 2012-02-20 2013-08-21 联想(北京)有限公司 一种信息处理的方法及装置
CN103514240A (zh) * 2012-11-29 2014-01-15 Tcl集团股份有限公司 一种基于遥控器的家庭成员关系挖掘方法及系统
CN103513906A (zh) * 2012-06-28 2014-01-15 联想(北京)有限公司 一种命令识别方法、装置和电子设备
CN104049721A (zh) * 2013-03-11 2014-09-17 联想(北京)有限公司 信息处理方法及电子设备
US9026941B1 (en) * 2014-10-15 2015-05-05 Blackwerks LLC Suggesting activities
CN104635920A (zh) * 2013-11-13 2015-05-20 欧姆龙株式会社 姿势识别装置及姿势识别装置的控制方法
CN105187913A (zh) * 2015-09-07 2015-12-23 成都杰迈科技有限责任公司 一种可定制节目单的机顶盒
CN106303741A (zh) * 2016-08-25 2017-01-04 武克易 基于特征数据查找的广告播放系统
CN106662932A (zh) * 2016-07-07 2017-05-10 深圳狗尾草智能科技有限公司 一种基于意图识别控制家电的方法、系统及机器人
CN106951071A (zh) * 2017-03-01 2017-07-14 海尔优家智能科技(北京)有限公司 一种基于动作捕捉的设备控制方法和装置
CN107493495A (zh) * 2017-08-14 2017-12-19 深圳市国华识别科技开发有限公司 交互位置确定方法、系统、存储介质和智能终端
CN107580261A (zh) * 2017-09-30 2018-01-12 深圳市九洲电器有限公司 机顶盒多用户管理方法及系统
CN107888985A (zh) * 2017-11-28 2018-04-06 四川长虹电器股份有限公司 基于多用户的智能电视推荐系统及方法
CN107948743A (zh) * 2017-11-29 2018-04-20 腾讯科技(深圳)有限公司 视频推送方法及其装置、存储介质
CN108052079A (zh) * 2017-12-12 2018-05-18 北京小米移动软件有限公司 设备控制方法、装置、设备控制装置及存储介质
CN108401186A (zh) * 2018-04-28 2018-08-14 东莞市华睿电子科技有限公司 一种基于人脸识别的智能电视显示控制方法
US20180324490A1 (en) * 2017-05-02 2018-11-08 International Business Machines Corporation Recommending content of streaming media by a cognitive system in an infrastructure
CN109146629A (zh) * 2018-08-16 2019-01-04 连云港伍江数码科技有限公司 目标对象的锁定方法、装置、计算机设备和存储介质
CN109224437A (zh) * 2018-08-28 2019-01-18 腾讯科技(深圳)有限公司 一种应用场景的交互方法和终端以及存储介质
WO2019025790A1 (en) * 2017-07-31 2019-02-07 Admoments Holdings Limited INTELLIGENT DISPLAY SYSTEM

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8261090B1 (en) * 2011-09-28 2012-09-04 Google Inc. Login to a computing device based on facial recognition
EP2595031A3 (en) * 2011-11-16 2016-01-06 Samsung Electronics Co., Ltd Display apparatus and control method thereof
KR101978205B1 (ko) * 2012-06-07 2019-05-14 엘지전자 주식회사 이동 단말기 및 그 제어 방법, 이를 위한 기록 매체
US9600711B2 (en) * 2012-08-29 2017-03-21 Conduent Business Services, Llc Method and system for automatically recognizing facial expressions via algorithmic periocular localization
US10079827B2 (en) * 2015-03-16 2018-09-18 Ricoh Company, Ltd. Information processing apparatus, information processing method, and information processing system
JP2017033547A (ja) * 2015-08-05 2017-02-09 キヤノン株式会社 情報処理装置及びその制御方法及びプログラム
US10726836B2 (en) * 2016-08-12 2020-07-28 Kt Corporation Providing audio and video feedback with character based on voice command
CN109492595B (zh) * 2018-11-19 2020-10-16 浙江传媒学院 适用于固定群体的行为预测方法和系统

Patent Citations (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103258556A (zh) * 2012-02-20 2013-08-21 联想(北京)有限公司 一种信息处理的方法及装置
CN103513906A (zh) * 2012-06-28 2014-01-15 联想(北京)有限公司 一种命令识别方法、装置和电子设备
CN103514240A (zh) * 2012-11-29 2014-01-15 Tcl集团股份有限公司 一种基于遥控器的家庭成员关系挖掘方法及系统
CN104049721A (zh) * 2013-03-11 2014-09-17 联想(北京)有限公司 信息处理方法及电子设备
CN104635920A (zh) * 2013-11-13 2015-05-20 欧姆龙株式会社 姿势识别装置及姿势识别装置的控制方法
US9026941B1 (en) * 2014-10-15 2015-05-05 Blackwerks LLC Suggesting activities
CN105187913A (zh) * 2015-09-07 2015-12-23 成都杰迈科技有限责任公司 一种可定制节目单的机顶盒
CN106662932A (zh) * 2016-07-07 2017-05-10 深圳狗尾草智能科技有限公司 一种基于意图识别控制家电的方法、系统及机器人
CN106303741A (zh) * 2016-08-25 2017-01-04 武克易 基于特征数据查找的广告播放系统
CN106951071A (zh) * 2017-03-01 2017-07-14 海尔优家智能科技(北京)有限公司 一种基于动作捕捉的设备控制方法和装置
US20180324490A1 (en) * 2017-05-02 2018-11-08 International Business Machines Corporation Recommending content of streaming media by a cognitive system in an infrastructure
WO2019025790A1 (en) * 2017-07-31 2019-02-07 Admoments Holdings Limited INTELLIGENT DISPLAY SYSTEM
CN107493495A (zh) * 2017-08-14 2017-12-19 深圳市国华识别科技开发有限公司 交互位置确定方法、系统、存储介质和智能终端
CN107580261A (zh) * 2017-09-30 2018-01-12 深圳市九洲电器有限公司 机顶盒多用户管理方法及系统
CN107888985A (zh) * 2017-11-28 2018-04-06 四川长虹电器股份有限公司 基于多用户的智能电视推荐系统及方法
CN107948743A (zh) * 2017-11-29 2018-04-20 腾讯科技(深圳)有限公司 视频推送方法及其装置、存储介质
CN108052079A (zh) * 2017-12-12 2018-05-18 北京小米移动软件有限公司 设备控制方法、装置、设备控制装置及存储介质
CN108401186A (zh) * 2018-04-28 2018-08-14 东莞市华睿电子科技有限公司 一种基于人脸识别的智能电视显示控制方法
CN109146629A (zh) * 2018-08-16 2019-01-04 连云港伍江数码科技有限公司 目标对象的锁定方法、装置、计算机设备和存储介质
CN109224437A (zh) * 2018-08-28 2019-01-18 腾讯科技(深圳)有限公司 一种应用场景的交互方法和终端以及存储介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022214004A1 (zh) * 2021-04-08 2022-10-13 华为技术有限公司 一种目标用户确定方法、电子设备和计算机可读存储介质
CN113743282A (zh) * 2021-08-30 2021-12-03 深圳Tcl新技术有限公司 内容搜索方法、装置、电子设备和计算机可读存储介质

Also Published As

Publication number Publication date
US20200387695A1 (en) 2020-12-10
EP3748980A1 (en) 2020-12-09

Similar Documents

Publication Publication Date Title
US10936709B2 (en) Electronic device and method for controlling the same
CN105975182B (zh) 一种终端操作方法及终端
CN107844748A (zh) 身份验证方法、装置、存储介质和计算机设备
JP2002229955A (ja) 情報端末装置及び認証システム
CN108319837A (zh) 电子设备、人脸模板录入方法及相关产品
RU2710941C2 (ru) Устройство для проведения электронной конференции, способ управления этим устройством и цифровое перо
CN102509053A (zh) 用于验证授权的方法、处理器、设备和移动终端
CN106557678A (zh) 一种智能终端模式切换方法及其装置
EP1741049A2 (en) Mobile identification system and method
WO2017070971A1 (zh) 一种面部验证的方法和电子设备
CN103279764A (zh) 基于人脸识别的网络实名认证系统
CN102890777B (zh) 可识别面部表情的电脑系统
CN106503655A (zh) 一种基于人脸识别技术的电子签名方法和验签方法
CN110197171A (zh) 基于用户的动作信息的交互方法、装置和电子设备
CN110248025A (zh) 多指纹与掌纹信息的身份识别方法、装置及存储介质
CN103984931B (zh) 一种信息处理方法及第一电子设备
CN207965988U (zh) 具有人脸识别功能的电子班牌
CN102004909A (zh) 一种处理身份信息的方法与系统
CN109948318A (zh) 一种用户认证方法、装置及设备
CN109816543A (zh) 一种图像查找方法及装置
CN108174141A (zh) 一种视频通信的方法和一种移动装置
CN108388842B (zh) 智能提醒方法及相关产品
CN203552331U (zh) 一种智能识别门禁系统
CN109858219A (zh) 用户注册方法、装置、电子设备及计算机可读存储介质
CN110516426A (zh) 身份认证方法、认证终端、装置及可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20190903

WD01 Invention patent application deemed withdrawn after publication