CN103576839B - 基于面部识别来控制终端操作的设备和方法 - Google Patents

基于面部识别来控制终端操作的设备和方法 Download PDF

Info

Publication number
CN103576839B
CN103576839B CN201210256718.8A CN201210256718A CN103576839B CN 103576839 B CN103576839 B CN 103576839B CN 201210256718 A CN201210256718 A CN 201210256718A CN 103576839 B CN103576839 B CN 103576839B
Authority
CN
China
Prior art keywords
image
face
user
incoming call
facial characteristics
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210256718.8A
Other languages
English (en)
Other versions
CN103576839A (zh
Inventor
朱瑞敏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Guangzhou Mobile R&D Center
Samsung Electronics Co Ltd
Original Assignee
Samsung Guangzhou Mobile R&D Center
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Guangzhou Mobile R&D Center, Samsung Electronics Co Ltd filed Critical Samsung Guangzhou Mobile R&D Center
Priority to CN201210256718.8A priority Critical patent/CN103576839B/zh
Publication of CN103576839A publication Critical patent/CN103576839A/zh
Application granted granted Critical
Publication of CN103576839B publication Critical patent/CN103576839B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

提供一种基于面部识别来控制终端操作的设备和方法。所述设备包括:图像采集单元,用于在操作控制单元的控制下采集用户的面部图像;图像识别单元,用于从由图像采集单元采集的面部图像中识别出面部特征;以及操作控制单元,用于控制图像采集单元来采集用户的面部图像,并基于由图像识别单元识别出的不同面部特征来控制终端以不同方式执行操作。

Description

基于面部识别来控制终端操作的设备和方法
技术领域
本发明涉及控制终端操作的技术,尤其涉及一种基于用户的不同面部特征来控制终端以不同方式执行操作的设备和方法。
背景技术
随着信息技术的发展,诸如移动电话、平板电脑、多媒体播放器的各种终端成为人们生活中的必需品,这使得人们会非常频繁地使用这些终端。相应地,在许多不方便直接操作终端的情况下,用户便难以通过有效的方式对终端执行相应的操作。
为了解决这一问题,现有技术中采用了声音识别、手势识别等辅助手段来控制终端的操作。然而,声音识别对背景噪声的要求较高,不适用于比较嘈杂的环境。另一方面,尽管手势识别能够帮助执行诸如接听呼叫等操作,但是在很多不便直接操作终端的情况下,用户的双手可能被完全占用,以致无法做出可被识别的手势。而且,现有技术中对声音或图像的识别精度均受到一定的限制,因此,很可能出现无法正确识别用户意图的情况,导致未能执行相应操作或错误地执行了其它操作。
因此,需要一种在用户不便用手操作终端的情况下,能够有效地控制终端执行相应操作的技术方案。
发明内容
本发明的目的在于提供一种能够在不方便直接操作终端的情况下,基于面部识别来有效地控制终端以不同方式执行期望的操作的设备和方法。
根据本发明的一方面,提供一种基于面部识别来控制终端操作的设备,所述设备包括:图像采集单元,用于在操作控制单元的控制下采集用户的面部图像;图像识别单元,用于从由图像采集单元采集的面部图像中识别出面部特征;以及操作控制单元,用于控制图像采集单元来采集用户的面部图像,并基于由图像识别单元识别出的不同面部特征来控制终端以不同方式执行操作。
所述操作可包括终端针对呼叫执行的操作。
所述设备可还包括:输出单元,用于在操作控制单元的控制下输出用于提醒用户所述图像采集单元即将采集用户的面部图像的提示信号,其中,所述提示信号为以下项中的至少一个:提示音频、提示视频、提示图像、提示文本。
当终端接收到来话呼叫时,操作控制单元可控制图像采集单元开始在预定时间段期间采集用户的面部图像,或控制图像采集单元在预定时间段之后开始采集用户的面部图像,当图像识别单元从所述面部图像中识别出的面部特征指示应答所述来话呼叫时,操作控制单元控制终端以不同的接听方式应答所述来话呼叫,当图像采集单元持续采集不到用户的面部图像或图像识别单元从所述面部图像中识别出的面部特征指示拒绝所述来话呼叫时,操作控制单元控制终端拒绝所述来话呼叫。
当终端接收到来话呼叫时,操作控制单元可首先控制输出单元输出提示信号,并控制图像采集单元在所述提示信号被输出预定时间之后开始采集用户的面部图像,当图像识别单元从所述面部图像中识别出的面部特征指示应答所述来话呼叫时,操作控制单元根据所述面部特征来控制终端以不同的接听方式应答所述来话呼叫。
指示应答所述来话呼叫的面部特征可包括预先设置的应答面部区域或应答面部动作,其中,所述应答面部区域或应答面部动作被设置为具有鲜明的特点,从而防止对面部特征的误判。
所述应答面部区域可指带有耳朵的侧脸或嘴巴张开的正脸,所述应答面部动作是指点头或嘴巴张开。
当指示应答所述来话呼叫的面部特征是带有耳朵的侧脸时,操作控制单元可控制终端以普通方式应答所述来话呼叫;当指示应答所述来话呼叫的面部特征是嘴巴张开的正脸时,操作控制单元可控制终端以免提方式或视频通话方式应答所述来话呼叫。
在所述来话呼叫的通话期间,操作控制单元可根据用户与终端之间的距离变化来相应地调整终端的音量,其中,由图像识别单元识别出的面部特征来确定用户与终端之间的距离变化。
在所述来话呼叫的通话期间,操作控制单元可控制图像采集单元周期性地采集用户的面部图像,并且图像识别单元从所述面部图像中识别面部特征,其中,当图像识别单元从所述面部图像中识别出的面部特征指示不同于当前的接听方式时,操作控制单元根据所述面部特征来切换终端的接听方式,当图像采集单元持续采集不到用户的面部图像或图像识别单元从所述面部图像中识别出的面部特征指示结束所述来话呼叫时,操作控制单元控制终端结束所述来话呼叫。
指示结束所述来话呼叫的面部特征可包括预先设置的结束面部区域或结束面部动作,其中,所述结束面部区域或结束面部动作被设置为具有鲜明的特点,从而防止对面部特征的误判。
所述结束面部区域可指后脑,所述结束面部动作可指摇头。
在所述来话呼叫的通话期间,操作控制单元可在到达计费时间单位之前的预定时间控制输出单元输出提示信号,并随后控制图像采集单元采集用户的面部图像,从而使用户能够在计费时间单位到达之前指示结束所述来话呼叫。
根据本发明的另一方面,提供一种基于面部识别来控制终端操作的方法,所述方法包括:采集用户的面部图像;从采集的面部图像中识别出面部特征;以及基于识别出的不同面部特征来控制终端以不同方式执行操作。
所述方法可还包括:在采集用户的面部图像之前,输出用于提醒用户所述图像采集单元即将采集用户的面部图像的提示信号,其中,所述提示信号为以下项中的至少一个:提示音频、提示视频、提示文本。
根据本发明的基于面部识别来控制终端操作的设备和方法,可在不方便直接用手操作终端的情况下,通过识别出的不同面部特征来控制终端以不同方式执行操作,在此基础上,还可提高基于面部识别来控制终端进行操作的准确性和便利性。
附图说明
通过下面结合附图进行的对实施例的描述,本发明的上述和/或其它目的和优点将会变得更加清楚,其中:
图1是示出根据本发明示例性实施例的基于面部识别来控制终端操作的设备的框图;
图2是示出根据本发明示例性实施例的基于面部识别来控制终端操作的方法的流程图;
图3是示出根据本发明另一示例性实施例的在接收到来话呼叫时采集面部图像的方法的流程图;
图4是示出根据本发明另一示例性实施例的基于面部识别来应答来话呼叫的方法的流程图;
图5是示出根据本发明另一示例性实施例的基于面部识别来控制终端音量的方法的流程图;以及
图6是示出根据本发明另一示例性实施例的基于面部识别来结束来话呼叫的方法的流程图。
具体实施方式
现将详细参照本发明的实施例,所述实施例的示例在附图中示出,其中,相同的标号始终指的是相同的部件。以下将通过参照附图来说明所述实施例,以便解释本发明。
图1是示出根据本发明示例性实施例的基于面部识别来控制终端操作的设备的框图,所述基于面部识别来控制终端操作的设备包括图像采集单元10、图像识别单元20和操作控制单元30。
图像采集单元10用于在操作控制单元30的控制下采集用户的面部图像。作为示例,图像采集单元10可以是摄像头,该摄像头可采集各种格式的用户面部图像,例如,黑白图像、彩色图像或深度图像等。这里,图像采集单元10可采集静止图像或运动图像。
图像识别单元20用于从由图像采集单元10采集的面部图像中识别出面部特征。这里,图像识别单元20可采用任何图像识别技术来识别出面部特征,而且任何易于识别的面部特征均可被应用于本发明以解决相应的技术问题。
作为优选方式,图像识别单元20可识别出特定面部区域或面部动作来作为面部特征。为了实现良好的识别效果,作为示例,图像识别单元20可识别出诸如带有耳朵的侧脸或嘴巴张开的正脸等,也可识别出诸如点头或摇头等动作。
操作控制单元30用于控制图像采集单元10来采集用户的面部图像,并基于由图像识别单元20识别出的不同面部特征来控制终端以不同方式执行操作。具体说来,由于图像采集单元10的采集操作受控于操作控制单元30,因此可有效地控制采集图像的时机,而不需要图像采集单元10始终处于工作状态。此外,操作控制单元30基于由图像识别单元20识别出的不同面部特征来控制终端以不同方式执行操作。这里,识别出的面部特征可被用于确定终端执行操作的特定方式,作为示例,这种不同面部特征与执行操作的不同方式之间的对应关系可在终端出厂时被设置,也可由用户根据自己的需要来进行设置。或者,可通过相应的训练过程来得到面部特征与操作方式之间的对应关系。因此,不仅是特定面部区域或面部动作可对应于终端执行操作的特定方式,而且面部动作的组合或面部区域的变换也可被设置为对应于终端执行操作的特定方式。
此外,作为附加的优选方式,所述基于面部识别来控制终端操作的设备还可包括输出单元40,用于在操作控制单元30的控制下输出用于提醒用户所述图像采集单元10即将采集用户的面部图像的提示信号,其中,所述提示信号为提示音频、提示视频、提示图像或提示文本。作为优选方式,所述提示信号可以是上述信号之间的任意组合。由于输出单元40会在图像采集单元10实际开始采集用户的面部图像之前向用户输出提示信号,因此,可提醒用户调整好相应的面部动作,从而进一步提高面部识别的准确性和有效性。
以下将结合图2来描述根据本发明示例性实施例的基于面部识别来控制终端操作的方法。如图2所示,在步骤S100,由图像采集单元10采集用户的面部图像。作为示例,图像采集单元10可在步骤S100采集各种格式的用户面部图像,例如,黑白图像、彩色图像或深度图像等。此外,图像采集单元10在步骤S100采集的图像不仅可以是静止图像,还可以是运动图像。
接着,在步骤S200,由图像识别单元20从由图像采集单元10采集的面部图像中识别出面部特征。作为示例,图像识别单元20可在步骤S200采用任何图像识别技术来识别出面部特征。并且,图像识别单元20可在步骤S200识别出特定面部区域或面部动作来作为面部特征。例如,图像识别单元20在步骤S200识别出的面部特征可包括诸如带有耳朵的侧脸或嘴巴张开的正脸等,也可包括诸如点头或摇头等动作。
在操作S300,由操作控制单元30基于由图像识别单元20识别出的不同面部特征来控制终端以不同方式执行操作。这里,识别出的面部特征可被用于确定终端执行操作的特定方式,作为示例,这种不同面部特征与执行操作的不同方式之间的对应关系可在终端出厂时被设置,也可由用户根据自己的需要来进行设置。或者,可通过相应的训练过程来得到面部特征与操作方式之间的对应关系。因此,操作控制单元30在步骤S300不仅可基于特定面部区域或面部动作来控制终端执行操作的特定方式,而且可基于面部动作的组合或面部区域的变换来控制终端执行操作的特定方式。
作为优选方式,图2所示的方法还在步骤S100之前由输出单元40输出提示信号,以提醒用户所述图像采集单元10即将采集用户的面部图像。通过这一方式,可提醒用户调整好相应的面部动作,从而进一步提高面部识别的准确性和有效性。
本领域技术人员应理解:可将结合图2描述的方法应用于各种不同的终端操作情况,并针对相应的情况来设置附加的处理步骤,以进一步提高控制终端进行操作的有效性。
作为示例,图1所示的设备可被应用于控制终端以不同方式针对来话呼叫执行操作。在这种情况下,当终端接收到来话呼叫时,操作控制单元30可控制图像采集单元10开始在预定时间段期间采集用户的面部图像,或控制图像采集单元10在预定时间段之后开始采集用户的面部图像,当图像识别单元20从所述面部图像中识别出的面部特征指示应答所述来话呼叫时,操作控制单元30控制终端以不同的接听方式应答所述来话呼叫,当图像采集单元10一直采集不到用户的面部图像或图像识别单元10从所述面部图像中识别出的面部特征指示拒绝所述来话呼叫时,操作控制单元30控制终端拒绝所述来话呼叫。
根据本发明的示例性实施例,在所述来话呼叫的通话期间,操作控制单元30可控制图像采集单元10周期性地采集用户的面部图像,并且图像识别单元20从所述面部图像中识别面部特征,其中,当图像识别单元20从所述面部图像中识别出的面部特征指示不同于当前的接听方式时,操作控制单元30根据所述面部特征来切换终端的接听方式,当图像采集单元20持续采集不到用户的面部图像或图像识别单元20从所述面部图像中识别出的面部特征指示结束所述来话呼叫时,操作控制单元30控制终端结束所述来话呼叫。
以下将结合图3到图6来描述根据本发明各个示例性实施例的基于面部识别来控制终端针对来话呼叫执行操作的方法。
图3是示出根据本发明另一示例性实施例的在接收到来话呼叫时采集面部图像的方法的流程图。参照图3所示的方法,在步骤S10,终端接收到来话呼叫。然后,在步骤S20,操作控制单元30首先控制输出单元40输出提示信号,以提醒用户所述图像采集单元10即将采集用户的面部图像。作为示例,所述提示信号为提示音频、提示视频、提示图像或提示文本。作为优选方式,所述提示信号可以是上述信号之间的任意组合。例如,输出单元40可输出单一频率的声音、带有旋律的音乐或提醒用户进行相应动作的说明性语句(例如,“请张开嘴巴以接听呼叫”、“请将耳朵贴近以接听呼叫”)等。或者,输出单元40可在输出上述说明性语句的同时还输出相关的示例图(如,张开的嘴巴或贴近的耳朵等)。在输出单元40输出提示信号之后,操作控制单元30在步骤S30判断预定时间是否过去,这里的预定时间可被设置为用户准备好进行面部采集的时间。当所述预定时间过去之后,在步骤S100,操作控制单元30才控制图像采集单元10开始采集用户的面部图像。
可以看出,由于操作控制单元30对输出单元40和图像采集单元10的上述控制流程,使得在终端接收到来话呼叫之后,用户可被及时提醒即将开始面部采集,从而图像采集单元10的采集结果更为准确。此外,还能够有效地控制图像采集单元10的工作时间,有利于延长图像采集单元10的使用寿命。
图4是示出根据本发明另一示例性实施例的基于面部识别来应答来话呼叫的方法的流程图。参照图4所示的方法,在步骤S200,由图像识别单元20从由图像采集单元10采集的面部图像中识别出不同的面部特征。这里,如果图像采集单元10在预定的采集时限内一直采集不到用户的面部图像,则操作控制单元30控制终端拒绝所述来话呼叫。
如果图像采集单元10在预定的采集实现内采集到用户的面部图像,则在步骤S210,操作单元30确定由图像识别单元20识别出的面部特征是否指示应答所述来话呼叫。
当图像识别单元20从所述面部图像中识别出的面部特征指示应答所述来话呼叫时,操作控制单元30在步骤S230根据所述面部特征来控制终端以不同的接听方式应答所述来话呼叫。指示应答所述来话呼叫的面部特征包括预先设置的应答面部区域或应答面部动作,其中,所述应答面部区域(例如,带有耳朵的侧脸或嘴巴张开的正脸)或应答面部动作(例如,点头或嘴巴张开)被设置为具有鲜明的特点,从而防止对面部特征的误判。
另外,当图像识别单元20在步骤S210识别出指示拒绝所述来话呼叫的面部特征时,在步骤S220,操作控制单元30控制终端拒绝所述来话呼叫。
作为优选方式,在操作S230,操作控制单元30可根据指示应答所述来话呼叫的具体面部特征来控制终端以不同的方式应答所述来话呼叫。例如,当指示应答所述来话呼叫的面部特征是带有耳朵的侧脸时,操作控制单元30控制终端以普通方式应答所述来话呼叫。当指示应答所述来话呼叫的面部特征是嘴巴张开的正脸时,操作控制单元30控制终端以免提方式或视频通话方式应答所述来话呼叫,从而更方便用户接听电话。针对视频通话方式,可将嘴巴闭合设置为拒绝来话呼叫的面部特征。
作为优选方式,在所述来话呼叫的通话期间,操作控制单元30控制图像采集单元10周期性地采集用户的面部图像,并且图像识别单元20从所述面部图像中识别面部特征,其中,当图像识别单元20从所述面部图像中识别出的面部特征指示不同于当前的接听方式时,操作控制单元30根据所述面部特征来切换终端的接听方式。例如,当有不相关的人靠近时,用户可将耳朵靠近图像采集单元10,以期望将当前的通话方式从视频通话方式或免提方式改变为普通方式,从而很好地保护隐私。另外,也可在电量不足的时候将视频通话方式切换为普通方式,从而很好地节省功耗。
图5是示出根据本发明另一示例性实施例的基于面部识别来控制终端音量的方法的流程图。参照图5所示的方法,在所述来话呼叫的通话期间,操作控制单元30可控制图像采集单元10持续采集用户的面部图像或周期性地采集用户的面部图像。然后,在步骤S200,由图像识别单元20从由图像采集单元10采集的面部图像中识别出面部特征。接下来,在操作S240,操作控制单元30基于由图像识别单元20识别出的面部特征来确定用户与终端之间的距离变化,并在步骤S250到S270根据确定的距离变化来相应地调整终端的音量。具体说来,当用户与终端之间的距离变远时,操作控制单元30可增加终端的音量。当用户与终端之间的距离保持不变时,操作控制单元30可保持终端的音量。当用户与终端之间的距离变近时,操作控制单元30可减小终端的音量。应理解:操作控制单元30可按照完全相反的方式来根据距离变化来调整音量,即,当距离变远时减小终端的音量,而当距离变近时增加终端的音量。上述方式能够实现呼叫操作的音量灵活控制,便于在人多嘈杂的情况下很好地完成通话。
图6是示出根据本发明另一示例性实施例的基于面部识别来结束来话呼叫的方法的流程图。根据本发明的该示例性实施例,用户可方便地主动结束来话呼叫。具体说来,在所述来话呼叫的通话期间,操作控制单元30可在步骤S15针对预定时间进行计时操作,并在计时操作结束之后,在步骤S20控制输出单元40输出相应的提示信号。这里,作为优选方式,所述预定时间相应于计费时间单位,从而操作控制单元30可在每个计费时间单位到期之前通过控制输出单元40输出提示信号来提醒用户图像采集单元20即将开始采集用户的面部图像(或在每个计费时间单位到期之前预留出一定时间来输出提示信号,以便于用户准备好作出面部表情),这样,如果用户想要结束来话呼叫,则可以做出相应的面部动作或离开终端,从而在相应的计费时间单位之内结束来话呼叫。接着,在步骤S100,操作控制单元30控制图像采集单元10采集用户的面部图像,这里,当图像采集单元20持续采集不到用户的面部图像时,操作控制单元30控制终端结束所述来话呼叫。
在步骤S200,由图像识别单元20从由图像采集单元10采集的面部图像中识别出面部特征。接下来,在步骤S280,操作单元30确定由图像识别单元20识别出的面部特征是否指示结束所述来话呼叫。指示结束所述来话呼叫的面部特征可包括预先设置的结束面部区域或结束面部动作,其中,所述结束面部区域(例如,后脑)或结束面部动作(例如,摇头)被设置为具有鲜明的特点,从而防止对面部特征的误判。当在步骤S280确定识别出的面部特征并未指示结束所述来话呼叫时,处理返回步骤S15以重新开始下一周期的计时操作。否则,当在步骤S280确定识别出的面部特征指示结束所述来话呼叫时,在步骤S290,操作控制单元30控制终端结束所述来话呼叫。
应注意,在图6所示的示例性实施例中,可省略步骤S20,从而在不输出提示信号的情况下按照预定周期来采集面部图像。或者,还可进一步将步骤S15也省略,从而图像采集单元10被控制为持续采集用户的面部图像。此外,如果所述来话呼叫终止(例如,对方挂断电话或者其它原因通话终止),则操作控制单元30可进行控制,以停止图像采集单元10和图像识别单元20的操作。
根据本发明的基于面部识别来控制终端操作的设备和方法,可在不方便直接用手操作终端的情况下,通过不同的面部识别来控制终端以不同方式执行操作,在此基础上,还可提高基于面部识别来控制终端进行操作的准确性和便利性。
本发明的以上各个实施例仅仅是示例性的,而本发明并不受限于此。本领域技术人员应该理解:在不脱离本发明的原理和精神的情况下,可对这些实施例进行改变,其中,本发明的范围在权利要求及其等同物中限定。

Claims (14)

1.一种基于面部识别来控制终端操作的设备,所述设备包括:
图像采集单元,用于在操作控制单元的控制下采集用户的面部图像;
图像识别单元,用于从由图像采集单元采集的面部图像中识别出面部特征;以及
操作控制单元,用于控制图像采集单元来采集用户的面部图像,并基于由图像识别单元识别出的不同面部特征来控制终端以不同方式执行操作,
其中,在来话呼叫的通话期间,操作控制单元根据用户与终端之间的距离变化来相应地调整终端的音量,其中,基于由图像识别单元识别出的面部特征来确定用户与终端之间的距离变化。
2.如权利要求1所述的设备,其中,所述操作包括终端针对呼叫执行的操作。
3.如权利要求2所述的设备,还包括:
输出单元,用于在操作控制单元的控制下输出用于提醒用户所述图像采集单元即将采集用户的面部图像的提示信号,其中,所述提示信号为以下项中的至少一个:提示音频、提示视频、提示图像、提示文本。
4.如权利要求2所述的设备,其中,当终端接收到来话呼叫时,操作控制单元控制图像采集单元开始在预定时间段期间采集用户的面部图像,或控制图像采集单元在预定时间段之后开始采集用户的面部图像,当图像识别单元从所述面部图像中识别出的面部特征指示应答所述来话呼叫时,操作控制单元控制终端以不同的接听方式应答所述来话呼叫,当图像采集单元持续采集不到用户的面部图像或图像识别单元从所述面部图像中识别出的面部特征指示拒绝所述来话呼叫时,操作控制单元控制终端拒绝所述来话呼叫。
5.如权利要求3所述的设备,其中,当终端接收到来话呼叫时,操作控制单元首先控制输出单元输出提示信号,并控制图像采集单元在所述提示信号被输出预定时间之后开始采集用户的面部图像,当图像识别单元从所述面部图像中识别出的面部特征指示应答所述来话呼叫时,操作控制单元根据所述面部特征来控制终端以不同的接听方式应答所述来话呼叫。
6.如权利要求4或5所述的设备,其中,指示应答所述来话呼叫的面部特征包括预先设置的应答面部区域或应答面部动作,其中,所述应答面部区域或应答面部动作被设置为具有鲜明的特点,从而防止对面部特征的误判。
7.如权利要求6所述的设备,其中,所述应答面部区域是指带有耳朵的侧脸或嘴巴张开的正脸,所述应答面部动作是指点头或嘴巴张开。
8.如权利要求5所述的设备,其中,当指示应答所述来话呼叫的面部特征是带有耳朵的侧脸时,操作控制单元控制终端以普通方式应答所述来话呼叫;当指示应答所述来话呼叫的面部特征是嘴巴张开的正脸时,操作控制单元控制终端以免提方式或视频通话方式应答所述来话呼叫。
9.如权利要求8所述的设备,其中,在所述来话呼叫的通话期间,操作控制单元控制图像采集单元周期性地采集用户的面部图像,并且图像识别单元从所述面部图像中识别面部特征,其中,当图像识别单元从所述面部图像中识别出的面部特征指示不同于当前的接听方式时,操作控制单元根据所述面部特征来切换终端的接听方式,当图像采集单元持续采集不到用户的面部图像或图像识别单元从所述面部图像中识别出的面部特征指示结束所述来话呼叫时,操作控制单元控制终端结束所述来话呼叫。
10.如权利要求9所述的设备,其中,指示结束所述来话呼叫的面部特征包括预先设置的结束面部区域或结束面部动作,其中,所述结束面部区域或结束面部动作被设置为具有鲜明的特点,从而防止对面部特征的误判。
11.如权利要求10所述的设备,其中,所述结束面部区域是指后脑,所述结束面部动作是指摇头。
12.如权利要求9所述的设备,其中,在所述来话呼叫的通话期间,操作控制单元在到达计费时间单位之前的预定时间控制输出单元输出提示信号,并随后控制图像采集单元采集用户的面部图像,从而使用户能够在计费时间单位到达之前指示结束所述来话呼叫。
13.一种基于面部识别来控制终端操作的方法,所述方法包括:
采集用户的面部图像;
从采集的面部图像中识别出面部特征;以及
基于识别出的不同面部特征来控制终端以不同方式执行操作,
其中,在来话呼叫的通话期间,根据用户与终端之间的距离变化来相应地调整终端的音量,其中,基于识别出的面部特征来确定用户与终端之间的距离变化。
14.如权利要求13所述的方法,还包括:
在采集用户的面部图像之前,输出用于提醒用户图像采集单元即将采集用户的面部图像的提示信号,其中,所述提示信号为以下项中的至少一个:提示音频、提示视频、提示文本。
CN201210256718.8A 2012-07-24 2012-07-24 基于面部识别来控制终端操作的设备和方法 Active CN103576839B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210256718.8A CN103576839B (zh) 2012-07-24 2012-07-24 基于面部识别来控制终端操作的设备和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210256718.8A CN103576839B (zh) 2012-07-24 2012-07-24 基于面部识别来控制终端操作的设备和方法

Publications (2)

Publication Number Publication Date
CN103576839A CN103576839A (zh) 2014-02-12
CN103576839B true CN103576839B (zh) 2019-03-12

Family

ID=50048800

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210256718.8A Active CN103576839B (zh) 2012-07-24 2012-07-24 基于面部识别来控制终端操作的设备和方法

Country Status (1)

Country Link
CN (1) CN103576839B (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103957331B (zh) * 2014-04-28 2017-08-04 中国联合网络通信集团有限公司 行为信息发送方法及系统、通话接入承载管控方法及系统
CN104394276A (zh) * 2014-11-28 2015-03-04 深圳市中兴移动通信有限公司 一种移动终端及其在通话中自动免提的方法和装置
JP2016161830A (ja) * 2015-03-03 2016-09-05 カシオ計算機株式会社 コンテンツ出力装置、コンテンツ出力方法及びプログラム
US20180107275A1 (en) * 2015-04-13 2018-04-19 Empire Technology Development Llc Detecting facial expressions
CN104850326A (zh) * 2015-05-25 2015-08-19 北京百纳威尔科技有限公司 来电处理方法及终端
CN104935717B (zh) * 2015-06-11 2018-01-23 广东欧珀移动通信有限公司 一种基于旋转摄像头的来电提醒方法及终端
CN105141744A (zh) * 2015-06-12 2015-12-09 小米科技有限责任公司 通话控制方法、装置及终端
CN105162950B (zh) * 2015-07-08 2020-09-25 Tcl移动通信科技(宁波)有限公司 一种移动终端及其实现通话中切换麦克风的方法
CN105204743A (zh) 2015-09-28 2015-12-30 百度在线网络技术(北京)有限公司 用于语音和视频通讯的交互控制方法及装置
CN105245724A (zh) * 2015-10-29 2016-01-13 努比亚技术有限公司 一种移动终端及其处理来电的方法
CN107231479A (zh) * 2017-06-05 2017-10-03 努比亚技术有限公司 通话控制方法、移动终端及计算机可读存储介质
CN107426422A (zh) * 2017-07-13 2017-12-01 广东欧珀移动通信有限公司 事件处理方法及相关产品
CN107317992A (zh) * 2017-07-19 2017-11-03 苏州三星电子电脑有限公司 视频通信控制装置与控制方法
CN108052811A (zh) * 2017-11-27 2018-05-18 北京传嘉科技有限公司 基于面部纹理识别的终端控制方法及系统
CN109144466B (zh) * 2018-08-31 2022-03-22 广州三星通信技术研究有限公司 音频设备控制方法和装置
CN109660662B (zh) * 2018-12-04 2021-07-16 联想(北京)有限公司 一种信息处理方法和终端
CN111142666A (zh) * 2019-12-27 2020-05-12 惠州Tcl移动通信有限公司 终端控制方法、装置、存储介质及移动终端
CN113301205A (zh) * 2021-05-12 2021-08-24 Tcl通讯(宁波)有限公司 移动终端通话接通处理方法、装置、移动终端及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1896918A (zh) * 2005-07-15 2007-01-17 英华达(上海)电子有限公司 手持设备上使用面部表情控制输入的方法
CN101874404A (zh) * 2007-09-24 2010-10-27 格斯图尔泰克股份有限公司 用于语音和视频通信的增强接口
CN102231777A (zh) * 2011-06-28 2011-11-02 惠州Tcl移动通信有限公司 移动终端及其信号呼入处理方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1896918A (zh) * 2005-07-15 2007-01-17 英华达(上海)电子有限公司 手持设备上使用面部表情控制输入的方法
CN101874404A (zh) * 2007-09-24 2010-10-27 格斯图尔泰克股份有限公司 用于语音和视频通信的增强接口
CN102231777A (zh) * 2011-06-28 2011-11-02 惠州Tcl移动通信有限公司 移动终端及其信号呼入处理方法

Also Published As

Publication number Publication date
CN103576839A (zh) 2014-02-12

Similar Documents

Publication Publication Date Title
CN103576839B (zh) 基于面部识别来控制终端操作的设备和方法
US20200319601A1 (en) Alarm control apparatus and method using face recognition
CN108052079B (zh) 设备控制方法、装置、设备控制装置及存储介质
JP2022541207A (ja) 音声起動方法及び電子デバイス
CN110322878A (zh) 一种语音控制方法、电子设备及系统
CN109766043A (zh) 电子设备的操作方法和电子设备
CN110784830B (zh) 数据处理方法、蓝牙模块、电子设备与可读存储介质
CN110134316A (zh) 模型训练方法、情绪识别方法及相关装置和设备
CN105389304B (zh) 事件提取方法及装置
CN104035558A (zh) 终端设备控制方法及装置
EP3133874A1 (en) Method and apparatus for starting energy saving mode
CN107172307A (zh) 闹钟响铃控制方法、装置及存储介质
US20230421900A1 (en) Target User Focus Tracking Photographing Method, Electronic Device, and Storage Medium
CN109920240A (zh) 一种红外控制器与红外设备自动匹配的方法、装置及设备
CN107506019A (zh) 应用程序的管理方法及装置、终端、存储介质
CN108564943B (zh) 语音交互方法及系统
CN107608561A (zh) 触摸屏控制方法及装置
CN107919124A (zh) 设备唤醒方法及装置
CN107529699A (zh) 电子设备控制方法及装置
CN105516469B (zh) 闹钟控制方法及装置
CN108574777A (zh) 信息提醒方法及装置
EP4199488A1 (en) Voice interaction method and electronic device
WO2022022743A1 (zh) 一种公用设备上识别用户的方法及电子设备
US20170034347A1 (en) Method and device for state notification and computer-readable storage medium
CN109756614A (zh) 一种显示联系人的方法及相关装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant