CN107613240A - 视频画面处理方法、装置和移动终端 - Google Patents

视频画面处理方法、装置和移动终端 Download PDF

Info

Publication number
CN107613240A
CN107613240A CN201710812500.9A CN201710812500A CN107613240A CN 107613240 A CN107613240 A CN 107613240A CN 201710812500 A CN201710812500 A CN 201710812500A CN 107613240 A CN107613240 A CN 107613240A
Authority
CN
China
Prior art keywords
user
picture
video
current video
video picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710812500.9A
Other languages
English (en)
Inventor
张学勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201710812500.9A priority Critical patent/CN107613240A/zh
Publication of CN107613240A publication Critical patent/CN107613240A/zh
Pending legal-status Critical Current

Links

Abstract

本申请公开了一种视频画面处理方法、装置和移动终端,其中,该方法包括:获取与第一用户视频通话的第二用户的当前视频画面;判断当前视频画面中是否存在除第二用户之外的第三用户;若判断出当前视频画面中存在除第二用户之外的第三用户,则进一步判断第三用户是否具有观看权限;若判断出第三用户不具有观看权限,则将视频显示界面中第一用户的视频画面切换至预定画面。由此,在视频通话过程中,从而使得不具有观看权限的第三用户不能看到用户以及用户所在场景,避免了用户个人隐私被泄露的同时,减少了用户手动关闭视频画面的操作,提高了用户体验度。

Description

视频画面处理方法、装置和移动终端
技术领域
本申请涉及通信技术领域,尤其涉及一种视频画面处理方法、装置和移动终端。
背景技术
随着科技水平的发展,手机、平板电脑等终端的功能日益强大。例如,越来越多的终端配置了摄像头,用户可通过摄像头拍摄照片、录像、视频聊天等等。
在用户通过摄像头与对方进行视频聊天的过程,视频画面中不仅会显示用户画面,还会显示用户所在场景的画面,通常用户只希望对方看到自己以及自己所在场景,而不希望其他无关用户看到自己以及自己所在场景。
然而,在双方视频的过程中,当用户发现对方视频画面中有其他人时,用户需要手动关闭视频通话,对于用户来说,操作不方便,如果关闭不及时,视频画面可能已经被看到了。因此,如何避免视频时,用户的个人隐私信息被泄露,对于保护用户的隐私安全,改善用户体验,具有重要意义。
发明内容
本申请的目的旨在至少在一定程度上解决上述的技术问题之一。
为此,本申请的第一个目的在于提出一种视频画面处理方法,该方法在视频通话过程中,从而使得不具有观看权限的第三用户不能看到用户以及用户所在场景,避免了用户个人隐私被泄露的同时,减少了用户手动关闭视频画面的操作,提高了用户体验度。
本申请的第二个目的在于提出一种视频画面处理装置。
本申请的第三个目的在于提出一种计算机可读存储介质。
本申请的第四个目的在于提出一种移动终端。
本申请的第五个目的在于提出一种计算机程序。
本申请第一方面实施例的视频画面处理方法,包括:获取与第一用户视频通话的第二用户的当前视频画面;判断所述当前视频画面中是否存在除所述第二用户之外的第三用户;若判断出所述当前视频画面中存在除所述第二用户之外的第三用户,则进一步判断所述第三用户是否具有观看权限;若判断出所述第三用户不具有观看权限,则将视频显示界面中所述第一用户的视频画面切换至预定画面。
根据本申请实施例的视频画面处理方法,在第一用户与第二用户视频通话的过程中,获取第二用户的当前视频画面,并在判断出当前视频画面中存在出第二用户的第三用户时,进一步判断第三用户是否具有观看权限,并在判断出第三用户不具有观看权限时,将视频显示界面中第一用户的视频画面切换至预定画面。由此,从而使得不具有观看权限的第三用户不能看到用户以及用户所在场景,避免了用户个人隐私被泄露的同时,减少了用户手动关闭视频画面的操作,提高了用户体验度。
本申请第二方面实施例的视频画面处理装置,包括:第一获取模块,用于获取与第一用户视频通话的第二用户的当前视频画面;第一判断模块,用于判断所述当前视频画面中是否存在除所述第二用户之外的第三用户;第二判断模块,用于在判断出所述当前视频画面中存在除所述第二用户之外的第三用户时,进一步判断所述第三用户是否具有观看权限;切换模块,用于在判断出所述第三用户不具有观看权限时,将视频显示界面中所述第一用户的视频画面切换至预定画面。
根据本申请实施例的视频画面处理装置,在第一用户与第二用户视频通话的过程中,获取第二用户的当前视频画面,并在判断出当前视频画面中存在出第二用户的第三用户时,进一步判断第三用户是否具有观看权限,并在判断出第三用户不具有观看权限时,将视频显示界面中第一用户的视频画面切换至预定画面。由此,从而使得不具有观看权限的第三用户不能看到用户以及用户所在场景,避免了用户个人隐私被泄露的同时,减少了用户手动关闭视频画面的操作,提高了用户体验度。
本申请第三方面实施例提供了一个或多个包含计算机可执行指令的非易失性计算机可读存储介质,当所述计算机可执行指令被一个或多个处理器执行时,使得所述处理器执行本申请第一方面实施例的视频画面处理方法。
本申请第四方面实施例的移动终端,所述移动终端包括存储器及处理器,所述存储器中储存有计算机可读指令,所述指令被所述处理器执行时,使得所述处理器执行本申请第一方面实施例的视频画面处理方法。
根据本申请实施例的移动终端,在第一用户与第二用户视频通话的过程中,获取第二用户的当前视频画面,并在判断出当前视频画面中存在出第二用户的第三用户时,进一步判断第三用户是否具有观看权限,并在判断出第三用户不具有观看权限时,将视频显示界面中第一用户的视频画面切换至预定画面。由此,从而使得不具有观看权限的第三用户不能看到用户以及用户所在场景,避免了用户个人隐私被泄露的同时,减少了用户手动关闭视频画面的操作,提高了用户体验度。
本申请第五方面实施例提供了一种计算机程序产品,当所述计算机程序产品中的指令处理器执行时,执行本申请第一方面实施例的视频画面处理方法。
本申请附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本申请的实践了解到。
附图说明
本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中,
图1是根据本申请一个实施例的视频画面处理方法的流程图;
图2是根据第二用户的三维人脸模型,判断当前视频画面中是否存在除第二用户之外的第三用户的细化流程图;
图3是根据本申请另一个实施例的视频画面处理方法的流程图;
图4是根据本申请又一个实施例的视频画面处理方法的流程图;
图5是通过结构光获取第一用户所在场景的三维场景画面的细化流程图;
图6(a)至图6(e)是根据本申请一个实施例的结构光测量的场景示意图;
图7是根据本申请一个实施例的本申请实施例的视频画面处理装置的结构示意图;
图8是根据本申请另一个实施例的本申请实施例的视频画面处理装置的结构示意图;
图9是根据本申请又一个实施例的本申请实施例的视频画面处理装置的结构示意图;
图10是根据本申请再一个实施例的本申请实施例的视频画面处理装置的结构示意图;
图11是根据本申请另一个实施例的本申请实施例的视频画面处理装置的结构示意图;
图12是根据本申请一个实施例的图像处理电路的示意图。
具体实施方式
下面详细描述本申请的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本申请,而不能理解为对本申请的限制。
下面参考附图描述本申请实施例的视频画面处理方法、装置、移动终端和计算机可读存储介质。
图1是根据本申请一个实施例的视频画面处理方法的流程图。该实施例的视频画面处理方法应用在终端中。其中,终端可以包括手机、平板电脑、智能穿戴式设备等具有各种操作系统的硬件设备。如图1所示,该视频画面处理方法包括以下步骤:
S11,获取与第一用户视频通话的第二用户的当前视频画面。
具体地,在第一用户与第二用户视频通话的过程中,第一用户的终端从视频显示界面中获取第二用户的当前视频画面。
例如,第一用户为用户A,第二用户为用户B,在用户A与用户B视频通话的过程中,用户A的终端获取视频显示界面中用户B的当前视频画面。
S12,判断当前视频画面中是否存在除第二用户之外的第三用户,若是,则执行步骤S13,若否,则返回步骤S11。
作为一种示例性的实施方式,在获取第二用户的当前视频画面后,可通过人脸识别方式确定当前视频画面中是否存在除第二用户之外的第三用户。具体而言,可对当前视频画面进行人脸识别,以获取当前视频画面的人脸识别结果,并根据人脸识别结果判断当前视频画面中是否包含除第二用户人脸之前的其他人脸,如果判断出当前视频画面中包含除第二用户人脸之前的其他人脸,则确定当前视频画面中存在除第二用户之外的第三用户。
作为另一种实施例性的实施方式,为了准确判断当前视频画面中是否存在除第二用户之外的第三用户,还可以先获取第二用户的三维人脸模型,然后,根据第二用户的三维人脸模型,判断当前视频画面中是否存在除第二用户之外的第三用户。
其中,获取第二用户的三维人脸模型的方式有多种,举例而言,第一用户的终端可接收第二用户的终端发送的第二用户的三维人脸模型的方式,或者,第一用户的终端可从服务器中获取第二用户的三维人脸模型。
其中,第二用户的三维人脸模型可以是由第二用户的终端通过向第二用户投射结构光而建立的。
其中,第二用户的终端(为了方便描述,下述将第二用户的终端称为第二用户终端)通过结构光获取第二用户的三维人脸模型的过程为:第二用户终端中的结构光投射器向第二用户投射结构,然后,结构光摄像头拍摄第二用户的结构光图像,并根据结构光图像确定第二用户的深度图像,之后,根据第二用户的深度图像,生成第二用户的三维人脸模型。
作为一种示例性的实施方式,根据第二用户的三维人脸模型,判断当前视频画面中是否存在除第二用户之外的第三用户的过程,如图2所示,可以包括:
S21,对当前视频画面进行人脸识别,以获取当前视频画面中的人脸区域。
S22,提取人脸区域的人脸特征信息。
S23,根据人脸特征信息和第二用户的三维人脸模型,判断当前视频画面中是否存在除第二用户之外的第三用户根据第二用户的三维人脸模型。
作为一种示例性的实施方式,在获取当前视频画面中的人脸区域的人脸特征信息后,可判断当前视频画面中的人脸区域中的人脸特征信息是否均与第二用户的三维人脸模型进行匹配,如果不是,则确定当前视频画面中存在除第二用户之外的其他用户。如果是,则确定当前视频画面中仅存在第二用户。
S13,判断第三用户是否具有观看权限,若是,则执行步骤S14。
在确定当前视频画面中存在除第二用户之外的第三用户时,可获取述第三用户的人脸特征信息,根据人脸特征信息,判断第三用户是否具有观看权限。
具体而言,在确定当前视频画面中存在除第二用户之外的第三用户时,可根据当前视频画面获取第三用户的人脸特征信息,并将所获取的第三用户的人脸特征信息与预存的具有观看权限的人脸特征信息进行匹配,如果第三用户的人脸特征信息与预存的具有观看权限的人脸特征信息匹配,则确定第三用户具有观看权限,此时,第一用户的视频背景正常显示,即,视频显示界面中显示第一用户所在场景的视频背景。
如果第三用户的人脸特征信息与预存的具有观看权限的人脸特征信息不匹配,则确定第三用户不具有观看权限。
S14,将视频显示界面中第一用户的视频画面切换至预定画面。
其中,预定画面是可以是随机选取,或者由用户自行设定的画面。
其中,预定画面可以包括但不限于虚拟场景画面和预定颜色的纯色画面,该实施例对预定画面不作限定。
也就是说,该实施例在判断出第三用户不具有观看权限时,将视频显示界面中第一用户的当前视频画面切换至不包含用户和背景的预定画面,自动将视频画面切换至预定画面,从而使得不具有观看权限的第三用户不能看到用户以及用户所在场景,避免了用户个人隐私被泄露的同时,减少了用户手动关闭视频画面的操作,提高了用户体验度。
本申请实施例提供的视频画面处理方法,在第一用户与第二用户视频通话的过程中,获取第二用户的当前视频画面,并在判断出当前视频画面中存在出第二用户的第三用户时,进一步判断第三用户是否具有观看权限,并在判断出第三用户不具有观看权限时,将视频显示界面中第一用户的视频画面切换至预定画面。由此,从而使得不具有观看权限的第三用户不能看到用户以及用户所在场景,避免了用户个人隐私被泄露的同时,减少了用户手动关闭视频画面的操作,提高了用户体验度。
基于上述实施例的基础上,为了向第二用户提示第一用户的状态,避免第二用户以为第一用户下线,在图1所示的基础上,如图3所示,在将视频显示界面中第一用户的视频画面切换至预定画面之后,该方法还可以包括:
S15,向第二用户的终端发送第一用户未下线的提示信息。
基于上述实施例的基础上,为了智能地恢复用户的原来的视频背景,避免用户手动恢复原来的视频背景的麻烦,在图3所示的基础上,如图4所示,在向第二用户的终端发送第一用户未下线的提示信息之后,该方法还可以包括:
S16,当再次检测到第二用户的当前视频画面中仅存在第二用户时,通过结构光获取第一用户所在场景的三维场景画面。
作为一种示例性的实施方式,为了方便用户快速切换至原来的视频背景,在将第一用户的视频画面从预定画面切换至三维场景画面之前,还可以显示是否恢复视频画面的提示信息,并在接收到第一用户的恢复恢复视频画面的确认指令时,将第一用户的视频画面从预定画面切换至三维场景画面。
S17,将第一用户的视频画面从预定画面切换至三维场景画面。
由此,使得在第三用户离开时,用户无需通过再次建立视频通话的操作,即可与对方继续视频通话,减少了用户操作,大大提高了用户视频通话的用户体验度。
作为一种示例性的实施方式,如图5所示,通过结构光获取第一用户所在场景的三维场景画面的过程,可以包括:
S51,向第一用户所在场景投射结构光。
S52,拍摄经第一用户所在场景调制的结构光图像。
S53,解调结构光图像的各个像素对应的相位信息以得到第一用户所在场景的深度图像。
在本本申请的一个实施例中,拍摄经第一用户所在场景调制的结构光图像后,可解调结构光图像中各个像素对应的相位信息,然后,将相位信息转化为深度信息,并根据深度信息生成第一用户所在场景的深度图像。
具体地,可通过第一用户的终端中的结构光投射器可向第一用户所在场景透射结构光,然后,终端中的结构光摄像头可拍摄经第一用户所在场景调制的结构光图像,以及解调结构光图像的各个像素对应的相位信息以得到第一用户所在场景的深度图像,根据第一用户所在场景的深度图像,确定第一用户所在场景的三维场景画面。
其中,需要理解的是,第一用户所在场景中包括第一用户和/或物体。
具体而言,结构光投射器将一定模式的结构光投射到第一用户所在场景中的被测物体(被测物体包括场景中的物体以及第一用户的面部及躯体)上,在被测物体的表面会形成由第一用户调制后的结构光图像。结构光摄像头拍摄经调制后的结构光图像,再对结构光图像进行解调以得到第一用户所在场景的深度图像。
其中,结构光的模式可以是激光条纹、格雷码、正弦条纹、非均匀散斑等。
S54,根据第一用户所在场景的深度图像,确定第一用户所在场景的三维场景画面。
其中,根据第一用户所在场景的深度图像确定第一用户所在场景的三维场景画面的过程,可通过现有技术实现,该实施例对此不作限定。
为了使本领域的技术人员更加清楚的了解根据结构光来采集第一用户所在场景的深度图像的过程,下面以一种应用广泛的光栅投影技术(条纹投影技术)为例来阐述其具体原理。其中,光栅投影技术属于广义上的面结构光。
如图6(a)所示,在使用面结构光投影的时候,首先通过计算机编程产生正弦条纹,并将正弦条纹通过结构光投射器投射至被测物,再利用结构光摄像头拍摄条纹受物体调制后的弯曲程度,随后解调该弯曲条纹得到相位,再将相位转化为深度信息即可获取深度图像。为避免产生误差或误差耦合的问题,使用结构光进行深度信息采集前需对结构光摄像头与结构光投射器进行参数标定,标定包括几何参数(例如,结构光摄像头与结构光投射器之间的相对位置参数等)的标定、结构光摄像头的内部参数以及结构光投射器的内部参数的标定等。
具体而言,第一步,计算机编程产生正弦条纹。由于后续需要利用畸变的条纹获取相位,比如采用四步移相法获取相位,因此这里产生四幅相位差为的条纹,然后结构光投射器将该四幅条纹分时投射到被测物(图6(a)所示的面具)上,结构光摄像头采集到如图6(b)左边的图,同时要读取如图6(b)右边所示的参考面的条纹。
第二步,进行相位恢复。结构光摄像头根据采集到的四幅受调制的条纹图(即结构光图像)计算出被调制相位,此时得到的相位图是截断相位图。因为四步移相算法得到的结果是由反正切函数计算所得,因此结构光调制后的相位被限制在[-π,π]之间,也就是说,每当调制后的相位超过[-π,π],其又会重新开始。最终得到的相位主值如图6(c)所示。
其中,在进行相位恢复过程中,需要进行消跳变处理,即将截断相位恢复为连续相位。如图6(d)所示,左边为受调制的连续相位图,右边是参考连续相位图。
第三步,将受调制的连续相位和参考连续相位相减得到相位差(即相位信息),该相位差表征了被测物相对参考面的深度信息,再将相位差代入相位与深度的转化公式(公式中涉及到的参数经过标定),即可得到如图6(e)所示的待测物体的三维模型。
为了实现上述实施例,本申请还提出了一种本申请实施例的视频画面处理装置。
图7是根据本申请一个实施例的本申请实施例的视频画面处理装置的结构示意图。
如图7所示,该本申请实施例的视频画面处理装置可以包括第一获取模块110、第一判断模块120、第二判断模块130和切换模块140,其中:
第一获取模块110用于获取与第一用户视频通话的第二用户的当前视频画面。
第一判断模块120用于判断当前视频画面中是否存在除第二用户之外的第三用户。
第二判断模块130用于在判断出当前视频画面中存在除第二用户之外的第三用户时,进一步判断第三用户是否具有观看权限。
切换模块140用于在判断出第三用户不具有观看权限时,将视频显示界面中第一用户的视频画面切换至预定画面。
在本申请的一些实施例中,为了向第二用户提示第一用户的状态,在图7所示的基础上,如图8所示,该装置还可以包括:
提示模块150用于向第二用户的终端发送第一用户未下线的提示信息。
具体地,在切换模块140将视频显示界面中第一用户的视频画面切换至预定画面后,提示模块150向第二用户的终端发送第一用户未下线的提示信息,以使第二用户获知第一用户并没有下线。
在本申请的一些实施例中,在图7所示的基础上,如图9所示,该装置还可以包括第二获取模块160,其中:
第二获取模块160用于获取第二用户的三维人脸模型;
第一判断模块120具体用于:根据第二用户的三维人脸模型,判断当前视频画面中是否存在除第二用户之外的第三用户。
在本申请的一些实施例中,第一判断模块120具体用于:对当前视频画面进行人脸识别,以获取当前视频画面中的人脸区域;提取人脸区域的人脸特征信息;根据人脸特征信息和第二用户的三维人脸模型,判断当前视频画面中是否存在除第二用户之外的第三用户。
其中,需要说明的是,上述图9所示的第二获取模块160的结构也可以包含在图8所示的装置实施例中,该实施例对此不作限定。
在本申请的一些实施例中,在图7所示的基础上,如图10所示,该装置还可以包括:
处理模块170用于当再次检测到第二用户的当前视频画面中仅存在第二用户时,通过结构光获取第一用户所在场景的三维场景画面,并将第一用户的视频画面从预定画面切换至三维场景画面。
其中,需要说明的是,上述图10所示的处理模块170的结构也可以包含在图8和图9所示的装置实施例中,该实施例对此不作限定。
在本申请的一些实施例中,在图10所示的基础上,如图11所示,该装置还可以包括:
显示模块180用于显示是否恢复视频画面的提示信息。
其中,需要说明的是,前述对视频画面处理方法实施例的解释说明也适用于该实施例的视频画面处理装置,其实现原理类似,此处不再赘述。
本申请实施例提供的视频画面处理装置,在第一用户与第二用户视频通话的过程中,获取第二用户的当前视频画面,并在判断出当前视频画面中存在出第二用户的第三用户时,进一步判断第三用户是否具有观看权限,并在判断出第三用户不具有观看权限时,将视频显示界面中第一用户的视频画面切换至预定画面。由此,从而使得不具有观看权限的第三用户不能看到用户以及用户所在场景,避免了用户个人隐私被泄露的同时,减少了用户手动关闭视频画面的操作,提高了用户体验度。
为了实现上述实施例,本申请还提出一种移动终端。
一种移动终端,包括本申请第二方面实施例的视频画面处理装置。
根据本申请实施例的移动终端,在第一用户与第二用户视频通话的过程中,获取第二用户的当前视频画面,并在判断出当前视频画面中存在出第二用户的第三用户时,进一步判断第三用户是否具有观看权限,并在判断出第三用户不具有观看权限时,将视频显示界面中第一用户的视频画面切换至预定画面。由此,从而使得不具有观看权限的第三用户不能看到用户以及用户所在场景,避免了用户个人隐私被泄露的同时,减少了用户手动关闭视频画面的操作,提高了用户体验度。
本申请实施例还提供了一种计算机可读存储介质,一个或多个包含计算机可执行指令的非易失性计算机可读存储介质,当计算机可执行指令被一个或多个处理器执行时,使得处理器执行前述的视频画面处理方法。
为了实现上述实施例,本申请还提出一种移动终端。
上述移动终端中包括图像处理电路,图像处理电路可以利用硬件和/或软件组件实现,可包括定义ISP(Image Signal Processing,图像信号处理)管线的各种处理单元。图12是根据本申请一个实施例的图像处理电路的示意图。如图12所示,为便于说明,仅示出与本申请实施例相关的图像处理技术的各个方面。
如图12所示,移动终端1200的图像处理电路包括成像设备10、ISP处理器30和控制逻辑器40。成像设备10可包括结构光投射器121和结构光摄像头122。结构光投射器121将结构光投影至第一用户以及第一用户所在场景。其中,该结构光图案可为激光条纹、格雷码、正弦条纹、或者,随机排列的散斑图案等。结构光摄像头122可以包括图像传感器1221和透镜1222。其中,透镜1222的个数可为一个或多个。图像传感器1221用于捕捉投影至被测物形成的结构光图像,并将结构光图像发送至ISP处理器30,由ISP处理器30对结构光图像进行解调获取被测物的深度信息。同时,图像传感器1221也可以捕捉被测物的色彩信息。当然,也可以由两个图像传感器1221分别捕捉被测物的结构光图像和色彩信息。
其中,以散斑结构光为例,ISP处理器30对结构光图像进行解调,具体包括,从该结构光图像中采集被测物的散斑图像,将被测物的散斑图像与参考散斑图像按照预定算法进行图像数据计算,获取被测物上散斑图像的各个散斑点相对于参考散斑图像中的参考散斑点的移动距离。利用三角法转换计算得到散斑图像的各个散斑点的深度值,并根据该深度值得到被测物的深度信息。
当然,还可以通过双目视觉的方法或基于飞行时差TOF的方法来获取该深度图像信息等,在此不做限定,只要能够获取或通过计算得到被测物的深度信息的方法都属于本实施方式包含的范围。
在ISP处理器30接收到图像传感器1221捕捉到的被测物的色彩信息之后,可被测物的色彩信息对应的图像数据进行处理。ISP处理器30对图像数据进行分析以获取可用于确定和/或成像设备10的一个或多个控制参数的图像统计信息。图像传感器1221可包括色彩滤镜阵列(如Bayer滤镜),图像传感器1221可获取用图像传感器1221的每个成像像素捕捉的光强度和波长信息,并提供可由ISP处理器30处理的一组原始图像数据。
ISP处理器30按多种格式逐个像素地处理原始图像数据。例如,每个图像像素可具有8、10、12或14比特的位深度,ISP处理器30可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的图像统计信息。其中,图像处理操作可按相同或不同的位深度精度进行。
ISP处理器30还可从图像传感器1221接收像素数据。图像传感器1221可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器,并可包括DMA(DirectMemory Access,直接直接存储器存取)特征。
当接收到原始图像数据时,ISP处理器30可进行一个或多个图像处理操作。
在ISP处理器30获取到被测物的色彩信息和深度信息后,可对其进行融合,得到三维图像。其中,可通过外观轮廓提取方法或轮廓特征提取方法中的至少一种提取相应的被测物的特征。例如通过主动形状模型法ASM、主动外观模型法AAM、主成分分析法PCA、离散余弦变换法DCT等方法,提取被测物的特征,在此不做限定。再将分别从深度信息中提取到被测物的特征以及从色彩信息中提取到被测物的特征进行配准和特征融合处理。这里指的融合处理可以是将深度信息以及色彩信息中提取出的特征直接组合,也可以是将不同图像中相同的特征进行权重设定后组合,也可以有其他融合方式,最终根据融合后的特征,生成三维图像。
三维图像的图像数据可发送给图像存储器20,以便在被显示之前进行另外的处理。ISP处理器30从图像存储器20接收处理数据,并对处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。三维图像的图像数据可输出给显示器60,以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit,图形处理器)进一步处理。此外,ISP处理器30的输出还可发送给图像存储器20,且显示器60可从图像存储器20读取图像数据。在一个实施例中,图像存储器20可被配置为实现一个或多个帧缓冲器。此外,ISP处理器30的输出可发送给编码器/解码器50,以便编码/解码图像数据。编码的图像数据可被保存,并在显示于显示器60设备上之前解压缩。编码器/解码器50可由CPU或GPU或协处理器实现。
ISP处理器30确定的图像统计信息可发送给控制逻辑器40单元。控制逻辑器40可包括执行一个或多个例程(如固件)的处理器和/或微控制器,一个或多个例程可根据接收的图像统计信息,确定成像设备10的控制参数。
以下为运用图12中图像处理技术实现视频画面处理方法的步骤:
S1',获取与第一用户视频通话的第二用户的当前视频画面;
S2',判断当前视频画面中是否存在除第二用户之外的第三用户;
S3',若判断出当前视频画面中存在除第二用户之外的第三用户,则进一步判断第三用户是否具有观看权限;
S4',若判断出第三用户不具有观看权限,则将视频显示界面中第一用户的视频画面切换至预定画面。
其中,需要说明的是,前述对视频画面处理方法实施例的解释说明也使用该实施例的移动终端,其实现原理类似,此处不再赘述。
一种计算机程序产品,当计算机程序产品中的指令处理器执行时,执行前述的视频画面处理方法。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本申请的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本申请的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本申请的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得程序,然后将其存储在计算机存储器中。
应当理解,本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本申请各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。尽管上面已经示出和描述了本申请的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本申请的限制,本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (14)

1.一种视频画面处理方法,其特征在于,所述方法包括以下步骤:
获取与第一用户视频通话的第二用户的当前视频画面;
判断所述当前视频画面中是否存在除所述第二用户之外的第三用户;
若判断出所述当前视频画面中存在除所述第二用户之外的第三用户,则进一步判断所述第三用户是否具有观看权限;
若判断出所述第三用户不具有观看权限,则将视频显示界面中所述第一用户的视频画面切换至预定画面。
2.如权利要求1所述的方法,其特征在于,在所述将所述第一用户的视频画面切换至预定画面后,所述方法还包括:
向所述第二用户的终端发送所述第一用户未下线的提示信息。
3.如权利要求1所述的方法,其特征在于,在所述判断所述当前视频画面中是否存在除所述第二用户之外的第三用户之前,所述方法还包括:
获取所述第二用户的三维人脸模型;
所述判断所述当前视频画面中是否存在除所述第二用户之外的第三用户,包括:
根据所述第二用户的三维人脸模型,判断所述当前视频画面中是否存在除所述第二用户之外的第三用户。
4.如权利要求3所述的方法,其特征在于,所述根据所述第二用户的三维人脸模型,判断所述当前视频画面中是否存在除所述第二用户之外的第三用户,包括:
对所述当前视频画面进行人脸识别,以获取所述当前视频画面中的人脸区域;
提取所述人脸区域的人脸特征信息;
根据所述人脸特征信息和所述第二用户的三维人脸模型,判断所述当前视频画面中是否存在除所述第二用户之外的第三用户。
5.如权利要求1-4任一项所述的方法,其特征在于,在所述向所述第二用户发送所述第一用户未下线的提示信息之后,所述方法还包括:
当再次检测到所述第二用户的当前视频画面中仅存在所述第二用户时,通过结构光获取所述第一用户所在场景的三维场景画面;
将所述第一用户的视频画面从所述预定画面切换至所述三维场景画面。
6.如权利要求5所述的方法,其特征在于,在所述将所述第一用户的视频画面从所述预定画面切换至所述三维场景画面之前,所述方法还包括:
显示是否恢复视频画面的提示信息。
7.一种视频画面处理装置,其特征在于,包括:
第一获取模块,用于获取与第一用户视频通话的第二用户的当前视频画面;
第一判断模块,用于判断所述当前视频画面中是否存在除所述第二用户之外的第三用户;
第二判断模块,用于在判断出所述当前视频画面中存在除所述第二用户之外的第三用户时,进一步判断所述第三用户是否具有观看权限;
切换模块,用于在判断出所述第三用户不具有观看权限时,将视频显示界面中所述第一用户的视频画面切换至预定画面。
8.如权利要求7所述的装置,其特征在于,所述装置还包括:
提示模块,用于向所述第二用户的终端发送所述第一用户未下线的提示信息。
9.如权利要求7所述的装置,其特征在于,所述装置还包括:
第二获取模块,用于获取所述第二用户的三维人脸模型;
所述第一判断模块,具体用于:
根据所述第二用户的三维人脸模型,判断所述当前视频画面中是否存在除所述第二用户之外的第三用户。
10.如权利要求9所述的装置,其特征在于,所述第一判断模块,具体用于:
对所述当前视频画面进行人脸识别,以获取所述当前视频画面中的人脸区域;
提取所述人脸区域的人脸特征信息;
根据所述人脸特征信息和所述第二用户的三维人脸模型,判断所述当前视频画面中是否存在除所述第二用户之外的第三用户。
11.如权利要求7-10任一项所述的装置,其特征在于,所述装置还包括:
处理模块,用于当再次检测到所述第二用户的当前视频画面中仅存在所述第二用户时,通过结构光获取所述第一用户所在场景的三维场景画面,并将所述第一用户的视频画面从所述预定画面切换至所述三维场景画面。
12.如权利要求11所述的装置,其特征在于,所述装置还包括:
显示模块,用于显示是否恢复视频画面的提示信息。
13.一个或多个包含计算机可执行指令的非易失性计算机可读存储介质,当所述计算机可执行指令被一个或多个处理器执行时,使得所述处理器执行如权利要求1至6中任一项所述的视频画面处理方法。
14.一种移动终端,包括存储器及处理器,所述存储器中储存有计算机可读指令,所述指令被所述处理器执行时,使得所述处理器执行如权利要求1至6中任一项所述的视频画面处理方法。
CN201710812500.9A 2017-09-11 2017-09-11 视频画面处理方法、装置和移动终端 Pending CN107613240A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710812500.9A CN107613240A (zh) 2017-09-11 2017-09-11 视频画面处理方法、装置和移动终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710812500.9A CN107613240A (zh) 2017-09-11 2017-09-11 视频画面处理方法、装置和移动终端

Publications (1)

Publication Number Publication Date
CN107613240A true CN107613240A (zh) 2018-01-19

Family

ID=61063000

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710812500.9A Pending CN107613240A (zh) 2017-09-11 2017-09-11 视频画面处理方法、装置和移动终端

Country Status (1)

Country Link
CN (1) CN107613240A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105472303A (zh) * 2015-11-20 2016-04-06 小米科技有限责任公司 视频聊天防偷窥的方法和装置
CN105740775A (zh) * 2016-01-25 2016-07-06 北京天诚盛业科技有限公司 一种三维人脸活体识别方法及其装置
CN106251396A (zh) * 2016-07-29 2016-12-21 迈吉客科技(北京)有限公司 三维模型的实时控制方法和系统
KR20170055948A (ko) * 2017-05-12 2017-05-22 삼성전자주식회사 영상처리장치, 사용자 단말장치 및 그 영상처리방법, 제어방법
CN106851124A (zh) * 2017-03-09 2017-06-13 广东欧珀移动通信有限公司 基于景深的图像处理方法、处理装置和电子装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105472303A (zh) * 2015-11-20 2016-04-06 小米科技有限责任公司 视频聊天防偷窥的方法和装置
CN105740775A (zh) * 2016-01-25 2016-07-06 北京天诚盛业科技有限公司 一种三维人脸活体识别方法及其装置
CN106251396A (zh) * 2016-07-29 2016-12-21 迈吉客科技(北京)有限公司 三维模型的实时控制方法和系统
CN106851124A (zh) * 2017-03-09 2017-06-13 广东欧珀移动通信有限公司 基于景深的图像处理方法、处理装置和电子装置
KR20170055948A (ko) * 2017-05-12 2017-05-22 삼성전자주식회사 영상처리장치, 사용자 단말장치 및 그 영상처리방법, 제어방법

Similar Documents

Publication Publication Date Title
CN107623817B (zh) 视频背景处理方法、装置和移动终端
US20240046571A1 (en) Systems and Methods for 3D Facial Modeling
US7825948B2 (en) 3D video conferencing
CN107623832A (zh) 视频背景替换方法、装置和移动终端
CN107592490A (zh) 视频背景替换方法、装置和移动终端
CN107493428A (zh) 拍摄控制方法和装置
CN107682607A (zh) 图像获取方法、装置、移动终端和存储介质
CN106981078B (zh) 视线校正方法、装置、智能会议终端及存储介质
JP2015197745A (ja) 画像処理装置、撮像装置、画像処理方法及びプログラム
CN107621867A (zh) 熄屏控制方法、装置和终端设备
TWI637288B (zh) 用於眼球視線校正的影像處理方法及其系統
CN107493427A (zh) 移动终端的对焦方法、装置和移动终端
CN107509043B (zh) 图像处理方法、装置、电子装置及计算机可读存储介质
CN107491744A (zh) 人体身份识别方法、装置、移动终端和存储介质
CN107564050A (zh) 基于结构光的控制方法、装置和终端设备
CN107483845A (zh) 拍照方法及其装置
CN107360354B (zh) 拍照方法、装置、移动终端和计算机可读存储介质
CN107622192A (zh) 视频画面处理方法、装置和移动终端
CN107438161A (zh) 拍摄画面处理方法、装置和终端
CN107590828A (zh) 拍摄图像的虚化处理方法和装置
CN107705356A (zh) 图像处理方法和装置
JP4193342B2 (ja) 3次元データ生成装置
CN107613239B (zh) 视频通信背景显示方法和装置
CN107592491B (zh) 视频通信背景显示方法和装置
CN107682656B (zh) 背景图像处理方法、电子设备和计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180119