CN113382276A - 一种图片处理方法及系统 - Google Patents
一种图片处理方法及系统 Download PDFInfo
- Publication number
- CN113382276A CN113382276A CN202110643106.3A CN202110643106A CN113382276A CN 113382276 A CN113382276 A CN 113382276A CN 202110643106 A CN202110643106 A CN 202110643106A CN 113382276 A CN113382276 A CN 113382276A
- Authority
- CN
- China
- Prior art keywords
- texture
- processing
- target
- value
- picture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 14
- 238000012545 processing Methods 0.000 claims abstract description 134
- 238000000034 method Methods 0.000 claims abstract description 55
- 230000002146 bilateral effect Effects 0.000 claims abstract description 54
- 238000001914 filtration Methods 0.000 claims abstract description 54
- 230000007613 environmental effect Effects 0.000 claims abstract description 12
- 238000004364 calculation method Methods 0.000 claims description 14
- 230000000873 masking effect Effects 0.000 claims description 8
- 230000000694 effects Effects 0.000 abstract description 11
- 238000010586 diagram Methods 0.000 description 6
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/40—Analysis of texture
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Databases & Information Systems (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Processing (AREA)
Abstract
本发明提供一种图片处理方法及系统，获取在虚拟现实直播之前以预设拍摄角度拍摄的环境图片并将其作为遮罩纹理，及获取在虚拟现实直播过程中以预设拍摄角度实时拍摄的待处理图片并将其作为目标纹理；分别计算遮罩纹理和目标纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值；基于遮罩纹理和目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，比对遮罩纹理和目标纹理，确定目标纹理中需要剔除的目标像素点并剔除，得到最终输出的图片。本方案中，通过比对环境图片和实时拍摄得到的待处理图片之间每个像素点的颜色差异，在待处理图片中，将与环境图片颜色差异不明显的像素点剔除，降低噪声影响，提高实时抠图效果。
Description
技术领域
本发明涉及虚拟现实技术领域，具体涉及一种图片处理方法及系统。
背景技术
随着科学技术的发展，虚拟现实技术逐渐应用在各个领域，例如虚拟现实混合直播等领域。
在应用虚拟现实技术直播时，通常需要进行实时抠图，目前实时抠图的计算主要为基于绿幕的chroma-key算法，但chroma-key算法容易受到噪声影响，从而会导致实时抠图效果较差。
发明内容
有鉴于此，本发明实施例提供一种图片处理方法及系统，以解决现有抠图方式存在的抠图效果差等问题。
为实现上述目的，本发明实施例提供如下技术方案：
本发明实施例第一方面公开一种图片处理方法，所述方法包括：
获取在虚拟现实直播之前以预设拍摄角度拍摄的环境图片并将其作为遮罩纹理，及获取在虚拟现实直播过程中以所述预设拍摄角度实时拍摄的待处理图片并将其作为目标纹理；
分别计算所述遮罩纹理和所述目标纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值；
基于所述遮罩纹理和所述目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，比对所述遮罩纹理和所述目标纹理，确定所述目标纹理中需要剔除的目标像素点并将其剔除，得到最终输出的图片。
优选的，所述基于所述遮罩纹理和所述目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，比对所述遮罩纹理和所述目标纹理，确定所述目标纹理中需要剔除的目标像素点并将其剔除，得到最终输出的图片，包括：
基于所述遮罩纹理和所述目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，计算所述遮罩纹理和所述目标纹理中处于相同位置的像素点之间的差异值；
在所述目标纹理中，确定小于阈值的所述差异值对应的像素点为需要剔除的目标像素点，并将所述目标纹理中的所述目标像素点剔除，得到最终输出的图片。
优选的，分别计算所述遮罩纹理和所述目标纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值，包括：
基于所述遮罩纹理中每一像素点的位置参数、红色像素值、绿色像素值和蓝色像素值，结合双边滤波处理公式，计算所述遮罩纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值；
基于所述目标纹理中每一像素点的位置参数、红色像素值、绿色像素值和蓝色像素值，结合所述双边滤波处理公式，计算所述目标纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值。
优选的，所述基于所述遮罩纹理和所述目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，计算所述遮罩纹理和所述目标纹理中处于相同位置的像素点之间的差异值，包括：
基于所述遮罩纹理和所述目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，结合a＝max(max(abs(MainTex.r-MaskTex.r),abs(MainTex.g-MaskTex.g)),abs(MainTex.b-MaskTex.b))，计算所述遮罩纹理和所述目标纹理中处于相同位置的像素点之间的差异值a；
其中，MaskTex.r和MainTex.r分别为所述遮罩纹理和所述目标纹理中处于相同位置的像素点的红通道数值，MaskTex.g和MainTex.g分别为所述遮罩纹理和所述目标纹理中处于相同位置的像素点的绿通道数值，MaskTex.b和MainTex.b分别为所述遮罩纹理和所述目标纹理中处于相同位置的像素点的蓝通道数值。
优选的，所述获取在虚拟现实直播之前以预设拍摄角度拍摄的环境图片并将其作为遮罩纹理，及获取在虚拟现实直播过程中以所述预设拍摄角度实时拍摄的待处理图片并将其作为目标纹理，包括：
获取在虚拟现实直播之前以预设拍摄角度拍摄的环境图片，并对所述环境图片进行双边滤波处理，得到对应的遮罩纹理；
获取在虚拟现实直播过程中以所述预设拍摄角度实时拍摄的待处理图片，并对所述待处理图片进行双边滤波处理，得到对应的目标纹理。
本发明实施例第二方面公开一种图片处理系统，所述系统包括：
获取单元，用于获取在虚拟现实直播之前以预设拍摄角度拍摄的环境图片并将其作为遮罩纹理，及获取在虚拟现实直播过程中以所述预设拍摄角度实时拍摄的待处理图片并将其作为目标纹理；
计算单元，用于分别计算所述遮罩纹理和所述目标纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值；
处理单元，用于基于所述遮罩纹理和所述目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，比对所述遮罩纹理和所述目标纹理，确定所述目标纹理中需要剔除的目标像素点并将其剔除，得到最终输出的图片。
优选的，所述处理单元包括：
计算模块，用于基于所述遮罩纹理和所述目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，计算所述遮罩纹理和所述目标纹理中处于相同位置的像素点之间的差异值；
处理模块，用于在所述目标纹理中，确定小于阈值的所述差异值对应的像素点为需要剔除的目标像素点，并将所述目标纹理中的所述目标像素点剔除，得到最终输出的图片。
优选的，所述计算单元包括：
第一计算模块，用于基于所述遮罩纹理中每一像素点的位置参数、红色像素值、绿色像素值和蓝色像素值，结合双边滤波处理公式，计算所述遮罩纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值；
第二计算模块，用于基于所述目标纹理中每一像素点的位置参数、红色像素值、绿色像素值和蓝色像素值，结合所述双边滤波处理公式，计算所述目标纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值。
优选的，所述计算模块具体用于：基于所述遮罩纹理和所述目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，结合a＝max(max(abs(MainTex.r-MaskTex.r),abs(MainTex.g-MaskTex.g)),abs(MainTex.b-MaskTex.b))，计算所述遮罩纹理和所述目标纹理中处于相同位置的像素点之间的差异值a；
其中，MaskTex.r和MainTex.r分别为所述遮罩纹理和所述目标纹理中处于相同位置的像素点的红通道数值，MaskTex.g和MainTex.g分别为所述遮罩纹理和所述目标纹理中处于相同位置的像素点的绿通道数值，MaskTex.b和MainTex.b分别为所述遮罩纹理和所述目标纹理中处于相同位置的像素点的蓝通道数值。
优选的，所述获取单元具体用于：获取在虚拟现实直播之前以预设拍摄角度拍摄的环境图片，并对所述环境图片进行双边滤波处理，得到对应的遮罩纹理；获取在虚拟现实直播过程中以所述预设拍摄角度实时拍摄的待处理图片，并对所述待处理图片进行双边滤波处理，得到对应的目标纹理。
基于上述本发明实施例提供的一种图片处理方法及系统，该方法为：获取在虚拟现实直播之前以预设拍摄角度拍摄的环境图片并将其作为遮罩纹理，及获取在虚拟现实直播过程中以预设拍摄角度实时拍摄的待处理图片并将其作为目标纹理；分别计算遮罩纹理和目标纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值；基于遮罩纹理和目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，比对遮罩纹理和目标纹理，确定目标纹理中需要剔除的目标像素点并将其剔除，得到最终输出的图片。本方案中，通过比对预先拍摄得到的环境图片和实时拍摄得到的待处理图片之间每个像素点的颜色差异，在待处理图片中，将与环境图片颜色差异不明显的像素点剔除，降低噪声影响，提高实时抠图效果。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本发明实施例提供的一种图片处理方法的流程图；
图2为本发明实施例提供的得到最终输出的图片的流程图；
图3为本发明实施例提供的一种图片处理系统的结构框图；
图4为本发明实施例提供的一种图片处理系统的另一结构框图；
图5为本发明实施例提供的一种图片处理系统的又一结构框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
在本申请中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
由背景技术可知，在应用虚拟现实技术直播时需要进行实时抠图，目前所使用的实时抠图方式为基于绿幕的chroma-key算法，但chroma-key算法容易受到噪声影响，从而会导致实时抠图效果较差。
因此，本发明实施例提供一种图片处理方法及系统，通过比对预先拍摄得到的环境图片和实时拍摄得到的待处理图片之间每个像素点的颜色差异，在待处理图片中，将与环境图片颜色差异不明显的像素点剔除，降低噪声影响，以提高实时抠图效果。
参见图1，示出了本发明实施例提供的一种图片处理方法的流程图，该图片处理方法包括：
步骤S101：获取在虚拟现实直播之前以预设拍摄角度拍摄的环境图片并将其作为遮罩纹理，及获取在虚拟现实直播过程中以预设拍摄角度实时拍摄的待处理图片并将其作为目标纹理。
需要说明的是，在进行虚拟现实直播之前，利用摄像机以预设拍摄角度拍摄该摄像机所处环境的环境图片；在进行虚拟现实直播的过程中，利用该摄像机以该预设拍摄角度实时拍摄直播过程中的图片(即待处理图片)。
可以理解的是，摄像机以该预设拍摄角度实时拍摄直播过程中的图片为多张，在本发明实施例中，以对一张待处理图片进行相关处理为例来解释说明如何处理直播过程中所拍摄的图片。
在具体实现步骤S101的过程中，获取在虚拟现实直播之前以预设拍摄角度拍摄的环境图片，并对该环境图片进行双边滤波处理，得到对应的遮罩纹理(可用MaskTex表示)。获取在虚拟现实直播过程中以预设拍摄角度实时拍摄的待处理图片，并对该待处理图片进行双边滤波处理，得到对应的目标纹理(可用MainTex表示)。
可以理解的是，由上述内容可知，遮罩纹理为在虚拟现实直播之前拍摄得到的环境图片经过双边滤波处理得到的，故在虚拟现实直播过程中该遮罩纹理不会变化，利用遮罩纹理对实时拍摄得到的待处理图片进行处理，可消除待处理图片中的噪声影响，详细内容见以下步骤及实施例。
步骤S102：分别计算遮罩纹理和目标纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值。
在具体实现步骤S102的过程中，基于遮罩纹理中每一像素点的位置参数、红色像素值(可用mask.r表示)、绿色像素值(可用mask.g表示)和蓝色像素值(可用mask.b表示)，结合双边滤波处理公式，计算该遮罩纹理中经过双边滤波后的每一像素点的红通道数值(也就是R通道数值，可用MaskTex.r表示)、绿通道数值(也就是G通道数值，可用MaskTex.g表示)和蓝通道数值(也就是B通道数值，可用MaskTex.b表示)。
基于目标纹理中每一像素点的位置参数、红色像素值(可用main.r表示)、绿色像素值(可用main.g表示)和蓝色像素值(可用main.b表示)，结合双边滤波处理公式，计算目标纹理中经过双边滤波后的每一像素点的红通道数值(可用MainTex.r表示)、绿通道数值(可用MainTex.g表示)和蓝通道数值(可用MainTex.b表示)。
可以理解的是，双边滤波处理公式的具体内容如公式(1)和公式(2)。
在公式(1)和公式(2)中，(i，j)点和(k，l)点分别表示一像素点，exp为以自然常数e为底的指数函数，f(i，j)为(i，j)点的纹理颜色(即上述提及的红色像素值、绿色像素值和蓝色像素值)，f(k，l)为(k，l)点的纹理颜色，||f(i,j)-f(k,l)||为f(i,j)-f(k,l)向量的模，σd和σr分别为空间距离维度和颜色差异维度上的两个平滑参数，g(i，j)为经过双边滤波后的纹理颜色(即上述提及的经过双边滤波后的红通道数值、绿通道数值和蓝通道数值)。
可以理解的是，在公式(1)和公式(2)中，i、j、k和l为像素点的位置参数。
在一些具体实施例中，对于遮罩纹理，将该遮罩纹理的每一像素点的位置参数和红色像素值(mask.r)代入上述公式(1)和公式(2)，即可计算得到遮罩纹理中经过双边滤波后的每一像素点的红通道数值(MaskTex.r)；将该遮罩纹理的每一像素点的位置参数和绿色像素值(mask.g)代入上述公式(1)和公式(2)，即可计算得到遮罩纹理中经过双边滤波后的每一像素点的绿通道数值(MaskTex.g)；将该遮罩纹理的每一像素点的位置参数和蓝色像素值(mask.b)代入上述公式(1)和公式(2)，即可计算得到遮罩纹理中经过双边滤波后的每一像素点的蓝通道数值(MaskTex.b)。
同理，对于目标纹理，将该目标纹理的每一像素点的位置参数和红色像素值(main.r)代入上述公式(1)和公式(2)，即可计算得到目标纹理中经过双边滤波后的每一像素点的红通道数值(MainTex.r)；将该目标纹理的每一像素点的位置参数和绿色像素值(main.g)代入上述公式(1)和公式(2)，即可计算得到目标纹理中经过双边滤波后的每一像素点的绿通道数值(MainTex.g)；将该目标纹理的每一像素点的位置参数和蓝色像素值(main.b)代入上述公式(1)和公式(2)，即可计算得到目标纹理中经过双边滤波后的每一像素点的蓝通道数值(MainTex.b)。
步骤S103：基于遮罩纹理和目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，比对遮罩纹理和目标纹理，确定目标纹理中需要剔除的目标像素点并将其剔除，得到最终输出的图片。
需要说明的是，由上述步骤S101中的内容可知，得到遮罩纹理的环境图片为利用摄像机以预设拍摄角度拍摄的图片(虚拟现实直播之前拍摄的)，得到目标纹理的待处理图片也是利用摄像机以预设拍摄角度拍摄的图片(虚拟现实直播过程中拍摄的)，故遮罩纹理和目标纹理中的像素点为一一对应的(按照像素点的位置进行对应)。
在具体实现步骤S103的过程中，对于在遮罩纹理和目标纹理中处于相同位置的像素点(即互相对应的遮罩纹理中的像素点和目标纹理中的像素点，也就是具有相同位置坐标的遮罩纹理中的像素点和目标纹理中的像素点)，基于处于相同位置的像素点的红通道数值、绿通道数值和蓝通道数值，确定遮罩纹理和目标纹理中处于相同位置的像素点之间的差异值，将小于阈值的差异值所对应的像素点从目标纹理中剔除，将大于等于阈值的差异值所对应的像素点在目标纹理中保留，得到最终输出的图片，该最终输出的图片中包含目标物，将该最终输出的图片叠加到虚拟场景中。
可以理解的是，对于在遮罩纹理和目标纹理中处于相同位置的像素点，若该两个像素点之间的差异值小于阈值，则表示该两个像素点之间的颜色差异不明显，此时将小于阈值的差异值所对应的像素点从目标纹理中剔除；若该两个像素点之间的差异值大于等于阈值，则表示该两个像素点之间的颜色差异明显，此时将大于等于阈值的差异值所对应的像素点在目标纹理中保留。
需要说明的是，可通过调整阈值的大小，来调节颜色抠图的深度。
在本发明实施例中，在虚拟现实直播前，以预设拍摄角度拍摄环境图片。在虚拟直播过程中，以预设拍摄角度实时拍摄待处理图片，通过比对环境图片和待处理图片之间每个像素点的颜色差异，在待处理图片中，将与环境图片颜色差异不明显的像素点剔除，降低噪声影响，提高实时抠图效果。
上述本发明实施例图1步骤S103中提及的得到最终输出的图片的过程，参见图2，示出了本发明实施例提供的得到最终输出的图片的流程图，包括：
步骤S201：基于遮罩纹理和目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，计算遮罩纹理和目标纹理中处于相同位置的像素点之间的差异值。
在具体实现步骤S201的过程中，对于在遮罩纹理和目标纹理中处于相同位置的每一对像素点，基于该对像素点的红通道数值、绿通道数值和蓝通道数值，通过公式(3)计算该对像素点之间的差异值a。
a＝max(max(abs(MainTex.r-MaskTex.r),abs(MainTex.g-MaskTex.g)),abs(MainTex.b-MaskTex.b))(3)
在公式(3)中，MaskTex.r和MainTex.r分别为遮罩纹理和目标纹理中处于相同位置的像素点的红通道数值，MaskTex.g和MainTex.g分别为遮罩纹理和目标纹理中处于相同位置的像素点的绿通道数值，MaskTex.b和MainTex.b分别为遮罩纹理和目标纹理中处于相同位置的像素点的蓝通道数值，abs代表绝对值，max为取最大值函数。
通过上述公式(3)，计算遮罩纹理和目标纹理中处于相同位置的每一对像素点之间的差异值。
步骤S202：在目标纹理中，确定小于阈值的差异值对应的像素点为需要剔除的目标像素点，并将目标纹理中的目标像素点剔除，得到最终输出的图片。
在具体实现步骤S202的过程中，计算得到遮罩纹理和目标纹理中处于相同位置的每一对像素点之间的差异值之后，确定小于阈值的差异值对应的像素点为需要剔除的目标像素点，将目标纹理中的目标像素点剔除，将目标纹理中大于等于阈值的差异值所对应的像素点保留，得到最终输出的图片。
在本发明实施例中，计算遮罩纹理和目标纹理中处于相同位置的每一对像素点之间的差异值，在目标纹理中，将小于阈值的差异值对应的像素点剔除，得到最终输出的图片，降低噪声影响，提高实时抠图效果。
与上述本发明实施例提供的一种图片处理方法相对应，参见图3，本发明实施例还提供了一种图片处理系统的结构框图，该图片处理系统包括：获取单元301、计算单元302和处理单元303；
获取单元301，用于获取在虚拟现实直播之前以预设拍摄角度拍摄的环境图片并将其作为遮罩纹理，及获取在虚拟现实直播过程中以预设拍摄角度实时拍摄的待处理图片并将其作为目标纹理。
在具体实现中，获取单元301具体用于：获取在虚拟现实直播之前以预设拍摄角度拍摄的环境图片，并对环境图片进行双边滤波处理，得到对应的遮罩纹理；获取在虚拟现实直播过程中以预设拍摄角度实时拍摄的待处理图片，并对待处理图片进行双边滤波处理，得到对应的目标纹理。
计算单元302，用于分别计算遮罩纹理和目标纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值。
处理单元303，用于基于遮罩纹理和目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，比对遮罩纹理和目标纹理，确定目标纹理中需要剔除的目标像素点并将其剔除，得到最终输出的图片。
在本发明实施例中，在虚拟现实直播前，以预设拍摄角度拍摄环境图片。在虚拟直播过程中，以预设拍摄角度实时拍摄待处理图片，通过比对环境图片和待处理图片之间每个像素点的颜色差异，在待处理图片中，将与环境图片颜色差异不明显的像素点剔除，降低噪声影响，提高实时抠图效果。
优选的，结合图3，参见图4，示出了本发明实施例提供的一种图片处理系统的另一结构框图，处理单元303包括：计算模块3031和处理模块3032；
计算模块3031，用于基于遮罩纹理和目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，计算遮罩纹理和目标纹理中处于相同位置的像素点之间的差异值。
在具体实现中，计算模块3031具体用于：基于遮罩纹理和目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，结合公式(3)，计算遮罩纹理和目标纹理中处于相同位置的像素点之间的差异值a。
处理模块3032，用于在目标纹理中，确定小于阈值的差异值对应的像素点为需要剔除的目标像素点，并将目标纹理中的目标像素点剔除，得到最终输出的图片。
在本发明实施例中，计算遮罩纹理和目标纹理中处于相同位置的每一对像素点之间的差异值，在目标纹理中，将小于阈值的差异值对应的像素点剔除，得到最终输出的图片，降低噪声影响，提高实时抠图效果。
优选的，结合图3，参见图5，示出了本发明实施例提供的一种图片处理系统的又一结构框图，计算单元302包括：第一计算模块3021和第二计算模块3022；
第一计算模块3021，用于基于遮罩纹理中每一像素点的位置参数、红色像素值、绿色像素值和蓝色像素值，结合双边滤波处理公式，计算遮罩纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值。
第二计算模块3022，用于基于目标纹理中每一像素点的位置参数、红色像素值、绿色像素值和蓝色像素值，结合双边滤波处理公式，计算目标纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值。
综上所述，本发明实施例提供一种图片处理方法及系统，通过比对预先拍摄得到的环境图片和实时拍摄得到的待处理图片之间每个像素点的颜色差异，在待处理图片中，将与环境图片颜色差异不明显的像素点剔除，降低噪声影响，提高实时抠图效果。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统或系统实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的系统及系统实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种图片处理方法，其特征在于，所述方法包括：
获取在虚拟现实直播之前以预设拍摄角度拍摄的环境图片并将其作为遮罩纹理，及获取在虚拟现实直播过程中以所述预设拍摄角度实时拍摄的待处理图片并将其作为目标纹理；
分别计算所述遮罩纹理和所述目标纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值；
基于所述遮罩纹理和所述目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，比对所述遮罩纹理和所述目标纹理，确定所述目标纹理中需要剔除的目标像素点并将其剔除，得到最终输出的图片。
2.根据权利要求1所述的方法，其特征在于，所述基于所述遮罩纹理和所述目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，比对所述遮罩纹理和所述目标纹理，确定所述目标纹理中需要剔除的目标像素点并将其剔除，得到最终输出的图片，包括：
基于所述遮罩纹理和所述目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，计算所述遮罩纹理和所述目标纹理中处于相同位置的像素点之间的差异值；
在所述目标纹理中，确定小于阈值的所述差异值对应的像素点为需要剔除的目标像素点，并将所述目标纹理中的所述目标像素点剔除，得到最终输出的图片。
3.根据权利要求1所述的方法，其特征在于，分别计算所述遮罩纹理和所述目标纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值，包括：
基于所述遮罩纹理中每一像素点的位置参数、红色像素值、绿色像素值和蓝色像素值，结合双边滤波处理公式，计算所述遮罩纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值；
基于所述目标纹理中每一像素点的位置参数、红色像素值、绿色像素值和蓝色像素值，结合所述双边滤波处理公式，计算所述目标纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值。
4.根据权利要求2所述的方法，其特征在于，所述基于所述遮罩纹理和所述目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，计算所述遮罩纹理和所述目标纹理中处于相同位置的像素点之间的差异值，包括：
基于所述遮罩纹理和所述目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，结合a＝max(max(abs(MainTex.r-MaskTex.r),abs(MainTex.g-MaskTex.g)),abs(MainTex.b-MaskTex.b))，计算所述遮罩纹理和所述目标纹理中处于相同位置的像素点之间的差异值a；
其中，MaskTex.r和MainTex.r分别为所述遮罩纹理和所述目标纹理中处于相同位置的像素点的红通道数值，MaskTex.g和MainTex.g分别为所述遮罩纹理和所述目标纹理中处于相同位置的像素点的绿通道数值，MaskTex.b和MainTex.b分别为所述遮罩纹理和所述目标纹理中处于相同位置的像素点的蓝通道数值。
5.根据权利要求1所述的方法，其特征在于，所述获取在虚拟现实直播之前以预设拍摄角度拍摄的环境图片并将其作为遮罩纹理，及获取在虚拟现实直播过程中以所述预设拍摄角度实时拍摄的待处理图片并将其作为目标纹理，包括：
获取在虚拟现实直播之前以预设拍摄角度拍摄的环境图片，并对所述环境图片进行双边滤波处理，得到对应的遮罩纹理；
获取在虚拟现实直播过程中以所述预设拍摄角度实时拍摄的待处理图片，并对所述待处理图片进行双边滤波处理，得到对应的目标纹理。
6.一种图片处理系统，其特征在于，所述系统包括：
获取单元，用于获取在虚拟现实直播之前以预设拍摄角度拍摄的环境图片并将其作为遮罩纹理，及获取在虚拟现实直播过程中以所述预设拍摄角度实时拍摄的待处理图片并将其作为目标纹理；
计算单元，用于分别计算所述遮罩纹理和所述目标纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值；
处理单元，用于基于所述遮罩纹理和所述目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，比对所述遮罩纹理和所述目标纹理，确定所述目标纹理中需要剔除的目标像素点并将其剔除，得到最终输出的图片。
7.根据权利要求6所述的系统，其特征在于，所述处理单元包括：
计算模块，用于基于所述遮罩纹理和所述目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，计算所述遮罩纹理和所述目标纹理中处于相同位置的像素点之间的差异值；
处理模块，用于在所述目标纹理中，确定小于阈值的所述差异值对应的像素点为需要剔除的目标像素点，并将所述目标纹理中的所述目标像素点剔除，得到最终输出的图片。
8.根据权利要求6所述的系统，其特征在于，所述计算单元包括：
第一计算模块，用于基于所述遮罩纹理中每一像素点的位置参数、红色像素值、绿色像素值和蓝色像素值，结合双边滤波处理公式，计算所述遮罩纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值；
第二计算模块，用于基于所述目标纹理中每一像素点的位置参数、红色像素值、绿色像素值和蓝色像素值，结合所述双边滤波处理公式，计算所述目标纹理中经过双边滤波后的每一像素点的红通道数值、绿通道数值和蓝通道数值。
9.根据权利要求7所述的系统，其特征在于，所述计算模块具体用于：基于所述遮罩纹理和所述目标纹理中每一像素点的红通道数值、绿通道数值和蓝通道数值，结合a＝max(max(abs(MainTex.r-MaskTex.r),abs(MainTex.g-MaskTex.g)),abs(MainTex.b-MaskTex.b))，计算所述遮罩纹理和所述目标纹理中处于相同位置的像素点之间的差异值a；
其中，MaskTex.r和MainTex.r分别为所述遮罩纹理和所述目标纹理中处于相同位置的像素点的红通道数值，MaskTex.g和MainTex.g分别为所述遮罩纹理和所述目标纹理中处于相同位置的像素点的绿通道数值，MaskTex.b和MainTex.b分别为所述遮罩纹理和所述目标纹理中处于相同位置的像素点的蓝通道数值。
10.根据权利要求6所述的系统，其特征在于，所述获取单元具体用于：获取在虚拟现实直播之前以预设拍摄角度拍摄的环境图片，并对所述环境图片进行双边滤波处理，得到对应的遮罩纹理；获取在虚拟现实直播过程中以所述预设拍摄角度实时拍摄的待处理图片，并对所述待处理图片进行双边滤波处理，得到对应的目标纹理。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110643106.3A CN113382276A (zh) | 2021-06-09 | 2021-06-09 | 一种图片处理方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110643106.3A CN113382276A (zh) | 2021-06-09 | 2021-06-09 | 一种图片处理方法及系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113382276A true CN113382276A (zh) | 2021-09-10 |
Family
ID=77573404
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110643106.3A Pending CN113382276A (zh) | 2021-06-09 | 2021-06-09 | 一种图片处理方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113382276A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113989884A (zh) * | 2021-10-21 | 2022-01-28 | 武汉博视电子有限公司 | 基于脸部肌肤图像紫外深层及浅层色斑的识别方法 |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20130258138A1 (en) * | 2012-03-30 | 2013-10-03 | Samsung Electronics Co., Ltd. | Apparatus for generating an image with defocused background and method thereof |
| US20140002697A1 (en) * | 2012-06-29 | 2014-01-02 | Samsung Electronics Co., Ltd. | Apparatus and method of reducing noise of image |
| CN106162137A (zh) * | 2016-06-30 | 2016-11-23 | 北京大学 | 虚拟视点合成方法及装置 |
| CN107230182A (zh) * | 2017-08-03 | 2017-10-03 | 腾讯科技（深圳）有限公司 | 一种图像的处理方法、装置以及存储介质 |
| WO2018214769A1 (zh) * | 2017-05-24 | 2018-11-29 | 阿里巴巴集团控股有限公司 | 图像处理方法、装置和系统 |
| CN110047034A (zh) * | 2019-03-27 | 2019-07-23 | 北京大生在线科技有限公司 | 在线教育场景下的抠图换背景方法、客户端及系统 |
| CN110097603A (zh) * | 2019-05-07 | 2019-08-06 | 上海宝尊电子商务有限公司 | 一种时尚图像主色调解析方法 |
| US20200167899A1 (en) * | 2015-12-04 | 2020-05-28 | Searidge Technologies Inc. | Noise-cancelling filter for video images |
| CN111768431A (zh) * | 2020-06-28 | 2020-10-13 | 熵康(深圳)科技有限公司 | 一种高空抛物动目标检测方法、检测设备和检测系统 |
| CN112767312A (zh) * | 2020-12-31 | 2021-05-07 | 湖南快乐阳光互动娱乐传媒有限公司 | 一种图像处理方法、装置、存储介质及处理器 |
-
2021
- 2021-06-09 CN CN202110643106.3A patent/CN113382276A/zh active Pending
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20130258138A1 (en) * | 2012-03-30 | 2013-10-03 | Samsung Electronics Co., Ltd. | Apparatus for generating an image with defocused background and method thereof |
| US20140002697A1 (en) * | 2012-06-29 | 2014-01-02 | Samsung Electronics Co., Ltd. | Apparatus and method of reducing noise of image |
| US20200167899A1 (en) * | 2015-12-04 | 2020-05-28 | Searidge Technologies Inc. | Noise-cancelling filter for video images |
| CN106162137A (zh) * | 2016-06-30 | 2016-11-23 | 北京大学 | 虚拟视点合成方法及装置 |
| WO2018214769A1 (zh) * | 2017-05-24 | 2018-11-29 | 阿里巴巴集团控股有限公司 | 图像处理方法、装置和系统 |
| CN107230182A (zh) * | 2017-08-03 | 2017-10-03 | 腾讯科技（深圳）有限公司 | 一种图像的处理方法、装置以及存储介质 |
| CN110047034A (zh) * | 2019-03-27 | 2019-07-23 | 北京大生在线科技有限公司 | 在线教育场景下的抠图换背景方法、客户端及系统 |
| CN110097603A (zh) * | 2019-05-07 | 2019-08-06 | 上海宝尊电子商务有限公司 | 一种时尚图像主色调解析方法 |
| CN111768431A (zh) * | 2020-06-28 | 2020-10-13 | 熵康(深圳)科技有限公司 | 一种高空抛物动目标检测方法、检测设备和检测系统 |
| CN112767312A (zh) * | 2020-12-31 | 2021-05-07 | 湖南快乐阳光互动娱乐传媒有限公司 | 一种图像处理方法、装置、存储介质及处理器 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113989884A (zh) * | 2021-10-21 | 2022-01-28 | 武汉博视电子有限公司 | 基于脸部肌肤图像紫外深层及浅层色斑的识别方法 |
| CN113989884B (zh) * | 2021-10-21 | 2024-05-14 | 武汉博视电子有限公司 | 基于脸部肌肤图像紫外深层及浅层色斑的识别方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112330531B (zh) | 图像处理方法、装置、电子设备及存储介质 | |
| CN109302628B (zh) | 一种基于直播的人脸处理方法、装置、设备和存储介质 | |
| CN108965647B (zh) | 一种前景图像获得方法及装置 | |
| CN108961299B (zh) | 一种前景图像获得方法及装置 | |
| CN109978774B (zh) | 多帧连续等曝光图像的去噪融合方法及装置 | |
| WO2016139260A9 (en) | Method and system for real-time noise removal and image enhancement of high-dynamic range images | |
| Sidike et al. | Adaptive trigonometric transformation function with image contrast and color enhancement: Application to unmanned aerial system imagery | |
| US20120212477A1 (en) | Fast Haze Removal and Three Dimensional Depth Calculation | |
| CN108335272B (zh) | 一种拍摄图片的方法及设备 | |
| TWI489416B (zh) | 影像還原方法 | |
| CN106570838A (zh) | 一种图像亮度优化方法及装置 | |
| JP2603063B2 (ja) | ビデオ・フォトグラフィに適用可能な永続的色補正装置 | |
| CN102480626A (zh) | 图像处理装置、显示装置以及图像处理方法 | |
| WO2023273868A1 (zh) | 图像降噪方法、装置、终端、存储介质 | |
| CN110175967B (zh) | 图像去雾处理方法、系统、计算机设备和存储介质 | |
| CN113382276A (zh) | 一种图片处理方法及系统 | |
| CN112884688A (zh) | 一种图像融合方法、装置、设备及介质 | |
| CN110796689B (zh) | 一种视频处理方法、电子设备及存储介质 | |
| CN112435173A (zh) | 一种图像处理和直播方法、装置、设备和存储介质 | |
| CN108961258B (zh) | 一种前景图像获得方法及装置 | |
| Terai et al. | Color image contrast enhancement by retinex model | |
| CN114529460A (zh) | 低照度场景智慧公路监测快速去雾方法、装置和电子设备 | |
| CN107240075A (zh) | 一种雾霾图像增强处理方法及系统 | |
| WO2017091900A1 (en) | Noise-cancelling filter for video images | |
| CN112446848A (zh) | 图像处理方法、装置及电子设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210910 |
|
| RJ01 | Rejection of invention patent application after publication |