CN112235520B - 一种图像处理方法、装置、电子设备及存储介质 - Google Patents
一种图像处理方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN112235520B CN112235520B CN202011418784.1A CN202011418784A CN112235520B CN 112235520 B CN112235520 B CN 112235520B CN 202011418784 A CN202011418784 A CN 202011418784A CN 112235520 B CN112235520 B CN 112235520B
- Authority
- CN
- China
- Prior art keywords
- image
- original image
- color
- determining
- color key
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 29
- 238000012545 processing Methods 0.000 claims abstract description 101
- 230000007704 transition Effects 0.000 claims abstract description 64
- 230000004044 response Effects 0.000 claims abstract description 19
- 238000000034 method Methods 0.000 claims description 56
- 230000006870 function Effects 0.000 claims description 42
- 230000010365 information processing Effects 0.000 claims description 39
- 230000008569 process Effects 0.000 claims description 25
- 230000009466 transformation Effects 0.000 claims description 17
- 230000001960 triggered effect Effects 0.000 claims description 11
- 230000003993 interaction Effects 0.000 claims description 6
- 230000002452 interceptive effect Effects 0.000 claims description 6
- 230000005540 biological transmission Effects 0.000 claims description 5
- 230000004927 fusion Effects 0.000 claims description 4
- 230000006978 adaptation Effects 0.000 claims description 3
- 230000009467 reduction Effects 0.000 claims description 3
- 230000000694 effects Effects 0.000 description 14
- 238000005516 engineering process Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 12
- 238000013473 artificial intelligence Methods 0.000 description 9
- 238000010801 machine learning Methods 0.000 description 6
- 241000282414 Homo sapiens Species 0.000 description 5
- 238000013528 artificial neural network Methods 0.000 description 4
- 238000009877 rendering Methods 0.000 description 4
- 238000005070 sampling Methods 0.000 description 4
- 238000012549 training Methods 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 239000003086 colorant Substances 0.000 description 3
- 238000004590 computer program Methods 0.000 description 3
- 238000013135 deep learning Methods 0.000 description 3
- 238000005286 illumination Methods 0.000 description 3
- 238000003491 array Methods 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 235000019800 disodium phosphate Nutrition 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000003796 beauty Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000000740 bleeding effect Effects 0.000 description 1
- 210000000746 body region Anatomy 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003058 natural language processing Methods 0.000 description 1
- 230000000306 recurrent effect Effects 0.000 description 1
- 238000010186 staining Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000002618 waking effect Effects 0.000 description 1
- 238000005406 washing Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Processing (AREA)
Abstract
本发明提供了一种图像处理方法，包括：获取待处理的原始图像和背景图像，并对所述原始图像进行边界调整处理，形成过渡图像；基于所述过渡图像，确定与所述过渡图像相匹配的色键参数；响应于所述色键参数，确定与所述色键参数相匹配的图像处理的边界范围；基于所述色键参数和所述图像处理的边界范围，确定相匹配的掩码信息；根据所述原始图像的尺寸，对所述掩码信息进行调整，以实现所述掩码信息与所述原始图像相适配基于经过调整的掩码信息和所述背景图像对所述原始图像进行背景替换处理，形成目标图像，本发明还提供了图像处理装置、电子设备及存储介质。
Description
技术领域
本发明涉及信息处理技术，尤其涉及图像处理方法、装置、电子设备及存储介质。
背景技术
在互联网社交等应用中，经常用到视频特效来展示丰富多彩，甚至超越现实的视频效果。例如，静止特效、分身特效等。然而，直播视频在实现背景替换的特效时，由于用户所处的环境光线，镜头焦距均有可能发生变化，往往不能够获得准确清晰的背景替换效果，同时延缓的背景替换不利于直播视频的背景替换观看效果。
发明内容
有鉴于此，本发明实施例提供一种图像处理方法、装置、电子设备及存储介质，能够根据使用环境调整原始图像，基于所述色键参数和所述图像处理的边界范围，确定相匹配的掩码信息，基于经过调整的掩码信息和所述背景图像对所述原始图像进行背景替换处理，形成目标图像，由此，不但能够准确高效地形成背景替换的图像，同时图像处理过程降低了硬件资源的占用，减少了硬件设备成本的提升，也减少了处理的延缓性，更加适应高码流的使用环境，提高用户的使用体验。
本发明实施例的技术方案是这样实现的：
本发明实施例提供了一种图像处理方法，其特征在于，所述方法包括：
获取待处理的原始图像和与所述原始图像相对应的背景图像，并对所述原始图像进行边界调整处理，形成过渡图像；
基于所述过渡图像，确定与所述过渡图像相匹配的色键参数；
响应于所述色键参数，确定与所述色键参数相匹配的图像处理的边界范围；
基于所述色键参数和所述图像处理的边界范围，确定相匹配的掩码信息；
根据所述原始图像的尺寸，对所述掩码信息进行调整，以实现所述掩码信息与所述原始图像相适配；
基于经过调整的掩码信息和所述背景图像对所述原始图像进行背景替换处理，形成目标图像，其中，所述目标图像融合了所述原始图像和背景图像的不同特征。
本发明实施例还提供了一种图像处理装置，所述装置包括：
信息传输模块，用于获取待处理的原始图像和背景图像，并对所述原始图像进行边界调整处理，形成过渡图像；
信息处理模块，用于基于所述过渡图像，确定与所述过渡图像相匹配的色键参数；
所述信息处理模块，用于响应于所述色键参数，确定与所述色键参数相匹配的图像处理的边界范围；
所述信息处理模块，用于基于所述色键参数和所述图像处理的边界范围，确定相匹配的掩码信息；
所述信息处理模块，用于根据所述原始图像的尺寸，对所述掩码信息进行调整，以实现所述掩码信息与所述原始图像相适配；
所述信息处理模块，用于基于经过调整的掩码信息和所述背景图像对所述原始图像进行背景替换处理，形成目标图像，其中，所述目标图像融合了所述原始图像和背景图像的不同特征。
上述方案中，
所述信息处理模块，用于基于所获取的背景图像，确定所述原始图像的使用环境；
所述信息处理模块，用于基于所述原始图像的使用环境，对所述原始图像进行边界缩小处理，形成第一过渡图像，其中，所述第一过渡图像的像素低于所述原始图像的像素；
所述信息处理模块，用于当所述原始图像的使用环境为高分辨率直播场景时，对所述原始图像进行边界扩大处理，形成第二过渡图像，其中，所述第二过渡图像的像素高于所述原始图像的像素。
上述方案中，
所述信息处理模块，用于对所述过渡图像的像素进行聚类处理，形成像素聚类；
所述信息处理模块，用于当接收到用户的取色指令信息时，响应于所述取色指令，在所述像素聚类中确定与所述过渡图像相匹配的色键参数；
所述信息处理模块，用于当未接收到用户的取色指令信息时，确定所述像素聚类的中心；
所述信息处理模块，用于基于所述像素聚类的中心确定与所述过渡图像相匹配的色键参数。
上述方案中，
所述信息处理模块，用于确定与所述取色指令相匹配的加权参数和与所述取色指令相匹配的色键参数；
所述信息处理模块，用于确定与所述取色指令相匹配的色键参数距离最近的像素聚类的中心；
所述信息处理模块，用于基于所述加权参数，对与所述取色指令相匹配的色键参数和所述与所述取色指令相匹配的色键参数距离最近的像素聚类的中心进行加权处理，确定与所述过渡图像相匹配的色键参数。
上述方案中，
所述信息处理模块，用于响应于所述色键参数，确定与所述色键参数相对应的第一掩码集群；
所述信息处理模块，用于遍历阈值区间，确定与所述阈值区间相匹配的第二掩码集群；
所述信息处理模块，用于基于所述第一掩码集群和所述第二掩码集群的交并比集合，确定与所述色键参数相匹配的图像处理的边界范围。
上述方案中，
所述信息处理模块，用于确定与所述待处理的原始图像相关联的连续图像帧所分别对应的第一掩码集群集合；
所述信息处理模块，用于确定所述第一掩码集群集合的加权掩码集群平均值；
所述信息处理模块，用于通过所述第一掩码集群集合的加权掩码集群平均值对所述第一掩码集群进行平滑度调整。
上述方案中，
所述信息处理模块，用于确定与所述待处理的原始图像相匹配的经验阈值；
所述信息处理模块，用于基于与所述待处理的原始图像相匹配的经验阈值和与所述色键参数相匹配的图像处理的边界范围，确定所述原始图像中的溢色像素；
所述信息处理模块，用于对所述原始图像中的溢色像素的灰度值进行调整。
上述方案中，所述装置还包括：
显示模块，用于在视图界面中呈现图像变换功能项，所述图像变换功能项，用于实现待处的原始图像与背景图像进行图像融合；
所述显示模块，用于响应于针对所述图像变换功能项的触发操作，获取并呈现待处理的原始图像和背景图像；
所述显示模块，用于响应于基于所述原始图像触发的变换确定操作，生成并呈现融合了所述原始图像和背景图像的不同特征的目标图像。
上述方案中，
所述显示模块，用于呈现图像模板选择界面，并在所述图像模板选择界面中呈现至少一个背景图像模板；
所述显示模块，用于响应于基于所述背景图像模板选择界面触发的背景图像模板的选择操作，将所述选择操作对应的背景图像模板作为原始图像背景图像。
上述方案中，
所述显示模块，用于呈现用于分享所述目标图像的图像分享功能项；
所述显示模块，用于响应于针对所述图像分享功能项的触发操作，分享所述目标图像。
上述方案中，
所述显示模块，用于响应于针对图像调整功能项的查看操作，呈现包括所述待处理的原始图像和所述背景图像的内容页面，并在所述内容页面中呈现至少一个互动功能项，所述互动功能项用于实现与所述待处理的原始图像的互动；
所述显示模块，用于接收基于所述互动功能项触发的针对所述过渡图像取色指令，以执行相应的取色指令。
本发明实施例还提供了一种电子设备，所述电子设备包括：
存储器，用于存储可执行指令；
处理器，用于运行所述存储器存储的可执行指令时，实现前序的图像处理方法。
本发明实施例还提供了一种计算机可读存储介质，存储有可执行指令，所述可执行指令被处理器执行时实现前序的图像处理方法。
本发明实施例具有以下有益效果：
本发明实施例通过获取待处理的原始图像和背景图像，并对所述原始图像进行边界调整处理，形成过渡图像；基于所述过渡图像，确定与所述过渡图像相匹配的色键参数；响应于所述色键参数，确定与所述色键参数相匹配的图像处理的边界范围；基于所述色键参数和所述图像处理的边界范围，确定相匹配的掩码信息；根据所述原始图像的尺寸，对所述掩码信息进行调整，以实现所述掩码信息与所述原始图像相适配；基于经过调整的掩码信息和所述背景图像对所述原始图像进行背景替换处理，形成目标图像，其中，所述目标图像融合了所述原始图像和背景图像的不同特征。由此，不但能够准确高效地形成背景替换的图像，同时图像处理过程降低了硬件资源的占用，减少了硬件设备成本的提升，也减少了处理的延缓性，更加适应高码流的使用环境，提高用户的使用体验。
附图说明
图1为本发明实施例提供的图像处理方法的使用场景示意图；
图2为本发明实施例提供的电子设备的组成结构示意图；
图3为本发明实施例提供的图像处理方法一个可选的流程示意图；
图4为本发明实施例中原始图像和背景图像进行背景替换处理形成目标图像的示意图；
图5为本发明实施例中图像处理方法的产品表现示意图；
图6为本发明实施例中色键显示效果示意图；
图7为本发明实施例中溢色过程示意图；
图8为本发明实施例中图像处理方法的目标图像分享功能示意图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明作进一步地详细描述，所描述的实施例不应视为对本发明的限制，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
在以下的描述中，涉及到“一些实施例”，其描述了所有可能实施例的子集，但是可以理解， “一些实施例”可以是所有可能实施例的相同子集或不同子集，并且可以在不冲突的情况下相互结合。
对本发明实施例进行进一步详细说明之前，对本发明实施例中涉及的名词和术语进行说明，本发明实施例中涉及的名词和术语适用于如下的解释。
1）响应于，用于表示所执行的操作所依赖的条件或者状态，当满足所依赖的条件或状态时，所执行的一个或多个操作可以是实时的，也可以具有设定的延迟；在没有特别说明的情况下，所执行的多个操作不存在执行先后顺序的限制。
2）下采样处理，对于一个样值序列间隔几个样值取样一次，这样得到新序列就是原序列的下采样，例如：对于一幅图像I尺寸为M*N，对其进行s倍下采样，即得到(M/s)*(N/s)尺寸的得分辨率图像，其中 s应该是M和N的公约数。
3）客户端，终端中实现特定功能的载体，例如移动客户端（APP）是移动终端中特定功能的载体，例如执行用户手势识别的功能的程序。
4）组件（Component），是小程序的视图的功能模块，也称为前端组件，页面中的按钮、标题、表格、侧边栏、内容和页脚等，组件包括模块化的代码以便于在小程序的不同的页面中重复使用。
5）小程序（Mini Program），是一种基于面向前端的语言（例如JavaScript）开发的、在超文本标记语言（HTML，Hyper Text Markup Language）页面中实现服务的程序，由客户端（例如浏览器或内嵌浏览器核心的任意客户端）经由网络（如互联网）下载、并在客户端的浏览器环境中解释和执行的软件，节省在客户端中安装的步骤。例如，通过语音指令唤醒终端中的小程序实现在社交网络客户端中可以下载、运行用于实现图像编辑、人物背景替换等各种服务的小程序。
6）RGB，三原色编码方法，又可以称作RGB色彩模式，是工业界的一种颜色标准，是通过对红(R)、绿(G)、蓝(B)三个颜色通道的变化以及它们相互之间的叠加来得到各式各样的颜色的，RGB即是代表红、绿、蓝三个通道的颜色，这个标准几乎包括了人类视力所能感知的所有颜色，是目前运用最广的颜色系统之一。
7）溢色，使用绿幕技术处理图像时，由于幕布的反射，使得幕布前的人或物体的边缘“沾染”上幕布的颜色称之为溢色，其中，在对溢色的处理过程中需要去除的颜色称为色键（Chroma key）。
图1为本发明实施例提供的图像处理方法的使用场景示意图，参考图1，终端（包括终端10-1和终端10-2）上设置有图像处理软件的客户端或者小程序，通过网络300与服务器200进行图像信息的交互，实现背景替换处理，为实现支撑一个示例性应用，实现本发明实施例图像处理装置可以是服务器，展示图像处理装置的图像处理结果的可以是运行各种客户端的终端，两者通过网络40连接，其中网络40可以是广域网或者局域网，又或者是二者的组合，使用无线链路实现数据传输。终端10提交待处理图像，由图像处理装置响应于针对图像变换功能项的触发操作，实现图像处理，并由终端10获取并呈现目标图像，其中，所述目标图像融合了所述原始图像和背景图像的不同特征。
在本发明的一些实施例中，图像处理装置的图形界面中可以运行视频客户端，视频客户端能够根据用户在播放界面通过各种人机交互方式（例如手势、语音等）指示的原始图像和相对应的不同类型背景图像（例如风景图像、人物图像、卡通图像和游戏图像），可以理解地，上述的图像处理也可以迁移到服务器中，借助服务器的硬件资源对替换后的帧图像进行重新编码，形成具有背景替换效果的视频。
其中，本申请实施例所提供的图像处理方法可以基于人工智能实现，人工智能(Artificial Intelligence，AI)是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能，感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。换句话说，人工智能是计算机科学的一个综合技术，它企图了解智能的实质，并生产出一种新的能以人类智能相似的方式做出反应的智能机器。人工智能也就是研究各种智能机器的设计原理与实现方法，使机器具有感知、推理与决策的功能。
人工智能技术是一门综合学科，涉及领域广泛，既有硬件层面的技术也有软件层面的技术。人工智能基础技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理技术、操作/交互系统、机电一体化等技术。人工智能软件技术主要包括计算机视觉技术、语音处理技术、自然语言处理技术以及机器学习/深度学习等几大方向。
在本申请实施例中，主要涉及的人工智能软件技术包括上述语音处理技术和机器学习等方向。例如，可以涉及语音技术(Speech Technology)中的语音识别技术(AutomaticSpeech Recognition，ASR)，其中包括语音信号预处理(Speech signal preprocessing)、语音信号频域分析(Speech signal frequency analyzing)、语音信号特征提取(Speechsignal feature extraction)、语音信号特征匹配/识别(Speech signal featurematching/recognition)、语音的训练(Speech training)等。
例如可以涉及机器学习(Machine learning，ML)，机器学习是一门多领域交叉学科，涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科。专门研究计算机怎样模拟或实现人类的学习行为，以获取新的知识或技能，重新组织已有的知识结构使之不断改善自身的性能。机器学习是人工智能的核心，是使计算机具有智能的根本途径，其应用遍及人工智能的各个领域。机器学习通常包括深度学习(Deep Learning)等技术，深度学习包括人工神经网络(artificial neural network) ，例如卷积神经网络(ConvolutionalNeural Network，CNN)、循环神经网络(Recurrent Neural Network，RNN)、深度神经网络(Deep neural network，DNN)等。
可以理解的是，本申请提供的图像处理方法以及语音处理可以应用于智能设备(Intelligent device)上，智能设备可以是任何一种具有语音指令识别功能的设备，例如可以是智能终端、智能家居设备(如智能音箱、智能洗衣机等)、智能穿戴设备(如智能手表)、车载智能中控系统（通过语音指令唤醒终端中执行不同任务的小程序）或者AI智能医疗设备（通过语音指令进行唤醒触发）等。
下面对本发明实施例的电子设备的结构做详细说明，电子设备可以各种形式来实施，如带有语音识别模型训练功能的专用终端，也可以为设置有语音识别模型训练功能的服务器，例如前序图1中的服务器200。图2为本发明实施例提供的电子设备的组成结构示意图，可以理解，图2仅仅示出了电子设备的示例性结构而非全部结构，根据需要可以实施图2示出的部分结构或全部结构。
本发明实施例提供的电子设备包括：至少一个处理器201、存储器202、用户接口203和至少一个网络接口204。电子设备中的各个组件通过总线系统205耦合在一起。可以理解，总线系统205用于实现这些组件之间的连接通信。总线系统205除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图2中将各种总线都标为总线系统205。
其中，用户接口203可以包括显示器、键盘、鼠标、轨迹球、点击轮、按键、按钮、触感板或者触摸屏等。
可以理解，存储器202可以是易失性存储器或非易失性存储器，也可包括易失性和非易失性存储器两者。本发明实施例中的存储器202能够存储数据以支持终端（如10-1）的操作。这些数据的示例包括：用于在终端（如10-1）上操作的任何计算机程序，如操作系统和应用程序。其中，操作系统包含各种系统程序，例如框架层、核心库层、驱动层等，用于实现各种基础业务以及处理基于硬件的任务。应用程序可以包含各种应用程序。
在一些实施例中，本发明实施例提供的电子设备可以采用软硬件结合的方式实现，作为示例，本发明实施例提供的电子设备可以是采用硬件译码处理器形式的处理器，其被编程以执行本发明实施例提供的图像处理方法。例如，硬件译码处理器形式的处理器可以采用一个或多个应用专用集成电路（ASIC，Application Specific IntegratedCircuit）、DSP、可编程逻辑器件（PLD，Programmable Logic Device）、复杂可编程逻辑器件（CPLD，Complex Programmable Logic Device）、现场可编程门阵列（FPGA，Field-Programmable Gate Array）或其他电子元件。
作为本发明实施例提供的电子设备采用软硬件结合实施的示例，本发明实施例所提供的电子设备可以直接体现为由处理器201执行的软件模块组合，软件模块可以位于存储介质中，存储介质位于存储器202，处理器201读取存储器202中软件模块包括的可执行指令，结合必要的硬件（例如，包括处理器201以及连接到总线205的其他组件）完成本发明实施例提供的图像处理方法。
作为示例，处理器201可以是一种集成电路芯片，具有信号的处理能力，例如通用处理器、数字信号处理器（DSP，Digital Signal Processor），或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等，其中，通用处理器可以是微处理器或者任何常规的处理器等。
作为本发明实施例提供的电子设备采用硬件实施的示例，本发明实施例所提供的装置可以直接采用硬件译码处理器形式的处理器201来执行完成，例如，被一个或多个应用专用集成电路（ASIC，Application Specific Integrated Circuit）、DSP、可编程逻辑器件（PLD，Programmable Logic Device）、复杂可编程逻辑器件（CPLD，Complex ProgrammableLogic Device）、现场可编程门阵列（FPGA，Field-Programmable Gate Array）或其他电子元件执行实现本发明实施例提供的图像处理方法。
本发明实施例中的存储器202用于存储各种类型的数据以支持电子设备的操作。这些数据的示例包括：用于在电子设备上操作的任何可执行指令，如可执行指令，实现本发明实施例的从图像处理方法的程序可以包含在可执行指令中。
在另一些实施例中，本发明实施例提供的电子设备可以采用软件方式实现，图2示出了存储在存储器202中的电子设备，其可以是程序和插件等形式的软件，并包括一系列的模块，作为存储器202中存储的程序的示例，可以包括电子设备，电子设备的图像处理模块中包括以下的软件模块：信息传输模块2081，信息处理模块2082。当电子设备中的软件模块被处理器201读取到RAM中并执行时，将实现本发明实施例提供的图像处理方法，下面介绍本发明实施例中电子设备中各个软件模块的功能，其中，
信息传输模块2081，用于获取待处理的原始图像和背景图像，并对所述原始图像进行边界调整处理，形成过渡图像；
信息处理模块2082，用于基于所述过渡图像，确定与所述过渡图像相匹配的色键参数；
所述信息处理模块2082，用于响应于所述色键参数，确定与所述色键参数相匹配的图像处理的边界范围；
所述信息处理模块2082，用于基于所述色键参数和所述图像处理的边界范围，确定相匹配的掩码信息；
所述信息处理模块2082，用于根据所述原始图像的尺寸，对所述掩码信息进行调整，以实现所述掩码信息与所述原始图像相适配；
所述信息处理模块2082，用于基于经过调整的掩码信息和所述背景图像对所述原始图像进行背景替换处理，形成目标图像，其中，所述目标图像融合了所述原始图像和背景图像的不同特征。
根据图2所示的电子设备，在本申请的一个方面中，本申请还提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述图像处理方法的各种可选实现方式中所提供的不同实施例及实施例的组合。
结合图2示出的图像处理装置说明本发明实施例提供的图像处理方法，参见图3，图3为本发明实施例提供的图像处理方法一个可选的流程示意图，可以理解地，图3所示的图像处理方法可以应用于终端图像处理领域，通过图像处理进程或者图像处理小程序实现通过背景图像对原始图像的背景部分进行替换的替换，其中，图3示的步骤可以由运行图像处理装置的各种电子设备执行，例如可以是如带有图像处理功能的专用终端、服务器或者服务器集群。下面针对图3示出的步骤进行说明。
步骤301：图像处理装置获取待处理的原始图像和背景图像，并对所述原始图像进行边界调整处理，形成过渡图像。
其中，背景图像可以是与待处理的原始图像呈现固定搭配的背景图像，例如全部为纯色（例如红色背景图像或者蓝色背景图像）的背景图像，用户在视频直播应用进程中，通过选择与原始图像相适配的纯色背景图像，可以节省背景图像的选择时间，及时呈现经过背景替换处理的目标图像，以适应视频直播的使用环境。进一步地，背景图像还可以是与待处理的原始图像呈现随机搭配的虚拟场景背景图像，例如可以是游戏场景中的背景图像，用户在图像处理过程中，可以根据不同的需求，自由选择所需要的游戏场景的背景图像，以增加图像处理的趣味性。
参考图4，图4为本发明实施例中原始图像和背景图像进行背景替换处理形成目标图像的示意图。其中，在本发明的一些实施例中，终端设置有应用客户端，如视频应用客户端、新闻应用客户端、即时通讯客户端等，终端可以通过应用客户端呈现经过背景替换处理的新图像，通过待处理的原始图像与背景图像模板中的背景图像进行背景替换处理，避免由于用户所处环境光照的影响，获得图像的光照不均匀的情况，可以由即时通讯客户端中的小程序执行，相应的，经过即时通讯客户端中的小程序生成的对应目标图像模板的目标图像也可以保存在用户的终端存储介质中。
由于用户终端的计算能力有限，在直播客户端中更换视频码流中每一帧视频图像的背景需要消耗用户终端的大部分算力，为了减少用户终端的计算量，基于所述原始图像的使用环境，对所述原始图像进行边界缩小处理，形成第一过渡图像，其中，所述第一过渡图像的像素低于所述原始图像的像素，并通过对第一过渡图像的处理，确定相应的色键参数和图像处理的边界范围，可以有效减少用户终端的计算量，使得直播视频中更换视频流中的初始图像的背景更加顺畅，便于用户的各类型终端均能够使用本申请所提供的图像处理方法实现对背景图像的替换。
在本发明的一些实施例中，当所述原始图像的使用环境为高分辨率直播场景时，对所述原始图像进行边界扩大处理，形成第二过渡图像，其中，所述第二过渡图像的像素高于所述原始图像的像素，具体来说，可以对原始图像中的人像的人体区域执行特效渲染操作，其中，所述特效渲染操作包括滤镜、美颜、贴纸和边缘过渡至少之一，通过高分辨率直播场景，将渲染特效向用户展示时，第二过渡图像的像素高于所述原始图像的像素更加便于用户发出准确地取色指令，实现对背景的替换，减少渲染特效与背景的冲突。
步骤302：图像处理装置基于所述过渡图像，确定与所述过渡图像相匹配的色键参数。
在本发明的一些实施例中，基于所述过渡图像，确定与所述过渡图像相匹配的色键参数，可以通过以下方式实现：
对所述过渡图像的像素进行聚类处理，形成像素聚类；当接收到用户的取色指令信息时，响应于所述取色指令，在所述像素聚类中确定与所述过渡图像相匹配的色键参数；或者，当未接收到用户的取色指令信息时，确定所述像素聚类的中心；基于所述像素聚类的中心确定与所述过渡图像相匹配的色键参数。其中，参考图5，图5为本发明实施例中图像处理方法的产品表现示意图，其中，在视图界面中呈现图像变换功能项，所述图像变换功能项，用于实现待处的原始图像与背景图像进行图像融合；响应于针对所述图像变换功能项的触发操作，获取并呈现待处理的原始图像和背景图像；响应于基于所述原始图像触发的变换确定操作，生成并呈现融合了所述原始图像和背景图像的不同特征的目标图像。当用户通过图形处理功能的APP对待处理图像进行背景替换操作时，图像处理APP可以在图像模板选择界面中向用户提供不同的图像模板，这些图像模板具有不同的显示风格，在一些实施例中，背景图像模板的选择操作可通过针对背景图像模板选择界面的触发操作而触发，如获取用户针对直播的视频内容的鼠标点击操作或屏幕的触摸操作。在一些实例中，背景图像模板的选择操作还可通过终端上设置的选择快捷键触发，如获取用户针对键盘上的Print Screen键的点击操作；或通过获取用户针对如移动手机、平板电脑等移动智能设备上的背景图像模板的选择操作快捷键的点击操作。如图5所示，呈现图像模板选择界面，并在所述图像模板选择界面中呈现至少一个背景图像模板；响应于基于所述背景图像模板选择界面触发的背景图像模板的选择操作，将所述选择操作对应的背景图像模板作为原始图像背景图像。参考图6，图6为本发明实施例中色键显示效果示意图，其中，图6所示的色键具有跟随场景光照变化的功能，在RGB空间，可以根据不同的而色键确定方式，确定需要去除的颜色（色键）K，其中，K的RGB值分别为58，200以及76。
进一步地，当用户通过图4所示的界面触发取色指令时，可以确定与所述取色指令相匹配的加权参数和与所述取色指令相匹配的色键参数；确定与所述取色指令相匹配的色键参数距离最近的像素聚类的中心；基于所述加权参数，对与所述取色指令相匹配的色键参数和所述与所述取色指令相匹配的色键参数距离最近的像素聚类的中心进行加权处理，确定与所述过渡图像相匹配的色键参数。其中，当用户输入非空时，选取与用户输入色键K_input最近的聚类中心K_nearest_cluster，将两者进行加权，得到最终色键K（参考公式1）：
由于实际场景中，会有光影变化，为了自动适应这种光影变化，可以使用了色彩跟踪的策略，在用户通过取色指令设置色键之后，色键依然会自动更新：上一帧检测为背景的像素的平均值与用户输入色键的加权，参考公式2：
步骤303：图像处理装置响应于所述色键参数，确定与所述色键参数相匹配的图像处理的边界范围。
在本发明的一些实施例中，响应于所述色键参数，确定与所述色键参数相匹配的图像处理的边界范围，可以通过以下方式实现：
响应于所述色键参数，确定与所述色键参数相对应的第一掩码集群；遍历阈值区间，确定与所述阈值区间相匹配的第二掩码集群；基于所述第一掩码集群和所述第二掩码集群的交并比集合，确定与所述色键参数相匹配的图像处理的边界范围。其中，当确定色键之后，可以需要进一步确定需要被去除的颜色点的取值范围（边界），如在图 6所示的RGB空间中，以色键K为中心，求得距离阈值R。在R为半径的球形区域为需要去除与色键相近的颜色。这些与色键相近的颜色与色键一起组成了需要去除的颜色空间，该空间以色键为“中心”。当然，对于不规则的阈值R对应的区域，可以通过分割计算，锁定所要去除的色键的范围。进一步地，确定了色键与色彩边界之后，需要对初始图像进行绿幕处理，并输出相应的掩码图。所输出掩码图是一个灰度图，其值为[0, 1]区间，其中，0表征该位置对应图像的像素是需要被去除的，1表征该像素需要被保留，0.5表征像素应该保留一半。其中，第一掩码集群Mask_cluster是由聚类得到的，结果误差值较大，因此可以按固定步长，遍历经验阈值区间[lower, upper]，即距离与K接近的像素，对于每一个步长下的阈值R，都可以求得一个第二掩码集群Mask。为了确定最优的R值，可以计算Mask与Mask_cluster的IOU（Intersection Of Union），当IOU取最大值时，确定一个最优R，即求得色彩边界范围。
步骤304：图像处理装置基于所述色键参数和所述图像处理的边界范围，确定相匹配的掩码信息。
步骤305：图像处理装置根据所述原始图像的尺寸，对所述掩码信息进行调整，以实现所述掩码信息与所述原始图像相适配。
步骤306：图像处理装置基于经过调整的掩码信息和所述背景图像对所述原始图像进行背景替换处理，形成目标图像。
其中，所述目标图像融合了所述原始图像和背景图像的不同特征。
其中，基于掩码信息M，对于所输入的原始图像I，所选择的背景图像B，参考公式3，可以得到背景替换（合成）后的图像S，
参考图7，图7为本发明实施例中溢色过程示意图，在本发明的一些实施例中，可以确定与所述待处理的原始图像相匹配的经验阈值；基于与所述待处理的原始图像相匹配的经验阈值和与所述色键参数相匹配的图像处理的边界范围，确定所述原始图像中的溢色像素；对所述原始图像中的溢色像素的灰度值进行调整。其中，通过调个经验阈值P（P≥R），筛选出原图中，与色键距离为[R, P]闭区间内的像素，将这些像素定义为溢色像素，即这些像素由于收到幕布的反射作用，有些出现溢色，影响感观，需要改正。可以将溢色像素的值设置为灰度值，(R+G+B)/3进行修正。当然为了调和平滑度，可以确定与所述待处理的原始图像相关联的连续图像帧所分别对应的第一掩码集群集合；确定所述第一掩码集群集合的加权掩码集群平均值；通过所述第一掩码集群集合的加权掩码集群平均值对所述第一掩码集群进行平滑度调整，由此，可以避免平滑度的变化所造成的背景色差。
参考图8，图8为本发明实施例中图像处理方法的目标图像分享功能示意图，在本发明的一些实施例中，还可以响应于针对所述图像分享功能项的触发操作，分享所述目标图像。其中，图像分享功能项可以关联默认的分享路径，例如分享至微信进程的朋友圈功能项，也可以响应于对所述图像分享功能项的触发，呈现包含至少两个分享路径选择项的分享界面，响应于基于分享界面触发的分享路径选择操作，通过所选择的分享路径分享所述目标图像至不同的社交应用进程或者图像截取应用进程，进行生成的新图像的分享或截取。
本发明具有以下有益技术效果：
本发明实施例通过获取待处理的原始图像和背景图像，并对所述原始图像进行边界调整处理，形成过渡图像；基于所述过渡图像，确定与所述过渡图像相匹配的色键参数；响应于所述色键参数，确定与所述色键参数相匹配的图像处理的边界范围；基于所述色键参数和所述图像处理的边界范围，确定相匹配的掩码信息；根据所述原始图像的尺寸，对所述掩码信息进行调整，以实现所述掩码信息与所述原始图像相适配；基于经过调整的掩码信息和所述背景图像对所述原始图像进行背景替换处理，形成目标图像，其中，所述目标图像融合了所述原始图像和背景图像的不同特征。由此，不但能够准确高效地形成背景替换的图像，同时图像处理过程降低了硬件资源的占用，减少了硬件设备成本的提升，也减少了处理的延缓性，更加适应高码流的使用环境，提高用户的使用体验。
以上所述，仅为本发明的实施例而已，并非用于限定本发明的保护范围，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。
Claims (14)
1.一种图像处理方法，其特征在于，所述方法包括：
获取直播进程或者游戏进程中的待处理的原始图像和与所述原始图像相对应的背景图像，并对所述原始图像进行边界调整处理，形成过渡图像；
基于所述过渡图像，确定与所述过渡图像相匹配的色键参数；
基于所述背景图像的像素平均值以及对应的加权值对所述色键参数进行自动更新，其中，自动更新的色键参数可以表示为：
响应于所述色键参数，确定与所述色键参数相对应的第一掩码集群；
通过固定步长遍历阈值区间，确定与所述阈值区间相匹配的第二掩码集群，其中，所述阈值区间与所述待处理的原始图像相匹配；
基于所述第一掩码集群和所述第二掩码集群的交并比集合，确定与所述色键参数相匹配的直播进程或者游戏进程中的图像处理的边界范围；
基于所述色键参数和所述图像处理的边界范围，确定相匹配的掩码信息；
根据所述原始图像的尺寸，对所述掩码信息进行调整，以实现所述掩码信息与所述原始图像相适配；
基于经过调整的掩码信息和所述背景图像对经过溢色处理的原始图像进行背景替换处理，形成目标图像，其中，所述目标图像融合了所述原始图像和背景图像的不同特征。
2.根据权利要求1所述的方法，其特征在于，所述获取待处理的原始图像和与所述原始图像相对应的背景图像，并对所述原始图像进行边界调整处理，形成过渡图像，包括：
基于所获取的背景图像，确定所述原始图像的使用环境；
基于所述原始图像的使用环境为低计算能力终端播放直播视频时，对所述原始图像进行边界缩小处理，形成第一过渡图像，其中，所述第一过渡图像为像素个数低于所述原始图像的像素个数的过渡图像；或者，
当所述原始图像的使用环境为高分辨率直播场景时，对所述原始图像进行边界扩大处理，形成第二过渡图像，其中，所述第二过渡图像为像素个数高于所述原始图像的像素个数的过渡图像。
3.根据权利要求1所述的方法，其特征在于，所述基于所述过渡图像，确定与所述过渡图像相匹配的色键参数，包括：
对所述过渡图像的像素进行聚类处理，形成像素聚类；
当接收到用户的取色指令信息时，响应于所述取色指令，在所述像素聚类中确定与所述过渡图像相匹配的色键参数；或者，
当未接收到用户的取色指令信息时，确定所述像素聚类的中心；
基于所述像素聚类的中心确定与所述过渡图像相匹配的色键参数。
4.根据权利要求3所述的方法，其特征在于，所述响应于所述取色指令，在所述像素聚类中确定与所述过渡图像相匹配的色键参数，包括：
确定与所述取色指令相匹配的加权参数和与所述取色指令相匹配的色键参数；
确定与所述取色指令相匹配的色键参数距离最近的像素聚类的中心；
基于所述加权参数，对与所述取色指令相匹配的色键参数和所述与所述取色指令相匹配的色键参数距离最近的像素聚类的中心进行加权处理，确定与所述过渡图像相匹配的色键参数。
5.根据权利要求1所述的方法，其特征在于，所述方法还包括：
确定与所述待处理的原始图像相关联的连续图像帧所分别对应的第一掩码集群集合；
确定所述第一掩码集群集合的加权掩码集群平均值；
通过所述第一掩码集群集合的加权掩码集群平均值对所述第一掩码集群进行平滑度调整。
6.根据权利要求1所述的方法，其特征在于，所述方法还包括：
确定与所述待处理的原始图像相匹配的经验阈值；
基于与所述待处理的原始图像相匹配的经验阈值和与所述色键参数相匹配的图像处理的边界范围，确定所述原始图像中的溢色像素；
对所述原始图像中的溢色像素的灰度值进行调整。
7.根据权利要求1所述的方法，其特征在于，所述方法还包括：
在视图界面中呈现图像变换功能项，所述图像变换功能项，用于实现待处的原始图像与背景图像进行图像融合；
响应于针对所述图像变换功能项的触发操作，获取并呈现待处理的原始图像和背景图像；
响应于基于所述原始图像触发的变换确定操作，生成并呈现融合了所述原始图像和背景图像的不同特征的目标图像。
8.根据权利要求7所述的方法，其特征在于，所述方法还包括：
呈现图像模板选择界面，并在所述图像模板选择界面中呈现至少一个背景图像模板；
响应于基于所述背景图像模板选择界面触发的背景图像模板的选择操作，将所述选择操作对应的背景图像模板作为原始图像所对应的背景图像。
9.根据权利要求7所述的方法，其特征在于，所述方法还包括：
呈现用于分享所述目标图像的图像分享功能项；
响应于针对所述图像分享功能项的触发操作，分享所述目标图像。
10.根据权利要求7所述的方法，其特征在于，所述方法还包括：
响应于针对图像调整功能项的查看操作，呈现包括所述待处理的原始图像和所述背景图像的内容页面，并在所述内容页面中呈现至少一个互动功能项，所述互动功能项用于实现与所述待处理的原始图像的互动；
接收基于所述互动功能项触发的针对所述过渡图像取色指令，以执行相应的取色指令。
11.一种图像处理装置，其特征在于，所述装置包括：
信息传输模块，用于获取直播进程或者游戏进程中的待处理的原始图像和与所述原始图像背景图像，并对所述原始图像进行边界调整处理，形成过渡图像；
信息处理模块，用于基于所述过渡图像，确定与所述过渡图像相匹配的色键参数；
所述信息处理模块，用于基于所述背景图像的像素平均值以及对应的加权值对所述色键参数进行自动更新，其中，自动更新的色键参数可以表示为：
所述信息处理模块，用于响应于所述色键参数，确定与所述色键参数相对应的第一掩码集群；
所述信息处理模块，用于通过固定步长遍历阈值区间，确定与所述阈值区间相匹配的第二掩码集群，其中，所述阈值区间与所述待处理的原始图像相匹配；
所述信息处理模块，用于基于所述第一掩码集群和所述第二掩码集群的交并比集合，确定与所述色键参数相匹配的直播进程或者游戏进程中的图像处理的边界范围；
所述信息处理模块，用于基于所述色键参数和所述图像处理的边界范围，确定相匹配的掩码信息；
所述信息处理模块，用于根据所述原始图像的尺寸，对所述掩码信息进行调整，以实现所述掩码信息与所述原始图像相适配；
所述信息处理模块，用于基于经过调整的掩码信息和所述背景图像对经过溢色处理的原始图像进行背景替换处理，形成目标图像，其中，所述目标图像融合了所述原始图像和背景图像的不同特征。
12.根据权利要求11所述的装置，其特征在于，所述装置还包括：
显示模块，用于在视图界面中呈现图像变换功能项，所述图像变换功能项，用于实现待处的原始图像与背景图像进行图像融合；
所述显示模块，用于响应于针对所述图像变换功能项的触发操作，获取并呈现待处理的原始图像和背景图像；
所述显示模块，用于响应于基于所述原始图像触发的变换确定操作，生成并呈现融合了所述原始图像和背景图像的不同特征的目标图像。
13.一种电子设备，其特征在于，所述电子设备包括：
存储器，用于存储可执行指令；
处理器，用于运行所述存储器存储的可执行指令时，实现权利要求1至10任一项所述的图像处理方法。
14.一种计算机可读存储介质，存储有可执行指令，其特征在于，所述可执行指令被处理器执行时实现权利要求1至10任一项所述的图像处理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011418784.1A CN112235520B (zh) | 2020-12-07 | 2020-12-07 | 一种图像处理方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011418784.1A CN112235520B (zh) | 2020-12-07 | 2020-12-07 | 一种图像处理方法、装置、电子设备及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112235520A CN112235520A (zh) | 2021-01-15 |
| CN112235520B true CN112235520B (zh) | 2021-05-04 |
Family
ID=74124473
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011418784.1A Active CN112235520B (zh) | 2020-12-07 | 2020-12-07 | 一种图像处理方法、装置、电子设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112235520B (zh) |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113763439A (zh) * | 2021-02-07 | 2021-12-07 | 北京沃东天骏信息技术有限公司 | 图像处理方法和装置 |
| CN113191938B (zh) * | 2021-04-29 | 2022-11-15 | 北京市商汤科技开发有限公司 | 图像处理方法、装置、电子设备及存储介质 |
| CN113457135B (zh) * | 2021-06-29 | 2024-08-23 | 网易（杭州）网络有限公司 | 游戏中的显示控制方法、装置及电子设备 |
| CN113489901B (zh) * | 2021-06-30 | 2023-04-28 | 维沃移动通信（杭州）有限公司 | 拍摄方法及其装置 |
| CN113535031A (zh) * | 2021-08-03 | 2021-10-22 | 北京字跳网络技术有限公司 | 页面显示方法、装置、设备及介质 |
| CN114416260B (zh) * | 2022-01-20 | 2024-06-04 | 北京字跳网络技术有限公司 | 图像处理方法、装置、电子设备及存储介质 |
| CN116112761B (zh) * | 2023-04-12 | 2023-06-27 | 海马云（天津）信息技术有限公司 | 生成虚拟形象视频的方法及装置、电子设备和存储介质 |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107087123A (zh) * | 2017-04-26 | 2017-08-22 | 杭州奥点科技股份有限公司 | 一种基于云端处理的实时高清抠像方法 |
Family Cites Families (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20000064957A (ko) * | 1997-02-20 | 2000-11-06 | 이데이 노부유끼 | 영상 신호 처리 장치 및 방법, 화상 합성 장치 및 편집 장치 |
| US6084982A (en) * | 1997-12-17 | 2000-07-04 | Philips Electronics North America Corp. | Method of chroma-keying for a digital video compression system |
| US6714257B2 (en) * | 2001-06-29 | 2004-03-30 | Koninklijke Philips Electronics N.V. | Color key preservation during sample rate conversion |
| JP5559691B2 (ja) * | 2007-09-24 | 2014-07-23 | クアルコム，インコーポレイテッド | 音声及びビデオ通信のための機能向上したインタフェース |
| GB2532958B (en) * | 2014-12-02 | 2021-09-29 | Advanced Risc Mach Ltd | Method of and apparatus for processing frames in a data processing system |
| JP2016158155A (ja) * | 2015-02-25 | 2016-09-01 | 愼一 駒井 | カメラ撮影で取得した画像から被写体部分を切り抜く方法および装置 |
| KR101695209B1 (ko) * | 2015-07-06 | 2017-01-11 | 고창용 | 실시간영상과 크로마키 피사체영상의 합성 제작시스템 및 그 방법 |
| CN106231292B (zh) * | 2016-09-07 | 2017-08-25 | 深圳超多维科技有限公司 | 一种立体虚拟现实直播方法、装置及设备 |
| CN106412558B (zh) * | 2016-09-08 | 2017-11-21 | 深圳超多维科技有限公司 | 一种立体虚拟现实直播方法、装置及设备 |
| CN107230182B (zh) * | 2017-08-03 | 2021-11-09 | 腾讯科技（深圳）有限公司 | 一种图像的处理方法、装置以及存储介质 |
| US11120632B2 (en) * | 2018-10-16 | 2021-09-14 | Sony Interactive Entertainment Inc. | Image generating apparatus, image generating system, image generating method, and program |
| CN110290425B (zh) * | 2019-07-29 | 2023-04-07 | 腾讯科技（深圳）有限公司 | 一种视频处理方法、装置及存储介质 |
| CN111563862B (zh) * | 2020-07-16 | 2020-10-27 | 北京文香信息技术有限公司 | 基于fpga构建虚拟视频的方法、装置、存储介质及设备 |
-
2020
- 2020-12-07 CN CN202011418784.1A patent/CN112235520B/zh active Active
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107087123A (zh) * | 2017-04-26 | 2017-08-22 | 杭州奥点科技股份有限公司 | 一种基于云端处理的实时高清抠像方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112235520A (zh) | 2021-01-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112235520B (zh) | 一种图像处理方法、装置、电子设备及存储介质 | |
| US11727577B2 (en) | Video background subtraction using depth | |
| CN108537859B (zh) | 使用深度学习的图像蒙板 | |
| CN108876745B (zh) | 图像处理方法及装置 | |
| KR102308889B1 (ko) | 영상 하이라이트 검출 방법 및 이를 수행하기 위한 컴퓨팅 장치 | |
| JP2012506589A (ja) | 画像センサ式ヒューマンマシンインターフェイスを提供するための方法、システムと関連モジュール、およびソフトウエアコンポーネント | |
| CN112329752B (zh) | 人眼图像处理模型的训练方法、图像处理方法及装置 | |
| CN112750176A (zh) | 一种图像处理方法、装置、电子设备及存储介质 | |
| CN113160244B (zh) | 视频处理方法、装置、电子设备及存储介质 | |
| CN109992187B (zh) | 一种控制方法、装置、设备及存储介质 | |
| CN113050860B (zh) | 一种控件识别方法和相关装置 | |
| US20230291978A1 (en) | Subtitle processing method and apparatus of multimedia file, electronic device, and computer-readable storage medium | |
| CN113742025A (zh) | 页面生成方法、装置、设备和存储介质 | |
| CN114022497A (zh) | 一种图像处理方法及装置 | |
| CN114422698A (zh) | 视频生成方法、装置、设备及存储介质 | |
| US20220308262A1 (en) | Method and apparatus of generating weather forecast video, electronic device, and storage medium | |
| CN116664603B (zh) | 图像处理方法、装置、电子设备及存储介质 | |
| CN111695323B (zh) | 信息处理方法、装置及电子设备 | |
| CN117641073A (zh) | 视频封面生成方法、装置、设备及存储介质 | |
| EP4340374A1 (en) | Picture quality adjustment method and apparatus, and device and medium | |
| CN113676734A (zh) | 图像压缩方法和图像压缩装置 | |
| CN118097521B (zh) | 对象识别方法、装置、设备、介质及程序产品 | |
| CN111833283B (zh) | 数据处理方法、装置及电子设备 | |
| CN115294260A (zh) | 一种图像处理方法、装置、电子设备及存储介质 | |
| CN115442650B (zh) | 弹幕信息处理方法、装置、弹幕信息处理设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 40037363 Country of ref document: HK |