CN110913267A - 图像处理方法、装置、系统、界面、介质和计算设备 - Google Patents

图像处理方法、装置、系统、界面、介质和计算设备 Download PDF

Info

Publication number
CN110913267A
CN110913267A CN201911210901.2A CN201911210901A CN110913267A CN 110913267 A CN110913267 A CN 110913267A CN 201911210901 A CN201911210901 A CN 201911210901A CN 110913267 A CN110913267 A CN 110913267A
Authority
CN
China
Prior art keywords
image
image processing
client
matting
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911210901.2A
Other languages
English (en)
Other versions
CN110913267B (zh
Inventor
王飞
陈志军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Sailian Information Technology Co Ltd
Original Assignee
Shanghai Sailian Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Sailian Information Technology Co Ltd filed Critical Shanghai Sailian Information Technology Co Ltd
Priority to CN201911210901.2A priority Critical patent/CN110913267B/zh
Publication of CN110913267A publication Critical patent/CN110913267A/zh
Application granted granted Critical
Publication of CN110913267B publication Critical patent/CN110913267B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明的实施方式提供了一种图像处理方法、装置、系统、界面、介质和计算设备。该方法包括:获取待处理图像;对待处理图像中的抠图对象进行抠图处理得到该抠图对象的图像;将该抠图对象的图像与虚拟背景图像进行叠加处理,得到向用户展示的客户端图像。通过该方法在视频交流时用户能够从客户端视频中获取清晰完整的虚拟背景图像,避免了现有视频交流方式存在的从会议现场视频中无法获取显示屏上的展示内容的问题,大大改善了用户的参会体验,提升了视频交流效果。

Description

图像处理方法、装置、系统、界面、介质和计算设备
技术领域
本发明的实施方式涉及软件领域,更具体地,本发明的实施方式涉及一种图像处理方法、装置、系统、界面、介质和计算设备。
背景技术
本部分旨在为权利要求书中陈述的本发明的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。
目前,在线视频课堂、远程视频课堂等视频交流方式正成为越来越多人开展远程交流的手段。通过这些视频交流方式,身处于千里之外的视频播放端用户也能获取到会议现场或授课现场的视频图像信息,摆脱了时间地点的限制,丰富了用户的交互体验。
这些视频交流方式的主要流程是,通过视频采集端的摄像头来录制会议现场视频,该会议现场视频包括发言者(比如在线视频课堂中的授课老师、或视频会议中正在发言的参会者等)以及该发言者周围的显示屏上的展示内容(比如PPT),然后将录制的会议现场视频传输至视频播放端进行播放。但由于录制现场的光线问题或其他环境因素,可能会出现显示屏反光或显示屏性能等问题,导致视频播放端用户从会议现场视频中无法获取显示屏上的展示内容,这会大大降低视频播放端用户的参会体验,影响视频交流效果。
因此,为了解决现有视频交流方式存在的视频播放端用户从会议现场视频中无法获取显示屏上的展示内容的问题,亟待设计一种新的用于视频交流方案。
发明内容
由于现有视频交流方式存在的视频播放端用户从会议现场视频中无法获取显示屏上的展示内容的问题。因此非常需要一种改进的用于视频交流的技术方案,以解决上述技术问题。
在本上下文中,本发明的实施方式期望提供一种图像处理方法、装置、系统、界面、介质和计算设备。
在本发明实施方式的第一方面中,提供了一种图像处理方法,包括:获取待处理图像;对待处理图像中的抠图对象进行抠图处理,得到抠图对象的图像;将抠图对象的图像与虚拟背景图像进行叠加处理,得到向用户展示的客户端图像。
一种可能的实施例中,虚拟背景图像为共享内容图像。将抠图对象的图像与虚拟背景图像进行叠加处理之前,还包括:若共享内容图像包含多帧子图像,则将多帧子图像的播放进度与抠图对象的图像进行匹配。
一种可能的实施例中,将抠图对象的图像与虚拟背景图像进行叠加处理之前,还包括:预先向服务器端上传共享内容图像,并输入当前共享内容的授课信息以预先选取抠图对象。
一种可能的实施例中,还包括:响应于用户的第一指令,将客户端图像中的虚拟背景图像切换为目标查看图像,以回放或提前查看多帧子图像中的任一子图像。
一种可能的实施例中,还包括:响应于用户的第二指令,将客户端图像中的虚拟背景图像替换为客户端上传的分享内容图像。
一种可能的实施例中,将抠图对象的图像与虚拟背景图像进行叠加处理之前,还包括:响应于用户的第三指令,对抠图对象的图像进行缩小或放大。
一种可能的实施例中,待处理图像包含多帧待处理图像。对待处理图像中的抠图对象进行抠图处理,得到抠图对象的图像,包括:识别每帧待处理图像中的抠图对象的轮廓;根据抠图对象的轮廓,对每帧待处理图像中抠图对象的背景进行反选并删除。
一种可能的实施例中,将抠图对象的图像与虚拟背景图像进行叠加处理之后,还包括:调整抠图对象的图像中的轮廓线,以降低轮廓线的锐度。
在本发明实施方式的第二方面中,提供了一种图像处理装置,其中,获取模块,被配置为获取待处理图像;抠图模块,被配置为对待处理图像中的抠图对象进行抠图处理,得到抠图对象的图像;叠加模块,被配置为将抠图对象的图像与虚拟背景图像进行叠加处理,得到向用户展示的客户端图像。
一种可能的实施例中,虚拟背景图像为共享内容图像;抠图模块还被配置为:在将抠图对象的图像与虚拟背景图像进行叠加处理之前,若共享内容图像包含多帧子图像,则将多帧子图像的播放进度与抠图对象的图像进行匹配。
一种可能的实施例中,还包括预处理模块,被配置为:在将抠图对象的图像与虚拟背景图像进行叠加处理之前,预先向服务器端上传共享内容图像,并输入当前共享内容的授课信息以预先选取抠图对象。
一种可能的实施例中,还包括切换模块,被配置为:响应于用户的第一指令,将客户端图像中的虚拟背景图像切换为目标查看图像,以回放或提前查看多帧子图像中的任一子图像。
一种可能的实施例中,还包括替换模块,被配置为:响应于用户的第二指令,将客户端图像中的虚拟背景图像替换为客户端上传的分享内容图像。
一种可能的实施例中,叠加模块模块,还被配置为:在将抠图对象的图像与虚拟背景图像进行叠加处理之前,响应于用户的第三指令,对抠图对象的图像进行缩小或放大。
一种可能的实施例中,待处理图像包含多帧待处理图像。抠图模块具体被配置为:识别每帧待处理图像中的抠图对象的轮廓;根据抠图对象的轮廓,对每帧待处理图像中抠图对象的背景进行反选并删除。
一种可能的实施例中,还包括轮廓处理模块,被配置为:在叠加模块将抠图对象的图像与虚拟背景图像进行叠加处理之后,调整抠图对象的图像中的轮廓线,以降低轮廓线的锐度。
在本发明实施方式的第三方面中,提供了一种图像处理系统,该图像处理系统适用于视频教学场景,该图像处理系统包括视频采集端、客户端以及服务器,其中该客户端包括以下模块:
获取模块,被配置为获取视频采集端录制的待处理图像;
抠图模块,被配置为对待处理图像中的抠图对象进行抠图处理,得到抠图对象的图像;
叠加模块,被配置为将抠图对象的图像与虚拟背景图像进行叠加处理,得到向用户展示的客户端图像。
一种可能的实施例中,虚拟背景图像为教学内容图像。抠图模块还被配置为:在将抠图对象的图像与虚拟背景图像进行叠加处理之前,若教学内容图像包含多帧子图像,则将多帧子图像的播放进度与抠图对象的图像进行匹配。
一种可能的实施例中,客户端还包括预处理模块被配置为:在将抠图对象的图像与虚拟背景图像进行叠加处理之前,预先向服务器端上传教学内容图像,并输入当前教学内容的授课信息以预先选取所述抠图对象。
一种可能的实施例中,客户端还包括切换模块,被配置为:响应于学生端用户的第一指令,将该学生端客户端图像中的虚拟背景图像切换为目标查看图像,以回放或提前查看所述多帧子图像中的任一子图像。
一种可能的实施例中,客户端还包括替换模块,被配置为:响应于教师端用户的第二指令,将接入当前课堂中的所有客户端图像中的虚拟背景图像替换为学生客户端上传的分享内容图像。
一种可能的实施例中,叠加模块模块还被配置为:在将抠图对象的图像与虚拟背景图像进行叠加处理之前,响应于用户的第三指令,对抠图对象的图像进行缩小或放大。
一种可能的实施例中,待处理图像包含多帧待处理图像。所述抠图模块具体被配置为:识别每帧待处理图像中的所述抠图对象的轮廓;根据所述抠图对象的轮廓,对每帧待处理图像中所述抠图对象的背景进行反选并删除。
一种可能的实施例中,客户端还包括轮廓处理模块,被配置为:在所述叠加模块将所述抠图对象的图像与虚拟背景图像进行叠加处理之后,调整所述抠图对象的图像中的轮廓线,以降低轮廓线的锐度。
在本发明实施方式的第四方面中,提供了一种界面,该界面适用如第一方面中任一实施例的图像处理方法。
在本发明实施方式的第五方面中,提供了一种计算机可读存储介质,该介质存储有计算机可执行指令,计算机可执行指令用于使计算机执行第一方面中任一实施例的图像处理方法。
在本发明实施方式的第六方面中,提供了一种计算设备,包括处理单元、存储器以及输入/输出(In/Out,I/O)接口;存储器,用于存储处理单元执行的程序或指令;处理单元,用于根据存储器存储的程序或指令,执行第一方面中任一实施例的图像处理方法;I/O接口,用于在处理单元的控制下接收或发送数据。
本发明的实施方式提供的技术方案,对待处理图像中的抠图对象进行抠图处理得到该抠图对象的图像,并将该抠图对象的图像与虚拟背景图像进行叠加处理得到向用户展示的客户端图像,从而使得用户在视频交流时能够从客户端视频中获取清晰完整的虚拟背景图像,避免了现有视频交流方式存在的从会议现场视频中无法获取显示屏上的展示内容的问题,大大改善了用户的参会体验,提升了视频交流效果。
附图说明
通过参考附图阅读下文的详细描述,本发明示例性实施方式的上述以及其他目的、特征和优点将变得易于理解。在附图中,以示例性而非限制性的方式示出了本发明的若干实施方式,其中:
图1示意性地示出了根据本发明实施方式的一种图像处理方法的流程示意图;
图2示意性地示出了根据本发明实施例的一种图像处理装置的结构示意图;
图3示意性地示出了根据本发明实施例的一种图像处理系统的结构示意图;
图4示意性地示出了根据本发明实施例的一种界面的示意图;
图5示意性地示出了根据本发明实施例的一种介质的结构示意图;
图6示意性地示出了根据本发明实施例的一种计算设备的结构示意图;
在附图中,相同或对应的标号表示相同或对应的部分。
具体实施方式
下面将参考若干示例性实施方式来描述本发明的原理和精神。应当理解,给出这些实施方式仅仅是为了使本领域技术人员能够更好地理解进而实现本发明,而并非以任何方式限制本发明的范围。相反,提供这些实施方式是为了使本公开更加透彻和完整,并且能够将本公开的范围完整地传达给本领域的技术人员。
本领域技术人员知道,本发明的实施方式可以实现为一种系统、装置、设备、方法或计算机程序产品。因此,本公开可以具体实现为以下形式,即:完全的硬件、完全的软件(包括固件、驻留软件、微代码等),或者硬件和软件结合的形式。
根据本发明的实施方式,提出了一种图像处理方法、装置、系统、界面、介质和计算设备。
在本文中,附图中的任何元素数量均用于示例而非限制,以及任何命名都仅用于区分,而不具有任何限制含义。
下面参考本发明的若干代表性实施方式,详细阐释本发明的原理和精神。
发明概述
本发明人发现,目前视频交流方式中,由于录制现场的光线问题或其他环境因素,可能会出现显示屏反光或显示屏性能等问题,导致视频播放端用户从会议现场视频中无法获取显示屏上的展示内容,这会大大降低视频播放端用户的参会体验,影响视频交流效果。故现有的视频交流方式存在的视频播放端用户从会议现场视频中无法获取显示屏上的展示内容的问题。
为了克服现有技术存在的问题,本发明中提出了一种图像处理方法、装置、系统、界面、介质和计算设备。该图像处理方法中,对待处理图像中的抠图对象进行抠图处理得到该抠图对象的图像,并将该抠图对象的图像与虚拟背景图像进行叠加处理得到向用户展示的客户端图像,从而使得用户在视频交流时能够从客户端视频中获取清晰完整的虚拟背景图像,避免了现有视频交流方式存在的从会议现场视频中无法获取显示屏上的展示内容的问题,大大改善了用户的参会体验,提升了视频交流效果。可以理解的是,装置、界面、介质和计算设备的原理与方法类似,此处不再赘述。
在介绍了本发明的基本原理之后,下面具体介绍本发明的各种非限制性实施方式。
应用场景总览
本发明实施例可以应用于媒体流播放系统的远程交流场景,尤其是基于视频播放系统的远程交流场景。比如在线视频课堂、远程视频课堂、网校、视频会议等。本发明实施例并不限定于实时在线场景或离线场景。
本发明图像处理方案的应用场景中,媒体流可以是提前录制的课程PPT、课程视频、教学授课现场视频、教学音频,或者也可以是用户输入或上传的图片、文字、视频,还可以是其他形式的内容,本发明实施例并不限定。
本发明图像处理方案的应用场景中,可以通过图像采集端设备或客户端设备进行图像信息采集,例如获取课程PPT、课程视频、教学授课现场视频等信息,或者获取用户输入的文字、图片、视频等信息,所述客户端设备可以在屏幕上显示用于承载图像信息的界面,例如界面上的抠图对象、虚拟背景、或其他图标。可以理解的是,所述界面可以是客户端设备从服务器下载的,并且对客户端设备采集到的数据进行分析处理(即执行所述图像处理方案)的也可以是服务器。实际的应用过程中,服务器可以存在多级,也即可以是由接收服务器来接收图像采集端设备发送的包含待处理图像信息的数据,并将接收到的包含待处理图像信息的数据发送到处理服务器,处理服务器对接收到的包含待处理图像信息的数据根据本发明的图像处理方法进行处理,得到用户的界面并反馈至所述客户端设备进行展示。另外,图像处理方法也可以是由客户端设备实现的,此处也不限定。
本发明实施例涉及的用户可以为实时在线用户和/或离线用户,此处并不限定。具体而言,针对于一个视频,客户端图像可以是实时在线播放给用户的,或者也可以是离线播放给用户。处于同一图像处理系统中的多个客户端,不同客户端所展示的客户端图像中的虚拟背景图像可以是不同的,也可以是相同的。
示例性方法
下面结合应用场景,参考附图来描述根据本发明示例性实施方式的用于用户互动的方法。需要注意的是,上述应用场景仅是为了便于理解本发明的精神和原理而示出,本发明的实施方式在此方面不受任何限制。相反,本发明的实施方式可以应用于适用的任何场景。
本发明实施例提供了一种图像处理方法,该图像处理方法适用于各种媒体流播放系统,下面以视频播放系统为例详细说明本发明实施例提供的图像处理方法,如图1所示,该图像处理方法包括:
S101、获取待处理图像;
S102、对待处理图像中的抠图对象进行抠图处理,得到抠图对象的图像;
S103、将抠图对象的图像与虚拟背景图像进行叠加处理,得到向用户展示的客户端图像。
下面结合附图对该图像处理方法进行详细说明:
本发明实施例中,待处理图像包括但不限于教学授课现场视频、会议现场视频。S101中,图像采集端通过摄像头等设备录制待处理图像。
待处理图像中的抠图对象可以是预先设置的,也可以是即时识别的。可选的,预先向服务器端上传共享内容图像,并输入当前共享内容的授课信息以预先选取抠图对象。比如,在远程教学场景下,预先向服务器端上传课程PPT,并输入当前课程PPT的授课信息,包括但不限于教师图像、或教师标识,从而预先选取出待处理图像中的抠图对象。再比如,在视频会议场景下,还可以对待处理图像中正在发言的参会者进行识别,并将识别出的参会者作为抠图对象。
可选的,待处理图像包含多帧。相应地,S102的一种具体实现方式为,识别每帧待处理图像中的抠图对象的轮廓,根据该抠图对象的轮廓,对每帧待处理图像中抠图对象的背景进行反选并删除。
本发明实施例中,虚拟背景图像为共享内容图像。共享内容图像包括但不限于课程PPT、课程视频、教学授课现场视频,或者用户输入的文字、图片、视频。例如,在远程教学场景下,虚拟背景图像可以是与当前视频课程相应的课程PPT,或者是学生作业、教师板书图像。
S103中,将抠图对象的图像叠加在虚拟背景图像上得到向用户展示的客户端图像。进一步的,将抠图对象的图像叠加在虚拟背景图像的预设区域内,比如虚拟背景图像的右下端区域、或左上端区域。进一步的,S103之后,调整抠图对象的图像中的轮廓线,以降低轮廓线的锐度,使客户端图像更自然。
S103之前,若共享内容图像包含多帧子图像,则将多帧子图像的播放进度与抠图对象的图像进行匹配。具体来说,一种实现方式为,将多帧子图像的播放进度与抠图对象的动作图像或手势图像相匹配;另一种实现方式为,将多帧子图像的播放进度与抠图对象的图像中音频播放进度相匹配;再一种实现方式为,基于预先设置的播放进度,为多帧子图像匹配对应的抠图对象的图像。通过这一步骤,用户可以获取与发言者所讲内容相匹配的虚拟背景图像,提高用户的会议参与感,提升教学质量。
可选的,响应于所述用户的第一指令,将客户端图像中的虚拟背景图像切换为目标查看图像,以回放或提前查看多帧子图像中的任一子图像。通过这一步骤,用户可以获取与发言者所讲内容相匹配的虚拟背景图像,提高用户的会议参与感,提升教学质量。进一步的,还可以在界面中同时展示多个子图像,以便为用户提供更多的共享内容查看方式,比如并排比较等。
可选的,响应于用户的第二指令,将客户端图像中的虚拟背景图像替换为客户端上传的分享内容图像。其中,分享内容图像包括但不限于用户输入的发言视频、随堂作业、随堂测试、或相关视频分享内容。这样,有助于为用户提供更多交互方式,增强用户参与感。
S103之前,响应于用户的第三指令,对抠图对象的图像进行缩小或放大,以避免该抠图对象的图像对虚拟背景图像的遮挡。
图1示出的图像处理方法,对待处理图像中的抠图对象进行抠图处理得到该抠图对象的图像,并将该抠图对象的图像与虚拟背景图像进行叠加处理得到向用户展示的客户端图像,从而使得用户在视频交流时能够从客户端视频中获取清晰完整的虚拟背景图像,避免了现有视频交流方式存在的从会议现场视频中无法获取显示屏上的展示内容的问题,大大改善了用户的参会体验,提升了视频交流效果。
示例性装置
在介绍了本发明示例性实施方式的图像处理方法之后,接下来,介绍本发明提供了示例性实施的图像处理装置。本发明提供的图像处理装置可以适用于图1对应的实施例提供的任一项图像处理方法。参见图2,该图像处理装置至少包括:
获取模块201,被配置为获取待处理图像;
抠图模块202,被配置为对待处理图像中的抠图对象进行抠图处理,得到抠图对象的图像;
叠加模块203,被配置为将抠图对象的图像与虚拟背景图像进行叠加处理,得到向用户展示的客户端图像。
可选的,虚拟背景图像为共享内容图像;抠图模块202还被配置为:在将抠图对象的图像与虚拟背景图像进行叠加处理之前,若共享内容图像包含多帧子图像,则将多帧子图像的播放进度与抠图对象的图像进行匹配。
可选的,还包括预处理模块,被配置为:在将抠图对象的图像与虚拟背景图像进行叠加处理之前,预先向服务器端上传共享内容图像,并输入当前共享内容的授课信息以预先选取抠图对象。
可选的,还包括切换模块,被配置为:响应于用户的第一指令,将客户端图像中的虚拟背景图像切换为目标查看图像,以回放或提前查看多帧子图像中的任一子图像。
可选的,还包括替换模块,被配置为:响应于用户的第二指令,将客户端图像中的虚拟背景图像替换为客户端上传的分享内容图像。
可选的,叠加模块203模块,还被配置为:在将抠图对象的图像与虚拟背景图像进行叠加处理之前,响应于用户的第三指令,对抠图对象的图像进行缩小或放大。
可选的,待处理图像包含多帧待处理图像。抠图模块202具体被配置为:识别每帧待处理图像中的抠图对象的轮廓;根据抠图对象的轮廓,对每帧待处理图像中抠图对象的背景进行反选并删除。
可选的,还包括轮廓处理模块,被配置为:在叠加模块203将抠图对象的图像与虚拟背景图像进行叠加处理之后,调整抠图对象的图像中的轮廓线,以降低轮廓线的锐度。
示例性系统
在介绍了本发明示例性实施方式的图像处理方法及装置之后,接下来,介绍本发明提供了示例性实施的系统。本发明提供的示例性系统可以适用于视频教学场景,应用图1对应的实施例提供的任一项图像处理方法。参见图3,该图像处理系统300至少包括视频采集端、客户端以及服务器,其中该客户端包括以下模块:
获取模块301,被配置为获取视频采集端录制的待处理图像;
抠图模块302,被配置为对待处理图像中的抠图对象进行抠图处理,得到抠图对象的图像;
叠加模块303,被配置为将抠图对象的图像与虚拟背景图像进行叠加处理,得到向用户展示的客户端图像。
可选的,虚拟背景图像为教学内容图像。抠图模块302还被配置为:在将抠图对象的图像与虚拟背景图像进行叠加处理之前,若教学内容图像包含多帧子图像,则将多帧子图像的播放进度与抠图对象的图像进行匹配。
可选的,客户端还包括预处理模块被配置为:在将抠图对象的图像与虚拟背景图像进行叠加处理之前,预先向服务器端上传教学内容图像,并输入当前教学内容的授课信息以预先选取所述抠图对象。
可选的,客户端还包括切换模块,被配置为:响应于学生端用户的第一指令,将该学生端客户端图像中的虚拟背景图像切换为目标查看图像,以回放或提前查看所述多帧子图像中的任一子图像。
可选的,客户端还包括替换模块,被配置为:响应于教师端用户的第二指令,将接入当前课堂中的所有客户端图像中的虚拟背景图像替换为学生客户端上传的分享内容图像。
可选的,叠加模块303模块还被配置为:在将抠图对象的图像与虚拟背景图像进行叠加处理之前,响应于用户的第三指令,对抠图对象的图像进行缩小或放大。
可选的,待处理图像包含多帧待处理图像。所述抠图模块302具体被配置为:识别每帧待处理图像中的所述抠图对象的轮廓;根据所述抠图对象的轮廓,对每帧待处理图像中所述抠图对象的背景进行反选并删除。
可选的,客户端还包括轮廓处理模块,被配置为:在所述叠加模块303将所述抠图对象的图像与虚拟背景图像进行叠加处理之后,调整所述抠图对象的图像中的轮廓线,以降低轮廓线的锐度。
示例性界面
在介绍了本发明示例性实施方式的图像处理方法、装置以及系统之后,接下来,参考图4,本发明提供了一种示例性介质,该介质存储有计算机可执行指令,该计算机可执行指令可用于使所述计算机执行图1对应的本发明示例性实施方式中任一项所述的图像处理方法。
示例性介质
在介绍了本发明示例性实施方式的图像处理方法、装置、系统以及界面之后,接下来,参考图5,本发明提供了一种示例性介质,该介质存储有计算机可执行指令,该计算机可执行指令可用于使所述计算机执行图1对应的本发明示例性实施方式中任一项所述的图像处理方法。
示例性计算设备
在介绍了本发明示例性实施方式的互动方法、装置、界面、介质和装置之后,接下来,参考图6,介绍本发明提供的一种示例性计算设备60,该计算设备60包括处理单元601、存储器602、总线603、外部设备604、I/O接口605以及网络适配器606,该存储器602包括随机存取存储器(random access memory,RAM)6021、高速缓存存储器6022、只读存储器(Read-Only Memory,ROM)6023以及至少一片存储单元6024构成的存储单元阵列6025。其中该存储器602,用于存储处理单元601执行的程序或指令;该处理单元601,用于根据该存储器602存储的程序或指令,执行图1对应的本发明示例性实施方式中任一项所述的图像处理方法;该I/O接口605,用于在该处理单元601的控制下接收或发送数据。
应当注意,尽管在上文详细描述中提及了装置的若干单元/模块或子单元/模块,但是这种划分仅仅是示例性的并非强制性的。实际上,根据本发明的实施方式,上文描述的两个或更多单元/模块的特征和功能可以在一个单元/模块中具体化。反之,上文描述的一个单元/模块的特征和功能可以进一步划分为由多个单元/模块来具体化。
此外,尽管在附图中以特定顺序描述了本发明方法的操作,但是,这并非要求或者暗示必须按照该特定顺序来执行这些操作,或是必须执行全部所示的操作才能实现期望的结果。附加地或备选地,可以省略某些步骤,将多个步骤合并为一个步骤执行,和/或将一个步骤分解为多个步骤执行。
虽然已经参考若干具体实施方式描述了本发明的精神和原理,但是应该理解,本发明并不限于所公开的具体实施方式,对各方面的划分也不意味着这些方面中的特征不能组合以进行受益,这种划分仅是为了表述的方便。本发明旨在涵盖所附权利要求的精神和范围内所包括的各种修改和等同布置。

Claims (10)

1.一种图像处理方法,其特征在于,包括:
获取待处理图像;
对所述待处理图像中的抠图对象进行抠图处理,得到所述抠图对象的图像;
将所述抠图对象的图像与虚拟背景图像进行叠加处理,得到向用户展示的客户端图像。
2.如权利要求1所述的图像处理方法,其中,所述虚拟背景图像为共享内容图像;
所述将所述抠图对象的图像与虚拟背景图像进行叠加处理之前,还包括:
若所述共享内容图像包含多帧子图像,则将多帧子图像的播放进度与所述抠图对象的图像进行匹配。
3.如权利要求2所述的图像处理方法,其中,所述将所述抠图对象的图像与虚拟背景图像进行叠加处理之前,还包括:
预先向服务器端上传共享内容图像,并输入当前共享内容的授课信息以预先选取所述抠图对象。
4.如权利要求2或3所述的图像处理方法,其中,还包括:
响应于所述用户的第一指令,将所述客户端图像中的虚拟背景图像切换为目标查看图像,以回放或提前查看所述多帧子图像中的任一子图像。
5.如权利要求2至4任一所述的图像处理方法,其中,还包括:
响应于所述用户的第二指令,将所述客户端图像中的虚拟背景图像替换为所述客户端上传的分享内容图像。
6.一种图像处理装置,其特征在于,所述图像处理装置用于实现如权利要求1至5任一所述的图像处理方法,所述图像处理装置包括:
获取模块,被配置为获取待处理图像;
抠图模块,被配置为对所述待处理图像中的抠图对象进行抠图处理,得到所述抠图对象的图像;
叠加模块,被配置为将所述抠图对象的图像与虚拟背景图像进行叠加处理,得到向用户展示的客户端图像。
7.一种图像处理系统,其特征在于,所述图像处理系统用于实现如权利要求1至5任一所述的图像处理方法,所述图像处理系统适用于视频教学场景,所述图像处理系统包括视频采集端、客户端以及服务器,其中所述客户端包括以下模块:
获取模块,被配置为获取所述视频采集端录制的待处理图像;
抠图模块,被配置为对所述待处理图像中的抠图对象进行抠图处理,得到所述抠图对象的图像;
叠加模块,被配置为将所述抠图对象的图像与虚拟背景图像进行叠加处理,得到向用户展示的客户端图像。
8.一种界面,其特征在于,所述界面用于实现如权利要求1至5任一所述的图像处理方法。
9.一种计算机可读存储介质,存储有程序代码,所述程序代码当被处理器执行时,实现如权利要求1-5任一所述的图像处理方法。
10.一种计算设备,包括处理器和存储有程序代码的存储介质,所述程序代码当被处理器执行时,实现如权利要求1-5任一所述的图像处理方法。
CN201911210901.2A 2019-11-29 2019-11-29 图像处理方法、装置、系统、界面、介质和计算设备 Active CN110913267B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911210901.2A CN110913267B (zh) 2019-11-29 2019-11-29 图像处理方法、装置、系统、界面、介质和计算设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911210901.2A CN110913267B (zh) 2019-11-29 2019-11-29 图像处理方法、装置、系统、界面、介质和计算设备

Publications (2)

Publication Number Publication Date
CN110913267A true CN110913267A (zh) 2020-03-24
CN110913267B CN110913267B (zh) 2020-11-06

Family

ID=69821393

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911210901.2A Active CN110913267B (zh) 2019-11-29 2019-11-29 图像处理方法、装置、系统、界面、介质和计算设备

Country Status (1)

Country Link
CN (1) CN110913267B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111724407A (zh) * 2020-05-25 2020-09-29 北京市商汤科技开发有限公司 图像处理方法和相关产品
CN112104794A (zh) * 2020-03-31 2020-12-18 北京文香信息技术有限公司 虚拟微课堂演播系统及装置
CN112118483A (zh) * 2020-06-19 2020-12-22 中兴通讯股份有限公司 视频处理方法、装置、设备和存储介质
CN112804516A (zh) * 2021-04-08 2021-05-14 北京世纪好未来教育科技有限公司 一种视频播放方法、装置、可读存储介质、电子设备
CN113192161A (zh) * 2021-04-22 2021-07-30 清华珠三角研究院 一种虚拟人形象视频生成方法、系统、装置及存储介质
CN113194348A (zh) * 2021-04-22 2021-07-30 清华珠三角研究院 一种虚拟人讲课视频生成方法、系统、装置及存储介质
CN113259778A (zh) * 2021-04-22 2021-08-13 清华珠三角研究院 将虚拟人物用于视频自动生产的方法、系统和存储介质
CN113422914A (zh) * 2021-06-24 2021-09-21 脸萌有限公司 一种视频生成方法、装置、设备及介质
CN113537162A (zh) * 2021-09-15 2021-10-22 北京拓课网络科技有限公司 一种视频处理方法、装置及电子设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090257730A1 (en) * 2008-04-14 2009-10-15 Hong Fu Jin Precision Industry (Shenzhen) Co., Ltd. Video server, video client device and video processing method thereof
US20150086961A1 (en) * 2013-09-24 2015-03-26 Chien Cheng Liu E-learning system and method therefor
CN104484040A (zh) * 2014-12-23 2015-04-01 山东建筑大学 一种多媒体互动教学控制系统及教学控制方法
CN105376547A (zh) * 2015-11-17 2016-03-02 广州市英途信息技术有限公司 一种基于3d虚拟合成技术的微课录制系统及方法
CN108965746A (zh) * 2018-07-26 2018-12-07 北京竞业达数码科技股份有限公司 视频合成方法及系统
CN110047034A (zh) * 2019-03-27 2019-07-23 北京大生在线科技有限公司 在线教育场景下的抠图换背景方法、客户端及系统
CN110111238A (zh) * 2019-04-24 2019-08-09 薄涛 图像处理方法、装置、设备及其存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090257730A1 (en) * 2008-04-14 2009-10-15 Hong Fu Jin Precision Industry (Shenzhen) Co., Ltd. Video server, video client device and video processing method thereof
US20150086961A1 (en) * 2013-09-24 2015-03-26 Chien Cheng Liu E-learning system and method therefor
CN104484040A (zh) * 2014-12-23 2015-04-01 山东建筑大学 一种多媒体互动教学控制系统及教学控制方法
CN105376547A (zh) * 2015-11-17 2016-03-02 广州市英途信息技术有限公司 一种基于3d虚拟合成技术的微课录制系统及方法
CN108965746A (zh) * 2018-07-26 2018-12-07 北京竞业达数码科技股份有限公司 视频合成方法及系统
CN110047034A (zh) * 2019-03-27 2019-07-23 北京大生在线科技有限公司 在线教育场景下的抠图换背景方法、客户端及系统
CN110111238A (zh) * 2019-04-24 2019-08-09 薄涛 图像处理方法、装置、设备及其存储介质

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112104794A (zh) * 2020-03-31 2020-12-18 北京文香信息技术有限公司 虚拟微课堂演播系统及装置
CN111724407A (zh) * 2020-05-25 2020-09-29 北京市商汤科技开发有限公司 图像处理方法和相关产品
CN112118483A (zh) * 2020-06-19 2020-12-22 中兴通讯股份有限公司 视频处理方法、装置、设备和存储介质
WO2021254223A1 (zh) * 2020-06-19 2021-12-23 中兴通讯股份有限公司 视频处理方法、装置、设备和存储介质
CN112804516A (zh) * 2021-04-08 2021-05-14 北京世纪好未来教育科技有限公司 一种视频播放方法、装置、可读存储介质、电子设备
CN112804516B (zh) * 2021-04-08 2021-07-06 北京世纪好未来教育科技有限公司 一种视频播放方法、装置、可读存储介质、电子设备
CN113192161A (zh) * 2021-04-22 2021-07-30 清华珠三角研究院 一种虚拟人形象视频生成方法、系统、装置及存储介质
CN113194348A (zh) * 2021-04-22 2021-07-30 清华珠三角研究院 一种虚拟人讲课视频生成方法、系统、装置及存储介质
CN113259778A (zh) * 2021-04-22 2021-08-13 清华珠三角研究院 将虚拟人物用于视频自动生产的方法、系统和存储介质
CN113422914A (zh) * 2021-06-24 2021-09-21 脸萌有限公司 一种视频生成方法、装置、设备及介质
CN113422914B (zh) * 2021-06-24 2023-11-21 脸萌有限公司 一种视频生成方法、装置、设备及介质
CN113537162A (zh) * 2021-09-15 2021-10-22 北京拓课网络科技有限公司 一种视频处理方法、装置及电子设备

Also Published As

Publication number Publication date
CN110913267B (zh) 2020-11-06

Similar Documents

Publication Publication Date Title
CN110913267B (zh) 图像处理方法、装置、系统、界面、介质和计算设备
CN106791485B (zh) 视频的切换方法及装置
US8495496B2 (en) Computer method and system automatically providing context to a participant's question in a web conference
CN102006453B (zh) 视频信号的辅助信息叠加方法及装置
CN106961568B (zh) 一种画面切换方法、装置和系统
CN111242962A (zh) 远程培训视频的生成方法、装置、设备及存储介质
WO2013123499A1 (en) Systems and methods for combining educational content
CN108965746A (zh) 视频合成方法及系统
CN102036051A (zh) 实现视频会议中提词的方法以及装置
CN107809609A (zh) 基于触摸设备的视频监控会议系统
CN109729429A (zh) 视频播放方法、装置、设备和介质
EP4285596A1 (en) Composite video with live annotation
CN112333415A (zh) 一种远程视频会议演示的方法和装置
CN108831216B (zh) 真三维虚拟仿真交互方法及系统
CN110933350A (zh) 一种电子云镜录播系统、方法及装置
US20130209070A1 (en) System and Method for Creating Composite Video Test Results for Synchronized Playback
CN114025185A (zh) 一种视频回放方法、装置、电子设备及存储介质
CN113395534A (zh) 直播回放视频处理方法、装置、设备及存储介质
CN113676692A (zh) 视频会议中视频的处理方法、装置、电子设备及存储介质
US20230319234A1 (en) System and Methods for Enhanced Videoconferencing
CN101583010A (zh) 图像处理方法及图像处理系统
Lampi et al. An automatic cameraman in a lecture recording system
CN112601110B (zh) 用于内容记录和分享的方法和设备
CN112689196B (zh) 一种可交互视频播放方法、播放器、设备及存储介质
US20230138733A1 (en) Representation of natural eye contact within a video conferencing session

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant