CN109327668A - 一种视频处理方法和装置 - Google Patents
一种视频处理方法和装置 Download PDFInfo
- Publication number
- CN109327668A CN109327668A CN201811270024.3A CN201811270024A CN109327668A CN 109327668 A CN109327668 A CN 109327668A CN 201811270024 A CN201811270024 A CN 201811270024A CN 109327668 A CN109327668 A CN 109327668A
- Authority
- CN
- China
- Prior art keywords
- image
- frame
- video
- screen frame
- video image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 238000012545 processing Methods 0.000 title claims abstract description 35
- 238000012937 correction Methods 0.000 claims abstract description 29
- 238000003708 edge detection Methods 0.000 claims abstract description 26
- 238000001514 detection method Methods 0.000 claims description 17
- 230000008569 process Effects 0.000 claims description 12
- 239000011159 matrix material Substances 0.000 claims description 9
- 230000008859 change Effects 0.000 claims description 2
- 230000000007 visual effect Effects 0.000 abstract description 8
- 230000006870 function Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 8
- 238000004590 computer program Methods 0.000 description 7
- 238000004422 calculation algorithm Methods 0.000 description 5
- 230000006854 communication Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000005314 correlation function Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000001404 mediated effect Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/60—Rotation of whole images or parts thereof
- G06T3/608—Rotation of whole images or parts thereof by skew deformation, e.g. two-pass or three-pass rotation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
Abstract
本发明提供了一种视频处理方法和装置,应用于移动终端,所述方法包括:分别对视频数据中的多帧视频图像进行边缘检测,确定各帧视频图像所包含的屏幕边框;根据所述屏幕边框,分别对各帧视频图像中所述屏幕边框内的有效图像进行透视变换矫正,得到多帧矫正图像。本发明实施例解决了移动终端拍摄视频时因视角、距离原因导致视频图像画面倾斜、不便于观看的问题;并且有效地去除了视频图像中的背景信息,提高了用户体验。
Description
技术领域
本发明涉及移动终端技术领域,尤其涉及一种视频处理方法和装置。
背景技术
随着移动终端的发展,视频录制成为人们生活和工作中常用的功能。例如,一些现场公开课在培训时所使用的资料不会公开,为了便于课后更好地学习,很多用户会使用移动终端录制电脑屏幕或投影仪播放的PPT(PowerPoint文稿演示)、文档等。
在使用移动终端录制视频时,由于录制距离和视角问题,会导致录制的视频图像倾斜,不便于用户观看。并且,拍摄得到的视频图像中除了电脑屏幕或投影仪中的有用信息外,还包含了大量的无关信息,用户在回看视频时也不方便操作。
发明内容
本发明实施例提供一种视频处理方法和装置,以解决现有技术中使用移动终端录制视频时,录制距离和视角问题会导致录制的视频图像倾斜的问题。
为了解决上述技术问题,本发明实施例提供了一种视频处理方法,应用于移动终端,所述方法包括:
分别对视频数据中的多帧视频图像进行边缘检测,确定各帧视频图像所包含的屏幕边框;
根据所述屏幕边框,分别对各帧视频图像中所述屏幕边框内的有效图像进行透视变换矫正,得到多帧矫正图像。
本发明实施例还提供了一种视频处理装置,部署在移动终端,所述装置包括:
边缘检测模块,用于分别对视频数据中的多帧视频图像进行边缘检测,确定各帧视频图像所包含的屏幕边框;
图像矫正模块,用于根据所述屏幕边框,分别对各帧视频图像中所述屏幕边框内的有效图像进行透视变换矫正,得到多帧矫正图像。
本发明实施例还提供了一种移动终端,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如上述的视频处理方法的步骤。
本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如上述的视频处理方法的步骤。
本发明实施例中,分别对视频数据中的多帧视频图像进行边缘检测,确定各帧视频图像所包含的屏幕边框;根据屏幕边框,分别对各帧视频图像中屏幕边框内的有效图像进行透视变换矫正,得到多帧矫正图像。通过本发明实施例,检测到视频图像中的屏幕边框,对屏幕边框内的有效图像进行矫正,解决了移动终端拍摄视频时因视角、距离原因导致视频图像画面倾斜、不便于观看的问题;并且有效地去除了视频图像中的背景信息,提高了用户体验。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例一的一种视频处理方法的步骤流程图;
图2是本发明实施例一的一帧视频图像的示意图;
图3是本发明实施例一的透视变换矫正关系的示意图;
图4是本发明实施例二的一种视频处理方法的步骤流程图;
图5是本发明实施例二的检测区域的示意图;
图6是本发明实施例三的一种视频处理装置的结构框图之一;
图7是本发明实施例三的一种视频处理装置的结构框图之二;
图8是本发明实施例四的一种移动终端的硬件结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例一
参照图1,示出了本发明实施例提供的一种视频处理方法的步骤流程图。应用于移动终端,所述方法包括:
步骤101,分别对视频数据中的多帧视频图像进行边缘检测,确定各帧视频图像所包含的屏幕边框。
本实施例中,参照图2所示的一帧视频图像,在一帧视频图像10中,包含电脑显示屏或投影屏幕的屏幕边框11。可以通过图像识别技术进行边缘检测,检测出视频图像10中的屏幕边框11,也可以通过其他方式检测屏幕边框11。本发明实施例对此不作详细限定,可以根据实际情况进行设置。对视频数据中的多帧视频图像均进行边缘检测,从而确定各帧视频图像的屏幕边框11。检测出屏幕边框11,即可确定待矫正的有效图像13以及视频图像中的背景信息。
步骤102,根据所述屏幕边框,分别对各帧视频图像中所述屏幕边框内的有效图像进行透视变换矫正,得到多帧矫正图像。
本实施例中,参照图3所示的透视变换矫正关系,检测到的屏幕边框11和矫正后的目标边框12存在透视变换矫正关系。例如,屏幕边框11上的A点、B点、C点、D点和目标边框12上的A’点、B’点、C’点、D’点存在透视变换矫正关系。可以根据透视变换矫正关系,对屏幕边框11内的有效图像13进行矫正,得到矫正图像14。具体地,可以是针对有效图像13的每个像素点进行矫正;也可以将有效图像13划分为多个矫正区域,分别针对各个矫正区域进行矫正。本发明实施例对此不作详细限定,可以根据实际情况进行设置。图像矫正解决了移动终端拍摄视频时因视角、距离原因导致视频图像画面倾斜、不便于观看的问题。而且,仅对有效图像进行矫正,有效地去除了视频图像中的背景信息,提高了用户体验。
综上所述,在本发明实施例中,分别对视频数据中的多帧视频图像进行边缘检测,确定各帧视频图像所包含的屏幕边框;根据屏幕边框,分别对各帧视频图像中屏幕边框内的有效图像进行透视变换矫正,得到多帧矫正图像。通过本发明实施例,检测到视频图像中的屏幕边框,对屏幕边框内的有效图像进行矫正,解决了移动终端拍摄视频时因视角、距离原因导致视频图像画面倾斜、不便于观看的问题;并且有效地去除了视频图像中的背景信息,提高了用户体验。
实施例二
参照图4,示出了本发明实施例提供的一种视频处理方法的步骤流程图。应用于移动终端,所述方法包括:
步骤201,分别对视频数据中的多帧视频图像进行边缘检测,确定各帧视频图像所包含的屏幕边框。
本实施例中,针对一帧视频图像,采用预设检测模型对所述视频图像进行边缘检测,确定所述视频图像中屏幕边框的位置坐标。具体地,可以预先在移动终端中设置检测模型,例如Laplacian算法、Prewitt算法、Canny算法等。采用这些预设检测模型对视频图像进行边缘检测。例如,采用Laplacian算法进行边缘检测,对于图5所示3×3的检测区域,使用公式得到的值,从而根据的值确定Z5是否为屏幕边框。其中3×3的检测区域可以是3×3个像素大小的区域,也可以根据实际情况进行设置,本发明实施例对此不作详细限定。
步骤202,根据所述屏幕边框,分别对各帧视频图像中所述屏幕边框内的有效图像进行透视变换矫正,得到多帧矫正图像。
本实施例中,根据屏幕边框对有效图像进行透视变换矫正,具体可以包括如下步骤:
子步骤一,针对一帧视频图像,根据所述屏幕边框11的位置坐标和目标边框12的位置坐标确定透视变换矫正关系。具体地,屏幕边框11中各点的位置坐标在目标边框12中均有对应的位置坐标。例如,屏幕边框11中A点的位置坐标为(x1,y1),B点的位置坐标为(x2,y2);目标边框12中的A’点与屏幕边框11的A点对应,A’点的位置坐标为(x1’,y1’);目标边框中的B’点与屏幕边框11的B点对应,B’点的位置坐标为(x2’,y2’)。由于电脑显示屏、投影屏幕等都是矩形的,优选地,根据所述屏幕边框的四个顶点的位置坐标和目标边框的四个顶点的位置坐标确定透视变换矫正矩阵。例如,将(x1,y1)变换为齐次坐标(u1,v1,w1),将(x1’,y1’)变换为齐次坐标(u1’,v1’,w1’),其中x1=u1/w1,y1=v1/w1,x1’=u1’/w1’,y1’=v1’/w1’。则可以得到如下透视变换矫正关系:
根据A点、B点、C点、D点,以及A’点、B’点、C’点、D’点的齐次坐标,可以解出透视变换矫正矩阵
子步骤二,根据所述透视变换矫正关系对所述有效图像进行矫正,得到所述矫正图像。
本实施例中,对于屏幕边框11内的有效图像13,可以根据上述透视变换矫正矩阵对每个位置坐标进行矫正,从而得到矫正图像14。
步骤203,对所述多帧矫正图像进行清晰化处理,其中所述清晰化处理包括去除噪声、锐化中的至少一种。
本实施例中,由于对视频图像进行矫正后,有些区域被拉伸,有些区域被压缩,可能导致图像不清晰,因此需要对矫正图像进行清晰化处理。比如采用中值滤波去除噪声,或者是USM算法进行锐化等。本发明实施例对此不作详细限定,可以根据实际情况进行设置。对矫正图像进行清晰化处理,可以提高显示效果,提升用户体验。
步骤204,显示清晰化处理后的多帧矫正图像。
本实施例中,依次显示清晰化处理后的多帧矫正图像。在移动终端横屏显示和竖屏显示时,调整矫正图像的大小,从而使矫正图像14可以根据用户需求进行显示,使显示方式更加灵活。
综上所述,在本发明实施例中,分别对视频数据中的多帧视频图像进行边缘检测,确定各帧视频图像所包含的屏幕边框;根据所述屏幕边框,分别对各帧视频图像中所述屏幕边框内的有效图像进行透视变换矫正,得到多帧矫正图像。通过本发明实施例,检测到视频图像中的屏幕边框,对屏幕边框内的有效图像进行矫正,解决了移动终端拍摄视频时因视角、距离原因导致视频图像画面倾斜、不便于观看的问题;并且有效地去除了视频图像中的背景信息,提高了用户体验。
实施例三
参照图6,示出了本发明实施例提供的一种视频处理装置的结构框图。部署在移动终端,所述装置包括边缘检测模块301、图像矫正模块302:
边缘检测模块301,用于分别对视频数据中的多帧视频图像进行边缘检测,确定各帧视频图像所包含的屏幕边框;
图像矫正模块302,用于根据所述屏幕边框,分别对各帧视频图像中所述屏幕边框内的有效图像进行透视变换矫正,得到多帧矫正图像。
在图6的基础上,可选地,所述边缘检测模块301,具体用于针对一帧视频图像,采用预设检测模型对所述视频图像进行边缘检测,确定所述视频图像中屏幕边框的位置坐标。
在图6的基础上,可选地,所述图像矫正模块302包括矫正关系确定子模块3021、图像矫正子模块3022,见图7:
矫正关系确定子模块3021,用于针对一帧视频图像,根据确定的所述屏幕边框的位置坐标和预设位置坐标确定透视变换矫正关系;
图像矫正子模块3022,用于根据所述透视变换矫正关系对所述有效图像进行矫正,得到所述矫正图像。
在图6的基础上,可选地,所述矫正关系确定子模块3021,具体用于根据所述屏幕边框的四个顶点的位置坐标和四个预设位置坐标确定透视变换矫正矩阵;
所述图像矫正子模块3022,具体用于根据所述矫正矩阵对所述有效图像的各个位置坐标进行矫正,得到所述矫正图像。
在图6的基础上,可选地,所述装置还包括清晰化处理模块303、显示模块304,见图7:
清晰化处理模块303,用于对所述多帧矫正图像进行清晰化处理,其中所述清晰化处理包括去除噪声、锐化中的至少一种;
显示模块304,用于清晰化处理后的多帧矫正图像。
本发明实施例提供的视频处理装置能够实现图1和图4的方法实施例中实现的各个过程,为避免重复,这里不再赘述。本发明实施例解决了移动终端拍摄视频时因视角、距离原因导致视频图像画面倾斜、不便于观看的问题;并且有效地去除了视频图像中的背景信息,提高了用户体验。
实施例四
图8为实现本发明各个实施例的一种移动终端的硬件结构示意图。
该移动终端400包括但不限于:射频单元401、网络模块402、音频输出单元403、输入单元404、传感器405、显示单元406、用户输入单元407、接口单元408、存储器409、处理器410、以及电源411等部件。本领域技术人员可以理解,图8中示出的移动终端结构并不构成对移动终端的限定,移动终端可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,移动终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
其中,处理器410,用于分别对视频数据中的多帧视频图像进行边缘检测,确定各帧视频图像所包含的屏幕边框;根据所述屏幕边框,分别对各帧视频图像中所述屏幕边框内的有效图像进行透视变换矫正,得到多帧矫正图像。
本发明实施例解决了移动终端拍摄视频时因视角、距离原因导致视频图像画面倾斜、不便于观看的问题;并且有效地去除了视频图像中的背景信息,提高了用户体验。
应理解的是,本发明实施例中,射频单元401可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器410处理;另外,将上行的数据发送给基站。通常,射频单元401包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元401还可以通过无线通信系统与网络和其他设备通信。
移动终端通过网络模块402为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元403可以将射频单元401或网络模块402接收的或者在存储器409中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元403还可以提供与移动终端400执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元403包括扬声器、蜂鸣器以及受话器等。
输入单元404用于接收音频或视频信号。输入单元404可以包括图形处理器(Graphics Processing Unit,GPU)4041和麦克风4042,图形处理器4041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元406上。经图形处理器4041处理后的图像帧可以存储在存储器409(或其它存储介质)中或者经由射频单元401或网络模块402进行发送。麦克风4042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元401发送到移动通信基站的格式输出。
移动终端400还包括至少一种传感器405,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板4061的亮度,接近传感器可在移动终端400移动到耳边时,关闭显示面板4061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别移动终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器405还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元406用于显示由用户输入的信息或提供给用户的信息。显示单元406可包括显示面板4061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板4061。
用户输入单元407可用于接收输入的数字或字符信息,以及产生与移动终端的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元407包括触控面板4071以及其他输入设备4072。触控面板4071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板4071上或在触控面板4071附近的操作)。触控面板4071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器410,接收处理器410发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板4071。除了触控面板4071,用户输入单元407还可以包括其他输入设备4072。具体地,其他输入设备4072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板4071可覆盖在显示面板4061上,当触控面板4071检测到在其上或附近的触摸操作后,传送给处理器410以确定触摸事件的类型,随后处理器410根据触摸事件的类型在显示面板4061上提供相应的视觉输出。虽然在图8中,触控面板4071与显示面板4061是作为两个独立的部件来实现移动终端的输入和输出功能,但是在某些实施例中,可以将触控面板4071与显示面板4061集成而实现移动终端的输入和输出功能,具体此处不做限定。
接口单元408为外部装置与移动终端400连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元408可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到移动终端400内的一个或多个元件或者可以用于在移动终端400和外部装置之间传输数据。
存储器409可用于存储软件程序以及各种数据。存储器409可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器409可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器410是移动终端的控制中心,利用各种接口和线路连接整个移动终端的各个部分,通过运行或执行存储在存储器409内的软件程序和/或模块,以及调用存储在存储器409内的数据,执行移动终端的各种功能和处理数据,从而对移动终端进行整体监控。处理器410可包括一个或多个处理单元;优选的,处理器410可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器410中。
移动终端400还可以包括给各个部件供电的电源411(比如电池),优选的,电源411可以通过电源管理系统与处理器410逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外,移动终端400包括一些未示出的功能模块,在此不再赘述。
优选的,本发明实施例还提供一种移动终端,包括处理器410,存储器409,存储在存储器409上并可在所述处理器410上运行的计算机程序,该计算机程序被处理器410执行时实现上述视频处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述视频处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,这些均属于本发明的保护之内。
Claims (10)
1.一种视频处理方法,其特征在于,应用于移动终端,所述方法包括:
分别对视频数据中的多帧视频图像进行边缘检测,确定各帧视频图像所包含的屏幕边框;
根据所述屏幕边框,分别对各帧视频图像中所述屏幕边框内的有效图像进行透视变换矫正,得到多帧矫正图像。
2.根据权利要求1所述的方法,其特征在于,所述分别对视频数据中的多帧视频图像进行边缘检测,确定各帧视频图像所包含的屏幕边框,包括:
针对一帧视频图像,采用预设检测模型对所述视频图像进行边缘检测,确定所述视频图像中屏幕边框的位置坐标。
3.根据权利要求2所述的方法,其特征在于,所述根据所述屏幕边框,分别对各帧视频图像中所述屏幕边框内的有效图像进行透视变换矫正,得到多帧矫正图像,包括:
针对一帧视频图像,根据所述屏幕边框的位置坐标和目标边框的位置坐标确定透视变换矫正关系;
根据所述透视变换矫正关系对所述有效图像进行矫正,得到所述矫正图像。
4.根据权利要求3所述的方法,其特征在于,所述根据所述屏幕边框的位置坐标和目标边框的位置坐标确定透视变换矫正关系,包括:
根据所述屏幕边框的四个顶点的位置坐标和所述目标边框的四个顶点的位置坐标确定透视变换矫正矩阵;
所述根据所述透视变换矫正关系对所述有效图像进行矫正,得到所述矫正图像,包括:
根据所述透视变换矫正矩阵对所述有效图像的各个位置坐标进行矫正,得到所述矫正图像。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
对所述多帧矫正图像进行清晰化处理,其中所述清晰化处理包括去除噪声、锐化中的至少一种;
显示清晰化处理后的多帧矫正图像。
6.一种视频处理装置,其特征在于,部署在移动终端,所述装置包括:
边缘检测模块,用于分别对视频数据中的多帧视频图像进行边缘检测,确定各帧视频图像所包含的屏幕边框;
图像矫正模块,用于根据所述屏幕边框,分别对各帧视频图像中所述屏幕边框内的有效图像进行透视变换矫正,得到多帧矫正图像。
7.根据权利要求6所述的装置,其特征在于,
所述边缘检测模块,具体用于针对一帧视频图像,采用预设检测模型对所述视频图像进行边缘检测,确定所述视频图像中屏幕边框的位置坐标。
8.根据权利要求7所述的装置,其特征在于,所述图像矫正模块包括:
矫正关系确定子模块,用于针对一帧视频图像,根据所述屏幕边框的位置坐标和目标边框的位置坐标确定透视变换矫正关系;
图像矫正子模块,用于根据所述透视变换矫正关系对所述有效图像进行矫正,得到所述矫正图像。
9.根据权利要求8所述的装置,其特征在于,
所述矫正关系确定子模块,具体用于根据所述屏幕边框的四个顶点的位置坐标和目标边框的位置坐标确定透视变换矫正矩阵;
所述图像矫正子模块,具体用于根据所述透视变换矫正矩阵对所述有效图像的各个位置坐标进行矫正,得到所述矫正图像。
10.根据权利要求6所述的装置,其特征在于,所述装置还包括:
清晰化处理模块,用于对所述多帧矫正图像进行清晰化处理,其中所述清晰化处理包括去除噪声、锐化中的至少一种;
显示模块,用于清晰化处理后的多帧矫正图像。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811270024.3A CN109327668A (zh) | 2018-10-29 | 2018-10-29 | 一种视频处理方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811270024.3A CN109327668A (zh) | 2018-10-29 | 2018-10-29 | 一种视频处理方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109327668A true CN109327668A (zh) | 2019-02-12 |
Family
ID=65259821
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811270024.3A Pending CN109327668A (zh) | 2018-10-29 | 2018-10-29 | 一种视频处理方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109327668A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109872290A (zh) * | 2019-02-20 | 2019-06-11 | 四川省建筑科学研究院有限公司 | 一种图像形变的修正方法 |
CN110781888A (zh) * | 2019-10-25 | 2020-02-11 | 北京字节跳动网络技术有限公司 | 回归视频画面中屏幕的方法、装置、可读介质及电子设备 |
CN112468716A (zh) * | 2020-11-02 | 2021-03-09 | 航天信息股份有限公司 | 摄像头视角矫正方法、装置、存储介质及电子设备 |
CN112712474A (zh) * | 2020-12-16 | 2021-04-27 | 杭州小伴熊科技有限公司 | 一种视频流动态图像的透视矫正方法和系统 |
CN113673405A (zh) * | 2021-08-14 | 2021-11-19 | 深圳市快易典教育科技有限公司 | 基于题目识别的习题批改方法、系统及智能家教学习机 |
CN115100506A (zh) * | 2022-06-27 | 2022-09-23 | 平安银行股份有限公司 | 双录场景下矫正屏幕的图像方法、服务器及系统 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101236655A (zh) * | 2007-02-01 | 2008-08-06 | 三洋电机株式会社 | 摄像机校正装置以及方法和车辆 |
CN101588438A (zh) * | 2009-06-10 | 2009-11-25 | 拓维信息系统股份有限公司 | 由彩照转化为不同风格图片的手机动画创作方法 |
US20100158403A1 (en) * | 2008-12-24 | 2010-06-24 | Kabushiki Kaisha Toshiba | Image Processing Apparatus and Image Processing Method |
US20120113222A1 (en) * | 2010-11-08 | 2012-05-10 | Sony Corporation | Video signal processing apparatus, video signal processing method, and computer program |
CN103430531A (zh) * | 2011-03-07 | 2013-12-04 | 株式会社理光 | 视频处理装置、视频处理系统和视频处理方法 |
CN105979234A (zh) * | 2016-06-13 | 2016-09-28 | Tcl集团股份有限公司 | 一种投影图像校正的方法及投影装置 |
-
2018
- 2018-10-29 CN CN201811270024.3A patent/CN109327668A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101236655A (zh) * | 2007-02-01 | 2008-08-06 | 三洋电机株式会社 | 摄像机校正装置以及方法和车辆 |
US20100158403A1 (en) * | 2008-12-24 | 2010-06-24 | Kabushiki Kaisha Toshiba | Image Processing Apparatus and Image Processing Method |
CN101588438A (zh) * | 2009-06-10 | 2009-11-25 | 拓维信息系统股份有限公司 | 由彩照转化为不同风格图片的手机动画创作方法 |
US20120113222A1 (en) * | 2010-11-08 | 2012-05-10 | Sony Corporation | Video signal processing apparatus, video signal processing method, and computer program |
CN103430531A (zh) * | 2011-03-07 | 2013-12-04 | 株式会社理光 | 视频处理装置、视频处理系统和视频处理方法 |
CN105979234A (zh) * | 2016-06-13 | 2016-09-28 | Tcl集团股份有限公司 | 一种投影图像校正的方法及投影装置 |
Non-Patent Citations (2)
Title |
---|
吴娱: "《数字图像处理》", 31 October 2017 * |
赵小川: "《MATLAB图像处理 程序实现与模块化仿真》", 31 January 2014 * |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109872290A (zh) * | 2019-02-20 | 2019-06-11 | 四川省建筑科学研究院有限公司 | 一种图像形变的修正方法 |
CN110781888A (zh) * | 2019-10-25 | 2020-02-11 | 北京字节跳动网络技术有限公司 | 回归视频画面中屏幕的方法、装置、可读介质及电子设备 |
CN112468716A (zh) * | 2020-11-02 | 2021-03-09 | 航天信息股份有限公司 | 摄像头视角矫正方法、装置、存储介质及电子设备 |
CN112712474A (zh) * | 2020-12-16 | 2021-04-27 | 杭州小伴熊科技有限公司 | 一种视频流动态图像的透视矫正方法和系统 |
CN113673405A (zh) * | 2021-08-14 | 2021-11-19 | 深圳市快易典教育科技有限公司 | 基于题目识别的习题批改方法、系统及智能家教学习机 |
CN113673405B (zh) * | 2021-08-14 | 2024-03-29 | 深圳市快易典教育科技有限公司 | 基于题目识别的习题批改方法、系统及智能家教学习机 |
CN115100506A (zh) * | 2022-06-27 | 2022-09-23 | 平安银行股份有限公司 | 双录场景下矫正屏幕的图像方法、服务器及系统 |
CN115100506B (zh) * | 2022-06-27 | 2024-05-24 | 平安银行股份有限公司 | 双录场景下矫正屏幕的图像方法、服务器及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109327668A (zh) | 一种视频处理方法和装置 | |
CN108989672A (zh) | 一种拍摄方法及移动终端 | |
CN109246360A (zh) | 一种提示方法及移动终端 | |
CN108459815A (zh) | 一种显示控制方法及移动终端 | |
CN110308885A (zh) | 一种投屏方法及移动终端 | |
CN109542306A (zh) | 一种截屏方法及终端设备 | |
CN108038825A (zh) | 一种图像处理方法及移动终端 | |
CN109685915A (zh) | 一种图像处理方法、装置及移动终端 | |
CN109474787A (zh) | 一种拍照方法、终端设备及存储介质 | |
CN108200229A (zh) | 柔性屏终端的拍摄方法、终端和计算机可读存储介质 | |
CN108984082A (zh) | 一种图像显示方法及移动终端 | |
CN110018805A (zh) | 一种显示控制方法及移动终端 | |
CN108174081B (zh) | 一种拍摄方法及移动终端 | |
CN110290331A (zh) | 一种屏幕控制方法及终端 | |
CN110213412A (zh) | 一种显示方法及终端 | |
CN109445653A (zh) | 一种图标处理方法及移动终端 | |
CN109005355A (zh) | 一种拍摄方法及移动终端 | |
CN109729336A (zh) | 一种视频图像的显示方法和装置 | |
CN110300286A (zh) | 一种图像显示方法及终端 | |
CN110290263A (zh) | 一种图像显示方法和移动终端 | |
CN107800968B (zh) | 一种拍摄方法及移动终端 | |
CN110138963A (zh) | 一种消息处理方法及移动终端 | |
CN109814974A (zh) | 应用程序界面调整方法及移动终端 | |
CN109639981A (zh) | 一种图像拍摄方法及移动终端 | |
CN109005337A (zh) | 一种拍照方法及终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190212 |
|
RJ01 | Rejection of invention patent application after publication |