CN106204518A - 一种镜头切分方法和装置 - Google Patents
一种镜头切分方法和装置 Download PDFInfo
- Publication number
- CN106204518A CN106204518A CN201510234440.8A CN201510234440A CN106204518A CN 106204518 A CN106204518 A CN 106204518A CN 201510234440 A CN201510234440 A CN 201510234440A CN 106204518 A CN106204518 A CN 106204518A
- Authority
- CN
- China
- Prior art keywords
- feature point
- coupling
- width images
- width
- point pairs
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Image Analysis (AREA)
Abstract
本发明公开了一种镜头切分方法和装置,其中,方法包括以下步骤:对视频中相邻的两幅图像进行特征点提取;将从两幅图像中提取的特征点进行匹配,获得两幅图像之间的匹配的特征点对;删除所述匹配的特征点对中的、两个特征点之间的横向距离大于第一预设值和/或两个特征点之间的纵向距离大于第二预设值的特征点对;当所述匹配的特征点对中的剩余的匹配的特征点对的数量大于第三预设值时,将所述两幅图像确认为属于同一个镜头。本发明对匹配的特征点对中的两个特征点之间的横向距离和纵向距离进行了限制,从而可以有效地保证匹配的特征点对的正确性,进而提高镜头切分的正确性。
Description
技术领域
本发明涉及视频处理技术领域,更具体地,涉及一种镜头切分方法和装置。
背景技术
目前,常使用镜头切分来进行视频分割,以将一段视频根据镜头切分为视频片段,精确的镜头切分能够大大降低系统的存储和数据上传负担。
然而,在镜头切分中,常会遇到的问题是:同一镜头内的物体变换如仿射变换、透视变换因为有未知新信息的影响,会很容易被识别分到不同的镜头里。
发明内容
有鉴于此,本发明实施例的目的是提出一种镜头切分方法和装置,能够较精确地进行镜头切分。
为了达到上述目的,本发明实施例提出一种镜头切分方法,包括:
对视频中相邻的两幅图像进行特征点提取;
将从两幅图像中提取的特征点进行匹配,获得两幅图像之间的匹配的特征点对;
删除所述匹配的特征点对中的、两个特征点之间的横向距离大于第一预设值和/或两个特征点之间的纵向距离大于第二预设值的特征点对;
当所述匹配的特征点对中的剩余的匹配的特征点对的数量大于第三预设值时,将所述两幅图像确认为属于同一个镜头。
在本发明一实施例中,所述对视频中相邻的两幅图像进行特征点提取之后,所述方法还包括:对提取的特征点进行提纯。
在本发明一实施例中,所述将从两幅图像中提取的特征点进行匹配,获得两幅图像之间的匹配的特征点对,包括:
根据预设的匹配度,将从两幅图像中提取的特征点进行匹配,获得高于预设的匹配度的两幅图像之间的匹配的特征点对。
在本发明一实施例中,所述对视频中相邻的两幅图像进行特征点提取之前,所述方法还包括:
判断所述两幅图像的相似度是否大于第四预设值;
所述对视频中相邻的两幅图像进行特征点提取,包括:
当所述两幅图的相似度大于第四预设值时,对视频中相邻的两幅图像进行特征点提取。
在本发明一实施例中,所述第四预设值为80%。
本发明实施例还提出一种镜头切分装置,包括:
提取模块,用于对视频中相邻的两幅图像进行特征点提取;
匹配模块,用于将从两幅图像中提取的特征点进行匹配,获得两幅图像之间的匹配的特征点对;
删除模块,用于删除所述匹配的特征点对中的、两个特征点之间的横向距离大于第一预设值和/或两个特征点之间的纵向距离大于第二预设值的特征点对;
确认模块,用于当所述匹配的特征点对中的剩余的匹配的特征点对的数量大于第三预设值时,将所述两幅图像确认为属于同一个镜头。
在本发明一实施例中,所述装置还包括:
提纯模块,用于对提取的特征点进行提纯。
在本发明一实施例中,所述匹配模块还用于,
根据预设的匹配度,将从两幅图像中提取的特征点进行匹配,获得高于预设的匹配度的两幅图像之间的匹配的特征点对。
在本发明一实施例中,所述装置还包括:
判断模块,用于判断所述两幅图像的相似度是否大于第四预设值;
所述提取模块还用于,当所述两幅图的相似度大于第四预设值时,对视频中相邻的两幅图像进行特征点提取。
在本发明一实施例中,所述第四预设值为80%。
本发明实施例提供的技术方案可以包括以下有益效果:
本发明对匹配的特征点对中的两个特征点之间的横向距离和纵向距离进行了限制,从而可以有效地保证匹配的特征点对的正确性,进而提高镜头切分的正确性。
本发明实施例的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明实施例的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明实施例的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明实施例的限制。在附图中:
图1是本发明一实施例中镜头切分方法的流程图。
图2是本发明一实施例中的镜头切分方法的流程图。
图3是本发明一实施例中的镜头切分方法的流程图。
图4是本发明一实施例中的镜头切分装置的结构示意图。
图5是本发明一实施例中的镜头切分装置的结构示意图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明实施例,并不用于限定本发明实施例。
如图1所示为本发明实施例中的镜头切分方法的流程图,该方法包括:
步骤S11:对视频中相邻的两幅图像进行特征点提取。
步骤S12:将从两幅图像中提取的特征点进行匹配,获得两幅图像之间的匹配的特征点对。
步骤S13:删除所述匹配的特征点对中的、两个特征点之间的横向距离大于第一预设值和/或两个特征点之间的纵向距离大于第二预设值的特征点对。
步骤S14:当所述匹配的特征点对中的剩余的匹配的特征点对的数量大于第三预设值时,将所述两幅图像确认为属于同一个镜头。
本发明实施例中,对匹配的特征点对中的两个特征点之间的横向距离和纵向距离进行了限制,从而可以有效地保证匹配的特征点对的正确性,进而提高镜头切分的正确性。
如图2所示为本发明另一实施例提供的镜头切分方法的流程图,在该实施例中,包括以下步骤:
步骤S21:对视频中相邻的两幅图像进行特征点提取。
对图像进行特征点提取例如可以采用基于Harris角点检测的方法来提取特征点。
步骤S22:对提取的特征点进行提纯。
例如可以使用RANSAC(Random Sample Consensus,随机抽样一致)算法对提取的特征点进行提纯,得到有代表性的点集。
步骤S23:将从两幅图像中提取的特征点进行匹配,获得高于预设的匹配度的匹配的特征点对。
该步骤的目的是按照匹配度选取一个合适的比例,筛除匹配度不高的点。
步骤S24:判断匹配的特征点对中,是否存在两个特征点之间的横向距离大于第一预设值和/或两个特征点之间的纵向距离大于第二预设值的特征点对;若是,执行步骤S25;若否,执行步骤26。
这里,限定凡是匹配的特征点对中的横坐标x或纵坐标y的差异超过一定程度的匹配点对都是匹配错误的。即,如果△x>T1和/或△y>T2,则删除该匹配点对;否则保留。该限定比斜率判断的约束更多,因为斜率k=△x/△y,如果△x和△y都比较大,同样会使得斜率k很小,但是很显然,有时这种情况下的点是不能算正确的匹配。
根据该限定,最后得到的匹配的点对是几乎平行的匹配点,这就有效地保证了匹配的特征点对的正确性。
步骤S25:删除两个特征点之间的横向距离大于第一预设值和/或两个特征点之间的纵向距离大于第二预设值的特征点对。
步骤S26:判断匹配的特征点对中的剩余的匹配的特征点对的数量是否大于第三预设值;若是,执行步骤S27;若否,执行步骤S28。
步骤S27:将该两幅图像确认为属于同一个镜头。
步骤S28:将该两幅图像确认为属于不同的镜头。
后续,可以将视频根据镜头进行切分,即将视频切分为视频片段,每个视频片段中的图像属于同一个镜头。
如图3所示为本发明另一实施例提供的镜头切分方法的流程图,该方法包括以下步骤:
步骤S31:判断视频中相邻的两幅图像的相似度是否大于第四预设值;若是,执行步骤S32。
相邻两张图的相似度不能太小,这样才能保证有足够的特征点匹配。相似度例如是80%。高阈值是为了尽量避免不同镜头的误合并。
步骤S32:对该两幅图像进行特征点提取。
对图像进行特征点提取例如可以采用基于Harris角点检测的方法来提取特征点。
步骤S33:对提取的特征点进行提纯。
例如可以使用RANSAC(Random Sample Consensus,随机抽样一致)算法对提取的特征点进行提纯,得到有代表性的点集。
步骤S34:将从两幅图像中提取的特征点进行匹配,获得高于预设的匹配度的匹配的特征点对。
步骤S35:判断匹配的特征点对中,是否存在两个特征点之间的横向距离大于第一预设值和/或两个特征点之间的纵向距离大于第二预设值的特征点对;若是,执行步骤S36;若否,执行步骤S37。
步骤S36:删除两个特征点之间的横向距离大于第一预设值和/或两个特征点之间的纵向距离大于第二预设值的特征点对。
步骤S37:判断匹配的特征点对中的剩余的匹配的特征点对的数量是否大于第三预设值;若是,执行步骤S38;若否,执行步骤S39。
步骤S38:将该两幅图像确认为属于同一个镜头;
步骤S39:将该两幅图像确认为属于不同的镜头。
如图4所示,本发明实施例还提出一种镜头切分装置,包括:
提取模块401,用于对视频中相邻的两幅图像进行特征点提取;
匹配模块402,用于将从两幅图像中提取的特征点进行匹配,获得两幅图像之间的匹配的特征点对;
删除模块403,用于删除所述匹配的特征点对中的、两个特征点之间的横向距离大于第一预设值和/或两个特征点之间的纵向距离大于第二预设值的特征点对;
确认模块404,用于当所述匹配的特征点对中的剩余的匹配的特征点对的数量大于第三预设值时,将所述两幅图像确认为属于同一个镜头。
如图5所示,所述装置还包括:
提纯模块405,用于对提取的特征点进行提纯。
所述匹配模块402还用于,根据预设的匹配度,将从两幅图像中提取的特征点进行匹配,获得高于预设的匹配度的两幅图像之间的匹配的特征点对。
如图5所示,所述装置还包括:
判断模块406,用于判断所述两幅图像的相似度是否大于第四预设值;
所述提取模块401还用于,当所述两幅图的相似度大于第四预设值时,对视频中相邻的两幅图像进行特征点提取。其中,所述第四预设值为80%。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (10)
1.一种镜头切分方法,其特征在于,包括以下步骤:
对视频中相邻的两幅图像进行特征点提取;
将从两幅图像中提取的特征点进行匹配,获得两幅图像之间的匹配的特征点对;
删除所述匹配的特征点对中的、两个特征点之间的横向距离大于第一预设值和/或两个特征点之间的纵向距离大于第二预设值的特征点对;
当所述匹配的特征点对中的剩余的匹配的特征点对的数量大于第三预设值时,将所述两幅图像确认为属于同一个镜头。
2.根据权利要求1所述的方法,其特征在于,所述对视频中相邻的两幅图像进行特征点提取之后,所述方法还包括:
对提取的特征点进行提纯。
3.根据权利要求1所述的方法,其特征在于,所述将从两幅图像中提取的特征点进行匹配,获得两幅图像之间的匹配的特征点对,包括:
根据预设的匹配度,将从两幅图像中提取的特征点进行匹配,获得高于预设的匹配度的两幅图像之间的匹配的特征点对。
4.根据权利要求1所述的方法,其特征在于,所述对视频中相邻的两幅图像进行特征点提取之前,所述方法还包括:
判断所述两幅图像的相似性是否大于第四预设值;
所述对视频中相邻的两幅图像进行特征点提取,包括:
当所述两幅图的相似性大于第四预设值时,对视频中相邻的两幅图像进行特征点提取。
5.根据权利要求4所述的方法,其特征在于,所述第四预设值为80%。
6.一种镜头切分装置,其特征在于,包括:
提取模块,用于对视频中相邻的两幅图像进行特征点提取;
匹配模块,用于将从两幅图像中提取的特征点进行匹配,获得两幅图像之间的匹配的特征点对;
删除模块,用于删除所述匹配的特征点对中的、两个特征点之间的横向距离大于第一预设值和/或两个特征点之间的纵向距离大于第二预设值的特征点对;
确认模块,用于当所述匹配的特征点对中的剩余的匹配的特征点对的数量大于第三预设值时,将所述两幅图像确认为属于同一个镜头。
7.根据权利要求6所述的装置,其特征在于,所述装置还包括:
提纯模块,用于对提取的特征点进行提纯。
8.根据权利要求6所述的装置,其特征在于,所述匹配模块还用于,
根据预设的匹配度,将从两幅图像中提取的特征点进行匹配,获得高于预设的匹配度的两幅图像之间的匹配的特征点对。
9.根据权利要求6所述的装置,其特征在于,所述装置还包括:
判断模块,用于判断所述两幅图像的相似度是否大于第四预设值;
所述提取模块还用于,当所述两幅图的相似度大于第四预设值时,对视频中相邻的两幅图像进行特征点提取。
10.根据权利要求9所述的装置,其特征在于,所述第四预设值为80%。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510234440.8A CN106204518A (zh) | 2015-05-08 | 2015-05-08 | 一种镜头切分方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510234440.8A CN106204518A (zh) | 2015-05-08 | 2015-05-08 | 一种镜头切分方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106204518A true CN106204518A (zh) | 2016-12-07 |
Family
ID=57459974
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510234440.8A Pending CN106204518A (zh) | 2015-05-08 | 2015-05-08 | 一种镜头切分方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106204518A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109740499A (zh) * | 2018-12-28 | 2019-05-10 | 北京旷视科技有限公司 | 视频分割方法、视频动作识别方法、装置、设备及介质 |
CN114140461A (zh) * | 2021-12-09 | 2022-03-04 | 成都智元汇信息技术股份有限公司 | 基于边缘识图盒子的切图方法、电子设备及介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070222864A1 (en) * | 2006-02-24 | 2007-09-27 | Masaki Hiraga | Image processing apparatus |
CN102521838A (zh) * | 2011-12-19 | 2012-06-27 | 国家计算机网络与信息安全管理中心 | 一种图像检索/匹配方法及系统 |
CN102982537A (zh) * | 2012-11-05 | 2013-03-20 | 安维思电子科技(广州)有限公司 | 一种检测场景变换的方法和系统 |
CN103955888A (zh) * | 2014-05-12 | 2014-07-30 | 中国人民解放军空军预警学院监控系统工程研究所 | 一种基于sift的高清视频图像拼接方法及装置 |
-
2015
- 2015-05-08 CN CN201510234440.8A patent/CN106204518A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070222864A1 (en) * | 2006-02-24 | 2007-09-27 | Masaki Hiraga | Image processing apparatus |
CN102521838A (zh) * | 2011-12-19 | 2012-06-27 | 国家计算机网络与信息安全管理中心 | 一种图像检索/匹配方法及系统 |
CN102982537A (zh) * | 2012-11-05 | 2013-03-20 | 安维思电子科技(广州)有限公司 | 一种检测场景变换的方法和系统 |
CN103955888A (zh) * | 2014-05-12 | 2014-07-30 | 中国人民解放军空军预警学院监控系统工程研究所 | 一种基于sift的高清视频图像拼接方法及装置 |
Non-Patent Citations (5)
Title |
---|
CHUN-RONG HUANG 等: "Shot Change Detection via Local Keypoint Matching", 《IEEE TRANSACTIONS ON MULTIMEDIA》 * |
万崇玮 等: "基于尺度不变特征的视频镜头检测", 《计算机辅助设计与图形学学报》 * |
唐剑琪 等: "基于ORB的镜头边界检测算法", 《通信学报》 * |
李国和 等: "基于自动确定特征点数的镜头分割方法", 《图学学报》 * |
陈红岩: "无人车立体视觉里程计研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》 * |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109740499A (zh) * | 2018-12-28 | 2019-05-10 | 北京旷视科技有限公司 | 视频分割方法、视频动作识别方法、装置、设备及介质 |
CN109740499B (zh) * | 2018-12-28 | 2021-06-11 | 北京旷视科技有限公司 | 视频分割方法、视频动作识别方法、装置、设备及介质 |
CN114140461A (zh) * | 2021-12-09 | 2022-03-04 | 成都智元汇信息技术股份有限公司 | 基于边缘识图盒子的切图方法、电子设备及介质 |
CN114140461B (zh) * | 2021-12-09 | 2023-02-14 | 成都智元汇信息技术股份有限公司 | 基于边缘识图盒子的切图方法、电子设备及介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11164323B2 (en) | Method for obtaining image tracking points and device and storage medium thereof | |
US10559090B2 (en) | Method and apparatus for calculating dual-camera relative position, and device | |
JP6767743B2 (ja) | 映像補正方法及び装置 | |
EP3680808A1 (en) | Augmented reality scene processing method and apparatus, and computer storage medium | |
US10474921B2 (en) | Tracker assisted image capture | |
CN108229290B (zh) | 视频物体分割方法和装置、电子设备、存储介质 | |
US9992408B2 (en) | Photographing processing method, device and computer storage medium | |
CN102025959B (zh) | 从低清晰度视频产生高清晰度视频的系统与方法 | |
KR102380862B1 (ko) | 영상 처리 방법 및 장치 | |
JP2015502058A (ja) | マルチスペクトル撮像システム | |
KR102074555B1 (ko) | 비디오 처리를 위한 블록 기반 정적 영역 검출 | |
US9582859B2 (en) | System and a method for depth-image-based rendering | |
KR20130112311A (ko) | 고밀도 삼차원 영상 재구성 장치 및 방법 | |
CN104396231A (zh) | 图像处理装置和图像处理方法 | |
US20180068451A1 (en) | Systems and methods for creating a cinemagraph | |
CN110648363A (zh) | 相机姿态确定方法、装置、存储介质及电子设备 | |
US20230214981A1 (en) | Method for detecting appearance defects of a product and electronic device | |
CN110544202A (zh) | 一种基于模板匹配与特征聚类的视差图像拼接方法及系统 | |
CN110909750A (zh) | 图像差异检测方法及装置、存储介质、终端 | |
CN106204518A (zh) | 一种镜头切分方法和装置 | |
CN110557556A (zh) | 一种多对象拍摄的方法及装置 | |
CN111192214B (zh) | 图像处理的方法、装置、电子设备及存储介质 | |
CN112991419B (zh) | 视差数据生成方法、装置、计算机设备及存储介质 | |
CN106296580A (zh) | 一种图像拼接的方法及装置 | |
CN112233164B (zh) | 一种视差图错误点识别与校正方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20161207 |