CN112819694A - 一种视频图像拼接方法及装置 - Google Patents
一种视频图像拼接方法及装置 Download PDFInfo
- Publication number
- CN112819694A CN112819694A CN202110061189.5A CN202110061189A CN112819694A CN 112819694 A CN112819694 A CN 112819694A CN 202110061189 A CN202110061189 A CN 202110061189A CN 112819694 A CN112819694 A CN 112819694A
- Authority
- CN
- China
- Prior art keywords
- video
- frame images
- determining
- frame
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 51
- 238000005520 cutting process Methods 0.000 claims abstract description 70
- 230000005540 biological transmission Effects 0.000 claims description 12
- 238000004590 computer program Methods 0.000 claims description 12
- 238000003860 storage Methods 0.000 claims description 11
- 238000012545 processing Methods 0.000 abstract description 11
- 238000001514 detection method Methods 0.000 abstract description 6
- 238000013473 artificial intelligence Methods 0.000 abstract description 2
- 230000006870 function Effects 0.000 description 17
- 238000004891 communication Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 11
- 101100534231 Xenopus laevis src-b gene Proteins 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 239000000872 buffer Substances 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 101100491335 Caenorhabditis elegans mat-2 gene Proteins 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- 102100040428 Chitobiosyldiphosphodolichol beta-mannosyltransferase Human genes 0.000 description 2
- 101000891557 Homo sapiens Chitobiosyldiphosphodolichol beta-mannosyltransferase Proteins 0.000 description 2
- 238000009966 trimming Methods 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/32—Indexing scheme for image data processing or generation, in general involving image mosaicing
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
Abstract
本发明提供一种视频图像拼接方法及装置，涉及人工智能领域，尤其涉及视频图像检测与处理技术领域。方法包括：获取待拼接的视频对应的多个帧图像；设置相邻的两个帧图像各自对应的裁剪区域，根据相邻的两个帧图像的裁剪区域确定相邻的两个帧图像之间的偏移信息；根据所述偏移信息对相邻的两个帧图像上的裁剪区域进行裁剪和拼接；遍历所有帧图像完成对视频图像的拼接。本发明能够有效提高视频图像拼接效率。
Description
技术领域
本发明涉及人工智能领域，尤其涉及视频图像检测与处理技术领域，具体涉及一种视频图像拼接方法及装置。
背景技术
伴随着现代技术的发展与信息产业的壮大，应用于通信、医疗、建筑行业的高空基础设施数量与日剧增。高空电缆作为最具代表性的基础设施，其架设位置通常位于偏远山区等人为难以抵达的位置，针对这类设施的瑕疵检测是当下的热点问题。现有技术手段一般采用配置小型高空拍摄装置，通过平行横向拍摄采集电缆视频并进行回传，检测人员通过观察回传视频来判断该设施是否存在外部瑕疵。然而，由于小型高空拍摄装置的采集效率或检测效率低，导致检测人员很难一次对回传视频中高空电缆存在的瑕疵进行判断，因此能否采用一种更为直观和高效的检测手段对这类设施进行检测成为当前迫切需要解决的问题。
发明内容
针对现有技术中的问题，本发明提供一种视频图像拼接方法及装置，具体包括以下技术方案：
第一方面，本发明提供一种视频图像拼接方法，包括：
获取待拼接的视频对应的多个帧图像；
设置相邻的两个帧图像各自对应的裁剪区域，根据相邻的两个帧图像的裁剪区域确定相邻的两个帧图像之间的偏移信息；
根据所述偏移信息对相邻的两个帧图像上的裁剪区域进行裁剪和拼接；
遍历所有帧图像完成对视频图像的拼接。
进一步地，在所述获取待拼接的视频对应的多个帧图像之前，还包括：
获取待拼接的视频，对所述视频进行解析得到所述视频对应的多个帧图像。
其中，所述设置相邻的两个帧图像各自对应的裁剪区域，包括：
在相邻的两个帧图像上目标物的位置处设置包含目标物的裁剪区域；
其中，两个帧图像上的裁剪区域的坐标相同。
其中，所述根据相邻的两个帧图像的裁剪区域确定相邻的两个帧图像之间的偏移信息，包括：
移动一个帧图像对应的裁剪区域，根据两个帧图像上各自裁剪区域对应的灰度值矩阵确定两个帧图像之间的偏移信息。
其中，所述移动一个帧图像对应的裁剪区域，包括：
根据帧图像上目标物的实际走向确定帧图像的移动方向；
根据目标视频的每秒传输帧数确定帧图像的最小移动单位；
其中，每秒传输帧数越大，则最小移动单位越大。
其中，所述根据两个帧图像上各自裁剪区域对应的灰度值矩阵确定两个帧图像之间的偏移信息，包括：
每移动一次帧图像则确定两个灰度值矩阵之间的绝对差值；
确定多个绝对差值中最小绝对差值对应的移动偏移量；
其中，移动偏移量包括：横向偏移量和纵向偏移量。
第二方面，本发明提供一种视频图像拼接装置，包括：
帧图像单元，用于获取待拼接的视频对应的多个帧图像；
偏移信息单元，用于设置相邻的两个帧图像各自对应的裁剪区域，根据相邻的两个帧图像的裁剪区域确定相邻的两个帧图像之间的偏移信息；
相邻图像拼接单元，用于根据所述偏移信息对相邻的两个帧图像上的裁剪区域进行裁剪和拼接；
视频图像拼接单元，用于遍历所有帧图像完成对视频图像的拼接。
进一步地，还包括：
获取单元，用于获取待拼接的视频，对所述视频进行解析得到所述视频对应的多个帧图像。
其中，所述偏移信息单元包括：
裁剪区域子单元，用于在相邻的两个帧图像上目标物的位置处设置包含目标物的裁剪区域；
其中，两个帧图像上的裁剪区域的坐标相同。
其中，所述偏移信息单元还包括：
移动子单元，用于移动一个帧图像对应的裁剪区域，根据两个帧图像上各自裁剪区域对应的灰度值矩阵确定两个帧图像之间的偏移信息。
其中，所述移动子单元包括：
移动方向模块，用于根据帧图像上目标物的实际走向确定帧图像的移动方向；
移动单位模块，用于根据目标视频的每秒传输帧数确定帧图像的最小移动单位；
其中，每秒传输帧数越大，则最小移动单位越大。
其中，所述移动子单元还包括：
绝对差值模块，用于每移动一次帧图像则确定两个灰度值矩阵之间的绝对差值；
移动偏移量模块，用于确定多个绝对差值中最小绝对差值对应的移动偏移量；
其中，移动偏移量包括：横向偏移量和纵向偏移量。
第三方面，本发明提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现所述的视频图像拼接方法的步骤。
第四方面，本发明提供一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现所述的视频图像拼接方法的步骤。
由上述技术方案可知，本发明提供一种视频图像拼接方法及装置，通过获取待拼接的视频对应的多个帧图像；设置相邻的两个帧图像各自对应的裁剪区域，根据相邻的两个帧图像的裁剪区域确定相邻的两个帧图像之间的偏移信息；根据所述偏移信息对相邻的两个帧图像上的裁剪区域进行裁剪和拼接；遍历所有帧图像完成对视频图像的拼接，能够有效提高视频图像拼接效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例中的视频图像拼接方法的第一流程示意图。
图2为本发明实施例中的视频图像拼接方法的第二流程示意图。
图3为本发明实施例中的视频图像拼接装置的结构示意图。
图4为本发明实施例中的电子设备的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整的描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明提供一种视频图像拼接方法的实施例，参见图1，所述视频图像拼接方法具体包含有如下内容：
S101：获取待拼接的视频对应的多个帧图像；
S102：设置相邻的两个帧图像各自对应的裁剪区域，根据相邻的两个帧图像的裁剪区域确定相邻的两个帧图像之间的偏移信息；
在本步骤中，设置的裁剪区域为感兴趣区域(Region of Interest，ROI)。基于感兴趣区域进行视频间隔帧图像间的拼接，能有效提高视频图像拼接效率。
S103：根据所述偏移信息对相邻的两个帧图像上的裁剪区域进行裁剪和拼接；
在本步骤中，对帧图像进行裁剪，保留设定的的裁剪区域，将保留的裁剪区域进行拼接，能有效提高相邻图象帧之间的图像拼接效率。
S104：遍历所有帧图像完成对视频图像的拼接。
在本步骤中，将所有保留的裁剪区域进行拼接，完成对视频图像的拼接。
从上述描述可知，本发明实施例提供的视频图像拼接方法，通过获取待拼接的视频对应的多个帧图像；设置相邻的两个帧图像各自对应的裁剪区域，根据相邻的两个帧图像的裁剪区域确定相邻的两个帧图像之间的偏移信息；根据所述偏移信息对相邻的两个帧图像上的裁剪区域进行裁剪和拼接；遍历所有帧图像完成对视频图像的拼接，能够有效提高视频图像拼接效率。
在本发明的一种实施例中，参见图2，在所述视频图像拼接方法中的步骤S101之前，具体包含有如下内容：
S100：获取待拼接的视频，对所述视频进行解析得到所述视频对应的多个帧图像。
在本步骤中，接收待拼接的视频，解析视频文件得到视频对应的多个帧图像。进一步的，还可以读取待拼接的视频的帧数(Frames)、帧图片高(FrameH)、帧图片宽(FrameW)。
在具体实施时，读入目标视频所在路径targetPath解析视频文件，基于OpenCV构造一个视频捕获器指针CvCapture*capture＝cvCreateFile Capture(targetPath)。
利用视频捕获器指针*capture读取目标视频帧数(Frames)、帧图片高(FrameH)、帧图片宽(FrameW)，对目标视频所有帧进行遍历，利用cvQueryFrame(capture)抓取所有帧图像。
在本发明的一实施例中，所述视频图像拼接方法中的步骤S102具体包含有如下内容：
在相邻的两个帧图像上目标物的位置处设置包含目标物的裁剪区域；
其中，两个帧图像上的裁剪区域的坐标相同。
在本实施例中，确定相邻的两个帧图像中前一帧图像上目标物的位置，在目标物的位置设置裁剪区域，以使目标物在裁剪区域内。确定前一帧图像上的裁剪区域后，后一帧图像的裁剪区域与前一帧图像上的裁剪区域的位置相同，即两个帧图像上的裁剪区域的坐标相同。例如：选择前一帧图像左边2/3高度位置作为裁剪区域(感兴趣区域，Region ofInterest，ROI)的左上角坐标，ROI为1/3帧图片宽的方形区域。
在本发明的一实施例中，所述视频图像拼接方法中的步骤S102具体包含有如下内容：
其中，根据相邻的两个帧图像的裁剪区域确定相邻的两个帧图像之间的偏移信息，包括：移动一个帧图像对应的裁剪区域，根据两个帧图像上各自裁剪区域对应的灰度值矩阵确定两个帧图像之间的偏移信息。
在移动一个帧图像对应的裁剪区域之前，需要利用OpenCV/imgproc.hpp中的cvColor()函数将抽取的视频的帧图像由三通道彩色图像转换为单通道灰度图像。
其中，所述移动一个帧图像对应的裁剪区域，包括：
根据帧图像上目标物的实际走向确定帧图像的移动方向；
根据目标视频的每秒传输帧数确定帧图像的最小移动单位；
需要说明的是，每秒传输帧数越大，则最小移动单位越大。
再具体实施时，定义的两个指针*src1与*src2分别指向抓取到的第一帧视频灰度图像与第二帧视频灰度图像；
获取*src1与*src2图像对应ROI左上角坐标指针*p1与*p2，根据*p1与*p2获取相邻两帧图像ROI内的灰度值矩阵mat1与mat2，依次向上平移与向右平移*p2位置(ROI每次整体平移2个像素块)，更新mat2灰度值矩阵。
其中，所述根据两个帧图像上各自裁剪区域对应的灰度值矩阵确定两个帧图像之间的偏移信息，包括：
每移动一次帧图像则确定两个灰度值矩阵之间的绝对差值；
确定多个绝对差值中最小绝对差值对应的移动偏移量；
需要说明的是，移动偏移量包括：横向偏移量和纵向偏移量。
再具体实施时，计算mat2与mat1矩阵的绝对差值differVal，遍历后记录最小differVal值对应的偏移信息，横向偏移量xOffsety与纵向偏移量yOffset,获取到最佳拼接坐标。
进一步地，在根据偏移信息对相邻的两个帧图像上的裁剪区域进行裁剪和拼接时，基于偏移位置信息对*src1与*src2指向的原始视频帧(彩色三通道图像)进行拼接，拼接结果存放至临时存储区，将拼接结果输出为本地bmp文件，每次拼接完成，对临时存储区进行内存释放，防止内存堆积造成的程序异常。
在上述基础上，遍历更新*src1与*src2指向的视频帧图像，输出bmp文件，当*src2指向视频最后一帧时，拼接操作结束。
优选地，基于微软基础库MFC将拼接源程序功能代码进行软件封装，选择静态文本控件来对当前操作的视频帧图像进行动态显示，利用windows函数库封装的底层绘图函数来对图像显示控件进行标记，通过获取鼠标响应的位置信息来确定指定目标在视频中的位置从而做到准确识别，创建两个线程，主线程用于视频图像采集与处理，采用基于消息响应的方式创建一个子线程来实现对进度条控件进行动态更新，以便于观察当前拼接进展。
基于上述内容，本发明实施例提供的视频图像拼接方法，基于感兴趣区域进行视频间隔帧图像间的差值计算，能有效提高视频图像拼接效率。实施拼接操作时提出将RGB三通道图像转为单通道灰度图像，构造ROI灰度值矩阵，能有效减少灰度差值的计算成本，更快定位间隔帧图像拼接偏移坐标。基于微软库基础库MFC将提出算法进行软件化封装，将拼接动作进行可视化展示，并支持操作者通过软件界面自定义ROI坐标位置，同时运用多线程技术将拼接进度条与视频帧预览窗口进行关联，具备一定的商用价值。
本发明实施例提供一种能够实现所述视频图像拼接方法中全部内容的视频图像拼接装置的具体实施方式，参见图3，所述视频图像拼接装置具体包括如下内容：
帧图像单元10，用于获取待拼接的视频对应的多个帧图像；
偏移信息单元20，用于设置相邻的两个帧图像各自对应的裁剪区域，根据相邻的两个帧图像的裁剪区域确定相邻的两个帧图像之间的偏移信息；
相邻图像拼接单元30，用于根据所述偏移信息对相邻的两个帧图像上的裁剪区域进行裁剪和拼接；
视频图像拼接单元40，用于遍历所有帧图像完成对视频图像的拼接。
进一步地，还包括：
获取单元，用于获取待拼接的视频，对所述视频进行解析得到所述视频对应的多个帧图像。
其中，所述偏移信息单元包括：
裁剪区域子单元，用于在相邻的两个帧图像上目标物的位置处设置包含目标物的裁剪区域；
其中，两个帧图像上的裁剪区域的坐标相同。
其中，所述偏移信息单元还包括：
移动子单元，用于移动一个帧图像对应的裁剪区域，根据两个帧图像上各自裁剪区域对应的灰度值矩阵确定两个帧图像之间的偏移信息。
其中，所述移动子单元包括：
移动方向模块，用于根据帧图像上目标物的实际走向确定帧图像的移动方向；
移动单位模块，用于根据目标视频的每秒传输帧数确定帧图像的最小移动单位；
其中，每秒传输帧数越大，则最小移动单位越大。
其中，所述移动子单元还包括：
绝对差值模块，用于每移动一次帧图像则确定两个灰度值矩阵之间的绝对差值；
移动偏移量模块，用于确定多个绝对差值中最小绝对差值对应的移动偏移量；
其中，移动偏移量包括：横向偏移量和纵向偏移量。
本发明提供的视频图像拼接装置的实施例具体可以用于执行上述实施例中的视频图像拼接方法的实施例的处理流程，其功能在此不再赘述，可以参照上述方法实施例的详细描述。
从上述描述可知，本发明实施例提供的视频图像拼接装置，通过获取待拼接的视频对应的多个帧图像；设置相邻的两个帧图像各自对应的裁剪区域，根据相邻的两个帧图像的裁剪区域确定相邻的两个帧图像之间的偏移信息；根据所述偏移信息对相邻的两个帧图像上的裁剪区域进行裁剪和拼接；遍历所有帧图像完成对视频图像的拼接，能够有效提高视频图像拼接效率。
本申请提供一种用于实现所述视频图像拼接方法中的全部或部分内容的电子设备的实施例所述电子设备具体包含有如下内容：
处理器(processor)、存储器(memory)、通信接口(Communications Interface)和总线；其中，所述处理器、存储器、通信接口通过所述总线完成相互间的通信；所述通信接口用于实现相关设备之间的信息传输；该电子设备可以是台式计算机、平板电脑及移动终端等，本实施例不限于此。在本实施例中，该电子设备可以参照实施例用于实现所述视频图像拼接方法的实施例及用于实现所述视频图像拼接装置的实施例进行实施，其内容被合并于此，重复之处不再赘述。
图4为本申请实施例的电子设备9600的系统构成的示意框图。如图4所示，该电子设备9600可以包括中央处理器9100和存储器9140；存储器9140耦合到中央处理器9100。值得注意的是，该图4是示例性的；还可以使用其他类型的结构，来补充或代替该结构，以实现电信功能或其他功能。
一实施例中，视频图像拼接功能可以被集成到中央处理器9100中。其中，中央处理器9100可以被配置为进行如下控制：获取待拼接的视频对应的多个帧图像；设置相邻的两个帧图像各自对应的裁剪区域，根据相邻的两个帧图像的裁剪区域确定相邻的两个帧图像之间的偏移信息；根据所述偏移信息对相邻的两个帧图像上的裁剪区域进行裁剪和拼接；遍历所有帧图像完成对视频图像的拼接。
从上述描述可知，本申请的实施例提供的电子设备，通过获取待拼接的视频对应的多个帧图像；设置相邻的两个帧图像各自对应的裁剪区域，根据相邻的两个帧图像的裁剪区域确定相邻的两个帧图像之间的偏移信息；根据所述偏移信息对相邻的两个帧图像上的裁剪区域进行裁剪和拼接；遍历所有帧图像完成对视频图像的拼接，能够有效提高视频图像拼接效率。
在另一个实施方式中，视频图像拼接装置可以与中央处理器9100分开配置，例如可以将视频图像拼接配置为与中央处理器9100连接的芯片，通过中央处理器的控制来实现视频图像拼接功能。
如图4所示，该电子设备9600还可以包括：通信模块9110、输入单元9120、音频处理器9130、显示器9160、电源9170。值得注意的是，电子设备9600也并不是必须要包括图4中所示的所有部件；此外，电子设备9600还可以包括图4中没有示出的部件，可以参考现有技术。
如图4所示，中央处理器9100有时也称为控制器或操作控件，可以包括微处理器或其他处理器装置和/或逻辑装置，该中央处理器9100接收输入并控制电子设备9600的各个部件的操作。
其中，存储器9140，例如可以是缓存器、闪存、硬驱、可移动介质、易失性存储器、非易失性存储器或其它合适装置中的一种或更多种。可储存上述与失败有关的信息，此外还可存储执行有关信息的程序。并且中央处理器9100可执行该存储器9140存储的该程序，以实现信息存储或处理等。
输入单元9120向中央处理器9100提供输入。该输入单元9120例如为按键或触摸输入装置。电源9170用于向电子设备9600提供电力。显示器9160用于进行图像和文字等显示对象的显示。该显示器例如可为LCD显示器，但并不限于此。
该存储器9140可以是固态存储器，例如，只读存储器(ROM)、随机存取存储器(RAM)、SIM卡等。还可以是这样的存储器，其即使在断电时也保存信息，可被选择性地擦除且设有更多数据，该存储器的示例有时被称为EPROM等。存储器9140还可以是某种其它类型的装置。存储器9140包括缓冲存储器9141(有时被称为缓冲器)。存储器9140可以包括应用/功能存储部9142，该应用/功能存储部9142用于存储应用程序和功能程序或用于通过中央处理器9100执行电子设备9600的操作的流程。
存储器9140还可以包括数据存储部9143，该数据存储部9143用于存储数据，例如联系人、数字数据、图片、声音和/或任何其他由电子设备使用的数据。存储器9140的驱动程序存储部9144可以包括电子设备的用于通信功能和/或用于执行电子设备的其他功能(如消息传送应用、通讯录应用等)的各种驱动程序。
通信模块9110即为经由天线9111发送和接收信号的发送机/接收机9110。通信模块(发送机/接收机)9110耦合到中央处理器9100，以提供输入信号和接收输出信号，这可以和常规移动通信终端的情况相同。
基于不同的通信技术，在同一电子设备中，可以设置有多个通信模块9110，如蜂窝网络模块、蓝牙模块和/或无线局域网模块等。通信模块(发送机/接收机)9110还经由音频处理器9130耦合到扬声器9131和麦克风9132，以经由扬声器9131提供音频输出，并接收来自麦克风9132的音频输入，从而实现通常的电信功能。音频处理器9130可以包括任何合适的缓冲器、解码器、放大器等。另外，音频处理器9130还耦合到中央处理器9100，从而使得可以通过麦克风9132能够在本机上录音，且使得可以通过扬声器9131来播放本机上存储的声音。
本发明的实施例还提供能够实现上述实施例中的视频图像拼接方法中全部步骤的一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述实施例中的视频图像拼接方法的全部步骤，例如，所述处理器执行所述计算机程序时实现下述步骤：
获取待拼接的视频对应的多个帧图像；设置相邻的两个帧图像各自对应的裁剪区域，根据相邻的两个帧图像的裁剪区域确定相邻的两个帧图像之间的偏移信息；根据所述偏移信息对相邻的两个帧图像上的裁剪区域进行裁剪和拼接；遍历所有帧图像完成对视频图像的拼接。
从上述描述可知，本发明实施例提供的计算机可读存储介质，通过获取待拼接的视频对应的多个帧图像；设置相邻的两个帧图像各自对应的裁剪区域，根据相邻的两个帧图像的裁剪区域确定相邻的两个帧图像之间的偏移信息；根据所述偏移信息对相邻的两个帧图像上的裁剪区域进行裁剪和拼接；遍历所有帧图像完成对视频图像的拼接，能够有效提高视频图像拼接效率。
虽然本发明提供了如实施例或流程图所述的方法操作步骤，但基于常规或者无创造性的劳动可以包括更多或者更少的操作步骤。实施例中列举的步骤顺序仅仅为众多步骤执行顺序中的一种方式，不代表唯一的执行顺序。在实际中的装置或客户端产品执行时，可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境)。
本发明是参照根据本发明实施例的方法、装置(系统)和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。需要说明的是，在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。本发明并不局限于任何单一的方面，也不局限于任何单一的实施例，也不局限于这些方面和/或实施例的任意组合和/或置换。而且，可以单独使用本发明的每个方面和/或实施例或者与一个或更多其他方面和/或其实施例结合使用。
最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围，其均应涵盖在本发明的权利要求和说明书的范围当中。
Claims (14)
1.一种视频图像拼接方法，其特征在于，包括：
获取待拼接的视频对应的多个帧图像；
设置相邻的两个帧图像各自对应的裁剪区域，根据相邻的两个帧图像的裁剪区域确定相邻的两个帧图像之间的偏移信息；
根据所述偏移信息对相邻的两个帧图像上的裁剪区域进行裁剪和拼接；
遍历所有帧图像完成对视频图像的拼接。
2.根据权利要求1所述的视频图像拼接方法，其特征在于，在所述获取待拼接的视频对应的多个帧图像之前，还包括：
获取待拼接的视频，对所述视频进行解析得到所述视频对应的多个帧图像。
3.根据权利要求1所述的视频图像拼接方法，其特征在于，所述设置相邻的两个帧图像各自对应的裁剪区域，包括：
在相邻的两个帧图像上目标物的位置处设置包含目标物的裁剪区域；
其中，两个帧图像上的裁剪区域的坐标相同。
4.根据权利要求1所述的视频图像拼接方法，其特征在于，所述根据相邻的两个帧图像的裁剪区域确定相邻的两个帧图像之间的偏移信息，包括：
移动一个帧图像对应的裁剪区域，根据两个帧图像上各自裁剪区域对应的灰度值矩阵确定两个帧图像之间的偏移信息。
5.根据权利要求4所述的视频图像拼接方法，其特征在于，所述移动一个帧图像对应的裁剪区域，包括：
根据帧图像上目标物的实际走向确定帧图像的移动方向；
根据目标视频的每秒传输帧数确定帧图像的最小移动单位；
其中，每秒传输帧数越大，则最小移动单位越大。
6.根据权利要求4所述的视频图像拼接方法，其特征在于，所述根据两个帧图像上各自裁剪区域对应的灰度值矩阵确定两个帧图像之间的偏移信息，包括：
每移动一次帧图像则确定两个灰度值矩阵之间的绝对差值；
确定多个绝对差值中最小绝对差值对应的移动偏移量；
其中，移动偏移量包括：横向偏移量和纵向偏移量。
7.一种视频图像拼接装置，其特征在于，包括：
帧图像单元，用于获取待拼接的视频对应的多个帧图像；
偏移信息单元，用于设置相邻的两个帧图像各自对应的裁剪区域，根据相邻的两个帧图像的裁剪区域确定相邻的两个帧图像之间的偏移信息；
相邻图像拼接单元，用于根据所述偏移信息对相邻的两个帧图像上的裁剪区域进行裁剪和拼接；
视频图像拼接单元，用于遍历所有帧图像完成对视频图像的拼接。
8.根据权利要求7所述的视频图像拼接装置，其特征在于，还包括：
获取单元，用于获取待拼接的视频，对所述视频进行解析得到所述视频对应的多个帧图像。
9.根据权利要求7所述的视频图像拼接装置，其特征在于，所述偏移信息单元包括：
裁剪区域子单元，用于在相邻的两个帧图像上目标物的位置处设置包含目标物的裁剪区域；
其中，两个帧图像上的裁剪区域的坐标相同。
10.根据权利要求7所述的视频图像拼接装置，其特征在于，所述偏移信息单元还包括：
移动子单元，用于移动一个帧图像对应的裁剪区域，根据两个帧图像上各自裁剪区域对应的灰度值矩阵确定两个帧图像之间的偏移信息。
11.根据权利要求10所述的视频图像拼接装置，其特征在于，所述移动子单元包括：
移动方向模块，用于根据帧图像上目标物的实际走向确定帧图像的移动方向；
移动单位模块，用于根据目标视频的每秒传输帧数确定帧图像的最小移动单位；
其中，每秒传输帧数越大，则最小移动单位越大。
12.根据权利要求10所述的视频图像拼接装置，其特征在于，所述移动子单元还包括：
绝对差值模块，用于每移动一次帧图像则确定两个灰度值矩阵之间的绝对差值；
移动偏移量模块，用于确定多个绝对差值中最小绝对差值对应的移动偏移量；
其中，移动偏移量包括：横向偏移量和纵向偏移量。
13.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现权利要求1至6任一项所述的视频图像拼接方法的步骤。
14.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现权利要求1至6任一项所述的视频图像拼接方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110061189.5A CN112819694B (zh) | 2021-01-18 | 2021-01-18 | 一种视频图像拼接方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110061189.5A CN112819694B (zh) | 2021-01-18 | 2021-01-18 | 一种视频图像拼接方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112819694A true CN112819694A (zh) | 2021-05-18 |
| CN112819694B CN112819694B (zh) | 2024-06-21 |
Family
ID=75869626
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110061189.5A Active CN112819694B (zh) | 2021-01-18 | 2021-01-18 | 一种视频图像拼接方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112819694B (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115297253A (zh) * | 2022-06-24 | 2022-11-04 | 浙江欣奕华智能科技有限公司 | 图像采集及显示方法、装置及计算机设备 |
| CN115797164A (zh) * | 2021-09-09 | 2023-03-14 | 同方威视技术股份有限公司 | 固定视场中的图像拼接方法、装置、系统 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105100640A (zh) * | 2015-01-23 | 2015-11-25 | 武汉智源泉信息科技有限公司 | 一种局部配准并行视频拼接方法及系统 |
| CN107516294A (zh) * | 2017-09-30 | 2017-12-26 | 百度在线网络技术（北京）有限公司 | 拼接图像的方法和装置 |
| CN109035145A (zh) * | 2018-08-02 | 2018-12-18 | 广州市鑫广飞信息科技有限公司 | 基于视频帧匹配信息的视频图像自适应拼接方法及装置 |
| CN110473227A (zh) * | 2019-08-21 | 2019-11-19 | 图谱未来(南京)人工智能研究院有限公司 | 目标跟踪方法、装置、设备及存储介质 |
| CN111294644A (zh) * | 2018-12-07 | 2020-06-16 | 腾讯科技（深圳）有限公司 | 视频拼接方法、装置、电子设备及计算机存储介质 |
-
2021
- 2021-01-18 CN CN202110061189.5A patent/CN112819694B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105100640A (zh) * | 2015-01-23 | 2015-11-25 | 武汉智源泉信息科技有限公司 | 一种局部配准并行视频拼接方法及系统 |
| CN107516294A (zh) * | 2017-09-30 | 2017-12-26 | 百度在线网络技术（北京）有限公司 | 拼接图像的方法和装置 |
| CN109035145A (zh) * | 2018-08-02 | 2018-12-18 | 广州市鑫广飞信息科技有限公司 | 基于视频帧匹配信息的视频图像自适应拼接方法及装置 |
| CN111294644A (zh) * | 2018-12-07 | 2020-06-16 | 腾讯科技（深圳）有限公司 | 视频拼接方法、装置、电子设备及计算机存储介质 |
| CN110473227A (zh) * | 2019-08-21 | 2019-11-19 | 图谱未来(南京)人工智能研究院有限公司 | 目标跟踪方法、装置、设备及存储介质 |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115797164A (zh) * | 2021-09-09 | 2023-03-14 | 同方威视技术股份有限公司 | 固定视场中的图像拼接方法、装置、系统 |
| CN115797164B (zh) * | 2021-09-09 | 2023-12-12 | 同方威视技术股份有限公司 | 固定视场中的图像拼接方法、装置、系统 |
| CN115297253A (zh) * | 2022-06-24 | 2022-11-04 | 浙江欣奕华智能科技有限公司 | 图像采集及显示方法、装置及计算机设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112819694B (zh) | 2024-06-21 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112511821B (zh) | 视频卡顿检测方法、装置和存储介质 | |
| CN107622504B (zh) | 用于处理图片的方法和装置 | |
| CN112001912B (zh) | 目标检测方法和装置、计算机系统和可读存储介质 | |
| CN112819694B (zh) | 一种视频图像拼接方法及装置 | |
| KR20130025944A (ko) | 템플릿 스위칭 및 특징 적응을 이용한 오브젝트 추적을 제공하는 방법, 장치 및 컴퓨터 프로그램 제품 | |
| EP3822757A1 (en) | Method and apparatus for setting background of ui control | |
| CN112561840B (zh) | 视频裁剪方法、装置、存储介质及电子设备 | |
| CN106843700B (zh) | 截图方法及装置 | |
| CN112306793A (zh) | 用于监控网页的方法和装置 | |
| CN110675465A (zh) | 用于生成图像的方法和装置 | |
| CN111222509A (zh) | 目标检测方法、装置及电子设备 | |
| CN111787240B (zh) | 视频生成方法、装置和计算机可读存储介质 | |
| CN111582024B (zh) | 视频流处理方法、装置、计算机设备和存储介质 | |
| CN109871465B (zh) | 一种时间轴计算方法、装置、电子设备及存储介质 | |
| CN111191556A (zh) | 人脸识别方法、装置及电子设备 | |
| CN103634545A (zh) | 使用指点器处理投影仪的事件的方法及其电子设备 | |
| US11810336B2 (en) | Object display method and apparatus, electronic device, and computer readable storage medium | |
| CN112567735A (zh) | 多视频信号预监方法和多视频信号预监系统 | |
| CN113033552B (zh) | 文本识别方法、装置和电子设备 | |
| CN111010606B (zh) | 视频处理方法和装置 | |
| CN112445398A (zh) | 用于编辑图片的方法、电子设备和计算机可读介质 | |
| JP4985492B2 (ja) | 画面データ送信装置及びその方法 | |
| CN111862248B (zh) | 用于输出信息的方法和装置 | |
| CN114173194B (zh) | 页面流畅度的检测方法、装置、服务器和存储介质 | |
| CN104574343A (zh) | 一种视频中提取图像的方法及设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant |