CN113014818A - 用于5g视音频记录仪的视频防抖控制方法 - Google Patents
用于5g视音频记录仪的视频防抖控制方法 Download PDFInfo
- Publication number
- CN113014818A CN113014818A CN202110242677.6A CN202110242677A CN113014818A CN 113014818 A CN113014818 A CN 113014818A CN 202110242677 A CN202110242677 A CN 202110242677A CN 113014818 A CN113014818 A CN 113014818A
- Authority
- CN
- China
- Prior art keywords
- video
- recorder
- feedback signal
- vibration
- shake
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 23
- 238000004458 analytical method Methods 0.000 claims abstract description 7
- 238000007781 pre-processing Methods 0.000 claims abstract description 5
- 239000013598 vector Substances 0.000 claims description 21
- 230000002159 abnormal effect Effects 0.000 claims description 13
- 230000001960 triggered effect Effects 0.000 claims description 6
- 238000006073 displacement reaction Methods 0.000 claims description 5
- 239000008186 active pharmaceutical agent Substances 0.000 claims description 4
- 238000004364 calculation method Methods 0.000 abstract description 6
- 230000007547 defect Effects 0.000 abstract description 5
- 230000009286 beneficial effect Effects 0.000 abstract description 2
- 238000005516 engineering process Methods 0.000 description 8
- 230000003287 optical effect Effects 0.000 description 6
- 230000006641 stabilisation Effects 0.000 description 3
- 238000011105 stabilization Methods 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6811—Motion detection based on the image signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
本发明公开了用于5G视音频记录仪的视频防抖控制方法，该方法包括如下步骤：该方法包括如下步骤：步骤A：对输入视频的参考帧和当前帧进行图像预处理；步骤B：获取记录仪的反馈信号与震动传感器的反馈信号，对记录仪与震动传感器的反馈信号进行信号分析处理；本发明的有益效果是：将灰度投影算法与块匹配运动估计算法相结合，解决了单纯的灰度投影算法中由于图像内部小物体运动而影响处理精度的缺点，同时相比于单纯的块匹配运动估计算法,以计算出来的点的位置作为第一步进行搜索的位置,可以更加地接近最佳匹配点的位置,这样,可以大大的减少了搜索的点数,提高了计算的速度。
Description
技术领域
本发明涉及视频防抖领域，尤其涉及用于5G视音频记录仪的视频防抖控制方法。
背景技术
经过几十年的迅速发展，人们的照相、摄影技术有了很大提高，极大地改善了人们的生活方式和生活质量，同时对成像质量也提出更高的要求，但人们摄取的视频图像往往会因为摄像机载体的运动而出现视频抖动，严重破坏了人们的观感，光学防抖技术是在光路中设置一些光学元件来对不稳定图像进行补偿，这种方法是将光学元件嵌在摄像头内部，不需要对整个系统稳定，因此减轻了系统重量，电子防抖技术是应用数字图像处理的方法来直接确定图像序列的偏移并进行补偿的防抖技术，这种技术的优点在于不仅可以补偿光学系统的移动，而且对任何形式的作用量都有效，而不局限于特殊的支撑系统，与传统的光学防抖方法和机电结合的防抖方法相比，电子防抖具有操作简单、结果精确、体积小以及成本低等特点，同时随着大规模集成电路技术的不断进步，便于实现系统的小型化。
现有的视频防抖方法在使用时还存在一定的弊端，使用的防抖技术通常为块匹配运动估计算法或者是灰度投影算法，块匹配运动估计算法计算量大，而且若视频运动量过大，例如移动情况下，会造成相邻图像间位移较大，极大地影响画面质量，而灰度投影算法的缺点是当图像内部有小物体运动时，会严重影响匹配的精度，并且当图像灰度值比较单一时，容易造成较大误差，并且存在因误判成载体的随机抖动而进行稳定处理反而会使系统输出的图像抖动更为严重的问题。
发明内容
本发明的目的是为了解决现有技术中，使用的防抖技术通常为块匹配运动估计算法或者是灰度投影算法，块匹配运动估计算法计算量大，而且若视频运动量过大，例如移动情况下，会造成相邻图像间位移较大，极大地影响画面质量，而灰度投影算法的缺点是当图像内部有小物体运动时，会严重影响匹配的精度，并且当图像灰度值比较单一时，容易造成较大误差，并且存在因误判成载体的随机抖动而进行稳定处理反而会使系统输出的图像抖动更为严重的问题，而提出的用于5G视音频记录仪的视频防抖控制方法。
为了实现上述目的，本发明采用了如下技术方案：
用于5G视音频记录仪的视频防抖控制方法，该方法包括如下步骤：
步骤A：对输入视频的参考帧和当前帧进行图像预处理；
步骤B：获取记录仪的反馈信号与震动传感器的反馈信号，对记录仪与震动传感器的反馈信号进行信号分析处理，判断为异常抖动时触发视频防抖处理，具体的防抖处理包括；
对参考帧和当前帧进行行、列灰度投影，对灰度投影的数据进行互相关运算,得到水平抖动分量和垂直抖动分量；
将图像分为若干个16x16的宏块,在每个宏块中,将得到的抖动分量作为块匹配运动估计的初始点的偏移量,以SDSP为模板计算SAD值，匹配到的极小值点即为最佳匹配点；
参考帧中的参考点与最佳匹配点间的位移即该宏块的块运动矢量,以此方法,计算出各个宏块的块运动矢量，统计各个块运动矢量,以出现次数最多的块运动矢量作为参考帧和当前帧间的全局运动矢量；
根据全局运动矢量进行运动补偿,即将当前帧向全局运动矢量的反方向平移相应大小的像素距离,得到稳定视频序列。
进一步在于：所述步骤B中的信号分析处理包括：
根据记录仪与震动传感器的反馈信号进行判定；
当记录仪的反馈信号内容为“扫描开启”，震动器传感器的反馈信号内容为“无震动”时，判定为正常抖动状态，不触发视频防抖处理；
当记录仪的反馈信号内容为“扫描关闭”，震动器传感器的反馈信号内容为“无震动”时，判定为无抖动状态，不触发视频防抖处理；
当记录仪的反馈信号内容为“扫描关闭”，震动器传感器的反馈信号内容为“震动”时，判定为异常抖动状态，触发视频防抖处理；
当记录仪的反馈信号内容为“扫描开启”，震动器传感器的反馈信号内容为“震动”时，判定为异常抖动状态，触发视频防抖处理。
进一步在于：所述步骤B中的水平抖动分量和垂直抖动分量为块匹配运动估计时初始点的位置。
进一步在于：所述步骤B中以SDSP为模板计算SAD值是指以DS算法的SDSP模板为搜索策略进行搜索，每个匹配块只进行一次搜索，搜索的点数为5。
与现有技术相比，本发明的有益效果是：
将灰度投影算法与块匹配运动估计算法相结合，解决了单纯的灰度投影算法中由于图像内部小物体运动而影响处理精度的缺点，同时相比于单纯的块匹配运动估计算法,以计算出来的点的位置作为第一步进行搜索的位置,可以更加地接近最佳匹配点的位置,这样,可以大大的减少了搜索的点数,提高了计算的速度；
获取记录仪与震动传感器的反馈信号，根据记录仪与震动传感器的反馈信号判断是否执行视频防抖处理，只有当其判定为异常抖动状态时才会触发视频防抖处理，解决了因误判成载体的随机抖动而进行稳定处理反而会使系统输出的图像抖动更为严重的问题。
附图说明
附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。
图1为本发明用于5G视音频记录仪的视频防抖控制方法的流程图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。
在本发明的描述中，需要理解的是，术语“上”、“下”、“前”、“后”、“左”、“右”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。
请参阅图1所示，用于5G视音频记录仪的视频防抖控制方法，该方法包括如下步骤：
步骤A：对输入视频的参考帧和当前帧进行图像预处理；
步骤B：获取记录仪的反馈信号与震动传感器的反馈信号，对记录仪与震动传感器的反馈信号进行信号分析处理，判断为异常抖动时触发视频防抖处理，具体的防抖处理包括；
对参考帧和当前帧进行行、列灰度投影，对灰度投影的数据进行互相关运算,得到水平抖动分量和垂直抖动分量；
将图像分为若干个16x16的宏块,在每个宏块中,将得到的抖动分量作为块匹配运动估计的初始点的偏移量,以SDSP为模板计算SAD值，匹配到的极小值点即为最佳匹配点，充分利用块匹配运动估计的原理解决了单纯的灰度投影算法中由于图像内部小物体运动而影响处理精度的缺点；
参考帧中的参考点与最佳匹配点间的位移即该宏块的块运动矢量,以此方法,计算出各个宏块的块运动矢量，统计各个块运动矢量,以出现次数最多的块运动矢量作为参考帧和当前帧间的全局运动矢量；
根据全局运动矢量进行运动补偿,即将当前帧向全局运动矢量的反方向平移相应大小的像素距离,得到稳定视频序列；
步骤B中的信号分析处理包括：
根据记录仪与震动传感器的反馈信号进行判定；
当记录仪的反馈信号内容为“扫描开启”，震动器传感器的反馈信号内容为“无震动”时，判定为正常抖动状态，不触发视频防抖处理；
当记录仪的反馈信号内容为“扫描关闭”，震动器传感器的反馈信号内容为“无震动”时，判定为无抖动状态，不触发视频防抖处理；
当记录仪的反馈信号内容为“扫描关闭”，震动器传感器的反馈信号内容为“震动”时，判定为异常抖动状态，触发视频防抖处理；
当记录仪的反馈信号内容为“扫描开启”，震动器传感器的反馈信号内容为“震动”时，判定为异常抖动状态，触发视频防抖处理；
步骤B中的水平抖动分量和垂直抖动分量为块匹配运动估计时初始点的位置，相比于单纯的块匹配运动估计算法,以计算出来的点的位置作为第一步进行搜索的位置,可以更加地接近最佳匹配点的位置,这样,可以大大的减少了搜索的点数,提高了计算的速度；
步骤B中以SDSP为模板计算SAD值是指以DS算法的SDSP模板为搜索策略进行搜索，每个匹配块只进行一次搜索，搜索的点数为5，同样可以提高效率,便于计算,同时,由于应用了DS搜索的方法进行分块匹配计算,这样就可以对图像内部的运动物体进行稳像处理,不会因为灰度投影算法中是以整体灰度为计算对象而造成对内部细节的忽略,同时,降低了噪声的干扰。
本发明的工作原理及使用流程：对输入视频的参考帧和当前帧进行图像预处理，获取记录仪的反馈信号与震动传感器的反馈信号，当记录仪的反馈信号内容为“扫描开启”，震动器传感器的反馈信号内容为“无震动”时，判定为正常抖动状态，不触发视频防抖处理，当记录仪的反馈信号内容为“扫描关闭”，震动器传感器的反馈信号内容为“无震动”时，判定为无抖动状态，不触发视频防抖处理，当记录仪的反馈信号内容为“扫描关闭”，震动器传感器的反馈信号内容为“震动”时，判定为异常抖动状态，触发视频防抖处理，当记录仪的反馈信号内容为“扫描开启”，震动器传感器的反馈信号内容为“震动”时，判定为异常抖动状态，触发视频防抖处理，只有当其处于异常抖动状态时才会触发视频防抖处理，解决了因误判成载体的随机抖动而进行稳定处理反而会使系统输出的图像抖动更为严重的问题。
以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。
Claims (4)
1.用于5G视音频记录仪的视频防抖控制方法，其特征在于，该方法包括如下步骤：
步骤A：对输入视频的参考帧和当前帧进行图像预处理；
步骤B：获取记录仪的反馈信号与震动传感器的反馈信号，对记录仪与震动传感器的反馈信号进行信号分析处理，判断为异常抖动时触发视频防抖处理，具体的防抖处理包括；
对参考帧和当前帧进行行、列灰度投影，对灰度投影的数据进行互相关运算,得到水平抖动分量和垂直抖动分量；
将图像分为若干个16x16的宏块,在每个宏块中,将得到的抖动分量作为块匹配运动估计的初始点的偏移量,以SDSP为模板计算SAD值，匹配到的极小值点即为最佳匹配点；
参考帧中的参考点与最佳匹配点间的位移即该宏块的块运动矢量,以此方法,计算出各个宏块的块运动矢量，统计各个块运动矢量,以出现次数最多的块运动矢量作为参考帧和当前帧间的全局运动矢量；
根据全局运动矢量进行运动补偿,即将当前帧向全局运动矢量的反方向平移相应大小的像素距离,得到稳定视频序列。
2.根据权利要求1所述的用于5G视音频记录仪的视频防抖控制方法，其特征在于，所述步骤B中的信号分析处理包括：
根据记录仪与震动传感器的反馈信号进行判定；
当记录仪的反馈信号内容为“扫描开启”，震动器传感器的反馈信号内容为“无震动”时，判定为正常抖动状态，不触发视频防抖处理；
当记录仪的反馈信号内容为“扫描关闭”，震动器传感器的反馈信号内容为“无震动”时，判定为无抖动状态，不触发视频防抖处理；
当记录仪的反馈信号内容为“扫描关闭”，震动器传感器的反馈信号内容为“震动”时，判定为异常抖动状态，触发视频防抖处理；
当记录仪的反馈信号内容为“扫描开启”，震动器传感器的反馈信号内容为“震动”时，判定为异常抖动状态，触发视频防抖处理。
3.根据权利要求1所述的用于5G视音频记录仪的视频防抖控制方法，其特征在于，所述步骤B中的水平抖动分量和垂直抖动分量为块匹配运动估计时初始点的位置。
4.根据权利要求1所述的用于5G视音频记录仪的视频防抖控制方法，其特征在于，所述步骤B中以SDSP为模板计算SAD值是指以DS算法的SDSP模板为搜索策略进行搜索，每个匹配块只进行一次搜索，搜索的点数为5。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110242677.6A CN113014818A (zh) | 2021-03-05 | 2021-03-05 | 用于5g视音频记录仪的视频防抖控制方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110242677.6A CN113014818A (zh) | 2021-03-05 | 2021-03-05 | 用于5g视音频记录仪的视频防抖控制方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113014818A true CN113014818A (zh) | 2021-06-22 |
Family
ID=76405996
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110242677.6A Pending CN113014818A (zh) | 2021-03-05 | 2021-03-05 | 用于5g视音频记录仪的视频防抖控制方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113014818A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116017154A (zh) * | 2022-11-23 | 2023-04-25 | 深圳市华德安科技有限公司 | 一种防抖算法在执法记录仪上的应用 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002131797A (ja) * | 2000-10-20 | 2002-05-09 | Canon Inc | 撮像装置及び振動抑制方法 |
| US20090059016A1 (en) * | 2007-08-29 | 2009-03-05 | Chikatsu Moriya | Image stabilization apparatus for camera |
| CN111279165A (zh) * | 2019-03-13 | 2020-06-12 | 深圳市大疆创新科技有限公司 | 云台振动调节的方法、云台以及客户端 |
-
2021
- 2021-03-05 CN CN202110242677.6A patent/CN113014818A/zh active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002131797A (ja) * | 2000-10-20 | 2002-05-09 | Canon Inc | 撮像装置及び振動抑制方法 |
| US20090059016A1 (en) * | 2007-08-29 | 2009-03-05 | Chikatsu Moriya | Image stabilization apparatus for camera |
| CN111279165A (zh) * | 2019-03-13 | 2020-06-12 | 深圳市大疆创新科技有限公司 | 云台振动调节的方法、云台以及客户端 |
Non-Patent Citations (1)
| Title |
|---|
| 龙云腾等: "基于块匹配与灰度投影视频防抖算法研究", 《电视技术》 * |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116017154A (zh) * | 2022-11-23 | 2023-04-25 | 深圳市华德安科技有限公司 | 一种防抖算法在执法记录仪上的应用 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4500875B2 (ja) | モーションブラー効果を除去する方法および装置 | |
| KR100987590B1 (ko) | 손떨림 보정 제어 회로 및 그것을 탑재한 촬상 장치 | |
| US8743268B2 (en) | Image capturing apparatus, control method therefor, and program for correcting shift based on shift amount in image plane | |
| KR101856947B1 (ko) | 촬영장치, 움직임 추정장치, 영상 보정 방법, 움직임 추정방법 및 컴퓨터 판독가능 기록매체 | |
| US9055217B2 (en) | Image compositing apparatus, image compositing method and program recording device | |
| CN110248048A (zh) | 一种视频抖动的检测方法及装置 | |
| JP2014150443A (ja) | 撮像装置、その制御方法及びプログラム | |
| KR19990031401A (ko) | 비트 플레인 정합을 이용한 입력영상의 움직임 보정을 통한 영상안정화 장치 및 그에 따른 영상 안정화방법 | |
| JP2007166578A (ja) | 画像振動補償装置とその方法 | |
| KR20090071471A (ko) | 촬상 장치 및 그 셔터 구동 모드 선택 방법 | |
| JP2014176007A (ja) | 撮像装置およびその制御方法 | |
| US20100277603A1 (en) | Image Capture Device to Minimize the Effect of Device Movement | |
| JP2507138B2 (ja) | 動きベクトル検出装置及び画像揺れ補正装置 | |
| CN113014818A (zh) | 用于5g视音频记录仪的视频防抖控制方法 | |
| JP2013110754A (ja) | カメラ装置、及びその撮影方法とプログラム | |
| CN104427250A (zh) | 图像捕捉装置及其控制方法 | |
| JP4200767B2 (ja) | ブレ補正装置及びカメラ | |
| KR20100046544A (ko) | 영상 왜곡 보정 방법 및 장치 | |
| JP7098332B2 (ja) | 撮像装置およびその制御方法 | |
| JP2000023024A (ja) | 画像入力装置 | |
| JP2014106324A (ja) | オートフォーカス装置及び撮像装置 | |
| JP3473064B2 (ja) | 画像動きベクトル検出装置及びビデオカメラ | |
| JP2003078808A (ja) | 動きベクトル検出装置および方法、手振れ補正装置および方法、並びに撮像装置 | |
| JP4998134B2 (ja) | 画像処理装置および画像処理方法 | |
| JP3200089B2 (ja) | 動きベクトル検出装置及び振れ補正装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210622 |
|
| RJ01 | Rejection of invention patent application after publication |