TW202005353A - 去除視訊抖動的方法及裝置 - Google Patents
去除視訊抖動的方法及裝置 Download PDFInfo
- Publication number
- TW202005353A TW202005353A TW108108594A TW108108594A TW202005353A TW 202005353 A TW202005353 A TW 202005353A TW 108108594 A TW108108594 A TW 108108594A TW 108108594 A TW108108594 A TW 108108594A TW 202005353 A TW202005353 A TW 202005353A
- Authority
- TW
- Taiwan
- Prior art keywords
- pair
- image
- information
- original images
- images
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 42
- 238000005192 partition Methods 0.000 claims description 93
- 230000009466 transformation Effects 0.000 claims description 81
- 230000006835 compression Effects 0.000 claims description 40
- 238000007906 compression Methods 0.000 claims description 40
- 239000011159 matrix material Substances 0.000 claims description 34
- 238000006243 chemical reaction Methods 0.000 claims description 24
- 239000000872 buffer Substances 0.000 description 27
- 238000010586 diagram Methods 0.000 description 9
- 239000013001 matrix buffer Substances 0.000 description 5
- 238000000638 solvent extraction Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 238000004590 computer program Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 102000002067 Protein Subunits Human genes 0.000 description 1
- 108010001267 Protein Subunits Proteins 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/21—Circuitry for suppressing or minimising disturbance, e.g. moiré or halo
- H04N5/213—Circuitry for suppressing or minimising impulsive noise
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/97—Determining parameters from multiple pictures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20201—Motion blur correction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/21—Circuitry for suppressing or minimising disturbance, e.g. moiré or halo
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Television Signal Processing For Recording (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
本發明提供一種去除視訊抖動的方法，該方法包括：根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊，其中，一個特徵點對由每對圖像中前後兩個圖像上對應的兩個特徵點構成，該原圖像為壓縮前的圖像；根據每對原圖像中特徵點對的位置資訊，確定每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊；根據n對原圖像中後一個圖像相對於前一個圖像的位置變換資訊，獲取第m對原圖像中前一個圖像對應的變形資訊，其中，n和m為正整數，m不大於n；根據第m對原圖像中前一個圖像對應的變形資訊，對第m對原圖像中前一個圖像變形，得到去除抖動後的第m對原圖像中前一個圖像。藉由以上步驟實時地去除視訊抖動。
Description
本發明涉及視訊處理領域，具體涉及一種去除視訊抖動的方法及裝置。本發明還涉及一種電子設備及電腦可讀儲存介質。
一段時長的視訊是由很多幀快速連續變動的圖像形成的。當拍攝視訊時，由於視訊採集設備與景物之間的相對運動會使得拍攝出的快速變動的圖像之間存在較大位移，視訊因此會出現抖動的現象。
現有技術下的視訊去抖動方案為非實時去抖方案，無法滿足視訊直播和短視訊對於實時處理的要求。
本發明提供一種去除視訊抖動的方法，旨在解決現有技術中無法實時去抖動的技術問題。
本發明提出一種去除視訊抖動的方法，該方法包括：根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊，其中，一個特徵點對由每對圖像中前後兩個圖像上對應的兩個特徵點構成，該原圖像為壓縮前的圖像；根據每對原圖像中特徵點對的位置資訊，確定每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊；根據n對原圖像中後一個圖像相對於前一個圖像的位置變換資訊，獲取第m對原圖像中前一個圖像對應的變形資訊，其中，n和m為正整數，m不大於n；根據第m對原圖像中前一個圖像對應的變形資訊，對第m對原圖像中前一個圖像變形，得到去除抖動後的第m對原圖像中前一個圖像。
可選的，還包括：將原圖像儲存在第一陣列；將每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊儲存在第二陣列。
可選的，該根據n對原圖像中後一個圖像相對於前一個圖像的位置變換資訊，獲取第m對原圖像中前一個圖像對應的變形資訊步驟包括：在該第一陣列儲存的圖像達到第一數量時，以及在該第二陣列儲存的位置變換資訊達到第一數量時，根據n對原圖像中後一個圖像相對於前一個圖像的位置變換資訊，獲取第m對原圖像中前一個圖像對應的變形資訊。
可選的，在該獲取第一對原圖像中前一個圖像對應的變形資訊步驟之後，還包括：再次向第一陣列儲存圖像前，將第一陣列隊首的圖像取出；以及再次向第二陣列儲存位置變換資訊前，將第二陣列隊首的位置變換資訊取出。
可選的，還包括：將每對原圖像壓縮第一倍數；確定壓縮後的每對圖像中每個圖像上的特徵點；將壓縮後的每對圖像中前後兩個圖像上對應的兩個特徵點確定為一個特徵點對；確定壓縮後的每對圖像中特徵點對的位置資訊。
可選的，該根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊步驟包括：將壓縮後的每對圖像中特徵點對的位置資訊擴大第一倍數，得到每對原圖像中特徵點對的位置資訊。
可選的，該根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊步驟包括：將每對原圖像中前後兩個圖像分區；根據每對原圖像中相應分區中特徵點對的位置資訊，確定每對原圖像中後一個圖像相應分區相對於前一個圖像相應分區的位置變換資訊；根據每對原圖中後一個圖像相應分區相對於前一個圖像相應分區的位置變換資訊，確定每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊。
可選的，該位置資訊為坐標，該位置變換資訊為變換矩陣，該變形資訊為變形矩陣。
可選的，該根據第m對原圖像中前一個圖像對應的變形資訊，對第m對原圖像中前一個圖像變形步驟包括：根據第m對原圖像中前一個圖像對應的變形矩陣，對第m對原圖像中前一個圖像分區變形；裁剪變形後第m對原圖像中前一個圖像的邊緣。
本發明還提出一種去除視訊抖動的裝置，該裝置包括：位置資訊獲取第一單元，用於根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊，其中，一個特徵點對由每對圖像中前後兩個圖像上對應的兩個特徵點構成，該原圖像為壓縮前的圖像；位置變換資訊獲取單元，用於根據每對原圖像中特徵點對的位置資訊，確定每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊；變形資訊獲取單元，用於根據n對原圖像中後一個圖像相對於前一個圖像的位置變換資訊，獲取第m對原圖像中前一個圖像對應的變形資訊，其中，n和m為正整數，m不大於n；變形處理單元，用於根據第m對原圖像中前一個圖像對應的變形資訊，對第m對原圖像中前一個圖像變形，得到去除抖動後的第m對原圖像中前一個圖像。
可選的，該裝置還包括：圖像儲存單元，用於將原圖像儲存在第一陣列；位置變換資訊儲存單元，用於將每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊儲存在第二陣列。
可選的，該裝置還包括：壓縮單元，用於將每對原圖像壓縮第一倍數；特徵點確定單元，用於確定壓縮後的每對圖像中每個圖像上的特徵點；特徵點對確定單元，用於將壓縮後的每對圖像中前後兩個圖像上對應的兩個特徵點確定為一個特徵點對；位置資訊獲取第二單元，用於確定壓縮後的每對圖像中特徵點對的位置資訊。
可選的，該位置變換資訊獲取單元包括：圖像分區子單元，用於將每對原圖像中的前後每個圖像分區；位置變換資訊獲取第一子單元，用於根據每對原圖像中相應分區中各特徵點對的位置資訊，確定每對原圖像中後一個圖像的相應分區到前一個圖像的相應分區的位置變換資訊；位置變換資訊獲取第二子單元，用於根據每對原圖中後一個圖像的相應分區到前一個圖像的相應分區的位置變換資訊，確定每對原圖像中後一個圖像到前一個圖像的位置變換資訊。
可選的，該變形處理單元包括：變形子單元，用於根據第m對原圖像中前一個圖像對應的變形矩陣，對第m對原圖像中前一個圖像分區變形；裁剪子單元，用於裁剪變形後第m對原圖像中前一個圖像的邊緣。
本發明還提出一種電子設備，該電子設備包括：處理器；記憶體，用於儲存去除視訊抖動的程式，該程式在被該處理器讀取執行時，執行如下操作：根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊，其中，一個特徵點對由每對圖像中前後兩個圖像上對應的兩個特徵點構成，該原圖像為壓縮前的圖像；根據每對原圖像中特徵點對的位置資訊，確定每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊；根據n對原圖像中後一個圖像相對於前一個圖像的位置變換資訊，獲取第m對原圖像中前一個圖像對應的變形資訊，其中，n和m為正整數，m不大於n；根據第m對原圖像中前一個圖像對應的變形資訊，對第m對原圖像中前一個圖像變形，得到去除抖動後的第m對原圖像中前一個圖像。
本發明還提出一種電腦可讀儲存介質，其上儲存有去除視訊抖動的程式，該程式被處理器讀取執行時，執行如下操作：根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊，其中，一個特徵點對由每對圖像中前後兩個圖像上對應的兩個特徵點構成，該原圖像為壓縮前的圖像；根據每對原圖像中特徵點對的位置資訊，確定每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊；根據n對原圖像中後一個圖像相對於前一個圖像的位置變換資訊，獲取第m對原圖像中前一個圖像對應的變形資訊，其中，n和m為正整數，m不大於n；根據第m對原圖像中前一個圖像對應的變形資訊，對第m對原圖像中前一個圖像變形，得到去除抖動後的第m對原圖像中前一個圖像。
本發明提出的去除視訊抖動的技術方案，首先根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊，由於原圖像壓縮後會變小，電子設備進行各項處理會比較快，因此採取該種技術手段可以對每個採集到的圖像實時地獲取該圖像上各個特徵點對的位置資訊。當實時地獲取到每對圖像上特徵點對的位置資訊之後，相應地實時地根據每對原圖像中特徵點對的位置資訊，確定每對原圖像中後一個圖像到前一個圖像的位置變換資訊。當獲得了n對原圖像中後一個圖像到前一個圖像的位置變換資訊之後，獲取第m對原圖像中前一個圖像對應的變形資訊，並根據該第m原圖像中前一個圖像對應的變形資訊，對該前一個圖像進行變形，得到去除抖動後的該前一個圖像。以此類推，對該前一個圖像之後的其他圖像依次變形、去抖，從而做到實時去抖。同時，該技術方案在實時去抖的同時還不依賴於其他輔助設備，具有較大的便利性，解決了現有技術中無法實時去抖或實時去抖時需要借助外在陀螺儀的技術問題。
在下面的描述中闡述了很多具體細節以便於充分理解本發明。但是本發明能夠以很多不同於在此描述的其它方式來實施，本領域技術人員可以在不違背本發明內涵的情況下做類似推廣，因此本發明不受下面公開的具體實施的限制。
本發明提供一種去除視訊抖動的方法，圖1是本發明提供的去除視訊抖動的方法的一個實施例的流程。下面結合圖1示出的去除視訊抖動的方法的一個實施例的流程來闡述本發明提供的去除視訊抖動的方法的技術方案。
一段時長的視訊是由很多幀快速連續變動的圖像形成的。當拍攝視訊時，由於視訊採集設備與景物之間的相對運動會使得拍攝出的快速變動的圖像之間存在較大位移，視訊因此會出現“抖動”的現象。本發明旨在解決實時地去除視訊的抖動問題。
圖1示出的去除視訊抖動的方法包括：
步驟S101，根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊，其中，一個特徵點對由每對圖像中前後兩個圖像上對應的兩個特徵點構成。
該步驟S101是藉由壓縮後的每對圖像中特徵點對的位置資訊，來確定壓縮前每對原圖像中特徵點對的位置資訊。因此在步驟S101之前，可以包括步驟S100：獲取壓縮後的每對圖像中特徵點對的位置資訊。
步驟S100具體可以包括以下步驟：
步驟S100-1，將原圖像儲存成第一陣列。
當使用視訊拍攝設備在一段時長內拍攝到多幀圖像後，將該多幀圖像按先後次序排成第一陣列，每相鄰兩幀圖像為一對圖像，其中次序在先的為前一個圖像，次序在後的為後一個圖像。該陣列可以是具體在圖像緩衝器中實現。圖像緩衝器是指電腦系統中專門用來存放正在合成或顯示的圖像的記憶體，圖4例示了圖像緩衝器的示意圖。
步驟S100-2，將每對原圖像壓縮第一倍數。
在對一段時長視訊中的多幀圖像快速去除抖動的過程中，可以將原圖像進行壓縮第一倍數，該倍數可以是預設值。壓縮後的圖像相對於壓縮前的圖像更小第一倍數，電子設備處理起來會更快，使得對每採集到新圖像並壓縮後，就能快速地進行後續步驟，比如：確定該新圖像上的特徵點以及各特徵點的位置資訊。見圖2，圖2中右邊兩個圖像為壓縮後的上一幀圖像與壓縮後的當前幀圖像。左邊壓縮前的上一幀及當前幀圖像的寬、高會比右邊壓縮後的當前幀圖像及上一幀圖像的寬、高要小第一倍數。
步驟S100-3，確定壓縮後的每對圖像中前後每個圖像上的特徵點。
特徵點，指的是圖像上能夠表徵所拍攝景物輪廓、外形等特徵的一系列像素點。通常，這一系列點會有比較明顯的特徵，比如灰度值較大，也就是該點處圖像顏色較深，就可以將該點確定為特徵點。例如，圖2中壓縮後的當前幀上的點P如果可以表徵所拍攝景物的特徵，則該點P就可以作為壓縮後當前幀圖像上的特徵點。
步驟S100-4，將壓縮後的每對圖像中前後每個圖像上相對應的兩個特徵點確定為一個特徵點對。
前後每個圖像上都有各自的一系列若干特徵點，其中，前一個圖像上的某個特徵點，在後一個圖像上可能有與其相對應的特徵點。比如，這兩個相對應的特徵點都表徵的圖像上所拍攝景物的某個點，則這兩個相對應的特徵點構成一個特徵點對。見圖2中，壓縮後的當前幀上的特徵點P與壓縮後的上一幀圖像上特徵點P，兩者均表徵所拍攝景物的某個相同的特徵點，那麼這兩個相對應的特徵點構成一個特徵點對。
步驟S100-5，確定壓縮後的每對圖像中特徵點對的位置資訊。
特徵點對的位置資訊，指的是相對應的兩個特徵點對在相應圖像中的相對位置，該位置資訊可以是特徵點的在相應圖像上的坐標。例如，圖2中壓縮後的當前幀上特徵點P的位置坐標為(u,v)。另外，壓縮後的上一幀圖像上相對應特徵點P也有坐標值。這兩個特徵點在各自圖像上的位置資訊就是這一對圖像上一個特徵點對的位置資訊。壓縮後的前後相鄰的兩個圖像上存在多個特徵點對，因此可以獲取前後相鄰的圖像上多個特徵點對的位置資訊。
執行步驟S100後，也就是獲取到壓縮後的每對圖像中特徵點對的位置資訊步驟之後，可以執行步驟S101：根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊。
由於壓縮後的當前幀圖像以及上一幀圖像都是由壓縮前的原圖像壓縮第一倍數而來，在獲取到壓縮後的每對圖像中特徵點對的位置資訊之後，也就是獲得壓縮後每對圖像上各個圖像上特徵點的位置資訊之後，只要將壓縮後每對圖像上各個圖像上特徵點的位置資訊再擴大第一倍數，即可得到壓縮前每對圖像中各個圖像上特徵點的位置資訊，也就是可得到每對圖像中特徵點構成的特徵點對的位置資訊。例如，圖2中將壓縮後的當前中圖像上特徵點P的坐標(u,v)擴大第一倍數，即可得到壓縮前當前幀圖像上特徵點P的坐標(su,sv)。同理，將壓縮後上1幀圖像上特徵點P的坐標擴大第一倍數，也可以得到壓縮前上1幀圖像上特徵點P的坐標。壓縮後當前幀與壓縮後上1幀中兩個相對應的特徵點P構成壓縮後當前幀與上1幀圖像中的特徵點對P。壓縮前當前幀與壓縮前上1幀中兩個相對應的特徵點P構成壓縮前當前幀與上1幀中的特徵點對P。
步驟S102，根據每對原圖像中特徵點對的位置資訊，確定每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊。
在本發明中，步驟S102可以藉由將每對原圖像分成多個分區，當前幀圖像上某一分區到上一幀圖像上相對應的某一分區的位置變換資訊確定之後，被分成的若干對應的各分區的位置變換資訊組合起來就是每對圖像中當前幀圖像到前一幀圖像的位置變換資訊。
具體地，步驟S102可以包括以下步驟：
步驟S102-1，將每對原圖中的前後每個圖像分區；如圖3示例所示，將當前幀圖像與上一幀圖像都均分成六個分區。其中當前幀圖像中左上角分區中示例了4個特徵點：
，上1幀圖像上也示例了4個相對應的特徵點
。
步驟S102-2，根據每對原圖中相應分區中各特徵點對的位置資訊，確定每對原圖中後一個圖像的相應分區到前一個圖像的相應分區的位置變換資訊；
由於前後兩個圖像存在相對移動，所以後一個圖像上特徵點的位置資訊與前一個圖像上相應特徵點的位置資訊不同，後一個圖像上特徵點的位置與前一個圖像上相應特徵點的位置資訊差異，就是後一個圖像上特徵點到前一個圖像上相應特徵點的位置變換資訊。後一個圖像上相應分區的各特徵點的位置資訊到前一個圖像上相應分區的各相應特徵點的位置資訊之間的差異，就是後一個原圖像相應分區到前一個原圖像相應分區的位置變換資訊。例如，圖3中的上一幀圖像示例有4個特徵點
這4個特徵點在當前幀圖像上分別對應著相應的4個特徵點。如前文所述，上一幀圖像上的4個特徵點與當前幀圖像上4個特徵點都表徵所拍攝景物的相同的特徵，所以前後兩個圖像上的4個點相互對應構成4個特徵點對。在上1幀圖像左上角分區示例有4個特徵點的情況下，這4個特徵點的位置資訊構成上1幀圖像上左上角分區對應的矩陣。同理，當前幀圖像上4個點的位置資訊構成當前幀圖像上左上角分區的對應的矩陣。由當前幀上左上角分區對應的矩陣變換到上一幀圖像上左上角分區對應的矩陣，存在一個變換矩陣，這一變換矩陣就是當前幀圖像上左上角分區到上1幀圖像上左上角分區的位置變換資訊或位置變換矩陣。圖3中，例示了當前幀圖像中左上角分區到上1幀圖像中左上角分區的位置變換資訊或位置變換矩陣
。也就是當前幀圖像中左上角中各特徵點對應的位置資訊或矩陣乘以位置變換矩陣便可以計算出上1幀圖像中左上角各特徵點對應的位置資訊。當然，當前幀圖像上左上角分區中的特徵點
乘以中相應位置的數值也能得到上1幀圖像上左上角分區中對應的特徵點
的位置資訊。同理，當前幀圖像上左下角分區到上1幀圖像上左下角分區的位置變換資訊可以表示為
。其他4個相互對應的分區相互之間的位置變換資訊則依次可以表示為
、
、
、
。
步驟S102-3，根據每對原圖中後一個原圖像的相應分區相對於前一個原圖像的相應分區的位置變換資訊，確定每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊。
基於步驟S102-2已經得到了當前幀圖像各分區到上1幀圖像各相應分區的位置變換資訊
、、
、，則該各分區對應的位置變換資訊組合起來便可以表徵當前幀圖像到上一幀圖像的位置變換資訊，圖3中已經例示的從當前幀到上1幀的分區變換矩陣就是當前幀圖像到上1幀圖像的位置變換資訊。
步驟S102-4，將各對原圖像中後一個圖像相對於前一個圖像的位置變換資訊儲存成第二陣列。
在基於步驟S102-3得到當前幀圖像到上1幀圖像的位置變換資訊之後，可以將該對圖像之間的位置變換資訊儲存到陣列中，該陣列可以命名為第二陣列。該陣列具體可以由分區變換陣緩衝器具體儲存。分區變換陣緩衝器可以是電腦系統中專門用來存放變換矩陣的記憶體，圖4例示了分區變換陣緩衝器的示意圖。
步驟S103，根據n對原圖像中後一個圖像相對於前一個圖像的位置變換資訊，獲取第m對原圖像中前一個圖像對應的變形資訊，其中，n、m為正整數，m不大於n。
下面舉例說明如何實現步驟S103，我們以當m=1時為例，也就是如何獲取第1對原圖像中前一個個圖像對應的變形資訊。要獲取第1對原圖像中前一個圖像對應的變形資訊，需要利用變形矩陣迭代優化器中的原始路徑緩衝器、優化路徑暫存器、優化路徑緩衝器儲存的位置資訊進行處理，下面分別介紹各緩衝器在本步驟中所起的作用。
見圖5，圖5中分區變換陣緩衝器中儲存的是後一個圖像相對於前一個圖像的位置變換資訊。該分區變換陣緩衝器能夠儲存一定數量的圖像之間的位置變換資訊。該一定數量的圖像之間的位置變換資訊按產生的先後順序儲存，後產生的圖像之間的位置變換資訊排列在該分區變換陣緩衝器的隊尾。圖5中例示的分區變換陣緩衝器能夠儲存n對圖像之間對應的位置變換資訊，也就是儲存了n個位置變換資訊或位置變換矩陣。其中圖5中最右側的一組分區變換陣代表圖像採集器最先採集到的第1個圖像與第2個圖像之間的位置變換矩陣，依次類推，圖5中最左邊的一組分區變換矩陣代表最後一個圖像到其前1個圖像之間的位置變換矩陣。
圖5中所示的分區變換陣緩衝器具有固定的長度，也就是最多能儲存n個位置變換資訊。相應地，圖4中的圖像緩衝器也具有固定的長度，並且該圖像緩衝器的長度與分區變換陣緩衝器的長度相同，也就是該圖像緩衝器最多能存n個圖像。當該分區變換陣緩衝器已經存滿了n個位置變換資訊或位置變換矩陣後，同時當圖像緩衝器已經存滿了n個圖像時，觸發以下步驟：獲取第一對原圖像中前一個圖像對應的變形資訊。例如，圖4中例示的圖像緩衝器中第一陣列可以儲存n個圖像，最先獲取的第1個圖像與最先獲取的第二個圖像為第1對圖像，該第1對圖像在圖像緩衝器中的序號為n-1與n-2。獲取第一對原圖像中前一個圖像對應的變形資訊，也就是獲取圖像緩衝器中序號為n-1的那幀圖像對應的變形資訊。在所述獲取第一對原圖像中前一個圖像對應的變形資訊步驟之後，還可以進行以下步驟：再次向第一陣列儲存圖像前，將第一陣列隊首的圖像取出；以及再次向第二陣列儲存位置變換資訊前，將第二陣列隊首的位置變換資訊取出。經過將隊首圖像取出圖像緩衝器以及將隊首位置變換資訊取出分區變換陣緩衝器，可以為新圖像儲存以及新的位置變換資訊的儲存空出位置。
圖5中，
表示儲存位置變換資訊的第二陣列中的隊首位置變換資訊中的第1個分區位置變換資訊，
表示第2個分區位置變換資訊，依次類推
表示第6個分區的位置變換資訊。同理
表示儲存位置變換資訊的第二陣列中隊尾位置變換資訊的第1個分區位置變換資訊，
表示第2個分區位置變換資訊，依次類推
表示第6個分區的位置變換資訊。
圖5中，原始路徑緩衝器儲存的是對第二陣列中最新儲存的位置變換資訊中某個分區位置變換資訊與之前在先儲存的各位置變換資訊中相應分區位置變換資訊的乘積，也就是
，其中
表示對第二陣列中序號為(i+1)的位置變換資訊中的第j個分區位置變換資訊與序號為i的位置變換資訊中的第j個分區位置變換資訊…一直到序號為0的位置變換資訊中的第j個分區位置變換資訊取乘積得到的。例如，當i=n-1時，
等於
與
…一直到
的乘積。
圖5中，優化路徑暫存器儲存的是加權平均值
，加權平均值藉由對以下三者取加權平均值得到：圖像陣列裡序號為i的圖像上與第j分區相鄰分區的位置資訊、與序號為i圖像上相鄰幀圖像上第j分區的位置資訊、原始路徑緩衝器中的。該加權平均值用表示，每當得到該加權平均值後，該先暫存在優化路徑緩衝器中，然後覆蓋到到優化路徑緩衝器中，並記作
。顯然，當i=n-1時，
則表示該值是由以下三項加權平均得到的：第1陣列裡隊首圖像上與第j分區相鄰分區的位置資訊、隊首幀圖像前1幀圖像上第j分區的位置資訊、原始路徑緩衝器中的
。
將
這一乘積結果記作
，就表示隊首圖像各分區對應的變形資訊。例如，當j=1時，
就表示隊首圖像第1分區對應的變形資訊，同理，
就表示隊首圖像第2分區對應的變形資訊…依次類推，假如隊首圖像被分成6個分區，則
就表示隊首圖像第6分區對應的變形資訊。、
組合起來就構成圖像緩衝器中隊首圖像對應的變形資訊，見圖6所示變形矩陣優化迭代器所得到的隊首圖像對應的變形資訊。
在經過步驟S103獲取到第一對圖像中前個圖像的變形資訊之後，就可以利用該變形資訊對該前個圖像進行變形處理，參見步驟S104。
步驟S104，根據第m對原圖像中前一個圖像對應的變形資訊，對第m對原圖像中前一個圖像變形，得到去除抖動後的第m對原圖像中前一個圖像。
繼續以第一對圖像中前一個圖像為例，當基於步驟S103示例的步驟得到1對圖像中前1個圖像對應的變形資訊之後，在變形資訊用變形矩陣進行表示的情況下，根據第一對原圖像中前一個圖像對應的變形矩陣，對該前一個圖像分區變形，也就是利用步驟S103所得到的變形資訊對圖像進行位置資訊調整。例如，圖6中隊首圖像的第3分區的變形矩陣中存在特徵點P的位置資訊，該變形矩陣中存在的特徵點P的位置資訊與隊首圖像上第3分區上特徵點P的位置資訊存在一定的差異。為了消除該位置差異，將隊首圖像上的點P調整至與第3分區變形資訊中的特徵點P的位置重合，即可消除位置差異。同理，隊首圖像上其他的分區的特徵點的位置也應調整至變形資訊中相對應特徵點的位置，如此便可得到圖6中所示調整後的圖像。在將隊首圖像調整位置資訊後，將變形資訊之外的圖像裁剪掉，便可以達到去除位置差異的效果。
本發明提出的去除視訊抖動的技術方案，首先根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊，由於原圖像壓縮後會變小，電子設備進行各項處理會比較快，因此採取該種技術手段可以對每個採集到的圖像實時地獲取該圖像上各個特徵點對的位置資訊。當實時地獲取到每個圖像上特徵點對的位置資訊之後，相應地實時地根據每對原圖像中特徵點對的位置資訊，確定每對原圖像中後一個圖像到前一個圖像的位置變換資訊。當獲得了n對原圖像中後一個圖像到前一個圖像的位置變換資訊之後，獲取第一對原圖像中前一個圖像對應的變形資訊，並根據該第一對原圖像中前一個圖像對應的變形資訊，對該前一個圖像進行變形，得到去除抖動後的該前一個圖像。以此類推，對該前一個圖像之後的其他圖像依次變形、去抖，從而做到實時去抖。同時，該技術方案在實時去抖的同時還不依賴於其他輔助設備，具有較大的便利性，解決了現有技術中無法實時去抖或實時去抖時需要借助外在陀螺儀的技術問題。
本發明還提供一種去除視訊抖動的裝置，圖7是本發明提供的一種去除視訊抖動的裝置的一個實施例的結構示意圖。該裝置實施例與圖1所示的方法實施例相對應，所以描述得比較簡單，相關的部分請參見上述提供的方法實施例的對應說明即可。該裝置具體可以應用於各種電子設備中。下面描述的裝置實施例僅僅是示意性的。
圖7示出的去除視訊抖動的裝置，包括：位置資訊獲取第一單元701，用於根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊，其中，一個特徵點對由每對圖像中前後兩個圖像上對應的兩個特徵點構成，該原圖像為壓縮前的圖像；位置變換資訊獲取單元702，用於根據每對原圖像中特徵點對的位置資訊，確定每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊；變形資訊獲取單元703，用於根據n對原圖像中後一個圖像相對於前一個圖像的位置變換資訊，獲取第m對原圖像中前一個圖像對應的變形資訊，其中，n和m為正整數，m不大於n；變形處理單元704，用於根據第m對原圖像中前一個圖像對應的變形資訊，對第m對原圖像中前一個圖像變形，得到去除抖動後的第m對原圖像中前一個圖像。
可選的，該裝置還包括：圖像儲存單元，用於將原圖像儲存在第一陣列；位置變換資訊儲存單元，用於將每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊儲存在第二陣列。
可選的，該裝置還包括：壓縮單元，用於將每對原圖像壓縮第一倍數；特徵點確定單元，用於確定壓縮後的每對圖像中每個圖像上的特徵點；特徵點對確定單元，用於將壓縮後的每對圖像中前後兩個圖像上對應的兩個特徵點確定為一個特徵點對；位置資訊獲取第二單元，用於確定壓縮後的每對圖像中特徵點對的位置資訊。
可選的，該位置變換資訊獲取單元702包括：圖像分區子單元，用於將每對原圖像中的前後每個圖像分區；位置變換資訊獲取第一子單元，用於根據每對原圖像中相應分區中各特徵點對的位置資訊，確定每對原圖像中後一個圖像的相應分區到前一個圖像的相應分區的位置變換資訊；位置變換資訊獲取第二子單元，用於根據每對原圖中後一個圖像的相應分區到前一個圖像的相應分區的位置變換資訊，確定每對原圖像中後一個圖像到前一個圖像的位置變換資訊。
可選的，該變形處理單元704包括：變形子單元，用於根據第m對原圖像中前一個圖像對應的變形矩陣，對第m對原圖像中前一個圖像分區變形；裁剪子單元，用於裁剪變形後第m對原圖像中前一個圖像的邊緣。
本發明還提供一種去除視訊抖動的電子設備的一個實施例，該實施例中的電子設備包括：處理器；記憶體，用於儲存去除視訊抖動的程式，該程式在被該處理器讀取執行時，執行如下操作：根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊，其中，一個特徵點對由每對圖像中前後兩個圖像上對應的兩個特徵點構成，該原圖像為壓縮前的圖像；根據每對原圖像中特徵點對的位置資訊，確定每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊；根據n對原圖像中後一個圖像相對於前一個圖像的位置變換資訊，獲取第m對原圖像中前一個圖像對應的變形資訊，其中，n和m為正整數，m不大於n；根據第m對原圖像中前一個圖像對應的變形資訊，對第m對原圖像中前一個圖像變形，得到去除抖動後的第m對原圖像中前一個圖像。相關技術特徵可以參考方法實施例，這裡不再贅述。
本發明還提出一種電腦可讀儲存介質，由於電腦可讀儲存介質實施例基本相似於方法實施例，所以描述得比較簡單，相關的部分請參見上述提供的方法實施例的對應說明即可。下面描述的電腦可讀儲存介質實施例僅僅是示意性的。
本發明還提供的一種電腦可讀介質，該電腦可讀介質可以是上述實施例中描述的裝置中所包含的；也可以是單獨存在，而未裝配入該裝置中。上述電腦可讀介質承載有一個或者多個程式，當上述一個或者多個程式被該裝置執行時，使得該裝置：根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊，其中，一個特徵點對由每對圖像中前後兩個圖像上對應的兩個特徵點構成，該原圖像為壓縮前的圖像；根據每對原圖像中特徵點對的位置資訊，確定每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊；根據n對原圖像中後一個圖像相對於前一個圖像的位置變換資訊，獲取第m對原圖像中前一個圖像對應的變形資訊，其中，n和m為正整數，m不大於n；根據第m對原圖像中前一個圖像對應的變形資訊，對第m對原圖像中前一個圖像變形，得到去除抖動後的第m對原圖像中前一個圖像。相關技術特徵可以參考方法實施例，這裡不再贅述。
本發明雖然以較佳實施例公開如上，但其並不是用來限定本發明，任何本領域技術人員在不脫離本發明的精神和範圍內，都可以做出可能的變動和修改，因此本發明的保護範圍應當以本發明申請專利範圍所界定的範圍為準。
在一個典型的配置中，計算設備包括一個或多個處理器(CPU)、輸入/輸出介面、網路介面和內部記憶體。
內部記憶體可能包括電腦可讀介質中的非永久性記憶體，隨機存取記憶體(RAM)和/或非揮發性內部記憶體等形式，如唯讀記憶體(ROM)或快閃記憶體(flash RAM)。內部記憶體是電腦可讀介質的示例。
1、電腦可讀介質包括永久性和非永久性、可移動和非可移動媒體可以由任何方法或技術來實現資訊儲存。資訊可以是電腦可讀指令、資料結構、程式的模組或其他資料。電腦的儲存介質的例子包括，但不限於相變內部記憶體(PRAM)、靜態隨機存取記憶體(SRAM)、動態隨機存取記憶體(DRAM)、其他類型的隨機存取記憶體(RAM)、唯讀記憶體(ROM)、電可抹除可程式化唯讀記憶體(EEPROM)、快閃記憶體或其他內部記憶體技術、唯讀光碟唯讀記憶體(CD-ROM)、數位多功能光碟(DVD)或其他光學儲存、磁盒式磁帶，磁帶磁磁碟儲存或其他磁性儲存設備或任何其他非傳輸介質，可用於儲存可以被計算設備存取的資訊。按照本文中的界定，電腦可讀介質不包括非暫存電腦可讀媒體(transitory media)，如調變的資料信號和載波。
2、本領域技術人員應明白，本發明的實施例可提供為方法、系統或電腦程式產品。因此，本發明可採用完全硬體實施例、完全軟體實施例或結合軟體和硬體方面的實施例的形式。而且，本發明可採用在一個或多個其中包含有電腦可用程式代碼的電腦可用儲存介質(包括但不限於磁碟記憶體、CD-ROM、光學記憶體等)上實施的電腦程式產品的形式。
S101~S104‧‧‧步驟
701‧‧‧原圖像中特徵點對的位置資訊獲取單元
702‧‧‧位置變換資訊獲取單元
703‧‧‧變形資訊獲取單元
704‧‧‧變形處理單元
圖1是本發明提供的去除視訊抖動的方法的一個實施例的流程圖；
圖2是本發明提供的去除視訊抖動的方法中所涉及的特徵點的示意圖；
圖3是本發明提供的去除視訊抖動的方法中所涉及的分區變換陣的示意圖；
圖4是本發明提供的去除視訊抖動的方法中所涉及的各圖像與相應分區變換陣對應關係的示意圖；
圖5是本發明提供的去除視訊抖動的方法中所涉及的獲取變形矩陣時所應用到的各個矩陣的示意圖；
圖6是本發明提供的去除視訊抖動的方法中所涉及的對圖像變形處理的示意圖；
圖7是本發明提供的去除視訊抖動的裝置的一個實施例的示意圖。
Claims (16)
- 一種去除視訊抖動的方法，其特徵在於，該方法包括： 根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊，其中，一個特徵點對由每對圖像中前後兩個圖像上對應的兩個特徵點構成，該原圖像為壓縮前的圖像； 根據每對原圖像中特徵點對的位置資訊，確定每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊； 根據n對原圖像中後一個圖像相對於前一個圖像的位置變換資訊，獲取第m對原圖像中前一個圖像對應的變形資訊，其中，n和m為正整數，m不大於n； 根據第m對原圖像中前一個圖像對應的變形資訊，對第m對原圖像中前一個圖像變形，得到去除抖動後的第m對原圖像中的前一個圖像。
- 根據請求項1所述的方法，其中，還包括：將原圖像儲存在第一陣列； 將每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊儲存在第二陣列。
- 根據請求項2所述的方法，其中，該根據n對原圖像中後一個圖像相對於前一個圖像的位置變換資訊，獲取第m對原圖像中前一個圖像對應的變形資訊步驟包括： 在該第一陣列儲存的圖像達到第一數量時，以及在該第二陣列儲存的位置變換資訊達到第一數量時，根據n對原圖像中後一個圖像相對於前一個圖像的位置變換資訊，獲取第m對原圖像中前一個圖像對應的變形資訊。
- 根據請求項3所述的方法，其中，在該獲取第一對原圖像中前一個圖像對應的變形資訊步驟之後，還包括： 再次向第一陣列儲存圖像前，將第一陣列隊首的圖像取出；以及 再次向第二陣列儲存位置變換資訊前，將第二陣列隊首的位置變換資訊取出。
- 根據請求項1所述的方法，其中，還包括： 將每對原圖像壓縮第一倍數； 確定壓縮後的每對圖像中每個圖像上的特徵點； 將壓縮後的每對圖像中前後兩個圖像上對應的兩個特徵點確定為一個特徵點對； 確定壓縮後的每對圖像中特徵點對的位置資訊。
- 根據請求項5所述的方法，其中，該根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊步驟包括： 將壓縮後的每對圖像中特徵點對的位置資訊擴大第一倍數，得到每對原圖像中特徵點對的位置資訊。
- 根據請求項3所述的方法，其中，該根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊步驟包括： 將每對原圖像中前後兩個圖像分區； 根據每對原圖像中相應分區中特徵點對的位置資訊，確定每對原圖像中後一個圖像相應分區相對於前一個圖像相應分區的位置變換資訊； 根據每對原圖中後一個圖像相應分區相對於前一個圖像相應分區的位置變換資訊，確定每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊。
- 根據請求項7所述的方法，其中，該位置資訊為坐標，該位置變換資訊為變換矩陣，該變形資訊為變形矩陣。
- 根據請求項8所述的方法，其中，該根據第m對原圖像中前一個圖像對應的變形資訊，對第m對原圖像中前一個圖像變形步驟包括： 根據第m對原圖像中前一個圖像對應的變形矩陣，對第m對原圖像中前一個圖像分區變形； 裁剪變形後第m對原圖像中前一個圖像的邊緣。
- 一種去除視訊抖動的裝置，其特徵在於，該裝置包括： 位置資訊獲取第一單元，用於根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊，其中，一個特徵點對由每對圖像中前後兩個圖像上對應的兩個特徵點構成，該原圖像為壓縮前的圖像； 位置變換資訊獲取單元，用於根據每對原圖像中特徵點對的位置資訊，確定每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊； 變形資訊獲取單元，用於根據n對原圖像中後一個圖像相對於前一個圖像的位置變換資訊，獲取第m對原圖像中前一個圖像對應的變形資訊，其中，n和m為正整數，m不大於n； 變形處理單元，用於根據第m對原圖像中前一個圖像對應的變形資訊，對第m對原圖像中前一個圖像變形，得到去除抖動後的第m對原圖像中前一個圖像。
- 根據請求項10所述的裝置，其中，該裝置還包括： 圖像儲存單元，用於將原圖像儲存在第一陣列； 位置變換資訊儲存單元，用於將每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊儲存在第二陣列。
- 根據請求項10所述的裝置，其中，該裝置還包括： 壓縮單元，用於將每對原圖像壓縮第一倍數； 特徵點確定單元，用於確定壓縮後的每對圖像中每個圖像上的特徵點； 特徵點對確定單元，用於將壓縮後的每對圖像中前後兩個圖像上對應的兩個特徵點確定為一個特徵點對； 位置資訊獲取第二單元，用於確定壓縮後的每對圖像中特徵點對的位置資訊。
- 根據請求項10所述的裝置，其中，該位置變換資訊獲取單元包括： 圖像分區子單元，用於將每對原圖像中的前後每個圖像分區； 位置變換資訊獲取第一子單元，用於根據每對原圖像中相應分區中各特徵點對的位置資訊，確定每對原圖像中後一個圖像的相應分區到前一個圖像的相應分區的位置變換資訊； 位置變換資訊獲取第二子單元，用於根據每對原圖中後一個圖像的相應分區到前一個圖像的相應分區的位置變換資訊，確定每對原圖像中後一個圖像到前一個圖像的位置變換資訊。
- 根據請求項10所述的裝置，其中，該變形處理單元包括： 變形子單元，用於根據第m對原圖像中前一個圖像對應的變形矩陣，對第m對原圖像中前一個圖像分區變形； 裁剪子單元，用於裁剪變形後第m對原圖像中前一個圖像的邊緣。
- 一種電子設備，其特徵在於，該電子設備包括： 處理器； 記憶體，用於儲存去除視訊抖動的程式，該程式在被該處理器讀取執行時，執行如下操作： 根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊，其中，一個特徵點對由每對圖像中前後兩個圖像上對應的兩個特徵點構成，該原圖像為壓縮前的圖像； 根據每對原圖像中特徵點對的位置資訊，確定每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊； 根據n對原圖像中後一個圖像相對於前一個圖像的位置變換資訊，獲取第m對原圖像中前一個圖像對應的變形資訊，其中，n和m為正整數，m不大於n； 根據第m對原圖像中前一個圖像對應的變形資訊，對第m對原圖像中前一個圖像變形，得到去除抖動後的第m對原圖像中前一個圖像。
- 一種電腦可讀儲存介質，其上儲存有去除視訊抖動的程式，其特徵在於，該程式被處理器讀取執行時，執行如下操作： 根據壓縮後的每對圖像中特徵點對的位置資訊，確定每對原圖像中特徵點對的位置資訊，其中，一個特徵點對由每對圖像中前後兩個圖像上對應的兩個特徵點構成，該原圖像為壓縮前的圖像； 根據每對原圖像中特徵點對的位置資訊，確定每對原圖像中後一個圖像相對於前一個圖像的位置變換資訊； 根據n對原圖像中後一個圖像相對於前一個圖像的位置變換資訊，獲取第m對原圖像中前一個圖像對應的變形資訊，其中，n和m為正整數，m不大於n； 根據第m對原圖像中前一個圖像對應的變形資訊，對第m對原圖像中前一個圖像變形，得到去除抖動後的第m對原圖像中前一個圖像。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810554266.9A CN110557522A (zh) | 2018-05-31 | 2018-05-31 | 一种去除视频抖动的方法及装置 |
| CN201810554266.9 | 2018-05-31 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| TW202005353A true TW202005353A (zh) | 2020-01-16 |
Family
ID=68697432
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| TW108108594A TW202005353A (zh) | 2018-05-31 | 2019-03-14 | 去除視訊抖動的方法及裝置 |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US11317008B2 (zh) |
| EP (1) | EP3806445A4 (zh) |
| JP (1) | JP7383642B2 (zh) |
| CN (1) | CN110557522A (zh) |
| TW (1) | TW202005353A (zh) |
| WO (1) | WO2019228219A1 (zh) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110557522A (zh) | 2018-05-31 | 2019-12-10 | 阿里巴巴集团控股有限公司 | 一种去除视频抖动的方法及装置 |
| US11134180B2 (en) * | 2019-07-25 | 2021-09-28 | Shenzhen Skyworth-Rgb Electronic Co., Ltd. | Detection method for static image of a video and terminal, and computer-readable storage medium |
| CN113132560B (zh) * | 2019-12-31 | 2023-03-28 | 武汉Tcl集团工业研究院有限公司 | 一种视频处理方法及计算机设备、计算机可读存储介质 |
Family Cites Families (25)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6762758B2 (en) * | 2001-08-23 | 2004-07-13 | Ati Technologies Inc. | System, method, and apparatus for compression of video data using offset values |
| AUPR899401A0 (en) * | 2001-11-21 | 2001-12-13 | Cea Technologies Pty Limited | Method and apparatus for non-motion detection |
| JP2004343483A (ja) | 2003-05-16 | 2004-12-02 | Acutelogic Corp | 手振れ補正装置および方法、手振れ検出装置 |
| US7369741B2 (en) * | 2003-11-17 | 2008-05-06 | Fiber Optics Network Solutions Corp. | Storage adapter with dust cap posts |
| WO2008111169A1 (ja) | 2007-03-13 | 2008-09-18 | Fujitsu Microelectronics Limited | 画像処理装置、画像処理方法、画像処理プログラムおよび記録媒体 |
| US8150191B2 (en) * | 2008-10-14 | 2012-04-03 | Interra Systems Inc. | Method and system for calculating blur artifacts in videos using user perception threshold |
| EP2360669A1 (en) * | 2010-01-22 | 2011-08-24 | Advanced Digital Broadcast S.A. | A digital video signal, a method for encoding of a digital video signal and a digital video signal encoder |
| JP5184574B2 (ja) * | 2010-04-30 | 2013-04-17 | パナソニック株式会社 | 撮像装置、画像処理装置、および画像処理方法 |
| US9041817B2 (en) * | 2010-12-23 | 2015-05-26 | Samsung Electronics Co., Ltd. | Method and apparatus for raster output of rotated interpolated pixels optimized for digital image stabilization |
| US9277129B2 (en) * | 2013-06-07 | 2016-03-01 | Apple Inc. | Robust image feature based video stabilization and smoothing |
| JP6192507B2 (ja) | 2013-11-20 | 2017-09-06 | キヤノン株式会社 | 画像処理装置、その制御方法、および制御プログラム、並びに撮像装置 |
| US9311690B2 (en) * | 2014-03-11 | 2016-04-12 | Adobe Systems Incorporated | Video denoising using optical flow |
| CN103927731B (zh) * | 2014-05-05 | 2017-01-11 | 武汉大学 | 无需pos辅助的低空遥感影像快速自动拼接方法 |
| JP6336341B2 (ja) | 2014-06-24 | 2018-06-06 | キヤノン株式会社 | 撮像装置及びその制御方法、プログラム、記憶媒体 |
| US10447926B1 (en) * | 2015-06-19 | 2019-10-15 | Amazon Technologies, Inc. | Motion estimation based video compression and encoding |
| US10303925B2 (en) * | 2016-06-24 | 2019-05-28 | Google Llc | Optimization processes for compressing media content |
| US9838604B2 (en) * | 2015-10-15 | 2017-12-05 | Ag International Gmbh | Method and system for stabilizing video frames |
| US10425582B2 (en) * | 2016-08-25 | 2019-09-24 | Facebook, Inc. | Video stabilization system for 360-degree video data |
| CN106878612B (zh) * | 2017-01-05 | 2019-05-31 | 中国电子科技集团公司第五十四研究所 | 一种基于在线全变差优化的视频稳定方法 |
| CN107705288B (zh) * | 2017-09-04 | 2021-06-01 | 武汉工程大学 | 伪目标运动强干扰下的危险气体泄漏红外视频检测方法 |
| US10534837B2 (en) * | 2017-11-13 | 2020-01-14 | Samsung Electronics Co., Ltd | Apparatus and method of low complexity optimization solver for path smoothing with constraint variation |
| CN109905590B (zh) * | 2017-12-08 | 2021-04-27 | 腾讯科技（深圳）有限公司 | 一种视频图像处理方法及装置 |
| CN108682036B (zh) * | 2018-04-27 | 2022-10-25 | 腾讯科技（深圳）有限公司 | 位姿确定方法、装置及存储介质 |
| CN110493488B (zh) * | 2018-05-15 | 2021-11-26 | 株式会社理光 | 视频稳像方法、视频稳像装置和计算机可读存储介质 |
| CN110557522A (zh) | 2018-05-31 | 2019-12-10 | 阿里巴巴集团控股有限公司 | 一种去除视频抖动的方法及装置 |
-
2018
- 2018-05-31 CN CN201810554266.9A patent/CN110557522A/zh active Pending
-
2019
- 2019-03-14 TW TW108108594A patent/TW202005353A/zh unknown
- 2019-05-21 EP EP19810675.9A patent/EP3806445A4/en active Pending
- 2019-05-21 JP JP2020563582A patent/JP7383642B2/ja active Active
- 2019-05-21 WO PCT/CN2019/087693 patent/WO2019228219A1/zh unknown
-
2020
- 2020-11-30 US US17/106,682 patent/US11317008B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| US11317008B2 (en) | 2022-04-26 |
| CN110557522A (zh) | 2019-12-10 |
| US20210084198A1 (en) | 2021-03-18 |
| JP2021524960A (ja) | 2021-09-16 |
| EP3806445A4 (en) | 2022-03-23 |
| JP7383642B2 (ja) | 2023-11-20 |
| EP3806445A1 (en) | 2021-04-14 |
| WO2019228219A1 (zh) | 2019-12-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2021088473A1 (en) | Image super-resolution reconstruction method, image super-resolution reconstruction apparatus, and computer-readable storage medium | |
| WO2020001168A1 (zh) | 三维重建方法、装置、设备和存储介质 | |
| TW202005353A (zh) | 去除視訊抖動的方法及裝置 | |
| CN105635588B (zh) | 一种稳像方法及装置 | |
| RU2697928C1 (ru) | Способ сверхразрешения изображения, имитирующего повышение детализации на основе оптической системы, выполняемый на мобильном устройстве, обладающем ограниченными ресурсами, и мобильное устройство, его реализующее | |
| CN112219210B (zh) | 信号处理装置和信号处理方法 | |
| WO2020098721A1 (zh) | 虚拟现实设备的图像呈现方法、装置、设备和计算机存储介质 | |
| CN109194878B (zh) | 视频图像防抖方法、装置、设备和存储介质 | |
| US20190206117A1 (en) | Image processing method, intelligent terminal, and storage device | |
| WO2022247568A1 (zh) | 一种图像恢复方法、装置和设备 | |
| EP2804144A1 (en) | Method and device for processing input image data | |
| US10037622B2 (en) | Virtual terrain alteration systems and related methods | |
| US8155476B2 (en) | Image processing apparatus, image processing method, and program | |
| WO2023160426A1 (zh) | 视频插帧方法、训练方法、装置和电子设备 | |
| NL1025642C2 (nl) | Werkwijze en inrichting voor het reconstrueren van beelden van hoge resolutie. | |
| GB2551426A (en) | Hardware optimisation for generating 360° images | |
| JP2018136793A (ja) | 画像処理装置、画像処理方法及びプログラム | |
| WO2018119565A1 (zh) | 一种桶形畸变图像的矫正重构方法及装置 | |
| JP2008523489A (ja) | 画像サイズを変更する方法および装置 | |
| JP2008113292A (ja) | 動き推定方法，装置，そのプログラムおよびその記録媒体 | |
| CN105427235A (zh) | 一种图像浏览方法及系统 | |
| CN107977923B (zh) | 图像处理方法、装置、电子设备及计算机可读存储介质 | |
| CN113592844A (zh) | 图像畸变矫正方法及装置、终端和存储介质 | |
| CN114723796A (zh) | 一种三维点云生成方法、装置及电子设备 | |
| CN114782251A (zh) | 视频超分方法、装置、电子设备及可读存储介质 |