FI109395B - Förfarande och system för stabilisering av en videobild - Google Patents

Förfarande och system för stabilisering av en videobild Download PDF

Info

Publication number
FI109395B
FI109395B FI20010629A FI20010629A FI109395B FI 109395 B FI109395 B FI 109395B FI 20010629 A FI20010629 A FI 20010629A FI 20010629 A FI20010629 A FI 20010629A FI 109395 B FI109395 B FI 109395B
Authority
FI
Finland
Prior art keywords
image
camera
motion
horizontal
component
Prior art date
Application number
FI20010629A
Other languages
English (en)
Finnish (fi)
Other versions
FI20010629A0 (sv
Inventor
Jarno Tulkki
Original Assignee
Hantro Products Oy
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hantro Products Oy filed Critical Hantro Products Oy
Priority to FI20010629A priority Critical patent/FI109395B/sv
Publication of FI20010629A0 publication Critical patent/FI20010629A0/sv
Priority to PCT/FI2002/000259 priority patent/WO2002078327A1/en
Application granted granted Critical
Publication of FI109395B publication Critical patent/FI109395B/sv

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/527Global motion vector estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6811Motion detection based on the image signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/144Movement detection
    • H04N5/145Movement estimation

Claims (10)

1. Förfarande för att stabilisera en videobild som bildats av pä var-andra följande stillbilder med kamera, omfattande: (704) bestämmande av ätminstone en rörelsevektor för att detektera 5 rörligheten mellan ett block i föregaende bild och ett block i nuvarande bild för kompressering av videobilden; (706) bestämmande av riktning och storlek för kamerans rörelse mellan föregaende bild och nuvarande bild pä basis av ätminstone en rörelsevektor; 10 kännetecknatavatt (702) de enskilda bilderna som utgör videobilden fotograferas med ! en kamera med ett bredare fotograferingsomräde än bildomrädet som används i bilderna; (708) kamerans rörelse förutsägs fortsätta i samma riktning och 15 med samma storlek mellan nuvarande och följande bild som i den kamera-rörelse som definierats mellan föregäende och nuvarande bild; (710) kamerans rörelse mellan nuvarande och följande bild kom-penseras genom att bildomrädet flyttas inom fotograferingsomrädet mot rörel-sen som förutsagts i följande bild med den förutsagda storleken. 20
2. Förfarande enligt patentkrav 1,kännetecknat av att kame rans rörelse kompenseras skilt för rörelsevektorns horisontal- och vertikalkom-... # ponenter.
; ' 3. Förfarande enligt patentkrav 2, kännetecknat av att kame- ’· / rans rörelse identifieras skilt för horisontal- och vertikalkomponenterna pä föl- ' ·: · ’ 25 jande sätt: * * * :: horisontal/vertikalkomponenterna indelas i tre klasser enligt storlek; ett medelvärde bildas för den klass som innehäller flest horison-: ' : tal/vertikalkomponenter, vilket medelvärde anger storleken pä kamerans rörel se i ifrägavarande komponents riktning. 1 | 30
4. Förfarande enligt patentkrav 3, kännetecknat av att indel- , ·, ningen i klasser utförs pä följande sätt: ’ ‘ ett medelvärde för alla horisontal/vertikalkomponenter bildas; I : : den största och minsta horisontal/vertikalkomponenten hämtas; < ' ♦ ,: horisontal/vertikalkomponenterna indelas i tre klasser pä basis av , 35 medelvärdet för alla horisontal/vertikalkomponenter, i en största horisontal/ , vertikalkomponent och en minsta horisontal/vertikalkomponent. » ) »« 22 109395
5. Förfarande enligt patentkrav 4, kännetecknat avatt kame-rans rörelse identifieras skilt för horisontal- och vertikalkomponenterna pä föl-jande sätt: - rörelsevektorns horisontal/vertikalkomponenter anges 5 {vpv2,v3,...,v„} (n Λ - ett medelvärde bildas m = In V »=1 - den minsta komponenten väljs vmin = 111111(^2^3,...,^} - den största komponenten väljs vmax = max{v,,v2,v3,...,vn} - värdeomrädet anges r = (vmax - vmin) / 6 10. tre klasser bildas C, = (v,|m - r < v(. < w + r} C2 = (v,|v,. >m + r} där / = 1,2,...,« - en klass väljs, för vilken gäller |c,|>|c;| där i e {0,1,2} = 0 och jeQli och om en sädan klass inte finns, sa väljs klass Ci 15 - storleken pä kamerans rörelse bildas: ; ; ifall |C,| = 0 och |C0|=|C2| ' sä är komponenten gmv = 0 ' ‘ ί;' annars är komponenten gmv = ΣΚΐν*e c.}/|c1
» · ’': 6. System för att stabilisera en videobild som bildats av pä varandra :· följande stillbilder med kamera, omfattande en kamera (102) för att bilda en vi- 20 deobild av pä varandra följande stillbilder och processeringsmedel (216, 230), : vilka är anordnade: . ’ · ·. att bestämma ätminstone en rörelsevektor för att detektera rörlighe- ten mellan ett block i föregäende bild och ett block i nuvarande bild för kom-: : pressering av videobilden; 23 109395 att bestämma riktning och storlek för kamerans rörelse mellan före-gäende bild och nuvarande bild pä basis av ätminstone en rörelsevektor; kännetecknat av att kameran (102) är anordnad att fotografera de enskilda bilderna som 5 utgör videobilden med ett bredare fotograferingsomräde än bildomradet som används i bilderna; processeringsmedlen (230) är anordnade att förutsäga att kamerans (102) rörelse fortsätter i samma riktning och med samma storlek mellan nuvarande och följande bild som i den kameras (102) rörelse som definierats mel-10 lan föregaende och nuvarande bild; processeringsmedlen (230) är anordnade att kompensera kamerans (102) rörelse mellan nuvarande och följande bild genom att flytta bildomradet inom fotograferingsomrädet mot rörelsen som förutsagts i följande bild med den förutsagda storleken.
7. System enligt patentkrav 6, kännetecknat av att processe ringsmedlen (230) är anordnade att kompensera kamerans rörelse skilt för rö-relsevektorns horisontal- och vertikalkomponenter.
8. System enligt patentkrav 7, kännetecknat av att processeringsmedlen (230) är anordnade att identifiera kamerans rörelse skilt för hori-20 sontal- och vertikalkomponenterna pä följande sätt: horisontal/vertikalkomponenterna indelas i tre klasser enligt storlek; ett medelvärde bildas för den klass som innehäller flest horisontal/ vertikalkomponenter, vilket medelvärde anger storleken pä kamerans rörelse i ifrägavarande komponents riktning. : ;' | 25
9. System enligt patentkrav 8, kännetecknat av att processe- :: ringsmedlen (230) är anordnade att utföra indelningen i klasser pä följande • sätt: ett medelvärde för alla horisontal/vertikalkomponenter bildas; | ·: den största och minsta horisontal/vertikalkomponenten hämtas; 30 horisontal/vertikalkomponenterna indelas i tre klasser pä basis av medelvärdet för alla horisontal/vertikalkomponenter, i en största horisontal/ . , : vertikalkomponent och en minsta horisontal/vertikalkomponent. > * t I..
’ 10. System enligt patentkrav 9, kännetecknat av att proces- ;* seringsmedlen (230) är anordnade att identifiera kamerans rörelse skilt för ho- • 35 risontal- och vertikalkomponenterna pä följande sätt: ; ‘ : - rörelsevektorns horisontal/vertikalkomponenter anges 24 109395 {v1,v29v3,...,v„} (η Λ - ett medelvärde bildas m = ]Tv( In V <=i - den minsta komponenten väljs vmin = min{v,,v2,v3,...,v„} - den största komponenten väljs vmax = maxjv,,v2,v3,...,v„} 5. värdeomrädet anges r = (vmax - vmin) / 6 - tre klasser bildas C0={v,\vi<m-r} Cj = \yj\m - r < v,. < m + r} C2 = {v,|v;. >m + r] där / = 1,2,...,« - en klass väljs, för vilken gäller lC-l>|C;| där i e {0,1,2} = Q och j e Q/i 10 och om en sadan klass inte finns, sä väljs klass Ci - storleken pa kamerans rörelse bildas: I ifall |C,| = Ooch |C„|=|C,| j sä är komponenten gmv = 0 annars är komponenten gmv = {v* |vA e C,} /|C, | | I · 109395 1/3 r108 ^120 ENC DEC /-100 r1.Q2 ^110 rii4 ^122 ^126 _r130 Q 0= CAM j^Q3lS-rf® M|U / \1 112 116118 Ϊ24 128 V |\ MT^^UL M04 Fig 1 r..........................................cm............................................................................................................ I ^-200 x202 ,r110 112 r114 116 /^204 I —I—!-* FM -►O'-► DCT --► Q I-*—-dvLcl·-1- { i L__r x - ‘-H r*L_J I l 106! 1 ; 118 I . t6, I 224 k N?08 I-^-X i Y 210 ] ·:; r™ 1 I-1-^ MC [*-1 FM [^12 230 220 ^216 , *· : ,-J-i I 1—Li 999 ···; I ms J ή me « — __I t...................................................................................................................................................................... Fig 2
FI20010629A 2001-03-27 2001-03-27 Förfarande och system för stabilisering av en videobild FI109395B (sv)

Priority Applications (2)

Application Number Priority Date Filing Date Title
FI20010629A FI109395B (sv) 2001-03-27 2001-03-27 Förfarande och system för stabilisering av en videobild
PCT/FI2002/000259 WO2002078327A1 (en) 2001-03-27 2002-03-26 Method, system, computer program and computer memory means for stabilising video image

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FI20010629 2001-03-27
FI20010629A FI109395B (sv) 2001-03-27 2001-03-27 Förfarande och system för stabilisering av en videobild

Publications (2)

Publication Number Publication Date
FI20010629A0 FI20010629A0 (sv) 2001-03-27
FI109395B true FI109395B (sv) 2002-07-15

Family

ID=8560850

Family Applications (1)

Application Number Title Priority Date Filing Date
FI20010629A FI109395B (sv) 2001-03-27 2001-03-27 Förfarande och system för stabilisering av en videobild

Country Status (2)

Country Link
FI (1) FI109395B (sv)
WO (1) WO2002078327A1 (sv)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2025159A4 (en) 2006-05-30 2013-04-10 Google Inc DEVICE, ARRANGEMENT, METHOD AND COMPUTER PROGRAM PRODUCT FOR DIGITAL VIDEO PROCESSING
FI20095273A0 (sv) 2009-03-17 2009-03-17 On2 Technologies Finland Oy Digital videokodning
EP2302845B1 (en) 2009-09-23 2012-06-20 Google, Inc. Method and device for determining a jitter buffer level
EP2405661B1 (en) 2010-07-06 2017-03-22 Google, Inc. Loss-robust video transmission using two decoders
US8630412B2 (en) 2010-08-25 2014-01-14 Motorola Mobility Llc Transport of partially encrypted media
US8477050B1 (en) 2010-09-16 2013-07-02 Google Inc. Apparatus and method for encoding using signal fragments for redundant transmission of data
US8838680B1 (en) 2011-02-08 2014-09-16 Google Inc. Buffer objects for web-based configurable pipeline media processing
US8767821B2 (en) 2011-05-09 2014-07-01 Google Inc. System and method for providing adaptive media optimization
US9014265B1 (en) 2011-12-29 2015-04-21 Google Inc. Video coding using edge detection and block partitioning for intra prediction
US9210424B1 (en) 2013-02-28 2015-12-08 Google Inc. Adaptive prediction block size in video coding
US9313493B1 (en) 2013-06-27 2016-04-12 Google Inc. Advanced motion estimation
US9807416B2 (en) 2015-09-21 2017-10-31 Google Inc. Low-latency two-pass video coding

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5835641A (en) * 1992-10-14 1998-11-10 Mitsubishi Denki Kabushiki Kaisha Image pick-up apparatus for detecting and enlarging registered objects
DE69423430T2 (de) * 1993-12-02 2000-09-07 Canon Kk Vorrichtung zur Bildzitterkorrektur
US5825415A (en) * 1993-12-17 1998-10-20 Canon Kabushiki Kaisha Electronic image-movement correcting device with a variable correction step feature
US5973733A (en) * 1995-05-31 1999-10-26 Texas Instruments Incorporated Video stabilization system and method
US20020080870A1 (en) * 1999-01-07 2002-06-27 Thomas A. Piazza Method and apparatus for performing motion compensation in a texture mapping engine
JP2003513565A (ja) * 1999-10-29 2003-04-08 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ビデオ符号化方法
US6809758B1 (en) * 1999-12-29 2004-10-26 Eastman Kodak Company Automated stabilization method for digital image sequences
GB2365244A (en) * 2000-07-27 2002-02-13 Snell & Wilcox Ltd Image stabilisation

Also Published As

Publication number Publication date
FI20010629A0 (sv) 2001-03-27
WO2002078327A1 (en) 2002-10-03

Similar Documents

Publication Publication Date Title
KR100422389B1 (ko) 비디오 프레임 속도를 증가시키기 위한 방법 및 장치
US8094711B2 (en) Adaptive reference picture generation
US6628711B1 (en) Method and apparatus for compensating for jitter in a digital video image
US7720148B2 (en) Efficient multi-frame motion estimation for video compression
US9247250B2 (en) Method and system for motion compensated picture rate up-conversion of digital video using picture boundary processing
KR100964515B1 (ko) 비디오 인코딩을 위한 비-정수 픽셀 공유
CN108924553B (zh) 视频编码、解码方法、装置、计算机设备和存储介质
JPH09163373A (ja) 雑音低減装置
JPH11317952A (ja) 動画像の復号化方法、該方法が記録されたコンピュータ読みとり可能な記録媒体、及び、動画像の復号化装置
KR20040069210A (ko) 코딩 정보 및 로컬 공간 특징을 이용한 디지털 비디오신호들의 후처리에서의 선명도 향상
FI109395B (sv) Förfarande och system för stabilisering av en videobild
CN108848377B (zh) 视频编码、解码方法、装置、计算机设备和存储介质
US8358696B2 (en) Motion estimation techniques
KR20040069208A (ko) 비디오 선명도 강화의 시간적인 일관성 개선
FI109634B (sv) Förfarande och anordning för kodning av en videobild
KR20130039698A (ko) 데이터 스트림에서 블록-단위로 예측 인코딩된 비디오 프레임의 블록의 돌출 값을 결정하기 위한 방법 및 디바이스
FI109394B (sv) Förfarande och anordning för kodning och avkodning av en videobild
JPH09130748A (ja) 画像信号処理装置および記録/再生装置
JPH1169362A (ja) 動画像の符号化方法および復号化方法
JPH08275049A (ja) 撮像装置
JPH09130648A (ja) 動画像信号処理装置
KR100240620B1 (ko) 양방향의 반화소 움직임 추정을 위한 대칭 탐색 윈도우를 형성하는 방법 및 장치
JP2007129335A (ja) 画面動き検出装置
JP3407726B2 (ja) 符号化方法、符号化装置、および、コンピュータ読み取り可能な記録媒体
JP2001128185A (ja) 記録媒体

Legal Events

Date Code Title Description
PC Transfer of assignment of patent

Owner name: GOOGLE INC.

Free format text: GOOGLE INC.

MM Patent lapsed