SE465394B - Metod foer roerelsekompensering och elastisk deformation i bildsekvenser - Google Patents

Metod foer roerelsekompensering och elastisk deformation i bildsekvenser

Info

Publication number
SE465394B
SE465394B SE9002647A SE9002647A SE465394B SE 465394 B SE465394 B SE 465394B SE 9002647 A SE9002647 A SE 9002647A SE 9002647 A SE9002647 A SE 9002647A SE 465394 B SE465394 B SE 465394B
Authority
SE
Sweden
Prior art keywords
image
motion vectors
calculated
triangles
triangle
Prior art date
Application number
SE9002647A
Other languages
English (en)
Other versions
SE9002647D0 (sv
SE9002647L (sv
Inventor
H Brusewitz
Original Assignee
Televerket
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Televerket filed Critical Televerket
Priority to SE9002647A priority Critical patent/SE9002647L/sv
Publication of SE9002647D0 publication Critical patent/SE9002647D0/sv
Priority to JP3514011A priority patent/JP3067207B2/ja
Priority to EP91915636A priority patent/EP0543915B1/en
Priority to DE69129031T priority patent/DE69129031T2/de
Priority to PCT/SE1991/000529 priority patent/WO1992003799A1/en
Publication of SE465394B publication Critical patent/SE465394B/sv
Publication of SE9002647L publication Critical patent/SE9002647L/sv
Priority to US08/367,773 priority patent/US5617482A/en

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/12Systems in which the television signal is transmitted via one channel or a plurality of parallel channels, the bandwidth of each channel being less than the bandwidth of the television signal
    • H04N7/122Systems in which the television signal is transmitted via one channel or a plurality of parallel channels, the bandwidth of each channel being less than the bandwidth of the television signal involving expansion and subsequent compression of a signal segment, e.g. a frame, a line
    • H04N7/125Systems in which the television signal is transmitted via one channel or a plurality of parallel channels, the bandwidth of each channel being less than the bandwidth of the television signal involving expansion and subsequent compression of a signal segment, e.g. a frame, a line the signal segment being a picture element
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/537Motion estimation other than block-based
    • H04N19/54Motion estimation other than block-based using feature points or meshes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/98Adaptive-dynamic-range coding [ADRC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/144Movement detection
    • H04N5/145Movement estimation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Systems (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Description

15 20 25 30 35 40 465 394 2 KÛRTFATTAD BESKRIVNING AV RITNINGARNA Ritningen är en schematisk illustration av två på varandra följande bilder där motsvarande trianglar har ritats och respektive rörelsevektorer, varav fig. 1 visar translation, fig. 2 vridning och fig. 3 deformation. lås., Uppfinningen beskrives nedan i detalj.
DETALJERAD BESKRIVNING AV EN FÜREDRAGEN UTFÜRINGSFÛRM AV UPPFINNINGEN Syftet med uppfinningen är att möjliggöra överföring av bildsekvenser genom att utgå från en bild och enbart översända rörelsevektorer. Det finns redan metoder för att indela bilden i rektangulära block och att fastställa rörelsevektorerna som skall gälla inom blocken. Ett problem är att fyrkantiga block då kan bli synliga i bilden på grund av diskontinuiteter i rörelse- vektorfältet mellan intilliggande block.
Enligt föreliggande uppfinning indelas bilden istället i trianglar.
Indelningen kan vara fast eller kan anpassas efter den aktuella bilden och rörelserna i denna. När hörnpunkterna till varje triangel är fastlagda bestämmas rörelsevektorerna i hörnpunkterna i förhållande till föregående bild i sekvensen. Punkterna inuti varje triangel tilldelas rörelsevektorer genom interpolation av rörelsevektorerna i hörnpunkterna. Angränsande trianglar har alltså samma rörelsevektorer utmed hela den gemensamma sidan.
Därigenom uppkommer inte några diskontinuiteter.
Bildpunktsvärdena fås ur föregående bild med hjälp av det sålunda erhållna rörelsevektorfältet. Generellt indikerar rörelsevektorerna odefinierade punkter i föregående bild. Bildpunktsvärdet fås då med hjälp av ett interpolatíonsfilter, företrädesvis enligt vår samtidigt med denna ansökan inlämnade patentansökan 9002645-2 med benämningen "Metod för förflyttning av bildpunkt med subpixelavstånd".
I figurerna visas olika sätt hur en triangel kan flyttas. I fig. 1 visas en translation, i fig. 2 en vridning och i fig. 3 en deformation, i det här fallet en förstoring. Normalt är triangelns förflyttning en kombination av de ; här tre grundtyperna. Den nya triangelns koordinater kan i matrisform uttryckas som ß Yt=X +M t t där Xt är den gamla triangelns hörnpunktskoordinater, Yt är den nya triangeln och Mt innehåller de tre rörelsevektorerna.
En godtycklig punkt (x, y) kan uttryckas med hjälp av ortsvektorerna j! 10 15 20 25 30 35 40 465 394 3 till triangeln Xt. Definiera en triangel med dess tre hörnpunkter X1 V1 xt = *2 V2 X3 V3 Bilda en bas av vektorer v1, v2, v3 med hjälp av hörnpunkterna.
V1 *1 Y1 V2 = Xz'X1 Y2'Y1 V3 *3"X2 Y3'Y2 En godtycklig punkt i bildplanet kan då uttryckas som +8V (x, y) : V1 + bv3 2 För punkter inuti triangeln Xt gäller Û §_a §_1 och Û §_b í_a.
För en given punkt (x, y) kan a och b beräknas med formlerna (H1>-<><3-><2> 8..
(X2'X1)(Y3'Yz)'(Y2“Y1)(*3"X2) (X-X2)(y2-yq)-(y-y1)(X2-X1) (X3-x2)(Y2-Y1)-(Y3“Y2)(x2-X1) En mängd positioner X kan uttryckas som X = BXt där varje rad i X är en position (x., y.) och 1 1 Flera trianglar kan behandlas samtidigt med en matris Xt som innehåller alla inblandade triangelhörn. Med antal hörn = ne:

Claims (2)

10 15 20 25 30 35 40 465 394 4 X1 V1 X2 Yz Xt = E FIC yflC B får då modifieras så att varje rad har nc positioner och värdena 1-ai, ai-bi och bi placeras i positionerna som motsvarar den hörnpunkt som skall användas. Alla andra positioner är noll. Man erhåller ett kontinuerligt rörelsevektorfält i triangeln Yt om rörelsevektorerna beräknas som M = BMt där de aktuella positionerna inuti respektive triangel insättas i B. Triangelindelningen av bilden sker i sändaren och trianglarnas hörnpunkter fastställes. Därefter fastställs rörelsevektorerna i hörn- punkterna. Mellan sändare och mottagare översänds först en fullständig bild. Därefter sändes endast rörelsevektorer och information om hörnpunkten som respektive rörelsevektor tillhör. I mottagaren beräknas rörelsevektorerna för samtliga punkter i bilden genom interpolation av rörelsevektorerna i hörn- punkterna (dvs. genom formeln M : BMt). Därefter kan alla bildpunktsvärden beräknas med hjälp av rörelsevektorerna och föregående bild. Föreliggande uppfinning tillhandahåller således en metod för rörelse- kompensering och elastisk deformation i bildsekvenser som löser ovannämnda problem med diskontinuiteter mellan block i bilden. Uppfinningen är definierad i åtföljande patentkrav. PATENTKRAV
1. Metod för rörelsekompensering och elastisk deformation i bildsekvenser, vid överföring av rörliga bilder mellan en sändare och en mottagare, k ä n n e t e c k n a d av att, i sändaren, varje bild i en bildsekvens indelas i trianglar genom lämpligt val av hörnpunkter, att rörelsen mellan två successiva bilder att, i mottagaren rörelsevektorerna för trianglarnas inre punkter beräknas med användning av de tre till respektive triangel hörande översända rörelsevektorerna, att bildpunktsvärdena i trianglarnas hörnpunkter beräknas med hjälp av :Å 7 . 10 15 20 25 30 35 40 _:- m m w Ro »n- 5 de översända rörelsevektorerna och föregående bild, och att bildpunktsvärdena i trianglarnas inre punkter beräknas med hjälp av de beräknade rörelsevektorerna och föregående bild.
2. Metod enligt krav 1, vektorerna För trianglarnas inre bildpunkter beräknas genom interpolation. k ä n n e t e c k n a d av att rörelse-
SE9002647A 1990-08-15 1990-08-15 Metod foer roerelsekompensering och elastisk deformation i bildsekvenser SE9002647L (sv)

Priority Applications (6)

Application Number Priority Date Filing Date Title
SE9002647A SE9002647L (sv) 1990-08-15 1990-08-15 Metod foer roerelsekompensering och elastisk deformation i bildsekvenser
JP3514011A JP3067207B2 (ja) 1990-08-15 1991-08-12 画像シーケンスにおける運動補正及び弾性変形法
EP91915636A EP0543915B1 (en) 1990-08-15 1991-08-12 Method of motion compensation and elastic deformation in picture sequences
DE69129031T DE69129031T2 (de) 1990-08-15 1991-08-12 Verfahren zum bewegungsausgleich und elastischer verformung in bildreihen
PCT/SE1991/000529 WO1992003799A1 (en) 1990-08-15 1991-08-12 Method of motion compensation and elastic deformation in picture sequences
US08/367,773 US5617482A (en) 1990-08-15 1995-01-03 Method of motion compensation and elastic deformation in picture sequences

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
SE9002647A SE9002647L (sv) 1990-08-15 1990-08-15 Metod foer roerelsekompensering och elastisk deformation i bildsekvenser

Publications (3)

Publication Number Publication Date
SE9002647D0 SE9002647D0 (sv) 1990-08-15
SE465394B true SE465394B (sv) 1991-09-02
SE9002647L SE9002647L (sv) 1991-09-02

Family

ID=20380153

Family Applications (1)

Application Number Title Priority Date Filing Date
SE9002647A SE9002647L (sv) 1990-08-15 1990-08-15 Metod foer roerelsekompensering och elastisk deformation i bildsekvenser

Country Status (5)

Country Link
EP (1) EP0543915B1 (sv)
JP (1) JP3067207B2 (sv)
DE (1) DE69129031T2 (sv)
SE (1) SE9002647L (sv)
WO (1) WO1992003799A1 (sv)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5325475A (en) * 1992-09-09 1994-06-28 Massachusetts Institute Of Technology Computer method and apparatus for matching between line drawings
FI97008C (sv) * 1993-06-02 1996-09-25 Nokia Oy Ab Förfarande för att förutspå en videobild p.g.a. en i behandlingsordningen föregående bild
NO942080D0 (no) * 1994-06-03 1994-06-03 Int Digital Tech Inc Bildekoder
US5684538A (en) 1994-08-18 1997-11-04 Hitachi, Ltd. System and method for performing video coding/decoding using motion compensation
EP0720383B1 (en) * 1994-12-30 2000-09-13 Daewoo Electronics Co., Ltd Method and apparatus for detecting motion vectors in a frame decimating video encoder
EP0720381A1 (en) * 1994-12-30 1996-07-03 Daewoo Electronics Co., Ltd Method and apparatus for encoding a video signal using pixel-by-pixel motion prediction
FR2729266A1 (fr) * 1995-01-10 1996-07-12 France Telecom Procede d'interpolation d'images
KR0171146B1 (ko) * 1995-03-18 1999-03-20 배순훈 특징점을 이용한 움직임 벡터 검출 장치
KR0171143B1 (ko) * 1995-03-20 1999-03-20 배순훈 육각그리드에서의 삼각구조 형성 장치
KR0171120B1 (ko) * 1995-04-29 1999-03-20 배순훈 특징점 기반 움직임 보상을 이용한 비디오 신호 부호화에서의 움직임 영역 설정방법 및 장치
KR0181063B1 (ko) * 1995-04-29 1999-05-01 배순훈 특징점을 이용한 움직임 보상에서의 그리드 형성방법 및 장치
CN1122421C (zh) * 1995-08-04 2003-09-24 株式会社大宇电子 用于图象信号编码系统的运动矢量估算方法和设备
EP1274254B1 (en) * 1995-08-29 2011-07-06 Sharp Kabushiki Kaisha Video coding device and video decoding device with a motion compensated interframe prediction
KR100209793B1 (ko) * 1995-10-28 1999-07-15 전주범 특징점 기반 움직임 추정을 이용하여 비디오 신호를 부호화 및 복호화하는 장치
JP3183155B2 (ja) * 1996-03-18 2001-07-03 株式会社日立製作所 画像復号化装置、及び、画像復号化方法
US6047088A (en) * 1996-12-16 2000-04-04 Sharp Laboratories Of America, Inc. 2D mesh geometry and motion vector compression
WO1998042134A1 (en) * 1997-03-17 1998-09-24 Mitsubishi Denki Kabushiki Kaisha Image encoder, image decoder, image encoding method, image decoding method and image encoding/decoding system
KR100265720B1 (ko) * 1997-03-31 2000-09-15 윤종용 2차원삼각형선격자모델을이용한동영상의움직임보상방법
KR100265721B1 (ko) * 1997-03-31 2000-09-15 윤종용 2차원삼각형조각선격자모델을이용한동영상의움직임추정방법
JP4591495B2 (ja) * 2007-10-22 2010-12-01 株式会社日立製作所 画像符号化方法および画像符号化装置
JP4609602B2 (ja) * 2010-07-12 2011-01-12 株式会社日立製作所 画像復号化方法及び画像符号復号装置
CN103839241B (zh) * 2014-03-21 2015-07-15 北京航空航天大学 插值三角形形成方法及装置
US10778977B2 (en) * 2018-12-05 2020-09-15 Qualcomm Incorporated Triangle motion information for video coding

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4661849A (en) * 1985-06-03 1987-04-28 Pictel Corporation Method and apparatus for providing motion estimation signals for communicating image sequences
US5070465A (en) * 1987-02-25 1991-12-03 Sony Corporation Video image transforming method and apparatus

Also Published As

Publication number Publication date
SE9002647D0 (sv) 1990-08-15
DE69129031T2 (de) 1998-06-25
EP0543915A1 (en) 1993-06-02
JPH06500212A (ja) 1994-01-06
JP3067207B2 (ja) 2000-07-17
WO1992003799A1 (en) 1992-03-05
SE9002647L (sv) 1991-09-02
EP0543915B1 (en) 1998-03-04
DE69129031D1 (de) 1998-04-09

Similar Documents

Publication Publication Date Title
SE465394B (sv) Metod foer roerelsekompensering och elastisk deformation i bildsekvenser
CN104092933B (zh) 一种对摄像机进行温度补偿的方法和装置
EP0172755A2 (en) An apparatus for an efficient coding of television signals
EP0475648B1 (en) Image processing system
US6903735B2 (en) Apparatus for synthesizing multiview image using two images of stereo camera and depth map
KR100787675B1 (ko) 두 개의 기준 프레임 사이에 보간 프레임을 생성하기 위한방법, 컴퓨터 프로그램 제품 및 장치
US5325472A (en) Image displaying system for interactively changing the positions of a view vector and a viewpoint in a 3-dimensional space
US4805116A (en) Interpolated display characteristic value generator
EP0636302B1 (en) A method for adaptive estimation of unwanted global picture instabilities in picture sequences in digital video signals
EP4325859A3 (en) Syntax reuse for affine mode with adaptive motion vector resolution
EP0199587A2 (en) Image processing system
DE69409816D1 (de) Verfahren und vorrichtung zur bewegungsschätzung mittels blockzusammenpassung
JP2004178576A (ja) 曲面画像処理装置及び曲面画像処理方法
US5467439A (en) Interpolation method of digital image data and a circuit therefor
US5617482A (en) Method of motion compensation and elastic deformation in picture sequences
JP2003076982A (ja) ビデオオブジェクトをグラフィック処理する装置
CN104240182A (zh) 图像处理装置、图像处理方法以及电子设备
CN109855634A (zh) 一种栅格地图的图像处理的方法及设备
US5673379A (en) Scan line generator for area fill of extensible polygons
CN104077741B (zh) 一种基于渲染到纹理的三维场景无损放大方法
KR20060006068A (ko) 세그먼트화 개선
CN102629366A (zh) 图像处理方法及装置
Toklu et al. 2-D mesh tracking for synthetic transfiguration
FI20001341A (sv) F÷rfarande i ett processtyrningssystem och processtyrningssystem
Houkes Motion parameter estimation in TV-pictures

Legal Events

Date Code Title Description
NAL Patent in force

Ref document number: 9002647-7

Format of ref document f/p: F

NUG Patent has lapsed