FI97495C - Menetelmä kuvan terävöittämiseksi - Google Patents

Menetelmä kuvan terävöittämiseksi Download PDF

Info

Publication number
FI97495C
FI97495C FI950511A FI950511A FI97495C FI 97495 C FI97495 C FI 97495C FI 950511 A FI950511 A FI 950511A FI 950511 A FI950511 A FI 950511A FI 97495 C FI97495 C FI 97495C
Authority
FI
Finland
Prior art keywords
matrix
transmission function
transfer function
dimensional
quantization
Prior art date
Application number
FI950511A
Other languages
English (en)
Swedish (sv)
Other versions
FI97495B (fi
FI950511A0 (fi
Inventor
Markku Vehvilaeinen
Original Assignee
Nokia Technology Gmbh
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nokia Technology Gmbh filed Critical Nokia Technology Gmbh
Priority to FI950511A priority Critical patent/FI97495C/fi
Publication of FI950511A0 publication Critical patent/FI950511A0/fi
Priority to DE69622895T priority patent/DE69622895T2/de
Priority to EP96100626A priority patent/EP0725546B1/en
Priority to US08/598,640 priority patent/US5822470A/en
Application granted granted Critical
Publication of FI97495B publication Critical patent/FI97495B/fi
Publication of FI97495C publication Critical patent/FI97495C/fi

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/527Global motion vector estimation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/20Image enhancement or restoration using local operators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)

Description

97495
Menetelmä kuvan terävöittämiseksi
Keksintö kohdistuu menetelmään n-ulotteiseen matriisimuotoon muunne-5 tun ja n-ulotteisella kvantisointimatriisilla (W(i,j)) käsiteltävän datasignaa-lin muokkaamiseksi.
Viime vuosina digitaalitekniikka on kehittynyt voimakkaasti, joten on kehitetty erilaisia menetelmiä videosignaalin siirtämiseksi ja tallentamiseksi 10 digitaalisessa muodossa. Digitaalitekniikan etuja ovat mm. aiempaa parempi toistettavuus, häiriöttömyys ja kulumattomuus sekä laadun heikkenemisen välttäminen kopioitaessa. Digitaaliseen tallennusvälineeseen on mahdollista sisällyttää myös tietoja tallennetun ohjelman sisällöstä, jolloin halutun kohdan haku on helppoa. Digitaalitekniikan käyttöönottoa video-15 signaalin siirrossa sekä tallentamisessa on hidastanut digitaalisen esitysmuodon vaatima suuri tietomäärä.
Tavanomaisessa televisiolähetyksessä päivitetään uusi kuva 25 kertaa sekunnissa, joten perättäisten kuvien välinen ero tavallisesti on hyvin 20 pieni. Tätä ominaisuutta hyödyntäen on kehitetty kuvan kompressointi- eli tiivistysmenetelmiä, joilla lähetettävän informaation määrää pyritään pienentämään ja silti säilyttämään vastaanottopäässä riittävän hyvä kuvan laatu.
25 Eräs tunnettu kuvan kompressointimenetelmä on esitetty MPEG-standar-dissa (Moving Pictures Expert Group). MPEG-standardi on suunniteltu ihmisen näköjärjestelmä HVS (Human Visual System) huomioiden. Kaikki sellainen videosignaalissa oleva informaatio, jota silmä ei katselutilan-teessa kykene havaitsemaan, pyritään tiivistyksessä poistamaan.
30 MPEG-standardin mukaisessa kompressiomenetelmässä kuva jaetaan : lohkoihin. Lohkon koko on 8x8 pikseliä. Makrolohko koostuu neljästä lohkosta, eli makrolohkon koko on 16 x 16 pikseliä.
35 Videosignaalin käsittelyssä voidaan hyödyntää sitä seikkaa, että peräkkäiset kuvat eivät yleensä paljon poikkea toisistaan. Ennustetuissa kuvissa kuva pyritään muodostamaan toisten kuvien avulla. Tällöin ei ennustetusta kuvasta tarvitse lähettää alkuperäistä kuvaa, vaan ainoastaan lii- 2 97495 kevektorit ja niiden avulla muodostetun ennustetun kuvan virhe. Liikevek-torien avulla vastaanottopäässä kuvan muodostava dekooderi suorittaa ennustetun kuvan palautuksen. Pelkästään liikevektorien avulla muodostettu uusi kuva ei kuitenkaan välttämättä vastaa oikeaa, koska kuvassa on 5 saattanut tapahtua muitakin muutoksia. Tätä virhettä kutsutaan ennuste-virheeksi. MPEG-standardissa pienin liikevektorilla käsiteltävä yksikkö on edellä mainittu makrolohko.
MPEG-standardissa on määritelty kolme erilaista kuvatyyppiä, jotka ovat: 10 sisäisesti koodattu l-kuva (Intra), yhdestä kuvasta ennustettu P-kuva (Predicted) ja kaksisuuntaiseen ennustukseen perustuva B-kuva (Bidirectional), l-kuvien koodauksessa käytetään ainoastaan kuvassa itsessään olevaa dataa, l-kuvat toimivat dekoodauksessa kiintopisteinä, joihin mahdollinen virheiden kumuloituminen pysähtyy ja dekoodaus voi-15 daan aloittaa. Ainoastaan l-kuvista saadaan itsenäisesti dekoodatuksi täydellinen kuva.
P-kuvat muodostetaan ennustamalla edellisestä I- tai P-kuvasta. P-kuva ei ole itsenäinen kuva, vaan siinä esitetään ennustevirhe ja sen vuoksi P-20 kuvan lähettämisessä tarvitaan vähemmän dataa kuin l-kuvan lähettämisessä. P-kuvia käytetään edelleen seuraavien P- tai B-kuvien ennustamiseen. Peräkkäisissä ennustekuvissa voi tapahtua virheiden kumuloitumista. l-kuvia on siksi lähetettävä riittävän usein. Kaksisuuntaiseen ennustamiseen perustuvat B-kuvat käyttävät vertailukohteena sekä aikaisempaa 25 että tulevaa I- tai P-kuvaa.
MPEG-standardin mukaisen kompressointimenetelmän soveltamiseksi on videosignaalin tai mikä tahansa menetelmän mukaisesti käsiteltävän da-tasignaalin oltava digitaalisessa muodossa. Normaali värillinen videosig-30 naali muodostuu sekä valotiheys- (luminanssi) että värikkyystiedoista (krominanssi). Kun videosignaali muutetaan digitaaliseen muotoon, sekä valotiheys- että värikkyystieto muutetaan erikseen tavallisimmin 8 bitin tarkkuudella.
35 Useissa kuvantiivistystekniikoissa muodostetaan digitaaliseen muotoon muunnetulle videosignaalille diskreetti kosinimuunnos (DCT-muunnos, Discrete Cosine Transform) ennen videosignaalin lähettämistä siirtotielle. DCT-muunnos on eräs Fourier-muunnoksen laji, jolla voidaan laskea jak- 3 97495 sollisen signaalin taajuusspektri eli siirtyä aikatasosta taajuustasoon. Sana diskreetti tarkoittaa tässä yhteydessä sitä, että muunnoksessa käsitellään jatkuvien funktioiden sijasta erillisiä pisteitä. Kun diskreettiä kosinimuunnosta käytetään yksittäisen kuvan tiivistämiseen, tarvitaan 2-ulot-5 teista muunnosta. Ajan sijasta muuttujina ovat kuvan leveys- ja korkeus-koordinaatit X ja Y. Taajuus ei ole myöskään tavanomaiseen tapaan jaksojen määrä sekunnissa, vaan se kuvaa esim. luminanssin muutosnopeutta paikkakoordinaattien X, Y suunnassa. Tätä kutsutaan spatiaaliseksi taajuudeksi. Kaava (1a) esittää DCT-muunnosta ja kaava (1b) käänteistä 10 DCT-muunnosta.
(la) S" =YACUCV Σ Σ cos[(2x + l)unl 16]cos[(2j t- \)νπ! 16] (lb) j^C,,Cv Σβ Σ^ακ^χπ- \)uKl\6]cos\[ly + \)νπ! Ιό] 15 jossa Cu = 1Λ/2, kun u = 0
Cv = 1Λ/2, kun v = 0 muulloin Cu, Cv = 1 20 Syx luminanssi- tai krominanssiarvot
Svu DCT-muunnoksen taajuuskomponentit N kerrallaan muunnettavan kuvalohkon koko
Runsaasti hienojakoisia yksityiskohtia sisältävässä kuvapinnassa esiintyy 25 suuria spatiaalisia taajuuksia. Esimerkiksi kuvassa olevat samansuuntaiset viivat vastaavat sitä suurempaa taajuutta, mitä tiheämmässä ne ovat. Diagonaalisuuntaisia, tiettyä rajaa suurempia taajuuksia voidaan kuvan käsittelyssä kvantisoida enemmän ilman, että kuvan laatu havaittavasti kärsii.
30 MPEG-kompressoinnissa DCT-muunnos tehdään lohkoittain siten, että luminanssisignaalilla lohkokoko on 8 x 8 kuvapistettä ja krominanssisig-naalilla käytetään 16x16 kuvapisteen kokoista aluetta. Erot lohkojen koossa johtuvat lähinnä siitä, että silmä havaitsee huonommin värikkyy-35 den kuin kirkkauden muutokset, jolloin 2x2 kuvapisteen kokoinen alue koodataan samalla värikkyysarvolla.
4 97495
Esimerkiksi valotiheysarvoja muunnettaessa DCT-tasoon esitetään muunnettavasta kuvapistelohkosta valotiheysarvot ja niistä lasketut horisontaaliset ja vertikaaliset avaruustaajuudet. Jokainen taajuuskomponentti lasketaan kaikista muunnettavan lohkon arvoista. Diskreetillä kosinimuunnok-5 sella saatavan taajuusmatriisin alkiot eivät siis vastaa muunnettavan lohkon yksittäisiä pisteitä. Taajuusmatriisissa vaakasuuntaiset taajuuskom-ponentit kuvaavat muunnettavassa lohkossa olevia horisontaalisia muutoksia ja vastaavasti pystysuunnassa olevat taajuuskomponentit kuvaavat muunnettavassa lohkossa olevia pystysuuntaisia muutoksia. Matriisin 10 vasemmassa yläkulmassa oleva ensimmäisen rivin ensimmäinen alkio kuvaa muunnettavan kuvalohkon nollataajuusarvoa, koska se on verrannollinen muunnettavan lohkon kuvapisteiden keskiarvoon.
Taajuusmatriisin laskennan eli DCT-muunnoksen jälkeen suoritetaan taa-15 juusmatriisin alkioille ac(i,j) kvantisointi eli jaetaan alkiot ihmisen näköjärjestelmä huomioiden sopivan kokoisiin kvantisointitasoihin. Kuvassa 4a on esimerkki l-kuvan kvantisoinnissa käytettävästä kvantisointimatriisista ja kuvassa 4b on esimerkki P- ja B-kuvien kvantisoinr.issa käytettävästä kvantisointimatriisista W(i,j). Kvantisointi tapahtuu kaavan (2a) mukai-20 sesti. Vastaanottopäässä suoritettavassa käänteismuunnoksessa (iDCT) käytetään samanlaista kvantisointimatriisia W(i,j) kaavan (2b) mukaisesti. Kvantisointimatriisien (kuvat 4a ja 4b) sekä kaavojen (2a) ja (2b) perusteella voidaan havaita, että suuremmilla taajuuksilla ja diagonaalisuun-nassa käytetään vähemmän kvantisointitasoja kuin nollataajuuden lähellä 25 olevilla taajuuksilla. Tämä johtuu erityisesti siitä syystä, että suuremmat ** diagonaalitaajuudet eivät ole ihmisen näköjärjestelmälle niin tärkeitä kuin lähellä nollataajuutta olevat taajuudet ja oleellisesti vaaka- ja pystysuuntaiset taajuudet. Kaavoissa (2a) ja (2b) esiintyvä muuttuja mquant riippuu mm. makrolohkojen aktiivisuudesta sekä koodauksessa käytettävän data-30 puskurin täyttöasteesta. Muuttuja mquant voi siis vaihdella videosignaalin siirron aikana, mutta sillä ei ole vaikutusta kvantisointimatriisin sisältöön.
(2a) QAC(i,j) = ( 16xaff,£. J
2 x mquant x W{i,j) 35 (2b) Re c(i, j) = jUP9uant χ W(U) xQAC(IJ) 5 97495
Videosignaalin kompressoinnissa kuvan laatu huononee jonkin verran lähinnä DCT-tason matriisin kvantisoinnista johtuen. Kvantisointikohinan määrä saattaa vaihdella eri osissa kuvaa ja kvantisointikohina voi näkyä kuvassa yksityiskohtien väreilynä.
5 MPEG-kompressoidun kuvan terävöittämiseksi on kehitetty joitakin menetelmiä. Tavanomaiset, kuvatasossa toteutetut menetelmät on optimoitu pääasiassa analogisiin järjestelmiin, joissa kohinataso on huomattavasti pienempi ja kohinan jakauma noudattelee Gaussin käyrää. Analogisissa 10 järjestelmissä kohina ei myöskään riipu videosignaalin rakenteesta. Sen sijaan MPEG-kompressoinnissa suoritettava kvantisointi saa aikaan kuvan rakenteesta riippuvaa kohinaa. Kvantisointikohinan amplitudi kasvaa yksityiskohtien reuna-alueilla pienentäen voimakkaasti paikallista signaa-li/kohinasuhdetta. Pienestä paikallisesta signaali/kohinasuhteesta johtuen 15 tavanomaiset kuvatasossa tapahtuvat terävöittämismenetelmät eivät toimi kunnolla ja ne voimistavat erityisesti reuna-alueiden kvantisointikohinaa, jolloin se tulee näkyvämmäksi. Lisäksi kvantisoinnin vaikutus riippuu koodattavan lohkon sisällöstä, jolloin viereiset lohkot voidaan kvantisoida eri voimakkuudella, mikä saattaa tehdä lohkoreunat näkyviksi. Toisaalta yli 20 lohkorajojen ulottuva kuvatason suodatus voimistaa lohkojen välisiä eroja, jolloin lohkoreunat tulevat näkyviksi.
Eräs tunnettu kuvan terävöittämismenetelmä perustuu tavanomaiseen spatiaaliseen suodatukseen, jossa suodatus tapahtuu vastaanottimessa 25 dekoodauksen jälkeen. Yleisimmin käytetyt suodattimet ovat 1- ja 2-ulotteisia. Kuvissa 1a-1c on esitetty eräitä käytettyjä suodatinrakenteita.
Esillä olevan keksinnön tavoitteena on aikaansaada menetelmä, jolla kuvan terävyyttä voidaan parantaa korostamatta lohkoreunoja. Keksintö pe-30 rustuu siihen ajatukseen, että n-ulotteista kvantisointimatriisia muokataan n-ulotteisella siirtofunktiomatriisilla ennen datasignaalin muokkaamista. Muokkaamisessa käytettävä siirtofunktiomatriisi muodostetaan sopivammin siten, että: 35 - valitaan ainakin yksi siirtofunktio, - asetetaan siirtofunktiolle ainakin yksi kiinteä piste n-ulotteisessa siirtofunktiomatriisissa ja määritetään ainakin osa siirtofunktiomatriisin alkioista siirtofunktion avulla, ja 6 97495 - muodostetaan ainakin osa n-ulotteisen siirtofunktiomatriisin alkioista ainakin yhdellä siirtofunktiolla siten, että määräetäisyydellä kiinteästä pisteestä olevat siirtofunktiomatriisin alkiot muodostetaan siirtofunktiosta riippuvalla muokkaussuureella.
5
Siirtofunktiomatriisin alkioita muodostettaessa käytetään parametreinä kyseisen alkion etäisyyttä ja suuntaa asetettuun kiinteään pisteeseen nähden. Keksinnölle on tunnusomaista se, mitä on esitetty patenttivaatimusten 1 ja 9 tunnusmerkkiosassa.
10
Keksinnön eräässä edullisessa sovelluksessa 1-ulotteinen siirtofunktio muodostetaan käyttäen diskreettiä Fourier-muunnosta (DFT-muunnos). DFT-muunnoksella muodostettavassa siirtofunktiossa on sopivimmin vähintään yhtä monta alkiota kuin muokattavassa siirtofunktiomatriisissa on 15 sarakkeita, mutta on edullista käyttää tarkempaa DFT-muunnosta, esimerkiksi 64-kertaista tarkkuutta. Kiintopisteeksi valitaan siirtofunktiomatriisin ensimmäisen rivin ensimmäinen alkio, jonka arvoksi asetetaan siirto-funktion ensimmäinen alkio. Kullekin siirtofunktiomatriisin alkiolle lasketaan etäisyys valitusta kiinteästä pisteestä. Siirtofunktiomatriisin alkioiden 20 arvot saadaan lasketun etäisyyden perusteella siten, että siirtofunktiomatriisin alkioksi valitaan laskettua etäisyyttä lähinnä vastaava siirtofunktion alkio. Etäisyyden ollessa suurempi kuin siirtofunktion alkioiden lukumäärä siirtofunktiomatriisin alkioksi valitaan esimerkiksi siirtofunktion viimeinen alkio tai jokin muu sopiva arvo.
25 Tämän keksinnön mukaisella menetelmällä saavutetaan huomattavia etuja nykyisin tunnettuihin menetelmiin verrattuna. Tämän keksinnön mukaista menetelmää käyttäen kuvassa olevien yksityiskohtien terävöityminen ei oleellisesti riipu niiden spatiaalisesta suunnasta. Tällä lohkon sisäi-30 sellä menetelmällä kuvalohkojen reunat eivät korostu. Sovellettaessa keksinnön mukaista menetelmää vastaanottimen dekooderissa on katselijalle annettavissa mahdollisuus valita erilaisia siirtofunktiomatriisin alkioita.
35 Keksintöä selostetaan seuraavassa tarkemmin viitaten oheisiin piirustuksiin, joissa kuvat 1a-1c esittävät tunnetun tekniikan mukaisia suodattimia,
II
7 97495 kuva 2 esittää erään MPEG-standardiin perustuvan kooderin yksinkertaistettua rakennetta lohkokaaviona, 5 kuva 3 esittää MPEG-standardiin perustuvan dekooderin yksinkertaistettua rakennetta lohkokaaviona, kuvassa 4a on esitetty eräs l-kuvien koodauksessa ja dekoodauksessa käytettävä kvantisointimatriisi, 10 kuvassa 4b on esitetty eräs P- ja B-kuvien koodauksessa ja dekoodauksessa käytettävä kvantisointimatriisi, kuvassa 5a on esitetty eräs 1-ulotteinen siirtofunktio, 15 kuvassa 5b on esitetty kuvan 5a siirtofunktion perusteella lasketut siirtofunktiomatriisin alkiot matriisimuodossa, ja kuvassa 5c on havainnollistettu kuvan 5b mukaisia siirtofunktiomatriisin 20 alkioita 3-ulotteisena kaaviona.
kuvassa 5d on esitetty kuvan 5b mukaisella siirtofunktiomatriisilla muokattu kuvan 4a mukainen l-kuvien kvantisoinnissa ja dekvan-tisoinnissa käytettävä kvantisointimatriisi.
25
Kuvassa 2 esitettyyn kooderiin 21 (ENCODER) tuodaan muunnettava videosignaali videojn. Kooderissa 21 P- ja B-kuvien mukaisesta videosignaalista videojn vähennetään liikekompensaattorilta 22 tuleva signaali MC0Ut. Erotussignaali johdetaan DCT-muuntimelle 23 (DCT). l-kuvat joh-30 detaan suoraan DCT-muuntimelle 23. DCT-muuntimen 23 lähdöstä saa-* daan muunnettu signaali ac(i,j), jossa i,j = 1...8, jolle suoritetaan kvanti- sointi kvantisointielimessä 24 kaavan 1 mukaisesti. Kvantisoitu signaali QAC(i,j), jossa i,j = 1...8, johdetaan edelleen vaihtele/^n pituuden koodeille 25 VLC (Variable Length Coding) siten, että matalat taajuuskom-35 ponentit lähetetään ensin, esimerkiksi seuraavassa järjestyksessä: QAC(1,2), QAC(2,1), QAC(3,1), QAC(2,2), QAC(1,3), QAC(1,4), QAC(2,3) jne. Nollataajuuskomponentti kompressoidaan erillisellä DPCM-koodauksella, jossa viereisten lohkojen nollataajuuskomponenteista muo- 8 97495 dostetaan erotus. Vaihtelevan pituuden kooderin 25 ulostulosta saadaan koodattu videsignaali VLCdata, joka vahvistetaan ja lähetetään siirtotielle.
Vastaanottimessa on dekooderi 31, joka muodostaa koodatusta videosig-5 naalista rekonstruoidun videosignaalin. Koodattu videosignaali VLCdata johdetaan dekooderissa 31 olevaan vaihtelevan pituuden dekooderiin 32, jossa muodostetaan kvantisoitu videosignaali QAC(i,j). Kvantisoitu videosignaali QAC(ij) johdetaan dekvantisointielimeen 33, jonka ulostulona saadaan DCT-muunnettu signaali Rec(i,j). DCT-muodossa olevalle sig-10 naalille Rec(ij) tehdään käänteinen DCT-muunnos käänteis-DCT-muun-timessa 34. Käänteis-DCT-muunnettua signaalia käytetään vielä liike-kompensointiin, minkä jälkeen dekooderin lähdöstä saadaan oleellisesti alkuperäistä videosignaalia vastaava signaali videoout.
15 Esillä olevan keksinnön mukaista menetelmää voidaan edullisesti soveltaa siten, että suunnitellaan sopiva 1-ulotteinen siirtofunktio H(k) DFT-ta-solla, jossa k= 1...N, N on sopivimmin kvantisointimatriisin sarakkeiden lukumäärän monikerta. Sen jälkeen kun sopiva siirtofunktio H(k) on suunniteltu, muodostetaan siirtofunktion H(k) perusteella siirtofunktiomat-20 riisi P(i,j), i,j = 1...M, jossa kukin alkio vastaa kvantisointimatriisin W(i,j), i J = 1...M, vastinalkiota. Siirtofunktiomatriisilla P(i,j) muokataan esimerkiksi vastaanottimessa olevan dekooderin kvantisointimatriisia W(i,j). MPEG-standardin mukaiseen videosignaaliin sovellettuna on M sopivimmin 8 ja N esimerkiksi 64*8=512.
25 Tämän keksinnön edullisimmassa sovelluksessa valitaan siirtofunktiomatriisin kooksi M=8, siirtofunktion H(k) alkioiden lukumääräksi 512 eli N=64*M ja siirtofunktiomatriisissa P(i,j) kiinteäksi pisteeksi siirtofunktiomatriisin ensimmäisen rivin ensimmäinen alkio P(1,1). Tällöin siirtofunkti-30 on ensimmäinen alkio H(1) sijoitetaan valitun kiinteän pisteen arvoksi, koska etäisyys on 0. Piste H(65) vastaa etäisyyttä 1, H(129) vastaa etäisyyttä 2 jne. Tämän jälkeen lasketaan jokaisen siirtofunktiomatriisin alkion P(x,y), jossa x,y = 1...8, etäisyys d(x,y) kiinteään pisteeseen kaavalla 35 (3) d(x,y) = J(x-\)2 + (y-1)2 (4) d'(x,y) = 2*M-d(x,y) li 9 97495
Siirtofunktiomatriisin alkio saadaan lasketun etäisyyden d(x,y) perusteella siirtofunktiosta H(k) siten, että valitaan laskettua etäisyyttä d(x,y) lähinnä vastaava siirtofunktion alkio. Esimerkiksi matriisin alkion W(2,3) etäisyys kvantisointimatriisin alkiosta W(1,1) on kaavan 3 perusteella V5 eli n.
5 143/64. Siirtofunktiomatriisin alkioksi saadaan siis siirtofunktion 144. alkio H(144). Etäisyyden ollessa suurempi kuin 8 siirtofunktiomatriisin alkion valinnassa voidaan edullisesti käyttää hyväksi DFT-muunnoksen symmetrisyyttä, jolloin siirtofunktiomatriisin arvoksi valitaan siirtofunktiosta kaavan 4 mukaan laskettua arvoa d'(x,y) lähinnä vastaava alkio. Kun 10 kaikki siirtofunktiomatriisin alkiot on laskettu, muokataan kvantisointimat-riisin alkiot W(i,j) kertomalla jokainen kvantisointimatriisin W(i,j) alkio vastaavalla siirtofunktiomatriisin P(i,j) alkiolla. Kuvassa 5b on laskettu edellä olevan esimerkin mukaiset siirtofunktiomatriisin alkiot ja kuvassa 5c on havainnollistettu kuvan 5b mukaisia siirtofunktiomatriisin alkioita 3-15 ulotteisena kaaviona. Lisäksi kuvassa 5d on esitetty kuvan 4a l-kuvien kvantisoinnissa ja dekvantisoinnissa käytettävä matriisi, joka on muokattu keksinnön mukaisella menetelmällä.
Kvantisointimatriisin muokkaus voi tapahtua joko kooderissa tai dekoode-20 rissa. Mikäli muokkaus tapahtuu kooderissa, on videosignaalin lähettäjällä mahdollisuus ohjata videosignaalin muokkausta. Kooderissa keksinnön mukainen siirtofunktiomatriisi P(i,j) on edullista sijoittaa kuvassa 2 esitetyn kvantisointielimen 24 yhteyteen, jossa myös datasignaalin muokkaus suoritetaan.
25
Muokkauksen tapahtuessa vastaanottimessa olevassa dekooderissa, voidaan dekooderiin järjestää useampia erilaisilla siirtofunktiomatriisin alkioilla muokattuja kvantisointimatriiseja, jolloin katsoja voi valita haluamansa kvantisointimatriisin. Katsojalla on myös mahdollisuus ottaa muok-30 kaus pois käytöstä. Vastaanottimessa keksinnön mukainen siirtofunktiomatriisi P(ij) on edullista sijoittaa kuvassa 3 esitetyssä dekooderissa olevan dekvantisointielimen 33 yhteyteen, jossa myös datasignaalin muokkaus suoritetaan.
35 Keksinnön mukaista menetelmää voidaan soveltaa myös siten, että valitaan sopiva 1-ulotteinen siirtofunktio H(k), jossa i = 1...M. Muokataan siirtofunktiomatriisin P(i,j) ensimmäisen rivin alkiot siirtofunktion vastaavilla alkioilla eli siirtofunktiomatriisin alkio P(1,1) kerrotaan siirtofunktion en- 10 97495 simmäisellä alkiolla 1-1(1), siirtofunktiomatriisin ensimmäisen rivin toinen alkio P(1,2) kerrotaan siirtofunktion toisella alkiolla H(2) jne. Vastaavasti kerrotaan siirtofunktiomatriisin muiden rivien alkiot. Tämän jälkeen laskenta suoritetaan vastaavasti sarakkeittain, jolloin siirtofunktiomatriisin sarak-5 keet muokataan samalla siirtofunktiolla siten, että ensimmäisen sarakkeen ensimmäinen alkio P(1,1) kerrotaan siirtofunktion ensimmäisellä alkiolla H(1) jne.
Esillä olevan keksinnön mukainen menetelmä ei rajoitu pelkästään 10 MPEG-standardin mukaiseen videosignaaliin, vaan menetelmää voidaan soveltaa myös muuhun datasignaaliin, joka voidaan sopivalla muunnoksella saada matriisimuotoon. Muokattavan matriisin kokoa ei ole rajoitettu 8 x 8-kokoiseksi vaan se voi olla myös tätä pienempi tai suurempi.
15 Esillä olevan keksinnön mukaisessa menetelmässä siirtofunktio voi riippua myös useammasta muuttujasta, kuten muokattavan alkion suunnasta kiinteään pisteeseen nähden.
Keksintöä voidaan soveltaa myös n-ulotteisessa matriisimuodossa ole-20 vien signaalien käsittelyyn, jossa n > 2.
Lisäksi keksintöä voidaan soveltaa siten, että kukin muodostetun siirtofunktiomatriisin P(i,j) alkio muokataan samalla painokertoimella Z. Muokkaus suoritetaan edullisesti kertomalla jokainen siirtofunktiomatriisin P(i,j) 25 alkio ko. painokertoimella Z. Etenkin vastaanottimessa toteutettuna voidaan siirtofunktiomatriisin vaikutusvoimakkuutta säätää painokertoimen Z avulla katsojan kannalta sopivimman lopputuloksen saavuttamiseksi. Tällöin muokkaus voidaan sopivimmin toteuttaa siten, että vastaanottimen dekvantisointielimen 33 yhteyteen sijoitetaan yksi siirtofunktiomatriisi P(i,j) 30 sekä yksi tai useampia painokertoimia Z, jotka voivat olla myös säädettäviä.
« • · • ·« l!

Claims (12)

97495
1. Menetelmä n-ulotteiseen matriisimuotoon muunnetun ja n-ulotteisella kvantisointimatriisilla (W(i,j)) käsiteltävän datasignaalin muokkaamiseksi, tunnettu siitä, että n-ulotteista kvantisointimatriisiä (W(i,j)) muokataan n- 5 ulotteisella siirtofunktiomatriisilla (P(i,j)) ennen datasignaalin muokkaamista.
2. Patenttivaatimuksen 1 mukainen menetelmä, tunnettu siitä, että siirtofunktiomatriisin (P(i j)) muodostamiseksi 10. valitaan ainakin yksi siirtofunktio (M(k)), - asetetaan kullekin siirtofunktiolle (H(k)) ainakin yksi kiinteä piste n-ulotteisessa siirtofunktiomatriisissa (P(i,j)), ja - muodostetaan ainakin osa n-ulotteisen siirtofunktiomatriisin (P(i,j)) alkioista ainakin yhdellä siirtofunktiolla (H(k)) siten, että määräetäisyy- 15 dellä kiinteästä pisteestä olevat siirtofunktiomatriisin (P(i,j)) alkiot muodostetaan siirtofunktiosta (H(k)) riippuvalla muokkaussuureella.
3. Patenttivaatimuksen 1 mukainen menetelmä, tunnettu siitä, että matriisit (P(i,j), (W(i,j)) ovat 2-ulotteisia matriiseja. 20
4. Patenttivaatimuksen 2 tai 3 mukainen menetelmä, tunnettu siitä, että kiintopisteeksi valitaan siirtofunktiomatriisin (P(i,j)) ensimmäisen rivin ensimmäisen sarakkeen alkio (P(1,1)).
5. Patenttivaatimuksen 4 mukainen menetelmä, tunnettu siitä, että siirtofunktion (H(k)) kiintopisteeksi valitaan siirtofunktion ensimmäinen alkio (H(1)).
6. Patenttivaatimuksen 1 mukainen menetelmä, tunnettu siitä, että kvantisointimatriisin (W(i,j)) muokkaus suoritetaan datasignaalin lähetys- 30 vaiheessa.
7. Patenttivaatimuksen 1 mukainen menetelmä, tunnettu siitä, että kvantisointimatriisin (W(i,j)) muokkaus suoritetaan datasignaalin vastaanottovaiheessa. 35
8. Patenttivaatimuksen 7 mukainen menetelmä, tunnettu siitä, että vastaanottovaiheessa käytetään ainakin yhtä siirtofunktiomatriisia (P(ij)) 97495 ja ainakin yhtä painokerrointa Z, jolloin muokkausvaiheessa valitaan kulloinkin käytettävä siirtofunktiomatriisi (P(ij)) ja painokerroin Z.
9. Laite n-ulotteiseen matriisimuotoon muunnetun ja n-ulotteisella kvan-5 tisointimatriisilla (W(i,j)) käsiteltävän datasignaalin muokkaamiseksi, joka laite käsittää - välineet (24, 33) kvantisointimatriisin (W(i,j)) tallentamiseksi, ja - välineet (24, 33) datasignaalin muokkaamiseksi kvantisointimatriisilla (W(i,j)), 10 tunnettu siitä, että laite lisäksi käsittää - välineet (24, 33) siirtofunktiomatriisin (P(i,j)) tallentamiseksi, ja - välineet (24, 33) kvantisointimatriisin (W(i,j)) muokkaamiseksi siirtofunktiomatriisilla (P(i,j)). 15
10. Patenttivaatimuksen 9 mukainen laite, tunnettu siitä, että laitteeseen on tallennettu ainakin yksi siirtofunktiomatriisi (P(i,j)) ja laite käsittää lisäksi välineet (24, 33) painokertoimen Z tallentamiseksi, jolloin laite käsittää lisäksi välineet (24, 33) muokkauksessa kulloinkin käytettävän siirto- 20 funktiomatriisin (P(i,j)) ja painokertoimen Z valitsemiseksi.
11. Patenttivaatimuksen 9 mukainen laite, tunnettu siitä, että se on sijoitettu datasignaalin lähetyksessä käytettävään kooderiin (21).
12. Patenttivaatimuksen 9 mukainen laite, tunnettu siitä, että se on sijoi tettu datasignaalin vastaanotossa käytettävään dekooderiin (31). . · · 97495
FI950511A 1995-02-06 1995-02-06 Menetelmä kuvan terävöittämiseksi FI97495C (fi)

Priority Applications (4)

Application Number Priority Date Filing Date Title
FI950511A FI97495C (fi) 1995-02-06 1995-02-06 Menetelmä kuvan terävöittämiseksi
DE69622895T DE69622895T2 (de) 1995-02-06 1996-01-18 Verfahren zur Aufschärfung eines Bildes in einem digitalen Transformationskodierer
EP96100626A EP0725546B1 (en) 1995-02-06 1996-01-18 Method for picture sharpening in a digital transform coder
US08/598,640 US5822470A (en) 1995-02-06 1996-02-06 Method for picture sharpening in a digital video transmission system using signal compression

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FI950511 1995-02-06
FI950511A FI97495C (fi) 1995-02-06 1995-02-06 Menetelmä kuvan terävöittämiseksi

Publications (3)

Publication Number Publication Date
FI950511A0 FI950511A0 (fi) 1995-02-06
FI97495B FI97495B (fi) 1996-09-13
FI97495C true FI97495C (fi) 1996-12-27

Family

ID=8542765

Family Applications (1)

Application Number Title Priority Date Filing Date
FI950511A FI97495C (fi) 1995-02-06 1995-02-06 Menetelmä kuvan terävöittämiseksi

Country Status (4)

Country Link
US (1) US5822470A (fi)
EP (1) EP0725546B1 (fi)
DE (1) DE69622895T2 (fi)
FI (1) FI97495C (fi)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0788070A3 (en) * 1996-01-31 1998-08-19 EASTMAN KODAK COMPANY (a New Jersey corporation) Method for forming a digital sharpening/blurring filter
US6734991B1 (en) * 1999-09-24 2004-05-11 Xerox Corporation Method and apparatus for determining halftone line frequency estimates using MIN/MAX detection
US20060285588A1 (en) * 2005-06-21 2006-12-21 Imagia Technologies Video encoder and encoding method with updateable quantization table

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0262460A3 (de) * 1986-09-30 1989-10-25 Siemens Aktiengesellschaft Anordnung zur optimierten Gewichtung uebertragener Transformationskoeffizienten bei Transformationscodierern zum Zwecke der Minimierung von Faltungsverzerrungen
EP0396846B1 (en) * 1989-05-12 1993-04-28 Rai Radiotelevisione Italiana Improved device for dct encoding of digital video signals
JP2876258B2 (ja) * 1991-01-23 1999-03-31 株式会社リコー デジタル電子スチルカメラ
US5293434A (en) * 1991-04-10 1994-03-08 International Business Machines Corporation Technique for use in a transform coder for imparting robustness to compressed image data through use of global block transformations
JPH05167863A (ja) * 1991-04-15 1993-07-02 Canon Inc 画像処理方法及び装置
US5539836A (en) * 1991-12-20 1996-07-23 Alaris Inc. Method and apparatus for the realization of two-dimensional discrete cosine transform for an 8*8 image fragment
JP2822362B2 (ja) * 1992-03-24 1998-11-11 日本ビクター株式会社 ディジタル映像信号の文字多重化方法
KR0148130B1 (ko) * 1992-05-18 1998-09-15 강진구 블럭킹아티팩트를 억제시키는 부호화/복호화 방법 및 그 장치
US5523847A (en) * 1992-10-09 1996-06-04 International Business Machines Corporation Digital image processor for color image compression

Also Published As

Publication number Publication date
DE69622895D1 (de) 2002-09-19
EP0725546A3 (en) 1999-10-13
US5822470A (en) 1998-10-13
EP0725546A2 (en) 1996-08-07
DE69622895T2 (de) 2003-04-24
FI97495B (fi) 1996-09-13
FI950511A0 (fi) 1995-02-06
EP0725546B1 (en) 2002-08-14

Similar Documents

Publication Publication Date Title
US6721359B1 (en) Method and apparatus for motion compensated video coding
EP0818930B1 (en) Video coding method
US5819035A (en) Post-filter for removing ringing artifacts of DCT coding
US7697783B2 (en) Coding device, coding method, decoding device, decoding method, and programs of same
KR100253931B1 (ko) 디지탈 영상 시퀀스의 디코딩 방법 및 장치
KR0168458B1 (ko) 움직임 보상을 갖는 프레임간 혼성 부호기에서의 왜곡을 감소시키는 장치 및 방법 그리고 그에 대한 부호화 시스템
US6587509B1 (en) Reducing undesirable effects of an emphasis processing operation performed on a moving image by adding a noise signal to a decoded uncompressed signal
JP2675529B2 (ja) 映像符号化方法およびその装置
US6075619A (en) Image processing apparatus and method
US5610659A (en) MPEG encoder that concurrently determines video data encoding format and rate control
JPH08237669A (ja) 画像信号処理装置、画像信号処理方法および画像信号復号化装置
KR930018537A (ko) 디지탈 vtr의 영상신호 대역 압축장치
JP2008527789A (ja) エントロピー符号化方法
US5748243A (en) Method for encoding and decoding motion picture as a function of its non-linear characteristic
WO2002102050A2 (en) System and method for enhancing digital video
KR100846774B1 (ko) 블록킹 효과를 제거하기 위한 필터링 방법 및 그 장치
DE69527176T2 (de) Verfahren und Vorrichtung zur Kodierung von Laufbildern
US20020122481A1 (en) Transcoding method and transcoding apparatus
FI97495C (fi) Menetelmä kuvan terävöittämiseksi
JP2003169332A (ja) 画像符号化方法及び画像復号化方法
US5724096A (en) Video signal encoding method and apparatus employing inter-block redundancies
US6320987B1 (en) Pre-DCT residue filter
CN100459714C (zh) 测量区块假像及关联的编码/解码/译码的方法和设备
JP2894335B2 (ja) 画像符号化装置、方法及びプログラムを記録した記録媒体
JPH05227513A (ja) 映像信号伝送装置

Legal Events

Date Code Title Description
BB Publication of examined application