TR201901751T4 - Bir hdr videonun bir ldr video ile birlikte kodlanmasına yönelik yöntem ve cihaz, birlikte kodlanan bir hdr video ve bir ldr videodan birinin yeniden yapılandırılmasına yönelik yöntem ve cihaz ve geçici olmayan depolama ortamı. - Google Patents

Abstract

Buluş sahipleri, LDR içeriği ve HDR kalıntısı kullanılarak HDR içeriğinin temsil edilmesinin problemli olmadığını fark etmişlerdir. Bu nedenle buluş, bunun yerine LDR içeriği, LDR kalıntısı ve küresel aydınlatma verisi kullanılarak HDR içeriğinin temsil edilmesini önermektedir. Yani yüksek dinamik aralıklı bir HDR videonun bir LDR video ile birlikte kodlanmasına yönelik bir yöntem önerilmektedir, LDR video, HDR video içeriğinin daha düşük dinamik aralıklı bir tasvirini sağlamaktadır, yöntem, LDR video ve LDR videonun diğer videosundan bağımsız olan HDR videodan çıkarılan bir başka LDR video ve HDR videonun kodlanmasına ve referans olarak bir video kullanılarak başka videonun tahmini kodlanmasına ve ayrıca HDR videosundan çıkarılan küresel aydınlatma verisinin kayıpsız kodlanmasına yönelik işleme araçlarının kullanılmasını içermektedir. Bu, tahminin daha kararlı olması ve küresel olarak optimal öngörücülerin daha kolay bir şekilde bulunabilmesi avantajına sahiptir.

Description

TEKNIK ALAN Bulus, yüksek dinamik aralllZJEl/ideolarl kodlanmasElalanlEUa yapilBTaktadlEl Özellikle bulus, yüksek dinamik aralllgllîiideolar yüksek dinamik araIlElElideo ile ayn [Içerigi tasvir eden düsük dinamik araliEIEüir video ile birlikte kodlanmasßlania yapüîhaktadß ÖNCEKI TEKNIK Videolar genellikle, igiEliEiElsinyalini temsil etmek üzere sIlEliElbir deger araligil karsiüKi gelen sIEllElbir bit say-a (örnegin 8, 10, 12 veya daha fazla bit) temsil edilmektedir. Bu sekilde temsil edilen Videolara, düsük dinamik aralilZIEiideolar veya kisaca LDR Videolar denilmektedir.

Ancak insan görsel sistemi, daha genis araIiIZta bir igilZHEigiülgliâyabilmektedir. SIlEliigösterim genellikle, özellikle son derece karanliElveya parlak Video görüntü alanlariEUa, yani yüksek veya düsük EHZIIEIKJD alanlarda küçük sinyal degiskenlerinin dogru bir sekilde yeniden yapllând IEIlIhas- imkân tan amaktadlEI HDR (Yüksek Dinamik AraIlEi) formatÇlsinyaIin yüksek bir dogrulugunu bunun tam ElKlHJKJaraligiia tutmak amaclîla örn., 20 ila 64 bit gibi daha fazla bit ile, tamsaylîgösterimine veya hatta kayan gösterime önemli ölçüde uzanan sinyal gösterimi bit derinligine bagIIIB HDR görüntüler veya Videolar, çesitli sekillerde yakalanabilmektedir. Örnegin Dijital Tek Mercek YanslalEkameralar, farklElgKlamalar ile aynEsahnenin ardlSlKl görüntülerini yakalamak için braketleme teknigini kullanabilmektedir, burada Eilîlama, bir görüntü alma prosesi esnaslütla görüntüleme ortamlEia (fotograf filmi veya görüntü sensörü) düsmesine izin verilen Sigil toplam yogunlugudur. FarkIElglKlamalara sahip bu görüntüler, LDR görüntüler olarak temsil edilmektedir. FarklElElama degerleri (EV) için Sekil 1'de örnek niteliginde açllZlandigiüizere, düsük lSlEilîgörüntüler, parlak alanlardaki ayriEtIiârEýakalarken asiEiDElKlügörüntüler, karanlilZI alanlardaki ayrlEtilârlJakalamaktadlB Bu farklElSlKlanan LDR görüntülerin bir HDR görüntü/video ile birlestirilmesiyle, üretilen HDR görüntü/video, karanlllZl alanlardakilerin yanüslû parlak alanlardaki tüm ayrlBtDârElda içermektedir.

Bir HDR görüntü/video, LDR görüntülerle kullanIia yönelik tasarlanan cihazlarla, örn., set üstü kutularlÇlPVR ve eski gösterimlerle kendi kaynak formatia kullanllâmamaktadlü Ancak Ton Eslestirme denilen bir proses, görüntünün temsil edilmesine imkân tan [Eken, özellikle yüksek ve düsük yogunluk aralilîlaria farklElsinyal yogunluk segmentlerinin iyi bir dogrultulmasIEl saglamaktadETon Eslestirme, bir HDR görüntüden tüm ögelerin dogru bir sekilde ISIKlancl [gllîßir LDR görüntü olusturmaktadlE LDR görüntü, hem karanlllîlalanlarda hem de beyaz alanlarda çok daha fazla detayland lEllIhaktadlEl Bu, Sekil 2'de örnek niteliginde açllZlanmaktadlEl HDR, özellikle post-prodüksiyonda kullanllîhaktadlü Tüm özel efektler olmasa da çogu, bir kayan nokta gösterimine sahip HDR görüntüler ile ilgilenmektedir. Dogal sahne ve özel efektlerin karlgtlîllîhasü ayrlîla HDR gösteriminde gerçeklestirilmektedir. Post-prodüksiyon prosesinin sonunda Ton Eslestirme, Görüntü Yönetmeninin kontrolü altIda bir standart, örn., 8/ 10/12-bit ana görüntü olusturmak için yaygI biçimde uygulanmaktadß Ileri islemede uygulanan Ton Eslestirme, yaygI bir sekilde bilinmeyen bir durumdur. aralllgllîgörüntü ögesinin tahmin edilmesine yönelik bir yöntem açllglanmaktadE söz konusu yöntem sunlarEermektedir: tahmin verisi içeren yüksek dinamik aralllZl @örüntü verisinin ve bir HDR kallEtEgörüntü ögesinin aIlEi'naslBsöz konusu LDR görüntü verisinden bir LDR görüntü degerinin çlElartllhîasü söz konusu tahmin verisine dayanarak söz konusu LDR görüntü degerinin degistirilmesi; ve bir HDR görüntü ögesi olusturmak için söz konusu degistirilmis LDR görüntünün söz konusu HDR kallEtÜgörüntü ögesi ile birlestirilmesi.

Doküman MANTIUK R. V.D.: “Backward Compatible High Dynamic Range MPEG Video Compression”(XP040042200), mevcut düsük dinamik arallKlteknolojisinde bir LDR gösteriminin reprodüksiyonuna imkân tanlýlan öncesiyle uyumlu bir HDR kodlama semasIEtunmaktadlEl HDR video, yayglEl uygulamaya göre, ters ton eslestirme adIiIdan sonra bir HDR kallîitEEI hesaplanarak kodlanmaktadlB US 2009/04620 numarallîlpatent dokümani: JPEG veya MPEG gibi mevcut lelglna algoritmalarIan faydalanan, öncesiyle uyumlu bir HDR kodlama semasIlBçlElamaktadE LDR dokusunu HDR dokusu ile bölerek türetilen bir kesirli sinyalin yanßlü LDR sinyalinin ayrüiyrü kodlanmasEönerilmektedir.

HDR görüntüden ayßrak bir kallEtEH-IDR sinyali olusturmayEöneren bir katmanlIJIlDR kodlama semasllâçllîlamaktadlü Doküman LINO CORIA V.D.: “Using temporal correlation for fast and high detailed video tone mapping” (XP031732652), önceden ton eslestirilmis ve alt örneklendirilmis referans çerçevesinde hareket kestirimi gerçeklestirerek bir HDR ayrlötütatman zamansal tahminini açllZlamaktadB BU LUSUN KISA AÇIKLAMASI Bulus sahipleri, LDR içerigi ve HDR kallütlgllullanllârak HDR içeriginin temsil edilmesinin problemli olmad[glIl3lark etmislerdir. Bu nedenle bulus, bunun yerine LDR içerigi, LDR kallEtEEI ve küresel aydIatma verisi kullanilârak HDR içeriginin temsil edilmesini önermektedir.

Yani yüksek dinamik aralllîlübir HDR videonun bir LDR video ile birlikte kodlanmasl yönelik olarak istem 1'e göre bir yöntem ve istem Z'ye göre bir cihaz önerilmektedir, LDR video, HDR video içeriginin daha düsük dinamik aralllglljbir tasvirini saglamaktadlB Önerilen yöntem, LDR video ve LDR videonun diger videosundan bag Iislîlolan HDR videodan çiKlarllân bir baska LDR video ve HDR videonun kodlanmalela ve referans olarak bir video kullanilârak baska videonun tahmini kodlanmaslîila ve ayrEla HDR videosundan çllZlarllân küresel aydIatma verisinin kaylîiblîl kodlanmaleh yönelik isleme araçlarII kullan Miasljlçermektedir. Kodlama cihazlZl söz konusu isleme araçlarIEiÇermektedir.

Bu, çesitli avantajlara sahiptir. Örnegin referans. aynIZbit derinliginden ve tahmin edilen içerikten dolayEtahmin daha kararlIlElve küresel olarak optimal öngörücüler, daha kolay bir sekilde bulunmaktadIEl Buna ek olarak bu yaklasIi, örnegin yüksek gradyanlarda haleler gibi yapaylllZlar tanlüliiadan bu HDR içeriginin alt örneklenmesine imkân tanIiaktadlÜ Ayri& bu yaklasIi, örnegin AVC gibi klasik 8 bitli bir kodlama semasII etkinliginden faydalanmak için uyarlanmaktadlü Kodlama yönteminin ve kodlama cihazII diger avantajIÜ/apliândlünalarll özellikleri, baglü Istemlerde belirtilmektedir.

Ayrlîla yüksek dinamik aralllîllîbir HDR videonun yeniden yapüând Was. yönelik olarak istem 'a göre bir yöntem ve istem 11'e göre bir cihaz önerilmektedir. Söz konusu yeniden yapllândlElna yöntemi, bir LDR videonun kodunun çözülmesine yönelik isleme aracIZI içermektedir, LDR video bir baska LDR videonun kodunun çözülmesine yönelik bir kallEtEl kullanllârak LDR video, HDR video içeriginin daha düsük dinamik aralilZIElbir tasvirini saglamaktadlîl baska LDR video, küresel aydIatma verisinin kodunu çözerek ve küresel aydIatma verisi ve LDR video ve HDR videoyu yeniden yapllândlElnaya yönelik baska LDR videodan birini kullanarak HDR video içeriginin bir baska daha düsük dinamik aralllZlEllasvirini saglamaktadE Yeniden yapüândüna cihazlÇlsöz konusu isleme araçlarIEIçermektedir.

Yeniden yapßndlüna yönteminin ve yeniden yapüândlîilna cihazII diger avantajllZl yapüândlîilnalarll özellikleri, bagllîilstemlerde belirtilmektedir.

Bulus ayrlEla, bir LDR video ile birlikte kodlanan bir HDR videoyu taslýlan bir veri aklSÜ'e/veya geçici olmayan bir depolama ortamIEönermektedir, LDR video, HDR video içeriginin daha düsük bir dinamik aralilZllZllasvirini saglamaktadß HDR video, önerilen kodlama yöntemi veya bunun bir yapilândlülnasl göre LDR video ile birlikte kodlanmaktadE SEKILLERIN KISA AÇIKLAMASI Bulusun örnek niteligindeki yapllândünalarü sekillerde gösterilmektedir ve asaglki tarifnamede daha ayrlEtHJIbir sekilde açilZlanmaktadE Örnek niteligindeki yapllândlElnaIar, yalnlîta bulusu izah etmek için açllZlanmaktadlElancak bulusun açlKIamasIlZl/eya istemlerde tanIilanan kapsamlßlillîllamamaktadlü Sekillerde: Sekil 1 farkllZlglKlamalar ile yakalanan aynüçerigin örnek niteligindeki görüntülerini göstermektedir; Sekil 2 solda, aslEDSiEJElalanlara sahip örnek niteligindeki bir düsük dinamik arallIZJIZI görüntüyü ve sagda, tüm alanlari iyi lglEland-[gllîlkarsHJKl gelen yüksek dinamik arallKlEbir görüntünün ton eslestirmesinden kaynaklanan bir baska düsük dinamik arallKlÜgiörüntüyü göstermektedir; Sekil 3 bulusun bir birinci örnek niteligindeki çerçevesini göstermektedir; Sekil 4 bulusun bir birinci örnek niteligindeki çerçevesini göstermektedir; Sekil 5 bir küresel aydIatma veri çilZlar-I bir birinci örnek niteligindeki yapllândlîilnaslügöstermektedir; Sekil 6 Sekil 5'te gösterilen bir küresel aydIatma veri çlElar-I örnek niteligindeki yapllândlElnalar- karsllllîl gelen bir HDR video yeniden yapllând_I bir birinci örnek niteligindeki yapllândElnaslgöstermektedir.

Sekil 7 bir küresel aydIatma veri çlKbr-I bir ikinci örnek niteligindeki yapllândIEnasIlIgljöstermektedir; ve Sekil 8 Sekil 7'de gösterilen bir küresel ayd Iatma veri çllZlar-I örnek niteligindeki yapllândlîilnasl karsllllîlgelen bir HDR video yeniden yapllând bir ikinci örnek niteligindeki yapllând IEnasIIZjiöstermektedir.

BULUSUN ÖRNEK NITELIGINDEKI YAPILANDIRMALARI Bulus, karsima gelen bir sekilde uyarlanan bir isleme içeren herhangi bir elektronik cihazda gerçeklestirilebiImektedir. Örnegin bulus, bir televizyon, bir görüntülü telefon, bir set üstü kutusu, bir geçit, bir kisisel bilgisayar veya bir dijital video kamerada gerçeklestirilebilmektedir.

Bulusun bazEörnek niteligindeki yaplIând Hnalarüir ana görünümün, örn., H.264/AVC'ye göre görünüm içi tahmini kodlanmlg oldugu çok görünümlü (MVC) bir kodlama semasi dayandlEllB1aktadlEI Ana görünüm, kod çözücünün, MVC semasII bir yard Iicügörünümünün daha fazla kodunu çözüp çözemeyeceginden bagslîl olarak herhangi bir AVC kod çözücü tarafIan kodu çözülebilmektedir. Bu yapllândlülnalarda bir LDR Video, ana görünümde kodlanmaktadlEI Yardnclîgörünüm, ya küresel aydIatma verisi (GID) ya da bir LDR Video kaliEtEÜbermektedir. Küresel aydIatma verisinin (GID), yardlclîgörünümde bulunmamasEI halinde farkIEBJir sekilde örn., MVC kodun kaylîilsleodlanmlSlüst verisi olarak iletilmektedir.

YardncEl görünümün, küresel aydIatma verisi (GID) içerdigi örnek niteligindeki yapüândlîrlnalarda ana görünümün LDR video görüntüsü, bir HDR video görüntüsü olusturmak için söz konusu küresel aydIatma verisine (GID) dayanarak degistirilebilmektedir.

Yard !CL-görünümün, bir LDR video kallEtlîEîçerdigi birinci örnek niteligindeki yapllândlElnalarda ana görünümün LDR video görüntüsü, bir HDR video görüntüsü olusturmak için küresel aydIatma verisine (GID) dayanarak degistirilebilmektedir. Ana görünümün LDR video görüntüsü, ayrlEla bir baska LDR video görüntüsü olusturmak için yardIiclZgörünümde LDR kallEtElideo görüntüsü ile birlestirilebilmektedir.

YardIiclgörünümün, bir LDR video kalütigülserdigi ikinci örnek niteligindeki yapllândlîiinalarda ana görünümün LDR video görüntüsü, bir baska LDR video görüntüsü olusturmak için yard IicIZI görünümde LDR kaIlEtElideo ile birlestirilebilmektedir, burada baska LDR video görüntüsü, bir HDR video görüntüsü olusturmak için küresel ayd atma verisine (GID) dayanarak degistirilebilmektedir.

Söz konusu ikinci örnek niteligindeki yapllândlülnalarda LDR video görüntüsü, HDR video görüntüsünün bir ton eslestirilmis sürümü olabilmektedir, burada kullanilan ton eslestirme (UTM) alakaslîlzllîl örn., bilinmemektedir. Ya post-prodüksiyonda ya da gerçek zamanlEtanlEl üretimlerde kullan Uâbilen pek çok farkIEl'on Eslestirme teknigi vardlEI SonrasIa Sekil 3'te örnek niteliginde tasvir edildigi üzere, kodlaylEEtiarafIia (ENC) bir baska Ton Eslestirme (KTM), sonrasIa HDR videonun bir ikinci LDR Ton Eslestirilmis sürümü olan baska LDR video olusturmak için uygun bir Ton Eslestirme teknigi kullanllârak HDR videoya uygulanabilmektedir. Tercihen ancak zorunlu olmamakla birlikte HDR videonun ikinci LDR Ton Eslestirilmis sürümü, orijinal Ton Eslestirilmis sürüme göre bir kallîitiýßn aza indirmek amaclýla orijinal Ton Eslestirilmis sürüme yaklEUlEl Söz konusu ikinci örnek niteligindeki yapilândünalarda MVC kodlama araçlarEGMVCENC), HDR videonun orijinal LDR Ton Eslestirilmis sürümü ana görünüm olarak kodlamak için kullan [lîhaktadß yani AVC video seklindedir ve tahmini görünümler arasÇI-IDR videonun baska LDR Ton Eslestirilmis sürümünü yardnclîgörünüm olarak kodlamaktadE Iki sürüm görece benzer oldugu için MVC, küçük destek yükü bit akglüia neden olarak ikinci görünümü çok etkili bir biçimde kodlamalIlE KodlaylEEliarafIa (ENC), ikinci LDR Ton Eslestirilmis sürüm ve orijinal HDR videodan sahnenin bir küresel ayd IatHB1asIIGGID) çiiZlarllmaktadlB Insan gözlerinin büyük ayd Iatma farklIDElarIü anlama becerisi olmad lglElçin bu bilginin çok kesin olmasi gerek yoktur. Bu bilgi ayrlEb, kodlama araciiîtla (LLE) tercihen kayßlslîlbir sekilde kodlanacaktlB Örnegin iki LDR sürümü için görünümler arasEllahmin, hareket vektörleri gerektirmedigi için küresel ayd Iatma verisi (GID) hareket vektörlerinin yerine kodlanmaktadlEi Bir diger örnek, üst veri olarak kodlanan küresel ayd Iatma verisidir (GID).

Ortaya çlKlan veri aklgül ana görünümü, orijinal LDR Ton Eslestirilmis videoyu üretmek için hâlihazlîda daglfllüiâ AVC kod çözücüleri tarafIan okunabilmektedir ve bunlar. kodu çözülebilmektedir.

Bulusa göre degistirilen kod çözücüler (DEC), bir küresel aydIatma birlestirici (GIC) orijinal LDR Ton Eslestirilmis videoyu ikinci görünümdeki kallEtEile birlestirerek ve kombinasyonu, küresel ayd atma verisine (GID) göre isleyerek hem orijinal LDR Ton Eslestirilmis videoyu hem de HDR videoyu yeniden üretebilmektedir.

Bu kod çözücü (DEC), bir ana görünümü ve ikinci görünümü yeniden yapilândlülnak için ana görünüm ile birlikte kullanllâbilen bir ikinci görünümün bir kallEt-Eleniden kazanmak Için bir gelen aklgEl kodunu çözen MVC kod çözme araclIilMVCDEC) içermektedir. Ana görünüm veya ikinci görünüm, LDR gösterimlerine kaynak saglamak için çithEblarak verilebilmektedir. Ana görünüm veya ikinci görünüm ayrlîla, HDR videoyu yeniden kazanmak için bir küresel aydIatma birlestiricisinde (GIC) kod çözme araclîl(LLD) kullanilârak kodlanan küresel ayd Iatma verisi (GID) ile birlikte kullanllâbilmektedir. Bu görünüm, küresel ayd atma verisini (GID) çiEarmak için kullanllân LDR videonun, ana görünüm olarak veya ikinci görünüm olarak kullaniülîl kullanllüiayacag. bagIIIolarak kullanilhaktadlîl Bir ikinci LDR Ton Eslestirilmis sürüm olusturmak amaclEa küresel aydlfilatma verisi (GID) ve/veya ton eslestirme (KTM) HDR videoyu çllZlarmak için pek çok uygun uygulama vardlB Bazü örnek niteligindeki durumlar asagüb detaylandlEIBiaktadlE Örnegin küresel ayd Iatma (GID), orijinal LDR Ton Eslestirilmis sürümü ve orijinal HDR videoyu kullanarak çiEarllâbilmektedir. Bu, Sekil 4'te örnek niteliginde açlKlanmaktadlü Sekil 5'te tasvir edilen bir baska örnek niteligindeki durumda, orijinal LDR Ton Eslestirilmis sürümün normallestirilen Ekim. göre HDR videonun normallestirilmis ElKlllEoranÇlküresel aydIatma verisini (GID) çiElarmak için kullanllâbilmektedir. Bu durumda ikinci LDR Ton Eslestirilmis sürüm, orijinal LDR Ton Eslestirilmis sürüm ile özdestir, dolayElîLla ikinci görünümde kodlanabilen hiçbir kallEtlEl/e küresel aydIatma verisi yoktur.

Istege bagllîblarak orijinal LDR Ton Eslestirilmis sürüm ve HDR video, çiElarmadan önce alt örneklenmektedir (SSP).

Sekil 3'te tasvir edilen bir ikinci örnek niteligindeki durumda, ikinci LDR Ton Eslestirilmis sürümün normallestirilen Ekim. göre HDR videonun normallestirilmis ElKllEEJOranlZIküresel ayd Iatma verisini çÜZlarmak için kullanllâbilmektedir, burada ikinci LDR Ton Eslestirilmis sürüm, orijinal HDR videonun bir bilinen ton eslestirmesinden (KTM) kaynaklanmaktadE Yine çllîlarmadan önce ikinci LDR Ton Eslestirilmis sürümü ve HDR videoyu alt örnekleme (SSP) seçenegi va rd lü Hem birinci hem de ikinci örnek niteligindeki durumda normallestirme (NRM), HDR videodan çllîlarllân minimum ve maksimum degerlere göre gerçeklestirilmektedir. IslEIEliKl oranü ikililestirilmektedir (BIN). Küresel aydIatma verisi (GID), ikililestirilen veri ve üst veriden yapllIhaktadE Üst veri, @KIME oranElikililestirmeden (BIN) önce min-maks degerleri ve normallestirmeden (NRM) önce HDR lgIKllügllmin-maks degerleri hakkida bilgilendirmektedir.

AIt-örneklemenin uygulanmasmalinde üst veri ayrlEla, alt-örnekleme parametre verisi hakklEtla bilgilendirmektedir.

Ikinci örnek niteligindeki durumda ikinci LDR Ton Eslestirilmis sürüm, herhangi bir ton eslestirme teknigi ile belirlenebilmektedir.

Bir üçüncü örnek niteligindeki durumda bir kaba @Elandiîiina çllîlarIElQJJygulanmaktadiB Bu, Sekil 7'de örnek niteliginde açüîlanmaktadlü Prensip, orijinal HDR videonun iki bilesene ayriStlEIlIhasIlEl birinci bilesen, her bir görüntünün igKlandlElllmasEhakkIa kabaca bilgi vermektedir ve ikinci bilesen, orijinal HDR videodan kaba SlElandlEnanI giderilmesinin sonucudur, yani orijinal HDR videonun ikinci Ton Eslestirilmis sürümüdür.

Ilk olarak orijinal HDR videonun bir ayrlgm hesaplamasEGDEC) uygulanmaktadlEl Bu ayrElEiI bir örnegi kareköktür ancak diger ayriSlEMar da mümkündür. Sonraslüda ortaya çllZlan video, her bir verinin bir bölgenin (pikseller grubu) ElKlMgiIEBemsil etmesi için alt örneklenmektedir (SSP).

Bu video, kod çözücüye gönderilen Küresel Ayd Iatma Verisinin (GID) bir klgin lîdlan bir Küresel Aydlîilatma Videosunu temsil etmektedir. SonrasIda bu Küresel AydIatma Videosu, her bir noktanIaydIatllßîasImiodelleyen bir Nokta DaglIJBJiEEonksiyonu (PSF) ile evristirilmektedir. Örn., bir LED için bu, bunun uzamsal aydIIatmasEflemsil etmektedir. Sonuç, evrisim bir aslEIIZl örnekleme filtresi islevi gördügü için, formatßrijinal format ile aynlîrblan bir videodur. Ortaya çllaan video, ikinci LDR Ton Eslestirilmis videoyu olusturmak için orijinal HDR video ve Küresel AydIatma Videosu kullanlßrak hesaplanmaktadlB Örnegin, HDR lgIKIEIglII Küresel AydlEIatmaya oranDiiesaplanmaktadB Küresel AydIatma Verisi (GID), Küresel AydIatma Videosu ve bazlîiiist veriler ile meydana getirilmektedir. Üst veri, bir kod çözücünün, tek basIEb veya bir kodlama standardElle üst veriden orijinal HDR video, her bir aydIatma noktasII Nokta DaglIJEiDFonksiyonu (PSF) ve alt-örnekleme yap-El belirleyebilecegi sekilde olusturulmaktadlü Ikinci LDR videoyu hesaplamaya yönelik yöntemlerin çesitlilik gösterebildigi yapllândlElnalarda nihai hesaplama, örn., bölme, ayrlEla sinyallenmektedir.

Sekil 8'de örnek niteliginde tasvir edildigi üzere kod çözücü tarafta bir Küresel AydIatma Birlestiricisi (GIC), Küresel AydIatma Verisini Nokta DagUJEiEFonksiyonu (PSF) ile evristirmek için kullanllîhaktadlB Daha sonra sonuç, kodlaylEDtaraflEUa yapllân hesaplamaylîltersine çevirerek yeniden yapllândlElIlân HDR videoyu olusturmak için kodu çözülen ikinci LDR Ton Eslestirilmis video ile birlikte kullanllüîaktadß Yani kodlaylElIl tarafIa bölme gerçeklestirildiginde, kod çözücü tarafta çarpma gerçeklestirilmektedir.

Bu, özellikle ekranlarda gerçeklestirilen ikili kiplenim teknolojisi ile ekranlara kaynak saglamada yararlIB yani kodlama için kullanllân alt-örnekleme ve PSF'nin ekran alt-örnekleme ve LED PSF'sine karsima gelmesi durumunda ikinci LDR Ton Eslestirilmis Video, LCD panele dogrudan kaynak saglayabilmektedir ve Küresel AydIatma verisi (GID), dogrudan LED panele kaynak saglayabilmektedir.

Bulusun çoklu avantajlarElarasIa, HDTV sistemlerinin standartlarlýla bir retro-uyumluluga sahip HDR videonun etkili kodlanmasII saglanmasEl'ardlEl Ayri& bu bulus, esneklige sahiptir ve spesifik ekran teknolojilerine kolayIlKla uyarlanabilmektedir.

Bu nedenle bulus, endüstrinin pek çok farklüilanlütla uygulanabilmektedir.

Bulusun örnek niteligindeki bir yapliândlîilnasia küresel aydIatma verisi (GID), piksellerin lglKllIlEloranlarIEBullanarak kodlaylEEüarafIa belirlenmektedir. Bu, Sekil 5'te örnek niteliginde açIanmaktadIE Bir küresel aydIatma çlKlarma aracEQGIE), bir HDR videoyu ve söz konusu HDR videonun bir LDR ton eslestirilmis sürümünü girdi olarak almaktadIEve ElKllIlKlvideolarIEl (Y) söz konusu HDR video ve bunun ton eslestirilmis sürümünden çllîlarmaktadlîl Istege baglEl olarak, ortaya çllîlan @KlimaVideolar&It-örneklenmektedir (SUB) ve deger araligl- (n_min; n_maks) normallestirmektedir (NOR), örn., n_min=0 ve n_maks=1'dir. Alternatif olarak, ortaya çlKlan EHZJIJIEJ videolarEl alt-örneklenmemektedir ancak yalnlîta normallestirilmektedir.

SonrasIa, hiç alt-örnekleme olmamasi] halinde bir piksel halinde bölünme olan, normallestirilmis @ama videolar bir öge halinde bölünmesi (DIV) meydana gelmektedir.

Daha sonra ortaya çlKlan ElKlMKIoranlarüb_min ve b_maks kullanllârak ikililestirilmektedir (BIN). N_min, n_maks, b_min ve b_maks ile birlikte ikililestirilen @moranlarüsonrasülda küresel aydIatma verisini (GID) temsil etmektedir.

Sekil 6'da örnek niteliginde tasvir edildigi üzere, kod çözücü alanda küresel aydlElatma verisi (GID), söz konusu HDR videoyu yeniden yapllând [Elnak için HDR videonun LDR ton eslestirilmis sürümü ile birlikte kullanllâbilmektedir.

Yani kod çözücü tarafta b_min, b_maks, n_min ve n_maks, küresel aydlElatma verisinin (GID) ikiligini gidermek (DBN) ve normalligini gidermek (DNM) için kullanilÜiaktadlEl Küresel aydIatma verisinin (GID) çözünürlügünün, yeniden yapliândlîllâcak HDR videonun LDR ton eslestirilmis sürümünün çözünürlügünden daha küçük olmaSÜiialinde normalligi giderilen veri, söz konusu LDR ton eslestirilmis sürümün çözünürlügüne üst-örneklenmektedir. Yeniden yapliândlîllâcak HDR videonun LDR ton eslestirilmis sürümü, n_min ve n_maks kullanilârak normallestirilmektedir. SonrasIa normallestirilen LDR video, HDR videonun yeniden yaplIândlElllBias- neden olan aynEÇözünürlügün normallestirilmesi giderilen verisi ile piksel halinde çarplß1aktadlE Bu örnek niteligindeki yapilândIElnada kullanllân HDR videonun LDR ton eslestirilmis sürümü, ton eslestirmenin bilinmedigi bir LDR ton eslestirilmis sürüm olabilmektedir. Bu durumda, alt-örneklemeyi yürütmemek avantajlEbIabilmektedir çünkü bu, yeniden yapllândlîilân HDR görüntüde yapayliElara neden olabilmektedir.

HDR videonun LDR ton eslestirilmis sürümünün ton eslestirmesinin bilinmesi ve kod çözme taraflEb iletilmesi halinde, yeniden yapllândlîllân HDR'de muhtemel meydana gelen yapayIlElar giderilebilmektedir.

Bulusun örnek niteligindeki bir baska yapliândlünasiütla, küresel aydIatma verisi (GID) de piksellerin ISIEIHJKJ oranlarIEkullanarak kodlayEEtarafIa belirlenmektedir. Ancak bu ilave örnek niteligindeki yapliândlîrinada bir nokta daglIJEhElfonksiyonu, HDR videodan küresel aydIatma verisi olusturmak için kullanllüiaktadß Yani ayrlglînl uygulanmaktadlü Bu, Sekil 7'de örnek niteliginde açllZlanmaktadlB Bir küresel ayd Iatma çllglarma araclIGGIE), bir HDR video almaktadlîlve HDR videonun ayrlglîni IEQDEC) kullanarak, ayrlgtßlân HDR videoyu alt-örnekleyerek (SSP) ve bir nokta dagHJEiElfonksiyonu (PSF) kullanarak alt-örneklenen ayrlgtlElIIhlQ HDR videoyu evristirerek orada küresel aydIatma Verisi (GID) olusturmaktadlEl SonrasIa küresel aydIatma Verisi (GID), bir nokta daglHEiEfonksiyonu (PSF) kullanarak evristirilmektedir ve HDR video, söz konusu HDR videonun bir LDR ton eslestirilmis sürümünü olusturmak amaclýla evrisim sonucu ile piksel halinde bölünmektedir. SonrasIa küresel aydIatma Verisi (GID) ve LDR ton eslestirilmis sürüm kodlanmaktadlElve bir kod çözücüye iletilmektedir veya depolanmaktadlEl HDR videonun kars[l]]ZI gelen yeniden yapilândlElBiasü Sekil 8'de Örnek niteliginde açlElanmaktadlEl Yeniden yapUândlBlâcak HDR videonun küresel ayd Iatma Verisi (GID) ve LDR ton eslestirilmis sürümü alünaktadß SonrasIa küresel aydIatma Verisi (GID), kodlaylîlillaraftakiyle ayn mokta daglIJElEIionksiyonu (PSF) kullanarak evristirilmektedir ve LDR ton eslestirilmis sürüm, söz konusu HDR videoyu yeniden yapllândlilnak amaclýla evrisim ile piksel halinde çarplmiaktadlEl Bulusun örnek niteligindeki bir yapllândlîrlnaslüda, referans olarak bir LDR video kullanllârak tahmini kodlanan yüksek dinamik aralllgllibir HDR videoyu taslýan bir geçici olmayan depolama ortamülardlü LDR video, HDR video içeriginin daha düsük arallKIÜbir tasvirini saglamaktadlEJ LDR video ayri& kodlanmaktadlEl Geçici olmayan depolama ortamlZI referans olarak LDR videoya göre bir baska LDR videonun kodlanmE bir kallîitlgElÜ/e kaylülslîl biçimde kodlanan küresel aydIatma verisini taslaktadlEl burada baska LDR video, HDR video içeriginin bir baska daha düsük dinamik aralllZJEllasvirini saglamaktadlElve küresel aydIatma verisi, baska LDR video kullanllârak HDR videonun yeniden yapllând lEllB1as- imkân tanIiaktadIB Örnek niteligindeki yapllând Binalar araleUa ayrEla, yüksek dinamik aralllZlEliiir görüntü ögesini tahmin etmeye yönelik bir yöntem vardlEl Söz konusu yöntem, düsük dinamik arallkllîgliörüntü verisinin allElnasIEle küresel aydlEIatma verisi ve bir LDR kallEtlgörüntü ögesi içeren yüksek dinamik arallEJEgörüntü verisinin allEinasIElçermektedir. Yöntem ayrlEla, söz konusu LDR görüntü verisinden bir LDR görüntü degerinin çllZlarllBiasIlQ ve bir LDR görüntü ögesi olusturmak için söz konusu LDR görüntü degerinin söz konusu LDR kallEtEgörüntü Ögesi ile birlestirilmesini içermektedir. Son olarak söz konusu LDR görüntü ögesi, bir HDR görüntü ögesi olusturmak için söz konusu küresel ayd Iatma verisine dayanarak degistirilmektedir. Örnek niteligindeki yapüând lElnalar aras-a ayrlEla, yüksek dinamik aralüîlßir görüntü ögesini tahmin etmeye yönelik bir baska yöntem vardlEl Söz konusu yöntem sunlarüçermektedir: tahmin verisi içeren yüksek dinamik aralllggörüntü verisinin ve bir HDR kallEtlgörüntü ögesinin allEInasü söz konusu LDR görüntü verisinden bir LDR görüntü degerinin çlElartlEnaslîlsöz konusu tahmin verisine dayanarak söz konusu LDR görüntü degerinin degistirilmesi; ve bir HDR görüntü ögesi olusturmak Için söz konusu degistirilmis LDR görüntünün söz konusu HDR kallîitEl görüntü ögesi ile birlestirilmesi.

Ve bir baska LDR video ve karsiliKlgelen küresel ayd Iatma verisinin HDR videodan çllZlarllîhasÇl bir birinci LDR videonun bagIislZolarak kodlanmaslîle bir ikinci LDR videonun referans olarak birinci LDR video kullanllârak tahmini kodlanmasÇl/e küresel ayd Iatma verisinin kodlanmasüle yüksek dinamik araIlKlElbir HDR videonun, bir LDR video ile birlikte bir kodlanmasIEl gerçeklestiren örnek niteligindeki bir yapllând @na mevcuttur - burada LDR video, HDR video içeriginin daha düsük bir dinamik aralllZIEtiasvirini saglamaktadE-, burada ya birinci LDR video LDR videodur ve ikinci LDR video baska LDR'dir ya da birinci LDR video baska LDR videodur ve ikinci LDR video LDR videodur.

Claims (1)

1. ISTEMLER 1. Yüksek-Dinamik-Arallklübir videonun, çok-görünümlü bir kodlanmlgl veri akElEda söz konusu Yüksek-Dinamik-Aral[Elm/ideonun bir birinci ton eslestirmesinden (UTM) türetilen bir birinci Düsük-Dinamik-Aralilîllîvideo ile birlikte kodlanmas- yönelik bir yöntem olup, yöntem asag-kileri içermektedir: - söz konusu birinci Düsük-DInamik-AralllîlElvideonun, söz konusu çok-görünümlü kodlanmlglveri aklglElI ana görünümü olarak kodlanmaslü -ana görünüme atllîlia bulunarak görünümler arasEl tahmin ile bir ikinci DÜsük-Dinamik-ArallKlÜideonun kodlanmasÇlsöz konusu ikinci Düsük-Dinamik ArallKIEl video, söz konusu Yüksek-Dinamik-Aral[Ellîlideonun bir ikinci ton eslestirmesi (KTM) ile türetilmektedir; - bir ikinci Düsük-Dinamik-Aral[IZIElvideonun söz konusu kodlanmasü söz konusu çok-görünümlü kodlanmlgl veri aklglElI yardIiclIlgörünümü olarak söz konusu görünümler arasEltahminden kaynaklanan bir görünümler arasEltahmin kallEt-I kodlanmasIEiÇermektedir; - ayrlEla söz konusu çok görünümlü kodlanmlglveri akEEUa ikinci Düsük-Dinamik-AralllZlEl video ve Yüksek-Dinamik-Aral[IZllSlideodan türetilen küresel ayd atma verisinin kaylElslîl biçimde kodlanmasü 2. Yüksek-Dinamik-Aralllgllîlbir videonun, çok-görünümlü bir kodlanmlgl veri aklglüha söz konusu Yüksek-Dinamik-Aral[Klülideonun bir birinci ton eslestirmesinden (UTM) türetilen bir birinci Düsük-Dinamik-ArallKIElideo ile birlikte kodlanmaleb yönelik bir cihaz olup, cihaz asag-kilere yönelik araçlarlîçermektedir: - söz konusu birinci Düsük-Dinamik-Aral[Elülideonun, ana görünüm olarak kodlanmaslsîl - ana görünüme atlflla bulunarak görünümler arasEl tahmin ile bir ikinci Düsük-Dinamik-ArallElÜideonun kodlanmasüsöz konusu ikinci Düsük-Dinamik AraliKIIZI video, söz konusu Yüksek-Dinamik-Aral[EIElideonun bir ikinci ton eslestirmesi (KTM) ile türetilmektedir; - bir ikinci Düsük-Dinamik-AraliEIElideonun söz konusu kodlanmasDyardIicÜgörünüm olarak söz konusu görünümler arasEtahminden kaynaklanan bir görünümler araslîl tahmin kaIlEt-I kodlanmaslübermektedir; - ikinci Düsük-Dinamik-Aral[ElElvideo ve Yüksek-Dinamik-Aral[Elüvideodan türetilen küresel aydIatma verisinin kaylülslîlbiçimde kodlanmaslîl Istem 1'e göre yöntem veya Istem 2'ye göre cihaz olup, burada küresel aydIatma verisinin çkbrüüiasßunlarüçermektedir: Elli]IIiKJvideolarIIYüksek-Dinamik-Aral[ElBlideo ve ikinci Düsük-Dinamik-AraliKlEl videodan çilZlarllIhasü ISIEIHJE videolarII normallestirilmesi, @ENBE videolarIZkullanllârak islenmemis aydIatma verisinin piksel halinde hesaplanmaslZlve islenmemis aydIatma verisinin ikililestirilmesiyle küresel aydIatma verisinin hesaplanmasüyöntem ayrlîla normallesmenin giderilmesine ve/veya ikililesmenin giderilmesine imkân tanlýhn bir veya daha fazla parametrenin kodlanmasIEl içermektedir. üst-örnekleme parametresinin kodlandigiÇl üst-örnekleme parametrelerinin, alt-örneklemenin ters çevrilmesine imkân tan [glÇlIstem 3'e göre yöntem veya cihaz. Küresel aydIatma verisinin, Yüksek-Dinamik-AraliElÜideoda bir ayrlSlEli hesaplamasi. uygulanmaslîl ve ayrlStlElßîlgl videonun alt-örneklenmesi ile çikar-@El ve ikinci Düsük-Dinamik-Aral[IZIElideonun, bir nokta dagllIEilElionksiyonu ile alt-örneklenen videonun evristirilmesi ve evristirilen video ve Yüksek-Dinamik-Aral[Elüvideo kullanilârak ikinci Düsük-Dinamik-Aral[KlElideonun piksel halinde hesaplanmaslîle çlElarIigiÇlIstem 1'e göre yöntem veya Istem Z'ye göre cihaz. Çok görünümlü bir kodlanmElveri aklglüldan bir Yüksek-Dinamik-Aral[EJElideonun yeniden yapllândlîllüiasl yönelik bir yöntem olup, yöntem asagldhkileri içermektedir: - söz konusu çok-görünümlü kodlanmglveri aklglElI bir ana görünümünden bir birinci Düsük-Dinamik-ArallElEl videonun kodunun çözülmesi, söz konusu birinci Düsük-Dinamik-AralüZlÜ/ideo, Yüksek-Dinamik-AralllZlü/ideonun bir birinci daha düsük dinamik araliEJEüasvirini saglamaktadlîj - söz konusu çok görünümlü kodlanmlg veri akElElI bir yardIcEgörünümünden bir görünümler arasEtiahmin kallEt-I kodunun çözülmesi; - söz konusu birinci Düsük-Dinamik-Aralllzlüvideo ve söz konusu görünümler arasEI tahmin kallEtlîlEUan bir ikinci Düsük-Dinamik-AralilZIElideonun kodunun çözülmesi, söz konusu ikinci Düsük-Dinamik-ArallKlÜideo, Yüksek-Dinamik-ArallElDideonun bir ikinci daha düsük dinamik aralllZJlZliasvirini saglamaktadlîj - söz konusu ikinci Düsük-Dinamik-Aral[Klüvideo ve söz konusu çok görünümlü kodlanmlgl veri aklglEdan kaylölsm biçimde kodlanan küresel aydIatma verisinin kodunun çözülmesiyle elde edilen söz konusu küresel aydlElatma verisi kullanllârak Yüksek-Dinamik-Aral[Elülideonun yeniden yapllândlîllîhaslîl Çok görünümlü bir kodlanmlgl video aklgEUan bir Yüksek-Dinamik-Aral[ElElvideonun yeniden yapllândlElIBias. yönelik bir cihaz olup, cihaz asagIkilere yönelik araçlarEl içermektedir: - söz konusu çok-görünümlü kodlanmlglveri aklgElI bir ana görünümünden bir birinci Düsük-Dinamik-AralllZlEl videonun kodunun çözülmesi, söz konusu birinci Düsük-Dinamik-AralllZlIE/ideo, Yüksek-Dinamik-ArallElü/ideonun bir birinci daha düsük dinamik arallKlEliasvirini saglamaktadlîj - söz konusu çok görünümlü kodlanmlSl veri aklglEJI bir yardIicEgörünümünden bir görünümler arasEliahmin kaIlEt-I kodunun çözülmesi; - söz konusu birinci Düsük-Dinamik-AralUZlEl/ideo ve söz konusu görünümler arasü tahmin kaIlEt-an bir ikinci Düsük-Dinamik-AralllîlÜideonun kodunun çözülmesi, söz konusu ikinci Düsük-Dinamik-AralllZlÜideo, Yüksek-Dinamik-AralllZlÜideonun bir ikinci daha düsük dinamik aralllZlthiasvirini saglamaktadlü ve - söz konusu ikinci Düsük-Dinamik-Aral[ElElvideo ve söz konusu çok görünümlü kodlanmlg veri aklglüdan kaylölsm biçimde kodlanan küresel aydIatma verisinin kodunun çözülmesiyle elde edilen söz konusu küresel aydlEIatma verisi kullanlßrak Yüksek-Dinamik-AralllZlElideonun yeniden yapllândlîllüiaslîl Istem 6'ya göre yöntem veya Istem 7'ye göre cihaz olup, burada bir veya daha fazla parametrenin kodu çözülmektedir ve sunlardan en az biri için kullanllüîaktadlEi küresel aydIatma verisinin normallesmesinin giderilmesi, ikililesmesinin giderilmesi ve üst-örneklenmesi. Küresel aydIatma verisinin, kod çözmeden sonra bir nokta daglDEElfonksiyonu ile evristirildigi, Istem 6'ya göre yöntem veya Istem 7'ye göre cihaz. Program bir bilgisayar taraflEUan yürütüldügünde, bilgisayarIIstemIer 1 veya 6'dan birine göre yöntemi gerçeklestirmesine neden olan talimatlar içeren bir bilgisayar programlZl 11. Istem 10'a göre bilgisayar programIEliaslýbn bir veri taslýlîßinyali. 12. Bir bilgisayar tarafIan yürütüldügünde, bilgisayar. Istemler 1 veya 6'dan birine göre yöntemi gerçeklestirmesine neden olan talimatlar içeren bir bilgisayar tarafIan okunabilir