JP7295178B2 - ジオメトリ投影を使用する360度ビデオ符号化 - Google Patents
ジオメトリ投影を使用する360度ビデオ符号化 Download PDFInfo
- Publication number
- JP7295178B2 JP7295178B2 JP2021138935A JP2021138935A JP7295178B2 JP 7295178 B2 JP7295178 B2 JP 7295178B2 JP 2021138935 A JP2021138935 A JP 2021138935A JP 2021138935 A JP2021138935 A JP 2021138935A JP 7295178 B2 JP7295178 B2 JP 7295178B2
- Authority
- JP
- Japan
- Prior art keywords
- predicted
- sample location
- projection
- geometry
- predicted sample
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 claims description 54
- 239000013598 vector Substances 0.000 claims description 38
- 230000001131 transforming effect Effects 0.000 claims description 8
- 238000003860 storage Methods 0.000 claims description 5
- 239000000523 sample Substances 0.000 description 159
- 238000005070 sampling Methods 0.000 description 52
- 238000004891 communication Methods 0.000 description 35
- 238000013507 mapping Methods 0.000 description 34
- 230000006870 function Effects 0.000 description 31
- 238000010586 diagram Methods 0.000 description 26
- 230000008569 process Effects 0.000 description 20
- 230000002123 temporal effect Effects 0.000 description 18
- 238000005516 engineering process Methods 0.000 description 16
- 238000012856 packing Methods 0.000 description 16
- 229910052727 yttrium Inorganic materials 0.000 description 15
- 239000013074 reference sample Substances 0.000 description 14
- 238000001914 filtration Methods 0.000 description 12
- 238000012545 processing Methods 0.000 description 12
- 230000003044 adaptive effect Effects 0.000 description 10
- 238000009795 derivation Methods 0.000 description 9
- 238000013213 extrapolation Methods 0.000 description 5
- 238000000638 solvent extraction Methods 0.000 description 5
- 230000009466 transformation Effects 0.000 description 5
- 241000023320 Luma <angiosperm> Species 0.000 description 4
- 101150014732 asnS gene Proteins 0.000 description 4
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 4
- 230000011218 segmentation Effects 0.000 description 4
- 241000700159 Rattus Species 0.000 description 3
- 230000000903 blocking effect Effects 0.000 description 3
- 230000001413 cellular effect Effects 0.000 description 3
- 230000002093 peripheral effect Effects 0.000 description 3
- 239000011295 pitch Substances 0.000 description 3
- 230000011664 signaling Effects 0.000 description 3
- 239000007787 solid Substances 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 2
- 238000013475 authorization Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000012886 linear function Methods 0.000 description 2
- 229910001416 lithium ion Inorganic materials 0.000 description 2
- QELJHCBNGDEXLD-UHFFFAOYSA-N nickel zinc Chemical compound [Ni].[Zn] QELJHCBNGDEXLD-UHFFFAOYSA-N 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 238000013139 quantization Methods 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 1
- HBBGRARXTFLTSG-UHFFFAOYSA-N Lithium ion Chemical compound [Li+] HBBGRARXTFLTSG-UHFFFAOYSA-N 0.000 description 1
- 238000012952 Resampling Methods 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 238000004873 anchoring Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- OJIJEKBXJYRIBZ-UHFFFAOYSA-N cadmium nickel Chemical compound [Ni].[Cd] OJIJEKBXJYRIBZ-UHFFFAOYSA-N 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000009849 deactivation Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 208000002173 dizziness Diseases 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 229910052987 metal hydride Inorganic materials 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 230000003362 replicative effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
- G06T17/10—Constructive solid geometry [CSG] using solid primitives, e.g. cylinders, cubes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
- G06T17/30—Polynomial surface description
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
- H04N13/117—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation the virtual viewpoint locations being selected by the viewers or determined by viewer tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/194—Transmission of image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/243—Image signal generators using stereoscopic image cameras using three or more 2D image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
- H04N13/344—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] with head-mounted left-right displays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/366—Image reproducers using viewer tracking
- H04N13/383—Image reproducers using viewer tracking for tracking with gaze detection, i.e. detecting the lines of sight of the viewer's eyes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/563—Motion estimation with padding, i.e. with filling of non-object values in an arbitrarily shaped picture block or region for estimation purposes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
- G06T2207/10021—Stereoscopic video; Stereoscopic image sequence
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Geometry (AREA)
- Computer Graphics (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Algebra (AREA)
- Pure & Applied Mathematics (AREA)
- Mathematical Physics (AREA)
- Mathematical Optimization (AREA)
- Mathematical Analysis (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
Description
本出願は、その内容が参照によって本明細書に組み込まれる、2016年7月8日に出願された米国特許仮出願第62/360112号明細書、2016年10月4日に出願された米国特許仮出願第62/404017号明細書、2017年2月24日に出願された米国特許仮出願明細書第62/463242号明細書、および2017年5月3日に出願された米国特許仮出願明細書第62/500605号の利益を主張し、本出願は、これらの優先出願の出願日の利益を主張する。
ue=(φ/2×π)+0.5)×W (1)
ve=(0.5-θ/π)×H (2)
WおよびHは、2D平面ピクチャの幅および高さであることができる。図1Aに示されるように、球上における経度L4と緯度A1との間の交点である点Pは、式(1)および/または(2)を使用して、図1Bにおける2D平面内の一意的な点qにマッピングすることができる。図1Bに示された2D平面内の点qは、例えば、逆投影を介して、図1Aに示された球上の点Pに投影し戻すことができる。図1Bにおける視野(FOV)は、球におけるFOVが、X軸方向では約110度の視野角で、2D平面にマッピングされる例を示している。
X_s=cos(θ)cos(φ) (3)
Y_s=sin(θ) (4)
Z_s=-cos(θ)sin(φ) (5)
X_f=X_s/|Z_s| (6)
Y_f=Y_s/|Z_s| (7)
Z_f=-1 (8)
ここで、|x|は、変数xの絶対値とすることができる。面分NZの2D平面内のPfの座標(uc,vc)は、以下のように計算することができる。
uc=W×(1-X_f)/2 (9)
vc=H×(1-Y_f)/2 (10)
β’=f(β)=sgn(β)(-0.36・β2+1.36・|β|) (13)
u<0、またはu≧W、かつ0≦v<Hである場合、up=u%W、vp=v (17)
v<0である場合、vp=-v-1、up=(u+W/2)%W (18)
v≧Hである場合、vp=2×H-1-v、up=(u+W/2)%W (19)
ここで、WおよびHは、エクイレクタングラピクチャの幅および高さとすることができる。例えば、パディングサンプルロケーション(up,vp)は、点(u,v)のロケーションに基づいて、計算することができる。例えば、点(u,v)が、右または左境界を越える場合、式(17)に基づいて、パディングサンプル(up,vp)を計算することができる。右または左境界を越える点(u,v)のパディングサンプル(up,vp)は、それぞれ、エクイレクタングラピクチャの左または右境界の近くに位置付けられた点に対応することができる。他のパディングサンプルは、式(18)および/または式(19)に対応することができる点(u,v)の位置に基づいて、計算することができる。
|X|≧|Y|、かつ|X|≧|Z|、かつX>0である場合、新しい面分は、PXとすることができる。
|X|≧|Y|、かつ|X|≧|Z|、かつX<0である場合、新しい面分は、NXとすることができる。
|Y|≧|X|、かつ|Y|≧|Z|、かつY>0)である場合、新しい面分は、PYとすることができる。
|Y|≧|X|、かつ|Y|≧|Z|、かつY<0)である場合、新しい面分は、NYとすることができる。
|Z|≧|X|、かつ|Z|≧|Y|、かつZ>0)である場合、新しい面分は、PZとすることができる。
|Z|≧|X|、かつ|Z|≧|Y|、かつZ<0)である場合、新しい面分は、NZとすることができる。
|x|≧|y|である場合、v(x,y)=v(sign(x)(|x|+|y|),0)
|x|<|y|である場合、v(x,y)=v(0,sign(y)(|x|+|y|)
|x|≧|y|である場合、v(x,y)=a×v(x,0)+b×v(0,x)、a=(2×|x|-|y|)/(2×|x|)、b=|y|/(2×|x|)
|x|<|y|である場合、v(x,y)=a×v(y,0)+b×v(0,y)、a=|x|/(2×|y|)、b=(2×|y|-|x|)/(2×|y|)
および/または、図15Bに示された例示的な原理に従って、以下のように、サンプル値を導出することができる。
v(x,y)=a×v(sign(x)(|x|+|y|),0)+b×v(0,sign(y)(|x|+|y|)、a=|x|/(|x|+|y|)、b=|y|/(|x|+|y|)
|X|≧|Y|、かつ|X|≧|Z|、かつX>0である場合、新しい面分は、PXとすることができる。
|X|≧|Y|、かつ|X|≧|Z|、かつX<0である場合、新しい面分は、NXとすることができる。
|Y|≧|X|、かつ|Y|≧|Z|、かつY>0である場合、新しい面分は、PYとすることができる。
|Y|≧|X|、かつ|Y|≧|Z|、かつY<0である場合、新しい面分は、NYとすることができる。
|Z|≧|X|、かつ|Z|≧|Y|、かつZ>0である場合、新しい面分は、PZとすることができる。
|Z|≧|X|、かつ|Z|≧|Y|、かつZ<0である場合、新しい面分は、NZとすることができる。
3D空間からキューブへの3Dから2Dへのマッピングを実行することができる。(X,Y,Z)を使用して、新しい面分において、投影された2D座標(uc’,vc’)を計算することができる。例えば、新しい面分が、NZである場合、式(9)および/または式(10)を使用して、(X,Y,Z)を用いて、(uc’,vc’)を導出することができる。1つまたは複数の座標を、キューブフォーマット/ジオメトリからユニキューブフォーマット/ジオメトリに変換することができる。例えば、キューブ面分内において定義された基準座標(uc’,vc’)を与えられた場合、ユニキューブ面分内において定義された対応する基準座標(u’,v’)を計算することができる。パディングのために使用される、ユニキューブ面分内の基準座標(u’,v’)におけるサンプルは、ユニキューブ面分内の(u’,v’)周囲の整数位置におけるサンプルに補間フィルタを適用することによって、導出することができる。
dW=Ceil(W/mCU_width)×mCU_width-W
dH=Ceil(H/mCU_height)×mCU_height-H
project_geometry_idx[0]=2
project_geometry_idx[1]=0
歪み=||I-Projection(I’,O)||
Claims (20)
- デコーディングの方法であって、
投影ジオメトリと関連付けられた複数の面分を含むフレームパッキングされたピクチャ内における現在のサンプルロケーションを取得するステップであって、前記現在のサンプルロケーションは前記フレームパッキングされたピクチャと関連付けられた第1の面分の中に位置付けられており、前記現在のサンプルロケーションはビデオコンテンツの現在のサンプルと関連付けられている、ステップと、
第1の予測サンプルロケーションを取得するステップであって、前記現在のサンプルは前記第1の予測サンプルロケーションに基づいて予測されることになる、ステップと、
前記第1の予測サンプルロケーションが前記第1の面分の境界の外に位置付けられていると決定するステップと、
前記第1の予測サンプルロケーションが前記第1の面分の前記境界の外に位置付けられているとの前記決定に基づいて、前記第1の予測サンプルロケーションの3D位置を取得するステップであって、前記第1の予測サンプルロケーションの前記3D位置は前記第1の面分と関連付けられている、ステップと、
前記第1の予測サンプルロケーションの前記3D位置に基づいて、第2の予測サンプルロケーションを含む第2の面分を取得するステップと、
前記第2の予測サンプルロケーションとして、前記第2の面分内における前記第1の予測サンプルロケーションの2D平面位置を導出するために、前記第1の予測サンプルロケーションの前記3D位置に、ジオメトリ投影を適用するステップと、
前記第2の予測サンプルロケーションに基づいて、前記ビデオコンテンツと関連付けられた前記現在のサンプルを予測するステップと
を備える方法。 - 前記現在のサンプルがイントラ予測されると決定するステップと、
前記現在のサンプルがイントラ予測されるとの前記決定に基づいて、および、前記第1の予測サンプルロケーションが前記第1の面分の外に位置付けられているとの前記決定に基づいて、前記現在のサンプルと関連付けられたイントラ予測モードに基づいて、前記第1の予測サンプルロケーションを取得するステップと
を備える請求項1に記載の方法。 - 前記現在のサンプルがインター予測されると決定するステップと、
前記現在のサンプルがインター予測されると決定するとの前記決定に基づいて、および、前記第1の予測サンプルロケーションが前記第1の面分の外に位置付けられているとの前記決定に基づいて、前記現在のサンプルと関連付けられた動きベクトルを前記現在のサンプルに適用することによって、前記第1の予測サンプルロケーションを取得するステップと
を備える請求項1に記載の方法。 - 前記投影ジオメトリは、エクイレクタングラ投影、正積投影、キューブマップ投影、8面体投影、または円筒投影のうちの少なくとも1つを含む請求項1に記載の方法。
- 前記投影ジオメトリは第1の投影ジオメトリであり、
前記第1の投影ジオメトリにおける座標を、第2の投影ジオメトリと関連付けられた中間座標に変換するステップであって、前記第1の予測サンプルロケーションの前記3D位置は、前記中間座標で取得され、前記第2の面分内における前記第1の予測サンプルロケーションの前記2D平面位置は、前記中間座標で取得される、ステップと、
前記第2の投影ジオメトリと関連付けられた前記第1の予測サンプルロケーションの前記導出された2D平面位置を、前記第1の投影ジオメトリと関連付けられた前記座標に変換し戻すステップと
をさらに備える請求項1に記載の方法。 - デコーディングのための装置であって、
投影ジオメトリと関連付けられた複数の面分を含むフレームパッキングされたピクチャ内における現在のサンプルロケーションを取得し、前記現在のサンプルロケーションは前記フレームパッキングされたピクチャと関連付けられた第1の面分内に位置付けられており、前記現在のサンプルロケーションはビデオコンテンツの現在のサンプルと関連付けられており、
第1の予測サンプルロケーションを取得するステップであって、前記現在のサンプルは前記第1の予測サンプルロケーションに基づいて予測されることになり、
前記第1の予測サンプルロケーションが前記第1の面分の境界の外に位置付けられていると決定し、
前記第1の予測サンプルロケーションが前記第1の面分の前記境界の外に位置付けられているとの前記決定に基づいて、前記第1の予測サンプルロケーションの3D位置を取得し、前記第1の予測サンプルロケーションの前記3D位置は前記第1の面分と関連付けられており、
前記第1の予測サンプルロケーションの前記3D位置に基づいて、第2の予測サンプルロケーションを含む第2の面分を取得し、
前記第2の予測サンプルロケーションとして、前記第2の面分内における前記第1の予測サンプルロケーションの2D平面位置を導出するために、前記第1の予測サンプルロケーションの前記3D位置に、ジオメトリ投影を適用し、
前記第2の予測サンプルロケーションに基づいて、前記ビデオコンテンツと関連付けられた前記現在のサンプルを予測する
よう構成されたプロセッサ
を備えた装置。 - 前記プロセッサは、
前記現在のサンプルがイントラ予測されると決定し、
前記現在のサンプルがイントラ予測されるとの前記決定に基づいて、および、前記第1の予測サンプルロケーションが前記第1の面分の外に位置付けられているとの前記決定に基づいて、前記現在のサンプルと関連付けられたイントラ予測モードに基づいて、前記第1の予測サンプルロケーションを取得する
よう構成された請求項6に記載の装置。 - 前記プロセッサは、
前記現在のサンプルがインター予測されると決定し、
前記現在のサンプルがインター予測されるとの前記決定に基づいて、および、前記第1の予測サンプルロケーションが前記第1の面分の外に位置付けられているとの前記決定に基づいて、前記現在のサンプルと関連付けられた動きベクトルを前記現在のサンプルに適用することによって、前記第1の予測サンプルロケーションを取得する
よう構成された請求項6に記載の装置。 - 前記投影ジオメトリは、エクイレクタングラ投影、正積投影、キューブマップ投影、8面体投影、または円筒投影のうちの少なくとも1つを含む請求項6に記載の装置。
- 前記投影ジオメトリは第1の投影ジオメトリであり、
前記プロセッサは、
前記第1の投影ジオメトリにおける座標を、第2の投影ジオメトリと関連付けられた中間座標に変換し、前記第1の予測サンプルロケーションの前記3D位置は、前記中間座標で取得され、前記第2の面分内における前記第1の予測サンプルロケーションの前記2D平面位置は、前記中間座標で取得され、
前記第2の投影ジオメトリと関連付けられた前記第1の予測サンプルロケーションの前記導出された2D平面位置を、前記第1の投影ジオメトリと関連付けられた前記座標に変換し戻す
ようさらに構成された請求項6に記載の装置。 - 1つ以上のプロセッサに請求項1乃至5いずれかに記載の方法を実施させる命令を含むコンピュータ読み取り可能記憶媒体。
- エンコーディングのための方法であって、
投影ジオメトリと関連付けられた複数の面分を含むフレームパッキングされたピクチャを含むビデオコンテンツを取得するステップと、
前記フレームパッキングされたピクチャと関連付けられた第1の面分の中に位置付けられている現在のサンプルロケーションを取得するステップであって、前記現在のサンプルロケーションは前記ビデオコンテンツの現在のサンプルと関連付けられている、ステップと、
第1の予測サンプルロケーションを取得するステップであって、前記現在のサンプルは前記第1の予測サンプルロケーションに基づいて予測されることになる、ステップと、
前記第1の予測サンプルロケーションが前記第1の面分の境界の外に位置付けられていると決定するステップと、
前記第1の予測サンプルロケーションが前記第1の面分の前記境界の外に位置付けられているとの前記決定に基づいて、前記第1の予測サンプルロケーションの3D位置を取得するステップであって、前記第1の予測サンプルロケーションの前記3D位置は前記第1の面分と関連付けられている、ステップと、
前記第1の予測サンプルロケーションの前記3D位置に基づいて、第2の予測サンプルロケーションを含む第2の面分を取得するステップと、
前記第2の予測サンプルロケーションとして、前記第2の面分内における前記第1の予測サンプルロケーションの2D平面位置を導出するために、前記第1の予測サンプルロケーションの前記3D位置に、ジオメトリ投影を適用するステップと、
前記現在のサンプルを予測するために、前記第2の予測サンプルロケーションを示している第2の予測サンプルロケーションインジケーションをビデオデータに含めるステップと
を備える方法。 - 前記投影ジオメトリは、エクイレクタングラ投影、正積投影、キューブマップ投影、8面体投影、または円筒投影のうちの少なくとも1つを含む請求項12に記載の方法。
- エンコーディングのための装置であって、
投影ジオメトリと関連付けられた複数の面分を含むフレームパッキングされたピクチャを含むビデオコンテンツを取得し、
前記フレームパッキングされたピクチャと関連付けられた第1の面分の中に位置付けられている現在のサンプルロケーションを取得し、前記現在のサンプルロケーションは前記ビデオコンテンツの現在のサンプルと関連付けられており、
第1の予測サンプルロケーションを取得し、前記現在のサンプルは前記第1の予測サンプルロケーションに基づいて予測されることになり、
前記第1の予測サンプルロケーションが前記第1の面分の境界の外に位置付けられていると決定し、
前記第1の予測サンプルロケーションが前記第1の面分の前記境界の外に位置付けられているとの前記決定に基づいて、前記第1の予測サンプルロケーションの3D位置を取得し、前記第1の予測サンプルロケーションの前記3D位置は前記第1の面分と関連付けられており、
前記第1の予測サンプルロケーションの前記3D位置に基づいて、第2の予測サンプルロケーションを含む第2の面分を取得し、
前記第2の予測サンプルロケーションとして、前記第2の面分内における前記第1の予測サンプルロケーションの2D平面位置を導出するために、前記第1の予測サンプルロケーションの前記3D位置に、ジオメトリ投影を適用し、
前記現在のサンプルを予測するために、前記第2の予測サンプルロケーションを示している第2の予測サンプルロケーションインジケーションをビデオデータに含める
よう構成されたプロセッサ
を備えた装置。 - 前記投影ジオメトリは、エクイレクタングラ投影、正積投影、キューブマップ投影、8面体投影、または円筒投影のうちの少なくとも1つを含む請求項14に記載の装置。
- 前記現在のサンプルがイントラ予測またはインター予測されると決定するステップと、
前記現在のサンプルがイントラ予測されるとの前記決定に基づいて、および、前記第1の予測サンプルロケーションが前記第1の面分の外に位置付けられているとの前記決定に基づいて、前記現在のサンプルと関連付けられたイントラ予測モードに基づいて、前記第1の予測サンプルロケーションを取得するか、または、
前記現在のサンプルがインター予測されるとの前記決定に基づいて、および、前記第1の予測サンプルロケーションが前記第1の面分の外に位置付けられているとの前記決定に基づいて、前記現在のサンプルと関連付けられた動きベクトルを前記現在のサンプルに適用することによって、前記第1の予測サンプルロケーションを取得するステップと
を備える請求項12に記載の方法。 - 前記投影ジオメトリは第1の投影ジオメトリであり、
前記第1の投影ジオメトリにおける座標を、第2の投影ジオメトリと関連付けられた中間座標に変換するステップであって、前記第1の予測サンプルロケーションの前記3D位置は、前記中間座標で取得され、前記第2の面分内における前記第1の予測サンプルロケーションの前記2D平面位置は、前記中間座標で取得される、ステップと、
前記第2の投影ジオメトリと関連付けられた前記第1の予測サンプルロケーションの前記導出された2D平面位置を、前記第1の投影ジオメトリと関連付けられた前記座標に変換し戻すステップと
をさらに備える請求項12に記載の方法。 - 前記プロセッサは、
前記現在のサンプルがイントラ予測またはインター予測されると決定し、
前記現在のサンプルがイントラ予測されるとの前記決定に基づいて、および、前記第1の予測サンプルロケーションが前記第1の面分の外に位置付けられているとの前記決定に基づいて、前記現在のサンプルと関連付けられたイントラ予測モードに基づいて、前記第1の予測サンプルロケーションを取得し、または、
前記現在のサンプルがインター予測されるとの前記決定に基づいて、および、前記第1の予測サンプルロケーションが前記第1の面分の外に位置付けられているとの前記決定に基づいて、前記現在のサンプルと関連付けられた動きベクトルを前記現在のサンプルに適用することによって、前記第1の予測サンプルロケーションを取得する
よう構成された請求項14に記載の装置。 - 前記投影ジオメトリは第1の投影ジオメトリであり、前記プロセッサは、
前記第1の投影ジオメトリにおける座標を、第2の投影ジオメトリと関連付けられた中間座標に変換し、前記第1の予測サンプルロケーションの前記3D位置は、前記中間座標で取得され、前記第2の面分内における前記第1の予測サンプルロケーションの前記2D平面位置は、前記中間座標で取得され、
前記第2の投影ジオメトリと関連付けられた前記第1の予測サンプルロケーションの前記導出された2D平面位置を、前記第1の投影ジオメトリと関連付けられた前記座標に変換し戻す
ようさらに構成された請求項14に記載の装置。 - 1つ以上のプロセッサに請求項12、13、16または17いずれかに記載の方法を実施させる命令を含むコンピュータ読み取り可能記憶媒体。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023094844A JP2023105219A (ja) | 2016-07-08 | 2023-06-08 | ジオメトリ投影を使用する360度ビデオ符号化 |
Applications Claiming Priority (9)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201662360112P | 2016-07-08 | 2016-07-08 | |
US62/360,112 | 2016-07-08 | ||
US201662404017P | 2016-10-04 | 2016-10-04 | |
US62/404,017 | 2016-10-04 | ||
US201762463242P | 2017-02-24 | 2017-02-24 | |
US62/463,242 | 2017-02-24 | ||
US201762500605P | 2017-05-03 | 2017-05-03 | |
US62/500,605 | 2017-05-03 | ||
JP2019500358A JP6983862B2 (ja) | 2016-07-08 | 2017-07-07 | ジオメトリ投影を使用する360度ビデオ符号化 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019500358A Division JP6983862B2 (ja) | 2016-07-08 | 2017-07-07 | ジオメトリ投影を使用する360度ビデオ符号化 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023094844A Division JP2023105219A (ja) | 2016-07-08 | 2023-06-08 | ジオメトリ投影を使用する360度ビデオ符号化 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022000954A JP2022000954A (ja) | 2022-01-04 |
JP7295178B2 true JP7295178B2 (ja) | 2023-06-20 |
Family
ID=59581992
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019500358A Active JP6983862B2 (ja) | 2016-07-08 | 2017-07-07 | ジオメトリ投影を使用する360度ビデオ符号化 |
JP2021138935A Active JP7295178B2 (ja) | 2016-07-08 | 2021-08-27 | ジオメトリ投影を使用する360度ビデオ符号化 |
JP2023094844A Pending JP2023105219A (ja) | 2016-07-08 | 2023-06-08 | ジオメトリ投影を使用する360度ビデオ符号化 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019500358A Active JP6983862B2 (ja) | 2016-07-08 | 2017-07-07 | ジオメトリ投影を使用する360度ビデオ符号化 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023094844A Pending JP2023105219A (ja) | 2016-07-08 | 2023-06-08 | ジオメトリ投影を使用する360度ビデオ符号化 |
Country Status (7)
Country | Link |
---|---|
US (3) | US10887621B2 (ja) |
EP (1) | EP3482563A1 (ja) |
JP (3) | JP6983862B2 (ja) |
KR (3) | KR20190035678A (ja) |
CN (2) | CN117135357A (ja) |
TW (1) | TWI775760B (ja) |
WO (1) | WO2018009746A1 (ja) |
Families Citing this family (112)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
FI20165256L (fi) | 2016-03-24 | 2017-09-25 | Nokia Technologies Oy | Laitteisto, menetelmä ja tietokoneohjelma videokoodaukseen ja -dekoodaukseen |
KR102273199B1 (ko) * | 2016-08-23 | 2021-07-02 | 에스지 디제이아이 테크놀러지 코., 엘티디 | 곡선 뷰 비디오 인코딩/디코딩에서 효율성 향상을 위한 시스템 및 방법 |
CN107801039B (zh) * | 2016-08-30 | 2020-04-14 | 华为技术有限公司 | 运动补偿预测方法和装置 |
KR20190054060A (ko) | 2016-09-02 | 2019-05-21 | 브이아이디 스케일, 인크. | 360도 비디오 정보의 시그널링을 위한 방법 및 시스템 |
EP4084480A1 (en) | 2016-09-09 | 2022-11-02 | Vid Scale, Inc. | Methods and apparatus to reduce latency for 360-degree viewport adaptive streaming |
KR20180029315A (ko) * | 2016-09-12 | 2018-03-21 | 삼성전자주식회사 | 가상 현실 컨텐트의 영상을 투영하기 위한 영상 처리 방법 및 장치 |
AU2016424515B2 (en) * | 2016-09-30 | 2022-06-16 | Huawei Technologies Co., Ltd. | Apparatuses, methods, and computer-readable medium for encoding and decoding a video signal |
WO2018066988A1 (ko) * | 2016-10-04 | 2018-04-12 | 김기백 | 영상 데이터 부호화/복호화 방법 및 장치 |
KR20230010060A (ko) * | 2016-10-04 | 2023-01-17 | 주식회사 비원영상기술연구소 | 영상 데이터 부호화/복호화 방법 및 장치 |
WO2018066980A1 (ko) | 2016-10-04 | 2018-04-12 | 김기백 | 영상 데이터 부호화/복호화 방법 및 장치 |
CN118474340A (zh) * | 2016-10-04 | 2024-08-09 | 有限公司B1影像技术研究所 | 图像数据编码/解码方法、介质和传输数据的方法 |
US20190238888A1 (en) * | 2017-07-17 | 2019-08-01 | Ki Baek Kim | Image data encoding/decoding method and apparatus |
US12035049B2 (en) | 2016-10-06 | 2024-07-09 | B1 Institute Of Image Technology, Inc. | Image data encoding/decoding method and apparatus |
KR20180042098A (ko) * | 2016-10-17 | 2018-04-25 | 에스케이텔레콤 주식회사 | 영상 부호화 또는 복호화하기 위한 장치 및 방법 |
GB2555788A (en) * | 2016-11-08 | 2018-05-16 | Nokia Technologies Oy | An apparatus, a method and a computer program for video coding and decoding |
WO2018117706A1 (ko) * | 2016-12-22 | 2018-06-28 | 주식회사 케이티 | 비디오 신호 처리 방법 및 장치 |
US10999602B2 (en) | 2016-12-23 | 2021-05-04 | Apple Inc. | Sphere projected motion estimation/compensation and mode decision |
US11259046B2 (en) | 2017-02-15 | 2022-02-22 | Apple Inc. | Processing of equirectangular object data to compensate for distortion by spherical projections |
US10924747B2 (en) * | 2017-02-27 | 2021-02-16 | Apple Inc. | Video coding techniques for multi-view video |
US11057643B2 (en) | 2017-03-13 | 2021-07-06 | Mediatek Inc. | Method and apparatus for generating and encoding projection-based frame that includes at least one padding region and at least one projection face packed in 360-degree virtual reality projection layout |
US11004173B2 (en) * | 2017-03-13 | 2021-05-11 | Mediatek Inc. | Method for processing projection-based frame that includes at least one projection face packed in 360-degree virtual reality projection layout |
EP3610647B1 (en) * | 2017-04-26 | 2021-12-08 | Huawei Technologies Co., Ltd. | Apparatuses and methods for encoding and decoding a panoramic video signal |
US11093752B2 (en) * | 2017-06-02 | 2021-08-17 | Apple Inc. | Object tracking in multi-view video |
US10754242B2 (en) | 2017-06-30 | 2020-08-25 | Apple Inc. | Adaptive resolution and projection format in multi-direction video |
GB2563944B (en) * | 2017-06-30 | 2021-11-03 | Canon Kk | 360-Degree video encoding with block-based extension of the boundary of projected parts |
JP7224280B2 (ja) | 2017-07-17 | 2023-02-17 | ビー1、インスティテュート、オブ、イメージ、テクノロジー、インコーポレイテッド | 画像データ符号化/復号化方法及び装置 |
EP3435676A1 (en) * | 2017-07-25 | 2019-01-30 | Thomson Licensing | Method and apparatus for encoding and decoding an omnidirectional video |
US11494870B2 (en) | 2017-08-18 | 2022-11-08 | Mediatek Inc. | Method and apparatus for reducing artifacts in projection-based frame |
US10827159B2 (en) * | 2017-08-23 | 2020-11-03 | Mediatek Inc. | Method and apparatus of signalling syntax for immersive video coding |
US11418816B2 (en) | 2017-09-20 | 2022-08-16 | Vid Scale, Inc. | Handling face discontinuities in 360-degree video coding |
US10818087B2 (en) | 2017-10-02 | 2020-10-27 | At&T Intellectual Property I, L.P. | Selective streaming of immersive video based on field-of-view prediction |
CN118018760A (zh) * | 2017-12-28 | 2024-05-10 | 韩国电子通信研究院 | 图像编码和解码的方法和装置以及存储比特流的记录介质 |
CN117834831A (zh) | 2018-01-16 | 2024-04-05 | Vid拓展公司 | 用于360度视频译码的自适应帧封装 |
WO2019141907A1 (en) * | 2018-01-22 | 2019-07-25 | Nokia Technologies Oy | An apparatus, a method and a computer program for omnidirectional video |
US11212438B2 (en) * | 2018-02-14 | 2021-12-28 | Qualcomm Incorporated | Loop filter padding for 360-degree video coding |
US10721465B2 (en) | 2018-02-14 | 2020-07-21 | Qualcomm Incorporated | Motion compensation for cubemap packed frames |
US10764605B2 (en) * | 2018-02-14 | 2020-09-01 | Qualcomm Incorporated | Intra prediction for 360-degree video |
US10659815B2 (en) | 2018-03-08 | 2020-05-19 | At&T Intellectual Property I, L.P. | Method of dynamic adaptive streaming for 360-degree videos |
US20190289316A1 (en) * | 2018-03-19 | 2019-09-19 | Mediatek Inc. | Method and Apparatus of Motion Vector Derivation for VR360 Video Coding |
WO2019181101A1 (ja) * | 2018-03-19 | 2019-09-26 | ソニー株式会社 | 画像処理装置と画像処理方法 |
KR20190110043A (ko) * | 2018-03-19 | 2019-09-27 | 주식회사 케이티 | 비디오 신호 처리 방법 및 장치 |
US10986371B2 (en) | 2018-03-22 | 2021-04-20 | Mediatek Inc. | Sample adaptive offset filtering method for reconstructed projection-based frame that employs projection layout of 360-degree virtual reality projection |
GB2586095B (en) * | 2018-03-22 | 2023-03-01 | Mediatek Inc | Sample adaptive offset filtering method for reconstructed projection-based frame that employs projection layout of 360-degree virtual reality projection |
KR20190113651A (ko) * | 2018-03-27 | 2019-10-08 | 주식회사 케이티 | 비디오 신호 처리 방법 및 장치 |
JP7253564B2 (ja) * | 2018-03-29 | 2023-04-06 | フラウンホファー ゲセルシャフト ツール フェールデルンク ダー アンゲヴァンテン フォルシュンク エー.ファオ. | パディングのためのイントラ予測モードを選択する装置 |
CN110349226B (zh) * | 2018-04-01 | 2021-06-01 | 浙江大学 | 一种全景图像处理方法及装置 |
EP3777208B1 (en) * | 2018-04-11 | 2021-09-29 | Alcacruz Inc. | Digital media system |
US11917127B2 (en) | 2018-05-25 | 2024-02-27 | Interdigital Madison Patent Holdings, Sas | Monitoring of video streaming events |
KR102435519B1 (ko) * | 2018-06-20 | 2022-08-24 | 삼성전자주식회사 | 360도 영상을 처리하는 방법 및 장치 |
JP7287745B2 (ja) * | 2018-06-26 | 2023-06-06 | ホアウェイ・テクノロジーズ・カンパニー・リミテッド | 点群符号化用の高レベルな構文設計 |
EP3804332A1 (en) | 2018-06-29 | 2021-04-14 | Huawei Technologies Co., Ltd. | Apparatuses and methods for encoding and decoding a video signal |
US11178373B2 (en) | 2018-07-31 | 2021-11-16 | Intel Corporation | Adaptive resolution of point cloud and viewpoint prediction for video streaming in computing environments |
US20200045288A1 (en) * | 2018-07-31 | 2020-02-06 | Intel Corporation | Six degree of freedom video transcoding mechanism |
US11212506B2 (en) | 2018-07-31 | 2021-12-28 | Intel Corporation | Reduced rendering of six-degree of freedom video |
US10893299B2 (en) | 2018-07-31 | 2021-01-12 | Intel Corporation | Surface normal vector processing mechanism |
US10887574B2 (en) | 2018-07-31 | 2021-01-05 | Intel Corporation | Selective packing of patches for immersive video |
US10595000B1 (en) | 2018-08-02 | 2020-03-17 | Facebook Technologies, Llc | Systems and methods for using depth information to extrapolate two-dimentional images |
CN112544078B (zh) * | 2018-08-31 | 2023-03-10 | 联发科技股份有限公司 | 用于虚拟边界的环内滤波的方法和设备 |
US11765349B2 (en) | 2018-08-31 | 2023-09-19 | Mediatek Inc. | Method and apparatus of in-loop filtering for virtual boundaries |
US11094088B2 (en) * | 2018-08-31 | 2021-08-17 | Mediatek Inc. | Method and apparatus of in-loop filtering for virtual boundaries in video coding |
CN112703734A (zh) * | 2018-09-14 | 2021-04-23 | Vid拓展公司 | 用于灵活网格区域的方法和装置 |
TWI822863B (zh) | 2018-09-27 | 2023-11-21 | 美商Vid衡器股份有限公司 | 360度視訊寫碼樣本導出 |
DE102019127349A1 (de) | 2018-10-10 | 2020-04-16 | Intel Corporation | Punktwolkencodierungsstandard-konformitätsdefintion in computerumgebungen |
US11057631B2 (en) | 2018-10-10 | 2021-07-06 | Intel Corporation | Point cloud coding standard conformance definition in computing environments |
US11736713B2 (en) | 2018-11-14 | 2023-08-22 | Tencent America LLC | Constraint on affine model motion vector |
US11706408B2 (en) * | 2018-11-15 | 2023-07-18 | Electronics And Telecommunications Research Institute | Method and apparatus for performing encoding/decoding by using region-based inter/intra prediction technique |
WO2020103933A1 (en) | 2018-11-22 | 2020-05-28 | Beijing Bytedance Network Technology Co., Ltd. | Configuration method for default motion candidate |
US11756153B2 (en) * | 2018-12-31 | 2023-09-12 | Intel Corporation | Hemisphere cube map projection format in imaging environments |
US11089335B2 (en) | 2019-01-14 | 2021-08-10 | Mediatek Inc. | Method and apparatus of in-loop filtering for virtual boundaries |
WO2020156548A1 (en) * | 2019-02-02 | 2020-08-06 | Beijing Bytedance Network Technology Co., Ltd. | Buffer updating for intra block copy in video coding |
CN113519158B (zh) | 2019-03-01 | 2024-06-18 | 北京字节跳动网络技术有限公司 | 用于视频编解码中的帧内块复制的块矢量表示 |
CN117395439A (zh) | 2019-03-01 | 2024-01-12 | 北京字节跳动网络技术有限公司 | 用于视频编解码中的帧内块复制的基于方向的预测 |
CN117640927A (zh) | 2019-03-04 | 2024-03-01 | 北京字节跳动网络技术有限公司 | 视频编解码中的帧内块复制中的实施方式方面 |
WO2020189876A1 (ko) * | 2019-03-15 | 2020-09-24 | 엘지전자 주식회사 | 포인트 클라우드 데이터 송신 장치, 포인트 클라우드 데이터 송신 방법, 포인트 클라우드 데이터 수신 장치 및 포인트 클라우드 데이터 수신 방법 |
US11334969B2 (en) * | 2019-03-19 | 2022-05-17 | Sony Group Corporation | Point cloud geometry padding |
US10979730B2 (en) * | 2019-03-20 | 2021-04-13 | Tencent America LLC | Techniques and apparatus for interframe point cloud attribute coding |
WO2020197966A1 (en) * | 2019-03-22 | 2020-10-01 | Tencent America LLC | Method and apparatus for interframe point cloud attribute coding |
US10904558B2 (en) * | 2019-04-26 | 2021-01-26 | Tencent America LLC | Method and apparatus for motion compensation for 360 video coding |
EP3739880A1 (en) * | 2019-05-14 | 2020-11-18 | Axis AB | Method, device and computer program product for encoding a distorted image frame |
US11979544B2 (en) | 2019-05-24 | 2024-05-07 | Lg Electronics Inc. | 360 video transmission method, 360 video reception method, 360 video transmission apparatus, and 360 video reception apparatus |
CN113994671B (zh) | 2019-06-14 | 2024-05-10 | 北京字节跳动网络技术有限公司 | 基于颜色格式处理视频单元边界和虚拟边界 |
BR112021024638A2 (pt) | 2019-06-14 | 2022-01-18 | Beijing Bytedance Network Tech Co Ltd | Método de processamento de dados de vídeo, aparelho para processamento de dados de vídeo, meio de armazenamento e meio de gravação não transitórios legíveis por computador |
US11190801B2 (en) | 2019-07-02 | 2021-11-30 | Mediatek Inc. | Video encoding method with syntax element signaling of mapping function employed by cube-based projection and associated video decoding method |
US11659206B2 (en) | 2019-07-02 | 2023-05-23 | Mediatek Inc. | Video encoding method with syntax element signaling of guard band configuration of projection-based frame and associated video decoding method and apparatus |
US11190768B2 (en) * | 2019-07-02 | 2021-11-30 | Mediatek Inc. | Video encoding method with syntax element signaling of packing of projection faces derived from cube-based projection and associated video decoding method and apparatus |
BR112022000358A2 (pt) | 2019-07-10 | 2022-05-10 | Beijing Bytedance Network Tech Co Ltd | Método e aparelho para processar dados de vídeo e meios de armazenamento e gravação não transitórios legíveis por computador |
CA3146773A1 (en) * | 2019-07-11 | 2021-01-14 | Beijing Bytedance Network Technology Co., Ltd. | Sample padding in adaptive loop filtering |
JP7323711B2 (ja) | 2019-09-18 | 2023-08-08 | 北京字節跳動網絡技術有限公司 | ビデオコーディングにおける適応ループフィルタの二部分シグナリング |
KR20220061980A (ko) | 2019-09-22 | 2022-05-13 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 적응적 루프 필터링에서의 패딩 프로세스 |
EP4022910A4 (en) | 2019-09-27 | 2022-11-16 | Beijing Bytedance Network Technology Co., Ltd. | ADAPTIVE LOOP FILTERING BETWEEN DIFFERENT VIDEO UNITS |
KR20220071203A (ko) | 2019-10-10 | 2022-05-31 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 적응적 루프 필터링에서 이용 불가능한 샘플 위치들에서의 패딩 프로세스 |
CN114556919A (zh) | 2019-10-10 | 2022-05-27 | 北京字节跳动网络技术有限公司 | 去块滤波的改进 |
EP4042692A4 (en) | 2019-10-29 | 2022-11-30 | Beijing Bytedance Network Technology Co., Ltd. | COMPONENT ADAPTIVE LOOP FILTER |
WO2021115362A1 (en) | 2019-12-11 | 2021-06-17 | Beijing Bytedance Network Technology Co., Ltd. | Sample padding for cross-component adaptive loop filtering |
WO2021118296A1 (ko) * | 2019-12-12 | 2021-06-17 | 엘지전자 주식회사 | 루프 필터링을 제어하는 영상 코딩 장치 및 방법 |
CA3164459A1 (en) * | 2019-12-12 | 2021-06-17 | Lg Electronics Inc. | Filtering-based image coding device and method |
US11671613B2 (en) | 2019-12-30 | 2023-06-06 | Alibaba Group Holding Limited | Methods for signaling virtual boundaries and wrap-around motion compensation |
US11356698B2 (en) | 2019-12-30 | 2022-06-07 | Tencent America LLC | Method for parameter set reference constraints in coded video stream |
US11477490B2 (en) * | 2020-01-03 | 2022-10-18 | Mediatek Inc. | Video processing method with sample adaptive offset filtering disabled across virtual boundary in reconstructed frame and associated video processing apparatus |
CN114982248A (zh) * | 2020-02-17 | 2022-08-30 | 英特尔公司 | 使用基于卷积神经网络(cnn)的滤波器来增强360度视频 |
US20230171431A1 (en) * | 2020-03-11 | 2023-06-01 | Lg Electronics Inc. | Device for transmitting point cloud data, method for transmitting point cloud data, device for receiving point cloud data, and method for receiving point cloud data |
KR102406845B1 (ko) | 2020-04-13 | 2022-06-10 | 엘지전자 주식회사 | 포인트 클라우드 데이터 송신 장치, 포인트 클라우드 데이터 송신 방법, 포인트 클라우드 데이터 수신 장치 및 포인트 클라우드 데이터 수신 방법 |
US11438628B2 (en) * | 2020-06-03 | 2022-09-06 | Tencent America LLC | Hash-based accessing of geometry occupancy information for point cloud coding |
CN113810734B (zh) * | 2020-06-15 | 2024-04-05 | 浙江宇视科技有限公司 | 视频融合方法、装置、设备、系统及计算机可读存储介质 |
EP4173290A4 (en) | 2020-06-30 | 2024-01-10 | Beijing Bytedance Network Technology Co., Ltd. | BOUNDARY LOCATION FOR ADAPTIVE LOOP FILTERING |
US20230291895A1 (en) * | 2020-07-23 | 2023-09-14 | Lg Electronics Inc. | Point cloud data transmission device, point cloud data transmission method, point cloud data reception device, and point cloud data reception method |
US20230290006A1 (en) * | 2020-09-03 | 2023-09-14 | Lg Electronics Inc. | Point cloud data transmission device, point cloud data transmission method, point cloud data reception device, and point cloud data reception method |
US20230334719A1 (en) * | 2020-10-30 | 2023-10-19 | Lg Electronics Inc. | Point cloud data transmission device, point cloud data transmission method, point cloud data reception device, and point cloud data reception method |
WO2022197129A1 (ko) * | 2021-03-19 | 2022-09-22 | 엘지전자 주식회사 | 포인트 클라우드 데이터 송신 장치, 포인트 클라우드 데이터 송신 방법, 포인트 클라우드 데이터 수신 장치 및 포인트 클라우드 데이터 수신 방법 |
US20230306645A1 (en) * | 2022-03-25 | 2023-09-28 | Tencent America LLC | Convolutional Approach to Fast and Compact Packing of 3D Mesh Into 2D Maps |
WO2024007789A1 (en) * | 2022-07-06 | 2024-01-11 | Mediatek Inc. | Prediction generation with out-of-boundary check in video coding |
WO2024080841A1 (ko) * | 2022-10-13 | 2024-04-18 | 한국전자통신연구원 | 영상 부호화/복호화를 위한 방법, 장치 및 기록 매체 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060034530A1 (en) | 2004-08-13 | 2006-02-16 | Samsung Electronics Co., Ltd. | Method and device for making virtual image region for motion estimation and compensation of panorama image |
US20160112704A1 (en) | 2014-10-20 | 2016-04-21 | Google Inc. | Continuous prediction domain |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6331869B1 (en) * | 1998-08-07 | 2001-12-18 | Be Here Corporation | Method and apparatus for electronically distributing motion panoramic images |
US6466254B1 (en) * | 1997-05-08 | 2002-10-15 | Be Here Corporation | Method and apparatus for electronically distributing motion panoramic images |
JP2003141562A (ja) * | 2001-10-29 | 2003-05-16 | Sony Corp | 非平面画像の画像処理装置及び画像処理方法、記憶媒体、並びにコンピュータ・プログラム |
KR100688383B1 (ko) * | 2004-08-13 | 2007-03-02 | 경희대학교 산학협력단 | 파노라마 영상의 움직임 추정 및 보상 |
US7623682B2 (en) | 2004-08-13 | 2009-11-24 | Samsung Electronics Co., Ltd. | Method and device for motion estimation and compensation for panorama image |
CN101853552A (zh) * | 2010-04-20 | 2010-10-06 | 长春理工大学 | 全方位无盲区运动目标检测方法 |
JP2012190299A (ja) | 2011-03-11 | 2012-10-04 | Sony Corp | 画像処理装置および方法、並びにプログラム |
TWI517679B (zh) * | 2011-07-01 | 2016-01-11 | 三星電子股份有限公司 | 利用統一的可獲性檢查以畫面內預測做視訊編碼的方法與裝置以及利用統一的可獲性檢查以畫面內預測做視訊解碼的方法與裝置 |
US8995772B2 (en) * | 2012-11-09 | 2015-03-31 | Microsoft Technology Licensing, Llc | Real-time face detection using pixel pairs |
US10368097B2 (en) * | 2014-01-07 | 2019-07-30 | Nokia Technologies Oy | Apparatus, a method and a computer program product for coding and decoding chroma components of texture pictures for sample prediction of depth pictures |
KR101583646B1 (ko) | 2014-05-12 | 2016-01-19 | (주)헥스하이브 | 전 방위 평면 이미지를 생성하는 방법 및 장치 |
US10204658B2 (en) * | 2014-07-14 | 2019-02-12 | Sony Interactive Entertainment Inc. | System and method for use in playing back panorama video content |
JP6559337B2 (ja) | 2015-09-23 | 2019-08-14 | ノキア テクノロジーズ オーユー | 360度パノラマビデオの符号化方法、符号化装置、及びコンピュータプログラム |
FI20165256L (fi) * | 2016-03-24 | 2017-09-25 | Nokia Technologies Oy | Laitteisto, menetelmä ja tietokoneohjelma videokoodaukseen ja -dekoodaukseen |
WO2017205648A1 (en) | 2016-05-26 | 2017-11-30 | Vid Scale, Inc. | Geometric conversion for 360-degree video coding |
US10523913B2 (en) * | 2017-06-30 | 2019-12-31 | Apple Inc. | Packed image format for multi-directional video |
-
2017
- 2017-07-07 KR KR1020197000642A patent/KR20190035678A/ko not_active Application Discontinuation
- 2017-07-07 US US16/315,447 patent/US10887621B2/en active Active
- 2017-07-07 WO PCT/US2017/041021 patent/WO2018009746A1/en unknown
- 2017-07-07 JP JP2019500358A patent/JP6983862B2/ja active Active
- 2017-07-07 KR KR1020227011309A patent/KR102521272B1/ko active IP Right Grant
- 2017-07-07 CN CN202310928178.1A patent/CN117135357A/zh active Pending
- 2017-07-07 EP EP17751498.1A patent/EP3482563A1/en active Pending
- 2017-07-07 CN CN201780042512.6A patent/CN109417632B/zh active Active
- 2017-07-07 KR KR1020237012023A patent/KR20230051319A/ko active IP Right Grant
- 2017-07-07 TW TW106122881A patent/TWI775760B/zh active
-
2020
- 2020-12-04 US US17/111,683 patent/US11388438B2/en active Active
-
2021
- 2021-08-27 JP JP2021138935A patent/JP7295178B2/ja active Active
-
2022
- 2022-07-08 US US17/860,629 patent/US20220368947A1/en active Pending
-
2023
- 2023-06-08 JP JP2023094844A patent/JP2023105219A/ja active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060034530A1 (en) | 2004-08-13 | 2006-02-16 | Samsung Electronics Co., Ltd. | Method and device for making virtual image region for motion estimation and compensation of panorama image |
US20160112704A1 (en) | 2014-10-20 | 2016-04-21 | Google Inc. | Continuous prediction domain |
Non-Patent Citations (2)
Title |
---|
HANHART, Philippe et al.,AHG8: Reference samples derivation using geometry padding for intra coding,Joint Video Exploration Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 4th Meeting: C,JVET-D0092 (version 1),2016年10月06日,pp. 1-6 |
HE, Yuwen et al.,AHG8: Geometry padding for 360 video coding,Joint Video Exploration Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 4th Meeting: C,JVET-D0075 (version 1),2016年10月06日,pp. 1-10 |
Also Published As
Publication number | Publication date |
---|---|
KR102521272B1 (ko) | 2023-04-12 |
CN109417632B (zh) | 2023-08-04 |
JP6983862B2 (ja) | 2021-12-17 |
US20220368947A1 (en) | 2022-11-17 |
CN109417632A (zh) | 2019-03-01 |
CN117135357A (zh) | 2023-11-28 |
KR20230051319A (ko) | 2023-04-17 |
JP2019525563A (ja) | 2019-09-05 |
US10887621B2 (en) | 2021-01-05 |
EP3482563A1 (en) | 2019-05-15 |
KR20190035678A (ko) | 2019-04-03 |
US20210136413A1 (en) | 2021-05-06 |
KR20220047402A (ko) | 2022-04-15 |
TW201812708A (zh) | 2018-04-01 |
JP2022000954A (ja) | 2022-01-04 |
TWI775760B (zh) | 2022-09-01 |
US11388438B2 (en) | 2022-07-12 |
WO2018009746A1 (en) | 2018-01-11 |
US20190215532A1 (en) | 2019-07-11 |
JP2023105219A (ja) | 2023-07-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7295178B2 (ja) | ジオメトリ投影を使用する360度ビデオ符号化 | |
US20230412839A1 (en) | Geometry Conversion for 360-degree Video Coding | |
JP7357747B2 (ja) | 面連続性を使用する360度ビデオコーディング | |
JP7551994B2 (ja) | 360度ビデオコード化のためのサンプル導出 | |
US20220385942A1 (en) | Face discontinuity filtering for 360-degree video coding | |
CN110999296B (zh) | 解码360度视频的方法、设备及计算机可读介质 | |
EP3741124A1 (en) | Adaptive frame packing for 360-degree video coding | |
WO2018170416A1 (en) | Floating point to integer conversion for 360-degree video projection format conversion and spherical metrics calculation |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210927 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210927 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221129 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230214 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230509 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230608 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7295178 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |