JP6450288B2 - 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法 - Google Patents
画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法 Download PDFInfo
- Publication number
- JP6450288B2 JP6450288B2 JP2015185565A JP2015185565A JP6450288B2 JP 6450288 B2 JP6450288 B2 JP 6450288B2 JP 2015185565 A JP2015185565 A JP 2015185565A JP 2015185565 A JP2015185565 A JP 2015185565A JP 6450288 B2 JP6450288 B2 JP 6450288B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- light field
- field image
- decoding
- base
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
Claims (11)
- ライトフィールドカメラによって得られる第1のライトフィールド画像の符号化を行う画像符号化装置であって、
前記第1のライトフィールド画像に基づいて当該第1のライトフィールド画像を特徴付けるライトフィールド画像パラメータを設定するライトフィールド画像パラメータ設定手段と、
前記第1のライトフィールド画像を使用して、メインレンズと投影面の間にマイクロレンズアレイが挿入されていない構成のカメラで撮影された通常の画像であって、当該第1のライトフィールド画像と同じシーンの前記通常の画像であるベース画像を生成するベース画像生成手段と、
前記ベース画像を符号化するベース画像符号化手段と、
前記ライトフィールド画像パラメータに従って、前記ベース画像を使用して、符号化対象ライトフィールド画像に対する第2のライトフィールド画像を生成するライトフィールド画像生成手段と、
前記第2のライトフィールド画像を予測画像としながら、符号化対象の前記第1のライトフィールド画像を符号化してビットストリームを出力するライトフィールド画像符号化手段と
を備え、
前記ベース画像生成手段は、前記第1のライトフィールド画像における前記ライトフィールドカメラのメインレンズの中央に位置するマイクロレンズの画像であるサブアパチャ画像を前記ベース画像として生成する画像符号化装置。 - ライトフィールドカメラによって得られる第1のライトフィールド画像の符号化を行う画像符号化装置であって、
前記第1のライトフィールド画像に基づいて当該第1のライトフィールド画像を特徴付けるライトフィールド画像パラメータを設定するライトフィールド画像パラメータ設定手段と、
前記第1のライトフィールド画像を使用して、当該第1のライトフィールド画像と同じシーンの通常の画像であるベース画像を生成するベース画像生成手段と、
前記ベース画像を符号化するベース画像符号化手段と、
前記ライトフィールド画像パラメータに従って、前記ベース画像を使用して、符号化対象ライトフィールド画像に対する第2のライトフィールド画像を生成するライトフィールド画像生成手段と、
前記第2のライトフィールド画像を予測画像としながら、符号化対象の前記第1のライトフィールド画像を符号化してビットストリームを出力するライトフィールド画像符号化手段と
を備え、
前記ベース画像生成手段は、前記第1のライトフィールド画像から画像全面において合焦している全焦点画像を前記ベース画像として生成する画像符号化装置。 - 前記ライトフィールド画像パラメータは、デプスマップである、請求項2に記載の画像符号化装置。
- 前記ライトフィールド画像パラメータは、デプスマップとマイクロレンズの焦点パラメータである、請求項2に記載の画像符号化装置。
- ライトフィールドカメラによって得られる第1のライトフィールド画像のビットストリームから、前記第1のライトフィールド画像の復号を行う画像復号装置であって、
前記第1のライトフィールド画像を特徴付けるパラメータを復号し、復号したパラメータをライトフィールド画像パラメータとして設定するライトフィールド画像パラメータ設定手段と、
メインレンズと投影面の間にマイクロレンズアレイが挿入されていない構成のカメラで撮影された通常の画像であって、前記第1のライトフィールド画像と同じシーンの前記通常の画像であるベース画像を復号するベース画像復号手段と、
前記ライトフィールド画像パラメータに従って、前記ベース画像を使用して、符号化対象ライトフィールド画像に対する第2のライトフィールド画像を生成するライトフィールド画像生成手段と、
前記第2のライトフィールド画像を予測画像としながら、前記第1のライトフィールド画像を復号するライトフィールド画像復号手段と
を備え、
前記ベース画像復号手段では、前記第1のライトフィールド画像における前記ライトフィールドカメラのメインレンズの中央に位置するマイクロレンズの画像であるサブアパチャ画像を前記ベース画像として復号する画像復号装置。 - ライトフィールドカメラによって得られる第1のライトフィールド画像のビットストリームから、前記第1のライトフィールド画像の復号を行う画像復号装置であって、
前記第1のライトフィールド画像を特徴付けるパラメータを復号し、復号したパラメータをライトフィールド画像パラメータとして設定するライトフィールド画像パラメータ設定手段と、
前記第1のライトフィールド画像と同じシーンの通常の画像であるベース画像を復号するベース画像復号手段と、
前記ライトフィールド画像パラメータに従って、前記ベース画像を使用して、符号化対象ライトフィールド画像に対する第2のライトフィールド画像を生成するライトフィールド画像生成手段と、
前記第2のライトフィールド画像を予測画像としながら、前記第1のライトフィールド画像を復号するライトフィールド画像復号手段と
を備え、
前記ベース画像復号手段では、前記第1のライトフィールド画像と同じシーンに対する画像全面において合焦している全焦点画像を前記ベース画像として復号する画像復号装置。 - 前記ライトフィールド画像パラメータは、デプスマップである、請求項5に記載の画像復号装置。
- ライトフィールドカメラによって得られる第1のライトフィールド画像の符号化を行う画像符号化装置が行う画像符号化方法であって、
前記第1のライトフィールド画像に基づいて当該第1のライトフィールド画像を特徴付けるライトフィールド画像パラメータを設定するライトフィールド画像パラメータ設定ステップと、
前記第1のライトフィールド画像を使用して、メインレンズと投影面の間にマイクロレンズアレイが挿入されていない構成のカメラで撮影された通常の画像であって、当該第1のライトフィールド画像と同じシーンの前記通常の画像であるベース画像を生成するベース画像生成ステップと、
前記ベース画像を符号化するベース画像符号化ステップと、
前記ライトフィールド画像パラメータに従って、前記ベース画像を使用して、符号化対象ライトフィールド画像に対する第2のライトフィールド画像を生成するライトフィールド画像生成ステップと、
前記第2のライトフィールド画像を予測画像としながら、符号化対象の前記第1のライトフィールド画像を符号化してビットストリームを出力するライトフィールド画像符号化ステップと
を有し、
前記ベース画像生成ステップにおいて、前記第1のライトフィールド画像における前記ライトフィールドカメラのメインレンズの中央に位置するマイクロレンズの画像であるサブアパチャ画像を前記ベース画像として生成する画像符号化方法。 - ライトフィールドカメラによって得られる第1のライトフィールド画像の符号化を行う画像符号化装置が行う画像符号化方法であって、
前記第1のライトフィールド画像に基づいて当該第1のライトフィールド画像を特徴付けるライトフィールド画像パラメータを設定するライトフィールド画像パラメータ設定ステップと、
前記第1のライトフィールド画像を使用して、当該第1のライトフィールド画像と同じシーンの通常の画像であるベース画像を生成するベース画像生成ステップと、
前記ベース画像を符号化するベース画像符号化ステップと、
前記ライトフィールド画像パラメータに従って、前記ベース画像を使用して、符号化対象ライトフィールド画像に対する第2のライトフィールド画像を生成するライトフィールド画像生成ステップと、
前記第2のライトフィールド画像を予測画像としながら、符号化対象の前記第1のライトフィールド画像を符号化してビットストリームを出力するライトフィールド画像符号化ステップと
を有し、
前記ベース画像生成ステップにおいて、前記第1のライトフィールド画像から画像全面において合焦している全焦点画像を前記ベース画像として生成する画像符号化方法。 - ライトフィールドカメラによって得られる第1のライトフィールド画像のビットストリームから、前記第1のライトフィールド画像の復号を行う画像復号装置が行う画像復号方法であって、
前記第1のライトフィールド画像を特徴付けるパラメータを復号し、復号したパラメータをライトフィールド画像パラメータとして設定するライトフィールド画像パラメータ設定ステップと、
メインレンズと投影面の間にマイクロレンズアレイが挿入されていない構成のカメラで撮影された通常の画像であって、前記第1のライトフィールド画像と同じシーンの前記通常の画像であるベース画像を復号するベース画像復号ステップと、
前記ライトフィールド画像パラメータに従って、前記ベース画像を使用して、符号化対象ライトフィールド画像に対する第2のライトフィールド画像を生成するライトフィールド画像生成ステップと、
前記第2のライトフィールド画像を予測画像としながら、前記第1のライトフィールド画像を復号するライトフィールド画像復号ステップと
を有し、
前記ベース画像復号ステップにおいて、前記第1のライトフィールド画像における前記ライトフィールドカメラのメインレンズの中央に位置するマイクロレンズの画像であるサブアパチャ画像を前記ベース画像として復号する画像復号方法。 - ライトフィールドカメラによって得られる第1のライトフィールド画像のビットストリームから、前記第1のライトフィールド画像の復号を行う画像復号装置が行う画像復号方法であって、
前記第1のライトフィールド画像を特徴付けるパラメータを復号し、復号したパラメータをライトフィールド画像パラメータとして設定するライトフィールド画像パラメータ設定ステップと、
前記第1のライトフィールド画像と同じシーンの通常の画像であるベース画像を復号するベース画像復号ステップと、
前記ライトフィールド画像パラメータに従って、前記ベース画像を使用して、符号化対象ライトフィールド画像に対する第2のライトフィールド画像を生成するライトフィールド画像生成ステップと、
前記第2のライトフィールド画像を予測画像としながら、前記第1のライトフィールド画像を復号するライトフィールド画像復号ステップと
を有し、
前記ベース画像復号ステップにおいて、前記第1のライトフィールド画像と同じシーンに対する画像全面において合焦している全焦点画像を前記ベース画像として復号する画像復号方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015185565A JP6450288B2 (ja) | 2015-09-18 | 2015-09-18 | 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015185565A JP6450288B2 (ja) | 2015-09-18 | 2015-09-18 | 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017060111A JP2017060111A (ja) | 2017-03-23 |
JP6450288B2 true JP6450288B2 (ja) | 2019-01-09 |
Family
ID=58390957
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015185565A Active JP6450288B2 (ja) | 2015-09-18 | 2015-09-18 | 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6450288B2 (ja) |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4874578B2 (ja) * | 2005-06-13 | 2012-02-15 | 三菱電機株式会社 | 画像符号化装置 |
US8155456B2 (en) * | 2008-04-29 | 2012-04-10 | Adobe Systems Incorporated | Method and apparatus for block-based compression of light-field images |
JP2012231377A (ja) * | 2011-04-27 | 2012-11-22 | Olympus Corp | 撮像装置及び画像生成方法 |
JP2014132722A (ja) * | 2013-01-07 | 2014-07-17 | National Institute Of Information & Communication Technology | 立体映像符号化装置、立体映像復号化装置、立体映像符号化方法、立体映像復号化方法、立体映像符号化プログラム及び立体映像復号化プログラム |
JP6105987B2 (ja) * | 2013-03-15 | 2017-03-29 | キヤノン株式会社 | 画像処理装置及びその制御方法 |
JP2015103872A (ja) * | 2013-11-21 | 2015-06-04 | キヤノン株式会社 | 画像符号化装置及び画像復号装置及びそれらの制御方法 |
US10244223B2 (en) * | 2014-01-10 | 2019-03-26 | Ostendo Technologies, Inc. | Methods for full parallax compressed light field 3D imaging systems |
JP6341598B2 (ja) * | 2014-02-26 | 2018-06-13 | 日本放送協会 | 画像符号化装置、画像復号装置、画像符号化プログラム及び画像復号プログラム |
-
2015
- 2015-09-18 JP JP2015185565A patent/JP6450288B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2017060111A (ja) | 2017-03-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10277914B2 (en) | Measuring spherical image quality metrics based on user field of view | |
US8103111B2 (en) | Coding method, electronic camera, recording medium storing coded program, and decoding method | |
EP3465607B1 (en) | Fisheye rendering with lens distortion correction for 360-degree video | |
US10904570B2 (en) | Method for encoding/decoding synchronized multi-view video by using spatial layout information and apparatus of the same | |
Li et al. | Scalable coding of plenoptic images by using a sparse set and disparities | |
JP6417809B2 (ja) | 撮像装置 | |
JP6901468B2 (ja) | 光照射野ベース画像を符号化及び復号する方法と装置、および対応するコンピュータプログラム製品 | |
JP6902537B2 (ja) | ライトフィールドベースの画像の符号化方法および復号方法並びに対応する装置 | |
KR20190004280A (ko) | 360도 비디오에 대한 하이브리드 그래픽들 및 픽셀 도메인 아키텍처 | |
TWI701944B (zh) | 影像處理裝置及影像處理方法 | |
CN111491168A (zh) | 视频编解码方法、解码器、编码器和相关设备 | |
TW202015403A (zh) | 視訊編碼和解碼 | |
JP7345051B2 (ja) | サブピクチャ、スライス、およびタイルをサポートするビデオ符号化 | |
JP2015008387A (ja) | 画像処理装置、画像処理方法およびプログラム並びに撮像装置 | |
JP7085416B2 (ja) | 多視点映像符号化装置およびそのプログラム、ならびに、多視点映像復号装置およびそのプログラム | |
US10630973B2 (en) | Generation and encoding of residual integral images | |
JP2015019326A (ja) | 符号化装置および符号化方法、並びに、復号装置および復号方法 | |
CN110999305A (zh) | 对从全光相机获取的数据中获得的图像视图矩阵进行编码的方法 | |
JP6450288B2 (ja) | 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法 | |
JP6979290B2 (ja) | 画像符号化装置および画像復号化装置、並びに、画像符号化プログラムおよび画像復号化プログラム | |
KR100898700B1 (ko) | 다중 시점의 영상을 이용한 초고해상도 방송 시스템 및방법 | |
ES2967903T3 (es) | Codificador, decodificador y métodos correspondientes utilizando filtrado por interpolación | |
JP2016127372A (ja) | 動画像符号化装置、動画像復号装置、動画像処理システム、動画像符号化方法、動画像復号方法、およびプログラム | |
KR20210129210A (ko) | 비디오 코딩에서의 널 타일 코딩 | |
JP2015162709A (ja) | 画像符号化装置、画像復号装置、画像符号化プログラム及び画像復号プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170728 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180420 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180508 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180709 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180814 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181015 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181204 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181207 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6450288 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |