JP5820716B2 - 画像処理装置、画像処理方法、コンピュータプログラム、記録媒体、立体画像表示装置 - Google Patents
画像処理装置、画像処理方法、コンピュータプログラム、記録媒体、立体画像表示装置 Download PDFInfo
- Publication number
- JP5820716B2 JP5820716B2 JP2011273964A JP2011273964A JP5820716B2 JP 5820716 B2 JP5820716 B2 JP 5820716B2 JP 2011273964 A JP2011273964 A JP 2011273964A JP 2011273964 A JP2011273964 A JP 2011273964A JP 5820716 B2 JP5820716 B2 JP 5820716B2
- Authority
- JP
- Japan
- Prior art keywords
- viewpoint
- correction
- pixel
- correction range
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000003672 processing method Methods 0.000 title claims description 12
- 238000004590 computer program Methods 0.000 title claims description 9
- 238000000034 method Methods 0.000 claims description 157
- 238000000605 extraction Methods 0.000 claims description 37
- 238000003860 storage Methods 0.000 claims description 19
- 239000000284 extract Substances 0.000 claims description 8
- 238000010586 diagram Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 230000010354 integration Effects 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 238000010187 selection method Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
- G06T5/94—Dynamic range modification of images or parts thereof based on local image properties, e.g. for local contrast enhancement
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20192—Edge enhancement; Edge preservation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2213/00—Details of stereoscopic systems
- H04N2213/003—Aspects relating to the "2D+depth" image format
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
Description
以下、本発明の実施形態1について図面を参照して詳細に説明する。図1は、本発明の実施形態1に係る画像処理装置10の構成の一例を示す図である。図1に示すように、画像処理装置10は、データ受付部11、記憶部12、奥行きデータ生成部13、任意視点画像データ生成部14、補正管理部15、処理実行部16を備える。
Z(x,y)=bf/d(x,y) ...(式1)
ここで、Z(x,y)は画像上の画素の座標(x,y)における距離、bは基線長、fは焦点距離、d(x,y)は画像上の画素の座標(x,y)における視差値である。
(1)Nを所定値に固定的に設定する。例えば、Nを3などに設定する。この方法によれば、補正範囲を容易に設定することができる。
(2)任意視点画像のサイズを検出し、そのサイズに基づいてNを設定する。例えば、N=round(0.005×width)という式を用いて、Nを算出する。ここで、widthは任意視点画像の横画素数であり、round(x)はxを四捨五入する関数である。例えば、width=1920の場合、N=10となる。この方法によれば、補正範囲を任意視点画像のサイズに合わせて適切に設定することができる。
(3)Nをユーザからの指示に基づいて設定する。例えば、Nを1から10の間で選択できるようにしておき、リモコン(図示せず)などを用いてNの選択をユーザから受け付ける。この方法によれば、ユーザは、自分の思い通りに補正範囲を設定することができる。
上記実施形態1では、視点変更後の奥行きデータからエッジを抽出し、抽出したエッジの位置に基づいて補正範囲の設定や補正処理の選択を行ったが、視点変更後の奥行きデータではエッジの抽出が困難になることがあるため、視点変更前の奥行きデータも用いてエッジの抽出を行うこととしてもよい。
Claims (16)
- 奥行きデータを有する画像データを変換することにより視点が変更された視点変更画像データに対して補正処理を行う画像処理装置であって、
前記視点変更画像データの各画素の奥行きデータを記憶する記憶部と、
該記憶部に記憶された奥行きデータのエッジを抽出するエッジ抽出部と、
該エッジ抽出部により抽出されたエッジの位置の情報に基づいて、前記視点変更画像データの補正範囲を設定する補正範囲設定部と、
前記エッジ抽出部により抽出されたエッジの位置にある画素に対応する前記視点変更画像データの画素の画素値と、該エッジの位置にある画素から所定の画素数だけ離れた画素に対応する前記視点変更画像データの画素の画素値の情報とに基づいて、該視点変更画像データに対して適用する補正処理を選択する処理選択部と、
該処理選択部により選択された補正処理を実行する処理実行部と、
を備えることを特徴とする画像処理装置。 - 前記エッジの抽出は、2次元フィルタを用いて行われることを特徴とする請求項1に記載の画像処理装置。
- 前記補正範囲設定部は、前記エッジの位置にある画素を含む所定の範囲内の画素に対応する前記視点変更画像データの画素の範囲を、前記補正範囲として設定することを特徴とする請求項1または2に記載の画像処理装置。
- 前記補正範囲設定部は、前記視点変更画像データにより形成される画像のサイズを検出し、該サイズの情報と前記エッジの位置の情報に基づいて、前記補正範囲を設定することを特徴とする請求項1または2に記載の画像処理装置。
- 前記補正範囲設定部は、ユーザにより入力された補正範囲設定用の入力情報を受け付け、該入力情報に基づいて前記補正範囲を設定することを特徴とする請求項1または2に記載の画像処理装置。
- 前記処理選択部は、前記補正範囲に基づいて、前記所定の画素数を特定することを特徴とする請求項1〜5のいずれか1項に記載の画像処理装置。
- 前記補正範囲設定部は、前記処理選択部により選択された補正処理に応じて、前記補正範囲を異なる範囲に設定することを特徴とする請求項1〜6のいずれか1項に記載の画像処理装置。
- 前記補正処理は、ジャギーを補正する補正処理、または、アーティファクトを補正する補正処理であることを特徴とする請求項1〜7のいずれか1項に記載の画像処理装置。
- 前記エッジ抽出部は、前記視点を変更する前の画像データに対応する奥行きデータのエッジをさらに抽出し、前記補正範囲設定部は、前記記憶部に記憶された奥行きデータのエッジの位置の情報、および、前記視点を変更する前の奥行きデータのエッジの位置の情報に基づいて、前記補正範囲を設定することを特徴とする請求項1〜8のいずれか1項に記載の画像処理装置。
- 奥行きデータを有する画像データを変換することにより視点が変更された視点変更画像データに対して補正処理を行う画像処理方法であって、
記憶部に記憶された前記視点変更画像データの各画素の奥行きデータのエッジを抽出するエッジ抽出ステップと、
該エッジ抽出ステップにおいて抽出されたエッジの位置の情報に基づいて、前記視点変更画像データの補正範囲を設定する補正範囲設定ステップと、
前記エッジ抽出ステップにおいて抽出されたエッジの位置にある画素に対応する前記視点変更画像データの画素の画素値と、該エッジの位置にある画素から所定の画素数だけ離れた画素に対応する前記視点変更画像データの画素の画素値の情報とに基づいて、該視点変更画像データに対して適用する補正処理を選択する処理選択ステップと、
該処理選択ステップにおいて選択された補正処理を実行する処理実行ステップと、
を含むことを特徴とする画像処理方法。 - 前記処理選択ステップでは、前記補正範囲に基づいて、前記所定の画素数を特定することを特徴とする請求項10に記載の画像処理方法。
- 前記補正範囲設定ステップでは、前記処理選択ステップにおいて選択された補正処理に応じて、前記補正範囲を異なる範囲に設定することを特徴とする請求項10または11に記載の画像処理方法。
- 前記エッジ抽出ステップでは、前記視点を変更する前の画像データに対応する奥行きデータのエッジをさらに抽出し、前記補正範囲設定ステップでは、前記記憶部に記憶された奥行きデータのエッジの位置の情報、および、前記視点を変更する前の奥行きデータのエッジの位置の情報に基づいて、前記補正範囲を設定することを特徴とする請求項10〜12のいずれか1項に記載の画像処理方法。
- 請求項10〜13のいずれか1項に記載の画像処理方法をコンピュータに実行させることを特徴とするコンピュータプログラム。
- 請求項14に記載のコンピュータプログラムを記録したことを特徴とするコンピュータが読み取り可能な記録媒体。
- 請求項1〜9のいずれか1項に記載の画像処理装置と、該画像処理装置により補正処理がなされた前記視点変更画像データを表示する表示装置とを備えたことを特徴とする立体画像表示装置。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011273964A JP5820716B2 (ja) | 2011-12-15 | 2011-12-15 | 画像処理装置、画像処理方法、コンピュータプログラム、記録媒体、立体画像表示装置 |
US14/364,116 US20140321767A1 (en) | 2011-12-15 | 2012-12-13 | Image processing device, image processing method, recording medium, and stereoscopic image display device |
PCT/JP2012/082335 WO2013089183A1 (ja) | 2011-12-15 | 2012-12-13 | 画像処理装置、画像処理方法、コンピュータプログラム、記録媒体、立体画像表示装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011273964A JP5820716B2 (ja) | 2011-12-15 | 2011-12-15 | 画像処理装置、画像処理方法、コンピュータプログラム、記録媒体、立体画像表示装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013125422A JP2013125422A (ja) | 2013-06-24 |
JP5820716B2 true JP5820716B2 (ja) | 2015-11-24 |
Family
ID=48612625
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011273964A Expired - Fee Related JP5820716B2 (ja) | 2011-12-15 | 2011-12-15 | 画像処理装置、画像処理方法、コンピュータプログラム、記録媒体、立体画像表示装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20140321767A1 (ja) |
JP (1) | JP5820716B2 (ja) |
WO (1) | WO2013089183A1 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
ITTO20130784A1 (it) * | 2013-09-30 | 2015-03-31 | Sisvel Technology Srl | Method and device for edge shape enforcement for visual enhancement of depth image based rendering |
CN106937104B (zh) * | 2015-12-31 | 2019-03-26 | 深圳超多维科技有限公司 | 一种图像处理方法及装置 |
CN106937103B (zh) * | 2015-12-31 | 2018-11-30 | 深圳超多维科技有限公司 | 一种图像处理方法及装置 |
JP7030452B2 (ja) * | 2017-08-30 | 2022-03-07 | キヤノン株式会社 | 情報処理装置、情報処理装置の制御方法、情報処理システム及びプログラム |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3769850B2 (ja) * | 1996-12-26 | 2006-04-26 | 松下電器産業株式会社 | 中間視点画像生成方法および視差推定方法および画像伝送方法 |
JP3593466B2 (ja) * | 1999-01-21 | 2004-11-24 | 日本電信電話株式会社 | 仮想視点画像生成方法およびその装置 |
JP2002159022A (ja) * | 2000-11-17 | 2002-05-31 | Fuji Xerox Co Ltd | 視差画像生成装置および視差画像生成方法 |
JP4222817B2 (ja) * | 2002-09-27 | 2009-02-12 | シャープ株式会社 | 立体画像表示装置、記録方法、及び伝送方法 |
KR100735566B1 (ko) * | 2006-04-17 | 2007-07-04 | 삼성전자주식회사 | 이동 통신 단말기를 포인터로 이용하는 시스템 및 그 방법 |
KR101367284B1 (ko) * | 2008-01-28 | 2014-02-26 | 삼성전자주식회사 | 시점 변화에 따른 영상 복원 방법 및 장치 |
-
2011
- 2011-12-15 JP JP2011273964A patent/JP5820716B2/ja not_active Expired - Fee Related
-
2012
- 2012-12-13 US US14/364,116 patent/US20140321767A1/en not_active Abandoned
- 2012-12-13 WO PCT/JP2012/082335 patent/WO2013089183A1/ja active Application Filing
Also Published As
Publication number | Publication date |
---|---|
US20140321767A1 (en) | 2014-10-30 |
JP2013125422A (ja) | 2013-06-24 |
WO2013089183A1 (ja) | 2013-06-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6094863B2 (ja) | 画像処理装置、画像処理方法、プログラム、集積回路 | |
JP3935500B2 (ja) | 動きベクトル演算方法とこの方法を用いた手ぶれ補正装置、撮像装置、並びに動画生成装置 | |
JP6016061B2 (ja) | 画像生成装置、画像表示装置及び画像生成方法並びに画像生成プログラム | |
CN107274338B (zh) | 用于深度图的低等待时间变形的系统、方法和装置 | |
US8941750B2 (en) | Image processing device for generating reconstruction image, image generating method, and storage medium | |
JP6147275B2 (ja) | 立体画像処理装置、立体画像処理方法、及びプログラム | |
KR102149463B1 (ko) | 이미지를 처리하기 위한 전자 장치 및 방법 | |
JP5473173B2 (ja) | 画像処理装置、画像処理方法及び画像処理プログラム | |
WO2013038833A1 (ja) | 画像処理システム、画像処理方法および画像処理プログラム | |
JP6020471B2 (ja) | 画像処理方法、画像処理装置および画像処理プログラム | |
WO2017122810A1 (ja) | 画像処理装置、画像処理方法、画像処理プログラム及び記憶媒体 | |
JP6610535B2 (ja) | 画像処理装置および画像処理方法 | |
TW200926062A (en) | Image generation method and apparatus, program therefor, and storage medium for storing the program | |
JP5820716B2 (ja) | 画像処理装置、画像処理方法、コンピュータプログラム、記録媒体、立体画像表示装置 | |
JP2007053621A (ja) | 画像生成装置 | |
US9270883B2 (en) | Image processing apparatus, image pickup apparatus, image pickup system, image processing method, and non-transitory computer-readable storage medium | |
JP5478533B2 (ja) | 全方位画像生成方法、画像生成装置およびプログラム | |
JP6103942B2 (ja) | 画像データ処理装置及び画像データ処理プログラム | |
JP2009076984A (ja) | 画像処理装置、画像処理方法、プログラム、及び記録媒体 | |
JP5734080B2 (ja) | 情報処理装置、その処理方法及びプログラム | |
JP6937722B2 (ja) | 画像処理装置および画像処理方法 | |
JP6639120B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2024007899A (ja) | 画像処理装置、画像処理方法、およびプログラム | |
JP2016171429A (ja) | 画像補正装置、画像補正方法、及びプログラム | |
JP5701816B2 (ja) | 画像処理装置、画像処理プログラム及び画像処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140918 |
|
TRDD | Decision of grant or rejection written | ||
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20150909 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20150911 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20150915 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150915 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20151005 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5820716 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |