JP4819834B2 - 立体映像処理装置及び立体映像処理方法 - Google Patents
立体映像処理装置及び立体映像処理方法 Download PDFInfo
- Publication number
- JP4819834B2 JP4819834B2 JP2008052669A JP2008052669A JP4819834B2 JP 4819834 B2 JP4819834 B2 JP 4819834B2 JP 2008052669 A JP2008052669 A JP 2008052669A JP 2008052669 A JP2008052669 A JP 2008052669A JP 4819834 B2 JP4819834 B2 JP 4819834B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- still images
- still
- stereoscopic video
- viewpoint
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Description
図1は、本実施形態に係る立体映像システム1の全体概略構成図である。図1に示すように、立体映像システム1は、ビデオカメラ20、立体映像処理装置100及び三次元ディスプレイ200によって構成される。
図2は、立体映像処理装置100の機能ブロック構成図である。図2に示すように、立体映像処理装置100は、対応関係検出部101、元画像抽出部103及び多視点画像生成部105を備える。
図3は、立体映像システム1の動作フロー図である。具体的には、図3は、立体映像システム1に多視点画像Pの生成及び立体映像210の表示動作フローを示す。
立体映像処理装置100によれば、動画Mを構成する所定の静止画S間の対応関係に基づいて多視点画像Pが生成される。さらに、多視点画像Pの生成に用いられる元画像群が、動画Mを構成する複数の静止画Sの中から所定の条件に基づいて抽出される。このため、画像の特徴点(共通特徴点F)の対応付けの誤りなどを原因とする視点の誤差を抑制できる。つまり、近似的に当該誤差を最小に調整する手法などを用いる頻度が抑えられ、立体映像処理装置100の処理負荷が低減する。
上述したように、本発明の一実施形態を通じて本発明の内容を開示したが、この開示の一部をなす論述及び図面は、本発明を限定するものであると理解すべきではない。この開示から当業者には様々な代替実施の形態が明らかとなろう。
Claims (8)
- 被写体を撮影する単一の撮影装置から取得した動画を用いて立体映像の表示に用いられる多視点画像を生成する立体映像処理装置であって、
取得した前記動画を構成する静止画の集合である静止画群のうち、所定の前記静止画間の対応関係を検出する対応関係検出部と、
所定の条件に基づいて、複数の前記静止画からなる元画像群を抽出する元画像抽出部と、
前記対応関係検出部によって検出された前記対応関係、及び前記元画像抽出部によって抽出された前記元画像群に基づいて、前記多視点画像を生成する多視点画像生成部と
を備え、
前記多視点画像生成部は、
前記元画像群に含まれる少なくとも2組以上の前記静止画に共通な共通特徴点が同一の座標となるように、前記静止画を構成する画素を平行移動させ、
前記共通特徴点が存在しなかった静止画及び前記共通特徴点の信頼性が低いと判断された静止画については、当該静止画の前後に位置する静止画に存在する共通特徴点の位置に基づいて、仮想的な共通特徴点の位置を設定する立体映像処理装置。 - 前記動画は、前記撮影装置と前記被写体との相対位置関係が時間の経過とともに変化するように前記被写体を撮影した画像データである請求項1に記載の立体映像処理装置。
- 前記対応関係検出部は、前記静止画間において共通な特徴を有する共通部分を記述し、前記共通部分を構成する画素または領域における特徴量を含む前記対応関係を検出する請求項1に記載の立体映像処理装置。
- 前記元画像抽出部は、
前記多視点画像の必要数と、
前記対応関係と
のうち、少なくとも何れかによって規定される前記所定の条件に基づいて前記元画像群を抽出する請求項1に記載の立体映像処理装置。 - 前記必要数は、前記立体映像の表示に用いられる表示装置に表示される視点数である請求項4に記載の立体映像処理装置。
- 前記多視点画像生成部は、前記対応関係検出部によって検出された前記対応関係に基づいて、前記元画像群に含まれる前記静止画を構成する画素を平行移動させることによって前記多視点画像を生成する請求項1に記載の立体映像処理装置。
- 前記多視点画像生成部は、前記元画像群に含まれる少なくとも2組以上の前記静止画に共通な特徴点が表示装置に表示される前記立体映像の飛び出し量によって幾何学的に求めることができる座標となるように、前記静止画を構成する画素を平行移動させる請求項6に記載の立体映像処理装置。
- 被写体を撮影する単一の撮影装置から取得した動画を用いて立体映像の表示に用いられる多視点画像を生成する立体映像処理方法であって、
取得した前記動画を構成する静止画の集合である静止画群のうち、所定の前記静止画間の対応関係を検出するステップと、
所定の条件に基づいて、複数の前記静止画からなる元画像群を抽出するステップと、
前記対応関係及び前記元画像群に基づいて、前記多視点画像を生成するステップと
を備え、
前記多視点画像を生成するステップでは、
前記元画像群に含まれる少なくとも2組以上の前記静止画に共通な共通特徴点が同一の座標となるように、前記静止画を構成する画素を平行移動させ、
前記共通特徴点が存在しなかった静止画及び前記共通特徴点の信頼性が低いと判断された静止画については、当該静止画の前後に位置する静止画に存在する共通特徴点の位置に基づいて、仮想的な共通特徴点の位置を設定する立体映像処理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008052669A JP4819834B2 (ja) | 2008-03-03 | 2008-03-03 | 立体映像処理装置及び立体映像処理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008052669A JP4819834B2 (ja) | 2008-03-03 | 2008-03-03 | 立体映像処理装置及び立体映像処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009212728A JP2009212728A (ja) | 2009-09-17 |
JP4819834B2 true JP4819834B2 (ja) | 2011-11-24 |
Family
ID=41185468
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008052669A Active JP4819834B2 (ja) | 2008-03-03 | 2008-03-03 | 立体映像処理装置及び立体映像処理方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4819834B2 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5526233B2 (ja) * | 2010-06-28 | 2014-06-18 | 富士フイルム株式会社 | 立体視用画像撮影装置およびその制御方法 |
JP5507693B2 (ja) * | 2010-08-24 | 2014-05-28 | 富士フイルム株式会社 | 撮像装置およびその動作制御方法 |
TWI435593B (zh) * | 2010-12-30 | 2014-04-21 | Altek Corp | 立體影像拍攝方法 |
WO2012105122A1 (ja) * | 2011-01-31 | 2012-08-09 | 富士フイルム株式会社 | 立体視用画像撮像装置およびその動作制御方法 |
EP3121792B1 (en) | 2014-03-17 | 2019-07-03 | Panasonic Intellectual Property Management Co., Ltd. | Processing device for label information for multi-viewpoint images and processing method for label information |
US10122992B2 (en) * | 2014-05-22 | 2018-11-06 | Disney Enterprises, Inc. | Parallax based monoscopic rendering |
US9843789B2 (en) | 2014-09-08 | 2017-12-12 | Panasonic Intellectual Property Management Co., Ltd. | Still-image extracting method and image processing device for implementing the same |
US9924157B2 (en) | 2015-04-08 | 2018-03-20 | Canon Kabushiki Kaisha | Image processing device, image pickup apparatus, image processing method, and storage medium |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3089306B2 (ja) * | 1993-08-26 | 2000-09-18 | 松下電器産業株式会社 | 立体画像撮像及び表示装置 |
JP4578653B2 (ja) * | 2000-08-24 | 2010-11-10 | 三菱電機株式会社 | 奥行き画像生成装置、奥行き画像生成方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体 |
IL150131A (en) * | 2002-06-10 | 2007-03-08 | Rafael Advanced Defense Sys | A method for turning a series of monoscopic images into a series of stereoscopic images |
JP2006113807A (ja) * | 2004-10-14 | 2006-04-27 | Canon Inc | 多視点画像の画像処理装置および画像処理プログラム |
-
2008
- 2008-03-03 JP JP2008052669A patent/JP4819834B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2009212728A (ja) | 2009-09-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4819834B2 (ja) | 立体映像処理装置及び立体映像処理方法 | |
US9013559B2 (en) | System, method and program for capturing images from a virtual viewpoint | |
US8581961B2 (en) | Stereoscopic panoramic video capture system using surface identification and distance registration technique | |
US8760502B2 (en) | Method for improving 3 dimensional effect and reducing visual fatigue and apparatus enabling the same | |
US9237330B2 (en) | Forming a stereoscopic video | |
US20180192033A1 (en) | Multi-view scene flow stitching | |
JP5849811B2 (ja) | 裸眼立体視用映像データ生成方法 | |
US20110064299A1 (en) | Image processing apparatus and image processing method | |
TWI547901B (zh) | 模擬立體圖像顯示方法及顯示設備 | |
JP2006113807A (ja) | 多視点画像の画像処理装置および画像処理プログラム | |
JP5852093B2 (ja) | 映像処理装置、映像処理方法、プログラム | |
JP5755571B2 (ja) | 仮想視点画像生成装置、仮想視点画像生成方法、制御プログラム、記録媒体、および立体表示装置 | |
JP2013123123A (ja) | ステレオ画像生成装置、ステレオ画像生成方法及びステレオ画像生成用コンピュータプログラム | |
KR20190027079A (ko) | 전자 장치, 그 제어 방법 및 컴퓨터 판독가능 기록 매체 | |
US10148931B2 (en) | Three-dimensional video image display processing device, video information recording medium, video information providing server, and recording medium storing a program | |
US9767580B2 (en) | Apparatuses, methods, and systems for 2-dimensional and 3-dimensional rendering and display of plenoptic images | |
JP2019029721A (ja) | 画像処理装置、画像処理方法およびプログラム | |
US8983125B2 (en) | Three-dimensional image processing device and three dimensional image processing method | |
US9591284B2 (en) | Visually-assisted stereo acquisition from a single camera | |
CN103238340B (zh) | 摄影装置及方法 | |
JP5088973B2 (ja) | 立体撮像装置およびその撮像方法 | |
CN104463958A (zh) | 基于视差图融合的三维超分辨率方法 | |
JP5689693B2 (ja) | 描画処理装置 | |
JP2021002783A (ja) | 奥行きマップ生成装置及びそのプログラム、並びに、立体画像生成装置 | |
JP2013030848A (ja) | 画像処理装置および画像処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100922 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110513 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110517 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110715 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110816 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110901 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140909 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4819834 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |