JP4958233B2 - 多眼視画像作成システム及び多眼視画像作成方法 - Google Patents
多眼視画像作成システム及び多眼視画像作成方法 Download PDFInfo
- Publication number
- JP4958233B2 JP4958233B2 JP2007294270A JP2007294270A JP4958233B2 JP 4958233 B2 JP4958233 B2 JP 4958233B2 JP 2007294270 A JP2007294270 A JP 2007294270A JP 2007294270 A JP2007294270 A JP 2007294270A JP 4958233 B2 JP4958233 B2 JP 4958233B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- pixel
- eye image
- matching
- intermediate position
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Image Processing (AREA)
Description
前記左右外画像の作成は、前記左目画像に近い位置の左外画像については、前記左基準マッチング画像と左目画像との間で画素間距離の外挿によって左外画像を求めて各画素毎に対応する左目画像の画素の色を置き、前記右目画像に近い位置の右外画像については、前記右基準マッチング画像と右目画像との間で画素間距離の外挿によって右外画像を求めて各画素毎に対応する右目画像の画素の色を置くことによって行う多眼視画像作成方法である。
11 入出力部
12 記憶部
13 パターンマッチング処理部
13A パターンマッチング制御部
13B グレースケール変換処理部
13C 左基準類似度演算部
13D 右基準類似度演算部
14 内挿処理部
15 外挿処理部
16 補間処理部
17 画像合成部
Claims (4)
- 左右2台のカメラの撮影した左目画像、右目画像に対して、前記左目画像、右目画像のいずれか一方のステレオ画像を基準にしていずれか他方のステレオ画像との間でパターンマッチングを実施し、前記左目画像、右目画像のいずれか他方のステレオ画像を基準にしていずれか一方のステレオ画像との間でパターンマッチングを実施し、画素毎のマッチング画像を特定し、
前記左右の画素毎のマッチング画像間で画素間距離の内挿によって中間位置画像を求め、
前記左右の画素毎のマッチング画像間で画素間距離の外挿によって右外画像、左外画像を求める多眼視画像作成方法であって、
前記パターンマッチングは、対象画素を中心にして当該対象画素に上下左右に隣接する所定数の画素に対して類似度を求めることによって画素毎のマッチング画像を特定し、かつ、前記左目画像に近い位置の中間位置画像及び左外画像については、当該左目画像を基準にした前記右目画像との間のパターンマッチングにより画素毎の左基準マッチング画像を特定し、前記右目画像に近い位置の中間位置画像及び右外画像については、当該右目画像を基準にした前記左目画像との間のパターンマッチングにより画素毎の右基準マッチング画像を特定し、
前記中間位置画像の作成は、前記左目画像、右目画像間で等間隔に離れた複数枚を作成するものであり、前記左目画像に近い位置の中間位置画像については、前記左基準マッチング画像と左目画像との間で画素間距離の内挿によって左寄り中間位置画像を求めて各画素毎に対応する左目画像の画素の色を置き、前記右目画像に近い位置の中間位置画像については、前記右基準マッチング画像と右目画像との間で画素間距離の内挿によって右寄り中間位置画像を求めて各画素毎に対応する右目画像の画素の色を置くことによって行い、
前記左右外画像の作成は、前記左目画像に近い位置の左外画像については、前記左基準マッチング画像と左目画像との間で画素間距離の外挿によって左外画像を求めて各画素毎に対応する左目画像の画素の色を置き、前記右目画像に近い位置の右外画像については、前記右基準マッチング画像と右目画像との間で画素間距離の外挿によって右外画像を求めて各画素毎に対応する右目画像の画素の色を置くことによって行うことを特徴とする多眼視画像作成方法。 - 前記パターンマッチングには、前記所定数の画素の明暗を正規化した後に類似度を求めることを特徴とする請求項1に記載の多眼視画像作成方法。
- 左右2台のカメラの撮影した左目画像、右目画像の記憶手段と、
前記記憶手段に記憶されている前記左目画像、右目画像を読み出し、いずれか一方のステレオ画像を基準にして他方のステレオ画像との間でパターンマッチングを実施し、またいずれか他方のステレオ画像を基準にして一方のステレオ画像との間でパターンマッチングを実施し、画素毎のマッチング画像を特定するパターンマッチング演算手段と、
前記パターンマッチング演算手段が特定した前記左右の画素毎のマッチング画像間で画素間距離の内挿によって中間位置画像を求め、前記左右の画素毎のマッチング画像間で画素間距離の外挿によって左外画像、右外画像を求める内外挿画像作成手段とを備え、
前記パターンマッチング演算手段は、対象画素を中心にして当該対象画素に上下左右に隣接する所定数の画素に対して類似度を求めることによって画素毎のマッチング画像を特定するものであり、かつ、前記左目画像に近い位置の中間位置画像及び左外画像については、当該左目画像を基準にした前記右目画像との間のパターンマッチングにより画素毎の左基準マッチング画像を特定し、前記右目画像に近い位置の中間位置画像及び右外画像については、当該右目画像を基準にした前記左目画像との間のパターンマッチングにより画素毎の右基準マッチング画像を特定し、
前記内外挿画像作成手段は、前記中間位置画像として前記左目画像、右目画像間で等間隔に離れた複数枚を作成するものであり、前記左目画像に近い位置の中間位置画像及び左外画像については、前記左基準マッチング画像と左目画像との間で画素間距離の内外挿によって左寄り中間位置画像、左外画像を求めて各画素毎に対応する左目画像の画素の色を置き、前記右目画像に近い位置の中間位置画像及び右外画像については、前記右基準マッチング画像と右目画像との間で画素間距離の内外挿によって右寄り中間位置画像、右外画像を求めて各画素毎に対応する右目画像の画素の色を置くことを特徴とする多眼視画像作成システム。 - 前記パターンマッチング演算手段は、前記所定数の画素の明暗を正規化した後に類似度を求めることを特徴とする請求項3に記載の多眼視画像作成システム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007294270A JP4958233B2 (ja) | 2007-11-13 | 2007-11-13 | 多眼視画像作成システム及び多眼視画像作成方法 |
CN2008101101625A CN101437170B (zh) | 2007-11-13 | 2008-06-13 | 多眼视图像生成系统以及多眼视图像生成方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007294270A JP4958233B2 (ja) | 2007-11-13 | 2007-11-13 | 多眼視画像作成システム及び多眼視画像作成方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009124308A JP2009124308A (ja) | 2009-06-04 |
JP4958233B2 true JP4958233B2 (ja) | 2012-06-20 |
Family
ID=40711354
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007294270A Expired - Fee Related JP4958233B2 (ja) | 2007-11-13 | 2007-11-13 | 多眼視画像作成システム及び多眼視画像作成方法 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP4958233B2 (ja) |
CN (1) | CN101437170B (ja) |
Families Citing this family (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9109891B2 (en) | 2010-02-02 | 2015-08-18 | Konica Minolta Holdings, Inc. | Stereo camera |
JP5307051B2 (ja) * | 2010-02-10 | 2013-10-02 | 株式会社日立製作所 | 立体映像調整装置及び調整方法 |
JP5088973B2 (ja) * | 2010-07-27 | 2012-12-05 | シャープ株式会社 | 立体撮像装置およびその撮像方法 |
JP5812716B2 (ja) * | 2010-08-27 | 2015-11-17 | キヤノン株式会社 | 画像処理装置および方法 |
JP5784729B2 (ja) * | 2010-08-27 | 2015-09-24 | サムスン エレクトロニクス カンパニー リミテッド | マルチビュー生成のためのレンダリング装置およびその方法 |
JP5879713B2 (ja) | 2010-12-09 | 2016-03-08 | ソニー株式会社 | 画像処理装置、および画像処理方法、並びにプログラム |
WO2012090813A1 (ja) * | 2010-12-28 | 2012-07-05 | コニカミノルタホールディングス株式会社 | 画像処理装置及び画像処理システム |
US9420263B2 (en) | 2010-12-28 | 2016-08-16 | Konica Minolta, Inc. | Information processor and information processing method |
DE102011008886A1 (de) * | 2011-01-19 | 2012-07-19 | Sterrix Technologies UG (haftungsbeschränkt) | Verfahren und Vorrichtung zur Stereobasis-Erweiterung von stereoskopischen Bildern und Bildfolgen |
CN102608765B (zh) * | 2011-01-20 | 2015-06-03 | 承景科技股份有限公司 | 立体图像显示方法 |
WO2012108099A1 (ja) | 2011-02-09 | 2012-08-16 | 富士フイルム株式会社 | 撮像装置および撮像方法 |
WO2012132797A1 (ja) | 2011-03-31 | 2012-10-04 | 富士フイルム株式会社 | 撮像装置及び撮像方法 |
JP2013005135A (ja) * | 2011-06-15 | 2013-01-07 | Sony Corp | 画像処理装置および方法、並びにプログラム |
WO2012176431A1 (ja) * | 2011-06-20 | 2012-12-27 | パナソニック株式会社 | 多視点画像生成装置、多視点画像生成方法 |
CN102957920A (zh) * | 2011-08-19 | 2013-03-06 | 宏碁股份有限公司 | 三维动态影像补偿方法与装置 |
JP5708395B2 (ja) * | 2011-09-16 | 2015-04-30 | 株式会社Jvcケンウッド | 映像表示装置及び映像表示方法 |
CN103795995A (zh) * | 2011-12-31 | 2014-05-14 | 四川虹欧显示器件有限公司 | 3d图像的处理方法和处理系统 |
CN102752616A (zh) * | 2012-06-20 | 2012-10-24 | 四川长虹电器股份有限公司 | 双目立体视频转换多目立体视频的方法 |
JP5928280B2 (ja) | 2012-09-28 | 2016-06-01 | 株式会社Jvcケンウッド | 多視点画像生成装置及び方法 |
CN103868460B (zh) * | 2014-03-13 | 2016-10-05 | 桂林电子科技大学 | 基于视差优化算法的双目立体视觉自动测量方法 |
CN105513031B (zh) * | 2014-10-14 | 2018-10-30 | 清华大学 | 基于图匹配的数据驱动图像外插方法及装置 |
JP6672305B2 (ja) * | 2014-12-22 | 2020-03-25 | インターデジタル シーイー パテント ホールディングス | オブジェクト検出に基づき外挿画像を生成する方法及び装置 |
CN106625713A (zh) * | 2017-01-11 | 2017-05-10 | 长春工业大学 | 提高涂胶工业机器人涂胶精度的方法 |
CN107493465B (zh) * | 2017-09-18 | 2019-06-07 | 郑州轻工业学院 | 一种虚拟多视点视频生成方法 |
JP6988704B2 (ja) * | 2018-06-06 | 2022-01-05 | トヨタ自動車株式会社 | センサ制御装置、物体探索システム、物体探索方法及びプログラム |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002216125A (ja) * | 2001-01-23 | 2002-08-02 | Toshiba Corp | 画像修正装置及びその方法 |
JP2004048644A (ja) * | 2002-05-21 | 2004-02-12 | Sony Corp | 情報処理装置、情報処理システム、及び対話者表示方法 |
JP3709879B2 (ja) * | 2003-05-01 | 2005-10-26 | 日産自動車株式会社 | ステレオ画像処理装置 |
JP4432462B2 (ja) * | 2003-11-07 | 2010-03-17 | ソニー株式会社 | 撮像装置及び方法、撮像システム |
JP4440067B2 (ja) * | 2004-10-15 | 2010-03-24 | キヤノン株式会社 | 立体表示のための画像処理プログラム、画像処理装置および立体表示システム |
-
2007
- 2007-11-13 JP JP2007294270A patent/JP4958233B2/ja not_active Expired - Fee Related
-
2008
- 2008-06-13 CN CN2008101101625A patent/CN101437170B/zh not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
CN101437170B (zh) | 2011-06-08 |
JP2009124308A (ja) | 2009-06-04 |
CN101437170A (zh) | 2009-05-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4958233B2 (ja) | 多眼視画像作成システム及び多眼視画像作成方法 | |
JP6021541B2 (ja) | 画像処理装置及び方法 | |
US20120169722A1 (en) | Method and apparatus generating multi-view images for three-dimensional display | |
JP6060329B2 (ja) | 3dディスプレイ装置で3次元映像を視覚化する方法および3dディスプレイ装置 | |
US9349073B2 (en) | Apparatus and method for image matching between multiview cameras | |
CN103379352A (zh) | 图像生成装置、图像显示装置及图像生成方法 | |
US20100302234A1 (en) | Method of establishing dof data of 3d image and system thereof | |
US20160180514A1 (en) | Image processing method and electronic device thereof | |
JP6128748B2 (ja) | 画像処理装置及び方法 | |
JP2019184308A (ja) | 奥行推定装置およびそのプログラム、ならびに、仮想視点映像生成装置およびそのプログラム | |
KR20170025214A (ko) | 다시점 깊이맵 생성 방법 | |
JP2014035597A (ja) | 画像処理装置、コンピュータプログラム、記録媒体及び画像処理方法 | |
US9521428B2 (en) | Method, device and system for resizing original depth frame into resized depth frame | |
WO2011074121A1 (ja) | 動きベクトル検出装置及び方法 | |
US20140125778A1 (en) | System for producing stereoscopic images with a hole filling algorithm and method thereof | |
JP2014072809A (ja) | 画像生成装置、画像生成方法、画像生成装置用プログラム | |
US9380285B2 (en) | Stereo image processing method, stereo image processing device and display device | |
KR101192121B1 (ko) | 양안시차 및 깊이 정보를 이용한 애너그리프 영상 생성 방법 및 장치 | |
US9529825B2 (en) | Method, device and system for restoring resized depth frame into original depth frame | |
CN115022612A (zh) | 一种显示装置的驱动方法、装置及显示设备 | |
Gurrieri et al. | Efficient panoramic sampling of real-world environments for image-based stereoscopic telepresence | |
JP2006211383A (ja) | 立体画像処理装置、立体画像表示装置、及び立体画像生成方法 | |
KR101831978B1 (ko) | 회전된 렌티큘러시트를 부착한 디스플레이에 표시되는 요소영상콘텐츠 생성 방법 | |
JP4779904B2 (ja) | ステレオ映像処理装置及びステレオ映像処理方法のプログラム | |
WO2012096065A1 (ja) | 視差画像表示装置及び視差画像表示方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20101112 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110511 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110517 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110719 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20110719 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120306 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120315 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150330 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4958233 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |