JP4787905B1 - 画像処理装置および方法並びにプログラム - Google Patents
画像処理装置および方法並びにプログラム Download PDFInfo
- Publication number
- JP4787905B1 JP4787905B1 JP2010077386A JP2010077386A JP4787905B1 JP 4787905 B1 JP4787905 B1 JP 4787905B1 JP 2010077386 A JP2010077386 A JP 2010077386A JP 2010077386 A JP2010077386 A JP 2010077386A JP 4787905 B1 JP4787905 B1 JP 4787905B1
- Authority
- JP
- Japan
- Prior art keywords
- face
- image
- stereoscopic
- images
- image processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/128—Adjusting depth or disparity
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Architecture (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Processing Or Creating Images (AREA)
Abstract
【解決手段】複数の顔を距離順に並べたとき、手前から奥に向けて1:2に内分する点Aが頂点となる立体感評価関数F1に基づいて各顔毎に立体感評価値rを決定し、立体感評価値rが最も高い顔を最も優先順位の高い顔として主要被写体を決定する。次いで、上記のように決定した主要被写体の視差が最も小さくなるように複数の画像に対して3次元処理を行って立体視用画像を生成する。
【選択図】図6
Description
なお、ここでいう「中間距離にある顔」とは、画像を撮影する撮像手段からの距離順(すなわち、ユーザーが立体視用画像を観賞した際にユーザー側から順)に並んだ3つ以上の顔のうち、最も手前の顔と最も奥の顔との間に挟まれている顔をいうものである。また、ここでいう「手前」とは、画像を撮影する撮像手段(立体視用画像観賞時におけるユーザー側)に対し近位であることをいうものであり、「奥」とは、画像を撮影する撮像手段(立体視用画像観賞時におけるユーザー側)に対し遠位であることをいうものである。
rf=r×k1 (1)
また、各顔の大きさに基づいて立体感評価値rの調整を行なうようにしてもよい。図9は表示画像の一例を示す図(その2)、図10は顔の大きさに基づいて優先度を調整する場合の説明図である。
rf=r×k2 (2)
なお、上記とは逆に画像中の顔の大きさが大きい程、顔優先度k2の値を大きくするようにしてもかまわない。
rf=r×k3 (3)
なお、笑顔以外にも怒った表情等他の表情に基づいて顔優先度k3の値を調整するようにしてもかまわない。
rf=r×k4 (4)
なお、上記とは逆に画像中の顔の下部領域の色の彩度が低い程、顔優先度k4の値を大きくするようにしてもかまわない。
rf=r×k5 (5)
なお、上記とは逆に顔の下部領域の所定範囲内における肌色の割合が少ない程、顔優先度k5の値を大きくするようにしてもかまわない。
次いで、上記のように決定した主要被写体の視差が最も小さくなるように複数の画像に対して3次元処理を行って立体視用画像を生成する(ステップS6)。
2 LCD
3 操作ボタン
4 記録メディア
5 スロット
21 記録制御部
25 画像処理部
26 表示制御部
Claims (14)
- 複数の顔が撮影された、視点が異なる複数の画像に対して立体視表示のための3次元処理を行って、立体視表示用の表示手段に立体視表示される立体視用画像を生成する画像処理装置であって、
前記画像中の顔を検出する顔検出手段と、
各顔毎に、前記複数の画像間の視差量に基づいて奥行き方向の距離を算出する距離算出手段と、
前記画像中において顔が3つ以上検出された場合に、該3つ以上の顔を前記距離順に並べたとき、中間距離にある顔を最も優先順位の高い顔として、主要被写体を決定する主要被写体決定手段と、
前記主要被写体の視差が最も小さくなるように、前記複数の画像に対して前記3次元処理を行って立体視用画像を生成する3次元処理手段とを備えたことを特徴とする画像処理装置。 - 前記中間距離にある顔が、前記複数の顔を前記距離順に並べたとき、手前から奥に向けて1:2に内分する点に最も近い顔であることを特徴とする請求項1記載の画像処理装置。
- 前記主要被写体決定手段が、前記画像中において顔が2つ検出された場合に、該2つの顔を前記距離順に並べたとき、手前側の顔を前記主要被写体として決定する機能をさらに備えるものであることを特徴とする請求項1または2記載の画像処理装置。
- 前記主要被写体決定手段が、前記優先順位を調整する優先順位調整手段を備えたものであることを特徴とする請求項1または2項記載の画像処理装置。
- 前記優先順位調整手段が、前記表示手段の特性、各顔の信頼度、各顔の大きさ、各顔の表情、各顔の下部領域の色、各顔の下部領域の所定範囲内における肌色の割合の少なくとも1つに基づいて前記優先順位を調整するものであることを特徴とする請求項4記載の画像処理装置。
- 複数の顔が撮影された、視点が異なる複数の画像に対して立体視表示のための3次元処理を行って、立体視表示用の表示手段に立体視表示される立体視用画像を生成する画像処理装置であって、
前記画像中の顔を検出する顔検出手段と、
前記画像の各画素毎に、前記複数の画像間の視差量に基づいて奥行き方向の距離を算出する距離算出手段と、
前記画像中において顔が3つ以上検出された場合に、前記各画素を前記距離順に並べたとき、中間距離にある画素に最も近い顔を最も優先順位の高い顔として、主要被写体を決定する主要被写体決定手段と、
前記主要被写体の視差が最も小さくなるように、前記複数の画像に対して前記3次元処理を行って立体視用画像を生成する3次元処理手段とを備えたことを特徴とする画像処理装置。 - 前記中間距離にある画素が、前記各画素を前記距離順に並べたとき、手前から奥に向けて1:2に内分する点の画素であることを特徴とする請求項5記載の画像処理装置。
- 前記主要被写体決定手段が、前記画像中において顔が2つ検出された場合に、該2つの顔を前記距離順に並べたとき、手前側の顔を前記主要被写体として決定する機能をさらに備えるものであることを特徴とする請求項6または7記載の画像処理装置。
- 前記主要被写体決定手段が、前記優先順位を調整する優先順位調整手段を備えたものであることを特徴とする請求項6または7記載の画像処理装置。
- 前記優先順位調整手段が、前記表示手段の特性、各顔の信頼度、各顔の大きさ、各顔の表情、各顔の下部領域の色、各顔の下部領域の所定範囲内における肌色の割合の少なくとも1つに基づいて前記優先順位を調整するものであることを特徴とする請求項9記載の画像処理装置。
- 複数の顔が撮影された、視点が異なる複数の画像に対して立体視表示のための3次元処理を行って、立体視表示用の表示手段に立体視表示される立体視用画像を生成する画像処理方法であって、
前記画像中の顔を検出し、
各顔毎に、前記複数の画像間の視差量に基づいて奥行き方向の距離を算出し、
前記画像中において顔が3つ以上検出された場合に、該3つ以上の顔を前記距離順に並べたとき、中間距離にある顔を最も優先順位の高い顔として、主要被写体を決定し、
前記主要被写体の視差が最も小さくなるように、前記複数の画像に対して前記3次元処理を行って立体視用画像を生成することを特徴とする画像処理方法。 - 複数の顔が撮影された、視点が異なる複数の画像に対して立体視表示のための3次元処理を行って、立体視表示用の表示手段に立体視表示される立体視用画像を生成する画像処理方法であって、
前記画像中の顔を検出し、
前記画像の各画素毎に、前記複数の画像間の視差量に基づいて奥行き方向の距離を算出し、
前記画像中において顔が3つ以上検出された場合に、前記各画素を前記距離順に並べたとき、中間距離にある画素に最も近い顔を最も優先順位の高い顔として、主要被写体を決定し、
前記主要被写体の視差が最も小さくなるように、前記複数の画像に対して前記3次元処理を行って立体視用画像を生成することを特徴とする画像処理方法。 - 請求項11に記載の画像処理方法をコンピュータに実行させるためのプログラム。
- 請求項12に記載の画像処理方法をコンピュータに実行させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010077386A JP4787905B1 (ja) | 2010-03-30 | 2010-03-30 | 画像処理装置および方法並びにプログラム |
US13/051,527 US8803875B2 (en) | 2010-03-30 | 2011-03-18 | Image processing apparatus, image processing method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010077386A JP4787905B1 (ja) | 2010-03-30 | 2010-03-30 | 画像処理装置および方法並びにプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011156784A Division JP2011211754A (ja) | 2011-07-15 | 2011-07-15 | 画像処理装置および方法並びにプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP4787905B1 true JP4787905B1 (ja) | 2011-10-05 |
JP2011210027A JP2011210027A (ja) | 2011-10-20 |
Family
ID=44709099
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010077386A Expired - Fee Related JP4787905B1 (ja) | 2010-03-30 | 2010-03-30 | 画像処理装置および方法並びにプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US8803875B2 (ja) |
JP (1) | JP4787905B1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11240479B2 (en) | 2017-08-30 | 2022-02-01 | Innovations Mindtrick Inc. | Viewer-adjusted stereoscopic image display |
Families Citing this family (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8570429B2 (en) * | 2009-02-27 | 2013-10-29 | Samsung Electronics Co., Ltd. | Image processing method and apparatus and digital photographing apparatus using the same |
JP5741821B2 (ja) * | 2011-03-24 | 2015-07-01 | コニカミノルタ株式会社 | データ加工送信装置およびデータ加工送信プログラム、方法 |
JP2013118468A (ja) * | 2011-12-02 | 2013-06-13 | Sony Corp | 画像処理装置および画像処理方法 |
CN102722044B (zh) * | 2012-06-07 | 2015-05-20 | 深圳市华星光电技术有限公司 | 立体显示系统 |
US9185387B2 (en) * | 2012-07-03 | 2015-11-10 | Gopro, Inc. | Image blur based on 3D depth information |
US10074013B2 (en) | 2014-07-23 | 2018-09-11 | Gopro, Inc. | Scene and activity identification in video summary generation |
US9685194B2 (en) | 2014-07-23 | 2017-06-20 | Gopro, Inc. | Voice-based video tagging |
US9734870B2 (en) | 2015-01-05 | 2017-08-15 | Gopro, Inc. | Media identifier generation for camera-captured media |
US9639560B1 (en) | 2015-10-22 | 2017-05-02 | Gopro, Inc. | Systems and methods that effectuate transmission of workflow between computing platforms |
US9871994B1 (en) | 2016-01-19 | 2018-01-16 | Gopro, Inc. | Apparatus and methods for providing content context using session metadata |
US10078644B1 (en) | 2016-01-19 | 2018-09-18 | Gopro, Inc. | Apparatus and methods for manipulating multicamera content using content proxy |
US9787862B1 (en) | 2016-01-19 | 2017-10-10 | Gopro, Inc. | Apparatus and methods for generating content proxy |
US10129464B1 (en) | 2016-02-18 | 2018-11-13 | Gopro, Inc. | User interface for creating composite images |
US9972066B1 (en) | 2016-03-16 | 2018-05-15 | Gopro, Inc. | Systems and methods for providing variable image projection for spherical visual content |
US10402938B1 (en) | 2016-03-31 | 2019-09-03 | Gopro, Inc. | Systems and methods for modifying image distortion (curvature) for viewing distance in post capture |
US9838730B1 (en) | 2016-04-07 | 2017-12-05 | Gopro, Inc. | Systems and methods for audio track selection in video editing |
US10229719B1 (en) | 2016-05-09 | 2019-03-12 | Gopro, Inc. | Systems and methods for generating highlights for a video |
US9953679B1 (en) | 2016-05-24 | 2018-04-24 | Gopro, Inc. | Systems and methods for generating a time lapse video |
US9922682B1 (en) | 2016-06-15 | 2018-03-20 | Gopro, Inc. | Systems and methods for organizing video files |
US9967515B1 (en) | 2016-06-15 | 2018-05-08 | Gopro, Inc. | Systems and methods for bidirectional speed ramping |
US10045120B2 (en) | 2016-06-20 | 2018-08-07 | Gopro, Inc. | Associating audio with three-dimensional objects in videos |
US10395119B1 (en) | 2016-08-10 | 2019-08-27 | Gopro, Inc. | Systems and methods for determining activities performed during video capture |
US9953224B1 (en) | 2016-08-23 | 2018-04-24 | Gopro, Inc. | Systems and methods for generating a video summary |
US10282632B1 (en) | 2016-09-21 | 2019-05-07 | Gopro, Inc. | Systems and methods for determining a sample frame order for analyzing a video |
US10268898B1 (en) | 2016-09-21 | 2019-04-23 | Gopro, Inc. | Systems and methods for determining a sample frame order for analyzing a video via segments |
US10044972B1 (en) | 2016-09-30 | 2018-08-07 | Gopro, Inc. | Systems and methods for automatically transferring audiovisual content |
US10397415B1 (en) | 2016-09-30 | 2019-08-27 | Gopro, Inc. | Systems and methods for automatically transferring audiovisual content |
US11106988B2 (en) | 2016-10-06 | 2021-08-31 | Gopro, Inc. | Systems and methods for determining predicted risk for a flight path of an unmanned aerial vehicle |
US10002641B1 (en) | 2016-10-17 | 2018-06-19 | Gopro, Inc. | Systems and methods for determining highlight segment sets |
US9916863B1 (en) | 2017-02-24 | 2018-03-13 | Gopro, Inc. | Systems and methods for editing videos based on shakiness measures |
US10339443B1 (en) | 2017-02-24 | 2019-07-02 | Gopro, Inc. | Systems and methods for processing convolutional neural network operations using textures |
US10360663B1 (en) | 2017-04-07 | 2019-07-23 | Gopro, Inc. | Systems and methods to create a dynamic blur effect in visual content |
US10395122B1 (en) | 2017-05-12 | 2019-08-27 | Gopro, Inc. | Systems and methods for identifying moments in videos |
US10402698B1 (en) | 2017-07-10 | 2019-09-03 | Gopro, Inc. | Systems and methods for identifying interesting moments within videos |
US10614114B1 (en) | 2017-07-10 | 2020-04-07 | Gopro, Inc. | Systems and methods for creating compilations based on hierarchical clustering |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09200508A (ja) * | 1996-01-16 | 1997-07-31 | Olympus Optical Co Ltd | 画像処理装置 |
JP3525970B2 (ja) | 1996-01-19 | 2004-05-10 | 株式会社タイトー | 立体視を体験できるゲーム機の視差調節装置 |
JP3595634B2 (ja) | 1996-09-11 | 2004-12-02 | キヤノン株式会社 | 複眼カメラ及び画像処理方法 |
JP2002051255A (ja) * | 2000-07-31 | 2002-02-15 | Olympus Optical Co Ltd | 主要被写体検出カメラ |
US8369607B2 (en) * | 2002-03-27 | 2013-02-05 | Sanyo Electric Co., Ltd. | Method and apparatus for processing three-dimensional images |
JP4225768B2 (ja) | 2002-07-31 | 2009-02-18 | シャープ株式会社 | 立体画像データ処理装置および立体画像データ処理用プログラム |
JP4461747B2 (ja) * | 2003-09-10 | 2010-05-12 | オムロン株式会社 | 対象決定装置 |
JP4902562B2 (ja) * | 2007-02-07 | 2012-03-21 | パナソニック株式会社 | 撮像装置、画像処理装置、制御方法およびプログラム |
JP4611413B2 (ja) * | 2008-10-27 | 2011-01-12 | 富士フイルム株式会社 | 画像出力装置及び画像出力方法 |
-
2010
- 2010-03-30 JP JP2010077386A patent/JP4787905B1/ja not_active Expired - Fee Related
-
2011
- 2011-03-18 US US13/051,527 patent/US8803875B2/en not_active Expired - Fee Related
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11240479B2 (en) | 2017-08-30 | 2022-02-01 | Innovations Mindtrick Inc. | Viewer-adjusted stereoscopic image display |
US11785197B2 (en) | 2017-08-30 | 2023-10-10 | Innovations Mindtrick Inc. | Viewer-adjusted stereoscopic image display |
Also Published As
Publication number | Publication date |
---|---|
JP2011210027A (ja) | 2011-10-20 |
US20110242098A1 (en) | 2011-10-06 |
US8803875B2 (en) | 2014-08-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4787905B1 (ja) | 画像処理装置および方法並びにプログラム | |
JP5515301B2 (ja) | 画像処理装置、プログラム、画像処理方法、記録方法および記録媒体 | |
TWI508519B (zh) | An image processing apparatus, a program, an image processing method, a recording method, and a recording medium | |
JP5430266B2 (ja) | 画像表示装置および方法並びにプログラム | |
JP5266126B2 (ja) | 画像表示装置および方法並びにプログラム | |
US20110063421A1 (en) | Stereoscopic image display apparatus | |
KR20120075829A (ko) | 적응적 부화소 렌더링 장치 및 방법 | |
US20220256133A1 (en) | Viewer-adjusted stereoscopic image display | |
US9167223B2 (en) | Stereoscopic video processing device and method, and program | |
US8648953B2 (en) | Image display apparatus and method, as well as program | |
JP4787369B1 (ja) | 画像処理装置および方法並びにプログラム | |
JP5396877B2 (ja) | 画像処理装置、プログラム、画像処理方法、および記録方法 | |
TWI589150B (zh) | 3d自動對焦顯示方法及其系統 | |
JP2011211754A (ja) | 画像処理装置および方法並びにプログラム | |
JP5725159B2 (ja) | 測定装置、立体画像表示装置及び測定方法 | |
JP2011176822A (ja) | 画像処理装置、立体表示装置及び画像処理方法 | |
US9053567B2 (en) | Stereoscopic image processing device and stereoscopic image processing method | |
JP2012023589A (ja) | 立体画像処理装置、立体画像撮影装置、立体画像表示装置、及び立体画像処理方法 | |
JPWO2012001958A1 (ja) | 画像処理装置および方法並びにプログラム | |
JP7339278B2 (ja) | 視聴者に合わせて調整された立体画像表示 | |
CN102724540B (zh) | 一种在播放器中进行3d视频处理方法及装置 | |
JP2015029215A (ja) | 立体画像処理装置 | |
JP2002341289A (ja) | 立体映像観察装置 | |
JP4819194B2 (ja) | 複眼撮影装置および方法並びにプログラム | |
JP4819195B2 (ja) | 画像表示装置および方法並びにプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110621 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110715 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140722 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |