JP5088220B2 - 画像生成装置、及びプログラム - Google Patents
画像生成装置、及びプログラム Download PDFInfo
- Publication number
- JP5088220B2 JP5088220B2 JP2008113297A JP2008113297A JP5088220B2 JP 5088220 B2 JP5088220 B2 JP 5088220B2 JP 2008113297 A JP2008113297 A JP 2008113297A JP 2008113297 A JP2008113297 A JP 2008113297A JP 5088220 B2 JP5088220 B2 JP 5088220B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- subject
- model data
- shooting
- virtual
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Image Processing (AREA)
- Studio Devices (AREA)
Description
記憶手段が被写体の種別毎に、該被写体を表現するモデルデータを記憶している場合に、記憶手段に記憶されたモデルデータのなかから、被写体抽出手段が抽出した被写体領域に被写体画像が存在する被写体に対応するモデルデータを特定するモデル特定手段と、を更に備え、画像生成手段は、モデル特定手段が特定したモデルデータを用いて他の被写体画像を生成する。
本発明の第4の態様の画像生成装置は、画像生成手段は、被写体領域と同一の形状で、色又は明るさの異なる他の被写体画像を生成する。
本発明の第5の態様の画像生成装置は、仮想的な撮影条件は、被写体の照明状態に関する照明条件であり、画像生成手段は、被写体領域と同一の形状と色で部分的に明るさの異なる他の被写体画像を生成する。
本発明の第6の態様の画像生成装置は、仮想的な撮影条件は、ライトの個数、種類、強度、配置、角度、或いは分光特性のいずれか又は全てを組み合わせた仮想ライティングである。
本発明の第7の態様の画像生成装置は、画像生成手段は、撮影条件を順次変更しながら他の被写体画像を生成し、画像生成手段は、画像生成手段が順次生成する他の被写体画像を該画像生成手段が画像合成を行った画像に更に画像合成することでブラケット撮影を行う。
<第1の実施形態>
図1は、第1の実施形態による画像生成装置を搭載した撮像装置の構成を示す図である。その撮像装置は、レンズ系101を介して入射した光を撮像素子102により光電変換し、デジタルの撮影画像(データ)を得るデジタルカメラであり、以下のような構成となっている。
焦点制御部120aは、レンズ駆動部106(のモータ)を駆動して、フォーカスレンズ101aの移動を実現させるものである。ズーム制御部120bは、焦点制御部120aと同様に、レンズ駆動部105(のモータ)を駆動して、2つのズームレンズ101bの移動を実現させるものである。
撮像装置は撮影が可能な撮影モードの他に、複数のモードが搭載されている。その複数のモードとして、例えば保存されている画像を再生可能な再生モード、外部装置とのコネクタ171〜173の何れかを介した通信が可能な通信モード、及び各種設定が可能な設定モード等が搭載されている。照明条件は、設定モードで設定(変更)が可能となっている。その設定は、図3(a)に示すように、設定モードの設定時に表示可能となる撮影設定画面31中の「仮想ライティング」ボタン31aをクリックすることで行えるようになる。そのボタン31a内の表記「カスタム1」は、現在、設定されている仮想ライティングの種類を表している。
先ず、ステップS601では、輝度階調値または色差信号に着目して撮影画像を複数領域に分割する。それにより、図6中に示すような撮影画像P2は、画像P2a中に輪郭線で示すように領域が分割される。続くステップS602では、分割した領域のなかから被写体に相当するものを選択する。このとき、図6に示す撮影画像P2では、被写体画像SB3の領域が選択される。
上記被写体領域抽出処理の実行により、撮影画像P1中の被写体画像(領域)SB1のモデルデータとしてモデルデータMT1、或いはMT2が抽出される。その実行後に移行するステップS502では、被写体画像に応じてモデルデータを設定する。例えば抽出したモデルデータの形状や配置、及び大きさ等を被写体画像の輪郭線等から操作する。そのようにして、実際の被写体と形状や配置(向き)、及び大きさに合わせたモデルデータを生成した後、ステップS503に移行する。そのようなモデルデータを生成することにより、より被写体に近い画像をモデルデータから生成できる。
<第2の実施形態>
上記第1の実施形態では、モデルデータを用いて撮影者が所望する撮影(合成)画像を生成するようにしている。これに対し第2の実施形態は、撮影により得られた撮影画像を操作して、撮影者が所望の撮影画像を生成するようにしたものである。
<第3の実施形態>
撮影方法の一つとして、連続して撮影するブラケット撮影がある。第3の実施形態は、そのブラケット撮影で得られる撮影画像毎に合成画像を生成し、生成した合成画像を用いて更に別の合成画像を生成できるようにしたものである。
第3の実施形態では、図8に示すように、例えば照射角度θ、或いは色温度を変えた撮影毎に合成画像を生成し、合成画像を生成する毎に、それまでの撮影で生成した合成画像を全て合成した合成画像を生成するようにしている。それにより、1回の撮影毎に、その撮影のみに応じた合成画像の生成、全ての撮影に応じた合成画像の生成をそれぞれ行うようになっている。そのようにして、ブラケット撮影に対応した合成画像の生成を可能とし、撮影者の要望に応えられるようにしている。
(付記1)
撮影により得られた撮影画像を用いて撮影者の所望する画像を生成する画像生成装置において、
前記撮影画像を取得する画像取得手段と、
前記画像取得手段が取得した前記撮影画像のなかから、被写体画像が存在する被写体領域を抽出する被写体抽出手段と、
被写体のモデルデータを記憶した記憶手段と、
前記被写体の仮想的な撮影条件を設定する撮影条件設定手段と、
前記撮影条件設定手段が設定した撮影条件に基づいて、前記記憶手段に記憶されているモデルデータを用いて他の被写体画像を生成する画像生成手段と、
前記画像生成手段が生成した他の被写体画像を前記撮影画像中の前記被写体領域に配置する画像合成を行う画像合成手段と、
を具備することを特徴とする画像生成装置。
前記記憶手段が前記被写体の種別毎に、該被写体を表現するモデルデータを記憶している場合に、前記記憶手段に記憶されたモデルデータのなかから、前記被写体抽出手段が抽出した被写体領域に被写体画像が存在する被写体に対応するモデルデータを特定するモデル特定手段、を更に具備し、
前記画像生成手段は、前記モデル特定手段が特定したモデルデータを用いて前記他の被写体画像を生成する、
ことを特徴とする付記1記載の画像生成装置。
前記画像生成手段は、前記被写体領域中の前記被写体画像から抽出される輪郭線に合わせて、前記モデルデータを操作し、該操作したモデルデータを用いて前記他の被写体画像を生成する、
ことを特徴とする付記1記載の画像生成装置。
前記画像生成手段は、前記被写体抽出手段が抽出した被写体領域を輝度、及び色に基づいて複数のサブ領域に分割し、該分割結果を反映させて、前記モデルデータを用いた前記他の被写体画像の生成を行う、
ことを特徴とする付記1記載の画像生成装置。
前記画像生成手段は、前記分割結果に応じて、前記モデルデータを用いて得られる前記他の被写体画像の領域をサブ領域に分割し、該分割したサブ領域を、前記撮影条件を基に細分化し、該細分化したサブ領域毎に、前記輝度、前記色、及び前記撮影条件により特定されるテクスチャを貼り付けることにより、該他の被写体画像を生成する、
ことを特徴とする付記4記載の画像生成装置。
前記撮影条件設定手段が前記撮影条件を複数、設定した場合に、前記画像生成手段は、該撮影条件毎に、前記モデルデータを用いて前記他の被写体画像を生成し、該生成した複数の他の被写体画像を合成して、前記画像合成手段によって前記被写体領域に配置される他の被写体画像を生成する、
ことを特徴とする付記1記載の画像生成装置。
130 制御回路
131 画像処理部
132 CG処理部
133 メモリ
Claims (8)
- 撮影により得られた撮影画像を用いて撮影者の所望する画像を生成する画像生成装置において、
前記撮影画像を取得する画像取得手段と、
前記画像取得手段が取得した前記撮影画像のなかから、特定の被写体の画像部分が存在する被写体領域を抽出する被写体抽出手段と、
前記被写体の仮想的な撮影条件を設定する撮影条件設定手段と、
前記撮影条件設定手段が設定した仮想的な撮影条件に基づいて、前記被写体抽出手段が被写体領域を抽出した被写体に対応するモデルデータを用いて前記被写体領域の被写体が前記仮想的な撮影条件で撮影された状態を示す他の被写体画像を生成する画像生成手段と、
前記画像生成手段が生成した他の被写体画像を前記撮影画像中の前記被写体領域に配置する画像合成を行う画像合成手段と、
を具備することを特徴とする画像生成装置。 - 被写体のモデルデータを記憶した記憶手段と、
前記記憶手段が前記被写体の種別毎に、該被写体を表現するモデルデータを記憶している場合に、前記記憶手段に記憶されたモデルデータのなかから、前記被写体抽出手段が抽出した被写体領域に被写体画像が存在する被写体に対応するモデルデータを特定するモデル特定手段と、を更に備え、
前記画像生成手段は、前記モデル特定手段が特定したモデルデータを用いて前記他の被写体画像を生成する、
ことを特徴とする請求項1記載の画像生成装置。 - 前記画像生成手段は、前記被写体領域中の前記被写体画像から抽出される輪郭線に合わせて、前記モデルデータを操作し、該操作したモデルデータを用いて前記他の被写体画像を生成する、
ことを特徴とする請求項1記載の画像生成装置。 - 前記画像生成手段は、前記被写体領域と同一の形状で、色又は明るさの異なる他の被写体画像を生成することを特徴とする請求項1乃至3のいずれかに記載の画像生成装置。
- 前記仮想的な撮影条件は、被写体の照明状態に関する照明条件であり、
前記画像生成手段は、前記被写体領域と同一の形状と色で部分的に明るさの異なる他の被写体画像を生成することを特徴とする請求項4記載の画像生成装置。 - 前記仮想的な撮影条件は、ライトの個数、種類、強度、配置、角度、或いは分光特性のいずれか又は全てを組み合わせた仮想ライティングであることを特徴とする請求項5記載の画像生成装置。
- 前記画像生成手段は、前記撮影条件を順次変更しながら他の被写体画像を生成し、
前記画像生成手段は、前記画像生成手段が順次生成する他の被写体画像を該画像生成手段が画像合成を行った画像に更に画像合成することでブラケット撮影を行うことを特徴とする請求項1乃至6のいずれかに記載の画像生成装置。 - 撮影により得られた撮影画像を用いて撮影者の所望する画像を生成する画像生成装置として使用可能なコンピュータに、
前記撮影画像を取得する画像取得機能と、
前記画像取得機能により取得した前記撮影画像のなかから、特定の被写体の画像部分が存在する被写体領域を抽出する被写体抽出機能と、
被写体の仮想的な撮影条件を設定する撮影条件設定機能と、
前記撮影条件設定機能により設定した仮想的な撮影条件に基づいて、前記被写体抽出機能が被写体領域を抽出した被写体に対応するモデルデータを用いて前記被写体領域の被写体が前記仮想的な撮影条件で撮影された状態を示す他の被写体画像を生成する画像生成機能と、
前記画像生成機能により生成した他の被写体画像を前記撮影画像中の前記被写体領域に配置する画像合成を行う画像合成機能と、
を実現させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008113297A JP5088220B2 (ja) | 2008-04-24 | 2008-04-24 | 画像生成装置、及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008113297A JP5088220B2 (ja) | 2008-04-24 | 2008-04-24 | 画像生成装置、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009267662A JP2009267662A (ja) | 2009-11-12 |
JP5088220B2 true JP5088220B2 (ja) | 2012-12-05 |
Family
ID=41392973
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008113297A Expired - Fee Related JP5088220B2 (ja) | 2008-04-24 | 2008-04-24 | 画像生成装置、及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5088220B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10303973B2 (en) | 2015-04-15 | 2019-05-28 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and storage medium for lighting processing on image using model data |
US10410407B2 (en) | 2016-02-19 | 2019-09-10 | Samsung Electronics Co., Ltd. | Method for processing image and electronic device thereof |
Families Citing this family (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5281878B2 (ja) * | 2008-12-03 | 2013-09-04 | オリンパスイメージング株式会社 | 撮像装置、ライティング処理装置、ライティング処理方法およびライティング処理用プログラム |
JP5541907B2 (ja) | 2009-11-25 | 2014-07-09 | オリンパス株式会社 | レーザ走査型顕微鏡 |
JP5493790B2 (ja) * | 2009-12-07 | 2014-05-14 | 株式会社ニコン | 撮像装置 |
JP4869430B1 (ja) | 2010-09-24 | 2012-02-08 | 任天堂株式会社 | 画像処理プログラム、画像処理装置、画像処理システム、および、画像処理方法 |
JP5623247B2 (ja) * | 2010-11-09 | 2014-11-12 | キヤノン株式会社 | 撮像装置及びその制御方法 |
JP5132754B2 (ja) * | 2010-11-10 | 2013-01-30 | 株式会社東芝 | 画像処理装置、方法およびそのプログラム |
JP5704205B2 (ja) * | 2013-09-24 | 2015-04-22 | 辰巳電子工業株式会社 | 画像処理装置、これを用いた写真撮影遊戯装置、画像処理方法、画像処理プログラム、及び写真印刷シート |
JP6646936B2 (ja) | 2014-03-31 | 2020-02-14 | キヤノン株式会社 | 画像処理装置、その制御方法、およびプログラム |
JP6412386B2 (ja) * | 2014-09-26 | 2018-10-24 | キヤノン株式会社 | 画像処理装置およびその制御方法、プログラムならびに記録媒体 |
JP6381404B2 (ja) * | 2014-10-23 | 2018-08-29 | キヤノン株式会社 | 画像処理装置及び方法、及び撮像装置 |
JP6445844B2 (ja) * | 2014-11-05 | 2018-12-26 | キヤノン株式会社 | 撮像装置および撮像装置で実行される方法 |
JP6463177B2 (ja) * | 2015-03-11 | 2019-01-30 | キヤノン株式会社 | 画像処理装置およびその制御方法 |
JP6685827B2 (ja) | 2016-05-09 | 2020-04-22 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
JP6918648B2 (ja) * | 2017-08-31 | 2021-08-11 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
JP7207876B2 (ja) * | 2018-06-27 | 2023-01-18 | キヤノン株式会社 | 画像処理装置、画像処理方法、及びプログラム |
JP6675461B2 (ja) * | 2018-09-28 | 2020-04-01 | キヤノン株式会社 | 画像処理装置およびその制御方法、ならびにプログラム |
JP2024129985A (ja) * | 2023-03-14 | 2024-09-30 | ソニーグループ株式会社 | カメラシステムおよびアプリケーションプロセッサ |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4254391B2 (ja) * | 2003-07-18 | 2009-04-15 | カシオ計算機株式会社 | 画像出力装置、画像出力処理プログラム、および画像配信サーバ |
JP4775205B2 (ja) * | 2006-09-20 | 2011-09-21 | カシオ計算機株式会社 | 撮像装置、撮像方法及びプログラム |
-
2008
- 2008-04-24 JP JP2008113297A patent/JP5088220B2/ja not_active Expired - Fee Related
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10303973B2 (en) | 2015-04-15 | 2019-05-28 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and storage medium for lighting processing on image using model data |
US11106938B2 (en) | 2015-04-15 | 2021-08-31 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and storage medium for lighting processing on image using model data |
US11948282B2 (en) | 2015-04-15 | 2024-04-02 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and storage medium for lighting processing on image using model data |
US10410407B2 (en) | 2016-02-19 | 2019-09-10 | Samsung Electronics Co., Ltd. | Method for processing image and electronic device thereof |
Also Published As
Publication number | Publication date |
---|---|
JP2009267662A (ja) | 2009-11-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5088220B2 (ja) | 画像生成装置、及びプログラム | |
KR102338576B1 (ko) | 이미지를 이용하여 획득된 깊이 정보의 속성에 따라 이미지와 연관하여 깊이 정보를 저장하는 전자 장치 및 전자 장치 제어 방법 | |
CN106548455B (zh) | 用于调整图像的亮度的设备和方法 | |
JP6525617B2 (ja) | 画像処理装置およびその制御方法 | |
JP5139293B2 (ja) | 撮像カメラ処理装置及び撮像カメラ処理方法 | |
JP6368361B2 (ja) | ホワイトバランス調整方法および装置 | |
US9684988B2 (en) | Imaging device, image processing method, and recording medium | |
JP6611576B2 (ja) | 画像処理装置および画像処理方法 | |
JP5804856B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2012235377A (ja) | 画像処理装置、画像処理方法及びプログラム | |
KR20130024007A (ko) | 영상 촬영 장치 및 그 제어 방법 | |
JP2007281937A (ja) | 撮影システム、画像合成装置、および画像合成プログラム | |
WO2006095860A1 (ja) | 背景置換装置、背景置換プログラム、および背景置換方法 | |
US11037279B2 (en) | Image processing apparatus, image capturing apparatus, image processing method, and storage medium | |
KR20210078656A (ko) | 화이트 밸런스를 제공하는 방법 및 이를 지원하는 전자 장치 | |
JP4906658B2 (ja) | 色処理装置およびその方法 | |
JP2021044710A (ja) | 画像処理装置、画像処理方法、およびプログラム | |
JP2017143354A (ja) | 画像処理装置及び画像処理方法 | |
JP2007087147A (ja) | 画像レタッチ方法、画像レタッチ装置及び画像レタッチプログラム | |
CN117897723A (zh) | 用于学习局部图像增强的色调曲线的系统和方法 | |
CN115482291A (zh) | 标定方法、标定系统、拍摄方法、电子设备和存储介质 | |
JP2012199804A (ja) | 画像処理装置および画像処理方法 | |
JP7398884B2 (ja) | 撮像装置、発光制御装置、撮像方法、発光制御方法、及びプログラム | |
US11165968B2 (en) | Information processing apparatus, information processing method, program, and lighting system | |
JP2018010498A (ja) | 画像処理装置及び方法並びに制御プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110408 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120531 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120605 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120711 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120814 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120827 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150921 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 5088220 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |