JP7039906B2 - 撮像装置、撮像方法及びプログラム - Google Patents
撮像装置、撮像方法及びプログラム Download PDFInfo
- Publication number
- JP7039906B2 JP7039906B2 JP2017182580A JP2017182580A JP7039906B2 JP 7039906 B2 JP7039906 B2 JP 7039906B2 JP 2017182580 A JP2017182580 A JP 2017182580A JP 2017182580 A JP2017182580 A JP 2017182580A JP 7039906 B2 JP7039906 B2 JP 7039906B2
- Authority
- JP
- Japan
- Prior art keywords
- visible light
- image
- subject
- infrared light
- exposure time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Exposure Control For Cameras (AREA)
- Indication In Cameras, And Counting Of Exposures (AREA)
- Studio Devices (AREA)
Description
図2は、撮像モード時に制御部20が実行する、HDR画像撮像時の処理内容を抽出して示すフローチャートである。同図では、操作部26のシャッタキーの操作に応じて処理を開始すると、まず事前撮像用に赤外線イメージセンサ13及びイメージセンサ14の駆動周期を切り替えて、画像処理部17による赤外光画像と可視光画像のモニタリングを開始させる(ステップS101)。
[付記1]
可視光で被写体の可視光画像を撮像する可視光撮像部と、
赤外光で前記被写体の赤外光画像を撮像する赤外光撮像部と、
前記赤外光撮像部で得た前記赤外光画像の情報に基づいて前記可視光撮像部の露出時間を決定する決定部と、
を備える、
ことを特徴とする撮像装置。
[付記2]
前記決定部は、前記赤外光撮像部により撮像された前記赤外光画像において前記被写体から輪郭を抽出することができ、前記可視光撮像部により撮像された前記可視光画像において前記被写体の前記輪郭が抽出できなかった場合に、前記赤外光画像の情報に基づいて前記可視光撮像部の露出時間を決定する、
ことを特徴とする付記1に記載の撮像装置。
[付記3]
前記可視光画像の撮像と前記赤外光画像の撮像とは1回の撮像指示に基づいて同時に実行される、
ことを特徴とする付記1又は2に記載の撮像装置。
[付記4]
標準となる被写体に対して、前記赤外光画像を撮像するための赤外光露出時間と、前記赤外光画像と同じ輝度となる前記可視光画像を撮像するための可視光露出時間と、の対応関係を予め取得しておく対応関係取得部と、
前記対応関係取得部により予め取得された対応関係を記録する記録部と、
を更に備え、
前記決定部は、前記赤外光画像の輝度と、前記赤外光露出時間と、前記記録部により読み出された前記対応関係と、から前記可視光露出時間を決定する、
ことを特徴とする付記1乃至3のいずれか1項に記載の撮像装置。
[付記5]
前記対応関係取得部は、前記対応関係を対応テーブル又は関数式として取得する、
ことを特徴とする付記4に記載の撮像装置。
[付記6]
前記対応関係取得部は、前記対応関係を前記標準となる被写体の色温度の複数分割範囲毎に前記対応テーブル又は前記関数式として取得する、
ことを特徴とする付記5に記載の撮像装置。
[付記7]
前記決定部は、前記可視光撮像部により第1の露出時間で撮像された画像において前記被写体の少なくとも1部が白飛びしており、前記赤外光撮像部により撮像された画像において前記可視光画像で白飛びしている前記被写体の少なくとも1部の輪郭が抽出できる場合に、前記可視光撮像部の露出時間を前記第1の露出時間よりも短く決定する、
ことを特徴とする付記1乃至6のいずれか1項に記載の撮像装置。
[付記8]
前記決定部は、前記可視光撮像部により第2の露出時間で撮像された画像において前記被写体の少なくとも1部が黒つぶれしており、前記赤外光撮像部により撮像された画像において前記可視光画像で黒つぶれしている前記被写体の少なくとも1部の輪郭が抽出できる場合に、前記可視光撮像部の露出時間を前記第2の露出時間よりも長く決定する、
ことを特徴とする付記1乃至7のいずれか1項に記載の撮像装置。
[付記9]
前記決定部により決定された露出時間で、前記可視光撮像部により撮像された複数の前記可視光画像に基づいて、ハイダイナミックレンジ画像を合成する合成部を更に備える、
ことを特徴とする付記1乃至8のいずれか1項に記載の撮像装置。
[付記10]
前記合成部は、前記ハイダイナミックレンジ画像を合成する過程で、中間露出の前記可視光画像の輝度成分の分布を示す合成マップ画像を作成する、
ことを特徴とする付記9に記載の撮像装置。
[付記11]
前記合成部は、前記合成マップ画像に基づいて前記複数の可視光画像の合成比率を求めて前記ハイダイナミックレンジ画像を合成する、
ことを特徴とする付記10に記載の撮像装置。
[付記12]
前記合成部は、前記可視光画像中の白飛びしている部分と黒飛びしている部分との間を複数の領域に分割し、前記領域毎に合成比率が段階的に変化するように前記ハイダイナミックレンジ画像を合成する、
ことを特徴とする付記9に記載の撮像装置。
[付記13]
可視光で被写体の可視光画像を撮像する可視光撮像工程と、
赤外光で前記被写体の赤外光画像を撮像する赤外光撮像工程と、
前記赤外光撮像工程で得た前記赤外光画像の情報に基づいて前記可視光撮像工程の露出時間を決定する決定工程と、
を含む、
ことを特徴とする撮像方法。
[付記14]
撮像装置のコンピュータを、
可視光で被写体の可視光画像を撮像する可視光撮像部、
赤外光で前記被写体の赤外光画像を撮像する赤外光撮像部、
前記赤外光撮像部で得た前記赤外光画像の情報に基づいて前記可視光撮像部の露出時間を決定する決定部、
として機能させる、
ことを特徴とするプログラム。
11,12…撮像レンズ部
13…赤外線イメージセンサ
14…(可視光用)イメージセンサ
15,16…A/D変換部
17…画像処理部
18…フラッシュ駆動部
19…音声処理部
20…制御部
21…モニタ表示部
22…メモリカードインタフェイス(I/F)
23…(赤外線(Ir))LED
24…(白色光(W))LED
25…マイクロホン
26…操作部
27…メモリカード
B…バス
CS…カードスロット
Claims (19)
- 可視光で被写体の可視光画像を撮像する可視光撮像部と、
赤外光で前記被写体の赤外光画像を撮像する赤外光撮像部と、
前記赤外光撮像部により撮像された前記赤外光画像において前記被写体から輪郭を抽出することができ、前記可視光撮像部により撮像された前記可視光画像において前記被写体の前記輪郭が抽出できなかった場合に、前記赤外光画像の情報に基づいて前記可視光撮像部の露出時間を決定する決定部と、
を備える、
ことを特徴とする撮像装置。 - 可視光で被写体の可視光画像を撮像する可視光撮像部と、
赤外光で前記被写体の赤外光画像を撮像する赤外光撮像部と、
前記赤外光撮像部によって撮像された赤外光画像の輝度と、撮像のときの赤外光露出時間と、標準となる被写体に対して前記赤外光画像を撮像するための赤外光露出時間と前記赤外光画像と同じ輝度となる前記可視光画像を撮像するための可視光露出時間との対応関係を示すテーブル又は関係式であって、前記標準となる被写体の色温度の複数分割範囲毎に取得された対応テーブル又は関数式と、から前記可視光撮像部によって撮像する可視光露出時間を決定する決定部と、
を、備える、
ことを特徴とする撮像装置。 - 可視光で被写体の可視光画像を撮像する可視光撮像部と、
赤外光で前記被写体の赤外光画像を撮像する赤外光撮像部と、
前記可視光撮像部により第1の露出時間で撮像された画像において前記被写体の少なくとも1部が白飛びしており、前記赤外光撮像部により撮像された画像において前記可視光画像で白飛びしている前記被写体の少なくとも1部の輪郭が抽出できる場合に、前記可視光撮像部の露出時間を前記第1の露出時間よりも短く決定する決定部と、
を、備える、
ことを特徴とする撮像装置。 - 可視光で被写体の可視光画像を撮像する可視光撮像部と、
赤外光で前記被写体の赤外光画像を撮像する赤外光撮像部と、
前記可視光撮像部により第2の露出時間で撮像された画像において前記被写体の少なくとも1部が黒つぶれしており、前記赤外光撮像部により撮像された画像において前記可視光画像で黒つぶれしている前記被写体の少なくとも1部の輪郭が抽出できる場合に、前記可視光撮像部の露出時間を前記第2の露出時間よりも長く決定する決定部と、
を、備える、
ことを特徴とする撮像装置。 - 可視光で被写体の可視光画像を撮像する可視光撮像部と、
赤外光で前記被写体の赤外光画像を撮像する赤外光撮像部と、
前記赤外光撮像部で得た前記赤外光画像の情報に基づいて前記可視光撮像部の露出時間を決定する決定部と、
前記決定部により決定された露出時間で、前記可視光撮像部により撮像された複数の前記可視光画像に基づいて、ハイダイナミックレンジ画像を合成する合成部と、
を備える、
ことを特徴とする撮像装置。 - 前記合成部は、前記ハイダイナミックレンジ画像を合成する過程で、中間露出の前記可視光画像の輝度成分の分布を示す合成マップ画像を作成する、
ことを特徴とする請求項5に記載の撮像装置。 - 前記合成部は、前記合成マップ画像に基づいて前記複数の可視光画像の合成比率を求めて前記ハイダイナミックレンジ画像を合成する、
ことを特徴とする請求項6に記載の撮像装置。 - 前記合成部は、前記可視光画像中の白飛びしている部分と黒飛びしている部分との間を複数の領域に分割し、前記領域毎に合成比率が段階的に変化するように前記ハイダイナミックレンジ画像を合成する、
ことを特徴とする請求項5に記載の撮像装置。 - 前記可視光画像の撮像と前記赤外光画像の撮像とは1回の撮像指示に基づいて同時に実行される、
ことを特徴とする請求項1乃至8のいずれか1項に記載の撮像装置。 - 可視光で被写体の可視光画像を撮像する可視光撮像工程と、
赤外光で前記被写体の赤外光画像を撮像する赤外光撮像工程と、
前記赤外光撮像工程にて撮像された前記赤外光画像において前記被写体から輪郭を抽出することができ、前記可視光撮像工程にて撮像された前記可視光画像において前記被写体の前記輪郭が抽出できなかった場合に、前記赤外光画像の情報に基づいて前記可視光撮像工程の露出時間を決定する決定工程と、
を含む、
ことを特徴とする撮像方法。 - 可視光で被写体の可視光画像を撮像する可視光撮像工程と、
赤外光で前記被写体の赤外光画像を撮像する赤外光撮像工程と、
前記赤外光撮像工程にて撮像された赤外光画像の輝度と、撮像のときの赤外光露出時間と、標準となる被写体に対して前記赤外光画像を撮像するための赤外光露出時間と前記赤外光画像と同じ輝度となる前記可視光画像を撮像するための可視光露出時間との対応関係を示すテーブル又は関係式であって、前記標準となる被写体の色温度の複数分割範囲毎に取得された対応テーブル又は関数式と、から前記可視光撮像工程にて撮像する可視光露出時間を決定する決定工程と、
を、含む、
ことを特徴とする撮像方法。 - 可視光で被写体の可視光画像を撮像する可視光撮像工程と、
赤外光で前記被写体の赤外光画像を撮像する赤外光撮像工程と、
前記可視光撮像工程にて第1の露出時間で撮像された画像において前記被写体の少なくとも1部が白飛びしており、前記赤外光撮像工程にて撮像された画像において前記可視光画像で白飛びしている前記被写体の少なくとも1部の輪郭が抽出できる場合に、前記可視光撮像工程の露出時間を前記第1の露出時間よりも短く決定する決定工程と、
を、含む、
ことを特徴とする撮像方法。 - 可視光で被写体の可視光画像を撮像する可視光撮像工程と、
赤外光で前記被写体の赤外光画像を撮像する赤外光撮像工程と、
前記可視光撮像工程にて第2の露出時間で撮像された画像において前記被写体の少なくとも1部が黒つぶれしており、前記赤外光撮像工程にて撮像された画像において前記可視光画像で黒つぶれしている前記被写体の少なくとも1部の輪郭が抽出できる場合に、前記可視光撮像工程の露出時間を前記第2の露出時間よりも長く決定する決定工程と、
を、含む、
ことを特徴とする撮像方法。 - 可視光で被写体の可視光画像を撮像する可視光撮像工程と、
赤外光で前記被写体の赤外光画像を撮像する赤外光撮像工程と、
前記赤外光撮像工程で得た前記赤外光画像の情報に基づいて前記可視光撮像工程の露出時間を決定する決定工程と、
前記決定工程にて決定された露出時間で、前記可視光撮像工程にて撮像された複数の前記可視光画像に基づいて、ハイダイナミックレンジ画像を合成する合成工程と、
を含む、
ことを特徴とする撮像方法。 - 撮像装置のコンピュータを、
可視光で被写体の可視光画像を撮像する可視光撮像部、
赤外光で前記被写体の赤外光画像を撮像する赤外光撮像部、
前記赤外光撮像部により撮像された前記赤外光画像において前記被写体から輪郭を抽出することができ、前記可視光撮像部により撮像された前記可視光画像において前記被写体の前記輪郭が抽出できなかった場合に、前記赤外光画像の情報に基づいて前記可視光撮像部の露出時間を決定する決定部、
として機能させる、
ことを特徴とするプログラム。 - 撮像装置のコンピュータを、
可視光で被写体の可視光画像を撮像する可視光撮像部、
赤外光で前記被写体の赤外光画像を撮像する赤外光撮像部、
前記赤外光撮像部によって撮像された赤外光画像の輝度と、撮像のときの赤外光露出時間と、標準となる被写体に対して前記赤外光画像を撮像するための赤外光露出時間と前記赤外光画像と同じ輝度となる前記可視光画像を撮像するための可視光露出時間との対応関係を示すテーブル又は関係式であって、前記標準となる被写体の色温度の複数分割範囲毎に取得された対応テーブル又は関数式と、から前記可視光撮像部によって撮像する可視光露出時間を決定する決定部、
として機能させる、
ことを特徴とするプログラム。 - 撮像装置のコンピュータを、
可視光で被写体の可視光画像を撮像する可視光撮像部、
赤外光で前記被写体の赤外光画像を撮像する赤外光撮像部、
前記可視光撮像部により第1の露出時間で撮像された画像において前記被写体の少なくとも1部が白飛びしており、前記赤外光撮像部により撮像された画像において前記可視光画像で白飛びしている前記被写体の少なくとも1部の輪郭が抽出できる場合に、前記可視光撮像部の露出時間を前記第1の露出時間よりも短く決定する決定部、
として機能させる、
ことを特徴とするプログラム。 - 撮像装置のコンピュータを、
可視光で被写体の可視光画像を撮像する可視光撮像部、
赤外光で前記被写体の赤外光画像を撮像する赤外光撮像部、
前記可視光撮像部により第2の露出時間で撮像された画像において前記被写体の少なくとも1部が黒つぶれしており、前記赤外光撮像部により撮像された画像において前記可視光画像で黒つぶれしている前記被写体の少なくとも1部の輪郭が抽出できる場合に、前記可視光撮像部の露出時間を前記第2の露出時間よりも長く決定する決定部、
として機能させる、
ことを特徴とするプログラム。 - 撮像装置のコンピュータを、
可視光で被写体の可視光画像を撮像する可視光撮像部、
赤外光で前記被写体の赤外光画像を撮像する赤外光撮像部、
前記赤外光撮像部で得た前記赤外光画像の情報に基づいて前記可視光撮像部の露出時間を決定する決定部、
前記決定部により決定された露出時間で、前記可視光撮像部により撮像された複数の前記可視光画像に基づいて、ハイダイナミックレンジ画像を合成する合成部、
として機能させる、
ことを特徴とするプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017182580A JP7039906B2 (ja) | 2017-09-22 | 2017-09-22 | 撮像装置、撮像方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017182580A JP7039906B2 (ja) | 2017-09-22 | 2017-09-22 | 撮像装置、撮像方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019057887A JP2019057887A (ja) | 2019-04-11 |
JP7039906B2 true JP7039906B2 (ja) | 2022-03-23 |
Family
ID=66106326
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017182580A Active JP7039906B2 (ja) | 2017-09-22 | 2017-09-22 | 撮像装置、撮像方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7039906B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110336955A (zh) * | 2019-07-12 | 2019-10-15 | 易诚高科(大连)科技有限公司 | 一种自适应的可见光全景拍摄系统 |
CN111935423B (zh) * | 2020-08-02 | 2023-05-05 | 珠海一微半导体股份有限公司 | 一种机器人获取深度图像数据的方法及其控制系统 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004254269A (ja) | 2002-12-25 | 2004-09-09 | Iwane Kenkyusho:Kk | ハイライト抑制画像撮影装置 |
JP2006180270A (ja) | 2004-12-22 | 2006-07-06 | Sony Corp | 画像処理装置、撮像装置、画像処理方法、プログラム、及び記録媒体 |
JP2014150470A (ja) | 2013-02-04 | 2014-08-21 | Hitachi Consumer Electronics Co Ltd | 撮像装置 |
US20150097964A1 (en) | 2013-10-08 | 2015-04-09 | Samsung Electronics Co., Ltd. | Method of controlling exposure time by using infrared light, computer-readable storage medium having recorded thereon computer program codes for performing the method, and electronic apparatus having photographing function |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11144031A (ja) * | 1997-11-06 | 1999-05-28 | Fuji Xerox Co Ltd | 画像読取装置 |
-
2017
- 2017-09-22 JP JP2017182580A patent/JP7039906B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004254269A (ja) | 2002-12-25 | 2004-09-09 | Iwane Kenkyusho:Kk | ハイライト抑制画像撮影装置 |
JP2006180270A (ja) | 2004-12-22 | 2006-07-06 | Sony Corp | 画像処理装置、撮像装置、画像処理方法、プログラム、及び記録媒体 |
JP2014150470A (ja) | 2013-02-04 | 2014-08-21 | Hitachi Consumer Electronics Co Ltd | 撮像装置 |
US20150097964A1 (en) | 2013-10-08 | 2015-04-09 | Samsung Electronics Co., Ltd. | Method of controlling exposure time by using infrared light, computer-readable storage medium having recorded thereon computer program codes for performing the method, and electronic apparatus having photographing function |
Also Published As
Publication number | Publication date |
---|---|
JP2019057887A (ja) | 2019-04-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5460173B2 (ja) | 画像処理方法、画像処理装置、画像処理プログラム、撮像装置 | |
JP5898466B2 (ja) | 撮像装置、その制御方法、及びプログラム | |
US20150208001A1 (en) | Imaging device, imaging method, and program | |
JP6267502B2 (ja) | 撮像装置、撮像装置の制御方法、及び、プログラム | |
JP2017220892A (ja) | 画像処理装置及び画像処理方法 | |
JP6361931B2 (ja) | 画像処理装置及びこれを備えた撮像システムならびに画像処理方法 | |
JP2012010048A (ja) | 画像信号処理装置 | |
US20140192246A1 (en) | Digital photographing apparatus, method of controlling the same, and computer-readable recording medium | |
JP2004007298A (ja) | 撮像装置及び撮像方法 | |
JP7039906B2 (ja) | 撮像装置、撮像方法及びプログラム | |
JP5681589B2 (ja) | 撮像装置及び画像処理方法 | |
JP2018186514A (ja) | 画像処理装置及びこれを備えた撮像システムならびに画像処理方法 | |
JP6726324B1 (ja) | 撮像装置、画像合成方法、及び画像合成プログラム | |
KR101456494B1 (ko) | 잔류 영상을 표시하는 디지털 촬영 장치의 제어 방법, 상기제어 방법에 따라 구동하는 디지털 촬영 장치 및 상기제어 방법을 기록한 기록 매체 | |
JPH07131718A (ja) | 画像合成装置 | |
JP2005354166A (ja) | 画像処理装置、画像処理システム、画像処理方法、及び記憶媒体 | |
JP7148428B2 (ja) | 撮像装置および撮像方法 | |
KR20130005883A (ko) | 디지털 촬영 장치, 그 제어방법, 및 컴퓨터 판독가능 저장매체 | |
JP2007027969A (ja) | 撮像装置及びプログラム | |
JP2000013675A (ja) | デジタルカメラ | |
JP6223173B2 (ja) | 画像処理装置、その制御方法およびプログラム | |
JP5289354B2 (ja) | 撮像装置 | |
JP2016208118A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2004350192A (ja) | ディジタル・カメラおよびその制御方法 | |
JP2019047436A (ja) | 画像処理装置、画像処理方法、画像処理プログラム及び撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200908 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210727 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210914 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211112 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211130 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220126 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220208 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220221 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7039906 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |