JP2011130328A - 画像処理装置および方法、並びにプログラム - Google Patents
画像処理装置および方法、並びにプログラム Download PDFInfo
- Publication number
- JP2011130328A JP2011130328A JP2009288860A JP2009288860A JP2011130328A JP 2011130328 A JP2011130328 A JP 2011130328A JP 2009288860 A JP2009288860 A JP 2009288860A JP 2009288860 A JP2009288860 A JP 2009288860A JP 2011130328 A JP2011130328 A JP 2011130328A
- Authority
- JP
- Japan
- Prior art keywords
- unit
- image
- human body
- connection line
- region
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Exposure Control For Cameras (AREA)
- Stereoscopic And Panoramic Photography (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】動き補償パラメータ算出部303は、撮像方向を順次変化させて撮像を行うことにより得られた複数枚の撮像画像間の撮像を行った撮像装置における相対的な動きを補償するパラメータを算出する。顔検出部304は、人間の顔領域の検出を行い顔検出情報を生成する。人体領域推定部305は、顔検出情報を用いて人体領域の推定を行い被写体情報を生成する。被写体情報射影部306は、動き補償パラメータに基づき隣接する撮像画像が互いに重なる重複領域における被写体情報をスイープ軸に射影する。接続ライン設定部307は、射影された被写体情報に基づいて隣接する撮像画像の接続を行う接続ラインを設定する。
【選択図】 図3
Description
1.撮像装置の構成
2.撮像装置の動作
3.画像処理部の構成
4.パノラマ画像の生成処理
5.処理をプログラムにより実行する場合
図2は、本発明を適用した撮像装置の一実施の形態の構成例を示す図である。撮像装置10は、光学系、信号処理系、記録系、表示系、および制御系から構成される。
次に、撮像装置10の動作について説明する。撮像装置10では、被写体からの入射光、すなわち被写体の光画像は、レンズ21および絞り22を介して撮像素子23に入射し、撮像素子23によって光電変換されて電気信号とされる。撮像素子23で得られた電気信号は、サンプリング部24によってノイズ成分が除去され、A/D変換部25によってデジタル化された後、画像処理部30が内蔵する図示せぬ画像メモリに一時的に格納される。
図3は、画像処理部30の構成を示している。画像処理部30は、撮像画像保持部301、円筒射影部302、動き補償パラメータ算出部303、顔検出部304、人体領域推定部305、被写体情報射影部306、接続ライン設定部307、画像射影部308、および画像合成部309から構成される。
撮像装置10は、ユーザが操作入力部47を操作して、パノラマ画像の生成を指示したとき、撮像画像を撮像してパノラマ画像を生成する処理であるパノラマ画像の生成処理を開始する。以下、図4のフローチャートを参照して、撮像装置10によるパノラマ画像の生成処理について説明する。
hx0=func_hx0(fx0,fy0,fx1,fy1) ・・・(1)
hy0=func_hy0(fx0,fy0,fx1,fy1) ・・・(2)
hx1=func_hx1(fx0,fy0,fx1,fy1) ・・・(3)
hy1=func_hy1(fx0,fy0,fx1,fy1) ・・・(4)
bx0=func_bx0(fx0,fy0,fx1,fy1) ・・・(5)
by0=func_by0(fx0,fy0,fx1,fy1) ・・・(6)
bx1=func_bx1(fx0,fy0,fx1,fy1) ・・・(7)
by1=func_by1(fx0,fy0,fx1,fy1) ・・・(8)
さらに、上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、プログラム記録媒体からインストールされる。
Claims (9)
- 撮像方向を順次変化させて撮像を行うことにより得られた複数枚の撮像画像間の前記撮像を行った撮像装置における相対的な動きを補償するパラメータを算出する動き補償パラメータ算出部と、
前記撮像画像毎に人間の顔領域の検出を行い顔検出情報を生成する顔検出部と、
前記顔検出情報を用いて人体領域の推定を行い被写体情報を生成する人体領域推定部と、
前記動き補償パラメータに基づき隣接する撮像画像が互いに重なる重複領域を判別して、該重複領域における前記被写体情報を前記撮像方向の変化方向であるスイープ軸に射影する被写体情報射影部と、
前記射影された被写体情報に基づいて前記隣接する撮像画像の接続を行う接続ラインを設定する接続ライン設定部と
を備える画像処理装置。 - 前記顔検出部は、前記顔検出情報として、検出した顔を含む検出顔領域を示す検出顔領域情報を生成し、
前記人体領域推定部は、前記検出顔領域情報を入力とする推定関数によって、人体領域の推定を行う請求項1記載の画像処理装置。 - 前記人体領域推定部は、前記被写体情報として前記人体領域の推定結果に応じて評価値を生成し、
前記被写体情報射影部は、前記スイープ軸と直交する方向にある撮像画像上の各位置の評価値を積分することで被写体情報を前記スイープ軸に射影する請求項2記載の画像処理装置。 - 前記人体領域推定部は、推定した前記人体領域で評価値を大きく設定し、
前記接続ライン設定部は、前記射影した評価値が最小となる位置で前記スイープ軸と直交する方向を前記接続ラインとする請求項3記載の画像処理装置。 - 前記人体領域推定部は、人体領域を少なくとも前記顔領域を含む複数の領域に区分して、領域毎に前記評価値の重み付けを行う請求項4記載の画像処理装置。
- 前記顔検出部は、前記検出顔領域を矩形状の領域として、該矩形状の領域を示す座標値を前記検出顔領域情報とし、
前記人体領域推定部は、前記検出顔情報を入力とする推定関数によって、推定頭部領域と推定胴体部領域を推定する請求項5記載の画像処理装置。 - 前記動き補償パラメータを利用して、前記複数枚の撮像画像をパノラマ座標系に射影する画像射影部と、
前記設定された接続ラインの位置で前記パノラマ座標系に射影された撮像画像の接続を行いパノラマ画像を生成する画像合成部とを有する請求項1記載の画像処理装置。 - 動き補償パラメータ算出部で、撮像方向を順次変化させて撮像を行うことにより得られた複数枚の撮像画像間の前記撮像を行った撮像装置における相対的な動きを補償するパラメータを算出するステップと、
顔検出部で、前記撮像画像毎に人間の顔領域の検出を行い顔検出情報を生成するステップと、
人体領域推定部で、前記顔検出情報を用いて人体領域の推定を行い被写体情報を生成するステップと、
被写体情報射影部で、前記動き補償パラメータに基づき隣接する撮像画像が互いに重なる重複領域を判別して、該重複領域における前記被写体情報を前記撮像方向の変化方向であるスイープ軸に射影するステップと、
接続ライン設定部で、前記射影された被写体情報に基づいて前記隣接する撮像画像の接続を行う接続ラインを設定するステップとを具備する画像処理方法。 - コンピュータを、
撮像方向を順次変化させて撮像を行うことにより得られた複数枚の撮像画像間の前記撮像を行った撮像装置における相対的な動きを補償するパラメータを算出する動き補償パラメータ算出部として動作させる機能手段と、
前記撮像画像毎に人間の顔領域の検出を行い顔検出情報を生成する顔検出部として動作させる機能手段と、
前記顔検出情報を用いて人体領域の推定を行い被写体情報を生成する人体領域推定部として動作させる機能手段と、
前記動き補償パラメータに基づき隣接する撮像画像が互いに重なる重複領域を判別して、該重複領域における前記被写体情報を前記撮像方向の変化方向であるスイープ軸に射影する被写体情報射影部として動作させる機能手段と、
前記射影された被写体情報に基づいて前記隣接する撮像画像の接続を行う接続ラインを設定する接続ライン設定部として動作させる機能手段として機能させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009288860A JP5531603B2 (ja) | 2009-12-21 | 2009-12-21 | 画像処理装置および方法、並びにプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009288860A JP5531603B2 (ja) | 2009-12-21 | 2009-12-21 | 画像処理装置および方法、並びにプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011130328A true JP2011130328A (ja) | 2011-06-30 |
JP5531603B2 JP5531603B2 (ja) | 2014-06-25 |
Family
ID=44292385
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009288860A Expired - Fee Related JP5531603B2 (ja) | 2009-12-21 | 2009-12-21 | 画像処理装置および方法、並びにプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5531603B2 (ja) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013228930A (ja) * | 2012-04-26 | 2013-11-07 | Canon Inc | 被写体領域検出装置、その制御方法、および制御プログラム、並びに撮像装置および表示装置 |
JP2014149798A (ja) * | 2013-02-04 | 2014-08-21 | Casio Comput Co Ltd | 画像処理装置、撮像装置、画像処理方法及びプログラム |
KR101470442B1 (ko) * | 2014-10-21 | 2014-12-08 | 주식회사 모리아타운 | 모바일 단말의 광각 영상 통화 방법 및 장치 |
JP2017102785A (ja) * | 2015-12-03 | 2017-06-08 | 日本電信電話株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
JP2019160004A (ja) * | 2018-03-15 | 2019-09-19 | 富士フイルム株式会社 | 画像判別装置,画像判別方法ならびに画像判別装置のプログラムおよびそのプログラムを格納した記録媒体 |
CN112183173A (zh) * | 2019-07-05 | 2021-01-05 | 北京字节跳动网络技术有限公司 | 一种图像处理方法、装置及存储介质 |
WO2021140590A1 (ja) * | 2020-01-08 | 2021-07-15 | 日本電気株式会社 | 人体検出装置、人体検出方法、及び、記録媒体 |
CN113674230A (zh) * | 2021-08-10 | 2021-11-19 | 深圳市捷顺科技实业股份有限公司 | 一种室内逆光人脸关键点的检测方法及装置 |
WO2022208669A1 (ja) * | 2021-03-30 | 2022-10-06 | 日本電気株式会社 | 情報処理装置、情報処理方法、及び、記録媒体 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004054928A (ja) * | 2002-06-21 | 2004-02-19 | Microsoft Corp | カメラのイメージステッチングのためのシステムおよび方法 |
JP2007316982A (ja) * | 2006-05-26 | 2007-12-06 | Olympus Imaging Corp | 画像表示制御装置、画像表示装置、カメラ、及び画像表示制御プログラム |
JP2008123086A (ja) * | 2006-11-09 | 2008-05-29 | Matsushita Electric Ind Co Ltd | 画像処理装置及び画像処理方法 |
-
2009
- 2009-12-21 JP JP2009288860A patent/JP5531603B2/ja not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004054928A (ja) * | 2002-06-21 | 2004-02-19 | Microsoft Corp | カメラのイメージステッチングのためのシステムおよび方法 |
JP2007316982A (ja) * | 2006-05-26 | 2007-12-06 | Olympus Imaging Corp | 画像表示制御装置、画像表示装置、カメラ、及び画像表示制御プログラム |
JP2008123086A (ja) * | 2006-11-09 | 2008-05-29 | Matsushita Electric Ind Co Ltd | 画像処理装置及び画像処理方法 |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013228930A (ja) * | 2012-04-26 | 2013-11-07 | Canon Inc | 被写体領域検出装置、その制御方法、および制御プログラム、並びに撮像装置および表示装置 |
JP2014149798A (ja) * | 2013-02-04 | 2014-08-21 | Casio Comput Co Ltd | 画像処理装置、撮像装置、画像処理方法及びプログラム |
KR101470442B1 (ko) * | 2014-10-21 | 2014-12-08 | 주식회사 모리아타운 | 모바일 단말의 광각 영상 통화 방법 및 장치 |
JP2017102785A (ja) * | 2015-12-03 | 2017-06-08 | 日本電信電話株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
US11620853B2 (en) | 2018-03-15 | 2023-04-04 | Fujifilm Corporation | Image discrimination apparatus, image discrimination method, program of image discrimination apparatus, and recording medium on which program is stored |
JP2019160004A (ja) * | 2018-03-15 | 2019-09-19 | 富士フイルム株式会社 | 画像判別装置,画像判別方法ならびに画像判別装置のプログラムおよびそのプログラムを格納した記録媒体 |
JP2022066413A (ja) * | 2018-03-15 | 2022-04-28 | 富士フイルム株式会社 | 画像判別装置,画像判別方法ならびに画像判別装置のプログラムおよびそのプログラムを格納した記録媒体 |
CN112183173A (zh) * | 2019-07-05 | 2021-01-05 | 北京字节跳动网络技术有限公司 | 一种图像处理方法、装置及存储介质 |
CN112183173B (zh) * | 2019-07-05 | 2024-04-09 | 北京字节跳动网络技术有限公司 | 一种图像处理方法、装置及存储介质 |
WO2021140590A1 (ja) * | 2020-01-08 | 2021-07-15 | 日本電気株式会社 | 人体検出装置、人体検出方法、及び、記録媒体 |
WO2022208669A1 (ja) * | 2021-03-30 | 2022-10-06 | 日本電気株式会社 | 情報処理装置、情報処理方法、及び、記録媒体 |
CN113674230B (zh) * | 2021-08-10 | 2023-12-19 | 深圳市捷顺科技实业股份有限公司 | 一种室内逆光人脸关键点的检测方法及装置 |
CN113674230A (zh) * | 2021-08-10 | 2021-11-19 | 深圳市捷顺科技实业股份有限公司 | 一种室内逆光人脸关键点的检测方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
JP5531603B2 (ja) | 2014-06-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5531603B2 (ja) | 画像処理装置および方法、並びにプログラム | |
JP5359783B2 (ja) | 画像処理装置および方法、並びにプログラム | |
JP2011130327A (ja) | 画像処理装置および方法、並びにプログラム | |
US10789676B2 (en) | Image processing device, image processing method, and program | |
US9456135B2 (en) | Image synthesizing apparatus, image synthesizing method, and image synthesizing program | |
JP5859958B2 (ja) | 画像処理装置、画像処理方法、およびプログラム | |
JP5906028B2 (ja) | 画像処理装置、画像処理方法 | |
KR101603791B1 (ko) | 파노라마의 생성 방법 | |
JP2010021698A (ja) | 画像処理装置およびプログラム | |
KR20090093817A (ko) | 패닝화상을 촬상하기 위한 패닝모드를 구비한 촬상장치 | |
JP2012199752A (ja) | 画像処理装置と画像処理方法およびプログラム | |
JP2013020527A (ja) | 画像処理装置および方法、並びにプログラム | |
JP5011504B2 (ja) | 画像合成装置、画像合成方法及びプログラム | |
JP2013165487A (ja) | 画像処理装置、撮像装置、およびプログラム | |
JP2017055397A (ja) | 画像処理装置、画像合成装置、画像処理システム、画像処理方法、及びプログラム | |
KR101603876B1 (ko) | 파노라마의 생성 방법 | |
JP5402166B2 (ja) | 画像合成装置及びプログラム | |
JP5267279B2 (ja) | 画像合成装置及びプログラム | |
JP4556803B2 (ja) | 画像処理装置及びプログラム | |
JP2009027437A (ja) | 画像処理装置,画像処理方法及び撮像装置 | |
JP2010273261A (ja) | 画像処理装置、撮像装置 | |
JP5548023B2 (ja) | 撮像装置および撮像方法 | |
JP2009218851A (ja) | 映像処理装置 | |
JP4919165B2 (ja) | 画像合成装置及びプログラム | |
JP2006295329A (ja) | 画像処理装置、撮像装置、画像処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20121206 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130919 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131008 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20131118 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131217 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140110 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140325 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140407 |
|
LAPS | Cancellation because of no payment of annual fees |