JP7059239B2 - 画像処理装置、撮像装置、画像処理方法、プログラムおよび記録媒体 - Google Patents
画像処理装置、撮像装置、画像処理方法、プログラムおよび記録媒体 Download PDFInfo
- Publication number
- JP7059239B2 JP7059239B2 JP2019207455A JP2019207455A JP7059239B2 JP 7059239 B2 JP7059239 B2 JP 7059239B2 JP 2019207455 A JP2019207455 A JP 2019207455A JP 2019207455 A JP2019207455 A JP 2019207455A JP 7059239 B2 JP7059239 B2 JP 7059239B2
- Authority
- JP
- Japan
- Prior art keywords
- images
- image
- region
- image processing
- composite image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 title claims description 17
- 238000003672 processing method Methods 0.000 title claims 3
- 239000002131 composite material Substances 0.000 claims description 24
- 238000012935 Averaging Methods 0.000 claims description 3
- 238000013528 artificial neural network Methods 0.000 claims description 2
- 238000004590 computer program Methods 0.000 claims 1
- 238000000034 method Methods 0.000 description 23
- 238000004364 calculation method Methods 0.000 description 11
- 230000015572 biosynthetic process Effects 0.000 description 10
- 238000003786 synthesis reaction Methods 0.000 description 10
- 230000003287 optical effect Effects 0.000 description 6
- 230000002093 peripheral effect Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 4
- 239000000203 mixture Substances 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 230000002194 synthesizing effect Effects 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000003709 image segmentation Methods 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000011435 rock Substances 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
- G06T5/94—Dynamic range modification of images or parts thereof based on local image properties, e.g. for local contrast enhancement
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/223—Analysis of motion using block-matching
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10141—Special mode during image acquisition
- G06T2207/10144—Varying exposure
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20021—Dividing image into blocks, subimages or windows
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20104—Interactive definition of region of interest [ROI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20208—High dynamic range [HDR] image processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20216—Image averaging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/144—Movement detection
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Artificial Intelligence (AREA)
- Biomedical Technology (AREA)
- Biophysics (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Computing Systems (AREA)
- Software Systems (AREA)
- Mathematical Physics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
- Exposure Control For Cameras (AREA)
Description
図1は、本実施形態における画像処理装置としての撮像装置の構造を説明するためのブロック図である。
以下では、図を用いながら第2の実施形態について説明する。第2の実施形態では、第1の実施形態と異なり、合成処理の有無を、基準画像と他の画像の間の動き情報に基づいて判断する。
以上、本発明の実施形態を説明したが、上記に記載の実施形態はあくまで一例であって、発明の範囲を限定することは意図していない。上記に記載の実施形態は、様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。
101 制御部
102 ROM
103 RAM
104 光学系
105 撮像部
106 A/D変換部
107 画像処理部
108 記録部
109 表示部
110 指示入力部
Claims (11)
- ユーザーによる指示で複数の画像のそれぞれに対して同じ領域分割を行う分割手段と、
前記複数の画像から、合成画像を作成する合成手段と、
前記複数の画像の被写体を判定する判定手段と、を有し、
前記合成画像の第1の領域が、前記複数の画像の第1の数の画像の対応する領域より合成され、
前記合成画像の前記第1の領域と異なる第2の領域が、前記複数の画像の第2の数の画像の対応する領域より合成され、
前記第1の数と前記第2の数と異なり、
前記分割手段が、前記判定手段の判定に基づいて前記領域分割を行うことを特徴とする画像処理装置。 - 前記対応する領域とは、同じ位置にある分割された領域であることを特徴とする請求項1に記載の画像処理装置。
- 前記合成手段は、加算平均で前記合成画像を作成することを特徴とする請求項1または2に記載の画像処理装置。
- 前記判定手段は、ニューラルネットワークを用いて判定することを特徴とする請求項1ないし3のいずれか1項に記載の画像処理装置。
- 前記合成画像の少なくとも一部の領域は、疑似的に、前記複数の画像より露光時間が長いことを特徴とする請求項1乃至4のいずれか1項に記載の画像処理装置。
- 前記複数の画像は、同じ画角を有することを特徴とする請求項1乃至5のいずれか1項に記載の画像処理装置。
- 前記複数の画像の露光時間が同じであることを特徴とする請求項1乃至6のいずれか1項に記載の画像処理装置。
- 複数の画像を撮像する撮像手段と、
ユーザーによる指示で前記複数の画像のそれぞれに対して同じ領域分割を行う分割手段と、
前記複数の画像から、合成画像を作成する合成手段と、
前記複数の画像の被写体を判定する判定手段と、を有し、
前記合成画像の第1の領域が、前記複数の画像の第1の数の画像の対応する領域より合成され、
前記合成画像の前記第1の領域と異なる第2の領域が、前記複数の画像の第2の数の画像の対応する領域より合成され、
前記第1の数と前記第2の数と異なり、
前記分割手段が、前記判定手段の判定に基づいて前記領域分割を行うことを特徴とする撮像装置。 - ユーザーによる指示で複数の画像のそれぞれに対して同じ領域分割を行う分割ステップと、
前記複数の画像から、合成画像を作成する合成ステップと、
前記複数の画像の被写体を判定する判定ステップと、を有し、
前記合成画像の第1の領域が、前記複数の画像の第1の数の画像の対応する領域より合成され、
前記合成画像の前記第1の領域と異なる第2の領域が、前記複数の画像の第2の数の画像の対応する領域より合成され、
前記第1の数と前記第2の数と異なり、
前記分割ステップにおいては、前記判定ステップにおける判定に基づいて前記領域分割を行うことを特徴とする画像処理方法。 - 請求項9に記載の画像処理方法をコンピュータに動作させるコンピュータのプログラム。
- 請求項10に記載のプログラムを記録するコンピュータが読み取り可能な記録媒体。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019207455A JP7059239B2 (ja) | 2019-11-15 | 2019-11-15 | 画像処理装置、撮像装置、画像処理方法、プログラムおよび記録媒体 |
US17/092,091 US11533440B2 (en) | 2019-11-15 | 2020-11-06 | Apparatus, method, and storage medium each relating to image composition |
JP2021053338A JP2021097420A (ja) | 2019-11-15 | 2021-03-26 | 画像処理装置、撮像装置、画像処理方法、プログラムおよび記録媒体 |
JP2021168217A JP7379438B2 (ja) | 2019-11-15 | 2021-10-13 | 画像処理装置、撮像装置、画像処理方法、プログラムおよび記録媒体 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019207455A JP7059239B2 (ja) | 2019-11-15 | 2019-11-15 | 画像処理装置、撮像装置、画像処理方法、プログラムおよび記録媒体 |
Related Child Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021053338A Division JP2021097420A (ja) | 2019-11-15 | 2021-03-26 | 画像処理装置、撮像装置、画像処理方法、プログラムおよび記録媒体 |
JP2021168217A Division JP7379438B2 (ja) | 2019-11-15 | 2021-10-13 | 画像処理装置、撮像装置、画像処理方法、プログラムおよび記録媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021082903A JP2021082903A (ja) | 2021-05-27 |
JP7059239B2 true JP7059239B2 (ja) | 2022-04-25 |
Family
ID=75910153
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019207455A Active JP7059239B2 (ja) | 2019-11-15 | 2019-11-15 | 画像処理装置、撮像装置、画像処理方法、プログラムおよび記録媒体 |
JP2021053338A Pending JP2021097420A (ja) | 2019-11-15 | 2021-03-26 | 画像処理装置、撮像装置、画像処理方法、プログラムおよび記録媒体 |
JP2021168217A Active JP7379438B2 (ja) | 2019-11-15 | 2021-10-13 | 画像処理装置、撮像装置、画像処理方法、プログラムおよび記録媒体 |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021053338A Pending JP2021097420A (ja) | 2019-11-15 | 2021-03-26 | 画像処理装置、撮像装置、画像処理方法、プログラムおよび記録媒体 |
JP2021168217A Active JP7379438B2 (ja) | 2019-11-15 | 2021-10-13 | 画像処理装置、撮像装置、画像処理方法、プログラムおよび記録媒体 |
Country Status (2)
Country | Link |
---|---|
US (1) | US11533440B2 (ja) |
JP (3) | JP7059239B2 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017183983A (ja) | 2016-03-30 | 2017-10-05 | キヤノン株式会社 | 撮像装置、その制御方法、および制御プログラム |
JP2019110386A (ja) | 2017-12-15 | 2019-07-04 | キヤノン株式会社 | 画像処理装置、その制御方法及びプログラム |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4762089B2 (ja) * | 2006-08-31 | 2011-08-31 | 三洋電機株式会社 | 画像合成装置及び方法並びに撮像装置 |
JP5245648B2 (ja) | 2008-08-27 | 2013-07-24 | カシオ計算機株式会社 | 画像処理装置、及び、プログラム |
JP2012186593A (ja) * | 2011-03-04 | 2012-09-27 | Sony Corp | 画像処理装置、および画像処理方法、並びにプログラム |
KR101764372B1 (ko) * | 2011-04-19 | 2017-08-03 | 삼성전자주식회사 | 휴대용 단말기에서 영상 합성 방법 및 장치 |
JP2012235194A (ja) | 2011-04-28 | 2012-11-29 | Canon Inc | 撮像装置及びその制御方法、並びにプログラム |
BR112014001565A2 (pt) * | 2011-07-22 | 2017-06-13 | Fujifilm Corp | método de geração de imagem panorâmica e dispositivo de captura de imagem |
JP5803467B2 (ja) * | 2011-09-14 | 2015-11-04 | 株式会社リコー | 画像処理装置および撮像装置、ならびに画像処理方法 |
KR102124617B1 (ko) * | 2013-09-03 | 2020-06-19 | 삼성전자주식회사 | 이미지 합성 방법 및 그 전자 장치 |
US11614322B2 (en) * | 2014-11-04 | 2023-03-28 | Pixart Imaging Inc. | Camera having two exposure modes and imaging system using the same |
FR3037756B1 (fr) * | 2015-06-18 | 2020-06-19 | Lens Correction Technologies | Procede et dispositif de production d'une image numerique |
JP6604831B2 (ja) * | 2015-11-30 | 2019-11-13 | キヤノン株式会社 | 画像処理装置、画像処理装置の制御方法及びプログラム |
JP2019029833A (ja) | 2017-07-31 | 2019-02-21 | キヤノン株式会社 | 撮像装置 |
JP6985898B2 (ja) | 2017-11-14 | 2021-12-22 | Omデジタルソリューションズ株式会社 | 撮像装置及び表示方法 |
KR102479492B1 (ko) * | 2018-01-08 | 2022-12-20 | 삼성전자주식회사 | 차량 주변의 이미지를 제공하는 전자 장치 및 방법 |
KR20200053125A (ko) * | 2018-11-08 | 2020-05-18 | 삼성전자주식회사 | 전자 장치 및 그 제어 방법 |
-
2019
- 2019-11-15 JP JP2019207455A patent/JP7059239B2/ja active Active
-
2020
- 2020-11-06 US US17/092,091 patent/US11533440B2/en active Active
-
2021
- 2021-03-26 JP JP2021053338A patent/JP2021097420A/ja active Pending
- 2021-10-13 JP JP2021168217A patent/JP7379438B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017183983A (ja) | 2016-03-30 | 2017-10-05 | キヤノン株式会社 | 撮像装置、その制御方法、および制御プログラム |
JP2019110386A (ja) | 2017-12-15 | 2019-07-04 | キヤノン株式会社 | 画像処理装置、その制御方法及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
US20210152722A1 (en) | 2021-05-20 |
JP2022020660A (ja) | 2022-02-01 |
JP2021097420A (ja) | 2021-06-24 |
US11533440B2 (en) | 2022-12-20 |
JP7379438B2 (ja) | 2023-11-14 |
JP2021082903A (ja) | 2021-05-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8175343B2 (en) | Imaging device, image processing device, control method, and program | |
JP5643563B2 (ja) | 画像処理装置及びその制御方法 | |
JP6833415B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP7292905B2 (ja) | 画像処理装置及び画像処理方法、及び撮像装置 | |
JP2010114752A (ja) | 撮像装置及び撮像方法及びプログラム | |
JP6817779B2 (ja) | 画像処理装置、その制御方法、プログラムならびに記録媒体 | |
JP2019110430A (ja) | 制御装置、撮像装置、制御方法およびプログラム | |
JP6604908B2 (ja) | 画像処理装置、その制御方法、および制御プログラム | |
JP6541501B2 (ja) | 画像処理装置、撮像装置、及び画像処理方法 | |
JP7057079B2 (ja) | 画像処理装置、撮像装置、画像処理方法、及びプログラム | |
JP6423668B2 (ja) | 画像処理装置およびその制御方法ならびにプログラム | |
JP2011193062A (ja) | パノラマ画像撮像装置及びパノラマ画像合成方法 | |
JP7059239B2 (ja) | 画像処理装置、撮像装置、画像処理方法、プログラムおよび記録媒体 | |
JP6786273B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP2016127388A (ja) | 画像処理装置およびその制御方法、プログラムならびに記憶媒体 | |
JP6556033B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP2019016893A (ja) | 画像処理装置およびその制御方法及びプログラム | |
JP7277321B2 (ja) | 画像処理装置、画像処理方法、撮像装置およびプログラム | |
JP6218520B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP7204387B2 (ja) | 画像処理装置およびその制御方法 | |
JP6157238B2 (ja) | 画像処理装置、画像処理方法及び画像処理プログラム | |
JP2016208118A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2014155000A (ja) | 画像処理装置、その制御方法、および制御プログラム | |
JP5713256B2 (ja) | 画像処理装置、撮像装置、および画像処理プログラム | |
US20230196517A1 (en) | Information processing apparatus, control method of information processing apparatus, and non-transitory computer readable medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191127 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210126 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210326 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210817 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211013 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220315 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220413 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7059239 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |