JP2013201703A - 撮像装置、その制御方法及びプログラム - Google Patents
撮像装置、その制御方法及びプログラム Download PDFInfo
- Publication number
- JP2013201703A JP2013201703A JP2012069992A JP2012069992A JP2013201703A JP 2013201703 A JP2013201703 A JP 2013201703A JP 2012069992 A JP2012069992 A JP 2012069992A JP 2012069992 A JP2012069992 A JP 2012069992A JP 2013201703 A JP2013201703 A JP 2013201703A
- Authority
- JP
- Japan
- Prior art keywords
- peaking
- video signal
- peaking information
- image sensor
- frequency components
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/815—Camera processing pipelines; Components thereof for controlling the resolution by using a single image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/673—Focus control based on electronic image sensor signals based on contrast or high frequency components of image signals, e.g. hill climbing method
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Color Television Image Signal Generators (AREA)
Abstract
【解決手段】光学系を介して結像された被写体光学像を映像信号に変換するBayer配列の撮像素子102と、撮像素子102により得られた映像信号の解像度を変換する解像度変換回路208と、撮像素子102により得られた映像信号の各色画素データの高周波成分を抽出する抽出回路202〜205と、抽出回路202〜205により抽出した高周波成分を用い、Bayer単位でR、Gr、Gb、Bの4画素の高周波成分の大小を比較して、最も大きいものをピーキング情報として出力する比較・選択回路206と、比較・選択回路206により生成したピーキング情報を、解像度変換208により解像度を変換した映像信号に重畳又は置換する重畳回路209とを備える。
【選択図】図2
Description
フォーカスアシスト機能としてのピーキング機能を用いても、撮像素子の多画素化や大判化の一方で、撮像装置の小型化や撮像システム全体のスリム化の要求の中では、撮影の際に必ずしも撮影解像度がそのまま表示可能なビューファインダをはじめとした高解像度大画面の表示装置を使用可能とは限らず、フォーカス確認の視認性は十分ではなかった。
(第1の実施形態)
第1の実施形態に係る撮像装置の一例として、ピーキング機能を有するデジタルシネマカメラについて説明する。ピーキング機能は、フォーカス調整用に映像中のエッジ部分等を強調表示する機能である。
図1のブロック図において、レンズ部101は、被写体像を撮像素子102の撮像面上に結像する光学系を構成し、ユーザによるマニュアル操作を可能とするズーム機能、焦点調節機能及び絞り調節機能を備える。撮像素子102は、多数の光電変換素子が2次元的に配列された構成を有し、レンズ部101によって結像された被写体光学像を画素単位の映像信号に変換する。撮像素子102は、例えばCMOS(Complementary Metal Oxide Semiconductor)イメージセンサやCCD(Charged Coupled Device)イメージセンサであってよい。撮像素子102はまた光電変換素子による電荷蓄積時間を調整することによる電子シャッター機能を備える。
第1記憶部107は、撮像した映像を信号処理する際のフレームメモリ等としてカメラ信号処理部106が使用する。レンズ駆動部108は、システム制御部111の制御に従って、ユーザによるマニュアル操作以外でも、レンズ部101の図示しないモータやアクチュエータ等を駆動し、ズーム倍率やフォーカス調整、露出調整を行うことが可能である。レンズ駆動部108の制御は、システム制御部111がカメラ信号処理部106での映像信号の処理結果に基づいて行う。例えばAF制御時には、カメラ信号処理部106が求めたAF評価値に基づいてシステム制御部111がレンズ駆動部108を制御し、レンズ部101のフォーカス調整用レンズを駆動制御することで、レンズ部101を被写体に合焦させる。
図2は、ピーキング処理のための構成を示すブロック図であり、カメラ信号処理部106内に他の機能と共に含まれている。図3は、第1の実施形態においてピーキング処理を行う際のイメージ図である。
効果としても、第1の実施形態と同様、高解像度撮影時のピーキング処理によるマニュアルフォーカスアシスト動作の視認性を改善することができる。
本発明の第2の実施形態を説明する。第2の実施形態に係るピーキング機能を有するデジタルシネマカメラの構成は、第1の実施形態と同様であり、ここではその説明を省略する。
図4は、ピーキング処理のための構成を示すブロック図であり、カメラ信号処理部106内に他の機能と共に含まれている。画像データ振り分け回路201、抽出回路202〜205、現像回路207、解像度変換回路208及び重畳回路209は第1の実施形態と同様である。また、図5は、第2の実施形態においてピーキング処理を行う際のイメージ図であり、第1の実施形態における図3に対応する内容となっている。
輝度方程式Y=eG+fB+gR (e, f, g は係数) とした場合、例えば、ここでは、NTSC輝度方程式Y=0.587G+0.114B+0.299Rを例に説明すると、近似式として、R:Gr:Gb:Bを3:3:3:1の割合で、
Y11'=(3・Gr11'+3・Gb11'+B11'+3・R11')・α・・・(1)
α:任意の定数
として加算し、その結果をピーキング情報として出力する。演算の結果として、Bayer4画素の高周波成分から1つのピーキング情報を選出することになるので、エッジ情報の解像度は縦横それぞれ半分の1920×1080となる。
Y11'=(Gr11'+Gb11')・α・・・(2)
α:任意の定数
として加算し、その結果をピーキング情報として出力する。基本的な考え方は第1の実施形態と同様であるので特に図解はしないが、輝度に換算して58.7%程度を占めるGreenの処理だけでも、フォーカスアシストのためのピーキング処理では十分なシステムもある。実装システムのハードリソースや消費電力の観点から、全色比較に対するシュリンク版としての意味がある。
効果としても、第2の実施形態と同様、高解像度撮影時のピーキング処理によるマニュアルフォーカスアシスト動作の視認性を改善することができる。
本発明の第3の実施形態を説明する。第3の実施形態に係るピーキング機能を有するデジタルシネマカメラの構成は、第1の実施形態と同様であり、ここではその説明を省略する。
図6は、ピーキング処理のための構成を示すブロック図であり、カメラ信号処理部106内に他の機能と共に含まれている。画像データ振り分け回路201、抽出回路202〜205、現像回路207、解像度変換回路208及び重畳回路209は第1の実施形態と同様である。また、図7は、第3の実施形態においてピーキング処理を行う際のイメージ図であり、第1の実施形態における図3に対応する内容となっている。
また、本発明は、以下の処理を実行することによっても実現される。すなわち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(又はCPUやMPU等)がプログラムを読み出して実行する処理である。
Claims (10)
- 光学系を介して結像された被写体光学像を映像信号に変換する撮像素子と、
前記撮像素子により得られた映像信号の解像度を変換する解像度変換手段と、
前記撮像素子により得られた映像信号の各色画素データの高周波成分を抽出する抽出手段と、
前記撮像素子の画素配列に基づき、前記抽出手段により抽出した高周波成分からピーキング情報を生成するピーキング情報生成手段と、
前記ピーキング情報生成手段により生成したピーキング情報を、前記解像度変換手段により解像度を変換した映像信号に重畳又は置換する重畳又は置換手段とを備えることを特徴とする撮像装置。 - 前記ピーキング情報生成手段は、前記抽出手段により抽出した各色画素データの高周波成分を所定の領域及び組み合わせで比較及び演算のうち少なくともいずれかを実行して、その結果からピーキング情報を生成することを特徴とする請求項1に記載の撮像装置。
- 前記撮像素子はR、Gr、Gb、Bが並べられたBayer配列であり、
前記ピーキング情報生成手段は、Bayer単位でR、Gr、Gb、Bの4画素の高周波成分の大小を比較して、最も大きいものをピーキング情報として出力することを特徴とする請求項2に記載の撮像装置。 - 前記撮像素子はR、Gr、Gb、Bが並べられたBayer配列であり、
前記ピーキング情報生成手段は、Bayer単位でGr、Gbの2画素の高周波成分の大小を比較して、最も大きい高周波成分をピーキング情報として出力することを特徴とする請求項2に記載の撮像装置。 - 前記撮像素子はR、Gr、Gb、Bが並べられたBayer配列であり、
前記ピーキング情報生成手段は、Bayer単位でR、Gr、Gb、Bの4画素の高周波成分を所定の割合で加算して、その加算したものをピーキング情報として出力することを特徴とする請求項2に記載の撮像装置。 - 前記所定の割合はR:Gr:Gb:Bを3:3:3:1とすることを特徴とする請求項5に記載の撮像装置。
- 前記撮像素子はR、Gr、Gb、Bが並べられたBayer配列であり、
前記ピーキング情報生成手段は、Bayer単位でGr、Gbの2画素の高周波成分を加算して、その加算した高周波成分をピーキング情報として出力することを特徴とする請求項2に記載の撮像装置。 - 前記撮像素子はR、Gr、Gb、Bが並べられたBayer配列であり、
前記ピーキング情報生成手段は、Bayer単位でR、Gr、Gb、Bの4画素のうち、GrとGbの高周波成分を加算し、かつRとBの高周波成分を加算し、その大小を比較して、大きいものをピーキング情報として出力することを特徴とする請求項2に記載の撮像装置。 - 光学系を介して結像された被写体光学像を映像信号に変換する撮像素子を備えた撮像装置の制御方法であって、
前記撮像素子により得られた映像信号の解像度を変換するステップと、
前記撮像素子により得られた映像信号の各色画素データの高周波成分を抽出するステップと、
前記撮像素子の画素配列に基づき、前記抽出した高周波成分からピーキング情報を生成するステップと、
前記生成したピーキング情報を、前記解像度を変換した映像信号に重畳又は置換するステップとを有することを特徴とする撮像装置の制御方法。 - 光学系を介して結像された被写体光学像を映像信号に変換する撮像素子を備えた撮像装置を制御するためのプログラムであって、
前記撮像素子により得られた映像信号の解像度を変換する処理と、
前記撮像素子により得られた映像信号の各色画素データの高周波成分を抽出する処理と、
前記撮像素子の画素配列に基づき、前記抽出した高周波成分からピーキング情報を生成する処理と、
前記生成したピーキング情報を、前記解像度を変換した映像信号に重畳又は置換する処理とをコンピュータに実行させるためのプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012069992A JP6032912B2 (ja) | 2012-03-26 | 2012-03-26 | 撮像装置、その制御方法及びプログラム |
US13/795,723 US9277120B2 (en) | 2012-03-26 | 2013-03-12 | Image capturing apparatus provided with a peaking function, control method therefor, and storage medium |
EP13160985.1A EP2645702B1 (en) | 2012-03-26 | 2013-03-26 | Image capturing apparatus, control method therefor, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012069992A JP6032912B2 (ja) | 2012-03-26 | 2012-03-26 | 撮像装置、その制御方法及びプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2013201703A true JP2013201703A (ja) | 2013-10-03 |
JP2013201703A5 JP2013201703A5 (ja) | 2015-04-30 |
JP6032912B2 JP6032912B2 (ja) | 2016-11-30 |
Family
ID=48049778
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012069992A Active JP6032912B2 (ja) | 2012-03-26 | 2012-03-26 | 撮像装置、その制御方法及びプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US9277120B2 (ja) |
EP (1) | EP2645702B1 (ja) |
JP (1) | JP6032912B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021010020A1 (ja) * | 2019-07-17 | 2021-01-21 | ソニー株式会社 | 画像処理装置、撮像装置、画像処理方法、プログラム |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6248412B2 (ja) * | 2013-05-13 | 2017-12-20 | ソニー株式会社 | 撮像装置、撮像方法、プログラム |
JP6769434B2 (ja) * | 2015-06-18 | 2020-10-14 | ソニー株式会社 | 表示制御装置、表示制御方法および表示制御プログラム |
DE112018004930T5 (de) * | 2017-09-08 | 2020-06-18 | Sony Corporation | Bildverarbeitungseinrichtung, bildverarbeitungsverfahren und bildverarbeitungsprogramm |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006148420A (ja) * | 2004-11-18 | 2006-06-08 | Nippon Hoso Kyokai <Nhk> | 信号処理装置、撮像装置、及び信号処理プログラム |
JP2010147926A (ja) * | 2008-12-19 | 2010-07-01 | Sanyo Electric Co Ltd | 撮像装置 |
JP2011176788A (ja) * | 2010-01-26 | 2011-09-08 | Nippon Hoso Kyokai <Nhk> | ビューファインダ映像生成装置 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060033831A1 (en) * | 1999-09-14 | 2006-02-16 | Nikon Corporation | Electronic still camera |
JP4474641B2 (ja) | 2004-08-20 | 2010-06-09 | 日本ビクター株式会社 | フォーカス調整用信号生成装置 |
JP4245019B2 (ja) | 2006-09-04 | 2009-03-25 | ソニー株式会社 | ビューファインダ、撮像装置および表示信号生成回路 |
US8023037B2 (en) | 2006-12-28 | 2011-09-20 | Victor Company Of Japan, Ltd. | Focus-adjustment signal generating apparatus and method, and imaging apparatus and method with manual focus adjustments |
JP4508256B2 (ja) * | 2008-03-19 | 2010-07-21 | ソニー株式会社 | 映像信号処理装置、撮像装置及び映像信号処理方法 |
JP4764938B2 (ja) * | 2009-04-07 | 2011-09-07 | シャープ株式会社 | 画像処理装置、画像形成装置、画像処理装置の制御方法、プログラム、記録媒体 |
US8421897B2 (en) | 2009-04-08 | 2013-04-16 | Canon Kabushiki Kaisha | Image capturing apparatus and control method therefor |
-
2012
- 2012-03-26 JP JP2012069992A patent/JP6032912B2/ja active Active
-
2013
- 2013-03-12 US US13/795,723 patent/US9277120B2/en not_active Expired - Fee Related
- 2013-03-26 EP EP13160985.1A patent/EP2645702B1/en not_active Not-in-force
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006148420A (ja) * | 2004-11-18 | 2006-06-08 | Nippon Hoso Kyokai <Nhk> | 信号処理装置、撮像装置、及び信号処理プログラム |
JP2010147926A (ja) * | 2008-12-19 | 2010-07-01 | Sanyo Electric Co Ltd | 撮像装置 |
JP2011176788A (ja) * | 2010-01-26 | 2011-09-08 | Nippon Hoso Kyokai <Nhk> | ビューファインダ映像生成装置 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021010020A1 (ja) * | 2019-07-17 | 2021-01-21 | ソニー株式会社 | 画像処理装置、撮像装置、画像処理方法、プログラム |
JP7420141B2 (ja) | 2019-07-17 | 2024-01-23 | ソニーグループ株式会社 | 画像処理装置、撮像装置、画像処理方法、プログラム |
US11979670B2 (en) | 2019-07-17 | 2024-05-07 | Sony Group Corporation | Image processing apparatus, imaging apparatus, image processing method, and program for blending plurality of image signals based on a peaking signal |
Also Published As
Publication number | Publication date |
---|---|
JP6032912B2 (ja) | 2016-11-30 |
EP2645702A2 (en) | 2013-10-02 |
EP2645702A3 (en) | 2015-04-08 |
US20130250145A1 (en) | 2013-09-26 |
US9277120B2 (en) | 2016-03-01 |
EP2645702B1 (en) | 2017-08-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8797462B2 (en) | Image processing apparatus and image processing method | |
JP5845464B2 (ja) | 画像処理装置及び画像処理方法並びにデジタルカメラ | |
US7768553B2 (en) | Photographing apparatus, display control method, and program | |
JP6317577B2 (ja) | 映像信号処理装置及びその制御方法 | |
US8587671B2 (en) | Digital image processing apparatus, an image processing method, and a recording medium storing the image processing method for obtaining an out-of-focus image by using a plurality of images | |
JP2003224769A (ja) | デジタルカメラ | |
JP2014002635A (ja) | 画像処理装置、撮像装置、画像処理方法およびプログラム | |
US10091415B2 (en) | Image processing apparatus, method for controlling image processing apparatus, image pickup apparatus, method for controlling image pickup apparatus, and recording medium | |
JP6032912B2 (ja) | 撮像装置、その制御方法及びプログラム | |
JP4742813B2 (ja) | 画像処理装置および画像処理方法 | |
JP4941219B2 (ja) | ノイズ抑圧装置、ノイズ抑圧方法、ノイズ抑圧プログラムおよび撮像装置 | |
JP6929711B2 (ja) | 画像処理装置、画像処理方法、画像処理プログラム | |
US9979943B2 (en) | Image processing apparatus for applying emphasis effect processing to a specific component of an image signal, image processing method and image capture apparatus | |
JP2014146850A (ja) | 撮像装置およびその制御方法 | |
JP2008252767A (ja) | ノイズ低減装置、ノイズ低減方法、及び電子機器 | |
JP2008072501A (ja) | 撮像装置、撮像方法、プログラムおよび記録媒体 | |
JP6592293B2 (ja) | 画像処理装置、画像処理方法、および撮像装置 | |
JP2005277618A (ja) | 撮像装置、シェーディング補正装置、及びシェーディング補正方法 | |
JP7352745B2 (ja) | 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム | |
JP6592292B2 (ja) | 画像処理装置、画像処理方法、および撮像装置 | |
JP4942596B2 (ja) | 画像処理装置、撮像装置及び表示装置 | |
JP2005203880A (ja) | 画像処理装置および方法、記録媒体、並びにプログラム | |
JP2010193180A (ja) | 画像処理装置及び画像処理プログラム | |
JP2011142666A (ja) | 撮影装置及び露出制御方法 | |
JP2008227840A (ja) | 撮影装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150310 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150310 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160107 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160223 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160419 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160927 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20161025 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6032912 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |