JPWO2015049899A1 - 画像表示装置および画像表示方法 - Google Patents

画像表示装置および画像表示方法 Download PDF

Info

Publication number
JPWO2015049899A1
JPWO2015049899A1 JP2015540405A JP2015540405A JPWO2015049899A1 JP WO2015049899 A1 JPWO2015049899 A1 JP WO2015049899A1 JP 2015540405 A JP2015540405 A JP 2015540405A JP 2015540405 A JP2015540405 A JP 2015540405A JP WO2015049899 A1 JPWO2015049899 A1 JP WO2015049899A1
Authority
JP
Japan
Prior art keywords
image
main subject
area
unit
image processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2015540405A
Other languages
English (en)
Inventor
浩次 酒井
浩次 酒井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Publication of JPWO2015049899A1 publication Critical patent/JPWO2015049899A1/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621—Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)

Abstract

特殊効果画像処理を施す領域を簡単に変更することができる画像表示装置および画像表示方法を提供する。撮像した静止画または動画の画像を表示する画像表示部（１７）と、画像表示部（１７）に表示された画像の一部の位置を選択するタッチ出力部（１）と、タッチ出力部（１）によって選択された画像位置に基づいて選択された画像領域を主被写体画像領域として認識する主被写体サイズ検出部（７）と、識別された主被写体領域を変更する主被写体領域更新部（９）と、選択された主被写体領域の少なくとも一部を除く領域に対して特殊効果画像処理を施す特殊効果画像処理部（１５）を有する。

Description

本発明は、画像に特殊効果を施す画像表示装置および画像表示方法に関する。
写真作品をより印象的に仕上げるために、画面周辺部の画像をぼかしたり、放射状に流したりする光学フィルタが市販されている。また、主要被写体が暗闇の中に浮き上がる効果を演出するために、主要被写体に対してスポットライトを照射する撮影技法もある。
ただし、光学フィルタは撮影画面の中心部に主要被写体が存在することを前提にしているため、出来上がった写真は単調になりやすいという欠点がある。そこで、特許文献１では、光学フィルタ等によって特殊効果を付与する代わりに、指定した範囲に特殊効果を施すようにしたデジタルカメラが提案されている。
特開２０１３−５５６０９号公報
上述の特許文献１では、指定した範囲について特殊効果を施すことはできるが、その範囲を変更する等、特殊効果を施す領域を変更するのが簡単ではない。
本発明は、このような事情を鑑みてなされたものであり、特殊効果画像処理を施す領域を簡単に変更することができる画像表示装置および画像表示方法を提供することを目的とする。
本発明の第１の態様に係る画像表示装置は、撮像した静止画または動画の画像を表示する表示部と、上記表示部の表示画面上へのタッチ操作または表示画面近傍でのジェスチャを検出する操作入力検出部と、上記表示部に表示された画像の一部の位置を選択する画像位置選択部と、上記画像位置選択部によって選択された画像位置に基づいて選択された画像領域を主被写体画像領域として認識する画像識別部と、上記操作入力検出部で検出された圧力、位置変化、方向、速度、変位量の少なくとも１つに応じて上記主被写体画像領域を変更する画像領域変更部と、上記選択された主被写体領域の少なくとも一部を除く領域に対して特殊効果画像処理を施す特殊画像処理部と、を有する。
本発明の第２の態様に係る画像表示方法は、撮像した静止画または動画の画像を表示部に表示する表示ステップと、上記表示部の表示画面上へのタッチ操作または表示画面近傍でのジェスチャを検出する操作入力検出ステップと、上記表示部に表示された画像の一部の位置を選択する選択ステップと、上記選択された画像位置に基づいて選択された画像領域を主被写体画像領域として認識する認識ステップと、上記操作入力検出ステップで検出された圧力、位置変化、方向、速度、変位量の少なくとも１つに応じて上記主被写体画像領域を変更する変更ステップと、上記選択された主被写体領域の少なくとも一部を除く領域に対して特殊効果画像処理を施す特殊画像処理ステップと、を有する。
本発明の第３の態様に係るコンピュータ読み取り可能な記録媒体は、撮像した静止画または動画の画像を表示部に表示する表示ステップと、上記表示部の表示画面上へのタッチ操作または表示画面近傍でのジェスチャを検出する操作入力検出ステップと、上記表示部に表示された画像の一部の位置を選択する選択ステップと、上記選択された画像位置に基づいて選択された画像領域を主被写体画像領域として認識する認識ステップと、上記操作入力検出ステップで検出された圧力、位置変化、方向、速度、変位量の少なくとも１つに応じて上記主被写体画像領域を変更する変更ステップと、上記選択された主被写体領域の少なくとも一部を除く領域に対して特殊効果画像処理を施す特殊画像処理ステップと、をコンピュータに実行させるためのプログラムを記録する。
本発明によれば、特殊効果画像処理を施す領域を簡単に変更することができる画像表示装置および画像表示方法を提供することができる。
本発明の一実施形態に係るデジタルカメラの主として電気的構成を示すブロック図である。 本発明の一実施形態に係るデジタルカメラの特殊効果画像処理の付与に関する構成を示すブロック図である。 本発明の一実施形態に係るデジタルカメラにおいて、表示部での表示状態と、タッチパネルの操作状態を示す図である。 本発明の一実施形態に係るデジタルカメラにおいて、ズームエフェクトを付与するための画像処理を説明する図である。 本発明の一実施形態におけるデジタルカメラにおける特殊効果画像処理の概略を説明する図である。 本発明の一実施形態におけるデジタルカメラにおける特殊効果画像処理の概略を説明する図である。 本発明の一実施形態におけるデジタルカメラのメイン動作を説明するフローチャートである。 本発明の一実施形態におけるデジタルカメラの再生モードの動作を説明するフローチャートである。 本発明の一実施形態におけるデジタルカメラの特殊画像処理の動作を説明するフローチャートである。 本発明の一実施形態におけるデジタルカメラにおいて、動作分析の一例を示す図表である。 本発明の一実施形態におけるデジタルカメラにおいて、手動による主被写体領域の移動動作の一例を示す図表である。 本発明の一実施形態におけるデジタルカメラの特殊画像処理の第１変形例の動作を説明するフローチャートである。 本発明の一実施形態におけるデジタルカメラにおいて、第１の変形例における動作分析の一例を示す図表である。 本発明の一実施形態におけるデジタルカメラにおいて、第１の変形例における動作分析の一例を示す図表である。 本発明の一実施形態におけるデジタルカメラにおいて、第１の変形例における動作分析の一例を示す図表である。 本発明の一実施形態におけるデジタルカメラの特殊画像処理の第２変形例の動作を説明するフローチャートである。 本発明の一実施形態におけるデジタルカメラの特殊画像処理の第２変形例の動作を説明するフローチャートである。
以下、本発明の一実施形態としてデジタルカメラに本発明を適用した例について説明する。このデジタルカメラは、撮像部を有し、この撮像部によって被写体像を画像データに変換し、この変換された画像データに基づいて、被写体像を本体の背面に配置した表示部にライブビュー表示する。撮影者はライブビュー表示を観察することにより、構図やシャッタチャンスを決定する。レリーズ操作時には、画像データが記録媒体に記録される。記録媒体に記録された画像データは、再生モードを選択すると、表示部に再生表示することができる。
また、本実施形態に係るデジタルカメラは、ライブビュー表示中または再生表示中に、ＡＦ（Ａｕｔｏ Ｆｏｃｕｓ：自動焦点調節）によって検出した被写体位置、またはタッチパネル等によってユーザによって指定された位置に基づいて選択された主被写体領域に対して特殊効果画像処理（アートフィルタ処理ともいう）を行うとともに、この画像領域をユーザのタッチパネル操作等によって変更することが可能である。
次に、図１を用いて、本実施形態に係る画像表示装置の例であるデジタルカメラの主として電気的構成について説明する。このデジタルカメラは、交換レンズ１００と、この交換レンズ１００を装着するカメラ本体２００とから構成されている。なお、本実施形態のような交換レンズタイプ以外にも、レンズ鏡筒をカメラ本体に固定するタイプのカメラでも勿論かまわない。
交換レンズ１００の内部には、焦点調節および焦点距離調節用の撮影光学系１０１（レンズ１０１ａ、レンズ１０１ｂ）と、開口量を調節するための絞り１０３が配置されている。撮影光学系１０１は光学系駆動機構１０７によって駆動され、絞り１０３は絞り駆動機構１０９によって駆動されるよう接続されている。
光学系駆動機構１０７および絞り駆動機構１０９は、それぞれレンズＣＰＵ１１１に接続されており、このレンズＣＰＵ１１１は通信接点３００を介してカメラ本体２００に接続されている。レンズＣＰＵ１１１は交換レンズ１００内の制御を行うものであり、光学系駆動機構１０７を制御してピント合わせや、ズーム駆動を行うとともに、絞り駆動機構１０９を制御して絞り値制御を行う。
カメラ本体２００内であって、撮影光学系１０１の撮影光軸上には、フォーカルプレーンタイプのシャッタ２１５、赤外カットフィルタ・ローパスフィルタ２１７、および撮像素子２２１が配置されている。シャッタ２１５は、シャッタ駆動機構２１３によって駆動され、所定時間の間、撮影光学系１０１によって形成される被写体光束を通過させる。
赤外カットフィルタ２１７は、被写体光束から赤外光成分を除去するための光学フィルタである。撮像素子２２１は、撮影光学系１０１によって結像される被写体像を電気信号に光電変換する。なお、撮像素子２２１としては、ＣＣＤ（Charge Coupled Device）、またはＣＭＯＳ（Complementary Metal Oxide Semiconductor）等の二次元撮像素子を使用できることは言うまでもない。
撮像素子２２１は撮像素子駆動回路２２３に接続され、この撮像素子駆動回路２２３によって、撮像素子２２１から画像信号の読出し等が行われる。撮像素子駆動回路２２３は、前処理回路２２５に接続されており、前処理回路２２５は、読み出された画像信号のＡＤ変換や、ライブビュー表示のための画素間引き処理のための切り出し処理等の画像処理のための前処理を行なう。
前処理回路２２５は、データバス２５２に接続されている。このデータバス２５２には、シーケンスコントローラ(以下、「ボディＣＰＵ」と称す)２５１、被写体判定回路２５５、画像処理回路２５７、圧縮伸張回路２５９、ビデオ信号出力回路２６１、ＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）制御回路２６５、入出力回路２７１、通信回路２７３、記録媒体制御回路２７５、フラッシュメモリ制御回路２７９、スイッチ検知回路２８３が接続されている。
データバス２５２に接続されているボディＣＰＵ２５１は、後述するフラッシュメモリ２８１に記憶されているプログラムにしたがって、このデジタルカメラの動作を制御する。前述の前処理回路２２５とボディＣＰＵ２５１の間には、コントラストＡＦ回路２５３が接続されている。コントラストＡＦ回路２５３は、前処理回路２２５から出力される画像信号に基づいて高周波成分を抽出し、この高周波成分に基づくコントラスト情報をボディＣＰＵ２５１に出力する。
データバス２５２に接続された画像処理回路２５７は、デジタル画像データのデジタル的増幅（デジタルゲイン調整処理）、色補正、ガンマ（γ）補正、コントラスト補正等の各種の画像処理を行なう。また、この画像処理回路２５７は、主被写体画像領域と認識された領域の少なくとも一部を除く領域に対して、後述するズームエフェクト効果、ジオラマ効果、波紋効果等、種々の特殊効果画像処理を施す特殊画像処理部としての機能も果たす。また、画像処理回路２５７は、被写体判定回路２５５によって被写体と判定された被写体に対して、追尾機能を有する。すなわち、撮像素子２２１から画像信号が読み出される毎に、追尾対象となる被写体の位置を検出する。また、画像処理回路２５７は、画像の切り出しによって電子ズームのための画像処理を行う。
圧縮伸張回路２５９はＳＤＲＡＭ２６７に記憶された画像データをＪＰＥＧやＴＩＦＦ等の圧縮方式で圧縮するための回路である。なお、画像圧縮はＪＰＥＧやＴＩＦＦに限らず、他の圧縮方式も適用できる。
ビデオ信号出力回路２６１は液晶モニタ駆動回路２６３を介して背面液晶モニタ２６およびファインダ内液晶モニタ２７に接続される。ビデオ信号出力回路２６１は、ＳＤＲＡＭ２６７、記録媒体２７７に記憶された画像データを、背面液晶モニタ２６およびファインダ内液晶モニタ２７に表示するためのビデオ信号に変換するための回路である。
背面液晶モニタ２６は、カメラ本体２００の背面に配置されるが、撮影者が観察できる位置であれば、背面に限らないし、また液晶に限らず他の表示装置でも構わない。背面液晶モニタ２６は、撮像した静止画または動画の画像を表示する表示部として機能する。ファインダ内液晶モニタ２７は、カメラ本体２００の内部に配置され、接眼レンズと共に電子ファインダを構成する。
ＳＤＲＡＭ２６７は、ＳＤＲＡＭ制御回路２６５を介してデータバス２５２に接続されており、このＳＤＲＡＭ２６７は、前処理回路２２５によって前処理された画像データ、画像処理回路２５７によって画像処理された画像データまたは圧縮伸張回路２５９によって圧縮された画像データなどを一時的に記憶するためのバッファメモリである。上述の撮像素子駆動回路２２３およびシャッタ駆動機構２１３に接続される入出力回路２７１は、データバス２５２を介してボディＣＰＵ２５１等の各回路とデータの入出力を制御する。
レンズＣＰＵ１１１と通信接点３００を介して接続された通信回路２７３は、データバス２５２に接続され、ボディＣＰＵ２５１等とのデータのやりとりや制御命令の通信を行う。データバス２５２に接続された記録媒体制御回路２７５は、記録媒体２７７に接続され、この記録媒体２７７への画像データ等の記録及び画像データ等の読み出しの制御を行う。
記録媒体２７７は、ｘＤピクチャーカード(登録商標)、コンパクトフラッシュ(登録商標)、ＳＤメモリカード(登録商標)またはメモリスティック(登録商標)等の書換え可能な記録媒体のいずれかが装填可能となるように構成され、カメラ本体２００に対して着脱自在となっている。その他、通信接点を介してハードディスクを接続可能に構成してもよい。
フラッシュメモリ制御回路２７９は、フラッシュメモリ（Flash Memory）２８１に接続され、このフラッシュメモリ２３５は、デジタルカメラの動作を制御するためのプログラムが記憶されており、ボディＣＰＵ２５１はこのフラッシュメモリ２８１に記憶されたプログラムに従ってデジタルカメラの制御を行う。なお、フラッシュメモリ２８１は、電気的に書換可能な不揮発性メモリであり、電気的に書き換え可能な不揮発性メモリであれば、フラッシュメモリ以外のメモリであってもよい。
デジタルカメラの電源のオンオフを行うためのパワースイッチ２８５は、スイッチ検知回路２８３を介してデータバス２５２に接続されている。また、シャッタレリーズ釦の第１ストローク（半押し）を検出する１Ｒスイッチや、第２ストローク（全押し）を検出する２Ｒスイッチを含むその他の各種スイッチ２８７も、スイッチ検知回路２８３を介してデータバス２５２に接続されている。また、各種スイッチ２８７としては、メニュー釦に連動するメニュースイッチ、再生釦に連動する再生スイッチ、その他の操作部材に連動するその他の各種スイッチ等を含んでいる。
また、その他の各種スイッチとして、背面液晶モニタ２６の表示面側にタッチパネルが設けられている。このタッチパネルは、ユーザが背面液晶モニタ２６の表示面をタッチ操作すると、そのときのタッチ位置（ｘ、ｙ、ｒ、θ）、タッチ速度（ｖ）、操作圧力（ｐ）を検知し、スイッチ検知回路２８３を介して、ボディＣＰＵ２５１に出力する。
着脱検知スイッチ２９１は、カメラ本体２００のボディマウントの近傍に配置され、カメラ本体２００に交換レンズ１００が装着されているか否かの判定を行う。着脱検知スイッチの出力は、スイッチ検知回路２８３を介してデータバス２５２に接続されている。
参照画像記憶回路２５４には、特定被写体として様々な角度から見た様々な年齢の人物の顔、様々な種類及び形状の植物、さらには犬や猫などのペットの顔画像などが記憶されている。被写体判定回路２５５は、前処理回路２２５からデータバス２５２を介して入力した画像データと、参照画像記憶回路２５４に記憶されている参照用画像とを比較し、撮像した画像中に上述の特定被写体が含まれているか否かを判定する。
次に、特殊画像処理に関わる部分の機能を図２ないし図４を用いて説明する。ここで図２は、図１のように構成されたデジタルカメラにおいて図５、図６で示した処理を実現する際の機能表現ブロック図である。そのため、この機能に直接的に関係しない機能部位については省略している。また、特に明記しない場合には、これらの各部は、ボディＣＰＵ２５１によってソフトウエア的に実行される。
図２において、タッチ出力部１は、その他の各種スイッチ２８７内に設けられたタッチパネルの検知結果を出力する。このタッチパネル出力部１の出力は入力検出部３に出力される。入力検出部３は、タッチパネル出力部１からの検知結果に基づいて、タッチ操作が行われた位置（ｘ、ｙ）または（ｒ、θ）や、タッチ操作のタッチ速度（ｖ）、操作圧力（ｐ）等を検出する。ここで、（ｘ、ｙ）は、図３（ａ）に示すように、直交するｘ軸およびｙ軸上での位置であり、（ｒ、θ）は、画面中の基準位置を中心にした半径方向の距離ｒ、および特定方向に対する角度θである。また、図３（ｂ）に示すように、タッチ速度（ｖ）は、指Ｆがタッチする際の移動速度であり、操作圧力（ｐ）は、タッチパネル２８７ａに対する押圧力である。主被写体サイズ検出部７、主被写体領域更新部９、および特殊効果パラメータ設定部１３に出力する。タッチ出力部１および入力検出部は、表示部の表示画面上へのタッチ操作を検出する操作入力検出部として機能する。
画像データ出力部５は、撮像素子２２１からの画像信号に基づく画像データ、または記録媒体２７７に記録され記録媒体制御回路２７５から読み出された画像データ等、画像データを主被写体サイズ検出部７に出力する。
主被写体サイズ検出部７は、入力検出部３および画像データ出力部５からの出力を入力し、主被写体を識別し、また、そのサイズを検出する。すなわち、被写体判定回路２５５によって判定された被写体、またはタッチパネルからのタッチ操作の検知結果に基づいて、主被写体が検出される。また、主被写体が検出されると、画像処理回路２５７によって、その被写体のサイズが検知される。主被写体サイズ検出部７の検出結果は、主被写体領域更新部９に出力される。タッチ出力部１、主被写体サイズ検出部７等は、表示部に表示された画像の一部の位置を選択する画像位置選択部および画像位置選択部によって選択された画像位置に基づいて選択された画像領域を主被写体画像領域として認識する画像識別部としての機能を果たす。
入力検出部３と主被写体サイズ検出部７からの検出結果を入力する主被写体領域更新部９は、主被写体領域の更新を行う。被写体判定回路２５５によって被写体が認識された場合、またはタッチパネルにおけるタッチ操作で被写体が指定された後、タッチ操作等により、被写体の領域について変更されると、主被写体領域の更新を行う。主被写体領域更新部９は、操作入力検出部（タッチ出力部１、入力検出部３等）で検出された圧力、位置変化、方向、速度変位量の少なくとも１つに応じて画像識別部によって識別された主被写体領域を変更する画像領域変更部として機能する。この領域の更新の方法について、図５、図６を用いて後述する。
主被写体領域更新部９の更新結果は主被写体領域枠設定部１１に出力される。この主被写体領域枠設定部１１は、画像表示部１７に画像を表示する際に、主被写体の領域枠を設定する。すなわち、主被写体領域枠設定部１１は、図３（ａ）に示すように、特殊効果処理領域Ａ中において、主被写体領域Ｂに対して、主被写体のサイズＣを考慮して主被写体領域枠Ｄを表示させる。このように、主被写体領域枠Ｄは、主被写体領域Ｂの少なくとも一部を含む領域を枠表示によって示す。
入力検出部３と主被写体サイズ検出部７からの検出結果を入力する特殊効果パラメータ設定部１３は、画像処理部２５７において行う特殊効果画像処理におけるパラメータを設定する。パラメータとしては、例えば、特殊効果としてズームエフェクト効果が設定されている場合には、ズーム比、合成枚数、等がある。また、特殊効果としてジオラマ効果が設定されている場合には、フィルタぼかし量等がある。特殊効果として波紋効果が設定されている場合には、振幅相当歪み量、波長サイズ、等がある。
特殊効果パラメータ設定部１３で設定されるパラメータは、特殊効果画像処理部１５に出力される。特殊効果画像処理部１５は、画像処理部２５７の一部であり、ズーム、ジオラマ、波紋等の種々の特殊効果を付与する。
ズームエフェクトは、図４（ａ）に示す元画像Ｐから、ズーミングが行われた画像として、画像Ｚ０、Ｚ１、Ｚ２、Ｚ３、・・・Ｚｎを切り出す。そして、図４（ｂ）に示すように、それぞれの画像を同じ大きさとなるように補間処理を行い、更に、ローパスフィルタ処理を施した画像を生成し、この生成した画像を合成して合成画像Ｓを生成する。この合成画像Ｓは、中心部分のピントがあったままとし、周囲のピントがぼやけ、また画像が大きくなることにより、あたかも露光中に光学的に広角側から望遠側にズーミングしながら撮影したような画像となる。なお、元画像Ｐは、静止画像でもよく、また連写した画像から順次、Ｚ１〜Ｚｎ画像を切り出すようにしてもよい。また、上記の例に限らず、光学ズームを望遠側から広角側へズームした画像を生成して合成することも勿論可能である。
前述の特殊効果画像処理部１５と主被写体領域設定部１１の出力を入力する画像表示部１７は、ライブビュー表示や再生表示を行い、また特殊効果画像処理された画像の表示を行う。図１のブロック図では背面液晶モニタ２６が担うが、これに限らず、有機ＥＬ等の表示パネルでもよく、また、背面に限らず、他の場所に設けられていてもよい。また、画像位置の選択を行うことが可能であれば、ファインダ内液晶モニタ２７でもよい。
次に、図５および図６を用いて、本実施形態における特殊効果の付与の一例について説明する。これらの図では、特殊効果画像処理として、図４を用いて説明したズームエフェクトが設定されているとして説明する。特殊効果画像処理としては、ズームエフェクト以外の特殊効果画像処理を施してもよいことは、勿論である。図５の画像Ｐ１は、ライブビュー画像であり、この画像Ｐ１に対して、特殊効果画像処理を行うために、主被写体領域を設定する（図５の画像Ｐ２、Ｐ３、Ｐ４、図６の画像Ｐ１１等参照）。なお、ライブビュー画像以外にも、記録媒体２７７から読み出した再生画像であってもよい。
図５の画像Ｐ２および画像Ｐ３は、特殊効果画像処理を行うための中心の決定の例を示す。図５の画像Ｐ２は、被写体判定回路２５５によって主被写体として選択され、コントラストＡＦ回路２５３によって合焦した合焦点を中心点Ｃ１として決定した例を示す。また、図５の画像Ｐ３は、ユーザがタッチパネルをタッチ操作することにより（図３（ｂ）参照）、中心点Ｃ２を指定した例を示す。
図５の画像Ｐ２、Ｐ３のように、中心が決定されると、次に、特殊効果画像処理を施すために使用する主被写体領域をユーザが適宜設定することができる。図６の画像Ｐ１１に示す例は、円形範囲が予め設定されている場合である。この円形範囲選択は、ユーザが指Ｆで画面上をタッチ操作すると、中心点Ｃ３とタッチ点を結ぶ線分を半径とする円形内が主被写体領域として選択される。主被写体領域が選択されると、特殊効果画像処理部１５は、図６の画像Ｐ１２に示すように、主被写体領域以外の領域に対してズームエフェクトの画像処理を施す。なお、エフェクト強度はデフォルトとする。
図６の画像Ｐ１３に示す例は、円形範囲選択であって、かつエフェクト強度設定を行う場合である。図６の画像Ｐ１１、Ｐ１２に示した例は、エフェクト強度（特殊効果画像処理の強度）はデフォルトであったが、エフェクト強度を変えたい場合がある。そこで、この例では、中心から半径方向Ｒへのスライド操作を行う際のタッチ速度ｖや、操作圧力ｐ等に応じて、エフェクト強度を変化させた図６の画像Ｐ１４となるように、特殊効果画像処理部１５は特殊効果を付与する。
図６の画像Ｐ１５に示す例は、主被写体領域として直線範囲が設定されている場合である。図６の画像Ｐ１１、Ｐ１３は円形範囲の選択であったが、この例では、矩形を選択する。すなわち、指Ｆでタッチ操作すると、そのタッチ位置を下辺（上辺）とする矩形が主被写体領域として選択される。主被写体領域が選択されると、特殊効果画像処理部１５は、図６の画像Ｐ１６に示すように、主被写体領域以外の領域に対してズームエフェクトの画像処理を施す。なお、エフェクト強度はデフォルトとする。
図６の画像Ｐ１７に示す例は、直線範囲選択であって、かつエフェクト強度設定を行う場合である。図６の画像Ｐ１５、Ｐ１６に示した例は、エフェクト強度（特殊効果画像処理の強度）はデフォルトであった。この例では、中心から上辺または下辺方向Ｓへのスライド操作を行う際の指Ｆのタッチ速度ｖや、操作圧力ｐ等に応じて、エフェクト強度を変化させた図６の画像Ｐ１８となるように、特殊効果画像処理部１５は特殊効果を付与する。
以上の説明は、先に中心点Ｃを決定していたが、これに限らず、中心点を決めずに主被写体領域を決定するようにしてもよい。図５の画像Ｐ４に示す例は、ユーザが囲むような軌跡を描くようにスライド操作を行うと、この軌跡を円形Ｃ４に近似してエリアを決定する。この場合、スライド操作の速度ｖ、操作圧力ｐ、中心点Ｃ３からの距離等応じて、特殊効果画像処理の際のパラメータを設定する。
図５の画像Ｐ４のように、円形Ｃ４が決まると、この円形Ｃ４の領域が主被写体領域となる。特殊効果画像処理部１５は、円形Ｃ４の外側に対して、ズームエフェクトの画像処理を施して図６の画像Ｐ１９を得る。この場合、前述したように、スライド操作の速度ｖや操作圧力ｐに応じてエフェクト強度を変化させればよい。
前述の画像Ｐ１〜Ｐ１９の例は、いずれも中心点は、画面の中央に位置していたが、この位置は、当然、被写体の合焦位置や、またユーザのタッチ操作位置に応じて、異なっても良い。また、一旦、設定した中心点はスライド操作により移動可能である。図６の画像Ｐ２０は、指Ｆ１および指Ｆ２の２本指によるスライド操作で円形範囲を移動させる例である。この手動操作による移動については、図９のＳ６３、Ｓ６５、および図１１を用いて後述する。
次に、本実施形態における動作について、図７ないし図９に示すフローチャートを用いて説明する。これらのフローチャート（後述する図１２、図１６、図１７に示すフローチャートも含む）は、フラッシュメモリ２８１に記憶されているプログラムに従って、ボディＣＰＵ２５１がカメラ本体内の各部を制御して実行する。
図７に示すフローがスタートすると、まず、モード設定を行う（Ｓ１）。ここでは、撮影モードや再生モード等の設定を行い、また動画撮影の切り換え等、種々の設定を行う。さらに、主被写体領域の形状（例えば、円形や矩形）等も設定可能である。モード設定を行うと、次に、撮影モードか否かの判定を行う（Ｓ３）。ここでは、ステップＳ１における設定に基づいて判定する。
ステップＳ３における判定の結果、撮影モードであった場合には、ライブビュー表示を行う（Ｓ５）。ここでは、撮像素子２２１からの画像信号に対して、画像処理回路２５７等がライブビュー表示用の画像処理を行い、背面液晶モニタ２６やファインダ内液晶モニタ２７に被写体像を動画で表示する。
ライブビュー表示を行うと、次に、特殊画像処理を行う（Ｓ７）。ここでは、図５および図６を用いて説明したように、主被写体画像領域として選択された領域を除く領域に対して、特殊効果画像処理部１５が特殊効果画像処理を施す。この特殊画像処理における詳しい動作については、図９を用いて後述する。
特殊画像処理を行うと、次に、１Ｒがオンかオフかを判定する（Ｓ９）。ここでは、その他の各種スイッチ２８７の内の１つである１ｓｔレリーズスイッチ（１Ｒ）がオンかオフかを判定する。レリーズ釦が半押しされると、１Ｒがオンとなる。この判定の結果、１Ｒがオフの場合には、ステップＳ５に戻る。
一方、ステップＳ９における判定の結果、１Ｒがオンの場合には、次に、２Ｒがオンかオフかを判定する（Ｓ１１）。ここでは、その他の各種スイッチ２８７の内の１つである２ｎｄレリーズスイッチ（２Ｒ）がオンかオフかを判定する。レリーズ釦が半押しからさらに押されて全押し状態となると、２Ｒがオンとなる。この判定の結果、２Ｒがオフの場合には、２Ｒがオンとなるのを待つ。
一方、ステップＳ１１における判定の結果、２Ｒがオンの場合には、次に、撮影を行う（Ｓ１３）。ここでは、撮像素子２２１からの画像信号に対して、画像処理回路２５７等が記録用の画像処理を行い、記録媒体２７７に画像データの記録を行う。なお、動画撮影モードの場合には、動画釦等の開始操作に応じて動作の記録を開始し、停止操作に応じて動作の記録を終了する等、動画撮影のための操作に従えばよい。
撮影を行うと、次に、スリープか否かを判定する（Ｓ１５）。消費電力の浪費を防止するために、所定時間の間、カメラ操作が行われないと、低消費電力モードであるスリープ状態に入る。このステップでは、スリープ状態になったか否かを判定する。この判定の結果、スリープでなければ、ステップＳ１に戻る。
ステップＳ１５における判定の結果、スリープでなければ、次に、タイムアウトか否かを判定する（Ｓ１７）。スリープ状態に入ってから更に所定時間が経過すると、電源オフとする。このステップでは、この所定時間が経過したか否かを判定する。
ステップＳ１７における判定の結果、タイムアウトでなければ、割り込みがなされたか否かを判定する（Ｓ１９）。スリープ状態に入った場合には、所定の操作部材が操作された場合のみ、ボディＣＰＵ２５１が立ち上がり動作を開始する。このステップでは、この割り込み操作がなされたか否かを判定する。この判定の結果、割り込みが無い場合には、ステップＳ１７に戻り、一方、割り込みが有った場合には、ステップＳ１に戻る。また、ステップＳ１９における判定の結果、タイムアウトの場合には、この動作を終了し、電源をオフとする。
ステップＳ３に戻り、このステップにおける判定の結果、撮影モードでなかった場合には、再生モードか否かを判定する（Ｓ２１）。ここでは、ステップＳ１におけるモード設定に基づいて判定する。この判定の結果、再生モードでない場合には、ステップＳ１に戻る。なお、撮影モードおよび再生モード以外のモードがある場合には、他のモードの設定の有無を判断し、他のモードを実行するようにしてもよい。一方、判定の結果、再生モードの場合には、再生モードを実行する。この再生モードについては、図８を用いて説明する。
図８に示す再生モードに入ると、まず、画像選択を行う（Ｓ３１）。ここでは、背面液晶モニタ２６等にサムネイル表示を行い、その他の各種スイッチ２８７の内の１つである十字釦、またはタッチパネル等により、ユーザが画像を選択する。画像選択を行うと、次に画像再生を行う（Ｓ３３）。ここでは、ステップＳ３１において選択された画像を記録媒体２７７から読み出し、背面液晶モニタ２６等に表示する。
画像再生を行うと、特殊画像処理を行う（Ｓ３５）。ここでは、記録媒体２７７から読み出した画像に対して、ステップＳ７と同様に、主被写体画像領域として選択された領域を除く領域に対して、特殊効果画像処理部１５が特殊効果画像処理を施す。この特殊画像処理における詳しい動作については、図９を用いて後述する。
特殊画像処理を行うと、次に、タイムアウトか否かを判定する（Ｓ３７）。再生表示中に最後の操作を行ってから所定時間が経過すると、電源オフとする。このステップでは、この所定時間が経過したか否かを判定する。この判定の結果、タイムアウトでなければ、ステップＳ３１に戻り、再生モードを続行する。
一方、ステップＳ３７における判定の結果、タイムアウトでなければ、割り込みがなされたか否かを判定する（Ｓ３９）。この判定の結果、割り込みが有った場合には、ステップＳ１に戻る。一方、ステップＳ３９の判定の結果、割り込みが無い場合には、パワーオフか否かを判定する（Ｓ４１）。ここでは、パワースイッチ２８５がオフにされたか否かを判定する。この判定の結果、オフでなければ、ステップＳ３１に戻り、再生モードを続行する。一方、ステップＳ４１の判定の結果、パワーオフであった場合には、この動作フローを終了する。なお、図８の再生モードにおいても、図７のフローと同様にスリープ状態に入るようにしても良い。
次に、図９に示すフローチャートを用いて、ステップＳ７（図７）とステップＳ３５（図８）における特殊画像処理の詳しい動作について説明する。ズームエフェクト、ジオラマ、波紋等の特殊画像処理（アートフィルタ処理ともいう）にあたって、ユーザは予め特殊画像処理の種類を、メニュー画面において設定しておく。なお、特殊画像処理の種類は、メニュー画面において設定する以外にも、タッチ操作の際のアクション、例えば、マルチタッチ、タップ、スライド等のアクションと、特殊画像処理の種類を関連付けておけば、予め設定しておく必要はない。
特殊画像処理のフローに入ると、まず、タッチパネル入力があるか否かを判定する（Ｓ５１）。ここでは、タッチ出力部１から出力され、入力検出部３の検出結果に基づいてタッチ入力があるか否かを判定する。この判定の結果、タッチパネル入力がない場合には、元のフローに戻る。
ステップＳ５１における判定の結果、タッチパネル入力が有った場合には、次に、領域設定済みか否かの判定を行う（Ｓ５３）。図５の画像Ｐ４、図６の画像Ｐ１１、Ｐ１３、Ｐ１５、Ｐ１７等を用いて説明したように、ユーザが画像表示部１７の表示画面上でタッチ操作やスライド操作を行うと、主被写体領域を設定することができる。このステップでは、既にこの領域設定が行われているか否かを判定する。
ステップＳ５３における判定の結果、領域設定が未だ行われていない場合には、主被写体領域の設定を行う（Ｓ５５）。ここでは、図５の画像Ｐ４、図６の画像Ｐ１１、Ｐ１３、Ｐ１５、Ｐ１７を用いて説明したように、タッチ操作等に応じて主被写体領域の設定を行う。
主被写体領域の設定を設定すると、次に、特殊画像処理のためのパラメータ設定を行う（Ｓ５７）。ここでは、設定されている特殊効果画像処理の種類、および図５の画像Ｐ４、図６のＰ１２、Ｐ１４、Ｐ１６、Ｐ１８、Ｐ１７を用いて説明したエフェクトの強さ等に応じて、特殊効果パラメータ設定部１３がパラメータの設定を行う。
特殊画像処理のパラメータ設定を行うと、次に、指定画像処理を行う（Ｓ５９）。ここでは、設定されている特殊効果画像処理の種類および設定されたパラメータに従って、特殊効果画像処理部１５が、主被写体領域以外の領域に対して特殊効果画像処理を施す。
指定画像処理を行うと、次に、表示更新を行う（Ｓ６１）。ここでは、ステップＳ５９において主被写体領域以外の領域に対して特殊効果画像処理を行った画像を、画像表示部１７に表示する。
表示更新を行うと、次に、主被写体が移動したか否かの判定を行う（Ｓ６３）。前述したように、画像処理部２５７は被写体の追尾機能を有していることから、ステップＳ５５において設定された主被写体領域の主被写体に対して追尾を行い、この追尾結果に基づいて、主被写体が移動したか否かの判定を行う。また、図６の画像Ｐ２０を用いて説明したように、本実施形態においては、タッチ操作を２点同時に行うことにより、主被写体の移動を行うことができる。この手動による主被写体の移動については、図１１を用いて説明する。
ステップＳ６３における判定の結果、主被写体が移動した場合には、主被写体領域の移動を行う（Ｓ６５）ここでは、主被写体領域更新部９が主被写体領域の移動を行う。また、ステップＳ６３における判定の結果、主被写体が移動していない場合には、元のフローに戻る。
ステップＳ５３に戻り、判定の結果、領域が設定済みの場合には、動作分析を行う（Ｓ６３）。主被写体領域が既に設定されており、この状態でタッチ操作やスライド操作がなされたことから、このタッチ操作等の動作を分析する。この動作分析の具体例については、図１０を用いて説明する。
動作分析を行うと、次に、設定されている特殊効果画像処理がズームか否かを判定する（Ｓ６９）。この判定の結果、ズームが設定されている場合には、主被写体領域をズームする（Ｓ７１）。ズームエフェクトは、図４を用いて説明したように、主被写体がズーミングされ、流れたような感じになるような画像処理である。ここでは、主被写体領域をズーミングによって拡大する。この処理を行うと、ステップＳ５７に進み、ズームエフェクトを与える特殊効果画像処理を行う。
一方、ステップＳ６９における判定の結果、ズームでなかった場合には、楕円か否かの判定を行う（Ｓ７３）。図５および図６を用いた説明では、主被写体領域の選択に当たっては、円形のみであったが、本フローにおいては、主被写体領域として円形のみならず、楕円形も選択可能としている。楕円形の選択にあたっては、タッチ操作において、２点タッチを行うので、このステップでは、入力検出部３から出力されるタッチ操作点の数に基づいて判定する。
ステップＳ７３における判定の結果、楕円であった場合には、楕円指示と円中心との延長上の位置を基準に主被写体領域を楕円化する（Ｓ７５）。ここでは、主被写体領域更新部９がタッチ操作点に基づいて、主被写体領域を楕円化する。この処理を行うと、ステップＳ５７に進み、楕円化した主被写体領域に基づいて指定画像処理を行う。
一方、ステップＳ７３における判定の結果、楕円でない場合には、キャンセルか否かの判定を行う（Ｓ７７）。キャンセル設定としては、例えば、画像表示部１７の所定表示領域外をタッチ操作する等により行う（図１０（ｂ）の検出領域２参照）。そこで、このステップでは、入力検出部３から出力されるタッチ操作の位置に基づいて判定する。なお、キャンセル設定は、この方法に限らず、例えば、特殊効果画像処理の解除釦等の操作によってキャンセルするようにしてもよい。
ステップＳ７７における判定の結果、キャンセルでない場合には、次に、タイムアウトか否かを判定する（Ｓ７９）。ここでは、カメラ操作が実行されなくってからの時間を計時するタイマが、所定時間、経過したか否かを判定する。この判定の結果、タイムアウトでなかった場合には、元のフローに戻る。
一方、ステップＳ７９における判定の結果タイムアウトでない場合、またはステップＳ７７における判定の結果、キャンセルであった場合には、特殊画像処理を終了する（Ｓ８１）。特殊画像処理を終了すると、元のフローに戻る。
次に、図１０を用いて、ステップＳ６７における動作分析の一例について説明する。図１０（ａ）は、画像表示部１７上におけるタッチパネルの検出領域の区分を示す。この検出領域は、図１０（ｂ）に示すように、画面上の右上隅、右下隅、左上隅、左下隅が検出領域２であり、中央部分を含む大部分が検出領域１である。検出領域２は、図１０（ａ）の図表の最下段に示すように、特殊効果画像処理のキャンセルのために使用される（図９のＳ７７参照）。
また、図１０（ａ）の最上段に記載の｜Δｘ１｜および｜Δｘ２｜は、２点タッチ操作（スライド操作）された場合において、それぞれのタッチ位置における時間変化量である。なお、領域が円形の場合には１点でよいことから、一方は固定と判断すればよい。図１０（ａ）から分かるように、タッチ操作点の変化量がＸ０未満の場合には、主被写体領域は円形に設定される。また、２点のタッチ操作点のうちの一方の変化量がＸ０以上有る場合には、主被写体領域は楕円に設定される。また、２点のタッチ操作点の両方の変化量がＸ０以上有る場合には、主被写体領域がズームされる（すなわち、領域の範囲が広くなる、または狭くなる）。
また、本フローにおいては、図１０（ａ）に表示されている特殊画像処理としては、ステップＳ５７以下において、露光間ズーム処理（ズームエフェクト）が施される。なお、表示時間で輝度を時間とともに変更したり、彩度を時間とともに変更したりしてもよい。
次に、図１１を用いて、ステップＳ６５における手動操作による主被写体領域の移動について説明する。図１１（ａ）において、移動位置の欄に示す移動位置Ｘは、指Ｆ１、Ｆ２（図６の画像Ｐ２０参照）の移動位置を示す。ここでは、指Ｆ１、Ｆ２は同一方向に移動しており、かつ主被写体領域（円形部分）にのっていることが必要である。また、図１１（ａ）において、位置ＸＭＩＮと位置ＸＭＩＮは、図１１（ｂ）に示すように、画像表示部１７上におけるタッチパネルの右側と左側近傍位置を示す。指Ｆ１、Ｆ２がタッチパネルの両側より先に動いた場合に、主被写体領域が消失してしまうのを防止するためである。
なお、移動位置Ｘは主被写体領域を表わす円形の中心とするが、これに限らず、円周の移動方向に対する特定位置でもよい。この場合、領域の端部の扱いに合わせて設定すればよい。また、図１１では、Ｘ方向の動きについてのみ表わしたが、Ｙ方向についても同様の処理を行えばよい。
このように、特殊画像処理のフローにおいては、タッチ操作により主被写体領域を設定することができ（Ｓ５３、Ｓ５７参照）、この領域はタッチ操作等により種々の領域（例えば、円形（図６のＰ１１、Ｐ１３）、矩形（図６のＰ１５、Ｐ１７）、楕円（Ｓ７３、Ｓ７５））が可能である。また、領域設定後であっても、更にタッチ操作等することにより、領域を変更することが可能である（Ｓ６７）。さらに、主被写体が移動すると、この移動に応じて主被写体領域も移動するようにしている（Ｓ６３、Ｓ６５）。このため、被写体が移動した場合に、主被写体領域を再設定する必要がなく、便利である。また、手動で主被写体領域の移動を行うこともできる（図１１参照）。主被写体領域設定後に、この領域をユーザの意図に応じて移動させることができ、便利である。
次に、図１２に示すフローチャートを用いて、特殊画像処理の第１変形例について説明する。この第１変形例では、タッチ操作として、スワイプ操作、回転操作、押し込み操作を可能としている。
この第１変形例に示すフローは、図９においてステップＳ６７〜Ｓ７５を、図１０に置き換えたものであり、他のステップは同様であることから、省略してある。ステップ５３（図９）における判定の結果、領域が設定済みの場合には、動作分析を行う（Ｓ１０１）。この変形例においては、動作分析としてスワイプ動作、回転動作、押し込み動作について分析する。この動作分析については、図１３ないし図１５を用いて後述する。
動作分析を行うと、次に、スワイプか否かを判定する（Ｓ１０３）。スワイプは、画像表示部１７の表示面上をなでるようにスライド操作を行うことである。このステップでは、動作分析結果に従って判定する。この判定の結果、スワイプであった場合には、スワイプ方向に電子ズーム倍率を拡大し、逆方向にスワイプの場合には、電子ズーム倍率を縮小する（Ｓ１０５）。なお、電子ズーム処理は画像処理回路２５７における画像の切り出しによって行う。
ステップＳ１０５における処理を行うと、次に、連続入力があるか否かを判定する（Ｓ１０７）。スワイプ操作が連続的に行われることがあり、このステップでは、スワイプ操作が続いているか否かに基づいて判定する。この判定の結果、連続入力が有る場合には、ステップＳ１０１に戻る。一方、連続入力でない場合には、ステップＳ５７（図９）に進み、特殊効果画像処理を行う。
ステップＳ１０３における判定の結果、スワイプでない場合には、回転か否かを判定する（Ｓ１０９）。回転は、画像表示部１７の表示面上で円形を描くようにタッチ操作を行うことである。このステップでは、動作分析結果に従って判定する。この判定の結果、回転であった場合には、電子ズーム画像を回転合成する（Ｓ１１１）。すなわち、合成した画像を、画像中心を基準に回転させて加算合成する処理を行うことで、ズーミングに更に回転を加えた特殊効果画像を生成する。電子ズーム画像を回転合成すると、ステップＳ５７（図９）に進み、特殊効果画像処理を行う。
ステップＳ１０９における判定の結果、回転でない場合には、押し込みか否かの判定を行う（Ｓ１１３）。押し込みは、画像表示部１７の表示面上をユーザが押し込みにより押圧することをいう。このステップでは、動作分析結果に従うが、押圧の状態は、入力検出部３からの操作圧力ｐの検出結果に基づいて分かる。
ステップＳ１１３における判定の結果、押し込みであった場合には、波面変形反射処理を行う（Ｓ１１５）。波面変形反射処理（波紋処理）は、あたかも水面に生じた波紋が移動していくのと類似の効果を生ずる画像処理である。波面変形反射処理を行うと、またはステップＳ１１３における判定結果が押し込み出なかった場合には、ステップＳ５７（図９）に進み、特殊効果画像処理を行う。
次に、図１３ないし図１５を用いて、動作分析の例について説明する。図１３は、ユーザによってスワイプ操作がなされた場合の分析である。図１３の最上段に記載の｜Δｘ１｜は、スライド操作の変化量を示し、Ｖ１はスワイプ操作の際の速度を示している（入力検出部３において速度ｖとして検出）。｜Δｘ１｜と速度Ｖ１に応じて、図１３に示すように、動作としては、ズーム、スワイプ小、ズーム、スワイプ大のいずれかが設定され、画像処理として、全方向にズームまたはスワイプ方向のズーム比を拡大している。具体的には、スライド操作の変化量｜Δｘ１｜が予め設定された所定値よりも小さい場合（０）は画像処理のズーム変化量を小さくし、スライド操作の変化量｜Δｘ１｜が予め設定された所定値よりも大きい場合（１）は画像処理のズーム変化量を大きくする。また、速度Ｖ１が予め設定された所定値Ｖ０未満の場合（０）は、画像処理のズーム変化方向を全方向とし、速度Ｖ１が予め設定された所定値Ｖ０以上の場合（１）は、画像処理のズーム変化方向をスワイプされた方向とする。このように、スワイプの操作方法に応じて、画像処理の変更を行うことができる。
次に、図１４を用いて、回転操作がなされた場合の分析について説明する。回転操作は、主被写体領域に指Ｆを載せた状態で、円を描くように指Ｆを摺動させる操作をいう。図１１（ｂ）に示すように、時計方向に操作するとマイナス方向であり、また反時計方向に操作するとプラス方向とする。２点のタッチ位置のそれぞれについて位置変化量Δｘ１、Δｘ２の方向に応じて、図１１（ａ）に示すように、画像処理を異ならせる。このように、回転操作方法に応じて、画像処理の変更を行うことができる。なお、図１４に示す例は、２点で回転操作された例であるが、これに限らず１点で回転操作でもよく、また３点以上の回転操作としてもよい。その場合には、識別できる画像処理数が異なる。
次に、図１５を用いて、押し込み操作がなされた場合の分析について説明する。押し込み操作は、主被写体領域に指Ｆを載せた状態で、画像表示部１７の表示面を押圧操作することで、入力検出部３によって操作圧力ｐとして検出される。図１５において、Ｐ１、Ｐ２は、２点で押圧した場合のそれぞれの圧力を表し、またＰ０は所定の押圧力を示す。図１５に示すように、２点の押圧力の組合せにより、画像処理を異ならせている。なお、図１５に示す例は、２点で押圧操作された例であるが、これに限らず１点で押圧操作でもよく、また３点以上の押圧操作としてもよい。その場合には、識別できる画像処理数が異なる。
このように、本発明の一実施形態の特殊画像処理の第１変形例においては、スワイプ、回転、押し込み操作によって、特殊効果画像処理を変更するようにしている。このため、簡単なアクションによって、迅速かつ簡単に特殊効果画像処理を変更することができる。なお、本発明の一実施形態におけるステップＳ６７における動作分析も併せて行い、それに伴う特殊効果画像処理を行うようにしてもよい。
次に、図１６及び図１７を用いて、本発明の一実施形態の特殊画像処理の第２変形例について説明する。本変形例は、エフェクト強度をマニュアル指定することを可能としている。本変形例は、本発明の一実施形態に関する図９のフローチャートのステップＳ５１〜Ｓ５９の処理を図１５、図１６のフローチャートのステップＳ２０１〜Ｓ２５７に置き換えるだけである。
図１６に示す特殊画像処理のフローに入ると、まず、タッチ入力が有るか否かを判定する（Ｓ２０１）。ここでは、タッチ出力部１から出力され、入力検出部３の検出結果に基づいて、図５の画像Ｐ３を用いて説明したような、１点をタッチするタッチ操作がなされたか否かを判定する。
ステップＳ２０１における判定の結果、タッチ入力がない場合には、円入力が有るか否かを判定する（Ｓ２０３）。ここでは、タッチ出力部１から出力され、入力検出部３の検出結果に基づいて、図５の画像Ｐ４を用いて説明したように、囲った軌跡を描くようなスライド操作がなされたか否かを判定する。この判定の結果、円入力がない場合には、ステップＳ２０１に戻る。
ステップＳ２０３における判定の結果、円入力が有った場合には、円領域設定を行う（Ｓ２０５）。ここでは、主被写体領域更新部９が、図５の画像Ｐ４のように、スライド操作による軌跡に近似した円領域を設定する。
円領域の設定を行うと、次に指定画像処理（波紋）を行う（Ｓ２０７）。ここでは、特殊効果画像処理部１５が、主被写体領域以外の領域に対して、あたかも水面に生じた波紋が移動していくのと類似の効果を生ずる画像処理を施す（図６の画像Ｐ１９参照）。指定画像処理を行うと、ステップＳ６１（図９）に進む。
ステップＳ２０１に戻り、この判定の結果、タッチ入力が有る場合には、次に、主被写体中心の決定を行う（Ｓ２１１）。ここでは、図５の画像Ｐ３に示すように、検出されたタッチ操作位置を主被写体の中心点と決定する。
主被写体中心を決定すると、次に、領域は「円」か否かを判定する（Ｓ２１３）。主被写体領域の形状は予め設定されているので、このステップでは、設定されている形状に応じて判定する。
ステップＳ２１３における判定の結果、領域が「円」であった場合には、次にタッチ入力が有るか否かを判定する（Ｓ２１５）。ここでは、入力検出部３からの検出出力に基づいてタッチ操作がなされたか否かを判定する。
ステップＳ２１５における判定の結果、タッチ入力が有る場合には、円領域の設定を行う（Ｓ２１７）。図５の画像Ｐ１１は、タッチ操作がなされた場合である。このステップでは、主被写体領域更新部９が主被写体領域として円形を設定する。
円形領域の設定を行うと、次に指定画像処理を行う（Ｓ２１９）。ここでは、特殊効果画像処理部１５が、円形の主被写体領域以外の領域に対して、特殊効果画像処理を施す。図６の画像Ｐ１２に示す例は、エフェクト強度がデファクトの場合における特殊効果画像処理がなされた場合である。ステップＳ２１９における指定画像処理を行うと、ステップＳ６１（図９）に進む。
ステップＳ２１５における判定の結果、タッチ入力が無い場合には、スライド入力が有るか否かを判定する（Ｓ２３１、図１７）。ここでは、入力検出部３からの検出結果に基づいて、ユーザの指が画像表示部１７の表示画面上を摺動したか（スライド操作か）を判定する。
ステップＳ２３１における判定の結果、スライド入力が有った場合には、次に、円領域の設定を行う（Ｓ２３３）。スライド操作がなされた場合は、例えば、図６の画像Ｐ１３のように、主被写体領域更新部９が主被写体領域として円形を設定する。
円領域が設定されると、次にエフェクト強度の変更を行う（Ｓ２３５）。スライド操作がなされると、入力検出部３からの検出結果に基づいて、移動速度ｖや操作圧力ｐを検出する。この検出結果を用いて、エフェクト強度を変更する。
エフェクト強度を変更すると、指定画像処理を行う（Ｓ２３７）。ここでは、特殊効果画像処理部１５が、円形の主被写体領域以外の領域に対して、ステップＳ２３５におけるエフェクト強度に応じて、特殊効果画像処理を施す。図６の画像Ｐ１４に示す例は、エフェクト強度に応じて特殊効果画像処理がなされた場合である。ステップＳ２３７における指定画像処理を行うと、ステップＳ６１（図９）に進む。
ステップＳ２３１に戻り、この判定の結果、スライド入力がない場合には、マルチ入力が有るか否かを判定する（Ｓ２４１）。本変形例においては、２本指で主被写体領域を一緒に（同じ方向に同じ速度）スライド操作すると、領域の移動を行うことができる。ここでは、入力検出部３からの検出結果に基づいて、マルチ入力か否かを判定する。この判定の結果、マルチ入力でない場合には、ステップＳ２１５（図１６）に進む。
ステップＳ２４１における判定の結果、マルチ入力で有る場合には、領域移動を行う（Ｓ２４３）。ここでは、入力検出部３からの検出結果に基づいて、主被写体領域を移動させる。図６の画像Ｐ２０に示す例は、主被写体領域の移動を示す。
領域移動を行うと、次に、指定画像処理を行う（Ｓ２４５）。ここでは、主被写体領域を移動させた後に、主被写体領域以外の領域に対して、特殊効果画像処理を施す。ステップＳ２４５における指定画像処理を行うと、ステップＳ６１（図９）に進む。
ステップＳ２１３（図１６）に戻り、この判定の結果、領域「円」でない場合には、次に、領域「線」であるか否かの判定を行う（Ｓ２２１）。ここでは、主被写体領域が予め「線」に設定されているか否かを判定する。この判定の結果、「線」に設定されていない場合には、タイマで終了する（Ｓ２２９）。ここでは、所定の時間、何ら操作がなされないと、特殊画像処理のフローを終了し、元のフローに戻る。
ステップＳ２２１における判定の結果、領域「線」が設定されている場合には、次に、タッチ入力有りか否かを判定する（Ｓ２２３）。ここでは、入力検出部３からの検出出力に基づいてタッチ操作がなされたか否かを判定する。
ステップＳ２１５における判定の結果、タッチ入力が有る場合には、線領域の設定を行う（Ｓ２２５）。図６の画像Ｐ１５は、タッチ操作がなされた場合である。このステップでは、主被写体領域更新部９が主被写体領域として矩形を設定する。
線領域の設定を行うと、次に指定画像処理を行う（Ｓ２２７）。ここでは、特殊効果画像処理部１５が、線領域（矩形状）の主被写体領域以外の領域に対して、特殊効果画像処理を施す。図６の画像Ｐ１６に示す例は、エフェクト強度がデファクトの場合における特殊効果画像処理がなされた場合である。ステップＳ２２７における指定画像処理を行うと、ステップＳ６１（図９）に進む。
ステップＳ２２３における判定の結果、タッチ入力が無い場合には、スライド入力が有るか否かを判定する（Ｓ２５１、図１７）。ここでは、入力検出部３からの検出結果に基づいて、ユーザの指が画像表示部１７の表示画面上を摺動したか（スライド操作か）を判定する。
ステップＳ２５１における判定の結果、スライド入力が有った場合には、次に、線領域の設定を行う（Ｓ２５３）。スライド操作がなされた場合は、例えば、図６の画像Ｐ１７のように、主被写体領域更新部９が主被写体領域として線領域（矩形）を設定する。
線領域が設定されると、次にエフェクト強度の変更を行う（Ｓ２５５）。スライド操作がなされると、入力検出部３からの検出結果に基づいて、移動速度ｖや操作圧力ｐを検出する。この検出結果を用いて、エフェクト強度を変更する。
エフェクト強度を変更すると、指定画像処理を行う（Ｓ２５７）。ここでは、特殊効果画像処理部１５が、円形の主被写体領域以外の領域に対して、ステップＳ２５５におけるエフェクト強度に応じて、特殊効果画像処理を施す。図６の画像Ｐ１８に示す例は、エフェクト強度に応じて特殊効果画像処理がなされた場合である。ステップＳ２５７における指定画像処理を行うと、ステップＳ６１（図９）に進む。
このように、本発明の一実施形態の特殊画像処理の第２変形例においては、エフェクト強度を手動操作で変更できるようにしている（Ｓ２３５、Ｓ２５５）。すなわち、スライド操作時の移動速度や押圧力に基づいて、エフェクト強度を変更できる。このため、ユーザの意図に従った特殊効果の強度とすることができる。
以上説明したように、本発明の一実施形態や変形例においては、表示部の表示画面上へのタッチ操作を検出する操作入力検出部（例えば、タッチ出力部１、入力検出部３）と、画像表示部１７に表示された画像の一部の位置を選択する画像位置選択部（例えば、タッチパネルや合焦位置）と、画像位置選択部によって選択された画像位置に基づいて選択された画像領域を主被写体画像領域として認識する画像識別部（例えば、主被写体サイズ検出部７）と、操作入力検出部で検出された圧力、位置変化、方向、速度、変位量の少なくとも１つに応じて、識別された主被写体領域を変更する画像領域変更部（例えば、主被写体領域更新部９）と、選択された主被写体領域の少なくとも一部を除く領域に対して特殊効果画像処理を施す特殊画像処理部１５を有している。このため、特殊効果画像処理を施す領域を簡単に変更することができる。
また、本発明の一実施形態や変形例においては、画像領域変更部（例えば、主被写体領域更新部９）は、画像識別部（例えば、主被写体領域更新部９）によって認識された主被写体領域を操作入力検出部で検出された領域に変更することができる（例えば、図６の画像２０等）。タッチ操作により、特殊効果画像処理を施す領域を変更することができることから、簡単な操作で済む。
また、本発明の一実施形態や変形例においては、画像領域変更部（例えば、主被写体領域更新部９）は、操作入力検出部（例えば、タッチ出力部１、入力検出部３）で検出された圧力、位置変化、方向、速度、変位量の少なくとも１つに応じて主被写体画像領域を変更する。また、エフェクト強度を変更することができる。
また、本発明の一実施形態や変形例においては、操作入力検出部（例えば、タッチ出力部１、入力検出部３）は、タッチ操作の複数の操作のうち、画像領域の一部を固定する指示と、画像領域の一部を変更する指示をそれぞれ検出する。
また、本発明の一実施形態や変形例においては、操作入力検出部（例えば、タッチ出力部１、入力検出部３）は、タッチ操作の複数の操作に基づき、特殊効果画像処理を時間に応じて変化させている。
また、本発明の一実施形態や変形例においては、操作入力検出部（例えば、タッチ出力部１、入力検出部３）は、タッチ操作が所定の位置で検出された場合に、特殊効果画像処理をキャンセルしている（図９のＳ７７、図１０（ｂ）の検出領域２参照）。このため、タッチ操作で特殊効果画像処理をキャンセルすることができ、迅速に指示を出すことができる。
なお、本発明の一実施形態や変形例においては、画像表示部１７の表示画面上へのタッチ操作によって特殊効果画像処理のための入力指示を行っていたが、これに限らず、例えば、表示画面近傍でのジェスチャを検出する操作入力検出部を備えるようにしても勿論かまわない。例えば、表示画面近傍でのジェスチャを検出し、主被写体領域を検出されたジェスチャに応じた領域に変更するようにしてもよい。また、他の例として、ジェスチャとして右手のひと指し指の動きを検出し、それぞれの動きの変化量に基づいて異なる操作として認識するようにしてもよく、動きの変化量が小さい指に対応する主被写体画像領域については領域を変更せず固定のままとし、動きの変化量が大きい指に対応する主被写体画像領域については動きに対応した位置に領域を変更して、ジェスチャに応じて主被写体画像領域の変化を異ならせてもよい。この場合、円形の領域は楕円に変化することになる。この場合、ジェスチャ検出部は、表示部の表示画面近傍でのジェスチャを検出する操作入力検出部として機能する。
また、本発明の一実施形態や変形例においては、撮影のための機器として、デジタルカメラを用いて説明したが、カメラとしては、デジタル一眼レフカメラでもコンパクトデジタルカメラでもよく、ビデオカメラ、ムービーカメラのような動画用のカメラでもよく、さらに、携帯電話、スマートフォーン、携帯情報端末（ＰＤＡ：Personal Digital Assist）、パーソナルコンピュータ（ＰＣ）、タブレット型コンピュータ、ゲーム機器等に内蔵されるカメラでも構わない。いずれにしても、特殊効果画像処理を行うための機器であれば、本発明を適用することができる。
また、本発明は撮影のための機器に限らず、画像データ記憶可能なパーソナルコンピュータや再生装置等にも適用できる。この場合には、再生時に、特殊効果画像処理を施すようにする（図８のＳ３５参照）。したがって、再生用機器やまたプログラムにも本発明を適用することができる。
また、本明細書において説明した技術のうち、主にフローチャートで説明した制御に関しては、プログラムで設定可能であることが多く、記録媒体や記録部に収められる場合もある。この記録媒体、記録部への記録の仕方は、製品出荷時に記録してもよく、配布された記録媒体を利用してもよく、インターネットを介してダウンロードしたものでもよい。
また、特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず」、「次に」等の順番を表現する言葉を用いて説明したとしても、特に説明していない箇所では、この順で実施することが必須であることを意味するものではない。
本発明は、上記実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
本発明の第１の態様に係る画像表示装置は、撮像した静止画または動画の画像を表示する表示部と、上記表示部の表示画面上へのタッチ操作または表示画面近傍でのジェスチャを検出する操作入力検出部と、上記表示部に表示された画像の一部の位置を選択する画像位置選択部と、上記操作入力検出部の検出結果から入力操作の動作を分析する動作分析部と、上記画像位置選択部によって選択された画像位置に基づいて選択された画像領域を主被写体画像領域として認識する画像識別部と、上記操作入力検出部で検出された圧力、位置変化、方向、速度、変位量の少なくとも１つに応じて上記主被写体画像領域を変更する画像領域変更部と、上記選択された主被写体領域の少なくとも一部を除く領域に対して特殊効果画像処理を施す特殊画像処理部と、を有し、上記動作分析部は、スワイプまたは回転の何れかを含む操作入力方向を分析し、上記特殊画像処理部は、上記主被写体画像領域に対して、上記動作分析部で分析された操作入力方向と同じ方向に特殊効果画像処理を施す。
本発明の第２の態様に係る画像表示方法は、撮像した静止画または動画の画像を表示部に表示する表示ステップと、上記表示部の表示画面上へのタッチ操作または表示画面近傍でのジェスチャを検出する操作入力検出ステップと、上記操作入力検出ステップにおける検出結果から入力操作の動作を分析する動作分析ステップと、上記表示部に表示された画像の一部の位置を選択する選択ステップと、上記選択された画像位置に基づいて選択された画像領域を主被写体画像領域として認識する認識ステップと、上記操作入力検出ステップで検出された圧力、位置変化、方向、速度、変位量の少なくとも１つに応じて上記主被写体画像領域を変更する変更ステップと、上記選択された主被写体領域の少なくとも一部を除く領域に対して特殊効果画像処理を施す特殊画像処理ステップと、を有し、上記動作分析ステップは、スワイプまたは回転の何れかを含む操作入力方向を分析し、上記特殊画像処理ステップは、上記主被写体画像領域に対して、上記動作分析ステップで分析された操作入力方向と同じ方向に特殊効果画像処理を施す。
本発明の第３の態様に係るコンピュータ読み取り可能な記録媒体は、撮像した静止画または動画の画像を表示部に表示する表示ステップと、上記表示部の表示画面上へのタッチ操作または表示画面近傍でのジェスチャを検出する操作入力検出ステップと、上記操作入力検出ステップにおける検出結果から入力操作の動作を分析する動作分析ステップと、上記表示部に表示された画像の一部の位置を選択する選択ステップと、上記選択された画像位置に基づいて選択された画像領域を主被写体画像領域として認識する認識ステップと、上記認識された主被写体領域を変更する変更ステップと、上記選択された主被写体領域の少なくとも一部を除く領域に対して特殊効果画像処理を施す特殊画像処理ステップと、を有し、上記動作分析ステップは、スワイプまたは回転の何れかを含む操作入力方向を分析し、上記特殊画像処理ステップは、上記主被写体画像領域に対して、上記動作分析ステップで分析された操作入力方向と同じ方向に特殊効果画像処理を施すことをコンピュータに実行させるためのプログラムを記録する。
ステップＳ５３に戻り、判定の結果、領域が設定済みの場合には、動作分析を行う（Ｓ６７）。主被写体領域が既に設定されており、この状態でタッチ操作やスライド操作がなされたことから、このタッチ操作等の動作を分析する。この動作分析の具体例については、図１０を用いて説明する。
本発明の第１の態様に係る画像表示装置は、撮像した静止画または動画の画像を表示する表示部と、上記表示部の表示画面上へのタッチ操作による圧力、位置変化、方向、速度の少なくとも１つを検出する操作入力検出部と、上記表示部に表示された画像の一部の位置を選択する画像位置選択部と、上記画像位置選択部によって選択された画像位置と、上記操作入力検出部で検出された位置変化および方向の少なくとも１つに基づいて選択された画像領域を主被写体画像領域として認識する画像識別部と、上記選択された主被写体画像領域の少なくとも一部を除く領域に対して特殊効果画像処理を施す特殊画像処理部と、を有し、上記特殊画像処理部は、上記操作入力検出部で検出された上記主被写体画像領域から画面周辺方向へのタッチ操作の圧力および速度の少なくとも１つに応じて特殊効果処理強度を変化させる。
本発明の第２の態様に係る画像表示方法は、撮像した静止画または動画の画像を表示部に表示する表示ステップと、上記表示部の表示画面上へのタッチ操作による圧力、位置変化、方向、速度の少なくとも１つを検出する操作入力検出ステップと、上記表示部に表示された画像の一部の位置を選択する選択ステップと、上記選択された画像位置と、上記操作入力検出ステップで検出された位置変化および方向の少なくとも１つに基づいて選択された画像領域を主被写体画像領域として認識する認識ステップと、上記選択された主被写体画像領域の少なくとも一部を除く領域に対して特殊効果画像処理を施す特殊画像処理ステップと、を有し、上記特殊画像処理ステップは、上記操作入力検出ステップで検出された上記主被写体画像領域から画面周辺方向へのタッチ操作の圧力、速度の少なくとも１つに応じて特殊効果処理強度を変化させる。
本発明の第３の態様に係るコンピュータ読み取り可能な記録媒体は、撮像した静止画または動画の画像を表示部に表示する表示ステップと、上記表示部の表示画面上へのタッチ操作による圧力、位置変化、方向、速度の少なくとも１つを検出する操作入力検出ステップと、上記表示部に表示された画像の一部の位置を選択する選択ステップと、上記選択された画像位置と、上記操作入力検出ステップで検出された位置変化および方向の少なくとも１つに基づいて選択された画像領域を主被写体画像領域として認識する認識ステップと、上記選択された主被写体画像領域の少なくとも一部を除く領域に対して特殊効果画像処理を施す特殊画像処理ステップと、を有し、上記特殊画像処理ステップは、上記操作入力検出ステップで検出された圧力および速度の少なくとも１つに応じて特殊効果処理強度を変化させる、ことを実行させるためのプログラムを記録する。
本発明の第１の態様に係る画像表示装置は、撮像した静止画または動画の画像を表示する表示部と、上記表示部の表示画面上へのタッチ操作によるタッチ位置を検出すると共に、圧力、位置変化、方向、速度の少なくとも１つを検出する操作入力検出部と、上記表示部に表示された画像の一部の位置を選択する画像位置選択部と、予め設定されている形状と、上記画像位置選択部によって選択された画像位置と、上記操作入力検出部で検出された上記タッチ位置の２つの位置に基づいて、上記形状となるように画像領域を選択し、この選択された画像領域を主被写体画像領域として認識する画像識別部と、上記認識された主被写体画像領域の少なくとも一部を除く領域に対して特殊効果画像処理を施す特殊画像処理部と、を有し、上記特殊画像処理部は、上記操作入力検出部で検出された上記主被写体画像領域から画面周辺方向へのタッチ操作の圧力および速度の少なくとも１つに応じて特殊効果処理強度を変化させる。
本発明の第２の態様に係る画像表示方法は、撮像した静止画または動画の画像を表示部に表示する表示ステップと、上記表示部の表示画面上へのタッチ操作によるタッチ位置を検出すると共に、圧力、位置変化、方向、速度の少なくとも１つを検出する操作入力検出ステップと、上記表示部に表示された画像の一部の位置を選択する選択ステップと、予め設定されている形状と、上記選択された画像位置と、上記操作入力検出ステップで検出された上記タッチ位置の２つの位置に基づいて、上記形状となるように画像領域を選択し、この選択された画像領域を主被写体画像領域として認識する認識ステップと、上記認識された主被写体画像領域の少なくとも一部を除く領域に対して特殊効果画像処理を施す特殊画像処理ステップと、を有し、上記特殊画像処理ステップは、上記操作入力検出ステップで検出された上記主被写体画像領域から画面周辺方向へのタッチ操作の圧力、速度の少なくとも１つに応じて特殊効果処理強度を変化させる。
本発明の第３の態様に係るコンピュータ読み取り可能な記録媒体は、撮像した静止画または動画の画像を表示部に表示する表示ステップと、上記表示部の表示画面上へのタッチ操作によるタッチ位置を検出すると共に、圧力、位置変化、方向、速度の少なくとも１つを検出する操作入力検出ステップと、上記表示部に表示された画像の一部の位置を選択する選択ステップと、予め設定されている形状と、上記選択された画像位置と、上記操作入力検出ステップで検出された上記タッチ位置の２つの位置に基づいて、上記形状となるように画像領域を選択し、この選択された画像領域を主被写体画像領域として認識する認識ステップと、上記認識された主被写体画像領域の少なくとも一部を除く領域に対して特殊効果画像処理を施す特殊画像処理ステップと、を有し、上記特殊画像処理ステップは、上記操作入力検出ステップで検出された圧力および速度の少なくとも１つに応じて特殊効果処理強度を変化させる、ことを実行させるためのプログラムを記録する。

Claims (7)

  1. 撮像した静止画または動画の画像を表示する表示部と、
    上記表示部の表示画面上へのタッチ操作または表示画面近傍でのジェスチャを検出する操作入力検出部と、
    上記表示部に表示された画像の一部の位置を選択する画像位置選択部と、
    上記画像位置選択部によって選択された画像位置に基づいて選択された画像領域を主被写体画像領域として認識する画像識別部と、
    上記操作入力検出部で検出された圧力、位置変化、方向、速度、変位量の少なくとも１つに応じて上記主被写体画像領域を変更する画像領域変更部と、
    上記選択された主被写体領域の少なくとも一部を除く領域に対して特殊効果画像処理を施す特殊画像処理部と、
    を有することを特徴とする画像表示装置。
  2. 上記画像領域変更部は、上記画像識別部によって認識された主被写体領域を上記操作入力検出部で検出された領域に変更することを特徴とする請求項１に記載の画像表示装置。
  3. 上記操作入力検出部は、上記タッチ操作またはジェスチャの複数の操作のうち、上記画像領域の一部を固定する指示と、上記画像領域の一部を変更する指示をそれぞれ検出することを特徴とする請求項２に記載の画像表示装置。
  4. 上記操作入力検出部は、上記タッチ操作またはジェスチャの複数の操作に基づき、上記特殊効果画像処理を時間に応じて変化させることを特徴とする請求項２に記載の画像表示装置。
  5. 上記操作入力検出部は、上記タッチ操作またはジェスチャが所定の位置で検出された場合に、上記特殊効果画像処理をキャンセルすることを特徴とする請求項２に記載の画像表示装置。
  6. 撮像した静止画または動画の画像を表示部に表示する表示ステップと、
    上記表示部の表示画面上へのタッチ操作または表示画面近傍でのジェスチャを検出する操作入力検出ステップと、
    上記表示部に表示された画像の一部の位置を選択する選択ステップと、
    上記選択された画像位置に基づいて選択された画像領域を主被写体画像領域として認識する認識ステップと、
    上記操作入力検出ステップで検出された圧力、位置変化、方向、速度、変位量の少なくとも１つに応じて上記主被写体画像領域を変更する変更ステップと、
    上記選択された主被写体領域の少なくとも一部を除く領域に対して特殊効果画像処理を施す特殊画像処理ステップと、
    を有することを特徴とする画像表示方法。
  7. 撮像した静止画または動画の画像を表示部に表示する表示ステップと、
    上記表示部に表示された画像の一部の位置を選択する選択ステップと、
    上記選択された画像位置に基づいて選択された画像領域を主被写体画像領域として認識する認識ステップと、
    上記識別された主被写体領域を変更する変更ステップと、
    上記選択された主被写体領域の少なくとも一部を除く領域に対して特殊効果画像処理を施す特殊画像処理ステップと、
    を実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体。
JP2015540405A 2013-10-01 2014-06-17 画像表示装置および画像表示方法 Pending JPWO2015049899A1 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013206230 2013-10-01
JP2013206230 2013-10-01
PCT/JP2014/066024 WO2015049899A1 (ja) 2013-10-01 2014-06-17 画像表示装置および画像表示方法

Publications (1)

Publication Number Publication Date
JPWO2015049899A1 true JPWO2015049899A1 (ja) 2017-03-09

Family

ID=52778496

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015540405A Pending JPWO2015049899A1 (ja) 2013-10-01 2014-06-17 画像表示装置および画像表示方法

Country Status (4)

Country Link
US (1) US9699389B2 (ja)
JP (1) JPWO2015049899A1 (ja)
CN (1) CN105594194B (ja)
WO (1) WO2015049899A1 (ja)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101634516B1 (ko) * 2013-06-13 2016-06-28 코어포토닉스 리미티드 이중 조리개 줌 디지털 카메라
CN104796594B (zh) * 2014-01-16 2020-01-14 中兴通讯股份有限公司 一种预览界面特殊效果即时呈现方法及终端设备
CN106303493B (zh) * 2015-05-27 2018-06-29 深圳超多维光电子有限公司 图像处理方法及装置
CN104935787A (zh) * 2015-05-29 2015-09-23 努比亚技术有限公司 图像处理方法及装置
KR20170029978A (ko) * 2015-09-08 2017-03-16 엘지전자 주식회사 이동단말기 및 그 제어방법
US11003348B2 (en) * 2015-10-13 2021-05-11 Carl Zeiss Vision International Gmbh Arrangement for determining the pupil center
CN106385591B (zh) * 2016-10-17 2020-05-15 腾讯科技（上海）有限公司 视频处理方法及视频处理装置
CN106789576A (zh) * 2016-12-23 2017-05-31 上海青声网络科技有限公司 一种图像生成方法及装置
JP7009096B2 (ja) * 2017-07-06 2022-01-25 キヤノン株式会社 電子機器およびその制御方法
CN111201774B (zh) * 2017-10-10 2022-02-15 深圳传音通讯有限公司 一种变焦控制方法、装置及拍摄终端
JP7043255B2 (ja) 2017-12-28 2022-03-29 キヤノン株式会社 電子機器及びその制御方法
JP2019121857A (ja) * 2017-12-28 2019-07-22 キヤノン株式会社 電子機器及びその制御方法
JP6975842B2 (ja) * 2018-03-19 2021-12-01 富士フイルム株式会社 撮像装置、露光間ズーム撮影方法、プログラム及び記録媒体
US10902277B2 (en) * 2018-09-10 2021-01-26 Microsoft Technology Licensing, Llc Multi-region detection for images
CN114125567B (zh) * 2020-08-27 2022-12-13 荣耀终端有限公司 图像处理方法及相关装置
CN114666513B (zh) * 2022-03-01 2024-02-02 维沃移动通信有限公司 图像处理方法及装置
CN114785969A (zh) * 2022-05-30 2022-07-22 维沃移动通信有限公司 拍摄方法和装置

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003087553A (ja) * 2001-09-17 2003-03-20 Casio Comput Co Ltd 画像合成装置、画像合成方法及びプログラム
JP2009260691A (ja) * 2008-04-17 2009-11-05 Casio Comput Co Ltd 画像再生装置、画像再生方法、及びプログラム
JP2010039558A (ja) * 2008-07-31 2010-02-18 Canon Inc 情報処理装置及びその制御方法
JP2010271774A (ja) * 2009-05-19 2010-12-02 Sony Corp 情報処理装置、画像拡大縮小方法及びそのプログラム
JP2011135376A (ja) * 2009-12-24 2011-07-07 Samsung Yokohama Research Institute Co Ltd 撮像装置及び画像処理方法
JP2012169723A (ja) * 2011-02-10 2012-09-06 Panasonic Corp 表示装置及びコンピュータプログラム
JP2013074301A (ja) * 2011-09-26 2013-04-22 Casio Comput Co Ltd 画像処理装置、画像処理方法、及び、プログラム
JP2013135398A (ja) * 2011-12-27 2013-07-08 Olympus Imaging Corp 画像合成装置
JP2013183244A (ja) * 2012-03-01 2013-09-12 Panasonic Corp 撮像装置及び携帯電話端末装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7663607B2 (en) * 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
JP4701187B2 (ja) * 2004-11-30 2011-06-15 パナソニック株式会社 画像処理方法、画像処理装置、および画像処理プログラム
JP5182555B2 (ja) * 2005-03-15 2013-04-17 オムロン株式会社 画像処理装置および画像処理方法、画像処理システム、プログラム、並びに、記録媒体
KR20090066368A (ko) * 2007-12-20 2009-06-24 삼성전자주식회사 터치 스크린을 갖는 휴대 단말기 및 그의 기능 제어 방법
KR101467293B1 (ko) * 2008-04-22 2014-12-02 삼성전자주식회사 촬영될 영상에 관련된 메뉴를 표시하는 ｕｉ 제공방법 및이를 적용한 촬영장치
KR20100058280A (ko) * 2008-11-24 2010-06-03 삼성전자주식회사 휴대 단말기를 이용한 영상 촬영 방법 및 장치
CN102542610B (zh) * 2010-12-30 2014-04-16 福建星网视易信息系统有限公司 一种基于OpenGL ES的图像特效实现方法
KR101794000B1 (ko) * 2011-06-13 2017-11-06 삼성전자주식회사 터치 스크린을 구비하는 기기에서 스크롤 장치 및 방법
JP2013055609A (ja) * 2011-09-06 2013-03-21 Olympus Imaging Corp デジタルカメラ
KR20160023298A (ko) * 2014-08-22 2016-03-03 삼성전자주식회사 전자 장치 및 전자 장치의 입력 인터페이스 제공 방법

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003087553A (ja) * 2001-09-17 2003-03-20 Casio Comput Co Ltd 画像合成装置、画像合成方法及びプログラム
JP2009260691A (ja) * 2008-04-17 2009-11-05 Casio Comput Co Ltd 画像再生装置、画像再生方法、及びプログラム
JP2010039558A (ja) * 2008-07-31 2010-02-18 Canon Inc 情報処理装置及びその制御方法
JP2010271774A (ja) * 2009-05-19 2010-12-02 Sony Corp 情報処理装置、画像拡大縮小方法及びそのプログラム
JP2011135376A (ja) * 2009-12-24 2011-07-07 Samsung Yokohama Research Institute Co Ltd 撮像装置及び画像処理方法
JP2012169723A (ja) * 2011-02-10 2012-09-06 Panasonic Corp 表示装置及びコンピュータプログラム
JP2013074301A (ja) * 2011-09-26 2013-04-22 Casio Comput Co Ltd 画像処理装置、画像処理方法、及び、プログラム
JP2013135398A (ja) * 2011-12-27 2013-07-08 Olympus Imaging Corp 画像合成装置
JP2013183244A (ja) * 2012-03-01 2013-09-12 Panasonic Corp 撮像装置及び携帯電話端末装置

Also Published As

Publication number Publication date
CN105594194B (zh) 2019-08-30
US20160191819A1 (en) 2016-06-30
CN105594194A (zh) 2016-05-18
WO2015049899A1 (ja) 2015-04-09
US9699389B2 (en) 2017-07-04

Similar Documents

Publication Publication Date Title
WO2015049899A1 (ja) 画像表示装置および画像表示方法
US9678657B2 (en) Imaging apparatus, imaging method, and computer-readable storage medium providing a touch panel display user interface
JP4929630B2 (ja) 撮像装置、制御方法、およびプログラム
US8659681B2 (en) Method and apparatus for controlling zoom using touch screen
US8988535B2 (en) Photographing control method and apparatus according to motion of digital photographing apparatus
JP2010182023A (ja) 携帯機器および操作制御方法
JP5187035B2 (ja) 撮像装置および画像処理装置、並びに画像処理プログラム
JP2007236008A (ja) 画像表示器付きカメラ
JP4241460B2 (ja) 電子撮像装置
CN112887617B (zh) 一种拍摄方法、装置和电子设备
JP2013009189A (ja) 撮影装置および撮像方法
JP2011223294A (ja) 撮像装置
JP2010279054A (ja) 撮像装置、画像処理装置、撮像方法、及び画像処理方法
JP5370555B2 (ja) 撮像装置、撮像方法及びプログラム
US8537266B2 (en) Apparatus for processing digital image and method of controlling the same
JP6429975B2 (ja) 電子機器、アイコン表示方法およびアイコン表示用プログラム
JP2006276683A (ja) 撮像装置及びプログラム
JP4632417B2 (ja) 撮像装置、及びその制御方法
JP2013210572A (ja) 撮像装置および撮像装置の制御プログラム
KR20100098122A (ko) 영상 처리 방법 및 장치, 이를 이용한 디지털 촬영 장치
JP4810440B2 (ja) 撮像装置及びその制御方法及びプログラム及び記憶媒体
CN113873160B (zh) 图像处理方法、装置、电子设备和计算机存储介质
JP2011155692A (ja) 撮像装置及びそのプログラム
JP2014027605A (ja) 撮像装置及びその画像合成方法、画像合成プログラム
JP5383096B2 (ja) 撮像装置及びその制御方法及びプログラム

Legal Events

Date Code Title Description
A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20160226