JP7110163B2 - 画像処理装置、撮影装置、画像処理方法、及び画像処理プログラム - Google Patents

画像処理装置、撮影装置、画像処理方法、及び画像処理プログラム Download PDF

Info

Publication number
JP7110163B2
JP7110163B2 JP2019167365A JP2019167365A JP7110163B2 JP 7110163 B2 JP7110163 B2 JP 7110163B2 JP 2019167365 A JP2019167365 A JP 2019167365A JP 2019167365 A JP2019167365 A JP 2019167365A JP 7110163 B2 JP7110163 B2 JP 7110163B2
Authority
JP
Japan
Prior art keywords
image
display
color
specific frame
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019167365A
Other languages
English (en)
Other versions
JP2021044772A (ja
Inventor
央奈 弓部
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2019167365A priority Critical patent/JP7110163B2/ja
Priority to US17/008,477 priority patent/US11734859B2/en
Priority to CN202010944029.0A priority patent/CN112508770A/zh
Publication of JP2021044772A publication Critical patent/JP2021044772A/ja
Application granted granted Critical
Publication of JP7110163B2 publication Critical patent/JP7110163B2/ja
Priority to US18/344,387 priority patent/US20230342990A1/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/04—Context-preserving transformations, e.g. by using an importance map
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/20—Linear translation of whole images or parts thereof, e.g. panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621—Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Studio Devices (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)
  • Editing Of Facsimile Originals (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本開示は、画像処理装置、撮影装置、画像処理方法、及び画像処理プログラムに関する。
一般に、ユーザが選択した選択画像に、合成対象画像を合成した合成画像を作成し、表示部に表示等することが行われている。例えば、特許文献１には、原画像中から切り抜きたい領域を包含線によってユーザが指定し、包含線で示される領域内から、同じ色でつながる領域の面積が所定の割合以上含まれる領域を切り抜き、任意の画像に嵌込み合成する技術が開示されている。
特開平１－１７５０７６号公報
特許文献１に記載の技術では、切り抜く領域や色の指定は、タブレットとタブレットペンとからなる座標入力装置により、ユーザが画素を指定することで行っている。特許文献１に記載の技術では、画像の切り抜きに手間がかかるため、ユーザの操作性について問題があった。
本開示は、以上の事情を鑑みて成されたものであり、合成画像の作成を簡便にし、かつ合成にかかるユーザの操作性が向上された、画像処理装置、撮影装置、画像処理方法、及び画像処理プログラムを提供することを目的とする。
上記目的を達成するために、本開示の第１の態様の画像処理装置は、表示部に表示されている表示画像における一部の領域を特定する特定枠と、特定枠内の画像の色の中から基準色を指定するための色指定用マークとを、表示画像に重畳させて表示させる表示制御部と、特定枠内の画像から、色指定用マークによって指定される基準色に応じた画像を合成対象画像として抽出する抽出部と、ユーザにより選択された選択画像に対して合成対象画像を合成した合成画像を生成する合成部と、を備える。
本開示の第２の態様の画像処理装置は、第１の態様の画像処理装置において、色指定用マークは、特定枠内に表示され、かつ特定枠と色指定用マークとの相対的な位置関係が予め定められている。
本開示の第３の態様の画像処理装置は、第１の態様または第２の態様の画像処理装置において、特定枠を拡大または縮小させるサイズ変更指示を受け付ける第１受付部をさらに備え、表示制御部は、第１受付部が受け付けたサイズ変更指示に応じて特定枠のサイズを変更する制御を行う。
本開示の第４の態様の画像処理装置は、第１の態様から第３の態様のいずれか１態様の画像処理装置において、特定枠の位置を移動する移動指示を受け付ける第２受付部をさらに備え、表示制御部は、第２受付部が受け付けた移動指示に応じて特定枠の位置を移動する制御を行う。
本開示の第５の態様の画像処理装置は、第１の態様から第４の態様のいずれか１態様の画像処理装置において、色指定用マークは表示画像の特定の色の領域にのみに重畳しており、色指定用マークが重畳している部分の表示画像の色を基準色とする。
本開示の第６の態様の画像処理装置は、第５の態様の画像処理装置において、表示制御部は、色指定用マークよりも大きな面積を有し、基準色を表すインジケータをさらに表示する。
本開示の第７の態様の画像処理装置は、第１の態様から第４の態様のいずれか１態様の画像処理装置において、色指定用マークは表示画像の一部を囲む形状を有し、表示画像の特定の色の領域のみを囲んでおり、抽出部は、色指定用マークにより囲まれた表示画像の色を基準色とする。
本開示の第８の態様の画像処理装置は、第７の態様の画像処理装置において、表示制御部は、色指定用マークにより囲まれる表示画像の領域よりも大きな面積を有し、かつ基準色を表すインジケータをさらに表示する。
本開示の第９の態様の画像処理装置は、第１の態様から第８の態様のいずれか１態様の画像処理装置において、抽出部は、特定枠内の画像全体の階調を数値化し、階調の数値が、基準色が該当する階調の数値を含む基準色範囲内である画像を、合成対象画像として抽出する。
本開示の第１０の態様の画像処理装置は、第９の態様の画像処理装置において、基準色範囲をユーザが設定するための設定部をさらに備える。
本開示の第１１の態様の撮影装置は、被写体を撮影する撮影部と、撮影部が撮影した画像を表示する表示部と、第１の態様から第１０の態様のいずれか１態様の画像処理装置と、を備える。
本開示の第１２の態様の撮影装置は、第１１の態様の撮影装置において、表示部には表示画像がライブビュー表示される。
また、上記目的を達成するために、本開示の第１２の態様の画像処理方法は、表示部に表示されている表示画像における一部の領域を特定する特定枠と、特定枠内の画像に含まれる色の中から基準色を指定するための色指定用マークとを、表示画像に重畳させて表示させ、特定枠内の画像から、色指定用マークによって指定される基準色に応じた画像を合成対象画像として抽出し、ユーザにより選択された選択画像に対して合成対象画像を合成した合成画像を生成する、処理をコンピュータが実行するものである。
また、上記目的を達成するために、本開示の第１３の態様の画像処理プログラムは、表示部に表示されている表示画像における一部の領域を特定する特定枠と、特定枠内の画像に含まれる色の中から基準色を指定するための色指定用マークとを、表示画像に重畳させて表示させ、特定枠内の画像から、色指定用マークによって指定される基準色に応じた画像を合成対象画像として抽出し、ユーザにより選択された選択画像に対して合成対象画像を合成した合成画像を生成する、処理をコンピュータに実行させるためのものである。
また、本開示の画像処理装置は、コンピュータに実行させるための命令を記憶するメモリと、記憶された命令を実行するよう構成されたプロセッサと、を備え、プロセッサは、表示部に表示されている表示画像における一部の領域を特定する特定枠と、特定枠内の画像に含まれる色の中から基準色を指定するための色指定用マークとを、表示画像に重畳させて表示させ、特定枠内の画像から、色指定用マークによって指定される基準色に応じた画像を合成対象画像として抽出し、ユーザにより選択された選択画像に対して合成対象画像を合成した合成画像を生成する。
本開示によれば、合成画像の作成を簡便にし、かつ合成にかかるユーザの操作性を向上させることができる。
撮影装置の一例である携帯端末を用いてユーザが撮影している様子の一例を示す図である。 携帯端末の電気構成の一例の概略を示す図である。 携帯端末の構成の一例を示す機能ブロック図である。 インジケータ付特定枠の表示例を示す図である。 携帯端末の構成の一例を示す機能ブロック図である。 合成撮影処理の一例を示すフローチャートである。 特定枠の移動を説明するための図である。 特定枠の拡縮を説明するための図である。 合成対象画像抽出処理の一例を示すフローチャートである。 特定領域から合成対象画像を抽出する処理を説明するための図である。 合成対象画像である文字が合成された選択画像がライブビュー表示されている様子を示す図である。 合成対象画像である文字の表示位置を移動させた場合の一例を示す図である。 合成対象画像である文字の表示サイズを拡大した場合の一例を示す図である。 合成対象画像である文字の表示姿勢を回転させた場合の一例を示す図である。 合成対象画像である文字の色を変化させる場合の一例を示す図である。 実施形態の携帯端末における合成撮影処理をまとめた図である。 変形例１を説明するための図である。 変形例１を説明するための図である。 変形例１を説明するための図である。 変形例１を説明するための図である。 変形例２を説明するための図である。 変形例２を説明するための図である。 変形例３を説明するための図である。 変形例３を説明するための図である。 変形例３を説明するための図である。 変形例３を説明するための図である。 変形例３を説明するための図である。 変形例３を説明するための図である。 変形例４を説明するための図である。 変形例４を説明するための図である。 変形例５を説明するための図である。 変形例５を説明するための図である。 変形例６の合成撮影処理の一例を示すフローチャートである。 変形例６の合成撮影処理の一例を示すフローチャートである。
以下、図面を参照して、本開示の技術を実施するための形態例を詳細に説明する。図１に示すように、携帯端末１０は、例えばスマートフォンである。携帯端末１０は、携帯電話として機能する他に、アプリ等と呼ばれる各種のアプリケーションプログラムを実行するコンピュータとして機能する。また、携帯端末１０は、写真撮影を行うことも可能であり、撮影装置の一例である。
携帯端末１０の本体内には、被写体を撮影する撮影部１１（図２参照）が内蔵されている。携帯端末１０は、本体の前面には、タッチパネルディスプレイ１２が設けられている。携帯端末１０は、撮影部１１で撮影した撮影画像を、スルー画像としてタッチパネルディスプレイ１２に逐次表示するライブビュー表示が可能である。
ライブビュー表示においては、撮影部１１は、例えば、１秒間に３０フレームのフレームレートで撮影画像を出力し、タッチパネルディスプレイ１２に表示されるスルー画像もそのフレームレートで更新される。そのため、ライブビュー表示されるスルー画像は、動画として視認される。被写体がライブビュー表示されるため、ユーザＵは、タッチパネルディスプレイ１２の表示を通じて、被写体及び撮影画像の構図を確認しながら、撮影を行うことができる。
図２に一例として示すように、携帯端末１０は、撮影部１１、タッチパネルディスプレイ１２、ＣＰＵ（Central Processing Unit）１４、操作スイッチ１６、ワークメモリ１７、ストレージデバイス１８、メディアコントローラ１９、外部Ｉ／Ｆ（Interface）２１、及び通信部２２を備えている。これらはバスライン２３を介して通信可能に接続されている。
ＣＰＵ１４は、オペレーティングシステム（図示省略）を実行することにより、主制御部２６、及び表示制御部３１として機能する。主制御部２６は、携帯端末１０の各部を統括的に制御する。表示制御部３１は、タッチパネルディスプレイ１２の表示を制御する。また、ＣＰＵ１４は、撮影部１１が撮影する画像に対して画像処理を施す画像処理部３２としても機能する。
ワークメモリ１７は、ＣＰＵ１４が各種のプログラムを実行する際のワークエリアとして使用される揮発性のメモリであり、ＲＡＭ（Random Access Memory）が使用される。また、ワークメモリ１７は、後述するようにライブビュー表示及び画像処理を行う場合の作業用メモリとして使用される。
ストレージデバイス１８には、上記オペレーティングシステムの他、アプリケーションプログラム（ＡＰ）２７等の各種のプログラムが格納されている。アプリケーションプログラム２７としては、後述する写真合成アプリケーションプログラムの他、画像表示ソフト、ウエブブラウザ、及びメールアプリケーションプログラム等がある。
また、ストレージデバイス１８には、ユーザＵが携帯端末１０を使用して撮影した画像を表す画像データ等のユーザのデータを格納するユーザ領域２８が設けられている。ストレージデバイス１８は、例えば、フラッシュメモリ等の不揮発性メモリである。なお、ストレージデバイス１８としては、ＨＤＤ（Hard Disk Drive）又はＳＳＤ（Solid State Drive）等を使用してもよい。
タッチパネルディスプレイ１２は、ストレージデバイス１８に格納されている、ＧＵＩ（Graphical User Interface）として機能する操作画面、及び撮影部１１が撮影した画像等を表示する表示部の一例である。また、タッチパネルディスプレイ１２は、ユーザＵの指等によるタッチ操作を検知する機能を備えており、タッチ操作を検知して、主制御部２６に対して、操作指示を入力するためのものである。タッチパネルディスプレイ１２は、周知のように、例えば、ＬＣＤ（Liquid Crystal Display）または有機ＥＬ（Organic Electro-Luminescence）ディスプレイ等の表示部と、抵抗膜方式または静電容量方式等のタッチパネル部とで構成される。
操作スイッチ１６は、携帯端末１０の本体に設けられたマルチファンクションキー及び電源ボタン等の各種の機械的な操作部であり、主制御部２６に対して操作指示を入力する。
主制御部２６は、タッチパネルディスプレイ１２及び操作スイッチ１６からの操作指示の入力を受け付ける受付部である。
表示制御部３１は、主制御部２６の制御の下、操作画面及び画像等をタッチパネルディスプレイ１２に表示する制御を行う。表示制御部３１は、操作画面及び画像等のデータを、タッチパネルディスプレイ１２が取り扱えるビデオ信号に変換する処理等を行って、タッチパネルディスプレイ１２に出力する。
画像処理部３２は、撮影部１１が撮影した撮影画像に対して、輝度補正及び圧縮伸長処理といった一般的な画像処理の他、後述する画像抽出及び画像合成等の各種の画像処理を施す。
メディアコントローラ１９は、メモリーカード２９等の着脱自在のリムーバブルメディアに対するデータの書き込みと読み出しとを行う。
外部Ｉ／Ｆ２１は、例えばＵＳＢ（Universal Serial Bus）コネクタ等のインタフェースである。外部Ｉ／Ｆ２１には、充電ケーブル、通信ケーブル、及びＵＳＢメモリ等が接続される。
通信部２２は、アンテナ及び通信制御回路（いずれも図示省略）を有しており、移動体通信網及び無線ＬＡＮ（Local Area Network）を通じた無線通信、及び近距離無線通信等の通信機能を担う。
撮影部１１は、例えば、撮影レンズ１１Ａ、イメージセンサ１１Ｂ、ＡＤ（Analog-to-digital）変換器（Ａ／Ｄ）１１Ｃ、画像入力コントローラ１１Ｄ、画像信号処理回路１１Ｅ、タイミングジェネレータ（ＴＧ）１１Ｆ、及びドライバ１１Ｇを有している。
撮影レンズ１１Ａは、被写体からの光を集光して、イメージセンサ１１Ｂの撮像面に被写体像を結像させる。イメージセンサ１１Ｂは、撮像素子が撮像した被写体光を光電変換して、アナログの画像信号として出力する。イメージセンサ１１Ｂとしては、例えば、ＣＣＤ（Charge Coupled Device）イメージセンサまたはＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ等が使用される。イメージセンサ１１Ｂは、ライブビュー表示を行う場合には、予め設定されたフレームレートで、アナログの画像信号を逐次出力する。
ＡＤ変換器１１Ｃは、イメージセンサ１１Ｂからのアナログの画像信号をデジタルの画像信号に変換する。画像入力コントローラ１１Ｄは、ＡＤ変換器１１Ｃから入力されるデジタルの画像信号を、撮影画像としてワークメモリ１７に記録する。画像入力コントローラ１１Ｄは、ライブビュー撮影が行われている間は、撮影画像をスルー画像としてワークメモリ１７に記録する。ワークメモリ１７内において、スルー画像は、ライブビュー表示に使用され、イメージセンサ１１Ｂのフレームレートに合わせて逐次更新される。
画像信号処理回路１１Ｅは、画像入力コントローラ１１Ｄがワークメモリ１７に記録した撮影画像に対して、ホワイトバランス処理、ガンマ補正処理、及びＹＣ変換処理等の各種の信号処理を施す。ホワイトバランス処理は、撮影画像に含まれるＲ（赤）、Ｇ（緑）、Ｂ（青）の各画像信号のゲインを調整してホワイトバランスを調整する処理である。ガンマ補正処理は、予め記憶されているガンマ特性に応じて、画像信号に対して行われる階調変換処理である。ＹＣ処理は、Ｒ、Ｇ、Ｂの画像信号を輝度信号Ｙと色差信号Ｃｒ、Ｃｂに変換する処理である。画像信号処理回路１１Ｅが処理を施した撮影画像は、ワークメモリ１７に書き戻される。
タイミングジェネレータ１１Ｆは、主制御部２６の制御下で、イメージセンサ１１Ｂの動作タイミングを規定するタイミング信号を発生する。ドライバ１１Ｇは、タイミングジェネレータ１１Ｆからのタイミング信号に基づいて、イメージセンサ１１Ｂを駆動する。
表示制御部３１は、撮影部１１が作動して、携帯端末１０が撮影装置として機能している場合、撮影部１１が撮影した撮影画像をスルー画像としてタッチパネルディスプレイ１２にライブビュー表示する制御を行う。ライブビュー表示は、例えば、撮影部１１の起動と同時に開始される。そして、ライブビュー表示は、シャッタボタンの操作に応じた画像保存動作の実行中は一時的に中断されるが、基本的には、撮影部１１の動作が終了するまでの間、継続される。
より具体的には、撮影部１１は上述したフレームレートで撮影画像を逐次出力し、撮影画像はワークメモリ１７に出力される。撮影画像は、画像信号処理回路１１Ｅで信号処理が施された後、ワークメモリ１７に記録される。ライブビュー表示においては、撮影画像はスルー画像としてワークメモリ１７に記録されて、上述したフレームレートで逐次更新される。表示制御部３１は、ワークメモリ１７内において逐次更新されるスルー画像を読み出して、タッチパネルディスプレイ１２の表示を逐次更新することによって、ライブビュー表示を実現する。また、ここでは、ライブビュー表示を行うために、撮影部１１が行う撮影をライブビュー撮影と呼ぶ。
また、ライブビュー表示中に、ユーザＵによってシャッタボタンが操作されると、画像保存指示が入力される。画像保存指示が入力されると、そのタイミングで撮影された撮影画像が、ストレージデバイス１８のユーザ領域２８またはメモリーカード２９のうちの予め設定された保存先に保存される。画像処理部３２は、メモリーカード２９へ撮影画像を記録する場合には、メディアコントローラ１９を介して行う。
保存用の撮影画像としては、スルー画像として用いるためにワークメモリ１７に記録された画像でもよいし、シャッタボタンの操作のタイミングで新たに撮影部１１が取得した画像でもよい。
携帯端末１０には、アプリケーションプログラム２７の１つとして、スルー画像に対して画像合成を施してライブビュー表示する写真合成アプリケーションプログラムがインストールされている。写真合成アプリケーションプログラムは、例えば、スルー画像として表示画像をライブビュー表示中に、表示画像の一部を合成対象画像として抽出する。そして、抽出した合成対象画像５４を、表示画像と異なる選択画像と合成した合成画像を生成し、生成した合成画像をスルー画像としてライブビュー表示する機能を携帯端末１０において実現する。
本実施形態の写真合成アプリケーションプログラムは、本開示の画像処理プログラムの一例であり、写真合成アプリケーションプログラムが作動することにより、本実施形態の携帯端末１０が、本開示の画像処理装置の一例として機能する。写真合成アプリケーションプログラムの作動に応じた、携帯端末１０の機能に係る構成について図３～図５を参照して説明する。
まず、図３及び図４を参照して、携帯端末１０における写真合成の前処理に係る機能について説明する。写真合成アプリケーションプログラムが起動されると、ＣＰＵ１４は、表示制御部３１及び画像処理部３２として機能する。
図３に示すように、ワークメモリ１７には、画像メモリ１７Ａ及びＶＲＡＭ（Video Random access memory）１７Ｂとして機能する領域が設けられている。画像メモリ１７Ａは、撮影部１１から出力される撮影画像がスルー画像として一時的に記録される領域である。ＶＲＡＭ１７Ｂは、画像処理部３２において、画像処理が施されたスルー画像が記録される領域である。
写真合成アプリケーションプログラムが起動されると、撮影部１１が表示画像５０のライブビュー撮影を開始する。画像メモリ１７Ａには、表示画像５０がスルー画像として記録される。画像メモリ１７Ａ内の表示画像５０は、撮影部１１のフレームレートに従って出力される最新の撮影画像に逐次更新される。表示画像５０は、撮影部１１が撮影するスルー画像であり、合成対象画像５４（図５参照）の抽出元になる画像である。
表示画像５０は、画像処理部３２によって画像メモリ１７Ａから読み出される。表示画像５０は、画像処理部３２によって輝度補正等の画像処理が施された後、ＶＲＡＭ１７Ｂに記録される。表示制御部３１は、ＶＲＡＭ１７Ｂからスルー画像の表示画像５０を読み出して、タッチパネルディスプレイ１２にライブビュー表示する。
また、ストレージデバイス１８には、アプリケーションプログラム２７としての写真合成アプリケーションプログラムが使用するデータとして、インジケータ付特定枠６０及び色指定用マーク６２のデータが記録されている。
表示制御部３１は、表示画像５０をライブビュー表示する場合には、図４に示すように、表示画像５０内において合成対象画像５４を抽出するためのＧＵＩとして、インジケータ付特定枠６０及び色指定用マーク６２を表示画像５０に重畳させてタッチパネルディスプレイ１２に表示する。
図４には、表示制御部３１が、携帯端末１０のタッチパネルディスプレイ１２に表示された表示画像５０に、インジケータ付特定枠６０及び色指定用マーク６２を重畳させて表示させた状態の一例を示す。インジケータ付特定枠６０は、表示画像５０から合成対象画像５４を抽出する範囲をユーザが特定するためにユーザＵが使用するＧＵＩである。インジケータ付特定枠６０によって特定された領域が特定領域５２であり、特定領域５２の一部が合成対象画像５４として抽出される。図４に示すように、本実施形態のインジケータ付特定枠６０は、インジケータ６０Ａ、特定枠６０Ｂ、及び拡縮指示マーク６０Ｃを含む。本実施形態のインジケータ付特定枠６０の特定枠６０Ｂが本開示の表示画像における一部の領域を特定する特定枠の一例である。また、本実施形態のインジケータ付特定枠６０のインジケータ６０Ａが本開示の基準色を表すインジケータの一例である。本実施形態の特定領域５２が、本開示の表示画像における一部の領域の一例であり、また本開示の特定枠内の画像の一例である。
図４に示すように、特定枠６０Ｂで囲われた領域が特定領域５２である。本実施形態では、特定枠６０Ｂのサイズの拡大及び縮小が可能とされている。換言すると、特定領域５２のサイズ（範囲）のユーザＵによる変更が可能とされている。一例として、本実施形態では、ユーザＵが拡縮指示マーク６０Ｃを操作することにより、特定枠６０Ｂが拡大または縮小する。主制御部２６は、特定枠６０Ｂの拡大または縮小の操作指示を受け付けると、受け付けた操作指示の情報を表示制御部３１に出力する。本実施形態の特定枠６０Ｂの拡大または縮小の操作指示は、本開示の特定枠６０Ｂのサイズを変更するサイズ変更指示の一例である。表示制御部３１は、主制御部２６から入力された操作指示の情報に応じた大きさに、特定枠６０Ｂを変更させる。この場合の本実施形態の主制御部２６が、本開示の第１受付部の一例である。なお、本実施形態では、一例として特定枠６０Ｂの拡大及び縮小を可能としているが、拡大及び縮小の少なくとも一方が可能な形態であってもよい。
また、本実施形態では、特定枠６０Ｂの移動が可能とされている。換言すると、表示画像５０に対する特定枠６０Ｂの位置のユーザＵによる変更が可能とされている。主制御部２６は、特定枠６０Ｂの移動の操作指示を受け付けると、受け付けた操作指示の情報を表示制御部３１に出力する。本実施形態の特定枠６０Ｂの移動の操作指示は、本開示の特定枠６０Ｂの位置を移動する移動指示の一例である。表示制御部３１は、主制御部２６から入力された操作指示の情報に応じた位置に、インジケータ付特定枠６０を移動させる。この場合の本実施形態の主制御部２６が、本開示の第２受付部の一例である。
また、図４に示すように、特定枠６０Ｂ内には、色指定用マーク６２が表示される。本実施形態では特定枠６０Ｂと色指定用マーク６２との相対的な位置関係が、予め定められている。一例として、本実施形態では、色指定用マーク６２の位置を、特定枠６０Ｂの中心（重心）の位置としている。色指定用マーク６２は、特定領域５２内の画像の色から基準色を指定するためのマークを表す画像である。本実施形態の色指定用マーク６２が、本開示の色指定用マークの一例である。一例として本実施形態の色指定用マーク６２は、表示画像５０を囲む円環状の形状を有するマークであり、円環状の内部の表示画像５０の色が基準色として指定される。
インジケータ６０Ａは、色指定用マーク６２よりも大きな面積を有し、色指定用マーク６２により指定された基準色を表示する。
次に、図５を参照して、携帯端末１０における合成撮影処理に係る機能について説明する。写真合成アプリケーションプログラムが起動されると、ＣＰＵ１４は、画像処理部３２の抽出部３２Ａ及び合成部３２Ｂとして機能する。
抽出部３２Ａは、表示画像５０の一部を、画像を合成する合成対象画像５４として抽出する。具体的には、抽出部３２Ａは、表示画像５０から特定された特定領域５２から、合成対象画像５４を抽出する。より具体的には、抽出部３２Ａは、上述したインジケータ付特定枠６０の特定枠６０Ｂにより特定された特定領域５２から、色指定用マーク６２により指定された基準色に応じた画像を合成対象画像５４として抽出する。合成対象画像５４となる画像は、例えば、マークまたは文字列を表す画像等が挙げられる。マークには、文字、図形、模様及びこれらの中から選択された２以上の組み合わせのうちの少なくとも１つが含まれる。文字は、数字及び記号を含む概念である。マークには、会社名、商品名、店名、駅名、または地名等を示すロゴが含まれる。模様には、縞模様、チェック柄、及びドット柄等が含まれる。また、マークには、文字、数字または記号のいずれか１字で構成されるものも含まれる。
文字列には、手書きの文字または印字された文字で構成されるメッセージ、交通安全の標語、観光地の歓迎または送迎の挨拶文、商品の広告文等が含まれる。メッセージは、例えば、「先日はありがとう」又は「入学おめでとう」といった、特定の人に向けて思いを伝える言葉であり、お祝いの言葉、お礼の言葉、及び挨拶文等が含まれる。
この他、観光名所で観光客に提供されるスタンプ等の印章または印影もマークに含まれる。また、お寺または神社において、参拝客に対して提供される印章または印影である御朱印等も、マークまたは文字列のいずれかに含まれる。また、マークまたは文字列に含まれる文字は、日本語に限らず、英語、中国語、及び韓国語等の外国語でもよい。
抽出部３２Ａは、特定領域５２内における画像のコントラストに基づいて、基準色に応じた画像の領域を合成対象画像５４として抽出する。表示画像５０の中から合成対象画像５４が抽出されると、画像メモリ１７Ａには、抽出された合成対象画像５４が記録される。
撮影部１１は、画像メモリ１７Ａに合成対象画像５４が保持された状態で、選択画像５６のライブビュー撮影を開始する。画像メモリ１７Ａには、選択画像５６がスルー画像として記録される。タッチパネルディスプレイ１２においては、選択画像５６のライブビュー表示が開始される。選択画像５６は、撮影部１１が撮影するスルー画像であり、合成対象画像５４が合成される合成先の画像である。
合成部３２Ｂは、選択画像５６と合成対象画像５４とを合成した合成画像を生成する。合成対象画像５４が合成された選択画像５６は、合成画像としてＶＲＡＭ１７Ｂに記録される。表示制御部３１は、合成対象画像５４が合成された選択画像５６を合成画像としてライブビュー表示を開始する。
また、主制御部２６は、タッチパネルディスプレイ１２を通じて入力された操作指示に基づいて、タッチパネルディスプレイ１２内における合成対象画像５４の表示位置、表示姿勢、表示サイズ、及び表示色の少なくとも１つの指示を受け付ける。主制御部２６が受け付けた操作指示は、合成部３２Ｂに入力される。合成部３２Ｂは、入力された操作指示に基づいて、選択画像５６内における合成対象画像５４の表示位置等を変更する。
また、通常の撮影の場合と同様に、合成対象画像５４が合成された選択画像５６のライブビュー表示中に、ユーザＵによってシャッタボタンが操作されると、画像保存指示が入力される。画像保存指示が入力されると、そのタイミングで、合成対象画像５４が合成された選択画像５６が、保存用の合成画像として、ストレージデバイス１８のユーザ領域２８またはメモリーカード２９のうちの予め設定された保存先に保存される。一例として、本実施形態では、画像処理部３２が合成画像に対して圧縮処理を施して、圧縮された合成画像を、予め設定された保存先に記録する。
上記構成による作用について上記図１及び図４と、図６～図１５とを参照して説明する。
上述したように図１は、ユーザＵが携帯端末１０を使用して撮影を行うシーンを示す。図１に示すシーンは、ユーザＵが友人Ｔと共に出かけた「パンダ」がいる動物園であり、友人Ｔが着ているシャツ８０には、「ＪＡＰＡＮＤＡ」の文字８２が印刷されている。本例では、この場所において、「パンダ」と「ＪＡＰＡＮＤＡ」との語感の類似性に基づいて、ユーザＵが、「パンダ」と、「ＪＡＰＡＮＤＡ」のうちの「ＰＡＮＤＡ」の文字８２という２つの被写体を組み合わせた合成写真の撮影を思い付き、その撮影を、携帯端末１０を使用して行う例で説明する。
図６に示すように、携帯端末１０において、写真合成アプリケーションプログラムが起動されると、携帯端末１０は、合成撮影モードに移行し、合成撮影処理を実行する。合成撮影処理が開始されると、まず、ステップＳ１００で表示制御部３１は、タッチパネルディスプレイ１２に表示画像５０をライブビュー表示させる。具体的には、撮影部１１において表示画像５０のライブビュー撮影が開始されて、タッチパネルディスプレイ１２において表示画像５０のライブビュー表示が開始される。
次のステップＳ１０２で表示制御部３１は、上記図４に示したように、インジケータ付特定枠６０及び色指定用マーク６２を、ライブビュー表示されている表示画像５０に重畳させてタッチパネルディスプレイ１２に表示させる。
インジケータ付特定枠６０及び色指定用マーク６２が表示されると、ユーザＵは、特定枠６０Ｂ内に、抽出したい文字８２が収まる状態に調整する。また、本実施形態の携帯端末１０では、抽出したい文字８２の色を基準色とする。そのため、ユーザＵは、色指定用マーク６２の位置を、抽出したい文字８２の色の画像の上に重なる位置に調整する。例えば、ユーザＵは、抽出したい文字８２の上に、色指定用マーク６２を重ねた状態に調整する。これらの調整を行う方法としては、ユーザＵが携帯端末１０を動かすことにより撮影範囲、すなわち表示画像５０そのものに写る被写体を調整する方法が挙げられる。また、これらの調整を行う方法としては、特定枠６０Ｂ（特定領域５２）の移動による調整方法、及び特定枠６０Ｂ（特定領域５２）の拡大または縮小することによる調整方法が挙げられる。
そこで次のステップＳ１０４で主制御部２６は、上述したように、特定枠６０Ｂの移動の操作指示を受け付けたか否かを判定する。一例として、本実施形態では、ユーザＵによる特定枠６０Ｂの移動の操作指示は、タッチパネルディスプレイ１２に表示された特定枠６０ＢをユーザＵが１本の指でタッチした状態で、移動したい方向に向けて指をスライドさせるジェスチャを行うことにより行われる。こうしたジェスチャはスワイプ等と呼ばれる。
主制御部２６が、このような特定枠６０Ｂの移動の操作指示を受け付けていない場合、ステップＳ１０４の判定が否定判定となり、ステップＳ１０８へ移行する。一方、主制御部２６が、特定枠６０Ｂの移動の操作指示を受け付けた場合、ステップＳ１０４の判定が肯定判定となり、ステップＳ１０６へ移行する。
ステップＳ１０６で表示制御部３１は、上記特定枠６０Ｂの移動の操作指示に応じた位置に、特定枠６０Ｂを移動させる。具体的には、主制御部２６から、操作指示の情報として、移動後の特定枠６０Ｂを表す座標情報が表示制御部３１に出力される。表示制御部３１は、主制御部２６から入力された座標情報に応じた位置に、特定枠６０Ｂを表示させる。
図７には、移動された特定枠６０Ｂの表示の一例を示す。図７に示した例では、図４に示した例に比べて、特定枠６０Ｂの位置、より具体的には、表示画像５０に対する特定枠６０Ｂの位置が、下方（操作スイッチ１６に近い方）に移動された状態の一例を示している。
次のステップＳ１０８で主制御部２６は、上述したように、特定枠６０Ｂの拡大または縮小の操作指示を受け付けたか否かを判定する。一例として、本実施形態では、ユーザＵによる操作指示は、タッチパネルディスプレイ１２に表示された拡縮指示マーク６０ＣをユーザＵが１本の指でタッチした状態で、拡大または縮小したい大きさに応じた方向に指をスライドさせるジェスチャを行うことにより行われる。なお、特定枠６０Ｂの拡大または縮小の操作指示方法は、本実施形態に限定されず、例えば、タッチパネルディスプレイ１２に表示された特定枠６０Ｂ、または特定領域５２に対して、ピンチアウトまたはピンチインといったジェスチャをユーザＵが行うことで操作指示を行う方法でもよい。ピンチアウトは、タッチパネルディスプレイ１２において、２本の指で表示画面をタッチした状態で、２本の指の間隔を拡げるジェスチャである。２本の指で特定枠６０Ｂまたは特定領域５２の上下または左右をタッチした状態で、ピンチアウトが行われると、特定枠６０Ｂが拡大され、特定領域５２の面積が拡大される。ピンチアウトとは反対に、ピンチインは、２本の指の間隔を狭めるジェスチャである。ピンチインが行われると、特定枠６０Ｂが縮小され、特定領域５２の面積が縮小される。
主制御部２６が、このような特定枠６０Ｂの拡大または縮小の操作指示を受け付けていない場合、ステップＳ１０８の判定が否定判定となり、ステップＳ１１２へ移行する。一方、主制御部２６が、特定枠６０Ｂの拡大または縮小の操作指示を受け付けた場合、ステップＳ１０８の判定が肯定判定となり、ステップＳ１１０へ移行する。
ステップＳ１１０で表示制御部３１は、上記特定枠６０Ｂの拡大または縮小の操作指示に応じた大きさに、特定枠６０Ｂの大きさを変更する。特定枠６０Ｂの大きさを変更することにより、特定領域５２の大きさも変更する。具体的には、主制御部２６から、操作指示の情報として、拡大または縮小後の特定枠６０Ｂを表す座標情報が表示制御部３１に出力される。表示制御部３１は、主制御部２６から入力された座標情報に応じた大きさ（位置）に、特定枠６０Ｂを表示させる。
図８には、大きさが変更された特定枠６０Ｂの表示の一例を示す。図８に示した例では、図７に示した例に比べて、特定枠６０Ｂの大きさが、縮小された状態を示している。
本実施形態のユーザＵは、「ＪＡＰＡＮＤＡ」という文字８２のうち、「ＰＡＮＤＡ」の文字８２のみを抽出したい。そのため、ユーザＵは、図７に示すように、「ＪＡＰＡＮＤＡ」の文字８２のうち、「ＰＡＮＤＡ」の文字８２のみが特定枠６０Ｂ内に収まり、一方、「ＪＡ」の文字８２が特定枠６０Ｂ外となる状態に特定枠６０Ｂを上述したように調整する。また、ユーザＵは、色指定用マーク６２により指定される基準色が文字８２の色となる状態に、本例では文字８２の上に色指定用マーク６２が重なる状態に、インジケータ６０Ａの色を参照して特定枠６０Ｂを上述したように調整する。上述した図４に示した例では、色指定用マーク６２により指定される基準色が、インジケータ６０Ａに示されるように、文字８２の色と異なっているため、好ましくない。また、上述した図８に示した例では、特定枠６０Ｂ内に含まれる文字８２が「ＮＤＡ」の文字８２のみであるため、「ＰＡ」の文字８２が抽出されないことになり好ましくない。一方、図７に示した例では、特定枠６０Ｂ内に「ＰＡＮＤＡ」の文字８２が含まれ、「ＪＡ」の文字８２は含まれておらず、また、色指定用マーク６２が文字８２の上に重なっており、インジケータ６０Ａに示されるように、文字８２の色が色指定用マーク６２により指定された状態となっているため、好ましい。従って、ユーザＵは、図７に示した状態に表示画像５０とインジケータ付特定枠６０との関係を調整する。
このように、特定枠６０Ｂの位置及び大きさ、色指定用マーク６２の位置等の調整が完了すると、本実施形態では、タッチパネルディスプレイ１２にＧＵＩとして表示されたシャッタボタン７０を指でタップする操作を行うことにより、ユーザＵによる合成対象画像５４の抽出指示が行われる。
そこで、次のステップＳ１１２で主制御部２６は、上述した合成対象画像５４の抽出指示を受け付けたか否かを判定する。主制御部２６が、合成対象画像５４の抽出指示を受け付けていない場合、ステップＳ１１２の判定が否定判定となり、ステップＳ１０４に戻り、上記ステップＳ１０４～Ｓ１１０の処理を繰り返す。一方、主制御部２６が、合成対象画像５４の抽出指示を受け付けた場合、ステップＳ１１２の判定が肯定判定となり、ステップＳ１１４へ移行する。
ステップＳ１１４において、図９に一例を示した合成対象画像抽出処理により、表示画像５０の特定領域５２から合成対象画像５４を抽出する。
図９に示すステップＳ１５０で抽出部３２Ａは、表示画像５０から特定領域５２を特定する。具体的には、上述したように、シャッタボタン７０がユーザＵにより操作され抽出指示が行われると、主制御部２６は、特定枠６０Ｂの位置に応じた座標情報を、抽出部３２Ａに出力する。抽出部３２Ａは、主制御部２６から入力された座標情報に基づいて、表示画像５０から特定領域５２を特定する。
次のステップＳ１５２で抽出部３２Ａは、特定領域５２全体をグレースケール化する。具体的には、抽出部３２Ａは、特定領域５２に含まれる全ての画素について、その色を一旦、０～２５５の、２５６段階の画素値で表される白から黒までのグレースケールの画素値に階調変換する。
各画素の色をグレースケールに階調変換する方法は、特に限定されず、既存の技術を適用することができる。例えば、特定領域５２がＲＧＢ画像である場合、各画素におけるＲｅｄ（Ｒ：赤）の画素値、Ｇｒｅｅｎ（Ｇ：緑）の画素値、及びＢｌｕｅ（Ｂ：青）の画素値から下記（１）式により、グレースケール化した画素値Ｇｒａｙが得られる。
Ｇｒａｙ＝Ｒｅｄ×０．３＋Ｇｒｅｅｎ×０．５９＋Ｂｌｕｅ×０．１１ ・・・（１）
図１０には、特定領域５２の画像をグレースケール化した例が示されている。なお、図１０に示した特定領域５２は、上記図７に示した状態においてインジケータ付特定枠６０により特定される特定領域５２に対応している。図１０に示した特定領域５２には、友人Ｔ、背景Ｂ、シャツ８０、及び文字８２が被写体として写っており、各々の画像が含まれている。
次のステップＳ１５４で抽出部３２Ａは、基準色が白色であるか否かを判定する。一例として、本実施形態では、上記ステップＳ１５２でグレースケール化した画素値が０～１２７の画素を黒色の画素、画素値が１２８～２５５の画素を白色の画素とみなしている。すなわち、本実施形態では、グレースケール化した特定領域５２の画素の色を、白色または黒色のいずれかに２値化している。
抽出部３２Ａは、基準色とされる画素の画素値、具体的には色指定用マーク６２で囲まれる表示画像５０の画素の画素値が、１２８～２５５のいずれかである場合、基準色が白色であると判定する。基準色が白色である場合、ステップＳ１５４の判定が肯定判定となり、ステップＳ１５６へ移行する。この場合の本実施形態における画素値が１２８～２５５の範囲が、本開示の基準色が該当する階調の数値を含む基準色範囲の一例である。
ステップＳ１５６で抽出部３２Ａは、特定領域５２内の白色の画素、すなわち、画素値が１２８～２５５色の画素の領域を合成対象画像５４として抽出する。
一方、抽出部３２Ａは、基準色とされる画素の画素値、具体的には色指定用マーク６２で囲まれる表示画像５０の画素の画素値が、０～１２７のいずれかである場合、基準色が黒色であると判定する。基準色が黒色である場合、ステップＳ１５４の判定が否定判定となり、ステップＳ１５８へ移行する。この場合の本実施形態における画素値が０～１２７の範囲が、本開示の基準色が該当する階調の数値を含む基準色範囲の一例である。
ステップＳ１５８で抽出部３２Ａは、特定領域５２内の黒色の画素、すなわち、画素値が０～１２７色の画素の領域を合成対象画像５４として抽出する。
図１０に示した例では、特定領域５２の画像をグレースケール化された「Ｐ」の文字８２Ａ、「Ａ」の文字８２Ｂ、「Ｎ」の文字８２Ｃ、「Ｄ」の文字８２Ｄ、及び「Ａ」の文字８２Ｅの各々の画素の画素値は、０～１２７の範囲内である。そのため、文字８２は、黒色の画素と判定される。一方、友人Ｔ、背景Ｂ、及びシャツ８０の各々の画素の画素値は、１２８～２５５の範囲内であり、白色の画素と判定される。
従って、本実施形態の例では図１０に示すように、抽出部３２Ａにより基準色が黒色であると判定され、特定領域５２から「Ｐ」の文字８２Ａ、「Ａ」の文字８２Ｂ、「Ｎ」の文字８２Ｃ、「Ｄ」の文字８２Ｄ、及び「Ａ」の文字８２Ｅの各々の画像が合成対象画像５４として抽出される。抽出部３２Ａは、「Ｐ」の文字８２Ａ、「Ａ」の文字８２Ｂ、「Ｎ」の文字８２Ｃ、「Ｄ」の文字８２Ｄ、及び「Ａ」の文字８２Ｅを１つの合成対象画像５４として取り扱う。
上記ステップＳ１５６の処理、またはステップＳ１５８の処理が終了すると合成対象画像抽出処理が終了する。合成対象画像抽出処理が終了することにより合成撮影処理のステップＳ１１４が終了してステップＳ１１６へ移行する。
合成対象画像５４が抽出されると、ステップＳ１１６で撮影部１１は、選択画像５６のライブビュー撮影を直ちに開始する。
選択画像５６のライブビュー撮影が開始されると、次のステップＳ１１８で合成部３２Ｂは、抽出された合成対象画像５４を選択画像５６に合成する。なお、本実施形態では、特定領域５２における合成対象画像５４以外の画像は、透明な画像として扱われる。
次のステップＳ１２０で表示制御部３１は、タッチパネルディスプレイ１２において、合成対象画像５４が合成された選択画像５６をライブビュー表示する。
図１１は、合成対象画像５４である文字８２が合成された選択画像５６がライブビュー表示されている様子を示す。図１１に示すように、表示制御部３１は、合成対象画像５４が合成された選択画像５６をライブビュー表示する場合には、初期状態では、合成対象画像５４である文字８２を、選択画像５６の中央、すなわちタッチパネルディスプレイ１２の表示画面の中央に表示する。さらに、図１１に示すように表示制御部３１は、例えば、タッチパネルディスプレイ１２の表示画面の下方位置に、シャッタボタン７０及びカラーパレット７２をＧＵＩとして表示する。カラーパレット７２は、後述するように、合成対象画像５４の色を変更するために使用される操作ボタンである。シャッタボタン７０は、画像保存指示を入力するための操作ボタンであり、合成対象画像５４が合成された選択画像５６を、合成画像として保存するための操作ボタンである。
ユーザＵは、このように合成対象画像５４が合成された選択画像５６のライブビュー表示を見ながら、選択画像５６の構図、及び選択画像５６における被写体の画像と合成対象画像５４との相対的な位置関係を決める。
具体的には、図１１に示すように、ユーザＵは、「ＰＡＮＤＡ」の文字８２と「パンダ」とを組み合わせた合成写真の撮影をしようと考えている。そのため、ユーザＵは、選択画像５６の被写体として「パンダ」が写り込むように、携帯端末１０の位置及び向きを調節する。そして、選択画像５６内の「パンダ」の位置、サイズ、及び画角等を調節する。こうした操作により、ユーザＵは、選択画像５６の構図を決める。
こうした選択画像５６の構図の決定と並行して、ユーザＵは、選択画像５６の被写体である「パンダ」と合成対象画像５４である文字８２との相対的な位置関係を決める。それに際して、合成対象画像５４である文字８２の表示位置、表示姿勢、表示サイズ又は表示色等の編集を行う。
ステップＳ１２２において、主制御部２６は、選択画像５６内の合成対象画像５４の編集を行うか否かを判定する。ユーザＵのタッチパネルディスプレイ１２に対する操作による編集指示が、ステップＳ１２２に移行してから予め定められた時間内に入力されない場合、ステップＳ１２２の判定が否定判定となり、ステップＳ１２６へ移行する。一方、ユーザＵのタッチパネルディスプレイ１２に対する操作による編集指示が、ステップＳ１２２に移行してから予め定められた時間内に入力された場合、ステップＳ１２２の判定が肯定判定となり、ステップＳ１２４へ移行する。
ステップＳ１２４で画像処理部３２は、編集指示の内容に従って選択画像５６内で合成対象画像５４を編集する。図１２～図１５は、編集指示に応じた合成対象画像５４の例示である。
図１２には、合成対象画像５４である文字８２の表示位置を移動させた場合の一例が示されている。図１２に示した例では、画像処理部３２が、文字８２の表示位置を、下方（操作スイッチ１６に近い方）に移動させた状態の一例を示している。表示位置を移動させる編集指示をユーザＵが行う場合には、タッチパネルディスプレイ１２において、１本の指で文字８２をタッチした状態で、移動したい方向に向けて指をスライドさせるジェスチャを行う。
また、図１３には、合成対象画像５４である文字８２の表示サイズを拡大した場合の一例が示されている。表示サイズを拡縮する編集指示をユーザＵが行う場合には、例えば、ピンチアウトまたはピンチインといったジェスチャで行われる。２本の指で文字８２の上下または左右をタッチした状態で、ピンチアウトが行われると、文字８２の表示サイズが拡大される。一方、ピンチインが行われると、文字８２の表示サイズが縮小される。
また、図１４には、合成対象画像５４である文字８２の表示姿勢を回転させた場合の一例が示されている。表示姿勢を回転する編集指示をユーザＵが行う場合には、タッチパネルディスプレイ１２において、文字８２の上下、または左右を２本の指でタッチした状態で、２本の指の間隔を維持したまま、２本の指を回転させるジェスチャを行う。
また、図１５には、合成対象画像５４である文字８２の色を変化させる場合の一例が示されている。図１５等に示すように、カラーパレット７２には、複数の色が配列されている。文字８２の色を変化させる編集指示をユーザＵが行う場合には、例えば、カラーパレット７２に配列された複数の色の中から希望する色を指でタップするジェスチャで行われる。図１５に示した例では、カラーパレット７２に配列された白色７２ＷをユーザＵが指でタップする編集指示を行ったことにより、文字８２の色が白色に変化した状態を示している。
なお、本実施形態では、カラーパレット７２を用いて合成対象画像５４である文字８２の色の変更を行う形態について説明したが、合成対象画像５４の変更方法はカラーパレット７２を用いる方法に限定されない。例えば、選択画像５６に色変更ボタン（図示省略）を表示させ、ユーザＵが指でタップすると、白と黒、白と赤、白と黒と赤等というように、色変更ボタンをタップする回数に応じて、予め決められた複数色の間で変更される形態としてもよい。合成対象画像５４の色変更は、例えば、合成対象画像５４の色と選択画像５６の背景部分の色とが色彩上重なって合成対象画像５４が見え難くなるのを回避する目的で行われる。あるいは、ユーザＵの感性等に基づいて、背景の色に合わせて合成対象画像５４の色を変化させることを目的として色変更が行われてもよい。
主制御部２６は、合成対象画像５４に対するこうしたジェスチャを、編集指示として受け付ける。主制御部２６は、受け付けた編集指示の情報を合成部３２Ｂに出力する。合成部３２Ｂは、主制御部２６から入力された編集指示の情報に基づいて、選択画像５６内の合成対象画像５４を編集する。
合成対象画像５４の編集を終了すると、ユーザＵは、シャッタボタン７０を指でタップする。シャッタボタン７０がタップされると、主制御部２６は、タップ操作を合成画像の保存指示として受け付ける。
ステップＳ１２６で主制御部２６は、上記合成画像の保存指示を受け付けたか否かを判定する。主制御部２６が合成画像の保存指示を受け付けていない場合、ステップＳ１２６の判定が否定判定となり、ステップＳ１２２に戻り、ステップＳ１２２及びＳ１２４の処理を繰り返す。
一方、主制御部２６が合成画像の保存指示を受け付けた場合、ステップＳ１２６の判定が肯定判定となり、ステップＳ１２８へ移行する。
主制御部２６は、受け付けた合成画像の保存指示の情報を合成部３２Ｂに出力する。画像処理部３２は、主制御部２６から合成画像の保存指示の情報が入力されると、シャッタボタン７０がタップ操作されたタイミングで撮影された選択画像５６を確定し、確定した選択画像５６内における合成対象画像５４の表示位置等を確定する。合成部３２Ｂは、確定した選択画像５６に表示位置等が確定した合成対象画像５４を合成し、保存用の合成画像として、画像メモリ１７Ａに出力する。
次のステップＳ１２８で画像処理部３２は、合成画像を保存する。具体的には、画像処理部３２は、画像メモリ１７Ａに出力された保存用の合成画像に対して、圧縮処理を施し、圧縮処理済みの合成画像を、ストレージデバイス１８のユーザ領域２８またはメモリーカード２９に記録して、合成画像を保存する。
次のステップＳ１３０で主制御部２６は、合成撮影モードを終了するか否かを判定する。本実施形態では、ユーザＵによる操作スイッチ１６等の操作により行われた、合成撮影モードの終了の操作指示を主制御部２６が受け付けた場合、合成撮影モードを終了する。そのため、主制御部２６が合成撮影モードの終了の操作指示を受け付けていない場合、ステップＳ１３０の判定が否定判定となり、ステップＳ１００に戻り、ステップＳ１００～Ｓ１２８の処理を繰り返す。一方、主制御部２６が合成撮影モードの終了の操作指示を受け付けた場合、ステップＳ１３０の判定が肯定判定となり、合成撮影モードを終了する。
図１６には、本実施形態の携帯端末１０における合成撮影処理をまとめた図が示されている。図１６に示すように、携帯端末１０は、表示制御部３１、抽出部３２Ａ、及び合成部３２Ｂを備える。表示制御部３１は、タッチパネルディスプレイ１２に表示されている表示画像５０における一部の領域である特定領域５２を特定する特定枠６０Ｂと、特定枠６０Ｂ内の特定領域５２の画像に含まれる色の中から基準色を指定するための色指定用マーク６２とを、表示画像５０に重畳させて表示させる。抽出部３２Ａは、特定枠６０Ｂの特定領域５２の画像から、色指定用マーク６２によって指定される基準色に応じた画像を合成対象画像５４として抽出する。合成部３２Ｂは、ユーザＵにより選択された選択画像５６に対して合成対象画像５４を合成した合成画像を生成する。
すなわち、本実施形態の携帯端末１０では、特定領域５２から抽出したい画像、すなわち、合成対象画像５４としたい画像の色を、特定枠６０Ｂ内の色指定用マーク６２によって基準色として指定することで、ユーザＵの所望の合成画像を生成することができる。
本実施形態の携帯端末１０によれば、ユーザＵは、合成対象画像５４とすべき画像を指定する場合、色指定用マーク６２を合成対象画像５４としたい画像の色に重畳させればよいため、表示画像５０に含まれる複数の画像から合成対象画像５４とする画像をユーザＵが直接、指定する必要がない。例えば、ユーザＵが合成対象画像５４とする画像の領域を１本の指でタッチしたり、１本の指をスライドさせて領域全体を囲う等のジェスチャを行ったりする必要が無い。そのため、本実施形態の携帯端末１０によれば、タッチパネルディスプレイ１２上を操作しなくても合成対象画像５４とすべき画像の指定ができるため、例えば、携帯端末１０を持つ片方の手だけであっても合成対象画像５４とすべき画像の指定ができる。これにより、本実施形態の携帯端末１０によれば、操作性がより向上し、様々なシーンに応じた合成撮影を可能とすることができる。
また、本実施形態の携帯端末１０によれば、合成対象画像５４が複雑な形状であっても、簡易な操作で特定領域５２から合成対象画像５４を適切に抽出することができる。
従って、本実施形態の携帯端末１０によれば、合成画像の作成を簡便にし、かつ合成にかかるユーザＵの操作性が向上される。
また、本実施形態の携帯端末１０では、特定枠６０Ｂと色指定用マーク６２との相対的な位置関係が、予め定められている。そのため、本実施形態の携帯端末１０では、特定枠６０Ｂの位置と色指定用マーク６２の位置との両方をユーザＵが指定せずともよいため、ユーザＵの操作性がより向上される。
また、本実施形態の携帯端末１０では、特定枠６０Ｂの拡大及び縮小が可能である。また、本実施形態の携帯端末１０では、特定枠６０Ｂの移動が可能である。例えば、撮影位置が制限される等により、表示画像５０に対する合成対象画像５４の位置が、どうしても偏った位置になってしまう場合がある。また、例えば、合成対象画像５４に含めたくない画像が表示画像５０中に散在する場合がある。このような場合であっても、本実施形態の携帯端末１０では、特定枠６０Ｂの拡大及び縮小が可能であるため、表示画像５０において、ユーザＵが合成対象画像５４としたい所望の画像を、適切に特定枠６０Ｂの範囲内、すなわち、特定領域５２に含めることができる。また同様に、本実施形態の携帯端末１０では、特定枠６０Ｂの移動が可能であるため、表示画像５０において、ユーザＵが合成対象画像５４としたい所望の画像を、適切に特定枠６０Ｂの範囲内、すなわち、特定領域５２に含めることができる。
また、本実施形態の携帯端末１０では、色指定用マーク６２により囲まれた表示画像５０の色を基準色とする。本実施形態の携帯端末１０では、色指定用マーク６２内部に、基準色の画像が表示されるため、ユーザＵは、指定されている基準色の確認を行うことができる。
また、本実施形態の携帯端末１０では、色指定用マーク６２よりも大きな面積を有するインジケータ６０Ａに、基準色が表示される。ユーザＵは、インジケータ６０Ａにより、色指定用マーク６２により指定される基準色を確認することができるため、例えば、色指定用マーク６２が小さい場合であっても、基準色の確認を容易に行うことができる。
また、本実施形態の携帯端末１０では、特定枠６０Ｂの特定領域５２全体の階調を数値化し、階調の数値が、基準色が該当する階調の数値を含む基準色範囲内である画像を、合成対象画像５４として抽出する。本実施形態の携帯端末１０では、階調を数値化した数値に基づいて、特定領域５２から合成対象画像５４を抽出することができるため、携帯端末１０において合成対象画像５４の抽出が容易にでき、携帯端末１０における処理負荷を軽減することができる。
［変形例１］
上記形態では、抽出部３２Ａが、特定領域５２から合成対象画像５４を抽出する場合の基準色範囲が予め定められている形態について説明した。これに対して、本変形例では、基準色範囲を、ユーザＵが設定する形態について説明する。
図１７には、上記合成撮影処理のステップＳ１２０において表示制御部３１が、タッチパネルディスプレイ１２において、合成対象画像５４が合成された選択画像５６をライブビュー表示した状態の一例を示す。なお、図１７に示した例では、合成対象画像５４（文字８２）を見易くするため、選択画像５６と、合成対象画像５４との間に、半透明な背景画像が表示制御部３１により１枚挟まれている。
特定領域５２において、文字８２と、友人Ｔ、背景Ｂ、シャツ８０、及び文字８２各々の画像（図１０参照）とのコントラストの差が比較的小さい場合、抽出部３２Ａが文字８２のみを抽出できず、図１７に示したようにならない場合がある。例えば、グレースケール化した背景Ｂの画素の画素値が０～１２７のうちのいずれかの値である場合、抽出部３２Ａは、背景Ｂの画素の色も基準色と同じ黒色であると判定してしまう。この場合、抽出部３２Ａは、文字８２と背景Ｂとを合成対象画像５４として抽出する。そのため、図１８に示したように、表示制御部３１は、文字８２と背景Ｂとを合成対象画像５４として合成された選択画像５６をタッチパネルディスプレイ１２に表示させる。
このような場合、本変形例では、ユーザＵが、基準色範囲の境界となる閾値、換言すると基準色が白色か黒色かを判定する閾値を設定することにより、基準色範囲を設定することで、背景Ｂを合成対象画像５４から排除することができる。本変形例では、図１８に示すように表示制御部３１は、例えば、タッチパネルディスプレイ１２の表示画面の下方位置に、基準範囲の境界となる閾値を設定するための設定ボタン７３を、ＧＵＩとして表示する。設定ボタン７３をユーザＵが１本の指でタップする操作指示を行うことにより、図１９に示すように、表示制御部３１は、ＧＵＩとして閾値設定ツール７４を表示させる。閾値設定ツール７４は、画素値が０～２５５までの色を表すスライダバー７４Ａ、及びスライダ７４Ｂを含む。
ユーザＵは１本の指でスライダ７４Ｂをタッチした状態で、スライダバー７４Ａに沿って指をスライドさせるジェスチャを行い、スライダ７４Ｂの位置を変更する。スライダ７４Ｂの位置が変更されると、抽出部３２Ａは、変更した位置に対応するスライダバー７４Ａが示す色、具体的にはスライダ７４Ｂによって指定されるスライダバー７４Ａの画素の画素値に、基準色範囲となる閾値を変更する。図１９に示した例では、スライダ７４Ｂの位置が右側に移動するほど、基準色範囲の境界となる閾値が大きくなり、白色に近付く。一方、スライダ７４Ｂの位置が左側に移動するほど、閾値が小さくなり、黒色に近付く。
合成対象画像５４から背景Ｂを排除する場合、図２０に示すように、ユーザＵは、背景Ｂの色と、文字８２の色との間にスライダ７４Ｂを移動させる。このように、ユーザＵがスライダ７４Ｂを移動させることにより、基準色範囲の境界となる閾値が、背景Ｂの画素の画素値と、文字８２の画素の画素値との間の値となる。この状態において、携帯端末１０が、上述した合成対象画像抽出処理（図９参照）を再び行うことにより、図２０に示すように、合成対象画像５４に文字８２のみが含まれる状態とすることができる。
このように、本変形例では、基準色範囲の境界となる閾値、換言すると、合成対象画像５４とその他の画像とのコントラストの境界となる閾値を、ユーザＵにより設定することができる。
従って、本変形例の携帯端末１０によれば、簡便な操作で、ユーザＵが所望の画像のみを特定領域５２から合成対象画像５４として抽出することができる。また、ユーザＵは、スライダバー７４Ａの色を見ながら、基準色範囲の境界となる閾値を設定することができるので、より直感的に閾値の設定を行うことができる。
なお、閾値設定ツール７４は、スライダバー７４Ａ及びスライダ７４Ｂを含む形態に限定されない。例えば、閾値設定ツール７４は、色空間、及び色空間の座標を指定するポインタを含む形態であってもよい。この場合、ユーザＵによってポインタにより指定された色空間の座標に対応する画素値が基準色範囲の閾値となる。
また、上記実施形態例、及び本変形例では、グレースケール化した画素を、２値化し、その一方を基準色範囲とした形態について説明したが、基準色範囲は本形態に限定されない。例えば、３値化以上とし、基準色の画素値が含まれる範囲を基準色範囲とする形態であってもよい。また例えば、基準色の画素の画素値から予め定められた範囲、具体例では基準色の画素値±２０の範囲を、基準色範囲とする形態であってもよい。
［変形例２］
上記各形態では、色指定用マーク６２により、合成したい文字８２の色を基準色として指定する形態について説明したが、文字８２の色を基準色とする指定が適切に行えず、合成対象画像５４が適切に抽出できない場合がある。このような場合に対し、本変形例では、文字８２の色を基準色として指定する方法の変形例について説明する。
例えば、図２１に示すように、文字８２が細い等、色指定用マーク６２に比して小さい場合、色指定用マーク６２に囲まれる表示画像５０における、文字８２の割合が、その他の画像（図２１の例では、シャツ８０）よりも小さくなる。色指定用マーク６２に囲まれる表示画像５０において複数の画像が含まれる場合、含まれる割合が高い画像の色を基準色とすると、シャツ８０の画素の色が基準色となる。上述したように抽出部３２Ａは、シャツ８０の画素の色を白色と判定するため、基準色が白色となる。そのため、抽出部３２Ａは、合成対象画像５４として、図２２に示すように、白色と判定される、友人Ｔ、背景Ｂ、及びシャツ８０の各々を抽出してしまう。
このような場合、本変形例では、ユーザＵが、基準色を反転することにより、抽出したい画像の色、本変形例では、文字８２の色を基準色とすることができる。本変形例では、図２１に示すように表示制御部３１は、基準色を反転するための反転ボタン７６を、例えば、タッチパネルディスプレイ１２の表示画面の下方位置にＧＵＩとして表示する。反転ボタン７６をユーザＵが１本の指でタップすることで反転指示を行うと、主制御部２６が、反転指示を受け付け、反転指示の情報を抽出部３２Ａに出力する。抽出部３２Ａは、主制御部２６から反転指示の情報が入力されると、上記合成対象画像抽出処理（図９参照）のステップＳ１５４で判定した基準色の色を反転させ、反転後の基準色に基づいて、合成対象画像５４の抽出を行う。
抽出部３２Ａは、反転後の基準色に基づいて合成対象画像５４の抽出を行う。本変形例では、黒色が基準色となり、文字８２の色を基準色として抽出部３２Ａにより合成対象画像５４の抽出が行われる。そのため、図２２に示すように、抽出部３２Ａは、文字８２を合成対象画像５４として抽出することができる。
従って、本変形例の携帯端末１０によれば、簡便な操作で、適切に合成対象画像５４を特定領域５２から抽出することができる。
なお、抽出部３２Ａが基準色を反転させるタイミングは限定されない。例えば、文字８２が細く、うまく色指定用マーク６２を文字８２の上に合わせられないとユーザＵが感じた場合、またはインジケータ６０Ａに表示された色を見て、文字８２の色と異なるとユーザＵが感じた場合、合成対象画像５４の抽出指示を行う前に、反転指示を行う形態としてもよい。また、合成対象画像５４が合成された選択画像５６がライブビュー表示された後に、合成対象画像５４が所望の画像となっていないことに気付いたユーザＵが、反転指示を行う形態としてもよい。
また、本変形例では、合成対象画像５４が適切に抽出できない場合に、基準色を反転させることにより、合成対象画像５４を適切に抽出する形態について説明したが、合成対象画像５４を適切に抽出するための方法は、本変形例に限定されない。例えば、合成対象画像５４として抽出した画像と、抽出しなかった画像との関係を反転させる形態としてもよい。本変形例の場合では、上述したように白色を基準色とすると、抽出部３２Ａは、友人Ｔ、背景Ｂ、及びシャツ８０の各々を抽出し、文字８２は抽出しない。抽出部３２Ａは、抽出するか否かの関係を反転（変更）させることにより、文字８２を抽出し、友人Ｔ、背景Ｂ、及びシャツ８０の各々を抽出しないこととすることができる。
［変形例３］
本変形例では、インジケータ付特定枠６０の特定枠６０Ｂの変形例について説明する。特定枠６０Ｂの「枠」とは、特定領域５２の範囲を明確に提示できるものであればよい。
例えば、図２３Ａ～図２３Ｃに示すように、特定枠６０Ｂは、特定領域５２を囲む線の一部が途切れていてもよい。図２３Ａ及び図２３Ｂに示した特定枠６０Ｂは、いわゆる括弧の形状を有している。図２３Ａ及び図２３Ｂに示した形態であっても、特定領域５２の範囲が、図中に斜線によるハッチングを施した範囲であることが特定枠６０Ｂにより明確に提示される。また、図２３Ｃの特定枠６０Ｂは、いわゆるカギ括弧の形状を有している。図２３Ｃに示した形態であっても、特定領域５２の範囲が、図中に斜線によるハッチングを施した範囲であることが特定枠６０Ｂにより明確に提示される。
また例えば、図２３Ｄに示すように、特定枠６０Ｂが、枠取りの位置を示すマーク形状であってもよい。図２３Ｄに示した形態であっても、特定領域５２の範囲が、図中に斜線によるハッチングを施した範囲であることが特定枠６０Ｂにより明確に提示される。
また、特定枠６０Ｂは、矩形状に限定されず、その他の形状であってもよい。例えば、図２３Ｅ及び図２３Ｆに示すように、特定枠６０Ｂが円形状の枠であってもよい。
［変形例４］
本変形例では、インジケータ付特定枠６０のインジケータ６０Ａの変形例について説明する。
上記では、特定枠６０Ｂの枠上にインジケータ６０Ａが配置され、インジケータ６０Ａと特定枠６０Ｂとをインジケータ付特定枠６０として一体的に取り扱う形態について説明した。しかしながら、インジケータ６０Ａと特定枠６０Ｂとを、別体として取り扱ってもよい。
インジケータ６０Ａと特定枠６０Ｂとを別体として取り扱う場合、例えば、図２４Ａに示すように、表示画像５０において、特定枠６０Ｂの上方の位置にインジケータ６０Ａを表示させる等、表示制御部３１は、インジケータ６０Ａを特定枠６０Ｂから離れた位置に表示させてもよい。
また、インジケータ６０Ａの形状も特に限定されない。上記各形態では、インジケータ６０Ａの形状が円形状である場合について説明したが、例えば、図２４Ｂに示すように、インジケータ６０Ａの形状が矩形状であってもよい。また、インジケータ６０Ａの形状と、色指定用マーク６２の形状とを同一の形状としてもよいし、インジケータ６０Ａの形状と、特定枠６０Ｂの形状とを同一の形状としてもよい。
［変形例５］
本変形例では、色指定用マーク６２の変形例について説明する。上記では、色指定用マーク６２が、表示画像５０を囲む円環状の形状を有するマークである形態について説明した。しかしながら、色指定用マーク６２の形状は円環状に限定されない。
例えば、図２５Ａに示すように、色指定用マーク６２の形状が、円状であってもよく、いわゆるべた塗りの円形画像であってもよい。この場合、色指定用マーク６２が重畳している部分の表示画像５０の色が基準色として指定される。
また、例えば、図２５Ｂに示すように、色指定用マーク６２の形状は、矩形状であってもよい。また例えば、色指定用マーク６２の形状と、特定枠６０Ｂの形状とを同一の形状としてもよい。
［変形例６］
また、上記では、表示画像５０及び選択画像５６について、ライブビュー表示が可能なスルー画像である形態について説明したが、表示画像５０及び選択画像５６の少なくとも一方がスルー画像でなくてもよい。すなわち、表示画像５０及び選択画像５６の少なくとも一方が、過去に撮影されて、メモリーカード２９またはストレージデバイス１８のユーザ領域２８等に保存された撮影画像（以下、保存画像という）の中から読み出された画像でもよい。
まず、表示画像５０がスルー画像ではなく、保存画像である場合について説明する。図２６Ａには、表示画像５０が保存画像である場合の、合成撮影処理のフローチャートが示されている。図２６Ａに示した合成撮影処理は、上記図６に示した合成撮影処理のステップＳ１００に代えて、ステップＳ１０１Ａ～Ｓ１０１Ｃの処理を含む。
ステップＳ１０１Ａで表示制御部３１は、保存されている保存画像の一覧を作成してタッチパネルディスプレイ１２に表示する。保存画像の一覧は、例えば、保存画像のサムネイル画像等を並べて表示する形態が挙げられる。
ユーザＵは、保存画像の一覧を参照し、合成対象画像５４としたい画像が含まれている保存画像を選択するための操作指示を行う。一例として、本実施形態では、ユーザＵによる保存画像を選択するための操作指示は、タッチパネルディスプレイ１２に表示された保存画像のサムネイル画像等をユーザが１本の指でタッチすることにより行われる。主制御部２６は、保存画像を選択するための操作指示を受け付けると、本操作指示の情報を表示制御部３１に出力する。
次のステップＳ１０１Ｂで表示制御部３１は、ユーザにより保存画像が選択されたか否かを判定する。保存画像の選択するための操作指示の情報が主制御部２６から入力されるまで、ステップＳ１０１Ｂの判定が否定判定となる。一方、保存画像を選択するための操作指示の情報が主制御部２６から入力された場合、ステップＳ１０１Ｂの判定が肯定判定となり、ステップＳ１０１Ｃへ移行する。
ステップＳ１０１Ｃで表示制御部３１は、保存されている保存画像の中から、操作指示の情報に応じた１枚の保存画像を、表示画像５０としてタッチパネルディスプレイ１２に表示させる。
次のステップＳ１０２以降の処理は、上述の形態と同様である。なお、本例の場合は、主制御部２６の制御の下、メモリーカード２９またはユーザ領域２８から保存画像が表示画像５０として読み出される。読み出された表示画像５０は画像メモリ１７Ａに記録される。メモリーカード２９またはユーザ領域２８から読み出される表示画像５０は圧縮されている。画像処理部３２は、画像メモリ１７Ａから表示画像５０を読み出して、表示画像５０に対して伸長処理を施す。抽出部３２Ａは、伸長処理が施された表示画像５０から合成対象画像５４を抽出する。
次に、選択画像５６がスルー画像ではなく、保存画像である場合について説明する。図２６Ｂには、選択画像５６が保存画像である場合の、合成撮影処理のフローチャートが示されている。図２６Ｂに示した合成撮影処理は、上記図６に示した合成撮影処理のステップＳ１１６に代えて、ステップＳ１１７Ａ及びＳ１１７Ｂの処理を含む。
ステップＳ１１７Ａで表示制御部３１は、上記ステップＳ１０１Ａと同様に、保存されている保存画像の一覧を作成してタッチパネルディスプレイ１２に表示する。
ユーザＵは、保存画像の一覧を参照し、選択画像５６としたい保存画像を選択するための操作指示を、上述した保存画像の一覧から合成対象画像５４としたい保存画像を選択するための操作指示と同様に行う。主制御部２６は、保存画像を選択するための操作指示を受け付けると、本操作指示の情報を表示制御部３１に出力する。
次のステップＳ１１７Ｂで表示制御部３１は、上記ステップＳ１０１Ｂと同様に、ユーザにより保存画像が選択されたか否かを判定する。保存画像の選択するための操作指示の情報が主制御部２６から入力されるまで、ステップＳ１１７Ｂの判定が否定判定となる。一方、保存画像を選択するための操作指示の情報が主制御部２６から入力された場合、ステップＳ１１７Ｂの判定が肯定判定となり、ステップＳ１１８へ移行する。
次のステップＳ１１８以降の処理は、上述の形態と同様である。なお、本例の場合は、合成部３２Ｂ、主制御部２６の制御の下、メモリーカード２９またはユーザ領域２８に保存されている保存画像の中から、操作指示の情報に応じた１枚の保存画像を、選択画像５６として読み出す。読み出された選択画像５６は画像メモリ１７Ａに記録される。メモリーカード２９またはユーザ領域２８から読み出される選択画像５６は圧縮されている。画像処理部３２は、画像メモリ１７Ａから選択画像５６を読み出して、選択画像５６に対して伸長処理を施す。合成部３２Ｂは、伸長処理が施された選択画像５６に合成対象画像５４を合成する。
なお、表示画像５０及び選択画像５６がスルー画像ではなく、保存画像である場合については、上記図２６Ａに示した合成撮影処理と、図２６Ｂに示した合成撮影処理とを組み合わせればよい。
このように、過去の撮影画像を表示画像５０として利用できれば、例えば、ユーザＵが旅行先で見つけた被写体に基づいて、ユーザＵが、過去に撮影した撮影画像に写し込まれたマークまたは文字列を連想した場合に、その被写体と、被写体から連想したマークまたは文字列との合成写真を得るといった楽しみ方が可能となる。また例えば、逆に、ユーザＵが旅行先で見つけたマークまたは文字列の被写体に基づいて、ユーザＵが、過去に撮影した撮影画像を連想した場合に、現被写体であるマークまたは文字列と、被写体から連想した撮像画像の合成写真を得るといった楽しみ方が可能となる。
また、合成撮影を行ってメモリーカード２９またはユーザ領域２８に記録した合成画像を、表示画像５０及び選択画像５６の少なくとも一方として利用してもよい。こうすれば、複数回の合成が可能となるので、さらに楽しみ方が広がる。
また、表示画像５０及び選択画像５６の少なくとも一方としては、メモリーカード２９またはユーザ領域２８に保存されている保存画像だけでなく、インターネット等を介してサーバからダウンロードした画像を表示画像５０及び選択画像５６の少なくとも一方として利用できるようにしてもよい。サーバから画像をダウンロードする場合も、一旦はメモリーカード２９またはユーザ領域２８に記録されるため、その後の処理は、メモリーカード２９またユーザ領域２８から保存画像を表示画像５０及び選択画像５６の少なくとも一方として利用する場合と同様である。
以上説明したように、上記各形態の携帯端末１０では、特定領域５２から抽出したい画像、すなわち、合成対象画像５４としたい画像の色を、特定枠６０Ｂ内の色指定用マーク６２によって基準色として指定することで、ユーザＵの所望の合成画像を生成することができる。従って、上記各実施形態の携帯端末１０によれば、合成画像の作成を簡便にし、かつ合成にかかるユーザＵの操作性が向上される。
なお、本開示の技術は、上記各形態は、本発明の趣旨を逸脱しない範囲で種々の変形が可能である。例えば、表示画像５０からの合成対象画像５４の抽出において、合成対象画像５４が表示されている被写体が円筒形状等の湾曲した物体である場合がある。このような場合、抽出部３２Ａは、抽出した特定領域５２から抽出した合成対象画像５４に対し、曲面を平面化する平面化処理を施す形態としてもよい。このような平面化処理は、ユーザＵによる操作指示に基づいて行ってもよいし、被写体の形状を判定し自動的に抽出部３２Ａが行ってもよい。
また、上記各形態において、撮影装置の一例として、スマートフォン等の携帯端末１０を例に説明したが、スマートフォン以外でもよく、例えば、タブレット端末でもよいし、カメラ専用機である通常のデジタルカメラでもよい。
また、本開示の画像処理装置が組み込まれる装置は、携帯端末１０に限定されず、例えば、汎用のパーソナルコンピュータ等に組み込まれる形態であってもよく、また、撮影機能を有さない装置に組み込まれる形態であってもよい。なお、撮影機能を有さない装置に組み込まれる場合、ライブビュー表示機能を有さない装置であるため、表示画像５０及び選択画像５６の双方が、スルー画像ではない画像、すなわち、静止画像となる。
また、写真合成アプリケーションプログラムを一例として示した画像処理プログラムは、携帯端末１０の販売時に予めストレージデバイス１８にインストールされていてもよいし、ユーザが携帯端末１０を購入後、携帯端末１０を使用してサーバにアクセスして、サーバから作動プログラムをダウロードしてインストールしてもよい。
また、本開示の携帯端末１０が実行する合成撮影モードの処理はあくまでも一例である。従って、主旨を逸脱しない範囲内において不要なステップを削除したり、新たなステップを追加したり、処理順序を入れ替えたりしてもよいことは言うまでもない。
また、上記実施態形態において、図６に一例として示した合成撮影モードの複数のステップの組み合わせは、本開示の画像処理方法の一例に相当する。
また、上記実施形態において、例えば、主制御部、抽出部、合成部、及び表示制御部といった各種の処理を実行する処理部（Processing Unit）のハードウェア的な構造としては、下記に示す各種のプロセッサ（Processer）を用いることができる。各種プロセッサとしては、ソフトウェア（プログラム）を実行して各種の処理部として機能する汎用的なプロセッサであるＣＰＵに加えて、ＦＰＧＡ（Field‐Programmable Gate Array）等の製造後に回路構成を変更可能なＰＬＤ（Programmable Logic Device）、及びＡＳＩＣ（Application Specific Integrated Circuit）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
また、上記各種処理を、これらの各種のプロセッサのうちの１つで実行してもよいし、同種または異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡ、及びＣＰＵとＦＰＧＡとの組み合わせ等）で実行してもよい。また、複数の処理部を１つのプロセッサで構成してもよい。複数の処理部を１つのプロセッサで構成する例としては、システムオンチップ（System On Chip：ＳＯＣ）等のように、複数の処理部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。
このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサの１つ以上を用いて構成される。
さらに、これらの各種のプロセッサのハードウェア的な構造としては、より具体的には、半導体素子等の回路素子を組み合わせた電気回路（Circuitry）を用いることができる。
また、本開示の技術は、撮影装置の作動プログラムに加えて、撮影装置の作動プログラムを非一時的に記憶するコンピュータで読み取り可能な記憶媒体（ＵＳＢメモリ又はＤＶＤ（Digital Versatile Disc）－ＲＯＭ（Read Only Memory）等）にもおよぶ。
１０ 携帯端末（撮影装置）
１１ 撮影部、１１Ａ 撮影レンズ、１１Ｂ イメージセンサ、１１Ｃ ＡＤ変換器（Ａ／Ｄ）、１１Ｄ 画像入力コントローラ、１１Ｅ 画像信号処理回路、１１Ｆ タイミングジェネレータ（ＴＧ）、１１Ｇ ドライバ
１２ タッチパネルディスプレイ
１４ ＣＰＵ
１６ 操作スイッチ
１７ ワークメモリ、１７Ａ 画像メモリ
１８ ストレージデバイス
１９ メディアコントローラ
２１ 外部Ｉ／Ｆ
２２ 通信部
２３ バスライン
２６ 主制御部
２７ アプリケーションプログラム（ＡＰ）
２８ ユーザ領域
２９ メモリーカード
３１ 表示制御部
３２ 画像処理部、３２Ａ 抽出部、３２Ｂ 合成部
５０ 表示画像
５２ 特定領域
５４ 合成対象画像
５６ 選択画像
６０ インジケータ付特定枠６０、６０Ａ インジケータ、６０Ｂ 特定枠、６０Ｃ 拡縮指示マーク
６２ 色指定用マーク
７０ シャッタボタン
７２ カラーパレット、７２Ｗ 白色
７３ 設定ボタン
７４ 閾値設定ツール、７４Ａ スライダバー、７４Ｂ スライダ
７６ 反転ボタン
８０ シャツ
８２、８２Ａ～８２Ｅ 文字
Ｂ 背景
Ｔ 友人
Ｕ ユーザ

Claims (14)

  1. 表示部に表示されている表示画像における一部の領域を特定する特定枠と、前記特定枠内の画像に含まれる色の中から基準色を指定するための色指定用マークとを、前記表示画像に重畳させて表示させる表示制御部と、
    前記特定枠内の画像から、前記色指定用マークによって指定される前記基準色に応じた画像を合成対象画像として抽出する抽出部と、
    ユーザにより選択された選択画像に対して前記合成対象画像を合成した合成画像を生成する合成部と、
    を備えた画像処理装置。
  2. 前記色指定用マークは、前記特定枠内に表示され、かつ前記特定枠と前記色指定用マークとの相対的な位置関係が予め定められている、
    請求項１に記載の画像処理装置。
  3. 前記特定枠を拡大または縮小させるサイズ変更指示を受け付ける第１受付部をさらに備え、
    前記表示制御部は、前記第１受付部が受け付けた前記サイズ変更指示に応じて前記特定枠のサイズを変更する制御を行う、
    請求項１または請求項２に記載の画像処理装置。
  4. 前記特定枠の位置を移動する移動指示を受け付ける第２受付部をさらに備え、
    前記表示制御部は、前記第２受付部が受け付けた前記移動指示に応じて前記特定枠の位置を移動する制御を行う、
    請求項１から請求項３のいずれか１項に記載の画像処理装置。
  5. 前記色指定用マークは前記表示画像の特定の色の領域にのみに重畳しており、前記色指定用マークが重畳している部分の前記表示画像の色を前記基準色とする、
    請求項１から請求項４のいずれか１項に記載の画像処理装置。
  6. 前記表示制御部は、前記色指定用マークよりも大きな面積を有し、前記基準色を表すインジケータをさらに表示する、
    請求項５に記載の画像処理装置。
  7. 前記色指定用マークは前記表示画像の一部を囲む形状を有し、前記表示画像の特定の色の領域のみを囲んでおり、
    前記抽出部は、前記色指定用マークにより囲まれた前記表示画像の色を前記基準色とする、
    請求項１から請求項４のいずれか１項に記載の画像処理装置。
  8. 前記表示制御部は、前記色指定用マークにより囲まれる前記表示画像の領域よりも大きな面積を有し、かつ前記基準色を表すインジケータをさらに表示する、
    請求項７に記載の画像処理装置。
  9. 前記抽出部は、前記特定枠内の画像全体の階調を数値化し、階調の数値が、前記基準色が該当する階調の数値を含む基準色範囲内である画像を、前記合成対象画像として抽出する、
    請求項１から請求項８のいずれか１項に記載の画像処理装置。
  10. 前記基準色範囲をユーザが設定するための設定部をさらに備えた、
    請求項９に記載の画像処理装置。
  11. 被写体を撮影する撮影部と、
    前記撮影部が撮影した画像を表示する表示部と、
    請求項１から請求項１０のいずれか１項に記載の画像処理装置と、
    を備えた撮影装置。
  12. 前記表示部には表示画像がライブビュー表示される、
    請求項１１に記載の撮影装置。
  13. 表示部に表示されている表示画像における一部の領域を特定する特定枠と、前記特定枠内の画像に含まれる色の中から基準色を指定するための色指定用マークとを、前記表示画像に重畳させて表示させ、
    前記特定枠内の画像から、前記色指定用マークによって指定される前記基準色に応じた画像を合成対象画像として抽出し、
    ユーザにより選択された選択画像に対して前記合成対象画像を合成した合成画像を生成する、
    処理をコンピュータが実行する画像処理方法。
  14. 表示部に表示されている表示画像における一部の領域を特定する特定枠と、前記特定枠内の画像に含まれる色の中から基準色を指定するための色指定用マークとを、前記表示画像に重畳させて表示させ、
    前記特定枠内の画像から、前記色指定用マークによって指定される前記基準色に応じた画像を合成対象画像として抽出し、
    ユーザにより選択された選択画像に対して前記合成対象画像を合成した合成画像を生成する、
    処理をコンピュータに実行させるための画像処理プログラム。
JP2019167365A 2019-09-13 2019-09-13 画像処理装置、撮影装置、画像処理方法、及び画像処理プログラム Active JP7110163B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2019167365A JP7110163B2 (ja) 2019-09-13 2019-09-13 画像処理装置、撮影装置、画像処理方法、及び画像処理プログラム
US17/008,477 US11734859B2 (en) 2019-09-13 2020-08-31 Image processing apparatus, imaging apparatus, image processing method, and image processing program
CN202010944029.0A CN112508770A (zh) 2019-09-13 2020-09-09 图像处理装置、摄影装置、图像处理方法及存储介质
US18/344,387 US20230342990A1 (en) 2019-09-13 2023-06-29 Image processing apparatus, imaging apparatus, image processing method, and image processing program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019167365A JP7110163B2 (ja) 2019-09-13 2019-09-13 画像処理装置、撮影装置、画像処理方法、及び画像処理プログラム

Publications (2)

Publication Number Publication Date
JP2021044772A JP2021044772A (ja) 2021-03-18
JP7110163B2 true JP7110163B2 (ja) 2022-08-01

Family

ID=74862637

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019167365A Active JP7110163B2 (ja) 2019-09-13 2019-09-13 画像処理装置、撮影装置、画像処理方法、及び画像処理プログラム

Country Status (3)

Country Link
US (2) US11734859B2 (ja)
JP (1) JP7110163B2 (ja)
CN (1) CN112508770A (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113159008B (zh) * 2021-06-25 2021-09-17 湖南星汉数智科技有限公司 客票行程单构建方法、装置、计算机设备和存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006338604A (ja) 2005-06-06 2006-12-14 Sony Ericsson Mobilecommunications Japan Inc 通信端末装置及び画像通信方法
JP2007094623A (ja) 2005-09-28 2007-04-12 Fujifilm Corp 画像補正方法および装置並びにプログラム

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6324462A (ja) * 1986-07-17 1988-02-01 Toshiba Corp ウインドウ状態表示方式
JP2642368B2 (ja) 1987-12-28 1997-08-20 株式会社東芝 画像編集装置
CN101959021B (zh) * 2004-05-13 2015-02-11 索尼株式会社 图像显示装置及其图像显示方法
WO2006110765A1 (en) * 2005-04-11 2006-10-19 Fall Prevention Technologies, Llc Display of ocular movement
JP2011221812A (ja) * 2010-04-09 2011-11-04 Sony Corp 情報処理装置及び方法、並びにプログラム
US8965119B2 (en) * 2012-06-10 2015-02-24 Apple Inc. Color balance tools for editing images
US10600220B2 (en) * 2016-08-01 2020-03-24 Facebook, Inc. Systems and methods for content interaction
US11120495B2 (en) * 2016-09-15 2021-09-14 GlamST LLC Generating virtual makeup products
JP7013673B2 (ja) * 2017-04-13 2022-02-01 株式会社リコー 情報処理装置、情報処理システム、情報処理方法およびプログラム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006338604A (ja) 2005-06-06 2006-12-14 Sony Ericsson Mobilecommunications Japan Inc 通信端末装置及び画像通信方法
JP2007094623A (ja) 2005-09-28 2007-04-12 Fujifilm Corp 画像補正方法および装置並びにプログラム

Also Published As

Publication number Publication date
JP2021044772A (ja) 2021-03-18
CN112508770A (zh) 2021-03-16
US11734859B2 (en) 2023-08-22
US20230342990A1 (en) 2023-10-26
US20210082155A1 (en) 2021-03-18

Similar Documents

Publication Publication Date Title
US10789671B2 (en) Apparatus, system, and method of controlling display, and recording medium
JP5451888B2 (ja) カメラベースのスキャニング
JP5384190B2 (ja) 撮像デバイス内でタッチ式調節を実行する方法及び装置
WO2018120238A1 (zh) 用于处理文档的设备、方法和图形用户界面
EP2822267A2 (en) Method and apparatus for previewing a dual-shot image
JP7477556B2 (ja) 撮影装置、撮影装置の作動プログラム及び作動方法
TW201530490A (zh) 圖像處理裝置及圖像處理方法
KR20120033246A (ko) 화상 처리 장치, 화상 처리 방법 및 컴퓨터 프로그램
KR20140106779A (ko) 이미지 촬영장치 및 방법
CN110610531A (zh) 图像处理方法、图像处理装置和记录介质
US10460421B2 (en) Image processing apparatus and storage medium
JP5966584B2 (ja) 表示制御装置、表示制御方法およびプログラム
JP2011097565A (ja) グラフィック配置決定方法ならびにそのプログラムおよび情報処理装置
US20230342990A1 (en) Image processing apparatus, imaging apparatus, image processing method, and image processing program
JP2012133749A (ja) 画像処理装置、画像データ変換方法、プリント受注装置、プログラム
JP7256719B2 (ja) 画像処理装置、撮影装置、画像処理方法、及び画像処理プログラム
US9524702B2 (en) Display control device, display control method, and recording medium
CN113056905B (zh) 用于拍摄类长焦图像的系统和方法
JP2004153513A (ja) 画像処理装置及びプログラム
JP2005055973A (ja) 携帯情報端末
JP2012134897A (ja) 画調変換方法、画調変換装置、画調変換システム並びにプログラム
JP2021051256A (ja) 表示装置、表示方法、プログラム
JP2013110615A (ja) 画像処理装置
JP2013131801A (ja) 情報端末装置、撮像画像処理システム、方法、プログラムおよび記録媒体
JP2005078290A (ja) 画像領域選択方法及び装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210727

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220516

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220524

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220608

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220621

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220720

R150 Certificate of patent or registration of utility model

Ref document number: 7110163

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150