JP7314008B2 - 表示制御装置、その制御方法及びプログラム - Google Patents

Description

本発明は、表示制御装置、その制御方法及びプログラムに関する。

パーソナルコンピュータ等において動作するリモート撮影アプリケーションや画像閲覧アプリケーション等の表示、或いは撮像装置本体に備えるディスプレイ表示において、画像に、構図確認の補助となるガイド線を重畳表示する機能を備えるものがある。この機能において、ガイド線を固定の配置とするではなく、その位置や角度を変更できるようにすることで、撮影前に構図を決めるのに有用な機能になる。

参考文献１には、画像を表示した画面上に、線分で示される直線ガイドを表示する構成が開示されている。そして、特許文献１には、マウス等の画面上にある位置表示カーソルでの位置指定は精度が悪く、思い通りの位置を正確に指定できないことが多いことに鑑みて、ドラッグ操作とは別の精度の高い入力手段を設ける構成が開示されている。
また、参考文献２には、基準点を設けて、方向と距離、及びその揃える方向のずれの許容誤差を入力し、入力値を揃える構成が開示されている。

特開２００４－３４１８６５号公報 特許第３２９９０４４号公報

画像にガイド線を重畳表示する場合に、ガイド線の角度表示を行うようにすれば、ユーザの所望する角度のガイド線になるように支援することができるが、このときに正確な角度表示が行われないのでは、使い勝手が悪くなってしまう。

本発明は上記の課題に鑑みてなされたものであり、画像に角度表示を伴う線分を重畳表示する場合に、正確な角度表示を行えるようにすることを目的とする。

本発明の表示制御装置は、表示部に画像をリサイズ可能に表示する表示制御装置であって、前記画像に角度表示を伴う線分を重畳表示し、前記線分の端点のうち、一方の前記端点に対する操作に応じて、対向する前記端点を固定点として前記線分の角度を変更する表示制御手段と、前記端点の位置を前記画像に対する比率で表して記憶媒体に記憶する比率算出手段と、対向する前記端点の前記比率から求められる位置に対する表示誤差量に基づいて、前記端点の位置を補正する補正手段とを備えたことを特徴とする。

本発明によれば、画像に角度表示を伴う線分を重畳表示する場合に、正確な角度表示を行うことが可能になる。

表示システムの構成例を示す図である。 パーソナルコンピュータの構成例を示すブロック図である。 デジタルカメラの構成例を示すブロック図である。 パーソナルコンピュータでのリモートライブビュー画面の表示例を示す図である。 ガイド線の位置情報を記憶する処理について説明するための図である。 リモートライブビュー画面がリサイズされる様子を示す図である。 パーソナルコンピュータで実行されるガイド線の角度を変更する編集処理を示すフローチャートである。 ガイド線の端点で表示誤差が生じることについて説明するための図である。 表示誤差量の算出、及び補正の概要を説明するための図である。

以下、添付図面を参照して、本発明の好適な実施形態について説明する。
［第１の実施形態］
＜システム構成＞
図１は、実施形態に係る表示システムの構成例を示す図である。
表示システムでは、表示制御装置としてのパーソナルコンピュータ（以下、ＰＣと称する）２００と、撮像装置としてのデジタルカメラ３００とを備える。ＰＣ２００とデジタルカメラ３００とは、ケーブル１００を介して接続されており、各種データを送受信する。デジタルカメラ３００がＰＣ２００にライブビュー画像を送信すると、ＰＣ２００の表示部２０５にライブビュー画像が表示される。また、デジタルカメラ３００は、撮影を制御するための各種指示をＰＣ２００から受信し、それに従って撮影動作を実行する。
なお、ＰＣ２００とデジタルカメラ３００とがケーブル１００を介して接続される例を示すが、ＰＣ２００とデジタルカメラ３００とが無線通信等で接続されるようにしてもよい。また、デジタルカメラ３００と接続される表示制御装置としてＰＣ２００を示したが、これに限られるものではない。例えばタブレット端末等、以下に説明する機能を実現できるものであれば、いかなる外部機器を表示制御装置としてもよい。

＜ＰＣ２００の構成＞
図２に、ＰＣ２００の構成例を示す。
ＰＣ２００は、ＣＰＵ２０１と、作業用メモリ２０２と、不揮発性メモリ２０３と、操作部２０４と、表示部２０５と、外部Ｉ／Ｆ２０６とを備える。
ＣＰＵ２０１は、例えば不揮発性メモリ２０３に格納されたプログラムに従い、作業用メモリ２０２をワークメモリとして用いて、ＰＣ２００の各部を制御する。作業用メモリ２０２は、例えばＲＡＭ（半導体素子を利用した揮発性のメモリ等）で構成される。不揮発性メモリ２０３は、例えばハードディスク（ＨＤ）やＲＯＭ等で構成される。不揮発性メモリ２０３には、画像データや音声データ、その他のデータ、ＣＰＵ２０１が動作するための各種プログラム等が格納される。ここでいうプログラムには、本実施形態にて後述する各種フローチャートを実行するためのプログラムが含まれ、ＣＰＵ２０１がプログラムを実行することにより、本発明でいう表示制御手段、比率算出手段、補正手段の機能が実現される。

操作部２０４は、キーボード等の文字情報入力デバイスや、マウスやタッチパネルといったポインティングデバイス、ボタン、ダイヤル、ジョイスティック、タッチセンサ、タッチパッド等を含む、ユーザ操作を受け付けるための入力デバイスである。
表示部２０５は、ＣＰＵ２０１の制御に基づいて、映像データや画像データから形成された画像や、ＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）を構成するＧＵＩ画面等を表示する。ＣＰＵ２０１は、プログラムに従い、表示制御信号を生成し、表示部２０５に表示するための映像信号を生成して出力するように制御する。なお、表示部２０５は、外付けのモニタ（テレビ等）で構成してもよい。
外部Ｉ／Ｆ２０６は、外部機器と有線ケーブルや無線通信によって接続し、映像信号や音声信号の入出力を行うためのインターフェースである。ＰＣ２００は、この外部Ｉ／Ｆ２０６及びケーブル１００を介してデジタルカメラ３００と接続する。

＜デジタルカメラ３００の構成＞
図３に、デジタルカメラ３００の構成例を示す。
レンズ３０２は、ズームレンズ、フォーカスレンズを含むレンズ群である。シャッター３０３は、絞り機能を備えるシャッターである。撮像部３０４は、光学像を電気信号に変換するＣＣＤやＣＭＯＳ等で構成される撮像素子（イメージセンサ）である。これらレンズ３０２、シャッター３０３、撮像部３０４を含む撮像系をバリア３０１で覆うことにより、撮像系を汚れや破損から保護する。Ａ／Ｄ変換器３０５は、撮像部３０４から出力されるアナログ信号をデジタル信号に変換する。

画像処理部３０６は、Ａ／Ｄ変換器３０５からのデータ、又はメモリ制御部３０７からのデータに対し所定の画素補間、縮小といったリサイズ処理や色変換処理を行う。また、画像処理部３０６は、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてシステム制御部３１１が露光制御、測距制御を行う。これにより、ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＥＦ（フラッシュプリ発光）処理が行われる。画像処理部３０６は、更に撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＴＴＬ方式のＡＷＢ（オートホワイトバランス）処理も行う。

Ａ／Ｄ変換器３０５からの出力データは、画像処理部３０６及びメモリ制御部３０７を介して、或いはメモリ制御部３０７を介してメモリ３０８に書き込まれる。メモリ３０８は、撮像部３０４によって得られＡ／Ｄ変換器３０５によりデジタルデータに変換された画像データや、表示部３１０に表示するための画像データを格納する。メモリ３０８は、所定枚数の静止画像や所定時間の動画像及び音声を格納するのに十分な記憶容量を備える。また、メモリ３０８は、画像表示用のメモリ（ビデオメモリ）を兼ねている。Ｄ／Ａ変換器３０９は、メモリ３０８に格納されている画像表示用のデータをアナログ信号に変換して表示部３１０に供給する。こうしてメモリ３０８に書き込まれた表示用の画像データは、Ｄ／Ａ変換器３０９を介して表示部３１０により表示される。表示部３１０は、ＬＣＤ等の表示器上に、Ｄ／Ａ変換器３０９からのアナログ信号に応じた表示を行う。また、表示部３１０は、スルー画像表示（ライブビュー表示）により、電子ビューファインダとして機能する。この場合、Ａ／Ｄ変換器３０５によって一度Ａ／Ｄ変換されメモリ３０８に蓄積されたデジタル信号は、Ｄ／Ａ変換器３０９においてアナログ変換され、表示部３１０に逐次転送され、表示される。

システム制御部３１１は、デジタルカメラ３００全体を制御する。システム制御部３１１は、不揮発性メモリ３１２に格納されたプログラムを実行することで、後述する本実施形態の各処理を実現する。また、システム制御部３１１は、メモリ３０８、Ｄ／Ａ変換器３０９、表示部３１０等を制御することにより表示制御も行う。
不揮発性メモリ３１２は、電気的に消去・記録可能なメモリであり、例えばＥＥＰＲＯＭ等が用いられる。不揮発性メモリ３１２には、システム制御部３１１の動作用の定数、プログラム等が記憶される。システムメモリ３１３は、一般的にはＲＡＭが用いられる。システムメモリ３１３は、システム制御部３１１の動作用の定数、変数を保持するとともに、不揮発性メモリ３１２から読み出したプログラム等が展開される。
システムタイマ３１４は、各種制御に用いる時間や、内蔵された時計の時間を計測する計時部である。

操作部３１５、シャッターボタン（第１シャッタースイッチ３１６と第２シャッタースイッチ３１７）、モード切り替えスイッチ３１８は、システム制御部３１１に各種の動作指示を入力するための操作手段である。
操作部３１５の各操作部材は、表示部３１０に表示される種々の機能アイコンを選択操作すること等により、場面ごとに適宜機能が割り当てられ、各種機能ボタンとして作用する。機能ボタンとしては、例えば終了ボタン、戻るボタン、画像送りボタン、ジャンプボタン、絞込みボタン、属性変更ボタン等がある。例えばメニューボタンが押されると各種の設定可能なメニュー画面が表示部３１０に表示される。ユーザは、表示部３１０に表示されたメニュー画面と、上下左右の４方向ボタンやＳＥＴボタンとを用いて直感的に各種設定を行うことができる。

第１シャッタースイッチ３１６は、デジタルカメラ３００に設けられたシャッターボタンの操作途中、いわゆる半押し（撮影準備指示）でＯＮとなり、第１シャッタースイッチ信号ＳＷ１を発生する。第１シャッタースイッチ信号ＳＷ１により、ＡＦ処理、ＡＥ処理、ＡＷＢ処理、ＥＦ処理等の動作が開始される。第２シャッタースイッチ３１７は、シャッターボタンの押し込み操作の完了、いわゆる全押し（撮影指示）でＯＮとなり、第２シャッタースイッチ信号ＳＷ２を発生する。システム制御部３１１は、第２シャッタースイッチ信号ＳＷ２により、撮像部３０４からの信号読み出しから記録媒体３２５に画像データを書き込むまでの一連の撮影処理の動作を開始する。

モード切り替えスイッチ３１８は、システム制御部３１１の動作モードを静止画記録モード、動画記録モード、再生モード等のいずれかに切り替える。静止画記録モードに含まれるモードとしては、オート撮影モード、オートシーン判別モード、マニュアルモード、撮影シーン別の撮影設定となる各種シーンモード、プログラムＡＥモード、カスタムモード等がある。モード切り替えスイッチ３１８で、静止画撮影モードに含まれるこれらのモードのいずれかに直接切り替えることができる。或いは、モード切り替えスイッチ３１８で静止画撮影モードに一旦切り換えた後に、他の操作部材を用いて静止画撮影モードに含まれるこれらのモードのいずれかに切り替えるようにしてもよい。同様に、動画撮影モードにも複数のモードが含まれていてもよい。

電源制御部３２０は、電池検出回路、ＤＣ－ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成され、電池の装着の有無、電池の種類、電池残量の検出を行う。また、電源制御部３２０は、その検出結果及びシステム制御部３１１の指示に基づいてＤＣ－ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体３２５を含む各部に供給する。電源スイッチ３１９がオンされると、システム制御部３１１は、電源制御部３２０に各部への電力供給を行うよう指示する。電源部３２１は、アルカリ電池やリチウム電池等の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、ＡＣアダプター等からなる。

加速度センサ３２２は、デジタルカメラ３００に加わる加速度を検出するセンサである。加速度センサ３２２は、Ｘ軸、Ｙ軸、Ｚ軸の３軸の加速度を検出可能であり、これによりデジタルカメラ３００の重力方向におけるヨー、ロール、ピッチがわかる。システム制御部３１１は、加速度センサ３２２によって重力加速度（重力方向）を検出し、デジタルカメラ３００の姿勢を検知する処理を行う。システム制御部３１１は、姿勢検知によって正位置、右縦位置、左縦位置、逆さまのどの基準姿勢に最も近いかに応じて、回転状態を設定する。

外部Ｉ／Ｆ３２３は、外部機器と接続するためのインターフェースである。外部Ｉ／Ｆ３２３は、有線通信又は無線通信で外部機器と接続することができ、外部機器と相互に情報（映像情報や加速度センサ３２２からの情報を含む）をやり取りすることができる。なお、有線通信としては、例えばＵＳＢケーブル、ＬＡＮケーブル、或いはＨＤＭＩ（登録商標）ケーブル等を介しての通信が、無線通信としては、例えば無線ＬＡＮ、Ｂｌｕｅｔｏｏｔｈ（登録商標）等を用いた通信が挙げられる。また、外部Ｉ／Ｆ３２３は、映像出力端子であってもよく、撮像部３０４で撮像しているライブビュー画像、記録媒体３２５に記録された画像を再生した映像、各種アイコンや情報表示等のＧＵＩ映像等を出力して外部モニタに表示させることができる。表示部３１０に表示しているものと同様の内容を出力することもできるし、外部モニタに適するように生成した映像を出力することも可能である。デジタルカメラ３００は、この外部Ｉ／Ｆ３２３及びケーブル１００を介してＰＣ２００と接続する。

記録媒体Ｉ／Ｆ３２４は、メモリカードやハードディスク等の記録媒体３２５とのインターフェースである。記録媒体３２５は、撮影された画像を記録するためのメモリカード等の記録媒体であり、半導体メモリや磁気ディスク等から構成される。

＜ＰＣ２００での表示例＞
図４乃至図６を参照して、ＰＣ２００での表示例を説明する。
図４（ａ）に、ＰＣ２００とデジタルカメラ３００とが接続されている状態で、ＰＣ２００が表示部２０５に表示するリモートライブビュー画面４００の表示例を示す。
リモートライブビュー画面４００は、ライブビュー表示領域４０１と、ガイド線操作部４０２と、機能操作部４０３とを含む。
ＣＰＵ２０１は、デジタルカメラ３００から受信したライブビュー画像をライブビュー表示領域４０１に表示する。

ガイド線操作部４０２には、ガイド線に関する設定を行うための各種操作部４０５～４０７が設定される。表示切り替え操作部４０５は、ガイド線を表示するか否かをユーザが設定するための操作部である。ユーザが表示切り替え操作部４０５を操作し、ガイド線を表示する設定にすると、ＣＰＵ２０１は、ライブビュー表示領域４０１に表示するライブビュー画像に、本実施形態では４本のガイド線と呼ばれる線分４０８ａ～４０８ｄを重畳表示する。また、色変更操作部４０６は、ガイド線４０８ａ～４０８ｄの色を設定変更するための操作部である。ユーザが色変更操作部４０６を操作すると、それ応じて、ＣＰＵ２０１はガイド線４０８ａ～４０８ｄの色を設定変更して表示する。また、太さ変更操作部４０７は、ガイド線４０８ａ～４０８ｄの太さを設定変更するための操作部である。ユーザが太さ変更操作部４０７を操作すると、それ応じて、ＣＰＵ２０１はガイド線４０８ａ～４０８ｄの太さを設定変更して表示する。なお、本実施形態においては、ガイド線の色及び太さは全てのガイド線で共通に設定されるものとするが、各々のガイド線で個別に設定可能にしてもよい。

機能操作部４０３には、ガイド線以外の機能を操作するための各種操作部が設定される。例えば機能操作部４０３に、ライブビュー表示領域４０１に指定画像を合成させて表示するためのオーバーレイ設定操作部を含んでもよい。また、機能操作部４０３に、デジタルカメラ３００に対して撮影を要求するための撮影操作部を含んでもよい。また、機能操作部４０３に、デジタルカメラ３００に対してＡＦによるピント合わせを要求するためのフォーカス操作部を含んでもよい。

このリモートライブビュー画面４００のライブビュー表示領域４０１上において、ユーザ操作により、ガイド線４０８ａ～４０８ｄの位置及び角度を変更することができる。ユーザが操作部２０４を介してガイド線４０８ａ～４０８ｄの端点を選択し、ドラッグ操作により端点を移動させることで、対向する端点を固定点として、ガイド線４０８ａ～４０８ｄの角度を変更することができる。また、ユーザが操作部２０４を介してガイド線４０８ａ～４０８ｄ上の端点以外を選択し、ドラッグ操作により方向を指示することで、ガイド線４０８ａ～４０８ｄを移動させて、その位置を変更することができる。このようにガイド線の角度や位置を変更することを、ガイド線を編集するとも呼ぶ。

また、ガイド線４０８ａ～４０８ｄのいずれかがユーザ操作されている間、ＣＰＵ２０１は、各ガイド線４０８ａ～４０８ｄの付近に、それぞれの角度表示を行うための数値ラベル４０９ａ～４０９ｄを表示する。
図４（ｂ）に、ＰＣ２００が表示部２０５に表示するリモートライブビュー画面４００において、ガイド線４０８ａ～４０８ｄのいずれかがユーザ操作されているときの表示例を示す。
ＣＰＵ２０１は、ガイド線４０８ａ～４０８ｄのいずれかがユーザ操作されている間、ガイド線４０８ａ～４０８ｄの中央部付近に、それぞれ対応する数値ラベル４０９ａ～４０９ｄを表示する。そして、ＣＰＵ２０１は、数値ラベル４０９ａ～４０９ｄに、それぞれ対応するガイド線４０８ａ～４０８ｄの角度値を表示する。例えばガイド線４０８ａは水平線を基準として時計周りに２７．２６度回転しているので、対応する数値ラベル４０９ａに「２７．２６°」と表示される。同様に、ガイド線４０８ｄは水平線を基準とし時計回りに－２５．９１度回転しているので、対応する数値ラベル４０９ｄに「－２５．９１°」と表示される。

また、ＣＰＵ２０１は、数値ラベル４０９ａ～４０９ｄの上方に、それぞれ角度の基準となる線（基準線）４１０ａ～４１０ｄを表示する。上述したとおり角度の基準として水平線を用いており、ＣＰＵ２０１は、基準線４１０ａ～４１０ｄとして破線の水平線を表示する。基準線４１０ａ～４１０ｄを表示することにより、角度がどこを基準としているかが視覚的に把握しやすくなる。なお、基準線を破線で表示するものとしたが、これに限られるものではない。

図４（ｂ）では、ガイド線４０８ｂがユーザ操作されている状態を例示する。ＣＰＵ２０１は、操作部２０４の一例であるポインティングデバイスのマウス操作（又はトラックパッド操作）によるマウスカーソル４１１を表示する。ガイド線４０８ｂの端点の位置でマウスボタンを押下することにより端点の移動モードに移行する。ＣＰＵ２０１は、ユーザのドラッグ操作に応じて、操作対象のガイド線４０８ｂの表示位置、数値ラベル４０９ｂの表示位置、及び数値ラベル４０９ｂに表示する角度値を変更する。このようにガイド線の角度を変更するときに、ドラッグ操作でガイド線の端点を移動させるようにすれば、簡単で直感的な操作でガイド線の角度を変更することができる。また、移動中の角度値をリアルタイムに表示することにより、ユーザの所望する角度のガイド線になるように支援することができる。
また、このとき、ＣＰＵ２０１は、操作対象でないガイド線４０８ａ、４０８ｃ、４０８ｄに対応する数値ラベル４０９ａ、４０９ｃ、４０９ｄも同時に表示する。これにより、他のガイド線との相対的な角度を把握することができ、構図を決めるガイド線を直感的で効率良く設定することができる。
マウスボタンを離すことで、移動させた端点は確定し、ＣＰＵ２０１は、ガイド線の位置情報を例えば作業用メモリ２０２に記憶する。

次に、図５を参照して、ガイド線の位置情報を記憶する処理について説明する。図５は、ガイド線の位置情報を記憶する処理について説明するための図であり、図４と同様にリモートライブビュー画面４００の表示例を示す。図５では、着目するガイド線４０８ｂだけを図示し、他のガイド線４０８ａ、４０８ｃ、４０８ｄの図示は省略する。
ライブビュー表示領域４０１に表示される画像は、表示部２０５のディスプレイデバイスの解像度に依存する。なお、説明を簡略化するために、ライブビュー表示領域４０１は、そこに表示する元画像のアスペクト比を常に維持することとする。

ＣＰＵ２０１は、ライブビュー表示領域４０１の起点位置５０１、及び縦横の表示サイズＩＨ、ＩＷを取得することができる。表示サイズの単位は、ディスプレイデバイスの解像度、すなわちピクセル数とする。起点位置５０１を原点とするピクセルの座標系でガイド線の位置情報を表す。
ガイド線４０８ｂの一方の端点をスタート位置４０８ｓ、他方の端点をエンド位置４０８ｅとする。ＣＰＵ２０１は、スタート位置４０８ｓの座標（ＸＳ，ＹＳ）からエンド位置４０８ｅの座標（ＸＥ，ＹＥ）に線を描いている。

ここで、ＣＰＵ２０１は、ガイド線４０８ｂの位置情報として、スタート位置４０８ｓ及びエンド位置４０８ｅの座標（ＸＳ，ＹＳ）及び（ＸＥ，ＹＥ）を記憶するのではなく、割合値（ＲＸＳ，ＲＹＳ）及び（ＲＸＥ，ＲＹＥ）を算出して記憶する。割合値（ＲＸＳ，ＲＹＳ）及び（ＲＸＥ，ＲＹＥ）は、ライブビュー表示領域４０１に表示する画像に対する比率である。スタート位置４０８ｓの割合値（ＲＸＳ，ＲＹＳ）は、ＲＸＳ＝ＸＳ／ＩＷ、ＲＹＳ＝ＹＳ／ＩＨで表される。また、エンド位置４０８ｅの割合値（ＲＸＥ，ＲＹＥ）は、ＲＸＥ＝ＸＥ／ＩＷ、ＲＹＥ＝ＹＥ／ＩＨで表される。各割合値は、浮動小数値として記憶する。同様に、他のガイド線４０８ａ、４０８ｃ、４０８ｄの位置情報として、スタート位置及びエンド位置の割合値を算出して記憶する。このように割合値を記憶するのは、ライブビュー表示領域４０１、すなわちライブビュー画像がリサイズされることに対応するためである。

次に、図６に、リモートライブビュー画面４００がリサイズされる様子を示す。リモートライブビュー画面４００はリサイズ可能であり、四隅のうちいずれかをドラッグ操作することにより、リモートライブビュー画面４００をユーザが好みのサイズに拡大又は縮小することができる。図６では、リモートライブビュー画面４００の右下の隅６０１をドラッグ操作して、リモートライブビュー画面４００を縮小する例を示す。リモートライブビュー画面４００の右下の隅６０１でマウスボタンを押下すると、リサイズモードに移行する。この状態からドラッグ操作で所望の位置６０２まで移動させると、リモートライブビュー画面４００は縮小される。このとき、ガイド線操作部４０２や機能操作部４０３は縮小されないが、ライブビュー表示領域４０１はリモートライブビュー画面４００の大きさに応じて縮小され、ライブビュー画像が小さく表示されるようになる。マウスボタンを離すことで、リサイズは確定する。

上述したように、ガイド線の位置情報としては、座標そのものではなく、画像に対する割合値（ＲＸＳ，ＲＹＳ）及び（ＲＸＥ，ＲＹＥ）を記憶している。したがって、リサイズ後の縦横の表示サイズＩＨ、ＩＷに（ＲＸＳ，ＲＹＳ）、（ＲＸＥ，ＲＹＥ）を掛けることにより、リサイズ後のスタート位置４０８ｓの座標及びエンド位置４０８ｅの座標を求めることができる。これにより、拡大又は縮小のリサイズ後のライブビュー画像に対して重畳表示されるガイド線４０８ａ～４０８ｄは、常に画像の被写体との相対位置を維持することができ、構図補助線の機能が達成される。

ここで、ライブビュー表示領域４０１がリサイズされた場合に、ガイド線の端点で表示誤差が生じ、端点をドラッグ操作で移動させるときに正確な角度表示を行えないことがある。
図８を参照して、ガイド線の端点で表示誤差が生じることについて説明する。図８は、ガイド線の端点で表示誤差が生じることについて説明するための図であり、ライブビュー表示領域４０１を拡大して示す図である。ディスプレイデバイスの解像度は７２ｄｐｉや９６ｄｐｉといったピクセルで表示しているため、図８（ａ）に示すように、端点８０２ｓから端点８０２ｅに描画した線はピクセル座標上に表示される。

ライブビュー表示領域４０１が常に同じサイズである場合は、端点８０２ｓ、８０２ｅの座標はピクセル座標と一致している。
ところが、図６を参照して説明したようにライブビュー表示領域４０１がリサイズされた場合には、図８（ｂ）に示すように、記憶した割合値から算出される端点８０２ｓ、８０２ｅの座標８０１ｓ、８０１ｅがピクセル座標と一致しないことがある。割合値から算出される座標８０１ｓ、８０１ｅの値は丸め込まれて、表示部２０５での表示上（見た目上）ではピクセル座標と一致する端点８０２ｓ、８０２ｅが表示され、これら端点８０２ｓ、８０２ｅを結ぶ線が描かれる。このように、端点の割合値から求められる位置に対する表示誤差が生じる。

この状態で、端点８０２ｅをドラッグ操作して移動させる場合を説明する。ドラッグ操作で端点８０２ｅを移動させるときの移動量はピクセルに依存する。ドラッグ操作で算出される端点８０２ｅの割合値（ＲＸＥ，ＲＹＥ）はピクセル座標と一致する。ところが、固定点となる対向する端点８０２ｓは、割合値から算出される座標８０１ｓの位置を示している。例えば図８（ｃ）に示すように、操作対象の端点８０２ｅを位置８０５ｅに移動させて、ガイド線の角度を水平に変更する場合、表示部２０５での表示上では端点８０２ｓと移動位置８０５ｅとを結ぶ線が水平になる。一方で、数値ラベルに表示する角度値は、割合値から算出される座標８０１ｓ及び移動位置８０５ｅの座標に基づいて算出されるため、水平値０．００°にはならない。このように表示上でガイド線が水平であっても、角度表示は水平値０．００°にならないといった不都合が生じてしまう。
一方、角度値を、端点８０２ｓの座標及び移動位置８０５ｅの座標に基づいて算出するようにした場合、リモートライブビュー画面４００をリサイズした場合に角度値が微妙に変わってしまう問題が発生してしまう。

そこで、図９に示すように、対向する端点８０２ｓの表示上の座標と、対向する端点８０２ｓの割合値から算出される座標８０１ｓとから表示誤差量９０１を算出する。そして、この表示誤差量９０１に基づいて、操作対象の端点８０２ｅの座標を補正した上で、数値ラベルに表示する角度値を算出する。

図７に、ＰＣ２００で実行されるガイド線の角度を変更する編集処理のフローチャートを示す。図７の処理は、ＣＰＵ２０１が例えば不揮発性メモリ２０３に格納されたプログラムを実行することにより実現される。なお、図７では、ガイド線の角度を変更する編集処理に着目し、その詳細を説明するものとし、ガイド線の位置を移動させる編集処理の説明は省略する。
ステップＳ７０１で、ＣＰＵ２０１は、マウスボタンが押下されたか否かを判定する。ＣＰＵ２０１がマウスボタンの押下があると判定した場合、ステップＳ７０２に処理を進める。ＣＰＵ２０１がマウスボタンの押下がないと判定した場合、ガイド線の角度の変更が行われないので、本処理を抜ける。

ステップＳ７０２で、ＣＰＵ２０１は、マウスボタンの押下位置がガイド線の端点の位置であるか否かを判定する。ポインティングデバイスの座標系は、上述したピクセルの座標系と同じである。ＣＰＵ２０１は、マウスボタンの押下位置の座標が端点の座標近傍であるか否かを判定する。このとき、座標が完全一致することを条件とする場合、端点をなかなか掴めない使いづらさが発生してしまう。そこで、図４乃至図６に示すように、端点に丸い部分のようなハンドル領域を設け、端点の座標を中心に数ピクセルの有効領域を設定する。ＣＰＵ２０１はガイド線の端点の位置であると判定した場合、ステップＳ７０３に処理を進める。ＣＰＵ２０１はガイド線の端点の位置でないと判定した場合、ステップＳ７０８に処理を進める。以下、図８で述べたように、端点８０２ｅの位置でマウスボタンを押下し、ドラッグ操作して移動させる場合を説明する。

ステップＳ７０３で、ＣＰＵ２０１は、マウスの押下位置の座標を一時記憶するとともに、対向する端点８０２ｓの表示誤差量を算出し、一時記憶しておく。図９に、表示誤差量の算出の様子を示す。対向する端点８０２ｓの表示上の座標と、対向する端点８０２ｓの割合値から算出される座標８０１ｓとから表示誤差量９０１を算出する。

ステップＳ７０４で、ＣＰＵ２０１は、マウス移動の有無を判定する。一般にマウス制御はＰＣ２００に搭載されたオペレーションシステム（ＯＳ）で処理されることが多いので、この処理はマウス移動が発生したイベントを受けることとなる。ＣＰＵ２０１はマウス移動があると判定した場合、ステップＳ７０５に処理を進め、マウス移動がないと判定した場合、ステップＳ７０７に処理を進める。

ステップＳ７０５で、ＣＰＵ２０１は、ステップＳ７０３において一時記憶したマウスの押下位置からの移動位置を算出し、操作対象の端点８０２ｅの割合値（ＲＸＥ，ＲＹＥ）を求める。
ステップＳ７０６で、ＣＰＵ２０１は、ステップＳ７０５において求めた操作対象の端点８０２ｅの割合値（ＲＸＥ，ＲＹＥ）を、ステップＳ７０３において算出した表示誤差量９０１に基づいて補正して、その結果を記憶する。図９に、補正の様子を示す。移動位置８０５ｅに対して、表示誤差量９０１と同じ値の補正量９０２を加算して補正位置９０３を求める。

ステップＳ７０７で、ＣＰＵ２０１は、マウス移動及びステップ７０６における補正の結果に基づいて、ライブビュー画像にガイド線、及び数値ラベルを重畳表示する。このとき、対向する端点８０２ｓの割合値から算出される座標８０１ｓと、ステップ７０６において補正した端点８０２ｅの位置（補正位置）９０３の座標とに基づいて、角度値を算出する。したがって、表示誤差の影響をなくして、正確な角度表示を行うことが可能になり、例えばガイド線の角度を水平や垂直に変更した場合には水平値０．００°や垂直値９０．００°が表示される。これにより、直感的な端点の移動操作で正確な角度表示をリアルタイムで行うことができる

ステップＳ７０８で、ＣＰＵ２０１は、マウスボタンが離されたか否かを判定する。ＣＰＵ２０１がマウスボタンが離されたと判定した場合、本処理を抜ける。このようにマウスボタンが離された時点で操作対象の端点の割合値は確定し、ガイド線の角度の変更が終了する。ＣＰＵ２０１がマウスボタンが離されていないと判定した場合、ステップ７０４に処理を戻す。

以上述べたように、ガイド線の角度を変更するときに、表示誤差の影響をなくして、正確な角度表示を行うことが可能になる。また、ガイド線の角度を変更した後に再びリサイズを行ったとしても、角度値が変化してしまうのを防ぐことができる。

以上、本発明を実施形態と共に説明したが、上記実施形態は本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその技術思想、又はその主要な特徴から逸脱することなく、様々な形で実施することができる。

本実施形態においては、ガイド線に対してユーザ操作が行われている間だけ、数値ラベルを表示するものとした。これによれば、ユーザがガイド線の位置や角度を変更する間は、数値ラベルを参照することができ、ガイド線の位置や角度の変更が終わった後には、数値ラベルを表示しないようにして画像確認の邪魔にならないようにすることができる。しかしながら、これに限定されるものではなく、例えばガイド線を表示するときは、ユーザ操作が行われている間だけでなく、ユーザ操作が行われていないときにも、数値ラベルを常に表示するようにしてもよい。

また、本実施形態において、ＰＣが撮像装置から受信したライブビュー画像にガイド線を重畳表示する例を説明したが、表示制御装置の構成はこれに限られるものではない。例えば表示部に画像を表示する撮像装置が表示制御装置として機能するようにしてもよい。また、線を重畳する画像も、ライブビュー画像に限られるものではない。

（その他の実施形態）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

２００：パーソナルコンピュータ、２０１：ＣＰＵ、２０２：作業用メモリ、２０３：不揮発性メモリ、２０４：操作部、２０５：表示部、２０６：外部Ｉ／Ｆ

Claims (9)

1. 表示部に画像をリサイズ可能に表示する表示制御装置であって、
   前記画像に角度表示を伴う線分を重畳表示し、前記線分の端点のうち、一方の前記端点に対する操作に応じて、対向する前記端点を固定点として前記線分の角度を変更する表示制御手段と、
   前記端点の位置を前記画像に対する比率で表して記憶媒体に記憶する比率算出手段と、
   対向する前記端点の前記比率から求められる位置に対する表示誤差量に基づいて、前記端点の位置を補正する補正手段とを備えたことを特徴とする表示制御装置。
2. 前記補正手段は、前記表示誤差量に基づいて、操作対象の前記端点の位置を補正することを特徴とする請求項１に記載の表示制御装置。
3. 前記表示制御手段は、対向する前記端点の前記比率から求められる位置と、前記補正手段で補正した操作対象の前記端点の位置とに基づいて、角度表示を行うことを特徴とする請求項２に記載の表示制御装置。
4. 前記表示誤差量は、対向する前記端点の前記表示部での表示上の座標と、対向する前記端点の前記比率から算出される座標とから算出されることを特徴とする請求項１乃至３のいずれか１項に記載の表示制御装置。
5. 前記表示制御手段は、前記表示部に撮像装置で撮像した画像を表示することを特徴とする請求項１乃至４のいずれか１項に記載の表示制御装置。
6. 前記端点に対する操作は、ポインティングデバイスによるドラッグ操作であることを特徴とする請求項１乃至５のいずれか１項に記載の表示制御装置。
7. 前記画像はユーザの操作に従って拡大又は縮小して前記表示部に表示されることを特徴とする請求項１乃至６のいずれか１項に記載の表示制御装置。
8. 表示部に画像をリサイズ可能に表示する表示制御装置の制御方法であって、
   前記画像に角度表示を伴う線分を重畳表示するステップと、
   前記線分の端点のうち、一方の前記端点に対する操作に応じて、対向する前記端点を固定点として前記線分の角度を変更するステップと、
   前記端点の位置を前記画像に対する比率で表して記憶媒体に記憶するステップと、
   対向する前記端点の前記比率から求められる位置に対する表示誤差量に基づいて、前記端点の位置を補正するステップとを有することを特徴とする表示制御装置の制御方法。
9. 表示部に画像をリサイズ可能に表示する表示制御を実行するためのプログラムであって、
   前記画像に角度表示を伴う線分を重畳表示し、前記線分の端点のうち、一方の前記端点に対する操作に応じて、対向する前記端点を固定点として前記線分の角度を変更する表示制御手段と、
   前記端点の位置を前記画像に対する比率で表して記憶媒体に記憶する比率算出手段と、
   対向する前記端点の前記比率から求められる位置に対する表示誤差量に基づいて、前記端点の位置を補正する補正手段としてコンピュータを機能させるためのプログラム。

Images