JP2017120324A - 電子機器、表示システム、表示装置、撮像装置、表示制御方法及びプログラム - Google Patents

Abstract

【課題】表示機能を備える電子機器において、ユーザにとって利便性が高い表示制御を行うこと。【解決手段】リスト端末３は、通信制御部５３と、表示領域決定部５２と、表示処理部５４と、を備える。通信制御部５３は、通信部２０を介して、画像を取得する。また、表示領域決定部５２は、画像が表示される前に、通信部２０により取得された画像に対し、当該画像の全体を表示させることなく、且つ当該画像の一部分を表示させるように表示範囲を設定する。また、表示処理部５４は、表示領域決定部５２により設定された表示範囲に基づいて、画像の一部分を表示させるように出力部１８を制御する。これにより、表示機能を備えるリスト端末３において、画像の内容を把握しやすい表示制御を可能にすることができる。【選択図】図９

Description

本発明は、電子機器、表示システム、表示装置、撮像装置、表示制御方法及びプログラムに関する。

従来より、撮像機能により撮像された画像を小型表示装置で表示させる技術がある。また、通信機能を備えた撮像装置によって撮像される画像を、通信機能を備えた腕時計型端末の液晶部分に表示させる技術もあり、このようにカメラで撮影された画像を手元で確認するためにウェアラブルの表示端末に表示させる技術は広く知られている（特許文献１参照）。

特開２００１―１０３４０９号公報

しかしながら、上述した特許文献１に記載の技術では、端末において画像全体を表示させるのみでは、画像内容の確認が難しくなるという課題があり、特に端末の液晶が小型の場合はその影響が大きくなるため、必ずしもユーザにとって利便性が高いものとは言えなかった。

本発明は、このような状況に鑑みてなされたものであり、表示機能を備える電子機器において、ユーザにとって利便性が高い表示制御を行うことを目的とする。

上記目的を達成するため、本発明の一態様の電子機器は、
表示手段を備える電子機器において、
画像を取得する取得手段と、
前記画像が表示される前に、前記取得手段により取得された画像に対し、当該画像の全体を表示させることなく、且つ当該画像の一部分を表示させるように表示範囲を設定する表示範囲設定手段と、
前記表示範囲設定手段により設定された表示範囲に基づいて、前記表示手段を制御する表示制御手段と、
を備えることを特徴とする。

本発明によれば、表示機能を備える電子機器において、ユーザにとって利便性が高い表示制御を行うことができる。

本発明の一実施形態に係る撮影システムＳのシステムの構成を示すシステム構成図である。 本発明の一実施形態に係るリスト端末３のハードウェアの構成を示すブロック図である。 リスト端末３における画像の表示例を示す模式図である。 リスト端末３における画像の他の表示例を示す模式図である。 リスト端末３における画像の表示領域の変更例を示す模式図である。 リスト端末３における画像の表示領域の変更例を示す模式図である。 リスト端末３における画像の表示領域の変更方法の他の例を示す模式図である。 リスト端末３における画像の表示領域の変更方法の他の例を示す模式図である。 図２のリスト端末３の機能的構成のうち、画像表示処理を実行するための機能的構成を示す機能ブロック図である。 、図９の機能的構成を有する図２のリスト端末３が実行する画像表示処理の流れを説明するフローチャートである。 画像表示処理のうち、初期表示処理の流れを説明するフローチャートである。 画像表示処理のうち、操作対応表示処理の流れを説明するフローチャートである。

以下、本発明の実施形態について、図面を用いて説明する。

図１は、本発明の一実施形態に係る撮影システムＳのシステムの構成を示すシステム構成図である。
撮影システムＳは、図１に示すように、コントローラ端末１と、撮像装置２と、リスト端末３と、を含む。
撮影システムＳでは、コントローラ端末１に対するユーザによる撮影指示操作に基づいて、撮像装置２で撮影が行われ、撮影結果（ライブビュー画像、撮影画像）をリスト端末３で表示する。

コントローラ端末１は、撮像装置２との間で通信を行う通信機能と、ユーザによる入力指示を受け付ける入力機能を有する。

撮像装置２は、コントローラ端末１及びリスト端末３との間で通信を行う通信機能と、ライブビュー撮影等の撮影を行う撮影機能を有する。

リスト端末３は、ユーザの腕に装着して使用する腕時計型の端末であり、撮像装置２との間で通信を行う通信機能と、撮像装置２で撮影された画像を表示面の形状を考慮して表示する表示機能と、表示する画像の表示範囲を変更するタッチ操作を受け付ける入力機能を有する。また、リスト端末３は、画像の表示に際して、ユーザのタッチ操作によらずに、端末の姿勢やユーザの視線等の情報から表示形態や範囲を自動で変更することを可能にするために、端末の姿勢やユーザの視線等を検出可能なセンシング機能を有する。

図２は、本発明の一実施形態に係るリスト端末３のハードウェアの構成を示すブロック図である。
リスト端末３は、例えば、スマートウォッチとして構成される。

リスト端末３は、図２に示すように、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１３と、バス１４と、入出力インターフェース１５と、センサ部１６と、入力部１７と、出力部１８と、記憶部１９と、通信部２０と、ドライブ２１と、を備えている。

ＣＰＵ１１は、ＲＯＭ１２に記録されているプログラム、又は、記憶部１９からＲＡＭ１３にロードされたプログラムに従って各種の処理を実行する。

ＲＡＭ１３には、ＣＰＵ１１が各種の処理を実行する上において必要なデータ等も適宜記憶される。

ＣＰＵ１１、ＲＯＭ１２及びＲＡＭ１３は、バス１４を介して相互に接続されている。このバス１４にはまた、入出力インターフェース１５も接続されている。入出力インターフェース１５には、センサ部１６、入力部１７、出力部１８、記憶部１９、通信部２０及びドライブ２１が接続されている。

センサ部１６は、視線方向、装置の動きや姿勢等を検出可能な各種センサ（視線センサ、加速度センサ等）により構成される。

入力部１７は、各種釦等で構成され、ユーザの指示操作に応じて各種情報を入力する。

出力部１８は、ディスプレイやスピーカ等で構成され、画像や音声を出力する。
本実施形態においては、ディスプレイとして構成される出力部１８に入力部１７を重畳的に配置してタッチパネルを構成する。この場合、タッチパネルを構成する入力部１７は、感圧式・静電容量式で構成してもよい。

記憶部１９は、ハードディスク或いはＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等で構成され、各種画像のデータを記憶する。

通信部２０は、インターネットを含むネットワークを介して他の装置（図示せず）との間で行う通信を制御する。

ドライブ２１には、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリ等よりなる、リムーバブルメディア３１が適宜装着される。ドライブ２１によってリムーバブルメディア３１から読み出されたプログラムは、必要に応じて記憶部１９にインストールされる。また、リムーバブルメディア３１は、記憶部１９に記憶されている画像のデータ等の各種データも、記憶部１９と同様に記憶することができる。

このように構成されるリスト端末３においては、撮像装置２のイメージセンサからの出力（縦横比４：３）とは異なる縦横比率や形状の表示領域（表示領域形状による表示態様の制約がある）となる出力部１８でもユーザの所望する部分を確認しやすく表示することができる機能を有する。
また、上述の機能は、リスト端末のように表示領域が小さい場合においてもユーザの所望する部分を確認しやすく表示することができる。
ここで表示態様の制約とは、表示対象の画像の比率と出力部１８の表示領域の領域形状とが異なることによる制約や、表示対象の画像が本来想定する画角と出力部１８の表示領域の領域サイズが大きく異なることによる制約を含み、さらには、出力部１８における機能により表示不可となる領域や表示性能が制限されて画像を表示できないようなハードウェア／ソフトウェア上の恒久的・一時的な制限を含む。表示態様の制約を受けて、撮像装置２のイメージセンサから出力された画像の表示範囲がユーザの所望する部分を確認しやすくなるように調整されて表示されることとなる。

図３は、リスト端末３における画像の表示例を示す模式図である。
リスト端末３では、図３に示すように、基本的には、撮影された画像の中心部分が表示領域に収まるような領域でトリミングされた画像が表示される。
撮影範囲においては、多くの場合、画角の中心に写したい被写体が集まっているため、画像の中心を表示させることで、表示領域の限られたリスト端末３において、主要な被写体を表示できる等、画像の要部の概要を簡単に把握させることができる。

図４は、リスト端末３における画像の他の表示例を示す模式図である。
また、リスト端末３では、図４に示すように、撮影された画像内に注目被写体が存在している場合には、注目被写体が中心になるように中心位置や大きさ等が調整された表示範囲の画像が表示される。
この際、複数の被写体が存在する場合には、予め登録した被写体の顔等を優先的に表示させるよう、表示領域の中心で大きく表示するために位置や大きさ等の表示範囲が調整された画像が表示領域に表示される。
このように画像の内容によって表示範囲を自動で変化させることができる。

また、静止画像に加えて、動画像においても対応可能であり、表示される画像内に注目被写体が存在している場合には、毎フレーム検出処理を行うことで注目被写体を追従した表示を行うようにし、各フレームの画像内で撮影主体である撮像装置２と被写体との間の距離が離れる等で表示される注目被写体が小さくなると該注目被写体が大きく表示されるようにトリミングズーム等で制御したり、一定の大きさを維持するように各フレーム画像に対して、表示範囲を制御したりすることができる。

図５及び図６は、リスト端末３における画像の表示範囲の変更例を示す模式図である。
画像の表示範囲は、図５及び図６に示すように、ユーザの入力操作によって変更することができる。

例えば、図５に示すように、ユーザのスワイプ操作（タッチパネルへのスライド操作）によって、操作方向側に画像の表示範囲を変更することができる。

また、図６に示すように、ユーザのピンチイン／ピンチアウト操作（タッチパネルへの指の間隔を狭める／広げる操作）によって、画像全体が表示されない範囲までで所定部分の縮小／拡大させて表示範囲を変更することができる。

図７及び図８は、リスト端末３における画像の表示範囲の変更方法の他の例を示す模式図である。
リスト端末３では、上述したようにタッチパネルへのユーザの直接的な表示範囲の変更操作以外にも、リスト端末３の姿勢（動き）変化から表示範囲の変更をすることができる。

具体的には、リスト端末３では、図７に示すように、センサ部１６によって腕の振りを検出し、振った方向（動き）に応じて、画像の表示範囲を変更する。例えば、右方向に腕を振った場合には、加速度の変化からリスト端末３の動きを検出し、右方向に表示範囲を変更する。

また、リスト端末３では、図８に示すように、出力部１８と顔との距離に応じて、表示範囲を変更する。具体的には、出力部１８と顔（特に、目）との距離が遠い場合は、全体を確認したいことが多いため、画像の広い範囲を表示するよう画像全体が表示されない範囲までで表示範囲を縮小して表示し、出力部１８と顔との距離が近い場合には、画像の細部を確認したいことが多いため、表示領域に表示される画像の所定の部分（例えば、中央部分）を拡大して表示する。

また、上述したリスト端末３の姿勢（動き）変化から表示範囲の変更する場合には、姿勢（動き）の変化の速度に応じて、例えば、速度が速い場合には、表示範囲の変化度合いを大きくし、少ない場合には、表示範囲の変化度合いを小さくするように構成してもよい。

また、リスト端末３では、ユーザの視線を検出可能に構成し、ユーザが表示領域を見ている状態において、表示領域への視線の変化を検出して、視線の変化に応じて表示範囲を変更するように構成してもよい。具体的には、検出されたユーザの視線が表示領域の中央部分から右方向に移動した場合には、画像の表示範囲を画像の中央部分から右方向に変更するように構成する。

また、リスト端末３では、ユーザに対する向きに応じて、画像の表示方向を変更する。
具体的には、重力方向に対して、リスト端末３がどの方向を向いているかを検出してユーザに対して正対した表示を行う。また、ユーザが自分以外の対象者に端末を向けたような姿勢となった場合には、対象者に正対した状態となるように表示を変更する。
また、リスト端末３の重力方向に対する向きと、センサ部１６により取得されるリスト端末３へのユーザの視線方向とから、ユーザが出力部１８を見る際に画像の上下方向がユーザの視線と対応する表示態様になるよう表示を変更する。このとき、各画像は表示方向に関する情報（縦撮りか横撮りかの情報、及び基本となる表示方向の情報）を具備しているものとし、撮像時に登録された情報でも、表示時に画像解析によって生成される表示方向の情報でも良い。
具体的には、リスト端末３をユーザの腕に装着した状態において、ユーザに対して、出力部１８と顔とが正対する姿勢となる場合は、重力方向に対応する上下方向で画像を表示するように制御する。例えば、リスト端末３を装着している者が向かい合う者に出力部１８を見せる場合には、リスト端末３を反転させて出力部１８の方向がユーザに正対していた方向と逆の向きになるが、重力方向に応じて、画像の向きを変更するために、画像が向かい合う者に正対した状態になって表示されることとなる。また、リスト端末３の姿勢を縦・横・斜めに細かく変化させた場合にも、重力方向を加味して、重力方向に対応して、画像の表示方向が変更される。
また、センサ部１６として撮像・画像解析機能を用いて、顔を検出して顔の向きを判断して、顔の向きの方向と、画面の表示方向とを一致させるように構成してもよい。さらに、赤外線センサ等のセンサ部１６で顔の接近を検出した場合に、重力方向と検出方向とに基づいて表示方向を変更させるように構成してもよい。

図９は、図２のリスト端末３の機能的構成のうち、画像表示処理を実行するための機能的構成を示す機能ブロック図である。
画像表示処理とは、撮像装置２で撮像された画像（ライブビュー画像／撮影画像）をリスト端末３で表示する処理であり、ユーザによる入力操作やセンサ部１６による検出結果に応じた表示をする一連の処理をいう。
画像表示処理は、初期表示処理と、操作対応表示処理とを含む。
初期表示処理では、リスト端末３で撮像装置２からライブビュー画像／撮影画像を受信した後に、画像内容やリスト端末３の姿勢に応じた表示をする。
操作対応表示処理では、選択されたモード下において、ユーザによる入力操作やセンサ部１６による検出結果に応じて表示を変更する。
なお、本実施形態においては、撮像装置２の撮像部（図示せず）から逐次出力される撮像画像を、ライブビュー画像と呼び、コントローラ端末１からのユーザ等による撮影指示によって記録用に撮像された撮像画像を撮影画像と呼ぶ。

画像表示処理を実行する場合には、図９に示すように、ＣＰＵ１１において、モード選択部５１と、表示領域決定部５２と、通信制御部５３と、表示処理部５４と、状態検出部５６と、が機能する。
また、記憶部１９の一領域には、表示画面情報記憶部７１と、優先被写体情報記憶部７２と、画像記憶部７３と、が設定される。

表示画面情報記憶部７１には、リスト端末３のディスプレイとして構成される出力部１８の形状や大きさ等の表示画面の情報が記憶される。本実施形態の出力部１８は、腕時計程度の大きさであり、画像とは異なる形状の円形形状の表示画面となる。

優先被写体情報記憶部７２には、例えば、特定の人物の顔等の表示において優先すべき被写体の情報が記憶される。

画像記憶部７３には、撮像装置２から受信した画像のデータが記憶される。

モード選択部５１は、ユーザによる入力部１７等への選択操作により各種表示のモードを選択する。本実施形態において選択可能なモードは、視線操作モード、姿勢操作モード、入力操作モードである。視線操作モードは、検出した視線の向きにより表示を変更するモードであり、姿勢操作モードは、腕の動き等による端末の姿勢変化により表示を変更するモードであり、入力操作モードはユーザの入力部１７への入力操作により表示を変更するモードである。
具体的には、モード選択部５１は、ユーザによる入力部１７へのモード選択操作により、視線操作モード、姿勢操作モード、入力操作モードからモードを選択する。また、モード選択部５１は、選択されたモードを判定する。

表示領域決定部５２は、出力部１８の表示形態を考慮して、画像の表示領域を決定する。本実施形態においては、表示画面情報記憶部７１に予め記憶される出力部１８の表示画面情報から、例えば、大きさや形状を対応させるように画像の表示領域を決定する。
具体的には、表示領域決定部５２は、表示画面情報記憶部７１から出力部１８の表示画面情報を取得する。また、表示領域決定部５２は、取得した表示画面情報に基づいて表示領域を決定する。

通信制御部５３は、撮像装置２との間で通信を行うように通信部２０を制御する。
具体的には、通信制御部５３は、通信部２０を介して、撮像装置２との間でペアリングを実行する。また、通信制御部５３は、通信部２０を介して、撮像装置２からライブビュー画像を受信する。また、通信制御部５３は、通信部２０において撮像装置２から撮影画像を受信したか否かを判定する。

表示処理部５４は、表示に係る画像の解析をしたり、画像を表示するように出力部１８を制御したりする処理を行う。
具体的には、表示処理部５４は、表示対象の画像に注目被写体が含まれるか否かの情報が予め記録されているか否かを判定する。
情報がタグ付けされていないと判定された場合、タグ付けされた情報に基づいて、注目被写体を中心に表示範囲を設定する。
情報がタグ付けされていないと判定された場合、表示対象の画像に対して画像解析を行い、画像内から注目被写体を検出する。また、表示処理部５４は、注目被写体が単数／複数、優先する注目被写体があるか否かを判定する。
また、表示処理部５４は、画像の中心を表示範囲として表示したり、注目被写体が中心となる表示範囲で表示したり、優先する注目被写体が中心となる表示範囲で表示したり、重力方向とリスト端末３の姿勢とから表示方向を変更したり、基準方向からの視線変化に応じて表示範囲を変更して表示したり、腕のふり等による基準位置からの位置変化に応じて表示範囲を変更して表示したり、入力部１７への入力操作に応じて表示範囲を変更して表示したりするように出力部１８を制御する。

状態検出部５６は、端末のセンサ部１６からの検出結果や入力部１７からの入力結果から端末の状態を検出する。
具体的には、状態検出部５５は、センサ部１６からのセンサ情報からリスト端末３の姿勢変化を検出したか否かを判定する。
また、状態検出部５５は、センサ部１６からのセンサ情報から視線方向の変化、センサ部１６からのセンサ情報からリスト端末３の位置変化、入力部１７に対する入力操作を検出する。

図１０は、図９の機能的構成を有する図２のリスト端末３が実行する画像表示処理の流れを説明するフローチャートである。
画像表示処理は、ユーザによる入力部１７への画像表示処理開始の操作により開始される。

ステップＳ１において、モード選択部５１は、ユーザの入力部１７へのモード選択操作により、視線操作モード、姿勢操作モード、入力操作モードからモードを選択する。

ステップＳ２において、表示領域決定部５２は、表示画面情報記憶部７１から出力部１８の表示画面情報を取得する。

ステップＳ３において、表示領域決定部５２は、取得した表示画面情報に基づいて表示領域を決定する。

ステップＳ４において、通信制御部５３は、通信部２０を介して、撮像装置２との間でペアリングを実行する。

ステップＳ５において、通信制御部５３は、通信部２０を介して、撮像装置２からライブビュー画像を受信する。

ステップＳ６において、表示処理部５４及び状態検出部５５は、初期表示処理を実行する。初期表示処理の結果、出力部１８において、ライブビュー画像及び撮影画像が画像内容や端末の姿勢に応じた表示される。なお、初期表示処理の流れについては後述する。

ステップＳ７において、モード選択部５１、表示処理部５４及び状態検出部５５は、操作対応表示処理を実行する。操作対応表示処理の結果、出力部１８において、選択されたモード毎に各種操作（視線、腕の動き、入力操作）に応じた表示が行われる。なお、操作対応表示処理の流れについては後述する。

ステップＳ８において、通信制御部５３は、通信部２０において撮像装置２から撮影画像を受信したか否かを判定する。
撮影画像を受信した場合には、ステップＳ８においてＹＥＳと判定されて、処理はステップＳ６に戻る。受信の結果、撮影画像は、画像記憶部７３に記憶される。
これに対して、撮影画像を受信していない場合には、ステップＳ８においてＮＯと判定されて、処理はステップＳ９に進む。

ステップＳ９において、ＣＰＵ１１は、入力や検出がないまま所定時間が経過したか、視線を検出しなくなったか、入力部１７への操作等で画像表示処理を終了したか否かを判定する。
画像表示処理を終了しない場合には、ステップＳ９においてＮＯと判定されて、処理はステップＳ５に戻る。
これに対して、画像表示処理を終了した場合には、ステップＳ９においてＹＥＳと判定されて、画像表示処理は終了する。画像表示処理が終了することで、電力消費を考慮して、スリープ状態に移行したり、ライブビュー表示であった場合に、待機状態の画面や静止画を表示したりするように構成する。

図１１は、画像表示処理のうち、初期表示処理の流れを説明するフローチャートである。

ステップＳ３１において、表示処理部５４は、表示に関する情報が画像に記録されているか否かを判定する。表示に関する情報とは、例えば、表示サイズ指定や表示範囲を指定する情報である。
表示に関する情報が記録されていない場合には、ステップＳ３１においてＮＯと判定されて、処理はステップＳ３３に進む。
これに対して、表示に関する情報が画像に記録されている場合には、ステップＳ３１においてＹＥＳと判定されて、処理はステップＳ３２に進む。

ステップＳ３２において、表示処理部５４は、画像に記録された表示に関する情報に基づいた表示範囲で当該画像を表示するように出力部１８を制御する。その後、処理はステップＳ４０に進む。

ステップＳ３３において、表示処理部５４は、画像解析を行って、画像内から注目被写体を検出する。

ステップＳ３４において、表示処理部５４は、注目被写体があるか否かを判定する。
注目被写体あった場合には、ステップＳ３４においてＹＥＳと判定されて、処理はステップＳ３６に進む。
これに対して、注目被写体なかった場合には、ステップＳ３４においてＮＯと判定されて、処理はステップＳ３５に進む。

ステップＳ３５において、表示処理部５４は、例えば、図３に示すように、画像の中心を表示範囲で表示するように出力部１８を制御する。

ステップＳ３６において、表示処理部５４は、注目被写体が複数あったか否かを判定する。
注目被写体が複数あった場合には、ステップＳ３６においてＹＥＳと判定されて、処理はステップＳ３８に進む。
これに対して、注目被写体が複数なかった場合には、ステップＳ３６においてＮＯと判定されて、処理はステップＳ３７に進む。

ステップＳ３７において、表示処理部５４は、優先被写体情報記憶部７２に記憶される優先被写体情報を参照して、優先する注目被写体があるか否かを判定する。
優先する注目被写体があった場合には、ステップＳ３７においてＹＥＳと判定されて、処理はステップＳ３８に進む。

ステップＳ３８において、表示処理部５４は、例えば、図４に示すように、注目被写体が中心となる表示範囲で表示するように出力部１８を制御する。その後、処理はステップＳ３８に進む。

これに対して、優先する注目被写体がない場合には、ステップＳ３５においてＮＯと判定されて、処理はステップＳ３９に進む。

ステップＳ３９において、表示処理部５４は、優先する注目被写体が中心となる表示範囲で表示するように出力部１８を制御する。

ステップＳ４０において、状態検出部５５は、センサ部１６からのセンサ情報からリスト端末３の姿勢変化を検出したか否かを判定する。
リスト端末３の姿勢変化を検出した場合には、ステップＳ４０においてＹＥＳと判定されて、処理はステップＳ４１に進む。
これに対して、リスト端末３の姿勢変化を検出しない場合には、ステップＳ４０においてＮＯと判定されて、初期表示処理は終了する。

ステップＳ４１において、表示処理部５４は、重力方向とリスト端末３の姿勢から表示方向を変更するように出力部１８を制御する。その後、初期表示処理は終了する。

図１２は、画像表示処理のうち、操作対応表示処理の流れを説明するフローチャートである。

ステップＳ５１において、モード選択部５１は、選択されたモードを判定する。
選択されたモードが視線操作モードであった場合には、ステップＳ５１において［視線操作モード］と判定されて、処理はステップＳ５２に進む。

ステップＳ５２において、状態検出部５５は、センサ部１６からのセンサ情報から視線方向を検出する。

ステップＳ５３において、表示処理部５４は、基準方向からの視線変化に応じて表示範囲を変更して表示するように出力部１８を制御する。その後、操作対応表示処理は終了する。

これに対して、選択されたモードが姿勢操作モードであった場合には、ステップＳ５１において［姿勢操作モード］と判定されて、処理はステップＳ５４に進む。

ステップＳ５４において、状態検出部５５は、センサ部１６からのセンサ情報からリスト端末３の位置変化を検出する。

ステップＳ５５において、表示処理部５４は、例えば、図７に示すように、基準位置からの位置変化に応じて表示範囲を変更して表示するように出力部１８を制御する。その後、操作対応表示処理は終了する。

これに対して、選択されたモードが入力操作モードであった場合には、ステップＳ５１において［入力操作モード］と判定されて、処理はステップＳ５６に進む。

ステップＳ５６において、状態検出部５５は、入力部１７に対する入力操作を検出する。

ステップＳ５７において、表示処理部５４は、例えば、図５及び図６に示すように、入力部１７への入力操作に応じて表示範囲を変更して表示するように出力部１８を制御する。その後、操作対応表示処理は終了する。

以上のように構成されるリスト端末３は、表示形態に制約がある出力部１８を備える。
また、リスト端末３は、通信制御部５３と、表示領域決定部５２と、表示処理部５４と、を備える。
通信制御部５３は、通信部２０を介して、画像を取得する。
表示領域決定部５２は、通信制御部５３により取得された画像に表示範囲を設定する。
表示処理部５４は、表示領域決定部５２により設定された表示範囲に基づいて、画像の一部分を表示させるように出力部１８を制御する。
これにより、表示機能を備えるリスト端末３において、画像の内容を把握しやすい表示制御を可能にすることができる。
これにより、表示機能を備えるリスト端末３において、ユーザにとって利便性が高い表示制御を行うことができる。

表示領域決定部５２は、出力部１８の形状に合わせた形状の表示範囲を設定する。
これにより、表示機能を備えるリスト端末３において、出力部１８の形状によって左右される表示領域に合わせて表示範囲を設定するために、より画像の内容を把握しやすい表示制御を可能にすることができる。

また、リスト端末３は、通信制御部５３により取得された画像内に注目被写体あるか否かを検出する状態検出部５５をさらに備える。
表示領域決定部５２は、状態検出部５５により検出される注目被写体に基づいて画像の表示範囲を設定する。
これにより、リスト端末３においては、画像の内容に応じて表示範囲を設定するために、より画像の内容を把握しやすくすることができる。

また、リスト端末３は、出力部１８上に重畳的に配置されてタッチパネルを構成する入力部１７をさらに備える。
表示領域決定部５２は、入力部１７への操作入力に応じて、画像の表示範囲を設定する。
これにより、リスト端末３においては、タッチパネルにより直感的な操作が可能となり、画像の内容を把握しやすい表示制御を可能にすることができる。

また、リスト端末３は、端末の動きを検出するセンサ部１６をさらに備える。
表示領域決定部５２は、センサ部１６の検出結果に基づいて、画像の表示範囲を設定する。
これにより、リスト端末３においては、端末の動きにより、直感的な操作が可能となり、画像の内容を把握しやすい表示制御を可能にすることができる。

センサ部１６は、ユーザと出力部１８との距離情報を取得する距離センサを含む。
表示領域決定部５２は、センサ部１６により取得された距離情報に基づいて、画像の表示範囲を変更する。
これにより、リスト端末３においては、例えば、ユーザの顔との距離に応じて、画像の表示範囲を変更することができ、より直感的に画像の内容を把握しやすい表示制御を可能にすることができる。

表示処理部５４は、入力が所定時間以上ない場合、出力部１８での表示態様を変化させて表示する。
これにより、リスト端末３においては、例えば、所定時間経過後に入力がない場合に、ユーザが表示を確認している蓋然性が低いために、ライブビュー表示を停止したり、スリープしたりすることで、電力消費を抑えることができる。

リスト端末３は、ユーザの身体に装着するウェアラブル端末により構成される。
これにより、リスト端末３は、ユーザが身に付けた状態で他の動作と並行しながら、表示を確認することができる。

出力部１８の表示態様における制約は、通信部２０により取得される画像の全体を表示することが出来ないことである。
リスト端末３は、出力部１８の表示態様における上記の制約下において、画像の内容を把握しやすい表示制御を可能にする。

なお、本発明は、上述の実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものである。

上述の実施形態では、リスト端末３側で出力部１８の制約に対応して画像の処理を実行したが、撮像装置２側でリスト端末３側の出力部１８の制約を把握して、画像の処理を実行して、処理後の画像をリスト端末３に送信するように構成してもよい。

また、上述の実施形態では、撮像システムＳにおいて、複数の機器において画像表示処理を実行したがこれに限られず、例えば、リスト端末３に撮像機能を設けて、１つの端末内で処理を行うように構成してもよい。

また、上述の実施形態では、画像内における移動体を検出して注目被写体として、優先的に中心に表示するように構成してもよい。

また、上述の実施形態では、静止画像を例として説明したが、動画像であってもよい。

また、上述の実施形態では、画像に対して設定される表示範囲は画像全体が表示されない範囲で変更するよう構成したがこれに限定されない。初期表示処理に基づいて各画像が表示された後、画像全体が表示されるよう表示範囲を変更可能に構成しても良い。例えば、ユーザの視認性を考慮して、最初に画像の一部を表示させて、その後に画像全体を表示するように構成してもよい。
具体的には、通信制御部５３は、通信部２０を介して、画像を取得する。また、表示領域決定部５２は、画像が表示される前に、通信部２０により取得された画像に対し、当該画像の全体を表示させることなく、且つ当該画像の一部分を表示させるように表示範囲を設定する。また、表示処理部５４は、表示領域決定部５２により設定された表示範囲に基づいて、画像の一部分を表示させるように出力部１８を制御するように構成することができる。
また、表示領域決定部５２は、設定された表示範囲に基づいて画像が表示された後、前記画像に設定された表示範囲を変更する。また、表示処理部５４は、表示領域決定部５２により変更された表示範囲に基づいて、画像の一部分を表示させるように出力部１８を制御するように構成することができる。
また、表示領域決定部５２は、設定された表示範囲に基づいて画像が表示された後、表示範囲設定手段により前記表示範囲を、前記画像の全体を表示させるような範囲に変更する。また、表示処理部５４は、表示領域決定部５２により変更された表示範囲に基づいて、画像の全体を表示させるように出力部１８を制御するように構成することができる。

また、上述の実施形態では、出力部１８の形状は円形形状に対応して円形の表示領域としたが、円形形状内に、矩形形状の表示領域で表示するように構成してもよい。また、出力部１８の形状は、円形、矩形等の種々の形状であってもよい。

また、上述の実施形態では、視線検出の有無で、表示のオンオフを行うように構成してもよい。

また、上述の実施形態では、本発明が適用されるリスト端末３は、スマートウォッチを例として説明したが、特にこれに限定されない。
例えば、本発明は、画像表示処理機能を有する電子機器一般に適用することができる。具体的には、例えば、本発明は、ノート型のパーソナルコンピュータ、プリンタ、テレビジョン受像機、ビデオカメラ、デジタルカメラ、携帯型ナビゲーション装置、携帯電話機、スマートフォン、ポータブルゲーム機等に適用可能である。

上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。
換言すると、図９の機能的構成は例示に過ぎず、特に限定されない。即ち、上述した一連の処理を全体として実行できる機能がリスト端末３に備えられていれば足り、この機能を実現するためにどのような機能ブロックを用いるのかは特に図９の例に限定されない。
また、１つの機能ブロックは、ハードウェア単体で構成してもよいし、ソフトウェア単体で構成してもよいし、それらの組み合わせで構成してもよい。

一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータ等にネットワークや記録媒体からインストールされる。
コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えば汎用のパーソナルコンピュータであってもよい。

このようなプログラムを含む記録媒体は、ユーザにプログラムを提供するために装置本体とは別に配布される図２のリムーバブルメディア３１により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される記録媒体等で構成される。リムーバブルメディア３１は、例えば、磁気ディスク（フロッピディスクを含む）、光ディスク、又は光磁気ディスク等により構成される。光ディスクは、例えば、ＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｋ−Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ），ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ），Ｂｌｕ−ｒａｙ（登録商標） Ｄｉｓｃ（ブルーレイディスク）等により構成される。光磁気ディスクは、ＭＤ（Ｍｉｎｉ−Ｄｉｓｋ）等により構成される。また、装置本体に予め組み込まれた状態でユーザに提供される記録媒体は、例えば、プログラムが記録されている図２のＲＯＭ１２や、図２の記憶部１９に含まれるハードディスク等で構成される。

なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的或いは個別に実行される処理をも含むものである。
また、本明細書において、システムの用語は、複数の装置や複数の手段などより構成される全体的な装置を意味するものとする。

以上、本発明のいくつかの実施形態について説明したが、これらの実施形態は、例示に過ぎず、本発明の技術的範囲を限定するものではない。本発明はその他の様々な実施形態を取ることが可能であり、さらに、本発明の要旨を逸脱しない範囲で、省略や置換等種々の変更を行うことができる。これら実施形態やその変形は、本明細書等に記載された発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

以下に、本願の出願当初の特許請求の範囲に記載された発明を付記する。
［付記１］
表示手段を備える電子機器において、
画像を取得する取得手段と、
前記画像が表示される前に、前記取得手段により取得された画像に対し、当該画像の全体を表示させることなく、且つ当該画像の一部分を表示させるように表示範囲を設定する表示範囲設定手段と、
前記表示範囲設定手段により設定された表示範囲に基づいて、前記表示手段を制御する表示制御手段と、
を備えることを特徴とする電子機器。
［付記２］
前記表示範囲設定手段により設定された表示範囲に基づいて前記画像が表示された後、前記表示範囲設定手段により前記画像に設定された表示範囲を変更する表示範囲変更手段を更に備え、
前記表示制御手段は、前記表示範囲変更手段により変更された表示範囲に基づいて、画像の一部分を表示させるように前記表示手段を制御する、
ことを特徴とする付記１に記載の電子機器。
［付記３］
前記表示範囲設定手段により設定された表示範囲に基づいて前記画像が表示された後、前記表示範囲設定手段により前記表示範囲を、前記画像の全体を表示させるような範囲に変更する表示範囲変更手段を更に備え、
前記表示制御手段は、前記表示範囲変更手段により変更された表示範囲に基づいて、画像の全体を表示させるように前記表示手段を制御する、
ことを特徴とする付記１に記載の電子機器。
［付記４］
前記表示手段上に重畳的に配置され、且つタッチパネルを具備する操作手段を更に備え、
前記表示範囲変更手段は、前記操作手段への操作入力に応じて前記画像の表示範囲を変更する、
ことを特徴とする付記２又は３に記載の電子機器。
［付記５］
当該電子機器の動きを検出するセンサ手段をさらに備え、
前記表示範囲変更手段は、前記センサ手段による検出結果に基づいて、前記画像の表示範囲を変更する、
ことを特徴とする付記２から４の何れか１つに記載の電子機器。
［付記６］
前記センサ手段はユーザと前記表示手段との距離情報を取得する距離センサを含み、
前記表示範囲変更手段は、前記表示手段により取得された前記距離情報に基づいて、前記画像の表示範囲を変更する、
ことを特徴とする付記５に記載の電子機器。
［付記７］
前記表示範囲設定手段は、前記表示手段の形状に合わせた形状の表示範囲を設定する、
ことを特徴とする付記１から６の何れか１つに記載の電子機器。
［付記８］
前記取得手段により取得された画像内に注目被写体あるか否かを検出する検出手段をさらに備え、
前記表示範囲設定手段は、前記検出手段により検出される前記注目被写体に基づいて前記画像の表示範囲を設定する、
ことを特徴とする付記１から７の何れか１つに記載の電子機器。
［付記９］
前記表示制御手段は、入力が所定時間以上ない場合、前記表示手段での表示態様を変化させて表示する、
ことを特徴とする付記１から８の何れか１つに記載の電子機器。
［付記１０］
当該電子機器は、ユーザの身体に装着するウェアラブル端末により構成される、
ことを特徴とする付記１から９の何れか１つに記載の電子機器。
［付記１１］
撮像手段を有する撮像装置と、ディスプレイ形状に基づいた表示形状の制約がある表示手段を有する表示装置とを備える表示システムにおいて、
前記撮像装置は、
前記撮像手段から画像を取得する取得手段と、
取得した画像を前記表示装置に送信する送信手段と、を有し、
前記表示装置は、
前記撮像装置から前記画像を受信する受信手段と、
前記受信手段によって受信した前記画像を表示させるように前記表示手段を制御する表示制御手段と、を有し、
前記撮像装置、又は前記表示装置には、
前記画像に表示範囲を設定する表示範囲設定手段と、
前記表示範囲設定手段により設定された表示範囲に基づいて、前記画像を加工する加工手段と、をさらに有し、
前記表示制御手段は、前記加工手段によって加工された前記画像を表示するように前記表示手段を制御する、
ことを特徴とする表示システム。
［付記１２］
ディスプレイ形状に基づいた表示形状の制約がある表示手段を有する表示装置であって、
外部の撮像装置から画像を取得する画像取得手段と、
前記ディスプレイ形状に基づいた表示形状の制約に応じた表示範囲で前記画像取得手段によって取得された画像を表示させるように前記表示手段を制御する表示制御手段と、
を備えることを特徴とする表示装置。
［付記１３］
撮像手段と、
前記撮像手段から画像を取得する取得手段と、
前記画像に表示範囲を設定する表示範囲設定手段と、
取得した前記画像を、前記表示範囲設定手段により設定された表示範囲で表示させるように、ディスプレイ形状に基づいた表示形状の制約がある表示装置に送信する送信手段と、
を備えることを特徴とする撮像装置。
［付記１４］
表示手段を備える電子機器で実行される表示制御方法であって、
画像を取得する取得ステップと、
前記画像が表示される前に、前記取得ステップにより取得された画像に対し、当該画像の全体を表示させることなく、且つ当該画像の一部分を表示させるように表示範囲を設定する表示範囲設定ステップと、
前記表示範囲設定ステップにより設定された表示範囲に基づいて、前記表示手段を制御する表示制御ステップと、
を含むことを特徴とする表示制御方法。
［付記１５］
表示手段を備える電子機器を制御するコンピュータを、
画像を取得する取得手段、
前記画像が表示される前に、前記取得手段により取得された画像に対し、当該画像の全体を表示させることなく、且つ当該画像の一部分を表示させるように表示範囲を設定する表示範囲設定手段、
前記表示範囲設定手段により設定された表示範囲に基づいて、前記表示手段を制御する表示制御手段、
として機能させることを特徴とするプログラム。

１・・・コントローラ端末，２・・・撮像装置，３・・・リスト端末，１１・・・ＣＰＵ，１２・・・ＲＯＭ，１３・・・ＲＡＭ，１４・・・バス，１５・・・入出力インターフェース，１６・・・センサ部，１７・・・入力部，１８・・・出力部，１９・・・記憶部，２０・・・通信部，２１・・・ドライブ，３１・・・リムーバブルメディア，５１・・・モード選択部，５２・・・表示領域決定部，５３・・・通信制御部，５４・・・表示処理部，５５・・・状態検出部，７１・・・表示画面情報記憶部，７２・・・優先被写体情報記憶部，７３・・・画像記憶部，Ｓ・・・撮影システム

Claims (15)

1. 表示手段を備える電子機器において、
   画像を取得する取得手段と、
   前記画像が表示される前に、前記取得手段により取得された画像に対し、当該画像の全体を表示させることなく、且つ当該画像の一部分を表示させるように表示範囲を設定する表示範囲設定手段と、
   前記表示範囲設定手段により設定された表示範囲に基づいて、前記表示手段を制御する表示制御手段と、
   を備えることを特徴とする電子機器。
2. 前記表示範囲設定手段により設定された表示範囲に基づいて前記画像が表示された後、前記表示範囲設定手段により前記画像に設定された表示範囲を変更する表示範囲変更手段を更に備え、
   前記表示制御手段は、前記表示範囲変更手段により変更された表示範囲に基づいて、画像の一部分を表示させるように前記表示手段を制御する、
   ことを特徴とする請求項１に記載の電子機器。
3. 前記表示範囲設定手段により設定された表示範囲に基づいて前記画像が表示された後、前記表示範囲設定手段により前記表示範囲を、前記画像の全体を表示させるような範囲に変更する表示範囲変更手段を更に備え、
   前記表示制御手段は、前記表示範囲変更手段により変更された表示範囲に基づいて、画像の全体を表示させるように前記表示手段を制御する、
   ことを特徴とする請求項１に記載の電子機器。
4. 前記表示手段上に重畳的に配置され、且つタッチパネルを具備する操作手段を更に備え、
   前記表示範囲変更手段は、前記操作手段への操作入力に応じて前記画像の表示範囲を変更する、
   ことを特徴とする請求項２又は３に記載の電子機器。
5. 当該電子機器の動きを検出するセンサ手段をさらに備え、
   前記表示範囲変更手段は、前記センサ手段による検出結果に基づいて、前記画像の表示範囲を変更する、
   ことを特徴とする請求項２から４の何れか１項に記載の電子機器。
6. 前記センサ手段はユーザと前記表示手段との距離情報を取得する距離センサを含み、
   前記表示範囲変更手段は、前記表示手段により取得された前記距離情報に基づいて、前記画像の表示範囲を変更する、
   ことを特徴とする請求項５に記載の電子機器。
7. 前記表示範囲設定手段は、前記表示手段の形状に合わせた形状の表示範囲を設定する、
   ことを特徴とする請求項１から６の何れか１項に記載の電子機器。
8. 前記取得手段により取得された画像内に注目被写体あるか否かを検出する検出手段をさらに備え、
   前記表示範囲設定手段は、前記検出手段により検出される前記注目被写体に基づいて前記画像の表示範囲を設定する、
   ことを特徴とする請求項１から７の何れか１項に記載の電子機器。
9. 前記表示制御手段は、入力が所定時間以上ない場合、前記表示手段での表示態様を変化させて表示する、
   ことを特徴とする請求項１から８の何れか１項に記載の電子機器。
10. 当該電子機器は、ユーザの身体に装着するウェアラブル端末により構成される、
    ことを特徴とする請求項１から９の何れか１項に記載の電子機器。
11. 撮像手段を有する撮像装置と、ディスプレイ形状に基づいた表示形状の制約がある表示手段を有する表示装置とを備える表示システムにおいて、
    前記撮像装置は、
    前記撮像手段から画像を取得する取得手段と、
    取得した画像を前記表示装置に送信する送信手段と、を有し、
    前記表示装置は、
    前記撮像装置から前記画像を受信する受信手段と、
    前記受信手段によって受信した前記画像を表示させるように前記表示手段を制御する表示制御手段と、を有し、
    前記撮像装置、又は前記表示装置には、
    前記画像に表示範囲を設定する表示範囲設定手段と、
    前記表示範囲設定手段により設定された表示範囲に基づいて、前記画像を加工する加工手段と、をさらに有し、
    前記表示制御手段は、前記加工手段によって加工された前記画像を表示するように前記表示手段を制御する、
    ことを特徴とする表示システム。
12. ディスプレイ形状に基づいた表示形状の制約がある表示手段を有する表示装置であって、
    外部の撮像装置から画像を取得する画像取得手段と、
    前記ディスプレイ形状に基づいた表示形状の制約に応じた表示範囲で前記画像取得手段によって取得された画像を表示させるように前記表示手段を制御する表示制御手段と、
    を備えることを特徴とする表示装置。
13. 撮像手段と、
    前記撮像手段から画像を取得する取得手段と、
    前記画像に表示範囲を設定する表示範囲設定手段と、
    取得した前記画像を、前記表示範囲設定手段により設定された表示範囲で表示させるように、ディスプレイ形状に基づいた表示形状の制約がある表示装置に送信する送信手段と、
    を備えることを特徴とする撮像装置。
14. 表示手段を備える電子機器で実行される表示制御方法であって、
    画像を取得する取得ステップと、
    前記画像が表示される前に、前記取得ステップにより取得された画像に対し、当該画像の全体を表示させることなく、且つ当該画像の一部分を表示させるように表示範囲を設定する表示範囲設定ステップと、
    前記表示範囲設定ステップにより設定された表示範囲に基づいて、前記表示手段を制御する表示制御ステップと、
    を含むことを特徴とする表示制御方法。
15. 表示手段を備える電子機器を制御するコンピュータを、
    画像を取得する取得手段、
    前記画像が表示される前に、前記取得手段により取得された画像に対し、当該画像の全体を表示させることなく、且つ当該画像の一部分を表示させるように表示範囲を設定する表示範囲設定手段、
    前記表示範囲設定手段により設定された表示範囲に基づいて、前記表示手段を制御する表示制御手段、
    として機能させることを特徴とするプログラム。

Images