JP5931639B2 - 携帯端末装置、その制御方法およびその制御プログラム - Google Patents

Description

本発明は、カメラで撮像された撮像画像を表示可能に構成された携帯端末装置、その制御方法およびその制御プログラムに関する。

従来、携帯電話、タブレット端末、デジタルカメラなどに代表される撮影機能を有するカメラ付き携帯端末装置がある。当該携帯端末装置は、カメラの撮影範囲が表示画面に表示されるようになっているが、表示画面の位置とカメラの位置とは一致していない（カメラは、表示画面の中央には配置されていない）ことも多い。このような場合、撮影者は、感覚的に被写体を捉えるために表示画面の裏側を被写体に向けて撮影しようとするが、カメラは表示画面の中央には配置されていないことから、被写体の一部が写るか、またはカメラの撮影範囲によっては被写体が全く写らなくなる。

したがって、撮影者は、表示画面を見ながら携帯端末装置を動かし、被写体を捉えるようにカメラの位置を調整する必要がある。また、撮影者は、表示画面を見ながら撮影範囲を決定することになるため、カメラの位置を被写体の位置に合わせた場合に表示画面と被写体との位置がずれることになり、感覚的にも違和感が生じる。このような問題を解決するための技術として、例えば、以下のような技術が開示されている。

特開２０１１−１２４８６１号公報（特許文献１）には、カメラと表示部とが位置ズレしているカメラ付き携帯端末が開示されている。カメラ付き携帯端末は、被写体の目的部分が表示部に写っていない場合に、目的部分が表示部に写るまでカメラのレンズの向きを調整する機能を有する。

特開２００６−１０９０７５号公報（特許文献２）には、レンズ部を介して入射された光を画像データとして取り込むとともに、画像データに基づく画像を表示画面に表示可能な表示部を有する携帯端末が開示されている。携帯端末は、表示画面に表示される画像が、表示画面の反対方向の画像であって表示画面の略中央を中心とする画像となるよう画像データを補正する画像領域補正部を有する。

特開２０１１−１２４８６１号公報 特開２００６−１０９０７５号公報

しかしながら、特許文献１に開示された発明は、カメラを可動式にする必要があることからカメラの構造が複雑となるとともに、カメラの撮影範囲に被写体が写るようにレンズの角度を調整する必要があるため、制御方式も複雑となる。

また、特許文献２に開示された発明は、各種補正パラメータを用いることで画像データを補正することによって、カメラの撮像範囲のうち表示画面の背面に相当する部分のみを表示画面に表示する。すなわち、被写体のうち、カメラの撮像範囲であって、かつ表示画面の背面に相当する部分（被写体の一部分）のみが表示画面に表示される。そのため、例えば、接写して被写体を撮影するために、表示画面の裏側を被写体に向けて被写体と表示画面とを近づけていくと、カメラの撮像範囲から被写体の当該相当部分が徐々に外れていくため、表示画面に何も写らない領域が増加していく。そして、被写体と表示画面とをさらに近づけて、カメラの撮像範囲から当該相当部分が完全に外れてしまうと、（被写体のうち、当該相当部分以外の他の部分がカメラの撮像範囲に入っていたとしても）表示画面に何も表示されなくなってしまう。したがって、接写時において目的の被写体を捉える際のユーザの操作性を向上させるには不十分である。

本発明は、上記のような問題を解決するためになされたものであって、ユーザが接写時において表示画面を見ながら目的の被写体を捉える際の操作性をより向上させることが可能な携帯端末装置、その制御方法、およびその制御プログラムを提供することを目的とする。

ある実施の形態に従うと、画像を撮像するカメラを含む携帯端末装置が提供される。携帯端末装置は、携帯端末装置の一方の面側に設けられ、カメラの視線方向に鉛直な平面上に配置された矩形状のディスプレイと、ディスプレイにカメラで撮像された撮像画像を表示する制御を行なう制御部とを含む。カメラは、ディスプレイが設けられた面と反対側に設けられ、矩形状のディスプレイの中心を起点として、ディスプレイの１つの辺に平行な方向に沿って配置される。制御部は、起点からカメラが配置された方向に沿って撮像画像を所定の量だけずらしてディスプレイに表示させる。

好ましくは、携帯端末装置は、カメラの配置位置と、撮像画像のずらし方向およびずらし量とが関連付けられて格納されたメモリをさらに含む。

好ましくは、携帯端末装置は、カメラの配置位置の選択をユーザから受け付けるための入力部をさらに含む。制御部は、メモリを参照して、選択されたカメラの配置位置と関連付けられたずらし方向およびずらし量に従って、撮像画像をずらしてディスプレイに表示させる。

好ましくは、制御部は、所定の量だけずらされた状態でディスプレイに表示された、撮像画像に対して、所定の画像の読み取り範囲を示す読み取り枠を重ねて表示させる。

好ましくは、携帯端末装置は、カメラで画像を撮像する際の動作モードとして、通常モードおよび接写モードのうちのいずれか一方を設定可能に構成される。制御部は、動作モードが接写モードの場合に、起点からカメラが配置された方向に沿って撮像画像を所定の量だけずらしてディスプレイに表示させる。

別の実施の形態に従うと、画像を撮像するカメラを含む携帯端末装置の制御方法が提供される。携帯端末装置は、携帯端末装置の一方の面側に設けられ、カメラの視線方向に鉛直な平面上に配置された矩形状のディスプレイを含む。カメラは、ディスプレイが設けられた面と反対側に設けられ、矩形状のディスプレイの中心を起点として、ディスプレイの１つの辺に平行な方向に沿って配置される。制御方法は、起点からカメラが配置された方向に沿ってカメラで撮像された撮像画像を所定の量だけずらしてディスプレイに表示するステップを含む。

さらに別の実施の形態に従うと、画像を撮像するカメラを含む携帯端末装置のコンピュータに実行させる制御プログラムが提供される。携帯端末装置は、携帯端末装置の一方の面側に設けられ、カメラの視線方向に鉛直な平面上に配置された矩形状のディスプレイを含む。カメラは、ディスプレイが設けられた面と反対側に設けられ、矩形状のディスプレイの中心を起点として、ディスプレイの１つの辺に平行な方向に沿って配置さる。制御プログラムは、コンピュータに、起点からカメラが配置された方向に沿ってカメラで撮像された撮像画像を所定の量だけずらしてディスプレイに表示するステップを実行させる。

以上によると、ユーザが接写時において表示画面を見ながら目的の被写体を捉える際の操作性をより向上させることが可能となる。

本実施の形態に従う携帯端末装置に関連する比較例としての携帯端末装置の概要を説明するための図である。 本実施の形態に従う携帯端末装置の概要を説明するための図である。 本実施の形態に従う携帯端末装置に関連する比較例としての携帯端末装置を用いた場合の文字読み取り手順を説明するための図である。 本実施の形態に従う携帯端末装置を用いた場合の文字読み取り手順を説明するための図である。 本実施の形態に従う携帯端末装置のハードウェア構成を示すブロック図である。 本実施の形態に従うカメラの携帯端末装置における配置位置の一例を示す図である。 本実施の形態に従う携帯端末装置の主な機能構成を示すブロック図である。 本実施の形態に従う携帯端末装置が提供する情報テーブルを示す図である。 本実施の形態に従う携帯端末装置が実行する撮像画像の表示処理手順を示すフローチャートである。

以下、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。

以下の説明では、携帯端末装置がスマートフォンである場合について説明する。本実施の形態に従う携帯端末装置は、カメラによる撮影機能およびディスプレイによる表示機能を有する装置であれば、種類を問わず任意の装置として実現可能である。例えば、携帯端末装置は、携帯電話、タブレット端末装置、ＰＤＡ（Personal Digital Assistant）、デジタルカメラなどとして実現することもできる。

＜１．概要＞
ここでは、本実施の形態に従う携帯端末装置の概要について比較例を参照しながら説明する。

（１−１．比較例）
まず、本実施の形態に従う携帯端末装置に関連する比較例としての携帯端末装置８００の構成について説明する。

図１は、本実施の形態に従う携帯端末装置に関連する比較例としての携帯端末装置８００の概要を説明するための図である。具体的には、図１（ａ）は、撮影者（ユーザ）が携帯端末装置８００のカメラ８１０を用いて被写体（文字列）を撮影している場面を示す概略図である。図１（ｂ）は、図１（ａ）において携帯端末装置８００をディスプレイ８２０側から見た状態を示す図である。ここで、ユーザは、カメラ８１０で撮像される文字列のうち文字「Ｅ」をディスプレイ８２０の表示画面の中心に表示したいものとする。なお、表示画面の中心とは、表示画面（矩形図形）の重心である。また、中心とは、厳密な中心のみならず、人が概ね中心と感じられるような位置を含む概念である。なお、本願明細書においては、Ｙ軸方向を上下方向、Ｘ軸方向を左右方向として説明する。

図１（ａ）を参照して、カメラ８１０は、携帯端末装置８００本体（筐体）の上部の一方の面側に設けられており、ディスプレイ８２０は、カメラ８１０が設けられた面と反対側に設けられている。より具体的には、カメラ８１０は、ディスプレイ８２０が設けられた面と反対側の面であって、ディスプレイ８２０の表示画面の上部に対応する位置に配置される。また、カメラ８１０は、表示画面の中心から上方向（＋Ｙ方向）に沿った位置に配置される。ユーザが、上記のように構成された携帯端末装置８００を用いて被写体（文字列）を撮影する場合について説明する。

ユーザは、感覚的に表示画面の中心を文字「Ｅ」に向けて撮影しようとする。このとき、ユーザの目線は、表示画面の中心にある（図１（ａ））。しかし、ユーザの感覚とは異なり、文字「Ｅ」は表示画面の下部に表示されており、表示画面と携帯端末装置８００を向けた被写体（文字「Ｅ」）との位置にずれが生じていることがわかる（図１（ｂ））。これは、カメラ８１０が表示画面の中心に対応する位置に配置されていない（表示画面の上部に対応する位置に配置されている）ためである。

このことから、表示画面の中心に文字「Ｅ」を表示させるためには、実際には携帯端末装置８００の位置を下方向（−Ｙ方向）に動かして、カメラ８１０の位置に文字「Ｅ」の位置を合わせる操作が必要となる。しかし、このとき表示画面と文字「Ｅ」との位置がずれてしまうため、感覚的な違和感をユーザに生じさせることになる。したがって、ユーザがこのような操作を適切に行なうためには、ある程度当該操作に慣れておく必要がある。

（１−２．携帯端末装置１０）
次に、本実施の形態に従う携帯端末装置１０の構成について説明する。

図２は、本実施の形態に従う携帯端末装置１０の概要を説明するための図である。具体的には、図２（ａ）は、ユーザが携帯端末装置１０のカメラ１８０を用いて被写体（文字列）を撮影している場面を示す概略図である。図２（ｂ）は、図２（ａ）において携帯端末装置１０をディスプレイ１４０側から見た状態を示す図である。図１の場合と同様に、ここで、図１で説明した場合と同様に、ユーザは、カメラ１８０で撮像される文字列のうち文字「Ｅ」を表示画面の中心に表示したいものとする。

図２（ａ）を参照して、カメラ１８０は、携帯端末装置１０本体の上部の一方の面側に設けられており、ディスプレイ１４０は、カメラ１８０が設けられた面と反対側に設けられている。すなわち、携帯端末装置１０におけるカメラ１８０およびディスプレイ１４０の位置関係は、携帯端末装置８００におけるカメラ８１０およびディスプレイ８２０の位置関係と同様である。

ユーザは、感覚的にディスプレイ１４０の表示画面の中心を文字「Ｅ」に向けて撮影しようとするため、ユーザの目線は、表示画面の中心にある（図２（ａ））。このとき、文字「Ｅ」は、表示画面の略中心に表示されており、表示画面の下半分の領域には何も表示されていないことがわかる（図２（ｂ））。具体的には、カメラ１８０が表示画面の上部に対応する位置に配置されていることから、携帯端末装置１０は、カメラ１８０が撮像した撮像画像を上方向に半分だけずらしてディスプレイ１４０に表示させる。例えば、携帯端末装置１０は、撮像画像のうち表示画面の下半分の領域に対応する画像を抽出して、当該抽出した画像を表示画面の上半分の領域に表示させる。

ここで、図１（ｂ）におけるディスプレイ８２０の表示画面と比較すると、図２（ｂ）におけるディスプレイ１４０の表示画面は、撮像された文字列が上方向に半分ずれていることがわかる。そのため、携帯端末装置１０においては、文字「Ｅ」が表示画面の略中心に表示されることになるため、表示画面と文字「Ｅ」との位置ずれが軽減され、ユーザの感覚的な違和感を抑制することができる。

なお、上記では、本実施の形態に従う携帯端末装置１０におけるカメラ１８０が、ディスプレイ１４０が設けられた面と反対側の面であって、ディスプレイ１４０の表示画面の上部に対応する位置に配置されている場合について説明したが、これに限られない。例えば、カメラ１８０は、ディスプレイ１４０が設けられた面と反対側の面であって、ディスプレイ１４０の中心を起点として、ディスプレイ１４０の１つの辺に平行な方向に沿って配置されていればよい。この場合、携帯端末装置１０は、当該起点からカメラ１８０が配置された方向に沿って撮像画像を所定の量だけずらしてディスプレイ１４０に表示させる。例えば、カメラ１８０が、当該起点から下方向であって、表示画面の下部に対応する位置に配置されている場合には、携帯端末装置１０は、撮像画像を下方向に半分だけずらしてディスプレイ１４０に表示させる。

（１−３．使用場面）
次に、本実施の形態に従う携帯端末装置１０の具体的な使用場面について、携帯端末装置８００と比較しながら説明する。ここでは、ユーザが、所定の画像の読み取り範囲を示す読み取り枠が表示された表示画面を見ながら文字を接写して撮影することにより、当該読み取り枠の中に所望の文字を入れて文字読み取りを行なう場面を想定する。具体的には、ユーザは、被写体の文字列のうち文字「Ｅ」を読み取り枠の中に入れて文字読み取りを行なうものとする。

まず、ユーザが携帯端末装置８００を用いて文字読み取りを行なう場合について説明する。

図３は、本実施の形態に従う携帯端末装置１０に関連する比較例としての携帯端末装置８００を用いた場合の文字読み取り手順を説明するための図である。具体的には、図３（ａ１）は、ユーザが携帯端末装置８００のカメラ８１０を用いて被写体（文字列）を撮影している場面を示す概略図である。図３（ａ２）は、図３（ａ１）において携帯端末装置８００をディスプレイ８２０側から見た状態を示す図である。図３（ｂ１）は、ユーザが図３（ａ１）の状態から所望の文字を枠内に入れるように携帯端末装置８００を動かした（操作した）後の場面を示す概略図である。図３（ｂ２）は、図３（ｂ１）において携帯端末装置８００をディスプレイ８２０側から見た状態を示す図である。

図３を参照して、ユーザは、表示画面の中心を文字「Ｅ」に向けて撮影しようとする（図３（ａ１））。このとき、読み取り枠８２２は、表示画面の中央部に表示されている（図３（ａ２））。換言すると、読み取り枠８２２は、ディスプレイ８２０に表示された撮像画像の中央部に重ねて表示される。図１で説明したように、カメラ８１０と表示画面とは位置ずれしているため、この状態では、読み取り枠８２２の中に、文字「Ｅ」が入っていないことがわかる。ユーザは、文字「Ｅ」を読み取り枠８２２の中に入れるために、カメラ８１０の（視線方向の）位置が文字「Ｅ」の位置に合うまで携帯端末装置８００本体を下方向に（−Ｙ方向）に動かす（操作する）必要がある。

カメラ８１０の位置が文字「Ｅ」の位置に合うように、ユーザが携帯端末装置８００本体を下方向に動かした結果（図３（ｂ１））、文字「Ｅ」が読み取り枠８２２の中に入って表示されていることがわかる（図３（ｂ２））。したがって、ユーザは、携帯端末装置８００に対して、タッチパネル（またはボタン）を介して文字を読み取るための所定の指示を行なうことにより、文字「Ｅ」の読み取り処理を実行させる。なお、文字「Ｅ」の大きさを読み取り枠の大きさに近づける（拡大表示させる）ために、ユーザは、携帯端末装置８００を前後方向（Ｚ軸方向）に動かして文字「Ｅ」との距離を調整してもよい。

次に、ユーザが本実施の形態に従う携帯端末装置１０を用いて文字読み取りを行なう場合について説明する。

図４は、本実施の形態に従う携帯端末装置１０を用いた場合の文字読み取り手順を説明するための図である。具体的には、図４（ａ１）は、ユーザが携帯端末装置１０のカメラ１８０を用いて被写体（文字列）を撮像している場面を示す概略図である。図４（ａ２）は、図４（ａ１）において携帯端末装置１０をディスプレイ１４０側から見た状態を示す図である。図４（ｂ１）は、ユーザが図４（ａ１）の状態から所望の文字を枠内に入れるように携帯端末装置１０を動かした（操作した）後の場面を示す図である。図４（ｂ２）は、図４（ｂ１）において携帯端末装置１０をディスプレイ１４０側から見た状態を示す図である。

図４を参照して、ユーザは、表示画面の中心を文字「Ｅ」に向けて撮影しようとする（図４（ａ１））。このとき、読み取り枠１４２は、ディスプレイ１４０に表示された撮像画像の中央部に重ねて表示される（図４（ａ２））。より具体的には、読み取り枠１４２は、上方向に半分だけずらされた状態でディスプレイ１４０に表示された撮像画像の中央部に重ねて表示される。図２で説明したように、ディスプレイ８２０の表示画面と比較すると、ディスプレイ１４０の表示画面では、表示画面と文字「Ｅ」との位置ずれが軽減されているため、この状態でも、読み取り枠１４２の中に文字「Ｅ」が一部入っていることがわかる。そのため、ユーザは、携帯端末装置１０を少し位置調整すれば文字「Ｅ」を読み取り枠１４２の中に完全に入れることができる。具体的には、ユーザは、携帯端末装置１０本体を下方向に（−Ｙ方向）に若干動かす（操作する）だけでよい。

ユーザが、携帯端末装置１０本体を下方向に少し動かすだけで（図４（ｂ１））、文字「Ｅ」が読み取り枠１４２の中に完全に入っていることがわかる（図４（ｂ２））。そして、ユーザは、携帯端末装置１０に対して、タッチパネル（またはボタン）を介して文字を読み取るための所定の指示を行なうことにより、文字「Ｅ」の読み取り処理を実行させることができる。なお、ユーザは、携帯端末装置１０を前後方向（Ｚ軸方向）に動かして文字「Ｅ」との距離を調整して、文字「Ｅ」の大きさを読み取り枠の大きさに近づけてもよい。

以上から、ユーザが、本実施の形態に従う携帯端末装置１０を用いて、読み取り枠１４２に文字「Ｅ」を入れるために携帯端末装置１０本体を動かす距離は、ユーザが携帯端末装置８００を用いて、読み取り枠８２２に文字「Ｅ」を入れるために携帯端末装置８００本体を動かす距離よりも小さいことがわかる。これは、本実施の形態に従う携帯端末装置１０を用いることにより、表示画面と文字「Ｅ」との位置ずれが軽減されているためである。また、操作時のユーザの感覚的な違和感を抑制することになるため、ユーザが接写時において表示画面を見ながら目的の被写体を捉える際の操作性をより向上させることが可能となる。

＜２．ハードウェア構成＞
本実施の形態に従う携帯端末装置１０のハードウェア構成について説明する。

図５は、本実施の形態に従う携帯端末装置１０のハードウェア構成を示すブロック図である。

図５を参照して、携帯端末装置１０は、主たる構成要素として、ＣＰＵ（Central Processing Unit）１００と、メモリ１１０と、タッチパネル１２０と、ボタン１３０と、ディスプレイ１４０と、無線通信部１５０と、通信アンテナ１５２と、マイク１６０と、レシーバ１７０と、カメラ１８０と、外部インターフェイス（Ｉ／Ｆ）１９０とを含む。

ＣＰＵ１００は、メモリ１１０に記憶されたプログラムを読み出して実行することで、携帯端末装置１０の各部の動作を制御する。より詳細にはＣＰＵ１００は、当該プログラムを実行することによって、後述する携帯端末装置１０の処理（ステップ）の各々を実現する。ＣＰＵ１００は、例えば、マイクロプロセッサ（Microprocessor）である。なお、当該ハードウェアは、ＣＰＵ以外のＦＰＧＡ（Field Programmable Gate Array）、ＡＳＩＣ（Application Specific Integrated Circuit）およびその他の演算機能を有する回路などであってもよい。

メモリ１１０は、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read-Only Memory）、ハードディスクなどによって実現される。メモリ１１０は、ＣＰＵ１００によって実行されるプログラム、データなどを記憶する。メモリ１１０は、例えば、カメラ１８０で撮像された撮像画像、後述する情報テーブルなどを格納する。

タッチパネル１２０は、表示部としての機能を有するディスプレイ１４０上に設けられる。タッチパネル１２０は、抵抗膜方式、表面弾性波方式、赤外線方式、電磁誘導方式、静電容量方式などのいずれのタイプであってもよいし、光センサ液晶を含んでもよい。タッチパネル１２０は、外部の物体によるタッチパネルへのタッチ操作を検知して、タッチ座標（タッチ位置）をＣＰＵ１００に入力する。

ボタン１３０は、携帯端末装置１０の本体部分の表面に配置されており、ユーザからの指示を受け付けて、ＣＰＵ１００に入力する。ボタン１３０は、例えば、表示画面を遷移させる画面遷移ボタン、確定ボタン、キャンセルボタンなどを含む。

ディスプレイ１４０は、ＣＰＵ１００からの信号に基づいて、表示画面に画像やテキストなどを表示する。ディスプレイ１４０は、矩形状であり、携帯端末装置１０本体（筐体）の一方の面側に設けられ、カメラ１８０の視線方向に鉛直な平面上に配置される。

無線通信部１５０は、通信アンテナ１５２を介して移動体通信網に接続し無線通信のための信号の送受信を行なう。すなわち、無線通信部１５０は、ＣＰＵ１００からの通信データを通信信号に変換し、その通信信号を通信アンテナ１５２を介して送信したり、通信アンテナ１５２を介して受信した通信信号を通信データに変換し、その通信データをＣＰＵ１００に入力したりする。これにより、携帯端末装置１０は、たとえば、第３世代移動通信システム（３Ｇ）、ＬＴＥ（Long Term Evolution）などの移動体通信網を介して通信装置との通信が可能となる。

マイク１６０は、通話の際に音声を入力し、レシーバ１７０は、通話の際に音声を出力する。

カメラ１８０は、ＣＣＤ（Coupled Charged Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）センサなどの撮像デバイスを含む。カメラ１８０は、ズーム倍率を変更するためのズーム機能および焦点距離を調整するためのフォーカス機能などを有していてもよい。また、カメラ１８０は、携帯端末装置１０本体（筐体）におけるディスプレイ１４０が設けられた面と反対側に設けられ、矩形状のディスプレイ１４０の中心を起点として、ディスプレイ１４０の１つの辺に平行な方向に沿って配置される。

図６は、本実施の形態に従うカメラ１８０の携帯端末装置１０における配置位置の一例を示す図である。

図６を参照して、カメラ１８０は、ある局面では、ディスプレイ１４０が設けられた面と反対側の面であって、表示画面の上部に対応する領域１、または表示画面の下部に対応する領域２に配置される。すなわち、カメラ１８０は、ディスプレイ１４０の（表示画面の）中心を起点として、ディスプレイ１４０の左辺または右辺に平行な方向に沿って配置される。

また、カメラ１８０は、別の局面では、ディスプレイ１４０が設けられた面と反対側の面であって、表示画面の左部に対応する領域３、または表示画面の右部に対応する領域４に配置されていてもよい。すなわち、カメラ１８０は、ディスプレイ１４０の中心を起点として、ディスプレイ１４０の上辺または下辺に平行な方向に沿って配置される。

また、カメラ１８０は、さらに別の局面では、ディスプレイ１４０が設けられた面と反対側の面であって、ディスプレイ１４０の中心に対応する領域５に配置されていてもよい。

再び、図５を参照して、外部インターフェイス（Ｉ／Ｆ）１９０は、通信インターフェイスおよびメモリインターフェイスを含む。通信インターフェイスは、携帯端末装置１０と外部装置との間で各種データをやり取りするためのものであり、アダプタやコネクタなどによって実現される。なお、通信方式としては、Ｂｌｕｅｔｏｏｔｈ（登録商標）、無線ＬＡＮ（Local Area Network）による無線通信であってもよいし、ＵＳＢ（Universal Serial Bus）を利用した有線通信であってもよい。

メモリインターフェイスは、外部の記憶媒体からデータを読み出す。すなわち、ＣＰＵ１００は、メモリインターフェイスを介して外部の記憶媒体に格納されているデータを読み出して、当該データをメモリ１１０に格納する。ＣＰＵ１００は、メモリ１１０からデータを読み出して、メモリインターフェイスを介して当該データを外部の記憶媒体に格納する。なお、記憶媒体としては、ＣＤ（Compact Disc）、ＤＶＤ（Digital Versatile Disk）、ＢＤ（Blu-ray Disc）、ＵＳＢ（Universal Serial Bus）メモリ、メモリカード、ＦＤ（Flexible Disk）、ハードディスク、磁気テープ、カセットテープ、ＭＯ（Magnetic Optical Disc）、ＭＤ（Mini Disc）、ＩＣ（Integrated Circuit）カード（メモリカードを除く）、光カード、ＥＰＲＯＭ、ＥＥＰＲＯＭ（Electronically Erasable Programmable Read-Only Memory）などの、不揮発的にプログラムを格納する媒体が挙げられる。

＜３．機能構成＞
次に、携帯端末装置１０の主な機能構成について説明する。

図７は、本実施の形態に従う携帯端末装置１０の主な機能構成を示すブロック図である。

図７を参照して、携帯端末装置１０は、主な機能構成として、情報格納部２１０と、入力部２２０と、モード判定部２３０と、表示制御部２４０とを含む。モード判定部２３０と、表示制御部２４０とは、基本的には、携帯端末装置１０のＣＰＵ１００がメモリ１１０に格納されたプログラムを実行し、携帯端末装置１０の構成要素へ指令を与えることなどによって実現される。すなわち、ＣＰＵ１００は携帯端末装置１０の動作全体を制御する制御部としての機能を有する。なお、これらの機能構成の一部または全部はハードウェアで実現されていてもよい。

情報格納部２１０は、携帯端末装置１０におけるカメラ１８０の配置位置に応じて、撮像画像をどの方向に、どの程度ずらすのかを予め定めた情報テーブル２１２を格納している。情報格納部２１０は、主に、メモリ１１０によって実現される機能である。

図８は、本実施の形態に従う携帯端末装置１０が提供する情報テーブル２１２を示す図である。

図８を参照して、情報テーブル２１２には、カメラ１８０の配置位置と、カメラ１８０で撮像された撮像画像のずらし方向およびずらし量とが関連付けられていることを示している。例えば、カメラ１８０が表示画面の上部に対応する位置に配置されている場合には（図６の領域１の場合）、携帯端末装置１０は、撮像画像を上方向に半分だけずらして表示させる。携帯端末装置１０は、カメラ１８０が表示画面の下部に対応する位置に配置されている場合には（図６において領域２の場合）、撮像画像を下方向に半分だけずらして表示させ、カメラ１８０が表示画面の左部に対応する位置に配置されている場合には（図６において領域３の場合）、撮像画像を左方向に半分だけずらして表示させ、カメラ１８０が表示画面の右部に対応する位置に配置されている場合には（図６において領域４の場合）、撮像画像を右方向に半分だけずらして表示させる。そして、携帯端末装置１０は、カメラ１８０が表示画面の中心に対応する位置に配置されている場合には（図６において領域５の場合）、カメラ１８０の撮像範囲をそのまま表示画面に表示する。すなわち、携帯端末装置１０は、撮像画像をずらさずにそのまま表示させる。

再び、図７を参照して、入力部２２０は、カメラ１８０の配置位置の選択をユーザから受け付ける。より具体的には、入力部２２０は、例えば、情報格納部２１０に格納されているカメラ１８０の配置位置の選択を行なうためのユーザインターフェイス画面上でユーザからの入力（選択）を受け付ける。そして、入力部２２０は、選択結果を表示制御部２４０に対して出力する。なお、入力部２２０は、主に、ＣＰＵ１００とタッチパネル１２０（またはボタン１３０）とが連係して動作することで実現される機能である。

モード判定部２３０は、カメラ１８０で画像を撮像する際の携帯端末装置１０の動作モードを判定する。ここで、携帯端末装置１０は、当該動作モードとして、接写モードおよび通常モードを設定可能に構成されている。接写モードとは、カメラ１８０から比較的近い位置に存在する被写体を撮影するときのモードであり、近接した位置に焦点を合わして撮影することができる。通常モードとは、接写モードではないモードである。すなわち、モード判定部２３０は、携帯端末装置１０の動作モードが、接写モードなのか通常モードなのかを判定する。当該動作モードは、携帯端末装置１０が上述した文字読み取り処理を行なう場合などに自動的に切り替わるものであってもよいし、タッチパネル１２０などを介したユーザによる指示によって切り替え可能であってもよい。

表示制御部２４０は、ある局面では、ディスプレイ１４０の中心（起点）からカメラ１８０が配置された方向に沿って撮像画像を所定の量だけずらしてディスプレイ１４０に表示させる。表示制御部２４０は、別の局面では、情報格納部２１０（メモリ１１０）を参照して、ユーザが選択したカメラ１８０の配置位置と関連付けられたずらし方向およびずらし量に従って、撮像画像をずらしてディスプレイ１４０に表示させる。また、表示制御部２４０は、さらに別の局面では、所定の量だけずらされた状態でディスプレイ１４０に表示された撮像画像に対して、所定の画像の読み取り範囲を示す読み取り枠を重ねて表示させる。より具体的には、携帯端末装置１０が、画像や文字を読み取るための読み取りモードである場合に、表示制御部２４０は、当該読み取り枠を表示させる。

また、表示制御部２４０は、モード判定部２３０によって動作モードが接写モードであると判定された場合に、当該起点からカメラ１８０が配置された方向に沿って撮像画像を所定の量だけずらしてディスプレイ１４０に表示させてもよい。

＜４．処理例＞
次に、携帯端末装置１０が撮像画像を表示する際に実行する表示処理手順について説明する。

図９は、本実施の形態に従う携帯端末装置１０が実行する撮像画像の表示処理手順を示すフローチャートである。

図９を参照して、携帯端末装置１０のＣＰＵ１００は、タッチパネル１２０を介してユーザからカメラ１８０の起動指示を受け付けたか否かを判断する（ステップＳ１０２）。なお、当該起動指示には、カメラ１８０を使用するアプリケーションを起動するような指示を含む。カメラ１８０を使用するアプリケーションとは、例えば、文字読み取りのアプリケーションのように、アプリケーションを起動するとカメラ１８０が自動的に起動されるようなものである。

ＣＰＵ１００は、カメラ１８０の起動指示を受け付けていない場合には（ステップＳ１０２においてＮＯの場合）、ステップＳ１０２の処理を繰り返す。これに対して、ＣＰＵ１００は、当該起動指示を受け付けた場合には（ステップＳ１０２においてＹＥＳの場合）、カメラ１８０で画像を撮像する際の携帯端末装置１０の動作モードが、接写モードか否かを判断する（ステップＳ１０４）。

動作モードが、接写モードではない（通常モードである）場合には（ステップＳ１０４においてＮＯの場合）、撮像画像を通常通り表示する（ステップＳ１１２）。より具体的には、ＣＰＵ１００は、撮像画像のずらし処理を行なわずに（撮像画像をずらすことなく）、撮像画像をそのまま表示する。

これに対して、動作モードが、接写モードである場合には（ステップＳ１０４においてＹＥＳの場合）、ＣＰＵ１００は、携帯端末装置１０におけるカメラ１８０の配置位置がメモリ１１０に記憶（登録）されているか否かを判断する（ステップＳ１０６）。

カメラ１８０の配置位置がメモリ１１０に記憶されている場合には（ステップＳ１０６においてＹＥＳの場合）、ＣＰＵ１００は、メモリ１１０を参照して、カメラ１８０の配置位置に関連付けられたずらし方向およびずらし量に従って、撮像画像をずらしてディスプレイ１４０に表示する（ステップＳ１０８）。より具体的には、ＣＰＵ１００は、情報テーブル２１２を参照して、カメラ１８０が表示画面の上部に対応する位置（領域１）に配置されている場合には上方向に撮像画像を半分だけずらしてディスプレイ１４０に表示する。例えば、ＣＰＵ１００は、撮像画像のうち表示画面の下半分の領域に対応する画像を抽出して、当該抽出した画像を表示画面の上半分の領域に表示させる。あるいは、ＣＰＵ１００は、撮像画像のうち表示画面の上半分の領域に対応する画像をカットし、残余の下半分の領域に対応する画像を上方向に半分だけずらしてディスプレイ１４０に表示させてもよい。

また、ＣＰＵ１００は、カメラ１８０が下部に対応する位置（領域２）に配置されている場合には下方向に、左部に対応する位置（領域３）に配置されている場合には左方向に、右部に対応する位置（領域４）に配置されている場合には右方向に、撮像画像を半分だけずらしてディスプレイ１４０に表示する。また、ＣＰＵ１００は、カメラ１８０の位置が表示画面の中心に対応する位置（領域５）に配置されている場合には、撮像画像をずらさずにそのまま表示する。そして、ＣＰＵ１００は、処理を終了する。

これに対して、カメラ１８０の配置位置がメモリ１１０に記憶されていない場合には（ステップＳ１０６においてＮＯの場合）、ＣＰＵ１００は、タッチパネル１２０を介してユーザからカメラ１８０の配置位置の選択を受け付けたか否かを判断する（ステップＳ１１０）。当該選択を受け付けていない場合には（ステップＳ１１０においてＮＯの場合）、ＣＰＵ１００は、ステップＳ１１０の処理を繰り返す。これに対して、当該選択を受け付けた場合には（ステップＳ１１０においてＹＥＳの場合）、ＣＰＵ１００は、上述したステップＳ１０８の処理を実行する。そして、ＣＰＵ１００は、処理を終了する。

＜５．その他の実施の形態＞
上記では、カメラ１８０の位置が表示画面の上下左右部（領域１〜領域４）または中心（領域５）に位置する場合について説明したが、これに限られない。例えば、カメラ１８０の位置が、図６で説明した領域１および領域５の中間にある場合、領域２および領域５の中間にある場合、領域３および領域５の中間にある場合、領域４および領域５の中間にある場合であってもよい。そして、図８で説明した情報テーブル２１２に、これらの配置位置とずらし方向およびずらし量とがさらに関連付けられている場合であってもよい。例えば、カメラ１８０が領域１および領域５の中間にある場合には、上方向に撮像画像を４分の１だけずらしてディスプレイ１４０に表示してもよい。

上記では、カメラ１８０の位置が表示画面の上下左右部にある場合には、撮像画像のずらし量が表示画面の半分である場合について説明したが、必ずしもこれに限られない。なお、ずらし量は、ユーザが設定可能であってもよい。

なお、コンピュータを機能させて、上述のフローチャートで説明したような制御を実行させるプログラムを提供することもできる。このようなプログラムは、コンピュータに付属するフレキシブルディスク、ＣＤ−ＲＯＭ（Compact Disk Read Only Memory）、ＲＯＭ、ＲＡＭおよびメモリカードなどの一時的でないコンピュータ読取り可能な記録媒体にて記録させて、プログラム製品として提供することもできる。あるいは、コンピュータに内蔵するハードディスクなどの記録媒体にて記録させて、プログラムを提供することもできる。また、ネットワークを介したダウンロードによって、プログラムを提供することもできる。

プログラムは、コンピュータのオペレーティングシステム（ＯＳ）の一部として提供されるプログラムモジュールのうち、必要なモジュールを所定の配列で所定のタイミングで呼出して処理を実行させるものであってもよい。その場合、プログラム自体には上記モジュールが含まれずＯＳと協働して処理が実行される。このようなモジュールを含まないプログラムも、本実施の形態にかかるプログラムに含まれ得る。

また、本実施の形態にかかるプログラムは他のプログラムの一部に組込まれて提供されるものであってもよい。その場合にも、プログラム自体には上記他のプログラムに含まれるモジュールが含まれず、他のプログラムと協働して処理が実行される。このような他のプログラムに組込まれたプログラムも、本実施の形態にかかるプログラムに含まれ得る。

＜６．利点＞
本実施の形態によれば、表示画面の位置とカメラの位置とがずれている場合であっても、表示画面と被写体との位置ずれが軽減される。そのため、ユーザの感覚的な違和感を抑制でき、ユーザが接写時において表示画面を見ながら目的の被写体を捉える際の操作性をより向上させることが可能となる。文字認識による辞書機能の利用する場合や、バーコード等を読み取る場合などのように、接写して撮影しなければならないような場合に、特に有用である。

また、カメラと被写体との距離やディスプレイの寸法などのパラメータを用いないため、複雑な計算処理が不要であり、カメラの配置位置が異なる様々な機種において適用することができる。

今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した説明ではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。

１０，８００ 携帯端末装置、１００ ＣＰＵ、１１０ メモリ、１２０ タッチパネル１２０ ボタン、１４０，８２０ ディスプレイ、１４２，８２２ 読み取り枠、１５０ 無線通信部、１５２ 通信アンテナ、１６０ マイク、１７０ レシーバ、１８０，８１０ カメラ、２１０ 情報格納部、２１２ 情報テーブル、２２０ 入力部、２３０ モード判定部、２４０ 表示制御部。

Claims (5)

1. 画像を撮像するカメラを含む携帯端末装置であって、
   前記携帯端末装置の一方の面側に設けられ、前記カメラの視線方向に鉛直な平面上に配置された矩形状のディスプレイと、
   前記ディスプレイに前記カメラで撮像された撮像画像を表示する制御を行なう制御部とを備え、
   前記カメラは、前記ディスプレイが設けられた面と反対側に設けられ、前記矩形状のディスプレイの中心を起点として、前記ディスプレイの１つの辺に平行な方向に沿って配置され、
   前記カメラの配置位置と、前記撮像画像のずらし方向およびずらし量とが関連付けられて格納されたメモリと、
   前記カメラの配置位置の選択をユーザから受け付けるための入力部とをさらに備え、
   前記ずらし方向は、前記起点から前記カメラの配置位置への方向であり、
   前記制御部は、前記メモリを参照して、前記選択された前記カメラの配置位置と関連付けられた前記ずらし方向および前記ずらし量に従って、前記撮像画像をずらして前記ディスプレイに表示させる、携帯端末装置。
2. 前記制御部は、前記ずらし量だけずらされた状態で前記ディスプレイに表示された、前記撮像画像に対して、所定の画像の読み取り範囲を示す読み取り枠を重ねて表示させる、請求項１に記載の携帯端末装置。
3. 前記携帯端末装置は、前記カメラで画像を撮像する際の動作モードとして、通常モードおよび接写モードのうちのいずれか一方を設定可能に構成され、
   前記制御部は、前記動作モードが前記接写モードの場合に、前記起点から前記カメラが配置された方向に沿って前記撮像画像を前記ずらし量だけずらして前記ディスプレイに表示させる、請求項１または２に記載の携帯端末装置。
4. 画像を撮像するカメラを含む携帯端末装置の制御方法であって、
   前記携帯端末装置は、
   前記携帯端末装置の一方の面側に設けられ、前記カメラの視線方向に鉛直な平面上に配置された矩形状のディスプレイと、前記カメラの配置位置と前記カメラで撮像された撮像画像のずらし方向およびずらし量とが関連付けられて格納されたメモリとを含み、
   前記カメラは、前記ディスプレイが設けられた面と反対側に設けられ、前記矩形状のディスプレイの中心を起点として、前記ディスプレイの１つの辺に平行な方向に沿って配置され、
   前記ずらし方向は、前記起点から前記カメラの配置位置への方向であり、
   前記制御方法は、
   前記メモリを参照して、前記選択された前記カメラの配置位置と関連付けられた前記ずらし方向および前記ずらし量に従って、前記撮像画像をずらして前記ディスプレイに表示するステップを含む、携帯端末装置の制御方法。
5. 画像を撮像するカメラを含む携帯端末装置のコンピュータに実行させる制御プログラムであって、
   前記携帯端末装置は、
   前記携帯端末装置の一方の面側に設けられ、前記カメラの視線方向に鉛直な平面上に配置された矩形状のディスプレイと、前記カメラの配置位置と、前記カメラで撮像された撮像画像のずらし方向およびずらし量とが関連付けられて格納されたメモリとを含み、
   前記カメラは、前記ディスプレイが設けられた面と反対側に設けられ、前記矩形状のディスプレイの中心を起点として、前記ディスプレイの１つの辺に平行な方向に沿って配置され、
   前記ずらし方向は、前記起点から前記カメラの配置位置への方向であり、
   前記制御プログラムは、前記コンピュータに、
   前記メモリを参照して、前記選択された前記カメラの配置位置と関連付けられた前記ずらし方向および前記ずらし量に従って、前記撮像画像をずらして前記ディスプレイに表示するステップを実行させる、携帯端末装置の制御プログラム。

Images