JP2008042568A - 移動体通信端末、および、プログラム - Google Patents

Abstract

【課題】使い勝手のよい動画撮像を実現する。
【解決手段】制御部１００は、縦位置の移動体通信端末１で動画撮像をおこなう場合、開閉角度センサ５０が検出する移動体通信端末１の開閉角度に基づいて、表示部４０から被写体に向かう表示装置方向と、撮像レンズＬＺから被写体に向かうレンズ方向とのなす角度を算出する。制御部１００は、角度が生じていない場合は、設定情報格納領域７２に予め格納されている設定情報に基づいて、撮像素子２１による撮像画像から抽出する範囲を決定する。一方、角度が生じている場合は、設定情報に基づく抽出範囲から当該角度に応じてシフトさせるシフト量を算出し、算出したシフト量に応じた位置で抽出範囲を決定する。制御部１００は、決定した抽出範囲で動画像を抽出して表示部４０や画像格納領域７１に出力する。これにより、表示部４０からの被写体方向を示す動画像を得ることができる。
【選択図】図２

Description

本発明は、移動体通信端末、および、プログラムに関し、特に、動画撮像機能を有する移動体通信端末、および、プログラムに関する。

携帯電話などの移動体通信端末には、ＣＣＤ（Charge Coupled Device：電荷結合素子）などの撮像素子を用いたカメラ機能を備えているものが多く、スチル画像のみならず、動画像の撮像をおこなえることが一般的になっている。

移動体通信端末の外形形状は、略長方形である場合が多く、一般的には、縦長方向となるように保持されて利用されることが多い。また、撮像に用いられる撮像素子も長方形形状であることが一般的であり、移動体通信端末が縦長方向となるように保持された場合、撮像画像の画角も縦長方向となる。

このような画角の撮像画像は、スチル画像であれば問題ないが、画面のアスペクト比が横長で固定される動画像の場合は縦横比が合わない。よって、画角が縦長方向となる状態で動画を撮像する場合、通常、撮像された画像の一部を動画像のアスペクト比に合わせて抽出することで対応している。

ここで、近時の移動体通信端末は、デザイン性や機能性に応じて、筐体の形態が様々であり、カメラ機能に用いるレンズや撮像画像を表示する表示装置の配置も多様である（例えば、特許文献１）。

このため、２つの筐体で構成される折りたたみ式の移動体通信端末において、レンズと表示装置とがそれぞれ異なる筐体に配置される形態も存在する。このような形態の移動体通信端末で上記のような画像抽出を伴う動画撮像をおこなった場合、筐体を開いた角度によっては、レンズが写している方向と表示画面の方向とが一致しない。このような場合、実際に撮像される画像と撮影者の撮影感覚とにズレが生じてしまい、動画撮影時の使い勝手が悪かった。
特開２００５−３２３３３６号公報

本発明は、上記実状に鑑みてなされたものであり、撮影時の使い勝手を向上した移動体通信端末、および、プログラムを提供することを目的とする。

上記目的を達成するため、本発明の第１の観点にかかる移動体通信端末は、
一の筐体に配置された撮像レンズと、
前記撮像レンズへの入射光に基づいて撮像画像を生成する撮像素子と、
前記撮像素子が生成した撮像画像の一部を抽出する画像抽出手段と、
前記一の筐体と対をなす他の筐体に配置され、少なくとも前記画像抽出手段が抽出した画像を表示する表示装置と、を備えた、一対の前記筐体から構成される折りたたみ型の移動体通信端末であって、
少なくとも被写体に対する前記撮像レンズの方向と該被写体に対する前記表示装置の方向に基づいて、前記画像抽出手段が抽出する範囲を決定する抽出範囲決定手段を備える、
ことを特徴とする。

上記移動体通信端末において、
前記抽出範囲決定手段は、前記被写体に対する前記撮像レンズと前記表示装置の方向がなす角度を特定する角度特定手段をさらに備えていることが望ましく、この場合、
前記角度特定手段が特定した角度に基づいて抽出範囲を決定することが望ましい。

上記移動体通信端末において、
前記角度特定手段は、前記筐体の開閉角度に基づいて、前記被写体に対する前記撮像レンズと前記表示装置の方向がなす角度を特定することが望ましい。

上記移動体通信端末は、
撮像時のズーム動作を制御するズーム制御手段をさらに備えていることが望ましく、この場合、
前記抽出範囲決定手段は、少なくとも、前記被写体に対する前記撮像レンズと前記表示装置の方向と、前記ズーム制御手段による撮像時のズーム量と、に基づいて、前記抽出範囲を決定することが望ましい。

上記移動体通信端末は、
少なくとも、前記ズーム動作によるズーム量と、所定の抽出範囲とを予め対応づけた設定情報を記憶する設定情報記憶手段をさらに備えていることが望ましく、この場合、
前記ズーム制御手段は、前記設定情報が示す抽出範囲に基づいて、前記ズーム動作の可能範囲を制限することが望ましい。

上記目的を達成するため、本発明の第２の観点にかかるプログラムは、
撮像レンズが配置された一の筐体と、表示装置が配置された前記一の筐体と対をなす他の筐体とから構成された撮像機能を有する移動体通信端末を制御するコンピュータに、
前記撮像機能によって動画撮像がおこなわれる場合に、筐体方向が縦方向であるか否かを判別する機能と、
前記筐体方向が縦方向である場合、前記撮像レンズの撮像方向と、前記表示装置の表示方向とのなす角度を算出する機能と、
算出した角度に基づいて、撮像された動画像の抽出範囲を決定して抽出する機能と、
前記撮像機能がズーム機能を有している場合、前記算出した角度とズーム量とに基づいて、撮像された動画像の抽出範囲を決定して抽出する機能と、
を実現させることを特徴とする。

本発明によれば、被写体に対する撮像レンズと表示装置の方向に基づいて抽出範囲を決定するので、撮像方向と表示方向に角度差がある場合でも、表示方向と実際に写る範囲が同一方向となり、撮影時の使い勝手が向上する。

以下、本発明にかかる実施形態を、図面を参照して説明する。本実施形態にかかる移動体通信端末１は、例えば、携帯電話やＰＨＳ（Personal Handyphone System）等といった移動体通信用の端末装置（電話機）であり、本実施形態では、動画像を含む画像を撮像可能な撮像機能（カメラ機能）を備えているものとする。

このような移動体通信端末１の構成を、図面を参照して説明する。図１は、本実施形態にかかる移動体通信端末１の外観構成を示す図である。本実施形態にかかる移動体通信端末１は、ヒンジなどで回動可能に結合された一対の筐体（筐体１Ａと筐体１Ｂ）を有する折りたたみ式の移動体通信端末であり、図１では、このような移動体通信端末１を開いた状態の外観構成を示す。ここで、移動体通信端末１を開いた際に、ユーザが主に使用する面を移動体通信端末１の主面とし、移動体通信端末１を閉じた際に外側となる面を移動体通信端末１の外面とする。図１では、移動体通信端末１の主面側の外観構成を図１（ａ）に示し、外面側の外観構成を図１（ｂ）に示している。

図１（ａ）に示すように、筐体１Ａの主面上には、スピーカ１２や表示部４０などが配置され、筐体１Ｂの主面上には、マイクロフォン１３や操作部３０などが配置されている。

また、図１（ｂ）に示すように、筐体１Ｂの外面上には、撮像機能に用いるレンズＬＺが配置されている。すなわち、本実施形態では、表示部４０とレンズＬＺとが異なる筐体上に配置されていることになる。

ここで、操作ボタンなどから構成される操作部３０が筐体１Ｂに配置されていることから、移動体通信端末１が利用される際は、筐体１Ｂがユーザに保持されることを前提とする。よって、通常の使用においては、筐体１Ａが上側となり、筐体１Ｂが下側となる。

次に、移動体通信端末１の内部構成を、図２を参照して説明する。図２は、移動体通信端末１の内部構成例を示すブロック図である。図示するように、本実施形態にかかる移動体通信端末１は、通信制御部１０、カメラ部２０、操作部３０、表示部４０、開閉角度センサ５０、筐体方向センサ６０、記憶部７０、制御部１００、などから構成されている。

通信制御部１０は、移動体通信端末１の基本機能である通信機能にかかる動作をおこなうものであり、例えば、ＣＤＭＡ（Code Division Multiple Access：符号分割多重接続）方式などの通信方式を用いた通信装置などで構成され、当該通信方式に対応したアンテナ１１による無線送受信をおこなうことで、近傍の基地局と無線通信をおこなう。

通信制御部１０はまた、例えば、音声処理をおこなうコーデック回路などを備え、音声通話にかかる音声処理をおこなう。すなわち、受信した音声データをアナログ信号に変換してスピーカ１２から出力する他、マイクロフォン１３から入力された送話音声をデジタルデータに変換して送信に供する。

カメラ部２０は、移動体通信端末１の撮像機能を実現するための構成であり、レンズＬＺによる結像光を電気信号に変換する撮像素子２１を備える。

撮像素子２１は、例えば、ＣＣＤ（Charge Coupled Device：電荷結合素子）などから構成され、受光量に応じた電気信号に変換し、ＡＤＣ（Analog-Digital Converter：アナログ−デジタル変換器）によって電気信号をデジタル信号に変換する。本実施形態にかかる撮像素子２１は、長方形の形状を有しているものとし、その長尺方向と移動体通信端末１（筐体１Ｂ）の長尺方向とが平行となる方向に配置されているものとする。すなわち、移動体通信端末１が縦長方向となる状態で撮像動作をおこなった場合、撮像素子２１によって生成される画像も縦長方向となる。なお、本実施形態では、撮像素子２１の長尺方向のサイズ（画素数）を１６００とし、短尺方向のサイズ（画素数）を１２００として以下説明する。

また、カメラ部２０はまた、例えば、専用のＩＣ（Integrated Circuit：半導体集積回路）などから構成される画像処理部２２（いわゆる、画像処理エンジン）を備える。画像処理部２２は、撮像素子２１によって生成された画像に対し種々の処理（例えば、現像、圧縮、動画像符号化、など）をおこなって、制御部１００に供出する。

本実施形態では、カメラ部２０による撮像機能により、静止画像を得るスチル撮像機能の他、動画像を得る動画撮像機能が実現されるものとする。ここで、本実施形態にかかるカメラ部２０にはズーム機能が備えられているものとする。本実施形態では、いわゆるデジタルズームであるものとし、画像処理部２２による画像の拡大処理によってズーム機能が実現されるものとする。

操作部３０は、例えば十字カーソルキーや、数字や文字を入力するための英数字キー、機能などを指定するためのキー等から構成され、移動体通信端末１のユーザによって操作されるものである。操作部３０は、これらのキーが操作されることに応じた入力信号を生成して制御部１００に入力する。

表示部４０は、例えば、液晶表示装置（ＬＣＤ：Liquid Crystal Display）などから構成された表示装置であり、移動体通信端末１の動作にかかる種々の画像を表示出力する。本実施形態では、特に、カメラ部２０によって得られた撮像画像などの表示出力をおこなう。この場合、撮像時には、カメラ部２０によって得られたスルー画像などを表示することでファインダとして機能する。

開閉角度センサ５０は、例えば、角度センサなどから構成され、移動体通信端末１の開閉角度を検出する。すなわち、図３に示すように、移動体通信端末１を開いた場合における、筐体１Ａと筐体１Ｂとのなす角度（以下、「開閉角度Ｄ」とする）を検出する。この場合、開閉角度センサ５０は、例えば、筐体１Ａと筐体１Ｂとを回動可能に結合しているヒンジ部分に配置され、ヒンジ軸の回転角度を検出することで、開閉角度Ｄを検出するものとする。

なお、本実施形態にかかる移動体通信端末１は、図４（ａ）に示すように、全開時には、筐体１Ａと筐体１Ｂとが平行となるものとする。すなわち、このときの開閉角度Ｄ１は１８０°となる。また、移動体通信端末１は、図４（ｂ）に示すように、開閉角度Ｄが０°〜１８０°の間の任意の角度で保持可能であるものとする。このときの開閉角度Ｄ２は１８０°未満となる。

筐体方向センサ６０は、例えば、地軸センサや加速度センサなどから構成され、移動体通信端末１の筐体方向（傾き）を検出する。本実施形態では、移動体通信端末１が縦方向であるか横方向であるかを判別するために筐体方向を検出する。ここで、図５（ａ）に示すように、移動体通信端末１の長尺方向が水平線と直交する方向を縦方向とし、図５（ｂ）に示すように、移動体通信端末１の長尺方向が水平線と平行する方向を横方向とする。

この場合の縦方向と横方向のそれぞれには一定の幅があるものとする。図５に示した縦方向と横方向との間には±９０°の違いがあるので、例えば、±４５°を縦方向と横方向の境界とする。すなわち、縦方向と横方向のそれぞれには、±４５°の幅があるものとする。本実施形態では、図５（ａ）に示した移動体通信端末１の筐体方向を示す角度を基準角度（０°）とし、基準角度に対する移動体通信端末１の傾きを筐体方向センサ６０が検出するものとする。

記憶部７０は、例えば、ＲＯＭ（Read Only Memory）やフラッシュメモリなどから構成され、制御部１００などがおこなう処理に必要なデータやこれらによる処理結果などを記憶する。また、記憶部７０は、制御部１００が実行するプログラムを格納する。本実施形態では、図２に示すように、画像格納領域７１、設定情報格納領域７２、プログラム格納領域７３などの記憶領域が用意される。

画像格納領域７１は、例えば、カメラ部２０によって生成された画像データなどを格納する。この画像データには、例えば、スチル写真画像などの静止画像データの他、ビデオ映像などの動画像データが含まれるものとする。なお、移動体通信端末１にメモリカードが装着可能である場合、画像格納領域７１は、着脱可能なメモリカード内に構成されてもよい。

設定情報格納領域７２は、移動体通信端末１を縦方向にして動画撮像をおこなった場合に実行する画像抽出にかかる設定情報を格納する。本実施形態では、図４（ａ）に示すような、移動体通信端末１の筐体１Ａと筐体１Ｂとが平行（すなわち、開閉角度Ｄ＝Ｄ１＝１８０°のとき）となる状態で動画撮像をおこなう際の画像抽出設定を記録した設定情報テーブルＴ１が設定情報格納領域７２に格納される。この設定情報テーブルＴ１の例を図６（ａ）に示す。図示するように、設定情報テーブルＴ１には、カメラ部２０のズーム機能で得られるズーム量に応じた、抽出サイズと抽出開始位置とを示す情報が記録される。

ここで、「ズーム量」とは、カメラ部２０のズーム機能によって得られるズーム範囲（すなわち、ワイド端〜テレ端の範囲）を、例えば、等間隔で区分した段数を示すものである。本実施形態では、図６（ａ）に示すように、ズーム量を１〜１９の段数で示すものとし、ズーム量が１のときがワイド端、ズーム量が１９のときがテレ端であるものとする。

本実施形態において、この設定情報テーブルＴ１が参照されるのは、移動体通信端末１を縦方向で動画撮像したときに、縦方向の撮像画像を横長のアスペクト比である動画像のフォーマットに合わせて抽出する場合（詳細後述）である。よって、設定情報テーブルＴ１における「抽出サイズ」は、撮像画像から抽出する範囲のサイズを示すものであり、縦と横のサイズが規定される。

上述したように、撮像素子２１の長尺方向と移動体通信端末１の長尺方向が平行しているので、移動体通信端末１を縦方向にして撮像した場合、図１０（ａ）に示すように、撮像素子２１上の横方向（以下、「ｘ方向」とする）のサイズ（以下、「ＸＭＡＸ」とする）が１２００となり、縦方向（以下、「ｙ方向」とする）のサイズ（以下、「ＹＭＡＸ」とする）が１６００となる。

よって、撮像素子２１上の撮像画像から横長方向に抽出をおこなう場合、ｘ方向の最大値は１２００となり、そこからズーム量に応じて値が遷移する。よって、最も広い範囲を写すワイド端（すなわち、ズーム量が１段目）のときのｘ方向の抽出サイズは１２００となる。そして、ズーム量がテレ端に向かって遷移するにしたがって、ｘ方向の抽出サイズが減少することになる。

一方、ｙ方向の抽出サイズは、動画像のフォーマットに基づくアスペクト比とｘ方向の抽出サイズから求められる。例えば、アスペクト比（ｘ：ｙ）が４：３であれば、ズーム段数が１のとき、ｘ方向の抽出サイズが１２００、ｙ方向の抽出サイズが９００となる。設定情報テーブルＴ１には、このようにして予め規定される抽出サイズが、ズーム量毎に記録されている。

また、「抽出開始位置」とは、画像抽出をおこなうときの基点となる座標値を示すものである。ここでは、基点となるｘ座標とｙ座標が規定される。本実施形態では、撮像素子２１の左上頂部を（０，０）とした座標とする。移動体通信端末１を縦位置とした場合の、撮像素子２１の各頂部の座標は、図１０（ａ）に示すように、左上頂部が（０，０）、右上頂部が（１２００，０）、左下頂部が（０，１６００）、右下頂部が（１２００，１６００）となる。

このような抽出開始位置と抽出サイズに基づいて、抽出する範囲が決定される。図６（ａ）に示した設定例の場合、ズーム量が１段目であれば、抽出される範囲（横長長方形）の各頂部の座標は、左上頂部が（０，３５０）、右上頂部が（１２００，３５０）、左下頂部が（０，１２５０）、右下頂部が（１２００，１２５０）ということになる。

プログラム格納領域７３は、制御部１００が実行する動作プログラムを格納する。

制御部１００は、例えば、ＣＰＵ（Central Processing Unit：中央演算処理装置）やＲＡＭ（Random Access Memory）などから構成されており、移動体通信端末１の各部の動作を制御する。本実施形態では、制御部１００が、プログラム格納領域７３に格納されている動作プログラムを実行することで、後述する各処理が実現される。なお、制御部１００に構成されるＲＡＭは、ＣＰＵがプログラムを実行する際、ワークメモリとして用いられる。

そして、制御部１００は、プログラムの実行により、処理内容に応じた機能構成を実現する。ここで、本実施形態にかかる処理をおこなう際に、制御部１００によって実現される機能構成を図７に示す。図示するように、制御部１００は、撮像処理部１１０、撮像方向判別部１２０、角度算出部１３０、抽出範囲決定部１４０、画像抽出部１５０、などとして機能する。

撮像処理部１１０は、移動体通信端末１の撮像機能にかかる動作を制御する。本実施形態では、撮像処理部１１０が、カメラ部２０、操作部３０、表示部４０、記憶部７０、などと協働することで、撮像機能が実現される。

すなわち、ユーザが操作部３０を操作することで入力された入力信号に基づいて、撮像モード（スチル撮像モードや動画撮像モードなど）や撮像動作の開始・停止などを認識し、このような操作に応じてカメラ部２０を制御する。また、カメラ部２０によって得られた撮像画像を表示部４０に表示する他、記憶部７０の画像格納領域７１に格納する。

撮像方向判別部１２０は、筐体方向センサ６０との協働により、撮像動作時の撮像方向、すなわち、移動体通信端末１の筐体方向を判別する。本実施形態では、図５（ａ）に示すような縦位置で撮像動作がおこなえる他、図５（ｂ）に示すような横位置でも撮像動作がおこなえるものとする。

角度算出部１３０は、開閉角度センサ５０との協働によって得られる開閉角度Ｄに基づいて、被写体に対する撮像レンズＬＺの方向（以下、「レンズ方向ＤＬ」とする）と、被写体に対する表示部４０の方向（以下、「表示装置方向ＤＤ」とする）とのなす角度（以下、「角度φ」とする）を算出する。

抽出範囲決定部１４０は、設定情報格納領域７２に格納されている設定情報テーブルＴ１の設定情報に基づいて、縦位置の移動体通信端末１で動画撮像した場合の画像抽出範囲を決定する。抽出範囲決定部１４０は、撮像処理部１１０から得られるズーム量に基づいて抽出範囲を決定する。本実施形態では、筐体１Ａと筐体１Ｂが平行（図４（ａ）参照）の場合、設定情報テーブルＴ１を参照することで抽出範囲を決定し、筐体１Ａと筐体１Ｂが平行でない（図４（ｂ）参照）場合は、これに加え、角度算出部１３０が算出した角度を用いた演算をおこなうことで抽出範囲を決定する（詳細後述）。

画像抽出部１５０は、カメラ部２０の撮像画像から、抽出範囲決定部１４０が決定した抽出範囲に該当する部分を抽出し、撮像処理部１１０に供出する。なお、画像の抽出にかかる手法は、従来からある画像抽出（画像切り出し）技術を用いておこなうものとする。

本実施形態では、以上のような機能構成を、制御部１００がプログラムを実行することで実現されるものとするが、これに限られず、例えば、ＡＳＩＣ（Application Specific Integrated Circuit：特定用途向け集積回路）などのハードウェアによって各機能が実現されるように構成してもよい。

以上説明した各構成は本発明を実現するために必要な構成であり、移動体通信端末としての基本機能や付加機能のために必要なその他の構成は必要に応じて備えられているものとする。

このような構成を有する移動体通信端末１の動作を以下説明する。本実施形態では、移動体通信端末１の撮像機能を用いて動画撮像する場合において、移動体通信端末１が縦位置である場合におこなう画像抽出動作を以下説明する。この場合に、移動体通信端末１が実行する画像抽出処理を、図８に示すフローチャートを参照して説明する。この画像抽出処理は、ユーザが操作部３０を操作することで、カメラ機能の実行が指示されたことを契機に開始されるものとする。

処理が開始されると、撮像処理部１１０は、操作部３０からの入力信号に基づいて、実行する撮像モードが動画撮像モードであるかスチル撮像モードであるかを判別する（ステップＳ１０１）。

ここで、実行する撮像モードがスチル撮像モードである場合（ステップＳ１０１：Ｎｏ）、動画像のようにアスペクト比が横長方向に限定されることがないので、画像抽出をおこなう必要がない。よって、この場合はそのまま処理を終了し、スチル画像撮像にかかる処理がおこなわれることになる。

一方、撮像モードが動画撮像モードである場合（ステップＳ１０１：Ｙｅｓ）、撮像処理部１１０は、移動体通信端末１の筐体方向の判別を撮像方向判別部１２０に指示する。撮像処理部１１０からの指示に応じて、撮像方向判別部１２０は、筐体方向センサ６０を制御し、移動体通信端末１の姿勢（傾き）を示す検出結果を取得する。ここでは、図５（ａ）に示した状態の基準角度に対する移動体通信端末１の傾きを示す角度に基づいて、移動体通信端末１の筐体方向が縦方向（縦位置）であるか横方向（横位置）であるかを判別する（ステップＳ１０２）。より詳細には、検出された角度が、０°〜±４５°の範囲内であれば縦方向（縦位置）であると判別し、＋４５°〜＋９０°もしくは−４５°〜−９０°の範囲であれば横方向（横位置）であると判別する。

ここで、移動体通信端末１が横方向である場合（ステップＳ１０２：Ｎｏ）、撮像素子２１が横長方向となる位置で撮像されることになる。すなわち、横長方向のフォーマットである動画像のアスペクト比と縦横方向が同じになるので、画像抽出をおこなう必要がない。よって、この場合は処理を終了し、通常の動画撮像にかかる処理がおこなわれることになる。

一方、移動体通信端末１の筐体方向が縦方向（縦位置）である場合（ステップＳ１０２：Ｙｅｓ）、撮像方向判別部１２０は、その旨を撮像処理部１１０に通知する。この場合、撮像処理部１１０は、移動体通信端末１の開閉角度の検出を角度算出部１３０に指示する。撮像処理部１１０からの指示に応じて、角度算出部１３０は、開閉角度センサ５０を制御し、開閉角度の検出をおこなう（ステップＳ１０３）。

角度算出部１３０は、開閉角度センサ５０によって検出された開閉角度が１８０°未満（図４（ｂ）参照）である場合（ステップＳ１０４：Ｙｅｓ）、レンズ方向ＤＬと表示装置方向ＤＤとのなす角度である角度φの算出をおこなう（ステップＳ１０５）。

ここで、レンズ方向ＤＬと表示装置方向ＤＤ、および、角度φについて、図１１を参照して説明する。図１１において、図１１（ａ）は、開閉角度が１８０°である場合の移動体通信端末１と被写体との位置関係を示し、図１１（ｂ）は、開閉角度が１８０°未満である場合の移動体通信端末１と被写体との位置関係を示している。このような場合において、本実施形態では、表示部４０の表示面に直交して被写体に向かう方向を表示装置方向ＤＤとする。また、被写体に対するレンズＬＺの方向、すなわち、レンズＬＺの光軸上で被写体に向かう方向をレンズ方向ＤＬとする。

上述したように、表示部４０の表示面は筐体１Ａの主面側に配置され、レンズＬＺは筐体１Ｂの外面側に配置されているので、筐体１Ａと筐体１Ｂが平行する状態（すなわち、開閉角度が１８０°）では、図１１（ａ）に示すように、表示装置方向ＤＤとレンズ方向ＤＬも平行する。

一方、筐体１Ａと筐体１Ｂが平行しない状態（すなわち、開閉角度が１８０°未満）では、図１１（ｂ）に示すように、表示装置方向ＤＤとレンズ方向ＤＬは平行しない。つまり、表示装置方向ＤＤとレンズ方向ＤＬとの間に角度があることになる。本実施形態では、この角度を角度φとし、角度算出部１３０が算出する。角度φは、筐体１Ａ上の表示装置方向ＤＤと、筐体１Ｂ上のレンズ方向ＤＬとのなす角度であるので、移動体通信端末１の開閉角度に基づいて求めることができる。つまり、角度φは、筐体１Ａと筐体１Ｂとのなす角度と同一であるので、開閉角度から求めることができる。移動体通信端末１の開閉角度は、０°〜１８０°であり、角度φが生じるのは、開閉角度が１８０°未満であるから、そのときの開閉角度を１８０°から減じる演算をおこなうことで、角度φを算出することができる。

角度算出部１３０は、このようにして角度φを算出すると（ステップＳ１０５）、算出した角度φに応じたｙ方向のシフト量であるΔｙの算出をおこなう（ステップＳ１０６）。

このシフト量Δｙは、筐体１Ａと筐体１Ｂとが平行であるときの抽出範囲を基準に、ｙ方向の抽出開始位置をシフトさせる量を示すものである。つまり、図１１（ａ）に示すような、表示装置方向ＤＤとレンズ方向ＤＬが同一方向となっている場合、表示部４０に表示されている撮像画像と撮影者の撮影感覚との間にズレがない。このような場合、撮像画像の中心部付近を抽出すれば、撮影感覚にあった動画像を得ることができる。

しかし、図１１（ｂ）に示すように、移動体通信端末１の開閉角度が１８０°未満である場合、表示部４０の表示面が垂直とした場合、開閉角度が１８０°未満のときのレンズ方向ＤＬは、開閉角度が１８０°のときのレンズ方向ＤＬより下方を向くことになる。撮影時には、表示部４０をファインダとして利用しているので、表示装置方向ＤＤ上にある被写体を撮影することが撮影者の撮影感覚である。しかし、レンズ方向ＤＬが下方になっているので、撮像画像の中心付近を抽出すると、撮影感覚よりも下方を示す画像が抽出されることになる。

よって、本実施形態では、移動体通信端末１の開閉角度が１８０°未満のときは、開閉角度が１８０°のときの抽出位置よりも上方の位置で抽出をおこなうこととする。シフト量Δｙは、この場合にどれだけｙ方向の位置を上方にするかを示すものである。

角度算出部１３０は、このようなシフト量Δｙを、撮像素子２１のｙ方向サイズ（ＹＭＡＸ）、ｙ方向画角（以下、θで表す）、および、角度φに基づいて算出する。これらの関係を図１０（ｂ）に示す。図示するように、撮像素子２１上でのｙ方向の画角θに対して、角度φによって発生するズレ量分をシフトさせれば、ほぼ表示装置方向ＤＤ上の位置となる画像を抽出することができるので、シフト量Δｙは、以下の数１を演算することで求めることができる。

（数１）
Δｙ≒（φ／θ）＊ＹＭＡＸ

つまり、上記数１を演算することにより、そのときの開閉角度に応じたシフト量Δｙを示す座標値を求めることができる。

このようにして、シフト量Δｙを算出すると、角度算出部１３０は、その旨を撮像処理部１１０に通知するとともに、算出結果を抽出範囲決定部１４０に通知する。抽出範囲決定部１４０は、角度算出部１３０からシフト量Δｙが通知されたことを契機に、開閉角度が１８０°未満である場合における画像抽出範囲を決定するための設定情報テーブルＴ２を作成する（ステップＳ１０７）。

この設定情報テーブルＴ２は、図６（ａ）に示した設定情報テーブルＴ１を基に、ステップＳ１０５で算出した角度φ、および、ステップＳ１０６で算出したシフト量Δｙに基づいてｙ方向の抽出開始位置を規定したものである。この設定情報テーブルＴ２の例を図６（ｂ）に示す。

図示するように、設定情報テーブルＴ２の項目も、ズーム量、抽出サイズ、抽出開始位置であり、設定情報テーブルＴ１と同じである。このうち、ズーム量、抽出サイズ、および、抽出開始位置のｘ座標については、設定情報テーブルＴ１と同じ値が設定されている。つまり、抽出開始位置のｙ座標の設定が設定情報テーブルＴ１と異なる（設定情報テーブルＴ２に設定されるｙ方向の抽出開始位置をｙ’とする）。

ここで、設定情報テーブルＴ２で設定される抽出開始位置ｙ’は、設定情報テーブルＴ１の抽出開始位置ｙからシフト量を示すΔｙを減じた値である。上述したように、本実施形態にかかる撮像素子２１のｙ座標は、上端が０であり下端に向かって数値が増加するように規定されている。また、シフト量Δｙは、このような撮像素子２１上でシフトさせる座標値であるので正の値となる。よって、ｙからΔｙを減じたｙ’は、ｙよりも小さい値を示すことになる。つまり、設定情報テーブルＴ１で規定されたｙ座標よりも上方となる位置が規定されることになる。

抽出範囲決定部１４０は、このような設定情報テーブルＴ２を作成すると記憶部７０の設定情報格納領域７２に格納する。なお、設定情報テーブルＴ２は、開閉角度が１８０°未満である場合の画像抽出範囲決定に用いられるため、開閉角度が１８０°のとき（ステップＳ１０４：Ｎｏ）は、ステップＳ１０５〜ステップＳ１０７の処理はおこなわない。

次に、撮像処理部１１０は、操作部３０からの入力信号に基づいて、撮像開始指示が入力されたか否かを判別する（ステップＳ１０８）。ここで、撮像開始指示が入力されるまで（ステップＳ１０８：Ｎｏ）は、ステップＳ１０３〜ステップＳ１０７の処理を繰り返しおこなうことで、開閉角度の変化に対応した処理がおこなわれる。

撮像開始指示が入力されると（ステップＳ１０８：Ｙｅｓ）、撮像処理部１１０は、抽出範囲の決定を抽出範囲決定部１４０に指示する。撮像処理部１１０からの指示に応じて、抽出範囲決定部１４０は、抽出範囲を決定するための抽出範囲決定処理を実行する（ステップＳ２００）。この抽出範囲決定処理を、図９に示すフローチャートを参照して説明する。

処理が開始されると、画像抽出処理（図８）のステップＳ１０４での判別結果に基づき、開閉角度が１８０°未満である場合（ステップＳ２０１：Ｙｅｓ）、抽出範囲決定部１４０は、設定情報格納領域７２に格納した設定情報テーブルＴ２を参照する（ステップＳ２０２）。

ここでは、設定情報テーブルＴ２に記録されているｙ’の値を参照して、ｙ’が有効な値となっているズーム量の範囲を特定する（ステップＳ２０３）。ここで、図６（ｂ）に示すように、算出されたシフト量Δｙによっては、ｙ’が負の値となることがある。上述したように、本実施形態にかかる撮像素子２１上の座標には負の領域がないため、ｙ’が負となるズーム量では、画像抽出をおこなうことができない。すなわち、ここでのｙ’の有効値は正の値であるため、ｙ’が正となるレコードに対応するズーム量の範囲を特定することになる。

また、ズーム量範囲の特定において、ｙ’が負となる部分を除外するだけでなく、ｙ’が０または０付近の値となるズーム量を除外してもよい。このような処理は、レンズＬＺの特性によって、例えば、撮像画像の外縁付近におおきなゆがみが生じる場合などにおこなう。つまり、ｙ’が０または０付近となる位置は撮像画像の上端部に相当するので、そのような位置が抽出範囲に含まれないよう、該当するズーム量を除外した範囲を特定する。

ズーム量の範囲を特定すると、抽出範囲決定部１４０は、特定したズーム量の範囲を撮像処理部１１０に通知する。撮像処理部１１０は、通知されたズーム量の範囲内でデフォルトとなるズーム量（例えば、その範囲内で最もワイド側となるズーム量）を指定する（ステップＳ２０４）。この場合、撮像処理部１１０は、指定したズーム量となるようカメラ部２０の画像処理部２２を制御する。

ここで、ユーザによる操作部３０の操作により、ズーム操作がおこなわれた場合（ステップＳ２０５：Ｙｅｓ）、撮像処理部１１０は、特定したズーム量範囲内でのズーム変化となるように制限する（ステップＳ２０６）。

このようにして、特定された範囲内でのズーム量が決定すると、撮像処理部１１０は、決定したズーム量を抽出範囲決定部１４０に通知する。撮像処理部１１０からの通知に応じて、抽出範囲決定部１４０は、設定情報テーブルＴ２を参照することで、抽出範囲を特定する（ステップＳ２０７）。つまり、現在のズーム量に対応する抽出サイズと抽出開始位置が特定されるので、撮像素子２１上の撮像画像から動画像として抽出する範囲（例えば、抽出範囲となる長方形の各頂部の座標）を特定することができる。

なお、移動体通信端末１の開閉角度が１８０°である場合（ステップＳ２０１：Ｎｏ）は、抽出範囲決定部１４０は、設定情報格納領域７２に格納されている設定情報テーブルＴ１を参照することで（ステップＳ２０８）、抽出範囲を決定する（ステップＳ２０７）。この場合も、撮像処理部１１０から通知されるズーム量に対応した抽出範囲を特定するが、開閉角度が１８０°未満である場合と異なり、ズーム量範囲の制限はおこなわない。これは、開閉角度が１８０°の場合は、撮像画像の中心付近から抽出するので、抽出開始位置ｙが常に正であり、また、０もしくは０付近の値をとることもないからである。

このようにして、抽出範囲を特定すると、抽出範囲決定部１４０は、特定した抽出範囲を画像抽出部１５０に通知し、図８に示す画像抽出処理のフローに戻る。

画像抽出処理においては、撮像素子が生成した撮像画像上において、抽出範囲決定部１４０が特定した抽出範囲に該当する部分を画像抽出部１５０が抽出して（ステップＳ１０９）、撮像処理部１１０に供出することで、横長方向のフォーマットとなる動画像が表示部４０に表示出力するとともに、抽出した動画像を示す画像データを画像格納領域７１に出力して保存する（ステップＳ１１０）。

そして、ユーザが操作部３０を操作することで、撮像終了指示が入力されるまで（ステップＳ１１１：Ｎｏ）、ステップＳ１０３以降の処理が繰り返し実行される。つまり、撮影途中で開閉角度に変化が生じた場合は、その開閉角度に応じた抽出範囲を決定して画像抽出をおこなうことになる。

このような画像抽出処理は、所定の撮像終了指示が入力されることで終了する（ステップＳ１１１：Ｙｅｓ）。

以上説明したように、本発明を上記実施形態の如く適用することで、被写体に対する表示装置の方向とレンズの方向に基づいて抽出範囲を決定しているので、例えば、表示装置方向に対してレンズ方向が下方となる場合には、それらのなす角度に応じて撮像画像の上方を抽出するので、撮影者の撮影感覚に合った動画像を得ることができる。この場合、表示装置方向とレンズ方向とのなす角度に応じたシフト量を算出することで抽出範囲を決定しているので、筐体１Ａと筐体１Ｂとの間の角度がある場合でも、表示部４０からみた被写体方向の位置を示す画像が得られるので、表示部４０をファインダとして用いる場合に、違和感なく撮影をおこなうことができる。

この場合において、表示装置方向とレンズ方向とのなす角度を筐体の開閉角度から算出するので、容易に角度を求めることができる。

また、ズーム量に基づいて抽出範囲を決定するので、ズーム操作がある場合でも、適切な抽出範囲を決定して画像抽出をおこなうことができる。また、角度に応じて算出するシフト量が撮像画像上の範囲から外れてしまうズーム量となるズーム操作は制限するので、適切な画像抽出がおこなえる範囲でズーム操作をおこなうことができる。

上記実施形態は一例であり、本発明の適用範囲はこれに限られない。すなわち、種々の応用が可能であり、あらゆる実施の形態が本発明の範囲に含まれる。

上記実施形態では、移動体通信端末１における開閉角度の変化に応じて抽出範囲を決定するものとしたが、移動体通信端末の筐体特性に応じて、設定情報を固定的に規定して抽出範囲を決定してもよい。例えば、全開時の開閉角度が１８０°となる移動体通信端末には、図６（ａ）に示した設定情報テーブルＴ１と同様の設定情報を設定して抽出範囲を決定し、全開時の開閉角度が１８０°未満となる移動体通信端末では、図６（ｂ）に示した設定情報テーブルＴ２と同様の設定情報を設定して抽出範囲を決定させる。全開時の開閉角度が１８０°未満となる移動体通信端末では、全開時の開閉角度が一意に定まるので、その開閉角度に基づいたｙ’の値を予め設定しておくことができる。

このような構成では、開閉角度の検出や角度φの算出が不要であるため、適切な画像抽出をより簡易に実現することができる。

また、上記実施形態では、ズーム量に基づいて抽出範囲を規定した例を示したが、ズーム機能を有していない移動体通信端末であってもよい。この場合であっても、開閉角度に応じて抽出範囲を決定することができるので、上述した効果を得ることができる。なお、上記実施形態では、デジタルズームの例を示したが、これに限らず、レンズＬＺによる光学ズームであっても同様に抽出範囲を決定することができる。

なお、表示装置の方向とレンズの方向とが一致しない場合が生じるのであれば、筐体の形状や形態、あるいは、表示装置やレンズの配置などは任意であり、上記実施形態で示した例に限られるものではない。なお、上記実施形態では、筐体の開閉角度に基づいて表示装置の方向とレンズの方向とのなす角度を算出するものとしたが、このような角度が得られるのであればその方法は任意である。よって、開閉角度以外の方法で求められるのであれば、開閉角度を検出する構成や動作を省略してもよい。

また、上述した移動体通信端末１のように、予め本発明を適用した装置を提供可能であることはもとより、上記実施形態の制御部１００が実行したプログラムと同様のプログラムを適用することで、既存の移動体通信端末を、本発明にかかる移動体通信端末として機能させることができる。このようなプログラムを提供する形態は任意であり、プログラムをＤＶＤ（Digital Versatile Disk）やメモリカードなどの記録媒体に格納して提供可能である他、インターネットなどの通信媒体を介して配布することで提供することもできる。このようにして提供されたプログラムを装置に適用し、当該装置のコンピュータ（ＣＰＵなど）が実行することで、上述した各機能や動作が実現されることになる。

つまり、折りたたみ式などのような２以上の筐体の一方に撮像レンズが配置され、他方の筐体に表示装置が配置されている構造の移動体通信端末であれば、上述したプログラムの適用によって、既存の移動体通信端末を本発明にかかる移動体通信端末と同様に機能させることができる。

本発明の実施形態にかかる移動体通信端末の外観構成を示す図であり、（ａ）は移動体通信端末の主面側の外観構成を示し、（ｂ）は移動体通信端末の外面側の外観構成を示す。 図１に示す移動体通信端末の内部構成を示すブロック図である。 図１に示す移動体通信端末における開閉角度を説明するための図である。 図１に示す移動体通信端末における開閉角度を説明するための図である。 図１に示す移動体通信端末における筐体方向を説明するための図であり、（ａ）は縦方向の例を示し、（ｂ）は横方向の例を示す。 図２に示す設定情報格納領域に格納される情報の例を示す図であり、（ａ）は開閉角度が１８０°の場合に参照される設定情報テーブルの例を示し、（ｂ）は開閉角度が１８０°未満の場合に参照される設定情報テーブルの例を示す。 図２に示す制御部によって実現される機能構成の例を示す機能ブロック図である。 本発明の実施形態にかかる画像抽出処理を説明するためのフローチャートである。 図８に示す画像抽出処理で実行される抽出範囲決定処理を説明するためのフローチャートである。 本発明の実施形態にかかる画像抽出を説明するための図であり、（ａ）は撮像素子上の座標と抽出範囲の関係を示し、（ｂ）は開閉角度が１８０°未満の場合に算出するシフト量Δｙを模式的に示す。 表示装置方向とレンズ方向を説明するための図であり、（ａ）は表示装置方向とレンズ方向とが平行である場合の移動体通信端末と被写体との位置関係を示し、（ｂ）は表示装置方向とレンズ方向とが平行でない場合の移動体通信端末と被写体との位置関係を示す。

符号の説明

１…移動体通信端末、１Ａ…筐体、１Ｂ…筐体、１０…通信制御部、１１…アンテナ、１２…スピーカ、１３…マイクロフォン、２０…カメラ部、２１…撮像素子、２２…画像処理部、ＬＺ…撮像レンズ、３０…操作部、４０…表示部、５０…開閉角度センサ、６０…筐体方向センサ、７０…記憶部、７１…画像格納領域、７２…設定情報格納領域、７３…プログラム格納領域、１００…制御部、１１０…撮像処理部、１２０…撮像方向判別部、１３０…角度算出部、１４０…抽出範囲決定部、１５０…画像抽出部

Claims (6)

1. 一の筐体に配置された撮像レンズと、
   前記撮像レンズへの入射光に基づいて撮像画像を生成する撮像素子と、
   前記撮像素子が生成した撮像画像の一部を抽出する画像抽出手段と、
   前記一の筐体と対をなす他の筐体に配置され、少なくとも前記画像抽出手段が抽出した画像を表示する表示装置と、を備えた、一対の前記筐体から構成される折りたたみ型の移動体通信端末であって、
   少なくとも被写体に対する前記撮像レンズの方向と該被写体に対する前記表示装置の方向に基づいて、前記画像抽出手段が抽出する範囲を決定する抽出範囲決定手段を備える、
   ことを特徴とする移動体通信端末。
2. 前記抽出範囲決定手段は、前記被写体に対する前記撮像レンズと前記表示装置の方向がなす角度を特定する角度特定手段をさらに備え、
   前記角度特定手段が特定した角度に基づいて抽出範囲を決定する、
   ことを特徴とする請求項１に記載の移動体通信端末。
3. 前記角度特定手段は、前記筐体の開閉角度に基づいて、前記被写体に対する前記撮像レンズと前記表示装置の方向がなす角度を特定する、
   ことを特徴とする請求項２に記載の移動体通信端末。
4. 撮像時のズーム動作を制御するズーム制御手段をさらに備え、
   前記抽出範囲決定手段は、少なくとも、前記被写体に対する前記撮像レンズと前記表示装置の方向と、前記ズーム制御手段による撮像時のズーム量と、に基づいて、前記抽出範囲を決定する、
   ことを特徴とする請求項１乃至３のいずれか１項に記載の移動体通信端末。
5. 少なくとも、前記ズーム動作によるズーム量と、所定の抽出範囲とを予め対応づけた設定情報を記憶する設定情報記憶手段をさらに備え、
   前記ズーム制御手段は、前記設定情報が示す抽出範囲に基づいて、前記ズーム動作の可能範囲を制限する、
   ことを特徴とする請求項４に記載の移動体通信端末。
6. 撮像レンズが配置された一の筐体と、表示装置が配置された前記一の筐体と対をなす他の筐体とから構成された撮像機能を有する移動体通信端末を制御するコンピュータに、
   前記撮像機能によって動画撮像がおこなわれる場合に、筐体方向が縦方向であるか否かを判別する機能と、
   前記筐体方向が縦方向である場合、前記撮像レンズの撮像方向と、前記表示装置の表示方向とのなす角度を算出する機能と、
   算出した角度に基づいて、撮像された動画像の抽出範囲を決定して抽出する機能と、
   前記撮像機能がズーム機能を有している場合、前記算出した角度とズーム量とに基づいて、撮像された動画像の抽出範囲を決定して抽出する機能と、
   を実現させることを特徴とするプログラム。

Images