【０００１】
【発明の属する技術分野】
本発明は、画像を表示する機能を有する携帯式電話機に関し、特に、画像データが表す画像の縮小画像を表示する携帯式電話機に関する。
【０００２】
【従来の技術】
電話機能を通じてインターネットに接続する携帯式電話機が普及しつつある。このような携帯式電話機では、パーソナルコンピュータと同様に、インターネットを介して情報をダウンロードしたり、電子メールにファイルを添付して送受したりすることができる。多くの携帯式電話機は、比較的大きな表示装置を備えて、画像を表示し得るようになっており、ダウンロードした画像データや受信メールに添付された画像データが表す画像を表示することができる。携帯式電話機にカメラを備えることも行われており、撮影した画像を表示したり、その画像データをメールに添付して送信することも可能である。
【０００３】
近年では、視差のある左右の画像を表す画像データがインターネットを介して提供されており、平面的な２次元の画像だけでなく、立体的な３次元の画像を表示する携帯式電話機も提案されている（例えば、特開２００１−２５１４０３号公報）。このような携帯式電話機では、２次元の画像を表示するときと３次元の画像を表示するときとで、表示装置の設定が切り替えられる。
【０００４】
さらに、カメラで撮影した画像を表す２次元の画像データから、立体的な画像を表す３次元の画像データを生成する技術も開発されている（例えば、特開２０００−２２８７７８号公報）。携帯式電話機は小型軽量であることが好ましく、したがって、カメラを２つ備えて左眼用と右眼用の画像を撮影する構成は実用的でないから、２次元の画像データから３次元の画像データを生成する技術は、携帯式電話機に好適である。
【０００５】
画像データはファイルとして取り扱われ、ファイルには、画像を識別するための名称と、画像の種類つまり画像データの書式を表す拡張子とから成るファイル名が付される。画像データはデータ量が多いため、通常、圧縮しておき、表示の際に圧縮の逆処理である解凍を行って、表示に適する形態に戻される。圧縮はＪＰＥＧ方式に従って行うのが一般的であり、この場合の画像データのファイル名の拡張子は「ＪＰＥＧ」または「ＪＰＧ」とされる。ファイルには、画像データと共に、画像の大きさ（画素数）が記される。また、インターネットを介して提供される画像データのファイルには、著作者名等の著作権に関する情報も付加される。
【０００６】
使用者は、画像の表示やメールへの画像データの添付に際し、ファイル名を一覧表示させて、画像データを選択することができる。しかし、ファイル名を表示するだけでは、画像データが表す画像の内容が判り難く、不便である。そこで、各画像データから本来の画像を縮小した画像を表す画像データを作成して、それらの画像を並べて表示することが行われている。このような縮小した画像はサムネイル画像と呼ばれる。サムネイル画像の画像データは、元の画像データから離間した画素データを抽出することによって、すなわち、画像データを間引くことによって作成する。サムネイル画像を並べて表示することで、多くの画像データがそれぞれ表す画像の内容が直ちに判り、使用者の選択がきわめて容易になる。
【０００７】
【特許文献】特開２００１−２５１４０３号公報
【特許文献】特開２０００−２２８７７８号公報
【０００８】
【発明が解決しようとする課題】
上述のように、画像データの選択を容易にするためにサムネイル画像を表示することは行われているが、従来の携帯式電話機では、サムネイル画像を表示するごとに、元の画像データからサムネイル画像を表す画像データを作成するようにしている。これは、記憶容量を節約して、できるだけ多くの画像データを保存するためである。しかし、サムネイル画像の表示が必要になった時点でその画像データを作成するのでは、使用者が表示の指示を与えてから実際に表示がなされるまでに時間がかかり、使い勝手が悪い。また、同じサムネイル画像を表示するごとに、同じ作成処理を繰り返し行うことになり、処理が重複する点でも無駄である。
【０００９】
本発明は、この点に鑑みてなされたもので、サムネイル画像を速やかに、かつ効率よく提供し得る携帯式電話機を提供することを目的とする。
【００１０】
【課題を解決するための手段】
上記目的を達成するために、本発明では、画像を表す画像データを取得して記憶し、記憶している画像データが表す画像の縮小画像を表示する携帯式電話機において、画像データを取得したときに、その画像データから縮小画像を表す画像データを作成して、取得した画像データのほかに、作成した画像データを記憶するようにする。
【００１１】
この携帯式電話機では、取得した画像データを記憶するときに、縮小画像つまりサムネイル画像の画像データも記憶する。したがって、サムネイル画像を表示する際には、記憶している画像データを読み出すのみでよく、速やかにサムネイル画像を表示することが可能である。また、既に表示したサムネイル画像を再度表示する場合でも、サムネイル画像の画像データを作成する処理を再度行う必要がなく、処理効率の点でも無駄がない。
【００１２】
ここで、取得した画像データおよび作成した画像データのほかに、取得した画像データが表す画像の次元を示す情報を記憶するようにするとよい。画像データには２次元の画像を表すものと３次元の画像を表すものがあり、３次元の画像を表す画像データから２次元のサムネイル画像を表す画像データを作成したときには、そのサムネイル画像からは元の画像データが３次元の画像を表すことは判らない。しかし、画像の次元を表す情報を記憶しておくことで、その情報に基づいて画像の次元をサムネイル画像と共に表示することが可能になり、元の画像データが２次元の画像を表すものか３次元の画像を表すものかを、使用者に示すことができるようになる。しかも、画像データそのものを参照する必要がないから、次元の表示を速やかに行うことが可能である。
【００１３】
また、作成した画像データをＪＰＥＧ方式に従って圧縮し、圧縮した画像データを、ハフマンテーブルを除く圧縮に用いたパラメータと共に、記憶するようにするとよい。サムネイル画像の画像データを圧縮しておくことで、サムネイル画像の画像データを記憶することによる記憶可能な画像データの数の低下を抑えることができる。しかも、圧縮に用いたパラメータのうち比較的大きなハフマンテーブルを記憶しないようにすることで、記憶可能な画像データの数の低下を一層抑えることが可能になる。なお、ハフマンテーブルは、サムネイル画像の画像データ全てに共通のものを用意しておき、これを記憶しておけばよい。
【００１４】
取得した画像データが３次元の画像を表すときに、３次元の縮小画像を表す画像データを作成することができる。このようにすると、サムネイル画像を見ただけで、元の画像が３次元であることが判る。
【００１５】
取得した画像データが３次元の画像を表すときに、２次元の縮小画像を表す画像データを作成することもできる。このようにすると、２次元の画像を表す画像データと３次元の画像を表す画像データが混在するときでも、一律に２次元のサムネイル画像を表示することができて、表示が容易になる。
【００１６】
【発明の実施の形態】
以下、本発明の一実施形態の携帯式電話機について図面を参照しながら説明する。本実施形態の携帯式電話機１の概略構成を図１に模式的に示す。携帯式電話機１は、通信部１１、音声入力部１２、音声出力部１３、操作部１４、撮像部１５、外部機器インターフェース（Ｉ／Ｆ）１６、表示部１７、および制御部１０を備える。
【００１７】
通信部１１は、送信すべき信号を搬送波に担持させてアンテナ１１ａより送出するとともに、アンテナ１１ａで受信した搬送波から信号を抽出する。音声入力部１２は送信すべき音声を取得し、音声出力部１３は受信した音声を出力する。操作部１４は、数字や文字あるいは所定の機能に対応づけられたいくつかのキーを備えており、電話番号や文字列の入力および動作の指示のために使用者によって操作される。操作部１４のキーには、表示部１７に表示されるカーソル（ポインタ）を上下左右に移動させるための４つのカーソルキーが含まれる。
【００１８】
撮像部１５は、ＣＣＤエリアセンサとこれに光を結像させるレンズを含むカメラより成り、画像を撮影する。外部機器インターフェース１６は、通信ケーブルを取り付けることが可能であり、ケーブルを介してパーソナルコンピュータ等の他の機器と通信する。表示部１７は液晶表示装置より成り、文字や画像を表示する。撮像部１５で撮影した画像は表示部１７に表示される。
【００１９】
制御部１０は、携帯式電話機１の全体の動作を制御するとともに、送受する音声や画像データの処理を行う。制御部１０にはＣＰＵ１０ａが含まれており、制御や各種処理は主としてＣＰＵ１０ａによってなされる。
【００２０】
携帯式電話機１は、インターネットに接続してウェブページから情報をダウンロードする機能や電子メールを送受する機能を有する。送受するメールには、様々なファイルを添付することが可能であり、これらのファイルには画像データを記したものも含まれる。ダウンロードされる情報にも画像データが含まれる。ダウンロードした画像データや受信メールに添付されていた画像データが表す画像は、撮像部１５で撮影した画像と同様に、表示部１７に表示することができる。
【００２１】
携帯式電話機１は、上記の各部のほか、表示用メモリ１８、作業用メモリ１９、保存用メモリ２０、プログラムメモリ２１、およびパラメータメモリ２２を備える。表示用メモリ１８は、表示部１７に表示すべき画像を表す画像データを一時的に記憶する。作業用メモリ１９は、制御部１０のＣＰＵ１０ａが制御や画像データの処理に必要な情報を一時的に記憶する。保存用メモリ２０は、画像データを記憶して保存する。保存用メモリ２０はフラッシュメモリより成り、書き換え可能であり、また、電力供給を受けないときにも記憶内容を失わない。
【００２２】
プログラムメモリ２１はＣＰＵ１０ａが行う動作を記したプログラムを記憶しており、パラメータメモリ２２はＣＰＵ１０ａが制御や画像データの処理に用いるパラメータを記憶している。これらのメモリ２１、２２はＲＯＭより成り、電力供給を受けないときでも記憶内容を失わない。
【００２３】
携帯式電話機１は、単一の画像データに基づいて平面的な２次元の画像を表示する機能に加え、視差のある左右の画像を表す２種の画像データに基づいて立体的な３次元の画像を表示する機能を有する。これらの画像の表示の原理を図２に示す。
【００２４】
表示部１７の液晶表示装置は透過型であり、赤色（Ｒ）光を選択的に透過させるフィルターを備え、画像のＲ成分を表示する画素（Ｒ画素という）群と、緑色（Ｇ）光を選択的に透過させ、画像のＧ成分を表示する画素（Ｇ画素という）群と、青色（Ｂ）光を選択的に透過させるフィルターを備え、画像のＢ成分を表示する画素（Ｂ画素という）群を有する。これら３種の画素群は、図２（ａ）に示すように、それぞれ縦方向に列を成すように配置されており、また、この順で横方向に交互に配置されている。横方向に並ぶ３つの画素（Ｒ画素、Ｇ画素、Ｂ画素）が画像の１点を表す。
【００２５】
２次元の画像を表示するときは、画像の各点を横方向および縦方向に連続して表示する。全ての画素からの光は使用者の左眼と右眼の双方に導かれる。一方、３次元の画像を表すときは、図２（ｂ）に示すように、横方向については、左眼用の画像と右眼用の画像を、１画素ごとに交互に表示する。縦方向については、左眼用の画像、右眼用の画像共に、画像の各点を連続して表示する。左眼用の画像の光は左眼のみに導かれ、右眼用の画像は右眼のみに導かれる。
【００２６】
３次元の画像の提供に際し、左眼用の画像の光と右眼用の画像の光をそれぞれ選択的に左眼および右眼に導くための構成を図３に模式的に示す。表示部１７は、２つの透過型液晶パネル１７ａ、１７ｂ、導光板１７ｃおよび光源１７ｄより成る。光源１７ｄは白色光を発して、発した光を導光板１７ｃにその端面より入射させる。導光板１７ｃは、上面または下面に微細な凹凸（不図示）を有しており、端面より入射した光を、上下両面で全反射して他方の端面に向けて導きつつ、凹凸によって上面から出射させる。
【００２７】
液晶パネル１７ａは、画像を表示するためのものであり、前述のＲ画素群、Ｇ画素群、Ｂ画素群より成る。導光板１７ｃからの光は、液晶パネル１７ａによって変調されて、画像を表す光となる。なお、液晶パネル１７ａの上面および下面に対向して偏光板が設けられているが、ここでは図示していない。
【００２８】
液晶パネル１７ｂは、縦方向（図３の紙面に垂直な方向）に延びる透明電極（不図示）を有しており、斜線を付して示したように、電圧印加時にストライプ状の遮光部を現出する。液晶パネル１７ｂは各遮光部が液晶パネル１７ａの画素と画素の間に対向するように配置されている。液晶パネル１７ａの横方向に並ぶ画素のうち、奇数番目の画素からの光は、液晶パネル１７ｂの遮光部によって遮断されて右眼には達せず、左眼のみに達し、逆に、偶数番目の画素からの光は、遮光部によって遮断されて左眼には達せず、右眼のみに達する。左眼用の画像と右眼用の画像を１画素ごとに交互に表示することにより、３次元の画像が使用者に提供される。
【００２９】
２次元の画像を表示する際には、液晶パネル１７ｂに電圧を印加せず、遮光部を現出させない。この場合、液晶パネル１７ａの全ての画素からの光は、左眼と右眼の双方に達する。この設定で２次元の画像を表示する状態を２Ｄモードといい、図３に示した設定で３次元の画像を表示する状態を３Ｄモードという。
【００３０】
インターネットを介してダウンロードする画像データや受信メールに添付されている画像データには、２次元の画像を表すものと、３次元の画像を表すものがある。３次元の画像を表す画像データのデータ配列を図４に模式的に示す。左眼用の画像データと右眼用の画像データはそれぞれ２次元の画像を表す画像データの半分の大きさであり、画像の横方向の１列ごとに、左眼用の画像データと右眼用の画像データが並べて配置される。各画像データ中では、画像の１点を表すＲ画素用、Ｇ画素用、Ｂ画素用のデータ（それぞれ、Ｒ画素データ、Ｇ画素データ、Ｂ画素データという）の組が横方向に並べて配置されている。
【００３１】
この画像データに基づいてそのまま画像を表示すると、その画像は図５（ａ）に示したように、左眼用の画像と右眼用の画像が左右に分離して表示されることになる。そこで、図４の画像データをそのまま用いるのではなく、横方向の配列を変更して、左眼用の画像データと右眼用の画像データとを１画素データごとに交互に並べる。この配列変更後の画像データを表示すると、図５（ｂ）に示したように、左眼用の画像と右眼用の画像が融合して表示される。この画像を３Ｄモードで表示することで、立体的な像が使用者に提供される。
【００３２】
携帯式電話機１は、２次元の画像を表す画像データから３次元の画像を表す画像データを生成する機能を有する。これは、２次元の画像データから、Ｒ画素データ、Ｇ画素データ、Ｂ画素データの組を１組おきに抽出して（間引いて）左眼用の画像データとし、この左眼用の画像データに含まれるＲ画素データ、Ｇ画素データ、Ｂ画素データの各組を、左右方向の位置に応じて、端に近いものほどシフト量が大きくなるようにシフトさせて、右眼用の画像データとする。この機能により、インターネットを介して取得した２次元の画像データや、撮像部１５で撮影した画像を表す画像データから、３次元の画像を表す画像データが得られ、３次元の画像を提供することが可能になる。
【００３３】
なお、本実施形態では、左右を区別するときに、上記のように、左を主、右を従として説明するが、いずれを主としてもかまわない。説明中の「左」と「右」は相互に置き換えて読むことができる。
【００３４】
携帯式電話機１は、多数の画像データを個別のファイルとして保存用メモリ２０に記憶する。インターネットを介してダウンロードした画像データや受信メールに添付されていた画像データのファイルについては、元々付されていたファイル名を付し、撮像部１５で撮影した画像を表す画像データのファイルについては、所定のファイル名を付す。これらのファイル名は使用者が任意に変更することができる。
【００３５】
記憶している画像データが表す画像を表示部１７に表示するとき、および記録している画像データを電子メールに添付して送付するとき、使用者は、ファイル名を一覧として表示部１７に表示させて、所望のものを選択することができる。携帯式電話機１は、使用者による選択をより容易にするために、サムネイル画像を一覧表示する機能も有する。サムネイル画像を表す画像データは、インターネットを介して取得した画像データ、または撮像部１５によって撮影した画像を表す画像データから作成しておき、元の画像データと共にその画像データのファイル内に記憶しておく。
【００３６】
サムネイル画像は２次元の画像とすることもできるし、３次元の画像とすることもできる。サムネイル画像の表示例を図６（ａ）〜図６（ｅ）に示す。これらの図において、三角形で表記したサムネイル画像は元の画像データが２次元の画像を表すものあることを意味し、円形または楕円形で表記したサムネイル画像は元の画像データが３次元の画像を表すものであることを意味する。サムネイル画像は、２Ｄモードで一律に平面的に、または３Ｄモードで一律に立体的に表示する。
【００３７】
図６（ａ）〜図６（ｄ）は２Ｄモードでのサムネイル画像の表示例であり、図６（ｅ）は３Ｄモードでのサムネイル画像の例である。いずれの例においても、２次元の画像を表す画像データから作成したサムネイル画像と、３次元の画像データから作成したサムネイル画像が混在している。
【００３８】
サムネイル画像を表す画像データは、元の画像データからＲ画素データ、Ｇ画素データ、Ｂ画素データの組を複数の組あたり１組抽出して（間引いて）作成する。元の画像データが３次元の画像を表す場合の２次元のサムネイル画像の画像データの作成には、３通りの方法がある。まず、図６（ａ）に示すように、図４のデータ配列全体から生成することができる。また、図６（ｂ）に示すように、図４のデータ配列のうち、左眼用の画像データのみから生成することもできる。さらに、図６（ｃ）に示すように、左眼用の画像データのみから、横方向の間引き率を半分にして、生成することもできる。
【００３９】
左眼用の画像データのみからサムネイル画像の画像データを作成する場合、元の画像データが２次元の画像を表すものか３次元の画像を表すものかが、使用者にとって判り難くなる。そこで、各サムネイル画像と共に、元の画像データが表す画像の次元を記号で表示するとよい。図６（ｄ）は、図６（ｃ）の表示に、「２Ｄ」および「３Ｄ」の記号を加えたものである。
【００４０】
元の画像データが３次元の画像を表す場合の３次元の画像を表す画像データの作成は、図４のデータ配列を、前述のように、左眼用の画素データと右眼用の画素データが交互に並ぶ形式に変換し、その変換後の画像データを用いて行う。また、元の画像データが２次元の画像を表す場合の３次元の画像を表す画像データの作成は、元の画像データからのデータ抽出により左眼用の画像データを作成し、この左眼用の画像データから右眼用の画像データを生成し、さらに、左眼用の画素データと右眼用の画素データが交互に並ぶ形式に変換して、その変換後の画像データを用いて行う。
【００４１】
また、元の画像データが２次元の画像を表す場合、元の画像データからのデータ抽出により左眼用の画像データを作成し、この左眼用の画像データをそのまま複写して右眼用の画像データとし、左眼用の画素データと右眼用の画素データが交互に並ぶ形式に変換して、その変換後の画像データを用いて行うようにしてもよい。このようにすると、３Ｄモードでの表示により、左右の眼に視差のない画像、つまり２次元の画像が提供されることになる。
【００４２】
サムネイル画像の大きさは一定であり、したがって、その画像データの大きさ（画素数）も一定である。一方、撮像部１５で撮影する画像の大きさは一定であるものの、インターネットを介して取得する画像の大きさは、提供者によって異なる。このため、サムネイル画像を表す画像データの作成に際しては、元の画像の大きさを考慮する。具体的には次のようにしてサムネイル画像の画像データを作成する。
【００４３】
まず、サムネイル画像の横方向の大きさ（画素数）に対する元の画像の横方向の大きさ（画素数）の比と、サムネイル画像の縦方向の大きさに対する元の画像の縦方向の大きさの比を算出する。そして、小さい方の比に従って元の画像データから画素データを抽出して、中間画像データを生成する。この中間画像データは、比の小さい方向についてはサムネイル画像に合致した大きさとなる。次いで、比の大きい方向について、中間画像データのうちのサムネイル画像の大きさを超える部分を削除する。これで、元の画像データの大きさによらず、一定の大きさのサムネイル画像を表す画像データが得られる。
【００４４】
画像データ取得時の携帯式電話機１の処理の流れの概略を図７に示す。まず、インターネットからのダウンロード、電子メール受信、または撮像部１５での撮影によって画像データを取得し（ステップ＃１０）、取得した画像データをファイルとして保存用メモリ２０に記憶する（＃１１）。次いで、取得した画像データならびにその画像データのファイル名およびファイルに付加されている情報を解析して、画像データの種類（書式）、画像の次元、著作権に関する情報等を得て（＃１２）、それらを画像データの属性として、画像データのファイルに記憶する（＃１３）。さらに、取得した画像データからサムネイル画像を表す画像データを作成し（＃１４）、その画像データを元の画像データのファイルに記憶する（＃１５）。最後に、取得した画像データが表す画像を、その次元に応じて２Ｄモードまたは３Ｄモードで、表示部１７に表示する（＃１６）。
【００４５】
ステップ＃１２および＃１３の処理においては、作業用メモリ１９を使用する。作業用メモリ１９および保存用メモリ２０における記憶内容の構造を、それぞれ図８（ａ）および図８（ｂ）に模式的に示す。図８（ｂ）に示すように、保存用メモリ２０には、画像データごとのファイルが記憶され、全てのファイルには一連の番号が付されている。なお、ここでは、番号が１のファイルが削除されて存在しなくなった状態の例を示している。
【００４６】
保存用メモリ２０中の各ファイルは、管理情報、サムネイル画像データ、および画像データで構成される。管理情報には、画像の種類（書式）、画像の次元属性、著作権属性、ファイル名、画像サイズ（画像データの横方向と縦方向の画素数）が含まれる。サムネイル画像データは、圧縮して記憶しておき、その圧縮処理に関する情報を付加しておく。また、画像データは、取得時に圧縮されており、圧縮処理に関する情報と共にそのまま記憶する。画像データには、前述のように、２次元の画像を表すものと３次元の画像を表すものがある。
【００４７】
作業用メモリ１９には、保存用メモリ２０中の全ての画像データのファイルの管理情報と、先頭の画像データの番号が記憶される。また、各画像データの管理情報ごとに、次の画像データの番号が記憶される。図８（ａ）の例では、先頭の画像データの番号（画像番号）は「２」、２番目の画像データの次の画像データの番号は「３」である。最後の画像データの管理情報には、次の画像データの番号として「０」が記憶される（不図示）。さらに、インターネットを介して画像データを取得したときには、その画像データに付加されている画像の種類（書式）を表す情報および著作権に関する情報を、作業用メモリ１９の所定の領域に記憶しておく（不図示）。
【００４８】
制御部１０は、電力供給開始時に、保存用メモリ２０から全ての画像データの管理情報を読み出して作業用メモリ１９に記憶させておく。以降は、作業用メモリ１９を参照して、保存用メモリ２０の各ファイルを管理する。管理には、画像データの番号を用いる。保存用メモリ２０からファイルを削除したときには、対応する管理情報を作業用メモリ１９から削除し、作業メモリ１９中の次の画像データの番号を適宜変更する。また、新たな画像データを保存用メモリ２０に記憶させたときは、その管理情報を作業用メモリ１９に記憶し、作業メモリ１９中の次の画像データの番号を適宜変更する。
【００４９】
一般に、インターネットを介して提供される画像データはＪＰＥＧ方式に従って圧縮されており、撮像部１５によって撮影した画像を表す画像データも、ＪＰＥＧ方式に従って圧縮する。ただし、インターネットを介して提供されるＪＰＥＧ方式の画像データのファイル名の拡張子は、２次元の画像を表すときには「ＪＰＥＧ」または「ＪＰＧ」とされ、３次元の画像を表すときには「ＳＴＪ」とされている。携帯式電話機１でもこれに準じて、撮影した２次元の画像を表す画像データについては、ファイル名の拡張子を「ＪＰＥＧ」または「ＪＰＧ」とし、その画像データから生成した３次元の画像を表す画像データについては、そのファイル名の拡張子を「ＳＴＪ」とする。
【００５０】
携帯式電話機１は、動きのある画像を表す２つ以上の画像データから、それらの画像の中間のいくつかの画像を表す画像データを生成して、動きの滑らかな動画を表示する機能を有する。このような画像をＥアニメーションという。Ｅアニメーションにも、平面的な２次元の画像と立体的な３次元の画像がある。また、Ｅアニメーションの画像データはインターネットを介して提供されている。提供されるＥアニメーションの画像データもＪＰＥＧ方式に従って圧縮されている。ただし、Ｅアニメーションの画像データは、２次元の画像を表すか３次元の画像を表すかにかかわらず、ファイル名の拡張子を「ＮＶＡ」とされる。携帯式電話機１においてもこれに準じて、全てのＥアニメーションの画像データについて、ファイル名の拡張子を「ＮＶＡ」とする。
【００５１】
図７に示した画像データ取得時の処理のうち、ステップ＃１２〜＃１５における処理をより詳細に図９に示す。まず、保存用メモリ２０から画像データを読み出す（ステップ＃１０２）。読み出しに際しては、画像データに付されている圧縮処理の情報を用いて解凍する。そして、作業用メモリ１９の前述の所定領域を参照して、画像の種類を判別する（＃１０４）。撮像部１５での撮影により画像データを取得したときには、作業用メモリ１９の所定領域には何も記憶していないが、このときは画像の種類を「ＪＰＥＧ」とする。
【００５２】
次いで、画像データを解析して、Ｅアニメーションの画像であるか否かを判別する（＃１０６）。Ｅアニメーションでないときは、ファイル名を調べて、拡張子が「ＳＴＪ」であるか否を判別する（＃１０８）。拡張子が「ＳＴＪ」であれば、２Ｄ／３Ｄ属性を「３Ｄ」とし（＃１１４）、そうでなければ、２Ｄ／３Ｄ属性を「２Ｄ」とする（＃１１６）。２Ｄ／３Ｄ属性は作業用メモリの所定領域に記憶しておく（＃１１８）。Ｅアニメーションの画像データであれば、画像データを解析して２次元の画像データであるか、３次元の画像データであるかを判別する（＃１１０）。３次元の画像データのときには、２Ｄ／３Ｄ属性を「３Ｄ」とし（＃１１４）、２次元の画像データのときには、２Ｄ／３Ｄ属性を「２Ｄ」とする（＃１１６）。
【００５３】
そして、作業用メモリ１９の前述の所定領域を参照して著作権に関する情報の有無を判別し（＃１２０）、あれば著作権属性を「あり」とし（＃１２２）、なければ著作権属性を「なし」とする（＃１２４）。また、サムネイル画像の画像データを作成し（＃１２６）、作成した画像データを圧縮する（＃１２８）。
【００５４】
次いで、保存用メモリ２０中の画像データに付す画像番号Ｎを１とする（＃１３０）。そして、その画像番号Ｎの管理情報を作業用メモリ１９に記憶しているか否かを調べ（＃１３２）、記憶していれば画像番号Ｎに１を加えて（＃１３４）、ステップ＃１３２に戻る。画像番号Ｎを記憶していなければ、保存用メモリ２０のうち、図７のステップ＃１１で記憶した画像データのファイル内に、圧縮したサムネイル画像の画像データ、画像種類属性、２Ｄ／３Ｄ属性、および著作権属性を記憶して保存する（＃１３６）。その際、そのファイル（画像データ）の番号をＮとする。また、作業用メモリ１９に、管理情報として、画像種類属性、２Ｄ／３Ｄ属性および著作権属性を記憶し（＃１３８）、その管理情報の番号をＮとする。
【００５５】
さらに、作業用メモリ１９に記憶した管理情報に付加する次の画像番号を、その時点での先頭の画像番号とし（＃１４０）、先頭の画像番号をＮとする（＃１４２）。
【００５６】
ステップ＃１２８におけるサムネイル画像の画像データの圧縮はＪＰＥＧ方式に従って行い、ステップ＃１３６におけるその画像データの記憶に際しては、後の解凍を可能にするために、圧縮処理に用いたパラメータも記憶しておく。ここで、サムネイル画像の画像データは、携帯式電話機１のみで使用するものであるので、一部のパラメータは常時一定として、全ての画像データに共通にすることが可能である。このような共通のパラメータをサムネイル画像の画像データごとに記憶するとすれば、保存用メモリ２０の記憶容量の無駄使いとなる。そこで、大きな記憶容量を必要とする共通のパラメータについては、画像データごとに記憶するのではなく、パラメータメモリ２２（図１参照）に記憶しておく。
【００５７】
ＪＰＥＧ方式による圧縮処理で用いられるパラメータを図１０に示す。圧縮は、ハフマン符号化とこれに続く量子化の２段階で行われ、それぞれハフマンテーブルと、量子化テーブルがパラメータとして用いられる。携帯式電話機１では、ハフマンテーブル（記号ＤＨＴ）を全てのサムネイル画像の画像データに共通として、これをサムネイル画像の画像データに付加して記憶するパラメータから除外する。ハフマンテーブル大きさは４００バイト程度であり、例えば、標準的な圧縮を用いた４８×４８ドットのサムネイル画像の画像データと全パラメータの大きさ（約９００バイト）の約４５％に相当するから、ハフマンテーブルを記憶しないことで、保存用メモリ２０の記憶容量の大きな節約となる。なお、量子化テーブル（記号ＤＱＴ）はハフマン符号化後の画像データに依存するため、画像データごとに個別に記憶する必要がある。
【００５８】
サムネイル画像の表示に際しては、圧縮されている画像データを、その画像データと共に記憶している量子化テーブルを用いて逆量子化し、さらに、パラメータメモリ２２に記憶しているハフマンテーブルを用いて逆符号化（復号化）する。
【００５９】
取得した画像データについては、ハフマンテーブルを含む全パラメータを記憶する。インターネットを介して提供される画像データは、ハフマンテーブルが共通でないからである。ただし、撮像部１５の撮影で取得した画像データについては、共通のハフマンテーブルをパラメータメモリ２２に記憶しておいて、これを用いて符号化を行って、ハフマンテーブルを記憶しないようにしてもよい。このようにすると、保存用メモリ２０の記憶容量のさらなる節約になる。
【００６０】
ハフマンテーブルを画像データと共に記憶しない場合、ハフマンテーブルを記憶していないことを示す情報を画像データに付加して記憶しておくとよい。このようにすると、その画像データを電子メールに添付して送信する際に、共通のハフマンテーブルを付加すべきことが明確になる。また、ハフマンテーブルを記憶しなかった画像データについては電子メールへの添付を許さないようにするときに、後述するように、電子メールへの添付が不可である旨をサムネイル画像と共に表示することができる。ハフマンテーブルを記憶していないことを示す情報は、前述の２Ｄ／３Ｄ属性や著作権属性と同様に、管理情報に含めておくのが好ましい。ハフマンテーブルの有無の判断を速やかに行うことが可能になる。
【００６１】
ハフマンテーブルを記憶しなかった画像データを、そのまま他の機器に提供することを許すようにしてもよい。この場合は、ハフマンテーブルが省略されていることを示す情報を画像データに付加しておく。そのような画像データを取得した機器は、付加されている情報によってハフマンテーブルが省略されていることが判り、適切な対策を講じることが可能になる。
【００６２】
例えば、携帯式電話機１が同じ機能を有する他の携帯式電話機からそのような画像データを取得したときは、共通のハフマンテーブルを用いて復号化を行うことにより、取得した画像データが表す画像を表示することが可能である。共通のハフマンテーブルを用いて復号化することができないときには、例えば「×」印や「表示不可」の文字を画像に代えて表示して、表示できないことを示すこともできる。ハフマンテーブルを省略して画像データを提供することは、通信量の低減にもつながり、ダウンロードや電子メールの送受に要する時間が短縮される。
【００６３】
電子メールを作成して送信する際の処理の流れの概略を図１１に示す。まず、使用者の入力操作に従って、電子メールを作成する（ステップ＃２０）。このとき、送信先のメールアドレスも設定しておく。次いで、作成した電子メールに画像データを添付することが指示されたか否かを判定する（＃２１）。画像データの添付が指示されていないときは、そのまま電子メールを送信する（＃２５）
【００６４】
画像データの添付が指示されたときは、サムネイル画像を一覧表示する（＃２２）。その際、元の画像データが２次元の画像を表すものであるか３次元の画像を表すものであるかにかかわらず、サムネイル画像を表示する。そして、使用者の指定した画像データを選択する（＃２３）。このとき、画像の次元、著作権等に基づいて、電子メールに添付してよい画像データをあらかじめ定めておき、添付してよい画像データのみを選択可能とする。最後に画像データを電子メールに添付して（＃２４）、送信する（＃２５）。
【００６５】
ステップ＃２２、＃２３における処理をより詳細に図１２に示す。まず、表示部１７に一度に表示し得るサムネイル画像の最大数Ｍ０を設定し、サムネイル画像の表示位置Ｍを１とする（ステップ＃２０２）。例えば、横に３つ、縦に３つの画像を表示するとき、Ｍ０は９であり、その場合の、右端中央の表示位置Ｍは６である。次いで、作業用メモリ１９から先頭の画像番号Ｎを読み出す（＃２０４）。
【００６６】
そして、画像番号Ｎが０か否かを判定し（＃２０６）、０でなければ、表示位置Ｍが最大数Ｍ０以下であるか否かを判定する（＃２０８）。表示位置Ｍが最大数Ｍ０以下のときは、保存用メモリ２０から画像番号Ｎのサムネイル画像データを読み出して（＃２１０）、解凍し（＃２１２）、解凍後の画像データを、表示用メモリ１８の表示位置Ｍに対応する領域に記憶する（＃２１４）。
【００６７】
次いで、作業用メモリ１９のＮ番目の管理情報を参照して（＃２１６）、２Ｄ／３Ｄ属性を判定する（＃２１８）。２Ｄ／３Ｄ属性が「２Ｄ」のときは、作業用メモリ１９のＮ番目の管理情報を参照して（＃２２０）、著作権属性を判定する（＃２２２）。著作権情報が「なし」のときは、そのＮ番目の画像データを選択可能（メールに添付してよい）とし、その旨を作業用メモリ１９の所定領域に記憶する（＃２２４）。
【００６８】
ステップ＃２１８の判定で、２Ｄ／３Ｄ属性が「３Ｄ」のとき、または、ステップ＃２２２の判定で、著作権属性が「あり」のときは、選択不可とする（＃２２６）。さらに、選択不可であることを明確に示すために、表示用メモリ１８中のその画像データを修飾して、斜線を表すデータを付加する（＃２２８）。
【００６９】
これらの処理に続き、表示用メモリ１８の全てのデータを用いて表示部１７に表示する（＃２３０）。これで、ステップ＃２１４の処理を行った回数に等しい数のサムネイル画像が表示される。次いで、作業用メモリ１９から次の画像番号Ｎを読み出し（＃２３２）、表示位置Ｍを１だけ増して（＃２３４）、ステップ＃２０６に戻る。
【００７０】
ステップ＃２０６の判定で画像番号Ｎが０のとき、すなわち全ての画像データのサムネイル画像を表示し終えたとき、または、ステップ＃２０８の判定で表示位置Ｍが最大数Ｍ０を超えたとき、すなわちサムネイル画像を表示する位置に余裕がなくなったときは、操作部１４が操作されて、表示のスクロールが指示されたか否かを判定する（＃２３６）。スクロールの指示があったときは、それに応じて、表示位置Ｍを更新し（＃２３８）、画像番号Ｎも更新する（＃２４０）。例えば、横方向に３つ並べてサムネイル画像を表示しているときは、表示位置Ｍを３増加または減少させる。そして、ステップ＃２０６に戻る。
【００７１】
スクロールの指示がないときは、決定が指示されたか否かを判定する（＃２４２）。この指示は、使用者が操作部１４の所定のキーを操作することによって与える。また、使用者は、この指示を与える前に、操作部１４のカーソルキーを操作して表示部１７のカーソルを選択したいサムネイル画像の上に位置させておく。決定の指示がないときはステップ＃２３６に戻る。
【００７２】
決定の指示があったときは、カーソルが存在する表示位置に対応する画像番号について、ステップ＃２２４または＃２２６で記憶した情報を作業用メモリ１９から読み出し、選択可であるか選択不可であるかを判定する（＃２４４）。選択不可のときは、ステップ＃２３６に戻る。選択可のときは、その画像番号の画像データを保存用メモリ２０から読み出し（＃２４６）、また、そのファイル名を作業用メモリ１９から読み出す（＃２４８）。その後、図１１のステップ＃２４において、読み出した画像データに読み出したファイル名をつけて、電子メールに添付する。
【００７３】
ステップ＃２２８で修飾された画像データが表すサムネイル画像の例を図１３に示す。図１３（ａ）は前述の図６（ｃ）のサムネイル画像に斜線を付したものであり、図１３（ｂ）は図６（ｅ）のサムネイル画像に斜線を付したものである。このように斜線を付すことによって、電子メールに添付することが許されていない画像データを明確にすることができる。斜線を付すことに代えて、「不可」の文字等の他の表示を加えることで、添付が許されないことを明確にしてもよい。また、色彩のない白黒画像とすることで、添付が許されないことを明確にしてもよい。なお、電子メールへの添付のためではなく、画像の表示のためにサムネイル画像の一覧を表示するときは、図６（ａ）〜図６（ｅ）に示したごとく、添付が許されないことを示す斜線等の表示は行わない。
【００７４】
電子メールに添付することの可否の判断基準の例を図１４に示す。ＪＰＥＧ方式で作成された画像データのうち、２次元であってインターネットを介して取得したものは、通常、著作権に関する情報が付加されており、著作権属性に基づいて添付不可とする。また、撮像部１５での撮影により取得した２次元の画像データは、著作権属性および２Ｄ／３Ｄ属性に基づいて添付の可否を判断するが、２Ｄ／３Ｄ属性からは添付可であり、著作権属性からも添付可となる。ただし、携帯式電話機１は、撮像部１５で撮影した画像を表す画像データに著作権に関する情報を付加する機能も備えており、使用者が著作権に関する情報を付加したときは、著作権属性によって添付不可となる。
【００７５】
ＪＰＥＧ方式で作成された画像データのうち、３次元であってインターネットを介して取得したものも、通常、著作権に関する情報が付加されており、著作権属性に基づいて添付不可とする。また、たとえ著作権に関する情報が付加されておらず、著作権属性からは可となっても、２Ｄ／３Ｄ属性から不可とする。また、３次元への変換機能によって２次元の画像データから作成した画像データ（ファイル名の拡張子はＳＴＪ）は、２Ｄ／３Ｄ属性から不可とする。３次元の画像を表示し得る携帯式電話機はあまり普及しておらず、３次元の画像データを送信しても無駄になる可能性が高いからである。
【００７６】
Ｅアニメーションの画像データ（ファイル名の拡張子はＮＶＡ）は、２次元の画像を表すものであるか３次元の画像を表すものであるかにかかわらず、著作権属性または画像種別（画像の種類）から添付不可とする。著作権属性からは可となる場合でも、画像種別は常にＮＶＡであり、Ｅアニメーションの画像データは常に添付不可となる。
【００７７】
なお、携帯式電話機１では、中央部が空白の、すなわち周辺部のみのＥアニメーションの画像データを保存用メモリ２０にいくつか記憶しており、これらの画像データと撮像部１５で撮影した画像の画像データとを合成して、フレームに相当する周辺部が滑らかに動く画像として表示する機能を有する。これらのＥアニメーションの画像データにも２次元のものと３次元のものとがあるが、いずれの画像データも、その画像種別（ＮＶＡ）に基づいて、メールへの添付を不可とする。Ｅアニメーションの画像を表示し得る携帯式電話機は、３次元の画像を表示し得る携帯式電話機と同様に、未だ広範には普及しておらず、Ｅアニメーションの画像データを送信しても無駄になり易いからである。
【００７８】
前述のように、携帯式電話機１は、外部機器インターフェース１６（図１参照）に接続されたケーブルを介して、パーソナルコンピュータ等の他の機器と通信することができる。この通信で他の機器に送信し得る情報には画像データも含まれるが、この場合も、画像データの送信の可否を、電子メールへの添付の可否と同様にして判断する。これにより、画像データ作成者の著作権が確実に保護されるとともに、無駄な送信を避けることができる。
【００７９】
【発明の効果】
画像を表す画像データを取得して記憶し、記憶している画像データが表す画像の縮小画像を表示する携帯式電話機において、本発明のように、画像データを取得したときに、その画像データから縮小画像を表す画像データを作成して、取得した画像データのほかに、作成した画像データを記憶するようにすると、縮小画像つまりサムネイル画像を速やかに表示することが可能であり、また、同じサムネイル画像を表示するためにサムネイル画像の作成処理を重複して行うという無駄を避けることができる。
【００８０】
取得した画像データおよび作成した画像データのほかに、取得した画像データが表す画像の次元を示す情報を記憶するようにすると、サムネイル画像のみでは判り難い元の画像の次元を、使用者に示すことができる。しかも、次元を調べるために画像データそのものを参照する必要がなく、次元を速やかに示すことが可能である。
【００８１】
作成した画像データをＪＰＥＧ方式に従って圧縮し、圧縮した画像データを、ハフマンテーブルを除く圧縮に用いたパラメータと共に、記憶するようにすると、サムネイル画像の画像データを記憶することによる記憶可能な画像データの数の低下を抑えることができる。
【００８２】
取得した画像データが３次元の画像を表すときに、３次元の縮小画像を表す画像データを作成するようにすると、サムネイル画像を見ただけで、元の画像が３次元であることが判る。
【００８３】
取得した画像データが３次元の画像を表すときに、２次元の縮小画像を表す画像データを作成するようにすると、２次元の画像を表す画像データと３次元の画像を表す画像データが混在するときでも、一律に２次元のサムネイル画像を表示することができて、表示が容易である。
【図面の簡単な説明】
【図１】本発明の一実施形態の携帯式電話機の概略構成を模式的に示すブロック図。
【図２】上記携帯式電話機における２次元の画像と３次元の画像の表示の原理を示す図。
【図３】３次元の画像の提供に際し、左眼用の画像の光と右眼用の画像の光をそれぞれ選択的に左眼および右眼に導くための上記携帯式電話機の構成を模式的に示す図。
【図４】３次元の画像を表す画像データの一般的なデータ配列を模式的に示す図。
【図５】３次元の画像を表す画像データに基づいて表示した画像の例を模式的に示す図。
【図６】上記携帯式電話機におけるサムネイル画像の表示例を模式的に示す図。
【図７】上記携帯式電話機における画像データ取得時の処理の流れの概略を示すフローチャート。
【図８】上記携帯式電話機の作業用メモリおよび保存用メモリにおける記憶内容の構造を模式的に示す図。
【図９】図７に示した画像データ取得時の処理のうち、ステップ＃１２〜＃１５における処理を詳細に示すフローチャート。
【図１０】ＪＰＥＧ方式による圧縮処理で用いられるパラメータを示す図。
【図１１】上記携帯式電話機における電子メールを作成して送信する際の処理の流れの概略を示すフローチャート。
【図１２】図１１に示した電子メールに関する処理のうち、ステップ＃２２、＃２３における処理を詳細に示すフローチャート。
【図１３】上記携帯式電話機において電子メールに添付する画像データの選択の際に表示するサムネイル画像の例を示す図。
【図１４】上記携帯式電話機における電子メールへの画像データの添付可否の判断基準を示す図。
【符号の説明】
１ 携帯式電話機
１０ 制御部
１０ａ ＣＰＵ
１１ 通信部
１１ａ アンテナ
１２ 音声入力部
１３ 音声出力部
１４ 操作部
１５ 撮像部
１６ 外部機器インターフェース
１７ 表示部
１７ａ 画像表示用液晶パネル
１７ｂ 遮光用液晶パネル
１７ｃ 導光板
１７ｄ 光源
１８ 表示用メモリ
１９ 作業用メモリ
２０ 保存用メモリ
２１ プログラムメモリ
２２ パラメータメモリ[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a mobile phone having a function of displaying an image, and more particularly to a mobile phone that displays a reduced image of an image represented by image data.
[0002]
[Prior art]
Portable telephones that connect to the Internet through telephone functions are becoming widespread. In such a portable telephone, like a personal computer, information can be downloaded via the Internet, or a file can be attached to an e-mail and sent / received. Many portable telephones have a relatively large display device and can display an image, and can display an image represented by downloaded image data or image data attached to a received mail. A mobile phone is also provided with a camera, and it is also possible to display a photographed image or to attach the image data to an e-mail and transmit it.
[0003]
In recent years, image data representing left and right images with parallax has been provided via the Internet, and a portable telephone that displays not only a two-dimensional two-dimensional image but also a three-dimensional three-dimensional image has been proposed. (For example, JP-A-2001-251403). In such a mobile phone, the setting of the display device can be switched between displaying a two-dimensional image and displaying a three-dimensional image.
[0004]
Further, a technology for generating three-dimensional image data representing a three-dimensional image from two-dimensional image data representing an image captured by a camera has been developed (for example, Japanese Patent Application Laid-Open No. 2000-228778). It is preferable that the mobile phone is small and lightweight. Therefore, it is not practical to use two cameras to capture images for the left eye and the right eye. Is suitable for a mobile phone.
[0005]
The image data is treated as a file, and the file is given a file name including a name for identifying the image and an extension indicating the type of the image, that is, the format of the image data. Since the image data has a large amount of data, it is usually compressed, and decompression, which is a reverse process of compression, is performed at the time of display to return to a form suitable for display. The compression is generally performed according to the JPEG system, and the extension of the file name of the image data in this case is “JPEG” or “JPG”. In the file, the size (the number of pixels) of the image is described together with the image data. Further, information on copyright such as the name of the author is added to the file of the image data provided via the Internet.
[0006]
When displaying an image or attaching image data to an e-mail, the user can list image file names and select image data. However, simply displaying the file name is inconvenient because it is difficult to understand the contents of the image represented by the image data. Therefore, image data representing an image obtained by reducing an original image is created from each image data, and the images are displayed side by side. Such a reduced image is called a thumbnail image. The image data of the thumbnail image is created by extracting pixel data separated from the original image data, that is, by thinning out the image data. By displaying the thumbnail images side by side, the contents of the images represented by many pieces of image data can be immediately understood, and the selection by the user becomes extremely easy.
[0007]
[Patent Document] Japanese Patent Application Laid-Open No. 2001-251403 [Patent Document] Japanese Patent Application Laid-Open No. 2000-228778
[Problems to be solved by the invention]
As described above, thumbnail images are displayed to facilitate selection of image data. However, in a conventional mobile phone, each time a thumbnail image is displayed, the thumbnail image is displayed from the original image data. Is created. This is to save as much image data as possible while saving storage capacity. However, if the image data is created when the thumbnail image needs to be displayed, it takes time from when the user gives the display instruction to when the image is actually displayed, which is inconvenient. Further, every time the same thumbnail image is displayed, the same creation processing is repeatedly performed, and it is useless that the processing is duplicated.
[0009]
The present invention has been made in view of this point, and an object of the present invention is to provide a portable telephone that can provide thumbnail images quickly and efficiently.
[0010]
[Means for Solving the Problems]
In order to achieve the above object, according to the present invention, when image data is acquired in a mobile phone that acquires and stores image data representing an image and displays a reduced image of the image represented by the stored image data, Then, image data representing a reduced image is created from the image data, and the created image data is stored in addition to the acquired image data.
[0011]
In this portable telephone, when storing the acquired image data, the image data of the reduced image, that is, the thumbnail image is also stored. Therefore, when displaying a thumbnail image, it is only necessary to read out the stored image data, and the thumbnail image can be promptly displayed. Also, even when the already displayed thumbnail image is displayed again, there is no need to perform the process of creating the image data of the thumbnail image again, and there is no waste in processing efficiency.
[0012]
Here, in addition to the acquired image data and the created image data, information indicating a dimension of an image represented by the acquired image data may be stored. There are two types of image data: one representing a two-dimensional image and the other representing a three-dimensional image. When image data representing a two-dimensional thumbnail image is created from image data representing a three-dimensional image, It is not known that the original image data represents a three-dimensional image. However, by storing the information indicating the dimensions of the image, it becomes possible to display the dimensions of the image together with the thumbnail image based on the information, and to determine whether the original image data represents a two-dimensional image. It is possible to indicate to the user whether the image represents a two-dimensional image. In addition, since it is not necessary to refer to the image data itself, it is possible to quickly display the dimensions.
[0013]
Further, the created image data may be compressed according to the JPEG method, and the compressed image data may be stored together with the parameters used for the compression except for the Huffman table. By compressing the image data of the thumbnail image, a decrease in the number of storable image data due to storing the image data of the thumbnail image can be suppressed. In addition, by not storing a relatively large Huffman table among the parameters used for compression, it is possible to further suppress a decrease in the number of storable image data. The Huffman table may be prepared in common for all the image data of the thumbnail images, and may be stored.
[0014]
When the acquired image data represents a three-dimensional image, image data representing a three-dimensional reduced image can be created. In this way, the user can see that the original image is three-dimensional only by looking at the thumbnail image.
[0015]
When the acquired image data represents a three-dimensional image, image data representing a two-dimensional reduced image can be created. In this way, even when image data representing a two-dimensional image and image data representing a three-dimensional image are mixed, a two-dimensional thumbnail image can be displayed uniformly, which facilitates display.
[0016]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, a mobile phone according to an embodiment of the present invention will be described with reference to the drawings. FIG. 1 schematically shows a schematic configuration of a mobile phone 1 according to the present embodiment. The mobile phone 1 includes a communication unit 11, an audio input unit 12, an audio output unit 13, an operation unit 14, an imaging unit 15, an external device interface (I / F) 16, a display unit 17, and a control unit 10.
[0017]
The communication unit 11 carries a signal to be transmitted on a carrier and transmits the signal from the antenna 11a, and extracts a signal from the carrier received by the antenna 11a. The voice input unit 12 acquires voice to be transmitted, and the voice output unit 13 outputs the received voice. The operation unit 14 includes several keys associated with numbers and characters or predetermined functions, and is operated by a user to input a telephone number and a character string and to instruct an operation. The keys of the operation unit 14 include four cursor keys for moving a cursor (pointer) displayed on the display unit 17 up, down, left, and right.
[0018]
The imaging unit 15 is configured by a camera including a CCD area sensor and a lens that forms light on the CCD area sensor, and captures an image. The external device interface 16 can be provided with a communication cable, and communicates with another device such as a personal computer via the cable. The display unit 17 is composed of a liquid crystal display device and displays characters and images. The image captured by the imaging unit 15 is displayed on the display unit 17.
[0019]
The control unit 10 controls the overall operation of the mobile phone 1 and performs processing of transmitted and received voice and image data. The control unit 10 includes a CPU 10a, and control and various processes are mainly performed by the CPU 10a.
[0020]
The mobile phone 1 has a function of connecting to the Internet to download information from a web page and a function of sending and receiving e-mail. Various files can be attached to the e-mail to be sent and received, and these files include those with image data. The information to be downloaded also includes image data. The image represented by the downloaded image data or the image data attached to the received mail can be displayed on the display unit 17 in the same manner as the image captured by the imaging unit 15.
[0021]
The mobile phone 1 includes a display memory 18, a work memory 19, a storage memory 20, a program memory 21, and a parameter memory 22, in addition to the above components. The display memory 18 temporarily stores image data representing an image to be displayed on the display unit 17. The work memory 19 temporarily stores information necessary for the CPU 10a of the control unit 10 to perform control and process image data. The storage memory 20 stores and stores image data. The storage memory 20 is made of a flash memory, is rewritable, and does not lose stored contents even when power is not supplied.
[0022]
The program memory 21 stores a program describing operations performed by the CPU 10a, and the parameter memory 22 stores parameters used by the CPU 10a for control and processing of image data. These memories 21 and 22 are composed of ROMs and do not lose their stored contents even when power is not supplied.
[0023]
The mobile phone 1 has a function of displaying a two-dimensional two-dimensional image based on a single image data and a three-dimensional three-dimensional image based on two types of image data representing left and right images having parallax. It has the function of displaying images. FIG. 2 shows the principle of displaying these images.
[0024]
The liquid crystal display device of the display unit 17 is of a transmission type, includes a filter that selectively transmits red (R) light, and includes a group of pixels (referred to as R pixels) for displaying an R component of an image and green (G) light. A pixel (referred to as a B pixel) that includes a group of pixels (referred to as a G pixel) that selectively transmits and displays the G component of an image and a filter that selectively transmits the blue (B) light and displays the B component of the image. With groups. As shown in FIG. 2A, these three types of pixel groups are arranged so as to form columns in the vertical direction, and are alternately arranged in the horizontal direction in this order. Three pixels (R pixel, G pixel, B pixel) arranged in the horizontal direction represent one point of the image.
[0025]
When displaying a two-dimensional image, each point of the image is displayed continuously in the horizontal and vertical directions. Light from all pixels is directed to both the left and right eyes of the user. On the other hand, when representing a three-dimensional image, as shown in FIG. 2B, in the horizontal direction, an image for the left eye and an image for the right eye are alternately displayed for each pixel. In the vertical direction, each point of the image is continuously displayed on both the left-eye image and the right-eye image. The light of the image for the left eye is guided only to the left eye, and the image for the right eye is guided only to the right eye.
[0026]
FIG. 3 schematically shows a configuration for selectively guiding the light of the image for the left eye and the light of the image for the right eye to the left eye and the right eye when providing a three-dimensional image. The display unit 17 includes two transmissive liquid crystal panels 17a and 17b, a light guide plate 17c, and a light source 17d. The light source 17d emits white light and causes the emitted light to enter the light guide plate 17c from its end face. The light guide plate 17c has fine irregularities (not shown) on the upper surface or the lower surface. The light incident from the end surface is totally reflected on the upper and lower surfaces and guided toward the other end surface, and is emitted from the upper surface by the irregularities. Let it.
[0027]
The liquid crystal panel 17a is for displaying an image, and includes the above-described R pixel group, G pixel group, and B pixel group. The light from the light guide plate 17c is modulated by the liquid crystal panel 17a to become light representing an image. Although a polarizing plate is provided opposite to the upper and lower surfaces of the liquid crystal panel 17a, it is not shown here.
[0028]
The liquid crystal panel 17b has a transparent electrode (not shown) extending in a vertical direction (a direction perpendicular to the paper surface of FIG. 3). As shown by hatching, a stripe-shaped light shielding portion is formed when a voltage is applied. To appear. The liquid crystal panel 17b is arranged so that each light shielding portion faces between pixels of the liquid crystal panel 17a. Of the pixels arranged in the horizontal direction of the liquid crystal panel 17a, the light from the odd-numbered pixels is blocked by the light shielding portion of the liquid crystal panel 17b and does not reach the right eye, reaches only the left eye, and conversely, the even-numbered pixels Light from the pixel is blocked by the light blocking unit and does not reach the left eye, but reaches only the right eye. By alternately displaying the left-eye image and the right-eye image for each pixel, a three-dimensional image is provided to the user.
[0029]
When displaying a two-dimensional image, no voltage is applied to the liquid crystal panel 17b, and the light-shielding portion does not appear. In this case, light from all the pixels of the liquid crystal panel 17a reaches both the left eye and the right eye. A state in which a two-dimensional image is displayed with this setting is called a 2D mode, and a state in which a three-dimensional image is displayed with the setting shown in FIG. 3 is called a 3D mode.
[0030]
The image data to be downloaded via the Internet and the image data attached to the received mail include those representing a two-dimensional image and those representing a three-dimensional image. FIG. 4 schematically shows a data array of image data representing a three-dimensional image. The left-eye image data and the right-eye image data each have half the size of image data representing a two-dimensional image, and the left-eye image data and the right-eye image data are arranged for each row in the horizontal direction of the image. Image data are arranged side by side. In each image data, a set of data for R pixel, G pixel, and B pixel (referred to as R pixel data, G pixel data, and B pixel data, respectively) representing one point of the image is arranged in the horizontal direction. ing.
[0031]
When an image is displayed as it is on the basis of this image data, as shown in FIG. 5A, the image for the left eye and the image for the right eye are displayed separately on the left and right. Therefore, instead of using the image data of FIG. 4 as it is, the arrangement in the horizontal direction is changed, and the image data for the left eye and the image data for the right eye are alternately arranged for each pixel data. When the image data after the arrangement change is displayed, the image for the left eye and the image for the right eye are combined and displayed as shown in FIG. 5B. By displaying this image in the 3D mode, a three-dimensional image is provided to the user.
[0032]
The mobile phone 1 has a function of generating image data representing a three-dimensional image from image data representing a two-dimensional image. In this method, every other set of R pixel data, G pixel data, and B pixel data is extracted (thinned out) from two-dimensional image data to obtain left-eye image data. Are shifted so that the closer to the end, the larger the shift amount is, according to the position in the left-right direction, so that the right-eye image data and I do. With this function, image data representing a three-dimensional image can be obtained from two-dimensional image data acquired via the Internet or image data representing an image captured by the imaging unit 15, and a three-dimensional image can be provided. Becomes possible.
[0033]
In the present embodiment, when distinguishing left and right, as described above, the left will be the main and the right will be the subordinate, but either may be the main. “Left” and “right” in the description can be read interchangeably.
[0034]
The mobile phone 1 stores a large number of image data in the storage memory 20 as individual files. For the image data file downloaded via the Internet or the image data file attached to the received mail, the file name originally attached is given, and for the image data file representing the image captured by the imaging unit 15, Assign a predetermined file name. The user can arbitrarily change these file names.
[0035]
When displaying the image represented by the stored image data on the display unit 17 and sending the recorded image data by attaching it to an e-mail, the user displays the file names as a list on the display unit 17. Then, a desired one can be selected. The mobile phone 1 also has a function of displaying a list of thumbnail images in order to make the selection by the user easier. Image data representing a thumbnail image is created from image data acquired via the Internet or image data representing an image captured by the imaging unit 15, and stored in a file of the image data together with the original image data. deep.
[0036]
The thumbnail image can be a two-dimensional image or a three-dimensional image. 6A to 6E show display examples of thumbnail images. In these figures, a thumbnail image represented by a triangle means that the original image data represents a two-dimensional image, and a thumbnail image represented by a circle or an ellipse indicates that the original image data represents a three-dimensional image. Means to represent. Thumbnail images are uniformly displayed in a plane in the 2D mode or stereoscopically in the 3D mode.
[0037]
FIGS. 6A to 6D show display examples of thumbnail images in the 2D mode, and FIG. 6E shows an example of thumbnail images in the 3D mode. In each example, a thumbnail image created from image data representing a two-dimensional image and a thumbnail image created from three-dimensional image data are mixed.
[0038]
Image data representing a thumbnail image is created by extracting (thinning out) one set of a plurality of sets of R pixel data, G pixel data, and B pixel data from the original image data. When original image data represents a three-dimensional image, there are three methods for creating image data of a two-dimensional thumbnail image. First, as shown in FIG. 6A, it can be generated from the entire data array of FIG. Further, as shown in FIG. 6B, it can be generated from only the left-eye image data in the data array of FIG. Further, as shown in FIG. 6C, it is also possible to reduce the horizontal thinning rate by half from only the left-eye image data.
[0039]
When creating image data of a thumbnail image only from image data for the left eye, it is difficult for the user to determine whether the original image data represents a two-dimensional image or a three-dimensional image. Therefore, the dimensions of the image represented by the original image data may be indicated by symbols along with each thumbnail image. FIG. 6D shows the display of FIG. 6C with the symbols “2D” and “3D” added.
[0040]
When the original image data represents a three-dimensional image, the image data representing the three-dimensional image is created by combining the left-eye pixel data and the right-eye pixel data with the data array of FIG. Are alternately arranged, and the conversion is performed using the converted image data. When the original image data represents a two-dimensional image, image data representing a three-dimensional image is created by extracting data from the original image data to create left-eye image data. , Image data for the right eye is generated from the image data, and further converted into a format in which pixel data for the left eye and pixel data for the right eye are alternately arranged, and the converted image data is used.
[0041]
When the original image data represents a two-dimensional image, image data for the left eye is created by extracting data from the original image data, and the image data for the left eye is directly copied to be used for the right eye. The image data may be converted into a format in which pixel data for the left eye and pixel data for the right eye are alternately arranged, and the conversion may be performed using the converted image data. In this way, an image having no parallax between the left and right eyes, that is, a two-dimensional image is provided by the display in the 3D mode.
[0042]
The size of the thumbnail image is constant, and therefore, the size (the number of pixels) of the image data is also constant. On the other hand, although the size of the image captured by the imaging unit 15 is constant, the size of the image obtained via the Internet differs depending on the provider. Therefore, when creating image data representing a thumbnail image, the size of the original image is considered. Specifically, the image data of the thumbnail image is created as follows.
[0043]
First, the ratio of the horizontal size (number of pixels) of the original image to the horizontal size (number of pixels) of the thumbnail image, and the vertical size of the original image relative to the vertical size of the thumbnail image Is calculated. Then, pixel data is extracted from the original image data according to the smaller ratio to generate intermediate image data. This intermediate image data has a size that matches the thumbnail image in the direction with a small ratio. Next, in the direction in which the ratio is large, a portion of the intermediate image data that exceeds the size of the thumbnail image is deleted. As a result, image data representing a thumbnail image having a fixed size is obtained regardless of the size of the original image data.
[0044]
FIG. 7 shows an outline of the processing flow of the mobile phone 1 when acquiring image data. First, image data is obtained by downloading from the Internet, receiving an e-mail, or photographing by the imaging unit 15 (step # 10), and stores the obtained image data as a file in the storage memory 20 (# 11). Next, the obtained image data and the file name of the image data and the information added to the file are analyzed to obtain information (type) of the image data, dimensions of the image, information on the copyright, and the like (# 12). These are stored in the image data file as attributes of the image data (# 13). Further, image data representing a thumbnail image is created from the acquired image data (# 14), and the image data is stored in a file of the original image data (# 15). Finally, the image represented by the acquired image data is displayed on the display unit 17 in the 2D mode or the 3D mode according to the dimension (# 16).
[0045]
In the processing of steps # 12 and # 13, the working memory 19 is used. FIGS. 8A and 8B schematically show the structures of the contents stored in the work memory 19 and the storage memory 20, respectively. As shown in FIG. 8B, a file for each image data is stored in the storage memory 20, and a series of numbers are assigned to all the files. Here, an example is shown in which the file with the number 1 is deleted and no longer exists.
[0046]
Each file in the storage memory 20 includes management information, thumbnail image data, and image data. The management information includes the type (format) of the image, the dimension attribute of the image, the copyright attribute, the file name, and the image size (the number of pixels in the horizontal and vertical directions of the image data). The thumbnail image data is compressed and stored, and information on the compression processing is added. Further, the image data is compressed at the time of acquisition, and is stored as it is together with information on the compression processing. As described above, image data includes data representing a two-dimensional image and data representing a three-dimensional image.
[0047]
The work memory 19 stores the management information of all the image data files in the storage memory 20 and the number of the first image data. Further, the number of the next image data is stored for each management information of each image data. In the example of FIG. 8A, the number of the first image data (image number) is “2”, and the number of the next image data after the second image data is “3”. In the management information of the last image data, “0” is stored as the number of the next image data (not shown). Further, when the image data is obtained via the Internet, information indicating the type (format) of the image added to the image data and information regarding the copyright are stored in a predetermined area of the working memory 19. (Not shown).
[0048]
The control unit 10 reads out the management information of all the image data from the storage memory 20 and stores it in the work memory 19 at the start of the power supply. Thereafter, each file in the storage memory 20 is managed with reference to the work memory 19. The number of the image data is used for management. When a file is deleted from the storage memory 20, the corresponding management information is deleted from the work memory 19, and the number of the next image data in the work memory 19 is appropriately changed. When new image data is stored in the storage memory 20, the management information is stored in the work memory 19, and the number of the next image data in the work memory 19 is appropriately changed.
[0049]
Generally, image data provided via the Internet is compressed according to the JPEG method, and image data representing an image captured by the imaging unit 15 is also compressed according to the JPEG method. However, the extension of the file name of the JPEG image data provided via the Internet is “JPEG” or “JPG” when representing a two-dimensional image, and “STJ” when representing a three-dimensional image. Have been. According to the mobile phone 1, the extension of the file name of the image data representing the captured two-dimensional image is set to “JPEG” or “JPG”, and the three-dimensional image generated from the image data is represented. For image data, the extension of the file name is “STJ”.
[0050]
The mobile phone 1 has a function of generating, from two or more pieces of image data representing moving images, image data representing some intermediate images, and displaying a moving image with smooth movement. . Such an image is called an E-animation. The E-animation also has a two-dimensional two-dimensional image and a three-dimensional three-dimensional image. Further, the image data of the E animation is provided via the Internet. The provided E-animation image data is also compressed according to the JPEG method. However, the extension of the file name of the E-animation image data is set to “NVA” regardless of whether it represents a two-dimensional image or a three-dimensional image. In the mobile phone 1, the extension of the file name is set to "NVA" for all the E-animation image data.
[0051]
FIG. 9 shows the processing in steps # 12 to # 15 of the processing at the time of acquiring the image data shown in FIG. 7 in more detail. First, image data is read from the storage memory 20 (step # 102). At the time of reading, the image data is decompressed using the information of the compression processing attached to the image data. Then, the type of the image is determined with reference to the aforementioned predetermined area of the working memory 19 (# 104). When image data is obtained by photographing with the imaging unit 15, nothing is stored in the predetermined area of the working memory 19, but the type of the image is "JPEG" at this time.
[0052]
Next, the image data is analyzed to determine whether the image is an E-animation image (# 106). If it is not E animation, the file name is checked to determine whether the extension is "STJ"(# 108). If the extension is "STJ", the 2D / 3D attribute is set to "3D"(#114); otherwise, the 2D / 3D attribute is set to "2D"(# 116). The 2D / 3D attribute is stored in a predetermined area of the working memory (# 118). If it is E animation image data, the image data is analyzed to determine whether it is two-dimensional image data or three-dimensional image data (# 110). In the case of three-dimensional image data, the 2D / 3D attribute is set to "3D"(# 114), and in the case of two-dimensional image data, the 2D / 3D attribute is set to "2D"(# 116).
[0053]
The presence / absence of information related to copyright is determined with reference to the above-mentioned predetermined area of the working memory 19 (# 120). If there is, the copyright attribute is determined to be “present” (# 122). "None"(# 124). Further, image data of the thumbnail image is created (# 126), and the created image data is compressed (# 128).
[0054]
Next, the image number N assigned to the image data in the storage memory 20 is set to 1 (# 130). Then, it is checked whether or not the management information of the image number N is stored in the work memory 19 (# 132). If the management information is stored, 1 is added to the image number N (# 134), and the process proceeds to step # 132. Return. If the image number N is not stored, the image data of the compressed thumbnail image, the image type attribute, the 2D / 3D attribute, and the compressed thumbnail image are stored in the file of the image data stored in step # 11 of FIG. And the copyright attribute is stored and saved (# 136). At this time, the number of the file (image data) is set to N. Further, an image type attribute, a 2D / 3D attribute, and a copyright attribute are stored as management information in the work memory 19 (# 138), and the number of the management information is set to N.
[0055]
Further, the next image number to be added to the management information stored in the work memory 19 is set as the first image number at that time (# 140), and the first image number is set as N (# 142).
[0056]
The compression of the image data of the thumbnail image in step # 128 is performed in accordance with the JPEG method. When the image data is stored in step # 136, the parameters used for the compression processing are also stored in order to enable later decompression. . Here, since the image data of the thumbnail image is used only by the mobile phone 1, it is possible to make some parameters constant at all times and to make them common to all the image data. If such common parameters are stored for each image data of the thumbnail image, the storage capacity of the storage memory 20 is wasted. Therefore, common parameters requiring a large storage capacity are not stored for each image data but are stored in the parameter memory 22 (see FIG. 1).
[0057]
FIG. 10 shows parameters used in the compression processing according to the JPEG method. Compression is performed in two stages of Huffman coding and subsequent quantization, and a Huffman table and a quantization table are used as parameters, respectively. In the portable telephone 1, the Huffman table (symbol DHT) is made common to the image data of all the thumbnail images, and is excluded from the parameters to be added to the image data of the thumbnail images and stored. The size of the Huffman table is about 400 bytes, which corresponds to, for example, about 45% of the image data of a 48 × 48 dot thumbnail image using standard compression and the size of all parameters (about 900 bytes). By not storing the Huffman table, the storage capacity of the storage memory 20 can be greatly saved. Note that the quantization table (symbol DQT) depends on the image data after Huffman coding, and therefore needs to be stored separately for each image data.
[0058]
When displaying the thumbnail image, the compressed image data is inversely quantized using a quantization table stored together with the image data, and further inversely encoded using a Huffman table stored in the parameter memory 22. (Decryption).
[0059]
For the acquired image data, all parameters including the Huffman table are stored. This is because Huffman tables are not common for image data provided via the Internet. However, a common Huffman table may be stored in the parameter memory 22 for the image data acquired by the imaging unit 15, and the Huffman table may not be stored by performing encoding using the table. . In this way, the storage capacity of the storage memory 20 is further saved.
[0060]
When the Huffman table is not stored together with the image data, information indicating that the Huffman table is not stored may be added to the image data and stored. This makes it clear that a common Huffman table should be added when the image data is attached to an e-mail and transmitted. When image data for which the Huffman table is not stored is not allowed to be attached to an e-mail, a message indicating that attachment to an e-mail is not possible may be displayed together with a thumbnail image as described later. it can. The information indicating that the Huffman table is not stored is preferably included in the management information as in the case of the above-described 2D / 3D attribute and copyright attribute. It is possible to quickly determine the presence or absence of the Huffman table.
[0061]
The image data for which the Huffman table is not stored may be allowed to be provided to another device as it is. In this case, information indicating that the Huffman table is omitted is added to the image data. The device that has acquired such image data knows that the Huffman table has been omitted from the added information, and can take appropriate measures.
[0062]
For example, when the mobile phone 1 obtains such image data from another mobile phone having the same function, decoding is performed using a common Huffman table, so that an image represented by the obtained image data is obtained. It is possible to display. When decoding cannot be performed using a common Huffman table, for example, an “x” mark or a “not displayable” character may be displayed instead of an image to indicate that display is not possible. Providing image data without the Huffman table also leads to a reduction in the amount of communication, and reduces the time required for downloading and sending and receiving e-mail.
[0063]
FIG. 11 shows an outline of a processing flow when an electronic mail is created and transmitted. First, an e-mail is created according to the input operation of the user (step # 20). At this time, a destination mail address is also set. Next, it is determined whether or not it is instructed to attach the image data to the created e-mail (# 21). When the instruction to attach the image data is not instructed, the electronic mail is transmitted as it is (# 25).
[0064]
When an instruction to attach image data is given, a list of thumbnail images is displayed (# 22). At this time, a thumbnail image is displayed regardless of whether the original image data represents a two-dimensional image or a three-dimensional image. Then, the image data designated by the user is selected (# 23). At this time, based on the dimensions of the image, the copyright, etc., image data that may be attached to the e-mail is determined in advance, and only the image data that may be attached can be selected. Finally, the image data is attached to the e-mail (# 24) and transmitted (# 25).
[0065]
FIG. 12 shows the processing in steps # 22 and # 23 in more detail. First, the maximum number M0 of thumbnail images that can be displayed at one time on the display unit 17 is set, and the display position M of the thumbnail images is set to 1 (step # 202). For example, when three images are displayed horizontally and three images are displayed vertically, M0 is 9, and in this case, the display position M at the center of the right end is 6. Next, the first image number N is read from the working memory 19 (# 204).
[0066]
Then, it is determined whether or not the image number N is 0 (# 206). If not, it is determined whether or not the display position M is equal to or less than the maximum number M0 (# 208). When the display position M is equal to or less than the maximum number M0, the thumbnail image data of the image number N is read from the storage memory 20 (# 210), decompressed (# 212), and the decompressed image data is stored in the display memory 18 Is stored in the area corresponding to the display position M (# 214).
[0067]
Next, the 2D / 3D attribute is determined with reference to the N-th management information of the working memory 19 (# 216) (# 218). When the 2D / 3D attribute is "2D", the N-th management information in the working memory 19 is referred to (# 220), and the copyright attribute is determined (# 222). When the copyright information is "none", the N-th image data is selectable (may be attached to the mail), and that fact is stored in a predetermined area of the working memory 19 (# 224).
[0068]
If the 2D / 3D attribute is "3D" in the determination in step # 218, or if the copyright attribute is "present" in the determination in step # 222, the selection is disabled (# 226). Further, in order to clearly indicate that selection is not possible, the image data in the display memory 18 is modified to add data representing a diagonal line (# 228).
[0069]
Following these processes, the data is displayed on the display unit 17 using all the data in the display memory 18 (# 230). As a result, the number of thumbnail images equal to the number of times the process of step # 214 has been performed is displayed. Next, the next image number N is read from the working memory 19 (# 232), the display position M is increased by 1 (# 234), and the process returns to step # 206.
[0070]
When the image number N is 0 in the determination in step # 206, that is, when the thumbnail images of all the image data have been displayed, or when the display position M exceeds the maximum number M0 in the determination in step # 208, When there is no more room for displaying the thumbnail image, it is determined whether or not the operation unit 14 has been operated to instruct to scroll the display (# 236). When a scroll instruction is given, the display position M is updated (# 238), and the image number N is also updated (# 240). For example, when three thumbnail images are displayed side by side, the display position M is increased or decreased by three. Then, the process returns to step # 206.
[0071]
If there is no scrolling instruction, it is determined whether or not a determination has been instructed (# 242). This instruction is given by the user operating a predetermined key of the operation unit 14. Before giving this instruction, the user operates the cursor key of the operation unit 14 to position the cursor on the display unit 17 above the thumbnail image to be selected. When there is no instruction for determination, the process returns to step # 236.
[0072]
When the determination is instructed, the information stored in step # 224 or # 226 is read from the work memory 19 for the image number corresponding to the display position where the cursor is located, and whether the selection is possible or not is possible. Is determined (# 244). If the selection is not possible, the process returns to step # 236. If the selection is possible, the image data of the image number is read from the storage memory 20 (# 246), and the file name is read from the work memory 19 (# 248). Thereafter, in step # 24 of FIG. 11, the read image data is given the read file name and attached to the e-mail.
[0073]
FIG. 13 shows an example of a thumbnail image represented by the image data modified in step # 228. FIG. 13A shows the thumbnail image of FIG. 6C with diagonal lines, and FIG. 13B shows the thumbnail image of FIG. 6E with diagonal lines. By adding the oblique lines in this manner, it is possible to clarify image data that is not allowed to be attached to an e-mail. Instead of adding hatching, other indications such as “impossible” may be added to clarify that attachment is not allowed. Further, it may be clarified that attachment is not allowed by using a monochrome image without color. When displaying a list of thumbnail images not for attachment to an e-mail but for display of images, as shown in FIGS. 6 (a) to 6 (e), it should be noted that attachment is not permitted. The display of the diagonal lines shown is not performed.
[0074]
FIG. 14 shows an example of a criterion for judging whether or not attachment to an electronic mail is possible. Of the image data created by the JPEG system, two-dimensional image data obtained via the Internet is usually accompanied by information on copyright, and cannot be attached based on the copyright attribute. The two-dimensional image data acquired by the imaging unit 15 determines whether or not to attach based on the copyright attribute and the 2D / 3D attribute. However, from the 2D / 3D attribute, the attachment is permitted. It can be attached from the attribute. However, the mobile phone 1 also has a function of adding information regarding copyright to image data representing an image captured by the imaging unit 15, and when the user adds information regarding copyright, the function is based on the copyright attribute. Cannot be attached.
[0075]
Of the image data created by the JPEG method, three-dimensional image data acquired via the Internet is usually accompanied by information on copyright, and cannot be attached based on the copyright attribute. Further, even if information regarding copyright is not added and the copyright attribute indicates “OK”, the 2D / 3D attribute indicates “NO”. Image data (file name extension is STJ) created from two-dimensional image data by the three-dimensional conversion function is not allowed due to the 2D / 3D attribute. This is because portable telephones that can display three-dimensional images are not widely used, and there is a high possibility that transmitting three-dimensional image data is wasted.
[0076]
E-animation image data (file name extension is NVA) is a copyright attribute or image type (image type) regardless of whether it represents a two-dimensional image or a three-dimensional image. ) Cannot be attached. Even if the copyright attribute allows, the image type is always NVA, and the image data of the E-animation cannot always be attached.
[0077]
In the mobile phone 1, some E-animation image data in which the central part is blank, that is, only the peripheral part, is stored in the storage memory 20, and these image data and the image captured by the imaging unit 15 are stored. It has a function of synthesizing with image data and displaying it as an image in which a peripheral portion corresponding to a frame moves smoothly. There are two-dimensional and three-dimensional E-animation image data, and any image data cannot be attached to a mail based on its image type (NVA). Mobile phones capable of displaying E-animation images, like mobile phones capable of displaying three-dimensional images, have not yet become widespread, and transmitting E-animation image data wastefully. Because it is easy to become.
[0078]
As described above, the mobile phone 1 can communicate with another device such as a personal computer via a cable connected to the external device interface 16 (see FIG. 1). The information that can be transmitted to other devices by this communication includes image data. In this case as well, whether the image data can be transmitted is determined in the same manner as whether the image data can be attached to an e-mail. As a result, the copyright of the image data creator is reliably protected, and unnecessary transmission can be avoided.
[0079]
【The invention's effect】
In a portable telephone that acquires and stores image data representing an image and displays a reduced image of the image represented by the stored image data, as in the present invention, when image data is acquired, If image data representing a reduced image is created and the created image data is stored in addition to the acquired image data, the reduced image, that is, the thumbnail image can be quickly displayed. It is possible to avoid the waste of performing the thumbnail image creation processing redundantly for displaying the image.
[0080]
If information indicating the dimensions of the image represented by the acquired image data is stored in addition to the acquired image data and the created image data, the dimensions of the original image that are difficult to understand only with the thumbnail image can be shown to the user. Can be. Moreover, it is not necessary to refer to the image data itself in order to check the dimension, and the dimension can be indicated quickly.
[0081]
By compressing the created image data according to the JPEG method and storing the compressed image data together with the parameters used for the compression except for the Huffman table, the storable image data by storing the image data of the thumbnail image The decrease in the number can be suppressed.
[0082]
When the acquired image data represents a three-dimensional image, if the image data representing the three-dimensional reduced image is created, the user can see that the original image is three-dimensional only by looking at the thumbnail image.
[0083]
When the acquired image data represents a three-dimensional image, if image data representing a two-dimensional reduced image is created, image data representing a two-dimensional image and image data representing a three-dimensional image coexist. Even at this time, a two-dimensional thumbnail image can be displayed uniformly, and the display is easy.
[Brief description of the drawings]
FIG. 1 is a block diagram schematically showing a schematic configuration of a mobile phone according to an embodiment of the present invention.
FIG. 2 is a view showing the principle of displaying a two-dimensional image and a three-dimensional image in the portable telephone.
FIG. 3 schematically shows a configuration of the portable telephone for selectively guiding light of an image for a left eye and light of an image for a right eye to a left eye and a right eye when providing a three-dimensional image. FIG.
FIG. 4 is a diagram schematically showing a general data array of image data representing a three-dimensional image.
FIG. 5 is a diagram schematically illustrating an example of an image displayed based on image data representing a three-dimensional image.
FIG. 6 is a diagram schematically showing a display example of a thumbnail image on the portable telephone.
FIG. 7 is a flowchart showing an outline of the flow of processing when acquiring image data in the portable telephone.
FIG. 8 is a diagram schematically showing a structure of contents stored in a work memory and a storage memory of the portable telephone.
FIG. 9 is a flowchart showing details of the processing in steps # 12 to # 15 in the processing at the time of acquiring the image data shown in FIG. 7;
FIG. 10 is a view showing parameters used in compression processing by the JPEG method.
FIG. 11 is an exemplary flowchart showing an outline of a processing flow when an electronic mail is created and transmitted in the portable telephone.
FIG. 12 is a flowchart showing details of processing in steps # 22 and # 23 of the processing related to the e-mail shown in FIG. 11;
FIG. 13 is a diagram showing an example of a thumbnail image displayed when selecting image data to be attached to an electronic mail in the portable telephone.
FIG. 14 is a diagram showing criteria for judging whether image data can be attached to electronic mail in the portable telephone.
[Explanation of symbols]
1 Mobile phone 10 Control unit 10a CPU
Reference Signs List 11 Communication unit 11a Antenna 12 Audio input unit 13 Audio output unit 14 Operation unit 15 Imaging unit 16 External device interface 17 Display unit 17a Image display liquid crystal panel 17b Light shielding liquid crystal panel 17c Light guide plate 17d Light source 18 Display memory 19 Work memory 20 Storage Memory 21 Program Memory 22 Parameter Memory
