JP2004274548A

JP2004274548A - Mobile terminal

Info

Publication number: JP2004274548A
Application number: JP2003064674A
Authority: JP
Inventors: Yuichi Shin; 勇一新
Original assignee: Konica Minolta Inc
Current assignee: Konica Minolta Inc
Priority date: 2003-03-11
Filing date: 2003-03-11
Publication date: 2004-09-30

Abstract

<P>PROBLEM TO BE SOLVED: To provide a mobile terminal provided with an imaging apparatus for enabling automatic switching control in an imaging mode so as to simplify operations at imaging. <P>SOLUTION: The mobile terminal (mobile phone) 1 provided with the imaging apparatus including an imaging element 20 having a photoelectric conversion section 21, and a lens 32 for forming an object image to the photoelectric conversion section 21, includes: an aperture means (a liquid crystal window 100 and an aperture setting program c4) for adjusting an amount of light incident to the imaging apparatus 16 to attain a close shot; and a control means (CPU 11a) for controlling the aperture means on the basis of image data acquired from the imaging apparatus 16 to automatically switch an ordinary imaging mode for carrying out ordinary imaging into a near shot mode for carrying out the near shot. <P>COPYRIGHT: (C)2004,JPO&NCIPI

Description

【０００１】
【発明の属する技術分野】
本発明は、携帯端末に関する。
【０００２】
【従来の技術】
従来より、情報通信機能や個人情報管理機能を有するＰＤＡ、携帯電話機、ＰＨＳ（Ｒ）等の携帯型情報通信端末装置（以下、「携帯端末」という）が種々提案され、実用化されている。近年においては、搭載した撮像装置を用いることにより、外部に存在する所定の被写体を撮像する機能を有する携帯端末が提案されている。例えば、所定の被写体を撮像する通常撮像モードと、近接した位置にある被写体を撮像する近接撮像モードと、を切り替えて撮像可能な携帯端末が提案されている（例えば、特許文献１参照）。
【０００３】
【特許文献１】
特開２００２−２６２１６４号公報
【０００４】
【発明が解決しようとする課題】
しかし、特許文献１に記載の携帯端末を使用した場合には、ユーザが通常撮像モードか、近接撮像モードか、を自ら判断して切替操作を行う必要があるため、操作が面倒であるという問題があった。特に、特許文献１に記載の携帯端末は、撮像装置の回動に連動させて撮像モードを切り替える構造を有するので、撮像モードを切り替える度にユーザが手指で撮像装置を回動させなければならず、手間がかかっていた。
【０００５】
本発明の課題は、撮像装置を備える携帯端末において、撮像モードの自動切替制御を実現させ、撮像時の操作を簡素化することである。
【０００６】
【課題を解決するための手段】
上記課題を解決するために、請求項１に記載の発明は、
光電変換部を有する撮像素子と、前記光電変換部に被写体像を結像させるレンズ部と、を有する撮像装置を備えた携帯端末において、
前記撮像装置に入射する光の量を調節して近接撮像を可能にする絞り手段と、
前記撮像装置により取得した画像データに基づいて前記絞り手段を制御することにより、通常撮像を行う通常撮像モードから近接撮像を行う近接撮像モードへと自動的に切り替える制御手段と、
を備えることを特徴とする。
【０００７】
請求項１に記載の発明によれば、制御手段によって、撮像装置により取得した画像データに基づいて絞り手段を制御し、通常撮像を行う通常撮像モードから、近接撮像を行う近接撮像モードへと自動的に切り替えることができる。従って、撮像モードを切り替える際に、ユーザが撮像モードの適否を判断したり手指で切替操作を行ったりする必要がない。また、撮像モードを切り替える際に撮像装置を手指で回動させる必要がない。この結果、撮像時の操作を格段に簡素化することができる。
【０００８】
請求項２に記載の発明は、請求項１に記載の携帯端末において、
前記絞り手段は、
偏光板及び配向膜が設けられた２枚のガラス基板と、これらガラス基板の間に封入された液晶と、を有する液晶窓と、
前記液晶の一部に電圧を印加して前記液晶窓の光透過面積を変更することにより、前記撮像装置に入射する光の量を調節する印加電圧手段と、
を備えることを特徴とする。
【０００９】
請求項２に記載の発明によれば、絞り手段は、ガラス基板及び液晶を有する液晶窓と、液晶の一部に電圧を印加して液晶窓の光透過面積を変更することにより撮像装置に入射する光の量を調節する印加電圧手段と、を備えるので、液晶の特性（電圧非印加時の施光性及び電圧印加時の非施光性）を利用して、撮像装置に入射する光の量を電気的に調節することができる。この結果、撮像装置に入射する光の量を調節するために複雑な機械的構成を設ける必要がないので、携帯端末の軽量化や薄型化が可能となる。
【００１０】
【発明の実施の形態】
以下、図を参照して本発明の実施の形態を詳細に説明する。本実施の形態においては、本発明を適用した携帯端末の例として、撮像装置付携帯電話機（以下、単に「携帯電話機」と称する）を挙げて説明する。
【００１１】
まず、図１から図５を用いて本実施の形態に係る携帯電話機１の機械的構成について説明する。図１は、携帯電話機１の外観構成を示す図である。また、図２は、図１（ｂ）のＩＩ−ＩＩ部分の断面図であり、携帯電話機１に備えられる撮像装置１６の構成を説明するためのものである。なお、図２においては、後述する液晶窓１００を点線で示している。図３（ａ）は、携帯電話機１に備えられる液晶窓１００の構成を説明するための斜視図であり、図３（ｂ）は、図３（ａ）のＢ−Ｂ部分の断面図である。図４は、図３に示した液晶窓１００の光透過面積を変更することにより絞り値（Ｆ値）を３通りに設定した状態を示す説明図である。
【００１２】
本実施の形態に係る携帯電話機１は、図１に示すように、第１筐体１０ａ及び第２筐体１０ｂがヒンジ結合部１０ｃにより開閉可能に連結されてなる折畳式のものである。
【００１３】
第１筐体１０ａには、折畳時に内側になる面（正面）に表示部１３が設けられており（図１（ａ）参照）、折畳時に外側になる面（背面）に後述する液晶窓１００が設けられている（図１（ｂ）参照）。また、図１（ｂ）に示した液晶窓１００の背後には、撮像装置１６が設けられている。印加電圧により液晶窓１００の光透過面積を変更して、撮像装置１６に入射する光の量を調節することにより、通常撮像モードから近接撮像モードに切り替えることができる。なお、液晶窓１００については、図３及び図４を用いて後述する。
【００１４】
第２筐体１０ｂの正面には入力部１２が設けられており（図１（ａ）参照）、背面には充電パック等の電源制御部１７が設けられている（図１（ｂ）参照）。また、図１（ｂ）に示すように、携帯電話機１の上部にはアンテナ１４ａが配設されている。第２筐体１０ｂの内部には、装置全体を統合制御する制御部１１、図示していない無線基地局との間で着信や発信等に係る無線信号の送受信を行う無線通信部１４、記憶部１５及び送受話部１８が内蔵されている。これら制御部１１や無線通信部１４等については、図５を用いて後述する。
【００１５】
入力部１２は、テンキー、各種機能スイッチ、通話モード及びカメラモードの切り替えを行うモード切替スイッチ等を備えており、撮影処理の実施指示の入力等に用いられる。
【００１６】
表示部１３は、ＬＣＤ（ＬｉｑｕｉｄＣｒｙｓｔａｌＤｉｓｐｌａｙ）パネル等により構成され、制御部１１から入力される表示データに基づいて画面表示を行う。また、表示部１３は、撮像装置１６によってプレビュー撮影された画像や、制御部１１により復号（デコード）されたコード情報内容等を表示する。アンテナ１４ａは、無線通信部１４に接続されている。
【００１７】
撮像装置１６は、撮像素子２０やレンズ部３２等を備えて構成され、レンズ部３２を介して入力される画像を撮像素子２０で電気信号に変換して、画像データを生成するものである。また、撮像装置１６は、制御部１１の制御に基づいて、通常撮像モード及び近接撮像モードによる撮像処理が実行可能とされている。
【００１８】
ここで、「通常撮像モード」とは、被写界深度が１ｍ〜∞の撮像モードである。また、「近接撮像モード」とは、被写界深度が数ｃｍ〜∞の撮像モードであり、通常撮像モードより焦点距離が短く、被写体までの距離が短い場合の撮像に適している。
【００１９】
撮像装置１６の構成について、図２を用いて説明する。撮像装置１６は、基板ＰＣの一方の面上に設けられ、光を感じるセンサとなる撮像素子２０、撮像素子２０に集光させるための光学部材３０、光学部材３０に入射する光の量を調節する絞り板４０、撮像素子２０を覆い隠す外枠部材としての鏡枠５０、遮光性を有する遮光板６０、遮光板６０に支持されるフィルタ７０、光学部材３０を押圧する押圧部材８０、光学部材３０の位置決めを行うための位置決め電気部品９０、等を備えて構成されている。
【００２０】
光学部材３０は、撮像素子２０の光電変換部２１に被写体像を結像させるものであり、透明なプラスチック材料を素材とし、図２に示すように、脚部３１と、脚部３１に支持される凸レンズ形状のレンズ部３２と、が一体的に形成されている。
【００２１】
絞り板４０は、図２に示すように、光学部材３０の上面であってレンズ部３２の周囲に接着剤Ｂにより固定されている。絞り板４０は、遮光性のある素材からなり、レンズ部３２の絞り値（Ｆ値）を規定する絞りとしての開口４１を有する。
【００２２】
鏡枠５０は、遮光性を有する素材からなり、光学部材３０の外側に配置されている。鏡枠５０は、四角柱状に形成され、そのうち対向する二つの内側面には、水平方向に沿って光学部材３０を支持する支持部５１が一体に形成されている。
【００２３】
遮光板６０は、鏡枠５０の上端部に接着剤により取り付けられている。遮光板６０は、光学部材３０に対応する位置に、絞りとしての開口６１を有しており、この開口６１の下方に、赤外線吸収特性を有する素材からなるフィルタ７０が接着剤により接合されている。フィルタ７０は、光学部材３０の径に対応して形成されている。また、遮光板６０は、鏡枠５０の上端の開口部より少し小さく形成され、この開口部を塞ぐようになっている。そして、遮光板６０とフィルタ７０とでカバー部材を構成する。このように、基板ＰＣと鏡枠５０とカバー部材とが密着し接合しているので、撮像装置１６は、防塵、防湿の構造を有する。
【００２４】
光学部材３０と遮光板５０との間には、コイルばねなどの弾性部材により構成された押圧部材８０が配置されている。遮光板６０が鏡枠５０に取り付けられることで、遮光板６０が押圧部材８０を押圧して、押圧部材８０が弾性変形する。この押圧部材８０は、光学部材３０を図２の紙面下方に向かって所定の押圧力により押圧して、光学部材３０を撮像素子２０に付勢する。遮光板６０から下方の撮像素子２０に向かう力が加わった際、押圧部材８０が弾性変形することにより、その力を吸収する緩衝作用が働くので、その力は直接撮像素子２０には伝達されず、撮像素子２０が破損することを防ぐ効果がある。
【００２５】
撮像素子２０は、ＣＭＯＳ（ＣｏｍｐｌｅｍｅｎｔａｒｙＭｅｔａｌＯｘｉｄｅＳｅｍｉｃｏｎｄｕｃｔｏｒ）型イメージセンサからなるものである。矩形薄板状の撮像素子２０の下面は、基板ＰＣの上面に取り付けられており、撮像素子２０の上面中央には、画素が２次元的に配列された光電変換部２１が形成されている。光電変換部２１の外側には、図示していない処理部が形成されており、処理部の外縁近傍には、図示していない複数のパッドが配置されている。外部接続用端子であるパッドは、図２に示すように、ワイヤＷを介して基板ＰＣに接続されている。ワイヤＷは、基板ＰＣ上の所定の回路に接続されており、この所定の回路により制御部１１に撮像画像データが出力されるようになっている。
【００２６】
電源制御部１７は、例えば、リチウム電池、ニッケル電池、ニカド電池等により構成され、電源が投入されると、制御部１１の制御に応じて、プラス側の端子及びマイナス側の端子から、携帯電話機１の各部を駆動する駆動回路に所定電圧の電源を供給する。
【００２７】
次に、図３及び図４を用いて、液晶窓１００と、この液晶窓１００を含む絞り手段と、について説明する。
【００２８】
液晶窓１００は、撮像装置１６に入射する光の量を調節して近接撮像を可能にするものである。液晶窓１００は、２枚のガラス基板１１０、これらガラス基板１１０間に封入された液晶１２０、シール材１３０、（図示されていない）スペーサ、等から構成されている。
【００２９】
ガラス基板１１０の液晶１２０と反対側の面（外面）には、図３（ｂ）に示すように、入射する光の振動方向を規制するための偏光板１１１が取り付けられている。一のガラス基板１１０に取り付けられる偏光板１１１により規制される光の振動方向と、他のガラス基板１１０に取り付けられる偏光板１１１により規制される光の振動方向と、はほぼ直交するようにされている。
【００３０】
また、ガラス基板１１０の液晶１２０側の面（内面）には、図３（ｂ）に示すように、配向膜１１２が形成されている。配向膜１１２は、ガラス基板１１０の内面に設けたポリイミド製薄膜を所定の方向にラビングして形成したものであり、一のガラス基板１１０に形成した配光膜１１２のラビング方向と、他のガラス基板１１０に形成した配光膜１１２のラビング方向と、はほぼ直交するようにされている。かかる配向膜１１２のラビング方向の直交により、液晶１２０内の液晶分子の配列にねじれを生じさせることができる。
【００３１】
液晶１２０は、ツイスティッド・ネマティック（ＴＮ）液晶であり、電圧が印加されていない状態における液晶分子の配列のねじれにより、入射した光の振動方向を変更するという機能を有する（施光性）。一方、液晶１２０に電圧を印加すると、液晶分子の配列のねじれが解消し、前記した施光性が喪失する（非施光性）。
【００３２】
従って、液晶１２０に電圧を印加していない状態においては、一のガラス基板１１０の偏光板１１１を通過して振動方向が規制された光（偏光）は、液晶１２０の施光性によりその振動方向が略９０°変更されて、他のガラス基板１１０の偏光板１１１を通過する。このため、外部から液晶窓１００に入射した光は液晶１２０を透過して、撮像装置１６に達することとなる。
【００３３】
一方、液晶１２０に電圧を印加した状態においては、一のガラス基板１１０の偏光板１１１を通過して振動方向が規制された光（偏光）は、その振動方向が液晶１２０によって変更されることはないため、他のガラス基板１１０の偏光板１１１に遮られる。このため、外部から液晶窓１００に入射した光は撮像装置１６に達することはない。
【００３４】
すなわち、電圧非印加状態における液晶１２０の施光性と、電圧印加状態における液晶１２０の非施光性と、を利用して、液晶窓１００の光透過面積を適宜設定することができる。本実施の形態においては、一のガラス基板１１０に図３（ａ）のＸ方向に沿った電極を縞状に設けるとともに、他のガラス基板１１０に図３（ａ）のＹ方向に沿った電極を縞状に設けている。そして、これらＸ方向の電極とＹ方向の電極との交点に電圧を印加することによって、その交点における液晶１２０の施光性を喪失させ、光の透過を阻止している。
【００３５】
本実施の形態においては、ＣＰＵ１１ａで絞り設定プログラムｃ４（後述）を実行することにより、所定の交点に電圧を印加して光透過面積を変更し、撮像装置１６に入射する光の量を調節している。すなわち、絞り設定プログラムｃ４は、本発明における印加電圧手段である。また、液晶窓１００及び絞り設定プログラムｃ４は、本発明における絞り手段を構成する。
【００３６】
図４は、絞り設定プログラムｃ４の実行により液晶窓１００の光透過面積を変更して、３通りの絞り値（Ｆ値）を設定した状態を示したものである。図４（ａ）〜（ｃ）において斜線で示した部分は、印加電圧により光の透過が阻止された部分を意味しており、白抜きで示した同心円形状の部分は、光透過部分を意味している。
【００３７】
図４（ａ）は、絞り径（光透過部分の直径）をＲ_１として、絞り値を通常撮像に適した値（Ｆ＝８）に設定した状態を、図４（ｂ）は、絞り径をＲ_２（＜Ｒ_１）として、絞り値を図４（ａ）の状態の２倍（Ｆ＝１６）に設定した状態を、図４（ｃ）は、絞り径をＲ_３（＜Ｒ_２）として、絞り値を近接撮像に適した値（Ｆ＝２２）に設定した状態を、各々示している。通常は、図４（ｃ）に示した状態で近接撮像を行うが、撮像状況に応じて、図４（ｂ）に示した状態で近接撮像を行うこともできる。なお、「絞り値」とは、焦点距離を絞り径で除することによって算出される値である。
【００３８】
シール材１３０は、図３（ｂ）に示すように、２枚のガラス基板１１０の間に注入された液晶１２０を封止するための部材である。また、図示されていないスペーサは、２枚のガラス基板１１０同士の密着を阻止することを目的として液晶１２０内に混在させた極小の粒子である。
【００３９】
次に、図５を用いて、本実施の形態に係る携帯電話機１の機能的構成について説明する。図５は、携帯電話機１の機能的構成を示すブロック図である。図５に示すように、携帯電話機１は、制御部１１、入力部１２、表示部１３、アンテナ１４ａを有する無線通信部１４、記憶部１５、撮像装置１６、電源制御部１７、送受話部１８、等を備えて構成され、各部はバス１９により接続されている。
【００４０】
制御部１１は、ＣＰＵ（ＣｅｎｔｒａｌＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）１１ａ、書き換え可能な半導体素子で構成されるＲＡＭ（ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）１１ｂ、不揮発性の半導体メモリで構成されるＲＯＭ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ）１１ｃ、等から構成されている。
【００４１】
ＲＯＭ１１ｃには、図示していない携帯電話機１の基本動作制御プログラム、通信処理プログラム、表示部１３に表示するための表示用データ、撮像に関するパラメータデータ（自動撮像用のデフォルトの設定データ、プレビュー撮像用のデフォルトの設定データ）等の他、撮像制御プログラムｃ１、コード認識プログラムｃ２、コード認識用データｃ３及び絞り設定プログラムｃ４が記憶されている。ここで、コード認識用データｃ３は、画像データに情報コードとしての二次元コードが含まれているかを判断するためのコード類似性係数（Ｑ）を設定する際の基準データである。
【００４２】
ＣＰＵ１１ａは、入力部１２から入力される各種指示又は無線通信部１４から入力されるデータに従って、ＲＯＭ１１ｃに記憶されている各種プログラムの中から指定されたプログラムをＲＡＭ１１ｂのワークエリアに展開し、この入力指示及び入力データにより前記プログラムに従って各種処理を実行する。そして、ＣＰＵ１１ａは、その処理結果をＲＡＭ１１ｂの所定の領域に格納するとともに、表示部１３に表示させる。
【００４３】
例えば、ＣＰＵ１１ａは、ＲＯＭ１１ｃに記憶される撮像制御プログラムｃ１を読み出して、後述する撮像制御処理を実行する。撮像制御処理として、ＣＰＵ１１ａは、入力部１２から入力されるユーザの操作指示等に従って撮像装置１６を制御し、撮像装置１６によって取得した画像データをＲＡＭ１１ｂに所定のメモリ等に格納した上で、フレームレート２５ｆｐｓで、表示部１３にプレビュー表示させる。
【００４４】
通常撮像を行う場合には、ＣＰＵ１１ａは、絞り設定プログラムｃ４の実行により、液晶窓１００の液晶１２０の所定部分に電圧を印加して、絞り値を通常撮像に適した値（Ｆ＝８）に設定する。一方、近接撮像を行う場合には、ＣＰＵ１１ａは、絞り設定プログラムｃ４の実行により、液晶窓１００の液晶１２０の電圧を印加する部分を変更して、絞り値を近接撮像に適した値（Ｆ＝２２又はＦ＝１６）に設定する。
【００４５】
また、ＣＰＵ１１ａは、コード認識プログラムｃ２に従って、取得した画像データに対して二次元コードである可能性のある二次元コード対象を認識するコード処理を実行する。具体的に説明すると、ＣＰＵ１１ａは、５フレーム毎に、画像データと、コード認識用データｃ３と、を対照することにより、画像データに二次元コードが含まれているか否かの判断を実行する。より具体的には、ＣＰＵ１１ａは、画像データと、類似性係数算定用情報としてのコード認識用データｃ３と、を比較することにより、二次元コード対象にコード類似性係数を算出し、このコード類似性係数の値に基づいて、二次元コードである可能性のある二次元コード対象や二次元コードを認識する。
【００４６】
さらに、ＣＰＵ１１ａは、コード類似性係数が、コードを含んでいる可能性があるが、決定的でない数値であると判断した二次元コード対象がある場合には、撮像モードを通常撮像モードから近接撮像モードに切り替える。具体的に説明すると、ＣＰＵ１１ａは、コード類似性係数が、コードを含んでいる可能性があるが、決定的でない数値であると判断した二次元コード対象がある場合には、絞り設定プログラムｃ４を実行して液晶窓１００の光透過面積を変更することにより、通常撮像に適した絞り値（Ｆ＝８）を近接撮像に適した絞り値（Ｆ＝２２又はＦ＝１６）に変更する。すなわち、ＣＰＵ１１ａは、本発明における制御手段である。
【００４７】
また、ＣＰＵ１１ａは、取得した画像データ中に二次元コードを認識した場合には、二次元コードのデコード処理を行うとともに、デコード処理結果を表示部１３に表示させる。また、ＣＰＵ１１ａは、デコード処理を行った情報コードの情報に基づく動作を実行する。
【００４８】
無線通信部１４は、制御部１１から入力される指示に従って、無線基地局との間で、アンテナ１４ａを介して所定の通信方式に対応する携帯電話用の通信プロトコルを実行し、この通信方式で設定される通信チャネルにより、送受話音声の送受信やデータ通信を実行する。
【００４９】
記憶部１５は、制御部１１により実行された処理結果のデータ等を記憶するものである。例えば、記憶部１５は、撮像装置１６により撮像された画像のデータ、無線通信部１４を介して送受信したメールのデータ、通話履歴のデータ等を記憶する。
【００５０】
送受話部１８は、図示していないマイク、スピーカ、Ａ／Ｄ変換部及びＤ／Ａ変換部等を有し、マイクから入力されるユーザの送話音声をＡ／Ｄ変換処理して、その送話音声データをＣＰＵ１１ａに出力するとともに、ＣＰＵ１１ａから入力される受話音声データや、着信音、操作確認音、シャッタ音等の音声データをＤ／Ａ変換処理して、スピーカから出力する。
【００５１】
続いて、図６及び図７を参照して、本実施の形態に係る携帯電話機１の撮像制御処理について説明する。図６は、撮像制御処理を説明するためのフローチャートであり、図７は、撮像制御処理における被写体の概略図である。
【００５２】
携帯電話機１のユーザによって、入力部１２の所定のボタンが押下されると、ＣＰＵ１１ａは、撮像処理の指示の入力であると判断し、ＲＯＭ１１ｃに記憶されている撮像制御プログラムｃ１を読み出してＲＡＭ１１ｂに展開し、この撮像制御プログラムｃ１に従って、撮像処理の制御を開始する。このとき、ユーザは、携帯電話機１の撮像装置１６を被写体に向けることにより、図７に示すような、被写体（二次元コードのようなもの）を撮影することとする。
【００５３】
撮像処理においては、ＣＰＵ１１ａは、まずＲＡＭ１１ｂに格納されている画像データのフレームのカウント数を０（Ｎ＝０）にリセットし（ステップＳ１）、通常撮像モードによる撮像処理の開始指示を撮像装置１６に出力する。すると、撮像装置１６は、通常撮像モードにおける撮像処理として、光学部材３０により集光されて撮像素子２０の光電変換部２１に結像された被写体の画像データを、順次制御部１１に出力する（ステップＳ２）。
【００５４】
すると、ＣＰＵ１１ａは、撮像装置１６より入力される画像データを、順次ＲＡＭ１１ｂに格納するとともに、これらの画像をフレームレート２５ｆｐｓで表示部１３に表示させるプレビュー表示処理を実行する（ステップＳ３）。また、ＣＰＵ１１ａは、プレビュー表示処理の実行と平行して、撮像装置１６から入力される画像のフレーム数をカウント（Ｎ＝Ｎ＋１）し（ステップＳ４）、フレーム数が「５」であるか否かを判断する（ステップＳ５）。
【００５５】
そして、ＣＰＵ１１ａは、フレーム数が「５」であると判断した場合（ステップＳ５：Ｙｅｓ）には、ステップＳ６に移行する。一方、フレーム数が５でないと判断した場合（ステップＳ５：Ｎｏ）には、ステップＳ２に戻ってステップＳ３及びステップＳ４を繰り返す。
【００５６】
次いで、ステップＳ６〜ステップＳ８において、ＣＰＵ１１ａは、ＲＯＭ１１ｃに記憶されているコード認識プログラムｃ２を読み出してＲＡＭ１１ｂに展開し、このコード認識プログラムｃ２に従って、コード認識処理の制御を開始する。具体的には、ＣＰＵ１１ａはフレーム数が「５」となったときの被写体の画像データと、コード認識用データｃ３と、を比較対照することにより、二次元コードの認識処理を実行する。
【００５７】
ここで、認識処理の方法として、例えば、被写体の画像データに二次元コードであることを示す所定の切り出しシンボルを検出することにより認識する方法、被写体の画像データの濃度により認識する方法、二次元コードの所定のモザイク形状を認識する方法、等があるが、これらに限定されるものではない。
【００５８】
ステップＳ６〜ステップＳ８におけるＣＰＵ１１ａの動作を具体的に説明する。ＣＰＵ１１ａは、ステップＳ６において、画像データと、類似性係数算定情報としてのコード認識用データｃ３と、を比較することにより、この画像データの二次元コードである可能性を判断するためのコード類似性係数（Ｑ）を算出する。
【００５９】
次いで、ＣＰＵ１１ａは、算出されたコード類似性係数（Ｑ）の値が、「０．５」以上であるか否かを判断し（ステップＳ７）、Ｑは「０．５」以上であると判断した場合（ステップＳ７：Ｙｅｓ）には、所定の二次元コードの可能性があると判断する。
【００６０】
一方、ＣＰＵ１１ａは、算出されたコード類似性係数（Ｑ）が０．５未満であると判断した場合（ステップＳ７：Ｎｏ）には、二次元コードである可能性が少ないと判断し、フレームのカウントを０にリセット設定した（ステップ９）上でステップＳ２に戻り、プレビュー表示処理と５フレーム毎のコード認識処理と、を繰り返す。
【００６１】
このように、ＣＰＵ１１ａは、５フレーム毎に、被写体の画像データに対し、二次元コードの認識処理を実行する。従って、ＣＰＵ１１ａの処理負荷が低減されることとなって、並行して実行する被写体の画像データの取得処理及び画像データのプレビュー表示処理への影響を軽減することができる。
【００６２】
また、ＣＰＵ１１ａは、ステップＳ８においてコード類似性係数（Ｑ）が「１」であるか否かを判断し、「１」であると判断した場合（ステップＳ８：Ｙｅｓ）には、二次元コードであると判断してステップＳ１０に移行する。
【００６３】
一方、ＣＰＵ１１ａは、コード類似性係数（Ｑ）が「０．５」以上であるが「１」ではないと判断した場合（ステップＳ８：Ｎｏ）には、二次元コード対象であると認識する。そして、ＣＰＵ１１ａは、撮像装置１６に近接撮像を実行するように近接撮像モード設定処理を実行し（ステップＳ１１）、ステップＳ９を経てステップＳ２に戻る。
【００６４】
そしてステップＳ２以降の工程で、近接撮像モードにおける撮像処理を行う。すなわち、ＣＰＵ１１ａは、絞り設定プログラムｃ４を実行して液晶窓１００の光透過面積を変更することにより、通常撮像に適した絞り値（Ｆ＝８）を近接撮像に適した絞り値（Ｆ＝２２又はＦ＝１６）に変更した上で、被写体の近接撮像を行う。この際、撮像装置１６によって取得された近接撮像の画像データは、表示部１３にプレビュー表示される。また、ＣＰＵ１１ａは、この近接撮像モードにおける撮像処理及びプレビュー表示処理と平行して、近接撮像モードによる画像データに対し、５フレーム毎のコード認識処理を実行する。
【００６５】
このとき、近接撮像モードにおける撮像処理は、通常撮像モードにおける撮像処理に比べて被写体深度が深いので、二次元コードの認識率が向上することとなる。従って、通常撮像モードにおいて二次元コードとしての可能性があるが確定ではないもの（二次元コード対象）を、二次元コードとして認識することができる。これに伴って、被写体の画像データにおける二次元コードの認識率が向上する。
【００６６】
ステップＳ８においてコード類似性係数（Ｑ）が「１」であると判断してステップＳ１０に移行した場合には、ＣＰＵ１１ａは、認識された二次元コードのデコード処理を実行し、その二次元コードのコード情報内容を表示部１３に表示させる（ステップＳ１２）。ここで、表示部１３に表示されるコード情報内容としては、例えば、ＵＲＬアドレス・電子メールアドレス等の文字情報や、任意の画像情報、等を挙げることができる。
【００６７】
次いで、ＣＰＵ１１ａは、ユーザによる入力部１２の操作により、表示部１３に表示されたコード情報内容に対する所定の処理の指示信号が入力されたか否かを判断し（ステップＳ１３）、指示信号が入力されたと判断した場合（ステップＳ１３：Ｙｅｓ）には、その指示に応じた処理を実行（ステップＳ１４）してステップＳ１５に移行する。
【００６８】
ここで、コード情報内容に対する所定の処理としては、例えば、コード情報内容がＵＲＬアドレスである場合には、そのＵＲＬアドレスへの接続指示、コード情報内容が電子メールアドレスである場合には、その電子メールアドレス宛の電子メールの作成指示、コード情報内容が電話番号・電子メールアドレス等である場合には、アドレス帳等への保存処理、等を挙げることができるが、これらに限定されるものではない。
【００６９】
一方、ＣＰＵ１１ａは、ステップＳ１３において、ユーザからの指示信号の入力がないと判断した場合（ステップＳ１３：Ｎｏ）には、ステップＳ１５に移行する。そして、ステップＳ１５において、ＣＰＵ１１ａは、ユーザの入力部１２の操作により、撮像処理の終了指示が入力されたか否かを判断し、入力されたと判断した場合には、撮像装置１６に撮像処理の終了指示を出力することにより、本撮像制御処理を終了する。
【００７０】
一方、ＣＰＵ１１ａは、撮像処理の終了指示の入力がないと判断した場合（ステップＳ１５：Ｎｏ）には、ステップＳ９を経て、ステップＳ２以降の工程を繰り返す。
【００７１】
本実施の形態に係る携帯電話機１においては、制御手段であるＣＰＵ１１ａが、撮像装置１６により取得した画像データに基づいて、絞り手段（液晶窓１００及び絞り設定プログラムｃ４）を制御し、通常撮像を行う通常撮像モードから、近接撮像を行う近接撮像モードへと自動的に切り替えることができる。従って、撮像モードを切り替える際に、ユーザが撮像モードの適否を判断したり手指で切替操作を行ったりする必要がない。また、撮像モードを切り替える際に撮像装置１６を手指で回動させる必要がない。この結果、撮像時の操作を格段に簡素化することができる。
【００７２】
また、本実施の形態に係る携帯電話機１においては、絞り手段が、ガラス基板１１０及び液晶１２０を有する液晶窓１００と、液晶１２０の一部に電圧を印加して液晶窓１００の光透過面積を変更することにより撮像装置１６に入射する光の量を調節する印加電圧手段（絞り設定プログラムｃ４）と、を備えるので、液晶の特性（電圧非印加時の施光性及び電圧印加時の非施光性）を利用して、撮像装置１６に入射する光の量を電気的に調節することができる。この結果、撮像装置１６に入射する光の量を調節するために複雑な機械的構成を設ける必要がないので、携帯電話機１の軽量化や薄型化が可能となる。
【００７３】
また、本実施の形態に係る携帯電話機１における撮像制御処理においては、撮像装置１６による被写体の画像データの取得処理及びその画像データのプレビュー表示処理と平行して、画像データ中の所定の二次元コードデータの認識処理及び二次元コードデータのデコード処理が自動的に実行される。従って、ユーザは、例えば、名刺や雑誌等に付けられている二次元コードを認識、解読するために面倒な設定をしなくとも通常の撮像処理の場合と同様の操作をすることで、自動的に二次元コードの読取、解読を行えることとなるので、大変使い勝手が良い。
【００７４】
また、例えば、通常撮像モードによって取得した画像データのピントがぼけていたり、ノイズが多く含まれていたりすることにより、二次元コードと明確に認識することができないが、その可能性がある場合には、二次元コードの認識に適した近接撮像モードによる撮像処理に自動的に切り換わるように絞り手段が制御される。従って、ユーザに、撮像モードの設定変更の手間を課すことなく、二次元コードの認識精度を高めることができる。
【００７５】
また、通常撮像モードによって取得した画像データに二次元コードが含まれている可能性が少ない場合や、明確に二次元コードが認識できた場合には、撮像モードが切り換わらないので、効率的である。
【００７６】
なお、本実施の形態における記述内容は、本発明に係る携帯電話機１の好適な一例であり、これに限定されるものではない。例えば、通常撮像モードと、近接撮像モードと、による撮像処理が実行可能であれば、本実施の形態において例示した撮像装置１６の構成に限定されるものではない。また、以上の実施の形態においては、情報コードの一例として二次元コードを用いて説明を行ったが、二次元コードに限定されるものではなく、例えば、バーコード、カラーコード等どのような情報コードであってもよい。
【００７７】
また、本実施の形態に係る携帯電話機１における撮像制御処理においては、二次元コードをデコードすると、そのコード情報内容を表示部１３に表示させた上で、ユーザによる所定の処理の指示に基づいて、二次元コードの情報内容に応じた各種処理を実行する構成で説明を行ったが、ＣＰＵ１１ａにより、コード情報内容が解読されると自動的に所定の処理を実行する構成であってもよい。
【００７８】
その他、本実施の形態における携帯電話機１の細部構成及び詳細動作に関しては、本発明の趣旨を逸脱しない範囲で適宜変更可能である。また、本発明の携帯端末は、本実施の形態で挙げた携帯電話機１に限定されず、ＰＨＳ（Ｒ）ＰＣ、ＰＤＡ等であってもよい。
【００７９】
【発明の効果】
請求項１記載の発明によれば、制御手段によって、撮像装置により取得した画像データに基づいて絞り手段を制御し、通常撮像を行う通常撮像モードから、近接撮像を行う近接撮像モードへと自動的に切り替えることができる。従って、撮像モードを切り替える際に、ユーザが撮像モードの適否を判断したり手指で切替操作を行ったりする必要がない。また、撮像モードを切り替える際に撮像装置を手指で回動させる必要がない。この結果、撮像時の操作を格段に簡素化することができる。
【００８０】
請求項２記載の発明によれば、絞り手段は、ガラス基板及び液晶を有する液晶窓と、液晶の一部に電圧を印加して液晶窓の光透過面積を変更することにより撮像装置に入射する光の量を調節する印加電圧手段と、を備えるので、液晶の特性（電圧非印加時の施光性及び電圧印加時の非施光性）を利用して、撮像装置に入射する光の量を電気的に調節することができる。この結果、撮像装置に入射する光の量を調節するために複雑な機械的構成を設ける必要がないので、携帯端末の軽量化や薄型化が可能となる。
【図面の簡単な説明】
【図１】本発明の実施の形態に係る携帯電話機の外観構成を示すものであり、（ａ）は携帯電話機の正面図、（ｂ）は携帯電話機の背面図である。
【図２】図１（ｂ）のＩＩ−ＩＩ部分の断面図である。
【図３】（ａ）は、図１に示した携帯電話機に備えられる液晶窓の構成を説明するための斜視図であり、（ｂ）は、（ａ）のＢ−Ｂ部分の断面図である。
【図４】図３に示した液晶窓の光透過面積を変更することにより絞り値（Ｆ値）を３通りに設定した状態を示す説明図である。
【図５】図１に示した携帯電話機の機能的構成を示すブロック図である。
【図６】図１に示した携帯電話機の撮像制御処理を説明するためのフローチャートである。
【図７】図１に示した携帯電話機の撮像装置によって撮像される被写体の例を示す概略図である。
【符号の説明】
１携帯電話機（携帯端末）
１１ａＣＰＵ（制御手段）
１６撮像装置
２０撮像素子
２１光電変換部
３２レンズ部
１００液晶窓（絞り手段）
１１０ガラス基板
１１１偏光板
１１２配向膜
１２０液晶
ｃ４絞り設定プログラム（印加電圧手段、絞り手段）[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a mobile terminal.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, various portable information communication terminal devices (hereinafter, referred to as “portable terminals”) such as PDAs, mobile phones, and PHS® having an information communication function and a personal information management function have been proposed and put into practical use. In recent years, a portable terminal having a function of capturing an image of a predetermined subject existing outside by using a mounted imaging device has been proposed. For example, there has been proposed a mobile terminal capable of performing imaging by switching between a normal imaging mode for imaging a predetermined subject and a close-up imaging mode for imaging a subject at a close position (for example, see Patent Document 1).
[0003]
[Patent Document 1]
JP-A-2002-262164
[Problems to be solved by the invention]
However, when the mobile terminal described in Patent Literature 1 is used, it is necessary for the user to determine whether to be in the normal imaging mode or the close-up imaging mode and to perform the switching operation. was there. In particular, the mobile terminal described in Patent Literature 1 has a structure in which the imaging mode is switched in association with the rotation of the imaging device. Therefore, every time the imaging mode is switched, the user has to rotate the imaging device with a finger. It was troublesome.
[0005]
An object of the present invention is to realize automatic switching control of an imaging mode in a portable terminal including an imaging device, and to simplify an operation at the time of imaging.
[0006]
[Means for Solving the Problems]
In order to solve the above problems, the invention described in claim 1 is
An imaging device having a photoelectric conversion unit, and a lens unit that forms a subject image on the photoelectric conversion unit, a mobile terminal including an imaging device having:
Diaphragm means for adjusting the amount of light incident on the imaging device to enable close-up imaging;
A control unit that automatically switches from a normal imaging mode for performing normal imaging to a close-up imaging mode for performing close-up imaging by controlling the aperture unit based on image data acquired by the imaging device;
It is characterized by having.
[0007]
According to the first aspect of the present invention, the control unit controls the aperture unit based on the image data acquired by the imaging device, and automatically switches from the normal imaging mode for performing normal imaging to the close-up imaging mode for performing close-up imaging. Can be switched. Therefore, when switching the imaging mode, there is no need for the user to judge whether or not the imaging mode is appropriate or to perform the switching operation with fingers. Further, it is not necessary to rotate the imaging device with a finger when switching the imaging mode. As a result, the operation at the time of imaging can be greatly simplified.
[0008]
According to a second aspect of the present invention, in the portable terminal according to the first aspect,
The aperture means,
A liquid crystal window including two glass substrates provided with a polarizing plate and an alignment film, and liquid crystal sealed between the glass substrates;
Applying voltage to a part of the liquid crystal to change a light transmission area of the liquid crystal window, thereby applying voltage means for adjusting an amount of light incident on the imaging device;
It is characterized by having.
[0009]
According to the second aspect of the present invention, the stop means enters the image pickup apparatus by changing the light transmission area of the liquid crystal window by applying a voltage to a part of the liquid crystal window and the liquid crystal window having the glass substrate and the liquid crystal. And an applied voltage means for adjusting the amount of light to be applied, so that the characteristics of the liquid crystal (light application property when no voltage is applied and non-light application property when a voltage is applied) are used to make light incident on the imaging device. The quantity can be adjusted electronically. As a result, there is no need to provide a complicated mechanical configuration for adjusting the amount of light incident on the imaging device, so that the weight and thickness of the portable terminal can be reduced.
[0010]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. In the present embodiment, as an example of a mobile terminal to which the present invention is applied, a mobile phone with an imaging device (hereinafter, simply referred to as a “mobile phone”) will be described.
[0011]
First, the mechanical configuration of the mobile phone 1 according to the present embodiment will be described with reference to FIGS. FIG. 1 is a diagram illustrating an external configuration of the mobile phone 1. FIG. 2 is a cross-sectional view taken along the line II-II in FIG. 1B, and is for explaining the configuration of the imaging device 16 provided in the mobile phone 1. In FIG. 2, a liquid crystal window 100 described later is indicated by a dotted line. FIG. 3A is a perspective view for explaining a configuration of a liquid crystal window 100 provided in the mobile phone 1, and FIG. 3B is a cross-sectional view taken along a line BB of FIG. 3A. . FIG. 4 is an explanatory diagram showing a state in which the aperture value (F value) is set to three different values by changing the light transmission area of the liquid crystal window 100 shown in FIG.
[0012]
As shown in FIG. 1, a mobile phone 1 according to the present embodiment is of a foldable type in which a first housing 10a and a second housing 10b are connected to each other so as to be openable and closable by a hinge joint 10c.
[0013]
The first housing 10a is provided with a display unit 13 on a surface (front surface) that becomes inside when folded (see FIG. 1A), and a liquid crystal (described later) is provided on a surface (back surface) that becomes outside when folded. A window 100 is provided (see FIG. 1B). An imaging device 16 is provided behind the liquid crystal window 100 shown in FIG. By changing the light transmission area of the liquid crystal window 100 by the applied voltage and adjusting the amount of light incident on the imaging device 16, the normal imaging mode can be switched to the close-up imaging mode. The liquid crystal window 100 will be described later with reference to FIGS.
[0014]
An input unit 12 is provided on the front of the second housing 10b (see FIG. 1A), and a power control unit 17 such as a charge pack is provided on the back (see FIG. 1B). . Further, as shown in FIG. 1B, an antenna 14a is provided on the upper part of the mobile phone 1. Inside the second housing 10b, a control unit 11 for integrally controlling the entire apparatus, a wireless communication unit 14 for transmitting and receiving a wireless signal related to an incoming call and an outgoing call with a wireless base station (not shown), a storage unit 15 and a transmission / reception unit 18 are built in. The control unit 11, the wireless communication unit 14, and the like will be described later with reference to FIG.
[0015]
The input unit 12 includes a numeric keypad, various function switches, a mode switch for switching between a call mode and a camera mode, and the like, and is used for inputting an instruction to execute a shooting process.
[0016]
The display unit 13 includes an LCD (Liquid Crystal Display) panel or the like, and performs screen display based on display data input from the control unit 11. In addition, the display unit 13 displays an image that has been preview-photographed by the imaging device 16, the content of code information decoded by the control unit 11, and the like. The antenna 14a is connected to the wireless communication unit 14.
[0017]
The imaging device 16 includes the imaging device 20 and the lens unit 32, and converts an image input via the lens unit 32 into an electric signal by the imaging device 20 to generate image data. Further, the imaging device 16 is capable of executing an imaging process in a normal imaging mode and a proximity imaging mode based on the control of the control unit 11.
[0018]
Here, the “normal imaging mode” is an imaging mode in which the depth of field is 1 m to ∞. The “proximity imaging mode” is an imaging mode in which the depth of field is several cm to ∞, and is suitable for imaging when the focal length is shorter than in the normal imaging mode and the distance to the subject is shorter.
[0019]
The configuration of the imaging device 16 will be described with reference to FIG. The imaging device 16 is provided on one surface of the substrate PC, and adjusts the amount of light incident on the imaging device 20 serving as a sensor for sensing light, the optical member 30 for condensing the light on the imaging device 20, and the amount of light incident on the optical member 30. Aperture plate 40, mirror frame 50 as an outer frame member for covering image pickup device 20, light shielding plate 60 having light shielding properties, filter 70 supported by light shielding plate 60, pressing member 80 for pressing optical member 30, optical member It is configured to include a positioning electric component 90 for positioning the 30.
[0020]
The optical member 30 serves to form a subject image on the photoelectric conversion unit 21 of the imaging device 20 and is made of a transparent plastic material. As shown in FIG. 2, the optical member 30 is supported by the leg 31 and the leg 31. And a convex lens-shaped lens portion 32 are integrally formed.
[0021]
As shown in FIG. 2, the aperture plate 40 is fixed on the upper surface of the optical member 30 and around the lens unit 32 with an adhesive B. The aperture plate 40 is made of a light-shielding material, and has an opening 41 as an aperture that defines an aperture value (F value) of the lens unit 32.
[0022]
The lens frame 50 is made of a material having a light-shielding property, and is arranged outside the optical member 30. The lens frame 50 is formed in a quadrangular prism shape, and a support portion 51 that supports the optical member 30 along the horizontal direction is integrally formed on two opposing inner surfaces thereof.
[0023]
The light shielding plate 60 is attached to the upper end of the lens frame 50 with an adhesive. The light-shielding plate 60 has an opening 61 as a diaphragm at a position corresponding to the optical member 30, and a filter 70 made of a material having infrared absorption characteristics is bonded below the opening 61 by an adhesive. . The filter 70 is formed corresponding to the diameter of the optical member 30. The light shielding plate 60 is formed to be slightly smaller than the opening at the upper end of the lens frame 50 so as to close this opening. The light shielding plate 60 and the filter 70 form a cover member. As described above, since the substrate PC, the lens frame 50, and the cover member are in close contact with and joined to each other, the imaging device 16 has a dustproof and moistureproof structure.
[0024]
A pressing member 80 formed of an elastic member such as a coil spring is disposed between the optical member 30 and the light shielding plate 50. By attaching the light shielding plate 60 to the lens frame 50, the light shielding plate 60 presses the pressing member 80, and the pressing member 80 is elastically deformed. The pressing member 80 presses the optical member 30 downward with a predetermined pressing force toward the lower side in FIG. 2 to urge the optical member 30 toward the image sensor 20. When a force is applied from the light-shielding plate 60 to the lower imaging device 20, the pressing member 80 is elastically deformed, so that a buffering action is performed to absorb the force. Therefore, the force is not directly transmitted to the imaging device 20. This has the effect of preventing the image sensor 20 from being damaged.
[0025]
The image sensor 20 is a CMOS (Complementary Metal Oxide Semiconductor) type image sensor. The lower surface of the rectangular thin plate-shaped imaging device 20 is attached to the upper surface of the substrate PC, and a photoelectric conversion unit 21 in which pixels are two-dimensionally arranged is formed at the center of the upper surface of the imaging device 20. A processing unit (not shown) is formed outside the photoelectric conversion unit 21, and a plurality of pads (not shown) are arranged near the outer edge of the processing unit. The pads as external connection terminals are connected to the substrate PC via wires W, as shown in FIG. The wire W is connected to a predetermined circuit on the substrate PC, and the predetermined circuit outputs captured image data to the control unit 11.
[0026]
The power control unit 17 includes, for example, a lithium battery, a nickel battery, a nickel battery, or the like. When the power is turned on, the power supply control unit 17 controls the mobile phone from a positive terminal and a negative terminal according to the control of the control unit 11. A power supply of a predetermined voltage is supplied to a drive circuit that drives each unit of the first embodiment.
[0027]
Next, the liquid crystal window 100 and the aperture means including the liquid crystal window 100 will be described with reference to FIGS.
[0028]
The liquid crystal window 100 adjusts the amount of light incident on the imaging device 16 to enable close-up imaging. The liquid crystal window 100 includes two glass substrates 110, a liquid crystal 120 sealed between the glass substrates 110, a sealant 130, a spacer (not shown), and the like.
[0029]
As shown in FIG. 3B, a polarizing plate 111 for regulating the vibration direction of the incident light is attached to the surface (outer surface) of the glass substrate 110 opposite to the liquid crystal 120. The vibration direction of light regulated by the polarizing plate 111 attached to one glass substrate 110 is substantially orthogonal to the vibration direction of light regulated by the polarizing plate 111 attached to the other glass substrate 110. I have.
[0030]
An orientation film 112 is formed on the surface (inner surface) of the glass substrate 110 on the liquid crystal 120 side, as shown in FIG. The alignment film 112 is formed by rubbing a polyimide thin film provided on the inner surface of the glass substrate 110 in a predetermined direction. The rubbing direction of the light distribution film 112 formed on one glass substrate 110 and the other glass The rubbing direction of the light distribution film 112 formed on the substrate 110 is substantially perpendicular to the rubbing direction. The orientation of the liquid crystal molecules in the liquid crystal 120 can be twisted due to the orthogonality of the rubbing direction of the alignment film 112.
[0031]
The liquid crystal 120 is a twisted nematic (TN) liquid crystal, and has a function of changing the vibration direction of incident light by twisting the arrangement of liquid crystal molecules in a state where no voltage is applied (light emitting property). On the other hand, when a voltage is applied to the liquid crystal 120, the twist of the alignment of the liquid crystal molecules is eliminated, and the light-emitting property is lost (non-light-emitting property).
[0032]
Therefore, when no voltage is applied to the liquid crystal 120, the light (polarized light) that has passed through the polarizing plate 111 of the one glass substrate 110 and whose vibration direction has been restricted, is vibrated by the light application property of the liquid crystal 120. Is changed by approximately 90 ° and passes through the polarizing plate 111 of another glass substrate 110. Therefore, light incident on the liquid crystal window 100 from the outside passes through the liquid crystal 120 and reaches the imaging device 16.
[0033]
On the other hand, when a voltage is applied to the liquid crystal 120, light (polarized light) whose vibration direction is restricted by passing through the polarizing plate 111 of one glass substrate 110 is not changed by the liquid crystal 120. Therefore, the light is blocked by the polarizing plate 111 of the other glass substrate 110. Therefore, light incident on the liquid crystal window 100 from outside does not reach the imaging device 16.
[0034]
That is, the light transmission area of the liquid crystal window 100 can be appropriately set by utilizing the light application property of the liquid crystal 120 in the voltage non-application state and the light non-application property of the liquid crystal 120 in the voltage application state. In the present embodiment, electrodes along the X direction in FIG. 3A are provided in stripes on one glass substrate 110, and electrodes along the Y direction in FIG. Are provided in a stripe pattern. Then, by applying a voltage to the intersection between the X-direction electrode and the Y-direction electrode, the light-emitting property of the liquid crystal 120 at the intersection is lost, and light transmission is prevented.
[0035]
In the present embodiment, the CPU 11a executes an aperture setting program c4 (described later) to apply a voltage to a predetermined intersection, change the light transmission area, and adjust the amount of light incident on the imaging device 16. ing. That is, the aperture setting program c4 is the applied voltage means in the present invention. Further, the liquid crystal window 100 and the aperture setting program c4 constitute an aperture unit in the present invention.
[0036]
FIG. 4 shows a state in which the light transmission area of the liquid crystal window 100 is changed by executing the aperture setting program c4, and three aperture values (F values) are set. In FIGS. 4A to 4C, hatched portions indicate portions where light transmission is blocked by the applied voltage, and concentric portions shown as white portions indicate light transmitting portions. are doing.
[0037]
FIG. 4A shows a state in which the aperture value (diameter of the light transmitting portion) is R ₁ and the aperture value is set to a value (F = 8) suitable for normal imaging, and FIG. Is set to R ₂ (<R ₁ ), the aperture value is set to twice (F = 16) the state of FIG. 4A, and FIG. 4C is the aperture diameter set to R ₃ (<R ₂ ) Respectively show states in which the aperture value is set to a value suitable for close-up imaging (F = 22). Normally, close-up imaging is performed in the state shown in FIG. 4C, but close-up imaging can also be performed in the state shown in FIG. The “aperture value” is a value calculated by dividing the focal length by the aperture diameter.
[0038]
The sealing material 130 is a member for sealing the liquid crystal 120 injected between the two glass substrates 110, as shown in FIG. The spacers (not shown) are extremely small particles mixed in the liquid crystal 120 for the purpose of preventing the two glass substrates 110 from adhering to each other.
[0039]
Next, a functional configuration of the mobile phone 1 according to the present embodiment will be described with reference to FIG. FIG. 5 is a block diagram illustrating a functional configuration of the mobile phone 1. As shown in FIG. 5, the mobile phone 1 includes a control unit 11, an input unit 12, a display unit 13, a wireless communication unit 14 having an antenna 14a, a storage unit 15, an imaging device 16, a power supply control unit 17, and a transmission / reception unit 18. , Etc., and each unit is connected by a bus 19.
[0040]
The control unit 11 includes a CPU (Central Processing Unit) 11a, a RAM (Random Access Memory) 11b composed of a rewritable semiconductor element, a ROM (Read Only Memory) 11c composed of a nonvolatile semiconductor memory, and the like. Have been.
[0041]
In the ROM 11c, a basic operation control program, a communication processing program, display data to be displayed on the display unit 13, and parameter data relating to imaging (default setting data for automatic imaging, preview imaging , An imaging control program c1, a code recognition program c2, code recognition data c3, and an aperture setting program c4. Here, the code recognition data c3 is reference data for setting a code similarity coefficient (Q) for determining whether the image data includes a two-dimensional code as an information code.
[0042]
The CPU 11a develops a program specified from various programs stored in the ROM 11c into a work area of the RAM 11b according to various instructions input from the input unit 12 or data input from the wireless communication unit 14, Various processes are executed according to the program according to instructions and input data. Then, the CPU 11a stores the processing result in a predetermined area of the RAM 11b and causes the display unit 13 to display the result.
[0043]
For example, the CPU 11a reads the imaging control program c1 stored in the ROM 11c and executes an imaging control process described later. As an imaging control process, the CPU 11a controls the imaging device 16 in accordance with a user operation instruction or the like input from the input unit 12, stores image data acquired by the imaging device 16 in a predetermined memory or the like in the RAM 11b, A preview is displayed on the display unit 13 at a rate of 25 fps.
[0044]
When performing normal imaging, the CPU 11a applies a voltage to a predetermined portion of the liquid crystal 120 of the liquid crystal window 100 by executing the aperture setting program c4, and sets the aperture value to a value suitable for normal imaging (F = 8). Set. On the other hand, when performing close-up imaging, the CPU 11a changes the portion of the liquid crystal window 100 to which the voltage of the liquid crystal 120 is applied by executing the aperture setting program c4, and changes the aperture value to a value suitable for close-up imaging (F = 22 or F = 16).
[0045]
Further, the CPU 11a executes a code process for recognizing a two-dimensional code object that may be a two-dimensional code on the acquired image data according to the code recognition program c2. More specifically, the CPU 11a compares the image data with the code recognition data c3 every five frames to determine whether or not the image data contains a two-dimensional code. More specifically, the CPU 11a calculates the code similarity coefficient for the two-dimensional code object by comparing the image data with the code recognition data c3 as the similarity coefficient calculation information, and calculates the code similarity coefficient. A two-dimensional code object or a two-dimensional code which may be a two-dimensional code is recognized based on the value of the sex coefficient.
[0046]
Further, when the code similarity coefficient may include a code, but there is a two-dimensional code object determined to be a non-deterministic numerical value, the CPU 11a changes the imaging mode from the normal imaging mode to the close-up imaging mode. Switch to mode. More specifically, if the code similarity coefficient may include a code, but there is a two-dimensional code target that is determined to be a non-deterministic numerical value, the CPU 11a executes the aperture setting program c4. By changing the light transmission area of the liquid crystal window 100 by executing the process, the aperture value (F = 8) suitable for normal imaging is changed to the aperture value (F = 22 or F = 16) suitable for close-up imaging. That is, the CPU 11a is control means in the present invention.
[0047]
Further, when the CPU 11a recognizes a two-dimensional code in the acquired image data, the CPU 11a performs a decoding process of the two-dimensional code and displays the decoding process result on the display unit 13. Further, the CPU 11a performs an operation based on the information of the information code on which the decoding process has been performed.
[0048]
The wireless communication unit 14 executes a communication protocol for a mobile phone corresponding to a predetermined communication method with the wireless base station via the antenna 14a in accordance with an instruction input from the control unit 11, and uses this communication method. Transmission / reception voice transmission / reception and data communication are executed by the set communication channel.
[0049]
The storage unit 15 stores data of a result of the processing executed by the control unit 11 and the like. For example, the storage unit 15 stores data of an image captured by the imaging device 16, data of mail transmitted and received via the wireless communication unit 14, data of a call history, and the like.
[0050]
The transmission / reception unit 18 has a microphone, a speaker, an A / D conversion unit, a D / A conversion unit, and the like (not shown), and performs A / D conversion processing on a user's transmission voice input from the microphone. The transmission voice data is output to the CPU 11a, and the reception voice data, the ring tone, the operation confirmation sound, the shutter sound, and the like input from the CPU 11a are D / A converted and output from the speaker.
[0051]
Next, an imaging control process of the mobile phone 1 according to the present embodiment will be described with reference to FIGS. FIG. 6 is a flowchart for explaining the imaging control process, and FIG. 7 is a schematic diagram of a subject in the imaging control process.
[0052]
When a predetermined button of the input unit 12 is pressed by the user of the mobile phone 1, the CPU 11a determines that the input is an instruction for an imaging process, reads the imaging control program c1 stored in the ROM 11c, and reads the imaging control program c1 into the RAM 11b. Then, control of the imaging process is started according to the imaging control program c1. At this time, the user shoots the subject (such as a two-dimensional code) as shown in FIG. 7 by pointing the imaging device 16 of the mobile phone 1 toward the subject.
[0053]
In the imaging process, the CPU 11a first resets the count number of frames of the image data stored in the RAM 11b to 0 (N = 0) (step S1), and issues an instruction to start the imaging process in the normal imaging mode to the imaging device 16. Output to Then, the imaging device 16 sequentially outputs the image data of the subject condensed by the optical member 30 and formed on the photoelectric conversion unit 21 of the imaging element 20 to the control unit 11 as the imaging process in the normal imaging mode ( Step S2).
[0054]
Then, the CPU 11a executes a preview display process of sequentially storing the image data input from the imaging device 16 in the RAM 11b and displaying these images on the display unit 13 at a frame rate of 25 fps (step S3). Further, in parallel with the execution of the preview display processing, the CPU 11a counts the number of frames of the image input from the imaging device 16 (N = N + 1) (step S4), and determines whether the number of frames is “5”. Is determined (step S5).
[0055]
When the CPU 11a determines that the number of frames is “5” (step S5: Yes), the process proceeds to step S6. On the other hand, if it is determined that the number of frames is not 5 (step S5: No), the process returns to step S2 and repeats steps S3 and S4.
[0056]
Next, in steps S6 to S8, the CPU 11a reads the code recognition program c2 stored in the ROM 11c and expands the code recognition program c2 in the RAM 11b, and starts controlling the code recognition process according to the code recognition program c2. Specifically, the CPU 11a executes the two-dimensional code recognition process by comparing and comparing the image data of the subject when the number of frames is “5” with the code recognition data c3.
[0057]
Here, as a method of the recognition processing, for example, a method of performing recognition by detecting a predetermined cutout symbol indicating a two-dimensional code in image data of a subject, a method of performing recognition based on the density of image data of a subject, There is a method of recognizing a predetermined mosaic shape of the code, but the method is not limited to these.
[0058]
The operation of the CPU 11a in steps S6 to S8 will be specifically described. In step S6, the CPU 11a compares the image data with the code recognition data c3 as similarity coefficient calculation information to determine the code similarity for determining the possibility that the image data is a two-dimensional code. Calculate the coefficient (Q).
[0059]
Next, the CPU 11a determines whether or not the calculated value of the code similarity coefficient (Q) is “0.5” or more (Step S7), and determines that Q is “0.5” or more. If this is done (step S7: Yes), it is determined that there is a possibility of a predetermined two-dimensional code.
[0060]
On the other hand, when determining that the calculated code similarity coefficient (Q) is less than 0.5 (Step S7: No), the CPU 11a determines that there is little possibility that the code is a two-dimensional code, and After resetting the count to 0 (step 9), the process returns to step S2, and the preview display process and the code recognition process for every five frames are repeated.
[0061]
As described above, the CPU 11a executes the two-dimensional code recognition process on the image data of the subject every five frames. Accordingly, the processing load on the CPU 11a is reduced, and the effect on the image data acquisition processing and the preview display processing of the image data of the subject executed in parallel can be reduced.
[0062]
In addition, the CPU 11a determines whether or not the code similarity coefficient (Q) is “1” in step S8, and when determining that the code similarity coefficient (Q) is “1” (step S8: Yes), the two-dimensional code is used. It is determined that there is, and the process proceeds to step S10.
[0063]
On the other hand, when the CPU 11a determines that the code similarity coefficient (Q) is “0.5” or more but is not “1” (Step S8: No), it recognizes that the code is a two-dimensional code. Then, the CPU 11a executes a close-up imaging mode setting process so that the imaging device 16 performs close-up imaging (step S11), and returns to step S2 via step S9.
[0064]
Then, in the steps after step S2, an imaging process in the proximity imaging mode is performed. That is, the CPU 11a executes the aperture setting program c4 to change the light transmission area of the liquid crystal window 100, thereby changing the aperture value suitable for normal imaging (F = 8) to the aperture value suitable for close-up imaging (F = 22). Or F = 16), and then performs close-up imaging of the subject. At this time, the image data of the close-up imaging acquired by the imaging device 16 is preview-displayed on the display unit 13. Further, the CPU 11a executes a code recognition process for every five frames on the image data in the close-up imaging mode in parallel with the imaging process and the preview display process in the close-up imaging mode.
[0065]
At this time, the imaging process in the close-up imaging mode has a deeper subject depth than the imaging process in the normal imaging mode, so that the recognition rate of the two-dimensional code is improved. Therefore, it is possible to recognize, as a two-dimensional code, an object that may be a two-dimensional code in the normal imaging mode but is not determined (two-dimensional code target). Accordingly, the recognition rate of the two-dimensional code in the image data of the subject is improved.
[0066]
If it is determined in step S8 that the code similarity coefficient (Q) is “1” and the process proceeds to step S10, the CPU 11a executes a process of decoding the recognized two-dimensional code, and The code information content is displayed on the display unit 13 (step S12). Here, examples of the code information content displayed on the display unit 13 include character information such as a URL address and an e-mail address, and arbitrary image information.
[0067]
Next, the CPU 11a determines whether or not an instruction signal of a predetermined process for the code information content displayed on the display unit 13 has been input by an operation of the input unit 12 by the user (step S13), and the instruction signal is input. If it is determined that the instruction has been made (step S13: Yes), the process according to the instruction is executed (step S14), and the process proceeds to step S15.
[0068]
Here, as the predetermined process for the code information content, for example, when the code information content is a URL address, a connection instruction to the URL address is given, and when the code information content is an e-mail address, An instruction to create an e-mail addressed to an e-mail address, when the code information content is a telephone number or an e-mail address, etc., can be stored in an address book, etc., but are not limited to these. Absent.
[0069]
On the other hand, when determining in step S13 that there is no input of the instruction signal from the user (step S13: No), the CPU 11a proceeds to step S15. Then, in step S15, the CPU 11a determines whether or not an instruction to end the imaging process has been input by the operation of the input unit 12 by the user, and when it is determined that the instruction has been input, the imaging device 16 terminates the imaging process. By outputting the instruction, the imaging control process is terminated.
[0070]
On the other hand, when the CPU 11a determines that there is no input of an instruction to end the imaging process (Step S15: No), the process from Step S9 is repeated through Step S9.
[0071]
In mobile phone 1 according to the present embodiment, CPU 11a as control means controls aperture means (liquid crystal window 100 and aperture setting program c4) based on image data acquired by imaging apparatus 16, and performs normal imaging. It is possible to automatically switch from the normal imaging mode to perform to the close-up imaging mode to perform close-up imaging. Therefore, when switching the imaging mode, there is no need for the user to judge whether or not the imaging mode is appropriate or to perform the switching operation with fingers. Further, it is not necessary to rotate the imaging device 16 with fingers when switching the imaging mode. As a result, the operation at the time of imaging can be greatly simplified.
[0072]
Further, in the mobile phone 1 according to the present embodiment, the aperture means increases the light transmission area of the liquid crystal window 100 by applying a voltage to a part of the liquid crystal window 100 having the glass substrate 110 and the liquid crystal 120. Since there is provided an applied voltage means (aperture setting program c4) for adjusting the amount of light incident on the imaging device 16 by changing the characteristics, the characteristics of the liquid crystal (light application property when no voltage is applied and non-application property when voltage is applied) Utilizing the light property), the amount of light incident on the imaging device 16 can be electrically adjusted. As a result, there is no need to provide a complicated mechanical configuration for adjusting the amount of light incident on the imaging device 16, so that the weight and thickness of the mobile phone 1 can be reduced.
[0073]
In addition, in the imaging control process of the mobile phone 1 according to the present embodiment, a predetermined two-dimensional image data in the image data is processed in parallel with the acquisition process of the image data of the subject by the imaging device 16 and the preview display process of the image data. The code data recognition processing and the two-dimensional code data decoding processing are automatically executed. Therefore, for example, the user can automatically recognize and decode the two-dimensional code attached to a business card, a magazine, or the like by performing the same operation as in a normal imaging process without performing a troublesome setting. Since the two-dimensional code can be read and decoded in a short time, it is very convenient to use.
[0074]
Also, for example, when the image data acquired in the normal imaging mode is out of focus or contains a lot of noise, it cannot be clearly recognized as a two-dimensional code. Is controlled to automatically switch to an imaging process in a close-up imaging mode suitable for two-dimensional code recognition. Therefore, the recognition accuracy of the two-dimensional code can be improved without imposing a burden on the user for changing the setting of the imaging mode.
[0075]
In addition, when the possibility that a two-dimensional code is included in the image data acquired in the normal imaging mode is low or when the two-dimensional code is clearly recognized, the imaging mode is not switched, so that it is efficient. is there.
[0076]
Note that the description in the present embodiment is a preferred example of the mobile phone 1 according to the present invention, and is not limited to this. For example, the configuration of the imaging device 16 illustrated in the present embodiment is not limited as long as the imaging process in the normal imaging mode and the close-up imaging mode can be executed. Further, in the above-described embodiment, the description has been made using the two-dimensional code as an example of the information code. However, the present invention is not limited to the two-dimensional code. It may be a code.
[0077]
Further, in the imaging control process in the mobile phone 1 according to the present embodiment, when the two-dimensional code is decoded, the code information content is displayed on the display unit 13 and based on an instruction of a predetermined process by the user. Although the description has been given of the configuration in which various processes corresponding to the information content of the two-dimensional code are executed, the configuration may be such that the CPU 11a automatically executes a predetermined process when the code information content is decoded.
[0078]
In addition, the detailed configuration and detailed operation of the mobile phone 1 according to the present embodiment can be appropriately changed without departing from the spirit of the present invention. Further, the mobile terminal of the present invention is not limited to the mobile phone 1 described in the present embodiment, and may be a PHS (R) PC, PDA, or the like.
[0079]
【The invention's effect】
According to the first aspect of the present invention, the control unit controls the aperture unit based on the image data acquired by the imaging device, and automatically switches from the normal imaging mode for performing normal imaging to the close-up imaging mode for performing close-up imaging. You can switch to Therefore, when switching the imaging mode, there is no need for the user to judge whether or not the imaging mode is appropriate or to perform the switching operation with fingers. Further, it is not necessary to rotate the imaging device with a finger when switching the imaging mode. As a result, the operation at the time of imaging can be greatly simplified.
[0080]
According to the second aspect of the present invention, the stop means enters the image pickup device by changing the light transmission area of the liquid crystal window by applying a voltage to a part of the liquid crystal window having the glass substrate and the liquid crystal. And an applied voltage means for adjusting the amount of light, so that the amount of light incident on the image pickup device can be obtained by utilizing the characteristics of the liquid crystal (light application when no voltage is applied and non-light application when a voltage is applied). Can be adjusted electrically. As a result, there is no need to provide a complicated mechanical configuration for adjusting the amount of light incident on the imaging device, so that the weight and thickness of the portable terminal can be reduced.
[Brief description of the drawings]
FIGS. 1A and 1B show an external configuration of a mobile phone according to an embodiment of the present invention, wherein FIG. 1A is a front view of the mobile phone and FIG. 1B is a rear view of the mobile phone.
FIG. 2 is a sectional view taken along the line II-II in FIG. 1 (b).
3A is a perspective view for explaining a configuration of a liquid crystal window provided in the mobile phone shown in FIG. 1, and FIG. 3B is a cross-sectional view taken along a line BB in FIG. is there.
FIG. 4 is an explanatory diagram showing a state in which the aperture value (F value) is set to three different values by changing the light transmission area of the liquid crystal window shown in FIG. 3;
FIG. 5 is a block diagram showing a functional configuration of the mobile phone shown in FIG. 1;
FIG. 6 is a flowchart illustrating an imaging control process of the mobile phone illustrated in FIG. 1;
FIG. 7 is a schematic diagram illustrating an example of a subject imaged by the imaging device of the mobile phone illustrated in FIG. 1;
[Explanation of symbols]
1 mobile phone (mobile terminal)
11a CPU (control means)
16 imaging device 20 imaging element 21 photoelectric conversion unit 32 lens unit 100 liquid crystal window (stop unit)
110 glass substrate 111 polarizing plate 112 alignment film 120 liquid crystal c4 aperture setting program (applied voltage means, aperture means)

Claims

An imaging device having a photoelectric conversion unit, and a lens unit that forms a subject image on the photoelectric conversion unit, a mobile terminal including an imaging device having:
Diaphragm means for adjusting the amount of light incident on the imaging device to enable close-up imaging;
A control unit that automatically switches from a normal imaging mode for performing normal imaging to a close-up imaging mode for performing close-up imaging by controlling the aperture unit based on image data acquired by the imaging device;
A mobile terminal comprising:

The aperture means,
A liquid crystal window including two glass substrates provided with a polarizing plate and an alignment film, and liquid crystal sealed between the glass substrates;
Applying voltage to a part of the liquid crystal to change a light transmission area of the liquid crystal window, thereby applying voltage means for adjusting an amount of light incident on the imaging device;
The mobile terminal according to claim 1, comprising: