JP2004304297A - 携帯情報端末 - Google Patents

Abstract

【課題】操作部の操作中に撮影デバイスを同時に起動して歩行している前方を画面表示して危険な障害物との衝突を防止できる携帯情報端末を提供する。
【解決手段】撮像機能を有した撮影デバイス９とこの撮影デバイス９が撮像した画像データを表示する表示部７と操作部６と制御部４とを備えて撮影デバイス９が表示部７の配される面よりも後方を撮影可能に配された携帯情報端末であって、制御部４は、操作部６を使用者が操作する操作状態と、撮影デバイス９の撮影した画像データとを同時に表示部７に表示するよう制御する。
【選択図】 図２

Description

【０００１】
【発明の属する技術分野】
本発明は携帯情報端末に係り、より詳細には、撮像機能を有した撮影デバイスを備えて撮像した画像データを表示部に画面表示してデータ処理する携帯情報端末に関する。
【０００２】
【従来の技術】
【特許文献１】
特開平１０−３０８９８１号公報
【０００３】
近年、携帯情報端末は、例えば、携帯電話機、ＰＤＡなどの本体に、ＣＭＯＳ、ＣＣＤなどの撮影デバイス（カメラ）を備えており、瞬時に通信相手と画像データの送受信を可能にしている。特に、カメラ付携帯電話機では、通常のデジタルカメラのように背景の撮影や動画の録画などを撮影でき、そのデータをその場で送受信できる利点がある。また、お互いの撮影画像をリアルタイムに見ながら通話するＴＶ電話の機能を備えた携帯電話機もある。さらに、カメラのない携帯電話機においても、デジタルカメラをケーブルにより接続して画像データをやり取りできるように形成（例えば、特許文献１）している。図６は、このような携帯電話機にデジタルカメラをケーブルで接続する従来の携帯情報端末の一実施形態を示す図である。
【０００４】
図６に示すように、従来の携帯情報端末の一実施形態は、データ送受信機能を有した携帯情報端末の本体２０と、ディジタルカメラ３０と、このディジタルカメラ３０と本体２０とを接続するケーブル４０とを備えている。そして、このような携帯情報端末は、本体２０の操作部２６のキー操作により、ディジタルカメラ３０の表示部３７（液晶モニタ）に画像や送信のための情報を表示させ、且つ、ディジタルカメラ３０の画像データを本体２０のメモリ部（図示せず）に一旦蓄積する。その後、本体２０の操作部２６により更なるキー操作を行うことで、商用ネットワーク等を介して画像データを種々の通信相手に送信する。一方、画像データを受信する場合も、操作部２６のキー操作により画像データが本体２０に受信されて一旦メモリ部に蓄積し、その後、ケーブル４０を介してディジタルカメラ３０にも送信することができる。
【０００５】
ところで、このような撮影デバイス（カメラ）を備える従来の携帯情報端末は、例えば、携帯端末の本体と撮影デバイスとを利用して歩行を補助するシステムとして採用している。この視覚障害者歩行支援方法及び支援システムは、携帯端末の本体と撮影デバイスとを備えることによって、歩行者（視覚障害者）がサービスセンターに周囲の画像と音声情報とを送信し、その画像を離れた場所で介護者が受信して本体を通して歩行者に伝えて安全を図るというものである。
このように、従来の携帯情報端末は、携帯端末の本体と撮影デバイスとを備えることで、通信相手に画像データを送信して瞬時に所望の情報を得ることができ、通常のコミュニケーション手段としての機能に加えて種々の補助システムとしての機能としても広く採用されていた。
【０００６】
【発明が解決しようとする課題】
しかしながら、従来の携帯情報端末では、撮影デバイス（デジタルカメラ）が送受信用の画像データを予め撮影する目的にのみ用いており、それ以外の用途で撮影することは考えられていなかった。特に、カメラ付携帯電話機の場合、前述した視覚障害者が周囲の撮影画像を送信して歩行の安全を確保することは可能であるが、例えば、電話帳検索、メール作成などの操作時に撮影デバイスは駆動せず停止しているため、この操作時に歩いていて前方にある障害物や段差などに気がつかずにぶつかってしまい使用者自身が危険な目に合うことを避ける補助には適用できないという不具合があった。
本発明はこのような課題を解決し、操作部の操作中に撮影デバイスを同時に起動して歩行している前方を画面表示して危険な障害物との衝突を防止できる携帯情報端末を提供することを目的とする。
【０００７】
【課題を解決するための手段】
本発明は上述の課題を解決するために、撮像機能を有した撮影デバイスとこの撮影デバイスが撮像した画像データを表示する表示部と操作部と制御部とを備えて撮影デバイスが表示部の配される面よりも後方を撮影可能に配された携帯情報端末であって、制御部は、操作部を使用者が操作する操作状態と、撮影デバイスの撮影した画像データとを同時に表示部に表示するよう制御する。
【０００８】
ここで、制御部には、画像データ、音声データ、文字データなどのデータを送受信する通信手段を更に備えることが好ましい。また、撮影デバイスは、本体に回動可能に支持され、少なくとも表示部の配された面よりも後方を撮影可能に配されることが好ましい。また、制御部は、操作状態を表示部に背景表示した画像データに重ねて文字、記号、数字などにより表示し、かつ、白枠で中を黒くまたは黒枠で中を白くすることで表示を行うよう制御することが好ましい。また、制御部は、表示部に操作状態を表示した第１画面と、画像データを表示した第２画面とを同時に表示することが好ましい。また、制御部は、操作状態を画像データを背景として重ねて表示する第１の同時表示と、操作状態を表示する第１画面と画像データを表示した第２画面とによる第２の同時表示とを、操作部の指示により切替え可能に制御することが好ましい。また、制御部は、表示部に操作状態の表示された状態において、操作部により所定の操作を検出すると撮影デバイスを起動すると共に、画像データと操作状態との同時表示を行い、再び、所定の操作を検出することで同時表示を解除できることが好ましい。
【０００９】
【発明の実施の形態】
次に、添付図面を参照して本発明による携帯情報端末の実施の形態を詳細に説明する。図１は、本発明による携帯情報端末をカメラ付携帯電話機に採用した一実施形態を示す外観図であり、図１（ａ）は表示部７側を、図１（ｂ）は撮影デバイス９側を各々示している。また、図２は、図１に示した携帯情報端末の内部構造を示す概略ブロック図である。また、図３は、図１に示した携帯情報端末が背景描画モードに移る動作を示すフローチャートである。また、図４は、図１に示した表示部７による表示形態の一実施例を示す図である。また、図５は、図１に示した表示部７による表示形態の他の実施例を示す図である。
【００１０】
図１に示すように、本発明による携帯情報端末をカメラ付携帯電話機に採用した一実施形態は、携帯電話機の中央にヒンジ部を備えた折り畳み式の本体１０を備え、この本体１０に撮像機能を有した撮影デバイス（ＣＭＯＳ、ＣＣＤ等の小型カメラ）９と、この撮影デバイス９が撮像した画像データを表示する表示部７とを一体に備えている。この撮影デバイス９は、表示部７とは向きがほぼ逆になるように配置されている。また、本実施の形態は、携帯電話機の本体１０の外周面に複数のキーを配置したキー入力デバイス等の操作部６を有し、この操作部６を使用者が操作する操作状態と、これと同時に撮影デバイス９による画像データとを同時に表示部７に表示可能に形成している。従って、本実施の形態では、使用者が歩行中に操作部６の操作を行っていても、撮影デバイス９を用いて前方の画像を表示部７から確認して歩行中の安全を確保することができる。
【００１１】
ここで、操作部６、表示部７、撮影デバイス９は、図２に示すように、装置全体を制御する制御部４に接続しており、この制御部４により前述した前方の画像データと操作状態とを同時に表示できるように制御されている。すなわち、制御部４は、記憶された所定のプログラムに従って操作部６からの制御信号により動作し、表示部７及び撮影デバイス９を制御している。この制御部４は、更に、通信手段としてアンテナ１、ＲＦ部２、ベースバンド部３を接続して種々のデータを送受信できるように制御している。すなわち、通信手段は、音声、文字、画像データまたは制御信号等を高周波により変調してアンテナ１より送出したり、アンテナ１より受信した音声、文字、画像データまたは制御信号等を復調して制御部４に出力している。また、制御部４には、通信時に通話するマイク８ａ及びスピーカ８ｂ（図１参照）を備えたオーディオ部８と、種々のデータを蓄積する不揮発生メモリ等からなる記憶装置５とを各々接続している。
【００１２】
そして、このような構成からなる本実施の形態では、操作部６によるメール作成、電話帳検索、ブラウジング、スケジュール記入などの操作中に、特定のキー操作（下記に記載）を行うことで、表示部７に操作状況とこの背景に前方の映像データとを同時に表示（図４参照）でき、歩行中の安全を確認することができる。ここで、特定のキー操作は、例えば、テンキー以外のキー押下（本体側面のサイドキー：図１（ｂ）に示した操作部６ｂ）、複数キーの連続押下や同時押下、所定キーの長押し、メニューから選択などである。また、以上の操作後に更なる他の特定キー操作を行うと、背景だった映像が上端の小さな窓に変わりその中に前方の映像が表示（図５参照）される。以下、図２乃至５を参照して詳しい実施形態を詳細に説明する。
【００１３】
図２に示したように、本発明による携帯情報端末をカメラ付携帯電話機に採用した一実施形態は、例えば、操作部６でメールやブラウジングなどの表示部７を確認しながら操作するモードの時に、操作部６で前述した特定キー操作を行うことによって、制御部４が表示部７に撮影デバイス９で撮影している画像を背景として映し出すモード（以後、背景描画モードと呼ぶ）に設定されたことを検知する。そして、制御部４は、撮影デバイス９を制御して起動させて、その画像を表示部７に現在操作しているモード（メール、電話帳、ブラウジング等）の背景として表示する。これにより、使用者が歩行中にメール等に意識を集中するあまり、障害物に気付かずにぶつかってしまうことを防ぐことができるようになる。
【００１４】
さらに、図３を参照して制御部４の処理を詳しく説明すると、まず、使用者が操作部６からの操作により、例えば、メールを入力するために所定のキー操作でメールアプリケーションを起動させる。このメールアプリケーションを起動した後、制御部４は操作部６の入力を監視しておき、背景描画モードが指示されたかを判別する（ステップ１１）。ステップ１１では、通常のメールアプリケーションの処理指示と異なるサイドキー６ｂの入力であると判断すると（ステップ１１でＹｅｓ）、背景描画モードを起動させる（ステップ１２）。また、ステップ１１において背景描画モードの入力がない（ステップ１１でＮｏ）場合、通常の動作でメールアプリケーションに関する処理を行う（ステップ１４）。ここで、メールアプリケーションに関する処理とは、文字の入力やメール送信等があるが、操作部６（特に６ａ）の入力キーに応じて処理を制御部４が行うことは言うまでもない。ステップ１２では、撮影デバイス９で撮影している画像データをメールの背景としてアプリケーションの文字の背後に描画するステップ１２が実行される。
【００１５】
具体的には、背景描画モードが起動されると、まず撮影デバイス９を起動し、撮影画像を得る。この撮影画像を、現在処理中のメールアプリケーションの表示用データに重畳処理し、表示部７に表示するよう制御部４にて処理する。その後、メールアプリケーションの終了の入力が検出されるまで、これらの動作を行い（ステップ１３）、メールアプリケーションの終了が指示されたと検出すると、メールアプリケーションを終了し、背景描画モードを終了するとともに撮影デバイス９を停止（ステップ１５）する。
【００１６】
これにより表示部７には、図４に示すように、撮影デバイス９による使用者の前方にて把持している携帯情報端末で死角となる携帯端末の背後を撮像し、画像データの背景表示に重ねて操作部６の操作状態（メール入力状況）を同時に表示することができる。ところで、表示部７には、画像データの背景に文字、記号、数字などの操作状態を重ねて同時に表示するため、使用者が操作状態を確認し難くなってしまうことも考えられる。そこで、表示部７では、操作状態の表示において、文字、記号、数字などを白枠で囲い、白枠の中に、これら文字、記号、数字を黒い色にて表示する、または逆に黒枠で囲い中を白く表示することで表示を見やすくしてもよい。
【００１７】
また、表示部７にて重畳処理する例として、メールを入力及び読む等のメーラー動作について説明したが、本発明はこれに限定されるものではなく、例えば、撮影デバイス９による画像データの背景に重ねてブラウジングや電話帳検索などの操作状態も同様に表示できる。しかし、表示部７は、ブラウジングの画像データを表示すると撮影デバイス９の画像データと重なり見にくくなる可能性がある。そこで、本実施の形態では、図５に示すように、表示部７の全面に操作部６の操作状態（電話帳検索）である第１画面Ａを背景として表示し、この第１画面Ａ上の隅に撮影デバイス９の画像データである更なる小さな第２画面Ｂを設けて同時に表示可能にしている。このような第１画面Ａと第２画面Ｂとの同時表示は、図４に示した表示状態から操作部６で新たな特定キー操作を行うことで切替えられる。このように表示部７では、図４及び図５に示した２種類の表示画面を用途に応じて切り替えることで、使用者が認識し易い表示にすることができる。尚、図５に示した第１画面Ａと第２画面Ｂとの同時表示は、ブラウジングや電話帳検索の表示に限定されるものではなく、図４に示したメーラー動作の表示にも適用可能である。
【００１８】
このように本発明による携帯情報端末をカメラ付携帯電話機に採用した一実施形態によると、操作部６の操作中に撮影デバイス９を同時に起動させて表示部７に前方を撮影した画像データとメール等の操作状態とを同時に表示することにより、いちいち視線を表示部７から外して足元を注意しなくても障害物などの前方の画像を表示部７で確認できるとともに、メール等の操作を早く終わらせることができ、また、歩行中にメール等に集中するあまり危険物に気付かないといった危険を回避することができる。
【００１９】
以上、本発明による携帯情報端末の実施の形態を詳細に説明したが、本発明は前述した実施の形態に限定されるものではなく、その要旨を逸脱しない範囲で変更可能である。
例えば、カメラ付携帯電話機の本体に撮影デバイスを固定して設けた実施例を説明したが、これに限定されるものではなく、本体に撮影デバイスを回動可能に支持して使用者の前方を撮像する角度を可変可能に設けても良い。具体的には、使用者が表示部を見る際には表示部の背面はやや足元を向いているため、撮影デバイスの角度を足元よりやや前方を向く様、ヒンジ部に撮影デバイスを設けたりしてもよい。こうすることにより、使用者は操作中においても、より前方を確認しやすくなり、危険を回避することができる。
また、表示部に表示する２種類の表示画面（図４及び図５）を切替可能に設けた実施例を説明したが、これに限定されるものではなく、いずれか一方の表示画面のみで表示しても良い。
【００２０】
【発明の効果】
このように本発明による携帯情報端末によれば、簡単な操作により操作部の操作中に撮影デバイスを同時に起動させて表示部に撮影した画像データと操作部の操作状態とを同時に表示できるため、いちいち視線を表示部から外して足元を注意しなくても障害物などの前方の画像を表示部で確認できるとともに、操作部の操作を早く終わらせることができ、また、歩行中に操作に集中するあまり危険物に気付かないといった危険を回避することができる。
【図面の簡単な説明】
【図１】本発明による携帯情報端末をカメラ付携帯電話機に採用した一実施形態を示す外観図。
【図２】図１に示した携帯情報端末の内部構造を示す概略ブロック図。
【図３】図１に示した携帯情報端末が背景描画モードに移る動作を示すフローチャート。
【図４】図１に示した表示部による表示形態の一実施例を示す図。
【図５】図１に示した表示部による表示形態の他の実施例を示す図。
【図６】従来の携帯情報端末の一実施形態を示す図。
【符号の説明】
１ アンテナ
２ ＲＦ部
３ ベースバンド部
４ 制御部
５ 記憶装置
６ 操作部
７ 表示部
８ オーディオ部
８ａ マイク
８ｂ スピーカ
９ 撮影デバイス
１０ 本体

Claims (7)

1. 撮像機能を有した撮影デバイスと、この撮影デバイスが撮像した画像データを表示する表示部と、操作部と、制御部とを備え、前記撮影デバイスは前記表示部の配される面よりも後方を撮影可能に配された携帯情報端末であって、
   前記制御部は、前記操作部を使用者が操作する操作状態と、前記撮影デバイスの撮影した画像データとを同時に前記表示部に表示するよう制御することを特徴とする携帯情報端末。
2. 請求項１に記載の携帯情報端末において、
   前記制御部には、前記画像データ、音声データ、文字データなどのデータを送受信する通信手段を更に備えたことを特徴とする携帯情報端末。
3. 請求項１もしくは２に記載の携帯情報端末において、
   前記撮影デバイスは、前記本体に回動可能に支持され、少なくとも前記表示部の配された面よりも後方を撮影可能に配されたことを特徴とする携帯情報端末。
4. 請求項１から３のいずれかに記載の携帯情報端末において、
   前記制御部は、前記操作状態を前記表示部に背景表示した画像データに重ねて文字、記号、数字などにより表示し、かつ、白枠で中を黒くまたは黒枠で中を白くすることで表示を行うよう制御することを特徴とする携帯情報端末。
5. 請求項１から４のいずれかに記載の携帯情報端末において、
   前記制御部は、前記表示部に前記操作状態を表示した第１画面と、前記画像データを表示した第２画面とを同時に表示することを特徴とする携帯情報端末。
6. 請求項１から５のいずれかに記載の携帯情報端末において、
   前記制御部は、前記操作状態を前記画像データを背景として重ねて表示する第１の同時表示と、前記操作状態を表示する第１画面と前記画像データを表示した第２画面とによる第２の同時表示とを、前記操作部の指示により切替え可能に制御することを特徴とする携帯情報端末。
7. 請求項１から６のいずれかに記載の携帯情報端末において、
   前記制御部は、前記表示部に前記操作状態の表示された状態において、前記操作部により所定の操作を検出すると前記撮影デバイスを起動すると共に、前記画像データと前記操作状態との同時表示を行い、再び、前記所定の操作を検出することで前記同時表示を解除できることを特徴とする携帯情報端末。

Images