JP2005130339A - 携帯電話装置、データ伝送方法及びデータ伝送システム - Google Patents

Abstract

【課題】 携帯電話装置に搭載された撮像手段を使用して撮影された画像データを高速に外部に伝送可能にする。
【解決手段】 携帯電話装置１００に搭載された撮像素子１４ａで撮影された画像データを液晶表示部５に表示するとともに、その外部Ｉ／Ｆ部２０に伝送する際、１フレーム分の画像データはバッファメモリ１８に一時記憶された後、画像Ｉ／Ｆ部１９及び液晶・カメラ専用バス２４を通じてＤＭＡコントローラ２３により読み出され、データバス３を介してメインメモリ部４内のＶＲＡＭ４ａに順次ＤＭＡ転送される。ＶＲＡＭ４ａに記憶された１フレーム分の画像データは、外部Ｉ／Ｆ部２０にＤＭＡ転送されると、外部Ｉ／Ｆ部２０内のＵＳＢコントローラ２１により、ＵＳＢポート２２を通じて、ＰＣ２００側に転送される。次の１フレーム分の画像データも連続して転送され、ＰＣ２００側では、１秒間に所定枚数の画像からなる動画像が得られる。
【選択図】 図３

Description

本発明は、撮像手段を備えた携帯電話装置、データ伝送方法及びデータ伝送システムに関する。

近年、カメラ付き携帯電話装置が販売され、その利用者は急激に増加している。一般に、カメラを搭載した携帯電話装置では、携帯電話装置内のデジタルカメラ部で撮影した静止画や動画の画像データは、一旦、携帯電話装置内のメモリ等に保存される。撮影した画像データは、外部インターフェースを介してパーソナルコンピュータ（ＰＣ）などの外部機器に転送し、この外部機器において、画像データを管理したり、編集することができるようになっている（例えば、特許文献１参照）。

また、カメラ付き携帯電話装置の中には、撮影した動画像の画像データを無線通信によって通信相手に送信し、携帯電話装置間でＴＶ電話機能を実現したものが登場している（例えば、特許文献２参照）。さらに、カメラユニット（ウェブカメラ）及びヘッドセットをＰＣに接続して利用可能とし、このようなＰＣ同士をインターネット等のネットワークを介して接続して、ＴＶ電話や電子会議などを行うシステムも実現されている。

しかしながら、上記特許文献１記載の従来例では、カメラ付き携帯電話装置として、内蔵されているカメラで撮影して一旦ハードディスクに保存した静止画データを、高速の外部インタフェースを介して、ＰＣなどの外部機器に転送することは示されているが、動画像としてほぼリアルタイムに、画像データをＰＣなどの外部機器に転送する機能を有していなかった。したがって、携帯電話装置に搭載されているカメラをＴＶ電話等に利用することはできなかった。

また、上記特許文献２に記載の従来例では、携帯電話装置において、無線通信を用いた動画伝送によるＴＶ電話の実現をする場合、高速な無線通信が可能な第３世代の携帯電話装置（例えば、Ｗ−ＣＤＭＡ方式の携帯電話装置など）の端末同士に限られている。現在、カメラ付き携帯電話装置において、利用者が非常に多いＰＤＣ方式の携帯電話装置やナローバンドＣＤＭＡ方式の携帯電話装置では、伝送速度が遅いため、動画像のリアルタイムの伝送はできず、ＴＶ電話を実現することは困難である。

また、上記カメラユニット及びヘッドセットを装備したＰＣにより、ＴＶ電話を実現する場合、通信可能な端末がこれらの周辺機器を装備したＰＣに限定され、周辺機器の準備や設定にコストや手間がかかったり、ＰＣ本体にもある程度の性能が要求されるため、あまり普及が進んでいないのが現状である。

特開２０００−１１５７３２号公報 特開２０００−３５４２３３号公報

本発明は、上記事情に鑑みてなされたもので、携帯電話装置に搭載された撮像手段を使用して撮影された画像データを高速に外部に伝送することができる携帯電話装置、データ伝送方法及びデータ伝送システムを提供することを目的とする。

本発明の携帯電話装置は、被写体を撮影して画像データを取得する撮像手段を備えた携帯電話装置であって、情報処理装置に接続され、この情報処理装置との間でデータ転送を行う外部インターフェース手段と、前記撮像手段で撮影された画像データをフレーム単位に記憶するメモリと、前記メモリに１フレーム分の画像データが記憶された後、前記メモリに記憶された１フレーム分の画像データを前記外部インターフェース手段に伝送する伝送手段とを備えるものである。

上記構成により、携帯電話装置に搭載された撮像手段を使用して撮影された画像データを高速に外部に伝送することができ、ほぼリアルタイムに画像データを外部機器に転送することが可能となる。このため、例えば情報処理装置に専用のカメラ等を接続して用いることなく、撮像手段が搭載された携帯電話装置を情報処理装置に接続するだけで簡単にＴＶ電話機能を実現できる。

また、本発明の一態様として、上記の携帯電話装置であって、前記画像データを表示する表示手段を備え、前記伝送手段は、前記１フレーム分の画像データを前記外部インターフェース手段に伝送すると同時に、前記表示手段に伝送するものも含まれる。

上記構成により、携帯電話装置の表示手段で画像データを確認しながら、外部機器に転送することが可能となる。

また、本発明の一態様として、上記の携帯電話装置であって、前記伝送手段が前記メモリに記憶された１フレーム分の画像データを前記外部インターフェース手段及び前記表示手段に伝送している間、前記メモリは次のフレームの画像データを記憶するものも含まれる。

上記構成により、１秒間に所定フレーム枚数の画像データを動画像として転送することが可能となる。

また、本発明の一態様として、上記の携帯電話装置であって、前記メモリは、前記表示手段とともに第１のバスに接続された第１メモリと、前記外部インターフェース手段とともに第２のバスに接続された第２メモリとを有し、前記伝送手段は、前記第１メモリにフレーム単位に記憶される画像データを、ＤＭＡ転送により前記第１及び第２のバスを介して前記第２メモリに記憶し、この第２メモリに記憶された画像データを、ＤＭＡ転送により前記第２バスを介して前記外部インターフェース手段に伝送するものも含まれる。

上記構成により、第１のバスを第２のバスに比べて高速伝送可能なものとし、動画像の画像データを高速に外部機器に転送することが可能となる。

また、本発明の一態様として、上記の携帯電話装置であって、音声を入力するマイク及び音声を出力するスピーカを備え、前記外部インターフェース手段は、前記画像データを前記情報処理装置に転送する他、前記情報処理装置との間で音声データを転送するものも含まれる。

上記構成により、画像データとともに音声データを高速に外部に伝送することができ、ほぼリアルタイムに画像データ及び音声データを外部機器に転送することが可能となる。このため、外部機器である情報処理装置と、通信回線を介して接続された他の情報処理装置との間で画像データ及び音声データを転送することができ、携帯電話装置を用いた簡易な構成でＴＶ電話機能を実現することができる。

また、本発明の一態様として、上記の携帯電話装置であって、前記撮像手段は、少なくとも２つの撮像素子と、前記少なくとも２つの撮像素子のいずれか１つを有効に切り替える切替手段とを備えるものも含まれる。

上記構成により、撮像素子を切り替えることで、所望の撮像素子で撮影された画像データを外部機器に転送することが可能となる。

また、本発明の一態様として、上記の携帯電話装置であって、前記外部インターフェース手段は、ＵＳＢインターフェースからなるものも含まれる。また、外部インターフェース手段としては、ＩＥＥＥ１３９４の高速インターフェース（最大伝送速度４００Ｍｂｐｓ）、無線ＬＡＮ（伝送速度約１１Ｍｂｐｓ）あるいは次世代の超高速近距離無線通信方式であるＵＷＢ（Ultra Wideband、伝送速度数十〜数百Ｍｂｐｓ）等の高速無線インターフェース等を用いることも可能である。上記構成により、高速な画像データの転送が可能となる。

本発明のデータ伝送方法は、携帯電話装置に設けられた外部インターフェース手段を介して情報処理装置に転送されるデータのデータ伝送方法であって、前記携帯電話装置に搭載された撮像手段で撮影された画像データをフレーム単位にメモリに記憶するステップと、前記メモリに１フレーム分の画像データが記憶された後、前記メモリに記憶された１フレーム分の画像データを読み出して前記外部インターフェース手段に伝送するステップと、前記外部インターフェース手段によって前記伝送された１フレーム分の画像データを前記情報処理装置に転送するステップとを有するものである。

上記手順により、携帯電話装置に搭載された撮像手段を使用して撮影された画像データを高速に外部に伝送することができ、ほぼリアルタイムに画像データを外部機器に転送することが可能となる。

本発明のデータ伝送システムは、通信回線を介して接続された複数の情報処理装置の間で画像データ及び音声データを送受信するデータ伝送システムであって、前記複数の情報処理装置の少なくとも１つに接続された携帯電話装置を備え、前記携帯電話装置は、被写体を撮影して画像データを取得する撮像手段と、前記情報処理装置との間でデータ転送を行う外部インターフェース手段と、前記撮像手段で撮影された画像データをフレーム単位に記憶するメモリと、前記メモリに１フレーム分の画像データが記憶された後、前記メモリに記憶された１フレーム分の画像データを前記外部インターフェース手段に伝送する伝送手段とを備えるものである。

上記構成により、携帯電話装置に搭載された撮像手段を使用して撮影された画像データ及び音声データを高速に外部に伝送することができ、ほぼリアルタイムに画像データ及び音声データを外部機器に転送することが可能となる。このため、携帯電話装置を用いた簡易な構成でＴＶ電話機能を実現することができる。

また、本発明の一態様として、上記のデータ伝送システムであって、前記携帯電話装置は、第１マイク及び第１スピーカを有するとともに、第２マイク及び第２スピーカを有するヘッドセットを接続可能であり、前記携帯電話装置に接続される情報処理装置は、第３マイク及び第３スピーカを有し、前記携帯電話装置は、音声入力手段として機能する前記第１マイク、前記第２マイク及び前記第３マイクのいずれかと、音声出力手段として機能する前記第１スピーカ、前記第２スピーカ及び前記第３スピーカのいずれかとを、所定の組合せに従って選択する組合せ選択手段を備え、前記選択された組合せの音声入力手段によって入力された音声データ、及び前記選択された組合せの音声出力手段によって出力される音声データを前記通信回線を介して送受信するものも含まれる。

上記構成により、使用形態や使用者の好みなどに応じて所望のマイク及びスピーカを選択して画像データ及び音声データの送受信を行い、ＴＶ電話機能を利用することができ、使い勝手を向上できる。

本発明によれば、携帯電話装置に搭載された撮像手段を使用して撮影された画像データを高速に外部に伝送することが可能な携帯電話装置、データ伝送方法及びデータ伝送システムを提供できる効果がある。

本実施形態では、携帯電話装置の一例として、ＴＶ電話システムに適用されるカメラ付き携帯電話装置の構成例を示す。図１は本発明の実施形態の携帯電話装置を用いたＴＶ電話システムの構成を示す図である。

本実施形態に係るＴＶ電話システムは、複数のパーソナルコンピュータ（ＰＣ）２００、３００、４００がネットワークを含む通信回線の一例としてのインターネット５００を介して接続された構成を有する。各ＰＣ２００、３００、４００には、携帯電話装置１００、１５０、１８０がそれぞれ接続されている。また、各ＰＣ２００、３００、４００には、ＴＶ電話機能を実現するアプリケーションソフトウェア（ＴＶ電話アプリケーション）が搭載されており、ＰＣの電源を起動した後、ユーザが指示することにより、ＴＶ電話アプリケーションが起動し、各ＰＣはインターネット５００に接続される。ＴＶ電話アプリケーションとして、例えば、マイクロソフト社のNetmeeting（商標）やヤフージャパン社のメッセンジャー等が挙げられる。

ここで、ＰＣ２００は、ノート型ＰＣである点を除き、ＰＣ３００、４００とほぼ同様の構成を有するものとし、ＰＣ２００についてだけ説明することにする。また、携帯電話装置１００、１５０、１８０はいずれも同様の構成を有するものとし、ここでは、携帯電話装置１００についてだけ説明することにする。

図２は携帯電話装置１００の外観を示す正面図である。この携帯電話装置１００は折畳み式のものであり、図２には、開いた状態の携帯電話装置１００が示されている。携帯電話装置１００の上側本体の内側には、表示手段の一例に相当する液晶表示部５が設けられており、その上方にはスピーカ１０が配置されている。また、液晶表示部５の左下方には、撮像素子を備えたカメラ１４ａが配置されており、携帯電話装置１００の使用者を撮影する方向（手前側）にセットされている。一方、上側本体の外側には、カメラ１４ａと略背中合わせに、撮像素子を備えたカメラ１４ｂが配置されており、景色等の被写体を撮影する方向（向かい側）にセットされている。

一方、携帯電話装置１００の下側本体の内側には、キー操作部７が設けられている。キー操作部７の下方には、マイク９が設けられている。また、下側本体の側面には、ヘッドセットコネクタ１２が設けられており、さらに、下側本体の下面には、ＵＳＢポート２２が設けられている。

図３は携帯電話装置１００内部の電気的構成を示す図である。この携帯電話装置１００は、ＣＰＵ６、無線制御部２、メインメモリ部４、ＤＭＡコントローラ２３、キー操作部７、外部インターフェース手段の一例に相当する外部インターフェース（Ｉ／Ｆ）部２０、及びオーディオ制御部８がデータバス３に接続された構成を有する。無線制御部２はアンテナ１を通じて無線信号を送受信する。データバス３はデータ等を転送する。メインメモリ部４は、制御プログラム、電話帳、撮影した画像データ等を記憶するものであり、画像専用に使用されるＶＲＡＭ（Video RAM ）４ａを有する。

ＤＭＡコントローラ２３は、ＤＭＡ（Direct Memory Access）転送を管理するものであり、データバス３に接続される他、液晶・カメラ専用バス２４にも接続される。この液晶・カメラ専用バス２４には、液晶表示部５及び撮像部１３が接続されている。第１のバスの一例に相当する液晶・カメラ専用バス２４は第２のバスの一例に相当するデータバス３に比べて高速伝送可能なものにすることができる。なお、ＤＭＡコントローラ２３、液晶・カメラ専用バス２４及びデータバス３によって伝送手段の機能が実現される。

撮像部１３は、撮像手段の一例に相当するもので、画像を取り込む撮像素子１４ａ、１４ｂ、これら１対の撮像素子１４ａ、１４ｂからの画像信号を切り換える切替手段の一例に相当する画像切換部１５、画像信号をデジタルデータ（画像データ）に変換するＡ／Ｄ変換部１６、ＲＧＢ、ＹＵＶ、ＪＰＥＧ形式等への画像変換や圧縮、伸長等の信号処理を行う画像信号処理部１７、１フレーム分の画像データを一時的に記憶するバッファメモリ１８、及び液晶・カメラ専用バス２４との接続を行う画像インターフェース（Ｉ／Ｆ）部１９を有して構成される。なお、本実施形態では、撮像部１３には、２つの撮像素子１４ａ、１４ｂが設けられているが、１つでも３つ以上でもよいことは勿論である。

外部Ｉ／Ｆ部２０は、ＵＳＢ（Universal Serial Bus）コントローラ２１及びＵＳＢポート２２から構成されており、最大４８０Ｍｂｐｓのハイスピードモードでデータ伝送可能である。なお、外部Ｉ／Ｆ部としては、ＵＳＢに限らず、ＩＥＥＥ１３９４の高速インターフェース（最大伝送速度４００Ｍｂｐｓ）、無線ＬＡＮ（伝送速度約１１Ｍｂｐｓ）あるいは次世代の超高速近距離無線通信方式であるＵＷＢ（Ultra Wideband、伝送速度数十〜数百Ｍｂｐｓ）等の高速無線インターフェース等を用いることもでき、特に限定されない。

オーディオ制御部８には、マイク９、スピーカ１０、レシーバ１１及びヘッドセットコネクタ１２が接続されている。ヘッドセットコネクタ１２には、ヘッドセット１０１が装着自在に接続される。ヘッドセット１０１は、マイク１０２及びヘッドホン１０３を有する。

一方、ＵＳＢポート２２には、ＵＳＢケーブルを介して、ノート型ＰＣ２００が装着自在に接続される。このＰＣ２００は、汎用のＰＣであり、周知のＣＰＵ、ＲＯＭ、ＲＡＭ等を有する制御部２０６の他、ＵＳＢ接続用のＵＳＢポート２０１、画像を表示するモニタ（液晶表示部）２０４、音声信号を入力するマイク２０２、音声信号を出力するスピーカ２０３、インターネット５００との接続を行うネットワークインターフェース（Ｉ／Ｆ）部２０５等を有する。

次に、上記構成を有する携帯電話装置をＰＣ２００に接続し、ＴＶ電話機能を実現する場合の携帯電話装置の動作を示す。図４は携帯電話装置の動作処理手順を示すフローチャートである。この処理プログラムは、携帯電話装置１００内のメインメモリ部４に格納されており、ＣＰＵ６によって電源ＯＮ時に起動されて実行される。

まず、液晶表示部５にメニュー画面を表示し、キー操作部７からのメニューモードの選択を待つ（ステップＳ１）。図５は液晶表示部５に表示するメニュー画面を示す図である。本実施形態のメニュー画面では、無線通話を行う「通話モード」、メールの送受信を行う「メールモード」、インターネット上のホームページの閲覧等を行う「ブラウザモード」、及びカメラで撮影を行う「カメラモード」の４つのモードが選択可能である。また、これら４つのモードには、サブメニューが設けられているが、カメラモード以外、本実施形態と直接関係しないので、その他のサブメニューについての説明は省略する。

そして、メニューモードの選択が行われると、カメラモードが選択されたか否かを判別する（ステップＳ２）。カメラモードが選択されると、カメラの切換が指示されているか否かを判別する（ステップＳ３）。カメラの切換が指示されている場合、選択されたカメラに切り換える（ステップＳ４）。図６は液晶表示部５に表示するカメラ選択画面を示す図である。このカメラ選択画面上では、カメラＡ（撮像素子１４ａ）あるいはカメラＢ（撮像素子１４ｂ）のいずれかに選択可能である。カメラＡが選択された場合、手前側、つまり使用者自身を撮影することが可能であり、カメラＢが選択された場合、向かい側、つまり風景などを撮影することが可能である。なお、３つの以上のカメラが携帯電話装置に搭載されている場合、３つ以上の中から選択可能であることは言うまでもない。一方、ステップＳ３でカメラの切換が指示されていなかった場合、そのままステップＳ５の処理に進む。

ステップＳ５では、サブメニューの選択が指示されたか否かを判別する（ステップＳ５）。サブメニューの選択が指示されなかった場合、通常のカメラモードで撮影、表示処理を行う。通常のカメラモードの撮影、表示処理では、使用者がキー操作部７に配置されたキーを押下することにより、この操作を受けてカメラ（撮像素子１４ａあるいは撮像素子１４ｂ）で被写体を撮像し、この撮像により得られた画像信号を処理し、液晶表示部５に画像を表示する（ステップＳ６）。

具体的に、画像信号処理では、撮像素子１４ａあるいは撮像素子１４ｂからの画像信号は、Ａ／Ｄ変換部１６によりデジタルデータ（画像データ）に変換され、さらに、画像信号処理部１７によりＲＧＢ、ＹＵＶ、ＪＰＥＧ形式などへの画像変換、圧縮、伸長などの信号処理が行われる。

そして、撮影された１フレーム（１画面）分の画像データはバッファメモリ１８に一時的に記憶される。バッファメモリ１８に記憶された画像データは、画像Ｉ／Ｆ部１９及び液晶・カメラ専用バス２４を通じて、ＤＭＡコントローラ２３により読み出され、データバス３を介してメインメモリ部４内のＶＲＡＭ４ａに順次、ＤＭＡ転送される。

さらに、ＤＭＡコントローラ２３により、ＶＲＡＭ４ａに格納された画像データを、データバス３及び液晶・カメラ専用バス２４を通じて、液晶表示部５に書き込むことで、液晶表示部５に１フレーム分の画像が表示される。

この１フレーム分の画像を表示している時、撮影された次のフレームの画像データをバッファメモリ１８に取り込んで記憶する。そして、同様に、バッファメモリ１８からＶＲＡＭ４ａにＤＭＡ転送した後、ＶＲＡＭ４ａから液晶表示部５にＤＭＡ転送を行うことにより、次の１フレーム分の画像が液晶表示部５に表示される。このような動作を繰り返し連続して行うことにより、液晶表示部５には、１秒間に所定フレーム枚数の静止画像からなる動画像がプレビュー画像として表示される。

プレビュー画像を見た使用者によって画像データを記録することが指示されたか否かを判別する（ステップＳ７）。画像を記録（保存）することが指示された場合、画像データを静止画データとしてメインメモリ部４に記録（保存）する処理を行う（ステップＳ８）。この後、カメラモードを終了させるか否かを判別する（ステップＳ９）。使用者によってカメラモードの終了が指示された場合、ステップＳ１のメイン画面の表示処理に戻る。一方、カメラモードを終了させない場合、ステップＳ３の処理に戻る。

また一方、ステップＳ２でカメラモードが選択されなかった場合、その他のモード処理を行い（ステップＳ１０）、ステップＳ１の処理に戻る。また、ステップＳ５でサブメニューの選択が指示された場合、カメラモードのサブメニュー処理を行い（ステップＳ１１）、ステップＳ３の処理に戻る。このカメラモードのサブメニュー処理について詳述する。

図７はステップＳ１１におけるカメラモードサブメニュー処理手順を示すフローチャートである。まず、カメラモードサブメニュー画面を表示し、使用者がキー操作部７を操作することによってサブメニューが選択されるのを待つ（ステップＳ２１）。図８はカメラモードサブメニュー画面を示す図である。本実施形態のサブメニュー画面では、撮影画像のサイズを選択する「サイズ選択」、保存する画像の画質を選択する「保存画質選択」、ＰＣに画像データを伝送する「ＰＣカメラモード」等が選択可能である。ここで、携帯電話装置のカメラをＰＣ用のウェブカメラ（ＰＣカメラ）として使用する場合、ＰＣカメラモードを選択する必要がある。また、携帯電話装置１００をＰＣ２００に接続し、インターネット５００を介してＴＶ電話のように通信を行う場合、携帯電話装置１００のカメラで撮影した動画像データだけでなく、音声データを外部Ｉ／Ｆ部２０を介してＰＣ２００に伝送できるようにする必要がある。

そして、サブメニュー画面でＰＣカメラモードが選択されたか否かを判別する（ステップＳ２２）。ＰＣカメラモードが選択された場合、ＰＣカメラモードが選択された場合、ＰＣカメラモード設定画面を表示する（ステップＳ２３）。図９はＰＣカメラモード設定画面を示す図である。このＰＣカメラモード設定画面では、改めてカメラの切換を行う「カメラ切換」、音声の伝送経路を設定する「音声設定」等の設定、変更が可能である。

次いで、使用者がキー操作部７を操作することにより、音声設定が選択されたか否かを判別する（ステップＳ２４）。音声設定が選択された場合、音声設定画面を表示する（ステップＳ２５）。図１０は音声設定画面を示す図である。本実施形態の音声設定画面では、携帯電話装置１００の本体内蔵のマイク９及びスピーカ１０を使用する設定項目である「本体内蔵マイクとスピーカを使用」、携帯電話装置用の外付けヘッドセット（マイク付きヘッドホン）を使用する設定項目である「本体接続用ヘッドセットを使用」、及びＰＣ２００側のマイク２０２及びスピーカ２０３を使用する設定項目である「外部機器側のマイクとスピーカを使用」の３つが表示され、任意の項目に設定可能である。

そして、「外部機器側のマイクとスピーカを使用」の設定項目が選択されたか否かを判別する（ステップＳ２６）。なお、上記ステップＳ２５及びＳ２６の処理により組合せ選択手段の機能が実現される。「外部機器側のマイクとスピーカを使用」の設定項目が選択されず、「本体接続用ヘッドセットを使用」あるいは「本体内蔵マイクとスピーカを使用」の設定項目が選択された場合、ＰＣカメラモードの撮影、表示、画像及び音声データの転送処理を行う（ステップＳ２７）。

ＰＣカメラモードの撮影、表示、画像及び音声データ転送処理では、使用者がキー操作部７に配置されたキーを押下することにより、この操作を受けてカメラ（撮像素子１４ａあるいは撮像素子１４ｂ）で被写体を撮像し、この撮像により得られた画像信号を処理し、液晶表示部５に画像データを表示すると共に、外部Ｉ／Ｆ部２０に画像データを伝送する。

具体的に、画像信号処理では、撮像素子１４ａあるいは撮像素子１４ｂからの画像信号は、Ａ／Ｄ変換部１６によりデジタルデータ（画像データ）に変換され、さらに、画像信号処理部１７によりＲＧＢ、ＹＵＶ、ＪＰＥＧ形式などへの画像変換、圧縮、伸長などの信号処理が行われる。

そして、撮影された１フレーム（１画面）分の画像データはバッファメモリ１８に一時的に記憶される。バッファメモリ１８に記憶された画像データは、画像Ｉ／Ｆ部１９及び液晶・カメラ専用バス２４を通じて、ＤＭＡコントローラ２３により読み出され、データバス３を介してメインメモリ部４内のＶＲＡＭ４ａに順次、ＤＭＡ転送される。

さらに、ＤＭＡコントローラ２３により、ＶＲＡＭ４ａに格納された画像データを、データバス３及び液晶・カメラ専用バス２４を通じて、液晶表示部５に書き込むことで、液晶表示部５に１フレーム分の画像が表示される。

この１フレーム分の画像を表示している時、撮影された次のフレームの画像データをバッファメモリ１８に取り込んで記憶する。そして、同様に、バッファメモリ１８からＶＲＡＭ４ａにＤＭＡ転送した後、ＶＲＡＭ４ａから液晶表示部５にＤＭＡ転送を行うことにより、次の１フレーム分の画像が液晶表示部５に表示される。このような動作を繰り返し連続して行うことにより、液晶表示部５には、１秒間に数フレームの動画像がプレビュー画像として表示される。

また、ＤＭＡコントローラ２３により、ＶＲＡＭ４ａから外部Ｉ／Ｆ部２０に１フレーム分の画像データをＤＭＡ転送し、外部Ｉ／Ｆ部２０内のＵＳＢコントローラ２１により、ＵＳＢポート２２を通じて外部機器であるＰＣ２００に１フレーム分の画像データを転送する。次の１フレーム分の画像データの転送も繰り返し連続して行うことにより、１秒間に複数枚（例えば、１５枚）の画像データからなる動画像が外部機器であるＰＣ２００に転送される。

そして、ＰＣ２００は、ＴＶ電話のアプリケーションに従って、インターネット５００を介して接続された通信相手のＰＣに、フレーム単位の画像データ、すなわち１秒間に複数枚の画像データからなる動画像を送信する。また、通信相手のＰＣから受信した画像データをＰＣ２００のモニタ２０４で再生する。

一方、携帯電話装置側の音声系回路を使用する、ＰＣカメラモードの音声データ転送（送信）処理では、ステップＳ２６で「本体接続用ヘッドセットを使用」の設定項目が選択された場合、オーディオ制御部８により、ヘッドセットコネクタ１２とヘッドセット１０１との間の音声パスが有効となる。音声は、ヘッドセット１０１に入力されると、ヘッドセットコネクタ１２を通じて、オーディオ制御部８によりデジタルデータ（音声データ）に変換され、データバス３を介して外部Ｉ／Ｆ部２０に送られる。また、ステップＳ２６で「本体内蔵マイクとスピーカを使用」の設定項目が選択された場合、オーディオ制御部８により、マイク９及びスピーカ１０の音声パスが有効となる。音声は、マイク９に入力されると、オーディオ制御部８によりデジタルデータ（音声データ）に変換され、データバス３を介して外部Ｉ／Ｆ部２０に送られる。いずれの場合も、外部Ｉ／Ｆ部２０内のＵＳＢコントローラ２１により、音声データはＵＳＢポート２２を通じて外部機器であるＰＣ２００に転送される。

また、受信した音声データは、ＰＣ２００のネットワークＩ／Ｆ部２０５からＵＳＢポート２０１を通じて、携帯電話装置１００のＵＳＢポート２２に入力される。入力した音声データは、ＵＳＢコントローラ２１により、データバス３を介してオーディオ制御部８に送られると、アナログの音声信号に変換され、スピーカ１０あるいはヘッドセット１０１のヘッドホン１０３に出力され、通信相手の音声が再生される。

そして、所定時間が経過した後、あるいは所定フレーム数の画像データの転送が行われた後、ＰＣカメラモードを終了するか否かを判別し（ステップＳ２８）、ＰＣカメラモードを終了しない場合、ステップＳ２７の処理を繰り返し、一方、ＰＣカメラモードを終了する場合、元の処理に復帰する。

このようにして、携帯電話装置１００とＰＣ２００との間で、画像データ（動画像）及び音声データを転送することができる。また、単に画像データ及び音声データを転送するだけでなく、携帯電話装置１００の液晶表示部５に画像データを表示させることにより、カメラ付き携帯電話装置の利用者は、一般のＰＣカメラと異なり、通信相手に伝送する画像データを確認しながら、携帯電話装置１００のマイク９及びスピーカ１０、あるいはヘッドセット１０１を使用して、インターネット通信におけるＴＶ電話を実現できる。

一方、ステップＳ２６で「外部機器側のマイクとスピーカを使用」の設定項目が選択された場合、ＰＣカメラモードの撮影、表示、画像データの転送処理を行う（ステップＳ２９）。ＰＣカメラモードの撮影、表示、画像データ転送処理は、音声データ転送処理を除き、ステップＳ２７と同様の処理である。すなわち、使用者がキー操作部７に配置されたキーを押下することにより、この操作を受けてカメラ（撮像素子１４ａあるいは撮像素子１４ｂ）で被写体を撮像し、この撮像により得られた画像信号を処理し、液晶表示部５に画像データを表示すると共に、外部Ｉ／Ｆ部２０に画像データを伝送する、前述した処理が行われる。また、通信相手のＰＣから受信した画像データも、前述と同様にＰＣ２００側のモニタ２０４で再生される。

また、この場合、ＰＣ２００等の外部機器側の音声系回路を使用するので、携帯電話装置１００内のＣＰＵ６は、オーディオ制御部８により、携帯電話装置１００のマイク９及びスピーカ１０を使用しないように設定するとともに、ヘッドセットコネクタ１２とヘッドセット１０１との音声パスをオフ状態にして使用しないように設定する。そして、ＰＣ側のマイク２０２及びスピーカ２０３を用いることにより、インターネット５００を介して、通信相手のＰＣと音声データの送受信を行うことができる。

そして、所定時間が経過した後、あるいは所定フレーム数の画像データの転送が行われた後、ＰＣカメラモードを終了するか否かを判別し（ステップＳ３０）、ＰＣカメラモードを終了しない場合、ステップＳ２９の処理を繰り返し、一方、ＰＣカメラモードを終了する場合、元の処理に復帰する。

このように、ＰＣ２００側のマイク２０２及びスピーカ２０３による音声入出力機能と、携帯電話装置１００のＰＣカメラ機能とを組み合わせることで、携帯電話装置１００側の音声入出力機能を用いる場合と同様、カメラ付き携帯電話装置の利用者は、一般のＰＣ用カメラと異なり、通信相手に伝送する画像データを液晶表示部５で確認しながら、インターネット通信におけるＴＶ電話を実現できる。

また、ステップＳ２２でＰＣカメラモードが選択されなかった場合、あるいはステップＳ２４で音声設定が選択されなかった場合、それぞれの選択に応じた処理を行い（ステップＳ３１）、元の処理に復帰する。

図１１はＰＣ側のデータ伝送処理手順を示すフローチャートである。この処理プログラムは、ＰＣ２００内の記憶媒体（図示せず）に格納されており、制御部２０６内のＣＰＵ（図示せず）によって電源ＯＮ時に起動して実行される。

まず、ＰＣ側のＵＳＢポート２０１と携帯電話装置側のＵＳＢポートの通信を確立し、携帯電話装置１００で設定された音声設定情報（ステップＳ２５、Ｓ２６参照）を取得できたか否かを判別する（ステップＳ５１）。音声設定情報を取得できなかった場合、本処理を終了する。

音声設定情報を取得できた場合、制御部２０６内の送信データバッファ（図示せず）に、送信データ（画像データ、音声データ等）が存在するか否かを判別する（ステップＳ５２）。送信データが存在する場合、ネットワークＩ／Ｆ部２０５及びインターネット５００を通じて通信相手のＰＣにデータを送信する（ステップＳ５３）。なお、ここでは、通信相手のＰＣは別の処理で特定されているが、通信相手のＰＣを特定する処理をこの処理プログラムの中に含めてもよいことは勿論である。また、送信されるデータとしては、ＵＳＢポート２２を介して携帯電話装置１００から転送された画像データや音声データの他、ＰＣ２００のマイク２０２から入力され、変換された音声データ等も含まれる。この後、ステップＳ５２の処理に戻る。

一方、ステップＳ５２で送信データバッファに送信データが存在しない場合、制御部２０６内の受信データバッファ（図示せず）に、インターネット５００及びネットワークＩ／Ｆ部５００を介して受信したデータが存在するか否かを判別する（ステップＳ５４）。受信データが存在しない場合、ステップＳ５２の処理に戻り、一方、受信データが存在する場合、受信したデータが画像データであるか音声データであるかを判別する（ステップＳ５５）。画像データである場合、モニタ２０４に受信した画像データを表示し（ステップＳ５６）、ステップＳ５２の処理に戻る。

一方、ステップＳ５５で受信した画像データが音声データである場合、ステップＳ５１で取得した音声設定情報を基に、携帯電話装置１００のマイク９及びスピーカ１０の組合せ、携帯電話装置１００のヘッドセット１０１内のマイク１０２及びヘッドホン１０３の組合せ、またはＰＣのマイク２０２及びスピーカ２０３の組合せのいずれかを選択する（ステップＳ５７）。そして、携帯電話装置１００のマイク９及びスピーカ１０の組合せである場合、スピーカ１０で音声を再生する（ステップＳ５８）。また、携帯電話装置１００のヘッドセット１０１内のマイク１０２及びヘッドホン１０３の組合せである場合、ヘッドホン１０３で音声を再生する（ステップＳ５９）。また、ＰＣのマイク２０２及びスピーカ２０３の組合せである場合、スピーカ２０３で音声を再生する（ステップＳ６０）。ステップＳ５８、Ｓ５９、Ｓ６０の処理後、ステップＳ５２の処理に戻る。

本実施形態によれば、携帯電話装置に搭載された撮像素子を使用して撮影された画像データを高速に外部に伝送できる。したがって、別途ＰＣ用カメラを用いることなく、カメラが搭載された携帯電話装置をＰＣに接続して簡単にＴＶ電話機能を実現することが可能である。すなわち、ＰＣ用カメラの代わりに、携帯電話装置に搭載されたカメラを使っても、ほぼリアルタイムで画像データをＰＣ側に転送することができ、インターネットを介して接続された他のＰＣとの間で、簡単にＴＶ電話機能を実現することができる。また、携帯電話装置に搭載されたマイク及びスピーカを用いて、ＰＣ側と音声データの送受信を行うことで、より使い勝手の良いＴＶ電話機能を実現することができる。

なお、本発明は、上述した実施形態の構成に限られるものではなく、特許請求の範囲において示した機能、または実施形態の構成が持つ機能が達成できる構成であればどのようなものであっても適用可能である。

例えば、音声の入出力に使用する機器の組み合わせとして、携帯電話装置のマイクとＰＣのスピーカの組み合わせであってもよい。また、ＴＶ電話機能として、ユーザが１対１で画像及び音声をやり取りする、本来のＴＶ電話の他、複数のユーザと同時に画像及び音声のやり取りを行うＴＶ会議システムに適用してもよいことは勿論である。

本発明は、携帯電話装置に搭載された撮像手段を使用して撮影された画像データを高速に外部に伝送することが可能となる効果を有し、撮像手段を備えた携帯電話装置、データ伝送方法及びデータ伝送システム等に有用である。

本発明の実施形態の携帯電話装置を用いたＴＶ電話システムの構成を示す図 本実施形態における携帯電話装置の外観構成を示す正面図 本実施形態における携帯電話装置内部の電気的構成を示す図 本実施形態における携帯電話装置の動作処理手順を示すフローチャート 本実施形態の携帯電話装置におけるメニュー画面を示す図 本実施形態の携帯電話装置におけるカメラ選択画面を示す図 本実施形態の携帯電話装置におけるカメラモードサブメニュー処理手順を示すフローチャート 本実施形態の携帯電話装置におけるカメラモードサブメニュー画面を示す図 本実施形態の携帯電話装置におけるＰＣカメラモード設定画面を示す図 本実施形態の携帯電話装置における音声設定画面を示す図 本実施形態のＴＶ電話システムにおけるＰＣ側のデータ伝送処理手順を示すフローチャート

符号の説明

３ データバス
４ メインメモリ部
４ａ ＶＲＡＭ
５ 液晶表示部
６ ＣＰＵ
７ キー操作部
８ オーディオ制御部
９ マイク
１０ スピーカ
１３ 撮像部
１４ａ、１４ｂ 撮像素子
１８ バッファメモリ
２０ 外部Ｉ／Ｆ部
２１ ＵＳＢコントローラ
２３ ＤＭＡコントローラ
２４ 液晶・カメラ専用バス
１００ 携帯電話装置
１０１ ヘッドセット
２００ パーソナルコンピュータ（ＰＣ）
２０６ 制御部
５００ インターネット

Claims (10)

1. 被写体を撮影して画像データを取得する撮像手段を備えた携帯電話装置であって、
   情報処理装置に接続され、この情報処理装置との間でデータ転送を行う外部インターフェース手段と、
   前記撮像手段で撮影された画像データをフレーム単位に記憶するメモリと、
   前記メモリに１フレーム分の画像データが記憶された後、前記メモリに記憶された１フレーム分の画像データを前記外部インターフェース手段に伝送する伝送手段と
   を備える携帯電話装置。
2. 請求項１に記載の携帯電話装置であって、
   前記画像データを表示する表示手段を備え、
   前記伝送手段は、前記１フレーム分の画像データを前記外部インターフェース手段に伝送すると同時に、前記表示手段に伝送する携帯電話装置。
3. 請求項２に記載の携帯電話装置であって、
   前記伝送手段が前記メモリに記憶された１フレーム分の画像データを前記外部インターフェース手段及び前記表示手段に伝送している間、前記メモリは次のフレームの画像データを記憶する携帯電話装置。
4. 請求項３に記載の携帯電話装置であって、
   前記メモリは、前記表示手段とともに第１のバスに接続された第１メモリと、前記外部インターフェース手段とともに第２のバスに接続された第２メモリとを有し、
   前記伝送手段は、前記第１メモリにフレーム単位に記憶される画像データを、ＤＭＡ転送により前記第１及び第２のバスを介して前記第２メモリに記憶し、この第２メモリに記憶された画像データを、ＤＭＡ転送により前記第２バスを介して前記外部インターフェース手段に伝送する携帯電話装置。
5. 請求項１に記載の携帯電話装置であって、
   音声を入力するマイク及び音声を出力するスピーカを備え、
   前記外部インターフェース手段は、前記画像データを前記情報処理装置に転送する他、前記情報処理装置との間で音声データを転送する携帯電話装置。
6. 請求項１に記載の携帯電話装置であって、
   前記撮像手段は、少なくとも２つの撮像素子と、前記少なくとも２つの撮像素子のいずれか１つを有効に切り替える切替手段とを備える携帯電話装置。
7. 請求項１に記載の携帯電話装置であって、
   前記外部インターフェース手段は、ＵＳＢインターフェースからなる携帯電話装置。
8. 携帯電話装置に設けられた外部インターフェース手段を介して情報処理装置に転送されるデータのデータ伝送方法であって、
   前記携帯電話装置に搭載された撮像手段で撮影された画像データをフレーム単位にメモリに記憶するステップと、
   前記メモリに１フレーム分の画像データが記憶された後、前記メモリに記憶された１フレーム分の画像データを読み出して前記外部インターフェース手段に伝送するステップと、
   前記外部インターフェース手段によって前記伝送された１フレーム分の画像データを前記情報処理装置に転送するステップと
   を有するデータ伝送方法。
9. 通信回線を介して接続された複数の情報処理装置の間で画像データ及び音声データを送受信するデータ伝送システムであって、
   前記複数の情報処理装置の少なくとも１つに接続された携帯電話装置を備え、
   前記携帯電話装置は、
   被写体を撮影して画像データを取得する撮像手段と、
   前記情報処理装置との間でデータ転送を行う外部インターフェース手段と、
   前記撮像手段で撮影された画像データをフレーム単位に記憶するメモリと、
   前記メモリに１フレーム分の画像データが記憶された後、前記メモリに記憶された１フレーム分の画像データを前記外部インターフェース手段に伝送する伝送手段と
   を備えるデータ伝送システム。
10. 請求項９に記載のデータ伝送システムであって、
    前記携帯電話装置は、第１マイク及び第１スピーカを有するとともに、第２マイク及び第２スピーカを有するヘッドセットを接続可能であり、
    前記携帯電話装置に接続される情報処理装置は、第３マイク及び第３スピーカを有し、
    前記携帯電話装置は、音声入力手段として機能する前記第１マイク、前記第２マイク及び前記第３マイクのいずれかと、音声出力手段として機能する前記第１スピーカ、前記第２スピーカ及び前記第３スピーカのいずれかとを、所定の組合せに従って選択する組合せ選択手段を備え、
    前記選択された組合せの音声入力手段によって入力された音声データ、及び前記選択された組合せの音声出力手段によって出力される音声データを前記通信回線を介して送受信するデータ伝送システム。

Images