JP2007201727A

JP2007201727A - テレビ電話機能付き携帯電話機

Info

Publication number: JP2007201727A
Application number: JP2006016809A
Authority: JP
Inventors: Taku Murakami; 卓村上
Original assignee: NEC Saitama Ltd
Current assignee: NEC Saitama Ltd
Priority date: 2006-01-25
Filing date: 2006-01-25
Publication date: 2007-08-09

Abstract

【課題】テレビ電話機能付き携帯電話機の正面側および背面側のカメラのどちらを使っても違和感なくテレビ電話を行えるようにする。
【解決手段】テレビ電話として使用する際に、筐体正面側のカメラ３、表示部１、及びマイク７と、筐体背面側のカメラ４、表示部２、およびマイク８を自動で切り換えるモードが設定されているとき、筐体正面側の動態センサ５が人体を感知しているときは、カメラ３、表示部１、及びマイク７を起動してテレビ電話通信を行い、筐体背面側の動態センサ６が人体を感知しているときは、カメラ４、表示部２、およびマイク８を起動してテレビ電話通信を行う。動態センサ５と動態センサ６が共に人体を感知しているときは、カメラ３、カメラ４、表示部１、表示部２、及びマイク７、マイク８を全て起動してテレビ電話通信を行う。
【選択図】図１

Description

本発明は、テレビ電話機能付き携帯電話機に関し、特に、電話機筐体の正面側と背面側にそれぞれカメラ及び表示部を備えたテレビ電話機能付き携帯電話機におけるカメラ及び表示部の切り換え技術に関する。

最近のテレビ電話機能付き携帯電話機は、電話機筐体の正面側と背面側にそれぞれカメラ及び表示部を備えているものが多く、利用者はテレビ電話中にキー操作にて、正面側のカメラと背面側のカメラを切り換えることができ、正面側のカメラは利用者自身の撮影用、背面側のカメラは風景等の撮影用に用途が分かれている。また、このような２つのカメラを搭載するテレビ電話機能付き携帯電話機では、これら２つのカメラを異なる性能とし、背面側に搭載されているカメラを高性能なカメラとしているものが多い。

通常、テレビ電話機能付き携帯電話機によるテレビ電話では、電話機筐体正面側のカメラと表示部が起動され、電話機筐体正面と対向する利用者を正面側のカメラで撮影するとともに、正面側の表示部に通信相手側の画像および利用者を表示する状態で使用される。そのため、テレビ電話中に背面側の高性能なカメラで利用者自身を撮影しながらテレビ電話をしようとしても、通常、背面側の表示部には通話の相手及び利用者自身が映らないので、背面側のカメラで利用者自身を撮影しながら通話を行うには不便であり、また、２つのカメラの切り換えを行うにはその都度切り換え操作をしなければならず、操作も面倒である。

例えば、特許文献１では、筐体の正面側と背面側にそれぞれカメラを備えたテレビ電話機能付き携帯電話機を用いてテレビ電話をしようとする際に、そのいずれか一方のカメラあるいは両方のカメラを、使用カメラとして適宜選択できるように構成し、テレビ電話中に、周りの風景を撮って相手に送りたくなれば、撮影ボタンを操作することにより背面側のカメラで風景を撮影すると同時に、その新たに撮影された画像を確認しながら相手に送信することを可能とし、また、ＴＶ会議システムとして使用して、背面側のカメラで会議場全体の画像を映している場合に、撮影ボタンを押して発言者が発話することにより正面側のカメラで発言者を撮影し、相手には発言者の画像がウインドウ表示されることにより誰が発言しているのかを容易に確認できるようにする技術が示されている。

特開２００３−２７４３７６号公報特開２００４−２５７７９７号公報

特許文献１に記載の発明によれば、筐体正面側のカメラで自分を撮影しながらテレビ電話をしている最中に、周りの風景を撮って相手に送りたくなれば、撮影ボタンを操作することにより背面側のカメラで風景を撮影すると同時に、その新たに撮影された画像を確認しながら相手に送信することができ、また、ＴＶ会議システムとして使用して、背面側のカメラで会議場全体の画像を映している場合に、撮影ボタンを押して発言者が発話することにより正面側のカメラで発言者を撮影し、相手に送ることはできるが、この発明では、テレビ電話中に撮影された画像は筐体表面側に設けられた表示画面で表示される構成となっているので、テレビ電話中に筐体背面側のカメラで利用者自身を撮影しながらテレビ電話を行うのは、極めて不便である。

特許文献１ではそのような使用形態については考慮されておらず、また、カメラの切り替えを行う際には手動で切り替え操作を行うことを前提としている。さらに、当該携帯電話機側にいる２人の話者が、正面側のカメラと背面側のカメラを同時に使用して、相手側との間で３者によるテレビ電話をするような使用形態については全く考慮されていない。

本発明の目的は、電話機筐体の正面側と背面側にそれぞれカメラ及び表示部を備えたテレビ電話機能付き携帯電話機でテレビ電話をする際に、正面側および背面側のどちらのカメラでも任意に使用してかつ違和感なくテレビ電話通話を行うことができる手段を提供することにある。

本発明の他の目的は、例えば２人の人間が、当該携帯電話機の正面側のカメラと背面側のカメラでそれぞれ自らを撮影しながら、相手側携帯電話機との間で３者によるテレビ電話をするような使用形態にも対応可能な手段を提供することにある。

本発明のテレビ電話機能付き携帯電話機は、電話機筐体の正面側に配置された、第１のカメラ、第１の表示部、第１のマイク、および該正面と対向する所定範囲内に位置している人間を検出したときに検出信号を出力する第１の動態センサと、前記電話機筐体の背面側に配置された、第２のカメラ、第２の表示部、第２のマイク、および該背面と対向する所定範囲内に位置している人間を検出したときに検出信号を出力する第２の動態センサと、テレビ電話通信中に、前記第１の動態センサから前記検出信号が出力されているときには前記第１のカメラおよび第１の表示部を起動して画像信号を処理し、前記第２の動態センサから前記検出信号が出力されているときには前記第２のカメラおよび第２の表示部を起動して画像信号を処理する画像処理手段と、前記第１及び第２のマイクで集音された音声信号を処理する音声処理手段を備えていることを特徴としている。

本発明のテレビ電話機能付き携帯電話機によれば、利用者の使用シーンに応じて、電話機筐体の正面側と背面側にそれぞれ配置されたカメラ及び表示部の使用を自動的に切り換えることができ、テレビ電話の利便性を改善することができる。

また、前記音声処理手段は、前記第１の動態センサから前記検出信号が出力されているときには前記第１のマイクで集音した音声信号を送話信号として出力し、前記第２の動態センサから前記検出信号が出力されているときには前記第２のマイクで集音した音声信号を送話信号として出力する機能を有する構成とすることができる。

また、前記画像処理手段は、テレビ電話通信中、前記第１の動態センサおよび前記第２の動態センサから前記検出信号が出力されているときには、前記第１のカメラ、第１の表示部、および前記第２のカメラ、第２の表示部の両方を起動し、前記第１の表示部には通信相手側から送信された画像と前記第１のカメラで撮影された画像を表示し、前記第２の表示部には前記通信相手側から送信された画像と前記第２のカメラで撮影された画像を表示する機能を有する構成とすることができる。

また、前記第１のカメラ、第１の表示部、および前記第２のカメラ、第２の表示部の両方が起動されているときには、前記画像処理手段は、前記第１のカメラと前記第２のカメラで撮影した画像信号を、通信相手側のテレビ電話機能付き携帯電話機の表示部に並べて表示するように合成して送信する機能を有する構成とすることができる。

また、前記第１のカメラ、第１の表示部、および前記第２のカメラ、第２の表示部の両方が起動されているときには、前記音声処理手段は、前記第１のマイクと前記第２のマイクで集音した音声を合成した信号を通信相手側への送話信号として出力する機能を有する構成とすることができる。

本発明のテレビ電話機能付き携帯電話機では、テレビ電話機能付き携帯電話機の正面側と背面側にそれぞれ備えられたカメラ、表示部、およびマイクを、テレビ電話機能付き携帯電話機を使用する利用者の位置によって、正面側のカメラ、表示部、およびマイク、または、背面側のカメラ、表示部、およびマイクに自動的に切り換わるので、利用者は、携帯電話機の正面側と背面側にそれぞれ備えられたカメラ、表示部、およびマイクのどちらを使用しても全く違和感なくテレビ電話をすることができるため、利用者の利便性を改善することができる。

また、第１及び第２の動態センサにより携帯電話機の正面側および背面側の両方に人間が検知されているときには、正面側のカメラ、表示部、およびマイクと、背面側のカメラ、表示部、およびマイクが同時に動作状態に制御されるので、例えば２人の人間が、当該携帯電話機を挟んで当該携帯電話機の正面側のカメラと背面側のカメラで自らを撮影しながら、相手側携帯電話機との間で３者によるテレビ電話を行うことができ、テレビ電話機能付き携帯電話機の使用形態を拡げることができる。

図１は、本発明の実施形態を示すテレビ電話機能付き携帯電話機のブロック図であり、図２は、本実施形態のテレビ電話機能付き携帯電話機の外観図である。

本発明のテレビ電話機能付き携帯電話機は、図２のテレビ電話機能付き携帯電話機の外観図に示されているように、正面側（図２（ａ））にはＬＣＤ等からなる第１の表示部１、第１のカメラ３、第１の動態センサ５、第１のマイク７、レシーバ１０、キーボードを有する操作部１５を備えている。背面側（図２（ｃ））にはＬＣＤ等からなる第２の表示部２、第２のカメラ４、第２の動態センサ６、第２のマイク８、スピーカ９を備えている。第１、第２の動態センサとしては、これら動態センサに面する所定の範囲内に位置している人体を検出可能な適宜のセンサ（例えば特許文献２に開示されているような赤外線センサ等）を用いることができる。

図１において、第１のカメラ３、第１の表示部１、第２のカメラ４、および第２の表示部２は、画像処理部１１に接続され、第１のマイク７、第２のマイク８、スピーカ９、およびレシーバ１０は、音声処理部１２に接続される。また、第１の動態センサ５と第２の動態センサ６は、動態センサ検出部１３に接続され、動態センサ検出部１３は、前記画像処理部１１と音声処理部１２に接続される。画像処理部１１、音声処理部１２、操作部１５、およびアンテナ１８と接続された送受信部１７は、制御部１６に接続される。

制御部１６は、操作部１５からの操作指示に基づき、記憶部１９に格納されている制御プログラムに従って、本発明のテレビ電話機能付き携帯電話機が有する各種機能を制御する。記憶部１９は、本発明のテレビ電話機能付き携帯電話機が有する各種機能を実現するための制御プログラムの記憶、音声あるいは画像データ等制御部１６による演算処理に用いられる各種データの一時記憶、電話番号等を登録するために、ＲＯＭ、ＲＡＭ、フラッシュメモリ等を含む構成となっている。

図３は、本実施形態の動作を示すフロー図であり、図４は、本実施形態のテレビ電話機能付き携帯電話機３０の、第１のカメラ３、第２のカメラ４、第１の表示部１、第２の表示部２、第１のマイク７、第２のマイク８と使用者４０、使用者４１の位置関係を示す図である。また、図５〜図７は、本実施形態の動作を説明する概念図である。以下、本実施形態の動作について図１〜図７を参照して説明する。

利用者は、本実施形態のテレビ電話機能付き携帯電話機をテレビ電話として使用する際に、第１のカメラ３と第２のカメラ４、第１の表示部１と第２の表示部２を自動で切り換えるモードを利用するか否かを、予め操作部１５から設定（ＯＮまたはＯＦＦ）する。使用者が設定した内容は制御部１６内の記憶部１９に記憶される。

使用者が、本実施形態のテレビ電話機能付き携帯電話機３０の操作部１５からテレビ電話通信を開始すると（Ｓ２）、テレビ電話機能付き携帯電話機のカメラ、表示部自動切り換え設定がされているか否かが判定され（Ｓ３）、カメラ、表示部自動切り換え設定がＯＦＦとされている場合には、音声処理部１３は、第１のマイク７、スピーカ９を起動させ、画像処理部１１は、携帯電話機３０の正面側に配置された第１のカメラ３、第１の表示部１を起動させる（Ｓ４）ことにより、通常の使用形態でのテレビ電話通信が行われる（Ｓ１４）。そしてテレビ電話通信が終了する（Ｓ１５-ＹＥＳ）と、終了となる（Ｓ１６）。なお、テレビ電話通信は表示部を見ながら通信を行う関係上、携帯電話機本体は耳から離した状態で使用されるので、受話にはスピーカ９が用いられる。

一方、（Ｓ３）において、カメラ、表示部自動切り換え設定がＯＮとされている場合には使用者の位置判定が行われる（Ｓ５）。第１の動態センサ５が使用者ａ４０を感知しているとき（Ｓ６）は、この感知信号が動態センサ検出部１３に入力され、動態センサ検出部１３は検出信号ａを画像処理部１１と音声処理部１２に送出する。画像処理部１１は、この検出信号ａを受けたときには、筐体正面側に配置されている第１のカメラ３と第１の表示部１を起動させる（Ｓ７）。また、音声処理部１２は筐体正面側に配置されている第１のマイク７を起動させるとともに、スピーカ９を起動させ、テレビ電話通信が行われる（Ｓ１２）。

図５はこの時のテレビ電話通信中を示す概念図である。使用者ａ４０により使用されているテレビ電話機能付き携帯電話機Ａ３０と使用者ｃ４２により使用されているテレビ電話機能付き携帯電話機Ｂ３１の間で基地局３２を介して送受信しており、テレビ電話機能付き携帯電話機Ａ３０の第１の表示部１には、通話の相手である使用者ｃ４２と、使用者ａ４０（本人）が表示されている。一方、テレビ電話機能付き携帯電話機Ｂ３１の表示部５０には、通話の相手である使用者ａ４０と、使用者ｃ４２（本人）が表示されている。

（Ｓ５）において、第２の動態センサ６が使用者ｂ４１を感知しているとき（Ｓ８）は、この感知信号が動態センサ検出部１３に入力され、動態センサ検出部１３は検出信号ｂを画像処理部１１と音声処理部１２に送出する。画像処理部１１はこの検出信号ｂを受けたときには、筐体背面側に配置されている第２のカメラ４、第２の表示部２を起動させる（Ｓ９）。また、音声処理部１２は筐体背面側に配置されている第２のマイク８を起動させるとともに、スピーカ９を起動させ、テレビ電話通信中となる（Ｓ１２）。

図６はこの時のテレビ電話通信中を示す概念図である。使用者ｂ４１により使用されているテレビ電話機能付き携帯電話機Ａ３０と使用者ｃ４２により使用されているテレビ電話機能付き携帯電話機Ｂ３１の間で基地局３２を介して送受信しており、テレビ電話機能付き携帯電話機Ａ３０の第２の表示部２には、通話の相手である使用者ｃ４２と、使用者ｂ４１（本人）が表示されている。一方、テレビ電話機能付き携帯電話機Ｂ３１の表示部５０には、通話の相手である使用者ｂ４１と、使用者ｃ４２（本人）が表示されている。

また（Ｓ５）において、第１の動態センサ５が使用者ａ４０を感知し、第２の動態センサ６が使用者ｂ４１を感知しているとき（Ｓ１０）は、両方の感知信号が動態センサ検出部１３に入力され、動態センサ検出部１３は検出信号ｃを画像処理部１１と音声処理部１２に送出する。画像処理部１１はこの検出信号ｃを受けたときには、筐体の正面側および背面側に配置されている第１のカメラ３および第２のカメラ４、第１の表示部１および第２の表示部２を起動させる（Ｓ１１）。また、音声処理部１２は、筐体の正面側および背面側に配置されている第１のマイク７および第２のマイク８を起動させるとともに、スピーカ９を起動させ、テレビ電話通信中となる（Ｓ１２）。

図７はこの時のテレビ電話通信中を示す概念図である。使用者ａ４０及び使用者ｂ４１により使用されているテレビ電話機能付き携帯電話機Ａ３０と使用者ｃ４２により使用されているテレビ電話機能付き携帯電話機Ｂ３１の間で基地局３２を介して送受信しており、テレビ電話機能付き携帯電話機Ａ３０の第１の表示部１には通話の相手である使用者ｃ４２と使用者ａ４０（本人）が表示され、テレビ電話機能付き携帯電話機Ａ３０の第２の表示部２には同じ通話の相手である使用者ｃ４２と使用者ｂ４１（本人）が表示されている。一方、テレビ電話機能付き携帯電話機Ｂ３１の表示部５０には、通話の相手である使用者ａ４０および使用者ｂ４１と、使用者ｃ４２（本人）が表示されている。

上記第１の動態センサ５と第２の動態センサ６及び動態センサ検出部１３により使用者の位置を監視してカメラ、表示部、及びマイクを切り替え制御する動作は、カメラ、表示部自動切り換え設定がＯＮとされているときにはテレビ電話通信が継続されている間実行され、テレビ電話通信が終了する（Ｓ１３-ＹＥＳ）と、終了となる（Ｓ１６）。

従って本実施形態によれば、例えば図５に示す使用形態でテレビ電話通信を行っているときに、背面側に搭載されている高性能なカメラ（第２のカメラ４）で撮影した使用者本人ａ４０の画像を通話の相手である使用者ｃ４２に送信したい場合、本テレビ電話機能付き携帯電話機を裏返して、該携帯電話機の背面側を使用者本人ａ４０と対向させれば、背面側のカメラ４と表示部２が自動的に起動され、正面側の表示部１に表示されていた通話の相手である使用者ｃ４２と使用者ｂ４１（本人）の表示も、背面側の表示部２に自動的に切り替わるので、使用者は、テレビ電話使用中に、全く違和感なく携帯電話機の正面側および背面側のカメラを適宜変更して使用しながらテレビ電話を行うことができる。

また、図７に示すように、当該携帯電話機側にいる２人の話者と相手側との間で３者によるテレビ電話するような使用形態の場合、当該携帯電話機側にいる２人の話者は、携帯電話機を挟んで互いに対面する位置で通話することができるので、２人が正面側のカメラと表示部のみを用いて通話する場合のような窮屈な姿勢を採らされることがなく、楽な姿勢で３者によるテレビ電話をすることができる。

なお上記実施形態では、動態センサ検出部１３から出力される判定信号で第１のマイクと第２のマイクも切り替え制御しているが、音声処理部１２には動態センサ検出部１３から出力される判定信号を入力しないで、第１のマイクと第２のマイクは常時動作状態とし、音声処理部１２からは、常時第１のマイクと第２のマイクで集音した音声信号を合成して出力するようにしてもよい。

本発明の実施形態を示すテレビ電話機能付き携帯電話機のブロック図である。本実施形態のテレビ電話機能付き携帯電話機の外観図である。本実施形態の動作を示すフロー図である。本実施形態のテレビ電話機能付き携帯電話機と使用者の位置関係を示す図である。本実施形態の動作を説明する概念図である。本実施形態の動作を説明する概念図である。本実施形態の動作を説明する概念図である。

符号の説明

１第１の表示部
２第２の表示部
３第１のカメラ
４第２のカメラ
５第１の動態センサ
６第２の動態センサ
７第１のマイク
８第２のマイク
９スピーカ
１０レシーバ
１１画像処理部
１２音声処理部
１３動態センサ検出部
１５操作部
１６制御部
１７送受信部
１８アンテナ
１９記憶部
３０テレビ電話装置Ａ
３１相手側テレビ電話装置Ｂ
３２基地局
３４ヒンジ部
３５上部筐体
３６下部筐体
４０使用者ａ
４１使用者ｂ
４２使用者ｃ
５０相手側テレビ電話装置Ｂの表示部

Claims

電話機筐体の正面側に配置された、第１のカメラ、第１の表示部、第１のマイク、および該正面と対向する所定範囲内に位置している人間を検出したときに検出信号を出力する第１の動態センサと、前記電話機筐体の背面側に配置された、第２のカメラ、第２の表示部、第２のマイク、および該背面と対向する所定範囲内に位置している人間を検出したときに検出信号を出力する第２の動態センサと、テレビ電話通信中に、前記第１の動態センサから前記検出信号が出力されているときには前記第１のカメラおよび第１の表示部を起動して画像信号を処理し、前記第２の動態センサから前記検出信号が出力されているときには前記第２のカメラおよび第２の表示部を起動して画像信号を処理する画像処理手段と、前記第１及び第２のマイクで集音された音声信号を処理する音声処理手段を備えていることを特徴とするテレビ電話機能付き携帯電話機。
前記音声処理手段は、前記第１の動態センサから前記検出信号が出力されているときには前記第１のマイクで集音した音声信号を送話信号として出力し、前記第２の動態センサから前記検出信号が出力されているときには前記第２のマイクで集音した音声信号を送話信号として出力する機能を有していることを特徴とする請求項１に記載のテレビ電話機能付き携帯電話機。
前記画像処理手段は、テレビ電話通信中、前記第１の動態センサおよび前記第２の動態センサから前記検出信号が出力されているときには、前記第１のカメラ、第１の表示部、および前記第２のカメラ、第２の表示部の両方を起動し、前記第１の表示部には通信相手側から送信された画像と前記第１のカメラで撮影された画像を表示し、前記第２の表示部には前記通信相手側から送信された画像と前記第２のカメラで撮影された画像を表示する機能を有していることを特徴とする請求項１に記載のテレビ電話機能付き携帯電話機。
前記画像処理手段は、前記第１のカメラ、第１の表示部、および前記第２のカメラ、第２の表示部の両方が起動されているときには、前記第１のカメラと前記第２のカメラで撮影した画像信号が、通信相手側のテレビ電話機能付き携帯電話機の表示部に並べて表示されるように合成して送信する機能を有していることを特徴とする請求項２に記載のテレビ電話機能付き携帯電話機。
前記音声処理手段は、前記第１のカメラ、第１の表示部、および前記第２のカメラ、第２の表示部の両方が起動されているときには、前記第１のマイクと前記第２のマイクで集音した音声を合成した信号を送話信号として出力する機能を有していることを特徴とする請求項３または４に記載のテレビ電話機能付き携帯電話機。