JP2007096470A

JP2007096470A - 監視機能付き移動携帯端末およびその制御方法

Info

Publication number: JP2007096470A
Application number: JP2005280098A
Authority: JP
Inventors: Tomoshi Hosokawa; 知志細川
Original assignee: NEC Corp
Current assignee: NEC Corp
Priority date: 2005-09-27
Filing date: 2005-09-27
Publication date: 2007-04-12

Abstract

【課題】簡易な方式で画像の動きまたは有音の検出を可能とする監視機能を有した移動携帯端末を提供する。
【解決手段】カメラ１１０で撮像した画像と、マイク１１５で集音した音声とを送信する監視機能付き移動携帯端末であって、カメラ１１０から出力された画像データを符号化する映像エンコーダ１２０と、マイク１１５から出力された音声データを符号化して符号化音声データとして出力する音声エンコーダ１２５と、符号化音声データの変化量を検出し、変化量をあらかじめ定めた変化基準量と比較する符号量監視部１５０とを備えており、符号量監視部１５０は、変化量を変化基準量以上であると判定したときに、画像データを音声エンコーダ１２５に入力し、変化量が変化基準量未満であると判定したときに、画像データを映像エンコーダ１２０に入力しない監視機能付き移動携帯端末である。
【選択図】図１

Description

本発明は、移動携帯端末に係り、特に監視機能付きの携帯電話端末の制御方法に関する。

従来、テレビ電話などの動画像、静止画像および音声を伴ったデータを送信する移動携帯端末が一般的に用いられている。

このような従来の移動携帯端末の構成を図３に示す。

従来の移動携帯端末は、画像を取り込むカメラ５１０と、カメラ５１０から出力された画像データを符号化する映像エンコーダ５２０と、集音するためのマイク５１５と、マイク５１５で集音した音を符号化する音声エンコーダ５２５と、映像エンコーダ５２０で符号化された画像データと音声エンコーダ５２５で符号化された音声データとを多重化する多重化部５４０と、多重化されたデータを送信する送信部５６０と、基地局へ送信部５６０から出力された高周波信号を送信するアンテナ５７０とを備えるほか、カメラ５１０で取り込んだ入力画像に動きがあるかどうかを検出する動き検出部５３０と、動き検出部５３０で動きを検出したときに閉になり接続されるスイッチ５９１〜５９３とを備えて構成される。

移動携帯端末は、カメラ５１０から出力された画像データを動き検出部５３０に入力し、動き検出部５３０で画像データに動きが認められる場合に、スイッチ５９１〜５９３を閉にして、カメラ５１０からの画像データを映像エンコーダ５２０に入力し、マイク５１５の音声データを音声エンコーダ５２５に入力する。

映像エンコーダ５２０から出力された符号化された画像データと、音声エンコーダ５２５から出力された符号化された音声データとは、多重化部５４０に入力され、多重化されたデータは、送信部５６０に入力され変調、高周波増幅された後、アンテナ５７０を介して送信され、画像・音声データの送出が開始される。

この移動携帯端末に関する従来技術として、映像信号での動き部分変化に伴う画像データ量変化を検出する変化検出手段を有した動画テレビ電話装置が開示されている（特許文献１参照）。
特開平０３−２４９８６０号公報

しかしながら、動き検出部５３０は、専用の方式にて構成されており精度が高い反面、実装の難易度が高いうえ、専用の処理を追加するためのコストが高いという問題があった。

逆に、これらの要因により動き検出部５３０の実装を省略する場合、監視対象に動きがあるかどうかわからないため、映像エンコーダ５２０と音声エンコーダ５２５とを常に動作させている必要があり、移動携帯端末の消費電力が多くなるという問題があった。

また、送信部５６０を常に動作させて送信されることになってしまうため、通信トラフィックが常に発生してしまうという問題があった。

そこで本発明の目的は、音声エンコーダまたは映像エンコーダの出力する符号化データの特性を利用して、簡易な方式で画像の動きまたは有音の検出を可能とする監視機能を有した移動携帯端末を実現することにある。

上記目的を達成するために、本発明の監視機能付き移動携帯端末の第１の発明は、カメラで撮像した画像と、マイクで集音した音声とを送信する監視機能付き移動携帯端末であって、
前記カメラから出力された画像データを符号化する映像エンコーダと、
前記マイクから出力された音声データを符号化して符号化音声データとして出力する音声エンコーダと、
前記音声エンコーダが出力する前記符号化音声データの変化量を検出し、該変化量をあらかじめ定めた変化基準量と比較する符号量監視部と、を備えており、
前記符号量監視部は、前記符号化音声データの前記変化量を前記変化基準量以上であると判定したときに、前記画像データを前記映像エンコーダに入力し、
前記変化量が前記変化基準量未満であると判定したときに、前記画像データを前記映像エンコーダに入力しないことを特徴とする監視機能付き移動携帯端末である。

第２の発明は、カメラで撮像した画像と、マイクで集音した音声とを送信する監視機能付き移動携帯端末であって、
前記カメラから出力された画像データを符号化して符号化画像データとして出力する映像エンコーダと、
前記マイクから出力された音声データを符号化する音声エンコーダと、
前記映像エンコーダが出力する前記符号化画像データの変化量を検出し、該変化量をあらかじめ定めた変化基準量と比較する符号量監視部と、を備えており、
前記符号量監視部は、前記符号化画像データの前記変化量を前記変化基準量以上であると判定したときに、前記音声データを前記音声エンコーダに入力し、
前記変化量が前記変化基準量未満であると判定したときに、前記音声データを前記音声エンコーダに入力しないことを特徴とする監視機能付き移動携帯端末である。

第３の発明は、第１の発明に記載の監視機能付き移動携帯端末において、
前記符号化音声データの変化は、前記マイクに前記音声が入力されたことを示すものである。

第４の発明は、第１の発明に記載の監視機能付き移動携帯端末において、
前記符号化音声データの変化は、前記音声の周波数が変化したことを示すものである。

第５の発明は、第２の発明に記載の監視機能付き移動携帯端末において、
前記符号化画像データの変化は、前記画像に動きがあることを示すものである。

第６の発明は、第２の発明に記載の監視機能付き移動携帯端末において、
前記符号化画像データの変化は、前記画像に輝度の変化があることを示す監視機能付き移動携帯端末。

第７の発明は、カメラで撮像した画像と、マイクで集音した音声とを送信する監視機能付き移動携帯端末の制御方法であって、
前記カメラから出力された画像データを符号化するステップと、
前記マイクから出力された音声データを符号化して符号化音声データとして出力する第１のステップと、
前記第１のステップで出力する前記符号化音声データの変化量を検出し、該変化量をあらかじめ定めた変化基準量と比較するステップと、を備えており、
前記符号化音声データの前記変化量を前記変化基準量以上であると判定したときに、前記画像データを前記映像エンコーダに入力し、
前記変化量が前記変化基準量未満であると判定したときに、前記画像データを前記映像エンコーダに入力しない監視機能付き移動携帯端末の制御方法である。

第８の発明は、カメラで撮像した画像と、カメラで撮像した画像と、マイクで集音した音声とを送信する監視機能付き移動携帯端末の制御方法であって、
前記カメラから出力された画像データを符号化して符号化画像データとして出力する第１のステップと、
前記マイクから出力された音声データを符号化するステップと、
前記第１のステップで出力する前記符号化画像データの変化量を検出し、該変化量をあらかじめ定めた変化基準量と比較するステップと、を備えており、
前記符号化画像データの前記変化量を前記変化基準量以上であると判定したときに、前記音声データを前記音声エンコーダに入力し、
前記変化量が前記変化基準量未満であると判定したときに、前記音声データを前記音声エンコーダに入力しない監視機能付き移動携帯端末の制御方法である。

本移動携帯端末は、カメラとマイクとを備えて監視機能を有しているものであり、このカメラの撮像した画像データと、マイクの集音した音声データとは、符号化された後、送信される。

この符号化された音声データまたは符号化された画像データのデータ量の変化を検出することは、画像に動き、輝度などの変化があることを検出したり、音声がマイクに入力されたことを検出することに対応している。

従来は、画像の動きを検出するための専用の動き検出手段を用いて検出していたが、本発明は符号化された音声データまたは画像データのデータ量の変化を検出する機能を有する符号量監視部を設けている。

この符号量監視部は、音声データ、画像データの種類を問わずデータの変化量を検出できる汎用性のあるデータ処理機能によっており、このため実現が容易かつ低価格で実現できる。

本移動携帯端末は、符号量監視部のデータの変化量の検出により、変化が大きいときに画像データおよび音声データを送信することができるため、消費電力の低減にも寄与している。

本発明によれば、簡易な方式で画像の動きまたは有音の検出を可能とする監視機能を有した移動携帯端末を得られる。

本発明を実施するための形態について図面を参照して詳細に説明する。

図１は、本実施形態の移動携帯端末の構成例を示すブロック図である。

図示したように、監視機能付きの移動携帯端末は、監視対象などの画像を撮像するカメラ１１０と、カメラ１１０から出力された画像データを符号化して圧縮する映像エンコーダ１２０と、集音し入力された音声に応じた音声データを出力するマイク１１５と、マイク１１５から出力された音声データを符号化して圧縮し符号化音声データとして出力する音声エンコーダ１２５と、音声エンコーダ１２５から出力された符号化音声データを記憶するバッファメモリ１３０と、映像エンコーダ１２０で符号化された画像データと音声エンコーダ１２５で符号化された符号化音声データとを多重化する多重化部１４０と、多重化されたデータを送信する送信部１６０と、基地局へ送信部１６０から出力された高周波信号を送信するアンテナ１７０とを備えるほか、符号化音声データの変化量を検出する符号量監視部１５０と、符号量監視部１５０で変化を検出したときに開閉するスイッチ１９１、１９２とを備えて構成される。

カメラ１１０の出力端はスイッチ１９１の一端に接続され、スイッチ１９１の他端は映像エンコーダ１２０の入力端に接続され、映像エンコーダ１２０の出力端は多重化部１４０の入力端に接続され、多重化部１４０の出力端はスイッチ１９２の一端に接続され、スイッチ１９２の他端は送信部１６０の入力端に接続され、送信部１６０の出力端はアンテナ１７０に接続されている。

マイク１１５の出力端は音声エンコーダ１２５の入力端に接続され、音声エンコーダ１２５の出力端はバッファメモリ１３０の入力端に接続され、バッファメモリ１３０の出力端は多重化部１４０の入力端に接続され、バッファメモリ１３０の出力端は符号量監視部１５０の入力端に接続され、符号量監視部１５０の出力端はスイッチ１９１の開閉制御端およびスイッチ１９２の開閉制御端に接続されている。

音声エンコーダ１２５は、例えば一般的にテレビ電話機能のために用いる通信用のエンコーダであるとよく、このため、音声エンコーダ１２５は無音検出機能を有している。

この音声エンコーダ１２５の無音検出機能は、マイク１１５から入力された入力音声に対して有効な音声があるかどうかを判定し、有効な音声が無いと判断した場合には生成して出力する符号量を抑制する機能を有し、この機能のため送信部１６０から送信される高周波信号の通信トラフィックの低減を実現することができる。

このような有音／無音検出機能を有した音声エンコーダ１２５として、例えば音声圧縮／伸張機能を有したＡＭＲ（Adaptive Multi Rate CODEC）方式による音声エンコーダ１２５がある。

符号量監視部１５０は、音声エンコーダ１２５が出力した符号化音声データが蓄積されているバッファメモリ１３０の記憶内容を参照し、時間当たりの符号量の変化があらかじめ定めた変化基準量（一定量）に達しているかどうかの比較・判定を行う。

また、符号量監視部１５０が制御するスイッチ１９１、１９２のうち、スイッチ１９１がカメラ１１０と映像エンコーダ１２０との間に設けられていることにより、マイク１１５から必要な音声が入力されているときに、スイッチ１９１が閉となり、カメラ１１０から出力された画像データが映像エンコーダ１２０に入力される。

スイッチ１９２が、多重化部１４０と送信部１６０との間に設けられていることにより、スイッチ１９２が閉となり、多重化部１４０から必要な多重化信号が出力されているときに、送信部１６０から出力された高周波信号はアンテナ１７０を介して送信される。

カメラ１１０は、監視対象を撮像するための撮像装置であり、一般的に移動携帯端末である携帯電話端末の筐体に内蔵されている。

マイク１１５は、移動携帯端末周囲の音声を拾うための集音装置であり、カメラ１１０と同様に携帯電話端末の筐体に内蔵されている。

このマイク１１５はこのように筺体に内蔵されているほか、テレビ電話機能にてハンズフリー通話を実現するために使用されている外付けのマイクなどであってもよい。

映像エンコーダ１２０は、カメラ１１０から入力された画像データを伝送可能な形式に符号化して圧縮する機能を有し、例えばフレーム間の差分のみを符号化する方式によるものを用いる。

この符号化方式に基づくエンコーダとしては、例えばＭＰＥＧ（Moving Picture Experts Group）−４方式によるエンコーダがある。

音声エンコーダ１２５にはバッファメモリ１３０が接続されており、符号化した符号化音声データを一旦蓄積するようになっている。バッファメモリ１３０は通常のＲＡＭ（Random Access Memory）が使用されるとよい。

多重化部１４０は、バッファメモリ１３０に蓄積された符号化音声データと映像エンコーダ１２０から出力された画像データを一つのシリアルデータ列にまとめる機能を有しており、この機能は例えば、一般的にソフトウエアにより実装されるとよい。

多重化部１４０によりまとめられたシリアルデータ列は、一本の伝送路もしくは１チャネルにて送出可能なデータとなっている。多重化部１４０では、例えばＩＴＵ−ＴのＨ．２２３（低ビットレートのマルチメディア通信のための多重プロトコル）による多重化方式が用いられる。

次に、本移動携帯端末の動作について説明する。

マイク１１５から音声が入力されると、マイク１１５はこの入力された音声に応じた音声データを音声エンコーダ１２５に出力する。マイク１１５から音声データが入力された音声エンコーダ１２５は、この音声データを符号化して圧縮し、バッファメモリ１３０に出力する。

バッファメモリ１３０は、この符号化された音声データを記憶するとともに、多重化部１４０および符号量監視部１５０に出力する。

符号化音声データが入力された符号量監視部１５０では、それまで入力された符号化音声データとのデータ量の変化を検出する。

ここで、音声エンコーダ１２５の無音検出機能が無音と判断すると、バッファメモリ１３０に蓄積される時間当たりの音声データ量は減少する。

この場合、バッファメモリ１３０内の時間当たりのデータ量の変化量があらかじめ定めた一定量（変化基準量）未満であるため、符号量監視部１５０はスイッチ１９１およびスイッチ１９２をＯＦＦにする。

または音声エンコーダ１２５が、バッファメモリ１３０を介して無音であることを符号量監視部１５０に通知して、スイッチ１９１およびスイッチ１９２をＯＦＦにすることでもよい。

符号量監視部１５０は、この無音検出機能によるデータ減少を検出するか、無音であることの通知をうけたときにはスイッチ１９１とスイッチ１９２を開（ＯＦＦ）にし、映像エンコーダ１２０へと送信部１６０への入力を停止することで、映像エンコーダ１２０と送信部１６０との動作を停止させる。また送信部１６０の動作が停止することにより、送信部１６０からのデータの送出も停止する。

音声エンコーダ１２５の無音検出機能が有音と判断すると、時間当たりの符号化音声データの変化量が増大するため、符号量監視部１５０はこの符号化音声データ量の増加に応じて、符号化音声データの変化量が変化基準量以上となった場合にはスイッチ１９１とスイッチ１９２を閉（ＯＮ）にする。

ここで、音声エンコーダ１２５の無音検出機能による有音／無音の判定の他、背後の雑音・騒音と通話者の音声とを分けて、通話者の音声が入力されているかどうかを判定してもよい。

この場合は、通話者の音声と背後の雑音のレベルの強さ、周波数、音の規則性のあるなしなどにより判断して、必要な音声が入力されているかを判定するとよい。

このように判定することにより、単に符号化音声データが増加したことにより、画像データの入力を制御する場合に、マイク１１５で集音された音声が、雑音、騒音である場合に、これを話者の音声と誤認識してスイッチ１９１が閉になることがなく、話者の音声のみに反応して、画像データを映像エンコーダ１２０に取り込むことができる。

当然、この移動携帯端末を固定して監視用に用いる場合には、人間の音声によって符号量監視部１５０がスイッチ１９１、１９２の閉にすることができるほか、人間の発する音声以外の機械的な音、ドリル音などによっても、符号量監視部１５０がスイッチ１９１、１９２の閉にすることができるようにしておくとよい。

例えば、ある特定の周波数の音の増減により、スイッチ１９１、１９２の開閉を制御しようとする場合には、音声エンコーダ１２５で符号化された符号化音声データがバッファメモリ１３０に記憶される際に、周波数ごとの符号化音声データを分類して記憶する。この周波数ごとの符号化音声データにより、符号量監視部１５０は、このバッファメモリ１３０に記憶された周波数ごとの符号化音声データの内、必要とする周波数の符号化音声データを読み出して、この読み出した符号化音声データの増減の変化を監視することができる。

スイッチ１９１が閉となることにより、カメラ１１０と映像エンコーダ１２０とはスイッチ１９１を介して接続され、カメラ１１０から出力された画像データが映像エンコーダ１２０に入力される。

映像エンコーダ１２０は、入力された画像データを符号化して出力し、多重化部１４０に入力する。

符号化音声データと符号化された画像データとが入力された多重化部１４０は、このこの符号化音声データと画像データとを多重化処理して出力し、送信部１６０に入力する。

送信部１６０は、入力された多重化信号により変調を掛け、この変調を掛けられた高周波信号を電力増幅処理するなどして、出力する。

送信部１６０から出力された高周波信号は、アンテナ１７０に入力され、アンテナ１７０から送信される。

このように、本実施例によりカメラ１１０からの画像データの変化を符号量監視部１５０で検出して、この変化に基づいてマイク１１５の音声を符号化した音声データとし、多重化部１４０でこの符号化された画像データと多重化して、送信することができる。

この移動携帯端末は、従来の画像および音声の符号化を行うエンコーダを使用したまま、簡単な構成の符号量監視部を設けることで、符号化音声データの変化量の検出および送信などの制御機能を実現できる。

この符号量監視部は、既に述べたようにデータ量の変化を検出する機能を、ソフトウェアなどにより簡単に構成し実現することができるので、移動携帯端末のコストを抑えることができる。

また、本移動携帯端末は必要なときにのみ音声の符号化、多重化された信号の送信を行うので、使用する際の消費電力を抑えることができる。

以上説明したように、本発明によれば次に示すような優れた効果を得られる。
（１）このように、本発明では符号化音声データの時間当たりの符号量の変化を監視する符号量監視部を設けることで、マイクで集音された音声の有音／無音または特定の周波数の音の変化などを検出することを簡単な構成で可能としている。
（２）また音声の変化に応じて画像のエンコードおよび画像・音声データの送出を制御する機能を有することで、携帯電話端末における消費電力の低減・通信トラフィックの低減を実現できる。
（３）これらの機能を実現するためのシステムは、一般的なテレビ電話機能付き携帯電話端末の機能をもとに構成できるため、非常に低コストで監視機能を実現することが可能となる。
（４）また、本発明はテレビ電話機能を持つ一般的な携帯電話端末にて搭載されている機能に符号量監視部などのわずかな機能追加で実現可能であるため、コストの点でも有利である。
（５）音声エンコーダのデータ量変化により、符号量監視部が検出を行って画像データの入力制御をする場合には、従来技術で生じるような音声の頭切れがなくなる。

次に、本移動携帯端末の実施例について説明する。

図２は、本実施例の移動携帯端末の構成例を示すブロック図である。

図示したように、本実施例の監視機能付きの移動携帯端末は、監視対象などの画像を撮像するカメラ１１０と、カメラ１１０から出力された画像データを符号化して圧縮し符号化画像データとして出力する映像エンコーダ１２０と、映像エンコーダ１２０から出力された符号化画像データを記憶するバッファメモリ１３１と、集音するためのマイク１１５と、マイク１１５で集音した音を符号化して圧縮する音声エンコーダ１２５と、映像エンコーダ１２０の符号化画像データと音声エンコーダ１２５で符号化された音声データとを多重化する多重化部１４０と、多重化されたデータを送信する送信部１６０と、基地局へ送信部１６０から出力された高周波信号を送信するアンテナ１７０とを備えるほか、カメラ１１０で取り込んだ入力画像の変化を検出する符号量監視部１５１と、符号量監視部１５１で変化を検出したときに開閉するスイッチ１９３、１９４とを備えて構成される。

カメラ１１０の出力端は映像エンコーダ１２０の入力端に接続され、映像エンコーダ１２０の出力端はバッファメモリ１３１の入力端に接続され、バッファメモリ１３１の出力端は多重化部１４０の入力端に接続され、多重化部１４０の出力端はスイッチ１９４の一端に接続され、スイッチ１９４の他端は送信部１６０の入力端に接続され、送信部１６０の出力端はアンテナ１７０に接続されている。

マイク１１５の出力端はスイッチ１９３の一端に接続され、スイッチ１９３の他端は音声エンコーダ１２５の入力端に接続され、音声エンコーダ１２５の出力端は多重化部１４０の入力端に接続され、バッファメモリ１３１の出力端は符号量監視部１５１の入力端に接続され、符号量監視部１５１の出力端はスイッチ１９４の開閉制御端およびスイッチ１９３の開閉制御端に接続されている。

本実施例は、既に説明した実施形態と同様、テレビ電話機能をもった携帯電話端末の機能をもとに構成されており、図１に示す実施形態に対し画像と音声の関係を逆にしたものである。

音声エンコーダ１２５は、マイク１１５から入力された音声を伝送可能な形式に符号化する機能があり、既に述べた実施形態と同様、例えばＡＭＲ方式によるエンコーダなどが用いられる。

音声エンコーダ１２５の入力側は、スイッチ１９３を介してマイク１１５と接続されており、スイッチ１９３が閉となることにより、マイク１１５と音声エンコーダ１２５とはスイッチ１９３を介して接続され、マイク１１５から出力された音声データが音声エンコーダ１２５に入力される。

スイッチ１９４が、多重化部１４０と送信部１６０との間に設けられていることにより、スイッチ１９２が閉となり、多重化部１４０から必要な多重化信号が出力されているときに、送信部１６０から出力された高周波信号はアンテナ１７０を介して送信される。

映像エンコーダ１２０からの符号化画像データ出力は、カメラ１１０で撮像される監視対象の動きが無い、または少ない場合には、映像エンコーダ１２０が生成する時間当たりの符号化画像データ量は非常に小さくなる。

これは、映像エンコーダ１２０が各フレーム間の差分のみを符号化する方式である場合に生じる。この差分を取る方式では、画像の動きが少ない場合は差分も少なくなり、情報量が小さいため効率的な符号化が可能で、時間当たりの符号化画像データ量は小さくなる。

送信部１６０は、実際に無線によりデータ送信を行う機能を有し、携帯電話端末における上り部分（アップリンク）と同一である。

符号量監視部１５１は、バッファメモリ１３１に蓄積された符号化画像データの量を監視しており、時間当たりのデータの変化量があらかじめ定めた一定量（変化基準量）以上になるとスイッチ１９３およびスイッチ１９４を閉（ＯＮ）にする機能を持つ。

符号量監視部１５１は、例えばソフトウエアにより容易に実装が可能である。

次に、本移動携帯端末の動作について説明する。

カメラ１１０に画像が入力されると、カメラ１１０はこの入力された画像に応じた画像出力を映像エンコーダ１２０に出力する。カメラ１１０からの画像データが入力された映像エンコーダ１２０は、この画像出力を符号化して圧縮し、バッファメモリ１３１に出力する。

バッファメモリ１３１は、この符号化された画像出力を記憶するとともに、多重化部１４０および符号量監視部１５１に出力する。

符号化された符号化画像データが入力された符号量監視部１５１では、それまで入力された符号化画像データとのデータ量の変化を検出する。

ここで、映像エンコーダ１２０に入力される画像が動かない場合には、バッファメモリ１３１に蓄積される時間当たりの符号化画像データ量には変化が見られない。

また、画像が動くことによる変化の差分をバッファメモリ１３１に記憶する場合には、画像が動かないときには、画像データの変化の差分がないため、バッファメモリ１３１に蓄積されるデータ量（符号量）は、増えない。

符号量監視部１５１は、この画像が動かず変化がないことを検出したときにはスイッチ１９３とスイッチ１９４を開（ＯＦＦ）にし、音声エンコーダ１２５へと送信部１６０への入力を停止することで、音声エンコーダ１２５と送信部１６０との動作を停止させる。

カメラ１１０で撮像される監視対象に動きが生じると、映像エンコーダ１２０が生成する時間当たりの画像データ量が大きくなる。

符号量監視部１５１は、この音声データ量の増加に応じてバッファメモリ１３１内の時間当たりデータの変化量があらかじめ定めた一定量（変化基準量）以上となると、バッファメモリ１３１からの画像データに変化ありと判断して、スイッチ１９３とスイッチ１９４を閉（ＯＮ）にする。

ここで、映像エンコーダ１２０の処理により画像の動きのある／無しを判定する他、画像が動かない場合の各フレームの明るさの変化、色の変化などを併せて判定してもよい。

これにより、画像が動かないか、画像の動きがほとんどない場合でも、画像の周囲の状況の変化による、画像の明るさの変化、色の変化を検出することで、画像自体は動かないが画像の周辺で何らかの変化が生じた場合などにも対応できる。

また、画像のフレームを分割して、分割した各画像ごとに変化のあるなしを判定することで、画像の特定の位置の変化を捉えて変化があったか否かを判定することができる。

このように判定することにより、単に符号化画像データが変化したことにより、音声データの入力を制御する場合に、画像の周囲に動きの変化がないとされ、このため、スイッチ１９３、１９４が閉になることがなく周囲の状況の変化を見落とすようなことがなくなり、直接撮像された監視対象の画像のみの変化ではなく、画像の対象の周囲の変化をも検出することができる。

例えば、画像は全く動かないが、分割したある特定の領域だけ明るくなったことにより、監視対象の画像の周囲で何らかの変化が生じて、この変化のため画像の特定の領域に明るさの変化が生じ、この明るさの変化のため、符号量監視部１５１はスイッチ１９３、１９４を閉にして、この画像の変化を音声エンコーダ１２５の音声データ出力と共に、多重化部１４０により多重化して、送信部１６０から出力する。

映像エンコーダ１２５で符号化画像データがバッファメモリ１３１に記憶される際に、分割された領域ごとの符号化画像データを分類して記憶することで、符号量監視部１５１は、このバッファメモリ１３１に記憶された領域ごとの符号化画像データの内、必要とする領域の符号化画像データを読み出して、この読み出した符号化画像データの増減の変化を監視することができる。

スイッチ１９３が閉となることにより、マイク１１５と音声エンコーダ１２５とはスイッチ１９３を介して接続され、マイク１１５から出力された音声データは音声エンコーダ１２５に入力される。

映像エンコーダ１２０は、入力された音声データを符号化して出力し、多重化部１４０に入力する。

符号化された音声データと符号化画像データとが入力された多重化部１４０は、このこの音声データと符号化画像データとを多重化処理して出力し、送信部１６０に入力する。

送信部１６０は、入力された多重化信号により変調を掛け、この変調を掛けられた高周波信号を増幅処理するなどして、出力する。

このように、本実施例によりカメラ１１０からの符号化画像データの変化を符号量監視部１５１で検出して、この変化に基づいてマイク１１５からの音声を符号化し、多重化部１４０で符号化画像データと多重化して、送信することができる。

この移動携帯端末は、従来のような画像の動き検出を行う専用の素子を使用することなく、符号化した音声データのデータ量の増減変化を検出することで画像データの取り込み、符号化などの制御を行うか否かを決定することができる機能を有する。

従来の画像および音声の符号化を行うエンコーダを使用したまま、この簡単な構成の符号量監視部を設けることで、この検出および制御機能を実現できる。

以上説明したように、本実施例によれば次に示すような優れた効果を得られる。
（１）このように、本実施例では移動携帯端末に、符号化画像データの時間当たりの符号量の変化を監視する符号量監視部を設けることで、カメラから入力された映像の動きまたは映像の明るさの変化などを検出することを簡単な構成で可能としている。
（２）また画像データの変化に応じて音声のエンコードおよび映像・音声データの送出を制御する機能を有することで、携帯電話端末における消費電力の低減・通信トラフィックの低減を実現できる。
（３）これらの機能を実現するためのシステムは、一般的なテレビ電話機能付き携帯電話端末の機能をもとに構成できるため、非常に低コストで監視機能を実現することが可能となる。

本実施形態の監視機能付きの移動携帯端末の構成例を示すブロック図である。実施例１の監視機能付きの移動携帯端末の構成例を示すブロック図である。従来の監視機能付きの移動携帯端末の構成例を示すブロック図である。

符号の説明

１１０カメラ
１１５マイク
１２０映像エンコーダ
１２５音声エンコーダ
１３０バッファメモリ
１３１バッファメモリ
１４０多重化部
１５０符号量監視部
１５１符号量監視部
１６０送信部
１７０アンテナ
１９１〜１９４スイッチ
５１０カメラ
５１５マイク
５２０映像エンコーダ
５２５音声エンコーダ
５３０動き検出部
５４０多重化部
５６０送信部
５７０アンテナ
５９１〜５９３スイッチ

Claims

カメラで撮像した画像と、マイクで集音した音声とを送信する監視機能付き移動携帯端末であって、
前記カメラから出力された画像データを符号化する映像エンコーダと、
前記マイクから出力された音声データを符号化して符号化音声データとして出力する音声エンコーダと、
前記音声エンコーダが出力する前記符号化音声データの変化量を検出し、該変化量をあらかじめ定めた変化基準量と比較する符号量監視部と、を備えており、
前記符号量監視部は、前記符号化音声データの前記変化量を前記変化基準量以上であると判定したときに、前記画像データを前記映像エンコーダに入力し、
前記変化量が前記変化基準量未満であると判定したときに、前記画像データを前記映像エンコーダに入力しないことを特徴とする監視機能付き移動携帯端末。
カメラで撮像した画像と、マイクで集音した音声とを送信する監視機能付き移動携帯端末であって、
前記カメラから出力された画像データを符号化して符号化画像データとして出力する映像エンコーダと、
前記マイクから出力された音声データを符号化する音声エンコーダと、
前記映像エンコーダが出力する前記符号化画像データの変化量を検出し、該変化量をあらかじめ定めた変化基準量と比較する符号量監視部と、を備えており、
前記符号量監視部は、前記符号化画像データの前記変化量を前記変化基準量以上であると判定したときに、前記音声データを前記音声エンコーダに入力し、
前記変化量が前記変化基準量未満であると判定したときに、前記音声データを前記音声エンコーダに入力しないことを特徴とする監視機能付き移動携帯端末。
請求項１に記載の監視機能付き移動携帯端末において、
前記符号化音声データの変化は、前記マイクに前記音声が入力されたことを示す監視機能付き移動携帯端末。
請求項１に記載の監視機能付き移動携帯端末において、
前記符号化音声データの変化は、前記音声の周波数が変化したことを示す監視機能付き移動携帯端末。
請求項２に記載の監視機能付き移動携帯端末において、
前記符号化画像データの変化は、前記画像に動きがあることを示す監視機能付き移動携帯端末。
請求項２に記載の監視機能付き移動携帯端末において、
前記符号化画像データの変化は、前記画像に輝度の変化があることを示す監視機能付き移動携帯端末。
カメラで撮像した画像と、マイクで集音した音声とを送信する監視機能付き移動携帯端末の制御方法であって、
前記カメラから出力された画像データを符号化するステップと、
前記マイクから出力された音声データを符号化して符号化音声データとして出力する第１のステップと、
前記第１のステップで出力する前記符号化音声データの変化量を検出し、該変化量をあらかじめ定めた変化基準量と比較するステップと、を備えており、
前記符号化音声データの前記変化量を前記変化基準量以上であると判定したときに、前記画像データを前記映像エンコーダに入力し、
前記変化量が前記変化基準量未満であると判定したときに、前記画像データを前記映像エンコーダに入力しないことを特徴とする監視機能付き移動携帯端末の制御方法。
カメラで撮像した画像と、マイクで集音した音声とを送信する監視機能付き移動携帯端末の制御方法であって、
前記カメラから出力された画像データを符号化して符号化画像データとして出力する第１のステップと、
前記マイクから出力された音声データを符号化するステップと、
前記第１のステップで出力する前記符号化画像データの変化量を検出し、該変化量をあらかじめ定めた変化基準量と比較するステップと、を備えており、
前記符号化画像データの前記変化量を前記変化基準量以上であると判定したときに、前記音声データを前記音声エンコーダに入力し、
前記変化量が前記変化基準量未満であると判定したときに、前記音声データを前記音声エンコーダに入力しないことを特徴とする監視機能付き移動携帯端末の制御方法。